CN106411877B - 一种基于增强现实ar技术的视频直播赠送礼物的实现方法及系统 - Google Patents
一种基于增强现实ar技术的视频直播赠送礼物的实现方法及系统 Download PDFInfo
- Publication number
- CN106411877B CN106411877B CN201610846017.8A CN201610846017A CN106411877B CN 106411877 B CN106411877 B CN 106411877B CN 201610846017 A CN201610846017 A CN 201610846017A CN 106411877 B CN106411877 B CN 106411877B
- Authority
- CN
- China
- Prior art keywords
- present
- user
- space coordinate
- pixel
- main broadcaster
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 230000003190 augmentative effect Effects 0.000 title claims description 17
- 230000005540 biological transmission Effects 0.000 claims description 18
- 239000000725 suspension Substances 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 4
- 230000000694 effects Effects 0.000 claims description 3
- 239000003086 colorant Substances 0.000 claims 1
- 230000002708 enhancing effect Effects 0.000 abstract description 3
- 230000006870 function Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 235000010627 Phaseolus vulgaris Nutrition 0.000 description 1
- 244000046052 Phaseolus vulgaris Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Physics & Mathematics (AREA)
- Finance (AREA)
- Game Theory and Decision Science (AREA)
- Economics (AREA)
- Marketing (AREA)
- Entrepreneurship & Innovation (AREA)
- General Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种基于AR技术的视频直播赠送礼物的实现方法及系统，涉及视频直播技术领域。该方法包括：用户端在用户选择好要赠送的AR礼物后记录下该AR礼物的ID；判断该AR礼物是否可以赠送，不能赠送则结束；能赠送则显示主播的直播界面并在直播界面中，根据用户选择的礼物投放的位置，获取对应的空间坐标及该空间坐标周围指定范围内的像素点的颜色值，并根据用户调整的礼物大小，获取对应的礼物缩放比例；再将相应的数据传输至主播端；主播端在判断礼物投放位置没有被遮挡后，将对赠送的AR礼物进行显示。本发明能在视频直播中将赠送礼物与AR技术进行合理的结合，从而提高用户赠送礼物的主动性、增强互动性，使得用户体验更好。
Description
技术领域
本发明涉及视频直播技术领域，具体来讲是一种基于AR (Augmented Reality，增强现实)技术的视频直播赠送礼物的实现方法及系统。
背景技术
随着直播行业的快速发展，观众与自己喜爱的主播之间的互动需求越来越多。目前，为了刺激用户的观看兴致，提高观看量和用户粘性，推出了一些例如直播中赠送礼物的互动方式。但是，现有的赠送礼物方式中，所赠送的礼物仅是一个普通的图画，给予观众和主播展示的也仅是一个简单动画，可操作性不强，使得用户与主播之间的互动还是过少，赠送礼物的主动性也不高，使得用户体验较差。
而增强现实技术(Augmented Reality，简称AR)，是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。这种技术由1990年提出，随着随身电子产品CPU运算能力的提升，增强现实技术的使用也越来越广泛。
在视频直播中，如果将赠送礼物与增强现实这二者合二为一，将会给用户带来一种全新的用户体验，观众与主播的互动方式也将会更多，更灵活，更新颖。但是，如何在视频直播中将赠送礼物与增强现实技术进行合理的结合还缺乏具体的实现方法和统一的标准。因此，这也成为了直播领域亟待解决的问题。
发明内容
本发明的目的是为了克服上述背景技术的不足，提供一种基于 AR技术的视频直播赠送礼物的实现方法及系统，能在视频直播中将赠送礼物与AR技术进行合理的结合，从而提高用户赠送礼物的主动性、增强互动性，使得用户体验更好。
为达到以上目的，本发明提供一种基于AR技术的视频直播赠送礼物的实现方法，包括以下步骤：
步骤S1：当用户需要向主播赠送礼物时，用户端向用户提供礼物选择界面供用户进行AR礼物的选择；并在用户选择好要赠送的 AR礼物后，记录下该AR礼物的ID，转入步骤S2；
步骤S2：判断用户所选择的AR礼物是否可以赠送，若是，转入步骤S3；否则，结束；
步骤S3：用户端显示主播的直播界面；在直播界面中，根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标及该空间坐标周围指定范围内的像素点的颜色值，并根据用户调整的礼物大小，获取对应的礼物缩放比例，转入步骤S4；
步骤S4：用户端将步骤S3中获取的所有数据以及步骤S1中记录的AR礼物ID通过直播服务器发送至主播端，转入步骤S5；
步骤S5：主播端根据接收到的数据中礼物投放位置的空间坐标，获取当前直播画面中该空间坐标周围指定范围内的像素点的颜色值；将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断礼物投放位置的空间坐标对应的点是否被遮挡，若是，不显示AR礼物，返回步骤S5；若否，转入步骤S6；
步骤S6：主播端从接收到的数据中获取到AR礼物ID和礼物缩放比例；根据礼物投放位置的空间坐标，在直播画面的相应位置处显示与AR礼物ID相对应的AR礼物，并按照礼物缩放比例进行等比缩放显示，结束。
本发明还提供一种基于AR技术的视频直播赠送礼物的实现系统，该系统包括客户端和直播服务器，该客户端分为用户端和主播端，所述用户端包括AR礼物选择模块、AR礼物判断模块、AR礼物数据获取模块和AR礼物数据发送模块；所述主播端包括AR礼物数据处理模块和AR礼物显示模块。
其中，所述AR礼物选择模块用于：当用户需要向主播赠送礼物时，向用户提供礼物选择界面供用户进行AR礼物的选择；并在用户选择好要赠送的AR礼物后，记录下该AR礼物的ID，向AR礼物判断模块发送判断信号；
所述AR礼物判断模块用于：收到判断信号后，判断用户所选择的AR礼物是否可以赠送，若是，向AR礼物数据获取模块发送获取信号；否则，结束所有操作；
所述AR礼物数据获取模块用于：收到获取信号后，显示主播的直播界面；在直播界面中，根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标及该空间坐标周围指定范围内的像素点的颜色值，并根据用户调整的礼物大小，获取对应的礼物缩放比例，向AR礼物数据发送模块发送传输信号；
所述AR礼物数据发送模块用于：收到传输信号后，将AR礼物数据获取模块获取的所有数据以及AR礼物选择模块记录的AR礼物 ID通过所述直播服务器发送至主播端，并向AR礼物数据处理模块发送处理信号；
所述AR礼物数据处理模块用于：收到处理信号后，根据接收到的数据中礼物投放位置的空间坐标，获取当前直播画面中该空间坐标周围指定范围内的像素点的颜色值；将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断礼物投放位置的空间坐标对应的点是否被遮挡，若是，不显示AR礼物并发出处理信号；若否，向AR礼物显示模块发送显示信号；
所述AR礼物显示模块用于：收到显示信号后，从接收到的数据中获取到AR礼物ID和礼物缩放比例；根据礼物投放位置的空间坐标，在直播画面的相应位置处显示与AR礼物ID相对应的AR礼物，并按照礼物缩放比例进行等比缩放显示。
本发明的有益效果在于：
本发明提供了一种基于AR技术的视频直播赠送礼物的实现方法，使得用户可以通过用户端的礼物选择界面进行各类AR礼物的选择；待选择好所赠送的AR礼物后，用户端将返回至直播界面，在直播界面中，用户可进行礼物投放地点的选择和礼物远近度(即大小)的调整，而用户端则根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标及该空间坐标周围指定范围内的像素点的颜色值，并根据用户调整的礼物大小，获取对应的礼物缩放比例，并将相应的数据传输至主播端用于礼物显示时使用。主播所在的主播端在判断礼物投放位置没有被遮挡后，将对赠送的AR礼物进行显示，以此实现视频直播中的礼物赠送功能。
与现有技术相比，本发明能在视频直播中将赠送礼物与AR技术进行合理的结合，并提供了具体实现方案，从而提高了用户赠送礼物的主动性、增强互动性，使得用户体验更好。对主播来说，可有效增强粉丝的粘性；对用户来说，可得到更好、更多元化的体验，用户体验佳。
附图说明
图1为本发明实施例中基于AR技术的视频直播赠送礼物的实现方法的流程图；
图2为本发明实施例中实现礼物远近度调整的原理示意图；
图3为本发明实施例中基于AR技术的视频直播赠送礼物的实现系统的结构框图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步的详细描述。
参见图1所示，本发明实施例提供一种基于AR技术的视频直播赠送礼物的实现方法，包括以下步骤：
步骤S1：当用户需要向主播赠送礼物时，用户所在的客户端(以下简称：用户端)向用户提供礼物选择界面供用户进行AR礼物的选择；并在用户选择好要赠送的AR礼物后，记录下该AR礼物的ID (Identifier，标识符)，转入步骤S2。可以理解的是，所述AR礼物的ID是每个AR礼物的唯一标示，用来表示该AR礼物的编号。
实际操作时，步骤S1具体包括以下流程：
步骤S101：当用户需要向主播赠送礼物时，用户端从直播服务器获取AR礼物列表，并将该AR礼物列表通过礼物选择界面向用户进行展示供用户选择，转入步骤S102；
步骤S102：用户选择好要赠送的AR礼物后(如通过点击方式进行AR礼物的选择)，用户端记录下该AR礼物的ID。
步骤S2：判断用户所选择的AR礼物是否可以赠送，若是，转入步骤S3；否则，停止所有操作，结束。
步骤S3：用户端显示主播的直播界面；在直播界面中，根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标及该空间坐标周围指定范围内的画面像素点的颜色值(即RGB值，红、绿、蓝三原色模式的值)，并根据用户调整的礼物大小(即实现礼物的远近度的调整)，获取对应的礼物缩放比例，转入步骤S4。
可以理解的是，本实施例中所述AR礼物按照现实展现效果的不同，可被分为不同的类型，如悬挂类AR礼物、放置类AR礼物。不同类型的AR礼物对其投放的位置是有相应要求的，因此，所获取的对应空间坐标也会是不一样的。例如，如果是悬挂类的AR礼物，那么AR礼物必须是挂在某个地方，那么用户选择礼物投放位置时，需要选择到主播周围可以挂着的地方，则获取到的相应空间坐标也必须是主播周围可以挂着的地方的坐标；同理，如果是放置类AR礼物，那么用户选择礼物投放位置时，必须选择一个有平台可以放置的地方，如地面或桌面等，则获取到的相应空间坐标也必须是主播周围有平台可以放置的地方的坐标。
进一步的，为了使AR礼物在显示上和操作上都能更好的与AR 技术相结合，使得用户能在操作中可以调整礼物距离屏幕的远近度，从而在视觉上(显示上)给观众和主播感觉AR礼物离屏幕有距离感，进而增强现实感。本发明采用的是通过改变礼物的大小来达到改变礼物远近的目的。其原理是：如图2所示，对于一个物体，距离你近的话，会感觉物品相对于视觉所看到的相对于屏幕的比例较大；距离远的话，会感觉物品相对于视觉所看到的相对于屏幕比例较小。因此，可利用这个原理来解决AR礼物在主播空间中实现调整远近的问题。具体来说，是在用户调整礼物的远近度(大小)后，用户端会获取当前礼物大小与原礼物的比例，即步骤S3中，根据用户调整的礼物大小，获取对应的礼物缩放比例，以此来实现AR礼物的远近调整。
更进一步的，步骤S3中，在获取礼物投放位置的空间坐标的同时，还会获取该空间坐标周围指定范围内的画面像素点颜色值。获取周围指定范围内的画面像素点颜色值的目的是为了在主播所在的客户端(以下简称：主播端)进行显示时，主播端能根据礼物投放位置周围的颜色值来判断用户所选择的空间坐标是否被其他物体所遮挡。其原理是：如果用户选择的空间坐标周围的颜色值所在的范围与主播接收礼物后其坐标点周围的颜色值的范围相差很大，那么就判断该空间坐标点被其他物体所遮挡，这个时候将不显示礼物。如果范围相差在一定范围内，那么就判断用户选择的空间坐标点没有被遮挡，那么则显示礼物。
实际操作中，由于获取空间坐标点周围的颜色数据越多，那么在判断时的范围就越大，礼物显示的精确度就越低；反之，范围越小，礼物显示的精确度就越高，但是精确度太高礼物显示会很困难，因此需要权衡这个范围。本实施例中，采用获取空间坐标周围10个点范围内的像素点的颜色值(即上下左右10个画面像素点的颜色值)，可达到较理想的礼物显示精确度且显示也不会很困难。具体实现时，获取周围颜色值的核心代码如下：
Bitmap bitmap＝view.getBitmap()；
int pixel＝bitmap.getPixel(x,y)；
//获取颜色
int redValue＝Color.red(pixel)；
int blueValue＝Color.blue(pixel)；
int greenValue＝Color.green(pixel)；
根据这段代码，只需要在第一次传入用户选择的xy坐标(即投放位置的空间坐标)，并循环每次减1获取到周围上下左右各10个点的坐标的像素点颜色值即可。
步骤S4：用户端将步骤S3中获取的所有数据(包括所述礼物投放位置的空间坐标、该空间坐标周围指定范围内的画面像素点的颜色值、礼物缩放比例)以及步骤S1中记录的AR礼物ID通过直播服务器发送至主播端，转入步骤S5。
步骤S5：主播端根据接收到的数据中所述礼物投放位置的空间坐标，获取当前直播画面中该空间坐标周围指定范围内的画面像素点的颜色值；将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断所述礼物投放位置的空间坐标的点是否被遮挡，若是，不进行AR礼物的显示，返回步骤S5；若否，转入步骤S6。可以理解的是，当礼物投放位置的点被遮挡时，AR礼物将不会被显示出来，但主播端会一直监视该点是否被遮挡，一旦没有被遮挡，则会在屏幕上显示AR礼物。
实际操作时，步骤S5中所述将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断所述礼物投放位置的空间坐标的点是否被遮挡，具体包括以下流程：
步骤S501：将当前获取到的每一个像素点的红色值、绿色值、蓝色值分别与接收到的数据中对应像素点的红色值、绿色值、蓝色值进行一一对比，计算出三种颜色值的差值；判断三种颜色值的差值是否均在指定的色差阈值范围内(本实施例中，指定的色差阈值范围设置为15)，若是，则判定该像素点为符合差值标准的像素点，否则，判定为不符合差值标准的像素点，转入步骤S502；
步骤S502：待所有像素点均判断完成后，计算出所有像素点中符合差值标准的像素点的比例；判断计算出的比例是否超过指定的比例阈值(本实施例中，指定的比例阈值设为70％)，若是，则判定所述礼物投放位置的空间坐标的点没有被遮挡；否则，判定所述礼物投放位置的空间坐标的点被遮挡。
步骤S6：主播端从接收到的数据中获取到所述AR礼物ID和所述礼物缩放比例；根据所述礼物投放位置的空间坐标，在直播画面的相应位置处显示与所述AR礼物ID相对应的AR礼物，并按照所述礼物缩放比例进行等比缩放显示，结束。
可以理解的是，实际操作时，主播端在显示AR礼物之后，主播还可以在主播端的屏幕上点击该AR礼物，使得该AR礼物被打开，而打开后的AR礼物将消失。另外可以理解的是，在主播端显示AR 礼物的时候，到主播打开AR礼物后，所有用户端的观众是可以看到该AR礼物的全过程的；当主播端的主播遮挡AR礼物时，则观众同样也将看不到该AR礼物。
参见图3所示，本发明实施例还提供一种基于AR技术的视频直播赠送礼物的实现系统。该系统包括客户端和直播服务器，客户端分为用户端(用户所在的客户端)和主播端(主播所在的客户端)。其中，用户端包括AR礼物选择模块、AR礼物判断模块、AR礼物数据获取模块和AR礼物数据发送模块；主播端包括AR礼物数据处理模块和AR礼物显示模块。
AR礼物选择模块用于：当用户需要向主播赠送礼物时，向用户提供礼物选择界面供用户进行AR礼物的选择；并在用户选择好要赠送的AR礼物后，记录下该AR礼物的ID，向AR礼物判断模块发送判断信号。其具体流程为：当用户需要向主播赠送礼物时，AR礼物选择模块从直播服务器获取AR礼物列表，并将该AR礼物列表通过礼物选择界面向用户进行展示供用户选择；待用户选择好要赠送的 AR礼物后，AR礼物选择模块记录下该AR礼物的ID。
AR礼物判断模块用于：收到判断信号后，判断用户所选择的AR 礼物是否可以赠送，若是，向AR礼物数据获取模块发送获取信号；否则，结束所有操作；
AR礼物数据获取模块用于：收到获取信号后，显示主播的直播界面；在直播界面中，根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标及该空间坐标周围指定范围内的像素点的颜色值，并根据用户调整的礼物大小，获取对应的礼物缩放比例，向 AR礼物数据发送模块发送传输信号。本实施例中，所述AR礼物数据获取模块获取所述空间坐标周围指定范围内的像素点的颜色值时，是获取所述空间坐标周围10个点范围内的所有像素点的颜色值。另外，所述AR礼物数据获取模块根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标时，如果是悬挂类AR礼物，则获取到的空间坐标是主播周围可以挂东西的地方的坐标；如果是放置类 AR礼物，则获取到的空间坐标是主播周围有平台可以放置东西的地方的坐标。
所述AR礼物数据发送模块用于：收到传输信号后，将AR礼物数据获取模块获取的所有数据以及AR礼物选择模块记录的AR礼物 ID通过所述直播服务器发送至主播端，并向AR礼物数据处理模块发送处理信号。
AR礼物数据处理模块用于：收到处理信号后，根据接收到的数据中礼物投放位置的空间坐标，获取当前直播画面中该空间坐标周围指定范围内的像素点的颜色值；将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断礼物投放位置的空间坐标对应的点是否被遮挡，若是，不显示AR礼物并发出处理信号；若否，向AR礼物显示模块发送显示信号。具体来说，其判断流程为：将当前获取到的每一个像素点的红色值、绿色值、蓝色值分别与接收到的数据中对应像素点的红色值、绿色值、蓝色值进行一一对比，计算出三种颜色值的差值；判断三种颜色值的差值是否均在指定的色差阈值范围内，若是，则判定该像素点为符合差值标准的像素点；否则，判定为不符合差值标准的像素点；待所有像素点均判断完成后，计算出所有像素点中符合差值标准的像素点的比例；判断计算出的比例是否超过指定的比例阈值，若是，则判定所述礼物投放位置的空间坐标的点没有被遮挡；否则，判定所述礼物投放位置的空间坐标的点被遮挡。
AR礼物显示模块用于：收到显示信号后，从接收到的数据中获取到AR礼物ID和礼物缩放比例；根据礼物投放位置的空间坐标，在直播画面的相应位置处显示与AR礼物ID相对应的AR礼物，并按照礼物缩放比例进行等比缩放显示。
需要说明的是：上述实施例提供的系统在进行操作时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将系统的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。
本发明不局限于上述实施方式，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围之内。
本说明书中未作详细描述的内容属于本领域专业技术人员公知的现有技术。
Claims (8)
1.一种基于增强现实AR技术的视频直播赠送礼物的实现方法，其特征在于，该方法包括以下步骤：
步骤S1：当用户需要向主播赠送礼物时，用户端向用户提供礼物选择界面供用户进行AR礼物的选择；并在用户选择好要赠送的AR礼物后，记录下该AR礼物的ID，转入步骤S2；
步骤S2：判断用户所选择的AR礼物是否可以赠送，若是，转入步骤S3；否则，结束；
步骤S3：用户端显示主播的直播界面；在直播界面中，根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标及该空间坐标周围指定范围内的像素点的颜色值，并根据用户调整的礼物大小，获取对应的礼物缩放比例，转入步骤S4；
步骤S4：用户端将步骤S3中获取的所有数据以及步骤S1中记录的AR礼物ID通过直播服务器发送至主播端，转入步骤S5；
步骤S5：主播端根据接收到的数据中礼物投放位置的空间坐标，获取当前直播画面中该空间坐标周围指定范围内的像素点的颜色值；将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断礼物投放位置的空间坐标对应的点是否被遮挡，若是，不显示AR礼物，返回步骤S5；若否，转入步骤S6；
步骤S6：主播端从接收到的数据中获取到AR礼物ID和礼物缩放比例；根据礼物投放位置的空间坐标，在直播画面的相应位置处显示与AR礼物ID相对应的AR礼物，并按照礼物缩放比例进行等比缩放显示，结束；
步骤S5中所述将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断礼物投放位置的空间坐标对应的点是否被遮挡，具体包括以下流程：
步骤S501：将当前获取到的每一个像素点的红色值、绿色值、蓝色值分别与接收到的数据中对应像素点的红色值、绿色值、蓝色值进行一一对比，计算出三种颜色值的差值；判断三种颜色值的差值是否均在指定的色差阈值范围内，若是，则判定该像素点为符合差值标准的像素点；否则，判定为不符合差值标准的像素点，转入步骤S502；
步骤S502：待所有像素点均判断完成后，计算出所有像素点中符合差值标准的像素点的比例；判断计算出的比例是否超过指定的比例阈值，若是，则判定所述礼物投放位置的空间坐标的点没有被遮挡；否则，判定所述礼物投放位置的空间坐标的点被遮挡。
2.如权利要求1所述的基于增强现实AR技术的视频直播赠送礼物的实现方法，其特征在于，步骤S1具体包括以下流程：
步骤S101：当用户需要向主播赠送礼物时，用户端从直播服务器获取AR礼物列表，并将该AR礼物列表通过礼物选择界面向用户进行展示供用户选择，转入步骤S102；
步骤S102：用户选择好要赠送的AR礼物后，用户端记录下该AR礼物的ID。
3.如权利要求1所述的基于增强现实AR技术的视频直播赠送礼物的实现方法，其特征在于：所述AR礼物按照现实展现效果的不同，被分为悬挂类AR礼物和放置类AR礼物；
步骤S3中，根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标时，如果是悬挂类AR礼物，则获取到的空间坐标是主播周围可以挂东西的地方的坐标；如果是放置类AR礼物，则获取到的空间坐标是主播周围有平台可以放置东西的地方的坐标。
4.如权利要求1所述的基于增强现实AR技术的视频直播赠送礼物的实现方法，其特征在于：步骤S3中所述指定范围内的像素点为空间坐标上下左右各10个坐标点的像素点。
5.一种基于增强现实AR技术的视频直播赠送礼物的实现系统，包括客户端和直播服务器，客户端分为用户端和主播端，其特征在于：所述用户端包括AR礼物选择模块、AR礼物判断模块、AR礼物数据获取模块和AR礼物数据发送模块；主播端包括AR礼物数据处理模块和AR礼物显示模块；其中，
所述AR礼物选择模块用于：当用户需要向主播赠送礼物时，向用户提供礼物选择界面供用户进行AR礼物的选择；并在用户选择好要赠送的AR礼物后，记录下该AR礼物的ID，向AR礼物判断模块发送判断信号；
所述AR礼物判断模块用于：收到判断信号后，判断用户所选择的AR礼物是否可以赠送，若是，向AR礼物数据获取模块发送获取信号；否则，结束所有操作；
所述AR礼物数据获取模块用于：收到获取信号后，显示主播的直播界面；在直播界面中，根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标及该空间坐标周围指定范围内的像素点的颜色值，并根据用户调整的礼物大小，获取对应的礼物缩放比例，向AR礼物数据发送模块发送传输信号；
所述AR礼物数据发送模块用于：收到传输信号后，将AR礼物数据获取模块获取的所有数据以及AR礼物选择模块记录的AR礼物ID通过所述直播服务器发送至主播端，并向AR礼物数据处理模块发送处理信号；
所述AR礼物数据处理模块用于：收到处理信号后，根据接收到的数据中礼物投放位置的空间坐标，获取当前直播画面中该空间坐标周围指定范围内的像素点的颜色值；将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断礼物投放位置的空间坐标对应的点是否被遮挡，若是，不显示AR礼物并发出处理信号；若否，向AR礼物显示模块发送显示信号；
所述AR礼物显示模块用于：收到显示信号后，从接收到的数据中获取到AR礼物ID和礼物缩放比例；根据礼物投放位置的空间坐标，在直播画面的相应位置处显示与AR礼物ID相对应的AR礼物，并按照礼物缩放比例进行等比缩放显示；
所述AR礼物数据处理模块将当前获取到的像素点的颜色值与接收到的数据中对应像素点的颜色值进行一一对比，判断礼物投放位置的空间坐标对应的点是否被遮挡，具体包括以下流程：
将当前获取到的每一个像素点的红色值、绿色值、蓝色值分别与接收到的数据中对应像素点的红色值、绿色值、蓝色值进行一一对比，计算出三种颜色值的差值；判断三种颜色值的差值是否均在指定的色差阈值范围内，若是，则判定该像素点为符合差值标准的像素点；否则，判定为不符合差值标准的像素点；
待所有像素点均判断完成后，计算出所有像素点中符合差值标准的像素点的比例；判断计算出的比例是否超过指定的比例阈值，若是，则判定所述礼物投放位置的空间坐标的点没有被遮挡；否则，判定所述礼物投放位置的空间坐标的点被遮挡。
6.如权利要求5所述的基于增强现实AR技术的视频直播赠送礼物的实现系统，其特征在于，所述AR礼物选择模块的具体流程为：当用户需要向主播赠送礼物时，AR礼物选择模块从直播服务器获取AR礼物列表，并将该AR礼物列表通过礼物选择界面向用户进行展示供用户选择；待用户选择好要赠送的AR礼物后，AR礼物选择模块记录下该AR礼物的ID。
7.如权利要求5所述的基于增强现实AR技术的视频直播赠送礼物的实现系统，其特征在于：所述AR礼物按照现实展现效果的不同，被分为悬挂类AR礼物和放置类AR礼物；
所述AR礼物数据获取模块根据用户选择的礼物投放的位置，获取对应的礼物投放位置的空间坐标时，如果是悬挂类AR礼物，则获取到的空间坐标是主播周围可以挂东西的地方的坐标；如果是放置类AR礼物，则获取到的空间坐标是主播周围有平台可以放置东西的地方的坐标。
8.如权利要求5所述的基于增强现实AR技术的视频直播赠送礼物的实现系统，其特征在于：所述AR礼物数据获取模块获取所述空间坐标周围指定范围内的像素点的颜色值时，是获取所述空间坐标上下左右各10个坐标点的像素点的颜色值。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610846017.8A CN106411877B (zh) | 2016-09-23 | 2016-09-23 | 一种基于增强现实ar技术的视频直播赠送礼物的实现方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610846017.8A CN106411877B (zh) | 2016-09-23 | 2016-09-23 | 一种基于增强现实ar技术的视频直播赠送礼物的实现方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106411877A CN106411877A (zh) | 2017-02-15 |
| CN106411877B true CN106411877B (zh) | 2019-03-15 |
Family
ID=57998152
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610846017.8A Active CN106411877B (zh) | 2016-09-23 | 2016-09-23 | 一种基于增强现实ar技术的视频直播赠送礼物的实现方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106411877B (zh) |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106973319B (zh) * | 2017-03-28 | 2020-05-12 | 武汉斗鱼网络科技有限公司 | 一种虚拟礼物展示方法和系统 |
| CN106878760B (zh) * | 2017-03-29 | 2018-09-04 | 武汉斗鱼网络科技有限公司 | 绘制及解析礼物的方法及装置 |
| CN107220857A (zh) * | 2017-06-06 | 2017-09-29 | 上海极链网络科技有限公司 | 应用于直播场景实时投放互动系统的投放模块 |
| CN107509043B (zh) * | 2017-09-11 | 2020-06-05 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子装置及计算机可读存储介质 |
| CN108024134B (zh) * | 2017-11-08 | 2020-01-21 | 北京密境和风科技有限公司 | 一种基于直播的数据分析方法、装置和终端设备 |
| CN109905754B (zh) * | 2017-12-11 | 2021-05-07 | 腾讯科技（深圳）有限公司 | 虚拟礼物收取方法、装置及存储设备 |
| CN108391153B (zh) * | 2018-01-29 | 2020-10-16 | 北京潘达互娱科技有限公司 | 虚拟礼物显示方法、装置及电子设备 |
| CN108495170A (zh) * | 2018-03-30 | 2018-09-04 | 武汉斗鱼网络科技有限公司 | 直播间礼物初始化方法、装置、介质及设备 |
| CN109005416B (zh) * | 2018-08-01 | 2020-12-15 | 武汉斗鱼网络科技有限公司 | 直播中ar扫描互动方法、存储介质、设备及系统 |
| CN109729374B (zh) * | 2018-12-27 | 2022-02-18 | 广州方硅信息技术有限公司 | 礼物打赏方法、移动终端以及计算机存储介质 |
| CN110072141B (zh) * | 2019-04-28 | 2022-02-25 | 广州虎牙信息科技有限公司 | 一种媒体处理方法、装置、设备和存储介质 |
| CN110418155B (zh) * | 2019-08-08 | 2022-12-16 | 腾讯科技（深圳）有限公司 | 直播互动方法、装置、计算机可读存储介质和计算机设备 |
| CN111163329B (zh) * | 2020-01-02 | 2021-09-17 | 北京字节跳动网络技术有限公司 | 直播间礼物列表配置方法、装置、介质及电子设备 |
| CN114125488A (zh) * | 2021-12-09 | 2022-03-01 | 小象(广州)商务有限公司 | 一种直播中的虚拟礼物展示方法及系统 |
| CN114257834B (zh) * | 2021-12-30 | 2023-12-08 | 广州方硅信息技术有限公司 | 直播间虚拟礼物交互方法及其装置、设备、介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104994421A (zh) * | 2015-06-30 | 2015-10-21 | 广州华多网络科技有限公司 | 一种直播频道中虚拟物品的互动方法、装置和系统 |
| CN105812885A (zh) * | 2016-03-11 | 2016-07-27 | 武汉斗鱼网络科技有限公司 | 一种视频直播中的弹幕显示方法和系统 |
| CN105872612A (zh) * | 2016-03-30 | 2016-08-17 | 宁波元鼎电子科技有限公司 | 一种改进型网络主播过程中主播与观众互动方法及系统 |
| CN105959127A (zh) * | 2016-06-28 | 2016-09-21 | 武汉斗鱼网络科技有限公司 | 一种移动端虚拟礼物效果展示方法及装置 |
-
2016
- 2016-09-23 CN CN201610846017.8A patent/CN106411877B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104994421A (zh) * | 2015-06-30 | 2015-10-21 | 广州华多网络科技有限公司 | 一种直播频道中虚拟物品的互动方法、装置和系统 |
| CN105812885A (zh) * | 2016-03-11 | 2016-07-27 | 武汉斗鱼网络科技有限公司 | 一种视频直播中的弹幕显示方法和系统 |
| CN105872612A (zh) * | 2016-03-30 | 2016-08-17 | 宁波元鼎电子科技有限公司 | 一种改进型网络主播过程中主播与观众互动方法及系统 |
| CN105959127A (zh) * | 2016-06-28 | 2016-09-21 | 武汉斗鱼网络科技有限公司 | 一种移动端虚拟礼物效果展示方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106411877A (zh) | 2017-02-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106411877B (zh) | 一种基于增强现实ar技术的视频直播赠送礼物的实现方法及系统 | |
| US11195332B2 (en) | Information interaction method based on virtual space scene, computer equipment and computer-readable storage medium | |
| CN104618813B (zh) | 弹幕信息处理方法、客户端及服务平台 | |
| CN108124109A (zh) | 一种视频处理方法、设备及计算机可读存储介质 | |
| CN103716537B (zh) | 照片合成方法和终端 | |
| CN107741886B (zh) | 一种基于增强现实技术多人互动的方法 | |
| WO2016145736A1 (zh) | 热力图的展现方法、装置、设备及非易失性计算机存储介质 | |
| US20090033737A1 (en) | Method and System for Video Conferencing in a Virtual Environment | |
| CN106101741A (zh) | 在网络视频直播平台上观看全景视频的方法及系统 | |
| AU2001256604A1 (en) | Multi-user server and method for rendering images from interactively customizable scene information | |
| CN101431613A (zh) | 网络合影的实现方法 | |
| CN108055472A (zh) | 一种实时全景直播系统及方法 | |
| CN109413508A (zh) | 图像混合的方法、装置、设备、推流方法及直播系统 | |
| CN105556574A (zh) | 渲染设备、其渲染方法、程序和记录介质 | |
| JP7194125B2 (ja) | バーチャル・リアリティ・メディア・コンテンツ内に含める目的での現実世界シーンのカスタマイズされるビューの仮想化プロジェクションを生成するための方法及びシステム | |
| CN106910251A (zh) | 基于ar和移动终端的模型仿真方法 | |
| US11930228B2 (en) | Computer program, server device, terminal device and method | |
| CN107404641A (zh) | 视频处理方法、视频播放方法、机顶盒以及vr设备 | |
| CN108366232A (zh) | 一种基于移动端虚拟现实技术的智能视频监控系统 | |
| CN106604087B (zh) | 一种全景直播的渲染实现方法 | |
| CN107172415A (zh) | 一种vr全息一体同步交互展示系统及其控制方法 | |
| CN112200899B (zh) | 一种采用实例化渲染实现模型业务交互的方法 | |
| EP2733934A1 (en) | Method and terminal for transmitting information | |
| CN109102416A (zh) | 基于智能终端的直播电视社交方法及系统、智能终端 | |
| CN116112761B (zh) | 生成虚拟形象视频的方法及装置、电子设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20240126 Address after: No. 1-3, No. 33 Balingshu Street, Weibao Village, Tianshifu Town, Manchu Autonomous County, Benxi City, Liaoning Province, 117000 Patentee after: Wang Yongji Country or region after: China Address before: 430000 East Lake Development Zone, Wuhan City, Hubei Province, No. 1 Software Park East Road 4.1 Phase B1 Building 11 Building Patentee before: WUHAN DOUYU NETWORK TECHNOLOGY Co.,Ltd. Country or region before: China |
|
| TR01 | Transfer of patent right |
Effective date of registration: 20240507 Address after: G8-77, 4th Floor, Hong Kong Macau Development Building, No. 49-1 Guomao Road, Longhua District, Haikou City, Hainan Province, 570100 Patentee after: Hainan Ruiyin Zhongchuang Investment Co.,Ltd. Country or region after: China Address before: No. 1-3, No. 33 Balingshu Street, Weibao Village, Tianshifu Town, Manchu Autonomous County, Benxi City, Liaoning Province, 117000 Patentee before: Wang Yongji Country or region before: China |