CN110493642A - 一种虚拟互动观赛方法、系统、装置和存储介质 - Google Patents
一种虚拟互动观赛方法、系统、装置和存储介质 Download PDFInfo
- Publication number
- CN110493642A CN110493642A CN201910667663.1A CN201910667663A CN110493642A CN 110493642 A CN110493642 A CN 110493642A CN 201910667663 A CN201910667663 A CN 201910667663A CN 110493642 A CN110493642 A CN 110493642A
- Authority
- CN
- China
- Prior art keywords
- virtual
- user
- seat
- information
- action message
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 40
- 238000003860 storage Methods 0.000 title claims abstract description 14
- 238000001514 detection method Methods 0.000 claims abstract description 19
- 230000009471 action Effects 0.000 claims description 74
- 230000008859 change Effects 0.000 claims description 8
- 230000003993 interaction Effects 0.000 abstract description 14
- 238000011065 in-situ storage Methods 0.000 abstract description 4
- 239000002131 composite material Substances 0.000 abstract 1
- 230000000875 corresponding effect Effects 0.000 description 32
- 230000000694 effects Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000009286 beneficial effect Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000000386 athletic effect Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 239000011800 void material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
- G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25875—Management of end-user data involving end-user authentication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
Abstract
本发明公开了一种虚拟互动观赛方法、系统、装置和存储介质，该方法包括：生成虚拟观赛席，由用户自行选取在所述虚拟观赛席中对应的座位，并根据用户选取的模板信息在对应位置生成虚拟观众，然后向用户发放一些关于互动动作的任务指令，检测记录用户执行的动作并将所述动作反馈到虚拟观众执行。该系统包括显示单元、建模单元、指令单元、检测单元、控制单元和注册单元。该装置包括用于存储程序的存储器以及用于加载程序以执行所述方法的处理器。通过使用本发明的虚拟互动观赛方法，能够使用户体验到身临比赛现场的氛围，给到观众更震撼、直观的观赛感触，提升了观赛的趣味性和交互体验。本发明可广泛应用于虚拟交互技术领域内。
Description
技术领域
本发明涉及虚拟交互技术领域，尤其是一种虚拟互动观赛方法、系统、装置和存储介质。
背景技术
随着社会生产力和科学技术的不断发展，人们在工作、学习生活之余可参与休闲放松的活动越来越多，其中最具有代表性的莫过于各式各样的赛事活动。例如以NBA为代表的多种篮球赛事、以欧冠和世界杯为代表的各类足球赛事以及目前新兴的电竞赛事等等，这些赛事因其激烈的竞技场面和较高的观赏性吸引着不同兴趣爱好的人们。一般情况下，这类赛事的活动场地较为固定，大多是在一些专用的比赛场馆中进行。场馆的观赛席设置完善，服务周到，观众亲临现场可以根据赛事的精彩瞬间实时参与到现场人群中的各类互动活动中，观赛的氛围十分火爆，能给到观众更震撼、直观的观赛体验。
而由于现实中各类比赛的场馆所能够容纳的人数毕竟有限，而且出于时间、费用等因素的考虑，大部分观众还是只能通过电视、手机APP直播等方式观看赛事，无法真正感受到属于竞技体育的激情。缺少与赛事进程实时匹配的互动活动，在很大程度上无法满足线上观众的观赛体验，也使得赛事的魅力大打折扣，不能不说是一种遗憾。而现有的应用中，还没有给出能够有效解决上述问题的技术方案。
发明内容
为解决上述技术问题，本发明实施例的目的在于：提供一种虚拟互动观赛方法、系统、装置和存储介质，能够有效提升观众观赛的趣味性和交互体验。
本发明实施例所采取的技术方案是：
第一方面，本发明实施例提供了一种虚拟互动观赛方法，包括以下步骤：
生成虚拟观赛席；
获取用户的身份信息及所述身份信息对应的座位信息和模板信息；
根据所述座位信息和模板信息在所述虚拟观赛席中生成虚拟观众；
向所述用户发放任务指令，所述任务指令为执行相关动作的指示信息；
检测并记录用户执行的动作信息；
根据所述动作信息控制所述虚拟观众执行所述动作。
进一步，所述获取用户的身份信息及所述身份信息对应的座位信息和模板信息这一步骤之前设置有用户注册步骤，所述用户注册步骤包括：
获取用户的身份信息；
提供所述虚拟观赛席的当前剩余座位列表供用户从所述列表中选择座位；
提供人物形象模板供用户选择，所述人物形象模板包括人脸模型、身材模型和衣物模型，且所述人物形象模板用于生成所述虚拟观众；
获取所述用户选择的座位信息和模板信息；
建立所述身份信息与座位信息、所述身份信息与模板信息之间的对应关系。
进一步，所述向所述用户发放任务指令，所述任务指令为执行相关动作的指示信息这一步骤，其具体包括：
获取用户的座位信息；
根据所述座位信息向用户发放任务指令，所述任务指令还包括执行所述相关动作的时间阈值提示信息。
进一步，所述检测并记录用户执行的动作信息这一步骤，其具体包括：
获取用户上传的视频画面；
从所述视频画面中检测得到所述动作信息；
记录所述动作信息。
进一步，所述从所述视频画面中检测得到所述动作信息这一步骤，其具体包括：
检测所述视频画面中的人体动作区域，获取所述动作区域的轮廓信息；
对比所述视频中的连续多个视频帧内所述轮廓信息的变化情况；
从所述轮廓信息的变化情况中获取所述动作信息。
进一步，所述检测并记录用户执行的动作信息这一步骤，其具体包括：
获取用户的移动终端访问权限；
获取所述移动终端的传感器数据；
根据所述传感器数据检测分析得到所述动作信息；
记录所述动作信息。
进一步，所述根据所述动作信息控制所述虚拟观众执行所述动作这一步骤，其具体包括：
获取所述动作信息；
从发放所述任务指令起开始计时，经过预先设定的时间阈值后控制所述虚拟观众执行所述动作。
第二方面，本发明实施例提供了一种虚拟互动观赛系统，包括：
显示单元，用于显示虚拟观赛席和所述虚拟观赛席中的虚拟观众；
建模单元，用于建立虚拟观赛席和虚拟观众模型，并将所述模型发送至显示单元；
指令单元，用于向用户发放任务指令，所述任务指令为执行相关动作的指示信息；
检测单元，用于检测获取用户当前执行的动作信息，并将所述动作信息发送至控制单元；
控制单元，用于控制所述虚拟观众执行与所述动作信息相同的动作；
注册单元，用于获取用户的身份信息，同时向用户提供所述虚拟观赛席的当前剩余座位列表和用于建立所述虚拟观众的人物形象模板，并记录与所述身份信息对应的座位信息和模板信息。
第三方面，本发明实施例提供了一种虚拟互动观赛装置，包括：
存储器和处理器，所述存储器用于存储至少一个程序，所述处理器用于加载所述至少一个程序以执行任一项所述一种虚拟互动观赛方法。
第四方面，本发明实施例提供了一种存储介质，其中存储有处理器可执行的指令，所述处理器可执行的指令在由处理器执行时用于执行任一项所述一种虚拟互动观赛方法。
上述本发明实施例中的一个或多个技术方案具有如下优点：本发明通过生成与现实场景中类似的虚拟观赛席，由用户自行选取在所述虚拟观赛席中对应的座位，并根据用户选取的模板信息在对应位置生成虚拟观众，然后向用户发放一些关于互动动作的任务指令，检测记录用户执行的动作并将所述动作反馈到虚拟观众执行，能给到观众更震撼、直观的观赛体验。并且提供了虚拟比赛现场观赛互动的方法，使得线上观看比赛的用户也能真实地体验到身临比赛现场的氛围，提升了观赛的趣味性和交互体验。
附图说明
图1为本发明的一种虚拟互动观赛方法流程图；
图2为本发明一种虚拟互动观赛方法具体实施例的流程图；
图3为本发明一种虚拟互动观赛系统的结构框图；
图4是本发明一种虚拟互动观赛装置的结构框图。
具体实施方式
下面结合附图和具体实施例对本发明做进一步的详细说明。对于以下实施例中的步骤编号，其仅为了便于阐述说明而设置，对步骤之间的顺序不做任何限定，实施例中的各步骤的执行顺序均可根据本领域技术人员的理解来进行适应性调整。
参照图1，本发明实施例提供了一种虚拟互动观赛方法，包括以下步骤：
S1：生成虚拟观赛席；
S2：获取用户的身份信息及所述身份信息对应的座位信息和模板信息；
S3：根据所述座位信息和模板信息在所述虚拟观赛席中生成虚拟观众；
S4：向所述用户发放任务指令，所述任务指令为执行相关动作的指示信息；
S5：检测并记录用户执行的动作信息；
S6：根据所述动作信息控制所述虚拟观众执行所述动作。
本发明实施例中所述虚拟互动观赛方法主要应用于各类赛事的线上虚拟观赛，所述赛事包括如以NBA为代表的多种篮球赛事、以欧冠、世界杯为代表的各类足球赛事以及新兴的电竞赛事等。这类赛事的活动场地较为固定，现实中观赛席设置完善，故而本发明实施例中，可以通过参考真实的比赛场馆生成虚拟的观赛场馆和座位席。现实场馆中的建筑构造、设施布置都可以按一定的比例复刻生成，可以将虚拟观赛席的模型生成为3D式，虚拟观赛席中间的场地截取真实比赛的画面填补，也可以设置为3D模式。这样当所述虚拟观赛席显示出来的时候，将更加具有真实感，能够调动用户的观赛情绪，更有身临其境的观赛体验。
生成所述观赛席以后，根据每一个注册用户身份信息所对应的事先选取好的位置信息，在所述虚拟观赛席中找到对应的位置，然后查询用户身份信息所对应的事先选取的虚拟观众模板信息，根据所述模板信息的相关设定来生成用户喜欢的虚拟观众形象。所述虚拟观众的生成并不限于上述方式，一种可选的实施方式为提供用户上传图片、头像、身高和体重等信息的通道，从所述信息中提取真实的人物面部特征及身体特征生成更加逼真的虚拟人物模型。生成所述虚拟人物模型以后，将所有用户对应的虚拟人物一一设置于所述虚拟观赛席中的对应位置。然后向用户发送互动任务指令，所述任务指令为一些关于互动的动作信息，互动的动作可以是举起双手摇摆、鼓掌，亦或者多人有间隔蹲下起立从而一起形成人浪等等互动方式。将所述任务的内容放松给用户后，用户看到互动的指示信息作出相应的反应/动作，检测出这些动作并将其反馈给所述虚拟观赛席中的虚拟观众执行，用户即可看到“虚拟的自己”仿佛在比赛现场观赛一般，自己做出的动作反应也会真实地呈现出来，观赛的趣味性更高，观赛体验更好。
进一步，所述获取用户的身份信息及所述身份信息对应的座位信息和模板信息这一步骤之前设置有用户注册步骤，所述用户注册步骤包括：
获取用户的身份信息；
提供所述虚拟观赛席的当前剩余座位列表供用户从所述列表中选择座位；
提供人物形象模板供用户选择，所述人物形象模板包括人脸模型、身材模型和衣物模型，且所述人物形象模板用于生成所述虚拟观众；
获取所述用户选择的座位信息和模板信息；
建立所述身份信息与座位信息、所述身份信息与模板信息之间的对应关系。
本发明实施例提出了一种所述虚拟观赛席用户注册身份信息的方法。其具体实施流程为用户登录相关系统，获取用户的身份信息，所述身份信息可以基于QQ、微信等软件获取，也可以是用户自行注册的唯一ID及对应的登录密码。用户可以选取自己感兴趣的比赛项目和虚拟观赛席场景，所述比赛项目和虚拟观赛席可以与现实中的比赛场地、场馆一样，也可以根据用户的喜好自由搭配提供给用户选取。确定完毕所述虚拟观赛席之后，提供所述虚拟观赛席的当前剩余座位列表供用户从所述列表中选择座位，所述剩余座位列表的形式可以是文字数字列表的，也可以是所述虚拟观赛席的3D立体示意图，在所述示意图中将已经被选取的座位和剩余座位通过不同的方式呈现出来，例如通过颜色来进行区分：已经被选取的座位设置为红色，剩余座位设置为绿色。用户可以点击剩余座位确认选取从而建立所述身份信息与座位信息的对应关系。
选取所述座位后，进而向用户弹出生成所述虚拟观众的模板信息，所述模板信息包括人脸模型、身材模型和衣物模型等等，用户可以自行通过触碰拉伸等方式对所述模板进行小范围的修改，直到确认为自己喜欢的方式后保存记录，从而建立所述身份信息与模板信息的对应关系。
进一步，所述向所述用户发放任务指令，所述任务指令为执行相关动作的指示信息这一步骤，其具体包括：
获取用户的座位信息；
根据所述座位信息向用户发放任务指令，所述任务指令还包括执行所述相关动作的时间阈值提示信息。
本发明实施例提供了一种向用户发送关于互动动作信息的任务指令方法。在所述虚拟观赛席和虚拟观众设置完毕生成以后，用户就可以正式参与到虚拟观赛的活动中，如前所述虚拟观赛席中间的场地是由截取的真实比赛画面填补合成的，用户可以在屏幕前观看比赛的画面，也能够看到比赛画面之外的虚拟比赛席场景。在观赛的过程中，系统可以根据实时的比赛进度发送一些任务指令用于模拟现场交互的场景，例如可以发动虚拟观众一起挥舞手臂跟随比赛节奏摇摆，也可以令所述虚拟观众为落后方鼓掌加油，或者全场所述虚拟观众一起合作玩人浪等等互动方式。在本发明实施例中，为了确保虚拟观赛席中的虚拟观众动作协调统一，在发送所述任务指令时参考用户对应的座位信息及所述虚拟观众在虚拟观赛席中的位置来制定具体的任务和执行所述任务的时间。当然，由于这些动作最终是取材自用户的，因此必须分配给用户一段用于执行所述动作的时间段，所述时间段的长短根据动作的复杂程度决定，并且尽可能较为短暂的方式设定以突出交互活动的瞬发和实时性。除此之外，还需提示用户在所述指定的时间段内完成所述动作，避免用户因没有注意时间限制而错过了互动的参与，同时也使得互动的实时性与最终展示的真实程度更高。
进一步，所述检测并记录用户执行的动作信息这一步骤，其具体包括：
获取用户上传的视频画面；
从所述视频画面中检测得到所述动作信息；
记录所述动作信息。
进一步，所述从所述视频画面中检测得到所述动作信息这一步骤，其具体包括：
检测所述视频画面中的人体动作区域，获取所述动作区域的轮廓信息；
对比所述视频中的连续多个视频帧内所述轮廓信息的变化情况；
从所述轮廓信息的变化情况中获取所述动作信息。
进一步，所述检测并记录用户执行的动作信息这一步骤，其具体包括：
获取用户的移动终端访问权限；
获取所述移动终端的传感器数据；
根据所述传感器数据检测分析得到所述动作信息；
记录所述动作信息。
本发明实施例中提出了所述检测并记录用户执行的动作信息的具体方法。其实施的方式包括两种：一种是采用视频分割检测人物动作的原理，针对目标运动的特点，基于运动过程中运动姿态的变化来进行提取检测。首先，获取视频图像中作用域的轮廓信息，然后根据连续图像序列中轮廓信息的变化，提取作用域的变化率，即根据动作的量化变化率来定义动作。本发明实施例中，所述作用域即为人体区域，根据所述视频中人体区域的变化情况，能够有效检测并定义出用户所执行的动作。
另一种检测、记录用户执行的动作信息的方法是通过传感器的一些检测数据来识别检测出用户的动作信息，这种方法实施较为简单。通过获取用户手中的移动终端权限来分析其陀螺仪、重力传感器、加速度传感器、磁场传感器的相关数据，从而捕捉到用户的高度、水平移动以及摇晃状况，从而检测出用户的动作信息。
进一步，所述根据所述动作信息控制所述虚拟观众执行所述动作这一步骤，其具体包括：
获取所述动作信息；
从发放所述任务指令起开始计时，经过预先设定的时间阈值后控制所述虚拟观众执行所述动作。
本发明实施例提供了一种控制虚拟观众执行所述动作的具体实施方法。因为每个用户执行所述动作指令的所使用时间很可能并不相同，因此前述已提到在分配所述任务指令分配给用户一段用于执行所述动作的时间段，这段时间段不仅用于检测记录用户的动作，还用于最终为每一个虚拟观众确定一个对应的合适时间点在来执行所述动作，确保最终全体虚拟观众的动作展示流畅、一致性更高，从而观看起来更加真实。具体地，所述时间点设置为从发放任务指令起开始经过预先设定的时间阈值后的那一时刻。
参照图2，本发明一种虚拟互动观赛方法具体实施例的流程图，下面对其具体实施过程做详细说明：
操作S101：参考真实的比赛场馆生成虚拟观赛席，执行操作S102；
操作S102：观赛用户登录系统，执行操作S103；
操作S103：用户注册身份信息，所述身份信息可以基于QQ、微信等软件获取，也可以是用户自行注册的唯一ID及对应的登录密码，执行操作S104；
操作S104：提供给用户所述虚拟观赛席的剩余座位列表和用于生成所述虚拟观众的模板信息，观众从所述列表中选择座位、并选取确认模板信息，建立所述身份信息与座位信息、所述身份信息与模板信息之间的对应关系，执行操作S105；
操作S105：根据所述座位信息和模板信息在虚拟观赛席中生成虚拟观众，执行操作S106；
操作S106：获取真实的比赛画面并将其与所述虚拟观赛席合成，执行操作S107；
操作S107：获取不同用户在所述虚拟观赛席中的座位位置信息，执行操作S108；
操作S108：根据所述座位信息向用户发放任务指令，执行操作S109；
操作S109：检测并记录用户的动作信息，执行操作S110；
操作S110：将所述记录的动作信息反馈给虚拟观众执行。
以全场虚拟观众配合生成人浪的方法对所述流程中的相关操作步骤作进一步说明：
首先，所述操作S107中，获取每个虚拟观众座位信息和对应的身份信息，所述座位信息为X排Y座，记录其坐标为(X，Y)，后台系统将为每个(X，Y)分配与人浪的高度函数Z＝Z(t)对应的高度Z和时间t，所述高度Z具体形式为0和1,0对应的动作为蹲下，1对应的动作为站起，t为执行所述动作对应的时间点，在达到所述时间t时将所述Z对应的动作状态信息发送给座位信息(X，Y)对应身份信息的用户执行。
本发明实施例中，提出了一种虚拟互动观赛方法。在本实施例的观赛方法中，通过生成与现实场景中类似的虚拟观赛席，然后由用户自行选取在所述虚拟观赛席中对应的座位，并根据用户选取的模板信息在对应位置生成虚拟观众，然后向用户发放一些关于互动动作的任务指令，检测记录用户执行的动作并将所述动作反馈到虚拟观众执行，能给到观众更震撼、直观的观赛体验，使得线上观看比赛的用户也能真实地体验到身临比赛现场的氛围，提升了观赛的趣味性和交互体验。
参照图3，本发明实施例提供了一种虚拟互动观赛系统，包括：
显示单元101，用于显示虚拟观赛席和所述虚拟观赛席中的虚拟观众；
建模单元201，用于建立虚拟观赛席和虚拟观众模型，并将所述模型发送至显示单元101；
指令单元301，用于向用户发放任务指令，所述任务指令为执行相关动作的指示信息；
检测单元401，用于检测获取用户当前执行的动作信息，并将所述动作信息发送至控制单元；
控制单元501，用于控制所述虚拟观众执行与所述动作信息相同的动作；
注册单元601，用于获取用户的身份信息，同时向用户提供所述虚拟观赛席的当前剩余座位列表和用于建立所述虚拟观众的人物形象模板，并记录与所述身份信息对应的座位信息和模板信息。
在本发明系统的实施例中，所述注册单元601获取到用户选取的座位信息和模板信息后，发送给建模单元201生成虚拟观赛席和虚拟观众，并最终在显示单元101显示呈现；在用户观看所述基于虚拟观赛场景(包括虚拟观赛席、虚拟观众和比赛画面)时，通过指令单元301发送互动任务指令给用户，然后由检测单元401检测记录用户的相关动作信息，并发送到控制单元501。控制单元501根据所述动作信息控制所述显示单元101中的对应虚拟观众执行相同的动作。
参照图4，本发明实施例还提供了一种虚拟互动观赛装置，包括：
存储器202和处理器102，所述存储器202用于存储至少一个程序，所述处理器102用于加载所述至少一个程序以执行任一项所述虚拟互动观赛方法。
此外，本发明实施例还提供了一种存储介质，其中存储有处理器102可执行的指令，所述处理器102可执行的指令在由处理器102执行时用于执行任一项所述一种虚拟互动观赛方法。
本实施例中，所述存储介质可以是但不限于电、磁、光、红外线、半导体的系统、装置或器件，也可以是任意以上形式所组成的组合。具体地，可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件或者上述任意形式所组成的组合。存储介质可以是任何包含或存储程序的有形介质，所述程序可以被指令执行系统执行。所述可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。可以以一种或多种程序设计语言或其组合来编写用于执行本发明实施例中方法的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言，诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言，诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。
可见，上述方法实施例中的内容均适用于本装置实施例中，本装置实施例所具体实现的功能与上述方法实施例相同，并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
类似的，上述方法实施例中的内容均适用于本存储介质实施例中，本存储介质实施例所具体实现的功能与上述方法实施例相同，并且达到的有益效果与上述方法实施例所达到的有益效果也相同。
在本说明书的描述中，参考术语“一个实施方式”、“另一实施方式”或“某些实施方式”等的描述意指结合实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施方式，本领域的普通技术人员可以理解：在不脱离本发明的原理和宗旨的情况下可以对这些实施方式进行多种变化、修改、替换和变型，本发明的范围由权利要求及其等同物限定。
Claims (10)
1.一种虚拟互动观赛方法，其特征在于，包括以下步骤：
生成虚拟观赛席；
获取用户的身份信息及所述身份信息对应的座位信息和模板信息；
根据所述座位信息和模板信息在所述虚拟观赛席中生成虚拟观众；
向所述用户发放任务指令，所述任务指令为执行相关动作的指示信息；
检测并记录用户执行的动作信息；
根据所述动作信息控制所述虚拟观众执行所述动作。
2.根据权利要求1所述的一种虚拟互动观赛方法，其特征在于：
所述获取用户的身份信息及所述身份信息对应的座位信息和模板信息这一步骤之前设置有用户注册步骤，所述用户注册步骤包括：
获取用户的身份信息；
提供所述虚拟观赛席的当前剩余座位列表供用户从所述列表中选择座位；
提供人物形象模板供用户选择，所述人物形象模板包括人脸模型、身材模型和衣物模型，且所述人物形象模板用于生成所述虚拟观众；
获取所述用户选择的座位信息和模板信息；
建立所述身份信息与座位信息、所述身份信息与模板信息之间的对应关系。
3.根据权利要求2所述的一种虚拟互动观赛方法，其特征在于：
所述向所述用户发放任务指令，所述任务指令为执行相关动作的指示信息这一步骤，其具体包括：
获取用户的座位信息；
根据所述座位信息向用户发放任务指令，所述任务指令还包括执行所述相关动作的时间阈值提示信息。
4.根据权利要求3所述的一种虚拟互动观赛方法，其特征在于：
所述检测并记录用户执行的动作信息这一步骤，其具体包括：
获取用户上传的视频画面；
从所述视频画面中检测得到所述动作信息；
记录所述动作信息。
5.根据权利要求4所述的一种虚拟互动观赛方法，其特征在于：
所述从所述视频画面中检测得到所述动作信息这一步骤，其具体包括：
检测所述视频画面中的人体动作区域，获取所述动作区域的轮廓信息；
对比所述视频中的连续多个视频帧内所述轮廓信息的变化情况；
从所述轮廓信息的变化情况中获取所述动作信息。
6.根据权利要求3所述的一种虚拟互动观赛方法，其特征在于：
所述检测并记录用户执行的动作信息这一步骤，其具体包括：
获取用户的移动终端访问权限；
获取所述移动终端的传感器数据；
根据所述传感器数据检测分析得到所述动作信息；
记录所述动作信息。
7.根据权利要求4-6中任一项所述的一种虚拟互动观赛方法，其特征在于：
所述根据所述动作信息控制所述虚拟观众执行所述动作这一步骤，其具体包括：
获取所述动作信息；
从发放所述任务指令起开始计时，经过预先设定的时间阈值后控制所述虚拟观众执行所述动作。
8.一种虚拟互动观赛系统，其特征在于，包括：
显示单元，用于显示虚拟观赛席和所述虚拟观赛席中的虚拟观众；
建模单元，用于建立虚拟观赛席和虚拟观众模型，并将所述模型发送至显示单元；
指令单元，用于向用户发放任务指令，所述任务指令为执行相关动作的指示信息；
检测单元，用于检测获取用户当前执行的动作信息，并将所述动作信息发送至控制单元；
控制单元，用于控制所述虚拟观众执行与所述动作信息相同的动作；
注册单元，用于获取用户的身份信息，同时向用户提供所述虚拟观赛席的当前剩余座位列表和用于建立所述虚拟观众的人物形象模板，并记录与所述身份信息对应的座位信息和模板信息。
9.一种虚拟互动观赛装置，其特征在于，包括：
存储器和处理器，所述存储器用于存储至少一个程序，所述处理器用于加载所述至少一个程序以执行权利要求1-7任一项所述一种虚拟互动观赛方法。
10.一种存储介质，其中存储有处理器可执行的指令，其特征在于：
所述处理器可执行的指令在由处理器执行时用于执行如权利要求1-7任一项所述一种虚拟互动观赛方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910667663.1A CN110493642B (zh) | 2019-07-23 | 2019-07-23 | 一种虚拟互动观赛方法、系统、装置和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910667663.1A CN110493642B (zh) | 2019-07-23 | 2019-07-23 | 一种虚拟互动观赛方法、系统、装置和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110493642A true CN110493642A (zh) | 2019-11-22 |
| CN110493642B CN110493642B (zh) | 2023-11-17 |
Family
ID=68548037
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910667663.1A Active CN110493642B (zh) | 2019-07-23 | 2019-07-23 | 一种虚拟互动观赛方法、系统、装置和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110493642B (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111385632A (zh) * | 2020-03-06 | 2020-07-07 | 腾讯科技（深圳）有限公司 | 多媒体互动方法 |
| CN112435348A (zh) * | 2020-11-26 | 2021-03-02 | 视伴科技(北京)有限公司 | 一种浏览赛事活动虚拟场馆的方法及装置 |
| CN113052344A (zh) * | 2020-08-26 | 2021-06-29 | 视伴科技(北京)有限公司 | 一种赛事活动选座的方法及装置 |
| CN113269894A (zh) * | 2021-05-28 | 2021-08-17 | 视伴科技(北京)有限公司 | 一种赛事活动场景导览方法及装置 |
| CN113784149A (zh) * | 2021-09-10 | 2021-12-10 | 咪咕数字传媒有限公司 | 一种视频信号的热度区域的展示方法、装置及设备 |
| CN114071180A (zh) * | 2021-11-24 | 2022-02-18 | 上海哔哩哔哩科技有限公司 | 直播间展示方法及装置 |
| CN114268827A (zh) * | 2021-12-22 | 2022-04-01 | 咪咕互动娱乐有限公司 | 观赛互动方法、装置、设备以及计算机可读存储介质 |
| WO2022246822A1 (zh) * | 2021-05-28 | 2022-12-01 | 视伴科技(北京)有限公司 | 赛事活动运行仿真系统、方法、设备及存储介质 |
| TWI793633B (zh) * | 2020-06-12 | 2023-02-21 | 日商科樂美數碼娛樂股份有限公司 | 映像傳遞系統、記憶使用於其之電腦程式的記錄媒體、及控制方法 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100770702B1 (ko) * | 2007-04-04 | 2007-10-29 | (주)수달앤컴퍼니 | 광고를 겸한 팬클럽 기반의 차별화된 온라인 리듬액션 게임서비스 제공방법 및 그 시스템 |
| CA2709552A1 (en) * | 2009-07-21 | 2011-01-21 | Ben Kutner | Simulation attendance at a live event |
| CN104504447A (zh) * | 2014-12-24 | 2015-04-08 | 天脉聚源（北京）科技有限公司 | 一种分配虚拟座位图像的方法及装置 |
| CN105138216A (zh) * | 2015-06-29 | 2015-12-09 | 天脉聚源（北京）科技有限公司 | 一种在虚拟座位上显示观众互动信息的方法及装置 |
| CN105263038A (zh) * | 2015-09-24 | 2016-01-20 | 天脉聚源（北京）科技有限公司 | 动态显示虚拟观众席的方法和装置 |
| CN105892673A (zh) * | 2016-04-26 | 2016-08-24 | 四川川大智胜软件股份有限公司 | 影院环境下观众与 3d 立体节目内容实时互动的方法 |
| JP2018007828A (ja) * | 2016-07-13 | 2018-01-18 | 株式会社バンダイナムコエンターテインメント | プログラム及び電子機器 |
| JP2018094326A (ja) * | 2016-12-16 | 2018-06-21 | 株式会社バンダイナムコエンターテインメント | イベント制御システム、イベント通知システム及びプログラム |
| CN109690450A (zh) * | 2017-11-17 | 2019-04-26 | 腾讯科技（深圳）有限公司 | Vr场景下的角色模拟方法和终端设备 |
-
2019
- 2019-07-23 CN CN201910667663.1A patent/CN110493642B/zh active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100770702B1 (ko) * | 2007-04-04 | 2007-10-29 | (주)수달앤컴퍼니 | 광고를 겸한 팬클럽 기반의 차별화된 온라인 리듬액션 게임서비스 제공방법 및 그 시스템 |
| CA2709552A1 (en) * | 2009-07-21 | 2011-01-21 | Ben Kutner | Simulation attendance at a live event |
| CN104504447A (zh) * | 2014-12-24 | 2015-04-08 | 天脉聚源（北京）科技有限公司 | 一种分配虚拟座位图像的方法及装置 |
| CN105138216A (zh) * | 2015-06-29 | 2015-12-09 | 天脉聚源（北京）科技有限公司 | 一种在虚拟座位上显示观众互动信息的方法及装置 |
| CN105263038A (zh) * | 2015-09-24 | 2016-01-20 | 天脉聚源（北京）科技有限公司 | 动态显示虚拟观众席的方法和装置 |
| CN105892673A (zh) * | 2016-04-26 | 2016-08-24 | 四川川大智胜软件股份有限公司 | 影院环境下观众与 3d 立体节目内容实时互动的方法 |
| JP2018007828A (ja) * | 2016-07-13 | 2018-01-18 | 株式会社バンダイナムコエンターテインメント | プログラム及び電子機器 |
| JP2018094326A (ja) * | 2016-12-16 | 2018-06-21 | 株式会社バンダイナムコエンターテインメント | イベント制御システム、イベント通知システム及びプログラム |
| CN109690450A (zh) * | 2017-11-17 | 2019-04-26 | 腾讯科技（深圳）有限公司 | Vr场景下的角色模拟方法和终端设备 |
Non-Patent Citations (1)
| Title |
|---|
| 连冰玉;: "直击广电行业AR/VR技术发展痛点, 未来互动趋势应该这么玩", 中国广播影视, no. 05, pages 44 - 47 * |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111385632A (zh) * | 2020-03-06 | 2020-07-07 | 腾讯科技（深圳）有限公司 | 多媒体互动方法 |
| CN111385632B (zh) * | 2020-03-06 | 2021-08-13 | 腾讯科技（深圳）有限公司 | 多媒体互动方法、装置、设备和介质 |
| TWI793633B (zh) * | 2020-06-12 | 2023-02-21 | 日商科樂美數碼娛樂股份有限公司 | 映像傳遞系統、記憶使用於其之電腦程式的記錄媒體、及控制方法 |
| CN113052344A (zh) * | 2020-08-26 | 2021-06-29 | 视伴科技(北京)有限公司 | 一种赛事活动选座的方法及装置 |
| CN112435348A (zh) * | 2020-11-26 | 2021-03-02 | 视伴科技(北京)有限公司 | 一种浏览赛事活动虚拟场馆的方法及装置 |
| CN113269894A (zh) * | 2021-05-28 | 2021-08-17 | 视伴科技(北京)有限公司 | 一种赛事活动场景导览方法及装置 |
| WO2022246822A1 (zh) * | 2021-05-28 | 2022-12-01 | 视伴科技(北京)有限公司 | 赛事活动运行仿真系统、方法、设备及存储介质 |
| CN113784149A (zh) * | 2021-09-10 | 2021-12-10 | 咪咕数字传媒有限公司 | 一种视频信号的热度区域的展示方法、装置及设备 |
| CN113784149B (zh) * | 2021-09-10 | 2023-09-19 | 咪咕数字传媒有限公司 | 一种视频信号的热度区域的展示方法、装置及设备 |
| CN114071180A (zh) * | 2021-11-24 | 2022-02-18 | 上海哔哩哔哩科技有限公司 | 直播间展示方法及装置 |
| CN114268827A (zh) * | 2021-12-22 | 2022-04-01 | 咪咕互动娱乐有限公司 | 观赛互动方法、装置、设备以及计算机可读存储介质 |
| CN114268827B (zh) * | 2021-12-22 | 2023-08-15 | 咪咕互动娱乐有限公司 | 观赛互动方法、装置、设备以及计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110493642B (zh) | 2023-11-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110493642A (zh) | 一种虚拟互动观赛方法、系统、装置和存储介质 | |
| US11436803B2 (en) | Insertion of VR spectator in live video of a live event | |
| CN109475774B (zh) | 虚拟现实环境中的视图位置处的观众管理 | |
| US10380798B2 (en) | Projectile object rendering for a virtual reality spectator | |
| EP2131934B1 (en) | Entertainment device and method | |
| US9345970B2 (en) | Switching operation of an entertainment device and method thereof | |
| WO2020138107A1 (ja) | 配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラム | |
| US20100203968A1 (en) | Apparatus And Method Of Avatar Customisation | |
| US20220410007A1 (en) | Virtual character interaction method and apparatus, computer device, and storage medium | |
| CN111201069A (zh) | 对在现实世界场地中举行的现场事件中所展示的交互式游戏世界的旁观者视图 | |
| US20130132837A1 (en) | Entertainment device and method | |
| CN107683166A (zh) | 用于限制头戴式显示器上的视觉活动的过滤和父母控制方法 | |
| US20120182431A1 (en) | Method and apparatus for sharing a physical activity between several people | |
| CN111641842A (zh) | 直播间中集体活动实现方法、装置、存储介质及电子设备 | |
| WO2022267729A1 (zh) | 基于虚拟场景的互动方法、装置、设备、介质及程序产品 | |
| CN112188223A (zh) | 直播视频播放方法、装置、设备及介质 | |
| JP7368770B1 (ja) | 情報処理システム、情報処理装置およびプログラム | |
| US20240114181A1 (en) | Information processing device, information processing method, and program | |
| JP2023123389A (ja) | コミュニケーションシステム | |
| CN116233513A (zh) | 虚拟现实直播间虚拟礼物特效播放处理方法、装置和设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20221028 Address after: Room 1602, 16th Floor, Building 18, Yard 6, Wenhuayuan West Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing 100176 Applicant after: Beijing Lajin Zhongbo Technology Co.,Ltd. Address before: 310000 room 650, building 3, No. 16, Zhuantang science and technology economic block, Xihu District, Hangzhou City, Zhejiang Province Applicant before: Tianmai Juyuan (Hangzhou) Media Technology Co.,Ltd. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |