CN106792214B - 一种基于数字视听场所的直播互动方法和系统 - Google Patents

Abstract

本发明提出一种基于数字视听场所的直播互动方法和系统。创建虚拟包厢，虚拟包厢的用户包括场内用户和场外用户；场内用户确定场景直播内容，将场景直播内容发送到云端以由云端生成播放地址，场外用户在虚拟包厢中基于播放地址观看场景直播内容；场外用户与场内用户在虚拟包厢中执行互动，或场内用户之间在虚拟包厢中执行互动，或场外用户之间在虚拟包厢中执行互动。本发明实施方式直播与数字视听场所场景结合，提供互动性。而且，引入手机屏和电视大屏的跨屏互动。摄像头还可以直播AR内容。本发明实施方式还实现了实物送礼，提高了移动支付的安全性并降低成本，而且还可以实现云端配置，升级维护非常便利。

Description

一种基于数字视听场所的直播互动方法和系统

技术领域

本发明属于移动直播技术领域，特别是一种基于数字视听场所的直播互动方法和系统。

背景技术

网络直播吸取和延续互联网的优势，利用视讯方式进行网上现场直播，可以将才艺展示、产品展示、相关会议、背景介绍、方案测评、网上调查、对话访谈、在线培训等内容现场发布到互联网上，利用互联网的直观、快速、表现形式好、内容丰富、交互性强、地域不受限制、受众可划分等特点，加强活动现场的推广效果。现场直播完成后，还可以随时为读者继续提供重播、点播，有效延长了直播的时间和空间，发挥直播内容的最大价值。

在网红经济和直播平台的风口之下，当前直播平台发展迅猛，移动直播已经成为娱乐内容传播的一大热门方式，互联网行业也出现了大量视频直播类应用程序(app)。然而，差异化视频内容稀缺已经制约直播发展的瓶颈，也正因为直播方式相对简单，优质内容呈碎片化，使得用户粘度极低。因此，垂直属性更强、差异化更明显的直播平台容易吸引特定标签的用户群体。

另外，在众多的移动直播产品方案中，采用互动的方式基本是同质化的聊天弹幕和虚拟礼物赠送，并没有与当前的数字视听场所(例如KTV场景)结合，缺乏更多的娱乐性。

还有，在现有移动直播产品方案中，只是以手机屏作为直播内容展示载体，展示效果不佳。而且，现有的直播软件在用户互动环境中只能赠送虚拟的道具和礼物，无法赠送实际的超市物品或者现实的物品。不仅于此，现有的视频直播基本上只有美颜等功能，无法结合增强显示(AR)功能，将酷炫的视频内容直播出去。而且，现有的直播主要利用手机，受限于手机摄像头的焦距，画面有限，无法满足多人直播，而且还经常受到手机电池容量的限制。还有，手机摄像头在拍摄过程中容易抖动，拍摄的视频易不清晰；且手机摄像头在移动拍摄过程中，网络信号不好，容易引起直播卡顿。

发明内容

本发明实施方式提出一种基于数字视听场所的直播互动方法和系统，从而提高互动性。

本发明实施方式的技术方案如下：

一种基于数字视听场所的直播互动方法，该方法包括：

创建虚拟包厢，所述虚拟包厢的用户包括场内用户和场外用户；

场内用户确定场景直播内容，将所述场景直播内容发送到云端以由云端生成播放地址，场外用户在所述虚拟包厢中基于所述播放地址观看所述场景直播内容；和/或，场外用户确定场外直播内容，将所述场外直播内容发送到云端以由云端生成内容播放地址，场内用户在所述虚拟包厢中基于所述内容播放地址观看所述场外直播内容；

场外用户与场内用户在所述虚拟包厢中执行互动，或场内用户之间在所述虚拟包厢中执行互动，或场外用户之间在所述虚拟包厢中执行互动。

在一个实施方式中，场内用户确定场景直播内容包括：

场内用户基于移动终端确定场景直播内容；或，场内用户基于包厢点歌终端确定场景直播内容；

和/或

所述虚拟包厢是在场内用户未进数字视听场所前所创建的，或所述虚拟包厢是在场内用户进入数字视听场所后所创建的。

在一个实施方式中，所述场内用户基于移动终端确定直播内容包括：

当场内用户在移动终端上选定以所述移动终端作为直播录制源时，使能所述移动终端录制所述场内用户的视频以作为所述场景直播内容；或，当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容；或，当场内用户在所述移动终端上选定以所述移动终端及布置在场所包厢中的摄像头共同作为直播录制源时，使能所述移动终端录制所述场内用户的视频，使能所述摄像头录制所述场内用户的视频，并将所述移动终端录制的视频、所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容；或，当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频作为所述场景直播内容；

或

所述场内用户基于包厢点歌终端确定直播内容包括：当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频作为所述场景直播内容；或，当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容。

在一个实施方式中，该方法还包括：

当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，布置在所述场所包厢中的显示单元展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容；

当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，布置在所述场所包厢中的显示单元展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容。

在一个实施方式中，所述互动内容包括下列中的至少一个：

点歌；包厢内播放控制；文字聊天；语音聊天；发送图片；发送虚拟礼物；实物送礼；分享播放地址。

在一个实施方式中，所述场外用户与场内用户在所述虚拟包厢中执行互动包括：从场外用户处接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述场外用户基于所述实物待支付信息完成支付后，向所述场内用户分发所述实物；或

所述场内用户包括第一场内用户和第二场内用户，所述场内用户在所述虚拟包厢中执行互动包括：从第一场内用户处接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述第一场内用户基于所述实物待支付信息完成支付后，向第二场内用户分发所述实物；

其中所述实物包括下列中的至少一个：酒类；饮料；零食；鲜花；水果；熟食；玩具；服装；饰品。

在一个实施方式中，

该方法还包括：经由与场所包厢中的机顶盒在同一局域网中的支付管理平台，从与场所包厢相绑定的移动终端接收订单信息；经由所述支付管理平台通过局域网将所述订单信息发送到网关服务器，以由所述网关服务器经由互联网将所述订单信息发送到云端服务器，并由云端服务器经由互联网将所述订单信息发送到支付平台；经由所述支付管理平台通过局域网从网关服务器接收待支付信息，所述待支付信息由支付平台基于订单信息生成、并经由互联网发送到云端服务器，再由云端服务器经由互联网发送到网关服务器；展示所述待支付信息，以由移动终端基于所述待支付信息执行支付；

或

该方法还包括：支付平台经由互联网向云端服务器返回支付结果；云端服务器经由互联网将支付结果发送到网关服务器；网关服务器经由局域网向支付管理平台发送支付结果；

或

该方法还包括：当增加新的支付平台时，云端服务器进一步建立与新的支付平台的互联网连接；云端服务器基于预定策略选择目标支付平台，并将所述订单信息发送到所述目标支付平台；或，当所述支付平台被替换为另外的支付平台时，云端服务器进一步建立与所述另外的支付平台的互联网连接；云端服务器经由互联网将所述订单信息发送到所述另外的支付平台；或，当支付平台被删除时，云端服务器删除与所述支付平台的互联网连接。

在一个实施方式中，该方法还包括：将第一对象更新到所述虚拟场景模型中，并在接收到互动指令时，根据互动指令将互动内容更新到所述虚拟场景模型中，以得到所述场景直播内容；其中所述第一对象包括下列中的至少一个：真人对象；宠物；植物；

将第一对象更新到所述虚拟场景模型中包括：实时获取一个以上摄像装置的信号，采集得到一个以上的第一图像数据；根据预设的条件，从每个第一图像数据中提取一个以上的第一对象，将一个以上的第一对象实时更新到虚拟场景模型中；

所述互动内容还包括第一素材的内容数据，所述第一素材包括：文字素材、图像素材、声音素材或图像素材与声音素材的结合；所述虚拟场景模型为3D虚拟舞台。

一种基于数字视听场所的直播系统，包括：

云端服务器，用于创建虚拟包厢，所述虚拟包厢的用户包括场内用户和场外用户；

场内用户终端，用于确定场景直播内容，将所述场景直播内容发送到云端以由云端生成播放地址；

场外用户终端，用于在所述虚拟包厢中基于所述播放地址观看所述场景直播内容；

和/或，

场外用户终端，用于确定场外直播内容，将所述场外直播内容发送到云端以由云端生成内容播放地址；

场内用户终端，用于在所述虚拟包厢中基于所述内容播放地址观看所述场外直播内容；

其中场内用户终端场外用户终端在所述虚拟包厢中执行互动，或场内用户终端之间在所述虚拟包厢中执行互动，或场外用户终端之间在所述虚拟包厢中执行互动。

在一个实施方式中，所述场内用户终端为移动终端；该系统还包括：

布置在所述场所包厢中的摄像头，用于当直播用户在移动终端上选定以所述摄像头作为直播录制源时，录制所述直播用户的视频以作为场景直播内容，或将所述直播用户的视频与预定的虚拟场景模型作出增强现实处理以作为场景直播内容，将所述场景直播内容发送到云端服务器。

在一个实施方式中，所述场内用户终端为包厢点歌终端；

该系统还包括：布置在所述场所包厢中的摄像头，

所述场所包厢中的摄像头，还用于当直播用户在所述包厢点歌终端上选定以所述摄像头作为直播录制源时，录制所述直播用户的视频并将所述直播用户的视频作为所述场景直播内容，或将所述直播用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容。

在一个实施方式中，还包括布置在所述场所包厢中的显示单元；

显示单元，用于当场内用户在移动终端上选定以布置在场所包厢中的摄像头作为直播录制源时，展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容；当场内用户在包厢点歌终端上选定以布置在场所包厢中的摄像头作为直播录制源时，展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容。

在一个实施方式中，还包括位于所述场所包厢中的机顶盒；

所述摄像头或所述移动终端，还用于录制所述实物的视频或图片，将所述实物的视频或图片发送到所述机顶盒；

所述机顶盒与显示单元连接，用于将所述实物的视频或图片发送到显示单元；

在一个实施方式中，还包括支付平台；

所述支付平台，用于从基于所述场景直播内容的播放地址观看直播内容的观看用户接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述观看用户基于所述实物待支付信息完成支付后，向所述场所包厢分发所述实物。

从上述技术方案可以看出，创建虚拟包厢，虚拟包厢的用户包括场内用户和场外用户；场内用户确定场景直播内容，将场景直播内容发送到云端以由云端生成播放地址，场外用户在虚拟包厢中基于播放地址观看场景直播内容；场外用户与场内用户在虚拟包厢中执行互动，或场内用户之间在虚拟包厢中执行互动，或场外用户之间在虚拟包厢中执行互动。因此，本发明实施方式直播与数字视听场所场景结合，提供互动性。而且，引入手机屏和电视大屏的跨屏互动，摄像头还可以直播AR内容。

另外，本发明实施方式还实现了实物送礼，提高了移动支付的安全性并降低成本，而且还可以实现云端配置，升级维护非常便利。

还有，在本发明实施方式中，可以在云端服务器对各个交易场所的交易敏感数据进行集中管理，既保证了数据安全性，也可以为大数据挖掘提供关键依据。

附图说明

图1为根据本发明实施方式的数字视听场所直播互动方法流程图。

图2为根据本发明实施方式的实物送礼流程图。

图3为根据本发明实施方式的KTV直播互动系统的结构图。

图4为根据本发明实施方式的KTV直播互动元素示意图。

图5为根据本发明实施方式的移动支付系统的示范性结构图。

图6为根据本发明实施方式在KTV场所的移动支付系统的示范性结构图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面结合附图对本发明作进一步的详细描述。

为了描述上的简洁和直观，下文通过描述若干代表性的实施方式来对本发明的方案进行阐述。实施方式中大量的细节仅用于帮助理解本发明的方案。但是很明显，本发明的技术方案实现时可以不局限于这些细节。为了避免不必要地模糊了本发明的方案，一些实施方式没有进行细致地描述，而是仅给出了框架。下文中，“包括”是指“包括但不限于”，“根据……”是指“至少根据……，但不限于仅根据……”。由于汉语的语言习惯，下文中没有特别指出一个成分的数量时，意味着该成分可以是一个也可以是多个，或可理解为至少一个。

本发明实施方式提出了一种应用于数字视听场所场景下的直播互动技术，可以在app上创建线上虚拟包厢作为内容载体，通过手机摄像头或包厢专业摄像头直播线下实体包厢中的聚会娱乐内容。优选地，数字视听场所可以包括下列中的至少一个：卡拉OK场所；网吧；影吧；台球室，等等。

利用手机直播、大屏弹幕及特效、包厢摄像头直播、赠送虚拟道具和远程实物送礼等多样性的互动方式来满足场内用户和场外好友的实时互动和娱乐需求。另外，线下包厢电视端屏幕可以作为互动内容的展示载体，支持在普通弹幕和高清大屏上分区域展示用户产生的丰富内容。场内用户可以在电视屏上即时看到好友发送的弹幕消息、赠送礼物的动画效果，为用户提升体验，丰富泛音乐娱乐的效果。用户可以选择邀请好友或联网推送的形式，将直播内容进行分享传播。

当数字视听场所具体为KTV场所时，本发明实施方式提出的KTV直播互动技术包含线上虚拟包厢、手机和包厢摄像头直播方案、大屏展示互动、虚拟道具/远程实物送礼等主要组成部分。本发明实施方式将直播技术与KTV场景结合，突出展示聚会场景、K歌大赛等KTV内的特质内容，以虚拟包厢和远程实物送礼的独特互动形式拉近场内外用户的距离，通过电视大屏展示弹幕及特效来加强场内外送礼体验，提升娱乐效果。虚拟包厢可以由用户通过app扫描包厢内的二维码创建，作为线上互动载体连接移动终端和实体包厢的播放终端。虚拟包厢中的互动功能包括点歌、播控、文字语音聊天、发送图片、手机直播、包厢摄像头直播、虚拟礼物、实物送礼、分，等等享。虚拟包厢内成员分为场内用户(比如，绑定二维码)和场外用户(比如，未绑定二维码)。场内用户可以使用虚拟包厢所有的互动功能，场外用户无法发起直播，可以发送弹幕聊天互动，赠送礼物，观看视频直播。

在一个实施方式中，虚拟包厢是在场内用户未进数字视听场所前所创建的，或虚拟包厢是在场内用户进入数字视听场所后所创建的。

比如，当用户进入数字视听场所后，将虚拟包厢与数字视听场所线下的实体包厢相绑定。当然，用户也可以在进入数字视听场所线下的实体包厢后，再创建与线下包厢相绑定的虚拟包厢，并将一些未在线下实体包厢中的用户也拉入虚拟包厢，从而实现线下线上的一起互动。通过虚拟包厢与实体包厢的绑定，场外的虚拟包厢用户可以参与互动，还可以在虚拟包厢中观看直播等。

在一个实施方式中，区别于现有技术中的其它直播平台，本发明实施方式的一个创新点是以手机屏和包厢电视大屏同时作为虚拟包厢的内容展示载体，加入跨屏互动玩法。线下电视屏可以实时显示虚拟包厢内用户产生的内容信息。例如：用户可以在app端和电视大屏中同时观看包厢摄像头结合虚拟场景模型的AR技术直播的绚丽舞台画面，场外用户给场内好友送礼时会有实时弹幕和动画特效在屏幕上展示，进入虚拟包厢的成员人数和头像信息也会在大屏上有专门的区域显示和定时刷新，营造热闹的互动气氛。

在一个实施方式中，区别于现有技术中的其它直播平台，本发明实施方式的另一大创新点是技术架构上除了支持场内用户在虚拟包厢中开启手机直播，还支持开启包厢专业摄像头直播。具体地：用户通过app向机顶盒发送直播请求。机顶盒收到直播请求后，向云端申请直播的推流CDN通道，机顶盒通知包厢内的摄像头设备通过RTMP协议向CDN通道推实时音视频流，该音视频流包含音效器的音频数据和摄像头的视频数据。云端通过分发将视频流推送到数据中心和网关管理服务器，管理服务器再推送到机顶盒播放终端。虚拟包厢中可以并存手机直播和包厢直播两路直播源，手机直播的展示优先级高于包厢直播。

在一个实施方式中，区别于现有技术中的其它直播平台，本发明实施方式的一大创新点是加入了实物送礼的技术方案。在虚拟包厢内，场内场外用户不仅可以赠送虚拟礼物，还可以通过线上购买KTV超市里的酒水、果盘等商品，线下出品送到指定的实体包厢。具体的实施步骤为：后台为合作商家开通实物送礼业务，配置该商家在线超市的商品信息，用户在虚拟包厢中选择赠送的商品并下单，付款后，订单信息会传到相应的商家，商家根据订单的内容配送相应的商品到用户所在的包厢，将远程送礼转化实物礼物的方式触达用户，让场内场外的互动更加真实，更富有娱乐性。

图1是根据本发明实施方式的基于数字视听场所的直播互动方法流程图。

如图1所示，该方法包括：

步骤101：创建虚拟包厢，所述虚拟包厢的用户包括场内用户和场外用户。

步骤102：场内用户确定场景直播内容，将所述场景直播内容发送到云端以由云端生成播放地址，场外用户在所述虚拟包厢中基于所述播放地址观看所述场景直播内容；

步骤103：场外用户与场内用户在所述虚拟包厢中执行互动，或场内用户之间在所述虚拟包厢中执行互动，或场外用户之间在所述虚拟包厢中执行互动。

在一个实施方式中，步骤102中场内用户确定场景直播内容包括：场内用户基于移动终端确定场景直播内容；或，场内用户基于包厢点歌终端确定场景直播内容。

在一个实施方式中，场内用户基于移动终端确定直播内容包括：

(1)、当场内用户在移动终端上选定以所述移动终端作为直播录制源时，使能所述移动终端录制所述场内用户的视频以作为所述场景直播内容；

(2)、当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容；

(3)、当场内用户在所述移动终端上选定以所述移动终端及布置在场所包厢中的摄像头共同作为直播录制源时，使能所述移动终端录制所述场内用户的视频，使能所述摄像头录制所述场内用户的视频，并将所述移动终端录制的视频、所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容；

(4)、当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频作为所述场景直播内容。

在一个实施方式中，场内用户基于包厢点歌终端确定直播内容包括：

(1)、当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频作为所述场景直播内容；

(2)、当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容。

在一个实施方式中，该方法还包括：

当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，布置在所述场所包厢中的显示单元展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容；

当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，布置在所述场所包厢中的显示单元展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容。

具体地，互动内容包括下列中的至少一个：点歌；播放控制；文字聊天；语音聊天；发送图片；发送虚拟礼物；实物送礼；分享播放地址，等等。

在一个实施方式中，该方法还包括：

场外用户确定场外直播内容，将所述场外直播内容发送到云端以由云端生成内容播放地址，场内用户在所述虚拟包厢中基于所述内容播放地址观看所述场外直播内容。

可见，基于该实施方式，还可以实现从场外用户向场内用户的直播。

举例，场外用户终端通过app扫描二维码绑定到虚拟包厢，而且场外用户终端录制场外相关视频以作为场外直播内容，并将场外直播内容发送到云端以由云端生成内容播放地址。场内用户通过app从云端获取内容播放地址，并且在虚拟包厢中基于内容播放地址观看场外直播内容。

在一个实施方式中，步骤103中场外用户与场内用户在所述虚拟包厢中执行互动包括：从场外用户处接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述场外用户基于所述实物待支付信息完成支付后，向所述场内用户分发所述实物。

在一个实施方式中，步骤103中场内用户包括第一场内用户和第二场内用户，所述场内用户在所述虚拟包厢中执行互动包括：从第一场内用户处接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述第一场内用户基于所述实物待支付信息完成支付后，向第二场内用户分发所述实物；其中所述实物包括下列中的至少一个：酒类；饮料；零食；鲜花；水果；熟食；玩具；服装；饰品。

以上示范性描述了实物种类和互动内容的典型实例，本领域技术人员可以意识到，这种描述仅是示范性的，并不用于限定本发明实施方式的保护范围。

在一个实施方式中，该方法还包括：经由与场所包厢中的机顶盒在同一局域网中的支付管理平台，从与场所包厢相绑定的移动终端接收订单信息；经由所述支付管理平台通过局域网将所述订单信息发送到网关服务器，以由所述网关服务器经由互联网将所述订单信息发送到云端服务器，并由云端服务器经由互联网将所述订单信息发送到支付平台；经由所述支付管理平台通过局域网从网关服务器接收待支付信息，所述待支付信息由支付平台基于订单信息生成、并经由互联网发送到云端服务器，再由云端服务器经由互联网发送到网关服务器；展示所述待支付信息，以由移动终端基于所述待支付信息执行支付。

在一个实施方式中，该方法还包括：支付平台经由互联网向云端服务器返回支付结果；云端服务器经由互联网将支付结果发送到网关服务器；网关服务器经由局域网向支付管理平台发送支付结果。

在一个实施方式中，该方法还包括：该方法还包括：当增加新的支付平台时，云端服务器进一步建立与新的支付平台的互联网连接；云端服务器基于预定策略选择目标支付平台，并将所述订单信息发送到所述目标支付平台；或，当所述支付平台被替换为另外的支付平台时，云端服务器进一步建立与所述另外的支付平台的互联网连接；云端服务器经由互联网将所述订单信息发送到所述另外的支付平台；或，当支付平台被删除时，云端服务器删除与所述支付平台的互联网连接。

在一个实施方式中，该方法还包括：将第一对象更新到所述虚拟场景模型中，并在接收到互动指令时，根据互动指令将互动内容更新到所述虚拟场景模型中，以得到所述场景直播内容；其中所述第一对象包括下列中的至少一个：真人对象；宠物；植物；

将第一对象更新到所述虚拟场景模型中包括：实时获取一个以上摄像装置的信号，采集得到一个以上的第一图像数据；根据预设的条件，从每个第一图像数据中提取一个以上的第一对象，将一个以上的第一对象实时更新到虚拟场景模型中；

所述互动内容还包括第一素材的内容数据，所述第一素材包括：文字素材、图像素材、声音素材或图像素材与声音素材的结合；所述虚拟场景模型为3D虚拟舞台。

在本发明实施方式中，场内用户可以将移动终端(比如，手机)与场所包厢绑定，用户通过移动终端中的客户端打开直播功能，在该直播功能中可选择直播移动终端自带摄像头所拍摄的视频文件，还可以选择直播包厢中设置的摄像头所拍摄的视频文件(该视频文件可以为虚拟舞台的视频)。在确定直播内容后，将直播视频内容上传到流媒体服务器，通过CDN分发到多终端用户，并生成观看直播的路径。然后，用户将观看直播的路径直接分享给他人，他人通过直播路径可观看到直播，或用户将直播路径放在客户端平台上，他人主动查找该直播路径进行观看直播。直播页面上可以具有弹幕按钮、虚拟礼物、虚拟道具或场所线上超市入口。他人可在直播页面购买送弹幕、虚拟礼物、虚拟道具等。购买后，弹幕按钮、虚拟礼物、虚拟道具依次通过云端服务器和网关服务器发送到包厢机顶盒，然后机顶盒控制弹幕、虚拟礼物、虚拟道具等显示到包厢的显示屏上。当需要送实体物品时，从场所线上超市入口进入场所线上超市，进行购买实体物品，该购物信息中包括包厢信息、被送人的账户等，付款后，场所的所送物品送到对应包厢中对应账户的用户。

在这里，场内用户移动终端可以通过扫描二维码的方式与场所包厢相绑定。比如，在场所包厢中张贴有二维码，场内用户的移动终端的摄像头扫描二维码，并与场所包厢保持绑定。

在一个实施方式中，该方法还包括：录制实物的视频或图片；在场所包厢中显示直播内容及实物的视频或图片。

下面以KTV为例，对本发明实施方式进行具体说明。

在具体实施中，KTV场内用户可以通过移动终端上的微信或其它App扫描点歌台上特定的二维码，以绑定包厢。KTV场内用户可以选择使用包厢内的专业摄像头或移动终端自带摄像头进行直播。使用专业摄像头直播，可以选择AR功能，把虚拟舞台、场景直播出去。当用户发起直播后，该用户可以主动通过微信分享直播H5页面给场外的观众。场外的用户也使用相同的App在热门直播大厅列表找到对应的直播。场外观众可以送弹幕、虚拟礼物、虚拟道具、或者实际超市的物品，和直播者互动。直播系统和KTV点歌系统无缝结合的。场外用户的发送的弹幕、虚拟礼物、实物送礼，在KTV的包厢大电视上都有同步的酷炫展示，如果场外送的是实际超市的礼物，线下的超市系统会自动出品对应的实际礼物，由服务员送给直播者。

本发明实施方式优选还提出了一种融合式虚拟场景互动方法。在一个实施方式中，该方法还包括：将第一对象更新到所述虚拟世界模型中，并在接收到互动指令时，根据互动指令将互动内容更新到所述虚拟世界模型中，以得到所述直播内容；其中第一对象包括：实物或虚拟礼物。

在一个实施方式中，将第一对象更新到所述虚拟世界模型中包括：实时获取一个以上摄像装置的信号，采集得到一个以上的第一图像数据；根据预设的条件，从每个第一图像数据中提取一个以上的第一对象，将一个以上的第一对象实时更新到虚拟场景中；所述互动内容还包括第一素材的内容数据，所述第一素材包括：文字素材、图像素材、声音素材或图像素材与声音素材的结合；或，所述虚拟世界模型为3D虚拟舞台。

可见，本发明实施方式还提供了一种融合式虚拟场景互动的方法，可以应用于网络直播或MTV制作等多种需求中。该融合式虚拟场景互动的方法，将第一对象更新到虚拟场景中，并在接收到互动指令时，根据互动指令将互动内容更新到虚拟场景中，得到图像数据。

具体地，融合式虚拟场景互动包括以下步骤：

第一步：实时获取一个以上摄像装置的信号，采集得到一个以上的第一图像数据。

第二步：根据预设的条件，从每个第一图像数据中提取一个以上的第一对象。在不同的实施例中根据需要，第一对象可以是不同的具体对象，例如第一对象可以是真人主播，可以是宠物动物等，还可以是植物等；第一对象的数量可以是单个，也可以是2个以上。根据这些实际需求的不同，可以使用不同的算法和设置，以有效地在第一数据图像中提取第一对象。以下通过一具体提取第一对象的算法实施例进行举例说明。

在某一实施例中，第一图像数据中，第一对象为人物主播，主播所处的背景为纯色背景。提取第一图像数据中第一对象的具体步骤为：GPU将第一图像数据中的每个像素的颜色值与预设的阈值做比较；若像素的颜色值在预设的阈值内，则将该像素点的Alpha通道设为零，即将背景显示为透明色，提取出对象。

由于背景为纯色，所以本实施例采用色度键法进行抠图。其中预设的阈值为背景颜色的颜色值，例如，背景颜色为绿色，则预设的像素点RGB颜色值的阈值为(0±10、255-10、0±10)。背景色可以选择绿色或蓝色，在拍摄的场所可同时设置两种颜色的背景，供主播选择。当主播穿与绿色反差较大的衣服唱歌时，可选用绿色的背景。在对象(人像)提取过程中，由于主播穿的衣服与背景色相差较大，所以图像中的每个像素的颜色值与预设的阈值进行比较后，背景部分像素点的颜色值在预设的阈值内，将背景部分像素点的Alpha通道设为零，即将背景显示为透明色；而人像部分的像素点不在预设的阈值内，保留人像部分，从而实现将人像从图像中提取出来。

在具体的实施例中，还可以利用设备上的GPU进行抠图处理操作，不占用CPU时间，提高系统速度；并且由于GPU是专门对图像进行处理的硬件，对不同大小的像素运算时间一样，例如，8位、16位、32位的像素运算时间均一样，可大大节省了对像素的运算时间；而普通的CPU会随像素大小的增大延长处理时间，所以本实施例的人像提取速度大大提高。上述的区别点使得本实施例中还可以采用带有GPU的嵌入式设备实现，即使嵌入式方案中的CPU性能较弱，但是应用本实施例的方案，嵌入式设备方案仍然能实现流畅显示，因为若使用CPU从第一图像数据中提取第一对象，CPU需进行读取摄像装置获取的视频，并进行抠图等处理，CPU负担太重，无法进行流畅的显示。而本实施例应用于嵌入式方案中，将上述抠图处理放入GPU中进行，既减轻了CPU的负担，同时不会对GPU的运行造成影响。

第三步：接收来自第一终端发送的互动指令。在不同的实施例中，所述第一终端通过计算机网络发送互动指令，计算机网络可以是Internet网络也可以是局域网，可以是由有线网络、WiFi网络、3G/4G移动通讯网络、蓝牙网络或ZigBee网络等进行连接。第一终端可以是PC，也可以是手机、平板电脑等移动通讯设备，还可以是智能手表、智能手环、智能眼镜等穿戴式设备。在一些实施例中，第一终端还可以遥控器等近距离控制装置，第一终端可产生红外信号、无线电波等信号来发送相应的互动指令。

第四步：将一个以上的第一对象实时更新到虚拟场景中，并根据互动指令，更新或切换虚拟场景，得到第二图像数据。在实施例中，所述虚拟场景包括计算机模拟的虚拟现实场景或真实拍摄的视频场景等。更进一步的，实施例还可以结合新近发展的3D图像技术来提供虚拟场景，例如3D虚拟现实场景或3D视频场景。

3D虚拟现实场景技术是一种可以创建和体验虚拟世界的计算机仿真系统，它利用计算机生成一种现实场景的3D模拟场景，是一种多源信息融合的交互式的三维动态视景和实体行为的系统仿真。虚拟场景包括任何现实生活中存在的实际场景，包含视觉、听觉等任何能通过体感感受到的场景，通过计算机技术来模拟实现。3D虚拟现实场景的一种应用是3D虚拟舞台，3D虚拟舞台是通过计算机技术模拟现实舞台，实现一种立体感、真实感强的舞台效果。可以通过3D虚拟舞台实现，在现实中不在舞台上的主播对象在各种舞台上进行表演的场景效果。3D视频是拍摄影像时，用两台摄影机模拟左右两眼视差，分别拍摄两条影片，然后将这两条影片同时放映到银幕上，放映时让观众左眼只能看到左眼图像，右眼只能看到右眼图像。最后两幅图像经过大脑叠合后，就能看到具有立体纵深感的画面，即为3D视频。

在不同虚拟场景中互动的实施例中，互动指令可以包括不同的内容，在某些实施例中，所述互动指令包括将第一素材更新到虚拟场景中的命令。具体为：在将第一对象实时更新到虚拟场景的同时，根据所述互动指令，将第一素材也更新到虚拟场景中，从而得到所述第二图像数据。第一素材可以为图像素材、声音素材或者图像素材与声音素材的结合。以网络直播为例，所述第一素材包括有虚拟礼物、点赞、背景音、喝彩等，网络直播的观众可通过移动手机，向主播送鲜花等虚拟礼物的互动指令，所送的礼物将以鲜花图片的形式在虚拟场景中体现出来。网络直播的观众还可以通过移动手机，向主播发送鼓掌的互动指令，鼓掌的互动指令将以掌声的形式进行播放。第一素材可以是系统预置的，供给用户选择使用，而在某些实施例中，所述互动指令除了包括将第一素材更新到虚拟场景中的命令，还可包括了第一素材的内容数据。例如观众在通过移动终端上传一个赠送虚拟礼物的互动指令，以及在互动指令中还包含了一张所赠送虚拟礼物的图片，在接收到所述互动指令后，将所述礼物的图片更新至虚拟场景中。因此观众在发送互动指令时，除了可以选择互动的方式，还可以根据自己的喜好自定义第一素材的内容数据，如喜欢的图片素材、声音素材或图片与声音结合的素材。

在一些实施例中，互动指令还包括变换虚拟场景镜头的命令，所述变换虚拟场景镜头的命令包括有切换虚拟场景镜头的视角，改变虚拟场景镜头焦距以及对虚拟场景进行局部模糊处理等。通过切换虚拟场景镜头的视角，可以模拟从不同视角观看虚拟场景的画面；通过改变虚拟场景镜头焦距，可对拉近和推远虚拟场景的画面；而对对虚拟场景进行局部模糊处理，可使虚拟场景中未模糊处理部分画面被突出显示。通过所述变换虚拟场景镜头的命令，可大大提高观众的互动程度和趣味性。

区别于现有的直播互动，是将互动的内容是直接的叠加至图像或视频的表面层，因此在视觉效果上，所叠加的互动内容像是漂浮在虚拟场景的表面，从而导致互动内容的视觉效果很突兀，很难与虚拟场景融合成一体。在上述实施例中，所述互动内容是在第一对象更新至虚拟场景的同时，更新至虚拟场景中，其中，所述第一对象、互动内容以及虚拟场景是一同渲染成像的，因此互动内容与第一对象可以自然、协调的融合在虚拟场景中，从而具有良好的视觉效果。在实施例中，所述互动内容还可是通过3D建模而得到的3D互动模型，3D互动模型与第一对象以及虚拟场景实时渲染，从而得到3D互动模型在虚拟场景中自然展现，如互动内容为献花时，所献的鲜花可在虚拟场景中立体展现；如互动内容为点赞时，点赞的信息能够在虚拟场景中的虚拟屏幕上显示。例如，当虚拟场景为一个舞台中，互动内容为献花，采用本发明上述方法，所献的鲜花可展示在舞台当中，成为舞台的一部分，显示效果好，而不像现有技术只是漂浮在界面表面。

在一实施例中，在实时获取摄像装置的信号，采集得到第一图像数据的同时，实时获取传声器的信号，采集得到第一声音数据；

将第一对象实时更新到虚拟场景中的同时，也将将第一声音实时更新到虚拟场景中，得到第二图像数据。以网络直播为例，所述第一声音数据为网络主播的说明或演唱的声音，或演主播演唱的声音及歌曲伴奏的混合声音。通过实时将第一声音实时更新到虚拟场景中，同时，在显示终端实时显示更新后的第二图像数据。这样，不仅可听到网络主播的声音，还可以在显示终端看到与声音同步的画面(人像与虚拟场景的结合)，实现了虚拟舞台的效果。

在上述实施例中，得到第二图像数据之后，将第二图像数据通过显示装置显示，通过在显示装置上显示所述第二图像数据，用户可看到第一对象与虚拟场景合成后的视频。在显示第二图像数据时，可先对第二图像数据的画面进行编码，通过编码处理可使图像数据在显示装置实时流畅显示。在现有技术中，一般不对原始画面进行处理，原始画面数据量大，所以现有技术还未出现对人像和虚拟场景合成后的画面，实时在客户端显示的技术。而本实施例将更新后得到的第二图像数据的画面先进行编码，经过编码操作可大大减小画面大小。

例如：在分辨率为720P的情况下，1帧视频的大小为1.31MByte，1秒视频为30帧画面，所以，现有视频中，1秒视频的大小为：30*1.31＝39.3MByte；本实施例对画面进行编码后，还是在分辨率为720P下，设码率为4Mbit，1秒的视频的大小为4Mbit，由于1Byte＝8bit，所以1秒的视频为0.5MByte；与现有视频相比，编码后的视频数据大大减小，从而编码后的视频数据可流畅地在网络上进行传输，实现在客户端流畅显示音视频数据。

在一些实施例中，得到第二图像数据之后，存储记录第二图像数据。所存储的第二图像数据可上传至网关服务器，网关服务器将接收的图像数据上传至云端服务器，云端服务器接收图像数据并生成分享地址。通过上述步骤，实现了第二图像数据的分享。在通过终端设备(例如手机、电脑、平板等带显示屏的电子设备)登录分享地址，即可直接播放音视频数据或下载所述第二图像数据。

所得到的第二图像数据除了可以在本地的显示装置上进行播放，还可以在网络端进行实时播放。具体为：

网络客户端通过实时流传输协议获取所述第二图像数据，并对第二图像数据中的视频数据解码显示画面，所述画面内容可为3D场景渲染的画面；音频数据解码后通过音频播放设备(例如扬声器)播放。所述实时流传输协议可以是RTSP协议。其中，第二图像数据中的图像数据预先经过编码操作，通过图像数据编码操作，可实现客户端流畅播放视频数据。

以上详细描述了融合式虚拟场景互动的实现细节。本领域技术人员可以意识到，也可以不采用上述互动方式或采用其他的互动方式，本发明对此并无限定。

图2为根据本发明实施方式的实物送礼流程图。

如图2所示，该方法包括：

步骤201：场外用户A使用App或者微信H5页面观看直播。

步骤202：场外用户A选择实物物品和送礼对象。

步骤203：场外用户A通过微信或支付宝等支付方式实现支付。

步骤204：支付成功后，场所的超市管理系统出品物品。

步骤205：手机App或者H5接口通知点歌系统在电视展示实物付成功后，场所的超市管理系统出品物品。

步骤206：获赠者收到服务员送来的超市出品的实物礼品。

因此，在本发明实施方式中，在直播过程能方便快捷的利用送实物来增加互动，不仅仅局限于虚拟的道具和礼物，同时本发明结合专业摄像头，把AR内容直播出去，可以将直播引入KTV场所，开创KTV直播时代。

本发明实施方式还提出了一种基于数字视听场所的直播互动系统。

该直播互动系统包括：云端服务器，用于创建虚拟包厢，所述虚拟包厢的用户包括场内用户和场外用户；场内用户终端，用于确定场景直播内容，将所述场景直播内容发送到云端以由云端生成播放地址；场外用户终端，用于在所述虚拟包厢中基于所述播放地址观看所述场景直播内容；其中场内用户终端与场外用户终端在所述虚拟包厢中执行互动，或场内用户终端之间在所述虚拟包厢中执行互动，或场外用户终端之间在所述虚拟包厢中执行互动。

在一个实施方式中，场内用户终端为移动终端；该系统还包括：

布置在所述场所包厢中的摄像头，用于当直播用户在移动终端上选定以所述摄像头作为直播录制源时，录制所述直播用户的视频以作为场景直播内容，或将所述直播用户的视频与预定的虚拟场景模型作出增强现实处理以作为场景直播内容，将所述场景直播内容发送到云端服务器。

在一个实施方式中，所述场内用户终端为包厢点歌终端；该系统还包括：布置在所述场所包厢中的摄像头，所述场所包厢中的摄像头，还用于当直播用户在所述包厢点歌终端上选定以所述摄像头作为直播录制源时，录制所述直播用户的视频并将所述直播用户的视频作为所述场景直播内容，或将所述直播用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容。

在一个实施方式中，还包括布置在所述场所包厢中的显示单元；显示单元，用于当场内用户在移动终端上选定以布置在场所包厢中的摄像头作为直播录制源时，展示所述场景直播内容及场外用户与场内用户、场内用户之间或KTV场外用户之间的互动内容；当场内用户在包厢点歌终端上选定以布置在场所包厢中的摄像头作为直播录制源时，展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容。

在一个实施方式中，还包括位于所述场所包厢中的机顶盒；所述摄像头或所述移动终端，还用于录制所述实物的视频或图片，将所述实物的视频或图片发送到所述机顶盒；所述机顶盒与显示单元连接，用于将所述实物的视频或图片发送到显示单元；

在一个实施方式中，还包括支付平台；所述支付平台，用于从基于所述场景直播内容的播放地址观看直播内容的观看用户接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述观看用户基于所述实物待支付信息完成支付后，向所述场所包厢分发所述实物。

图3为根据本发明实施方式的KTV场景中直播互动系统的结构图。

如图3所示，直播互动系统包括：

KTV场内用户的移动终端，用于与KTV场所包厢相绑定，当KTV场内用户在移动终端上选定以该移动终端作为直播录制源时，录制KTV场内用户的视频以作为直播内容，将直播内容发送到云端服务器；

布置在场所包厢中的摄像头，用于当KTV场内用户在移动终端上选定以摄像头作为直播录制源时，录制KTV场内用户的视频，并将KTV场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为直播内容，将直播内容发送到云端服务器；

云端服务器，用于基于移动终端或摄像头提供的直播内容生成直播内容的播放地址；

支付平台，用于从基于直播内容的播放地址观看直播内容的观看用户接收针对实物的实物订单信息，基于实物订单信息生成实物待支付信息，并当观看用户基于实物待支付信息完成支付后，向场所包厢分发实物。

在一个实施方式中，直播互动系统还包括位于场所包厢中的机顶盒；

摄像头或移动终端，还用于录制实物的视频或图片，将实物的视频或图片发送到机顶盒；机顶盒与显示单元连接，用于将实物的视频或图片发送到显示单元；显示单元，用于显示直播内容及实物的视频或图片。

图4为根据本发明实施方式的直播互动元素示意图。在直播过程中，既可以显示用户进入和退出直播频道的状态，还可以显示虚拟礼物送礼和实物送礼的过程。

除了上述直播互动之外，本发明实施方式还结合披露了一种移动支付方法。

移动支付(Mobile Payment)，也称之为手机支付，是指交易双方为了某种货物或者服务，使用移动终端设备为载体，通过移动通信网络实现的商业交易。移动支付所使用的移动终端可以是手机、个人数字助理(PDA)、移动个人电脑(PC)等。移动支付目前广泛地应用在各行各业中。在买单之后支付时，用户可以通过现金、刷卡支付或第三方平台支付等方式进行结账操作。在支付过程中，通常需要支付终端(比如，诸如刷卡器之类的刷卡终端)与互联网具有稳定连接。如果支付服务器不能正常连接网络，就无法完成支付。然而，当支付服务器较多时，每个支付服务器都连接互联网会导致成本问题。而且，大量支付同时结算时，多个支付服务器对网络的负载以及带宽带来不小的压力，甚至有可能因为网络堵塞导致支付超时。另外，直接将支付服务器暴露在互联网中，还可能导致安全风险问题。

目前，数字视听场所的移动支付主要有两种方式：方式(1)、移动终端通过互联网直接购买网络平台上的产品，移动终端直接到第三方的支付平台上进行支付。在方式(1)中，数字视听场所无法得到用户的消费资料，无法进行大数据分析等操作。方式(2)、移动终端直接支付到数字视听场所中的支付管理平台，支付管理平台再与第三方的支付平台对接。然而，当出现新的支付方式后，支付管理平台必须进行更新。由于支付管理平台设置在场所中，所以每次支付方式增加或变更后，场所中的支付管理平台都必须进行对应操作，极其不方便。

鉴于现有技术中支付服务器需要直接连接互联网才能实现移动支付的缺陷，本发明实施方式提出一种新颖的移动支付方式。支付管理平台无需与互联网直接连接即可实现移动支付，从而提高移动支付的安全性并降低成本。本发明实施方式提出的移动支付系统，包括：支付管理平台、网关服务器、云端服务器和支付平台，其中支付管理平台布置在局域网中；支付管理平台，用于经由局域网接收订单信息，经由局域网将订单信息发送到网关服务器；网关服务器，用于经由互联网将订单信息发送到云端服务器；云端服务器，用于经由互联网将订单信息发送到支付平台；支付平台，用于生成基于订单信息生成待支付信息，并经由互联网发送待支付信息到云端服务器；云端服务器，还用于经由互联网将待支付信息发送到网关服务器；网关服务器，还用于经由局域网向支付管理平台发送待支付信息；支付管理平台，还用于展示待支付信息，以由用户基于待支付信息执行支付。优选地，支付管理平台包括下单终端、机顶盒和/或支付服务器。

图5为根据本发明实施方式的移动支付系统的示范性结构图。

如图5所示，该系统包括：下单终端501、支付服务器502、网关服务器503、云端服务器504和支付平台505；其中支付服务器502和网关服务器503布置在同一个局域网中，该局域网布置在移动支付场所中。下单终端501和支付服务器502沟通构成支付管理平台。

在一个实施方式中，下单终端501布置在包含支付服务器502和网关服务器503的局域网中。在另一个实施方式中，下单终端501不布置在包含支付服务器502和网关服务器503的局域网中，而是布置在各种类型的移动通信网络中。

下单终端501的数目可以为多个，多个用户可以在各自的下单终端501上分别生成各自的订单信息。

在一个实施方式中，一或多个下单终端501对应于一个支付服务器502。类似地，支付服务器502的数目也可以为多个，而且一或多个支付服务器102对应于一个网关服务器503。

具体地：

下单终端501，用于当布置在包含支付服务器502和网关服务器503的局域网中时，经由局域网向对应的支付服务器502发送订单信息；当布置在移动通信网络中时，经由移动通信网络向对应的支付服务器502发送订单信息；

支付服务器502，用于从下单终端501接收订单信息，经由局域网将订单信息发送到网关服务器503；

网关服务器503，用于经由互联网将订单信息发送到云端服务器504；

云端服务器504，用于经由互联网将订单信息504发送到支付平台505；

支付平台505，用于基于订单信息生成待支付信息，并经由互联网发送待支付信息到云端服务器504；

云端服务器504，还用于经由互联网将待支付信息发送到网关服务器503；

网关服务器503，还用于经由局域网向之前转发来订单信息的支付服务器502发送待支付信息；

支付服务器502，还用于展示待支付信息，以由用户基于待支付信息执行支付。

具体地，下单终端501生成的订单信息可以包含交易时间、订购商品名称、订购商品数，等等。订单信息中还可以进一步携带场所名称、场所编码、包厢名称、包厢ID、网关服务器等商家信息。在一个实施方式中，待支付信息可以实施为支付码或银行类的支付链接。用户通过手持的移动终端扫描支付码以确认订单，并执行支付，或点击触发银行类的支付链接以确认订单并执行支付。而且，支付平台505可以为商家自行开发的支付平台，或者为任意的第三方支付平台，比如支付宝支付平台、微信支付平台、银联支付平台，等等。

可见，在图5所述的系统架构中，支付服务器基于局域网获取订单信息，并通过网关服务器从云端获取待支付信息。支付服务器不再需要具有互联网联网能力，从而降低了硬件成本。尤其是，当支付服务器的数目为多个时，本发明实施方式的成本效益更加明显。

另外，在本发明实施方式中，支付服务器不再暴露在互联网中，因此可以规避各种安全风险问题。

而且，在本发明实施方式中，可以在云端服务器对各个交易场所的交易敏感数据进行集中管理，既保证了数据安全性，也可以为大数据挖掘提供关键依据。

下面将本发明实施方式具体实施到数字视听场所，示范性详细阐述本发明实施方式。基于本发明实施方式，数字视听场所中的支付服务器(比如，收银服务器)在不能联网的情况下也可以完成支付。

图6为根据本发明实施方式在KTV场所的移动支付系统的示范性结构图。

由图6可见，在KTV场所的局域网中，布置有数字视听终端601、机顶盒602、网关服务器603和支付服务器604。网关服务器603与云端服务器604具有互联网连接，云端服务器604与支付平台605连接。

比如，数字视听终端601可以为实施为KTV场所包厢内的点歌屏，等等。用户在数字视听终端601下单后，机顶盒602基于局域网连接，从数字视听终端601接收订单请求，而且将场所名称、场所编码、包厢名称、包厢ID、网关服务器编号等商家信息与订单信息进行对应关联并封装，再将封装后的订单信息基于局域网发送到支付服务器604。支付服务器604接收订单信息，并基于局域网将订单信息发送到网关服务器603。网关服务器603通过互联网将订单信息发送到云端服务器604，云端服务器604接收到订单信息后，对封装后的订单信息进行解封装，而且通过互联网将解封装后的订单信息发送给对应的支付平台605。支付平台605通过互联网向云端服务器604返回对应于订单信息的支付码，云端服务器604对支付码进行封装，并基于互联网将支付码发送给网关服务器603。网关服务603器基于局域网将支付码推送给支付服务器604。用户通过移动终端606对支付服务器604上展示的支付码进行支付。支付完成后，支付结果将由对应的支付平台605返回给云端服务器304，云端服务器604再传输支付结果给网关服务器603和用户的移动终端606，网关服务器603再将支付结果发送给支付服务器604，完成整个支付过程。

当支付平台605发生变更时，通过变更云端服务器的支付平台接口即可实现变更，而无需对支付服务器604或网关服务器603作出变更，因此配置工作较为简单。

而且，当用户A通过移动终端606选择发动直播时，移动终端606录制用户A的才艺表演视频，并将直播内容发送到云端服务器604。云端服务器604生成直播内容的播放地址。支付终端607上的观看用户B通过直播内容的播放地址观看直播内容，并非常喜欢KTV场内用户A的表演内容。用户B打算送张三实体礼物以作为奖励。用户B发出针对实物的实物订单信息，支付平台605基于实物订单信息生成实物待支付信息，并当用户B基于实物待支付信息完成支付后，向场所包厢中的移动终端606的用户A分发实物。

因此，在发明实施方式中，直播与KTV场景结合，突出展示派对聚会、K歌活动等KTV内的音乐娱乐内容，打造垂直化的优质内容。而且，通过引入手机屏和电视大屏的跨屏互动玩法，手机app上发送的文字消息，图片，虚拟礼物，实物送礼信息都会实时以弹幕、照片MV、礼物动画效果的方式在大屏幕上展示，渲染现场气氛。

另外，除了采用常见的手机直播外，本方案还支持用户使用包厢内的专业摄像头进行直播，采用包厢摄像头直播一方面可以大大节省用手机直播的耗电量和流量带宽，另一方面使用专业设备能保证更加清晰的画质，配合虚拟场景模型的AR技术可以对视频画面进行处理，输出更加绚丽的虚拟舞台画面。场外用户可通过APP直接观看到KTV包厢内的实况，即使远在千里之外也能为包厢内的好友送花送酒水。区别于普通直播平台所送的虚拟礼物，这些酒水礼物将会直接兑换成实物酒水送达包厢，提升场内外的互动效果，打破场内外互动隔阂，全面激活场外用户消费能力，通过场外用户向场内用户赠送酒水礼物，直接为场所带来酒水销量。

以上以KTV场景为例，对直播互动和移动支付进行了示范性阐述。本领域技术人员可以意识到，本发明实施方式可以应用到任意的数字视听场所，包括且不局限于：网吧；影吧；台球室，等等。

综上所述，创建虚拟包厢，虚拟包厢的用户包括场内用户和场外用户；场内用户确定场景直播内容，将场景直播内容发送到云端以由云端生成播放地址，场外用户在虚拟包厢中基于播放地址观看场景直播内容；场外用户与场内用户在虚拟包厢中执行互动，或场内用户之间在虚拟包厢中执行互动，或场外用户之间在虚拟包厢中执行互动。本发明实施方式直播与场景结合，提供互动性。而且，引入手机屏和电视大屏的跨屏互动。摄像头还可以直播AR内容。本发明实施方式还实现了实物送礼，提高了移动支付的安全性并降低成本，而且还可以实现云端配置，升级维护非常便利。

还有，在本发明实施方式中，可以在云端服务器对各个交易场所的交易敏感数据进行集中管理，既保证了数据安全性，也可以为大数据挖掘提供关键依据。

以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于数字视听场所的直播互动方法，其特征在于，该方法包括：

创建虚拟包厢，所述虚拟包厢的用户包括场内用户和场外用户，其中虚拟包厢与数字视听场所的场所包厢绑定；

场内用户确定场景直播内容，将所述场景直播内容发送到云端以由云端生成播放地址，场外用户在所述虚拟包厢中基于所述播放地址观看所述场景直播内容；和/或，场外用户确定场外直播内容，将所述场外直播内容发送到云端以由云端生成内容播放地址，场内用户在所述虚拟包厢中基于所述内容播放地址观看所述场外直播内容；

场外用户与场内用户在所述虚拟包厢中执行互动，或场内用户之间在所述虚拟包厢中执行互动，或场外用户之间在所述虚拟包厢中执行互动；虚拟包厢作为线上互动载体连接移动终端和实体包厢的播放终端，虚拟包厢中的互动功能包括点歌和播控；

其中场内用户确定场景直播内容包括：

场内用户基于移动终端确定场景直播内容；或，场内用户基于包厢点歌终端确定场景直播内容；和/或

所述虚拟包厢是在场内用户未进数字视听场所前所创建的，或所述虚拟包厢是在场内用户进入数字视听场所后所创建的；

其中

所述场内用户基于移动终端确定直播内容包括：

当场内用户在移动终端上选定以所述移动终端作为直播录制源时，使能所述移动终端录制所述场内用户的视频以作为所述场景直播内容；或，当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容；或，当场内用户在所述移动终端上选定以所述移动终端及布置在场所包厢中的摄像头共同作为直播录制源时，使能所述移动终端录制所述场内用户的视频，使能所述摄像头录制所场内用户的视频，并将所述移动终端录制的视频、所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容；或，当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频作为所述场景直播内容；

或

所述场内用户基于包厢点歌终端确定直播内容包括：当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频作为所述场景直播内容；或，当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，使能所述摄像头录制所述场内用户的视频，并将所述场内用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容；

该方法还包括：经由与场所包厢中的机顶盒在同一局域网中的、不具有互联网联网能力的支付管理平台，从与场所包厢相绑定的移动终端接收订单信息；经由所述支付管理平台通过局域网将所述订单信息发送到网关服务器，以由所述网关服务器经由互联网将所述订单信息发送到云端服务器，并由云端服务器经由互联网将所述订单信息发送到支付平台；经由所述支付管理平台通过局域网从网关服务器接收待支付信息，所述待支付信息由支付平台基于订单信息生成、并经由互联网发送到云端服务器，再由云端服务器经由互联网发送到网关服务器；展示所述待支付信息，以由移动终端基于所述待支付信息执行支付。

2.根据权利要求1所述的基于数字视听场所的直播互动方法，其特征在于，该方法还包括：

当场内用户在所述移动终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，布置在所述场所包厢中的显示单元展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容；

当场内用户在所述包厢点歌终端上选定以布置在所述场所包厢中的摄像头作为直播录制源时，布置在所述场所包厢中的显示单元展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容。

3.根据权利要求1-2中任一项所述的基于数字视听场所的直播互动方法，其特征在于，所述互动内容包括下列中的至少一个：

点歌；包厢内播放控制；文字聊天；语音聊天；发送图片；发送虚拟礼物；实物送礼；分享播放地址。

4.根据权利要求1所述的基于数字视听场所的直播互动方法，其特征在于，

所述场外用户与场内用户在所述虚拟包厢中执行互动包括：从场外用户处接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述场外用户基于所述实物待支付信息完成支付后，向所述场内用户分发所述实物；或

所述场内用户包括第一 场内用户和第二场内用户，所述场内用户在所述虚拟包厢中执行互动包括：从第一场内用户处接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述第一场内用户基于所述实物待支付信息完成支付后，向第二场内用户分发所述实物；

其中所述实物包括下列中的至少一个：酒类；饮料；零食；鲜花；水果；熟食；玩具；服装；饰品。

5.根据权利要求1所述的基于数字视听场所的直播互动方法，其特征在于，

该方法还包括：支付平台经由互联网向云端服务器返回支付结果；云端服务器经由互联网将支付结果发送到网关服务器；网关服务器经由局域网向支付管理平台发送支付结果；

或

该方法还包括：当增加新的支付平台时，云端服务器进一步建立与新的支付平台的互联网连接；云端服务器基于预定策略选择目标支付平台，并将所述订单信息发送到所述目标支付平台；或，当所述支付平台被替换为另外的支付平台时，云端服务器进一步建立与所述另外的支付平台的互联网连接；云端服务器经由互联网将所述订单信息发送到所述另外的支付平台；或，当支付平台被删除时，云端服务器删除与所述支付平台的互联网连接。

6.根据权利要求1所述的基于数字视听场所的直播互动方法，其特征在于，该方法还包括：将第一对象更新到所述虚拟场景模型中，并在接收到互动指令时，根据互动指令将互动内容更新到所述虚拟场景模型中，以得到所述场景直播内容；其中所述第一对象包括下列中的至少一个：真人对象；宠物；植物；

将第一对象更新到所述虚拟场景模型中包括：实时获取一个以上摄像装置的信号，采集得到一个以上的第一图像数据；根据预设的条件，从每个第一图像数据中提取一个以上的第一对象，将一个以上的第一对象实时更新到虚拟场景模型中；

所述互动内容还包括第一素材的内容数据，所述第一素材包括：文字素材、图像素材、声音素材或图像素材与声音素材的结合；所述虚拟场景模型为3D虚拟舞台。

7.一种基于数字视听场所的直播互动系统，其特征在于，包括：

云端服务器，用于创建虚拟包厢，所述虚拟包厢的用户包场内用户和场外用户，其中虚拟包厢与数字视听场所的场所包厢绑定；

场内用户终端，用于确定场景直播内容，将所述场景直播内容发送到云端以由云端生成播放地址；

场外用户终端，用于在所述虚拟包厢中基于所述播放地址观看所述场景直播内容；

和/或，

场外用户终端，用于确定场外直播内容，将所述场外直播内容发送到云端以由云端生成内容播放地址；

场内用户终端，用于在所述虚拟包厢中基于所述内容播放地址观看所述场外直播内容；

其中场内用户终端与场外用户终端在所述虚拟包厢中执行互动，或场内用户终端之间在所述虚拟包厢中执行互动，或场外用户终端之间在所述虚拟包厢中执行互动；虚拟包厢作为线上互动载体连接移动终端和实体包厢的播放终端，虚拟包厢中的互动功能包括点歌和播控；

所述场内用户终端为移动终端；该系统还包括：

布置在所述场所包厢中的摄像头，用于当直播用户在移动终端上选定以所述摄像头作为直播录制源时，录制所述直播用户的视频以作为场景直播内容，或将所述直播用户的视频与预定的虚拟场景模型作出增强现实处理以作为场景直播内容，将所述场景直播内容发送到云端服务器；或

所述场内用户终端为包厢点歌终端；

该系统还包括：布置在所述场所包厢中的摄像头，

所述场所包厢中的摄像头，还用于当直播用户在所述包厢点歌终端上选定以所述摄像头作为直播录制源时，录制所述直播用户的视频并将所述直播用户的视频作为所述场景直播内容，或将所述直播用户的视频与预定的虚拟场景模型作出增强现实处理以作为所述场景直播内容；还包括：

与场所包厢中的机顶盒在同一局域网中的、不具有互联网联网能力的支付管理平台，用于从与场所包厢相绑定的移动终端接收订单信息；通过局域网将所述订单信息发送到网关服务器，以由所述网关服务器经由互联网将所述订单信息发送到云端服务器，并由云端服务器经由互联网将所述订单信息发送到支付平台；通过局域网从网关服务器接收待支付信息，所述待支付信息由支付平台基于订单信息生成、并经由互联网发送到云端服务器，再由云端服务器经由互联网发送到网关服务器；展示所述待支付信息，以由移动终端基于所述待支付信息执行支付。

8.根据权利要求7所述的基于数字视听场所的直播互动系统，其特征在于，

还包括布置在所述场所包厢中的显示单元；

显示单元，用于当场内用户在移动终端上选定以布置在场所包厢中的摄像头作为直播录制源时，展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容；当场内用户在包厢点歌终端上选定以布置在场所包厢中的摄像头作为直播录制源时，展示所述场景直播内容及场外用户与场内用户、场内用户之间或场外用户之间的互动内容。

9.根据权利要求8所述的基于数字视听场所的直播互动系统，其特征在于，还包括位于所述场所包厢中的机顶盒；

所述摄像头或所述移动终端，还用于录制实物的视频或图片，将所述实物的视频或图片发送到所述机顶盒；

所述机顶盒与显示单元连接，用于将所述实物的视频或图片发送到显示单元。

10.根据权利要求7所述的基于数字视听场所的直播互动系统，其特征在于，还包括支付平台；

所述支付平台，用于从基于所述场景直播内容的播放地址观看直播内容的观看用户接收针对实物的实物订单信息，基于所述实物订单信息生成实物待支付信息，并当所述观看用户基于所述实物待支付信息完成支付后，向所述场所包厢分发所述实物。

Images