CN108769721A - 一种直播场景智能切换系统及其方法 - Google Patents

一种直播场景智能切换系统及其方法 Download PDF

Info

Publication number
CN108769721A
CN108769721A CN201810502734.8A CN201810502734A CN108769721A CN 108769721 A CN108769721 A CN 108769721A CN 201810502734 A CN201810502734 A CN 201810502734A CN 108769721 A CN108769721 A CN 108769721A
Authority
CN
China
Prior art keywords
filter
streaming
video
live
user terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810502734.8A
Other languages
English (en)
Inventor
闫俊杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujian Palm Search Technology Co Ltd
Original Assignee
Fujian Palm Search Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian Palm Search Technology Co Ltd filed Critical Fujian Palm Search Technology Co Ltd
Priority to CN201810502734.8A priority Critical patent/CN108769721A/zh
Publication of CN108769721A publication Critical patent/CN108769721A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242Synchronization processes, e.g. processing of PCR [Program Clock References]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提出直播场景智能切换系统及其方法,涉及互联网应用技术领域,所述系统的硬件构成包括:摄像头、主计算机、流媒体服务器及用户终端,所述摄像头采集视频流,通过HD‑SDI或1394b接口直接输入到所述主计算机中,所述主计算机提供是直播背景图像,视频流及背景图像合成单一流媒体,实时发布到所述流媒体服务器中,所述用户终端即可观看直播,直播过程中屏幕上的背景图像进行实时切换,即可通过网络实时传输到用户终端。本发明支持用户进行在线的视频直播的多场景切换,通过直播间的多场景的一键切换,实现线上快速交易,留存精准用户。通过分屏直播功能丰富用户的场景体验,增强直播的可看性,应用场景的多样化。

Description

一种直播场景智能切换系统及其方法
技术领域
本发明涉及互联网应用技术领域,尤其是一种直播场景智能切换系统及其方法。
背景技术
直播从2015年大火开始,已经存在很长一段时间了,随着用户需求的不断多样化,直播被赋予了更多体验和交互的属性。当下的直播大多内容形式单一,尤其是秀场类直播,大多是靠主播的颜值来吸引观众,在场景设置以及内容编排上都很单一,要么就是坐着唱歌,唠个嗑刷个脸,要么就是跳个舞,千篇一律。在互动形式上往往只是打赏送花、主播互动,形式单一,不能具有更强的互动性。
可以说,现在直播的应用场景已不能满足用户的体验需求尤其是企业用户,直播于他们而已他已不仅仅是一个娱乐、休闲的工具了,对直播的内容深度与场景体验提出了更高的要求。简单的一个直播间背景、主播、主播展示是满足不了企业用户推广品牌、拓宽渠道、销售产品的需求的。
发明内容
本发明一方面提供一种直播场景智能切换系统,所述系统的硬件构成包括:摄像头、主计算机、流媒体服务器及用户终端,所述摄像头采集视频流,通过HD-SDI或1394b接口直接输入到所述主计算机中,所述主计算机提供是直播背景图像,视频流及背景图像合成单一流媒体,实时发布到所述流媒体服务器中,所述用户终端即可观看直播,直播过程中屏幕上的背景图像进行实时切换,即可通过网络实时传输到用户终端。
作为优选,在所述用户终端还嵌入商品抢购模块。
本发明另一方面提供一种直播场景智能切换方法,包括以下步骤:
步骤1、采集,数据采集由两个输入数据流:一个是底层驱动捕捉到的屏幕动态变化区域,另一个是摄像头提供音视频信号流;
步骤2、加工,两个数据流中,其中一个经过屏幕图像处理过滤器对输入的变化区域集合做优化合并,并逐一提取到的变化区域图像进行压缩编码,生成的屏幕变化区域图像数据流向流媒体编码过滤器,视频捕获过滤器采用directshow技术捕获来自摄像头的音视频信号流,也流向流媒体编码过滤器;
步骤3、编码,流媒体编码过滤器采用Windows Media技术,对输入的视频流、屏幕图像进行流式压缩和编码,合成单一的流媒体流向流媒体发布服务;
步骤4、发布;
步骤5、解码,流媒体解码过滤器对接收到的流媒体数据进行解码和数据分离;
步骤6,户终端控制视频的播放,即可观看分屏直播。
作为优选,所述音视频信号流具体获取方法如下:
步骤11、建立过滤器图表管理器,先用IGraph Builder接口建立过滤器图表管理器,接着就可以调用IGraph Builder::Add Filter方法向过滤器图表管理器中添加各种过滤器;
步骤12、创建音视频采集设备过滤器,在构造视频采集过滤器前必须枚举系统中所有采集设备,然后根据枚举出来的设备友好名称将设备标识绑定成视频采集过滤器并添加到过滤器图表管理器,接着根据接入硬件设备种类创建相关的过滤器;
步骤13、构造音视频捕获过滤器前端链路,过滤器之间通过输出Pin和输入Pin连接,通过调用CDs Util::Connect Filters方法可以在过滤器间建立链式连接,完成Filter前端链路构造。
作为优选,所述在步骤5编码过程中,选取系统时间作为视频流的参考时钟,并以视频流作为多媒体的同步参照,其它数据流需要参照视频数据包的时间戳并结合自身采样率的特点来打时间戳。
本发明提供的一种直播场景智能切换系统及其方法,其有益效果在于:系统可以支持用户进行在线的视频直播的多场景切换,通过直播间的多场景的一键切换,实现线上快速交易,留存精准用户。通过分屏直播功能丰富用户的场景体验,增强直播的可看性,应用场景的多样化;通过商场嵌入功能实现快速成交,让直播的体验感更加丰富,同时可以帮助企业实现线上产品销售,是打造集娱乐、专业、商业于一体的平台的实用性系统的技术。
附图说明
图1是直播场景智能切换系统框图。
具体实施方式
为进一步说明各实施例,本发明提供有附图。这些附图为本发明揭露内容的一部分,其主要用以说明实施例,并可配合说明书的相关描述来解释实施例的运作原理。配合参考这些内容,本领域普通技术人员应能理解其他可能的实施方式以及本发明的优点。图中的组件并未按比例绘制,而类似的组件符号通常用来表示类似的组件。
现结合附图和具体实施方式对本发明进一步说明。
如图1所示,本实施例提供的直播场景智能切换系统,硬件构成为摄像头、主计算机、流媒体服务器及用户终端,摄像头采集视频流,通过HD-SDI或1394b接口直接输入到主计算机中,主计算机提供是直播背景图像,视频流及背景图像合成单一流媒体,实时发布到流媒体服务器中,用户终端即可观看直播,直播过程中屏幕上的背景图像进行实时切换,即可通过网络实时传输到用户终端。
本系统具体的直播场景智能切换方法如下:包括:步骤1、采集;步骤2、加工;步骤3、编码;步骤4、发布及步骤5、解码,每一个处理阶段的输出结果又作为下一个处理阶段的输入数据,其中,步骤1中,数据采集由两个输入数据流:一个是底层驱动捕捉到的屏幕动态变化区域,另一个是摄像头提供音视频信号流;步骤2中,两个数据流中,其中一个经过屏幕图像处理过滤器对输入的变化区域集合做优化合并,并逐一提取到的变化区域图像进行压缩编码,生成的屏幕变化区域图像数据流向流媒体编码过滤器,视频捕获过滤器采用directshow技术捕获来自摄像头的音视频信号流,也流向流媒体编码过滤器;步骤3中,流媒体编码过滤器采用Windows Media技术,对输入的视频流、屏幕图像进行流式压缩和编码,合成单一的流媒体流向流媒体发布服务;步骤5中,流媒体解码过滤器对接收到的流媒体数据进行解码和数据分离;最后,用户终端控制视频的播放,即可观看分屏直播。
在步骤1中,音视频信号流具体获取方法如下:
步骤11、建立过滤器图表管理器,先用IGraph Builder接口建立过滤器图表管理器,接着就可以调用IGraph Builder::Add Filter方法向过滤器图表管理器中添加各种过滤器;
步骤12、创建音视频采集设备过滤器,在构造视频采集过滤器前必须枚举系统中所有采集设备,然后根据枚举出来的设备友好名称将设备标识绑定成视频采集过滤器并添加到过滤器图表管理器,接着根据接入硬件设备种类创建相关的过滤器;
步骤13、构造音视频捕获过滤器前端链路,过滤器之间通过输出Pin和输入Pin连接,通过调用CDs Util::Connect Filters方法可以在过滤器间建立链式连接,完成Filter前端链路构造。
在步骤5编码过程中,音频流、视频流和屏幕图像流,各个数据流需要在时间上同步以和真实场景保持一致。各个流的采样频率不同,音频流采样率是1-2次/秒,视频流是15-25帧/秒,屏幕图像流是7-15帧/秒。由于视频流具有时间连续性的特点,可以选取系统时间作为视频流的参考时钟,并以视频流作为多媒体的同步参照。其它数据流需要参照视频数据包的时间戳并结合自身采样率的特点来打时间戳。
本实施例提供的直播场景智能切换系统,在用户终端还嵌入商品抢购模块,在用户终端上会出现商品抢购界面,使用者只要点击抢购,就可以马上购买产品,对于消费者点击抢购输入密码就可完成,对于企业,通过后台购买方信息,直接进行发货。
尽管结合优选实施方案具体展示和介绍了本发明,但所属领域的技术人员应该明白,在不脱离所附权利要求书所限定的本发明的精神和范围内,在形式上和细节上可以对本发明做出各种变化,均为本发明的保护范围。

Claims (5)

1.一种直播场景智能切换系统,其特征在于,所述系统的硬件构成包括:摄像头、主计算机、流媒体服务器及用户终端,所述摄像头采集视频流,通过HD-SDI或1394b接口直接输入到所述主计算机中,所述主计算机提供是直播背景图像,视频流及背景图像合成单一流媒体,实时发布到所述流媒体服务器中,所述用户终端即可观看直播,直播过程中屏幕上的背景图像进行实时切换,即可通过网络实时传输到用户终端。
2.根据权利要求1所述的一种直播场景智能切换系统,其特征在于,在所述用户终端还嵌入商品抢购模块。
3.一种直播场景智能切换方法,其特征在于,包括以下步骤:
步骤1、采集,数据采集由两个输入数据流:一个是底层驱动捕捉到的屏幕动态变化区域,另一个是摄像头提供音视频信号流;
步骤2、加工,两个数据流中,其中一个经过屏幕图像处理过滤器对输入的变化区域集合做优化合并,并逐一提取到的变化区域图像进行压缩编码,生成的屏幕变化区域图像数据流向流媒体编码过滤器,视频捕获过滤器采用directshow技术捕获来自摄像头的音视频信号流,也流向流媒体编码过滤器;
步骤3、编码,流媒体编码过滤器采用Windows Media技术,对输入的视频流、屏幕图像进行流式压缩和编码,合成单一的流媒体流向流媒体发布服务;
步骤4、发布;
步骤5、解码,流媒体解码过滤器对接收到的流媒体数据进行解码和数据分离;
步骤6,户终端控制视频的播放,即可观看分屏直播。
4.根据权利要求3所述的一种直播场景智能切换方法,其特征在于,所述音视频信号流具体获取方法如下:
步骤11、建立过滤器图表管理器,先用IGraph Builder接口建立过滤器图表管理器,接着就可以调用IGraph Builder::Add Filter方法向过滤器图表管理器中添加各种过滤器;
步骤12、创建音视频采集设备过滤器,在构造视频采集过滤器前必须枚举系统中所有采集设备,然后根据枚举出来的设备友好名称将设备标识绑定成视频采集过滤器并添加到过滤器图表管理器,接着根据接入硬件设备种类创建相关的过滤器;
步骤13、构造音视频捕获过滤器前端链路,过滤器之间通过输出Pin和输入Pin连接,通过调用CDs Util::Connect Filters方法可以在过滤器间建立链式连接,完成Filter前端链路构造。
5.根据权利要求3所述的一种直播场景智能切换方法,其特征在于,所述在步骤5编码过程中,选取系统时间作为视频流的参考时钟,并以视频流作为多媒体的同步参照,其它数据流需要参照视频数据包的时间戳并结合自身采样率的特点来打时间戳。
CN201810502734.8A 2018-05-23 2018-05-23 一种直播场景智能切换系统及其方法 Pending CN108769721A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810502734.8A CN108769721A (zh) 2018-05-23 2018-05-23 一种直播场景智能切换系统及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810502734.8A CN108769721A (zh) 2018-05-23 2018-05-23 一种直播场景智能切换系统及其方法

Publications (1)

Publication Number Publication Date
CN108769721A true CN108769721A (zh) 2018-11-06

Family

ID=64005050

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810502734.8A Pending CN108769721A (zh) 2018-05-23 2018-05-23 一种直播场景智能切换系统及其方法

Country Status (1)

Country Link
CN (1) CN108769721A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111918077A (zh) * 2020-07-23 2020-11-10 安徽声讯信息技术有限公司 视频直播图像声音采集和电脑桌面采集同步合成方法
CN113395531A (zh) * 2021-05-14 2021-09-14 广州虎牙科技有限公司 播放切换方法、装置、电子设备及计算机可读存储介质
CN113727164A (zh) * 2020-05-26 2021-11-30 百度在线网络技术(北京)有限公司 直播间入口显示方法、装置、电子设备和存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009112585A1 (fr) * 2008-03-14 2009-09-17 Alcatel Lucent Procede permettant la mise en oeuvre de la video enrichie sur les terminaux mobiles
CN102752667A (zh) * 2012-07-17 2012-10-24 王加俊 一种多流流媒体直播互动系统及直播互动方法
CN102821308A (zh) * 2012-06-04 2012-12-12 西安交通大学 一种多场景流媒体课件录制与直播方法
CN106604048A (zh) * 2016-12-15 2017-04-26 深圳市智联宝生态科技有限公司 一种直播间嵌入购物模块的直播方法及系统
CN106971336A (zh) * 2017-05-15 2017-07-21 北京蜜莱坞网络科技有限公司 在线购物的方法及装置
CN107644360A (zh) * 2016-07-20 2018-01-30 筑波多媒体株式会社 箱型实况播放摄像头网络直销系统
CN107734380A (zh) * 2017-09-29 2018-02-23 深圳市美知互动科技有限公司 直播购物的方法及装置
WO2018045927A1 (zh) * 2016-09-06 2018-03-15 星播网(深圳)信息有限公司 一种基于三维虚拟技术的网络实时互动直播方法及装置
CN107888953A (zh) * 2016-09-29 2018-04-06 上海禾鸟电子科技有限公司 一种新型直播系统的实现方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009112585A1 (fr) * 2008-03-14 2009-09-17 Alcatel Lucent Procede permettant la mise en oeuvre de la video enrichie sur les terminaux mobiles
CN102821308A (zh) * 2012-06-04 2012-12-12 西安交通大学 一种多场景流媒体课件录制与直播方法
CN102752667A (zh) * 2012-07-17 2012-10-24 王加俊 一种多流流媒体直播互动系统及直播互动方法
CN107644360A (zh) * 2016-07-20 2018-01-30 筑波多媒体株式会社 箱型实况播放摄像头网络直销系统
WO2018045927A1 (zh) * 2016-09-06 2018-03-15 星播网(深圳)信息有限公司 一种基于三维虚拟技术的网络实时互动直播方法及装置
CN107888953A (zh) * 2016-09-29 2018-04-06 上海禾鸟电子科技有限公司 一种新型直播系统的实现方法
CN106604048A (zh) * 2016-12-15 2017-04-26 深圳市智联宝生态科技有限公司 一种直播间嵌入购物模块的直播方法及系统
CN106971336A (zh) * 2017-05-15 2017-07-21 北京蜜莱坞网络科技有限公司 在线购物的方法及装置
CN107734380A (zh) * 2017-09-29 2018-02-23 深圳市美知互动科技有限公司 直播购物的方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
陈圣奇: "高清流媒体三分屏直播技术的研究与实现", 《中国优秀硕士学位论文全文数据库·信息科技辑》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113727164A (zh) * 2020-05-26 2021-11-30 百度在线网络技术(北京)有限公司 直播间入口显示方法、装置、电子设备和存储介质
CN111918077A (zh) * 2020-07-23 2020-11-10 安徽声讯信息技术有限公司 视频直播图像声音采集和电脑桌面采集同步合成方法
CN113395531A (zh) * 2021-05-14 2021-09-14 广州虎牙科技有限公司 播放切换方法、装置、电子设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
US11468917B2 (en) Providing enhanced content
WO2020199303A1 (zh) 直播视频集锦的生成方法、装置、服务器及存储介质
US20140219635A1 (en) System and method for distributed and parallel video editing, tagging and indexing
CN101473653B (zh) 用于识别并同步视频的指纹、器件、方法
CN108769721A (zh) 一种直播场景智能切换系统及其方法
JP2004538727A5 (zh)
US20110090347A1 (en) Media Systems and Methods for Providing Synchronized Multiple Streaming Camera Signals of an Event
CN105306468A (zh) 一种合成视频数据实时共享的方法及其主播客户端
CN106792228A (zh) 一种直播互动方法和系统
CN108282598A (zh) 一种软件导播系统及方法
US20030179283A1 (en) Multi-channel audio enhancement for television
US9179173B1 (en) Systems and methods for processing a traffic log having an optional-promotion log entry
US10924779B2 (en) Location agnostic media control room and broadcasting facility
CN112135155B (zh) 音视频的连麦合流方法、装置、电子设备及存储介质
JP2011517229A (ja) ライブ作品におけるコンテンツ置換方法及び装置
CN102884804B (zh) 音频信号和视频信号的同步误差校正方法及装置
CN106792155A (zh) 一种多视频流的视频直播的方法及装置
WO2001065396A1 (en) Distributed internet broadcasting method and system using camera and screen capture
JP2003259336A (ja) データ生成方法、データ生成装置、データ伝送方法、映像プログラム再生装置、映像プログラム再生方法、記録媒体
CN110351576A (zh) 一种在工业场景下进行实时视频流快速显示的方法及其系统
US9736504B1 (en) Systems and methods for determining a time period remaining until a live production system changes states
CN105657542B (zh) 一种马赛克业务管理平台及系统
CN110234016A (zh) 一种精彩视频自动输出方法及系统
US20240095313A1 (en) User-Controllable AV-Artwork Steaming Data Structure with Conjunctive Configurable NFTs and Landscape-Portrait Coding
CN212649591U (zh) 终端录放系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181106

RJ01 Rejection of invention patent application after publication