CN113507622A - 视频互动方法、装置、系统以及直播背包和互动接收器 - Google Patents
视频互动方法、装置、系统以及直播背包和互动接收器 Download PDFInfo
- Publication number
- CN113507622A CN113507622A CN202110773563.4A CN202110773563A CN113507622A CN 113507622 A CN113507622 A CN 113507622A CN 202110773563 A CN202110773563 A CN 202110773563A CN 113507622 A CN113507622 A CN 113507622A
- Authority
- CN
- China
- Prior art keywords
- video
- backpack
- interactive
- transmitted
- preset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 64
- 238000000034 method Methods 0.000 title claims abstract description 59
- 230000002452 interceptive effect Effects 0.000 claims abstract description 147
- 238000007906 compression Methods 0.000 description 14
- 230000006835 compression Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 14
- 230000005540 biological transmission Effects 0.000 description 13
- 230000008569 process Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000002829 reductive effect Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000013144 data compression Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000010899 nucleation Methods 0.000 description 2
- 238000003908 quality control method Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4342—Demultiplexing isochronously with video sync, e.g. according to bit-parallel or bit-serial interface formats, as SDI
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
- H04N21/43632—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
- H04N21/43635—HDMI
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
Abstract
本申请涉及一种视频互动方法、装置、系统以及第一直播背包和互动接收器,其中方法包括:第一直播背包获取到第一待传输视频后,进行编码,得到第一待传输编码视频,将该第一待传输编码视频发送给互动接收器或者第二直播背包,互动接收器或者第二直播背包同样利用H.264/H.265解码器对其进行解码,得到对应的待播放视频,然后互动接收器通过SDI或HDMI接口发送给预设显示设备进行播放,第二直播背包利用自身配备的显示器播放,基于此,利用H.264/H.265解码器可以有效减小视频码流的大小,提升互动视频传输的清晰度以及传输效率,实现4K超高清的互动视频传输。
Description
技术领域
本申请涉及视频互动技术领域,尤其涉及一种视频互动方法、装置、系统以及直播背包和互动接收器。
背景技术
随着网络技术的不断发展,电视节目制播技术也得到了较为快速的发展,并且随着显示技术的不断进步,电视节目的清晰度也在不断提升。对于直播互动类的节目,目前采用的方案一般都是软件方案、FPGA方案或者监控类编码芯片方案,上述方案都收到硬件的局限,无法达到直播互动类节目对于4K 超高清的要求。
发明内容
为至少在一定程度上克服相关技术中存在的问题,本申请提供一种视频互动方法、装置、系统以及直播背包和互动接收器。
根据本申请的第一方面,提供一种视频互动方法,应用于第一直播背包,所述方法包括:
获取待传输视频以及互动接收器或者第二直播背包发送的互动视频;
将所述互动视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频,同时播放所述待播放视频;
按照预设编码方式对所述待传输视频进行编码,得到待传输编码视频,并将所述待传输编码视频发送给所述互动接收器或者第二直播背包,以使所述互动接收器或者第二直播背包对所述待传输编码视频进行解码后播放。
可选的,将所述待传输编码视频发送给所述互动接收器,包括:
将所述待传输编码视频通过预设的高速接插件发送给预设5G模块,以使所述预设5G模块将所述待传输编码视频通过5G信道发送到所述互动接收器或者第二直播背包。
根据本申请的第二方面,提供一种视频互动方法,包括:
获取第一直播背包或者第二直播背包发送的待传输编码视频;
采集互动视频并按照预设编码方式对所述互动视频进行编码,得到编码后的互动视频,并将所述编码后的互动视频发送给所述第一直播背包或者第二直播背包进行解码和播放;
将所述待传输编码视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频;
将所述待播放视频通过SDI或HDMI接口发送给预设显示设备,以使所述预设显示设备播放所述待播放视频。
根据本申请的第三方面,提供一种视频互动装置,包括:
第一获取模块,用于获取待传输视频以及互动接收器发送的互动视频或者第二直播背包;
第一解码模块,用于将所述互动视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频,同时播放所述待播放视频;
第一编码模块,用于按照预设编码方式对所述待传输视频进行编码,得到待传输编码视频,并将所述待传输编码视频发送给所述互动接收器或者第二直播背包,以使所述互动接收器或者第二直播背包对所述待传输编码视频进行解码后播放。
根据本申请的第四方面,提供一种视频互动装置,包括:
第二获取模块,用于获取第一直播背包或者第二直播背包发送的待传输编码视频;
采集模块,用于采集互动视频并按照预设编码方式对所述互动视频进行编码,得到编码后的互动视频,并将所述编码后的互动视频发送给所述第一直播背包或者第二直播背包进行解码和播放;
第二解码模块,用于将所述待传输编码视频发送到预先设置的 H.264/H.265解码器中进行解码,得到待播放视频;
发送模块,用于将所述待播放视频通过SDI或HDMI接口发送给预设显示设备,以使所述预设显示设备播放所述待播放视频。
根据本申请的第五方面,提供一种直播背包,包括:处理器、存储器、 4G/5G模块、显示模块和编解码模块;
所述存储器用于存储视频互动程序,以使所述处理器在调用所述视频互动程序时执行如本申请第一方面所述的视频互动方法;
所述4G/5G模块用于将所述待传输编码视频发送给所述互动接收器,所述显示模块用于播放所述待播放视频,所述编解码模块用于对互动视频进行解码以及按照预设编码方式对所述待传输视频进行编码。
可选的,所述处理器的型号为BCM7252。
根据本申请的第六方面,提供一种互动接收器,所述互动接收器包括:至少一个第一处理器和第一存储器;
所述第一处理器用于执行所述第一存储器中存储的视频互动程序,以实现本申请第二方面所述的视频互动方法。
根据本申请的第七方面,提供一种视频互动系统,包括多个如本申请第五方面所述的直播背包以及如本申请第六方面所述的互动接收器。
根据本申请的第八方面,提供一种存储介质,所述存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现本申请第一方面或者第二方面所述的视频互动方法。
本申请的方案中,互动接收器或者第二直播背包在采集到互动视频后,对其编码后传输至第一直播背包,第一直播背包利用预先设置的H.264/H.265 解码器对其进行解码,从而得到待播放视频,进而播放该待播放视频;另外,第一直播背包获取到待传输视频后,进行编码,得到待传输编码视频,件该待传输编码视频发送给互动接收器或者第二直播背包,互动接收器或者第二直播背包同样利用H.264/H.265解码器对其进行解码,得到对应的待播放视频,然后通过SDI或HDMI接口发送给预设显示设备进行播放,基于此,利用H.264/H.265解码器可以有效减小视频码流的大小,提升互动视频传输的清晰度以及传输效率,实现4K超高清的互动视频传输。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1是本申请的一个实施例提供的一种视频互动方法的流程示意图。
图2是本申请的另一实施例提供的一种视频互动方法的流程示意图。
图3是本申请的另一实施例提供的一种视频互动方法的流程示意图。
图4是本申请的另一实施例提供的一种视频互动装置的结构示意图。
图5是本申请的另一实施例提供的一种视频互动装置的结构示意图。
图6是本申请的另一实施例提供的一种第一直播背包的结构示意图。
图7为本申请提供的一种BCM7252的引脚连接示意图。
图8为本申请提供的一种4G/5G模块的结构示意图。
图9是本申请的另一实施例提供的一种互动接收器的结构示意图。
图10是本申请的另一实施例提供的一种视频互动系统的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置的例子。
请参阅图1,图1是本申请的一个实施例提供的一种视频互动方法的流程示意图。
本实施例中,以第一直播背包、第二直播背包和互动接收器之间的互动为例进行说明,如图1所示,本实施例提供的视频互动方法可以包括:
步骤S101、互动接收器采集互动视频。
本实施例中,互动接收器指的是具有汇聚服务的接收器,一般,第一直播背包输出的都是多链路IP视频流,该多链路IP视频流经过互动接收器后,互动接收器会将各链路的IP视频流转发至解码器中相对应的业务解码卡,以保证对各链路进行正确的解码,从而得到原始视频码流。
而本步骤中的互动视频则是指用于采集视频的设备回传的、用于互动的视频,互动视频往往发生在直播过程中,若观看直播的一方需要与进行直播的一方互动,或者是需要进行转播时,观看直播的一方或者转播的一方就需要想互动接收器回传用于进行互动的视频,也就是本步骤中的互动视频。
需要说明的是,本步骤中所指的采集,是获取互动视频的动作,具体的采集过程可以是与互动接收器相连接的视频拍摄设备进行采集,然后发送给互动接收器,视频拍摄设备可以但不仅限于是手机、摄像机等。
步骤S102、第一直播背包获取第一待传输视频。
需要说明的是,第一直播背包指的是进行直播的一方携带的设备终端,其可以获取摄像设备采集的待传输视频、通过5G/4G模块将待传输视频上传到互动接收器中、接收互动接收器回传的互动视频,基于上述功能,第一直播背包应当具有相对应的硬件系统结构,该硬件系统结构的具体内容将在后续实施例中进行详细说明,此处不再赘述。
本步骤中,第一直播背包获取的待传输视频可以是与第一直播背包相连的摄影设备采集的视频,此处的摄影设备可以但不仅限于为具有摄像功能的移动智能终端(手机、平板电脑等)、专业摄影机等。
本实施例中,第一直播背包可以获取多种视频格式,比如,利用SDI采集卡或者HDMI采集卡连接各自适配的摄影设备。
步骤S103、第二直播背包获取第二待传输视频。
本步骤中,第二直播背包获取第二待传输视频与第一直播背包获取第一待传输视频的过程相似或者相同,对于本步骤的详细说明,可以参考步骤S102 的内容,此处不再赘述。
步骤S104、互动接收器按照预设编码方式对所述互动视频进行编码,得到编码后的互动视频。
本实施例中,预设编码模式为与本实施例中用到的解码模式对应的编码模式,由于编码与解码往往是对应的,那么在一个具体的例子中,编解码可以采用H.265/HEVC和/或H.264/AVC高性能多路编解码的方式,该方式单卡时可以具备4K60P的编解码能力,非单卡时还能具备4路1080P60高清信号的同时编解码能力。基于本实施例中编解码的方式,能够加快编解码的速度,大大减少时延。
同时,得益于该编解码方式,利用多机位PTP授时技术,能够有效控制多机位时间误差,对于多机位的授时,能够更加准确,而更为准确地授时,可以使后期对于各路视频的汇聚时的时刻对应地更为准确。
步骤S105、第一直播背包按照预设编码方式对所述第一待传输视频进行编码,得到第一待传输编码视频。
本实施例中,预设编码模式为与本实施例中用到的解码模式对应的编码模式,由于编码与解码往往是对应的,那么在一个具体的例子中,编解码可以采用H.265/HEVC和/或H.264/AVC高性能多路编解码的方式,该方式单卡时可以具备4K60P的编解码能力,非单卡时还能具备4路1080P60高清信号的同时编解码能力。基于本实施例中编解码的方式,能够加快编解码的速度,大大减少时延。
步骤S106、第二直播背包按照预设编码方式对所述第二待传输视频进行编码,得到第二待传输编码视频。
步骤S107、互动接收器将所述编码后的互动视频发送给所述第一直播背包。
其中,互动接收器在发送互动视频时,其依靠的通信方式可以有多种,比如可以是通过WiFi进行数据传输,也可以是通过5G/4G模块进行数据传输。
步骤S108、第一直播背包接收编码后的互动视频。
本步骤中,第一直播背包接收互动视频的方式可以通过无线通信的方式接收,比如可以是通过WiFi进行数据传输,也可以是通过5G/4G模块进行数据传输。当然,其依靠的是5G/4G模块或者是WiFi模块,关于5G/4G模块或者是WiFi模块具体结构,将在后续的实施例中进行说明,此处不再赘述。
步骤S109、第一直播背包将所述第一待传输编码视频发送给所述互动接收器或第二直播背包。
其中,第一直播背包在发送待传输编码视频时,其依靠的通信方式可以有多种,比如可以是通过WiFi进行数据传输,也可以是通过5G/4G模块进行数据传输。
步骤S110、互动接收器或第二直播背包接收第一待传输编码视频。
本步骤中,互动接收器或第二直播背包接收待传输编码视频的方式可以通过无线通信的方式接收,比如可以是通过WiFi进行数据传输,也可以是通过5G/4G模块进行数据传输。当然,其依靠的是5G/4G模块或者是WiFi模块,关于5G/4G模块或者是WiFi模块具体结构,将在后续的实施例中进行说明,此处不再赘述。
步骤S111、第二直播背包将所述第二待传输编码视频发送给第一直播背包。
步骤S112、第一直播背包接收第二待传输编码视频。
步骤S113、第一直播背包将所述互动视频或者第二待传输编码视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频,同时播放所述待播放视频。
需要说明的是,H.264和H.265为不同的高度压缩数字视频编解码器标准, H.264具有很高的数据压缩比率,在同等图像质量的条件下,H.264的压缩比是MPEG-2的2倍以上,是MPEG-4的1.5~2倍。在一个具体的例子中,原始文件的大小如果为88GB,采用MPEG-2压缩标准压缩后变成3.5GB,压缩比为25∶1,而采用H.264压缩标准压缩后变为879MB,从88GB到879MB,H.264的压缩比达到惊人的102∶1。利用这种压缩编码标准,可以有效减小码流的大小,在直播的过程中,同一网络信道,传输的速率和效率会有较大程度的提升。
相比于H.264,H.265提供了更多不同的工具来降低码率,以编码单位来说,最小的8x8到最大的64x64。信息量不多的区域(颜色变化不明显,比如车体的红色部分和地面的灰色部分)划分的宏块较大,编码后的码字较少,而细节多的地方(轮胎)划分的宏块就相应的小和多一些,编码后的码字较多,这样就相当于对图像进行了有重点的编码,从而降低了整体的码率,编码效率就相应提高了。同时,H.265的帧内预测模式支持33种方向(H.264只支持8 种),并且提供了更好的运动补偿处理和矢量预测方法。采用H.265标准时,视频码流的大小会比H.264更小,由于质量控制的测定方法不同,这个数据也会有相应的变化。通过主观视觉测试得出的数据显示,在码率减少51-74%的情况下,H.265编码视频的质量还能与H.264编码视频近似甚至更好,其本质上说是比预期的信噪比(PSNR)要好。
而本步骤中,采用了H.264/H.265解码器,既支持H.264标准,又支持 H.265标准,对于不同的摄像设备(比如有些不支持H.265),可以适应性的选择匹配的标准进行编码和解码。
步骤S114、第二直播背包将第一待传输编码视频发送到预先设置的 H.264/H.265解码器中进行解码,得到待播放视频,同时播放所述待播放视频。
步骤S115、互动接收器将所述待传输编码视频发送到预先设置的 H.264/H.265解码器中进行解码,得到待播放视频。
与步骤S113相同,本步骤中的H.264和H.265为不同的高度压缩数字视频编解码器标准,H.264具有很高的数据压缩比率,在同等图像质量的条件下, H.264的压缩比是MPEG-2的2倍以上,是MPEG-4的1.5~2倍。在一个具体的例子中,原始文件的大小如果为88GB,采用MPEG-2压缩标准压缩后变成3.5GB,压缩比为25∶1,而采用H.264压缩标准压缩后变为879MB,从 88GB到879MB,H.264的压缩比达到惊人的102∶1。利用这种压缩编码标准,可以有效减小码流的大小,在直播的过程中,同一网络信道,传输的速率和效率会有较大程度的提升。
相比于H.264,H.265提供了更多不同的工具来降低码率,以编码单位来说,最小的8x8到最大的64x64。信息量不多的区域(颜色变化不明显,比如车体的红色部分和地面的灰色部分)划分的宏块较大,编码后的码字较少,而细节多的地方(轮胎)划分的宏块就相应的小和多一些,编码后的码字较多,这样就相当于对图像进行了有重点的编码,从而降低了整体的码率,编码效率就相应提高了。同时,H.265的帧内预测模式支持33种方向(H.264只支持8 种),并且提供了更好的运动补偿处理和矢量预测方法。采用H.265标准时,视频码流的大小会比H.264更小,由于质量控制的测定方法不同,这个数据也会有相应的变化。通过主观视觉测试得出的数据显示,在码率减少51-74%的情况下,H.265编码视频的质量还能与H.264编码视频近似甚至更好,其本质上说是比预期的信噪比(PSNR)要好。
而本步骤中,采用了H.264/H.265解码器,既支持H.264标准,又支持 H.265标准,对于不同的摄像设备(比如有些不支持H.265),可以适应性的选择匹配的标准进行编码和解码。
步骤S116、互动接收器将所述待播放视频通过SDI或HDMI接口发送给预设显示设备,以使预设显示设备播放所述待播放视频。
步骤S116中的预设显示设备指的是具有显示功能的一类设备,比如显示器、电视、触控屏、智能移动终端等。对于第一直播背包而言,预设显示设备可以是固定在第一直播背包表面的触控屏。另外,上述SDI或HDMI接口指的是常见的视频接口,具体传输原理可以参考现有技术,此处不再赘述。
另外,需要说明的是,第二直播背包除了可以与第一直播背包进行交互之外,还可以与互动接收器进行交互,第二直播背包与互动接收器之间的交互和第一直播背包与互动接收器之间的交互过程相似甚至相同,对于第二直播背包与互动接收器之间的交互此处便不再赘述。
本实施例中,互动接收器在采集到互动视频后,对其编码后传输至第一直播背包,第一直播背包利用预先设置的H.264/H.265解码器对其进行解码,从而得到待播放视频,进而播放该待播放视频;另外,第一直播背包获取到待传输视频后,进行编码,得到待传输编码视频,件该待传输编码视频发送给互动接收器,互动接收器同样利用H.264/H.265解码器对其进行解码,得到对应的待播放视频,然后通过SDI或HDMI接口发送给预设显示设备进行播放,基于此,利用H.264/H.265解码器可以有效减小视频码流的大小,提升互动视频传输的清晰度以及传输效率,实现4K超高清的互动视频传输。
请参阅图2,图2是本申请的另一实施例提供的一种视频互动方法的流程示意图。
本实施例以第一直播背包一侧的执行为例进行说明,如图2所示,本实施例提供的视频互动方法可以包括:
步骤S201、获取第一待传输视频、互动接收器发送的互动视频以及第二直播背包发送的第二待传输编码视频;
步骤S202、将所述互动视频或所述第二待传输编码视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频,同时播放所述待播放视频;
步骤S203、按照预设编码方式对所述第一待传输视频进行编码,得到第一待传输编码视频,并将所述第一待传输编码视频发送给所述互动接收器或者所述第二直播背包,以使所述互动接收器或者第二直播背包对所述第一待传输编码视频进行解码后播放。
本实施例中,互动接收器在采集到互动视频后,对其编码后传输至第一直播背包,第一直播背包利用预先设置的H.264/H.265解码器对其进行解码,从而得到待播放视频,进而播放该待播放视频;另外,第一直播背包获取到待传输视频后,进行编码,得到待传输编码视频,件该待传输编码视频发送给互动接收器,互动接收器同样利用H.264/H.265解码器对其进行解码,得到对应的待播放视频,然后通过SDI或HDMI接口发送给预设显示设备进行播放,基于此,利用H.264/H.265解码器可以有效减小视频码流的大小,提升互动视频传输的清晰度以及传输效率,实现4K超高清的互动视频传输。
进一步地,本实施例的步骤S203中将所述待传输编码视频发送给所述互动接收器可以包括:将所述待传输编码视频通过预设的高速接插件发送给预设5G模块,以使所述预设5G模块将所述待传输编码视频通过5G信道发送到所述互动接收器。
请参阅图3,图3是本申请的另一实施例提供的一种视频互动方法的流程示意图。
本实施例以互动接收器一侧的执行为例进行说明,如图3所示,本实施例提供的视频互动方法可以包括:
步骤S301、获取第一直播背包发送的待传输编码视频;
步骤S302、采集互动视频并按照预设编码方式对所述互动视频进行编码,得到编码后的互动视频,并将所述编码后的互动视频发送给所述第一直播背包进行解码和播放;
步骤S303、将所述待传输编码视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频;
步骤S304、将所述待播放视频通过SDI或HDMI接口发送给预设显示设备,以使所述预设显示设备播放所述待播放视频。
本实施例中,互动接收器在采集到互动视频后,对其编码后传输至第一直播背包,第一直播背包利用预先设置的H.264/H.265解码器对其进行解码,从而得到待播放视频,进而播放该待播放视频;另外,第一直播背包获取到待传输视频后,进行编码,得到待传输编码视频,件该待传输编码视频发送给互动接收器,互动接收器同样利用H.264/H.265解码器对其进行解码,得到对应的待播放视频,然后通过SDI或HDMI接口发送给预设显示设备进行播放,基于此,利用H.264/H.265解码器可以有效减小视频码流的大小,提升互动视频传输的清晰度以及传输效率,实现4K超高清的互动视频传输。
请参阅图4,图4是本申请的另一实施例提供的一种视频互动装置的结构示意图。
如图4所示,本实施例提供的视频互动装置可以包括:
第一获取模块401,用于获取待传输视频以及互动接收器发送的互动视频;
第一解码模块402,用于将所述互动视频发送到预先设置的H.264/H.265 解码器中进行解码,得到待播放视频,同时播放所述待播放视频;
第一编码模块403,用于按照预设编码方式对所述待传输视频进行编码,得到待传输编码视频,并将所述待传输编码视频发送给所述互动接收器,以使所述互动接收器对所述待传输编码视频进行解码后播放。
请参阅图5,图5是本申请的另一实施例提供的一种视频互动装置的结构示意图。
如图5所示,本实施例提供的视频互动装置可以包括:
第二获取模块501,用于获取第一直播背包发送的待传输编码视频;
采集模块502,用于采集互动视频并按照预设编码方式对所述互动视频进行编码,得到编码后的互动视频,并将所述编码后的互动视频发送给所述第一直播背包进行解码和播放;
第二解码模块503,用于将所述待传输编码视频发送到预先设置的 H.264/H.265解码器中进行解码,得到待播放视频;
发送模块504,用于将所述待播放视频通过SDI或HDMI接口发送给预设显示设备,以使所述预设显示设备播放所述待播放视频。
请参阅图6,图6是本申请的另一实施例提供的一种第一直播背包的结构示意图。
如图6所示,本实施例提供的第一直播背包可以包括:处理器601、存储器602、4G/5G模块603、显示模块604和编解码模块605;
所述存储器用于存储视频互动程序,以使所述处理器在调用所述视频互动程序时执行上述实施例提供的第一直播背包一侧执行的视频互动方法;
所述4G/5G模块用于将所述第一待传输编码视频发送给所述互动接收器或第二直播背包,所述显示模块用于播放步骤S113中的待播放视频,所述编解码模块用于对互动视频或者第二待传输编码视频进行解码以及按照预设编码方式对所述待传输视频进行编码。其中,所述处理器的型号可以为但不仅限于为BCM7252。
本实施例中,为了保证视频码流的稳定可靠传输,4G/5G模块可以采用3 个5G模块加3个4G模块的方式,具体可以参阅图7和图8,图7为本申请提供的一种BCM7252的引脚连接示意图,图8为本申请提供的一种4G/5G 模块的结构示意图。
如图7所示,4G/5G模块连接到芯片的USB3.0引脚上,采集到的待传输视频经过编码板进行编码后,形成码流,输入到BCM7252中。另外,图7中还涉及到了外部适配器或电池的部分(包括了电源管理/充电、内部电池、 TPS65251、RT7299、TPS51116、ADP2303)、DDR、EMMC16G、MSATA、 HDMI2.0、RG45千兆、USB3.0、MIC音频、AIC3106、5寸LCD触摸、TW8836,上述部分涉及到的用于均为本领域的常规技术用于或者芯片型号,具体原理可参考现有技术,此处不再赘述。
4G/5G模块可以如图8所示,通过高速接插件,一方面连接WIFI模块,另一方面连接USB集线器(USB HUB),而USB集线器会连接3个5G模块加3个4G模块的方式,以保证视频码流的稳定可靠传输。具体的,4G模块采用MiniPCIE接口的LTE模块;5G模块为兼顾主流技术方案,可以选取移远5G模块和华为5G模块。
请参阅图9,图9是本申请的另一实施例提供的一种互动接收器的结构示意图。
如图9所示,本实施例提供的计算设备900可以包括:至少一个处理器 901、存储器902、至少一个网络接口903和其他用户接口904。计算设备900 中的各个组件通过总线系统905耦合在一起。可理解,总线系统905用于实现这些组件之间的连接通信。总线系统905除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图9中将各种总线都标为总线系统905。
其中,用户接口904可以包括显示器、键盘或者点击设备(例如,鼠标,轨迹球(trackball)、触感板或者触摸屏等。
可以理解,本发明实施例中的存储器902可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器 (Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM, EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double DataRate SDRAM, DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM, ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本文描述的存储器902旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中,存储器902存储了如下的元素,可执行单元或者数据结构,或者他们的子集,或者他们的扩展集:操作系统9021和第二应用程序9022。
其中,操作系统9021,包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。第二应用程序 9022,包含各种第二应用程序,例如媒体播放器(Media Player)、浏览器(Browser) 等,用于实现各种应用业务。实现本发明实施例方法的程序可以包含在第二应用程序9022中。
在本发明实施例中,通过调用存储器902存储的程序或指令,具体的,可以是第二应用程序9022中存储的程序或指令,处理器901用于执行各方法实施例所提供的方法步骤,例如包括:
获取第一直播背包发送的待传输编码视频;
采集互动视频并按照预设编码方式对所述互动视频进行编码,得到编码后的互动视频,并将所述编码后的互动视频发送给所述第一直播背包进行解码和播放;
将所述待传输编码视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频;
将所述待播放视频通过SDI或HDMI接口发送给预设显示设备,以使所述预设显示设备播放所述待播放视频。
上述本发明实施例揭示的方法可以应用于处理器901中,或者由处理器 901实现。处理器901可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器901中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器901可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(FieldProgrammable Gate Array, FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件单元组合执行完成。软件单元可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器902,处理器 901读取存储器902中的信息,结合其硬件完成上述方法的步骤。
可以理解的是,本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(ApplicationSpecific Integrated Circuits,ASIC)、数字信号处理器(Digital Signal Processing,DSP)、数字信号处理设备(DSPDevice,DSPD)、可编程逻辑设备(Programmable LogicDevice,PLD)、现场可编程门阵列 (Field-Programmable Gate Array,FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请功能的其它电子单元或其组合中。
对于软件实现,可通过执行本文功能的单元来实现本文的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
请参阅图10,图10是本申请的另一实施例提供的一种视频互动系统的结构示意图。
如图10所示,本实施例提供的视频互动系统可以包括如上述实施例提供的第一直播背包1001以及互动接收器1002。
另外,本申请还提供一种存储介质,所述存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现上述实施例提供的视频互动方法。关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
可以理解的是,上述各实施例中相同或相似部分可以相互参考,在一些实施例中未详细说明的内容可以参见其他实施例中相同或相似的内容。
需要说明的是,在本申请的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本申请的描述中,除非另有说明,“多个”的含义是指至少两个。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (10)
1.一种视频互动方法,应用于第一直播背包,其特征在于,所述方法包括:
获取第一待传输视频、互动接收器发送的互动视频以及第二直播背包发送的第二待传输编码视频;
将所述互动视频或所述第二待传输编码视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频,同时播放所述待播放视频;
按照预设编码方式对所述第一待传输视频进行编码,得到第一待传输编码视频,并将所述第一待传输编码视频发送给所述互动接收器或者所述第二直播背包,以使所述互动接收器或者第二直播背包对所述第一待传输编码视频进行解码后播放。
2.根据权利要求1所述的视频互动方法,其特征在于,将所述第一待传输编码视频发送给所述互动接收器或者所述第二直播背包,包括:
将所述第一待传输编码视频通过预设的高速接插件发送给预设5G模块,以使所述预设5G模块将所述第一待传输编码视频通过5G信道发送到所述互动接收器或者所述第二直播背包。
3.一种视频互动方法,应用于互动接收器,其特征在于,所述方法包括:
获取第一直播背包发送的第一待传输编码视频;
采集互动视频并按照预设编码方式对所述互动视频进行编码,得到编码后的互动视频,并将所述编码后的互动视频发送给所述第一直播背包进行解码和播放;
将所述第一待传输编码视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频;
将所述待播放视频通过SDI或HDMI接口发送给预设显示设备,以使所述预设显示设备播放所述待播放视频。
4.一种视频互动装置,其特征在于,包括:
第一获取模块,用于获取待传输视频以及互动接收器或者第二直播背包发送的互动视频;
第一解码模块,用于将所述互动视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频,同时播放所述待播放视频;
第一编码模块,用于按照预设编码方式对所述待传输视频进行编码,得到待传输编码视频,并将所述待传输编码视频发送给所述互动接收器或者第二直播背包,以使所述互动接收器或者第二直播背包对所述待传输编码视频进行解码后播放。
5.一种视频互动装置,其特征在于,包括:
第二获取模块,用于获取第一直播背包或者第二直播背包发送的待传输编码视频;
采集模块,用于采集互动视频并按照预设编码方式对所述互动视频进行编码,得到编码后的互动视频,并将所述编码后的互动视频发送给所述第一直播背包或者第二直播背包进行解码和播放;
第二解码模块,用于将所述待传输编码视频发送到预先设置的H.264/H.265解码器中进行解码,得到待播放视频;
发送模块,用于将所述待播放视频通过SDI或HDMI接口发送给预设显示设备,以使所述预设显示设备播放所述待播放视频。
6.一种直播背包,其特征在于,所述直播背包包括:处理器、存储器、4G/5G模块、显示模块和编解码模块;
所述存储器用于存储视频互动程序,以使所述处理器在调用所述视频互动程序时执行如权利要求1或2所述的视频互动方法;
所述4G/5G模块用于将所述第一待传输编码视频发送给所述互动接收器,所述显示模块用于播放所述待播放视频,所述编解码模块用于对互动视频进行解码以及按照预设编码方式对所述待传输视频进行编码。
7.根据权利要求6所述的直播背包,其特征在于,所述处理器的型号为BCM7252。
8.一种互动接收器,其特征在于,所述互动接收器包括:至少一个第一处理器和第一存储器;
所述第一处理器用于执行所述第一存储器中存储的视频互动程序,以实现权利要求3所述的视频互动方法。
9.一种视频互动系统,其特征在于,包括多个如权利要求6或7所述的直播背包以及如权利要求8所述的互动接收器。
10.一种存储介质,其特征在于,所述存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现权利要求1~3中任一项所述的视频互动方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110773563.4A CN113507622A (zh) | 2021-07-08 | 2021-07-08 | 视频互动方法、装置、系统以及直播背包和互动接收器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110773563.4A CN113507622A (zh) | 2021-07-08 | 2021-07-08 | 视频互动方法、装置、系统以及直播背包和互动接收器 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113507622A true CN113507622A (zh) | 2021-10-15 |
Family
ID=78012196
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110773563.4A Pending CN113507622A (zh) | 2021-07-08 | 2021-07-08 | 视频互动方法、装置、系统以及直播背包和互动接收器 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113507622A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114173144A (zh) * | 2021-12-02 | 2022-03-11 | 北京优祥智恒科技有限公司 | 一种直播设备及其控制方法和直播背包 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105306468A (zh) * | 2015-10-30 | 2016-02-03 | 广州华多网络科技有限公司 | 一种合成视频数据实时共享的方法及其主播客户端 |
CN106954100A (zh) * | 2017-03-13 | 2017-07-14 | 网宿科技股份有限公司 | 直播方法及系统、连麦管理服务器 |
CN111526377A (zh) * | 2019-02-01 | 2020-08-11 | 广州虎牙信息科技有限公司 | 拉流方法及装置 |
CN111836074A (zh) * | 2020-07-23 | 2020-10-27 | 北京达佳互联信息技术有限公司 | 一种连麦直播方法、装置及系统 |
CN112312226A (zh) * | 2020-10-28 | 2021-02-02 | 北京达佳互联信息技术有限公司 | 连麦方法、系统、装置、电子设备及存储介质 |
CN112565799A (zh) * | 2020-11-26 | 2021-03-26 | 北京达佳互联信息技术有限公司 | 视频数据处理方法和装置 |
-
2021
- 2021-07-08 CN CN202110773563.4A patent/CN113507622A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105306468A (zh) * | 2015-10-30 | 2016-02-03 | 广州华多网络科技有限公司 | 一种合成视频数据实时共享的方法及其主播客户端 |
CN106954100A (zh) * | 2017-03-13 | 2017-07-14 | 网宿科技股份有限公司 | 直播方法及系统、连麦管理服务器 |
CN111526377A (zh) * | 2019-02-01 | 2020-08-11 | 广州虎牙信息科技有限公司 | 拉流方法及装置 |
CN111836074A (zh) * | 2020-07-23 | 2020-10-27 | 北京达佳互联信息技术有限公司 | 一种连麦直播方法、装置及系统 |
CN112312226A (zh) * | 2020-10-28 | 2021-02-02 | 北京达佳互联信息技术有限公司 | 连麦方法、系统、装置、电子设备及存储介质 |
CN112565799A (zh) * | 2020-11-26 | 2021-03-26 | 北京达佳互联信息技术有限公司 | 视频数据处理方法和装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114173144A (zh) * | 2021-12-02 | 2022-03-11 | 北京优祥智恒科技有限公司 | 一种直播设备及其控制方法和直播背包 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA2673883C (en) | Cavlc enhancements for svc cgs enhancement layer coding | |
US20180027241A1 (en) | Method and Apparatus for Multi-Level Region-of-Interest Video Coding | |
US11089343B2 (en) | Capability advertisement, configuration and control for video coding and decoding | |
CN103493481A (zh) | 基于场景的适应性比特率控制 | |
US9406252B2 (en) | Adaptive multi-standard video coder supporting adaptive standard selection and mid-stream switch-over | |
CN110291789B (zh) | 用于选择用于对残差块进行编码/解码的编码模式的方法和装置 | |
CN102811373A (zh) | 移动终端向互联网以及移动互联网进行视频直播的方法 | |
US20200320274A1 (en) | Encoder, image processing system, unmanned aerial vehicle and encoding method | |
CN102131084A (zh) | 音视频流媒体rtmp推送装置和音视频流媒体rtmp推送方法 | |
CN101170685A (zh) | 一种网络视频传输方法 | |
TWI493885B (zh) | 用於操作通訊裝置的熵編碼器及設備 | |
TWI487366B (zh) | 用於無線hd1.1規範中的圖形模式壓縮的位元流語法 | |
CN111263192A (zh) | 视频处理方法及相关设备 | |
CN113132728B (zh) | 编码方法及编码器 | |
CN103731672A (zh) | 一种音视频解码方法及智能电视 | |
CN113507622A (zh) | 视频互动方法、装置、系统以及直播背包和互动接收器 | |
CN110572673A (zh) | 视频编解码方法和装置、存储介质及电子装置 | |
TW201330625A (zh) | 用於數位視訊處理的裝置及方法 | |
CN201528404U (zh) | 视频编解码系统及其视频编码器、视频解码器 | |
WO2021180220A1 (zh) | 图像编码和解码方法及装置 | |
KR20060043050A (ko) | 영상 신호의 인코딩 및 디코딩 방법 | |
CN115136599A (zh) | 发信号通知视频编码中存在色度偏移 | |
RU2795052C2 (ru) | Способы и устройство для адаптивной потоковой передачи облаков точек | |
WO2021237474A1 (zh) | 视频传输方法、装置和系统 | |
US20240121397A1 (en) | Temporal sublayer information for video coding |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211015 |