CN116634194A - 视频直播方法、视频直播装置、存储介质及电子设备 - Google Patents
视频直播方法、视频直播装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN116634194A CN116634194A CN202310522165.4A CN202310522165A CN116634194A CN 116634194 A CN116634194 A CN 116634194A CN 202310522165 A CN202310522165 A CN 202310522165A CN 116634194 A CN116634194 A CN 116634194A
- Authority
- CN
- China
- Prior art keywords
- video
- video stream
- resolution
- network bandwidth
- coding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000003860 storage Methods 0.000 title claims abstract description 8
- 238000012545 processing Methods 0.000 claims abstract description 55
- 230000005540 biological transmission Effects 0.000 claims abstract description 48
- 230000004931 aggregating effect Effects 0.000 claims abstract description 11
- 238000004458 analytical method Methods 0.000 claims description 23
- 230000003247 decreasing effect Effects 0.000 claims description 18
- 238000009826 distribution Methods 0.000 claims description 16
- 230000009466 transformation Effects 0.000 claims description 16
- 230000001131 transforming effect Effects 0.000 claims description 16
- 230000008569 process Effects 0.000 claims description 15
- 230000002776 aggregation Effects 0.000 claims description 12
- 238000004220 aggregation Methods 0.000 claims description 12
- 238000005259 measurement Methods 0.000 description 6
- 238000011144 upstream manufacturing Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000000903 blocking effect Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010438 heat treatment Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000010998 test method Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/142—Detection of scene cut or scene change
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2408—Monitoring of the upstream path of the transmission network, e.g. client requests
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本公开是关于一种视频直播方法、视频直播装置、存储介质及电子设备。该视频直播方法包括通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；根据网络带宽，匹配在网络带宽下进行视频上传时的视频编码策略；根据视频编码策略，将采集到的视频生成满足在网络带宽下进行视频上传时呈预定传输状态的视频流；上传视频流至云端服务器，供云端服务器根据视频流的视频编码策略匹配转码处理策略对视频流进行转码处理并分发转码得到的视频流至用户客户端。根据视频编码策略生成对应于在当下网络带宽上传时能够保证流畅度的视频流，同时云端服务器根据视频流的视频编码策略匹配转码处理策略对视频流进行转码处理来提高视频流的清晰度。
Description
技术领域
本公开涉及信息技术领域，尤其涉及一种视频直播方法、视频直播装置、存储介质及电子设备。
背景技术
网络直播行业经过多年的快速发展，出现了多种多样的形式。最早的网络直播是主播坐在PC前，安装好专业的直播设备(如摄像头和麦克风)，然后才能开始直播。后来随着移动设备性能的提升和直播技术的进步，主播只需要有移动通讯设备和有网络就可以直播。直播发展到现在，单一的室内互动直播已经无法满足观众的需求。主播们开始走向户外，在更多的场景下直播。直播想延伸到户外需要克服很多困难，而最主要的困难就是应对不稳定的网络。移动网络下，直播通常容易遇到电子设备发热，网络不稳定，连接被重置，断线重连等情况。另一方面带宽本身可能出现瓶颈。当带宽不够，码率较高的内容较难发送出去。
发明内容
有鉴于此，本公开实施例期望提供一种视频直播方法、视频直播装置、存储介质及电子设备。
本公开的技术方案是这样实现的：
第一方面，本公开提供一种视频直播方法。
本公开实施例提供的视频直播方法，包括：
通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；
根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略；
根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；
上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理并分发转码得到的视频流至用户客户端。
在一些实施例中，所述视频编码策略包含有编码参数；
所述根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略，包括：
根据所述网络带宽，确定将采集到的视频生成所述视频流时的编码参数；其中所述编码参数至少包括所述视频流的编码格式及视频流特征；
所述根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流，包括：
根据所述编码参数，将采集到的视频生成所述编码格式下具有所述视频流特征的视频流。
在一些实施例中，所述视频流特征至少包括码率和分辨率；
所述根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略，包括：
若所述网络带宽为第一网络带宽，则确定与所述第一网络带宽相匹配的第一视频编码策略；
若所述网络带宽为第二网络带宽，则确定与所述第二网络带宽相匹配的第二视频编码策略；
若所述网络带宽为第三网络带宽，则确定与所述第二网络带宽相匹配的第三视频编码策略；
若所述网络带宽为第四网络带宽，则确定与所述第四网络带宽相匹配的第四视频编码策略；其中，由所述第一网络带宽、所述第二网络带宽、所述第三网络带宽至所述第四网络带宽的带宽依次递减，且所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率或分辨率依次递减。
在一些实施例中，所述方法包括：
若所述第一网络带宽大于或等于第一带宽阈值，则确定所述第一视频编码策略中所述编码参数包含的视频流的编码格式为H.264、码率为第一码率,分辨率为第一分辨率；
若所述第二网络带宽大于或等于第二带宽阈值并小于第一带宽阈值，则确定所述第二视频编码策略中所述编码参数包含的视频流的编码格式为H.265、码率为第二码率,分辨率为所述第一分辨率；其中，所述第二带宽阈值小于所述第一带宽阈值；所述第二码率小于所述第一码率；
若所述第三网络带宽大于或等于第三带宽阈值并小于第二带宽阈值，则确定所述第三视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第三码率,分辨率为第二分辨率；其中，所述第二分辨率小于所述第一分辨率；所述第三带宽阈值小于所述第二带宽阈值；所述第三码率小于所述第二码率；
若所述第四网络带宽小于所述第三带宽阈值，则确定所述第四视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第四码率,分辨率为第三分辨率；其中，所述第三分辨率小于所述第二分辨率；所述第四码率小于所述第三码率。
在一些实施例中，所述上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理，包括：
通过云端的聚合服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理；其中，
所述转码处理，包括：
若所述视频流的编码格式为H.264，则将所述视频流透传至视频分发模型进行分发处理；
若所述视频流的编码格式为H.265，分辨率为所述第一分辨率，则将所述视频流的编码格式转码为H.264，输出码率为所述第一码率、分辨率为第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为所述第二分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由所述第二分辨率变换为所述第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为所述第一码率s,输出分辨率为所述第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为第三分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由第三分辨率变换为第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率,输出分辨率为第一分辨率的视频流。
第二方面，本公开提供一种视频直播装置，包括：
网络带宽确定模块，用于通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；
视频编码策略匹配模块，用于根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略；
视频流生成模块，用于根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；
视频流上传模块，用于上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理并分发转码得到的视频流至用户客户端。
在一些实施例中，所述视频编码策略包含有编码参数；
所述视频编码策略匹配模块，用于
根据所述网络带宽，确定将采集到的视频生成所述视频流时的编码参数；其中所述编码参数至少包括所述视频流的编码格式及视频流特征；
所述视频流生成模块，用于
根据所述编码参数，将采集到的视频生成所述编码格式下具有所述视频流特征的视频流。
在一些实施例中，所述视频流特征至少包括码率和分辨率；
所述视频编码策略匹配模块，用于
若所述网络带宽为第一网络带宽，则确定与所述第一网络带宽相匹配的第一视频编码策略；
若所述网络带宽为第二网络带宽，则确定与所述第二网络带宽相匹配的第二视频编码策略；
若所述网络带宽为第三网络带宽，则确定与所述第二网络带宽相匹配的第三视频编码策略；
若所述网络带宽为第四网络带宽，则确定与所述第四网络带宽相匹配的第四视频编码策略；其中，由所述第一网络带宽、所述第二网络带宽、所述第三网络带宽至所述第四网络带宽的带宽依次递减，且所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率或分辨率依次递减。
在一些实施例中，所述视频编码策略匹配模块，用于
若所述第一网络带宽大于或等于第一带宽阈值，则确定所述第一视频编码策略中所述编码参数包含的视频流的编码格式为H.264、码率为第一码率,分辨率为第一分辨率；
若所述第二网络带宽大于或等于第二带宽阈值并小于第一带宽阈值，则确定所述第二视频编码策略中所述编码参数包含的视频流的编码格式为H.265、码率为第二码率,分辨率为所述第一分辨率；其中，所述第二带宽阈值小于所述第一带宽阈值；所述第二码率小于所述第一码率；
若所述第三网络带宽大于或等于第三带宽阈值并小于第二带宽阈值，则确定所述第三视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第三码率,分辨率为第二分辨率；其中，所述第二分辨率小于所述第一分辨率；所述第三带宽阈值小于所述第二带宽阈值；所述第三码率小于所述第二码率；
若所述第四网络带宽小于所述第三带宽阈值，则确定所述第四视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第四码率,分辨率为第三分辨率；其中，所述第三分辨率小于所述第二分辨率；所述第四码率小于所述第三码率。
在一些实施例中，所述视频直播装置包括：转码处理模块；
所述转码处理模块，用于
根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理；其中，
所述转码处理，包括：
通过云端的聚合服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理；其中，
所述转码处理，包括：
若所述视频流的编码格式为H.264，则将所述视频流透传至视频分发模型进行分发处理；
若所述视频流的编码格式为H.265，分辨率为所述第一分辨率，则将所述视频流的编码格式转码为H.264，输出码率为所述第一码率、分辨率为第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为所述第二分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由所述第二分辨率变换为所述第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为所述第一码率s,输出分辨率为所述第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为第三分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由第三分辨率变换为第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率,输出分辨率为第一分辨率的视频流。
第三方面，本公开提供一种计算机可读存储介质，其上存储有视频直播程序，该视频直播程序被处理器执行时，实现上述第一方面所述的视频直播方法。
第四方面，本公开提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的视频直播程序，所述处理器执行所述视频直播程序时，实现上述第一方面所述的视频直播方法。
根据本公开实施例的视频直播方法包括通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；根据网络带宽，匹配在网络带宽下进行视频上传时的视频编码策略；根据视频编码策略，将采集到的视频生成满足在网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；上传视频流至云端服务器，供云端服务器根据视频流的视频编码策略匹配转码处理策略对视频流进行转码处理并分发转码得到的视频流至用户客户端。本申请中，在视频流上传时，可根据网络带宽确定对应的视频编码策略生成对应于在当下网络带宽上传时能够保证流畅度的视频流，同时云端服务器根据视频流的视频编码策略匹配转码处理策略对视频流进行转码处理来提高当下网络带宽上传的视频流的清晰度，然后分发给用户客户端。如此可实现根据当下网络带宽进行视频编码策略调整及匹配对应的转码处理策略，从而有利于保证当下网络带宽上传时的流畅度以及用户客户端观看到的视频的清晰度。
本公开附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本公开的实践了解到。
附图说明
图1是根据一示例性实施例示出的视频直播方法流程图；
图2是根据一示例性实施例示出的视频流编码流程图；
图3是根据一示例性实施例示出的视频流转码流程图；
图4是根据一示例性实施例示出的视频直播装置结构示意图。
具体实施方式
下面详细描述本公开的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本公开，而不能理解为对本公开的限制。
网络直播行业经过多年的快速发展，出现了多种多样的形式。最早的网络直播是主播坐在PC前，安装好专业的直播设备(如摄像头和麦克风)，然后才能开始直播。后来随着移动设备性能的提升和直播技术的进步，主播只需要有移动通讯设备和有网络就可以直播。直播发展到现在，单一的室内互动直播已经无法满足观众的需求。主播们开始走向户外，在更多的场景下直播。直播想延伸到户外需要克服很多困难，而最主要的困难就是应对不稳定的网络。移动网络下，直播通常容易遇到电子设备发热，网络不稳定，连接被重置，断线重连等情况。另一方面带宽本身可能出现瓶颈。当带宽不够，码率较高的内容较难发送出去。于是出现了背包加网络聚合器的方式，提高信号的视频编码的性能和网络带宽，这在一定程度上提高了户外直播的稳定性。但是有些场景下，还会出现带宽不够的情况，比如一些大型活动现场，多家网络电视台或直播播主需要同时进行对外直播。这时通常只能通过降低编码码率的同时降低分辨率的方式达到直播信号的流畅。目前缺少一种在弱网环境下保障输出画面分辨率和流畅度并尽量提高清晰度的方法。
针对上述情况，本公开提供一种视频直播方法。图1是根据一示例性实施例示出的视频直播方法流程图。如图1所示，该视频直播方法包括：
步骤10、通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；
步骤11、根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略；
步骤12、根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；
步骤13、上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理并分发转码得到的视频流至用户客户端。
在本示例性实施例中，通常直播的网络分为上行网络和下行网络。上行网络指视频采集编码并推流到云端的网络；下行网络指观众将云端的视频流拉到本地实现视频播放的网络。通常家用网络都是上行带宽远低于下行带宽，即下载速度远高于上传速度，造成这种情况的原因是因为用户通常下载需要高于上传需求。为了最大化利用网络，运营商通常会分配不对等的上行和下行带宽，下行的带宽一般由用户的家用宽带或手机的带宽决定，网络带宽通常都足够。直播的视频的卡顿等问题主要发生在上行阶段，因此本申请解决的是上行网络在弱网环境下的优化问题，应用于多个电视台或用户直播或转播的网络应用场景。
本申请整体可分四步实现：第一步，网络带宽探测；第二步，编码策略选择；第三步视频编码上传到聚合服务器；第四，聚合服务器分析处理视频流并转发到流媒体服务器。
其中，网络带宽探测在网络聚合器上实现，由于从背包到聚合服务器之间通过网络聚合器提供网络接入，而网络聚合器是对多家运营商的网络进行汇聚的工具。网络聚合器的管理页面会给出各家网络的实时带宽数据。这些数据是本地宽带运营商提供的宽带测试方法进行测速的。由于运营商自己的安装测试基本是拿自己的测试服务器进行的，所以准确性会高很多。
例如，网络聚合器自带支持多家运营商的流量卡插槽，对于同一运营商支持4G或5G卡。通常每家运营商都会提供自己的带宽测量策略，实现网络带宽测量，并将测量结果实时反馈到用户侧，用户通过手机各个插槽上的网络带宽只进行汇总，得到当前网络聚合器支持的总带宽。
其中，所述根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略，包括：通过背包根据网络聚合器的带宽探测结果匹配视频编码策略。根据本公开实施例的视频直播方法包括通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；根据网络带宽，匹配在网络带宽下进行视频上传时的视频编码策略；根据视频编码策略，将采集到的视频生成满足在网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；上传视频流至云端服务器，供云端服务器根据视频流的视频编码策略匹配转码处理策略对视频流进行转码处理并分发转码得到的视频流至用户客户端。本申请中，在视频流上传时，可根据网络带宽确定对应的视频编码策略生成对应于在当下网络带宽上传时能够保证流畅度的视频流，同时云端服务器根据视频流的视频编码策略匹配转码处理策略对视频流进行转码处理来提高当下网络带宽上传的视频流的清晰度，然后分发给用户客户端。如此可实现根据当下网络带宽进行视频编码策略调整及匹配对应的转码处理策略，从而有利于保证当下网络带宽上传时的流畅度以及用户客户端观看到的视频的清晰度。
在一些实施例中，所述视频编码策略包含有编码参数；
所述根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略，包括：
根据所述网络带宽，确定将采集到的视频生成所述视频流时的编码参数；其中所述编码参数至少包括所述视频流的编码格式及视频流特征；
所述根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流，包括：
根据所述编码参数，将采集到的视频生成所述编码格式下具有所述视频流特征的视频流。
在本示例性实施例中，编码策略选择在背包侧实现，根据网络带宽探测获取的带宽数据，背包需要设置编码参数，这里主要是设置编码格式、码率和分辨率三个参数。
本申请通过视频流传输阶段划分，将视频直播流的上行阶段和下行阶段进行分段分析，得出直播卡顿等弱网问题通常是由于上行带宽不足造成的结论。通过确定与上行带宽不足情况下匹配的编码策略，相比于传统的弱网优化策略，可降低处理的复杂度，提高问题处理的命中率。其中，上行带宽指上行通信时网络的通信带宽，下行带宽指下行通信时网络的通信带宽。
在本示例性实施例中，所述视频流特征至少包括码率和分辨率；
所述根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略，包括：
若所述网络带宽为第一网络带宽，则确定与所述第一网络带宽相匹配的第一视频编码策略；
若所述网络带宽为第二网络带宽，则确定与所述第二网络带宽相匹配的第二视频编码策略；
若所述网络带宽为第三网络带宽，则确定与所述第二网络带宽相匹配的第三视频编码策略；
若所述网络带宽为第四网络带宽，则确定与所述第四网络带宽相匹配的第四视频编码策略；其中，由所述第一网络带宽、所述第二网络带宽、所述第三网络带宽至所述第四网络带宽的带宽依次递减，且所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率或分辨率依次递减。
在本示例性实施例中，所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率或分辨率依次递减，包括：
所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率依次递减；或，
所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中分辨率依次递减。本申请中在生成视频流时，不同网络带宽上传视频流时，对应通过不同编码格式生成不同码率和分辨率的视频流，使得低网络带宽下传输视频时可传输低分辨率和低码率的视频流，从而有效提高低网络带宽下视频流传输的流畅度。
在本示例性实施例中，所述方法包括：
若所述第一网络带宽大于或等于第一带宽阈值，则确定所述第一视频编码策略中所述编码参数包含的视频流的编码格式为H.264、码率为第一码率,分辨率为第一分辨率；
若所述第二网络带宽大于或等于第二带宽阈值并小于第一带宽阈值，则确定所述第二视频编码策略中所述编码参数包含的视频流的编码格式为H.265、码率为第二码率,分辨率为所述第一分辨率；其中，所述第二带宽阈值小于所述第一带宽阈值；所述第二码率小于所述第一码率；
若所述第三网络带宽大于或等于第三带宽阈值并小于第二带宽阈值，则确定所述第三视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第三码率,分辨率为第二分辨率；其中，所述第二分辨率小于所述第一分辨率；所述第三带宽阈值小于所述第二带宽阈值；所述第三码率小于所述第二码率；
若所述第四网络带宽小于所述第三带宽阈值，则确定所述第四视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第四码率,分辨率为第三分辨率；其中，所述第三分辨率小于所述第二分辨率；所述第四码率小于所述第三码率。
其中，若所述第一网络带宽大于或等于第一带宽阈值8Mbps，则确定所述第一视频编码策略中所述编码参数包含的视频流的编码格式为H.264、码率为8Mbps,分辨率为1080P；
若所述第二网络带宽大于或等于第二带宽阈值4Mbps并小于第一带宽阈值8Mbps，则确定所述第二视频编码策略中所述编码参数包含的视频流的编码格式为H.265、码率为4Mbps,分辨率为1080P；
若所述第三网络带宽大于或等于第三带宽阈值2Mbps并小于第二带宽阈值4Mbps，则确定所述第三视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为2Mbps,分辨率为720P；
若所述第四网络带宽小于第三带宽阈值2Mbps，则确定所述第四视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为1Mbps,分辨率为540P。
在本示例性实施例中，视频编码格式划分，根据不同的带宽设定不同的编码格式。例如H.265和H.264。在播出端只输出H.264格式，即能降低上行的带宽占用，又由于H.264编码格式对网络浏览器的适配性友好，算力资源占用低。保障了流畅性的同时又对用户播放端要求低，提高了用户的整体满意度。
其中，通过视频编码格式H.264生成视频流时相对于H.265，占用CPU资源少，但生成的视频流数据量大，更不容易传输。
在一些实施例中，所述上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理，包括：
通过云端的聚合服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理；其中，
所述转码处理，包括：
若所述视频流的编码格式为H.264，则将所述视频流透传至视频分发模型进行分发处理；
若所述视频流的编码格式为H.265，分辨率为所述第一分辨率，则将所述视频流的编码格式转码为H.264，输出码率为所述第一码率、分辨率为第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为所述第二分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由所述第二分辨率变换为所述第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为所述第一码率s,输出分辨率为所述第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为第三分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由第三分辨率变换为第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率,输出分辨率为第一分辨率的视频流。
其中，若所述视频流的编码格式为H.264，则将所述视频流透传至视频分发模型进行分发处理；
若所述视频流的编码格式为H.265，分辨率为1080P，则将所述视频流的编码格式转码为H.264，输出码率为第一码率8Mbps、分辨率为第一分辨率1080P的视频流；
若所述视频流的编码格式为H.265，分辨率为第二分辨率720P，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由720P变换为第一分辨率1080P，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率8Mbps,输出分辨率为第一分辨率1080P的视频流；
若所述视频流的编码格式为H.265，分辨率为第三分辨率540P，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由第三分辨率540P变换为第一分辨率1080P，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率8Mbps,输出分辨率为第一分辨率1080P的视频流。
在本示例性实施例中，视频分辨率划分，在网络差的时候，采用720P或540P编码，能保证在小分辨率下传输的流畅性和画质。在转码过程中，通过超级分辨率分析处理，将最终的输出分辨率上变换到1080P，保证了输出分辨率的固定。超级分辨率分析比传统的上变换具有更高的画质。
图2是根据一示例性实施例示出的视频流编码流程图。如图2所示，视频流编码流程包括：
步骤20、启动编码流程；
步骤21、判断网络带宽；
步骤22、判断网络带宽是否大于等于8Mbps,如果是则设置H.264编码，1080P分辨率和8Mbps码率；
步骤23、如果否则判定网络带宽是否大于等于4Mbps小于8Mbps；如果是则设置H.265、4Mbps码率、1080P分辨率；
步骤24、如果否则判定网络带宽是否大于等于2Mbps小于4Mbps；如果是则设置H.265、2Mbps码率、720P分辨率；如果否则设置H.265、1Mbps码率、540P分辨率；
步骤25、结束编码流程。
图3是根据一示例性实施例示出的视频流转码流程图。如图3所示，视频流转码流程包括：
步骤30、开始转码流程；
步骤31、接收上行视频流；
步骤32、判断视频流是否为H.264编码格式；如果是则转封装为RTMP格式；
步骤33、如果否则判定视频流是否为H.265编码格式和1080P分辨率；如果是则转码为H.264编码格式，设置1080P分辨率和8Mbps码率；
步骤34、如果否则视频解码并进行超级分辨率分析，将分辨率变换为1080P；
步骤35、在步骤34基础上，设置H.264编码和8Mbps码率；
步骤36、结束转码流程。
本申请在直播前确定了编码策略，无论网络环境如何，总能输出固定的分辨率和固定的画质，减少了有的弱网处理中实时改变分辨率的情况，不会产生画质和流畅度频繁切换的状况，从而提高了用户的观感。
本公开提供一种视频直播装置。图4是根据一示例性实施例示出的视频直播装置结构示意图。如图4所示，视频直播装置包括：
网络带宽确定模块40，用于通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；
视频编码策略匹配模块41，用于根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略；
视频流生成模块42，用于根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；
视频流上传模块43，用于上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理并分发转码得到的视频流至用户客户端。
在本示例性实施例中，通常直播的网络分为上行网络和下行网络。上行网络指视频采集编码并推流到云端的网络；下行网络指观众将云端的视频流拉到本地实现视频播放的网络。通常家用网络都是上行带宽远低于下行带宽，即下载速度远高于上传速度，造成这种情况的原因是因为用户通常下载需要高于上传需求，为了最大化利用网络，运营商通常会分配不对等的上行和下行带宽，下行的带宽一般由用户的家用宽带或手机的带宽决定，网络带宽通常都足够。直播的视频的卡顿等问题主要发生在上行阶段，因此本申请解决的是上行网络在弱网环境下的优化问题，应用于多个电视台或用户直播或转播的网络应用场景。
本申请整体可分四步实现：第一步，网络带宽探测；第二步，编码策略选择；第三步视频编码上传到聚合服务器；第四，聚合服务器分析处理视频流并转发到流媒体服务器。
其中，网络带宽探测在网络聚合器上实现，由于从背包到聚合服务器之间通过网络聚合器提供网络接入，而网络聚合器是对多家运营商的网络进行汇聚的工具。网络聚合器的管理页面会给出各家网络的实时带宽数据。这些数据是本地宽带运营商提供的宽带测试方法进行测速的。由于运营商自己的安装测试基本是拿自己的测试服务器进行的，所以准确性会高很多。
例如，网络聚合器自带支持多家运营商的流量卡插槽，对于同一运营商支持4G或5G卡。通常每家运营商都会提供自己的带宽测量策略，实现网络带宽测量，并将测量结果实时反馈到用户侧，用户通过手机各个插槽上的网络带宽只进行汇总，得到当前网络聚合器支持的总带宽。
其中，所述根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略，包括：通过背包根据网络聚合器的带宽探测结果匹配视频编码策略。根据本公开实施例的视频直播装置用于通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；根据网络带宽，匹配在网络带宽下进行视频上传时的视频编码策略；根据视频编码策略，将采集到的视频生成满足在网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；上传视频流至云端服务器，供云端服务器根据视频流的视频编码策略匹配转码处理策略对视频流进行转码处理并分发转码得到的视频流至用户客户端。本申请中，在视频流上传时，可根据网络带宽确定对应的视频编码策略生成对应于在当下网络带宽上传时能够保证流畅度的视频流，同时云端服务器根据视频流的视频编码策略匹配转码处理策略对视频流进行转码处理来提高当下网络带宽上传的视频流的清晰度，然后分发给用户客户端。如此可实现根据当下网络带宽进行视频编码策略调整及匹配对应的转码处理策略，从而有利于保证当下网络带宽上传时的流畅度以及用户客户端观看到的视频的清晰度。
在一些实施例中，所述视频编码策略包含有编码参数；
所述视频编码策略匹配模块，用于
根据所述网络带宽，确定将采集到的视频生成所述视频流时的编码参数；其中所述编码参数至少包括所述视频流的编码格式及视频流特征；
所述视频流生成模块，用于
根据所述编码参数，将采集到的视频生成所述编码格式下具有所述视频流特征的视频流。
在本示例性实施例中，编码策略选择在背包侧实现，根据网络带宽探测获取的带宽数据，背包需要设置编码参数，这里主要是设置编码格式、码率和分辨率三个参数。
本申请通过视频流传输阶段划分，将视频直播流的上行阶段和下行阶段进行分段分析，得出直播卡顿等弱网问题通常是由于上行带宽不足造成的结论。通过确定与上行带宽不足情况下匹配的编码策略，相比于传统的弱网优化策略，可降低处理的复杂度，提高问题处理的命中率。
在一些实施例中，所述视频流特征至少包括码率和分辨率；
所述视频编码策略匹配模块，用于
若所述网络带宽为第一网络带宽，则确定与所述第一网络带宽相匹配的第一视频编码策略；
若所述网络带宽为第二网络带宽，则确定与所述第二网络带宽相匹配的第二视频编码策略；
若所述网络带宽为第三网络带宽，则确定与所述第二网络带宽相匹配的第三视频编码策略；
若所述网络带宽为第四网络带宽，则确定与所述第四网络带宽相匹配的第四视频编码策略；其中，由所述第一网络带宽、所述第二网络带宽、所述第三网络带宽至所述第四网络带宽的带宽依次递减，且所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率或分辨率依次递减。
在本示例性实施例中，所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率或分辨率依次递减，包括：
所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率依次递减；或，
所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中分辨率依次递减。本申请中在生成视频流时，不同网络带宽上传视频流时，对应通过不同编码格式生成不同码率和分辨率的视频流，使得低网络带宽下传输视频时可传输低分辨率和低码率的视频流，从而有效提高低网络带宽下视频流传输的流畅度。
在一些实施例中，所述视频编码策略匹配模块，用于
若所述第一网络带宽大于或等于第一带宽阈值，则确定所述第一视频编码策略中所述编码参数包含的视频流的编码格式为H.264、码率为第一码率,分辨率为第一分辨率；
若所述第二网络带宽大于或等于第二带宽阈值并小于第一带宽阈值，则确定所述第二视频编码策略中所述编码参数包含的视频流的编码格式为H.265、码率为第二码率,分辨率为所述第一分辨率；其中，所述第二带宽阈值小于所述第一带宽阈值；所述第二码率小于所述第一码率；
若所述第三网络带宽大于或等于第三带宽阈值并小于第二带宽阈值，则确定所述第三视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第三码率,分辨率为第二分辨率；其中，所述第二分辨率小于所述第一分辨率；所述第三带宽阈值小于所述第二带宽阈值；所述第三码率小于所述第二码率；
若所述第四网络带宽小于所述第三带宽阈值，则确定所述第四视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第四码率,分辨率为第三分辨率；其中，所述第三分辨率小于所述第二分辨率；所述第四码率小于所述第三码率。
其中，若所述第一网络带宽大于或等于第一带宽阈值8Mbps，则确定所述第一视频编码策略中所述编码参数包含的视频流的编码格式为H.264、码率为8Mbps,分辨率为1080P；
若所述第二网络带宽大于或等于第二带宽阈值4Mbps并小于第一带宽阈值8Mbps，则确定所述第二视频编码策略中所述编码参数包含的视频流的编码格式为H.265、码率为4Mbps,分辨率为1080P；
若所述第三网络带宽大于或等于第三带宽阈值2Mbps并小于第二带宽阈值4Mbps，则确定所述第三视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为2Mbps,分辨率为720P；
若所述第四网络带宽小于第三带宽阈值2Mbps，则确定所述第四视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为1Mbps,分辨率为540P。
在本示例性实施例中，视频编码格式划分，根据不同的带宽设定不同的编码格式。例如H.265和H.264。在播出端只输出H.264格式，即能降低上行的带宽占用，又由于H.264编码格式对网络浏览器的适配性友好，算力资源占用低。保障了流畅性的同时又对用户播放端要求低，提高了用户的整体满意度。
其中，
通过视频编码格式H.264生成视频流时相对于H.265，占用CPU资源少，但生成的视频流数据量大，更不容易传输。
在一些实施例中，所述视频直播装置包括：转码处理模块；
所述转码处理模块，用于
通过云端的聚合服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理；其中，
所述转码处理，包括：
若所述视频流的编码格式为H.264，则将所述视频流透传至视频分发模型进行分发处理；
若所述视频流的编码格式为H.265，分辨率为所述第一分辨率，则将所述视频流的编码格式转码为H.264，输出码率为所述第一码率、分辨率为第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为所述第二分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由所述第二分辨率变换为所述第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为所述第一码率s,输出分辨率为所述第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为第三分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由第三分辨率变换为第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率,输出分辨率为第一分辨率的视频流。
其中，若所述视频流的编码格式为H.264，则将所述视频流透传至视频分发模型进行分发处理；
若所述视频流的编码格式为H.265，分辨率为1080P，则将所述视频流的编码格式转码为H.264，输出码率为第一码率8Mbps、分辨率为第一分辨率1080P的视频流；
若所述视频流的编码格式为H.265，分辨率为第二分辨率720P，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由720P变换为第一分辨率1080P，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率8Mbps,输出分辨率为第一分辨率1080P的视频流；
若所述视频流的编码格式为H.265，分辨率为第三分辨率540P，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由第三分辨率540P变换为第一分辨率1080P，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率8Mbps,输出分辨率为第一分辨率1080P的视频流。
在本示例性实施例中，视频分辨率划分，在网络差的时候，采用720P或540P编码，能保证在小分辨率下传输的流畅性和画质。在转码过程中，通过超级分辨率分析处理，将最终的输出分辨率上变换到1080P，保证了输出分辨率的固定。超级分辨率分析比传统的上变换具有更高的画质。
本申请在直播前确定了编码策略，无论网络环境如何，总能输出固定的分辨率和固定的画质，减少了有的弱网处理中实时改变分辨率的情况，不会产生画质和流畅度频繁切换的状况，从而提高了用户的观感。
本公开提供一种计算机可读存储介质，其上存储有视频直播程序，该视频直播程序被处理器执行时，实现上述各实施例所述的视频直播方法。
本公开提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的视频直播程序，所述处理器执行所述视频直播程序时，实现上述各实施例所述的视频直播方法。
需要说明的是，在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得程序，然后将其存储在计算机存储器中。
应当理解，本公开的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本公开的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
在本公开的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”、“轴向”、“径向”、“周向”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本公开和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本公开的限制。
此外，本公开实施例中所使用的“第一”、“第二”等术语，仅用于描述目的，而不可以理解为指示或者暗示相对重要性，或者隐含指明本实施例中所指示的技术特征数量。由此，本公开实施例中限定有“第一”、“第二”等术语的特征，可以明确或者隐含地表示该实施例中包括至少一个该特征。在本公开的描述中，词语“多个”的含义是至少两个或者两个及以上，例如两个、三个、四个等，除非实施例中另有明确具体的限定。
在本公开中，除非实施例中另有明确的相关规定或者限定，否则实施例中出现的术语“安装”、“相连”、“连接”和“固定”等应做广义理解，例如，连接可以是固定连接，也可以是可拆卸连接，或成一体，可以理解的，也可以是机械连接、电连接等；当然，还可以是直接相连，或者通过中间媒介进行间接连接，或者可以是两个元件内部的连通，或者两个元件的相互作用关系。对于本领域的普通技术人员而言，能够根据具体的实施情况理解上述术语在本公开中的具体含义。
在本公开中，除非另有明确的规定和限定，第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触，或第一和第二特征通过中间媒介间接接触。而且，第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方，或仅仅表示第一特征水平高度小于第二特征。
尽管上面已经示出和描述了本公开的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本公开的限制，本领域的普通技术人员在本公开的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (12)
1.一种视频直播方法，其特征在于，包括：
通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；
根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略；
根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；
上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理并分发转码得到的视频流至用户客户端。
2.根据权利要求1所述的视频直播方法，其特征在于，所述视频编码策略包含有编码参数；
所述根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略，包括：
根据所述网络带宽，确定将采集到的视频生成所述视频流时的编码参数；其中所述编码参数至少包括所述视频流的编码格式及视频流特征；
所述根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流，包括：
根据所述编码参数，将采集到的视频生成所述编码格式下具有所述视频流特征的视频流。
3.根据权利要求2所述的视频直播方法，其特征在于，所述视频流特征至少包括码率和分辨率；
所述根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略，包括：
若所述网络带宽为第一网络带宽，则确定与所述第一网络带宽相匹配的第一视频编码策略；
若所述网络带宽为第二网络带宽，则确定与所述第二网络带宽相匹配的第二视频编码策略；
若所述网络带宽为第三网络带宽，则确定与所述第二网络带宽相匹配的第三视频编码策略；
若所述网络带宽为第四网络带宽，则确定与所述第四网络带宽相匹配的第四视频编码策略；其中，由所述第一网络带宽、所述第二网络带宽、所述第三网络带宽至所述第四网络带宽的带宽依次递减，且所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率或分辨率依次递减。
4.根据权利要求3所述的视频直播方法，其特征在于，所述方法包括：
若所述第一网络带宽大于或等于第一带宽阈值，则确定所述第一视频编码策略中所述编码参数包含的视频流的编码格式为H.264、码率为第一码率,分辨率为第一分辨率；
若所述第二网络带宽大于或等于第二带宽阈值并小于第一带宽阈值，则确定所述第二视频编码策略中所述编码参数包含的视频流的编码格式为H.265、码率为第二码率,分辨率为所述第一分辨率；其中，所述第二带宽阈值小于所述第一带宽阈值；所述第二码率小于所述第一码率；
若所述第三网络带宽大于或等于第三带宽阈值并小于第二带宽阈值，则确定所述第三视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第三码率,分辨率为第二分辨率；其中，所述第二分辨率小于所述第一分辨率；所述第三带宽阈值小于所述第二带宽阈值；所述第三码率小于所述第二码率；
若所述第四网络带宽小于所述第三带宽阈值，则确定所述第四视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第四码率,分辨率为第三分辨率；其中，所述第三分辨率小于所述第二分辨率；所述第四码率小于所述第三码率。
5.根据权利要求4所述的视频直播方法，其特征在于，所述上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理，包括：
通过云端的聚合服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理；其中，
所述转码处理，包括：
若所述视频流的编码格式为H.264，则将所述视频流透传至视频分发模型进行分发处理；
若所述视频流的编码格式为H.265，分辨率为所述第一分辨率，则将所述视频流的编码格式转码为H.264，输出码率为所述第一码率、分辨率为第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为所述第二分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由所述第二分辨率变换为所述第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为所述第一码率s,输出分辨率为所述第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为第三分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由第三分辨率变换为第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率,输出分辨率为第一分辨率的视频流。
6.一种视频直播装置，其特征在于，包括：
网络带宽确定模块，用于通过网络聚合器聚合多个上行传输网络，得到上行传输的网络带宽；
视频编码策略匹配模块，用于根据所述网络带宽，匹配在所述网络带宽下进行视频上传时的视频编码策略；
视频流生成模块，用于根据所述视频编码策略，将采集到的视频生成满足在所述网络带宽下进行视频上传时呈预定传输状态的视频流；其中，所述预定传输状态用于表征所述视频流上传时的流畅程度；
视频流上传模块，用于上传所述视频流至云端服务器，供所述云端服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理并分发转码得到的视频流至用户客户端。
7.根据权利要求6所述的视频直播装置，其特征在于，所述视频编码策略包含有编码参数；
所述视频编码策略匹配模块，用于
根据所述网络带宽，确定将采集到的视频生成所述视频流时的编码参数；其中所述编码参数至少包括所述视频流的编码格式及视频流特征；
所述视频流生成模块，用于
根据所述编码参数，将采集到的视频生成所述编码格式下具有所述视频流特征的视频流。
8.根据权利要求7所述的视频直播装置，其特征在于，所述视频流特征至少包括码率和分辨率；
所述视频编码策略匹配模块，用于
若所述网络带宽为第一网络带宽，则确定与所述第一网络带宽相匹配的第一视频编码策略；
若所述网络带宽为第二网络带宽，则确定与所述第二网络带宽相匹配的第二视频编码策略；
若所述网络带宽为第三网络带宽，则确定与所述第二网络带宽相匹配的第三视频编码策略；
若所述网络带宽为第四网络带宽，则确定与所述第四网络带宽相匹配的第四视频编码策略；其中，由所述第一网络带宽、所述第二网络带宽、所述第三网络带宽至所述第四网络带宽的带宽依次递减，且所述第一视频编码策略、所述第二视频编码策略、所述第三视频编码策略及所述第四视频编码策略中分别包含编码参数中的码率或分辨率依次递减。
9.根据权利要求8所述的视频直播装置，其特征在于，所述视频编码策略匹配模块，用于
若所述第一网络带宽大于或等于第一带宽阈值，则确定所述第一视频编码策略中所述编码参数包含的视频流的编码格式为H.264、码率为第一码率,分辨率为第一分辨率；
若所述第二网络带宽大于或等于第二带宽阈值并小于第一带宽阈值，则确定所述第二视频编码策略中所述编码参数包含的视频流的编码格式为H.265、码率为第二码率,分辨率为所述第一分辨率；其中，所述第二带宽阈值小于所述第一带宽阈值；所述第二码率小于所述第一码率；
若所述第三网络带宽大于或等于第三带宽阈值并小于第二带宽阈值，则确定所述第三视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第三码率,分辨率为第二分辨率；其中，所述第二分辨率小于所述第一分辨率；所述第三带宽阈值小于所述第二带宽阈值；所述第三码率小于所述第二码率；
若所述第四网络带宽小于所述第三带宽阈值，则确定所述第四视频编码策略中所述编码参数包含的视频流的编码格式为H.265，码率为第四码率,分辨率为第三分辨率；其中，所述第三分辨率小于所述第二分辨率；所述第四码率小于所述第三码率。
10.根据权利要求9所述的视频直播装置，其特征在于，所述视频直播装置包括：转码处理模块；
所述转码处理模块，用于
根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理；其中，
所述转码处理，包括：
通过云端的聚合服务器根据所述视频流的视频编码策略匹配转码处理策略对所述视频流进行转码处理；其中，
所述转码处理，包括：
若所述视频流的编码格式为H.264，则将所述视频流透传至视频分发模型进行分发处理；
若所述视频流的编码格式为H.265，分辨率为所述第一分辨率，则将所述视频流的编码格式转码为H.264，输出码率为所述第一码率、分辨率为第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为所述第二分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由所述第二分辨率变换为所述第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为所述第一码率s,输出分辨率为所述第一分辨率的视频流；
若所述视频流的编码格式为H.265，分辨率为第三分辨率，则将视频流解码进行超级分辨率变换分析，将所述视频流分辨率由第三分辨率变换为第一分辨率，将所述视频流的编码格式转码为H.264，输出编码码率为第一码率,输出分辨率为第一分辨率的视频流。
11.一种计算机可读存储介质，其特征在于，其上存储有视频直播程序，该视频直播程序被处理器执行时，实现权利要求1-5中任一项所述的视频直播方法。
12.一种电子设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的视频直播程序，所述处理器执行所述视频直播程序时，实现权利要求1-5中任一项所述的视频直播方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310522165.4A CN116634194B (zh) | 2023-05-10 | 2023-05-10 | 视频直播方法、视频直播装置、存储介质及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310522165.4A CN116634194B (zh) | 2023-05-10 | 2023-05-10 | 视频直播方法、视频直播装置、存储介质及电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116634194A true CN116634194A (zh) | 2023-08-22 |
| CN116634194B CN116634194B (zh) | 2024-05-24 |
Family
ID=87591099
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310522165.4A Active CN116634194B (zh) | 2023-05-10 | 2023-05-10 | 视频直播方法、视频直播装置、存储介质及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116634194B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN118118709A (zh) * | 2024-01-18 | 2024-05-31 | 常州恒安智能科技有限公司 | 一种基于ip网络的数字视频信息传输方法 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103561279A (zh) * | 2013-10-10 | 2014-02-05 | 中兴通讯股份有限公司 | 一种多媒体文件播放的方法、系统及云转码服务设备 |
| CN105163134A (zh) * | 2015-08-03 | 2015-12-16 | 腾讯科技（深圳）有限公司 | 直播视频的视频编码参数设置方法、装置及视频编码设备 |
| CN108024126A (zh) * | 2017-11-28 | 2018-05-11 | 北京潘达互娱科技有限公司 | 网络直播视频调整方法、装置、电子设备和存储介质 |
| CN113115067A (zh) * | 2021-04-19 | 2021-07-13 | 脸萌有限公司 | 直播系统、视频处理方法及相关装置 |
| CN114598853A (zh) * | 2020-11-20 | 2022-06-07 | 中国移动通信有限公司研究院 | 视频数据的处理方法、装置及网络侧设备 |
| CN115052187A (zh) * | 2022-04-26 | 2022-09-13 | 复旦大学 | 一种基于在线训练的超分辨率直播系统 |
| CN115134632A (zh) * | 2021-03-25 | 2022-09-30 | 中国移动通信集团安徽有限公司 | 视频码率控制方法、设备、介质及内容分发网络cdn系统 |
| CN115209189A (zh) * | 2022-09-15 | 2022-10-18 | 广州迈聆信息科技有限公司 | 一种视频流传输方法、系统、服务器及存储介质 |
-
2023
- 2023-05-10 CN CN202310522165.4A patent/CN116634194B/zh active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103561279A (zh) * | 2013-10-10 | 2014-02-05 | 中兴通讯股份有限公司 | 一种多媒体文件播放的方法、系统及云转码服务设备 |
| CN105163134A (zh) * | 2015-08-03 | 2015-12-16 | 腾讯科技（深圳）有限公司 | 直播视频的视频编码参数设置方法、装置及视频编码设备 |
| CN108024126A (zh) * | 2017-11-28 | 2018-05-11 | 北京潘达互娱科技有限公司 | 网络直播视频调整方法、装置、电子设备和存储介质 |
| CN114598853A (zh) * | 2020-11-20 | 2022-06-07 | 中国移动通信有限公司研究院 | 视频数据的处理方法、装置及网络侧设备 |
| CN115134632A (zh) * | 2021-03-25 | 2022-09-30 | 中国移动通信集团安徽有限公司 | 视频码率控制方法、设备、介质及内容分发网络cdn系统 |
| CN113115067A (zh) * | 2021-04-19 | 2021-07-13 | 脸萌有限公司 | 直播系统、视频处理方法及相关装置 |
| CN115052187A (zh) * | 2022-04-26 | 2022-09-13 | 复旦大学 | 一种基于在线训练的超分辨率直播系统 |
| CN115209189A (zh) * | 2022-09-15 | 2022-10-18 | 广州迈聆信息科技有限公司 | 一种视频流传输方法、系统、服务器及存储介质 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN118118709A (zh) * | 2024-01-18 | 2024-05-31 | 常州恒安智能科技有限公司 | 一种基于ip网络的数字视频信息传输方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116634194B (zh) | 2024-05-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10419787B2 (en) | Dynamic programming across multiple streams | |
| US10764623B2 (en) | Method and system for media adaption | |
| CN103561279B (zh) | 一种多媒体文件播放的方法、系统及云转码服务设备 | |
| KR101467430B1 (ko) | 클라우드 컴퓨팅 기반 어플리케이션 제공 방법 및 시스템 | |
| CN110460871B (zh) | 直播视频的生成方法、装置、系统及设备 | |
| JP5978219B2 (ja) | ネットワークサービスのための体感品質管理のための方法および装置 | |
| JP5147950B2 (ja) | 可変帯域幅のチャンネルを介してサイマル放送を行う装置および方法 | |
| US11277620B1 (en) | Adaptive transcoding of profile ladder for videos | |
| US20130185353A1 (en) | Method, server and terminal for generating a composite view from multiple content items | |
| CN116634194B (zh) | 视频直播方法、视频直播装置、存储介质及电子设备 | |
| WO2020220902A1 (zh) | 视频资源的传输参数分发方法及装置 | |
| US20150074733A1 (en) | Multi-format distribution of content | |
| CN202799004U (zh) | 一种视频播放终端及系统 | |
| KR20180029055A (ko) | 하이퍼텍스트 전송 프로토콜을 통한 품질 인식 적응 스트리밍을 위한 방법 | |
| KR101547679B1 (ko) | 품질 통계의 수집 방법 및 품질 통계의 수집의 대응하는 관리 방법 | |
| CN101523908A (zh) | 多媒体管理 | |
| CN111510734B (zh) | 一种cdn调度方法、装置、存储介质及设备 | |
| CN103986945A (zh) | 一种混合网络系统、频道内容回看方法与混合机顶盒 | |
| CN105681139A (zh) | 用于传输自适应调整的文件的设备和方法 | |
| CN110233844A (zh) | 一种多媒体直播方法、装置、设备及介质 | |
| CN105430510A (zh) | 一种视频点播方法、网关、智能终端及视频点播系统 | |
| CN112672155B (zh) | 一种基于共享类型判别的桌面共享方法、装置及存储介质 | |
| EP4171037A1 (en) | Dynamic parameter adjustment for adaptive bitrate algorithm | |
| CN107592555A (zh) | 一种动态获取视频数据的方法、装置及系统 | |
| US11178206B2 (en) | Method for managing progressive and adaptive streaming of digital content by a multimedia stream player terminal connected to a communication network, and associated management device, multimedia stream player terminal and computer program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |