CN111447457A - 直播视频处理方法、装置及存储介质 - Google Patents
直播视频处理方法、装置及存储介质 Download PDFInfo
- Publication number
- CN111447457A CN111447457A CN202010216449.7A CN202010216449A CN111447457A CN 111447457 A CN111447457 A CN 111447457A CN 202010216449 A CN202010216449 A CN 202010216449A CN 111447457 A CN111447457 A CN 111447457A
- Authority
- CN
- China
- Prior art keywords
- live
- visual angle
- slice
- video
- view
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 31
- 230000000007 visual effect Effects 0.000 claims abstract description 147
- 238000000034 method Methods 0.000 claims description 20
- 230000004044 response Effects 0.000 claims description 9
- 238000004590 computer program Methods 0.000 claims description 6
- 239000002699 waste material Substances 0.000 abstract description 10
- 230000005540 biological transmission Effects 0.000 abstract description 4
- 230000007704 transition Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
- H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明实施例涉及视频处理技术领域,公开了一种直播视频处理方法,包括:获取各个视角的直播源视频流;根据各个视角的直播源视频流得到各个视角的待下载视频切片;接收播放装置的直播观看请求,其中,直播观看请求包括:第一直播主视角;响应于直播观看请求,将第一直播主视角的待下载视频切片、以及与第一直播主视角相邻的至少一个旁视角的待下载视频切片发送至播放装置。本发明实施方式提供的直播视频处理方法、装置及存储介质,能够降低全景视频传输时的带宽浪费。
Description
技术领域
本发明实施例涉及视频处理技术领域,特别涉及一种直播视频处理方法、装置及存储介质。
背景技术
随着直播的普及,一些新的业务体验也开始逐步的推广,其中360度全景视频直播已经受到了大量用户的欢迎,因为这种直播方式允许用户自行选择观看角度,用户的参与感得到了很大的提升。
现有360度全景视频直播的方案通常如下:首先围绕直播现场周围部署N台(N一般大于4)摄像机,确保摄像机能将直播现场360度覆盖,并且所有摄像机的光轴在同一个平面。N台摄像机拍摄得到N路视频流后输入到编码器,由编码器完成视频编码并且在导播台完成N路视频流拼接,生成360度全景视频流下发到播放装置,由播放装置进行解码播放。在播放时,用户可以通过在播放装置选择想要观看的视角。
然而,发明人发现现有技术中至少存在如下问题:上述将N路视频流拼接成360度全景视频流后,直接下发到播放装置解码播放,但播放装置在播放时一般同时最多展示2个视角的视频流,因此将N路视频流拼接成360度全景视频流后发送至播放装置,会造成视频传输时的带宽浪费。
发明内容
本发明实施方式的目的在于提供一种直播视频处理方法、装置及存储介质,能够降低全景视频传输时的带宽浪费。
为解决上述技术问题,本发明的实施方式提供了一种直播视频处理方法,包括:获取各个视角的直播源视频流;根据各个视角的直播源视频流得到各个视角的待下载视频切片;接收播放装置的直播观看请求,其中,直播观看请求包括:第一直播主视角;响应于直播观看请求,将第一直播主视角的待下载视频切片、以及与第一直播主视角相邻的至少一个旁视角的待下载视频切片发送至播放装置。
本发明的实施方式还提供了一种直播视频处理装置,包括:至少一个处理器;以及,与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行上述直播视频处理方法或直播视频播放方法。
本发明的实施方式还提供了一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现上述直播视频处理方法或直播视频播放方法。
本发明实施方式相对于现有技术而言,提供了一种直播视频处理方法,获取直播现场各个视角的直播源视频流,根据各个视角的直播源视频流得到各个视角的待下载视频切片,从而在接收到播放装置的直播观看请求时,响应于直播观看请求将第一直播主视角的待下载视频切片,以及与第一直播主视角相邻的至少一个旁视角的待下载视频切片发送至播放装置,由于现有技术中将所有视角的视频流拼接后传输至播放装置,播放装置一次最多展示两个视角的视频流,从而造成带宽浪费,而本实施方式中将用户请求的第一直播主视角的视频切片、以及与第一直播主视角相邻的至少一个旁视角的视频切片传输至播放装置,可由播放装置将第一直播主视角的视频切片与至少一个旁视角的视频切片拼接后播放,从而避免将多个视角拼接后的视频切片传输至播放装置所带来的带宽浪费。
另外,待下载视频切片包括:第一码率切片以及第二码率切片,且第一码率切片的码率高于第二码率切片的码率;将第一直播主视角的待下载视频切片、以及与第一直播主视角相邻的至少一个旁视角的待下载视频切片发送至播放装置,包括:将第一直播主视角的第一码率切片、以及与第一直播主视角相邻的至少一个旁视角的第二码率切片发送至播放装置。
另外,在将第一直播主视角的第一码率切片、以及与第一直播主视角相邻的至少一个旁视角的第二码率切片发送至播放装置之后,还包括:接收播放装置的视角切换请求,其中,视角切换请求包括切入主视角;响应于视角切换请求,将切入主视角的第一码率切片发送至播放装置。该方案将切入主视角的第一码率切片发送至播放装置,由播放装置来播放切入主视角的第一码率切片,从而保障了切换后直播画面的清晰度,提升用户的观看体验。
另外,响应于视角切换请求,将切入主视角的第一码率切片发送至播放装置,包括:响应于视角切换请求确定切入主视角是否包括第一直播主视角;若包括第一直播主视角,则确定切入主视角包括第一直播主视角与第二直播主视角;将第一直播主视角的第一码率切片、第二直播主视角的第一码率切片发送至播放装置,以使播放装置将第一直播主视角的待下载视频切片与第二直播主视角的待下载视频切片拼接后播放。该方案由于第一直播主视角的待下载视频切片与第二直播主视角的待下载视频切片均为第一码率切片,从而使得视角切换后仍能够保障用户的观看体验。
另外,在确定切入主视角包括第一直播主视角与第二直播主视角之后,还包括:将与第一直播主视角相邻的旁视角的第二码率切片、及与第二直播主视角相邻的旁视角的第二码率切片发送至播放装置,以使播放装置将第一直播主视角相邻的旁视角的待下载视频切片、第一直播主视角的待下载视频切片、第二直播主视角的待下载视频切片、及与第二直播主视角相邻的旁视角的待下载视频切片拼接后播放。该方案中通过第一码率视频切片和第二码率视频切片的结合,在全景直播视频在视角切换过渡时,保证视频播放连续性,并进一步降低了对带宽的无谓占用。
另外,在响应于视角切换请求确定切入主视角是否包括第一直播主视角之后,还包括:若不包括第一直播主视角,则确定切入主视角包括第二直播主视角;将第二直播主视角的第一码率切片发送至播放装置,以使播放装置播放第二直播主视角的第一码率切片。
另外,在确定切入主视角包括第二直播主视角之后,还包括:将第一直播主视角的第二码率切片、及与第二直播主视角相邻的旁视角的第二码率切片发送至播放装置,以使播放装置将第一直播主视角的待下载视频切片、第二直播主视角的待下载视频切片、及与第二直播主视角相邻的旁视角的待下载视频切片拼接后播放。该方案中通过第一码率视频切片和第二码率视频切片的结合,在全景直播视频在视角切换过渡时,保证视频播放连续性,并进一步降低了对带宽的无谓占用。
另外,将第二直播主视角的第一码率切片发送至播放装置之后,还包括:删除第一直播主视角的待下载视频切片的第一码率视频切片。该方案删除掉删除第一直播主视角的待下载视频切片的第一码率视频切片,以释放播放装置的内存空间。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明,这些示例性说明并不构成对实施例的限定,附图中具有相同参考数字标号的元件表示为类似的元件,除非有特别申明,附图中的图不构成比例限制。
图1是根据本发明第一实施方式的直播视频处理方法的流程示意图;
图2是根据本发明第一实施方式的多个视角的示意图;
图3是根据本发明第二实施方式的直播视频处理方法的流程示意图;
图4是根据本发明第三实施方式的直播视频处理装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的各实施方式进行详细的阐述。然而,本领域的普通技术人员可以理解,在本发明各实施方式中,为了使读者更好地理解本申请而提出了许多技术细节。但是,即使没有这些技术细节和基于以下各实施方式的种种变化和修改,也可以实现本申请所要求保护的技术方案。
现有技术中在进行赛事直播时,例如一场篮球比赛在比赛现场安装有6台摄像机进行拍摄,如果每台摄像机拍摄的直播源视频流的流分辨率为1080P,则每路直播源视频流的码率大概为5Mbps左右,那么将6个直播视角的源视频流拼接后得到的360度全景视频码流为5*6≈30Mbps,但是用户实际观看的画面最多涉及到2个直播视角,也就是说有4台摄像机的4个直播视角的带宽流量被浪费了,浪费了24Mbps,浪费率为66%。随着4K超高清直播的普及,单路4K摄像机直播视频流出流为50Mbps左右,按照上述方式计算,会浪费200Mbps的带宽流量。
针对于此,本发明的第一实施方式涉及一种直播视频处理方法,本实施方式的核心在于,获取直播现场各个视角的直播源视频流,根据各个视角的直播源视频流得到各个视角的待下载视频切片,从而在接收到播放装置的直播观看请求时,响应于直播观看请求将第一直播主视角的待下载视频切片,以及与第一直播主视角相邻的至少一个旁视角的待下载视频切片发送至播放装置,由于现有技术中将所有视角的视频流拼接后传输至播放装置,播放装置一次最多展示两个视角的视频流,从而造成带宽浪费,而本实施方式中将用户请求的第一直播主视角的视频切片、以及与第一直播主视角相邻的至少一个旁视角的视频切片传输至播放装置,可由播放装置将第一直播主视角的视频切片与至少一个旁视角的视频切片拼接后播放,从而避免将多个视角拼接后的视频切片传输至播放装置所带来的带宽浪费。
下面对本实施方式的直播视频处理方法的实现细节进行具体的说明,以下内容仅为方便理解提供的实现细节,并非实施本方案的必须。
本实施方式中的直播视频处理方法的流程示意图如图1所示:
步骤101:获取各个视角的直播源视频流。
具体地说,在直播场地通常设置有围绕直播场地的多台摄像机,如图2所示直播现场设置有6台摄像机,6台摄像机的视角分别为视角A、B、C、D、E和F。每个视角的摄像机分别能够获取该视角的直播画面,并将该直播画面的源直播视频流输入到视频处理装置,由视频处理装置的编码器来进行下一步的处理。
步骤102:根据各个视角的直播源视频流得到各个视角的待下载视频切片,待下载视频切片包括:第一码率切片以及第二码率切片,且第一码率切片的码率高于第二码率切片的码率。
具体地说,视频处理装置在接收到各个视角的直播源视频流后,利用编码器对各个视角的直播源视频流进行切片封装得到待下载视频切片,每个待下载视频切片包括:第一码率切片和第二码率切片,且第一码率切片的码率高于第二码率切片的码率,即第一码率视频切片为高码率视频切片,第二码率视频切片为低码率视频切片,第一码率视频切片的带宽占用可为第二码率视频切片的3~5倍。值得说明的是,本实施方式中各个视角的视频切片的时间是严格对齐的,且本实施方式中对各个视角的直播源视频流分别进行视频切片的封装,而不是对多路视频流进行拼接后再进行视频切片的封装。
步骤103:接收播放装置的直播观看请求。
具体地说,播放装置在开启观看全景直播视频时,会先确定一个第一直播主视角,并依据该第一直播主视角生成直播观看请求,将直播观看请求发送至视频处理装置,使得视频处理装置能够得知播放装置所请求的第一直播主视角。
步骤104:响应于直播观看请求,将第一直播主视角的第一码率切片、以及与第一直播主视角相邻的至少一个旁视角的第二码率切片发送至播放装置。
具体地说,视频处理装置在接收到播放装置的直播观看请求时,根据直播观看请求确定全景直播视频的第一直播主视角(视角A)、以及与该第一直播主视角(视角A)相邻的至少一个旁视角(例如:视角B和/或视角C),并将第一直播主视角(视角A)的待下载视频切片、以及与第一直播主视角(视角A)相邻的至少一个旁视角(例如:视角B和/或视角C)的待下载视频切片发送至播放装置,播放装置在接收到第一直播主视角(视角A)的待下载视频切片后,播放第一直播主视角(视角A)的待下载视频切片,用户即可在播放装置的显示界面观看到第一直播主视角(视角A)的直播画面。
播放装置还用于在视角切换时,能够及时将第一直播主视角(视角A)的待下载视频切片与至少一个旁视角(例如:视角B和/或视角C)的待下载视频切片进行拼接后播放,从而实现在视角切换时的过渡,且避免将各个视角的视频流拼接后得到的视频切片传输至播放装置所带来的带宽浪费,能够节省大约50%以上的网络带宽。且本实施方式中第一直播主视角(视角A)的待下载视频切片为第一码率视频切片,与第一直播主视角(视角A)相邻的至少一个旁视角(例如:视角B和/或视角C)的待下载视频切片为第二码率视频切片,第一码率切片的码率高于第二码率切片的码率,因此通过第一码率视频切片和第二码率视频切片的结合,进一步降低了对带宽的无谓占用,同时第一直播主视角的当前下载视频区切片为高码率,也可保障用户的观看体验。
与现有技术相比,本发明实施方式提供了一种直播视频处理方法,由于现有技术中将所有视角的视频流拼接后传输至播放装置,但播放装置一次最多展示两个视角的视频流,从而造成带宽浪费,而本实施方式中将用户请求的第一直播主视角的视频切片、以及与第一直播主视角相邻的至少一个旁视角的视频切片传输至播放装置,可由播放装置将第一直播主视角的视频切片与至少一个旁视角的视频切片拼接后播放,从而避免将各个视角拼接后的视频切片传输至播放装置所带来的带宽浪费。
本发明第二实施方式涉及一种直播视频处理方法,第二实施方式是对第一实施方式的改进,主要改进之处在于,在接收到视角切换请求时,确定切入主视角,并将切入主视角的第一码率切片发送至播放装置,由播放装置来播放切入主视角的第一码率切片,从而保障了切换后直播画面的清晰度,提升用户的观看体验。
本实施方式中的直播视频处理方法的流程示意图如图3所示,具体包括:
步骤201:获取各个视角的直播源视频流。
步骤202:根据各个视角的直播源视频流得到各个视角的待下载视频切片,待下载视频切片包括:第一码率切片以及第二码率切片,且第一码率切片的码率高于第二码率切片的码率。
步骤203:接收播放装置的直播观看请求。
步骤204:响应于直播观看请求,将第一直播主视角的第一码率切片、以及与第一直播主视角相邻的至少一个旁视角的第二码率切片发送至播放装置。
上述步骤201至步骤204与第一实施方式的步骤101至步骤104大致相同,本实施方式不再赘述。
步骤205:接收播放装置的视角切换请求。
具体地说,用户在播放装置观看第一直播主视角(视角A)的视频流时,若需要切换切入主视角,则可通过滑动当前直播画面来进行视角切换,播放装置在检测到用户的滑动操作时,确定切入主视角(即与第一直播主视角相邻的其中一个旁视角),并根据切入主视角生成视角切换请求,将视角切换请求发送至视频处理装置。
步骤206:响应于视角切换请求确定切入主视角是否包括第一直播主视角。若是,则进入步骤207;若否,则进入步骤209。
具体地说,用户在进行视角切换后,会存在两种情况,一种为重新确定的切入主视角不包括第一直播主视角(视角A),包括第二直播主视角(视角B);另一种为重新确定的切入主视角既包括第一直播主视角(视角A),也包括第二直播主视角(视角B)。若切入主视角包括第一直播主视角(视角A),则进入步骤207:确定切入主视角包括第一直播主视角(视角A)与第二直播主视角(视角B)。若切入主视角不包括第一直播主视角(视角A),则进入步骤209:确定切入主视角包括第二直播主视角(视角B)。
步骤207:确定切入主视角包括第一直播主视角与第二直播主视角。
步骤208:将第一直播主视角的第一码率切片、第二直播主视角的第一码率切片发送至播放装置。
针对上述步骤207和208,具体地说,响应于视角切换请求确定切入主视角包括:第一直播主视角(视角A)与第二直播主视角(视角B),即就是说切换到两个直播视角A和视角B的交界处,此时,为保证全景直播视频在视角切换过渡时直播视频播放的连续性,首先,需由播放装置将当前正在播放的直播视角(视角A)的第一码率切片、与第二直播主视角(视角B)的第二码率切片(与当前正在播放的直播视角的第一码率切片的时间相同)拼接后播放。之后,为保证下一视频切片的观看清晰度,由视频处理装置将第一直播主视角(视角A)的待下载视频切片的第一码率切片、第二直播主视角(视角B)的待下载视频切片的第一码率切片发送至播放装置,由播放装置将第一直播主视角(视角A)的待下载视频切片、与第二直播主视角(视角B)的待下载视频切片拼接后播放,由于第一直播主视角(视角A)的待下载视频切片与第二直播主视角(视角B)的待下载视频切片均为第一码率切片,即高码率切片,从而使得视角切换后仍能够保障用户的观看体验。
进一步地,在确定切入主视角包括第一直播主视角与第二直播主视角之后,还包括:将与第一直播主视角相邻的旁视角的第二码率切片、及与第二直播主视角相邻的旁视角的第二码率切片发送至播放装置,以使播放装置将第一直播主视角相邻的旁视角的待下载视频切片、第一直播主视角的待下载视频切片、第二直播主视角的待下载视频切片、及与第二直播主视角相邻的旁视角的待下载视频切片拼接后播放。
具体地说,在确定切入主视角包括第一直播主视角(视角A)与第二直播主视角(视角B)之后,还需确定与第一直播主视角(视角A)相邻的另一旁视角(视角C),以及与第二直播主视角(视角B)相邻的旁视角(视角D)。之后,视频处理装置将与第一直播主视角(视角A)相邻的旁视角(视角C)的待下载视频切片、及与第二直播主视角(视角B)相邻的旁视角(视角D)的待下载视频切片发送至播放装置,从而在用户进行视角切换时,由播放装置将第一直播主视角(视角A)相邻的旁视角的待下载视频切片、第一直播主视角(视角A)的待下载视频切片、第二直播主视角(视角B)的待下载视频切片、及与第二直播主视角(视角B)相邻的旁视角的待下载视频切片拼接后播放,从而实现全景直播视频在视角切换时的过渡。
本实施方式中第一直播主视角(视角A)的待下载视频切片和第二直播主视角(视角B)的待下载视频切片均为第一码率切片;而与第一直播主视角(视角A)相邻的旁视角(视角C)的待下载视频切片、及与第二直播主视角(视角B)相邻的旁视角(视角D)的待下载视频切片均为第二码率视频切片,第一码率切片的码率高于第二码率切片的码率,因此通过第一码率视频切片和第二码率视频切片的结合,在全景直播视频在视角切换过渡时,进一步降低了对带宽的无谓占用。
步骤209:确定切入主视角包括第二直播主视角。
步骤210:将第二直播主视角的第一码率切片发送至播放装置。
针对上述步骤209和210具体地说,响应于视角切换请求确定切入主视角不包括第一直播主视角(视角A),也就是说,直播画面完全切出主视角,假设切入主视角包括第二直播主视角(视角B)。此时,为保证全景直播视频在视角切换过渡时直播视频播放的连续性,首先,需由播放装置播放第二直播主视角(视角B)的第二码率切片;之后,为保证下一视频切片的观看清晰度,由视频处理装置将第二直播主视角(视角B)的第一码率切片发送至播放装置,由于第二直播主视角(视角B)的待下载视频切片均为第一码率切片,即高码率切片,从而保障来用户的观看体验。
进一步地,在确定切入主视角包括第二直播主视角之后,还包括:将第一直播主视角的第二码率切片、及与第二直播主视角相邻的旁视角的第二码率切片发送至播放装置,以使播放装置将第一直播主视角的待下载视频切片、第二直播主视角的待下载视频切片、及与第二直播主视角相邻的旁视角的待下载视频切片拼接后播放。
具体地说,在确定切入主视角包括第二直播主视角(视角B)之后,还需确定与第二直播主视角(视角B)相邻的旁视角(视角D),并将与第二直播主视角(视角B)相邻的旁视角(视角D)的待下载视频切片、以及第二直播主视角(视角B)相邻的旁视角的待下载视频切片发送至播放装置,从而在用户进行视角切换时,由播放装置在确定切换后的视角后,及时在播放装置进行视频切片的拼接播放,从而实现直播视频的全景观看。
且本实施方式中第二直播主视角(视角B)的待下载视频切片为第一码率切片,第一直播主视角(视角A)的待下载视频切片、以及与第二直播主视角(视角B)相邻的旁视角(视角D)的待下载视频切片均为第二码率切片,从而通过第一码率视频切片和第二码率视频切片的结合,在全景直播视频在视角切换过渡时,进一步降低了对带宽的无谓占用,同时切入主视角(第二直播主视角)的待下载视频切片为高码率,也可保障用户的观看体验。
进一步地,在将第一直播主视角的第二码率切片发送至播放装置之后,还包括:删除第一直播主视角的待下载视频切片的第一码率视频切片。
具体地说,若确定切入主视角仅包括第二直播主视角(视角B),会将第一直播主视角的第二码率切片发送至播放装置,以此来实现全景直播视频在视角切换过渡,此时,第一直播主视角(视角A)的第二码率切片则没有用处,可删除掉以释放播放装置的内存空间。
与现有技术相比,本实施方式中提供了一种直播视频处理方法,在接收到视角切换请求时,确定切入主视角,并将切入主视角的第一码率切片发送至播放装置,由播放装置来播放切入主视角的第一码率切片,从而保障了切换后直播画面的清晰度,提升用户的观看体验。
上面各种方法的步骤划分,只是为了描述清楚,实现时可以合并为一个步骤或者对某些步骤进行拆分,分解为多个步骤,只要包括相同的逻辑关系,都在本专利的保护范围内;对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计,但不改变其算法和流程的核心设计都在该专利的保护范围内。
本发明第三实施方式涉及一种直播视频处理装置,如图4所示,包括至少一个处理器301;以及,与至少一个处理器301通信连接的存储器302;其中,存储器302存储有可被至少一个处理器301执行的指令,指令被至少一个处理器301执行,以使至少一个处理器301能够执行上述的直播视频处理方法、或者直播视频播放方法。
其中,存储器302和处理器301采用总线方式连接,总线可以包括任意数量的互联的总线和桥,总线将一个或多个处理器301和存储器302的各种电路连接在一起。总线还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路连接在一起,这些都是本领域所公知的,因此,本文不再对其进行进一步描述。总线接口在总线和收发机之间提供接口。收发机可以是一个元件,也可以是多个元件,比如多个接收器和发送器,提供用于在传输介质上与各种其他装置通信的单元。经处理器301处理的数据通过天线在无线介质上进行传输,进一步,天线还接收数据并将数据传送给处理器301。
处理器301负责管理总线和通常的处理,还可以提供各种功能,包括定时、外围接口、电压调节、电源管理以及其他控制功能。而存储器302可以被用于存储处理器301在执行操作时所使用的数据。
本发明的实施方式还提供了一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现上述直播视频处理方法、或者直播视频播放方法。
即,本领域技术人员可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域的普通技术人员可以理解,上述各实施方式是实现本发明的具体实施例,而在实际应用中,可以在形式上和细节上对其作各种改变,而不偏离本发明的精神和范围。
Claims (10)
1.一种直播视频处理方法,其特征在于,包括:
获取各个视角的直播源视频流;
根据所述各个视角的直播源视频流得到所述各个视角的待下载视频切片;
接收播放装置的直播观看请求,其中,所述直播观看请求包括:第一直播主视角;
响应于所述直播观看请求,将所述第一直播主视角的待下载视频切片、以及与所述第一直播主视角相邻的至少一个旁视角的待下载视频切片发送至所述播放装置。
2.根据权利要求1所述的直播视频处理方法,其特征在于,所述待下载视频切片包括:第一码率切片以及第二码率切片,且所述第一码率切片的码率高于所述第二码率切片的码率;
所述将所述第一直播主视角的待下载视频切片、以及与所述第一直播主视角相邻的至少一个旁视角的待下载视频切片发送至所述播放装置,包括:
将所述第一直播主视角的第一码率切片、以及与所述第一直播主视角相邻的至少一个旁视角的第二码率切片发送至所述播放装置。
3.根据权利要求2所述的直播视频处理方法,其特征在于,在所述将所述第一直播主视角的第一码率切片、以及与所述第一直播主视角相邻的至少一个旁视角的第二码率切片发送至所述播放装置之后,还包括:
接收播放装置的视角切换请求,其中,所述视角切换请求包括切入主视角;
响应于所述视角切换请求,将所述切入主视角的第一码率切片发送至所述播放装置。
4.根据权利要求3所述的直播视频处理方法,其特征在于,所述响应于所述视角切换请求,将所述切入主视角的第一码率切片发送至所述播放装置,包括:
响应于所述视角切换请求确定所述切入主视角是否包括所述第一直播主视角;
若包括所述第一直播主视角,则确定所述切入主视角包括所述第一直播主视角与第二直播主视角;
将所述第一直播主视角的第一码率切片、所述第二直播主视角的第一码率切片发送至所述播放装置,以使所述播放装置将所述第一直播主视角的待下载视频切片与所述第二直播主视角的待下载视频切片拼接后播放。
5.根据权利要求4所述的直播视频处理方法,其特征在于,在所述确定所述切入主视角包括所述第一直播主视角与第二直播主视角之后,还包括:
将与所述第一直播主视角相邻的旁视角的第二码率切片、及与所述第二直播主视角相邻的旁视角的第二码率切片发送至所述播放装置,以使所述播放装置将所述第一直播主视角相邻的旁视角的待下载视频切片、所述第一直播主视角的待下载视频切片、所述第二直播主视角的待下载视频切片、及与所述第二直播主视角相邻的旁视角的待下载视频切片拼接后播放。
6.根据权利要求4所述的直播视频处理方法,其特征在于,在所述响应于所述视角切换请求确定切入主视角是否包括所述第一直播主视角之后,还包括:
若不包括所述第一直播主视角,则确定所述切入主视角包括第二直播主视角;
将第二直播主视角的第一码率切片发送至所述播放装置,以使播放装置播放所述第二直播主视角的第一码率切片。
7.根据权利要求6所述的直播视频处理方法,其特征在于,在所述确定所述切入主视角包括第二直播主视角之后,还包括:
将所述第一直播主视角的第二码率切片、及与所述第二直播主视角相邻的旁视角的第二码率切片发送至所述播放装置,以使所述播放装置将所述第一直播主视角的待下载视频切片、所述第二直播主视角的待下载视频切片、及所述与所述第二直播主视角相邻的旁视角的待下载视频切片拼接后播放。
8.根据权利要求7所述的直播视频处理方法,其特征在于,在将所述第一直播主视角的第二码率切片发送至播放装置之后,还包括:
删除所述第一直播主视角的第一码率视频切片。
9.一种直播视频处理装置,其特征在于,包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1至8中任一所述的直播视频处理方法。
10.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至8中任一所述的直播视频处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010216449.7A CN111447457A (zh) | 2020-03-25 | 2020-03-25 | 直播视频处理方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010216449.7A CN111447457A (zh) | 2020-03-25 | 2020-03-25 | 直播视频处理方法、装置及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111447457A true CN111447457A (zh) | 2020-07-24 |
Family
ID=71652438
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010216449.7A Pending CN111447457A (zh) | 2020-03-25 | 2020-03-25 | 直播视频处理方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111447457A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114866787A (zh) * | 2022-07-04 | 2022-08-05 | 深圳市必提教育科技有限公司 | 一种直播实现方法及系统 |
CN115190321A (zh) * | 2022-05-13 | 2022-10-14 | 广州博冠信息科技有限公司 | 直播间的切换方法、装置和电子设备 |
WO2022222533A1 (zh) * | 2021-04-22 | 2022-10-27 | 华为技术有限公司 | 视频播放方法、装置及系统、计算机可读存储介质 |
WO2024082561A1 (zh) * | 2022-10-20 | 2024-04-25 | 腾讯科技(深圳)有限公司 | 视频处理方法、装置、计算机、可读存储介质及程序产品 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106454321A (zh) * | 2016-10-26 | 2017-02-22 | 深圳市道通智能航空技术有限公司 | 全景视频的处理方法、装置及系统 |
CN106612426A (zh) * | 2015-10-26 | 2017-05-03 | 华为技术有限公司 | 一种多视点视频传输方法及装置 |
CN109218848A (zh) * | 2017-07-06 | 2019-01-15 | 阿里巴巴集团控股有限公司 | 视频流的视角切换方法、装置、设备和计算机存储介质 |
CN109587579A (zh) * | 2018-11-09 | 2019-04-05 | 深圳威尔视觉传媒有限公司 | 基于cdn的多视角码流传输方法、装置、设备和存储介质 |
-
2020
- 2020-03-25 CN CN202010216449.7A patent/CN111447457A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106612426A (zh) * | 2015-10-26 | 2017-05-03 | 华为技术有限公司 | 一种多视点视频传输方法及装置 |
CN106454321A (zh) * | 2016-10-26 | 2017-02-22 | 深圳市道通智能航空技术有限公司 | 全景视频的处理方法、装置及系统 |
CN109218848A (zh) * | 2017-07-06 | 2019-01-15 | 阿里巴巴集团控股有限公司 | 视频流的视角切换方法、装置、设备和计算机存储介质 |
CN109587579A (zh) * | 2018-11-09 | 2019-04-05 | 深圳威尔视觉传媒有限公司 | 基于cdn的多视角码流传输方法、装置、设备和存储介质 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022222533A1 (zh) * | 2021-04-22 | 2022-10-27 | 华为技术有限公司 | 视频播放方法、装置及系统、计算机可读存储介质 |
CN115190321A (zh) * | 2022-05-13 | 2022-10-14 | 广州博冠信息科技有限公司 | 直播间的切换方法、装置和电子设备 |
CN115190321B (zh) * | 2022-05-13 | 2024-06-04 | 广州博冠信息科技有限公司 | 直播间的切换方法、装置和电子设备 |
CN114866787A (zh) * | 2022-07-04 | 2022-08-05 | 深圳市必提教育科技有限公司 | 一种直播实现方法及系统 |
CN114866787B (zh) * | 2022-07-04 | 2022-09-23 | 深圳市必提教育科技有限公司 | 一种直播实现方法及系统 |
WO2024082561A1 (zh) * | 2022-10-20 | 2024-04-25 | 腾讯科技(深圳)有限公司 | 视频处理方法、装置、计算机、可读存储介质及程序产品 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111447457A (zh) | 直播视频处理方法、装置及存储介质 | |
US20240107124A1 (en) | Switched multicast video streaming | |
US10728594B2 (en) | Method and apparatus for transmitting data of mobile terminal | |
EP0934660B1 (en) | Method and apparatus for masking the effects of latency in an information distribution system | |
WO2020228482A1 (zh) | 视频处理方法、装置及系统 | |
US9473549B2 (en) | Method of playing internet video and related electronic device | |
JP2001510000A (ja) | Mpegストリームのシームレス結合のためのビデオバッファ | |
CN107566918A (zh) | 一种视频分发场景下的低延时取流秒开方法 | |
CN112752109B (zh) | 视频播放控制方法和系统 | |
KR101539812B1 (ko) | 동화상 데이터의 배신 방법 | |
US8432941B2 (en) | Method and apparatus for selective caching of burst stream transmission | |
US20080229380A1 (en) | Method and apparatus for transmitting and receiving broadcasting information using reserved channels | |
US7403563B2 (en) | Image decoding method and apparatus, and television receiver utilizing the same | |
JP6238428B2 (ja) | 受信機および放送装置 | |
US20100146540A1 (en) | Receiving device, communications system, receiving device control method and program | |
KR20150008797A (ko) | 방송 콘텐츠 제공 방법 및 장치 | |
WO2008115032A1 (en) | Method of providing digital tv application and computer-readable medium having thereon program performing function embodying the same | |
JP7469545B1 (ja) | 情報処理装置、情報処理方法、及び情報処理システム | |
CN111935361B (zh) | 视频彩铃交互方法、装置、电子设备及存储介质 | |
CN111818336B (zh) | 视频处理方法、装置、存储介质以及通信装置 | |
US20230239421A1 (en) | System for Remote Production of Audiovisual Contents | |
JP4735596B2 (ja) | 受信装置および受信方法 | |
JP2005197829A (ja) | データ受信装置、及び携帯端末装置 | |
CN117119220A (zh) | 视频转场方法、装置、系统、电子设备及存储介质 | |
CN113038211A (zh) | 车载移动电视播放设备的播放处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200724 |