CN109168078B - 一种视频清晰度切换方法及装置 - Google Patents
一种视频清晰度切换方法及装置 Download PDFInfo
- Publication number
- CN109168078B CN109168078B CN201811049698.0A CN201811049698A CN109168078B CN 109168078 B CN109168078 B CN 109168078B CN 201811049698 A CN201811049698 A CN 201811049698A CN 109168078 B CN109168078 B CN 109168078B
- Authority
- CN
- China
- Prior art keywords
- switching
- video
- data
- key frame
- video stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
Abstract
本发明公开一种视频清晰度切换方法及装置，目的是实现视频清晰度的无缝切换，使得在切换清晰度时视频播放不会中断，提高用户的观看体验。该方法包括：获取视频码率的切换指令，下载并解析切换视频流；基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳；对切换视频流解封装处理，得到切换视频缓存数据；直至当前视频流播放到切换关键帧时，调取切换视频缓存数据从切换关键帧处解码播放。该装置包括上述技术方案所提的方法。
Description
技术领域
本发明涉及视频技术领域，尤其涉及一种视频清晰度切换方法及装置。
背景技术
随着网络视频资源井喷式增长，人们对于在线观看视频的需求日益增强，然而受限用户带宽、体验等原因，一个视频会生产多种清晰度的片源，比如普通、高清和超清，用户可以选择不同清晰度的视频播放，当用户更换不同清晰度的视频时可以称为视频清晰度的切换。
现有技术中，视频播放器在执行清晰度切换时，通常是先停止当前播放的视频，然后加载新清晰度的视频并跳转至视频终止时间进行播放，但是这种切换方式造成了视频播放的不连贯，影响用户观看体验。
发明内容
本发明的目的在于提供一种视频清晰度切换方法及装置，目的是实现视频清晰度的无缝切换，使得在切换清晰度时视频播放不会中断，提高用户的观看体验。
为了实现上述目的，本发明的一方面提供一种视频清晰度切换方法，包括：
获取视频码率的切换指令，下载并解析切换视频流；
基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳；
对切换视频流解封装处理，得到切换视频缓存数据；
直至当前视频流播放到切换关键帧时，调取切换视频缓存数据从切换关键帧处解码播放。
优选地，获取视频码率的切换指令，下载并解析切换视频流之前包括：
下载并解析当前视频流，对其解封装得到第一音频帧数据和第一视频侦数据；
分别对第一音频帧数据和第一视频侦数据解码，对应得到第一PCM格式数据和第一YUV格式数据；
接收第一PCM格式数据和第一YUV格式数据渲染播放。
具体地，基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳的方法包括：
从解析结果中获取头部文件，并提取头部文件中的关键帧信息及其对应的时间戳信息；
将关键帧信息中的距离切换指令下发时间最近、且在切换指令下发时间之后的关键帧，定义为切换关键帧；
将时间戳信息中与切换关键帧对应的时间戳定义为切换时间戳。
较佳地，对切换视频流解封装处理，得到切换视频缓存数据的方法包括：
对切换视频流解封装处理，得到切换视频缓存数据；所述切换视频缓存数据包括第二音频帧数据和第二视频帧数据。
优选地，直至当前视频流播放到切换关键帧时，调取切换视频缓存数据从切换关键帧处解码播放的方法包括：
在当前视频流播放到切换关键帧时，发送码率变更标识；
基于码率变更标识停止对当前视频流的解封装，并解码完已缓存的第一音频帧数据和第一视频帧数据；
渲染播放已解码的第一PCM格式数据和第一YUV格式数据，直至消耗完当前的缓存数据；
分别调取第二音频帧数据和第二视频帧数据进行解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后从切换关键帧处开始渲染播放。
示例性地，所述码率变更标识为Codec change。
可选地，分别调取第二音频帧数据和第二视频帧数据进行解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后从切换关键帧处渲染播放的方法包括：
调取第二音频帧数据解码得到第二PCM格式数据，以及调取第二视频帧数据解码得到第二YUV格式数据；
基于第二PCM格式数据对第二YUV格式数据做时间同步处理后从切换关键帧处开始渲染播放。
与现有技术相比，本发明提供的视频清晰度切换方法具有以下有益效果：
本发明提供的视频清晰度切换方法中，当用户执行视频码率的切换操作时，视频播放器的播控层会向播放器下发切换指令，使得播放器根据切换指令对应下载切换视频流并完成解析，以得到切换视频流的各个关键帧及对应的时间戳，进而根据切换指令的下发时间从上述关键帧中定位出切换关键帧，并记录切换关键帧对应的切换时间戳，以使切换视频流在切换关键帧处完成对当前视频流的切换。
另外，播放器会对解析后的切换视频流做持续的解封装处理，形成切换视频缓存数据以备码率切换时能够被直接解码输出播放，进而在当前视频流播放到切换关键帧时，能够直接调取切换视频的缓存数据从切换关键帧处开始解码播放，从而实现切换视频流与当前视频流的无缝切换，提高了用户的视频观看体验。
本发明的另一方面提供一种视频清晰度切换装置，包括播放器和用于控制所述播放器播放操作的播控层，其中，所述播放器包括解析模块、定位查找模块、解封装模块，所述播控层包括指令获取模块和控制模块；
所述指令获取模块用于感测用户的操作手势，获取视频码率的切换指令；
所述解析模块用于根据切换指令，下载并解析切换视频流；
所述定位查找模块用于基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳；
所述解封装模块用于对切换视频流解封装处理，得到切换视频缓存数据；
所述控制模块用于在当前视频流播放到切换关键帧时，调取切换视频缓存数据从切换关键帧处解码播放。
优选地，所述播放器还包括音频解码器、视频解码器和播放模块；
所述解析模块还用于下载并解析当前视频流，所述解封装模块还用于对当前视频流解封装得到第一音频帧数据和第一视频侦数据；
所述音频解码器用于对第一音频帧数据解码得到第一PCM格式数据；
所述视频解码器用于对第一视频帧数据解码得到第一YUV格式数据；
所述播放模块用于接收第一PCM格式数据和第一YUV格式数据渲染播放。
较佳地，所述定位查找模块包括提取单元和定位单元；
所述提取单元用于从解析结果中获取头部文件，并提取头部文件中的关键帧信息及其对应的时间戳信息；
所述定位单元用于将关键帧信息中距离切换指令下发时间最近、且在切换指令下发时间之后的关键帧，定义为切换关键帧；以及将时间戳信息中与切换关键帧对应的时间戳定义为切换时间戳。
优选地，所述控制模块包括标识发送单元、消耗控制单元、调取控制单元；
所述标识发送单元用于在当前视频流播放到切换关键帧处时，发送码率变更标识；
所述消耗控制单元用于基于码率变更标识控制所述解封装模块停止对当前视频流的解封装，使得所述音频解码器解码完已缓存的第一音频帧数据，以及所述视频解码器解码完已缓存的第一视频帧数据，直至消耗完当前的缓存数据；
所述调取控制单元用于控制所述音频解码器和所述视频解码器对应调取第二音频帧数据和第二视频帧数据解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后，从切换关键帧处开始输出至所述播放模块渲染播放。
与现有技术相比，本发明提供的视频清晰度切换装置的有益效果与上述技术方案提供的视频清晰度切换方法的有益效果相同，在此不做赘述。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本发明的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1为本发明实施例一中视频清晰度切换方法的流程示意图；
图2为本发明实施例一中视频清晰度切换对应时间戳的示例图；
图3为本发明实施例二中视频清晰度切换装置的结构框图。
附图标记：
1-播放器， 2-播控层；
11-解析模块， 12-定位查找模块；
13-解封装模块， 14-音频解码器；
15-视频解码器， 16-播放模块；
21-指令获取模块， 22-控制模块。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其它实施例，均属于本发明保护的范围。
实施例一
图1为本发明实施例一中视频清晰度切换方法的流程示意图。请参阅图1，本实施例提供一种视频清晰度切换方法，包括：
获取视频码率的切换指令，下载并解析切换视频流；基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳；对切换视频流解封装处理，得到切换视频缓存数据；直至当前视频流播放到切换关键帧时，调取切换视频缓存数据从切换关键帧处解码播放。
本实施例提供的视频清晰度切换方法中，当用户执行视频码率的切换操作时，视频播放器的播控层会向播放器下发切换指令，使得播放器根据切换指令对应下载切换视频流并完成解析，以得到切换视频流的各个关键帧及对应的时间戳，进而根据切换指令的下发时间从上述关键帧中定位出切换关键帧，并记录切换关键帧对应的切换时间戳，以使切换视频流在切换关键帧处完成对当前视频流的切换。
另外，播放器会对解析后的切换视频流做持续的解封装处理，形成切换视频缓存数据以备码率切换时能够被直接解码输出播放，进而在当前视频流播放到切换关键帧时，能够直接调取切换视频的缓存数据从切换关键帧处开始解码播放，从而实现切换视频流与当前视频流的无缝切换，提高了用户的视频观看体验。
可以补充的是，上述实施例中在获取视频码率的切换指令，下载并解析切换视频流之前包括：
下载并解析当前视频流，对其解封装得到第一音频帧数据和第一视频侦数据；分别对第一音频帧数据和第一视频侦数据解码，对应得到第一PCM格式数据和第一YUV格式数据；接收第一PCM格式数据和第一YUV格式数据渲染播放。
具体实施时，当前视频流在起播时，通过创建第一解封装模块(Mp4Demuxer1)对已下载的当前视频流解封装，得到第一音频帧数据和第一视频侦数据，然后通过音频解码器对第一视频侦数据解码得到第一PCM格式数据，以及视频解码器对第一视频侦数据解码得到第一YUV格式数据，并将第一PCM格式数据和第一YUV格式数据时间同步处理后输出至播放模块渲染播放，此时播放的码率是指用户执行码率切换操作前观看到的视频码率，也即指当前视频流内容。
上述实施例中基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳的方法包括：
从解析结果中获取头部文件，并提取头部文件中的关键帧信息及其对应的时间戳信息；将关键帧信息中的距离切换指令下发时间最近、且在切换指令下发时间之后的关键帧，定义为切换关键帧；将时间戳信息中与切换关键帧对应的时间戳定义为切换时间戳。
具体实施时，当用户点击player接口层执行码率切换操作时，播控层会向播放器下发切换指令，播放器收到切换指令时下载并解析切换视频流，从中能够提取到切换视频流的头部文件和内容文件，其中头部文件包括索引、关键帧信息和时间戳信息等，然后，基于切换指令的下发时间从关键帧信息中找到距切换指令下发时间最近、且在其之后的关键帧，并将该关键帧定义为切换关键帧，同时将时间戳信息中与切换关键帧对应的时间戳定义为切换关键帧，在当前视频流播放到切换关键帧时，会自动切换到切换视频流继续播放。
上述实施例中对切换视频流解封装处理，得到切换视频缓存数据的方法包括：对切换视频流解封装处理，得到切换视频缓存数据；所述切换视频缓存数据包括第二音频帧数据和第二视频帧数据。
具体实施时，通过创建第二解封装模块(Mp4Demuxer2)对第二视频流的解析结果进行解封装，得到第二音频帧数据和第二视频帧数据，即切换视频缓存数据。
上述实施例中直至当前视频流播放到切换关键帧时，调取切换视频缓存数据从切换关键帧处解码播放的方法包括：
在当前视频流播放到切换关键帧时，发送码率变更标识；基于码率变更标识停止对当前视频流的解封装，并解码完已缓存的第一音频帧数据和第一视频帧数据；渲染播放已解码的第一PCM格式数据和第一YUV格式数据，直至消耗完当前的缓存数据；分别调取第二音频帧数据和第二视频帧数据进行解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后从切换关键帧处开始渲染播放。例如，码率变更标识为Codec change。
以及上述实施例中分别调取第二音频帧数据和第二视频帧数据进行解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后从切换关键帧处渲染播放的方法包括：
调取第二音频帧数据解码得到第二PCM格式数据，以及调取第二视频帧数据解码得到第二YUV格式数据；基于第二PCM格式数据对第二YUV格式数据做时间同步处理后从切换关键帧处开始渲染播放。
具体实施时，当前视频流播放到切换关键帧处时发送码率变更标识，同时通过播控层的控制模块(MultiStreamDemuxer)销毁第一解封装模块(Mp4Demuxer1)以停止对当前视频流的解封装，此时收到码率变更标识的音频解码器继续对已缓存的第一音频帧数据解码消耗，直至音频解码器消耗完当前已缓存的第一音频帧数据，通过重启音频解码器调取第二音频帧数据解码得到第二PCM格式数据，同理，收到码率变更标识的视频解码器继续对已缓存的第一视频帧数据解码消耗，直至视频解码器消耗完当前已缓存的第一视频帧数据，之后通过视频解码器调取第二视频帧数据解码得到第二YUV格式数据，最后，播放模块基于第二PCM格式数据对第二YUV格式数据做时间同步处理，之后从切换关键帧处开始渲染播放；可见，整个切换过程连续且不间断，实现了视频清晰度的无缝切换。
示例性地，请参阅图2，当前视频流为高清流，切换视频流为超清流，用户执行码率切换对应的时间戳为240ms处，此时，视频播放器的播控层会向播放器下发切换指令，使得播放器根据切换指令对应下载超清流视频并完成解析，得到超清流视频的关键帧，从图可见，超清流视频中距离240ms最近的关键帧在440ms处，故将其设置为切换关键帧，当高清流视频播放到440ms处时发送码率变更标识，并停止对高清流视频的解封装，同时告知音频解码器和视频解码器消耗完已缓存高清流缓存数据，之后调取超清流视频的音频帧数据和视频帧数据进行解码对应得到超清流视频PCM格式数据和超清流视频YUV格式数据，并基于超清流视频PCM格式数据对超清流视频YUV格式数据时间同步处理后，输出至播放模块渲染播放。
实施例二
请参阅图1和图3，本实施例提供一种视频清晰度切换装置，包括：
播放器1和用于控制播放器1播放操作的播控层2，其中，播放器1包括解析模块11、定位查找模块12、解封装模块13，播控层2包括指令获取模块21和控制模块22；
指令获取模块21用于感测用户的操作手势，获取视频码率的切换指令；
解析模块11用于根据切换指令，下载并解析切换视频流；
定位查找模块12用于基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳；
解封装模块13用于对切换视频流解封装处理，得到切换视频缓存数据；
控制模块22用于在当前视频流播放到切换关键帧时，调取切换视频缓存数据从切换关键帧处解码播放。
上述实施例中播放器1还包括音频解码器14、视频解码器15和播放模块16；
解析模块11还用于下载并解析当前视频流，解封装模块13还用于对当前视频流解封装得到第一音频帧数据和第一视频侦数据；
音频解码器14用于对第一音频帧数据解码得到第一PCM格式数据；
视频解码器15用于对第一视频帧数据解码得到第一YUV格式数据；
播放模块16用于接收第一PCM格式数据和第一YUV格式数据渲染播放。
上述实施例中定位查找模块12包括提取单元和定位单元；
提取单元用于从解析结果中获取头部文件，并提取头部文件中的关键帧信息及其对应的时间戳信息；
定位单元用于将关键帧信息中距离切换指令下发时间最近、且在切换指令下发时间之后的关键帧，定义为切换关键帧；以及将时间戳信息中与切换关键帧对应的时间戳定义为切换时间戳。
上述实施例中控制模块22包括标识发送单元、消耗控制单元、调取控制单元；
标识发送单元用于在当前视频流播放到切换关键帧处时，发送码率变更标识；
消耗控制单元用于基于码率变更标识控制解封装模块13停止对当前视频流的解封装，使得音频解码器14解码完已缓存的第一音频帧数据，以及视频解码器15解码完已缓存的第一视频帧数据，直至消耗完当前的缓存数据；
调取控制单元用于控制音频解码器14和视频解码器15对应调取第二音频帧数据和第二视频帧数据解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后，从切换关键帧处开始输出至播放模块16渲染播放。
与现有技术相比，本发明实施例提供的视频清晰度切换装置的有益效果与上述实施例一提供的视频清晰度切换方法的有益效果相同，在此不做赘述。
本领域普通技术人员可以理解，实现上述发明方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，上述程序可以存储于计算机可读取存储介质中，该程序在执行时，包括上述实施例方法的各步骤，而的存储介质可以是：ROM/RAM、磁碟、光盘、存储卡等。
以上，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。
Claims (5)
1.一种视频清晰度切换方法，其特征在于，包括：
播放器获取视频码率的切换指令，下载并解析切换视频流；
基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳；
对切换视频流解封装处理，得到切换视频缓存数据；所述切换视频缓存数据包括第二音频帧数据和第二视频帧数据；
在当前视频流播放到切换关键帧时，发送码率变更标识；
基于码率变更标识停止对当前视频流的解封装，并解码完已缓存的第一音频帧数据和第一视频帧数据；
渲染播放已解码的第一PCM格式数据和第一YUV格式数据，直至消耗完当前的缓存数据；
分别调取第二音频帧数据和第二视频帧数据进行解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后从切换关键帧处开始渲染播放；
基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳的方法包括：
从解析结果中获取头部文件，并提取头部文件中的关键帧信息及其对应的时间戳信息；
将关键帧信息中的距离切换指令下发时间最近、且在切换指令下发时间之后的关键帧，定义为切换关键帧；
将时间戳信息中与切换关键帧对应的时间戳定义为切换时间戳。
2.根据权利要求1所述的方法，其特征在于，获取视频码率的切换指令，下载并解析切换视频流之前包括：
下载并解析当前视频流，对其解封装得到第一音频帧数据和第一视频帧数据；
分别对第一音频帧数据和第一视频帧数据解码，对应得到第一PCM格式数据和第一YUV格式数据；
接收第一PCM格式数据和第一YUV格式数据渲染播放。
3.根据权利要求2所述的方法，其特征在于，分别调取第二音频帧数据和第二视频帧数据进行解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后从切换关键帧处渲染播放的方法包括：
调取第二音频帧数据解码得到第二PCM格式数据，以及调取第二视频帧数据解码得到第二YUV格式数据；
基于第二PCM格式数据对第二YUV格式数据做时间同步处理后从切换关键帧处开始渲染播放。
4.一种视频清晰度切换装置，其特征在于，包括播放器和用于控制所述播放器播放操作的播控层，其中，所述播放器包括解析模块、定位查找模块、解封装模块、音频解码器、视频解码器和播放模块，所述播控层包括指令获取模块和控制模块；
所述指令获取模块用于感测用户的操作手势，获取视频码率的切换指令；
所述解析模块用于根据切换指令，下载并解析切换视频流；
所述定位查找模块用于基于切换指令的下发时间和切换视频流的解析结果，定位切换视频流的切换关键帧及其对应的切换时间戳；
所述解封装模块用于对切换视频流解封装处理，得到切换视频缓存数据；所述切换视频缓存数据包括第二音频帧数据和第二视频帧数据；
所述控制模块用于在当前视频流播放到切换关键帧时，调取切换视频缓存数据从切换关键帧处解码播放；
所述控制模块包括标识发送单元、消耗控制单元、调取控制单元；
所述标识发送单元用于在当前视频流播放到切换关键帧处时，发送码率变更标识；
所述消耗控制单元用于基于码率变更标识控制所述解封装模块停止对当前视频流的解封装，使得所述音频解码器解码完已缓存的第一音频帧数据，以及所述视频解码器解码完已缓存的第一视频帧数据，直至消耗完当前的缓存数据；
所述调取控制单元用于控制所述音频解码器和所述视频解码器对应调取第二音频帧数据和第二视频帧数据解码，并将得到的第二PCM格式数据和第二YUV格式数据同步处理后，从切换关键帧处开始输出至所述播放模块渲染播放；
所述定位查找模块包括提取单元和定位单元；
所述提取单元用于从解析结果中获取头部文件，并提取头部文件中的关键帧信息及其对应的时间戳信息；
所述定位单元用于将关键帧信息中距离切换指令下发时间最近、且在切换指令下发时间之后的关键帧，定义为切换关键帧；以及将时间戳信息中与切换关键帧对应的时间戳定义为切换时间戳。
5.根据权利要求4所述的装置，其特征在于，
所述解析模块还用于下载并解析当前视频流，所述解封装模块还用于对当前视频流解封装得到第一音频帧数据和第一视频帧数据；
所述音频解码器还用于对第一音频帧数据解码得到第一PCM格式数据；
所述视频解码器还用于对第一视频帧数据解码得到第一YUV格式数据；
所述播放模块还用于接收第一PCM格式数据和第一YUV格式数据渲染播放。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811049698.0A CN109168078B (zh) | 2018-09-10 | 2018-09-10 | 一种视频清晰度切换方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811049698.0A CN109168078B (zh) | 2018-09-10 | 2018-09-10 | 一种视频清晰度切换方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109168078A CN109168078A (zh) | 2019-01-08 |
| CN109168078B true CN109168078B (zh) | 2022-07-12 |
Family
ID=64894533
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811049698.0A Active CN109168078B (zh) | 2018-09-10 | 2018-09-10 | 一种视频清晰度切换方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109168078B (zh) |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111479165B (zh) | 2019-01-23 | 2021-08-06 | 上海哔哩哔哩科技有限公司 | 软硬件解码分辨率无缝切换方法、装置及存储介质 |
| CN111726642B (zh) * | 2019-03-19 | 2023-05-30 | 北京京东尚科信息技术有限公司 | 直播方法、装置和计算机可读存储介质 |
| CN111836076B (zh) * | 2019-04-18 | 2023-01-20 | 腾讯科技（深圳）有限公司 | 视频分辨率切换方法及装置、电子设备 |
| CN111954068B (zh) * | 2019-05-14 | 2023-01-24 | 阿里巴巴集团控股有限公司 | 用于视频清晰度切换的方法、设备及电子设备 |
| CN110139148B (zh) * | 2019-05-22 | 2021-05-28 | 武汉瓯越网视有限公司 | 一种视频切换清晰度的方法及相关装置 |
| CN112019858B (zh) * | 2019-05-31 | 2022-11-29 | 腾讯科技（深圳）有限公司 | 一种视频播放方法、装置、计算机设备和存储介质 |
| CN110636338A (zh) * | 2019-09-17 | 2019-12-31 | 北京百度网讯科技有限公司 | 一种视频清晰度的切换方法、装置、电子设备及存储介质 |
| CN112887755A (zh) * | 2019-11-29 | 2021-06-01 | 北京百度网讯科技有限公司 | 用于播放视频的方法和装置 |
| CN110933517B (zh) * | 2019-11-30 | 2022-04-29 | 咪咕视讯科技有限公司 | 码率切换方法、客户端和计算机可读存储介质 |
| CN111147942A (zh) * | 2019-12-17 | 2020-05-12 | 北京达佳互联信息技术有限公司 | 视频播放方法、装置、电子设备及存储介质 |
| CN113225585A (zh) * | 2020-01-21 | 2021-08-06 | 腾讯科技（深圳）有限公司 | 一种视频清晰度的切换方法、装置、电子设备以及存储介质 |
| CN111866433B (zh) * | 2020-07-31 | 2021-06-29 | 腾讯科技（深圳）有限公司 | 视频源切换方法、播放方法、装置、设备和存储介质 |
| CN111954022B (zh) * | 2020-08-18 | 2022-04-12 | 广州虎牙科技有限公司 | 视频播放方法、装置、电子设备和可读存储介质 |
| CN112087646B (zh) * | 2020-08-26 | 2023-01-17 | 深圳市雅阅科技有限公司 | 视频播放方法、装置、计算机设备和存储介质 |
| CN112637661B (zh) * | 2020-12-22 | 2022-08-05 | 广州博冠信息科技有限公司 | 视频流的切换方法及装置、计算机存储介质、电子设备 |
| CN114449344B (zh) * | 2022-02-03 | 2024-02-09 | 百果园技术(新加坡)有限公司 | 视频流传输方法、装置、电子设备及存储介质 |
| CN114900731B (zh) * | 2022-03-31 | 2024-04-09 | 咪咕文化科技有限公司 | 视频清晰度切换方法及装置 |
| CN117156223B (zh) * | 2023-10-31 | 2024-03-15 | 中央广播电视总台 | 实时流切换方法、装置、电子设备和存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102291599A (zh) * | 2011-05-07 | 2011-12-21 | 董友球 | 网络视频播放方法及网络视频播放装置 |
| CN104219579A (zh) * | 2014-08-20 | 2014-12-17 | 北京奇艺世纪科技有限公司 | 一种视频切换方法和装置 |
| CN105657520A (zh) * | 2014-11-18 | 2016-06-08 | 乐视网信息技术（北京）股份有限公司 | 一种视频清晰度切换方法和视频播放器 |
| CN106131550A (zh) * | 2016-07-25 | 2016-11-16 | 合网络技术（北京）有限公司 | 播放多媒体文件的方法及装置 |
| EP3203754A1 (en) * | 2014-09-29 | 2017-08-09 | Yulong Computer Telecommunication Scientific (Shenzhen) Co. Ltd. | Method and system for realizing streaming media data seamlessly connecting in intelligent home |
-
2018
- 2018-09-10 CN CN201811049698.0A patent/CN109168078B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102291599A (zh) * | 2011-05-07 | 2011-12-21 | 董友球 | 网络视频播放方法及网络视频播放装置 |
| CN104219579A (zh) * | 2014-08-20 | 2014-12-17 | 北京奇艺世纪科技有限公司 | 一种视频切换方法和装置 |
| EP3203754A1 (en) * | 2014-09-29 | 2017-08-09 | Yulong Computer Telecommunication Scientific (Shenzhen) Co. Ltd. | Method and system for realizing streaming media data seamlessly connecting in intelligent home |
| CN105657520A (zh) * | 2014-11-18 | 2016-06-08 | 乐视网信息技术（北京）股份有限公司 | 一种视频清晰度切换方法和视频播放器 |
| CN106131550A (zh) * | 2016-07-25 | 2016-11-16 | 合网络技术（北京）有限公司 | 播放多媒体文件的方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109168078A (zh) | 2019-01-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109168078B (zh) | 一种视频清晰度切换方法及装置 | |
| US11265606B2 (en) | Reception apparatus, reception method, and program | |
| US20150062353A1 (en) | Audio video playback synchronization for encoded media | |
| EP2940940B1 (en) | Methods for sending and receiving video short message, apparatus and handheld electronic device thereof | |
| CN107634930B (zh) | 一种媒体数据的获取方法和装置 | |
| CN105359544B (zh) | 数字视频流传输中的特技播放 | |
| WO2020155964A1 (zh) | 音视频的切换方法、装置、计算机设备及可读存储介质 | |
| CN111601136B (zh) | 一种视频数据处理方法、装置、计算机设备及存储介质 | |
| CN111316659A (zh) | 动态减少替代内容的播出以帮助使替代内容的结束与被替代内容的结束对准 | |
| CN105979347A (zh) | 一种视频的播放方法和装置 | |
| CN112616062B (zh) | 一种字幕显示方法、装置、电子设备及存储介质 | |
| CN106791988B (zh) | 多媒体数据轮播方法和终端 | |
| CN105187896A (zh) | 多分段的媒体文件播放方法和系统 | |
| CN112771881B (zh) | 弹幕处理方法、装置、电子设备及计算机可读取存储介质 | |
| CN111050201A (zh) | 数据处理方法、装置、电子设备及存储介质 | |
| CN106851326A (zh) | 一种播放方法和装置 | |
| CN112601101A (zh) | 一种字幕显示方法、装置、电子设备及存储介质 | |
| CN111510755A (zh) | 音视频的切换方法、装置、计算机设备及可读存储介质 | |
| CN115623264A (zh) | 直播流的字幕处理方法、装置及直播流的播放方法、装置 | |
| CN113225585A (zh) | 一种视频清晰度的切换方法、装置、电子设备以及存储介质 | |
| CN113099282B (zh) | 一种数据处理方法、装置及设备 | |
| CN114257771B (zh) | 一种多路音视频的录像回放方法、装置、存储介质和电子设备 | |
| US20140047309A1 (en) | Apparatus and method for synchronizing content with data | |
| CN103501457A (zh) | 一种节目播放的方法及设备 | |
| US20120082435A1 (en) | Moving image display device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |