CN108111537B - 一种快速预览mp4格式的在线流媒体视频内容的方法 - Google Patents
一种快速预览mp4格式的在线流媒体视频内容的方法 Download PDFInfo
- Publication number
- CN108111537B CN108111537B CN201810044237.8A CN201810044237A CN108111537B CN 108111537 B CN108111537 B CN 108111537B CN 201810044237 A CN201810044237 A CN 201810044237A CN 108111537 B CN108111537 B CN 108111537B
- Authority
- CN
- China
- Prior art keywords
- time
- user
- key frames
- key
- downloaded
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种快速预览MP4格式的在线流媒体视频内容的方法。它具体包括如下步骤：当用户刚进入播放时，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；获取到所有关键帧的信息之后，对整个视频文件做第一次选取关键帧的动作，在所有关键帧中均匀的选取若干个关键帧并进行下载，此时用户可以随时对整个视频文件进行预览，呈现最接近用户指定位置的关键帧画面给用户；在做完第一次选取、下载关键帧后，会继续做第二次甚至更多次的选取和下载，第二次选取的密度高于第一次选取的密度，让用户对整个视频有更好的了解。本发明的有益效果是：用户能够快速的、无需任何等待的预览在线MP4视频的全部内容，大大提高了预览效率。
Description
技术领域
本发明涉及视频播放相关技术领域，尤其是指一种快速预览MP4格式的在线流媒体视频内容的方法。
背景技术
用户在观看在线MP4格式的视频的时候，有时候需要先了解整个视频的大致内容，比如教学视频，会议记录，现有的视频播放技术，用户只能通过调整播放进度，来查看视频其他部分的内容，而每次调整播放进度，播放器都需要清理原有播放点的数据，查找和下载新播放点的数据，再进行文件解析，视频解码，才能显示给用户，整个过程需要耗费几秒的时间，用户每次都需要等待几秒才能知道某个时间点的视频内容，用这种方式来预览整个视频体验非常差。
发明内容
本发明是为了克服现有技术中存在上述的不足，提供了一种有效提高预览效率的快速预览MP4格式的在线流媒体视频内容的方法。
为了实现上述目的，本发明采用以下技术方案：
一种快速预览MP4格式的在线流媒体视频内容的方法，具体包括如下步骤：
(1)当用户刚进入播放时，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；
(2)获取到所有关键帧的信息之后，对整个视频文件做第一次选取关键帧的动作，在所有关键帧中均匀的选取若干个关键帧并进行下载，此时用户可以随时对整个视频文件进行预览，呈现最接近用户指定位置的关键帧画面给用户；
(3)在做完第一次选取、下载关键帧后，会继续做第二次的选取和下载，第二次选取的密度高于第一次选取的密度，且不对用户的体验产生影响；根据需求，可以进行第三次甚至更多次的关键帧的选取和下载，可以让用户对整个视频有更好的了解。
通过上述步骤设计，用户开始观看在线MP4格式的视频时，就可以马上对整个视频的内容进行预览，了解整个视频的大致内容，不需要任何的等待；用户观看视频一点点时间后，就可以预览到更多更丰富的画面内容，对整个视频的内容会有一个很好的了解，大大提高了预览效率。
作为优选，在步骤(1)中，根据MP4格式的特性，MP4是由一个个小box组成的，而若干小box构成一个大box，实现了由大到小一级嵌套一级来存放媒体信息，当用户刚进入播放时，可以迅速获取MP4中各个小box的信息，通过stsz、stsc、stss、stco这四个box，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置。Sync Sample Box(stss)，存储了媒体中的哪一个sample是关键帧，如果此表不存在，说明每一个sample都是一个关键帧；Sample To Chunk Box(stsc)，存储了sample与chunk的映射关系，一个chunk包含一个或多个sample，查看这张表就可以找到包含指定sample的chunk；Chunk Offset Box(stco)，存储了每个chunk在媒体流中的位置，包含了全部chunk的数目和每个chunk在整个文件中的位置；Sample Size Box(stsz)，存储了每个sample的大小，包含了媒体中全部sample的数目和每个sample大小。首先可以通过stss选取某一个关键帧，称之为Frame N，然后根据stsc可以找到Frame N所属的chunk C，而chunk C的位置可以在stco中找到，前面我们已经说到，一个chunk包含一个或者多个Sample，所以Frame N的位置就等于chunk C的位置加上Frame N相对于chunk C的位置，如果Frame N是chunk C的起始帧，那么Frame N的位置就等于Chunk C的位置，而如果Frame N不是chunk C的起始帧，而是Frame M，那么Frame N的位置等于chunk C的位置加上，从Frame M到N-1中所有帧的大小(stsz中可以获取所有帧的大小)，这样Frame N的所在的位置就可以得到，最后Frame N的大小通过stsz就能找到。
作为优选，在步骤(1)中，关键帧是可以独立解码的视频数据，把这一帧数据送入解码器，解码器马上返回解码后的图像数据。
作为优选，在步骤(2)中，在第一次选取关键帧的动作中，第一次选取帧数的下载时间小于等于播放器初始化播放界面的时间，由于关键帧数据已经下载完毕，呈现画面只需要做解码和渲染两个步骤，总共耗时也就几十毫秒，不需要用户做任何等待。第一次选取的帧数较少，这样能够保证下载的数据量小，完成时间非常短，在用户进入播放界面的瞬间就完成了。具体为：将选取的所有关键帧的大小总和控制在一定范围内，比如将第一次选取的所有关键帧大小总和控制在600KB，那么如果选择10个关键帧，则选择大小为60KB左右的关键帧，而600KB数据，以15Mbps的带宽算，下载大约需要是250ms，时间极短，而用户点击一个视频进行播放，播放器需要加载数据获取视频时长、分辨率、宽高比来初始化播放界面，这个时间足够完成第一次选取的关键帧下载工作。
作为优选，在步骤(3)中，第二次选取的关键帧不重复下载第一次选取的关键帧，第二次选取关键帧的下载在后台异步完成，对于用户的预览操作，将已下载好的最接近用户指定位置的关键帧画面立刻呈现给用户，因此用户对于第二次选取的关键帧下载是无感知的；第三次甚至更多次的关键帧选取如同第二次关键帧的选取。这种不同密度的分级选取关键帧的方式，即能做到不影响用户观看视频的体验，也能保证第一时间响应用户预览的操作。
本发明的有益效果是：用户能够快速的、无需任何等待的预览在线MP4视频的全部内容，用户能够预览到更多更丰富的画面内容，可以让用户对整个视频有更好的了解，大大提高了预览效率。
具体实施方式
下面结合具体实施方式对本发明做进一步的描述。
一种快速预览MP4格式的在线流媒体视频内容的方法，具体包括如下步骤：
(1)当用户刚进入播放时，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；根据MP4格式的特性，MP4是由一个个小box组成的，而若干小box构成一个大box，实现了由大到小一级嵌套一级来存放媒体信息，当用户刚进入播放时，可以迅速获取MP4中各个小box的信息，通过stsz、stsc、stss、stco这四个box，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；关键帧是可以独立解码的视频数据，把这一帧数据送入解码器，解码器马上返回解码后的图像数据；
(2)获取到所有关键帧的信息之后，对整个视频文件做第一次选取关键帧的动作，在所有关键帧中均匀的选取若干个关键帧并进行下载，此时用户可以随时对整个视频文件进行预览，呈现最接近用户指定位置的关键帧画面给用户；在第一次选取关键帧的动作中，第一次选取帧数的下载时间小于等于播放器初始化播放界面的时间，由于关键帧数据已经下载完毕，呈现画面只需要做解码和渲染两个步骤，总共耗时也就几十毫秒，不需要用户做任何等待；
具体如下：将选取的所有关键帧的大小总和控制在一定范围内，比如将第一次选取的所有关键帧大小总和控制在600KB，那么如果选择10个关键帧，则选择大小为60KB左右的关键帧，600KB数据，以15Mbps的带宽算，下载大约需要是250ms，时间极短，而用户点击一个视频进行播放，播放器需要加载数据获取视频时长、分辨率、宽高比来初始化播放界面，这个时间足够完成第一次选取的关键帧下载工作，如上第一次选取的帧数较少，这样能够保证下载的数据量小，完成时间非常短，在用户进入播放界面的瞬间就完成了；
(3)在做完第一次选取、下载关键帧后，会继续做第二次的选取和下载，第二次选取的密度高于第一次选取的密度，且不对用户的体验产生影响；根据需求，可以进行第三次甚至更多次的关键帧的选取和下载，可以让用户对整个视频有更好的了解；其中：第二次选取的关键帧不重复下载第一次选取的关键帧，第二次选取关键帧的下载在后台异步完成，对于用户的预览操作，将已下载好的最接近用户指定位置的关键帧画面立刻呈现给用户，因此用户对于第二次选取的关键帧下载是无感知的；第三次甚至更多次的关键帧选取如同第二次关键帧的选取；
具体如下：第二次选取的密度会更高(比如100帧)，不重复下载第一次选取的关键帧，这些都是在用户无感知的情况下完成的，不会对用户的体验产生任何不好的影响。这种不同密度的分级选取关键帧的方式，即能做到不影响用户观看视频的体验，也能保证第一时间响应用户预览的操作，根据需求，我们可以进行第三次甚至更多次的关键帧的选取和下载，因为当下载的关键帧越多时，用户能够预览到更多更丰富的画面内容，可以让用户对整个视频有更好的了解。
通过上述方法的设计，用户开始观看在线MP4格式的视频时，就可以马上对整个视频的内容进行预览，了解整个视频的大致内容，不需要任何的等待；用户观看视频一点点时间后，就可以预览到更多更丰富的画面内容，对整个视频的内容会有一个很好的了解，大大提高了预览效率。
Claims (4)
1.一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，具体包括如下步骤：
（1）当用户刚进入播放时，获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；
（2）获取到所有关键帧的信息之后，对整个视频文件做第一次选取关键帧的动作，在所有关键帧中均匀的选取若干个关键帧并进行下载，对整个视频文件进行预览，呈现最接近用户指定位置的关键帧画面给用户；
（3）在做完第一次选取、下载关键帧后，继续做第二次的选取和下载，第二次选取的密度高于第一次选取的密度；第二次选取的关键帧不重复下载第一次选取的关键帧，第二次选取关键帧的下载在后台异步完成，对于用户的预览操作，将已下载好的最接近用户指定位置的关键帧画面立刻呈现给用户。
2.根据权利要求1所述的一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，在步骤（1）中，MP4是由一个个小box组成的，而若干小box构成一个大box，实现了由大到小一级嵌套一级来存放媒体信息，当用户刚进入播放时，迅速获取MP4中各个小box的信息，通过stsz、stsc、stss、stco这四个box，获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置。
3.根据权利要求1或2所述的一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，在步骤（1）中，关键帧是能够独立解码的视频数据，把这一帧数据送入解码器，解码器马上返回解码后的图像数据。
4.根据权利要求1所述的一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，在步骤（2）中，在第一次选取关键帧的动作中，第一次选取帧数的下载时间小于等于播放器初始化播放界面的时间，由于关键帧数据已经下载完毕，呈现画面只需要做解码和渲染两个步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810044237.8A CN108111537B (zh) | 2018-01-17 | 2018-01-17 | 一种快速预览mp4格式的在线流媒体视频内容的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810044237.8A CN108111537B (zh) | 2018-01-17 | 2018-01-17 | 一种快速预览mp4格式的在线流媒体视频内容的方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108111537A CN108111537A (zh) | 2018-06-01 |
| CN108111537B true CN108111537B (zh) | 2021-03-23 |
Family
ID=62220006
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810044237.8A Active CN108111537B (zh) | 2018-01-17 | 2018-01-17 | 一种快速预览mp4格式的在线流媒体视频内容的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108111537B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109788350A (zh) * | 2019-01-18 | 2019-05-21 | 北京睿峰文化发展有限公司 | 一种基于影视剧情选择无缝连续播放的方法和装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102694966A (zh) * | 2012-03-05 | 2012-09-26 | 天津理工大学 | 一种全自动视频编目系统的构建方法 |
| WO2013056311A1 (en) * | 2011-10-20 | 2013-04-25 | The University Of Sydney | Keypoint based keyframe selection |
| CN103297851A (zh) * | 2013-05-16 | 2013-09-11 | 中国科学院自动化研究所 | 长视频中目标内容的快速统计与自动审核方法及装置 |
| US9171578B2 (en) * | 2010-08-06 | 2015-10-27 | Futurewei Technologies, Inc. | Video skimming methods and systems |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100589565C (zh) * | 2006-12-12 | 2010-02-10 | 中兴通讯股份有限公司 | 视音频流数据恢复iso媒体文件的方法 |
| CN101227590B (zh) * | 2007-01-19 | 2013-03-06 | 北京风行在线技术有限公司 | 基于p2p协议的媒体文件点播控制方法及装置 |
| CN100591112C (zh) * | 2008-11-07 | 2010-02-17 | 武汉烽火网络有限责任公司 | 一种多媒体数据的存储方法及精确定位回放位置的方法 |
| CN102137302A (zh) * | 2010-12-09 | 2011-07-27 | 华为技术有限公司 | 流媒体视频内容的播放方法和装置 |
| CN104063447B (zh) * | 2014-06-17 | 2018-04-17 | 惠州华阳通用电子有限公司 | 一种监控视频文件修复方法 |
| CN104679818B (zh) * | 2014-12-25 | 2019-03-26 | 上海云赛智联信息科技有限公司 | 一种视频关键帧提取方法及系统 |
-
2018
- 2018-01-17 CN CN201810044237.8A patent/CN108111537B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9171578B2 (en) * | 2010-08-06 | 2015-10-27 | Futurewei Technologies, Inc. | Video skimming methods and systems |
| WO2013056311A1 (en) * | 2011-10-20 | 2013-04-25 | The University Of Sydney | Keypoint based keyframe selection |
| CN102694966A (zh) * | 2012-03-05 | 2012-09-26 | 天津理工大学 | 一种全自动视频编目系统的构建方法 |
| CN103297851A (zh) * | 2013-05-16 | 2013-09-11 | 中国科学院自动化研究所 | 长视频中目标内容的快速统计与自动审核方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN108111537A (zh) | 2018-06-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109168078B (zh) | 一种视频清晰度切换方法及装置 | |
| Li et al. | Fundamentals of multimedia | |
| US11582497B2 (en) | Methods, systems, processors and computer code for providing video clips | |
| US10930318B2 (en) | Gapless video looping | |
| KR100579387B1 (ko) | 디지털 정보의 효율적인 전송 및 재생 | |
| JP6908098B2 (ja) | 情報処理装置および方法 | |
| US8660181B2 (en) | Method of compressing video data and a media player for implementing the method | |
| CN105657524A (zh) | 一种视频间无缝切换的方法 | |
| JP2010178147A (ja) | ストリーミング配信システム、その動作制御方法及びプログラム | |
| EP2815582A1 (en) | Rendering of an interactive lean-backward user interface on a television | |
| CN103282962A (zh) | 内容排序 | |
| CN102792710B (zh) | 用于播放媒体内容数据的设备和方法 | |
| CN105898395A (zh) | 一种网络视频播放方法、装置及系统 | |
| CN103635938B (zh) | 在流传输客户端中用于处理视频流传输数据的方法、流传输客户端 | |
| CN110214448A (zh) | 信息处理装置和方法 | |
| CN108111537B (zh) | 一种快速预览mp4格式的在线流媒体视频内容的方法 | |
| CN104994406B (zh) | 一种基于Silverlight插件的视频编辑方法和装置 | |
| WO2018139283A1 (ja) | 画像処理装置および方法、並びにプログラム | |
| EP2978225B1 (en) | Method for obtaining in real time a user selected multimedia content part | |
| KR101980721B1 (ko) | 멀티미디어 스트리밍 서비스 프레젠테이션 방법, 관련 장치 및 관련 시스템 | |
| CN113873296A (zh) | 视频流处理方法及装置 | |
| CN103053170B (zh) | 用以在串流重放期间提供特技播放的系统和方法 | |
| WO2000010329A1 (en) | Client-side digital television authoring system | |
| CN110266706A (zh) | 一种多媒体流数据的播放方法和装置 | |
| CN116939233A (zh) | 直播视频处理方法、装置、设备、存储介质及计算机程序 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 310000 E, 16 floor, A block, Paradise software garden, 3 West Gate Road, Xihu District, Hangzhou, Zhejiang. Applicant after: Hangzhou Dang Hong Polytron Technologies Inc Address before: 310030, 16 floor, E software, Paradise Software Park, 3 West Gate Road, Xihu District, Hangzhou, Zhejiang. Applicant before: HANGZHOU DANGHONG TECHNOLOGY CO., LTD. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |