CN108111537A - 一种快速预览mp4格式的在线流媒体视频内容的方法 - Google Patents

一种快速预览mp4格式的在线流媒体视频内容的方法 Download PDF

Info

Publication number
CN108111537A
CN108111537A CN201810044237.8A CN201810044237A CN108111537A CN 108111537 A CN108111537 A CN 108111537A CN 201810044237 A CN201810044237 A CN 201810044237A CN 108111537 A CN108111537 A CN 108111537A
Authority
CN
China
Prior art keywords
user
time
key frame
preview
key
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810044237.8A
Other languages
English (en)
Other versions
CN108111537B (zh
Inventor
王国铼
裘昊
孙彦龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Arcvideo Technology Co ltd
Original Assignee
Hangzhou Arcvideo Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Arcvideo Technology Co ltd filed Critical Hangzhou Arcvideo Technology Co ltd
Priority to CN201810044237.8A priority Critical patent/CN108111537B/zh
Publication of CN108111537A publication Critical patent/CN108111537A/zh
Application granted granted Critical
Publication of CN108111537B publication Critical patent/CN108111537B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种快速预览MP4格式的在线流媒体视频内容的方法。它具体包括如下步骤：当用户刚进入播放时，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；获取到所有关键帧的信息之后，对整个视频文件做第一次选取关键帧的动作，在所有关键帧中均匀的选取若干个关键帧并进行下载，此时用户可以随时对整个视频文件进行预览，呈现最接近用户指定位置的关键帧画面给用户；在做完第一次选取、下载关键帧后，会继续做第二次甚至更多次的选取和下载，第二次选取的密度高于第一次选取的密度，让用户对整个视频有更好的了解。本发明的有益效果是：用户能够快速的、无需任何等待的预览在线MP4视频的全部内容，大大提高了预览效率。

Description

一种快速预览MP4格式的在线流媒体视频内容的方法
技术领域
本发明涉及视频播放相关技术领域，尤其是指一种快速预览MP4格式的在线流媒体视频内容的方法。
背景技术
用户在观看在线MP4格式的视频的时候，有时候需要先了解整个视频的大致内容，比如教学视频，会议记录，现有的视频播放技术，用户只能通过调整播放进度，来查看视频其他部分的内容，而每次调整播放进度，播放器都需要清理原有播放点的数据，查找和下载新播放点的数据，再进行文件解析，视频解码，才能显示给用户，整个过程需要耗费几秒的时间，用户每次都需要等待几秒才能知道某个时间点的视频内容，用这种方式来预览整个视频体验非常差。
发明内容
本发明是为了克服现有技术中存在上述的不足，提供了一种有效提高预览效率的快速预览MP4格式的在线流媒体视频内容的方法。
为了实现上述目的，本发明采用以下技术方案：
一种快速预览MP4格式的在线流媒体视频内容的方法，具体包括如下步骤：
(1)当用户刚进入播放时，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；
(2)获取到所有关键帧的信息之后，对整个视频文件做第一次选取关键帧的动作，在所有关键帧中均匀的选取若干个关键帧并进行下载，此时用户可以随时对整个视频文件进行预览，呈现最接近用户指定位置的关键帧画面给用户；
(3)在做完第一次选取、下载关键帧后，会继续做第二次的选取和下载，第二次选取的密度高于第一次选取的密度，且不对用户的体验产生影响；根据需求，可以进行第三次甚至更多次的关键帧的选取和下载，可以让用户对整个视频有更好的了解。
通过上述步骤设计，用户开始观看在线MP4格式的视频时，就可以马上对整个视频的内容进行预览，了解整个视频的大致内容，不需要任何的等待；用户观看视频一点点时间后，就可以预览到更多更丰富的画面内容，对整个视频的内容会有一个很好的了解，大大提高了预览效率。
作为优选，在步骤(1)中，根据MP4格式的特性，MP4是由一个个小box组成的，而若干小box构成一个大box，实现了由大到小一级嵌套一级来存放媒体信息，当用户刚进入播放时，可以迅速获取MP4中各个小box的信息，通过stsz、stsc、stss、stco这四个box，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置。Sync Sample Box(stss)，存储了媒体中的哪一个sample是关键帧，如果此表不存在，说明每一个sample都是一个关键帧；Sample To Chunk Box(stsc)，存储了sample与chunk的映射关系，一个chunk包含一个或多个sample，查看这张表就可以找到包含指定sample的chunk；Chunk Offset Box(stco)，存储了每个chunk在媒体流中的位置，包含了全部chunk的数目和每个chunk在整个文件中的位置；Sample Size Box(stsz)，存储了每个sample的大小，包含了媒体中全部sample的数目和每个sample大小。首先可以通过stss选取某一个关键帧，称之为Frame N，然后根据stsc可以找到Frame N所属的chunk C，而chunk C的位置可以在stco中找到，前面我们已经说到，一个chunk包含一个或者多个Sample，所以Frame N的位置就等于chunk C的位置加上Frame N相对于chunk C的位置，如果Frame N是chunk C的起始帧，那么Frame N的位置就等于Chunk C的位置，而如果Frame N不是chunk C的起始帧，而是Frame M，那么Frame N的位置等于chunk C的位置加上，从Frame M到N-1中所有帧的大小(stsz中可以获取所有帧的大小)，这样Frame N的所在的位置就可以得到，最后Frame N的大小通过stsz就能找到。
作为优选，在步骤(1)中，关键帧是可以独立解码的视频数据，把这一帧数据送入解码器，解码器马上返回解码后的图像数据。
作为优选，在步骤(2)中，在第一次选取关键帧的动作中，第一次选取帧数的下载时间小于等于播放器初始化播放界面的时间，由于关键帧数据已经下载完毕，呈现画面只需要做解码和渲染两个步骤，总共耗时也就几十毫秒，不需要用户做任何等待。第一次选取的帧数较少，这样能够保证下载的数据量小，完成时间非常短，在用户进入播放界面的瞬间就完成了。具体为：将选取的所有关键帧的大小总和控制在一定范围内，比如将第一次选取的所有关键帧大小总和控制在600KB，那么如果选择10个关键帧，则选择大小为60KB左右的关键帧，而600KB数据，以15Mbps的带宽算，下载大约需要是250ms，时间极短，而用户点击一个视频进行播放，播放器需要加载数据获取视频时长、分辨率、宽高比来初始化播放界面，这个时间足够完成第一次选取的关键帧下载工作。
作为优选，在步骤(3)中，第二次选取的关键帧不重复下载第一次选取的关键帧，第二次选取关键帧的下载在后台异步完成，对于用户的预览操作，将已下载好的最接近用户指定位置的关键帧画面立刻呈现给用户，因此用户对于第二次选取的关键帧下载是无感知的；第三次甚至更多次的关键帧选取如同第二次关键帧的选取。这种不同密度的分级选取关键帧的方式，即能做到不影响用户观看视频的体验，也能保证第一时间响应用户预览的操作。
本发明的有益效果是：用户能够快速的、无需任何等待的预览在线MP4视频的全部内容，用户能够预览到更多更丰富的画面内容，可以让用户对整个视频有更好的了解，大大提高了预览效率。
具体实施方式
下面结合具体实施方式对本发明做进一步的描述。
一种快速预览MP4格式的在线流媒体视频内容的方法，具体包括如下步骤：
(1)当用户刚进入播放时，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；根据MP4格式的特性，MP4是由一个个小box组成的，而若干小box构成一个大box，实现了由大到小一级嵌套一级来存放媒体信息，当用户刚进入播放时，可以迅速获取MP4中各个小box的信息，通过stsz、stsc、stss、stco这四个box，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；关键帧是可以独立解码的视频数据，把这一帧数据送入解码器，解码器马上返回解码后的图像数据；
(2)获取到所有关键帧的信息之后，对整个视频文件做第一次选取关键帧的动作，在所有关键帧中均匀的选取若干个关键帧并进行下载，此时用户可以随时对整个视频文件进行预览，呈现最接近用户指定位置的关键帧画面给用户；在第一次选取关键帧的动作中，第一次选取帧数的下载时间小于等于播放器初始化播放界面的时间，由于关键帧数据已经下载完毕，呈现画面只需要做解码和渲染两个步骤，总共耗时也就几十毫秒，不需要用户做任何等待；
具体如下：将选取的所有关键帧的大小总和控制在一定范围内，比如将第一次选取的所有关键帧大小总和控制在600KB，那么如果选择10个关键帧，则选择大小为60KB左右的关键帧，600KB数据，以15Mbps的带宽算，下载大约需要是250ms，时间极短，而用户点击一个视频进行播放，播放器需要加载数据获取视频时长、分辨率、宽高比来初始化播放界面，这个时间足够完成第一次选取的关键帧下载工作，如上第一次选取的帧数较少，这样能够保证下载的数据量小，完成时间非常短，在用户进入播放界面的瞬间就完成了；
(3)在做完第一次选取、下载关键帧后，会继续做第二次的选取和下载，第二次选取的密度高于第一次选取的密度，且不对用户的体验产生影响；根据需求，可以进行第三次甚至更多次的关键帧的选取和下载，可以让用户对整个视频有更好的了解；其中：第二次选取的关键帧不重复下载第一次选取的关键帧，第二次选取关键帧的下载在后台异步完成，对于用户的预览操作，将已下载好的最接近用户指定位置的关键帧画面立刻呈现给用户，因此用户对于第二次选取的关键帧下载是无感知的；第三次甚至更多次的关键帧选取如同第二次关键帧的选取；
具体如下：第二次选取的密度会更高(比如100帧)，不重复下载第一次选取的关键帧，这些都是在用户无感知的情况下完成的，不会对用户的体验产生任何不好的影响。这种不同密度的分级选取关键帧的方式，即能做到不影响用户观看视频的体验，也能保证第一时间响应用户预览的操作，根据需求，我们可以进行第三次甚至更多次的关键帧的选取和下载，因为当下载的关键帧越多时，用户能够预览到更多更丰富的画面内容，可以让用户对整个视频有更好的了解。
通过上述方法的设计，用户开始观看在线MP4格式的视频时，就可以马上对整个视频的内容进行预览，了解整个视频的大致内容，不需要任何的等待；用户观看视频一点点时间后，就可以预览到更多更丰富的画面内容，对整个视频的内容会有一个很好的了解，大大提高了预览效率。

Claims (5)

1.一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，具体包括如下步骤：
(1)当用户刚进入播放时，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置；
(2)获取到所有关键帧的信息之后，对整个视频文件做第一次选取关键帧的动作，在所有关键帧中均匀的选取若干个关键帧并进行下载，此时用户可以随时对整个视频文件进行预览，呈现最接近用户指定位置的关键帧画面给用户；
(3)在做完第一次选取、下载关键帧后，会继续做第二次的选取和下载，第二次选取的密度高于第一次选取的密度，且不对用户的体验产生影响；根据需求，可以进行第三次甚至更多次的关键帧的选取和下载，可以让用户对整个视频有更好的了解。
2.根据权利要求1所述的一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，在步骤(1)中，根据MP4格式的特性，MP4是由一个个小box组成的，而若干小box构成一个大box，实现了由大到小一级嵌套一级来存放媒体信息，当用户刚进入播放时，可以迅速获取MP4中各个小box的信息，通过stsz、stsc、stss、stco这四个box，可以获得整个MP4中所有关键帧的大小以及它们在文件中所处的位置。
3.根据权利要求1或2所述的一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，在步骤(1)中，关键帧是可以独立解码的视频数据，把这一帧数据送入解码器，解码器马上返回解码后的图像数据。
4.根据权利要求1所述的一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，在步骤(2)中，在第一次选取关键帧的动作中，第一次选取帧数的下载时间小于等于播放器初始化播放界面的时间，由于关键帧数据已经下载完毕，呈现画面只需要做解码和渲染两个步骤，总共耗时也就几十毫秒，不需要用户做任何等待。
5.根据权利要求1所述的一种快速预览MP4格式的在线流媒体视频内容的方法，其特征是，在步骤(3)中，第二次选取的关键帧不重复下载第一次选取的关键帧，第二次选取关键帧的下载在后台异步完成，对于用户的预览操作，将已下载好的最接近用户指定位置的关键帧画面立刻呈现给用户，因此用户对于第二次选取的关键帧下载是无感知的；第三次甚至更多次的关键帧选取如同第二次关键帧的选取。
CN201810044237.8A 2018-01-17 2018-01-17 一种快速预览mp4格式的在线流媒体视频内容的方法 Active CN108111537B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810044237.8A CN108111537B (zh) 2018-01-17 2018-01-17 一种快速预览mp4格式的在线流媒体视频内容的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810044237.8A CN108111537B (zh) 2018-01-17 2018-01-17 一种快速预览mp4格式的在线流媒体视频内容的方法

Publications (2)

Publication Number Publication Date
CN108111537A true CN108111537A (zh) 2018-06-01
CN108111537B CN108111537B (zh) 2021-03-23

Family

ID=62220006

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810044237.8A Active CN108111537B (zh) 2018-01-17 2018-01-17 一种快速预览mp4格式的在线流媒体视频内容的方法

Country Status (1)

Country Link
CN (1) CN108111537B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109788350A (zh) * 2019-01-18 2019-05-21 北京睿峰文化发展有限公司 一种基于影视剧情选择无缝连续播放的方法和装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101202899A (zh) * 2006-12-12 2008-06-18 中兴通讯股份有限公司 视音频流数据恢复iso媒体文件的方法
CN101227590A (zh) * 2007-01-19 2008-07-23 北京风行在线技术有限公司 基于p2p协议的媒体文件点播控制方法及装置
CN101420577A (zh) * 2008-11-07 2009-04-29 武汉烽火网络有限责任公司 一种多媒体数据的存储方法及精确定位回放位置的方法
CN102137302A (zh) * 2010-12-09 2011-07-27 华为技术有限公司 流媒体视频内容的播放方法和装置
CN102316370A (zh) * 2010-06-29 2012-01-11 腾讯科技（深圳）有限公司 显示播放信息的方法和装置
CN102694966A (zh) * 2012-03-05 2012-09-26 天津理工大学 一种全自动视频编目系统的构建方法
WO2013056311A1 (en) * 2011-10-20 2013-04-25 The University Of Sydney Keypoint based keyframe selection
CN103297851A (zh) * 2013-05-16 2013-09-11 中国科学院自动化研究所 长视频中目标内容的快速统计与自动审核方法及装置
CN104063447A (zh) * 2014-06-17 2014-09-24 惠州华阳通用电子有限公司 一种监控视频文件修复方法
CN104679818A (zh) * 2014-12-25 2015-06-03 安科智慧城市技术（中国）有限公司 一种视频关键帧提取方法及系统
US9171578B2 (en) * 2010-08-06 2015-10-27 Futurewei Technologies, Inc. Video skimming methods and systems

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101202899A (zh) * 2006-12-12 2008-06-18 中兴通讯股份有限公司 视音频流数据恢复iso媒体文件的方法
CN101227590A (zh) * 2007-01-19 2008-07-23 北京风行在线技术有限公司 基于p2p协议的媒体文件点播控制方法及装置
CN101420577A (zh) * 2008-11-07 2009-04-29 武汉烽火网络有限责任公司 一种多媒体数据的存储方法及精确定位回放位置的方法
CN102316370A (zh) * 2010-06-29 2012-01-11 腾讯科技（深圳）有限公司 显示播放信息的方法和装置
US9171578B2 (en) * 2010-08-06 2015-10-27 Futurewei Technologies, Inc. Video skimming methods and systems
CN102137302A (zh) * 2010-12-09 2011-07-27 华为技术有限公司 流媒体视频内容的播放方法和装置
WO2013056311A1 (en) * 2011-10-20 2013-04-25 The University Of Sydney Keypoint based keyframe selection
CN102694966A (zh) * 2012-03-05 2012-09-26 天津理工大学 一种全自动视频编目系统的构建方法
CN103297851A (zh) * 2013-05-16 2013-09-11 中国科学院自动化研究所 长视频中目标内容的快速统计与自动审核方法及装置
CN104063447A (zh) * 2014-06-17 2014-09-24 惠州华阳通用电子有限公司 一种监控视频文件修复方法
CN104679818A (zh) * 2014-12-25 2015-06-03 安科智慧城市技术（中国）有限公司 一种视频关键帧提取方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109788350A (zh) * 2019-01-18 2019-05-21 北京睿峰文化发展有限公司 一种基于影视剧情选择无缝连续播放的方法和装置

Also Published As

Publication number Publication date
CN108111537B (zh) 2021-03-23

Similar Documents

Publication Publication Date Title
CA2449032C (en) Efficient transmission and playback of digital information
CN1139258C (zh) 用于传送和接收数字视频信号的装置
CN105359544B (zh) 数字视频流传输中的特技播放
CN105657524A (zh) 一种视频间无缝切换的方法
WO2018197911A1 (en) Methods, systems, processors and computer code for providing video clips
WO2003013145A1 (fr) Procede et dispositif de codage d'une mosaïque d'images
CN1324181A (zh) 信息处理设备
US8965184B2 (en) Video-recording/reproducing apparatus and video-recording/reproducing method
CN103038783A (zh) 自适应视频解码电路及其方法
CN106658030B (zh) 一种包含单路音频多路视频的复合视频的播放方法及设备
CN106576190A (zh) 360度空间图像播放方法及系统
CN109792547A (zh) 观看者重视度自适应比特率传送
JP2007524321A (ja) ビデオトレーラ
CN105122828B (zh) 信息处理装置、内容请求方法以及计算机程序
CN105898395A (zh) 一种网络视频播放方法、装置及系统
EP2697980B1 (en) Customized zapping
CN108337553A (zh) 一种多媒体数据预下载方法
CN108111532A (zh) 视频流数据的播放控制方法及装置、存储介质、终端
CN108111537A (zh) 一种快速预览mp4格式的在线流媒体视频内容的方法
KR20160105797A (ko) 메타데이터를 이용한 비디오 최적화를 위한 방법 및 장치
DE102006040111A1 (de) Verfahren und Vorrichtung zur Registrierung aufeinanderfolgender Vollbilder bei einem digitalen Video
CN104506866B (zh) 一种适用于多码流的视频编码处理方法和视频编码器
CN108924634A (zh) 一种ts流快速识别方法及装置
EP2978225B1 (en) Method for obtaining in real time a user selected multimedia content part
CN208768211U (zh) 一种全景视频播放系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 310000 E, 16 floor, A block, Paradise software garden, 3 West Gate Road, Xihu District, Hangzhou, Zhejiang.

Applicant after: Hangzhou Dang Hong Polytron Technologies Inc

Address before: 310030, 16 floor, E software, Paradise Software Park, 3 West Gate Road, Xihu District, Hangzhou, Zhejiang.

Applicant before: HANGZHOU DANGHONG TECHNOLOGY CO., LTD.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant