CN1444398A - 基于关键帧的视频流索引播放系统 - Google Patents
基于关键帧的视频流索引播放系统 Download PDFInfo
- Publication number
- CN1444398A CN1444398A CN02103273A CN02103273A CN1444398A CN 1444398 A CN1444398 A CN 1444398A CN 02103273 A CN02103273 A CN 02103273A CN 02103273 A CN02103273 A CN 02103273A CN 1444398 A CN1444398 A CN 1444398A
- Authority
- CN
- China
- Prior art keywords
- video
- preview
- index
- key frame
- window
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
一种基于关键帧的视频流索引播放方法，包括步骤：在视频播放器中加入预览播放窗口；在视频文件中的每个视频流中建立一个索引轨道；视频播放器根据预览播放窗口的内容选择主播放的内容。本发明提供了一种基于关键帧的视频流索引播放方法，通过在视频播放器中加入一个预览播放窗口，同时在视频文件中针对需要索引浏览的视频轨道，建立一个新的索引预览轨道，视频播放器根据索引预览轨道中记录索引关键帧的时间戳信息计算出此索引帧所对应的正常播放时间，从而实现根据预览播放窗口的内容选择主播放的内容。
Description
技术领域
本发明涉及一种基于关键帧的视频流索引播放方法，尤指一种在视频播放器中加入一个预览播放窗口，实现根据预览播放窗口的内容选择主播放的内容的方法。
背景技术
近年来随着各种宽带网的建设，基于视频的网上应用例如视频会议、视频点播和远程教育等迅速发展。基于视频的应用同以前的Web应用相比，一个重要的不同是视频应用数据量大，对网络的要求高，而且检索和流览比文本内容困难。因此，寻找一种通用的符合一定标准规范的视频内容预览方法，通过这种方法用户就可以在很短的时间内或者利用较少的网络资源对视频内容有一个预览，来决定是否对其感兴趣就变得越来越重要。
目前存在的预览方法，一般是在媒体播放器中提供快进方式，即采用固定的大于正常播放速度的帧率播放视频，这样虽然也可以达到对视频内容的预览，但不能实现对某些特定帧的播放，例如基于镜头分割、场景分割或内容分析得到的关键帧，它们之间的时间间隔一般并不固定，采用固定时间间隔的播放方式显然无法播放这些关键帧。
发明内容
本发明的目的在于提供一种基于关键帧的视频流索引播放方法，在视频播放器中加入一个预览播放窗口，视频文件中针对需要索引浏览的视频轨道，建立一个新的索引预览轨道，视频播放器可以根据索引预览轨道中记录索引关键帧的时间戳信息计算出此索引帧所对应的正常播放时间，从而实现根据预览播放窗口的内容选择主播放的内容。
为实现上述目的，基于关键帧的视频流索引播放方法包括步骤：
在视频播放器中加入预览播放窗口；
在视频文件中的每个视频流中建立一个索引轨道；
视频播放器根据预览播放窗口的内容选择主播放的内容。
附图说明
以下结合附图及实施例对本发明作进一步的详细说明：
图1为本发明的流程示意图。
图2为本发明的播放器界面示意图。
图3为本发明视频文件索引预览轨道生成方法流程示意图。
图4为本发明的视频播放器根据预览播放窗口的索引预览内容选择主播放窗口的内容的方法流程示意图。
具体实施方式
如图1所示，视频关键帧提取计算机提取视频关键帧，然后，将提取的视频关键帧送入视频文件制作计算机，视频发布系统将视频文件和提取的视频关键帧通过互联网发送给客户端播放器。
如图2所示，在视频播放器中加入一个预览播放窗口，视频文件中针对需要索引浏览的视频轨道，建立一个新的索引预览轨道，视频播放器可以根据索引预览轨道中记录索引关键帧的时间戳信息计算出此索引帧所对应的正常播放时间，从而实现根据预览播放窗口的内容选择主播放的内容的方法。
本发明的视频播放器播放方式，视频播放器包括主播放窗口和一个预览播放窗口，主播放窗口中进行正常的视频播放；预览窗口中依次按固定帧率播放多幅索引关键帧。
如图3所示，本发明的视频文件索引预览轨道生成方法，在视频文件中针对需要索引浏览的视频轨道，建立一个新的索引预览轨道。它的建立方法为在新的索引预览轨道中记录索引关键帧的时间戳信息。
上述的索引预览轨道生成方法包括如下步骤：
1.用关键帧选择算法从视频流中选出关键帧，这一步既可以在生成过程中在压缩域同步进行，也可以预先在原始视频流中对关键帧进行标注；
2.生成trak.meda.minf.stbl.stsd对象，在其中设定预览索引轨道的timescale(时标)为视频流的正常索引轨道中的timescale；
3.生成预览索引轨道中的timesstamp(时间戳)信息时，相邻帧之间时间戳的差值应该为常数Idifference。设视频流的正常播放帧率为NframeRate，希望的预览索引流的播放帧率为IframeRate，在制作节目时确定，正常播放的视频流相邻帧之间的时间戳差为Ndifference，则预览索引轨道流的相邻时间戳差Idifference由下式确定：
Idifference＝Ndifference*Iframerate/NframeRate
4.在生成预览索引轨道的样本数据时，记录下此样本数据对应的在视频流正常播放时的时间戳信息，例如，如果正在生成预览索引轨道的第5帧，它所对应的时间戳信息为(5-1)*Idifference，这一帧对应于视频流正常播放时的第100帧，它的时间戳信息为(100-1)*Ndifference，我们可以在索引轨道样本数据RTP成包信息中记录值AddDifference，它由下式得到：
AddDifference＝(5-1)*Idifference-(100-1)*Ndifference；
5.设置索引轨道样本数据头信息‘X’位为1。
6.在实际生成并进行发送时，根据头信息中的‘X’＝1而采用扩展头，在扩展头中存放AddDifference。格式如下：
0 10 20 30
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
profile | length
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
| AddDifference |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
其中设置profile＝999，length＝1。
如图4所示：本发明的视频播放器根据预览播放窗口的索引预览内容选择主播放窗口的内容的方法，视频播放器可以根据索引预览轨道中记录索引关键帧的时间戳信息计算出此索引帧所对应的正常播放时间，从而实现根据预览播放窗口的内容选择主播放的内容。
上述的根据预览播放窗口的索引预览内容选择主播放窗口的内容的方法包括如下步骤：
1.在有预览索引信息的情况下，播放界面做调整，增加预览播放窗口；
2.在有预览索引信息的情况下，进行各个媒体流同步时，应该排除预览索引流；
3.对预览索引流，需要记录下包头中的扩展信息；
4.当用户点击某一索引帧时，可以根据扩展头中记录的信息计算出此索引帧所对应的正常播放时间，计算方法如下：
假设条件和上面预览索引轨道生成中的例子相同，即用户点击了正在播放的预览视频流的第5帧，而此帧对应于正常视频流中的第100帧，此时对应的正常播放时间为NormalTime，则：
NormalTime＝(100-1)*Ndifference＝AddDifference+(5-1)*Idifference；
其中AddDiffernce为包扩展头中的数据，(5-1)*Idifference对应于包头中timestamp值；
5.播放器应该能够根据前一步得到的NormalTime通过上行请求从新的播放时间开始播放。
Claims (4)
1.一种基于关键帧的视频流索引播放方法，其特征在于包括步骤：
在视频播放器中加入预览播放窗口；
在视频文件中的每个视频流中建立一个索引轨道；
视频播放器根据预览播放窗口的内容选择主播放的内容。
2.按权利要求1所述的方法，其特征在于：视频播放器包括主播放窗口和预览播放窗口，主播放窗口中进行正常的视频播放，预览窗口中依次按固定帧率播放多幅索引关键帧。
3.按权利要求1所述的方法，其特征在于所述的在每个视频流中建立一个索引轨道包括步骤：
用关键帧选择算法从视频流中选出关键帧；
生成trak.meda.minf.stbl.stsd对象，设定预览索引轨道的时标为视频流的正常索引轨道中的时标；
生成预览索引轨道中的时间戳信息时，相邻帧之间时间戳的差值应该为常数；
在生成预览索引轨道的样本数据时，记录下此样本数据对应的在视频流正常播放时的时间戳信息。
4.按权利要求3所述的方法，其特征在于所述的从视频流中选出关键帧在生成过程中在压缩域进行或预先在原始视频流中对关键帧进行标注。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN02103273A CN1444398A (zh) | 2002-03-12 | 2002-03-12 | 基于关键帧的视频流索引播放系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN02103273A CN1444398A (zh) | 2002-03-12 | 2002-03-12 | 基于关键帧的视频流索引播放系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN1444398A true CN1444398A (zh) | 2003-09-24 |
Family
ID=27810753
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN02103273A Pending CN1444398A (zh) | 2002-03-12 | 2002-03-12 | 基于关键帧的视频流索引播放系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN1444398A (zh) |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100426862C (zh) * | 2006-05-19 | 2008-10-15 | 北京中星微电子有限公司 | 在播放多媒体文件时获得当前播放时间的方法和装置 |
| CN101366027A (zh) * | 2005-11-15 | 2009-02-11 | 耶路撒冷希伯来大学伊森姆研究发展公司 | 用于产生视频概要的方法和系统 |
| WO2009115011A1 (zh) * | 2008-03-19 | 2009-09-24 | 华为技术有限公司 | 实现流媒体定位播放的方法、装置及系统 |
| CN100591112C (zh) * | 2008-11-07 | 2010-02-17 | 武汉烽火网络有限责任公司 | 一种多媒体数据的存储方法及精确定位回放位置的方法 |
| CN101076111B (zh) * | 2006-11-15 | 2010-09-01 | 腾讯科技（深圳）有限公司 | 一种获取视频流中关键帧段定位信息的方法 |
| CN101980533A (zh) * | 2010-11-12 | 2011-02-23 | 中国华录集团有限公司 | 一种基于索引文件实现传输流文件特技模式功能的方法 |
| CN101321265B (zh) * | 2007-06-07 | 2011-03-16 | 中兴通讯股份有限公司 | 对等网络媒体点播跨帧播放方式的实现方法及系统 |
| CN101326828B (zh) * | 2005-10-11 | 2011-06-08 | 韩国电子通信研究院 | 分层视频编码的方法及使用该方法的编解码器 |
| CN102547213A (zh) * | 2011-12-23 | 2012-07-04 | 南京超然科技有限公司 | 一种用于视频会议系统的视频成像预览方法 |
| CN102802079A (zh) * | 2012-08-24 | 2012-11-28 | 广东欧珀移动通信有限公司 | 一种媒体播放器的视频预览片段生成方法 |
| CN103313091A (zh) * | 2012-09-27 | 2013-09-18 | 中兴通讯股份有限公司 | 倍速播放方法、装置及系统 |
| US8949235B2 (en) | 2005-11-15 | 2015-02-03 | Yissum Research Development Company Of The Hebrew University Of Jerusalem Ltd. | Methods and systems for producing a video synopsis using clustering |
| CN105100961A (zh) * | 2015-07-23 | 2015-11-25 | 华为技术有限公司 | 视频缩略图生成方法及生成装置 |
| CN105282560A (zh) * | 2014-06-24 | 2016-01-27 | Tcl集团股份有限公司 | 一种快速播放网络视频的方法及系统 |
| US9799376B2 (en) | 2014-09-17 | 2017-10-24 | Xiaomi Inc. | Method and device for video browsing based on keyframe |
| CN110740290A (zh) * | 2018-07-20 | 2020-01-31 | 浙江宇视科技有限公司 | 监控录像预览方法及装置 |
-
2002
- 2002-03-12 CN CN02103273A patent/CN1444398A/zh active Pending
Cited By (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101326828B (zh) * | 2005-10-11 | 2011-06-08 | 韩国电子通信研究院 | 分层视频编码的方法及使用该方法的编解码器 |
| US8514248B2 (en) | 2005-11-15 | 2013-08-20 | Yissum Research Development Company Of The Hebrew University Of Jerusalem Ltd. | Method and system for producing a video synopsis |
| CN101366027A (zh) * | 2005-11-15 | 2009-02-11 | 耶路撒冷希伯来大学伊森姆研究发展公司 | 用于产生视频概要的方法和系统 |
| US8949235B2 (en) | 2005-11-15 | 2015-02-03 | Yissum Research Development Company Of The Hebrew University Of Jerusalem Ltd. | Methods and systems for producing a video synopsis using clustering |
| CN101366027B (zh) * | 2005-11-15 | 2013-03-20 | 耶路撒冷希伯来大学伊森姆研究发展公司 | 用于产生视频概要的方法和系统 |
| CN100426862C (zh) * | 2006-05-19 | 2008-10-15 | 北京中星微电子有限公司 | 在播放多媒体文件时获得当前播放时间的方法和装置 |
| CN101076111B (zh) * | 2006-11-15 | 2010-09-01 | 腾讯科技（深圳）有限公司 | 一种获取视频流中关键帧段定位信息的方法 |
| CN101321265B (zh) * | 2007-06-07 | 2011-03-16 | 中兴通讯股份有限公司 | 对等网络媒体点播跨帧播放方式的实现方法及系统 |
| WO2009115011A1 (zh) * | 2008-03-19 | 2009-09-24 | 华为技术有限公司 | 实现流媒体定位播放的方法、装置及系统 |
| CN101540881B (zh) * | 2008-03-19 | 2011-04-13 | 华为技术有限公司 | 实现流媒体定位播放的方法、装置及系统 |
| US8875201B2 (en) | 2008-03-19 | 2014-10-28 | Huawei Technologies Co., Ltd. | Method, device and system for implementing seeking play of stream media |
| CN100591112C (zh) * | 2008-11-07 | 2010-02-17 | 武汉烽火网络有限责任公司 | 一种多媒体数据的存储方法及精确定位回放位置的方法 |
| CN101980533A (zh) * | 2010-11-12 | 2011-02-23 | 中国华录集团有限公司 | 一种基于索引文件实现传输流文件特技模式功能的方法 |
| CN102547213A (zh) * | 2011-12-23 | 2012-07-04 | 南京超然科技有限公司 | 一种用于视频会议系统的视频成像预览方法 |
| CN102802079A (zh) * | 2012-08-24 | 2012-11-28 | 广东欧珀移动通信有限公司 | 一种媒体播放器的视频预览片段生成方法 |
| CN103313091A (zh) * | 2012-09-27 | 2013-09-18 | 中兴通讯股份有限公司 | 倍速播放方法、装置及系统 |
| WO2014048198A1 (zh) * | 2012-09-27 | 2014-04-03 | 中兴通讯股份有限公司 | 倍速播放方法、装置及系统 |
| CN105282560A (zh) * | 2014-06-24 | 2016-01-27 | Tcl集团股份有限公司 | 一种快速播放网络视频的方法及系统 |
| CN105282560B (zh) * | 2014-06-24 | 2019-06-04 | Tcl集团股份有限公司 | 一种快速播放网络视频的方法及系统 |
| US9799376B2 (en) | 2014-09-17 | 2017-10-24 | Xiaomi Inc. | Method and device for video browsing based on keyframe |
| CN105100961A (zh) * | 2015-07-23 | 2015-11-25 | 华为技术有限公司 | 视频缩略图生成方法及生成装置 |
| CN105100961B (zh) * | 2015-07-23 | 2018-03-13 | 华为技术有限公司 | 视频缩略图生成方法及生成装置 |
| CN110740290A (zh) * | 2018-07-20 | 2020-01-31 | 浙江宇视科技有限公司 | 监控录像预览方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN1444398A (zh) | 基于关键帧的视频流索引播放系统 | |
| CN102598688B (zh) | 流式传输经编码视频数据 | |
| Acharya et al. | Characterizing user access to videos on the world wide web | |
| US6557042B1 (en) | Multimedia summary generation employing user feedback | |
| US7243140B2 (en) | Multi-level skimming of multimedia content using playlists | |
| CA2140850C (en) | Networked system for display of multimedia presentations | |
| EP1233591B1 (en) | Progressive streaming media rendering | |
| US6370543B2 (en) | Display of media previews | |
| US5903892A (en) | Indexing of media content on a network | |
| US9171545B2 (en) | Browsing and retrieval of full broadcast-quality video | |
| US7877774B1 (en) | Browsing and retrieval of full broadcast-quality video | |
| US8645832B2 (en) | Methods and apparatus for interactive map-based analysis of digital video content | |
| US6449653B2 (en) | Interleaved multiple multimedia stream for synchronized transmission over a computer network | |
| US20130073981A1 (en) | Methods and apparatus for interactive network sharing of digital video content | |
| US20050154679A1 (en) | System for inserting interactive media within a presentation | |
| EP1584037A2 (en) | Methods and apparatus for interactive point-of-view authoring of digital video content | |
| JP5064140B2 (ja) | ストリーミング情報の再生制御方法 | |
| JP4994623B2 (ja) | テキスト編集・再生装置、コンテンツ編集・再生装置及びテキスト編集・再生方法 | |
| CN1595970A (zh) | 根据开始/结束片段特定画面检测广告片段的方法及系统 | |
| JPH10276388A (ja) | 画像処理装置および画像処理方法、画像再生装置および画像再生方法、並びに記録媒体 | |
| CN1625261A (zh) | 添加时间码的视频流处理技术 | |
| CN1223191C (zh) | 会议电视流媒体数据管理方法 | |
| KR19990072265A (ko) | 디지털비디오스트림을위한데이터애노테이션시스템 | |
| Bomcke et al. | An interactive video streaming architecture for H. 264/AVC compliant players | |
| US20230276105A1 (en) | Information processing apparatus, information processing apparatus, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |