CN111866574A - 一种移动端流媒体实时倒放方法 - Google Patents

一种移动端流媒体实时倒放方法 Download PDF

Info

Publication number
CN111866574A
CN111866574A CN201910355822.4A CN201910355822A CN111866574A CN 111866574 A CN111866574 A CN 111866574A CN 201910355822 A CN201910355822 A CN 201910355822A CN 111866574 A CN111866574 A CN 111866574A
Authority
CN
China
Prior art keywords
playing
mobile terminal
decoding
streaming media
picture frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910355822.4A
Other languages
English (en)
Inventor
张玉峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Kaiqi Technology Co ltd
Original Assignee
Zhejiang Kaiqi Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Kaiqi Technology Co ltd filed Critical Zhejiang Kaiqi Technology Co ltd
Priority to CN201910355822.4A priority Critical patent/CN111866574A/zh
Publication of CN111866574A publication Critical patent/CN111866574A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种移动端流媒体实时倒放方法，属于视频播放技术。本发明方法利用流媒体技术对摄影采集的数据进行编码压缩存储和分段网络传输到移动端缓冲区缓存；使用计算机程序控制在缓冲区形成数据栈，由移动端的GPU对传输到移动端缓冲区的分段压缩文件进行解码还原成图片帧数据，由移动端的CPU控制经GPU解码还原的图片帧数据入栈和出栈，解码时按照关键帧分割成多个子过程，每个解码子过程向前解码并顺序入栈，播放时图片帧数据倒序出栈，解码完一个过程后向后跳到上一个子过程继续解码，实现实时倒放和任意位置的播放方向可切换，解决了现有现有流媒体播放器不能由用户随时切换播放方向和移动端设备播放时容易滞卡的问题。

Description

一种移动端流媒体实时倒放方法
技术领域
本发明属于视频播放技术领域，尤其与一种移动端流媒体实时倒放方法有关。
背景技术
在网络技术上，流媒体（streaming media）是指将一连串的媒体数据压缩后，经过网上分段发送数据，在网上即时传输影音以供观赏的一种技术与过程，此技术使得数据包得以像流水一样发送；如果不使用此技术，就必须在使用前下载整个媒体文件。流媒体技术是视频和声音信息经过压缩处理后放上网站服务器，让用户一边下载一边观看、收听，而不要等整个压缩文件下载到自己的计算机上才可以观看的网络传输技术。该技术先在使用者端的计算机上创建一个缓冲区，在播放前预先下一段数据作为缓冲，在网路实际连线速度小于播放所耗的速度时，播放程序就会取用一小段缓冲区内的数据，这样可以避免播放的中断，也使得播放品质得以保证。流媒体实现的关键技术就是流式传输，流媒体的传输过程中需要缓存的支持。
视频播放的原理是单帧图片的快速连续渲染，连续的图像变化每秒超过24帧画面以上时，根据视觉暂留原理，人眼无法辨别单幅的静态画面；看上去是平滑连续的视觉效果，这样连续的画面叫做视频。流媒体视频播放时需要对传输到缓存中的压缩文件进行解压。
视频倒放就是图片帧的倒序播放。要实现倒序播放就需要对压缩文件进行倒序解码，但目前视频播放器不能有效支持倒序解码，所以倒放视频需要通过预先制作好反向的短视频，然后以正向播放的方式播放该短视频实现视频内容的倒放，因而也不能由用户随时切换播放方向。
移动端主要是指手机或者具有多种应用功能的智能手机以及平板电脑。这类设备运算资源有限，解码速率可能跟不上视频帧速率，就会出现滞卡现象。
发明内容
本发明目的旨在解决现有流媒体播放器不能由用户随时切换播放方向和移动端设备由于运算资源限制导致流媒体播放时容易滞卡的问题，提供一种能使移动端设备顺畅倒序播放并支持用户随时切换播放方向的移动端流媒体实时倒放方法。
为此，本发明采用以下技术方案：一种移动端流媒体实时倒放方法，其特征是，利用流媒体技术对摄影采集的数据进行编码压缩存储和分段网络传输到移动端缓冲区缓存，缓存的文件长度要满足如下关系：N>Intr*fr*fr/sp（N：缓存帧数；Intr：关键帧间隔，单位秒；fr：视频帧速率，单位帧/秒；sp：解码速率，单位帧/秒）；使用计算机程序控制在缓冲区形成数据栈，由移动端的GPU对传输到移动端缓冲区的分段压缩文件进行解码还原成图片帧数据，由移动端的CPU控制经GPU解码还原的图片帧数据入栈和出栈，解码时按照关键帧分割成多个子过程，每个解码子过程向前解码并顺序入栈，播放时图片帧数据倒序出栈，解码完一个过程后向后跳到上一个子过程继续解码，形成宏观上解码方式是向后的，微观上每一个子过程解码上向前的。用户不管是在哪一个阶段切换播放方向进行倒放，总是对应上某一个子过程，从该子过程顺序解码入栈，倒序出栈播放，再向后跳到上一个子过程继续解码，实现任意位置切换播放方向。
本发明可以达到以下有益效果：通过采用CPU软解和GPU硬解结合的处理模式，解决了移动端运算资源受限的问题，使视频播放顺畅；计算机程序控制解码过程分成多个子过程，每一个子过程向前解码并顺序入栈，播放时图片帧数据倒序出栈，解码完一个过程后向后跳到上一个子过程继续解码，实现了实时倒放和任意位置的播放方向可切换。
具体实施方式
下面对本发明的具体实施方式进行详细描述，所描述的实施例只是对本发明创造的说明和解释，并不构成对本发明的唯一限定。
本发明方法利用流媒体技术对摄影采集的数据进行编码压缩存储和分段网络传输到移动端缓冲区缓存，缓存的文件长度要满足如下关系：N>Intr*fr*fr/sp（N：缓存帧数；Intr：关键帧间隔，单位秒；fr：视频帧速率，单位帧/秒；sp：解码速率，单位帧/秒）；使用计算机程序控制在缓冲区形成数据栈，由移动端的GPU对传输到移动端缓冲区的分段压缩文件进行解码还原成图片帧数据，由移动端的CPU控制经GPU解码还原的图片帧数据入栈和出栈，解码时按照关键帧分割成多个子过程，每个解码子过程向前解码并顺序入栈，播放时图片帧数据倒序出栈，解码完一个过程后向后跳到上一个子过程继续解码，形成宏观上解码方式是向后的，微观上每一个子过程解码上向前的。

Claims (1)

1.一种移动端流媒体实时倒放方法，其特征在于：利用流媒体技术对摄影采集的数据进行编码压缩存储和分段网络传输到移动端缓冲区缓存，缓存的文件长度要满足如下关系：N>Intr*fr*fr/sp（N：缓存帧数；Intr：关键帧间隔，单位秒；fr：视频帧速率，单位帧/秒；sp：解码速率，单位帧/秒）；使用计算机程序控制在缓冲区形成数据栈，由移动端的GPU对传输到移动端缓冲区的分段压缩文件进行解码还原成图片帧数据，由移动端的CPU控制经GPU解码还原的图片帧数据入栈和出栈，解码时按照关键帧分割成多个子过程，每个解码子过程向前解码并顺序入栈，播放时图片帧数据倒序出栈，解码完一个过程后向后跳到上一个子过程继续解码。
CN201910355822.4A 2019-04-29 2019-04-29 一种移动端流媒体实时倒放方法 Pending CN111866574A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910355822.4A CN111866574A (zh) 2019-04-29 2019-04-29 一种移动端流媒体实时倒放方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910355822.4A CN111866574A (zh) 2019-04-29 2019-04-29 一种移动端流媒体实时倒放方法

Publications (1)

Publication Number Publication Date
CN111866574A true CN111866574A (zh) 2020-10-30

Family

ID=72966279

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910355822.4A Pending CN111866574A (zh) 2019-04-29 2019-04-29 一种移动端流媒体实时倒放方法

Country Status (1)

Country Link
CN (1) CN111866574A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114979763A (zh) * 2022-04-13 2022-08-30 深圳市有为信息技术发展有限公司 视频回放时的播放控制方法和装置、视频回放系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101931808A (zh) * 2010-07-26 2010-12-29 华为技术有限公司 文件逆序播放方法及装置
CN103281528A (zh) * 2013-04-10 2013-09-04 深圳康佳通信科技有限公司 一种流媒体解码方法、系统及移动终端
US20130294526A1 (en) * 2012-05-01 2013-11-07 Kevin Thornberry Smooth reverse video playback on low-cost current generation set-top box hardware
CN106507204A (zh) * 2016-12-07 2017-03-15 腾讯科技（上海）有限公司 一种视频倒放方法和装置
CN107222779A (zh) * 2017-06-08 2017-09-29 浙江大华技术股份有限公司 一种视频倒放的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101931808A (zh) * 2010-07-26 2010-12-29 华为技术有限公司 文件逆序播放方法及装置
US20130294526A1 (en) * 2012-05-01 2013-11-07 Kevin Thornberry Smooth reverse video playback on low-cost current generation set-top box hardware
CN103281528A (zh) * 2013-04-10 2013-09-04 深圳康佳通信科技有限公司 一种流媒体解码方法、系统及移动终端
CN106507204A (zh) * 2016-12-07 2017-03-15 腾讯科技（上海）有限公司 一种视频倒放方法和装置
CN107222779A (zh) * 2017-06-08 2017-09-29 浙江大华技术股份有限公司 一种视频倒放的方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114979763A (zh) * 2022-04-13 2022-08-30 深圳市有为信息技术发展有限公司 视频回放时的播放控制方法和装置、视频回放系统

Similar Documents

Publication Publication Date Title
US10027927B2 (en) High quality multimedia transmission from a mobile device for live and on-demand viewing
WO2016131223A1 (zh) 一种视频帧丢帧方法及视频发送装置
US10349069B2 (en) Software hardware hybrid video encoder
US8238420B1 (en) Video content transcoding for mobile devices
US20070217505A1 (en) Adaptive Decoding Of Video Data
US8483551B2 (en) Method for generating double-speed IDR-unit for trick play, and trick play system and method using the same
US20090220003A1 (en) Method of compressing video data and a media player for implementing the method
US9531983B2 (en) Decoding interdependent frames of a video for display
US20150195531A1 (en) Encoding control apparatus and encoding control method
US9055272B2 (en) Moving image reproduction apparatus, information processing apparatus, and moving image reproduction method
TW201536042A (zh) 用於移動視訊播放的方法和系統
CN110708569B (zh) 一种视频处理方法、装置、电子设备及存储介质
CN114584769A (zh) 一种视角切换方法及装置
WO2022021519A1 (zh) 视频解码方法、系统、设备及计算机可读存储介质
JP4322944B2 (ja) 映像再生装置、映像再生方法及び映像再生処理用プログラム
CN111866574A (zh) 一种移动端流媒体实时倒放方法
CN108184163A (zh) 一种视频播放方法、存储介质及播放器
KR20040037190A (ko) 비디오 캡쳐 장치 및 저속 데이타 링크를 통해 고품질의비디오를 송신하는 방법
CN112449239A (zh) 视频播放方法、装置及电子设备
WO2022205064A1 (zh) 视频编码器、视频解码器及相应方法
CN117579843B (zh) 视频编码处理方法及电子设备
JP2003309847A (ja) 画像伝送方法および画像伝送装置
US20230300426A1 (en) Dual stream dynamic gop access based on viewport change
CN116962764A (zh) 流媒体传输方法、装置、设备和存储介质
CN110996162A (zh) 多节目音视频流的无缝切换播放方法、媒体播放器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20201030