JP7166311B2 - Systems and methods for adaptive buffering for digital video streaming - Google Patents

Systems and methods for adaptive buffering for digital video streaming Download PDF

Info

Publication number
JP7166311B2
JP7166311B2 JP2020108513A JP2020108513A JP7166311B2 JP 7166311 B2 JP7166311 B2 JP 7166311B2 JP 2020108513 A JP2020108513 A JP 2020108513A JP 2020108513 A JP2020108513 A JP 2020108513A JP 7166311 B2 JP7166311 B2 JP 7166311B2
Authority
JP
Japan
Prior art keywords
playback
digital video
video content
stream
buffer time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020108513A
Other languages
Japanese (ja)
Other versions
JP2020156111A (en
Inventor
ビームセン スリ アミット
Original Assignee
ディビックス, エルエルシー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ディビックス, エルエルシー filed Critical ディビックス, エルエルシー
Publication of JP2020156111A publication Critical patent/JP2020156111A/en
Application granted granted Critical
Publication of JP7166311B2 publication Critical patent/JP7166311B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/65Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/762Media network packet handling at the source 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching
    • H04L67/5683Storage of data provided by user terminals, i.e. reverse caching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4383Accessing a communication channel
    • H04N21/4384Accessing a communication channel involving operations to reduce the access time, e.g. fast-tuning for reducing channel switching latency
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Description

(発明の分野)
本発明は、概して、適応ストリーミングに関し、より具体的には、デジタルビデオのストリーミングを適応的にバッファするシステムに関する。
(Field of Invention)
The present invention relates generally to adaptive streaming, and more particularly to systems for adaptively buffering streaming digital video.

(背景)
用語「メディアをストリーミングする」は、再生デバイス上におけるメディアの再生を説明しており、メディアは、サーバ上に記憶され、再生の間、ネットワークを経由して、再生デバイスに継続的に送信される。典型的には、再生デバイスは、メディアの次のポーションの受信に先立って、全てのバッファされたメディアの再生を完了するため、再生デバイスは、再生の間、任意の所与の時間において、十分な量のメディアをバッファ内に記憶し、再生の中断を防止する。適応ビットレートストリーミングまたは適応ストリーミングは、本ストリーミング条件(例えば、ユーザのネットワーク帯域幅およびCPU容量)をリアルタイムに検出すること、ならびにそれに応じてストリーミングされるメディアの品質を調節することを伴う。典型的には、ソースメディアは、複数のビットレートでエンコードされ、再生デバイスまたはクライアントは、利用可能なリソースに応じて、異なるエンコードのストリーミング間で切り替える。
(background)
The term "streaming media" describes the playback of media on a playback device, where the media is stored on a server and continuously transmitted to the playback device over the network during playback. . Typically, the playback device completes playback of all buffered media prior to receipt of the next portion of media, so that the playback device has enough buffers at any given time during playback. amount of media in the buffer to prevent playback interruptions. Adaptive bitrate streaming, or adaptive streaming, involves detecting the present streaming conditions (eg, the user's network bandwidth and CPU capacity) in real time and adjusting the quality of the streamed media accordingly. Typically, the source media is encoded at multiple bitrates, and the playback device or client switches between streaming different encodings depending on available resources.

適応ストリーミングソリューションは、典型的には、RFC 2616として、Internet Engineering Task ForceおよびWorld Wide Web Consortiumによって公開されたハイパーテキスト転送プロトコル(HTTP)、またはRFC 2326として、Internet Engineering Task Forceによって公開されたリアルタイムストリーミングプロトコル(RTSP)のいずれかを利用して、サーバと再生デバイスとの間でメディアをストリーミングする。HTTPは、再生デバイスが、ファイル内のバイト範囲を要求することを可能にする、ステートレスプロトコルである。HTTPは、サーバが、再生デバイスから受信された要求に応答するために、情報を要求する再生デバイスの状態または再生デバイスによって要求されたバイト範囲に関する情報を記録することが要求されないため、ステートレスとして説明される。RTSPは、ストリーミングメディアサーバを制御するために使用されるネットワーク制御プロトコルである。再生デバイスは、メディアをストリーミングするサーバに、「再生」および「一時停止」等の制御コマンドを発行し、メディアファイルの再生を制御する。RTSPが利用されるとき、メディアサーバは、各クライアントデバイスの状態を記録し、クライアントデバイスから受信した命令およびクライアントの状態に基づいて、ストリーミングするためのメディアを判定する。 Adaptive streaming solutions are typically Hypertext Transfer Protocol (HTTP), published by the Internet Engineering Task Force and the World Wide Web Consortium as RFC 2616, or Real-Time Streaming, published by the Internet Engineering Task Force as RFC 2326. Stream media between the server and the playback device using any of the protocols (RTSP). HTTP is a stateless protocol that allows playback devices to request byte ranges within a file. HTTP is described as stateless because, in order to respond to requests received from playback devices, servers are not required to record information about the state of the playback device requesting information or the byte range requested by the playback device. be done. RTSP is a network control protocol used to control streaming media servers. The playback device issues control commands, such as "play" and "pause", to the media streaming server to control playback of the media file. When RTSP is utilized, the media server records the state of each client device and determines media to stream based on instructions received from the client device and the state of the client.

適応ストリーミングシステムでは、ソースメディアは、典型的には、実際のビデオおよびオーディオデータを含有する、いくつかの代替ストリームを指示するトップレベルインデックスファイルとして、メディアサーバ上に記憶される。各ストリームは、典型的には、1つ以上のコンテナファイル内に記憶される。異なる適応ストリーミングソリューションは、典型的には、異なるインデックスおよびメディアコンテナを利用する。World Wide Web Consortiumによって開発された同期マルチメディア統合言語(SMIL)は、Microsoft Corporation(Redmond,Washington)によって開発されたIISスムーズストリーミング、およびAdobe Systems Incorporated(San Jose,California)によって開発されたフラッシュダイナミックストリーミングを含む、いくつかの適応ストリーミングソリューションにおいて、インデックスを作成するために利用される。Apple Computer Incorporated(Cupertino,California)によって開発されたHTTP適応ビットレートストリーミングは、典型的には、メディアコンテナファイルを識別する、URIのリストを含有するテキストファイルである、拡張M3U再生リストファイル(.M3U8)を使用して、インデックスファイルを実装する。最も一般に使用されるメディアコンテナ形式は、MPEG-4 Part 14(すなわち、ISO/IEC 14496-14)に規定されるMP4コンテナ形式、およびMPEG-2 Part 1(すなわち、ISO/IEC規格13818-1)に規定されるMPEGトランスポートストリーム(TS)コンテナである。MP4コンテナ形式は、IISスムーズストリーミングおよびフラッシュダイナミックストリーミングにおいて利用される。TSコンテナは、HTTP適応ビットレートストリーミングにおいて使用される。 In adaptive streaming systems, source media is typically stored on media servers as top-level index files pointing to several alternative streams containing the actual video and audio data. Each stream is typically stored within one or more container files. Different adaptive streaming solutions typically utilize different indexes and media containers. Synchronous Multimedia Integration Language (SMIL) developed by the World Wide Web Consortium, IIS Smooth Streaming developed by Microsoft Corporation (Redmond, Washington), and Flash Dynamic Streaming developed by Adobe Systems Incorporated (San Jose, Calif.) It is used for indexing in some adaptive streaming solutions, including Developed by Apple Computer Incorporated (Cupertino, Calif.), HTTP adaptive bitrate streaming typically uses extended M3U playlist files (.M3U8 playlist files), which are text files containing a list of URIs that identify media container files. ) to implement the index file. The most commonly used media container formats are the MP4 container format specified in MPEG-4 Part 14 (i.e. ISO/IEC 14496-14) and MPEG-2 Part 1 (i.e. ISO/IEC standard 13818-1). MPEG transport stream (TS) container defined in . The MP4 container format is utilized in IIS Smooth Streaming and Flash Dynamic Streaming. TS containers are used in HTTP adaptive bitrate streaming.

Matroskaコンテナは、オープン標準プロジェクトとしてMatroska非営利団体(Aussonne,France)によって開発されたメディアコンテナである。Matroskaコンテナは、拡張バイナリメタ言語(EBML)に基づき、これは、拡張マークアップ言語(XML)のバイナリ派生物である。Matroskaコンテナのデコードは、多くの消費者電子機器(CE)デバイスによってサポートされている。DivX,LLC(San Diego,California)によって開発されたDivX Plusファイル形式は、Matroskaコンテナ形式の拡張子を利用する(すなわち、Matroskaコンテナ形式規格に基づくが、Matroska形式内に規定されていない要素を含む)。 The Matroska container is a media container developed by the Matroska non-profit organization (Aussonne, France) as an open standards project. The Matroska container is based on Extensible Binary Metalanguage (EBML), which is a binary derivative of Extensible Markup Language (XML). Decoding of Matroska containers is supported by many consumer electronics (CE) devices. The DivX Plus file format, developed by DivX, LLC (San Diego, California), utilizes the Matroska container format extension (i.e., is based on the Matroska container format standard but contains elements not specified within the Matroska format). ).

インターネットを経由してメディアコンテンツの送達のための一貫した手段を提供するために、国際標準化機構(ISO)および国際電気標準会議(IEC)は、HTTP(DASH)規格を経由したダイナミック適応ストリーミングを推進している。DASH規格は、HTTPを使用したMPEGコンテンツの送達のためのメディアコンテンツおよびコンテンツの記述のための形式を規定する。DASHによると、表現のためのメディアコンテンツの各コンポーネントは、1つ以上のストリーム内に記憶される。ストリームのそれぞれは、セグメントに分割される。メディア表現記述(MPD)は、ストリームのそれぞれの内のセグメントについての情報と、再生の間にメディアコンテンツを表現するために必要とされる他の情報とを含む、データ構造である。再生デバイスは、再生のための適応ビットレートストリーミングを使用してメディアコンテンツのコンポーネントを取得するために、MPDを使用する。 To provide a consistent means for delivery of media content over the Internet, the International Organization for Standardization (ISO) and the International Electrotechnical Commission (IEC) are promoting dynamic adaptive streaming via the HTTP (DASH) standard. is doing. The DASH standard defines formats for media content and content descriptions for the delivery of MPEG content using HTTP. According to DASH, each component of media content for presentation is stored in one or more streams. Each stream is divided into segments. A Media Presentation Description (MPD) is a data structure that contains information about segments within each of the streams and other information needed to represent the media content during playback. Playback devices use the MPD to obtain media content components using adaptive bitrate streaming for playback.

(発明の要約)
本発明のいくつかの実施形態による、デジタルビデオストリーミングに関する適応バッファリングのためのシステムおよび方法が、図示される。
(Summary of Invention)
Systems and methods for adaptive buffering for digital video streaming are illustrated, according to some embodiments of the present invention.

1つの実施形態は、再生デバイスを含み、再生デバイスは、メモリと、ネットワークインターフェースと、メモリ内に記憶される命令を読み出すプロセッサとを備え、命令は、再生デバイスのバッファ内にデジタルビデオコンテンツをダウンロードし、デジタルビデオコンテンツから最小バッファ時間を受信し、再生デバイスを使用してデジタルビデオコンテンツをスローモーション速度で再生し、スローモーション再生速度因子によって最小バッファ時間を低減させ、再生デバイスを使用して、低減された最小バッファ時間が到達されるまで、デジタルビデオコンテンツをスローモーション速度で再生し続け、再生デバイスを使用して、最小バッファ時間が到達されると、デジタルビデオコンテンツをスローモーション速度より速い速度で再生するようにプロセッサに指示する。 One embodiment includes a playback device comprising a memory, a network interface, and a processor for reading instructions stored in the memory, the instructions downloading digital video content into a buffer of the playback device. receive a minimum buffer time from the digital video content, use the playback device to play the digital video content at slow motion speed, reduce the minimum buffer time by the slow motion playback speed factor, and use the playback device to: Continue playing the digital video content at the slow motion speed until the reduced minimum buffer time is reached, at which time the playback device is used to play the digital video content at a speed faster than the slow motion speed. Instruct the processor to play with

さらなる実施形態では、デジタルビデオコンテンツをダウンロードすることはさらに、マニフェストを要求することと、マニフェストから、エンコードされたメディアを含有するコンテナファイルの場所を抽出することと、エンコードされたメディアを含有するコンテナファイルのポーションを要求することとを含む。 In a further embodiment, downloading the digital video content further comprises requesting a manifest; extracting from the manifest the location of the container file containing the encoded media; and requesting a portion of the file.

別の実施形態では、バッファ内にダウンロードされたエンコードされたメディアを低減された最小バッファ時間と比較することと、エンコードされたメディアが低減された最小バッファ時間を超過するとき、再生デバイスを使用してエンコードされたメディアを再生することとである。 In another embodiment, comparing encoded media downloaded in a buffer to a reduced minimum buffer time and using the playback device when the encoded media exceeds the reduced minimum buffer time. to play media encoded with

なおもさらなる実施形態では、最小バッファ時間は、最小量のメディアをダウンロードし、バッファ内に記憶し、再生の中断を回避するための時間量である。 In still further embodiments, the minimum buffer time is the amount of time to download the minimum amount of media and store it in the buffer to avoid interruptions in playback.

さらに別の実施形態では、最小バッファ時間は、デジタルビデオコンテンツ内において、マニフェストと、インデックスファイルと、デジタルビデオコンテンツによって指示されるファイルとから成る群から選択される場所内に記憶される。 In yet another embodiment, the minimum buffer time is stored within the digital video content in a location selected from the group consisting of a manifest, an index file, and a file pointed to by the digital video content.

さらにさらなる実施形態では、デジタルビデオコンテンツはさらに、マニフェストと、それぞれが代替のデジタルビデオストリームを含有する、複数のコンテナファイルとを含む。 In still further embodiments, the digital video content further includes a manifest and multiple container files, each containing an alternate digital video stream.

さらに別の実施形態では、代替のデジタルビデオストリームは、異なるビットレートでエンコードされるデジタルビデオストリームである。 In yet another embodiment, the alternate digital video stream is a digital video stream encoded at a different bitrate.

再びさらなる実施形態では、デジタルビデオコンテンツは、DASH規格ファイルであり、最小バッファ時間は、メディア表現記述データ構造内に記憶される。 In yet a further embodiment, the digital video content is a DASH standard file and the minimum buffer time is stored within the media presentation description data structure.

再び別の実施形態では、最小バッファ時間を低減させることはさらに、利用可能なデジタルビデオコンテンツを低減された速度で再生することによって、デジタルビデオコンテンツを減少させ、バッファを充填することを含む。 In yet another embodiment, reducing the minimum buffer time further includes reducing the digital video content and filling the buffer by playing the available digital video content at a reduced speed.

さらに付加的な実施形態では、スローモーション再生速度因子は、再生のために消費されるデジタルビデオコンテンツの量を変化させる。 In yet additional embodiments, the slow motion playback speed factor varies the amount of digital video content consumed for playback.

別の付加的な実施形態では、スローモーション速度は、スローモーション再生速度因子に対応する。 In another additional embodiment, the slow motion speed corresponds to the slow motion playback speed factor.

なおもさらにさらなる実施形態では、メモリ内に記憶された命令を読み出すプロセッサを使用して、再生デバイスのバッファ内にデジタルビデオコンテンツをダウンロードすることと、メモリ内に記憶された命令を読み出すプロセッサを使用して、デジタルビデオコンテンツから最小バッファ時間を受信することと、再生デバイスと、メモリ内に記憶された命令を読み出すプロセッサとを使用して、デジタルビデオコンテンツをスローモーション速度で再生することと、再生デバイスを使用して、メモリ内に記憶された命令を読み出すプロセッサを使用して、スローモーション再生速度因子によって最小バッファ時間を低減させることと、再生デバイスと、メモリ内に記憶された命令を読み出すプロセッサとを使用して、最小バッファ時間が到達されると、デジタルビデオコンテンツをスローモーション速度より速い速度で再生することとである。 In still further embodiments, downloading digital video content into a buffer of a playback device using a processor that reads instructions stored in memory; and using a processor that reads instructions stored in memory. receiving a minimum buffer time from the digital video content using a playback device and a processor that reads instructions stored in memory to play back the digital video content at slow motion speed; Using a device to read instructions stored in memory to reduce the minimum buffer time by a slow motion playback speed factor, and a playback device and a processor to read instructions stored in memory and playing back the digital video content at a faster than slow motion speed once the minimum buffer time has been reached.

なおもさらに別の実施形態では、デジタルビデオコンテンツをダウンロードすることはさらに、メモリ内に記憶された命令を読み出すプロセッサを使用して、マニフェストを要求することと、メモリ内に記憶された命令を読み出すプロセッサを使用して、マニフェストからエンコードされたメディアを含有するコンテナファイルの場所を抽出することと、メモリ内に記憶された命令を読み出すプロセッサを使用して、エンコードされたメディアを含有するコンテナファイルのポーションを要求することとを含む。 In still yet another embodiment, downloading the digital video content further comprises requesting the manifest and reading instructions stored in memory using a processor that reads instructions stored in memory. extracting, using a processor, the location of the container file containing the encoded media from the manifest; and using the processor to read instructions stored in memory to locate the container file containing the encoded media. and requesting the potion.

再びなおもさらなる実施形態では、メモリ内に記憶された命令を読み出すプロセッサを使用して、バッファ内にダウンロードされたエンコードされたメディアを低減された最小バッファ時間と比較することと、メモリ内に記憶された命令を読み出すプロセッサを使用して、エンコードされたメディアが低減された最小バッファ時間を超過するとき、再生デバイスを使用してエンコードされたメディアを再生することとである。 Again in yet a further embodiment, using a processor that reads instructions stored in memory to compare the encoded media downloaded in the buffer with the reduced minimum buffer time and the playing back the encoded media using a playback device when the encoded media exceeds the reduced minimum buffer time using the processor reading the encoded instructions.

再びさらに別の実施形態では、最小バッファ時間は、最小量のメディアをダウンロードし、バッファ内に記憶し、再生の中断を回避するための時間量である。 Again, in yet another embodiment, the minimum buffer time is the amount of time to download the minimum amount of media and store it in the buffer to avoid interruptions in playback.

さらなる実施形態では、最小バッファ時間は、デジタルビデオコンテンツ内において、マニフェストと、インデックスファイルと、デジタルビデオコンテンツによって指示されるファイルとから成る群から選択される場所内に記憶される。 In a further embodiment, the minimum buffer time is stored within the digital video content in a location selected from the group consisting of a manifest, an index file, and a file pointed to by the digital video content.

別の実施形態では、デジタルビデオコンテンツはさらに、マニフェストと、それぞれが代替のデジタルビデオストリームを含有する、複数のコンテナファイルとを含む。 In another embodiment, the digital video content further includes a manifest and multiple container files each containing an alternate digital video stream.

なおもさらなる実施形態では、代替のデジタルビデオストリームは、異なるビットレートでエンコードされるデジタルビデオストリームである。 In still further embodiments, the alternative digital video stream is a digital video stream encoded at a different bitrate.

さらに別の実施形態では、デジタルビデオコンテンツは、DASH規格ファイルであり、最小バッファ時間は、メディア表現記述データ構造内に記憶される。 In yet another embodiment, the digital video content is a DASH standard file and the minimum buffer time is stored within the media presentation description data structure.

さらにさらなる実施形態では、最小バッファ時間を低減させることはさらに、利用可能なデジタルビデオコンテンツを低減された速度で再生することによって、デジタルビデオコンテンツを減少させ、バッファを充填することを含む。 In still further embodiments, reducing the minimum buffer time further comprises playing the available digital video content at a reduced speed to reduce the digital video content and fill the buffer.

さらに別の実施形態では、スローモーション再生速度因子は、再生のために消費されるデジタルビデオコンテンツの量を変化させる。 In yet another embodiment, the slow motion playback speed factor varies the amount of digital video content consumed for playback.

再びさらなる実施形態では、スローモーション速度は、スローモーション再生速度因子に対応する。
本明細書は、例えば、以下の項目も提供する。
(項目1)
再生デバイスであって、
メモリと、
ネットワークインターフェースと、
前記メモリ内に記憶された命令を読み出すプロセッサと
を備え、
前記命令は、
再生デバイスのバッファ内にデジタルビデオコンテンツをダウンロードすることと、
前記デジタルビデオコンテンツから最小バッファ時間を受信することと、
前記再生デバイスを使用して前記デジタルビデオコンテンツをスローモーション速度で再生することと、
スローモーション再生速度因子によって前記最小バッファ時間を低減させることと、
前記再生デバイスを使用して、前記低減された最小バッファ時間が到達されるまで、前記デジタルビデオコンテンツを前記スローモーション速度で再生し続けることと、
前記再生デバイスを使用して、前記最小バッファ時間が到達されると、前記デジタルビデオコンテンツを前記スローモーション速度より速い速度で再生することと
を行うようにプロセッサに指示する、再生デバイス。
(項目2)
前記デジタルビデオコンテンツをダウンロードすることはさらに、
マニフェストを要求することと、
前記マニフェストから、エンコードされたメディアを含有するコンテナファイルの場所を抽出することと、
エンコードされたメディアを含有する前記コンテナファイルのポーションを要求することと
を含む、項目1に記載の再生デバイス。
(項目3)
前記バッファ内に前記ダウンロードされたエンコードされたメディアを前記低減された最小バッファ時間と比較することと、
前記エンコードされたメディアが前記低減された最小バッファ時間を超過するとき、前記再生デバイスを使用して、前記エンコードされたメディアを再生することと
をさらに含む、項目2に記載の再生デバイス。
(項目4)
前記最小バッファ時間は、最小量のメディアをダウンロードし、バッファ内に記憶し、再生の中断を回避するための時間量である、項目1に記載の再生デバイス。
(項目5)
前記最小バッファ時間は、前記デジタルビデオコンテンツ内において、マニフェストと、インデックスファイルと、前記デジタルビデオコンテンツによって指示されるファイルとから成る群から選択される場所内に記憶される、項目1に記載の再生デバイス。
(項目6)
前記デジタルビデオコンテンツはさらに、マニフェストと、それぞれが代替のデジタルビデオストリームを含有する、複数のコンテナファイルとを含む、項目5に記載の再生デバイス。
(項目7)
前記代替のデジタルビデオストリームは、異なるビットレートでエンコードされるデジタルビデオストリームである、項目7に記載の再生デバイス。
(項目8)
前記デジタルビデオコンテンツは、DASH規格ファイルであり、前記最小バッファ時間は、メディア表現記述データ構造内に記憶される、項目1に記載の再生デバイス。
(項目9)
前記最小バッファ時間を低減させることはさらに、利用可能なデジタルビデオコンテンツを低減された速度で再生することによって、前記デジタルビデオコンテンツを減少させ、バッファを充填することを含む、項目1に記載の再生デバイス。
(項目10)
前記スローモーション再生速度因子は、再生のために消費される前記デジタルビデオコンテンツの量を変化させる、項目1に記載の再生デバイス。
(項目11)
前記スローモーション速度は、前記スローモーション再生速度因子に対応する、項目1に記載の再生デバイス。
(項目12)
デジタルビデオコンテンツの再生を提供するための方法であって、
メモリ内に記憶された命令を読み出すプロセッサを使用して、再生デバイスのバッファ内にデジタルビデオコンテンツをダウンロードすることと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記デジタルビデオコンテンツから最小バッファ時間を受信することと、
前記再生デバイスと、メモリ内に記憶された前記命令を読み出す前記プロセッサとを使用して、前記デジタルビデオコンテンツをスローモーション速度で再生することと、
前記再生デバイスを使用して、メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、スローモーション再生速度因子によって前記最小バッファ時間を低減させることと、
前記再生デバイスと、メモリ内に記憶された前記命令を読み出す前記プロセッサとを使用して、前記最小バッファ時間が到達されると、前記デジタルビデオコンテンツを前記スローモーション速度より速い速度で再生することと
を含む、デジタルビデオコンテンツの再生を提供するための方法。
(項目13)
前記デジタルビデオコンテンツをダウンロードすることはさらに、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、マニフェストを要求することと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記マニフェストからエンコードされたメディアを含有するコンテナファイルの場所を抽出することと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、エンコードされたメディアを含有する前記コンテナファイルのポーションを要求することと
を含む、項目12に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目14)
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記バッファ内に前記ダウンロードされたエンコードされたメディアを前記低減された最小バッファ時間と比較することと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記エンコードされたメディアが前記低減された最小バッファ時間を超過するとき、前記再生デバイスを使用して前記エンコードされたメディアを再生することと
をさらに含む、項目13に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目15)
前記最小バッファ時間は、最小量のメディアをダウンロードし、バッファ内に記憶し、再生の中断を回避するための時間量である、項目12に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目16)
前記最小バッファ時間は、前記デジタルビデオコンテンツ内において、マニフェストと、インデックスファイルと、前記デジタルビデオコンテンツによって指示されるファイルとから成る群から選択される場所内に記憶される、項目12に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目17)
前記デジタルビデオコンテンツはさらに、マニフェストと、それぞれが代替のデジタルビデオストリームを含有する、複数のコンテナファイルとを含む、項目16に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目18)
前記代替のデジタルビデオストリームは、異なるビットレートでエンコードされるデジタルビデオストリームである、項目17に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目19)
前記デジタルビデオコンテンツは、DASH規格ファイルであり、前記最小バッファ時間は、メディア表現記述データ構造内に記憶される、項目12に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目20)
前記最小バッファ時間を低減させることはさらに、利用可能なデジタルビデオコンテンツを低減された速度で再生することによって、前記デジタルビデオコンテンツを減少させ、バッファを充填することを含む、項目12に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目21)
前記スローモーション再生速度因子は、再生のために消費される前記デジタルビデオコンテンツの量を変化させる、項目12に記載のデジタルビデオコンテンツの再生を提供するための方法。
(項目22)
前記スローモーション速度は、前記スローモーション再生速度因子に対応する、項目12に記載のデジタルビデオコンテンツの再生を提供するための方法。
In yet further embodiments, the slow motion speed corresponds to the slow motion playback speed factor.
This specification also provides the following items, for example.
(Item 1)
a playback device,
memory;
a network interface;
a processor that reads instructions stored in the memory;
with
Said instruction
downloading digital video content into a playback device buffer;
receiving a minimum buffer time from the digital video content;
playing back the digital video content at slow motion speed using the playback device;
reducing the minimum buffer time by a slow motion playback speed factor;
using the playback device to continue playing the digital video content at the slow motion speed until the reduced minimum buffer time is reached;
using the playback device to play back the digital video content at a speed faster than the slow motion speed once the minimum buffer time is reached;
A playback device that instructs the processor to do
(Item 2)
Downloading said digital video content further comprises:
requesting a manifest;
extracting from the manifest the location of a container file containing encoded media;
requesting a portion of the container file containing encoded media;
A playback device according to item 1, comprising:
(Item 3)
comparing the downloaded encoded media in the buffer to the reduced minimum buffer time;
playing back the encoded media using the playback device when the encoded media exceeds the reduced minimum buffer time;
3. The playback device of item 2, further comprising:
(Item 4)
2. The playback device of item 1, wherein the minimum buffer time is the amount of time to download a minimum amount of media and store it in a buffer to avoid interruptions in playback.
(Item 5)
Playback of item 1, wherein the minimum buffer time is stored within the digital video content in a location selected from the group consisting of a manifest, an index file, and a file pointed to by the digital video content. device.
(Item 6)
6. The playback device of item 5, wherein the digital video content further comprises a manifest and a plurality of container files each containing an alternative digital video stream.
(Item 7)
8. A playback device according to item 7, wherein the alternative digital video stream is a digital video stream encoded at a different bitrate.
(Item 8)
2. The playback device of item 1, wherein the digital video content is a DASH standard file and the minimum buffer time is stored within a media presentation description data structure.
(Item 9)
Playing according to item 1, wherein reducing the minimum buffer time further comprises playing the available digital video content at a reduced speed to reduce the digital video content and fill a buffer. device.
(Item 10)
2. The playback device of item 1, wherein the slow motion playback speed factor varies the amount of the digital video content consumed for playback.
(Item 11)
2. The playback device of item 1, wherein the slow motion speed corresponds to the slow motion playback speed factor.
(Item 12)
A method for providing playback of digital video content, comprising:
downloading digital video content into a buffer of a playback device using a processor that reads instructions stored in memory;
receiving a minimum buffer time from the digital video content using the processor reading the instructions stored in memory;
playing back the digital video content at slow motion speed using the playback device and the processor reading the instructions stored in memory;
reducing the minimum buffer time by a slow motion playback speed factor using the processor reading the instructions stored in memory using the playback device;
playing back the digital video content at a speed faster than the slow motion speed when the minimum buffer time is reached using the playback device and the processor reading the instructions stored in memory;
A method for providing playback of digital video content comprising:
(Item 13)
Downloading said digital video content further comprises:
requesting a manifest using the processor that reads the instructions stored in memory;
extracting the location of a container file containing encoded media from the manifest using the processor reading the instructions stored in memory;
requesting a portion of the container file containing encoded media using the processor reading the instructions stored in memory;
13. A method for providing playback of digital video content according to item 12, comprising:
(Item 14)
comparing the downloaded encoded media in the buffer with the reduced minimum buffer time using the processor reading the instructions stored in memory;
Playing the encoded media using the playback device when the encoded media exceeds the reduced minimum buffer time, using the processor to read the instructions stored in memory. things and
14. A method for providing playback of digital video content according to item 13, further comprising:
(Item 15)
13. The method for providing playback of digital video content according to item 12, wherein the minimum buffer time is the amount of time to download and store in the buffer the minimum amount of media to avoid interruptions in playback.
(Item 16)
13. The digital of claim 12, wherein said minimum buffer time is stored within said digital video content within a location selected from the group consisting of a manifest, an index file, and a file pointed to by said digital video content. A method for providing playback of video content.
(Item 17)
17. A method for providing playback of digital video content according to item 16, wherein the digital video content further comprises a manifest and a plurality of container files each containing an alternative digital video stream.
(Item 18)
18. A method for providing playback of digital video content according to item 17, wherein said alternative digital video stream is a digital video stream encoded at a different bitrate.
(Item 19)
13. A method for providing playback of digital video content as recited in item 12, wherein said digital video content is a DASH standard file and said minimum buffer time is stored within a media presentation description data structure.
(Item 20)
13. The digital device of item 12, wherein reducing the minimum buffer time further comprises reducing the digital video content and filling a buffer by playing the available digital video content at a reduced speed. A method for providing playback of video content.
(Item 21)
13. A method for providing playback of digital video content as recited in item 12, wherein said slow motion playback speed factor varies the amount of said digital video content consumed for playback.
(Item 22)
13. A method for providing playback of digital video content as recited in item 12, wherein said slow motion speed corresponds to said slow motion playback speed factor.

図1は、本発明のある実施形態による、適応ビットレートストリーミングシステムのネットワーク図を例証する図である。FIG. 1 is a diagram illustrating a network diagram of an adaptive bitrate streaming system, according to an embodiment of the invention. 図2は、本発明のある実施形態による、適応ビットレートストリーミングシステムの再生デバイスを例証する図である。FIG. 2 is a diagram illustrating a playback device of an adaptive bitrate streaming system, according to an embodiment of the invention. 図3は、本発明のある実施形態による、適応ビットレートストリーミングシステムのサーバを例証する図である。FIG. 3 is a diagram illustrating a server of an adaptive bitrate streaming system, according to an embodiment of the invention. 図4は、本発明のある実施形態による、適応バッファリングプロセスを例証するフローチャートである。FIG. 4 is a flow chart illustrating an adaptive buffering process, according to one embodiment of the invention.

(発明の詳細な開示)
ここで、図面に目を向けると、本発明の多くの実施形態による、ビデオコンテンツの再生の間にデジタルビデオコンテンツの適応バッファリングを提供するためのシステムおよび方法が、図示される。いくつかの実施形態では、最小量のメディアが、再生の中断の可能性を許容可能なレベルに低減させるために、ビデオの再生の開始に先立ってバッファ内に記憶されることが所望される。種々の実施形態では、この最小量のメディアをダウンロードするための時間量は、最小バッファ時間(MBT)と称されることができる。MBTは、DASH規格のメディア表現記述(MPD)データ構造内に記憶されることができる。いくつかの実施形態では、MBTは、マニフェスト内および/またはMPDデータ構造のインデックスファイル内に含有されることができる。多くの他の実施形態では、MBTは、MPDデータ構造によって指示されたファイル内に含有されることができる。DASH規格の使用は、例証にすぎず、最小バッファ時間(またはその均等物)が、メディアマニフェスト内ならびに/もしくは他のメディアファイルタイプ内の種々の場所に記憶されることができることが、容易に明白であるはずである。
(Detailed Disclosure of Invention)
Turning now to the drawings, systems and methods for providing adaptive buffering of digital video content during playback of video content are illustrated in accordance with many embodiments of the present invention. In some embodiments, it is desirable that a minimum amount of media is stored in the buffer prior to the start of playback of the video in order to reduce the likelihood of playback interruptions to an acceptable level. In various embodiments, this minimum amount of time to download media can be referred to as the minimum buffer time (MBT). The MBT can be stored within the Media Presentation Description (MPD) data structure of the DASH standard. In some embodiments, the MBT may be contained within the manifest and/or within the index file of the MPD data structure. In many other embodiments, the MBT can be contained within the file pointed to by the MPD data structure. The use of the DASH standard is exemplary only, and it is readily apparent that the minimum buffer time (or its equivalent) can be stored in various places within the media manifest and/or within other media file types. should be.

再生速度の変化(すなわち、スローモーションおよび/または早送り)は、概して、再生のために消費されるメディアの量を変化させる。スローモーション再生は、通常の速度での再生と比較して、所与の時間量内で消費されるメディアの量を低減させる。本発明のいくつかの実施形態では、再生速度を低減させることは、プレーヤがより少ないバッファされたメディアを伴い、かつ再生中の割込みの可能性を有意に増加させることなく再生を開始することを可能にすることができる。 Changes in playback speed (ie, slow motion and/or fast forward) generally change the amount of media consumed for playback. Slow motion playback reduces the amount of media consumed in a given amount of time compared to playback at normal speed. In some embodiments of the invention, reducing the playback speed allows the player to begin playback with less buffered media and without significantly increasing the likelihood of interruptions during playback. can be made possible.

例証的実施例として、本発明のいくつかの実施形態によるメディアは、8秒のMBTを有する。このメディアは、概して、再生の開始に先立って、メディアの8秒をバッファするであろう。同一のメディアが、1/2の速度でのスローモーションにおいて再生される場合、同一のメディアは、概して、4秒の低減されたMBTに基づいて再生を開始することができる。代替として、同一のメディアが、1/4の速度でのスローモーションにおいて再生される場合、同一のメディアは、2秒の低減されたMBTに基づいて再生を開始することができる。加えて、メディアが、1/8のスローモーション速度で再生されるとき、同一のメディアは、1秒の低減されたMBTに基づいて再生を開始することができる。これらは、実施例にすぎず、異なるメディアもまた、異なる速度で再生されることができることが、当業者に容易に明白であるはずである。 As an illustrative example, media according to some embodiments of the invention has an MBT of 8 seconds. This media will typically buffer 8 seconds of media prior to beginning playback. If the same media is played in slow motion at 1/2 speed, the same media can generally start playing based on a reduced MBT of 4 seconds. Alternatively, if the same media is played in slow motion at 1/4 speed, the same media can start playing based on a reduced MBT of 2 seconds. Additionally, when the media is played at ⅛ slow motion speed, the same media can start playing based on a reduced MBT of 1 second. It should be readily apparent to those skilled in the art that these are examples only and that different media can also be played at different speeds.

本発明のいくつかの実施形態による、トリックプレイモードの間、オーディオ再生を提供する、適応ビットレートストリーミングシステムにおいて使用するためのソースビデオのエンコーディングと、適応ビットレートストリーミングを使用するトリックプレイモードでのメディアコンテンツの再生とが、以下にさらに議論される。 Encoding source video for use in an adaptive bitrate streaming system that provides audio playback during trick-play mode and in trick-play mode using adaptive bitrate streaming according to some embodiments of the present invention Playback of media content is discussed further below.

適応ストリーミングシステムアーキテクチャ
ここで、図1に目を向けると、本発明のある実施形態による、適応バッファリングを提供する再生デバイスを含む、適応ストリーミングシステムが、図示される。適応ストリーミングシステム10は、ソースメディアをいくつかの代替ストリームとしてエンコードするように構成される、ソースエンコーダ12を含む。図示される実施形態では、ソースエンコーダは、サーバである。他の実施形態では、ソースエンコーダは、プロセッサと、ソースメディア(限定ではないが、ビデオ、オーディオ、および/または字幕を含む)のトランスコーディングを実施するための十分なリソースとを含む、任意の処理デバイスであることができる。典型的には、ソースエンコーディングサーバ12は、ストリームおよび/またはメタデータ情報を含有する複数のコンテナファイルへのトップレベルインデックスを生成し、そのうちの少なくとも複数は、代替ストリームである。代替ストリームは、同一のメディアコンテンツを異なる方法でエンコードする、ストリームである。多くの事例では、代替ストリームは、異なる最大ビットレートでメディアコンテンツ(限定ではないが、ビデオコンテンツおよび/またはオーディオコンテンツ等)をエンコードする。いくつかの実施形態では、ビデオコンテンツの代替ストリームは、異なる解像度および/または異なるフレームレートでエンコードされる。トップレベルインデックスファイルおよびコンテナファイルは、HTTPサーバ14にアップロードされる。種々の再生デバイスは、次いで、HTTPまたは別の適切なステートレスプロトコルを使用して、インターネット等のネットワーク16を介して、トップレベルインデックスファイル、他のインデックスファイル、ならびに/もしくはコンテナファイルのポーションを要求することができる。
Adaptive Streaming System Architecture Turning now to FIG. 1, an adaptive streaming system including a playback device that provides adaptive buffering is illustrated, according to one embodiment of the present invention. Adaptive streaming system 10 includes a source encoder 12 configured to encode source media as several alternate streams. In the illustrated embodiment, the source encoder is the server. In other embodiments, the source encoder is any process including a processor and sufficient resources to perform transcoding of the source media (including but not limited to video, audio, and/or subtitles). can be a device. Typically, source encoding server 12 generates a top-level index to multiple container files containing stream and/or metadata information, at least some of which are alternate streams. Alternate streams are streams that encode the same media content in different ways. In many instances, alternate streams encode media content (such as, but not limited to, video content and/or audio content) at different maximum bitrates. In some embodiments, alternate streams of video content are encoded at different resolutions and/or different frame rates. The top level index file and container files are uploaded to HTTP server 14 . Various playback devices then request portions of the top-level index file, other index files, and/or container files over a network 16, such as the Internet, using HTTP or another suitable stateless protocol. be able to.

図示される実施形態では、再生デバイスは、パーソナルコンピュータ18、CEプレーヤ、および携帯電話20を含む。他の実施形態では、再生デバイスは、消費者電子機器デバイス、例えば、DVDプレーヤ、Blu-ray(登録商標)プレーヤ、テレビ、セットトップボックス、ビデオゲームコンソール、タブレット、およびHTTPを介してサーバに接続し、エンコードされたメディアを再生することが可能である他のデバイスを含むことができる。具体的アーキテクチャが、図1に示されるが、適応ビットレートストリーミングではなく、従来のストリーミングを実施するシステムを含む、種々のアーキテクチャのいずれかが、再生デバイスが、本発明の実施形態に従って、トップレベルインデックスファイルおよびコンテナファイルのポーションを要求することを可能にするように利用されることができる。 In the illustrated embodiment, playback devices include a personal computer 18, a CE player, and a mobile phone 20. FIG. In other embodiments, the playback device connects to the server via consumer electronics devices such as DVD players, Blu-ray players, televisions, set-top boxes, video game consoles, tablets, and HTTP. and may include other devices capable of playing the encoded media. A specific architecture is shown in FIG. 1, but any of a variety of architectures, including systems that implement conventional streaming rather than adaptive bitrate streaming, can be used by a playback device to perform top-level streaming according to embodiments of the present invention. It can be utilized to allow requesting portions of index files and container files.

再生デバイス
本発明の実施形態による、方法を提供し、かつシステムを構成するためのいくつかのプロセスが、再生デバイスによって実行される。本発明の実施形態による、プロセスを実施することができる、再生デバイス内の関連コンポーネントが、図2に示される。当業者は、再生デバイスが、本発明の説明される実施形態から逸脱することなく、簡潔にするために省略される他のコンポーネントを含んでもよいことを認識するであろう。再生デバイス200は、プロセッサ205と、不揮発性メモリ210と、揮発性メモリ215とを含む。プロセッサ205は、揮発性215または不揮発性メモリ210内に記憶される命令を実施し、メモリ内に記憶されるデータを操作する、プロセッサ、マイクロプロセッサ、コントローラ、またはプロセッサ、マイクロプロセッサ、ならびに/もしくはコントローラの組み合わせである。不揮発性メモリ210は、本発明の実施形態によるプロセスを含むプロセスを実施するように再生デバイス200を構成するために利用されるプロセッサ命令および/または利用されているプロセスのためのデータを記憶することができる。いくつかの実施形態によると、これらの命令は、再生デバイス上でメディアコンテンツの再生を実施する、再生アプリケーション内に含まれる。種々の実施形態によると、再生デバイスソフトウェアおよび/またはファームウェアは、具体的用途に適切な種々の非一過性コンピュータ可読媒体のいずれかに記憶され得る。
Playback Devices Several processes for providing methods and configuring systems according to embodiments of the present invention are performed by playback devices. Relevant components within a playback device capable of implementing processes according to embodiments of the present invention are shown in FIG. Those skilled in the art will recognize that the playback device may include other components omitted for brevity without departing from the described embodiments of the invention. Playback device 200 includes a processor 205 , non-volatile memory 210 and volatile memory 215 . Processor 205 is a processor, microprocessor, controller, or processor, microprocessor, and/or controller that implements instructions stored in volatile 215 or nonvolatile memory 210 and manipulates data stored in memory. is a combination of Non-volatile memory 210 stores processor instructions and/or data for processes being utilized to configure playback device 200 to perform processes, including processes according to embodiments of the present invention. can be done. According to some embodiments, these instructions are included within a playback application that implements playback of media content on a playback device. According to various embodiments, playback device software and/or firmware may be stored on any of a variety of non-transitory computer-readable media suitable for a particular application.

サーバ
本発明の異なる実施形態による、適応ストリーミングシステム内で実施される種々のプロセスが、HTTPサーバ、ソースエンコードサーバ、および/またはローカルならびにネットワーク時間サーバによって実行される。本発明の実施形態による、これらのプロセスのうちの1つ以上を実施する、サーバ内の関連コンポーネントが、図3に示される。当業者は、サーバが、本発明の説明される実施形態から逸脱することなく、簡潔にするために省略される他のコンポーネントを含んでもよいことを認識するであろう。サーバ300は、プロセッサ305と、不揮発性メモリ310と、揮発性メモリ315とを含む。プロセッサ305は、揮発性315または不揮発性メモリ310内に記憶された命令を実施し、メモリ内に記憶されるデータを操作する、プロセッサ、マイクロプロセッサ、コントローラ、もしくはプロセッサ、マイクロプロセッサ、および/またはコントローラの組み合わせである。不揮発性メモリ310は、本発明の実施形態による、プロセスを含むプロセスを実施するようにサーバ300を構成するために利用されるプロセッサ命令および/または利用されているプロセスのためのデータを記憶することができる。いくつかの実施形態によると、メディアコンテンツのエンコーディングを実施するための命令は、エンコーディングアプリケーションの一部である。種々の実施形態では、サーバソフトウェアおよび/またはファームウェアは、具体的用途に適切な種々の非一過性コンピュータ可読媒体のいずれかに記憶されることができる。具体的サーバが、図3に図示されるが、任意の数のプロセスを実施するように構成される、種々のサーバのいずれも、本発明の実施形態に従って利用されることができる。本発明の多くの実施形態による、適応バッファリングプロセスが、下記に説明される。
Servers Various processes implemented within an adaptive streaming system, according to different embodiments of the present invention, are performed by HTTP servers, source encoding servers, and/or local and network time servers. Relevant components within the server that implement one or more of these processes, according to embodiments of the present invention, are shown in FIG. Those skilled in the art will recognize that the server may include other components omitted for brevity without departing from the described embodiments of the invention. Server 300 includes a processor 305 , non-volatile memory 310 and volatile memory 315 . Processor 305 is a processor, microprocessor, controller, or processor, microprocessor, and/or controller that implements instructions stored in the volatile 315 or nonvolatile memory 310 and manipulates data stored in the memory. is a combination of Non-volatile memory 310 stores processor instructions utilized and/or data for processes utilized to configure server 300 to implement processes, including processes, in accordance with embodiments of the present invention. can be done. According to some embodiments, instructions for performing encoding of media content are part of an encoding application. In various embodiments, server software and/or firmware may be stored on any of a variety of non-transitory computer-readable media suitable for a particular application. Although a specific server is illustrated in FIG. 3, any of a variety of servers configured to implement any number of processes can be utilized in accordance with embodiments of the present invention. An adaptive buffering process according to many embodiments of the invention is described below.

適応バッファリングプロセス
本発明の種々の実施形態による、適応バッファリングのためのプロセスが、図4に図示される。プロセス400は、デジタルビデオコンテンツから最小バッファ時間を受信することを含む(402)。デジタルビデオコンテンツは、(限定ではないが)DASH規格、MPEG-4、および/またはMatroskaコンテナを含む種々の形式のいずれかにエンコードされ、記憶されることができる。再生デバイスは、次いで、デジタルビデオコンテンツのダウンロードを開始することができる(404)。
Adaptive Buffering Process A process for adaptive buffering, according to various embodiments of the present invention, is illustrated in FIG. Process 400 includes receiving a minimum buffer time from digital video content (402). Digital video content can be encoded and stored in any of a variety of formats including (but not limited to) the DASH standard, MPEG-4, and/or Matroska containers. The playback device can then begin downloading the digital video content (404).

最小バッファ時間は、スローモーション再生速度因子の関数として、低減される(406)。多くの実施形態では、スローモーション再生速度因子の関数は、再生のために消費されるメディアの量を変化させることができる。種々の実施形態では、再生速度が遅いほど、最小バッファ時間の低減が、より大きくなる。例証的実施例として、本発明のいくつかの実施形態によるメディアは、8秒のMBTを有する。このメディアは、概して、再生の開始に先立って、メディアの8秒をバッファするであろう。同一のメディアが、1/2の速度でのスローモーションにおいて再生される場合、同一のメディアは、概して、4秒の低減されたMBTに基づいて再生を開始することができる。代替として、同一のメディアが、1/4の速度でのスローモーションにおいて再生される場合、同一のメディアは、概して、2秒の低減されたMBTに基づいて再生を開始することができる。加えて、メディアが、1/8のスローモーション速度で再生されるとき、同一のメディアは、概して、1秒の低減されたMBTに基づいて再生を開始することができる。これらは、実施例にすぎず、異なるメディアもまた、異なる速度で再生されることができることが、当業者に容易に明白であるはずである。 The minimum buffer time is reduced 406 as a function of the slow motion playback speed factor. In many embodiments, the slow motion playback speed factor function can vary the amount of media consumed for playback. In various embodiments, the slower the playback speed, the greater the reduction in minimum buffer time. As an illustrative example, media according to some embodiments of the invention has an MBT of 8 seconds. This media will typically buffer 8 seconds of media prior to beginning playback. If the same media is played in slow motion at 1/2 speed, the same media can generally start playing based on a reduced MBT of 4 seconds. Alternatively, if the same media is played in slow motion at 1/4 speed, the same media can generally start playing based on a reduced MBT of 2 seconds. Additionally, when the media is played at ⅛ slow motion speed, the same media can generally start playing based on a reduced MBT of 1 second. It should be readily apparent to those skilled in the art that these are examples only and that different media can also be played at different speeds.

デジタルビデオコンテンツは、スローモーションで再生し始まる(408)。多くの実施形態では、デジタルビデオコンテンツは、MBTバッファが満杯になると、再生し始まる。いくつかの他の実施形態では、MBTバッファが満杯になる前に、再生が、始まる。例証的実施例として、再生は、利用可能な帯域幅がデジタルビデオコンテンツのビットレートより大幅に高いとき、MBTバッファが75%満杯になると、始まり得る。これは、実施例にすぎず、デジタルビデオコンテンツの再生が、(限定ではないが)帯域幅、ビットレート、MBTバッファサイズ、再生速度因子、および/またはシステムハードウェア要件を含む、システム内の種々の因子に依存し得ることが、当業者に容易に明白であるはずである。 Digital video content begins playing in slow motion (408). In many embodiments, digital video content will begin playing when the MBT buffer is full. In some other embodiments, playback begins before the MBT buffer is full. As an illustrative example, playback may begin when the MBT buffer is 75% full when the available bandwidth is significantly higher than the bitrate of the digital video content. This is only an example, and playback of digital video content may vary within a system, including (but not limited to) bandwidth, bitrate, MBT buffer size, playback speed factor, and/or system hardware requirements. It should be readily apparent to one of ordinary skill in the art that the .

スローモーションデジタルビデオコンテンツは、低減された最小バッファ時間が到達されるまで、再生し続ける(410)。デジタルビデオコンテンツを適応的にバッファリングするための種々のプロセスが、図4に関して上記に説明されるが、最小バッファ時間を低減させることが可能である種々のプロセスのいずれかが、本発明の種々の実施形態による、具体的な用途の要件に適切なものとして利用されることができる。 The slow motion digital video content continues to play (410) until the reduced minimum buffer time is reached. Although various processes for adaptively buffering digital video content are described above with respect to FIG. 4, any of the various processes that are capable of reducing the minimum buffer time may be used in accordance with various aspects of the present invention. can be utilized as appropriate to specific application requirements according to embodiments of

本発明のいくつかの実施形態では、スローモーション再生速度および/または音声再生は、MBTが増加するにつれて、増加(もしくは漸増)し得る。本発明の多くの実施形態では、再生速度および/または音声再生は、再生速度ならびに/もしくは音声再生が、MBTが到達されたとき、最高速度になるであろうように、MBTが増加するにつれて、漸増し得る。 In some embodiments of the present invention, slow motion playback speed and/or audio playback may increase (or gradually increase) as MBT increases. In many embodiments of the present invention, the playback speed and/or audio playback is as the MBT increases such that the playback speed and/or audio playback will be at full speed when the MBT is reached. can be incremental.

本発明の他の実施形態では、プロセスは、バッファが閾値を下回り、バッファが回復し得るまで再生速度および/または音声再生を徐々に低減させるときを検出することができる。これは、(再生し、次いで、停止するビデオおよび/または音声ストリームと対照的な)再生における段階的な悪化を伴うビデオストリームならびに/もしくは音声ストリームの再生における停止を遅延させるように試み得る。概して、これは、より低いビットレートおよび/またはより低い品質のビデオストリームへの下方切替を遅らせる状況の中で生じ得る。代替として、ビデオおよび/または音声ストリームが、最も低い品質ストリームの状態である場合、再生は、より良好な帯域幅が達成され得るまで、速度を落とすことができる。一般的に、本発明の実施形態は、本発明の種々の実施形態に従って、再生を停止させるのではなく、スローモーション再生を通して、ストリーム配信の停止を可能な限り長く遅延させ、徐々に悪化させることができる。 In other embodiments of the invention, the process can detect when the buffer falls below a threshold and gradually reduce the playback speed and/or audio playback until the buffer can recover. This may attempt to delay stopping the playback of video and/or audio streams with gradual deterioration in playback (as opposed to video and/or audio streams that play and then stop). In general, this can occur in situations that delay switching down to lower bitrate and/or lower quality video streams. Alternatively, if the video and/or audio stream is in the lowest quality stream, playback can be slowed down until better bandwidth can be achieved. In general, embodiments of the present invention delay the stopping of the stream as long as possible through slow-motion playback, rather than stopping playback according to various embodiments of the present invention. can be done.

本発明は、ある具体的側面において説明されたが、多くの付加的修正および変形例が、当業者に明白となるであろう。したがって、本発明は、本発明の範囲および精神から逸脱することなく、それらが準拠する特定の規格内に規定されるもの以外の特徴をサポートする、エンコーダならびにデコーダの利用等、実装の種々の変更を含め、具体的に説明される以外にも実践されてもよいことを理解されたい。したがって、本発明の実施形態は、あらゆる点において、制限的ではなく、例証的と見なされるべきである。 Although the present invention has been described in certain specific aspects, many additional modifications and variations will become apparent to those skilled in the art. Accordingly, the present invention covers various modifications of implementation, such as the use of encoders and decoders, to support features other than those specified in the particular standards to which they comply without departing from the scope and spirit of the invention. It should be understood that other practices than those specifically described may be practiced, including . Accordingly, embodiments of the present invention are to be considered in all respects as illustrative rather than restrictive.

Claims (14)

再生デバイスであって、
メモリと、
ネットワークインターフェースと、
前記メモリ内に記憶された命令を読み出すプロセッサと
を備え、
前記命令は、
複数の代替ストリームに関する情報を含むマニフェストファイルを受信することであって、各代替ストリームは、他のストリームとは異なるビットレートを有する、ことと、
前記マニフェストファイルから各代替ストリームに対する最小バッファ時間を受信することであって、各代替ストリームの最小バッファ時間は、代替ストリームの再生の通常速度におけるデジタルビデオコンテンツの再生の中断を防止するための前記代替ストリームのデジタルメディアコンテンツの所定の再生時間である、ことと、
前記マニフェストファイルから各代替ストリームに対する低減された最小バッファ時間を決定することであって、各代替ストリームの低減された最小バッファ時間は、前記再生の通常速度における前記代替ストリームの最小バッファ時間を数値因子で割ったものであり、前記数値因子は1よりも大きい、ことと、
前記再生デバイスのバッファ内に第1の代替ストリームの前記デジタルビデオコンテンツをダウンロードすることと、
前記バッファ内の前記第1の代替ストリームのデジタルコンテンツの量が最初に前記低減された最小バッファ時間に到達するときに、前記デジタルビデオコンテンツの再生を開始することであって、前記開始された再生の速度は、前記第1の代替ストリームの通常速度を前記数値因子によって低減した速度と等しいスローモーション速度である、ことと
を行うように前記プロセッサに指示する、再生デバイス。
a playback device,
memory;
a network interface;
a processor that reads instructions stored in the memory;
Said instruction
receiving a manifest file containing information about a plurality of alternate streams, each alternate stream having a different bitrate than the other streams;
Receiving a minimum buffer time for each alternate stream from the manifest file, wherein the minimum buffer time for each alternate stream is determined by the alternate stream to prevent interruption of playback of the digital video content at the normal speed of playback of the alternate stream. is a predetermined playing time of the stream's digital media content;
Determining a reduced minimum buffer time for each alternate stream from the manifest file, wherein the reduced minimum buffer time for each alternate stream is a numerical factor of the minimum buffer time for the alternate stream at the normal speed of playback. divided by, said numerical factor being greater than 1;
downloading the digital video content of a first alternative stream into a buffer of the playback device;
commencing playback of the digital video content when the amount of digital content of the first alternative stream in the buffer first reaches the reduced minimum buffer time, said initiated playback. is a slow motion speed equal to the speed of the normal speed of the first alternative stream reduced by the numerical factor.
前記デジタルビデオコンテンツをダウンロードすることはさらに、
前記マニフェストファイルから、エンコードされたメディアを含有するコンテナファイルの場所を抽出することと、
エンコードされたメディアを含有する前記コンテナファイルのポーションを要求することと
を含む、請求項1に記載の再生デバイス。
Downloading said digital video content further comprises:
extracting from the manifest file the location of a container file containing encoded media;
and requesting a portion of the container file containing encoded media.
前記デジタルビデオコンテンツは、DASH規格ファイルであり、前記最小バッファ時間は、メディア表現記述データ構造内に記憶される、請求項1に記載の再生デバイス。 2. The playback device of claim 1, wherein the digital video content is a DASH standard file and the minimum buffer time is stored within a media presentation description data structure. 前記最小バッファ時間を低減させることはさらに、利用可能なデジタルビデオコンテンツを低減された速度で再生することによって、前記デジタルビデオコンテンツを減少させ、バッファを充填することを含む、請求項1に記載の再生デバイス。 2. The method of claim 1, wherein reducing the minimum buffer time further comprises reducing the digital video content and filling a buffer by playing available digital video content at a reduced speed. playback device. 前記数値因子は、再生のために消費される前記デジタルビデオコンテンツの量を変化させる、請求項1に記載の再生デバイス。 The playback device of Claim 1, wherein the numerical factor varies the amount of the digital video content consumed for playback. 前記スローモーション速度は、前記数値因子に対応する、請求項1に記載の再生デバイス。 2. The playback device of Claim 1, wherein the slow motion speed corresponds to the numerical factor. デジタルビデオコンテンツの再生を提供するための方法であって、
メモリ内に記憶された命令を読み出すプロセッサを使用して、マニフェストファイルを受信することであって、前記マニフェストファイルは、複数の代替ストリームに関する情報を含み、各代替ストリームは、他のストリームとは異なるビットレートを有する、ことと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記マニフェストファイルから各代替ストリームに対する最小バッファ時間を受信することであって、各代替ストリームの最小バッファ時間は、代替ストリームの再生の通常速度におけるデジタルビデオコンテンツの再生の中断を防止するための前記代替ストリームのデジタルメディアコンテンツの所定の再生時間である、ことと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記マニフェストファイルから各代替ストリームに対する低減された最小バッファ時間を決定することであって、各代替ストリームの低減された最小バッファ時間は、前記再生の通常速度における前記代替ストリームの最小バッファ時間を数値因子で割ったものであり、前記数値因子は1よりも大きい、ことと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、再生デバイスのバッファ内に第1の代替ストリームの前記デジタルビデオコンテンツをダウンロードすることと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記バッファ内の前記第1の代替ストリームのデジタルコンテンツの量が最初に前記低減された最小バッファ時間に到達するときに、前記デジタルビデオコンテンツの再生を開始することであって、前記開始された再生の速度は、前記第1の代替ストリームの通常速度を前記数値因子によって低減した速度と等しいスローモーション速度である、ことと
を含む、デジタルビデオコンテンツの再生を提供するための方法。
A method for providing playback of digital video content, comprising:
Receiving a manifest file using a processor that reads instructions stored in memory, the manifest file containing information about a plurality of alternate streams, each alternate stream being different from the other streams. having a bitrate;
Receiving a minimum buffer time for each alternate stream from the manifest file using the processor reading the instructions stored in memory, wherein the minimum buffer time for each alternate stream is determined for playback of the alternate stream. a predetermined playback time of the digital media content of the alternate stream to prevent interruption of playback of the digital video content at normal speed;
Determining a reduced minimum buffer time for each alternate stream from the manifest file using the processor reading the instructions stored in memory, wherein the reduced minimum buffer time for each alternate stream is , the minimum buffer time of the alternative stream at the normal speed of playback divided by a numerical factor, the numerical factor being greater than one;
downloading said digital video content of a first alternative stream into a buffer of a playback device using said processor reading said instructions stored in memory;
Using the processor to read the instructions stored in memory, when the amount of digital content of the first alternative stream in the buffer first reaches the reduced minimum buffer time, the digital initiating playback of video content, wherein the speed of playback initiated is a slow motion speed equal to the normal speed of the first alternative stream reduced by the numerical factor. , a method for providing playback of digital video content.
前記デジタルビデオコンテンツをダウンロードすることはさらに、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記マニフェストファイルから、エンコードされたメディアを含有するコンテナファイルの場所を抽出することと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、エンコードされたメディアを含有する前記コンテナファイルのポーションを要求することと
を含む、請求項7に記載のデジタルビデオコンテンツの再生を提供するための方法。
Downloading said digital video content further comprises:
extracting the location of a container file containing encoded media from the manifest file using the processor reading the instructions stored in memory;
requesting a portion of the container file containing encoded media using the processor that reads the instructions stored in memory. How to.
前記デジタルビデオコンテンツは、DASH規格ファイルであり、前記最小バッファ時間は、メディア表現記述データ構造内に記憶される、請求項7に記載のデジタルビデオコンテンツの再生を提供するための方法。 8. The method for providing playback of digital video content as recited in claim 7, wherein said digital video content is a DASH standard file and said minimum buffer time is stored within a media presentation description data structure. 前記最小バッファ時間を低減させることはさらに、利用可能なデジタルビデオコンテンツを低減された速度で再生することによって、前記デジタルビデオコンテンツを減少させ、バッファを充填することを含む、請求項7に記載のデジタルビデオコンテンツの再生を提供するための方法。 8. The method of claim 7, wherein reducing the minimum buffer time further comprises reducing the digital video content and filling a buffer by playing available digital video content at a reduced speed. A method for providing playback of digital video content. 前記数値因子は、再生のために消費される前記デジタルビデオコンテンツの量を変化させる、請求項7に記載のデジタルビデオコンテンツの再生を提供するための方法。 8. The method for providing playback of digital video content as recited in claim 7, wherein said numerical factor varies the amount of said digital video content consumed for playback. 前記スローモーション速度は、前記数値因子に対応する、請求項7に記載のデジタルビデオコンテンツの再生を提供するための方法。 8. A method for providing playback of digital video content as recited in claim 7, wherein said slow motion speed corresponds to said numerical factor. 前記メモリ内に記憶された前記命令はさらに、
前記バッファ内の前記第1の代替ストリームの前記デジタルコンテンツが前記最小バッファ時間に到達するまで、前記スローモーション速度での前記デジタルビデオコンテンツの再生を続けることと、
前記バッファ内の前記第1の代替ストリームの前記デジタルコンテンツが前記最小バッファ時間に到達するときに、前記再生の通常速度で前記デジタルビデオコンテンツを再生することと
を含む、請求項1に記載の再生デバイス。
The instructions stored in the memory further comprise:
continuing playing the digital video content at the slow motion speed until the digital content of the first alternative stream in the buffer reaches the minimum buffer time;
playing the digital video content at the normal speed of playback when the digital content of the first alternate stream in the buffer reaches the minimum buffer time. device.
デジタルビデオコンテンツの再生を提供することはさらに、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記バッファ内の前記第1の代替ストリームの前記デジタルコンテンツが前記最小バッファ時間に到達するまで、前記スローモーション速度での前記デジタルビデオコンテンツの再生を続けることと、
メモリ内に記憶された前記命令を読み出す前記プロセッサを使用して、前記バッファ内の前記第1の代替ストリームの前記デジタルコンテンツが前記最小バッファ時間に到達するときに、前記再生の通常速度で前記デジタルビデオコンテンツを再生することと
を含む、請求項7に記載の方法。
Providing playback of digital video content further
said digital video at said slow motion speed until said digital content of said first alternative stream in said buffer reaches said minimum buffer time using said processor reading said instructions stored in memory; continuing to play the content; and
The processor reading the instructions stored in memory is used to read the digital content of the first alternative stream in the buffer at the normal speed of playback when the digital content of the first alternative stream in the buffer reaches the minimum buffer time. 8. The method of claim 7, comprising playing video content.
JP2020108513A 2016-09-08 2020-06-24 Systems and methods for adaptive buffering for digital video streaming Active JP7166311B2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201662385065P 2016-09-08 2016-09-08
US62/385,065 2016-09-08

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019512873A Division JP6845921B2 (en) 2016-09-08 2017-09-05 Systems and methods for adaptive buffering for digital video streaming

Publications (2)

Publication Number Publication Date
JP2020156111A JP2020156111A (en) 2020-09-24
JP7166311B2 true JP7166311B2 (en) 2022-11-07

Family

ID=61280977

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019512873A Active JP6845921B2 (en) 2016-09-08 2017-09-05 Systems and methods for adaptive buffering for digital video streaming
JP2020108513A Active JP7166311B2 (en) 2016-09-08 2020-06-24 Systems and methods for adaptive buffering for digital video streaming

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2019512873A Active JP6845921B2 (en) 2016-09-08 2017-09-05 Systems and methods for adaptive buffering for digital video streaming

Country Status (7)

Country Link
US (1) US20180069909A1 (en)
EP (1) EP3510491B1 (en)
JP (2) JP6845921B2 (en)
KR (1) KR102226095B1 (en)
CN (1) CN110073341B (en)
ES (1) ES2881521T3 (en)
WO (1) WO2018048818A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109168036A (en) * 2018-10-08 2019-01-08 联想(北京)有限公司 Playback method, system and electronic equipment
CN110798458B (en) * 2019-10-22 2022-05-06 潍坊歌尔微电子有限公司 Data synchronization method, device, equipment and computer readable storage medium
US11979705B2 (en) * 2020-07-22 2024-05-07 Google Llc Bluetooth earphone adaptive audio playback speed
KR20240001625A (en) * 2022-06-27 2024-01-03 에스케이텔레콤 주식회사 Method for Seamless Playback between Downloaded Data And Streamed Data Using Local Web Server And Device therefor

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008029005A (en) 2006-07-14 2008-02-07 Sony Service Center Europ Nv Client device, communication system and data processing method
JP2011501489A (en) 2007-10-11 2011-01-06 トムソン ライセンシング System and method for early start of audio / video rendering
US20140282792A1 (en) 2013-03-15 2014-09-18 Cygnus Broadband, Inc. Video streaming with buffer occupancy prediction based quality adaptation
JP2015156604A (en) 2014-02-21 2015-08-27 ルネサスエレクトロニクス株式会社 content output device and program
JP2016500504A (en) 2013-07-18 2016-01-12 コニンクリーケ・ケイピーエヌ・ナムローゼ・フェンノートシャップ Low latency streaming
JP2016504797A (en) 2012-11-13 2016-02-12 テレフオンアクチーボラゲット エル エム エリクソン(パブル) Processing multimedia data

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100995333B1 (en) * 2004-06-07 2010-11-19 슬링 미디어 인코퍼레이티드 Personal media broadcasting system
CA2594887C (en) * 2005-01-27 2013-07-09 Thomson Licensing Video player for digital video server
US7751436B2 (en) * 2005-05-24 2010-07-06 Sony Corporation System and method for dynamically establishing PLL speed based on receive buffer data accumulation for streaming video
US20110040981A1 (en) * 2009-08-14 2011-02-17 Apple Inc. Synchronization of Buffered Audio Data With Live Broadcast
US9749676B2 (en) * 2010-06-08 2017-08-29 Microsoft Technology Licensing, Llc Virtual playback speed modification
US9020039B2 (en) * 2011-01-06 2015-04-28 Sonic Ip, Inc. Systems and methods for encoding alternative streams of video for use in adaptive bitrate streaming
JP2013038766A (en) * 2011-07-12 2013-02-21 Sharp Corp Transmitter, transmitter control method, control program, and recording medium
US9804668B2 (en) * 2012-07-18 2017-10-31 Verimatrix, Inc. Systems and methods for rapid content switching to provide a linear TV experience using streaming content distribution
TWI528798B (en) * 2012-10-11 2016-04-01 緯創資通股份有限公司 Streaming data downloading method and computer readable recording medium thereof
WO2014096463A1 (en) * 2012-12-21 2014-06-26 Koninklijke Kpn N.V. Low-latency streaming
WO2015003302A1 (en) * 2013-07-08 2015-01-15 华为技术有限公司 Control method, device and system for video playing
GB2524958A (en) * 2014-04-03 2015-10-14 Orbital Multi Media Holdings Corp Data flow control method
US9602846B1 (en) * 2016-08-31 2017-03-21 Living As One, Llc System and method for asynchronous uploading of live digital multimedia with guaranteed delivery

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008029005A (en) 2006-07-14 2008-02-07 Sony Service Center Europ Nv Client device, communication system and data processing method
JP2011501489A (en) 2007-10-11 2011-01-06 トムソン ライセンシング System and method for early start of audio / video rendering
JP2016504797A (en) 2012-11-13 2016-02-12 テレフオンアクチーボラゲット エル エム エリクソン(パブル) Processing multimedia data
US20140282792A1 (en) 2013-03-15 2014-09-18 Cygnus Broadband, Inc. Video streaming with buffer occupancy prediction based quality adaptation
JP2016500504A (en) 2013-07-18 2016-01-12 コニンクリーケ・ケイピーエヌ・ナムローゼ・フェンノートシャップ Low latency streaming
JP2015156604A (en) 2014-02-21 2015-08-27 ルネサスエレクトロニクス株式会社 content output device and program

Also Published As

Publication number Publication date
EP3510491A1 (en) 2019-07-17
KR20190052032A (en) 2019-05-15
JP2019530317A (en) 2019-10-17
EP3510491A4 (en) 2020-01-22
JP2020156111A (en) 2020-09-24
JP6845921B2 (en) 2021-03-24
CN110073341A (en) 2019-07-30
CN110073341B (en) 2023-11-21
US20180069909A1 (en) 2018-03-08
KR102226095B1 (en) 2021-03-11
EP3510491B1 (en) 2021-05-12
WO2018048818A1 (en) 2018-03-15
ES2881521T3 (en) 2021-11-29

Similar Documents

Publication Publication Date Title
US11483609B2 (en) Systems and methods for encoding video content
JP6657313B2 (en) How to encode a set of alternate streams of video from a source video stream
US11895348B2 (en) Systems and methods for providing variable speeds in a trick-play mode
JP7166311B2 (en) Systems and methods for adaptive buffering for digital video streaming
JP7078697B2 (en) Systems and methods for providing audio content during trick play playback
JP7001673B2 (en) System and method for quick startup of playback

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200904

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220620

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220916

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220927

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221025

R150 Certificate of patent or registration of utility model

Ref document number: 7166311

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150