CN108476328A - 改进的网络记录设备 - Google Patents
改进的网络记录设备 Download PDFInfo
- Publication number
- CN108476328A CN108476328A CN201680077832.0A CN201680077832A CN108476328A CN 108476328 A CN108476328 A CN 108476328A CN 201680077832 A CN201680077832 A CN 201680077832A CN 108476328 A CN108476328 A CN 108476328A
- Authority
- CN
- China
- Prior art keywords
- video
- recording device
- network recording
- client
- distributed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 61
- 238000012546 transfer Methods 0.000 claims description 57
- 238000010025 steaming Methods 0.000 claims description 56
- 230000003044 adaptive effect Effects 0.000 claims description 40
- 230000014509 gene expression Effects 0.000 claims description 23
- 230000005540 biological transmission Effects 0.000 description 15
- 230000006978 adaptation Effects 0.000 description 10
- 230000009471 action Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 4
- 239000007787 solid Substances 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2408—Monitoring of the upstream path of the transmission network, e.g. client requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26208—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
提供一种在网络记录设备中的方法,该方法包括:接收视频;确定视频正被分发给多少客户端;以及取决于视频正被分发给多少客户端的对视频的编码和存储。
Description
技术领域
本申请涉及一种在网络记录设备中的方法;网络记录设备;用于记录网络中的视频的设备;以及计算机可读介质。
背景技术
电视服务运营商向其订户输送电视服务。服务运营商向订户提供机顶盒,以便对所传输信号进行解码,并且将此输出到例如电视机。由机顶盒所提供的功能性在近来数十年已经被改进,并且现在诸如记录、多个调谐器以及对点播内容的访问的某种功能性可由机顶盒来提供。
具有记录功能性的机顶盒可称作数字录像机(DVR)。电视服务传输典型是数字的(其比模拟传输更加高效),并且因此所接收视频采用数字格式,从而使它本身充分适合于数字录像。DVR有时可称作个人录像机(PVR)。DVR采用数字格式将视频记录到磁盘驱动器、USB闪速存储器驱动器、SD存储卡、固态驱动器或者其它本地大容量存储装置。
电视服务运营商必须向每一个订户提供机顶盒。这个硬件代表显著的费用。此外,通过这批机顶盒所引起的任何维护成本典型地由服务提供商负担。因此,机顶盒的成本和复杂度的小的降低能够具有对服务运营商的显著益处。为此,一些服务运营商已经从其机顶盒去除了任何大容量存储能力。DVR功能性改为通过网络DVR(又称作云DVR)系统来提供。在网络DVR中,所记录内容不本地存储,而是存储在运营商的网络上的服务器(云中)。当用户希望观看所记录内容时,通过互联网连接将它从服务器流传输到用户装置。
用于通过互联网连接来输送视频的重要技术是自适应比特率(ABR)流传输。这种技术考虑带宽的变化,其对家庭互联网连接是典型的。这种变化可归因于与将相同调制解调器连接用于其它目的的、家中的其它装置和用户的本地连接。对于可用带宽的变化的另外的原因是本地环路争用,其中邻域中的多个调制解调器之间的带宽必须在相应多个家庭之间共享。
通过测量流传输装置与正发送流传输的视频的服务器之间的可用带宽,并且以使可用带宽的使用最大化的比特率提供视频流,ABR流传输考虑带宽的变化。要实现这个方面,使用ABR的服务器将使流传输的视频在多个不同比特率是可用的。流传输装置中的ABR流传输客户端然后选择适当比特率版本。比特率的集合通常是固定的。
使用ABR流传输来输送内容的网络DVR系统必须存储大量视频数据,其具有对于内容的每个段的多个表示(以不同比特率)。
对于电视系统携带不是很受欢迎的内容是常见的。这可归因于强制运营商广播某个内容的管理要求,或者归因于商业约束,其中某些频道在午夜没有观众。在一些情况下,电视系统可以使很少的客户端乃至没有客户端正流传输的实况流是可用的。在这种内容使用ABR是可用的情况下,有可能的是,电视系统采用适合于ABR的多个比特率版本对实况流进行编码,但是这些都没有用于实况流传输。
此外,如果将使这个不是很受欢迎的内容可用于追看服务中的将来观看(其中视频也将使用ABR来输送),则将存储不同比特率版本的每个。然而,如果内容在它被实况流传输时具有很少的观众,则作为追看服务不太可能具有许多观众。
因此,需要网络记录设备,其更高效地使用编码和存储资源,特别是相对于不是很受欢迎的内容。
发明内容
相应地,提供一种在网络记录设备中的方法,该方法包括:接收视频;确定视频正被分发给多少客户端;以及取决于视频正被分发给多少客户端的对视频的编码和存储。
如果实况流传输到很少客户端的视频仅被编码为单个比特率版本,则能够更高效地使用编码资源。在这种视频要使用ABR仅流传输到很少客户端的情况下,备选比特率版本可使用准时制转码来即时(on the fly)转码。
此外,如果在实况流传输到很少客户端的视频仅具有所存储的单个比特率版本的情况下,则同样可更高效地使用存储资源。在以后从存储设备检索这种视频以用于使用ABR进行追看流传输的情况下,备选比特率版本可使用准时制转码来即时转码。
网络记录设备可包括编码器。网络记录设备可向单独编码器发送指令。网络记录设备可命令编码器如何对视频进行编码。网络设备可控制视频的编码。网络记录设备可控制视频的存储。
该方法还可包括取决于视频内容复杂度来对视频进行编码和存储。视频内容复杂度可由编码器来确定。视频内容复杂度指示符可与视频一起被接收。
该方法还可包括控制被生成和存储的视频的版本的数量。该方法还可包括控制应用于视频的编码努力。应用于视频的编码努力可由为编码所提供的处理资源量来确定。应用于视频的编码努力可由应用于视频的编码算法的数量或者复杂度来确定。
如果视频正被分发给的客户端的数量少于阈值,则可存储视频的单个表示。单个表示可包括视频版本的自适应比特率集合的最高比特率版本。单个表示可包括从视频版本的自适应比特率集合所选的一个比特率版本。
如果视频正被分发给的客户端的数量大于阈值,则视频可以以不同比特率来编码,以生成不同比特率的视频的多个表示,并且存储视频的多个表示。
该方法还可包括:接收对于所存储视频的回放请求;检索所存储视频;以及使用自适应比特率流传输来输送所存储视频。
在存储视频的单个表示的情况下,该方法还可包括生成视频的多个比特率版本以用于自适应比特率流传输。用于自适应流传输的视频的多个比特率版本可使用准时制转码来生成。
准时制转码(JITX)是已知技术,其降低对于网络DVR系统所要求的存储量。在已知实现中,仅存储ABR内容的最高比特率表示,并且然后从这个表示,通过仅当那个表示被客户端所请求时才进行转码,来导出更低比特率表示。
在存储视频的多个表示的情况下,该方法还可包括检索多个版本以用于自适应比特率流传输。
还提供一种网络记录设备,包括处理器,布置成:接收视频;以及确定视频正被分发给多少客户端;其中处理器取决于视频正被分发给多少客户端来控制视频的编码并且控制视频的存储。
该网络记录设备还可包括用于存储编码的视频的存储设备。存储设备可包括任何形式的数字存储设备,例如硬盘驱动器或者固态驱动器的阵列。
该网络记录设备还可包括用于对从存储设备检索的视频进行转码的转码模块。
处理器还可取决于视频内容复杂度来控制视频的编码并且控制视频的存储。内容复杂度的指示可从编码器来接收。
处理器可命令编码器控制视频的多少版本被编码。该网络记录设备还布置成在存储设备中存储视频的编码的版本。该网络记录设备还可命令编码器控制应用于视频的编码努力。应用于视频的编码努力可由为编码所提供的处理资源量来确定。应用于视频的编码努力可由应用于视频的编码算法的数量或者复杂度来确定。
如果视频正被分发给的客户端的数量少于阈值,则网络记录设备可存储视频的单个表示。单个表示可包括视频版本的自适应比特率集合的最高比特率版本。单个表示可包括从视频版本的自适应比特率集合所选的一个比特率版本。
如果视频正被分发给的客户端的数量大于阈值,则网络记录设备可存储视频的多个表示,多个版本以不同比特率来编码。
该网络记录设备还可布置成:接收对于所存储视频的回放请求;从存储设备检索所存储视频;以及使用自适应比特率流传输来输送所存储视频。
该网络记录设备还可包括转码器,该转码器布置成使得在存储视频的单个表示的情况下,转码器生成视频的多个比特率版本以用于自适应比特率流传输。用于自适应流传输的视频的多个比特率版本可使用准时制转码来生成。
准时制转码(JITX)是已知技术,其降低对于网络DVR系统所要求的存储量。在已知实现中,仅存储ABR内容的最高比特率表示,并且然后从这个表示,通过仅当那个表示被客户端所请求时才进行转码,来导出更低比特率表示。
还提供一种用于记录网络中的视频的设备,该设备包括处理器和存储器,所述存储器包含由所述处理器可执行的指令。该设备可操作以:接收视频;以及确定视频正被分发给多少客户端;其中处理器取决于视频正被分发给多少客户端来控制视频的编码并且控制视频的存储。
还提供一种携带指令的计算机可读介质,所述指令在由计算机逻辑执行时使所述计算机逻辑执行本文所限定方法的任何方法。
还提供一种存储指令的计算机可读存储介质,所述指令在由计算机逻辑执行时使所述计算机逻辑执行本文所限定方法的任何方法。计算机程序产品可采用非易失性存储器或者易失性存储器的形式,例如EEPROM(电可擦可编程只读存储器)、闪速存储器、磁盘驱动器或者RAM(随机存取存储器)。
附图说明
现在将仅作为示例,参照附图来描述网络记录设备,其中:
图1示出用于具有有限持续时间的节目的自适应比特率流传输的示例;
图2示出自适应流传输系统和网络记录系统;
图3示出自适应流传输系统和网络记录系统的操作的备选示例;
图4示出操作网络记录设备的方法;
图5示出操作网络记录设备的备选方法;
图6示出网络记录设备如何操控对所存储内容的回放请求;
图7示出适合于执行本文所述方法的设备;以及
图8示出用于实现本文所述方法的一般设备。
具体实施方式
图1示出用于具有有限持续时间以及在t0的开始时间和在t1的结束时间的节目的自适应比特率流传输的示例。这里,节目是在四个比特率版本中可用的,这些通过虚线示出,其中比特率在垂直轴上。自适应比特率流传输是通过HTTP的视频流传输的方法,其中源内容以多个比特率(这个示例中为四个)来编码。不同比特率流的每个被分段为小的多秒部分。流传输客户端检索清单文件,从其中,它了解在不同比特率的四个可用流以及流的段的地址。当开始时,客户端请求来自最低比特率流的段。如果客户端发现下载速度大于所下载段的比特率,则它将请求下一个更高比特率段。在这个示例中,客户端快速上升到最高比特率版本。以后,如果客户端发现对于段的下载速度低于对于段的比特率,并且因此网络吞吐量已经退化,则它将请求更低比特率段。段长度能够取决于特定实现而变化,但是它们典型地在2与10秒之间。
图2示出如本文所呈现的自适应流传输系统和网络记录系统。图2a示出正被实况流传输的广播节目。节目在时间t0开始,但是没有观众。只有顶比特率版本被编码,并且只有这个版本被存储以用于通过网络记录设备的以后观看。进入节目的短时间,在t1,观众加入广播流。即,观众请求了节目的实况流。响应于这个请求,编码器发起多个比特率流的创建以用于使用自适应比特率流传输的节目的输送,然而这些将不是客户端可用的,直到短时间以后在t2。在时间t1与t2之间,客户端使用自适应比特率流传输来接收广播节目,但是节目的不同比特率版本由准时制转码器(JITX)基于编码的和存储的最高比特率版本来生成。对最高比特率版本进行转码以生成其它比特率版本,其中的所要求一个则能够被输送到客户端。在时间t2,全部比特率版本是从编码器可用的,并且不再需要准时制转码器。由编码器所编码的节目的全部比特率版本被存储,以用于以后在由网络记录器所提供的追看或点播服务中的检索和传输。
图2b示出在以后时间被回放的相同节目。节目使用自适应比特率流传输来输送到客户端。然而,从节目在t0的开始直到t2,只有最高比特率版本是从网络记录设备可用的。备选比特率版本使用准时制转码来生成。然而,在时间t2之后,网络记录设备已存储了全部比特率版本,以及在时间t2与时间t3之间,当节目结束时,节目能够使用具有由网络记录设备从存储设备检索的不同比特率版本的自适应比特率流传输来输送。
图3示出如本文所呈现的自适应流传输系统和网络记录系统的操作的备选示例。图3a示出正被实况流传输的广播节目。节目在时间t0开始,但是没有观众。只有一个比特率版本被编码,并且只有这个版本被存储以用于通过网络记录设备的以后观看,但是这不是如图2的示例中所示的顶比特率版本。
这里,第二最高比特率版本被编码和存储。这个选择可以是预定规则(当存储一个比特率版本时应当存储第二最高比特率版本)的结果,或者它可以是考虑下列至少一个的评估的结果:编码质量、内容复杂度、内容受欢迎性和存储可用性。
进入节目的短时间,在t1,观众加入广播流。即,观众请求了节目的实况流。响应于这个请求,编码器发起多个比特流的创建以用于使用自适应比特率流传输的节目的输送,然而这些将不是客户端可用的,直到短时间以后在t2。在时间t1与t2之间,客户端使用自适应比特率流传输来接收广播节目,但是节目的不同比特率版本由准时制转码器(JITX)基于编码的和存储的比特率版本来生成。对所存储比特率版本进行转码以生成其它比特率版本,其中的所要求一个则能够输送到客户端。在时间t2,全部比特率版本是从编码器可用的,并且不再需要准时制转码器。由编码器所编码的节目的全部比特率版本被存储,以用于以后在由网络记录器所提供的追看或点播服务中的检索和传输。
图3b示出在以后时间被回放的相同节目。节目使用自适应比特率流传输来输送到客户端。然而,从节目在t0的开始直到t2,只有所存储比特率版本是从网络记录设备可用的。备选比特率版本使用准时制转码来生成。然而,在时间t2之后,网络记录设备已存储了全部比特率版本,以及在时间t2与时间t3之间,当节目结束时,节目能够使用具有由网络记录设备从存储设备检索的不同比特率版本的自适应比特率流传输来输送。
图4示出操作如本文所述的网络记录设备的方法。该方法包括接收视频410,并且然后进行关于接收内容的实况流的客户端的数量是否大于阈值的确定420。在图2和图3的示例中,阈值为0,但是在某些情况下,将准时制转码用于多个观众仍然可实现益处。例如,在14个不同比特率等级被用于通过自适应比特率流传输来输送视频的情况下,则将准时制转码用于多达3个实况客户端可比创建视频的全部不同比特率版本更加高效。
如果确定客户端的数量不超过阈值,则只有视频的单个比特率版本被编码430和存储435,以用于经由点播视频的以后流传输。如果确定客户端的数量超过阈值,则视频的多个比特率版本被编码440,这些多个比特率版本适合于使用自适应比特率流传输的输送。这些多个比特率版本被存储445,以用于在视频被要求经由对于点播观看的客户端请求的输送时的以后检索。
如果很少人正观看实况流,则存在通过上述方法所实现的两个益处。首先,对视频的全部可用比特率版本进行编码以用于自适应比特率流传输是处理资源的浪费,其中对于内容的实况输送不要求这些或者只要求这些的一小部分。相应地,节省编码资源,这个节省能够用来运行更少编码器,因此节省能量,或者用来将更多处理资源应用于确实需要编码的内容,从而改进对于那个内容的编码质量。
其次,如果在特定视频被实况流传输时很少人正观看特定视频,则能够推断内容不是很受欢迎并且不太可能被请求以用于通过点播输送服务的以后观看。因此,对这个视频的多个比特率版本进行编码和存储是编码资源和存储空间的浪费,因为它们将被请求用于将来观看是不太可能的。又通过应用本文所述的方法,在编码和存储资源的高效使用的情况下,能够使这些节目可用于将来观看。
图5示出操作如本文所述网络记录设备的备选方法。该方法包括接收视频510,并且然后进行关于接收内容的实况流的客户端的数量是否大于阈值的确定520。如果确定客户端的数量不超过阈值,则只有视频的单个比特率版本被编码530和存储535,以用于经由点播视频的以后流传输。
如果确定520客户端的数量超过阈值,则进行关于上下文复杂度是否超过阈值的进一步确定525。内容复杂度能够使用广泛的多种度量来确定。在基本等级上,内容复杂度能够从节目元数据来确定,例如主要包括头部特写的新节目或游戏节目与足球赛或动作片相比是没那么复杂的视频内容。备选地,能够通过评估如何对源进行编码(例如通过使用比特率和量化因子的组合),来从传入编码的源来估计内容复杂度。内容复杂度信息还可被提供为具有传入源的元数据(例如,如由上游编码器所确定)。此外,内容复杂度可通过对视频进行编码并且测量要进行编码的难度来确定;或者它能够通过预处理级(其使用诸如未压缩内容的空间和时间活动的测量)来估计。
如果确定525内容复杂度不超过阈值,则只有视频的单个比特率版本被编码530和存储535,以用于经由点播视频的以后流传输。
如果确定525内容复杂度超过阈值,则视频的多个比特率版本被编码540,这些多个比特率版本适合于使用自适应比特率流传输的输送。这些多个比特率版本被存储545,以用于在视频被要求经由对于点播观看的客户端请求的输送时的以后检索。
在这个示例中,仅当客户端的数量超过第一阈值并且内容复杂度也超过第二阈值时,视频的多个比特率版本才被编码和存储。这里,确定相对简单的内容更高效地编码和存储为单个比特率表示,其中准时制转码被用来生成实况流传输以及还有后续点播观看两者所要求的不同比特率版本。这以更多准时制转码为代价来降低编码和存储要求。然而,对于低复杂度内容,这是可接受的折衷。
图6示出本文所述的网络记录设备如何操控对于所存储内容的回放请求。网络记录设备接收610a来自客户端的回放请求。网络记录设备从存储设备检索620所请求视频,并且确定630是否已经存储了视频的单个比特率版本。如果视频的多个比特率版本从存储设备是可用的,则网络记录设备使用自适应比特率流传输向客户端输送640视频的适当比特率版本。
如果仅已经存储了视频的单个比特率版本,则网络记录设备使用准时制转码对那个单个版本进行转码650,并且使用自适应比特率流传输来以所要求的适当比特率来输送650视频。这里,使用自适应比特率流传输的输送所要求的视频的不同比特率版本使用准时制转码来生成。请求视频的客户端的用户将很可能不知道哪个过程(640或650)被用来向其视频客户端输送所请求内容。
此外,提供一种在网络记录设备中的方法,该方法包括:接收视频;确定视频正被分发给多少客户端;以及取决于视频正被分发给多少客户端的对视频的编码和存储。
如上所解释的,如果实况流传输到很少的客户端的视频仅编码为单个比特率版本,则能够更高效地使用编码资源。在这种视频要使用ABR仅流传输到很少的客户端的情况下,备选比特率版本可使用准时制转码来即时转码。同样,如果在实况流传输到很少的客户端的视频仅具有所存储的单个比特率版本的情况下,则同样可更高效地使用存储资源。在以后从存储设备检索这种视频以用于使用ABR进行追看流传输的情况下,备选比特率版本可使用准时制转码来即时转码。
网络记录设备可包括编码器。网络记录设备可向单独编码器发送指令。网络记录设备可命令编码器如何对视频进行编码。网络记录设备可控制视频的编码。网络记录设备可控制视频的存储。
该方法还可包括取决于视频内容复杂度来对视频进行编码和存储。视频内容复杂度可由编码器来确定。视频内容复杂度指示符可与视频一起被接收。这可包括控制被生成和存储的视频的版本的数量,和/或控制应用于视频的编码努力。
应用于视频的编码努力可由为编码所提供的处理资源量来确定。应用于视频的编码努力可由应用于视频的编码算法的数量或者复杂度来确定。
如果视频正被分发给的客户端的数量少于阈值,则存储视频的单个表示。单个表示可包括视频版本的自适应比特率集合的最高比特率版本。单个表示可包括从视频版本的自适应比特率集合所选的一个比特率版本。
如果视频正被分发给的客户端的数量大于阈值,则视频以不同比特率来编码,以生成不同比特率的视频的多个表示,并且存储视频的多个表示。
该方法还可包括:接收对于所存储视频的回放请求;检索所存储视频;以及使用自适应比特率流传输来输送所存储视频。在存储视频的单个表示的情况下,生成视频的多个比特率版本以用于自适应比特率流传输。用于自适应流传输的视频的多个比特率版本可使用准时制转码来生成。
准时制转码(JITX)是已知技术,其降低对于网络DVR系统所要求的存储量。在已知实现中,仅存储ABR内容的最高比特率表示,并且然后从这个表示,通过仅当那个表示被客户端所请求时才进行转码,来导出更低比特率表示。
图7示出适合于执行上述方法的设备。设备包括视频源710、编码器720、网络记录设备730和内容输送网络(CDN)770。来自视频源710的视频由编码器720来编码,以用于通过CDN 770的实况流分发。来自编码器720的编码的视频还被传递到网络记录设备730,其中它被存储以用于以后检索。网络记录设备730能够单独输送所记录视频以用于通过CDN 770的点播分发。编码器720在网络记录设备730的控制下操作,使得由编码器720所编码的比特率版本由网络记录设备730来确定。
网络记录设备730包括处理器732、准时制转码器734(JITX)和存储装置736。处理器732布置成:接收视频;以及确定视频正被分发给多少客户端。处理器732取决于视频正被分发给多少客户端来控制视频的编码并且控制视频的存储。
存储装置736用于存储编码的视频,并且可包括任何形式的数字存储设备,例如硬盘驱动器或者固态驱动器的阵列。JITX 734用于对从存储设备检索的视频进行转码,并且可包括转码模块。在某些实施例中,JITX可对视频进行转码以用于实况流分发,这可例如在只有几个客户端正流传输实况视频并且确定对全部比特率版本进行编码是不必要的情况下进行,但是仍然要求向要求它的几个客户端输送实况流。
在正常操作中,编码器720对来自视频源710的视频进行编码,并且输出所要求比特率版本以用于通过CDN 770的自适应流传输。同时,网络记录设备730接收这些比特率版本,并且在存储设备736中记录视频版本。
当网络记录设备730检测实况流传输视频的客户端的数量下降到阈值之下时,网络记录设备730则命令编码器720对网络记录设备730所接收的单个比特率版本进行编码,并且处理器732在存储设备736中存储视频的这个版本。
处理器732命令编码器720控制视频的多少版本被编码。网络记录设备730还布置成在存储设备736中存储视频的编码的版本。网络记录设备730还可命令编码器控制应用于视频的编码努力。应用于视频的编码努力可由为编码所提供的处理资源量来确定。应用于视频的编码努力可由应用于视频的编码算法的数量或者复杂度来确定。
如果视频正被分发给的客户端的数量少于阈值,则网络记录设备730存储视频的单个表示。单个表示可包括视频版本的自适应比特率集合的最高比特率版本。单个表示可包括从视频版本的自适应比特率集合中所选的一个比特率版本。
如果视频正被分发给的客户端的数量大于阈值,则网络记录设备存储视频的多个表示,多个版本以不同比特率来编码。
处理器732还可取决于视频内容复杂度来控制视频的编码和存储。内容复杂度的指示可从编码器来接收。
以后,当接收对于所存储视频的点播回放的请求时,网络记录设备730中的处理器732从存储设备736检索所请求视频,以及JITX 734对这个视频进行转码,以生成一个或多个所要求比特率版本以用于通过CDN 770使用自适应比特率流传输来输送视频。
因此,网络记录设备730布置成:接收对于所存储视频的回放请求;从存储设备检索所存储视频;以及使用自适应比特率流传输来输送所存储视频。
图8示出用于实现本文所述方法的一般设备。设备包括通信模块810、处理器820、存储器825、转码器830和存储设备840。
设备适合于记录网络中的视频。存储器825包含由所述处理器820可执行的指令,由此所述设备可操作以:接收视频;以及确定视频正被分发给多少客户端;其中处理器820取决于视频正被分发给多少客户端来控制视频的编码并且控制视频的存储。
通信模块810允许设备与视频分发系统中的其它组件进行通信。存储装置840用于存储编码的视频,并且可包括任何形式的数字存储设备,例如硬盘驱动器或者固态驱动器的阵列。
转码器830布置成使得在存储视频的单个表示的情况下,转码器830生成视频的多个比特率版本以用于自适应比特率流传输。用于自适应流传输的视频的多个比特率版本可使用准时制转码来生成。
还提供一种携带指令的计算机可读介质,所述指令在由计算机逻辑执行时使所述计算机逻辑执行本文所限定方法的任何方法。还提供一种存储指令的计算机可读存储介质,所述指令在由计算机逻辑执行时使所述计算机逻辑执行本文所限定方法的任何方法。计算机程序产品可采用非易失性存储器或者易失性存储器的形式,例如EEPROM(电可擦可编程只读存储器)、闪速存储器、磁盘驱动器或者RAM(随机存取存储器)。
对技术人员将会显而易见的是,在本文所述方法中执行的动作的确切顺序和内容可根据执行参数的特定集合的要求来改变。相应地,描述和/或要求动作所采用的顺序不是要被解释为对要执行动作所采用的顺序的严格限制。
应当注意,上面提及的实施例说明而不是限制本发明,并且本领域的技术人员将能够设计许多备选实施例,而不背离所附权利要求的范围。词语“包括”不排除除了权利要求中所列出的那些之外的元件或步骤的存在,“一”或“一个”不排除多个,以及单个处理器或其它单元可实现在权利要求书中所述的若干单元的功能。权利要求中的任何参考标号将不被解释为限制其范围。
以上所述方法可通过适当适配的硬件(例如,如图8所示网络记录设备的示范硬件实现的适配形式)来执行,其中适配涉及提供用于取决于视频正被分发给多少客户端的对视频的编码和存储的机制。
该方法还可采用在计算机可读介质上存储的指令的集合来体现,其在被加载到计算机处理器、数字信号处理器(DSP)等中时使处理器执行前文所述的记录方法。
同样,该方法可体现为专用编程或硬件设计的集成电路,其进行操作以对加载到所述集成电路中的视频数据执行该方法。集成电路可作为通用计算装置(例如PC等)的部分来形成,或者它可作为更专用装置(例如游戏控制台、移动电话、便携计算机装置或硬件视频编码器)的部分来形成。
一个示范硬件实施例是现场可编程门阵列(FPGA)的实施例,所述FPGA编程为执行所述方法,位于机架安装视频编码器的子板上,以供例如电视演播室或卫星或者有线电视头端中使用。
本发明的另一个示范硬件实施例是包括专用集成电路(ASIC)的网络记录设备的实施例。
客户端可以是用户设备。客户端可以是任何种类的个人计算机,例如电视机、智能电视机、机顶盒、游戏控制台、家庭影院个人计算机、平板电脑、智能电话、膝上型乃至桌上型PC。
本文所述的自适应流传输的示例不打算限制可应用所公开方法和设备的流传输系统。本文所公开的原理能够应用于使用不同视频质量的任何流传输系统,例如HTTP自适应流传输、Apple™ HTTP实况流传输和Microsoft™平滑流传输。
对技术人员将会显而易见的是,在本文所述方法中执行的动作的确切顺序和内容可根据例如编码速度、检测精度、视频源的分辨率、与统计复用方法一起使用的压缩标准的类型等的执行参数的特定集合的要求来改变。相应地,描述和/或要求动作所采用的顺序不是要被解释为对要执行动作所采用的顺序的严格限制。
Claims (20)
1.一种在网络记录设备中的方法,所述方法包括:
接收视频;
确定所述视频正被分发给多少客户端;以及
取决于所述视频正被分发给多少客户端的对所述视频的编码和存储。
2.如权利要求1所述的方法,还包括取决于所述视频内容复杂度对所述视频进行编码和存储。
3.如权利要求1或2所述的方法,还包括控制被生成和存储的所述视频的版本的数量。
4.如任何以上权利要求所述的方法,还包括控制应用于所述视频的所述编码努力。
5.如任何以上权利要求所述的方法,其中,如果所述视频正被分发给的客户端的所述数量少于阈值,则存储所述视频的单个表示。
6.如任何以上权利要求所述的方法,其中,如果所述视频正被分发给的客户端的所述数量大于阈值,则所述视频以不同比特率来编码,以生成不同比特率的所述视频的多个表示,并且存储所述视频的所述多个表示。
7.如任何以上权利要求所述的方法,还包括:
接收对于所存储视频的回放请求;
检索所存储视频;以及
使用自适应比特率流传输来输送所存储视频。
8.如权利要求7所述的方法,还包括,在存储所述视频的单个表示的情况下,生成所述视频的多个比特率版本以用于自适应比特率流传输。
9.如权利要求7所述的方法,还包括,在存储所述视频的多个表示的情况下,检索所述多个版本以用于自适应比特率流传输。
10. 一种网络记录设备,包括处理器,布置成:
接收视频;以及
确定所述视频正被分发给多少客户端;
其中所述处理器取决于所述视频正被分发给多少客户端来控制所述视频的所述编码并且控制所述视频的所述存储。
11.如权利要求10所述的网络记录设备,还包括用于存储编码的视频的存储设备。
12.如权利要求11所述的网络记录设备,还包括用于对从存储设备检索的视频进行转码的转码模块。
13.如权利要求10至12中的任一项所述的网络记录设备,其中,所述处理器还取决于所述视频内容复杂度来控制所述视频的所述编码并且控制所述视频的所述存储。
14.如权利要求10至13中的任一项所述的网络记录设备,其中,所述处理器命令编码器控制所述视频的多少版本被编码。
15.如权利要求10至14中的任一项所述的网络记录设备,其中,如果所述视频正被分发给的客户端的所述数量少于阈值,则所述网络记录设备存储所述视频的单个表示。
16.如权利要求10至15中的任一项所述的网络记录设备,其中,如果所述视频正被分发给的客户端的所述数量大于阈值,则所述网络记录设备存储所述视频的多个表示,所述多个版本以不同比特率来编码。
17.如权利要求10至16中的任一项所述的网络记录设备,还布置成:
接收对于所存储视频的回放请求;
从存储设备检索所存储视频;以及
使用自适应比特率流传输来输送所存储视频。
18.如权利要求17所述的网络记录设备,还包括转码模块,所述转码模块布置成使得在存储所述视频的单个表示的情况下,所述转码模块生成所述视频的多个比特率版本以用于自适应比特率流传输。
19. 一种用于记录网络中的视频的设备,包括处理器和存储器,所述存储器包含由所述处理器可执行的指令,由此所述设备可操作以:
接收视频;以及
确定所述视频正被分发给多少客户端;
其中所述处理器取决于所述视频正被分发给多少客户端来控制所述视频的所述编码并且控制所述视频的所述存储。
20.一种携带指令的计算机可读介质,所述指令在由计算机逻辑执行时使所述计算机逻辑执行由权利要求1至9限定的所述方法的任何方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/EP2016/050023 WO2017118470A1 (en) | 2016-01-04 | 2016-01-04 | Improved network recording apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108476328A true CN108476328A (zh) | 2018-08-31 |
CN108476328B CN108476328B (zh) | 2021-04-20 |
Family
ID=55083411
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680077832.0A Active CN108476328B (zh) | 2016-01-04 | 2016-01-04 | 改进的网络记录设备 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10531135B2 (zh) |
EP (1) | EP3400708B1 (zh) |
CN (1) | CN108476328B (zh) |
WO (1) | WO2017118470A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6977422B2 (ja) * | 2017-09-13 | 2021-12-08 | 株式会社Jvcケンウッド | トランスコード装置、トランスコード方法及びトランスコードプログラム |
CN112715028A (zh) | 2018-09-28 | 2021-04-27 | 英特尔公司 | 传送控制的视频编码 |
US20220141476A1 (en) * | 2020-10-30 | 2022-05-05 | Bitmovin, Inc. | Lightweight Transcoding at Edge Nodes |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100017516A1 (en) * | 2008-07-16 | 2010-01-21 | General Instrument Corporation | Demand-driven optimization and balancing of transcoding resources |
US20120110036A1 (en) * | 2010-10-27 | 2012-05-03 | Qualcomm Incorporated | Media file caching for an electronic device to conserve resource |
CN102460418A (zh) * | 2009-04-24 | 2012-05-16 | 第三级通讯公司 | 媒体资源存储和管理 |
CN103858419A (zh) * | 2011-08-30 | 2014-06-11 | 索尼克Ip股份有限公司 | 用于无缝切换多媒体内容的分辨率的分辨率选择 |
US20140247887A1 (en) * | 2011-12-28 | 2014-09-04 | Verizon Patent And Licensing Inc. | Just-in-time (jit) encoding for streaming media content |
CN104247368A (zh) * | 2012-05-04 | 2014-12-24 | 汤姆逊许可公司 | 用于提供多个经译码的内容流的方法和设备 |
CN104854877A (zh) * | 2012-10-04 | 2015-08-19 | 爱立信电视公司 | 用于创建描述符文件的多个版本的系统和方法 |
US20150350704A1 (en) * | 2013-01-29 | 2015-12-03 | Espial Group Inc. | Distribution of adaptive bit rate video streaming via hyper-text transfer protocol |
EP2952005A1 (en) * | 2013-01-29 | 2015-12-09 | Espial Group Inc. | Distribution of adaptive bit rate live streaming video via hyper-text transfer protocol |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2676705A1 (en) * | 2007-02-09 | 2008-08-21 | Novarra, Inc. | Method and system for transforming and delivering video file content for mobile devices |
US8561116B2 (en) | 2007-09-26 | 2013-10-15 | Charles A. Hasek | Methods and apparatus for content caching in a video network |
US8549167B2 (en) | 2011-06-21 | 2013-10-01 | Net Power And Light, Inc. | Just-in-time transcoding of application content |
US9432704B2 (en) * | 2011-11-06 | 2016-08-30 | Akamai Technologies Inc. | Segmented parallel encoding with frame-aware, variable-size chunking |
-
2016
- 2016-01-04 EP EP16700286.4A patent/EP3400708B1/en active Active
- 2016-01-04 US US16/067,854 patent/US10531135B2/en active Active
- 2016-01-04 WO PCT/EP2016/050023 patent/WO2017118470A1/en active Application Filing
- 2016-01-04 CN CN201680077832.0A patent/CN108476328B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100017516A1 (en) * | 2008-07-16 | 2010-01-21 | General Instrument Corporation | Demand-driven optimization and balancing of transcoding resources |
CN102460418A (zh) * | 2009-04-24 | 2012-05-16 | 第三级通讯公司 | 媒体资源存储和管理 |
US20120110036A1 (en) * | 2010-10-27 | 2012-05-03 | Qualcomm Incorporated | Media file caching for an electronic device to conserve resource |
CN103858419A (zh) * | 2011-08-30 | 2014-06-11 | 索尼克Ip股份有限公司 | 用于无缝切换多媒体内容的分辨率的分辨率选择 |
US20140247887A1 (en) * | 2011-12-28 | 2014-09-04 | Verizon Patent And Licensing Inc. | Just-in-time (jit) encoding for streaming media content |
CN104247368A (zh) * | 2012-05-04 | 2014-12-24 | 汤姆逊许可公司 | 用于提供多个经译码的内容流的方法和设备 |
CN104854877A (zh) * | 2012-10-04 | 2015-08-19 | 爱立信电视公司 | 用于创建描述符文件的多个版本的系统和方法 |
US20150350704A1 (en) * | 2013-01-29 | 2015-12-03 | Espial Group Inc. | Distribution of adaptive bit rate video streaming via hyper-text transfer protocol |
EP2952005A1 (en) * | 2013-01-29 | 2015-12-09 | Espial Group Inc. | Distribution of adaptive bit rate live streaming video via hyper-text transfer protocol |
Also Published As
Publication number | Publication date |
---|---|
US20190014360A1 (en) | 2019-01-10 |
EP3400708B1 (en) | 2021-06-30 |
WO2017118470A1 (en) | 2017-07-13 |
EP3400708A1 (en) | 2018-11-14 |
US10531135B2 (en) | 2020-01-07 |
CN108476328B (zh) | 2021-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9462307B2 (en) | ABR live to VOD system and method | |
US9503765B2 (en) | Averting ad skipping in adaptive bit rate systems | |
US9351020B2 (en) | On the fly transcoding of video on demand content for adaptive streaming | |
US9866605B2 (en) | Streaming manifest quality control | |
US10567825B2 (en) | Cloud DVR storage | |
US20130070839A1 (en) | Statistical multiplexing of streaming media | |
WO2013173721A1 (en) | Audio-visual content delivery | |
JP2018505594A (ja) | コンテンツを符号化し、デバイス間でコンテンツを共有するためのシステムおよび方法 | |
CN105191322A (zh) | 使用按需转码的多画面网络数字视频记录的系统和方法 | |
CN108476328A (zh) | 改进的网络记录设备 | |
EP3072303B1 (fr) | Diffusion adaptative de contenus multimedia | |
US11316922B2 (en) | Dynamic selection of storage device for storing media | |
US9924239B2 (en) | Video on demand over satellite | |
CN108702542A (zh) | 用于串流服务的客户端操作方法 | |
US20220321632A1 (en) | Method for managing adaptive progressive downloading (has) of digital content which is broadcast in real time, corresponding administrator, multimedia stream player terminal and computer program | |
US20240031629A1 (en) | Method for dynamic configuration of multimedia content encoder and apparatus for implementing the same | |
US20170230612A1 (en) | Adaptive resolution encoding for streaming data | |
WO2019166960A1 (en) | Apparatus, method and system for multiple audio-video streams reception | |
WO2013030237A1 (en) | Method for adapting the segment size in transcoded multimedia streams | |
EP2879352A1 (fr) | Contrôle de la diffusion de contenus multimedia |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |