CN103686202B - 一种dlna下基于http的转码实时传输方法及系统 - Google Patents

一种dlna下基于http的转码实时传输方法及系统 Download PDF

Info

Publication number
CN103686202B
CN103686202B CN201210346503.5A CN201210346503A CN103686202B CN 103686202 B CN103686202 B CN 103686202B CN 201210346503 A CN201210346503 A CN 201210346503A CN 103686202 B CN103686202 B CN 103686202B
Authority
CN
China
Prior art keywords
digital media
data
http
information
item
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201210346503.5A
Other languages
English (en)
Other versions
CN103686202A (zh
Inventor
梁洁辉
赵发杰
王胜娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201210346503.5A priority Critical patent/CN103686202B/zh
Priority to EP13790290.4A priority patent/EP2887676B1/en
Priority to US14/428,732 priority patent/US10051026B2/en
Priority to PCT/CN2013/078619 priority patent/WO2013170811A1/zh
Priority to ES13790290T priority patent/ES2700163T3/es
Publication of CN103686202A publication Critical patent/CN103686202A/zh
Application granted granted Critical
Publication of CN103686202B publication Critical patent/CN103686202B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/281—Exchanging configuration information on appliance services in a home automation network indicating a format for calling an appliance service function in a home automation network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4516—Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/2849—Audio/video appliances

Abstract

本发明公开了一种DLNA下基于HTTP的转码实时传输方法，包括：将播放能力信息与媒体项资源信息进行匹配，根据匹配结果播放在数字媒体服务器中获取的多媒体内容或者接收数字媒体服务器通过HTTP发送的编码后的数据并进行播放。本发明还公开了一种DLNA下基于HTTP的转码实时传输系统，采用本发明能实现DLNA下基于HTTP的多媒体的实时转码和现场流的实时转播。

Description

一种DLNA下基于HTTP的转码实时传输方法及系统
技术领域
本发明涉及多媒体技术领域，尤其涉及一种在DLNA网络中数字媒体服务器基于HTTP的转码实时传输方法及系统。
背景技术
基于DLNA(Digital Living Network Alliance)的设备可以分为：数字媒体服务器(Digital Media Server/Mobile-Digital Media Server，简称DMS/M-DMS)、数字媒体播放器(Digital Media Player/Mobile-Digital Media Player，简称DMP/M-DMP)、数字媒体控制器(Digital Media Controller/Mobile-Digital MediaController，简称DMC/M-DMC)和数字媒体渲染器(Digital Media Render，简称DMR)。数字媒体服务器负责发布用户共享的多媒体内容，这些多媒体可以是图片、音乐和视频，可以有多种多样的编码格式和文件格式。数字媒体播放器以及数字媒体渲染器播放数字媒体服务器共享的多媒体内容，由于设备能力限制，通常数字媒体播放器或者数字媒体渲染器与数字媒体服务器支持的文件格式和数字媒体编码格式有差异，因此数字媒体播放器和数字媒体渲染器无法播放数字媒体服务器共享的全部多媒体内容。这种情况下，就需要数字媒体服务器进行多媒体的实时转码。
多媒体实时转码通常需要数字媒体服务器采用实时流传输协议(RealTimeStreaming Protocol，简称RTSP)来进行，对于数字媒体服务器采用超文本传送协议(HyperText Transfer Protocol，简称HTTP)时，则会遇到如下问题：
1、在通常情况下，采用HTTP进行实时转码的数字媒体服务器必须明确知道要传送的全部数据大小，这就要求采用HTTP传输的数字媒体服务器实现多媒体转码功能时，必须先将对应媒体资源预先转换成指定格式的文件，然后再进行HTTP传输，这必然会产生较大的延迟，大大降低了DLNA用户对数字媒体的体验，无法用来传输实时资源，例如数字电视、摄像头视频等；
2、在无法明确知道要传输的数据大小的情况下，数字媒体服务器可采用HTTP中的块编码机制进行实时转码，在该分块传输编码机制中，每次传送一个数据块，如果没有数据需要发送时，那么发送零大小的数据块，表示数据传输完毕，每个数据块的第一字节表示数据块大小(不包括CRLF)，每个数据块以回车及换行(Carriage Return/Line Feed，简称CRLF)终止；这种方法用来传输可扩展标记语言(Extensible Markup Language，简称XML)数据时，可以有效地解决数据大小未知的HTTP传输，但用来传输多媒体数据时有如下问题：
1)以CRLF作为每个数据块的结束，对于UTF-8编码的XML数据不存在任何问题，但用于多媒体数据传输，如果多媒体数据自身包含CRLF，则会被误认为该数据块传输终止，导致CRLF后面的数据丢失；
2)未充分利用块扩展信息来提供数据块的相关信息。
因此，由于数字媒体服务器通过HTTP传输多媒体数据时存在上述限制，因此，数字媒体服务器只能通过RTSP或者HTTP的直播流(HTTP LiveStreaming，简称HLS)协议才能进行实时转码、实时传输，无法通过HTTP实现实时转码、实时传输。
发明内容
有鉴于此，本发明的主要目的在于提供一种DLNA下基于HTTP的多媒体转码实时传输方法及系统，实现通过HTTP传输多媒体数据时对多媒体的实时转码、实时传输。
为达到上述目的，本发明的技术方案是这样实现的：
本发明提供了一种DLNA下基于HTTP的转码实时传输方法，该方法包括如下步骤：
将播放能力信息与媒体项资源信息进行匹配，根据匹配结果播放在数字媒体服务器中获取的多媒体内容或者接收数字媒体服务器通过HTTP发送的编码后的数据并进行播放。
这里，所述将播放能力信息与媒体项资源信息进行匹配，包括：
数字媒体服务器将媒体项资源信息发送至数字媒体播放器；数字媒体播放器将自身的播放能力信息与所述媒体项资源信息进行匹配。
其中，所述媒体项资源信息包括：原始资源项、特殊资源项和全匹配资源项；
所述根据匹配结果播放在数字媒体服务器中获取的多媒体内容或者接收数字媒体服务器通过HTTP发送的编码后的数据并进行播放，包括：
数字媒体播放器能够匹配原始资源项，在数字媒体服务器中获取多媒体内容并进行播放；或者，
数字媒体播放器在不能匹配原始资源项的情况下，能够匹配特殊资源项或全匹配资源项，将匹配结果发送至数字媒体服务器，数字媒体服务器根据匹配结果将多媒体内容转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP发送至数字媒体播放器，数字媒体播放器接收到编码后的数据并进行播放。
这里，所述将播放能力信息与媒体项资源信息进行匹配，或者包括：
数字媒体服务器将媒体项资源信息发送至数字媒体控制器；数字媒体控制器获取数字媒体渲染器的播放能力信息，将所述播放能力信息与所述媒体项资源信息进行匹配。
其中，所述媒体项资源信息包括：原始资源项、特殊资源项和全匹配资源项；
所述根据匹配结果播放在数字媒体服务器中获取的多媒体内容或者接收数字媒体服务器通过HTTP发送的编码后的数据并进行播放，包括：
数字媒体控制器能够匹配原始资源项，将匹配结果发送至数字媒体渲染器，数字媒体渲染器根据匹配结果在数字媒体服务器中获取多媒体内容并进行播放；或者，
数字媒体控制器在不能匹配原始资源项的情况下，能够匹配特殊资源项或全匹配资源项，将匹配结果发送至数字媒体服务器；数字媒体服务器将多媒体内容转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP发送至数字媒体渲染器，数字媒体渲染器接收到编码后的数据并进行播放。
其中，所述特殊资源项包括：TS资源项、MP4资源项、局部资源项中的一项或多项。
所述HTTP块编码为将多媒体数据分为普通数据块和最终块；其中，所述普通数据块包括：数据块长度信息、数据块扩展信息、扩展信息分隔符、数据块数据和分隔符；所述最终块包括：数据块长度信息和分隔符，且长度为零。
所述数据块扩展信息包括：数据块类型、数据块内容编码方式以及数据块内容的解码时戳；和/或，
所述扩展信息分隔符和分隔符为回车换行字符；和/或，
所述数据块长度为网络字节序的4个字节长度，每个数据块长度最多传输232-1个字节。
本发明还提供了一种DLNA下基于HTTP的转码实时传输系统，所述系统包括：
数字媒体服务器，用于发送多媒体数据的媒体项资源信息，接收数字媒体播放器、或者数字媒体控制器发送的匹配结果，根据匹配结果将多媒体内容转码后的数据进行HTTP块编码，将编码后的数据传输给数字媒体播放器、或者数字媒体渲染器；
数字媒体控制器，用于接收数字媒体服务器发送的媒体项资源信息，并将从数字媒体渲染器获取到的数字媒体渲染器的播放能力信息与所述媒体项资源信息进行匹配，将匹配结果传输给数字媒体渲染器；还用于将所述匹配结果发送至数字媒体服务器；
数字媒体渲染器，用于接收数字媒体控制器发送的匹配结果，并根据匹配结果在数字媒体服务器中获取多媒体内容并进行播放，或者，接收来自数字媒体服务器的编码后的数据并进行播放；
数字媒体播放器，用于接收数字媒体服务器发送的媒体项资源信息，并将自身的播放能力信息与所述媒体项资源信息进行匹配，根据匹配结果在数字媒体服务器中获取多媒体内容并进行播放，或者，将所述匹配结果发送至所述数字媒体服务器，接收来自数字媒体服务器的编码后的数据并进行播放。
这里，所述数字媒体服务器包括：多媒体内容描述单元、多媒体内容编码单元、以及消息单元；
其中，所述多媒体内容描述单元：用于通过数位项目宣告语言DIDL对多媒体内容进行描述；
所述多媒体内容编码单元：用于将多媒体内容转码后的数据进行HTTP块编码；
所述消息单元：用于接收数字媒体播放器、或者数字媒体控制器发送的匹配结果，根据匹配结果将多媒体内容转码后的数据进行HTTP块编码，将编码后的数据通过HTTP发送至数字媒体播放器、或者数字媒体渲染器。
因此，本发明所提供的DLNA下基于HTTP的转码实时传输方法及系统的优点：通过利用改进的HTTP的分块传输编码机制，利用DLNA网络中的数字媒体服务器获取多媒体内容的媒体项资源信息，然后所述数字媒体服务器使用改进的HTTP块编码机制对要传输的信息进行转码并通过HTTP实时传输到数字媒体播放器或者数字媒体渲染器上进行播放，进而实现DLNA下的多媒体的实时转码和现场流的实时转播，此过程并不需要采用RTSP或者HLS协议，大大改善了DLNA网络中共享媒体的视频格式和文件格式的支持能力，实现了基于HTTP的多媒体实时传输特性。
附图说明
图1为本发明实施例的DLNA下基于HTTP的转码实时传输流程图；
图2为本发明改进后的HTTP块编码结构示意图；
图3为本发明DLNA下基于HTTP的转码实时传输的装置示意图。
具体实施方式
本发明的基本思想是：将播放能力信息与媒体项资源信息进行匹配，根据匹配结果播放在数字媒体服务器中获取的多媒体内容或者接收数字媒体服务器通过HTTP发送的编码后的数据并进行播放。
以下结合图示详细说明本发明的实施过程。
本发明的DLNA下基于HTTP的转码实时传输的系统主要包括：数字媒体服务器、数字媒体播放器、数字媒体渲染器和数字媒体控制器。
基于上述系统，本发明实现DLNA下基于HTTP协议的转码实时传输的方法，如图1所示，具体步骤如下：
步骤101：数字媒体服务器和数字媒体渲染器通过通用即插即用(UniversalPlugand Play，简称UPnP)协议分别向DLNA网络中所有设备发送自己的状态信息，以告知DLNA网络中各设备自身状态正常；
步骤102：数字媒体控制器收到所述状态信息后，获取数字媒体服务器共享的多媒体内容的多媒体内容描述信息，供用户选择；且用户通过数字媒体控制器提供的多媒体内容描述信息选定某个多媒体内容在数字媒体渲染器、或者数字媒体播放器中播放，数字媒体控制器将用户所选择的多媒体内容的多媒体内容描述信息发送至数字媒体服务器；
其中，所述多媒体内容描述信息为：媒体项标识、上层媒体项标识、媒体项是否可修改、媒体项标题、媒体项创建日期、媒体项的类型、和媒体项资源(res)信息；
其中，所述媒体项标识为：唯一标识每一个多媒体内容，用来区分数字媒体服务中的不同多媒体内容；
所述上层媒体项标识为：多媒体内容所在的上一级容器标识，用于数字媒体控制器浏览时使用；
所述媒体项类型为：多媒体内容的类别，例如音频、视频或图片等；
所述媒体项资源信息为：多媒体内容的访问方式，包括统一资源定位符(Universal Resource Locator，URL)、多媒体内容字节数以及多媒体内容的多用途网际邮件扩充协议(Multipurpose Internet Mail Extensions，MIME)类型。
步骤103：数字媒体服务器接收到所述用户选定的多媒体内容描述信息后，将所述多媒体内容描述信息中的媒体项资源信息发送至数字媒体播放器、或者数字媒体控制器进行匹配；
其中，所述媒体项资源信息包括：原始资源项和全匹配资源项，还包括：特殊资源项；
其中，所述原始资源项为：多媒体内容自身的格式类型；
所述全匹配资源项为：数字媒体播放器、数字媒体渲染器的播放能力均支持的格式类型；
所述特殊资源项为：对多媒体内容进行格式转换的目标格式类型。
其中，所述特殊资源项可以包括：传输流(Transport Stream，简称TS)资源项、MP4资源项、或局部资源项三项中的一项、或多项；
这里，所述TS资源项为：可以将用户选定的多媒体内容转换为MPEG4格式的传输流；
所述MP4资源项为：可以将用户选定的多媒体内容转换为MP4格式的文件；
所述局部资源项为：可以只将用户选定的多媒体内容的视频流转换为特定编码如H264编码的视频帧；或者，可以只将用户选定的多媒体内容的音频流转换为特定编码如AAC编码的音频帧，从而满足数字媒体播放器、或者数字媒体渲染器只播放某种特定格式的内容的要求；
所述全匹配资源项具体可以为：将用户选定的多媒体内容的视频流转换为H264编码的视频帧、音频流转换为AAC编码的音频帧；
其中，所述H264编码具体可以为H.264 BaseLine Profile 3.1；
所述AAC编码具体可以为AAC-LC Profile。
步骤104至107：数字媒体播放器将其自身的播放能力信息与所述媒体项资源信息进行匹配，若数字媒体播放器能够匹配原始资源项，则执行步骤107，即数字媒体播放器在数字媒体服务器中获取用户选定的多媒体内容并进行播放；或者，数字媒体控制器获取数字媒体渲染器的播放能力信息，然后所述数字媒体控制器根据获取到的数字媒体渲染器的播放能力信息与所述媒体项资源信息进行匹配，若数字媒体控制器能够匹配原始资源项，则执行步骤107，即数字媒体控制器将匹配结果发送至数字媒体渲染器，然后数字媒体渲染器根据匹配结果在数字媒体服务器中获取用户选定的多媒体内容并进行播放；
若数字媒体播放器在不能匹配原始资源项的情况下，能够匹配特殊资源项，或数字媒体播放器在不能匹配原始资源项和特殊资源项的情况下，能够匹配全匹配资源项，数字媒体播放器将匹配结果发送至数字媒体服务器，而后执行步骤106，即所述数字媒体服务器根据匹配结果将所述多媒体内容转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP发送至数字媒体播放器，随后执行步骤108，即数字媒体播放器接收到编码后的数据并进行播放；或者，数字媒体控制器在不能匹配原始资源项的情况下，能够匹配特殊资源项，或数字媒体控制器在不能匹配原始资源项和特殊资源项的情况下，能够匹配全匹配资源项，数字媒体控制器将匹配结果发送至数字媒体服务器，而后执行步骤106至步骤108，即数字媒体服务器根据匹配结果将所述多媒体内容转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP发送至数字媒体渲染器，数字媒体渲染器接收到编码后的数据并进行播放；
具体地，若数字媒体播放器能够匹配TS资源项、MP4资源项、局部资源项、或全匹配资源项，数字媒体播放器将匹配结果发送至数字媒体服务器，而后执行步骤106，即所述数字媒体服务器将所述多媒体内容转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP发送至数字媒体播放器，随后执行步骤108，即数字媒体播放器接收到编码后的数据并进行播放；或者，若数字媒体控制器能够匹配TS资源项、MP4资源项、局部资源项、或全匹配资源项，数字媒体控制器将匹配结果发送至数字媒体服务器，而后执行步骤106至步骤108，即数字媒体服务器将所述多媒体内容转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP发送至数字媒体渲染器，数字媒体渲染器接收到编码后的数据并进行播放；
其中，所述数字媒体播放器或者数字媒体控制器匹配的是全匹配资源项、或者局部资源项，则数字媒体播放器或者数字媒体渲染器必须支持如下的视频和音频编码：
视频H264编码：H.264 Base Line Profile 3.1，
音频AAC编码：AAC-LC Profile。
所述全匹配资源项和局部资源项不进行文件格式封装，逐帧发送数据，根据HTTP块编码的数据块扩展信息内容提示是音频帧、或者视频帧，以及其音频帧解码时戳、或者其视频帧解码时戳，以便接收端的数字媒体播放器或者数字媒体渲染器能够正常解码，从而实现基于HTTP的多媒体内容的实时转码、实时传输；
其中，每一视频帧、或音频帧为一个HTTP块编码中的普通数据块。
对于匹配的是TS资源项、MP4资源项时，所述TS资源项将所述用户选定的多媒体内容转换为MPEG4格式的传输流，并将实时转换的所述MPEG4格式的传输流封装为TS帧，每一个TS帧封装到一个HTTP块编码中的普通数据块中并进行逐个TS帧发送，且根据HTTP块编码的数据块扩展信息内容提示是TS帧，以便接收端的数字媒体播放器或者数字媒体渲染器能够正常解码，从而实现基于HTTP的多媒体内容的实时转码、实时传输；
其中，所述TS帧中包括：视频帧、和/或音频帧，以及相应的音频帧解码时戳、和/或视频帧解码时戳；
所述MP4资源项将所述用户选定的多媒体内容转换为MP4格式的文件，其中所述MP4格式的文中包含有不同的编码方式，将所述用户选定的多媒体内容通过特定的编码方式编码后的内容称为特定格式的传输流；由此可知，所述MP4资源项最终将所述用户选定的多媒体内容转换为特定格式的传输流，随后将实时转换的所述特定格式的传输流封装成MP4帧，将每一个MP4帧封装到一个HTTP块编码中的普通数据块中并进行逐个MP4帧发送，且根据HTTP块编码的数据块扩展信息内容提示是MP4帧，以便接收端的数字媒体播放器或者数字媒体渲染器能够正常解码，从而实现基于HTTP的多媒体内容的实时转码、实时传输；
其中，将所述特定格式的传输流封装成的格式称为MP4帧，其中，每个MP4帧的容量小于232-1个字节，所述MP4帧包括：视频帧、和/或音频帧，以及相应的音频帧解码时戳、和/或视频帧解码时戳。
图2为本发明改进后的HTTP块编码结构示意图，所述数字媒体服务器按图2所示结构对多媒体数据进行HTTP块编码：
这里，所述HTTP块编码为：将所述多媒体数据分为若干普通数据块、和一个最终块；其中，
所述普通数据块的数据结构包括：数据块长度信息、数据块扩展信息、扩展信息分隔符、数据块数据和分隔符；
所述最终块的数据结构包括：数据块长度信息和分隔符，且长度为零；
所述数据块扩展信息包括：数据块类型、数据块内容编码方式以及数据块内容的解码时戳；其中，所述数据块内容的解码时戳包括：音频帧解码时戳、和/或视频帧解码时戳；所述数据块类型包括：音频帧、视频帧、TS帧以及MP4帧；
所述扩展信息分隔符和分隔符均为回车及换行(CRLF)字符，占用两个字节；
所述数据块长度为网络字节序的4个字节长度，则每个数据块长度最多传输232-1个字节。
图3为本发明DLNA下基于HTTP的转码实时传输的系统示意图，如图3所示，一种DLNA下基于HTTP的转码实时传输的系统，包括：
数字媒体服务器，用于发送多媒体内容的媒体项资源信息，接收数字媒体播放器、或者数字媒体控制器发送的匹配结果，根据匹配结果将多媒体内容转码后的数据进行HTTP块编码，将编码后的数据传输给数字媒体播放器、或者数字媒体渲染器；
数字媒体控制器，用于接收数字媒体服务器发送的媒体项资源信息，并将从数字媒体渲染器获取到的数字媒体渲染器的播放能力信息与所述媒体项资源信息进行匹配，将匹配结果传输给数字媒体渲染器；还用于将所述匹配结果发送至数字媒体服务器；
数字媒体渲染器，用于接收数字媒体控制器发送的匹配结果，并根据匹配结果在数字媒体服务器中获取用户选定的多媒体内容并进行播放，或者，接收来自数字媒体服务器的编码后的数据并进行播放；
数字媒体播放器，用于接收数字媒体服务器发送的媒体项资源信息，并将自身的播放能力信息与所述媒体项资源信息进行匹配，根据匹配结果在数字媒体服务器中获取用户选定的多媒体内容并进行播放，或者，将所述匹配结果发送至所述数字媒体服务器，接收来自数字媒体服务器的编码后的数据并进行播放。
其中，所述数字媒体服务器包括：多媒体内容描述单元、多媒体内容编码单元、以及消息单元；
所述多媒体内容描述单元：用于通过数位项目宣告语言(DigitalItemDeclaration Language，DIDL)对多媒体内容进行描述；
所述多媒体内容编码单元：用于将多媒体内容转码后的数据进行HTTP块编码；
所述消息单元：用于接收数字媒体播放器、或者数字媒体控制器发送的匹配结果，根据匹配结果将多媒体内容转码后的数据进行HTTP块编码，将编码后的数据通过HTTP发送至数字媒体播放器、或者数字媒体渲染器。
实施例1
数字媒体服务器中存储有多媒体内容(如某一WMV视频片源)，数字媒体服务器通过DIDL对每一个多媒体内容进行如下描述，且下述内容统称为多媒体内容描述信息：
1)媒体项标识，2)上层媒体项标识，3)媒体项是否可修改，4)媒体项标题，5)媒体项创建日期，6)媒体项的类型，7)媒体项资源(res)信息；
数字媒体控制器通过与数字多媒体服务器的交互获取多媒体内容的多媒体内容描述信息，用户通过选择数字媒体控制器提供的多媒体内容描述信息来指定某一WMV视频片源在数字媒体渲染器中播放，数字媒体控制器将用户选择的WMV视频片源的多媒体内容描述信息发送至数字媒体服务器之后，采用如下具体过程实现HTTP的转码实施传输：
步骤201：数字媒体服务器将所述WMV视频片源的媒体项资源信息发送至数字媒体控制器进行匹配；
其中，所述媒体项资源信息包括：原始资源项、TS资源项、MP4资源项、局部资源项和全匹配资源项；通常第一个为原始资源项、最后一个为全匹配资源项，中间为TS资源项、MP4资源项和局部资源项；
其中，所述TS资源项为：可以将所述WMV视频片源转换为MPEG4格式的TS流；
所述MP4资源项为：可以将所述WMV视频片源转换为MP4格式的文件；
所述局部资源项为：可以将所述WMV视频片源的音频流转换为MP3格式；
所述全匹配资源项为：可以将所述WMV视频片源的视频流转换为H264编码的视频帧，将其音频流转换为AAC编码的音频帧，
其中，所述H264编码为H.264 BaseLine Profile 3.1；
所述AAC编码为AAC-LC Profile。
步骤202：数字媒体控制器获取数字媒体渲染器的播放能力信息，并将获取的播放能力信息与媒体项资源信息进行匹配，匹配结果为全匹配资源项，则数字媒体控制器将所述匹配结果发送至数字媒体服务器；
步骤203：数字媒体服务器接收到上述匹配结果后，对所述WMV视频片源转码后的数据进行HTTP块编码，然后将编码后的数据通过HTTP逐帧发送至数字媒体渲染器进行播放。
其中，数字媒体渲染器支持如下的视频和音频编码：
视频H264编码：H.264 Base Line Profile 3.1，音频AAC编码：AAC-LCProfile。
实施例2
数字媒体服务器中存储有多媒体内容(如某一WMV视频片源)，数字媒体服务器通过DIDL对每一个多媒体内容进行如下描述，且下述内容统称为多媒体内容描述信息：
1)媒体项标识，2)上层媒体项标识，3)媒体项是否可修改，4)媒体项标题，5)媒体项创建日期，6)媒体项的类型，7)媒体项资源(res)信息；
数字媒体控制器通过与数字多媒体服务器的交互获取多媒体内容的多媒体内容描述信息，用户通过选择数字媒体控制器提供的多媒体内容描述信息来指定某一WMV视频片源在数字媒体播放器中播放，数字媒体控制器将用户选择的WMV视频片源的多媒体内容描述信息发送至数字媒体服务器之后，采用如下具体过程实现HTTP的转码实施传输：
步骤301：数字媒体服务器将所述WMV视频片源的媒体项资源信息发送至数字媒体播放器进行匹配；
其中，所述媒体项资源信息包括：原始资源项、TS资源项、MP4资源项、局部资源项和全匹配资源项；通常第一个为原始资源项、最后一个为全匹配资源项，中间为TS资源项、MP4资源项和局部资源项；
其中，所述TS资源项为：可以将所述WMV视频片源转换为MPEG4格式的TS流；
所述MP4资源项为：可以将所述WMV视频片源转换为MP4封装格式的文件；
所述局部资源项为：可以只将所述WMV视频片源的音频流转换为AAC编码的音频帧；或者只将所述WMV视频片源的视频流转换为H264编码的视频帧；
所述全匹配资源项为：可以将所述WMV视频片源的视频流转换为H264编码的视频帧，将其音频流转换为AAC编码的音频帧，
其中，所述H264编码为H.264 BaseLine Profile 3.1；
所述AAC编码为AAC-LC Profile。
步骤302：数字媒体播放器将其自身的播放能力信息与所述媒体项资源信息进行匹配，匹配结果为全匹配资源项，则数字媒体播放器将匹配结果发送至数字媒体服务器；
步骤303：数字媒体服务器接收到上述匹配结果后，对所述WMV视频片源转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP逐帧发送至数字媒体播放器进行播放。
其中，数字媒体播放器支持如下的视频和音频编码：
视频H264编码：H.264 Base Line Profile 3.1，音频AAC编码：AAC-LCProfile。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。

Claims (9)

1.一种DLNA下基于HTTP的转码实时传输方法，其特征在于，该方法包括如下步骤：
将播放能力信息与媒体项资源信息进行匹配，根据匹配结果接收数字媒体服务器通过HTTP发送的编码后的数据并进行播放；
其中，所述编码后的数据为所述数字媒体服务器根据匹配结果将多媒体内容转码后的数据进行HTTP块编码所得到的数据；所述HTTP块编码为将所述多媒体内容转码后的数据分为普通数据块和最终块；其中，所述普通数据块包括：数据块长度信息、数据块扩展信息、扩展信息分隔符、数据块数据和分隔符；所述最终块包括：数据块长度信息和分隔符，且长度为零。
2.根据权利要求1所述的方法，其特征在于，所述将播放能力信息与媒体项资源信息进行匹配，包括：
数字媒体服务器将媒体项资源信息发送至数字媒体播放器；
数字媒体播放器将自身的播放能力信息与所述媒体项资源信息进行匹配。
3.根据权利要求2所述的方法，其特征在于，所述媒体项资源信息包括：原始资源项、特殊资源项和全匹配资源项；
所述根据匹配结果接收数字媒体服务器通过HTTP发送的编码后的数据并进行播放，包括：
数字媒体播放器在不能匹配原始资源项的情况下，能够匹配特殊资源项或全匹配资源项，将匹配结果发送至数字媒体服务器，数字媒体服务器根据匹配结果将多媒体内容转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP发送至数字媒体播放器，数字媒体播放器接收到编码后的数据并进行播放。
4.根据权利要求1所述的方法，其特征在于，所述将播放能力信息与媒体项资源信息进行匹配，包括：
数字媒体服务器将媒体项资源信息发送至数字媒体控制器；
数字媒体控制器获取数字媒体渲染器的播放能力信息，将所述播放能力信息与所述媒体项资源信息进行匹配。
5.根据权利要求4所述的方法，其特征在于，所述媒体项资源信息包括：原始资源项、特殊资源项和全匹配资源项；
所述根据匹配结果接收数字媒体服务器通过HTTP发送的编码后的数据并进行播放，包括：
数字媒体控制器在不能匹配原始资源项的情况下，能够匹配特殊资源项或全匹配资源项，将匹配结果发送至数字媒体服务器；数字媒体服务器将多媒体内容转码后的数据进行HTTP块编码，并将编码后的数据通过HTTP发送至数字媒体渲染器，数字媒体渲染器接收到编码后的数据并进行播放。
6.根据权利要求3或5所述的方法，其特征在于，所述特殊资源项包括：TS资源项、MP4资源项、局部资源项中的一项或多项。
7.根据权利要求1所述的方法，其特征在于，
所述数据块扩展信息包括：数据块类型、数据块内容编码方式以及数据块内容的解码时戳；和/或，
所述扩展信息分隔符和分隔符为回车换行字符；和/或，
所述数据块长度为网络字节序的4个字节长度，每个数据块长度最多传输232-1个字节。
8.一种DLNA下基于HTTP的转码实时传输系统，其特征在于，所述系统包括：
数字媒体服务器，用于发送多媒体数据的媒体项资源信息，接收数字媒体播放器、或者数字媒体控制器发送的匹配结果，根据匹配结果将多媒体内容转码后的数据进行HTTP块编码，将编码后的数据传输给数字媒体播放器、或者数字媒体渲染器；所述HTTP块编码为将所述多媒体内容转码后的数据分为普通数据块和最终块；其中，所述普通数据块包括：数据块长度信息、数据块扩展信息、扩展信息分隔符、数据块数据和分隔符；所述最终块包括：数据块长度信息和分隔符，且长度为零；
数字媒体控制器，用于接收数字媒体服务器发送的媒体项资源信息，并将从数字媒体渲染器获取到的数字媒体渲染器的播放能力信息与所述媒体项资源信息进行匹配，将匹配结果传输给数字媒体渲染器；还用于将所述匹配结果发送至数字媒体服务器；
数字媒体渲染器，用于接收数字媒体控制器发送的匹配结果，并根据匹配结果接收来自数字媒体服务器的编码后的数据并进行播放；
数字媒体播放器，用于接收数字媒体服务器发送的媒体项资源信息，并将自身的播放能力信息与所述媒体项资源信息进行匹配，将所述匹配结果发送至所述数字媒体服务器，接收来自数字媒体服务器的编码后的数据并进行播放。
9.根据权利要求8所述的系统，其特征在于，所述数字媒体服务器包括：多媒体内容描述单元、多媒体内容编码单元、以及消息单元；
所述多媒体内容描述单元：用于通过数位项目宣告语言DIDL对多媒体内容进行描述；
所述多媒体内容编码单元：用于将多媒体内容转码后的数据进行HTTP块编码；
所述消息单元：用于接收数字媒体播放器、或者数字媒体控制器发送的匹配结果，根据匹配结果将多媒体内容转码后的数据进行HTTP块编码，将编码后的数据通过HTTP发送至数字媒体播放器、或者数字媒体渲染器。
CN201210346503.5A 2012-09-18 2012-09-18 一种dlna下基于http的转码实时传输方法及系统 Expired - Fee Related CN103686202B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201210346503.5A CN103686202B (zh) 2012-09-18 2012-09-18 一种dlna下基于http的转码实时传输方法及系统
EP13790290.4A EP2887676B1 (en) 2012-09-18 2013-07-01 Real-time transcode transfer method and system based on http under dlna
US14/428,732 US10051026B2 (en) 2012-09-18 2013-07-01 Real-time transcode transfer method and system based on HTTP under DLNA
PCT/CN2013/078619 WO2013170811A1 (zh) 2012-09-18 2013-07-01 一种dlna下基于http的转码实时传输方法及系统
ES13790290T ES2700163T3 (es) 2012-09-18 2013-07-01 Procedimiento y sistema de transferencia de transcódigo en tiempo real basados en HTTP bajo DLNA

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210346503.5A CN103686202B (zh) 2012-09-18 2012-09-18 一种dlna下基于http的转码实时传输方法及系统

Publications (2)

Publication Number Publication Date
CN103686202A CN103686202A (zh) 2014-03-26
CN103686202B true CN103686202B (zh) 2018-06-19

Family

ID=49583171

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210346503.5A Expired - Fee Related CN103686202B (zh) 2012-09-18 2012-09-18 一种dlna下基于http的转码实时传输方法及系统

Country Status (5)

Country Link
US (1) US10051026B2 (zh)
EP (1) EP2887676B1 (zh)
CN (1) CN103686202B (zh)
ES (1) ES2700163T3 (zh)
WO (1) WO2013170811A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10277646B2 (en) * 2014-12-19 2019-04-30 Vmware, Inc. Generating an automated multimedia feed based on virtual IT infrastructure users needs/interest
EP3269147B1 (en) * 2015-03-09 2019-04-24 Fraunhofer Gesellschaft zur Förderung der Angewand Fragment-aligned audio coding
US10104416B2 (en) 2015-05-08 2018-10-16 Vmware, Inc. Generating an automated multimedia feed based on customer specific application software running on customer data center/cloud
CN105187905A (zh) * 2015-09-19 2015-12-23 北京暴风科技股份有限公司 一种基于dlna边下边播p2p视频的方法
CN105142015B (zh) * 2015-09-19 2018-10-09 暴风集团股份有限公司 一种基于dlna共享播放bhd文件的方法
CN105376227B (zh) * 2015-11-06 2019-02-12 北京中传数广技术有限公司 一种基于dlna协议的媒体资源释放方法、装置及系统
CN105898531A (zh) * 2015-12-07 2016-08-24 乐视云计算有限公司 视频缓存文件的封装方法和系统
CN105704581A (zh) * 2016-01-25 2016-06-22 互联天下科技发展（深圳）有限公司 基于mp4文件格式的http实时视频传输方法
CN105812895A (zh) * 2016-03-17 2016-07-27 张俊莲 一种视频点播数据处理方法及其系统
CN106790005B (zh) * 2016-12-13 2019-09-17 武汉市烽视威科技有限公司 实现低延时hls直播的系统及方法
CN108270740A (zh) * 2016-12-30 2018-07-10 上海华讯网络系统有限公司 对含有多路视频流的视频会议的直播系统和方法
WO2018210411A1 (en) 2017-05-16 2018-11-22 Telefonaktiebolaget Lm Ericsson (Publ) Low latency media ingestion system, devices and methods

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100663448B1 (ko) * 2005-12-05 2007-01-02 삼성전자주식회사 Ｄｌｎａ 시스템에서의 3 프레임으로 구성된 사용자인터페이스 제공 방법
KR100754431B1 (ko) * 2006-04-10 2007-08-31 삼성전자주식회사 Ｄｌｎａ 시스템에서 ｄｍｒ의 처리용량에 따른 컨텐츠변환방법
KR101366803B1 (ko) * 2007-04-16 2014-02-24 삼성전자주식회사 Ｈｔｔｐ를 이용한 통신 방법 및 장치
DE602008004573D1 (de) 2007-09-11 2011-02-24 Nxp Bv Verfahren zum Transkodieren von Inhalt, Transkodierereinheit und UPnP-Netzsystem
JP5568576B2 (ja) * 2009-03-03 2014-08-06 テレフオンアクチーボラゲット エル エム エリクソン（パブル） 第２のローカルネットワーク内のサーバからローカルネットワーク内のレンダラへのメディア転送
KR20110003211A (ko) * 2009-07-03 2011-01-11 주식회사 케이티 광고가 결합된 콘텐츠를 제공하는 홈 네트워크 시스템 및 그 방법
US20110035466A1 (en) * 2009-08-10 2011-02-10 Sling Media Pvt Ltd Home media aggregator system and method
KR20110003211U (ko) * 2009-09-23 2011-03-30 주식회사 에스피조인트 승강조절 고정장치
CN102143385B (zh) * 2011-03-16 2013-04-24 华为技术有限公司 媒体播放处理方法、数字媒体服务器和系统
CN102232298B (zh) * 2011-04-07 2013-10-09 华为技术有限公司 媒体内容的传输处理方法、装置与系统
CN102447693A (zh) * 2011-11-02 2012-05-09 中兴通讯股份有限公司 家庭网络中dlna终端的屏幕共享方法及系统

Also Published As

Publication number Publication date
US10051026B2 (en) 2018-08-14
ES2700163T3 (es) 2019-02-14
US20150237091A1 (en) 2015-08-20
EP2887676B1 (en) 2018-09-05
CN103686202A (zh) 2014-03-26
EP2887676A4 (en) 2015-10-14
WO2013170811A1 (zh) 2013-11-21
EP2887676A1 (en) 2015-06-24

Similar Documents

Publication Publication Date Title
CN103686202B (zh) 一种dlna下基于http的转码实时传输方法及系统
CN1764974B (zh) 存储多媒体数据的存储介质和再现多媒体数据的方法和设备
US20070186005A1 (en) Method to embedding SVG content into ISO base media file format for progressive downloading and streaming of rich media content
JP2019047514A (ja) マルチメディアシステムにおけるメディアパケットを送信する送信装置
WO2013152580A1 (zh) 一种在线媒体数据转换的方法、播放视频方法及相应装置
US8862766B2 (en) Customized data delivery and network configuration via aggregation of device attributes
CN102143385A (zh) 媒体播放处理方法、数字媒体服务器和系统
TW201220826A (en) Manifest file updates for network streaming of coded video data
CN1893431A (zh) 具有格式与协议转换的内容整合平台
CN107251521A (zh) 用于在通信系统中发送和接收媒体信息的方法和装置
CN100571370C (zh) 将传统iptv终端接入ims域的装置、系统和方法
TW201210267A (en) Method and system for providing selected layered video service via a broadband gateway
CN102404646A (zh) 一种无线电视直播系统及其直播方法
CN106464933A (zh) 用于远程控制对多媒体内容的渲染的设备和方法
JP6728246B2 (ja) マルチメディアシステムにおける信号送受信方法及び装置
CN106105239B (zh) 发送设备、发送方法、接收设备、接收方法和程序
CN100531379C (zh) 一种流媒体移动终端适配系统
WO2017133611A1 (zh) 多媒体系统信息交互机制及网络传输方法
CN105430510A (zh) 一种视频点播方法、网关、智能终端及视频点播系统
CN101175095A (zh) 一种家庭网络多媒体接入装置和方法
CN103684992A (zh) 家庭网关、终端和数据共享方法
CN106664444A (zh) 用于在多媒体系统中接收媒体分组的方法和设备
CA2944985C (en) Receiver, transmitter, data communication method, and data processing method
CN101188733A (zh) 一种家庭网络多媒体接入系统
CN103959796B (zh) 数字视频码流的解码方法拼接方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180619

Termination date: 20200918

CF01 Termination of patent right due to non-payment of annual fee