CN111182342A - 基于dlna的媒体数据播放方法、装置、设备以及存储介质 - Google Patents

基于dlna的媒体数据播放方法、装置、设备以及存储介质 Download PDF

Info

Publication number
CN111182342A
CN111182342A CN201911348331.3A CN201911348331A CN111182342A CN 111182342 A CN111182342 A CN 111182342A CN 201911348331 A CN201911348331 A CN 201911348331A CN 111182342 A CN111182342 A CN 111182342A
Authority
CN
China
Prior art keywords
media data
preset format
dmr
image file
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911348331.3A
Other languages
English (en)
Inventor
王乾
马仪生
晏家红
孙炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201911348331.3A priority Critical patent/CN111182342A/zh
Publication of CN111182342A publication Critical patent/CN111182342A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals

Abstract

本申请实施例公开了一种基于DLNA的媒体数据播放方法、装置、设备以及存储介质,应用于DMC设备。该方法包括:当在第一时间监听到DMR设备时,根据第一预设频率对DMC设备的显示画面进行截屏得到多个图像文件,并对多个图像文件进行编码得到第一预设格式的图像文件;获取显示画面在第一时间之后的音频文件,并对音频文件进行编码得到第二预设格式的音频文件;对第一预设格式的图像文件和第二预设格式的音频文件进行时间同步得到媒体数据;建立与DMR设备的传输链接,通过传输链接使DMR设备播放媒体数据。采用本申请实施例,可减小DMR设备播放媒体数据的镜像延时,适用性高。

Description

基于DLNA的媒体数据播放方法、装置、设备以及存储介质
技术领域
本申请涉及计算机技术领域,尤其涉及一种基于DLNA的媒体数据播放方法、装置、设备以及存储介质。
背景技术
随着计算机技术的不断发展,大众对于观看视频的需求和要求也越来越高。一方面越来越多的人会通过手机、电脑等观看视频、收看直播以及电视节目等,另一方面也希望将手机、电脑等播放的视频投屏至屏幕更大的电视等终端上,以增强观看体验。
传统的直播节目往往使用RTMP(Real Time Messaging Protocol,实时消息传输协议)的视频流,录播或者其他视频也会使用协议,如HLS(一种动态码率自适应技术)协议的视频流。但是目前DMR(Digital Media Renderer,数位媒体控制器)如电视、盒子所支持最广的投屏协议是DLNA(Digital Living Network Alliance,数字生活网络联盟),其只支持投屏一路视频,因此对于同时具有多路视频的视频(如直播)来说,无法采用DLNA进行投屏。另一方面,由于DLNA只支持HTTP(Hyper Text Transfer Protocol,超文本传输协议)下的视频流,对于其他视频流如采用HTTPS的HLS视频流将无法完成投屏。
因此,如何解决上述DLNA的投屏缺陷成为亟需解决的问题。
发明内容
本申请实施例提供一种基于DLNA的媒体数据播放方法、装置、设备以及存储介质,可减小DMR设备播放媒体数据的镜像延时,适用性高。
第一方面,本申请实施例提供一种基于DLNA的媒体数据播放方法,应用于DMC设备,该方法包括:
当在第一时间监听到DMR设备时,根据第一预设频率对上述DMC设备的显示画面进行截屏得到多个图像文件,并对上述多个图像文件进行编码得到第一预设格式的图像文件;
获取上述显示画面在上述第一时间之后的音频文件,并对上述音频文件进行编码得到第二预设格式的音频文件;
对上述第一预设格式的图像文件和上述第二预设格式的音频文件进行时间同步得到媒体数据;
建立与上述DMR设备的传输链接,通过上述传输链接使上述DMR设备播放上述媒体数据。
结合第一方面,在一种可能的实施方式中,上述第一预设格式的图像文件的数量为N,N为大于1的整数;上述对上述第一预设格式的图像文件和上述第二预设格式的音频文件进行时间同步得到媒体数据包括:
确定每个第一预设格式的图像文件的截屏时间,
将上述每个第一预设格式的图像文件按照截屏时间的先后顺序进行排序得到图像文件序列,上述图像文件序列中第一个第一预设格式的图像文件与上述第二预设格式的音频文件的开始时间相对应,第i个第一预设格式的图像文件与上述第一个第一预设格式的图像文件的时间间隔与上述第i个第一预设格式的图像文件的截屏时间与上述第一时间的时间间隔一致,i为大于1且小于等于N的整数;
根据上述图像文件序列和上述第二预设格式的音频文件生成媒体数据。
结合第一方面,在一种可能的实施方式中,上述根据上述图像文件序列和上述第二预设格式的音频文件生成媒体数据包括:
获取上述DMR设备所支持的媒体协议;
将上述图像文件序列和上述第二预设格式的音频文件封装为上述媒体协议对应的封装数据,并将上述封装数据确定为媒体数据。
结合第一方面,在一种可能的实施方式中,上述通过上述传输链接使上述DMR设备播放上述媒体数据包括:
根据上述媒体数据生成媒体数据标识信息;
通过上述传输链接将上述媒体数据标识信息发送至上述DMR设备,以使上述DMR设备根据上述媒体数据标识信息播放上述媒体数据。
结合第一方面,在一种可能的实施方式中,上述通过上述传输链接使上述DMR设备播放上述媒体数据包括:
通过上述传输链接将上述媒体数据发送至上述DMR设备,以使上述DMR设备播放上述媒体数据。
结合第一方面,在一种可能的实施方式中,上述多个图像文件的数量为M,M为大于1的整数;上述方法还包括:
当检测到第M个图像文件与第j个图像文件之间的各个图像文件相同时,将上述第一预设频率降低至第二预设频率,j为大于0且小于M的整数;或者,
当检测到上述第M个图像文件与第k个图像文件之间的各个图像文件互不相同时,将上述第一预设频率提升至第三预设频率,k为大于0且小于M的整数。
结合第一方面,在一种可能的实施方式中,上述第一预设格式包括JPEG、GIF、PNG以及TIFF,上述第二预设格式包括AC-3、LPCM、ATRAC 3plus、MPEG-1/2L2、MPEG-1/2L3、MPEG-4AACLC、MPEG-4AACLTP、MPEG-4AAC HE、MPEH-4BSAC、WMA、WMA Professional、AMR以及G.726。
第二方面,本申请实施例提供了一种基于DLNA的媒体数据播放装置,该装置包括:
第一处理模块,用于当在第一时间监听到DMR设备时,根据第一预设频率对显示画面进行截屏得到多个图像文件,并对上述多个图像文件进行编码得到第一预设格式的图像文件;
第二处理模块,用于获取上述显示画面在上述第一时间之后的音频文件,并对上述音频文件进行编码得到第二预设格式的音频文件;
同步模块,用于对上述第一预设格式的图像文件和上述第二预设格式的音频文件进行时间同步得到媒体数据;
传输模块,用于建立与上述DMR设备的传输链接,通过上述传输链接使上述DMR设备播放上述媒体数据。
结合第二方面,在一种可能的实施方式中,上述第一预设格式的图像文件的数量为N,N为大于1的整数;上述同步模块包括:
确定单元,用于确定每个第一预设格式的图像文件的截屏时间,
排序单元,用于将上述每个第一预设格式的图像文件按照截屏时间的先后顺序进行排序得到图像文件序列,上述图像文件序列中第一个第一预设格式的图像文件与上述第二预设格式的音频文件的开始时间相对应,第i个第一预设格式的图像文件与上述第一个第一预设格式的图像文件的时间间隔与上述第i个第一预设格式的图像文件的截屏时间与上述第一时间的时间间隔一致,i为大于1且小于等于N的整数;
第一生成单元,用于根据上述图像文件序列和上述第二预设格式的音频文件生成媒体数据。
结合第二方面,在一种可能的实施方式中,上述第一生成单元包括:
获取子单元,用于获取上述DMR设备所支持的媒体协议;
数据处理子单元,用于将上述图像文件序列和上述第二预设格式的音频文件封装为上述媒体协议对应的封装数据,并将上述封装数据确定为媒体数据。
结合第二方面,在一种可能的实施方式中,上述传输模块包括:
第二生成单元,用于根据上述媒体数据生成媒体数据标识信息;
第一发送单元,用于通过上述传输链接将上述媒体数据标识信息发送至上述DMR设备,以使上述DMR设备根据上述媒体数据标识信息播放上述媒体数据。
结合第二方面,在一种可能的实施方式中,上述传输模块包括:
第二发送单元,用于通过上述传输链接将上述媒体数据发送至上述DMR设备,以使上述DMR设备播放上述媒体数据。
结合第二方面,在一种可能的实施方式中,上述多个图像文件的数量为M,M为大于1的整数;上述装置还包括:
第一调整模块,还用于当检测到第M个图像文件与第j个图像文件之间的各个图像文件相同时,将上述第一预设频率降低至第二预设频率,j为大于0且小于M的整数;或者,
第二调整模块,还用于当检测到上述第M个图像文件与第k个图像文件之间的各个图像文件互不相同时,将上述第一预设频率提升至第三预设频率,k为大于0且小于M的整数。
结合第二方面,在一种可能的实施方式中,上述第一预设格式包括JPEG、GIF、PNG以及TIFF,上述第二预设格式包括AC-3、LPCM、ATRAC 3plus、MPEG-1/2L2、MPEG-1/2L3、MPEG-4AACLC、MPEG-4AACLTP、MPEG-4AAC HE、MPEH-4BSAC、WMA、WMA Professional、AMR以及G.726。
第三方面,本申请实施例提供了一种设备,该设备包括处理器和存储器,该处理器和存储器相互连接。该存储器用于存储支持该终端设备执行上述第一方面和/或第一方面任一种可能的实现方式提供的方法的计算机程序,该计算机程序包括程序指令,该处理器被配置用于调用上述程序指令,执行上述第一方面和/或第一方面任一种可能的实施方式所提供的方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序被处理器执行以实现上述第一方面和/或第一方面任一种可能的实施方式所提供的方法。
在本申请实施例中,通过将DMC设备的显示画面进行截屏并进行编码,同时与相对应的编码后的音频文件进行时间同步得到媒体数据,可减小DMR设备在播放媒体数据时产生的镜像延时,可使所有支持DLNA的DMR设备均可支持媒体数据的播放,适用范围更广。另一方面,DMC设备通过独立完成监听DMR设备、生成媒体数据以及建立与DMR设备的传输链接,可减小由于依赖远程服务端导实现媒体数据播放所导致的资源消耗,适用性高。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的基于DLNA的设备架构图;
图2是本申请实施例提供的媒体数据播放的场景示意图;
图3是本申请实施例提供的基于DLNA的媒体数据播放方法的流程示意图;
图4是本申请实施例提供的进行时间同步的场景示意图;
图5是本申请实施例提供的确定媒体数据的场景示意图;
图6是本申请实施例提供的DMR设备播放媒体数据的场景示意图;
图7是本申请实施例提供的控制DMR设备播放状态的场景示意图;
图8是本申请实施例提供的DMC设备和DMR设备的组成示意图;
图9是本申请实施例提供的基于DLNA的手机投屏方法的时序示意图;
图10是本申请实施例提供的基于DLNA的媒体数据播放方法的时序示意图;
图11是本申请实施例提供的基于DLNA的媒体数据播放装置的结构示意图;
图12是本申请实施例提供的设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
请参见图1,图1是本申请实施例提供的基于DLNA的媒体数据播放方法的设备架构图。在图1中,设备100为包含DMC(Digital Media Controller,数位媒体控制器)的任意设备,如移动终端(手机、平板电脑等)、电脑等,为方便描述以下简称DMC设备。设备200为DMR设备。具体的,设备100可通过网络300(无线网络、有线网络以及局域网等)与设备200进行连接,从而将设备100所播放的内容投屏至设备200以使设备200能够同步播放设备100所播放的内容。此时上述DMR设备可以为电视、STB(Set Top Box,数字视频变换盒)以及电视盒子等,具体可根据实际应用场景确定,在此不做限制。需要特别说明的是,设备200所播放的内容与设备100所播放的内容完全一致,如图2所示,图2是本申请实施例提供的媒体数据播放的场景示意图。在图2中,设备100通过网络与设备200进行连接之后,设备200可以播放与设备100所播放的画面一致的画面内容。
参见图3,图3是本申请实施例提供的基于DLNA的媒体数据播放方法的流程示意图。如图3所示,本申请实施例提供的基于DLNA的媒体数据播放方法可包括如下步骤S101至S104。
S101、当在第一时间监听到DMR设备时,根据第一预设频率对显示画面进行截屏得到多个图像文件,并对多个图像文件进行编码得到第一预设格式的图像文件。
在一些可行的实施方式中,DMC设备可监听其所在的局域网的网段中是否接入DMR设备,即DMC设备在加入一个局域网之后需要发现局域网中的DMR设备。具体的,DMC设备需要遵循SSDP(Simple Service Discovery Protocol,简单服务发现协议)向通过用户UDP(User Datagram Protocol、数据报协议)端口向默认多播IP(Internet Protocol,网际互连协议)和端口发送获取信息的请求,也可根据HTTP的扩展协议M-SEARCH使用DLNA定义的搜索响应方式来发现局域网中的DMR设备。如果DMC设备收到UDP端口返回的响应消息时,DMC设备可从响应消息中获取DMR设备的IP和端口号、设备描述文档位置等,进而可根据DMR设备的描述文档位置获取DMR设备的描述文档,以确定DMR设备的设备类型、自定义名称以及控制URL(Uniform Resource Locator,统一资源定位符)等。此时,当DMC设备成功获取到UDP端口返回的响应消息时,可确定DMC设备在第一时间监听到DMR设备。
在一些可行的实施方式中,在DMC设备监听到DMR设备之后,DMC设备可根据第一预设频率对DMC设备的显示画面进行截屏得到多个图像文件。其中,上述第一预设频率可以是10次每秒,也可以是20次每秒,第一预设频率的具体频率值可根据实际应用场景确定,在此不做限制。其中,DMC设备对其显示画面进行截屏时可通过DMC设备内置的截屏工具、应用或者DMC设备内置的截屏功能实现,具体也可根据实际应用场景确定,在此不做限制。可选的,在DMC设备对显示画面进行截屏时,DMC设备可对全部显示画面或者显示画面的指定区域(如显示画面四分之一左上角区域)等,具体可根据实际应用场景确定,在此不做限制。其中,上述DMC设备的显示画面可以是DMC设备从其他设备的服务器获取的播放地址对应的实时显示画面,也可以是DMC设备对其本地存储空间中存储的媒体数据进行播放时产生的显示画面,具体可根据实际应用场景确定,在此不做限制。另一方面,DMC设备的显示画面可以是多路媒体信号对应的多个显示画面,即DMC设备可同时显示不同信号源的多个显示画面,具体可根据实际应用场景确定,在此不做限制。
在一些可行的实施方式中,DMC设备在对显示画面进行截屏时,还可调整截屏频率。具体地,DMC设备可在截屏时获取每个图像文件的显示画面,在实时截屏过程中,假设在截屏过程中的图像文件的数量为M(M为大于1的整数),当检测到第M个图像文件与第j个图像文件之间的各个图像文件相同时,可将第一预设频率降低至第二预设频率,j为大于0且小于M的整数;当检测到第M个图像文件与第k个图像文件之间的各个图像文件互不相同时,将第一预设频率提升至第三预设频率,k为大于0且小于M的整数。其中,上述j和k的取值、以及第二预设频率和第三预设频率的取值均可根据实际应用场景确定,在此不做限制。换句话说,当检测到当前截屏的图像文件与当前图像文件之前的一定数量的图像文件的显示画面均相同时,说明此时DMC设备的显示画面可能是静止画面或者画面波动较小,因此可将当前截屏频率降低至第二预设频率以使DMC设备以较低的频率对显示画面截屏。当检测到当前截屏的图像文件与当前图像文献之前的一定数量的图像文件互不相同时,说明此时DMC设备的显示画面变动较大,因此可将当前截屏频率提升至第三预设频率以使DMC设备以较高的频率对显示画面截屏,从而尽可能多地捕捉DMC设备的显示画面。
进一步地,DMC设备可对每个图像文件进行编码以将每个图像文件转换成第一预设格式的图像文件。换句话说,即将每个图像文件的图像数据进行编码得到第一预设格式的图像数据。如表1所示,由于在支持DLNA的DMR设备所要求的图片格式为JPEG(JointPhotographic Expert Group,联合照片专家组),可选的格式为GIF(GraphicsInterchange Format,图形交换格式)、PNG(Portable Network Graphics,便携式网络图形)以及TIFF(TagImage FileFormat,标签图像文件格式),因此上述第一预设格式可以为JPEG、GIF、PNG以及TIFF中的任意一种。可选的,DMC设备在对每个图像文件进行编码时可根据第一预设格式选取对应的编码方式。如当第一预设格式为TIFF时可采用RGB压缩算法、RLE压缩算法等,当第一预设格式为GIF时DMC设备可采用LZW算法,当第一预设格式为JPEG时DMC设备可采用有损压缩算法,上述第一预设格式的具体格式选择以及相对应的编码方式可根据实际应用场景确定,在此不做限制。
表1:DLNA媒体格式要求
媒体格式 要求的格式 可选的格式
图片 JPEG GIF、PNG
S102、获取显示画面在第一时间之后的音频文件,并对音频文件进行编码得到第二预设格式的音频文件。
在一些可行的实施方式中,DMC设备在对显示画面进行截屏时,DMC设备可在第一时间获取显示画面对应的音频文件,即DMC设备可获取显示画面在第一时间之后的音频文件。换句话说,即将上述音频文件的音频数据进行编码得到第二预设格式的音频数据。其中,DMC设备在获取音频文件时可通过录音、对显示画面对应的音频数据进行解析等方式实现,具体可根据实际应用场景确定,在此不做显示。
进一步地,DMC设备可对上述音频文件进行编码以将上述音频文件转换成第二预设格式的音频文件。由于DLNA所支持的音频格式为AC-3(一种数字音频编码格式)、LPCM(Linear Pulse Coding Modulation,线性脉冲编码调制)、ATRAC(Adaptive TransformAcoustic Coding,自适应声学转换编码)3plus、MPEG-1/2L2(一种动态图像专家组格式)、MPEG-1/2L3(一种动态图像专家组格式)、MPEG-4AACLC(一种基于高级音频编码(低复杂规格)的动态图像专家组格式)、MPEG-4AACLTP(一种基于高级音频编码(长时期预测规格)的动态图像专家组格式)、MPEG-4AACHE(一种基于高级音频编码(高效率规格)、MPEH-4BSAC(一种动态图像专家组格式)、WMA(一种有损音频压缩格式)、WMA Professional(一种有损音频压缩格式)、AMR(一种音频格式)、AMR-WB+(一种音频格式)、MP3(Moving PictureExperts Group Audio Layer III,动态影像专家压缩标准音频层面3)以及G.726(音频编码算法得到的音频格式)。因此上述第二预设格式可以为上述音频格式的其中一种,具体可根据实际的DMR设备确定,在此不做限制。可选的,DMC设备在对上述音频文件进行编码时可根据第二预设格式选取对应的编码方式,上述第二预设格式的具体格式选择以及相对应的编码方式可根据实际应用场景确定,在此不做限制。如表2所示,当DMR设备为家庭设备(如显示器、投影仪等)时,上述第二预设格式为LPCM、MP3、WMA9、AC-3、AAC以及ATRAC3plus。如表3所示,当DMR设备为手持设备时,上述第二预设格式为MP3、MPEG4 AACLC、MPEG(HE AAC,AAC LTP,BASAC)、AMR、ATRAC3 plus、G.726、WMA以及LPCM。
表2:DLNA(家庭设备)媒体格式要求
Figure BDA0002334011490000111
表3:DLNA(手持设备)媒体格式要求
Figure BDA0002334011490000112
S103、对第一预设格式的图像文件和第二预设格式的音频文件进行时间同步得到媒体数据。
在一些可行的实施方式中,由于第一预设格式的图像文件并不是连续的视频文件,且任意连续的两个第一预设格式的图像文件之间存在较大的时间间隙。从数据层面上来说,各个第一预设格式的图像文件的图像数据(为方面描述,以下简称第一预设格式的图像数据)之间存在较大的时间间隙。因此在得到第一预设格式的图像文件和第二预设格式的音频文件之后,DMC设备需要对第一预设格式的图像文件和第二预设格式的音频文件进行时间同步得到媒体数据,以避免出现显示画面和音频不匹配的情况。具体的,DMC设备可确定每个第一预设格式的图像文件的截屏时间,并将每个第一预设格式的图像文件按照截屏时间的先后顺序进行排序得到一个基于时间轴的图像文件序列。进一步地,DMC设备需要将上述图像文件序列中第一个第一预设格式的图像文件与第二预设格式的音频文件的开始时间相对应,以使图像文件序列中第一个第一预设格式的图像文件与第二预设格式的音频文件的开始时间保持同步。进一步地,DMC设备对于图像文件序列中的其他图像文件,需要确定出每一个第一预设格式的图像文件的截屏时间与第一时间(第一个第一预设格式的图像文件的截屏时间)时间间隔,并将该时间间隔作为每一个第一预设格式的图像文件在上述图像文件序列中与第一个第一预设格式的图像文件的时间距离。DMC设备通过上述实现方式得到的最终的第一预设格式的图像文件序列中,每一个第一预设格式的图像文件在时间上均与第二预设格式的音频文件向对应,从而实现图像文件序列和第二预设格式的音频文件的时间同步。
也就是说,DMC设备可将每个第一预设格式的图像数据按照截屏时间的先后顺序进行排序得到一个基于时间轴的图像数据序列。进一步地,DMC设备需要将上述图像数据序列中第一个第一预设格式的图像数据与第二预设格式的音频文件对应的音频数据(为方便描述,以下简称第二预设格式的音频数据)的开始时间相对应,以使图像数据序列中第一个第一预设格式的图像数据与第二预设格式的音频数据的开始时间保持同步。DMC设备对于图像数据序列中的其他第一预设格式的图像数据,需要确定出每一个第一预设格式的图像数据的截屏时间与第一时间的时间间隔,并将该时间间隔作为每一个图像第一预设格式的图像数据在上述图像数据序列中与第一个第一预设格式的图像数据的时间距离。DMC设备通过上述实现方式得到的最终的图像数据序列中,每一个第一预设格式的图像序列在时间上均与第二预设格式的音频数据相对应,从而实现将第一预设格式的图像数据和第二预设格式的音频数据在时间上达到同步匹配。
举例来说,请参见图4,图4是本申请实施例提供的进行时间同步的场景示意图。在图4中,假设图像文件序列中存在4个第一预设格式的图像文件,此时DMC设备需要将第一个第一预设格式的图像文件与第二预设格式的音频文件的开始时间相对应,即第一个第一预设格式的图像文件的截屏时间、第二预设格式的音频文件的开始时间以及DMC设备监听到DMR设备的第一时间在同一时间节点。进一步地,DMC设备可将其他第一预设格式的图像文件按照与第一个第一预设格式的截屏时间的时间间隔进行排列得到与音频文件的实现时间同步的图像文件序列。不难发现,第二个第一预设格式的图像文件与第一个第一预设格式的图像文件的时间间隔与时间间隔1(第二个第一预设格式的图像文件的截屏时间与第一时间的时间间隔)一致,最后一个第一预设格式的图像文件与第一个第一预设格式的图像文件的时间间隔与时间间隔2(最后一个第一预设格式的图像文件的截屏时间与第一时间的时间间隔)一致。也就是说,在数据层面上图像文件序列中每个第一预设格式的图像文件的图像数据与第二预设格式的音频文件的音频数据在相对应的时间节点实现了时间同步。此时,图4中任一第一预设格式的图像文件对应于第二预设格式的音频文件的音频片段与其在DMC设备中显示时对应的音频片段一致。
可选的,由于一段视频也可以看做是由多张图像所组成,因此为了进一步提升由上述图像文件序列所构成的视频画面具有更高的连贯性,此时对于除最后个第一预设格式的图像文件外的其他第一预设格式的图像文件中的任一第一预设格式的图像文件,DMC设备可将该第一预设格式的图像文件填充至该第一预设格式的图像文件与其后一个第一预设格式的图像文件之间,从而使得每两个第一预设格式的图像文件之间具有更多的第一预设格式的图像文件,以使DMR设备最终呈现的显示画面不仅与音频同步,也使得DMR设备最终呈现的显示画面具有更高的连贯性。例如,对于上述图像文件序列中第一个第一预设格式的图像文件和第二个第二预设格式的图像文件之间的空白序列段,可将第一个第一预设格式的图像文件填充至该空白序列段以增加上述图像文件序列中第一预设格式的图像文件的个数。其中,在上述空白序列段中填充的第一个第一预设格式的图像文件的数量可根据实际应用场景确定,在此不做限制。同样,在数据层面上来看,通过上述实现方式可将图像数据序列中各个第一预设格式的图像数据均与第二预设格式的音频数据在时间上一一对应,进而实现第一预设格式的图像数据与第二预设格式的音频数据的时间同步。可选的,由于任意两个第一预设格式的图像数据之间的时间间隙可能较大,因此DMC在将任意一个图像文件的图像数据进行编码得到第一预设格式的图像数据之后,如果此时未检测到有第一预设格式的图像数据更新,即未检测到有另一个图像文件的第一预设格式的图像数据时,DMC设备可仍然继续使用该图像文件的第一预设格式的图像数据作为时间间隙内的图像数据,直至DMC设备检测到下一图像文件产生时将其图像数据进行编码得到下一组第一预设格式的图像数据,从而在数据层面尽可能地保持第一预设格式的图像数据的连续性。
在一些可行的实施方式中,由于上述图像文件序列与第二预设格式的音频文件为独立为媒体文件存在,因此DMC设备需要将其封装为DLNA所支持的媒体数据。具体地,DMC设备可根据DLNA所支持的媒体协议HTTP(Mandatory),HTTP Adaptive Delivery(DASH)andRTP(Real-time Transport Protocol,实时传输协议)中任意一种协议将图像文件序列和第二预设格式的音频文件封装为媒体数据。可选的,DMC设备可获取DMR设备所支持的媒体协议,进而将上述图像文件序列和第二预设格式的音频文件封装为该媒体协议所对应的封装数据,此时该封装数据即为DMC设备根据其显示画面产生的媒体数据。可选的,为进一步避免DMC设备与DMR设备之间协议互相不支持的问题,DMC设备可分别确定DMR设备以及DMC设备所支持的媒体协议,并将DMC设备和DMR设备共同支持的媒体协议确定为用于对图形文件序列和第二预设格式的音频文件进行封装的媒体协议。其中,DMC设备在获取DMR设备所支持的媒体协议时,可根据DMR设备的设备信息确定出相对应的媒体协议,也可在监听到DMR设备时获取DMR设备的设备描述文档,从而在设备描述文档中确定出DMR设备所支持的媒体协议,具体实现方式可根据实际应用场景确定,在此不做限制。如图5所示,图5是本申请实施例提供的确定媒体数据的场景示意图。在图5中,DMC设备分别将图像图像文件进行编码以将图像文件转换为第一预设格式的图像文件序列,将音频文件进行编码以将音频文件转换为第二预设格式的音频文件。此时DMC设备可根据DMR设备所支持的媒体协议(或者DLNA所支持的媒体协议)将第一预设格式的图像文件序列和第二预设格式的音频文件封装为DMC设备所产生的媒体数据。
S104、建立与DMR设备的传输链接,通过传输链接使DMR设备播放媒体数据。
在一些可行的实施方式中,DMC设备可建立与DMR设备的传输链接。具体地,DMC设备可通过发出动作请求,其中该总做请求可设置当前播放媒体数据动作统一名称为SetAVTransportURI,该请求中的传递参数可包括InstanceID(用于表示媒体数据实例)、CurrentURI(媒体数据的URI(Uniform Resource Identifier,统一资源标识符))、CurrentURIMetaData(媒体mata数据)以及Header SOAPACTION(包括媒体资源的URN(Uniform Resource Name,统一资源命名))。当DMC设备接收到上述动作请求对应的响应数据时,则可建立与DMR设备之间的传输连接。进一步地,DMR设备可生成媒体数据的标识信息,可以为媒体数据的URI,并将该媒体数据标识信息发送至DMR设备以使DMR设备根据媒体数据标识信息播放上述媒体数据。例如,当DMR设备接收到的媒体数据标识信息为URI时,DMR设备可根据URI访问媒体数据并播放媒体数据。其中,媒体资源的URI可根据DMC设备生成的媒体数据在HTTP协议下的URL(Uniform Resource Locator,统一资源定位符)得到,该媒体数据标识信息可表示出上述媒体数据的具体位置和访问方法。
在一些可行的实施方式中,由于本申请实施例提供的基于DLNA的媒体数据播放方法通过对DMC设备的显示画面进行截屏后得以实现,因此当DMC设备的显示画面中包含两个甚至更多的不同画面(即DMC设备根据多路媒体信号同时显示多路视频)时,通过申请实施例提供的方法可实现基于DLNA同时投屏多路视频,解决的在DLNA下DMR设备无法不支持同时投屏多路视频的问题。参见图6,图6是本申请实施例提供的DMR设备播放媒体数据的场景示意图。在图6中,DMR设备播放媒体数据所得到的显示画面为以直播授课场景,在该场景中,显示画面1显示的是授课内容(课件,题目,讲解,互动等等),显示画面2是授课教师的实时场景。显而易见地,显示画面1和显示画面2分别为独立的显示画面,即显示画面1在DMC设备中对应一路视频,显示画面2在DMC设备中对应另一路视频。通过对DMC设备进行截屏从而可实现将两路视频的显示画面在同一时间同时存在与一个图像文件中,进而DMR设备在播放根据图像文件得到的媒体数据时实现两路视频同时投屏(显示画面1和显示画面2同时存在)。
在一些可行的实施方式中,在DMR设备播放上述媒体数据的同时,DMC设备可对DMR设备的播放状态进行控制。结合图7,图7是本申请实施例提供的控制DMR设备播放状态的场景示意图。在图7中,当DMR设备和DMC设备之间的传输连接出现错误时,DMR设备可停止播放上述媒体数据。当DMC设备在向DMR设备传输媒体数据的过程中且DMR设备处于“播放中”的状态时,DMC设备可控制DMR设备的播放状态。如播放上一个媒体数据(重新建立传输链接)、播放下一个媒体数据(重新建立传输链接)、加速播放、减速播放、暂停播放、获取播放进度、跳转进度以及继续播放等等。同理,当DMC设备在向DMR设备传输媒体数据且DMR设备处于“暂停播放”的状态时,DMC设备任然可控制DMR设备进行上述状态控制操作。不难理解,当DMC设备完成向DMR设备传输媒体数据之后,无论DMR设备处于“播放中”状态还是“暂停播放”状态,DMC设备依旧可控制DMR设备完成上述所示的状态控制操作。进一步地,当DMC设备控制DMR完成上述状态控制操作时,需要发送相对应的动作请求以使DMR设备对动作请求进行响应,从而完成状态控制操作。如在DMC设备的向DMR设备发送的播放动作请求中,需向DMR设备传递Speed参数、Header_SOAPACTION:”urn:upnp-org:serviceId:AVTransport#Play”以及InstanceID参数。在DMC设备的向DMR设备发送的暂停动作请求中,需向DMR设备传递Header_SOAPACTION:”urn:upnp-org:serviceId:AVTransport#Pause”以及InstanceID参数。在DMC设备的向DMR设备发送的获取播放进度动作请求中,需向DMR设备传递InstanceID参数、MediaDuration参数以及Header_SOAPACTION:”urn:upnp-org:serviceId:AVTransport#MediaDuration”。在DMC设备的向DMR设备发送的跳转进度动作请求中,需向DMR设备传递Header_SOAPACTION:”urn:upnp-org:serviceId:AVTransport#Seek”、InstanceID参数Unit参数以及Target参数。
在一些可行的实施方式中,由于DMC设备是包含DMC(数位媒体控制器)的设备,因此DMC设备对显示画面进行截屏时可由其内置的截屏工具实现,对图形文件和音频文件的编码可由其内置的数据处理单元(如直播推流工具)实现,DMC设备可由DMC完成传输链接的建立且在内置的直播服务器基础之上建立。此时DMC设备产生的媒体数据可以直播源的形式由手机投屏至电视。参见图8,图8是本申请实施例提供的DMC设备和DMR设备的组成示意图。在图8中,假设DMC设备为手机,手机中内置有DMC、截屏工具、数据处理单元以及直播服务器。假设DMR设备为电视,此时手机可将其显示的画面投屏至电视端进行实时播放,其中手机内置的直播服务器产生的媒体数据可作为电视的显示画面的播放源。
进一步地,请参见图9,图9是本申请实施例提供的基于DLNA的手机投屏方法的时序示意图。在图9中,DMC设备为手机,DMR设备为电视,手机内置的DMC通过局域网监听(搜寻)MDR设备(电视),当电视做出应答之后,手机通过内置的截屏工具对手机显示画面进行截图,在同一时间获取上述显示画面对应的音频文件,并将截屏得到的图像文件和音频文件发送至数据处理单元。数据处理单元对图像文件和音频文件进行编码完成格式转换以及时间同步得到媒体数据,并将媒体数据推流至直播服务器。直播服务器可作为媒体数据的播放源生成一个直播地址并将该直播地址返回至DMC,此时DMC可根据上述直播地址完成与电视的传输链接的建立,进而电视可根据直播地址对媒体数据进行播放完成手机端的显示画面投屏至电视播放的过程。
参见图10,图10是本申请实施例提供的基于DLNA的媒体数据播放方法的时序示意图。在图10中,DMC设备在监听到DMR设备之后,可获取DMR所支持的媒体协议信息和媒体数据格式信息,并从中选择符合的媒体协议和媒体数据格式。在选取符合的媒体协议和媒体数据格式的同时,DMR设备可将截屏得到的图像文件和相对应的音频文件进行编码和时间同步得到媒体数据。进一步地,DMC设备可设置与DMR设备的传输连接进而DMR设备可根据传输连接完成对媒体数据的播放。另一方面,DMC设备通过向DMR设备发送动作请求完成对DMR设备的状态控制操作,以及重新获取新的媒体数据并建立新的传输连接以使DMR设备播放新的媒体数据。
在本申请实施例中,通过将DMC设备的显示画面进行截屏并进行编码,同时与相对应的编码后的音频文件进行时间同步得到媒体数据,可减小DMR设备在播放媒体数据时产生的镜像延时,可使所有支持DLNA的DMR设备均可支持媒体数据的播放,适用范围更广。另一方面,DMC设备通过独立完成监听DMR设备、生成媒体数据以及建立与DMR设备的传输链接,可减小由于依赖远程服务端导实现媒体数据播放所导致的资源消耗,适用性高。进一步地,由于DMC设备作为其显示画面的播放源,可独立生成媒体数据的URL,进而避免在DMR设备播放媒体数据时泄漏DMC设备的显示画面的播放源地址,提高了媒体数据播放的安全性。
参见图11,图11是本申请实施例提供的基于DLNA的媒体数据播放装置的结构示意图。本申请实施例提供的装置1包括:
第一处理模块11,用于当在第一时间监听到DMR设备时,根据第一预设频率对显示画面进行截屏得到多个图像文件,并对上述多个图像文件进行编码得到第一预设格式的图像文件;
第二处理模块12,用于获取上述显示画面在上述第一时间之后的音频文件,并对上述音频文件进行编码得到第二预设格式的音频文件;
同步模块13,用于对上述第一预设格式的图像文件和上述第二预设格式的音频文件进行时间同步得到媒体数据;
传输模块14,用于建立与上述DMR设备的传输链接,通过上述传输链接使上述DMR设备播放上述媒体数据。
在一些可行的实施方式中,上述第一预设格式的图像文件的数量为N,N为大于1的整数;上述同步模块13包括:
确定单元131,用于确定每个第一预设格式的图像文件的截屏时间,
排序单元132,用于将上述每个第一预设格式的图像文件按照截屏时间的先后顺序进行排序得到图像文件序列,上述图像文件序列中第一个第一预设格式的图像文件与上述第二预设格式的音频文件的开始时间相对应,第i个第一预设格式的图像文件与上述第一个第一预设格式的图像文件的时间间隔与上述第i个第一预设格式的图像文件的截屏时间与上述第一时间的时间间隔一致,i为大于1且小于等于N的整数;
第一生成单元133,用于根据上述图像文件序列和上述第二预设格式的音频文件生成媒体数据。
在一些可行的实施方式中,上述第一生成单元133包括:
获取子单元1331,用于获取上述DMR设备所支持的媒体协议;
数据处理子单元1332,用于将上述图像文件序列和上述第二预设格式的音频文件封装为上述媒体协议对应的封装数据,并将上述封装数据确定为媒体数据。
在一些可行的实施方式中,上述传输模块14包括:
第二生成单元141,用于根据上述媒体数据生成媒体数据标识信息;
第一发送单元142,用于通过上述传输链接将上述媒体数据标识信息发送至上述DMR设备,以使上述DMR设备根据上述媒体数据标识信息播放上述媒体数据。
在一些可行的实施方式中,上述传输模块14包括:
第二发送单元143,用于通过上述传输链接将上述媒体数据发送至上述DMR设备,以使上述DMR设备播放上述媒体数据。
在一些可行的实施方式中,上述多个图像文件的数量为M,M为大于1的整数;上述装置1还包括:
第一调整模块15,还用于当检测到第M个图像文件与第j个图像文件之间的各个图像文件相同时,将上述第一预设频率降低至第二预设频率,j为大于0且小于M的整数;或者,
第二调整模块16,还用于当检测到上述第M个图像文件与第k个图像文件之间的各个图像文件互不相同时,将上述第一预设频率提升至第三预设频率,k为大于0且小于M的整数。
在一些可行的实施方式中,上述第一预设格式包括JPEG、GIF、PNG以及TIFF,上述第二预设格式包括AC-3、LPCM、ATRAC 3plus、MPEG-1/2L2、MPEG-1/2L3、MPEG-4AACLC、MPEG-4AACLTP、MPEG-4AAC HE、MPEH-4BSAC、WMA、WMA Professional、AMR以及G.726。
具体实现中,上述装置1可通过其内置的各个功能模块执行如上述图3中各个步骤所提供的实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。
在本申请实施例中,通过将DMC设备的显示画面进行截屏并进行编码,同时与相对应的编码后的音频文件进行时间同步得到媒体数据,可减小DMR设备在播放媒体数据时产生的镜像延时,可使所有支持DLNA的DMR设备均可支持媒体数据的播放,适用范围更广。另一方面,DMC设备通过独立完成监听DMR设备、生成媒体数据以及建立与DMR设备的传输链接,可减小由于依赖远程服务端导实现媒体数据播放所导致的资源消耗,适用性高。
参见图12,图12是本申请实施例提供的设备的结构示意图。如图12所示,本实施例中的设备1000可以包括:处理器1001,网络接口1004和存储器1005,此外,上述设备1000还可以包括:用户接口1003,和至少一个通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。其中,用户接口1003可以包括显示屏(Display)、键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1004可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。存储器1005可选的还可以是至少一个位于远离前述处理器1001的存储装置。如图12所示,作为一种计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及设备控制应用程序。
在图12所示的设备1000中,网络接口1004可提供网络通讯功能;而用户接口1003主要用于为用户提供输入的接口;而处理器1001可以用于调用存储器1005中存储的设备控制应用程序,以实现:
当在第一时间监听到DMR设备时,根据第一预设频率对显示画面进行截屏得到多个图像文件,并对上述多个图像文件进行编码得到第一预设格式的图像文件;
获取上述显示画面在上述第一时间之后的音频文件,并对上述音频文件进行编码得到第二预设格式的音频文件;
对上述第一预设格式的图像文件和上述第二预设格式的音频文件进行时间同步得到媒体数据;
建立与上述DMR设备的传输链接,通过上述传输链接使上述DMR设备播放上述媒体数据。
在一些可行的实施方式中,上述第一预设格式的图像文件的数量为N,N为大于1的整数;上述处理器1001用于:
确定每个第一预设格式的图像文件的截屏时间,
将上述每个第一预设格式的图像文件按照截屏时间的先后顺序进行排序得到图像文件序列,上述图像文件序列中第一个第一预设格式的图像文件与上述第二预设格式的音频文件的开始时间相对应,第i个第一预设格式的图像文件与上述第一个第一预设格式的图像文件的时间间隔与上述第i个第一预设格式的图像文件的截屏时间与上述第一时间的时间间隔一致,i为大于1且小于等于N的整数;
根据上述图像文件序列和上述第二预设格式的音频文件生成媒体数据。
在一些可行的实施方式中,上述处理器1001用于:
获取上述DMR设备所支持的媒体协议;
将上述图像文件序列和上述第二预设格式的音频文件封装为上述媒体协议对应的封装数据,并将上述封装数据确定为媒体数据。
在一些可行的实施方式中,上述处理器1001用于:
根据上述媒体数据生成媒体数据标识信息;
通过上述传输链接将上述媒体数据标识信息发送至上述DMR设备,以使上述DMR设备根据上述媒体数据标识信息播放上述媒体数据。
在一些可行的实施方式中,上述处理器1001用于:
通过上述传输链接将上述媒体数据发送至上述DMR设备,以使上述DMR设备播放上述媒体数据。
在一些可行的实施方式中,上述多个图像文件的数量为M,M为大于1的整数;上述处理器1001还用于:
当检测到第M个图像文件与第j个图像文件之间的各个图像文件相同时,将上述第一预设频率降低至第二预设频率,j为大于0且小于M的整数;或者,
当检测到上述第M个图像文件与第k个图像文件之间的各个图像文件互不相同时,将上述第一预设频率提升至第三预设频率,k为大于0且小于M的整数。
在一些可行的实施方式中,上述第一预设格式包括JPEG、GIF、PNG以及TIFF,上述第二预设格式包括AC-3、LPCM、ATRAC 3plus、MPEG-1/2L2、MPEG-1/2L3、MPEG-4AACLC、MPEG-4AACLTP、MPEG-4AAC HE、MPEH-4 BSAC、WMA、WMA Professional、AMR以及G.726。
应当理解,在一些可行的实施方式中,上述处理器1001可以是中央处理单元(central processing unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(digital signal processor,DSP)、专用集成电路(application specific integratedcircuit,ASIC)、现成可编程门阵列(field-programmable gate array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。该存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
具体实现中,上述设备1000可通过其内置的各个功能模块执行如上述图3中各个步骤所提供的实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。
在本申请实施例中,通过将DMC设备的显示画面进行截屏并进行编码,同时与相对应的编码后的音频文件进行时间同步得到媒体数据,可减小DMR设备在播放媒体数据时产生的镜像延时,可使所有支持DLNA的DMR设备均可支持媒体数据的播放,适用范围更广。另一方面,DMC设备通过独立完成监听DMR设备、生成媒体数据以及建立与DMR设备的传输链接,可减小由于依赖远程服务端导实现媒体数据播放所导致的资源消耗,适用性高。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,被处理器执行以实现图3中各个步骤所提供的方法,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。
上述计算机可读存储介质可以是前述任一实施例提供的任务处理装置的内部存储单元,例如电子设备的硬盘或内存。该计算机可读存储介质也可以是该电子设备的外部存储设备,例如该电子设备上配备的插接式硬盘,智能存储卡(smart media card,SMC),安全数字(secure digital,SD)卡,闪存卡(flash card)等。上述计算机可读存储介质还可以包括磁碟、光盘、只读存储记忆体(read-only memory,ROM)或随机存储记忆体(randomaccess memory,RAM)等。进一步地,该计算机可读存储介质还可以既包括该电子设备的内部存储单元也包括外部存储设备。该计算机可读存储介质用于存储该计算机程序以及该电子设备所需的其他程序和数据。该计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本申请的权利要求书和说明书及附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置展示该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。

Claims (10)

1.一种基于DLNA的媒体数据播放方法,其特征在于,应用于DMC设备,所述方法包括:
当在第一时间监听到DMR设备时,根据第一预设频率对所述DMC设备的显示画面进行截屏得到多个图像文件,并对所述多个图像文件进行编码得到第一预设格式的图像文件;
获取所述显示画面在所述第一时间之后的音频文件,并对所述音频文件进行编码得到第二预设格式的音频文件;
对所述第一预设格式的图像文件和所述第二预设格式的音频文件进行时间同步得到媒体数据;
建立与所述DMR设备的传输链接,通过所述传输链接使所述DMR设备播放所述媒体数据。
2.根据权利要求1所述的方法,其特征在于,所述第一预设格式的图像文件的数量为N,N为大于1的整数;所述对所述第一预设格式的图像文件和所述第二预设格式的音频文件进行时间同步得到媒体数据包括:
确定每个第一预设格式的图像文件的截屏时间,
将所述每个第一预设格式的图像文件按照截屏时间的先后顺序进行排序得到图像文件序列,所述图像文件序列中第一个第一预设格式的图像文件与所述第二预设格式的音频文件的开始时间相对应,第i个第一预设格式的图像文件与所述第一个第一预设格式的图像文件的时间间隔与所述第i个第一预设格式的图像文件的截屏时间与所述第一时间的时间间隔一致,i为大于1且小于等于N的整数;
根据所述图像文件序列和所述第二预设格式的音频文件生成媒体数据。
3.根据权利要求2所述的方法,其特征在于,所述根据所述图像文件序列和所述第二预设格式的音频文件生成媒体数据包括:
获取所述DMR设备所支持的媒体协议;
将所述图像文件序列和所述第二预设格式的音频文件封装为所述媒体协议对应的封装数据,并将所述封装数据确定为媒体数据。
4.根据权利要求1所述的方法,其特征在于,所述通过所述传输链接使所述DMR设备播放所述媒体数据包括:
根据所述媒体数据生成媒体数据标识信息;
通过所述传输链接将所述媒体数据标识信息发送至所述DMR设备,以使所述DMR设备根据所述媒体数据标识信息播放所述媒体数据。
5.根据权利要求1所述的方法,其特征在于,所述通过所述传输链接使所述DMR设备播放所述媒体数据包括:
通过所述传输链接将所述媒体数据发送至所述DMR设备,以使所述DMR设备播放所述媒体数据。
6.根据权利要求1所述的方法,其特征在于,所述多个图像文件的数量为M,M为大于1的整数;所述方法还包括:
当检测到第M个图像文件与第j个图像文件之间的各个图像文件相同时,将所述第一预设频率降低至第二预设频率,j为大于0且小于M的整数;或者,
当检测到所述第M个图像文件与第k个图像文件之间的各个图像文件互不相同时,将所述第一预设频率提升至第三预设频率,k为大于0且小于M的整数。
7.根据权利要求1所述的方法,其特征在于,所述第一预设格式包括JPEG、GIF、PNG以及TIFF,所述第二预设格式包括AC-3、LPCM、ATRAC 3plus、MPEG-1/2L2、MPEG-1/2L3、MPEG-4AACLC、MPEG-4 AACLTP、MPEG-4AAC HE、MPEH-4 BSAC、WMA、WMA Professional、AMR以及G.726。
8.一种基于DLNA的媒体数据播放装置,其特征在于,所述装置包括:
第一处理模块,用于当在第一时间监听到DMR设备时,根据第一预设频率对显示画面进行截屏得到多个图像文件,并对所述多个图像文件进行编码得到第一预设格式的图像文件;
第二处理模块,用于获取所述显示画面在所述第一时间之后的音频文件,并对所述音频文件进行编码得到第二预设格式的音频文件;
同步模块,用于对所述第一预设格式的图像文件和所述第二预设格式的音频文件进行时间同步得到媒体数据;
传输模块,用于建立与所述DMR设备的传输链接,通过所述传输链接使所述DMR设备播放所述媒体数据。
9.一种设备,其特征在于,包括处理器和存储器,所述处理器和存储器相互连接;
所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行如权利要求1至7任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行以实现权利要求1至7任一项所述的方法。
CN201911348331.3A 2019-12-24 2019-12-24 基于dlna的媒体数据播放方法、装置、设备以及存储介质 Pending CN111182342A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911348331.3A CN111182342A (zh) 2019-12-24 2019-12-24 基于dlna的媒体数据播放方法、装置、设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911348331.3A CN111182342A (zh) 2019-12-24 2019-12-24 基于dlna的媒体数据播放方法、装置、设备以及存储介质

Publications (1)

Publication Number Publication Date
CN111182342A true CN111182342A (zh) 2020-05-19

Family

ID=70650433

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911348331.3A Pending CN111182342A (zh) 2019-12-24 2019-12-24 基于dlna的媒体数据播放方法、装置、设备以及存储介质

Country Status (1)

Country Link
CN (1) CN111182342A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112423018A (zh) * 2020-10-27 2021-02-26 深圳Tcl新技术有限公司 媒体文件编码传输方法、装置、设备及可读存储介质
CN112423047A (zh) * 2020-10-27 2021-02-26 深圳Tcl新技术有限公司 电视节目共享方法、装置、多媒体终端以及存储介质
CN112770159A (zh) * 2020-12-30 2021-05-07 北京字节跳动网络技术有限公司 多屏互动系统、方法、装置、设备及存储介质
WO2022048371A1 (zh) * 2020-09-01 2022-03-10 华为技术有限公司 跨设备音频播放方法、移动终端、电子设备及存储介质
WO2022228002A1 (zh) * 2021-04-25 2022-11-03 广州视源电子科技股份有限公司 数据传输方法及数据传输设备

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102572606A (zh) * 2010-12-17 2012-07-11 微软公司 带有灵活的远程回放的流播的数字内容
US20130125192A1 (en) * 2011-11-15 2013-05-16 FeiJun Li Method of outputting video content from a digital media server to a digital media renderer and related media sharing system
CN103338139A (zh) * 2013-06-18 2013-10-02 华为技术有限公司 多屏互动方法、装置及终端设备
US20140115454A1 (en) * 2012-10-08 2014-04-24 Wenlong Li Method, apparatus and system of screenshot grabbing and sharing
CN103796061A (zh) * 2014-03-03 2014-05-14 上海美琦浦悦通讯科技有限公司 多智能终端中实现媒体文件同步播放和控制的系统及方法
CN105142001A (zh) * 2015-06-26 2015-12-09 深圳Tcl数字技术有限公司 截图的方法及系统
CN105426178A (zh) * 2015-11-02 2016-03-23 广东欧珀移动通信有限公司 终端的显示系统、终端系统的显示方法
CN105791351A (zh) * 2014-12-23 2016-07-20 深圳Tcl数字技术有限公司 基于dlna技术实现屏幕推送的方法及系统
CN106406788A (zh) * 2016-07-29 2017-02-15 广州视睿电子科技有限公司 扩展屏幕界面的方法和系统
CN108509238A (zh) * 2018-03-06 2018-09-07 珠海爱创医疗科技有限公司 桌面屏幕推送的方法及装置
CN108810610A (zh) * 2017-05-05 2018-11-13 腾讯科技(深圳)有限公司 屏幕共享方法和装置
CN108933965A (zh) * 2017-05-26 2018-12-04 腾讯科技(深圳)有限公司 屏幕内容共享方法、装置及存储介质
CN109240629A (zh) * 2018-08-27 2019-01-18 广州视源电子科技股份有限公司 一种桌面投屏方法、装置、设备及存储介质
CN109275130A (zh) * 2018-09-13 2019-01-25 锐捷网络股份有限公司 一种投屏方法、装置及存储介质

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102572606A (zh) * 2010-12-17 2012-07-11 微软公司 带有灵活的远程回放的流播的数字内容
US20130125192A1 (en) * 2011-11-15 2013-05-16 FeiJun Li Method of outputting video content from a digital media server to a digital media renderer and related media sharing system
US20140115454A1 (en) * 2012-10-08 2014-04-24 Wenlong Li Method, apparatus and system of screenshot grabbing and sharing
CN103338139A (zh) * 2013-06-18 2013-10-02 华为技术有限公司 多屏互动方法、装置及终端设备
CN103796061A (zh) * 2014-03-03 2014-05-14 上海美琦浦悦通讯科技有限公司 多智能终端中实现媒体文件同步播放和控制的系统及方法
CN105791351A (zh) * 2014-12-23 2016-07-20 深圳Tcl数字技术有限公司 基于dlna技术实现屏幕推送的方法及系统
CN105142001A (zh) * 2015-06-26 2015-12-09 深圳Tcl数字技术有限公司 截图的方法及系统
CN105426178A (zh) * 2015-11-02 2016-03-23 广东欧珀移动通信有限公司 终端的显示系统、终端系统的显示方法
CN106406788A (zh) * 2016-07-29 2017-02-15 广州视睿电子科技有限公司 扩展屏幕界面的方法和系统
CN108810610A (zh) * 2017-05-05 2018-11-13 腾讯科技(深圳)有限公司 屏幕共享方法和装置
CN108933965A (zh) * 2017-05-26 2018-12-04 腾讯科技(深圳)有限公司 屏幕内容共享方法、装置及存储介质
CN108509238A (zh) * 2018-03-06 2018-09-07 珠海爱创医疗科技有限公司 桌面屏幕推送的方法及装置
CN109240629A (zh) * 2018-08-27 2019-01-18 广州视源电子科技股份有限公司 一种桌面投屏方法、装置、设备及存储介质
CN109275130A (zh) * 2018-09-13 2019-01-25 锐捷网络股份有限公司 一种投屏方法、装置及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
叶志强 编著: "《社交电视系统关键支撑技术与应用案例》", 三河市人民印务出版社 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022048371A1 (zh) * 2020-09-01 2022-03-10 华为技术有限公司 跨设备音频播放方法、移动终端、电子设备及存储介质
CN114205336A (zh) * 2020-09-01 2022-03-18 华为技术有限公司 跨设备音频播放方法、移动终端、电子设备及存储介质
CN112423018A (zh) * 2020-10-27 2021-02-26 深圳Tcl新技术有限公司 媒体文件编码传输方法、装置、设备及可读存储介质
CN112423047A (zh) * 2020-10-27 2021-02-26 深圳Tcl新技术有限公司 电视节目共享方法、装置、多媒体终端以及存储介质
CN112770159A (zh) * 2020-12-30 2021-05-07 北京字节跳动网络技术有限公司 多屏互动系统、方法、装置、设备及存储介质
WO2022228002A1 (zh) * 2021-04-25 2022-11-03 广州视源电子科技股份有限公司 数据传输方法及数据传输设备

Similar Documents

Publication Publication Date Title
CN111182342A (zh) 基于dlna的媒体数据播放方法、装置、设备以及存储介质
CN107846633B (zh) 一种直播方法及系统
JP5350544B2 (ja) スペクトルの利用可能なチャネルを使用したデータのワイヤレス送信
CN106664458B (zh) 用于发射视频数据的方法、源装置以及存储媒体
CN108874337B (zh) 屏幕镜像方法及其装置
CN110740363A (zh) 投屏方法和系统、电子设备
US8607284B2 (en) Method of outputting video content from a digital media server to a digital media renderer and related media sharing system
US20080288990A1 (en) Interactive Broadcasting System
US9369508B2 (en) Method for transmitting a scalable HTTP stream for natural reproduction upon the occurrence of expression-switching during HTTP streaming
JP6337114B2 (ja) ワイヤレスディスプレイのためのソースデバイスにおけるリソース利用のための方法および装置
EP2754301A1 (en) Streaming of multimedia data from multiple sources
CN112752115B (zh) 直播数据传输方法、装置、设备及介质
Boronat et al. HbbTV-compliant platform for hybrid media delivery and synchronization on single-and multi-device scenarios
CN106792154B (zh) 视频播放器的跳帧同步系统及其控制方法
KR102499231B1 (ko) 수신 장치, 송신 장치 및 데이터 처리 방법
US11234026B2 (en) Methods and apparatus for responding to inoperative commands
KR102533674B1 (ko) 수신 장치, 송신 장치 및 데이터 처리 방법
CN106572115B (zh) 智能终端播放网络视频的屏幕镜像方法及发射及接收装置
JP5351136B2 (ja) 映像中継装置及びホームゲートウェイ
CN115643437A (zh) 一种显示设备及视频数据处理方法
CN117834963A (zh) 一种显示设备及流媒体的播放方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination