CN111984215A - 多媒体数据播放方法、终端及存储介质 - Google Patents

多媒体数据播放方法、终端及存储介质 Download PDF

Info

Publication number
CN111984215A
CN111984215A CN202010836565.9A CN202010836565A CN111984215A CN 111984215 A CN111984215 A CN 111984215A CN 202010836565 A CN202010836565 A CN 202010836565A CN 111984215 A CN111984215 A CN 111984215A
Authority
CN
China
Prior art keywords
multimedia data
screen projection
data stream
terminal
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010836565.9A
Other languages
English (en)
Inventor
闫鹏飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202010836565.9A priority Critical patent/CN111984215A/zh
Publication of CN111984215A publication Critical patent/CN111984215A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay

Abstract

本申请实施例公开了一种多媒体数据播放方法、终端及存储介质,所述方法包括:在与目标设备建立投屏连接之后,确定当前投屏模式;当当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,第一多媒体数据流和第二多媒体数据流为时间同步而格式不同的多媒体数据流;将第一多媒体数据流发送至第一设备,以使第一设备基于第一多媒体数据流播放第一多媒体数据;同时,将第二多媒体数据流发送至第二设备,以使第二设备基于第二多媒体数据流播放第二多媒体数据;其中,第一设备和第二设备为目标设备中的两个不同设备。

Description

多媒体数据播放方法、终端及存储介质
技术领域
本发明涉及数据处理领域,尤其涉及一种多媒体数据播放方法、终端及存储介质。
背景技术
随着电子产业的高速发展,移动终端(平板电脑、手机等)功能日益丰富,其能够运行某些屏幕操作类游戏或特定的影视APP,但局限于移动终端的屏幕大小,不能很好的与他人分享内容。无线视频显示(WiFi Display,WFD)技术是一种使得移动终端(平板电脑、手机等)等发送端,能够与具备大屏幕的电视、显示器等接收端无线连接的技术,可以实现将移动终端的多媒体数据在大屏幕的接收端再现。
当前,在通过WFD技术进行屏幕投影时,移动终端通常是将本机的音视频数据一起作为投屏数据持续性的发送给显示接收端,以实现在接收端播放发送端的音视频数据。然而这种单一的屏幕投影方式无法满足不同用户群体对屏幕投影的需求,终端智能性差,存在可优化空间。
发明内容
本申请实施例提供了一种多媒体数据播放方法、终端及存储介质,可以对屏幕投影数据进行灵活控制,适用性更强,终端智能性高。
本申请实施例的技术方案是这样实现的:
第一方面,本申请实施例提供了一种多媒体数据播放方法,所述方法包括:
在与目标设备建立投屏连接之后,确定当前投屏模式;
当所述当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,所述第一多媒体数据流和所述第二多媒体数据流为时间同步而格式不同的多媒体数据流;
将所述第一多媒体数据流发送至第一设备,以使所述第一设备基于所述第一多媒体数据流播放第一多媒体数据;同时,将所述第二多媒体数据流发送至第二设备,以使所述第二设备基于所述第二多媒体数据流播放第二多媒体数据;其中,所述第一设备和所述第二设备为所述目标设备中的两个不同设备。
第二方面,本申请实施例提供了一种终端,所述终端包括:确定单元,采集单元以及发送单元,
所述确定单元,用于在与目标设备建立投屏连接之后,确定当前投屏模式;
所述采集单元,用于当所述当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,所述第一多媒体数据流和所述第二多媒体数据流为时间同步而格式不同的多媒体数据流;
所述发送单元,用于将所述第一多媒体数据流发送至第一设备,以使所述第一设备基于所述第一多媒体数据流播放第一多媒体数据;同时,将所述第二多媒体数据流发送至第二设备,以使所述第二设备基于所述第二多媒体数据流播放第二多媒体数据;其中,所述第一设备和所述第二设备为所述目标设备中的两个不同设备。
第三方面,本申请实施例提供了一种终端,所述终端包括处理器、存储有所述处理器可执行指令的存储器,当所述指令被所述处理器执行时,实现如上所述的多媒体数据播放方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,其上存储有程序,应用于终端中,所述程序被处理器执行时,实现如上所述的多媒体数据播放方法。
本申请实施例提供了一种多媒体数据播放方法、终端及存储介质,终端可以在与目标设备建立投屏连接之后,确定当前投屏模式;当当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,第一多媒体数据流和第二多媒体数据流为时间同步而格式不同的多媒体数据流;将第一多媒体数据流发送至第一设备,以使第一设备基于第一多媒体数据流播放第一多媒体数据;同时,将第二多媒体数据流发送至第二设备,以使第二设备基于第二多媒体数据流播放第二多媒体数据;其中,第一设备和第二设备为目标设备中的两个不同设备。也就是说,在本申请的实施例中,终端在进行屏幕投影时,需要先确定当前投屏模式,进而可以在当前投屏模式为分离投屏时,选择将同一多媒体文件中时间同步而格式不同的第一多媒体数据流和第二多媒体数据流,分别通过不同的设备进行播放。可见,在本申请中,终端不仅可以支持将音/视频数据一同投屏至一个设备这种单一的屏幕投影方式,还可以根据不同的投屏模式选择性控制屏幕投影的音/视频数据,以实现在不同设备端分别播放音频数据和视频数据,这种能够灵活控制屏幕投影数据的屏幕投影方式进一步满足了不同用户的屏幕投影需求,终端智能性高。
附图说明
图1为相关技术中Miracast的Android系统架构示意图;
图2为相关技术中媒体路由服务器MediaRouter的框架示意图;
图3为本申请实施例提出的多媒体数据播放方法的实现流程示意图一;
图4为本申请实施例提出的多媒体数据播放方法的实现流程示意图二;
图5为本申请实施例提出的多媒体数据播放方法的实现流程示意图三;
图6为本申请实施例提出的终端组成结构示意图一;
图7为本申请实施例提出的投屏管理界面示意图;
图8为本申请实施例提出的多媒体数据播放方法的实现流程示意图四
图9为本申请实施例提出的模式设置界面的效果示意图一;
图10为本申请实施例提出的模式设置界面的效果示意图二;
图11为本申请实施例提出的终端的组成结构示意图二;
图12为本申请实施例提出的终端的组成结构示意图三。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。可以理解的是,此处所描述的具体实施例仅用于解释相关申请,而非对该申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关申请相关的部分。
对本发明实施例进行进一步详细说明之前,对本发明实施例中涉及的名词和术语进行说明,本发明实施例中涉及的名词和术语适用于如下的解释。
1)WFD:WiFi投屏技术,即将某一个屏幕的内容,通常是画面和声音,投射到另一个屏幕上,即实现设备之间的内容共享,包括视频、音乐以及图片的推送。例如,手机和电视机之间基于WFD技术,可以直接借助Wi-Fi,而无需硬连线就可以将手机中的视频投递到电视机上去显示。相关技术中的屏幕投影方式包括两种模式:推送模式和录屏(镜像)模式。
2)Miracast:Wi-Fi联盟(Wi-Fi Alliance,WFA)对支持WFD功能的设备的认证名称,通过Miracast认证的设备将在最大程度内保持对WFD功能的支持和兼容。其中,基于安卓Android系统的WFD功能的实现涉及到系统的多个模块,详细的,图1为相关技术中Miracast的Android系统架构示意图,如图1所示,Android系统中的Miracast实现主要涉及到MediaPlayerService相关模块(1001)、SurfaceFlinger相关模块(1002)、WifiService相关模块(1003)、DisplayManagerService相关模块(1004)以及WindowManagerService相关模块(1005)。
具体的,MediaPlayerService相关模块主要负责对需要投屏的内容进行编解码;SurfaceFlinger相关模块主要用于将各层用户界面(User Interface,UI)数据混屏并投递到显示设备中去显示,SurfaceFlinger支持多个显示设备,且该用于进行显示的屏幕可以是主屏,也可以是副屏,还可以是虚拟屏(屏幕投屏);WindowManagerService相关模块主要用于管理系统中各个UI层的位置和属性。需要注意的是,并非所有的UI层都会通过Miracast投递到远端设备上,例如手机中的视频可以投递到远端设备上去显示,但假如在播放过程中,突然弹出一个密码输入框,那么这个密码输入框就不能投递到远端设备上去显示。也就是说,WindowManagerService相关模块可以随时修改以适应Miracast的需要;DisplayManagerService相关模块主要用于管理在系统中加载的各个Display即显示设备,包括管理各个Display的生命周期,并且对各个Display进行配置,在Display状态变化的情况下向系统和应用程序发送通知。
另一方面,WifiService相关模块主要涉及屏幕投影过程中的数据传输协议,WFD协议的实现建立在Wifi点对点(Peer-to-Peer,P2P)的基础上,其中涉及的Wifi技术包括WiFi直连(WiFi-Direct)技术、Wi-Fi Protected Setup技术以及11n、无线多媒体(Wi-FiMultimedia,WMM)、Wi-Fi网络安全接入第二版(Wi-Fi Protected Acess2,WPA2)。其中,WiFi-Direct即Wifi-P2P,支持在没有无线接入点(Access Point,AP)的情况下,两个WiFi设备直连并通信;Wi-Fi Protected Setup用于帮助用户自动配置Wi-Fi网络,添加Wi-Fi设备等;11n/WMM/WPA2中的11n就是802.11n协议,可以将11a和11g提供的Wi-Fi传输速率从56Mbps提升到600Mbps,WMM是一种针对实时视音频数据的QoS服务,另外,WPA2主要用来给传输的数据进行加密保护。
进一步地,Android系统基于上述相关模块的实现WFD功能的主要工作过程包括:(1)打开WFD开关;(2)WFD设备发现;(3)WFD设备选择;(4)WFD设备连接;(5)WFD能力协商;(6)WFD会话建立;(7)WFD负载控制;(8)会话终止等多个步骤。具体的,首先在设置中开启WFD功能,然后将需要进行投屏的终端即Source端,与接收投屏数据的设备(电视机、盒子)即Sink端,通过wifiP2P技术点对点连接。其中,Sink端与Source端建立通信连接为传输控制协议(TCP,Transmission Control Protocol,TCP)连接,默认端口为7236,执行的数据传输协议为实时流传输(Real Time Streaming Protocol,RTSP)协议。在建立通信连接后双方进行RTSP协商,也就是能力协商,互相询问投屏参数(支持的音视频格式),并在协商成功后建立会话连接,开始多媒体数据流的传输。更具体的,在屏幕投影的数据流传输过程中,Source端可根据负载来动态调整传输数据和格式。
3)媒体路由器(MediaRouter):被设计用来允许多媒体(视频、音乐、图片)在与Android设备连接(无线或有线)的辅助设备(如电视、立体声、家庭戏院系统、音乐播放机)上进行显示和播放,即其主要职责为提供接口支持许多媒体输出播放设备通过无线或有线的方式连接设备,并管理多媒体数据的播放行为,即决定声音从哪个设备出,影像从哪个设备显示。
具体的,终端设备在进行屏幕投影时,当用户开启WFD功能之后,媒体路由服务器MediaRouter模块被创建,主要负责管理投屏过程中多媒体数据的播放行为,并维护当前已经配对上的Sink端设备,例如远程显示设备、电视、盒子,或者蓝牙音频传输模型协定(Advanced Audio Distribution Profile,A2DP)设备以及控制音频数据的输出设备等。详细的,图2为相关技术中媒体路由服务器MediaRouter模块的框架示意图,如图2所示,MediaRouter(1006)可以对音频服务器AudioService(1007)和显示管理服务器DisplayManagerService(1008)进行管理,以控制音频数据的输出设备和视频数据的输出设备,如音频输出设备中的本机音频模块Speaker(1009)以及蓝牙音频设备BluetoothSpeaker(1010);或者视频输出设备中的无线显示设备Wireless Display(1011)以及其他显示设备(1012)。
随着电子产业的高速发展,移动终端功能日益丰富,其能够运行某些屏幕操作类游戏或特定的影视APP,但局限于移动终端的屏幕大小,不能很好的与他人分享内容。WFD技术是一种使得移动终端(平板电脑、手机等)等发送端,能够与具备大屏幕的电视、显示器等接收端无线连接的技术,可以实现将移动终端的多媒体数据在大屏幕的接收端再现。
当前,在通过WFD进行屏幕投影时,移动终端通常是将本机的音视频数据一起作为投屏数据持续性的发送给显示接收端,以实现在接收端再现发送端的音视频数据。然而,对于手机终或者增强现实(Augmented Reality,AR)技术的终端设备,在使用WFD投屏技术时,WFD技术将设备的音频数据和视频数据一起投到接收显示设备的方式,对于音频有特殊需求的终端设备并不是一种很好的体验,例如AR眼镜门店体验,面对不同的人群对音频有不一样需求,对体验用户更希望将音频保留到AR眼镜端,对于视频部分更希望投屏到大屏幕上,以使得更多的用户看到AR虚实结合的效果。因而,相关技术中单一的屏幕投影方式无法满足不同用户群体对屏幕投影的需求,终端智能性差,存在可优化空间。
为了解决相关技术中屏幕投影机制所存在的问题,本申请实施例提供了一种多媒体数据播放方法、终端及存储介质。具体的,终端在进行屏幕投影时,需要先确定当前投屏模式,进而可以在当前投屏模式为分离投屏时,选择将同一多媒体文件中时间同步而格式不同的第一多媒体数据流和第二多媒体数据流,分别通过不同的设备进行播放。可见,在本申请中,终端不仅可以支持将音/视频数据一同投屏至一个设备这种单一的屏幕投影方式,还可以根据不同的投屏模式选择性控制屏幕投影的音/视频数据,以实现在不同设备端分别播放音频数据和视频数据,这种能够灵活控制屏幕投影数据的屏幕投影方式进一步满足了不同用户的屏幕投影需求,终端智能性高。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本申请的技术方案并不局限于Miracast的WFD这一无线投屏技术的屏幕投影,该方案也可以适用于其他无线屏幕投影技术,如数字家庭网络联盟(DigitalLiving Network Alliance,DLNA)投屏和AirPlay投屏,甚至也可以是有线投屏技术;并且本申请实施例提出的多媒体数据播放方法也并不局限于Android系统,也可以应用到如苹果移动设备操作(iPhone Operation System,IOS)系统、微软公司嵌入式(WindowsEmbedded Compact,Windows CE)系统等,本申请对此不做具体限定。
为了便于描述,本申请实施例中主要以应用至Android系统的WFD技术的多媒体数据播放方法进行说明,在实施例具体描述中,“屏幕投影”简称“投屏”。
本申请一实施例提供了一种计算方法,图3为本申请实施例提出的多媒体数据播放方法的实现流程示意图一,如图3所示,在本申请的实施例中,终端进行多媒体数据播放的方法可以包括以下步骤:
步骤101、在与目标设备建立投屏连接之后,确定当前投屏模式。
在本申请的实施例中,终端可以在与目标设备成功建立投屏连接之后,先对当前投屏模式进行确定。
需要说明的是,在本申请的实施例中,终端可以为具有通信功能的任意电子设备,包括但不限于:平板电脑、手机、电子阅读器、个人计算机(Personal Computer,PC)、笔记本电脑、车载设备、可穿戴设备等。相应地,目标设备为接收投屏数据的电子设备,例如,平板电脑、投影屏、笔记本电脑、显示屏或者智能电视等固定终端。具体的,目标设备和终端为都支持WFD屏幕投屏功能的电子设备。
可选的,目标设备是与终端设备可以是相同类型的设备,如两个手机或者两个平板电脑;或者目标设备是与终端设备也可以是不同类型的设备,如终端是手机,目标设备为电视机。
需要说明的是,在本申请的实施例中,进行无线投屏时,目标设备与终端均接入同一个Wi-Fi网络;其中,目标设备可以是一个,也可以是多个,即终端将多媒体数据投屏至一个设备或者投屏至多个设备。进一步的,同一个Wi-Fi网络内的终端和至少一个目标设备形成了一个P2P网络。
可以理解的是,在进行投屏过程中,投屏发起设备作为源设备即Source端,用于向外发送自身的多媒体数据,以投屏到其他设备进行播放;而被投屏设备作为Sink端,用于获得其他设备发送的需要投屏的多媒体数据并播放输出。具体地,在本申请的实施例中,终端作为投屏发起设备可以将自身的界面及状况对应的多媒体数据发送至目标设备,进而目标设备作为被投屏设备可以对该多媒体数据在本地进行输出播放。
需要说明的是,在本申请的实施例中,在进行多媒体数据的投屏之前,终端需要先开启投屏功能,并在完成目标设备的选择和通信连接、以及能力参数(投屏发起设备与被投屏设备支持的音视频数据的格式)的协商之后,与该目标设备之间的建立投屏连接。
具体地,在本申请的实施例中,终端可以基于用户的触摸操作接收开启指令,并响应该开启指令,开启投屏功能;之后,终端主动进行搜索扫描,发现附近与该终端处于当前同一局域网内的、可支持WFD投屏技术的至少一个备选电子设备,并根据实际所需基于至少一个电子设备对应的至少一个标识信息从至少一个备选电子设备中选择出目标设备,并在建立通信连接以及能力参数协商之后,实现与该目标设备的投屏连接。
可选的,上述目标设备的选择可以是终端基于用户的触摸操作接收到选择指令,然后响应该选择指令确定出目标设备;也可以是终端按照当前备选设备的信号质量参数对至少一个电子设备进行排序,将信号质量较好的备选设备作为被投屏的目标设备。
进一步地,在本申请的实施例中,终端在与目标设备建立投屏连接之后,终端需要先确定当前投屏模式,进而按照当前投屏模式进行多媒体数据的投屏处理。
可选的,在本申请的实施例中,终端可以通过查询投屏模式标识来确定当前投屏模式,终端也可以基于用户的触摸操作,在待投屏文件对应的当前界面,如待投屏文件所处存储界面或者待投屏文件的播放界面呼出模式设置界面,进而在模式设置界面中选择确定当前投屏模式。
需要说明的是,在本申请的实施例中,终端可以支持多种投屏模式,如,分离投屏、组合投屏,不同的投屏模式对应的多媒体数据的投屏方式并不相同,终端可以按照不同的投屏模式以不同的方式进行多媒体数据的投屏。
进一步地,在本申请的实施例中,终端在确定出当前投屏模式之后,终端可以进一步按照确定出的投屏模式执行待投屏文件的投屏处理过程。
步骤102、当当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,第一多媒体数据流和第二多媒体数据流为时间同步而格式不同的多媒体数据流。
在本申请的实施例中,终端在确定出当前投屏模式之后,如果当前投屏模式为分离投屏,那么在进行待投屏文件的投屏时,终端可以先对待投屏文件的第一多媒体数据流和第二多媒体数据流进行实时采集处理。
需要说明的是,在本申请的实施例中,如果终端确定出当前投屏模式为分离投屏,那么表示待投屏文件对应的投屏数据即多媒体数据,是需要实现在不同的设备端进行播放。可选的,分离投屏模式可以是全部多媒体数据作为投屏数据以实现分离投屏,也可以是部分多媒体数据,如视频数据作为投屏数据以实现分离投屏。
具体的,当待投屏文件的全部多媒体数据作为投屏数据时,终端可以是将待投屏文件的全部多媒体数据作为投屏数据,并按照不同数据格式进行分离,分别投屏至不同的其他设备,进而实现了分离投屏;而当待投屏文件的部分多媒体数据作为投屏数据时,终端这种将部分多媒体数据投屏至一个其他设备或者多个其他设备的方式都实现了分离投屏功能。
需要说明的是,在本申请的实施例中,终端和目标设备之间的投屏数据是以数据流的形式进行传输的,具体的,终端与目标设备之间的数据传输执行RSTP协议,即将多媒体数据打包成数据流并实时传输。
进一步地,基于RSTP的数据传输方式,终端在确定出当前投屏模式为分离投屏之后,终端可以实时采集待投屏文件的第一多媒体数据流和第二多媒体数据流。可选的,第一多媒体数据流可以为视频数据流或者音频数据流,相应地,第二多媒体数据流也可以为视频数据流或者音频数据流。
需要说明的是,在本申请的实施例中,第一多媒体数据流和第二多媒体数据流为同一待投屏文件中,时间同步且格式不同的多媒体数据流。可以理解的是,终端多媒体数据流的采集时都会打上时间戳,如果第一多媒体数据流为视频数据流时,那么第二多媒体数据流为与该视频数据流具有同步时间戳的音频数据流;如果第一多媒体数据流为音频数据流时,那么第二多媒体数据流为与该音频数据流具有同步时间戳的视频数据流。
可以理解的是,如果终端在本地已经开始播放多媒体文件,那么终端可以从该多媒体文件的当前播放界面对应的时间点,开始实时采集时间同步的视频数据流和音频数据流;如果终端在本地还未开始播放多媒体文件,那么终端可以在本地开始播放多媒体文件开始时,实时采集时间同步的视频数据流和音频数据流。
可选的,终端实时采集的时间同步的视频数据流和音频数据流时,终端当前界面可以始终是待投屏文件的播放界面,即镜像投屏模式;也可以是终端其他任意界面,而在后台运行处理待投屏文件,即推送投屏模式。
进一步地,在本申请的实施例中,终端在确定处当前投屏模式为分离投屏,并实时采集待投屏文件中时间同步而格式不同的音频数据流和视频数据流之后,终端可以进一步按照分离投屏模式对第一多媒体数据流和第二多媒体数据流进行推送处理,以实现在目标设备进行输出播放。
步骤103、将第一多媒体数据流发送至第一设备,以使第一设备基于第一多媒体数据流播放第一多媒体数据;同时,将第二多媒体数据流发送至第二设备,以使第二设备基于第二多媒体数据流播放第二多媒体数据;其中,第一设备和第二设备为目标设备中的两个不同设备。
在本申请的实施例中,终端确定当前投屏模式为分离投屏,并实时采集待投屏文件中时间同步而格式不同的多媒体数据流之后,终端可以按照分离投屏模式将第一多媒体数据流发送至第一设备,以实现在第一设备基于第一多媒体数据流本地播放第一多媒体数据;同时将第二多媒体数据流发送至第二设备,以实现在第二设备基于第二多媒体数据流本地播放第二多媒体数据。
需要说明的是,在本申请的实施例中,终端实时采集待投屏文件中具有同步时间戳的音频数据流和视频数据流之后,终端可以结合RTSP协议将数据流传输给与终端设备建立了会话连接的目标设备。
基于步骤102可知,分离投屏模式中,第一多媒体数据流和第二多媒体数据流被发送给不同的接收端设备,即实现在不同的接收端播放时间同步而格式不同的多媒体数据。可选的,终端可以将第一多媒体数据流发送至目标设备中的第一设备。
示例性的,当第一多媒体数据流为视频数据流时,终端可以将该视频数据流发送给第一设备,以实现在第一设备本地播放待投屏文件的视频数据。
可以理解的是,在本申请的实施例中,终端对具有同步时间戳的数据流进行同步推送处理,即分离投屏模式时,时间同步而格式不同的多媒体数据流是同时发送给不同的接收端设备的。可选的,如果第一多媒体数据流是发送至第一设备的,那么可以在发送第一多媒体数据流的同时,将第二多媒体数据流发送至第二设备。
示例性地,当第二多媒体数据流为音频数据流时,终端可以将该音频数据流发送给第二设备,以实现在第二设备本地播放待投屏文件的音频数据。且第一设备和第二设备可以对接收到的视频数据流和音频数据流同时进行解码,以根据其时间戳同步播放第一多媒体数据和第二多媒体数据,即实现视音频同步输出。
可选的,在本申请的实施例中,第二设备可以是目标设备中除第一设备以外的其他设备,第二设备也可以是终端自身。
具体的,如果分离投屏模式是将待投屏文件的全部多媒体数据作为投屏数据,也就是将待投屏文件的全部多媒体数据按照不同数据格式进行分离投屏,以实现在不同的其他设备进行播放,那么第二设备即为目标设备中除第一设备以外的其他设备,例如,手机将视频数据投屏至电视机,将音频数据推送至蓝牙音响。
具体的,如果分离投屏模式是将待投屏文件的部分多媒体数据作为投屏数据,那么第二设备可以为终端自身,也就是说,待投屏文件的一部分多媒体数据作为投屏数据,以实现在目标设备中的第一设备输出播放,另外一部分多媒体数据不进行投屏,而是终端本地播放;例如,终端只投屏视频数据,以在电视机播放视频,而不推送音频数据,终端可以本地播放音频。
进一步地,在本申请的实施例中,终端在进行多媒体数据流的推送处理时,终端可以基于负载参数进行传输参数的控制处理。具体的,终端在进行投屏时,可以实时获取自身以及目标设备的当前信号质量参数和当前电量参数,进而根据当前信号质量参数和当前质量参数调节多媒体数据流的传输参数,包括传输数据和传输格式,例如,数据的压缩率、视音频格式或者分辨率;从而进一步按照确定出传输参数将第一多媒体数据流发送至第一设备,同时,按照传输参数将第二多媒体数据流发送至第二设备。
进一步地,在本申请的实施例中,终端可以接收目标设备切换指令,将第一多媒体数据流发送至已建立投屏连接的、与第一设备以及第二设备不相同的第三设备,以使第三设备基于第一多媒体数据流继续播放第一多媒体数据;同时将第二多媒体数据流发送至已建立投屏连接的第四设备,以使第四设备基于第二多媒体数据流继续播放第二多媒体数据。
进一步地,终端还可以接收关闭指令,进而关闭投屏功能,断开与目标设备的投屏连接,在关闭投屏功能之后,终端便不可以将任何文件的多媒体数据流推送给目标设备,仅能在本地输出播放。
本申请实施例提供了一种多媒体数据播放方法,终端可以在与目标设备建立投屏连接之后,确定当前投屏模式;当当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,第一多媒体数据流和第二多媒体数据流为时间同步而格式不同的多媒体数据流;将第一多媒体数据流发送至第一设备,以使第一设备基于第一多媒体数据流播放第一多媒体数据;同时,将第二多媒体数据流发送至第二设备,以使第二设备基于第二多媒体数据流播放第二多媒体数据;其中,第一设备和第二设备为目标设备中的两个不同设备。也就是说,在本申请的实施例中,终端在进行屏幕投影时,需要先确定当前投屏模式,进而可以在当前投屏模式为分离投屏时,选择将同一多媒体文件中时间同步而格式不同的第一多媒体数据流和第二多媒体数据流,分别通过不同的设备进行播放。可见,在本申请中,终端不仅可以支持将音/视频数据一同投屏至一个设备这种单一的屏幕投影方式,还可以根据不同的投屏模式选择性控制屏幕投影的音/视频数据,以实现在不同设备端分别播放音频数据和视频数据,这种能够灵活控制屏幕投影数据的屏幕投影方式进一步满足了不同用户的屏幕投影需求,终端智能性高。
基于上述实施例,在本申请的另一实施例中,图4为本申请实施例提出的多媒体数据播放方法的实现流程示意图二,如图4所示,在本申请的实施例中,终端在确定当前投屏模式之后,即步骤102之后,终端进行多媒体数据播放的方法可以包括以下步骤:
步骤104、当当前投屏模式为组合投屏时,实时采集第一多媒体数据流和第二多媒体数据流。
在本申请的实施例中,终端在确定出当前投屏模式之后,如果当前投屏模式为组合投屏,那么在进行待投屏文件的投屏处理时,终端可以先对待投屏文件的第一多媒体数据流和第二多媒体数据流进行实时采集处理。
需要说明的是,在本申请的实施例中,如果终端确定出当前投屏模式为组合投屏,那么表示终端需要将待投屏文件的全部多媒体数据投影至同一个显示接收端,以实现在同一个接收设备播放待投屏文件的全部多媒体数据。
具体地,基于上述RSTP的数据传输方式,终端在确定出当前投屏模式为组合投屏之后,终端可以先实时采集待投屏文件的第一多媒体数据流和第二多媒体数据流。
需要说明的是,在本申请的实施例中,第一多媒体数据流和第二多媒体数据流为同一待投屏文件中,时间同步且格式不同的多媒体数据流。如果第一多媒体数据流为视频数据流时,那么第二多媒体数据流为与该视频数据流具有同步时间戳的音频数据流;如果第一多媒体数据流为音频数据流时,那么第二多媒体数据流为与该音频数据流具有同步时间戳的视频数据流。
进一步地,在本申请的实施例中,终端在确定处当前投屏模式为组合投屏,并实时采集待投屏文件中时间同步而格式不同的音频数据流和视频数据流之后,终端可以进一步按照组合投屏模式对第一多媒体数据流和第二多媒体数据流进行推送处理,以实现在同一个目标设备进行多媒体数据的输出播放。
步骤105、将第一多媒体数据流和第二多媒体数据流发送至第三设备,以使第三设备基于第一多媒体数据流和第二多媒体数据流播放第一多媒体数据和第二多媒体数据;其中,第三设备为目标设备中的任意一个设备。
在本申请的实施例中,终端确定当前投屏模式为组合投屏,并实时采集待投屏文件中时间同步而格式不同的多媒体数据流之后,终端可以按照组合投屏模式将第一多媒体数据流和第二多媒体数据流一同推送至第三设备,以实现在第三设备本地播放第一多媒体数据和第二多媒体数据。
具体地,在本申请的实施例中,组合投屏模式中,第一多媒体数据流和第二多媒体数据流被发送给同一个接收端设备,即实现了在同一个接收端播放时间同步而格式不同的多媒体数据,其中,多媒体数据包括音频数据和视频数据。
示例性的,当第一多媒体数据流为视频数据流,第二多媒体文件为音频数据流时,终端可以将该视频数据流和音频数据流同步发送给第三设备,第三设备可以对接收到的视频数据流和音频数据流同时进行解码,并根据其时间戳同步播放第一多媒体数据和第二多媒体数据,即实现视音频同步输出。
需要说明的是,在本申请的实施例中,第三设备可以是与第一设备或者第二设备相同的设备,也可以是目标设备中除第一设备和第二设备以外的其他任意一个设备。即终端可以将视频数据流和音频数据流同步发送给第一设备,或者,将视频数据流和音频数据流同步发送给第二设备。
可见,在组合投屏模式中,终端始终遵循将全部多媒体数据,包括视频数据和音频数据一同作为投屏数据,并将该投屏数据发送至建立投屏连接的同一个目标设备。
本申请实施例提供了一种多媒体数据播放方法,终端在进行投屏时,需要先确定当前投屏模式,进而可以在当前投屏模式为组合投屏时,选择将同一多媒体文件中时间同步而格式不同的第一多媒体数据流和第二多媒体数据流发送至同一接收设备,即将媒体文件的音视频数据通过同一设备进行播放。可见,在本申请中,终端可以根据不同的投屏模式选择性控制屏幕投影的音/视频数据,以实现在接收设备端同步播放音频数据和视频数据,这种能够灵活控制屏幕投影数据的屏幕投影方式,适用性更强,进一步满足了不同用户的屏幕投影需求,终端智能性高。
基于上述实施例,在本申请的另一实施例中,图5为本申请实施例提出的多媒体数据播放方法的实现流程示意图三,如图5所示,在本申请的实施例中,终端确定当前投屏模式的方法可以包括以下步骤:
步骤201、查询投屏模式标识。
在本申请的实施例中,终端在与目标设备建立投屏连接之后,终端需要先确定当前投屏模式。具体地,在确定当前投屏模式时,终端可以先对投屏模式标识进行查询。
需要说明的是,在本申请的实施例中,终端在开启投屏功能之后,终端可以先对投屏模式标识进行设置,以通过不同的投屏模式标识的值来指示终端当前的投屏模式。
具体地,终端预设有投屏管理界面,终端可以预先在投屏管理界面对投屏模式标识进行设置。
详细的,终端可以先在该投屏管理界面开启投屏功能,然后在开启投屏功能之后,基于用户在显示屏的触摸操作接收设置指令,进而响应该设置指令,确定投屏模式标识;其中,该投屏模式标识用于投屏模式的确定,也就是用于指示分离投屏功能的开启和关闭。
进一步地,当终端需要进行多媒体文件的投屏时,终端可以先对投屏模式标识进行查询,以根据查询到的投屏模式标识确定出当前投屏模式。具体的,不同的投屏模式标识的值用于指示不同的投屏方式。
可选的,如果本次投屏方式并未改变,终端可以在进行本次多媒体数据的投屏时,直接基于之前设置的投屏模式标识确定出当前投屏模式;另一方面,终端也可以根据实际所需重新设置投屏模式标识,以改变本次投屏方式。
进一步地,在本申请的实施例中,终端在投屏时,对投屏模式标识进行查询处理之后,便可以基于不同的投屏模式标识,确定出终端当前投屏模式。
步骤202、根据投屏模式标识确定当前投屏模式;其中,当前投屏模式包括分离投屏或者组合投屏。
在本申请的实施例中,终端在对投屏模式标识进行查询处理之后,终端便可以根据投屏模式标识确定出当前投屏模式为分离投屏或者组合投屏。
具体的,图6为本申请实施例提出的终端组成结构示意图一,如图6所示,终端10配置有设置模块11和媒体路由模块12,其中,设置模块11主要用于对投屏模式标识进行修改,媒体路由模块12主要用于根据设置模块修改后的投屏模式标识选择投屏方式,如决定用哪个设备输出音频,哪个设备输出视频。
更具体的,假定终端预先设置开启分离投屏功能时,投屏模式标识的值为true,而关闭分离投屏功能时,投屏模式标识的值为false。终端在与目标设备建立投屏连接之后,终端可以对设置模块对应的全局数据库进行查询,如果终端查询到该全局数据库中投屏模式标识的值修改为true,那么表示当前分离投屏功能已开启,终端当前投屏模式为分离投屏;如果终端查询到全局数据库中投屏模式标识的值修改为false,那么表示当前分离投屏功能已关闭,也就是终端并未使能分离投屏功能,终端当前投屏模式默认为组合投屏。
示例性的,终端配置有投屏管理界面,图7为本申请实施例提出的投屏管理界面示意图,如图7所示,手机投屏管理界面设置有投屏功能开启选项,如手机投屏选项、投屏模式标识设置选项,如不投屏到设备上选项,并且还可以在该投屏管理界面显示目标设备的标识信息,如可用设备。
具体的,当用户点击手机投屏选项后,终端可以基于用户对手机投屏选项的点击操作接收到开启指令,并响应该开启指令开启手机投屏功能,之后终端自动进行目标设备的扫描搜索,并在投屏管理界面的目标子区域,对与终端设备处于同一局域网的可用投屏设备进行显示,如图7所示当前可用设备为标识信息为NA80272165的设备;同时终端也可以基于用户对不投音频到设备上选项的点击操作接收设置指令,并响应该设置指令修改投屏模式标识的值,如图7中不投音频到设备上这一选项为开启状态,此时设置模块对应的全局数据库中,投屏模式标识的值已修改为true,此时终端开启分离投屏功能。
进一步地,终端也可以对投屏模式进行切换,假定当前终端正以分离投屏模式进行投屏,例如将视频数据投屏至第一设备进行播放,而本地播放音频数据,终端可以进一步通过修改投屏模式标识的值,以切换当前投屏模式。
具体的,用户可以在预设的投屏管理界面中,对投屏模式标识设置选项进行关闭操作,此时终端基于该关闭操作将设置模块对应的全局数据库中,投屏模式标识的值修改为False,此时终端通过查询投屏模式标识的值,可以将之前的分离投屏模式切换至组合投屏模式进行投屏,例如将视频数据和音频数据一起推送至第一设备以实现在第一设备进行播放。
基于上述实施例,在本申请的另一实施例中,图8为本申请实施例提出的多媒体数据播放方法的实现流程示意图四,如图8所示,在本申请的实施例中,终端确定当前投屏模式的方法还可以包括以下步骤:
步骤301、在当前界面中接收待投屏文件对应的呼出指令。
步骤302、响应呼出指令,在当前界面中呼出模式设置界面。
可选的,在本申请的实施例中,终端在与目标设备建立投屏连接之后,终端也可以在投屏管理界面以外的其他界面,如直接在待投屏文件所在的当前界面中确定出当前投屏模式。
具体的,终端可以在待投屏文件所在的当前界面中基于用户在显示屏的触摸操作接收待投屏文件对应的呼出指令,进而终端可以响应该呼出指令,在当前界面的目标子区域呼出模式设置界面,并在该模式设置界面根据接收到的选择指令确定当前投屏模式。
需要说明的是,在本申请的实施例中,当前界面可以是待投屏文件的播放界面,也可以是待投屏文件的存储界面。示例性地,用户可以在待投屏文件的播放界面或者存储界面中选中待投屏文件进行双击操作或者长按操作,进而在当前界面中某一目标子区域呼出模式设置界面。示例性的,该模式界面为设置有开启分离投屏功能按钮和开启组合投屏功能按钮的界面。
可选的,在本申请的实施例中,目标子区域可以位于终端显示界面四周边缘位置。当终端接收到呼出指令后,终端可以在待投屏文件的播放界面或者存储界面的四周边缘位置中的其中一个边缘位置处,呼出一悬浮窗形式的显示界面作为投屏模式的设置界面。示例性的,图9为本申请实施例提出的模式设置界面的效果示意图一,如图9所示,用户可以在待投屏文件的播放界面进行长按操作,终端基于用户的触摸操作接收呼出指令,进而在当前界面的右上角目标子区域呼出模式设置界面,该模式界面为设置有“分离”和“组合”按钮的界面,其中,“分离”按钮对应分离投屏模式,“组合”按钮对应组合投屏模式。
进一步地,在本申请地实施例中,终端在响应呼出指令,在当前界面呼出模式设置界面之后,终端可以进一步在模式设置界面中进行选择指令地接收,以确定当前投屏模式。
步骤303、在模式设置界面中接收选择指令。
步骤304、当选择指令指示开启分离投屏功能时,确定当前投屏模式为分离投屏。
步骤305、当选择指令指示开启分离投屏功能时,确定当前投屏模式为分离投屏。
在本申请的实施例中,终端在响应呼出指令在当前界面中呼出模式设置界面之后,终端可以通过在模式设置界面中接收到的选择指令确定出当前投屏模式。如果选择指令指示开启分离投屏功能,那么当前投屏模式为分离投屏;如果选择指令指示开启分离投屏功能,那么当前投屏模式为分离投屏。
具体地,在本申请的实施例中,终端在呼出模式设置界面之后,终端可以基于用户在模式设置界面的选择操作接收到选择指令,终端可以根据该选择确定出当前投屏模式。
示例性的,基于图9所示的当前界面,图10为本申请实施例提出的模式设置界面的效果示意图二,如图10所示,用户可以在模式设置界面进行点击操作,终端基于用户的触摸操作接收选择指令,具体的,终端检测到用户对“分离”按钮的触摸操作,即选择指令指示选择开启分离投屏功能,那么终端便可以确定当前投屏模式为分离投屏。进一步的,如果终端检测到用户对“组合”按钮的触摸操作,即接收到指示开启组合投屏功能的选择指令,那么终端便可以确定当前投屏模式为组合投屏。
进一步地,终端也可以对投屏模式进行切换,假定当前终端正以分离投屏模式进行投屏,例如将视频数据投屏至第一设备进行播放,而本地播放音频数据,终端可以进一步在当前界面中再次呼出模式设置界面,并在模式设置界面中基于用户触摸操作重新接收到指示开启组合投屏功能的选择指令,那么终端可以将之前的分离投屏模式切换至组合投屏模式进行投屏,例如将视频数据和音频数据一起推送至第一设备以实现在第一设备进行播放。
本申请实施例提供了一种多媒体数据播放方法,终端在进行投屏时,可以先确定当前投屏模式,进而可以在当前投屏模式为分离投屏时,选择将同一多媒体文件中时间同步而格式不同的第一多媒体数据流和第二多媒体数据流,分别发送至不同的设备,即分别通过不同的设备播放同一多媒体文件的音/视频数据;而在当前投屏模式为组合投屏时,选择将同一多媒体文件中时间同步而格式不同的第一多媒体数据流和第二多媒体数据流发送至同一接收设备,即通过同一设备播放同一多媒体文件的音/视频数据。可见,在本申请中,终端可以根据不同的投屏模式选择性控制屏幕投影的音/视频数据,以实现在同一接收设备或者不同接收设备同步播放音频数据和视频数据,这种能够灵活控制屏幕投影数据的屏幕投影方式,适用性更强,进一步满足了不同用户的屏幕投影需求,终端智能性高。
基于上述实施例,在本申请的另一实施例中,图11为本申请实施例提出的终端的组成结构示意图二,如图11所示,本申请实施例提出的终端10可以包括确定单元13,采集单元14,发送单元15、接收单元16,设置单元17,查找单元18,连接单元19以及获取单元110,
所述确定单元13,用于在与目标设备建立投屏连接之后,确定当前投屏模式;
所述采集单元14,用于当所述当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,所述第一多媒体数据流和所述第二多媒体数据流为时间同步而格式不同的多媒体数据流;
所述发送单元15,用于将所述第一多媒体数据流发送至第一设备,以使所述第一设备基于所述第一多媒体数据流播放第一多媒体数据;同时,将所述第二多媒体数据流发送至第二设备,以使所述第二设备基于所述第二多媒体数据流播放第二多媒体数据;其中,所述第一设备和所述第二设备为所述目标设备中的两个不同设备。
进一步地,在本申请的实施例中,所述接收单元16,用于在确定当前投屏模式之前,在开启投屏功能之后,接收设置指令。
进一步地,在本申请的实施例中,所述设置单元17,用于响应所述设置指令,设置投屏模式标识;其中,所述投屏模式标识用于投屏模式的确定。
进一步地,在本申请的实施例中,所述确定单元13,具体用于查询所述投屏模式标识;以及根据所述投屏模式标识确定所述当前投屏模式;其中,所述当前投屏模式包括所述分离投屏或者组合投屏。
进一步地,在本申请的实施例中,所述采集单元14,还用于在确定当前投屏模式之后,当所述当前投屏模式为所述组合投屏时,实时采集所述第一多媒体数据流和所述第二多媒体数据流。
进一步地,在本申请的实施例中,所述发送单元15,还用于将所述第一多媒体数据流和所述第二多媒体数据流发送至第三设备,以使所述第三设备基于所述第一多媒体数据流和所述第二多媒体数据流播放所述第一多媒体数据和所述第二多媒体数据;其中,所述第三设备为所述目标设备中的任意一个设备。
进一步地,在本申请的实施例中,所述第一多媒体数据流和所述第二多媒体数据流分别为所述待投屏文件对应的视频数据流和音频数据流。
进一步地,在本申请的实施例中,所述确定单元13,还具体用于在当前界面中接收所述待投屏文件对应的呼出指令;以及响应所述呼出指令,在所述当前界面中呼出模式设置界面;以及在所述模式设置界面中接收选择指令;以及当所述选择指令指示开启分离投屏功能时,确定所述当前投屏模式为分离投屏;以及当所述选择指令指示开启组合投屏功能时,确定所述当前投屏模式为组合投屏。
进一步地,在本申请的实施例中,所述查找单元18,用于在开启投屏功能之后,查找位于当前局域网内的至少一个备选设备,并获得所述至少一个备选设备的至少一个标识信息;其中,一个备选设备对应一个标识信息。
进一步地,在本申请的实施例中,所述确定单元13,还用于根据所述至少一个标识信息从所述至少一个备选设备中确定所述目标设备。
进一步地,在本申请的实施例中,所述发送单元15,还用于向所述目标设备发送投屏连接请求。
进一步地,在本申请的实施例中,所述接收单元16,还用于接收所述目标设备返回的投屏连接响应。
进一步地,在本申请的实施例中,所述连接单元19,用于根据所述投屏连接响应与所述目标设备建立所述投屏连接。
进一步地,在本申请的实施例中,所述获取单元110,用于在实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流之后,获取当前信号质量参数和当前电量参数。
进一步地,在本申请的实施例中,所述确定单元13,还用于根据所述当前信号质量参数和所述当前电量参数确定传输参数。
进一步地,在本申请的实施例中,所述发送单元15,还用于按照所述传输参数将所述第一多媒体数据流发送至所述第一设备,同时,按照所述传输参数将所述第二多媒体数据流发送至所述第二设备。
在本申请的实施例中,进一步地,图12为本申请实施例提出的终端的组成结构示意图三,如图12所示,本申请实施例提出的终端10还可以包括处理器111、存储有处理器111可执行指令的存储器112,进一步地,终端10还可以包括通信接口111,和用于连接处理器111、存储器112以及通信接口113的总线114。
在本申请的实施例中,上述处理器111可以为特定用途集成电路(ApplicationSpecific Integrated Circuit,ASIC)、数字信号处理器(Digital Signal Processor,DSP)、数字信号处理装置(Digital Signal Processing Device,DSPD)、可编程逻辑装置(ProgRAMmable Logic Device,PLD)、现场可编程门阵列(Field ProgRAMmable GateArray,FPGA)、中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器中的至少一种。可以理解地,对于不同的设备,用于实现上述处理器功能的电子器件还可以为其它,本申请实施例不作具体限定。终端10还可以包括存储器112,该存储器112可以与处理器111连接,其中,存储器112用于存储可执行程序代码,该程序代码包括计算机操作指令,存储器112可能包含高速RAM存储器,也可能还包括非易失性存储器,例如,至少两个磁盘存储器。
在本申请的实施例中,总线114用于连接通信接口113、处理器111以及存储器112以及这些器件之间的相互通信。
在本申请的实施例中,存储器112,用于存储指令和数据。
进一步地,在本申请的实施例中,上述处理器111,用于在与目标设备建立投屏连接之后,确定当前投屏模式;当所述当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,所述第一多媒体数据流和所述第二多媒体数据流为时间同步而格式不同的多媒体数据流;将所述第一多媒体数据流发送至第一设备,以使所述第一设备基于所述第一多媒体数据流播放第一多媒体数据;同时,将所述第二多媒体数据流发送至第二设备,以使所述第二设备基于所述第二多媒体数据流播放第二多媒体数据;其中,所述第一设备和所述第二设备为所述目标设备中的两个不同设备。
在实际应用中,上述存储器112可以是易失性存储器(volatile memory),例如随机存取存储器(Random-Access Memory,RAM);或者非易失性存储器(non-volatilememory),例如只读存储器(Read-Only Memory,ROM),快闪存储器(flash memory),硬盘(Hard Disk Drive,HDD)或固态硬盘(Solid-State Drive,SSD);或者上述种类的存储器的组合,并向处理器111提供指令和数据。
另外,在本实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
集成的单元如果以软件功能模块的形式实现并非作为独立的产品进行销售或使用时,可以存储在一个计算机可读取存储介质中,基于这样的理解,本实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或processor(处理器)执行本实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本申请实施例提供了一种终端,该终端可以在与目标设备建立投屏连接之后,确定当前投屏模式;当当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,第一多媒体数据流和第二多媒体数据流为时间同步而格式不同的多媒体数据流;将第一多媒体数据流发送至第一设备,以使第一设备基于第一多媒体数据流播放第一多媒体数据;同时,将第二多媒体数据流发送至第二设备,以使第二设备基于第二多媒体数据流播放第二多媒体数据;其中,第一设备和第二设备为目标设备中的两个不同设备。也就是说,在本申请的实施例中,终端在进行屏幕投影时,需要先确定当前投屏模式,进而可以在当前投屏模式为分离投屏时,选择将同一多媒体文件中时间同步而格式不同的第一多媒体数据流和第二多媒体数据流,分别通过不同的设备进行播放。可见,在本申请中,终端不仅可以支持将音/视频数据一同投屏至一个设备这种单一的屏幕投影方式,还可以根据不同的投屏模式选择性控制屏幕投影的音/视频数据,以实现在不同设备端分别播放音频数据和视频数据,这种能够灵活控制屏幕投影数据的屏幕投影方式进一步满足了不同用户的屏幕投影需求,终端智能性高。
本申请实施例提供一种计算机可读存储介质,其上存储有程序,该程序被处理器执行时实现如上所述的多媒体数据播放方法。
具体来讲,本实施例中的多媒体数据播放方法对应的程序指令可以被存储在光盘,硬盘,U盘等存储介质上,当存储介质中的与计算方法对应的程序指令被一电子设备读取或被执行时,包括如下步骤:
在与目标设备建立投屏连接之后,确定当前投屏模式;
当所述当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,所述第一多媒体数据流和所述第二多媒体数据流为时间同步而格式不同的多媒体数据流;
将所述第一多媒体数据流发送至第一设备,以使所述第一设备基于所述第一多媒体数据流播放第一多媒体数据;同时,将所述第二多媒体数据流发送至第二设备,以使所述第二设备基于所述第二多媒体数据流播放第二多媒体数据;其中,所述第一设备和所述第二设备为所述目标设备中的两个不同设备。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的实现流程示意图和/或方框图来描述的。应理解可由计算机程序指令实现流程示意图和/或方框图中的每一流程和/或方框、以及实现流程示意图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。以上所述,仅为本申请的较佳实施例而已,非用于限定本申请的保护范围。

Claims (11)

1.一种多媒体数据播放方法,其特征在于,所述方法包括:
在与目标设备建立投屏连接之后,确定当前投屏模式;
当所述当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,所述第一多媒体数据流和所述第二多媒体数据流为时间同步而格式不同的多媒体数据流;
将所述第一多媒体数据流发送至第一设备,以使所述第一设备基于所述第一多媒体数据流播放第一多媒体数据;同时,将所述第二多媒体数据流发送至第二设备,以使所述第二设备基于所述第二多媒体数据流播放第二多媒体数据;其中,所述第一设备和所述第二设备为所述目标设备中的两个不同设备。
2.根据权利要求1所述的方法,其特征在于,所述确定当前投屏模式之前,所述方法还包括:
在开启投屏功能之后,接收设置指令;
响应所述设置指令,设置投屏模式标识;其中,所述投屏模式标识用于投屏模式的确定。
3.根据权利要求2所述的方法,其特征在于,所述确定当前投屏模式,包括:
查询所述投屏模式标识;
根据所述投屏模式标识确定所述当前投屏模式;其中,所述当前投屏模式包括所述分离投屏或者组合投屏。
4.根据权利要求3所述的方法,其特征在于,所述确定当前投屏模式之后,所述方法还包括:
当所述当前投屏模式为所述组合投屏时,实时采集所述第一多媒体数据流和所述第二多媒体数据流;
将所述第一多媒体数据流和所述第二多媒体数据流发送至第三设备,以使所述第三设备基于所述第一多媒体数据流和所述第二多媒体数据流播放所述第一多媒体数据和所述第二多媒体数据;其中,所述第三设备为所述目标设备中的任意一个设备。
5.根据权利要求1所述的方法,其特征在于,
所述第一多媒体数据流和所述第二多媒体数据流分别为所述待投屏文件对应的视频数据流和音频数据流。
6.根据权利要求1所述的方法,其特征在于,所述确定当前投屏模式,包括:
在当前界面中接收所述待投屏文件对应的呼出指令;
响应所述呼出指令,在所述当前界面中呼出模式设置界面;
在所述模式设置界面中接收选择指令;
当所述选择指令指示开启分离投屏功能时,确定所述当前投屏模式为分离投屏;
当所述选择指令指示开启组合投屏功能时,确定所述当前投屏模式为组合投屏。
7.根据权利要求2所述的方法,其特征在于,所述在开启投屏功能之后,所述方法还包括:
查找位于当前局域网内的至少一个备选设备,并获得所述至少一个备选设备的至少一个标识信息;其中,一个备选设备对应一个标识信息;
根据所述至少一个标识信息从所述至少一个备选设备中确定所述目标设备;
向所述目标设备发送投屏连接请求;
接收所述目标设备返回的投屏连接响应,并根据所述投屏连接响应与所述目标设备建立所述投屏连接。
8.根据权利要求1所述的方法,其特征在于,所述实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流之后,所述方法还包括:
获取当前信号质量参数和当前电量参数;
根据所述当前信号质量参数和所述当前电量参数确定传输参数;
按照所述传输参数将所述第一多媒体数据流发送至所述第一设备,同时,按照所述传输参数将所述第二多媒体数据流发送至所述第二设备。
9.一种终端,其特征在于,所述终端包括:确定单元,采集单元以及发送单元,
所述确定单元,用于在与目标设备建立投屏连接之后,确定当前投屏模式;
所述采集单元,用于当所述当前投屏模式为分离投屏时,实时采集待投屏文件对应的第一多媒体数据流和第二多媒体数据流;其中,所述第一多媒体数据流和所述第二多媒体数据流为时间同步而格式不同的多媒体数据流;
所述发送单元,用于将所述第一多媒体数据流发送至第一设备,以使所述第一设备基于所述第一多媒体数据流播放第一多媒体数据;同时,将所述第二多媒体数据流发送至第二设备,以使所述第二设备基于所述第二多媒体数据流播放第二多媒体数据;其中,所述第一设备和所述第二设备为所述目标设备中的两个不同设备。
10.一种终端,其特征在于,所述终端包括处理器、存储有所述处理器可执行指令的存储器,当所述指令被所述处理器执行时,实现如权利要求1-8任一项所述的方法。
11.一种计算机可读存储介质,其上存储有程序,应用于终端中,其特征在于,所述程序被处理器执行时,实现如权利要求1-8任一项所述的方法。
CN202010836565.9A 2020-08-19 2020-08-19 多媒体数据播放方法、终端及存储介质 Pending CN111984215A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010836565.9A CN111984215A (zh) 2020-08-19 2020-08-19 多媒体数据播放方法、终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010836565.9A CN111984215A (zh) 2020-08-19 2020-08-19 多媒体数据播放方法、终端及存储介质

Publications (1)

Publication Number Publication Date
CN111984215A true CN111984215A (zh) 2020-11-24

Family

ID=73434212

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010836565.9A Pending CN111984215A (zh) 2020-08-19 2020-08-19 多媒体数据播放方法、终端及存储介质

Country Status (1)

Country Link
CN (1) CN111984215A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113050903A (zh) * 2021-03-31 2021-06-29 联想(北京)有限公司 电子设备及数据处理方法
CN113282260A (zh) * 2021-06-09 2021-08-20 深圳康佳电子科技有限公司 投屏控制方法、装置、智能终端及计算机可读存储介质
CN113766303A (zh) * 2021-05-08 2021-12-07 北京字节跳动网络技术有限公司 多屏互动方法、装置、设备及存储介质
CN113992966A (zh) * 2021-10-26 2022-01-28 Oppo广东移动通信有限公司 重定向方法、装置、设备、存储介质及程序产品
CN114006971A (zh) * 2021-10-28 2022-02-01 努比亚技术有限公司 一种投屏窗口音频控制方法、设备及计算机可读存储介质
WO2022111421A1 (zh) * 2020-11-25 2022-06-02 华为技术有限公司 应用界面投屏方法、装置、设备以及存储介质
CN115442643A (zh) * 2021-06-03 2022-12-06 Oppo广东移动通信有限公司 投屏方法、装置、无线终端、投屏设备及存储介质
WO2022252909A1 (zh) * 2021-06-03 2022-12-08 Oppo广东移动通信有限公司 无线终端中的投屏方法、装置、无线终端及存储介质
WO2022267974A1 (zh) * 2021-06-25 2022-12-29 华为技术有限公司 一种投屏方法及相关装置
CN116981108A (zh) * 2023-09-22 2023-10-31 荣耀终端有限公司 无线投屏连接方法、移动终端及计算机可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104540027A (zh) * 2014-12-19 2015-04-22 北京正文科技有限公司 一种多屏幕环境下的多媒体展示交互控制系统
CN109168038A (zh) * 2018-10-11 2019-01-08 维沃移动通信有限公司 一种资源的处理方法、装置及设备
CN109814822A (zh) * 2018-12-24 2019-05-28 维沃移动通信有限公司 一种多媒体的播放控制方法、装置及终端设备
CN110582749A (zh) * 2019-07-11 2019-12-17 深圳市鹰硕技术有限公司 一种远程桌面控制方法、装置和系统、设备及存储介质
CN110740363A (zh) * 2019-10-25 2020-01-31 华为终端有限公司 投屏方法和系统、电子设备
CN111045628A (zh) * 2019-12-27 2020-04-21 维沃移动通信有限公司 一种信息传输方法及电子设备
CN111131866A (zh) * 2019-11-25 2020-05-08 华为技术有限公司 一种投屏音视频播放方法及电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104540027A (zh) * 2014-12-19 2015-04-22 北京正文科技有限公司 一种多屏幕环境下的多媒体展示交互控制系统
CN109168038A (zh) * 2018-10-11 2019-01-08 维沃移动通信有限公司 一种资源的处理方法、装置及设备
CN109814822A (zh) * 2018-12-24 2019-05-28 维沃移动通信有限公司 一种多媒体的播放控制方法、装置及终端设备
CN110582749A (zh) * 2019-07-11 2019-12-17 深圳市鹰硕技术有限公司 一种远程桌面控制方法、装置和系统、设备及存储介质
CN110740363A (zh) * 2019-10-25 2020-01-31 华为终端有限公司 投屏方法和系统、电子设备
CN111131866A (zh) * 2019-11-25 2020-05-08 华为技术有限公司 一种投屏音视频播放方法及电子设备
CN111045628A (zh) * 2019-12-27 2020-04-21 维沃移动通信有限公司 一种信息传输方法及电子设备

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022111421A1 (zh) * 2020-11-25 2022-06-02 华为技术有限公司 应用界面投屏方法、装置、设备以及存储介质
CN113050903A (zh) * 2021-03-31 2021-06-29 联想(北京)有限公司 电子设备及数据处理方法
CN113766303A (zh) * 2021-05-08 2021-12-07 北京字节跳动网络技术有限公司 多屏互动方法、装置、设备及存储介质
CN115442643A (zh) * 2021-06-03 2022-12-06 Oppo广东移动通信有限公司 投屏方法、装置、无线终端、投屏设备及存储介质
WO2022252909A1 (zh) * 2021-06-03 2022-12-08 Oppo广东移动通信有限公司 无线终端中的投屏方法、装置、无线终端及存储介质
CN113282260A (zh) * 2021-06-09 2021-08-20 深圳康佳电子科技有限公司 投屏控制方法、装置、智能终端及计算机可读存储介质
CN113282260B (zh) * 2021-06-09 2024-04-23 深圳康佳电子科技有限公司 投屏控制方法、装置、智能终端及计算机可读存储介质
WO2022267974A1 (zh) * 2021-06-25 2022-12-29 华为技术有限公司 一种投屏方法及相关装置
CN113992966A (zh) * 2021-10-26 2022-01-28 Oppo广东移动通信有限公司 重定向方法、装置、设备、存储介质及程序产品
CN114006971B (zh) * 2021-10-28 2024-03-19 努比亚技术有限公司 一种投屏窗口音频控制方法、设备及计算机可读存储介质
CN114006971A (zh) * 2021-10-28 2022-02-01 努比亚技术有限公司 一种投屏窗口音频控制方法、设备及计算机可读存储介质
CN116981108A (zh) * 2023-09-22 2023-10-31 荣耀终端有限公司 无线投屏连接方法、移动终端及计算机可读存储介质
CN116981108B (zh) * 2023-09-22 2023-11-24 荣耀终端有限公司 无线投屏连接方法、移动终端及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN111984215A (zh) 多媒体数据播放方法、终端及存储介质
CN109963178B (zh) 使用安全投屏器进行投屏的方法和安全投屏器
KR101801127B1 (ko) 실시간 전송 프로토콜에 대한 스트리밍 제어
TWI669957B (zh) Media projection method, media projection device, control terminal, and cloud server
US9569173B1 (en) Audio capture and remote output
WO2022089088A1 (zh) 显示设备、移动终端、投屏数据传输方法及传输系统
KR102157634B1 (ko) 영상 획득 방법 및 로컬 엔드포인트 호스트 장치
KR102284721B1 (ko) 무선 통신 시스템에서 어플리케이션 데이터를 디스플레이하기 위한 방법 및 장치
EP4013003A1 (en) Communication protocol switching method, apparatus and system
US20090070840A1 (en) Terminal-Cooperated System, Terminal, Server and Method for Uninterrupted Reception of Contents
CN103368935A (zh) 在Wi-Fi显示网络中提供增强Wi-Fi显示会话的方法和装置
WO2016110169A1 (zh) 一种显示处理方法及装置
WO2013063941A1 (zh) 家庭网络中dlna终端的屏幕共享方法及系统
CN105323628B (zh) 基于dlna跨屏播放的方法及系统、浏览器端装置和播放装置
WO2015042961A1 (zh) 媒体数据传输方法及设备
JP7123594B2 (ja) 通信装置、制御方法、およびプログラム
EP3163805B1 (en) Method and device for processing information
JP6564884B2 (ja) マルチメディア情報再生方法及びシステム、ならびに標準化サーバ及びライブストリーミング端末
JP2009130876A (ja) 端末連携継続視聴システム、端末、サーバ、方法
CN111246306A (zh) 播放控制方法、播放设备切换方法、播放设备及智能终端
CN112153457A (zh) 无线投屏连接方法、装置、计算机存储介质及电子设备
US20220286731A1 (en) Multimedia apparatus and cast method
CN114302202A (zh) 音视频投屏方法、装置、设备、系统及存储介质
WO2014207899A1 (ja) 通信装置および通信方法
JP2008160301A (ja) コンテンツ配信装置、ネットワーク端末及びコンテンツ配信システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination