CN106534956B - 屏幕投射的视频数据传输方法、装置及系统 - Google Patents

屏幕投射的视频数据传输方法、装置及系统 Download PDF

Info

Publication number
CN106534956B
CN106534956B CN201510580127.XA CN201510580127A CN106534956B CN 106534956 B CN106534956 B CN 106534956B CN 201510580127 A CN201510580127 A CN 201510580127A CN 106534956 B CN106534956 B CN 106534956B
Authority
CN
China
Prior art keywords
video
transmission
transmission channel
ratio
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510580127.XA
Other languages
English (en)
Other versions
CN106534956A (zh
Inventor
宋晓霞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201510580127.XA priority Critical patent/CN106534956B/zh
Priority to PCT/CN2015/097921 priority patent/WO2016165375A1/zh
Publication of CN106534956A publication Critical patent/CN106534956A/zh
Application granted granted Critical
Publication of CN106534956B publication Critical patent/CN106534956B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明提供了一种屏幕投射的视频数据传输方法、装置及系统，其中，所述方法包括：建立与显示装置之间的第一传输通道和第二传输通道；根据预定条件确定待传输视频的传输策略，其中，所述传输策略用于指示通过所述第一传输通道和/或所述第二传输通道传输所述待传输视频数据。采用本发明提供的上述技术方案，解决了相关技术中，在终端到显示设备的视频投射过程中，由于时延而容易出现的视频卡顿以及不流畅问题，进而大大减少了视频投射过程中的延时情况，有效避免了视频卡顿，提高了用户体验度。

Description

屏幕投射的视频数据传输方法、装置及系统
技术领域
本发明涉及通信领域，具体而言，涉及一种屏幕投射的视频数据传输方法、装置及系统。
背景技术
在Android5.0项目中，新增了功能基于Miracast“屏幕投射”，但Miracast的技术规范出来时间较短，限于无线保真(WIreless-Fidelity，简称为Wi-Fi)连接速度的限制，目前在桌面状态下的投射大概有300ms的延迟。由于屏幕投射的存在的延迟，在播放高清视频时会存在延迟，这种延迟用户体验的效果不好。
已有的技术方案是通过Wi-Fi直连(Wi-Fi Direct)技术将终端和显示设备连接成功后，用Miracast技术将终端的内容投射到显示设备上。采用的Miracast技术拓扑结构是源终端(Source)--显示设备(Display)，终端设备通过WIFI Direct给显示设备传输数据，无需无线接入点(Access Point，简称为AP)热点，而这样的技术方案，容易受到终端设备和显示设备WIFI吞吐率的影响，以及现有的无线通讯方式间信号的干扰情况，导致传输过程中的迟钝、不流畅的问题，这样就会出现从终端到显示设备上显示时存在延迟。
针对相关技术中，在终端到显示设备的视频投射过程中，由于时延而容易出现的视频卡顿以及不流畅问题，尚未提出有效的技术方案。
发明内容
为了解决上述技术问题，本发明提供了一种屏幕投射的视频数据传输方法、装置及系统。
根据本发明的一个方面，提供了一种屏幕投射的视频数据传输方法，包括：建立与显示装置之间的第一传输通道和第二传输通道；根据预定条件确定待传输视频数据的传输策略，其中，所述传输策略用于指示通过所述第一传输通道和/或所述第二传输通道传输所述待传输视频数据。
优选地，根据预定条件确定待传输视频数据的传输策略，包括：获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率；判断所述第一数据传输速率与所述第二数据传输速率的比值，与预设阈值的大小关系；根据所述比值与所述大小关系判定所述传输策略。
优选地，根据所述比值与大小关系判定传输视频的传输策略，包括：
在所述比值大于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据，在所述第二传输通道上传输所述视频的声音数据；
在所述比值大于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据和声音数据；
在所述比值小于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的声音数据，在所述第二传输通道上传输所述视频的图像数据；
在所述比值小于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第二传输通道上传输所述视频的图像数据和声音数据。
优选地，根据所述比值与所述大小关系判定传输视频的传输策略之后，所述方法还包括：
按照指定周期获取所述比值和所述大小关系；
根据获取的当前周期内的所述比值和所述大小关系调整所述当前周期的下一周期的视频传输策略。
优选地，所述第一传输通道为视频发送端与视频接收端通过无线保真WiFi直连建立的传输通道，所述第二传输通道为所述视频发送端，经第三方设备与所述视频接收端连接建立的传输通道，所述第三方设备至少具备以下能力：接收数据、发送数据。
优选地，所述第三方设备包括：无线接入点AP。
根据本发明的另一个方面，还提供了一种屏幕投射的视频数据传输装置，包括：建立模块，用于建立与显示装置之间的第一传输通道和第二传输通道；判定模块，用于根据预定条件确定待传输视频数据的传输策略，其中，所述传输策略用于指示通过所述第一传输通道和/或所述第二传输通道传输所述待传输视频数据。
优选地，所述判定模块包括：获取单元，用于获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率；判断单元，用于判断所述第一数据传输速率与所述第二数据传输速率的比值，与预设阈值的大小关系；判定单元，用于根据所述比值与所述大小关系判定传输视频的传输策略。
优选地，所述判定单元，包括：第一判定子单元，用于在所述比值大于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据，在所述第二传输通道上传输所述视频的声音数据；
第二判定子单元，用于在所述比值大于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据和声音数据；
第三判定子单元，用于在所述比值小于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的声音数据，在所述第二传输通道上传输所述视频的图像数据；
第四判定子单元，用于在所述比值小于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第二传输通道上传输所述视频的图像数据和声音数据。
优选地，所述装置还包括：获取模块，用于按照指定周期获取所述比值和所述大小关系；调整模块，用于根据获取的当前周期内的所述比值和所述大小关系调整所述当前周期的下一周期的视频传输策略。
优选地，所述获取单元获取的所述第一传输通道为视频发送端与视频接收端通过无线保真WiFi直连建立的传输通道，所述第二传输通道为所述视频发送端，经第三方设备与所述视频接收端连接建立的传输通道，所述第三方设备具备以下能力：中继放大、接收数据、发送数据。
根据本发明的另一个方面，还提供了一种视频传输系统，包括：一个或多个视频发送端、视频接收端，其中，所述一个或多个视频发送端，用于建立第一传输通道和第二传输通道，并根据预定条件判定待传输到所述视频接收端的视频的传输策略，其中，所述传输策略用于指示传输所述待传输视频所采用的传输通道，该传输通道包括：所述第一传输通道，和/或所述第二传输通道。
优选地，所述一个或多个视频发送端，还用于获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率，并判断所述第一数据传输速率与所述第二数据传输速率的比值，与预设阈值的大小关系，以及根据所述比值与所述大小关系判定将视频传输到所述视频接收端的传输策略。
优选地，当所述视频发送端为多个时，设置多个视频发送端中的一个为主控发送端，其余为辅控发送端，所述主控发送端，用于控制所述辅控发送端向所述视频接收端传输视频的传输策略。
通过本发明，根据预定条件判定根据两个建立的传输通道中的一个或者两个来传输待传视频的技术手段，解决了相关技术中，在终端到显示设备的视频投射过程中，由于时延而容易出现的视频卡顿以及不流畅问题，进而大大减少了视频投射过程中的延时情况，有效避免了视频卡顿，提高了用户体验度。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1为根据本发明实施例的屏幕投射的视频数据传输方法的流程图；
图2为根据本发明实施例的屏幕投射的视频数据传输装置的结构框图；
图3为根据本发明实施例的屏幕投射的视频数据传输装置的判定模块22的结构框图；
图4为根据本发明实施例的屏幕投射的视频数据传输装置的判定单元224的结构框图；
图5为根据本发明实施例的屏幕投射的视频数据传输装置的另一结构框图；
图6为根据本发明实施例的屏幕投射的视频数据传输装置的结构框图；
图7为根据本发明优选实施例的链路示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
在本发明实施例中，还提供了一种资源请求方法，图1为根据本发明实施例的屏幕投射的视频数据传输方法的流程图，如图1所示，包括以下步骤：
步骤S102，建立与显示装置之间第一传输通道和第二传输通道；
步骤S104，根据预定条件确定待传输视频的传输策略，其中，上述传输策略用于指示通过第一传输通道和/或第二传输通道传输所述待传输视频数据。
通过上述各个步骤，根据预定条件判定根据两个传输通道的一个或者两个来传输待传视频的技术手段，解决了相关技术中，在终端到显示设备的视频投射过程中，由于时延而容易出现的视频卡顿以及不流畅问题，进而有效避免了视频卡顿，提升了视频传输效率，降低屏幕投射过程中终端内容在显示设备上显示存在的延迟，提高了用户体验度。
上述步骤S104可以有多种实现方式，在本发明实施例中，可以通过以下方式实现：获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率；判断第一数据传输速率与第二数据传输速率的比值，与预设阈值的大小关系；根据上述比值与上述大小关系判定传输视频的传输策略。
对于上述“根据上述比值与上述大小关系判定传输视频的传输策略”的技术方案，在本发明实施例中，可以有以下几种情况：
1)在比值大于1(即第一数据传输速率大于第二数据传输速率)，且大小关系指示比值小于或等于预设阈值时，判定在上述第一传输通道上传输视频的图像数据，在上述第二传输通道上传输视频的声音数据；
2)在比值大于1(即第一数据传输速率大于第二数据传输速率)，且大小关系指示比值大于预设阈值时，判定在上述第一传输通道上传输视频的图像数据和声音数据；
3)在比值小于1(即第一数据传输速率小于第二数据传输速率)，且大小关系指示比值小于或等于预设阈值时，判定在上述第一传输通道上传输视频的声音数据，在上述第二传输通道上传输上述视频的图像数据；
4)在比值小于1(即第一数据传输速率小于第二数据传输速率)，且大小关系指示比值大于预设阈值时，判定在上述第二传输通道上传输视频的图像数据和声音数据。
需要说明的是，在上述比值与阈值大小关系相等时，如果有需要也可以在速率较大所对应的传输通道上同时传输图像数据和声音数据，即在比值大于1时，可以在第一传输通道上同时传输图像数据和声音数据，在比值小于1时，可以在第二传输通道上传输图像数据和声音数据。
上述技术方案可以是在传输视频的开始时，也可以是正在传输视频过程中，本发明实施例还强调以下技术方案：按照指定周期获取比值和大小关系；根据获取的当前周期内的上述比值和大小关系调整上述当前周期的下一周期的视频传输策略，也就是说，本发明实施例的技术方案可以实时动态的获取上述比值和大小关系，进而根据上述两个因素来实时调整传输视频的传输策略。
需要说明的是，第一传输通道为视频发送端与视频接收端通过无线保真WiFi直连建立的传输通道，第二传输通道为视频发送端，经第三方设备与视频接收端连接建立的传输通道，第三方设备具备以下能力：中继放大、接收数据、发送数据，即只要具备这三个能力的设备都可以作为本发明实施例的第三方设备，由于WIFI AP环境已经在生活中无处不在，本发明优选选择无线接入点AP作为第三方设备，降低从终端到显示设备的屏幕投射延迟。
综上所述，本发明实施例的上述技术方案可以总结为：在终端(相当于上述实施例的视频发送端)和显示设备(相当于上述实施例的视频接收端)之间传输数据的链路有两条：一条是终端到AP，再到显示设备，一条是终端通过WIFI direct到显示设备，在这两条链路都建立成功后，计算出两条传输数据链路的信噪比(Signal Noise Ratio，简称为SNR)从而计算出数据的传输速率；在一定的时间间隔T内，如果两条链路的最大传输速率比值小于一定的阈值时，选择传输速率较好的一条链路来传图像，另一条来传声音，且在传输构成中可以根据速率动态切换链路来传输图像和声音，由于Miracast技术的媒体传输内容是可以在源设备端将图像和声音进行分开传输，在显示设备端再进行合成，需要说明的是，本发明实施例规定两条链路的最大传输效率的比值小于一定的阈值时，选择一条传输图像，一条传输图像是有必要的，因为如果两条链路的最大传输效率比值如果太大，就会出现对投射的某一屏幕的内容，一条链路的内容早已接收完成，而另一条链路的内容还未发送完成，显示设备端接收到发送完成的内容需要等待未发送完成的内容进行合成后才能同步显示，这样也会导致屏幕投射的延迟。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必需的。
在本实施例中还提供了一种视频传输装置，用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述，下面对该装置中涉及到的模块进行说明。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。图2为根据本发明实施例的屏幕投射的视频数据传输装置的结构框图。如图2所示，该装置包括：
建立模块20，用于建立与显示装置之间的第一传输通道和第二传输通道；
判定模块22，与建立模块20连接，用于根据预定条件确定待传输视频的传输策略，其中，上述传输策略用于指示通过第一传输通道和/或第二传输通道传输所述待传输视频数据。
通过上述各个模块的综合作用，根据预定条件判定根据两个传输通道的一个或者两个来传输待传输视频的技术手段，解决了相关技术中，在终端到显示设备的有效避免了视频卡顿，提升了视频传输效率，降低屏幕投射过程中终端内容在显示设备上显示存在的延迟，提高了用户体验度。
图3为根据本发明实施例的屏幕投射的视频数据传输装置的判定模块22的结构框图，如图3所示，包括：
获取单元220，用于获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率；
判断单元222，与获取单元220连接，用于判断第一数据传输速率与第二数据传输速率的比值，与预设阈值的大小关系；
判定单元224，与判断单元222连接，用于根据比值与大小关系判定传输视频的传输策略。
为了实现上述判定单元224的功能，图4为根据本发明实施例的屏幕投射的视频数据传输装置的判定单元224的结构框图，如图4所示，判定单元224可以包括：第一判定子单元2240，用于在比值大于1，且大小关系指示比值小于或等于预设阈值时，判定在第一传输通道上传输上述视频的图像数据，在第二传输通道上传输上述视频的声音数据；第二判定子单元2242，用于在比值大于1，且上述大小关系指示上述比值大于预设阈值时，判定在第一传输通道上传输上述视频的图像数据和声音数据；第三判定子单元2244，用于在比值小于1，且大小关系指示比值小于或等于预设阈值时，判定在上述第一传输通道上传输上述视频的声音数据，在第二传输通道上传输上述视频的图像数据；第四判定子单元2246，用于在比值小于1，且大小关系指示比值大于预设阈值时，判定在第二传输通道上传输上述视频的图像数据和声音数据。
图5为根据本发明实施例的屏幕投射的视频数据传输装置的另一结构框图，如图5所示，上述装置还包括：获取模块24，用于按照指定周期获取比值和大小关系；调整模块26，与第二获取模块24连接，用于根据获取的当前周期内的比值和大小关系调整上述当前周期的下一周期的视频传输策略。
可选地，获取单元220获取的第一传输通道为视频发送端与视频接收端通过无线保真WiFi直连建立的传输通道，第二传输通道为视频发送端，经第三方设备与视频接收端连接建立的传输通道，上述第三方设备具备以下能力：中继放大、接收数据、发送数据，其中，第三方设备优选为无线热点AP。
在本发明实施例中，还提供了一种视频传输系统，图6为根据本发明实施例的屏幕投射的视频数据传输装置的结构框图，如图6所示，包括：
一个或多个视频发送端60、视频接收端62(可以理解是上述实施例中提及的显示装置)，其中，一个或多个视频发送端60，用于建立与显示装置之间的第一传输通道和第二传输通道，并根据预定条件确定待传输视频的传输策略，其中，上述传输策略用于指示通过第一传输通道和/或第二传输通道传输所述待传输视频数据。
为了更好的确定上述传输策略，本发明实施例中通过以下方式实现，一个或多个视频发送端60通过获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率，并判断第一数据传输速率与上述第二数据传输速率的比值，与预设阈值的大小关系，以及根据上述比值与上述大小关系判定将视频传输到视频接收端62的传输策略。
在一个可选示例中，当视频发送端为多个时，设置多个视频发送端中的一个为主控发送端，其余为辅控发送端，主控发送端，用于控制上述辅控发送端向视频接收端传输视频的传输策略。
也就是说，在本发明实施例中，视频发送端不限于一个，可以是多个，在多个视频发送端上存储同样的内容，在将视频发送端的数据传输到视频接收端(可以理解为是显示设备)时，设定其中的一个视频发送端为主控设备，其余设备为辅控设备，主控设备和辅控设备之间用无线方式连接，用于传递控制信息和响应信息。
多个视频发送端和视频接收端建立连接，建立的链路和下面本发明优选实施例中的链路A和链路B的功能是一致的，实现传输的方式是一致的，本发明实施例在此不再赘述，以下详细介绍。
为了更好的理解上述技术方案，以下结合优选实施例对上述技术方案进行说明。
步骤1.在源设备(相当于上述实施例的视频发送端)和显示设备(相当于上述实施例的视频接收端)之间建立两条传输数据链路，图7为根据本发明优选实施例的链路示意图，如图7所示，A→B链路源设备A和显示设备B之间用WIFI DIRECT连接(相当于上述实施例的第一传输通道)，A→R→B链路源设备A和R连接，R和显示设备B连接(相当于上述实施例的第二传输通道)，这里R是WIFI AP，这里起到中继放大功能。A→R→B链路建立过程：源设备A首先找到环境中的WIFI热点R后，和R进行连接，连接成功后协商获取到R的服务集标识(Service Set Identifier，简称为SSID)和密码信息，通过A→B链路将这些信息传输给显示设备B，B接收到此消息解析后连接到R完成A→R→B的建立。
步骤2.A→B链路和A→R→B链路建立之后，计算出这两条链路的传输速率，具体计算方法为：
A→R信道记为hAR,R→B信道记为hRB,A→B信道记为hAB,
通过A→B链路的接收信号为:
YB＝hABx+w1(x为归一化的发送信号，w1为方差为
Figure GDA0002246139960000081
的高斯噪声)；
接收信噪比(SNR)为：
Figure GDA0002246139960000082
A→R链路上R的接收信号为：
YR＝hARx+w2(x为归一化的发送信号，w2为方差为
Figure GDA0002246139960000083
的高斯噪声)；
中继节点R采用放大转发(R的发射功率为1)的情况下，R的发射信号为：
Figure GDA0002246139960000091
B的接收信号为：
w3是B处的方差为
Figure GDA0002246139960000093
的方差，因此A→R→B等效信道的接收SNR为：
Figure GDA0002246139960000094
其中，假定A→R采用链路1(ch1)，R→B采用ch2，A→B采用链路ch3，在保证链路ch2和ch3正交，ch1和ch2正交(占用不同的频带)的条件下，A→B链路和A→R→B链路的信号互不干扰，因此，如果SNRAB≥SNRARB，A→B链路要好；反之A→R→B链路要好。
特别的,A→B链路传输的最大速率为log(1+SNRAB)b/s/Hz，A→R→B链路传输的最大速率为log(1+SNRARB)b/s/Hz。
步骤3.在获取到两条链路的传输速率之后，在两条链路上动态分别传输音频和图像：
在发送端中有实时计算和监控速率的模块，负责计算和实时监控两条链路的速率。如果在某一个时间段T内，监测到传输图像的链路A(相当于上述实施例的第一传输通道)的速率为S1，传输声音的链路B(相当于上述实施例的第二传输通道)的速率为S2，如果：
S1>S2且S1/S2<N(其中N为预设阈值，具体是速率比值的阈值)，那么在下一个时间段内传输方式不变，用链路A来传输图像，用链路B来传输声音；
S1>S2且S1/S2>N，那么在下一个时间段内，将声音的传输切换到链路A上，图像保持在链路A上传输，链路B为空闲；
S1<S2且S1/S2<N，那么在下一个时间段内，将声音的传输切换到链路A上，将图像的传输切换到链路B上；
S1<S2且S1/S2>N,那么在下一个时间段内，将图像的传输切换到链路B上，声音保持在链路B上传输，链路A空闲。
上述时间段时间T的确定：慢衰落信道场景下，信道在T个符号时间(T近似等于信道相干时间/符号持续时间)上保持不变。因此在T个符号时间上只需测量一次信道得到SNR并计算出传输速率即可。即在T个符号时间上只进行一次切换是可行的。
速率比值阈值N的确定：从源端到接收端的声音和图像的传输速率的比值为N(经验值)，在接收端接收到声音和图像可正常合成，不会存在延迟。
步骤4.接收端接收到来自两条链路的声音和图像，同步图像和声音：
接收端侧采用时间戳来同步图像和声音，在接收端设置一个参考时钟，参考时钟是线性递增的。在传输视频过程中，对每一帧的音频都会携带一个实时传输协议(Real-time Transport Protocol，简称为RTP)时间t，将此时间t计算出相对参考时钟的时间戳，时间戳就是音频在视频播放过程中开始播放的时间。
综上所述，本发明实施例达到了以下技术效果：解决了相关技术中，在终端到显示设备的有效避免了视频卡顿，提升了视频传输效率，降低屏幕投射过程中终端内容在显示设备上显示存在的延迟，提高了用户体验度。
在另外一个实施例中，还提供了一种软件，该软件用于执行上述实施例及优选实施方式中描述的技术方案。
在另外一个实施例中，还提供了一种存储介质，该存储介质中存储有上述软件，该存储介质包括但不限于：光盘、软盘、硬盘、可擦写存储器等。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的对象在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“存储有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (9)

1.一种屏幕投射的视频数据传输方法，其特征在于，包括：
建立与显示装置之间的第一传输通道和第二传输通道；
根据预定条件确定待传输视频数据的传输策略，其中，所述传输策略用于指示通过所述第一传输通道和/或所述第二传输通道传输所述待传输视频数据，根据预定条件确定待传输视频数据的传输策略，包括：
获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率；
判断所述第一数据传输速率与所述第二数据传输速率的比值，与预设阈值的大小关系；
根据所述比值与所述大小关系判定所述传输策略，
其中，根据所述比值与所述大小关系判定传输视频的传输策略，至少包括以下之一：
在所述比值大于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据，在所述第二传输通道上传输所述视频的声音数据；
在所述比值大于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据和声音数据；
在所述比值小于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的声音数据，在所述第二传输通道上传输所述视频的图像数据；
在所述比值小于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第二传输通道上传输所述视频的图像数据和声音数据。
2.根据权利要求1所述的方法，其特征在于，根据所述比值与所述大小关系判定传输视频的传输策略之后，所述方法还包括：
按照指定周期获取所述比值和所述大小关系；
根据获取的当前周期内的所述比值和所述大小关系调整所述当前周期的下一周期的视频传输策略。
3.根据权利要求1或2所述的方法，其特征在于，所述第一传输通道为视频发送端与视频接收端通过无线保真WiFi直连建立的传输通道，所述第二传输通道为所述视频发送端，经第三方设备与所述视频接收端连接建立的传输通道，所述第三方设备至少具备以下能力：接收数据、发送数据。
4.根据权利要求3所述的方法，其特征在于，所述第三方设备包括：无线接入点AP。
5.一种屏幕投射的视频数据传输装置，其特征在于，包括：
建立模块，用于建立与显示装置之间的第一传输通道和第二传输通道；
判定模块，用于根据预定条件确定待传输视频数据的传输策略，其中，所述传输策略用于指示通过所述第一传输通道和/或所述第二传输通道传输所述待传输视频数据，
所述判定模块包括：
获取单元，用于获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率；
判断单元，用于判断所述第一数据传输速率与所述第二数据传输速率的比值，与预设阈值的大小关系；
判定单元，用于根据所述比值与所述大小关系判定传输视频的传输策略；
所述判定单元，包括：
第一判定子单元，用于在所述比值大于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据，在所述第二传输通道上传输所述视频的声音数据；
第二判定子单元，用于在所述比值大于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据和声音数据；
第三判定子单元，用于在所述比值小于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的声音数据，在所述第二传输通道上传输所述视频的图像数据；
第四判定子单元，用于在所述比值小于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第二传输通道上传输所述视频的图像数据和声音数据。
6.根据权利要求5所述的装置，其特征在于，所述装置还包括：
获取模块，用于按照指定周期获取所述比值和所述大小关系；
调整模块，用于根据获取的当前周期内的所述比值和所述大小关系调整所述当前周期的下一周期的视频传输策略。
7.根据权利要求5或6所述的装置，其特征在于，所述获取单元获取的所述第一传输通道为视频发送端与视频接收端通过无线保真WiFi直连建立的传输通道，所述第二传输通道为所述视频发送端，经第三方设备与所述视频接收端连接建立的传输通道，所述第三方设备具备以下能力：中继放大、接收数据、发送数据。
8.一种屏幕投射的视频数据传输系统，其特征在于，包括：一个或多个视频发送端、视频接收端，其中，
所述一个或多个视频发送端，用于建立与显示装置之间的第一传输通道和第二传输通道，并根据预定条件确定待传输视频数据的传输策略，其中，所述传输策略用于指示通过所述第一传输通道和/或所述第二传输通道传输所述待传输视频数据所述一个或多个视频发送端，还用于获取第一传输通道的第一数据传输速率和第二传输通道的第二数据传输速率，并判断所述第一数据传输速率与所述第二数据传输速率的比值，与预设阈值的大小关系，以及根据所述比值与所述大小关系判定将视频传输到所述视频接收端的传输策略，
根据所述比值与大小关系判定传输视频的传输策略，至少包括以下之一：
在所述比值大于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据，在所述第二传输通道上传输所述视频的声音数据；
在所述比值大于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第一传输通道上传输所述视频的图像数据和声音数据；
在所述比值小于1，且所述大小关系指示所述比值小于或等于预设阈值时，判定在所述第一传输通道上传输所述视频的声音数据，在所述第二传输通道上传输所述视频的图像数据；
在所述比值小于1，且所述大小关系指示所述比值大于预设阈值时，判定在所述第二传输通道上传输所述视频的图像数据和声音数据。
9.根据权利要求8所述的系统，其特征在于，当所述视频发送端为多个时，设置多个视频发送端中的一个为主控发送端，其余为辅控发送端，所述主控发送端，用于控制所述辅控发送端向所述视频接收端传输视频的传输策略。
CN201510580127.XA 2015-09-11 2015-09-11 屏幕投射的视频数据传输方法、装置及系统 Active CN106534956B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510580127.XA CN106534956B (zh) 2015-09-11 2015-09-11 屏幕投射的视频数据传输方法、装置及系统
PCT/CN2015/097921 WO2016165375A1 (zh) 2015-09-11 2015-12-18 屏幕投射的视频数据传输方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510580127.XA CN106534956B (zh) 2015-09-11 2015-09-11 屏幕投射的视频数据传输方法、装置及系统

Publications (2)

Publication Number Publication Date
CN106534956A CN106534956A (zh) 2017-03-22
CN106534956B true CN106534956B (zh) 2020-02-18

Family

ID=57125691

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510580127.XA Active CN106534956B (zh) 2015-09-11 2015-09-11 屏幕投射的视频数据传输方法、装置及系统

Country Status (2)

Country Link
CN (1) CN106534956B (zh)
WO (1) WO2016165375A1 (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106559687A (zh) * 2016-11-11 2017-04-05 努比亚技术有限公司 移动终端和数据传输方法
CN108574780A (zh) * 2018-05-02 2018-09-25 Oppo广东移动通信有限公司 网络功能的管理方法、装置、存储介质及智能终端
CN108712280B (zh) * 2018-05-02 2020-12-04 Oppo广东移动通信有限公司 一种网络功能的管理方法、装置、存储介质及智能终端
CN108881844B (zh) * 2018-07-06 2021-06-22 杭州涂鸦信息技术有限公司 一种局域网视频传输方法
CN113727143A (zh) * 2018-08-30 2021-11-30 华为技术有限公司 视频投屏方法、装置、计算机设备及存储介质
CN109996097B (zh) * 2019-03-12 2022-01-04 广州虎牙信息科技有限公司 一种投屏方法、系统及存储装置
CN110312094B (zh) * 2019-05-24 2021-10-15 深圳市朗强科技有限公司 信号接收装置、信号输出控制系统及信号输出控制方法
CN110865782B (zh) * 2019-09-29 2024-01-30 华为终端有限公司 数据传输方法、装置及设备
CN111542133B (zh) * 2020-06-18 2023-05-09 茂佳科技(广东)有限公司 信息传输方法、系统、接收装置、发送装置及存储介质
CN114189946A (zh) * 2020-09-15 2022-03-15 华为技术有限公司 数据分享的方法、电子设备和系统
CN114253493A (zh) * 2020-09-24 2022-03-29 北京字节跳动网络技术有限公司 投影设备及其显示控制方法、移动终端及存储介质
CN112423105B (zh) * 2020-10-27 2024-03-15 深圳Tcl新技术有限公司 数据传输方法、设备及介质
CN112672203B (zh) * 2020-12-16 2023-05-23 努比亚技术有限公司 文件传输控制方法、移动终端及计算机可读存储介质
CN114697733B (zh) * 2020-12-31 2023-06-06 华为技术有限公司 投屏音视频数据的传输方法以及相关设备
CN112888055B (zh) * 2021-02-02 2023-08-22 维沃移动通信有限公司 Wi-Fi上行数据发送方法、装置、电子设备及存储介质
CN113301299B (zh) * 2021-05-06 2023-03-28 厦门市思芯微科技有限公司 一种多通道视频传输方法、系统、终端以及存储介质
CN113473242B (zh) * 2021-06-18 2023-08-01 深圳市炬力北方微电子有限公司 视频影像传输方法、相关系统、设备及存储介质
CN113923508A (zh) * 2021-09-29 2022-01-11 联想(北京)有限公司 一种投屏方法及装置
CN114286194B (zh) * 2021-12-08 2024-05-03 北京金山云网络技术有限公司 即时通信视频的处理方法、装置、电子设备及存储介质
CN115052119B (zh) * 2022-08-16 2022-11-25 深圳市品为科技有限公司 Vga视频延长器
CN117062252B (zh) * 2023-10-12 2024-03-15 荣耀终端有限公司 一种数据传输方法及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102917406A (zh) * 2012-08-02 2013-02-06 华为技术有限公司 数据流量分流方法和设备
CN103369718A (zh) * 2012-03-01 2013-10-23 宏达国际电子股份有限公司 多媒体数据分配系统及其操作方法
CN104052788A (zh) * 2013-03-12 2014-09-17 三星电子株式会社 用于共享内容的方法和设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080240146A1 (en) * 2007-03-27 2008-10-02 Harkirat Singh System and method for wireless communication of uncompressed video having data transmission on a secondary low rate channel

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103369718A (zh) * 2012-03-01 2013-10-23 宏达国际电子股份有限公司 多媒体数据分配系统及其操作方法
CN102917406A (zh) * 2012-08-02 2013-02-06 华为技术有限公司 数据流量分流方法和设备
CN104052788A (zh) * 2013-03-12 2014-09-17 三星电子株式会社 用于共享内容的方法和设备

Also Published As

Publication number Publication date
WO2016165375A1 (zh) 2016-10-20
CN106534956A (zh) 2017-03-22

Similar Documents

Publication Publication Date Title
CN106534956B (zh) 屏幕投射的视频数据传输方法、装置及系统
JP6977090B2 (ja) 信頼できる通信のための冗長リンク
US10206084B2 (en) Power-efficient, balanced, and reliable true wireless bluetooth stereo audio solution
JP4547832B2 (ja) 無線ｌａｎシステムおよびその通信方法
JP4829049B2 (ja) 無線通信方法及び無線基地局
KR102026961B1 (ko) 무선 네트워크에서 단말의 신호 전송시점을 조정하는 방법 및 장치
JP2005341586A (ja) データ・パケット通信におけるオーバヘッドを減らす方法
US11405167B2 (en) BWP frequency hopping configuration method, network device and terminal
JP2005065302A (ja) 無線通信システムの機能強化されたコール回復
JP2008078891A (ja) 移動通信端末、移動通信システム、基地局及び通信方法
CN110943977B (zh) 多媒体业务数据传输方法、服务端、设备及存储介质
JP2010109504A (ja) 無線通信システム、無線通信方法、無線通信端末装置、中継装置、並びに、中継システム
CN113347679B (zh) 一种数据传输方法、装置、存储介质及电子装置
CN109691172A (zh) 传输信息的方法和设备
US20210014855A1 (en) Uplink control information transmission method and device
CN108702766A (zh) 通信方法、网络设备和终端设备
JP2018007171A (ja) 通信装置、及び無線リソース割当方法
WO2018028675A1 (zh) 随机接入信号配置方法、装置、设备、系统和存储介质
US10425975B1 (en) Method for selecting a device to act as a relay device between a first and a second node based on received signal quality measurements
US8774161B2 (en) Coordinated integration of secondary wireless communication terminals into a primary wireless communication network
US8442014B2 (en) Wireless base station apparatus and wireless communication method
JP4014950B2 (ja) 無線通信システムおよび通信方法
US9655104B1 (en) Carrier aggregation scheduling based reordering density
US10667137B2 (en) Method and apparatus for providing contents in communication system
CN111615170B (zh) 一种数据传输方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant