CN112911383A

CN112911383A - 一种局域网下多路投屏方法、设备及系统

Info

Publication number: CN112911383A
Application number: CN202110071182.1A
Authority: CN
Inventors: 李凌; 陈锡华
Original assignee: Shenzhen Happycast Technology Co Ltd
Current assignee: Shenzhen Happycast Technology Co Ltd
Priority date: 2021-01-19
Filing date: 2021-01-19
Publication date: 2021-06-04

Abstract

本发明公开了一种局域网下多路投屏方法、设备及系统，该方法包括以下步骤：向投屏终端设备发送投屏请求信息；接收投屏终端设备的多路投屏协商请求；与其他投屏前端设备进行协商以确定视频合成方，若自身为视频合成方，则接收并解码其他投屏前端设备的投屏数据后，将其与自身投屏数据合成后编码发送给投屏终端设备。其将多路视频合成步骤下放到投屏前端或者投屏中间设备，投屏终端设备接收数据是合成后且自身支持的的视频数据，不需要对投屏终端进行硬件改造或软件升级，降低改造成本。

Description

一种局域网下多路投屏方法、设备及系统

技术领域

本发明属于设备投屏技术领域，具体地涉及一种局域网下多路投屏方法、设备及系统。

背景技术

无线投屏技术也叫无线同屏、飞屏、屏幕共享，即将需投屏的前端设备的画面投放到被投屏终端设备中进行显示的技术。一对一实现无线投屏只需一投屏前端设备和一投屏终端设备之间处于无线连接，具有相同投屏协议即可实现屏幕共享。随着技术的发展和人们生活需求的提高，多路投屏即一对多的需求逐渐进入人们的视野。在进行多路投屏时，很多投屏终端由于解码能力的限制导致不支持多路投屏，以电视为例，由于电视的配置较低，其解码能力较差，或者即使其支持多路投屏，也需要先进行软件升级，对投屏终端的改造成本高。

发明内容

为了解决现有投屏终端设备解码能力低下或者软件问题导致的不能支持多路投屏的问题，本发明提供一种局域网下多路投屏方法、设备及系统，其将多路视频合成步骤下放到投屏前端或者投屏中间设备，投屏终端设备接收数据是合成后且自身支持的的视频数据，不需要对投屏终端进行硬件改造或软件升级，降低改造成本。

本发明通过以下技术方案实现：

一种局域网下多路投屏方法，该方法适于投屏前端设备，包括以下步骤：

发送投屏请求信息，所述投屏请求信息中包含自身视频合成能力、投屏请求；

接收多路投屏决策信息，所述多路投屏决策信息包括视频合成方信息；

若自身为视频合成方，则接收并解码其他投屏前端设备的投屏数据后，将其与自身投屏数据合成后编码发送给投屏终端设备；若自身不是视频合成方，则将投屏信息编码后发送给对应视频合成方。

本方法通过在多路投屏时将视频合成下放到投屏前端，具体的，在发送投屏请求时即将投屏请求和自身的视频合成能力，投屏终端设备在接收到该信号后，根据当前接入投屏前端数量决定合成动作进行与否，若当前接入的数量超过1 个，则需要进行视频合成，此时，需要进行视频合成方的选择决策，该决策者优选的为投屏终端设备，当然，也可以是其他设备，譬如参与投屏的投屏前端设备；投屏前端设备接收到多路投屏决策信息后进行相应操作，若自身是多路投屏决策信息自身为视频合成方，则接收并解码其他投屏前端设备的投屏数据后，将其与自身投屏数据合成后编码发送给投屏终端设备；若自身不是视频合成方，则将投屏信息编码后发送给对应视频合成方。采用该方法，多路视频最终被视频合成方解码、合成、编码成投屏终端设备支持的视频信息，实现多路投屏，不需要对投屏终端进行硬件改造或软件升级，仅需对投屏前端设备进行软件升级即可，降低改造成本。

一种局域网下多路投屏方法，该方法适于投屏终端设备，包括以下步骤：

接收投屏前端设备的投屏请求信息，该投屏请求信息中包含投屏请求和对应投屏前端设备的视频合成能力；

判断当前需投屏前端设备数量，若当前仅有一需投屏前端设备，则接收其投屏数据并显示；若当前需投屏前端设备超过一个，则进行多路投屏决策以选择一具有视频合成能力的投屏前端设备作为视频合成方，并将视频合成方信息发送给需投屏前端设备；

接收视频合成方合成的投屏数据并显示。

本方法的投屏终端设备作为一视频合成方决策者，在收到投屏请求信息时，根据当前接入投屏前端设备数量、投屏前端设备的视频合成能力，选择一具有视频合成能力的投屏前端设备作为视频合成方，并接收该视频合成方的合成投屏数据实现一路变多路投屏。采用该方法，不需要对投屏终端进行硬件改造或软件升级，仅需对投屏前端设备进行软件升级即可，降低改造成本。

一种局域网下多路投屏方法，该方法适于投屏中间设备，包括以下步骤：

获取投屏请求信息；

判断投屏请求路数；

在投屏请求路数大于等于两时，接收各投屏前端设备的投屏数据并解码、合成、编码后发送给投屏终端设备。

本方案的方法通过在多路投屏时将视频合成下放到投屏中间设备，投屏中间设备在接收到投屏请求时，判断当前投屏请求的路数，若大于等于2时，则对接收到的投屏前端设备的数据进行解码、合成、编码后再发送给投屏终端设备，实现多路投屏。采用该方法，不需要对投屏终端进行硬件改造或软件升级，仅需对投屏前端设备进行软件升级即可，降低改造成本。

一种局域网下多路投屏设备，该设备为投屏前端设备，包括：

用于与外部设备实现信息交互的第一数据收发模块，该信息交互包括发送投屏请求信息、收发投屏数据、接收多路投屏决策信息，所述投屏请求信息包括自身视频合成能力、投屏请求，所述多路投屏决策信息包括视频合成方信息，所述第一数据收发模块根据多路投屏决策信息接收投屏数据；

对投屏数据进行编码的第一编码器；

对接收的投屏数据进行解码的第一解码器；

合成多路解码后的数据的第一视频合成模块。

该投屏前端设备的第一数据收发模块实现与外部设备的信息交互，发起投屏时，向投屏终端发送投屏请求信息，投屏终端设备收到多路请求后，根据投屏请求信息确定视频合成方，该设备收到该包含有视频合成方信息数据后，若自身不是视频合作方，则将投屏数据发送给视频合成方，若自身即视频合成方，则接收其他投屏前端设备的投屏数据，第一解码器对接收到投屏数据进行解码后发送给第一视频合成模块合成，第一编码器对合成后的数据进行编码并经第一数据收发模块发送给投屏终端设备实现多路投屏。该设备可实现多路视频数据的合成，投屏终端设备仅需解码后显示即可，不需要对投屏终端进行硬件改造或软件升级。

一种局域网下多路投屏系统，包括多个上述的投屏设备、与该投屏设备处于同一局域网下的投屏终端设备。

一种局域网下多路投屏设备，该设备为投屏中间设备，包括：

用于与外部设备实现信息交互的第二数据收发模块，该信息交互包括收发投屏请求信息、收发投屏数据；

对投屏数据进行编码的第二编码器；

对投屏数据进行解码的第二解码器；

判定投屏请求路数的判定模块；

根据判定模块的结果合成多路解码后的数据的第二视频合成模块。

本方案的投屏设备为投屏中间设备，其实现投屏前端设备和投屏终端设备之间的信息交互，接收到投屏前端发起的投屏请求信息时，判定模块判定当前投屏请求的路数，当投屏路数超过1路时，第二视频合成模块对多个视频前端发送的解码后的投屏数据进行合成并发送给第二编码器编码后发送给投屏终端设备。该设备可实现多路视频数据的合成，即在投屏终端设备处理前进行多路视频合成，投屏终端设备仅需解码后显示即可，不需要对投屏终端进行硬件改造或软件升级。

一种局域网下多路投屏系统，包括多个投屏前端设备、投屏终端设备和上述的实现所述投屏前端设备、所述投屏终端设备信息交互的投屏设备，该投屏设备即投屏中间设备。

本发明与现有技术相比，至少具有以下优点和有益效果：

1、本方案的方法、设备及系统通过将视频合成下放到投屏中间设备或者投屏前端设备，即在投屏终端设备处理前进行视频合成，投屏终端设备仅需解码后显示即可，不需要对投屏终端进行硬件改造或软件升级，减小投屏终端的改造成本。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明投屏前端设备的一方法的流程图。

图2是本发明的具体方法流程图。

图3是发明投屏前端设备及系统的一原理框图。

图4是本发明另一方法的流程图。

图5是发明投屏前端设备及系统的另一原理框图。

具体实施方式

下面结合附图及具体实施例来对本发明作进一步阐述。在此需要说明的是，对于这些实施例方式的说明虽然是用于帮助理解本发明，但并不构成对本发明的限定。本文公开的特定结构和功能细节仅用于描述本发明的示例实施例。然而，可用很多备选的形式来体现本发明，并且不应当理解为本发明限制在本文阐述的实施例中。

应当理解，尽管本文可能使用术语第一、第二等等来描述各种单元，但是这些单元不应当受到这些术语的限制。这些术语仅用于区分一个单元和另一个单元。例如可以将第一单元称作第二单元,并且类似地可以将第二单元称作第一单元，同时不脱离本发明的示例实施例的范围。

应当理解，对于本文中可能出现的术语“和/或”，其仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在 A，单独存在B，同时存在A和B三种情况；对于本文中可能出现的术语“/和”，其是描述另一种关联对象关系，表示可以存在两种关系，例如，A/和B，可以表示：单独存在A，单独存在A和B两种情况；另外，对于本文中可能出现的字符“/”，一般表示前后关联对象是一种“或”关系。

应当理解，在本文中若将单元称作与另一个单元“连接”、“相连”或“耦合”时，它可以与另一个单元直相连接或耦合，或中间单元可以存在。相対地，在本文中若将单元称作与另一个单元“直接相连”或“直接耦合”时，表示不存在中间单元。另外，应当以类似方式来解释用于描述单元之间的关系的其他单词(例如，“在……之间”对“直接在……之间”,“相邻”对“直接相邻”等等)。

应当理解，本文使用的术语仅用于描述特定实施例，并不意在限制本发明的示例实施例。若本文所使用的，单数形式“一”、“一个”以及“该”意在包括复数形式，除非上下文明确指示相反意思。还应当理解，若术语“包括”、“包括了”、“包含”和/或“包含了”在本文中被使用时,指定所声明的特征、整数、步骤、操作、单元和/或组件的存在性,并且不排除一个或多个其他特征、数量、步骤、操作、单元、组件和/或他们的组合存在性或增加。

应当理解，还应当注意到在一些备选可能设计中，所出现的功能/动作可能与附图出现的顺序不同。例如,取决于所涉及的功能/动作,实际上可以实质上并发地执行,或者有时可以以相反的顺序来执行连续示出的两个图。

应当理解，在下面的描述中提供了特定的细节,以便于对示例实施例的完全理解。然而,本领域普通技术人员应当理解可以在没有这些特定细节的情况下实现示例实施例。例如可以在框图中示出系统，以避免用不必要的细节来使得示例不清楚。在其他实例中，可以不以非必要的细节来示出众所周知的过程、结构和技术，以避免使得示例实施例不清楚。

实施例1

本实施例公开一种局域网下多路投屏方法，该方法适于投屏前端设备。投屏前端设备与投屏终端直接进行投屏信息交互。如图1所示，该方法包括以下步骤：

投屏前端设备向投屏终端设备发送投屏请求信息，该投屏请求信息中包含自身视频合成能力、投屏请求。此时，若投屏终端设备仅有一路投屏，其可直接进行投屏操作；若投屏终端设备当前已有一路或者多路投屏，则进行多路投屏决策操作。多路投屏决策可直接由投屏终端设备完成，则可由参与投屏的所有投屏前端设备协商完成。多路投屏决策操作后形成包含有视频合成方信息的多路投屏决策信息。

各投屏前端设备接收到该多路投屏决策信息，根据多路投屏决策信息进行相应操作，具体的，若自身为视频合成方，则接收并解码其他投屏前端设备的投屏数据后，将其与自身投屏数据合成、编码后发送给投屏终端设备；若自身不是视频合成方，则将投屏信息编码后发送给对应视频合成方。

现以3对1即该系统包括A、B、C 3个投屏前端设备和1个投屏终端设备为例对本方案的方法进行详细说明，其中，A、B、C依次向投屏终端发起投屏请求，如图2所示。

A设备向投屏终端设备D发起投屏请求，D接收包含有A设备视频合成能力、投屏请求的投屏请求数据，当前仅一路投屏，D接收投屏数据并显示。

B再向投屏终端设备D发起投屏请求，该投屏请求数据中包含B设备视频合成能力、投屏请求，D不能支持多路解码，此时，当前有2路投屏，投屏终端设备D根据A设备视频合成能力、B设备视频合成能力选择一设备作为视频合成方，假设A不具有视频合成能力，B具有视频合成能力，则将B作为视频合成方，并将包含有视频合成方为B设备的多路投屏决策信息发送给A、B，A接收该决策信息后，将投屏信息编码后发送给B；B接收该决策信息后，接收并解码A的投屏数据后，将其与自身投屏数据合成、编码后发送给D；D接收合成后的投屏数据并显示。具体的，B可采用yuv数据的合成方法对视频数据进行合成，具体的，依次对对图像进行缩放、拼接。以4个1080p的图像合成1080p的图像为例进行说明：先将每一个图像缩放到960x540大小,让后拼成一个1080p。

C再向投屏终端设备D发起投屏请求，该投屏请求数据中包含C设备视频合成能力、投屏请求，此时，当前有3路投屏，投屏终端设备D根据A设备视频合成能力、B设备视频合成能力、C设备视频合成能力选择一设备作为视频合成方，假设C具有视频合成能力，则随机选择B或者C作为视频合成方，譬如，继续将 B作为视频合成方，随后并将包含有视频合成方为B设备的多路投屏决策信息发送给A、B、C，A接收该决策信息后，将投屏信息编码后发送给B；C接收该决策信息后，将投屏信息编码后发送给B；B接收该决策信息后，接收并解码A、C 的投屏数据后，将其与自身投屏数据合成、编码后发送给D；D接收合成后的投屏数据并显示。

要实现上述方法其涉及投屏前端设备和投屏终端设备，具体的，投屏前端设备其可基于现有的智能设备完成，如图3所示，该智能设备包括第一数据收发模块、第一编码器、第一解码器、第一视频合成模块。第一数据收发模块用于与外部设备实现信息交互，该信息交互包括发送上述的投屏请求信息、收发投屏数据、接收上述的多路投屏决策信息；第一编码器用于对投屏数据进行编码；第一解码器用于对投屏数据进行解码；第一视频合成模块合成多路解码后的数据。上述各模块的运行先后顺序根据上述方法进行即可。

实施例2

实施例1的方法适于投屏前端设备直接与投屏终端设备进行通信，但是，有些应用场景是有一投屏中间设备，即投屏中间设备实现投屏前端设备与投屏终端设备的信息交互。

在此应用场景下，本实施例公开一种局域网下多路投屏方法，该方法适于投屏中间设备中。投屏前端和投屏终端采取的数据处理方式与现有方法相同即可，如图4所示，具体的该方法包括以下步骤：

投屏前端向投屏中间设备发送投屏请求信息；

投屏中间设备获取该投屏请求信息后判断投屏请求路数，若当前无投屏，则将该投屏请求发送给投屏终端设备并正常投屏；若当前已有投屏，即此时的投屏请求路数大于等于两，则接收各投屏前端设备的投屏数据并依次解码、合成、编码后发送给投屏终端设备进行投屏显示。

同样现以3对1即该系统包括A、B、C 3个投屏前端设备和1个投屏终端设备为例对本方案的方法进行详细说明，其中，A、B、C依次向投屏终端发起投屏请求。

A设备向投屏中间设备E发起投屏请求，投屏中间设备E转发该请求，投屏终端设备D接收投屏数据并显示。

B再向投屏中间设备E发起投屏请求，投屏中间设备E判定当前已有投屏，则对接收到的A、B数据进行解码、合成、编码并发送给投屏终端设备D。

C再向投屏中间设备E发起投屏请求，投屏中间设备E判定当前已有投屏，则对接收到的A、B、C数据进行解码、合成、编码并发送给投屏终端设备D。同样的，E可采用yuv数据的合成方法对视频数据进行合成，即依次对对图像进行缩放、拼接。

对此，要实现上述方法，如图5所示，本方案中的投屏中间设备包括第二数据收发模块、第二编码器、第二解码器、判定模块、第二视频合成模块。第二数据收发模块用于与外部设备实现信息交互，该信息交互包括收发投屏请求信息、收发投屏数据；第二编码器用于对投屏数据进行编码；第二解码器用于对投屏数据进行解码；判定模块判定投屏请求路数；第二视频合成模块根据判定模块的结果合成多路解码后的数据。上述各模块的运行先后顺序根据本实施例的方法进行即可。

以上所描述的实施例仅仅是示意性的，若涉及到作为分离部件说明的单元，其可以是或者也可以不是物理上分开的；若涉及到作为单元显示的部件，其可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。

以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换。而这些修改或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围。

最后应说明的是，本发明不局限于上述可选的实施方式，任何人在本发明的启示下都可得出其他各种形式的产品。上述具体实施方式不应理解成对本发明的保护范围的限制，本发明的保护范围应当以权利要求书中界定的为准，并且说明书可以用于解释权利要求书。

Claims

1.一种局域网下多路投屏方法，其特征在于，该方法适于投屏前端设备，包括以下步骤：

2.根据权利要求1所述的一种局域网下多路投屏方法，其特征在于，所述合成的方法为：

对图像进行缩放；

拼接图像。

3.根据权利要求1所述的一种局域网下多路投屏方法，其特征在于，所述多路投屏决策信息由投屏终端设备决定。

4.一种局域网下多路投屏方法，其特征在于，该方法适于投屏终端设备，包括以下步骤：

接收视频合成方合成的投屏数据并显示。

5.一种局域网下多路投屏方法，其特征在于，该方法适于投屏中间设备，包括以下步骤：

获取投屏请求信息；

判断投屏请求路数；

6.根据权利要求4所述的一种局域网下多路投屏方法，其特征在于，所述合成的方法为：

对图像进行缩放；

拼接图像。

7.一种局域网下多路投屏设备，其特征在于，包括：

对投屏数据进行编码的第一编码器；

对接收的投屏数据进行解码的第一解码器；

合成多路解码后的数据的第一视频合成模块。

8.一种局域网下多路投屏设备，其特征在于，包括：

对投屏数据进行编码的第二编码器；

对投屏数据进行解码的第二解码器；

判定投屏请求路数的判定模块；

9.一种局域网下多路投屏系统，其特征在于，包括多个权利要求7所述的投屏设备、与该投屏设备处于同一局域网下的投屏终端设备。

10.一种局域网下多路投屏系统，其特征在于，包括多个投屏前端设备、投屏终端设备和权利要求8所述的实现所述投屏前端设备、所述投屏终端设备信息交互的投屏设备。