CN107783741A - 控制多个移动终端屏幕拼接显示的方法、装置及移动终端 - Google Patents

Abstract

本发明公开了一种控制多个移动终端屏幕拼接显示的方法、装置及移动终端，其中，该方法包括：建立多个移动终端中的主控移动终端与各个从属移动终端间的连接；根据用户预置的多个移动终端的摆放位置建立以多个移动终端中的任一移动终端为原点的平面直角坐标系，并确定多个移动终端分别在平面直角坐标系中的显示位置；根据显示位置在多个移动终端上分别显示待显示的内容的一部分，以在多个移动终端上得到整个显示内容。本发明实现过程只需要建立平面直角坐标系，并将摆放好的各个终端与平面直角坐标系建立连接，就可以根据各个终端在平面直角坐标系中的位置来显示对应的内容，操作过程简单，解决了现有技术的问题。

Description

控制多个移动终端屏幕拼接显示的方法、装置及移动终端

技术领域

本发明涉及移动通讯领域，特别是涉及一种控制多个移动终端屏幕拼接显示的方法、装置及移动终端。

背景技术

一方面，手机、平板电脑等移动终端目前已经成为普通人的日常用品，相对于昂贵而笨重的大屏幕显示器，移动终端作为人们日常随身携带的物品，非常方便使用，因此，多屏拼接技术成为当下移动终端技术领域的一个热门研究方向。另一方面，人们的移动终端更新换代比较快，多屏拼接使得淘汰下来的移动终端有了新用途。当下的移动终端大多具备前置摄像头，随着双摄像头技术的推广，未来越来越多的移动终端支持双前置摄像头，将双前置摄像头用于多屏拼接，可以提高多屏拼接中各终端屏幕定位的准确性。

然而，现有技术对于多个移动终端屏幕拼接进行显示时，需要每个移动终端从不同的角度获取含完整标定物的图像至少5张，操作繁琐，用户体验较低。

发明内容

本发明提供一种控制多个移动终端屏幕拼接显示的方法、装置及移动终端，用以解决现有技术的如下问题：对于多个移动终端屏幕拼接进行显示时，需要每个移动终端从不同的角度获取含完整标定物的图像至少5张，操作繁琐，用户体验较低。

为解决上述技术问题，一方面，本发明提供一种控制多个移动终端屏幕拼接显示的方法，包括：建立多个移动终端中的主控移动终端与各个从属移动终端间的连接；根据用户预置的所述多个移动终端的摆放位置建立以所述多个移动终端中的任一移动终端为原点的平面直角坐标系，并确定所述多个移动终端分别在所述平面直角坐标系中的显示位置；根据所述显示位置在所述多个移动终端上分别显示待显示的内容的一部分，以在所述多个移动终端上得到整个显示内容。

进一步，根据用户预置的所述多个移动终端的摆放位置建立以所述多个移动终端中的任一移动终端为原点的平面直角坐标系，包括：所述主控移动终端在所述多个移动终端中选择一个移动终端作为平面直角坐标系的原点所在移动终端；所述主控移动终端设置所述原点所在移动终端中的左右两个前置摄像头中的任一个摄像头、或者屏幕四个顶点中的任一个顶点作为原点，设置所述原点的任一延伸方向为所述平面直角坐标系的X轴正方向，并基于所述X轴正方向建立Y轴正方向，以建立所述平面直角坐标系。

进一步，确定所述多个移动终端分别在所述平面直角坐标系中的显示位置，包括：所述主控移动终端分别接收所述多个移动终端基于预置待拍摄的参考点确定的所述多个移动终端各自的空间坐标，其中，所述空间坐标包括：左右两个前置摄像头分别相对于所述参考点的空间坐标、以及屏幕四个顶点分别相对于所述参考点的空间坐标，所述参考点的设置满足以下条件：所述多个移动终端的左右两个前置摄像头均能拍摄到；所述主控移动终端根据所述原点所在移动终端与所述参考点的空间坐标，确定所述参考点在所述平面直角坐标系中的平面坐标；所述主控移动终端基于所述平面坐标，确定除所述原点所在移动终端之外的其他各个移动终端的平面坐标，以将多个平面坐标作为所述多个移动终端的显示位置。

进一步，所述主控移动终端分别接收所述多个移动终端基于预置待拍摄的参考点确定的所述多个移动终端各自的空间坐标之前，还包括：各个移动终端均触发左右两个前置摄像头对所述参考点进行拍摄，以根据双摄像头测距原理确定各个移动终端左右两个前置摄像头分别相对于所述参考点的空间坐标；各个移动终端均根据所述左右两个前置摄像头与屏幕的位置关系结构图确定各个移动终端屏幕四个顶点分别相对于所述参考点的空间坐标；各个移动终端均将所述左右两个前置摄像头分别相对于所述参考点的空间坐标、以及所述屏幕四个顶点分别相对于所述参考点的空间坐标发送至所述主控移动终端。

进一步，根据所述显示位置在所述多个移动终端上分别显示待显示的内容的一部分，以在所述多个移动终端上得到整个显示内容，包括：所述主控移动终端根据所述多个移动终端各自屏幕的分辨率确定分配给各个移动终端的待显示的内容部分；所述主控移动终端将确定的各个移动终端的待显示的内容部分按照所述显示位置发送至各个移动终端，以在所述多个移动终端上得到整个显示内容。

进一步，建立多个移动终端中的主控移动终端与各个从属移动终端间的连接之前，还包括：所述主控移动终端分别设置所述多个移动终端的摄像参数，其中，所述摄像参数包括：左右两个前置摄像头之间的距离、左右两个前置摄像头的焦距、左右两个前置摄像头与屏幕的位置关系结构图。

进一步，根据所述显示位置在所述多个移动终端上分别显示待显示的内容的一部分之前，还包括：所述主控移动终端接收用户调整显示内容的触发指令，以根据所述触发指令调整显示内容分别在所述多个移动终端上的显示比例。

另一方面，本发明还提供一种控制多个移动终端屏幕拼接显示的装置，包括：连接模块，用于建立多个移动终端中的主控移动终端与各个从属移动终端间的连接；执行模块，用于根据用户预置的所述多个移动终端的摆放位置建立以所述多个移动终端中的任一移动终端为原点的平面直角坐标系，并确定所述多个移动终端分别在所述平面直角坐标系中的显示位置；显示模块，用于根据所述显示位置在所述多个移动终端上分别显示待显示的内容的一部分，以在所述多个移动终端上得到整个显示内容。

进一步，所述执行模块包括：选择单元，用于在所述多个移动终端中选择一个移动终端作为平面直角坐标系的原点所在移动终端；建立单元，用于设置所述原点所在移动终端中的左右两个前置摄像头中的任一个摄像头、或者屏幕四个顶点中的任一个顶点作为原点，设置所述原点的任一延伸方向为所述平面直角坐标系的X轴正方向，并基于所述X轴正方向建立Y轴正方向，以建立所述平面直角坐标系。

进一步，所述执行模块包括：接收单元，用于分别接收所述多个移动终端基于预置待拍摄的参考点确定的所述多个移动终端各自的空间坐标，其中，所述空间坐标包括：左右两个前置摄像头分别相对于所述参考点的空间坐标、以及屏幕四个顶点分别相对于所述参考点的空间坐标，所述参考点的设置满足以下条件：所述多个移动终端的左右两个前置摄像头均能拍摄到；平面坐标确定单元，用于根据所述原点所在移动终端与所述参考点的空间坐标，确定所述参考点在所述平面直角坐标系中的平面坐标；基于所述平面坐标，确定除所述原点所在移动终端之外的其他各个移动终端的平面坐标，以将多个平面坐标作为所述多个移动终端的显示位置。

进一步，所述执行模块还包括：拍摄单元，用于触发左右两个前置摄像头对所述参考点进行拍摄，以根据双摄像头测距原理确定当前移动终端左右两个前置摄像头分别相对于所述参考点的空间坐标；空间坐标确定单元，用于根据所述左右两个前置摄像头与屏幕的位置关系结构图确定当前移动终端屏幕四个顶点分别相对于所述参考点的空间坐标；空间坐标发送单元，用于将所述左右两个前置摄像头分别相对于所述参考点的空间坐标、以及所述屏幕四个顶点分别相对于所述参考点的空间坐标发送至所述主控移动终端。

进一步，所述显示模块包括：显示内容确定单元，用于根据所述多个移动终端各自屏幕的分辨率确定分配给各个移动终端的待显示的内容部分；显示内容发送单元，用于将确定的各个移动终端的待显示的内容部分按照所述显示位置发送至各个移动终端，以在所述多个移动终端上得到整个显示内容。

进一步，所述装置还包括：设置模块，用于分别设置所述多个移动终端的摄像参数，其中，所述摄像参数包括：左右两个前置摄像头之间的距离、左右两个前置摄像头的焦距、左右两个前置摄像头与屏幕的位置关系结构图。

进一步，所述装置还包括：调整模块，用于接收用户调整显示内容的触发指令，以根据所述触发指令调整显示内容分别在所述多个移动终端上的显示比例。

另一方面，本发明还提供一种移动终端，包括：上述的控制多个移动终端屏幕拼接显示的装置。

本发明在在主控移动终端和从属移动终端建立连接后，以任一个移动终端为原心，根据各个移动终端的摆放位置来建立平面直角坐标系，以确定各个移动终端的显示位置，并根据该显示位置来分配各个终端的显示内容，该过程只需要建立平面直角坐标系，并将摆放好的各个终端与平面直角坐标系建立连接，就可以根据各个终端在平面直角坐标系中的位置来显示对应的内容，操作过程简单，解决了现有技术的多个移动终端屏幕拼接进行显示时，操作繁琐及用户体验较低的问题。

附图说明

图1是本发明第一实施例中控制多个移动终端屏幕拼接显示的方法的流程图；

图2是本发明第三实施例中控制多个移动终端屏幕拼接显示的装置的结构示意图；

图3是本发明第四实施例中控制多个移动终端屏幕拼接显示的装置的结构示意图；

图4是本发明第四实施例中控制多个移动终端屏幕拼接显示的装置执行模块的第一结构示意图；

图5是本发明第四实施例中控制多个移动终端屏幕拼接显示的装置执行模块的第二结构示意图；

图6是本发明第四实施例中控制多个移动终端屏幕拼接显示的装置显示模块的第二结构示意图；

图7是本发明第六实施例中主控移动终端的结构示意图；

图8是本发明第六实施例中显示地图的示意图。

具体实施方式

为了解决现有技术的如下问题：现有技术对于多个移动终端屏幕拼接进行显示时，需要每个移动终端从不同的角度获取含完整标定物的图像至少5张，操作繁琐，用户体验较低；本发明提供了一种控制多个移动终端屏幕拼接显示的方法、装置及移动终端，以下结合附图以及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不限定本发明。

本发明第一实施例提供了一种控制多个移动终端屏幕拼接显示的方法，该方法的流程如图1所示，包括步骤S102至S106：

S102，建立多个移动终端中的主控移动终端与各个从属移动终端间的连接；

S104，根据用户预置的多个移动终端的摆放位置建立以多个移动终端中的任一移动终端为原点的平面直角坐标系，并确定多个移动终端分别在平面直角坐标系中的显示位置；

S106，根据显示位置在多个移动终端上分别显示待显示的内容的一部分，以在多个移动终端上得到整个显示内容。

在步骤S102实现的过程中，当用户在多个移动终端中确定一个主控移动终端后，其他移动终端就对应的成为了该主控移动终端的从属移动终端，即各种计算、处理的任务都由该主控移动终端来实现，从属移动终端实现其他辅助的功能。在确定主控终端后，就可以将主控终端与其他从属移动终端连接起来，连接的方式有多种，例如，通过miracast协议来建立连接，或者，LTE网络建立连接等。

在建立了连接后，就可以将各个移动终端之间的位置关系进行一个统计。

在实现过程中，建立平面直角坐标系时，可以测量各个移动终端与原点所在移动终端的位置关系，进而将该位置关系输入至主控移动终端，以确定各个移动终端在平面直角坐标系中的显示位置。此种方式需要用户操作，但一次录入就可以实现，不需要过多的其他操作，过程简单。

本发明实施例在在主控移动终端和从属移动终端建立连接后，以任一个移动终端为原心，根据各个移动终端的摆放位置来建立平面直角坐标系，以确定各个移动终端的显示位置，并根据该显示位置来分配各个终端的显示内容，该过程只需要建立平面直角坐标系，并将摆放好的各个终端与平面直角坐标系建立连接，就可以根据各个终端在平面直角坐标系中的位置来显示对应的内容，操作过程简单，解决了现有技术的多个移动终端屏幕拼接进行显示时，操作繁琐及用户体验较低的问题。

在实现过程中，虽然用户可以通过手动测量来建立平面直角坐标系，但此种方式需要用户手动操作，因此，本发明第二实施例提供了一种可以解放用户的自动建立平面直角坐标系的方法，该方法基于第一实施例中的三个步骤，下面对第二实施例中涉及到的过程进行说明。

在实现自动建立平面直角坐标系的过程中需要用到一些相关参数，因此，在在建立多个移动终端中的主控移动终端与各个从属移动终端间的连接之前，还需要在主控移动终端上分别设置各个移动终端的摄像参数，以备后续使用，其中，摄像参数包括：左右两个前置摄像头之间的距离、左右两个前置摄像头的焦距、左右两个前置摄像头与屏幕的位置关系结构图。

在根据用户预置的多个移动终端的摆放位置建立以多个移动终端中的任一移动终端为原点的平面直角坐标系、并确定多个移动终端分别在平面直角坐标系中的显示位置的过程中，按照如下过程进行操作：

(1)主控移动终端在多个移动终端中选择一个移动终端作为平面直角坐标系的原点所在移动终端。该过程由主控移动终端选择，选择的方式可以是随机的，也可以是根据一定的规则来选择的，例如，将主控移动终端设置为原点所在移动终端，当然，还可以是用户主观选择的，例如，将多个移动终端都进行编号，用户根据需求或喜好选择对应号码的移动终端即可。

(2)主控移动终端设置原点所在移动终端中的左右两个前置摄像头中的任一个摄像头、或者屏幕四个顶点中的任一个顶点作为原点，设置原点的任一延伸方向为平面直角坐标系的X轴正方向，并基于X轴正方向建立Y轴正方向，以建立平面直角坐标系。实现时，如果主控移动终端设置原点的过程可以是随机选择的，可以是根据一定的规则来选择的，也可以是用户主管选择的。在确定原点后，可以按照一定规则来确定X轴正方向，例如，如果设置原点所在移动终端的左摄像头为原点，则可以规定有摄像头方向为X轴正方向，将屏幕方向设置为Y轴正方向。为了精确平面直角坐标系中的位置关系，在选择原点时，可以精确到将左摄像头中心设置为原点。

(3)主控移动终端分别接收多个移动终端基于预置待拍摄的参考点确定的多个移动终端各自的空间坐标，其中，空间坐标包括：左右两个前置摄像头分别相对于参考点的空间坐标、以及屏幕四个顶点分别相对于参考点的空间坐标，参考点的设置满足以下条件：多个移动终端的左右两个前置摄像头均能拍摄到。由于是需要自动确定显示位置，因此，此过程中使用到了一个参考点，该参考点可以是预先设置的。该过程中，是主控移动终端接收各个移动终端发送的空间坐标，当然，也包括自身基于参考点的空间坐标。因此，在主控移动终端接收到各个移动终端各自的空间坐标之前，各个移动终端需要自己相对于参考点进行一个定位，定位过程如下：

各个移动终端均触发左右两个前置摄像头对参考点进行拍摄，以根据双摄像头测距原理确定各个移动终端左右两个前置摄像头分别相对于参考点的空间坐标；各个移动终端均根据左右两个前置摄像头与屏幕的位置关系结构图确定各个移动终端屏幕四个顶点分别相对于参考点的空间坐标；各个移动终端均将左右两个前置摄像头分别相对于参考点的空间坐标、以及屏幕四个顶点分别相对于参考点的空间坐标发送至主控移动终端。

(4)主控移动终端根据原点所在移动终端与参考点的空间坐标，确定参考点在平面直角坐标系中的平面坐标。由于存在一个平面直角坐标系，但平面直角坐标系中不存在各个移动终端的位置关系，但还存在一个相对于参考点的空间坐标系，其中存在着各个移动终端之间的关系，因此，可以考虑将原点所在移动终端与参考点的空间坐标转换为平面直角坐标系中的平面坐标。

(5)主控移动终端基于平面坐标，确定除原点所在移动终端之外的其他各个移动终端的平面坐标，以将多个平面坐标作为多个移动终端的显示位置。由于上述过程中确定了参考点在平面直角坐标系中的坐标，因此，可以基于参考点在平面直角坐标系中的平面坐标，就可以确定其他移动终端和原点的位置关系了，该位置关系就是最终的显示位置。

在确定了平面直角坐标系中各个移动终端的显示位置后，就可以将显示内容发送给各个移动终端了。在实现时，由于各个移动终端屏幕的分辨率会存在差异，因此，在根据显示位置在多个移动终端上分别显示待显示的内容的一部分的过程中，可以先根据多个移动终端各自屏幕的分辨率确定分配给各个移动终端的待显示的内容部分，再将确定的各个移动终端的待显示的内容部分按照显示位置发送至各个移动终端，以在多个移动终端上得到整个显示内容。

在实现过程中，为了提高用户体验，因此，无论是否已经在各个移动终端上显示了显示内容，都应该可以让用户在显示的过程中能够对显示内容大小进行调整，因此，在根据显示位置在多个移动终端上分别显示待显示的内容的一部分之前或之后，主控移动终端都可以接收用户调整显示内容的触发指令，以根据触发指令调整显示内容分别在多个移动终端上的显示比例。

本发明第三实施例提供一种控制多个移动终端屏幕拼接显示的装置，该装置的结构示意如图2所示，包括：

连接模块10，用于建立多个移动终端中的主控移动终端与各个从属移动终端间的连接；执行模块11，与连接模块10耦合，用于根据用户预置的多个移动终端的摆放位置建立以多个移动终端中的任一移动终端为原点的平面直角坐标系，并确定多个移动终端分别在平面直角坐标系中的显示位置；显示模块12，与执行模块11耦合，用于根据显示位置在多个移动终端上分别显示待显示的内容的一部分，以在多个移动终端上得到整个显示内容。

在建立平面直角坐标系的过程中，可以测量各个移动终端与原点所在移动终端的位置关系，进而将该位置关系输入至主控移动终端，以确定各个移动终端在平面直角坐标系中的显示位置。此种方式需要用户操作，但一次录入就可以实现，不需要过多的其他操作，过程简单。

本发明第四实施例提供一种控制多个移动终端屏幕拼接显示的装置，该装置的结构示意如图3所示，包括：

设置模块20，用于分别设置多个移动终端的摄像参数，其中，摄像参数包括：左右两个前置摄像头之间的距离、左右两个前置摄像头的焦距、左右两个前置摄像头与屏幕的位置关系结构图；连接模块21，与设置模块20耦合，用于建立多个移动终端中的主控移动终端与各个从属移动终端间的连接；执行模块22，与连接模块21耦合，用于根据用户预置的多个移动终端的摆放位置建立以多个移动终端中的任一移动终端为原点的平面直角坐标系，并确定多个移动终端分别在平面直角坐标系中的显示位置；显示模块23，与执行模块22耦合，用于根据显示位置在多个移动终端上分别显示待显示的内容的一部分，以在多个移动终端上得到整个显示内容。

具体设置时，执行模块22的结构示意图可以如图4所示，包括：

选择单元220，用于在多个移动终端中选择一个移动终端作为平面直角坐标系的原点所在移动终端；建立单元221，与选择单元220耦合，用于设置原点所在移动终端中的左右两个前置摄像头中的任一个摄像头、或者屏幕四个顶点中的任一个顶点作为原点，设置原点的任一延伸方向为平面直角坐标系的X轴正方向，并基于X轴正方向建立Y轴正方向，以建立平面直角坐标系；接收单元222，与建立单元221耦合，用于分别接收多个移动终端基于预置待拍摄的参考点确定的多个移动终端各自的空间坐标，其中，空间坐标包括：左右两个前置摄像头分别相对于参考点的空间坐标、以及屏幕四个顶点分别相对于参考点的空间坐标，参考点的设置满足以下条件：多个移动终端的左右两个前置摄像头均能拍摄到；平面坐标确定单元223，与接收单元222耦合，用于根据原点所在移动终端与参考点的空间坐标，确定参考点在平面直角坐标系中的平面坐标；基于平面坐标，确定除原点所在移动终端之外的其他各个移动终端的平面坐标，以将多个平面坐标作为多个移动终端的显示位置。

选择单元220选择的方式可以是随机的，也可以是根据一定的规则来选择的，例如，将主控移动终端设置为原点所在移动终端，当然，还可以是用户主观选择的，例如，将多个移动终端都进行编号，用户根据需求或喜好选择对应号码的移动终端即可。

建立单元221实现时，设置原点的过程可以是随机选择的，可以是根据一定的规则来选择的，也可以是用户主管选择的。在确定原点后，可以按照一定规则来确定X轴正方向，例如，如果设置原点所在移动终端的左摄像头为原点，则可以规定有摄像头方向为X轴正方向，将屏幕方向设置为Y轴正方向。为了精确平面直角坐标系中的位置关系，在选择原点时，可以精确到将左摄像头中心设置为原点。

由于本实施例在实现时是需要自动确定显示位置，因此，此过程中使用到了一个参考点，该参考点可以是预先设置的。该过程中，是主控移动终端接收各个移动终端发送的空间坐标，当然，也包括自身基于参考点的空间坐标。因此，在接收单元222接收到各个移动终端各自的空间坐标之前，各个移动终端需要自己相对于参考点进行一个定位，当然，主控移动终端作为多个移动终端中的一个，其也需要进行定位，因此，上述执行模块222的结构示意还可以如图5所示，还包括：

拍摄单元224，与建立单元221耦合，用于触发左右两个前置摄像头对参考点进行拍摄，以根据双摄像头测距原理确定当前移动终端左右两个前置摄像头分别相对于参考点的空间坐标；空间坐标确定单元225，与拍摄单元224耦合，用于根据左右两个前置摄像头与屏幕的位置关系结构图确定当前移动终端屏幕四个顶点分别相对于参考点的空间坐标；空间坐标发送单元226，与空间坐标确定单元225和接收单元222耦合，用于将左右两个前置摄像头分别相对于参考点的空间坐标、以及屏幕四个顶点分别相对于参考点的空间坐标发送至主控移动终端。

在实现时，上述拍摄单元224、空间坐标确定单元225和空间坐标发送单元226是各个移动终端都需要具备的功能，其能是辅助自动建立平面直角坐标系与各个移动终端对应关系的必要过程。

上述显示模块23的结构示意可以如图6所示，其可以包括：

显示内容确定单元230，用于根据多个移动终端各自屏幕的分辨率确定分配给各个移动终端的待显示的内容部分；显示内容发送单元231，与显示内容确定单元230耦合，用于将确定的各个移动终端的待显示的内容部分按照显示位置发送至各个移动终端，以在多个移动终端上得到整个显示内容。

在优选实施例中，为了提高用户体验，因此，无论是否已经在各个移动终端上显示了显示内容，都应该可以让用户在显示的过程中能够对显示内容大小进行调整，所以上述装置还可以包括：调整模块，用于接收用户调整显示内容的触发指令，以根据触发指令调整显示内容分别在多个移动终端上的显示比例。

本发明第五实施例提供了一种移动终端，其包括上述第三实施例和第四实施例中的控制多个移动终端屏幕拼接显示的装置。在实现时，上述装置可以作为APP形式呈现在移动终端中，当然，此时的移动终端为主控移动终端，相应的，为了实现自动建立平面直角坐标系的功能，还可以提供一种从属移动终端，该从属移动终端实现辅助建立平面直角坐标系的功能，其应包含的功能单元已在上述进行了说明，此处不再赘述。

本发明第六实施例提供了控制多个移动终端屏幕拼接显示的方法，其本发明实施例引入了双前置摄像头，利用双摄像头测距的方法，来实现多手机相对位置的确定，从而让各个设备合作显示同一幅图像。本实施例可以采用一个普通的平板或不使用平板，不要求准备具有较高平整度的平板；每个移动终端只需要分别用左右前置摄像头拍一张照片，且拍照片的过程是自动化的，用户操作简单，因此解决了现有技术存在的问题。

对于本实施例，在实现时，用户可以随意拿出若干台移动终端，铺在一张桌子上，只要这些移动终端都具有双前置摄像头，就能够实现本发明实施例，本实施例利用各移动终端的双前置摄像头获取参考点的图像，发送到主控移动终端进行各屏幕的方位识别与显示内容控制，来实现多终端的协作显示。

对于各个显示移动终端(也包括主控移动终端)的要求：需要支持统一的无线传输协议，以便能使得从属移动终端与主控移动终端通讯，该协议可以是wifi的协议，也可以是支持miracast的协议。

对于多个显示移动终端中的主控移动终端而言，由于其需要进行主要的数据处理工作，因此，本实施例将其主要的数据处理工作设置在其中央处理器来完成，该主控移动终端的中央处理器集成了第四实施例中的控制多个移动终端屏幕拼接显示的装置的一些模块的相应功能，在本实施例中，集成了连接模块、执行模块和显示模块的对应功能，其用来实现显示终端的位置确定、图像的分割裁剪等操作。该主控移动终端还可以设置一个设置模块(相当于调整模块和设置模块的对应功能)，设置模块可以记录用户的一些对于图像显示的偏好设置等。本实施例主控移动终端的结构示意可以如图7所示。

为了保存计算过程生成的数据，同时记录用户的偏好设置等，还可以单独设置一个存储模块，当然，在本实施例实现时，是通过共用移动终端存储器来进行存储的。

通过无线传输协议，首先将各个显示移动终端与主控移动终端连接。显示移动终端在桌面上排列成用户期望的样子。主控移动终端与各个显示移动终端交换初始化参数数据，各显示移动终端将利用双前置摄像头拍摄参考点的图像，使用双摄像头测距原理计算出双前置摄像头相对于参考点的空间坐标，然后利用双前置摄像头与屏幕的位置关系换算出每个移动终端屏幕的相对位置，与显示方向。各显示移动终端将屏幕的相对位置，与显示方向数据发送到主控端。

主控端获得所有显示移动终端的显示屏的精确位置与方向后，我们可以称之为显示地图，再使用待显示图像，与显示地图进行等比例缩放的拟合，找到最佳显示范围。针对确定好的显示范围，结合显示地图，对待显示图像，进行图像切割，切割好的图像发送给对应显示区域的显示移动终端，每个显示移动终端显示出发给自己的图像。所有显示移动终端分别显示自己的一部分图像，呈现给用户的实际效果就是，一副完整的显示画面。

下面对本实施例的控制多个移动终端屏幕拼接显示的方法进行详细说明，其流程包括如下(1)至(8)。

(1)从显示移动终端的出厂说明书中获得移动终端的左右两个前置摄像头之间的距离、左右摄像头的焦距、前置左右双摄像头与屏幕的位置关系结构图。将这些数据预存在各显示移动终端。

(2)用户操作将显示移动终端与主控移动终端完成连接。在本实施例中，我们使用miracast协议来建立连接，主控机作为source端，其他显示移动终端作为sink端。多台显示移动终端与主控移动终端建立连接时，我们需要给多台移动终端一个唯一的标识符，以便传输信息的准确性。miracast连接天然的使用wifi连接，于是wifi地址就可以作为唯一标识符，来标识不同的显示移动终端。为了后续理解方便，我们给显示移动终端编号，A，B，C……如果超过26台，我们可以用AA的样式继续编号。

(3)用户完成了所有移动终端与主控移动终端的连接后，就可以将所有显示样机摆成一个想要的显示造型放在桌面上了。在显示屏幕的上方用支架固定一个平板，平板上画一个显眼的参考点，调整平板的位置使所有显示移动终端的双前置摄像头均能拍摄到参考点。

(4)主控端通过无线向每台显示移动终端发送指令进行如下操作：

使每台显示移动终端自动地用双前置摄像头拍摄图象，利用双摄像头测距原理，确定左右前置摄像头相对与参考点的空间坐标；再结合前置左右双摄像头与屏幕的位置关系结构图，能确定每个显示移动终端的显示屏幕各个顶点相对与参考点的空间坐标；然后，将左右双摄像头的空间坐标和显示屏幕各个顶点的空间坐标加上wifi地址标记，发送给主控机。

(5)假定所有显示移动终端的双前置摄像头及显示屏幕都在同一个平面上，A移动终端的显示方向，就可以用作显示平面的“基准方向”，从A移动终端屏幕顶点一指向A移动终端屏幕顶点二的方向，就把它作为XY平面坐标系的X轴正方向，左摄像头中心点就作为显示平面坐标系的原点。

将(4)得到的各个屏幕四个顶点相对与参考点的空间坐标换算为XY平面坐标系的坐标，现在我们就得到了一张完整的显示移动终端的显示区域的平面图，可以称之为“显示地图”，进而，初始化工作完成。

(6)原始图像与“显示地图”的位置匹配。如图8，实线框代表的手机的摆放形成的区域，就是经过计算得到的显示地图，虚线框代表原始图像对应的显示范围，用户可以通过拖动与缩放调整两个区域的相对位置。用户调整确认了之后，每个手机需要显示的内容区域就确定了。

(7)通过中央处理器对确定下来的每台显示移动终端的显示区域进行图像切割，然后通过无线传输协议，将对应的图像发给对应的显示移动终端。

在图像切割后，图像传输前，还有一个之前初始化过程中获得的样机显示方向的参数，在这里起作用，因为同样的一台显示移动终端其显示区域确定了，但是方向却可能是多种多样的，如果传输的图像不考虑显示方向，最终拼接出来的图像也会出问题，因此我们再初始化的时候定义了平面坐标系的X轴正方向，当其他样机从屏幕顶点一到屏幕顶点二的方向与X轴正方向不同时，我们就可以计算出对应的夹角，利用这个夹角数值，在发送图像给显示移动终端的时候，就可以提前将图像旋转对应的角度，夹角是多少，就旋转多少的角度。这样投影出来的内容就不会产生某个局部区域显示图像是颠倒的这种情况了。

(8)每个移动终端显示自己收到的图像，最终给用户呈现的效果就是所有移动终端合作显示了同一张图像。

实现过程中，如果要显示视频，实际的处理方式就是将每一帧图像重复(7)和(8)的处理，进行分割发送，从而实现视频效果的显示。同理，其他的如PPT、游戏等内容都可以通过图像分割的方式，显示在多手机搭建的拼接显示区域上。

上述(4)过程中提及到了双摄像头测距原理，该技术已经是较为成熟的技术，在此不进行赘述。

基于过程(1)中对于上述移动终端的左右两个前置摄像头之间的距离、左右摄像头的焦距、前置左右双摄像头与屏幕的位置关系结构图的数据还可以从预先保存了这些数据的服务器中获得，还可以在准备的过程中测量得到。多种方式获取数据，增加了数据获取途径的多样性，方便用户进行准备工作。

基于过程(2)中给显示终端编号的过程，还可以用其他语言字母的顺序、汉字的数字顺序、阿拉伯字母的数字顺序、以及其他的甲乙丙丁的顺序等。具体用户使用何种编号顺序可以在设置模块给用户提供设置菜单。该过程可以让用户可以用自己习惯的语言与方式给样机编号，提高了用户体验。对于其连接协议，还可以使用其他无线协议来传输数据，比如LTE，该实施例的引入丰富了连接传输的方法，用户可以根据不同的通信技术调整整体方案，提高了方案的适应性。

基于过程(3)中用户在显示屏幕的对面放置一个平板，在平板上画一个显眼的参考点，还可以结合现场环境，屏幕的对面如果有一个天花板，可以用激光笔在天花板上照射一个点做为参考点；当然，还可以将显示终端以粘贴等方式固定在墙上，将画有参考点的平板固定在显示屏的对面。该过程省去了要准备一个平板的步骤，简化了操作。

当系统运行过程中，可能会出现系统中有一台移动终端退出显示系统的情况，比如是因为移动终端低电，或者因为其他突发情况，移动终端需要退出系统，针对这种情况，首先不作任何处理，继续其他移动终端的内容显示，如果用户针对性的做了剩余移动终端未知的调整，主控机再根据调整移动终端，启动个别移动终端的初始化过程。实现过程中，即使有及其退出系统，也可以不影响整个系统的运行流畅度。进而，当系统运行过程中，我们还可以允许新显示移动终端的加入，只需要针对新移动终端完成初始化的过程即可，可见，有新移动终端加入系统也可以不影响整个系统的运行流畅度。

当系统运行过程中，仍然可以随时调整画面显示的缩放。系统调整画面显示的缩放比例时，可以在设置模块预制几种通用的算法，例如，1、画面全显示，要求待显示画面的4个角，都能够完全显示在显示终端上；2、显示样机全部有图像，要求所有样机的显示区域，都可以有画面显示；3、中心80％内容完全显示，将中心的80％区域确定出来，中心80％区域对应的4个角都需要都能够完全显示在显示终端上。用户做完对应设定后。系统就可以在初始化的时候，完成自动缩放，提高了操作的简便性。

本发明上述实施例都是基于用户操作简便考虑，因此在多个显示移动终端中选择一台作为主控机，在实际实现时，除了选择显示移动终端中的任意一台做为主控机外，还可以使用第三方设备作为主控机。该过程方便用户在主控机进行远距离控制操作。

尽管为示例目的，已经公开了本发明的优选实施例，本领域的技术人员将意识到各种改进、增加和取代也是可能的，因此，本发明的范围应当不限于上述实施例。

Claims (15)

1.一种控制多个移动终端屏幕拼接显示的方法，其特征在于，包括：

建立多个移动终端中的主控移动终端与各个从属移动终端间的连接；

根据用户预置的所述多个移动终端的摆放位置建立以所述多个移动终端中的任一移动终端为原点的平面直角坐标系，并确定所述多个移动终端分别在所述平面直角坐标系中的显示位置；

根据所述显示位置在所述多个移动终端上分别显示待显示的内容的一部分，以在所述多个移动终端上得到整个显示内容。

2.如权利要求1所述的方法，其特征在于，根据用户预置的所述多个移动终端的摆放位置建立以所述多个移动终端中的任一移动终端为原点的平面直角坐标系，包括：

所述主控移动终端在所述多个移动终端中选择一个移动终端作为平面直角坐标系的原点所在移动终端；

所述主控移动终端设置所述原点所在移动终端中的左右两个前置摄像头中的任一个摄像头、或者屏幕四个顶点中的任一个顶点作为原点，设置所述原点的任一延伸方向为所述平面直角坐标系的X轴正方向，并基于所述X轴正方向建立Y轴正方向，以建立所述平面直角坐标系。

3.如权利要求1所述的方法，其特征在于，确定所述多个移动终端分别在所述平面直角坐标系中的显示位置，包括：

所述主控移动终端分别接收所述多个移动终端基于预置待拍摄的参考点确定的所述多个移动终端各自的空间坐标，其中，所述空间坐标包括：左右两个前置摄像头分别相对于所述参考点的空间坐标、以及屏幕四个顶点分别相对于所述参考点的空间坐标，所述参考点的设置满足以下条件：所述多个移动终端的左右两个前置摄像头均能拍摄到；

所述主控移动终端根据所述原点所在移动终端与所述参考点的空间坐标，确定所述参考点在所述平面直角坐标系中的平面坐标；

所述主控移动终端基于所述平面坐标，确定除所述原点所在移动终端之外的其他各个移动终端的平面坐标，以将多个平面坐标作为所述多个移动终端的显示位置。

4.如权利要求3所述的方法，其特征在于，所述主控移动终端分别接收所述多个移动终端基于预置待拍摄的参考点确定的所述多个移动终端各自的空间坐标之前，还包括：

各个移动终端均触发左右两个前置摄像头对所述参考点进行拍摄，以根据双摄像头测距原理确定各个移动终端左右两个前置摄像头分别相对于所述参考点的空间坐标；

各个移动终端均根据所述左右两个前置摄像头与屏幕的位置关系结构图确定各个移动终端屏幕四个顶点分别相对于所述参考点的空间坐标；

各个移动终端均将所述左右两个前置摄像头分别相对于所述参考点的空间坐标、以及所述屏幕四个顶点分别相对于所述参考点的空间坐标发送至所述主控移动终端。

5.如权利要求1所述的方法，其特征在于，根据所述显示位置在所述多个移动终端上分别显示待显示的内容的一部分，以在所述多个移动终端上得到整个显示内容，包括：

所述主控移动终端根据所述多个移动终端各自屏幕的分辨率确定分配给各个移动终端的待显示的内容部分；

所述主控移动终端将确定的各个移动终端的待显示的内容部分按照所述显示位置发送至各个移动终端，以在所述多个移动终端上得到整个显示内容。

6.如权利要求1至5中任一项所述的方法，其特征在于，建立多个移动终端中的主控移动终端与各个从属移动终端间的连接之前，还包括：

所述主控移动终端分别设置所述多个移动终端的摄像参数，其中，所述摄像参数包括：左右两个前置摄像头之间的距离、左右两个前置摄像头的焦距、左右两个前置摄像头与屏幕的位置关系结构图。

7.如权利要求1至5中任一项所述的方法，其特征在于，根据所述显示位置在所述多个移动终端上分别显示待显示的内容的一部分之前，还包括：

所述主控移动终端接收用户调整显示内容的触发指令，以根据所述触发指令调整显示内容分别在所述多个移动终端上的显示比例。

8.一种控制多个移动终端屏幕拼接显示的装置，其特征在于，包括：

连接模块，用于建立多个移动终端中的主控移动终端与各个从属移动终端间的连接；

执行模块，用于根据用户预置的所述多个移动终端的摆放位置建立以所述多个移动终端中的任一移动终端为原点的平面直角坐标系，并确定所述多个移动终端分别在所述平面直角坐标系中的显示位置；

显示模块，用于根据所述显示位置在所述多个移动终端上分别显示待显示的内容的一部分，以在所述多个移动终端上得到整个显示内容。

9.如权利要求8所述的装置，其特征在于，所述执行模块包括：

选择单元，用于在所述多个移动终端中选择一个移动终端作为平面直角坐标系的原点所在移动终端；

建立单元，用于设置所述原点所在移动终端中的左右两个前置摄像头中的任一个摄像头、或者屏幕四个顶点中的任一个顶点作为原点，设置所述原点的任一延伸方向为所述平面直角坐标系的X轴正方向，并基于所述X轴正方向建立Y轴正方向，以建立所述平面直角坐标系。

10.如权利要求8所述的装置，其特征在于，所述执行模块包括：

接收单元，用于分别接收所述多个移动终端基于预置待拍摄的参考点确定的所述多个移动终端各自的空间坐标，其中，所述空间坐标包括：左右两个前置摄像头分别相对于所述参考点的空间坐标、以及屏幕四个顶点分别相对于所述参考点的空间坐标，所述参考点的设置满足以下条件：所述多个移动终端的左右两个前置摄像头均能拍摄到；

平面坐标确定单元，用于根据所述原点所在移动终端与所述参考点的空间坐标，确定所述参考点在所述平面直角坐标系中的平面坐标；基于所述平面坐标，确定除所述原点所在移动终端之外的其他各个移动终端的平面坐标，以将多个平面坐标作为所述多个移动终端的显示位置。

11.如权利要求10所述的装置，其特征在于，所述执行模块还包括：

拍摄单元，用于触发左右两个前置摄像头对所述参考点进行拍摄，以根据双摄像头测距原理确定当前移动终端左右两个前置摄像头分别相对于所述参考点的空间坐标；

空间坐标确定单元，用于根据所述左右两个前置摄像头与屏幕的位置关系结构图确定当前移动终端屏幕四个顶点分别相对于所述参考点的空间坐标；

空间坐标发送单元，用于将所述左右两个前置摄像头分别相对于所述参考点的空间坐标、以及所述屏幕四个顶点分别相对于所述参考点的空间坐标发送至所述主控移动终端。

12.如权利要求8所述的装置，其特征在于，所述显示模块包括：

显示内容确定单元，用于根据所述多个移动终端各自屏幕的分辨率确定分配给各个移动终端的待显示的内容部分；

显示内容发送单元，用于将确定的各个移动终端的待显示的内容部分按照所述显示位置发送至各个移动终端，以在所述多个移动终端上得到整个显示内容。

13.如权利要求8至12中任一项所述的装置，其特征在于，所述装置还包括：

设置模块，用于分别设置所述多个移动终端的摄像参数，其中，所述摄像参数包括：左右两个前置摄像头之间的距离、左右两个前置摄像头的焦距、左右两个前置摄像头与屏幕的位置关系结构图。

14.如权利要求8至12中任一项所述的装置，其特征在于，还包括：

调整模块，用于接收用户调整显示内容的触发指令，以根据所述触发指令调整显示内容分别在所述多个移动终端上的显示比例。

15.一种移动终端，其特征在于，包括：权利要求8至14中任一项所述的控制多个移动终端屏幕拼接显示的装置。