CN108304148A - 一种多屏拼接显示的方法和装置 - Google Patents

Abstract

本发明公开了一种多屏拼接显示的方法，包括：主控终端通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。本发明还公开了一种多屏拼接显示的装置。

Description

一种多屏拼接显示的方法和装置

技术领域

本发明涉及移动通信技术，尤其涉及一种多屏拼接显示的方法和装置。

背景技术

掌上屏幕时代，让越来越多的移动终端出现在人们的生活中，多屏拼接技术的出现更加丰富移动终端的交互方式，有力的推进移动终端用户的体验度。

目前的多屏拼接技术方案的主要有以下三种：

第一种，利用一张背板上面有主终端的限位连接卡扣，从移动终端的限位连接卡扣，USB连接线等。简单来说，就是利用一个固定框架将移动终端填充进去，再设置每个移动终端显示不同的内容，从而保证整体的显示效果。

第二种，不需要利用上述的背板，通过移动终端侧边自带的连接装置，完成多个移动终端之间的连接；再根据不同的连接触点传输对应的数据，完成多个移动终端屏幕之间的定位与通讯。

第三种，利用前摄像头采集的图像的方式；这种方式需要移动终端事先存储好前摄像头位置信息与屏幕显示位置信息的相对关系，利用一个辅助定位的棋盘格参考物，来完成各个移动终端的前摄像头的信息同时采集，然后经过位置计算定位各个移动终端相对位置的信息，再由各个移动终端分别显示从主控机发来的图像，实现多屏拼接。

上述三种方法分别具有以下缺陷：

第一种方式，需要固定的背板，多个移动终端必须与这个背板都有需要恰当的匹配进去，当背板的兼容性不好时，很多移动终端都不能纳入系统中；

第二种方式，只有特定的具有侧边连接装置的移动终端才能实现多屏拼接，应用场景大为受限；

第三种方式，利用前摄像头采集的图像来完成辅助定位，虽然无需特殊原件，但需要移动终端事先存储好前摄像头位置信息与屏幕显示位置信息的相对关系，对于没有这些信息的移动终端就会受限，不能进行多屏拼接。

发明内容

为解决现有存在的技术问题，本发明实施例提供一种多屏拼接显示的方法和装置，确定各显示终端的相对位置，实现各显示终端的屏幕拼接。

为达到上述目的，本发明的技术方案是这样实现的：

本发明实施例提供了一种多屏拼接显示的方法，待拼接的各显示终端以设定位姿排列，使各显示终端的显示屏幕位于同一平面上；所述方法包括：

主控终端通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；

所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；

所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。

上述方案中，所述主控终端通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，包括：

所述主控终端向所述各显示终端发送第一显示数据，所述第一显示数据使所述显示终端在显示屏幕上显示第一显示图像；

所述主控终端通过第一摄像头获取包含所述各显示终端的第一图像，通过第二摄像头获取包含所述各显示终端的第二图像。

上述方案中，所述显示终端在显示屏幕上显示的第一显示图像，包括：编号和位于所述编号下方且垂直于显示终端的任一边框的横线；

所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向，包括：

所述主控终端对所述第一图像和所述第二图像进行图像识别，从所述第一图像和第二图像上提取所述横线上的两个设定特征点，确定两个设定特征点从左至右连成的向量，向量方向作为所述显示终端的显示屏幕的显示方向。

上述方案中，所述主控终端对所述第一图像和所述第二图像进行图像识别之后，还包括：

所述主控终端从所述第一图像和第二图像上提取不在同一直线上的三个特征点，根据三个特征点确定所述显示终端的显示屏幕的平面。

上述方案中，所述确定两个设定特征点从左至右连成的向量，包括：

确定所述设定特征点在所述平面上的坐标，根据所述设定特征点的坐标确定两个设定特征点从左至右连成的向量，将向量方向作为所述显示终端的显示屏幕的显示方向。

上述方案中，所述主控终端通过第一摄像头和第二摄像头分别获取包含显示第二显示图像时的所述各显示终端的第三图像和第四图像，包括：

所述主控终端向所述各显示终端发送第二显示数据，所述第二显示数据使所述显示终端在显示屏幕上显示单一颜色的第二显示图像；

通过第一摄像头获取包含所述各显示终端的第三图像，通过第二摄像头获取包含所述各显示终端的第四图像。

上述方案中，所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元之后，所述方法还包括：

所述主控终端根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例；

所述主控终端确定第三显示数据后，根据所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例分割所述第三显示数据，并确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，使所述各显示终端的显示屏幕按所确定的显示方向显示所接收的分割后的第三显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

上述方案中，所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元，包括：

所述主控终端对所述第三图像和所述第四图像进行图像识别，获取以设定位姿排列的各显示终端的显示屏幕的最外围的四个端点在所述平面上的坐标信息，根据坐标信息确定所述最外围的四个端点连线形成的四边形内的各显示屏幕作为所述第一显示单元。

上述方案中，所述主控终端根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例，包括：

确定所述显示终端的显示屏幕的四角的端点在所述平面上的坐标信息，根据坐标信息确定四角的端点连线形成的四边形在第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

上述方案中，所述确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，包括：

以任一所述显示终端的显示屏幕的显示方向为基准方向，将其他显示终端的显示屏幕的显示方向与所述基准方向调整一致；根据调整后的方向确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向；将切割后的第三显示数据向所述显示终端的显示屏幕发送。

上述方案中，所述主控终端确定第三显示数据之后，所述方法包括：

所述主控终端将所述第三显示数据、所述各显示终端的显示屏幕的显示方向、所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例发送给各显示终端；

由各显示终端确定对应的显示数据，以任一所述显示终端的显示屏幕的显示方向为基准方向，按所述基准方向显示确定的显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

本发明实施例提供了一种多屏拼接显示的装置，待拼接的各显示终端以设定位姿排列，使各显示终端的显示屏幕位于同一平面上；所述装置包括：第一处理模块、第二处理模块和第三处理模块；其中，

所述第一处理模块，用于通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；

所述第二处理模块，用于根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；

所述第三处理模块，用于根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。

上述方案中，所述第一处理模块，具体用于向所述各显示终端发送第一显示数据，所述第一显示数据使所述显示终端在显示屏幕上显示第一显示图像；

通过第一摄像头获取包含所述各显示终端的第一图像，通过第二摄像头获取包含所述各显示终端的第二图像。

上述方案中，所述显示终端在显示屏幕上显示的第一显示图像，包括：编号和位于所述编号下方且垂直于显示终端的任一边框的横线；

所述第二处理模块，具体用于：对所述第一图像和所述第二图像进行图像识别，从所述第一图像和第二图像上提取所述横线上的两个设定特征点，确定两个设定特征点从左至右连成的向量，向量方向作为所述显示终端的显示屏幕的显示方向。

上述方案中，所述第二处理模块，具体用于从所述第一图像和第二图像上提取不在同一直线上的三个特征点，根据三个特征点确定所述显示终端的显示屏幕的平面。

上述方案中，所述第二处理模块，具体用于确定所述设定特征点在所述平面上的坐标，根据所述设定特征点的坐标确定两个设定特征点从左至右连成的向量，将向量方向作为所述显示终端的显示屏幕的显示方向。

上述方案中，所述第一处理模块，具体用于：向所述各显示终端发送第二显示数据，所述第二显示数据使所述显示终端在显示屏幕上显示单一颜色的第二显示图像；

通过第一摄像头获取包含所述各显示终端的第三图像，通过第二摄像头获取包含所述各显示终端的第四图像。

上述方案中，所述第三处理模块，还用于：根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

上述方案中，所述装置，还包括第四处理模块；所述第四处理模块，用于确定第三显示数据后，根据所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例分割所述第三显示数据，并确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，使所述各显示终端的显示屏幕按所确定的显示方向显示所接收的分割后的第三显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

上述方案中，所述第三处理模块，具体用于：对所述第三图像和所述第四图像进行图像识别，获取以设定位姿排列的各显示终端的显示屏幕的最外围的四个端点在所述平面上的坐标信息，根据坐标信息确定所述最外围的四个端点连线形成的四边形内的各显示屏幕作为所述第一显示单元；

确定所述显示终端的显示屏幕的四角的端点在所述平面上的坐标信息，根据坐标信息确定四角的端点连线形成的四边形在第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

上述方案中，所述第四处理模块，具体用于：以任一所述显示终端的显示屏幕的显示方向为基准方向，将其他显示终端的显示屏幕的显示方向与所述基准方向调整一致；根据调整后的方向确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向；将切割后的第三显示数据向所述显示终端的显示屏幕发送。

上述方案中，所述装置，还包括第四处理模块；所述第四处理模块，用于：确定第三显示数据后，将所述第三显示数据、所述各显示终端的显示屏幕的显示方向、所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例发送给各显示终端；

由各显示终端确定对应的显示数据，以任一所述显示终端的显示屏幕的显示方向为基准方向，按所述基准方向显示确定的显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

本发明实施例所提供的多屏拼接显示的方法和装置，待拼接的各显示终端以设定位姿排列，使各显示终端的显示屏幕位于同一平面上；主控终端通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。本发明实施例提供的方法和装置，引入两个摄像头采集显示终端的显示屏幕的图像，根据采集的图像确定显示终端与所述主控终端相对位置、所述各显示终端的显示屏幕的平面，实现多个显示终端合作显示同一图像或内容。

附图说明

图1为本发明实施例提供的一种多屏拼接显示的方法流程示意图；

图2为本发明实施例提供的一种多显示终端拼接的示意图；

图3为本发明实施例提供的一种第一显示图像的示意图；

图4为本发明实施例提供的显示方向不统一的图像显示示意图，

图5为本发明实施例提供的利用双摄像头测距原理的示意图；

图6为本发明实施例提供的另一种多屏拼接显示的方法流程示意图；

图7为本发明实施例提供的一种多屏拼接显示的装置结构示意图；

图8为本发明实施例提供的一种多屏拼接显示的系统结构示意图。

具体实施方式

在本发明的各种实施例中，待拼接的各显示终端以设定位姿排列，使各显示终端的显示屏幕位于同一平面上；主控终端通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。

下面结合实施例对本发明再作进一步详细的说明。

图1为本发明实施例提供的一种多屏拼接显示的方法流程示意图；如图1所示，待拼接的各显示终端以设定位姿排列，使各显示终端的显示屏幕位于同一平面上；所述多屏拼接显示的方法，包括：

步骤101：主控终端通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；

具体地，所述主控终端可以是具有双摄像头的通信终端、平板电脑、计算机等，也可以是连接双摄像头的设备。

所述显示终端可以是具有显示屏幕并能够与所述主控终端进行通信的通信终端、平板电脑等设备。

所述主控终端中保存有两个摄像头的信息，包括两个摄像头之间的相对距离，两个摄像头的焦距信息等。

所述主控终端和显示终端具有相同的无线通讯协议，如无线保真(WIFI)等。通过无线通讯协议，主控终端与各个显示终端连接。

所述显示终端排根据用户的设定位姿排列进行排列。主控终端可以通过长臂手机支架固定起来，调整到可以监控到所有显示终端的角度，这样就确定所有显示终端与主控终端的空间相对位置。

在本发明实施例中，使用miracast协议建立连接，所述主控终端作为消息发送(source)端，显示终端作为消息接收(sink)端，多台显示终端与主控终端建立连接时，所述主控终端给各个显示终端一个唯一的标识符，以便传输信息的准确性。这里，使用无线网(WIFI，WIreless-Fidelity)连接，可以用WIFI地址作为唯一标识符，来标识不同的显示终端；还可以为各个显示终端编号，如A，B，C……Z，如果超过26台，可以用AA、AB、AC……ZZ的样式继续编号。

具体地，所述主控终端通过第一摄像头和第二摄像头获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，包括：

所述主控终端向所述各显示终端发送第一显示数据，所述第一显示数据使所述显示终端在显示屏幕上显示第一显示图像；

所述主控终端通过第一摄像头获取包含所述各显示终端的第一图像，通过第二摄像头获取包含所述各显示终端的第二图像。

所述显示终端在显示屏幕上显示的第一显示图像，包括：编号和位于所述编号下方且垂直于显示终端的任一边框的横线。

所述第一显示数据还可以采用其他数据，只需保证所述第一显示图像在旋转180度后与旋转前的图像存在明显区别即可。

所述第一图像和所述第二图像为分别由第一摄像头和第二摄像头拍摄的包括显示屏幕上显示第一显示图像时的各个显示终端的图像；

这里，所述第一图像和所述第二图像，均包括：各显示终端的显示屏幕、显示屏幕上的第一显示图像等信息；主控终端通过识别第一图像和第二图像可以确定各个显示终端的显示屏幕的显示方向。

具体地，所述主控终端通过第一摄像头和第二摄像头分别获取包含显示第二显示图像时的所述各显示终端的第三图像和第四图像，包括：

所述主控终端向所述各显示终端发送第二显示数据，所述第二显示数据使所述显示终端在显示屏幕上显示单一颜色的第二显示图像；

通过所述第一摄像头获取包含所述各显示终端的第三图像，通过所述第二摄像头获取包含所述各显示终端的第四图像。

这里，所述单一颜色的第二显示图像，可以是纯蓝色、纯红色等图像。

所述第三图像和所述第四图像为分别由第一摄像头和第二摄像头拍摄的包括在显示屏幕上显示第二显示图像时的各个显示终端的图像；

这里，所述第三图像和所述第四图像，均包括：各显示终端的显示屏幕、显示屏幕上的第二显示图像等信息；主控终端通过识别第三图像和第四图像可以确定各个显示终端的显示屏幕组成的总显示屏幕，及各个显示屏幕在所述总显示屏幕上的相对位置、所占比例等。

步骤102：所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；

具体地，所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向，包括：

所述主控终端对所述第一图像和所述第二图像进行图像识别，从所述第一图像和第二图像上提取所述横线上的两个设定特征点，确定两个设定特征点从左至右连成的向量，向量方向作为所述显示终端的显示屏幕的显示方向。

需要说明的是，所述图像识别，是指利用计算机对图像进行处理、分析和理解，以识别各种不同模式的目标和对像的技术。一般采用摄像头拍摄图像后，利用图像识别软件根据图像灰阶差做进一步识别处理，图像识别软件例如：康耐视、图智能等。图像识别是人工智能的一个重要领域，通过编制模拟人类图像识别活动的计算机程序，提供不同的图像识别模型。举例来说，当有一个字母A和A模板，字母A的大小、方位、形状都与A模板相似，字母A及字母A的特征均可被识别。

具体地，所述主控终端对所述第一图像和所述第二图像进行图像识别之后，所述方法还包括：

所述主控终端从所述第一图像和第二图像上提取不在同一直线上的三个特征点，根据三个特征点确定所述显示终端的显示屏幕的平面的坐标系。

这里，所述确定两个设定特征点从左至右连成的向量，包括：

确定所述设定特征点在所述平面上的坐标，根据所述设定特征点的坐标确定两个设定特征点从左至右连成的向量，将向量方向作为所述显示终端的显示屏幕的显示方向。

通过步骤102，所述主控终端即可确定各个显示终端的显示屏幕的显示方向。

举例来说，所述主控终端发送第一显示数据给任意一个显示终端，记做A号终端，A号终端的显示屏幕根据第一显示数据显示图像，主控终端的双摄像头在视野范围内开始搜索是否有根据第一显示图像在视野中。单位时间(所述单位时间可以为2秒)内无法找到对应的第一显示图像，则认为系统出现故障，通过人机交互界面提示用户“已经发送A号终端第一显示数据，但是无法找到A号终端”；如果单位时间内可以正常识别到A号终端的图像，则根据显示情况确定当前A号终端的相对位置。利用A号终端的第一显示图像，在第一显示图像上找到3个特征点，比如字母A的顶点与两个底脚的中心，利用双摄像头的空间定位功能，确定3个点的空间坐标，再利用3点确定一个平面的原理，确定出显示终端的平面。该平面即为所有显示终端所在的平面，后续的显示终端的定位信息均在该平面的信息上添加。

A号终端的显示方向，可以用作基准方向。确定所述基准方向的方法可以包括：通过第一摄像头和第二摄像头获得字母A下方横向左右两个点的空间位置；从左边点指向右边点的方向，把它作为XY平面坐标系的X轴正方向，左边点就作为显示平面坐标系的原点。

步骤103：所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。

具体地，所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元，包括：

所述主控终端对所述第三图像和所述第四图像进行图像识别，获取以设定位姿排列的各显示终端的显示屏幕的最外围的四个端点，将所述最外围的四个端点连线形成的四边形内的各显示屏幕作为第一显示单元；

这里，所述第一显示单元即为各显示终端的显示屏幕拼接后的屏幕；

具体地，步骤103之后，所述方法还包括：

所述主控终端根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

具体来说，所述主控终端对所述第三图像和所述第四图像进行图像识别，根据所述第三图像和所述第四图像确定所述显示终端的显示屏幕的四角的端点在所述平面上的坐标信息，根据坐标信息确定四角的端点连线形成的四边形在第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

举例来说，所述主控终端可以发送单一颜色(如：纯蓝色)的图像给各个显示终端，再利用双摄像头定位，检测到显示终端所在位置的纯蓝色区域的四个角的坐标，从而根据四个角的坐标确定显示终端的显示屏幕，为了避免误差，比如显示终端的周围本身有蓝色背景而导致的显示区域计算不准的问题，在蓝色的图像定位后，还可用其他单色(纯绿色、纯红色等)的图像进行定位，多次定位的结果综合确定显示屏幕，确保不受背景颜色干扰。

具体地，所述主控终端根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例之后，所述方法还可以包括：

所述主控终端确定第三显示数据后，根据所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例分割所述第三显示数据，并确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，使所述各显示终端的显示屏幕按所确定的显示方向显示所接收的分割后的第三显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

具体地，所述确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，包括：

以任一所述显示终端的显示屏幕的显示方向为基准方向，将其他显示终端的显示屏幕的显示方向与所述基准方向调整一致；根据调整后的方向确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向；将切割后的第三显示数据向所述显示终端的显示屏幕发送。

这里是考虑到如果传输的图像不考虑显示方向，最终拼接出来的图像可能会出拼接错位的问题。

具体地，所述主控终端确定第三显示数据之后，所述方法还可以包括：

所述主控终端将所述第三显示数据、所述各显示终端的显示屏幕的显示方向、所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例发送给各显示终端；

由各显示终端确定对应的显示数据，以任一所述显示终端的显示屏幕的显示方向为基准方向，按所述基准方向显示确定的显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

图2为本发明实施例提供的一种多显示终端拼接的示意图；如图2所示，用户若需要用若干台显示终端合作显示一幅图像或者合作播放一个视频，可以将若干台显示终端平铺在一张桌子上，按设定位姿排列完成后，各显示终端拼接后获得一整块显示区域，即第一显示单元，所述第一显示单元可以用于显示一整副图像。

主控终端与各显示终端进行通信，由主控终端发送第一显示数据和第二显示数据给所有显示终端，所述主控终端通过双摄像头的拍摄显示终端，利用双摄像头的测距功能，计算出每个显示终端的相对位置、显示终端的显示屏幕的显示方向，测试各个显示终端的显示屏幕的面积，从而确定所有显示终端的精确位置与方向。

图3为本发明实施例提供的一种第一显示图像的示意图；如图3所示，图中包括编号和横线；该图像可以针对如“O”等旋转180度后无区别的字母用来确定显示方向的，对图像的编号内容无要求。

主控终端对拍摄第一显示图像后获得的第一图像和第二图像进行图像分析，提取特征点，例如字母A的顶点和两个底脚的点；通过双摄像头的空间定位功能，确定3个点的空间坐标。具体方法可以包括：提取任意三点，确定三点的坐标，根据这三点的坐标确定一个平面；提取横线上的任意两点，确定这两点的坐标，根据这两点的坐标可以构建XY平面坐标系，再设定其中一点为坐标原点，从而确定X轴的正方向。

图4为本发明实施例提供的显示方向不统一的图像显示示意图，如图4所示，若未统一显示终端的显示屏幕的显示方向，图像的显示方向会发生错乱。因此，本发明实施例中，可以以平面坐标系的X轴为正方向，当其他显示终端显示的图像的方向与X轴正方向不同时，计算出对应的夹角，利用夹角数值，在发送图像给显示终端的之前，将图像旋转对应的角度，夹角为多少，切割的图像就相应旋转多少角度，从而投影出来的内容不会产生某个局部区域显示图像颠倒的情况。

需要说明的是，每个显示终端接收并显示自己收到的图像，最终给用户呈现的效果即为所有显示终端拼接后显示同一张图像；若要显示视频，实际处理方式可以将每一帧图像重复上述图像切割、旋转、发送的过程，实现视频效果的显示。同理，如PPT等内容也可以通过上述图像切割、旋转、发送的过程显示在拼接的显示区域内。

当显示终端开始显示各个切割后的图像后，主控终端可以关闭双摄像头，停止监控各个显示终端，主控终端也无需固定在支架上，可以任意移动位置；也可以不关闭双摄像头，继续监控显示终端，若出现显示终端发生较大位移的情况，双摄像头可以重新进行定位。这时，由于图像已经在正常播放，可以只针对移动的一台显示终端来执行重新定位，而不影响其他显示终端的播放过程。这样针对播放过程中的单个显示终端的位移处理，提高系统平稳运行时的突发情况处理能力，避免发生意外后需要重新全面初始化的问题。

在运行过程中，因为电量太低或者其他突发情况出现的有一台显示终端退出显示系统的情况时，可以先不作任何处理，继续其他显示终端的内容显示；在用户针对剩余显示终端做了调整后，主控终端再根据调整的显示终端，启动个别显示终端的初始化过程，如此操作可以不影响整个系统的运行流畅度。

运行过程中，可以有新的显示终端的加入，当有新的显示终端加入时只需要针对新的显示终端进行初始化过程，包括：确定新的显示终端的显示屏幕的显示方向、显示范围、相对位置等。主控终端根据加入的新的显示终端重现确定各显示终端的显示区域，进行图像切割、旋转、发送，由包括新的显示终端的各个显示终端拼接后的第一显示单元来显示图像。

当系统运行过程中，仍然可以随时调整画面显示的缩放。

显示终端进入、退出不影响的播放流畅度，当然若大量显示终端加入或退出时，还可以调整画面的显示比例，完成更广泛的适应性。

这里，系统调整画面显示的缩放比例时，可以在主控终端中预制几种通用的算法，可以在初始化的时候完成自动缩放，提高操作的简便性。所述算法可以包括但不限于以下三种：

1、画面全显示：要求待显示的图像的4个角，能够完全显示在显示终端；

2、显示终端全部有图像：要求所有显示终端的显示区域都有画面显示；

3、中心80％内容完全显示：确定中心的80％区域，中心的80％区域对应的4个角都需要能够完全显示在显示终端上。

本发明实施例中，利用两个摄像头的相对距离、特征点之间的独立成像的视差，以及摄像头的当时的焦距信息，可以确定特征点在空间中的相对于摄像头组的相对位置。

图5为本发明实施例中利用双摄像头测距原理的示意图；如图5所示，运用双摄像头，具体包括：第一摄像头和第二摄像头，进行空间定位时，双摄像头处于同一水平面上，同时对某一物体拍照，这里用P表示，分别获得第一图形和第二图形。

在拍摄获得的第一图形和第二图形上分别获得P_l和P_r，这两点相对于图形的中心点构成一个平面坐标。利用相似三角形原理，通过两个摄像头在移动终端上的相对位置，确定O_l和O_r两点的相对位置。O_lP_l和O_rP_r的向量方向与O_lP和O_rP的向量方向完全对应；根据O_l和O_r两点的相对位置、摄像头的焦距信息等信息，运用双摄像头空间定位的算法计算出P点相对于双摄像头组的相对位置；这里相对位置可以用一个三维坐标系表示，该三维坐标系中的X轴和Y轴组成的平面即为显示平面。

通过上述方法即可确定各个显示终端相对于所述主控终端的相对位置。

图6为本发明实施例提供的另一种多屏拼接显示的方法流程示意图；如图6所示，所述方法包括：

步骤601：将所有显示终端与主控终端连接后，主控终端为每个显示终端设置一个编号；

步骤602：各显示终端按设定位姿排列，将主控终端的双摄像头固定，保证双摄像头能够拍摄到各个显示终端；

步骤603：主控终端发送第一显示数据给显示终端，显示终端进入初始化过程；

步骤604：主控终端判断是否能检测到显示终端根据所述第一显示数据显示的图像，能够检测到图像则进入步骤606，不能检测到图像则进入步骤605；

步骤605：给用户一个提示，例如“未找到图像，请确认主控终端的摄像头可以覆盖到所有显示终端”，返回步骤602；

步骤606：主控终端通过第一摄像头获取包含所述各显示终端的第一图像，通过第二摄像头获取包含所述各显示终端的第二图像，利用第一图像和第二图像的特征信息，完成显示平面的坐标系建立；

步骤607：确定所有显示终端的显示屏幕的显示方向，以及显示终端的相对位置；

步骤608：所述主控终端向所述各显示终端发送第二显示数据，所述第二显示数据使所述显示终端在显示屏幕上显示单一颜色的第二显示图像；所述主控终端通过所述第一摄像头获取包含所述各显示终端的第三图像，通过所述第二摄像头获取包含所述各显示终端的第四图像；主控终端根据第三图像和第四图像确定所有显示终端的显示区域，从而确定由各个显示终端拼接而成的第一显示单元；

步骤609：主控终端将第一显示单元与原始图像进行显示范围的匹配，确定每个显示终端的显示屏幕需要显示的内容；

步骤610：主控终端完成第三显示数据的切割，发送给每一台对应的显示终端，由各个显示终端完成对应图像的显示；

步骤611：至此，可以利用多台显示终端合作完成同一个画面的显示。

图7为本发明实施例提供的一种多屏拼接显示的装置结构示意图；如图7所示，待拼接的各显示终端以设定位姿排列，使各显示终端的显示屏幕位于同一平面上，所述装置包括：第一处理模块701、第二处理模块702、第三处理模块703；其中，

所述第一处理模块701，用于通过第一摄像头和第二摄像头获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；

具体地，所述第一处理模块701，具体用于向所述各显示终端发送第一显示数据，所述第一显示数据使所述显示终端在显示屏幕上显示第一显示图像；

通过第一摄像头获取包含所述各显示终端的第一图像，通过第二摄像头获取包含所述各显示终端的第二图像。

具体地，所述第一处理模块701，具体用于向所述各显示终端发送第二显示数据，所述第二显示数据使所述显示终端在显示屏幕上显示单一颜色的第二显示图像；

通过所述第一摄像头获取包含所述各显示终端的第三图像，通过所述第二摄像头获取包含所述各显示终端的第四图像。

这里，所述第一图像和所述第二图像为分别由第一摄像头和第二摄像头拍摄的包括显示屏幕上显示第一显示图像时的各个显示终端的图像；通过识别第一图像和第二图像可以确定各个显示终端的显示屏幕的显示方向。

这里，所述第三图像和所述第四图像为分别由第一摄像头和第二摄像头拍摄的包括在显示屏幕上显示第二显示图像时的各个显示终端的图像；通过识别第三图像和第四图像可以确定各个显示终端的显示屏幕组成的总显示屏幕，及各个显示屏幕在所述总显示屏幕上的相对位置、所占比例等。

需要说明的是，这里可以运用双摄像头进行空间定位，双摄像头处于同一水平面上，同时对某一物体拍照，根据拍摄的图像进行定位。因此，所述装置中可以保存有双摄像头的信息，包括：所述第一摄像头和所述第二摄像头之间的相对距离，所述第一摄像头和所述第二摄像头的焦距信息等。

所述第二处理模块702，用于根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；

具体地，所述显示终端在显示屏幕上显示的第一显示图像，包括：编号和位于所述编号下方且垂直于显示终端的任一边框的横线；

所述第二处理模块702，具体用于对所述第一图像和所述第二图像进行图像识别，从所述第一图像和第二图像上提取所述横线上的两个设定特征点，确定两个设定特征点从左至右连成的向量，向量方向作为所述显示终端的显示屏幕的显示方向。

具体地，所述第二处理模块702，具体用于从所述第一图像和第二图像上提取不在同一直线上的三个特征点，根据三个特征点确定所述显示终端的显示屏幕的平面。

具体地，所述第二处理模块702，具体用于确定所述设定特征点在所述平面上的坐标，根据所述设定特征点的坐标确定两个设定特征点从左至右连成的向量，将所述向量方向作为所述显示终端的显示屏幕的显示方向。

所述第三处理模块703，用于根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。

具体来说，所述第三处理模块703，具体用于：对所述第三图像和所述第四图像进行图像识别，获取以设定位姿排列的各显示终端的显示屏幕的最外围的四个端点在所述平面上的坐标信息，根据坐标信息确定所述最外围的四个端点连线形成的四边形内的各显示屏幕作为所述第一显示单元。

具体地，所述第三处理模块703，还用于根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

具体来说，所述第三处理模块703，具体用于确定所述显示终端的显示屏幕的四角的端点在所述平面上的坐标信息，根据坐标信息确定四角的端点连线形成的四边形在第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

所述装置，还包括：所述第四处理模块704；

所述第四处理模块704，用于在确定第三显示数据后，根据所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例分割所述第三显示数据，并确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，使所述各显示终端的显示屏幕按所确定的显示方向显示所接收的分割后的第三显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

具体地，所述第四处理模块704，具体用于：以任一所述显示终端的显示屏幕的显示方向为基准方向，将其他显示终端的显示屏幕的显示方向与所述基准方向调整一致；根据调整后的方向确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向；将切割后的第三显示数据向所述显示终端的显示屏幕发送。

所述第四处理模704，还可以用于：在确定第三显示数据后，将所述第三显示数据、所述各显示终端的显示屏幕的显示方向、所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例发送给各显示终端；

由各显示终端确定对应的显示数据，以任一所述显示终端的显示屏幕的显示方向为基准方向，按所述基准方向显示确定的显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

图8为本发明实施例提供的一种多屏拼接显示的系统结构示意图；如图8所示，所述系统包括：多屏拼接显示的装置、无线传输模块811、双摄像头模块812、设置模块813、存储模块814；其中，

所述多屏拼接显示的装置，可以采用图7所示的装置，不再赘述；

所述无线传输模块811，用于连接各个显示终端，传输第一显示数据、第二显示数据、第三显示数据等；

所述双摄像头模块812，包括两个摄像头，用于拍摄各个显示终端；

所述存储模块814，用于保存计算过程中的数据、双摄像头的相关信息，同时记录用户的偏好设置；

所述设置模块813，用于设置用户的偏好；所述偏好包括：等比缩放的算法。

所述双摄像头的相关信息包括：两个摄像头之间的相对距离，两个摄像头的焦距信息等。

所述显示装置与上述实施例提供的多屏拼接显示的装置相同，不再赘述。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (22)

1.一种多屏拼接显示的方法，其特征在于，待拼接的各显示终端以设定位姿排列，使各显示终端的显示屏幕位于同一平面上；所述方法包括：

主控终端通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；

所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；

所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。

2.根据权利要求1所述的方法，其特征在于，所述主控终端通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，包括：

所述主控终端向所述各显示终端发送第一显示数据，所述第一显示数据使所述显示终端在显示屏幕上显示第一显示图像；

所述主控终端通过第一摄像头获取包含所述各显示终端的第一图像，通过第二摄像头获取包含所述各显示终端的第二图像。

3.根据权利要求2所述的方法，其特征在于，所述显示终端在显示屏幕上显示的第一显示图像，包括：编号和位于所述编号下方且垂直于显示终端的任一边框的横线；

所述主控终端根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向，包括：

所述主控终端对所述第一图像和所述第二图像进行图像识别，从所述第一图像和第二图像上提取所述横线上的两个设定特征点，确定两个设定特征点从左至右连成的向量，向量方向作为所述显示终端的显示屏幕的显示方向。

4.根据权利要求3所述的方法，其特征在于，所述主控终端对所述第一图像和所述第二图像进行图像识别之后，还包括：

所述主控终端从所述第一图像和第二图像上提取不在同一直线上的三个特征点，根据三个特征点确定所述显示终端的显示屏幕的平面。

5.根据权利要求4所述的方法，其特征在于，所述确定两个设定特征点从左至右连成的向量，包括：

确定所述设定特征点在所述平面上的坐标，根据所述设定特征点的坐标确定两个设定特征点从左至右连成的向量，将向量方向作为所述显示终端的显示屏幕的显示方向。

6.根据权利要求1所述的方法，其特征在于，所述主控终端通过第一摄像头和第二摄像头分别获取包含显示第二显示图像时的所述各显示终端的第三图像和第四图像，包括：

所述主控终端向所述各显示终端发送第二显示数据，所述第二显示数据使所述显示终端在显示屏幕上显示单一颜色的第二显示图像；

通过第一摄像头获取包含所述各显示终端的第三图像，通过第二摄像头获取包含所述各显示终端的第四图像。

7.根据权利要求4所述的方法，其特征在于，所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元之后，所述方法还包括：

所述主控终端根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例；

所述主控终端确定第三显示数据后，根据所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例分割所述第三显示数据，并确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，使所述各显示终端的显示屏幕按所确定的显示方向显示所接收的分割后的第三显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

8.根据权利要求7所述的方法，其特征在于，所述主控终端根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元，包括：

所述主控终端对所述第三图像和所述第四图像进行图像识别，获取以设定位姿排列的各显示终端的显示屏幕的最外围的四个端点在所述平面上的坐标信息，根据坐标信息确定所述最外围的四个端点连线形成的四边形内的各显示屏幕作为所述第一显示单元。

9.根据权利要求7所述的方法，其特征在于，所述主控终端根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例，包括：

确定所述显示终端的显示屏幕的四角的端点在所述平面上的坐标信息，根据坐标信息确定四角的端点连线形成的四边形在第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

10.根据权利要求7所述的方法，其特征在于，所述确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，包括：

以任一所述显示终端的显示屏幕的显示方向为基准方向，将其他显示终端的显示屏幕的显示方向与所述基准方向调整一致；根据调整后的方向确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向；将切割后的第三显示数据向所述显示终端的显示屏幕发送。

11.根据权利要求7所述的方法，其特征在于，所述主控终端确定第三显示数据之后，所述方法包括：

所述主控终端将所述第三显示数据、所述各显示终端的显示屏幕的显示方向、所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例发送给各显示终端；

由各显示终端确定对应的显示数据，以任一所述显示终端的显示屏幕的显示方向为基准方向，按所述基准方向显示确定的显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

12.一种多屏拼接显示的装置，其特征在于，待拼接的各显示终端以设定位姿排列，使各显示终端的显示屏幕位于同一平面上；所述装置包括：第一处理模块、第二处理模块和第三处理模块；其中，

所述第一处理模块，用于通过第一摄像头和第二摄像头分别获取包含显示第一显示图像时的所述各显示终端的第一图像和第二图像，及包含显示第二显示图像时的所述各显示终端的第三图像和第四图像；

所述第二处理模块，用于根据所述第一图像和所述第二图像确定所述各显示终端的显示屏幕的显示方向；

所述第三处理模块，用于根据所述第三图像和所述第四图像确定由所述各显示终端的显示屏幕组成的第一显示单元。

13.根据权利要求12所述的装置，其特征在于，所述第一处理模块，具体用于向所述各显示终端发送第一显示数据，所述第一显示数据使所述显示终端在显示屏幕上显示第一显示图像；

通过第一摄像头获取包含所述各显示终端的第一图像，通过第二摄像头获取包含所述各显示终端的第二图像。

14.根据权利要求13所述的装置，其特征在于，所述显示终端在显示屏幕上显示的第一显示图像，包括：编号和位于所述编号下方且垂直于显示终端的任一边框的横线；

所述第二处理模块，具体用于：对所述第一图像和所述第二图像进行图像识别，从所述第一图像和第二图像上提取所述横线上的两个设定特征点，确定两个设定特征点从左至右连成的向量，向量方向作为所述显示终端的显示屏幕的显示方向。

15.根据权利要求14所述的装置，其特征在于，所述第二处理模块，具体用于从所述第一图像和第二图像上提取不在同一直线上的三个特征点，根据三个特征点确定所述显示终端的显示屏幕的平面。

16.根据权利要求15所述的装置，其特征在于，所述第二处理模块，具体用于确定所述设定特征点在所述平面上的坐标，根据所述设定特征点的坐标确定两个设定特征点从左至右连成的向量，将向量方向作为所述显示终端的显示屏幕的显示方向。

17.根据权利要求12所述的装置，其特征在于，所述第一处理模块，具体用于：向所述各显示终端发送第二显示数据，所述第二显示数据使所述显示终端在显示屏幕上显示单一颜色的第二显示图像；

通过第一摄像头获取包含所述各显示终端的第三图像，通过第二摄像头获取包含所述各显示终端的第四图像。

18.根据权利要求12所述的装置，其特征在于，所述第三处理模块，还用于：根据所述第三图像和所述第四图像确定所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

19.根据权利要求12所述的装置，其特征在于，所述装置，还包括第四处理模块；所述第四处理模块，用于确定第三显示数据后，根据所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例分割所述第三显示数据，并确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向，将分割后的第三显示数据向所述各显示终端的显示屏幕发送，使所述各显示终端的显示屏幕按所确定的显示方向显示所接收的分割后的第三显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。

20.根据权利要求15所述的装置，其特征在于，所述第三处理模块，具体用于：对所述第三图像和所述第四图像进行图像识别，获取以设定位姿排列的各显示终端的显示屏幕的最外围的四个端点在所述平面上的坐标信息，根据坐标信息确定所述最外围的四个端点连线形成的四边形内的各显示屏幕作为所述第一显示单元；

确定所述显示终端的显示屏幕的四角的端点在所述平面上的坐标信息，根据坐标信息确定四角的端点连线形成的四边形在第一显示单元中的相对位置信息及在所述第一显示单元中所占比例。

21.根据权利要求19所述的装置，其特征在于，所述第四处理模块，具体用于：以任一所述显示终端的显示屏幕的显示方向为基准方向，将其他显示终端的显示屏幕的显示方向与所述基准方向调整一致；根据调整后的方向确定各分割后的第三显示数据在对应的显示指定的显示屏幕上的显示方向；将切割后的第三显示数据向所述显示终端的显示屏幕发送。

22.根据权利要求12所述的装置，其特征在于，所述装置，还包括第四处理模块；所述第四处理模块，用于：确定第三显示数据后，将所述第三显示数据、所述各显示终端的显示屏幕的显示方向、所述各显示终端的显示屏幕在所述第一显示单元中的相对位置信息及在所述第一显示单元中所占比例发送给各显示终端；

由各显示终端确定对应的显示数据，以任一所述显示终端的显示屏幕的显示方向为基准方向，按所述基准方向显示确定的显示数据，使所述第一显示单元显示第三显示数据形成第三显示图像。