CN110807729A - 图像数据的处理方法及装置 - Google Patents

Abstract

本发明实施例公开了一种图像数据的处理方法及装置，涉及电子信息领域，包括：识别图像数据中包含目标对象的目标屏幕区域；确定与所述目标屏幕区域相对应的各条区域边线；根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度；根据所述偏转角度对所述目标屏幕区域进行变换处理，以在所述显示屏幕中显示处理后的图像数据。该方式使处理后的目标屏幕区域的显示内容处于正常的非偏转状态，避免了显示屏幕中的部分区域的显示内容发生形变的问题。

Description

图像数据的处理方法及装置

技术领域

本发明实施例涉及电子信息领域，具体涉及一种图像数据的处理方法及装置。

背景技术

目前，随着电子信息技术的日益普及，在很多场合都需要通过观看电子屏幕的方式来获取信息。例如，在参加会议的过程中，会议主讲人通过投屏等方式将PPT内容投放在位于会议室中央的屏幕上，以供参会人员观看。又如，在观看电影的过程中，电影内容将通过影院的电子屏幕展示给观众。借助电子屏幕，能够将信息内容同时展示给大量的信息接收者，从而提高了信息传播效率。

但是，发明人在实现本发明的过程中发现，现有技术中的上述方式至少存在如下缺陷：在上述场景中，一个电子屏幕需要同时面向大量的信息接收者提供信息内容，各个信息接收者与电子屏幕之间的位置关系各有不同。对于位于偏僻角落的信息接收者而言，由于所处位置太偏，将导致观察到的电子屏幕处于倾斜状态，进而导致电子屏幕中的部分区域的显示内容发生形变，无法按照正常状态进行显示。

发明内容

鉴于上述问题，提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种图像数据的处理方法及装置。

根据本发明实施例的一个方面，提供了一种图像数据的处理方法，包括：

识别图像数据中包含目标对象的目标屏幕区域；确定与所述目标屏幕区域相对应的各条区域边线；

根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度；

根据所述偏转角度对所述目标屏幕区域进行变换处理，以在所述显示屏幕中显示处理后的图像数据。

可选的，所述各条区域边线之间的相对位置关系包括以下中的至少一种：

各条区域边线中相对的两条边线之间的长度差；

各条区域边线中相对的两条边线的延长线之间的位置关系；其中，所述两条边线的延长线之间的位置关系包括：平行或相交，并且，当两条边线的延长线相交时，所述两条边线的延长线之间的位置关系进一步包括两条边线的延长线之间的夹角；

各条区域边线中相邻的两条边线之间的夹角；以及

由各条区域边线构成的多边形区域的区域形状和/或多边形区域中包含的各个子区域的形状或面积。

可选的，所述根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度具体包括：

根据各条区域边线之间的第一位置关系判断所述目标对象的朝向与所述显示屏幕的朝向是否匹配；

当判断结果为否时，根据各条区域边线之间的第二位置关系确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述区域边线的数量为四条，则所述根据各条区域边线之间的第一位置关系判断所述目标对象的朝向与所述显示屏幕的朝向是否匹配包括：

将互不相邻且朝向相对的两条边线确定为一个相对边线组，根据各个相对边线组中包含的两条边线之间的长度差确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配；和/或，

判断相对边线组中包含的两条边线的延长线是否相交，当相对边线组中包含的两条边线的延长线相交时，根据两条边线的延长线之间的夹角确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配；和/或，

将相邻的两条边线确定为一个相邻边线组，确定各个相邻边线组中包含的两条边线之间的夹角，根据所述相邻边线组中包含的两条边线之间的夹角确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配。

可选的，所述根据各条区域边线之间的第二位置关系确定所述目标对象相对于显示屏幕的偏转角度包括：

针对由各条区域边线构成的多边形区域，通过分割线将所述多边形区域划分为第一子区域以及第二子区域；

确定所述第一子区域的第一区域面积以及第二子区域的第二区域面积，根据所述第一区域面积与第二区域面积之间的比较结果确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述通过分割线将所述多边形区域划分为第一子区域以及第二子区域包括：

确定由各条区域边线构成的多边形区域的重心位置点，将经过所述重心位置点的水平线或竖直线确定为所述分割线，并通过所述分割线将所述多边形区域划分为第一子区域以及第二子区域。

可选的，所述根据所述第一区域面积与第二区域面积之间的比较结果确定所述目标对象相对于显示屏幕的偏转角度包括：

计算所述第一区域面积与第二区域面积之间的比值，根据所述比值确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述识别图像数据中包含目标对象的目标屏幕区域包括：

通过边缘检测算法识别所述图像数据中包含的与目标对象相对应的目标屏幕区域；

根据所述目标屏幕区域在所述显示屏幕中占据的比例执行变焦处理，以使变焦处理后的目标屏幕区域在所述显示屏幕中占据的比例与预设比例阈值匹配。

可选的，所述确定与所述目标屏幕区域相对应的各条区域边线包括：

通过直线检测算法识别与所述图像数据中的像素点相匹配的多条直线段；

根据变焦处理后的目标屏幕区域的区域位置信息，从所述多条直线段中筛选与所述目标屏幕区域相匹配的直线段，根据筛选出的各条直线段确定与所述目标屏幕区域相对应的各条区域边线。

可选的，所述目标对象包括：用于展示会议内容或演出内容的信息展示屏幕。

可选的，当所述目标对象进一步包括至少两个子屏幕时，所述根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度进一步包括：

分别确定各个子屏幕相对于所述显示屏幕的偏转角度；

对比各个子屏幕中的显示内容，根据对比结果以及各个子屏幕相对于所述显示屏幕的偏转角度，将所述至少两个子屏幕划分为主屏幕以及辅助屏幕；

则所述根据所述偏转角度对所述目标屏幕区域进行变换处理包括：对所述主屏幕所对应的区域进行变换处理，并结合辅助屏幕中的显示内容对主屏幕中的显示内容进行修正。

可选的，所述根据所述偏转角度对所述目标屏幕区域进行变换处理包括：

根据所述偏转角度生成变换矩阵，通过所述变换矩阵对所述目标屏幕区域进行变换处理。

根据本发明实施例的另一个方面，提供了一种图像数据的处理装置，包括：

识别模块，适于识别图像数据中包含目标对象的目标屏幕区域，确定与所述目标屏幕区域相对应的各条区域边线；

角度确定模块，适于根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度；

变换处理模块，适于根据所述偏转角度对所述目标屏幕区域进行变换处理，以在所述显示屏幕中显示处理后的图像数据。

可选的，所述各条区域边线之间的相对位置关系包括以下中的至少一种：

各条区域边线中相对的两条边线之间的长度差；

各条区域边线中相对的两条边线的延长线之间的位置关系；其中，所述两条边线的延长线之间的位置关系包括：平行或相交，并且，当两条边线的延长线相交时，所述两条边线的延长线之间的位置关系进一步包括两条边线的延长线之间的夹角；

各条区域边线中相邻的两条边线之间的夹角；以及

由各条区域边线构成的多边形区域的区域形状和/或多边形区域中包含的各个子区域的形状或面积。

可选的，所述角度确定模块具体适于：

根据各条区域边线之间的第一位置关系判断所述目标对象的朝向与所述显示屏幕的朝向是否匹配；

当判断结果为否时，根据各条区域边线之间的第二位置关系确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述区域边线的数量为四条，则所述角度确定模块具体适于：

将互不相邻且朝向相对的两条边线确定为一个相对边线组，根据各个相对边线组中包含的两条边线之间的长度差确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配；和/或，

判断相对边线组中包含的两条边线的延长线是否相交，当相对边线组中包含的两条边线的延长线相交时，根据两条边线的延长线之间的夹角确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配；和/或，

将相邻的两条边线确定为一个相邻边线组，确定各个相邻边线组中包含的两条边线之间的夹角，根据所述相邻边线组中包含的两条边线之间的夹角确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配。

可选的，所述角度确定模块具体适于：

针对由各条区域边线构成的多边形区域，通过分割线将所述多边形区域划分为第一子区域以及第二子区域；

确定所述第一子区域的第一区域面积以及第二子区域的第二区域面积，根据所述第一区域面积与第二区域面积之间的比较结果确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述角度确定模块具体适于：

确定由各条区域边线构成的多边形区域的重心位置点，将经过所述重心位置点的水平线或竖直线确定为所述分割线，并通过所述分割线将所述多边形区域划分为第一子区域以及第二子区域。

可选的，所述角度确定模块具体适于：计算所述第一区域面积与第二区域面积之间的比值，根据所述比值确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述识别模块具体适于：

通过边缘检测算法识别所述图像数据中包含的与目标对象相对应的目标屏幕区域；

根据所述目标屏幕区域在所述显示屏幕中占据的比例执行变焦处理，以使变焦处理后的目标屏幕区域在所述显示屏幕中占据的比例与预设比例阈值匹配。

可选的，所述识别模块具体适于：

通过直线检测算法识别与所述图像数据中的像素点相匹配的多条直线段；

根据变焦处理后的目标屏幕区域的区域位置信息，从所述多条直线段中筛选与所述目标屏幕区域相匹配的直线段，根据筛选出的各条直线段确定与所述目标屏幕区域相对应的各条区域边线。

可选的，所述目标对象包括：用于展示会议内容或演出内容的信息展示屏幕。

可选的，当所述目标对象进一步包括至少两个子屏幕时，所述角度确定模块进一步适于：

分别确定各个子屏幕相对于所述显示屏幕的偏转角度；

对比各个子屏幕中的显示内容，根据对比结果以及各个子屏幕相对于所述显示屏幕的偏转角度，将所述至少两个子屏幕划分为主屏幕以及辅助屏幕；

则所述变换处理模块具体适于：对所述主屏幕所对应的区域进行变换处理，并结合辅助屏幕中的显示内容对主屏幕中的显示内容进行修正。

可选的，所述变换处理模块具体适于：

根据所述偏转角度生成变换矩阵，通过所述变换矩阵对所述目标屏幕区域进行变换处理。

依据本发明实施例的再一方面，提供了一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如上述的图像数据的处理方法对应的操作。

依据本发明实施例的再一方面，提供了一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行如上述的图像数据的处理方法对应的操作。

在本发明实施例提供的图像数据的处理方法及装置中，能够识别图像数据中包含目标对象的目标屏幕区域，并确定与目标屏幕区域相对应的各条区域边线，从而确定目标对象相对于显示屏幕的偏转角度，以便根据该偏转角度对目标屏幕区域进行变换处理。由此可见，该方式能够采集与目标对象相对应的目标屏幕区域，并根据该目标屏幕区域的偏转角度进行图像处理，从而使处理后的目标屏幕区域的显示内容处于正常的非偏转状态。该方式避免了显示屏幕中的部分区域的显示内容发生形变的问题。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1示出了本发明实施例一提供的一种图像数据的处理方法的流程图；

图2示出了本发明实施例二提供的一种图像数据的处理方法的流程图；

图3示出了本发明实施例三提供的一种图像数据的处理装置的结构图；

图4示出了本发明实施例五提供的一种电子设备的结构示意图；

图5示出了一种目标屏幕区域的示意图；

图6示出了经变换处理后的目标屏幕区域的示意图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

实施例一

图1示出了本发明实施例一提供的一种图像数据的处理方法的流程图。

如图1所示，该方法包括：

步骤S110：识别图像数据中包含目标对象的目标屏幕区域。

其中，目标对象可以为多种形式，例如，包括用于展示信息内容的屏幕，具体可以为大型会议室中的投影屏幕、电影院的电子屏幕等；又如，还可以为舞台上的演员、道具、布景等内容，本发明对此不做限定。

具体地，本步骤可以通过各类图像采集设备实施。其中，图像采集设备可以为信息接收者所拥有的移动终端，相应地，信息接收者通过该图像采集设备拍摄目标对象。在本步骤中，通过对图像采集设备获取到的图像数据进行识别，能够确定其中包含的与目标对象相对应的目标屏幕区域。

步骤S120：确定与目标屏幕区域相对应的各条区域边线。

其中，与目标屏幕区域相对应的各条区域边线是指：构成目标屏幕区域的轮廓的边线，具体可以为直线或类似于直线的曲线等。通常情况下，显示屏幕为矩形，相应地，与目标屏幕区域相对应的区域边线的数量为四条。当然，本发明不限定显示屏幕的形状以及区域边线的具体数量。

步骤S130：根据各条区域边线之间的相对位置关系，确定目标对象相对于显示屏幕的偏转角度。

其中，各条区域边线之间的相对位置关系泛指各类能够描述各条区域边线之间的相互位置的信息以及各类能够描述由各条区域边线构成的多边形区域的区域属性的信息。本发明对各条区域边线之间的相对位置关系的具体内涵不做限定，凡是有助于描述目标屏幕区域的区域属性的内容均可用于本发明实施例。例如，各条区域边线之间的相对位置关系包括以下中的至少一种：各条区域边线中相对的两条边线之间的长度差；各条区域边线中相对的两条边线的延长线之间的位置关系；其中，两条边线的延长线之间的位置关系包括：平行或相交，并且，当两条边线的延长线相交时，两条边线的延长线之间的位置关系进一步包括两条边线的延长线之间的夹角；各条区域边线中相邻的两条边线之间的夹角；以及由各条区域边线构成的多边形区域的区域形状和/或多边形区域中包含的各个子区域的形状或面积。其中，当区域形状为梯形时说明目标对象相对于显示屏幕可能存在偏转。另外，多边形区域中包含的各个子区域可以根据各种方式划分，通过各个子区域的形状或面积等相关信息能够确定目标对象相对于显示屏幕的偏转角度。

具体地，在根据各条区域边线之间的相对位置关系，确定目标对象相对于显示屏幕的偏转角度时，可通过多种方式确定，例如，可以通过以下方式中的至少一种确定：

在第一种方式中，将互不相邻且朝向相对的两条边线确定为一个相对边线组，确定各个相对边线组中包含的两条边线之间的长度差，根据长度差确定目标对象相对于显示屏幕的偏转角度。

在第二种方式中，将相邻的两条边线确定为一个相邻边线组，确定各个相邻边线组中包含的两条边线之间的相邻边线间夹角，根据相邻边线间夹角确定目标对象相对于显示屏幕的偏转角度。

在第三种方式中，确定各个相对边线组中包含的两条边线的延长线之间的位置关系，根据两条边线的延长线之间是否相交以及相交后的夹角来确定目标对象相对于显示屏幕的偏转角度。

在第四种方式中，确定由各条区域边线构成的多边形的中心线，计算由中心线划分的第一子区域的第一区域面积以及第二子区域的第二区域面积，根据第一区域面积与第二区域面积之间的比较结果确定目标对象相对于显示屏幕的偏转角度。

步骤S140：根据偏转角度对目标屏幕区域进行变换处理，以在显示屏幕中显示处理后的图像数据。

具体地，根据偏转角度生成用于修正该偏转角度，从而使图像数据转正的变换矩阵，相应地，通过该变换矩阵对目标屏幕区域进行变换处理。经变换处理后，目标屏幕区域被修正为非偏转状态，从而避免了因拍摄角度过偏所导致的内容变形失真的问题。当然，除变换矩阵之外，本领域技术人员还可以灵活采用其他各种形式进行变换处理，本发明对此不做限定。

由此可见，该方式能够采集与目标对象相对应的目标屏幕区域，并根据该目标屏幕区域的偏转角度进行图像处理，从而使处理后的目标屏幕区域的显示内容处于正常的非偏转状态。该方式避免了显示屏幕中的部分区域的显示内容发生形变的问题。

实施例二、

图2示出了本发明实施例二提供的一种图像数据的处理方法的流程图。

如图2所示，该方法包括：

步骤S200：通过图像采集设备获取包含目标对象的显示内容的图像数据。

在本实施例中，图像采集设备包括手机等各类同时具备拍摄功能、运算功能以及显示功能的终端设备。相应地，本实施例中的后续步骤均可以由该图像采集设备实施。当然，在本发明其他的实施例中，后续步骤也可以由与图像采集设备相连的其他电子设备实施，本发明对此不做限定。

具体实施时，该图像采集设备对准目标对象进行拍摄，以得到包含目标对象的显示内容的图像数据。其中，目标对象可以为用于展示会议内容或演出内容的信息展示屏幕，例如，会议屏幕、演出屏幕等各类屏幕。图像数据既可以是静态的图片数据，从而向用户展示一张静态图片；也可以是实时数据流，从而向用户展示动态视频，本发明对此不做限定。

步骤S210：识别图像数据中包含目标对象的目标屏幕区域。

其中，由于图像采集设备对准目标对象拍摄，相应地，拍摄得到的图像数据中包含与目标对象相对应的目标屏幕区域，该目标屏幕区域为用户实际需要浏览的区域。由于图像采集设备在拍摄过程中受拍摄角度、拍摄距离等多重因素的影响，从而导致图像数据中不仅包含目标屏幕区域，还会包含与目标对象相邻的背景区域，诸如目标对象周围的装饰物、工作人员等。为此，在本步骤中，需要准确识别图像数据中包含的与目标对象相对应的目标屏幕区域。具体识别时，可以通过边缘检测算法识别图像数据中包含的与目标对象相对应的目标屏幕区域。其中，边缘检测算法用于标识数字图像中亮度变化明显的点，从而能够识别出光亮屏幕的轮廓。

另外，需要说明的是，本实施例中获取到的图像数据用于显示在显示屏幕中，该显示屏幕可以是图像采集设备自带的屏幕，也可以是与图像采集设备外接的屏幕，本发明对此不做限定。由此可见，在本实施例中，显示屏幕用于对图像采集设备获取到的图像数据进行显示。

步骤S220：根据目标屏幕区域在显示屏幕中占据的比例执行变焦处理，以使变焦处理后的目标屏幕区域在显示屏幕中占据的比例与预设比例阈值匹配。

其中，本步骤为一个可选的步骤，主要用于在远距离拍摄的情况下拉近镜头从而改善因距离远所导致的图像模糊问题，在近距离拍摄的情况下也可以省略本步骤。

具体地，通过边缘检测算法识别出图像数据中包含的目标屏幕区域后，进一步计算该目标屏幕区域的区域面积，另外，根据显示屏幕的屏幕显示面积确定目标屏幕区域在显示屏幕中占据的比例。然后，将确定出的比例与预设比例阈值进行比较，若二者匹配，则确定无需调整；若二者不匹配，则根据目标屏幕区域在显示屏幕中占据的比例执行变焦处理，以使变焦处理后的目标屏幕区域在显示屏幕中占据的比例与预设比例阈值匹配。例如，假设预设比例阈值为95％，当目标屏幕区域在显示屏幕中占据的比例仅为20％时，需要利用摄像头的倍率变焦功能将摄像头拉近。具体地，需要结合摄像头的倍率以及光学原理计算需要拉近镜头的倍数，从而使变焦处理后的目标屏幕区域在显示屏幕中占据的比例与预设比例阈值匹配。具体执行变焦处理时，可以通过调用预设的系统API接口的方式实现。

通过本步骤的处理，能够将位于远处的显示屏幕拉近，并且能够自动确定需要拉近的倍数，省去了手动调焦的繁琐耗时，解决了位于远处的信息接收者无法看清屏幕的问题。

步骤S230：确定与目标屏幕区域相对应的各条区域边线。

其中，本实施例中的区域边线为直线段。具体地，通过直线检测算法识别与图像数据中的像素点相匹配的多条直线段。其中，通过直线检测算法能够识别出图像数据中包含的全部直线段。然后，根据变焦处理后的目标屏幕区域的区域位置信息，从多条直线段中筛选与目标屏幕区域相匹配的直线段，根据筛选出的各条直线段确定与目标屏幕区域相对应的各条区域边线。

具体实施时，可以通过图像跟踪技术动态跟踪目标屏幕区域在变焦处理过程中的位置信息，并根据目标屏幕区域在变焦处理后的位置信息筛选与目标屏幕区域相匹配的直线段。

步骤S240：根据各条区域边线之间的第一位置关系判断目标对象的朝向与显示屏幕的朝向是否匹配。

其中，本步骤为一个可选的步骤，主要用于确定是否触发后续的变换处理。在本发明其他的实施例中，也可以省略本步骤。具体地，当目标对象正对显示屏幕时无需进行后续的变换处理；或者，当目标对象相对于显示屏幕的偏转角度很小时，可以认为目标对象的朝向与显示屏幕的朝向近似匹配，在这种情况中，也不需要执行后续的变换处理，从而能够节约图像显示延时，降低系统资源消耗。由此可见，在本实施例中，为了提升图像显示效率，需要先根据各条区域边线之间的第一位置关系判断目标对象的朝向与显示屏幕的朝向是否匹配，并仅在判断结果为否时触发后续步骤。实际上，显示屏幕的朝向也可以理解为图像采集设备的朝向，即：本步骤实质上是判断目标对象的朝向与图像采集设备的朝向是否匹配。

其中，各条区域边线之间的第一位置关系包括各类能够快速判断目标对象的朝向与显示屏幕的朝向是否匹配的信息。例如，该第一位置信息包括以下中的至少一种：各条区域边线中相对的两条边线之间的长度差、各条区域边线中相对的两条边线的延长线之间的位置关系、以及各条区域边线中相邻的两条边线之间的夹角等。

具体实施时，区域边线的数量通常为四条，相应地，可通过以下方式中的至少一种实现：

在一种实现方式中，将互不相邻且朝向相对的两条边线确定为一个相对边线组，根据各个相对边线组中包含的两条边线之间的长度差确定显示屏幕目标对象的朝向与所述显示屏幕的朝向是否匹配。通常情况下，目标对象为矩形，因此，相对边线组中包含的两条边线的长度应相等，若存在至少一个相对边线组中包含的两条边线之间的长度差大于预设长度阈值的情况，则说明显示屏幕的朝向与目标对象的朝向不匹配。例如，图5示出了一种目标屏幕区域的示意图，如图5所示，该目标屏幕区域具有四条区域边线，分别为第一区域边线51、第二区域边线52、第三区域边线53以及第四区域边线54。其中，第一区域边线51与第二区域边线52构成一个相对边线组，第三区域边线53以及第四区域边线54构成一个相对边线组，由于显示屏幕的朝向与目标对象的朝向不匹配，导致第一区域边线51与第二区域边线52之间的长度差大于预设长度阈值。因此，通过该方式能够快速判断目标对象的朝向与所述显示屏幕的朝向是否匹配。

在又一种实现方式中，判断相对边线组中包含的两条边线的延长线是否相交，当相对边线组中包含的两条边线的延长线相交时，根据两条边线的延长线之间的夹角确定目标对象的朝向与显示屏幕的朝向是否匹配。当目标对象为矩形时，相对边线组中包含的两条边线的延长线应相互平行或近似平行，若存在相对边线组中包含的两条边线的延长线相交且相交后的夹角大于预设夹角阈值的情况，则说明显示屏幕的朝向与目标对象的朝向不匹配。例如，在图5中，第三区域边线53以及第四区域边线54的延长线相交且相交后的夹角大于预设夹角阈值，说明显示屏幕的朝向与目标对象的朝向不匹配。

在另一种实现方式中，将相邻的两条边线确定为一个相邻边线组，确定各个相邻边线组中包含的两条边线之间的夹角，根据相邻边线组中包含的两条边线之间的夹角确定目标对象的朝向与显示屏幕的朝向是否匹配。例如，当目标对象为矩形时，相邻边线组中包含的两条边线之间的夹角应为直角，若存在相邻边线组中包含的两条边线之间的夹角过大或过小的情况，则说明显示屏幕的朝向与目标对象的朝向不匹配。例如，在图5中，第三区域边线53以及第二区域边线52之间的夹角为锐角，且第三区域边线53以及第一区域边线51之间的夹角为钝角，根据具体夹角的角度与直角角度之间的差值大小可以确定目标对象的朝向与显示屏幕的朝向是否匹配。例如，夹角的角度与直角角度之间的差值较小，则说明显示屏幕的朝向与目标对象的朝向匹配；反之，则说明显示屏幕的朝向与目标对象的朝向不匹配。

上述几种方式既可以单独使用，也可以结合使用。另外，上述几种方式实质上也可以直接用于确定目标对象相对于显示屏幕的偏转角度。

步骤S250：当判断结果为否时，根据各条区域边线之间的第二位置关系确定目标对象相对于显示屏幕的偏转角度。

具体地，各条区域边线之间的第二位置关系包括各类能够确定目标对象相对于显示屏幕的偏转角度的信息，具体包括：相邻边线之间的角度关系、相对边线之间的长度差、相对边线的延长线之间的夹角等各类信息。

在本实施例中，主要根据目标屏幕区域中的各个子区域之间的面积关系进行判断：首先，针对由各条区域边线构成的多边形区域，通过分割线将多边形区域划分为第一子区域以及第二子区域；然后，确定第一子区域的第一区域面积以及第二子区域的第二区域面积，根据第一区域面积与第二区域面积之间的比较结果确定目标对象相对于显示屏幕的偏转角度。

其中，分割线主要用于将多边形区域划分为与信息接收者的距离不同的两个子区域，因此，分割线的具体设置方式取决于信息接收者相对于目标对象的位置关系。例如，当信息接收者位于目标对象的左侧时，通过竖直方向的分割线将多边形区域划分为距离信息接收者较近的第一子区域(左侧区域)以及距离信息接收者较远的第二子区域(右侧区域)。又如，当信息接收者位于目标对象的上方时，通过水平方向的分割线将多边形区域划分为距离信息接收者较近的第一子区域(上部区域)以及距离信息接收者较远的第二子区域(下部区域)。

具体实施时，在通过分割线将多边形区域划分为第一子区域以及第二子区域时，可以通过以下方式实现：首先，确定由各条区域边线构成的多边形区域的重心位置点，具体可通过悬挂法等各种数学方法确定多边形区域的重心。然后，将经过重心位置点的水平线或竖直线确定为分割线，并通过该分割线将多边形区域划分为第一子区域以及第二子区域。例如，图5中的分割线50为竖直线。

相应地，在计算第一子区域的第一区域面积以及第二子区域的第二区域面积时，可通过以下方式实现：首先，确定第一子区域的四个顶点，分别为分割线50与第三区域边线53以及第四区域边线54相交的两个点，以及第一区域边线51与第三区域边线53以及第四区域边线54相交的两个点。然后，确定四个顶点中与分割线50之间的距离最远的顶点，假设为第一区域边线51与第三区域边线53相交的点，将该距离最远的顶点作为起始点。最后，从该起始点开始，沿朝向分割线的方向按照递归算法计算第一子区域的第一区域面积。具体地，从该最远的顶点所对应的像素点开始，向分割线方向递归扫描第一子区域中包含的各个像素点，从而根据递归扫描的结果确定第一子区域的面积。通过递归算法能够提升面积计算的准确性。第二区域面积的计算方式与之类似，此处不再赘述。

另外，在根据第一区域面积与第二区域面积之间的比较结果确定目标对象相对于显示屏幕的偏转角度时，可以计算第一区域面积与第二区域面积之间的比值，根据比值确定目标对象相对于显示屏幕的偏转角度。例如，在图5所示的示例中，由于第一子区域距离信息接收者较远，因此，根据光学成像原理以及人眼的自然属性可知，第一子区域的面积必然小于第二子区域，因此，该比值必然小于一。根据比值的具体大小能够确定目标对象相对于显示屏幕的偏转角度。该偏转角度用于表示目标对象相对于显示屏幕的偏转方向以及偏转程度。

步骤S260：根据偏转角度生成变换矩阵，通过变换矩阵对目标屏幕区域进行变换处理，以在显示屏幕中显示处理后的图像数据。

具体地，根据偏转角度生成用于修正该偏转角度，从而使图像数据转正的变换矩阵，相应地，通过该变换矩阵对目标屏幕区域进行变换处理。经变换处理后，目标屏幕区域被修正为非偏转状态，从而避免了因拍摄角度过偏所导致的内容变形失真的问题。

具体实施时，根据目标对象相对于显示屏幕的偏转角度中包含的偏转方向以及角度值等信息，生成变换矩阵并确定该变换矩阵中包含的各个元素点的具体取值。相应地，将目标屏幕区域的各个像素点与该变换矩阵中的各个元素点相乘，以使目标屏幕区域通过变换矩阵实现拉伸等变形处理，从而使倾斜的目标屏幕区域处理为标准的区域。例如，图6示出了经变换处理后的目标屏幕区域的示意图，如图6所示，经变换处理后，目标屏幕区域转变为正规的矩形形状，相应地，第一区域边线61以及第二区域边线62相互平行，第三区域边线63以及第四区域边线64相互平行。

另外，本领域技术人员还可以针对上述实施例进行各种改动和变形。在一种可选的实现方式中，目标对象的数量可以为两个甚至更多个。比如，在大型会场中，通常会设置位于会场中央区域的大屏幕，以及分别位于会场两侧区域的小屏幕，各个屏幕的显示内容相同。相应地，当目标对象进一步包括至少两个子屏幕时，在根据各条区域边线之间的相对位置关系，确定目标对象相对于显示屏幕的偏转角度时，分别确定各个子屏幕相对于显示屏幕的偏转角度；并对比各个子屏幕中的显示内容，以便根据对比结果以及各个子屏幕相对于显示屏幕的偏转角度，将至少两个子屏幕划分为主屏幕以及辅助屏幕。具体地，当图像采集设备采集到包含两个子屏幕的图像数据时，将会识别出各个子屏幕所对应的区域边线，并根据每个子屏幕的区域边线的相对位置关系确定每一子屏幕相对于图像采集设备(即显示屏幕)的偏转角度。由于各个子屏幕的朝向不同，因此，各个子屏幕相对于图像采集设备的偏转角度也各不相同。另外，由于图像采集设备的采集范围有限，图像数据中可能存在显示内容不全的子屏幕。例如，图像数据中包含小屏幕的完整显示内容以及大屏幕的部分显示内容。此时，需要进一步对比各个子屏幕的显示内容，以确定两个屏幕中显示的相同的内容。然后，根据对比结果以及各个子屏幕相对于图像采集设备的偏转角度，选择至少一个子屏幕作为主屏幕，并将除主屏幕之外的子屏幕确定为辅助屏幕。具体实施时，可以将偏转角度较小、和/或显示内容全面而清晰的子屏幕确定为主屏幕。

接下来，在通过变换矩阵对目标屏幕区域进行变换处理时，具体通过变换矩阵对主屏幕所对应的区域进行变换处理，并结合辅助屏幕中的显示内容对主屏幕中的显示内容进行修正。例如，当主屏幕所显示的内容在图像数据中因拍摄不全而存在部分缺失时，可以根据辅助屏幕对主屏幕中缺失的内容进行修复。又如，当主屏幕所显示的内容在图像数据中因偏转严重而存在变形失真时，也可以根据辅助屏幕对主屏幕中失真的内容进行修复。总之，通过上述方式，能够综合多个屏幕的显示内容优化最终显示的图像清晰度，从而改善图像质量。并且，结合多个屏幕的内容进行处理的方式还能够有效解决视觉死角问题。

综上可知，通过本发明实施例的方式，能够解决参加会议或演出的过程中因所处位置不佳而影响屏幕显示效果的问题，比如，当所处位置离屏幕过远时会存在屏幕显示内容不清晰的问题，而当所处位置的角度太偏时则会导致屏幕显示内容变形失真甚至出现视觉死角。在本发明实施例中，能够借助图像处理技术，自动识别显示屏幕的偏转角度并进行转正处理，从而确保用户即使处于偏远位置也能看到转正后的清晰图像。并且，该方式能够首先根据各条区域边线之间的第一位置关系快速判断目标对象相对于图像采集设备是否发生偏转，并仅在发生偏转时进行后续处理，从而能够提高处理速度，降低处理时延。

实施例三

图3示出了本发明实施例三提供的一种图像数据的处理装置的结构示意图，该装置包括：

识别模块31，适于识别图像数据中包含目标对象的目标屏幕区域，确定与所述目标屏幕区域相对应的各条区域边线；

角度确定模块32，适于根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度；

变换处理模块33，适于根据所述偏转角度对所述目标屏幕区域进行变换处理，以在所述显示屏幕中显示处理后的图像数据。

可选的，所述各条区域边线之间的相对位置关系包括以下中的至少一种：

各条区域边线中相对的两条边线之间的长度差；

各条区域边线中相对的两条边线的延长线之间的位置关系；其中，所述两条边线的延长线之间的位置关系包括：平行或相交，并且，当两条边线的延长线相交时，所述两条边线的延长线之间的位置关系进一步包括两条边线的延长线之间的夹角；

各条区域边线中相邻的两条边线之间的夹角；以及

由各条区域边线构成的多边形区域的区域形状和/或多边形区域中包含的各个子区域的形状或面积。

可选的，所述角度确定模块具体适于：

根据各条区域边线之间的第一位置关系判断所述目标对象的朝向与所述显示屏幕的朝向是否匹配；

当判断结果为否时，根据各条区域边线之间的第二位置关系确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述区域边线的数量为四条，则所述角度确定模块具体适于：

将互不相邻且朝向相对的两条边线确定为一个相对边线组，根据各个相对边线组中包含的两条边线之间的长度差确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配；和/或，

判断相对边线组中包含的两条边线的延长线是否相交，当相对边线组中包含的两条边线的延长线相交时，根据两条边线的延长线之间的夹角确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配；和/或，

将相邻的两条边线确定为一个相邻边线组，确定各个相邻边线组中包含的两条边线之间的夹角，根据所述相邻边线组中包含的两条边线之间的夹角确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配。

可选的，所述角度确定模块具体适于：

针对由各条区域边线构成的多边形区域，通过分割线将所述多边形区域划分为第一子区域以及第二子区域；

确定所述第一子区域的第一区域面积以及第二子区域的第二区域面积，根据所述第一区域面积与第二区域面积之间的比较结果确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述角度确定模块具体适于：

确定由各条区域边线构成的多边形区域的重心位置点，将经过所述重心位置点的水平线或竖直线确定为所述分割线，并通过所述分割线将所述多边形区域划分为第一子区域以及第二子区域。

可选的，所述角度确定模块具体适于：计算所述第一区域面积与第二区域面积之间的比值，根据所述比值确定所述目标对象相对于显示屏幕的偏转角度。

可选的，所述识别模块具体适于：

通过边缘检测算法识别所述图像数据中包含的与目标对象相对应的目标屏幕区域；

根据所述目标屏幕区域在所述显示屏幕中占据的比例执行变焦处理，以使变焦处理后的目标屏幕区域在所述显示屏幕中占据的比例与预设比例阈值匹配。

可选的，所述识别模块具体适于：

通过直线检测算法识别与所述图像数据中的像素点相匹配的多条直线段；

根据变焦处理后的目标屏幕区域的区域位置信息，从所述多条直线段中筛选与所述目标屏幕区域相匹配的直线段，根据筛选出的各条直线段确定与所述目标屏幕区域相对应的各条区域边线。

可选的，所述目标对象包括：用于展示会议内容或演出内容的信息展示屏幕。

可选的，当所述目标对象进一步包括至少两个子屏幕时，所述角度确定模块进一步适于：

分别确定各个子屏幕相对于所述显示屏幕的偏转角度；

对比各个子屏幕中的显示内容，根据对比结果以及各个子屏幕相对于所述显示屏幕的偏转角度，将所述至少两个子屏幕划分为主屏幕以及辅助屏幕；

则所述变换处理模块具体适于：对所述主屏幕所对应的区域进行变换处理，并结合辅助屏幕中的显示内容对主屏幕中的显示内容进行修正。

可选的，所述变换处理模块具体适于：

根据所述偏转角度生成变换矩阵，通过所述变换矩阵对所述目标屏幕区域进行变换处理。

上述各个模块的具体工作原理可参照方法实施例中相应部分的描述，此处不再赘述。

由此可见，在本发明实施例中，能够通过图像采集设备采集与目标对象相对应的目标屏幕区域，并根据该目标屏幕区域的偏转角度进行图像处理，从而使处理后的目标屏幕区域的显示内容处于正常的非偏转状态。该方式避免了显示屏幕中的部分区域的显示内容发生形变的问题。

实施例四

本申请实施例四提供了一种非易失性计算机存储介质，所述计算机存储介质存储有至少一可执行指令，该计算机可执行指令可执行上述任意方法实施例中的图像数据的处理方法。可执行指令具体可以用于使得处理器执行上述方法实施例中对应的各个操作。

实施例五

图4示出了根据本发明实施例五的一种电子设备的结构示意图，本发明具体实施例并不对电子设备的具体实现做限定。

如图4所示，该电子设备可以包括：处理器(processor)402、通信接口(Communications Interface)406、存储器(memory)404、以及通信总线408。

其中：

处理器402、通信接口406、以及存储器404通过通信总线408完成相互间的通信。

通信接口406，用于与其它设备比如客户端或其它服务器等的网元通信。

处理器402，用于执行程序410，具体可以执行上述图像数据的处理方法实施例中的相关步骤。

具体地，程序410可以包括程序代码，该程序代码包括计算机操作指令。

处理器402可能是中央处理器CPU，或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路。电子设备包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。

存储器404，用于存放程序410。存储器404可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。

程序510具体可以用于使得处理器502执行上述方法实施例中对应的各个操作。

在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的基于语音输入信息的抽奖系统中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

Claims (10)

1.一种图像数据的处理方法，包括：

识别图像数据中包含目标对象的目标屏幕区域；确定与所述目标屏幕区域相对应的各条区域边线；

根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度；

根据所述偏转角度对所述目标屏幕区域进行变换处理，以在所述显示屏幕中显示处理后的图像数据。

2.根据权利要求1所述的方法，其中，所述各条区域边线之间的相对位置关系包括以下中的至少一种：

各条区域边线中相对的两条边线之间的长度差；

各条区域边线中相对的两条边线的延长线之间的位置关系；其中，所述两条边线的延长线之间的位置关系包括：平行或相交，并且，当两条边线的延长线相交时，所述两条边线的延长线之间的位置关系进一步包括两条边线的延长线之间的夹角；

各条区域边线中相邻的两条边线之间的夹角；以及

由各条区域边线构成的多边形区域的区域形状和/或多边形区域中包含的各个子区域的形状或面积。

3.根据权利要求1或2所述的方法，其中，所述根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度具体包括：

根据各条区域边线之间的第一位置关系判断所述目标对象的朝向与所述显示屏幕的朝向是否匹配；

当判断结果为否时，根据各条区域边线之间的第二位置关系确定所述目标对象相对于显示屏幕的偏转角度。

4.根据权利要求3所述的方法，其中，所述区域边线的数量为四条，则所述根据各条区域边线之间的第一位置关系判断所述目标对象的朝向与所述显示屏幕的朝向是否匹配包括：

将互不相邻且朝向相对的两条边线确定为一个相对边线组，根据各个相对边线组中包含的两条边线之间的长度差确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配；和/或，

判断相对边线组中包含的两条边线的延长线是否相交，当相对边线组中包含的两条边线的延长线相交时，根据两条边线的延长线之间的夹角确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配；和/或，

将相邻的两条边线确定为一个相邻边线组，确定各个相邻边线组中包含的两条边线之间的夹角，根据所述相邻边线组中包含的两条边线之间的夹角确定所述目标对象的朝向与所述显示屏幕的朝向是否匹配。

5.根据权利要求3或4所述的方法，其中，所述根据各条区域边线之间的第二位置关系确定所述目标对象相对于显示屏幕的偏转角度包括：

针对由各条区域边线构成的多边形区域，通过分割线将所述多边形区域划分为第一子区域以及第二子区域；

确定所述第一子区域的第一区域面积以及第二子区域的第二区域面积，根据所述第一区域面积与第二区域面积之间的比较结果确定所述目标对象相对于显示屏幕的偏转角度。

6.根据权利要求5所述的方法，其中，所述通过分割线将所述多边形区域划分为第一子区域以及第二子区域包括：

确定由各条区域边线构成的多边形区域的重心位置点，将经过所述重心位置点的水平线或竖直线确定为所述分割线，并通过所述分割线将所述多边形区域划分为第一子区域以及第二子区域。

7.根据权利要求5所述的方法，其中，所述根据所述第一区域面积与第二区域面积之间的比较结果确定所述目标对象相对于显示屏幕的偏转角度包括：

计算所述第一区域面积与第二区域面积之间的比值，根据所述比值确定所述目标对象相对于显示屏幕的偏转角度。

8.一种图像数据的处理装置，包括：

识别模块，适于识别图像数据中包含目标对象的目标屏幕区域，确定与所述目标屏幕区域相对应的各条区域边线；

角度确定模块，适于根据各条区域边线之间的相对位置关系，确定所述目标对象相对于显示屏幕的偏转角度；

变换处理模块，适于根据所述偏转角度对所述目标屏幕区域进行变换处理，以在所述显示屏幕中显示处理后的图像数据。

9.一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1-7中任一项所述的图像数据的处理方法对应的操作。

10.一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行如权利要求1-7中任一项所述的图像数据的处理方法对应的操作。

Images