CN113660416A - 图像处理装置、图像处理方法及存储介质 - Google Patents

Abstract

本发明公开一种图像处理装置、图像处理方法及存储介质。指定单元在设置在摄像单元拍摄的图像上的多边形区域的边中指定最长边。显示控制单元促使显示单元显示图像，在所述图像上，多边形区域与关于多边形区域的信息叠加。显示控制单元促使显示单元在基于指定单元指定的最长边的位置处显示信息。

Description

图像处理装置、图像处理方法及存储介质

本申请是在2019年10月14日提交的申请号为201910972745.7、发明创造名称为“图像处理装置、图像处理方法及存储介质”的发明专利申请的分案申请。

技术领域

本发明涉及一种图像处理装置、图像处理方法及非暂时性计算机可读存储介质，尤其涉及一种图像分析技术。

背景技术

传统上，已知这样一种技术：其中当分析由网络摄像机拍摄的视频时，表示分析目标区域的信息被叠加并显示在视频上。例如，日本特开2008-182456号公报公开了一种在图像上显示各自表示运动物体或静止物体的检测范围的多个矩形、并在各个矩形的上半部分显示检测范围的标题的技术。此外，日本特许第6261190号公开了一种通过多边形设置检测区域并将其显示在视频上的技术。

当在一个画面中由多个多边形设置作为视频分析目标的区域时，可以与表示各个区域的各个多边形一起显示识别信息。此时，由于区域的形状不均匀，因此如果在各个区域的固定位置显示识别信息，则可能出现区域和识别信息之间的对应关系可能无法清楚识别的问题。

发明内容

本发明提供一种在可见性较好的位置处配置与画面上设置的多边形区域相关的信息。

根据本发明的第一方面，提供一种图像处理装置，包括：指定单元，被配置为：在设置在摄像单元拍摄的图像上的多边形区域的边中指定最长边；以及显示控制单元，被配置为：促使显示单元显示图像，在所述图像上，多边形区域与关于多边形区域的信息叠加，其中，显示控制单元促使显示单元在基于指定单元指定的最长边的位置处显示信息。

根据本发明的第二方面，提供一种图像处理方法，包括：在设置在摄像单元拍摄的图像上的多边形区域的边中指定最长边；以及促使显示单元显示图像，在所述图像上，多边形区域与关于多边形区域的信息叠加，其中，在对显示单元的促使中，在基于指定的最长边的位置处显示信息。

根据本发明的第三方面，提供一种非暂时性计算机可读存储介质，其存储计算机程序，以促使计算机用作：指定单元，被配置为：在设置在摄像单元拍摄的图像上的多边形区域的边中指定最长边；以及显示控制单元，被配置为：促使显示单元显示图像，在所述图像上，多边形区域与关于多边形区域的信息叠加，其中，显示控制单元促使显示单元在基于指定单元指定的最长边的位置处显示信息。

根据以下参照附图对示例性实施例的详细描述，本发明的其他特征将变得清楚。

附图说明

图1是示出系统的硬件配置的示例的框图；

图2A和图2B是用于说明多边形区域和标签的视图；

图3是示出设置各个多边形区域的标签的配置位置的处理的流程图；

图4A和图4B是各自示出GUI的布置的示例的视图；

图5是示出文件配置的示例的视图；

图6是示出具有多个最长边的多边形区域的示例的视图；

图7A至图7C是用于说明选择作为标签的配置位置时的选择标准的视图；

图8是示出设置各个多边形区域的标签的配置位置的处理的流程图；

图9是示出设置各个多边形区域的标签的配置位置的处理的流程图；

图10A和图10B是表示第三实施例的实际例子的视图；

图11是根据第四实施例的流程图；以及

图12A至图12C是用于在视觉上解释根据图11中所示的流程图的处理的视图。

具体实施方式

以下将参照附图详细描述本发明的示例性实施例。注意，以下描述的实施例是本发明的详细实施的示例或所附权利要求中的布置的详细示例。

第一实施例

将参照图1中所示的框图描述根据该实施例的系统的硬件配置的示例。如图1所示，根据该实施例的系统包括图像处理装置100、显示器设备130、操作装置150、摄像装置200和存储装置400。摄像装置200和存储装置400各自经由有线和/或无线网络300连接到图像处理装置100。

首先将说明摄像装置200。摄像装置200拍摄运动图像或静止图像。当拍摄运动图像时，摄像装置200经由网络300将每帧的图像作为所拍摄图像发送给图像处理装置100，而当拍摄静止图像时，经由网络300将静止图像作为所拍摄图像发送给图像处理装置100。

接下来将描述存储装置400。存储装置400保存诸如运动图像和静止图像的各种图像，并且可以响应于来自图像处理装置100的请求而经由网络300将运动图像或静止图像提供给图像处理装置100。

接下来将说明图像处理装置100。图像处理装置100由诸如PC(个人计算机)、平板终端装置或智能手机等计算机装置实现。

CPU 101利用存储在ROM 102和RAM 103中的计算机程序和数据来执行各种处理。这使得CPU 101控制图像处理装置100的整体操作，同时执行或控制稍后将描述的各个处理，作为图像处理装置100执行的处理。

ROM 102存储图像处理装置100的设置数据和启动程序。RAM 103具有存储从ROM102和外部存储设备109加载的计算机程序和数据的区域。此外，RAM 103具有存储由网络控制单元104经由网络300从摄像装置200或存储装置400接收的数据(运动图像、静止图像等)的区域。RAM 103还具有由CPU 101用以执行各种处理的工作区域。如上文所述，RAM 103可以适当地提供各种区域。

外部存储设备109是大容量信息存储设备，例如硬盘驱动设备。外部存储设备109保存操作系统(OS)以及用于使CPU 101执行或控制稍后将描述的、作为由图像处理装置100执行的处理的各个处理的计算机程序和数据。保存在外部存储设备109中的数据包括各种设置数据(稍后描述)和在以下描述中由图像处理装置100作为已知信息处理的信息。

保存在外部存储设备109中的计算机程序和数据在CPU 101的控制下被适当地加载到RAM 103中并由CPU 101处理。

网络控制单元104控制经由网络300与摄像装置200或存储装置400的数据通信。显示控制单元105执行用于在显示设备130上显示诸如图像或字符等显示信息的显示控制。操作控制单元106向CPU 101通知由用户操作操作装置150所输入的各种指令。

CPU 101、ROM 102、RAM 103、外部存储设备109、网络控制单元104、显示控制单元105和操作控制单元106都连接到总线107。

接下来将描述显示设备130。显示设备130由液晶屏、触摸面板屏等形成，并可以使用图像、字符等显示图像处理装置100的处理结果。显示设备130可以是投影装置，例如投影图像、字符等的投影仪。

接下来将说明操作装置150。操作装置150由诸如鼠标、键盘或触摸面板屏等用户界面形成，并且可由用户操作以将各种指令输入到图像处理装置100(CPU 101)。

注意，该实施例采用图1中所示的布置。然而，适用于以下描述的布置不限于图1中所示的布置，各种布置均可适用。例如，在图1中，图像处理装置100、显示设备130、操作装置150、摄像装置200和存储装置400都已被描述为单独装置。然而，这些装置中的两个或更多个可以被一体化为一个装置。例如，通过将图像处理装置100合并在摄像装置200中，摄像装置200可以执行稍后将描述的各个处理，作为图像处理装置100执行的处理。显示设备130、操作装置150和存储装置400中的一个或多个可以与图像处理装置100一体化。

接下来将描述由具有上述布置的系统执行的处理，该处理用以决定(设置)用于显示图像的画面上的、布置(显示)有在画面上设置的各个多边形区域(具有多边形形状的区域)的标签的位置。注意，标签的示例是用于唯一识别各个多边形区域的识别信息(ID)。

图2A示出了在画面10上设置的多边形区域的示例。画面10可以是显示设备130的整个画面或者是被供给为显示图像的部分画面。

参照图2A，在画面10上设置作为三角形区域的多边形区域11、作为五边形区域的多边形区域12以及作为四边形区域的多边形区域13。画面10上的各个多边形区域11、12和13可以是通过用户操作操作装置150设置在画面10上的区域，或是由CPU 101等从显示在画面10上的图像中检测到的对象的区域。例如，可以将多边形区域11、12和13中的每一个设置为画面10上的预定区域，以对包括在预定区域中的人数进行计数。

在该实施例中，如图2B所示，在画面10上布置针对多边形区域11的标签14、针对多边形区域12的标签15和针对多边形区域13的标签16。在图2B中，表示多边形区域11的名称的字符串“Area 1”、表示多边形区域12的名称的字符串“Area 2”以及表示多边形区域13的名称的字符串“Area 3”分别作为标签14、15和16布置在画面10上。在该实施例中，各个标签布置在相应多边形区域的边中的最长边的中点位置。实际上，由于图像显示在画面10上，标签14、15和16被叠加并显示在图像上。

将参考图3中所示的流程图描述设置各个多边形区域的标签的配置位置(标签叠加位置)的处理。注意，根据图3中所示的流程图的处理是设置一个多边形区域的标签的配置位置的处理的流程图。因此，如果在画面上设置多个多边形区域，则通过对多个多边形中的每一个执行根据图3所示的流程图的处理来设置多个多边形区域中的每一个的标签的配置位置。在以下描述中，“画面”可以表示显示设备130的整个画面或者被供给以显示图像的部分画面。

在步骤S301中，CPU 101获得在画面上设置的多边形区域的各边的长度。如果在图2A中以多边形区域11为目标，则CPU 101获得形成多边形区域11的三个边中的每一个的长度。注意，例如，获得在画面上设置的多边形区域的各边的长度，作为该边的一端处的像素位置与该边另一端处的像素位置之间的距离。像素位置是例如坐标系中的位置，其中画面左上角的位置被设置为原点(0,0)，水平方向上的位置被设置为x坐标，垂直方向上的位置被设置为y坐标。

在步骤S302中，CPU 101指定形成多边形区域的边中的最长边。在该指定处理中，将步骤S301中针对形成多边形区域的边所获得的长度彼此进行比较，并将已获得最长长度的边指定为最长边。

在步骤S303中，CPU 101指定步骤S302中指定的最长边的中点的位置。例如，获得最长边的中点的位置，作为最长边的一端的像素位置和最长边的另一端的像素位置之间的中点位置。

在步骤S304中，CPU 101将步骤S303中获得的中点位置设置为多边形区域的标签的配置位置(显示位置)，并将配置位置存储在RAM 103或外部存储设备109中。

注意，在对画面上设置的各个多边形区域执行步骤S301至S304中的处理之后，CPU101可以使显示设备130显示具有显示图像的画面，在该画面上，各个多边形区域的边框与其标签是叠加的。在根据图3所示的流程图的处理中，各个多边形区域的标签被布置在针对多边形区域设置的配置位置处。此外，画面上显示的图像是例如从摄像装置200或存储装置400获得的图像(静止图像或运动图像中的各个帧的图像)或者是保存在外部存储设备109中的图像(静止图像或运动图像中的各个帧的图像)。

<应用>

下面将描述该实施例的应用。在该应用中，作为图4A中例示的操作画面的图形用户界面(GUI)600显示在显示设备130的显示画面上。除非另有说明，否则即通过操作操作装置150来输入GUI 600上的用户操作。另外，假设CPU 101或显示控制单元105执行或控制GUI600的显示控制或根据GUI 600上的用户操作的处理。

在显示区域(对应于上述“画面”)610中，紧接在显示GUI 600之前从摄像装置200接收的已拍摄图像被显示，且设置多边形区域的边框及其标签被叠加在已拍摄图像上。在根据图3所示的流程图的处理中，标签被布置在针对该标签设置的配置位置处。注意，在显示区域610中显示的拍摄图像不限于从摄像装置200获取的图像，可以是从存储装置400或外部存储设备109获取的拍摄图像(保存在存储装置400或外部存储设备109中的拍摄图像)。或者，显示区域610中显示的拍摄图像可以是从另一装置获取的拍摄图像。

注意，用户可以通过操作操作装置150将多边形区域添加到显示区域610中的拍摄图像上。例如，如果用户使用鼠标作为操作装置150，则他/她通过操作鼠标来将鼠标光标移动至显示区域610中。然后，每当用户通过操作鼠标在显示区域610中执行点击操作时，执行点击操作的鼠标光标的位置被登记为RAM 103、外部存储设备109等中的多边形区域的顶点位置。此时鼠标光标的位置是例如坐标系中的位置，其中显示区域610的左上角的位置被设置为原点(0,0)，水平方向上的位置被设置为x坐标，垂直方向上的位置被设置为y坐标。如果用户此次点击的鼠标光标的位置是从用户第一次点击的鼠标光标的位置起的预定范围内的位置，则通过按照登记顺序以线段连接所登记顶点而获得的多边形区域的边框被叠加并显示在拍摄图像上。针对这样添加的多边形区域新发布标签。例如，如果此次添加的多边形区域是显示区域610中设置的第N个(N是1或更大的整数)多边形区域，则针对此次添加的多边形区域发布标签“Area N(N表示生成序数，并且是1,2,3，...的自然数)。然后，根据图3所示的流程图设置标签“Area N”的配置位置，且标签“Area N”被叠加并显示在设置的配置位置处。与此次添加的多边形区域对应的行被添加到选择部分620。

在选择部分620的每一行中，显示指示要针对相应多边形区域执行分析1、2和3中的哪一个的设置内容。在图4A所示的情况下，在第一行中显示具有标签“Area 1”的多边形区域的设置内容，在第二行中显示具有标签“Area 2”的多边形区域的设置内容，并且在第三行中显示具有标签“Area 3”的多边形区域的设置内容。

对于具有标签“Area 1”的多边形区域，对于分析1显示复选标记，对于分析2和3不显示复选标记。具有标签“Area 1”的多边形区域的设置内容表示“对于具有标签“Area 1”的多边形区域，执行分析1但不执行分析2和3”。

对于具有标签“Area 2”的多边形区域，对于分析1和2显示复选标记，对于分析3不显示复选标记。具有标签“Area 2”的多边形区域的设置内容表示“对于标签为“Area 2”的多边形区域，执行分析1和2，不执行分析3”。

对于具有标签“Area 3”的多边形区域，对于分析1、2和3显示复选标记。具有标签“Area 3”的多边形区域的设置内容表示“对于标签为“Area 3”的多边形区域，执行分析1、2和3”。

在这种情况下，用户可以通过操作操作装置150在选择部分620中的行中选择期望的行。在图4A中，与第一行对应的按钮621(显示标签“Area 1”的按钮)被选中。此时，用于设置具有标签“Area 1”的多边形区域的详细设置的设置部分630显示在GUI 600中的右侧。

切换按钮631是用于切换有效/无效的按钮，通常设置“有效”。如果用户通过使用操作装置150操作切换按钮631来设置“无效”，则在保持RAM 103或外部存储设备109中的多边形区域的详细设置的同时，停止对具有标签“Area 1”的多边形区域的分析。另一方面，如果设置了“有效”，则应用标签为“Area 1”的多边形区域的详细设置。

区域632是用于编辑标签“Area 1”的区域。例如，如果用户通过操作操作装置150将字符串输入到区域632，则标签“Area 1”可以变为所输入的字符串。可以限制字符类型和可用于标签的字符数。

切换按钮633包括为分析1、2和3提供的按钮，其分别用于切换分析1、2和3的有效/无效。在图4A中，由于对分析1设置了有效而对分析2和3设置了无效，因此对于具有标签“Area 1”的多边形区域进行指示“执行分析1而不执行分析2和3”的设置。这些设置内容反映在选择部分620的第一行上。

删除按钮634是用于指示删除具有标签“Area 1”的多边形区域的按钮。如果用户通过操作操作装置150而按下删除按钮634，则从RAM 103或外部存储设备109中删除关于该多边形区域的信息(顶点的位置、详细设置等)，并从显示区域610擦除该多边形区域的边框和标签。

保存按钮601是用于指示CPU 101在外部存储设备109中保存利用GUI 600设置的设置内容的按钮。重置按钮602是用于指示CPU 101将利用GUI 600设置的设置内容返回(重置)到最后按下保存按钮601时的设置内容的按钮。注意，如果在显示GUI 600之后从未按下保存按钮601的情况下按下重置按钮602，则设置内容返回到默认设置内容。

注意，通过在设置部分630中还提供保存按钮601和重置按钮602，可以使得针对各个多边形区域可执行上述保存处理和重置处理。

另外，用户可以通过操作操作装置150在选择部分620中选择期望的一列。在图4B中，选择对应于第一列的按钮622(显示分析1的按钮)。此时，如图4B所示，用于设定分析1的详细设置的设置部分640显示在GUI 600中的右侧。

切换按钮641是用于切换有效/无效的按钮，通常设置“有效”。如果用户通过使用操作装置150操作切换按钮641来设置“无效”，则可以禁止执行分析1。另一方面，如果设置“有效”，则可以允许执行分析1。

灵敏度设置部分642是分析1特有的设置部分，其包括例如用于执行调整检测到人的灵敏度的操作的滑块。如上所述，对各个分析设置的项目可以是不同的。

如上所述，根据本实施例，由于在画面上设置的各个多边形区域的标签显示在多边形区域的最长边的中点位置处，因此可以提高多边形区域及其标签的可视性，从而改善例如多边形区域的各种设置的可操作性。

注意，可以执行用于针对从摄像装置200或存储装置400顺次发送的图像中的各个多边形区域计算包括在多边形区域中的人的数量的分析来作为分析1。在这种情况下，CPU101可以生成图5中例示的文件。

在图5所示的示例中，针对具有标签“Area 1”，“Area 2”和“Area 3”的各个多边形区域进行设置，以执行分析1。在图5所示的示例中，在“13:00”时，从具有标签“Area 1”的多边形区域中数出10人，从具有标签“Area 2”的多边形区域中数出5人，从具有标签“Area 3”的多边形区域中数出2人。

图5中所示的文件以例如CSV文件格式输出。这种用于将多边形区域识别为分析目标的标签(字符串)定义可以提高以CSV文件等输出的分析结果的便利性。

如上所述，根据本实施例，由于在画面上设置的各个多边形区域的标签显示在多边形区域的最长边的中点位置，因此可以改善例如输出分析结果的可用性。

注意，在该实施例中，最长侧的中点位置被设置为标签的显示位置。然而，本发明不限于此，例如，可以将最长边上从中点位置偏移的位置设置为标签的显示位置。

此外，在该实施例中，各个多边形区域的标签用作关于多边形区域的信息的示例。然而，显示目标不限于标签，关于多边形区域的任何信息都可以。例如，作为标签的替代或补充，多边形区域的图像坐标或尺寸或是多边形区域中的图像属性(包括在多边形区域中的环境，例如室内、室外、车站中心，车站尾端、楼梯)可以被显示为“关于多边形区域的信息”。或者，作为标签的替代或补充，在各个多边形区域中执行的视频分析的结果(各个多边形区域中的人数等)可以被显示为“关于多边形区域的信息”。在这种情况下，将所获得的作为标签的配置位置的位置设置为“关于多边形区域的信息”的配置位置。注意，根据“关于多边形区域的信息”的内容和数量，可以将通过适当地偏移所获得的作为标签的配置位置的位置而获得的位置设置为“关于多边形区域的信息”的配置位置。

[第二实施例]

在包括本实施例的以下实施例中，将描述与第一实施例的不同之处，并且除非另外具体说明，否则假设其余部分与第一实施例中相同。在该实施例中，如果在多边形区域中存在(包括)多个最长边且因此存在多个标签配置位置的候选，则选择多个候选中的一个，并将其确定为多边形区域的标签的配置位置。

图6示出了存在多个最长边的多边形区域的示例。在图6中，横坐标表示x轴，纵坐标表示y轴。由于多边形区域20是矩形，并且存在两个边21和22为最长边，因此边21的中点23和边22的中点24是多边形区域20的标签的配置位置的候选。由于多边形区域30也是矩形，并且存在两个边31和32为最长边，所以边31的中点33和边32的中点34是多边形区域30的标签的配置位置的候选。

在该实施例中，根据预定标准选择边21的中点23和边22的中点24中的一个，并将其设置为多边形区域20的标签的配置位置。类似地，根据预定标准选择边31的中点33和边32的中点34中的一个，并将其设置为多边形区域30的标签的配置位置。

将参照图7A至7C描述当存在标签的配置位置的多个候选时、用于选择多个候选中的一个作为标签的配置位置的选择标准。图7A至7C是用于解释普通人的视线移动趋势的视图。图7A示出了已知的古腾堡图，其表示人从画面或纸面的左上方向右下方移动视线的趋势。类似地，视线移动的趋势在图7B中显示为Z图案，在图7C中显示为F图案。从图7A至7C中可以看出，由于存在视线首先指向左上方的趋势，因此，如果存在标签的配置位置的多个候选，则在该实施例中，“优先选择最靠近画面左上方的候选者”被设置为选择标准。根据该选择标准，在图6所示的情况下，关于多边形区域20，边21的中点23和边22的中点24中的中点23被选择(设置)为多边形区域20的标签的配置位置。另外，在图6所示的情况下，关于多边形区域30，边31的中点33和边32的中点34中的中点33被选择(设置)为多边形区域30的标签的配置位置。

将参考图8中所示的流程图描述设置各个多边形区域的标签的配置位置的处理。在图8中，与图3中相同的步骤编号表示相同的处理步骤，其描述将被省略。

在步骤S803中，CPU 101确定在步骤S302中指定的最长边的数量是否是1。如果作为确定处理的结果，在步骤S302中指定的最长边的数量是1，则处理进入步骤S303；否则，处理进入步骤S805。

在步骤S805中，CPU 101指定步骤S302中指定的各个最长边的中点的位置。在步骤S806中，CPU 101指定步骤S805中获得的中点的位置中具有最小y坐标值的中点的位置。

在步骤S807中，CPU 101确定步骤S806中指定的中点的位置的数量(步骤S805中获得的中点的位置中各具有最小y坐标值的中点的位置的数量)是否为1。如果作为确定处理的结果，位置的数量是1，则处理进入步骤S809；否则，处理进入步骤S808。

在步骤S808中，CPU 101指定在步骤S806中指定的中点的位置(步骤S805中获得的中点的位置中各具有最小y坐标值的中点的位置)中具有最小x坐标值的中点的位置。

在步骤S809中，CPU 101将在步骤S303、S806和S808之一中获得的中点的位置设置为多边形区域的标签的配置位置，并将该配置位置存储在RAM 103或外部存储设备109中。

在对画面上设置的各个多边形区域执行步骤S301至S809中的处理之后，CPU 101可以使显示设备130显示具有显示的图像的画面，在该画面上，各个多边形区域的边框及其标签是叠加的。在根据图8的流程图的处理中，各个多边形区域的标签布置在针对多边形区域设置的配置位置处。

注意，当存在多个最长边时确定标签的配置位置的方法不限于上述方法。例如，每当用户指定图像上的顶点位置时，“将连接此次指定的顶点位置和紧接在之前指定的顶点位置的线段设置为多边形区域的一条边，并且仅当此次设置的边长于之前设置的边时，才将此次设置的边的中点位置设置为标签的配置位置”。也就是说，仅当稍后设置的边与之前设置的各边进行比较且为最长时，才将标签的配置位置重复改变为稍后设置的边的中点位置，从而确定标签的最终配置位置。

[第三实施例]

在该实施例中，如果在画面上设置多个各自具有多个最长边的多边形区域，则多边形区域的标签的配置位置被分离。将参考图9中所示的流程图描述设置多边形区域的标签的配置位置的处理。

在步骤S901中，CPU 101选择在画面上设置的多边形区域中的一个未选择的多边形区域作为所选择的多边形区域(作为步骤S901至S909中的处理目标的多边形区域)。

在步骤S902中，类似于上述步骤S301，CPU 101获得所选择的多边形区域的各条边的长度。在步骤S903中，类似于上述步骤S302，CPU 101指定形成所选择的多边形区域的边中的最长边。

在步骤S904中，CPU 101确定步骤S903中指定的最长边的数量是否是1。作为确定处理的结果，如果步骤S903中指定的最长边的数量是1，则处理进入步骤S905；否则，处理进入步骤S907。

在步骤S905中，CPU 101指定步骤S903中指定的最长边的中点的位置。在步骤S906中，CPU 101将在步骤S905中获得的中点位置设置为所选择的多边形区域的标签的配置位置。在图10A所示的示例中，由于多边形区域C的最长边是上边，因此，上边的中点的位置c被设置为多边形区域C的标签的配置位置。

另一方面，在步骤S907中，CPU 101指定步骤S903中指定的各个最长边的中点的位置。在步骤S908中，CPU 101将在步骤S907中针对各个最长边获得的中点位置存储在RAM103或外部存储设备109中。在图10A所示的示例中，由于多边形区域A是正方形，因此存在四个最长边，这些边的中点的位置a1、a2、a3和a4存储在RAM 103或外部存储设备109中。另外，在图10A所示的例子中，由于多边形区域B是矩形，因此存在两个最长边，这些边的中点的位置b1和b2存储在RAM 103或外部存储设备109中。

在步骤S909中，CPU 101确定是否画面上的所有多边形区域都被选择为所选择的多边形区域。如果作为确定处理的结果，画面上的所有多边形区域都被选为所选择多边形区域，则处理进入步骤S910。另一方面，如果在画面上的多边形区域中，保留有未被选择为所选择多边形区域的多边形区域，则处理返回到步骤S901。

在步骤S910中，CPU 101确定是否已针对画面上的所有多边形区域设置了标签的配置位置。对于具有一个最长边的多边形区域，将最长边的中点位置设置为上述步骤S906中的标签的配置位置。然而，对于具有两个或更多个最长边的多边形区域，在步骤S908中将各个最长边的中间位置存储在RAM 103或外部存储设备109中，并且没有设置标签的配置位置。

作为确定处理的结果，如果已经对画面上的所有多边形区域设置了标签的配置位置，则完成了根据图9中所示的流程图的处理。另一方面，如果在画面上的多边形区域中存在尚未设置标签的配置位置的多边形区域，则处理进入步骤S911。

也就是说，如果在画面上设置一个或多个“各自具有两个或更多个最长边的多边形区域”，则处理进入步骤S911。另一方面，如果画面上的所有多边形区域都是“各自具有一个最长边的多边形区域”，则完成了根据图9所示的流程图的处理。

在步骤S911中，CPU 101确定多边形区域的标签的配置位置的组合，使得画面上的多边形区域的标签的配置位置尽可能地分离。

在图10A所示的情况下，关于多边形区域A，标签的配置位置尚未确定，且位置a1、a2、a3和a4已经存储在RAM 103及外部存储设备109中。关于多边形区域B，标签的配置位置尚未确定，且位置b1和b2已经存储在RAM 103和外部存储设备109中。关于多边形在区域C中，位置c被确定为标签的配置位置，因此位置c被确认为多边形区域C的标签的配置位置。因此，位置a1、a2、a3和a4中的一个被确定为多边形区域A的标签的配置位置，且位置b1和b2中的一个被确定为多边形区域B的标签的配置位置，从而多边形区域A的标签的配置位置、多边形区域B的标签的配置位置和多边形区域C的标签的配置位置c之间的距离最长。

下表示出了针对多边形区域A存储的位置a1、a2、a3和a4的坐标，针对多边形区域B存储的位置b1和b2的坐标以及针对多边形区域C确认的位置c的坐标的示例。

[表1]

各个多边形最长边的中点的坐标

区域(多边形)	A	B	C
				决定的标签叠加位置	-	-	(6,4)
最长边的中点的坐标1	(2,1)	(7,1)	-
				最长边的中点的坐标2	(1,2)	(7,3)	-
最长边的中点的坐标3	(2,3)	-	-
				最长边的中点的坐标4	(3,2)	-	-

在该实施例中，针对位置a1、a2、a3和a4中的一个、位置b1和b2中的一个以及位置c的各个组合，获得位置之间的距离的总距离，然后指定获得最长总距离的组合。

假设针对多边形区域A存储的位置a1、a2、a3和a4的坐标、针对多边形区域B存储的位置b1和b2的坐标以及针对多边形区域C确认的位置c的坐标由上述表示出。在这种情况下，位置a1、b1和c的组合的总距离通过以下方式获得：

其中d(a1，b1)表示位置a1和b1之间的距离。下表显示了以这种方式获得所有组合的总距离的结果。

[表2]

点间的距离的总数

点的组合	总距离
		a1,b1,c	13.2
a1,b2,c	11.8
		a2,b1,c	14.6
a2,b2,c	12.9
		a3,b1,c	10.9
a3,b2,c	9.1
		a4,b1,c	12.7
a4,b2,c	10.5

根据该表，由于获得最长总距离的位置的组合是(a2，b1，c)，因此图10B中由实心圆圈表示的位置(a2，b1，c)是确认为标签的配置位置。

如上所述，即使在画面上设置多个各自具有多个最长边的多边形区域，多边形区域的标签的位置也被设置为分开，因此可以避免由此带来的不便，例如，由于标签的位置太靠近，因此难以读取多个标签。

[第四实施例]

在确认第一至第三实施例中的每一个中的各个多边形区域的标签的配置位置之后，在该实施例中，由于距离等于或小于预定距离等，标签的配置位置被修改。

根据图11所示的流程图的处理是在第一至第三实施例中的每一个中确认各个多边形区域的标签的配置位置之后(即，在根据图3、图8或图9所示的流程图的处理之后)执行的处理。注意，仅当画面上设置的多边形区域的数量是两个或更多时才执行根据图11中所示的流程图的处理，而如果在画面上设置的多边形区域的数量是一个则不执行。

在步骤S1101中，CPU 101获得所有标签对的标签之间的距离(标签的配置位置之间的距离)。在步骤S1102中，CPU 101确定在步骤S1101中获得的距离中，是否存在等于或小于作为预设阈值的距离Dth(阈值)的距离。作为确定处理的结果，如果步骤S1101中获得的距离中存在等于或小于距离Dth的距离，则处理进入步骤S1103；否则，根据图11所示的流程图的处理完成。

在步骤S1103中，CPU 101将已获得距离等于或小于距离Dth的一对标签设置为目标对，并获取包含在目标对中的标签中的一个的配置位置(x1，y1)和另一个标签的配置位置(x2，y2)。

在步骤S1104中，CPU 101指定标签中的一个的x坐标值与另一个标签的x坐标值间的差Δx(＝|x1-x2|)和标签中的一个的y坐标值与另一个标签的y坐标值间的差Δy(＝|y1-y2)中较小的一个。如果Δx<Δy，则CPU 101将x轴指定为校正标签的配置位置的方向的基准轴。如果Δx>Δy，则CPU 101将y轴指定为基准轴。

在步骤S1105中，CPU 101在基准轴的一个方向(例如，负方向)上、沿着与包括在目标对中的一个标签对应的边来移动该标签的配置位置。此时，移动距离被确定为至少是Dth/2。

在步骤S1106中，CPU 101在基准轴的另一方向(例如，正方向)上、沿着与包括在目标对中的另一标签对应的边来移动该另一标签的配置位置。此时，移动距离也确定为至少是Dth/2。

这种对标签的配置位置的校正校正了已获得等于或小于距离阈值Dth的距离的两个标签的配置位置，从而防止标签的可见性降低。图12A至12C是用于在视觉上解释根据图11所示的流程图的处理的视图。在图12A中，两个空心圆表示包括在目标对中的两个标签的配置位置。如果标签(字符串)“Area 1”和“Area 2”叠加在配置位置，则如图12B所示，字符彼此重叠，难以读取标签。假设执行校正以防止这种位置关系时的距离阈值Dth被定义为3。

参考图12A，目标对中包括的标签的一个(左侧空心圆)的配置位置标签1与另一个标签(右侧空心圆)的配置位置标签2之间的距离是2(步骤S1101)。由于该距离等于或小于Dth(步骤S1102中的“是”)，因此执行校正标签的配置位置的处理(步骤S1103至S1106)。

分别获取(4,4)和(6,4)作为配置位置标签1和标签2(步骤S1103)。由于针对配置位置标签1和标签2获得x坐标差Δx＝2和y坐标差Δy＝0，且满足Δx>Δy，因此将y轴指定为基准轴(步骤S1104)。

因此，通过在y轴的负方向上将配置位置标签1沿着与相应一个标签对应的边移动Dth/2(＝1.5)或更多而获得的配置位置标签1'被设置为相应标签的校对配置位置(步骤S1105)。

类似地，通过在y轴的正方向上将配置位置标签2沿着与另一标签对应的边移动Dth/2(＝1.5)或更多而获得的配置位置标签2'被设置为另一标签的校正配置位置(步骤S1106)。

图12C示出了在配置位置标签1'处配置一个标签以及在配置位置标签2'处配置另一个标签的结果。如图12C所示，由于配置位置彼此接近而在图12B中彼此重叠的标签被分离。因此，消除了标签的重叠，且能够读取标签。

注意，该实施例已将距离Dth解释为固定值。然而，可以根据各个标签的大小和各个标签的字符数来调整距离Dth。此外，也可以配置为通过允许在x轴方向和y轴方向上设置不同的阈值来应对具有不同垂直和水平尺寸的标签的叠加。

另外，在该实施例中，执行校正以便移动包括在目标对中的标签的配置位置，使得标签之间的距离变得更长(以便沿相反方向移动配置位置)。然而，校正配置位置的方法不限于上述方法。例如，假设对应于包括在目标对中的一个标签的最长边的长度比对应于另一个标签的最长边长得多。在这种情况下，可以仅让一个标签的配置位置移动距离Dth或更多，并且可以防止另一个标签的配置位置移动。注意，“对应于包括在目标对中的一个标签的最长边的长度比对应于另一个标签的最长边长得多”表示例如对应于标签中的一个的最长边的长度与对应于另一个标签的最长边的长度的比率等于或高于阈值。或者，“对应于包括在目标对中的一个标签的最长边的长度比对应于另一个标签的最长边长得多”可以表示最长边的长度之间的差的绝对值等于或大于阈值。这作为减小在短边上移动标签的配置位置时配置位置偏离该边从而该边和标签之间的对应关系变得不清楚的可能性的措施来说是有效的。

可以采用这样的配置：其中，考虑到标签的尺寸，在水平和垂直方向上精细调节靠近画面的端部的标签的配置位置以落入画面内，然后执行确保执行标签的配置位置之间的距离的上述位置校正处理。

此外，可以执行应对例如标签是水平书写字符串并且希望尽可能沿着叠加目标边显示的情况的标签配置位置的校正。在这种情况下，如果当最长边几乎垂直时(例如，相对于水平方向在60°至120°的方向上)标签的水平尺寸等于或大于预定尺寸，则配置位置可以移动到几乎水平(相对于水平方向至多±30°)且长度等于或长于预定长度的边。如上所述，根据本实施例，可以叠加并显示具有更高可见度的标签。

此外，上述实施例中描述的GUI的配置和使用方法仅仅是示例。只要可以获得相同的效果，GUI的配置和使用方法不受特别限制。获得诸如上述实施例中描述获得距离等指标的方法仅是示例，并没有特别限制。另外，在上述实施例中使用的数值示例性地用于提供详细描述，并且本发明不旨在限制在上述实施例中使用的数值。

在上述实施例中，当图像处理装置100使用计算机程序和数据执行处理时，实现上述处理。然而，类似的处理可以由用于图像处理的硬件来实现。

此外，可以适当地组合和使用上述实施例中的一些或全部。可以选择性地使用上述实施例中的一些或全部。

其它实施例

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。

虽然参照示例性实施例描述了本发明，但是应当理解，本发明并不限于所公开的示例性实施例。应当对下列权利要求的范围赋予最宽的解释，以使其涵盖所有这些变型例以及等同的结构及功能。

Claims (8)

1.一种图像处理装置，包括：

设置单元，其被配置为根据用户操作在摄像单元拍摄的图像上设置至少一个多边形区域，并且根据用户操作针对所述多边形区域，设置是否执行分析处理，在所述分析处理中计数包括在所述多边形区域中的人数；

显示控制单元，其被配置为促使显示单元显示图像，在所述图像上，所述多边形区域与关于所述多边形区域的信息叠加。

2.根据权利要求1所述的装置，还包括：

指定单元，其被配置为指定所述多边形区域的边中的最长边，以及

其中，显示控制单元促使显示单元在所述多边形区域的最长边的中点位置处显示信息。

3.根据权利要求1所述的装置，其中，所述设置单元根据用户操作在摄像单元拍摄的图像上设置多个多边形区域，并且根据用户操作针对所述多个多边形区域的各个，设置是否执行分析处理，在所述分析处理中计数包括在所述多边形区域中的人数。

4.根据权利要求1所述的装置，其中，设置单元针对图像中设置的所述多边形区域设置所述分析处理的细节。

5.根据权利要求2所述的装置，其中，如果所述多边形区域具有多个最长边，则显示控制单元促使显示单元在基于多个最长边中最靠近图像的左上角的边的位置处显示信息。

6.根据权利要求3所述的装置，其中，显示控制单元促使显示单元针对多个多边形区域中的各个显示信息，从而针对多个多边形区域显示的多条信息的显示位置间的距离不短于阈值。

7.一种图像处理方法，包括：

根据用户操作在摄像单元拍摄的图像上设置至少一个多边形区域，并且根据用户操作针对所述多边形区域，设置是否执行分析处理，在所述分析处理中计数包括在所述多边形区域中的人数；

促使显示单元显示图像，在所述图像上，所述多边形区域与关于所述多边形区域的信息叠加。

8.一种非暂时性计算机可读存储介质，其存储计算机程序，以促使计算机用作：

设置单元，其被配置为根据用户操作在摄像单元拍摄的图像上设置至少一个多边形区域，并且根据用户操作针对所述多边形区域，设置是否执行分析处理，在所述分析处理中计数包括在所述多边形区域中的人数；

显示控制单元，其被配置为促使显示单元显示图像，在所述图像上，所述多边形区域与关于所述多边形区域的信息叠加。

Images