CN102771120B

CN102771120B - 显示控制装置和显示图像形成方法

Info

Publication number: CN102771120B
Application number: CN201080054890.4A
Authority: CN
Inventors: 藤井博文; 横光澄男; 藤松健; 渡边伟志; 松本裕一; 三轮道雄; 杉浦雅贵; 森冈干夫
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Intellectual Property Management Co Ltd
Priority date: 2009-12-04
Filing date: 2010-10-19
Publication date: 2015-05-13
Anticipated expiration: 2030-10-19
Also published as: EP2509313A1; WO2011067886A1; EP2509313A4; JP5427577B2; CN102771120A; US20120236024A1; JP2011120077A

Abstract

公开了显示控制装置和显示图像形成方法，显示特别容易识别出目标的位置的图像。在显示控制装置(100)中，截取区域设定单元(140)将包含目标以及对拍摄对象区域内的位置赋予特征的特征部分双方的截取区域候选设定为截取区域，在截取区域候选中未包含特征部分时，截取区域候选变更单元(130)变更截取区域候选的位置和大小的其中至少一方直到同时包含目标和特征部分为止。由此，对拍摄对象区域内的位置赋予特征的特征部分与目标一起包含在截取图像内，所以用户通过观察该截取图像，能够容易识别目标的位置。

Description

显示控制装置和显示图像形成方法

技术领域

本发明涉及显示控制装置和显示图像形成方法，特别涉及显示通过广角相机拍摄的拍摄图像的技术。

背景技术

全方位相机等广角相机能够以一台照相机得到大的视野范围的图像，因此在各种领域被广泛使用。广角相机例如用于监视系统等。特别是，通过采用全方位透镜光学系统或全方位反光镜光学系统，全方位相机能够获得全方位图像。另外，通过全方位相机获得的全方位图像一般是同心圆状的图像(圆环形图像)。

另一方面，作为显示通过广角相机获得的拍摄图像的方式，例如有从拍摄图像中截取并显示包含注目物体(即，目标(target))的区域的方式(参照专利文献1)。

现有技术文献

专利文献

[专利文献1]日本特开2007-311860号公报

发明内容

发明要解决的问题

然而，截取并显示包含注目物体的区域时，当然难以把握截取图像的位置。也就是说，难以一眼就识别整个拍摄图像中的截取图像的位置。

本发明的目的在于提供显示控制装置和显示图像形成方法，其显示特别容易识别出目标的位置的图像。

解决问题的方案

本发明的显示控制装置的一个方式为，从拍摄图像中截取出截取区域的图像并输出的显示控制装置，该装置包括：检测单元，从所述拍摄图像中检测目标；特征部分检测单元，检测特征部分，该特征部分位于表示所述目标的图像区域即目标图像之外，并且特征性地表示在所述拍摄图像中的位置或在所述拍摄图像的拍摄对象的空间中的位置；以及设定单元，设定所述截取区域以使其包含所述目标图像和所述特征部分。

本发明的显示图像形成方法的一个方式为，从拍摄图像中截取出截取区域的图像而形成显示图像的显示图像形成方法，该方法包括：从所述拍摄图像中检测目标的步骤；检测特征部分的步骤，该特征部分位于表示所述目标的图像区域即目标图像之外，并且特征性地表示在所述拍摄图像中的位置或在所述拍摄图像的拍摄对象的空间中的位置；以及设定所述截取区域以使其包含所述目标图像和所述特征部分的步骤。

发明的效果

根据本发明，能够提供显示控制装置和显示图像形成方法，其显示特别容易识别出目标的位置的图像。

附图说明

图1是表示本发明的一实施方式的显示控制装置的结构的方框图。

图2是用于说明本发明的一实施方式的显示控制装置的动作的流程图。

图3是用于说明特征部分的检测方法的图(通过颜色信息的检测)。

图4是用于说明特征部分的检测方法的图(通过颜色信息的检测)。

图5是用于说明特征部分的检测方法的图(通过颜色信息的检测)。

图6是用于说明特征部分的检测方法的图(通过形状信息的检测)。

图7是用于说明特征部分的检测方法的图(通过形状信息的检测)。

图8A是用于说明以往的图像截取方法以及本发明的一实施方式的图像截取方法的图。

图8B是用于说明以往的图像截取方法以及本发明的一实施方式的图像截取方法的图。

图8C是用于说明以往的图像截取方法以及本发明的一实施方式的图像截取方法的图。

图8D是用于说明以往的图像截取方法以及本发明的一实施方式的图像截取方法的图。

标号说明

100显示控制装置

110目标检测单元

120特征部分检测单元

130截取区域候选变更单元

140截取区域设定单元

150截取单元

具体实施方式

下面，参照附图详细地说明本发明的一实施方式。

[1]结构

图1是表示本发明的一实施方式的显示控制装置100的结构的方框图。在图1中，显示控制装置100包括：目标检测单元110、特征部分检测单元120、截取区域候选变更单元130、截取区域设定单元140以及截取单元150。显示控制装置100与广角相机连接，输入通过广角相机拍摄的拍摄图像。广角相机例如为全方位相机。另外，显示控制装置100与显示装置连接，使显示装置显示从拍摄图像中截取的截取图像。

目标检测单元110检测在拍摄图像S10中包含的目标。目标例如是人。另外，目标也可以是车辆等物体。目标检测单元110通过进行例如图案匹配等图像处理，从拍摄图像S10中检测出目标。

目标检测单元110输出目标信息S11，该目标信息S11表示检测出的目标的位置和大小。目标的位置信息例如为目标图像的中心坐标或重心坐标。该目标图像是指表示检测出的目标的图像区域，例如为以目标的轮廓线包围的区域或围绕目标的矩形等闭区域。另外，目标的大小信息是表示目标图像的范围的信息，例如，通过对象的轮廓线上的点的坐标群或目标图像的像素大小(宽度、高度)等来表示。

特征部分检测单元120检测在拍摄图像S10中包含的“特征部分”。特征部分是指，对在拍摄图像S10中的位置或者拍摄对象的空间中的位置赋予特征的、拍摄图像S10内的部分。在后文中详细说明该特征部分的检测方法。

特征部分检测单元120输出表示各特征部分的位置的特征部分信息S12。与目标信息同样，特征部分信息也可以是摄像坐标系中的特征部分的坐标。另外，特征部分信息也可以是：通过对构成拍摄图像的像素群中的位于特征部分的像素附加标记而获得的每个像素的标记信息。

截取区域候选变更单元130基于“变更规则”，依次变更截取区域候选。截取区域候选变更单元130根据变更规则，变更截取区域候选的位置和大小的其中至少一方。在后文中详细说明该变更规则。

截取区域设定单元140从通过截取区域候选变更单元130获得的截取区域候选群中，选择截取区域。具体而言，截取区域设定单元140对通过截取区域候选变更单元130获得的截取区域候选群的各候选，计算”判断基准参数”。截取区域设定单元140基于判断基准参数，从截取区域候选群中决定截取区域。在后文中详细说明该判断基准参数。

截取单元150从拍摄图像中截取由截取区域设定单元140设定的截取区域内的图像，并将截取图像输出到显示装置。

[2]动作

下面说明具有上述结构的显示控制装置100的动作。

[2－1]处理流程的概要

图2是用于说明本发明的一实施方式的显示控制装置100的动作的流程图。

在步骤ST201中，目标检测单元110检测在拍摄图像S10中包含的目标。

在步骤ST202中，特征部分检测单元120检测在拍摄图像S10中包含的特征部分。

在步骤ST203中，截取区域候选变更单元130设定截取区域候选以使其包含通过目标检测单元110检测出的目标。此时,截取区域候选变更单元130仅在首次设定时，以使截取区域候选的区域中心与目标重叠的方式，设定预先规定的大小的截取区域候选。也就是说，以将目标图像配置在截取区域候选的中央的方式，设定截取区域候选。

在步骤ST204中，截取区域候选变更单元130判定在步骤ST203中设定的第一截取区域候选内是否包含在步骤ST202中检测出的特征部分。

在第一截取区域候选内未包含特征部分时(步骤ST204：“否”)，在步骤ST205中，截取区域候选变更单元130判定是否满足了第一结束条件。具体而言，以下的情况为第一结束条件：截取区域候选的变更次数达到上限值的情况，或者如后述的环绕了截取区域候选的移动路径一周的情况等。

在未满足第一结束条件时(步骤ST205：“否”)，在步骤ST203中，截取区域候选变更单元130根据变更规则，对截取区域候选的位置和大小的其中至少一方进行变更。如上所述，基本上重复进行该变更，直到截取区域候选内至少包含一个特征部分为止。

在满足了第一结束条件时(步骤ST205：“是”)，在步骤ST206中，截取区域设定单元140将暂时存储的截取区域候选设定为截取区域。另外，在未进至步骤ST207~步骤ST210的流程而满足第一结束条件时，截取区域设定单元140也可以将由截取区域候选变更单元130最初设定的截取区域候选设定为截取区域。

在第一截取区域候选内包含特征部分时(步骤ST204：“是”)，在步骤ST207中，截取区域设定单元140计算判定基准参数。

在步骤ST208中，截取区域设定单元140判定第一截取区域候选是否满足了“存储条件”。该存储条件与上述的判断基准参数有关。

在第一截取区域候选满足了存储条件时(步骤ST208：“是”)，在步骤ST209中，截取区域设定单元140暂时存储第一截取区域候选。

在步骤ST210中，截取区域设定单元140判定是否满足了“截取区域搜索处理的结束条件(第二结束条件)”。另外，在第一截取区域候选未满足存储条件时(步骤ST208：“否”)，不经由步骤ST209而进行步骤ST210的处理。

在未满足截取区域搜索处理的结束条件(第二结束条件)时(步骤ST210：“否”)，截取区域设定单元140将变更截取区域候选的指示输出到截取区域候选变更单元130。由此，截取区域候选变更单元130根据变更规则对截取区域候选的位置和大小的其中至少一方进行变更，从而设定与第一截取区域候选不同的第二截取区域候选。

在满足了截取区域搜索处理的结束条件(第二结束条件)时(步骤ST210：“是”)，在步骤ST211中，截取区域设定单元140将暂时存储的截取区域候选设定为截取区域。

[2－2]特征部分的检测方法

<1>通过颜色信息进行特征部分的检测的情况:

特征部分检测单元120在拍摄图像S10中检测色度高的区域或占有率少的颜色的区域(即，在柱状图中的高度低的颜色的区域)作为特征部分。

例如，招牌通常使用色度高的颜色，因此容易被检测为特征部分。例如，如图3所示，在拍摄对象区域为繁华街的情况下，通过观察招牌的图像，能够容易识别与该图像对应的拍摄对象区域内的位置。因此，通过使色度高的颜色的区域包含在截取区域内，用户只要观察截取图像就能够容易识别与该截取图像对应的位置。

另外，具有特征性颜色的物体容易被检测为特征部分。例如，如图4所示，在拍摄对象区域为包月停车场的情况下，通过观察平时停放的特征性颜色的汽车的图像，能够容易识别与该图像对应的拍摄对象区域内的位置。因此，通过使占有率少的颜色的区域包含在截取区域内，用户只要观察截取图像就能够容易识别与该截取图像对应的位置。另外，也可以从显眼的颜色(例如柱状图中的出现频率低的颜色)等开始，对颜色设定优先级，从而对特征部分进行加权。

另外，在使特征性颜色的汽车包含在画面内的情况下，若是仅在截取图像内的端部存在相当于数个像素的、表示特征性颜色的汽车的区域的截取图像，则观察该图像的用户难以识别特征性颜色的汽车的存在。因此，也可以在一定面积以上的颜色区域包含于截取区域候选中时，将该颜色区域判断为特征区域。由此可以避免用户在图像中难以识别特征性颜色的汽车的存在的情况。

例如，如图5所示，截取区域候选1所包含的特征性颜色的区域由于其面积不超过基准值(例如，截取区域候选的面积的5%)，所以不将其作为特征部分处理。另一方面，截取区域候选2所包含的特征性颜色的区域超过基准值，因此将其作为特征部分处理。

<2>通过形状信息进行特征部分的检测的情况:

特征部分检测单元120在拍摄图像S10中，检测边缘部分、含有高频分量的部分、或者含有很多棱角的部分(即，通过Harris算子检测出的部分)作为特征部分。

例如，如图6所示，在拍摄对象区域内包含建筑物时，柱子、屋顶等建筑物的轮廓部分容易被检测为特征部分。因为柱子和屋顶等的位置关系可以预先把握，所以通过观察柱子、屋顶等建筑物的轮廓部分的图像，能够容易识别与该图像对应的拍摄对象区域内的位置。因此，通过使边缘部分、含有高频分量的部分或含有很多棱角的部分包含在截取区域内，用户只要观察截取图像就能够容易识别与该截取图像对应的位置。

另外，若是仅在截取区域候选的端部包含一个棱角的截取图像，则观察该图像的用户不注意到该棱角的存在，或者难以识别是棱角的哪一部分。因此，也可以在该棱角位于距截取区域候选的端部规定像素的内侧时，才采用该棱角作为特征部分。由此，能够避免用户在图像中难以识别是否为棱角的情况。

例如，将截取区域候选中的去除了周围部的内部区域(例如，距轮廓线相当于截取区域候选的高度(宽度)的5%的高度(宽度)的内侧的区域)定义为“可识别区域”。并且，即使棱角包含于截取区域候选中，但不包含于可识别区域时，不将该棱角作为特征信息处理。例如，图7中的棱角1虽然包含于截取区域候选3，但位于可识别区域之外，因此不将其作为截取区域候选3的特征部分处理。另一方面，棱角2包含于截取区域候选4的可识别区域，因此将其作为截取区域候选4的特征部分处理。

<3>通过文字信息进行特征部分的检测的情况:

特征部分检测单元120在拍摄图像S10中检测文字部分作为特征部分。

如上所述，招牌中通常包含文字信息。因此，通过使文字部分作为特征部分包含在截取区域中，用户只要观察截取图像就能够容易地识别与该截取图像对应的位置。

<4>由用户输入的情况

将广角相机用作监视相机时，广角相机被固定在规定的位置。也就是说，拍摄对象区域为固定的。因此，也可以预先将拍摄对象区域内的特征部分和其位置存储到特征部分检测单元120中，并使其包含在截取图像中。

<5>通过上述检测方法<1>至<4>的任意的组合进行检测的情况：

上述检测方法<1>至<4>除分别单独使用以外，也可以进行组合。由此能够检测对观察截取图像的用户更容易识别的特征部分。

例如，在图4的例子的情况下，在穿着与平时停放的特征性颜色的汽车相同的颜色的衣服的人进入拍摄对象区域内时，通过将颜色信息作为检测基准以外，还将形状信息作为检测基准(即，组合检测方法<1>和<2>)，从而能够仅将平时停放的特征性颜色的汽车准确地检测为特征部分。

[2-3]变更规则

<1>固定截取区域候选的大小且在包含目标图像的范围内移动截取区域候选的情况：

在步骤ST203中设定、变更截取区域候选时，截取区域候选变更单元130将截取区域候选的大小保持为固定，并在包含目标图像的范围内，变更截取区域候选的位置。例如，截取区域候选变更单元130也可以以如下的方式依次变更截取区域候选的位置：使截取区域候选的区域中心通过目标图像的轮廓上或轮廓附近而环绕目标图像。由此，在将目标图像配置在截取区域候选的中央附近的同时，能够搜索特征部分。

<2>将截取区域候选的基准位置固定在目标图像的基准位置且变更截取区域候选的大小的情况：

在步骤ST203中设定、变更截取区域候选时，截取区域候选变更单元130将截取区域候选的基准位置(例如区域中心)固定在目标图像的基准位置(例如中心)，并且在使截取区域候选中的目标图像的占有率为规定值以上的范围内，变更截取区域候选的大小。

这里提出的截取区域候选的大小的变更包括：不改变图像的纵横比而进行拉近放大(zoom in)和推远缩小(zoom out)的情况、改变图像的纵横比的情况、或者改变图像的纵横比而进行拉近放大或推远缩小的情况等。

<3>在包含目标图像的范围内，移动截取区域候选且变更截取区域候选的大小的情况：

在步骤ST203中设定、变更截取区域候选时，截取区域候选变更单元130在包含目标图像且使截取区域候选中的目标图像的占有率为规定值以上的范围内，变更截取区域候选的位置和大小。例如，截取区域候选变更单元130在截取区域候选的区域中心与目标图像重叠且使截取区域候选中的目标图像的占有率为规定值以上的范围内，变更截取区域候选的位置和大小。由此，在将目标图像配置在截取区域候选的中央附近且将目标图像的大小保持为规定等级以上的同时，能够搜索特征部分。

例如，截取区域候选变更单元130将截取区域候选固定为第一的大小且沿如下的路径变更截取区域候选的位置：截取区域候选的区域中心通过目标图像的轮廓上或轮廓附近而环绕目标图像。接着，截取区域候选变更单元130放大截取区域候选而固定为第二的大小，并且在相同的路径上变更截取区域候选的位置。重复进行上述变更直到截取区域候选中的目标图像的占有率低于规定值为止。

图8A~8D是用于说明以往的图像截取方法、以及基于上述的变更规则<1>和<2>的图像截取方法的图。图8A~8D表示拍摄对象区域为室内的情况下的拍摄图像。

在图8A~8D中，分别表示：作为拍摄图像的全方位图像(图8A)、以往的截取图像(图8B)、根据变更规则<1>的截取图像(图8C)、以及根据变更规则<2>的截取图像(图8D)。另外，在全方位图像中，表示与各截取图像对应的规定了截取区域候选的框。并且，以相同的表现形式表示规定了截取区域候选的框和对应于截取区域候选的截取图像的框。也就是说，以实线表示以往的截取图像以及规定了与其对应的截取区域候选的框，以虚线表示根据变更规则<1>的截取图像以及规定了与其对应的截取区域候选的框，以点划线表示根据变更规则<2>的截取图像以及规定了与其对应的截取区域候选的框。

在图8B所示的以往的截取图像中，包含目标图像，未包含特征性图像。因此，用户即使观察该截取图像也不能容易识别是哪个位置的截取图像。

另一方面，本实施方式的显示控制装置100首先变更截取区域候选的位置和大小的其中至少一方，直到在截取区域候选中包含特征部分为止。在图8C和图8D所示的根据变更规则<1>的截取图像和根据变更规则<2>的截取图像中，会议室门牌为特征部分。若截取图像中包含室内门口附近的会议室门牌，则用户能够容易识别截取图像中拍摄到的室内的地点(即，拍摄图像的拍摄对象的空间中的位置)为门口附近。

[2-4]判断基准参数的计算

作为判断基准参数，截取区域设定单元140计算：以分数评价截取区域候选内包含的特征部分的特征分数(score)、截取区域候选的区域中心与目标图像的中心的距离、以及截取区域候选中的目标图像的占有率。

这里，特征分数的求法根据上述的特征部分的检测方法而不同。

具体而言，在检测方法<1>的情况下，认定为特征部分的像素的数成为特征部分的数。另外，在检测方法<2>中，对于包含很多棱角的部分的情况也是，认定为特征部分的像素为计数单位。可以使用该特征部分的数目作为特征分数，也可以使用对特征部分进行加权后相加所得的数作为特征分数。作为加权的例子，可以在检测方法<1>中对显眼的颜色设定优先级而对特征区域进行加权。在以出现频率低的顺序采用三个颜色作为特征部分时，通过以出现频率低的顺序设定3、2、1的权重，从而在同样的特征部分中，出现频率越低的颜色的特征部分的特征分数变高。

另外，在检测方法<2>中，在检测边缘部分或包含高频分量的部分的情况下，认定为特征部分的块的数成为特征部分的数。在认定为特征部分的多个像素连续时，该连续的整个像素群为一个块。

另外，在检测方法<3>的情况下，一个文字或一个单词(即，含有意思的单位)为计数单位。也就是说，使文字数或单词数为特征分数。

另外，在检测方法<4>的由用户输入的情况下，根据以上述的形态中的哪一形态指定特征部分，计数单位不同。

另外，在检测方法<5>的情况下，也可以通过将对任意组合的多个检测方法分别计算出的特征部分的数进行加权相加，从而计算复合参数。

作为加权的方法，有一种使需要重视的检测方法的权重高的方法。例如，在认为基于颜色的特征部分为有效时，对于通过检测方法<1>检测出的特征部分，设权重为2，而在由于是黑白图像无法使用基于颜色的特征部分时，设检测方法<1>的权重为0即可。

[2－5]存储条件

在满足存储条件时，截取区域设定单元140存储当前作为处理对象的截取区域候选。存储条件为：基于存储基准，当前作为处理对象的截取区域候选在当前所存储的截取区域候选之上。

<1>将“特征分数大”设为存储基准的情况：

截取区域设定单元140在当前作为处理对象的截取区域候选的特征分数的值比当前所存储的截取区域候选的特征分数的值大的情况下，作为替代存储该作为处理对象的截取区域候选。该存储基准可以适用于上述的变更规则<1>至<3>中的任一变更规则。

<2>将“特征分数的值为规定值以上且将目标拍摄在中央部分”设为存储基准的情况：

截取区域设定单元140在当前作为处理对象的截取区域候选的特征分数的值为规定值以上、而且相比于当前所存储的截取区域候选，当前作为处理对象的截取区域候选的区域中心与目标图像的中心的距离更短时，作为替代存储该处理对象的截取区域候选。该存储基准可以适用于上述的变更规则<1>和变更规则<3>。

<3>将“特征分数的值为规定值以上且拍摄出的目标大”设为存储基准的情况：

截取区域设定单元140在当前作为处理对象的截取区域候选的特征分数的值为规定值以上、而且当前作为处理对象的截取区域候选中的目标图像的占有率比在当前所存储的截取区域候选中的占有率大时，作为替代存储该处理对象的截取区域候选。该存储基准可以适用于上述的变更规则<2>和变更规则<3>。

[2－6]截取区域搜索处理的结束条件

截取区域设定单元140在满足了截取区域搜索处理的结束条件(第二结束条件)时，将暂时存储的截取区域候选设定为截取区域。该结束条件根据变更规则而不同。

也就是说，在变更规则<1>的情况下，结束条件为：截取区域候选的区域中心通过目标图像的轮廓上或轮廓附近而环绕目标图像一周。

另外，在变更规则<2>和变更规则<3>的情况下，结束条件为：截取区域候选中的目标图像的占有率变得低于规定值。

如上所述，根据本实施方式，在显示控制装置100中，截取区域候选变更单元130在截取区域候选未包含特征部分时，变更截取区域候选的位置和大小的其中至少一方。基本上，重复进行该变更直到截取区域候选中同时包含目标和特征部分为止。

由此，对拍摄对象区域内的位置赋予特征的特征部分与目标一起包含在截取图像内，所以用户通过观察该截取图像，能够容易识别目标的位置。

另外，截取区域候选变更单元130固定截取区域候选的大小，并且在截取区域候选包含目标图像的范围内，变更截取区域候选的位置。

由此，能够在使目标图像可靠地包含在截取区域候选内之后，搜索包含特征部分的截取区域候选。

或者，截取区域候选变更单元130将截取区域候选的基准位置固定在目标图像的基准位置，并在截取区域候选中的目标图像的占有率为规定值以上的范围内，变更截取区域候选的大小。

由此，能够在使目标图像可靠地包含在截取区域候选内之后，搜索包含特征部分的截取区域候选。另外，通过将上述基准位置设为中心，能够在将目标图像配置在截取区域候选内的中央的同时，搜索包含特征部分的截取区域候选。

或者，截取区域候选变更单元130在包含目标图像且使截取区域候选中的目标图像的占有率为规定值以上的范围内，变更截取区域候选的位置和大小。

由此，能够在使目标图像可靠地包含在截取区域候选内之后，搜索包含特征部分的截取区域候选。还有，即使在目标和特征部分之间的距离较大时，也能够搜索包含特征部分的截取区域候选。

另外，截取区域设定单元140将截取区域候选群中的包含特征部分最多的截取区域候选设定为截取区域。

由此，能够形成目标位置的估计材料最多的截取图像。

或者，截取区域设定单元140在包含规定数以上的特征部分的截取区域候选群中，将其区域中心与目标图像的中心最近的截取区域候选设定为截取区域。

由此，能够形成包含较多的目标位置估计材料且将目标清晰地拍摄在中央附近的截取图像。

或者，截取区域设定单元140将包含规定数以上的特征部分的截取区域候选群中的、截取区域候选中的目标图像的占有率最大的截取区域候选设定为截取区域。

由此，能够形成包含较多的目标位置估计材料而且清晰地拍摄出目标并将目标拍摄得较大的截取图像。

另外，截取区域设定单元140也可以计算有关截取区域候选群的各候选中的、目标图像的位置、目标图像的大小和所包含的特征部分的个数的分数(评价分数)，并基于该分数从截取区域候选群中选择截取区域。截取区域设定单元140存储有使目标图像的位置、目标图像的大小和所包含的特征部分的个数的各个值与分数关联对应的表。截取区域设定单元140使用该表来计算分数。

另外，在上述说明中，截取区域候选变更单元130进行步骤ST204和步骤ST205的处理，但也可以省去这些处理。也就是说，可以对于截取区域候选变更单元130所设定的所有截取区域候选，由截取区域设定单元140计算判断基准参数。但是，通过采用上述说明的处理流程，截取区域设定单元140仅对包含特征部分的截取区域候选进行步骤ST207~ST210的处理即可。而且，截取区域候选变更单元130执行的步骤ST204和步骤ST205的处理因为只要判断有无特征部分即可，所以处理负荷小。因此，通过采用上述说明的处理流程，可以使整体上的处理负荷变小，能够缩短处理时间。

另外，上述的显示控制装置100可以由包含存储器、CPU的个人计算机等计算机构成。并且，通过CPU读出存储于存储器的计算机程序并执行处理，能够实现构成显示控制装置100的各个结构元素的功能。

另外，在上述说明中，在检测目标并设定以该目标为中心的规定的大小的截取区域候选后，变更截取区域候选的大小或位置以使其包含特征部分，但也可以预先检测拍摄图像S10所包含的目标和特征部分，并设定截取区域以使其基于规定的条件包含与目标靠近的特征部分。

2009年12月4日提交的日本专利申请特愿2009-276621号所包含的说明书、说明书附图和说明书摘要的公开内容全都引用于本申请。

工业实用性

本发明的显示控制装置和显示图像形成方法作为显示特别容易识别出目标的位置的图像的装置和方法很有用。

Claims

1.显示控制装置，从拍摄图像中截取出截取区域的图像并输出，该装置包括：

检测单元，从所述拍摄图像中检测目标；

特征部分检测单元，检测特征部分，该特征部分位于表示所述目标的图像区域即目标图像之外，并且特征性地表示在所述拍摄图像中的位置或在所述拍摄图像的拍摄对象的空间中的位置；以及

设定单元，设定所述截取区域以使其包含所述目标图像和所述特征部分，

所述设定单元包括变更单元，该变更单元设定包含了所述目标图像的截取区域候选，并在所述截取区域候选未包含所述特征部分时，变更所述截取区域候选的位置和大小的其中至少一方，

所述设定单元将由所述变更单元变更为包含所述目标图像和所述特征部分双方的截取区域候选，设定为所述截取区域。

2.如权利要求1所述的显示控制装置，

所述变更单元在所述截取区域候选包含所述目标图像的范围内，变更所述截取区域候选的位置。

3.如权利要求1所述的显示控制装置，

所述变更单元将所述截取区域候选的基准位置固定在所述目标图像的基准位置，并在使所述截取区域候选中的所述目标图像的占有率为规定值以上的范围内，变更所述截取区域候选的大小。

4.如权利要求1所述的显示控制装置，

所述变更单元在包含所述目标图像且所述截取区域候选中的所述目标图像的占有率为规定值以上的范围内，变更所述截取区域候选的位置和大小。

5.如权利要求1所述的显示控制装置，

所述设定单元设定包含所述目标图像和所述特征部分的多个截取区域候选，在设定的所述多个截取区域候选即截取区域候选群中，将满足规定的条件的一个截取区域候选设定为所述截取区域。

6.如权利要求5所述的显示控制装置，

所述设定单元在所述截取区域候选群中，将包含所述特征部分最多的截取区域候选设定为所述截取区域。

7.如权利要求5所述的显示控制装置，

所述设定单元在包含规定数以上的所述特征部分的所述截取区域候选群中，将所述截取区域候选的区域中心与所述目标图像的中心最近的截取区域候选设定为所述截取区域。

8.如权利要求5所述的显示控制装置，

所述设定单元在包含规定数以上的所述特征部分的所述截取区域候选群中，将所述截取区域候选中的所述目标图像的占有率最大的截取区域候选设定为所述截取区域。

9.如权利要求5所述的显示控制装置，

所述设定单元计算有关在所述截取区域候选群的各候选中的、所述目标图像的位置、所述目标图像的大小和所包含的所述特征部分的个数的评价分数，并基于该评价分数，从所述截取区域候选群中选择所述截取区域。

10.显示图像形成方法，从拍摄图像中截取出截取区域内的图像而形成显示图像，该方法包括如下步骤：

从所述拍摄图像中检测目标的步骤；

检测特征部分的步骤，该特征部分位于表示所述目标的图像区域即目标图像之外，并且特征性地表示在所述拍摄图像中的位置或在所述拍摄图像的拍摄对象的空间中的位置；以及

设定所述截取区域以使其包含所述目标图像和所述特征部分的步骤，

所述进行设定的步骤包括如下步骤：设定包含了所述目标图像的截取区域候选，并在所述截取区域候选未包含所述特征部分时，变更所述截取区域候选的位置和大小的其中至少一方的步骤，

在所述进行变更的步骤中，将变更为包含所述目标图像和所述特征部分双方的截取区域候选，设定为所述截取区域。