CN114390165A - 摄像装置、信息处理方法和存储介质 - Google Patents

Abstract

本发明公开一种摄像装置、信息处理方法和存储介质。摄像装置能够被安装可安装和拆卸于所述摄像装置的可装卸设备，所述摄像装置包括：控制单元，其被配置为使安装到所述摄像装置的可装卸设备开始预定图像的图像分析；判断单元，其被配置为判断所述预定图像的图像分析是否完成；和确定单元，其被配置为基于所述判断单元的判断结果，确定从所述摄像装置使所述可装卸设备开始对所述摄像装置拍摄的拍摄图像进行图像分析时到所述摄像装置请求所述可装卸设备获取图像分析结果时的等待时间。

Description

摄像装置、信息处理方法和存储介质

技术领域

本发明涉及一种摄像装置、信息处理方法和计算机可读数据载体。

背景技术

近年来，如下图像分析和图像处理被执行：使用由摄像装置(例如照相机)拍摄的图像来检测和追踪被摄体并估计属性的图像分析，以及基于这种图像分析的结果估计被摄体的数量的图像处理。通常，通过将摄像装置拍摄的图像发送到诸如执行图像处理的个人计算机(PC)或服务器等的高性能运算设备来执行这样的图像处理。随着处理能力的提高和运算设备的小型化，摄像装置已经能够执行图像处理。可以由设置在摄像装置主机中的运算设备执行在摄像装置中执行的处理。

然而，摄像装置中包括的运算设备的处理能力可能不足，因此将可安装和拆卸于摄像装置的设备安装到摄像装置，并使其执行运算处理。此时，在摄像装置使可装卸设备执行运算处理的情况下，可能难以掌握可装卸设备执行运算处理所需的时间，这取决于可装卸设备的类型。针对可安装到摄像装置的设备，国际专利申请公开第2013/011988号讨论了一种技术，其中可安装到照相机的发光单元向照相机发送用于指示发光单元可以发光的时间的信息。

发明内容

根据本发明的一方面，摄像装置能够被安装可安装和拆卸于所述摄像装置的可装卸设备，所述摄像装置包括：控制单元，其被配置为使安装到所述摄像装置的可装卸设备开始预定图像的图像分析；判断单元，其被配置为判断所述预定图像的图像分析是否完成；和确定单元，其被配置为基于所述判断单元的判断结果，确定从所述摄像装置使所述可装卸设备开始对所述摄像装置拍摄的拍摄图像进行图像分析时到所述摄像装置请求所述可装卸设备获取图像分析结果时的等待时间。

根据以下参照附图对示例性实施例的详细描述，本发明的其他特征将变得清楚。

附图说明

图1是示出根据本发明不同实施例的系统配置的示例的图。

图2是示出根据示例性实施例的摄像装置的硬件配置的图。

图3是示出根据示例性实施例的摄像装置的功能配置的图。

图4是示出根据示例性实施例的可装卸设备的硬件配置的图。

图5是示出根据示例性实施例的可装卸设备的功能配置的图。

图6是示出根据第一示例性实施例的测量分析处理所需时间的方法的图。

图7A是示出根据示例性实施例的用于测量分析处理所需时间的测试图像的图。

图7B是示出根据示例性实施例的用于测量分析处理所需时间的测试图像的图。

图7C是示出根据示例性实施例的用于测量分析处理所需时间的测试图像的图。

图8是示出根据第二示例性实施例的用于多次测量分析处理所需时间的方法的示意图。

图9是示出根据示例性实施例的摄像装置的硬件配置的其他示例的框图。

具体实施方式

现在将根据附图详细描述本发明的优选实施例。

基于附图，下面将详细描述本发明的示例性实施例。以下示例性实施例中所示的配置仅仅是示例，并且本发明不限于以下示例性实施例中描述的配置。在示例性实施例中，适当地省略冗余描述。尽管在示例性实施例中描述了多个特征，但并非所有特征对于本发明都是必不可少的，并且可以将不同特征可选地组合在一起。示例性实施例可以应用于用于各种目的的摄像技术，例如监视目的和播放目的。可以将以下示例性实施例应用于能够连接到网络并与其他装置通信的摄像装置(网络照相机)。以下示例性实施例也适用于不能连接到网络的摄像装置。在示例性实施例中，作为图像分析的目标的图像可以是静止图像或者可以是运动图像。尽管使用摄像装置作为示例描述了示例性实施例，但是本发明也适用于其他电子设备。

系统配置

下面描述第一示例性实施例。可装卸设备100(100a～100d)是可安装和拆卸于摄像装置110(110a～110d)的运算设备。作为示例，可装卸设备100是在安全数字(SD)卡上安装了预定处理电路的设备。然而，可装卸设备100不需要具有SD卡的所有功能。

例如，可装卸设备100是SD卡的形式，使得整个可装卸设备100可以插入到摄像装置110中。因此可装卸设备100被配置为以使得可装卸设备100不具有从摄像装置110突出的部分的方式连接到摄像装置110。或者，例如，可装卸设备100可以被配置为使得可装卸设备100的一半以上能够插入到摄像装置110中。在这种情况下，可装卸设备100被配置为在从摄像装置110突出小部分的状态下连接到摄像装置110。这样可以防止可装卸设备100干扰布线等障碍物，进一步提高使用设备时的便利性。然而，将可装卸设备100配置为使其一半以上可以插入到摄像装置110中并非必要。

在现有的许多网络摄像机等摄像装置110中，准备了SD卡槽，因此可装卸设备100可以为现有的摄像装置110提供扩展功能。代替SD卡的形式，可装卸设备100可以被配置为在用于安装至少能够存储由摄像装置110拍摄的图像的存储设备的任何接口处，被安装到摄像装置110。例如，可装卸设备100可以包括通用串行总线(USB)接口并且可以被配置为被安装到摄像装置110的USB插座。可装卸设备100可以被配置为具有用于记录由摄像装置110拍摄的图像的记录功能，但记录功能并非必要。

例如，在编程用于执行预定处理的现场可编程门阵列(FPGA)上实现可装卸设备100的预定处理电路。然而，可以通过另一种形式实现预定处理电路。

摄像装置110是诸如网络摄像机的摄像装置。在本示例性实施例中，摄像装置110具有能够处理图像的内置运算设备。然而，本发明不限于此。例如，可以有连接到摄像装置110的诸如个人计算机(PC)的外部计算机，并且外部计算机和摄像装置110的组合可以被视为摄像装置110。

在本示例性实施例中，作为示例，可装卸设备100被安装到所有摄像装置110。图1例示了四个摄像装置110和安装到各个摄像装置110的可装卸设备100。然而，这些装置的组合可以是三个以下，或者可以是五个以上。

将具有图像分析功能的可装卸设备100安装到摄像装置110，因此即使摄像装置110不具有图像分析功能，摄像装置110也可以执行图像处理。在如本示例性实施例中那样在摄像装置110中提供用于图像处理的运算设备的形式中，获得了以下效果。即，设置有运算设备的可装卸设备100被安装到摄像装置110，从而使得摄像装置110能够执行的图像处理多样化或复杂化。输入/输出装置130是从用户接收输入并向用户输出信息(例如，显示信息)的装置。

在本示例性实施例中，例如，输入/输出装置130是诸如PC的计算机。通过计算机内置的处理器执行安装在计算机上的浏览器和本地应用程序，从而输入和输出信息。摄像装置110和输入/输出设备130经由网络120彼此连接，使得摄像装置110和输入/输出设备130可以彼此通信。例如，网络120包括满足诸如以太网(注册商标)之类的通信标准的多个路由器、交换机和电缆。在本示例性实施例中，网络120可以是能够在摄像装置110和输入/输出设备130之间进行通信的任何网络，并且可以以任何规模、以任何配置并基于网络120兼容的任何通信标准来构建。网络120可以是例如因特网、有线局域网(LAN)、无线LAN或广域网(WAN)。例如，网络120可以被配置为基于符合开放网络视频接口论坛(ONVIF)标准的通信协议来执行通信。然而，该配置不限于此。例如，网络120可以被配置为基于诸如唯一通信协议之类的其他通信协议来执行通信。

摄像装置的配置

接下来，描述摄像装置110的配置。图2是示出摄像装置110的硬件配置的示例的图。例如，摄像装置110包括作为其硬件组件的摄像单元201、图像处理单元202、运算处理单元203、分配单元204和SD接口(I/F)单元205。摄像单元201包括形成光的图像的透镜单元和根据形成图像的光而将光转换成模拟信号的图像传感器。镜头单元具有用于调整视角的变焦功能和用于调整光量的光圈功能。图像传感器具有增益功能，用于在将光转换为模拟信号时调整灵敏度。基于图像处理单元202通知给摄像单元201的设置值来调整这些功能。

通过模数转换电路将摄像单元201获取的模拟信号转换为数字信号，并将数字信号作为图像信号传输至图像处理单元202。运算处理单元203包括一个或多个处理器，例如中央处理单元(CPU)和微处理器单元(MPU)，诸如随机存取存储器(RAM)和只读存储器(ROM)等的存储器，以及用于I/F的驱动程序。

作为示例，运算处理单元203可以确定分配，例如摄像装置110和可装卸设备100中的哪一个来执行要通过上述系统执行的处理的各部分，并且可以执行与确定的分配对应的处理。

运算处理单元203将从图像处理单元202接收到的图像传送到分发单元204或SDI/F单元205。运算处理单元203还将分析结果的数据传送到分发单元204。分发单元204包括网络分发引擎和诸如RAM和以太网物理层(ETH PHY)模块等的外围设备。ETH PHY模块是执行以太网物理(PHY)层处理的模块。

分发单元204将从运算处理单元203获取的图像数据和分析结果的数据转换成可以分发到网络120的格式，并将转换后的数据输出到网络120。SD I/F单元205是用于与可装卸设备100连接的接口部，例如，包括电源和诸如可安装和拆卸于可装卸设备100的安装/拆卸插座等的安装构件。

在这种情况下，SD I/F单元205被配置为符合SD协会制定的SD标准。经由SD I/F单元205在可装卸设备100和摄像装置110之间进行通信，例如将从运算处理单元203获取的图像发送到可装卸设备100，以及从可装卸设备100获取数据。

图3示出了摄像装置110的功能配置的示例。例如，摄像装置110包括作为其功能的摄像控制单元301、信号处理单元302、存储单元303、控制单元304、分析单元305、设备通信单元306和网络通信单元307。摄像控制单元301执行控制以经由摄像单元201拍摄周围环境。

信号处理单元302对通过摄像控制单元301拍摄的图像执行预定处理，从而生成拍摄图像的数据(图像数据)。在下文中，在适当的情况下，将拍摄图像的数据简称为“拍摄图像”或“图像”。如上所述，拍摄图像可以是静止图像或者可以是运动图像。

例如，信号处理单元302对通过摄像控制单元301拍摄的图像进行编码。例如，信号处理单元302使用联合图像专家组(JPEG)编码方法对静止图像进行编码。信号处理单元302使用H.264/运动图像专家组(MPEG)-4高级视频编码(AVC)(以下称为“H.264”)或高效视频编码(HEVC)编码方法对运动图像进行编码。

信号处理单元302可以使用由用户例如通过摄像装置110的操作单元(未示出)从预先设置的多个编码方法中选择的编码方法对图像进行编码。存储单元303存储分析单元305能够执行的分析处理的列表(以下称为“第一处理列表”)和要对分析处理的结果执行的后处理的列表。存储单元303存储分析处理的结果。

尽管在本示例性实施例中要执行的处理是分析处理，但是可以执行任何处理。对于与要执行的处理相关的处理，存储单元303可以存储第一处理列表和后处理列表。控制单元304控制信号处理单元302、存储单元303、分析单元305、设备通信单元306和网络通信单元307各自执行预定处理。

分析单元305选择性地对拍摄的图像执行前分析处理、分析处理和后分析处理中的至少任一个。预分析处理是在执行分析处理之前对拍摄的图像执行的处理。在根据本示例性实施例的预分析处理中，作为示例，执行通过分割拍摄图像来创建分割图像的处理。

分析处理是输出通过分析输入图像获得的信息的处理。在根据本示例性实施例的分析处理中，作为示例执行以下处理：接收通过预分析处理获得的分割图像作为输入，对分割图像执行人体检测处理、面部检测处理和车辆检测处理中的至少任何一个，以及输出分析结果。

分析处理可以是使用机器学习模型输出分割图像中的被摄体的位置的处理，该机器学习模型例如基于以下文献中讨论的技术来检测图像中包括的被摄体：J.Redmon,A.Farhadi，YOLO9000：更好更快更强，计算机视觉和模式识别(CVPR)2016(Better FasterStronger,Computer Vision and Pattern Recognition(CVPR)2016)。

后分析处理是在执行分析处理之后执行的处理。在根据本示例性实施例的后分析处理中，作为示例，基于分割图像的分析结果，执行用于输出通过将各个分割图像中检测到的被摄体的数量相加而获得的值作为分析结果的处理。

分析处理可以是执行画面匹配(pattern matching)、检测图像中的被摄体并输出被摄体的位置的处理。设备通信单元306与可装卸设备100进行通信。设备通信单元306将输入数据转换为能够通过可装卸设备100处理的格式，并将通过转换获得的数据发送到可装卸设备100。

设备通信单元306还从可装卸设备100接收数据并将接收到的数据转换成摄像装置110可以处理的格式。在本示例性实施例中，设备通信单元306作为转换处理执行用于转换浮点格式和定点格式之间的小数的处理。然而，该配置不限于此。设备通信单元306可以执行其他处理。

在本示例性实施例中，设备通信单元306将在SD标准的范围内预先确定的命令序列发送到可装卸设备100，并从可装卸设备100接收响应，从而与可装卸设备100进行通信。网络通信单元307经由网络120与输入/输出装置130通信。

可装卸设备的配置

图4示出了可装卸设备100的硬件配置的示例。作为示例，可装卸设备100包括I/F单元401、FPGA 402、SD控制器403和存储单元404。

可装卸设备100形成为如下形状：能够将可装卸设备100插入到包括在摄像装置110中的SD I/F单元205的安装/拆卸插座中以及从其中移除的形状，即符合SD标准的形状。

I/F单元401是用于将可装卸设备100连接到诸如摄像装置110之类的装置的接口部。例如，I/F单元401包括接收从摄像装置110提供的电力的电接触端子，并且产生和分配要在可装卸设备100中使用的电力。

类似于摄像装置110的SD I/F单元205，I/F单元401符合关于由SD标准定义(符合SD标准)的项的SD标准。经由I/F单元401接收来自摄像装置110的图像和设置数据，并将数据从FPGA 402发送到摄像装置110。

FPGA 402包括输入/输出控制单元410、处理切换单元411和运算处理单元412。FPGA 402是一种能够在其内部重复地重新配置逻辑电路结构的半导体设备。通过由FPGA402实现的处理，可以将用于图像分析的处理功能添加(提供)到安装了可装卸设备100的装置。由于稍后可以通过FPGA 402的重新配置功能来改变逻辑电路结构，因此被安装到例如技术超前领域中的装置的可装卸设备100能够使得该装置适时地执行适当的处理。

在本示例性实施例中，描述了使用FPGA的示例。可选择地，例如，可以使用通用专用集成电路(ASIC)或专用大规模集成(LSI)电路，只要能够实现根据示例性实施例的处理。通过从专用I/F写入包括关于要生成的逻辑电路结构的信息的设置数据或者从专用I/F读取设置数据来启动FPGA 402。在本示例性实施例中，设置数据被保持(存储)在存储单元404中。

存储单元404例如由NAND闪存组成。例如，存储单元404存储诸如从摄像装置110写入的图像数据、以及写入运算处理单元412的关于图像分析功能的信息的数据。存储单元404还存储例如关于FPGA 402的设置数据和用于分析的电路数据。还可以使用RAM作为存储单元404。

如果FPGA 402通电，则FPGA 402从存储单元404中读取设置数据，生成逻辑电路，并启动。然而，该配置不限于此。例如，可以在可装卸设备100中实现专用电路，并且摄像装置110可以经由I/F单元401将设置数据写入FPGA 402。

输入/输出控制单元410包括用于向摄像装置110发送图像和从摄像装置110接收图像的电路、用于分析从摄像装置110接收的命令的电路、以及用于基于分析结果执行控制的电路。这些命令由SD标准定义，输入/输出控制单元410可以检测其中的一些命令。

输入/输出控制单元410进行控制，使得在执行存储处理的情况下将图像发送到SD控制器403，并且在执行图像分析的情况下将图像发送到运算处理单元412。如果输入/输出控制单元410接收到用于切换处理的设置数据，则输入/输出控制单元410将设置数据发送到处理切换单元411。

SD控制器403是由SD标准定义(符合SD标准)的已知控制集成电路(IC)。SD控制器403基于SD协议控制从操作，并控制从/向存储单元404读取数据/写入数据。

处理切换单元411包括用于基于从摄像装置110接收的设置数据从存储单元404获取关于图像分析功能的信息并将该信息写入运算处理单元412的电路。

例如，关于图像分析功能的信息是指示运算处理单元412中要处理的运算的顺序和类型以及用于计算的系数的设置参数。运算处理单元412包括用于执行图像分析功能的多个运算电路。

运算处理单元412基于从处理切换单元411接收的关于图像分析功能的信息执行运算处理，将运算处理的分析结果发送到摄像装置110，和/或在存储单元404中记录分析结果。如上所述，FPGA 402提取用于要执行的处理功能的设置数据，该设置数据包括在与预先保持的多个处理功能相对应的设置数据中，并基于提取的设置数据重写由运算处理单元412执行的处理内容。

因此，可装卸设备100可以选择性地执行多个处理功能中的至少任何一个。根据需要添加最新添加的处理的设置数据，从而使摄像装置110执行最新的处理。

在下文中，将具有与多个处理功能相对应的多条设置数据描述为“具有多个处理功能”。即，即使在装卸设备100的FPGA 402被配置为执行单个处理功能的状态下，如果能够基于用于其他处理功能的设置数据改变运算处理单元412的处理内容，则将该情况描述为“具有多个处理功能”。

接下来，图5图示了可装卸设备100的功能配置的示例。例如，可装卸设备100包括作为其功能部件的分析单元501、通信单元502和存储器503单元。

分析单元501对从摄像装置110输入的图像执行分析处理。例如，在设置分析处理的设置请求被输入到分析单元501的情况下，分析单元501将自身状态设置为其能够针对设置请求的输入执行分析处理。具体地，如上所述，分析单元501重新配置FPGA 402的逻辑电路结构以执行指定的分析处理。然后，如果从摄像装置110输入图像，则分析单元501对输入图像执行设置分析处理。

在本示例性实施例中，分析单元501能够执行的分析处理是人体检测处理和面部检测处理。然而，可执行的分析处理不限于这些。例如，分析处理还可以包括用于判断预先存储的人是否包括在图像中的处理。例如，计算预先存储的人的图像特征量与从输入图像中检测到的人的图像特征量的重合度，如果重合度大于或等于阈值，则确定检测到的人是预先存储的人。分析处理还可以包括为了保护隐私而将预定掩码图像叠加在从输入图像检测到的人上或对该人执行马赛克处理的处理。可以执行这些分析处理中的多个分析处理。

分析处理还可以包括使用已经通过机器学习学习人的特定动作的训练模型来检测图像中的人是否执行特定动作的处理。此外，分析处理还可以包括用于确定图像中的区域是什么区域的处理。例如，分析处理可以是使用通过机器学习学习了建筑物、道路、人和天空的训练模型来确定图像中的区域是什么区域的处理。

如上所述，可以执行的分析处理适用于使用机器学习的图像分析和不使用机器学习的图像分析。上述各分析处理可以不由可装卸设备100单独执行，而是可以由可装卸设备100与摄像装置110协作执行。

接下来，通信单元502经由I/F单元401与摄像装置110通信。具体地，从摄像装置110输入图像，并且经由I/F单元401从摄像装置110读取分析结果。

存储单元503存储关于分析处理的设置内容和用于分析处理的时钟频率的信息。用于分析处理的时钟频率是指示完成对预定图像单元的分析处理所需的运算处理单元412的时钟频率值的信息。此外，存储单元503还存储上述在存储单元404的描述中描述的信息。

用于确定读取分析结果的等待时间的方法

接下来描述用于确定摄像装置110读取由可装卸设备100执行的处理(视频分析)的结果的读取时间的方法。具体是描述以下方法，通过该方法确定从摄像装置110将作为图像分析处理的目标的图像输入(发送)到可装卸设备100并指示可装卸设备100执行图像分析处理时到摄像装置110请求可装卸设备100获取图像分析的结果以读取结果时的等待时间。在可装卸设备100使用SD卡通信协议的情况下，可装卸设备100用作作为主设备的摄像装置110的从设备，无法主动地将时间信息或分析处理的完成通知给主机摄像装置110。可装卸设备100是使用SD卡通信协议的设备，并且在没有从摄像装置110接收获取图像分析结果的请求的情况下，不能将该结果从可装卸设备100发送到摄像装置110。摄像装置110基于SD卡通信协议与可装卸设备100进行通信。根据SD卡通信协议，除非摄像装置110向可装卸设备100发送获取图像分析结果的请求，否则摄像装置110不能从可装卸设备100获取分析结果。因此，通常，为了从可装卸设备100获取拍摄图像的分析结果，摄像装置110需要做出获取分析结果的请求。根据现有技术，摄像装置110无法知道可装卸设备100中的分析处理何时结束。因此，摄像装置110无法知道何时适合向可装卸设备100发出请求。作为该问题的解决方案，在本示例性实施例中，描述了用于确定摄像装置110读取由可装卸设备100执行的处理(视频分析)的结果的读取时间的方法。而且，出现如下问题。在可装卸设备100使用从摄像装置110提供的时钟用于分析处理时，分析处理所需的时间根据时钟周期而变化。根据本示例性实施例的读取时间确定方法可以解决这个问题。“时钟周期”是指时钟信号的单个重复周期所花费的时长。

参考图6描述了用于确定读取分析结果的等待时间的方法(信息处理方法)。如果控制单元304确定安装到摄像装置110的可装卸设备100是能够执行图像分析的装置，则执行图6所示的流程图中的处理。

首先，摄像装置110的控制单元304经由设备通信单元306向可装卸设备100发出开始分析处理的命令。然后，在步骤S601中，控制单元304对分析处理进行设置。

可装卸设备100的分析单元501在接收到命令后，设置存储单元503中存储的用于分析处理的电路数据。即，如上所述，分析单元501重新配置FPGA 402的逻辑电路结构来执行指定的分析处理。

接下来，在步骤S602中，摄像装置110的控制单元304经由设备通信单元306将用于在步骤S601中设置的分析处理的预定图像(以下称为“测试图像”)发送到可装卸设备100，并且指示可装卸设备100执行图像分析以使得可装卸设备100执行(开始)图像分析。摄像装置110的存储单元303保持用于分析测试图像的分析结果。即，存储单元303保存表示作为分析结果的正解(期望值)的值的信息。可以将测试图像的数据和数据的期望值存储在可装卸设备100的存储单元503中。

可以使用其中SD I/F上的数据线在高电平和低电平(0x0F0F或0xA5A5)之间频繁切换的数据作为要用作测试图像的图像。因此，可以获得直到分析处理完成的时间，并且还可以检查通信中使用的电信号的波形质量，例如串扰对SD I/F的影响。

在步骤S603中，摄像装置110的控制单元304等待预定时间以读取分析结果。即，摄像装置110的控制单元304等待直到预定时间过去。

此时的等待时间可以是预先确定的固定值，也可以根据从可装卸设备100读取的时钟频率的信息来确定。对等待时间的初始值(第一时间)的确定方法进行描述。

为了确定可装卸设备100进行操作的时钟周期，摄像装置110的控制单元304经由设备通信单元306与可装卸设备100通信。例如，摄像装置110的控制单元304获取表示完成对可装卸设备100的存储单元503中存储的预定图像单元的分析处理所需的时钟频率的值的信息。时钟周期乘以时钟频率，从而可以确定完成对预定图像单元的分析处理所需时间的初始值。

分析处理所需的时间取决于摄像装置110和可装卸设备100之间的访问速度(通信速度)。例如，即使在相同的图像分析中，分析处理所需的时间可以根据摄像装置110兼容的SD协议的类型而变化。

例如，如果摄像装置110和可装卸设备100之间的访问速度是SD协议的高速模式，则时钟的频率最大为50MHz。但是，如果访问速度为UHS-I模式，则时钟频率最大为208MHz。即使在相同的访问模式下，摄像装置(主机设备)也可以在时钟频率不超过最大频率的范围内选择任何时钟频率(时钟周期的乘法逆元)。因此，即使在相同的可装卸设备100中，可装卸设备100中的分析处理所需的时间也根据插入了可装卸设备100的摄像装置而变化。

因此，可以通过基于摄像装置110和可装卸设备100之间的通信模式(访问模式)确定的时钟周期以及分析处理所需的时钟频率进行计算来确定用于读取第一测试图像的分析结果的等待时间的初始值。例如，如果访问模式为高速模式(最大时钟：50MHz)，并且分析处理所需的时钟频率为100,000，则等待时间可以设置为20ns的时钟周期×100,000的时钟频率＝2ms作为初始值。初始值可以是比由此计算的时间短预定时间的时间。可以通过逐渐延长后述的等待时间来推导更合适的等待时间。

在步骤S604中，摄像装置110的控制单元304执行获取处理(第一获取处理)，用以经由设备通信单元306向可装卸设备100发出(发送)获取分析结果的获取命令(获取分析结果的请求或指令)，并从可装卸设备100获取指示分析结果的信息。例如，该获取命令是由SD标准定义(符合SD标准)的读取命令。例如，获取命令为READ_SINGLE_BLOCK命令或READ_MULTIPLE_BLOCK命令。

以这种方式，控制单元304还用作获取单元。

然后，在步骤S605中，控制单元304将第一获取处理获取的分析结果与预先保持的期望值(正解)进行比较，并判断对测试图像的分析处理是否完成。以此方式，控制单元304还用作判断单元。

更详细地描述步骤S605的处理。

首先，描述分析结果和期望值。在分析处理是对人数进行计数的情况下，分析结果和期望值都是表示人数的信息。在分析处理为人体检测过程、面部检测过程或车辆检测过程的情况下，分析结果和期望值是表示是否存在检测目标或检测出的目标在图像中的位置的信息。

参照图7A、7B和7C，描述在图像分析的类型是人数计数的情况下的测试图像的描述。图7A示出了具有与摄像装置110拍摄的图像的图像大小相似或相同的图像。该测试图像示出了总共包括八个人体的静止图像。

在图7A所示的图像中的人数进行计数的情况下，通常，将测试图像划分为被称作“补片(patch)”的预定图像单元作为图7B所示的分析处理的处理单元。在这种情况下，测试图像被划分为九个补片P1～P9。

可装卸设备100的分析单元501对划分的补片P1～P9执行图像分析。在从整个图像推导人数的情况下，如图7C所示获得各补片的分析结果，并且从总的分析结果推导出作为整个图像中的人数为8人的结果。作为测试图像，不需要使用全部补片P1～P9，并且可以只使用掌握了分析结果的至少1个补片。

例如，在使用补片P6作为测试图像，并且从可装卸设备100获取作为期望值的两人的分析结果作为第一获取处理的获取结果的情况下，摄像装置110的控制单元304可以判断分析处理完成。即使分析处理未完成，也不返回数据，或者从可装卸设备100返回表示前次分析处理结果的信息。在这种情况下，摄像装置110的控制单元304获取表示未获取到数据的结果或表示获取了前次分析处理结果的信息的结果，作为第一获取处理的获取结果。

因此，如果从可装卸设备100获取表示“两个人”以外的值的其他分析结果作为第一获取处理的获取结果，则控制单元304可以判断分析处理未完成。在图像分析的类型是被摄体检测的情况下，控制单元304根据图像分析的类型改变测试图像以使用包括被摄体的静止图像作为要检测的目标。然后，控制单元304基于是否存在被摄体的检测或被摄体在图像中的位置判断对预定图像(测试图像)的分析处理是否完成。例如，在步骤S605中，如果检测到的被摄体的位置与期望值匹配或在预定范围内，则控制单元304判断对预定图像的分析处理完成。

如果控制单元304在步骤S605中判断对测试图像的分析处理完成(步骤S605中的“是”)，则处理进入步骤S607。另一方面，如果判断对测试图像的分析处理未完成(步骤S605中的“否”)，则处理进入步骤S606。

在步骤S606中，控制单元304追加地等待预定时间(第二时间)。例如，预定时间是相当于初始值的5％的时间。然后，处理返回到步骤S604，并再次执行上述获取处理(第二获取处理)。如上所述，如果控制单元304(获取单元)根据第一获取处理的获取结果判断图像分析未完成，并进一步经过第二时间，则控制单元304执行第二获取处理，用以请求可装卸设备100获取对预定图像的分析处理的结果并再次从可装卸设备100获取预定图像的图像分析结果。

另一方面，在步骤S607中，根据步骤S605中的比较结果，控制单元304确定将来从控制单元304指示可装卸设备100执行图像分析时到控制单元304读取图像分析的结果时的图像分析等待时间。即，控制单元304确定将在将来对摄像装置110拍摄的图像实际执行的分析处理中使用的等待时间。换言之，控制单元304(确定单元)基于从控制单元304使可装卸设备100开始预定图像的图像分析时到判断单元判断预定图像的图像分析完成时的时间来确定等待时间。

如果在第一轮步骤S605中判断测试图像的分析完成，则基于该判断结果，在步骤S607中，控制单元304将等待时间的初始值确定为将来分析处理的等待时间。或者，控制单元304可以将通过以预定时间抵消初始值获得的时间或者通过将初始值乘以预定系数获得的时间确定为将来的等待时间。

如果在步骤S605中的判断为“否”，并且多次执行步骤S604和S606，则执行以下处理。在步骤S607中，控制单元304将如下时间确定为将来的等待时间，以与从步骤S604和S606的被执行次数减去1所得到的值一样多的次数将步骤S606中的追加等待时间加算到等待时间的初始值来获得该时间。换言之，控制单元304在预定时间单位内测量对测试图像进行分析处理所需的时间，从而确定等待时间。换言之，控制单元304基于对测试图像的分析处理完成之前所需的时间来确定等待时间。如上所述，如果判断单元基于第二获取处理的获取结果判断对预定图像的图像分析完成，则控制单元304(确定单元)基于第一时间和第二时间确定等待时间。

如果在步骤S605中两次判断为“否”，则总共执行三次步骤S604和S606。因此，控制单元304将如下时间确定为将来的等待时间，通过使步骤S606中的追加等待时间乘以2所获得的时间加算到初始值来获得该时间。

可选地，控制单元304可以将如下时间确定为将来的等待时间，通过以预定时间抵消由此计算的时间来获得该时间，或者通过使由此计算的时间乘以预定系数来获得该时间。如上所述，控制单元304还用作确定单元。

在以上描述中，将其中出现要实际检测的目标的图像用作测试图像。然而，该配置不限于此。如果图像具有适合图像分析的图像尺寸(数据量)，并且能够根据分析结果判断对图像的分析处理是否完成，则该图像可以用作测试图像。

如果在步骤S607中确定的等待时间大于或等于某个值，则可以执行以下处理。例如，可以考虑基于执行分析处理所需的帧速率确定的帧间隔(帧之间的时间)。如果确定的等待时间长于帧间隔，则无法实时进行分析处理。因此，控制单元304可以经由网络通信单元307向输入/输出设备130输出用于向用户建议使用需要更短分析时间的同类型图像分析的信息(消息)。基于该信息，输入/输出装置130在显示器(未示出)上显示用于允许用户选择其他分析处理的图形用户界面(GUI)。这使用户能够使用适合所选应用的帧速率的分析处理。如上所述，控制单元304还用作输出单元，用于在确定的等待时间长于预定时间的情况下，输出用于允许用户选择其他图像分析的信息。

如上所述，根据本示例性实施例，基于对测试图像的分析处理的结果来确定等待时间。然后，在确定等待时间后，控制单元304将拍摄图像发送至可装卸设备100，并指示可装卸设备100对拍摄图像执行图像分析处理，从而使可装卸设备100开始图像分析处理。然后，如果从拍摄图像的图像分析开始起经过了确定的等待时间，则控制单元304执行获取处理，用以请求可装卸设备100获取拍摄图像的图像分析结果并从可装卸设备100获取拍摄图像的图像分析结果。因此，摄像装置可以在适当的时间获取摄像装置使可装卸设备执行的图像分析的结果。

参考图8描述根据第二示例性实施例的用于确定读取分析结果的等待时间的方法(信息处理方法)。适当省略与第一示例性实施例中的部分类似的部分的描述。在第二示例性实施例中，通过改变等待时间而对测试图像执行多次分析处理，从而更适当地确定等待时间。如果控制单元304确定安装到摄像装置110的可装卸设备100是能够执行图像分析的装置，则执行图8所示的流程图中的处理。

步骤S601至S605与图6的处理基本类似。

如果控制单元304在步骤S605中判断对测试图像的分析处理完成(步骤S605中的“是”)，则处理进入步骤S807。另一方面，如果判断未完成对测试图像的分析处理(步骤S605中的“否”)，则处理进入步骤S806。

在步骤S806中，控制单元304将步骤S603的下一轮等待时间延长预定时间。例如，预定时间是相当于初始值的5％的时间。然后，处理返回到步骤S602。即，步骤S603的下一轮等待时间为步骤S806中延长的等待时间(第三时间)。如果延长的等待时间经过，则执行上述获取过程(第三获取处理)。如上所述，再次重复对测试图像的分析处理，直到在步骤S605中确定对测试图像的分析处理完成。

另一方面，即使控制单元304在步骤S605中判断对测试图像的分析处理完成，等待时间也可能太长。

作为响应，在步骤S807中，判断前次分析中是否完成了对测试图像的分析处理。在步骤S807的第一轮中，控制单元304的判断为“是”。

如果在步骤S807中判断在前次分析中完成了对测试图像的分析处理(步骤S807中的“是”)，则处理进行到步骤S808。

然后，在步骤S808中，控制单元304将步骤S603的下一轮等待时间缩短预定时间。例如，预定时间是相当于初始值的5％的时间。

如果在步骤S807中判断前次分析中未完成对测试图像的分析处理(步骤S807中的“否”)，则处理进行到步骤S809。即，在步骤S807中判断为“否”，并且在步骤S605的前一轮判断为“否”之后，在步骤S806中延长等待时间的情况下，处理进行到步骤S809，并在下一轮步骤S605中判断为“是”。

然后，在步骤S809中，控制单元304确定在将来对摄像装置110拍摄的图像实际执行的分析处理中要使用的等待时间。

具体地，控制单元304将前次在步骤S603中等待所花费的等待时间确定为将来分析处理的等待时间。没有必要原样采用步骤S603中的等待时间。即，控制单元304可以将如下时间确定为未来的等待时间，通过以预定时间抵消步骤S603中的等待时间来获得该时间，或者通过将步骤S603中的等待时间乘以预定系数来获得该时间。

如上所述，如果从控制单元304再次开始图像分析起经过了比第一时间长的第三时间，则获取单元执行第三获取处理，用以请求可装卸设备100获取预定图像的图像分析结果并从可装卸设备100获取预定图像的图像分析结果。然后，如果判断单元基于第三获取处理的获取结果判断图像分析完成，则确定单元根据第三时间确定等待时间。

如上所述，根据本示例性实施例，通过改变等待时间来多次执行对测试图像的分析处理，从而可以更适当地确定等待时间。

因此，摄像装置可以在适当的定时获取摄像装置使可装卸设备执行的图像分析的结果。

其他示例性实施例

参考图9描述用于实现根据上述示例性实施例的摄像装置的功能的硬件配置的另一示例。

RAM 222临时存储将由CPU 221执行的计算机程序。RAM 222还临时存储经由通信接口224从外部设备获取的数据(命令和图像数据)。RAM 222还提供CPU 221用来执行各种处理的工作区。例如，RAM 222还用作帧存储器或用作缓冲存储器。

CPU 221执行存储在RAM 222中的计算机程序。可以使用诸如数字信号处理器(DSP)或ASIC等的处理器代替CPU。

硬盘驱动器(HDD)223存储用于操作系统的程序和图像数据。HDD223还存储计算机程序。

并根据CPU 221的控制，计算机程序和存储在HDD 223中的数据被适当地加载到RAM 222中并由CPU 221执行。可以使用例如闪存等其他存储介质代替HDD。总线225连接这些硬件组件。硬件组件经由总线225彼此交换数据。这是根据示例性实施例的硬件配置的另一个示例。

本发明还可以通过一个或多个处理器读取并执行用于实现上述示例性实施例的一个或多个功能的程序的处理来实现。可以经由网络或存储介质将程序提供给包括一个或多个处理器的系统或装置。本发明还可以通过用于实现上述示例性实施例的一个或多个功能的电路(例如，ASIC)来实现。

根据示例性实施例的摄像装置可以通过图9所示的硬件来实现或者也可以通过软件来实现。

本发明不限于上述示例性实施例，并且可以在不脱离本发明的精神和范围的情况下以各种方式进行变型。例如，上述示例性实施例和变型例的组合也包括在说明书的公开内容中。

其他实施例

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。

虽然参照示例性实施例描述了本发明，但是应当理解，本发明并不限于所公开的示例性实施例，但是由权利要求的范围所定义。

Claims (14)

1.一种摄像装置，所述摄像装置能够安装可安装和拆卸于该摄像装置的可装卸设备，所述摄像装置包括：

控制单元，其被配置为使安装到所述摄像装置的可装卸设备开始预定图像的图像分析；

判断单元，其被配置为判断所述预定图像的图像分析是否完成；以及

确定单元，其被配置为基于所述判断单元的判断结果，确定从所述摄像装置使所述可装卸设备开始对所述摄像装置拍摄的拍摄图像进行图像分析时到所述摄像装置请求所述可装卸设备获取图像分析结果时的等待时间。

2.根据权利要求1所述的摄像装置，所述摄像装置还包括获取单元，其被配置为从所述可装卸设备获取所述拍摄图像的图像分析结果，

其中，在所述确定单元确定所述等待时间之后，所述控制单元使所述可装卸设备开始对所述拍摄图像进行图像分析，以及

其中，在从所述控制单元开始所述拍摄图像的图像分析起经过由所述确定单元确定的等待时间的情况下，所述获取单元执行获取处理，用以请求所述可装卸设备获取所述拍摄图像的图像分析结果，并从所述可装卸设备获取所述拍摄图像的图像分析结果。

3.根据权利要求1或2所述的摄像装置，所述摄像装置还包括存储单元，其被配置为存储对所述预定图像的图像分析结果，

其中，所述判断单元通过将所述存储单元中存储的图像分析结果与通过所述可装卸设备执行的所述预定图像的图像分析结果进行比较，判断所述预定图像的图像分析是否完成。

4.根据权利要求2所述的摄像装置，

其中，所述获取单元执行获取处理，用以请求所述可装卸设备获取所述预定图像的图像分析结果，并从所述可装卸设备获取图像分析结果，以及

其中，所述判断单元基于所述获取处理的结果判断所述预定图像的图像分析是否完成。

5.根据权利要求4所述的摄像装置，

其中，在从所述控制单元开始对预定图像进行图像分析起经过第一时间的情况下，所述获取单元执行第一获取处理，用以请求所述可装卸设备获取所述预定图像的图像分析结果，并从所述可装卸设备获取所述预定图像的图像分析结果，

其中，在所述判断单元基于所述第一获取处理的获取结果判断图像分析未完成的情况下，进一步经过第二时间后，所述获取单元执行第二获取处理，用以请求所述可装卸设备获取所述预定图像的图像分析结果，并再次从所述可装卸设备获取所述预定图像的图像分析结果，以及

其中，在所述判断单元基于所述第二获取处理的获取结果判断所述预定图像的图像分析完成的情况下，所述确定单元基于所述第一时间和所述第二时间确定所述等待时间。

6.根据权利要求4所述的摄像装置，

其中，在从所述控制单元开始预定图像的图像分析起经过第一时间的情况下，所述获取单元执行第一获取处理，用以请求所述可装卸设备获取所述预定图像的图像分析结果，并从所述可装卸设备获取所述预定图像的图像分析结果，

其中，在所述判断单元基于所述第一获取处理的获取结果判断图像分析未完成的情况下，所述控制单元使所述可装卸设备再次开始所述预定图像的图像分析，

其中，在从所述控制单元再次开始图像分析起经过了比所述第一时间长的第三时间的情况下，所述获取单元执行第三获取处理，用以请求所述可装卸设备获取所述预定图像的图像分析结果，并从所述可装卸设备获取所述预定图像的图像分析结果，以及

其中，在所述判断单元基于所述第三获取处理的获取结果判断所述图像分析完成的情况下，所述确定单元基于所述第三时间来确定所述等待时间。

7.根据权利要求1所述的摄像装置，其中，所述确定单元基于在所述摄像装置和所述可装卸设备之间的通信中使用的访问模式的时间以及所述判断单元的判断结果来确定所述等待时间。

8.根据权利要求1所述的摄像装置，所述摄像装置还包括输出单元，其被配置为在由所述确定单元确定的等待时间长于预定时间的情况下，输出用于允许用户选择其他图像分析的信息。

9.根据权利要求1所述的摄像装置，其中，所述确定单元基于从所述控制单元使所述可装卸设备开始所述预定图像的图像分析时到所述判断单元判断所述预定图像的图像分析完成时的时间来确定所述等待时间。

10.根据权利要求1所述的摄像装置，其中，所述预定图像的大小与通过所述摄像装置拍摄的拍摄图像的大小相同。

11.根据权利要求1所述的摄像装置，其中，所述可装卸设备是在没有从所述摄像装置接收到用于获取图像分析结果的请求的情况下不能将结果发送到所述摄像装置的设备。

12.根据权利要求1所述的摄像装置，

其中，所述可装卸设备是使用安全数字SD卡通信协议的设备，以及

其中，所述摄像装置基于所述通信协议与所述可装卸设备进行通信。

13.一种用于摄像装置的信息处理方法，所述摄像装置能够安装可安装和拆卸于该摄像装置的可装卸设备，所述信息处理方法包括：

使安装到所述摄像装置的所述可装卸设备开始对预定图像进行图像分析；

判断所述预定图像的图像分析是否完成；以及

基于关于所述预定图像的图像分析是否完成的判断结果，确定从所述摄像装置使所述可装卸设备开始对所述摄像装置拍摄的拍摄图像进行图像分析时到所述摄像装置请求可装卸设备获取图像分析结果时的等待时间。

14.一种计算机可读存储介质，其存储计算机程序，所述计算机程序包括如下指令，其在由计算机执行程序时，使计算机执行权利要求13的方法。

Images