CN112543256B - 图像捕获装置、控制方法和计算机可读存储介质 - Google Patents

Abstract

本发明涉及图像捕获装置、控制方法和计算机可读存储介质。提供了一种图像捕获装置，该图像捕获装置包括能够附接/拆卸能够至少存储被捕获图像的设备的安装部。图像捕获装置获得图像分析处理的执行指令，并且如果被安装在安装部中的设备包括用于对由图像捕获装置捕获的图像执行图像分析处理的第一处理功能，则基于执行指令确定是否使第一处理功能执行图像分析处理。

Description

图像捕获装置、控制方法和计算机可读存储介质

技术领域

本发明总体上涉及图像捕获装置、控制方法和计算机可读存储介质，尤其涉及针对在装置中提供的处理功能的选择性使用技术。

背景技术

近年来，在各种场景中使用由监视相机捕获的图像执行图像处理，诸如执行物体检测和跟踪或执行属性估计的图像分析以及基于这种图像分析的结果对物体数量的估计。常规上，已经通过将视频从监视相机传送到诸如执行实际图像处理的PC或服务器之类的高性能算术装置来执行这种图像处理。但是，移动算术装置的处理能力的最近提高允许监视相机侧执行图像处理。相机侧的处理可以通过例如被布置在相机主体中的算术装置来执行。当在诸如USB之类的可拆卸设备中布置有算术装置时，该可拆卸设备可以执行处理的至少一部分。日本专利特许公开No.7-184098描述了一种通过将可拆卸设备安装在图像捕获装置中来提供扩展功能的技术。

在日本专利特许公开No.7-184098中，已经描述了可拆卸设备中的处理的扩展，但是尚未审查可拆卸设备的高效使用方法。

本发明提供了一种高效地使用能够执行预定处理的可拆卸设备的技术。

发明内容

根据本发明的一个方面，提供了一种图像捕获装置，该图像捕获装置包括能够附接/拆卸能至少存储所捕获的图像的设备的安装部，所述图像捕获装置包括：获得部件，用于获得图像分析处理的执行指令；以及确定部件，用于如果被安装在安装部中的设备包括用于对图像捕获装置所捕获的图像执行图像分析处理的第一处理部件，则确定是否使第一处理部件执行基于所述执行指令的图像分析处理。

根据本发明的另一方面，提供了一种由图像捕获装置执行的控制方法，所述图像捕获装置包括能够附接/拆卸能至少存储所捕获的图像的设备的安装部，所述控制方法包括：获得图像分析处理的执行指令；以及如果被安装在安装部中的设备包括用于对图像捕获装置所捕获的图像执行图像分析处理的第一处理部件，则确定是否使第一处理部件执行基于所述执行指令的图像分析处理。

根据本发明的又一方面，提供一种存储程序的计算机可读存储介质，所述程序被配置为使包括能够附接/拆卸能至少存储所捕获的图像的设备的安装部的图像捕获装置中提供的计算机执行以下从操作：获得图像分析处理的执行指令；以及如果被安装在安装部中的设备包括用于对图像捕获装置所捕获的图像执行图像分析处理的第一处理部件，则确定是否使第一处理部件执行基于所述执行指令的图像分析处理。

通过(参考附图)对示例性实施例的以下描述，本发明的其它特征将变得清楚。

附图说明

图1是示出系统布置的示例的框图；

图2是示出图像捕获装置的硬件布置的示例的框图；

图3是示出图像捕获装置的功能布置的示例的框图；

图4是示出可拆卸设备的硬件布置的示例的框图；

图5是示出可拆卸设备的功能布置的示例的框图；

图6是示出输入/输出装置的硬件布置的示例的框图；

图7是示出输入/输出装置的功能布置的示例的框图；

图8是示出由系统执行的处理过程的示例的流程图；

图9是示出掌握分析处理的处理过程的示例的流程图；

图10是示出确定分析处理的内容的处理过程的示例的流程图；

图11是示出执行分析处理的控制过程的示例的流程图；

图12是示出执行后处理的控制过程的示例的流程图；

图13A和13B是示出命令和响应的结构的视图；

图14是示意性地示出在存储处理功能的信息的地址处的数据的视图；

图15是示出图像捕获装置获得的信息的示例的视图；

图16是示出在存储处理和图像分析处理之间自动切换的处理过程的示例的流程图；

图17是示出在存储处理和图像分析处理之间自动切换的处理过程的示例的流程图；

图18是示出在存储处理和图像分析处理之间自动切换的处理过程的示例的流程图；

图19是示出用户界面的示例的视图；

图20是示出处于显示处理结果的状态下的用户界面的示例的视图；

图21是示意性地示出用于面部认证处理的图像分析处理群和在每个装置中可执行的处理群的视图；

图22是示出要使用的处理功能的选择处理过程的示例的流程图；

图23是示出要使用的处理功能的选择处理过程的示例的流程图；以及

图24是示出要使用的处理功能的选择处理过程的示例的流程图。

具体实施方式

在下文中，将参考附图详细描述实施例。注意，以下实施例并非旨在限制所要求保护的发明的范围。在实施例中描述了多个特征，但是并非限制要求所有这样的特征的发明，并且可以适当地组合多个这样的特征。此外，在附图中，为相同或相似的配置赋予相同的附图标记，并且省略其重复描述。

<系统布置>

图1示出了根据本实施例的图像分析系统的布置的示例。作为示例，下面将描述该系统是特定人物跟踪系统的情况。但是，本发明不限于此，并且以下讨论可以被应用于用于分析图像并执行预定信息输出的任意系统。该系统被配置为包括图像捕获装置110a至110d、网络120和输入/输出装置130。注意，图像捕获装置110a至110d均包括插槽，能够记录例如被捕获图像的设备可以附接至该插槽/从该插槽拆卸，并且当可拆卸设备100a至100d被插入到插槽中时，图像捕获装置110a至110d连接到可拆卸设备100a至100d。注意，可拆卸设备100a至100d将被称为“可拆卸设备100”，并且下文中图像捕获装置110a至110d将被称为“图像捕获装置110”。

可拆卸设备100是可附接到图像捕获装置110/可从图像捕获装置110拆卸的算术设备。作为示例，可拆卸设备100是在SD卡中安装有预定处理电路的设备。可拆卸设备100被配置为以例如SD卡的形式作为整体被插入到图像捕获装置110中，并且因此可以被配置为在没有任何部分从图像捕获装置110突出的情况下可连接到图像捕获装置110。可替代地，可拆卸设备100可以被配置为使得例如其一半或更多可以被插入到图像捕获装置110中，并且因此可以被配置为在使得一部分从图像捕获装置110稍微突出的同时可连接到图像捕获装置110。这可以防止可拆卸设备100受到诸如配线之类的障碍物的干扰，并且提高使用该设备时的便利性。另外，由于在许多现有的图像捕获装置110(诸如，网络相机)中准备了SD卡插槽，因此可拆卸设备100可以向现有的图像捕获装置110提供扩展功能。注意，除了SD卡的形式以外，可拆卸设备100可以被配置为经由在安装能够至少存储由图像捕获装置110捕获的图像的存储设备时使用的任意接口被安装在图像捕获装置110中。例如，可拆卸设备100可以包括USB(通用串行总线)接口，并且可以被配置为安装在图像捕获装置110的USB插座中。预定处理电路由例如被编程为执行预定处理的FPGA(现场可编程门阵列)来实现，但是可以以另一种形式来实现。

图像捕获装置110是诸如网络相机之类的图像捕获装置。在本实施例中，图像捕获装置110含有能够处理视频的算术装置，但是不限于此。例如，可以存在诸如连接到图像捕获装置110的外部计算机，诸如PC(个人计算机)，并且可以将该组合作为图像捕获装置110来处置。此外，在本实施例中，可拆卸设备100被安装在所有图像捕获装置110中。注意，图1示出了四个图像捕获装置110以及被安装在这些图像捕获装置110中的可拆卸设备。设备的组合的数量可以是三个或更少、或者五个或更多。当具有图像分析处理功能的可拆卸设备100被安装在图像捕获装置110中时，即使图像捕获装置110不具有图像分析处理功能，也可以在图像捕获装置110侧执行视频处理。此外，如在本实施例中那样，以在图像捕获装置110中布置用于视频处理的算术装置的形式，通过将包括算术装置的可拆卸设备100安装在图像捕获装置110中，可以使在图像捕获装置110侧可执行的图像处理多样化/复杂化。

输入/输出装置130是执行来自用户的输入的接受以及到用户的信息(例如，显示信息)输出的装置。在本实施例中，例如，输入/输出装置130是诸如PC之类的计算机，并且信息通过计算机中安装的浏览器或本地应用来输入/输出。

图像捕获装置110和输入/输出装置130经由网络120可通信地连接。网络120被配置为包括满足例如以

的通信标准的多个路由器、交换机、电缆等。在本实施例中，网络120可以是使得能够在图像捕获装置110和输入/输出装置130之间进行通信的任意网络，并且可以由任意规模和布置以及所符合的通信标准来构造。例如，网络120可以是互联网、有线LAN(局域网)、无线LAN、WAN(广域网)等。网络120可以被配置为使得例如通过符合ONVIF(开放网络视频接口论坛)标准的通信协议的通信是可能的。但是，网络120不限于此，并且可以被配置为使得例如通过另一种通信协议(诸如唯一通信协议)的通信是可能的。

<装置布置>

(图像捕获装置的布置)

接下来将描述图像捕获装置110的布置。图2是示出图像捕获装置110的硬件布置的示例的框图。作为硬件布置，图像捕获装置110包括例如图像捕获单元201、图像处理单元202、算术处理单元203、分发单元204和SD I/F单元205。注意，I/F是接口(interface)的缩写。

图像捕获单元201被配置为包括：透镜部，其被配置为形成光的图像；以及图像捕获元件，其根据所形成的光的图像执行模拟信号转换。透镜部具有调整视角的变焦功能、调整光量的光阑功能等。图像捕获元件具有调整在将光转换成模拟信号时的灵敏度的增益功能。这些功能基于从图像处理单元202通知的设置值而被调整。由图像捕获单元201获得的模拟信号被模数转换电路转换成数字信号，并且作为图像信号被传送到图像处理单元202。

图像处理单元202被配置为包括图像处理引擎及其外围设备。外围设备包括例如RAM(随机存取存储器)、I/F的驱动器等。图像处理单元202例如对从图像捕获单元201获得的图像信号执行诸如显影处理、滤波处理、传感器校正和噪声去除之类的图像处理，从而生成图像数据。图像处理单元202还可以将设置值发送到透镜部和图像捕获元件，并且执行曝光调整以获得适当的曝光图像。由图像处理单元202生成的图像数据被传送到算术处理单元203。

算术处理单元203由诸如CPU或MPU之类的至少一个处理器、诸如RAM和ROM之类的存储器、I/F的驱动器等形成。注意，CPU是中央处理单元的首字母缩写，MPU是微处理单元的首字母缩写，RAM是随机存取存储器的首字母缩写，并且ROM是只读存储器的首字母缩写。在示例中，算术处理单元203可以确定关于图像捕获装置110和可拆卸设备100中的哪一个应当执行在上述系统中要执行的处理的每个部分的分配，并且执行与该分配对应的处理。稍后将描述处理内容和处理分配的细节。从图像处理单元202接收到的图像被传送到分发单元204或SD I/F单元205。处理结果的数据也被传送到分发单元204。

分发单元204被配置为包括网络分发引擎以及例如诸如RAM和ETH PHY模块之类的外围设备。ETH PHY模块是执行以太网的物理(PHY)层的处理的模块。分发单元204将从算术处理单元203获得的图像数据或处理结果的数据转换成可分发到网络120的格式，并将转换后的数据输出到网络120。SD I/F单元205是用于连接可拆卸设备100的接口部，并且被配置为包括例如电源和安装部，诸如用于附接/拆卸可拆卸设备100的附接/拆卸插座。这里，SDI/F单元205根据由SD协会制定的SD标准来配置。可拆卸设备100与图像捕获装置110之间的通信(诸如从算术处理单元203获得的图像到可拆卸设备100的传送或从可拆卸设备100获得的数据的传送)经由SD I/F单元205执行。

图3示出了图像捕获装置110的功能布置的示例。图像捕获装置110包括例如图像捕获控制单元301、信号处理单元302、存储单元303、控制单元304、分析单元305、设备通信单元306以及网络通信单元307作为其功能。

图像捕获控制单元301执行经由图像捕获单元201捕获外围环境的控制。信号处理单元302对由图像捕获控制单元301捕获的图像执行预定处理，从而生成被捕获图像的数据。下文中将被捕获图像的数据简称为“被捕获图像”。信号处理单元302例如对由图像捕获控制单元301捕获的图像进行编码。信号处理单元302使用例如诸如JPEG(联合图像专家组)之类的编码方法对静止图像执行编码。信号处理单元302使用诸如H.264/MPEG-4AVC(下文中将称为“H.264”)或HEVC(高效视频编码)之类的编码方法对运动图像执行编码。信号处理单元302可以使用由用户经由例如图像捕获装置110的操作单元(未示出)从预先设置的多种编码方法中选择的编码方法对图像进行编码。

存储单元303存储分析单元305可执行的分析处理的列表(下文中将称为“第一处理列表”)和针对分析处理的结果的后处理的列表。存储单元303还存储稍后描述的分析处理的结果。注意，在本实施例中，要执行的处理是分析处理。但是，可以执行任意处理，并且关于与要执行的处理相关联的处理，存储单元303可以存储第一处理列表和后处理的列表。控制单元304控制信号处理单元302、存储单元303、分析单元305、设备通信单元306和网络通信单元307以执行预定处理。

分析单元305针对被捕获图像选择性地执行稍后将描述的分析前处理、分析处理和分析后处理中的至少一个。分析前处理是在执行稍后将描述的分析处理之前对被捕获图像执行的处理。在根据本实施例的分析前处理中，作为示例，执行对被捕获图像进行分割以创建分割图像的处理。分析处理是输出通过对输入图像进行分析而获得的信息的处理。在根据本实施例的分析处理中，作为示例，执行如下处理：接收通过分析前处理获得的分割图像，执行人体检测处理、面部检测处理和车辆检测处理中的至少一个，以及输出分析处理结果。分析处理可以是被配置为使用机器学习模型输出对象在分割图像中的位置的处理，机器学习模型已经学习使用例如J.Redmon和A.Farhadi的“YOLO9000：Better FasterStronger”计算机视觉和模式识别(CVPR)2016中的技术来检测图像中包括的对象。分析后处理是在执行分析处理之后要执行的处理。在根据本实施例的分析后处理中，作为示例，执行输出通过基于针对每个分割图像的分析处理结果而在分割图像中检测到的对象的数量相加而获得的值作为处理结果的处理。注意，分析处理可以是通过执行模式匹配检测图像中的对象并输出对象的位置的处理。

设备通信单元306执行与可拆卸设备100的通信。设备通信单元306将输入数据转换成可拆卸设备100可处理的格式，并将通过转换获得的数据发送到可拆卸设备100。另外，设备通信单元306从可拆卸设备100接收数据，并将接收到的数据转换成图像捕获装置110可处理的格式。在本实施例中，作为转换处理，设备通信单元306执行在浮点格式和定点格式之间转换小数(decimal)的处理。但是，本发明不限于此，并且可以由设备通信单元306执行另一个处理。此外，在本实施例中，设备通信单元306将在SD标准的范围内预先确定的命令序列发送到可拆卸设备100，并且从可拆卸设备100接收响应，从而执行与可拆卸设备100的通信。网络通信单元307执行经由网络120与输入/输出装置130的通信。

(可拆卸设备的布置)

图4是示出可拆卸设备100的硬件布置的示例的框图。作为示例，可拆卸设备100被配置为包括I/F单元401、FPGA 402和SD控制器403。可拆卸设备100形成为可插入到设在图像捕获装置110中的SD I/F单元205的附接/拆卸插座中/从其中移除的形状，即，符合SD标准的形状。

I/F单元401是用于连接诸如图像捕获装置110之类的装置与可拆卸设备100的接口部。I/F单元401被配置为包括例如电接触端子，该电接触端子从图像捕获装置110接收电力供应并且生成和分配将在可拆卸设备100中使用的电力等。关于在(符合)SD标准中定义的项目，I/F单元401与图像捕获装置110的SD I/F单元205一样地符合。经由I/F单元401执行来自图像捕获装置110的图像和设置数据的接收以及从FPGA402到图像捕获装置110的数据的发送。

FPGA 402被配置为包括输入/输出控制单元410、处理切换单元411和算术处理单元412。FPGA 402是一种能够重复地重建内部逻辑电路结构的半导体设备。通过由FPGA 402实现的处理，可以向安装有可拆卸设备100的装置添加(提供)处理功能。此外，由于逻辑电路结构可以在稍后通过FPGA 402的重构功能来改变，因此当可拆卸设备100被安装在例如快速发展技术领域中的装置中时，可以在适当的定时在装置中执行适当的处理。注意，在本实施例中，将描述使用FPGA的示例。但是，例如可以使用通用ASIC或专用LSI，只要能执行稍后描述的处理。通过从专用I/F写入包括要生成的逻辑电路结构的信息的设置数据或从专用I/F读出设置数据来激活FPGA 402。在本实施例中，设置数据被保持在存储单元404中。当加电时，FPGA 402从存储单元404中读出设置数据，并生成和激活逻辑电路。但是，本发明不限于此。例如，图像捕获装置110可以通过在可拆卸设备中实现专用电路来经由I/F单元401将设置数据写入到FPGA 402中。

输入/输出控制单元410被配置为包括用于向/从图像捕获装置110发送/接收图像的电路、分析从图像捕获装置110接收到的命令的电路、基于分析的结果进行控制的电路等。这里的命令由SD标准定义，并且输入/输出控制单元410可以检测其中的一些命令。稍后将描述功能的细节。输入/输出控制单元410进行控制，以在存储处理中将图像发送到SD控制器403，并在图像分析处理中将图像发送到算术处理单元412。如果接收到处理切换的设置数据，则输入/输出控制单元410将设置数据发送到处理切换单元411。处理切换单元411被配置为包括如下电路：该电路被配置为基于从图像捕获装置110接收到的设置数据从存储单元404获得图像分析处理功能的信息，并将该信息写入到算术处理单元412中。图像分析处理功能的信息包括表示例如在算术处理单元412中处理的运算的次序和类型、运算的系数等的设置参数。算术处理单元412被配置为包括执行图像分析处理功能所需的多个算术电路。算术处理单元412基于从处理切换单元411接收到的图像分析处理功能的信息来执行每个算术处理、将处理结果发送到图像捕获装置110和/或将处理结果记录在存储单元404中。如上所述，FPGA 402提取在预先保持的与多个处理功能对应的设置数据中包括的执行目标处理功能的设置数据，并且基于提取出的设置数据来重写要由算术处理单元412执行的处理内容。这允许可拆卸设备100选择性地执行多个处理功能中的至少一个。另外，通过适当地添加要新添加的处理的设置数据，可以在图像捕获装置110侧执行最新处理。注意，在下文中，保持与多个处理功能对应的多个设置数据将被称为保持多个处理功能。也就是说，即使在可拆卸设备100的FPGA402被配置为执行一个处理功能的状态下，如果可以通过另一个处理功能的设置数据来改变算术处理单元412的处理内容，则这也将被表达为保持多个处理功能。

SD控制器403是如由SD标准定义的已知控制IC(集成电路)，并且执行对SD协议的从属操作的控制以及对存储单元404的数据读/写的控制。存储单元404由例如NAND闪存形成，并且存储各种信息，诸如从图像捕获装置110写入的存储数据、在算术处理单元412中写入的图像分析处理功能的信息以及FPGA 402的设置数据。

图5示出了可拆卸设备100的功能布置的示例。可拆卸设备100包括例如分析单元501和通信单元502作为其功能布置。分析单元501对图像执行分析处理。例如，如果输入了分析处理设置请求，则分析单元501执行设置以将输入的分析处理设置为可执行状态。如果输入了图像，则分析单元501对输入图像执行被设置为可执行状态的分析处理。在本实施例中，可执行的分析处理包括人体检测处理和面部检测处理，但是不限于这些。例如，它可以是确定预先存储的人是否被包括在图像中的处理(面部认证处理)。例如，如果计算出预先存储的人的图像特征量和从输入图像检测到的人的图像特征量之间的匹配程度，并且该匹配程度等于或大于阈值，则确定该人是预先存储的人。可替代地，出于隐私保护的目的，它可以是在从输入图像中检测到的人上叠加预定的掩模图像或执行马赛克处理的处理。它可以是使用通过机器学习已经学习到人的特定动作的学习模型来检测图像中的人是否正在采取特定动作的处理。此外，它可以是确定图像中的区域是哪种区域的处理。它可以是使用例如通过机器学习已学习到建筑物、道路、人、天空等的学习模型来确定图像中的区域是哪种区域的处理。如上所述，可执行分析处理可以应用于使用机器学习的图像分析处理和不使用机器学习的图像分析处理这两者。上述每个分析处理可以不由可拆卸设备100独立地执行，而是与图像捕获装置110合作执行。通信单元502执行经由I/F单元401与图像捕获装置110的通信。

(输入/输出装置的布置)

图6示出了输入/输出装置130的硬件布置的示例。输入/输出装置130形成为诸如通用PC之类的计算机，并且被配置为包括例如诸如CPU之类的处理器601、诸如RAM 602和ROM 603之类的存储器、诸如HDD 604之类的存储设备、以及通信I/F 605，如图6中所示。输入/输出装置130可以通过处理器601执行存储在存储器和存储设备中的程序来执行各种功能。

图7示出了根据本实施例的输入/输出装置130的功能布置的示例。输入/输出装置130包括例如网络通信单元701、控制单元702、显示单元703和操作单元704作为其功能布置。网络通信单元701连接到例如网络120，并且执行经由网络120与诸如图像捕获装置110之类的外部装置的通信。注意，这仅仅是示例，并且例如，网络通信单元701可以被配置为建立与图像捕获装置110的直接通信并与图像捕获装置110通信而无需网络120或其它装置的干预。控制单元702进行控制，以使得网络通信单元701、显示单元703和操作单元704执行它们自己的处理。显示单元703经由例如显示器向用户呈现信息。在本实施例中，在显示器上显示通过浏览器的渲染结果，从而向用户呈现信息。注意，可以通过除屏幕显示以外的诸如语音或振动之类的方法来呈现信息。操作单元704接受来自用户的操作。在本实施例中，操作单元704是鼠标或键盘，并且用户对其进行操作以将用户操作输入到浏览器。但是，操作单元704不限于此，并且可以是例如能够检测用户的意图的另一个任意设备，诸如触摸面板或麦克风。

<处理过程>

接下来将描述在系统中执行的处理过程的示例。注意，由图像捕获装置110在以下处理中执行的处理是例如通过算术处理单元203中的处理器执行存储器中存储的程序等而实现的。但是，这仅仅是示例，并且稍后描述的处理可以部分地或全部地由专用硬件实现。另外，由可拆卸设备100或输入/输出装置130执行的处理也可以通过每个装置中的处理器执行存存储器中储的程序等来实现，并且处理可以部分地或全部地由专用硬件来实现。

(总体过程)

图8示意性地示出了由系统执行的图像分析处理的一系列过程。在该处理中，首先，用户将可拆卸设备100安装在图像捕获装置110中(步骤S801)。图像捕获装置110执行可拆卸设备100的初始化序列(步骤S802)。在该初始化序列中，在图像捕获装置110和可拆卸设备100之间发送/接收预定命令，并且这样将图像捕获装置110设置为它能使用可拆卸设备100的状态。之后，图像捕获装置110掌握可拆卸设备100可执行的处理，并且掌握可以在本地执行(可以仅由图像捕获装置110执行或者由图像捕获装置110和可拆卸设备100的组合执行)的处理(步骤S803)。注意，虽然可拆卸设备100可以被配置为执行任意处理，但是与应当在图像捕获装置110侧执行的处理无关的处理不需要纳入考虑。在示例中，图像捕获装置110可以保持预先从例如输入/输出装置130获得的可执行处理的列表。在这种情况下，当从可拆卸设备100获得表示可拆卸设备100可执行的处理的信息时，图像捕获装置110可以根据处理是否被包括在列表中来仅掌握可执行处理。接下来，图像捕获装置110确定要执行的处理，并且根据需要执行可拆卸设备100的设置(步骤S804)。即，如果被确定为执行目标的处理的至少一部分要由可拆卸设备100执行，则针对该处理的可拆卸设备100的设置被执行。在该设置中，例如，可以执行使用与执行目标的处理对应的设置数据的FPGA 402重构。然后，图像捕获装置110或可拆卸设备100执行分析处理(步骤S805)。之后，图像捕获装置110执行后处理(步骤S806)。注意，步骤S805和S806的处理被重复地执行。图8所示的处理是当例如安装可拆卸设备100时执行的。但是，图8中所示的处理的至少一部分可以被重复地执行，使得例如当可拆卸设备100被拆卸时再次执行步骤S803的处理。

(掌握激发处理的处理)

图9示出了掌握图像捕获装置110可执行的处理的处理过程的示例。该处理对应于图8中的步骤S803的处理，并且如果诸如可拆卸设备100之类的设备被安装在图像捕获装置110上或被移除，或者如果图像捕获装置110通电，则该处理可以被执行。在该处理中，图像捕获装置110读出可拆卸设备100可执行的处理、将其与图像捕获装置110本身可执行的分析处理集成，并掌握在图像捕获装置110侧可执行的分析处理。

首先，图像捕获装置110的控制单元304读出存储在存储单元303中的第一处理列表，第一处理列表是图像捕获装置110本身的分析单元305可执行的处理列表(步骤S901)。接下来，控制单元304确定所安装的设备是例如仅具有存储功能的常规设备还是诸如可拆卸设备100之类的具有特定处理功能的预定设备(步骤S902)。例如，控制单元304控制设备通信单元306向安装的设备发出对于特定地址的读取请求(读取命令)，并读出在该特定地址处存储的标记数据。在下文中，有时将特定地址称为“地址A”。注意，稍后将描述在地址A处存储的数据的细节。控制单元304可以基于读取的标志数据来确定可拆卸设备100是否是具有特定处理功能的预定设备。但是，这仅仅是示例，并且可以通过另一种方法确定所安装的设备是否是预定设备。

如果安装的设备是预定设备(步骤S902中为“是”)，则控制单元304执行掌握该设备(可拆卸设备100)中可执行的处理的处理。控制单元304控制设备通信单元306与可拆卸设备100通信，并获得在可拆卸设备100中可执行的处理的列表(在下文中将称为“第二处理列表”)(步骤S903)。例如，如在确定可拆卸设备100是否是预定设备的情况中那样，控制单元304读出在地址A处存储的数据，从而获得第二处理列表。注意，例如，第二处理列表可以被存储在与用于确定可拆卸设备是否是预定设备的标志数据相同的地址(地址A)处。在这种情况下，图像捕获装置110可以通过访问地址A并同时获得标志数据和第二处理列表来同时执行步骤S902的处理和步骤S903的处理。但是，本发明不限于此，并且这些数据可以被存储在不同的地址处。之后，控制单元304创建其中集成了从存储单元303读出的图像捕获装置110本身可执行的处理的第一处理列表和从可拆卸设备获得的第二处理列表的集成处理列表(步骤S904)，并结束处理。

集成处理列表表示在无需诸如网络上的服务器装置之类的装置执行处理的情况下在图像捕获装置110侧可本地执行的处理的列表。注意，在本实施例中，集成处理列表是通过第一处理列表中包括的处理和第二处理列表中包括的处理的联合而获得的列表。集成处理列表是在第一处理列表和第二处理列表中的至少一个中包括的处理的列表。但是，本发明不限于此。例如，如果可以通过组合第一处理列表中包括的处理和第二处理列表中包括的处理来执行另一个处理，则可以将另一个可执行处理添加到集成处理列表中。即，如果可以使用第一处理列表中包括的至少一些处理和第二处理列表中包括的至少一些处理来执行新的分析处理，则可以在集成处理列表中包括该分析处理的信息。例如，可以通过面部检测处理功能、面部特征提取处理功能和面部特征校对处理功能的功能群来实现面部认证处理。此时，如果在第一处理列表中包括面部检测处理功能和面部特征提取处理功能，并且在第二处理列表中包括面部特征校对处理功能，则可以在集成处理列表中包括面部认证处理。

如果所安装的设备不是预定设备(步骤S902中为“否”)，则控制单元304确定不存在所安装的设备可执行的处理。因此，控制单元304将从存储单元303中读出的可由自身装置执行的处理的第一处理列表设置为表示在图像捕获装置110侧可本地执行的处理的集成处理列表(步骤S905)，并且结束处理。注意，当在设备移除时执行图9中所示的处理时，理所当然，预定设备没有被安装，因此，第一处理列表被处置为集成处理列表。

这使得可以基于能够执行特定处理的可拆卸设备100是否被安装在图像捕获装置110中来形成在图像捕获装置110侧可本地执行的处理的列表。另外，当将集成处理列表呈现给用户时，如稍后将描述的，用户可以选择通过可拆卸设备100的安装而在图像捕获装置110侧可本地执行的处理。

注意，在本实施例中，已经描述了生成集成处理列表的示例。但是，可以分开管理第一处理列表和第二处理列表，并且可以不生成集成处理列表。即，可以以可区分的方式管理和输出可拆卸设备100可执行的处理和在没有可拆卸设备100的情况下图像捕获装置110可执行的处理。即使以可区分的方式管理第一处理列表和第二处理列表，也可以生成和管理集成处理列表。例如，如果可以使用第一处理列表中包括的处理和第二处理列表中包括的处理一起执行新处理，则新处理不被包括在第一处理列表和第二处理列表中，而是被包括在集成处理列表中。注意，当输出集成处理列表时，可以一起输出以可区分的方式表示集成处理列表中包括的处理是被包括在第一处理列表中还是第二处理列表中的信息。这允许用户例如识别是否可以在没有可拆卸设备100的情况下执行所呈现的处理。

注意，上述处理列表被提供给至少在图像捕获装置110中不包括的外部装置，如输入/输出装置130，但是可以不被提供给外部。例如，通过在图像捕获装置110包括显示器的情况下将处理列表显示在显示器上，或者通过在图像捕获装置110具有语音输出功能的情况下用语音输出处理列表，处理列表可以被输出。如果将具有非预期功能的可拆卸设备100错误地安装在图像捕获装置110中，则用户可以通过在图像捕获装置110上显示处理列表来快速识别安装错误。如上所述，图像捕获装置110可以以任意格式输出基于表示图像捕获装置110可执行的处理的第一处理列表和表示可拆卸设备100可执行的处理的第二处理列表的信息。

此外，当可拆卸设备100被移除时，图像捕获装置110再次执行图9中所示的处理，从而更新集成处理列表。此时，图像捕获装置110可以丢弃与被移除的可拆卸设备100相关的第二处理列表。但是，本发明不限于此，并且即使在可拆卸设备100没有被安装的情况下，图像捕获装置110也可以将与某个可拆卸设备100相关的第二处理列表单独存储在存储单元303中并输出第二处理列表。即，图像捕获装置110可以输出用于过去安装和移除的可拆卸设备100的第二处理列表。图像捕获装置110可以输出表示通过使用在与过去安装和移除的可拆卸设备100相关的第二处理列表中包括的处理和在第一处理列表中包括的(可由自身装置执行的)处理而可执行的处理的信息。换句话说，图像捕获装置110可以输出不能仅由自身装置执行的处理的信息。这使得可以向用户通知存在能够执行由输出信息表示的处理的可拆卸设备100，并且该处理可以通过安装可拆卸设备100来执行。

此外，图像捕获装置110可以输出与过去从未被安装在自身装置中但能被安装在自身装置中的可拆卸设备100(未安装设备)相关的第二处理列表。表示这种未安装设备和该未安装设备可执行的分析处理的信息可以例如由图像捕获装置110经由外部服务器(未示出)获得。表示未安装设备和该未安装设备可执行的分析处理的信息可以例如预先由图像捕获装置110保持。

另外，图像捕获装置110可以输出表示通过使用在未安装设备的第二处理列表中包括的处理和在第一处理列表中包括的(自身装置可执行的)处理而可执行的处理的信息。换句话说，图像捕获装置110可以输出不能仅由自身装置执行的处理的信息。这使得可以向用户通知存在能够执行由输出信息表示的处理的可拆卸设备100，并且该处理可以通过安装可拆卸设备100来执行。

注意，当存储过去被安装和移除的可拆卸设备100的第二处理列表时，图像捕获装置110可以一起存储能够标识设备的信息，诸如可拆卸设备100的型号。当输出与可拆卸设备100相关的第二处理列表时，图像捕获装置110可以一起输出能够标识可拆卸设备100的信息。这允许用户容易地识别应该将哪个可拆卸设备100安装在图像捕获装置110中以使用所呈现的处理功能。

(确定分析处理内容的处理)

图10示出了由图像捕获装置110确定分析处理内容的处理过程的示例。在该处理中，经由输入/输出装置130将在图像捕获装置110侧可本地执行的分析处理呈现给用户，并且输入/输出装置130接受用户的选择。图像捕获装置110根据表示经由输入/输出装置130接受的用户选择的信息来确定要执行的分析处理。

在该处理中，首先，输入/输出装置130的控制单元702控制网络通信单元701执行与图像捕获装置110的通信，并请求获得被捕获图像、集成处理列表和后处理列表(步骤S1001)。作为示例，输入/输出装置130将由ONVIF标准定义的请求消息发送到图像捕获装置110，从而请求将信息发送到图像捕获装置110。但是，本发明不限于此，并且信息发送请求可以通过另一个消息等来进行。在图像捕获装置110中，基于该请求，图像捕获控制单元301捕获外围环境，并且控制单元304控制信号处理单元302处理由图像捕获控制单元301捕获的图像并获得被捕获图像(步骤S1002)。注意，图像捕获装置110可以与请求的存在/不存在无关地捕获外围环境，并且连续获得被捕获图像。图像捕获装置110可以本地存储被捕获图像，或者将被捕获图像传送到诸如网络服务器之类的另一个装置并进行存储。控制单元304读出在存储单元303中存储的后处理列表。在本实施例中，后处理列表包括显示处理和存储处理，但不限于此。控制单元304控制网络通信单元307将后处理列表、通过图9中所示的处理获得的集成处理列表以及在步骤S1002中获得的被捕获图像发送到输入/输出装置130(步骤S1003)。作为示例，图像捕获装置110将对于由上述ONVIF标准定义的请求消息的响应消息发送到输入/输出装置130，从而将信息发送到输入/输出装置130。但是，本发明不限于此，并且信息可以通过另一个消息等来发送。注意，这里可以仅考虑要执行的处理，并且可以不执行在步骤S1001中由输入/输出装置130进行的被捕获图像请求、在步骤S1002中的被捕获图像获得、以及在步骤S1003中的到输入/输出装置130的被捕获图像发送。

输入/输出装置130的控制单元702控制网络通信单元701从图像捕获装置110接收被捕获图像和集成处理列表。然后，控制单元702控制显示单元703通过屏幕显示等向用户呈现集成处理列表和后处理列表(步骤S1004)。注意，此时，控制单元702还可以通过屏幕显示等向用户呈现被捕获图像。之后，用户确认由显示单元703显示的集成处理列表和后处理列表，并经由操作单元704从集成处理列表中选择要执行的分析处理(在下文中将称为“执行目标处理”)(步骤S1005)。另外，用户经由操作单元704选择要执行的后处理(在下文中将称为“执行目标后处理”)(步骤S1006)。稍后将描述在步骤S1004中向用户的信息呈现、在步骤S1005中由用户进行的分析处理选择以及在步骤S1006中由用户进行的后处理选择的细节。操作单元704将执行目标处理和执行目标后处理的选择结果输出到控制单元702。控制单元702控制网络通信单元701将表示从操作单元704输入的执行目标处理和执行目标后处理的信息发送到图像捕获装置110(步骤S1007)。

图像捕获装置110的控制单元304控制网络通信单元307从输入/输出装置130接收表示由用户选择的执行目标处理的信息，并确定执行目标处理是否是被包括在第二处理列表中的处理(步骤S1008)。如果执行目标处理未被包括在第二处理列表中(步骤S1008中为“否”)，则控制单元304结束图10所示的处理，而无需通知可拆卸设备100在图像捕获装置110中执行处理。另一方面，如果执行目标处理被包括在第二处理列表中(步骤S1008中为“是”)，则控制单元304控制设备通信单元306将执行目标处理设置请求传送到可拆卸设备100(步骤S1009)。

可拆卸设备100的通信单元502从图像捕获装置110接收执行目标处理设置请求。此时，通信单元502可以通过从图像捕获装置110写入的数据量或写入命令的类型来区分执行目标处理设置请求。稍后将描述设置请求区分方法的细节。通信单元502将从图像捕获装置110接收到的执行目标处理设置请求输出到分析单元501。基于从通信单元502输入的执行目标处理设置请求，分析单元501执行设置以将可拆卸设备100设置为执行目标处理可被执行的状态(步骤S1010)。例如，在完成设置处理之后，通信单元502将设置完成通知发送到图像捕获装置110(步骤S1011)。注意，通信单元502仅需要在可拆卸设备100的设置尚未完成的时刻通知用于禁止图像捕获装置110写入数据的信息，并且可以在设置实际完成之前将设置完成定时等的信息通知给图像捕获装置110。图像捕获装置110的控制单元304控制设备通信单元306从可拆卸设备100接收设置完成通知。

可以使用例如以下三种方法之一来执行从可拆卸设备100到图像捕获装置110的设置完成通知。在第一种通知方法中，在从图像捕获装置110对第一块的数据进行写处理时，在执行目标处理的设置尚未结束的情况下，通信单元502输出BUSY(忙)信号。BUSY信号的输出例如通过将由SD标准定义的DATA的信号线驱动为低状态来执行。在这种情况下，图像捕获装置110确认BUSY信号，从而判别执行目标处理的设置是否完成。在第二种通知方法中，将直到执行目标处理的设置完成为止的时间预先存储在上述特定地址处，并且图像捕获装置110读出直到设置完成为止的时间的信息。在直到执行目标处理设置完成为止的时间过去之后，图像捕获装置110输出写入数据(发出写入命令)。这允许图像捕获装置110在执行目标处理的设置完成之后发送被捕获图像的数据。在第三种通知方法中，当执行目标处理的设置完成时，分析单元501将设置完成标志写在可拆卸设备100的第二特定地址处。图像捕获装置110在第二特定地址处读出数据，从而判别执行目标处理的设置是否完成。注意，写入设置完成标志的地址的信息可以被存储在上述特定地址处，或者可以被存储在另一个地址处。

如在图10中所示的处理中，当使用根据能够执行特定处理的可拆卸设备100是否被安装在图像捕获装置110中而确定的集成处理列表时，可以在考虑图像捕获装置110侧的状态的情况下适当地确定执行目标处理。如果执行目标处理包括要由可拆卸设备100执行的处理，则自动执行可拆卸设备100的设置，从而准备执行由用户选择的处理，而无需用户的设置操作。如果执行目标处理不包括要由可拆卸设备100执行的处理，则不执行可拆卸设备100的设置，从而防止在处理仅由图像捕获装置110执行的情况下不必要地执行可拆卸设备100的设置。

(分析处理的执行控制)

图11示出了当图像捕获装置110执行分析处理时的控制过程的示例。在该处理中，首先，图像捕获控制单元301捕获外围环境(步骤S1101)。控制单元304控制信号处理单元302处理由图像捕获控制单元301捕获的图像并获得被捕获图像。之后，控制单元304控制分析单元305对从控制单元304输入的被捕获图像执行分析前处理，并获得分析前处理结果的图像(步骤S1102)。控制单元304确定执行目标处理是否被包括在第二处理列表中(步骤S1103)。

在确定执行目标处理不被包括在第二处理列表中后(步骤S1103中为“否”)，控制单元304控制分析单元305在图像捕获装置110中对分析前处理结果的图像执行执行目标处理(步骤S1104)。控制单元304控制分析单元305对分析处理结果执行分析后处理(步骤S1108)，并结束处理。

如果执行目标处理被包括在第二处理列表中(步骤S1103中为“是”)，则控制单元304控制设备通信单元306将分析前处理结果的图像发送到可拆卸设备100(步骤S1105)。例如，控制单元304发出分析前处理结果的写请求(写入命令)，从而将分析前处理结果的图像发送到可拆卸设备100。可拆卸设备100的通信单元502从图像捕获装置110接收分析前处理结果的图像，并将从图像捕获装置110接收到的图像输出到分析单元501。分析单元501对从通信单元502输入的图像执行在图10的步骤S1010中设置的执行目标处理(步骤S1106)。然后，通信单元502将通过分析单元501的处理获得的分析处理结果发送到图像捕获装置110(步骤S1107)。图像捕获装置110的控制单元304控制设备通信单元306从可拆卸设备100接收分析处理结果。之后，控制单元304控制分析单元305对分析处理结果执行分析后处理(步骤S1108)。

例如，分析处理结果从可拆卸设备100到图像捕获装置110的发送以以下方式进行。可拆卸设备100的分析单元501将分析处理结果存储在针对每个执行目标处理分配的用于分析处理结果的存储目的地地址。图像捕获装置110读出表示与例如第二处理列表一起被存储在地址A处的分析处理结果的存储地址的信息，并且发出对存储地址的读取请求(读取命令)。可拆卸设备100经由通信单元502接收对于分析处理结果的存储地址的读取请求，并且将分析处理结果输出到图像捕获装置110。注意，图像捕获装置110可以例如在被存储在地址A处的估计处理时间过去之后发出对于分析处理结果的存储地址的读取请求。此外，可拆卸设备100可以输出从对于从图像捕获装置110发送的分析前处理结果的最后一个块的写入请求到执行目标处理的结束为止的BUSY信号。在这种情况下，当不再接收到BUSY信号时，图像捕获装置110可以发出对于分析处理结果的存储地址的读取请求。这允许图像捕获装置110在处理结束之后获得处理结果。

通过上述处理，图像捕获装置110可以根据选择的执行目标处理来确定是否将被捕获图像传送到可拆卸设备100。因此，虽然用户不知道图像捕获装置110或可拆卸设备100中的哪一个应当执行分析处理，但可以执行被捕获图像的分析处理。

(后处理的执行控制)

图12示出了当图像捕获装置110执行后处理时的控制过程的示例。在该处理中，图像捕获装置110的控制单元304确定“显示”是否被包括在执行目标后处理中(步骤S1201)。在确定显示被包括在执行目标后处理中后(步骤S1201中为“是”)，控制单元304控制网络通信单元307将分析处理的结果发送到输入/输出装置130(步骤S1202)。输入/输出装置130的控制单元702控制网络通信单元701从图像捕获装置110接收分析处理的结果，并然后控制显示单元703通过屏幕显示等向用户呈现分析处理的结果(步骤S1203)。另一方面，如果控制单元304确定显示不被包括在执行目标后处理中(步骤S1201中为“否”)，则不执行步骤S1202和S1203的处理。

另外，图像捕获装置110的控制单元304确定“存储”是否被包括在执行目标后处理中(步骤S1204)。注意，步骤S1204的确定可以在步骤S1201之前执行，或者可以与步骤S1201并行执行。在确定存储被包括在执行目标后处理中后(步骤S1204中为“是”)，控制单元304控制存储单元303存储分析处理的结果并结束处理。另一方面，在确定存储不被包括在执行目标后处理中后(步骤S1204中为“否”)，控制单元304结束该处理而无需执行步骤S1205的处理。

如上所述，根据选择的后处理，图像捕获装置110可以执行分析处理的结果到输入/输出装置130的传送或在存储单元303中的存储而无需接受用户的特殊设置操作，并且提高了便利性。

(图像捕获装置110与可拆卸设备100之间的通信)

这里将描述图像捕获装置110与可拆卸设备100之间的通信。图像捕获装置110的算术处理单元203和可拆卸设备100的SD控制器403经由图像捕获装置110的SD I/F单元205的设备插入插座通过电源线、GND线、时钟线、命令线和数据线连接。注意，时钟线、命令线和数据线是经由FPGA 402连接的。在时钟线上，传送从算术处理单元203输出的同步时钟。在命令线上，传送从算术处理单元203到SD控制器403的针对操作请求发出的命令以及从SD控制器403到算术处理单元203的对于命令的响应。在数据线上，传送来自算术处理单元203的写入数据和来自可拆卸设备100的读取数据。另外，算术处理单元203判别SD I/F单元205的设备插入插座的设备检测信号的高和低，从而识别是否插入了可拆卸设备100。

在供电之后，算术处理单元203在命令线上向SD控制器403发出命令。在接收到来自SD控制器403的响应和将设备信息表示为SD卡的输出数据后，算术处理单元203设置用于数据通信的电压、通信速度(时钟频率)等。

图13A和图13B示出了在命令线上传送的命令和响应的结构。命令和响应具有符合SD标准的结构。从算术处理单元203发到SD控制器403的命令1301被配置为包括命令编号部分1304、命令自变量部分1305和纠错数据部分1306。在命令编号部分1304中，描述了指示命令的类型的值。例如，如果在命令编号部分1304中存储值“23”，则这指示该命令是用于指定数据块的数量的块计数指定命令。如果在命令编号部分1304中存储值“25”，则这指示该命令是多写入(multi-write)命令。如果在命令编号部分1304中存储值“12”，则这指示该命令是数据传送停止命令。在命令自变量部分1305中，根据命令的类型指定诸如传送数据块的数量和存储器的写入/读取地址之类的信息项。向命令的第一个位添加表示命令的开始位置的命令开始位1302，并且向命令的最后位添加表示命令的结束的命令结束位1307。此外，在命令开始位1302之后添加表示命令是从图像捕获装置110输出到可拆卸设备100的信号的方向位1303。

响应于来自算术处理单元203的命令而从SD控制器403返回的响应1311包括：响应编号部分1314、响应自变量部分1315和纠错数据部分1316，响应编号部分1314表示响应是针对哪个命令返回的。向响应的第一个位添加表示响应的开始位置的响应开始位1312，向响应的最后位添加表示响应的结束位置的响应结束位1317。此外，在响应开始位1312之后还添加表示响应是从可拆卸设备100输出到图像捕获装置110的信号的方向位1313。在响应自变量部分1315中，根据命令类型存储诸如SD卡的状态之类的信息项。

接下来，将描述在算术处理单元203与可拆卸设备100之间发送/接收数据的方法。在SD I/F单元205中，在数据写入和读取这两者中都是以块为基础执行数据传送。

算术处理单元203使用以下两种方法将多个块的数据传送到可拆卸设备100。在第一种方法中，在通过用于传送数据的块计数指定命令指定了块的数量之后，通过多写入命令来传送指定数量的块的数据。在块计数指定命令中，写入数据的块的数量由命令自变量部分1305指定。在多写入命令中，数据应被写入的存储单元404的地址由命令自变量部分1305指定。在第二种方法中，通过发出多写入命令而不发出块计数指定命令来开始数据传送。当数据传送结束时，发出传送停止命令，从而结束处理。此时，多写入命令的命令自变量部分1305仅指定数据应被写入的存储单元404的地址。算术处理单元203可以任意地切换这两种写入方法。

注意，当执行存储处理时，FPGA 402将从算术处理单元203发送的命令和数据直接输入到SD控制器403，并且SD控制器403将接收到的数据存储在由命令指定的存储单元404的地址处。当执行图像分析处理时，FPGA 402对从算术处理单元203发送的数据执行分析处理，并将处理结果的数据和用于指定存储单元404的预定地址的信息输出到SD控制器403。SD控制器403将处理结果存储在存储单元的指定地址处。

算术处理单元203使用以下两种方法从可拆卸设备100读出多个块的数据。在第一种方法中，在通过块计数指定命令指定了块的数量之后，发出多读取(multi-read)命令，并且读出指定数量的块的数据。在块计数指定命令中，读取数据的块的数量由命令自变量部分1305指定。多读取命令的命令自变量部分1305指定数据读取源的存储器的地址。在第二种方法中，通过发出多读取命令而不发出块计数指定命令来开始数据读取，并且通过发出传送停止命令来结束处理。算术处理单元203可以任意地切换这两种读取方法。

注意，如果写入数据或读取数据是一个块的数据，则发出单写入命令或单读取命令，从而执行数据写入或读取，而无需发出块计数指定命令和传送停止命令。如在以上描述中那样，同样在单写入命令和单读取命令中，命令自变量部分1305指定访问目标的存储单元404的地址。

算术处理单元203执行对可拆卸设备100的写入，从而将作为存储处理或图像分析处理的目标的数据发送到可拆卸设备100。另外，算术处理单元203执行从可拆卸设备100的读取，从而获得在存储单元404中存储的图像数据、图像分析处理的处理结果以及由可拆卸设备100保持的图像分析处理功能的信息。

根据本实施例的可拆卸设备100在存储单元404的特定地址A处存储由自身设备保持的处理功能的信息。图像捕获装置110的算术处理单元203可以通过向地址A发出多读取命令或单读取命令来确认由可拆卸设备100保持的处理功能的信息。这里，处理功能的信息包括表示该设备是否保持处理功能的信息、当执行处理时直到完成所需的时间、处理结果的数据大小以及处理结果被存储的地址的信息。图14示出了处理功能的信息的示例。处理功能保持标志1401表示可拆卸设备100具有图像分析处理功能。图像捕获装置110确认处理功能保持标志1401，从而确定可拆卸设备100是否具有图像分析处理功能。处理功能类别1402表示由可拆卸设备100保持的分析处理。输入数据大小1403和处理数据计数1404表示与每个处理功能的数据输入规格相关的信息。估计处理时间1405表示从数据输入到处理结果输出所需的时间，并且处理结果数据计数1406表示处理结果的数据数量。处理结果存储地址1407表示处理结果被存储在存储单元404中的位置。算术处理单元203读出如图14中所示的存储单元404的地址A处的数据，从而获得如图15中所示的处理功能表。

如果算术处理单元203没有发出对地址A的读取命令，则可拆卸设备100判断自身设备是不使用图像分析处理功能的设备。在这种情况下，关于要传送的数据，可拆卸设备100可以仅执行对于存储单元404的存储处理。因此，对于不需要图像分析处理功能的设备，可拆卸设备100可以仅用作存储器设备。这里已经描述了在存储单元404的特定地址A处存储处理功能的信息的方法。但是，本发明不限于此。例如，可以响应于在可拆卸设备100的初始化时使用的命令而向响应自变量部分1315添加处理功能的信息。

注意，例如，在可拆卸设备100的初始化结束之后，图像捕获装置110执行对存储单元404的地址A的读取。另外，如果在插座中不再检测到设备，则图像捕获装置110丢弃读取的信息。如果在丢弃信息之后该设备被插入到插座中，则图像捕获装置110在初始化结束之后再次读出地址A的值。因此，如果插入不同的可拆卸设备，则图像捕获装置110可以读取并设置由可拆卸设备保持的功能的信息。

(存储处理和图像分析处理之间的切换控制)

接下来将描述由可拆卸设备100在存储处理和图像分析处理之间自动切换的方法。该处理是确定可拆卸设备100是直接存储从图像捕获装置110接收的图像数据还是对图像数据执行图像分析处理的自动确定处理。在示例中，图像捕获装置110发送特殊命令，从而控制应由可拆卸设备100执行被发送到可拆卸设备100的图像数据的存储和对图像数据的图像分析处理中的哪一个。但是，由于可拆卸设备100所符合的标准，定义这样的特殊命令并不容易。因此，在本实施例中，可以通过以下方法切换要由可拆卸设备100执行的处理而无需定义特殊命令。注意，在以下处理示例中，图像捕获装置110与可拆卸设备100之间的通信通过符合SD标准的方法来执行。但是，本发明不限于此。即，可以使用根据可拆卸设备100所符合的预定标准的命令等来执行与下面将要描述的处理类似的处理。

[基于传送数据量的控制]

图16示出了基于要传送到可拆卸设备100的数据块的数量而在存储处理和图像分析处理之间自动切换的控制过程的示例。

首先，图像捕获装置110的算术处理单元203将符合SD标准的写入命令发到可拆卸设备100，并且传送数据(步骤S1601)。可拆卸设备100的FPGA 402确定由算术处理单元203写入的数据的块数量是否与在执行图像分析处理时的数据量匹配(步骤S1602)。FPGA 402可以通过确认块计数指定命令的命令自变量部分1305中描述的数据块的数量来识别数据的块数量。如果没有发出块计数指定命令，则FPGA 402可以通过对发出数据传送停止命令之前所传送的块数量进行计数来识别数据的块数量。

如果由算术处理单元203写入的数据的块数量与在执行图像分析处理时的数据量匹配(步骤S1602中为“是”)，则FPGA 402对传送的数据执行图像分析处理(步骤S1603)。FPGA 402获得处理结果(步骤S1604)、向SD控制器403发出写入命令，并且根据分析处理的类别将获得的处理结果存储在存储单元404的处理结果存储地址1407处(步骤S1605)。另一方面，如果由算术处理单元203写入的数据的块数量与在执行图像分析处理时的数据量不匹配(步骤S1602中为“否”)，则直接将传送的数据存储在存储单元404中(步骤S1606)。例如，FPGA 402向SD控制器403发出与由算术处理单元203发出的写入命令相似的命令，并直接传送所传送的数据。SD控制器403将传送的数据存储在由写入命令指定的存储单元404的地址处。

可拆卸设备100在存储单元404的特定地址A处保持如图15中所示的信息，并且识别出例如在执行分析处理A时输入数据的数量为20块。出于此原因，如果由算术处理单元203写入的数据的块数量为20块，则FPGA 402执行分析处理A，否则，不执行分析处理A。注意，FPGA 402可以根据输入的块数量改变执行目标分析处理，使得例如如果由算术处理单元203写入的数据的块数量为40块，则FPGA 402执行分析处理C。

[基于写入地址的控制]

图17示出了基于由写入命令的命令自变量部分1305指定的写入地址而在存储处理和图像分析处理之间进行切换的控制过程的示例。同样在该处理中，图像捕获装置110的算术处理单元203向SD控制器403发出写入命令(步骤S1701)。FPGA 402确定由命令自变量部分1305指定并表示存储单元404中的信息存储目的地的写入地址是否与图14中所示的处理结果存储地址1407匹配(步骤S1702)。如果由命令自变量部分1305指定的写入地址与处理结果存储地址1407匹配(步骤S1702中为“是”)，则FPGA 402对所传送的数据执行与该地址对应的图像分析处理(步骤S1703)。FPGA 402获得处理结果(步骤S1704)，向SD控制器403发出写入命令，并将获得的处理结果存储在存储单元404的处理结果存储地址1407处(步骤S1705)。另一方面，如果由命令自变量部分1305指定的写入地址与处理结果存储地址1407不匹配(步骤S1702中为“否”)，则FPGA 402直接将所传送的数据存储在存储单元404中(步骤S1706)。例如，FPGA 402向SD控制器403发出与由算术处理单元203发出的写入命令相似的命令，并直接传送所传送的数据。SD控制器403将传送的数据存储在由写入命令指定的存储单元404的地址处。

可拆卸设备100在存储单元404的特定地址A处保持如图15中所示的信息，并且识别例如在执行分析处理A时的分析结果存储地址应为0xFFFFFFFF。出于此原因，如果由从算术处理单元203获得的命令指定的写入地址是0xFFFFFFFF，则FPGA 402执行分析处理A，否则，不执行分析处理A。注意，FPGA 402可以根据由命令指定的写入地址改变执行目标分析处理，使得例如如果由从算术处理单元203获得的命令指定的写入地址为0xEEEEEEEE，则FPGA 402执行分析处理C。

如上所述，可拆卸设备100可以基于由算术处理单元203写入的数据的块数量或写入目的地地址来确定是执行图像分析处理还是直接存储数据。注意，可拆卸设备100可以根据由算术处理单元203写入的数据的块数量和写入目的地地址的组合来确定是执行图像分析处理还是直接存储数据。例如，如果数据的块数量和写入目的地地址与处理数据计数1404和处理结果存储地址1407匹配，则可以执行图像分析处理。另外，如果数据的块数量和数据的写入目的地地址中的至少一个与任何图像分析处理的处理数据计数1404或处理结果存储地址1407不匹配，则可以执行存储处理。

通过上述处理，可拆卸设备100可以对应被执行图像分析处理的数据执行图像分析处理并且可以存储应被存储而无需执行图像分析处理的数据，无需引入用于指示是否执行图像分析处理的附加过程。由于这可以防止系统变得复杂并且避免执行附加程序的必要性，因此图像分析处理可以快速开始。

注意，可以结合图16所示的处理来执行图17所示的处理。即，如果图像数据的块数量和信息的存储目的地地址是与图像分析处理相关联的值，则可以执行图像分析处理。

注意，当执行图像分析处理时，不仅处理结果而且作为分析处理目标的传送数据可以一起被存储在存储单元404的不同于处理结果存储地址1407的区域中。此外，在上述控制中，如果可拆卸设备100具有多个图像分析处理功能，则可以根据写入块的数量或数据的写入地址来确定要执行的图像分析处理的类型。例如，如果对于多个图像分析处理功能中的某个图像分析处理，数据的块数量或写入目的地地址与处理数据计数1404或处理结果存储地址1407匹配，则可以执行图像分析处理。

[基于命令的控制]

图18示出了基于命令在存储处理和图像分析处理之间切换的控制过程的示例。在SD标准中，提供了在发出块计数指定命令之后写入数据的第一协议以及在不发出块计数指定命令的情况下写入数据的第二协议作为写入数据时的协议。注意，第二协议在结束数据写入时发出数据传送停止命令。在该处理示例中，基于通过第一协议进行的数据发送来执行图像分析处理，并且当通过第二协议发送数据时，在不执行图像分析处理的情况下执行将图像数据存储在存储单元404中的存储处理。因此，可拆卸设备100的FPGA 402根据是否发出了用于发送图像数据的块计数指定命令来确定是否执行图像分析处理。

同样在该处理中，首先，图像捕获装置110的算术处理单元203向可拆卸设备100发出写入命令，并传送数据(步骤S1801)。这里，可拆卸设备100的FPGA 402确定是否发出了块计数指定命令(步骤S1802)。如果发出了块计数指定命令(步骤S1802中为“是”)，则FPGA402对所传送的数据执行图像分析处理(步骤S1803)，并获得处理结果(步骤S1804)。FPGA402根据图14中所示的分析处理的类别来指定预定的处理结果存储地址，并且向SD控制器403发出写入命令，从而将处理结果的数据存储在存储单元404中(步骤S1805)。如果没有发出块计数指定命令(步骤S1802中为“否”)，则FPGA 402向SD控制器403发出与由算术处理单元203发出的命令相似的写入命令。FPGA 402将传送的数据直接发送到SD控制器403。SD控制器403将数据存储在由FPGA 402的写入命令指定的存储单元404的地址处(步骤S1806)。

注意，块计数指定命令可以是另一个预定命令。即，预先设置用作执行图像分析处理的触发器的预定命令，并且FPGA 402至少基于该预定命令的接收来对输入图像数据执行图像分析处理。可替代地，可以使用能够标识协议的另一个信息。注意，例如，在接收到预定命令后，FPGA 402可以执行图16或17中所示的处理以确定是否对输入图像数据执行图像分析处理。

如上所述，通过用诸如块计数指定命令之类的命令指示图像分析处理的执行，图像捕获装置110可以在符合SD标准的协议范围内指示要由可拆卸设备100执行的处理。

可以说，上述处理的至少一部分是根据符合用于图像数据的发送的SD标准的命令是否包括与FPGA 402可执行的图像分析处理相关联的值来确定是否执行图像分析处理的处理。即，在图16中所示的处理中，当在命令编号部分1304中存储“23”并且在命令自变量部分1305中存储指示预定块数量的值时，执行图像分析处理。在图17中所示的处理中，当在命令自变量部分1305中存储指示处理结果存储地址的值时，执行图像分析处理。在图18中所示的处理中，当在命令编号部分1304中存储“23”时，执行图像分析处理。如上所述，通过将发送图像数据时的命令的内容设置为与图像分析处理相关联的预定值，可以使用符合SD标准的命令来灵活地控制FPGA 402应执行图像分析处理和存储处理中的哪一个。

(处理结果的读取)

接下来将描述由图像捕获装置110读出在可拆卸设备100中存储的图像分析处理的处理结果的方法。算术处理单元203在可拆卸设备100中指定图14所示的处理结果存储地址1407，并且发出读取命令以读出与每个分析处理的处理结果数据计数1406一样多的数据。SD控制器403经由FPGA 402接收读取命令，并且将在存储单元404的指定地址处存储的处理结果的数据输出到图像捕获装置110的算术处理单元203。这允许图像捕获装置110获得图像分析处理的处理结果。

(信息到用户的呈现和用户选择的接受)

将描述向用户呈现被捕获图像、集成处理列表和后处理列表以及接受用户选择的方法的示例。图19示出了经由显示单元703的被捕获图像、集成处理列表和后处理列表的屏幕显示的示例。通过显示屏幕，例如，显示用户界面1901。用户界面1901包括例如被捕获图像显示区域1902、集成处理列表显示区域1903和后处理列表显示区域1904。用户确认这些区域，从而掌握被捕获图像、集成处理列表和后处理列表。

注意，要显示的列表不仅限于集成处理列表。例如，图像捕获装置110可以将某个可拆卸设备100的第二处理列表存储在存储单元303中，并且即使可拆卸设备100未被安装，也将存储单元303中存储的第二处理列表发送到输入/输出装置130。即，图像捕获装置110可以输出过去安装的可拆卸设备100的第二处理列表。在这种情况下，输入/输出装置130可以以灰视(gray-out)状态显示在第二处理列表中包括但在集成处理列表中不包括的分析处理，作为通过安装可拆卸设备100启用的分析处理。因此，可以促使用户将可拆卸设备100安装在图像捕获装置110中，以使处于灰视状态的处理可执行。此外，例如，如果图像捕获装置110和可拆卸设备100具有相同的处理功能，则它们可以被集成并显示为一个处理。在这种情况下，图像捕获装置110可以确定图像捕获装置110和可拆卸设备100中的哪一个执行处理。稍后将描述这种确定方法。

注意，输入/输出装置130可以显示为用户显示的分析处理和后处理，使得用户可以识别图像捕获装置110和可拆卸设备100中的哪一个应当执行每个处理。例如，当创建集成处理列表时，图像捕获装置110使集成处理列表包括表示第一处理列表和第二处理列表中的哪一个包括集成处理列表中包括的每个分析处理的信息。根据表示第一处理列表和第二处理列表中的哪一个包括集成处理列表中包括的每个分析处理的信息，输入/输出装置130在改变字符颜色的同时显示每个分析处理。这允许用户确认每个处理是否是即使可拆卸设备100被移除也可执行的处理。注意，如果图像捕获装置110和可拆卸设备100可以执行相同的处理，并且它们被集成和显示为一个处理，则该处理可以以与图像捕获装置110对应的字符颜色来显示。这是因为即使可拆卸设备100被移除也可以执行该处理。但是，本发明不限于此，并且可以以表示处理是可由图像捕获装置110和可拆卸设备100这两者执行的处理的字符颜色来显示处理。

另外，如果在集成处理列表中包括当图像捕获装置110和可拆卸设备100合作时可执行的处理，则对于该处理，可以将表示合作必要性的信息包括在集成处理列表中。在这种情况下，可以以另一种字符颜色显示当图像捕获装置110和可拆卸设备100合作时实现的处理。例如，面部认证处理可以通过面部检测处理功能、面部特征提取处理功能和面部特征校对处理功能的功能群来实现。假定图像捕获装置110具有面部检测处理功能和面部特征提取处理功能，并且可拆卸设备100具有面部特征校对处理功能。在这种情况下，例如，在用户界面1901上，用蓝色字符显示面部检测处理和面部特征提取处理，用红色字符显示面部特征校对处理，并且用绿色字符显示面部认证处理。

注意，改变字符颜色仅仅是被配置为显示功能使得可以区分图像捕获装置110和可拆卸设备100中的哪一个应当执行功能或者功能是否通过它们的合作来执行的一种形式。这种可区分的显示可以通过另一种形式来进行。例如，可以通过改变每个处理的背景颜色来明确地显示处理的执行主体。另外，执行主体的差异可以由字符串指示。例如，可以在指示要由图像捕获设备110执行的处理的字符串之后添加指示图像捕获装置110的字符串，并且可以在指示要由可拆卸设备100执行的处理的字符串之后添加指示可拆卸设备100的字符串。可以向指示通过图像捕获装置110和可拆卸设备100的合作实现的处理的字符串添加指示图像捕获装置110和可拆卸设备100的合作的字符串。如上所述，图像捕获装置110向输入/输出装置130提供以可区分的方式表示第一处理列表中包括的处理和第二处理列表中包括的处理的信息，从而使输入/输出装置130的显示单元703以可区分的方式显示每个处理的执行主体。即使图像捕获装置110包括显示单元，也可以通过准备以可区分的方式表示第一处理列表中包括的处理和第二处理列表中包括的处理的信息来以可区分的方式显示每个处理的执行主体。即，通过输出以可区分的方式表示第一处理列表中包括的处理和第二处理列表中包括的处理的信息，图像捕获装置110可以使任意显示设备以可区分的方式显示每个处理的执行主体。

用户可以经由操作单元704从在用户界面1901的集成处理列表显示区域1903中显示的集成处理列表中选择执行目标处理。另外，用户可以经由操作单元704从在后处理列表显示区域1904中显示的处理列表中选择执行目标后处理。例如，图19示出了如下示例：用户选择“面部检测”处理作为执行目标分析处理，并且选择“显示”和“存储”作为执行目标后处理。注意，在本实施例中，示出了仅选择一个执行目标处理的示例。但是，本发明不限于此。该系统可以被配置为允许用户选择多个执行目标处理。例如，除了“面部检测”之外，还可以选择“人体检测”和“车辆检测”中的至少一个。如果选择了一个处理，则可以禁止选择另一个处理。作为示例，如果在图19中所示的集成处理列表显示区域1903中“面部检测”被选择的状态下选择“人体检测”，则可以取消“面部检测”的选择。图19示出了其中两个后处理都被选择的示例。但是，其中的仅一个可以是能选择的。

基于用户对执行目标处理和后处理的选择，在图10的步骤S1007中将选择结果通知给图像捕获装置110。另外，输入/输出装置130的控制单元702可以确认每个预定时段内用户选择的状态，并根据哪个处理被选择为执行目标来向图像捕获装置110通知执行目标处理。即，可以周期性地执行步骤S1005至S1007的处理，或者可以始终监视步骤S1005和S1006中的选择，并且当选择状态已经改变时，可以执行步骤S1007的处理。

图20示出了在“面部检测”被选择为执行目标处理并且“显示”被选择为执行目标后处理的情况下，在步骤S1203中显示信息的方法的示例。在这个示例中，通过脸部检测处理检测到的人数2001作为分析处理的结果被显示在图19中所示的用户界面1901的屏幕上。注意，图20仅仅是示例，并且处理的结果可以与用户界面1901分开被显示，并且处理的结果可以被显示在用户界面1901的另一个区域中。

另外，可以为用户选择的执行目标处理和后处理中的每一个设置优先级。例如，如果存在多个执行目标处理，并且设置了优先级，则图像捕获装置110的控制单元304按优先级顺序针对每个执行目标处理执行图11中所示的处理(例如，步骤S1103至S1107的处理)。注意，可以基于优先级来分配图像捕获装置110侧的计算资源或网络资源。例如，可以针对视频的每第一预定数量的帧执行高优先级的处理，并且可以针对视频的每第二预定数量的帧执行低优先级的处理，第二预定数量的帧多于第一预定数量的帧。即，可以按优先级确定执行处理的频率。另外，将高优先级的处理结果发送到输入/输出装置130的频率可以高于将低优先级的处理结果发送到输入/输出装置130的频率。

(确定图像捕获装置和可拆卸设备之间的处理分配的处理)

当多个处理被组合时，预定处理可以变为可执行的。例如，可以通过组合面部检测处理、面部特征提取处理和面部特征校对处理这三个处理来执行面部认证处理。如果图像捕获装置110和可拆卸设备100可以执行这三个处理中的至少一个，则可以在装置之间分配并执行这些处理。此外，在图像捕获装置110和可拆卸设备100中，例如，对于上述三个处理中的至少一个，可以准备适合于每个条件的不同处理功能，诸如获得作为处理目标的数据的条件(例如，图像捕获条件)或分析目标。例如，可以准备不同的处理功能以用于处理在白天捕获的图像和用于处理在夜间捕获的图像。例如，如图21中所示，图像捕获装置110和可拆卸设备100被配置为具有面部检测处理功能、面部特征提取处理功能和面部特征校对处理功能并执行面部认证处理。注意，即使图像捕获装置110和可拆卸设备100具有相同的功能，使用它们的合适条件也可以不同。另外，图像捕获装置110和可拆卸设备100中的每一个可以具有能够执行类似处理的多个处理功能，如图21中所示的可拆卸设备100，其具有两个面部特征提取处理功能。因此，当在图像捕获装置110和可拆卸设备100之间适当地分配处理时，可以执行适合于各种条件的处理。

注意，即使图像捕获装置110和可拆卸设备100执行相同的处理，由于布置的不同也会存在优点和缺点。例如，关于运算精度，图像捕获装置110的算术处理单元203可能是有利的，因为相对于数据的位宽度较大。关于运算速度，可拆卸设备100可能是有利的，因为运算由FPGA 402上的逻辑电路执行。如果存在能够执行相同处理的多个处理功能，则基于图像捕获装置110的图像捕获的环境选择适当的处理功能是有利的。考虑此类情况，如果可拆卸设备100具有处理功能，则重要的是适当地确定是否实际使用该处理功能并适当地选择要使用的处理功能。因此，下面将描述自动选择是否使可拆卸设备100执行处理、是否使图像捕获装置110执行处理、或者是否使图像捕获装置110和可拆卸设备100合作执行处理的方法。另外，还将描述在图像捕获装置110和可拆卸设备100具有能够执行相同处理的多个处理功能的情况下，通过例如确定应该使用这多个处理功能中的哪一个来自动选择要使用的处理功能的方法。注意，下面将单独描述三个处理示例，并且它们可以组合使用。

[第一处理示例]

将参考图22描述选择要使用的处理功能的第一处理示例。在这个示例中，为了满足执行图像分析处理所需的性能，从在图像捕获装置110和可拆卸设备100中提供的处理功能中选择要使用的处理功能。例如，在存在例如需要以预定帧速率或更高的帧速率执行处理的条件的情况下，可以执行该处理，并且图像捕获装置110和可拆卸设备100都可以执行相同的处理。

在该处理中，首先，用户经由例如输入/输出装置130上的在图19中所示的用户界面1901选择执行目标处理(步骤S2201)。基于用户选择，输入/输出装置130的控制单元702将用于执行目标处理的执行指令命令发送到图像捕获装置110。图像捕获装置110的控制单元304从输入/输出装置130获得表示所选择的处理的执行指令命令。注意，如果图像捕获装置110具有呈现可执行处理的信息呈现功能和使用户做出选择的操作接受功能，则用户可以直接操作图像捕获装置110并向图像捕获装置110的控制单元304指示执行目标处理。

图像捕获装置110的控制单元304确认在执行所选择的处理时需要的处理性能(步骤S2202)。至于处理性能的设置，可以预先针对每个处理确定设置值，或者用户可以在选择处理时设置目标值。控制单元304在图像捕获装置110中执行在步骤S2201中选择的处理(步骤S2203)。注意，该处理可以与图像捕获并行地执行。另外，在执行所选择的处理时要使用的处理功能中仅存在于可拆卸设备100中的功能由可拆卸设备100执行，而不在图像捕获装置110中执行。

在完成预定量的数据的处理之后的处理执行期间，控制单元304确认所执行的处理是否满足在步骤S2202中设置的处理性能(步骤S2204)。在确认满足处理性能后(步骤S2204中为“是”)，控制单元304使处理返回到步骤S2203以直接继续处理。另一方面，在确认不满足处理性能后(步骤S2204中为“否”)，控制单元304使处理前进到步骤S2205，以尝试改变为能够满足处理性能的处理分配。

在步骤S2205中，关于作为由图像捕获装置110执行的处理的一部分并且甚至在可拆卸设备100中也可执行的处理，执行主体被改变为可拆卸设备100。由于掌握了可拆卸设备100可执行的处理，因此图像捕获装置110的控制单元304从处理列表(第二处理列表)中选择要传送到可拆卸设备100的处理，并改变处理的执行主体。当改变完成时，在步骤S2201中选择的处理被分配给控制单元304和分析单元501并且被执行(步骤S2206)。此后，控制单元304确认是否将处理功能从可拆卸设备100返回到图像捕获装置110(步骤S2207)。当处理返回到图像捕获装置110时，可以以更高的运算精度执行处理。

例如，如果在步骤S2204中确定不能满足处理性能的原因是暂时的高负荷状态等，并且该状态已消除，则控制单元304可以确定处理可以返回到图像捕获装置110。即，控制单元304可以基于图像捕获装置110的处理负荷来确定图像捕获装置110和可拆卸设备100中的哪一个应当执行处理。注意，除了如上所述使可拆卸设备100在图像捕获装置110的处理负荷高的状态下执行处理之外，还可以使图像捕获装置110在可拆卸设备100的处理负荷高的状态下执行处理。即，可以基于可拆卸设备100的处理负荷来确定图像捕获装置110和可拆卸设备100中的哪一个应该执行处理。

此外，例如，如果用户降低处理性能的目标值，则控制单元304可以确定可以将处理返回到图像捕获装置110。在确定将处理返回到图像捕获装置110后(步骤S2207中为“是”)，控制单元304将已经由可拆卸设备100执行的处理的一部分的执行主体改变为图像捕获装置110(步骤S2208)。注意，在步骤S2208中其执行主体返回到图像捕获装置110的处理可以是在步骤S2205中其执行主体被改变为可拆卸设备100的处理的一部分或全部。在处理的至少一部分的执行主体返回到图像捕获装置110之后，控制单元304使处理返回到步骤S2203。另一方面，在确定不将处理返回到图像捕获装置110(步骤S2207中为“否”)后，控制单元304将处理返回到步骤S2206，并且在不改变处理分配的情况下继续处理。

注意，在可拆卸设备100具有能够执行相同处理的多个处理功能的情况下，如果在将处理的一部分的执行主体转移到可拆卸设备100之后不能满足处理性能，则处理功能可以被切换到用于执行相同功能的处理功能。即，在步骤S2207中，代替切换处理的执行主体，可以在保持可拆卸设备100作为执行主体的同时改变要使用的处理功能。

另外，即使在处理的一部分的执行主体被转移到可拆卸设备100之后，如果不能满足步骤S2202中确认的处理性能，则控制单元304也可以将处理的执行主体返回到图像捕获装置110。此时，控制单元304可以存储表示在步骤S2202中确认的处理性能的信息作为当前安装的可拆卸设备100不能满足的处理性能的信息。如果需要类似的处理性能或更严格的处理性能，则控制单元304可以不使可拆卸设备100执行处理。类似地，例如，即使在图像捕获装置110的处理负荷足够小的情况下，如果不能满足在步骤S2202中确认的处理性能，则也可以存储处理性能的信息。在这种情况下，在随后的处理中，如果在步骤S2202中确认了所存储的处理性能或更严格的处理性能，则控制单元304可以将处理的一部分的执行主体转移到可拆卸设备100上而不执行步骤S2203的处理。

根据第一处理示例，选择在图像捕获装置110和可拆卸设备100中提供的处理功能，并且在装置之间分配并执行处理以满足所需的处理性能。这使得可以根据例如图像捕获装置110的状态执行适当的处理分配，并维持令人满意的处理性能。

[第二处理示例]

接下来将参考图23描述选择要使用的处理功能的第二处理示例。当在可拆卸设备100具有能够执行相同处理的多个处理功能的情况下选择要使用的处理功能时，执行该处理。注意，该处理可以在例如在第一处理示例中确定使可拆卸设备100执行一些处理的情况下执行。即，当可拆卸设备100执行处理时，可拆卸设备100可以使用该处理来确定应当使用能够执行处理的一个或多个处理功能中的哪一个。但是，这仅仅是示例，并且可以通过该处理示例来确定图像捕获装置110与可拆卸设备100之间的处理分配。例如，如果在集成了图像捕获装置110和可拆卸设备100可执行的处理的处理列表中存在能够执行相同处理的多个处理功能，则该处理示例可以用于确定应该使用处理功能中的哪一个。即，如果图像捕获装置110和可拆卸设备100中的每一个具有能够执行相同处理的一个或多个处理功能，则该处理示例可以用于确定应当在哪个装置中的使用哪个处理功能来执行处理。

在该处理中，首先，如在图22的步骤S2201中那样，用户在输入/输出装置130上选择执行目标处理，并且图像捕获装置110的控制单元304从输入/输出装置130获得表示所选择的处理的信息(步骤S2301)。控制单元304确认可拆卸设备100可执行的处理的列表(第二处理列表)，并且对于执行目标处理，确认是否存在能够执行相同处理的多个处理功能(步骤S2302)。在确定仅存在能够执行执行目标处理的一个处理功能后(步骤S2302中为“否”)，控制单元304使用该处理功能来执行处理(步骤S2303)。另一方面，在确定存在能够执行执行目标处理的多个处理功能后(步骤S2302中为“是”)，控制单元304使处理前进到步骤S2304，以使用多个处理功能中的一个执行处理。

在步骤S2304中，控制单元304确认能够执行作为步骤S2302的确定目标的相同处理的多个处理功能中的每一个的特征。这里，关于例如面部特征提取，确认表示第一处理功能适合于处理白天的亮度相对较高的图像而第二处理功能适合于处理夜间的亮度相对较低的图像的特征。在确认了处理功能的特征之间的差异之后，控制单元304确认图像捕获装置110正在执行图像捕获的当前环境(步骤S2305)。基于在步骤S2304中获得的每个处理功能的特征和在步骤S2305中获得的图像捕获环境的信息，控制单元304选择要在实际分析处理中使用的处理功能(步骤S2306)，并使用所选择的处理功能执行分析处理(步骤S2307)。

这里，可以基于例如图像捕获装置110的内部时钟或由图像捕获装置110捕获的图像的亮度值的分布来进行图像捕获环境的确认。例如，如果内部时钟指示夜晚时区，则选择适合于处理亮度值相对较低的图像的处理功能。如果被捕获图像的亮度值位于低亮度侧，则选择适合于处理亮度值相对较低的图像的处理功能。可替代地，可以针对每个处理功能准备亮度值的检测精度的评估值的分布，并且例如，可以选择如下处理功能：对于该处理功能，通过将被捕获图像的每个亮度值的频率和指示亮度值的检测精度的值相乘并相加而获得的值之和最优秀。可以基于例如在图像捕获装置110的图像捕获时的视角信息(平移/倾斜/变焦)来进行图像捕获环境的确认。例如，基于例如房间中的暗区域或窗户旁边的亮区域中的哪一个被捕获来选择要使用的处理功能。注意，处理功能的特征可以由亮度值以外的指标来定义。例如，诸如在包括预定对象(诸如窗口)的图像中的高面部提取精度或对于正在高速移动的对象的高检测精度之类的各种特征可以用作选择要使用的处理功能的参考。另外，例如，每个处理功能可以具有表示以高速度但以低精度进行处理的特征或者以相对低的速度但以高精度进行处理的特征。可以根据处理条件选择合适的处理功能。

控制单元304确认图像捕获环境是否已经改变(步骤S2308)。如果图像捕获环境已经改变(步骤S2308中为“是”)，则控制单元304再次执行选择适合于改变之后的环境的处理功能的处理(步骤S2306)，并通过所选择的处理功能执行分析处理(步骤S2307)。另一方面，如果图像捕获环境没有改变(步骤S2308中为“否”)，则控制单元304继续分析处理而不改变处理功能(步骤S2307)。

根据该处理，可以从能够执行相同处理的多个处理功能中选择适合于环境的处理功能，并使用该处理功能。从处理精度等的观点看，这使得可以针对每种环境选择性地使用适当的处理功能。

[第三处理示例]

接下来将参考图24描述确定图像捕获装置110与可拆卸设备100之间的处理分配的第三处理示例。在该处理中，基于是否可以仅通过可拆卸设备100中提供的处理功能的组合完成处理来确定处理的分配。

在该处理中，首先，如图22的步骤S2201或图23的步骤S2301中那样，用户选择输入/输出装置130上的执行目标处理，并且图像捕获装置110的控制单元304获得表示来自输入/输出装置130的所选择的处理的信息(步骤S2401)。控制单元304确定所选择的处理是否可以仅由可拆卸设备100实现(完成)(步骤S2402)。注意，控制单元304可以例如基于所选择的处理的所有功能是否可以通过可拆卸设备100中提供的处理功能的组合满足，或者处理结果是否可以被存储在可拆卸设备100中，来执行步骤S2402的确定。例如，如果所选择的处理的所有功能可以通过可拆卸设备100中提供的处理功能的组合满足，并且处理结果可以被存储在可拆卸设备100中，则控制单元304确定处理可以仅由可拆卸设备100完成。

在确定所选择的处理不能仅由可拆卸设备100完成(步骤S2402中为“否”)后，控制单元304在图像捕获装置110和可拆卸设备100之间分配处理(步骤S2403)。在这种情况下，可以执行第一处理示例和第二处理示例中的处理分配。注意，在这种情况下，所有处理可以由图像捕获装置110执行，即，可拆卸设备100的处理功能的使用可以被禁止。另一方面，在确定所选择的处理可以仅由可拆卸设备100完成(步骤S2402中为“是”)后，控制单元304选择应当使用可拆卸设备100中提供的处理功能中的哪个处理功能(步骤S2404)。注意，如果可拆卸设备100具有能够执行相同处理的多个处理功能，则如第二处理示例中那样选择应当使用哪个处理功能。此后，控制单元304执行使可拆卸设备100使用所选择的处理功能执行图像分析处理的处理(步骤S2405)。另外，控制单元304执行将在步骤S2405中执行图像分析处理的结果存储在可拆卸设备100中的处理(步骤S2406)。使用例如SD标准的命令来执行这些处理。注意，在步骤S2406中，可以将结果存储在存储单元404中，或者如果在FPGA 402中设有RAM，则可以将结果存储在RAM中。

在该处理示例中，如果可以在可拆卸设备100中完成处理，则使可拆卸设备100执行处理。因此，要由图像捕获装置110执行的处理仅是向可拆卸设备100的图像发送，并且处理负荷可以大大减轻。

以上述方式，使用可拆卸设备100增加了在图像捕获装置110侧可执行的功能，从而增强了系统中的处理功能。例如，当在可拆卸设备100中实现最新处理功能时，可以在图像捕获设备110侧执行通过最新处理功能的图像分析处理而无需替换图像捕获设备110。这可以灵活地操作系统并提高便利性。

在上述实施例中，已经描述了图像分析处理作为分析处理的示例。但是，本发明也可以应用于声音分析处理。例如，本发明可以应用于检测诸如尖叫声、枪声或玻璃破碎声之类的声音模式的处理。例如，通过诸如频谱分析之类的各种声音数据分析方法提取声音的特征量，并将其与检测到的声音模式进行比较。通过计算匹配程度，可以检测到具体的声音模式。

当执行声音分析处理时，将声音数据分割成预定时间的声音数据，使用预定时间的声音数据为单位执行声音分析处理。另外，取决于检测目标的声音模式，适当地改变预定时间。出于此原因，将与要检测的声音模式对应的时间的声音数据输入到可拆卸设备100。可拆卸设备100具有分析输入声音数据的功能或保持输入声音数据的功能。

在上述实施例中，已经描述了能够非临时地存储从图像捕获装置110输入的数据的可拆卸设备100。但是，在一些实施例中，可以使用不能非临时地存储从图像捕获装置110输入的数据的可拆卸设备100。即，可拆卸设备100可以仅对从图像捕获装置110输入的数据执行分析处理，并且可以不非临时地存储数据。换句话说，可以使用不像普通SD卡那样旨在存储数据、而是旨在分析处理的可拆卸设备100。

其它实施例

本发明的(一个或多个)实施例还可以通过读出并执行记录在存储介质(也可以更完整地称为“非暂时性计算机可读存储介质”)上的计算机可执行指令(例如，一个或多个程序)以执行一个或多个上述实施例的功能和/或包括用于执行一个或多个上述实施例的功能的一个或多个电路(例如，专用集成电路(ASIC))的系统或装置的计算机来实现，以及通过由系统或装置的计算机例如通过从存储介质读出并执行计算机可执行指令以执行一个或多个上述实施例的功能和/或控制一个或多个电路执行一个或多个上述实施例的功能而执行的方法来实现。计算机可以包括一个或多个处理器(例如，中央处理单元(CPU)、微处理单元(MPU))，并且可以包括单独的计算机或单独的处理器的网络以读出并执行计算机可执行指令。可以例如从网络或存储介质将计算机可执行指令提供给计算机。存储介质可以包括例如硬盘、随机存取存储器(RAM)、只读存储器(ROM)、分布式计算系统的存储装置、光盘(诸如紧凑盘(CD)、数字通用光盘(DVD)或蓝光光盘(BD)^TM)、闪存设备、存储卡等中的一个或多个。

其它实施例

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。

虽然已经参考示例性实施例描述了本发明，但是应该理解的是，本发明不限于所公开的示例性实施例。所附权利要求的范围应被赋予最宽泛的解释，以涵盖所有这样的修改以及等同的结构和功能。

Claims (13)

1.一种图像捕获装置，包括能够附接/拆卸能至少存储所捕获的图像的设备的安装部，所述图像捕获装置包括：

获得部件，用于获得图像分析处理的执行指令；

通信部件，用于从所述设备接收被安装在安装部中的设备可执行的处理的列表；

确定部件，用于如果被安装在安装部中的设备包括用于对图像捕获装置所捕获的图像执行图像分析处理的第一处理部件，则确定是否使第一处理部件执行基于所述执行指令的图像分析处理；以及

第二处理部件，用于对图像捕获装置所捕获的图像执行图像分析处理；

其中，由所述执行指令所指示的图像分析处理包括多个图像处理，

如果基于设备可执行的处理的列表确定图像分析处理中包括的所有处理都能由设备的第一处理部件完成，则所述确定部件确定由设备执行图像分析处理，以及

如果基于设备可执行的处理的列表确定图像分析处理中包括的分析前处理、分析处理或分析后处理中的至少一个不能由设备完成，则所述确定部件确定由设备执行多个图像处理中包括的、能由设备的第一处理部件完成的处理。

2.根据权利要求1所述的图像捕获装置，其中，所述确定部件确定在能只由第一处理部件完成图像分析处理的情况下，使第一处理部件执行图像分析处理，或者，在不能只由第一处理部件完成图像分析处理的情况下，使第二处理部件执行图像分析处理。

3.根据权利要求1所述的图像捕获装置，其中，如果由第二处理部件进行的图像分析处理不能满足所设置的处理性能，则所述确定部件确定使第一处理部件执行图像分析处理。

4.根据权利要求3所述的图像捕获装置，其中，所述处理性能是根据要执行的图像分析处理而预先设置的。

5.根据权利要求3所述的图像捕获装置，其中，所述处理性能是由用户针对要执行的图像分析处理设置的。

6.根据权利要求1所述的图像捕获装置，其中，如果被安装在所述安装部中的设备具有执行相同图像分析处理的多个处理功能，则所述确定部件确定要使用所述多个处理功能中的哪一个。

7.根据权利要求1所述的图像捕获装置，其中，所述确定部件基于图像捕获装置的处理负荷来做出确定。

8.根据权利要求1所述的图像捕获装置，其中，所述确定部件基于由图像捕获装置进行的图像捕获的环境来做出确定。

9.根据权利要求1所述的图像捕获装置，其中，第一处理部件包括能够重写处理内容的设备，并且

在确定使用第一处理部件后，所述确定部件使用用于执行基于所述执行指令的图像分析处理的设置数据来设置第一处理部件。

10.根据权利要求9所述的图像捕获装置，其中，所述设备包括用于存储设置数据和图像分析处理的结果信息的存储部件，并且

所述图像捕获装置从存储部件中读出并获得结果信息。

11.根据权利要求1所述的图像捕获装置，其中，所述安装部包括SD卡插槽，并且

所述设备是SD卡形式的设备。

12.一种由图像捕获装置执行的控制方法，所述图像捕获装置包括能够附接/拆卸能至少存储所捕获的图像的设备的安装部，以及用于对图像捕获装置捕获的图像执行图像分析处理的第二处理部件，所述控制方法包括：

获得所述图像分析处理的执行指令；

从所述设备接收被安装在安装部中的设备可执行的处理的列表；以及

如果被安装在安装部中的设备包括用于对图像捕获装置所捕获的图像执行图像分析处理的第一处理部件，则确定是否使第一处理部件执行基于所述执行指令的图像分析处理，

其中，由所述执行指令所指示的图像分析处理包括多个图像处理，

如果基于设备可执行的处理的列表确定图像分析处理中包括的所有处理都能由设备的第一处理部件完成，则确定由设备执行图像分析处理，以及

如果基于设备可执行的处理的列表确定图像分析处理中包括的分析前处理、分析处理或分析后处理中的至少一个不能由设备完成，则确定由设备执行多个图像处理中包括的、能由设备的第一处理部件完成的处理。

13.一种存储程序的计算机可读存储介质，所述程序被配置为使包括能够附接/拆卸能至少存储所捕获的图像的设备的安装部以及用于对图像捕获装置捕获的图像执行图像分析处理的第二处理部件的图像捕获装置中提供的计算机执行以下从操作：

获得所述图像分析处理的执行指令；

从所述设备接收被安装在安装部中的设备可执行的处理的列表；以及

如果被安装在安装部中的设备包括用于对图像捕获装置所捕获的图像执行图像分析处理的第一处理部件，则确定是否使第一处理部件执行基于所述执行指令的图像分析处理，

其中，由所述执行指令所指示的图像分析处理包括多个图像处理，

如果基于设备可执行的处理的列表确定图像分析处理中包括的所有处理都能由设备的第一处理部件完成，则确定由设备执行图像分析处理，以及

如果基于设备可执行的处理的列表确定图像分析处理中包括的分析前处理、分析处理或分析后处理中的至少一个不能由设备完成，则确定由设备执行多个图像处理中包括的、能由设备的第一处理部件完成的处理。

Images