CN110087023A - 视频图像发送装置、信息处理装置、系统、方法及介质 - Google Patents

Abstract

本发明提供了视频图像发送装置、信息处理装置、系统、方法及介质。该视频图像发送装置包括：确定单元，其被构造成基于待发送给信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据；添加单元，其被构造成在所述确定单元确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据。

Description

视频图像发送装置、信息处理装置、系统、方法及介质

技术领域

本发明涉及视频图像发送装置、信息处理装置、系统、信息处理方法及记录介质。

背景技术

传统摄像机通过校正拍摄图像的失真和/或剪切拍摄图像来生成多个类型的视频图像并将所生成的视频图像分发给客户端装置，或者分析所生成的视频图像并分发作为视频分析的结果而被检测到的对象信息作为元数据。

此外，在将所拍摄的视频图像分发给客户端装置的监视摄像机(monitoringcamera)上，实现了诸如从外部装置侧改变诸如监视摄像机设置等的命令和用于给出开始图像分发的指令的命令。这些命令的已知示例是在由开放型网络视频接口论坛(ONVIF)设置的标准中规定的那些命令。

作为监视摄像机设置(配置)，ONVI定义了视频源设置(视频源配置)，该视频源设置包括待分发的图像的视频类型。作为监视摄像机配置，ONVI还定义了元数据分发设置(元数据配置)，该元数据分发设置用于设置在元数据分发中是“包括还是不包括”作为视频分析的结果而被检测到的对象信息。

配置映射到(关联到)在由摄像机分发时所指定的配置文件设置(配置文件)，并且摄像机根据映射在配置文件设置上的配置的内容来分发视频图像和元数据。

图1示出了根据ONVIF将配置映射到配置文件设置的示例。如图1所例示的，一个视频源设置和一个元数据分发设置分别从一个或更多个视频源设置和一个或更多个元数据分发设置中选择，并且将选择出的视频源设置和元数据分发设置映射到配置文件设置。

然而，在被构造成生成多个类型的视频图像并使用这多个类型的视频图像进行视频分析的摄像机基于ONVIF配置文件，进行视频分发和元数据分发的情况下，元数据分发设置不包含指示待经受视频分析的视频类型的信息。因而，这造成如下情况：与待分发的视频图像不同的视频分析结果作为元数据被分发并使用户混淆。

例如，存在如下全方位摄像机：该全方位摄像机被构造成生成鱼眼视频图像和全景视频图像，鱼眼视频图像是通过鱼眼镜头拍摄的，全景视频图像是通过校正鱼眼视频图像的失真和/或剪切鱼眼视频图像而生成的。

在全方位摄像机的视频源设置的视频类型被设置为鱼眼视频图像而使用全景视频图像进行视频分析的情况下，鱼眼视频图像被分发而由全景视频生成的对象信息被包括在所分发的元数据中。因此，从全景视频图像检测到的对象信息可能会叠加在鱼眼视频图像上。

此外，在日本特许5999395号公报中讨论了如下摄像装置：该摄像装置基于待分发的图像的视频类型，确定是“分发还是不分发”元数据。

然而，在日本特许5999395号公报讨论的技术中，是在待分发的图像的视频类型为特定视频类型的情况下确定“分发还是不分发”元数据，并且如果待分发的图像的视频类型为特定视频类型，则即使在待分发的图像的视频类型与视频分析的视频图像匹配的情况下，也不分发元数据。

发明内容

根据本发明的方面，提供了一种视频图像发送装置，其被构造成发送由摄像单元拍摄的视频图像，所述视频图像发送装置包括：确定单元，其被构造成基于待发送给信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据；添加单元，其被构造成在所述确定单元确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据。

根据本发明的另一方面，提供了一种信息处理装置，其包括：获取单元，其被构造成从视频图像发送装置获取，对通过所述视频图像发送装置待发送给所述信息处理装置的图像所进行的视频分析中所获得的视频类型，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像；接收单元，其被构造成从所述视频图像发送装置接收所述视频图像和元数据；以及显示单元，其被构造成在通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与由所述获取单元获取的视频类型匹配的情况下，将与包含在由所述接收单元接收到的元数据中的对象信息对应的外接矩形叠加在由所述接收单元接收到的视频图像上，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象。

根据本发明的另一方面，提供了一种包括视频图像发送装置和信息处理装置的系统，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像，所述视频图像发送装置包括：确定单元，其被构造成基于待发送给所述信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；添加单元，其被构造成在所述确定单元确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据；并且所述信息处理装置包括：接收单元，其被构造成从所述视频图像发送装置接收所述视频图像和所述元数据；以及显示单元，其被构造成将包含在由所述接收单元接收到的元数据中的对象信息的外接矩形叠加在由所述接收单元接收到的视频图像上。

根据本发明的另一方面，提供了一种包括视频图像发送装置和信息处理装置的系统，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像，所述视频图像发送装置包括：添加单元，其被构造成将关于待分发的视频图像的对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；以及发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据；并且所述信息处理装置包括：获取单元，其被构造成从所述视频图像发送装置获取，对通过所述视频图像发送装置待发送给所述信息处理装置的图像所进行的视频分析中所获得的视频类型；接收单元，其被构造成从所述视频图像发送装置接收所述视频图像和所述元数据；以及显示单元，其被构造成在通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与由所述获取单元获取的视频类型匹配的情况下，将包含在由所述接收单元接收到的元数据中的对象信息的外接矩形叠加在由所述接收单元接收到的视频图像上。

根据本发明的另一方面，提供了一种要由视频图像发送装置执行的信息处理方法，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像，所述信息处理方法包括：确定步骤，基于待发送给信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；添加步骤，在所述确定步骤确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及发送步骤，向所述信息处理装置发送所述视频图像和所述元数据。

根据本发明的另一方面，提供了一种要由信息处理装置执行的信息处理方法，所述信息处理方法包括：获取步骤，从视频图像发送装置获取，对通过所述视频图像发送装置待发送给所述信息处理装置的图像所进行的视频分析中所获得的视频类型；接收步骤，从所述视频图像发送装置接收所述视频图像和元数据；以及叠加显示步骤，在通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与所获取的视频类型匹配的情况下，将包含在所接收到的元数据中的对象信息的外接矩形叠加显示在由所接收到的视频图像上。

根据本发明的另一方面，提供了一种计算机可读记录介质，其存储程序，该程序使被构造成发送由摄像单元拍摄的视频图像的视频图像发送装置的计算机起如下作用：确定单元，其被构造成基于待发送给信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；添加单元，其被构造成在所述确定单元确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据。

根据本发明的另一方面，提供了一种计算机可读记录介质，其存储程序，该程序使信息处理装置的计算机起如下作用：获取单元，其被构造成从视频图像发送装置获取，对通过所述视频图像发送装置待发送给所述信息处理装置的图像所进行的视频分析中所获得的视频类型，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像；接收单元，其被构造成从所述视频图像发送装置接收所述视频图像和元数据；以及显示单元，其被构造成在通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与由所述获取单元获取的视频类型匹配的情况下，将与包含在由所述接收单元接收到的元数据中的对象信息对应的外接矩形叠加在由所述接收单元接收到的视频图像上，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象。

通过以下参照附图对示例性实施方式的描述，本发明的其他特征将变得清楚。

附图说明

图1例示了将配置映射到配置文件设置的示例。

图2例示了包括监视摄像机的系统构成的示例。

图3A和图3B例示了硬件构成的示例。

图4A和图4B例示了功能构成的示例。

图5是例示了第一示例性实施方式中的系统中的信息处理的示例的时序图。

图6例示了配置文件设置画面的示例。

图7例示了观察者画面的示例。

图8是例示了第一示例性实施方式中的监视摄像机中的信息处理的示例的流程图。

图9是例示了第二示例性实施方式中的监视摄像机中的信息处理的示例的流程图。

图10是例示了第二示例性实施方式中的系统中的信息处理的示例的时序图。

图11是例示了客户端装置中的信息处理的示例的流程图。

具体实施方式

下面将参照附图描述本发明的各种示例性实施方式。

下面将参照图2描述根据本发明的第一示例性实施方式的网络构成。

图2例示了包括监视摄像机10的系统构成的示例。监视摄像机10和客户端装置20经由网络30连接，使得监视摄像机10和客户端装置20能够相互通信，客户端装置20向监视摄像机10发送下述的各种控制命令。控制命令例如是用于将视频源设置和元数据分发设置映射到配置文件设置的命令、元数据分发设置命令及用于获取视频分发和元数据分发的连接目的地的命令。其他控制命令包括用于请求视频分发和元数据分发的命令以及用于获取经受视频分析的视频类型的命令。监视摄像机10向客户端装置20发送对命令的响应，并且响应于针对视频分发和元数据分发的请求向客户端装置20发送对视频图像和元数据的响应。监视摄像机10是视频图像发送装置的示例。客户端装置20是信息处理装置的示例。

图3A例示了监视摄像机10的硬件构成的示例。

中央处理单元(CPU)11控制整个监视摄像机10。存储器12用作如下各种数据存储区域，诸如用于由CPU11待执行的程序的存储区域、执行程序时的工作区域、用于设置值的存储区域以及用于由下述的摄像单元13生成的图像数据的存储区域等。设置值是针对于监视摄像机10、配置文件设置、还有诸如天花板摄像机或墙壁摄像机等的摄像机的安装状态以及经受视频分析的视频类型的值(配置)。

这些配置包括视频源设置(视频源配置)和元数据分发设置(元数据配置)。视频源设置包括待分发的图像的视频类型。进行元数据分发设置，以确定在元数据分发中，是包括还是不包括通过针对由摄像单元13拍摄的图像的视频分析而检测到的对象信息(objectinformation)。例如，通过监视摄像机10的图像分析处理单元进行视频分析。例如，CPU11基于存储在存储器12中的程序执行处理，以实现图像分析处理单元。此外，对象信息包括指示对象在图像中的位置的信息和指示对象的种类的信息。例如，种类是人、车辆、移动物体。

此外，将配置映射到指定监视摄像机10的控制的配置文件设置(配置文件)，并且监视摄像机10基于映射在配置文件设置上的配置的内容进行视频分发和元数据分发。

摄像单元13拍摄由监视摄像机10的摄像光学系统形成的被摄体图像并获取模拟信号，将该模拟信号转换为数字数据，并且向存储单元输出该数字数据作为拍摄图像。当拍摄图像输出到存储单元时，CPU11接收到来自摄像单元13的图像获取事件。摄像单元13是摄像单元的示例。

在从外部设备接收控制命令时，以及在向外部设备发送对控制命令的响应、视频图像或元数据时，使用通信单元14。在从外部设备接收命令的情况下，CPU11从通信单元14接收命令接收事件。

CPU11基于存储在存储器12中的程序执行处理，以实现下述的图4A所例示的功能构成和图5或图10所例示的时序图中的监视摄像机10的处理或者图8或图9所例示的流程图中的信息处理。

图3A中的监视摄像机10的硬件构成仅为示例，除图3A所例示的硬件以外，作为硬件，监视摄像机10还可以包括音频输入单元、音频输出单元和/或图像分析处理单元。

图3B例示了客户端装置20的硬件构成的示例。

CPU21控制整个客户端装置20。

存储器22用作如下各种数据存储区域，诸如用于主要由CPU21待执行的程序的存储区域和在执行程序时的工作区域等。

显示单元23例如为液晶显示器(LCD)或有机电致发光显示器(有机EL显示器)。显示单元23向客户端装置20的用户显示各种设置画面，各种设置画面包括配置文件设置画面、用于从监视摄像机10接收到的视频图像的观察者画面、各种消息等。

例如，输入单元24包括按钮、十字键、触摸面板和鼠标，并且向CPU21通知由用户进行的画面操作的细节。

在向监视摄像机10发送下述的各种控制命令时，以及在从监视摄像机10接收对控制命令的响应、视频图像或元数据时，使用通信单元25。控制命令例如为将视频源设置和元数据分发设置映射到配置文件设置的命令、元数据分发设置命令、用于获取视频分发和元数据分发的连接目的地的命令、用于请求视频分发和元数据分发的命令以及用于获取经受视频分析的视频类型的命令。

CPU21基于存储在存储器22中的程序执行处理，以实现下述的图4B所例示的功能构成以及图5或图10所例示的时序图中的客户端装置20的处理或者图11所例示的流程图中的信息处理。

图4A例示了监视摄像机10的功能构成的示例。

控制单元100控制监视摄像机10的全部处理。

摄像控制单元101控制摄像单元13。例如，摄像控制单元101根据由控制单元100输入的平摇、俯仰或变焦值将摄像单元13的摄像范围改变为平摇驱动、俯仰驱动、或变焦驱动。

编码单元102基于联合摄影专家组(JPEG)、H.264、H.265等格式通过对从摄像单元13输出的拍摄图像进行编码而生成图像数据，并且向存储器12输出所生成的图像数据。

对于监视摄像机10而言，摄像控制单元101可以作为硬件构成而被实施。同样地，对于监视摄像机10而言，编码单元102可以作为硬件构成而被实施。

图4B例示了客户端装置20的软件构成的示例。

控制单元200控制客户端装置20的全部处理。

解码单元201基于JPEG、H.264、H.265等格式对经由通信单元25接收到的所编码的图像数据进行解码，并且使所解码的图像数据在存储器22上展开。

解码单元201可以作为客户端装置20上的硬件构成而被实施。

下面参照图5描述监视摄像机10向客户端装置20分发视频图像和元数据的时序。

客户端装置20的控制单元200为了设置视频类型而向监视摄像机10发送如下命令：该命令用于将与待分发的图像的视频类型相对应的视频源设置映射到(关联到)配置文件设置。

监视摄像机10的控制单元100接收命令，将该命令中指定的视频源设置映射到配置文件设置，并且向客户端装置20发送指示配置文件设置完成的响应作为对该命令的响应。客户端装置20的控制单元200从监视摄像机10接收响应。将由映射到配置文件设置的视频源设置所定义的视频图像发送给客户端装置20。

客户端装置20的控制单元200为了设置在元数据中是“包括还是不包括”对象信息，而向监视摄像机10发送元数据分发设置命令。

监视摄像机10的控制单元100接收命令，更新具有所指定的设置的元数据设置，并且向客户端装置20发送指示元数据分发设置完成的响应作为对该命令的响应。客户端装置20的控制单元200从监视摄像机10接收响应。

客户端装置20的控制单元200为了基于元数据分发设置来分发元数据，而发送用于将所指定的元数据分发设置映射到所指定的配置文件设置的命令。

监视摄像机10的控制单元100接收命令，将所指定的元数据分发设置映射到所指定的配置文件设置，并且向客户端装置20发送指示配置文件设置完成的响应作为对该命令的响应。将通过映射到配置文件设置的元数据分发设置所定义的元数据发送给客户端装置20。客户端装置20的控制单元200从监视摄像机10接收响应。

客户端装置20的控制单元200为了基于所设置的配置文件来获取视频分发和元数据分发的连接目的地(统一资源标识符(URI)等)，而指定配置文件，并且向监视摄像机10发送用于获取视频分发和元数据分发的连接目的地的命令。

监视摄像机10的控制单元100接收命令，基于所指定的配置文件生成视频分发和元数据分发的连接目的地，并且向客户端装置20发送该连接目的地。客户端装置20的控制单元200从监视摄像机10接收连接目的地。

客户端装置20的控制单元200向所获取的连接目的地发送用于请求视频分发和元数据分发的命令。

监视摄像机10的控制单元100接收命令，生成待分发的视频图像，通过将对象信息添加到元数据的处理31生成元数据，并且向客户端装置20发送视频图像和元数据。待分发的视频图像和元数据是在所设置的配置文件上定义的视频图像和元数据。客户端装置20的控制单元200接收视频图像和元数据。

图5并非意在限制命令的协议，命令的协议为ONVIF协议、监视摄像机的特有控制协议等。

图6例示了配置文件设置画面的示例。在客户端装置20的显示单元23上显示图6所例示的配置文件设置画面40。配置文件标识符(ID)列表显示区域41显示针对监视摄像机10而设置的配置文件的标识符的列表。用户操作客户端装置20的输入单元24，并且从视频源设置视频类型的选择框42中选择视频源设置，该视频源设置指示相应配置文件设置的图像的分发目标视频类型。

此外，用户操作客户端装置20的输入单元24，以使用用于选择在元数据中是“包括还是不包括”对象信息的复选框43选择在元数据分发的元数据中是“包括还是不包括”对象信息。

如果用户选择设置按钮44，则客户端装置20的控制单元200向监视摄像机10发送用于将视频源设置和元数据分发设置映射到配置文件设置的命令和元数据分发设置命令。

图7例示了观察者画面的示例。在客户端装置20的显示单元23显示图7中的观察者画面50。客户端装置20的控制单元200向监视摄像机10发送用于获取视频分发和元数据分发的连接目的地的命令。此外，客户端装置20的控制单元200从监视摄像机10接收连接目的地。

客户端装置20的控制单元200向监视摄像机10的连接目的地发送用于请求视频分发和元数据分发的命令。此外，客户端装置20的控制单元200从监视摄像机10的连接目的地接收视频图像和元数据。

客户端装置20的控制单元200将由包含在元数据中的对象信息生成的对象的外接矩形52叠加在从监视摄像机10接收到的视频图像上，并且在视频图像显示区域51中显示所得图像。

下面参照图8描述用于将对象信息添加到监视摄像机10的元数据的处理31。

在步骤S61中，监视摄像机10的控制单元100从存储器12中获取关于在元数据分发设置的元数据中是“包括还是不包括”对象信息的信息，并且确定是否要在元数据中包括对象信息。如果要包括对象信息(在步骤S61中为“是”)，则处理进行到步骤S62。另一方面，如果不要包括对象信息(在步骤S61中为“否”)，则结束图8中的流程图的处理。

在步骤S62中，监视摄像机10的控制单元100从存储器12中获取摄像机安装状态，并且确定监视摄像机10是否附装到天花板。如果监视摄像机10的控制单元100确定监视摄像机10附装到天花板(在步骤S62中为“是”)，则处理进行到步骤S63。另一方面，如果监视摄像机10的控制单元100确定监视摄像机10附装到墙壁(在步骤S62中为“否”)，则处理进行到步骤S65。

在步骤S63中，监视摄像机10的控制单元100将待经受视频分析的视频类型设置为“鱼眼”。然后，控制单元100从存储器12中获取视频源设置的视频类型并且确定视频源设置的视频类型是否为鱼眼。如果控制单元100确定视频源设置的视频类型是鱼眼(在步骤S63中为“是”)，则处理进行到步骤S64。另一方面，如果控制单元100确定视频源设置的视频类型不是鱼眼(在步骤S63中为“否”)，则结束图8的流程图中的处理。

在步骤S64中，监视摄像机10的控制单元100将如下对象信息添加到元数据中，并且结束图8的流程图中的处理：该对象信息指示从鱼眼视频图像检测到的对象。以这种方式，在经受视频分析的视频类型与分发目标图像的视频类型匹配的情况下，控制单元100将对象信息添加到元数据中。

在步骤S65中，监视摄像机10的控制单元100将待经受视频分析的视频类型设置为“全景”。然后，控制单元100从存储器12中获取视频源设置的视频类型并且确定视频源设置的视频类型是否为全景。如果控制单元100确定视频源设置的视频类型为全景(在步骤S65中为“是”)，则处理进行到步骤S66。另一方面，如果控制单元100确定视频源设置的视频类型不是全景(在步骤S65中为“否”)，则结束图8的流程图中的处理。

在步骤S66中，监视摄像机10的控制单元100将如下对象信息添加到元数据，并且结束图8的流程图中的处理：该对象信息指示从全景视频图像检测到的对象。以这种方式，在经受视频分析的视频类型与待分发的分发目标图像的视频类型匹配的情况下，控制单元100将对象信息添加到元数据。

客户端装置20的控制单元200从监视摄像机10接收视频图像和元数据，将包含在所接收到的元数据中的对象信息的外接矩形叠加在所接收到的视频图像上，并且显示所得图像。

如上所述，在第一示例性实施方式中，监视摄像机10基于摄像机安装状态确定经受视频分析的视频图像，并且仅在待分发的视频图像与经受视频分析的视频图像匹配的情况下，监视摄像机10才将对象信息添加到元数据并向客户端装置20发送该元数据。以这种方式，防止了客户端装置20将错误对象的外接矩形叠加在视频图像上。

下面参照图9描述第二个示例性实施方式中的将对象信息添加到监视摄像机10的元数据的处理31。省略了与第一示例性实施方式中相同的点(图2至图7)的描述。

在步骤S71中，监视摄像机10的控制单元100从存储器12中获取关于在元数据分发设置的元数据中是“包括还是不包括”对象信息的信息，并且确定是否要将对象信息包括在元数据中。如果要包括对象信息(在步骤S71中为“是”)，则处理将进行到步骤S72。另一方面，如果不要包括对象信息(在步骤S71中为“否”)，则结束图9的流程图中的处理。

在步骤S72中，监视摄像机10的控制单元100从存储器12中获取经受视频分析的视频类型，并且确定视频类型是否为鱼眼。如果控制单元100确定视频分析的视频类型为鱼眼(在步骤S72中为“是”)，则处理进行到步骤S73。另一方面，如果控制单元100确定视频分析的视频类型为全景(在步骤S72中为“否”)，则处理进行到步骤S75。

在步骤S73中，监视摄像机10的控制单元100从存储器12中获取视频源设置的视频类型，并且确定视频源设置的视频类型是否为鱼眼。如果控制单元100确定视频类型为鱼眼(在步骤S73中为“是”)，则处理进行到步骤S74。另一方面，如果控制单元100确定视频类型不是鱼眼(在步骤S73中为“否”)，则结束图9的流程图中的处理。

在步骤S74中，监视摄像机10的控制单元100将如下对象信息添加到元数据中，并且结束图9流程图中的处理：该对象信息指示从鱼眼视频图像检测到的对象。

在步骤S75中，监视摄像机10的控制单元100从存储器12中获取视频源设置的视频类型，并且确定视频源设置的视频类型是否为全景。如果控制单元100确定视频类型为全景(在步骤S75中为“是”)，则处理进行到步骤S76。另一方面，如果控制单元100确定视频类型不是全景(在步骤S73中为“否”)，则结束图9的流程图中的处理。

步骤S76中，监视摄像机10的控制单元100将如下对象信息添加到元数据中，并且结束图9流程图中的处理：该对象信息指示从全景图像检测到的对象。

如上所述，在第二示例性实施方式中，监视摄像机10基于当前经受视频分析的视频类型，仅在待分发的视频图像与经受视频分析的视频图像匹配的情况下，才将对象信息添加到元数据。以这种方式，防止了客户端装置20将错误对象的外接矩形叠加在视频图像上。

下面参照图10和图11描述第三示例性实施方式中的将对象信息的外接矩形叠加在客户端装置20的视频图像上的处理32。省略了与第一示例性实施方式中相似的点(图2、图3A、图3B、图4A、图4B和图6)的描述。

下面参照图10描述监视摄像机10向客户端装置20分发视频图像和元数据的时序。

客户端装置20的控制单元200为了设置视频类型而向监视摄像机10发送用于将与分发目标图像的视频类型对应的视频源设置映射到配置文件设置(profile setting)的命令。

监视摄像机10的控制单元100接收命令，将该命令中所指定的视频源设置映射到配置文件设置，并且向客户端装置20发送指示配置文件设置完成的响应作为对命令的响应。客户端装置20的控制单元200从监视摄像机10接收响应。

客户端装置20的控制单元200为了设置在元数据中是“包括还是不包括”对象信息而向监视摄像机10发送元数据分发设置命令。

监视摄像机10的控制单元100接收命令，更新具有所指定的设置的元数据设置，并且向客户端装置20发送指示元数据分发设置完成的响应作为对该命令的响应。客户端装置20的控制单元200从监视摄像机10接收响应。

客户端装置20的控制单元200为了基于元数据分发设置来分发该元数据而发送如下命令：该命令用于将所指定的元数据分发设置映射到所指定的配置文件设置。

监视摄像机10的控制单元100接收命令，将所指定的元数据分发设置映射到所指定的配置文件设置，并向客户端装置20发送指示配置文件设置完成的响应作为对该命令的响应。客户端装置20的控制单元200从监视摄像机10接收响应。

客户端装置20的控制单元200为了获取经受视频分析的视频类型而向监视摄像机10发送如下命令：该命令用于获取经受视频分析的视频类型。监视摄像机10的控制单元100接收命令并向客户端装置20发送视频类型。客户端装置20的控制单元200从监视摄像机10接收视频类型。

客户端装置20的控制单元200为了获取视频分发和元数据分发在设置配置文件上的连接目的地，而指定配置文件，并且向监视摄像机10发送用于获取视频分发和元数据分发的连接目的地的命令。

监视摄像机10的控制单元100接收命令，生成所指定的配置文件的视频分发和元数据分发的连接目的地，并且向客户端装置20发送该连接目的地。客户端装置20的控制单元200从监视摄像机10接收连接目的地。

客户端装置20的控制单元200向所获取的连接目的地发送用于请求视频分发和元数据分发的命令。

监视摄像机10的控制单元100接收命令，生成待分发的视频图像，通过将对象信息添加到元数据的处理31生成元数据，并且向客户端装置20发送视频图像和元数据。客户端装置20的控制单元200接收视频图像和元数据。

客户端装置20的控制单元200使用所接收到的视频图像和所接收到的元数据进行将对象信息的外接矩形叠加在视频图像上的处理32。

图10并非意在限制命令的协议，命令的协议为ONVIF协议、监视摄像机的特有控制协议等。

下面参照图7描述本示例性实施方式中的观察者画面。

客户端装置20的控制单元200向监视摄像机10发送用于获取视频分发和元数据分发的连接目的地的命令。然后，客户端装置20的控制单元200从监视摄像机10接收连接目的地。

客户端装置20的控制单元200向监视摄像机10的连接目的地发送用于请求视频分发和元数据分发的命令。然后，客户端装置20的控制单元200从监视摄像机10的连接目的地接收视频图像和元数据。

客户端装置20的控制单元200使用从监视摄像机10接收到的视频图像和元数据进行将对象信息的外接矩形叠加在待分发的视频图像上的处理32，仅在待分发的视频图像与经受视频分析的视频图像匹配的情况下，才由包含在元数据中的对象信息生成的对象的外接矩形52叠加在所接收到的视频图像上，并且显示所得图像。

客户端装置20的控制单元200将由包含在元数据中的对象信息生成的对象的外接矩形52叠加在从监视摄像机10接收到的视频图像上并且在视频图像显示区域51显示所得图像。

下面参照图11描述将对象信息的外接矩形叠加在客户端装置20的分发目标视频图像上的处理32。

在步骤S81中，客户端装置20的控制单元200从监视摄像机10接收视频图像和元数据。

在步骤S82中，客户端装置20的控制单元200从存储器22中获取当前经受视频分析的视频类型，并且确定所获取的视频类型是否与由客户端装置20请求的分发目标图像的视频类型匹配。客户端装置20的控制单元200可以基于在获取图10中的视频分发和元数据分发的连接目的地时指定的配置文件，鉴别由客户端装置20请求的分发目标图像的视频类型。如果控制单元200确定当前经受视频分析的视频类型与由客户端装置20请求的分发目标图像的视频类型匹配(在步骤S82中为“是”)，则处理进行到步骤S83。另一方面，如果控制单元200确定视频类型不匹配(在步骤S82中为“否”)，则结束图11的流程图中的处理。

在步骤S83中，客户端装置20的控制单元200将对象信息的外接矩形叠加在来自存储器12的分发目标视频图像上，并且结束图11的流程图中的处理。

如上所述，在第三示例性实施方式中，客户端装置20从监视摄像机10获取当前经受视频分析的视频类型，并且仅在分发目标视频类型与经受视频分析的视频类型匹配的情况下，才将对象信息添加到元数据。以这种方式，防止了客户端装置20将错误对象的外接矩形叠加在该视频类型上。

<其他实施方式>

还可以通过如下处理来实现本发明：在该处理中，将用于实现上述实施方式中的一个或更多个功能的程序经由网络或存储介质供给到系统或装置，并且该系统或装置读取并执行该程序。此外，还可以通过被构造成实现一个或更多个功能的电路(例如，专用集成电路(ASIC))，来实现本发明。

虽然上面详细描述了本发明的实施方式的示例，但本发明不限于具体的示例性实施方式。

监视摄像机10和客户端装置20的上述硬件构成仅为示例，监视摄像机10和客户端装置20均可以包括例如多个CPU、多个存储器、多个通信单元等。此外，多个CPU可以基于程序使用存储在各个装置的多个存储器中的数据等执行处理。此外，可以代替CPU而使用图形处理单元(GPU)。

此外，可以以任意组合的方式实施上述示例性实施方式。

上述实施方式中的各个均防止了分发目标图像的视频类型与视频分析的视频类型相互不匹配，并且防止了客户端装置将错误对象信息叠加在待分发的视频图像上。

上述实施方式中的各个均降低了在视频图像与对象信息相互关联的情况下，分发目标视频图像与对象信息不匹配的可能性。

<其他实施例>

另外，可以通过读出并执行记录在存储介质(也可更完整地称为“非临时性计算机可读存储介质”)上的计算机可执行指令(例如，一个或更多个程序)以执行上述实施例中的一个或更多个的功能、并且/或者包括用于执行上述实施例中的一个或更多个的功能的一个或更多个电路(例如，专用集成电路(ASIC))的系统或装置的计算机，来实现本发明的实施例，并且，可以利用通过由所述系统或装置的所述计算机例如读出并执行来自所述存储介质的所述计算机可执行指令以执行上述实施例中的一个或更多个的功能、并且/或者控制所述一个或更多个电路执行上述实施例中的一个或更多个的功能的方法，来实现本发明的实施例。所述计算机可以包括一个或更多个处理器(例如，中央处理单元(CPU)，微处理单元(MPU))，并且可以包括分开的计算机或分开的处理器的网络，以读出并执行所述计算机可执行指令。所述计算机可执行指令可以例如从网络或所述存储介质被提供给计算机。所述存储介质可以包括例如硬盘、随机存取存储器(RAM)、只读存储器(ROM)、分布式计算系统的存储器、光盘(诸如压缩光盘(CD)、数字通用光盘(DVD)或蓝光光盘(BD)^TM)、闪存设备以及存储卡等中的一个或更多个。

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。

虽然参照示例性实施方式对本发明进行了描述，但是应当理解，本发明并不限于所公开的示例性实施方式。应当对所附权利要求的范围给予最宽的解释，以使其涵盖所有这些变型例以及等同的结构和功能。

Claims (15)

1.一种视频图像发送装置，其被构造成发送由摄像单元拍摄的视频图像，所述视频图像发送装置包括：

确定单元，其被构造成基于待发送给信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；

添加单元，其被构造成在所述确定单元确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及

发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据。

2.根据权利要求1所述的视频图像发送装置，其中，所述确定单元还基于经受视频分析的图像的视频类型，确定是否将所述对象信息添加到所述元数据。

3.根据权利要求2所述的视频图像发送装置，其中，在摄像单元附装到天花板的情况下，所述确定单元确定经受视频分析的图像的视频类型为鱼眼，并且在待发送给所述信息处理装置的图像的视频类型为鱼眼的情况下，所述确定单元确定要将所述对象信息添加到所述元数据。

4.根据权利要求2所述的视频图像发送装置，其中，在摄像单元附装到墙壁的情况下，所述确定单元确定经受视频分析的图像的视频类型为全景，并且在待发送给所述信息处理装置的图像的视频类型为全景的情况下，所述确定单元确定要将所述对象信息添加到所述元数据。

5.根据权利要求2所述的视频图像发送装置，其中，在经受视频分析的图像的视频类型为鱼眼且待发送给所述信息处理装置的图像的视频类型为鱼眼的情况下，所述确定单元确定要将所述对象信息添加到所述元数据。

6.根据权利要求2所述的视频图像发送装置，其中，在经受视频分析的图像的视频类型为全景且待发送给所述信息处理装置的图像的视频类型为全景的情况下，所述确定单元确定要将所述对象信息添加到所述元数据。

7.根据权利要求2所述的视频图像发送装置，其中，在经受视频分析的图像的视频类型与待发送给所述信息处理装置的图像的视频类型匹配的情况下，所述确定单元确定要将所述对象信息添加到所述元数据。

8.一种信息处理装置，其包括：

获取单元，其被构造成从视频图像发送装置获取，对通过所述视频图像发送装置待发送给所述信息处理装置的图像所进行的视频分析中所获得的视频类型，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像；

接收单元，其被构造成从所述视频图像发送装置接收所述视频图像和元数据；以及

显示单元，其被构造成在通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与由所述获取单元获取的视频类型匹配的情况下，将与包含在由所述接收单元接收到的元数据中的对象信息对应的外接矩形叠加在由所述接收单元接收到的视频图像上，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象。

9.根据权利要求8所述的信息处理装置，所述信息处理装置还包括确定单元，所述确定单元被构造成确定通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型是否与由所述获取单元获取的视频类型匹配，

其中，在所述确定单元确定通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与由所述获取单元获取的视频类型匹配的情况下，所述显示单元将包含在由所述接收单元接收到的元数据中的对象信息的外接矩形叠加在由所述接收单元接收到的视频图像上。

10.一种包括视频图像发送装置和信息处理装置的系统，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像，

所述视频图像发送装置包括：

确定单元，其被构造成基于待发送给所述信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；

添加单元，其被构造成在所述确定单元确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及

发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据；并且

所述信息处理装置包括：

接收单元，其被构造成从所述视频图像发送装置接收所述视频图像和所述元数据；以及

显示单元，其被构造成将包含在由所述接收单元接收到的元数据中的对象信息的外接矩形叠加在由所述接收单元接收到的视频图像上。

11.一种包括视频图像发送装置和信息处理装置的系统，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像，

所述视频图像发送装置包括：

添加单元，其被构造成将关于待分发的视频图像的对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；以及

发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据；并且

所述信息处理装置包括：

获取单元，其被构造成从所述视频图像发送装置获取，对通过所述视频图像发送装置待发送给所述信息处理装置的图像所进行的视频分析中所获得的视频类型；

接收单元，其被构造成从所述视频图像发送装置接收所述视频图像和所述元数据；以及

显示单元，其被构造成在通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与由所述获取单元获取的视频类型匹配的情况下，将包含在由所述接收单元接收到的元数据中的对象信息的外接矩形叠加在由所述接收单元接收到的视频图像上。

12.一种要由视频图像发送装置执行的信息处理方法，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像，所述信息处理方法包括：

确定步骤，基于待发送给信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；

添加步骤，在所述确定步骤确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及

发送步骤，向所述信息处理装置发送所述视频图像和所述元数据。

13.一种要由信息处理装置执行的信息处理方法，所述信息处理方法包括：

获取步骤，从视频图像发送装置获取，对通过所述视频图像发送装置待发送给所述信息处理装置的图像所进行的视频分析中所获得的视频类型；

接收步骤，从所述视频图像发送装置接收所述视频图像和元数据；以及

叠加显示步骤，在通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与所获取的视频类型匹配的情况下，将包含在所接收到的元数据中的对象信息的外接矩形叠加显示在由所接收到的视频图像上。

14.一种计算机可读记录介质，其存储程序，该程序使被构造成发送由摄像单元拍摄的视频图像的视频图像发送装置的计算机起如下作用：

确定单元，其被构造成基于待发送给信息处理装置的图像的视频类型，确定是否将对象信息添加到元数据，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象；

添加单元，其被构造成在所述确定单元确定要将所述对象信息添加到所述元数据的情况下，将关于待发送给所述信息处理装置的视频图像的对象信息添加到所述元数据；以及

发送单元，其被构造成向所述信息处理装置发送所述视频图像和所述元数据。

15.一种计算机可读记录介质，其存储程序，该程序使信息处理装置的计算机起如下作用：

获取单元，其被构造成从视频图像发送装置获取，对通过所述视频图像发送装置待发送给所述信息处理装置的图像所进行的视频分析中所获得的视频类型，所述视频图像发送装置被构造成发送由摄像单元拍摄的视频图像；

接收单元，其被构造成从所述视频图像发送装置接收所述视频图像和元数据；以及

显示单元，其被构造成在通过所述视频图像发送装置待发送给所述信息处理装置的图像的视频类型与由所述获取单元获取的视频类型匹配的情况下，将与包含在由所述接收单元接收到的元数据中的对象信息对应的外接矩形叠加在由所述接收单元接收到的视频图像上，所述对象信息指示从由摄像单元拍摄的视频图像中检测到的对象。