CN115334232A - 控制摄像装置的控制装置、控制方法和存储介质 - Google Patents

控制摄像装置的控制装置、控制方法和存储介质 Download PDF

Info

Publication number
CN115334232A
CN115334232A CN202210392988.5A CN202210392988A CN115334232A CN 115334232 A CN115334232 A CN 115334232A CN 202210392988 A CN202210392988 A CN 202210392988A CN 115334232 A CN115334232 A CN 115334232A
Authority
CN
China
Prior art keywords
image
subject
control
exposure
authenticated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210392988.5A
Other languages
English (en)
Inventor
土桥俊之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN115334232A publication Critical patent/CN115334232A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Exposure Control For Cameras (AREA)

Abstract

本发明公开一种控制摄像装置的控制装置、控制方法和存储介质。一种控制摄像装置的控制装置包括确定单元，其被配置为确定通过所述摄像装置拍摄的图像中的被摄体是否是经过认证的被摄体；以及控制单元，其被配置为在所述确定单元确定所述被摄体不是经过认证的被摄体的情况下，通过以所述被摄体为目标来控制图像的曝光。

Description

控制摄像装置的控制装置、控制方法和存储介质
技术领域
本发明涉及一种基于被摄体认证结果控制摄像装置的曝光的摄像控制装置、摄像控制方法和存储介质。
背景技术
日本专利特开第4254873号公报讨论了一种从拍摄的图像检测被摄体的面部区域，然后基于检测的面部的重要度设置摄像条件等的技术。
发明内容
根据本公开的一方面，提供一种控制摄像装置的控制装置，包括：确定单元，其被配置为确定通过所述摄像装置拍摄的图像中的被摄体是否是经过认证的被摄体；以及控制单元，其被配置为在所述确定单元确定所述被摄体不是经过认证的被摄体的情况下，通过以所述被摄体为目标来控制图像的曝光。
根据以下参照附图对示例性实施例的详细描述，本发明的其他特征将变得清楚。
附图说明
图1是示出根据本发明第一示例性实施例的摄像控制系统的配置的框图。
图2是示出根据第一示例性实施例的监视照相机的内部配置的框图。
图3是示出根据第一示例性实施例的客户端装置的内部配置的框图。
图4是示出由图3所示的客户端装置执行的功能的图。
图5是示出根据第一示例性实施例的曝光控制处理的流程图。
图6是示出根据第一示例性实施例的面部认证处理的流程图。
图7A和7B分别是示出面部检测区域和人体检测区域的图。
图8是示出根据第二示例性实施例的曝光控制处理的流程图。
具体实施方式
下文将参照附图详细描述本发明的示例性实施例。以下示例性实施例不限制本发明，并且并非在示例性实施例中描述的特征的所有组合都是本发明的解决手段所必需的。可以基于应用任何示例性实施例的装置的规格和各种条件(例如，使用条件、使用环境)来适当地修改或改变根据示例性实施例的配置。本发明的技术范围由权利要求限定并且不受各个示例性实施例的限制。此外，可以适当地组合示例性实施例的部分。
图4所示的一个或多个功能块(如下所述)可以由例如专用集成电路(ASIC)或可编程逻辑器件(PLA)等硬件实现，或者可以由例如中央处理单元(CPU)或微处理单元(MPU)等可编程的处理器执行软件来实现。此外，图4所示的一个或多个功能块可以通过软件和硬件的组合来实现。因此，在下面的描述中，即使在将不同的功能块描述为操作主体的情况下，功能块也可以由相同的硬件来实现。
将参照图1至图7B描述本发明的第一示例性实施例。
<基本配置>
图1示出了根据本示例性实施例的摄像控制系统100的配置。
摄像控制系统100包括监视照相机101、网络102、客户端装置103、输入装置104和显示装置105。监视照相机101是用于获取运动图像的摄像装置，并且能够拍摄被摄体的图像并执行图像处理。监视照相机101、客户端装置103、输入装置104和显示装置105中的每一个都包括通信功能。监视照相机101和客户端装置103通过网络102可通信地相互连接。客户端装置103可通信地连接到输入装置104和显示装置105。客户端装置103处理各种信息，因此可以称为信息处理装置。客户端装置103还控制监视照相机101的摄像(例如，控制曝光)。因此，客户端装置103可以被称为摄像控制装置。例如，被摄体是一个人。
输入装置104包括鼠标和键盘，并且由客户端装置103的用户操作。
显示装置105包括用于显示从客户端装置103接收到的图像的监视器。另外，显示装置105可以用作诸如触摸面板的用户界面(UI)。在这种情况下，显示装置105还可以用作用于向客户端装置103输入指令、信息和数据的输入装置。
在图1中，客户端装置103、输入装置104和显示装置105被示为独立的装置，但是本示例性实施例不限于这种配置。例如，可以将客户端装置103和显示装置105集成为一个装置，或者可以将输入装置104和显示装置105集成为一个装置。或者，可以将客户端装置103、输入装置104和显示装置105集成为一个装置。在客户端装置103和显示装置105被集成为一个装置的情况下，该集成装置采用例如个人计算机、平板终端或智能手机的形式。
<监视照相机的配置>
图2是示出监视照相机101的内部配置的框图。监视照相机101包括摄像光学系统201、图像传感器202、CPU(或照相机CPU)203、只读存储器(ROM)204、随机存取存储器(RAM)205、摄像系统控制单元206、通信控制单元207、模数(A/D)转换单元208、图像处理单元209、编码器单元210和网络接口(I/F)211。监视照相机101中包括的组件203至211通过系统总线212相互连接。
摄像光学系统201包括变焦透镜、聚焦透镜、模糊校正透镜、光圈和快门，并且是收集关于被摄体的光学信息的光学构件组。摄像光学系统201连接到图像传感器202。
图像传感器202是例如互补金属氧化物半导体(CMOS)图像传感器或电荷耦合器件(CCD)图像传感器的电荷存储型固态图像传感器，其将摄像光学系统201收集的光通量转换成电流值(信号值)。图像传感器202是被配置为通过与滤色器等组合来获取颜色信息的摄像单元。图像传感器202连接到A/D转换单元208。
照相机CPU 203是被配置为综合控制监视照相机101的操作的控制单元。照相机CPU 203读取存储在ROM 204或RAM 205中的命令以执行基于读取结果的处理。
摄像系统控制单元206基于来自照相机CPU 203的指令控制监视照相机101的组件。例如，摄像系统控制单元206对摄像光学系统201执行控制，例如聚焦控制、快门控制和光圈调整。
通信控制单元207进行控制以通过与客户端装置103的通信将从客户端装置103发出到监视照相机101的组件的控制命令(控制信号)发送到照相机CPU 203。
A/D转换单元208将从图像传感器202接收到的电流值转换为数字信号(图像数据)。A/D转换单元208将数字信号发送到图像处理单元209。
图像处理单元209对图像数据(即，从A/D转换单元208接收的数字信号)执行图像处理。图像处理单元209连接到编码器单元210。
编码器单元210执行用于将由图像处理单元209处理的图像数据转换为诸如Motion Jpeg、H264或H265的文件格式的处理。编码器单元210连接到网络I/F 211。
网络I/F 211用于通过网络102与诸如客户端装置103的外部装置进行通信，并受通信控制单元207控制。
网络102是用于连接监视照相机101和客户端装置103的互联网协议(IP)网络。网络102包括符合诸如以太网(注册商标)的通信标准的多个路由器、交换机和电缆。在本示例性实施例中，网络102的通信标准、规模和配置不受特别限制，只要网络102使得监视照相机101和客户端装置103之间能够进行通信即可。例如，网络102可以是因特网、有线局域网(LAN)、无线LAN或广域网(WAN)。
<客户端装置的配置>
图3是示出客户端装置103的内部配置的框图。
客户端装置103包括CPU(或客户端CPU)301、主存储设备302、辅助存储设备303、输入I/F 304、输出I/F 305和网络I/F 306。客户端装置103的各部件通过系统总线307相互可通信地连接。
客户端CPU 301综合控制客户端装置103的操作。客户端CPU 301可以通过网络102综合控制监视照相机101。
主存储设备302用作客户端CPU 301的临时数据存储区域，例如RAM。例如，主存储设备302预先存储用于在客户端装置103进行面部检测或人体检测时使用的图案匹配的图案(与面部特征部分和人体特征部分相对应的图案)。
辅助存储设备303例如是硬盘驱动器(HDD)、ROM或固态驱动器(SSD)，并且存储各种程序和各种设置数据。辅助存储设备303存储用于保持过去的认证历史信息的认证标识(ID)列表。辅助存储设备303还存储将预先登记的面部图像和人物信息相关联的数据库(面部认证数据库)。
当客户端装置103从输入装置104等接收输入(信号)时使用输入I/F 304。
当客户端装置103向显示装置105等输出信息(信号)时使用输出I/F 305。
网络I/F 306用于通过网络102与诸如监视摄像机101的外部装置进行通信。
图4所示的客户端装置103的功能和处理通过客户端CPU 301基于存储在辅助存储设备303中的程序执行处理来实现。将参照图4描述其详细内容。
<客户端装置的功能>
图4示出了客户端装置103执行的功能。换句话说，图4所示的组件(功能块)可以由客户端CPU 301执行，并且这些组件与客户端CPU 301同义。
如图4所示，客户端装置103的客户端CPU 301包括输入信息获取单元(输入信号获取单元)401、通信控制单元402、输入图像获取单元403、照相机信息获取单元404和检测方法设置单元405。客户端CPU 301还包括被摄体检测单元406、曝光确定单元407、显示控制单元408和面部认证处理单元409。客户端装置103可以通过使用与客户端CPU 301不同的硬件(或软件)来执行图4所示的单元401至409的功能。
输入信息获取单元401通过输入装置104接收来自用户的输入。
通信控制单元402进行控制以通过网络102接收从监视照相机101发送的图像(由监视照相机101拍摄的图像)。此外，通信控制单元402进行控制以通过网络102将从客户端装置103发出的控制命令发送到监视照相机101。
输入图像获取单元403通过通信控制单元402获取从监视照相机101接收的图像，作为用于被摄体检测处理的目标图像(被应用被摄体检测处理的图像)。下面将描述检测处理的详细内容。
照相机信息获取单元404通过通信控制单元402获取在监视照相机101拍摄被摄体的图像时要使用的照相机信息(摄像信息)。照相机信息(摄像信息)是拍摄和获取被摄体的图像时要使用的各种信息。照相机信息包括曝光参数，例如光圈值。
检测方法设置单元405从包括面部区域检测(面部检测)和人体区域检测(人体检测)的各种检测方法中设置针对由输入图像获取单元403获取的图像的预定的检测方法(适当的检测方法)。在面部检测中，被摄体检测部406优先检测图像中的面部区域。在人体检测中，被摄体检测单元406优先检测图像中的人体区域。面部区域是包括面部的区域，而人体区域是包括人体的区域。
在本示例性实施例中，检测方法设置单元405设置(选择)面部检测或人体作为检测方法。本示例性实施例不限于这种设置。例如，检测方法设置单元405可以设置(选择)用于检测例如上半身、头部，或诸如眼睛、鼻子或嘴的部分面部区域等的人的部分特征区域的检测方法。此外，在本示例性实施例中，要检测的被摄体是人，但是可以检测与人以外的预定被摄体相关的特定区域。例如，可以检测在客户端装置103中预设的预定被摄体，例如动物的面部或汽车(车辆)。
曝光确定单元407基于从被摄体检测单元406获得的关于被摄体区域的图像信息确定曝光水平，并且通信控制单元402将确定的曝光水平发送到监视照相机101。然后，监视照相机101通过通信控制单元207进行曝光控制。下面将参考图5中的流程图描述与照相机信息获取单元404、检测方法设置单元405、被摄体检测单元406和曝光确定单元407相关的详细处理。
显示控制单元408响应于来自客户端CPU 301的指令将反映了由曝光确定单元407确定的曝光校正的拍摄图像输出到显示装置105。
面部认证处理单元409响应于来自客户端CPU 301的指令，对反映了由曝光确定单元407确定的曝光校正的拍摄图像执行面部认证处理。在面部认证处理中，将拍摄图像与预先登记的面部图像和人物信息相关联的数据库进行核对，并输出面部图像相似度最高且为预定值以上的人物信息。可以使用特征信息匹配或神经网络来计算相似度。在本示例性实施例中，要认证的被摄体是人的面部，但是要认证的被摄体不限于此。
例如，可以对客户端装置103中预设的预定被摄体，例如动物的面部或汽车的车牌进行认证。此外，面部认证处理单元409不一定包括在客户端装置103中。面部认证处理单元409可以包括在通过网络102外部地连接到客户端装置的装置中。
<被摄体检测处理和曝光确定处理>
将参照图5中的流程图描述根据本示例性实施例的曝光控制处理。在图1所示的摄像控制系统100中，假设监视照相机101、客户端装置103、输入装置104和显示装置105被打开，并且在监视照相机101和客户端装置103之间建立连接(通信)。在这种状态下还假设以预定的更新周期重复通过监视照相机101对被摄体的图像拍摄、从监视照相机101到客户端装置103的图像数据的发送以及在显示装置105上的图像显示。还假设响应于从监视照相机101通过网络102向客户端装置103输入被摄体的拍摄图像，客户端CPU 301开始图5中的流程图中的处理。
在步骤S501中，检测方法设置单元405在被摄体检测单元406中设置面部检测，被摄体检测单元406对输入图像进行面部检测处理。
在步骤S502中，检测方法设置单元405在被摄体检测单元406中设置人体检测，被摄体检测单元406对输入图像进行人体检测处理。
客户端装置103的主存储设备302预先存储与面部特征部分对应的图案和与人体特征部分对应的图案。被摄体检测单元406基于图案通过图案匹配来检测面部区域。
通常，在检测面部区域的情况下，可以高精度地检测面部，并且可以清楚地区分被摄体的面部区域和面部区域以外的区域。但是，如果面部的方向、大小、亮度等条件不适合面部检测，则无法准确地检测出面部区域。相反，在检测人体的情况下，可以检测人存在的区域，而不考虑面部的方向、大小、亮度等。在根据本示例性实施例的人体检测中，无需检测全身，可以检测上半身、胸部以上的身体或头部区域(例如，肩部以上的区域)。
图7A示出了面部区域的检测示例。图7B示出了人体区域的检测示例。
图7B中的人体区域是上半身(即，胸部上方的身体)的部分区域。上半身包括面部。人体区域不限于图7B所示的区域。例如，人体区域可以是人的全身或上半身。在图像中的面部由于背光等而变暗的情况下，人体区域可以是头部区域。头部区域是可以识别头部形状的区域，并且包括例如肩部、颈部和面部。图7A和图7B示出了监视摄像机101安装在诸如办公楼或体育场的建筑物的入口或大门处，并且监视摄像机101拍摄从外部进入建筑物的人的图像的情况。建筑物不限于办公楼和体育场，例如可以是停车场。在建筑物是停车场的情况下，被摄体例如是进入停车场的车辆。在车辆为被摄体的情况下，要检测的区域例如是车身区域(包括车身和周围的区域)或车牌区域(包括车辆的车牌和周围的区域)。
在采用图案匹配方法作为被摄体检测方法的情况下，使用统计学习生成的图案(分类器)可以用作用于图案匹配的图案。或者，可以使用图案匹配方法以外的方法检测被摄体。例如，可以通过使用局部区域中的亮度梯度来检测被摄体。即，被摄体检测方法不限于特定的检测方法，可以采用基于机器学习的检测方法、基于距离信息的检测方法等各种方法。
在步骤S503中，面部认证处理单元409确定是否检测到面部或人体。
在检测到面部或人体的情况下(步骤S503中的“是”)，处理进入步骤S504。在没有检测到面部或人体的情况下(步骤S503中的“否”)，处理结束。
在步骤S504中，面部认证处理单元409进行面部认证处理。图6例示了作为子程序的面部认证处理。现在将参考图6来描述面部认证处理。对被摄体检测单元406检测到的所有面部和人体进行面部认证处理。
如图6所示，在步骤S601中，面部认证处理单元409从被摄体检测单元406获取面部图像、面部ID和人体ID。在没有检测到面部的情况下，面部认证处理单元409既不获取面部图像也不获取面部ID。面部ID是根据面部特征生成的值，一个人拥有一个面部ID。这也适用于人体ID。也就是说，人体ID是根据人体的特性生成的值，一个人拥有一个人体ID。
在步骤S602中，面部认证处理单元409确定面部ID或人体ID过去是否未经认证。通过参考保持过去的认证历史信息的认证ID列表来进行确定。换言之，在步骤S602中，面部认证处理单元409确定检测到的被摄体是否先前已经被认证。在面部认证处理单元409确定检测到的被摄体过去未经认证的情况下(步骤S602中的“是”)，处理进入步骤S603。在面部认证处理单元409确定检测到的被摄体过去已经被认证的情况下(步骤S603中的“否”)，处理进入步骤S604。
在步骤S603中，面部认证处理单元409进行面部认证处理。在面部认证处理中，从面部图像中提取特征信息，并输出属性信息作为认证的结果，所述属性信息与在预先登记的特征信息和人名等属性信息相互关联的数据库中与提取的特征信息的相似度最高的特征信息相关联。在相似度未达到预定阈值的情况下，确定认证不成功。此外，在未获取面部图像的情况下，即在未检测到面部的情况下，也确定认证不成功。
在步骤S604中，面部认证处理单元409(通过发送表示面部或人体已认证的信号)向曝光确定单元407通知被摄体检测单元406检测到的面部或人体已经被认证。然后处理结束。
在步骤S605中，面部认证处理单元409确定步骤S603中的面部认证是否成功。在面部认证处理单元409确定面部认证成功的情况下(步骤S605中的“是”)，处理进入步骤S606。在面部认证处理单元409确定面部认证没有成功的情况下(步骤S605中的“否”)，处理结束。
在步骤S606中，面部认证处理单元409将面部ID和与面部对应的人体ID添加到表示面部已经被认证的认证ID列表中。然后处理结束。
以上是与面部认证处理相关的子程序的描述。现在返回图5，将再次描述曝光控制处理。
在步骤S505中，设置要在步骤S506中使用的关注区域。在步骤S504中没有接收到认证通知的被摄体面部(或多个面部)和被摄体人体(或多个身体)中，将至少一个设置为关注区域。在其中存在多个面部或人体并且在对拍摄图像的前一帧的处理中被设置为关注区域的面部或人体存在的情况下，面部或人体被优先设置为关注区域。否则，例如基于检测顺序、距监视照相机101的距离以及图像中的位置根据应用目的确定关注区域。
将以监视摄像机101安装在建筑物的入口附近以执行走查认证(walkthroughauthentication)的情况为例进行描述。在走查认证中，距离监视摄像机101越近的人越快地通过监视摄像机101。因此，在使用距监视照相机101的距离的情况下，期望对距监视照相机101近的人优先进行曝光控制处理。换言之，在对多个被摄体进行曝光控制的情况下，可以基于监视照相机(摄像设备)101和每个被摄体之间的距离来确定对多个被摄体进行曝光控制的顺序。在使用图像中的位置的情况下，如果监视摄像机101被安装为俯视人，则认为位于图像下侧的人更靠近监视摄像机101。因此，期望给这个人更高的优先级。换言之，在对多个被摄体进行曝光控制的情况下，可以基于图像中的每个被摄体的位置来确定对多个被摄体进行曝光控制的顺序。
此外，在已经检测到同一被摄体的面部和人体的情况下，期望优先考虑面部区域。
在步骤S506中，曝光确定单元407计算在步骤S505中设置的关注区域的平均亮度值Iobject。更具体地，关于关注区域的位置的信息和关于关注区域的大小的信息应用于以下表达式(1)。
Figure BDA0003596268460000111
在表达式(1)中，I(x，y)表示在图像中的水平方向(x轴方向)和垂直方向(y轴方向)上的二维坐标位置(x，y)的亮度值。另外，(v，h)表示关注区域的中心坐标，k表示在水平方向上检测到的关注区域的大小，l表示在垂直方向上检测到的关注区域的大小。式(1)的左侧表示关注区域的平均亮度值Iobject。
在步骤S507中，曝光确定单元407基于在步骤S506中计算出的平均亮度值Iobject来确定曝光校正值EVcorrection。首先，曝光确定单元407通过使用表达式(2)计算在步骤S506中计算的关注区域的平均亮度值Iobject与关注区域的目标亮度值Iobject target之间的差ΔDiff。例如，关注区域的目标亮度值Iobject target可以由用户任意设定，也可以被设定为考虑面部认证中的认证精度而使精度提高的值。
Figure BDA0003596268460000121
接下来，曝光确定单元407通过使用表达式(3)来确定曝光校正值EVcorrection。当前曝光值EVcurrent是基于被摄体亮度值(brightness value，BV)根据摄影曝光的加法系统(Additive System of Photographic Exposure，APEX)转换的EV值，并且是基于与曝光控制相关的程序图所设置并被预先存储在客户端装置103中。
Figure BDA0003596268460000122
在表达式(3)中，参数β是在以当前曝光值EVcurrent为中心对曝光不足侧或曝光过度侧校正曝光时影响校正程度(速度)的系数。如果将参数β设置为较大的值，则曝光达到目标值的处理速度(处理时间)更快(更短)。然而，在检测结果中发生错误判断的情况下或者在被摄体检测不稳定的情况下，整个画面的亮度会急剧变化。相反，如果将参数β设置为较小的值，则曝光达到目标值的处理速度(处理时间)较低(较长)，但该处理对于错误检测和摄像条件具有鲁棒性。在差ΔDiff落在设定阈值Th之外的情况下，参数β被设定为针对当前曝光值EVcurrent的曝光校正值。
在步骤S508中，曝光确定单元407通过通信控制单元402与监视照相机101进行通信，并在监视照相机101中设置在步骤S507中计算出的曝光校正值EVcorrection。然后处理结束。
如上所述，在本示例性实施例中，由面部认证处理单元409完成面部认证的面部和人体被确定为不是曝光控制目标，并且对面部认证处理未完成的面部和人体进行曝光控制。因此，即使在图像中存在多个人的情况下，也基于面部认证结果顺序地缩小用于曝光控制的目标人物，从而可以执行用于面部认证的优良(有效)曝光控制。此外，不仅与面部ID，还与人体ID(识别信息)相关联地管理每个面部认证结果。因此，即使在由于曝光或面部方向的改变而不能检测到面部的情况下，也能够避免对完成面部认证的人重复曝光控制。
接下来将参照图8描述本发明的第二示例性实施例。在第一示例性实施例中，在受曝光控制的人未登记在面部认证数据库中的情况下，在某些情况下，直到处于曝光控制下的人通过监视照相机101才对另一个人执行曝光控制。由此，根据监视照相机101的安装条件或用途，对他人的曝光控制被延迟，这会影响面部认证。在本示例性实施例中，确定经过曝光控制的目标人物(被摄体)是否未在数据库中登记。在确定目标人物未在数据库中登记的情况下，中断对目标人物的曝光控制(将不进行基于曝光校正值的曝光控制)，使曝光控制转移到对另一个人的曝光控制。
使用相同的附图标记表示与第一示例性实施例中的组件和处理类似的组件和处理，并不再赘述。
步骤S501至S504和S506至S508中的处理与图3中的处理(在第一示例性实施例中)相同。在步骤S504之后处理进行到步骤S801。
在步骤S801中，曝光确定单元407设置要在步骤S506和步骤S802中使用的关注区域。在步骤S801中，与根据第一示例性实施例的步骤S505不同，未登记人员列表(下文描述)被参考，并且未登记人员列表中存在的具有ID的被摄体被确定为不是关注区域的设置目标。
此外，在已经检测到相同被摄体的面部和人体的情况下，面部区域被优先设置为关注区域。
在步骤S802中，曝光确定单元407确定与在步骤S801中设置(选择)的关注区域相对应的面部ID是否与前一帧的面部ID相同。在面部ID与前一帧的面部ID相同的情况下(步骤S802中的“是”)，处理进入步骤S803。在面部ID与前一帧的面部ID不同的情况下(步骤S802中的“否”)，处理进入步骤S506。在面部ID不存在的情况下，即在面部区域未被设置为关注区域的情况下，处理也进入到步骤S506。
在步骤S803中，曝光确定单元407确定在步骤S508中针对前一帧执行的曝光控制是否已经达到目标值(曝光控制已经完成)。更具体地，基于在步骤S507中曝光校正值EVcorrection是否等于当前曝光值EVcurrent，以及是否已经完成针对摄像光学系统201的光圈和图像传感器202的快门速度和增益的操作中的至少一者来进行判断。在曝光确定单元407确定曝光控制已完成的情况下(步骤S803中的“是”)，处理进入步骤S804。在曝光确定单元407确定曝光控制尚未完成的情况下(步骤S803中的“否”)，处理进入步骤S506。
在步骤S804中，曝光确定单元407确定与在步骤S801中设置的关注区域相对应的面部ID是否已经被连续选择了最新的预定次数以上。预定次数被设置为从完成曝光控制到完成面部认证的间隔。即，在即使完成了曝光控制，但面部认证未完成预定次数以上的情况下(在预定时间内未完成认证的情况下)，人被确定为未在面部认证数据库中登记。在曝光确定单元407确定面部ID已被连续选择预定次数以上的情况下(步骤S804为“是”)，处理进入步骤S805。在曝光确定单元407确定面部ID没有被连续选择预定次数以上的情况下(步骤S804中的“否”)，处理进入步骤S506。
在步骤S805中，曝光确定单元407将与在步骤S801中设置的关注区域相对应的面部ID和与面部相对应的人体ID添加(登记)到未登记人物列表中。未登记人物列表存储在例如辅助存储设备303中。即，辅助存储设备303登记关于在预定时间内不能被认证的被摄体的信息(面部ID和人体ID)。
在步骤S806中，曝光确定单元407确定在拍摄图像中是否存在另一面部或另一人体。在曝光确定单元407确定拍摄图像中存在另一面部或另一人体的情况下(步骤S806为“是”)，处理返回到步骤S801。在曝光确定单元407确定拍摄图像中不存在另一面部或另一人体的情况下(步骤S806中的“否”)，处理结束。
在本示例性实施例中，曝光确定单元407在步骤S804中基于相同的面部ID是否已被选择预定次数以上来确定该人是否未登记。或者，可以使用其他方法进行确定。例如，可以从面部认证处理单元409接收对应的面部ID的面部认证相似度，并且可以基于面部认证相似度的值低的状态是否持续来进行确定。或者，在即使检测到面部方向并且面部基本上朝向正面仍没有完成面部认证的情况下，该人可以被确定为未登记的人。
在人被确定为未登记人的情况下(在被摄体被添加到未登记人列表的情况下)，曝光确定单元407可以将面部图像发送到面部认证处理单元409作为登记图片。这是因为在确定时进行了适合人的面部的曝光控制，并且面部图像适合作为登记图像。此外，当检测到面部方向并且面部基本上指向正面时，可以传输更合适的面部图像。
在上述第一和第二示例性实施例中，监视照相机101被描述为摄像装置的示例，但是本发明的示例性实施例可应用于除了监视照相机之外的任何摄像装置。
其他实施例
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然参照示例性实施例描述了本发明，但是应当理解，本发明并不限于所公开的示例性实施例。应当对权利要求的范围赋予最宽的解释，以使其涵盖所有这些变型例以及等同的结构及功能。

Claims (18)

1.一种控制摄像装置的控制装置，所述控制装置包括：
确定单元，其被配置为确定通过所述摄像装置拍摄的图像中的被摄体是否是经过认证的被摄体；以及
控制单元，其被配置为在所述确定单元确定所述被摄体不是经过认证的被摄体的情况下，通过以所述被摄体为目标来控制图像的曝光。
2.根据权利要求1所述的控制装置，其中，在所述确定单元确定所述被摄体是经过认证的被摄体的情况下，所述控制单元不以所述被摄体为目标来控制所述图像的曝光。
3.根据权利要求1所述的控制装置，
其中，所述确定单元确定所述图像中的多个被摄体中的每个被摄体是否是经过认证的被摄体，以及
其中，所述控制单元通过以所述多个被摄体中被所述确定单元确定为不是经过认证的被摄体的被摄体为目标来控制图像的曝光。
4.根据权利要求1所述的控制装置，其中，在所述确定单元确定所述被摄体不是经过认证的被摄体的情况下，所述控制单元基于所述被摄体的亮度来控制所述图像的曝光。
5.根据权利要求1所述的控制装置，所述控制装置还包括检测单元，其被配置为从由所述摄像装置拍摄的图像中检测所述被摄体。
6.根据权利要求1所述的控制装置，所述控制装置还包括认证单元，其被配置为认证所述被摄体，
其中，所述确定单元确定所述认证单元是否在预定时间内完成对所述被摄体的认证，以及
其中，在所述确定单元确定所述认证单元没有在预定时间内完成对所述被摄体的认证的情况下，所述控制单元不以所述被摄体为目标来控制图像的曝光。
7.根据权利要求6所述的控制装置，所述控制装置还包括登记单元，其被配置为在所述认证单元在所述预定时间内没有完成对所述被摄体的认证的情况下，登记关于所述被摄体的信息，
其中，所述认证单元基于对所述被摄体是否是由所述登记单元登记的被摄体的确定来对所述被摄体进行认证。
8.根据权利要求1所述的控制装置，其中，在所述确定单元确定多个被摄体不是经过认证的被摄体的情况下，所述控制单元基于多个被摄体中的每一个与所述摄像装置之间的距离确定由所述控制单元对所述多个被摄体进行曝光控制的顺序。
9.根据权利要求1所述的控制装置，其中，在所述确定单元确定多个被摄体不是经过认证的被摄体的情况下，所述控制单元基于所述多个被摄体中的每一个在所述图像中的位置确定由所述控制单元对所述多个被摄体进行曝光控制的顺序。
10.根据权利要求1至9中任一项所述的控制装置，
其中，所述被摄体是人，以及
其中，所述控制单元通过以图像中包括至少是人的人体的一部分的区域为目标来控制图像的曝光。
11.根据权利要求10所述的控制装置，
其中，所述控制单元通过以图像中包括人的全身、上半身、胸部上方的身体和头部之一的区域为目标来控制图像的曝光。
12.根据权利要求1至9中任一项所述的控制装置，
其中，所述被摄体是车辆，以及
其中，所述控制单元通过以图像中包括车辆车身的区域或图像中包括车辆车牌的区域为目标来控制图像的曝光。
13.一种用于摄像装置的控制方法，所述控制方法包括：
确定由所述摄像装置拍摄的图像中的被摄体是否为经过认证的被摄体；以及
在确定所述被摄体不是经过认证的被摄体的情况下，通过以所述被摄体为目标来控制图像的曝光。
14.根据权利要求13所述的控制方法，其中，在确定所述被摄体是经过认证的被摄体的情况下，不以所述被摄体为目标来控制图像的曝光。
15.根据权利要求13所述的控制方法，所述控制方法还包括：
确定所述图像中的多个被摄体中的每一个是否为经过认证的被摄体；以及
通过以所述多个被摄体中被确定为不是经过认证的被摄体的被摄体为目标来控制图像的曝光。
16.一种存储用于使计算机执行用于控制摄像装置的方法的程序的非暂时性计算机可读存储介质，所述方法还包括：
确定由所述摄像装置拍摄的图像中的被摄体是否为经过认证的被摄体；以及
在确定所述被摄体不是经过认证的被摄体的情况下，通过以所述被摄体为目标来控制图像的曝光。
17.根据权利要求16所述的存储介质，其中，在确定所述被摄体是经过认证的被摄体的情况下，不以所述被摄体为目标来控制图像的曝光。
18.根据权利要求16所述的存储介质，还包括：
确定图像中的多个被摄体中的每一个是否为经过认证的被摄体；以及
通过以所述多个被摄体中被确定为不是经过认证的被摄体的被摄体为目标来控制图像的曝光。
CN202210392988.5A 2021-05-10 2022-04-14 控制摄像装置的控制装置、控制方法和存储介质 Pending CN115334232A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021-079804 2021-05-10
JP2021079804A JP2022173838A (ja) 2021-05-10 2021-05-10 撮像制御装置および撮像制御方法

Publications (1)

Publication Number Publication Date
CN115334232A true CN115334232A (zh) 2022-11-11

Family

ID=81597891

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210392988.5A Pending CN115334232A (zh) 2021-05-10 2022-04-14 控制摄像装置的控制装置、控制方法和存储介质

Country Status (4)

Country Link
US (1) US20220360701A1 (zh)
EP (1) EP4090007A1 (zh)
JP (1) JP2022173838A (zh)
CN (1) CN115334232A (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4254873B2 (ja) 2007-02-16 2009-04-15 ソニー株式会社 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム
US8441535B2 (en) * 2008-03-05 2013-05-14 Omnivision Technologies, Inc. System and method for independent image sensor parameter control in regions of interest
TWI493478B (zh) * 2012-03-21 2015-07-21 Altek Corp 車牌攝像裝置及其影像曝光調整方法
JP6096161B2 (ja) * 2014-10-15 2017-03-15 ソニー株式会社 情報処理装置および情報処理方法
WO2021061112A1 (en) * 2019-09-25 2021-04-01 Google Llc Gain control for face authentication

Also Published As

Publication number Publication date
US20220360701A1 (en) 2022-11-10
JP2022173838A (ja) 2022-11-22
EP4090007A1 (en) 2022-11-16

Similar Documents

Publication Publication Date Title
JP5704905B2 (ja) 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体
CN111107276B (zh) 信息处理设备及其控制方法、存储介质以及摄像系统
US9258481B2 (en) Object area tracking apparatus, control method, and program of the same
JP2016100696A (ja) 画像処理装置、画像処理方法、及び画像処理システム
US10013632B2 (en) Object tracking apparatus, control method therefor and storage medium
JP2018036784A (ja) システム、情報処理装置、情報処理方法及びプログラム
CN107958202B (zh) 人体检测设备、人体检测设备的控制方法和存储介质
JP2022045567A (ja) 撮像制御装置、撮像制御方法、及びプログラム
EP3883236A1 (en) Information processing apparatus, imaging apparatus, method, and storage medium
CN115334232A (zh) 控制摄像装置的控制装置、控制方法和存储介质
JP7123545B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP2016081095A (ja) 被写体追跡装置、その制御方法、撮像装置、表示装置及びプログラム
JP2018092507A (ja) 画像処理装置、画像処理方法及びプログラム
JP2021022783A (ja) 制御装置、追尾システム、制御方法、及びプログラム
US10943103B2 (en) Human body detection apparatus, human body detection method, information processing apparatus, information processing method, and storage medium
US20230276134A1 (en) Information processing apparatus, imaging apparatus, method, and storage medium
US11711619B2 (en) Controlling exposure based on inverse gamma characteristic
JP2019192155A (ja) 画像処理装置、撮影装置、画像処理方法およびプログラム
EP3965073A2 (en) Apparatus, method, and storage medium
US11843848B2 (en) Control apparatus for controlling exposure and method for controlling the same
JP2021150947A (ja) 情報処理装置、撮像装置、方法、プログラム及び記憶媒体
US20220019822A1 (en) Information processing apparatus, information processing method, and storage medium
JP7130375B2 (ja) 画像処理装置、撮影装置、画像処理方法、およびプログラム
JP7085925B2 (ja) 情報登録装置、情報処理装置、情報登録装置の制御方法、情報処理装置の制御方法、システム、及びプログラム
JP2023063765A (ja) 画像処理装置、画像処理方法、画像処理システム、およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination