CN105900010A - 成像系统、报警生成设备和方法、成像设备和方法以及程序 - Google Patents

成像系统、报警生成设备和方法、成像设备和方法以及程序 Download PDF

Info

Publication number
CN105900010A
CN105900010A CN201580004008.8A CN201580004008A CN105900010A CN 105900010 A CN105900010 A CN 105900010A CN 201580004008 A CN201580004008 A CN 201580004008A CN 105900010 A CN105900010 A CN 105900010A
Authority
CN
China
Prior art keywords
warning
imaging
abnormal
processing unit
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580004008.8A
Other languages
English (en)
Other versions
CN105900010B (zh
Inventor
木下雅也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105900010A publication Critical patent/CN105900010A/zh
Application granted granted Critical
Publication of CN105900010B publication Critical patent/CN105900010B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/18Signals indicating condition of a camera member or suitability of light
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634Warning indications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/673Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/72Combination of two or more compensation controls
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/76Circuitry for compensating brightness variation in the scene by influencing the image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00Adjustment of optical system relative to image or object surface other than for focusing
    • G03B2205/0007Movement of one or more optical elements for control of motion blur
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2217/00Details of cameras or camera bodies; Accessories therefor
    • G03B2217/005Blur detection

Abstract

本技术涉及使得更简单地掌握成像状况的成像系统、报警生成设备和方法、成像设备和方法、及程序。成像设备的摄像机控制用检测处理单元根据拍摄图像,进行用于各种控制的检测处理,图像质量控制处理单元根据检测处理的结果,检测由于各种原因导致的异常的发生。报警判定处理单元根据图像质量控制处理单元的检测结果,生成指示是否发生错误的报警标记,无线传输单元把报警标记传送给报警生成设备。报警生成设备的无线接收单元接收报警标记,报警装置控制处理单元按照报警标记,指令报警。显示处理单元按照报警装置控制处理单元的指示,把报警图标显示在显示单元上。本发明可适用于运动摄像机。

Description

成像系统、报警生成设备和方法、成像设备和方法以及程序
技术领域
本技术涉及成像系统、报警生成设备和方法、成像设备和方法以及程序,更具体地,涉及能够更简单地把握成像状况的成像系统、报警生成设备和方法、成像设备和方法以及程序。
背景技术
近年来,作为数字摄像机之一,出现了耐冲击和防水的称为运动摄像机的摄像机。由于其特征,该摄像机也被称为可穿戴式摄像机。通过支架,该摄像机被安装在用户的身上,以进行成像,以致可在传统例子的摄像机中不能进行成像的角度或情形下进行成像。
为了保持耐冲击性和防水性,相当数量的运动摄像机是在尺寸紧凑,并且运动摄像机被容纳在壳体中的状态下使用的,或者为了在运动摄像机被附着在用户身体或其它物体上的状态下进行成像,在大多数情况下,不安装用于拍摄图像的显示设备。
在摄像机之中,尽管存在其中安装显示设备的运动摄像机,不过,为了维持运动摄像机的尺寸,使用与记录图像质量相比,分辨率、大小和图像质量较低的显示设备。结果,尽管拍摄图像被显示在安装在运动摄像机上的显示设备之上,不过,用户仅仅能够检查哪一侧被成像。
这样,在运动摄像机上不安装显示设备,或者仅仅安装质量不够的显示设备。于是,尽管摄影者能够依据指示灯等,掌握是否在进行记录,不过,摄影者不能检查成像是否是在期望的成像状况,比如视角、曝光度、焦点位置和白平衡下进行的
近年来,提出并商业化了一种利用短距离的无线通信,把拍摄的图像传送给智能电话机等的独立显示设备,并利用该外部显示设备检查视角的方法(例如,参见专利文献1)。
引文列表
专利文献
专利文献1:日本专利申请公开No.2006-325150
发明内容
然而,在使用运动摄像机的情况下,实际上难以在成像期间,利用外部显示设备不断检查状况。
于是,尽管在开始记录之前,有把握在适当的成像状况下开始记录,不过在成像的中间,运动摄像机的方向被极大改变,或者被摄对象的状况发生极大变化,从而,焦点、曝光度、白平稳或手抖动校正不再被自动跟踪。然而,在再次检查拍摄的图像之前,摄影者认识不到这种状况。因而,失去成像的时机,或者摄影者承受压力。
如上所述,可取的是在诸如运动摄像机之类的小型成像设备的成像期间,用户能够更简单地把握成像状况。
考虑到上述问题,本技术允许更简单地把握成像状况。
按照本技术的第一方面的成像系统包括:成像设备;和报警生成设备,其中所述成像设备包括:成像单元,用于成像待拍摄的图像;检测单元,用于监视拍摄图像的成像状况,和检测与成像状况相关的异常;和传输单元,用于把表示异常的检测结果的信息传送给报警生成设备,报警生成设备包括:接收单元,用于接收从传输单元传送的表示异常的检测结果的信息;报警装置控制处理单元,用于根据表示异常的检测结果的信息,指令报警;和报警单元,用于按照报警装置控制处理单元的报警指令,发出报警。
按照本技术的第一方面,在包括成像设备和报警生成设备的成像系统中,利用成像设备成像待拍摄的图像,监视拍摄图像的成像状况,检测与成像状况相关的异常,把表示异常的检测结果的信息传送给报警生成设备。在报警生成设备中,接收表示异常的检测结果的信息,根据表示异常的检测结果的信息,指令报警,并按照报警指令,发出报警。
按照本技术的第二方面的报警生成设备包括:接收单元,用于接收从对待拍摄的图像成像的成像设备传送的表示与拍摄图像的成像状况相关的异常的检测结果的信息;报警装置控制处理单元,用于根据表示异常的检测结果的信息,指令报警;和报警单元,用于按照报警装置控制处理单元的报警指令,发出报警。
报警单元可按照异常的种类,发出不同的报警。
与成像状况相关的异常可以是与曝光控制相关的异常、与白平衡控制相关的异常、与聚焦控制相关的异常、与手抖动校正相关的异常、与成像方向相关的异常、与面部检测相关的异常和与电池相关的异常中的至少一个。
报警单元可通过进行报警显示,发出报警。
报警单元可通过输出音频,发出报警。
报警单元可通过振动,发出报警。
报警单元可通过发光,发出报警。
接收单元还可从成像设备接收拍摄的图像,报警生成设备还可包括显示拍摄的图像的显示单元。
接收单元可无线接收表示异常的检测结果的信息。
按照本技术的第二方面的报警生成方法或程序包括:接收步骤,用于接收从对待拍摄的图像成像的成像设备传送的表示与拍摄图像的成像状况相关的异常的检测结果的信息;报警装置控制处理步骤,用于根据表示异常的检测结果的信息,指令报警;和报警步骤,用于按照报警装置控制处理步骤的报警指令,发出报警。
按照本技术的第二方面,接收从对待拍摄的图像成像的成像设备传送的表示与拍摄图像的成像状况相关的异常的检测结果的信息,根据表示异常的检测结果的信息,指令报警,然后按照报警指令,发出报警。
按照本技术的第三方面的成像设备包括:成像单元,用于成像待拍摄的图像;检测单元,用于监视拍摄图像的成像状况,和检测与成像状况相关的异常;和传输单元,用于把表示异常的检测结果的信息传送给报警生成设备。
按照本技术的第三方面的成像方法或程序包括:成像步骤,用于成像待拍摄的图像;检测步骤,用于监视拍摄图像的成像状况,和检测与成像状况相关的异常;和传输步骤,用于把表示异常的检测结果的信息传送给报警生成设备,所述报警生成设备发出发生异常的报警。
按照本技术的第三方面,成像待拍摄的图像,监视拍摄图像的成像状况,检测与成像状况相关的异常,把表示异常的检测结果的信息传送给发出发生异常的报警的报警生成设备。
按照本技术的第一到第三方面,能够更简单地把握成像状况。
此外,这里说明的效果不一定受限,相反可以获得在本公开中说明的各种效果任意之一。
附图说明
图1是图解说明成像系统的外观的结构例子的示图。
图2是图解说明成像设备和报警生成设备的功能的构成例子的示图。
图3是说明成像系统的处理的概况的示图。
图4是说明异常的发生原因的示图。
图5是说明异常的发生原因的示图。
图6是说明成像处理的流程图。
图7是说明显示处理的流程图。
图8是说明关于由光源条件引起的异常的发生的检测处理的流程图。
图9是说明关于由照明条件引起的异常的发生的检测处理的流程图。
图10是说明关于由成像距离引起的异常的发生的检测处理的流程图。
图11是说明关于由手抖动引起的异常的发生的检测处理的流程图。
图12是说明关于由成像方向引起的异常的发生的检测处理的流程图。
图13是说明关于由面部丢失引起的异常的发生的检测处理的流程图。
图14是说明关于由电池引起的异常的发生的检测处理的流程图。
图15是说明报警判定处理的流程图。
图16是说明报警处理的流程图。
图17是说明报警处理的流程图。
图18是说明报警处理的流程图。
图19是说明报警处理的流程图。
图20是图解说明报警生成设备的功能的结构例子的示图。
图21是说明显示处理的流程图。
图22是说明关于由光源条件引起的异常的发生的检测处理的流程图。
图23是说明关于由照明条件引起的异常的发生的检测处理的流程图。
图24是说明关于由成像距离引起的异常的发生的检测处理的流程图。
图25是说明关于由成像方向引起的异常的发生的检测处理的流程图。
图26是说明关于由面部丢失引起的异常的发生的检测处理的流程图。
图27是说明报警判定处理的流程图。
图28是说明报警处理的流程图。
图29是说明报警处理的流程图。
图30是说明报警处理的流程图。
图31是说明报警处理的流程图。
图32是图解说明报警生成设备的外观的结构例子的示图。
图33是图解说明报警生成设备的外观的结构例子的示图。
图34是图解说明计算机的结构例子的示图。
具体实施方式
下面参考附图,说明本技术适用于的实施例。
<第一实施例>
<成像系统的外观的结构例子>
首先,说明本技术的概况。
本技术通过不断监视成像设备的成像状况,并在成像状况偏离预先定义的指定成像状况的情况下,利用安装在成像设备的主体或者与成像设备分离的物体上的设备发出报警,把成像设备的成像状况的变化,即,成像设备的异常的发生通知作为摄影者的用户。这样,用户能够更简单地把握成像状况,而不用不断地监视拍摄的图像,以致能够减轻用户的压力,和减少成像时机的错失。
本技术可应用于称为运动摄像机的小型数字摄像机,或者能够拍摄图像,并且未配备显示设备,或者只配备质量不够的显示设备的其它所有设备。下面,将说明其中把本技术应用于配置有诸如运动摄像机之类的成像设备,和多功能移动电话机等的报警生成设备的成像系统的例子。
图1是图解说明应用本技术的成像系统的外观的结构例子的示图。
成像系统被配置成包括配置有诸如运动摄像机之类的小型数字摄像机的成像设备11,和配置有多功能移动电话机的报警生成设备12。成像设备11和报警生成设备12被配置成能够通过无线通信,接收和传送图像和各种信息,由成像设备11成像的拍摄图像被显示在报警生成设备12中。
成像设备11可通过支架等,安装在用户的头部或类似部位,成像时,用户把成像设备11穿戴在用户自己的期望部位。
把从被摄对象入射的光引导到成像器(未图示)的光学系统21安装在成像设备11之前,用户通过使光学系统21面向期望的被摄对象,进行成像。
另外,诸如记录按钮(未图示)之类的各种按钮被安装在成像设备11的背面,通过操作所述按钮,用户指令成像或重放。
报警生成设备12配置有具有显示功能的移动电话机,配置有液晶面板等的显示单元31安装在报警生成设备12中。触摸面板(未图示)重叠地安装在显示单元31中。例如,用户观看显示在显示单元31上的图像,或者操作显示在显示单元31上的图标。
另外,在报警生成设备12的侧面,安装在利用摄像机功能成像时,起快门按钮作用的快门按钮32,和诸如用于音量调整的按钮33之类的各种按钮。
在所述成像系统中,在成像时,用户把成像设备11穿戴在头部或类似部位,然后进行成像,成像设备11通过无线通信,把通过成像获得的拍摄图像,或者关于成像状况的信息传送给报警生成设备12。
报警生成设备12通过无线通信,从成像设备11接收拍摄的图像或者各种信息,把拍摄的图像显示在显示单元31上,或者根据从成像设备11接收的信息,向用户发出指示成像状况发生异常的报警。
用户携带报警生成设备12,通过查看显示在报警生成设备12上的拍摄图像,或者如果需要,参照发出的报警,在适当校正成像方向、成像设置等的时候,进行成像工作。
<成像设备和报警生成设备的功能的构成例子>
另外,图2中图解说明在图1中例示的成像设备11和报警生成设备12的功能的构成。此外,在图2中,与图1中的组件对应的组件用相同的附图标记表示,并适当地省略其说明。
图2中图解所示的成像设备11被配置成包括光学系统21、成像器61、数字信号处理大规模集成电路(LSI)62、用户接口63、控制单元64、镜头驱动驱动器集成电路(IC)65、手抖动传感器66、电池67、记录单元68和无线传输单元69。
光学系统21配置有多个镜头,比如变焦镜头、聚焦镜头和移轴镜头,光圈机构、快门机构等,把从被摄对象入射的光收集在成像器61的受光面上。
成像器61配置有例如诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)之类的成像元件。成像器61接收并光电转换从光学系统21入射的光,然后把作为结果获得的拍摄图像,更具体地,拍摄图像的图像数据提供给数字信号处理LSI 62。
数字信号处理LSI 62对从成像器61供给的拍摄图像,应用各种信号处理。数字信号处理LSI 62被配置成包括预处理单元71、同步单元72、YC生成单元73、分辨率变换单元74、编解码器CODEC 75、摄像机控制检测处理单元76和面部检测处理单元77。
预处理单元71对拍摄图像进行钳位处理、缺陷像素校正处理等。同步单元72对拍摄图像进行去马赛克处理,以致对其进行缺陷像素校正处理的拍摄图像的各个像素具有各个R、G和B颜色分量。
YC生成单元73根据去马赛克处理后的拍摄图像,生成亮度信号和色彩信号。分辨率变换单元74对拍摄图像进行分辨率变换。CODEC 75对分辨率变换后的拍摄图像进行编码处理,或者对编码的拍摄图像进行解码处理。
在进行曝光控制、自动白平衡控制或自动聚焦控制时,如果需要,摄像机控制检测处理单元76通过利用拍摄图像,进行检测处理,并把检测处理的结果提供给控制单元64。面部检测处理单元77从拍摄图像中,检测人的面部。
用户接口63配置有各种操作按钮等,比如记录按钮,并把与用户的操作相应的信号提供给控制单元64。
控制单元64控制成像设备11的所有操作。例如,控制单元64控制利用成像器61拍摄的图像的成像。另外,控制单元64根据手抖动传感器66的输出,控制镜头驱动驱动器IC 65以移动光学系统21的移轴镜头,从而进行光学手抖动校正,或者控制镜头驱动驱动器IC 65驱动光学系统21的光圈机构或聚焦镜头。
控制单元64被配置成包括图像质量控制处理单元78和报警判定处理单元79。
图像质量控制处理单元78根据从摄像机控制检测处理单元76供给的检测处理的结果,进行曝光、聚焦和白平衡的控制。另外,图像质量控制处理单元78通过监视检测处理的结果、手抖动传感器66的输出和电池67的剩余电量,检测成像状况的异常。
报警判定处理单元79根据图像质量控制处理单元78对于成像状况的异常的检测结果,判定是否需要报警,并按照判定结果,进行报警的指令。
在控制单元64的控制下,镜头驱动驱动器IC 65移动构成光学系统21的聚焦镜头等,从而进行聚焦操作,或者进行光圈机构驱动或光学手抖动校正。手抖动传感器66配置有例如陀螺传感器,检测成像设备11的移动,以把成像设备的移动提供给控制单元64。
在控制单元64的控制下,电池67向成像设备11的各个组件供电,或者把指示电池的剩余电量的信息提供给控制单元64。记录单元68配置有例如可从成像设备11取下的可拆介质,记录从数字信号处理LSI 62供给的拍摄图像的数据等,或者把记录的数据提供给数字信号处理LSI62。
无线传输单元69通过诸如Wi-Fi(注册商标)之类的无线通信,把各种图像,比如从数字信号处理LSI 62供给的拍摄图像,或者各种信息传送给报警生成设备12。
另外,报警生成设备12被配置成包括无线接收单元91、数字信号处理单元92、控制单元93、显示单元31、振动单元94、扬声器95和发光元件96。
在控制单元93的控制下,无线接收单元91接收从成像设备11传送的拍摄图像或各种信息等,把拍摄图像或各种信息等提供给数字信号处理单元92。
数字信号处理单元92把从无线接收单元91供给的信息等提供给控制单元93,或者按照控制单元93的指令,驱动显示单元31和振动单元94-发光元件96。数字信号处理单元92被配置成包括显示处理单元101、振动驱动处理单元102、扬声器驱动处理单元103和发光元件驱动处理单元104。
显示处理单元101把拍摄图像转换成能够在显示单元31上显示的格式,并把转换后的拍摄图像提供给显示单元31,以便显示。振动驱动处理单元102驱动振动单元94振动。扬声器驱动处理单元103向扬声器95供给音频信号,以再现音频。发光元件驱动处理单元104驱动发光元件96发光。
控制单元93控制报警生成设备12的所有操作。另外,控制单元93被配置成包括报警装置控制处理单元105。报警装置控制处理单元105根据从成像设备11接收的关于报警的信息,指令显示处理单元101-发光元件驱动处理单元104发出报警。
在振动驱动处理单元102的控制下,振动单元94按照预定模式振动,从而振动报警生成设备12。扬声器95根据从扬声器驱动处理单元103供给的音频信号,再现音频。发光元件96配置有例如发光二极管(LED)等,在发光元件驱动处理单元104的控制下,按预定模式发光。
<成像系统的处理的概况>
下面参考图3-5,说明成像系统的处理的概况。
例如,如用图3的箭头Q11所示,当用户操作记录按钮,从而开始运动图像的成像时,成像器61接收并光电转换通过光学系统21入射的光。这样,获得在各个时刻,即各帧的拍摄图像F11-F23。
这里,在拍摄图像F11-F23之中,更靠近图3的前侧的一个拍摄图像是在更后的时刻,即,在更接近当前时刻的时刻拍摄的拍摄图像。于是,在本例中,最初拍摄的拍摄图像是拍摄图像F11,最后拍摄的拍摄图像是拍摄图像F23。
在对构成运动图像的各帧的拍摄图像成像之时,摄像机控制检测处理单元76根据各帧的拍摄图像,进行检测处理。图像质量控制处理单元78根据摄像机控制检测处理单元76的检测处理的结果,进行曝光、聚焦、白平衡等的控制。例如,图像质量控制处理单元78控制镜头驱动驱动器IC 65驱动光学系统21的聚焦镜头和光圈机构。这样,控制聚焦和曝光。
另外,当获得各帧的拍摄图像F11-F23时,顺序对拍摄图像进行显影处理,从而获得作为结果得到的拍摄图像R11-R23,作为成像的运动图像。
成像设备11把获得的拍摄图像提供给记录单元68,以记录拍摄的图像,并且如果需要,那么通过无线通信,把获得的拍摄图像传送给报警生成设备12。报警生成设备12接收从成像设备11传送的拍摄图像,并把拍摄图像显示在显示单元31上,如用箭头Q12所示。
通过查看显示在报警生成设备12的显示单元31上的拍摄图像,用户能够检查拍摄图像的成像状况,比如曝光状态、聚焦状态和被摄对象将被如何成像。在适当地检查按照这种方式显示的拍摄图像的同时,用户进行成像。
在本例中,由于成像设备11无显示图像的功能,因此用户通过观看与成像设备11分离的报警生成设备12的显示单元31,检查拍摄图像的成像状况。此外,如果不是特别需要,那么拍摄图像可不被显示在显示单元31上。
如在图3的左侧所示,假定在紧接于开始成像之后的预定时段中,例如在包括刚好在拍摄图像F21之前的拍摄图像F11-F13的时段中,成像是在适当的曝光度下进行的。不过,之后,如用箭头Q13所示,假定光源条件突然被极大地改变,以致不能进行适当的曝光控制。
在这个例子中,由于将进行成像的空间变得过分明亮,因此尽管图像质量控制处理单元78采用光学系统21的光圈的光圈值、成像器61的增益值和快门速度的任意组合,作为曝光控制,成像状况仍然变成曝光过度。即,成像环境的亮度超过通过利用光圈值、增益值和快门速度,能够把拍摄图像调整成最佳亮度的范围。
于是,在拍摄图像F21之后的拍摄图像F21-F23具有不适当的亮度。于是,通过显影拍摄图像F21-F23而获得的拍摄图像R21-R23曝光过度。
如上所述,由于用户通常在用户穿戴成像设备11的状态下,一边移动一边进行成像,因此用户不会不断注视显示单元31,以检查拍摄的图像。于是,当用户看一下显示单元31时,如果被摄对象正被成像在显示单元31上,那么用户可能不会认识到光源条件的上述变化,即成像状况的异常。
因而,成像设备11的图像质量控制处理单元78根据摄像机控制检测处理单元76的检测处理的结果、手抖动传感器66的检测结果、电池67的剩余电量等,监视诸如成像空间的明暗度之类的成像状况。在成像状况的异常仅仅持续预定时间,比如图3的右侧的时段T11的情况下,成像设备11进行控制,以致发出报警。
更具体地,例如,成像设备11的报警判定处理单元79根据成像状况的监视结果,生成指示报警的必要或不必要的报警标记,无线传输单元69把报警标记传送给报警生成设备12。另外,报警生成设备12的无线接收单元91从成像设备11接收报警标记,报警生成设备12按照接收的报警标记,发出报警。
在本例中,作为利用箭头Q14指示的成像状况的异常,指示发生与曝光相关的异常的报警标记AC11,和表达“曝光偏离”的报警消息被显示在显示单元31上。按照这种方式,通过显示诸如报警图标AC11之类的图像,或者报警消息,发出发生异常的报警,以致用户能够更简单地把握异常的发生,即,当前成像状况。
例如,在周围环境明亮的情况下,如果被摄对象被显示在显示单元31上,当用户仅仅看一下显示单元31时,尽管被摄对象的亮度异常,用户可能也不会认识到该异常。相反,在报警生成设备12中,由于显示诸如报警图标AC11之类的报警指示,因此通过查看报警指示,用户能够容易地认识到异常的发生。
特别地,如果作为报警指示的报警图标AC11被设置成专用于异常的原因(比如光源条件的变化)的图像,即,关于异常的每个原因的图像,那么用户能够容易地把握发生异常的原因是什么。
如在此之前所述,在成像状况发生异常时,发出报警的情况下,作为异常的原因,可以考虑诸如光源条件的上述突然变化,和电池67的剩余电量的减少之类的各种原因。下面,将说明发生异常的原因的例子,即,异常的种类。
首先,如利用图4的左上部的箭头A11所示,光源条件的上述极大变化被视为发生异常的原因之一。此外,在图4中,与图3的各个部分对应的部分用相同的附图标记表示,并适当省略其说明。
在本例中,如利用箭头Q13所示,从拍摄图像F21的成像时刻起,光源条件被极大地改变,在该状态下,不能进行适当的曝光控制。接下来,不能进行适当的曝光控制,即,光源的亮度超过其中拍摄图像能够被调整到最佳曝光的范围的状态仅仅持续预定时间T21。
下面,如上所述的归因于光源条件的极大变化,不能进行适当曝光控制的异常状态也被称为由光源条件引起的异常。由光源条件引起的异常是与曝光控制相关的异常。
另外,例如,如利用图的右上部的箭头A12所示,还考虑其中不能进行最佳的白平衡控制的异常。
即,如利用箭头Q21所示,假定操作记录按钮,开始成像,从而各帧的拍摄图像F41-F43被成像。之后,尽管各帧的拍摄图像F51-F53被成像,不过如箭头Q22所示,假定在拍摄图像F51的成像时刻,照明条件被极大地改变。例如,假定用到现在为止,不存在的光源照射被摄对象,从而照射成像空间的光的色温被极大地改变。
在这个例子中,归因于照明条件的变化,拍摄图像的红(R)、绿(G)和蓝(B)的增益的平衡超过其中拍摄图像上的被摄对象的颜色可被调整,以具有适当白平衡的范围的状态仅仅持续预定时间T21。
于是,在照明条件的极大变化之后拍摄的拍摄图像F51-F53变成白平衡不适当的图像。
下面,归因于照明条件的极大变化,不能进行适当的白平衡控制的异常状态也被称为由照明条件引起的异常。照明条件引起的异常是与白平衡控制相关的异常。
另外,例如,如图4的左下部的箭头A13所示,还考虑其中由于到被摄对象的成像距离过短,不能进行适当的自动聚焦控制的异常。
例如,假定操作记录按钮,开始成像,从而各帧的拍摄图像F71-F73被成像。之后,尽管各帧的拍摄图像F81-F83被成像,不过在对拍摄图像F81成像之时,成像设备11到被摄对象的距离过短,从而被摄对象不能被聚焦。
即,由于构成光学系统21的用于焦点对准的聚焦镜头继续位于所谓的近侧(宽)的终点,从而不能使聚焦透镜进一步向近侧移动,这种状态下,被摄对象不能被聚焦。
在这个例子中,聚焦镜头的目标位置持续超出自动聚焦范围(即,可移动范围)的状态仅仅持续预定时间T21。这是例如当图像质量控制处理单元78按对比度模式进行聚焦控制时,尽管聚焦镜头被移动,但是拍摄图像的目标被摄对象的对比度仍旧不是充分高的状态。
如此,在对拍摄图像F81-F83成像时,由于聚焦镜头的目标位置变成在可移动范围之外的位置,因此拍摄图像变成其中被摄对象模糊的图像。
下面,由于到被摄对象的成像距离过短因此不能进行适当的自动聚焦控制的异常状态被称为由成像距离引起的异常。成像距离引起的异常是与聚焦控制相关的异常。
另外,例如,如图4的右下部的箭头A14所示,还考虑其中由于成像设备11被极大地移动,即,由于某些原因而持续极大地抖动,在手抖动校正中,不能校正由所述抖动引起的被摄对象的抖动的异常。
例如,假定操作记录按钮,开始成像,从而各帧的拍摄图像F101-F103被成像。之后,尽管各帧的拍摄图像F111-F113被成像,不过假定在对拍摄图像F111成像之时,成像设备11被极大移动,从而在这种状态下,在手抖动校正中,不能校正被摄对象的抖动(模糊)。
即,由于构成光学系统21的用于手抖动校正的移轴镜头持续位于可移动范围的终点,从而,移轴镜头不能被进一步移向偏离光轴的中心的一侧,从而在这种状态下,手抖动使拍摄图像上的被摄对象模糊。
在这个例子中,移轴镜头的目标位置持续超过可移动范围的状态仅仅持续预定时间T21。
如此,在对拍摄图像F111-F113成像时,由于用于手抖动校正的移轴镜头的目标位置变成在可移动范围之外的位置,因此拍摄图像变成其中使被摄对象抖动(模糊)的图像。
下面,归因于手抖动过大,不能进行适当的手抖动校正的异常状态被称为由手抖动引起的异常。
另外,如图5的左上部的箭头A21所示,考虑其中由于某些原因,使成像设备11的成像方向极大地偏离,而用户不能认识到所述偏离,从而沿非用户想要的方向继续进行成像的异常。
即,如用箭头Q31所示,假定操作记录按钮,开始成像,从而各帧的拍摄图像F131-F133被成像。之后,尽管各帧的拍摄图像F141-F143被成像,不过如用箭头Q32所示,例如,假定归因于成像设备11受到撞击的原因,在对拍摄图像F141成像之时,成像设备11的方向发生极大偏离。
在这个例子中,归因于成像方向的变化,沿用户不想要的方向进行成像的状态仅仅持续预定时间T21。于是,在成像方向发生极大变化之后成像的拍摄图像F141-F143变成其记录对用户来说毫无意义的图像。
此外,依据场景变化,能够检测成像方向的极大变化。更具体地,例如,在到目前为止,一直稳定的最佳曝光平衡或最佳白平衡被改变之后,所述平衡再次变得稳定的情况可被视为成像方向发生极大变化的情况。
下面,归因于成像方向的极大变化,沿不是最初预期方向的方向进行成像的异常状态被称为由成像方向引起的异常。
另外,如图5的右上部的箭头A22所示,还考虑其中尽管利用面部检测功能,进行了自动聚焦,但是由于作为被摄对象的人移动到视角之外,因此检测不到面部,从而不能进行利用面部检测功能的自动聚焦控制的异常。
即,假定操作记录按钮,开始成像,从而各帧的拍摄图像F161-F163被成像。在这个例子中,从拍摄的图像中检测人的目标面部,围绕面部的区域,显示面部检测范围FA11。
之后,尽管各帧的拍摄图像F171-F173被成像,不过假定由于作为被摄对象的人移动极大,因此在拍摄图像F171的成像时刻,从拍摄图像F171中,检测不到该人的面部。
在这个例子中,从拍摄图像F171-F173中,检测不到迄今一直检测到的人的面部,并且检测不到所述面部的状态仅仅持续预定时间T21。于是,成像设备11处于不存在将被聚焦的被摄对象的状态。
下面,不能从拍摄图像中检测到面部的异常状态被称为由面部丢失引起的异常。
另外,如图5的下侧的箭头A23所示,还考虑其中由于在开始成像之后,电池67的剩余电量减少,因此在这种状态下,不能进行供电,从而不能进行成像的异常。
即,如用箭头Q41所示,假定操作记录按钮,开始成像,从而各帧的拍摄图像F191-F193被成像。之后,尽管各帧的拍摄图像F201-F203被成像,不过假定在拍摄图像F201的成像时刻,电池67的剩余电量变得小于预定量。
在这个例子中,剩余电量不足的状态仅仅持续预定时间T21。于是,用户需要在适当的时候,更换成像设备11的电池67。
下面,电池67的剩余电量不足的异常状态也被称为由电池引起的异常。
成像设备11通过根据摄像机控制检测处理单元76的检测处理的结果,监视成像状况,检测迄今为止说明的各种异常的发生,并按照检测结果,指令报警生成设备12发出报警。即,生成报警标记,并传送给报警生成设备12。
<成像处理的说明>
下面,说明成像设备11和报警生成设备12的具体操作。
首先参考图6的流程图,说明成像设备11的成像处理。
在步骤S11,成像器61对待拍摄的图像成像。
更具体地,成像器61光电转换通过光学系统21,从被摄对象入射的光,把获得的对应于一帧的拍摄图像提供给数字信号处理LSI 62。构成数字信号处理LSI 62的组件,比如预处理单元71和同步单元72对从成像器61供给的拍摄图像,应用各种处理,以进行拍摄图像的显影。
在步骤S12,面部检测处理单元77对通过成像获得的拍摄图像,进行面部检测,以检测人的面部区域。例如,在面部检测中,根据从拍摄图像提取的特征量,检测面部区域。面部检测处理单元77把面部区域的检测结果提供给控制单元64。
在步骤S13,摄像机控制检测处理单元76根据通过成像获得的拍摄图像,对拍摄图像进行成像控制用检测处理。
例如,摄像机控制检测处理单元76把拍摄图像分成M×N个区域,把各个分割后的区域设定为分割区域,然后对于每个分割区域,生成该分割区域中的各个像素的亮度信号。例如,可利用YC生成单元73,生成所述亮度信号。
另外,摄像机控制检测处理单元76对分割区域中的每个像素的亮度信号,应用利用高通滤波器等的滤波处理,以提取高频带分量,并得到获得的高频带分量的绝对值。另外,摄像机控制检测处理单元76对关于分割区域中的每个像素获得的高频带分量的绝对值,进行高频带分量噪声消除处理和限幅器处理,之后,通过对分割区域中的各个像素的高频带分量的绝对值积分,计算分割区域的聚焦评估值。即,分割区域中的各个像素的高频带分量的绝对值之和成为分割区域的聚焦评估值。
在拍摄的图像中,由于边缘分量主要出现在聚焦区域,即,聚焦度较高的区域,因此该区域聚焦越好,聚焦评估值越高,即,高频带分量的积分值越大。
摄像机控制检测处理单元76把获得的每个分割区域的聚焦评估值,作为聚焦控制用检测处理的结果提供给控制单元64。
另外,摄像机控制检测处理单元76对于每个分割区域,计算亮度值的积分值,即,分割区域中的各个像素的亮度值之和,并把该积分值作为曝光控制用检测处理的结果,提供给控制单元64。
另外,摄像机控制检测处理单元76对于每个分割区域,计算像素值的积分值,即,就各个颜色R、G和B来说,分割区域中的各个颜色的像素的像素值之和,并把积分值作为白平衡控制用检测处理的结果,提供给控制单元64。在该检测处理中,对于各个分割区域,可以获得R分量的积分值、G分量的积分值和B分量的积分值。
另外,手抖动传感器66利用该检测处理,检测成像设备11的移动,并把检测的结果提供给控制单元64。
在步骤S14,图像质量控制处理单元78根据在步骤S13中进行的检测处理的结果,进行图像质量控制处理。
更具体地,图像质量控制处理单元78根据从摄像机控制检测处理单元76供给的白平衡控制用检测处理的结果,即,每个分割区域的各个颜色分量的积分值,和从面部检测处理单元77供给的面部检测处理的结果,计算白平衡控制的控制指令值。
例如,图像质量控制处理单元78获得各个颜色分量的增益值,以致R分量的积分值、G分量的积分值和B分量的积分值与从拍摄图像检测的整个面部区域之比相同,并把增益值作为控制指令值,提供给数字信号处理LSI 62。数字信号处理LSI 62通过把拍摄图像的各个颜色分量的像素乘以作为控制指令值从图像质量控制处理单元78供给的各个颜色分量的增益值,进行拍摄图像的白平衡调整。
另外,图像质量控制处理单元78根据从手抖动传感器66供给的移动检测的结果,计算作为手抖动校正的控制指令值的在移动光学系统21的移轴镜头时的镜头移动量,以致除去成像设备11的移动。图像质量控制处理单元78根据计算的手抖动校正的控制指令值,控制镜头驱动驱动器IC 65,通过移动光学系统21的移轴镜头,进行光学手抖动校正。
另外,图像质量控制处理单元78根据从摄像机控制检测处理单元76供给的曝光控制用检测处理的结果,即,各个分割区域的亮度值的积分值,和从面部检测处理单元77供给的面部检测处理的结果,计算曝光控制的控制指令值。
例如,图像质量控制处理单元78计算光学系统21的光圈的光圈值、快门速度和成像器61的增益值(ISO感光度),作为用于曝光控制的光圈、快门和增益的控制指令值。确定光圈值、快门速度和增益值,以致例如拍摄图像中的面部区域具有最佳的明暗度。
图像质量控制处理单元78根据光圈的控制指令值,控制镜头驱动驱动器IC 65,以调整光学系统21的光圈,并根据增益的控制指令值,控制成像器61,以允许按预定的ISO感光度,进行成像。
另外,图像质量控制处理单元78根据快门的控制指令值,控制镜头驱动驱动器IC 65,从而进行快门控制,以致按利用控制指令值确定的快门速度,操作安装在光学系统21中的快门。于是,在作为下一处理进行的步骤S11的处理中,按利用控制指令值确定的快门速度,进行成像。
另外,图像质量控制处理单元78根据从摄像机控制检测处理单元76供给的聚焦控制用检测处理的结果,即,每个分割区域的聚焦评估值,和从面部检测处理单元77供给的面部检测处理的结果,计算以致使聚焦镜头聚焦在预定对象上的光学系统21的聚焦镜头的位置,作为聚焦的控制指令值。
例如,当聚焦镜头被移动时,计算诸如面部区域之类的预定区域的聚焦评估值变得最高的聚焦镜头的位置,作为聚焦的控制指令值。
在步骤S15,图像质量控制处理单元78根据计算的聚焦用控制指令值,控制镜头驱动驱动器IC 65,并通过移动光学系统21的聚焦镜头,进行聚焦操作。
在步骤S16,数字信号处理LSI 62把对其进行了白平衡调整的拍摄图像提供给记录单元68,使拍摄图像可被记录。
另外,数字信号处理LSI 62把对其进行了白平衡调整,并利用分辨率变换单元74的分辨率变换适当缩减的拍摄图像提供给无线传输单元69。
在步骤S17,无线传输单元69把从数字信号处理LSI 62供给的拍摄图像无线传送给报警生成设备12。
在步骤S18,控制单元64判定处理是否结束。例如,在用户操作用户接口63,指令记录停止的情况下,判定处理结束。
当在步骤S18,判定处理未结束时,处理返回步骤S11,重复上述各个处理。
相反,当在步骤S18,判定处理结束时,结束成像处理。
按照上述方式,成像设备11记录通过成像获得的拍摄图像,并把拍摄图像传送给报警生成设备12。
<显示处理的说明>
如果拍摄图像按照这种方式,被传送给报警生成设备12,那么报警生成设备12进行接收和显示拍摄图像的显示处理。下面参考图7的流程图,说明报警生成设备12的显示处理。
在步骤S41,无线接收单元91接收从成像设备11的无线传输单元69无线传送的拍摄图像,把拍摄图像提供给数字信号处理单元92。即,接收与作为运动图像的拍摄图像的一帧对应的图像。
在步骤S42,数字信号处理单元92的显示处理单元101把从无线接收单元91供给的拍摄图像提供给显示单元31,从而使拍摄图像可被显示。
这样,通过查看显示在显示单元31上的拍摄图像,用户能够检查拍摄图像的成像状况。
在步骤S43,控制单元93判定处理是否结束。例如,在未从成像设备11传送一帧新的拍摄图像的情况下,判定处理结束。
当在步骤S43,判定处理未结束时,处理返回步骤S41,然后重复上述处理。
相反,当在步骤S43,判定处理结束时,显示处理终止。
按照上述方式,报警生成设备12接收并显示拍摄图像。于是,通过查看显示在与成像设备11分离的报警生成设备12上的拍摄图像,用户能够检查视角等。
<由光源条件引起的异常的发生的检测处理的说明>
另外,如果开始拍摄图像的成像,在进行参考图6说明的成像处理的时候,成像设备11同时进行检测与成像状况相关的异常的发生的处理。下面参考图8-14,详细说明对于每种原因,即,对于每种异常,检测异常的发生的处理。
首先参考图8的流程图,说明成像设备11进行的对于由光源条件引起的异常的发生的检测处理。
在步骤S71,图像质量控制处理单元78从摄像机控制检测处理单元76,获得在图6的步骤S13中进行的检测处理的结果。更具体地,获得作为曝光控制用检测处理的结果计算的每个分割区域的亮度值的积分值。
在步骤S72,图像质量控制处理单元78根据获得的检测处理的结果,计算整个拍摄图像的亮度值的积分值。即,图像质量控制处理单元78获得各个分割区域的亮度值的积分值之和,作为整个拍摄图像的亮度值的积分值。下面,整个拍摄图像的亮度值的积分值也被称为总亮度积分值。
此外在这里,尽管说明其中通过把整个拍摄图像设定为处理对象,获得总亮度积分值的例子,不过例如在利用面部检测,检测面部的情况下,可以计算面部区域的亮度值的积分值,用作总亮度积分值。另外,可通过对面部区域应用加权因子,计算总亮度积分值。
在步骤S73,图像质量控制处理单元78判定整个拍摄图像的亮度值的积分值(即,总亮度积分值)是否为预定阈值或更大。
这里,相对于与总亮度积分值比较的阈值,如果总亮度积分值为所述阈值或更大,那么甚至光学系统21的光圈的光圈值、快门速度和成像器61的增益值中的任意值也成为不能用其获得具有适当明暗度的拍摄图像的值。即,阈值变成表示曝光过度的值。
于是,在总亮度积分值为阈值或更大的情况下,不能获得曝光适当的拍摄图像,在这种状态下,检测到由光源条件引起的异常。
当在步骤S73,判定总亮度积分值为阈值或更大时,在步骤S74,图像质量控制处理单元78把预先保存的曝光异常计数器加1。
这里,曝光异常计数器表示总亮度积分值为阈值或更大的连续判定的次数,即,由光源条件引起的异常的连续检测的时间(帧数)。
另外,图像质量控制处理单元78还保存当曝光异常计数器为预定值或更大时,设定(开启)的曝光异常标记。在图像质量控制处理单元78中,当连续预定次数或更多次地不断判定总亮度积分值为阈值或更大时,即,当连续预定帧数或更多帧地不断检测到由光源条件引起的异常时,判定发生由光源条件引起的异常,从而设定曝光异常标记。
于是,曝光异常标记被设定(开启)的情况表示发生由光源条件引起的异常;曝光异常标记被重置(关闭)的情况表示未发生由光源条件引起的异常。
如果在步骤S74,曝光异常计数器被递增,那么之后处理进入步骤S77。
另一方面,当在步骤S73,判定总亮度积分值不是阈值或更大时,在步骤S75,图像质量控制处理单元78重置曝光异常计数器。
在步骤S76,图像质量控制处理单元78重置(关闭)曝光异常标记。
即,在总亮度积分值小于阈值的情况下,由于可进行适当的曝光控制,未发生由光源条件引起的异常,因此曝光异常计数器被重置为0,曝光异常标记也被重置。这样,如果曝光异常标记被重置,那么处理进入步骤S77。
如果在步骤S74,曝光异常计数器被递增,或者如果在步骤S76,曝光异常标记被重置,那么在步骤S77,图像质量控制处理单元78判定曝光异常计数器是否为预定值或更大。
当在步骤S77,判定曝光异常计数器为预定值或更大时,在步骤S78,图像质量控制处理单元78设定(开启)曝光异常标记。
即,当判定曝光异常计数器为预定值或更大时,由于不能进行适当的曝光控制的状态持续维持一段时间或更长,因此判定发生由光源条件引起的异常,从而设定曝光异常标记。如果曝光异常标记被设定,那么之后处理进入步骤S79。
另外,当在步骤S77,判定曝光异常计数器不是预定值或更大时,判定未发生由光源条件引起的异常,处理进入步骤S79。
如果在步骤S78,设定了曝光异常标记,或者如果在步骤S77,判定曝光异常计数器不是预定值或更大,那么在步骤S79,图像质量控制处理单元78判定处理是否结束。
例如,在参考图6说明的成像处理结束的情况下,即,在成像结束的情况下,判定所述处理结束。
当在步骤S79,判定所述处理未结束时,处理返回步骤S71,重复上述各个处理。
相反,当在步骤S79,判定处理结束时,结束对于由光源条件引起的异常的发生的检测处理。
按照上述方式,成像设备11根据亮度的检测结果,检测由光源条件引起的异常的发生。这样,通过检测由光源条件引起的异常的发生,如果需要,那么可向用户发出报警。于是,用户能够更简单地把握成像状况,例如,由光源条件引起的异常的发生。
此外,这里尽管说明了其中把总亮度积分值用于判定是否能够进行适当曝光控制的例子,不过,可以使用关于拍摄图像的亮度的任何信息。
例如,一定数目的最近帧的总亮度积分值的平均值可被配置成与阈值比较。另外,根据每个分割区域的亮度值的积分值,可计算光圈值、增益值和快门速度的目标值,根据计算的值,可以检测由光源条件引起的异常。
<由照明条件引起的异常的发生的检测处理的说明>
下面参考图9的流程图,说明成像设备11进行的对于由照明条件引起的异常的发生的检测处理。
在步骤S111,图像质量控制处理单元78从摄像机控制检测处理单元76,获得在图6的步骤S13中进行的检测处理的结果。更具体地,获得作为白平衡控制用检测处理的结果而计算的对于每个分割区域得到的各个颜色分量R、G和B的积分值。
在步骤S112,图像质量控制处理单元78根据获得的检测处理的结果,计算整个拍摄图像的各个颜色分量的积分值的比率。
即,图像质量控制处理单元78通过获得各个分割区域的R分量的积分值之和,获得整个拍摄图像的R分量的积分值。类似地,图像质量控制处理单元78获得各个分割区域的G分量的积分值之和,作为整个拍摄图像的G分量的积分值,和获得各个分割区域的B分量的积分值之和,作为整个拍摄图像的B分量的积分值。
之后,图像质量控制处理单元78选择R、G和B颜色分量中的任意两个颜色分量,并计算这两个颜色分量的整个拍摄图像的积分值的比率。例如,获得整个拍摄图像的R分量的积分值与整个拍摄图像的G分量的积分值的比率。这种情况下,例如,较小的积分值成为分母地获得所述比率。
图像质量控制处理单元78通过组合颜色分量,计算整个拍摄图像的颜色分量的积分值的比率。
此外,这里尽管说明了其中整个拍摄图像被定义为处理对象,并计算各个颜色分量的积分值的比率的例子,不过在利用面部检测,检测面部的情况下,面部区域可被定义为处理对象,可对于面部区域,计算各个颜色分量的积分值的比率。另外,可通过对面部区域应用加权因子,计算整个拍摄图像的各个颜色分量的积分值。
在步骤S113,图像质量控制处理单元78计算整个拍摄图像的颜色分量的积分值的比率与1之间的差分绝对值。即,对于在步骤S112中计算的积分值的每个比率,计算1与该积分值之间的差分的绝对值。
在步骤S114,图像质量控制处理单元78判定在步骤S113计算的差分绝对值是否是阈值或更大。
例如,就通过颜色分量的组合而获得的多个差分绝对值而论,当甚至存在为阈值或更大的一个差分绝对值时,在步骤S114,也判定差分绝对值为阈值或更大。
这里,相对于与差分绝对值比较的阈值,如果差分绝对值是阈值或更大,那么即使通过把增益值乘以拍摄图像的各个颜色分量的像素值,调整白平衡,也不能获得具有适当白平衡的拍摄图像。
于是,在差分绝对值为阈值或更大的情况下,不能获得具有适当白平衡的拍摄图像,从而检测到由照明条件引起的异常。
当在步骤S114,判定差分绝对值为阈值或更大时,在步骤S115,图像质量控制处理单元78把预先保存的白平衡异常计数器加1。
这里,白平衡异常计数器类似于曝光异常计数器,表示差分绝对值为阈值或更大的连续判定的次数,即,由照明条件引起的异常的连续检测的时间(帧数)。
此外,图像质量控制处理单元78还保存当白平衡异常计数器为预定值或更大时,设定(开启)的白平衡异常标记。白平衡异常标记被设定(开启)的情况表示发生由照明条件引起的异常,白平衡异常标记被重置(关闭)的情况表示未发生由照明条件引起的异常。
如果在步骤S115中,白平衡异常计数器被递增,那么之后处理进入步骤S118。
另一方面,当在步骤S114,判定差分绝对值不是阈值或更大时,在步骤S116,图像质量控制处理单元78重置白平衡异常计数器。
在步骤S117,图像质量控制处理单元78重置(关闭)白平衡异常标记。
即,在差分绝对值小于阈值的情况下,由于可进行适当的白平衡控制,未发生由照明条件引起的异常,因此白平衡异常计数器被重置为0,白平衡异常标记也被重置。这样,如果白平衡异常标记被重置,那么处理进入步骤S118。
如果在步骤S115,白平衡异常计数器被递增,或者如果在步骤S117,白平衡异常标记被重置,那么在步骤S118,图像质量控制处理单元78判定白平衡异常计数器是否为预定值或更大。
当在步骤S118,判定白平衡异常计数器为预定值或更大时,在步骤S119,图像质量控制处理单元78设定(开启)白平衡异常标记。
这种情况下,由于不能进行适当的白平衡控制的状态持续维持一段时间或更长,因此判定发生由照明条件引起的异常,从而设定白平衡异常标记。如果白平衡异常标记被设定,那么之后处理进入步骤S120。
另外,当在步骤S118,判定白平衡异常计数器不是预定值或更大时,判定未发生由照明条件引起的异常,处理进入步骤S120。
如果在步骤S119,设定了白平衡异常标记,或者如果在步骤S118,判定白平衡异常计数器不是预定值或更大,那么在步骤S120,图像质量控制处理单元78判定处理是否结束。
例如,在参考图6说明的成像处理结束的情况下,即,在成像结束的情况下,判定所述处理结束。
当在步骤S120,判定所述处理未结束时,处理返回步骤S111,重复上述各个处理。
相反,当在步骤S120,判定处理结束时,结束对于由照明条件引起的异常的发生的检测处理。
按照上述方式,成像设备11根据各个颜色分量的检测结果,检测由照明条件引起的异常的发生。这样,通过检测由照明条件引起的异常的发生,如果需要,那么可向用户发出报警。于是,用户能够更简单地把握成像状况,例如,由照明条件引起的异常的发生。
此外,这里尽管说明了其中把颜色分量的积分值的比率的差分绝对值用于判定是否能够进行适当白平衡控制的例子,不过,可以使用关于拍摄图像的各个颜色分量的任何信息。
例如,一定数目的最近帧的颜色分量的积分值的比率的平均值与1之间的差分绝对值可被配置成与阈值比较。另外,由照明条件引起的异常可被配置成根据用于白平衡控制的各个颜色分量的增益值来检测。
<由成像距离引起的异常的发生的检测处理的说明>
下面参考图10的流程图,说明成像设备11进行的对于由成像距离引起的异常的发生的检测处理。
在步骤S151,图像质量控制处理单元78从摄像机控制检测处理单元76,获得在图6的步骤S13中进行的检测处理的结果。更具体地,获得作为聚焦控制用检测处理的结果计算的每个分割区域的聚焦评估值。
在步骤S152,图像质量控制处理单元78根据获得的检测处理的结果,计算光学系统21的聚焦镜头的位置的控制目标值,和聚焦评估值的峰值。
即,图像质量控制处理单元78根据当聚焦镜头位于各个位置时获得的诸如面部区域之类的预定区域的聚焦评估值,计算指示聚焦镜头的移动目的地的位置的控制目标值,以致使聚焦镜头沿增大聚焦评估值的方向移动。另外,图像质量控制处理单元78获得当聚焦镜头位于各个位置时获得的诸如面部区域之类的预定区域的聚焦评估值的最大值,作为聚焦评估值的峰值。
在步骤S153,图像质量控制处理单元78根据聚焦镜头的控制目标值,定义控制指令值。
例如,如果聚焦镜头被移动到控制目标值指示的位置,那么聚焦评估值被增大,以致能够聚焦拍摄图像上的关注的被摄对象。然而,在一些情况下,就控制目标值指示的位置而论,聚焦镜头可能位于可移动范围之外。
这种情况下,实际上,由于聚焦镜头不能被允许移动到控制目标值指示的位置,因此对控制目标值进行限制器处理,以致移动量限于控制指令值。于是,在进行限制器处理的情况下,如果根据控制指令值,移动聚焦镜头,那么聚焦镜头位于可移动范围的尽头。
此外,计算指示聚焦镜头的移动目的地的位置的控制指令值的处理是和图6的步骤S14中的图像质量控制处理相同的处理。即,计算该控制指令值的处理的执行可以是图像质量控制处理的执行,或者可以是步骤S152和S153的处理的执行。
在步骤S154,图像质量控制处理单元78判定聚焦评估值的峰值是否是阈值或更小。
例如,在聚焦评估值的峰值为阈值或更小的情况下,即使聚焦镜头被移动到任意位置,在该状态下,也不能获得具有足够对比度的拍摄图像,即,被摄对象不能被充分聚焦。
这样,当不能进行适当的聚焦控制时,在许多情况下,聚焦镜头位于近侧的尽头。于是,聚焦评估值的峰值为阈值或更小的状态可能是不能进行适当的自动聚焦控制的状态,因为到被摄对象的成像距离太近。此外,在对控制目标值进行限制器处理的情况下,可以判定在该状态下,不能进行适当的聚焦控制,即,可以判定检测到由成像距离引起的异常。
当在步骤S154,判定峰值为阈值或更小时,在步骤S155,图像质量控制处理单元78把预先保存的聚焦异常计数器加1。
这里,聚焦异常计数器类似于曝光异常计数器,表示峰值为阈值或更小的连续判定的次数,即,由成像距离引起的异常的连续检测的时间(帧数)。
另外,图像质量控制处理单元78还保存当聚焦异常计数器为预定值或更大时,设定(开启)的聚焦异常标记。聚焦异常标记被设定(开启)的情况表示发生由成像距离引起的异常,聚焦异常标记被重置(关闭)的情况表示未发生由成像距离引起的异常。
如果在步骤S155,聚焦异常计数器被递增,那么处理进入步骤S158。
另一方面,当在步骤S154,判定峰值不是阈值或更小时,在步骤S156,图像质量控制处理单元78重置聚焦异常计数器。
在步骤S157,图像质量控制处理单元78重置(关闭)聚焦异常标记。
即,在峰值大于阈值的情况下,由于可进行适当的聚焦控制,未发生由成像距离引起的异常,因此聚焦异常计数器被重置为0,聚焦异常标记也被重置。这样,如果聚焦异常标记被重置,那么处理进入步骤S158。
如果在步骤S155,聚焦异常计数器被递增,或者如果在步骤S157,聚焦异常标记被重置,那么在步骤S158,图像质量控制处理单元78判定聚焦异常计数器是否为预定值或更大。
当在步骤S158,判定聚焦异常计数器为预定值或更大时,在步骤S159,图像质量控制处理单元78设定(开启)聚焦异常标记。
这种情况下,由于不能进行适当的聚焦控制的状态持续维持一段时间或更长,因此判定发生由成像距离引起的异常,从而设定聚焦异常标记。如果聚焦异常标记被设定,那么之后处理进入步骤S160。
另外,当在步骤S158,判定聚焦异常计数器不是预定值或更大时,判定未发生由成像距离引起的异常,处理进入步骤S160。
如果在步骤S159,设定了聚焦异常标记,或者如果在步骤S158,判定聚焦异常计数器不是预定值或更大,那么在步骤S160,图像质量控制处理单元78判定处理是否结束。
例如,在参考图6说明的成像处理结束的情况下,即,在成像结束的情况下,判定所述处理结束。
当在步骤S160,判定所述处理未结束时,处理返回步骤S151,重复上述各个处理。
相反,当在步骤S160,判定处理结束时,结束对于由成像距离引起的异常的发生的检测处理。
按照上述方式,成像设备11根据聚焦控制的检测结果,检测由成像距离引起的异常的发生。这样,通过检测由成像距离引起的异常的发生,如果需要,那么可向用户发出报警。于是,用户能够更简单地把握成像状况。
<由手抖动引起的异常的发生的检测处理的说明>
下面参考图11的流程图,说明成像设备11进行的对于由手抖动引起的异常的发生的检测处理。
在步骤S191,图像质量控制处理单元78从手抖动传感器66,获得在图6的步骤S13中进行的检测处理的结果。更具体地,获得通过手抖动校正用检测处理得到的成像设备11的移动的检测结果。
在步骤S192,图像质量控制处理单元78根据获得的检测处理的结果,计算手抖动校正的控制目标值。
即,图像质量控制处理单元78计算当移动光学系统21的移轴镜头,以致成像设备11的移动被消除时的镜头移动量,作为手抖动校正的控制目标值。
在步骤S193,图像质量控制处理单元78根据获得的手抖动校正的控制目标值,定义控制指令值。
更具体地,如果光学系统21的移轴镜头被移动在手抖动校正的控制目标值中指示的移动量,那么由成像设备11的抖动引起的拍摄图像上的被摄对象的模糊能够被消除。然而,如果允许按照控制目标值移动移轴镜头,那么在一些情况下,移轴镜头可能位于可移动范围之外。
这种情况下,实际上,由于移轴镜头不能被允许移动控制目标值指示的移动量,因此对控制目标值进行限制器处理,以致移动量限于控制指令值。于是,在进行限制器处理的情况下,如果根据控制指令值,移动移轴镜头,那么移轴镜头位于移轴镜头的可移动范围的尽头。
这里,计算手抖动校正的控制指令值的处理是和图6的步骤S14中的图像质量控制处理相同的处理。即,计算手抖动校正的控制指令值的处理的执行可以是图像质量控制处理的执行,或者可以是步骤S192和S193的处理的执行。
在步骤S194,图像质量控制处理单元78判定在步骤S193,确定控制指令值的时候,是否进行限制器处理。
例如,在对控制目标值进行限制器处理,以定义控制指令值的情况下,光学系统21的移轴镜头位于可移动范围的尽头,这种状态下,不能进行适当的手抖动校正。
当在步骤S194,判定进行限制器处理的情况下,在步骤S195,图像质量控制处理单元78把预先保存的手抖动异常计数器加1。
这里,手抖动异常计数器类似于曝光异常计数器,表示连续的限制器处理的次数,即,由手抖动引起的异常的连续检测的时间(帧数)。
另外,图像质量控制处理单元78还保存当手抖动异常计数器为预定值或更大时,设定(开启)的手抖动异常标记。手抖动异常标记被设定(开启)的情况表示发生由手抖动引起的异常,手抖动异常标记被重置(关闭)的情况表示未发生由手抖动引起的异常。
如果在步骤S195,手抖动异常计数器被递增,那么之后处理进入步骤S198。
另一方面,当在步骤S194,判定不进行限制器处理时,在步骤S196,图像质量控制处理单元78重置手抖动异常计数器。
在步骤S197,图像质量控制处理单元78重置(关闭)手抖动异常标记。
即,在不进行限制器处理的情况下,由于可进行适当的手抖动校正,未发生由手抖动引起的异常,因此手抖动异常计数器被重置为0,手抖动异常标记也被重置。这样,如果手抖动异常标记被重置,那么处理进入步骤S198。
如果在步骤S195,手抖动异常计数器被递增,或者如果在步骤S197,手抖动异常标记被重置,那么在步骤S198,图像质量控制处理单元78判定手抖动异常计数器是否为预定值或更大。
当在步骤S198,判定手抖动异常计数器为预定值或更大时,在步骤S199,图像质量控制处理单元78设定(开启)手抖动异常标记。
这种情况下,由于不能进行适当的手抖动校正的状态持续维持一段时间或更长,因此判定发生由手抖动引起的异常,从而设定手抖动异常标记。如果手抖动异常标记被设定,那么之后处理进入步骤S200。
另外,当在步骤S198,判定手抖动异常计数器不是预定值或更大时,判定未发生由手抖动引起的异常,处理进入步骤S200。
如果在步骤S199,设定了手抖动异常标记,或者如果在步骤S198,判定手抖动异常计数器不是预定值或更大,那么在步骤S200,图像质量控制处理单元78判定处理是否结束。
例如,在参考图6说明的成像处理结束的情况下,即,在成像结束的情况下,判定所述处理结束。
当在步骤S200,判定所述处理未结束时,处理返回步骤S191,重复上述各个处理。
相反,当在步骤S200,判定处理结束时,结束对于由手抖动引起的异常的发生的检测处理。
按照上述方式,成像设备11根据手抖动传感器66的检测结果,检测由手抖动引起的异常的发生。这样,通过检测由手抖动引起的异常的发生,如果需要,那么可向用户发出报警。于是,用户能够更简单地把握成像状况。
<由成像方向引起的异常的发生的检测处理的说明>
下面参考图12的流程图,说明成像设备11进行的对于由成像方向引起的异常的发生的检测处理。
在步骤S231,图像质量控制处理单元78从摄像机控制检测处理单元76,获得在图6的步骤S13中进行的检测处理的结果。更具体地,获得作为曝光控制用检测处理的结果计算的每个分割区域的亮度值的积分值,和作为白平衡控制用检测处理的结果计算的每个分割区域的每个颜色分量的积分值。
在步骤S232,图像质量控制处理单元78根据获得的检测处理的结果,计算曝光控制的控制目标值,和白平衡控制的控制目标值。
更具体地,图像质量控制处理单元78根据每个分割区域的亮度值的积分值,和从面部检测处理单元77供给的面部检测处理的结果,计算以致拍摄图像的明暗度变成最佳明暗度的光学系统21的光圈的光圈值、快门速度和成像器61的增益值中的各个值,作为控制目标值。
另外,图像质量控制处理单元78根据每个分割区域的各个颜色分量的积分值,和从面部检测处理单元77供给的面部检测处理的结果,计算以致拍摄图像具有最佳白平衡的各个颜色分量的增益值,作为各个颜色分量的控制目标值。
然而,由于诸如光圈、快门速度和成像器61的增益之类的各个控制目标值,或者用于白平衡控制的颜色分量的增益的各个控制目标值是目标值,因此在一些实际情况下,控制目标值可能超过可设定范围的值。
于是,在步骤S233,如果需要,那么图像质量控制处理单元78通过对利用步骤S232的处理获得的每个控制目标值应用限制器处理,确定控制指令值。即,在控制目标值超过可设定范围的值时,控制目标值被校正为在可设定范围内的值,作为控制指令值。
这里,计算曝光控制或白平衡控制的控制指令值的处理是与图6的步骤S14的图像质量控制处理相同的处理。即,计算曝光控制或白平衡控制的控制指令值的处理的执行可以是图像质量控制处理的执行,或者可以是步骤S232和S233的处理的执行。
在步骤S234,图像质量控制处理单元78根据以前的控制目标值的历史,计算控制目标值的平均值。
更具体地,图像质量控制处理单元78保存根据其中未检测到由成像方向引起的异常的各个在先帧计算的曝光控制或白平衡控制的控制目标值,作为控制目标值的历史列表。例如,作为控制目标值的历史列表,对于光圈、快门速度、成像器61的增益和颜色分量的增益中的每一个,保存预先定义的预定数目的控制目标值。
图像质量控制处理单元78对于光圈、快门速度、成像器61的增益和颜色分量的增益中的每一个,计算保存在历史列表中的控制目标值的平均值。
在步骤S235,图像质量控制处理单元78判定在步骤S234中计算的控制目标值的平均值与在步骤S232中计算的控制目标值之间的差分是否是阈值或更大。
例如,将光圈、快门速度、成像器61的增益和颜色分量的增益中的每一个的控制目标值的平均值与控制目标值之间的差分和所述阈值进行比较,并在存在为阈值或更大的任意一个差分的情况下,判定该差分为阈值或更大。
例如,在控制目标值的平均值与控制目标值之间的差分为阈值或更大的情况下,由于到目前为止的平均控制目标值和当前帧的控制目标值之间的差分较大,因此判定成像状况被极大改变。这里,成像状况例如是成像空间的明暗度,或者成像空间的色平衡。
于是,在控制目标值的平均值与控制目标值之间的差分为阈值或更大的情况下,判定发生场景变化,即,成像方向的极大变化。于是,在持续预定帧数存在控制目标值的平均值与控制目标值之间的差分被判定为阈值或更大的帧的情况下,由于发生由成像方向引起的异常,因此可判定在到目前为止稳定的最佳曝光平衡或白平衡被极大改变之后,曝光平衡或白平衡继续稳定。
当在步骤S235,判定所述差分为阈值或更大时,在步骤S236,图像质量控制处理单元78把预先保存的成像方向异常计数器加1。
这里,成像方向异常计数器类似于曝光异常计数器,表示控制目标值的平均值与控制目标值之间的差分为阈值或更大的连续判定的次数,即,由成像方向引起的异常的连续检测的时间(帧数)。
另外,图像质量控制处理单元78还保存当成像方向异常计数器为预定值或更大时,设定(开启)的成像方向异常标记。成像方向异常标记被设定(开启)的情况表示发生由成像方向引起的异常,成像方向异常标记被重置(关闭)的情况表示未发生由成像方向引起的异常。
如果在步骤S236,成像方向异常计数器被递增,那么之后处理进入步骤S240。
另一方面,当在步骤S235,判定所述差分不是阈值或更大时,在步骤S237,图像质量控制处理单元78重置成像方向异常计数器。
在步骤S238,图像质量控制处理单元78把在步骤S232中计算的当前帧的各个控制目标值追加到历史列表中。这种情况下,如果需要,除去到目前为止保存在历史列表中的帧之中的时间最早的帧的控制目标值。
在步骤S239,图像质量控制处理单元78重置(关闭)成像方向异常标记。
即,在所述差分不是阈值或更大的情况下,由于曝光或白平衡稳定,未检测到由成像方向引起的异常,因此成像方向异常计数器被重置为0,成像方向异常标记也被重置。
另外,由于未检测到由成像方向引起的异常,因此也进行历史列表的更新。此外,其中未检测到由成像方向引起的异常的帧的控制目标值被追加到历史列表中,例如,以便例外帧,例如,其中某人在成像设备11前面走过的帧的控制目标值不被追加到历史列表中。
这样,如果成像方向异常标记被重置,那么处理进入步骤S240。
如果在步骤S236,成像方向异常计数器被递增,或者如果在步骤S239,成像方向异常标记被重置,那么在步骤S240,图像质量控制处理单元78判定成像方向异常计数器是否为预定值或更大。
当在步骤S240,判定成像方向异常计数器为预定值或更大时,在步骤S241,图像质量控制处理单元78设定(开启)成像方向异常标记。
这种情况下,在到目前为止稳定的最佳曝光平衡或白平衡被极大改变之后,曝光平衡或白平衡变成稳定的增益。于是,判定发生由成像方向引起的异常,从而设定成像方向异常标记。如果成像方向异常标记被设定,那么之后处理进入步骤S242。
另外,当在步骤S240,判定成像方向异常计数器不是预定值或更大时,判定未发生由成像方向引起的异常,处理进入步骤S242。
如果在步骤S241,设定了成像方向异常标记,或者如果在步骤S240,判定成像方向异常计数器不是预定值或更大,那么在步骤S242,图像质量控制处理单元78判定处理是否结束。
例如,在参考图6说明的成像处理结束的情况下,即,在成像结束的情况下,判定所述处理结束。
当在步骤S242,判定所述处理未结束时,处理返回步骤S231,重复上述各个处理。
相反,当在步骤S242,判定处理结束时,结束对于由成像方向引起的异常的发生的检测处理。
按照上述方式,成像设备11根据曝光控制或白平衡控制的检测结果,检测由成像方向引起的异常的发生。这样,通过检测由成像方向引起的异常的发生,如果需要,那么可向用户发出报警。于是,用户能够更简单地把握成像状况。
<由面部丢失引起的异常的发生的检测处理的说明>
另外参考图13的流程图,说明成像设备11进行的对于由面部丢失引起的异常的发生的检测处理。
在步骤S271,图像质量控制处理单元78从面部检测处理单元77,获得在图6的步骤S12中进行的面部检测的结果。
在步骤S272,图像质量控制处理单元78根据获得的面部检测的结果,进行面部联系处理。
即,识别在从当前帧的拍摄图像中检测的面部中,是否存在作为追踪目标的面部。当确定存在作为追踪目标的面部时,可允许作为追踪目标面部的区域的所识别面部的区域与先前帧的追踪目标面部的相应区域关联。
这里,作为追踪目标的面部可以是通过用户操作用户接口63,在第一帧的拍摄图像中指定的面部,或者可以是预先登记的面部。在预先登记各个人的面部的情况下,各个面部的特征量可被预先记录在记录单元68等中。另外,在从第一帧的拍摄图像中,检测到一个面部的情况下,该面部可被设定为追踪目标。
例如,在面部联系处理中,当从当前帧的拍摄图像中检测到的面部位于在离当前帧的前一帧的拍摄图像中的追踪目标面部的位置预定距离内之处时,当前帧的拍摄图像的面部被设定为追踪目标面部。
另外,通过比较关于追踪目标面部计算的特征量,和从当前帧的拍摄图像上的面部的区域提取的特征量,可以识别当前帧的拍摄图像上的面部是否是追踪目标面部。
在步骤S273,图像质量控制处理单元78对检测处理的结果设定加权因子,以致在步骤S272的处理中识别的追踪目标面部的区域的图像质量变成最佳图像质量。
根据按照这种方式设定的加权因子,进行各个控制指令值(控制目标值)的上述计算,即,图6的步骤S14的处理图10的步骤S152和S153的处理及图12的步骤S232和S233的处理。
于是,例如,在图10的步骤S152,计算聚焦镜头的控制目标值,以致面部区域被聚焦。另外,例如,在图12的步骤S232,通过着重于面部区域,计算曝光控制或白平衡控制的控制目标值。
在步骤S274,图像质量控制处理单元78判定在当前帧的拍摄图像上,是否存在作为追踪目标的面部。
例如,在步骤S272的面部联系处理中,当识别出存在作为追踪目标的面部时,判定存在追踪目标面部。
这里,到目前为止存在的追踪目标面部不存在于当前帧的拍摄图像上的状态是作为追踪目标的人在成像设备11的成像视野(画面)之外的状态。于是,在这种情况下,在该状态下,检测到由面部丢失引起的异常。
当在步骤S274,判定面部不存在时,在步骤S275,图像质量控制处理单元78把预先保存的面部丢失异常计数器加1。
这里,面部丢失异常计数器类似于曝光异常计数器,表示追踪目标面部不存在的连续判定的次数,即,由面部丢失引起的异常的连续检测的时间(帧数)。
另外,图像质量控制处理单元78还保存当面部丢失异常计数器为预定值或更大时,设定(开启)的面部丢失异常标记。面部丢失异常标记被设定(开启)的情况表示发生由面部丢失引起的异常,面部丢失异常标记被重置(关闭)的情况表示未发生由面部丢失引起的异常。
如果在步骤S275,面部丢失异常计数器被递增,那么之后处理进入步骤S278。
另一方面,当在步骤S274,判定面部存在时,在步骤S276,图像质量控制处理单元78重置面部丢失异常计数器。
在步骤S277,图像质量控制处理单元78重置(关闭)面部丢失异常标记。
即,在追踪目标面部存在的情况下,由于期望的面部的追踪是成功的,未检测到由面部丢失引起的异常,因此面部丢失异常计数器被重置为0,面部丢失异常标记也被重置。这样,如果面部丢失异常标记被重置,那么处理进入步骤S278。
如果在步骤S275,面部丢失异常计数器被递增,或者如果在步骤S277,面部丢失异常标记被重置,那么在步骤S278,图像质量控制处理单元78判定面部丢失异常计数器是否为预定值或更大。
当在步骤S278,判定面部丢失异常计数器为预定值或更大时,在步骤S279,图像质量控制处理单元78设定(开启)面部丢失异常标记。
这种情况下,由于持续预定时间或更长时间,连续检测到由面部丢失引起的异常,因此判定发生由面部丢失引起的异常,从而设定面部丢失异常标记。如果面部丢失异常标记被设定,那么之后处理进入步骤S280。
另外,当在步骤S278,判定面部丢失异常计数器不是预定值或更大时,判定未发生由面部丢失引起的异常,处理进入步骤S280。
如果在步骤S279,设定了面部丢失异常标记,或者如果在步骤S278,判定面部丢失异常计数器不是预定值或更大,那么在步骤S280,图像质量控制处理单元78判定处理是否结束。
例如,在参考图6说明的成像处理结束的情况下,即,在成像结束的情况下,判定所述处理结束。
当在步骤S280,判定所述处理未结束时,处理返回步骤S271,重复上述各个处理。
相反,当在步骤S280,判定处理结束时,结束对于由面部丢失引起的异常的发生的检测处理。
按照上述方式,成像设备11根据面部检测的结果,识别追踪目标面部是否存在,并检测由面部丢失引起的异常的发生。这样,通过检测由面部丢失引起的异常的发生,如果需要,那么可向用户发出报警。于是,用户能够更简单地把握成像状况。
<由电池引起的异常的发生的检测处理的说明>
另外参考图14的流程图,说明成像设备11进行的对于由电池引起的异常的发生的检测处理。
在步骤S311,图像质量控制处理单元78从电池67,获得电池67的剩余电量。
在步骤S312,图像质量控制处理单元78判定电池67的剩余电量是否是阈值或更小。
当在步骤S312,判定剩余电量是阈值或更小时,在步骤S313,图像质量控制处理单元78设定(开启)电池异常标记。如果设定了电池异常标记,那么之后,处理进入步骤S314。
图像质量控制处理单元78保存在电池67的剩余电量为预定值或更小的情况下设定(开启)的电池异常标记。电池异常标记被设定(开启)的情况表示发生由电池引起的异常,电池异常标记被重置(关闭)的情况表示未发生由电池引起的异常。
另外,当在步骤S312,判定剩余电量不是阈值或更小时,处理进入步骤S314。
如果在步骤S313,设定了电池异常标记,或者如果在步骤S312,判定剩余电量不是阈值或更小时,在步骤S314,图像质量控制处理单元78判定处理是否结束。
例如,在参考图6说明的成像处理结束的情况下,即,在成像结束的情况下,判定所述处理结束。
当在步骤S314,判定所述处理未结束时,处理返回步骤S311,重复上述各个处理。
相反,当在步骤S314,判定处理结束时,结束对于由电池引起的异常的发生的检测处理。
按照上述方式,成像设备11根据电池67的剩余电量,检测由电池引起的异常的发生。这样,通过检测由电池引起的异常的发生,如果需要,那么可向用户发出报警。于是,用户能够更简单地把握成像状况。
<报警判定处理的说明>
另外,在成像期间,进行检测与上述各个原因对应的异常的发生的处理时,成像设备11同时进行按照异常的发生的检测结果,生成报警标记的报警判定处理,并把报警标记传送给报警生成设备12。
例如,对于上述异常的每种原因,即,对于关于每种原因获得的指示异常的存在与否的每个标记,生成报警标记。此外在下面,在不是特别需要区分曝光异常标记、白平衡异常标记、聚焦异常标记、手抖动异常标记、成像方向异常标记、面部丢失异常标记和电池异常标记的情况下,这些标记被简单地称为异常标记。
成像设备11对于每个异常标记,生成报警标记,并把报警标记传送给报警生成设备12。下面参考图15的流程图,说明成像设备11的报警判定处理。此外,对于每个异常标记,进行报警判定处理。
在步骤S341,报警判定处理单元79参照保存在图像质量控制处理单元78中的异常标记,判定异常标记是否被设定,即,异常标记是否开启。
当在步骤S341,判定异常标记被设定时,在步骤S342,报警判定处理单元79设定(开启)报警标记,处理进入步骤S344。
例如,在报警判定处理中,在曝光异常标记是处理对象的情况下,设置与曝光相关的报警标记。
相反,如果在步骤S341,判定未设置异常标记,那么在步骤S343,报警判定处理单元79重置(关闭)报警标记,然后处理进入步骤S344。
如果在步骤S342中,设置了报警标记,或者如果在步骤S343中,设置了报警标记,那么进行步骤S344的处理。
即,在步骤S344,报警判定处理单元79通过数据信号处理LSI 62,把报警标记提供给无线传输单元69,并指令报警标记的传输。
在步骤S345,无线传输单元69把从报警判定处理单元79供给的报警标记无线传送给报警生成设备12。
在步骤S346,报警判定处理单元79判定处理是否结束。例如,在参考图6说明的成像处理结束的情况下,即,在成像结束的情况下,判定所述处理结束。
当在步骤S346,判定处理未结束时,处理返回步骤S341,重复上述各个处理。即,每隔预定时间,不断传送报警标记。
相反,当在步骤S346,判定成像结束时,结束报警判定处理。
按照上述方式,成像设备11监视异常标记,以生成报警标记,并把报警标记传送给报警生成设备12。于是,可对于异常的发生的每种原因,向用户发出报警,以致利用与成像设备11分离的报警生成设备12,用户能够简单地把握成像状况。此外,并不总是向报警生成设备12传送报警标记,报警标记可被配置成只有当发生异常时才被传送。
<报警处理的说明>
如上所述,在成像设备11进行图6的成像处理的时间内,在报警生成设备12中,进行图7的显示处理。
另外,在进行成像处理的时间内,报警生成设备12在显示处理的同时,进行报警处理,以按照报警标记发出报警。下面参考图16的流程图,说明报警生成设备12的报警处理。
此外,对于异常的发生的各个原因,即,分别对于由光源条件引起的异常、由照明条件引起的异常、由成像距离引起的异常、由手抖动引起的异常、由成像方向引起的异常、由面部丢失引起的异常和由电池引起的异常,进行报警处理。
在步骤S371,无线接收单元91接收从成像设备11的无线传输单元69传送的报警标记,把报警标记提供给数字信号处理单元92。另外,数字信号处理单元92把从无线接收单元91供给的报警标记提供给控制单元93。
在步骤S372,控制单元93的报警装置控制处理单元105判定从数字信号处理单元92供给的报警标记是否开启,即,报警标记是否被设定。
当在步骤S372,判定报警标记未开启,即,报警标记关闭时,处理进入步骤S376。
相反,当在步骤S372,判定报警标记开启时,在步骤S373,报警装置控制处理单元105按照异常的原因,选择报警图标。
例如,在作为处理对象的报警标记是与由光源条件引起的异常相关的报警标记的情况下,报警装置控制处理单元105选择预先关于由光源条件引起的异常定义的报警图标。即,选择用于异常的相应原因(种类)的不同报警图标。
在步骤S374,报警装置控制处理单元105把选择的报警图标提供给数字信号处理单元92的显示处理单元101,指令显示处理单元101显示该报警图标。显示处理单元101按照报警装置控制处理单元105的指令,把从报警装置控制处理单元105供给的报警图标提供给显示单元31,并控制报警图标的显示。
在步骤S375,显示单元31显示从显示处理单元101供给的报警图标。即,显示单元31通过把报警图标叠加在从成像设备11接收的拍摄图像上,显示报警图标。于是,例如,显示图3中图解所示的报警图标AC11。此外,还可显示和报警图标一起的诸如文本消息之类的信息。
如果在步骤S375,显示报警图标,或者如果在步骤S372,判定报警标记关闭,那么进行步骤S376的处理。
在步骤S376,报警装置控制处理单元105判定处理是否结束。例如,在参考图7说明的显示处理结束的情况下,判定处理结束。
当在步骤S376,判定处理未结束时,处理返回步骤S371,重复上述各个处理。即,接收新的报警标记,按照该报警标记,更新报警图标的显示。
相反,当在步骤S376,判定处理结束时,结束报警处理。
按照上述方式,报警生成设备12接收报警标记,并按照报警标记发出报警。这样,通过按照报警标记发出报警,用户能够利用与成像设备11分离的报警生成设备12,简单地把握成像状况。另外,由于对于异常的每种原因,发出报警,因此用户能够容易并且立即检查发生哪种异常。
<第一实施例的变形例1>
<报警处理的说明>
此外,如上所述,尽管作为向用户发出报警的方法,举例说明了利用显示的报警,不过,作为向用户发出报警的另一种方法,可以进行利用振动的报警。
这种情况下,作为与参考图16说明的报警处理对应的处理,例如,进行图17中图解所示的处理。下面参考图17的流程图,说明报警生成设备12进行的利用振动的报警处理。
此外,也对于异常的发生的每种原因,进行报警处理。另外,步骤S401和S402的处理类似于图16的步骤S371和S372的处理,从而省略其说明。
当在步骤S402,判定报警标记开启时,在步骤S403,报警装置控制处理单元105按照异常的原因,选择振动模式。
例如,在作为处理对象的报警标记是与由光源条件引起的异常相关的报警标记的情况下,报警装置控制处理单元105选择预先关于由光源条件引起的异常定义的振动模式。即,选择用于异常的相应原因的不同振动模式。
在步骤S404,报警装置控制处理单元105指令数字信号处理单元92的振动驱动处理单元102利用与选择的振动模式相应的振动发出报警。
在步骤S405,振动驱动处理单元102按照报警装置控制处理单元105的指令,驱动振动单元94振动。如果振动单元94被振动驱动处理单元102驱动,那么所述振动单元通过按照预定的振动模式振动,发出报警。
如果利用振动发出报警,那么之后进行步骤S406的处理,然后结束报警处理。该处理类似于图16的步骤S376的处理,从而省略其说明。
按照上述方式,报警生成设备12接收报警标记,并按照报警标记,利用振动发出报警。这样,通过按照报警标记发出报警,用户能够在不查看报警生成设备12的显示单元31的情况下,简单地检查成像状况。另外,由于对于异常的每种原因,发出报警,因此用户能够容易并且立即检查发生哪种异常。
<第一实施例的变形例2>
<报警处理的说明>
另外,作为向用户发出报警的另一种方法,可以进行利用音频的报警。
这种情况下,作为与参考图16说明的报警处理对应的处理,例如,进行图18中图解所示的处理。下面参考图18的流程图,说明报警生成设备12进行的利用音频的报警处理。
此外,对于异常的发生的每种原因,进行报警处理。另外,步骤S431和S432的处理类似于图16的步骤S371和S372的处理,从而省略其说明。
当在步骤S432,判定报警标记开启时,在步骤S433,报警装置控制处理单元105按照异常的原因,选择音频模式。
例如,在作为处理对象的报警标记是与由光源条件引起的异常相关的报警标记的情况下,报警装置控制处理单元105选择预先关于由光源条件引起的异常定义的音频模式。即,选择用于异常的相应原因的不同音频模式。
在步骤S434,报警装置控制处理单元105指令数字信号处理单元92的扬声器驱动处理单元103利用与选择的音频模式相应的音频输出发出报警。
在步骤S435,扬声器驱动处理单元103按照报警装置控制处理单元105的指令,把与指定的音频模式相应的音频信号提供给扬声器95,以输出音频。扬声器95通过根据从扬声器驱动处理单元103供给的音频信号,按预定音频模式再现报警音频,发出报警。
如果利用音频发出报警,那么之后进行步骤S436的处理,然后结束报警处理。该处理类似于图16的步骤S376的处理,从而省略其说明。
按照上述方式,报警生成设备12接收报警标记,并按照报警标记,利用音频发出报警。这样,通过按照报警标记发出报警,用户能够在不查看报警生成设备12的显示单元31的情况下,简单地检查成像状况。另外,由于对于异常的每种原因,发出报警,因此用户能够容易并且立即检查发生哪种异常。
<第一实施例的变形例3>
<报警处理的说明>
另外,作为向用户发出报警的另一种方法,可以进行利用灯光的报警。
这种情况下,作为与参考图16说明的报警处理对应的处理,例如,进行图19中图解所示的处理。下面参考图19的流程图,说明报警生成设备12进行的利用灯光的报警处理。
此外,也对于异常的发生的每种原因,进行报警处理。另外,步骤S461和S462的处理类似于图16的步骤S371和S372的处理,从而省略其说明。
当在步骤S462,判定报警标记开启时,在步骤S463,报警装置控制处理单元105按照异常的原因,选择灯光模式。
例如,在作为处理对象的报警标记是与由光源条件引起的异常相关的报警标记的情况下,报警装置控制处理单元105选择预先关于由光源条件引起的异常定义的灯光模式。即,选择用于异常的相应原因的不同灯光模式。
在步骤S464,报警装置控制处理单元105指令数字信号处理单元92的发光元件驱动处理单元104利用与选择的灯光模式相应的发光(灯光)发出报警。
在步骤S465,发光元件驱动处理单元104按照报警装置控制处理单元105的指令,驱动发光元件96,允许发光元件96按照指定的灯光模式发光。如果发光元件96被发光元件驱动处理单元104驱动,那么所述发光元件按照预定的灯光模式发光(亮灯),以致发出报警。
如果利用灯光发出报警,那么之后进行步骤S466的处理,然后结束报警处理。该处理类似于图16的步骤S376的处理,从而省略其说明。
按照上述方式,报警生成设备12接收报警标记,并利用对应于报警标记的灯光,发出报警。这样,通过按照报警标记发出报警,用户能够在不查看报警生成设备12的显示单元31的情况下,简单地检查成像状况。另外,由于对于异常的每种原因,发出报警,因此用户能够容易并且立即检查发生哪种异常。
此外,在此以前,尽管说明了其中利用图像显示、音频输出、振动和发光,发出报警的例子,不过,可以利用多种方法的组合,发出报警,对于异常的各种原因,可以利用不同的方法发出报警。例如,在对于异常的各种原因,利用不同的方法发出报警的情况下,例如,就由光源条件引起的异常来说,可以显示图像,而就由照明条件引起的异常来说,可以发出利用音频的报警。
另外,在此以前,尽管说明了其中报警生成设备12发出报警的例子,不过,成像设备11可根据报警标记,发出报警。
<第二实施例>
<报警生成设备的结构例子>
另外,在此以前,尽管说明在监视成像状况,并在成像设备11侧生成报警标记的例子,不过,报警标记可被配置成在报警生成设备侧生成。这种情况下,例如如图20中图解所示地构成报警生成设备。此外,在图20中,与图2的情况的组件对应的各个组件用相同的附图标记表示,并适当省略其说明。
图20中图解所示的报警生成设备201被配置成包括无线接收单元91、异常检测处理单元211、数字信号处理单元92、控制单元93、显示单元31、振动单元94、扬声器95和发光元件96。
图20的报警生成设备201的结构和图2的报警生成设备12的结构的不同之处在于新安装了异常检测处理单元211,其它结构与报警生成设备12相同。
在控制单元93的控制下,异常检测处理单元211根据从无线接收单元91供给的拍摄图像,监视成像状况,并生成报警标记。
异常检测处理单元211被配置成包括摄像机控制检测处理单元76、面部检测处理单元77、图像质量控制处理单元78和报警判定处理单元79。异常检测处理单元211进行由第一实施例中的成像设备11进行的处理的一部分。
由于异常检测处理单元211通过把分辨率变换单元74缩减的拍摄图像视为处理对象,适当地检测异常的发生,因此与成像设备11检测异常的发生的情况相比,该异常检测处理单元能够以较小的处理量,进行相同的处理。
<显示处理的说明>
下面,说明报警生成设备201的详细操作。首先参考图21的流程图,说明报警生成设备201的显示处理。
此外,当利用成像设备11成像的拍摄图像被传送时,开始显示处理。另外,步骤S491和S492的处理类似于图7的步骤S41和S42的处理,从而省略其说明。在步骤S491和S492,利用无线接收单元91接收拍摄图像,然后把拍摄图像显示在显示单元31上。
在步骤S493,面部检测处理单元77对从无线接收单元91供给的拍摄图像进行面部检测,以从拍摄图像中检测人的面部区域。
在步骤S494,摄像机控制检测处理单元76根据拍摄图像,进行检测处理。
此外,步骤S493和S494的处理类似于图6的步骤S12和S13的处理,从而省略其说明。
在步骤S495,控制单元93判定处理是否结束。例如,在未从成像设备11传送新的拍摄图像的帧的情况下,判定处理结束。
当在步骤S495,判定处理未结束时,处理返回步骤S491,重复上述各个处理。
相反,当在步骤S495,判定处理结束时,结束显示处理。
按照上述方式,报警生成设备201接收并显示拍摄图像,该报警生成设备可从拍摄图像中检测面部,或者可进行检测处理。于是,通过查看显示在与成像设备11分离的报警生成设备201上的拍摄图像,用户能够检查视角等。另外,报警生成设备201侧能够检测异常。
<由光源条件引起的异常的发生的检测处理的说明>
另外,在进行参考图21说明的显示处理的时候,报警生成设备201同时进行检测异常的发生的处理。下面参考图22-26,说明检测相应原因的异常的发生的处理。
首先参考图22的流程图,说明报警生成设备201进行的关于由光源条件引起的异常的发生的检测处理。
在步骤S521,图像质量控制处理单元78从摄像机控制检测处理单元76,获得在图21的步骤S494中进行的检测处理的结果。更具体地,获得拍摄图像的各个分割区域的亮度值的积分值。
如果获得检测处理的结果,那么之后,进行步骤S522-S529的处理,结束对于由光源条件引起的异常的发生的检测处理。各个处理类似于图8的步骤S72-S79的处理,从而省略其说明。
按照上述方式,报警生成设备201检测由光源条件引起的异常的发生,并根据亮度的检测结果,设定或重置曝光异常标记。
<由照明条件引起的异常的发生的检测处理的说明>
下面参考图23的流程图,说明报警生成设备201进行的对于由照明条件引起的异常的发生的检测处理。
在步骤S561,图像质量控制处理单元78从摄像机控制检测处理单元76,获得在图21的步骤S494中进行的检测处理的结果。更具体地,获得对于拍摄图像的各个分割区域得到的R、G和B颜色分量的积分值。
如果获得检测处理的结果,那么之后,进行步骤S562-S570的处理,结束对于由照明条件引起的异常的发生的检测处理。各个处理类似于图9的步骤S112-S120的处理,从而省略其说明。
按照上述方式,报警生成设备201检测由照明条件引起的异常的发生,并根据颜色分量的检测结果,设定或重置白平衡异常标记。
<由成像距离引起的异常的发生的检测处理的说明>
下面参考图24的流程图,说明报警生成设备201进行的对于由成像距离引起的异常的发生的检测处理。
在步骤S601,图像质量控制处理单元78从摄像机控制检测处理单元76,获得在图21的步骤S494中进行的检测处理的结果。更具体地,获得拍摄图像的各个分割区域的聚焦评估值。
在步骤S602,图像质量控制处理单元78根据获得的检测处理的结果,计算聚焦评估值的峰值。即,图像质量控制处理单元78获得例如从拍摄图像的一定数目的最近帧得到的诸如面部区域之类的预定区域的聚焦评估值的最大值,作为聚焦评估值的峰值。
如果获得聚焦评估值的峰值,那么之后,进行步骤S603-S609的处理,结束对于由成像距离引起的异常的发生的检测处理。各个处理类似于图10的步骤S154-S160的处理,从而省略其说明。
按照上述方式,报警生成设备201检测由成像距离引起的异常的发生,并根据聚焦的检测结果,设定或重置聚焦异常标记。
<由成像方向引起的异常的发生的检测处理的说明>
下面参考图25的流程图,说明报警生成设备201进行的对于由成像方向引起的异常的发生的检测处理。
在步骤S631,图像质量控制处理单元78从摄像机控制检测处理单元76,获得在图21的步骤S494中进行的检测处理的结果。更具体地,获得拍摄图像的各个分割区域的亮度值的积分值,和每个分割区域的各个颜色分量的积分值。
在步骤S632,图像质量控制处理单元78根据获得的检测处理的结果,计算曝光控制的控制目标值,和白平衡控制的控制目标值。即,进行与图12的步骤S232的处理类似的处理。
如果计算了控制目标值,那么之后,进行步骤S633-S641的处理,结束对于由成像方向引起的异常的发生的检测处理。各个处理类似于图12的步骤S234-S242的处理,从而省略其说明。
按照上述方式,报警生成设备201检测由成像方向引起的异常的发生,并根据检测结果,设定或重置成像方向异常标记。
<由面部丢失引起的异常的发生的检测处理的说明>
下面参考图26的流程图,说明报警生成设备201进行的对于由面部丢失引起的异常的发生的检测处理。
在步骤S671,图像质量控制处理单元78从面部检测处理单元77,获得在图21的步骤S493中进行的面部检测的结果。
如果获得了面部检测的结果,那么之后,进行步骤S672-S679的处理,结束对于由面部丢失引起的异常的发生的检测处理。各个处理类似于图13的步骤S272和步骤S274-S280的处理,从而省略其说明。此外,根据追踪目标面部的检测区域,设定加权因子,根据加权因子,可进行曝光控制或白平衡控制的控制目标值的计算。
按照上述方式,报警生成设备201检测由面部丢失引起的异常,并根据面部检测的结果,设定或重置面部丢失异常标记。
<报警判定处理的说明>
另外,当成像设备11进行成像处理时,在进行检测与迄今说明的各个原因对应的异常的发生的处理的时候,报警生成设备201同时进行按照异常的发生的检测结果,生成报警标记的报警判定处理。
下面参考图27的流程图,说明报警生成设备201的报警判定处理。此外,对于每种异常标记,进行报警判定处理。
另外,步骤S711-S713的处理类似于图15的步骤S341-S343的处理,从而,省略其说明。利用所述各个处理,设定或重置报警标记。
如果报警标记被设定或重置,那么之后,进行步骤S714的处理,结束报警判定处理。步骤S714的处理类似于图15的步骤S346的处理,从而省略其说明。
按照上述方式,报警生成设备201根据关于由每种原因引起的每种异常的异常标记,更新报警标记。
<报警处理的说明>
下面参考图28的流程图,说明报警生成设备201的报警处理。此外,对于异常的发生的每种原因,进行该报警处理。
在步骤S741,报警装置控制处理单元105从异常检测处理单元211的报警判定处理单元79,获得报警标记。
如果获得了报警标记,那么之后,进行步骤S742-S746的处理,然后结束报警处理。各个处理类似于图16的步骤S372-S376的处理,从而省略其说明。
按照上述方式,报警生成设备201按照报警标记,发出报警。于是,用户能够更简单地把握成像状况。
<第二实施例的变形例1>
<报警处理的说明>
此外,作为向用户发出报警的另一种方法,可以进行利用振动的报警。这种情况下,例如,进行图29中图解所示的处理。下面参考图29的流程图,说明报警生成设备201进行的利用振动的报警处理。
在步骤S771,报警装置控制处理单元105从异常检测处理单元211的报警判定处理单元79,获得报警标记。
如果获得了报警标记,那么之后,进行步骤S772-S776的处理,然后结束报警处理。各个处理类似于图17的步骤S402-S406的处理,从而省略其说明。
按照上述方式,报警生成设备201按照报警标记,利用振动发出报警。于是,用户能够更简单地把握成像状况。
<第二实施例的变形例2>
<报警处理的说明>
另外,作为向用户发出报警的另一种方法,可以进行利用音频的报警。这种情况下,例如,进行图30中图解所示的处理。下面参考图30的流程图,说明报警生成设备201进行的利用音频的报警处理。
在步骤S801,报警装置控制处理单元105从异常检测处理单元211的报警判定处理单元79,获得报警标记。
如果获得了报警标记,那么之后,进行步骤S802-S806的处理,然后结束报警处理。各个处理类似于图18的步骤S432-S436的处理,从而省略其说明。
按照上述方式,报警生成设备201按照报警标记,利用音频发出报警。于是,用户能够更简单地把握成像状况。
<第二实施例的变形例3>
<报警处理的说明>
另外,作为向用户发出报警的另一种方法,可以进行利用灯光的报警。这种情况下,例如,进行图31中图解所示的处理。下面参考图31的流程图,说明报警生成设备201进行的利用灯光的报警处理。
在步骤S831,报警装置控制处理单元105从异常检测处理单元211的报警判定处理单元79,获得报警标记。
如果获得了报警标记,那么之后,进行步骤S832-S836的处理,然后结束报警处理。各个处理类似于图19的步骤S462-S466的处理,从而省略其说明。
按照上述方式,报警生成设备201按照报警标记,利用灯光发出报警。于是,用户能够更简单地把握成像状况。
<第三实施例>
<报警生成设备的外观的构成例子>
此外,在此以前,尽管说明了报警生成设备12或报警生成设备201由移动电话机构成的情况,不过,具有显示功能的任何设备可以用作报警生成设备。
例如,如图32中图解所示,报警生成设备12或报警生成设备201可由具有显示功能和通信功能的多功能手表301构成。
在本例中,在多功能手表301中,安装由液晶面板等构成的显示单元311,在显示单元311的图形的下侧中,安装在进行各种操作时操作的按钮组312。这种情况下,例如,多功能手表301从成像设备11接收拍摄图像,以把拍摄图像显示在显示单元311上,或者从成像设备11接收报警标记,以把报警图标显示在显示单元311上。此外,多功能手表302可利用振动、音频或灯光,发出报警。
<第四实施例>
<报警生成设备的外观的构成例子>
另外,例如,如图33中图解所示,报警生成设备12或报警生成设备201可由具有显示功能和通信功能的眼镜式头戴显示器341构成。
在本例中,当用户佩戴头戴显示器341时,拍摄图像或报警图标显示在布置在与用户的左右眼睛相对的位置处的显示单元351和352上。另外,在头戴显示器341的腿(temple)(框架)部分中,安装按钮(未图示),所述按钮由用户操作。此外,头戴显示器341可利用振动、音频或灯光,发出报警。
上述一系列处理可用硬件执行,或者可用软件执行。当用软件执行所述一系列处理时,构成所述软件的程序安装在计算机中。这里,所述计算机包括并入专用硬件中的计算机,其中安装各种程序,从而能够执行各种功能的计算机(例如通用计算机),或者类似的计算机。
图34是图解说明利用程序,执行一系列的上述处理的计算机的硬件的结构例子的方框图。
在所述计算机中,中央处理器(CPU)501、只读存储器(ROM)502和随机存取存储器(RAM)503经总线504相互连接。
另外,输入/输出接口505连接到总线504。输入单元506、输出单元507、记录单元508、通信单元509和驱动器510连接到输入/输出接口505。
输入单元506由键盘、鼠标、麦克风、成像元件等构成。输出单元507由显示器、扬声器等构成。记录单元508由硬盘、非易失性存储器等构成。通信单元509由网络接口等构成。驱动器510驱动诸如磁盘、光盘、磁光盘或半导体存储器之类的可拆卸介质511。
在具有上述结构的计算机中,例如,CPU 501通过输入/输出接口505和总线504,把记录在记录单元508中的程序加载到RAM 503上,并执行所述程序,以执行上述一系列的处理。
计算机(CPU 501)执行的程序可被记录在可拆卸介质511,例如套装介质等上,以便供给。另外,可通过诸如局域网、因特网、数字卫星广播之类的有线或无线传输介质,提供程序。
在计算机中,可拆卸介质511被装到驱动器510上,以致通过输入/输出接口505,程序可被安装在记录单元508中。另外,程序可由通信单元509通过有线或无线传输介质接收,以便安装在记录单元508中。此外,程序可被预先安装在ROM 502或记录单元508中。
此外,计算机执行的程序可以是按照在本说明书中说明的顺序,时序地处理的程序,或者可以是并行地或在必要时(比如调用时)处理的程序。
另外,本技术的实施例不限于上述实施例,相反在不脱离本技术的精神的范围内,可以作出各种变化。
例如,本技术可以采用云计算结构,其中一种功能通过网络由多个设备分担,以便协同地处理。
另外,除了由一个设备执行以外,在上述流程图中说明的步骤可由多个设备分担执行。
另外,在多个处理包含在一个步骤中的情况下,除了由一个设备执行之外,包含在所述一个步骤中的多个处理可由多个设备分担执行。
另外,在本说明书中公开的效果仅仅是例证性的,并不局限于此,从而可存在其它效果。
另外,本技术可具有以下结构。
(1)一种成像系统,包括:
成像设备;和
报警生成设备,
其中所述成像设备包括:
成像单元,用于成像待拍摄的图像;
检测单元,用于监视拍摄图像的成像状况,和检测与成像状况相关的异常;和
传输单元,用于把表示异常的检测结果的信息传送给报警生成设备,并且
报警生成设备包括:
接收单元,用于接收从传输单元传送的表示异常的检测结果的信息;
报警装置控制处理单元,用于根据表示异常的检测结果的信息,指令报警;和
报警单元,用于按照报警装置控制处理单元的报警指令,发出报警。
(2)一种报警生成设备,包括:
接收单元,用于接收从对待拍摄的图像成像的成像设备传送的表示与拍摄图像的成像状况相关的异常的检测结果的信息;
报警装置控制处理单元,用于根据表示异常的检测结果的信息,指令报警;和
报警单元,用于按照报警装置控制处理单元的报警指令,发出报警。
(3)按照(2)所述的报警生成设备,其中报警单元按照异常的种类,发出不同的报警。
(4)按照(2)或(3)所述的报警生成设备,其中与成像状况相关的异常是与曝光控制相关的异常、与白平衡控制相关的异常、与聚焦控制相关的异常、与手抖动校正相关的异常、与成像方向相关的异常、与面部检测相关的异常和与电池相关的异常中的至少一个。
(5)按照(2)-(4)任意之一所述的报警生成设备,其中报警单元通过进行报警显示,发出报警。
(6)按照(2)-(4)任意之一所述的报警生成设备,其中报警单元通过输出音频,发出报警。
(7)按照(2)-(4)任意之一所述的报警生成设备,其中报警单元通过振动,发出报警。
(8)按照(2)-(4)任意之一所述的报警生成设备,其中报警单元通过发光,发出报警。
(9)按照(2)-(8)任意之一所述的报警生成设备,其中
接收单元还从成像设备接收拍摄的图像,并且
报警生成设备还包括显示拍摄图像的显示单元。
(10)按照(2)-(9)任意之一所述的报警生成设备,其中接收单元无线接收表示异常的检测结果的信息。
(11)一种报警生成方法,包括:
接收步骤,用于接收从对待拍摄的图像成像的成像设备传送的,表示与拍摄图像的成像状况相关的异常的检测结果的信息;
报警装置控制处理步骤,用于根据表示异常的检测结果的信息,指令报警;和
报警步骤,用于按照报警装置控制处理步骤的报警指令,发出报警。
(12)一种允许计算机执行处理的程序,所述处理包括:
接收步骤,用于接收从对待拍摄的图像成像的成像设备传送的表示与拍摄图像的成像状况相关的异常的检测结果的信息;
报警装置控制处理步骤,用于根据表示异常的检测结果的信息,指令报警;和
报警步骤,用于按照报警装置控制处理步骤的报警指令,发出报警。
(13)一种成像设备,包括:
成像单元,用于成像待拍摄的图像;
检测单元,用于监视拍摄图像的成像状况,和检测与成像状况相关的异常;和
传输单元,用于把表示异常的检测结果的信息传送给报警生成设备。
(14)一种成像方法,包括:
成像步骤,用于成像待拍摄的图像;
检测步骤,用于监视拍摄图像的成像状况,和检测与成像状况相关的异常;和
传输步骤,用于把表示异常的检测结果的信息传送给报警生成设备,所述报警生成设备发出发生异常的报警。
(15)一种允许计算机执行处理的程序,所述处理包括:
成像步骤,用于成像待拍摄的图像;
检测步骤,用于监视拍摄图像的成像状况,和检测与成像状况相关的异常;和
传输步骤,用于把表示异常的检测结果的信息传送给报警生成设备,所述报警生成设备发出发生异常的报警。
附图标记列表
11 成像设备
12 报警生成设备
31 显示单元
63 用户接口
69 无线传输单元
76 摄像机控制检测处理单元
77 面部检测处理单元
78 图像质量控制处理单元
79 报警判定处理单元
91 无线接收单元
94 振动单元
95 扬声器
96 发光元件
101 显示处理单元
102 振动驱动处理单元
103 扬声器驱动处理单元
104 发光元件驱动处理单元
105 报警装置控制处理单元

Claims (15)

1.一种成像系统,包括:
成像设备;和
报警生成设备,
其中所述成像设备包括:
成像单元,对要拍摄的图像进行成像;
检测单元,监视所拍摄的图像的成像状况,并检测与成像状况相关联的异常;以及
发送单元,把表示所述异常的检测结果的信息发送给报警生成设备,并且
报警生成设备包括:
接收单元,接收从发送单元发送的表示所述异常的检测结果的信息;
报警装置控制处理单元,基于表示所述异常的检测结果的信息,指令报警;以及
报警单元,根据报警装置控制处理单元的报警指令发出报警。
2.一种报警生成设备,包括:
接收单元,接收从对要拍摄的图像进行成像的成像设备发送的表示与所拍摄的图像的成像状况相关联的异常的检测结果的信息;
报警装置控制处理单元,基于表示所述异常的检测结果的信息,指令报警;以及
报警单元,根据报警装置控制处理单元的报警指令发出报警。
3.按照权利要求2所述的报警生成设备,其中报警单元发出根据所述异常的种类而不同的报警。
4.按照权利要求2所述的报警生成设备,其中与成像状况相关联的异常是与曝光控制相关联的异常、与白平衡控制相关联的异常、与聚焦控制相关联的异常、与手抖动校正相关联的异常、与成像方向相关联的异常、与面部检测相关联的异常以及与电池相关联的异常中的至少一个。
5.按照权利要求2所述的报警生成设备,其中报警单元通过进行报警显示来发出报警。
6.按照权利要求2所述的报警生成设备,其中报警单元通过输出音频来发出报警。
7.按照权利要求2所述的报警生成设备,其中报警单元通过振动来发出报警。
8.按照权利要求2所述的报警生成设备,其中报警单元通过发光来发出报警。
9.按照权利要求2所述的报警生成设备,其中
接收单元还从成像设备接收所拍摄的图像,并且
报警生成设备还包括显示所拍摄的图像的显示单元。
10.按照权利要求2所述的报警生成设备,其中接收单元以无线方式接收表示所述异常的检测结果的信息。
11.一种报警生成方法,包括:
接收步骤,接收从对要拍摄的图像进行成像的成像设备发送的表示与所拍摄的图像的成像状况相关联的异常的检测结果的信息;
报警装置控制处理步骤,基于表示所述异常的检测结果的信息,指令报警;以及
报警步骤,根据报警装置控制处理步骤的报警指令发出报警。
12.一种使计算机执行处理的程序,所述处理包括:
接收步骤,接收从对要拍摄的图像进行成像的成像设备发送的表示与所拍摄的图像的成像状况相关联的异常的检测结果的信息;
报警装置控制处理步骤,基于表示所述异常的检测结果的信息,指令报警;以及
报警步骤,根据报警装置控制处理步骤的报警指令发出报警。
13.一种成像设备,包括:
成像单元,对要拍摄的图像进行成像;
检测单元,监视所拍摄的图像的成像状况,并检测与成像状况相关联的异常;以及
发送单元,把表示所述异常的检测结果的信息发送给对所述异常的发生发出报警的报警生成设备。
14.一种成像方法,包括:
成像步骤,对要拍摄的图像进行成像;
检测步骤,监视所拍摄的图像的成像状况,并检测与成像状况相关联的异常;以及
发送步骤,把表示所述异常的检测结果的信息发送给对所述异常的发生发出报警的报警生成设备。
15.一种使计算机执行处理的程序,所述处理包括:
成像步骤,对要拍摄的图像进行成像;
检测步骤,监视所拍摄的图像的成像状况,并检测与成像状况相关联的异常;以及
发送步骤,把表示所述异常的检测结果的信息发送给对所述异常的发生发出报警的报警生成设备。
CN201580004008.8A 2014-01-17 2015-01-06 成像系统、报警生成设备和方法、成像设备和方法以及程序 Expired - Fee Related CN105900010B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014006725 2014-01-17
JP2014-006725 2014-01-17
PCT/JP2015/050094 WO2015107928A1 (ja) 2014-01-17 2015-01-06 撮影システム、警告発生装置および方法、撮像装置および方法、並びにプログラム

Publications (2)

Publication Number Publication Date
CN105900010A true CN105900010A (zh) 2016-08-24
CN105900010B CN105900010B (zh) 2019-12-06

Family

ID=53542819

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580004008.8A Expired - Fee Related CN105900010B (zh) 2014-01-17 2015-01-06 成像系统、报警生成设备和方法、成像设备和方法以及程序

Country Status (5)

Country Link
US (1) US10194074B2 (zh)
EP (1) EP3096511A4 (zh)
JP (1) JPWO2015107928A1 (zh)
CN (1) CN105900010B (zh)
WO (1) WO2015107928A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109964480A (zh) * 2016-11-14 2019-07-02 索尼公司 监控系统、监控传感器设备、监控方法和程序
CN110232968A (zh) * 2017-04-23 2019-09-13 奥康科技有限公司 可穿戴装置和校正可穿戴图像传感器的安置的方法及介质
CN111614919A (zh) * 2019-02-22 2020-09-01 株式会社日立制作所 影像记录装置以及头戴式显示器

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105446056B (zh) * 2014-12-25 2018-08-10 北京展讯高科通信技术有限公司 自动对焦装置及方法
US9571741B1 (en) 2015-10-08 2017-02-14 Gopro, Inc. Smart shutter in low light
US9871972B2 (en) * 2016-06-21 2018-01-16 Himax Imaging Limited Auto exposure control system and method
JP7136079B2 (ja) * 2017-03-10 2022-09-13 ソニーグループ株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP7020822B2 (ja) * 2017-09-01 2022-02-16 キヤノン株式会社 システム、撮像装置、情報処理装置、制御方法、及び、プログラム
JP7309346B2 (ja) * 2018-11-29 2023-07-18 キヤノン株式会社 撮像装置、その制御方法、およびそのプログラム
US11616899B1 (en) 2020-10-12 2023-03-28 Apple Inc. In-field monitoring of autofocus performance and instability mitigation in camera systems
JP2022099436A (ja) * 2020-12-23 2022-07-05 ソニーセミコンダクタソリューションズ株式会社 撮像装置
CN113192277B (zh) * 2021-04-29 2022-09-30 重庆天智慧启科技有限公司 小区安防的自动报警系统及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63309936A (ja) * 1987-06-10 1988-12-19 Canon Inc カメラの異常警告装置
JP2003262909A (ja) * 2002-03-07 2003-09-19 Sharp Corp 電子カメラ
CN101106647A (zh) * 2006-07-13 2008-01-16 索尼株式会社 图像拾取装置及其控制方法和计算机程序
JP2008011473A (ja) * 2006-06-30 2008-01-17 Sony Corp 撮像装置、カメラコントロールユニット、ビデオカメラシステム及び制御情報伝送方法

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2183878B (en) * 1985-10-11 1989-09-20 Matsushita Electric Works Ltd Abnormality supervising system
JPH07104542B2 (ja) * 1986-03-27 1995-11-13 ソニー株式会社 ビデオカメラ
US6064429A (en) * 1997-08-18 2000-05-16 Mcdonnell Douglas Corporation Foreign object video detection and alert system and method
US6930718B2 (en) * 2001-07-17 2005-08-16 Eastman Kodak Company Revised recapture camera and method
JP4603761B2 (ja) * 2002-10-24 2010-12-22 シャープ株式会社 合焦状態表示装置、携帯端末装置並びに情報表示プログラム及びそのプログラムを記録した記録媒体
JP4090896B2 (ja) * 2003-01-16 2008-05-28 シャープ株式会社 情報端末装置
JP2005062469A (ja) * 2003-08-12 2005-03-10 Fuji Photo Film Co Ltd デジタルカメラ
JP4738778B2 (ja) * 2003-10-15 2011-08-03 富士通テン株式会社 画像処理装置、運転支援装置および運転支援システム
JP2007520934A (ja) * 2003-12-24 2007-07-26 ウオーカー ディジタル、エルエルシー 画像を自動的に捕捉し、管理する方法および装置
US7158026B2 (en) * 2004-02-06 2007-01-02 @Security Broadband Corp. Security system configured to provide video and/or audio information to public or private safety personnel at a call center or other fixed or mobile emergency assistance unit
JP4612866B2 (ja) 2005-05-20 2011-01-12 キヤノン株式会社 撮像方法および撮像システム
US7556442B2 (en) * 2005-05-24 2009-07-07 Texas Instruments Incorporated Apparatus and method for a smart image-receptor unit
JP4867365B2 (ja) * 2006-01-30 2012-02-01 ソニー株式会社 撮像制御装置、撮像装置および撮像制御方法
TW200818884A (en) * 2006-09-20 2008-04-16 Macnica Inc Control system of image photographing apparatus, as digital camera, digital video-camera or the like using a mobile communication terminal, and image photographing apparatus
US8692886B2 (en) * 2007-10-31 2014-04-08 Timothy James Ennis Multidirectional video capture assembly
JP2009206801A (ja) * 2008-02-27 2009-09-10 Fujifilm Corp 撮像システムおよびその調整方法
JP2010003110A (ja) * 2008-06-20 2010-01-07 Panasonic Corp 車載用動画像データ記録装置
JP2012235796A (ja) * 2009-09-17 2012-12-06 Sharp Corp 診断処理装置、診断処理システム、診断処理方法、診断処理プログラム及びコンピュータ読み取り可能な記録媒体、並びに、分類処理装置
US20110074954A1 (en) * 2009-09-29 2011-03-31 Shien-Ming Lin Image monitoring system for vehicle
JP5771619B2 (ja) * 2009-10-19 2015-09-02 コーニンクレッカ フィリップス エヌ ヴェ データを条件付きで送信するためのデバイス及び方法
US9560324B2 (en) * 2010-02-12 2017-01-31 Drew Incorporated Tactical vision system
JP2011182253A (ja) * 2010-03-02 2011-09-15 Canon Inc 撮像装置及び撮像方法
EP4007270A1 (en) * 2010-09-13 2022-06-01 Contour IP Holding, LLC Portable digital video camera configured for remote image acquisition control and viewing
KR101739784B1 (ko) * 2010-11-17 2017-05-25 삼성전자주식회사 무선기기에서 이미지 촬영을 통해 상대기기를 인식 및 연결하기 위한 장치 및 방법
JP2012205163A (ja) * 2011-03-28 2012-10-22 Panasonic Corp ウェアラブルカメラ
JP5592561B2 (ja) * 2011-03-31 2014-09-17 富士フイルム株式会社 監視カメラの制御システム
JP2013110738A (ja) * 2011-10-27 2013-06-06 Panasonic Corp 画像通信装置および撮像装置
US20130188044A1 (en) * 2012-01-19 2013-07-25 Utechzone Co., Ltd. Intelligent monitoring system with automatic notification and intelligent monitoring device thereof
US20130258122A1 (en) * 2012-03-27 2013-10-03 Research In Motion Limited Method and device for motion enhanced image capture
CN103650383B (zh) * 2012-05-24 2017-04-12 松下电器(美国)知识产权公司 信息通信方法
EP2932704B1 (en) * 2012-12-13 2019-08-07 Thomson Licensing Remote control of a camera module
US9633669B2 (en) * 2013-09-03 2017-04-25 Amazon Technologies, Inc. Smart circular audio buffer
WO2015107927A1 (ja) * 2014-01-17 2015-07-23 ソニー株式会社 画像処理装置および方法、並びにプログラム
US9525865B2 (en) * 2014-10-23 2016-12-20 Texas Instruments Incorporated Fault detection and method of detecting faults in digital imaging systems
JP6464013B2 (ja) * 2015-04-01 2019-02-06 富士フイルム株式会社 撮影装置および方法
AU2017210106B2 (en) * 2016-01-22 2022-09-22 Hayward Industries, Inc. Systems and methods for providing network connectivity and remote monitoring, optimization, and control of pool/spa equipment

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63309936A (ja) * 1987-06-10 1988-12-19 Canon Inc カメラの異常警告装置
JP2003262909A (ja) * 2002-03-07 2003-09-19 Sharp Corp 電子カメラ
JP2008011473A (ja) * 2006-06-30 2008-01-17 Sony Corp 撮像装置、カメラコントロールユニット、ビデオカメラシステム及び制御情報伝送方法
CN101106647A (zh) * 2006-07-13 2008-01-16 索尼株式会社 图像拾取装置及其控制方法和计算机程序

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109964480A (zh) * 2016-11-14 2019-07-02 索尼公司 监控系统、监控传感器设备、监控方法和程序
CN109964480B (zh) * 2016-11-14 2021-01-01 索尼公司 监控系统、监控传感器设备、监控方法
CN110232968A (zh) * 2017-04-23 2019-09-13 奥康科技有限公司 可穿戴装置和校正可穿戴图像传感器的安置的方法及介质
CN111614919A (zh) * 2019-02-22 2020-09-01 株式会社日立制作所 影像记录装置以及头戴式显示器
CN111614919B (zh) * 2019-02-22 2022-08-23 株式会社日立制作所 影像记录装置以及头戴式显示器

Also Published As

Publication number Publication date
WO2015107928A1 (ja) 2015-07-23
EP3096511A4 (en) 2017-09-06
EP3096511A1 (en) 2016-11-23
JPWO2015107928A1 (ja) 2017-03-23
US10194074B2 (en) 2019-01-29
CN105900010B (zh) 2019-12-06
US20160295107A1 (en) 2016-10-06

Similar Documents

Publication Publication Date Title
CN105900010A (zh) 成像系统、报警生成设备和方法、成像设备和方法以及程序
CN108419023B (zh) 一种生成高动态范围图像的方法以及相关设备
US9927948B2 (en) Image display apparatus and image display method
CN105075237B (zh) 图像处理设备、图像处理方法和程序
CN105122794B (zh) 相机遮挡检测
CN103869468B (zh) 信息处理设备
CN114092364B (zh) 图像处理方法及其相关设备
CN101359151A (zh) 摄像装置和聚焦控制方法
JP2009118134A (ja) 自動撮像装置、自動撮像制御方法、画像表示システム、画像表示方法、表示制御装置、表示制御方法
CN102761705B (zh) 图像记录装置、图像编辑装置以及摄像装置
JP2009044602A (ja) 撮像装置、撮像システム及び撮像方法
CN104052917B (zh) 通知控制设备、通知控制方法和存储介质
CN107038362B (zh) 图像处理装置、图像处理方法及计算机可读取的记录介质
CN105847666B (zh) 摄像设备及其控制方法
JP2014093691A (ja) 撮像装置、撮像方法およびプログラム
CN104853066A (zh) 摄像装置、摄像方法
JP2015023512A (ja) 撮影装置、撮影方法及び撮影装置の撮影プログラム
JP2020198556A (ja) 画像処理装置及びその制御方法、プログラム、記憶媒体
CN104247412B (zh) 图像处理装置、摄像装置、图像处理方法、记录介质以及程序
JP2006332774A (ja) 端末装置
CN106210464A (zh) 摄像装置和摄像装置的控制方法
JP2008054031A (ja) デジタルカメラ及び表示制御方法
US20200053278A1 (en) Techniques for improving photograph quality for common problem situations
JP2009055080A (ja) 撮像装置、撮像方法
JP2008160406A (ja) 撮影装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20191206

CF01 Termination of patent right due to non-payment of annual fee