CN113206931A - 摄像设备、摄像系统、控制方法和存储介质 - Google Patents
摄像设备、摄像系统、控制方法和存储介质 Download PDFInfo
- Publication number
- CN113206931A CN113206931A CN202110119750.0A CN202110119750A CN113206931A CN 113206931 A CN113206931 A CN 113206931A CN 202110119750 A CN202110119750 A CN 202110119750A CN 113206931 A CN113206931 A CN 113206931A
- Authority
- CN
- China
- Prior art keywords
- image
- image processing
- processing apparatus
- external
- shooting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/617—Upgrading or updating of programs or applications for camera control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Studio Devices (AREA)
- Facsimiles In General (AREA)
- Image Processing (AREA)
Abstract
本发明提供摄像设备、摄像系统、控制方法和存储介质。摄像设备包括:图像感测单元,其包括图像传感器,并且被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;以及设置单元,其被配置成设置在图像感测单元摄像时要使用的拍摄参数。设置单元在能够进行利用外部图像处理设备对图像信号的图像处理的情况和不能进行利用外部图像处理设备对图像信号的图像处理的情况之间,设置在图像感测单元摄像时要使用的不同的拍摄参数。
Description
技术领域
本发明涉及摄像设备、摄像系统、其控制方法和存储介质,并且具体地,涉及使用摄像设备外部的图像处理设备来执行图像处理的技术。
背景技术
传统上,对由摄像设备拍摄的图像应用用于去除噪声成分的诸如NR处理等的图像处理,以将图像校正为高质量图像。为了使用NR处理获得高质量图像,考虑到NR处理的降噪效果,需要在拍摄时确定诸如光圈值、快门速度、ISO感光度等的拍摄参数。例如,增加ISO感光度会增加噪声成分的强度,但是可以提高快门速度,使得照相机抖动和被摄体抖动的影响降低。因此,当在黑暗环境中拍摄移动被摄体时,期望在进行NR处理之后的噪声成分的强度的可接受范围内增加ISO感光度,并且期望确定诸如快门速度和光圈值等的拍摄参数。
此外,存在不是在摄像设备中而是在摄像设备外部的图像处理设备中进行针对拍摄图像的图像处理的情况。例如,日本特开2007-116291公开了如下技术:将由摄像设备拍摄的图像和摄像设备的型号信息传送到外部图像处理设备,并且外部图像处理设备基于针对摄像设备的各个型号记录的图像质量校正参数对所传送的图像进行图像质量校正。
另外,近年来,随着使用统计特征量等的高级图像处理技术的发展,通过摄像设备外部的图像处理设备执行难以在摄像设备中进行的高级图像处理。这使得能够获得较高质量的图像,在这种情况下,考虑到通过外部图像处理设备执行的图像处理的结果(例如,降噪程度),需要在拍摄时确定拍摄参数。
然而,在传统技术中,已经不可能分别地确定适合于在摄像设备内进行图像处理的情况、以及适合于在摄像设备外部的图像处理设备中进行图像处理的情况的最佳拍摄参数。
发明内容
考虑到以上情形作出本发明,本发明确定了与图像处理对应且适合于拍摄场景的拍摄参数。
根据本发明,提供一种摄像设备,其包括:图像感测部件,其包括图像传感器,并且被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;以及设置部件,其被配置成设置在所述图像感测部件摄像时要使用的拍摄参数,其中,所述设置部件在能够进行利用外部图像处理设备对所述图像信号的图像处理的情况和不能进行利用所述外部图像处理设备对所述图像信号的图像处理的情况之间,设置在所述图像感测部件摄像时要使用的不同的拍摄参数。
此外,根据本发明,提供一种摄像系统,其包括摄像设备和图像处理设备,其中,所述摄像设备包括:图像感测部件,其包括图像传感器,并且被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;第一图像处理部件,其被配置成对所述图像信号进行图像处理;第一确定部件,其被配置成确定在所述图像感测部件摄像时要使用的与所述第一图像处理部件所进行的图像处理相对应的拍摄参数;以及第一通信部件,其被配置成与所述图像处理设备进行信息的发送和接收,以及所述图像处理设备包括:第二通信部件,其被配置成与所述摄像设备进行信息的发送和接收;第二图像处理部件,其被配置成对从外部接收到的图像信号进行图像处理;以及第二确定部件,其被配置成基于从所述摄像设备接收到的信息,确定与所述第二图像处理部件所进行的图像处理相对应的、所述拍摄参数中的至少一个拍摄参数的改变量。
此外,根据本发明,提供一种摄像设备的控制方法,其包括:图像感测步骤,用于通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;以及设置步骤,用于设置在摄像时要使用的拍摄参数,其中,在所述设置步骤中,在能够进行利用外部图像处理设备对所述图像信号的图像处理的情况和不能进行利用所述外部图像处理设备对所述图像信号的图像处理的情况之间,设置在摄像时要使用的不同的拍摄参数。
此外,根据本公开的实施例,提供一种摄像系统的控制方法,所述摄像系统包括摄像设备和图像处理设备,所述摄像设备被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像、输出图像信号并对所述图像信号进行图像处理,所述图像处理设备被配置成对从外部接收到的图像信号进行图像处理,所述控制方法包括:第一确定步骤,用于在所述摄像设备中确定在摄像时要使用的与所述摄像设备所进行的图像处理相对应的拍摄参数;以及第二确定步骤,用于在所述图像处理设备中基于从所述摄像设备接收到的信息,确定与所述图像处理设备所进行的图像处理相对应的、所述拍摄参数中的至少一个拍摄参数的改变量。
此外,根据本公开的实施例,提供一种非暂时性计算机可读存储介质,其存储能够由计算机执行的程序,其中所述程序包括用于使所述计算机执行摄像设备的控制方法的程序代码,所述控制方法包括:图像感测步骤,用于通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;以及设置步骤,用于设置在摄像时要使用的拍摄参数,其中,在能够进行利用外部图像处理设备对所述图像信号的图像处理的情况和不能进行利用所述外部图像处理设备对所述图像信号的图像处理的情况之间,设置在摄像时要使用的不同的拍摄参数。
此外,根据本公开的实施例,提供一种非暂时性计算机可读存储介质,其存储能够由计算机执行的程序,其中所述程序包括用于使所述计算机执行摄像系统的控制方法的程序代码,所述摄像系统包括摄像设备和图像处理设备,所述摄像设备被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像、输出图像信号并对所述图像信号进行图像处理,所述图像处理设备被配置成对从外部接收到的图像信号进行图像处理,所述控制方法包括:第一确定步骤,用于在所述摄像设备中确定在摄像时要使用的与所述摄像设备所进行的图像处理相对应的拍摄参数;以及第二确定步骤,用于在所述图像处理设备中基于从所述摄像设备接收到的信息,确定与所述图像处理设备所进行的图像处理相对应的、所述拍摄参数中的至少一个拍摄参数的改变量。
通过对以下示例性实施例的描述(参考附图),本发明的其它特征将变得明显。
附图说明
结合在说明书中且构成说明书的一部分的附图示出了本发明的实施例,并且与描述一起用于解释本发明的原理。
图1是示出根据本发明的实施例的摄像系统的配置的图;
图2是示出根据实施例的摄像设备的功能配置的框图;
图3是示出根据实施例的外部图像处理设备的功能配置的图;
图4是示出根据实施例的用户属性信息表的示例的图;
图5A是示出根据第一实施例的摄像设备的处理的流程图;
图5B是示出根据第一实施例的外部图像处理设备的处理的流程图;
图6是示出根据第一实施例的EV图表的示例的图;
图7是示出根据第一实施例的拍摄参数的改变量的示例的图;
图8A是示出根据第二实施例的摄像设备的处理的流程图;
图8B是示出根据第二实施例的外部图像处理设备的处理的流程图;以及
图9是示出根据第二实施例的拍摄参数的改变量的示例的图。
具体实施方式
在下文中,将参考附图对实施例进行详细描述。注意,以下实施例并非旨在限制所要求保护的发明的范围,并且不限制为要求在实施例中描述的所有特征的组合的发明。在实施例中描述的多个特征中的两个或更多个特征可以适当地组合。此外,对相同或相似的配置给予相同的附图标记,并且省略其重复描述。
<第一实施例>
将描述本发明的第一实施例。
在本发明的第一实施例中,将描述基于关于外部图像处理设备的用户属性信息来控制摄像设备中的拍摄参数的摄像系统。
图1是示出包括根据本发明的第一实施例的摄像设备的摄像系统的配置示例的图。
摄像系统包括用于拍摄图像的摄像设备101、通信网络102和由服务器等构成的外部图像处理设备103。摄像设备101能够经由网络102与外部图像处理设备103通信。
接下来,将参考图2描述摄像设备101的功能配置。
光学系统201由包括变焦透镜和调焦透镜的透镜组构成,并且在图像感测电路202的摄像面上形成被摄体图像。光学系统201设置有操作构件(未示出),用户直接操作该操作构件以控制光学系统201的变焦位置和调焦位置。
图像感测电路202例如是诸如CCD或CMOS传感器等的图像传感器,并且对通过光学系统201在图像感测电路202的摄像面上形成的光学图像进行光电转换。所获得的模拟图像信号通过A/D转换电路(未示出)转换成数字图像数据,图像感测电路202输出数字图像数据作为RAW图像数据。从图像感测电路202输出的RAW图像数据临时存储在RAM209中。
图像处理电路203对存储在RAM209中的RAW图像数据应用诸如白平衡调整、颜色插值、伽玛处理和NR处理等的各种图像处理,并且生成图像处理的结果图像(例如,JPEG图像)。
控制电路207例如是CPU,并且从ROM208读取用于摄像设备101中包括的各个块的控制程序、将控制程序加载到RAM209并执行控制程序。以这种方式,控制电路207控制摄像设备101中包括的各个块的操作。例如,基于拍摄场景的亮度信息和稍后描述的EV图表,确定诸如光学系统201的光圈值、图像感测电路202的快门速度和ISO感光度等的拍摄参数,并且控制各个块的操作。此外,如将稍后描述的,控制电路207通过进一步使用从外部图像处理设备103发送的拍摄参数的更新信息,确定拍摄参数。
ROM208是电可擦除/可记录的非易失性存储器,并且存储用于摄像设备101中包括的各个块的操作程序以及各个块的操作所需的参数。另外,如将稍后描述的,记录与外部图像处理设备的使用有关的用户ID信息。
RAM209是可重写的易失性存储器,并且用于加载由控制电路207等执行的程序、临时存储通过摄像设备101中设置的各个块的操作而生成的数据、等等。
记录电路204是可移除的存储卡等。记录电路204经由RAM209记录由图像处理电路203处理的图像数据。
显示电路205是诸如LCD等的显示装置,并且显示存储在RAM209中的图像、记录在记录电路204中的图像、用于接收来自用户的指示的操作用户接口、等等。
指示输入电路211包括触摸面板和操作按钮,并且接收来自用户的指示。此外,指示输入电路211包括快门按钮(未图示),用户通过例如半按快门按钮来接通开关SW1以及通过例如全按快门按钮来接通开关SW2,可以给出针对拍摄的指示。
通信电路210经由网络102与外部图像处理设备103进行通信,并且向外部图像处理设备103发送例如表示与外部图像处理设备103的使用相关的用户属性的ID信息(将稍后描述)、以及记录在记录电路204上的RAW图像数据。此外,如将稍后描述的,通信电路210从外部图像处理设备103接收与相对于拍摄参数的改变量有关的信息。
接下来,将参考图3所示的框图描述外部图像处理设备103的功能配置。
外部图像处理电路301对所输入的RAW图像数据应用诸如白平衡调整、颜色插值、伽马处理和NR处理等的各种图像处理。假定通过使用与在摄像设备101的图像处理电路203中应用的图像处理不同的算法,进行在这里应用的图像处理的至少一部分。在本实施例中,作为示例,将说明的是,NR处理的算法与在图像处理电路203中使用的算法不同,而其它图像处理的算法和内容对于摄像设备101和外部图像处理设备103是共同的。此外,将描述的是,通过在外部图像处理设备103中进行的NR处理能够实现比在摄像设备101中进行的NR处理大的降噪效果。
用户属性确定电路302针对所输入的ID信息,通过参考预先与ID信息相关联地记录的针对外部图像处理设备103的使用的用户属性信息,确定用户属性。
拍摄参数转换电路303基于由用户属性确定电路302确定的用户属性信息,确定摄像设备101中的拍摄参数的改变量。
外部通信电路304经由网络102与摄像设备101通信,并且接收例如来自摄像设备101的RAW图像数据和ID信息。另外,外部通信电路304向摄像设备101发送关于由拍摄参数转换电路303确定的拍摄参数的信息等。
ROM305是电可擦除/可记录的非易失性存储器,并且存储用于外部图像处理设备103中包括的各个块的操作程序以及各个块的操作所需的参数。此外,在ROM305中,与ID信息相关联地记录有与外部图像处理设备103的使用有关的用户属性信息。
RAM306是可重写的易失性存储器,并且用于加载由外部图像处理设备103的各个部分执行的程序、临时存储所生成的数据、等等。
接下来,将参考图4描述记录在外部图像处理设备103中的用户属性信息的示例。在用户属性信息表401中,列402表示各个用户的ID信息,列403表示示出了对外部图像处理电路301中的图像处理的使用权限的信息。例如,如果在使用外部图像处理电路301中的图像处理之前要求用户登记,则预先记录了关于各个用户是否已经进行了用户登记的信息。
接下来,将参考图5A和图5B的流程图描述第一实施例中的摄像系统的操作。图5A示出了摄像设备101中的处理,以及图5B示出了外部图像处理设备103中的处理。
首先,在步骤S501中,摄像设备101开始正常摄像准备。具体地,当用户开启摄像设备101时,摄像设备101的控制电路207获取拍摄场景的亮度信息并确定拍摄参数。在本实施例中,将以选择Av优先模式的情况作为示例进行描述,其中在Av优先模式下,用户指定并设置光圈值(Av值)。
将参考图6所示的Ev图表描述在这里进行的确定拍摄参数的方法,特别是确定ISO感光度、快门速度和光圈值的方法。
在图6中,附图标记601表示拍摄场景的亮度信息(Bv值)。附图标记602表示快门速度(Tv值),并且示出了当ISO感光度的范围为从800至12800时使用的Tv值。附图标记603表示光圈值(Av值),并且示出了当ISO感光度的范围为从800至12800时使用的Av值。
当将ISO感光度设置为自动时,使用由设计者基于各个感光度处的噪声特性和对应用NR处理后的降噪效果的预测、针对各个Bv值预先确定的ISO感光度值。在这里,将以由用户设置的Av值为4.0并且由控制电路207计算出的Bv值为7的情况作为示例进行描述。此外,在以上条件下,假定自动时的ISO感光度被预先设计为1600。在这种情况下,将Tv值1/125确定为拍摄参数。总之,ISO感光度为1600,Tv值为1/125,Av值为4.0。
对于当将ISO感光度设置为自动时的ISO感光度设置,增加ISO感光度和增加Tv值具有降低了照相机抖动和被摄体运动模糊的影响的优点,但是另一方面,具有增加了图像噪声的缺点。针对这种权衡,建议设计Ev图表,使得考虑到NR处理的降噪效果,在噪声水平的允许范围内将Tv值设置得尽可能地快。
在步骤S502中,判断用户是否设置了外部合作拍摄模式,其中外部合作拍摄模式是包括由外部图像处理设备103进行的图像处理的拍摄模式。如果未设置该模式,则处理进入步骤S503,并且进行正常摄像操作。在步骤S503中,作为正常摄像操作,根据用户的拍摄指示拍摄图像。在这里,在进行摄像操作以拍摄RAW图像数据之后,通过图像处理电路203执行一系列图像处理,并且处理进入步骤S511。
另一方面,如果设置了外部合作拍摄模式,则处理进入步骤S504,并且开始进行使用外部图像处理设备103的图像处理的一系列摄像操作。在步骤S504中,经由网络102从摄像设备101的通信电路210向外部图像处理设备103发送与外部图像处理设备103的使用有关的ID信息,并且处理进入步骤S505。
在外部图像处理设备103中,在步骤S520中等待ID信息,并且当接收到ID信息时,处理进入步骤S521。在步骤S521中,用户属性确定电路302以所接收到的ID信息用作关键,通过参考图4所示的表,来判断是否能够使用外部图像处理设备103中的图像处理。如果用户属性信息表示肯定,则处理进入步骤S522,以获取表示摄像设备101中的拍摄参数的改变量的信息。如果用户属性信息表示否定,则处理进入步骤S523。
基于摄像设备101中的图像处理与外部图像处理电路301中的图像处理之间的特性差异,预先确定并存储拍摄参数的改变量。图7示出了拍摄参数的改变量的示例。
图7中的图的横轴表示在正常摄像操作中由摄像设备101确定的ISO感光度的选择。纵轴表示在外部合作拍摄模式下ISO感光度的改变量,并且示出了在使ISO感光度在高感光度时比在正常感光度时增加预定量的方向上更新拍摄参数。这意味着,在使用外部图像处理电路301中的NR处理的摄像模式下,被控制为使得以比通常高的ISO感光度进行摄像。通过该改变,能够将快门速度(Tv值)设置得快了ISO感光度的增加量,从而能够抑制照相机抖动和被摄体运动模糊的影响。
另一方面,在步骤S523中,由于外部图像处理设备103中的图像处理不能使用,所以确定为发送:外部图像处理设备103中的图像处理不能使用。
在步骤S524中,经由网络102向照相机发送关于在步骤S522中确定的、图7所示的拍摄参数的改变量的信息,或者发送在步骤S23中确定的、外部图像处理设备103中的图像处理不可用的事实。
摄像设备101在步骤S505中等待,直到其接收到关于拍摄参数的改变量的信息、或者外部图像处理设备103中的图像处理不能使用的事实为止。然后,在步骤S506中,当接收到的内容不是关于拍摄参数的改变量的信息时,即,在外部图像处理设备103中的图像处理不能使用情况下,处理进入步骤S503以进行正常摄像操作。
另一方面,如果接收到的内容是关于拍摄参数的改变量的信息,则处理进入步骤S507,并且基于接收到的信息更新拍摄参数。例如,在图6所示的Ev图表中,当在正常摄像操作中选择的快门速度(Tv值)为Tv值1/125时,重新选择Tv值1/250,其中Tv值1/250是当ISO感光度增加一级时的值。即,在正常摄像操作中的拍摄参数是ISO感光度1600、Tv值1/125和Av值4.0,而在外部协作拍摄模式下拍摄参数是ISO感光度3200、Tv值1/250和Av值4.0。
在步骤S508中,摄像设备101使用更新后的拍摄参数拍摄图像。在这里,进行直至将从摄像电路202输出的RAW图像数据记录在记录电路204中为止的处理。
接下来,在步骤S509中,摄像设备101经网络102向外部图像处理设备103发送所记录的RAW图像数据。
外部图像处理设备103等待,直到在步骤S525中从摄像设备101接收到RAW图像数据为止,并且当接收到RAW图像数据时,在步骤S526中,通过外部图像处理电路301对接收到的RAW图像数据进行图像处理,并且生成图像数据。
在步骤S527中,外部图像处理设备103经由网络102向摄像设备101发送所生成的图像数据。注意,代替向摄像设备101发送所生成的图像数据,外部图像处理设备103可以将所生成的图像数据记录在记录介质(未示出)上,使得用户能够自由地访问所记录的图像数据。
摄像设备101等待,直到在步骤S510中从外部图像处理设备103接收到处理后的图像数据为止,并且当接收到图像数据时,在步骤S511中将接收到的图像数据记录在记录电路204中。
如上所述,根据第一实施例,当进行使用外部图像处理设备的图像处理时,能够通过反映要在外部图像处理设备中进行的图像处理的特性来确定适当的拍摄参数,由此能够改善拍摄图像的图像质量。此外,即使不使用或不能使用外部图像处理设备,也能够确定适合于要在图像处理设备中进行的图像处理的特性的拍摄参数。
在本实施例中,已经以通过外部图像处理设备应用NR处理的情况作为示例进行了描述,但是本发明中的图像处理的内容不限于此。例如,可以进行像差校正,以校正在镜头的光圈被设置为接近全开状态的情况下产生的像差。在这种情况下,如果在外部图像处理设备中校正像差,则可以与通常相比,控制镜头的光圈更向开放侧改变。通过这样,即使拍摄场景是暗的,因为光圈被向开放侧改变,所以也能够接收到足够的光量,并且能够拍摄高分辨率的图像。即,可以应用任意的图像处理,只要在外部图像处理设备中应用具有与在摄像设备中进行的图像处理的特性不同的特性的图像处理即可。
此外,在本实施例中,已经以在Av优先摄像模式下控制ISO感光度的情况作为控制拍摄参数的示例进行了描述,但是本发明中的控制拍摄参数的方法不限于此。例如,在具有ISO感光度自动模式的摄像模式下,如果设置了要使用的ISO感光度的上限,则可以以提高该上限的方式控制拍摄参数。
在以上描述中,说明了:在基于用户属性而判断为能够使用图像处理的情况下,外部图像处理设备103确定如图7所示的拍摄参数的改变量并向摄像设备101通知该改变量,然而,本发明不限于此。拍摄参数可以从摄像设备101向外部图像处理设备103发送,并且如果能够使用图像处理,则外部图像处理设备103可以改变所发送的拍摄参数并向摄像设备101发送改变后的拍摄参数。可选地,可以向摄像设备101仅发送所发送的拍摄参数的改变量。
此外,在本实施例中,说明了:在拍摄图像之后,从摄像设备101向外部图像处理设备103发送所获得的RAW图像信号,并且在外部图像处理设备103中对RAW图像信号进行图像处理。然而,在本发明中对RAW图像信号应用图像处理的定时不限于此,例如,可以在摄像时仅进行与外部图像处理设备103的使用有关的用户属性信息和与拍摄参数的更新有关的处理的发送,并且可以在摄像之后进行外部图像处理设备103中的图像处理。例如,可以将记录在摄像设备101中的记录介质上的RAW图像传送到用户的PC上,然后从用户的PC发送到应用图像处理的外部图像处理设备103。
此外,在本实施例中,已经以摄像设备101和外部图像处理设备103经由网络102发送和接收信息的情况作为示例进行了描述,然而,摄像设备101与外部处理设备103之间的发送和接收不限于此。例如,可以使用如下配置:使用诸如智能电话等的边缘装置(edgedevice)作为外部图像处理设备103,并且摄像设备101和边缘设备经由有线或无线通信彼此直接通信。
此外,代替RAW图像,可以向外部图像处理设备103发送由摄像设备101应用图像处理后的图像(例如,JPEG图像)。在这种情况下,外部图像处理设备103对所发送的图像(例如,JPEG图像)应用诸如NR处理等的图像处理。
此外,在本实施例中,以如下情况作为示例进行了说明:用于确定与外部图像处理设备103的使用相关的用户属性信息的用户属性确定电路302和用于应用图像处理的外部图像处理电路301配置在同一设备中。然而,本发明中的外部图像处理设备的配置不限于此。例如,可以将用户属性确定电路配置成经由网络与摄像设备101通信,并且可以将外部图像处理电路301配置成在用户家中的PC上执行的软件。
此外,在本实施例中,作为示例,对摄像设备101自动地应用外部图像处理设备103所确定的拍摄参数的更新,并且将更新后的拍摄参数用于摄像。然而,拍摄参数的控制方法不限于此。例如,可以在摄像设备101的显示电路上向用户通知由外部图像处理设备103确定的拍摄参数的改变量作为推荐值,并且可以根据用户的选择更新拍摄参数。即,可以使用利用关于转换后的拍摄参数的信息的任意方法,只要该方法用于进行将与外部图像处理设备103的使用相关的用户属性信息转换为关于拍摄参数的信息的处理即可。
<第二实施例>
接下来,将描述本发明的第二实施例。由于第二实施例中的摄像系统的配置与参考图1至图3描述的相同,所以在这里将省略其描述。
在上述第一实施例中,已经描述了基于与外部图像处理设备103的使用有关的用户属性信息来确定拍摄参数的改变量的情况。与之相对地,将描述基于与由摄像设备101进行的摄像有关的拍摄信息来改变拍摄参数的情况。
如在第一实施例中描述的情况那样,即使外部图像处理设备103中的NR处理具有较好的降噪效果,也存在根据拍摄场景和被摄体而摄像设备101和外部图像处理设备103中进行的降噪效果的差异小的情况。在该情况下,为了适当地确定拍摄参数的改变量,需要使用关于拍摄场景和拍摄图像的信息。
接下来,将参考图8A和图8B描述第二实施例中的摄像操作。图8A示出了摄像设备101中的处理,以及图8B示出了外部图像处理设备103中的处理。此外,在图8A和图8B所示的处理中,对与图5A和图5B所描述的处理相同的处理给予相同的步骤编号,并且将适当省略其描述。
在步骤S804中,摄像设备101在准备摄像期间拍摄图像、获取RAW图像数据并在图像处理电路203中对所获取的RAW图像数据应用图像处理,以生成图像数据。
在步骤S805中,摄像设备101向外部图像处理设备103发送在步骤S804中获取的RAW图像数据和经过图像处理的图像数据作为拍摄信息。
在步骤S820中,外部图像处理电路301等待对拍摄信息的接收,并且当其接收到图像信息时,处理进入步骤S821,并且外部图像处理电路301对接收到的RAW图像数据应用NR处理。
在步骤S822中,拍摄参数转换电路303确定拍摄参数的改变量,具体地,拍摄参数转换电路303比较从摄像设备101发送的经过图像处理的图像数据与由外部图像处理电路301所生成的经过外部图像处理的图像数据之间(图像信号之间)的噪声程度。例如,当计算出两个图像之间的差值时,该差值表示摄像设备101与外部图像处理设备103之间的降噪效果的差异。因此,能够通过使用差值的信号的幅度作为噪声评价值来比较噪声的程度。
拍摄参数转换电路303基于计算出的噪声评价值和图9所示的特性,确定拍摄参数的更新内容。在图9中,横轴表示计算出的噪声评价值,纵轴以级数表示ISO感光度的改变量。例如,如果计算出的噪声评价值大于图中的附图标记902所示的值,则将ISO感光度的改变量确定为一级。在这种情况下,与正常摄像操作相比,能够提高ISO感光度并能够将快门速度设置得更快,所以能够降低照相机抖动和被摄体模糊的影响,由此能够改善图像质量。另一方面,如果计算出的噪声评价值小于图中的附图标记901所示的值,则确定ISO感光度没改变。
然后,在步骤S823中,在步骤S822中确定了拍摄参数的改变量的情况下,外部图像处理电路301向摄像设备101发送拍摄参数的改变量。与之相对地,在步骤S822中确定不改变拍摄参数的情况下,外部图像处理电路301向摄像设备101发送不改变拍摄参数的通知。
在步骤S806中,摄像设备101等待与拍摄参数的改变量有关的信息,并且当其接收到与拍摄参数的改变量有关的信息时,处理进入步骤S507,随后摄像设备101进行参考图5A描述的处理。另一方面,当摄像设备接收到不改变拍摄参数的通知时,处理进入步骤S503,随后摄像设备101进行参考图5A描述的处理。
如上所述,根据第二实施例,能够针对各个拍摄场景确定反映了外部图像处理设备中要进行的图像处理的特性的拍摄参数。
注意,通过使用如下情况作为示例说明了第二实施例:在准备摄像期间获得的RAW图像数据和经过摄像设备101中的图像处理的图像数据作为拍摄信息被发送至外部图像处理设备103,并且用于确定拍摄参数的改变量。然而,本发明不将从摄像设备101发送至外部图像处理设备103的图像数据限制于此。例如,可以发送关于拍摄场景的亮度的信息、关于被摄体的类型的信息以及关于包含在被摄体中的边缘和纹理成分的特性的信息作为拍摄信息,并且可以基于该拍摄信息估计由外部图像设备应用的图像处理的结果。
此外,在本实施例中,已经描述了发送RAW图像数据和应用了摄像设备101的图像处理的图像处理结果图像这两者的情况,然而,可以向外部图像处理设备仅发送RAW图像信号,并且外部图像处理设备103可以对RAW图像信号应用与摄像设备101相同的图像处理而且可以使用得到的图像作为图像处理结果图像。
此外,在本实施例中,已经以外部图像处理设备103确定摄像设备101的拍摄参数的改变量的配置作为示例进行了描述,但是本发明不限于此。例如,当摄像设备101能够确认为将使用由外部图像处理设备103进行的图像处理时,摄像设备101可以根据预定规则改变拍摄参数。具体地,当确认为将使用由外部图像处理设备103进行的图像处理时,摄像设备101可以进行处理,使得将Ev图表改变成随着ISO感光度增加一级,能够设置的ISO感光度上限增加一级,等等。如果能够使用由外部图像处理设备103进行的NR处理,则可以增加拍摄参数的ISO感光度,以及如果能够使用像差校正处理,则可以将拍摄参数的光圈移向开放侧。此外,如果能够使用由外部图像处理设备103进行的NR处理和像差校正处理这两者,则可以增加ISO感光度,并且可以将光圈移向开放侧。即,可以根据在外部图像处理设备103中使用的图像处理的类型改变拍摄参数。
作为摄像设备101确认是否使用由外部图像处理设备103进行的图像处理的方法,可以想到各种方法。例如,可以想到摄像设备101与外部图像处理设备通信以对用户进行认证这样的方法、以及使用户将从外部图像处理设备103获得的认证码输入到摄像设备101中这样的方法。可选地,可以使用如下配置:使用户在摄像设备101的设置菜单上选择是否使用由外部图像处理设备进行的图像处理。利用该配置,由于摄像设备101自身改变拍摄参数,所以不总是需要在外部图像处理设备103中设置拍摄参数转换电路303。
此外,在本实施例中,已经以摄像设备101和外部图像处理设备103分别配置的情况作为示例进行了描述,但是本发明中的摄像设备101的配置不限于此。例如,摄像设备101可以设置有多个图像处理电路,其中至少一些图像处理电路的处理内容彼此不同。在这种情况下,基于在正常摄像操作期间使用的图像处理电路的特性,设置拍摄参数,并且当要使用另一图像处理电路时,可以将拍摄参数更新为基于要使用的图像处理电路的图像处理的特性所设置的拍摄参数。通过这样,即使按照特性选择性地使用具有不同特性的多种类型的图像处理,也能够根据相应类型的图像处理的特性确定拍摄参数。
此外,在本实施例中,已经以在当摄像操作开始时的准备摄像期间向外部图像处理设备103发送RAW图像数据的情况作为示例进行了描述,但是本发明不将发送RAW图像数据的定时限制于此。例如,可以在准备摄像期间检测到拍摄场景或被摄体已经显著改变的情况下,或者在要使用的拍摄参数显著改变的情况下,进行拍摄信息的发送和拍摄参数的更新。另外,可以在设置等于或高于预定阈值的ISO感光度的情况下,或者在预测到当应用摄像设备中的正常图像处理时可能无法实现期望的图像质量的情况下(诸如在拍摄图像中检测到照相机抖动或运动模糊的情况下),进行拍摄信息的发送和拍摄参数的更新。
其它实施例
本发明的实施例还可以通过如下方法实现:经由网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然已经参考示例性实施例描述了本发明,但是应当理解,本发明不限于所公开的示例性实施例。以上权利要求书的范围符合最宽泛的解释,以包含所有这些变型、等同结构和功能。
Claims (17)
1.一种摄像设备,其包括:
图像感测部件,其包括图像传感器,并且被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;以及
设置部件,其被配置成设置在所述图像感测部件摄像时要使用的拍摄参数,
其中,所述设置部件在能够进行利用外部图像处理设备对所述图像信号的图像处理的情况和不能进行利用所述外部图像处理设备对所述图像信号的图像处理的情况之间,设置在所述图像感测部件摄像时要使用的不同的拍摄参数。
2.根据权利要求1所述的摄像设备,其中,所述拍摄参数包括ISO感光度、快门速度和镜头的光圈值其中至少之一。
3.根据权利要求1所述的摄像设备,还包括通信部件,所述通信部件被配置成与所述外部图像处理设备进行信息的发送和接收。
4.根据权利要求3所述的摄像设备,其中,所述通信部件从所述外部图像处理设备接收表示是否能够在所述外部图像处理设备中对所述图像信号应用图像处理的信息。
5.根据权利要求4所述的摄像设备,其中,所述通信部件向所述外部图像处理设备发送所述摄像设备的ID信息,
其中,所述外部图像处理设备基于从所述摄像设备发送的ID信息,判断是否能够在所述外部图像处理设备中对所述图像信号应用图像处理。
6.根据权利要求3至5中任一项所述的摄像设备,其中,在能够在所述外部图像处理设备中对所述图像信号应用图像处理的情况下,所述设置部件基于经由所述通信部件从所述外部图像处理设备获得的信息,设置所述拍摄参数。
7.根据权利要求6所述的摄像设备,其中,经由所述通信部件从所述外部图像处理设备获得的信息是指拍摄参数相对于在不能在所述外部图像处理设备中对所述图像信号应用图像处理的情况下设置的拍摄参数的改变量。
8.根据权利要求6所述的摄像设备,其中,所述通信部件向所述外部图像处理设备发送在不能在所述外部图像处理设备中对所述图像信号应用图像处理的情况下所设置的拍摄参数,并且从所述外部图像处理设备接收在能够在所述外部图像处理设备中对所述图像信号应用图像处理的情况下所设置的拍摄参数。
9.根据权利要求6所述的摄像设备,其中,所述外部图像处理设备基于经过图像处理的图像信号和未经过图像处理的图像信号之间的差,确定用于所述设置部件设置所述拍摄参数的信息。
10.根据权利要求9所述的摄像设备,还包括图像处理部件,所述图像处理部件被配置成使用与所述外部图像处理设备中的图像处理的算法不同的算法进行图像处理。
11.根据权利要求1至3中的任一项所述的摄像设备,其中,所述设置部件根据用户输入来判断是否能够在所述外部图像处理设备中对所述图像信号应用图像处理。
12.根据权利要求11所述的摄像设备,其中,在输入了用于在所述外部图像处理设备中进行图像处理的认证码的情况下,所述设置部件判断为能够在所述外部图像处理设备中对所述图像信号应用图像处理。
13.一种摄像系统,其包括摄像设备和图像处理设备,其中,
所述摄像设备包括:
图像感测部件,其包括图像传感器,并且被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;
第一图像处理部件,其被配置成对所述图像信号进行图像处理;
第一确定部件,其被配置成确定在所述图像感测部件摄像时要使用的与所述第一图像处理部件所进行的图像处理相对应的拍摄参数;以及
第一通信部件,其被配置成与所述图像处理设备进行信息的发送和接收,以及
所述图像处理设备包括:
第二通信部件,其被配置成与所述摄像设备进行信息的发送和接收;
第二图像处理部件,其被配置成对从外部接收到的图像信号进行图像处理;以及
第二确定部件,其被配置成基于从所述摄像设备接收到的信息,确定与所述第二图像处理部件所进行的图像处理相对应的、所述拍摄参数中的至少一个拍摄参数的改变量。
14.一种摄像设备的控制方法,其包括:
图像感测步骤,用于通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;以及
设置步骤,用于设置在摄像时要使用的拍摄参数,
其中,在所述设置步骤中,在能够进行利用外部图像处理设备对所述图像信号的图像处理的情况和不能进行利用所述外部图像处理设备对所述图像信号的图像处理的情况之间,设置在摄像时要使用的不同的拍摄参数。
15.一种摄像系统的控制方法,所述摄像系统包括摄像设备和图像处理设备,所述摄像设备被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像、输出图像信号并对所述图像信号进行图像处理,所述图像处理设备被配置成对从外部接收到的图像信号进行图像处理,所述控制方法包括:
第一确定步骤,用于在所述摄像设备中确定在摄像时要使用的与所述摄像设备所进行的图像处理相对应的拍摄参数;以及
第二确定步骤,用于在所述图像处理设备中基于从所述摄像设备接收到的信息,确定与所述图像处理设备所进行的图像处理相对应的、所述拍摄参数中的至少一个拍摄参数的改变量。
16.一种非暂时性计算机可读存储介质,其存储能够由计算机执行的程序,其中所述程序包括用于使所述计算机执行摄像设备的控制方法的程序代码,所述控制方法包括:
图像感测步骤,用于通过对形成在摄像面上的光学图像进行光电转换来进行摄像并输出图像信号;以及
设置步骤,用于设置在摄像时要使用的拍摄参数,
其中,在能够进行利用外部图像处理设备对所述图像信号的图像处理的情况和不能进行利用所述外部图像处理设备对所述图像信号的图像处理的情况之间,设置在摄像时要使用的不同的拍摄参数。
17.一种非暂时性计算机可读存储介质,其存储能够由计算机执行的程序,其中所述程序包括用于使所述计算机执行摄像系统的控制方法的程序代码,所述摄像系统包括摄像设备和图像处理设备,所述摄像设备被配置成通过对形成在摄像面上的光学图像进行光电转换来进行摄像、输出图像信号并对所述图像信号进行图像处理,所述图像处理设备被配置成对从外部接收到的图像信号进行图像处理,所述控制方法包括:
第一确定步骤,用于在所述摄像设备中确定在摄像时要使用的与所述摄像设备所进行的图像处理相对应的拍摄参数;以及
第二确定步骤,用于在所述图像处理设备中基于从所述摄像设备接收到的信息,确定与所述图像处理设备所进行的图像处理相对应的、所述拍摄参数中的至少一个拍摄参数的改变量。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020-015534 | 2020-01-31 | ||
JP2020015534A JP7475148B2 (ja) | 2020-01-31 | 2020-01-31 | 撮像装置、撮像システム、及びそれらの制御方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113206931A true CN113206931A (zh) | 2021-08-03 |
Family
ID=73856992
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110119750.0A Pending CN113206931A (zh) | 2020-01-31 | 2021-01-28 | 摄像设备、摄像系统、控制方法和存储介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11616907B2 (zh) |
EP (1) | EP3860110A1 (zh) |
JP (1) | JP7475148B2 (zh) |
CN (1) | CN113206931A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7438779B2 (ja) * | 2020-02-13 | 2024-02-27 | キヤノン株式会社 | 画像処理装置、画像処理システム、および、それらの制御方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007116291A (ja) | 2005-10-19 | 2007-05-10 | Ims:Kk | 補正画像提供システムおよびこのシステムに使用される補正処理装置 |
JP2009105687A (ja) | 2007-10-24 | 2009-05-14 | Mitsubishi Electric Corp | 撮像システム |
US20090163185A1 (en) * | 2007-12-24 | 2009-06-25 | Samsung Electronics Co., Ltd. | Method and system for creating, receiving and playing multiview images, and related mobile communication device |
US8797415B2 (en) * | 2011-09-26 | 2014-08-05 | Google Inc. | Device, system and method for image capture device using weather information |
JP2013157676A (ja) | 2012-01-26 | 2013-08-15 | Canon Inc | 撮影支援システム、撮影支援装置、撮影支援装置の制御方法、およびプログラム |
JP2013239861A (ja) | 2012-05-14 | 2013-11-28 | Freebit Co Ltd | 画像撮影システム |
US20160142625A1 (en) * | 2014-11-13 | 2016-05-19 | Lenovo (Singapore) Pte. Ltd. | Method and system for determining image composition attribute adjustments |
CN108347560A (zh) * | 2018-01-17 | 2018-07-31 | 浙江大华技术股份有限公司 | 一种摄像机防太阳灼伤方法、摄像机及可读存储介质 |
JP7247501B2 (ja) * | 2018-09-21 | 2023-03-29 | 富士フイルムビジネスイノベーション株式会社 | 画像処理装置およびプログラム |
-
2020
- 2020-01-31 JP JP2020015534A patent/JP7475148B2/ja active Active
- 2020-12-23 EP EP20216829.0A patent/EP3860110A1/en active Pending
-
2021
- 2021-01-25 US US17/157,798 patent/US11616907B2/en active Active
- 2021-01-28 CN CN202110119750.0A patent/CN113206931A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
JP7475148B2 (ja) | 2024-04-26 |
US11616907B2 (en) | 2023-03-28 |
JP2021125711A (ja) | 2021-08-30 |
US20210243365A1 (en) | 2021-08-05 |
EP3860110A1 (en) | 2021-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101900097B1 (ko) | 이미지 캡처 방법 및 이미지 캡처 장치 | |
WO2014132465A1 (ja) | 電子機器 | |
JP5553230B2 (ja) | 撮像装置および撮像処理方法 | |
US8896742B2 (en) | Image pickup apparatus, and control method and program thereof | |
KR102375688B1 (ko) | 촬상 장치, 촬영 시스템 및 촬영 방법 | |
US20180197282A1 (en) | Method and device for producing a digital image | |
US11546553B2 (en) | Image capturing apparatus using learned model, information processing apparatus, methods of controlling respective apparatuses, learned model selection system, and storage medium | |
US10270991B2 (en) | Image processing apparatus, image processing method, and computer-readable recording medium | |
KR20150089933A (ko) | 인터벌 촬영을 실행하는 촬상 장치, 촬상 방법 및 기억 매체 | |
US8854498B2 (en) | Image pick-up apparatus and control method thereof | |
US9602709B2 (en) | Image pickup apparatus, control method of image pickup apparatus, and program | |
EP3860110A1 (en) | Image capturing apparatus, image capturing system, control method therefor, and program | |
JP5847484B2 (ja) | 撮像装置、その制御方法およびプログラム | |
JP5629456B2 (ja) | 撮像装置及びその制御方法 | |
JP2011101073A (ja) | 撮像装置、ホワイトバランス設定方法、及び、プログラム | |
CN105191284B (zh) | 摄像装置及其控制方法 | |
JP2012095223A (ja) | 撮像装置、撮像方法及びプログラム | |
JP2022045567A (ja) | 撮像制御装置、撮像制御方法、及びプログラム | |
JP4941424B2 (ja) | 撮像装置および画像処理プログラム | |
JP4967880B2 (ja) | 撮像装置 | |
JP6354443B2 (ja) | 制御装置、制御システム、制御方法及びプログラム | |
US11283992B2 (en) | Image capturing apparatus that captures image for display and method of controlling image capturing apparatus | |
JP2018180384A (ja) | 撮像装置及びその制御方法 | |
JP5799550B2 (ja) | 撮像装置、撮像方法および撮像プログラム | |
US20150156408A1 (en) | Imaging apparatus, method for controlling the same, and recording medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |