CN114946170B - 生成图像的方法和电子设备 - Google Patents
生成图像的方法和电子设备 Download PDFInfo
- Publication number
- CN114946170B CN114946170B CN201980102874.9A CN201980102874A CN114946170B CN 114946170 B CN114946170 B CN 114946170B CN 201980102874 A CN201980102874 A CN 201980102874A CN 114946170 B CN114946170 B CN 114946170B
- Authority
- CN
- China
- Prior art keywords
- image
- camera
- light source
- setting
- electronic device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 82
- 238000003384 imaging method Methods 0.000 claims abstract description 46
- 230000008569 process Effects 0.000 claims description 57
- 230000035945 sensitivity Effects 0.000 claims description 22
- 238000012545 processing Methods 0.000 description 21
- 238000004891 communication Methods 0.000 description 9
- 238000009877 rendering Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000003702 image correction Methods 0.000 description 4
- 239000000463 material Substances 0.000 description 4
- 238000003860 storage Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000011946 reduction process Methods 0.000 description 2
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 125000001475 halogen functional group Chemical group 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
提供了一种图像拍摄方法,该方法应用于电子设备的摄像头组件,该方法包括根据所述摄像头组件成像的第一设置拍摄第一图像;根据所述摄像头组件成像的第二设置拍摄第二图像,其中所述成像的第二设置用于检测所述第二图像中发射光强于其他区域的区域;以及基于所述第二图像检测光源区域,根据所述光源区域调整所述第一图像以生成目标图像。
Description
技术领域
本公开涉及一种生成图像的方法,该方法应用于电子设备的摄像头组件和此类电子设备的摄像头组件。
背景技术
智能手机和平板电脑终端等电子设备广泛应用于我们的日常生活中。如今,许多电子设备都配备了摄像头组件来拍摄图像。有些电子设备是便携式的,因此便于携带。因此,该电子设备的用户可以容易地通过在任何时间、任何地点使用该电子设备的摄像头组件拍摄图像。
然而,如果电子设备的用户在夜间拍摄图像,图像会包括过度曝光或光晕的一个或多个光源区域。拍摄图像后,可以对图像中的过度曝光光源区域和光晕区域进行图像校正处理。为了执行图像校正处理以调整光源区域,精确检测光源区域非常重要。
申请内容
本公开旨在解决上述技术问题中的至少一个。因此,本公开需要提供成像设备和电子设备。
根据本公开,一种图像生成方法,应用于电子设备的摄像头组件,所述方法可以包括:
根据所述摄像头组件成像的第一设置拍摄第一图像;
根据所述摄像头组件成像的第二设置拍摄第二图像,其中所述成像的第二设置用于检测所述第二图像中发射光强于其他区域的区域;以及
基于所述第二图像检测光源区域,根据所述光源区域调整所述第一图像以生成目标图像。
在一些实施例中,所述成像的第二设置是短曝光,所述短曝光的曝光时间短于所述成像的第一设置的曝光时间。
在一些实施例中,所述短曝光的曝光时间设置在1/8000s和1/6000s之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光。
在一些实施例中,所述成像的第二设置为低ISO灵敏度,所述低ISO灵敏度低于所述成像的第一设置的ISO灵敏度。
在一些实施例中,所述低ISO灵敏度设置在50和100之间,以至于不会检测到来自所述第二图像中的光源区域以外区域的光。
在一些实施例中,所述成像的第二设置是低曝光值,所述低曝光值低于所述成像的第一设置的曝光值。
在一些实施例中,所述低曝光值设置在-4.0和-3.5之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光。
在一些实施例中,检测所述光源区域包括:
将所述第二图像中特定区域的亮度与阈值进行比较;和
如果所述特定区域的亮度大于阈值,则将所述特定区域视为所述光源区域。
在一些实施例中,该方法还可包括:
基于检测到的所述光源区域生成光源图,所述光源图用于指示所述光源区域位于所述第二图像中的位置。
在一些实施例中,所述摄像头组件包括至少一第一摄像头和一第二摄像头;和
所述第二图像由所述第一摄像头或所述第二摄像头拍摄。
在一些实施例中,所述第一图像由所述第一摄像头和所述第二摄像头中的一个拍摄,以及
所述方法还包括:
由所述第一摄像头和所述第二摄像头中的另一个拍摄第三图像;
基于所述第一图像和所述第三图像计算深度图;和
至少基于所述第一图像、所述第二图像、所述深度图和检测到的所述光源区域,通过图像生成处理来生成所述目标图像。
在一些实施例中,所述摄像头组件包括位于所述电子设备背面的主摄像头,以及
所述第一图像和所述第二图像由所述主摄像头拍摄。
在一些实施例中,所述摄像头组件包括位于所述电子设备正面的副摄像头,以及
所述第一图像和所述第二图像由所述副摄像头拍摄。
根据本公开,电子设备可包括:
摄像头组件,配置为根据成像的第一设置拍摄第一图像,根据成像的第二设置拍摄第二图像,其中所述成像的第二设置用于检测所述第二图像中发射光强于其他区域的区域,以及
图像处理器,配置为基于所述第二图像检测光源区域,根据所述光源区域调整所述第一图像以生成目标图像。
在一些实施例中,所述成像的第二设置是短曝光,所述短曝光的曝光时间短于所述成像的第一设置。
在一些实施例中,所述短曝光的曝光时间设置在1/8000s和1/6000s之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光。
在一些实施例中,所述成像的第二设置为低ISO灵敏度,所述低ISO灵敏度低于所述成像的第一设置的ISO灵敏度。
在一些实施例中,所述低ISO灵敏度设置在50和100之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光。
在一些实施例中,所述成像的第二设置是低曝光值,所述低曝光值低于所述成像的第一设置的曝光值。
在一些实施例中,所述低曝光值设置在-4.0和-3.5之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光。
在一些实施例中,所述图像处理器进一步配置为:
将所述第二图像中特定区域的亮度与阈值进行比较;和
如果所述特定区域的亮度大于阈值,则将所述特定区域视为所述光源区域。
在一些实施例中,所述图像处理器进一步配置为:
基于检测到的所述光源区域生成光源图,所述光源图用于指示所述光源区域位于所述第二图像中的位置。
在一些实施例中,所述摄像头组件包括至少一第一摄像头和一第二摄像头;和
所述第二图像由所述第一摄像头或所述第二摄像头拍摄。
在一些实施例中,所述第一图像由所述第一摄像头和所述第二摄像头中的一个拍摄,并且
所述图像处理器进一步配置为:
由所述第一摄像头和所述第二摄像头中的另一个拍摄第三图像;
基于所述第一图像和所述第三图像计算深度图;和
至少基于所述第一图像、所述第二图像、所述深度图和检测到的所述光源区域,通过图像生成处理来生成所述目标图像。
在一些实施例中,所述摄像头组件包括位于所述电子设备背面的主摄像头,以及
所述第一图像和所述第二图像由所述主摄像头拍摄。
在一些实施例中,所述摄像头组件包括位于所述电子设备正面的副摄像头,以及
所述第一图像和所述第二图像由所述副摄像头拍摄。
附图说明
本公开实施例的这些和/或其他方面和优点将从以下参考附图的描述中变得明显和更容易理解,其中:
图1示出了根据本公开第一实施例的电子设备的背面视图;
图2示出了根据本公开第一实施例的电子设备的正面视图;
图3示出了根据本公开第一实施例的电子设备的框图;
图4示出了由根据本公开的第一实施例的电子设备执行的图像拍摄处理的流程图;
图5示出了根据成像的第一设置由第一主摄像头拍摄的第一主图像或由第二主摄像头拍摄的第二主图像;
图6示出了根据成像的第二设置由第一主摄像头拍摄的辅助图像;
图7示出了根据本公开第二实施例的电子设备的背面视图;和
图8示出了由根据本公开第二实施例的电子设备执行的图像拍摄处理的流程图。
具体实施方式
将详细描述本公开的实施例,并在附图中示出实施例的示例。在整个描述中,相同或类似的元件以及具有相同或类似功能的元件由类似的附图标记表示。本文参考附图描述的实施例是解释性的,旨在说明本公开,但不应被解释为限制本公开。
[第一实施例]
图1示出了根据本公开第一实施例的电子设备10的背面视图,图2示出了根据本公开第一实施例的电子设备10的正面视图。
如图1和图2所示,电子设备10可以包括显示器20和摄像头组件30。在本实施例中,摄像头组件30包括第一主摄像头32、第二主摄像头34和副摄像头36。第一主摄像头32和第二主摄像头34可以在电子设备10的背面拍摄图像,并且副摄像头36可以在电子设备10的正面拍摄图像。因此,第一主摄像头32和第二主摄像头34被称为外摄像头,而副摄像头36被称为内摄像头。例如,电子设备10可以是移动电话、平板电脑或个人数字助理等。
第一主摄像头32和第二主摄像头34可以具有相同的性能和/或特征,或者它们可以具有不同的性能和/或特征。例如,在第一主摄像头32和第二主摄像头34彼此具有不同的性能和/或特征的情况下,第一主摄像头32可以配备全彩色图像传感器,第二主摄像头34可以配备黑白图像传感器。此外,第一主摄像头32可以是适于拍摄静止图像的摄像头,第二主摄像头34可以是适于拍摄运动图像的摄像头。此外,第一主摄像头32可以是配备广角镜头的摄像头,第二主摄像头34可以是配备长焦镜头的摄像头。
在本实施例中,副摄像头36的性能低于第一主摄像头32和第二主摄像头34的性能。然而,副摄像头36的性能也可以与第一主摄像头32和第二主摄像头34的性能相同。
尽管本实施例提供的电子设备10具有三个摄像头,但电子设备可以具有三个以上的摄像头。例如,电子设备10可以具有三个、四个或五个等主摄像头。
图3示出了根据本实施例的电子设备10的框图。如图3所示,除了显示器20和摄像头组件30之外,电子设备10还可以包括主处理器40、图像信号处理器42、存储器44、电源电路46和通信电路48。显示器20、摄像头组件30、主处理器40、图像信号处理器42、存储器44、电源电路46和通信电路48经由总线50连接在一起。
主处理器40执行存储在存储器44中的一个或多个程序。主处理器40通过执行程序来实现电子设备10的各种应用和数据处理。主处理器40可以是一个或多个计算机处理器。主处理器40不限于一个CPU核,而是它可以具有多个CPU核。主处理器40可以是电子设备10的主CPU、图像处理单元(image processing unit,IPU)或具有摄像头组件30的DSP。
图像信号处理器42控制摄像头组件30并处理由摄像头组件30拍摄的图像。例如,图像信号处理器42可以对摄像头组件30拍摄的图像执行去马赛克处理、降噪处理、自动曝光处理、自动聚焦处理、自动白平衡处理、高动态范围处理等。
在本实施例中,主处理器40和图像信号处理器42彼此协作以通过摄像头组件30获得图像。也就是说,主处理器40和图像信号处理器42被配置为通过摄像头组件30拍摄图像,以及对图像执行各种图像处理。
存储器44存储由主处理器40执行的程序和各种数据。例如,图像的数据存储在存储器44中。
存储器44可以是高速RAM存储器,或非易失性存储器,例如闪存和磁盘存储器。
电源电路46可以具有诸如锂离子可充电电池(未示出)之类的电池和用于管理电池的电池管理单元(battery management unit,BMU)。
通信电路48被配置为接收和发送数据,以便通过无线通信与互联网或其他设备通信。无线通信可以采用任何通信标准或协议,包括但不限于全球移动通信系统(GlobalSystem for Mobile communication,GSM)、码分多址(Code Division Multiple Access,CDMA)、长期演进(Long Term Evolution,LTE)、LTE Advanced、第五代(5G)。
通信电路48可以包括天线和射频(radio frequency,RF)电路。
图4示出了根据本实施例的电子设备10执行的图像拍摄处理的流程图。在本实施例中,图像拍摄处理由主处理器40与图像信号处理器42协作执行。因此,在本实施例中,主处理器40和图像信号处理器42构成图像处理器。
如图4所示,电子设备10设置摄像头组件30成像的第一设置(步骤S10)。在本实施例中,例如,电子设备10可以为摄像头组件30设置自动聚焦的设置、自动曝光的设置和自动白平衡的设置。此外,电子设备10可以为摄像头组件30设置ISO灵敏度、曝光时间、曝光值、快门速度等。
摄像头组件30成像的第一设置可以由电子设备10自动设置。换句话说,用户可以为摄像头组件30成像的第一设置选择自动设置。或者,可以由用户预先设置摄像头组件30成像的第一设置。换句话说,用户可以预先设置摄像头组件30成像的第一设置的每个项目。
接下来,电子设备10根据摄像头组件30成像的第一设置通过第一主摄像头32拍摄第一主图像(步骤S12),并根据摄像头组件30成像的第一设置通过第二主摄像头34拍摄第二主图像(步骤S14)。
在本实施例中,第一主摄像头32和第二主摄像头34同时拍摄第一主图像和第二主图像。然而,第一主摄像头32拍摄第一主图像的时机和第二主摄像头34拍摄第二主图像的时机可以稍有不同。
接下来,电子设备10在成像的第二设置中通过第一主摄像头32拍摄辅助图像,该成像的第二设置用于检测所述第二图像中发射光强于其他区域的区域(步骤S16)。
图5示出了根据用户在电子设备10中设置的成像的第一设置,由第一主摄像头32拍摄的第一主图像或由第二主摄像头34拍摄的第二主图像,图6示出了根据成像的第二设置由第一主摄像头32拍摄的辅助图像,以检测发光区域。
如图5所示,第一主图像和第二主图像是由摄像头组件30拍摄的常规照片。也就是说,第一主图像和第二主图像是用户想要图像。另一方面,如图6所示,辅助图像是用于容易检测发射强光的区域的特殊照片。也就是说,电子设备10可以检测发射强光的区域,该强光从光源直接发射大量光子到达摄像头组件30。
在本实施例中,第一主摄像头32成像的第二设置可以是短曝光,其曝光时间短于成像的第一设置的曝光时间。换句话说,短曝光的曝光时间足够短,以至于不会检测到来自辅助图像中的光源区域以外的区域的光。
例如,电子设备10可以将第一主摄像头32的曝光时间设置在1/8000s和1/6000s之间,以便拍摄辅助图像。如果曝光时间小于1/8000s,则即使是光源区域中的光也无法在辅助图像中检测到,而如果曝光时间大于1/6000s,则其他区域中的光也可以在辅助图像中检测到。
此外,在本实施例中,第一主摄像头32的成像的第二设置可以是低ISO灵敏度,且该ISO灵敏度低于成像的第一设置的ISO灵敏度。换句话说,低ISO灵敏度足够低,以至于不会检测到来自辅助图像中的光源区域以外的区域的光。
例如,电子设备10可以将第一主摄像头32的ISO设置在50和100之间。如果ISO灵敏度低于50,则即使是光源区域中的光也无法在辅助图像中检测到,而如果ISO灵敏度高于100,则其他区域中的光也可以在辅助图像中检测到。
此外,在本实施例中,第一主摄像头32成像的第二设置可以是低曝光值(exposurevalue,EV),且该低曝光值(EV)低于成像的第一设置的曝光值(EV)。换句话说,低曝光值(EV)足够低,以至于不会检测到来自辅助图像中的光源区域以外的区域的光。为了检测辅助图像中的光源区域,曝光值(EV)优选为负值。这里,曝光值(EV)可以由快门速度、ISO灵敏度和光圈构成。
例如,电子设备10可以将第一主摄像头32的曝光值(EV)设置在-4.0和-3.5之间。如果曝光值(EV)低于-4.0,则即使在辅助图像中也不会检测到光源区域中的光,而如果曝光值(EV)高于-3.5,则其他区域中的光也可以在辅助图像中检测到。
顺便提一下,电子设备10除了设置成像的第二设置中的曝光时间、ISO灵敏度、曝光值和快门速度之外还可以调整第一主摄像头32的各种设置,以便拍摄辅助图像以检测发射强光的区域。
进一步地,尽管根据本实施例,第一主摄像头32用于拍摄辅助图像,但第二主摄像头34可代替第一主摄像头32用于拍摄辅助图像。
更进一步地,尽管根据本实施例,辅助图像是在第一主图像和第二主图像被拍摄之后拍摄的,但是辅助图像也可以在第一主图像和第二主图像被拍摄之前被拍摄。在这种情况下,在执行步骤12和步骤S14之前执行步骤S16。
接下来,如图4所示,电子设备10基于第一主图像和第二主图像计算深度图(步骤S18)。更具体地说,第一主摄像头32的位置不同于第二主摄像头34的位置。因此,由第一主摄像头32拍摄的第一主图像的视点不同于由第二主摄像头34拍摄的第二主图像的视点。使用第一主图像和第二主图像的视差,电子设备10可以生成深度图,该深度图指示电子设备10与第一主图像和第二主图像中的物体表面之间的距离。
例如,深度图可以由主处理器40和/或图像信号处理器42计算。进一步地,深度图可以在摄像头组件30中计算。然而,用于计算深度图的深度图计算电路可以放置在电子设备10中。
接下来,如图4所示,电子设备10基于辅助图像检测光源区域,以检测辅助图像中的光源(步骤S20)。在本实施例中,电子设备10将辅助图像中的特定区域的亮度与阈值进行比较,并且如果特定区域的亮度大于阈值,则将该特定区域视为光源区域。例如,电子设备10可以生成光源图,以指示光源区域在辅助图像中的位置。
更具体地说,电子设备10将辅助图像中的每个区域的亮度与阈值进行比较。换句话说,电子设备10将辅助图像中的每个像素的亮度与阈值进行比较。阈值可以存储在存储器44中,在主处理器40执行的程序中设置,或者在图像信号处理器42中设置。
例如,在辅助图像中的每个像素包括由256个梯度组成的亮度的情况下,如果像素的亮度值大于128,则电子设备10可以确定像素在光源区域中。
顺便提一下,阈值不一定由特定值设置,但可以由百分比设置。例如,在最大亮度为100%、最小亮度为0%的情况下,阈值可以设置为亮度的50%。
进一步地,尽管根据本实施例,电子设备10在计算深度图之后检测辅助图像中的光源区域,但电子设备10也可以在计算深度图之前检测辅助图像中的光源区域。在这种情况下,在执行步骤18之前执行步骤S20。
例如,可以由主处理器40和/或图像信号处理器42基于辅助图像来检测光源区域。进一步地,可以由摄像头组件30基于辅助图像来检测光源区域。
接下来,如图4所示,电子设备10执行图像生成处理以生成目标图像(步骤S22)。在本实施例中,至少基于在步骤S12中拍摄的第一主图像、在步骤S14中拍摄的第二主图像、在步骤S18中计算的深度图以及在步骤S20中检测到的光源区域来执行图像生成处理。
图像生成处理至少包括基于深度图的Bokeh渲染处理。也就是说,在基于第一主图像和第二主图像生成单个集成图像之后,对单个集成图像应用Bokeh渲染处理,以基于深度图散焦单个集成图像的背景。换句话说,通过Bokeh渲染过程,单个集成图像的背景被散焦以模糊。
此外,图像生成处理至少包括基于检测到的光源区域的光源区域调整处理。光源区域调整处理是一种图像校正处理,用于校正由摄像头组件30拍摄的图像。在本实施例中,在基于第一主图像和第二主图像生成单个集成图像之后,基于在步骤S20中检测到的光源区域调整单个集成图像中的光源区域。
在本实施例中,可以在执行Bokeh渲染处理之后执行光源区域调整处理,或者可以在执行Bokeh渲染处理之前执行光源区域调整处理。
当图像生成处理完成时,生成用户想要拍摄的图像。当然,用于生成图像的图像生成处理可以包括除了Bokeh渲染处理和光源区域调整处理之外的应用于第一主图像和第二主图像的各种处理。例如,图像生成处理可以包括去马赛克处理、降噪处理、自动曝光处理、自动聚焦处理、自动白平衡处理、高动态范围处理等,以生成目标图像。
例如,图像生成处理可以由主处理器40和/或图像信号处理器42执行。然而,用于执行Bokeh渲染处理的Bokeh渲染电路可以被放置在电子设备10中。类似地,用于执行光源区域调整处理的光源区域调整电路可以放置在电子设备10中。
接下来,如图4所示,电子设备10输出目标图像(步骤S24)。例如,电子设备10可以在显示器20上显示目标图像。此外,电子设备10可以将目标图像存储在存储器44中。
在电子设备10输出目标图像之后,根据本实施例的图像拍摄处理完成。
如上所述,根据本实施例的电子设备10,可以基于根据成像的第二设置拍摄的辅助图像来检测光源区域,成像的第二设置是检测发射强光的区域的设置。因此,电子设备10容易检测光源区域。
此外,在例如短曝光、低ISO、低曝光值或快快门速度的成像的第二设置中拍摄辅助图像。因此,不需要电子设备10所需的任何附加功能就可以获得辅助图像。因此,可以抑制电子设备10的制造成本。
顺便提一下,在第一实施例中,第一主图像和/或第二主图像对应于根据成像的第一设置拍摄的第一图像,并且辅助图像对应于根据成像的第二设置拍摄的第二图像。
进一步地,在第一实施例中,如果第一主图像对应于第一图像,则第二主图像对应于第三图像。另一方面,如果第二主图像对应于第一图像,则第一主图像对应于第三图像。
[第二实施例]
尽管在本公开的第一实施例中,电子设备10的背面有两个主摄像头,但在本公开的第二实施例中,电子设备10的背面有一个主摄像头。在下文中,将解释与第一实施例的区别。
图7示出了根据本公开第二实施例的电子设备10的背面视图。此外,图7是与第一实施例中的图1相对应的图。根据第二实施例的电子设备10的正面视图基本上与第一实施例中的图2相同。
如图7所示,根据本实施例的电子设备具有摄像头组件30,该摄像头组件30包括主摄像头38,而不包括其他任何附加的主摄像头。也就是说,根据本实施例的电子设备10的摄像头组件30在电子设备10的背面具有一个主摄像头38,以便在其背面拍摄图像。
如图2所示,同样在第二实施例中,电子设备10以与第一实施例相同的方式具有副摄像头36。也就是说,根据第二实施例的电子设备10的摄像头组件30还包括位于电子设备10的正面的一个所谓的内摄像头,以便在其正面拍摄图像。
图8示出了由根据第二实施例的电子设备10执行的图像拍摄处理的流程图。同样在本实施例中,通过主处理器40和图像信号处理器42的协作来执行摄像处理。因此,在本实施例中,主处理器40和图像信号处理器42构成图像处理器。
如图8所示,电子设备10为摄像头组件30设置成像的第一设置(步骤S10)。第二实施例中的步骤S10与第一实施例中的对应的步骤基本相同。
然后,根据摄像头组件30成像的第一设置,电子设备10通过主摄像头38拍摄主图像(步骤30)。第二实施例中的步骤30基本上与第一实施例中的对应的相同,只是单个主图像由单个主摄像头38拍摄。
然后,根据成像的第二设置,电子设备10通过主摄像头38拍摄辅助图像,以检测辅助图像中发射光强于其他区域的区域(步骤S32)。第二实施例中的步骤S32基本上与第一实施例中对应的步骤相同,只是辅助图像由主摄像头38拍摄。
然后,如图4所示,电子设备10基于辅助图像检测光源区域,以检测辅助图像中的光源(步骤S20)。第二实施例中的步骤S20基本上与第一实施例中对应的步骤相同。
然后,如图4所示,电子设备10执行图像生成处理以生成目标图像(步骤S34)。在本实施例中,至少基于在步骤S30中拍摄的主图像和在步骤S20中检测到的光源区域来执行图像生成处理。
图像生成处理至少包括基于检测到的光源区域的光源区域调整处理。光源区域调整处理是一种图像校正处理,用于校正由摄像头组件30拍摄的图像。在本实施例中,基于在步骤S20中检测到的光源区域,调整在步骤S30中拍摄的主图像中的光源区域。
当图像生成处理完成时,生成目标图像。当然,用于生成目标图像的图像生成处理可以包括除光源区域调整处理之外的应用于主图像的各种处理。例如,图像生成处理可以包括去马赛克处理、降噪处理、自动曝光处理、自动聚焦处理、自动白平衡处理、高动态范围处理等,以生成目标图像。
例如,图像生成处理由主处理器40和/或图像信号处理器42执行。然而,用于执行光源区域调整处理的光源区域调整电路可以放置在电子设备10中。
除了上述过程之外,第二实施例中的步骤S34基本上与第一实施例中对应的步骤相同。
然后,如图8所示,电子设备10输出目标图像(步骤S24)。第二实施例中的步骤S24与第一实施例中对应的步骤基本相同。
在电子设备10输出目标图像之后,根据本实施例的图像拍摄处理完成。
如上所述,根据本实施例的电子设备10,可以基于根据成像的第二设置拍摄的辅助图像来检测光源区域,该成像的第二设置是检测发射强光的区域的设置。因此,电子设备10容易检测光源区域。
进一步地,在例如短曝光、低ISO、低曝光值或快快门速度的成像的第二设置中拍摄辅助图像。因此,不需要电子设备10所需的任何附加功能即可以获得辅助图像。因此,可以抑制电子设备10的制造成本。
进一步地,即使电子设备10包括单个主摄像头38,电子设备10也可以拍摄辅助图像并检测辅助图像中的光源区域,以调整主图像中的光源区域。因此,本实施例可以由副摄像头36而不是主摄像头38来实现。换句话说,如果副摄像头36拍摄主图像和辅助图像,则可以基于副摄像头36拍摄的主图像和辅助图像执行图8中的图像拍摄处理。
顺便提一下,在第二实施例中,主图像对应于成像的第一设置中的第一图像,而辅助图像对应于成像的第二设置中的第二图像。
在本公开实施例的描述中,应理解的是,诸如“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上部”、“下部”、“前部”、“后部”、“后部”、“左侧”、“右侧”、“垂直”、“水平”、“顶部”、“底部”、“内部”、“外部”,“顺时针”和“逆时针”等术语应解释为指所讨论附图中描述或显示的方向或位置。这些相关术语仅用于简化本公开的描述,并不表示或暗示所指的装置或元件必须具有特定方向,或以特定方向构造或操作。因此,这些术语不能用于限制本公开。
此外,本文中使用诸如“第一”和“第二”之类的术语是为了描述,并不意在表示或暗示相对重要性或重要性,或暗示所示技术特征的数量。因此,用“第一”和“第二”定义的特征可以包括该特征中的一个或多个。在本公开的描述中,除非另有规定,“多个”指两个或两个以上。
在本公开实施例的描述中,除非另有规定或限制,否则术语“安装”、“连接”、“耦合”等被广泛使用,并且可以是例如固定连接、可拆卸连接或整体连接;也可以是机械或电连接;也可以是直接连接或通过中间结构的间接连接;也可以是两个元素的内部通信,本领域技术人员可以根据具体情况理解。
在本公开的实施例中,除非另有规定或限制,否则第一特征设置在第二特征“上”或第二特征“下”的结构可以包括第一特征与第二特征直接接触的实施例,还可以包括第一特征与第二特征不直接接触的实施例,而是-3.5它们之间形成了一个附加的特征。更进一步地,第一特征在第二特征“上方”或“顶部”可以包括一个实施例,其中第一特征在第二特征地正或斜“上”、“上方”或“顶部”,或者仅仅意味着第一特征的高度高于第二特征的高度;而第一特征在第二特征“下”、“下方”或“底部”可包括一个实施例,其中第一特征在第二特征的正或斜“下”、“下方”或“底部”,或仅意味着第一特征的高度低于第二特征的高度。
在上述描述中提供了各种实施例和示例,以实现本公开的不同结构。为了简化本公开,上文描述了某些元件和设置。然而,这些元素和设置仅作为示例,并不意在限制本公开。此外,参考标号和/或参考字母可以在本公开的不同示例中重复。该重复是为了简化和清晰,而不是指不同实施例和/或设置之间的关系。更进一步地,本公开还提供了不同工艺和材料的示例。然而,本领域技术人员应当理解,也可以应用其他工艺和/或材料。
在本说明书中,对“实施例”、“一些实施例”、“示例性实施例”、“示例”、“特定示例”或“一些示例”的引用意味着结合实施例或示例描述的特定特征、结构、材料或特性包括在本公开的至少一个实施例或示例中。因此,贯穿本说明书的上述短语的出现不一定指的是本公开的相同实施例或示例。此外,可以在一个或多个实施例或示例中以任何合适的方式组合特定特征、结构、材料或特性。
流程图中描述的或本文以其他方式描述的任何过程或方法可以理解为包括用于实现特定逻辑功能或过程中的步骤的可执行指令的代码的一个或多个模块、片段或部分,并且本公开的优选实施例的范围包括其他实现,其中,本领域技术人员应当理解,功能可以以所示或所讨论的序列以外的序列来实现,包括以基本相同的序列或相反的序列来实现。
在此以其他方式描述或在流程图中示出的逻辑和/或步骤,例如,用于实现逻辑功能的可执行指令的特定序列表,可以在任何计算机可读介质中具体实现,该计算机可读介质被指令执行系统,装置或设备(例如基于计算机的系统,包括处理器或能够从指令执行系统、装置和设备获取指令并执行指令的其他系统)使用,或与指令执行系统、装置和设备结合使用。至于说明书,“计算机可读介质”可以是由指令执行系统、装置或设备使用或与之结合使用的适于包括、存储、通信、传播或传输程序的任何装置。计算机可读介质的更具体示例包括但不限于:具有一条或多条导线的电子连接(电子设备)、便携式计算机外壳(磁性设备)、随机存取存储器(random access memory,RAM)、只读存储器(read only memory,ROM)、可擦除可编程只读存储器(erasable programmable read-only memory,EPROM或闪存),光纤设备和便携式光盘只读存储器(portable compact disk read-only memory,CDROM)。此外,计算机可读介质甚至可以是能够在其上打印程序的纸张或其他适当介质,这是因为,例如,可以对纸张或其他适当介质进行光学扫描,然后在必要时使用其他适当的方法进行编辑、解密或处理,以电子方式获得程序,然后这些程序可以存储在计算机存储器中。
应当理解,本公开的每个部分可以通过硬件、软件、固件或其组合来实现。在上述实施例中,多个步骤或方法可以由存储在存储器中的软件或固件实现,并由适当的指令执行系统执行。例如,如果是通过硬件实现的,同样在另一个实施例中,这些步骤或方法可以通过本领域已知的以下技术的一种或组合来实现:具有用于实现数据信号的逻辑功能的逻辑门电路的离散逻辑电路,具有适当组合逻辑门电路的专用集成电路,可编程门阵列(programmable gate array,PGA)、现场可编程门阵列(field programmable gate array,FPGA)等。
本领域技术人员应当理解,本公开的上述示例性方法中的全部或部分步骤可以通过使用程序命令相关硬件来实现。这些程序可以存储在计算机可读存储介质中,并且当在计算机上运行时,这些程序包括本公开的方法实施例中的步骤的一个或组合。
此外,本公开实施例的每个功能单元可以集成在处理模块中,或者这些单元可以是单独的物理存在,或者两个或多个单元集成在处理模块中。集成模块可以以硬件或软件功能模块的形式实现。当集成模块以软件功能模块的形式实现并且作为独立产品销售或使用时,集成模块可以存储在计算机可读存储介质中。
上述存储介质可以是只读存储器、磁盘或CD等。
尽管已经示出并描述了本公开的实施例,但本领域技术人员将理解,这些实施例是解释性的,不能被解释为限制本公开,并且可以在不脱离本公开范围的情况下在实施例中进行更改、修改、替代和变化。
Claims (14)
1.一种图像拍摄方法,应用于电子设备的摄像头组件,包括:
根据所述摄像头组件成像的第一设置拍摄第一图像,所述第一图像由所述摄像头组件中的一个摄像头拍摄;
根据所述摄像头组件成像的第二设置拍摄第二图像,其中所述成像的第二设置用于检测所述第二图像中发射光强于其他区域的区域;以及
基于所述第二图像检测光源区域,根据所述光源区域调整所述第一图像以生成目标图像;
其中,所述成像的第二设置是短曝光,所述短曝光的曝光时间短于所述成像的第一设置的曝光时间,所述短曝光的曝光时间设置在1/8000s和1/6000s之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光;或
所述成像的第二设置为低ISO灵敏度,所述低ISO灵敏度低于所述成像的第一设置的ISO灵敏度,所述低ISO灵敏度设置在50和100之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光;或
所述成像的第二设置是低曝光值,所述低曝光值低于所述成像的第一设置的曝光值,所述低曝光值设置在-4.0和-3.5之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光。
2.根据权利要求1所述的方法,其特征在于,检测所述光源区域包括:
将所述第二图像中特定区域的亮度与阈值进行比较;和
如果所述特定区域的亮度大于阈值,则将所述特定区域视为所述光源区域。
3.根据权利要求1所述的方法,其特征在于,进一步包括:
基于检测到的所述光源区域生成光源图,所述光源图用于指示所述光源区域位于所述第二图像中的位置。
4.根据权利要求1-3中任一权利要求所述的方法,其特征在于,
所述摄像头组件包括至少一第一摄像头和一第二摄像头;和
所述第二图像由所述第一摄像头或所述第二摄像头拍摄。
5.根据权利要求4所述的方法,其特征在于,所述第一图像由所述第一摄像头和所述第二摄像头中的一个拍摄,以及
所述方法还包括:
由所述第一摄像头和所述第二摄像头中的另一个拍摄第三图像;
基于所述第一图像和所述第三图像计算深度图;和
至少基于所述第一图像、所述第二图像、所述深度图和检测到的所述光源区域,通过图像生成处理来生成所述目标图像。
6.根据权利要求1-3中任一权利要求所述的方法,其特征在于,
所述摄像头组件包括位于所述电子设备背面的主摄像头,以及
所述第一图像和所述第二图像由所述主摄像头拍摄。
7.根据权利要求1-3中任一权利要求所述的方法,其特征在于,
所述摄像头组件包括位于所述电子设备正面的副摄像头,以及
所述第一图像和所述第二图像由所述副摄像头拍摄。
8.一种电子设备,包括:
摄像头组件,配置为根据成像的第一设置拍摄第一图像,根据成像的第二设置拍摄第二图像,其中,所述第一图像由所述摄像头组件中的一个摄像头拍摄,所述成像的第二设置用于检测所述第二图像中发射光强于其他区域的区域;以及
图像处理器,配置为基于所述第二图像检测光源区域,根据所述光源区域调整所述第一图像以生成目标图像;
其中,所述成像的第二设置是短曝光,所述短曝光的曝光时间短于所述成像的第一设置,所述短曝光的曝光时间设置在1/8000s和1/6000s之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光;或
所述成像的第二设置为低ISO灵敏度,所述低ISO灵敏度低于所述成像的第一设置的ISO灵敏度,所述低ISO灵敏度设置在50和100之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光;或
所述成像的第二设置为低曝光值,所述低曝光值低于所述成像的第一设置的曝光值,所述低曝光值设置在-4.0和-3.5之间,以至于不会检测到来自所述第二图像中的所述光源区域以外区域的光。
9.根据权利要求8所述的电子设备,其特征在于,所述图像处理器进一步配置为:
将所述第二图像中特定区域的亮度与阈值进行比较;和
如果所述特定区域的亮度大于阈值,则将所述特定区域视为所述光源区域。
10.根据权利要求8所述的电子设备,其特征在于,所述图像处理器进一步配置为:
基于检测到的所述光源区域生成光源图,所述光源图用于指示所述光源区域位于所述第二图像中的位置。
11.根据权利要求8-10中任一权利要求所述的电子设备,其特征在于,
所述摄像头组件包括至少一第一摄像头和一第二摄像头;和
所述第二图像由所述第一摄像头或所述第二摄像头拍摄。
12.根据权利要求11所述的电子设备,其特征在于,
所述第一图像由所述第一摄像头和所述第二摄像头中的一个拍摄,并且
所述图像处理器进一步配置为:
由所述第一摄像头和所述第二摄像头中的另一个拍摄第三图像;
基于所述第一图像和所述第三图像计算深度图;和
至少基于所述第一图像、所述第二图像、所述深度图和检测到的所述光源区域,通过图像生成处理来生成所述目标图像。
13.根据权利要求8-10中任一权利要求所述的电子设备,其特征在于,
所述摄像头组件包括位于所述电子设备背面的主摄像头,以及
所述第一图像和所述第二图像由所述主摄像头拍摄。
14.根据权利要求8-10中任一权利要求所述的电子设备,其特征在于,
所述摄像头组件包括位于所述电子设备正面的副摄像头,以及
所述第一图像和所述第二图像由所述副摄像头拍摄。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2019/126637 WO2021120107A1 (en) | 2019-12-19 | 2019-12-19 | Method of generating captured image and electrical device |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114946170A CN114946170A (zh) | 2022-08-26 |
CN114946170B true CN114946170B (zh) | 2024-04-19 |
Family
ID=76477035
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980102874.9A Active CN114946170B (zh) | 2019-12-19 | 2019-12-19 | 生成图像的方法和电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN114946170B (zh) |
WO (1) | WO2021120107A1 (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106952247A (zh) * | 2017-03-17 | 2017-07-14 | 成都通甲优博科技有限责任公司 | 一种双摄像头终端及其图像处理方法和系统 |
CN107809582A (zh) * | 2017-10-12 | 2018-03-16 | 广东欧珀移动通信有限公司 | 图像处理方法、电子装置和计算机可读存储介质 |
CN110177221A (zh) * | 2019-06-25 | 2019-08-27 | 维沃移动通信有限公司 | 高动态范围图像的拍摄方法及装置 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9307207B2 (en) * | 2013-01-07 | 2016-04-05 | GM Global Technology Operations LLC | Glaring reduction for dynamic rearview mirror |
CN104427254B (zh) * | 2013-09-10 | 2019-01-15 | 联想(北京)有限公司 | 感光控制方法及感光控制装置 |
US20190230334A1 (en) * | 2016-06-15 | 2019-07-25 | Sony Corporation | Image producing apparatus and image producing method |
CN107613218A (zh) * | 2017-09-15 | 2018-01-19 | 维沃移动通信有限公司 | 一种高动态范围图像的拍摄方法及移动终端 |
CN107707827B (zh) * | 2017-11-14 | 2020-05-01 | 维沃移动通信有限公司 | 一种高动态图像拍摄方法及移动终端 |
-
2019
- 2019-12-19 CN CN201980102874.9A patent/CN114946170B/zh active Active
- 2019-12-19 WO PCT/CN2019/126637 patent/WO2021120107A1/en active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106952247A (zh) * | 2017-03-17 | 2017-07-14 | 成都通甲优博科技有限责任公司 | 一种双摄像头终端及其图像处理方法和系统 |
CN107809582A (zh) * | 2017-10-12 | 2018-03-16 | 广东欧珀移动通信有限公司 | 图像处理方法、电子装置和计算机可读存储介质 |
CN110177221A (zh) * | 2019-06-25 | 2019-08-27 | 维沃移动通信有限公司 | 高动态范围图像的拍摄方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN114946170A (zh) | 2022-08-26 |
WO2021120107A1 (en) | 2021-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9438815B2 (en) | Control device, control method, and control system with multiple dynamic ranges | |
US8294785B2 (en) | Method for adjusting photosensitiveness of digital camera | |
US9413996B2 (en) | Image pickup apparatus, and control method thereof | |
US9961319B2 (en) | Image processing apparatus and control method thereof | |
JP6303304B2 (ja) | カメラ | |
CN105611182B (zh) | 亮度补偿方法及装置 | |
US11044413B2 (en) | Light emitting apparatus and image pickup apparatus used for photographing, control methods therefor, storage media storing control programs therefor, and image pickup system | |
US11418719B2 (en) | Dual sensor imaging system and calibration method which includes a color sensor and an infrared ray sensor to perform image alignment and brightness matching | |
US10937184B2 (en) | Camera assembly, method for tracking target portion based on the same, and electronic device | |
CN114946170B (zh) | 生成图像的方法和电子设备 | |
CN116097297A (zh) | 去除图像中的噪声的方法和电子设备 | |
US20130222632A1 (en) | Electronic camera | |
US20160050361A1 (en) | Apparatus and method for automatically adjusting focus in image capturing device | |
CN114930799B (zh) | 用于具有多个摄像头的电子设备的方法和电子设备 | |
US20210168274A1 (en) | Image processing apparatus and image processing method | |
US11405562B2 (en) | Image processing apparatus, method of controlling the same, image capturing apparatus, and storage medium | |
CN115066880A (zh) | 生成捕获图像的方法及电子设备 | |
WO2021138797A1 (en) | Method of adjusting captured image and electrical device | |
WO2022222075A1 (en) | Method of generating image data, electronic device, apparatus, and computer readable medium | |
JP7225192B2 (ja) | 撮像装置およびその制御方法 | |
JP2003270521A (ja) | カメラ | |
US11119387B2 (en) | Imaging device, imaging device control method, and processing device | |
WO2022016385A1 (en) | Method of generating corrected pixel data, electrical device and non-transitory computer readable medium | |
JP5733552B2 (ja) | 撮影装置、撮影方法、及びプログラム | |
CN117296329A (zh) | 电子设备、生成图像数据的方法和非暂时性计算机可读介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |