CN114070972A - 包括图像传感器的电子设备 - Google Patents

包括图像传感器的电子设备 Download PDF

Info

Publication number
CN114070972A
CN114070972A CN202110855654.2A CN202110855654A CN114070972A CN 114070972 A CN114070972 A CN 114070972A CN 202110855654 A CN202110855654 A CN 202110855654A CN 114070972 A CN114070972 A CN 114070972A
Authority
CN
China
Prior art keywords
image signal
image
value
processor
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110855654.2A
Other languages
English (en)
Inventor
车丞镐
金圣洙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN114070972A publication Critical patent/CN114070972A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/53—Constructional details of electronic viewfinders, e.g. rotatable or detachable
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/72—Combination of two or more compensation controls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H04N25/533—Control of the integration time by using differing integration times for different sensor regions
    • H04N25/534—Control of the integration time by using differing integration times for different sensor regions depending on the spectral component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H04N23/662—Transmitting camera control signals through networks, e.g. control via the Internet by using master/slave camera arrangements for affecting the control of camera image capture, e.g. placing the camera in a desirable condition to capture a desired image

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)

Abstract

一种电子设备，包括：显示器；第一图像传感器，第一图像传感器被配置成基于感测穿过显示器的第一光而输出第一图像信号；第二图像传感器，第二图像传感器被配置成基于感测不穿过显示器的第二光而输出第二图像信号；处理器，处理器被配置成：基于第二图像信号生成第一光学值和第二光学值，第二光学值与第一光学值不同；基于第一光学值满足第一条件，通过使用第二光学值来对第一图像信号进行校正。

Description

包括图像传感器的电子设备
相关申请的交叉引用
本申请要求于2020年8月5日向韩国知识产权局提交的第10-2020-0097880号韩国专利申请的优先权及其享有的所有权益，该专利申请的公开内容全文以引用方式并入本文中。
背景技术
本公开涉及一种包括图像传感器的电子设备。更具体地，本公开涉及一种包括多个图像传感器和图像信号处理器的电子设备。
技术领域
图像感测设备是将光学信息转换成电信号的半导体设备。图像感测设备的示例可以包括电荷耦合器件(CCD)图像感测设备和互补金属氧化物半导体(CMOS)图像感测设备。
CMOS图像传感器(CIS)可以包括二维布置的多个像素。多个像素中的每一个可以包括例如光电二极管(PD)。光电二极管可以用于将入射光转换成电信号。
近年来，随着计算机行业和电信行业的发展，各种领域诸如数字相机、摄录像机、智能电话、游戏设备、安全相机、医疗微型相机、机器人、自主车辆、无人机等中对具备改善性能的图像传感器的需求已经增加。
近来，提供了一种设置在电子设备的显示面板下方的图像传感器。当图像传感器感测通过显示面板的光时，关于感测到的光的信息可能与关于实际光的信息不同。例如，与感测未通过显示面板的光的图像传感器所输出的图像的质量相比，感测通过显示面板的光的图像传感器所输出的图像的质量可能会劣化。因此，设置在电子设备的显示面板下方的图像传感器中需要用于解决该问题的方法。
发明内容
本公开的一个或多个示例实施例提供一种包括图像传感器和处理器的电子设备，其中通过减少图像质量的劣化来提高产品可靠性。
本公开的一个或多个示例实施例还提供一种包括图像传感器和处理器的电子设备，其中通过增强图像质量来提高产品可靠性。
但是，本公开的各方面不限于本文所阐述的内容。通过参考下文给出的本公开的详细描述，本公开的以上和其他方面对于本公开所属领域的普通技术人员而言将变得更加显而易见。
根据一个示例实施例的一个方面，提供了一种电子设备，包括：显示器；第一图像传感器，第一图像传感器被配置成基于感测穿过显示器的第一光而输出第一图像信号；第二图像传感器，第二图像传感器被配置成基于感测不穿过显示器的第二光而输出第二图像信号；处理器，处理器被配置成：基于第二图像信号生成第一光学值和第二光学值，第二光学值与第一光学值不同；基于第一光学值满足第一条件，通过使用第二光学值对第一图像信号进行校正。
第一光学值可以包括基于第二图像信号生成的亮度值或照度值中的至少一个，并且第二光学值可以包括基于第二图像信号生成的色温值。
处理器可以进一步被配置成基于第一光学值满足第一条件并且进一步基于色温值小于第一色温或者等于或大于第二色温，通过使用色温值来校正第一图像信号，第二色温高于第一色温。
处理器可以进一步被配置成基于第一图像信号生成第三光学值和第四光学值，第四光学值不同于第三光学值。
第三光学值可以包括基于第一图像信号生成的亮度值或照度值中的至少一个，并且第四光学值可以包括基于第一图像信号生成的色温值。
第一条件可以是第一光学值等于或大于阈值。
处理器可以进一步被配置成基于第一光学值不满足第一条件，通过使用基于第一图像信号生成的光学值来校正第一图像信号。
基于第一图像信号生成的光学值可以包括基于第一图像信号生成的色温值。
第一条件可以是：第一光学值与第三光学值之间的差值小于阈值。
处理器可以进一步被配置成基于第一光学值与第三光学值之间的差值等于或大于阈值，通过使用基于第一图像信号生成的光学值来校正第一图像信号。
显示器可以进一步被配置成输出基于校正后的第一图像信号生成的图像。
处理器可以进一步被配置成通过对第一图像信号执行自动白平衡来输出第三图像信号，并且处理器可以被进一步配置成基于第一光学值满足第二条件来输出通过使用第二光学值校正第三图像信号而获得的第四图像信号。
显示器可以进一步被配置成输出基于第三图像信号和第四图像信号中的至少一个生成的图像。
根据一个示例实施例的一个方面，提供了一种电子设备，包括：第一图像传感器，第一图像传感器被配置成基于感测入射到电子设备的前表面的第一光来输出第一图像信号；第二图像传感器，第二图像传感器被配置成基于感测入射到电子设备的后表面的第二光来输出第二图像信号；处理器，处理器被配置成接收第一图像信号和第二图像信号；以及显示器，显示器设置在前表面上并且被配置成输出基于第一图像信号生成的图像，其中处理器进一步被配置成基于第二图像信号来生成第一色温值，并且基于第一条件被满足，通过使用第一色温值来校正第一图像信号。
显示器可以进一步被配置成覆盖第一图像传感器。
处理器可以进一步被配置成基于第一图像信号生成第二色温值，并且基于第二图像信号生成亮度值或照度值中的至少一个。
第一条件可以是：亮度值或照度值中的至少一个等于或大于阈值。
处理器可以进一步被配置成基于第一条件不满足，通过使用第二色温值来校正第一图像信号。
显示器可以进一步被配置成输出基于校正后的第一图像信号生成的图像。
根据一个示例实施例的一方面，提供了一种电子设备，包括：显示器；第一相机模块，第一相机模块包括第一图像传感器，第一图像传感器被配置成基于感测通过显示器的第一光来输出第一图像信号；第二相机模块，第二相机模块包括第二图像传感器，第二图像传感器被配置成基于感测不穿过显示器的第二光而输出第二图像信号；以及应用处理器，应用处理器独立于第一相机模块和第二相机模块设置，并且包括图像信号处理器，其中图像信号处理器被配置成：通过第一相机串行接口从第一相机模块接收第一图像信号；通过第二相机串行接口从第二相机模块接收第二图像信号；基于第一图像信号生成第一色温值；基于第二图像信号生成亮度值或照度值中的至少一个以及第二色温值；基于亮度值或照度值中的至少一个等于或大于阈值，基于第二色温值来校正第一图像信号；并且基于亮度值或照度值中的至少一个小于阈值，基于第一色温值来校正第一图像信号。
附图说明
根据结合附图进行的以下描述，本公开的某些示例实施例的上述和其他方面、特征和优势将变得更加显而易见，其中：
图1是示出根据一些示例实施例的电子设备的透视图；
图2是沿图1的线A-A截取的电子设备的局部截面图；
图3是在沿第一方向的视角下，图1所示电子设备的透视图；
图4是沿图3的线B-B截取的电子设备的局部截面图；
图5是示出根据一些示例实施例的图像感测系统的方框图；
图6是用于描述图5中的图像传感器的概念布局的图示；
图7是示出图5中的第一图像信号处理器和第二图像信号处理器的方框图；
图8是示出图7中的后处理电路的方框图；
图9是示出图8中的后处理电路的方框图；
图10是示出根据一些示例实施例的通过后处理电路的图像补偿方法的流程图；
图11是示出图8中的后处理电路的方框图；
图12是示出根据一些示例实施例的图像补偿条件的图示；
图13是描述根据一些示例实施例的电子设备的操作的图示；
图14是示出根据一些其他示例实施例的图像感测系统的方框图；
图15是用于描述根据一些示例实施例的包括多相机模块的电子设备的方框图；以及
图16是图15中的相机模块的详细方框图。
具体实施方式
下文中将参考附图来描述本公开的示例实施例。
下文中将参考图1到图4来描述包括第一图像传感器和第二图像传感器的电子设备。
图1是示出根据一些示例实施例的电子设备的透视图。图2是沿图1的线A-A截取的电子设备的局部截面图。图3是在沿第一方向的视角下，图1所示电子设备的透视图。图4是沿图3的线B-B截取的电子设备的局部截面图。
参考图1到图4，电子设备1可以包括覆盖玻璃10、显示器20、后玻璃30、后盖40、第一图像传感器100、第二图像传感器200等。
在一些示例实施例中，电子设备1可以包括壳体。例如，壳体可以包括面对第一方向D1的覆盖玻璃10以及面对与第一方向D1相反的第四方向D4的后玻璃30。此外，壳体可以包括例如将覆盖玻璃10连接到后玻璃30的连接部分。壳体可以用于保护电子设备1内部的组件免受外部冲击。
覆盖玻璃10可以包括透明材料，使得能够从外部辨识显示器20所显示的电信息信号。例如，覆盖玻璃10可以包括玻璃或塑料。
覆盖玻璃10和后玻璃30可以具有平坦的形状。例如，覆盖玻璃10和后玻璃30中的每一个可以具有在第二方向D2上的长度以及在第三方向D3上的长度，第三方向上的长度大于第一方向D1上的长度或厚度。因此，电子设备1可以具有平坦的形状。但是，根据本公开的技术精神的示例实施例不限于此。
电子设备1的面向第一方向D1的表面可以是电子设备1的前表面，并且电子设备1的面向第四方向D4的表面可以是电子设备1的后表面。然而，这仅是示例，并且不限制根据本公开的技术精神的示例实施例。
参考图1和图2，覆盖玻璃10可以覆盖显示器20。例如，显示器20可以从覆盖玻璃10沿第四方向D4布置。
显示器20可以包括沿行和列布置的多个像素。例如，显示器20可以包括有机发光二极管显示器(OLED)、液晶显示器(LCD)、等离子显示面板(PDP)、电致变色显示器(ECD)、数字镜设备(DMD)、驱动镜设备(AMD)、光栅值(GLV)设备、电致发光显示器(ELD)等。
显示器20可以输出从电子设备1提供的图像。例如，信号被发送到多个像素，并且显示器20可以基于这些信号输出对应的图像。例如，显示器20可以包括显示图像和/或接收用户触摸输入的触摸屏或触摸面板。
第一图像传感器100可以感测从电子设备1的外部入射通过显示器20的光和/或从显示器20输出的光的一部分。例如，第一图像传感器100可以被显示器20覆盖并且可以感测在电子设备1中从电子设备1的外部入射的光。例如，第一图像传感器100可以感测从显示器20输出并且被覆盖玻璃10反射的光。
例如，第一图像传感器100可以感测来自覆盖玻璃10和显示器20的像素的光以及穿过显示器20的像素之间的间隙的光。
相应地，通过显示器20的光的亮度值和色温值可以通过覆盖玻璃10以及显示器20的像素来改变。例如，作为处理通过由第一图像传感器100感测通过显示器20的光而输出的信号的结果而生成的亮度值和色温值可以小于实际亮度值和色温值。然而，本公开的实施例不限于此。
此外，根据一些示例实施例，可以将亮度值与照度值一起使用，或者可以使用照度值代替亮度值。在下文中，在根据本公开的示例实施例中，描述了使用亮度值，但是也可以以与亮度值相同的方式来使用照度值。
第一图像传感器100可以被显示器20覆盖，并且被后盖40围绕。例如，第一图像传感器100可以布置在形成于后盖40中的开口中。
后盖40可以防止电子设备1内部产生的光影响显示器20。此外，后盖40可以防止显示器20输出的光进入到电子设备1的内部。
尽管在图2中未示出，后玻璃30可以在第四方向D4上设置在后盖40和第一图像传感器100上，并且保护后盖40和第一图像传感器100免受外部冲击。
参考图3和图4，后玻璃30可以设置在电子设备1的后表面(例如，电子设备1在第四方向D4上的表面)处。此外，第二图像传感器200可以设置在电子设备1的后表面(例如，电子设备1在第四方向D4上的表面)处。然而，本公开的实施例不限于此，并且第二图像传感器200可以设置在电子设备1中的任何其他位置，例如，电子设备1的侧面或前表面。
后玻璃30可以被设置成围绕第二图像传感器200。例如，第二图像传感器200可以设置在形成于后玻璃30中的开口中。第二图像传感器200的表面可以面对第四方向D4。例如，第二图像传感器200可以具有面向第四方向D4(例如，朝向后表面的方向)的光接收器。
第二图像传感器200可以感测入射在电子设备1的后表面上的光。例如，第二图像传感器200可以感测不通过设置在电子设备1的前表面上的显示器20的光。也就是说，尽管第一图像传感器100感测通过显示器20的光，但是第二图像传感器200的光接收器可以感测不通过显示器20的光，因为第二图像传感器200的面向第四方向D4(例如，朝向后表面的方向)的光接收器不被显示器20或电子设备1的另一组件覆盖。
尽管示出了一个第二图像传感器200，但是第二图像传感器200可以包括多个图像传感器。例如，第二图像传感器200可以包括常规相机、广角相机和远摄相机。
后玻璃30可以防止光从外部进入电子设备1。也就是说，可以防止光进入除了设置有第二图像传感器200的后玻璃30的开口之外的部分。
尽管在图3中未示出，但是覆盖玻璃10、显示器20和后盖40可以在第一方向D1上设置在后玻璃30上。
下文中将参考图5到图9来描述包括第一图像传感器100、第二图像传感器200和应用处理器300的图像感测系统2。
图5是示出根据一些示例实施例的图像感测系统的方框图。
参考图5，图像感测系统2可以包括第一图像传感器100、第二图像传感器200和应用处理器300。
第一图像传感器100可以通过使用入射光对感测目标的图像进行感测来生成第一图像信号S1。例如，第一图像传感器100可以感测通过显示器20的光并且生成第一图像信号S1。
第二图像传感器200可以通过使用入射光对感测目标的图像进行感测来生成第二图像信号S2。例如，第二图像传感器200可以通过感测未通过显示器20的光来生成第二图像信号S2。
第一图像信号S1和第二图像信号S2可以被提供给应用处理器(AP)300并且由应用处理器(AP)300处理。例如，第一图像信号S1可以被提供给AP 300的第一图像信号处理器310并由其处理，并且第二图像信号S2可以被提供给AP 300的第二图像信号处理器330并由其处理。然而，根据本公开的实施例不限于此。例如，第一图像信号处理器310和第二图像信号处理器330可以被实施为一个图像信号处理器。
第一图像信号处理器310可以接收从第一图像传感器100的缓冲器170输出的第一图像信号S1，并且处理接收到的第一图像信号S1以使其适于显示。
第二图像信号处理器330可以接收从第二图像传感器200的缓冲器270输出的第二图像信号S2，并且处理接收到的第二图像信号S2以使其适于显示。
在一些示例实施例中，第一图像信号处理器310和第二图像信号处理器330可以分别对第一图像信号S1和第二图像信号S2执行数字合并。第一图像信号S1和第二图像信号S2可以分别是来自像素阵列140和240的未被执行模拟合并的原始图像信号，或者可以分别是已经执行模拟合并的第一图像信号S1和第二图像信号S2。
在一些示例实施例中，第一图像传感器100和第二图像传感器200以及应用处理器300可以被设置成彼此分离。例如，第一图像传感器100和第二图像传感器200可以被安装在第一芯片上，应用处理器300可以被安装在第二芯片上，并且第一图像传感器100和第二图像传感器200可以通过接口与应用处理器300通信。然而，本公开的示例实施例不限于此。例如，第一图像传感器100和第二图像传感器200以及应用处理器300可以被实施于一个封装，例如多芯片封装(MCP)中。
第一图像传感器100可以包括控制寄存器块110、定时发生器120、行驱动器130、像素阵列140、读出电路150、斜坡信号发生器160和缓冲器170。
控制寄存器块110可以控制图像传感器100的整体操作。具体来说，控制寄存器块110可以直接将操作信号发送到定时发生器120、斜坡信号发生器160和缓冲器170。
定时发生器120可以生成用于图像传感器100的各个组件的操作定时的参考信号。可以将由定时发生器120生成的用于操作定时的参考信号发送到行驱动器130、读出电路150、斜坡信号发生器160等。
斜坡信号发生器160可以生成并发送在读出电路150中使用的斜坡信号。例如，读出电路150可以包括相关双采样器(CDS)、比较器等，并且斜坡信号发生器160可以生成并发送用在相关双采样器(CDS)、比较器等中的斜坡信号。
缓冲器170可以包括例如锁存器单元。缓冲器170可以临时存储要提供给外部的第一图像信号S1，并且将第一图像信号S1发送到外部存储器或外部设备。
像素阵列140可以感测外部图像。像素阵列140可以包括多个像素(或单位像素)。行驱动器130可以选择性地激活像素阵列140的行。像素阵列140可以采集入射通过显示器20的光。
读出电路150可以对从像素阵列140提供的像素信号进行采样，将采样的像素信号与斜坡信号进行比较，并且基于比较结果将模拟图像信号(数据)转换成数字图像信号(数据)。
图6是用于描述图5的图像传感器的概念布局的图示。
参考图6，第一图像传感器100可以包括在第一方向(例如，垂直方向)上堆叠的第一区域R1和第二区域R2。如图所示，第一区域R1和第二区域R2可以在与第一方向相交的第二方向(例如，水平方向)以及与第一方向和第二方向这两者相交的第三方向上延伸。图5中所示的块可以设置在第一区域R1和第二区域R2中。
尽管未在图中示出，但是其中布置有存储器的第三区域可以设置在第二区域R2之上或下方。在此情况下，设置在第三区域中的存储器可以从第一区域R1和第二区域R2接收图像数据，存储或处理图像数据，并且将图像数据重新发送到第一区域R1和第二区域R2。在此情况下，存储器可以包括存储元件，诸如动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)、自旋转移力矩磁性随机存取存储器(STT-MRAM)和闪存。当存储器包括例如DRAM时，存储器可以以相对较高的速度接收和处理图像数据。此外，在一些示例实施例中，存储器可以设置在第二区域R2中。
第一区域R1可以包括像素阵列区域PA和第一外围区域PH1，并且第二区域R2可以包括逻辑电路区域LC和第二外围区域PH2。第一区域R1和第二区域R2可以垂直地顺序堆叠。
在第一区域R1中，像素阵列区域PA可以是其中设置有像素阵列(例如，图5中的140)的区域。像素阵列区域PA可以包括以矩阵布置的多个单位像素。每个像素可以包括光电二极管和晶体管。
第一外围区域PH1可以包括多个焊盘并且可以设置在像素阵列区域PA的周围。多个焊盘可以向外部设备发送电信号和/或从外部设备接收电信号。
在第二区域R2中，逻辑电路区域LC可以包括具有多个晶体管的电子元件。包括在逻辑电路区域LC中的电子元件可以电连接到像素阵列区域PA，以向像素阵列区域PA的每个单位像素PX提供信号，或者控制每个单位像素PX的输出信号。
可以将例如参考图5描述的控制寄存器块110、定时发生器120、行驱动器130、读出电路150、斜坡信号发生器160和缓冲器170设置在逻辑电路区域LC中。例如，在图5所示的块中，除了像素阵列140之外的块可以设置在逻辑电路区域LC中。
此外，在第二区域R2中，第二外围区域PH2可以设置在与第一区域R1的第一外围区域PH1相对应的区域中，但是实施例不限于此。第二外围区域PH2可以包括多个焊盘，多个焊盘可以向外部设备发送电信号和/或从外部设备接收电信号。
上文中已经描述了第一图像传感器100，但是相同或相似的描述也可以应用于第二图像传感器200。例如，第一图像传感器100的控制寄存器块110、定时发生器120、行驱动器130、像素阵列140、读出电路150、斜坡信号发生器160和缓冲器170的配置和操作可以大体上与第二图像传感器200的控制寄存器块210、定时发生器220、行驱动器230、像素阵列240、读出电路250、斜坡信号发生器260和缓冲器270的配置和操作相同或相似。
此外，控制寄存器块210、定时发生器220、行驱动器230、读出电路250、斜坡信号发生器260和缓冲器270等中的一个或多个可以设置在第二图像传感器200的逻辑电路区域LC中。
然而，第一图像传感器100和第二图像传感器200之间的区别在于，第一图像传感器100输出第一图像信号S1，并且第二图像传感器200输出第二图像信号S2。此外，像素阵列240与像素阵列140的不同之处在于，像素阵列240可以采集不通过显示器20的光。
图7是示出图5中的第一图像信号处理器和第二图像信号处理器的方框图。
参考图7，第一图像信号处理器310可以从第一图像传感器100接收第一图像信号S1。第二图像信号处理器330可以从第二图像传感器200接收第二图像信号S2。
第一图像信号处理器310可以包括预处理电路311、图像存储器317、后处理电路321、转换电路327、数据压缩电路328和存储器329。第二图像信号处理器330可以包括预处理电路331、图像存储器337、后处理电路341、转换电路347、数据压缩电路348和存储器349。
在一些示例实施例中，预处理电路311可以对第一图像信号S1执行预处理。预处理电路311可以包括黑色电平校正电路312、缺陷像素校正电路313、阴影校正电路314、自动曝光(AE)评估值计算器315和自动白平衡(AWB)评估值计算器316。
可以校正从第一图像传感器100输出的第一图像信号S1，以便通过由黑色电平校正电路312进行的黑色电平校正处理可以使得黑色电平变得恒定。当在第一图像信号S1中存在像素缺陷时，缺陷像素校正电路313可以基于缺陷像素周围的信息来内插关于第一图像信号S1的信息。此外，在第一图像信号S1中，可以通过阴影校正电路314来校正由于在像素周围发生亮度遗漏而导致的像素之间的亮度差。
AE评估值计算器315可以基于已经由黑色电平校正电路312、缺陷像素校正电路313和阴影校正电路314进行了校正的第一转换信号S1a来计算AE评估值AE1。例如，AE评估值计算器315可以计算表示通过集成由第一图像传感器100感测的亮度值而获得的亮度的AE评估值AE1。例如，AE评估值AE1可以包括由第一图像传感器100感测的亮度值。
AWB评估值计算器316可以基于已经由黑色电平校正电路312、缺陷像素校正电路313和阴影校正电路314进行了校正的AE评估值AE1和第一转换信号S1a，使用特定算法来计算AWB评估值AWB1。例如，AWB评估值AWB1可以包括将在白平衡补偿处理中使用的白平衡增益。例如，AWB评估值AWB1可以包括由第一图像传感器100感测的色温值。
在此情况下，色温值意味着将感测到的光的颜色表示为温度。例如，在红光的情况下，色温值可以是约2,000K，而在蓝光的情况下，色温值可以是约10,000K，但是本公开的实施例不限于此。
已经由黑色电平校正电路312、缺陷像素校正电路313和阴影校正电路314进行了校正的第一转换信号S1a；从AE评估值计算器315输出的AE评价值AE1；以及从AWB评估值计算器316输出的AWB评估值AWB1可以被临时存储在图像存储器317中，并且发送到后处理电路321。
但是，本公开的实施例不限于此，并且第一转换信号S1a、AE评估值AE1和AWB评估值AWB1可以被发送到后处理电路321，而不被存储在图像存储器317中。
后处理电路321可以对已经由预处理电路311进行了预处理的第一转换信号S1a执行后处理。后处理电路321可以包括去马赛克处理器322、边缘强调处理器323、伽马补偿处理器324、白平衡补偿处理器325、颜色补偿处理器326等。
去马赛克处理器322可以对从预处理电路311发送的第一转换信号S1a执行去马赛克处理(例如，拜耳颜色插值处理)。边缘强调处理器323可以对从预处理电路311发送的第一转换信号S1a执行边缘强调处理。伽马补偿处理器324可以对从预处理电路311发送的第一转换信号S1a执行伽马补偿。
白平衡补偿处理器325可以从预处理电路311接收第一转换信号S1a和AWB评估值AWB1。白平衡补偿处理器325可以使用AWB评估值AWB1的白平衡增益来对第一转换信号S1a执行白平衡补偿处理。
颜色补偿处理器326可以从预处理电路311接收第一转换信号S1a和AWB评估值AWB1。颜色补偿处理器326可以使用由第一图像传感器100感测并且包括在AWB评估值AWB1中的色温值来对第一转换信号S1a执行颜色补偿处理。此外，颜色补偿处理器326可以通过使用由第一图像传感器100感测并且包括在AWB评估值AWB1中的色温值，对已经经过白平衡补偿处理的信号执行颜色补偿处理。
但是，本公开的实施例不限于此，并且颜色补偿处理器326可以通过使用其他方法来执行颜色补偿。
已经由后处理电路321进行了后处理的第一转换信号S1a可以被发送到转换电路327。转换电路327可以将RGB图像信号转换成YCbCr(YCC)图像信号。通过转换处理，可以将捕获图像的色彩空间从RGB色彩空间转换成YCC(YCrCb)色彩空间。
由转换电路327转换的YCC图像信号可以被发送到数据压缩电路328。数据压缩电路328可以使用诸如联合摄影专家组(JPEG)等压缩格式来压缩YCC图像信号。压缩的YCC图像信号可以被存储在存储器329中。替代地，可以由应用处理器300处理压缩的YCC图像信号，并且可以通过显示器20输出处理后的图像。
尽管已经以第一图像信号处理器310以及包括在其中的组件为例进行了描述，但是相同或相似的描述也可以应用于第二图像信号处理器330。也就是说，第一图像信号处理器310的预处理电路311、图像存储器317、后处理电路321、转换电路327、数据压缩电路328和存储器329的配置和操作可以与第二图像信号处理器330的预处理电路331、图像存储器337、后处理电路341、转换电路347、数据压缩电路348和存储器349的配置和操作相同或基本相似。
然而，第一图像信号处理器310和第二图像信号处理器330之间的区别在于，第一图像信号处理器310处理第一图像信号S1以生成数据，而第二图像信号处理器330处理第二图像信号S2以生成数据。也就是说，第一图像信号处理器310可以处理通过感测通过显示器20的入射光输出的第一图像信号S1，而第二图像信号处理器330可以处理通过感测不通过显示器20的入射光而输出的第二图像信号S2。
例如，第二图像信号处理器330的预处理电路331可以接收第二图像信号S2。
预处理电路331的AE评估值计算器335可以基于已经由黑色电平校正电路332、缺陷像素校正电路333和阴影校正电路334进行了校正的信号来计算AE评估值AE2。例如，AE评估值计算器335可以计算表示通过集成由第二图像传感器200感测到的亮度值而获得的亮度的AE评估值AE2。例如，AE评估值AE2可以包括由第二图像传感器200感测的亮度值。
AE评估值计算器335可以将计算出的AE评估值AE2发送到第一图像信号处理器310的后处理电路321。
AWB评估值计算器336可以基于AE评估值AE2以及已经由黑电平校正电路332、缺陷像素校正电路333和阴影校正电路334进行校正的信号，使用特定算法来计算AWB评估值AWB2。例如，AWB评估值AWB2可以包括将在白平衡补偿处理中使用的白平衡增益。例如，AWB评估值AWB2可以包括由第二图像传感器200感测的色温值。
AWB评估值计算器336可以将计算出的AWB评估值AWB2发送到第一图像信号处理器310的后处理电路321。
在附图中，第一图像信号处理器310和第二图像信号处理器330被图示成彼此分离，但是这仅出于描述的目的，并且本公开不限于此。例如，可以由一个处理器(例如，应用处理器300)生成并共享AE评估值AE1和AE2以及AWB评估值AWB1和AWB2。
下文中将参考图8来更详细地描述图7中的后处理电路321。
图8是示出图7中的后处理电路的方框图。
在一些实施例中，后处理电路321可以包括白平衡补偿处理器325和颜色补偿处理器326。
发送到后处理电路321的第一转换信号S1a可以是从预处理电路311发送的信号，或者是通过经由去马赛克处理器322、边缘强调处理器323和伽马补偿处理器324对从预处理电路311发送的信号进行补偿而获得的信号。
白平衡补偿处理器325可以通过使用AWB评估值AWB1的白平衡增益对第一转换信号S1a执行白平衡补偿处理来生成第二转换信号S1b。白平衡补偿处理器325可以将生成的第二转换信号S1b发送到第一确定单元318。
颜色补偿处理器326可以从白平衡补偿处理器325接收第二转换信号S1b。然而，根据本公开的实施例不限于此，并且颜色补偿处理器326可以接收没有被白平衡补偿的第一转换信号S1a，而不是第二转换信号S1b。
颜色补偿处理器326可以从第二图像信号处理器330接收AE评估值AE2和AWB评估值AWB2。例如，颜色补偿处理器326可以从预处理电路331接收由第二图像传感器200感测并输出的信号的AE评估值AE2和AWB评估值AWB2。
颜色补偿处理器326可以通过基于接收到的AE评估值AE1和AE2、AWB评估值AWB1和AWB2以及第二转换信号S1b中的至少一个执行颜色补偿处理来生成第三转换信号S1c。颜色补偿处理器326可以将生成的第三转换信号S1c发送到第一确定单元318。
第一确定单元318可以选择并输出所接收的第二转换信号S1b和第三转换信号S1c中的至少一个。例如，第四转换信号S1d可以包括第二转换信号S1b和第三转换信号S1c中的至少一个。第四转换信号S1d可以被发送到应用处理器300的其他组件。例如，使用第四转换信号S1d处理的图像数据可以被输出到显示器20。
下文中将参考图9到图12来更详细地描述图8中的后处理电路321。
图9是示出图8中的后处理电路的方框图。图10是示出根据一些示例实施例的由后处理电路实施的图像补偿方法的流程图。图11是示出图8中的后处理电路的方框图。图12是示出根据一些示例实施例的图像补偿条件的图示。
参考图9，后处理电路321可以进一步包括第二确定单元319。例如，可以在将AWB评估值AWB1和AWB2发送到颜色补偿处理器326之前，将AWB评估值AWB1和AWB2发送到第二确定单元319。AE评估值AE2也可以被发送到第二确定单元319。
在此情况下，AE评估值AE1可以包括在穿过显示器20之后由第一图像传感器100感测的光的亮度值，并且AE评估值AE2可以包括由第二图像传感器200感测、不穿过显示器20的光的亮度值。
此外，AWB评估值AWB1可以包括在穿过显示器20之后由第一图像传感器100感测的光的色温值，并且AWB评估值AWB2可以包括由第二图像传感器200感测、不穿过显示器20的光的色温值。
参考图9和图10，后处理电路321可以从第一图像传感器100和第二图像传感器200接收信号(步骤S350)。例如，第二确定单元319可以接收作为对由第二图像传感器200感测到的信号进行处理的结果而生成的AE评估值AE2和AWB评估值AWB2。例如，第二确定单元319可以接收作为对由第一图像传感器100感测到的信号进行处理的结果而生成的AWB评估值AWB1和第二转换信号S1b(或第一转换信号S1a)。
第二确定单元319可以确定AE评估值AE2是否大于阈值(步骤S351)。在此情况下，AE评估值AE2可以包括由第二图像传感器200感测、不穿过显示器20的光的亮度值。也就是说，当电子设备1所接触的环境是明亮的时，AE评估值AE2可以具有更高的值。
例如，参考图12，在阈值是X1 lux并且AE评估值AE2大于X1 lux的情况下(步骤S351为是)，确定单元319可以将AWB评估值AWB2传送到颜色补偿处理器326(步骤S352)。也就是说，当电子设备1所接触的环境足够明亮时，颜色补偿处理器326可以使用通过第二图像传感器200的感测而生成的AWB评估值AWB2，而不是使用通过第一图像传感器100的感测而生成的AWB评估值AWB1来执行颜色补偿。
当第一图像传感器100感测通过显示器20的光时，关于光的信息可能被显示器20等扭曲。因此，当AE评估值AE2大于阈值时，颜色补偿处理器326可以使用通过第二图像传感器200的感测而生成的AWB评估值AWB2来执行颜色补偿。在一个示例实施例中，仅当AE评估值AE2大于阈值时，颜色补偿处理器326才可以使用AWB评估值AWB2执行颜色补偿。
由于使用了AWB评估值AWB2，因此可以使用更准确的色温值，从而通过颜色补偿处理器326来改善图像质量。
再次参考图10，如果AE评估值AE2不大于阈值(步骤S351为“否”)，则确定单元319可以将AWB评估值AWB1传送到颜色补偿处理器326(步骤S353)。也就是说，当电子设备1所处的环境不够明亮时，由第一图像传感器100感测的光以及由第二图像传感器200感测的光可能显著不同。因此，在此情况下，可以使用通过第一图像传感器100的感测而生成的AWB评估值AWB1来执行颜色补偿。
在从确定单元319接收到AWB评估值AWB1和AWB2中的一个之后，颜色补偿处理器326可以使用AWB评估值AWB1和AWB2中的一个来补偿第二转换信号S1b。
颜色补偿处理器326可以确定从AWB评估值AWB1和AWB2中的对应一个得出的色温值是否在边界区域中(步骤S354)。例如，当颜色补偿处理器326从确定单元319接收到AWB评估值AWB1时，颜色补偿处理器326可以确定从AWB评估值AWB1得出的色温值是否在边界区域中；并且，当颜色补偿处理器326从确定单元319接收到AWB评估值AWB2时，颜色补偿处理器326可以确定从AWB评估值AWB2得出的色温值是否在边界区域中。
参考图12，当从AWB评估值AWB1和AWB2中的对应一个得出的色温值小于第一温度T1或大于第二温度T2时，颜色补偿处理器326可以补偿第二转换信号S1b。
再次参考图10，当从AWB评估值AWB1和AWB2中的对应一个得出的色温值小于第一温度T1或大于第二温度T2时(步骤S354为“否”)，颜色补偿处理器326可以执行颜色补偿(步骤S355)。例如，当从对应AWB评估值AWB1或AWB2得出的色温值小于约3,000K时，颜色补偿处理器326可以用较红的颜色来补偿第二转换信号S1b。此外，例如，当从对应AWB评估值AWB1或AWB2得出的色温值大于约10,000K时，颜色补偿处理器326可以用更蓝的颜色来补偿第二转换信号S1b。然而，本公开的实施例不限于此，并且可以以不同的方式来执行颜色补偿处理器326的颜色补偿方法。
当从AWB评估值AWB1和AWB2中的对应一个得出的色温值在第一温度T1与第二温度T2之间(步骤S354为“是”)时，颜色补偿处理器326可以在不执行颜色补偿的情况下完成该过程。
通过使颜色补偿处理器326对第二转换信号S1b执行颜色补偿，可以改善与第二转换信号S1b相对应的图像的质量。由于第一图像信号处理器310仅在特定条件下(例如，在足够明亮的室外环境下)使用由第二图像传感器200和第二图像信号处理器330生成的AWB评估值AWB2来执行颜色补偿，因此可以执行准确的补偿。
再次参考图9，颜色补偿处理器326可以输出已经进行了颜色补偿的第三转换信号S1c。第三转换信号S1c可以被发送到图8中的第一确定单元318。
参考图11，后处理电路321可以进一步包括第三确定单元320。例如，可以将参考图9和图10描述的第二确定单元319输出的信号发送到第三确定单元320。此外，可以将AWB评估值AWB1发送到第三确定单元320。
第三确定单元320可以基于AE评估值AE1和AE2之间的差值(例如|AE1-AE2|)，确定AWB评估值AWB1和AWB评估值AWB2中的哪一个将要发送到颜色补偿处理器326。
例如，当AE评价值AE2大于AE评价值AE1一定差值或以上时(例如，当入射在电子设备1的后表面上的光的亮度大于入射在电子设备1的前表面上的光的亮度时)，第三确定单元320可以将AE评估值AE1发送到颜色补偿处理器326。此外，当AE评估值AE2与AE评估值AE1几乎相同时(例如，入射在电子设备1的后表面上的光的亮度类似于入射在电子设备1的前表面上的光的亮度)，第三确定单元320可以将从第二确定单元319接收到的AE评估值AE2发送到颜色补偿处理器326。
参考图12，例如，当AE评估值AE2与AE评估值AE1之间的差值等于或大于X2 lux时，第三确定单元320可以将AE评估值AE1发送到颜色补偿处理器326。替代地，当AE评估值AE2和AE评估值AE1之间的差值小于X2 lux时，第三确定单元320可以将从第二确定单元319接收到的AE评估值AE2发送到颜色补偿处理器326。
也就是说，当由第一图像传感器100测量的入射在前表面上的光的亮度与由第二图像传感器200测量的入射在后表面上的光的亮度之间的差值高出一定的差值或以上时，颜色补偿处理器326可以使用AE评估值AE1而不是AE评估值AE2来执行颜色补偿。通过这种方式，可以在满足预设条件时通过使用AE评估值AE2对图像执行颜色补偿。
图13是描述根据一些示例实施例的电子设备的操作的图示。
参考图13，可以在包括在电子设备1中的第一图像传感器100、第二图像传感器200、白平衡补偿处理器325、颜色补偿处理器326、应用处理器300和显示器20之间传输信号。
第一图像传感器100可以将AWB评估值AWB1、AE评估值AE1和第一转换信号S1a提供给白平衡补偿处理器325(步骤S360)。例如，可以由预处理电路311生成AWB评估值AWB1、AE评估值AE1和第一转换信号S1a，并被发送到后处理电路321的白平衡补偿处理器325。
白平衡补偿处理器325可以接收AWB评估值AWB1、AE评估值AE1和第一转换信号S1a，并且基于AWB评估值AWB1对第一转换信号S1a执行白平衡补偿。由此，白平衡补偿处理器325可以生成第二转换信号S1b(步骤S361)。
白平衡补偿处理器325可以将所生成的第二转换信号S1b提供给颜色补偿处理器326(步骤S362)。
第一图像传感器100可以将AWB评估值AWB1和AE评估值AE1提供给颜色补偿处理器326(步骤S363)。
第二图像传感器200可以将AWB评估值AWB2和AE评估值AE2提供给颜色补偿处理器326(步骤S364)。例如，可以由预处理电路331生成AWB评估值AWB2和AE评估值AE2，并被发送到后处理电路321的颜色补偿处理器326。
颜色补偿处理器326可以接收AE评估值AE1和AE2、AWB评估值AWB1和AWB2以及第二转换信号S1b(步骤S365)。
颜色补偿处理器326可以基于接收到的信号对第二转换信号S1b执行颜色补偿(步骤S366)。例如，可以执行参考图8到图12描述的颜色补偿处理器326的颜色补偿处理。由此，颜色补偿处理器326可以生成第三转换信号S1c。
颜色补偿处理器326可以将第三转换信号S1c提供给应用处理器300(步骤S367)。例如，应用处理器300可以接收第三转换信号S1c。例如，包括在应用处理器300中的显示驱动电路可以使用第三转换信号S1c来生成图像信号。
应用处理器300可以将所生成的图像信号提供给显示器20(步骤S368)。例如，由显示驱动电路生成的图像信号可以被发送到显示器20。结果，显示器20可以基于图像信号输出图像。
下文中将参考图14描述根据一些其他示例实施例的图像感测系统。
图14是示出根据一些其他实施例的图像感测系统的方框图。为便于描述，与参考图1到图13的描述重复的描述将被简略或省略。
参考图14，图像感测系统3可以包括第一图像传感器100、第二图像传感器200和应用处理器300。
第一图像传感器100可以通过使用入射光对感测目标的图像进行感测来生成第一图像信号S1。例如，第一图像传感器100可以感测通过显示器20的光并且生成第一图像信号S1。
第二图像传感器200可以通过使用入射光对感测目标的图像进行感测来生成第二图像信号S2。例如，第二图像传感器200可以通过感测没有通过显示器20的光来生成第二图像信号S2。
第一图像信号S1和第二图像信号S2可以被提供给应用处理器300并由应用处理器300处理。例如，第一图像信号S1和第二图像信号S2可以被提供给包括在应用处理器300中的图像信号处理器390并由其处理。
图像信号处理器390可以处理参考图5到图13的第一图像信号S1和第二图像信号S2。
例如，当处理第一图像信号S1时，可以在某些条件下使用作为处理第二图像信号S2的结果而生成的信号。即，当处理第一图像信号S1时，可以在图像信号处理器390中共享通过处理第二图像信号S2生成的信号。此外，当处理第二图像信号S2时，可以在图像信号处理器390中共享通过处理第一图像信号S1生成的信号。
也就是说，由参考图5到图13描述的图像感测系统2的第一图像信号处理器310和第二图像信号处理器330执行的处理步骤可以由图14中的图像感测系统3的图像信号处理器390执行。
在此情况下，共享信号不限于基于第一图像信号S1和第二图像信号S2生成的信号，并且可以包括各种其他信息。例如，共享信号可以包括用于对多个图像数据进行高动态范围(HDR)处理的信号。
下文中将参考图15到图16描述根据一些其他实施例的电子设备。
图15是用于描述根据一些实施例的包括多相机模块的电子设备1000的方框图。图16是图15中的相机模块的详细方框图。为便于描述，与参考图1到图14的描述重复的描述将被简略或省略。
参考图15，图像感测系统4包括电子设备1000，并且电子设备1000可以包括相机模块组1100、应用处理器1200、电源管理集成电路(PMIC)1300、外部存储器1400和显示器1500。
相机模块组1100可以包括多个相机模块1100a、1100b和1100c。尽管附图示出其中布置有三个相机模块1100a、1100b和1100c的实施例，但是实施例不限于此。在一些实施例中，相机模块组1100可以被修改为仅包括两个相机模块。此外，在一些实施例中，相机模块组1100可以被修改为包括n个(n是大于3的自然数)相机模块。
在此实施例中，三个相机模块1100a、1100b和1100c中的一个可以是包括参考图1到图14描述的第一图像传感器100的相机模块。例如，相机模块1100b可以是包括第一图像传感器100的相机模块，并且可以设置成朝向电子设备1或4的前表面。此外，相机模块1100b可以被显示器20或显示器1500覆盖，并且可以感测通过显示器20或1500的入射光。
下文中将参考图16描述相机模块1100b的详细配置。以下描述可以等同地应用于根据实施例的其他相机模块1100a和1100c。
参考图16，相机模块1100b可以包括棱镜1105、光路折叠元件(以下称为“OPFE”)1110、执行机构1130、图像感测单元1140和存储单元1150。
棱镜1105可以包括具有光反射材料的反射表面1107，并且改变从外部入射的光L的路径。
在一些实施例中，棱镜1105可以将在第一方向X上入射的光L的路径改变成垂直于第一方向X的第二方向Y。此外，棱镜1105可以使具有光反射材料的反射面1107相对于中心轴1106沿A方向旋转，或者使中心轴1106沿B方向旋转，从而将在第一方向X上入射的光L的路径改变成与其垂直的第二方向Y。在此情况下，OPFE 1110也可以在垂直于第一方向X和第二方向Y的第三方向Z上移动。
在一些实施例中，如图所示，棱镜1105在A方向上的最大旋转角在正(+)A方向上可以是15度或以下，而在负(-)A方向上可以大于15度。然而，实施例不限于此。
在一些实施例中，棱镜1105可以在正(+)或负(-)B方向上移动约20度、10度与20度之间或15度与20度之间。在此情况下，移动角度在正(+)或负(-)B方向上可以相同，或者在正(+)或负(-)B方向上几乎相同，相差约1度。
在一些实施例中，棱镜1105可以使具有光反射材料的反射表面1107在平行于中心轴1106的延伸方向的第三方向(例如，方向Z)上移动。
OPFE 1110可以包括例如m(m是自然数)个光学透镜。m个透镜可以在第二方向Y上移动以改变相机模块1100b的光学变焦比。例如，如果假设相机模块1100b的基础光学变焦比为Z，则随着移动包括在OPFE 1110中的m个光学透镜，相机模块1100b的光学变焦比可以变为3Z、5Z或以上。
执行机构1130可以将光学透镜或OPFE 1110(以下称为“光学透镜”)移动到特定位置。例如，执行机构1130可以调节光学透镜的位置，使得图像传感器1142可以定位在光学透镜的焦距处以用于精确感测。
图像感测单元1140可以包括图像传感器1142、控制逻辑1144和存储器1146。图像传感器1142可以使用通过光学透镜提供的光L来对感测目标的图像进行感测。在一些实施例中，图像传感器1142可以包括上述图像传感器100和200中的至少一个。
控制逻辑1144可以控制相机模块1100b的整体操作。例如，控制逻辑1144可以根据通过控制信号线CSLb提供的控制信号来控制相机模块1100b的操作。
存储器1146可以存储信息，诸如用于相机模块1100b的操作的校准数据1147。校准数据1147可以包括用于相机模块1100b使用从外部提供的光L生成图像数据的信息。校准数据1147可以包括例如上述的关于光轴的信息、关于旋转度的信息以及关于焦距的信息。当相机模块1100b以其焦距根据光学透镜的位置而变化的多状态相机的形式实施时，校准数据1147可以包括关于自动聚焦的信息以及光学透镜的每个位置(或状态)的焦距值。
存储单元1150可以存储通过图像传感器1142感测的图像数据。存储单元1150可以设置在图像感测单元1140的外部，并且可以以与构成图像感测单元1140的传感器芯片堆叠的形式实施。在一些实施例中，存储单元1150可以被实施为电可擦除可编程只读存储器(EEPROM)，但是实施例不限于此。
共同参考图15和图16，在一些实施例中，相机模块1100a、1100b和1100c中的每一个可以包括执行机构1130。相应地，相机模块1100a、1100b和1100c可以根据包括在其中的执行机构1130的操作分别包括相同或不同的校准数据1147。
在一些实施例中，相机模块1100a、1100b和1100c中的一个相机模块(例如，相机模块1100b)可以是包括上述棱镜1105和OPFE 1110的折叠透镜类型的相机模块，并且其余相机模块(例如，相机模块1100a和1100c)可以是垂直类型的相机模块，其不包括棱镜1105和OPFE 1110。但是，实施例不限于此。
在一些实施例中，相机模块1100a、1100b和1100c中的一个相机模块(例如，相机模块1100c)可以是垂直类型的深度相机，其使用例如红外线(IR)提取深度信息。在此情况下，应用处理器1200可以将从深度相机提供的图像数据与从另一相机模块(例如，相机模块1100a或1100b)提供的图像数据合并以生成三维(3D)深度图像。
在一些实施例中，在相机模块1100a、1100b和1100c中，至少两个相机模块(例如，相机模块1100a和1100c)可以具有不同的视野(视角)。在此情况下，例如，在相机模块1100a、1100b和1100c中，至少两个相机模块(例如，相机模块1100a和1100c)可以具有不同的光学透镜，但不限于此。
此外，在一些实施例中，相机模块1100a、1100b和1100c可以具有不同的视角。在此情况下，包括在相应相机模块1100a、1100b和1100c中的光学透镜也可以是不同的，但是本公开不限于此。
在一些实施例中，相机模块1100a、1100b和1100c可以被设置为彼此物理分离。也就是说，一个图像传感器1142的感测区域没有被所有相机模块1100a、1100b和1100c划分和使用，而是可以在相机模块1100a、1100b和1100c中的每一个的内部设置独立的图像传感器1142。
在一些实施例中，例如，包括在相机模块1100a中的图像传感器1142可以具有上述图像传感器200，并且包括在相机模块1100b中的图像传感器1142可以具有上述图像传感器100。
再次参考图15，应用处理器1200可以包括图像处理单元1210、存储器控制器1220和内部存储器1230。应用处理器1200可以与相机模块1100a、1100b和1100c分开地实施。例如，可以将应用处理器1200以及相机模块1100a、1100b和1100c分别实施为单独的半导体芯片。
图像处理单元1210可以包括多个子图像处理器1212a、1212b和1212c，图像生成器1214和相机模块控制器1216。在一些实施例中，图像处理单元1210可以包括上述的第一图像信号处理器310、第二图像信号处理器330和图像信号处理器390。
图像处理单元1210可以包括子图像处理器1212a、1212b和1212c，其数量对应于相机模块1100a、1100b和1100c的数量。在一些实施例中，子图像处理器1212a、1212b和1212c中的每一个可以包括上述的第一图像信号处理器310、第二图像信号处理器330和图像信号处理器390中的一个。
从相应相机模块1100a、1100b和1100c生成的图像数据可以通过分离的图像信号线ISLa、ISLb和ISLc被提供给对应的子图像处理器1212a、1212b和1212c。例如，从相机模块1100a生成的图像数据可以通过图像信号线ISLa提供给子图像处理器1212a，从相机模块1100b生成的图像数据可以通过图像信号线ISLb提供给子图像处理器1212b，并且从相机模块1100c生成的图像数据可以通过图像信号线ISLc提供给子图像处理器1212c。例如，可以基于移动工业处理器接口(MIPI)使用相机串行接口(CSI)来执行这样的图像数据传输，但是实施例不限于此。
在一些实施例中，一个子图像处理器可以被布置成对应于多个相机模块。例如，子图像处理器1212a和子图像处理器1212c可以被集成到一个子图像处理器中而不如图所示彼此分离，并且从相机模块1100a和相机模块1100c提供的图像数据可以是由数据选择器(例如，多路复用器)等选择，然后提供给集成的子图像处理器。
提供给子图像处理器1212a、1212b和1212c中的每一个的图像数据可以提供给图像生成器1214。图像生成器1214可以根据图像生成信息或模式信号，使用从子图像处理器1212a、1212b和1212c中的每一个提供的图像数据来生成输出图像。在一些实施例中，图像生成器1214可以包括上述的后处理电路321。图像生成器1214可以执行上述补偿过程。
具体地，根据图像生成信息或模式信号，图像生成器1214可以通过合并从具有不同视角的相机模块1100a、1100b和1100c生成的图像数据中的至少一些数据来生成输出图像。此外，根据图像生成信息或模式信号，图像生成器1214可以通过选择从具有不同视角的相机模块1100a、1100b和1100c生成的图像数据中的任何一个来生成输出图像。
在一些实施例中，图像生成信息可以包括变焦信号(或变焦因数)。此外，在一些实施例中，模式信号可以是基于例如用户选择的模式的信号。
当图像生成信息是变焦信号(变焦因数)并且相机模块1100a、1100b和1100c具有不同的视野(视角)时，图像生成器1214可以根据变焦信号的类型执行不同的操作。例如，当变焦信号是第一信号时，可以将从相机模块1100a输出的图像数据与从相机模块1100c输出的图像数据合并，然后可以使用合并的图像信号和从相机模块1100b输出的、不用于合并的图像数据来生成输出图像。当变焦信号是与第一信号不同的第二信号时，图像生成器1214不执行图像数据合并，而是可以通过选择从相机模块1100a、1100b和1100c输出的图像数据中的任何一个来生成输出图像。然而，实施例不限于此，并且可以根据需要对处理图像数据的方法进行各种修改。
在一些实施例中，图像生成器1214可以从子图像处理器1212a、1212b和1212c中的至少一个接收具有不同曝光时间的多个图像数据，并且对多个图像数据执行高动态范围(HDR)处理，从而生成动态范围增加的合并图像数据。
相机模块控制器1216可以向相机模块1100a、1100b和1100c中的每一个提供控制信号。从相机模块控制器1216生成的控制信号可以通过分离的控制信号线CSLa、CSLb和CSLc被提供给对应的照相机模块1100a、1100b和1100c。
相机模块1100a、1100b和1100c中的任何一个(例如相机模块1100a)可以根据模式信号或包括变焦信号的图像生成信息被指定为主相机，并且其余相机模块(例如相机模块1100b和1100c)可以指定为从属相机。这样的信息可以被包括在通过分离的控制信号线CSLa、CSLb和CSLc提供给相应的相机模块1100a、1100b和1100c的控制信号中。
可以根据变焦因数或操作模式信号来更改作为主从设备操作的相机模块。例如，当相机模块1100a的视角大于相机模块1100c的视角并且变焦因数指示低变焦比时，相机模块1100c可以作为主设备操作，并且相机模块1100a可以作为从属设备操作。相反，当变焦因数指示高变焦比时，相机模块1100a可以作为主设备操作，并且相机模块1100c可以作为从属设备操作。
在一些实施例中，从相机模块控制器1216提供给相机模块1100a、1100b和1100c中的每一个的控制信号可以包括同步使能信号。例如，当相机模块1100b是主相机并且相机模块1100a和1100c是从属相机时，相机模块控制器1216可以将同步使能信号发送到相机模块1100b。已经接收到同步使能信号的相机模块1100b可以基于所接收的同步使能信号来生成同步信号，并且通过同步信号线SSL将所生成的同步信号发送到相机模块1100a和1100c。基于同步信号，相机模块1100a、1100b和1100c可以将图像数据同步地发送到应用处理器1200。
在一些实施例中，从相机模块控制器1216提供给相机模块1100a、1100b和1100c的控制信号可以包括根据模式信号的模式信息。基于模式信息，相机模块1100a、1100b和1100c可以相对于感测率以第一操作模式或第二操作模式进行操作。
在第一操作模式中，相机模块1100a、1100b和1100c可以以第一速率(例如，第一帧速率)生成图像信号，并且以高于第一速率的第二速率(例如，高于第一帧速率的第二帧速率)对图像信号进行编码，并且将编码后的图像信号发送到应用处理器1200。在此情况下，第二速率可以是第一速率的30倍或以下。
应用处理器1200可以将接收到的图像信号，即编码后的图像信号存储在提供在其中的存储器1230中或提供在应用处理器1200外部的存储器1400中。之后，应用处理器1200可以从存储器1230或存储器1400中读出编码后的图像信号以对编码后的图像信号进行解码，并且显示基于解码后的图像信号生成的图像数据。例如，图像处理单元1210的子图像处理器1212a、1212b和1212c中的对应子处理器可以执行解码，并且还可以对解码后的图像信号执行图像处理。例如，可以将基于解码后的图像信号生成的图像数据显示在显示器1500上。
在第二操作模式下，相机模块1100a、1100b和1100c可以以低于第一速率的第三速率(例如，低于第一帧速率的第三帧速率)生成图像信号，并将图像信号发送到应用处理器1200。提供给应用处理器1200的图像信号可以是未编码的信号。应用处理器1200可以对接收到的图像信号执行图像处理，或者可以将图像信号存储在存储器1230或存储器1400中。
PMIC 1300可以向相机模块1100a、1100b和1100c中的每一个供应电力，诸如电源电压。例如，应用处理器1200的控制下，PMIC 1300可以通过电力信号线PSLa将第一电力提供给相机模块1100a，通过电力信号线PSLb将第二电力提供给相机模块1100b，并且通过电力信号线PSLc将第三电力提供给相机模块1100c。
PMIC 1300可以响应于来自应用处理器1200的功率控制信号PCON而生成与相机模块1100a、1100b和1100c中的每个相机模块相对应的功率，并且还可以调整功率电平。功率控制信号PCON可以包括针对相机模块1100a、1100b和1100c的每个操作模式的功率调节信号。例如，操作模式可以包括低功率模式，并且在此情况下，功率控制信号PCON可以包括关于相机模块的信息以在低功率模式和设定功率电平下操作。提供给相应相机模块1100a、1100b和1100c的功率电平可以相同或不同。此外，功率电平可以动态地改变。
本公开可以被实施成写入计算机可读记录介质上的计算机可读代码。计算机可读记录介质可以是以计算机可读方式存储数据的任何类型的记录设备。
计算机可读记录介质的示例包括ROM、RAM、CD-ROM、磁带、软盘、光学数据存储和载波(例如，通过互联网(Internet)的数据传输)。可以将计算机可读记录介质分布在连接到网络的多个计算机系统上，从而以分散方式向其中写入计算机可读代码并且从中执行计算机可读代码。所属领域中的普通技术人员可以容易地推断出用于实施本公开的功能程序、代码和代码段。
根据一个示例实施例，本文描述的组件、元件、模块或单元中的至少一个可以实施成执行上述各个功能的各种数量的硬件、软件和/或固件结构。例如，这些组件、元件或单元中的至少一个可以使用可以通过一个或多个微处理器或其他控制装置的控制来执行相应的功能的直接电路结构，诸如存储器、处理器、逻辑电路、查找表等。此外，这些组件、元件或单元中的至少一个可以由模块、程序或代码的一部分具体地实施，该模块、程序或代码的一部分包括用于执行指定逻辑功能，并且被一个或多个微处理器或其他控制装置执行的一个或多个可执行指令。此外，这些组件、元件或单元中的至少一个可以进一步包括处理器，诸如执行相应功能的中央处理单元(CPU)、微处理器等，或由其实施。这些组件、元件或单元中的两个或更多个可以组合成单一组件、元件或单元，此单一组件、元件或单元执行被组合的两个或更多个组件、元件或单元的所有操作或功能。此外，这些组件、元件或单元中的至少一个的至少一部分功能可以由这些组件、元件或单元中的另一个来执行。此外，尽管方框图中未示出总线，但是可以通过总线执行组件、元件或单元之间的通信。可以以在一个或多个处理器上执行的算法来实施以上示例实施例的功能方面。此外，由块或处理操作表示的组件、元件或单元可以采用任意数量的用于电子配置、信号处理和/或控制、数据处理等的相关领域技术。
尽管已经参考本公开的实施例具体示出和描述了本公开，但是应理解，在不脱离所附权利要求的精神和范围的情况下，可以在形式和细节上进行各种改变。

Claims (20)

1.一种包括图像传感器的电子设备，包括：
显示器；
第一图像传感器，所述第一图像传感器被配置成基于感测穿过所述显示器的第一光而输出第一图像信号；
第二图像传感器，所述第二图像传感器被配置成基于感测不穿过所述显示器的第二光而输出第二图像信号；以及
处理器，所述处理器被配置成：
基于所述第二图像信号生成第一光学值和第二光学值，所述第二光学值与所述第一光学值不同，并且
基于所述第一光学值满足第一条件，使用所述第二光学值对所述第一图像信号进行校正。
2.根据权利要求1所述的电子设备，其中所述第一光学值包括基于所述第二图像信号生成的亮度值或照度值中的至少一个，并且
其中所述第二光学值包括基于所述第二图像信号生成的色温值。
3.根据权利要求2所述的电子设备，其中所述处理器进一步被配置成基于所述第一光学值满足所述第一条件并且还基于所述色温值小于第一色温或者等于或大于第二色温，通过使用所述色温值来校正所述第一图像信号，所述第二色温高于所述第一色温。
4.根据权利要求1所述的电子设备，其中所述处理器进一步被配置成基于所述第一图像信号生成第三光学值和第四光学值，所述第四光学值不同于所述第三光学值。
5.根据权利要求4所述的电子设备，其中所述第三光学值包括基于所述第一图像信号生成的亮度值或照度值中的至少一个，并且
其中所述第四光学值包括基于所述第一图像信号生成的色温值。
6.根据权利要求1所述的电子设备，其中所述第一条件是：所述第一光学值等于或大于阈值。
7.根据权利要求1所述的电子设备，其中所述处理器进一步被配置成基于所述第一光学值不满足所述第一条件，通过使用基于所述第一图像信号生成的光学值来校正所述第一图像信号。
8.根据权利要求7所述的电子设备，其中基于所述第一图像信号生成的所述光学值包括基于所述第一图像信号生成的色温值。
9.根据权利要求4所述的电子设备，其中所述第一条件是：所述第一光学值与所述第三光学值之间的差值小于阈值。
10.根据权利要求9所述的电子设备，其中所述处理器进一步被配置成基于所述第一光学值与所述第三光学值之间的差值等于或大于所述阈值，通过使用基于所述第一图像信号生成的光学值来校正所述第一图像信号。
11.根据权利要求1所述的电子设备，其中所述显示器进一步被配置成输出基于所述校正后的第一图像信号生成的图像。
12.根据权利要求1所述的电子设备，其中所述处理器进一步被配置成：通过对所述第一图像信号执行自动白平衡来输出第三图像信号；并且
其中所述处理器进一步被配置成基于所述第一光学值满足第二条件，输出通过使用所述第二光学值校正所述第三图像信号而获得的第四图像信号。
13.根据权利要求12所述的电子设备，其中所述显示器进一步被配置成输出基于所述第三图像信号或所述第四图像信号中的至少一个而生成的图像。
14.一种包括图像传感器的电子设备，包括：
第一图像传感器，所述第一图像传感器被配置成基于感测入射到所述电子设备的前表面的第一光而输出第一图像信号；
第二图像传感器，所述第二图像传感器被配置成基于感测入射到所述电子设备的后表面的第二光而输出第二图像信号；
处理器，所述处理器被配置成接收所述第一图像信号和所述第二图像信号；以及
显示器，所述显示器设置在所述前表面上并且被配置成输出基于所述第一图像信号生成的图像，
其中所述处理器进一步被配置成基于所述第二图像信号生成第一色温值，并且基于第一条件被满足，通过使用所述第一色温值来校正所述第一图像信号。
15.根据权利要求14所述的电子设备，其中所述显示器进一步被配置成覆盖所述第一图像传感器。
16.根据权利要求14所述的电子设备，其中所述处理器进一步被配置成基于所述第一图像信号生成第二色温值，并且基于所述第二图像信号生成亮度值或照度值中的至少一个。
17.根据权利要求16所述的电子设备，其中所述第一条件是：所述亮度值或所述照度值中的至少一个等于或大于阈值。
18.根据权利要求16所述的电子设备，其中所述处理器进一步被配置成：基于所述第一条件不被满足，通过使用所述第二色温值来校正所述第一图像信号。
19.根据权利要求14所述的电子设备，其中所述显示器进一步被配置成输出基于所述校正后的第一图像信号生成的图像。
20.一种包括图像传感器的电子设备，包括：
显示器；
第一相机模块，所述第一相机模块包括第一图像传感器，所述第一图像传感器被配置成基于感测通过所述显示器的第一光来输出第一图像信号；
第二相机模块，所述第二相机模块包括第二图像传感器，所述第二图像传感器被配置成基于感测不穿过所述显示器的第二光而输出第二图像信号；以及
与所述第一相机模块和所述第二相机模块分开设置的应用处理器，所述应用处理器包括图像信号处理器，
其中所述图像信号处理器被配置成：
通过第一相机串行接口从所述第一相机模块接收所述第一图像信号，
通过第二相机串行接口从所述第二相机模块接收所述第二图像信号，
基于所述第一图像信号生成第一色温值，
基于所述第二图像信号生成亮度值或照度值中的一个，以及第二色温值，并且
基于所述亮度值或所述亮度值中的至少一个等于或大于阈值，基于所述第二色温值来校正所述第一图像信号，并且基于所述亮度值或所述亮度值中的至少一个小于所述阈值，基于所述第一色温值来校正所述第一图像信号。
CN202110855654.2A 2020-08-05 2021-07-28 包括图像传感器的电子设备 Pending CN114070972A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020200097880A KR20220017649A (ko) 2020-08-05 2020-08-05 이미지 센서를 포함하는 전자 장치
KR10-2020-0097880 2020-08-05

Publications (1)

Publication Number Publication Date
CN114070972A true CN114070972A (zh) 2022-02-18

Family

ID=80114375

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110855654.2A Pending CN114070972A (zh) 2020-08-05 2021-07-28 包括图像传感器的电子设备

Country Status (3)

Country Link
US (1) US11412197B2 (zh)
KR (1) KR20220017649A (zh)
CN (1) CN114070972A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220097818A (ko) 2020-12-31 2022-07-08 삼성전자주식회사 언더 디스플레이 카메라
WO2024101970A1 (ko) * 2022-11-10 2024-05-16 주식회사 윌로그 다중 영역 센싱 가능한 멀티 모달 기반 전자 장치, 및 이의 동작 방법

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0779444A (ja) 1993-09-06 1995-03-20 Asahi Optical Co Ltd スチルビデオカメラ
JP5426262B2 (ja) 2009-07-17 2014-02-26 富士フイルム株式会社 複眼撮像装置
KR101888970B1 (ko) 2011-12-02 2018-08-16 엘지이노텍 주식회사 자동밝기조절 카메라 모듈
US9253433B2 (en) 2012-11-27 2016-02-02 International Business Machines Corporation Method and apparatus for tagging media with identity of creator or scene
US9247223B2 (en) * 2013-01-25 2016-01-26 Blackberry Limited Reduce operating environment effect using multiple cameras
JP2014165608A (ja) 2013-02-22 2014-09-08 Canon Inc 撮像装置およびその制御方法
KR102013331B1 (ko) 2013-02-23 2019-10-21 삼성전자 주식회사 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법
KR102397044B1 (ko) 2017-09-04 2022-05-16 삼성전자 주식회사 디스플레이를 포함하는 전자 장치 및 이를 보정하는 방법
US11516374B2 (en) * 2019-06-05 2022-11-29 Synaptics Incorporated Under-display image sensor
US11153513B2 (en) * 2019-08-19 2021-10-19 Synaptics Incorporated Light source for camera
US11893482B2 (en) * 2019-11-14 2024-02-06 Microsoft Technology Licensing, Llc Image restoration for through-display imaging
KR20210143063A (ko) * 2020-05-19 2021-11-26 삼성전자주식회사 복수의 카메라들을 포함하는 전자 장치
KR102669934B1 (ko) * 2020-09-17 2024-05-28 삼성전자주식회사 이미지 신호 프로세서 및, 이미지 신호 프로세서를 포함하는 전자 장치 및 전자 시스템

Also Published As

Publication number Publication date
KR20220017649A (ko) 2022-02-14
US11412197B2 (en) 2022-08-09
US20220046215A1 (en) 2022-02-10

Similar Documents

Publication Publication Date Title
CN113170061B (zh) 图像传感器、成像装置、电子设备、图像处理系统及信号处理方法
US11412197B2 (en) Electronic device including image sensor
US12028637B2 (en) Image sensing system for converting an image signal to have a specific pattern
US11889240B2 (en) Image device and operation method of image device
US20210377504A1 (en) Image signal processor, image signal processing method and electronic device thereof
US20230073138A1 (en) Image sensor, image processing system including the same, and image processing method
US11418737B2 (en) Image signal processor and electronic device and electronic system including the same
US11622093B1 (en) Pixel array for reducing image information loss and image sensor including the same
US11700460B2 (en) Image sensing apparatus and image binning method thereof
US20220385841A1 (en) Image sensor including image signal processor and operating method of the image sensor
US11375181B2 (en) Camera module test apparatus, camera module test method and image generating device
KR20220152862A (ko) 카메라 모듈 및 이를 포함하는 촬상 장치
US20230143333A1 (en) Image sensor, application processor and image sensing device
US20220384499A1 (en) Image sensor and image signal processing method
US20230108491A1 (en) Image signal processor, image sensing device, image sensing method and electronic device
US20230169629A1 (en) Image signal processor, method for operating image signal processor and image sensing device
US20240185558A1 (en) Image signal processor and image sensing device thereof
US11758288B2 (en) Device for improving image resolution in camera system having lens that permits distortion and operation method thereof
US20240098387A1 (en) Image sensor, mobile device, and image sensor operation method for reducing data transmission latency
KR20230067491A (ko) 이미지 센서, 어플리케이션 프로세서 및 이미지 센싱 장치
US20230300481A1 (en) Image sensing device and image processing method of the same
US20240005448A1 (en) Imaging device and image processing method
US20240186349A1 (en) Image sensing device and method of image signal processing
KR20230152464A (ko) 이미지 센서의 비닝 방법 및 이를 수행하는 이미지 센서

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination