CN111953899B - 图像生成方法、图像生成装置、存储介质与电子设备 - Google Patents
图像生成方法、图像生成装置、存储介质与电子设备 Download PDFInfo
- Publication number
- CN111953899B CN111953899B CN202010773487.2A CN202010773487A CN111953899B CN 111953899 B CN111953899 B CN 111953899B CN 202010773487 A CN202010773487 A CN 202010773487A CN 111953899 B CN111953899 B CN 111953899B
- Authority
- CN
- China
- Prior art keywords
- image
- screen
- images
- display parameters
- screen area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000002159 abnormal effect Effects 0.000 claims description 6
- 230000002194 synthesizing effect Effects 0.000 claims description 6
- 230000002708 enhancing effect Effects 0.000 claims description 4
- 238000007781 pre-processing Methods 0.000 claims description 4
- 238000012216 screening Methods 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 238000012545 processing Methods 0.000 abstract description 11
- 230000008569 process Effects 0.000 abstract description 5
- 238000004891 communication Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 11
- 238000007726 management method Methods 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 7
- 230000005236 sound signal Effects 0.000 description 6
- 238000002834 transmittance Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000010295 mobile communication Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000001914 filtration Methods 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000003706 image smoothing Methods 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000003707 image sharpening Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000002087 whitening effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
本公开提供一种图像生成方法、图像生成装置、计算机可读存储介质与电子设备,涉及图像处理技术领域。该图像生成方法应用于终端设备,所述终端设备具有屏幕区域,所述屏幕区域下方设有屏下摄像头,所述方法包括:响应于用户选择的预设拍摄模式,调节所述屏幕区域的显示参数,并控制所述屏下摄像头在不同显示参数下分别采集得到原始图像;基于所述原始图像,生成高动态范围图像。本公开可以通过调节屏幕区域的显示参数,生成高动态范围图像,图像生成过程简单,降低了对终端设备的硬件要求。
Description
技术领域
本公开涉及图像处理技术领域,尤其涉及一种图像生成方法、图像生成装置、计算机可读存储介质与电子设备。
背景技术
随着终端设备的不断发展,用户对摄影和摄像要求的不断提高,拍摄模式的发展越来越多样化,满足了用户在不同应用场景下的个性化需求,例如用户可以针对不同的场景,拍摄人像图像、全景图像或者HDR(High-Dynamic Range,高动态范围)图像等。
其中,由于HDR图像相比于普通的图像,可以提供更多的图像细节,受到了广泛关注。现有技术中,生成HDR图像通常是通过控制相机快门的速度,拍摄不同曝光时间的低动态范围图像,对其进行合成,来实现的。然而,这种方式,由于需要终端设备在拍摄过程中不断改变快门速度或感光度,通过采集的多帧图像合成最终的图像,过程中往往涉及复杂的算法,且对硬件具有较高的要求。
因此,如何采用简单有效的方式生成HDR图像,是现有技术亟待解决的问题。
发明内容
本公开提供了一种图像生成方法、图像生成装置、计算机可读存储介质与电子设备,进而至少在一定程度上改善现有的HDR图像生成过程中对硬件要求较高的问题。
本公开的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本公开的实践而习得。
根据本公开的第一方面,提供一种图像生成方法,应用于终端设备,所述终端设备具有屏幕区域,所述屏幕区域下方设有屏下摄像头,所述方法包括:响应于用户选择的预设拍摄模式,调节所述屏幕区域的显示参数,并控制所述屏下摄像头在不同显示参数下分别采集得到原始图像;基于所述原始图像,生成高动态范围图像。
根据本公开的第二方面,提供一种图像生成装置,应用于终端设备,所述终端设备具有屏幕区域,所述屏幕区域下方设有屏下摄像头,所述装置包括:图像采集模块,用于响应于用户选择的预设拍摄模式,调节所述屏幕区域的显示参数,并控制所述屏下摄像头在不同显示参数下分别采集得到原始图像;图像生成模块,用于基于所述原始图像,生成高动态范围图像。
根据本公开的第三方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述图像生成方法。
根据本公开的第四方面,提供一种电子设备,包括:处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述图像生成方法。
本公开的技术方案具有以下有益效果:
根据上述图像生成方法、图像生成装置、计算机可读存储介质与电子设备,响应于用户选择的预设拍摄模式,调节屏幕区域的显示参数,并控制屏下摄像头在不同显示参数下分别采集得到原始图像;基于原始图像,生成高动态范围图像。一方面,本示例性实施例提出一种新的HDR图像的生成方式,通过调节终端设备的屏幕区域的显示参数,来获取原始图像,相比于现有技术中调节曝光时间获取原始图像的方式,灵活性更高,较为便捷,且对终端设备的硬件要求较低,节省了硬件成本;另一方面,现有技术中,调节曝光时间是通过控制相机快门的速度实现的,采集原始图像时间极大程度上受到了硬件的制约,导致生成HDR图像的时效性较低,而本示例性实施例通过调节终端设备的屏幕区域的显示参数,降低了硬件的约束程度,避免了上述问题,提高了图像生成的效率和时效性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出本示例性实施方式的电子设备的示意图;
图2示出本示例性实施方式的一种图像生成方法的流程图;
图3示出本示例性实施方式的一种图像生成方法的子流程图;
图4示出本示例性实施方式的另一种图像生成方法的子流程图;
图5示出本示例性实施方式的一种图像生成装置的结构框图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本公开的实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本公开的技术方案而省略特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。
此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
本公开的示例性实施方式提供一种用于实现图像生成方法的电子设备。该电子设备至少包括处理器和存储器,存储器用于存储处理器的可执行指令,处理器配置为经由执行可执行指令来执行图像生成方法。
电子设备可以以各种形式来实施,例如可以包括手机、平板电脑、笔记本电脑、个人数字助理(Personal Digital Assistant,PDA)、导航装置、可穿戴设备、无人机等移动设备,以及台式电脑、智能电视等固定设备。
下面以图1中的终端设备100为例,对电子设备的构造进行示例性说明。本领域技术人员应当理解,除了特别用于移动目的的部件之外,图1中的构造也能够应用于固定类型的设备。在另一些实施方式中,终端设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件、软件或软件和硬件的组合实现。各部件间的接口连接关系只是示意性示出,并不构成对终端设备100的结构限定。在另一些实施方式中,终端设备100也可以采用与图1不同的接口连接方式,或多种接口连接方式的组合。
如图1所示,终端设备100具体可以包括:处理器110、内部存储器121、外部存储器接口122、USB接口130、充电管理模块140、电源管理模块141、电池142、天线1、天线2、移动通信模块150、无线通信模块160、音频模块170、扬声器171、受话器172、麦克风173、耳机接口174、传感器模块180、显示屏幕190、摄像模组191、指示器192、马达193、按键194以及用户标识模块(Subscriber Identification Module,SIM)卡接口195等。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(Application Processor,AP)、调制解调处理器、图形处理器(Graphics ProcessingUnit,GPU)、图像信号处理器(Image Signal Processor,ISP)、控制器、编码器、解码器、数字信号处理器(Digital Signal Processor,DSP)、基带处理器和/或神经网络处理器(Neural-Network Processing Unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。编码器可以对图像或视频数据进行编码(即压缩),形成码流数据;解码器可以对图像或视频的码流数据进行解码(即解压缩),以还原出图像或视频数据。
在一些实施方式中,处理器110可以包括一个或多个接口。接口可以包括集成电路(Inter-Integrated Circuit,I2C)接口、集成电路内置音频(Inter-Integrated CircuitSound,I2S)接口、脉冲编码调制(Pulse Code Modulation,PCM)接口、通用异步收发传输器(Universal Asynchronous Receiver/Transmitter,UART)接口、移动产业处理器接口(Mobile Industry Processor Interface,MIPI)、通用输入输出(General-PurposeInput/Output,GPIO)接口、用户标识模块(Subscriber Identity Module,SIM)接口和/或通用串行总线(Universal Serial Bus,USB)接口等。通过不同的接口和终端设备100的其他部件形成连接。
USB接口130是符合USB标准规范的接口,具体可以是MiniUSB接口,MicroUSB接口,USBTypeC接口等。USB接口130可以用于连接充电器为终端设备100充电,也可以连接耳机,通过耳机播放音频,还可以用于终端设备100连接其他电子设备,例如连接电脑、外围设备等。
充电管理模块140用于从充电器接收充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为设备供电。
电源管理模块141用于连接电池142、充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为终端设备100的各个部分供电,还可以用于监测电池的状态。
终端设备100的无线通信功能可以通过天线1、天线2、移动通信模块150、无线通信模块160、调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。终端设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。移动通信模块150可以提供应用在终端设备100上的包括2G/3G/4G/5G等无线通信的解决方案。
无线通信模块160可以提供应用在终端设备100上的包括无线局域网(WirelessLocal Area Networks,WLAN)(如无线保真(Wireless Fidelity,Wi-Fi)网络)、蓝牙(Bluetooth,BT)、全球导航卫星系统(Global Navigation Satellite System,GNSS)、调频(Frequency Modulation,FM)、近距离无线通信技术(Near Field Communication,NFC)、红外技术(Infrared,IR)等无线通信解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施方式中,终端设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得终端设备100可以通过无线通信技术与网络以及其他设备通信。无线通信技术可以包括全球移动通讯系统(Global System for Mobile communications,GSM),通用分组无线服务(General Packet Radio Service,GPRS),码分多址接入(CodeDivision Multiple Access,CDMA),宽带码分多址(Wideband Code Division MultipleAccess,WCDMA),时分码分多址(Time Division-Synchronous Code Division MultipleAccess,TD-SCDMA),长期演进(Long Term Evolution,LTE),新空口(New Radio,NR),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。
终端设备100通过GPU、显示屏幕190及应用处理器等实现显示功能。GPU用于执行数学和几何计算,以实现图形渲染,并连接显示屏幕190和应用处理器。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。终端设备100可以包括一个或多个显示屏幕190,用于显示图像,视频等。
终端设备100可以通过ISP、摄像模组191、编码器、解码器、GPU、显示屏幕190及应用处理器等实现拍摄功能。
摄像模组191用于捕获静态图像或视频,通过感光元件采集光信号,转换为电信号。ISP用于处理摄像模组191反馈的数据,将电信号转换成数字图像信号。
外部存储器接口122可以用于连接外部存储卡,例如Micro SD卡,实现扩展终端设备100的存储能力。
内部存储器121可以用于存储计算机可执行程序代码,可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储终端设备100使用过程中所创建的数据(比如图像,视频)等。处理器110通过运行存储在内部存储器121的指令和/或存储在设置于处理器中的存储器的指令,执行终端设备100的各种功能应用以及数据处理。
终端设备100可以通过音频模块170、扬声器171、受话器172、麦克风173、耳机接口174及应用处理器等实现音频功能。例如音乐播放、录音等。音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。扬声器171,用于将音频电信号转换为声音信号。受话器172,用于将音频电信号转换成声音信号。麦克风173,用于将声音信号转换为电信号。耳机接口174用于连接有线耳机。
传感器模块180可以包括触摸传感器1801、压力传感器1802、陀螺仪传感器1803、气压传感器1804等。触摸传感器1801用于感应外部输入的触摸事件,其可以设置于显示屏幕190的下方,使显示屏幕190成为触控屏,也可以设置于其他位置,例如设置为独立于显示屏幕190的触控板,还可以设置于终端设备100的配套外接设备,例如外接触控板、触摸式遥控器等,使用户通过外接设备实现触控交互。压力传感器1802用于感受压力信号,可以将压力信号转换成电信号,用于实现压力触控等功能。陀螺仪传感器1803可以用于确定终端设备100的运动姿态,可用于拍摄防抖、导航、体感游戏等场景。气压传感器1804用于测量气压,可通过计算海拔高度,辅助定位和导航。此外,根据实际需要,还可以在传感器模块180中设置其他功能的传感器,例如深度传感器、加速度传感器、距离传感器等。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
马达193可以产生振动提示,例如来电、闹钟、接收信息等的振动提示,也可以用于触摸振动反馈等。
按键194包括开机键,音量键等。按键194可以是机械按键。也可以是触摸式按键。终端设备100可以接收按键输入,产生与终端设备100的用户设置以及功能控制有关的键信号输入。
终端设备100可以支持一个或多个SIM卡接口195,用于连接SIM卡,使终端设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。
本公开示例性实施方式首先提供了一种图像生成方法,应用于终端设备,该终端设备具有屏幕区域,且屏幕区域下方设有屏下摄像头。其中,终端设备可以包括但不限于智能手机、平板电脑、笔记本电脑等具有显示屏的电子设备,屏幕区域即为显示屏的显示区域,屏下摄像头是指设置在屏幕区域下方的,肉眼无法察觉摄像头存在的“隐形屏下摄像头”,屏下摄像头可以透过上方的屏幕区域正常进行图像采集或拍摄。需要说明的是,不同类型的终端设备,屏幕区域的数量可以不同,例如智能手机可以仅设置前置一个显示屏;也可以前后分别设置一个显示屏,即两个屏幕区域。对应的,屏下摄像头也可以具有一个或多个,例如在前置屏幕区域设置一个屏下摄像头,或者在前后屏幕区域各设置一个屏下摄像头,即两个摄像头等,屏下摄像头设置的具体位置本公开对此不做具体限定。
图2示出了本示例性实施方式中一种图像生成方法的流程,包括以下步骤S210~S220:
步骤S210,响应于用户选择的预设拍摄模式,调节屏幕区域的显示参数,并控制屏下摄像头在不同显示参数下分别采集得到原始图像。
预设拍摄模式是指可以通过调节屏幕区域显示参数的方式生成HDR图像的模式,其区别于传统的HDR图像的生成模式,传统模式下,当确定用户需要拍摄HDR图像时,终端设备会通过调节相机快门的速度,拍摄多张曝光时间不同的原始图像,例如欠曝图像、过曝图像以及正常曝光图像,将这些原始图像进行合成后,生成HDR图像。而在预设拍摄模式下,终端设备可以无需调节相机快门的速度或者曝光时间的长短,而是通过多次调节屏幕区域的显示参数,来控制屏下摄像头在不同显示参数下,采集不同显示效果的原始图像。其中,屏幕区域的显示参数是指能够控制屏幕显示状态的参数,例如屏幕显示的颜色,屏幕显示的亮度值、灰度值或透明度等等。本示例性实施例可以通过调节屏幕区域的显示参数,控制屏下摄像头在采集图像时的进光量,从而获取多张图像细节表现不同的原始图像,该原始图像即为屏下摄像头获取的预览图像,可以用于合成最终的HDR图像。采集的原始图像的数量可以根据需要或者根据屏幕区域的显示参数的差异度进行自定义设置,例如可以采集3张或5张原始图像,或者以显示参数为灰度值为例,从灰度值为0开始,灰度值每增加10,采集一张原始图像,直到灰度值为100等等,本公开对此不做具体限定。
在一示例性实施例中,上述预设拍摄模式可以包括高动态范围拍摄模式或者模拟高动态范围拍摄模式。
在本示例性实施例中,上述预设拍摄模式可以通过用户与终端设备之间的交互操作实现,例如可以在相机界面内设置一高动态范围拍摄模式或者模拟高动态范围拍摄模式的控件,当用户输入针对该控件的预设操作,如单击、双击、长按、滑动等操作时,触发选择高动态范围拍摄模式或者模拟高动态范围拍摄模式。需要说明的是,高动态范围拍摄模式与模拟高动态范围拍摄模式可以是同一种拍摄模式,例如都是通过调节屏幕区域的显示参数,确定HDR图像;也可以是不同的拍摄模式,例如高动态范围拍摄模式表示通过调节屏幕区域的显示参数,或者调节曝光时间,确定HDR图像,模拟高动态范围拍摄模式表示仅通过调节屏幕区域的显示参数,确定高动态范围图像。也即在本示例性实施例中,可以设置多种控件选项,通过与用户的交互操作,确定用户当前需要采用哪一种方式拍摄HDR图像,以提高图像拍摄的针对性。
此外,预设拍摄模式的选择还可以包括其他方式,例如用户输入语音操作指令激活预设拍摄模式,或者通过相机对当前预览图像进行识别,自动切换至预设拍摄模式等等,本公开对此不做具体限定。
在一示例性实施例中,上述调节屏幕区域的显示参数可以包括:
调节屏幕区域的显示颜色。
考虑到传统模式是通过改变曝光时间或感光度,采集过曝图像、正常曝光图像和欠曝光图像并进行合成,生成最终HDR图像的。而不同曝光程度的图像,实质上是因为摄像头在拍摄时进光量不相同造成的,曝光时间越长,进光量越大,画面越亮,曝光时间越短,进光量越少,画面越暗。而本示例性实施例,则是充分考虑到屏下摄像头上方屏幕区域的透光特性,在不同透光性下获取不同曝光程度的原始图像。由于显示区域在不同的显示颜色下,具有不同程度的透光性,例如深色透光性差,浅色透光性好等。因此,本示例性实施例可以通过调节屏幕区域的显示颜色,在不同透光差异下确定原始图像。
在一示例性实施例中,上述调节屏幕区域的显示颜色可以包括以下步骤:
控制屏幕区域显示为纯灰色,并调节纯灰色的灰度值。
为了能够均匀有效的对屏幕区域的显示颜色进行调节,本示例性实施例可以控制屏幕区域显示为纯灰色,通过调节其灰度值的大小,实现调节屏幕区域的显示颜色,灰度值越大,屏幕区域显示的颜色越暗,透光性越差;反之,灰度值越小,屏幕区域显示的颜色越亮,透光性越好。高透光性时可以采集过曝光的原始图像,中透光性时可以采集正常曝光的原始图像,低透光性时可以采集欠曝光的原始图像。另外,在进行灰度值的调节时,可以设置多种调节方式,并根据多种调节方式,确定采集的原始图像,例如以最大灰度值为基准,按预设灰度调节量降低灰度值,采集预设数量个原始图像;或者以最小灰度值为基准,按预设灰度调节量增大灰度值,采集预设数量个原始图像;再或者当灰度值为最小值、最大值和中间值时,采集原始图像等,本公开对此不做具体限定。
步骤S220,基于原始图像,生成高动态范围图像。
在本示例性实施例中,基于获取原始图像进行合成,可以生成最终的HDR图像。其中,合成多张原始图像,其实质是将每张图像细节表现较好的区域进行融合,例如过曝图像中天空区域的表现较差,建筑区域的表现较好,欠曝图像中天空区域的表现较好,建筑区域的表现较差,则在合成时,可以将过曝图像中的建筑区域与欠曝图像中的天空区域进行合成。在获取多张原始图像,对原始图像进行合成时,可以对原始图像进行筛选,以保证生成的HDR图像的显示效果。
在一示例性实施例中,为了提高生成的HDR图像的图像质量,在合成原始图像之间,图像生成方法还可以包括:
对原始图像进行预处理;预处理包括以下任意一种或多种:筛除原始图像中的异常图像,图像增强,图像去噪,图像锐化。
在实际应用中,相机所拍摄的图像可能会由于外界或本身的原因,出现画面抖动异常,或者模糊等异常图像,影响HDR图像的生成质量,因此,本示例性实施例可以通过拍摄多张原始图像,并从多张原始图像中进行筛选的方式,筛除其中的异常图像。另外,还可以对图像进行增强处理、图像去噪或图像锐化处理,其中,图像增强,主要指增强图像中的感兴趣区域(Region Of Interest,ROI),抑制不感兴趣区域;图像去噪,通过滤波、图像平滑等手段,减少图像中的噪声干扰去噪是指减少数字图像中噪声;图像锐化,通过补偿图像的轮廓,增强图像的边缘及灰度跳变的部分,使图像变得清晰。若需要,还可以对原始图像进行其他处理,例如图像去雾、图像平滑等等,本公开对此不做具体限定。
在一示例性实施例中,如图3所示,上述步骤S220可以包括以下步骤:
步骤S310,在各原始图像中分别检测最优曝光区域;
步骤S320,合成各原始图像的最优曝光区域,得到高动态范围图像。
其中,最优曝光区域是指当前原始图像中曝光表现较好的区域,例如在过曝光的原始图像中,天空区域容易出现发白等过曝的效果,而建筑等其他对象相比于天空区域则能够呈现较为清晰、曝光正常的效果,此时,最优曝光区域即为建筑等其他对象所在的区域;或者在欠曝光的原始图像中,天空区域曝光正常,细节表现更完整,而建筑等其他对象则因为曝光不足呈现出光线过暗、画面过黑等情况,此时,最优曝光区域即为天空区域。在各原始图像中检测最优曝光区域可以采用多种方式,例如对原始图像进行区域分割,在分割的子区域中进行特征提取和分析,以在不同的原始图像中确定对应的最优曝光区域。另外,本示例性实施例还可以通过多种方式合成各原始图像的最优曝光区域,例如加权融合或拉普拉斯金字塔等等,本公开对此不做具体限定。
综上,本示例性实施方式中,响应于用户选择的预设拍摄模式,调节屏幕区域的显示参数,并控制屏下摄像头在不同显示参数下分别采集得到原始图像;基于原始图像,生成高动态范围图像。一方面,本示例性实施例提出一种新的HDR图像的生成方式,通过调节终端设备的屏幕区域的显示参数,来获取原始图像,相比于现有技术中调节曝光时间获取原始图像的方式,灵活性更高,较为便捷,且对终端设备的硬件要求较低,节省了硬件成本;另一方面,现有技术中,调节曝光时间是通过控制相机快门的速度实现的,采集原始图像时间极大程度上受到了硬件的制约,导致生成HDR图像的时效性较低,而本示例性实施例通过调节终端设备的屏幕区域的显示参数,降低了硬件的约束程度,避免了上述问题,提高了图像生成的效率和时效性。
在一示例性实施例中,除了通过调节屏幕区域的显示参数的方式之外,本示例性实施例还可以与传统模式相结合,具体的,图像生成方法可以包括以下步骤:
步骤S410,响应于用户选择的预设拍摄模式,调节屏幕区域的显示参数和拍摄曝光时间,并控制屏下摄像头在不同显示参数、不同拍摄曝光时间下分别采集得到原始图像;其中,至少两张原始图像是在不同显示参数下采集得到的;
步骤S420,基于原始图像,生成高动态范围图像。
即预设拍摄模式可以是,传统的高动态范围拍摄模式,与调节屏幕区域的显示参数的模拟高动态范围拍摄模式的组合模式。在该组合模式下,可以采用传统的高动态范围拍摄模式,通过控制曝光时间获取过曝图像、正常曝光图像或欠曝图像,也可以采用模拟高动态范围拍摄模式,通过调节屏幕区域的显示参数获取过曝图像、正常曝光图像或欠曝图像等,然后将不同模式下获取的多个图像进行合成,生成HDR图像。例如用户在进行HDR图像拍摄时,屏下摄像头以较短的曝光时间获取了欠曝图像,又通过调节屏幕区域的灰度值,在屏幕区域透光性良好时获取过曝图像,透光性中等时获取正常曝光图像,进一步,将欠曝图像、正常曝光图像与过曝图像进行合成,生成高动态范围图像。本示例性实施例一方面,通过结合两种拍摄模式的优点,可以使生成的HDR图像具有较好的显示效果;另一方面,合理控制曝光时间获取原始图像,结合灵活调节显示参数获取原始图像,能够提高HDR图像生成的效率。
本公开的示例性实施方式还提供一种图像生成装置。应用于终端设备,终端设备具有屏幕区域,屏幕区域下方设有屏下摄像头,如图5所示,该图像生成装置500可以包括:图像采集模块510,用于响应于用户选择的预设拍摄模式,调节屏幕区域的显示参数,并控制屏下摄像头在不同显示参数下分别采集得到原始图像;图像生成模块520,用于基于原始图像,生成高动态范围图像。
在一示例性实施例中,图像采集模块可以包括:颜色调节单元,用于响应于用户选择的预设拍摄模式,调节屏幕区域的显示颜色,并控制屏下摄像头在不同显示参数下分别采集得到原始图像。
在一示例性实施例中,颜色调节单元可以用于:响应于用户选择的预设拍摄模式,控制屏幕区域显示为纯灰色,并调节纯灰色的灰度值,控制屏下摄像头在不同显示参数下分别采集得到原始图像
在一示例性实施例中,图像采集模块可以包括:图像采集单元,用于调节屏幕区域的显示参数和拍摄曝光时间,并控制屏下摄像头在不同显示参数、不同拍摄曝光时间下分别采集得到原始图像;其中,至少两张原始图像是在不同显示参数下采集得到的。
在一示例性实施例中,图像生成模块可以包括:最优曝光区域检测单元,用于在各原始图像中分别检测最优曝光区域;区域合成单元,用于合成各原始图像的最优曝光区域,得到高动态范围图像。
在一示例性实施例中,图像生成装置还可以包括:图像预处理模块,用于在基于原始图像,生成高动态范围图像之前,对采集得到原始图像进行预处理;预处理包括以下任意一种或多种:筛除原始图像中的异常图像,图像增强,图像去噪,图像锐化。
在一示例性实施例中,预设拍摄模式包括高动态范围拍摄模式或者模拟高动态范围拍摄模式。
上述装置中各模块的具体细节在方法部分实施方式中已经详细说明,未披露的细节内容可以参见方法部分的实施方式内容,因而不再赘述。
所属技术领域的技术人员能够理解,本公开的各个方面可以实现为系统、方法或程序产品。因此,本公开的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。
本公开的示例性实施方式还提供了一种计算机可读存储介质,其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施方式中,本公开的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当程序产品在终端设备上运行时,程序代码用于使终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤,例如可以执行图2、图3或图4中任意一个或多个步骤。
本公开的示例性实施方式还提供了一种用于实现上述方法的程序产品,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本公开的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码,程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其他实施方式。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施方式仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。
Claims (9)
1.一种图像生成方法,应用于终端设备,其特征在于,所述终端设备具有屏幕区域,所述屏幕区域下方设有屏下摄像头,所述方法包括:
响应于用户选择的预设拍摄模式,调节所述屏幕区域的显示参数,并控制所述屏下摄像头在不同显示参数下分别采集得到多个原始图像,所述显示参数为控制所述屏幕区域的显示状态的亮度参数、灰度参数或透明度参数,所述原始图像包括过曝图像、正常曝光图像或欠曝图像;
在各所述原始图像中分别检测最优曝光区域;
合成各所述原始图像的最优曝光区域,得到高动态范围图像。
2.根据权利要求1所述的方法,其特征在于,所述调节所述屏幕区域的显示参数,包括:
调节所述屏幕区域的显示颜色。
3.根据权利要求2所述的方法,其特征在于,所述调节所述屏幕区域的显示颜色,包括:
控制所述屏幕区域显示为纯灰色,并调节所述纯灰色的灰度值。
4.根据权利要求1所述的方法,其特征在于,所述调节所述屏幕区域的显示参数,并控制所述屏下摄像头在不同显示参数下分别采集得到原始图像,包括:
调节所述屏幕区域的显示参数和拍摄曝光时间,并控制所述屏下摄像头在不同显示参数、不同拍摄曝光时间下分别采集得到原始图像;
其中,至少两张所述原始图像是在不同显示参数下采集得到的。
5.根据权利要求1所述的方法,其特征在于,在基于所述原始图像,生成高动态范围图像之前,所述方法还包括:
对采集得到所述原始图像进行预处理;
所述预处理包括以下任意一种或多种:筛除所述原始图像中的异常图像,图像增强,图像去噪,图像锐化。
6.根据权利要求1至5任一项所述的方法,其特征在于,所述预设拍摄模式包括高动态范围拍摄模式或者模拟高动态范围拍摄模式。
7.一种图像生成装置,应用于终端设备,其特征在于,所述终端设备具有屏幕区域,所述屏幕区域下方设有屏下摄像头,所述装置包括:
图像采集模块,用于响应于用户选择的预设拍摄模式,调节所述屏幕区域的显示参数,并控制所述屏下摄像头在不同显示参数下分别采集得到多个原始图像,所述显示参数为控制所述屏幕区域的显示状态的亮度参数、灰度参数或透明度参数,所述原始图像包括过曝图像、正常曝光图像或欠曝图像;
图像生成模块,用于在各所述原始图像中分别检测最优曝光区域;合成各所述原始图像的最优曝光区域,得到高动态范围图像。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6任一项所述的方法。
9.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1至6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010773487.2A CN111953899B (zh) | 2020-08-04 | 2020-08-04 | 图像生成方法、图像生成装置、存储介质与电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010773487.2A CN111953899B (zh) | 2020-08-04 | 2020-08-04 | 图像生成方法、图像生成装置、存储介质与电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111953899A CN111953899A (zh) | 2020-11-17 |
CN111953899B true CN111953899B (zh) | 2021-12-17 |
Family
ID=73339455
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010773487.2A Active CN111953899B (zh) | 2020-08-04 | 2020-08-04 | 图像生成方法、图像生成装置、存储介质与电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111953899B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220141663A (ko) * | 2021-04-13 | 2022-10-20 | 삼성전자주식회사 | 영상을 처리하는 방법 및 이를 수행하는 전자 장치 |
US11706532B2 (en) | 2021-08-18 | 2023-07-18 | Samsung Electronics Co., Ltd. | Method for providing image and electronic device supporting the same |
WO2023022331A1 (ko) * | 2021-08-18 | 2023-02-23 | 삼성전자 주식회사 | 이미지를 제공하는 방법 및 이를 지원하는 전자 장치 |
CN113934340B (zh) * | 2021-09-22 | 2024-04-19 | 青岛海信移动通信技术有限公司 | 一种终端设备和进度条显示方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102244757A (zh) * | 2011-06-07 | 2011-11-16 | 北京邮电大学 | 一种基于投影仪-相机系统的多投影大屏幕颜色校正方法 |
CN105554406A (zh) * | 2015-12-03 | 2016-05-04 | 广东欧珀移动通信有限公司 | 屏幕补光的控制方法及装置 |
CN110245607A (zh) * | 2019-06-13 | 2019-09-17 | Oppo广东移动通信有限公司 | 眼球追踪方法及相关产品 |
CN110636225A (zh) * | 2019-10-23 | 2019-12-31 | 维沃移动通信有限公司 | 拍照方法及电子设备 |
CN111064898A (zh) * | 2019-12-02 | 2020-04-24 | 联想(北京)有限公司 | 图像拍摄方法及装置、设备、存储介质 |
CN111294523A (zh) * | 2020-03-10 | 2020-06-16 | 捷开通讯(深圳)有限公司 | 拍摄方法、装置、存储介质及电子设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105654925B (zh) * | 2015-12-31 | 2018-03-30 | 深圳Tcl数字技术有限公司 | 高动态范围图像处理方法及系统 |
US11030728B2 (en) * | 2018-05-29 | 2021-06-08 | Apple Inc. | Tone mapping techniques for increased dynamic range |
-
2020
- 2020-08-04 CN CN202010773487.2A patent/CN111953899B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102244757A (zh) * | 2011-06-07 | 2011-11-16 | 北京邮电大学 | 一种基于投影仪-相机系统的多投影大屏幕颜色校正方法 |
CN105554406A (zh) * | 2015-12-03 | 2016-05-04 | 广东欧珀移动通信有限公司 | 屏幕补光的控制方法及装置 |
CN110245607A (zh) * | 2019-06-13 | 2019-09-17 | Oppo广东移动通信有限公司 | 眼球追踪方法及相关产品 |
CN110636225A (zh) * | 2019-10-23 | 2019-12-31 | 维沃移动通信有限公司 | 拍照方法及电子设备 |
CN111064898A (zh) * | 2019-12-02 | 2020-04-24 | 联想(北京)有限公司 | 图像拍摄方法及装置、设备、存储介质 |
CN111294523A (zh) * | 2020-03-10 | 2020-06-16 | 捷开通讯(深圳)有限公司 | 拍摄方法、装置、存储介质及电子设备 |
Non-Patent Citations (1)
Title |
---|
高通着力智能手机换代产品研发;林蔓;《传感器世界》;20190305;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN111953899A (zh) | 2020-11-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111953899B (zh) | 图像生成方法、图像生成装置、存储介质与电子设备 | |
CN109218628B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
KR20150099302A (ko) | 전자 장치와, 그의 제어 방법 | |
CN111179282A (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
CN113382169A (zh) | 一种拍照方法及电子设备 | |
CN112954251B (zh) | 视频处理方法、视频处理装置、存储介质与电子设备 | |
CN112289279B (zh) | 屏幕亮度调整方法、装置、存储介质与电子设备 | |
CN113810598A (zh) | 一种拍照方法及设备 | |
CN111161176B (zh) | 图像处理方法及装置、存储介质和电子设备 | |
EP3723360A1 (en) | Method for image-processing and electronic device | |
CN111741303B (zh) | 深度视频处理方法、装置、存储介质与电子设备 | |
CN111768351A (zh) | 图像去噪方法、图像去噪装置、存储介质与电子设备 | |
CN112348738B (zh) | 图像优化方法、图像优化装置、存储介质与电子设备 | |
CN115526787A (zh) | 视频处理方法和装置 | |
CN111835973A (zh) | 拍摄方法、拍摄装置、存储介质与移动终端 | |
CN112165576A (zh) | 图像显示方法、装置、存储介质与电子设备 | |
CN111800581B (zh) | 图像生成方法、图像生成装置、存储介质与电子设备 | |
CN115460343B (zh) | 图像处理方法、设备及存储介质 | |
CN116048323B (zh) | 图像处理方法及电子设备 | |
CN112217996B (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
CN115412678A (zh) | 曝光处理方法、装置及电子设备 | |
CN111626931B (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
CN111294905B (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
CN115942122A (zh) | 图像的亮度调整方法、装置、终端及存储介质 | |
CN111294509A (zh) | 视频拍摄方法、装置、终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |