CN114143471A - 图像处理方法、系统、移动终端及计算机可读存储介质 - Google Patents
图像处理方法、系统、移动终端及计算机可读存储介质 Download PDFInfo
- Publication number
- CN114143471A CN114143471A CN202111406424.4A CN202111406424A CN114143471A CN 114143471 A CN114143471 A CN 114143471A CN 202111406424 A CN202111406424 A CN 202111406424A CN 114143471 A CN114143471 A CN 114143471A
- Authority
- CN
- China
- Prior art keywords
- image
- shooting
- parameter
- processing
- groups
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 14
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 21
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 21
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 12
- 238000012545 processing Methods 0.000 claims description 113
- 238000000034 method Methods 0.000 claims description 66
- 230000008569 process Effects 0.000 claims description 22
- 230000011218 segmentation Effects 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 14
- 230000009466 transformation Effects 0.000 claims description 9
- 238000000605 extraction Methods 0.000 claims description 4
- 238000005259 measurement Methods 0.000 claims description 4
- 238000003705 background correction Methods 0.000 claims description 3
- 230000002708 enhancing effect Effects 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 8
- 230000006870 function Effects 0.000 description 22
- 238000004422 calculation algorithm Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 238000007726 management method Methods 0.000 description 5
- 230000000007 visual effect Effects 0.000 description 5
- 238000012937 correction Methods 0.000 description 3
- 238000003709 image segmentation Methods 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 206010070834 Sensitisation Diseases 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000003711 image thresholding Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000005375 photometry Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000008313 sensitization Effects 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
- H04N25/58—Control of the dynamic range involving two or more exposures
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
本申请提供一种图像处理方法、系统、移动终端以及计算机可读存储介质,图像处理方法包括:根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数;根据第一预设规则将至少两组第一拍摄参数分别发送给至少两组感光元件,以使各感光元件分别基于第一拍摄参数获取至少一张第一图像;根据至少一张第一图像进行合成,以得到目标图像。本申请根据光线信息确定拍摄参数,并采用至少两组感光元件基于其对应的拍摄参数同时采集图像之后进行图像合成,得到的合成图像画质清晰且噪点少,显著提升了拍摄图像的效果。
Description
技术领域
本申请涉及图像处理技术领域,具体涉及一种图像处理方法、系统、移动终端及计算机可读存储介质。
背景技术
高能动态范围成像(HDR)技术,能够很好地再现现实生活中丰富的亮度级别,产生逼真的效果。其实现方法是通过设多组EV值来对当前拍摄的景物曝光,其中一张照片是使用当前测光从而算出来的正常情况下的EV值曝光,另外几张则分别使用其EV-n的EV值和EV+m的EV值进行曝光。最终对至少一张照片按某种算法进行合成,暗处的景物使用高倍EV曝光的局部照片,而亮处的物体则使用低倍EV曝光的局部照片。这样就能使得整个照片的场景都不至于太亮或太暗。
在构思及实现本申请过程中,发明人发现至少存在如下问题:现有技术中,HDR技术通过单个感光元件触发不同曝光的多张图片,并对多张图像进行软件算法合成处理。由于感光元件依次采集的多张图片存在时间差,在拍摄图像,特别是拍摄移动物体或暗环境图像后,使用HDR技术生成的合成图片存在鬼影和暗环境下彩噪明显等缺陷。
前面的叙述在于提供一般的背景信息,并不一定构成现有技术。
发明内容
针对上述技术问题,本申请提供一种图像处理方法、系统、移动终端及计算机可读存储介质,根据光线信息确定拍摄参数,并采用多个感光元件基于其对应的拍摄参数同时采集图像之后进行图像合成,得到的合成图像画质清晰且噪点少,显著提升了拍摄图像的效果。
为解决上述技术问题,本申请提供一种图像处理方法,包括:
根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数;
根据第一预设规则将所述至少两组第一拍摄参数分别发送给至少两组感光元件,以使各所述感光元件分别基于所述第一拍摄参数获取至少一张第一图像;
根据所述至少一张第一图像进行合成,以得到目标图像。
可选地,在所述根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数之前,所述方法还包括:
通过至少一组所述感光元件获取所述拍摄场景的光线信息;或者,
根据第二预设规则从所述至少两组感光元件中确定目标感光元件,通过所述目标感光元件获取拍摄场景的光线信息。
可选地,所述根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数,包括:
获取至少两组预设拍摄参数,所述预设拍摄参数包括长曝光参数、短曝光参数和正常曝光参数;
根据所述光线信息对所述预设拍摄参数进行处理,以确定或生成所述至少两组第一拍摄参数。
可选地,所述方法还包括:
分别对各所述感光元件的对焦参数、曝光参数和白平衡参数进行统计,以确定或生成各所述感光元件对应的帧数、感光值和快门数。
可选地,所述根据第一预设规则包括以下至少一种:
根据各所述感光元件对应的历史曝光参数分配各所述第一拍摄参数;
根据各所述感光元件对应的曝光参数标识分配各所述第一拍摄参数。
可选地,所述根据所述至少一张第一图像进行合成,以得到目标图像,包括:
向图像信号处理器发送各所述第一拍摄参数,以使所述图像信号处理器基于各所述第一拍摄参数从所述至少两组感光元件采集的图像中分别选取至少一张所述第一图像进行HDR合成,以得到所述目标图像。
可选地,所述图像信号处理器基于各所述第一拍摄参数从所述至少两组感光元件采集的图像中分别选取至少一张所述第一图像进行HDR合成,以得到所述目标图像,包括:
所述图像信号处理器提取各所述感光元件采集的图像中的第二拍摄参数;
若所述第二拍摄参数与所述第一拍摄参数相匹配,则选取所述第二拍摄参数对应的图像作为所述第一图像;
根据所述第一图像进行HDR合成,以得到所述目标图像。
可选地,所述方法还包括:
若所述第二拍摄参数与所述第一拍摄参数不匹配,则对所述第二拍摄参数对应的图像进行处理,以得到与所述第一拍摄参数相匹配的第一图像;或者,
若所述第二拍摄参数与所述第一拍摄参数不匹配,则向其它感光元件发送所述第一拍摄参数,以控制所述其它感光元件基于所述第一拍摄参数采集得到所述第一图像。
可选地,所述根据所述至少一张第一图像进行合成,以得到目标图像,包括:
对所述至少一张第一图像进行去噪处理、锐化处理和/或防抖处理,得到至少一张待合成图像;
对所述至少一张待合成图像进行HDR合成,以得到所述目标图像。
可选地,所述方法包括以下至少一种:
所述去噪处理,包括通过滤波器对所述第一图像进行降噪处理;
所述锐化处理,包括根据镜头阴影校正值对所述第一图像的轮廓进行补偿处理,和/或,对所述第一图像的边缘区域和灰度跳变区域进行增强处理;
所述防抖处理,包括:根据各所述第一图像的清晰度信息确定一标准帧第一图像;检测各所述第一图像的特征点;分别将各其他帧第一图像的特征点与所述标准帧第一图像的特征点进行匹配,以实现各所述其他帧第一图像与所述标准帧第一图像的图像对齐;分别对各所述其他帧第一图像中与所述标准帧第一图像不匹配的图像区域进行剪裁处理,对剪裁处理后的其他帧第一图像进行尺寸调整。
可选地,在所述对所述至少一张第一图像进行去噪处理、锐化处理和/或防抖处理,得到至少一张待合成图像之前,所述方法还包括:
对所述至少一张第一图像进行分割处理、视角对齐处理、配准处理和/或恢复辐照度处理。
可选地,所述方法包括以下至少一项:
所述分割处理,包括对所述第一图像中的预设区域进行分割,得到分割图像;
所述视角对齐处理,包括根据第一分割图像的视场角调整其他分割图像的视场角,以使各所述分割图像的视场角相同;
所述配准处理,包括对所述分割图像进行特征提取以得到分割图像的特征点;通过对所述分割图像的特征点进行相似性度量以得到匹配的特征点对;通过所述匹配的特征点对得到图像空间坐标变换参数;根据所述图像空间坐标变换参数对所述分割图像进行图像配准;
所述恢复辐照度处理,包括根据所述分割图像中像素点的曝光时间以及灰度值,得到所述像素点的辐照度。
本申请还提供一种图像处理系统,包括:数字信号处理模块、图像信号处理模块以及至少两组感光元件;其中:
所述数字信号处理模块,用于根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数,根据第一预设规则将至少两组第一拍摄参数分别发送给至少两组感光元件;
所述至少两组感光元件,用于根据所述至少两组第一拍摄参数获取至少一张第一图像;
所述图像信号处理模块,用于根据所述至少一张第一图像进行HDR合成,以得到目标图像。
本申请还提供一种移动终端,包括:存储器、处理器,其中,所述存储器上存储有计算机程序,所述计算机程序被所述处理器执行时实现如上述方法的步骤。
本申请还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如上述方法的步骤。
本实施例公开的图像处理方法,根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数;根据第一预设规则将至少两组第一拍摄参数分别发送给至少两组感光元件,以使各感光元件分别基于第一拍摄参数获取至少一张第一图像;根据至少一张第一图像进行合成,以得到目标图像。本申请根据光线信息确定拍摄参数,并采用至少两组感光元件基于其对应的拍摄参数同时采集图像之后进行图像合成,得到的合成图像画质清晰且噪点少,显著提升了拍摄图像的效果。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。为了更清楚地说明本申请实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为实现本申请各个实施例的一种移动终端的硬件结构示意图;
图2为本申请实施例提供的一种通信网络系统架构图;
图3是根据第一实施例示出的图像处理方法的流程示意图;
图4是根据第二实施例示出的图像处理系统的结构示意图;
图5是根据第二实施例示出的图像处理系统的另一结构示意图;。
本申请目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。通过上述附图,已示出本申请明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围,而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素,可选地,本申请不同实施例中具有同样命名的部件、特征、要素可能具有相同含义,也可能具有不同含义,其具体含义需以其在该具体实施例中的解释或者进一步结合该具体实施例中上下文进行确定。
应当理解,尽管在本文可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本文范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语"如果"可以被解释成为"在……时"或"当……时"或"响应于确定"。再者,如同在本文中所使用的,单数形式“一”、“一个”和“该”旨在也包括复数形式,除非上下文中有相反的指示。应当进一步理解,术语“包含”、“包括”表明存在所述的特征、步骤、操作、元件、组件、项目、种类、和/或组,但不排除一个或多个其他特征、步骤、操作、元件、组件、项目、种类、和/或组的存在、出现或添加。此处使用的术语“或”和“和/或”被解释为包括性的,或意味着任一个或任何组合。因此,“A、B或C”或者“A、B和/或C”意味着“以下任一个:A;B;C;A和B;A和C;B和C;A、B和C”。仅当元件、功能、步骤或操作的组合在某些方式下内在地互相排斥时,才会出现该定义的例外。
应该理解的是,虽然本申请实施例中的流程图中的各个步骤按照箭头的指示依次展示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
需要说明的是,在本文中,采用了诸如S310、S320等步骤代号,其目的是为了更清楚简要地表述相应内容,不构成顺序上的实质性限制,本领域技术人员在具体实施时,可能会先执行S320后执行S310等,但这些均应在本申请的保护范围之内。
应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或者“单元”的后缀仅为了有利于本申请的说明,其本身没有特定的意义。因此,“模块”、“部件”或者“单元”可以混合地使用。
移动终端可以以各种形式来实施。例如,本申请中描述的移动终端可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant,PDA)、便捷式媒体播放器(Portable Media Player,PMP)、导航装置、可穿戴设备、智能手环、计步器等移动终端,以及诸如数字TV、台式计算机等固定终端。
后续描述中将以移动终端为例进行说明,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本申请的实施方式的构造也能够应用于固定类型的终端。
请参阅图1,其为实现本申请各个实施例的一种移动终端的硬件结构示意图,该移动终端100可以包括:RF(Radio Frequency,射频)单元101、WiFi模块102、音频输出单元103、A/V(音频/视频)输入单元104、传感器105、展示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解,图1中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图1对移动终端的各个部件进行具体的介绍:
射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将基站的下行信息接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System of Mobile communication,全球移动通讯系统)、GPRS(General Packet Radio Service,通用分组无线服务)、CDMA2000(CodeDivision Multiple Access 2000,码分多址2000)、WCDMA(Wideband Code DivisionMultiple Access,宽带码分多址)、TD-SCDMA(Time Division-Synchronous CodeDivision Multiple Access,时分同步码分多址)、FDD-LTE(Frequency DivisionDuplexing-Long Term Evolution,频分双工长期演进)和TDD-LTE(Time DivisionDuplexing-Long Term Evolution,分时双工长期演进)等。
WiFi属于短距离无线传输技术,移动终端通过WiFi模块102可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图1示出了WiFi模块102,但是可以理解的是,其并不属于移动终端的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
音频输出单元103可以在移动终端100处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将射频单元101或WiFi模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与移动终端100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103可以包括扬声器、蜂鸣器等等。
A/V输入单元104用于接收音频或视频信号。A/V输入单元104可以包括图形处理器(Graphics Processing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以展示在展示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或WiFi模块102进行发送。麦克风1042可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风1042接收声音(音频数据),并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。麦克风1042可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。
移动终端100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。可选地,光传感器包括环境光传感器及接近传感器,可选地,环境光传感器可根据环境光线的明暗来调节展示面板1061的亮度,接近传感器可在移动终端100移动到耳边时,关闭展示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
展示单元106用于展示由用户输入的信息或提供给用户的信息。展示单元106可包括展示面板1061,可以采用液晶展示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置展示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。可选地,用户输入单元107可包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作),并根据预先设定的程式驱动相应的连接装置。触控面板1071可包括触摸检测装置和触摸控制器两个部分。可选地,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,并能接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。可选地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种,具体此处不做限定。
可选地,触控面板1071可覆盖展示面板1061,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在展示面板1061上提供相应的视觉输出。虽然在图1中,触控面板1071与展示面板1061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板1071与展示面板1061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元108用作至少一个外部装置与移动终端100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,可选地,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,可选地,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
移动终端100还可以包括给各个部件供电的电源111(比如电池),优选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管图1未示出,移动终端100还可以包括蓝牙模块等,在此不再赘述。
为了便于理解本申请实施例,下面对本申请的移动终端所基于的通信网络系统进行描述。
请参阅图2,图2为本申请实施例提供的一种通信网络系统架构图,该通信网络系统为通用移动通信技术的LTE系统,该LTE系统包括依次通讯连接的UE(User Equipment,用户设备)201,E-UTRAN(Evolved UMTS Terrestrial Radio Access Network,演进式UMTS陆地无线接入网)202,EPC(Evolved Packet Core,演进式分组核心网)203和运营商的IP业务204。
可选地,UE201可以是上述终端100,此处不再赘述。
E-UTRAN202包括eNodeB2021和其它eNodeB2022等。可选地,eNodeB2021可以通过回程(backhaul)(例如X2接口)与其它eNodeB2022连接,eNodeB2021连接到EPC203,eNodeB2021可以提供UE201到EPC203的接入。
EPC203可以包括MME(Mobility Management Entity,移动性管理实体)2031,HSS(Home Subscriber Server,归属用户服务器)2032,其它MME2033,SGW(Serving Gate Way,服务网关)2034,PGW(PDN Gate Way,分组数据网络网关)2035和PCRF(Policy andCharging Rules Function,政策和资费功能实体)2036等。可选地,MME2031是处理UE201和EPC203之间信令的控制节点,提供承载和连接管理。HSS2032用于提供一些寄存器来管理诸如归属位置寄存器(图中未示)之类的功能,并且保存有一些有关服务特征、数据速率等用户专用的信息。所有用户数据都可以通过SGW2034进行发送,PGW2035可以提供UE 201的IP地址分配以及其它功能,PCRF2036是业务数据流和IP承载资源的策略与计费控制策略决策点,它为策略与计费执行功能单元(图中未示)选择及提供可用的策略和计费控制决策。
IP业务204可以包括因特网、内联网、IMS(IP Multimedia Subsystem,IP多媒体子系统)或其它IP业务等。
虽然上述以LTE系统为例进行了介绍,但本领域技术人员应当知晓,本申请不仅仅适用于LTE系统,也可以适用于其他无线通信系统,例如GSM、CDMA2000、WCDMA、TD-SCDMA以及未来新的网络系统等,此处不做限定。
基于上述移动终端硬件结构以及通信网络系统,提出本申请各个实施例。
第一实施例
图3是根据第一实施例示出的图像处理方法的流程示意图,请参考图3,本实施例的图像处理方法,包括:
步骤S310,根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数。
本实施例中,移动终端的摄像头模块在AIcamera或者HDR模式下,对预览的拍摄场景开启光线检测功能。可选地,移动终端可为数码相机、平板电脑或智能手机等设置有数据处理模块,且可实现拍照功能的智能设备。根据获取到的光线信息确定或生成至少两组第一拍摄参数。应当理解,至少两组第一拍摄参数可以相同或者不同。
可选地,在根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数之前,方法还包括:通过至少一组感光元件获取拍摄场景的光线信息;可选地,根据第二预设规则从至少两组感光元件中确定目标感光元件,通过目标感光元件获取拍摄场景的光线信息。
需要说明的是,本实施例涉及至少两组感光元件,在根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数之前,可通过至少一组感光元件获取拍摄场景的光线信息。可选地,通过至少两组感光元件中任意一组或多组感光元件获取拍摄场景的光线信息。可选地,可根据第二预设规则从至少两组感光元件中确定目标感光元件,通过目标感光元件获取拍摄场景的光线信息。可选地,可以是预先设置其中任一感光元件作为目标感光元件以获取光线信息,也可以将预先设置的用于拍摄正常曝光图像的感光元件作为目标感光元件以获取光线信息。可选地,还可以将预先设置的用于拍摄短曝光图像或长曝光图像的感光元件作为目标感光元件以获取光线信息。可选地,还可以将摄像头模块在正常拍照模式下启动的感光元件作为目标感光元件以获取光线信息。
可选地,根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数,包括:获取至少两组预设拍摄参数,预设拍摄参数包括长曝光参数、短曝光参数和正常曝光参数;根据光线信息对预设拍摄参数进行处理,以确定或生成至少两组第一拍摄参数。
在本实施例中,第一拍摄参数可由预设拍摄参数根据光线信息调整后得到。可选地,预先设置多组预设拍摄参数,包括长曝参数、短曝参数和正常参数等。若光线过亮,则可增加短曝参数的数量,和/或,减少长曝参数的数量。若光线过暗,则可增家长曝参数的数量,和/或,减少短曝参数的曝光,以保证在不同的光线条件下拍摄的第一图像均清晰画质,成像效果好。
步骤S320,根据第一预设规则将至少两组第一拍摄参数分别发送给至少两组感光元件,以使各感光元件分别基于第一拍摄参数获取至少一张第一图像。
在本实施例中,可根据第一预设规则将第一拍摄参数分配给感光元件,也可以随机分配第一拍摄参数给感光元件,使多组第一拍摄参数与多组感光元件一一对应。多组感光元件接收到对应的第一拍摄参数之后,在感光元件驱动的控制下根据接收到的多组第一拍摄参数分别采集一张或多张第一图像。
可选地,根据第一预设规则包括以下至少一种:
根据各感光元件对应的历史曝光参数分配各第一拍摄参数;
根据各感光元件对应的曝光参数标识分配各第一拍摄参数。
在本实施例中,根据第一预设规则分配第一拍摄参数时,可根据感光元件的历史曝光参数分配。如感光元件A之前使用正常曝光参数进行拍摄,则分配正常曝光的第一拍摄参数给感光元件A;感光元件B之前使用短曝光参数进行拍摄,则分配短曝光的第一拍摄参数给感光元件B;感光元件C之前使用长曝光参数进行拍摄,则分配长曝光的第一拍摄参数给感光元件C。还可根据感光元件的曝光参数标识分配第一拍摄参数,曝光参数标识可以是长曝光参数标识、正常曝光参数标识、短曝光参数标识。可以提前设定各感光元件分别作为长曝、短曝或正常使用,并设置对应的曝光参数标识。第一预设规则可以为:将长曝参数发送至指定的长曝感光元件,短曝参数发送至指定的短曝感光元件,正常曝参数发送至指定的正常使用的感光元件,避免感光元件切换曝光参数影响感光元件的拍摄性能。
步骤S330,根据至少一张第一图像进行合成,以得到目标图像。
在本实施例中,根据至少一张第一图像进行合成之前,提取感光元件采集的第一图像的拍摄参数,将其与第一拍摄参数比对,若比对结果为第一图像的拍摄参数与第一拍摄参数匹配,则确认从感光元件接收到的第一图像满足拍摄要求。可选地,选取第一图像中的一张或多张进行HDR合成,得到目标图像。
可选地,根据至少一张第一图像进行合成,以得到目标图像,包括:图像信号处理器发送各第一拍摄参数,以使图像信号处理器基于各第一拍摄参数从至少两组感光元件采集的图像中分别选取至少一张第一图像进行HDR合成,以得到目标图像。
在本实施例中,图像信号处理模块包括第一图像信号处理模块和第二图像信号处理模块,第一图像信号处理模块(ISP,Image Signal Processor),主要作用是对前端图像传感器输出的信号做后期处理,主要功能有线性纠正、噪声去除、坏点去除、内插、白平衡、自动曝光控制等,依赖于ISP才能在不同的光学条件下都能较好的还原现场细节,ISP技术在很大程度上决定了摄像机的成像质量。本实施例中,将第一图像输入数字信号处理器进行处理之前,通过ISP对第一图像进行前期的加工处理,即设置第二图像信号处理模块(Pre-ISP,previous Image Signal Processor),利用Pre-ISP的硬件特性,提升图像处理相关算法的运算效率。
可选地,图像信号处理器基于各第一拍摄参数从至少两组感光元件采集的图像中分别选取至少一张第一图像进行HDR合成,以得到目标图像,包括:图像信号处理器提取各感光元件采集的图像中的第二拍摄参数;若第二拍摄参数与第一拍摄参数相匹配,则选取第二拍摄参数对应的图像作为第一图像;根据第一图像进行HDR合成,以得到目标图像。
可选地,若第二拍摄参数与第一拍摄参数不匹配,则对第二拍摄参数对应的图像进行处理,以得到与第一拍摄参数相匹配的第一图像;可选地,若第二拍摄参数与第一拍摄参数不匹配,则向其它感光元件发送第一拍摄参数,以控制其它感光元件基于第一拍摄参数采集得到第一图像。
需要说明的是,由于多次使用感光元件会导致器件性能出现异常,可能接收不到或接收到错误的第一拍摄参数,导致感光元件未按照第一拍摄参数获取到准确的第一图像。可选地,在对第一图像进行HDR进行合成之前,将各感光元件采集的图像中的第二拍摄参数与第一拍摄参数进行匹配,根据匹配结果判断感光元件是否按照预先设定的要求得到对应的第一拍摄参数。匹配时,应该是感光元件与第一拍摄参数对应匹配,若长曝获得的第一图像与第一拍摄参数不对应,可以对该第一图像进行后期处理,使其满足要求。或者按照需要重新下方第一拍摄参数之后,感光元件再次采集符合第一拍摄参数的第一图像。
可选地,根据至少一张第一图像进行HDR合成,以得到目标图像,包括:至少一张第一图像进行去噪处理、锐化处理和/或防抖处理,得到至少一张待合成图像;对至少一张待合成图像进行HDR合成,以得到目标图像。
在本实施例中,去噪处理,包括通过滤波器对第一图像进行降噪处理。锐化处理,包括根据镜头阴影校正值对第一图像的轮廓进行补偿处理,和/或,对第一图像的边缘区域和灰度跳变区域进行增强处理。防抖处理,包括:根据各第一图像的清晰度信息确定标准帧第一图像;检测各第一图像的特征点;分别将各其他帧第一图像的特征点与标准帧第一图像的特征点进行匹配,以实现各其他帧第一图像与标准帧第一图像的图像对齐;分别对各其他帧第一图像中与标准帧第一图像不匹配的图像区域进行剪裁处理,对剪裁处理后的其他帧第一图像进行尺寸调整。
可选地,在对至少一张第一图像进行去噪处理、锐化处理和/或防抖处理,得到至少一张待合成图像之前,方法还包括:对至少一张第一图像进行分割处理、视角对齐处理、配准处理和/或恢复辐照度处理。
本申请实施例采用至少两组感光元件分别同步获取至少两组第一拍摄参数的第一图像,由于各个感光元件设置的位置不同,造成不同感光元件采集到第一图像的视角不同。可选地,在HDR合成之前,可以对多张第一图像进行处理,以统一各个第一图像的视角,提升合成效果。可选地地,处理方式包括分割处理、视角对齐处理、配准处理和/或恢复辐照度处理。可选地,由于每一个感光元件均可以获取多张相同曝光参数的图像,因此,在统一视角之前,将同一个感光元件的多张图像进行去噪处理,得到第一图像,再对至少两组感光元件的第一图像进行统一视角。
可选地,分割处理,包括对第一图像中的预设区域进行分割,得到分割图像。将每个感光元件采集的第一图像的特定区域分割出来,比如人物、风景等。可采用阈值分割法。阈值分割法是一种基于区域的图像分割技术,基本原理是通过设定不同的特征阈值,把图像像素点分为若干类。可选地,直接来自原始图像的灰度或彩色特征;由原始灰度或彩色值变换得到的特征。图像阈值化的目的是要按照灰度级,对像素集合进行一个划分,得到的每个子集形成一个与现实景物相对应的区域,各个区域内部具有一致的属性,而相邻区域不具有这种一致属性。这样的划分可以通过从灰度级出发选取一个或多个阈值来实现。
可选地,视角对齐处理,包括根据第一分割图像的视场角调整其他分割图像的视场角,以使各分割图像的视场角相同。确定至少两组感光元件中一感光元件作为主感光元件,在图像分割完成之后,根据主感光元件的视场角把其他感光元件采集的图像数据进行对齐处理,确保各个第一图像在合成时处于同一视场角。当然,也可不进行图像分割,直接对各个第一图像进行视角对齐处理。将预览时的感光元件作为主感光元件时,视角对齐处理还可以确保预览画面与得到的拍摄图像的视角一致,提升用户的拍照体验。
可选地,配准处理,包括对分割图像进行特征提取以得到分割图像的特征点;通过对分割图像的特征点进行相似性度量以得到匹配的特征点对;通过匹配的特征点对得到图像空间坐标变换参数;根据图像空间坐标变换参数对分割图像进行图像配准。进行配准处理时,也可不进行前叙的分割处理或视角对齐处理。可直接对至少两组感光元器件采集到的第一图像进行特征提取得到特征点;通过进行相似性度量找到匹配的特征点对;然后通过匹配的特征点对得到图像空间坐标变换参数;最后由坐标变换参数进行图像配准。
可选地,恢复辐照度处理,包括根据分割图像中像素点的曝光时间以及灰度值,得到像素点的辐照度。由于每个感光元器件可能因为不同厂家的原因,灰度值存在差异,故需要进行恢复辐照度处理,确保每个图片的辐照度一致,便于进行后续的锐化防抖和去噪处理。当然,进行恢复辐照度处理时,也可不进行前叙的配准处理、分割处理或视角对齐处理。
可选地,本申请实施例的图像处理方法,还包括:分别对各感光元件的对焦参数、曝光参数和白平衡参数进行统计,以确定或生成各感光元件对应的帧数、感光值和快门数。
需要说明的是,分别对各感光元件的对焦参数、曝光参数和白平衡参数进行统计,即3A统计,用于输出对每个感光元器件的3A统计值,以调整各感光元件对应的帧数、感光值和快门数。3A统计的步骤在预览图像或非HDR拍摄的模式下进行,其主要作用是:(a)避免不同感光元器件因不同供应商因亮度差异,导致算法在合成时出现异常。(b)根据3A数据,进行曝光控制,可以计算出不同场景下每个感光元器件的需要设置的shutter(快门数)和gain值(感光值),以及每个感光元器件在该场景下需要拍照的帧数;例如Pre-ISP检测到亮环境时,会对每个感光器件下发只需要一帧,3个感光元器件本次触发拍照只需要取对应的曝光值的一帧合成即可;如Pre-ISP在进行3A计算时,发现当前场景是暗环境,如果此时触发拍照,Pre-ISP会对每个感光元器件获取多帧的操作,这样Pre-ISP获取多帧数据后,多做一步降噪的算法处理,使得暗环境下拍出的图片不仅仅具有动态范围而且降噪效果突出。
第二实施例
本申请实施例公开了一图像处理系统,图4示出了本实施例的图像处理系统的结构示意图,如图4所示,图像处理系统400包括数字信号处理模块401、图像信号处理模块402以及至少两组感光元件403;其中:
数字信号处理模块401,用于根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数,根据第一预设规则将至少两组第一拍摄参数分别发送至至少两组感光元件403;
至少两组感光元件403,用于根据至少两组第一拍摄参数获取至少一张第一图像;
图像信号处理模块402,用于根据至少一张第一图像进行HDR合成,以得到目标图像。
在本实施例中,图像信号处理模块402包括第一图像信号处理模块(ISP)和第二图像信号处理模块(Pre-ISP)。数字信号处理模块401(DSP,Digital Signal Processor)通过MIPI(Mobile Industry Processor Interface,移动行业处理器接口)连接Pre-ISP模块,感光元件通过MIPI连接ISP模块。
可选地,下面结合图5对本实施例的图像处理系统的工作原理进行说明。如图5所示,摄像头模块通过UI界面下发拍照命令,并接收处理完成的图片。摄像头模块预览图像时启动场景光线信息检测功能,并将场景光线信息检测结果下发至Pre-ISP模块。Pre-ISP模块内部分为A、B通道两个模块。A通道是bypass模式,当前场景不是预设拍摄模式时,仅启动正常拍摄模式下的感光元件进行拍摄,拍摄的图像从A通道通过。在预览或拍摄时,可对各个感光元件进行3A统计,以预先确定或生成在预设拍摄模式下的各感光元件对应的帧数、感光值和快门数。当前场景为预设场景时,如HDR拍摄场景等,在B通道添加pre-ISP算法处理模块,实时缓存并处理图像。当触发拍照时,DSP模块首先下发多组拍摄参数,并通知Pre-ISP模块此时触发拍照,把Pre-ISP模块所需要的参数发送给它。可选地,参数可以包含人脸信息、shutter、gain、AWB、Lens Shading Correction等信息。Pre-ISP模块收到触发拍照信息后从多组感光元件读取已拍摄图像的参数信息,将其与触发拍照时DSP模块下发的目标参数信息进行比较。如果匹配,Pre-ISP模块则认为从感光元件收到了准确的拍摄图像,随即进行Pre-ISP算法处理,包括分割处理、视角对齐处理、配准处理、恢复辐照度处理、去噪处理、锐化处理、防抖处理中的一项或多项。其具体处理过程请参考前叙描述,在此不再赘述。
可选地,当Pre-ISP模块的算法处理完成后B通道会连续发送处理完成后的结果帧,B通道送出的结果帧由MIPI OUT送到图像信号处理器进行平台的图像格式转换、自动对焦(AF)、自动曝光(AE)和自动白平衡(AWB)、黑电平校正、色彩增强等。图像信号处理器处理完成后发送给管道模块的P1模块,P1主要接收图像信号处理器输出的RAW数据,并进行格式转换成YUV数据,并把收到DSP模块相关的曝光参数送给感光元件驱动。P1模块把RAW格式图片转换为YUV格式图片后送入P2模块。P2模块收到YUV数据后,进行图片的裁剪以及添加相应的软算法处理,如美颜、美体算法等。可选地,JPEG模块获取到P2模块处理完的YUV数据后,对其进行JPEG编码然后经MW中间件发送给摄像头模块显示。
可选地,感光元件驱动主要负责接收P1node控制感光元件的曝光等信息,驱动感光元件工作输出设置的相关曝光帧。MW中间件负责接收摄像头模块下发的拍照命令,接收JPEG编码完成后图片,返回到摄像头模块,以及管理DSP模块。DSP模块负责摄像头模块中HAL层和Pre-ISP模块的交互,下发拍照命令和相关曝光参数给到Pre-ISP模块和P1node模块。感光元件,负责采集感光元件驱动模块设置好的曝光帧,并输出到Pre-ISP模块的MIPIIN模块。MIPI IN硬件连接感光元件,接收感光元件发出的数据给到Pre-ISP模块。MIPI OUT硬件连接ISP模块,输出经过Pre-ISP模块的图片给到图像信号处理器继续处理。
本实施例在HDR拍摄模式下进行合成处理,利用至少两组感光元件403同步采集至少两组具有不同曝光参数的图像,避免单一感光元件依次采集多个不同曝光的图像时存在时间差,而导致最后合成的图像存在鬼影,本申请应用于动态拍摄时效果尤佳。其次,由于至少两组感光元器件输入的图像存在视场角的差异,需要对各个感光器件输入的图片进行裁剪分割和对齐的操作,保证融合的图片是同一视场角。最后,同时对每个感光元器件进行3A统计,计算当前场景的3A数据:自动对焦(AF)、自动曝光(AE)和自动白平衡(AWB),避免不同感光元器件因不同的供应商原因导致亮度的差异的异常,提升拍摄效果。
本申请还提供一种移动终端,移动终端包括存储器、处理器,存储器上存储有图像处理程序,图像处理程序被处理器执行时实现上述任一实施例中的方法的步骤。
本申请还提供一种计算机可读存储介质,计算机可读存储介质上存储有图像处理程序,图像处理程序被处理器执行时实现上述任一实施例中的方法的步骤。
在本申请提供的移动终端和计算机可读存储介质的实施例中,包含了上述图像处理方法各实施例的全部技术特征,说明书拓展和解释内容与上述方法的各实施例基本相同,在此不做再赘述。
本申请实施例还提供一种计算机程序产品,计算机程序产品包括计算机程序代码,当计算机程序代码在计算机上运行时,使得计算机执行如上各种可能的实施方式中的方法。
本申请实施例还提供一种芯片,包括存储器和处理器,存储器用于存储计算机程序,处理器用于从存储器中调用并运行计算机程序,使得安装有芯片的设备执行如上各种可能的实施方式中的方法。
可以理解,上述场景仅是作为示例,并不构成对于本申请实施例提供的技术方案的应用场景的限定,本申请的技术方案还可应用于其他场景。例如,本领域普通技术人员可知,随着系统架构的演变和新业务场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本申请实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本申请实施例设备中的单元可以根据实际需要进行合并、划分和删减。
在本申请中,对于相同或相似的术语概念、技术方案和/或应用场景描述,一般只在第一次出现时进行详细描述,后面再重复出现时,为了简洁,一般未再重复阐述,在理解本申请技术方案等内容时,对于在后未详细描述的相同或相似的术语概念、技术方案和/或应用场景描述等,可以参考其之前的相关详细描述。
在本申请中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本申请技术方案的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本申请记载的范围。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,被控终端,或者网络设备等)执行本申请每个实施例的方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络,或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、存储盘、磁带)、光介质(例如,DVD),或者半导体介质(例如固态存储盘Solid State Disk(SSD))等。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (15)
1.一种图像处理方法,其特征在于,包括:
根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数;
根据第一预设规则将所述至少两组第一拍摄参数分别发送给至少两组感光元件,以使各所述感光元件分别基于所述第一拍摄参数获取至少一张第一图像;
根据所述至少一张第一图像进行合成,以得到目标图像。
2.根据权利要求1所述的方法,其特征在于,在所述根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数之前,所述方法还包括:
通过至少一组所述感光元件获取所述拍摄场景的光线信息;或者,
根据第二预设规则从所述至少两组感光元件中确定目标感光元件,通过所述目标感光元件获取拍摄场景的光线信息。
3.根据权利要求1所述的方法,其特征在于,所述根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数,包括:
获取至少两组预设拍摄参数,所述预设拍摄参数包括长曝光参数、短曝光参数和正常曝光参数;
根据所述光线信息对所述预设拍摄参数进行处理,以确定或生成所述至少两组第一拍摄参数。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
分别对各所述感光元件的对焦参数、曝光参数和白平衡参数进行统计,以确定或生成各所述感光元件对应的帧数、感光值和快门数。
5.根据权利要求1所述的方法,其特征在于,所述根据第一预设规则包括以下至少一种:
根据各所述感光元件对应的历史曝光参数分配各所述第一拍摄参数;
根据各所述感光元件对应的曝光参数标识分配各所述第一拍摄参数。
6.根据权利要求1所述的方法,其特征在于,所述根据所述至少一张第一图像进行合成,以得到目标图像,包括:
向图像信号处理器发送各所述第一拍摄参数,以使所述图像信号处理器基于各所述第一拍摄参数从所述至少两组感光元件采集的图像中分别选取至少一张所述第一图像进行HDR合成,以得到所述目标图像。
7.根据权利要求6所述的方法,其特征在于,所述图像信号处理器基于各所述第一拍摄参数从所述至少两组感光元件采集的图像中分别选取至少一张所述第一图像进行HDR合成,以得到所述目标图像,包括:
所述图像信号处理器提取各所述感光元件采集的图像中的第二拍摄参数;
若所述第二拍摄参数与所述第一拍摄参数相匹配,则选取所述第二拍摄参数对应的图像作为所述第一图像;
根据所述第一图像进行HDR合成,以得到所述目标图像。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
若所述第二拍摄参数与所述第一拍摄参数不匹配,则对所述第二拍摄参数对应的图像进行处理,以得到与所述第一拍摄参数相匹配的第一图像;或者,
若所述第二拍摄参数与所述第一拍摄参数不匹配,则向其它感光元件发送所述第一拍摄参数,以控制所述其它感光元件基于所述第一拍摄参数采集得到所述第一图像。
9.根据权利要求1至8中任一项所述的方法,其特征在于,所述根据所述至少一张第一图像进行合成,以得到目标图像,包括:
对所述至少一张第一图像进行去噪处理、锐化处理和/或防抖处理,得到至少一张待合成图像;
对所述至少一张待合成图像进行HDR合成,以得到所述目标图像。
10.根据权利要求9所述的方法,其特征在于,所述方法包括以下至少一种:
所述去噪处理,包括通过滤波器对所述第一图像进行降噪处理;
所述锐化处理,包括根据镜头阴影校正值对所述第一图像的轮廓进行补偿处理,和/或,对所述第一图像的边缘区域和灰度跳变区域进行增强处理;
所述防抖处理,包括:根据各所述第一图像的清晰度信息确定标准帧第一图像;检测各所述第一图像的特征点;分别将各其他帧第一图像的特征点与所述标准帧第一图像的特征点进行匹配,以实现各所述其他帧第一图像与所述标准帧第一图像的图像对齐;分别对各所述其他帧第一图像中与所述标准帧第一图像不匹配的图像区域进行剪裁处理,对剪裁处理后的其他帧第一图像进行尺寸调整。
11.根据权利要求9所述的方法,其特征在于,在所述对所述至少一张第一图像进行去噪处理、锐化处理和/或防抖处理,得到至少一张待合成图像之前,所述方法还包括:
对所述至少一张第一图像进行分割处理、视角对齐处理、配准处理和/或恢复辐照度处理。
12.根据权利要求11所述的方法,其特征在于,所述方法包括以下至少一项:
所述分割处理,包括对所述第一图像中的预设区域进行分割,得到分割图像;
所述视角对齐处理,包括根据第一分割图像的视场角调整其他分割图像的视场角,以使各所述分割图像的视场角相同;
所述配准处理,包括对所述分割图像进行特征提取以得到分割图像的特征点;通过对所述分割图像的特征点进行相似性度量以得到匹配的特征点对;通过所述匹配的特征点对得到图像空间坐标变换参数;根据所述图像空间坐标变换参数对所述分割图像进行图像配准;
所述恢复辐照度处理,包括根据所述分割图像中像素点的曝光时间以及灰度值,得到所述像素点的辐照度。
13.一种图像处理系统,其特征在于,包括:数字信号处理模块、图像信号处理模块以及至少两组感光元件;其中:
所述数字信号处理模块,用于根据拍摄场景的光线信息确定或生成至少两组第一拍摄参数,根据第一预设规则将所述至少两组第一拍摄参数分别发送至所述至少两组感光元件;
所述至少两组感光元件,用于根据所述至少两组第一拍摄参数获取至少一张第一图像;
所述图像信号处理模块,用于根据所述至少一张第一图像进行HDR合成,以得到目标图像。
14.一种移动终端,其特征在于,包括:存储器、处理器,其中,所述存储器上存储有计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至12中任一项所述方法的步骤。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至12中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111406424.4A CN114143471B (zh) | 2021-11-24 | 2021-11-24 | 图像处理方法、系统、移动终端及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111406424.4A CN114143471B (zh) | 2021-11-24 | 2021-11-24 | 图像处理方法、系统、移动终端及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114143471A true CN114143471A (zh) | 2022-03-04 |
CN114143471B CN114143471B (zh) | 2024-03-29 |
Family
ID=80391361
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111406424.4A Active CN114143471B (zh) | 2021-11-24 | 2021-11-24 | 图像处理方法、系统、移动终端及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114143471B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115526788A (zh) * | 2022-03-18 | 2022-12-27 | 荣耀终端有限公司 | 图像处理方法和装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107277387A (zh) * | 2017-07-26 | 2017-10-20 | 维沃移动通信有限公司 | 高动态范围图像拍摄方法、终端及计算机可读存储介质 |
CN107809576A (zh) * | 2017-12-14 | 2018-03-16 | 信利光电股份有限公司 | 一种多摄像头模组 |
CN109639996A (zh) * | 2019-01-23 | 2019-04-16 | 努比亚技术有限公司 | 高动态场景成像方法、移动终端及计算机可读存储介质 |
CN110381263A (zh) * | 2019-08-20 | 2019-10-25 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110620873A (zh) * | 2019-08-06 | 2019-12-27 | RealMe重庆移动通信有限公司 | 设备成像方法、装置、存储介质及电子设备 |
WO2020029732A1 (zh) * | 2018-08-06 | 2020-02-13 | Oppo广东移动通信有限公司 | 全景拍摄方法、装置和成像设备 |
CN112188082A (zh) * | 2020-08-28 | 2021-01-05 | 努比亚技术有限公司 | 高动态范围图像拍摄方法、拍摄装置、终端及存储介质 |
CN113179374A (zh) * | 2021-04-22 | 2021-07-27 | 深圳传音控股股份有限公司 | 图像处理方法、移动终端及存储介质 |
-
2021
- 2021-11-24 CN CN202111406424.4A patent/CN114143471B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107277387A (zh) * | 2017-07-26 | 2017-10-20 | 维沃移动通信有限公司 | 高动态范围图像拍摄方法、终端及计算机可读存储介质 |
CN107809576A (zh) * | 2017-12-14 | 2018-03-16 | 信利光电股份有限公司 | 一种多摄像头模组 |
WO2020029732A1 (zh) * | 2018-08-06 | 2020-02-13 | Oppo广东移动通信有限公司 | 全景拍摄方法、装置和成像设备 |
CN109639996A (zh) * | 2019-01-23 | 2019-04-16 | 努比亚技术有限公司 | 高动态场景成像方法、移动终端及计算机可读存储介质 |
CN110620873A (zh) * | 2019-08-06 | 2019-12-27 | RealMe重庆移动通信有限公司 | 设备成像方法、装置、存储介质及电子设备 |
CN110381263A (zh) * | 2019-08-20 | 2019-10-25 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN112188082A (zh) * | 2020-08-28 | 2021-01-05 | 努比亚技术有限公司 | 高动态范围图像拍摄方法、拍摄装置、终端及存储介质 |
CN113179374A (zh) * | 2021-04-22 | 2021-07-27 | 深圳传音控股股份有限公司 | 图像处理方法、移动终端及存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115526788A (zh) * | 2022-03-18 | 2022-12-27 | 荣耀终端有限公司 | 图像处理方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN114143471B (zh) | 2024-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10810720B2 (en) | Optical imaging method and apparatus | |
CN106937039B (zh) | 一种基于双摄像头的成像方法、移动终端及存储介质 | |
CN108900790B (zh) | 视频图像处理方法、移动终端及计算机可读存储介质 | |
CN108024065B (zh) | 一种终端拍摄的方法、终端及计算机可读存储介质 | |
CN110072061B (zh) | 一种交互式拍摄方法、移动终端及存储介质 | |
CN109639996B (zh) | 高动态场景成像方法、移动终端及计算机可读存储介质 | |
CN108419008B (zh) | 一种拍摄方法、终端及计算机可读存储介质 | |
CN113179374A (zh) | 图像处理方法、移动终端及存储介质 | |
CN107040723B (zh) | 一种基于双摄像头的成像方法、移动终端及存储介质 | |
CN107133939A (zh) | 一种照片合成方法、设备及计算机可读存储介质 | |
CN111885307B (zh) | 一种景深拍摄方法、设备及计算机可读存储介质 | |
CN110099217A (zh) | 一种基于tof技术的图像拍摄方法、移动终端及计算机可读存储介质 | |
CN111447371A (zh) | 一种自动曝光控制方法、终端及计算机可读存储介质 | |
CN107295262B (zh) | 图像处理方法、移动终端及计算机存储介质 | |
CN112135053A (zh) | 图像处理方法、移动终端及计算机可读存储介质 | |
CN112367443A (zh) | 拍照方法、移动终端及计算机可读存储介质 | |
CN109510941B (zh) | 一种拍摄处理方法、设备及计算机可读存储介质 | |
CN111866388A (zh) | 一种多重曝光拍摄方法、设备及计算机可读存储介质 | |
CN114143471B (zh) | 图像处理方法、系统、移动终端及计算机可读存储介质 | |
CN113472980A (zh) | 一种图像处理方法、装置、设备、介质和芯片 | |
CN107493431A (zh) | 一种图像拍摄合成方法、终端及计算机可读存储介质 | |
CN107360378B (zh) | 一种曝光控制方法、移动终端和计算机存储介质 | |
CN115002347B (zh) | 图像处理方法、智能终端及存储介质 | |
CN108055470A (zh) | 一种对焦的方法、终端及存储介质 | |
CN112532838B (zh) | 一种图像处理方法、移动终端以及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |