CN106131450B - 一种图像处理的方法、装置和终端 - Google Patents

一种图像处理的方法、装置和终端 Download PDF

Info

Publication number
CN106131450B
CN106131450B CN201610609100.3A CN201610609100A CN106131450B CN 106131450 B CN106131450 B CN 106131450B CN 201610609100 A CN201610609100 A CN 201610609100A CN 106131450 B CN106131450 B CN 106131450B
Authority
CN
China
Prior art keywords
area
image
images
exposure parameters
fuzzy
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610609100.3A
Other languages
English (en)
Other versions
CN106131450A (zh
Inventor
马亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nubia Technology Co Ltd
Original Assignee
Nubia Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nubia Technology Co Ltd filed Critical Nubia Technology Co Ltd
Priority to CN201610609100.3A priority Critical patent/CN106131450B/zh
Publication of CN106131450A publication Critical patent/CN106131450A/zh
Application granted granted Critical
Publication of CN106131450B publication Critical patent/CN106131450B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/743Bracketing, i.e. taking a series of images with varying exposure conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明实施例公开了一种图像处理的方法,该方法包括:针对同一场景分别利用n个不同的曝光参数进行拍摄,得出尺寸相同的n幅图像;将得出的每幅图像按照相同的划分方式划分为M个区域,n和M均大于1;在得出的n幅图像中选取一幅图像作为基准图像;基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域;按照预先设置的清晰区域确定策略,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域。本发明实施例还公开了一种图像处理的装置和一种终端。

Description

一种图像处理的方法、装置和终端
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像处理方法、装置和终端。
背景技术
目前,具有拍摄功能的设备越来越普及,比如移动终端、相机等,用户在拍摄一幅图像时都是利用同一曝光参数,由于拍摄场景的光线会存在一定的亮暗差别,照顾了高光区域的曝光,暗部细节就会丢失,而照顾了暗部细节,高光部分就会曝光过度,使拍摄到的图像存在局部模糊区域,降低了图像质量。
发明内容
为解决上述技术问题,本发明实施例期望提供一种图像处理方法、装置和终端,以解决拍摄时固定曝光参数引起图像局部模糊的问题,提高图像质量,提升用户体验。
为达到上述目的,本发明实施例的技术方案是这样实现的:
本发明实施例提供了一种图像处理的方法,包括:
针对同一场景分别利用n个不同的曝光参数进行拍摄,得出尺寸相同的n幅图像;将得出的每幅图像按照相同的划分方式划分为M个区域,n和M均大于1;
在得出的n幅图像中选取一幅图像作为基准图像;
基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域;
按照预先设置的清晰区域确定策略,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域。
上述方案中,所述方法还包括:得出所述n幅图像第i个区域的图像参数,并获取所得出的n个图像参数的平均值,i小于等于M,所述图像参数为:对应区域的像素点的灰度值的标准差或者图像清晰度;
所述模糊区域确定策略为:所述基准图像的第i个区域的图像参数小于所获取的平均值时,将所述基准图像的第i个区域确定为模糊区域。
上述方案中,所述清晰区域确定策略为:在选取出的各个区域中,将图像参数值最大的区域作为清晰区域。
上述方案中,所述在得出的n幅图像中选取一幅图像作为基准图像,包括:
在得出的n幅图像中,将所述n个不同的曝光参数的中间值对应的图像作为基准图像。
上述方案中,所述方法还包括:
将所述n个不同的曝光参数从低到高进行排列;
所述曝光值的个数n为奇数时,在排列后的n个不同的曝光参数中,将第(n+1)/2个曝光参数作为所述n个不同的曝光参数的中间值;
所述曝光值的个数n为偶数时,在排列后的n个不同的曝光参数中,将第n/2个曝光参数作为所述n个不同的曝光参数的中间值。
本发明实施例还提供了一种图像处理装置,所述装置包括:
获取模块,用于针对同一场景分别利用n个不同的曝光参数进行拍摄,得出尺寸相同的n幅图像,将得出的每幅图像按照相同的划分方式划分为M个区域;n和M均大于1;
处理模块,用于在得出的n幅图像中选取一幅图像作为基准图像,基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域;
替换模块,用于按照预先设置的清晰区域确定策略,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域。
上述方案中,所述处理模块,还用于得出所述n幅图像第i个区域的图像参数,并获取所得出的n个图像参数的平均值,i小于等于M,所述图像参数为:对应区域的像素点的灰度值的标准差或者图像清晰度;
所述模糊区域确定策略为:所述基准图像的第i个区域的图像参数小于所获取的平均值时,将所述基准图像的第i个区域确定为模糊区域。
上述方案中,所述处理模块,具体用于在得出的n幅图像中,将所述n个不同的曝光参数的中间值对应的图像作为基准图像。
上述方案中,所述处理模块,还用于将所述n个不同的曝光参数从低到高进行排列;在所述曝光值的个数n为奇数时,在排列后的n个不同的曝光参数中,将第(n+1)/2个曝光参数作为所述n个不同的曝光参数的中间值;在所述曝光值的个数n为偶数时,在排列后的n个不同的曝光参数中,将第n/2个曝光参数作为所述n个不同的曝光参数的中间值。
本发明实施例还提供了一种终端,包括上述任意一种图像处理的装置。
本发明实施例提供的一种图像处理方法、装置和终端,针对同一场景分别利用n个不同的曝光参数进行拍摄,得出尺寸相同的n幅图像;将得出的每幅图像按照相同的划分方式划分为M个区域,n和M均大于1;在得出的n幅图像中选取一幅图像作为基准图像;基于预先设置的模糊区域确定策略,确定基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域;按照预先设置的清晰区域确定策略,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域。显然,与现有技术相比,本发明实施例有效的解决了拍摄时固定曝光参数引起图像局部模糊的问题,提高图像质量,提升用户体验。
附图说明
图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意图;
图2为如图1所示的移动终端的无线通信系统示意图;
图3为本发明第一实施例涉及的一个移动终端正视图;
图4为本发明第一实施例涉及的一个移动终端后视图;
图5为本发明图像处理方法的第一实施例的流程图;
图6为本发明图像处理方法的第二实施例的流程图;
图7为本发明实施例图像处理装置的组成结构示意图。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,"模块"与"部件"可以混合地使用。
移动终端可以以各种形式来实施。例如,本发明实施例中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、个人数字助理(PDA)、平板电脑(PAD)、便携式多媒体播放器(PMP)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面,假设终端是移动终端。然而,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。
图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意图。
移动终端100可以包括无线通信单元110、音频/视频(A/V)输入单元120、用户输入单元130、输出单元140、存储器150、控制器160和电源单元170等等。图1示出了具有各种组件的移动终端,但是应理解的是,并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。
无线通信单元110通常包括一个或多个组件,其允许移动终端100与无线通信系统或网络之间的无线电通信。例如,无线通信单元可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的至少一个。
广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者接收之前生成的广播信号和/或广播相关信息并且将其发送给终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等等。而且,广播信号可以进一步包括与TV或无线电广播信号组合的广播信号。广播相关信息也可以经由移动通信网络提供,并且在该情况下,广播相关信息可以由移动通信模块112来接收。广播信号可以以各种形式存在,例如,其可以以数字多媒体广播(DMB)的电子节目指南(EPG)、数字视频广播手持(DVB-H)的电子服务指南(ESG)等等的形式而存在。广播接收模块111可以通过使用各种类型的广播系统接收信号广播。特别地,广播接收模块111可以通过使用诸如多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、数字视频广播-手持(DVB-H),前向链路媒体(MediaFLO@)的数据广播系统、地面数字广播综合服务(ISDB-T)等等的数字广播系统接收数字广播。广播接收模块111可以被构造为适合提供广播信号的各种广播系统以及上述数字广播系统。经由广播接收模块111接收的广播信号和/或广播相关信息可以存储在存储器150(或者其它类型的存储介质)中。
移动通信模块112将无线电信号发送到基站(例如,接入点、节点B等等)、外部终端以及服务器中的至少一个和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种类型的数据。
无线互联网模块113支持移动终端的无线互联网接入。该模块可以内部或外部地耦接到终端。该模块所涉及的无线互联网接入技术可以包括无线局域网(WLAN)(Wi-Fi)、无线宽带(Wibro)、全球微波互联接入(Wimax)、高速下行链路分组接入(HSDPA)等等。
短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂TM等等。
位置信息模块115是用于检查或获取移动终端的位置信息的模块。位置信息模块的典型示例是全球定位系统(GPS)。根据当前的技术,GPS模块115计算来自三个或更多卫星的距离信息和准确的时间信息并且对于计算的信息应用三角测量法,从而根据经度、纬度和高度准确地计算三维当前位置信息。当前,用于计算位置和时间信息的方法使用三颗卫星并且通过使用另外的一颗卫星校正计算出的位置和时间信息的误差。此外,GPS模块115能够通过实时地连续计算当前位置信息来计算速度信息。
A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121,相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元141上。经相机121处理后的图像帧可以存储在存储器150(或其它存储介质)中或者经由无线通信单元110进行发送,可以根据移动终端的构造提供两个或更多相机121。用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息,并且可以包括键盘、锅仔片、触摸板(例如,检测由于被接触而导致的电阻、压力、电容等变化的触敏组件)、滚轮、摇杆等等。特别地,当触摸板以层的形式叠加在显示单元141上时,可以形成触摸屏。
输出单元140被构造为以视觉、音频和/或触觉方式提供输出信号(例如,音频信号、视频信号、警报信号、振动信号等等)。输出单元140可以包括显示单元141。
显示单元141可以显示在移动终端100中处理的信息。例如,当移动终端100处于电话通话模式时,显示单元141可以显示与通话或其它通信(例如,文本消息收发、多媒体文件下载等等)相关的用户界面(User's Interface,UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时,显示单元141可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。
同时,当显示单元141和触摸板以层的形式彼此叠加以形成触摸屏时,显示单元141可以用作输入装置和输出装置。显示单元141可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看,这可以称为透明显示器,典型的透明显示器可以例如为透明有机发光二极管(TOLED)显示器等等。根据特定想要的实施方式,移动终端100可以包括两个或更多显示单元(或其它显示装置),例如,移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。
存储器150可以存储由控制器160执行的处理和控制操作的软件程序等等,或者可以暂时地存储已经输出或将要输出的数据(例如,电话簿、消息、静态图像、视频等等)。而且,存储器150可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。
存储器150可以包括至少一种类型的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且,移动终端100可以与通过网络连接执行存储器150的存储功能的网络存储装置协作。
控制器160通常控制移动终端的总体操作。例如,控制器160执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外,控制器160可以包括用于再现(或回放)多媒体数据的多媒体模块161,多媒体模块161可以构造在控制器160内,或者可以构造为与控制器160分离。控制器160可以执行模式识别处理,以将在触摸屏上执行的手写输入或者图片绘制输入识别为字符或图像。
电源单元170在控制器160的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。
这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施,这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施,在一些情况下,这样的实施方式可以在控制器160中实施。对于软件实施,诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施,软件代码可以存储在存储器150中并且由控制器160执行。
至此,已经按照其功能描述了移动终端。下面,为了简要起见,将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此,本发明能够应用于任何类型的移动终端,并且不限于滑动型移动终端。
如图1中所示的移动终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信系统以及基于卫星的通信系统来操作。
现在将参考图2描述其中根据本发明的移动终端能够操作的通信系统。
这样的通信系统可以使用不同的空中接口和/或物理层。例如,由通信系统使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信系统(UMTS)(特别地,长期演进(LTE))、全球移动通信系统(GSM)等等。作为非限制性示例,下面的描述涉及CDMA通信系统,但是这样的教导同样适用于其它类型的系统。
参考图2,CDMA无线通信系统可以包括多个移动终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干已知的接口中的任一种来构造,所述接口包括例如E1/T1、ATM,IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是,如图2中所示的系统可以包括多个BSC275。
每个BS270可以服务一个或多个分区(或区域),由多向天线或指向特定方向的天线覆盖的每个分区放射状地远离BS270。或者,每个分区可以由用于分集接收的两个或更多天线覆盖。每个BS270可以被构造为支持多个频率分配,并且每个频率分配具有特定频谱(例如,1.25MHz,5MHz等等)。
分区与频率分配的交叉可以被称为CDMA信道。BS270也可以被称为基站收发器子系统(BTS)或者其它等效术语。在这样的情况下,术语“基站”可以用于笼统地表示单个BSC275和至少一个BS270。基站也可以被称为“蜂窝站”。或者,特定BS270的各分区可以被称为多个蜂窝站。
如图2中所示,广播发射器(BT)295将广播信号发送给在系统内操作的移动终端100。如图1中所示的广播接收模块111被设置在移动终端100处以接收由BT295发送的广播信号。在图2中,示出了几个全球定位系统(GPS)卫星300。卫星300帮助定位多个移动终端100中的至少一个。
在图2中,描绘了多个卫星300,但是理解的是,可以利用任何数目的卫星获得有用的定位信息。如图1中所示的GPS模块115通常被构造为与卫星300配合以获得想要的定位信息。替代GPS跟踪技术或者在GPS跟踪技术之外,可以使用可以跟踪移动终端的位置的其它技术。另外,至少一个GPS卫星300可以选择性地或者额外地处理卫星DMB传输。
作为无线通信系统的一个典型操作,BS270接收来自各种移动终端100的反向链路信号。移动终端100通常参与通话、消息收发和其它类型的通信。特定基站270接收的每个反向链路信号被在特定BS270内进行处理。获得的数据被转发给相关的BSC275。BSC提供通话资源分配和包括BS270之间的软切换过程的协调的移动管理功能。BSC275还将接收到的数据路由到MSC280,其提供用于与PSTN290形成接口的额外的路由服务。类似地,PSTN290与MSC280形成接口,MSC与BSC275形成接口,并且BSC275相应地控制BS270以将正向链路信号发送到移动终端100。
基于上述移动终端硬件结构以及通信系统,提出本发明各个实施例。
第一实施例
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
本发明第一实施例提出了一种图像处理方法,可以应用于设置有拍摄功能的终端中。
这里,上述记载的终端可以是具有显示屏的固定终端,也可以是具有显示屏的移动终端。
上述记载的固定终端可以是计算机等,上述记载的移动终端包括但不限于移动电话、笔记本电脑、相机、PDA、PAD、PMP、导航装置等等。
这里,移动终端如果具有操作系统,该操作系统可以为UNIX、Linux、Windows、安卓(Android)、Windows Phone等等。
需要说明的是,对终端上的显示屏的种类、形状、大小等不进行限制,示例性的,终端上的显示屏可以是液晶显示屏等。
在本发明第一实施例中,上述记载的显示屏用于向用户提供人机交互的界面,在上述记载的移动终端为手机时,图3为本发明第一实施例中涉及的移动终端的正视图,图4为本发明第一实施例中涉及的移动终端的后视图。
图5为本发明图像处理方法的第一实施例的流程图,如图5所示,该方法包括:
步骤500:针对同一场景分别利用n个不同的曝光参数进行拍摄,得出尺寸相同的n幅图像;将得出的每幅图像按照相同的划分方式划分为M个区域,n和M均大于1。
在实际应用中,针对同一场景,分别利用n个不同的曝光参数进行拍摄,所应用的拍摄设备为具有拍摄功能的任何设备,比如具有拍摄功能的移动终端、相机等设备;对同一场景的拍摄,包括选择白天或者黑夜中任何一个场景,没有任何的时间和地点限定。
上述曝光参数可以包括光圈大小、快门速度、感光度;在选取n个不同曝光参数时,首先根据所选择的拍摄场景光线的分布、人、物所处的状态等因素,利用人眼观察设备的成像效果选取一个适合用于所选场景的曝光参数,以此参数为基准曝光参数,分别在所选基准曝光参数上下范围内选取合适个数的不同曝光参数;例如,可以在所选基准曝光参数上下范围内选取5至15个不同的曝光参数。
在选取合适个数的不同曝光参数时,可以在所选基准曝光参数的基础上等间距的增大和等间距的减小曝光参数,得出多个不同的曝光参数。
这里,在选取合适个数的不同曝光参数时,还可以在改变所选基准曝光参数的基础上,改变光圈大小、快门速度、感光度中的任何一个、两个或三个;也可以根据所选场景的情况、实际经验,适当地改变基准曝光参数,以得出合适个数的不同曝光参数。
可以理解的是,拍摄设备会自动记录所拍摄的图像对应的曝光参数,并将对应的曝光参数进行存储。
本步骤中,将获得的每幅图像按照相同的划分方式划分为M个区域,可以包括:在得出n幅图像后,将得到的每幅图像按照相同的划分方式进行区域分割,这里并不限定某一种或几种划分方式,可以依据所拍摄场景的详细情况选择合适的图像区域划分方式。例如依据图像像素点的排列特点可以将图像区域划分为相同形状的矩形方块。
步骤501:在得出的n幅图像中选取一幅图像作为基准图像。
示例性的,将拍摄的n副图像对应的n个不同的曝光参数的中间值对应的图像作为基准图像。
下面说明曝光参数中间值的一种选取方式:
首先将选择的n个不同的曝光参数从低到高进行排列;
当曝光值的个数n为奇数时,在排列后的n个不同的曝光参数中,将第(n+1)/2个曝光参数作为所述n个不同的曝光参数的中间值;当曝光值的个数n为偶数时,在排列后的n个不同的曝光参数中,将第n/2个曝光参数作为所述n个不同的曝光参数的中间值。
分别针对n为奇数和偶数的情况进行举例说明。
当n取5时,利用公式(n+1)/2将第3个曝光参数作为n个不同的曝光参数的中间值;当n取10时,利用公式n/2将第5个曝光参数作为n个不同的曝光参数的中间值;
本步骤中,对不同的曝光参数从低到高进行排列时,可以依据曝光参数中包括的光圈大小、快门速度、感光度三个参数中任何一个作为排列依据,如对所有拍摄图像对应的光圈大小进行从低到高的排列,以此来排列所对应的曝光参数的顺序。
步骤502:基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域;
本步骤中,需要基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域是否为模糊区域。可以理解的是,需要在图像划分后的M个区域中,依据每个区域的图像参数进行判断。
示例性的,基准图像的第i个区域的图像参数小于该区域n个图像参数的平均值时,将所述基准图像的第i个区域确定为模糊区域,并记录模糊区域的位置信息。在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域。
这里,基准图像的第i个区域的图像参数大于等于该区域n个图像参数的平均值时,所述基准图像的第i个区域不是模糊区域。
在实际应用中,可以将图像划分的M个区域位置进行编号区分,i为从1到M的整数。本发明实施例中利用一定数量的横线和竖线将每幅图像划分为相同形状的矩形方块,矩形方块表示划分出的图像区域;在划分出矩形方块后,第1行最左端的区域为第1个区域,从左往右依次为第2、第3、第4区域等等;当j大于1时,第j行的最左端区域的序号顺延第j-1行最右端区域的序号,第j行图像区域的序号的排列方式与第1行相同;如此,确定出上述M个区域的序号。
所有n幅图像的非基准图像为:在所有n幅图像中除去所选基准图像后的剩余的每个图像。
对于在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域的过程,下面进行举例说明:
针对同一场景分别利用5个不同的曝光参数进行拍摄,基准图像中第7个区域为模糊区域,在其余4幅非基准的图像中,选取每幅图像的第7个区域。
步骤503:按照预先设置的清晰区域确定策略,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域。
示例性的,可以根据选取出与每个确定出的模糊区域处在相同位置的区域,通过比较所选取的图像区域的图像参数,找出图像参数值最大的区域作为清晰区域。
例如,共拍摄到5幅图像,其中第3幅图像为基准图像,基准图像中第7个区域为模糊区域,第1、第2、第4、第5幅为非基准图像,选取所有非基准图像的第7个区域,比较所有非基准图像的第7个区域的图像参数,得出第2幅图像的第7个区域的图像参数值最大,那么第3幅基准图像中第7个模糊区域对应的清晰区域就为第2幅图像的第7个区域。
本步骤中,将基准图像中每个确定出的模糊区域替换为对应的清晰区域包括:将基准图像中的模糊区域进行图像分割,以剔除基准图像中的模糊区域;将选择出的清晰区域与分割出模糊区域的基准图像进行图像合成。
在实际应用时,图像分割技术可以是:基于阈值的分割技术、基于区域特性的分割技术、基于边缘的分割技术以及基于特定理论的分割方法等;图像合成技术可以是:泊松图像编辑技术、拖拉算法等。
本发明实施例提出的图像处理方法,针对同一场景分别利用n个不同的曝光参数进行拍摄;在得出的n幅图像中选取一幅图像作为基准图像,确定所述基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域。显然,和现有技术相比,本发明实施例提出的图像处理方法有效的解决了拍摄时固定曝光参数引起图像局部模糊的问题,提高图像质量,提升用户体验。
第二实施例
为了能更加体现本发明的目的,在本发明第一实施例的基础上,进行进一步的举例说明。
图6为本发明图像处理方法的第二实施例的流程图,如图6所示,该流程包括:
步骤600:对同一场景分别利用n个不同的曝光参数进行拍摄,获取n幅图像。
在实际应用中,同一场景的环境不应有明显的变化,理论上,所获得的图像仅有拍摄设备曝光参数的不同。
示例性的,给出5个不同曝光参数,获得5幅尺寸为1600×1200的图像,将获得的5幅图像按照相同的划分方式划分为10行×10列的矩形区域,每个区域的尺寸为160×120,并将每个区域进行编号区分。
这里,5个不同的曝光参数可以选择中,第1个曝光参数为光圈f3.5,快门速度1/30秒,感光度250;第2个曝光参数为光圈f8,快门速度1/60秒,感光度250;第3个曝光参数为光圈f11,快门速度1/125秒,感光度250;第4个曝光参数为光圈f16,快门速度1/250秒,感光度250;第5个曝光参数为光圈f22,快门速度1/500秒,感光度250。
可选的,将100个区域按照从左往右、从上到下的排列原则,对每个区域进行编号确定位置。第1行最左端的区域为第1个区域,从左往右依次为第2个到第10个区域;第2行从左往右依次为第11个到第20个区域等等,第10行从左往右依次为第91个到第100个区域。
步骤601:在得出的n幅图像中选取一幅图像作为基准图像。
本步骤中,对不同的曝光参数从低到高进行排列,我们可以选择依据曝光参数中光圈大小对曝光参数进行排序;然后,选择曝光参数的中间值。
示例性的,在设置的5个不同曝光参数中,按光圈大小进行排序的结果为f3.5、f8、f11、f16、f22,可以看出f11为光圈大小的中间值,因此,选择光圈f11,快门速度1/250秒,感光度250的曝光参数作为曝光参数的中间值,将曝光参数中间值对应的第3幅图像作为基准图像。
步骤602:判断基准图像中第i个区域是否为模糊区域,如果第i个区域是模糊区域,执行步骤603;如果第i个区域不是模糊区域,则跳到步骤605,i的初始值为1。
示例性的,i的取值范围从1到100,从基准图像中第1个区域开始,按照预先设置的模糊区域确定策略,判断第i个区域是否为模糊区域,并标记出模糊区域位置。
本步骤中,需要在图像划分后的100个区域中,依据每个区域的图像参数进行判断,显然,需要得出所拍摄出的5幅图像第i个区域的图像参数、并获取5幅图像第i个区域的图像参数的平均值,i小于等于100。
其中,该图像参数可以是:对应区域的像素点的灰度值的标准差或者图像清晰度。
像素点的灰度值用于表示显示像素点的亮暗差别,在彩色显示器中表现为颜色的不同,灰度级越多,图像层次越清楚逼真,灰度是指黑白图像中点的颜色深度,范围一般从0到255,白色为255,黑色为0,故黑白图像也称灰度图像;若是彩色图象的灰度其实在转化为黑白图像后的像素值(是一种广义的提法),转化的方法看应用的领域而定,一般按加权的方法转换,R(红Red),G(绿Green),B(蓝Blue)的比一般为3:6:1。
这里,第i个图像区域的灰度值的标准差具体计算方法包括:首先,根据公式
Figure BDA0001064220690000151
计算第i个图像区域的灰度值平均值Mean,其中,N为第i个图像区域的像素个数,f(k)为第i个图像区域的第k个像素点的灰度值;也就是说,计算第i个图像区域的所有像素点灰度值的累加和,再除以第i个图像区域像素点的个数,得出第i个图像区域的灰度值平均值。
其次,根据公式
Figure BDA0001064220690000152
计算第i个区域的灰度值的标准差σ。
最后,根据所有图像中第i个图像区域的灰度值的标准差,得出第i个图像区域的灰度值的标准差的平均值σ。
图像清晰度可以利用预设的图像清晰度评价函数进行确定,图像清晰度评价函数可以是基于Robert边缘检测算子生成的评价函数。
示例性的,第i个图像区域的图像清晰度具体计算方法包括:首先,根据公式
Figure BDA0001064220690000161
计算第i个图像区域的图像清晰度Ri,其中,P、Q为分别将图像划分成矩形区域后第i个区域行和列对应的像素点个数;r(x,y)是第i个区域中像素点(x,y)的梯度,表示了该像素点处边缘能量的大小。
其次,利用所有图像中第i个图像区域的清晰度,得到第i个图像区域的清晰度的平均值
Figure BDA0001064220690000162
可以理解的是,还需要基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域是否为模糊区域;示例性的,基准图像的第i个区域的图像参数小于该区域5个图像参数的平均值时,将所述基准图像的第i个区域确定为模糊区域,并记录模糊区域的位置信息。在所有5幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域。
基准图像的第i个区域的图像参数大于等于该区域5个图像参数的平均值时,所述基准图像的第i个区域不是模糊区域。
示例性的,如果判定基准图像中第22个区域为模糊区域,则将第22个区域标记为模糊区域。
步骤603:标记出模糊区域,以基准图像中标记出的模糊区域位置为依据,在所有n幅图像的非基准图像中选取与每个确定出的模糊区域处在相同位置的区域。
示例性的,根据步骤602判断出的基准图像中第22个区域为模糊区域,在所获得的5幅图像中,除去第3幅基准图像外,选出其余4幅非基准图像的第22个区域。
步骤604:从选取出的各个区域中确定出与模糊区域相对应的清晰区域。
本步骤具体包括,根据选取出的与模糊区域处在相同位置的区域,通过比较所选取的图像区域的图像参数,找出图像参数值最大的区域作为清晰区域。
示例性的,如果第5幅图像的第22个区域的图像参数值最大,就将第5幅图像的第22个区域标记为:与基准图像第22个区域相对应的清晰区域。
步骤605:i是否大于等于基准图像总的划分区域数M,如果是,则基准图像中所有区域均已被判断,执行步骤606;如果不是,继续检测基准图像的下一个区域,执行步骤607。
示例性的,如果i大于等于100,则所有的区域均已被判断完,进行模糊区域替换处理;如果i小于100,则继续判断基准图像的下一个区域是否为模糊区域。
步骤606:将基准图像中每个确定出的模糊区域替换为对应的清晰区域。
具体的,基准图像中所有区域均已被判断后,分割出所有模糊区域,将确定出的清晰区域与分割出模糊区域后的基准图像进行合成。
步骤607:基准图像未被判断完,继续判断第i+1个区域。
具体的,将i的值加1,返回步骤602,继续判断第i+1个区域是否为模糊区域。
第三实施例
针对本发明实施例的方法,本发明实施例还提供了一种图像处理的装置。
图7为本发明实施例图像处理装置的组成结构示意图,如图7所示,该装置包括获取模块700、处理模块701和替换模块702;其中,
获取模块700,用于针对同一场景分别利用n个不同的曝光参数进行拍摄,得出尺寸相同的n幅图像,将得出的每幅图像按照相同的划分方式划分为M个区域;n和M均大于1。
处理模块701,用于在得出的n幅图像中选取一幅图像作为基准图像,基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域。
替换模块702,用于按照预先设置的清晰区域确定策略,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域。
所述获取模块700,具体还用于将每幅图像的M个区域进行编号确定每个区域相对位置。
所述处理模块701,还用于得出所述n幅图像第i个区域的图像参数,并获取所得出的n个图像参数的平均值,i小于等于M。所述图像参数为:对应区域的像素点的灰度值的标准差或者图像清晰度;
所述模糊区域确定策略为:所述基准图像的第i个区域的图像参数小于所获取的平均值时,将所述基准图像的第i个区域确定为模糊区域。
所述处理模块701,具体用于在得出的n幅图像中,将所述n个不同的曝光参数的中间值对应的图像作为基准图像。
所述处理模块701,还用于将所述n个不同的曝光参数从低到高进行排列;在所述曝光值的个数n为奇数时,在排列后的n个不同的曝光参数中,将第(n+1)/2个曝光参数作为所述n个不同的曝光参数的中间值;在所述曝光值的个数n为偶数时,在排列后的n个不同的曝光参数中,将第n/2个曝光参数作为所述n个不同的曝光参数的中间值。
所述替换模块702,用于将所述基准图像中被标识出来的所述模糊区域分割出来,再将所述清晰区域与分割出所述模糊区域的所述基准图像进行图像合成,将合成后的图像作为最终显示图像。
具体的,所述清晰区域确定策略为:在选取出的各个区域中,将图像参数值最大的区域作为清晰区域。
在实际应用中,所述获取模块700、处理模块701和替换模块702均可由位于终端中的中央处理器(Central Processing Unit,CPU)、微处理器(Micro Processor Unit,MPU)、数字信号处理器(Digital Signal Processor,DSP)、或现场可编程门阵列(FieldProgrammable Gate Array,FPGA)等实现。
第四实施例
本发明实施例还提供了一种终端,该终端包括本发明第三实施例的任意一种图像处理的装置。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。

Claims (9)

1.一种图像处理方法,其特征在于,所述方法包括:
针对同一场景分别利用n个不同的曝光参数进行拍摄,得出尺寸相同的n幅图像;将得出的每幅图像按照相同的划分方式划分为M个区域,n和M均大于1;
在得出的n幅图像中选取一幅图像作为基准图像;
基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域;其中,所述模糊区域确定策略为:所述基准图像的第i个区域的图像参数小于该区域n个图像参数的平均值,将所述基准图像的第i个区域确定为模糊区域,i小于等于M;
按照预先设置的清晰区域确定策略,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域;其中,所述清晰区域确定策略至少为:在选取出的各个区域中,将像素点的灰度值的标准差值最大的区域作为清晰区域。
2.根据权利要求1所述的方法,其特征在于,所述图像参数为:对应区域的像素点的灰度值的标准差或者图像清晰度。
3.根据权利要求1所述的方法,其特征在于,所述在得出的n幅图像中选取一幅图像作为基准图像,包括:
在得出的n幅图像中,将所述n个不同的曝光参数的中间值对应的图像作为基准图像。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
将所述n个不同的曝光参数从低到高进行排列;
所述曝光参数的个数n为奇数时,在排列后的n个不同的曝光参数中,将第(n+1)/2个曝光参数作为所述n个不同的曝光参数的中间值;
所述曝光参数的个数n为偶数时,在排列后的n个不同的曝光参数中,将第n/2个曝光参数作为所述n个不同的曝光参数的中间值。
5.一种图像处理装置,其特征在于,所述装置包括:
获取模块,用于针对同一场景分别利用n个不同的曝光参数进行拍摄,得出尺寸相同的n幅图像,将得出的每幅图像按照相同的划分方式划分为M个区域;n和M均大于1;
处理模块,用于在得出的n幅图像中选取一幅图像作为基准图像,基于预先设置的模糊区域确定策略,确定所述基准图像的任意一个区域为模糊区域时,在所有n幅图像的非基准图像中,选取与每个确定出的模糊区域处在相同位置的区域;其中,所述模糊区域确定策略为:所述基准图像的第i个区域的图像参数小于该区域n个图像参数的平均值,将所述基准图像的第i个区域确定为模糊区域,i小于等于M;
替换模块,用于按照预先设置的清晰区域确定策略,在选取出的各个区域中确定清晰区域;将基准图像中每个确定出的模糊区域替换为对应的清晰区域;其中,所述清晰区域确定策略至少为:在选取出的各个区域中,将像素点的灰度值的标准差值最大的区域作为清晰区域。
6.根据权利要求5所述的装置,其特征在于,所述处理模块,还用于得出所述图像参数,所述图像参数为:对应区域的像素点的灰度值的标准差或者图像清晰度。
7.根据权利要求5所述的装置,其特征在于,所述处理模块,具体用于在得出的n幅图像中,将所述n个不同的曝光参数的中间值对应的图像作为基准图像。
8.根据权利要求7所述的装置,其特征在于,所述处理模块,还用于将所述n个不同的曝光参数从低到高进行排列;在所述曝光参数的个数n为奇数时,在排列后的n个不同的曝光参数中,将第(n+1)/2个曝光参数作为所述n个不同的曝光参数的中间值;在所述曝光参数的个数n为偶数时,在排列后的n个不同的曝光参数中,将第n/2个曝光参数作为所述n个不同的曝光参数的中间值。
9.一种终端,其特征在于,所述终端包括权利要求5至8任一项所述的装置。
CN201610609100.3A 2016-07-29 2016-07-29 一种图像处理的方法、装置和终端 Active CN106131450B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610609100.3A CN106131450B (zh) 2016-07-29 2016-07-29 一种图像处理的方法、装置和终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610609100.3A CN106131450B (zh) 2016-07-29 2016-07-29 一种图像处理的方法、装置和终端

Publications (2)

Publication Number Publication Date
CN106131450A CN106131450A (zh) 2016-11-16
CN106131450B true CN106131450B (zh) 2020-06-30

Family

ID=57254171

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610609100.3A Active CN106131450B (zh) 2016-07-29 2016-07-29 一种图像处理的方法、装置和终端

Country Status (1)

Country Link
CN (1) CN106131450B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106254724A (zh) * 2016-07-29 2016-12-21 努比亚技术有限公司 一种实现图像降噪的方法、装置和终端
CN106851090B (zh) * 2016-12-20 2019-06-28 Oppo广东移动通信有限公司 图像处理方法与装置、控制方法与装置、成像与电子装置
JP6923754B2 (ja) 2017-06-09 2021-08-25 華為技術有限公司Huawei Technologies Co.,Ltd. 画像キャプチャ方法及び機器
CN107395971B (zh) * 2017-07-31 2020-06-12 上海新眼光医疗器械股份有限公司 一种图像采集方法、设备和计算机可读存储介质
CN109035185A (zh) * 2018-06-29 2018-12-18 努比亚技术有限公司 一种图像处理方法及终端
CN109584171A (zh) * 2018-11-07 2019-04-05 厦门欢乐逛科技股份有限公司 基于图层拼接的褶皱去除方法及装置
JP6562492B1 (ja) * 2019-05-16 2019-08-21 株式会社モルフォ 画像処理装置、画像処理方法及びプログラム
CN110581933A (zh) * 2019-07-23 2019-12-17 国网山东省电力公司电力科学研究院 一种视频优化处理系统、处理方法、终端设备及存储介质
CN110581934A (zh) * 2019-07-23 2019-12-17 安徽南瑞继远电网技术有限公司 一种视频抖动消除方法、消除装置、终端设备及存储介质
CN111083389B (zh) * 2019-12-27 2021-11-16 维沃移动通信有限公司 一种拍摄图像的方法和装置
CN111901525A (zh) * 2020-07-29 2020-11-06 西安欧亚学院 一种多相机人工智能图像处理方法
CN113096084B (zh) * 2021-03-31 2023-06-20 深圳百迈技术有限公司 基于阵列相机成像的视觉检测方法、设备及系统
CN113596425B (zh) * 2021-06-21 2023-02-07 深圳市沃特沃德信息有限公司 墨水屏终端的图像处理方法、装置、存储介质及智能设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102196185A (zh) * 2010-03-09 2011-09-21 索尼公司 图像处理装置、图像处理方法和程序
CN102348056A (zh) * 2010-07-23 2012-02-08 卡西欧计算机株式会社 图像合成装置和图像合成方法
CN103293825A (zh) * 2013-06-26 2013-09-11 深圳市中兴移动通信有限公司 多重曝光方法和装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101871945B1 (ko) * 2013-01-17 2018-08-02 한화에어로스페이스 주식회사 영상 처리 장치 및 방법
CN104735349B (zh) * 2015-02-15 2017-10-13 南华大学 同步多聚焦Bayer视频图像处理系统及方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102196185A (zh) * 2010-03-09 2011-09-21 索尼公司 图像处理装置、图像处理方法和程序
CN102348056A (zh) * 2010-07-23 2012-02-08 卡西欧计算机株式会社 图像合成装置和图像合成方法
CN103293825A (zh) * 2013-06-26 2013-09-11 深圳市中兴移动通信有限公司 多重曝光方法和装置

Also Published As

Publication number Publication date
CN106131450A (zh) 2016-11-16

Similar Documents

Publication Publication Date Title
CN106131450B (zh) 一种图像处理的方法、装置和终端
US8780258B2 (en) Mobile terminal and method for generating an out-of-focus image
CN106454121B (zh) 双摄像头拍照方法及装置
CN106375596B (zh) 提示对焦对象的装置及方法
CN105245774B (zh) 一种图片处理方法及终端
CN105354838B (zh) 图像中弱纹理区域的深度信息获取方法及终端
CN106909274B (zh) 一种图像显示方法和装置
WO2018019124A1 (zh) 一种图像处理方法及电子设备、存储介质
WO2017050115A1 (zh) 一种图像合成方法和装置
US10740946B2 (en) Partial image processing method, device, and computer storage medium
CN107018331A (zh) 一种基于双摄像头的成像方法及移动终端
CN106651867B (zh) 一种实现交互式图像分割的方法、装置及终端
CN106485689A (zh) 一种图片处理方法和装置
CN106097284B (zh) 一种夜景图像的处理方法和移动终端
CN106534693B (zh) 一种照片处理方法、装置及终端
CN106603931A (zh) 一种双目拍摄方法及装置
WO2017071542A1 (zh) 图像处理方法及装置
CN106954020B (zh) 一种图像处理方法及终端
CN105979097A (zh) 一种移动终端及其显示屏背光亮度调节方法
WO2017071499A1 (zh) 图像锐化方法及移动终端
CN106791449B (zh) 照片拍摄方法及装置
CN106293390A (zh) 基于双屏终端的局部图片提取装置及方法
CN106856542B (zh) 根据壁纸颜色自动调节图标颜色的方法及装置
WO2018040751A1 (zh) 图像生成装置及方法、图像处理设备及存储介质
WO2018019130A1 (zh) 一种实现图像降噪的方法、装置和终端及计算机存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant