CN103795933A - 一种图像处理方法及电子设备 - Google Patents
一种图像处理方法及电子设备 Download PDFInfo
- Publication number
- CN103795933A CN103795933A CN201410075109.1A CN201410075109A CN103795933A CN 103795933 A CN103795933 A CN 103795933A CN 201410075109 A CN201410075109 A CN 201410075109A CN 103795933 A CN103795933 A CN 103795933A
- Authority
- CN
- China
- Prior art keywords
- image
- changing value
- depth information
- capture module
- image capture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
本申请公开了一种图像处理方法及电子设备,从图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域;获取第一图像区域中各像素点的深度信息;检测深度信息的变化值,判断变化值是否符合第一预设条件;若变化值符合第一预设条件,则使图像采集模块中的焦距调整单元根据变化值调整图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。这可以让被拍摄者作为调整焦距的操作者,通过动作使预览图像对应区域的像素点的深度信息发生变化,从而使图像采集模块根据深度信息的变化值合理调整焦距,使用户在自拍时能够方便自如地调整焦距,无需面对取景界面进行手动操作,提升用户体验。
Description
技术领域
本申请涉及图像处理领域,特别是涉及一种图像处理方法及电子设备。
背景技术
随着科技水平的发展,人们在日常休闲与娱乐生活中越来越多地应用到手机、平板电脑、智能眼镜、相机等电子设备中的拍摄功能,这对于电子设备的拍摄功能的要求越来越高。
在使用拍摄功能时,必须精确的调整焦距,才能使镜头的入射光聚焦于相机的感光元件上,使所拍摄的图像达到高清晰度,得到较好的成像效果。目前,电子设备在进行拍摄时,主要是通过手动调整焦距或自动调整焦距,手动调整焦距是指通过变焦环或操作界面上的拖动条或双指缩放调整焦距,自动调整焦距是使相机根据被拍摄的焦点位置自动将焦距变动到广角端、中焦端或长焦端。
但是,现有技术中至少存在如下问题:现有的手动调整焦距法要求用户作为调整焦距的操作者,必须面对取景界面进行手动操作才能合理调整焦距,而自动调整焦距法只是将焦距在广角端、中焦端或长焦端变换,焦距调整并不精确,这都使得用户在某些情况下无法方便自如地调整焦距,造成拍摄者使用电子设备进行拍摄的体验不佳。
发明内容
有鉴于此,本申请实施例提供一种图像处理方法及电子设备,以使用户在自拍时能够方便自如地调整焦距,提升用户体验。
为了实现上述目的,本申请提供的技术方案如下:
一种图像处理方法,应用于具有图像采集模块的电子设备中,所述图像采集模块中包括成像模组和焦距调整单元,所述图像处理方法包括:
从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域;
获取所述第一图像区域中各像素点的深度信息;
检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件;
若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
优选地,所述第一图像区域为对焦区域或者对焦区域外的其他区域。
优选地,所述获取所述第一图像区域中各像素点的深度信息,包括:
生成与所述第一预览图像对应的深度图,所述深度图中的像素点与所述第一预览图像中的像素点一一对应,且所述深度图中包含每个像素点距离所述图像采集模块的深度信息;
从所述深度图中提取与所述第一图像区域对应的各像素点,确定与所述第一图像区域对应的各像素点的深度信息。
优选地,所述第一预设条件为:所述深度信息的预设变化范围;
则,所述判断所述变化值是否符合第一预设条件,具体为:判断所述变化值是否处于所述深度信息的预设变化范围内。
优选地,所述变化值包括:正变化值或负变化值;
则,所述使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,具体包括:
当所述变化值为正变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述正变化值对应的焦距调整值增大所述图像采集模块中的成像模组的焦距;
当所述变化值为负变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述负变化值对应的焦距调整值减小所述图像采集模块中的成像模组的焦距。
优选地,还包括:
提取所述第二预览图像中对应于所述第一主体的动作信息;
判断所述动作信息是否符合第二预设条件;
若所述动作信息符合所述第二预设条件,则触发所述图像采集模块完成拍照。
优选地,所述第二预设条件为:预设的标准动作信息;
则,所述判断所述动作信息是否符合第二预设条件,具体为:判断所述动作信息是否与预设的标准动作信息相匹配。
优选地,还包括:
显示所述第一预览图像和所述第二预览图像。
一种电子设备,包括图像采集模块,所述图像采集模块中包括成像模组和焦距调整单元,所述电子设备包括:
第一图像区域获取模块,用于从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域;
深度信息获取模块,用于获取所述第一图像区域中各像素点的深度信息;
第一判断模块,用于检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件;
焦距调整模块,用于若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
优选地,所述深度信息获取模块,包括:
深度图生成单元,用于生成与所述第一预览图像对应的深度图,所述深度图中的像素点与所述第一预览图像中的像素点一一对应,且所述深度图中包含每个像素点距离所述图像采集模块的深度信息;
深度信息确定单元,用于从所述深度图中提取与所述第一图像区域对应的各像素点,确定与所述第一图像区域对应的各像素点的深度信息。
优选地,所述第一预设条件为:所述深度信息的预设变化范围;
则,所述第一判断模块,具体用于:判断所述变化值是否处于所述深度信息的预设变化范围内。
优选地,所述变化值包括:正变化值或负变化值;
则,所述焦距调整模块,具体包括:
焦距增大单元,用于当所述变化值为正变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述正变化值对应的焦距调整值增大所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像;
焦距减小单元,用于当所述变化值为负变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述负变化值对应的焦距调整值减小所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
优选地,还包括:
动作信息提取模块,用于提取所述第二预览图像中对应于所述第一主体的动作信息;
第二判断模块,用于判断所述动作信息是否符合第二预设条件;
拍照触发模块,用于若所述动作信息符合所述第二预设条件,则触发所述图像采集模块完成拍照。
优选地,所述第二预设条件为:预设的标准动作信息;
则,所述第二判断模块,具体用于:判断所述动作信息是否与预设的标准动作信息相匹配。
优选地,还包括:
显示模块,用于显示所述第一预览图像和所述第二预览图像。
应用本申请提供的图像处理方法及电子设备,从图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域;获取第一图像区域中各像素点的深度信息;检测深度信息的变化值,判断变化值是否符合第一预设条件;若变化值符合第一预设条件,则使图像采集模块中的焦距调整单元根据变化值调整图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。这样,可以通过图像采集模块采集的第一预览图像中的被拍摄者的动作,使对应于动作主体的第一图像区域的像素点的深度信息发生变化,进而使图像采集模块中的焦距调整单元根据深度信息的变化值调整成像模组的焦距,完成焦距的调整。这可以让被拍摄者作为调整焦距的操作者,通过动作使预览图像对应区域的像素点的深度信息发生变化,从而合理调整焦距,使用户在自拍时能够方便自如地调整焦距,无需面对取景界面进行手动操作,提升用户体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例一提供的图像处理方法的流程图;
图2为本申请实施例二提供的图像处理方法的流程图;
图3为本申请实施例三提供的图像处理方法的流程图。
图4为本申请实施例四提供的图像处理方法的流程图;
图5为本申请提供的一种电子设备的结构示意图;
图6为本申请提供的另一种电子设备的结构示意图;
图7为本申请提供的又一种电子设备的结构示意图;
图8为本申请提供的再一种电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明公开了一种图像处理方法,应用于具有图像采集模块的电子设备中,在通过电子设备进行拍照的过程中,通过被拍摄者的动作使预览图像中对应区域的像素点的深度值发生变化,进而根据深度值的变化调整焦距,获取调整焦距后的图像,由此使用户在自拍时能够方便自如地调整焦距,无需面对取景界面进行手动操作,提升用户体验。本发明中的电子设备可以为手机、平板电脑、相机,也可以为PDA。
实施例一:
图1为本申请实施例一提供的图像处理方法的流程图。
参照图1所示,本申请实施例提供的图像处理方法,应用于具有图像采集模块的电子设备中,所述图像采集模块中包括成像模组和焦距调整单元,本申请实施例提供的图像处理方法包括:
步骤S11:从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域。
在本申请实施例中,第一图像区域可以为对焦区域或者对焦区域外的其他区域。第一预览图像可供判断是否需要调整焦距,第一主体可以是被拍摄者,此时第一图像区域可以是被拍摄者的整体,也可以是被拍摄者的一部分,比如被拍摄者的手部,第一主体还可以是拍摄者,则此时第一图像区域可以是拍摄者伸到镜头前面的手部。在这里,第一图像区域并不一定限于第一预览图像中的对焦主体,即第一图像区域可以为对焦主体,也可以为非对焦主体。
步骤S12:获取所述第一图像区域中各像素点的深度信息。
在本申请实施例中,第一图像区域中各像素点的深度信息具体表现为各像素点的深度值,可以通过结构光、camera阵列标定、红外检测、距离传感器探测等技术实现对第一图像区域中各像素点的深度信息的获取,此处不再赘述。
步骤S13:检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
在本申请实施例中,当需要对第一预览图像的对焦主体进行调整时,第一主体发生动作变化,对应于第一主体的第一图像区域的各像素点的深度信息会发生变化,此时检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
进一步,第一预设条件可以为所述深度信息的预设变化范围,所述判断所述变化值是否符合第一预设条件,即是判断所述变化值是否处于所述深度信息的预设变化范围内。
步骤S14:若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
在本申请实施例中,如果检测到对应于第一主体的第一图像区域的各像素点的深度信息的变化值符合第一预设条件,即所述变化值处于所述深度信息的预设变化范围内时,则可认定第一主体的动作幅度满足焦距调整条件,可以触发所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距;如果深度信息的变化值并未处于预设变化范围内,则说明第一主体的动作幅度过大或过小,则认定第一主体的动作属于误动作,排除这一动作引起的深度信息的变化,不触发焦距调整动作。
进一步,在调整焦距后,获取第二预览图像。如有必要,可以对第一预览图像和第二预览图像进行对比显示,此时可以根据第二预览图像再次判断是否需要继续调整焦距,如果需要,可以重复S11~S14的步骤,如果不需要,可以根据第二预览图像进行后续操作。
应用本申请实施例提供的图像处理方法,从图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域;获取第一图像区域中各像素点的深度信息;检测深度信息的变化值,判断变化值是否符合第一预设条件;若变化值符合第一预设条件,则使图像采集模块中的焦距调整单元根据变化值调整图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。这样,可以通过图像采集模块采集的第一预览图像中的被拍摄者的动作,使对应于动作主体的第一图像区域的像素点的深度信息发生变化,进而使图像采集模块中的焦距调整单元根据深度信息的变化值调整成像模组的焦距,完成焦距的调整。这可以让被拍摄者作为调整焦距的操作者,通过动作使预览图像对应区域的像素点的深度信息发生变化,从而合理调整焦距,使用户在自拍时能够方便自如地调整焦距,无需面对取景界面进行手动操作,提升用户体验。
实施例二:
图2为本申请实施例二提供的图像处理方法的流程图。
参照图2所示,本申请实施例提供的图像处理方法包括:
步骤S21:从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域。
步骤S22:生成与所述第一预览图像对应的深度图,所述深度图中的像素点与所述第一预览图像中的像素点一一对应,且所述深度图中包含每个像素点距离所述图像采集模块的深度信息。
在生成第一预览图像的同时,生成与第一预览图像对应的深度图,深度图与第一预览图像基于相同的拍摄环境、拍摄场景与拍摄进度,与第一预览图像完全同步且对应,深度图中的像素点与第一预览图像中的像素点一一对应,与第一预览图像不同的是所述深度图中包含的是第一预览图像中的每个像素点距离所述图像采集模块的深度信息。这里的深度图可以通过结构光、camera阵列标定、红外检测、距离传感器探测等技术在采集第一预览图像时生成,此处不再赘述。
步骤S23:从所述深度图中提取与所述第一图像区域对应的各像素点,确定与所述第一图像区域对应的各像素点的深度信息。
深度图中包括第一预览图像中的每个像素点距离所述图像采集模块的深度信息,因此可以从深度图中确定提取出的第一图像区域对应的各像素点的深度信息。
步骤S24:检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
步骤S25:若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
应用本申请实施例提供的图像处理方法,可以通过图像采集模块采集的第一预览图像中的被拍摄者的动作,使对应于动作主体的第一图像区域的像素点的深度信息发生变化,利用与第一预览图像同步且对应生成的深度图获取第一图像区域的各像素点的深度信息的变化,进而使图像采集模块中的焦距调整单元根据深度信息的变化值调整成像模组的焦距,完成焦距的调整。这可以让被拍摄者作为调整焦距的操作者,通过动作使预览图像对应区域的像素点的深度信息发生变化,从而合理调整焦距,使用户在自拍时能够方便自如地调整焦距,无需面对取景界面进行手动操作,提升用户体验。
实施例三:
图3为本申请实施例三提供的图像处理方法的流程图。
参照图3所示,本申请实施例提供的图像处理方法,包括:
步骤S31:从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域。
步骤S32:获取所述第一图像区域中各像素点的深度信息。
步骤S33:检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
步骤S34:若所述变化值符合所述第一预设条件,则当所述变化值为正变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述正变化值对应的焦距调整值增大所述图像采集模块中的成像模组的焦距,当所述变化值为负变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述负变化值对应的焦距调整值减小所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
在本申请实施例中,像素点的深度信息可以变大,也可以变小,因此像素点的深度信息的变化值可以为正变化值,也可以为负变化值,正变化值说明深度信息增大,即第一主体的动作远离图像采集模块,负变化值说明深度信息减小,即第一主体的动作趋近图像采集模块,当第一主体的动作远离图像采集模块时,则使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述正变化值对应的焦距调整值增大所述图像采集模块中的成像模组的焦距,当第一主体的动作趋近图像采集模块时,则使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述负变化值对应的焦距调整值减小所述图像采集模块中的成像模组的焦距。
应用本申请实施例提供的图像处理方法,根据深度信息的正变化值或负变化值判断第一主体的动作是远离或者趋近图像采集模块,从而使图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系对应增大或减小图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。这样,可以通过图像采集模块采集的第一预览图像中的被拍摄者的动作,使对应于动作主体的第一图像区域的像素点的深度信息发生变化,进而使图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系对应增大或减小成像模组的焦距,完成焦距的调整。这可以让被拍摄者作为调整焦距的操作者,通过动作使预览图像对应区域的像素点的深度信息发生变化,从而合理调整焦距,使用户在自拍时能够方便自如地调整焦距,无需面对取景界面进行手动操作,提升用户体验。
实施例四:
图4为本申请实施例四提供的图像处理方法的流程图。
参照图4所示,本申请实施例提供的图像处理方法,包括:
步骤S41:从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域。
步骤S42:获取所述第一图像区域中各像素点的深度信息。
步骤S43:检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
步骤S44:若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
步骤S45:提取所述第二预览图像中对应于所述第一主体的动作信息。
在本申请实施例中,在获取第二预览图像后,可以根据第二预览图像再次判断是否需要继续调整焦距,如果需要,可以重复S41~S44的步骤,如果不需要继续调整焦距,则可以进行拍照。
在自拍时,当被拍摄者远离相机,无法手动触发电子设备拍照时,本申请实施例提供的方法可以提取第二预览图像中对应于第一主体的动作信息,这里的动作信息可以包括手势动作信息、头部动作信息等,本申请实施例优选头部动作信息,比如头部左偏信息或者头部右偏信息。
步骤S46:判断所述动作信息是否符合第二预设条件。
在本申请实施例中,第二预设条件可以为预设的标准动作信息,在提取到第二预览图像中的动作信息后,判断接收到的动作信息是否与预设的标准动作信息相匹配。
步骤S47:若所述动作信息符合所述第二预设条件,则触发所述图像采集模块完成拍照。
在本申请实施例中,在步骤S46的基础上,可以预设标准动作信息为头部左偏信息,即头部左偏信息对应拍照指令,则在步骤S45中提取出第二预设图像中的动作信息时,将提取的动作信息与预设的头部左偏信息相比较,如果匹配,则认为接收到拍照指令,触发拍照。
进一步的,本申请实施例还可以预设其它的标准动作信息对应拍照指令,在接收到相匹配的动作信息后,即可触发拍照。同时,在本申请实施例的基础上,还可以预设多种标准动作信息分别对应多种不同的指令,在接收到动作信息后,可以根据匹配出的标准动作信息触发多种不同的指令,实现多种拍摄时的远程控制功能。
应用本申请实施例提供的图像处理方法,在完成焦距调整获取第二预览图像后,还可以根据第一主体的动作信息完成拍照或者完成拍摄时的多种远程控制功能。这样,可以在自拍时通过动作远程触发拍照功能,使被拍摄者在调整好焦距后随即远程控制电子设备拍照,无需往返手动操作电子设备拍照,使用户在自拍时能够方便自如地触发拍照,进一步提升用户体验。
对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。
本发明上述公开了图像处理方法,相应的,本发明还公开了应用上述图像处理方法的电子设备,该电子设备用于使用户在某些情况下能够方便自如地调整焦距,无需面对取景界面进行手动操作,提升用户体验。
图5为本申请提供的一种电子设备的结构示意图。
参照图5所示,本申请实施例提供的电子设备,包括图像采集模块,所述图像采集模块中包括成像模组和焦距调整单元,所述电子设备包括:
第一图像区域获取模块1,用于从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域。
深度信息获取模块2,用于获取所述第一图像区域中各像素点的深度信息。
第一判断模块3,用于检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
在具体实施中,所述第一预设条件可以为:所述深度信息的预设变化范围;则,所述第一判断模块3,可以具体用于:判断所述变化值是否处于所述深度信息的预设变化范围内。
焦距调整模块4,用于若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
本申请实施例提供的电子设备,可以采用上述方法实施例中的图像处理方法,此处不再赘述。
深度信息获取模块2在获取第一图像区域中各像素点的深度信息时,需要多个单元协同配合,因此深度信息获取模块2对应设置多个单元。
图6为本申请提供的另一种电子设备的结构示意图。
参照图6所示,本申请实施例提供的电子设备,包括:
第一图像区域获取模块1,用于从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域。
深度图生成单元21,用于生成与所述第一预览图像对应的深度图,所述深度图中的像素点与所述第一预览图像中的像素点一一对应,且所述深度图中包含每个像素点距离所述图像采集模块的深度信息。
深度信息确定单元22,用于从所述深度图中提取与所述第一图像区域对应的各像素点,确定与所述第一图像区域对应的各像素点的深度信息。
第一判断模块3,用于检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
焦距调整模块4,用于若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
本申请实施例提供的电子设备,可以采用上述方法实施例中的图像处理方法,此处不再赘述。
由于深度信息的变化值包括正变化值和负变化值,因此焦距调整模块4对应设置不同的单元。
图7为本申请提供的又一种电子设备的结构示意图。
参照图7所示,本申请实施例提供的电子设备,包括:
第一图像区域获取模块1,用于从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域。
深度信息获取模块2,用于获取所述第一图像区域中各像素点的深度信息。
第一判断模块3,用于检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
焦距增大单元41,用于当所述变化值为正变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述正变化值对应的焦距调整值增大所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
焦距减小单元42,用于当所述变化值为负变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述负变化值对应的焦距调整值减小所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
本申请实施例提供的电子设备,可以采用上述方法实施例中的图像处理方法,此处不再赘述。
在获取第二预览图像后,为了使用户在自拍时能够方便自如地触发拍照,进一步提升用户体验,本申请实施例提供的电子设备在调整焦距后还可以完成拍照。
图8为本申请提供的再一种电子设备的结构示意图。
参照图8所示,本申请实施例提供的电子设备,包括:
第一图像区域获取模块1,用于从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域。
深度信息获取模块2,用于获取所述第一图像区域中各像素点的深度信息。
第一判断模块3,用于检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件。
焦距调整模块4,用于若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
动作信息提取模块5,用于提取所述第二预览图像中对应于所述第一主体的动作信息。
第二判断模块6,用于判断所述动作信息是否符合第二预设条件。
在具体实施时,所述第二预设条件可以为:预设的标准动作信息;则,所述第二判断模块6,可以具体用于:判断所述动作信息是否与预设的标准动作信息相匹配。
拍照触发模块7,用于若所述动作信息符合所述第二预设条件,则触发所述图像采集模块完成拍照。
本申请实施例提供的电子设备,可以采用上述方法实施例中的图像处理方法,此处不再赘述。
可以理解的是,在上述实施例的基础上,本申请提供的电子设备还可以包括:显示模块,用于显示所述第一预览图像和所述第二预览图像。
应用本申请提供的图像处理方法及电子设备,从图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域;获取第一图像区域中各像素点的深度信息;检测深度信息的变化值,判断变化值是否符合第一预设条件;若变化值符合第一预设条件,则使图像采集模块中的焦距调整单元根据变化值调整图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。这样,可以通过图像采集模块采集的第一预览图像中的被拍摄者的动作,使对应于动作主体的第一图像区域的像素点的深度信息发生变化,进而使图像采集模块中的焦距调整单元根据深度信息的变化值调整成像模组的焦距,完成焦距的调整。这可以让被拍摄者作为调整焦距的操作者,通过动作使预览图像对应区域的像素点的深度信息发生变化,从而合理调整焦距,使用户在自拍时能够方便自如地调整焦距,无需面对取景界面进行手动操作,提升用户体验。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置或系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的装置及系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (15)
1.一种图像处理方法,应用于具有图像采集模块的电子设备中,所述图像采集模块中包括成像模组和焦距调整单元,其特征在于,所述图像处理方法包括:
从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域;
获取所述第一图像区域中各像素点的深度信息;
检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件;
若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
2.根据权利要求1所述的图像处理方法,其特征在于,所述第一图像区域为对焦区域或者对焦区域外的其他区域。
3.根据权利要求1或2所述的图像处理方法,其特征在于,所述获取所述第一图像区域中各像素点的深度信息,包括:
生成与所述第一预览图像对应的深度图,所述深度图中的像素点与所述第一预览图像中的像素点一一对应,且所述深度图中包含每个像素点距离所述图像采集模块的深度信息;
从所述深度图中提取与所述第一图像区域对应的各像素点,确定与所述第一图像区域对应的各像素点的深度信息。
4.根据权利要求1或2所述的图像处理方法,其特征在于,所述第一预设条件为:所述深度信息的预设变化范围;
则,所述判断所述变化值是否符合第一预设条件,具体为:判断所述变化值是否处于所述深度信息的预设变化范围内。
5.根据权利要求1或2所述的图像处理方法,其特征在于,所述变化值包括:正变化值或负变化值;
则,所述使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,具体包括:
当所述变化值为正变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述正变化值对应的焦距调整值增大所述图像采集模块中的成像模组的焦距;
当所述变化值为负变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述负变化值对应的焦距调整值减小所述图像采集模块中的成像模组的焦距。
6.根据权利要求1或2所述的图像处理方法,其特征在于,还包括:
提取所述第二预览图像中对应于所述第一主体的动作信息;
判断所述动作信息是否符合第二预设条件;
若所述动作信息符合所述第二预设条件,则触发所述图像采集模块完成拍照。
7.根据权利要求6所述的图像处理方法,其特征在于,所述第二预设条件为:预设的标准动作信息;
则,所述判断所述动作信息是否符合第二预设条件,具体为:判断所述动作信息是否与预设的标准动作信息相匹配。
8.根据权利要求1所述的图像处理方法,其特征在于,还包括:
显示所述第一预览图像和所述第二预览图像。
9.一种电子设备,包括图像采集模块,所述图像采集模块中包括成像模组和焦距调整单元,其特征在于,所述电子设备包括:
第一图像区域获取模块,用于从所述图像采集模块获取的第一预览图像中提取对应于第一主体的第一图像区域;
深度信息获取模块,用于获取所述第一图像区域中各像素点的深度信息;
第一判断模块,用于检测所述深度信息的变化值,判断所述变化值是否符合第一预设条件;
焦距调整模块,用于若所述变化值符合所述第一预设条件,则使所述图像采集模块中的焦距调整单元根据所述变化值调整所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
10.根据权利要求9所述的电子设备,其特征在于,所述深度信息获取模块,包括:
深度图生成单元,用于生成与所述第一预览图像对应的深度图,所述深度图中的像素点与所述第一预览图像中的像素点一一对应,且所述深度图中包含每个像素点距离所述图像采集模块的深度信息;
深度信息确定单元,用于从所述深度图中提取与所述第一图像区域对应的各像素点,确定与所述第一图像区域对应的各像素点的深度信息。
11.根据权利要求9所述的电子设备,其特征在于,所述第一预设条件为:所述深度信息的预设变化范围;
则,所述第一判断模块,具体用于:判断所述变化值是否处于所述深度信息的预设变化范围内。
12.根据权利要求9所述的电子设备,其特征在于,所述变化值包括:正变化值或负变化值;
则,所述焦距调整模块,具体包括:
焦距增大单元,用于当所述变化值为正变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述正变化值对应的焦距调整值增大所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像;
焦距减小单元,用于当所述变化值为负变化值时,使所述图像采集模块中的焦距调整单元根据预设的深度信息的变化值与焦距调整值的对应关系,按照与所述负变化值对应的焦距调整值减小所述图像采集模块中的成像模组的焦距,并在调整焦距后获取第二预览图像。
13.根据权利要求9所述的电子设备,其特征在于,还包括:
动作信息提取模块,用于提取所述第二预览图像中对应于所述第一主体的动作信息;
第二判断模块,用于判断所述动作信息是否符合第二预设条件;
拍照触发模块,用于若所述动作信息符合所述第二预设条件,则触发所述图像采集模块完成拍照。
14.根据权利要求13所述的电子设备,其特征在于,所述第二预设条件为:预设的标准动作信息;
则,所述第二判断模块,具体用于:判断所述动作信息是否与预设的标准动作信息相匹配。
15.根据权利要求9所述的电子设备,其特征在于,还包括:显示模块,用于显示所述第一预览图像和所述第二预览图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410075109.1A CN103795933B (zh) | 2014-03-03 | 2014-03-03 | 一种图像处理方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410075109.1A CN103795933B (zh) | 2014-03-03 | 2014-03-03 | 一种图像处理方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103795933A true CN103795933A (zh) | 2014-05-14 |
CN103795933B CN103795933B (zh) | 2018-02-23 |
Family
ID=50671175
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410075109.1A Active CN103795933B (zh) | 2014-03-03 | 2014-03-03 | 一种图像处理方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103795933B (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104680563A (zh) * | 2015-02-15 | 2015-06-03 | 青岛海信移动通信技术股份有限公司 | 一种图像数据的生成方法和装置 |
CN104994291A (zh) * | 2015-06-30 | 2015-10-21 | 广东欧珀移动通信有限公司 | 一种基于拍摄场景环境启动广角摄像头的方法及终端 |
CN106161945A (zh) * | 2016-08-01 | 2016-11-23 | 乐视控股(北京)有限公司 | 拍照处理方法和装置 |
CN106982330A (zh) * | 2017-05-15 | 2017-07-25 | 珠海市魅族科技有限公司 | 摄像控制方法以及装置、计算机装置、可读存储介质 |
CN106993131A (zh) * | 2017-03-13 | 2017-07-28 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
CN107147845A (zh) * | 2017-04-28 | 2017-09-08 | 广东欧珀移动通信有限公司 | 对焦方法、装置和终端设备 |
CN107147843A (zh) * | 2017-04-28 | 2017-09-08 | 广东欧珀移动通信有限公司 | 对焦触发方法、装置及移动终端 |
US9769379B2 (en) | 2015-02-15 | 2017-09-19 | Hisense Mobile Communications Technology Co., Ltd. | Method and apparatus for selecting target image |
CN109600552A (zh) * | 2019-01-14 | 2019-04-09 | 广东省航空航天装备技术研究所 | 图像重新聚焦的控制方法及系统 |
Citations (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1800836A (zh) * | 2004-12-24 | 2006-07-12 | 奥林巴斯株式会社 | 图像检查装置 |
CN101051385A (zh) * | 2006-04-07 | 2007-10-10 | 欧姆龙株式会社 | 特定被摄体跟踪方法和装置以及特征部跟踪方法和装置 |
CN101095341A (zh) * | 2005-01-05 | 2007-12-26 | 诺基亚公司 | 具有自动聚焦的数字成像 |
US7329861B2 (en) * | 2003-10-14 | 2008-02-12 | Micron Technology, Inc. | Integrally packaged imaging module |
CN101126833A (zh) * | 2006-08-16 | 2008-02-20 | 佳能株式会社 | 自动聚焦设备和摄像设备 |
CN101387812A (zh) * | 2007-09-13 | 2009-03-18 | 鸿富锦精密工业(深圳)有限公司 | 相机自动对焦系统及方法 |
CN101634796A (zh) * | 2009-08-20 | 2010-01-27 | 上海合合信息科技发展有限公司 | 相机自动变焦方法及系统 |
CN101833791A (zh) * | 2010-05-11 | 2010-09-15 | 成都索贝数码科技股份有限公司 | 一种单摄像机下的场景建模方法及系统 |
CN102223477A (zh) * | 2010-04-13 | 2011-10-19 | 索尼公司 | 基于双图片匹配的深度估计的四维多项式模型 |
CN102231798A (zh) * | 2011-06-24 | 2011-11-02 | 天津市亚安科技电子有限公司 | 一种控制云台摄像机自动变倍的方法及系统 |
CN102236147A (zh) * | 2010-04-30 | 2011-11-09 | 佳能株式会社 | 镜头设备 |
CN102244727A (zh) * | 2010-05-10 | 2011-11-16 | 佳能株式会社 | 摄像设备 |
CN102316307A (zh) * | 2011-08-22 | 2012-01-11 | 安防科技(中国)有限公司 | 一种道路交通视频检测方法及装置 |
CN102663721A (zh) * | 2012-04-01 | 2012-09-12 | 清华大学 | 动态场景的散焦深度估计和全聚焦图像获取方法 |
CN102842110A (zh) * | 2011-06-20 | 2012-12-26 | 富士胶片株式会社 | 图像处理设备和图像处理方法 |
CN102946516A (zh) * | 2012-11-28 | 2013-02-27 | 广东欧珀移动通信有限公司 | 移动终端检测眨眼动作实现自拍的方法及移动终端 |
CN102970485A (zh) * | 2012-12-03 | 2013-03-13 | 广东欧珀移动通信有限公司 | 一种自动对焦方法及装置 |
CN103324004A (zh) * | 2012-03-19 | 2013-09-25 | 联想(北京)有限公司 | 对焦方法和图像捕捉装置 |
CN103516988A (zh) * | 2012-06-29 | 2014-01-15 | 美国博通公司 | 利用透镜移动的增强图像处理 |
CN103559717A (zh) * | 2013-11-14 | 2014-02-05 | 上海华勤通讯技术有限公司 | 拍照设备的拍照预览构图辅助方法及装置 |
WO2014021238A1 (en) * | 2012-07-31 | 2014-02-06 | Canon Kabushiki Kaisha | Image pickup apparatus, depth information acquisition method and program |
-
2014
- 2014-03-03 CN CN201410075109.1A patent/CN103795933B/zh active Active
Patent Citations (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7329861B2 (en) * | 2003-10-14 | 2008-02-12 | Micron Technology, Inc. | Integrally packaged imaging module |
CN1800836A (zh) * | 2004-12-24 | 2006-07-12 | 奥林巴斯株式会社 | 图像检查装置 |
CN101095341A (zh) * | 2005-01-05 | 2007-12-26 | 诺基亚公司 | 具有自动聚焦的数字成像 |
CN101051385A (zh) * | 2006-04-07 | 2007-10-10 | 欧姆龙株式会社 | 特定被摄体跟踪方法和装置以及特征部跟踪方法和装置 |
CN101126833A (zh) * | 2006-08-16 | 2008-02-20 | 佳能株式会社 | 自动聚焦设备和摄像设备 |
CN101387812A (zh) * | 2007-09-13 | 2009-03-18 | 鸿富锦精密工业(深圳)有限公司 | 相机自动对焦系统及方法 |
CN101634796A (zh) * | 2009-08-20 | 2010-01-27 | 上海合合信息科技发展有限公司 | 相机自动变焦方法及系统 |
CN102223477A (zh) * | 2010-04-13 | 2011-10-19 | 索尼公司 | 基于双图片匹配的深度估计的四维多项式模型 |
CN102236147A (zh) * | 2010-04-30 | 2011-11-09 | 佳能株式会社 | 镜头设备 |
CN102244727A (zh) * | 2010-05-10 | 2011-11-16 | 佳能株式会社 | 摄像设备 |
CN101833791A (zh) * | 2010-05-11 | 2010-09-15 | 成都索贝数码科技股份有限公司 | 一种单摄像机下的场景建模方法及系统 |
CN102842110A (zh) * | 2011-06-20 | 2012-12-26 | 富士胶片株式会社 | 图像处理设备和图像处理方法 |
CN102231798A (zh) * | 2011-06-24 | 2011-11-02 | 天津市亚安科技电子有限公司 | 一种控制云台摄像机自动变倍的方法及系统 |
CN102316307A (zh) * | 2011-08-22 | 2012-01-11 | 安防科技(中国)有限公司 | 一种道路交通视频检测方法及装置 |
CN103324004A (zh) * | 2012-03-19 | 2013-09-25 | 联想(北京)有限公司 | 对焦方法和图像捕捉装置 |
CN102663721A (zh) * | 2012-04-01 | 2012-09-12 | 清华大学 | 动态场景的散焦深度估计和全聚焦图像获取方法 |
CN103516988A (zh) * | 2012-06-29 | 2014-01-15 | 美国博通公司 | 利用透镜移动的增强图像处理 |
WO2014021238A1 (en) * | 2012-07-31 | 2014-02-06 | Canon Kabushiki Kaisha | Image pickup apparatus, depth information acquisition method and program |
CN102946516A (zh) * | 2012-11-28 | 2013-02-27 | 广东欧珀移动通信有限公司 | 移动终端检测眨眼动作实现自拍的方法及移动终端 |
CN102970485A (zh) * | 2012-12-03 | 2013-03-13 | 广东欧珀移动通信有限公司 | 一种自动对焦方法及装置 |
CN103559717A (zh) * | 2013-11-14 | 2014-02-05 | 上海华勤通讯技术有限公司 | 拍照设备的拍照预览构图辅助方法及装置 |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9852508B2 (en) | 2015-02-15 | 2017-12-26 | Hisense Mobile Communications Technology Co., Ltd. | Image data generating method and apparatus |
CN104680563B (zh) * | 2015-02-15 | 2018-06-01 | 青岛海信移动通信技术股份有限公司 | 一种图像数据的生成方法和装置 |
CN104680563A (zh) * | 2015-02-15 | 2015-06-03 | 青岛海信移动通信技术股份有限公司 | 一种图像数据的生成方法和装置 |
US9769379B2 (en) | 2015-02-15 | 2017-09-19 | Hisense Mobile Communications Technology Co., Ltd. | Method and apparatus for selecting target image |
CN104994291A (zh) * | 2015-06-30 | 2015-10-21 | 广东欧珀移动通信有限公司 | 一种基于拍摄场景环境启动广角摄像头的方法及终端 |
CN104994291B (zh) * | 2015-06-30 | 2018-09-04 | 广东欧珀移动通信有限公司 | 一种基于拍摄场景环境启动广角摄像头的方法及终端 |
CN106161945A (zh) * | 2016-08-01 | 2016-11-23 | 乐视控股(北京)有限公司 | 拍照处理方法和装置 |
CN106993131A (zh) * | 2017-03-13 | 2017-07-28 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
CN107147843A (zh) * | 2017-04-28 | 2017-09-08 | 广东欧珀移动通信有限公司 | 对焦触发方法、装置及移动终端 |
CN107147845A (zh) * | 2017-04-28 | 2017-09-08 | 广东欧珀移动通信有限公司 | 对焦方法、装置和终端设备 |
CN107147843B (zh) * | 2017-04-28 | 2021-04-06 | Oppo广东移动通信有限公司 | 对焦触发方法、装置及移动终端 |
CN106982330A (zh) * | 2017-05-15 | 2017-07-25 | 珠海市魅族科技有限公司 | 摄像控制方法以及装置、计算机装置、可读存储介质 |
CN109600552A (zh) * | 2019-01-14 | 2019-04-09 | 广东省航空航天装备技术研究所 | 图像重新聚焦的控制方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN103795933B (zh) | 2018-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103795933A (zh) | 一种图像处理方法及电子设备 | |
CN103795934A (zh) | 一种图像处理方法及电子设备 | |
US9300858B2 (en) | Control device and storage medium for controlling capture of images | |
US8941722B2 (en) | Automatic intelligent focus control of video | |
US8810709B2 (en) | Image capturing apparatus and control method thereof | |
CN106713769B (zh) | 图像拍摄控制方法、装置及电子设备 | |
CN103188434B (zh) | 一种图像采集方法和设备 | |
CN104079812B (zh) | 一种图像信息获取方法及装置 | |
CN103780843A (zh) | 一种图像处理方法及电子设备 | |
CN105493493B (zh) | 摄像装置、摄像方法及图像处理装置 | |
CN106254780A (zh) | 一种双摄像头拍照控制方法、拍照控制装置及终端 | |
US8648960B2 (en) | Digital photographing apparatus and control method thereof | |
EP3912336B1 (en) | Automatic generation of all-in-focus images with a mobile camera | |
TWI472864B (zh) | 影像處理裝置及其控制方法 | |
JP2011217103A (ja) | 複眼撮影方法および装置 | |
CN111182199B (zh) | 电子装置及拍照方法 | |
JP5397078B2 (ja) | 撮像装置 | |
EP2890116B1 (en) | Method of displaying a photographing mode by using lens characteristics, computer-readable storage medium of recording the method and an electronic apparatus | |
JP2011048295A (ja) | 複眼撮影装置及びその姿勢検出方法 | |
KR101094648B1 (ko) | 구도결정을 하는 사진사 로봇 및 그 제어방법 | |
CN108234872A (zh) | 移动终端及其拍照方法 | |
CN104735353A (zh) | 一种拍摄全景照片的方法及装置 | |
KR101491963B1 (ko) | 모바일 단말의 아웃 포커싱 영상 통화 방법 및 장치 | |
CN102004370A (zh) | 利用闪光灯辅助检测焦距的方法 | |
JP5846928B2 (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |