CN110225247A - 一种图像处理方法及电子设备 - Google Patents

一种图像处理方法及电子设备 Download PDF

Info

Publication number
CN110225247A
CN110225247A CN201910456111.6A CN201910456111A CN110225247A CN 110225247 A CN110225247 A CN 110225247A CN 201910456111 A CN201910456111 A CN 201910456111A CN 110225247 A CN110225247 A CN 110225247A
Authority
CN
China
Prior art keywords
image
target
imaged
imaging
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910456111.6A
Other languages
English (en)
Other versions
CN110225247B (zh
Inventor
石彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201910456111.6A priority Critical patent/CN110225247B/zh
Publication of CN110225247A publication Critical patent/CN110225247A/zh
Application granted granted Critical
Publication of CN110225247B publication Critical patent/CN110225247B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了一种图像处理方法及电子设备,该方法包括:获得第一指令;基于所述第一指令,控制所述电子设备的信号发射器发射检测信号;接收所述检测信号的反馈信号;至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数;至少基于所述和空间位置相关的参数,对成像参数进行调整,得到输出图像;其中,在获得第一指令之后,所述方法还包含:使用图像传感器获取所述至少一个待成像目标的图像。该方法能够有效利用信号发射器发射的检测信号,对待测目标物的空间位置进行测量,从而得到准确的待测目标物的空间位置数据,进而能够根据该与空间位置相关的参数数据来对输出图像进行调整,以提高成像质量。

Description

一种图像处理方法及电子设备
技术领域
本申请涉及图像处理领域,特别是一种图像处理方法及电子设备。
背景技术
目前,随着社会发展的不断进步,人们的生活水平正在不断的提高,电子设备已然成为人们生活、工作中的必需品。例如,许多人便热衷于使用便于携带的手机进行拍照,而相应的,为了提高用户的使用体验,手机也多采用双摄像头配置以增强拍照功能,但是,现有手机采用的双摄像头增强拍摄功能的强度有限,且也存在诸多问题。
发明内容
本申请实施例的目的在于提供一种图像处理方法及电子设备。
本申请的实施例采用了如下技术方案:一种图像处理方法,包括:
获得第一指令;
基于所述第一指令,控制所述电子设备的信号发射器发射检测信号;
接收所述检测信号的反馈信号;
至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数;
至少基于所述和空间位置相关的参数,对成像参数进行调整,得到输出图像;
其中,在获得第一指令之后,所述方法还包含:
使用图像传感器获取所述至少一个待成像目标的图像。
在本申请的一些实施例中,所述图像传感器至少为两个,所述使用图像传感器获取所述至少一个待成像目标的图像,包括:
使用至少两个图像传感器中的第一图像传感器获取所述至少一个待成像目标的第一图像;
使用至少两个图像传感器中的第二图像传感器获取所述至少一个待成像目标的第二图像,以能够基于所述和空间位置相关的参数对所述第一图像和所述第二图像进行处理生成输出图像,其中,所述第一图像传感器和所述第二图像传感器的成像参数不同。
在本申请的一些实施例中,所述信号发射器为激光发射器,所述检测信号为激光光束,所述至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括:
至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第一闪烁点,以基于所述第一闪烁点使所述第一图像和所述第二图像生成所述输出图像。
在本申请的一些实施例中,所述至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括:
至少基于所述反馈信号,获取所述第一闪烁点与所述电子设备的距离参数,以基于所述距离参数,调整所述输出图像的成像参数。
在本申请的一些实施例中,所述信号发射器为激光发射器,所述检测信号为激光光束,所述至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括:
至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第二闪烁点;
基于所述第二闪烁点,确定所述至少一个待成像目标中移动目标的第一尺寸参数,并确定所述至少一个待成像目标中一区域的第二尺寸参数,以基于所述第一尺寸参数和所述第二尺寸参数,调整成像参数。
在本申请的一些实施例中,所述确定所述至少一个待成像目标中一区域的第二尺寸参数,具体为:
确定所述至少一个待成像目标中被所述移动目标所遮挡的区域的第三尺寸参数。
本申请实施例还提供了一种电子设备,包括:
获得模块,其用于获得第一指令;
控制模块,其用于基于所述第一指令,控制所述电子设备的信号发射器发射检测信号;
接收模块,其用于接收所述检测信号的反馈信号;
第一获取模块,其用于至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数;
处理模块,其用于至少基于所述和空间位置相关的参数,对成像参数进行调整,得到输出图像;
第二获取模块,其用于在通过所述获得模块获得第一指令之后,使用图像传感器获取所述至少一个待成像目标的图像。
在本申请的一些实施例中,所述图像传感器至少为两个,所述第二获取模块具体用于:
使用至少两个图像传感器中的第一图像传感器获取所述至少一个待成像目标的第一图像;
使用至少两个图像传感器中的第二图像传感器获取所述至少一个待成像目标的第二图像,以使所述处理模块能够基于所述和空间位置相关的参数对所述第一图像和所述第二图像进行处理生成输出图像,其中,所述第一图像传感器和所述第二图像传感器的成像参数不同。
在本申请的一些实施例中,所述信号发射器为激光发射器,所述检测信号为激光光束,所述第一获取模块具体用于:
至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第一闪烁点,以使所述处理模块能够基于所述第一闪烁点对所述第一图像和所述第二图像进行处理生成所述输出图像。
在本申请的一些实施例中,所述第一获取模块具体用于:
至少基于所述反馈信号,获取所述第一闪烁点与所述电子设备的距离参数,以使所述处理模块能够基于所述距离参数,调整所述输出图像的成像参数。
与现有技术相比,本申请的有益效果在于:该方法能够有效利用信号发射器发射的检测信号,对待测目标物的空间位置进行测量,从而得到准确的待测目标物的空间位置数据,进而能够根据该与空间位置相关的参数数据来对输出图像进行调整,以提高成像质量。
附图说明
图1为本申请实施例的图像处理方法的流程图;
图2为本申请实施例的图像处理方法的一个具体实施例的流程图;
图3为本申请实施例的图1中步骤S4的一个具体实施例的流程图;
图4为本申请实施例的电子设备在一个具体实施例中的工作原理示意图;
图5为本申请实施例的电子设备的结构示意图。
具体实施方式
为使本领域技术人员更好的理解本申请的技术方案,下面结合附图和具体实施方式对本申请作详细说明。
此处参考附图描述本申请的各种方案以及特征。
通过下面参照附图对给定为非限制性实例的实施例的优选形式的描述,本申请的这些和其它特性将会变得显而易见。
还应当理解,尽管已经参照一些具体实例对本申请进行了描述,但本领域技术人员能够确定地实现本申请的很多其它等效形式,它们具有如权利要求所述的特征并因此都位于借此所限定的保护范围内。
当结合附图时,鉴于以下详细说明,本申请的上述和其它方面、特征和优势将变得更为显而易见。
此后参照附图描述本申请的具体实施例;然而,应当理解,所发明的实施例仅仅是本申请的实例,其可采用多种方式实施。熟知和/或重复的功能和结构并未详细描述以根据用户的历史的操作,判明真实的意图,避免不必要或多余的细节使得本申请模糊不清。因此,本文所发明的具体的结构性和功能性细节并非意在限定,而是仅仅作为权利要求的基础和代表性基础用于教导本领域技术人员以实质上任意合适的详细结构多样地使用本申请。
本说明书可使用词组“在一种实施例中”、“在另一个实施例中”、“在又一实施例中”或“在其它实施例中”,其均可指代根据本申请的相同或不同实施例中的一个或多个。
为了能够更加简单、详细的了解上述技术方案,下面结合实施例和附图对上述的指令处理方法进行详细阐述。
如图1所示,图1为本申请实施例提供的图像处理方法的流程图,结合图1,本申请实施例提供的一种图像处理方法,该方法能够应用于具有摄像或拍照功能的电子设备上,该方法包括以下步骤:
S1,获得第一指令。第一指令为用于操作电子设备的信号发射器的指令,可以是用户对电子设备的操作指令,也可以是在使用电子设备时自动触发的指令等。当第一指令发出后,电子设备或者信号发射器本身获取该第一指令,并响应该第一指令。
S2,基于所述第一指令,控制所述电子设备的信号发射器发射检测信号。信号发射器可以对电子设备的拍摄目标即待成像目标发射信号,如发射光线,或者进行其他电磁波(包括声波)的照射。此外,在发射检测信号时可以瞄准该待成像目标发射,也可以先发射再对待成像目标进行瞄准,以便用户能够便于操作。
S3,接收所述检测信号的反馈信号。发射器向待成像目标发射检测信号后,根据物理学原理,该待成像目标可以基于检测信号而生成相应的反馈信号,如对待成像目标进行激光照射,待成像目标可以基于入射激光而形成反射激光;或者对待成像目标进行其他频段的电磁波进行照射,该待成像目标可以基于该电磁波而生成反馈信号。电子设备将接收该反馈信号,如可以通过电子设备中的一个特定设备,或者通过电子设备中已有的设备来接收该反馈信号,如图像传感器接收该反馈信号。
S4,至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数。该反馈信号中包含了待成像目标在被电子设备拍摄的过程中所具有的物理参数,使得电子设备可以利用该物理参数来对图像进行处理,从而提高处理效果。进一步来说,电子设备可以基于该反馈信号,一方面,获取一个或多个与待成像目标的空间位置相关的参数,例如该待成像目标距离电子设备中的图像传感器的距离(如果图像传感器具有多个,则该距离可以是分别具各个图像传感器的距离),或者待成像目标的尺寸数据,或者是待成像目标的相对位置数据等;另一方面,该参数还可以是针对待成像目标拍摄的成像时间参数等。
S5,至少基于所述和空间位置相关的参数,对成像参数进行调整,得到输出图像。
其中,在获得第一指令之后,所述方法还包含:使用图像传感器获取所述至少一个待成像目标的图像。
电子设备在拍摄待成像目标的过程中,是基于成像参数对其进行成像操作,该成像参数可以与图像传感器相对应,如当具有多个凸显传感器时可以分别具有各自的成像参数,而在本实施例中该成像操作可以被调整,即根据所述和空间位置相关的参数来对其进行调整,以便提高成像标准,使得输出图像的质量更高。此外,在获得第一指令后可以使用图像传感器获取至少一个待成像目标的图像,如电子设备具有多个图像传感器时,每个图像传感器可以分别获取各自的待成像目标的图像,然后基于各个不同的待成像目标的图像的特点将其进行合成处理,如基于各个图像传感器的成像参数来将多个待成像目标的图像进行合成处理,从而得到质量增强的输出图像。此外,对于获取至少一个待成像目标的和空间位置相关的参数,以及使用图像传感器获取所述至少一个待成像目标的图像的过程,一方面可以按照先后顺序来进行,另一方面可以同时进行,在此不作限定。
在本申请的一个实施例中,如图2所示并结合图4,所述图像传感器至少为两个,所述使用图像传感器获取所述至少一个待成像目标的图像,包括以下步骤:
S6,使用至少两个图像传感器中的第一图像传感器获取所述至少一个待成像目标的第一图像。两个图像传感器可以为不同类型的传感器,也可以为相同类型的传感器,如可以是一个为基于广角镜头的传感器,另一个可以为基于长焦镜头的传感器等,可以分别基于自身的特征和能力来获取待成像目标的图像,其中包括使用第一图像传感器获取待成像目标的第一图像,获取的该第一图像具有该第一图像传感器的特性,如第一图像传感器为基于广角镜头的传感器,由于广角镜头的焦距短,视角大,在较短的拍摄距离范围内,能拍摄到较大面积的景物,因此该第一图像表现了视角大的优点,虽然在较近距离拍摄,也可以表现范围宽阔的景物,前景较为突出,景深范围较大,画面纵深感强烈。
S7使用至少两个图像传感器中的第二图像传感器获取所述至少一个待成像目标的第二图像,以能够基于所述和空间位置相关的参数对所述第一图像和所述第二图像进行处理生成输出图像,其中,所述第一图像传感器和所述第二图像传感器的成像参数不同。
第二图像传感器获取待成像目标的第二图像,由于第二图像传感器可以具有不同于第一图像传感器的特性,因此获取的第二图像具有与该第二图像传感器相对应的特征,如第二图像传感器为基于长焦镜头的传感器,长焦镜头的焦距长,视角小,成像大。因此第二图像能够展现远处景物的细部和展现不易接近的被摄体,在人像的透视方面出现的变形较小,拍出的人像更生动。由于第一图像传感器和第二图像传感器的成像参数不同,因此获得的第一图像和第二图像具有各自的图像特点,可以基于各自的图像特点来进行合成操作,本实施例中,基于所述和空间位置相关的参数对第一图像和第二图像进行合成处理,并生成输出图像。该输出图像可以兼具第一图像和第二图像的优点,如兼具长焦镜头和广角镜头拍摄的图像的优点。
在本申请的一个实施例中,结合图4,所述信号发射器为激光发射器,所述检测信号为激光光束,所述至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括:至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第一闪烁点,以基于所述第一闪烁点使所述第一图像和所述第二图像生成所述输出图像。
激光发射器向待成像目标发射激光光束,待成像目标可以反射该激光光束,从而形成反馈信号,具体地,激光发射器在向待成像目标发射激光光束后,在该待成像目标上形成闪烁点,且该闪烁点能够被图像传感器捕捉到,进而,基于该捕捉到的闪烁点实现对该待成像目标在底片上的位置标记,同时,还可以基于该待成像目标上的闪烁点确定出闪烁点距离图像传感器的实际距离,在该激光光束照射所述至少一个待成像目标上而形成第一闪烁点后,所述第一图像传感器与所述第二图像传感器便均能够捕获到该第一闪烁点,电子设备根据该第一闪烁点,能够准确判断出待成像目标的在空间中与第一图像传感器相关的第一空间位置参数,如待成像目标与第一图像传感器的距离,或者是在空间中的相对位置关系数据(如待成像目标在空间中处于运动状态时具有的相对位置关系数据);类似的,电子设备也能够根据该第一闪烁点,准确判断出待成像目标的在空间中与第二图像传感器相关的第二空间位置参数,基于上述的第一空间位置参数与第二空间位置参数,电子设备能够对第一图像和第二图像进行分别处理,或者将第一图像和第二图像进行合成后再对合成后的图像进行处理。如通过两个图像传感器的立体定位从而能够确定物体的实际空间位置,进而能够处理得到准确的物点图,而且图像没有畸变,进而基于处理后的第一图像和第二图像再进行合成操作生成输出图像,使得该输出图像能够成为无畸变无模糊等情况的高质量图像。
在本申请的一个实施例中,至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括以下步骤:至少基于所述反馈信号,获取所述第一闪烁点与所述电子设备的距离参数,以基于所述距离参数,调整所述输出图像的成像参数。结合具体实施例进行说明,激光发射器向待成像目标发射激光光束,待成像目标反射该激光光束形成反馈信号,并被图像传感器获取,根据激光的物理特性,以及激光放射器发射时间和图像传感器接收到反馈信号的时间,能够计算出待成像目标与图像传感器的距离从而使得电子设备获取该距离参数,以基于所述距离参数,调整输出图像的成像参数。作为示例,若通过第一图像传感器(如长焦镜头)获取到一待成像目标的长焦图像,通过第二图像传感器(如广角镜头)获取到该待成像目标的广角图像,此时可以基于该待成像目标上的闪烁点将上述得到的长焦图像和广角图像进行合成,即,基于该同一待成像目标上的闪烁点将两张图像合成为一张图像,而在得到该合成的图像后,便可以依据通过闪烁点获得的该合成的图像中的物体距离镜头的距离参数,对该合成的图像中的物体以及背景等进行由近至远的渐变虚化处理。
在本申请的一个实施例中,如图3所示,所述信号发射器为激光发射器,所述检测信号为激光光束,所述至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括:
S41,至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第二闪烁点;
S42,基于所述第二闪烁点,确定所述至少一个待成像目标中移动目标的第一尺寸参数,并确定所述至少一个待成像目标中一区域的第二尺寸参数,以基于所述第一尺寸参数和所述第二尺寸参数,调整成像参数。
具体来说,当待成像目标为移动目标时,为了避免出现图像传感器判断移动目标位置不准确或者移动目标的尺寸大小不准确的问题,本实施例中可以根据拍摄的区域中的静态的物体作为参照来进一步明确该移动目标的空间位置参数以及自身的尺寸参数等。具体地,还是以所述信号发射器为激光发射器,所述检测信号为激光光束为例,则在移动目标上能够基于所述激光光束形成第二闪烁点,并且,图像传感器拍摄该移动目标对应的区域中的静态物体也能够基于所述激光光束形成第二闪烁点,其中,拍摄该移动目标对应的区域中的静态物体可以是背景墙,或者其它静态物体。基于所述第二闪烁点,可以获得移动目标的在不同时间段的第一尺寸参数,如可以为在移动目标的在其沿移动方向的第一长度尺寸(由于通过激光光束确定,该第一长度尺寸为该移动目标的实际长度尺寸),同时,还能够获得在拍摄该移动目标时对应的拍摄背景中的某一区域的第二尺寸参数,如可以是在该移动目标的移动方向上的某一区域的第二长度尺寸,具体地,还可以是获得一标识物的在该移动目标的移动方向上的长度尺寸。由于在对移动目标进行拍摄的过程中,由于拍摄目标的移动,会在成像时,使得被拍摄的移动目标被拉长,而对静态物体拍摄时,静态物体并不会发生变形,故此,可以依据图像传感器获得的图像中的移动目标对应的拍摄背景中的某一区域沿移动目标移动方向上的成像长度尺寸与移动目标对应的拍摄背景中的该区域沿移动目标移动方向上的实际长度尺寸的比值相等于输出图像中的移动目标的成像长度尺寸与该移动目标在其移动方向的第一长度尺寸(实际长度尺寸)的比值,进而得到该移动图像在输出图像中的实际成像长度尺寸,对图像传感器获得的图像中的移动目标的长度尺寸进行调整,得到清晰而不会有图像畸变的输出图像。
在本申请的一些实施例中,所述确定所述至少一个待成像目标中一区域的第二尺寸参数,具体为:
确定所述至少一个待成像目标中被所述移动目标所遮挡的区域的第三尺寸参数。
具体地,由于在拍摄移动目标时,能够通过激光光束测得图像传感器距离移动目标的某一点的长度距离,进而便能够通过该与测到该长度距离同一方向的激光光束测得该图像传感器距离背景墙的长度距离,进而基于该图像传感器距离移动目标的某一点的长度距离与该由测到该长度距离同一方向的激光光束测得的该图像传感器距离背景墙的长度距离的比值相等于该移动目标在输出图像中的实际成像长度尺寸与该移动目标在图像传感器所获得的图像中所遮挡的背景墙的长度尺寸的比值,进而得到该移动图像在输出图像中的实际成像长度尺寸,对图像传感器获得的图像中的移动目标的长度尺寸进行调整,得到清晰而不会有图像畸变的输出图像。
本申请实施例还提供了一种电子设备,如图5所示,该电子设备具有摄像或拍照功能,该电子设备包括:
获得模块,其用于获得第一指令。第一指令用于操作电子设备的信号发射器的指令,可以是用户对电子设备的操作指令,也可以是在使用电子设备时在动触发的指令等。当第一指令发出后,获得模块获取该第一指令,以是使电子设备响应该第一指令。
控制模块,其用于基于所述第一指令,控制所述电子设备的信号发射器发射检测信号。信号发射器可以对电子设备的拍摄目标即待成像目标发射信号,如发射光线,或者进行其他电磁波(包括声波)的照射。此外,控制模块在控制信号发射器发射检测信号时可以瞄准该待成像目标发射,也可以先发射再对待成像目标进行瞄准,以便用户能够便于操作。
接收模块,其用于接收所述检测信号的反馈信号。发射器向待成像目标发射检测信号后,根据物理学原理,该待成像目标可以基于检测信号而生成相应的反馈信号,如对待成像目标进行激光照射,待成像目标可以基于入射激光而形成反射激光;或者对待成像目标进行其他频段的电磁波进行照射,该待成像目标可以基于该电磁波而生成反馈信号。接收模块将接收该反馈信号,如可以通过电子设备中的一个特定设备,或者驱使电子设备中已有的设备来接收该反馈信号,如驱使图像传感器接收该反馈信号。
第一获取模块,其用于至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数。该反馈信号中包含了待成像目标在被电子设备拍摄的过程中所具有的物理参数,使得电子设备可以利用该物理参数来对图像进行处理,从而提高处理效果。进一步来说,第一获取模块可以基于该反馈信号,一方面,获取一个或多个与待成像目标的空间位置相关的参数,例如该待成像目标距离电子设备中的图像传感器的距离(如果图像传感器具有多个,则该距离可以是分别具各个图像传感器的距离),或者待成像目标的尺寸数据,或者是待成像目标的相对位置数据等;另一方面,该参数还可以是针对待成像目标拍摄的成像时间参数等。
处理模块,其用于至少基于所述和空间位置相关的参数,对成像参数进行调整,得到输出图像。
第二获取模块,其用于在通过所述获得模块获得第一指令之后,使用图像传感器获取所述至少一个待成像目标的图像。
电子设备在拍摄待成像目标的过程中,是基于成像参数对其进行成像操作,该成像参数可以与图像传感器相对应,如当具有多个凸显传感器时可以分别具有各自的成像参数,而在本实施例中该成像操作可以被处理模块调整,即处理模块根据所述和空间位置相关的参数来对其进行调整,以便提高成像标准,使得输出图像的质量更高。此外,第二获取模块在获得第一指令后可以使用图像传感器获取至少一个待成像目标的图像,如电子设备具有多个图像传感器时,每个图像传感器可以分别获取各自的待成像目标的图像,然后基于各个不同的待成像目标的图像的特点将其进行合成处理,如基于各个图像传感器的成像参数来将多个待成像目标的图像进行合成处理,从而得到质量增强的输出图像。此外,对于第一获取模块和第二获取模块分别在获取至少一个待成像目标的和空间位置相关的参数,以及使用图像传感器获取所述至少一个待成像目标的图像的过程,一方面可以按照先后顺序来进行,另一方面可以同时进行,在此不作限定。
在本申请的一个实施例中,结合图4,所述图像传感器至少为两个,所述第二获取模块具体用于:
使用至少两个图像传感器中的第一图像传感器获取所述至少一个待成像目标的第一图像。两个图像传感器可以为不同类型的传感器,也可以为相同类型的传感器,如可以是一个为基于广角镜头的传感器,另一个可以为基于长焦镜头的传感器等,可以分别基于自身的特征和能力来获取待成像目标的图像,其中第二获取模块通过第一图像传感器获取待成像目标的第一图像,获取的该第一图像具有该第一图像传感器的特性,如第一图像传感器为基于广角镜头的传感器,由于广角镜头的焦距短,视角大,在较短的拍摄距离范围内,能拍摄到较大面积的景物,因此该第一图像表现了视角大的优点,虽然在较近距离拍摄,也可以表现范围宽阔的景物,前景较为突出,景深范围较大,画面纵深感强烈。
使用至少两个图像传感器中的第二图像传感器获取所述至少一个待成像目标的第二图像,其中,以使所述处理模块能够基于所述和空间位置相关的参数对所述第一图像和所述第二图像进行处理生成输出图像,所述第一图像传感器和所述第二图像传感器的成像参数不同。
第二获取模块通过第二图像传感器获取待成像目标的第二图像,由于第二图像传感器可以具有不同于第一图像传感器的特性,因此第二获取模块获取的第二图像具有与该第二图像传感器相对应的特征,如第二图像传感器为基于长焦镜头的传感器,长焦镜头的焦距长,视角小,成像大。因此第二图像能够展现远处景物的细部和展现不易接近的被摄体,在人像的透视方面出现的变形较小,拍出的人像更生动。由于第一图像传感器和第二图像传感器的成像参数不同,因此第二获取模块获得的第一图像和第二图像具有各自的图像特点,可以基于各自的图像特点来进行合成操作,本实施例中,处理模块基于所述和空间位置相关的参数对第一图像和第二图像进行合成处理,并生成输出图像。该输出图像可以兼具第一图像和第二图像的优点,如兼具长焦镜头和广角镜头拍摄的图像的优点。
在本申请的一个实施例中,结合图4,所述信号发射器为激光发射器,所述检测信号为激光光束,所述第一获取模块具体用于:至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第一闪烁点,以使所述处理模块能够基于所述第一闪烁点对所述第一图像和所述第二图像进行处理生成所述输出图像。
激光发射器向待成像目标发射激光光束,待成像目标可以反射该激光光束,从而形成反馈信号,当第一获取模块利用图像传感器接收到该反馈信号后,可以基于该反馈信号捕获到待成像目标的由于激光光束照射而形成的第一闪烁点,具体为第一获取模块利用第一图像传感器与第二图像传感器分别捕获到该第一闪烁点(即为接收到该第一闪烁点的光信号),处理模块根据该第一闪烁点,能够准确判断出待成像目标的在空间中与第一图像传感器相关的第一空间位置参数,如待成像目标与第一图像传感器的距离,或者是在空间中的相对位置关系数据(如待成像目标在空间中处于运动状态时具有的相对位置关系数据);类似的,处理模块也能够根据该第一闪烁点,准确判断出待成像目标的在空间中与第二图像传感器相关的第二空间位置参数,基于上述的第一空间位置参数与第二空间位置参数,处理模块能够对第一图像和第二图像进行分别处理,或者将第一图像和第二图像进行合成后再对合成后的图像进行处理。如通过两个图像传感器的立体定位从而能够确定物体的实际空间位置,进而能够处理得到准确的物点图,而且图像没有畸变,进而基于处理后的第一图像和第二图像再进行合成操作生成输出图像,使得该输出图像能够成为无畸变无模糊等情况的高质量图像。
作为优选,所述第一获取模块具体用于:至少基于所述反馈信号,获取所述第一闪烁点与所述电子设备的距离参数,以使所述处理模块能够基于所述距离参数,调整所述输出图像的成像参数。结合具体实施例进行说明,激光发射器向待成像目标发射激光光束,待成像目标反射该激光光束形成反馈信号,并被第一获取模块利用图像传感器获取,根据激光的物理特性,以及激光放射器发射时间和图像传感器接收到反馈信号的时间,处理模块能够计算出待成像目标与图像传感器的距离从而使得电子设备获取该距离参数,以基于所述距离参数,调整输出图像的成像参数。
在本申请的一个实施例中,所述信号发射器为激光发射器,所述检测信号为激光光束,第一获取模块具体用于:
至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第二闪烁点;
使所述处理模块能够基于所述第二闪烁点,确定所述至少一个待成像目标中移动目标的第一尺寸参数,并确定所述至少一个待成像目标中一区域的第二尺寸参数,以基于所述第一尺寸参数和所述第二尺寸参数,调整成像参数。
具体来说,当待成像目标为移动目标时,为了避免出现图像传感器判断移动目标位置不准确或者移动目标的尺寸大小不准确的问题,本实施例中可以根据拍摄的区域中的静态的物体作为参照来进一步明确该移动目标的空间位置参数以及自身的尺寸参数等。具体地,还是以所述信号发射器为激光发射器,所述检测信号为激光光束为例,则在移动目标上能够基于所述激光光束形成第二闪烁点,并且,图像传感器拍摄该移动目标对应的区域中的静态物体也能够基于所述激光光束形成第二闪烁点,其中,拍摄该移动目标对应的区域中的静态物体可以是背景墙,或者其它静态物体。基于所述第二闪烁点,可以获得移动目标的在不同时间段的第一尺寸参数,如可以为在移动目标的在其沿移动方向的第一长度尺寸(由于通过激光光束确定,该第一长度尺寸为该移动目标的实际长度尺寸),同时,还能够获得在拍摄该移动目标时对应的拍摄背景中的某一区域的第二尺寸参数,如可以是在该移动目标的移动方向上的某一区域的第二长度尺寸,具体地,还可以是获得一标识物的在该移动目标的移动方向上的长度尺寸。由于在对移动目标进行拍摄的过程中,由于拍摄目标的移动,会在成像时,使得被拍摄的移动目标被拉长,而对静态物体拍摄时,静态物体并不会发生变形,故此,可以依据图像传感器获得的图像中的移动目标对应的拍摄背景中的某一区域沿移动目标移动方向上的成像长度尺寸与移动目标对应的拍摄背景中的该区域沿移动目标移动方向上的实际长度尺寸的比值相等于输出图像中的移动目标的成像长度尺寸与该移动目标在其移动方向的第一长度尺寸(实际长度尺寸)的比值,进而得到该移动图像在输出图像中的实际成像长度尺寸,对图像传感器获得的图像中的移动目标的长度尺寸进行调整,得到清晰而不会有图像畸变的输出图像。
在本申请的一些实施例中,所述第一获取模块具体用于:
确定所述至少一个待成像目标中被所述移动目标所遮挡的区域的第三尺寸参数。
具体地,由于在拍摄移动目标时,能够通过激光光束测得图像传感器距离移动目标的某一点的长度距离,进而便能够通过该与测到该长度距离同一方向的激光光束测得该图像传感器距离背景墙的长度距离,进而基于该图像传感器距离移动目标的某一点的长度距离与该由测到该长度距离同一方向的激光光束测得的该图像传感器距离背景墙的长度距离的比值相等于该移动目标在输出图像中的实际成像长度尺寸与该移动目标在图像传感器所获得的图像中所遮挡的背景墙的长度尺寸的比值,进而得到该移动图像在输出图像中的实际成像长度尺寸,对图像传感器获得的图像中的移动目标的长度尺寸进行调整,得到清晰而不会有图像畸变的输出图像。
由于本实施例所介绍的存储介质、电子设备为本申请实施例中指令处理的方法所对应的存储介质、电子设备,故而,基于本申请实施例中指令处理方法,本领域的技术人员能够了解本申请实施例中存储介质、电子设备的具体实施方式以及其各种变化形式,所以在此对于该存储介质、电子设备不再详细介绍。只要本领域所述技术人员实施本申请实施例中指令处理方法的存储介质、电子设备,都属于本申请所欲保护的范围。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其它可编程数据处理设备的处理模块以产生一个机器,使得通过计算机或其它可编程数据处理设备的处理模块执行的指令产生用于实现在流程图的一个流程或多个流程和/或方框图的一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其它可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图的一个流程或多个流程和/或方框图的一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其它可编程数据处理设备上,使得在计算机或其它可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其它可编程设备上执行的指令提供用于实现在流程图的一个流程或多个流程和/或方框图的一个方框或多个方框中指定的功能的步骤。
以上实施例仅为本申请的示例性实施例,不用于限制本申请,本申请的保护范围由权利要求书限定。本领域技术人员可以在本申请的实质和保护范围内,对本申请做出各种修改或等同替换,这种修改或等同替换也应视为落在本申请的保护范围内。

Claims (10)

1.一种图像处理方法,包括:
获得第一指令;
基于所述第一指令,控制所述电子设备的信号发射器发射检测信号;
接收所述检测信号的反馈信号;
至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数;
至少基于所述和空间位置相关的参数,对成像参数进行调整,得到输出图像;
其中,在获得第一指令之后,所述方法还包含:
使用图像传感器获取所述至少一个待成像目标的图像。
2.根据权利要求1所述的图像处理方法,其中,所述图像传感器至少为两个,所述使用图像传感器获取所述至少一个待成像目标的图像,包括:
使用至少两个图像传感器中的第一图像传感器获取所述至少一个待成像目标的第一图像;
使用至少两个图像传感器中的第二图像传感器获取所述至少一个待成像目标的第二图像,以能够基于所述和空间位置相关的参数对所述第一图像和所述第二图像进行处理生成输出图像,其中,所述第一图像传感器和所述第二图像传感器的成像参数不同。
3.根据权利要求2所述的图像处理方法,其中,所述信号发射器为激光发射器,所述检测信号为激光光束,所述至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括:
至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第一闪烁点,以基于所述第一闪烁点使所述第一图像和所述第二图像生成所述输出图像。
4.根据权利要求3所述的图像处理方法,所述至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括:
至少基于所述反馈信号,获取所述第一闪烁点与所述电子设备的距离参数,以基于所述距离参数,调整所述输出图像的成像参数。
5.根据权利要求1所述的图像处理方法,其中,所述信号发射器为激光发射器,所述检测信号为激光光束,所述至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数,包括:
至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第二闪烁点;
基于所述第二闪烁点,确定所述至少一个待成像目标中移动目标的第一尺寸参数,并确定所述至少一个待成像目标中一区域的第二尺寸参数,以基于所述第一尺寸参数和所述第二尺寸参数,调整成像参数。
6.根据权利要求5所述的图像处理方法,其中,所述确定所述至少一个待成像目标中一区域的第二尺寸参数,具体为:
确定所述至少一个待成像目标中被所述移动目标所遮挡的区域的第三尺寸参数。
7.一种电子设备,包括:
获得模块,其用于获得第一指令;
控制模块,其用于基于所述第一指令,控制所述电子设备的信号发射器发射检测信号;
接收模块,其用于接收所述检测信号的反馈信号;
第一获取模块,其用于至少基于所述反馈信号,获取至少一个待成像目标的和空间位置相关的参数;
处理模块,其用于至少基于所述和空间位置相关的参数,对成像参数进行调整,得到输出图像;
第二获取模块,其用于在通过所述获得模块获得第一指令之后,使用图像传感器获取所述至少一个待成像目标的图像。
8.根据权利要求7所述的电子设备,其中,所述图像传感器至少为两个,所述第二获取模块具体用于:
使用至少两个图像传感器中的第一图像传感器获取所述至少一个待成像目标的第一图像;
使用至少两个图像传感器中的第二图像传感器获取所述至少一个待成像目标的第二图像,以使所述处理模块能够基于所述和空间位置相关的参数对所述第一图像和所述第二图像进行处理生成输出图像,其中,所述第一图像传感器和所述第二图像传感器的成像参数不同。
9.根据权利要求8所述的电子设备,其中,所述信号发射器为激光发射器,所述检测信号为激光光束,所述第一获取模块具体用于:
至少基于所述反馈信号,获取所述至少一个待成像目标的基于所述激光光束照射而形成的第一闪烁点,以使所述处理模块能够基于所述第一闪烁点对所述第一图像和所述第二图像进行处理生成所述输出图像。
10.根据权利要求9所述的电子设备,所述第一获取模块具体用于:
至少基于所述反馈信号,获取所述第一闪烁点与所述电子设备的距离参数,以使所述处理模块能够基于所述距离参数,调整所述输出图像的成像参数。
CN201910456111.6A 2019-05-29 2019-05-29 一种图像处理方法及电子设备 Active CN110225247B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910456111.6A CN110225247B (zh) 2019-05-29 2019-05-29 一种图像处理方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910456111.6A CN110225247B (zh) 2019-05-29 2019-05-29 一种图像处理方法及电子设备

Publications (2)

Publication Number Publication Date
CN110225247A true CN110225247A (zh) 2019-09-10
CN110225247B CN110225247B (zh) 2021-06-15

Family

ID=67818370

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910456111.6A Active CN110225247B (zh) 2019-05-29 2019-05-29 一种图像处理方法及电子设备

Country Status (1)

Country Link
CN (1) CN110225247B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111818260A (zh) * 2020-07-06 2020-10-23 浙江大华技术股份有限公司 一种自动聚焦方法和装置及电子设备
CN113116511A (zh) * 2021-04-16 2021-07-16 杭州维纳安可医疗科技有限责任公司 电信号输出方法、装置、设备、系统及存储介质

Citations (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101455574A (zh) * 2009-01-08 2009-06-17 华中科技大学 成像系统及方法
US20100045809A1 (en) * 2008-08-22 2010-02-25 Fluke Corporation Infrared and visible-light image registration
CN103002642A (zh) * 2012-11-26 2013-03-27 韦胜钊 Led路灯及其控制方法
CN103347152A (zh) * 2013-07-08 2013-10-09 华为终端有限公司 一种图像处理方法、装置及终端
CN103759716A (zh) * 2014-01-14 2014-04-30 清华大学 基于机械臂末端单目视觉的动态目标位置和姿态测量方法
CN104994283A (zh) * 2015-06-30 2015-10-21 广东欧珀移动通信有限公司 一种局部畸变的校正方法及移动终端
CN105955466A (zh) * 2016-04-26 2016-09-21 四川川大智胜软件股份有限公司 一种人体动作的检测和识别方法
CN107533761A (zh) * 2015-04-27 2018-01-02 索尼半导体解决方案公司 图像处理装置和图像处理系统
CN108093159A (zh) * 2017-12-19 2018-05-29 信利光电股份有限公司 一种多摄像头的拍摄方法、拍摄装置、移动终端和可读存储介质
CN108141539A (zh) * 2015-11-24 2018-06-08 三星电子株式会社 数字拍摄装置及其操作方法
CN108156397A (zh) * 2018-02-08 2018-06-12 浙江大华技术股份有限公司 一种处理监控画面的方法与设备
CN108447022A (zh) * 2018-03-20 2018-08-24 北京天睿空间科技股份有限公司 基于单个固定摄像头图像序列的运动目标拼接方法
CN108600712A (zh) * 2018-07-19 2018-09-28 维沃移动通信有限公司 一种图像传感器、移动终端及图像拍摄方法
CN108833795A (zh) * 2018-08-29 2018-11-16 北京七鑫易维信息技术有限公司 一种图像获取设备的对焦方法及装置
CN109141273A (zh) * 2018-10-30 2019-01-04 北京理工大学 一种基于dmd的高速运动目标形变测量系统及方法
CN109194849A (zh) * 2013-06-13 2019-01-11 核心光电有限公司 双孔径变焦数字摄影机
CN109274939A (zh) * 2018-09-29 2019-01-25 成都臻识科技发展有限公司 一种基于三摄像头模组的停车场出入口监控方法及系统
CN109360177A (zh) * 2018-10-17 2019-02-19 成都森川科技股份有限公司 快速移动物体热成像图像与光学图像的快速小波融合方法
CN109379522A (zh) * 2018-12-06 2019-02-22 Oppo广东移动通信有限公司 成像方法、成像装置、电子装置及介质
CN208653401U (zh) * 2018-09-05 2019-03-26 天目爱视(北京)科技有限公司 自适应图像采集设备、3d信息比对装置、配套物生成装置
US20190098206A1 (en) * 2017-09-25 2019-03-28 Hanwha Techwin Co., Ltd. Image obtaining apparatus, image processing apparatus, and user terminal

Patent Citations (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100045809A1 (en) * 2008-08-22 2010-02-25 Fluke Corporation Infrared and visible-light image registration
CN101455574A (zh) * 2009-01-08 2009-06-17 华中科技大学 成像系统及方法
CN103002642A (zh) * 2012-11-26 2013-03-27 韦胜钊 Led路灯及其控制方法
CN109194849A (zh) * 2013-06-13 2019-01-11 核心光电有限公司 双孔径变焦数字摄影机
CN103347152A (zh) * 2013-07-08 2013-10-09 华为终端有限公司 一种图像处理方法、装置及终端
CN103759716A (zh) * 2014-01-14 2014-04-30 清华大学 基于机械臂末端单目视觉的动态目标位置和姿态测量方法
CN107533761A (zh) * 2015-04-27 2018-01-02 索尼半导体解决方案公司 图像处理装置和图像处理系统
CN104994283A (zh) * 2015-06-30 2015-10-21 广东欧珀移动通信有限公司 一种局部畸变的校正方法及移动终端
CN108141539A (zh) * 2015-11-24 2018-06-08 三星电子株式会社 数字拍摄装置及其操作方法
CN105955466A (zh) * 2016-04-26 2016-09-21 四川川大智胜软件股份有限公司 一种人体动作的检测和识别方法
US20190098206A1 (en) * 2017-09-25 2019-03-28 Hanwha Techwin Co., Ltd. Image obtaining apparatus, image processing apparatus, and user terminal
CN108093159A (zh) * 2017-12-19 2018-05-29 信利光电股份有限公司 一种多摄像头的拍摄方法、拍摄装置、移动终端和可读存储介质
CN108156397A (zh) * 2018-02-08 2018-06-12 浙江大华技术股份有限公司 一种处理监控画面的方法与设备
CN108447022A (zh) * 2018-03-20 2018-08-24 北京天睿空间科技股份有限公司 基于单个固定摄像头图像序列的运动目标拼接方法
CN108600712A (zh) * 2018-07-19 2018-09-28 维沃移动通信有限公司 一种图像传感器、移动终端及图像拍摄方法
CN108833795A (zh) * 2018-08-29 2018-11-16 北京七鑫易维信息技术有限公司 一种图像获取设备的对焦方法及装置
CN208653401U (zh) * 2018-09-05 2019-03-26 天目爱视(北京)科技有限公司 自适应图像采集设备、3d信息比对装置、配套物生成装置
CN109274939A (zh) * 2018-09-29 2019-01-25 成都臻识科技发展有限公司 一种基于三摄像头模组的停车场出入口监控方法及系统
CN109360177A (zh) * 2018-10-17 2019-02-19 成都森川科技股份有限公司 快速移动物体热成像图像与光学图像的快速小波融合方法
CN109141273A (zh) * 2018-10-30 2019-01-04 北京理工大学 一种基于dmd的高速运动目标形变测量系统及方法
CN109379522A (zh) * 2018-12-06 2019-02-22 Oppo广东移动通信有限公司 成像方法、成像装置、电子装置及介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111818260A (zh) * 2020-07-06 2020-10-23 浙江大华技术股份有限公司 一种自动聚焦方法和装置及电子设备
CN113116511A (zh) * 2021-04-16 2021-07-16 杭州维纳安可医疗科技有限责任公司 电信号输出方法、装置、设备、系统及存储介质
CN113116511B (zh) * 2021-04-16 2023-04-07 杭州维纳安可医疗科技有限责任公司 电信号输出方法、装置、设备、系统及存储介质

Also Published As

Publication number Publication date
CN110225247B (zh) 2021-06-15

Similar Documents

Publication Publication Date Title
CN105388478B (zh) 用于检测声学和光学信息的方法和装置、以及对应的计算机可读存储介质
US9137511B1 (en) 3D modeling with depth camera and surface normals
US9470511B2 (en) Point-to-point measurements using a handheld device
US9516241B2 (en) Beamforming method and apparatus for sound signal
CN106778713B (zh) 一种动态人眼跟踪的虹膜识别装置及方法
US8922817B2 (en) Mobile Printing device
US11785335B2 (en) Automatic adjusting photographing method and apparatus
CN110225247A (zh) 一种图像处理方法及电子设备
CN111031918A (zh) X射线成像设备及其控制方法
JP2016099140A (ja) 水底観測システム
JP2017003593A (ja) 浅水域観測システム
CN105549299B (zh) 控制方法、控制装置及电子装置
CN109803079A (zh) 一种移动终端及其拍照方法、计算机存储介质
JP6152772B2 (ja) 撮像装置、半導体集積回路および撮像方法
CN104244834B (zh) 用于x射线定位的用户接口
CN110462438A (zh) 结构光投射装置、结构光投射方法及三维测量系统
CN106605167A (zh) 致动器铃音特性测量方法
JP6614905B2 (ja) 三次元計測装置およびその制御方法
US20240244330A1 (en) Systems and methods for capturing and generating panoramic three-dimensional models and images
JP2000222585A (ja) 動き検出方法および動き検出装置および動き認識方法および動き認識装置および記録媒体
US20190230340A1 (en) Three-dimensional image capturing device and method
CN107835361B (zh) 基于结构光的成像方法、装置和移动终端
CN110347007B (zh) 一种投影灯中激光器的校准方法和装置
KR20100055974A (ko) 거리측정 센서를 포함하는 엑스레이 장치
JP2014095631A (ja) 3次元計測装置および3次元計測方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant