CN112313944A - 图像处理方法、装置、设备及存储介质 - Google Patents
图像处理方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN112313944A CN112313944A CN201980040204.9A CN201980040204A CN112313944A CN 112313944 A CN112313944 A CN 112313944A CN 201980040204 A CN201980040204 A CN 201980040204A CN 112313944 A CN112313944 A CN 112313944A
- Authority
- CN
- China
- Prior art keywords
- image
- image data
- local
- global
- key area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
- H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
Abstract
一种图像处理方法、图像传感器、图像处理装置、图像处理设备及计算机可读存储介质，该方法包括：确定图像传感器中的关键区域信息；根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据；其中，所述第一采样率高于所述第二采样率，在实现保障图像质量的同时，降低图像处理的功耗。
Description
技术领域
本申请涉及图像处理技术领域，尤其涉及一种图像处理方法、装置、设备及存储介质。
背景技术
图像传感器近年发展迅速，被广泛应用于摄影机、照相机、以及各种带有相机功能的手机、无人机等。目前，图像传感器在进行图像数据读取时，一种是采取全像素快速读出方式，通过这种方式获得的图像清晰，但同时也存在数据传输和处理压力大、功耗大的问题；另一种是采取下采样的读出方式，或者丢弃部分像素的读出方式，通过此方式降低了数据传输和处理压力，降低了图像处理的功耗，但是由于读取的原始数据不足，获得的图像不够清晰，图像质量难以满足要求。
因此，如何兼顾图像处理的功耗和图像质量成为亟需解决的问题。
发明内容
基于此，本申请提供了一种图像处理方法、装置、设备及存储介质，以实现兼顾图像处理的功耗和图像质量。
第一方面，本申请提供了一种图像处理方法，所述方法包括：
确定图像传感器中的关键区域信息；
根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据；
其中，所述第一采样率高于所述第二采样率。
第二方面，本申请还提供了一种图像处理方法，所述方法包括：
获取局部图像数据和全局图像数据，其中，所述局部图像数据的采样率高于所述全局图像数据的采样率；
根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像；
将所述局部图像和所述全局图像进行图像处理，生成目标图像。
第三方面，本申请还提供了一种图像传感器，所述图像传感器包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
确定图像传感器中的关键区域信息；
根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据；
其中，所述第一采样率高于所述第二采样率。
第四方面，本申请还提供了一种图像处理装置，所述图像处理装置包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
获取局部图像数据和全局图像数据，其中，所述局部图像数据的采样率高于所述全局图像数据的采样率；
根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像；
将所述局部图像和所述全局图像进行图像处理，生成目标图像。
第五方面，本申请还提供了一种图像处理设备，包括图像传感器与图像处理装置，其中，
所述图像传感器用于确定图像传感器中的关键区域信息；
所述图像传感器用于根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据，所述第一采样率高于所述第二采样率；
所述图像传感器用于将所述全局图像数据和所述局部图像数据发送至所述图像处理装置；
所述图像处理装置用于接收所述局部图像数据和所述全局图像数据；
所述图像处理装置用于根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像；
所述图像处理装置用于将所述局部图像和所述全局图像进行图像处理，生成目标图像。
第六方面，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器实现如上述的图像处理方法。
本申请公开的图像处理方法、图像传感器、图像处理装置、图像处理设备及计算机可读存储介质，通过确定图像传感器中的关键区域信息，根据该关键区域信息，以第一采样率输出图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出图像传感器的全局图像数据，其中，第一采样率高于第二采样率，也即局部图像数据以高采样率输出，从而实现关键区域清晰的图像，确保了图像质量，同时，全局图像数据以低采样率输出，解决了数据传输和处理压力大的问题，降低了图像处理的功耗。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是现有技术中一种图像处理方法的示意图；
图2是现有技术中另一种图像处理方法的示意图；
图3是本申请实施例提供的一种图像处理设备的示意性框图；
图4是本申请的实施例提供的一种图像处理方法的步骤示意流程图；
图5是本申请的实施例提供的另一种图像处理方法的步骤示意流程图；
图6是本申请的实施例提供的图像传感器的示意性框图；
图7是本申请的实施例提供的图像处理装置的示意性框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。
应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
现有技术中，为了实现图像的高分辨率，一种图像处理方法是增加像素，例如，如图1所示，将原来的低分辨率图像进行增加像素处理，从而获得处理后的高分辨率图像。这种图像处理方式，虽然得到了效果好的高分辨率图像，但是对图像传感器有高要求，一般图像传感器的处理速度难以达到要求。另一种图像处理方法是数码放大，例如，如图2所示，将原来的低分辨率图像进行数码放大处理，从而获得处理后的高分辨率图像。这种图像处理方式，虽然对图像传感器要求没有那么高，但是得到的图像质量不佳，不够清晰。
为了解决上述问题，本申请的实施例提供了一种图像处理方法、图像传感器、图像处理装置、图像处理设备及计算机可读存储介质，用于实现兼顾图像处理的功耗和图像质量。
请参阅图3，图3为本申请实施例提供的一种图像处理设备的示意性框图。如图3所示，图像处理设备100可以包括图像传感器110和图像处理装置120，图像传感器110和图像处理装置120通信连接。
图像传感器110可以应用于摄影机、照相机、以及各种带有相机功能的手机、无人机等，需要说明的是，本申请实施例不限于此。
图像处理装置120可以包括图像处理器，同样，图像处理装置120可以应用于摄影机、照相机、以及各种带有相机功能的手机、无人机等。
图像传感器110通过确定图像传感器中的关键区域信息，并根据该关键区域信息，以第一采样率输出图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出图像传感器的全局图像数据，其中，第一采样率高于第二采样率，也即以高的采样率输出局部图像数据，以低的采样率输出全局图像数据，将全局图像数据和全局图像数据发送至图像处理装置120。第一采样率和第二次采样率可根据实际情况，如对图像的质量要求、网络带宽等各个情况进行灵活设置，在此不作具体限制。
图像处理装置120获取图像传感器110发送的局部图像数据和全局图像数据，并根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像，然后将所述局部图像和所述全局图像进行图像处理，生成目标图像。
示例性的，图像处理装置120确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息，将该关键区域信息发送至图像传感器110，图像传感器110接收图像处理装置120发送的所述关键区域信息。其中，所述关键区域信息包括关键区域像素点的坐标信息。
示例性的，图像处理装置120确定待处理图像的关键区域，包括：
对所述待处理图像进行图像识别处理，获取目标对象；
根据所述目标对象，确定所述关键区域。
示例性的，通常待处理图像中可能会包含多个对象，比如人物、建筑物、宠物等，图像处理装置120对所述待处理图像进行图像识别处理，获取目标对象，包括：
对所述待处理图像进行图像识别处理，获取所述待处理图像中包含的至少一个对象；
从所述至少一个对象中确定所述目标对象。
示例性的，预先将各个对象设置对应的优先级，图像处理装置120从所述至少一个对象中确定所述目标对象，包括：
根据预设的各个对象的优先级，将所述至少一个对象中优先级最高的对象，确定为所述目标对象。
示例性的，在一实施方式中，图像处理装置120根据所述目标对象，确定所述关键区域，包括：
将所述目标对象在所述待处理图像中位于的第一区域、以及所述第一区域的邻近区域，确定为所述关键区域。
示例性的，在另一实施方式中，图像处理装置120根据所述目标对象，确定所述关键区域，包括：
根据所述目标对象在所述待处理图像中位于的第一区域，以及所述目标对象的运动信息，预计所述目标对象将移至的第二区域，将所述第二区域确定为所述关键区域。
示例性的，图像传感器110采用全像素输出方式输出局部图像数据。
示例性的，图像传感器110采用至少两倍下采样方式，输出全局图像数据。
示例性的，图像传感器110配置有多条不用的物理链路，将全局图像数据和局部图像数据分别基于不同的物理链路发送至图像处理装置120。
示例性的，图像传感器110将全局图像数据和局部图像数据基于相同的物理链路异步发送至图像处理装置120。
示例性的，配置全局图像数据对应的第一标签，以及配置局部图像数据对应的第二标签，第一标签与第二标签不相同，分别用于对全局图像数据和局部图像数据进行标识。图像传感器110将携带有第一标签的全局图像数据，和携带有第二标签的局部图像数据发送至图像处理装置120。
示例性的，在进行图像处理时，图像处理装置120将所述全局图像进行图像放大处理，生成放大图像；并将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像。
示例性的，所述将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像，包括：
确定所述放大图像中的关键区域；
在所述关键区域内融合所述局部图像，生成所述目标图像。
示例性的，一种直接实施方式是，图像处理装置120将所述放大图像中关键区域内的图像替换为所述局部图像，生成所述目标图像。
示例性的，另一种实施方式是，图像处理装置120将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像。
示例性的，预设权重与像素点位置的映射关系，比如，预设距离所述局部图像的中心位置越近的像素点，对应的权重越大。所述将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像，包括：
按照预设的权重与像素点位置的映射关系，确定所述局部图像中每一个像素点对应的权重；
根据所述局部图像中每一个像素点对应的权重，将所述局部图像中每一像素点与所述关键区域内的图像中对应位置的像素点进行加权计算，生成所述目标图像。
可以理解的，上述对于图像处理设备各部件的命名仅仅出于标识的目的，并不因此对本申请实施例进行限制。
以下将基于图像处理设备、所述图像处理设备中的图像传感器和所述图像处理设备中的图像处理装置对本申请的实施例提供的图像处理方法进行详细介绍。需知，图3中的图像处理设备并不构成对该图像处理方法的应用场景的限定。
请参阅图4，图4是本申请的实施例提供的一种图像处理方法的示意流程图。该方法可以用于上述实施例提供的任意一种图像传感器中，以实现兼顾图像处理的功耗和图像质量的效果。
如图4所示，该图像处理方法具体包括步骤S101至步骤S102。
S101、确定图像传感器中的关键区域信息。
本实施例中，图像传感器在输出图像数据时，不仅仅是输出图像传感器中的全范围的图像数据，而是先确定图像传感器中的关键区域信息。其中，关键区域信息包括但不限于关键区域像素点的坐标信息。
示例性的，所述确定图像传感器中的关键区域信息，包括：
接收图像处理装置发送的所述关键区域信息，所述图像处理装置确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息。
在一些实施方式中，图像传感器与图像处理装置，比如图像处理器通信连接，在对待处理图像进行图像处理时，图像处理装置确定该待处理图像的关键区域。例如，若待处理图像是人物图像，图像处理装置确定待处理图像中人物所占区域为该待处理图像的关键区域。并且，图像处理装置获取所确定的关键区域对应的关键区域信息，比如，获取关键区域像素点的坐标信息。之后，图像处理装置将获取的关键区域信息发送至关图像传感器，图像传感器接收图像处理装置发送的该关键区域信息。
S102、根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据；
其中，所述第一采样率高于所述第二采样率。
图像传感器在进行图像数据处理时，输出两路不同的图像数据，其中，一路图像数据为图像传感器中关键区域对应的局部图像数据，另外一路图像数据为图像传感器的全局图像数据。具体地，图像传感器根据所确定的关键区域信息，以相应较高的采样率输出图像传感器中关键区域对应的局部图像数据，并且，以不同的采样率输出图像传感器的全局图像数据。为了便于描述，下文将局部图像数据对应的采样率称为第一采样率，将全局图像数据对应的采样率称为第二采样率，其中，第一采样率高于第二采样率。
示例性的，所述以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，包括：
采用全像素输出方式输出所述局部图像数据。
为了获得关键区域清晰的图像，一种实施方式中，图像传感器采用全像素输出方式，输出关键区域对应的局部图像数据。需要说明的是，在其他实施方式中，图像传感器也可以采用跳点的输出方式，输出关键区域对应的局部图像数据。
示例性的，所述以第二采样率输出所述图像传感器的全局图像数据，包括：
采用至少两倍下采样方式，输出所述全局图像数据。
由于通常情况下，用户对关键区域以外的图像的清晰度要求没那么高，因此，在一实施方式中，图像传感器采用下采样输出方式输出全局图像数据，可选地，采用至少两倍下采样方式，输出全局图像数据，也即输出全局图像数据时，至少跳一个像素点输出下一个像素点。需要说明的是，可根据实际情况，灵活设置下采样倍数，本实施例并不做限制。相比于全像素输出方式，降低了数据传输和处理压力。
示例性的，所述以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据之后，还包括：
将所述全局图像数据和所述局部图像数据发送至图像处理装置，以供所述图像处理装置根据所述全局图像数据和所述局部图像数据，生成目标图像。
图像传感器将输出的全局图像数据和局部图像数据发送至与其通信连接的图像处理装置。需要说明的是，图像传感器可通过不同方式将全局图像数据和局部图像数据发送至图像处理装置。
示例性的，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将所述全局图像数据和所述局部图像数据分别基于不同的物理链路发送至所述图像处理装置。
为了图像处理装置能将全局图像数据和局部图像数据区分开来，在一种实施方式中，图像传感器将全局图像数据和局部图像数据分别基于不同的物理链路发送至图像处理装置，也即图像处理装置分别通过不同的物理链路接收全局图像数据和局部图像数据。
示例性的，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将所述全局图像数据和所述局部图像数据基于相同的物理链路异步发送至所述图像处理装置。
同样地，为了图像处理装置能将全局图像数据和局部图像数据区分开来，在另一种实施方式中，图像传感器将全局图像数据和局部图像数据基于相同的物理链路异步发送至图像处理装置。当然，图像传感器也可以将全局图像数据和局部图像数据基于不同的物理链路异步发送至图像处理装置。
示例性的，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置之前，还包括：
配置所述全局图像数据对应的第一标签，以及所述局部图像数据对应的第二标签；
所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将携带所述第一标签的所述全局图像数据，和携带所述第二标签的所述局部图像数据发送至所述图像处理装置。
除了上述列举的两种发送全局图像数据和局部图像数据至图像处理装置的方式以外，为了图像处理装置能将全局图像数据和局部图像数据区分开来，在另外一种实施方式中，先分别配置全局图像数据和局部图像数据对应的标签。为了便于描述，下文将全局图像数据对应的标签称为第一标签，将局部图像数据对应的标签称为第二标签。
图像传感器将携带第一标签的全局图像数据，和携带第二标签的局部图像数据发送至图像处理装置。当图像处理装置接收到携带有第一标签的全局图像数据和携带有第二标签的局部图像数据时，根据标签即可识别出全局图像数据和局部图像数据。
当图像处理装置接收到该全局图像数据和局部图像数据之后，图像处理装置根据接收到的全局图像数据和局部图像数据，生成全范围低分辨率的全局图像和关键区域高分辨率的局部图像，然后对全局图像和局部图像进行图像融合处理，生成对应的目标图像。生成的目标图像为全范围高分辨率且关键区域更清晰的图像。
上述实施例通过图像传感器以第一采样率输出图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出图像传感器的全局图像数据，其中，第一采样率高于第二采样率，也即局部图像数据以高采样率输出，从而实现关键区域清晰的图像，确保了图像质量，同时，全局图像数据以低采样率输出，解决了数据传输和处理压力大的问题，降低了图像处理的功耗。
请参阅图5，图5是本申请的实施例提供的另一种图像处理方法的示意流程图。该方法可以用于上述实施例提供的任意一种图像处理装置中，以实现兼顾图像处理的功耗和图像质量的效果。
如图5所示，该图像处理方法具体包括步骤S201至步骤S203。
S201、获取局部图像数据和全局图像数据，其中，所述局部图像数据的采样率高于所述全局图像数据的采样率。
本实施例中，图像处理装置包括但不限于图像处理器，图像处理装置与图像传感器通信连接。在进行图像处理时，图像处理装置不仅仅只获取全范围的一路图像数据，而是获取局部图像数据和全局图像数据两路图像数据。其中，局部图像数据是图像传感器中关键区域对应的图像数据，全局图像数据是图像传感器中的全范围的图像数据，局部图像数据的采样率高于全局图像数据的采样率。
示例性的，所述图像处理方法还包括：
确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息；
将所述关键区域信息发送至图像传感器，以供所述图像传感器根据所述关键区域信息以第一采样率输出所述局部图像数据，以及以第二采样率输出所述全局图像数据；
所述获取局部图像数据和全局图像数据，包括：
接收所述图像传感器发送的所述局部图像数据和所述全局图像数据。
对于照片，或者视频帧图像等，在进行图像处理时，图像处理装置确定待处理图像的关键区域。例如，若待处理图像是人物图像，图像处理装置根据待处理图像中人物所位于的区域，确定该待处理图像的关键区域。
示例性的，所述确定待处理图像的关键区域，包括：
对所述待处理图像进行图像识别处理，获取目标对象；
根据所述目标对象，确定所述关键区域。
图像处理装置在确定待处理图像的关键区域时，在一实施方式中，图像处理装置对待处理图像进行图像识别处理，获得需要清晰显示的目标对象，比如，人物、花朵、宠物等。根据所确定的目标对象，将目标对象所占区域确定为关键区域。
示例性的，由于在实际应用当中，一幅图像当中可能包含多个对象，在不同应用场景下，用户需要进行清晰显示的对象也会有所不同。所述对所述待处理图像进行图像识别处理，获取目标对象，包括：
对所述待处理图像进行图像识别处理，获取所述待处理图像中包含的至少一个对象；
从所述至少一个对象中确定所述目标对象。
图像处理装置对待处理图像进行图像识别处理，获取待处理图像中包含的一个或多个对象，在这一个或多个对象中，从中确定出用户需要清晰显示的目标对象。
示例性的，所述从所述至少一个对象中确定所述目标对象，包括：
根据预设的各个对象的优先级，将所述至少一个对象中优先级最高的对象，确定为所述目标对象。
在一实施方式中，根据不同的应用场景，预先设置各个对象的优先级，将用户最需进行清晰显示的对象的优先级设置最高。该优先级设置可预先设置完成，也可以由用户进行自定义设置，具体方式在此不做限制。
当图像处理装置获取待处理图像中包含一个对象时，直接将该对象确定为目标对象。当图像处理装置获取待处理图像中包含多个对象时，根据预设的各个对象的优先级，将其中优先级最高的对象，确定为目标对象。
示例性的，所述根据所述目标对象，确定所述关键区域，包括：
将所述目标对象在所述待处理图像中位于的第一区域、以及所述第一区域的邻近区域，确定为所述关键区域。
在确定了目标对象后，一种直接方式是将目标对象在待处理图像中位于的区域确定为关键区域。由于在实际应用当中，很多时候目标对象不会一直静止不动，很可能出现移动的情况，为了确保关键区域的精准性，在一实施方式中，将目标对象在待处理图像中位于的第一区域、以及第一区域的邻近区域，确定为关键区域，也即将目标对象的周边区域也确定为关键区域的范围。
示例性的，所述根据所述目标对象，确定所述关键区域，包括：
根据所述目标对象在所述待处理图像中位于的第一区域，以及所述目标对象的运动信息，预计所述目标对象将移至的第二区域，将所述第二区域确定为所述关键区域。
在另一实施方式中，针对于运动的目标对象，获取目标对象的运动信息，其中，运动信息包括但不限于运动速度、运动方向等等。图像处理装置根据目标对象的运动信息，以及目标对象当前位于的第一区域，预计目标对象将移至的第二区域，将第二区域确定为关键区域。
需要说明的是，确定关键区域的方式并不限于上述列举的几种，还可以包括其他方式，在此不做限制。
图像处理装置确定了关键区域，获取所确定的关键区域对应的关键区域信息，比如，获取关键区域像素点的坐标信息。之后，图像处理装置将获取的关键区域信息发送至关图像传感器，图像传感器接收图像处理装置发送的该关键区域信息。图像传感器根据该关键区域信息，以相应较高的第一采样率输出图像传感器中关键区域对应的局部图像数据，并且，以低于第一采样率的第二采样率输出图像传感器的全局图像数据，将局部图像数据和全局图像数据发送至图像处理装置。图像处理装置接收图像传感器发送的局部图像数据和全局图像数据。
S202、根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像。
获得局部图像数据和全局图像数据后，图像处理装置分别根据局部图像数据，生成相应局部图像；以及根据全局图像数据，生成相应全局图像。其中，全局图像为全范围的低分辨率图像，局部图像为关键区域的高分辨率图像。
S203、将所述局部图像和所述全局图像进行图像处理，生成目标图像。
在生成局部图像和全局图像后，对局部图像和全局图像进行图像处理，生成对应的目标图像，生成的目标图像为一幅关键区域清晰，且全范围高分辨率的图像。在一实施方式中，图像处理装置将全局图像进行图像放大处理，生成全局图像对应的放大图像，通过将全局图像进行图像放大处理，生成的放大图像比全局图像的分辨率更高。然后将生成的放大图像与局部图像进行图像融合处理，生成目标图像。
示例性的，将放大图像与局部图像进行图像融合处理时，确定放大图像中的关键区域，关键区域为局部图像对应于放大图像中的映射位置。例如，根据关键区域信息，确定放大图像中的关键区域。之后，在放大图像的关键区域内融合局部图像，生成目标图像。
示例性的，所述在所述关键区域内融合所述局部图像，生成所述目标图像，包括：
将所述放大图像中关键区域内的图像替换为所述局部图像，生成所述目标图像。
在一种实施方式中，是直接将放大图像中关键区域内的图像替换为局部图像，来生成目标图像，操作简单快捷，十分高效。
示例性的，所述在所述关键区域内融合所述局部图像，生成所述目标图像，包括：
将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像。
在另一种实施方式中，由于放大图像与局部图像的分辨率不同，为了增强图像融合效果，进而进一步提高生成的目标图像的质量，将放大图像中关键区域内的图像与局部图像按照相应权重进行融合，生来成目标图像，从而使得局部图像融合于放大图像的边界过渡自然。
示例性的，预先设置局部图像的像素点位置与对应权重的映射关系，局部图像中不同位置的像素点，其对应的权重不同。例如，设置距离局部图像的中心位置越近的像素点，对应的权重越大。所述将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像，包括：
按照预设的权重与像素点位置的映射关系，确定所述局部图像中每一个像素点对应的权重；
根据所述局部图像中每一个像素点对应的权重，将所述局部图像中每一像素点与所述关键区域内的图像中对应位置的像素点进行加权计算，生成所述目标图像。
在进行图像融合时，首先按照预设的权重与像素点位置的映射关系，确定局部图像中每一个像素点对应的权重，例如权重用α表示。基于局部图像中每一个像素点对应的权重α，将局部图像中每一像素点与关键区域内的图像中对应位置的像素点进行加权计算，来生成目标图像。例如，在一实施方式中，采用计算公式C＝(1-α)A+αB来进行加权计算，其中，α代表局部图像中某一位置的像素点对应的权重，A代表放大图像中对应位置的像素点的像素，B代表局部图像中该位置的像素点的像素，C代表融合后目标图像中该对应位置的像素点的像素。
对于局部图像中的每一个像素点，由于越靠近局部图像的中心位置的像素点，对应的权重越大，越远离局部图像的中心位置的像素点，对应的权重越小，局部图像与放大图像融合生成的目标图像，就不会出现是两幅图像硬生拼贴的观感。
需要说明的是，局部图像与放大图像的融合并不限于上述列举的方式，还可以包括其他方式，在此不做限制。
上述实施例通过图像处理装置获取局部图像数据和全局图像数据，其中，局部图像数据的采样率高于全局图像数据的采样率，根据局部图像数据和全局图像数据，生成对应的局部图像和全局图像，将局部图像和全局图像进行图像处理，生成目标图像，由于局部图像数据对应高采样率，确保了目标图像的图像质量，同时，全局图像数据对应低采样率，又降低了数据传输和处理压力，图像处理的功耗下降。
请参阅图6，图6是本申请一实施例提供的图像传感器的示意性框图。该图像传感器600包括处理器610和存储器611。
具体地，处理器610可以是微控制单元(Micro-controller Unit，MCU)、中央处理单元(Central Processing Unit，CPU)或数字信号处理器(Digital Signal Processor，DSP)等。
具体地，存储器611可以是Flash芯片、只读存储器(ROM，Read-Only Memory)磁盘、光盘、U盘或移动硬盘等。
其中，所述处理器用于运行存储在存储器中的计算机程序，并在执行所述计算机程序时实现如下步骤：
确定图像传感器中的关键区域信息；
根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据；
其中，所述第一采样率高于所述第二采样率。
在一些实施例中，所述处理器在实现所述以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据之后，还实现：
将所述全局图像数据和所述局部图像数据发送至图像处理装置，以供所述图像处理装置根据所述全局图像数据和所述局部图像数据，生成目标图像。
在一些实施例中，所述处理器在实现所述将所述全局图像数据和所述局部图像数据发送至图像处理装置时，具体实现：
将所述全局图像数据和所述局部图像数据分别基于不同的物理链路发送至所述图像处理装置。
在一些实施例中，所述处理器在实现所述将所述全局图像数据和所述局部图像数据发送至图像处理装置时，具体实现：
将所述全局图像数据和所述局部图像数据基于相同的物理链路异步发送至所述图像处理装置。
在一些实施例中，所述处理器在实现所述将所述全局图像数据和所述局部图像数据发送至图像处理装置之前，还实现：
配置所述全局图像数据对应的第一标签，以及所述局部图像数据对应的第二标签；
所述处理器在实现所述将所述全局图像数据和所述局部图像数据发送至图像处理装置时，具体实现：
将携带所述第一标签的所述全局图像数据，和携带所述第二标签的所述局部图像数据发送至所述图像处理装置。
在一些实施例中，所述处理器在实现所述确定图像传感器中的关键区域信息时，具体实现：
接收图像处理装置发送的所述关键区域信息，所述图像处理装置确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息。
在一些实施例中，所述关键区域信息包括关键区域像素点的坐标信息。
在一些实施例中，所述处理器在实现所述以第一采样率输出所述图像传感器中关键区域对应的局部图像数据时，具体实现：
采用全像素输出方式输出所述局部图像数据。
在一些实施例中，所述处理器在实现所述以第二采样率输出所述图像传感器的全局图像数据时，具体实现：
采用至少两倍下采样方式，输出所述全局图像数据。
请参阅图7，图7是本申请一实施例提供的图像处理装置的示意性框图。该图像处理装置700包括处理器710和存储器711，处理器710和存储器711通过总线连接，该总线比如为I2C(Inter-integrated Circuit)总线。
具体地，处理器710可以是微控制单元(Micro-controller Unit，MCU)、中央处理单元(Central Processing Unit，CPU)或数字信号处理器(Digital Signal Processor，DSP)等。
具体地，存储器711可以是Flash芯片、只读存储器(ROM，Read-Only Memory)磁盘、光盘、U盘或移动硬盘等。
其中，所述处理器用于运行存储在存储器中的计算机程序，并在执行所述计算机程序时实现如下步骤：
获取局部图像数据和全局图像数据，其中，所述局部图像数据的采样率高于所述全局图像数据的采样率；
根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像；
将所述局部图像和所述全局图像进行图像处理，生成目标图像。
在一些实施例中，所述处理器在实现所述将所述局部图像和所述全局图像进行图像处理，生成目标图像时，具体实现：
将所述全局图像进行图像放大处理，生成放大图像；
将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像。
在一些实施例中，所述处理器在实现所述将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像时，具体实现：
确定所述放大图像中的关键区域；
在所述关键区域内融合所述局部图像，生成所述目标图像。
在一些实施例中，所述处理器在实现所述在所述关键区域内融合所述局部图像，生成所述目标图像时，具体实现：
将所述放大图像中关键区域内的图像替换为所述局部图像，生成所述目标图像。
在一些实施例中，所述处理器在实现所述在所述关键区域内融合所述局部图像，生成所述目标图像时，具体实现：
将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像。
在一些实施例中，所述处理器在实现所述将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像时，具体实现包括：
按照预设的权重与像素点位置的映射关系，确定所述局部图像中每一个像素点对应的权重；
根据所述局部图像中每一个像素点对应的权重，将所述局部图像中每一像素点与所述关键区域内的图像中对应位置的像素点进行加权计算，生成所述目标图像。
在一些实施例中，距离所述局部图像的中心位置越近的像素点，对应的权重越大。
在一些实施例中，所述处理器在执行所述计算机程序时，还实现：
确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息；
将所述关键区域信息发送至图像传感器，以供所述图像传感器根据所述关键区域信息以第一采样率输出所述局部图像数据，以及以第二采样率输出所述全局图像数据；
所述处理器在实现所述获取局部图像数据和全局图像数据时，具体实现：
接收所述图像传感器发送的所述局部图像数据和所述全局图像数据。
在一些实施例中，所述处理器在实现所述确定待处理图像的关键区域时，具体实现：
对所述待处理图像进行图像识别处理，获取目标对象；
根据所述目标对象，确定所述关键区域。
在一些实施例中，所述处理器在实现所述对所述待处理图像进行图像识别处理，获取目标对象时，具体实现：
对所述待处理图像进行图像识别处理，获取所述待处理图像中包含的至少一个对象；
从所述至少一个对象中确定所述目标对象。
在一些实施例中，所述处理器在实现所述从所述至少一个对象中确定所述目标对象时，具体实现：
根据预设的各个对象的优先级，将所述至少一个对象中优先级最高的对象，确定为所述目标对象。
在一些实施例中，所述处理器在实现所述根据所述目标对象，确定所述关键区域时，具体实现：
将所述目标对象在所述待处理图像中位于的第一区域、以及所述第一区域的邻近区域，确定为所述关键区域。
在一些实施例中，所述处理器在实现所述根据所述目标对象，确定所述关键区域时，具体实现：
根据所述目标对象在所述待处理图像中位于的第一区域，以及所述目标对象的运动信息，预计所述目标对象将移至的第二区域，将所述第二区域确定为所述关键区域。
本申请的实施例中还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序中包括程序指令，所述处理器执行所述程序指令，实现本申请实施例提供的图像处理方法的步骤。
其中，所述计算机可读存储介质可以是前述实施例所述的图像传感器或图像处理装置的内部存储单元，例如所述图像处理装置的硬盘或内存。所述计算机可读存储介质也可以是所述图像传感器或图像处理装置的外部存储设备，例如所述图像传感器或图像处理装置上配备的插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(SecureDigital，SD)卡，闪存卡(Flash Card)等。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。
Claims (54)
1.一种图像处理方法，其特征在于，包括：
确定图像传感器中的关键区域信息；
根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据；
其中，所述第一采样率高于所述第二采样率。
2.根据权利要求1所述的方法，其特征在于，所述以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据之后，还包括：
将所述全局图像数据和所述局部图像数据发送至图像处理装置，以供所述图像处理装置根据所述全局图像数据和所述局部图像数据，生成目标图像。
3.根据权利要求2所述的方法，其特征在于，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将所述全局图像数据和所述局部图像数据分别基于不同的物理链路发送至所述图像处理装置。
4.根据权利要求2所述的方法，其特征在于，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将所述全局图像数据和所述局部图像数据基于相同的物理链路异步发送至所述图像处理装置。
5.根据权利要求1所述的方法，其特征在于，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置之前，还包括：
配置所述全局图像数据对应的第一标签，以及所述局部图像数据对应的第二标签；
所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将携带所述第一标签的所述全局图像数据，和携带所述第二标签的所述局部图像数据发送至所述图像处理装置。
6.根据权利要求1至5任一项所述的方法，其特征在于，所述确定图像传感器中的关键区域信息，包括：
接收图像处理装置发送的所述关键区域信息，所述图像处理装置确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息。
7.根据权利要求6所述的方法，其特征在于，所述关键区域信息包括关键区域像素点的坐标信息。
8.根据权利要求1所述的方法，其特征在于，所述以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，包括：
采用全像素输出方式输出所述局部图像数据。
9.根据权利要求1所述的方法，其特征在于，所述以第二采样率输出所述图像传感器的全局图像数据，包括：
采用至少两倍下采样方式，输出所述全局图像数据。
10.一种图像处理方法，其特征在于，包括：
获取局部图像数据和全局图像数据，其中，所述局部图像数据的采样率高于所述全局图像数据的采样率；
根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像；
将所述局部图像和所述全局图像进行图像处理，生成目标图像。
11.根据权利要求10所述的方法，其特征在于，所述将所述局部图像和所述全局图像进行图像处理，生成目标图像，包括：
将所述全局图像进行图像放大处理，生成放大图像；
将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像。
12.根据权利要求11所述的方法，其特征在于，所述将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像，包括：
确定所述放大图像中的关键区域；
在所述关键区域内融合所述局部图像，生成所述目标图像。
13.根据权利要求12所述的方法，其特征在于，所述在所述关键区域内融合所述局部图像，生成所述目标图像，包括：
将所述放大图像中关键区域内的图像替换为所述局部图像，生成所述目标图像。
14.根据权利要求12所述的方法，其特征在于，所述在所述关键区域内融合所述局部图像，生成所述目标图像，包括：
将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像。
15.根据权利要求14所述的方法，其特征在于，所述将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像，包括：
按照预设的权重与像素点位置的映射关系，确定所述局部图像中每一个像素点对应的权重；
根据所述局部图像中每一个像素点对应的权重，将所述局部图像中每一像素点与所述关键区域内的图像中对应位置的像素点进行加权计算，生成所述目标图像。
16.根据权利要求15所述的方法，其特征在于，距离所述局部图像的中心位置越近的像素点，对应的权重越大。
17.根据权利要求10至16任一项所述的方法，其特征在于，所述方法还包括：
确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息；
将所述关键区域信息发送至图像传感器，以供所述图像传感器根据所述关键区域信息以第一采样率输出所述局部图像数据，以及以第二采样率输出所述全局图像数据；
所述获取局部图像数据和全局图像数据，包括：
接收所述图像传感器发送的所述局部图像数据和所述全局图像数据。
18.根据权利要求17所述的方法，其特征在于，所述确定待处理图像的关键区域，包括：
对所述待处理图像进行图像识别处理，获取目标对象；
根据所述目标对象，确定所述关键区域。
19.根据权利要求18所述的方法，其特征在于，所述对所述待处理图像进行图像识别处理，获取目标对象，包括：
对所述待处理图像进行图像识别处理，获取所述待处理图像中包含的至少一个对象；
从所述至少一个对象中确定所述目标对象。
20.根据权利要求19所述的方法，其特征在于，所述从所述至少一个对象中确定所述目标对象，包括：
根据预设的各个对象的优先级，将所述至少一个对象中优先级最高的对象，确定为所述目标对象。
21.根据权利要求18所述的方法，其特征在于，所述根据所述目标对象，确定所述关键区域，包括：
将所述目标对象在所述待处理图像中位于的第一区域、以及所述第一区域的邻近区域，确定为所述关键区域。
22.根据权利要求18所述的方法，其特征在于，所述根据所述目标对象，确定所述关键区域，包括：
根据所述目标对象在所述待处理图像中位于的第一区域，以及所述目标对象的运动信息，预计所述目标对象将移至的第二区域，将所述第二区域确定为所述关键区域。
23.一种图像传感器，其特征在于，所述图像传感器包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
确定图像传感器中的关键区域信息；
根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据；
其中，所述第一采样率高于所述第二采样率。
24.根据权利要求23所述的图像传感器，其特征在于，所述处理器在执行所述计算机程序时，还实现：
将所述全局图像数据和所述局部图像数据发送至图像处理装置，以供所述图像处理装置根据所述全局图像数据和所述局部图像数据，生成目标图像。
25.根据权利要求24所述的图像传感器，其特征在于，所述处理器在实现所述将所述全局图像数据和所述局部图像数据发送至图像处理装置时，具体实现：
将所述全局图像数据和所述局部图像数据分别基于不同的物理链路发送至所述图像处理装置。
26.根据权利要求24所述的图像传感器，其特征在于，所述处理器在实现所述将所述全局图像数据和所述局部图像数据发送至图像处理装置时，具体实现：
将所述全局图像数据和所述局部图像数据基于相同的物理链路异步发送至所述图像处理装置。
27.根据权利要求23所述的图像传感器，其特征在于，所述处理器在实现所述将所述全局图像数据和所述局部图像数据发送至图像处理装置之前，还实现：
配置所述全局图像数据对应的第一标签，以及所述局部图像数据对应的第二标签；
所述处理器在实现所述将所述全局图像数据和所述局部图像数据发送至图像处理装置时，具体实现：
将携带所述第一标签的所述全局图像数据，和携带所述第二标签的所述局部图像数据发送至所述图像处理装置。
28.根据权利要求23至27任一项所述的图像传感器，其特征在于，所述处理器在实现所述确定图像传感器中的关键区域信息时，具体实现：
接收图像处理装置发送的所述关键区域信息，所述图像处理装置确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息。
29.根据权利要求28所述的图像传感器，其特征在于，所述关键区域信息包括关键区域像素点的坐标信息。
30.根据权利要求23所述的图像传感器，其特征在于，所述处理器在实现所述以第一采样率输出所述图像传感器中关键区域对应的局部图像数据时，具体实现：
采用全像素输出方式输出所述局部图像数据。
31.根据权利要求23所述的图像传感器，其特征在于，所述处理器在实现所述以第二采样率输出所述图像传感器的全局图像数据时，具体实现：
采用至少两倍下采样方式，输出所述全局图像数据。
32.一种图像处理装置，其特征在于，所述图像处理装置包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
获取局部图像数据和全局图像数据，其中，所述局部图像数据的采样率高于所述全局图像数据的采样率；
根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像；
将所述局部图像和所述全局图像进行图像处理，生成目标图像。
33.根据权利要求32所述的图像处理装置，其特征在于，所述处理器在实现所述将所述局部图像和所述全局图像进行图像处理，生成目标图像时，具体实现：
将所述全局图像进行图像放大处理，生成放大图像；
将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像。
34.根据权利要求33所述的图像处理装置，其特征在于，所述处理器在实现所述将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像时，具体实现：
确定所述放大图像中的关键区域；
在所述关键区域内融合所述局部图像，生成所述目标图像。
35.根据权利要求34所述的图像处理装置，其特征在于，所述处理器在实现所述在所述关键区域内融合所述局部图像，生成所述目标图像时，具体实现：
将所述放大图像中关键区域内的图像替换为所述局部图像，生成所述目标图像。
36.根据权利要求34所述的图像处理装置，其特征在于，所述处理器在实现所述在所述关键区域内融合所述局部图像，生成所述目标图像时，具体实现：
将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像。
37.根据权利要求36所述的图像处理装置，其特征在于，所述处理器在实现所述将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像时，具体实现：
按照预设的权重与像素点位置的映射关系，确定所述局部图像中每一个像素点对应的权重；
根据所述局部图像中每一个像素点对应的权重，将所述局部图像中每一像素点与所述关键区域内的图像中对应位置的像素点进行加权计算，生成所述目标图像。
38.根据权利要求37所述的图像处理装置，其特征在于，距离所述局部图像的中心位置越近的像素点，对应的权重越大。
39.根据权利要求32至38任一项所述的图像处理装置，其特征在于，所述处理器在执行所述计算机程序时，还实现：
确定待处理图像的关键区域，并获取所述关键区域对应的关键区域信息；
将所述关键区域信息发送至图像传感器，以供所述图像传感器根据所述关键区域信息以第一采样率输出所述局部图像数据，以及以第二采样率输出所述全局图像数据；
所述处理器在实现所述获取局部图像数据和全局图像数据时，具体实现：
接收所述图像传感器发送的所述局部图像数据和所述全局图像数据。
40.根据权利要求39所述的图像处理装置，其特征在于，所述处理器在实现所述确定待处理图像的关键区域时，具体实现：
对所述待处理图像进行图像识别处理，获取目标对象；
根据所述目标对象，确定所述关键区域。
41.根据权利要求40所述的图像处理装置，其特征在于，所述处理器在实现所述对所述待处理图像进行图像识别处理，获取目标对象时，具体实现：
对所述待处理图像进行图像识别处理，获取所述待处理图像中包含的至少一个对象；
从所述至少一个对象中确定所述目标对象。
42.根据权利要求41所述的图像处理装置，其特征在于，所述处理器在实现所述从所述至少一个对象中确定所述目标对象时，具体实现：
根据预设的各个对象的优先级，将所述至少一个对象中优先级最高的对象，确定为所述目标对象。
43.根据权利要求40所述的图像处理装置，其特征在于，所述处理器在实现所述根据所述目标对象，确定所述关键区域时，具体实现：
将所述目标对象在所述待处理图像中位于的第一区域、以及所述第一区域的邻近区域，确定为所述关键区域。
44.根据权利要求40所述的图像处理装置，其特征在于，所述处理器在实现所述根据所述目标对象，确定所述关键区域时，具体实现：
根据所述目标对象在所述待处理图像中位于的第一区域，以及所述目标对象的运动信息，预计所述目标对象将移至的第二区域，将所述第二区域确定为所述关键区域。
45.一种图像处理设备，其特征在于，包括图像传感器与图像处理装置，其中，
所述图像传感器用于确定图像传感器中的关键区域信息；
所述图像传感器用于根据所述关键区域信息，以第一采样率输出所述图像传感器中关键区域对应的局部图像数据，以及以第二采样率输出所述图像传感器的全局图像数据，所述第一采样率高于所述第二采样率；
所述图像传感器用于将所述全局图像数据和所述局部图像数据发送至所述图像处理装置；
所述图像处理装置用于接收所述局部图像数据和所述全局图像数据；
所述图像处理装置用于根据所述局部图像数据和所述全局图像数据，生成对应的局部图像和全局图像；
所述图像处理装置用于将所述局部图像和所述全局图像进行图像处理，生成目标图像。
46.根据权利要求45所述的图像处理设备，其特征在于，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将所述全局图像数据和所述局部图像数据分别基于不同的物理链路发送至所述图像处理装置。
47.根据权利要求45所述的图像处理设备，其特征在于，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将所述全局图像数据和所述局部图像数据基于相同的物理链路异步发送至所述图像处理装置。
48.根据权利要求45所述的图像处理设备，其特征在于，所述将所述全局图像数据和所述局部图像数据发送至图像处理装置之前，还包括：
配置所述全局图像数据对应的第一标签，以及所述局部图像数据对应的第二标签；
所述将所述全局图像数据和所述局部图像数据发送至图像处理装置，包括：
将携带所述第一标签的所述全局图像数据，和携带所述第二标签的所述局部图像数据发送至所述图像处理装置。
49.根据权利要求45所述的图像处理设备，其特征在于，所述将所述局部图像和所述全局图像进行图像处理，生成目标图像，包括：
将所述全局图像进行图像放大处理，生成放大图像；
将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像。
50.根据权利要求49所述的图像处理设备，其特征在于，所述将所述放大图像与所述局部图像进行图像融合处理，生成所述目标图像，包括：
确定所述放大图像中的关键区域；
在所述关键区域内融合所述局部图像，生成所述目标图像。
51.根据权利要求50所述的图像处理设备，其特征在于，所述在所述关键区域内融合所述局部图像，生成所述目标图像，包括：
将所述放大图像中关键区域内的图像替换为所述局部图像，生成所述目标图像。
52.根据权利要求50所述的图像处理设备，其特征在于，所述在所述关键区域内融合所述局部图像，生成所述目标图像，包括：
将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像。
53.根据权利要求52所述的图像处理设备，其特征在于，所述将所述放大图像中关键区域内的图像与所述局部图像按照相应权重进行融合，生成所述目标图像，包括：
按照预设的权重与像素点位置的映射关系，确定所述局部图像中每一个像素点对应的权重；
根据所述局部图像中每一个像素点对应的权重，将所述局部图像中每一像素点与所述关键区域内的图像中对应位置的像素点进行加权计算，生成所述目标图像。
54.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器实现如权利要求1至9中任一项所述的图像处理方法，或者实现如权利要求10至22中任一项所述的图像处理方法。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/CN2019/121768 WO2021102857A1 (zh) | 2019-11-28 | 2019-11-28 | 图像处理方法、装置、设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112313944A true CN112313944A (zh) | 2021-02-02 |
Family
ID=74336573
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201980040204.9A Pending CN112313944A (zh) | 2019-11-28 | 2019-11-28 | 图像处理方法、装置、设备及存储介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN112313944A (zh) |
| WO (1) | WO2021102857A1 (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115761311B (zh) * | 2022-11-03 | 2023-07-07 | 广东科力新材料有限公司 | Pvc钙锌稳定剂的性能检测数据分析方法及系统 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101018299A (zh) * | 2006-02-07 | 2007-08-15 | 日本胜利株式会社 | 摄像方法以及摄像装置 |
| CN104144295A (zh) * | 2014-08-12 | 2014-11-12 | 北京智谷睿拓技术服务有限公司 | 成像控制方法和装置及成像设备 |
| CN105450924A (zh) * | 2014-09-30 | 2016-03-30 | 北京智谷技术服务有限公司 | 超分辨率图像的获取方法和装置 |
| CN107153519A (zh) * | 2017-04-28 | 2017-09-12 | 北京七鑫易维信息技术有限公司 | 图像传输方法、图像显示方法以及图像处理装置 |
| CN107516335A (zh) * | 2017-08-14 | 2017-12-26 | 歌尔股份有限公司 | 虚拟现实的图形渲染方法和装置 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI549096B (zh) * | 2011-05-13 | 2016-09-11 | 華晶科技股份有限公司 | 影像處理裝置及其處理方法 |
| CN103888679A (zh) * | 2014-03-13 | 2014-06-25 | 北京智谷睿拓技术服务有限公司 | 图像采集方法及图像采集装置 |
| CN103888689B (zh) * | 2014-03-13 | 2017-10-31 | 北京智谷睿拓技术服务有限公司 | 图像采集方法及图像采集装置 |
| CN106447677A (zh) * | 2016-10-12 | 2017-02-22 | 广州视源电子科技股份有限公司 | 图像处理方法和装置 |
| CN110428366B (zh) * | 2019-07-26 | 2023-10-13 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
-
2019
- 2019-11-28 CN CN201980040204.9A patent/CN112313944A/zh active Pending
- 2019-11-28 WO PCT/CN2019/121768 patent/WO2021102857A1/zh active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101018299A (zh) * | 2006-02-07 | 2007-08-15 | 日本胜利株式会社 | 摄像方法以及摄像装置 |
| CN104144295A (zh) * | 2014-08-12 | 2014-11-12 | 北京智谷睿拓技术服务有限公司 | 成像控制方法和装置及成像设备 |
| CN105450924A (zh) * | 2014-09-30 | 2016-03-30 | 北京智谷技术服务有限公司 | 超分辨率图像的获取方法和装置 |
| CN107153519A (zh) * | 2017-04-28 | 2017-09-12 | 北京七鑫易维信息技术有限公司 | 图像传输方法、图像显示方法以及图像处理装置 |
| CN107516335A (zh) * | 2017-08-14 | 2017-12-26 | 歌尔股份有限公司 | 虚拟现实的图形渲染方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2021102857A1 (zh) | 2021-06-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9633479B2 (en) | Time constrained augmented reality | |
| CN109644249B (zh) | 图像处理设备和图像处理方法 | |
| US10057538B2 (en) | Apparatus and methods for the selection of one or more frame interpolation techniques | |
| CN110222726A (zh) | 图像处理方法、装置及电子设备 | |
| US10841460B2 (en) | Frame synchronization method for image data, image signal processing apparatus, and terminal | |
| CN105578129A (zh) | 一种多路多画面视频拼接装置 | |
| CN114145006A (zh) | 人工智能资源的调度方法、装置、存储介质和芯片 | |
| WO2020039897A1 (ja) | 駅監視システム及び駅監視方法 | |
| CN109981989B (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 | |
| CN112313944A (zh) | 图像处理方法、装置、设备及存储介质 | |
| CN111126493B (zh) | 深度学习模型的训练方法、装置、电子设备及存储介质 | |
| JP2023169254A (ja) | 撮像素子、撮像素子の作動方法、プログラム、及び撮像システム | |
| JP7220361B2 (ja) | イメージ従属コンテンツの統合方法 | |
| JP7107597B2 (ja) | 駅監視装置、駅監視方法及びプログラム | |
| KR102534449B1 (ko) | 이미지 처리 방법, 장치, 전자 장치 및 컴퓨터 판독 가능 저장 매체 | |
| CN112308809B (zh) | 一种图像合成方法、装置、计算机设备及存储介质 | |
| US8249384B2 (en) | Method and system for removing date and time stamp of digital image in imaging device | |
| JP5202605B2 (ja) | コンテンツデータ管理装置、コンテンツデータ管理システム、コンテンツデータ管理プログラム、コンテンツデータ管理方法 | |
| CN116631011B (zh) | 手部姿态估计方法及电子设备 | |
| CN115134633B (zh) | 一种远程视频方法及相关装置 | |
| CN116228607B (zh) | 图像处理方法和电子设备 | |
| CN116723264B (zh) | 确定目标位置信息的方法、设备及存储介质 | |
| CN116029951B (zh) | 图像处理方法与电子设备 | |
| CN109685824B (zh) | 基于奇异值分解特征的运动判断方法、装置及电子设备 | |
| CN108924429B (zh) | 一种预览画面显示方法、预览画面显示装置及终端设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20210202 |