CN112911159A - 图像呈现方法、图像获取设备及终端装置 - Google Patents

图像呈现方法、图像获取设备及终端装置 Download PDF

Info

Publication number
CN112911159A
CN112911159A CN202110423249.3A CN202110423249A CN112911159A CN 112911159 A CN112911159 A CN 112911159A CN 202110423249 A CN202110423249 A CN 202110423249A CN 112911159 A CN112911159 A CN 112911159A
Authority
CN
China
Prior art keywords
image
target object
image sensor
images
sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110423249.3A
Other languages
English (en)
Other versions
CN112911159B (zh
Inventor
翁超
陈洪晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Priority to CN202110423249.3A priority Critical patent/CN112911159B/zh
Publication of CN112911159A publication Critical patent/CN112911159A/zh
Application granted granted Critical
Publication of CN112911159B publication Critical patent/CN112911159B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay

Abstract

本发明的实施例公开了一种图像呈现方法，包括：获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像；对所述第一图像进行尺寸处理，以生成经尺寸处理的第一图像，所述经尺寸处理的第一图像中的目标物体的显示尺寸等于所述目标物体在所述第二图像中的显示尺寸；确定所述经尺寸处理的第一图像和所述第二图像中的一个的与所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域相匹配的匹配区域；以及至少通过将所述经尺寸处理的第一图像和所述第二图像中的所述一个的所述匹配区域叠加在所述经尺寸处理的第一图像和所述第二图像中的所述另一个的所述中心区域上，生成呈现图像。

Description

图像呈现方法、图像获取设备及终端装置
技术领域
本公开涉及图像处理，更具体地涉及图像呈现方法、图像处理方法、图像获取设备和终端装置。
背景技术
随着拍摄技术的迅速发展，对于具有更多功能的图像获取设备的需求正在增加。目前，相机可以配备有红外图像感测传感器和可见光传感器二者。用户可以选择不同的传感器来拍摄照片，并且获得红外图像或可见光图像。对于相同的拍摄场景，用户可以选择使用两种图像传感器进行拍摄，以获得可见光图像和红外图像二者。相机通常分别向用户显示拍摄场景的两个所捕捉的图像。
为了有助于用户预览和比较可见光图像和红外图像，由红外图像传感器捕捉的红外图像和由可见光图像传感器捕捉的可见光图像可以被融合成一个图像并且接着被显示给用户。然而，红外图像的分辨率通常低于可见光图像的分辨率。此外，通过简单地组合两个所捕捉的图像(即，可见光图像和红外图像)所获得的图像的分辨率不满足可以由用于图像呈现的通用终端装置直接解码的图像的分辨率要求。因此，终端装置不可以直接解码经简单组合的图像的码流，并且经简单组合的图像不可以被呈现给用户，导致差的用户体验。
发明内容
根据本公开，提供了一种图像呈现方法，包括：获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像；根据目标分辨率、所述第一图像的长宽比、或所述第二图像的长宽比中的至少一项对所述第一图像进行尺寸处理，以生成具有目标分辨率的经尺寸处理的第一图像；以及，至少通过组合所述经尺寸处理的第一图像和所述第二图像，生成呈现图像。所述呈现图像具有不小于所述目标分辨率和所述第二图像的分辨率之和的预设分辨率。
还根据本公开，提供了一种图像呈现方法，包括：获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像；以及，对所述第一图像进行尺寸处理，以生成经尺寸处理的第一图像。所述经尺寸处理的第一图像中的目标物体的显示尺寸等于所述目标物体在所述第二图像中的显示尺寸。所述方法还包括：确定所述经尺寸处理的第一图像和所述第二图像中的一个的与所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域相匹配的匹配区域；以及，至少通过将所述经尺寸处理的第一图像和所述第二图像中的所述一个的所述匹配区域叠加在所述经尺寸处理的第一图像和所述第二图像中的所述另一个的中心区域上，生成呈现图像。
还根据本公开，提供一种图像获取设备，包括：第一图像传感器，被配置为捕捉第一图像；第二图像传感器，被配置为捕捉第二图像；处理器，耦接至所述第一图像传感器和所述第二图像传感器；以及，存储器，耦接至所述处理器并存储指令。当所述指令由所述处理器执行时，所述指令使所述处理器：获得所述第一图像和所述第二图像；根据目标分辨率、所述第一图像的长宽比、或所述第二图像的长宽比中的至少一项对所述第一图像进行尺寸处理，以生成具有目标分辨率的经尺寸处理的第一图像；以及，至少通过组合所述经尺寸处理的第一图像和所述第二图像，生成呈现图像。所述呈现图像具有不小于所述目标分辨率和所述第二图像的分辨率之和的预设分辨率。
还根据本公开，提供了一种终端装置，所述终端装置包括：处理器；以及，存储器，耦接至所述处理器并存储指令。当所述指令由所述处理器执行时，所述指令使所述处理器：获得第一图像和第二图像；根据目标分辨率、所述第一图像的长宽比、或所述第二图像的长宽比中的至少一项对所述第一图像进行尺寸处理，以生成具有目标分辨率的经尺寸处理的第一图像；以及，至少通过组合所述经尺寸处理的第一图像和所述第二图像，生成呈现图像。所述呈现图像具有不小于所述目标分辨率和所述第二图像的分辨率之和的预设分辨率。
还根据本公开，提供一种图像获取设备，包括：第一图像传感器，被配置为捕捉第一图像；第二图像传感器，被配置为捕捉第二图像；处理器，耦接至所述第一图像传感器和所述第二图像传感器；以及，存储器，耦接至所述处理器并存储指令。当所述指令由所述处理器执行时，所述指令使所述处理器：获得所述第一图像和所述第二图像；以及，对所述第一图像进行尺寸处理，以生成经尺寸处理的第一图像。所述经尺寸处理的第一图像中的目标物体的显示尺寸等于所述目标物体在所述第二图像中的显示尺寸。所述指令还使所述处理器：确定所述经尺寸处理的第一图像和所述第二图像中的一个的与所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域相匹配的匹配区域；以及，至少通过将所述经尺寸处理的第一图像和所述第二图像中的所述一个的所述匹配区域叠加在所述经尺寸处理的第一图像和所述第二图像中的所述另一个的中心区域上，生成呈现图像。
还根据本公开，提供了一种终端装置，所述终端装置包括：处理器；以及，存储器，耦接至所述处理器并存储指令。当所述指令由所述处理器执行时，所述指令使所述处理器：获得第一图像和第二图像；以及，对所述第一图像进行尺寸处理，以生成经尺寸处理的第一图像。所述经尺寸处理的第一图像中的目标物体的显示尺寸等于所述目标物体在所述第二图像中的显示尺寸。所述指令还使所述处理器：确定所述经尺寸处理的第一图像和所述第二图像中的一个的与所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域相匹配的匹配区域；以及，至少通过将所述经尺寸处理的第一图像和所述第二图像中的所述一个的所述匹配区域叠加在所述经尺寸处理的第一图像和所述第二图像中的所述另一个的中心区域上，生成呈现图像。
还根据本公开，提供了一种图像处理方法，所述图像处理方法包括：获得包括相同图像特征的第一图像和第二图像；获得用于融合所述第一图像和所述第二图像的控制指令；根据所述控制指令融合所述第一图像和所述第二图像，以获得经融合的图像；以及，显示所述经融合的图像。所述图像特征被显示在所述经融合的图像的分别与所述第一图像和所述第二图像相对应的两个单独的部分中的每个部分中，或所述第一图像中的所述图像特征和所述第二图像中的所述图像特征被相互叠加并且被显示在所述经融合的图像的经叠加的部分中。
还根据本公开，提供了一种终端装置，所述终端装置包括：处理器；以及，存储器，耦接至所述处理器并存储指令。当所述指令由所述处理器执行时，所述处理器被配置为：获得包括相同图像特征的第一图像和第二图像；获得用于融合所述第一图像和所述第二图像的控制指令；以及，根据所述控制指令融合所述第一图像和所述第二图像，以获得经融合的图像。所述终端装置还包括：显示器，耦接至所述处理器并被配置为显示所述经融合的图像。所述图像特征被显示在所述经融合的图像的分别与所述第一图像和所述第二图像相对应的两个单独的部分中的每个部分中，或所述第一图像中的所述图像特征和所述第二图像中的所述图像特征被相互叠加并且被显示在所述经融合的图像的经叠加的部分中。
附图说明
图1是根据本公开的一些实施例的图像呈现方法的流程图。
图2示出根据本公开的实施例的第一图像和第二图像在呈现图像中的布置方式。
图3示出根据本公开的一些实施例的通过向经组合的图像添加像素而生成的呈现图像。
图4A示出的是根据本公开的一些其他实施例的图像呈现方法的流程图。
图4B示出的是根据本公开的一些实施例的图4A中示出的图像呈现方法的对第一图像进行尺寸处理的流程图。
图5示出根据本公开的一些实施例的通过叠加第一图像和第二图像而生成的呈现图像。
图6是根据本公开的一些实施例的图像处理方法的流程图。
图7示意性地示出根据本公开的一些实施例的图像获取设备。
图8示意性地示出根据本公开的一些实施例的终端装置。
图9示意性地示出根据本公开的一些实施例的终端装置。
图10A和图10B示出由用户界面(UI)显示的示例呈现图像。
具体实施方式
将参考附图描述本公开的技术方案。将了解的是，所描述的实施例是本公开的一些而不是全部实施例。由本领域技术人员在所描述的实施例的基础上无需创造性努力而设想的其他实施例应落入本公开的范围内。
将参考附图描述示例实施例，除非另外指明，否则附图中相同的附图标记指相同或相似的要素。
除非另外定义，否则本文所使用的所有技术术语和科学术语具有如本领域技术人员通常理解的相同或相似的含义。如本文所述，本公开的说明书中所使用的术语旨在描述示例实施例，不是限制本公开。本文使用的术语“和/或”包括所列出的一个或多个有关项的任何合适的组合。
本领域技术人员将了解，上述示例要素和算法步骤可以用电子硬件实现、或者用计算机软件和电子硬件的组合实现。这些功能用硬件还是软件实现取决于具体应用和技术方案的设计约束。本领域技术人员可以使用不同的方法来针对不同的应用场景实现所描述的功能，但这些实现不应被考虑为超出本公开的范围。
随着图像获取技术的快速发展，图像获取设备(例如，相机)，可以配备包括第一图像传感器和第二图像传感器的不同的图像传感器。例如，第一图像传感器可以是可见光图像传感器且可以捕捉可见光图像，而第二图像传感器可以是红外图像传感器且可以捕捉红外图像。可见光图像可以具有例如3840×2160的分辨率和例如16:9的长宽比，而红外图像可以具有例如640×512的分辨率和例如5:4的长宽比。有时，用户可能希望同时预览和比较可见光图像和红外图像。为了满足这种要求，可见光图像和红外图像可以被融合，以在由图像呈现设备或终端装置呈现给用户之前获得经融合的图像。如果经融合的图像具有与图像呈现设备所要求的目标分辨率(例如，1280×512)相等的分辨率，图像获取设备可以将经融合的图像编码成码流并且将该码流发送给图像呈现设备或终端装置。图像呈现设备或终端装置可以直接解码该码流并且向用户显示经融合的图像。然而，通过简单地组合可见光图像和红外图像所获得的经融合的图像通常不具有与目标分辨率相等的分辨率，因此经融合的图像不可以被呈现给用户，导致较差的用户体验。
为了解决上述技术问题，本公开提供一种图像呈现方法。图1是根据本公开的一些实施例的方法100的流程图。如图1中所示，图像呈现方法100包括以下过程。
在101处，获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像。
在一些实施例中，第一图像传感器可以是可见光图像传感器且第二图像传感器可以是红外图像传感器。对应地，第一图像可以是由可见光图像传感器捕捉的可见光图像且第二图像可以是由红外图像传感器捕捉的红外图像。在一些实施例中，第二图像(即，红外图像)的分辨率(例如，640×512)可以小于第一图像(即，可见光图像)的初始分辨率(例如，3840×2160)。
在一些其他实施例中，第一图像传感器可以是红外图像传感器且第二图像传感器可以是可见光图像传感器。对应地，第一图像可以是由红外图像传感器捕捉的红外图像且第二图像可以是由可见光图像传感器捕捉的可见光图像。在这些实施例中，第一图像(即，红外图像)的分辨率(例如，640×512)可以小于第二图像(即，可见光图像)的初始分辨率(例如，3840×2160)。
在上述实施例中，红外图像的分辨率小于可见光图像的分辨率。在一些其他实施例中，红外图像的分辨率可以是与可见光图像的分辨率相同或高于可见光图像的分辨率。红外图像和可见光图像的分辨率可以由对应的图像传感器的性质确定且不被本公开限制。
第一图像传感器和第二图像传感器可以是相同类型的图像传感器或不同的类型的图像传感器。例如，第一图像传感器和第二图像传感器中的每一个图像传感器可以包括电荷耦合器件(CCD)图像传感器、互补金属氧化物半导体(CMOS)图像传感器或另一种类型的图像传感器，这不被本公开限制。另外，第一图像传感器和第二图像传感器中的每一个图像传感器可以是可见光图像传感器、红外图像传感器或被配置为感测其他波长范围内的光的图像传感器，这不被本公开限制。例如，可见光图像传感器可以感测可见光波长范围中(例如，大约390nm至大约700nm)的光并且捕捉可见光图像。红外图像传感器可以感测红外线波长范围中(例如，大约700nm至大约1mm)的光并且捕捉红外图像。被配置为感测其他波长范围内的光的图像传感器可以包括，例如，UV图像传感器，其可以感测UV波长范围中(例如，短于大约400nm)的光并且捕捉UV图像。因此，第一图像或第二图像可以是可见光图像、红外图像、UV图像、或包含某些颜色的图像，这不被本公开限制。
第一图像和第二图像可以同时被捕捉或在不同的时间被捕捉，并且可以具有相同的内容。在一个示例中，对于相同的拍摄场景，如果第一图像和第二图像同时被捕捉，则第一图像和第二图像可以具有相同的内容。在另一个示例中，对于相同的静态拍摄场景，即使第一图像和第二图像不是同时被捕捉的，第一图像和第二图像仍然可以包括相同的内容，因为例如该场景没有改变。第一图像和第二图像可以是由相同的图像获取设备(例如，相机)或由不同的图像获取设备(例如，不同的相机)捕捉的。
图像的分辨率可以通过图像中的像素的总数确定且也可以通过图像的宽度方向上的像素数和图像的高度方向上的像素数标识。例如，当第一图像是由可见光图像传感器捕捉的可见光图像且第二图像是由红外图像传感器捕捉的红外图像时，第一图像的分辨率可以是例如3840×2160，且第二图像的分辨率可以是例如640×512。第一图像和第二图像的分辨率不被本公开限制。
在102处，根据目标分辨率、第一图像的长宽比、或第二图像的长宽比中的至少一项对第一图像进行尺寸处理，以生成具有目标分辨率的经尺寸处理的第一图像。
在103处，至少通过组合经尺寸处理的第一图像和第二图像生成呈现图像。所述呈现图像具有不小于目标分辨率和第二图像的分辨率之和的预设分辨率。
在一些实施例中，可以根据预设分辨率、第一图像与第二图像之间的呈现比率、或经尺寸处理的第一图像和第二图像在呈现图像中的预设布置方式中的至少一项，确定目标分辨率。
目标分辨率可以与预设分辨率相同或不同。预设分辨率可以由图像呈现设备、终端装置或图像呈现应用(APP)等的呈现要求确定。例如，在由图像获取设备(例如，相机)捕捉图像之后，图像获取设备可以将图像转换成码流，并且将码流发送给图像呈现APP。当由图像获取设备发送给图像呈现APP的图像具有与目标分辨率相等的分辨率(例如，1280×720)时，图像呈现APP可能能够直接解码该码流并向用户呈现图像。目标分辨率可以根据实际条件确定且不被本公开限制。
第一图像和第二图像之间的呈现比率可以是与呈现图像中的第一图像相对应的呈现面积和与该呈现图像中的第二图像相对应的呈现面积之间的比例关系。当第一图像和第二图像之间的呈现比率等于1时，与第一图像相对应的呈现面积可以等于与呈现图像中的第二图像相对应的呈现面积。当第一图像和第二图像之间的呈现比率大于或小于1时，与第一图像相对应的呈现面积大于或小于与呈现图像中的第二图像相对应的呈现面积。经尺寸处理的第一图像和第二图像在呈现图像中的呈现比率和预设布置方式可以根据实际条件和图像呈现设备的要求确定且不被本公开限制。
如上所述，如何对第一图像进行尺寸处理可以取决于目标分辨率、第一图像的长宽比、和第二图像的长宽比。在一些实施例中，第一图像的长宽比和第二图像的长宽比彼此相等，因此可以仅根据目标分辨率对第一图像进行尺寸处理。例如，如果第一图像的分辨率等于目标分辨率，则第一图像可以被设置为经尺寸处理的第一图像，即，作为经尺寸处理的第一图像使用。也就是说，第一图像可以被设置为等于经尺寸处理的第一图像。如果第一图像的分辨率大于目标分辨率，则可以根据目标分辨率缩小第一图像。如果第一图像的分辨率小于目标分辨率，则可以根据目标分辨率放大第一图像。
在一些实施例中，第一图像的长宽比和第二图像的长宽比彼此不同，因此例如可以在根据目标分辨率进行尺寸处理之前裁剪第一图像。在这些实施例中，对第一图像进行尺寸处理(102)可以包括：根据第一图像的长宽比和/或第二图像的长宽比裁剪第一图像，以获得经裁剪的第一图像；以及，对经裁剪的第一图像进行尺寸处理，以生成经尺寸处理的第一图像。
图像的长宽比指的是图像的宽度与图像的高度之间的比例关系。在一些实施例中，长宽比可以基于图像的宽度方向上的绝对长度和高度方向上的绝对长度确定。例如，当图像具有16cm的宽度和9cm的高度时，图像的长宽比可以是16:9。在一些实施例中，长宽比可以与图像的分辨率相关。例如，第二图像(例如，红外图像)可以具有640×512的分辨率，因此具有5:4的长宽比。作为另一个示例，第一图像(例如，可见光图像)可以具有3840×2160的分辨率，因此具有16:9的长宽比。
在一些实施例中，当第一图像的长宽比大于第二图像的长宽比时，第一图像的宽度可以被裁剪，使得经裁剪的第一图像的长宽比等于第二图像的长宽比。例如，如果第一图像具有16:9的长宽比而第二图像具有5:4的长宽比，则第一图像可以在宽度方向上被裁剪，以具有与第二图像的长宽比(5:4)相等的长宽比。在另一方面，如果第一图像的长宽比小于第二图像的长宽比，则第一图像可以在高度方向上被裁剪，以具有与第二图像的长宽比相等的长宽比。
在一些实施例中，第一图像和第二图像二者可以包括相同的物体，其可以是第一图像和第二图像的主要内容或用户希望预览的内容。在这些实施例中，裁剪第一图像可以包括：识别第一图像中的物体；以及，根据第一图像中的物体的位置裁剪第一图像，以生成经裁剪的第一图像。该物体可以在经裁剪的第一图像的感兴趣的区域(ROI)中。经裁剪的第一图像的ROI可以是，例如，经裁剪的第一图像的中部区域、左上区域、右上区域、左下区域或右下区域。在一些实施例中，经裁剪的第一图像的ROI(即，该物体位于的地方)可以基于用户输入确定。
在一些实施例中，第一图像可以包括多个物体。在这些实施例中，裁剪第一图像可以包括：识别第一图像中的多个物体；从所述多个物体中选择一个或多个物体；以及，根据第一图像中所选择的一个或多个物体的位置裁剪第一图像以生成经裁剪的第一图像。类似地，所选择的一个或多个物体可以在经裁剪的第一图像的ROI中。在一些实施例中，可以选择多个物体中的所有物体。
在一些实施例中，当目标分辨率等于经裁剪的第一图像的分辨率时，经裁剪的第一图像可以被设置为经尺寸处理的第一图像，即，作为经尺寸处理的第一图像使用。也就是说，经裁剪的第一图像可以被设置为等于经尺寸处理的第一图像。当目标分辨率小于经裁剪的第一图像的分辨率时，可以根据目标分辨率缩小经裁剪的第一图像。当目标分辨率大于经裁剪的第一图像的分辨率时，可以根据目标分辨率放大经裁剪的第一图像。
如上所述，可以组合经尺寸处理的第一图像和第二图像，以生成呈现图像。在一些实施例中，可以根据经尺寸处理的第一图像和第二图像在呈现图像中的预设布置方式，组合经尺寸处理的第一图像和第二图像。
图2示出根据本公开的实施例的经尺寸处理的第一图像和第二图像在呈现图像中的示例布置方式(布置1-布置3)。在一些实施例中如图2中所示，经尺寸处理的第一图像和第二图像的预设布置方式可以是水平对齐经尺寸处理的第一图像和第二图像。例如，经尺寸处理的第一图像可以被布置到第二图像的左边(图2中的布置1)。在一些其他实施例中，经尺寸处理的第一图像可以在第二图像的右边。经尺寸处理的第一图像和第二图像的预设布置方式可以是竖直对齐经尺寸处理的第一图像和第二图像。例如，经尺寸处理的第一图像可以被布置在第二图像上方(图2中的布置2)。在一些其他实施例中，经尺寸处理的第一图像可以被布置在第二图像的下方。经尺寸处理的第一图像和第二图像的预设布置方式可以是沿对角线对齐经尺寸处理的第一图像和第二图像。例如，经尺寸处理的第一图像可以被布置到相对于第二图像的左下方(图2中的布置3)。在一些其他实施例中，经尺寸处理的第一图像可以被布置到相对于第二图像的右下方、右上方或左上方，这也不被本公开限制。
在一些实施例中，预设分辨率可以与经组合的图像的分辨率不同，例如，大于经组合的图像的分辨率。在这些实施例中，预设数量的像素可以被添加到经组合的图像，使得经组合的图像可以具有与预设分辨率相同的分辨率。图3示意性地示出环绕经组合的图像添加像素(阴影线区域)的示例。在一些实施例中，像素可以被添加到经组合的图像的一侧、两侧或三侧。
在一些实施例中，在生成呈现图像之后，该呈现图像可以被发送给显示装置进行显示。显示装置可以是，例如，图像获取设备的一部分、与图像获取设备分离的独立的图像呈现设备、或有线或无线连接至图像获取设备的具有显示功能的终端装置。显示装置被配置为显示该呈现图像，并且可以是，例如，发光二极管(LED)显示器、液晶显示器(LCD)显示器、或有机发光二极管(OLED)显示器等。
通过使用图1中示出的图像呈现方法100，第一图像和第二图像可以同时被显示给用户。第一图像和第二图像被独立地显示，而没有彼此部分地阻挡，使得用户能够清楚地查看第一图像和第二图像中所包括的所有信息，因此可以改善用户体验。这个方法不仅可以被用于融合两个图像而且可以被用于融合多于两个图像。此外，该方法可以被应用于将多个图像融合成显示具有清楚对比的各种信息的一个图像，其可以有助于遥感检测、环境保护、安全导航、流量监控、医学图像处理中的应用。
本公开还提供用于解决该技术问题的另一种图像呈现方法。图4A是根据本公开的一些其他实施例的图像呈现方法400的示意框图。如图4A中所示，图像呈现方法400包括以下过程。
在401处，获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像。在401处获得第一图像和第二图像可以与上文所述的在101处的类似，并且，在401处获得的第一图像和第二图像可以与在上文描述的在101处获得的那些类似，因此省略其具体描述。
在402处，对第一图像进行尺寸处理，以生成经尺寸处理的第一图像，使得经尺寸处理的第一图像中的目标物体的显示尺寸等于第二图像中的目标物体的显示尺寸。
在一些实施例中，第一图像传感器的视野(FOV)可以覆盖第二图像传感器的FOV，即，第一图像传感器的FOV可以大于或等于第二图像传感器的FOV。例如，与第一图像传感器相对应的透镜的焦距可以短于或等于与第二图像传感器相对应的透镜的焦距。因此，第一图像中的目标物体的显示尺寸可以小于或等于第二图像中的目标物体的显示尺寸。
在一些其他实施例中，第二图像传感器的FOV可以覆盖第一图像传感器的FOV，即，第二图像传感器的FOV可以大于或等于第一图像传感器的FOV。例如，与第二图像传感器相对应的透镜的焦距可以短于或等于与第一图像传感器相对应的透镜的焦距。因此，第二图像中的目标物体的显示尺寸可以小于或等于第一图像中的目标物体的显示尺寸。
在一些实施例中，如图4B中所示，对第一图像进行尺寸处理(402)包括以下过程。
在402-1处，识别第一图像中的目标物体的边缘轮廓和第二图像中的目标物体的边缘轮廓。
在402-2处，基于第一图像中的目标物体的边缘轮廓和第二图像中的目标物体的边缘轮廓，计算第一图像中的目标物体的显示尺寸和第二图像中的目标物体的显示尺寸。
在402-3处，获得第一图像中的目标物体的显示尺寸和第二图像中的目标物体的显示尺寸的比率。
在402-4处，根据该比率对第一图像进行尺寸处理。
边缘轮廓可以包括目标物体的轮廓线。在一些实施例中，可以识别第一图像和第二图像中的多个目标物体的边缘轮廓。在这些实施例中，可以从所述多个目标物体中选择一个或多个目标物体，并且可以计算第一图像和第二图像中的所选择的一个或多个目标物体的边缘轮廓。基于第一图像中的所选择的一个或多个目标物体的边缘轮廓和第二图像中的目标物体的边缘轮廓，计算第一图像中的所选择的一个或多个目标物体的显示尺寸和第二图像中的目标物体的显示尺寸。在一些实施例中，可以选择所述多个目标物体中的所有目标物体，以计算其边缘轮廓。目标物体的数量可以根据实际条件确定且这不被本公开限制。
第一图像和第二图像中的目标物体的显示尺寸可以分别通过基于第一图像和第二图像中的目标物体的边缘轮廓进行计算来确定。例如，基于目标物体的边缘轮廓，可以获得目标物体的边缘轮廓中所包括的像素。目标物体的显示尺寸可以基于边缘轮廓内的水平方向和竖直方向上的像素。本公开不限制获得目标物体的显示尺寸的方法。
第一图像中的目标物体的显示尺寸和第二图像中的目标物体的显示尺寸的比率可以与第一图像传感器的FOV和第二图像传感器的FOV之间的关系相关，例如，与对应于第一图像传感器的透镜的焦距和对应于第二图像传感器的透镜的焦距之间的关系相关。如果第一图像传感器的FOV等于第二图像传感器的FOV，例如，如果与第一图像传感器相对应的透镜的焦距等于与第二图像传感器相对应的透镜的焦距，则该比率可以等于1。如果第一图像传感器的FOV小于第二图像传感器的FOV，例如，如果与第一图像传感器相对应的透镜的焦距长于与第二图像传感器相对应的透镜的焦距，则该比率可以大于1。如果第一图像传感器的FOV大于第二图像传感器的FOV，例如，如果与第一图像传感器相对应的透镜的焦距短于与第二图像相对应的透镜的焦距，则该比率可以小于1。
在一些实施例中，可以基于第一图像中的目标物体的显示尺寸和第二图像中的目标物体的显示尺寸的比率对第一图像进行尺寸处理(402-4)。如果该比率等于1，则第一图像的尺寸可以保持不变。如果该比率大于1，则可以根据该比率缩小第一图像。如果该比率小于1，则可以根据该比率放大第一图像。
再次参考图4A，在403处，确定经尺寸处理的第一图像和第二图像中的一个的与所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域相匹配的匹配区域。
在一些实施例中，基于在402-1处获得的边缘轮廓，可以通过对齐经尺寸处理的第一图像中的目标物体的边缘轮廓和第二图像中的目标物体的边缘轮廓，将经尺寸处理的第一图像与第二图像对齐，从而获得经尺寸处理的第一图像与第二图像之间的坐标映射关系。例如，经尺寸处理的第一图像的每个像素与经尺寸处理的第一图像中的坐标的集合相对应，且第二图像的每个像素与第二图像中的坐标的集合相对应。通过将经尺寸处理的第一图像中的目标物体的边缘轮廓的像素与第二图像中的目标物体的边缘轮廓的像素对齐，可以获得坐标映射关系。本公开不限制获得坐标映射关系的方法。
在一些实施例中，可以基于经尺寸处理的第一图像与第二图像之间的坐标映射关系确定匹配区域。经尺寸处理的第一图像的匹配区域和第二图像的匹配区域可以包括目标物体。经尺寸处理的第一图像的匹配区域和第二图像的匹配区域可以具有相同的尺寸或不同的尺寸。
在404处，至少通过将经尺寸处理的第一图像和第二图像中的一个的所述匹配区域叠加在所述经尺寸处理的第一图像和所述第二图像中的所述另一个的中心区域上，生成呈现图像。
图5示出根据本公开的一些实施例的通过叠加第一图像和第二图像而生成的示例呈现图像。在一些实施例中，如图5中所示，可以通过将第二图像的匹配区域叠加在经尺寸处理的第一图像的中心区域上，生成呈现图像。在一些其他实施例中，可以通过将经尺寸处理的第一图像的匹配区域叠加在第二图像的中心区域上，生成呈现图像。
在一些实施例中，将匹配区域叠加在中心区域上(404)可以包括：设置用于匹配区域的透明因子；以及，将具有透明因子的匹配区域叠加在中心区域上。以这种方式，经尺寸处理的第一图像和第二图像中的一个的匹配区域和所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域二者可以同时被看见。透明因子可以在0％至100％之间，例如，10％、20％、30％、40％、50％、60％、70％、80％或90％，其可以根据实际条件设置。
在一些实施例中，匹配区域被叠加在中心区域上，以生成经叠加的图像。经叠加的图像可以被放大或缩小，直到经叠加的图像在竖直方向和/或水平方向上的分辨率等于对应方向上的预设分辨率为止。被缩放之后的经叠加的图像也被称为“经缩放的图像”。
如果经缩放的图像在一个方向上的分辨率大于呈现图像在这个方向上的预设分辨率，则经缩放的图像可以在这个方向上被裁剪，以生成具有预设分辨率的呈现图像。
如果经缩放的图像在一个方向上的分辨率小于呈现图像在这个方向上的预设分辨率，则某个数量的像素可以在这个方向上被添加到经缩放的图像，以生成具有预设分辨率的呈现图像。
在一些实施例中，可以通过将经尺寸处理的第一图像和第二图像中的一个的匹配区域叠加在所述经尺寸处理的第一图像和所述第二图像中的另一个的左上、右上、左下或右下区域上，生成呈现图像。
在一些实施例中，在生成呈现图像之后，该呈现图像可以被发送给显示装置进行显示。显示装置可以与上述显示装置类似，因此省略其具体描述。
通过使用图4A中示出的图像呈现方法400，第一图像和第二图像可以被同时显示给用户。第一图像和第二图像被相互叠加，从而有助于用户比较第一图像和第二图像，因此可以改善用户体验。这个方法不仅可以被用于融合两个图像而且可以被用于融合多于两个图像。此外，该方法可以被应用于将多个图像融合成显示具有高亮显示的目标物体的各种信息的一个图像，其可以有助于遥感检测、环境保护、安全导航、流量监控、医学图像处理中的应用。
本公开的另一个方面还提供图像处理方法。图6是根据本公开的一些实施例的图像处理方法600的流程图。图像处理方法600可以通过具有图像处理功能的设备或设备的单元实现。如图6中所示，图像处理方法600包括以下步骤。
在601处，获得第一图像和第二图像。第一图像和第二图像包括相同的图像特征。
在602处，获得用于融合第一图像和第二图像的控制指令。
在603处，根据控制指令融合第一图像和第二图像，以获得经融合的图像。
在604处，显示经融合的图像。
在一些实施例中，所述图像特征被显示在经融合的图像的分别与第一图像和第二图像相对应的两个单独的部分中的每个部分中。在一些其他实施例中，第一图像的图像特征和第二图像的图像特征被相互叠加并且被显示在经融合的图像的经叠加的部分中。第一图像和第二图像可以根据与本公开一致的方法(例如，上述示例方法中的一种方法)融合。对应地，可以根据与本公开一致的方法(例如，上述示例方法中的一种方法)在经融合的图像中布置和显示图像特征。
在一些其他实施例中，第一图像传感器可以是红外图像传感器且第二图像传感器可以是可见光图像传感器。对应地，第一图像可以是由红外图像传感器捕捉的红外图像且第二图像可以是由可见光图像传感器捕捉的可见光图像。在这些实施例中，第一图像(即，红外图像)的分辨率(例如，640×512)可以小于第二图像(即，可见光图像)的初始分辨率(例如，3840×2160)。
第一图像传感器和第二图像传感器可以是相同类型的图像传感器或不同的类型的图像传感器。例如，第一图像传感器和第二图像传感器中的每一个图像传感器可以包括电荷耦合器件(CCD)图像传感器、互补金属氧化物半导体(CMOS)图像传感器或另一种类型的图像传感器，这不被本公开限制。另外，第一图像传感器和第二图像传感器中的每一个图像传感器可以是可见光图像传感器、红外图像传感器或被配置为感测其他波长范围内的光的图像传感器，这不被本公开限制。
第一图像和第二图像可以同时被捕捉或在不同的时间被捕捉，并且可以具有相同的内容。在一个示例中，对于相同的拍摄场景，如果第一图像和第二图像同时被捕捉，则第一图像和第二图像可以具有相同的内容。在另一个示例中，对于相同的静态拍摄场景，即使第一图像和第二图像不是同时被捕捉的，第一图像和第二图像仍然可以包括相同的内容，因为例如该场景没有改变。第一图像和第二图像可以是由相同的图像获取设备(例如，相机)或由不同的图像获取设备(例如，不同的相机)捕捉的。
在一些实施例中，图像特征可以是一个目标物体、多个目标物体、或具体场景，这可以是根据实际条件确定且不被本公开限制。
在一些实施例中，响应于用户的操作(例如，通过设备的用户输入/输出接口的选择操作、输入操作)，可以生成控制指令。用户输入/输出接口可以是显示器、触控显示器、键盘、按钮或其组合。
本公开的另一个方面提供了一种图像获取设备。图7示意性地示出根据本公开的一些实施例的图像获取设备700。图像获取设备700可以是相机、无人飞行器上安装的拍摄组件、移动电话、平板计算机或具有图像获取功能的另一种设备。如图7中所示，图像获取设备700包括以下组件中的一项或多项：处理器710、存储器720、第一图像传感器730、第二图像传感器740、以及用户输入/输出接口750。
处理器710可以被配置为控制图像获取设备700的操作(例如，拍摄、图像处理、图像显示等)。处理器710被配置为执行计算机可读指令。此外，处理器710还可以包括：有助于处理器710与第一图像传感器730、第二图像传感器740、和用户输入/输出接口750之间的交互的一个或多个组件(未示出)。
存储器720可以存储以下中的多项：计算机可读指令、由第一图像传感器730和第二图像传感器740捕捉的图像、以及用于支持图像获取设备700的操作的其他数据。存储器720可以是任何类型的易失性存储器或非易失性存储器或其组合，例如，静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、闪存、磁盘或光盘。
第一图像传感器730和第二图像传感器740可以是相同类型的图像传感器或不同类型的图像传感器。例如，第一图像传感器730和第二图像传感器740中的每一个可以包括CCD图像传感器、CMOS图像传感器或另一种类型的图像传感器，这不被本公开限制。另外，第一图像传感器730和第二图像传感器740中的每一个可以是可见光图像传感器、红外图像传感器或被配置为感测其他波长范围内的光的图像传感器，这不被本公开限制。例如，可见光图像传感器可以感测可见光波长范围中的(例如，大约390nm至大约700nm)的光并且捕捉可见光图像。红外图像传感器可以感测红外线波长范围中(例如，大约700nm至大约1mm)的光并且捕捉红外图像。被配置为感测其他波长范围的图像传感器可以包括例如UV图像传感器，其可以感测UV波长范围中(例如，短于大约400nm)的光并捕捉UV图像。因此，第一图像或第二图像可以是可见光图像、红外图像、UV图像、或包含某些颜色的图像，这不被本公开限制。
在一些实施例中，第二图像的分辨率可以小于第一图像的初始分辨率。在一些实施例中，第二图像的分辨率可以等于或大于第一图像的初始分辨率。
在一些实施例中，第一图像传感器的FOV可以覆盖第二图像传感器的FOV，即，第一图像传感器的FOV可以大于或等于第二图像传感器的FOV。例如，与第一图像传感器相对应的透镜的焦距可以短于或等于与第二图像传感器相对应的透镜的焦距。因此，第一图像中的目标物体的显示尺寸可以大于或等于第二图像中的目标物体的显示尺寸。在一些其他实施例中，第二图像传感器的FOV可以覆盖第一图像传感器的FOV，即，第二图像传感器的FOV可以大于或等于第一图像传感器的FOV。例如，与第二图像传感器相对应的透镜的焦距可以短于或等于与第一图像传感器相对应的透镜的焦距。因此，第二图像中的目标物体的显示尺寸可以大于或等于第一图像中的目标物体的显示尺寸。
用户输入/输出接口750可以是显示装置、触控显示装置、键盘、按钮或其组合。例如，如果用户输入/输出接口750是触控显示装置。则，触控显示装置可以通过屏幕向用户显示图像，并且，通过触摸触控显示器的触摸传感器，用户可以向图像获取设备700输入指令。
在一些实施例中，计算机可读指令可以由处理器710执行，以使处理器710实现与本公开一致的方法，例如，上文结合图1描述的示例图像呈现方法100。在一些实施例中，指令可以使处理器710：获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像；根据目标分辨率、第一图像的长宽比、或第二图像的长宽比中的至少一项，对第一图像进行尺寸处理，以生成具有目标分辨率的经尺寸处理的第一图像；至少通过组合经尺寸处理的第一图像和第二图像，生成呈现图像。呈现图像的预设分辨率不小于目标分辨率和第二图像的分辨率之和。目标分辨率可以根据以下中的至少一项确定：预设分辨率、第一图像与第二图像之间的呈现比率、或经尺寸处理的第一图像和第二图像在呈现图像中的预设布置方式。
在一些实施例中，存储器720中存储的指令还可以使处理器710：根据第二图像的长宽比裁剪第一图像，以获得经裁剪的第一图像；以及，根据目标分辨率对经裁剪的第一图像进行尺寸处理。当第一图像的长宽比大于第二图像的长宽比时，第一图像的宽度可以被裁剪，使得经裁剪的第一图像的长宽比等于第二图像的长宽比。在另一方面，如果第一图像的长宽比小于第二图像的长宽比，则第一图像可以在高度方向上被裁剪，以具有与第二图像的长宽比相等的长宽比。
在一些实施例中，当目标分辨率等于经裁剪的第一图像的分辨率时，经裁剪的第一图像可以被设置为经改变尺寸的第一图像，即，作为经改变尺寸的第一图像使用。也就是说，经裁剪的第一图像可以被设置为等于经改变尺寸的第一图像。当目标分辨率小于经裁剪的第一图像的分辨率时，可以根据目标分辨率缩小经裁剪的第一图像。当目标分辨率大于经裁剪的第一图像的分辨率时，可以根据目标分辨率放大经裁剪的第一图像。
在一些实施例中，存储器720中存储的指令还可以使处理器710：识别第一图像中的物体；以及，根据第一图像中的所述物体的位置裁剪第一图像，以生成经裁剪的第一图像，所述物体位于经裁剪的第一图像的ROI中。经裁剪的第一图像的ROI可以是，例如，经裁剪的第一图像的中部区域、左上区域、右上区域、左下区域或右下区域。在一些实施例中，经裁剪的第一图像的ROI(即，该物体所位于的地方)可以基于经由例如用户输入/输出接口750的用户输入确定。
在一些实施例中，存储器720中存储的指令还可以使处理器710：根据经尺寸处理的第一图像和第二图像在呈现图像中的预设布置方式，组合经尺寸处理的第一图像和第二图像，以生成经组合的图像。参考图2，预设布置方式可以包括水平地、竖直地或沿对角线对齐经尺寸处理的第一图像和第二图像，以生成所述经组合的图像。当预设分辨率大于经组合的图像的分辨率时，为了生成呈现图像，存储器720中存储的指令还可以使处理器710：环绕经组合的图像添加具有预设值的像素，以生成呈现图像。
在一些实施例中，预设分辨率可以与经组合的图像的分辨率不同，例如，大于经组合的图像的分辨率。在这些实施例中，参考图3，存储器720中存储的指令还可以使处理器710：将预设数量的像素添加到经组合的图像，使得经组合的图像可以具有与预设分辨率相同的分辨率。在一些实施例中，像素可以被添加到经组合的图像的一侧、两侧或三侧。
在一些实施例中，计算机可读指令可以由处理器710执行，以使处理器710实现与本公开一致的方法，例如，上文结合图4A描述的示例图像呈现方法400。在一些实施例中，指令可以使处理器710：获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像；对第一图像进行尺寸处理，以生成经尺寸处理的第一图像；确定经尺寸处理的第一图像和第二图像中的一个的与所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域相匹配的匹配区域；以及，至少通过将经尺寸处理的第一图像和第二图像中的一个的所述匹配区域叠加到所述经尺寸处理的第一图像和所述第二图像中的所述另一个的中心区域上，生成呈现图像。所述经尺寸处理的第一图像中的目标物体的显示尺寸等于所述目标物体在所述第二图像中的显示尺寸。
在一些实施例中，处理器710还可以被配置为：识别第一图像中的目标物体的边缘轮廓和第二图像中的目标物体的边缘轮廓。基于第一图像和第二图像中的目标物体的边缘轮廓，可以分别计算第一图像和第二图像中的目标物体的显示尺寸。此外，可以获得第一图像中的目标物体的显示尺寸和第二图像中的目标物体的显示尺寸的比率。另外，存储器720中存储的指令还可以使处理器710根据所述比率对第一图像进行尺寸处理。当该比率等于1时，第一图像的尺寸可以保持不变。当该比率大于或小于1时，第一图像可以分别被缩小或放大。
在一些实施例中，存储器720中存储的指令还可以使处理器710：通过将经尺寸处理的第一图像中的目标物体的边缘轮廓和第二图像中的目标物体的边缘轮廓对齐，对齐经尺寸处理的第一图像和第二图像，从而获得经尺寸处理的第一图像与第二图像之间的坐标映射关系。可以基于坐标映射关系确定匹配区域。在一些实施例中，可以为匹配区域设置透明因子。
在一些实施例中，存储器720中存储的指令还可以使处理器710：通过将匹配区域叠加在中心区域上，生成经叠加的图像。另外，存储器720中存储的指令还可以使处理器710：放大或缩小经叠加的图像，直到经叠加的图像在竖直方向和水平方向中的一个方向上的分辨率等于相对应的方向上的预设分辨率为止，以生成经缩放的图像。此外，为了生成具有预设分辨率的呈现图像，可以在所述竖直方向和所述水平方向中的另一个方向上靠近经缩放的图像添加固定值的像素，或可以在所述竖直方向和所述水平方向中的另一个方向上裁剪经缩放的图像。
在一些实施例中，显示装置，例如，用户输入/输出接口750，可以显示该呈现图像。
使用图7中示出的图像获取设备700，第一图像和第二图像可以被同时显示给用户。第一图像和第二图像可以被独立地没有彼此部分地阻挡地显示，使得用户能够清楚地查看第一图像和第二图像中所包括的所有信息，改善了用户体验。在一些实施例中，第一图像和第二图像可以被相互叠加，从而有助于用户比较第一图像和第二图像，改善了用户体验。图像获取设备不仅可以融合两个图像而且可以融合多于两个图像。此外，图像获取设备可以将多个图像融合成显示具有清楚对比的各种信息并且高亮显示目标物体的一个图像，这可以有助于遥感检测、环境保护、安全导航、流量监控、医学图像处理中的应用。
本公开的另一个方面提供终端装置。图8示意性地示出根据本公开的一些实施例的终端装置800。终端装置800可以是数字相机，连接至无人飞行器的遥控设备、移动电话、平板计算机、台式计算机、膝上型计算机等。如图8中所示，终端装置800包括处理器810和存储器820。处理器810可以被配置为控制终端装置800的操作(例如，图像获取、图像处理和图像显示器等)。处理器810被配置为执行存储器820中存储的计算机可读指令。存储器820可以存储终端装置800的多条计算机可读指令。存储器820可以是任何类型的易失性的或非易失性的存储器或其组合，例如，静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、闪存、磁盘或光盘。
在一些实施例中，计算机可读指令可以由处理器810执行，以使终端装置800实现与本公开一致的方法，例如，上文结合图1描述的示例图像呈现方法100。在一些实施例中，指令可以使处理器810：获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像；根据目标分辨率、第一图像的长宽比、或第二图像的长宽比中的至少一项对第一图像进行尺寸处理，以生成具有目标分辨率的经尺寸处理的第一图像；以及，至少通过组合经尺寸处理的第一图像和第二图像，生成呈现图像。呈现图像的预设分辨率不小于目标分辨率和第二图像的分辨率之和。对于该方法的具体描述，可以参考与本公开一致的方法实施例，此处未对其进行阐述。
在一些实施例中，计算机可读指令可以由处理器810执行，以使终端装置800实现与本公开一致的方法，例如，上文结合图4A描述的示例图像呈现方法400。在一些实施例中，指令可以使处理器810：获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像；对第一图像进行尺寸处理，以生成经尺寸处理的第一图像；确定经尺寸处理的第一图像和第二图像中的一个的与所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域相匹配的匹配区域；以及，至少通过将经尺寸处理的第一图像和第二图像中的一个的所述匹配区域叠加到所述经尺寸处理的第一图像和所述第二图像中的所述另一个的中心区域上，生成呈现图像。所述经尺寸处理的第一图像中的目标物体的显示尺寸等于所述目标物体在所述第二图像中的显示尺寸。对于该方法的具体描述，可以参考与本公开一致的方法实施例，此处未对其进行阐述。
在一些实施例中，处理器810可以处理从图像获取设备或服务器(未示出)发送的图像。服务器可以存储多个图像并且节省终端装置800的本地存储空间。
在一些实施例中，如图8中所示，终端装置800还包括：图像显示单元830，被配置为显示由处理器810处理和发送的图像。
在一些实施例中，如图8中所示，终端装置800还包括用户输入/输出接口840。用户输入/输出接口840可以是显示器、触控显示器、键盘、按钮或其组合。例如，用户输入/输出接口840可以是触控显示器，用户可以通过屏幕输入被输入到终端装置800的指令。
此外，处理器810还可以包括有助于处理器810和图像获取设备、图像显示单元830、和用户输入/输出接口840之间的交互的一个或多个组件(未示出)。
对于终端装置800的部件的具体描述，可以参考图像获取设备700的描述，此处不重复这些描述。
使用图8中示出的终端装置800，第一图像和第二图像可以被同时显示给用户。第一图像和第二图像可以被独立地没有彼此部分地阻挡地显示，使得用户能够清楚地查看第一图像和第二图像中所包括的所有信息，改善了用户体验。在一些实施例中，第一图像和第二图像可以被相互叠加，从而有助于用户比较第一图像和第二图像，改善了用户体验。终端装置800不仅可以融合两个图像而且可以融合多于两个图像。此外，终端装置800可以将多个图像融合成显示具有清楚对比的各种信息并且高亮显示目标物体的一个图像，这可以有助于遥感检测、环境保护、安全导航、流量监控、医学图像处理中的应用。
本公开的另一个方面提供终端装置。图9示意性地示出根据本公开的一些实施例的终端装置900。终端装置900可以是数字相机、连接至无人飞行器的遥控设备、移动电话、平板计算机、台式计算机、膝上型计算机等。如图9中所示，终端装置900包括处理器910和存储器920。处理器910可以被配置为控制终端装置900的操作(例如，图像获取、图像处理和图像显示)。处理器910被配置为执行存储器920中存储的计算机可读指令。存储器920可以存储终端装置900的多条计算机可读指令。存储器920可以是任何类型的易失性的或非易失性的存储器或其组合，例如，静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、闪存、磁盘或光盘。
在一些实施例中，计算机可读指令可以由处理器910执行，以使处理器910实现与本公开一致的方法，例如，上文结合图6描述的示例图像处理方法600。在一些实施例中，指令可以使处理器910：获得包括相同图像特征的第一图像和第二图像；获得用于融合第一图像和第二图像的控制指令；根据控制指令融合第一图像和第二图像，以获得经融合的图像；以及，显示经融合的图像。在一些实施例中，所述图像特征被显示在经融合的图像的分别与第一图像和第二图像相对应的两个单独的部分中的每个部分中。在一些其他实施例中，第一图像中的所述图像特征和第二图像中的所述图像特征被相互叠加并且被显示在经融合的图像的经叠加的部分中。对于该方法的具体描述，可以参考与本公开一致的方法实施例，此处未对其进行阐述。
对于终端装置900的部件的具体描述，可以参考图像获取设备700的描述，此处不重复这些描述。
图10A和图10B示出由用户界面(UI)显示的示例呈现图像。UI可以是例如图像获取设备或终端装置等的用户输入/输出接口。如图10A和图10B中所示，通过UI，用户可以通过例如点击右边的圆形按钮(例如，蜂窝电话的主按钮)获取图像。此外，用户可以从例如拍摄照片和拍摄视频中选择拍摄模式。用户可以通过设置菜单来设置参数，设置菜单可以在用户点击设置按钮(例如，图10A和图10B的右上部的具有扳手形状的按钮)时显示给用户。可见光图像可以是第一图像(图10A的左侧)，且红外图像可以是第二图像(图10A的右侧)。参数可以包括第一图像和第二图像的图像特征如何在经融合的图像中显示。图像特征可以是第一图像和第二图像中所包括的目标物体，例如，图10A中示出的瓶子。图像特征可以是第一图像和第二图像的匹配区域，例如，如图10B中示出的包括瓶子的拍摄场景。
图10A示出根据本公开的实施例的通过显示在经融合的图像的分别与第一图像和第二图像相对应的两个单独的部分中的每个部分中的图像特征而生成的示例呈现图像。例如，第一图像的部分和第二图像的部分被并列布置。第一图像的图像特征(例如，瓶子)和第二图像的图像特征(例如，瓶子)在呈现图像中被分开呈现，而不彼此阻挡。
图10B示出根据本公开的实施例的通过相互叠加第一图像中的图像特征和第二图像中的图像特征并在经融合的图像的经叠加的部分中显示而生成的另一个示例呈现图像。例如，第二图像的匹配区域与第一图像的中心区域叠加。
出于简化目的，设备、装置和单元的操作的具体描述可以被省略，并且可以参考方法的描述。
所公开的设备、装置和方法可以用此处未描述的其他方式实现。例如，上文描述的装置仅是说明性的。例如，多个单元或组件可以被组合成或被集成到另一个系统中，或者可以省略或不执行一些特征。另外，所示出或所讨论的耦接或直接耦接或通信连接可以包括：通过一个或多个接口、装置或单元的直接连接或间接连接或通信连接，其可以是电、机械或其他形式的。
作为分离的组件描述的单元可以是或可以不是物理分离的。也就是说，这些单元可以位于一个地方，或者可以分布在多个网络元件上。可以根据实际需要选择所述组件中的一些组件或所有组件，以实现本公开的目的。
另外，本公开的各种实施例中的功能单元可以集成在一个处理单元中，或者每个单元可以是单独的物理单元，或者两个或更多个单元可以集成在一个单元中。
与本公开一致的方法可以以非暂态计算机可读存储介质中存储的计算机程序的形式实现，其可以作为单独的产品出售或使用。计算机程序可以包括指令，所述指令使计算机装置(例如，个人计算机、服务器或网络装置)执行与本公开一致的方法(例如，上述示例方法中的一种方法)的一部分或全部。存储介质可以是可以存储程序代码的任何介质，例如，USB磁盘、移动硬盘、只读存储器(ROM)、随机存取存储器(RAM)、磁盘或光盘。
考虑本文公开的实施例的说明书和实践，本公开的其它实施例对本领域技术人员而言将是显而易见的。旨在将本说明书和实施例考虑为仅仅是示例且不旨在限制本公开的范围。对本公开的技术方案的任何修改和等同替换应该落入本公开的技术方案的精神和范围内。

Claims (21)

1.一种图像呈现方法，包括：
获得由第一图像传感器捕捉的第一图像和由第二图像传感器捕捉的第二图像；
对所述第一图像进行尺寸处理，以生成经尺寸处理的第一图像，所述经尺寸处理的第一图像中的目标物体的显示尺寸等于所述目标物体在所述第二图像中的显示尺寸；
确定所述经尺寸处理的第一图像和所述第二图像中的一个的与所述经尺寸处理的第一图像和所述第二图像中的另一个的中心区域相匹配的匹配区域；以及
至少通过将所述经尺寸处理的第一图像和所述第二图像中的所述一个的所述匹配区域叠加在所述经尺寸处理的第一图像和所述第二图像中的所述另一个的所述中心区域上，生成呈现图像。
2.根据权利要求1所述的方法，其中，获得由所述第一图像传感器捕捉的所述第一图像包括：
获得由可见光图像传感器捕捉的可见光图像作为所述第一图像。
3.根据权利要求1所述的方法，其中，获得由所述第二图像传感器捕捉的所述第二图像包括：
获得由红外图像传感器捕捉的红外图像作为所述第二图像。
4.根据权利要求1所述的方法，其中，获得由所述第一图像传感器捕捉的所述第一图像包括：
获得由红外图像传感器捕捉的红外图像作为所述第一图像。
5.根据权利要求1所述的方法，其中，获得由所述第二图像传感器捕捉的所述第二图像包括：
获得由可见光图像传感器捕捉的可见光图像作为所述第二图像。
6.根据权利要求1所述的方法，其中：
所述第一图像传感器的视野FOV覆盖所述第二图像传感器的FOV。
7.根据权利要求6所述的方法，其中：
与所述第一图像传感器相对应的透镜的焦距小于或等于与所述第二图像传感器相对应的透镜的焦距。
8.根据权利要求7所述的方法，其中：
所述目标物体在所述第一图像中的显示尺寸小于或等于所述目标物体在所述第二图像中的显示尺寸。
9.根据权利要求1所述的方法，还包括：
识别所述目标物体在所述第一图像中的边缘轮廓和所述目标物体在所述第二图像中的边缘轮廓。
10.根据权利要求9所述的方法，还包括：
基于所述目标物体在所述第一图像中的边缘轮廓和所述目标物体在所述第二图像中的边缘轮廓，计算所述目标物体在所述第一图像中的显示尺寸和所述目标物体在所述第二图像中的显示尺寸；以及
计算所述目标物体在所述第一图像中的显示尺寸和所述目标物体在所述第二图像中的显示尺寸的比率。
11.根据权利要求10所述的方法，其中，对所述第一图像进行尺寸处理，以生成所述经尺寸处理的第一图像包括：
根据所述比率对所述第一图像进行尺寸处理。
12.根据权利要求11所述的方法，其中，根据所述比率对所述第一图像进行尺寸处理包括：
响应于所述比率等于1，保持所述第一图像的尺寸；
响应于所述比率大于1，根据所述比率缩小所述第一图像；或者
响应于所述比率小于1，根据所述比率放大所述第一图像。
13.根据权利要求9所述的方法，还包括：
通过将所述目标物体在所述第一图像中的边缘轮廓和所述目标物体在所述第二图像中的边缘轮廓对齐，将所述经尺寸处理的第一图像与所述第二图像对齐；以及
获得所述经尺寸处理的第一图像与所述第二图像之间的坐标映射关系。
14.根据权利要求13所述的方法，其中，确定所述匹配区域包括：
根据所述经尺寸处理的第一图像与所述第二图像之间的所述坐标映射关系，确定所述匹配区域。
15.根据权利要求1所述的方法，其中，将所述匹配区域叠加在所述中心区域上包括：
设置针对所述匹配区域的透明因子；以及
将具有所述透明因子的匹配区域叠加在所述中心区域上。
16.根据权利要求1所述的方法，其中：
通过将所述匹配区域叠加在所述中心区域上来生成经叠加的图像；以及
生成所述呈现图像还包括：放大或缩小所述经叠加的图像，直到所述经叠加的图像在竖直方向和水平方向中的一个方向上的分辨率等于在对应方向上的预设分辨率为止，以生成经缩放的图像。
17.根据权利要求16所述的方法，其中，生成所述呈现图像还包括：
在所述竖直方向和所述水平方向中的另一个方向上在所述经缩放的图像四周添加具有固定值的像素或在所述竖直方向和所述水平方向中的另一个方向上裁剪所述经缩放的图像，以生成具有预设分辨率的所述呈现图像。
18.根据权利要求1所述的方法，还包括：
将所述呈现图像发送给显示装置以进行显示。
19.根据权利要求1所述的方法，其中：
所述第一图像和所述第二图像同时被捕捉。
20.一种图像获取设备，包括：
第一图像传感器，被配置为捕捉第一图像；
第二图像传感器，被配置为捕捉第二图像；
处理器，耦接至所述第一图像传感器和所述第二图像传感器；以及
存储器，耦接至所述处理器并存储指令，所述指令当由所述处理器执行时，使所述处理器执行根据权利要求1-19任一项所述的图像呈现方法。
21.一种终端装置，包括：
处理器；以及
存储器，耦接至所述处理器并存储指令，所述指令当由所述处理器执行时，使所述处理器执行根据权利要求1-19任一项所述的图像呈现方法。
CN202110423249.3A 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置 Active CN112911159B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110423249.3A CN112911159B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201880069207.0A CN111345026B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置
PCT/CN2018/102493 WO2020041930A1 (en) 2018-08-27 2018-08-27 Image processing and presentation
CN202110423249.3A CN112911159B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201880069207.0A Division CN111345026B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置

Publications (2)

Publication Number Publication Date
CN112911159A true CN112911159A (zh) 2021-06-04
CN112911159B CN112911159B (zh) 2023-04-18

Family

ID=69643435

Family Applications (3)

Application Number Title Priority Date Filing Date
CN202110440709.3A Active CN113132640B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置
CN202110423249.3A Active CN112911159B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置
CN201880069207.0A Active CN111345026B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202110440709.3A Active CN113132640B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201880069207.0A Active CN111345026B (zh) 2018-08-27 2018-08-27 图像呈现方法、图像获取设备及终端装置

Country Status (4)

Country Link
US (2) US11212436B2 (zh)
EP (1) EP3682629A4 (zh)
CN (3) CN113132640B (zh)
WO (1) WO2020041930A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113905071A (zh) * 2021-09-30 2022-01-07 宜科(天津)电子有限公司 一种基于触控显示装置的网关传感器可视化系统
CN113900891A (zh) * 2021-09-30 2022-01-07 宜科(天津)电子有限公司 一种工业流水线的网关传感器可视化系统

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111818312B (zh) * 2020-08-25 2021-06-04 北京中联合超高清协同技术中心有限公司 一种可变视域的超高清视频监视转换装置和系统
CN111818311B (zh) * 2020-08-25 2021-06-04 北京中联合超高清协同技术中心有限公司 一种可变视域的超高清视频监视器
CN112449095A (zh) * 2020-11-12 2021-03-05 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、可读存储介质
KR20220075028A (ko) * 2020-11-26 2022-06-07 삼성전자주식회사 다중 크롭 기능을 갖는 이미지 센서를 포함하는 전자 장치
CN112911152A (zh) * 2021-01-29 2021-06-04 北京乐学帮网络技术有限公司 预览图像生成方法、装置、设备和存储介质
CN116886744B (zh) * 2023-09-08 2023-12-29 深圳云天畅想信息科技有限公司 一种串流分辨率的动态调整方法、装置、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101165538A (zh) * 2006-10-16 2008-04-23 索尼株式会社 成像显示设备和方法
CN104364800A (zh) * 2012-03-30 2015-02-18 前视红外系统股份公司 促进关联的可视光和红外线(ir)图像信息的分析和解释
CN104601953A (zh) * 2015-01-08 2015-05-06 中国航空无线电电子研究所 一种视频图像融合处理系统
CN106500852A (zh) * 2016-09-28 2017-03-15 北方夜视技术股份有限公司 红外与可见光图像配准与融合的系统与方法
CN108053386A (zh) * 2017-11-27 2018-05-18 北京理工大学 用于图像融合的方法及装置

Family Cites Families (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4528693A (en) * 1982-09-30 1985-07-09 International Business Machines Corporation Apparatus and method for scaling facsimile image data
US6400852B1 (en) * 1998-12-23 2002-06-04 Luxsonor Semiconductors, Inc. Arbitrary zoom “on -the -fly”
JP4613403B2 (ja) * 2000-08-25 2011-01-19 ソニー株式会社 画像表示装置及び方法
EP1199888B1 (en) * 2000-10-19 2006-09-13 Sanyo Electric Co., Ltd. Image data output device and receiving device
FR2818781B1 (fr) * 2000-12-22 2003-03-21 Ge Med Sys Global Tech Co Llc Procede d'affichage simultane d'images d'organes
JP4104054B2 (ja) * 2001-08-27 2008-06-18 富士フイルム株式会社 画像の位置合わせ装置および画像処理装置
EP1627524A4 (en) * 2003-03-20 2009-05-27 Ge Security Inc SYSTEMS AND METHODS FOR PROCESSING IMAGES OF MULTIPLE RESOLUTIONS
US7764839B2 (en) * 2003-08-14 2010-07-27 Fujifilm Corporation Edge detecting apparatus and method, and image size enlarging and reducing apparatus and method
JP2005142680A (ja) * 2003-11-04 2005-06-02 Olympus Corp 画像処理装置
US20050271300A1 (en) * 2004-06-02 2005-12-08 Pina Robert K Image registration system and method
US7138905B2 (en) * 2004-11-18 2006-11-21 Honeywell International Inc. Controlled environment thermal image detection system and methods regarding same
KR100631610B1 (ko) * 2004-11-26 2006-10-09 엘지전자 주식회사 휴대단말기의 영상신호 합성장치 및 방법
US7965314B1 (en) * 2005-02-09 2011-06-21 Flir Systems, Inc. Foveal camera systems and methods
JP2006229585A (ja) * 2005-02-17 2006-08-31 Nikon Corp 電子カメラ
JP4794963B2 (ja) * 2005-06-28 2011-10-19 キヤノン株式会社 撮像装置および撮像プログラム
US8050519B2 (en) * 2005-12-19 2011-11-01 Olympus Corporation Image combining apparatus
US20070146392A1 (en) * 2005-12-28 2007-06-28 Xcpt, Inc. System and method for magnifying and editing objects
JP2008269396A (ja) * 2007-04-23 2008-11-06 Sony Corp 画像処理装置、画像処理方法、およびプログラム
JP5034820B2 (ja) * 2007-09-21 2012-09-26 セイコーエプソン株式会社 画像処理装置、画像処理プログラム
US8472753B2 (en) * 2008-01-10 2013-06-25 Samsung Electronics Co., Ltd. Method and system of adaptive reformatting of digital image
JP2009237878A (ja) * 2008-03-27 2009-10-15 Dainippon Printing Co Ltd 複合映像生成システム、重畳態様決定方法、映像処理装置及び映像処理プログラム
CN101588252B (zh) * 2008-05-23 2011-07-20 华为技术有限公司 一种多点会议的控制方法及装置
US9171361B2 (en) * 2010-04-23 2015-10-27 Flir Systems Ab Infrared resolution and contrast enhancement with fusion
US9451183B2 (en) * 2009-03-02 2016-09-20 Flir Systems, Inc. Time spaced infrared image enhancement
US9986175B2 (en) * 2009-03-02 2018-05-29 Flir Systems, Inc. Device attachment with infrared imaging sensor
US10044946B2 (en) * 2009-06-03 2018-08-07 Flir Systems Ab Facilitating analysis and interpretation of associated visible light and infrared (IR) image information
US8599264B2 (en) * 2009-11-20 2013-12-03 Fluke Corporation Comparison of infrared images
WO2011091604A1 (zh) * 2010-01-29 2011-08-04 华为终端有限公司 视频通信的方法、装置和系统
JP5593772B2 (ja) * 2010-03-29 2014-09-24 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US20130300875A1 (en) * 2010-04-23 2013-11-14 Flir Systems Ab Correction of image distortion in ir imaging
WO2012046392A1 (ja) * 2010-10-08 2012-04-12 パナソニック株式会社 姿勢推定装置及び姿勢推定方法
CN201854353U (zh) * 2010-10-13 2011-06-01 山东神戎电子股份有限公司 多光谱图像融合摄像机
JP2012099876A (ja) * 2010-10-29 2012-05-24 Sanyo Electric Co Ltd 画像処理装置、撮像装置、画像処理方法、プログラム
US10841508B2 (en) * 2011-06-10 2020-11-17 Flir Systems, Inc. Electrical cabinet infrared monitor systems and methods
US8644620B1 (en) * 2011-06-21 2014-02-04 Google Inc. Processing of matching regions in a stream of screen images
US9204062B2 (en) * 2011-08-24 2015-12-01 Fluke Corporation Thermal imaging camera with range detection
JP2013152453A (ja) * 2011-12-27 2013-08-08 Canon Inc 画像処理装置、画像処理システム、画像処理方法および画像処理プログラム
CN102567978A (zh) * 2011-12-31 2012-07-11 北京毕威康坶技术有限公司 一种图像生成的方法和系统
KR101247497B1 (ko) * 2012-02-29 2013-03-27 주식회사 슈프리마 환경 적응형 얼굴 인식장치 및 그 방법
US9087378B2 (en) * 2012-06-29 2015-07-21 Hong Kong Applied Science and Technology Research Institute Company Limited Scale changing detection and scaling ratio determination by using motion information
WO2014012946A1 (en) * 2012-07-16 2014-01-23 Flir Systems Ab Correction of image distortion in ir imaging
EP2936799B1 (en) * 2012-12-21 2018-10-17 Flir Systems, Inc. Time spaced infrared image enhancement
WO2014130977A1 (en) * 2013-02-25 2014-08-28 Herold Williams Nonlinear scaling in video conferencing
KR20150021353A (ko) * 2013-08-20 2015-03-02 삼성테크윈 주식회사 영상 융합 시스템 및 그 방법
US10148895B2 (en) * 2013-12-19 2018-12-04 Flir Systems Ab Generating a combined infrared/visible light image having an enhanced transition between different types of image information
WO2016073060A2 (en) * 2014-09-02 2016-05-12 Flir Systems, Inc. Augmented reality sonar imagery systems and methods
JP5847228B2 (ja) * 2014-04-16 2016-01-20 オリンパス株式会社 画像処理装置、画像処理方法及び画像処理プログラム
WO2015195417A1 (en) * 2014-06-20 2015-12-23 Rambus Inc. Systems and methods for lensed and lensless optical sensing
US9607653B2 (en) * 2014-10-10 2017-03-28 Synchronoss Technologies, Inc. Apparatus, system and method of authomatically creating an age progression video
US10579248B2 (en) * 2014-10-27 2020-03-03 Samsung Electronics Co., Ltd. Method and device for displaying image by using scroll bar
US9684963B2 (en) * 2014-12-31 2017-06-20 Flir Systems, Inc. Systems and methods for dynamic registration of multimodal images
WO2016109585A1 (en) * 2014-12-31 2016-07-07 Flir Systems, Inc. Image enhancement with fusion
US9712809B2 (en) * 2015-05-22 2017-07-18 Intel Corporation Integrated digital camera platform with NIR apodization filter for enhanced depth sensing and image processing
JP6564271B2 (ja) * 2015-08-07 2019-08-21 キヤノン株式会社 撮像装置及び画像処理方法、プログラム、並びに記憶媒体
US10152811B2 (en) * 2015-08-27 2018-12-11 Fluke Corporation Edge enhancement for thermal-visible combined images and cameras
US10523855B2 (en) * 2015-09-24 2019-12-31 Intel Corporation Infrared and visible light dual sensor imaging system
WO2017070629A1 (en) * 2015-10-23 2017-04-27 Fluke Corporation Imaging tool for vibration and/or misalignment analysis
JP2017098863A (ja) * 2015-11-27 2017-06-01 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
JP2017112401A (ja) * 2015-12-14 2017-06-22 ソニー株式会社 撮像素子、画像処理装置および方法、並びにプログラム
US10078888B2 (en) * 2016-01-15 2018-09-18 Fluke Corporation Through-focus image combination
WO2018163725A1 (ja) * 2017-03-08 2018-09-13 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
JP6948810B2 (ja) * 2017-03-16 2021-10-13 キヤノン株式会社 画像処理システム
CN108090888B (zh) * 2018-01-04 2020-11-13 北京环境特性研究所 基于视觉注意模型的红外图像和可见光图像的融合检测方法
JP7254461B2 (ja) * 2018-08-01 2023-04-10 キヤノン株式会社 撮像装置、制御方法、記録媒体、および、情報処理装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101165538A (zh) * 2006-10-16 2008-04-23 索尼株式会社 成像显示设备和方法
US20130285887A1 (en) * 2006-10-16 2013-10-31 Sony Corporation Imaging display apparatus and method
CN104364800A (zh) * 2012-03-30 2015-02-18 前视红外系统股份公司 促进关联的可视光和红外线(ir)图像信息的分析和解释
CN104601953A (zh) * 2015-01-08 2015-05-06 中国航空无线电电子研究所 一种视频图像融合处理系统
CN106500852A (zh) * 2016-09-28 2017-03-15 北方夜视技术股份有限公司 红外与可见光图像配准与融合的系统与方法
CN108053386A (zh) * 2017-11-27 2018-05-18 北京理工大学 用于图像融合的方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113905071A (zh) * 2021-09-30 2022-01-07 宜科(天津)电子有限公司 一种基于触控显示装置的网关传感器可视化系统
CN113900891A (zh) * 2021-09-30 2022-01-07 宜科(天津)电子有限公司 一种工业流水线的网关传感器可视化系统
CN113905071B (zh) * 2021-09-30 2022-05-31 宜科(天津)电子有限公司 一种基于触控显示装置的网关传感器可视化系统
CN113900891B (zh) * 2021-09-30 2022-09-13 宜科(天津)电子有限公司 一种工业流水线的网关传感器可视化系统

Also Published As

Publication number Publication date
EP3682629A4 (en) 2020-07-29
US11778338B2 (en) 2023-10-03
US20220124246A1 (en) 2022-04-21
US20200275021A1 (en) 2020-08-27
EP3682629A1 (en) 2020-07-22
WO2020041930A1 (en) 2020-03-05
CN113132640A (zh) 2021-07-16
US11212436B2 (en) 2021-12-28
CN112911159B (zh) 2023-04-18
CN111345026B (zh) 2021-05-14
CN113132640B (zh) 2024-01-09
CN111345026A (zh) 2020-06-26

Similar Documents

Publication Publication Date Title
CN111345026B (zh) 图像呈现方法、图像获取设备及终端装置
KR102140882B1 (ko) 자동 조정가능 텔레 시야(fov)를 갖는 듀얼-애퍼처 줌 디지털 카메라
US10229478B2 (en) Image processing apparatus and image processing method
US9619861B2 (en) Apparatus and method for improving quality of enlarged image
JP5365885B2 (ja) 手持ち式電子装置、それに適用される二重像取得方法及びそれにロードされるプログラム
US9001230B2 (en) Systems, methods, and computer-readable media for manipulating images using metadata
US9201625B2 (en) Method and apparatus for augmenting an index generated by a near eye display
KR20180035899A (ko) 듀얼 애퍼처 줌 디지털 카메라 사용자 인터페이스
CN111837155A (zh) 图像处理方法及设备
US8704929B2 (en) System and method for user guidance of photographic composition in image acquisition systems
CN106454086B (zh) 一种图像处理方法和移动终端
CN110610531A (zh) 图像处理方法、图像处理装置和记录介质
EP3236415B1 (en) Determining a boundary associated with image data
US20190026921A1 (en) Calculating device and calculating device control method
CN105607825B (zh) 用于图像处理的方法和设备
US9838615B2 (en) Image editing method and electronic device using the same
CN108810326B (zh) 一种拍照方法、装置及移动终端
WO2021168804A1 (zh) 图像处理方法、图像处理装置和图像处理系统
KR102339710B1 (ko) 영상 정보 표시 방법 및 전자 장치
JP5887297B2 (ja) 画像処理装置および画像処理プログラム
KR101392382B1 (ko) 휴대용 단말기에서 카메라의 파노라마 기능 구현 방법 및장치
KR20140091117A (ko) 촬영 장치 및 촬영 장치의 라이브 뷰 표시 방법
JP2015056790A (ja) 画像処理装置、画像処理方法およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant