CN113364938B - 一种景深扩展系统、方法、装置、控制设备及存储介质 - Google Patents

一种景深扩展系统、方法、装置、控制设备及存储介质 Download PDF

Info

Publication number
CN113364938B
CN113364938B CN202010142941.4A CN202010142941A CN113364938B CN 113364938 B CN113364938 B CN 113364938B CN 202010142941 A CN202010142941 A CN 202010142941A CN 113364938 B CN113364938 B CN 113364938B
Authority
CN
China
Prior art keywords
image
lens
target
image sensor
depth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010142941.4A
Other languages
English (en)
Other versions
CN113364938A (zh
Inventor
胡菁
夏若彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202010142941.4A priority Critical patent/CN113364938B/zh
Publication of CN113364938A publication Critical patent/CN113364938A/zh
Application granted granted Critical
Publication of CN113364938B publication Critical patent/CN113364938B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了一种景深扩展系统、方法、装置、控制设备及存储介质，由于在本发明实施例中，第一图像采集设备和第二图像采集设备中的第一图像传感器和第二图像传感器倾斜预先确定的角度，从而使得第一图像采集设备和第二图像采集设备的水平方向景深得到扩展，并且，本发明实施例中景深扩展系统包括两个镜头，并且第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同，这样使得第一图像采集设备和第二图像采集设备的垂直方向景深范围不同，并且这两个垂直方向景深范围在垂直方向上错开，结合两个垂直方向景深范围，达到了垂直方向景深扩展的目的。

Description

一种景深扩展系统、方法、装置、控制设备及存储介质
技术领域
本发明涉及光学技术领域，尤其涉及一种景深扩展系统、方法、装置、控制设备及存储介质。
背景技术
在光学技术领域，大景深一直以来就是成像系统的研究热点之一，对成像系统而言，大的景深意味着同一画面中有更多的清晰目标对象，对目标对象的监控范围更大。
现有技术中扩展景深的方法一般是，对于普通光学成像系统而言，最方便的增大景深的方法就是缩小孔径光阑的通光口径，但是该方法存在的问题是，随着孔径的缩小，光能量急剧衰减，并且系统的截止频率也会随之下降，从而导致成像质量下降。另一种扩展景深的方法是控制图像传感器倾斜一定角度，该方法存在的问题是，仅能扩展水平方向的景深，垂直方向的景深范围仍然较小。人脸主要出现的高度范围一般为1.2米至2米，仍然有可能存在垂直方向景深无法覆盖人脸主要出现的高度范围的问题。
发明内容
本发明实施例提供了一种景深扩展系统、方法、装置、控制设备及存储介质，用以扩展水平方向和垂直方向的景深范围。
本发明实施例提供了一种景深扩展系统，所述系统包括：包含第一镜头和第一图像传感器的第一图像采集设备、包含第二镜头和第二图像传感器的第二图像采集设备和控制设备；所述控制设备分别与所述第一图像传感器和第二图像传感器连接；
所述第一镜头和第二镜头的距离小于设定的距离阈值；
所述第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同；
所述第一图像传感器和第二图像传感器倾斜预先确定的角度；
所述第一图像传感器和第二图像传感器，分别用于将采集的每个第一图像和第二图像发送至所述控制设备；
所述控制设备，用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
进一步地，所述第一镜头和第二镜头相对于所述第一平面的倾斜角度相同。
进一步地，所述第一镜头和第二镜头的成像面与所述第一平面重合。
进一步地，所述第一镜头和第二镜头垂直方向排列时，所述第一镜头和第二镜头的焦点到所述第一图像采集设备的水平距离相同。
进一步地，所述控制设备，具体用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
另一方面，本发明实施例提供了一种景深扩展方法，所述方法包括：
获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；
针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
进一步地，所述针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域包括：
针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
另一方面，本发明实施例提供了一种景深扩展装置，所述装置包括：
获取模块，用于获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；
输出模块，用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
进一步地，所述输出模块，具体用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
另一方面，本发明实施例提供了一种控制设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述任一项所述的方法步骤。
另一方面，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一项所述的方法步骤。
本发明实施例提供了一种景深扩展系统、方法、装置、控制设备及存储介质，所述系统包括：包含第一镜头和第一图像传感器的第一图像采集设备、包含第二镜头和第二图像传感器的第二图像采集设备和控制设备；所述控制设备分别与所述第一图像传感器和第二图像传感器连接；所述第一镜头和第二镜头的距离小于设定的距离阈值；所述第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同；所述第一图像传感器和第二图像传感器倾斜预先确定的角度；所述第一图像传感器和第二图像传感器，分别用于将采集的每个第一图像和第二图像发送至所述控制设备；所述控制设备，用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
由于在本发明实施例中，第一图像采集设备和第二图像采集设备中的第一图像传感器和第二图像传感器倾斜预先确定的角度，从而使得第一图像采集设备和第二图像采集设备的水平方向景深得到扩展，并且，本发明实施例中景深扩展系统包括两个镜头，并且第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同，这样使得第一图像采集设备和第二图像采集设备的垂直方向景深范围不同，并且这两个垂直方向景深范围在垂直方向上错开，结合两个垂直方向景深范围，达到了垂直方向景深扩展的目的。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例1提供的景深扩展系统结构示意图；
图2为本发明实施例2提供的景深扩展示意图；
图3为本发明实施例2提供的人脸抠图流程示意图；
图4为本发明实施例2提供的确定目标图像的流程图；
图5为本发明实施例3提供的景深扩展示意图；
图6为本发明实施例3提供的确定目标图像的流程图；
图7为本发明实施例4提供的景深扩展过程示意图；
图8为本发明实施例5提供的景深扩展装置结构示意图；
图9为本发明实施例6提供的控制设备结构示意图。
具体实施方式
下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
实施例1：
图1为本发明实施例提供的景深扩展系统结构示意图，所述系统包括：包含第一镜头111和第一图像传感器112的第一图像采集设备11、包含第二镜头121和第二图像传感器122的第二图像采集设备12和控制设备13；所述控制设备分别与所述第一图像传感器和第二图像传感器连接；
所述第一镜头和第二镜头的距离小于设定的距离阈值；
所述第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同；
所述第一图像传感器和第二图像传感器倾斜预先确定的角度；
所述第一图像传感器和第二图像传感器，分别用于将采集的每个第一图像和第二图像发送至所述控制设备；
所述控制设备，用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
如图1所示，景深扩展系统包括：包含第一镜头和第一图像传感器的第一图像采集设备、包含第二镜头和第二图像传感器的第二图像采集设备和控制设备。其中，第一图像采集设备和第二图像采集设备可以是一台双目图像采集设备，或者第一图像采集设备和第二图像采集设备为两台图像采集设备。第一镜头和第二镜头相对于所述第一平面的倾斜角度相同。
在本发明实施例中，第一图像传感器和第二图像传感器倾斜预先确定的角度，该预先确定的角度是根据监控的目标对象距离镜头的距离确定的，当第一图像传感器和第二图像传感器倾斜预先确定的角度时，第一镜头和第二镜头的成像面与目标对象所在的第一平面平行，从而使得第一图像采集设备和第二图像采集设备的水平方向景深得到扩展。
为了实现垂直方向景深的扩展，在本发明实施例中，第一镜头和第二镜头的距离小于设定的距离阈值，并且第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同。使得第一图像采集设备和第二图像采集设备的垂直方向景深范围不同，合并第一图像采集设备和第二图像采集设备的垂直方向景深范围可以达到垂直方向景深扩展的效果，也就是说，监控的目标对象至少在第一图像采集设备和第二图像采集设备中的一个采集的图像中是清晰的。
第一图像传感器和第二图像传感器分别将采集的每个第一图像和第二图像发送至控制设备，控制设备针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。其中质量参数可以是清晰度值、信噪比参数等。
由于在本发明实施例中，第一图像采集设备和第二图像采集设备中的第一图像传感器和第二图像传感器倾斜预先确定的角度，从而使得第一图像采集设备和第二图像采集设备的水平方向景深得到扩展，并且，本发明实施例中景深扩展系统包括两个镜头，并且第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同，这样使得第一图像采集设备和第二图像采集设备的垂直方向景深范围不同，并且这两个垂直方向景深范围在垂直方向上错开，结合两个垂直方向景深范围，达到了垂直方向景深扩展的目的。
实施例2：
在本发明实施例中，第一镜头和第二镜头水平方向排列，第一镜头和第二镜头相对于第一平面的倾斜角度相同。第一镜头和第二镜头的焦距相同。因此第一镜头和第二镜头的视场范围几乎是重合的。第一镜头和第二镜头分别聚焦在不同的水平距离上，如图2所示。由于第一镜头和第二镜头是倾斜安装的，第一镜头和第二镜头的聚焦点在垂直方向上也是错开的，其中，镜头的聚焦点位于镜头的光轴上。再利用第一图像传感器和第二图像传感器倾斜，让第一镜头和第二镜头的最佳成像面与目标对象所处的第一平面重合。其中，图像传感器倾斜时，最佳成像面会发生旋转，但是镜头的焦点不会改变。
在本发明实施例中，第一图像传感器和第二图像传感器的倾斜角度是不同的。这是因为，根据沙姆定律，最佳成像面、镜头主面和图像传感器面汇聚到一线。物面发生移动和镜头主面不变，图像传感器面必然发生改变。第一镜头和第二镜头的最佳成像面与目标对象所处的平面重合，且在垂直方向相互错开。从而形成两个向无穷远无限延伸的景深范围，并且这两个景深范围在垂直方向上相互错开。合并这两个景深范围的数据可以在保证水平方向景深无穷远的前提下，拓展垂直方向景深。
在本发明实施例中，第一镜头和第二镜头的两个垂直方向的景深范围可以是如图2中所示，两个垂直方向的景深范围相互有重合区域，保证人脸可能出现的高度范围内，例如1.2米到2米，人脸至少在一个垂直方向景深范围内是清晰的。也可以是一个垂直方向景深范围用于监控人脸常出现的1.7米左右的高度，另外一个垂直方向景深范围用于监控地面的情况。两个垂直方向景深范围可由用户根据需求进行设置。
在本发明实施例中，所述控制设备，具体用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
具体的，图3为人脸抠图流程示意图，如图3所示，控制设备对其中一个图像进行人脸检测，输出人脸检测结果，包括人脸图像、来源图像传感器的编号、人脸图像对应的坐标(x,y)、人脸图像获取的时间、人脸ID等。在另一个图像的同样坐标(x,y)上也截取人脸图像，并附上同一张人脸的ID。控制设备对两个人脸图像进行筛选，选出质量参数较高的目标图像并输出。
图4为确定目标图像的流程图，如图4所示，分别接收第一图像传感器发送的第一图像和第二图像传感器发送的第二图像，对其中一张图像进行人脸检测，对另一张图像进行人脸抠图，然后将得到的人脸图像进行优选，得到目标图像并输出。
实施例3：
在本发明实施例中，第一镜头和第二镜头垂直方向排列，第一镜头和第二镜头相对于第一平面的倾斜角度相同。所述第一镜头和第二镜头的焦点到所述第一图像采集设备的水平距离相同。第一镜头和第二镜头的焦距可以相同也可以不同，当第一镜头和第二镜头的焦距不同时，可以通过对第一图像或第二图像进行裁剪，保证第一图像和第二图像视场一致即可。当第一镜头和第二镜头的焦距相同，或者仅存在较小的差别时，第一镜头和第二镜头的视场范围几乎是重合的，只是在垂直方向上错开一个距离H。第一镜头和第二镜头分别聚焦在不同的垂直距离上，焦点距离镜头的水平距离相同，并且镜头焦点的垂直距离与该镜头的景深范围的中心线的垂直距离相同，从而第一镜头和第二镜头相对于第一平面的倾斜角度相同，如图5所示。根据沙姆定律，最佳成像面、镜头主面和图像传感器面汇聚到一线。物面和镜头主面不变，图像传感器面也不变。第一图像传感器和第二图像传感器倾斜相同的角度，让第一镜头和第二镜头的最佳成像面与目标对象所处的平面重合。此时，第一镜头和第二镜头的垂直方向景深范围也会仅在垂直方向上错开一个距离H。从而形成两个水平方向无穷远无限延伸的景深范围，并且这两个景深范围在垂直方向上相互错开，如图5所示。合并这两个景深范围的数据可以在保证水平方向景深无穷远的前提下，拓展垂直方向景深。
在本发明实施例中，第一镜头和第二镜头的两个垂直方向的景深范围可以是如图5中所示，两个垂直方向的景深范围相互有重合区域，保证人脸可能出现的高度范围内，例如1.2米到2米，人脸至少在一个垂直方向景深范围内是清晰的。也可以是一个垂直方向景深范围用于监控人脸常出现的1.7米左右的高度，另外一个垂直方向景深范围用于监控地面的情况。两个垂直方向景深范围可由用户根据需求进行设置。
在本发明实施例中，所述控制设备，具体用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像；对该第一图像和第二图像进行坐标系对准处理，截取该坐标系对准处理后的第一图像中的目标对象所在的目标区域，并确定所述目标区域的第二坐标信息；将该坐标系对准处理后的第二图像中，所述第二坐标信息的区域作为该坐标系对准处理后的第二图像中的目标对象所在的目标区域。
具体的，如图6所示，由于第一镜头和第二镜头的视场范围存在差异，得到的第一图像和第二图像也存在差异，因此，控制设备获取第一图像传感器采集的第一图像，以及第二图像传感器采集的第二图像后，首先对第一图像和第二图像进行坐标系对准处理，然后在对坐标系对准处理后的第一图像和第二图像进行人脸检测，输出人脸检测结果，包括人脸图像、来源图像传感器的编号、人脸图像对应的坐标(x,y)、人脸图像获取的时间、人脸ID等。在第二图像的同样坐标(x,y)上也截取人脸图像，并附上同一张人脸的ID。控制设备对两个人脸图像进行筛选，选出质量参数较高的目标图像并输出。图6相较于图4增加了坐标系对准的步骤。
实施例4：
图7为本发明实施例提供的景深扩展过程示意图，该过程包括以下步骤：
S101：获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像。
S102：针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
所述针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域包括：
针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
实施例5：
图8为本发明实施例提供的景深扩展装置结构示意图，该装置包括：
获取模块81，用于获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；
输出模块82，用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
所述输出模块82，具体用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
实施例6：
在上述各实施例的基础上，本发明实施例中还提供了一种控制设备，如图9所示，包括：处理器301、通信接口302、存储器303和通信总线304，其中，处理器301，通信接口302，存储器303通过通信总线304完成相互间的通信；
所述存储器303中存储有计算机程序，当所述程序被所述处理器301执行时，使得所述处理器301执行如下步骤：
获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；
针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
基于同一发明构思，本发明实施例中还提供了一种控制设备，由于上述控制设备解决问题的原理与景深扩展方法相似，因此上述控制设备的实施可以参见方法的实施，重复之处不再赘述。
本发明实施例提供的控制设备具体可以为桌面计算机、便携式计算机、智能手机、平板电脑、个人数字助理(Personal Digital Assistant，PDA)、网络侧设备等。
上述控制设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口302用于上述控制设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器，包括中央处理器、网络处理器(NetworkProcessor，NP)等；还可以是数字信号处理器(Digital Signal Processing，DSP)、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
在本发明实施例中处理器执行存储器上所存放的程序时，实现获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
由于在本发明实施例中，第一图像采集设备和第二图像采集设备中的第一图像传感器和第二图像传感器倾斜预先确定的角度，从而使得第一图像采集设备和第二图像采集设备的水平方向景深得到扩展，并且，本发明实施例中景深扩展系统包括两个镜头，并且第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同，这样使得第一图像采集设备和第二图像采集设备的垂直方向景深范围不同，并且这两个垂直方向景深范围在垂直方向上错开，结合两个垂直方向景深范围，达到了垂直方向景深扩展的目的。
实施例7：
在上述各实施例的基础上，本发明实施例还提供了一种计算机存储可读存储介质，所述计算机可读存储介质内存储有可由控制设备执行的计算机程序，当所述程序在所述控制设备上运行时，使得所述控制设备执行时实现如下步骤：
获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；
针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
基于同一发明构思，本发明实施例中还提供了一种计算机可读存储介质，由于处理器在执行上述计算机可读存储介质上存储的计算机程序时解决问题的原理与景深扩展方法相似，因此处理器在执行上述计算机可读存储介质存储的计算机程序的实施可以参见方法的实施，重复之处不再赘述。
上述计算机可读存储介质可以是控制设备中的处理器能够存取的任何可用介质或数据存储设备，包括但不限于磁性存储器如软盘、硬盘、磁带、磁光盘(MO)等、光学存储器如CD、DVD、BD、HVD等、以及半导体存储器如ROM、EPROM、EEPROM、非易失性存储器(NANDFLASH)、固态硬盘(SSD)等。
在本发明实施例中提供的计算机可读存储介质内存储计算机程序，计算机程序被处理器执行时实现获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
由于在本发明实施例中，第一图像采集设备和第二图像采集设备中的第一图像传感器和第二图像传感器倾斜预先确定的角度，从而使得第一图像采集设备和第二图像采集设备的水平方向景深得到扩展，并且，本发明实施例中景深扩展系统包括两个镜头，并且第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同，这样使得第一图像采集设备和第二图像采集设备的垂直方向景深范围不同，并且这两个垂直方向景深范围在垂直方向上错开，结合两个垂直方向景深范围，达到了垂直方向景深扩展的目的。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (11)

1.一种景深扩展系统，其特征在于，所述系统包括：包含第一镜头和第一图像传感器的第一图像采集设备、包含第二镜头和第二图像传感器的第二图像采集设备和控制设备；所述控制设备分别与所述第一图像传感器和第二图像传感器连接；
所述第一镜头和第二镜头的距离小于设定的距离阈值；
所述第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同；
所述第一图像传感器和第二图像传感器倾斜预先确定的角度；
所述第一图像传感器和第二图像传感器，分别用于将采集的每个第一图像和第二图像发送至所述控制设备；
所述控制设备，用于针对每个第一图像，确定与该第一图像的采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
2.如权利要求1所述的系统，其特征在于，所述第一镜头和第二镜头相对于所述第一平面的倾斜角度相同。
3.如权利要求1所述的系统，其特征在于，所述第一镜头和第二镜头的成像面与所述第一平面重合。
4.如权利要求1所述的系统，其特征在于，所述第一镜头和第二镜头垂直方向排列时，所述第一镜头和第二镜头的焦点到所述第一图像采集设备的水平距离相同。
5.如权利要求1所述的系统，其特征在于，所述控制设备，具体用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
6.一种景深扩展方法，其特征在于，所述方法包括：
获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；其中，所述第一图像传感器和所述第二图像传感器倾斜预先确定的角度；所述第一图像传感器所属的第一图像采集设备中的第一镜头和所述第二图像传感器所属的第二图像采集设备中的第二镜头的距离小于设定的距离阈值，所述第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同；
针对每个第一图像，确定与该第一图像的采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
7.如权利要求6所述的方法，其特征在于，所述针对每个第一图像，确定与该第一图像采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域包括：
针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
8.一种景深扩展装置，其特征在于，所述装置包括：
获取模块，用于获取第一图像传感器采集的每个第一图像，以及第二图像传感器采集的每个第二图像；其中，所述第一图像传感器和所述第二图像传感器倾斜预先确定的角度；所述第一图像传感器所属的第一图像采集设备中的第一镜头和所述第二图像传感器所属的第二图像采集设备中的第二镜头的距离小于设定的距离阈值，所述第一镜头和第二镜头的焦点与拍摄目标对象所在的第一平面的垂直距离不同；
输出模块，用于针对每个第一图像，确定与该第一图像的采集时间相同的第二图像，分别截取该第一图像和第二图像中的目标对象所在的目标区域，将质量参数较高的目标区域作为目标图像输出。
9.如权利要求8所述的装置，其特征在于，所述输出模块，具体用于针对每个第一图像，确定与该第一图像采集时间相同的第二图像；截取该第一图像中的目标对象所在的目标区域，在该第二图像中获取与所述目标区域对应的区域，作为该第二图像中所述目标对象所在的目标区域。
10.一种控制设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求6或7所述的方法步骤。
11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求6或7所述的方法步骤。
CN202010142941.4A 2020-03-04 2020-03-04 一种景深扩展系统、方法、装置、控制设备及存储介质 Active CN113364938B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010142941.4A CN113364938B (zh) 2020-03-04 2020-03-04 一种景深扩展系统、方法、装置、控制设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010142941.4A CN113364938B (zh) 2020-03-04 2020-03-04 一种景深扩展系统、方法、装置、控制设备及存储介质

Publications (2)

Publication Number Publication Date
CN113364938A CN113364938A (zh) 2021-09-07
CN113364938B true CN113364938B (zh) 2022-09-16

Family

ID=77523350

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010142941.4A Active CN113364938B (zh) 2020-03-04 2020-03-04 一种景深扩展系统、方法、装置、控制设备及存储介质

Country Status (1)

Country Link
CN (1) CN113364938B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104780315A (zh) * 2015-04-08 2015-07-15 广东欧珀移动通信有限公司 摄像装置拍摄的方法和系统
CN108419009A (zh) * 2018-02-02 2018-08-17 成都西纬科技有限公司 图像清晰度增强方法和装置
CN209402651U (zh) * 2018-12-20 2019-09-17 深圳光启空间技术有限公司 一种监控设备
CN110784643A (zh) * 2018-07-31 2020-02-11 佳能株式会社 控制设备、摄像设备和存储介质
CN210075392U (zh) * 2019-08-01 2020-02-14 浙江大华技术股份有限公司 一种摄像机及监控系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10389936B2 (en) * 2017-03-03 2019-08-20 Danylo Kozub Focus stacking of captured images

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104780315A (zh) * 2015-04-08 2015-07-15 广东欧珀移动通信有限公司 摄像装置拍摄的方法和系统
CN108419009A (zh) * 2018-02-02 2018-08-17 成都西纬科技有限公司 图像清晰度增强方法和装置
CN110784643A (zh) * 2018-07-31 2020-02-11 佳能株式会社 控制设备、摄像设备和存储介质
CN209402651U (zh) * 2018-12-20 2019-09-17 深圳光启空间技术有限公司 一种监控设备
CN210075392U (zh) * 2019-08-01 2020-02-14 浙江大华技术股份有限公司 一种摄像机及监控系统

Also Published As

Publication number Publication date
CN113364938A (zh) 2021-09-07

Similar Documents

Publication Publication Date Title
TWI716008B (zh) 人臉識別方法及裝置
CN110278382B (zh) 一种聚焦方法、装置、电子设备及存储介质
US8306360B2 (en) Device and method for obtaining clear image
KR101643607B1 (ko) 영상 데이터 생성 방법 및 장치
EP3168810B1 (en) Image generating method and apparatus
US8600186B2 (en) Well focused catadioptric image acquisition
US9843787B2 (en) Generation and use of a 3D radon image
CN104363378B (zh) 相机对焦方法、装置及终端
TW201941110A (zh) 二維碼識讀方法、裝置及設備
CN107491775A (zh) 人脸活体检测方法、装置、存储介质及设备
CN108668086B (zh) 自动对焦方法、装置、存储介质及终端
TWI719472B (zh) 圖像採集方法、裝置和系統、電子設備以及電腦可讀儲存媒體
CN111062234A (zh) 一种监控方法、智能终端及计算机可读存储介质
CN108717704B (zh) 基于鱼眼图像的目标跟踪方法、计算机装置及计算机可读存储介质
CN110519510B (zh) 一种抓拍方法、装置、球机及存储介质
US9838594B2 (en) Irregular-region based automatic image correction
CN112689221B (zh) 录音方法、录音装置、电子设备及计算机可读存储介质
CN106131397A (zh) 一种多媒体数据显示的方法及电子设备
CN106056379A (zh) 一种支付终端及支付数据处理方法
CN112333356A (zh) 一种证件图像采集方法、装置和设备
CN112565672B (zh) 一种景深拓展方法、装置、电子设备及存储介质
CN114363522A (zh) 拍照方法及相关装置
CN113364938B (zh) 一种景深扩展系统、方法、装置、控制设备及存储介质
CN104994288A (zh) 一种拍照方法及用户终端
JP6674644B2 (ja) 画像処理装置及び画像処理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant