CN102612636B - 包括级联照相机和/或校准特征的详细捕获大区域图像的系统和方法 - Google Patents

包括级联照相机和/或校准特征的详细捕获大区域图像的系统和方法 Download PDF

Info

Publication number
CN102612636B
CN102612636B CN201080042498.8A CN201080042498A CN102612636B CN 102612636 B CN102612636 B CN 102612636B CN 201080042498 A CN201080042498 A CN 201080042498A CN 102612636 B CN102612636 B CN 102612636B
Authority
CN
China
Prior art keywords
image
detail
image capture
synoptic chart
chart picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201080042498.8A
Other languages
English (en)
Other versions
CN102612636A (zh
Inventor
斯图尔特·威廉·尼克松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nearmap Pty Ltd
Original Assignee
Nearmap Pty Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nearmap Pty Ltd filed Critical Nearmap Pty Ltd
Publication of CN102612636A publication Critical patent/CN102612636A/zh
Application granted granted Critical
Publication of CN102612636B publication Critical patent/CN102612636B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures
    • G01C11/06Interpretation of pictures by comparison of two or more pictures of the same area
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64GCOSMONAUTICS; VEHICLES OR EQUIPMENT THEREFOR
    • B64G1/00Cosmonautic vehicles
    • B64G1/10Artificial satellites; Systems of such satellites; Interplanetary vehicles
    • B64G1/1021Earth observation satellites
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64GCOSMONAUTICS; VEHICLES OR EQUIPMENT THEREFOR
    • B64G1/00Cosmonautic vehicles
    • B64G1/10Artificial satellites; Systems of such satellites; Interplanetary vehicles
    • B64G1/1021Earth observation satellites
    • B64G1/1028Earth observation satellites using optical means for mapping, surveying or detection, e.g. of intelligence
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64GCOSMONAUTICS; VEHICLES OR EQUIPMENT THEREFOR
    • B64G1/00Cosmonautic vehicles
    • B64G1/10Artificial satellites; Systems of such satellites; Interplanetary vehicles
    • B64G1/1085Swarms and constellations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U20/00Constructional aspects of UAVs
    • B64U20/80Arrangement of on-board electronics, e.g. avionics systems or wiring
    • B64U20/87Mounting of imaging devices, e.g. mounting of gimbals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/41Extracting pixel data from a plurality of image sensors simultaneously picking up an image, e.g. for increasing the field of view by combining the outputs of a plurality of sensors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/30UAVs specially adapted for particular uses or applications for imaging, photography or videography

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Astronomy & Astrophysics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Signal Processing (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Mechanical Engineering (AREA)
  • Evolutionary Computation (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明提供一种方法和系统,其中图像由概览和详细成像装置捕获,以便产生具有第一程度的冗余的概览图像,并捕获具有较少重叠和第二程度的冗余的详细图像。

Description

包括级联照相机和/或校准特征的详细捕获大区域图像的系统和方法
相关申请的交叉引用
本申请为2008年4月11日提交的名为“包括级联照相机和/校准特征的详细捕获大区域图像的系统和方法”的美国专利申请No.12/101,167、的部分继续申请。该文的全部内容在此全部包含作为引用。
版权和授权
在本专利文件中的文档部分包括受到版权保护的材料。版权拥有者尽管对任何人进行的在专利和商标局文献或记录中的专利文件和专利披露的传真复制无异议,但是除此之外任何情况都保留版权。
附图说明
后续的详细描述部分当与附图结合阅读时将会得到更好地理解,附图中展示了本发明的一个或多个实施例。但是,可以理解,本申请的多个实施例不限于附图中所展现的精确布置和装置。
在附图中:
图1是捕获概览和详细图像的示例系统的框图;
图2A-2B是捕获概览和详细图像的另外的示例系统的框图;
图3是捕获概览和详细图像的又一个示例系统的框图;
图4为相机支架系统的表示性框图;
图5A说明包括安装在小型单引擎飞机上的外部支架的示例性实施方式;
图5B说明在外部支架内安装的图像捕获子系统的示例性实施方式;
图5C说明用于概览和详细图像的数据采集的飞机的示例性应用;
图5D说明用于概览和详细图像的采集的示例性飞行计划;
图6A-6B是示例性说明概览和详细图像表示的框图;
图7A-7B是进一步示例性说明概览和详细图像表示的框图;
图8A-8C是说明用于捕获概览和详细图像的示例系统的两个实施例的说明性照相机配置的表格;
图9说明装配有计算/处理系统、导航/飞行计划系统、飞行计划显示器,和照相支架系统的飞机;以及
图10说明一个实施例中所描述的笔记本/膝上型计算机与控制器和GPS系统相结合工作的框图。
具体实施方式
在这里仅为方便所采用的某些术语不应当被认为本发明所披露的实施例的限制。在附图中,在多个附图中始终使用相同的参考字母和数字来指示相同的元件。
词语“右”、“左”、“较低”、“较高”表示附图中的参考方向。词语“向前”、“横向”涉及相对于大地可平移的汽车、飞机、飞船、潜水艇或其它平台的移动方向。术语包括前述特别提到的词语,其衍生词以及表义类似的词语。
关于图像这里所使用的术语的“分辨率”涉及区分成像物体的能力,分辨率典型地以厘米为单位并参考地面上的物体。当在上下文中使用时,把分辨率不同地称做地面采样距离、分辨率单元、地面分辨率或地面像素分辨率。当关于相机或其它成像装置使用时,分辨率可以涉及成像装置的像素密度。本领域技术人员将会理解,图像的分辨率(地面采样距离、分辨率单元、地面分辨率或地面像素分辨率)取决于多个参数,不仅包括相机的分辨率还包括图像系统(例如透镜组)的无界限变量和图像捕获所处操作条件(例如海拔高度)变量。
地球的航空和卫星图像在军事、商业和日常消费领域广泛应用。一些新兴应用包括在因特网上提供照片影像地图,和基于这些照片地图产生的服务(例如地图和方向、不动产评价)。通常,对影像图像地图和最近更新影像地图存在快速的需求。但是,用于生成影像地图的已有系统通常包括过度复杂的组件,需要高的资金支出和/或有高的操作成本以及其它缺点。它们在短的时间段内和操作体制下不能产生图像或另外提供高分辨率的当前需求。
通常,已有的摄影制图法图像解决方案由于在以有效方式捕获足够数量的合适的高分辨率数据方面不具有能力,因而不能满足更及时和更高分辨率图像日益增长的需求。根据符合与此方面创新相关的某些方面的原则,用于航空摄影制图的照相系统必须处理两种相互矛盾的需求。
第一,照相机系统的透镜和聚焦系统参数(已知为内部定位)是至关重要的,并且其在空间内的位置和观察角(已知为外部定位)被精确计算。已知为束调节(bundle adjustment)的摄影制图解决方案可以用来为照相机和照相机所拍摄的每幅照片计算外部和内部定位信息。这种计算通常表示能够将单独的照片合并为无缝影像地图的预先条件。实现所需等级精度的一种方式为拍摄多个图像,其带有照片间巨大数量的冗余数据。共同特征、共同要素、共同点或在众多照片中可见的图像要素可以被随后识别并用于计算相机的内部和外部参数。但是,即使在照片间具有多个冗余信息,但是如果照片是在不同时间或在不同条件(例如,不同海拔高度、一天的不同时间)下拍摄,则识别共同点和图像要素也是困难的,因为共同点或图像要素可能移动或在外表上有不同(例如因照明改变而产生的不同阴影),使那些共同点或图像要素之间的联系困难。
第二,期望航空调查快速完成,这提供几个优势,例如降低了操作成本并且最小化了由例如恶劣天气的不利环境或调查条件导致的延迟。增加捕获的以平方千米每小时测量的地面区域量的有效方式是使随后用于产生影像地图的详细高分辨率照片之间的冗余量最小化。
如此,增加照片之间的冗余以使得能够进行照片的精确照相测量定位的需求必须与降低照片之间冗余的需求相平衡从而以较低成本完成调查。
航空照相地图数据的采集可以通过装备有航空成像装置(例如相机)的飞机按照包括飞行相对直线路径、倾斜并使飞机180°转弯来以具有相对于初始路径有侧面移位的平行返回路径以及在地面指定区域被拍摄前重复图像的飞行计划飞行来完成。本领域技术人员将会理解,沿着飞行计划的直的部分以周期间隔获取图像和照片来产生纵向重叠的照片,并且飞行计划被设计为使所捕获的图片侧向重叠。
图像中的重叠可以由若干机构产生。例如,沿着轴平移或在运载工具(例如,一架飞机)中在地面之上逐渐移动的成像系统能够周期性地捕获图像。捕获的图像(照片)间的定时可以被安排为使得照片在行进方向上有重叠。由行进的前进方向导致的重叠通常涉及纵向重叠。在这样系统中一张接一张拍摄以及具有之前提到的纵向重叠的照片涉及序列照片或相邻照片。在具备向前路径和返回路径的飞行计划中,通过间隔前进路径和返回路径来产生侧向重叠,以致于沿着这些路径获得的图像具有需要的重叠度。在飞行中前进路径和返回路径的间隔造成的重叠涉及侧向重叠。最终,通过有由图像捕获(例如,照相机)系统的机械装置产生的所捕获的图像之间的重叠,成像系统或相机可以被安置在图像捕获系统中,以使得它们指向下面地面的不同区域,。
虽然纵向和侧向重叠的数目在各种应用中有变化,但是目前航空测绘系统通常的重叠是80/30,表示沿着航线的连续照片具有80%纵向重叠,相邻平行航线中的照片具有30%的侧向重叠。在这样的构形中,在一条飞行航线的前向(forward)平移过程中捕获连续图像将会产生仅20%的图像中的每个图像包括新信息。以这种方式收集数据允许在大约5张照片中被识别的特征、图像要素或共同点。依据之前提到的例子中的冗余,在共同区域中的任何点、像素、像素组、要素、像元、物体或特征具有为4的冗余(该点或物体的原物加上四个更易识别的图像)。这样,具有80%重叠的一组连续的图像可被认为具有冗余4。通常,冗余可以被描述为点出现的平均值的图像的数目减去1。被冗余地捕获的点可能或可能不被用作图像要素,但是这样的点或像素出现在该组中的多幅图像中。本领域技术人员将会理解,由于冗余的高的值,点平均(n)出现的图像的数量近似于为冗余(n-1)。在图像组中的冗余信息的数量将会通过侧向重叠进一步增加,产生仅大约14%的图像中的每张图像包括新的信息,大约86%的图像信息在最终影像地图方面是冗余的。本领域技术人员将会理解,增加的重叠,无论是纵向重叠、侧向重叠或其它操作或机械构形产生的重叠都将会在所述图像组中增加冗余。
在目前的系统和方法的一个实施例中,最少两个图像系统/子系统被用来捕获概览图像和详细图像。在另一个实施方式中,最少两个系统/子系统被用来以第一等级分辨率捕获概览图像,以第二等级分辨率捕获详细图像,第二等级分辨率高于第一等级分辨率(更多的图像细节)。如附图1所示,详细图像122、124、126被第二系统120捕获,部分或全部落在被第一系统110捕获的概览图像112的捕获区域内。所述第一和第二系统110和120能够代表性地沿着轴115平移。附图5C和5D分别阐明了从飞机沿着典型的调查路径捕获详细和概览图像。图像被如此收集以致多个的重叠存在于概览图像中,但是在详细图像中的重叠就在概览图像中的重叠数量而言显著地被降低或缩小。相似地,在本发明系统和方法中的一个或多个实施例中的详细图像的重叠数目在其它传统影像地图图像系统中获得的图像而言被大大降低。通过在概览图像中包含多个的重叠,高冗余存在于那些低分辨率图像中,那些冗余被用在与影像地图的产生相关的图像处理中。具有影像地图所需要的分辨率的所述详细图像具有更低量的冗余,因此,为这些图像降低了存储和处理的要求。
更大等级的冗余或重叠使照相机系统精确计算外部和内部定位能力增加,但是,在产生最终影像地图时增加的冗余被极大地浪费,因为在产生最终图像中,比所需要的多得多的图像数据被获得。这些过量数据的收集使得在飞行调查中所包含的时间和成本增加。例如,若常规航空成像系统以足够产生使用80/30重叠的10cm地面像素大小影像地图的高度飞行,图像数据的大约100兆兆字节(TB)将需要被收集以产生大学14TB大小的最终影像地图。如此,10cm地面像素分辨率的图像将会具有大约6(相当于在每个图像中只有大约14%新信息)的冗余,那些图像将会对照相机系统的外部和内部计算以及最终影像地图的产生有作用。
可选择地,使用本发明的方法和系统将会允许使用以占每张照片(大约1%)很低的独特区域的高冗余(例如为98)提供100cm的地面像素大小的第一相机系统,以及以占每张照片80%的高的独特区域的提供10cm的高分辨率的第二照相机系统。对于小于30TB的总的存储要求,采用这种技术和系统将会为高冗余照片集需要大约15TB并为低冗余照片集需要大约15TB。而且,由于在低分辨率照片中的高冗余(98),之前的处理能够实现更高鲁棒性(较少误差)并且与更高分辨率下的低冗余图像相比具有更高精确性。例如,若传统系统具有0.5像素均方根(RMS)差,绝对地面误差将会为5cm(0.5*10cm)。采用本发明的方法和系统,对于绝对地面误差0.1*100cm=10cm,高冗余照片将能够提供0.1像素的加速处理(post processing)RMS,。这能够通过定位具有高冗余图像的高详细图像得到进一步改善,作为结果实现绝对地面误差等级的能力与之前的系统可比或更低。
在一个实施例中,本发明的方法和系统采用使用多个照相机组,每个照相机组潜在地包括多个相机。这样,分辨率不限于现有照相机系统的分辨率。例如,当前照相机系统例如Vexcel公司提供的能够具有300万像素的分辨率,但是这是通过使用安装在极为严格的平台和进行过预对准的多个相机来实现的。采用本发明的方法和系统能够产生具有极高分辨率(例如10兆像素)的虚拟照相机系统。
由于航空摄像的需求,照相机系统一般定位用于特有的航空照相应用。常规系统不能利用商务现货供应(COTS)部件,这样不能容易地利用数字摄影方面的优点,例如专业数字单反相机(D_SLR)的相对低成本(且在不断降低)。需要采用传统方法的照相机系统的大重量和高成本鼓励或需要采用进一步抬高操作成本的双引擎涡桨飞机,这种飞机操作起来比普通单引擎商用飞机例如Cessna 210明显地更昂贵。另外,使用常规系统一般需要为安装相机对飞机进行常规的改装。与之相比,本发明的方法和系统允许,在某些实施例中,采用单引擎飞机的能力具有比双引擎飞机更低的操作成本,且不需要在飞机框架上进行改装。
采用本发明的方法和系统,能够为航空或太空影像地图调查的大区域获得高分辨率数字图像。数据采集次数相对现有系统能够大大减少。这样,资本和操作成本能够降低,飞行调查在天气允许的情况下能够很快实施。在某些实施方式中,从高空能够获得高分辨率调查,因此减少了对飞行交通控制的影响,为飞行调查人员提供了更平滑的飞行条件,通常减少了飞行员的工作量。
此外,不同型号的照相机,或采用不同角度的照相机,能够用于收集不同分辨率的图像和具有不同等级的冗余。例如,在摄影制图应用的图像数据的收集中,上空的摄像机能够用于以具有高等级冗余的相对低分辨率数据来收集概览图像,倾斜相机能够被用于收集具有低等级冗余的高分辨率数据。相机、分辨率和冗余的其它组合是可能的,既能用于摄影制图应用也能用于其它应用。采用本发明的方法和系统,不同类型的照相机能够组合起来产生最低点影像地图、倾斜影像地图或其它由调查需求指示的其它组合。
虽然在这里被描述为作为详细和概览相机的系统,但是附加照相机(或其它类型的图像捕获设备)组能够合并用于形成具有不同分辨率和不同冗余量操作的图像捕获系统的级联。通过与更高分辨率图像相比在低分辨率图像具有更高等级的冗余,在更高分辨率图像中缩小冗余量的同时获得图像处理(例如,束调节,数字高程地图产生)的合适数量的冗余是可能的。例如,这里所描述的所述方法和系统可以采用三个照相机组,第一组照相机以具有高冗余的低分辨率操作,第二组照相机以具有中等冗余的中等分辨率操作,第三组照相机以具有低冗余的高分辨率操作。通常,级联可以用于以重叠、分辨率或冗余等级的不同来捕获图像的多照相机组,以致更低分辨率图像的所产生的组比以高分辨率拍摄的图像组具有更高的冗余。本领域技术人员将会明了,照相机的级联能够被扩展为n个照相机或n个照相机组,而无特定物理布置。照相机的级联能够用于产生具有分辨率光谱和符合在高分辨率图像中的低冗余。一个照相机组,无论组织为线性式、阵列(行列格式)式,还是能被认为以结果是以具有不同地面分辨率的多个捕获图像的级联方式所组织的放大层级。作为一个例子,由于四个照相机的一个组排列成能被组织成通过以不同地面分辨率、或具有不同放大率的不同地面分辨率来捕获图像的级联方式的阵列。若照相机被组织为覆盖相同的或重叠的地面区域,则在捕获的图像之间就将会有冗余图像数据。
本领域技术人员明了,当获得图像后,不论通过这些还是通过现有技术方法,采用来产生例如影像地图或数字高程地图的许多应用的影像制图工具都是能够处理的。用于上述处理的常规软件程序包括但不限于一个或多个以下程序:Inpho公司销售的Match-AT三角测量软件,在BAE系统的商标Socet Set下销售的数字地图软件;被GIPmbH以“BINGO”销售的Socet Set 软件与影像制图束调节软件的结合;由ERDAS销售的ERDAS ER Mapper图像处理软件。此外,由众多销售商所销售的广泛多样的图像处理行业三角测量软件能够用于处理数据。
用于概览和详细图像捕获的本成像系统/子系统能够被安装在用于图像捕获的合适的运载工具(例如,飞机、太空船、潜艇、气球)或者被安装在分离的平台上。在一些实施方式中,概览和详细图像系统被安装在连接在小型飞机的壳体中(例如支架)。在一个或多个实施方式中,概览和详细图像被实质上同时捕获。图像捕获信号能够产生于为详细和概览图像的接近同时捕获提供便利的定时系统/子系统(例如系统控制器)。
在本发明的系统和方法的一个或多个实施方式中,概览图像被收集以致在前进方向上有大于或等于50%的连续捕获概览图像(之后称为连续概览图像)的重叠。在一个可选的实施方式中,在前进方向上连续概览图像的重叠最少为90%。在一个实施方式中,前进方向上连续概览图像的重叠在0%-20%的范围内。具有其它重叠结合的另外的实施方式能够被本领域技术人员理解,与在连续详细图像中的具有重叠等级一致,大大低于连续概览图像中的重叠等级。
在本发明方法和系统的一个实施方式中,第一图像捕获系统用于捕获概览区域的概览图像,第二图像捕获系统实质上在相同时间捕获概览图像最少一个部分的详细图像,冗余存在于概览图像之间和冗余存在于详细图像之间来。
就冗余而言,在一个实施方式中概览图像中的冗余高于10,然而在详细图像中的冗余少于或等于10。在另一个实施方式中详细图像的冗余接近于零。在再一个实施方式中,详细图像的冗余偶尔小于零(负值)表明在捕获图像中的间隙。由于在概览图像中的高冗余,因此在详细图像中的间隙能够被再次产生或在连续图像处理过程中被填满。
本领域技术人员可以理解,冗余的等级取决于图像被收集时所处的环境或条件而变化。在能见度较差或快速变化的环境中,冗余等级将需要极其高。例如,在雾多/灰尘多的条件下或在水下应用时,解决方式将偏向于更高的冗余。这能够通过包括使用更多的概览照相机或具有更多频繁的图像捕获(甚至接近视频帧率)的不同机制来实现。在水下应用的情况下,以接近视频率工作的多个270°传感器能够用于收集具有很高冗余的概览类型图像,而单相机能够被用于拍摄很高分辨率/低冗余图像。相反地,在随时间改变较少的环境(例如从太空中观看整个星球)中,在概览图像中的冗余等级能够被降低。
在一种应用中,概览和详细图像被同时地采集,因此确保冗余图像包括充分数目的潜在共同特征、共同要素、共同像点或图像要素,降低在照射过程中的物体移动或变化的影响。在另一个实施方式中,概览和详细图像被从大概相同的位置捕获。在另一个实施方式中,概览和详细图像被同时从相同的位置捕获。
在本发明的系统和方法的一个或多个实施方式中,图像捕获系统/子系统采用数码相机。在一个或多个实施方式中,数码相机是基于CMOS的相机或传感器。在一个可选择的实施方式中使用了一个推帚式传感器,在另一个实施方式中使用了小扫帚(whisk broom)传感器来捕获图像。用于捕获包括概览和详细图像的图像捕获机制被使用,包括但不限于模拟胶片系统、点或线扫描器、CCD成像阵列、其它基于III-V或II-VI的成像装置、超声成像器、红外(热成像)成像器。成像器按照接收电磁射线原理起作用,可以在红外、可见、或其它电磁光谱段部分工作。大篇幅和多透镜、多探测器、多探测器/透镜系统例如Gruber等在美国专利号7,009,638,Tanka等在美国专利号5757423中的描述,在这里全文内容引入作为参考也能够被用于捕获概览和详细图像。此外,例如TRACK’AIR公司所提供的多相机整合数字获得系统(MIDAS),和被配置以提供详细公制倾斜视野的的多图像收集系统能被采纳和结合于本发明的方法和系统。
在本发明的系统和方法的一个或多个实施方式中,一个计时系统/子系统被用于产生提供给图像捕获系统/子系统的图像捕获信号并引起概览和详细图像的捕获。在一个或多个实施方式中,计时系统基于具有适当软件、固件以及产生经由电缆或通过空间(无线)与图像系统/子系统可传输的电子或光学信号的伴随硬件的微控制器或微处理器。可选择地,与例如基于GPS的导航系统的导航系统结合工作或单独工作的一个专用电子硬件设备能够作为产生图像捕获信号的计时系统/子系统。在一个或多个实施方式中,图像捕获信号在以计算机(笔记本电脑或耐震计算机)为形式的系统控制器中产生,经由用于形成概览和详细照相机的图像系统的数字相机接收。在信号经由电缆(典型具有不同长度)传输过程存在固有偏差和数码相机特有的延迟,以致虽然在图像的大体同时捕获中使用一个或多个同步成像捕获信号,在图像的实际捕获时间上也存在变化。
在一个或多个实施方式中,图像捕获信号是一种出自定时系统/子系统的单向信号,不需要来自图像捕获系统/子系统的返回信号。类似地,图像捕获数据能够在本地被储存在成像装置(例如数码相机)中,并且没有图像数据需要从成像装置返回到控制器或其它数字存储设备。用于图像储存的数据储存器包括,但不限于:固态存储设备例如闪存、静态随机存储存储器(SRAM)、动态随机存取存储器(DRAM);磁存储设备(其包括但不限于:磁鼓、磁芯存储器、磁线存储器、薄膜存储器、磁扭线存储器和磁泡存储器);电磁存储设备(其包括但不限于:硬盘驱动器、光盘驱动器);光学存储设备(其包括但不限于:摄影胶片、全息存储设备、全息图,和光盘);以及磁光驱动器和数字存储设备。
图1是与本发明相关的某些方面一致的示例系统100的框图。参考图1,系统100可以包括获取至少一个概览图像112的第一系统110,以及获取详细图像122、124、126的第二系统120。系统可以如图1所示以x-y坐标系统定向,其中x轴115轴,y轴114。在一个实施方式中,图像捕获设备(例如照相机)被布置为沿着详细轴130捕获为条形的详细图像122、124、126,详细轴130通常与y轴114平行。
第一和第二系统110、120可以各个包括一个或多个图像捕获设备,例如照相机(在本文中,广义术语“图像捕获设备”经常涉及“照相机”,这是处于方便的目的而不是限制)。此外,成像阵列能够通过用于捕获图像的独立传感器的布置而产生,能够作为独立图像捕获设备或照相机。独立照相机或图像捕获设备能被布置成线性排列,沿着轴排列或以变化的角度设置以捕获地面不同区域,或布置成矩阵或阵列(行和列)。如此布置以使得图像捕获设备捕获相邻的或接近的图像区域,无论重叠还是非重叠,该设备可被认为以相邻方式布置。
在一个实施方式中,第一系统110和第二系统120在x方向上平移,周期性地捕获图像,从而在被第一系统110捕获的连续概览图像中产生高程度的重叠,在被第二系统120捕获的连续详细图像中产生较低程度的重叠。在一些实施方式中,概览图像比详细图像具有更低的分辨率,以在不产生不必要数据储存和处理需求的情况下在概览图像中产生高的冗余。
如图1所示,由于成像系统或相机的物理布置,在详细轴130的方向上详细图像122与详细图像124具有一些重叠,详细图像124与详细图像126有一些重叠。如本领域技术人员将会理解,第一系统110和第二系统120沿着x轴115的平移以周期性捕获图像考虑到要被成像为详细图像122、124、126的地面的列或条,重叠确保详细图像捕获与地面列一致的相邻的条。第一系统110和第二系统120平移周期性图像捕获导致具有在详细图像位置(level)上的第一等级的纵向重叠的相邻条/列的捕获,以及具有第二等级的纵向重叠的概览图像的捕获,第二等级的重叠高于第一等级的重叠。
在可选择的实施方式中,第一系统110和第二系统120沿着y轴114平移,在另一个实施方式中,第一系统与第二系统120分离地平移。在又一个实施方式中,概览图像112和详细图像122、124、126在不同时间各自从第一系统110和第二系统120被捕获。
此外,第一和第二系统110,120可以包括数字图像捕获设备的阵列,例如以在固定(rigid)或半固定(semi-rigid)底座上安装的多个照相机的级联或邻近组。本领域普通技术人员将理解这样的安装细节仅是示例。例如,固定或半固定安装系统能够描述能够精确地限定单照相机或多相机的相对位置的任何装置。这样的安装系统可以通过多种布置来体现,例如,可以包括物理固定(rigid)结构,例如将照相机安装到支架盒中,可以包括将独立但是互相精确定位的照相机,例如安装在多个不同的航空或卫星系统中的照相机,该系统具有本地参考系统以限定卫星之间的相对照相机定位。可选择地,第一系统110可以包括低分辨率成像阵列,第二系统120可以包括一个或多个高分辨率成像阵列,所选择的阵列如此排列或成像以使得第一系统110的低分辨率成像阵列捕获概览图像112,高分辨率成像阵列捕获详细图像122,124,126。
对于在系统110、120和/或它们的图像捕获设备之间存在的各种配置,图1的系统100也是示例的。例如,图2A-2B是说明与和这里所揭示的系统和方法相一致的第一系统110和第二系统120的不同布置的框图。在图2A和2B中,成像系统210A和220A分别与第一系统110和第二系统120一起使用。图2A示出了一种实施方式,其中第一系统110和第二系统120位于一个固定的位置,例如在空中平台上、在包括但不限于固定翼飞机和直升机的飞机之内或之上、在卫星内、基于高空或者空间的观察平台或者在海洋船舶例如轮船、潜艇或其它是水下船舶之内或之上。在这个实施方式中,第一系统110和第二系统120相邻彼此定位且一起移动。在其它应用中,相邻定位的第一系统110和第二系统120用于地面观察、地-天观察、水下成像或显微成像。
图2B示出了一种实施例,其中第一系统110与第二系统120分离地定位。在该示例实施中,第一和第二系统被独立保持但是两个(或更多个)系统的位置相对彼此是准确知道或计算的。这里,在物理结构中这能够通过例如在一个支架盒中固定安装来完成。可选择地,在第一系统110和第二系统120之间的相对位置的轨迹将会允许使用两个完全独立的平台。在一个实施方式中,第一飞机或其它类型的交通工具可能使用第一系统110产生概览图像,第二飞机或其它类型的交通工具使用第二系统120产生详细图像。能够利用导航或惯性指示系统来决定系统的相对位置。再一个实施方式中系统安装在具有用于在卫星间定义相对相机定位的本地参考系统的多个独特卫星系统。
图3是与和这里的创新相关的特定方面一致的另一个示例系统的框图。如图3所示,单独的平台或模块310可以包括或实现第一系统110和第二系统120。单独平台可以是第一系统和第二系统固定连接、能够一起平移或移动的任何布置或配置。根据另外的实施,平台310也可以包括第一和第二图像捕获设备或照相机的各种布置和/或阵列。关于图3,图像捕获系统210A和210A’表示以第一分辨率捕获概览图像的第一成像系统。以第一分辨率捕获概览图像的图像捕获系统的数目能够如图像捕获系统210AM所示那样进行扩展,这样多个相机和其它成像装置能够被用于产生概览图像112。在一个实施例中,第一成像系统210A的每一个,210A’到210AM用于拍摄完整概览图像112,在另一个实施方式中,第一成像系统210A,210A’到210AM被布置成拍摄概览图像112的部分这样来支持全部概览图像的组装。在一个实施方式中,第一成像系统210A,210A’到210AM沿着详细轴130布置。在可选择地实施方式中,第一成像系统210A,210A’到210AM沿着x轴115、阵列格式或在概览图像112中提供被捕获的概览区域的重叠的其它任何布置方式布置。正如之前所言,成像装置的布置和/或阵列能够被配置成产生分辨率范围的成像系统的级联,随着分辨率的上升而冗余逐渐降低。
再次参考附图3,由第二成像系统220A,220A’,220AN分别捕获的详细图像122,123,126,具有比概览图像112更高的分辨率。在一个实施方式中,详细图像122,124,126是沿着详细轴130对准的重叠的详细图像,详细轴130基本上与y轴114相平行。在另一个实施方式中,第二成像系统220A、220A’、和220AN均沿着x轴115以阵列格式或以允许例如详细图像122,124和126的详细图像的捕获的任何其它重叠或非重叠格式来设置。
在一个实施方式中,第一成像系统210A,210A’到210AM和第二成像系统220A,220A’,和220AN均基于相同类型的成像系统,例如在光谱的可见部分工作的数码相机。在一个可选的实施方式中,在第一成像系统210A,210A’到210AM以及第二成像系统220A,220A’,和220AN中的独立成像系统不同。例如第一成像系统220A可能在光谱的可见区域工作,而第二成像系统的220A’能够在光谱的红外部分工作。类似地,第二成像系统220A,220A’,和220AN可以为不同类型(例如可见和红外)和能够被组织为使得详细图像122被捕获两次或更多次,两个或更多个成像系统每个一次。本领域技术人员将会理解,详细图像122,124,126能够被多种类型的成像系统(例如可见或红外)捕获,或者每个详细图像被单一类型成像系统捕获。
参考图4,披露了包括具有第一概览相机视野411A的第一概览相机410A、具有第二概览相机视野411B的第二概览相机(图4中未示出)、具有第一详细视野421A的第一详细相机420A、具有第二详细相机421B的第二详细相机420B、具有第三详细相机视野421C的第三详细相机420C、具有第四三详细相机视野421D的第四详细相机420D、具有第五详细相机视野421E的第五详细相机420E、具有第六详细相机视野421F的第六详细相机420F、具有第七详细相机视野421G的第七详细相机420G、具有第八详细相机视野421H的第八详细相机420H、具有第九详细相机视野421I的第九详细相机420I、具有第十详细相机视野421J的第十详细相机420J、具有第十一详细相机视野421K的第十一详细相机420K的单独模块400。本地数据存储可以用于每个相机,因此消除了写入返回到中央存储器或存储位置的需求。本地数据存储能够包括任何类型的数字存储器包括但不限于闪存或其它类型的非易失存储器,易失存储器和用于在存储器中保留信息的关联系统,磁盘驱动器,或其它类型的数字存储介质或系统。可选择地,相机可以分享本地存储。至于后者,在此的一些创新包括压缩和/或储存与每个相机而不是捕获被传输到和储存到中央存储系统中的照片的要求相关的图像特征。每一相机的平行压缩和照片储存增加了允许以更快速率飞行调查以使更多数据被储存和飞行时间能够增加的相机系统的最大产量和最大存储量。每一相机的这样的平行压缩和存储也增加了储存可靠性,因为这允许每个相机使用紧凑式闪存或其它固体介质。
现有的数字成像系统通常将原始(raw)线性存储器的数据作为存储到中央储存系统中的12-16比特数据来进行存储。相反,通过并行地为每个相机执行压缩,数据能够被转化为例如YcbCr伽玛色彩空间。这允许数据被储存为8位数据,因为增加的位深度典型地仅对于原始线性数据需要,进一步允许在每个照相数据存储之前进行图像压缩。转化为伽玛颜色空间以及压缩能够在存储空间需求方面约减少10倍。例如,在具有14个相机的系统中,每个相机具有各自的32GB的紧凑式闪存卡,全部448GB储存量能够与多于大约4500GB或4.5TB的原始未压缩照片数据的存储量相等。并行操作消除了传送图像数据或从相机到飞行控制计算机系统的任何其它信号的需求,从而通过减少布线和发信号需求减少了后加工需求并增加了鲁棒性。
飞行计划和图像捕获定时子系统能够被用于产生一个或多个被送到例如图4中所示相机的捕获信号。在一个实施方式中,单一捕获信号从飞行计划和图像捕获定时子系统发送至每一相机。但是,电缆长度上的不同、相机之间的延迟、和其它变量可以导致照片被在轻微不同的时间被拍摄。进而,相机的本地时钟可能不精确或者表现出漂移。
在一个实施方式中,典型地包含CMOS成像传感器阵列的数码相机被用于捕获概览和详细图像。在一个可选择的实施方式中,由光学传感器的线性阵列构成的推帚式传感器能够用于捕获详细图像和作为详细图像捕获系统。在又一个实施方式中,小扫帚或聚光传感器能够被用于产生详细图像。当使用小扫帚传感器时,基于反射镜的或其它类型的扫描系统通过将单一斑点成像到传感器来产生图像。所述扫描系统能够与计时和导航系统相结合,以使得扫描率与运载照相系统的运载工具的向前移动适当地同步,以及产生适当分辨率的详细图像。
本领域普通技术人员将会认识到详细相机的数量(即照相机的数量和阵列的数量)可以被调节以提供所需的图像结果。与这样的实施方式相一致的优点包括配置和/或再配置单元400以瞄向不同调查需求,例如垂直或倾斜(高或低)图像或其结合的能力。本领域技术人员理解,垂直图像或照片是以指向为几乎尽可能垂直的照相机轴拍摄的,而倾斜图像或照片涉及以远离垂直有意倾斜的照相机轴拍摄的图像或照片。同样,本领域技术人员将会理解,高倾斜图像和照片一般包括水平方向,而低倾斜图像或照片一般不包括水平方向。
参见图4,多个相机能够布置在单个模块400中,以使得相机一般沿着模块轴450对准。在一个实施方式中,模块轴450几乎与图3中典型的处于飞机或其它的运载工具的向前行进的方向的x轴115相平行。在该实施方式中详细轴130(图4未示出)基本上垂直于模块轴450,详细相机被布置为产生基本上平行于图3中y轴114的图像列。
图8A和图8B提供了可以被用于一个实施方式中的相机排列细节的例子。在此揭示的该特定例不是被作为限制也不是以其它任何方式限制在此所揭示的能够被应用为成像系统的许多类型和配置的方法和系统的使用。例如,虽然示例布置细节涉及佳能或尼康设备,但其它类型的成像装置或其组合,或相机组、画幅或透镜的不同组合也可以采用。在一个实施方式中,相机被如此分组以致概览相机(佳能或尼康品牌的相机)包括图8A中表格I中注解的以28mm透镜指向垂直向下的相机的形式的一个垂直概览相机,和具有28mm以相对垂直方向35度的角指向尾部(或飞机或其它载具运动相反方向)的后概览相机。在该实施方式中,佳能高分辨率相机包括由5个具有200mm透镜组成的组间距为-19°、-9.5°、0°、9.5°、19°、和28.5°的垂直组;包括由3个具有200mm透镜组成的组间距为38°、47.5°、57°的侧倾斜组;包括由3个具有135mm透镜组成的具有以相对垂直方向倾斜50°且组间距为-14.5°、0°、14.5°的后倾斜组;在尼康高分辨率相机的情形下,6个具有180mm透镜的相机且组间距为-21°、-10.5°、0°、10.5°、21°、31.5°的垂直组;3个具有180mm透镜的相机且组间距为42°、52.5°、63°的侧倾斜组;3个具有135mm透镜的相机以相对垂直方向倾斜50°且组间距为-14.5°、0°、14.5°的后倾斜组。
在一个可选择的实施方式中,第一套相机安装成广角透镜和被用于捕获具有巨多个重叠例如50/99(50%侧向99%前向)的照片。被这些相机捕获的照片每个照片重叠很大的区域,高程度的重叠和冗余导致共同特征、共同元、共同点或图像要素点在比之前系统的更多的照片中可见,因此在甚至不利用稳定平台的情况下使内部的和外部定向的精确测定成为可能。第二套相机能够安装成具有更长焦距的透镜和被用于捕获为调查产生详细影像地图的详细像。低量重叠被用在这些相机中来最小化冗余和最大化用于详细调查的照片像的使用,大大降低了全部调查所需要的一切成本和时间。
图5阐述了包括安装在小型单引擎飞机510上的外部支架的一个示例性实施方式。参见图5A,在本发明的一个实施方式中,用于相机系统的相机安装在作为单独模块400的支架或可移除壳体520内。同样,不需要对飞机进行改装的情况下在标准小型飞机510上例如Cessna 210上使用该相机系统是可能的。图5B阐述了图像捕获系统的一个示例性实施方式。如图5B所示,支架或可移除壳体520可以包括成组或被布置成关于图4,8A和8B之前描述的多个概览和详细相机410和420。图5A和5B所示的实施方式提供无需稳定安置平台的高精确度,也使充足的重量和体积减少能够允许照相系统安装在无人航空载具(UAV)中。
飞行调查能够在不同高度和不同飞行时间执行并具有不同结果的分辨率。例如,与图8A和8B中所说明的相机构形相一致,飞行调查以1个具有28mm焦距透镜的垂直佳能1Ds MkIII相机和5个具有200mm焦距的垂直佳能1DsMkIII相机在8000英尺高度来执行,能够产生具有7.5cm分辨率的最终影像地图数据。在该例子中,典型的50km×40km的城市以330km2/hr的捕获速率能够在6小时的飞行时间内被捕获。
在另一个实施方式中,与图8C所示的相机的构形一致,以1个具有28mm焦距垂直概览佳能1Ds MkIII相机和9个具有300mm焦距的垂直佳能1DsMkIII在10000英尺高度,产生于4个小时飞行时间来捕获6.5cm的结果分辨率的典型的50km×40km城市能够得到捕获速率为500km2/hr。
更高的分辨率能够通过使用以上讨论过的相同的实施方式获得,或者在以更低高度使用更长飞行时间(例如3.5cm分辨率在9小时的飞行调查中捕获)的其它实施方式获得。之前提到的飞行调查只是表示性的例子,而不是为了限制在各种广泛条件下可以实施的本发明的范围。对于水下应用,高度能够被理解为被与之上的水平面的距离相比较。
本领域技术人员将会领会,成像系统的许多构形能够与在高度和分辨率之间的不同关系一起使用,所有这些构形都处于本发明的精神和范围内。在一个实施方式中,每1000英尺高度产生1cm的分辨率(例如3000英尺高度具有3cm分辨率,7000英尺高度具有7cm分辨率)。在第二个实施方式中,以cm表示的地面点分辨率就是以英尺表示的高度除以900。在第三个实施方式中,以cm表示的地面点分辨率就是以英尺表示的高度除以800。在第四个实施方式中,以cm表示的地面点分辨率就是以英尺表示的高度除以2000。
参见图5C,在一个实施方式中该方法和系统的使用被阐释,其中飞机510装备了支架或可移除壳体520,以速度v 532、给定高度h 530(表现为沿着z轴117)行进,该行进通常在由x轴115和y轴114所定义的x-y平面内执行。
图5D为在x-y平面内的调查的飞行计划,该飞行计划具有第一长段560,接着是转弯564,接着是返回长段568。重复长段,转弯和返回长段的组合能够被用于产生调查区域的飞行计划。
这里所描述的方法和系统也能包括产生用于产生特殊区域的影像地图的信号和捕获指明表示图像应当被捕获的概览和详细图像捕获系统的捕获信号的合适飞行计划的飞行计划和定时系统/子系统。在一个实施方式中,飞行计划包括例如高度、行进方向、空气速度、路径点和转回地点的变量。本领域技术人员将会理解,飞行计划指引飞行员(或无人或自动控制飞船情况下的载具)来以允许具有合适等级侧面重叠图像的产生的图案飞行。虽然在前行方向上的重叠由图像捕获信号控制,但在侧向的重叠主要由在飞行中与之前平行的路径相关的飞机/载具的路径所控制。
在一个实施方式中,飞行计划和定时系统/子系统接收来自包括基于地面(例如VOR,LORAN)和卫星系统(例如GPS和WAAS)的导航系统输入信号来确定位置。从惯性系统产生的信号能够用于与定位信号相结合来确定速度的改变、节距的改变,以及飞机的偏航和摇晃。在一个实施方式中,方向上的快速改变可以使用微机电系统(MEMS)。与预期飞行计划短期和长期的偏离能够由飞行计划和图像捕获定时子系统包括,以指明对飞行计划的修正,或调节被送到概览和详细图像捕获系统的捕获信号。
在一个实施方式中,飞行计划和图像捕获定时子系统基于具有附加导航设备(例如,GPS,DGPS)、显示器和程序编制的个人计算机,其使飞行计划能够被研发并产生与需要的重叠一致的图像捕获的定时信号。在一个可选的实施方式中,专用硬件被用于飞行计划研发和图像捕获信号产生。
图6A-6B为阐释示范的概览和详细图像的表示图。图6A示出了一个示例性表示,多个相机被配置来最大化在多个详细相机的使用过程中获得的独有区域(非重叠)中的详细图像数据610的量,同时确保足够的重叠存在于概览图像612之间以产生所需冗余以能够成功处理成影像地图。
图6A的表示可以实现,例如采用一个概览相机(参看,例如,其中的表示性的图像612,616,620,624)来捕获内部和外部定位,以相邻方式配置的9个相机的一个组来捕获一条详细照片610,614,618,622或以比所述概览分辨率高的分辨率的每个概览照片的子部分。如前所述,这里创新的方面可能包括相机系统中相机固定或部分可调的对准,这允许照片在形成条的详细图像之间以最小重叠拍摄。进一步地,照片可以被足够多拍摄来确保重叠存在于沿着航线拍摄的连续图像之间,航线能够被组织以确保重叠存在于沿着相邻航线拍摄的详细图像的条中。不像已存在系统中需要多个重叠来执行精确束调节,本创新使最小的重叠量的使用能够存在于只对随后执行产生无缝影像地图详细图像足够的随后的、连续的、相邻的条。作为结果,详细相机的相片的一条冗余需要来自远远少于已有系统,大大减少了调查时间和成本。
此外,和需要的一样多的附加详细相机可以被构形为相邻或级联样式,以便为例如天底上层(垂直)图像或来自不同视角的倾斜图像的特定视图捕获概览图像的详细子部分。这些图像能被随后处理以产生相应的天底上层的影像照片或倾斜照片。由于单个详细相机可能不具备为所需调查以足够分辨率来捕获足够分辨率的子部分,因此用于特定视图透视图的一组详细相机可以被组织为捕获所需透视图的较宽列的一条。图7A-7B阐明了进一步的实施示例概览和详细图像表示。图7A阐明了5个相机产生与详细垂直视图(例如像730,730A-E)相应的详细相机的3个相邻组的结果,4个相机产生与从可选择的航线的详细左和右倾视图相应的图像(例如,图像740),3个相机产生与从可选择的航线(例如像750,750A-C)相应的详细前和后倾斜视图。图7B阐示了多个倾斜视图通过在交互方向上飞行航线被提供的飞机或载具的移动过程中的图像捕获,例如,通过来自2组倾斜相机的4个倾斜视图。
正如之前关于图8A,8B,8C中所讨论的,特殊类型的相机能被几何布置以完成图7A-7B中所阐示的成像构形。本领域技术人员将能测定这里所揭示的适于捕获来自各种空中载具或飞机的航空数据或者在海床地图绘制的情况下来自航海载具的交互配置。
采用本申请的方法和系统收集到的图像彼此之间具有重叠,造成在两个或更多个照片中所共有的点的出现。这样的点可以涉及共同特征、共同元素、共同点或像元、地面点、特征点、地面特征点、接合点、立体像对或其它涉及在多个图像中一个点或物体的重复出现的项。在一些情况下,所述点可以包括已知位置的物体,一般把这些物体称为控制点。共同点能够被用于研发一个合适的分析立体模型,通过内部定位、相关定位和绝对定位的步骤。内部定位一般再次产生当拍摄图像或照片时存在于相机(或其它成像系统)中的几何学。分析相关定位是当照片被拍摄时存在于照片间的相关的空间方位角和位置移动的确定过程。分析绝对立体定向的过程导致控制点的相关坐标与它们在基于地面的系统中的三维坐标相关。
一般说来,考虑到从不同视角描绘一些点的一组图像,束调节的常规处理能够被用于在单一解决方式中调节所有影像制图测量至地面控制值(地面点或共同点)。束调节能够包括确定所有物体点的物体空间坐标和所有照片的外部定向参数。束调节同时提炼地面点位置的评估,和对于每一照片外部和内部定向的评估。地面点位置被识别为每张照片中的特征。束调节的要求是最大化其中地面点能被识别的照片的平均数和最大数。如果地面点在太少照片中被识别,那么解决方案不是特别严格并因精确误差和束的增加风险而损害,其中不正确识别的地面点已经在束解决方案中使用。束调节能够提炼具有不同姿态的照片,例如照片可以具有不同倾斜角或可以垂直定向。关于束调节的进一步信息对于本领域技术人员而言是已知的并且可以在下述参考文献中找到:Paul Wolf和Bon Dewitt(McGraw Hill,2000)的“Elements of Photogrammetry withApplications in GIS,3rd edition”,Zhang等人的美国专利号6,9962,54,以及Bill Triggs,Philip McLauchlan,Richard Hartley and Andrew Fitzgibbon在Computer Science第1882期(Springer Verlag,January 2000)的讲义中出现的“Bundle adjustment-a modern synthesis”,所有这些文献在这里引入全部内容并作为参考。
在一个实施例中,成像捕获系统被安装在飞机内或上,以采用这里所描述的该方法和系统来拍摄合适的原像和以将飞机飞行员引导至正确的坐标上。图9阐示了根据本实施例的配备有必要设备的示例性飞机。准备飞机510使其具有支架或固定安装在飞机510上的可拆卸壳体520。在一个实施例中,该安装通过乘客侧飞机门的移除以及具有门/支架底座的门的替换来执行。
支架或可拆卸壳体520包括多个如之前的图4中所描述的相机。在一个实施例中,一系列可拆卸门覆盖支架或可移除壳体520中的相机以在包括起飞和降落的飞行部分过程中保护相机。在一个实施例中,传感器被包含在相机门中,以便该门的状态能够被监控。在一个实施例中,相机和支架或可拆卸壳体520的门被连接至计算机1000。在这个实施例中,计算机1000运行为在飞行中控制和操作系统的元件而研发的软件。虽然以笔记本电脑图示,但是计算机1000可以为包括笔记本电脑、加强型个人电脑、嵌入到飞机内的系统、专用计算机、例如个人数字助理或蜂窝电话等便携式设备的任何计算机。
再次参见图9,计算机1000被连接到产生反馈以追踪该飞机当前的位置和将该当前的位置记录存储到计算机1000上的全球定位系统(GPS)单元1010。相机控制单元1030控制在支架或可拆卸壳体520中的相机阵列,包括发射自聚焦的信号和拍照。在图10中阐示的该实施方式中,GPS单元1010起导航系统/子系统的作用,而计算机1000起定时系统/子系统的作用。在一个可替换的实施例中,计算机1000包含了导航系统的功能并能够包括GPS单元1010。在再一个实施例中,一个专用单元具有提供导航和定时功能的子系统。
飞行显示器1020被连接到计算机1000上以及在一个实施例中显示飞行的细节。在一个可替换的实施例中,飞行显示器1020显示了系统的状态,总的来说包括门的状态和在获取图像中相机的活动。该飞行显示器1020可以是来自个人计算机1000的监视器,附加外部监视器或嵌入到飞机中的监视器。飞行显示器1020可以为触敏监视器并允许命令输入到系统中。可选择地,鼠标,键盘或其他输入设备(未显示)可以被用于接收使用者的输入。
在一个实施例中,该系统向飞机510的飞行员显示各种信息。该信息可以被显示到飞行显示器1020上、计算机1000的显示器上或飞行员可用的其它显示器上。该系统显示计划区域,定义几何区域和在该地图中定义实际区域来捕获的调查数据的航线。
图10阐示了与控制器1120和GPS设备1122一起联同工作的计算机1000的框图。在一个实施例中,计算机1000包括至少一个连接到USB集线器1112上的通用串行总线(USB)接口1110。USB集线器1112具有允许设备与计算机1110连接和通信的多个附加USB接口。USB接口114被连接到控制器1120上。本领域技术人员将会理解,其它总线类型、有线或无线、串行或并行能被用于图10的部件的相互联系。在一个实施例中,控制器1120是一个相机控制单元(例如相机控制单元1030),其控制在支架和可拆卸壳体520中的相机,制定在该相机(或该多个相机)中的自聚焦命令1130和快门命令1132。该控制器1120也从门传感器1134读取以测定门是否保护在支架或可拆卸壳体520中的相机的打开或关闭。该门可以响应读取门传感器1134的控制器1120视情况打开或关闭。GPS设备1122通过USB口1116,1118连接到USB集线1112。GPS设备1122读取该设备的当前的几何坐标并将该数据传送给计算机1000。控制器1120能够发送使得从可拆卸壳体520拍摄照片的信号。
本文前披露的实施方式可以与任何硬件和软件结合实施。若实施为计算机实施设备,本文的实施采用之前描述的执行所有步骤和功能的设备。
本文的实施方式可以包括制造(例如,一个或多个计算机程序产品)包括例如计算机可用或可读媒介的物品。媒介在前文中已作体现,例如,用于提供和便于本文前披露实施原理的包括计算机可执行指令的计算机可读程序编码方法,制造的产品可以包括部分计算机系统或单独售卖。
虽然特定的实施例已经在之前的发明内容部分详细描述和在伴随的附图阐述过,本领域技术人员将会领会那些细节之处根据所揭示的全部教导及其广阔的发明概念的许多修改和改变均可以发展。可以理解的是,因此,目前披露的范围不局限于特定实施例和在这方面披露的实施方式,而是要重叠通过所附的权利要求书及其等价方式所定义的精神和范围内。

Claims (38)

1.一种图像捕获系统,包括:
第一图像捕获子系统,包括被配置用于在第一情况下及时捕获概览区域的至少一幅概览图像的第一成像装置,和
第二图像捕获子系统,包括被配置用于与所述第一情况实质上同时地、及时捕获所述概览区域的至少一部分的至少一幅详细图像的第二成像装置,所述至少一幅详细图像具有高于所述至少一幅概览图像的对应部分的分辨率,所述第一和第二图像捕获子系统被配置以使多个概览图像重叠用于造成在多个概览图像中出现的图像要素的概览冗余,并且多个详细图像重叠用于造成在多个详细图像中出现的图像要素的详细冗余,
其中多个概览图像之间的重叠百分数大于多个详细图像之间的重叠百分数,并且
在捕获所述多个概览图像和所述多个详细图像之后,使用所述多个概览图像和所述多个详细图像,基于束调节处理确定详细图像的内部定位和外部定位,用于确定详细图像要素的三维坐标。
2.根据权利要求1所述的图像捕获系统,其中所述第一图像捕获子系统包括被设置以捕获所述多个概览图像的多个成像装置。
3.根据权利要求2所述的图像捕获系统,其中所述多个成像装置被设置以实质上同时捕获所述多个概览图像。
4.根据权利要求2所述的图像捕获系统,其中以相邻方式设置所述多个成像装置以捕获所述多个概览图像。
5.根据权利要求1所述的图像捕获系统,其中使所述第一和第二图像捕获子系统处于互相接近的位置。
6.根据权利要求1所述的图像捕获系统,其中所述概览冗余表示概览图像要素在多个概览图像中出现的程度,并且
所述详细冗余表示详细图像要素在多个详细图像中出现的程度。
7.根据权利要求6所述的图像捕获系统,其中所述概览图像要素以及所述详细图像要素包括一个或多个可识别特征、区域或标记,所述一个或多个可识别特征、区域或标记对应于在与所述至少一个概览图像和所述至少一个详细图像中捕获的概览区域。
8.根据权利要求1所述的图像捕获系统,其中所述概览冗余大于10幅图像。
9.根据权利要求1所述的图像捕获系统,其中所述详细冗余小于或等于10幅图像。
10.一种图像捕获系统,包括:
第一图像捕获子系统,包括被配置用于在第一情况下及时以第一地面分辨率捕获概览区域的至少一幅概览图像的第一成像装置,和
第二图像捕获子系统,包括被配置用于与所述第一情况实质上同时地、及时捕获所述概览区域的至少一部分的至少一幅详细图像的第二成像装置,所述至少一幅详细图像具有高于所述第一地面分辨率的第二地面分辨率,其中
通过第一重叠,所述至少一幅概览图像与预先获取捕获的概览图像重叠;
通过第二重叠,所述至少一幅详细图像与预先获取捕获的详细图像重叠,所述第一重叠的重叠百分数大于所述第二重叠的重叠百分数,并且
在捕获所述至少一幅概览图像和所述至少一幅详细图像之后,使用多个概览图像和多个详细图像,基于束调节处理确定详细图像的内部定位和外部定位,用于确定详细图像要素的三维坐标。
11.根据权利要求10所述的图像捕获系统,其中所述第一和第二图像捕获子系统被配置以使多个概览图像造成在所述多个概览图像之间的图像要素的冗余,并且多个详细图像造成在所述多个详细图像之间的图像要素的冗余。
12.根据权利要求10所述的图像捕获系统,其中所述第一图像捕获子系统包括被设置以捕获一个或多个概览区域的多个概览图像的多个成像装置。
13.根据权利要求12所述的图像捕获系统,其中所述多个成像装置被设置以实质上同时捕获所述多个概览图像。
14.根据权利要求12所述的图像捕获系统,其中以相邻方式设置所述多个成像装置以捕获所述多个概览图像。
15.根据权利要求12所述的图像捕获系统,其中以级联方式设置所述多个成像装置以捕获所述多个概览图像。
16.根据权利要求10所述的图像捕获系统,其中所述第二图像捕获子系统包括被布置以捕获一个或多个详细区域的多个详细图像的多个成像装置。
17.根据权利要求16所述的图像捕获系统,其中所述多个成像装置被布置以实质上同时捕获所述多个详细图像。
18.根据权利要求16所述的图像捕获系统,其中以相邻方式设置所述多个成像装置以捕获所述多个详细图像。
19.根据权利要求16所述的图像捕获系统,其中以级联方式设置所述多个成像装置以捕获所述多个详细图像。
20.根据权利要求10所述的图像捕获系统,其中使所述第一和第二图像捕获子系统处于互相接近的位置。
21.根据权利要求10所述的图像捕获系统,其中所述第一和第二图像捕获子系统被安装在飞机内或飞机上。
22.根据权利要求21所述的图像捕获系统,其中所述第一和第二图像捕获子系统被设置在飞机上的壳体中。
23.根据权利要求22所述的图像捕获系统,其中所述壳体被可拆卸地附加在所述飞机上。
24.根据权利要求10所述的系统,其中第二成像装置是数码相机。
25.根据权利要求10所述的系统,其中第二成像装置是CMOS传感器。
26.根据权利要求10所述的系统,其中所述第二图像捕获子系统包括被设置为推帚式传感器的多个第二成像装置。
27.根据权利要求10所述的系统,其中至少一个第二成像装置是小笤帚传感器。
28.根据权利要求10所述的系统,其中所述概览图像被存储在所述第一图像捕获子系统的所述第一成像装置内,不向所述第一成像装置外部的存储装置传输所述概览图像。
29.根据权利要求10所述的系统,其中所述详细图像被存储在所述第二图像捕获子系统的所述第二成像装置内,不向所述第二成像装置外部的存储装置传输所述详细图像。
30.一种捕获图像的方法,该方法包括:
(a)通过第一图像捕获子系统捕获概览区域的第一概览图像,该第一概览图像具有第一地面分辨率,
(b)通过第二图像捕获子系统在实质上与所述第一概览图像的捕获的同时捕获所述概览区域的至少一部分的第一详细图像,所述第一详细图像具有高于所述第一地面分辨率的第二地面分辨率;
(c)沿着第一轴平移所述第一和第二图像捕获子系统;
(d)通过所述第一图像捕获子系统捕获具有第一地面分辨率的第二概览区域的第二概览图像,其中所述第一和第二概览图像相互具有至少一个重叠的概览部分;
(e)通过所述第二图像捕获子系统捕获具有第二地面分辨率的第二详细图像,其中所述第一和第二详细图像相互具有至少一个重叠的详细部分,所述重叠的详细部分的重叠百分数实质上小于所述第一和第二概览图像的重叠的概览部分的重叠百分数;和
(f)在捕获所述第一概览图像和第二概览图像以及所述第一详细图像和第二详细图像之后,使用所述第一和第二概览图像以及所述第一和第二详细图像,基于束调节处理确定所述第一和第二详细图像的内部定位和外部定位,用于确定详细图像要素的三维坐标。
31.根据权利要求30所述的方法,其中所述重叠的概览部分和所述重叠的详细部分中的至少一个造成关于所述第一和第二概览图像的概览冗余和关于所述第一和第二详细图像的详细冗余。
32.根据权利要求31所述的方法,其中所述概览冗余表示概览图像要素在多个概览图像中出现的程度,并且
所述详细冗余表示详细图像要素在多个详细图像中出现的程度。
33.根据权利要求32所述的方法,其中所述概览图像要素以及所述详细图像要素包括一个或多个可识别特征、区域或标记,所述一个或多个可识别特征、区域或标记对应于在所述第一概览图像和所述第二概览图像的至少其中之一以及所述第一详细图像和所述第二详细图像的至少其中之一中捕获的概览区域。
34.根据权利要求31所述的方法,其中所述概览冗余大于10幅图像。
35.根据权利要求31所述的方法,其中所述详细冗余小于或等于10幅图像。
36.根据权利要求31所述的方法,其中所述概览冗余大于10幅图像,并且所述详细冗余小于或等于10幅图像。
37.根据权利要求30所述的方法,其中沿着所述第一轴的所述至少一个重叠概览部分的面积大于或等于所述第一和第二概览图像之一的面积的50%。
38.根据权利要求30所述的方法,其中沿着所述第一轴的所述至少一个重叠详细部分的面积小于或等于所述第一和第二详细图像之一的面积的20%。
CN201080042498.8A 2009-09-23 2010-09-22 包括级联照相机和/或校准特征的详细捕获大区域图像的系统和方法 Active CN102612636B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/565,232 2009-09-23
US12/565,232 US8497905B2 (en) 2008-04-11 2009-09-23 Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
PCT/IB2010/002380 WO2011036541A1 (en) 2009-09-23 2010-09-22 Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features

Publications (2)

Publication Number Publication Date
CN102612636A CN102612636A (zh) 2012-07-25
CN102612636B true CN102612636B (zh) 2015-05-06

Family

ID=42813015

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080042498.8A Active CN102612636B (zh) 2009-09-23 2010-09-22 包括级联照相机和/或校准特征的详细捕获大区域图像的系统和方法

Country Status (12)

Country Link
US (2) US8497905B2 (zh)
EP (1) EP2480860A4 (zh)
JP (2) JP2013505457A (zh)
KR (1) KR101679456B1 (zh)
CN (1) CN102612636B (zh)
AU (1) AU2010219335B2 (zh)
BR (1) BR112012006577A2 (zh)
CA (1) CA2773303C (zh)
IN (1) IN2012DN02253A (zh)
RU (1) RU2562707C2 (zh)
WO (1) WO2011036541A1 (zh)
ZA (1) ZA201201800B (zh)

Families Citing this family (168)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8497905B2 (en) 2008-04-11 2013-07-30 nearmap australia pty ltd. Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US8675068B2 (en) * 2008-04-11 2014-03-18 Nearmap Australia Pty Ltd Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
KR101733443B1 (ko) 2008-05-20 2017-05-10 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8253815B2 (en) * 2008-09-16 2012-08-28 Altia Systems Inc. Synchronized multiple imager system and method
US8514491B2 (en) 2009-11-20 2013-08-20 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8542286B2 (en) * 2009-11-24 2013-09-24 Microsoft Corporation Large format digital camera with multiple optical systems and detector arrays
US8616884B1 (en) 2009-12-01 2013-12-31 The Boeing Company Integrated live and simulation environment system for an aircraft
US9230446B1 (en) 2009-12-01 2016-01-05 The Boeing Company Integrated live and simulation environment system for an aircraft
FR2953940B1 (fr) * 2009-12-16 2012-02-03 Thales Sa Procede de geo-referencement d'une zone imagee
US9126700B2 (en) * 2010-01-25 2015-09-08 Tarik Ozkul Autonomous decision system for selecting target in observation satellites
US10664940B2 (en) * 2010-03-05 2020-05-26 Digimarc Corporation Signal encoding to reduce perceptibility of changes over time
US8971567B2 (en) * 2010-03-05 2015-03-03 Digimarc Corporation Reducing watermark perceptibility and extending detection distortion tolerances
WO2011143501A1 (en) 2010-05-12 2011-11-17 Pelican Imaging Corporation Architectures for imager arrays and array cameras
EP2423871B1 (en) * 2010-08-25 2014-06-18 Lakeside Labs GmbH Apparatus and method for generating an overview image of a plurality of images using an accuracy information
US8986011B1 (en) 2010-09-13 2015-03-24 The Boeing Company Occlusion server for an integrated live and simulation environment for an aircraft
WO2012044297A1 (en) 2010-09-30 2012-04-05 Empire Technology Development Llc Automatic flight control for uav based solid modeling
US8842168B2 (en) * 2010-10-29 2014-09-23 Sony Corporation Multi-view video and still 3D capture system
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
US8616883B2 (en) 2010-12-15 2013-12-31 The Boeing Company Simulation control system for an integrated live and simulation environment for an aircraft
WO2014055430A2 (en) 2012-10-05 2014-04-10 Trimble Navigation Limited Enhanced bundle adjustment techniques
JP5775354B2 (ja) 2011-04-28 2015-09-09 株式会社トプコン 離着陸ターゲット装置及び自動離着陸システム
WO2012155119A1 (en) 2011-05-11 2012-11-15 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
EP2527787B1 (en) * 2011-05-23 2019-09-11 Kabushiki Kaisha TOPCON Aerial photograph image pickup method and aerial photograph image pickup apparatus
JP5882693B2 (ja) 2011-11-24 2016-03-09 株式会社トプコン 航空写真撮像方法及び航空写真撮像装置
US20130265459A1 (en) 2011-06-28 2013-10-10 Pelican Imaging Corporation Optical arrangements for use with an array camera
US9183638B2 (en) * 2011-08-09 2015-11-10 The Boeing Company Image based position determination
US9477141B2 (en) 2011-08-31 2016-10-25 Cablecam, Llc Aerial movement system having multiple payloads
US9337949B2 (en) 2011-08-31 2016-05-10 Cablecam, Llc Control system for an aerially moved payload
WO2013043751A1 (en) 2011-09-19 2013-03-28 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
IN2014CN02708A (zh) 2011-09-28 2015-08-07 Pelican Imaging Corp
GB2495528B (en) * 2011-10-12 2014-04-02 Hidef Aerial Surveying Ltd Aerial imaging array
IL216515A (en) * 2011-11-22 2015-02-26 Israel Aerospace Ind Ltd A system and method for processing images from a camera set
FR2985307B1 (fr) * 2012-01-03 2015-04-03 Centre Nat Etd Spatiales Procede d'etalonnage des biais d'alignement d'un systeme d'observation de la terre exploitant des prises de vue symetriques
IL217432A (en) * 2012-01-09 2015-11-30 Rafael Advanced Defense Sys Shisha and aerial tracking system
US8953012B2 (en) * 2012-02-13 2015-02-10 Raytheon Company Multi-plenoptic system with image stacking and method for wide field-of-regard high-resolution imaging
US9412206B2 (en) 2012-02-21 2016-08-09 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
EP2817777A4 (en) * 2012-02-22 2016-07-13 Elwha Llc SYSTEMS AND METHODS FOR ACCESSING CAMERA SYSTEMS
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
US9609284B2 (en) 2012-05-22 2017-03-28 Otoy, Inc. Portable mobile light stage
WO2014005123A1 (en) 2012-06-28 2014-01-03 Pelican Imaging Corporation Systems and methods for detecting defective camera arrays, optic arrays, and sensors
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
US8619082B1 (en) 2012-08-21 2013-12-31 Pelican Imaging Corporation Systems and methods for parallax detection and correction in images captured using array cameras that contain occlusions using subsets of images to perform depth estimation
US20140055632A1 (en) 2012-08-23 2014-02-27 Pelican Imaging Corporation Feature based high resolution motion estimation from low resolution images captured using an array source
JP6122591B2 (ja) 2012-08-24 2017-04-26 株式会社トプコン 写真測量用カメラ及び航空写真装置
WO2014043641A1 (en) 2012-09-14 2014-03-20 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US20140092281A1 (en) 2012-09-28 2014-04-03 Pelican Imaging Corporation Generating Images from Light Fields Utilizing Virtual Viewpoints
JP6055274B2 (ja) 2012-10-31 2016-12-27 株式会社トプコン 航空写真測定方法及び航空写真測定システム
WO2014078443A1 (en) 2012-11-13 2014-05-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US9235763B2 (en) 2012-11-26 2016-01-12 Trimble Navigation Limited Integrated aerial photogrammetry surveys
US20140160231A1 (en) * 2012-12-12 2014-06-12 Daniel C. Middleton Multi-focal image capture and display
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
WO2014133974A1 (en) 2013-02-24 2014-09-04 Pelican Imaging Corporation Thin form computational and modular array cameras
WO2014138695A1 (en) 2013-03-08 2014-09-12 Pelican Imaging Corporation Systems and methods for measuring scene information while capturing images using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
WO2014165244A1 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
US9124831B2 (en) 2013-03-13 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
WO2014153098A1 (en) 2013-03-14 2014-09-25 Pelican Imaging Corporation Photmetric normalization in array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
EP2787319A1 (de) * 2013-04-05 2014-10-08 Leica Geosystems AG Steuerung einer Bildauslösung zur Luftbilderfassung in Nadir-Ausrichtung für ein unbemanntes Fluggerät
US9499285B2 (en) * 2013-06-28 2016-11-22 Darren D. Garber Three dimensional imaging arrangement
US9903719B2 (en) * 2013-09-03 2018-02-27 Litel Instruments System and method for advanced navigation
CN103438867B (zh) * 2013-09-06 2016-03-02 中测新图(北京)遥感技术有限责任公司 轻小型无人机机载多视立体航空遥感系统
US9269014B2 (en) * 2013-09-24 2016-02-23 Corning Incorporated Hyperspectral detector systems and methods using context-image fusion
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US20150186953A1 (en) 2013-09-27 2015-07-02 John Nicholas And Kristin Gross Trust U/A/D April 13, 2010 Automated Tool for Property Assessment, Prospecting, and Targeted Marketing
US9426343B2 (en) 2013-11-07 2016-08-23 Pelican Imaging Corporation Array cameras incorporating independently aligned lens stacks
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
EP3075140B1 (en) 2013-11-26 2018-06-13 FotoNation Cayman Limited Array camera configurations incorporating multiple constituent array cameras
KR101368325B1 (ko) * 2013-12-10 2014-02-28 한국지질자원연구원 항공 탐사용 적외선 카메라의 렌즈 손상 방지용 커버를 구비하는 항공 탐사용 항공기
CN103646384B (zh) * 2013-12-20 2016-06-22 江苏大学 一种遥感扫描成像平台飞行速度的优化方法
KR101429166B1 (ko) * 2013-12-27 2014-08-13 대한민국 비행체에 탑재되는 촬영시스템
DE102014201238A1 (de) 2014-01-23 2015-07-23 Siemens Aktiengesellschaft Verfahren und System zur Erstellung einer Vektorkarte
WO2015127397A1 (en) 2014-02-21 2015-08-27 Blue River Technology, Inc. System and method for automated odometry calibration for precision algriculture systems
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9247117B2 (en) 2014-04-07 2016-01-26 Pelican Imaging Corporation Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array
US9824276B2 (en) * 2014-04-15 2017-11-21 Open Range Consulting System and method for assessing rangeland
US9688403B2 (en) 2014-05-20 2017-06-27 Infatics, Inc. Method for adaptive mission execution on an unmanned aerial vehicle
KR102165450B1 (ko) * 2014-05-22 2020-10-14 엘지전자 주식회사 무인 항공기를 제어하는 포터블 디바이스 및 그 제어 방법
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
US12007763B2 (en) 2014-06-19 2024-06-11 Skydio, Inc. Magic wand interface and other user interaction paradigms for a flying digital assistant
US9641736B2 (en) 2014-06-20 2017-05-02 nearmap australia pty ltd. Wide-area aerial camera systems
US9046759B1 (en) * 2014-06-20 2015-06-02 nearmap australia pty ltd. Compact multi-resolution aerial camera system
US9440750B2 (en) * 2014-06-20 2016-09-13 nearmap australia pty ltd. Wide-area aerial camera systems
US9052571B1 (en) * 2014-06-20 2015-06-09 nearmap australia pty ltd. Wide-area aerial camera systems
US9185290B1 (en) 2014-06-20 2015-11-10 Nearmap Australia Pty Ltd Wide-area aerial camera systems
FR3023435B1 (fr) * 2014-07-04 2016-07-01 Thales Sa Procede d'observation d'une region de la surface terrestre, notamment situee a des latitudes elevees; station sol et systeme satellitaire pour la mise en oeuvre de ce procede
IL233684B (en) 2014-07-17 2018-01-31 Shamir Hanan Stabilizing and displaying remote images
US20160080702A1 (en) * 2014-09-11 2016-03-17 Gabriel Shachor Systems and methods for controlling multiple aerial units
JP2017531976A (ja) 2014-09-29 2017-10-26 フォトネイション ケイマン リミテッド アレイカメラを動的に較正するためのシステム及び方法
US9773155B2 (en) * 2014-10-14 2017-09-26 Microsoft Technology Licensing, Llc Depth from time of flight camera
FR3030091B1 (fr) * 2014-12-12 2018-01-26 Airbus Operations Procede et systeme de detection automatique d'un desalignement en operation d'un capteur de surveillance d'un aeronef.
US10963749B2 (en) * 2014-12-12 2021-03-30 Cox Automotive, Inc. Systems and methods for automatic vehicle imaging
US10043104B2 (en) * 2015-01-05 2018-08-07 Avigilon Fortress Corporation Automatic moving object verification
US10964226B2 (en) 2015-01-19 2021-03-30 The Boeing Company Instructional assessment system for a vehicle
US9824290B2 (en) * 2015-02-10 2017-11-21 nearmap australia pty ltd. Corridor capture
US11768508B2 (en) * 2015-02-13 2023-09-26 Skydio, Inc. Unmanned aerial vehicle sensor activation and correlation system
GB201506329D0 (en) 2015-04-14 2015-05-27 Vito Nv System and method for processing images of a ground surface
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
RU2597024C1 (ru) * 2015-05-05 2016-09-10 Владимир Германович Андронов Способ оперативного определения угловых элементов внешнего ориентирования космического сканерного снимка
US9948914B1 (en) * 2015-05-06 2018-04-17 The United States Of America As Represented By The Secretary Of The Air Force Orthoscopic fusion platform
FR3038482B1 (fr) * 2015-06-30 2017-08-11 Parrot Bloc camera apte a etre embarque dans un drone pour cartographier un terrain et procede de gestion de capture d'images par un bloc camera
US9852645B2 (en) * 2015-08-17 2017-12-26 The Boeing Company Global positioning system (“GPS”) independent navigation system for a self-guided aerial vehicle utilizing multiple optical sensors
RU2616103C2 (ru) * 2015-09-11 2017-04-12 Валентина Николаевна Панфилова Способ автоматизированного составления схемы дорожно-транспортного происшествия с использованием системы глобального позиционирования и фотокамеры
CN106558181B (zh) * 2015-09-28 2019-07-30 东莞前沿技术研究院 火灾监测方法和装置
CN105180898B (zh) * 2015-09-29 2018-11-23 南京工程学院 一种全自动地形图测绘装置及其测绘方法
US9829886B2 (en) * 2016-01-05 2017-11-28 ZEROTECH (Shenzhen) Intelligence Robot Co., Ltd. Flight control system, a circuit board assembly and a configuration method thereof
CN107000840B (zh) * 2016-01-26 2019-07-26 深圳市大疆创新科技有限公司 无人飞行器及多目成像系统
DE102016000810A1 (de) * 2016-01-26 2017-07-27 Diehl Defence Gmbh & Co. Kg Verfahren zum Bestimmen einer Position eines Objekts
US10361719B2 (en) * 2016-03-02 2019-07-23 Spookfish Innovations Pty Ltd. Method of managing data captured in an aerial camera system
US11108992B2 (en) * 2016-06-08 2021-08-31 Sony Corporation Imaging control device and method, and vehicle
US10520943B2 (en) * 2016-08-12 2019-12-31 Skydio, Inc. Unmanned aerial image capture platform
PL3293115T3 (pl) 2016-09-07 2020-04-30 Siemens Aktiengesellschaft Sposób sterowania bezzałogowymi obiektami latającymi
CN106341586A (zh) * 2016-10-14 2017-01-18 安徽协创物联网技术有限公司 一种具有三轴云台的全景相机
CA3043932A1 (en) * 2016-10-20 2018-04-26 Spookfish Innovations Pty Ltd An aerial camera boresight calibration system
US11295458B2 (en) 2016-12-01 2022-04-05 Skydio, Inc. Object tracking by an unmanned aerial vehicle using visual sensors
CN106772314B (zh) * 2016-12-09 2019-04-26 哈尔滨工业大学 一种机载测绘激光雷达扫帚式扫描系统及其扫描方法
RU2644630C1 (ru) * 2016-12-13 2018-02-13 Акционерное общество "Научно-исследовательский институт современных телекоммуникационных технологий" (АО "НИИ СТТ") Способ аэрофотосъемки наземных объектов в условиях недостаточной освещенности с помощью беспилотных воздушных судов
WO2018144929A1 (en) * 2017-02-02 2018-08-09 Infatics, Inc. (DBA DroneDeploy) System and methods for improved aerial mapping with aerial vehicles
US11069254B2 (en) 2017-04-05 2021-07-20 The Boeing Company Method for simulating live aircraft infrared seeker obscuration during live, virtual, constructive (LVC) exercises
CN107037576B (zh) * 2017-05-03 2023-08-15 中国科学院苏州生物医学工程技术研究所 光学显微成像设备及其成像方法
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
US10586349B2 (en) 2017-08-24 2020-03-10 Trimble Inc. Excavator bucket positioning via mobile device
CN107560603B (zh) * 2017-08-29 2020-06-09 南宁慧视科技有限责任公司 一种无人机倾斜摄影测量系统及测量方法
CN107784633B (zh) * 2017-09-04 2021-04-13 黄仁杰 适用于平面测量的无人机航拍图像校准方法
CN108318007B (zh) * 2018-01-26 2020-11-10 广州市红鹏直升机遥感科技有限公司 一种拼接式航空倾斜摄影的拍摄方法
CN108489469A (zh) * 2018-03-20 2018-09-04 重庆交通大学 一种单目测距装置及方法
CN108469254A (zh) * 2018-03-21 2018-08-31 南昌航空大学 一种适用于仰视和俯视位姿的大视场多视觉视频测量系统全局标定方法
KR101945019B1 (ko) * 2018-06-22 2019-02-01 전북대학교 산학협력단 농작물 재배분포 영상 획득을 위한 무인비행체 군집비행 시스템 및 그 방법
FR3087037B1 (fr) 2018-10-03 2021-06-04 Soletanche Freyssinet Procede d'acquisition d'images
CN109120869A (zh) * 2018-11-07 2019-01-01 深圳市道通智能航空技术有限公司 双光图像整合方法、整合设备及无人机
WO2020103020A1 (zh) * 2018-11-21 2020-05-28 广州极飞科技有限公司 一种测绘采样点的规划方法、装置、控制终端及存储介质
RU2706250C1 (ru) * 2018-12-11 2019-11-15 Федеральное государственное бюджетное общеобразовательное учреждение высшего образования "Ковровская государственная технологическая академия имени В.А. Дегтярева" Способ навигации наземного транспортного средства
US20200191568A1 (en) * 2018-12-17 2020-06-18 Paul Lapstun Multi-View Aerial Imaging
CN110375715B (zh) * 2019-07-15 2020-08-21 哈尔滨工业大学 一种应用于小卫星的广域重点目标确认方法、装置及计算机存储介质
JP7280006B2 (ja) 2019-08-06 2023-05-23 アルパイン株式会社 画像処理装置、画像処理方法および画像処理プログラム
CN112313725B (zh) * 2019-08-29 2022-07-05 深圳市大疆创新科技有限公司 航线生成方法、地面端设备、无人机、系统和存储介质
DE112020004391T5 (de) 2019-09-17 2022-06-02 Boston Polarimetrics, Inc. Systeme und verfahren zur oberflächenmodellierung unter verwendung von polarisationsmerkmalen
EP3796260A1 (en) * 2019-09-20 2021-03-24 Canon Kabushiki Kaisha Information processing apparatus, shape data generation method, and program
MX2022004163A (es) 2019-10-07 2022-07-19 Boston Polarimetrics Inc Sistemas y metodos para la deteccion de estandares de superficie con polarizacion.
US10943360B1 (en) 2019-10-24 2021-03-09 Trimble Inc. Photogrammetric machine measure up
CN110855883B (zh) * 2019-11-05 2021-07-20 浙江大华技术股份有限公司 一种图像处理系统、方法、装置设备及存储介质
CN114787648B (zh) 2019-11-30 2023-11-10 波士顿偏振测定公司 用于使用偏振提示进行透明对象分段的系统和方法
WO2021151047A1 (en) * 2020-01-23 2021-07-29 Impossible Objects, Inc. Camera-based monitoring system for 3-dimensional printing
US11195303B2 (en) 2020-01-29 2021-12-07 Boston Polarimetrics, Inc. Systems and methods for characterizing object pose detection and measurement systems
CN115428028A (zh) 2020-01-30 2022-12-02 因思创新有限责任公司 用于合成用于在包括偏振图像的不同成像模态下训练统计模型的数据的系统和方法
WO2021168809A1 (zh) * 2020-02-28 2021-09-02 深圳市大疆创新科技有限公司 跟随方法、可移动平台、设备和存储介质
CN111366137B (zh) * 2020-04-26 2022-02-01 湖州市南浔创业测绘与土地规划院股份有限公司 一种无人机结合地形测绘方法
WO2021243088A1 (en) 2020-05-27 2021-12-02 Boston Polarimetrics, Inc. Multi-aperture polarization optical systems using beam splitters
US11651474B2 (en) 2020-11-04 2023-05-16 Bae Systems Information And Electronic Systems Integration Inc. Real-time super resolution at long standoff ranges
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers
WO2023030632A1 (en) * 2021-09-02 2023-03-09 Esa - European Space Agency An imaging system with a scanning mirror
GB2614250A (en) * 2021-12-22 2023-07-05 Hidef Aerial Surveying Ltd Aerial imaging array
CN114693528A (zh) * 2022-04-19 2022-07-01 浙江大学 无人机低空遥感图像拼接质量评估与降冗方法及系统
CN117470199B (zh) * 2023-12-27 2024-03-15 天津云圣智能科技有限责任公司 一种摆动摄影控制的方法、装置、存储介质及电子设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4662588A (en) * 1982-04-15 1987-05-05 Charles Henderson Airplane configured with a moveable disk structure

Family Cites Families (114)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1654070A (en) * 1920-05-14 1927-12-27 Edwin H Corlett Method of and means for rectifying the scale and perspective of a picture
US2989890A (en) * 1956-11-13 1961-06-27 Paramount Pictures Corp Image matching apparatus
US5345086A (en) * 1962-11-28 1994-09-06 Eaton Corporation Automatic map compilation system
DE2940871C2 (de) * 1979-10-09 1983-11-10 Messerschmitt-Bölkow-Blohm GmbH, 8012 Ottobrunn Photogrammetrisches Verfahren für Fluggeräte und Raumflugkörper zur digitalen Geländedarstellung
US4671650A (en) * 1982-09-20 1987-06-09 Crane Co. (Hydro-Aire Division) Apparatus and method for determining aircraft position and velocity
US4802757A (en) 1986-03-17 1989-02-07 Geospectra Corporation System for determining the attitude of a moving imaging sensor platform or the like
US5104217A (en) * 1986-03-17 1992-04-14 Geospectra Corporation System for determining and controlling the attitude of a moving airborne or spaceborne platform or the like
DE3802219A1 (de) * 1988-01-26 1989-08-03 Deutsche Forsch Luft Raumfahrt Verfahren und einrichtung zur fernerkundung der erde
DE3802541A1 (de) 1988-01-28 1989-08-10 Von Braun H Dr Schmidt Grossmassstaebliches kartieren von parametern mehrdimensionaler strukturen in naturraeumen
US4876651A (en) * 1988-05-11 1989-10-24 Honeywell Inc. Digital map system
US5073819A (en) * 1990-04-05 1991-12-17 Computer Scaled Video Surveys, Inc. Computer assisted video surveying and method thereof
US5259037A (en) * 1991-02-07 1993-11-02 Hughes Training, Inc. Automated video imagery database generation using photogrammetry
US5555018A (en) * 1991-04-25 1996-09-10 Von Braun; Heiko S. Large-scale mapping of parameters of multi-dimensional structures in natural environments
DE69123578T2 (de) * 1991-09-05 1997-04-03 Nippon Electric Co Bildaufnahmesystem, das korrekte Bildsignale einer Objektzone erzeugen kann
US5247356A (en) * 1992-02-14 1993-09-21 Ciampa John A Method and apparatus for mapping and measuring land
US5251037A (en) * 1992-02-18 1993-10-05 Hughes Training, Inc. Method and apparatus for generating high resolution CCD camera images
DE4216828C2 (de) * 1992-05-21 1994-08-18 Dornier Gmbh Verfahren zur Erdbeobachtung
FR2696843B1 (fr) * 1992-10-14 1994-12-09 Matra Sep Imagerie Inf Appareil de prise de vues à distance, à haute résolution, pour porteur aérien.
US5757423A (en) * 1993-10-22 1998-05-26 Canon Kabushiki Kaisha Image taking apparatus
JP2807622B2 (ja) * 1993-12-13 1998-10-08 株式会社コア 航空機搭載総合撮影装置
DE69532126T2 (de) * 1994-05-19 2004-07-22 Geospan Corp., Plymouth Verfahren zum sammeln und verarbeiten visueller und räumlicher positionsinformation
US5596494A (en) * 1994-11-14 1997-01-21 Kuo; Shihjong Method and apparatus for acquiring digital maps
US5649032A (en) * 1994-11-14 1997-07-15 David Sarnoff Research Center, Inc. System for automatically aligning images to form a mosaic image
JPH08237407A (ja) * 1994-12-09 1996-09-13 Xerox Corp 画像タイルの相対的なアラインメントを見当合わせすると共に透視歪みを修正するための方法
JP3653769B2 (ja) 1995-02-07 2005-06-02 朝日航洋株式会社 流れ計測方法及び装置
US5604534A (en) * 1995-05-24 1997-02-18 Omni Solutions International, Ltd. Direct digital airborne panoramic camera system and method
US5963664A (en) * 1995-06-22 1999-10-05 Sarnoff Corporation Method and system for image combination using a parallax-based technique
US6122078A (en) * 1995-08-24 2000-09-19 Vexcel Imaging Gmbh Self calibrating scanner with single or multiple detector arrays and single or multiple optical systems
US6211906B1 (en) * 1995-09-07 2001-04-03 Flight Landata, Inc. Computerized component variable interference filter imaging spectrometer system method and apparatus
US5790188A (en) * 1995-09-07 1998-08-04 Flight Landata, Inc. Computer controlled, 3-CCD camera, airborne, variable interference filter imaging spectrometer system
US5798923A (en) * 1995-10-18 1998-08-25 Intergraph Corporation Optimal projection design and analysis
US5894323A (en) 1996-03-22 1999-04-13 Tasc, Inc, Airborne imaging system using global positioning system (GPS) and inertial measurement unit (IMU) data
US5798786A (en) * 1996-05-07 1998-08-25 Recon/Optical, Inc. Electro-optical imaging detector array for a moving vehicle which includes two axis image motion compensation and transfers pixels in row directions and column directions
US5844602A (en) * 1996-05-07 1998-12-01 Recon/Optical, Inc. Electro-optical imaging array and camera system with pitch rate image motion compensation which can be used in an airplane in a dive bomb maneuver
US5953054A (en) * 1996-05-31 1999-09-14 Geo-3D Inc. Method and system for producing stereoscopic 3-dimensional images
GB9622253D0 (en) 1996-10-25 1997-10-01 Council Cent Lab Res Councils Camera system
WO1998020301A1 (en) * 1996-11-05 1998-05-14 Lockheed Martin Corporation Electro-optical reconnaissance system with forward motion compensation
DE19714396A1 (de) * 1997-04-08 1998-10-15 Zeiss Carl Fa Photogrammetrische Kamera
US6078701A (en) * 1997-08-01 2000-06-20 Sarnoff Corporation Method and apparatus for performing local to global multiframe alignment to construct mosaic images
US6552744B2 (en) * 1997-09-26 2003-04-22 Roxio, Inc. Virtual reality camera
AU1715199A (en) 1997-12-22 1999-07-12 Eimar M. Boesjes Acquisition and animation of surface detail images
US6304284B1 (en) 1998-03-31 2001-10-16 Intel Corporation Method of and apparatus for creating panoramic or surround images using a motion sensor equipped camera
EP2267656A3 (en) * 1998-07-31 2012-09-26 Panasonic Corporation Image displaying apparatus und image displaying method
US6269175B1 (en) * 1998-08-28 2001-07-31 Sarnoff Corporation Method and apparatus for enhancing regions of aligned images using flow estimation
US6201897B1 (en) * 1998-11-09 2001-03-13 Earth Resource Mapping Transformation and selective inverse transformation of large digital images
US6134297A (en) * 1998-12-09 2000-10-17 Advanced Optical Technologies, Inc. Apparatus and method for removing scatter from an x-ray image using two-dimensional detectors and a single-energy spectrum x-ray source
CA2268681A1 (en) * 1999-04-12 2000-10-12 Verimap Plus Inc. Optical imaging mount apparatus
US20020063711A1 (en) * 1999-05-12 2002-05-30 Imove Inc. Camera system with high resolution image inside a wide angle view
US6587601B1 (en) * 1999-06-29 2003-07-01 Sarnoff Corporation Method and apparatus for performing geo-spatial registration using a Euclidean representation
US6255981B1 (en) * 1999-08-04 2001-07-03 Raytheon Company Method for range alignment and rotation correction of a high resolution image in an inverse synthetic aperture radar system
US6694064B1 (en) * 1999-11-19 2004-02-17 Positive Systems, Inc. Digital aerial image mosaic method and apparatus
JP4685313B2 (ja) * 1999-12-29 2011-05-18 ジオスパン コーポレイション 任意の局面の受動的な体積画像の処理方法
US7019777B2 (en) 2000-04-21 2006-03-28 Flight Landata, Inc. Multispectral imaging system with spatial resolution enhancement
US6633688B1 (en) * 2000-04-28 2003-10-14 Earth Resource Mapping, Inc. Method system and apparatus for providing image data in client/server systems
DE10034601B4 (de) * 2000-07-14 2013-05-23 Leica Geosystems Ag Kamerasystem mit mindestens zwei ersten und zweiten Kameras
US6757445B1 (en) * 2000-10-04 2004-06-29 Pixxures, Inc. Method and apparatus for producing digital orthophotos using sparse stereo configurations and external models
US6834234B2 (en) * 2000-11-22 2004-12-21 Trimble Navigation, Limited AINS land surveyor system with reprocessing, AINS-LSSRP
JP3530978B2 (ja) 2000-12-28 2004-05-24 鹿島建設株式会社 画像計測方法及び画像計測プログラムを記録した記録媒体
WO2002073129A1 (en) 2001-03-13 2002-09-19 Tacshot, Inc. Panoramic aerial imaging device
AU2002308651A1 (en) * 2001-05-04 2002-11-18 Leberl, Franz, W. Digital camera for and method of obtaining overlapping images
US6996254B2 (en) 2001-06-18 2006-02-07 Microsoft Corporation Incremental motion estimation through local bundle adjustment
US7509241B2 (en) * 2001-07-06 2009-03-24 Sarnoff Corporation Method and apparatus for automatically generating a site model
US20040257441A1 (en) 2001-08-29 2004-12-23 Geovantage, Inc. Digital imaging system for airborne applications
US20030048357A1 (en) 2001-08-29 2003-03-13 Geovantage, Inc. Digital imaging system for airborne applications
US7149366B1 (en) 2001-09-12 2006-12-12 Flight Landata, Inc. High-definition hyperspectral imaging system
AU2003226047A1 (en) 2002-04-10 2003-10-27 Pan-X Imaging, Inc. A digital imaging system
JP4181800B2 (ja) 2002-06-20 2008-11-19 Nec東芝スペースシステム株式会社 ステレオ画像を用いた地形計測システム及び記憶媒体並びにプログラム
US7259784B2 (en) * 2002-06-21 2007-08-21 Microsoft Corporation System and method for camera color calibration and image stitching
DE10239523A1 (de) * 2002-08-23 2004-03-04 Z/I Imaging Gmbh Kamera, Kameraanordnung sowie Verfahren zum Betrieb von Kamera und Kameraanordnung
US20040041999A1 (en) * 2002-08-28 2004-03-04 Hogan John M. Method and apparatus for determining the geographic location of a target
US7725258B2 (en) * 2002-09-20 2010-05-25 M7 Visual Intelligence, L.P. Vehicle based data collection and processing system and imaging sensor system and methods thereof
US7212938B2 (en) 2002-09-17 2007-05-01 M7 Visual Intelligence, Lp Method of using a self-locking travel pattern to achieve calibration of remote sensors using conventionally collected data
JP4191449B2 (ja) * 2002-09-19 2008-12-03 株式会社トプコン 画像キャリブレーション方法、画像キャリブレーション処理装置、画像キャリブレーション処理端末
US6928194B2 (en) 2002-09-19 2005-08-09 M7 Visual Intelligence, Lp System for mosaicing digital ortho-images
JP2006507483A (ja) * 2002-09-20 2006-03-02 エム7 ビジュアル インテリジェンス,エルピー 移動体によるデータの収集及び処理システム
EP1696204B1 (en) 2002-11-08 2015-01-28 Pictometry International Corp. Method for capturing, geolocating and measuring oblique images
US7424133B2 (en) * 2002-11-08 2008-09-09 Pictometry International Corporation Method and apparatus for capturing, geolocating and measuring oblique images
US6859547B2 (en) * 2003-01-25 2005-02-22 The Mostert Group Methods and computer-readable medium for tracking motion
IL155034A0 (en) * 2003-03-23 2004-06-20 M A M D Digital Data Proc Syst Automatic aerial digital photography and digital data processing systems
JP2004328117A (ja) * 2003-04-22 2004-11-18 Fuji Photo Film Co Ltd ディジタルカメラおよび撮像制御方法
JP2004337232A (ja) * 2003-05-13 2004-12-02 Canon Inc 画像管理方法及び装置並びにプログラム
US20040250288A1 (en) * 2003-06-05 2004-12-09 Palmerio Robert R. Method and apparatus for storing surveillance films
RU2006134306A (ru) * 2004-02-27 2008-04-10 Интергрэф Софтвеа Текнолоджис Кампэни Способ и система обработки изображения и машиночитаемый носитель
CN101827103B (zh) * 2004-03-10 2012-07-04 高通股份有限公司 具有改进链路同步的高数据速率接口
WO2006078310A2 (en) * 2004-06-25 2006-07-27 Digitalglobe, Inc. Method and apparatus for determining a location associated with an image
US20060007308A1 (en) 2004-07-12 2006-01-12 Ide Curtis E Environmentally aware, intelligent surveillance device
CN101002069B (zh) * 2004-08-04 2010-09-08 因特格莱弗软件技术公司 产生具有非均匀分辨率的合成图像的方法
WO2006137829A2 (en) * 2004-08-10 2006-12-28 Sarnoff Corporation Method and system for performing adaptive image acquisition
US7668402B2 (en) * 2004-11-05 2010-02-23 Intergraph Technologies Company Method for generating a composite image
US20060119622A1 (en) * 2004-11-23 2006-06-08 General Electric Company Method and apparatus for volume rendering display protocol
US7287701B2 (en) 2005-02-17 2007-10-30 The Boeing Company Handheld coordinate reference system
EP1736928A1 (en) 2005-06-20 2006-12-27 Mitsubishi Electric Information Technology Centre Europe B.V. Robust image registration
EP1920423A2 (en) * 2005-09-01 2008-05-14 GeoSim Systems Ltd. System and method for cost-effective, high-fidelity 3d-modeling of large-scale urban environments
US7437062B2 (en) * 2005-11-10 2008-10-14 Eradas, Inc. Remote sensing system capable of coregistering data from sensors potentially having unique perspectives
US7688438B2 (en) 2005-12-20 2010-03-30 Raytheon Company Scanning solar diffuser relative reflectance monitor
US7639897B2 (en) * 2006-01-24 2009-12-29 Hewlett-Packard Development Company, L.P. Method and apparatus for composing a panoramic photograph
US20070188610A1 (en) 2006-02-13 2007-08-16 The Boeing Company Synoptic broad-area remote-sensing via multiple telescopes
NZ554986A (en) * 2006-05-05 2009-01-31 Aristocrat Technologies Au A gaming machine, a controller for a gaming machine, a gaming system, and a gaming method
US8160394B2 (en) * 2006-05-11 2012-04-17 Intergraph Software Technologies, Company Real-time capture and transformation of hemispherical video images to images in rectilinear coordinates
US7310606B2 (en) * 2006-05-12 2007-12-18 Harris Corporation Method and system for generating an image-textured digital surface model (DSM) for a geographical area of interest
US20070291184A1 (en) 2006-06-16 2007-12-20 Michael Harville System and method for displaying images
JP4470926B2 (ja) 2006-08-08 2010-06-02 国際航業株式会社 空中写真画像データセットとその作成方法および表示方法
US7873238B2 (en) * 2006-08-30 2011-01-18 Pictometry International Corporation Mosaic oblique images and methods of making and using same
US20080089577A1 (en) * 2006-10-11 2008-04-17 Younian Wang Feature extraction from stereo imagery
US10337862B2 (en) * 2006-11-30 2019-07-02 Rafael Advanced Defense Systems Ltd. Digital mapping system based on continuous scanning line of sight
US8593518B2 (en) * 2007-02-01 2013-11-26 Pictometry International Corp. Computer system for continuous oblique panning
US8520079B2 (en) * 2007-02-15 2013-08-27 Pictometry International Corp. Event multiplexer for managing the capture of images
US8385672B2 (en) * 2007-05-01 2013-02-26 Pictometry International Corp. System for detecting image abnormalities
US20090041368A1 (en) * 2007-08-06 2009-02-12 Microsoft Corporation Enhancing digital images using secondary optical systems
US20090093959A1 (en) * 2007-10-04 2009-04-09 Trimble Navigation Limited Real-time high accuracy position and orientation system
US7991226B2 (en) * 2007-10-12 2011-08-02 Pictometry International Corporation System and process for color-balancing a series of oblique images
US8531472B2 (en) * 2007-12-03 2013-09-10 Pictometry International Corp. Systems and methods for rapid three-dimensional modeling with real façade texture
US8675068B2 (en) * 2008-04-11 2014-03-18 Nearmap Australia Pty Ltd Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US8497905B2 (en) 2008-04-11 2013-07-30 nearmap australia pty ltd. Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4662588A (en) * 1982-04-15 1987-05-05 Charles Henderson Airplane configured with a moveable disk structure

Also Published As

Publication number Publication date
US10358235B2 (en) 2019-07-23
CA2773303C (en) 2017-07-25
KR101679456B1 (ko) 2016-12-06
CN102612636A (zh) 2012-07-25
IN2012DN02253A (zh) 2015-08-21
JP2016180761A (ja) 2016-10-13
AU2010219335B2 (en) 2015-03-05
US8497905B2 (en) 2013-07-30
WO2011036541A1 (en) 2011-03-31
EP2480860A1 (en) 2012-08-01
JP6321077B2 (ja) 2018-05-09
JP2013505457A (ja) 2013-02-14
BR112012006577A2 (pt) 2020-10-13
EP2480860A4 (en) 2017-08-30
CA2773303A1 (en) 2011-03-31
US20130235199A1 (en) 2013-09-12
KR20120092109A (ko) 2012-08-20
ZA201201800B (en) 2013-05-29
US20100013927A1 (en) 2010-01-21
RU2562707C2 (ru) 2015-09-10
AU2010219335A1 (en) 2010-09-30
RU2012116074A (ru) 2013-10-27

Similar Documents

Publication Publication Date Title
CN102612636B (zh) 包括级联照相机和/或校准特征的详细捕获大区域图像的系统和方法
Ekaso et al. Accuracy assessment of real-time kinematics (RTK) measurements on unmanned aerial vehicles (UAV) for direct geo-referencing
Benassi et al. Testing accuracy and repeatability of UAV blocks oriented with GNSS-supported aerial triangulation
Pepe et al. Planning airborne photogrammetry and remote-sensing missions with modern platforms and sensors
Taddia et al. Coastal mapping using DJI Phantom 4 RTK in post-processing kinematic mode
Tong et al. Integration of UAV-based photogrammetry and terrestrial laser scanning for the three-dimensional mapping and monitoring of open-pit mine areas
Xu et al. Development of an UAS for post-earthquake disaster surveying and its application in Ms7. 0 Lushan Earthquake, Sichuan, China
Glennie et al. Compact multipurpose mobile laser scanning system—Initial tests and results
Raber et al. Reef Rover: a low-cost small autonomous unmanned surface vehicle (USV) for mapping and monitoring coral reefs
Miller et al. UAV landing based on the optical flow videonavigation
Zhang et al. Infrared-inertial navigation for commercial aircraft precision landing in low visibility and gps-denied environments
Chio et al. Feasibility study using UAV aerial photogrammetry for a boundary verification survey of a digitalized cadastral area in an urban city of Taiwan
Doneus et al. Automated archiving of archaeological aerial images
Campos et al. A height estimation approach for terrain following flights from monocular vision
Simon et al. 3D MAPPING OF A VILLAGE WITH A WINGTRAONE VTOL TAILSITER DRONE USING PIX4D MAPPER.
Tsai et al. The development of a direct georeferencing ready UAV based photogrammetry platform
Jia et al. Modeling image motion in airborne three-line-array (TLA) push-broom cameras
Chmielewski et al. Ground speed optical estimator for miniature uav
Cramer Performance of medium format digital aerial sensor systems
AU2015203017B2 (en) Systems and Methods of Capturing Large Area Images in Detail Including Cascaded Cameras and/or Calibration Features
Ulziisaikhan et al. UAV and terrestrial laser scanner data processing for large scale topographic mapping
Rzhanov et al. Deep-sea image processing
Kelly et al. Compact Midwave Imaging System: Results from an Airborne Demonstration
Maryanto et al. Development of pushbroom airborne camera system using multispectrum line scan industrial camera
Brommer et al. The INSANE dataset: Large number of sensors for challenging UAV flights in Mars analog, outdoor, and out-/indoor transition scenarios

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: Western Australia, Australia

Applicant after: NEARMAP PTY LTD

Address before: Western Australia, Australia

Applicant before: Nearmap Pty Ltd

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: NEARMAP PTY LTD TO: NEARMAP AUSTRALIA PTY LTD.

C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: Sydney, Australia

Applicant after: NEARMAP PTY LTD

Address before: Western Australia, Australia

Applicant before: NEARMAP PTY LTD

C14 Grant of patent or utility model
GR01 Patent grant