CN108702444A - 一种图像处理方法、无人机及系统 - Google Patents

一种图像处理方法、无人机及系统 Download PDF

Info

Publication number
CN108702444A
CN108702444A CN201780006048.5A CN201780006048A CN108702444A CN 108702444 A CN108702444 A CN 108702444A CN 201780006048 A CN201780006048 A CN 201780006048A CN 108702444 A CN108702444 A CN 108702444A
Authority
CN
China
Prior art keywords
image
sky
unmanned plane
target
meteorological satellite
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780006048.5A
Other languages
English (en)
Other versions
CN108702444B (zh
Inventor
郑洪涌
卢振波
胡攀
曹子晟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Dajiang Innovations Technology Co Ltd
Original Assignee
Shenzhen Dajiang Innovations Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Dajiang Innovations Technology Co Ltd filed Critical Shenzhen Dajiang Innovations Technology Co Ltd
Priority to CN202110645107.1A priority Critical patent/CN113329182A/zh
Publication of CN108702444A publication Critical patent/CN108702444A/zh
Application granted granted Critical
Publication of CN108702444B publication Critical patent/CN108702444B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00—Type of UAV
    • B64U10/10—Rotorcrafts
    • B64U10/13—Flying platforms
    • B64U10/14—Flying platforms with four distinct rotor axes, e.g. quadcopters
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U20/00—Constructional aspects of UAVs
    • B64U20/80—Arrangement of on-board electronics, e.g. avionics systems or wiring
    • B64U20/87—Mounting of imaging devices, e.g. mounting of gimbals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G06V20/13—Satellite images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00—UAVs specially adapted for particular uses or applications
    • B64U2101/30—UAVs specially adapted for particular uses or applications for imaging, photography or videography

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Mechanical Engineering (AREA)
  • Data Mining & Analysis (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Astronomy & Astrophysics (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Processing (AREA)

Abstract

一种图像处理方法以及使用该图像处理方法的无人机和系统。图像处理方法包括：根据无人机当前的环境参数，获取与当前的环境参数相匹配的目标天空图像(S201)；确定摄像装置在拍摄待拼接图像时的方向参数(S202)，待拼接图像为在当前的环境参数下拍摄到的图像；根据方向参数将目标天空图像与待拼接图像进行拼接处理，得到全景图像(S203)。该方法可以有效的补足没有拍摄到的天空图像，提高全景图像的完整性。

Description

一种图像处理方法、无人机及系统
技术领域
本发明涉及图像处理技术领域，尤其涉及一种图像处理方法、无人机及系统。
背景技术
随着图像处理技术的不断发展，全景图像由于可视范围广、图像内容多，受到了人们的广泛欢迎。
目前，无人机利用摄像装置(例如摄像头、航拍相机、数码相机等)拍摄全景图像时，由于无人机本身的旋转范围、摄像装置的视线范围和旋转范围均有限，导致拍摄得到的全景图像无法拍摄到顶部的天空，或顶部天空不完全。举例来说，以如图1所示的无人机搭载航拍相机为例，在拍摄全景图像时，无人机无法进行90度甚至90度以上的旋转，航拍相机虽然可以进行90度甚至90度以上的旋转，但由于航拍相机的视线范围有限，无法规避无人机的遮挡，导致依然无法拍摄到顶部的天空。
因此，如何有效的补足没有拍摄到的天空图像，提高全景图像的完整性成了一个研究的热点。
发明内容
本发明实施例公开了一种图像处理方法、无人机及系统，可以有效的补足没有拍摄到的天空图像，提高全景图像的完整性。
本发明实施例第一方面公开了一种图像处理方法，包括：根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像；
确定摄像装置在拍摄所述待拼接图像时的方向参数，所述待拼接图像为在所述当前的环境参数下拍摄到的图像；
根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
本发明实施例第二方面公开了一种无人机，包括：存储器和处理器；
所述存储器，用于存储程序指令；
所述处理器，用于执行所述存储器存储的程序指令，当程序指令被执行时，用于：
根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像；
确定摄像装置在拍摄所述待拼接图像时的方向参数，所述待拼接图像为在所述当前的环境参数下拍摄到的图像；
根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
本发明实施例第三方面公开一种系统，所述系统包括：
摄像装置；
如上述第二方面所述的装置。
本发明实施例中，可以根据无人机当前的环境参数，获取与该当前的环境参数相匹配的目标天空图像，然后按照待拼接图像拍摄时的方向参数，将该目标天空图像与该待拼接图像进行拼接处理，以得到全景图像，可以根据无人机的环境参数得到天空图像，有效的补足了没有拍摄到的天空图像部分，提高全景图像的完整性。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种用于图像处理的架构示意图；
图2是本发明实施例提供的一种图像处理方法的流程示意图；
图3是本发明实施例提供的另一种图像处理方法的流程示意图；
图3a是本发明实施例提供的又一种图像处理方法的流程示意图；
图3b是本发明实施例提供的又一种图像处理方法的流程示意图；
图3c是本发明实施例提供的又一种图像处理方法的流程示意图；
图4是本发明实施例提供的一种无人机的结构示意图；
图5是本发明实施例提供的一种系统的结构示意图；
图5a是本发明实施例提供的一种系统的另一结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。
请参阅图1，为本发明实施例提供的一种用于图像处理的系统架构图。图1所示的系统架构中，包括无人机以及航拍相机。其中，该航拍相机为摄像装置的一个示例，应知，在其他实施例中，该航拍相机还可以替换为摄像头、数码相机、红外摄像机等摄像装置，本发明实施例对此不作任何限制。其中，该无人机可以用于进行图像处理，尽管未示出，该无人机具体可以包括处理器、通信单元、飞行控制单元、传感器等等。
在无人机搭载航拍相机拍摄全景图像时，通常需要拍摄和拼接两步来实现。具体的，无人机可以保持自身的位置坐标不改变，控制无人机机身和/或航拍相机进行旋转来获取不同的视线范围下的图像。其中，图1所示的航拍相机的视线范围可以是阴影部分所示的视线范围，该视线范围可以用视场角(field of view，FOV)来表示，通过航拍相机的姿态变化，可以获取到航拍相机各个姿态下的FOV图像。
其中，无人机的机身可以不进行旋转，也可以配合航拍相机的姿态变化来进行旋转。例如，该航拍相机旋转到图示位置时，无人机可以将机身从无人机虚线位置调整到无人机的实线位置，以规避对航拍相机的视线遮挡。
在一个实施例中，该无人机可以将拍摄到的图像按照姿态、特征匹配信息等进行图像拼接，以生成全景图像。其中，用户可以在模拟人类正常FOV的图像查看模式下，查看相机拍摄时朝向各个方向获取到的内容。
然而，在拍摄全景图像顶部的天空时，无人机由于需要保持位置坐标固定，且机身的旋转范围有限，无法进行90度甚至更多的旋转，航拍相机虽然可以进行90度甚至更多的旋转，但即时二者同时改变姿态也依然无法拍摄到顶部的天空。
因此，如何将顶部的天空部分进行补足，成为了一个亟待解决的热门话题。
为了解决上述技术问题，本发明实施例提供了一种图像处理方法、无人机及系统。
在一个实施例中，无人机可以控制摄像装置拍摄需要拼接天空的待拼接图像，然后可以确定拍摄时的环境参数，例如时间参数、高度参数、位置参数中的任意一种或多种。然后，该无人机可以根据该环境参数，获取与该环境参数匹配的目标天空图像，并按照待拼接图像在拍摄时的方向参数(例如拍摄时的方向为朝向西南方45度等)，将目标天空图像与待拼接图像进行拼接处理，以得到全景图像。
在一个实施例中，该目标天空图像可以由气象卫星图像确定。该无人机可以根据该环境参数，通过无线链路连接到气象数据库，获取与该环境参数相匹配的气象卫星图像，并根据该气象卫星图像得到目标天空图像。
在一个实施例中，无人机根据该气象卫星图像得到目标天空图像，具体可以是对气象卫星图像进行特征识别处理，区分云层图像和地表图像，然后将该云层图像进行放大、分辨率填充处理之后，生成该目标天空图像。
在一个实施例中，无人机根据该气象卫星图像得到目标天空图像，具体可以是该无人机预先建立一素材库，该素材库中包括预先建立的天空图像集合，然后可以将该气象卫星图像与素材库中的天空图像进行匹配，选取匹配的天空图像作为该目标天空图像。
在一个实施例中，无人机根据该气象卫星图像得到目标天空图像，具体可以是对该气象卫星图像进行图像识别处理，得到气象卫星图像的天空描述信息(例如云层厚度、云团大小、云团形状等等)，并根据该天空描述信息生成虚拟天空图像，该虚拟天空图像可以作为该目标天空图像。
可见，上述图像处理方法可以根据当前的环境参数，确定出需要拼接到待拼接图像中的目标天空图像，实现全景图像的拼接，该目标天空图像由于是根据环境参数得到的，拼接得到的全景图像的画面和谐度较高，且拼接天空时由无人机自动进行拼接，自动化程度高，并且用户可以快速预览全景图拼接效果，实时性较强。
为了更好的说明，下面描述本申请的方法实施例。
请参阅图2，为本发明实施例提供的一种图像处理方法的流程示意图。本实施例中所描述的图像处理方法，包括：
S201、根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像。
需要说明的是，本发明实施例的执行主体可以为无人机。该无人机可以是指无人控制飞行器。
可选的，所述环境参数，包括时间参数、高度参数、位置参数中的任意一种或多种。
需要说明的是，该环境参数可以是指该无人机在拍摄待拼接图像时的当前环境。具体的，可以包括当前的时间、无人机的飞行高度、无人机的位置、无人机的方向(朝向)等等。
还需要说明的是，该目标天空图像可以拼接到待拼接图像上，用于补足该待拼接图像中缺失的天空部分。
还需要说明的是，该目标天空图像与当前的环境参数相匹配，可以是指：目标天空图像中表示的天空环境与该无人机获取到的环境参数相匹配。
举例来说，该环境参数表示为阴天天气，湿度为28，能见度较低，那么该目标天空图像中，云层可以低矮且厚重，且天空颜色为灰白色，以表示该阴天天气。
可选的，所述根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像，包括：根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的气象卫星图像；根据所述气象卫星图像得到目标天空图像。
在一些可行的实施方式中，该气象卫星图像可以由气象卫星获取，并可以公开到网络中，该无人机可以通在网络中获取到该气象卫星图像。
在一些可行的实施方式中，该气象卫星图像还可以由侦查卫星、高空飞机、飞艇等来获取，本发明对此不作任何限制。
具体实现中，该无人机可以实时获取气象卫星图像，并根据该当前的环境参数，确定出与该环境参数相匹配的气象卫星图像，并根据该气象卫星图像得到目标天空图像。
可选的，所述根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像，包括：根据无人机的环境参数确定出至少一个用户标识；获取所述至少一个用户标识各自对应的天空图像；从所述天空图像中选择与所述环境参数相匹配的匹配天空图像作为目标天空图像。
需要说明的是，该用户标识可以是指用户账号、用户头像等等，用于标识用户的身份。
在一些可行的实施方式中，该无人机可以与一素材库建立连接，该素材库中可以包括多个天空图像，天空图像对应着一个用户标识。无人机可以根据无人机的位置信息，确定与该位置信息的距离在预设范围内(例如10米，20米，50米等)的用户标识，并获取该用户标识对应的天空图像，该天空图像可以是用户拍摄到的天空图像，并可以从天空图像中选择与该环境参数相匹配的匹配天空图像作为目标天空图像。
其中，该素材库可以以应用、网站的形式展现，本发明实施例对此不作任何限制。
其中，该匹配天空图像可以是指与该环境参数相匹配、且为用户标识对应的天空图像，且该匹配天空图像可以有多个，也可以只有一个，当该匹配天空图像只有一个时，该无人机可以将其作为该目标天空图像。
可选的，当该匹配天空图像具有多个时，所述从所述天空图像中选择与所述环境参数相匹配的匹配天空图像作为目标天空图像，包括：根据所述匹配天空图像与所述环境参数的匹配程度对所述匹配天空图像进行排序，并将排序结果推送至显示界面；当在所述显示界面接收到确定操作时，根据所述确定操作指示的匹配天空图像得到目标天空图像。
需要说明的是，该匹配天空图像与该环境参数的匹配程度可以由无人机计算得到。
在一些可行的实施方式中，该无人机可以提取各个匹配天空图像中的天空特征参数，然后将各个天空特征参数与该环境参数匹配，并确定各个天空特征参数与该环境参数的匹配程度。
举例来说，该环境参数表示当前天气为阴天，该无人机就可以计算出云团种类为积雨云、天空颜色为灰白色的匹配天空图像与该环境参数的匹配程度为90％，云团种类为卷云、天空颜色为蓝色的匹配天空图像与该环境参数的匹配程度为30％。
进一步的，该无人机可以按照该匹配程度对各个匹配天空图像进行排序，，例如将该匹配程度为70％的匹配天空图像排在第一位，将该匹配程度为30％的匹配天空图像排在第二位，并将该排序结果推送至显示界面。
其中，该显示界面可以为用于人机交互的显示界面，该显示界面可以设置在无人机上，也可以设置在其他设备(例如手机、电脑等等)上，当该显示界面设置在其他设备上时，该无人机可以通过无线连接方式(例如蓝牙、红外、移动数据网等)与该其他设备建立连接，并将该排序结果推送到该其他设备上，以便于该其他设备在其显示界面上进行显示。
在一些可行的实施方式中，用户可以在该显示界面上选择并确定目标天空图像。具体的，用户在该显示界面上对匹配天空图像进行选择并确定，无人机可以将该用户确定出的匹配天空图像作为该目标天空图像。
S202、确定摄像装置在拍摄所述待拼接图像时的方向参数。
需要说明的是，该待拼接图像拍摄时的方向参数，可以是指该待拼接图像在拍摄时的视线朝向、视角等参数。
举例来说，该待拼接图像中的图像内容是视线正前方能查看到的内容，那么该带拼接图像拍摄时的方向参数可以是视线正前方。
例如，无人机在一栋大楼左上方，通过摄像装置朝右下方45度拍摄得到待拼接图像a，该待拼接图像a中，该大楼就可以位于图像右偏下的位置，那么，该无人机可以根据该大楼在待拼接图像a的朝向和位置以及摄像装置的FOV，确定该待拼接图像a拍摄时的方向参数为视线右下方45度。
在一些可行的实施方式中，该方向参数可以包括姿态角(例如偏航角(Yaw)、翻滚角(Roll)、俯仰角度(Pitch))，该姿态角可以通过惯性测量单元得到。
举例来说，该无人机定义正北方的大楼为Yaw0度方向，一栋大楼在无人机北偏东30度方向，同时该摄像装置可以在向下45度拍摄，拍摄时无人机机体无翻滚，则朝向此大楼拍摄的方向参数可以记录为：Yaw＝30度，Roll＝0度，Pitch＝-45度。
S203、根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
需要说明的是，该无人机可以根据全景拼接算法进行补天。
在一些可行的实施方式中，该无人机可以通过专业图像编辑软件将该目标天空图像与该拼接图像进行抠图、拼接、羽化、涂抹、曝光补偿、色调调节等处理，并得到该全景图像。
其中，该全景图像可以是覆盖视角为水平360度，垂直180度的无死角全景，或者，该全景图像也可以是按照其他覆盖视角得到的图像，本发明实施例对此不作任何限制。
可选的，所述根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像，包括：根据所述方向参数确定所述目标天空图像的拼接方向；提取所述目标天空图像的边缘特征点；根据所述边缘特征点以及所述目标天空图像的拼接方向，将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
需要说明的是，该目标天空图像的拼接方向，可以是指该目标天空图像拼接到该带拼接图像上的拼接位置。
该边缘特征点，可以是指该目标天空图像中的边缘像素值等。
举例来说，该待拼接图像的方向参数是视线右上方，那么该无人机便可以确定该目标天空图像的拼接方向在该带拼接图像的左上方向置，然后，该无人机可以提取目标天空图像的边缘像素值，将该边缘像素值与带拼接图像中的天空边缘的像素值进行平滑过滤等拼接处理，得到该全景图像。
还需要说明的是，得到该全景图像后，用户可以在模拟人类正常FOV的图像查看模式下，查看摄像装置拍摄时朝向各个方向获取到的图像。
可见，在本发明实施例中，无人机可以根据当前的环境参数，获取与该当前的环境参数相匹配的目标天空图像，然后按照待拼接图像拍摄时的方向参数，将该目标天空图像与该待拼接图像进行拼接处理，以得到全景图像，可以根据无人机的环境参数得到天空图像，得到的天空图像为真实拍摄的图像，有效的补足了没有拍摄到的天空图像部分，且提高全景图像的真实性与完整性。
请参阅图3，为本发明实施例提供的另一种图像处理方法的流程示意图。本实施例中所描述的方法，包括：
S301、根据所述无人机当前的高度参数、位置参数、以及摄像装置的内参确定出待拼接图像的天空范围值。
需要说明的是，该无人机当前的高度参数，例如可以是无人机当前所处位置的海拔高度，或者距地面高度等等。
还需要说明的是，该位置参数，可以用于表示该无人机当前所处的位置，具体的，可以是该无人机当前所处的位置坐标。
还需要说明的是，该摄像装置的内参可以是摄像装置的焦距、像素、FOV等内部参数，本发明对此不作限制。
在一些可行的实施方式中，该无人机可以首先按照该无人机当前的高度参数、位置参数、摄像装置的内参，确定出该待拼接图像中的天空部分的长、宽、大小、面积等等，然后可以预测该待拼接图像在制作成全景图像时，需要补足的天空部分的大小、面积等范围值。
S302、根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的气象卫星图像。
需要说明的是，本发明实施例所示的S302的具体实现过程可参照前述方法实施例中的S201步骤，在此不作赘述。
S303、根据所述气象卫星图像得到目标天空图像。
需要说明的是，该无人机可以对该气象卫星图像进行图像处理，并得到该目标天空图像。
在一个实施例中，请参阅图3a，无人机根据该气象卫星图像得到目标天空图像可以根据以下步骤实现：
S3030a、根据所述天空范围值确定所述气象卫星图像的截取范围。
需要说明的是，该无人机可以首先确定该待拼接图像的天空范围值，然后确定该待拼接图像在制作成全景图像时，需要补足的天空部分的范围值，根据该需要补足的天空部分的范围值，可以得到该气象卫星图像的截取范围。
还需要说明的是，该气象卫星图像的截取范围可以为该需要补足的天空部分的范围值，也可以比该需要补足的天空部分的范围值大，本发明实施例对此不作任何限制。
S3031a、根据所述无人机的位置参数，从所述气象卫星图像中按照所述截取范围截取得到区域图像。
需要说明的是，该区域图像可以是指从该气象卫星图像中截取的图像。
还需要说明的是，该无人机可以按照该位置参数，确定出在拍摄到该位置参数预设范围内的气象卫星图像，然后按照确定出来的截取范围，从该气象卫星图像中截取得到区域图像。
在一个实施例中，所述根据所述无人机的位置参数，从气象卫星图像中按照所述截取范围截取得到区域图像，包括：以所述无人机的位置为截取中心，从气象卫星图像中按照所述截取范围截取得到区域图像。
需要说明的是，该无人机的位置可以为该区域图像的中心，也就是说，该无人机可以以该无人机的位置为中心，将该气象卫星图像按照该中心进行截取。
具体的，该无人机可以以无人机的位置为圆心，以该截取范围为圆面积值，以圆形的方式截取该区域图像。
在一个实施例中，所述从所述气象卫星图像中按照所述截取范围截取得到区域图像，包括：将所述气象卫星图像进行特征识别处理，得到所述气象卫星图像的云层图像；从所述云层图像中按照所述截取范围截取得到区域图像。
需要说明的是，该无人机可以识别该气象卫星图像的云层部分以及地表部分、海域部分等，将该气象卫星图像的云层部分作为该气象卫星图像的云层图像。然后，该无人机可以将该云层图像按照该截取范围进行截取，得到区域图像。
S3032a、根据所述截取得到的区域图像确定目标天空图像。
在一个实施例中，所述根据所述截取得到的区域图像确定目标天空图像，包括：将所述截取得到的区域图像进行放大处理；从放大处理后的区域图像中确定出目标图像，并根据所述目标图像得到目标天空图像。
举例来说，该区域图像为从云层图像中截取得到的图像，该无人机可以首先将该区域图像进行放大，并从该放大后的区域图像中确定出与该待拼接图像中的天空部分可以平滑过渡的拼接的目标图像，并可以根据该目标图像得到该目标天空图像。
在一个实施例中，所述将所述截取区域图像进行放大处理，包括：确定所述气象卫星图像的高度参数以及所述无人机的高度参数；根据所述气象卫星图像的高度参数以及所述无人机的高度参数，确定所述截取得到的区域图像进行放大处理的比例值；将所述截取得到的区域图像按照所述比例值进行放大处理。
举例来说，该气象卫星图像的高度参数为海拔高度600000米，该无人机的高度参数为海拔高度3000米，该无人机可以确定将该截取得到的区域图像进行放大处理的比例值为600000/30000＝200，那么，该无人机可以按照放大200倍的比例值将该截取得到的区域图像进行放大处理。
又举例来说，该无人机的高度参数为海拔高度500米，云层高度为5000米，卫星高度为60000米，该无人机可以确定将截取得到的区域图像按照无人机和卫星到云层的距离比例值进行放大，在此例中，该比例值可以为(60000-5000)/(5000-500)＝132，那么该无人机可以按照放大132倍的比例值将该截取得到的区域图像进行放大处理。其中，云层高度可以由用户交互输入，也可以根据当地的天气情况进行估计。
在一些可行的实施方式中，该无人机可以直接将该放大处理后的区域图像作为该目标天空图像。
在一个实施例中，所述方法还包括：将所述放大处理后的区域图像进行分辨率填充，以得到目标天空图像。
需要说明的是，放大后的区域图像可能分辨率不能满足要求，该无人机便可以将该放大处理后的区域图像进行分辨率填充后，得到该目标天空图像，可以提高该放大处理后的区域图像的分辨率，提高全景图像的画面和谐度。
在一个实施例中，请参阅图3b，无人机根据该气象卫星图像得到目标天空图像可以根据以下步骤实现：
S3030b、将所述气象卫星图像与素材库中的天空图像进行匹配处理。
其中，所述素材库包括预先建立的天空图像集合。
需要说明的是，该预先建立的天空图像集合可以是用户拍摄得到的天空图像，也可以是模拟出来的天空图像，本发明实施例对此不作任何限制。
在一个实施例中，所述将所述气象卫星图像与素材库中的天空图像进行匹配处理，包括：将所述气象卫星图像中的可见光云图、红外光云图、水汽云图、地表温度图、海面温度图中的任意一种或多种，与所述素材库中的天空图像进行匹配处理。
举例来说，该无人机可以根据该气象卫星图像中的可见光云图，确定天空的云层透明度、云层厚度、云团种类等信息，然后根据确定出来的云团信息，将素材库中的天空图像进行匹配。具体的，例如该可见光云团表示为晴天的云团信息，无人机可以匹配同样表示晴天的天空图像。
S3031b、从所述素材库中选取与该气象卫星图像相匹配的天空图像作为目标天空图像。
在一些可行的实施方式中，该无人机可以从该素材库中选取与该气象卫星图像最为匹配的天空图像作为目标天空图像。
在一些可行的实施方式中，该无人机还可以从该素材库中选取与该气象卫星图像匹配的多个天空图像，然后由用户选择其中一个天空作为该目标天空图像。
在一个实施例中，请参阅图3c，无人机根据该气象卫星图像得到目标天空图像可以根据以下步骤实现：
S3030c、将所述气象卫星图像进行图像识别处理，得到所述气象卫星图像的天空描述信息。
在一个实施例中，所述天空描述信息包括：基于可见光云图得到的描述信息，基于红外光云图得到的描述信息、基于水汽云图得到的描述信息、基于地表温度图得到的描述信息、基于海面温度图得到的描述信息中的任意一种或多种。
需要说明的是，该天空描述信息可以是指云团厚度、云团大小、云团种类、天空颜色等基于天空得到的信息。
在一些可行的实施方式中，该无人机可以根据该卫星气象图像(包括可见光云图、红外光云图、水汽云图、地表温度图)进行图像识别处理，获取云团厚度、云团大小、云团种类、天空颜色等天空描述信息。
S3031c、根据所述气象卫星图像的天空描述信息生成虚拟天空图像，变更将所述虚拟天空图像作为目标天空图像。
在一些可行的实施方式中，该无人机可以根据上述天空描述信息对云团进行三维建模，并可以通过图像渲染的方法生成虚拟天空图像，将该虚拟天空图像作为目标天空图像。
S304、确定摄像装置在拍摄所述待拼接图像时的方向参数。
S305、根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
需要说明的是，本发明实施例所示的S304以及S305的具体实现过程可参照前述方法实施例中的S202及S203步骤，在此不作赘述。
可见，在本发明实施例中，该无人机可以根据无人机当前的环境参数，获取与该当前的环境参数相匹配的气象卫星图像，并确定摄像装置在拍摄所述待拼接图像时的方向参数，根据该方向参数将该目标天空图像与待拼接图像进行拼接处理，以得到全景图像，实现了对全景图像的拼接，且该目标天空图像由于是根据气象卫星图像得到的，天空部分的真实度较高，提高了拼接得到的全景图像的画面和谐度，且拼接天空时由无人机自动进行拼接，自动化程度高。
请参阅图4，为本发明实施例提供的一种无人机的结构示意图。本实施例中所描述的无人机，包括：存储器401和处理器402；
所述存储器401，用于存储程序指令；
所述处理器402，用于执行所述存储器401存储的程序指令，当程序指令被执行时，用于：
根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像；
确定摄像装置在拍摄所述待拼接图像时的方向参数，所述待拼接图像为在所述当前的环境参数下拍摄到的图像；
根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
在一个实施例中，所述处理器402根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像时，具体用于：
根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的气象卫星图像；
根据所述气象卫星图像得到目标天空图像。
在一个实施例中，所述环境参数，包括时间参数、高度参数、位置参数、中的任意一种或多种。
在一个实施例中，所述处理器402根据所述气象卫星图像得到目标天空图像之前，还用于：
根据所述无人机当前的高度参数、位置参数、以及摄像装置的内参确定出待拼接图像的天空范围值。
在一个实施例中，所述处理器402根据所述气象卫星图像得到目标天空图像时，具体用于：
根据所述天空范围值确定所述气象卫星图像的截取范围；
根据所述无人机的位置参数，从所述气象卫星图像中按照所述截取范围截取得到区域图像；
根据所述截取得到的区域图像确定目标天空图像。
在一个实施例中，所述处理器402根据所述无人机的位置参数，从气象卫星图像中按照所述截取范围截取得到区域图像时，具体用于：
以所述无人机的位置为截取中心，从气象卫星图像中按照所述截取范围截取得到区域图像。
在一个实施例中，所述处理器402从所述气象卫星图像中按照所述截取范围截取得到区域图像时，具体用于：
将所述气象卫星图像进行特征识别处理，得到所述气象卫星图像的云层图像；
从所述云层图像中按照所述截取范围截取得到区域图像。
在一个实施例中，所述处理器402根据所述截取得到的区域图像确定目标天空图像时，具体用于：
将所述截取得到的区域图像进行放大处理；
从放大处理后的区域图像中确定出目标图像，并根据所述目标图像得到目标天空图像。
在一个实施例中，所述处理器402将所述截取区域图像进行放大处理时，具体用于：
确定所述气象卫星图像的高度参数以及所述无人机的高度参数；
根据所述气象卫星图像的高度参数以及所述无人机的高度参数，确定所述截取得到的区域图像进行放大处理的比例值；
将所述截取得到的区域图像按照所述比例值进行放大处理。
在一个实施例中，所述处理器402还用于：
将所述放大处理后的区域图像进行分辨率填充，以得到目标天空图像。
在一个实施例中，所述处理器402根据所述气象卫星图像得到目标天空图像时，具体用于：
将所述气象卫星图像与素材库中的天空图像进行匹配处理，所述素材库包括预先建立的天空图像集合；
从所述素材库中选取与所述气象卫星图像相匹配的天空图像作为目标天空图像。
在一个实施例中，所述处理器402将所述气象卫星图像与素材库中的天空图像进行匹配处理时，具体用于：
将所述气象卫星图像中的可见光云图、红外光云图、水汽云图、地表温度图、海面温度图中的任意一种或多种，与所述素材库中的天空图像进行匹配处理。
在一个实施例中，所述处理器402根据所述气象卫星图像得到目标天空图像时，具体用于：
将所述气象卫星图像进行图像识别处理，得到所述气象卫星图像的天空描述信息；
根据所述气象卫星图像的天空描述信息生成虚拟天空图像，并将所述虚拟天空图像作为目标天空图像。
在一个实施例中，所述天空描述信息包括：
基于可见光云图得到的描述信息，基于红外光云图得到的描述信息、基于水汽云图得到的描述信息、基于地表温度图得到的描述信息、基于海面温度图得到的描述信息中的任意一种或多种。
在一个实施例中，所述处理器402根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像时，具体用于：
根据无人机的环境参数确定出至少一个用户标识；
获取所述至少一个用户标识各自对应的天空图像；
从所述天空图像中选择与所述环境参数相匹配的匹配天空图像作为目标天空图像。
在一个实施例中，所述处理器402从所述天空图像中选择与所述环境参数相匹配的匹配天空图像作为目标天空图像时，具体用于：
根据所述匹配天空图像与所述环境参数的匹配程度对所述匹配天空图像进行排序，并将排序结果推送至显示界面；
当在所述显示界面接收到确定操作时，根据所述确定操作指示的匹配天空图像得到目标天空图像。
在一个实施例中，所述处理器402根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像时，具体用于：
根据所述方向参数确定所述目标天空图像的拼接方向；
提取所述目标天空图像的边缘特征点；
根据所述边缘特征点以及所述目标天空图像的拼接方向，将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
本发明实施例提供一种系统。图5是本发明实施例提供的一种系统的结构示意图。如图5所示，该系统包括：摄像装置501和无人机502。
其中，该无人机502为上述本发明实施例中公开的无人机502，原理和实现方式均与上述实施例类似，此处不再赘述。
其中，该摄像装置501可以设置在该无人机502上，用于拍摄待拼接图像。
具体地，如5a所示，摄像装置可通过云台或其他搭载设备搭载于无人机的主体上。摄像装置用于在无人机的飞行过程中进行图像或视频拍摄，包括但不限于多光谱成像仪、高光谱成像仪、可见光相机及红外相机等，并且该摄像装置可以为一个或者一个以上。具体的，无人机可以保持机身悬停在空中，摄像装置沿图示箭头方向水平旋转，其他轴可以进行抖动补偿，以拍摄该摄像装置在各个姿态下的待拼接图像。
其中，无人机502可以根据无人机502当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像，确定摄像装置在拍摄所述待拼接图像时的方向参数，根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
需要说明的是，该无人机502可用于执行前述方法实施例所示的图像处理方法，其具体实现过程可参照该方法实施例，在此不作赘述。
需要说明的是，对于前述的各个方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某一些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机存取器(Random AccessMemory，RAM)、磁盘或光盘等。
以上对本发明实施例所提供的一种飞行控制方法、遥控器及系统进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (35)

1.一种图像处理方法，其特征在于，应用于无人机，所述方法包括：
根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像；
确定摄像装置在拍摄所述待拼接图像时的方向参数，所述待拼接图像为在所述当前的环境参数下拍摄到的图像；
根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
2.根据权利要求1所述的方法，其特征在于，所述根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像，包括：
根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的气象卫星图像；
根据所述气象卫星图像得到目标天空图像。
3.根据权利要求1或2所述的方法，其特征在于，所述环境参数，包括时间参数、高度参数、位置参数中的任意一种或多种。
4.根据权利要求2或3所述的方法，其特征在于，所述根据所述气象卫星图像得到目标天空图像之前，还包括：
根据所述无人机当前的高度参数、位置参数、以及摄像装置的内参确定出待拼接图像的天空范围值。
5.根据权利要求4所述的方法，其特征在于，所述根据所述气象卫星图像得到目标天空图像，包括：
根据所述天空范围值确定所述气象卫星图像的截取范围；
根据所述无人机的位置参数，从所述气象卫星图像中按照所述截取范围截取得到区域图像；
根据所述截取得到的区域图像确定目标天空图像。
6.根据权利要求5所述的方法，其特征在于，所述根据所述无人机的位置参数，从气象卫星图像中按照所述截取范围截取得到区域图像，包括：
以所述无人机的位置为截取中心，从气象卫星图像中按照所述截取范围截取得到区域图像。
7.根据权利要求5或6所述的方法，其特征在于，所述从所述气象卫星图像中按照所述截取范围截取得到区域图像，包括：
将所述气象卫星图像进行特征识别处理，得到所述气象卫星图像的云层图像；
从所述云层图像中按照所述截取范围截取得到区域图像。
8.根据权利要求5-7任一项所述的方法，其特征在于，所述根据所述截取得到的区域图像确定目标天空图像，包括：
将所述截取得到的区域图像进行放大处理；
从放大处理后的区域图像中确定出目标图像，并根据所述目标图像得到目标天空图像。
9.根据权利要求8所述的方法，其特征在于，所述将所述截取区域图像进行放大处理，包括：
确定所述气象卫星图像的高度参数以及所述无人机的高度参数；
根据所述气象卫星图像的高度参数以及所述无人机的高度参数，确定所述截取得到的区域图像进行放大处理的比例值；
将所述截取得到的区域图像按照所述比例值进行放大处理。
10.根据权利要求8或9所述的方法，其特征在于，所述方法还包括：
将所述放大处理后的区域图像进行分辨率填充，以得到目标天空图像。
11.根据权利要求2所述的方法，其特征在于，所述根据所述气象卫星图像得到目标天空图像，包括：
将所述气象卫星图像与素材库中的天空图像进行匹配处理，所述素材库包括预先建立的天空图像集合；
从所述素材库中选取与所述气象卫星图像相匹配的天空图像作为目标天空图像。
12.根据权利要求11所述的方法，其特征在于，所述将所述气象卫星图像与素材库中的天空图像进行匹配处理，包括：
将所述气象卫星图像中的可见光云图、红外光云图、水汽云图、地表温度图、海面温度图中的任意一种或多种，与所述素材库中的天空图像进行匹配处理。
13.根据权利要求2所述的方法，其特征在于，所述根据所述气象卫星图像得到目标天空图像，包括：
将所述气象卫星图像进行图像识别处理，得到所述气象卫星图像的天空描述信息；
根据所述气象卫星图像的天空描述信息生成虚拟天空图像，并将所述虚拟天空图像作为目标天空图像。
14.根据权利要求13所述的方法，其特征在于，所述天空描述信息包括：
基于可见光云图得到的描述信息，基于红外光云图得到的描述信息、基于水汽云图得到的描述信息、基于地表温度图得到的描述信息、基于海面温度图得到的描述信息中的任意一种或多种。
15.根据权利要求1所述的方法，其特征在于，所述根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像，包括：
根据无人机的环境参数确定出至少一个用户标识；
获取所述至少一个用户标识各自对应的天空图像；
从所述天空图像中选择与所述环境参数相匹配的匹配天空图像作为目标天空图像。
16.根据权利要求15所述的方法，其特征在于，所述从所述天空图像中选择与所述环境参数相匹配的匹配天空图像作为目标天空图像，包括：
根据所述匹配天空图像与所述环境参数的匹配程度对所述匹配天空图像进行排序，并将排序结果推送至显示界面；
当在所述显示界面接收到确定操作时，根据所述确定操作指示的匹配天空图像得到目标天空图像。
17.根据权利要求1-16任一项所述的方法，其特征在于，所述根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像，包括：
根据所述方向参数确定所述目标天空图像的拼接方向；
提取所述目标天空图像的边缘特征点；
根据所述边缘特征点以及所述目标天空图像的拼接方向，将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
18.一种无人机，其特征在于，包括：存储器和处理器；
所述存储器，用于存储程序指令；
所述处理器，用于执行所述存储器存储的程序指令，当程序指令被执行时，用于：
根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像；
确定摄像装置在拍摄所述待拼接图像时的方向参数，所述待拼接图像为在所述当前的环境参数下拍摄到的图像；
根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
19.根据权利要求18所述的无人机，其特征在于，所述处理器根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像时，具体用于：
根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的气象卫星图像；
根据所述气象卫星图像得到目标天空图像。
20.根据权利要求18或19所述的无人机，其特征在于，所述环境参数，包括时间参数、高度参数、位置参数中的任意一种或多种。
21.根据权利要求19或20所述的无人机，其特征在于，所述无人机根据所述气象卫星图像得到目标天空图像之前，还用于：
根据所述无人机当前的高度参数、位置参数、以及摄像装置的内参确定出待拼接图像的天空范围值。
22.根据权利要求21所述的无人机，其特征在于，所述处理器根据所述气象卫星图像得到目标天空图像时，具体用于：
根据所述天空范围值确定所述气象卫星图像的截取范围；
根据所述无人机的位置参数，从所述气象卫星图像中按照所述截取范围截取得到区域图像；
根据所述截取得到的区域图像确定目标天空图像。
23.根据权利要求22所述的无人机，其特征在于，所述处理器根据所述无人机的位置参数，从气象卫星图像中按照所述截取范围截取得到区域图像时，具体用于：
以所述无人机的位置为截取中心，从气象卫星图像中按照所述截取范围截取得到区域图像。
24.根据权利要求22或23所述的无人机，其特征在于，所述处理器从所述气象卫星图像中按照所述截取范围截取得到区域图像时，具体用于：
将所述气象卫星图像进行特征识别处理，得到所述气象卫星图像的云层图像；
从所述云层图像中按照所述截取范围截取得到区域图像。
25.根据权利要求22-24任一项所述的无人机，其特征在于，所述处理器根据所述截取得到的区域图像确定目标天空图像时，具体用于：
将所述截取得到的区域图像进行放大处理；
从放大处理后的区域图像中确定出目标图像，并根据所述目标图像得到目标天空图像。
26.根据权利要求25所述的无人机，其特征在于，所述处理器将所述截取区域图像进行放大处理时，具体用于：
确定所述气象卫星图像的高度参数以及所述无人机的高度参数；
根据所述气象卫星图像的高度参数以及所述无人机的高度参数，确定所述截取得到的区域图像进行放大处理的比例值；
将所述截取得到的区域图像按照所述比例值进行放大处理。
27.根据权利要求25或26所述的无人机，其特征在于，所述处理器还用于：
将所述放大处理后的区域图像进行分辨率填充，以得到目标天空图像。
28.根据权利要求19所述的无人机，其特征在于，所述处理器根据所述气象卫星图像得到目标天空图像时，具体用于：
将所述气象卫星图像与素材库中的天空图像进行匹配处理，所述素材库包括预先建立的天空图像集合；
从所述素材库中选取与所述气象卫星图像相匹配的天空图像作为目标天空图像。
29.根据权利要求28所述的无人机，其特征在于，所述处理器将所述气象卫星图像与素材库中的天空图像进行匹配处理时，具体用于：
将所述气象卫星图像中的可见光云图、红外光云图、水汽云图、地表温度图、海面温度图中的任意一种或多种，与所述素材库中的天空图像进行匹配处理。
30.根据权利要求19所述的无人机，其特征在于，所述处理器根据所述气象卫星图像得到目标天空图像时，具体用于：
将所述气象卫星图像进行图像识别处理，得到所述气象卫星图像的天空描述信息；
根据所述气象卫星图像的天空描述信息生成虚拟天空图像，并将所述虚拟天空图像作为目标天空图像。
31.根据权利要求30所述的无人机，其特征在于，所述天空描述信息包括：
基于可见光云图得到的描述信息，基于红外光云图得到的描述信息、基于水汽云图得到的描述信息、基于地表温度图得到的描述信息、基于海面温度图得到的描述信息中的任意一种或多种。
32.根据权利要求18所述的无人机，其特征在于，所述处理器根据无人机当前的环境参数，获取与所述当前的环境参数相匹配的目标天空图像时，具体用于：
根据无人机的环境参数确定出至少一个用户标识；
获取所述至少一个用户标识各自对应的天空图像；
从所述天空图像中选择与所述环境参数相匹配的匹配天空图像作为目标天空图像。
33.根据权利要求32所述的无人机，其特征在于，所述处理器从所述天空图像中选择与所述环境参数相匹配的匹配天空图像作为目标天空图像时，具体用于：
根据所述匹配天空图像与所述环境参数的匹配程度对所述匹配天空图像进行排序，并将排序结果推送至显示界面；
当在所述显示界面接收到确定操作时，根据所述确定操作指示的匹配天空图像得到目标天空图像。
34.根据权利要求18-33任一项所述的无人机，其特征在于，所述处理器根据所述方向参数将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像时，具体用于：
根据所述方向参数确定所述目标天空图像的拼接方向；
提取所述目标天空图像的边缘特征点；
根据所述边缘特征点以及所述目标天空图像的拼接方向，将所述目标天空图像与所述待拼接图像进行拼接处理，以得到全景图像。
35.一种系统，其特征在于，包括：
摄像装置；
如权利要求1-17任一项所述的无人机。
CN201780006048.5A 2017-08-31 2017-08-31 一种图像处理方法、无人机及系统 Expired - Fee Related CN108702444B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110645107.1A CN113329182A (zh) 2017-08-31 2017-08-31 一种图像处理方法、无人机及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/100072 WO2019041276A1 (zh) 2017-08-31 2017-08-31 一种图像处理方法、无人机及系统

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202110645107.1A Division CN113329182A (zh) 2017-08-31 2017-08-31 一种图像处理方法、无人机及系统

Publications (2)

Publication Number Publication Date
CN108702444A true CN108702444A (zh) 2018-10-23
CN108702444B CN108702444B (zh) 2021-07-06

Family

ID=63843772

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201780006048.5A Expired - Fee Related CN108702444B (zh) 2017-08-31 2017-08-31 一种图像处理方法、无人机及系统
CN202110645107.1A Pending CN113329182A (zh) 2017-08-31 2017-08-31 一种图像处理方法、无人机及系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110645107.1A Pending CN113329182A (zh) 2017-08-31 2017-08-31 一种图像处理方法、无人机及系统

Country Status (3)

Country Link
US (1) US11070725B2 (zh)
CN (2) CN108702444B (zh)
WO (1) WO2019041276A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111131689A (zh) * 2018-10-31 2020-05-08 微景天下（北京）科技有限公司 全景图像修复方法和系统
CN111402404A (zh) * 2020-03-16 2020-07-10 贝壳技术有限公司 全景图补全方法、装置、计算机可读存储介质及电子设备
CN111783539A (zh) * 2020-05-30 2020-10-16 上海晏河建设勘测设计有限公司 一种地形测量方法、测量装置、测量系统及计算机可读存储介质
CN112529814A (zh) * 2020-12-21 2021-03-19 杭州海康机器人技术有限公司 一种全景图的天空背景填补方法、装置及存储介质
WO2022027313A1 (zh) * 2020-08-05 2022-02-10 深圳市大疆创新科技有限公司 全景图像生成方法、拍摄装置、飞行系统及存储介质
CN114201633A (zh) * 2022-02-17 2022-03-18 四川腾盾科技有限公司 一种用于无人机视觉定位的自适应卫星图像生成方法

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102681582B1 (ko) * 2017-01-05 2024-07-05 삼성전자주식회사 전자 장치 및 그 제어 방법
WO2020008973A1 (ja) * 2018-07-03 2020-01-09 富士フイルム株式会社 撮影計画提示装置および方法
CN110599583B (zh) * 2019-07-26 2022-03-18 深圳眸瞳科技有限公司 无人机飞行轨迹生成方法、装置、计算机设备和存储介质
CN111768339A (zh) * 2020-06-29 2020-10-13 广西翼界科技有限公司 一种无人机航拍图像快速拼接方法
CN111785094B (zh) * 2020-07-31 2021-12-07 上海眼控科技股份有限公司 平流雾检测方法、装置、计算机设备和可读存储介质
CN114095780A (zh) * 2020-08-03 2022-02-25 影石创新科技股份有限公司 一种全景视频剪辑方法、装置、存储介质及设备
US20230091659A1 (en) * 2021-06-21 2023-03-23 Mesos LLC High-Altitude Airborne Remote Sensing
US11804038B1 (en) * 2021-06-22 2023-10-31 Amazon Technologies, Inc. Aerial array surveying of surfaces and subsurfaces
CN113905190B (zh) * 2021-09-30 2023-03-10 中国电子科技集团公司第五十四研究所 一种面向无人机视频的全景图实时拼接方法
CN113885582B (zh) * 2021-12-09 2022-03-25 北京航空航天大学 一种考虑气象可视环境的无人机飞行轨迹调整方法
CN114550010A (zh) * 2022-01-21 2022-05-27 扬州大学 一种稻虾种养系统沟坑占比航测方法
CN116206163B (zh) * 2023-05-04 2023-07-04 中科三清科技有限公司 一种气象卫星遥感云图检测分析处理方法
CN117079166B (zh) * 2023-10-12 2024-02-02 江苏智绘空天技术研究院有限公司 一种基于高空间分辨率遥感图像的边缘提取方法
CN118172242B (zh) * 2024-05-13 2024-07-26 青岛国测海遥信息技术有限公司 一种无人机水面影像拼接方法、介质及系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1707353A (zh) * 2004-12-17 2005-12-14 上海杰图软件技术有限公司 一种基于全帧图像生成球形全景的方法
CN102812497A (zh) * 2011-03-03 2012-12-05 松下电器产业株式会社 能够提供随后体验影像的影像提供装置、影像提供方法、影像提供程序
CN102982515A (zh) * 2012-10-23 2013-03-20 中国电子科技集团公司第二十七研究所 一种无人机图像实时拼接的方法
CN103141078A (zh) * 2010-10-05 2013-06-05 索尼电脑娱乐公司 图像显示装置及图像显示方法
CN105205853A (zh) * 2014-06-20 2015-12-30 西安英诺视通信息技术有限公司 一种用于全景视图管理的3d图像拼接合成方法
CN204937526U (zh) * 2015-08-25 2016-01-06 上海云舞网络科技有限公司 360°全景航拍摄影摄像无人机
US9235923B1 (en) * 2012-09-28 2016-01-12 Google Inc. Systems and methods for providing a visualization of satellite sightline obstructions
CN105915794A (zh) * 2016-05-27 2016-08-31 武汉理工大学 一种使用高速球摄像机的全景场景制作方法
US20160260195A1 (en) * 2015-03-02 2016-09-08 Aerial Sphere, Llc Post capture imagery processing and deployment systems

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1569170A4 (en) * 2002-12-05 2007-03-28 Seiko Epson Corp DEVICE, METHOD AND PROGRAM FOR EXTRACTING CHARACTERISTIC REGION
US10070201B2 (en) * 2010-12-23 2018-09-04 DISH Technologies L.L.C. Recognition of images within a video based on a stored representation
KR20150028066A (ko) * 2013-09-05 2015-03-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2015199772A2 (en) * 2014-03-28 2015-12-30 Konica Minolta Laboratory U.S.A., Inc. Method and system of stitching aerial data using information from previous aerial images
US10033924B2 (en) * 2014-10-10 2018-07-24 Iec Infrared Systems, Llc Panoramic view imaging system
US10356317B2 (en) * 2014-10-30 2019-07-16 Technion Research & Development Foundation Limited Wide-scale terrestrial light-field imaging of the sky
JP2016151955A (ja) * 2015-02-18 2016-08-22 キヤノン株式会社 画像処理装置、撮像装置、距離計測装置、および画像処理方法
JP6402932B2 (ja) * 2015-04-20 2018-10-10 清水建設株式会社 天候情報予測装置、天候情報予測方法、及びプログラム
CN106485655A (zh) * 2015-09-01 2017-03-08 张长隆 一种基于四旋翼飞行器航拍地图生成系统及方法
CN105225241B (zh) * 2015-09-25 2017-09-15 广州极飞科技有限公司 无人机深度图像的获取方法及无人机
CN105550994B (zh) * 2016-01-26 2018-08-21 河海大学 一种基于卫星影像的无人机影像快速概略拼接方法
CN106488139A (zh) * 2016-12-27 2017-03-08 深圳市道通智能航空技术有限公司 一种无人机拍摄的图像补偿方法、装置及无人机
WO2018144929A1 (en) * 2017-02-02 2018-08-09 Infatics, Inc. (DBA DroneDeploy) System and methods for improved aerial mapping with aerial vehicles
US10902630B2 (en) * 2017-08-14 2021-01-26 Bae Systems Plc Passive sense and avoid system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1707353A (zh) * 2004-12-17 2005-12-14 上海杰图软件技术有限公司 一种基于全帧图像生成球形全景的方法
CN103141078A (zh) * 2010-10-05 2013-06-05 索尼电脑娱乐公司 图像显示装置及图像显示方法
CN102812497A (zh) * 2011-03-03 2012-12-05 松下电器产业株式会社 能够提供随后体验影像的影像提供装置、影像提供方法、影像提供程序
US9235923B1 (en) * 2012-09-28 2016-01-12 Google Inc. Systems and methods for providing a visualization of satellite sightline obstructions
CN102982515A (zh) * 2012-10-23 2013-03-20 中国电子科技集团公司第二十七研究所 一种无人机图像实时拼接的方法
CN105205853A (zh) * 2014-06-20 2015-12-30 西安英诺视通信息技术有限公司 一种用于全景视图管理的3d图像拼接合成方法
US20160260195A1 (en) * 2015-03-02 2016-09-08 Aerial Sphere, Llc Post capture imagery processing and deployment systems
CN204937526U (zh) * 2015-08-25 2016-01-06 上海云舞网络科技有限公司 360°全景航拍摄影摄像无人机
CN105915794A (zh) * 2016-05-27 2016-08-31 武汉理工大学 一种使用高速球摄像机的全景场景制作方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111131689A (zh) * 2018-10-31 2020-05-08 微景天下（北京）科技有限公司 全景图像修复方法和系统
CN111402404A (zh) * 2020-03-16 2020-07-10 贝壳技术有限公司 全景图补全方法、装置、计算机可读存储介质及电子设备
CN111783539A (zh) * 2020-05-30 2020-10-16 上海晏河建设勘测设计有限公司 一种地形测量方法、测量装置、测量系统及计算机可读存储介质
WO2022027313A1 (zh) * 2020-08-05 2022-02-10 深圳市大疆创新科技有限公司 全景图像生成方法、拍摄装置、飞行系统及存储介质
CN112529814A (zh) * 2020-12-21 2021-03-19 杭州海康机器人技术有限公司 一种全景图的天空背景填补方法、装置及存储介质
CN112529814B (zh) * 2020-12-21 2024-02-02 杭州海康威视数字技术股份有限公司 一种全景图的天空背景填补方法、装置及存储介质
CN114201633A (zh) * 2022-02-17 2022-03-18 四川腾盾科技有限公司 一种用于无人机视觉定位的自适应卫星图像生成方法

Also Published As

Publication number Publication date
WO2019041276A1 (zh) 2019-03-07
US11070725B2 (en) 2021-07-20
CN113329182A (zh) 2021-08-31
US20200195847A1 (en) 2020-06-18
CN108702444B (zh) 2021-07-06

Similar Documents

Publication Publication Date Title
CN108702444A (zh) 一种图像处理方法、无人机及系统
CN112470092B (zh) 一种测绘系统、测绘方法、装置、设备及介质
WO2020014909A1 (zh) 拍摄方法、装置和无人机
CN104835138B (zh) 使地基图像和航拍图像对准
US20180262789A1 (en) System for georeferenced, geo-oriented realtime video streams
CN107492069B (zh) 基于多镜头传感器的图像融合方法
US9374561B1 (en) Step-stare oblique aerial camera system
CN110663246B (zh) 用于处理图像的方法和系统
CN107660337A (zh) 用于从鱼眼摄像机产生组合视图的系统及方法
US10121223B2 (en) Post capture imagery processing and deployment systems
WO2019100219A1 (zh) 输出影像生成方法、设备及无人机
WO2020014987A1 (zh) 移动机器人的控制方法、装置、设备及存储介质
CN110428501B (zh) 全景影像生成方法、装置、电子设备及可读存储介质
WO2022242395A1 (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN108513641A (zh) 无人机拍摄控制方法、无人机拍摄方法、控制终端、无人机控制装置和无人机
CN115641401A (zh) 一种三维实景模型的构建方法及相关装置
CN113240615B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN112469967A (zh) 一种测绘系统、测绘方法、装置、设备及介质
CN113781664B (zh) 基于三维模型的vr全景图构造显示方法、系统及终端
CN113034347B (zh) 倾斜摄影图像处理方法、装置、处理设备及存储介质
CN111527375B (zh) 一种测绘采样点的规划方法、装置、控制终端及存储介质
WO2021046810A1 (zh) 一种三维点云的实时显示方法、设备、系统及存储介质
US10275939B2 (en) Determining two-dimensional images using three-dimensional models
CN108419052A (zh) 一种多台无人机全景成像方法
EP3430591A1 (en) System for georeferenced, geo-oriented real time video streams

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210706