CN109886207B - 基于图像风格迁移的广域监测系统及方法 - Google Patents

基于图像风格迁移的广域监测系统及方法 Download PDF

Info

Publication number
CN109886207B
CN109886207B CN201910136570.6A CN201910136570A CN109886207B CN 109886207 B CN109886207 B CN 109886207B CN 201910136570 A CN201910136570 A CN 201910136570A CN 109886207 B CN109886207 B CN 109886207B
Authority
CN
China
Prior art keywords
image
time
farmland
remote sensing
space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910136570.6A
Other languages
English (en)
Other versions
CN109886207A (zh
Inventor
邹文韵
蔡鸿明
于晗
徐博艺
汪蕾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN201910136570.6A priority Critical patent/CN109886207B/zh
Publication of CN109886207A publication Critical patent/CN109886207A/zh
Application granted granted Critical
Publication of CN109886207B publication Critical patent/CN109886207B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

一种基于图像风格迁移的广域监测系统及方法,包括:位于数据采集层的卫星遥感图像采集单元和高清定点摄像单元、位于云服务层的区域划分与特征提取模块、时空信息补全模块和具有全时空模型的智能分析模块、位于用户交互层的农田管理应用模块及实时监控应用模块。本发明将农田的不同区域与覆盖范围极度有限的采样点进行匹配、融合,同时采用迭代的方式对全时空模型对卫星遥感图进行更新、修正;本发明适用于农田监管领域,可以帮助农田管理者从整体和局部两方面同时把握农作物生长势态:预估产量、监测水肥等级、及时发现病害并提供灌溉、施肥、撒药等建议,来提高种植效率。

Description

基于图像风格迁移的广域监测系统及方法
技术领域
本发明涉及的是一种图像处理领域的技术,具体是一种基于图像风格迁移的广域监测系统及方法。
背景技术
随着农田种植的规模化,对大面积农田的人工监控模式已经滞后。建立农田监管系统能帮助管理者掌握农业生产情况、制定农业发展规划、加强生产管理。目前,卫星遥感技术以其低成本、监控范围广的优势被应用于广泛应用于土地覆被监控,但它存在拍摄周期长、空间分辨低、易受天气影响等不足,监控信息具有时间不连续性;高清定点摄像技术具有实时性、高分辨率等特点,但监控范围极为有限,空间信息不连续。如何将二者整合,相互补全不连续的时空信息,是解决“实时监控大面积农田”难题的一大关键。如果能同时从整体和局部两方面来把握农作物生长势态,及时发现病害,将大大提高农田的种植效率,带来巨大的经济效益和社会效益。
发明内容
本发明针对现有技术存在的上述不足,提出一种基于图像风格迁移的广域监测系统及方法,将农田的不同区域与覆盖范围极度有限的采样点进行匹配、融合,同时采用迭代的方式对全时空模型对卫星遥感图进行更新、修正;本发明适用于农田监管领域,可以帮助农田管理者从整体和局部两方面同时把握农作物生长势态:预估产量、监测水肥等级、及时发现病害并提供灌溉、施肥、撒药等建议,来提高种植效率。
本发明是通过以下技术方案实现的:
本发明涉及一种基于图像风格迁移的广域监测系统,包括:位于数据采集层的卫星遥感图像采集单元和高清定点摄像单元、位于云服务层的区域划分与特征提取模块、时空信息补全模块和具有全时空模型的智能分析模块、位于用户交互层的农田管理应用模块及实时监控应用模块,其中:卫星遥感图像采集单元和高清定点摄像单元将各自采集的农田的卫星遥感图像和采样点的图像数据分别以规范格式输出至云服务层;区域划分与特征提取模块从输入图像中解析出农田区域并提取得到颜色纹理特征,时空信息补全模块根据实时的图像数据及相关历史图像数据基于风格迁移算法合成卫星遥感图及扩展的采样图像组用于更新完善全时空模型,智能分析模块根据全时空模型分析得到农田、农作物的多项指标并输出优化管理方案并分析各项指标的变化趋势对优化管理方案进行评判,农田管理应用模块和实时监控应用模块同时从整体及局部的角度提供面向用户的农田管理决策和实时监控。
技术效果
与现有技术相比,本发明实现了通过整合卫星遥感图与采样图像组数据以构建全时空模型的过程,支持实时农田全景及任意局部的细节的可视化,并能同时从整体和局部两方面对农田进行实时的监管,包括植被指数、水肥含量及局部的病害情况,及时给出相应管理建议,提高了农田管理效率。这样的设计既解决了卫星遥感图更新周期长、分辨率低的难题,也弥补了定点摄像覆盖范围小、成本高的不足。本发明提出了“更新-修正”的迭代模式,系统根据最新输入的卫星遥感图及采样图像组所提供的真实数据,对过去合成的图像数据及对应的分析数据做修正及更新。随着数据库录入的真实数据增多,合成数据在时空分布上越来越稠密且逼真,全时空模型逐步完善,保证了决策的可靠性。
附图说明
图1为本发明系统示意图;
图2为本发明云服务层示意图;
图3为本发明全时空模型结构示意图;
图4为本发明全时空模型构造过程示意图;
图中:加号表示按权重融合,以降低计算误差;箭头及旁注指示合成关系;
图5为本发明全时空模型修正过程示意图;
图6为本发明基于全时空模型的智能分析示意图。
具体实施方式
如图2所示,为本实施例涉及的一种基于图像风格迁移的广域监测系统,包括:位于数据采集层的卫星遥感图像采集单元和高清定点摄像单元、位于云服务层的区域划分与特征提取模块、时空信息补全模块和具有全时空模型的智能分析模块、位于用户交互层的农田管理应用模块及实时监控应用模块,其中:卫星遥感图像采集单元和高清定点摄像单元将各自采集的农田的卫星遥感图像和采样点的图像数据分别以规范格式输出至云服务层;区域划分与特征提取模块从输入图像中解析出农田区域并提取得到颜色纹理特征,时空信息补全模块根据实时的图像数据及相关历史图像数据基于风格迁移算法合成卫星遥感图及扩展的采样图像组用于更新完善全时空模型,智能分析模块根据全时空模型分析得到农田、农作物的多项指标并输出优化管理方案并分析各项指标的变化趋势对优化管理方案进行评判,农田管理应用模块和实时监控应用模块同时从整体及局部的角度提供面向用户的农田管理决策和实时监控。
所述的规范格式是指:统一规范的编码、命名、传输格式。
所述的输入图像是指:分别从卫星遥感图像采集单元和高清定点摄像单元采集的农田的卫星遥感图像和采样点的图像数据。
所述的解析是指:区域划分与特征提取模块对卫星遥感图进行波段剔除、降维处理,然后基于神经网络识别图像中的农田区域。由于不同区域农作物种类和生长情况不同,故基于轮廓提取将农田划分为多个子区,并从每个农田子区中分别提取图像特征。当接收实时输入的采样图像组时,直接利用神经网络分割农田前景并从中提取图像特征。纹理特征及颜色特征分别用LBP特征向量和基于HSV空间的颜色直方图表示。
考虑到各图像由不同设备采集,采集时间及画质存在差异,故还需对齐各图像的时间、纹理和颜色:以本系统时间为标准,计算外部系统与标准时间的时间差,用以修正从外部系统输出的图像的拍摄时间,以保证卫星遥感图与采样图像组在标准时间的时间轴上对齐;根据经纬度坐标信息确定输入的采样图像组与卫星遥感图中的农田子区的对应关系,基于纹理、颜色特征向量计算采样图像组与卫星遥感图在纹理、颜色特征方面的偏移关系矩阵,将采样图像组的颜色纹理特征与卫星遥感图对齐。
所述的实时的图像数据是指:反映农田及农作物实时状态的卫星遥感图像与定点采样图像组,其中定点采样图像组包括实时的图像数据与基于风格迁移算法合成卫星遥感图。
所述的相关历史图像数据是指:在一定时间范围内反映农田及农作物历史状态的卫星遥感图像与定点采样图像组,其中定点采样图像组包括实时的图像数据与基于风格迁移算法合成卫星遥感图。
所述的基于风格迁移算法合成卫星遥感图是指:通过风格迁移算法将预设的风格图中的颜色纹理风格迁移融合到内容图中以合成新的图像,具体为:首先结合历史数据对真实的采样图像组进行扩展,计算出多个虚拟采样点并合成对应采样图像;然后将原遥感图中各农田子区与采样图像按颜色纹理特征相似度匹配,对各子区按对应采样图的颜色纹理风格作风格迁移处理后,再拼合为完整的卫星遥感图。
所述的扩展是指:当采样点数量逐渐增多,采样图像将布满整个农田空间。
所述的合成卫星遥感图补全了时间上的不连续性,即当输入数据不包含卫星遥感图时,模块合成实时的卫星遥感图及采样图像组;否则,模块合成历史日期的卫星遥感图及采样图像组,对全时空模型进行修正。即,比对最新合成的图像与对应的历史数据,基于多分辨率融合算法平滑融合新旧图像,实现数据的修正,以保证系统的准确度和可靠性。
所述的更新完善是指:当输入数据包含最新的卫星遥感图时,融合最新合成的图像数据与过去的数据,以实现模型的修正。
所述的优化管理方案包括:基于多植被指数组合的产量预估、基于水含量分析的灌溉管理方案、基于肥含量分析的施肥管理方案及基于叶片病害诊断的撒药管理方案。
所述的基于多植被指数组合的产量预估是指基于全时空模型计算各农田子区的多类植被指数并组合成特征向量,输入预测模型,输出各子区单位面积的预估产量,并将每日的预估产量进行拟合,所得估产曲线反映了农作物长势变化,可作为管理方案的整体评判指标,如图6(a)所示。由于不同生长阶段的农作物的植被指数保持变化且变化趋势具有一定规律性,为提高预测精度,需首先基于植被指数变化趋势拟合生长期曲线,通过匹配已有模型识别农作物所处生长阶段,然后选取该阶段对应的预测模型进行预测。某特定生长阶段所对应的预测模型的构建方法为:通过支持向量机模型拟合该生长阶段的多植被指数组合与农作物产量间的非线性关系,利用已有数据集完成模型训练:以从遥感图计算得出的多类植被指数组合成特征向量作为模型输入,以实测农作物单产作为输出,训练模型直至输出精度达到阈值。
所述的多植被指数组合是指:EVI2(enhanced vegetation index without ablue band),即无蓝带增强植被指数;MSAVI2(modified secondary soil adjustedvegetation index),即修正的次生土壤调节植被指数;SAVI(soil adjusted vegetationindex),即土壤调节植被指数;MTVI1(modified triangular vegetation index),即修正的三角植被指数;MSR(modified simple ratio),即修正的比值植被指数;OSAVI(optimized soil adjusted vegetation index),即优化的土壤调节植被指数,相应特征向量写做6维向量:VI=(VIENVI2,VIMSAVI2,VISAVI,VIMTVI1,VIMSR,VIOSAI),各维度为对应植被指数的值,利用模型中卫星遥感图像所包含的不同波段探测数据,按照通用公式计算可得。计算模型估产值与实测值的均方根误差RMSE以评价模型估产结果。若农田分为K个子区,从各子区提取的特征向量记为(VI1,VI2,…,VIK),对应的预测模型记为
Figure BDA0001977108880000041
Figure BDA0001977108880000042
其中:
Figure BDA0001977108880000043
qi为作物单位面积估产值与实测值(kg/m2),Si为农田面积。RMSE值越小,代表产量预估越准确。
所述的基于水含量分析的灌溉管理方案与基于肥含量分析的施肥管理方案分别根据全时空模型中每日的农田遥感图像反演水肥含量,并给出对应的灌溉建议、施肥建议,将各农田子区每日的水肥含量进行拟合,所得曲线反映了各子区农田质量的变化趋势,用以评判灌溉、施肥管理效率,如图6(b)所示。
所述的水肥含量是指:将遥感图像中农田各子区分割为20×20像素的子块,非农田区域补零,得到RGB三通道图(Ir,Ig,Ib)与对应的二值掩膜图像Imask,合并为20×20×4像素的图像I=(Ir,Ig,Ib,Imask)。Imask的加入有利于排除非农田区域的干扰。因为农作物生长情况受水含量、肥含量共同影响,为避免图像特征的重复提取,水肥含量的测定选用多任务卷积神经网络,特征共享可提升运算效率,并且多重监督有利于神经网络的快速拟合及准确度提升。输入图像I,经过多层卷积、池化和一层全连接,输出图像I的特征向量
Figure BDA0001977108880000044
然后针对水、肥含量分级两个任务,特征向量
Figure BDA0001977108880000051
分别经过一层全连接层并以SoftMax激活函数,得到每个子块对应水肥含量标签
Figure BDA0001977108880000052
用g(I,θ)表示作用于输入图像I的非线性函数,即已训练的多任务卷积神经网络模型,其参数集记为θ,则模型的输出为
Figure BDA0001977108880000053
Figure BDA0001977108880000054
图像I对应农田子块的真实水肥含量标签记为Y=(y,y)。因此,损失函数为
Figure BDA0001977108880000055
其中:λ和λ为对应任务的权重,且λ=1;
Figure BDA0001977108880000056
Figure BDA0001977108880000057
分别为对应任务的损失函数,其实质是对数似然损失函数。含水量等级分为W={W1=涝,W2=水量过多,W3=水量适宜,W4=缺水,W5=严重缺水},含肥量等级分为M={M1=肥过量,M2=适宜,M3=缺肥}。若某农田子区被分为N个子块,(s1,s2,…,sN)表示各子块中的农田面积,则该农田子区的整体水肥等级以对应农田总面积最大的等级为准,即:
Figure BDA0001977108880000058
且Wk∈W;
Figure BDA0001977108880000059
且Mk∈M,其中:
Figure BDA00019771088800000510
所述的基于叶片病害诊断的撒药管理方案是指通过从全时空模型的采样图像中分割提取农作物叶片的高清细节图像,基于所得图像分析叶片病斑,诊断农作物病害情况并给出相应的撒药建议,包括农药的种类、浓度、使用方法及范围,通过监测农作物患病率的每日变化趋势对撒药效率进行评判,如图6(c)所示。考虑到农作物病害分为四大类:真菌性、细菌性、病毒性及生理性病害,对于不同分类的病害处理方式不同,同一分类下的病害处理方式往往相近。故提出在经典分类器AlexNet上作扩展,增加预诊断操作作为辅助任务,即先诊断农作物为健康或患有四大类病害之一,再精准诊断为健康或患有具体某种病害。分类标签均以one-hot编码方式编码,对应的损失函数为
Figure BDA00019771088800000511
其中,
Figure BDA00019771088800000512
为精准诊断的损失函数,
Figure BDA00019771088800000513
为预诊断的损失函数,λ∈(0,1)。引入预诊断的操作既能提升分类准确性,又能减小诊断错误的风险。
如图3所示,所述的全时空模型提供全时空的农田可视化效果并为农田管理提供决策支持,该模型具体为在由经度、纬度、时间所构成的时空坐标系统下,以卫星遥感图像集为全局时间不连续样本,以采样图像集为局部时间连续样本,通过整合二者构建得到的全时空农田的可视化模型,包括:按时间顺序存储的由卫星遥感图像采集单元输出的卫星遥感图像及由时空信息补全模块通过基于风格迁移的图像合成方法合成的卫星遥感图像、由高清定点摄像单元输出的采样图像组及由时空信息补全模块通过基于风格迁移的图像合成方法合成的采样图像组、各图像对应的属性信息、图像间的关系信息,其中:卫星遥感图像反映农田全景概况;采样图像组反映各真实采样点及虚拟采样点周围农作物生长情况;卫星遥感图像对应的属性信息包括像素级农田子区划分信息及各子区对应的颜色纹理特征信息、卫星遥感图像所涵盖的地理范围及其拍摄时间;采样图像组对应的属性信息包括拍摄时间、各采样点地理坐标、对应的各采样图像所涵盖地理范围及其中农田区域的颜色纹理特征信息以及各采样图像中农作物叶片提取分割信息;图像间的关系信息是指在同一时间刻度下的卫星遥感图像与采样图像组之间的关系信息,包括各农田子区与采样点的匹配关系、时间对齐关系、颜色特征对齐关系、纹理特征对齐关系。通过构建文件系统实现全时空模型的存储:上述各数据均以规范格式写入文件,按统一命名格式命名,并按时间顺序对文件进行归纳、排序;通过读写文件实现全时空模型的构造及修正。
所述的整体及局部的角度是指:被检测农田的综合整体及小面积范围内农作物的局部个体。
所述的面向用户的农田管理决策包括:农田全景实时监控与农田定点实时监控、产量预估、施肥管理、灌溉管理和撒药管理。
所述的实时监控是指:对农田的状态及农作物生长情况作实时同步的可视化监控与分析。
所述的高清定点摄像单元通过在农田中分散地架设高清摄像设备实时地向云服务层传送采样图像数据,采样点在数量有限的前提下尽可能地覆盖不同种类及不同生长期的农作物。
如图4、图5所示,所述的全时空模型,通过以下步骤构造得到:
①初始化:根据原始图像数据构建图像集、分析计算图像属性与图像关系,得到初始模型,具体为:设定1号、2号两个采样点并架设定点摄像设备;卫星遥感图
Figure BDA0001977108880000061
卫星遥感图
Figure BDA0001977108880000062
及1号、2号采样点图像系列
Figure BDA0001977108880000063
为输入的真实数据,其余为由图像合成模块输出的合成数据。
②更新:通过图像合成与分析补全实时的监控信息,对模型从时间、空间两个维度进行扩展,具体为:更新反映农田每日整体状态的一系列卫星遥感图像
Figure BDA0001977108880000064
以及连续反映农田任意点的农作物生长状态的一系列采样图像组
Figure BDA0001977108880000065
其中R代表卫星遥感图像,S代表采样图像,t表示对应时间,k为采样点索引;然后基于已更新的卫星遥感图像和采样图像更新图像属性信息及图像间的关系信息。
③修正:在获取新的真实的卫星遥感图时,反向推演历史数据,对模型进行修正,具体为:当系统输入新的卫星遥感图时,例如卫星遥感图
Figure BDA0001977108880000066
时空信息补全模块基于最新输入的卫星遥感图
Figure BDA0001977108880000067
反向合成历史日期的卫星遥感图及采样图像组,进而实现模型的反向修正。
因为真实的卫星遥感图是不定期输入的,所以模型在保持更新的过程中,会不定期地自我修正,从而形成“更新-修正”的迭代过程。
本实施例涉及上述系统的控制方法,具体包括以下步骤:
①数据采集层通过外部系统采集图像数据并输出至服务端。
②当云服务层接收到实时的采样图像组时,区域划分与特征提取模块识别图像中的农田区域,提取纹理及颜色特征,对齐时间及纹理颜色特征,将图像及其特征向量输出至时空信息补全模块,结合历史图像数据合成实时的卫星遥感图及扩展的采样图像组,初始化或更新全时空模型;当云服务层接收到最新的卫星遥感图时,区域划分与特征提取模块识别图像中的农田区域,并将农田划分为多个子区,提取每个农田子区的纹理及颜色特征。然后将图像及其特征向量输出至时空信息补全模块,结合原图像数据反向合成历史日期对应的卫星遥感图及扩展的采样图像组,融合新合成的图像与原图像以修正全时空模型。
③时空信息补全模块支持图像合成的实时进行以实现实时的全时空农田可视化效果,但鉴于单日内农田情况变化微小,为提高存储效率,每日仅在固定时刻保存一张卫星遥感图及对应的采样图像组。云服务层的智能分析模块基于全时空模型分析农田、作物的多项指标,估算产量并提出施肥、灌溉、撒药的相关管理建议,制定并调整适用的农田管理方案。
④用户交互层接收云服务层的全时空模型与智能分析模块输出的图像数据及管理方案,以可视化的方式与用户交互。
本系统与现有技术的比较见表1。
表1
Figure BDA0001977108880000071
Figure BDA0001977108880000081
Figure BDA0001977108880000091
与现有技术相比,本系统不仅补全了原本时空不连续的农田监控信息,支持实时查看农田全景及局部细节;还支持从整体和局部两方面对农田状态及农作物生长情况同时进行实时监控分析,及时给出适用的管理方案;采用“更新-修正”的迭代模式,不断地对历史数据进行修正,使得输出数据的准确性逐步提高。本发明的提出使得农田管理更及时、更精准、更高效。
上述具体实施可由本领域技术人员在不背离本发明原理和宗旨的前提下以不同的方式对其进行局部调整,本发明的保护范围以权利要求书为准且不由上述具体实施所限,在其范围内的各个实现方案均受本发明之约束。

Claims (8)

1.一种基于图像风格迁移的广域监测系统,其特征在于,包括:位于数据采集层的卫星遥感图像采集单元和高清定点摄像单元、位于云服务层的区域划分与特征提取模块、时空信息补全模块和具有全时空模型的智能分析模块、位于用户交互层的农田管理应用模块及实时监控应用模块,其中:卫星遥感图像采集单元和高清定点摄像单元将各自采集的农田的卫星遥感图像和采样点的图像数据分别以规范格式输出至云服务层;区域划分与特征提取模块从输入图像中解析出农田区域并提取得到颜色纹理特征,时空信息补全模块根据实时的图像数据及相关历史图像数据基于风格迁移算法合成卫星遥感图及扩展的采样图像组用于更新完善全时空模型,智能分析模块根据全时空模型分析得到农田、农作物的多项指标并输出优化管理方案并分析各项指标的变化趋势对优化管理方案进行评判,农田管理应用模块和实时监控应用模块同时从整体及局部的角度提供面向用户的农田管理决策和实时监控;
所述的输入图像是指:分别从卫星遥感图像采集单元和高清定点摄像单元采集的农田的卫星遥感图像和采样点的图像数据;
所述的解析是指:基于轮廓提取将从卫星遥感图像采集单元采集的农田的卫星遥感图像划分为多个子区,并从每个农田子区中分别提取图像特征或当接收实时输入的采样图像组时,直接利用神经网络分割农田前景并从中提取图像特征,然后经波段剔除和降维处理,再基于神经网络识别图像中的农田区域;
所述的纹理特征及颜色特征分别用LBP特征向量和基于HSV空间的颜色直方图表示;
所述的农田管理决策包括:农田全景实时监控与农田定点实时监控、产量预估、施肥管理、灌溉管理和撒药管理;
所述的全时空模型包括:按时间顺序存储的由卫星遥感图像采集单元输出的卫星遥感图像及由时空信息补全模块通过基于风格迁移的图像合成方法合成的卫星遥感图像、由高清定点摄像单元输出的采样图像组及由时空信息补全模块通过基于风格迁移的图像合成方法合成的采样图像组、各图像对应的属性信息、图像间的关系信息,其中:卫星遥感图像反映农田全景概况;采样图像组反映各真实采样点及虚拟采样点周围农作物生长情况;卫星遥感图像对应的属性信息包括像素级农田子区划分信息及各子区对应的颜色纹理特征信息、卫星遥感图像所涵盖的地理范围及其拍摄时间;采样图像组对应的属性信息包括拍摄时间、各采样点地理坐标、对应的各采样图像所涵盖地理范围及其中农田区域的颜色纹理特征信息以及各采样图像中农作物叶片提取分割信息;图像间的关系信息是指在同一时间刻度下的卫星遥感图像与采样图像组之间的关系信息,包括各农田子区与采样点的匹配关系、时间对齐关系、颜色特征对齐关系、纹理特征对齐关系,通过构建文件系统实现全时空模型的存储:上述各数据均以规范格式写入文件,按统一命名格式命名,并按时间顺序对文件进行归纳、排序;通过读写文件实现全时空模型的构造及修正。
2.根据权利要求1所述的系统,其特征是,所述的全时空模型通过以下步骤构造得到:
①初始化:根据原始图像数据构建图像集、分析计算图像属性与图像关系,得到初始模型;
②更新:通过图像合成与分析补全实时的监控信息,对模型从时间、空间两个维度进行扩展;
③修正:在获取新的真实的卫星遥感图时,反向推演历史数据,对模型进行修正。
3.根据权利要求1所述的系统,其特征是,所述的优化管理方案包括:基于多植被指数组合的产量预估、基于水含量分析的灌溉管理方案、基于肥含量分析的施肥管理方案及基于叶片病害诊断的撒药管理方案。
4.根据权利要求3所述的系统,其特征是,所述的基于多植被指数组合的产量预估是指基于全时空模型计算各农田子区的多类植被指数并组合成特征向量,输入预测模型,输出各子区单位面积的预估产量,并将每日的预估产量进行拟合,所得估产曲线反映了农作物长势变化,可作为管理方案的整体评判指标。
5.根据权利要求4所述的系统,其特征是,所述的预测模型的构建方法为:通过支持向量机模型拟合生长阶段的多植被指数组合与农作物产量间的非线性关系,利用已有数据集完成模型训练:以从遥感图计算得出的多类植被指数组合成特征向量作为模型输入,以实测农作物单产作为输出,训练模型直至输出精度达到阈值。
6.根据权利要求3所述的系统,其特征是,所述的基于水含量分析的灌溉管理方案与基于肥含量分析的施肥管理方案分别根据全时空模型中每日的农田遥感图像反演水肥含量,并给出对应的灌溉建议、施肥建议,将各农田子区每日的水肥含量进行拟合,所得曲线反映了各子区农田质量的变化趋势,用以评判灌溉、施肥管理效率。
7.根据权利要求3所述的系统,其特征是,所述的基于叶片病害诊断的撒药管理方案是指通过从全时空模型的采样图像中分割提取农作物叶片的高清细节图像,基于所得图像分析叶片病斑,诊断农作物病害情况并给出相应的撒药建议,包括农药的种类、浓度、使用方法及范围,通过监测农作物患病率的每日变化趋势对撒药效率进行评判。
8.一种基于上述任一权利要求所述系统的控制方法,其特征在于,包括以下步骤:
①数据采集层通过外部系统采集图像数据并输出至服务端;
②当云服务层接收到实时的采样图像组时,区域划分与特征提取模块识别图像中的农田区域,提取纹理及颜色特征,对齐时间及纹理颜色特征,将图像及其特征向量输出至时空信息补全模块,结合历史图像数据合成实时的卫星遥感图及扩展的采样图像组,初始化或更新全时空模型;当云服务层接收到最新的卫星遥感图时,区域划分与特征提取模块识别图像中的农田区域,并将农田划分为多个子区,提取每个农田子区的纹理及颜色特征,然后将图像及其特征向量输出至时空信息补全模块,结合原图像数据反向合成历史日期对应的卫星遥感图及扩展的采样图像组,融合新合成的图像与原图像以修正全时空模型;
③时空信息补全模块支持图像合成的实时进行以实现实时的全时空农田可视化效果,但鉴于单日内农田情况变化微小,为提高存储效率,每日仅在固定时刻保存一张卫星遥感图及对应的采样图像组,云服务层的智能分析模块基于全时空模型分析农田、作物的多项指标,估算产量并提出施肥、灌溉、撒药的相关管理建议,制定并调整适用的农田管理方案;
④用户交互层接收云服务层的全时空模型与智能分析模块输出的图像数据及管理方案,以可视化的方式与用户交互。
CN201910136570.6A 2019-02-25 2019-02-25 基于图像风格迁移的广域监测系统及方法 Active CN109886207B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910136570.6A CN109886207B (zh) 2019-02-25 2019-02-25 基于图像风格迁移的广域监测系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910136570.6A CN109886207B (zh) 2019-02-25 2019-02-25 基于图像风格迁移的广域监测系统及方法

Publications (2)

Publication Number Publication Date
CN109886207A CN109886207A (zh) 2019-06-14
CN109886207B true CN109886207B (zh) 2023-01-06

Family

ID=66929167

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910136570.6A Active CN109886207B (zh) 2019-02-25 2019-02-25 基于图像风格迁移的广域监测系统及方法

Country Status (1)

Country Link
CN (1) CN109886207B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110781865A (zh) * 2019-11-08 2020-02-11 西安电子科技大学 一种农作物生长控制系统
WO2021152774A1 (ja) * 2020-01-30 2021-08-05 サグリ株式会社 情報処理装置
CN112613426A (zh) * 2020-12-26 2021-04-06 北京国腾联信科技有限公司 一种资源区域确定方法、装置、设备和存储介质
CN112883251B (zh) * 2021-01-09 2023-01-10 重庆市农业科学院 一种基于多星联合的农业辅助系统
CN114298615A (zh) * 2022-03-09 2022-04-08 浙江大学 一种农作物种植风险预防方法、装置、存储介质和设备
CN116886879B (zh) * 2023-09-08 2023-11-03 北京国星创图科技有限公司 一种星地一体化数字孪生系统及方法
CN117114513A (zh) * 2023-10-24 2023-11-24 北京英视睿达科技股份有限公司 基于图像的农作物药肥使用评估方法、装置、设备及介质
CN117275208B (zh) * 2023-11-13 2024-02-27 广东天顺为信息科技有限公司 农业生物灾害监测预警信息化应用系统
CN117274828B (zh) * 2023-11-23 2024-02-02 巢湖学院 基于机器学习的农田智能监测与作物管理系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108765347A (zh) * 2018-05-30 2018-11-06 长光卫星技术有限公司 一种适合遥感影像的色彩增强方法
CN108985281A (zh) * 2018-09-19 2018-12-11 中国科学院东北地理与农业生态研究所 一种基于时序遥感影像的建设用地与农田区分方法及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9922432B1 (en) * 2016-09-02 2018-03-20 Artomatix Ltd. Systems and methods for providing convolutional neural network based image synthesis using stable and controllable parametric models, a multiscale synthesis framework and novel network architectures
US10318889B2 (en) * 2017-06-26 2019-06-11 Konica Minolta Laboratory U.S.A., Inc. Targeted data augmentation using neural style transfer

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108765347A (zh) * 2018-05-30 2018-11-06 长光卫星技术有限公司 一种适合遥感影像的色彩增强方法
CN108985281A (zh) * 2018-09-19 2018-12-11 中国科学院东北地理与农业生态研究所 一种基于时序遥感影像的建设用地与农田区分方法及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
基于多特征融合和稀疏表示的农业害虫图像识别方法;张永玲等;《中国农业科学》;20180601(第11期);全文 *
结合颜色直方图和LBP纹理的遥感影像分割;马国锐等;《国土资源遥感》;20170804(第03期);全文 *
面向精准农业的农田信息遥感获取系统;蒙继华等;《高技术通讯》;20180615(第06期);正文第1、2节 *

Also Published As

Publication number Publication date
CN109886207A (zh) 2019-06-14

Similar Documents

Publication Publication Date Title
CN109886207B (zh) 基于图像风格迁移的广域监测系统及方法
US11321943B2 (en) Crop type classification in images
US11403846B2 (en) Crop boundary detection in images
CN109840553B (zh) 耕地作物类型的提取方法及系统、存储介质、电子设备
Kawamura et al. Discriminating crops/weeds in an upland rice field from UAV images with the SLIC-RF algorithm
US20240013373A1 (en) Individual plant recognition and localization
CN110942454A (zh) 一种农业图像语义分割方法
CN110647932B (zh) 一种种植作物结构遥感影像分类方法及装置
CN110046214A (zh) 基于植被分布数据库的植被类遥感信息自动识别方法
WO2021133310A1 (en) Agricultural decision support system
CN113971757A (zh) 图像分类方法、计算机终端及存储介质
CN113610040A (zh) 一种基于改进BiSeNetV2分割网络的水稻田杂草密度实时统计方法
CN116739739A (zh) 一种贷款额度评估方法、装置、电子设备及存储介质
CN113205014B (zh) 一种基于图像锐化的时序数据耕地提取方法
CA3225437A1 (en) Systems and methods for categorizing image pixels
CN114091774A (zh) 一种作物产量预估方法及装置
Raju et al. Object Recognition in Remote Sensing Images Based on Modified Backpropagation Neural Network.
Song et al. Real-time determination of flowering period for field wheat based on improved YOLOv5s model
Gangkofner et al. Update of the European high-resolution layer of built-up areas and soil sealing 2006 with Image2009 data
Yang et al. Cropland mapping in fragmented agricultural landscape using modified pyramid scene parsing network
CN117281016B (zh) 基于无人机遥感的间作系统的灌溉决策方法、装置和系统
CN116052141B (zh) 作物生育期的识别方法、装置、设备及介质
CN117876823A (zh) 一种茶园图像检测方法及其模型训练方法和系统
Liu et al. (Retracted) Application of remote sensing image ecological land classification method in crop planting area extraction under the background of data fusion
Atzberger et al. Estimating sub-pixel to regional winter crop areas using neural nets

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant