CN109716917A - 带有云台摄像装置的收割机 - Google Patents
带有云台摄像装置的收割机 Download PDFInfo
- Publication number
- CN109716917A CN109716917A CN201910007559.XA CN201910007559A CN109716917A CN 109716917 A CN109716917 A CN 109716917A CN 201910007559 A CN201910007559 A CN 201910007559A CN 109716917 A CN109716917 A CN 109716917A
- Authority
- CN
- China
- Prior art keywords
- holder
- photographic device
- machine host
- camera
- harvester
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003306 harvesting Methods 0.000 claims abstract description 142
- 230000000007 visual effect Effects 0.000 claims description 15
- 230000007246 mechanism Effects 0.000 claims description 12
- 230000006641 stabilisation Effects 0.000 claims description 12
- 238000011105 stabilization Methods 0.000 claims description 12
- 238000009434 installation Methods 0.000 claims description 8
- 230000033001 locomotion Effects 0.000 claims description 7
- 238000005516 engineering process Methods 0.000 claims description 5
- 238000003709 image segmentation Methods 0.000 claims description 4
- 238000007664 blowing Methods 0.000 claims description 3
- 230000008901 benefit Effects 0.000 description 19
- 235000013339 cereals Nutrition 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 238000000034 method Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000013135 deep learning Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 244000025254 Cannabis sativa Species 0.000 description 1
- 241001124569 Lycaenidae Species 0.000 description 1
- 241000209140 Triticum Species 0.000 description 1
- 235000021307 Triticum Nutrition 0.000 description 1
- 240000008042 Zea mays Species 0.000 description 1
- 235000005824 Zea mays ssp. parviglumis Nutrition 0.000 description 1
- 235000002017 Zea mays subsp mays Nutrition 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 235000005822 corn Nutrition 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 239000008187 granular material Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000010358 mechanical oscillation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 239000002689 soil Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Landscapes
- Guiding Agricultural Machines (AREA)
Abstract
本发明提供一带有云台摄像装置的收割机,其中所述收割机包括一收割机主机,至少一云台摄像装置,以及一图像处理系统。所述云台摄像装置被设置于所述收割机主机,所述云台摄像装置拍摄所述收割机主机周围的图像,以供所述收割机主机基于所述云台摄像装置拍摄的图像调整运行参数,其中所述图像处理系统被设置于所述收割机主机,所述图像处理系统接收所述云台摄像装置拍摄的图像,和识别出所述图像中农田的信息或农作物的信息。
Description
技术领域
本发明涉及一农业机械设备,尤其涉及一带有云台摄像装置的收割机。
背景技术
收割机是收获稻、麦等农作物作物子粒和秸秆的作物收获机械,此外收割机还包括割草机,收割其他农作物的机械设备。谷物收割机是一体化收割农作物的机械,能够一次性地完成收割、脱粒,并将谷粒集中到储藏仓,然后再通过传送带将粮食输送到运输车。
收割机在执行收割作业时需要时刻观察农田中农作物和农田作业区域的情况,以便根据农作物的高度、成熟情况、颗粒饱满度等情况,调整所述收割机的作业参数。现有技术的收割机,特别是具有智能操控功能的收割机通过摄像拍照的方式获取农田中农作物和农田区域的图像,以便根据拍摄到的图像信息调整收割作业的参数。
现有技术的收割机是通过在所述收割机的本体设置摄像头装置的方式;或通过高精确定位的方式,比如高精度RTK的卫星定位的方式精确地获取收割机的定位信息,然后通过第三方摄像装置拍照的方式获取收割机周围的图像信息。这种现有技术的收割机存在以下下述至少一缺陷:首先,收割机在作业时,由于车机本身的震动和农田土地的不平会产生所述收割机本体的上下晃动,从而导致设置于所述收割机本体的摄像头装置无法拍摄到稳定位置的图像。因此,通过所述摄像装置获取的图像往往是模糊不清的,无法为智能作业和自动驾驶提供信息支持。其次,现有技术的摄像装置通过固定安装的方式设置于所述收割机本体,仅仅能够获取单一方向的图像,比如所述收割机前方的图像,而不能根据情况调整所述摄像装置的拍摄方向和位置。再次,现有技术的移动摄像设备或固定摄像设备,比如无人机的摄像装置或固定在农田中的摄像装置,拍摄所述收割机周围的图像后传输至所述收割机本体,以供所述收割机本体读取所述摄像装置拍摄的图像。虽然在一定程度上解决了图像拍摄不清楚的问题,但是,基于摄像装置本身或基于无人机的位置拍摄的图像,不能从所述收割机自身的视角获取图像。因此,获取的图像不能很好的识别。
此外,现有技术的收割机需要采用高精度卫星定位的方式获取所述收割机的位置信息,然后基于位置信息调整所述收割机的行驶路线,对于所述收割机的性能要求较高,所需要的制造成本和维护成本相对来说都很高昂。因此,这种现有技术的摄像装置不适用于当前的农业机械设备的自动驾驶模式中。
发明内容
本发明的一个主要优势在于提供一带有云台摄像装置的收割机,其中所述收割机通过所述云台摄像装置获取所述收割机所在农田的图像信息。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置被设置于所述收割机的一收割机主体,其中所述收割机通过所述云台摄像装置拍摄所述收割机主体周围的图像。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置为防抖云台摄像装置,其中所述云台摄像装置在所述收割机主体行驶时稳定地拍摄图像,提升了所述图像的拍摄质量。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置被设置于所述收割机主体,其中所述云台摄像装置基于所述收割机主体的视野位置拍摄至少一视觉图像或视觉影像,以便于根据拍摄的影像信息识别所述收割机主体周围的信息。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置被设置于所述收割机主体的前方,藉由所述云台摄像装置拍摄所述收割机行驶方向的图像,以便识别出所述收割机主体前方的农田信息,为自动驾驶提供技术支持。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置被设置于所述收割机主体的顶部,以便于拍摄出更大范围的视觉图像。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置为一机械云台相机,其中所述机械云台相机被设置于所述收割机主机的顶部,藉由所述机械云台相机直接获取所述收割机主机周围的稳定图像。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置可基于所述收割机主机的位置,被调整地拍摄不同角度和不同方向的图像,以便于获取所述收割机主机不同方向的图像。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置可被上下地转动和/或左右地转动,通过所述云台摄像装置自身拍摄角度的变化拍摄所述收割机主机不同视觉方向的图像。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置为电子云台相机,其中所述云台摄像装置被设置于所述收割机主机,所述云台摄像装置拍摄的图像经由一图像处理系统处理得到稳定清晰的图像。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述云台摄像装置拍摄的图像或影像被所述图像处理系统识别,以识别所述图像中农田的作业区域和田边界区域。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述图像处理系统基于所述云台摄像装置拍摄的图像或影像,识别规划出所述图像中的以作业区域、未作业区域、以及田边界区域等信息。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述收割机主机基于所述图像处理系统识别规划出的区域信息规划出行驶路径,以便于实现无人自动驾驶。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述图像处理系统基于所述云台摄像装置拍摄的图像,识别出所述图像中农作物的种类、高度、颗粒饱满度等信息。
本发明的另一个优势在于提供一带有云台摄像装置的收割机,其中所述收割机主机基于所述图像处理系统识别出所述农作物的信息,调整作业参数,以便于实现无人驾驶作业。
本发明的其它优势和特点通过下述的详细说明得以充分体现并可通过所附权利要求中特地指出的手段和装置的组合得以实现。
依本发明的一个方面,能够实现前述目的和其他目的和优势的本发明的一带有云台摄像装置的收割机,其包括:
一收割机主机;和
至少一云台摄像装置,其中所述云台摄像装置被设置于所述收割机主机,所述云台摄像装置拍摄所述收割机主机周围的图像,以供所述收割机主机基于所述云台摄像装置拍摄的图像调整运行参数。
根据本发明的一个实施例,所述云台摄像装置为机械防抖云台装置,所述云台摄像装置包括一云台和至少一摄像机,其中所述云台将所述摄像机安装至所述收割机主机,所述摄像机被设置于所述云台,藉由所述云台支撑所述摄像机保持平衡。
根据本发明的一个实施例,所述云台被安装至所述收割机主机,并且所述云台可活动地支撑所述摄像机,其中所述摄像机基于所述云台的安装位置拍摄,以获取所述收割机主机视野范围内的图像。
根据本发明的一个实施例,所述云台进一步包括一云台固定件和至少一云台移动件,其中所述云台固定件被固定地安装至所述收割机主机,所述运动移动件可移动地连接至所述云台固定件,所述摄像机被安装至所述云台一动间,通过所述云台移动件和所述云台固定件的相对移动,保持所述摄像机相对位置的稳定。
根据本发明的一个实施例,所述摄像机包括一摄像机主体和至少一摄像机驱动装置,其中所述摄像机主体被可驱动地连接于所述摄像机驱动装置,所述摄像机主体被所述摄像机驱动装置驱动,以拍摄不同方向视野内的图像。
根据本发明的一个实施例,所述摄像机驱动装置驱动所述摄像机主体上下地转动,以便所述摄像机主机拍摄距离所述收割机主机远处和近处的农田的图像。
根据本发明的一个实施例,所述摄像机驱动装置驱动所述摄像机主体左右地转动,以便所述摄像机主机拍摄所述收割机主机两侧不同区域的农田的图像。
根据本发明的一个实施例,所述云台摄像装置被设置于所述收割机主机的前部、所述收割机主机的顶部、所述收割机主机的左侧、右侧、或所述收割机主机的后部。
根据本发明的一个实施例,所述云台摄像装置为电子云台装置,其中所述云台摄像装置通过控制镜头的视角和变焦,从而防止所述云台摄像装置镜头拍照抖动。
根据本发明的一个实施例,所述云台摄像装置包括一相机安装机构和至少一摄像机,其中所述相机安装机构将所述摄像机固定地安装至所述收割机主机。
根据本发明的一个实施例,所述收割机进一步包括一图像处理系统,其中所述图像处理系统被设置于所述收割机主机,所述图像处理系统接收所述云台摄像装置拍摄的图像,和识别出所述图像中农田的信息或农作物的信息。
根据本发明的一个实施例,所述图像处理系统利用图像分割识别技术识别出所述云台摄像装置拍摄的所述图像中农田的区域信息,识别出所述农作物的信息,以供所述收割机主机根据识别出的信息控制运行参数。
根据本发明的一个实施例,所述收割机进一步包括一定位装置和一导航系统,其中所述定位装置和所述导航系统被设置于所述收割机主机,所述定位装置获取所述收割机主机的位置信息,其中所述导航系统基于所述位置信息提供导航信息。
根据本发明的一个实施例,所述收割机主机包括一车辆主体,设置于所述车辆主体的至少一作业系统,以及一驾驶控制系统,所述车辆主体驱动所述作业系统运行,其中所述驾驶控制系统控制所述车辆主体的运行和控制所述作业系统的作业参数。
根据本发明的一个实施例,所述驾驶控制系统获取所述图像处理系统识别的所述云台摄像装置拍摄的图像的信息,自动地控制所述车辆主体的行驶路线和控制所述作业系统的作业参数,以实现无人自动驾驶和收割作业。
根据本发明的一个实施例,所述作业系统包括一收割装置,其中所述驾驶控制系统基于所述云台摄像装置拍摄的所述农作物图像,控制所述收割装置宽幅、收割高度、以及收割速度。
根据本发明的一个实施例,所述作业系统包括一脱粒装置,其中所述驾驶控制系统基于所述云台摄像装置拍摄的所述农作物图像,控制所述脱粒装置的转速和吹风风速。
通过对随后的描述和附图的理解,本发明进一步的目的和优势将得以充分体现。
本发明的这些和其它目的、特点和优势,通过下述的详细说明,附图和权利要求得以充分体现。
附图说明
图1是根据本发明的第一较佳实施例的一带有云台摄像装置的收割机的整体结构的示意图。
图2是根据本发明的上述较佳实施例的所述收割机的所述云台摄像装置拍摄图像的示意图。
图3是根据本发明的上述较佳实施例的所述收割机的所述云台摄像装置的结构示意图,其中所述云台摄像装置被实施为一机械云台装置。
图4是根据本发明的上述较佳实施例的所述收割机的所述云台摄像装置被安装位置的示意图。
图5A是根据本发明的上述较佳实施例的所述收割机的一图像处理系统识别所述云台摄像装置拍摄图像中农田区域的示意图。
图5B是根据本发明的上述较佳实施例的所述收割机的一图像处理系统识别所述云台摄像装置拍摄图像中农作物的示意图。
图6是根据本发明的上述较佳实施例的所述收割机的所述云台摄像装置的另一可选实施方式的示意图,其中所述云台摄像装置被实施为一电子云台装置。
具体实施方式
以下描述用于揭露本发明以使本领域技术人员能够实现本发明。以下描述中的优选实施例只作为举例,本领域技术人员可以想到其他显而易见的变型。在以下描述中界定的本发明的基本原理可以应用于其他实施方案、变形方案、改进方案、等同方案以及没有背离本发明的精神和范围的其他技术方案。
本领域技术人员应理解的是,在本发明的揭露中,术语“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系是基于附图所示的方位或位置关系,其仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此上述术语不能理解为对本发明的限制。
可以理解的是,术语“一”应理解为“至少一”或“一个或多个”,即在一个实施例中,一个元件的数量可以为一个,而在另外的实施例中,该元件的数量可以为多个,术语“一”不能理解为对数量的限制。
参照本发明说明书附图之图1至图5B所示,依照本发明第一较佳实施例的一带有云台摄像装置的收割机在接下来的描述中被阐明。所述收割机包括一收割机主机10和至少一云台摄像装置20,其中所述云台摄像装置20被设置于所述收割机主机10,所述云台摄像装置20拍摄所述收割机主机10所在农田的图像或视频影像,以供所述收割机主机10基于所述云台摄像装置20拍摄的图像或影像信息控制行驶方向和/或作业参数。所述云台摄像装置20基于所述收割机主机10的位置拍摄所述收割机主机10所在农田位置周围的农田的信息。可以理解的是,所述云台摄像装置20捕获视野范围内的图像,比如驾驶人员视野中的图像,以便根据拍摄到的所述图像调整所述收割机主机10的运行参数,比如调整行驶路线,行驶速度、作业参数等。
值得一提的是,所述云台摄像装置20被搭载至所述收割机主机10,其中所述云台摄像装置20捕获到的图像和影像信息被传输至所述收割机主机10,以供所述收割机主机10基于所述信息调整运行参数。所述云台摄像装置20被搭载至所述收割机主机10,其中所述云台摄像装置20在收割机主机10产生抖动时拍摄出清晰影像。换言之,所述云台摄像装置20为防抖摄像装置,能够在拍摄时避免所述收割机主机10自身的机械振动和由于天地不平造成的抖动。所述收割机主机10基于所述云台摄像装置20拍摄的图像信息,在操作人员的操作下或者由自动地控制行驶路径和作业参数,以实现所述收割机的运行作业。换言之,所述收割机主机10基于所述云台摄像装置20拍摄的图像信息调整运行和作业参数,以实现精准地作业/或无人自动驾驶作业。
在本发明的第一较佳实施例中,所述云台摄像装置20为机械云台装置,其中所述云台摄像装置20通过机械连接的方式被搭载至所述收割机主机10,并且所述云台摄像装置20通过机械防抖的方式实现防抖拍摄图像。可以理解的是,所述云台摄像装置20的类型在此仅仅作为示例性的,而非限制。因此,其他类型的结构和安装方式也可应用于此。
如图1至图3所示,所述云台摄像装置20包括一云台21和至少一摄像机22,其中所述云台21安装所述摄像机22至所述收割机主机10,所述云台21固定所述摄像机22的安装位置。所述云台21的底端被装载至所述收割机主机10,藉由所述收割机主机10固定所述云台21,其中所述云台21的上端被设置连接于所述摄像机22。所述摄像机22被所述云台21支撑而保持相对的平衡,以便稳定地拍摄图像或影像。所述摄像机22在所述云台21的支撑作用下拍摄所述收割机主机10周围的图像或影像,其中所述摄像机22基于所述云台21的安装位置为基准拍摄所述收割机主机10视野范围内的图像。可以理解的是,所述云台摄像装置20的所述摄像机22基于所述收割机主机10的位置,通过拍照的方式获取至少一视觉图像。换言之,所述云台摄像装置20的所述摄像机22是基于所述收割机主机10的视野范围内获取所述图像,从而避免摄像装置20的位置与收割机主机10位置变化,而导致的图像数据不准的问题。
值得一提的是,自动驾驶汽车,在自动驾驶模式下为识别获取车辆行走的路线,需要获取精确的车辆定位信息,通常需要高精度的卫星定位信息,并且所述自动驾驶汽车需时刻更新道路中存在的障碍物信息、路面车辆信息、以及路面行人等信息,以在高速运行状态下实现自动驾驶功能。本发明的所述收割机获取的图像是对应于农田中的农作物谷物的图像数据信息,其中所述图像是基于车辆当前位置获取的所述车辆周边的图像。所述收割机不需要太高精度的卫星定位信息,只需要普通米级精度的卫星定位(GPS定位或者北斗定位等)。相应地,所述收割机所获取和处理的图像与自动驾驶汽车不同,因此,所述收割机所形成的路径规划和驾驶方式也不相同。可以理解的是,本发明的收割机基于视觉的识别所述农田的区域和自动驾驶功能与自动驾驶汽车的识别模式不同。
所述云台摄像装置20的所述云台21进一步包括一云台固定件211和至少一云台移动件212,其中所述云台移动件212被可活动地连接至所述云台固定件211。所述云台固定件211被固定地设置于所述收割机主机10,其中所述摄像机22被安装至所述云台移动件212。所述云台21的所述云台移动件212活动地支撑所述摄像机22,以使所述摄像机22在所述收割机主机10抖动时保持相对位置的稳定,从而拍设置清晰的图像。
换言之,当所述收割机主机10在震动或抖动时,比如在农田中进行收割作业时产生的机械震动或抖动,所述云台21的所述云台固定件21与所述收割机主机10同步地震动,其中所述云台21的所述云台移动件212相对于所述云台固定件211运动,中和所述云台固定件211产生的震动,从而保持所述摄像机22的位置的稳定。详细地说,所述云台移动件212中和所述运动固定件211上下方向、左右方向、以及前后方向的抖动或震动,以保持所述摄像机22拍照位置的稳定,进而拍摄出稳定的图像信息。
如图3所示,所述云台摄像装置20的所述摄像机22被设置于所述云台21的所述云台移动件212,其中所述摄像机22被固定地或可运动地安装至所述云台21的所述云台移动件212。优选地,所述摄像机22被可运动地设置于所述运动移动件212,其中所述摄像机22可基于所述云台移动件212的上端转动,以拍摄不同视野方向的图像。可选地,所述摄像机22被固定地安装至所述云台移动件212的上端,其中所述摄像机22在所述云台21的固定支撑作用下拍摄指定视野范围内的图像,比如拍摄所述收割机主机10前方视野内的图像。
所述摄像机22包括一摄像机主体221和至少一摄像机驱动装置222,其中所述摄像机驱动装置222驱动所述摄像机主体221的移动,以拍摄不同方向视野的图像。所述摄像机主体221被可活动地设置于所述云台移动件212,其中所述摄像机主体221在所述摄像机驱动装置222的驱动作用下可在上下方向转动,以拍摄所述收割机主机10远方和附近位置处的农田和农作物的图像。可以理解的是,所述摄像机主体221被所述摄像机驱动装置222驱动向下转动时,所述摄像机主体221拍摄所述收割机主机10近处的图像,以便清晰识别所述图像中农作物的信息。当所述摄像机主体221被所述摄像机驱动装置222驱动而向上转动时,所述摄像机主体221拍摄所述收割机主机10远处的图像,以便通过所述图像识别出所述农田的作业区域和田边界区域。
所述摄像机驱动装置222驱动所述摄像机主体221在左右方向转动,以供所述摄像机主体221拍摄所述收割机主机10的左侧和右侧图像,以便识别所述农田的未作业区域100和已作业区域200,以及田边界区域300。
依照本发明说明书附图之图4所示,示出了所述云台摄像装置20被安装于所述收割机主机10的几个可选的安装方式和安装位置。在本发明的第一较佳实施例中,所述收割机的所述云台摄像装置20被设置于所述收割机主机10的前侧位置处、上部顶端处、左侧、右侧、以及后部位置处等。可以理解的是,所述云台摄像装置20的安装位置不同,所拍摄的图像不同,从所述图像中识别出的信息也不相同。可以理解的是,被设置于所述收割机主机10前侧的所述云台摄像装置20拍摄所述收割机主机10前方的图像,在所述收割机向前行驶作业时,所述收割机主机10前侧的所述云台摄像装置20拍摄到所述收割机主机10的作业情况,以便根据拍摄的作业情况调整所述收割机主机10的行驶路径,作业参数等。
被设置于所述收割机主机10后侧的所述云台摄像装置20拍摄所述收割机主机10后方的图像,在所述收割机向前行驶作业时,所述云台摄像装置20拍摄的所述已作业区域200的图像。通过识别所述收割机主机10后侧的所述云台摄像装置20拍摄的所述已作业区域200的图像,识别出所述收割机主机10的收割作业是否合格,以便于调整所述收割机主机10的作业参数。可以理解的是,通过设置于所述收割机主机10后侧的所述云台摄像装置20拍摄的图像,所述收割机主机10识别出已作业区域200的农作物是否收割完全,是否遗留农作物颗粒等。所述收割机主机10被根据所述图像中识别出的信息调整作业参数,进而改善收割作业。值得一提的是,在倒车行驶时,所述云台摄像装置20拍摄的图像为驾驶人员提供倒车影像。
被设置于所述收割机主机10上部顶端的所述云台摄像装置20拍摄所述收割机主机10远距离的图像,以便基于所述图像识别出农田的作业区域,田边界区域等。优选地,设置于所述收割机主机10上部顶端的所述云台摄像装置20为可转动的云台摄像机。
相应地,被设置于所述收割机主机10左侧或右侧的所述云台摄像装置20拍摄所述收割机主机10左侧或右侧的图像。基于所述收割机主机10左侧或右侧的图像,识别出所述图像中农田中农作物情况,以便识别所述未作业区域100、所述已作业区域200、以及所述田边界区域300。
如图1和图3所示,所述收割机进一步包括一图像处理系统30、一定位装置40、以及一导航系统50,其中所述图像处理系统30、所述定位装置40、以及所述导航系统50被设置于所述收割机主机10。所述定位装置40获取所述收割机主机10的位置信息,和将获取的位置信息传输至所述收割机主机10。所述导航系统50基于所述定位装置40的定位信息为所述收割机主机10提供导航信息。所述图像处理系统30基于所述云台摄像装置20获取的所述农田的所述图像,从图像中识别出所述未作业区域100、所述已作业区域200、以及所述田边界区域300。
优选地,所述图像处理系统30利用图像分割识别技术从图像中识别出所述未作业区域100、所述已作业区域200、以及所述田边界区域300。可以理解的是,所述图像处理系统30还可以通过其他方式识别出所述图像中的区域和边界信息。因此,在本发明的第一较佳实施例中,所述图像处理系统30识别图像的方式在此仅仅作为示例性的,而非限制。
如图5A和图5B所示,所述图像处理系统30基于所述云台摄像装置20拍摄的所述收割机主机10周围的图像,识别出所述图像中农田的区域、田边界,和识别出农田中农作物的种类,农作物的高度、颗粒饱满度、茎秆粗细大小等信息。
值得一提的是,所述图像处理系统30选自基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等其中的任一分割识别方法对所述云台摄像装置20获取的图像进行分割识别,以识别出所述图像中的区域和边界。优选地,所述图像处理系统30利用深度学习算法对所述图像分割识别和对所述图像进行区域划分和边界的限定。换言之,所述图像处理系统30利用深度学习算法识别所述图像中对应的农田的区域和边界,以供所述收割机主机10根据识别划分的区域和边界行驶和进行作业。可更优选地,所述图像处理系统30利用的深度学习算法为卷积神经网络算法的图像分割识别技术从图像中识别出对应农田中的所述未作业区域100、已作业区域200、以及所述田边界区域300。
值得一提地是,所述图像处理系统30利用的处理算法在此仅仅作为示例性质的,而非限制。因此,所述图像处理系统30还可利用其它算法对获取的图像进行分割识别,识别出图像中农田的区域和边界。
可以理解的是,所述图像处理系统30是设置于所述收割机主机10的一图像处理器,其中所述图像处理器接收所述云台摄像装置20拍摄的图像或影像,和识别出所述图像或影像中的信息。所述收割机主机10根据所述图像处理系统30识别出的信息对应地操作控制行驶路径和调节作业的参数。
如图1和图3所示,所述收割机主机10进一步包括一车辆主体11,设置于所述车辆主体11的一作业系统12,以及一驾驶控制系统13,其中所述作业系统12传动地连接于所述车辆主体11,其中所述车辆主体11带动所述作业系统12工作,驱动所述作业系统12进行收割农作物的作业。所述驾驶控制系统13控制所述车辆主体11的行驶和控制所述作业系统12的作业。值得一提的是,所述驾驶控制系统13具有一无人驾驶模式和一操作驾驶模式。当所述收割机处于所述无人驾驶模式时,所述驾驶控制系统13控制所述车辆主体11自动地运行和所述作业系统12的作业。相应地,当收割机处于所述操作驾驶模式时,所述驾驶控制系统允许驾驶人员通过人工操作的方式操作所述车辆主体11的运行和控制所述作业系统的作业。
在本发明的第一较佳实施例中,所述驾驶控制系统13控制所述车辆主体11的行驶和控制所述作业系统12的收割作业。换言之,所述驾驶控制系统13控制所述车辆主体11在行驶的过程中所述作业系统12作业参数的调整。所述驾驶控制系统13获取所述图像处理系统30识别所述图像中的农作物的种类、农作物高度、颗粒饱满程度、农作物茎秆的直径大小等信息,和基于获取的所述信息调整所述作业系统12的作业参数,比如,调整所述作业系统12作业速度,作业的宽幅,作业的高度,调整脱粒处理的参数等。
所述作业系统12进一步包括至少一收割装置121,至少一输送装置122,以及至少一脱粒装置123,其中所述输送装置122被设置能够接收所述收割装置121收割得到的作物,和将所述作物输送至所述脱粒装置123,以供所述脱粒装置123对所述作物进行脱粒。所述作业系统的所述收割装置121、所述输送装置122、以及所述脱粒装置123分别被传动地设置连接于所述车辆主体11,藉由所述车辆主体11驱动所述作业系统12的所述收割装置121、所述输送装置122、以及所述脱粒装置123运行和作业。
所述驾驶控制系统13根据所述图像处理系统30识别出的所述图像信息控制所述收割装置121宽幅、收割高度、以及收割速度。可以理解的是,当农田中农作物的密度大时,所述云台摄像装置20拍摄的所述农田中农作物的信息被所述图像处理系统30识别,其中所述驾驶控制系统13根据所述图像处理系统30识别出的所述图像信息控制减小所述收割装置121的收割幅度、提升收割高度、以及减小收割速度等任一作业参数。
所述驾驶控制系统13根据所述图像处理系统30识别出的所述图像信息控制所述输送装置122的输送速度,输送功率等。可以理解的是,当农田中农作物的茎秆粗大,农作物的高度高,密度大时,所述云台摄像装置20拍摄的所述农田中农作物的信息被所述图像处理系统30识别,其中所述驾驶控制系统13根据所述图像处理系统30识别出的所述图像信息控制提升所述输送装置122的输送速度,提升输送功率等作业参数。
所述驾驶控制系统13根据所述图像处理系统30识别出的所述图像信息控制所述脱粒装置123的脱粒参数。可以理解的是,当农田中农作物的颗粒饱满程度、颗粒大小、水分含量、干湿程度、农作物果实的种类等。可以理解的是,所述图像处理系统30识别出所述农田中所述农作物的农作物信息,其中所述驾驶控制系统13根据所述图像处理系统30识别出的所述图像信息调整所述脱粒装置的脱粒参数,比如吹风功率,脱粒仓的转动速度等任一参数。
参照本发明说明书附图之图6所示,依照本发明第一较佳实施例的所述收割机的一云台摄像装置20A的另一可选实施方式在接下来的描述中被阐明。所述云台摄像装置20A在本可选实施方式中是通过对摄像机内部控制镜头的视角和变焦,从而实现镜头拍照防止抖动。
相应地,所述云台摄像装置20A包括一相机安装机构21A和至少一摄像机22A,其中所述相机安装机构21A将所述摄像机22A装载至所述收割机主机10。所述相机安装机构21A的底端被装载至所述收割机主机10,藉由所述收割机主机10固定所述相机安装机构21A,其中所述相机安装机构21A的上端被设置连接于所述摄像机22A。所述摄像机22A被所述相机安装机构21A支撑而保持相对的平衡,以便稳定地拍摄图像或影像。所述摄像机22A在所述相机安装机构21A的支撑作用下拍摄所述收割机主机10周围的图像或影像,其中所述摄像机22A基于所述相机安装机构21A的安装位置为基准拍摄所述收割机主机10视野范围内的图像。
可以理解的是,所述云台摄像装置20A的所述摄像机22A基于所述收割机主机10的位置,通过拍照的方式获取至少一视觉图像。换言之,所述云台摄像装置20A的所述摄像机22A是基于所述收割机主机10的视野范围内获取所述图像,从而避免摄像装置20A的位置与收割机主机10位置变化,而导致的图像数据不准的问题。
本领域的技术人员应理解,上述描述及附图中所示的本发明的实施例只作为举例而并不限制本发明。本发明的目的已经完整并有效地实现。本发明的功能及结构原理已在实施例中展示和说明,在没有背离所述原理下,本发明的实施方式可以有任何变形或修改。
Claims (17)
1.一带有云台摄像装置的收割机,其特征在于,包括:
一收割机主机;和
至少一云台摄像装置,其中所述云台摄像装置被设置于所述收割机主机,所述云台摄像装置拍摄所述收割机主机周围的图像,以供所述收割机主机基于所述云台摄像装置拍摄的图像调整运行参数。
2.根据权利要求1所述的收割机,其中所述云台摄像装置为机械防抖云台装置,所述云台摄像装置包括一云台和至少一摄像机,其中所述云台将所述摄像机安装至所述收割机主机,所述摄像机被设置于所述云台,藉由所述云台支撑所述摄像机保持平衡。
3.根据权利要求2所述的收割机,其中所述云台被安装至所述收割机主机,并且所述云台可活动地支撑所述摄像机,其中所述摄像机基于所述云台的安装位置拍摄,以获取所述收割机主机视野范围内的图像。
4.根据权利要求3所述的收割机,其中所述云台进一步包括一云台固定件和至少一云台移动件,其中所述云台固定件被固定地安装至所述收割机主机,所述运动移动件可移动地连接至所述云台固定件,所述摄像机被安装至所述云台一动间,通过所述云台移动件和所述云台固定件的相对移动,保持所述摄像机相对位置的稳定。
5.根据权利要求2至4任一所述的收割机,其中所述摄像机包括一摄像机主体和至少一摄像机驱动装置,其中所述摄像机主体被可驱动地连接于所述摄像机驱动装置,所述摄像机主体被所述摄像机驱动装置驱动,以拍摄不同方向视野内的图像。
6.根据权利要求5所述的收割机,其中所述摄像机驱动装置驱动所述摄像机主体上下地转动,以便所述摄像机主机拍摄距离所述收割机主机远处和近处的农田的图像。
7.根据权利要求5所述的收割机,其中所述摄像机驱动装置驱动所述摄像机主体左右地转动,以便所述摄像机主机拍摄所述收割机主机两侧不同区域的农田的图像。
8.根据权利要求1至7任一所述的收割机,其中所述云台摄像装置被设置于所述收割机主机的前部、所述收割机主机的顶部、所述收割机主机的左侧、右侧、或所述收割机主机的后部。
9.根据权利要求1所述的收割机,其中所述云台摄像装置为电子云台装置,其中所述云台摄像装置通过控制镜头的视角和变焦,从而防止所述云台摄像装置镜头拍照抖动。
10.根据权利要求9所述的收割机,其中所述云台摄像装置包括一相机安装机构和至少一摄像机,其中所述相机安装机构将所述摄像机固定地安装至所述收割机主机。
11.根据权利要求1所述的收割机,其中所述收割机进一步包括一图像处理系统,其中所述图像处理系统被设置于所述收割机主机,所述图像处理系统接收所述云台摄像装置拍摄的图像,和识别出所述图像中农田的信息或农作物的信息。
12.根据权利要求11所述的收割机,其中所述图像处理系统利用图像分割识别技术识别出所述云台摄像装置拍摄的所述图像中农田的区域信息,识别出所述农作物的信息,以供所述收割机主机根据识别出的信息控制运行参数。
13.根据权利要求11所述的收割机,其中所述收割机进一步包括一定位装置和一导航系统,其中所述定位装置和所述导航系统被设置于所述收割机主机,所述定位装置获取所述收割机主机的位置信息,其中所述导航系统基于所述位置信息提供导航信息。
14.根据权利要求13所述的收割机,其中所述收割机主机包括一车辆主体,设置于所述车辆主体的至少一作业系统,以及一驾驶控制系统,所述车辆主体驱动所述作业系统运行,其中所述驾驶控制系统控制所述车辆主体的运行和控制所述作业系统的作业参数。
15.根据权利要求14所述的收割机,其中所述驾驶控制系统获取所述图像处理系统识别的所述云台摄像装置拍摄的图像的信息,自动地控制所述车辆主体的行驶路线和控制所述作业系统的作业参数,以实现无人自动驾驶和收割作业。
16.根据权利要求15所述的收割机,其中所述作业系统包括一收割装置,其中所述驾驶控制系统基于所述云台摄像装置拍摄的所述农作物图像,控制所述收割装置宽幅、收割高度、以及收割速度。
17.根据权利要求15所述的收割机,其中所述作业系统包括一脱粒装置,其中所述驾驶控制系统基于所述云台摄像装置拍摄的所述农作物图像,控制所述脱粒装置的转速和吹风风速。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910007559.XA CN109716917A (zh) | 2019-01-04 | 2019-01-04 | 带有云台摄像装置的收割机 |
PCT/CN2019/107533 WO2020140490A1 (zh) | 2019-01-04 | 2019-09-24 | 带有云台摄像装置的收割机 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910007559.XA CN109716917A (zh) | 2019-01-04 | 2019-01-04 | 带有云台摄像装置的收割机 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109716917A true CN109716917A (zh) | 2019-05-07 |
Family
ID=66298835
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910007559.XA Pending CN109716917A (zh) | 2019-01-04 | 2019-01-04 | 带有云台摄像装置的收割机 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109716917A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020134236A1 (zh) * | 2018-12-29 | 2020-07-02 | 丰疆智能科技股份有限公司 | 收割机及其自动驾驶方法 |
WO2020140490A1 (zh) * | 2019-01-04 | 2020-07-09 | 丰疆智能科技股份有限公司 | 带有云台摄像装置的收割机 |
CN111887004A (zh) * | 2020-08-17 | 2020-11-06 | 重庆大学 | 一种杆状作物收割机器人控制方法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1900811A (zh) * | 2005-07-19 | 2007-01-24 | 佳能株式会社 | 云台 |
CN103914070A (zh) * | 2014-04-02 | 2014-07-09 | 中国农业大学 | 一种用于谷物联合收割机的视觉导航辅助驾驶系统 |
JP2015104377A (ja) * | 2013-12-02 | 2015-06-08 | ヤンマー株式会社 | コンバイン |
CN205320578U (zh) * | 2015-10-23 | 2016-06-22 | 株式会社久保田 | 联合收割机 |
CN106989256A (zh) * | 2017-02-15 | 2017-07-28 | 中山市紫科智能科技有限公司 | 一种自行式虚拟现实相机拍摄稳定云台 |
CN206620196U (zh) * | 2017-03-23 | 2017-11-07 | 三峡大学 | 基于智能终端遥控的全视角摄影车 |
CN107645624A (zh) * | 2016-07-20 | 2018-01-30 | 宁波舜宇光电信息有限公司 | 摄像模组及其矫正方法和光学防抖方法以及带有摄像模组的电子设备 |
CN207631146U (zh) * | 2017-11-20 | 2018-07-20 | 西南交通大学 | 一种带有减震云台的车载行车记录仪 |
CN210130123U (zh) * | 2019-01-04 | 2020-03-10 | 丰疆智能科技股份有限公司 | 带有云台摄像装置的收割机 |
-
2019
- 2019-01-04 CN CN201910007559.XA patent/CN109716917A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1900811A (zh) * | 2005-07-19 | 2007-01-24 | 佳能株式会社 | 云台 |
JP2015104377A (ja) * | 2013-12-02 | 2015-06-08 | ヤンマー株式会社 | コンバイン |
CN103914070A (zh) * | 2014-04-02 | 2014-07-09 | 中国农业大学 | 一种用于谷物联合收割机的视觉导航辅助驾驶系统 |
CN205320578U (zh) * | 2015-10-23 | 2016-06-22 | 株式会社久保田 | 联合收割机 |
CN107645624A (zh) * | 2016-07-20 | 2018-01-30 | 宁波舜宇光电信息有限公司 | 摄像模组及其矫正方法和光学防抖方法以及带有摄像模组的电子设备 |
CN106989256A (zh) * | 2017-02-15 | 2017-07-28 | 中山市紫科智能科技有限公司 | 一种自行式虚拟现实相机拍摄稳定云台 |
CN206620196U (zh) * | 2017-03-23 | 2017-11-07 | 三峡大学 | 基于智能终端遥控的全视角摄影车 |
CN207631146U (zh) * | 2017-11-20 | 2018-07-20 | 西南交通大学 | 一种带有减震云台的车载行车记录仪 |
CN210130123U (zh) * | 2019-01-04 | 2020-03-10 | 丰疆智能科技股份有限公司 | 带有云台摄像装置的收割机 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020134236A1 (zh) * | 2018-12-29 | 2020-07-02 | 丰疆智能科技股份有限公司 | 收割机及其自动驾驶方法 |
WO2020140490A1 (zh) * | 2019-01-04 | 2020-07-09 | 丰疆智能科技股份有限公司 | 带有云台摄像装置的收割机 |
CN111887004A (zh) * | 2020-08-17 | 2020-11-06 | 重庆大学 | 一种杆状作物收割机器人控制方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109588107A (zh) | 收割机及其自动驾驶方法 | |
KR102589076B1 (ko) | 수확기 | |
CN110352697B (zh) | 用于控制收割割台的操作参数的系统以及农业收割机 | |
US11659788B2 (en) | Vehicle automated unloading | |
US9457971B2 (en) | System and method of material handling using one or more imaging devices on the transferring vehicle to control the material distribution into the storage portion of the receiving vehicle | |
CN209983105U (zh) | 收割机 | |
WO2020134236A1 (zh) | 收割机及其自动驾驶方法 | |
CN109716917A (zh) | 带有云台摄像装置的收割机 | |
DE102010038661A1 (de) | Erntemaschine mit einem an einem Fluggerät befestigten Sensor | |
JP2017176008A (ja) | コンバイン | |
WO2020218464A1 (ja) | 収穫機、障害物判定プログラム、障害物判定プログラムを記録した記録媒体、障害物判定方法、農作業機、制御プログラム、制御プログラムを記録した記録媒体、制御方法 | |
WO2021261343A1 (ja) | 収穫機、収穫機の制御システム、収穫機の制御方法、収穫機の制御プログラム、及び、記録媒体 | |
WO2020140490A1 (zh) | 带有云台摄像装置的收割机 | |
CN210130123U (zh) | 带有云台摄像装置的收割机 | |
KR20220147351A (ko) | 농업용 다목적 로봇 | |
WO2022123889A1 (ja) | 作業車、作物状態検出システム、作物状態検出方法、作物状態検出プログラム、及び作物状態検出プログラムが記録されている記録媒体 | |
JP2020072740A (ja) | コンバイン | |
WO2020262287A1 (ja) | 農作業機、自動走行システム、プログラム、プログラムを記録した記録媒体、及び方法 | |
JP7546470B2 (ja) | 農作業機 | |
JP7558119B2 (ja) | 作業支援システム | |
KR20230074717A (ko) | 수확기 | |
RU2774651C1 (ru) | Система автоматического вождения для переработки зерна, способ автоматического вождения и способ планирования траектории | |
US20240000010A1 (en) | Combine Automation Regime-based Control | |
WO2021261415A1 (ja) | 収穫機、収穫機制御プログラム、収穫機制御プログラムを記録した記録媒体、収穫機制御方法 | |
JP2023160359A (ja) | 飛行体の制御方法、制御プログラム、及び記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 441100 No. 1 Dongfengjingguan Avenue, Xiangzhou International Logistics Park, Xiangyang City, Hubei Province Applicant after: Fengjiang Intelligent Technology Co., Ltd. Address before: 441100 No. 1 Dongfengjingguan Avenue, Xiangzhou International Logistics Park, Xiangyang City, Hubei Province Applicant before: Fengjiang Intelligent Agriculture Co., Ltd. |
|
CB02 | Change of applicant information |