CN116645297B - 基于人工智能的agv叉车控制方法 - Google Patents
基于人工智能的agv叉车控制方法 Download PDFInfo
- Publication number
- CN116645297B CN116645297B CN202310905514.0A CN202310905514A CN116645297B CN 116645297 B CN116645297 B CN 116645297B CN 202310905514 A CN202310905514 A CN 202310905514A CN 116645297 B CN116645297 B CN 116645297B
- Authority
- CN
- China
- Prior art keywords
- connected domain
- edge
- edge detection
- detection image
- edge connected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 72
- 238000013473 artificial intelligence Methods 0.000 title claims abstract description 20
- 238000003708 edge detection Methods 0.000 claims description 191
- 238000012937 correction Methods 0.000 claims description 54
- 238000004891 communication Methods 0.000 claims description 8
- 238000005516 engineering process Methods 0.000 claims description 6
- 238000007781 pre-processing Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 abstract description 4
- 238000004364 calculation method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 3
- 238000010606 normalization Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
- B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
- B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
- B66F9/063—Automatically guided
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
- B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
- B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
- B66F9/075—Constructional features or details
- B66F9/0755—Position control; Position detectors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/187—Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Transportation (AREA)
- Structural Engineering (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Civil Engineering (AREA)
- Life Sciences & Earth Sciences (AREA)
- Geology (AREA)
- Mechanical Engineering (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明涉及图像处理技术领域,具体涉及基于人工智能的AGV叉车控制方法,包括:根据灰度图像得到每个方向的连通域,根据连通域得到每个方向边缘连通域与初始阈值;根据边缘连通域数量与灰度差异得到偏差程度,根据初始阈值对偏差程度进行修正得到每个方向边缘连通域的修正偏差程度,根据修正偏差程度差异得到每个方向边缘连通域的置信度,根据每个方向边缘连通域的置信度与每个方向边缘连通域的修正偏差程度得到每个方向的偏移程度;根据不同方向的偏移程度得到模糊核大小与方向,并根据模糊核大小与方向进行去模糊影响,进行人工智能AGV叉车控制。本发明对复杂图像得到更加准确合适的模糊核,从而得到更清晰的还原图像。
Description
技术领域
本发明涉及图像处理技术领域,具体涉及基于人工智能的AGV叉车控制方法。
背景技术
AGV叉车是指装备有电磁或光学等自动导航装置,可沿指定路径行驶、具有安全保护以及各种移载功能的运输车;而在AGV叉车行驶过程中,通过视觉系统获取的环境中的图像信息的清晰程度直接会影响导航装置对路径的规划判断,由于AGV叉车在行驶过程中采集的图像信息中会因设备抖动存在模糊现象,因此需要对视觉系统采集的图像信息进行图像增强。
盲去模糊化作为常用的图像增强方式之一,通过对不同图像获取不同的模糊核,并根据模糊核对原图像进行去模糊化,从而得到清晰图像,但由于图像信息的复杂性,导致获取的模糊核的大小与角度并不合适对应的图像,从而不能得到良好的清晰图像,为了解决这一问题,本发明提出了一种基于人工智能的AGV叉车控制方法。
发明内容
本发明提供基于人工智能的AGV叉车控制方法,以解决现有的问题。
本发明的基于人工智能的AGV叉车控制方法采用如下技术方案:
本发明一个实施例提供了基于人工智能的AGV叉车控制方法,该方法包括以下步骤:
采集环境图像并进行预处理得到灰度图像;
对灰度图像进行边缘检测得到竖直方向边缘检测图像、水平方向边缘检测图像,分别根据竖直方向边缘检测图像、水平方向边缘检测图像上每个连通域的面积与灰度得到水平方向上的边缘连通域与竖直方向上的边缘连通域以及边缘连通域的初始阈值;
将竖直方向上的每个边缘连通域中同一竖直方向的像素点构成的连通域记为纵向连通域,将水平方向上的每个边缘连通域中同一水平方向的像素点构成的连通域记为横向连通域,根据纵向连通域数量以及灰度差异、横向连通域的数量以及灰度差异得到每个方向边缘连通域的偏差程度,根据每个方向边缘连通域的初始阈值对每个方向边缘连通域的偏差程度进行修正得到每个方向边缘连通域的修正偏差程度,根据每个方向边缘连通域之间的修正偏差程度差异得到每个方向边缘连通域的置信度,根据每个方向边缘连通域的置信度与每个方向边缘连通域的修正偏差程度得到每个方向的偏移程度;
根据不同方向的偏移程度得到模糊核大小与方向,并根据模糊核大小与方向进行去模糊影响,进行人工智能AGV叉车控制。
优选的,所述对灰度图像进行边缘检测得到竖直方向边缘检测图像、水平方向边缘检测图像,包括的具体方法为:
预设一个梯度阈值以及一个下限阈值,使用边缘检测技术从梯度阈值开始,步长为1,依次分别向下遍历阈值进行水平方向与竖直方向上的边缘检测,直至阈值达到下限阈值停止遍历,并将每次遍历得到一个水平方向上的边缘检测图像、竖直方向上的边缘检测图像,遍历完成后得到若干个水平方向上的边缘检测图像、竖直方向上的边缘检测图像,分别将若干个水平方向上的边缘检测图像、若干个竖直方向上的边缘检测图像进行叠加求和得到一个水平方向边缘检测图像、竖直方向边缘检测图像。
优选的,所述分别根据竖直方向边缘检测图像、水平方向边缘检测图像上每个连通域的面积与灰度得到水平方向上的边缘连通域与竖直方向上的边缘连通域以及边缘连通域的初始阈值,包括的具体方法为:
预设一个连通域面积阈值以及一个连通域外接矩形边长阈值,将连通域面积大于连通域面积阈值,连通域外接矩形的最大边长大于连通域外接矩形边长阈值,连通域内灰度均值不为0的连通域记为边缘连通域,将每个边缘连通域在边缘检测阈值遍历的过程中第一次出现时的阈值记为初始阈值;
获取水平方向上所有的边缘连通域与竖直方向上所有的边缘连通域以及对应边缘连通域的初始阈值。
优选的,所述根据纵向连通域数量以及灰度差异、横向连通域的数量以及灰度差异得到每个方向边缘连通域的偏差程度,包括的具体方法为:
所述每个方向边缘连通域的偏差程度包括竖直方向边缘检测图像中边缘连通域的偏差程度和水平方向边缘检测图像中边缘连通域的偏差程度;
竖直方向边缘检测图像中边缘连通域的偏差程度的获取方法为:
式中,Y表示竖直方向边缘检测图像中边缘连通域的偏差程度;n1表示竖直方向边
缘检测图像中边缘连通域中纵向连通域的数量;表示竖直方向边缘检测图像中边缘连通
域中第个纵向连通域内所有像素点与灰度图像中对应位置像素点灰度差值的累加和;
表示竖直方向边缘检测图像中第个纵向连通域内所有像素点与灰度图像中对应位置像素
点灰度差值的均值;表示第个纵向连通域的面积;
水平方向边缘检测图像中边缘连通域的偏差程度的获取方法为:
式中,X表示水平方向边缘检测图像中边缘连通域的偏差程度;n2表示水平方向边
缘检测图像中边缘连通域中横向连通域的数量;表示水平方向边缘检测图像中边缘连
通域中第z个横向连通域内所有像素点与灰度图像中对应位置像素点灰度差值的累加和;表示水平方向边缘检测图像中第z个横向连通域内所有像素点与灰度图像中对应位置
像素点灰度差值的均值;表示第z个横向连通域的面积。
优选的,所述根据每个方向边缘连通域的初始阈值对每个方向边缘连通域的偏差程度进行修正得到每个方向边缘连通域的修正偏差程度,包括的具体方法为:
所述每个方向边缘连通域的修正偏差程度包括竖直方向边缘检测图像中边缘连通域的修正偏差程度和水平方向边缘检测图像中边缘连通域的修正偏差程度;
竖直方向边缘检测图像中边缘连通域的修正偏差程度的获取方法为:
式中,Y1表示竖直方向边缘检测图像中边缘连通域的修正偏差程度;Y表示竖直方向边缘检测图像中边缘连通域的偏差程度;t表示竖直方向边缘检测图像中边缘连通域的初始阈值;t2表示竖直方向边缘检测图像中边缘连通域的初始阈值的最大值;
水平方向边缘检测图像中边缘连通域的修正偏差程度的获取方法为:
式中,X1表示水平方向边缘检测图像中边缘连通域的修正偏差程度;X表示水平方向边缘检测图像中边缘连通域的偏差程度;t1表示水平方向边缘检测图像中边缘连通域的初始阈值;t3表示水平方向边缘检测图像中边缘连通域的初始阈值的最大值。
优选的,所述根据每个方向边缘连通域之间的修正偏差程度差异得到每个方向边缘连通域的置信度,包括的具体方法为:
所述每个方向边缘连通域的置信度包括竖直方向边缘检测图像中边缘连通域的置信度和水平方向边缘检测图像中边缘连通域的置信度;
竖直方向边缘检测图像中边缘连通域的置信度获取方法为:
式中,P1表示竖直方向边缘检测图像中边缘连通域的置信度;表示竖直方向边
缘检测图像中距离边缘连通域最近的边缘连通域与边缘连通域修正偏差程度的差值绝对
值;表示竖直方向边缘检测图像中边缘连通域与其他边缘连通域修正偏差程度
的差值绝对值最大值;表示以自然常数为底的指数函数;
水平方向边缘检测图像中边缘连通域的置信度的获取方法为:
式中,P2表示水平方向边缘检测图像中边缘连通域的置信度;表示水平方向
边缘检测图像中距离边缘连通域最近的边缘连通域与边缘连通域修正偏差程度的差值绝
对值;表示水平方向边缘检测图像中边缘连通域与其他边缘连通域修正偏差程
度的差值绝对值最大值。
优选的,所述根据每个方向边缘连通域的置信度与每个方向边缘连通域的修正偏差程度得到每个方向的偏移程度,包括的具体方法为:
所述每个方向的偏移程度包括竖直方向上的偏移程度与水平方向上的偏移程度;
竖直方向上的偏移程度的获取方法为:
式中,表示灰度图像在竖直方向上的偏移程度;N表示竖直方向边缘检测图像
中包含的边缘连通域数量;表示竖直方向边缘检测图像中第i个边缘连通域的置信度;表示竖直方向边缘检测图像中第i个边缘连通域的修正偏差程度;
水平方向上的偏移程度的获取方法为:
式中,表示灰度图像在水平方向上的偏移程度;N1表示水平方向边缘检测图像
中包含的边缘连通域数量;表示水平方向边缘检测图像中第r个边缘连通域的置信度;表示水平方向边缘检测图像中第r个边缘连通域的修正偏差程度。
优选的,所述根据不同方向的偏移程度得到模糊核大小与方向,包括的具体方法为:
将灰度图像在竖直方向上的偏移程度与灰度图像在水平方向上的偏移程度的求和结果记为第一求和;将第一求和开根号结果记为灰度图像模糊核初始大小;在灰度图像模糊核初始大小向上取整的方向上,将最接近初始大小的奇数记为灰度图像的模糊核大小;
将灰度图像在竖直方向上的偏移程度与灰度图像在水平方向上的偏移程度比值记为第一比值;将第一比值的反正切函数结果记为灰度图像模糊核角度。
本发明的技术方案的有益效果是:本发明通过对图像进行不同方向的边缘检测得到对应方向的边缘连通域以及对应的初始阈值,根据边缘连通域得到偏差程度,根据偏差程度与初始阈值对进行偏差程度进行修正得到修正偏差程度,根据修正偏差程度得到置信度,根据置信度与修正偏差程度得到对应方向的偏移程度,最终确定模糊核的大小与方向,相较于现有技术,本发明可以对复杂图像得到更加准确合适的模糊核,从而得到更清晰的还原图像。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明基于人工智能的AGV叉车控制方法的步骤流程图;
图2为本发明的水平方向边缘检测示意图;
图3为本发明的竖直方向边缘检测示意图。
具体实施方式
为了更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的基于人工智能的AGV叉车控制方法,其具体实施方式、结构、特征及其功效,详细说明如下。在下述说明中,不同的“一个实施例”或“另一个实施例”指的不一定是同一实施例。此外,一或多个实施例中的特定特征、结构或特点可由任何合适形式组合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。
下面结合附图具体的说明本发明所提供的基于人工智能的AGV叉车控制方法的具体方案。
请参阅图1,其示出了本发明一个实施例提供的基于人工智能的AGV叉车控制方法的步骤流程图,该方法包括以下步骤:
步骤S001:采集环境图像并进行预处理得到灰度图像。
需要说明的是,盲去模糊化作为常用的图像增强方式之一,通过对不同图像获取不同的模糊核,并根据模糊核对原图像进行去模糊化,从而得到清晰图像,但由于图像信息的复杂性,导致获取的模糊核的大小与角度并不合适对应的图像,从而不能得到良好的清晰图像,为了解决这一问题,本实施例提出了一种基于人工智能的AGV叉车控制方法。
具体的,为了实现本实施例提出的基于人工智能的AGV叉车控制方法,首先需要采集环境图像,具体过程为:启动AGV叉车,使AGV叉车按照预定总路程为10米的路线以每秒0.2米的速度行驶,每2秒采集一次AGV叉车的摄像设备中所记录的环境图像,并进行线性灰度化转换得到灰度图像,其中灰度图像数量为10/0.2/2=25。本实施例以任意一张灰度图像为例进行叙述。
至此,通过上述方法得到灰度图像。
步骤S002:对灰度图像进行边缘检测,通过不同方向连通域分析得到水平方向上与竖直方向上的边缘连通域以及对应的初始阈值。
需要说明的是,在灰度图像发生模糊的过程中,图像中的不同物体边缘处的像素点与周围像素点之间的灰度梯度会降低,从而使原本面积较小的边缘变化为一个较大的边缘;由于在不同方向的模糊核下,对应方向下的边缘的模糊程度也会不同,因此可以根据水平与竖直方向上的边缘,来表征模糊核的特征。
具体的,预设一个梯度阈值T1以及一个下限阈值T2,其中本实施例以T1=255、T2=20为例进行叙述,本实施例不进行具体限定,其中T1、T2可根据具体实施情况而定。使用边缘检测技术从梯度阈值T1开始,步长为1,依次分别向下遍历阈值进行水平方向与竖直方向上的边缘检测,直至阈值达到下限阈值T2停止遍历,并将每次遍历得到一个水平方向上的边缘检测图像、竖直方向上的边缘检测图像,遍历完成后得到若干个水平方向上的边缘检测图像、竖直方向上的边缘检测图像,分别将若干个水平方向上的边缘检测图像、若干个竖直方向上的边缘检测图像进行叠加求和得到一个水平方向边缘检测图像、竖直方向边缘检测图像。
本实施例以水平方向上的边缘检测为例进行叙述,获取水平方向上的边缘检测图像中所有连通域,将连通域面积大于S,连通域外接矩形的最大边长大于k,连通域内灰度均值不为0的连通域记为边缘连通域。在边缘检测阈值遍历的过程中,每个边缘连通域第一次出现时的梯度阈值记为每个边缘连通域的初始阈值;获取水平方向上所有的边缘连通域;参考水平方向上所有边缘连通域以及对应初始阈值的获取方法,获取竖直方向上所有的边缘连通域以及对应的初始阈值。其中边缘检测技术是Sobel算子边缘检测,该技术是公知技术,本实施例不进行叙述;本实施例以S=20、k=10为例进行叙述,本实施例不进行具体限定,其中S、k可根据具体实施情况而定;请参阅图2,其示出了水平方向边缘检测示意图,请参阅图3,其示出了竖直方向边缘检测示意图。
至此,通过上述方法获取水平方向上所有的边缘连通域与竖直方向上所有的边缘连通域以及对应的初始阈值。
步骤S003:根据边缘连通域得到不同方向的偏差程度,根据初始阈值对偏差程度进行修正得到不同方向的修正偏差程度,根据修正偏差程度得到不同方向的置信度,根据置信度得到不同方向的偏移程度。
需要说明的是,由于水平方向上的边缘连通域与竖直方向上的边缘连通域在对应方向上的理想灰度上都存在一定的偏差程度,但偏差程度产生的实际效果并不一定能反映边缘模糊对实际观测的影响,所以需要对所有边缘连通域的偏差程度进行一定程度的修正;而修正后的偏差程度又因对应边缘连通域的模糊方向与水平或竖直方向的夹角不同,导致修正后的偏差程度有时并不能很好地表示对应模糊方向上的偏差程度,所以可以通过判断边缘连通域的模糊方向,通过结合模糊方向与边缘连通域的水平与竖直的边缘方向得到对应边缘连通域的置信度,然后可根据置信度确定图像在对应方向上实际的偏移程度。
1.获取灰度图像竖直方向上的偏移程度的获取方法为:
具体的,将竖直方向边缘检测图像中边缘连通域中同一竖直方向的像素点构成的连通域记为纵向连通域,其中每个边缘连通域中存在多个纵向连通域;本实施例以竖直方向边缘检测图像中的任意一个边缘连通域为例进行叙述,该边缘连通域的偏差程度的计算公式为:
式中,Y表示竖直方向边缘检测图像中该边缘连通域的偏差程度;n1表示竖直方向
边缘检测图像中该边缘连通域中纵向连通域的数量;表示竖直方向边缘检测图像中该边
缘连通域中第个纵向连通域内所有像素点与灰度图像中对应位置像素点灰度差值的累加
和,记为第个纵向连通域的第一灰度差,若第一灰度差越大,则该边缘连通域的偏差程度
越小;表示竖直方向边缘检测图像中第个纵向连通域内所有像素点与灰度图像中对应
位置像素点灰度差值的均值,若均值越大,则该边缘连通域的偏差程度越大;表示第个
纵向连通域的面积。
获取竖直方向边缘检测图像中其他边缘连通域的偏差程度;获取竖直方向边缘检测图像中所有边缘连通域的偏差程度。
进一步的,对竖直方向边缘检测图像中所有边缘连通域的偏差程度进行修正,得到修正后的偏差程度,记为修正偏差程度;竖直方向边缘检测图像中该边缘连通域的修正偏差程度的计算公式为:
式中,Y1表示竖直方向边缘检测图像中该边缘连通域的修正偏差程度;Y表示竖直方向边缘检测图像中该边缘连通域的偏差程度;t表示竖直方向边缘检测图像中该边缘连通域的初始阈值;t2表示竖直方向边缘检测图像中该边缘连通域的初始阈值的最大值。
获取竖直方向边缘检测图像中其他边缘连通域的修正偏差程度;获取竖直方向边缘检测图像中所有边缘连通域的修正偏差程度。
进一步的,竖直方向边缘检测图像中该边缘连通域的置信度的计算公式为:
式中,P1表示竖直方向边缘检测图像中该边缘连通域的置信度;表示竖直方向
边缘检测图像中距离该边缘连通域最近的边缘连通域与该边缘连通域修正偏差程度的差
值绝对值;表示竖直方向边缘检测图像中该边缘连通域与其他边缘连通域修正
偏差程度的差值绝对值最大值;表示以自然常数为底的指数函数,本实施例采用函数来呈现反比例关系及归一化处理,实施者可根据实际情况选择反比例函数及归
一化函数。
获取竖直方向边缘检测图像中其他边缘连通域的置信度;获取竖直方向边缘检测图像中所有边缘连通域的置信度。
进一步的,灰度图像在竖直方向上偏移程度的计算公式为:
式中,表示灰度图像在竖直方向上的偏移程度;N表示竖直方向边缘检测图像
中包含的边缘连通域数量;表示竖直方向边缘检测图像中第i个边缘连通域的置信度;表示竖直方向边缘检测图像中第i个边缘连通域的修正偏差程度。
获取灰度图像在竖直方向上的偏移程度。
至此,获取灰度图像在竖直方向上的偏移程度。
2. 获取水平方向边缘检测图像中边缘连通域的偏移程度的获取方法为:
具体的,将水平方向边缘检测图像中边缘连通域中同一水平方向的像素点构成的连通域记为横向连通域,其中每个边缘连通域中存在多个横向连通域;本实施例以水平方向边缘检测图像中的任意一个边缘连通域为例进行叙述,该边缘连通域的偏差程度的计算公式为:
式中,X表示水平方向边缘检测图像中该边缘连通域的偏差程度;n2表示水平方向
边缘检测图像中该边缘连通域中横向连通域的数量;表示水平方向边缘检测图像中该
边缘连通域中第z个横向连通域内所有像素点与灰度图像中对应位置像素点灰度差值的累
加和,记为第z个横向连通域的第一灰度差,若第一灰度差越大,则该边缘连通域的偏差程
度越小;表示水平方向边缘检测图像中该边缘连通域中第z个横向连通域内所有像素点
与灰度图像中对应位置像素点灰度差值的均值,若均值越大,则该边缘连通域的偏差程度
越大;表示第z个横向连通域的面积。
获取水平方向边缘检测图像中其他边缘连通域的偏差程度;获取水平方向边缘检测图像中所有边缘连通域的偏差程度。
进一步的,对水平方向边缘检测图像中所有边缘连通域的偏差程度进行修正,得到修正后的偏差程度,记为修正偏差程度;水平方向边缘检测图像中该边缘连通域的修正偏差程度的计算公式为:
式中,X1表示水平方向边缘检测图像中该边缘连通域的修正偏差程度;X表示水平方向边缘检测图像中该边缘连通域的偏差程度;t1表示水平方向边缘检测图像中该边缘连通域的初始阈值;t3表示水平方向边缘检测图像中该边缘连通域的初始阈值的最大值。
获取水平方向边缘检测图像中其他边缘连通域的修正偏差程度;获取水平方向边缘检测图像中所有边缘连通域的修正偏差程度。
进一步的,水平方向边缘检测图像中该边缘连通域的置信度的计算公式为:
式中,P2表示水平方向边缘检测图像中该边缘连通域的置信度;表示水平方
向边缘检测图像中距离该边缘连通域最近的边缘连通域与该边缘连通域修正偏差程度的
差值绝对值;表示水平方向边缘检测图像中该边缘连通域与其他边缘连通域修
正偏差程度的差值绝对值最大值;表示以自然常数为底的指数函数,本实施例采用函数来呈现反比例关系及归一化处理,实施者可根据实际情况选择反比例函数及归
一化函数。
获取水平方向边缘检测图像中其他边缘连通域的置信度;获取水平方向边缘检测图像中所有边缘连通域的置信度。
进一步的,灰度图像在水平方向上偏移程度的计算公式为:
式中,表示灰度图像在水平方向上的偏移程度;N1表示水平方向边缘检测图像
中包含的边缘连通域数量;表示水平方向边缘检测图像中第r个边缘连通域的置信度;表示水平方向边缘检测图像中第r个边缘连通域的修正偏差程度。
获取灰度图像在水平方向上的偏移程度。
至此,获取灰度图像在水平方向上的偏移程度。
至此,获取灰度图像在竖直方向上的偏移程度与灰度图像在水平方向上的偏移程度。
步骤S004:根据不同方向的偏移程度得到模糊核大小与方向,并根据模糊核大小与方向进行反卷积运算去模糊影响,进行人工智能AGV叉车控制。
具体的,模糊核大小的获取方法为:
式中,M表示灰度图像模糊核初始大小;表示灰度图像在竖直方向上的偏移程
度;表示灰度图像在水平方向上的偏移程度。
在灰度图像模糊核初始大小向上取整的方向上,将最接近初始大小的奇数记为灰度图像的模糊核大小。
获取灰度图像模糊核大小。
进一步的,以模糊核中心的水平线为起始线,逆时针记录度数,将记录的度数作为模糊核角度,模糊核角度的计算公式为:
式中,表示灰度图像模糊核角度;表示灰度图像在竖直方向上的偏移程度;
表示灰度图像在水平方向上的偏移程度。
获取灰度图像模糊核角度。
将灰度图像以及灰度图像中模糊核的大小与角度输入反卷积算法,输出得到去模糊的清晰图像,将清晰图像后,将其作为初始图像输入YOLOv3算法,对于输入图像进行多次下采样处理,分别检测不同尺度的物体;损失函数由目标物体置信度损失,目标物体类别损失,置信度背景损失以及边界框坐标损失加权平均,作为YOLOv3算法的总损失函数,其中目标物体类别损失函数采用交叉熵作为度量标准,其他三类采用均方误差作为度量标准;输出集为边界框,目标类别以及每个边界框的置信度得分。通过检测结果的物体进行跟踪,帮助车辆确定它们的位置和运动状态,以达到规划车辆的行进路线的目的。
至此,本实施例完成。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.基于人工智能的AGV叉车控制方法,其特征在于,该方法包括以下步骤:
采集环境图像并进行预处理得到灰度图像;
对灰度图像进行边缘检测得到竖直方向边缘检测图像、水平方向边缘检测图像,分别根据竖直方向边缘检测图像、水平方向边缘检测图像上每个连通域的面积与灰度得到水平方向上的边缘连通域与竖直方向上的边缘连通域以及边缘连通域的初始阈值;
将竖直方向上的每个边缘连通域中同一竖直方向的像素点构成的连通域记为纵向连通域,将水平方向上的每个边缘连通域中同一水平方向的像素点构成的连通域记为横向连通域,根据纵向连通域数量以及灰度差异、横向连通域的数量以及灰度差异得到每个方向边缘连通域的偏差程度,根据每个方向边缘连通域的初始阈值对每个方向边缘连通域的偏差程度进行修正得到每个方向边缘连通域的修正偏差程度,根据每个方向边缘连通域之间的修正偏差程度差异得到每个方向边缘连通域的置信度,根据每个方向边缘连通域的置信度与每个方向边缘连通域的修正偏差程度得到每个方向的偏移程度;
根据不同方向的偏移程度得到模糊核大小与方向,并根据模糊核大小与方向进行去模糊影响,进行人工智能AGV叉车控制。
2.根据权利要求1所述基于人工智能的AGV叉车控制方法,其特征在于,所述对灰度图像进行边缘检测得到竖直方向边缘检测图像、水平方向边缘检测图像,包括的具体方法为:
预设一个梯度阈值以及一个下限阈值,使用边缘检测技术从梯度阈值开始,步长为1,依次分别向下遍历阈值进行水平方向与竖直方向上的边缘检测,直至阈值达到下限阈值停止遍历,并将每次遍历得到一个水平方向上的边缘检测图像、竖直方向上的边缘检测图像,遍历完成后得到若干个水平方向上的边缘检测图像、竖直方向上的边缘检测图像,分别将若干个水平方向上的边缘检测图像、若干个竖直方向上的边缘检测图像进行叠加求和得到一个水平方向边缘检测图像、竖直方向边缘检测图像。
3.根据权利要求1所述基于人工智能的AGV叉车控制方法,其特征在于,所述分别根据竖直方向边缘检测图像、水平方向边缘检测图像上每个连通域的面积与灰度得到水平方向上的边缘连通域与竖直方向上的边缘连通域以及边缘连通域的初始阈值,包括的具体方法为:
预设一个连通域面积阈值以及一个连通域外接矩形边长阈值,将连通域面积大于连通域面积阈值,连通域外接矩形的最大边长大于连通域外接矩形边长阈值,连通域内灰度均值不为0的连通域记为边缘连通域,将每个边缘连通域在边缘检测阈值遍历的过程中第一次出现时的阈值记为初始阈值;
获取水平方向上所有的边缘连通域与竖直方向上所有的边缘连通域以及对应边缘连通域的初始阈值。
4.根据权利要求1所述基于人工智能的AGV叉车控制方法,其特征在于,所述根据纵向连通域数量以及灰度差异、横向连通域的数量以及灰度差异得到每个方向边缘连通域的偏差程度,包括的具体方法为:
所述每个方向边缘连通域的偏差程度包括竖直方向边缘检测图像中边缘连通域的偏差程度和水平方向边缘检测图像中边缘连通域的偏差程度;
竖直方向边缘检测图像中边缘连通域的偏差程度的获取方法为:
式中,Y表示竖直方向边缘检测图像中边缘连通域的偏差程度;n1表示竖直方向边缘检测图像中边缘连通域中纵向连通域的数量;表示竖直方向边缘检测图像中边缘连通域中第/>个纵向连通域内所有像素点与灰度图像中对应位置像素点灰度差值的累加和;/>表示竖直方向边缘检测图像中第/>个纵向连通域内所有像素点与灰度图像中对应位置像素点灰度差值的均值;/>表示第/>个纵向连通域的面积;
水平方向边缘检测图像中边缘连通域的偏差程度的获取方法为:
式中,X表示水平方向边缘检测图像中边缘连通域的偏差程度;n2表示水平方向边缘检测图像中边缘连通域中横向连通域的数量;表示水平方向边缘检测图像中边缘连通域中第z个横向连通域内所有像素点与灰度图像中对应位置像素点灰度差值的累加和;/>表示水平方向边缘检测图像中第z个横向连通域内所有像素点与灰度图像中对应位置像素点灰度差值的均值;/>表示第z个横向连通域的面积。
5.根据权利要求1所述基于人工智能的AGV叉车控制方法,其特征在于,所述根据每个方向边缘连通域的初始阈值对每个方向边缘连通域的偏差程度进行修正得到每个方向边缘连通域的修正偏差程度,包括的具体方法为:
所述每个方向边缘连通域的修正偏差程度包括竖直方向边缘检测图像中边缘连通域的修正偏差程度和水平方向边缘检测图像中边缘连通域的修正偏差程度;
竖直方向边缘检测图像中边缘连通域的修正偏差程度的获取方法为:
式中,Y1表示竖直方向边缘检测图像中边缘连通域的修正偏差程度;Y表示竖直方向边缘检测图像中边缘连通域的偏差程度;t表示竖直方向边缘检测图像中边缘连通域的初始阈值;t2表示竖直方向边缘检测图像中边缘连通域的初始阈值的最大值;
水平方向边缘检测图像中边缘连通域的修正偏差程度的获取方法为:
式中,X1表示水平方向边缘检测图像中边缘连通域的修正偏差程度;X表示水平方向边缘检测图像中边缘连通域的偏差程度;t1表示水平方向边缘检测图像中边缘连通域的初始阈值;t3表示水平方向边缘检测图像中边缘连通域的初始阈值的最大值。
6.根据权利要求1所述基于人工智能的AGV叉车控制方法,其特征在于,所述根据每个方向边缘连通域之间的修正偏差程度差异得到每个方向边缘连通域的置信度,包括的具体方法为:
所述每个方向边缘连通域的置信度包括竖直方向边缘检测图像中边缘连通域的置信度和水平方向边缘检测图像中边缘连通域的置信度;
竖直方向边缘检测图像中边缘连通域的置信度获取方法为:
式中,P1表示竖直方向边缘检测图像中边缘连通域的置信度;表示竖直方向边缘检测图像中距离边缘连通域最近的边缘连通域与边缘连通域修正偏差程度的差值绝对值;表示竖直方向边缘检测图像中边缘连通域与其他边缘连通域修正偏差程度的差值绝对值最大值;/>表示以自然常数为底的指数函数;
水平方向边缘检测图像中边缘连通域的置信度的获取方法为:
式中,P2表示水平方向边缘检测图像中边缘连通域的置信度;表示水平方向边缘检测图像中距离边缘连通域最近的边缘连通域与边缘连通域修正偏差程度的差值绝对值;表示水平方向边缘检测图像中边缘连通域与其他边缘连通域修正偏差程度的差值绝对值最大值。
7.根据权利要求1所述基于人工智能的AGV叉车控制方法,其特征在于,所述根据每个方向边缘连通域的置信度与每个方向边缘连通域的修正偏差程度得到每个方向的偏移程度,包括的具体方法为:
所述每个方向的偏移程度包括竖直方向上的偏移程度与水平方向上的偏移程度;
竖直方向上的偏移程度的获取方法为:
式中,表示灰度图像在竖直方向上的偏移程度;N表示竖直方向边缘检测图像中包含的边缘连通域数量;/>表示竖直方向边缘检测图像中第i个边缘连通域的置信度;/>表示竖直方向边缘检测图像中第i个边缘连通域的修正偏差程度;
水平方向上的偏移程度的获取方法为:
式中,表示灰度图像在水平方向上的偏移程度;N1表示水平方向边缘检测图像中包含的边缘连通域数量;/>表示水平方向边缘检测图像中第r个边缘连通域的置信度;/>表示水平方向边缘检测图像中第r个边缘连通域的修正偏差程度。
8.根据权利要求1所述基于人工智能的AGV叉车控制方法,其特征在于,所述根据不同方向的偏移程度得到模糊核大小与方向,包括的具体方法为:
将灰度图像在竖直方向上的偏移程度与灰度图像在水平方向上的偏移程度的求和结果记为第一求和;将第一求和开根号结果记为灰度图像模糊核初始大小;在灰度图像模糊核初始大小向上取整的方向上,将最接近初始大小的奇数记为灰度图像的模糊核大小;
将灰度图像在竖直方向上的偏移程度与灰度图像在水平方向上的偏移程度比值记为第一比值;将第一比值的反正切函数结果记为灰度图像模糊核角度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310905514.0A CN116645297B (zh) | 2023-07-24 | 2023-07-24 | 基于人工智能的agv叉车控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310905514.0A CN116645297B (zh) | 2023-07-24 | 2023-07-24 | 基于人工智能的agv叉车控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116645297A CN116645297A (zh) | 2023-08-25 |
CN116645297B true CN116645297B (zh) | 2023-11-07 |
Family
ID=87625094
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310905514.0A Active CN116645297B (zh) | 2023-07-24 | 2023-07-24 | 基于人工智能的agv叉车控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116645297B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019041590A1 (zh) * | 2017-08-31 | 2019-03-07 | 中国科学院微电子研究所 | 任意角度的边缘检测方法 |
CN114820773A (zh) * | 2022-06-26 | 2022-07-29 | 山东济宁运河煤矿有限责任公司 | 基于计算机视觉的筒仓运输车辆车厢位置检测方法 |
CN115147415A (zh) * | 2022-09-02 | 2022-10-04 | 山东微山湖酒业有限公司 | 基于图像处理的酒盒缺陷检测方法 |
CN116152115A (zh) * | 2023-04-04 | 2023-05-23 | 湖南融城环保科技有限公司 | 基于计算机视觉的垃圾图像去噪处理方法 |
-
2023
- 2023-07-24 CN CN202310905514.0A patent/CN116645297B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019041590A1 (zh) * | 2017-08-31 | 2019-03-07 | 中国科学院微电子研究所 | 任意角度的边缘检测方法 |
CN114820773A (zh) * | 2022-06-26 | 2022-07-29 | 山东济宁运河煤矿有限责任公司 | 基于计算机视觉的筒仓运输车辆车厢位置检测方法 |
CN115147415A (zh) * | 2022-09-02 | 2022-10-04 | 山东微山湖酒业有限公司 | 基于图像处理的酒盒缺陷检测方法 |
CN116152115A (zh) * | 2023-04-04 | 2023-05-23 | 湖南融城环保科技有限公司 | 基于计算机视觉的垃圾图像去噪处理方法 |
Non-Patent Citations (1)
Title |
---|
基于边缘和梯度分布先验模型的运动消模糊;寇杰;韩维强;傅景能;;电子设计工程(第06期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN116645297A (zh) | 2023-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109272489B (zh) | 基于背景抑制与多尺度局部熵的红外弱小目标检测方法 | |
CN103714538B (zh) | 道路边缘检测方法、装置及车辆 | |
CN109858309B (zh) | 一种识别道路线的方法和装置 | |
CN112949493B (zh) | 一种结合语义分割和注意力机制的车道线检测方法及系统 | |
CN108345855B (zh) | 一种车道压线检测方法及系统 | |
CN112330593A (zh) | 基于深度学习网络的建筑物表面裂缝检测方法 | |
CN112017249A (zh) | 车载摄像头滚转角获取、安装角度校正方法及设备 | |
CN109410147A (zh) | 一种超空泡图像增强方法 | |
CN106204617A (zh) | 基于残差图像直方图循环移位的自适应图像二值化方法 | |
CN103227905A (zh) | 车载摄像机用曝光控制装置 | |
CN109829858A (zh) | 一种基于局部自适应阈值的船载雷达图像溢油监测方法 | |
CN114359149B (zh) | 基于实时图像边缘增强的坝岸险情视频检测方法及系统 | |
CN116152261A (zh) | 一种印刷制品质量的视觉检测系统 | |
CN117197783B (zh) | 基于智能感知的行车记录仪数据分析系统 | |
CN116645297B (zh) | 基于人工智能的agv叉车控制方法 | |
CN117218148A (zh) | 基于卫星图像的航道边界确定方法和系统、可读存储介质 | |
CN117636273A (zh) | 基于对数变换和伽马校正加权光照补偿的夜间车道线识别方法 | |
CN115984806A (zh) | 道路标线破损动态检测系统 | |
Pandey et al. | Analysis of road lane detection using computer vision | |
CN116310358A (zh) | 铁路货车螺栓丢失检测方法、存储介质及设备 | |
CN113469960B (zh) | 基于人工智能的水面稳定检测方法、装置及设备 | |
CN113345087B (zh) | 基于单目视觉的地表模型拟合方法和装置 | |
CN115424107A (zh) | 基于图像融合与深度学习的水下桥墩表观病害检测方法 | |
Wang | OpenCV-based Lane Line Detection Method for Mountain Curves | |
CN114612333A (zh) | 一种基于显微镜图像的微囊藻类细胞统计方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |