CN107066997B - 一种基于图像识别的电气元件报价方法 - Google Patents

一种基于图像识别的电气元件报价方法 Download PDF

Info

Publication number
CN107066997B
CN107066997B CN201611168652.1A CN201611168652A CN107066997B CN 107066997 B CN107066997 B CN 107066997B CN 201611168652 A CN201611168652 A CN 201611168652A CN 107066997 B CN107066997 B CN 107066997B
Authority
CN
China
Prior art keywords
image
straight line
indicate
smn
sij
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611168652.1A
Other languages
English (en)
Other versions
CN107066997A (zh
Inventor
高飞
葛一粟
杨程光
金一鸣
徐云静
卢书芳
毛家发
肖刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Technology ZJUT
Original Assignee
Zhejiang University of Technology ZJUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Technology ZJUT filed Critical Zhejiang University of Technology ZJUT
Priority to CN201611168652.1A priority Critical patent/CN107066997B/zh
Publication of CN107066997A publication Critical patent/CN107066997A/zh
Application granted granted Critical
Publication of CN107066997B publication Critical patent/CN107066997B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/22Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G06V10/225Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on a marking or identifier characterising the area
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/443Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/146Aligning or centring of the image pick-up or image-field
    • G06V30/1475Inclination or skew detection or correction of characters or of image to be recognised
    • G06V30/1478Inclination or skew detection or correction of characters or of image to be recognised of characters or characters lines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Abstract

本发明涉及一种基于图像识别的电气元件报价方法,它是利用图像识别技术对电气设计图的表格进行分割、元件名称识别、数据库匹配报价,本发明通过自动实现图像矫正,识别电气元件报价单中表格位置,自动提取表格中文字信息,得出具体每个电气元件的报价,减少了繁琐的人工信息输入过程,且大大降低了因人工输入信息造成的输入错误率问题。

Description

一种基于图像识别的电气元件报价方法
技术领域
本发明涉及一种基于图像识别的电气元件报价方法,尤其涉及利用图像识别技术对电气设计图的表格进行分割、元件名称识别、数据库匹配报价的电气元件报价方法。
背景技术
近年来,随着现代化技术的发展,曾经的纸质化办公方式正渐渐被“无纸化办公”所替代。由于现在处于新旧交替的特殊时期,仍有许多纸质信息需要通过人工将数据导入到计算机系统中,而大量的纸质数据信息和人工输入不可避免的错误率,使得自动化信息采集系统具有非常重要的意义。
为了解决自动化纸质信息提取的问题,国内外学术界、工业界提出了很多方案。其中与本发明较为接近的技术方案包括:谢亮(表格识别预处理技术与表格字符提取算法的研究[D].中山大学,2005)该系统在图像二值化算法的基础上,针对手写表格文档提出了一种基于非线性对比度增强及LOG算子的混合二值化方法,针对表格文档图像,在Hough变换的基础上提出了一种带参数约束条件的Hough变换——HTPC,实现了对表格文档图像的快速倾斜角检测及校正,通过CTF过程准确地定位并提取出表格的所有单元格,再通过ECCEA方法完整地提取出表格中的字符,然后利用基于连通区域检测的去噪算法对图像进行去噪,最后对字符图像进行平滑化处理,解决表格文档中手写字符经常重叠表格边框线的问题,该系统针对阿拉伯数字具有良好的识别率,但在中文字符识别效率上没有太多的说明,且实验样本噪音较少;王科俊(印刷体表格识别的研究[D].哈尔滨工程大学,2013)将灰度图像转化为二值图像,并采用改进的Hough变换完成倾斜校正,利用文档图像的版面分析提取图像中的表格区域,采用了传统的投影法与基于直线搜索相结合的算法完成表格线的检测与提取,将图像中的横向与纵向表格线重组成表格框架,最后,利用OCR技术完成数据的识别,并将其写入已经提取的表格框架中,完成表格图像的重绘。该系统对印刷体简单表格的识别上有较好的识别率,图像样本文件噪声较少,文字识别上较为简单;周壮(表格识别系统中框线检测与去除的算法研究[D].辽宁科技大学,2015)在表格识别的基础上,实现在原图像上去除表格框线,该系统实现字符与笔画叠加的情况下去除框线同时保留字符笔画,但该系统样本图像噪声较少,在噪声处理方面涉及较少;发明专利(申请号:CN201610057218.X,名称:图像超高密度椒盐噪声的降除方法)公开了一种图像超高密度椒盐噪声的降除方法,主要解决现有方法无法滤除超高密度椒盐噪声的问题,与本发明不同的地方在于,其用极值方法检测噪声点,用均值的方法处理噪声点,这样处理会造成原本图像部分信息的丢失,特别是文字中的边缘信息的丢失,严重影响文字识别效果。
综上所述,当前表格识别处理技术方案中,存在如下不足:(1)并未考虑到像电气元件报价单这样有高噪声情况下的识别效率,采用的图像样本噪声处理较为简单;
(2)系统在阿拉伯数字上的识别上较成熟,但在高噪声样本中的汉字识别方面的工作较少有涉及;
(3)在降噪处理技术方案上,未权衡噪声点去除和文字信息保留之间的平衡关系,在处理噪声点的时候会同时消除部分关键的文字边缘信息。
在电气元件报价方法中,控制高密度椒盐噪声处理粒度和文字边缘信息保留之间的平衡关系非常重要,高密度椒盐噪声会造成文字识别率过低,但在处理噪声的同时会影响文字边缘信息,而降低文字识别率。而本发明中的降噪策略,针对电气元件报价单这种有高密度噪声点的印刷体表格文件,能较好的对其进行处理。
发明内容
为了克服现有纸质电气元件报价单信息录入的问题,本发明提供了一种基于图像识别的电气元件报价方法。
所述的一种基于图像识别的电气元件报价方法,其特征在于包括如下步骤:
步骤1:读入电气设计图的扫描图像F1
步骤2:对扫描图像F1进行倾斜校正,为倾斜校正后的图像F2
步骤3:对校正图像F2进行表格切割,具体为:
步骤3.1:采用Hough方法对校正图像F2再次进行直线检测,并分类得到垂直直线集合LV={(lvi,xi)|i=1,2,…,nv}和水平直线集合LH={(lhj,yj)|j=1,2,…,nh},其中xi表示垂直直线lvi的横坐标,nv表示集合LV中的元素数量,yj表示水平直线lhj的纵坐标,nh表示集合LH中的元素数量;
步骤3.2:垂直直线合并,具体为:若垂直直线集合LV中存在nvs条直线,记为集合LVS={(lvi,xi)|i=1,2,…,nvs,(lvi,xi)∈LV},且这nvs条直线中的任意两条直线lvi与lvj满足|xi-xj|≤λ,则将这nvs条直线合并成为一条直线(lvk,xk)加入到集合LV中,并将集合LV中对应的nvs条直线去除,其中横坐标xk根据式(3)计算,λ表示事先给定的直线合并阈值;重复这一过程直到LV中无直线可合并,得到新的垂直直线集合LV;
步骤3.3:根据步骤3.2相同的原理对水平直线进行合并,得到新的水平直线集合LH;
步骤3.4:将新的垂直直线集合LV划分为q个子集,记为LVTk={(lvki,xki)|i=1,2,…,nk,(lvki,xki)∈LV},k=1,2,…,q,且每个子集需满足条件:(1)子集LVTk中的nk条直线连续相邻;(2)计算LVTk中相邻直线的间距,得到间距集合LVAk={aki|i=1,2,…,nk-1,aki=|xki-xki+1|},须满足|ap-ar|≤μ且p∈{1,2,…,nk-1}且r∈{1,2,…,nk-1}且|p-r|=1;其中,LVTk表示第k个子集,lvki表示子集LVTk中第i条直线,xki表示直线lvki对应的横坐标,nk表示第k个子集的直线数量,μ表示事先选定的间距阈值;将这q个子集中nk最大的子集记为LVTmax={(lvmaxi,xmaxi)|i=1,2,…,nvmax,(lvmaxi,xmaxi)∈LV};
步骤3.5:根据步骤3.4相同的原理找到水平直线集合LH中的子集LHTmax={(lhmax j,ymax j)|j=1,2,…,nhmax,(lhmax j,ymax j)∈LH};
步骤3.6:计算得到包含H行W列的单元格集合C={Rij=(xij,yij,wij,hij)|i=1,2,…,H,j=1,2,…,W},具体为:
式中,H=nhmax-1,W=nvmax-1,xij表示第i行第j列单元格左上角的横坐标,yij表示第i行第j列单元格左上角的纵坐标,wij表示第i行第j列单元格的宽度,hij表示第i行第j列单元格的高度,xmaxj表示垂直直线lvmaxj的横坐标,且(lvmaxj,xmaxj)∈LVAmax,ymaxi表示水平直线lhmaxi的纵坐标,且(lhmaxi,ymaxi)∈LHAmax
步骤3.7:根据单元格集合C进行表格切割;
步骤4:针对每个单元格Rij进行降噪与文字识别处理,得到对应的文字tij
步骤5:每个单元格文字tij与价格表TB={(typei,pi)|i=1,2,…,T}进行匹配,得到该单元格对应元件的价格,具体策略为:若存在k使tij=typek,则pk即为该元件的报价;否则,从任意typek对应的语义库TBSk={wkq|q=1,2,…,Tk}中去匹配,若存在k使wk=tij,则pk即为该元件的报价,若仍无法匹配,则手工输入tij对应的价格pi′,同时将(tij,pi′)添加到价格表TB中;其中,TB表示事先录入到数据库中的价格表,T表示已经录入的元件数量,typei表示价格表TB中第i类元件的名称,pi表示价格表TB中第i类元件的价格,TBSk表示与第k类元件typek对应的语义库,wkq表示语义库TBSk中第k个元件名称,Tk表示语义库TBSk中的语义数量。
所述的一种基于图像识别的电气元件报价方法,其特征在于步骤2)对扫描图像F1进行倾斜校正的具体过程为:
步骤2.1:采用Hough方法进行直线检测,提取扫描图像F1中的直线,得到直线集合L={li|i=1,2,…,n},n表示直线数量;
步骤2.2:求直线li与水平线的夹角,记为ai,从L取得那些ai满足式(1)的直线构成子集LS={(lsj,bj)|j=1,2,…,m,lsj∈L},其中bj表示直线lsj与水平线的夹角,m表示子集LS中的元素数量;根据式(2)计算得到扫描图像F1的倾斜角A:
|ai|≤a0 (1)
其中a0表示事先选定的倾斜角阈值;
步骤2.3:根据倾斜角度A,利用旋转矩阵对图像进行旋转,旋转后的图像即为倾斜校正后的图像F2
所述的一种基于图像识别的电气元件报价方法,其特征在于步骤2.2)中的提取出的直线需要进行分类,分为水平直线和垂直直线两类;水平提取直线和水平线的角度在0°~30°或150°~180°之间,垂直提取直线和水平线的角度在60°~120°之间,根据其直线的类型,计算出所有直线的倾斜角度,取其中间值作为倾斜角度:
所述的一种基于图像识别的电气元件报价方法,其特征在于步骤4)的针对每个单元格Rij进行降噪与文字识别处理具体为:
步骤4.1:从图像F2截取与单元格Rij对应的彩色子图Sij,并将其拆分分别对应于红、绿、蓝三个单通道的灰度图像SRij,SGij和SBij
步骤4.2:对每个通道图像SRij,SGij和SBij都进行半径为Rmedian的自适应中值滤波,Rmedian为事先给定的滤波器半径;
步骤4.3:在每个通道图像中都存在WSij*HSij个像素点,通道图像SRij中,存在集合PSRij={(xSmn,ySmn,vSRmn)|m=1,2,…,WSij,n=1,2,…,HSij},其中WSij为单元格Rij的宽度,HSij为单元格Rij的高度,xSmn为图像SRij中坐标点的横坐标,ySmn为图像SRij中坐标点的纵坐标,vSRmn为通道图像SRij中坐标点(xSmn,ySmn)的像素值;同理,通道图像SGij中存在集合PSGij={(xSmn,ySmn,vSGmn)|m=1,2,…,WSij,n=1,2,…,HSij},通道图像SBij中存在集合PSBij={(xSmn,ySmn,vSBmn)|m=1,2,…,WSij,n=1,2,…,HSij},其中vSGmn和vSBmn分别为通道图像SGij和SBij在坐标点(xSmnySmn)的像素值;若满足在坐标点(xSmn,ySmn)上,三通道的像素值满足vSRmn>ε∨vSGmn>ε∨vSBmn>ε,则将该坐标点的三通道像素值vSRmn、vSGmn和vSBmn都设置为Vback,其中ε和Vback分别为事先给定的降噪阈值和背景像素值;
步骤4.4:对各通道再次进行半径为Rmedian的自适应中值滤波;
步骤4.5:对三个通道图像SRij,SGij和SBij进行合并,得到新的彩色子图Sij
步骤4.6:对彩色子图Sij进行高斯核半径为RGauss的高斯滤波;
步骤4.7:利用OCR技术对彩色子图Sij进行文字识别,得到文字tij。通过采用上述技术,与现有技术相比,本发明的有益效果如下:本发明通过自动实现图像矫正,识别电气元件报价单中表格位置,自动提取表格中文字信息,得出具体每个电气元件的报价,减少了繁琐的人工信息输入过程,且大大降低了因人工输入信息造成的输入错误率问题。
附图说明
图1为本发明的实施样例选取的电气元件报价单图像像灰度图;
图2为本发明的经过步骤1.1处理后获取直线的报价单图像灰度图;
图3为本发明的经过步骤1.3旋转矫正后的报价单图像灰度图;
图4为本发明的经过步骤2.4表格分割后的报价单中单元格图像灰度图;
图5为本发明的经过步骤3.2第一次分通道适应性平滑处理后的单元格图像灰度图;
图6为本发明的经过步骤3.4第二次分通道适应性平滑处理后的单元格图像灰度图;
图7为本发明的经过步骤3.5合并通道图像的单元格图像灰度图;
图8为本发明的经过步骤3.6高斯滤波之后的单元格图像灰度图。
具体实施方法
下面结合实施实例来详细阐述本发明电气元件报价系统的具体实施方式,但本发明的保护范围并不仅限于此。
本发明的一种基于图像识别的电气元件报价方法,包括如下步骤:
步骤1:读入电气设计图的扫描图像F1,原图灰度图如图1所示;
步骤2:对扫描图像F1进行倾斜校正,具体为:
步骤2.1:采用Hough方法进行直线检测,提取扫描图像F1中的直线,得到直线集合L={li|i=1,2,…,n},n表示直线数量,图像直线获取图灰度图如图2所示;由于电气元件报价单中利用了表格进行信息排版,图像中较长的直线都来自于表格中的各条边,因此,确定图像中的各条边的位置便能找到图中表格的位置;
步骤2.2:求直线li与水平线的夹角,记为ai,从L取得那些ai满足式(1)的直线构成子集LS={(lsj,bj)|j=1,2,…,m,lsj∈L},其中bj表示直线lsj与水平线的夹角,m表示子集LS的数量;根据式(2)计算得到扫描图像F1的倾斜角A根据直线和水平线之间的夹角,判断表格倾斜角度,由于提取出的直线皆为表格中的各条边,因此直线之间的关系,不是互相平行就是相互垂直,因此需要将直线进行分类,分为水平直线和垂直直线两类;水平提取直线和水平线的角度在0°~30°和150°~180°之间,垂直提取直线和水平线的角度在60°~120°之间,根据其直线的类型,计算出所有直线的倾斜角度;考虑到部分直线的误差情况,统计出所有直线的倾斜角度,取其中间值作为倾斜角度:
|ai|≤a0 (1)
其中a0表示倾斜角阈值,在本实例中,a0=20°;
步骤2.3:根据倾斜角度A,利用旋转矩阵对图像进行旋转,旋转后的图像即为倾斜校正后的图像F2,旋转矫正后图像灰度图如图3所示;
步骤3:对校正图像F2进行表格切割,具体为:
步骤3.1:采用Hough方法对校正图像F2再次进行直线检测,并分类得到垂直直线集合LV={(lvi,xi)|i=1,2,…,nv}和水平直线集合LH={(lhj,yj)|j=1,2,…,nh},其中xi表示垂直直线lvi的横坐标,nv表示集合LV中的数量,yj表示水平直线lhj的纵坐标,nh表示集合LH中的数量;
步骤3.2:垂直直线合并,具体为:若垂直直线集合LV中存在任意nvs条直线,记为集合LVS={(lvi,xi)|i=1,2,…,nvs,(lvi,xi)∈LV},且LVS中的任意两条直线lvi与lvj满足|xi-xj|≤λ,则将这nvs条直线合并成为一条直线(lvk,xk)加入到集合LV中,并将集合LV中对应的nvs条直线去除,其中横坐标xk根据式(3)计算,λ表示事先给定的直线合并阈值,在本实例中λ=5;重复这一过程直到LV中无直线可合并,得到新的垂直直线集合LV,第一次分通道适应性平滑处理后的单元格图像灰度图如图5所示;
步骤3.3:根据步骤3.2相同的原理对水平直线进行合并,得到新的水平直线集合LH;
步骤3.4:进一步,将新的垂直直线集合LV划分为q个子集,记为LVTk={(lvki,xki)|i=1,2,…,nk,(lvki,xki)∈LV},k=1,2,…,q,且每个子集需满足条件:(1)子集LVTq中的nq条直线连续相邻;(2)计算LVTk中相邻直线的间距,得到间距集合LVAk={aki|i=1,2,…,nk-1,aki=|xki-xki+1|},须满足|ap-ar|≤μ且p∈{1,2,…,nk-1}且r∈{1,2,…,nk-1}且|p-r|=1;其中,LVTk表示第k个子集,lvki表示子集LVTk中第i条直线,xki表示直线lvki对应的横坐标,nk表示第k个子集的直线数量,μ表示事先选定的间距阈值;将这q个子集中nk最大的子集记为LVTmax={(lvmaxi,xmaxi)|i=1,2,…,nvmax,(lvmaxi,xmaxi)∈LV};在本实例中,间距阈值μ=5;
步骤3.5:根据步骤3.4相同的原理找到水平直线集合LH中的子集LHTmax={(lhmax j,ymax j)|j=1,2,…,nhmax,(lhmax j,ymax j)∈LH};
步骤3.6:
计算得到包含H行W列的单元格集合C={Rij=(xij,yij,wij,hij)|i=1,2,…,H,j=1,2,…,W},具体为:
式中,H=nhmax-1,W=nvmax-1,xij表示第i行第j列单元格左上角的横坐标,yij表示第i行第j列单元格左上角的纵坐标,wij表示第i行第j列单元格的宽度,hij表示第i行第j列单元格的高度,xmaxj表示垂直直线lvmaxj的横坐标,且(lvmaxj,xmaxj)∈LVAmax,ymaxi表示水平直线lhmaxi的纵坐标,且(lhmaxi,ymaxi)∈LHAmax
步骤3.7:根据单元格C对表格进行切割,切割后图像灰度图如图4所示;
步骤4:针对每个单元格Rij进行降噪与文字识别处理,得到对应的文字tij,具体为:
步骤4.1:从图像F2截取与单元格Rij对应的彩色子图Sij,并将其拆分分别对应于红、绿、蓝三个单通道的灰度图像SRij,SGij和SBij
步骤4.2:对每个通道图像SRij,SGij和SBij都进行半径为Rmedian的自适应中值滤波,Rmedian为事先给定的滤波器半径;
步骤4.3:在每个通道图像中都存在WSij*HSij个像素点,通道图像SRij中,存在集合PSRij={(xSmn,ySmn,vSRmn)|m=1,2,…,WSij,n=1,2,…,HSij},其中WSij为单元格Rij的宽度,HSij为单元格Rij的高度,xSmn为图像SRij中坐标点的横坐标,ySmn为图像SRij中坐标点的纵坐标,vSRmn为通道图像SRij中坐标点(xSmn,ySmn)的像素值;同理可知,通道图像SGij中存在集合PSGij={(xSmn,ySmn,vSGmn)|m=1,2,…,WSij,n=1,2,…,HSij},通道图像SBij中存在集合PSBij={(xSmn,ySmn,vSBmn)|m=1,2,…,WSij,n=1,2,…,HSij},其中vSGmn和vSBmn分别为通道图像SGij和SBij在坐标点(xSmnySmn)的像素值;若满足在坐标点(xSmn,ySmn)上,三通道的像素值满足vSRmn>ε∨vSGmn>ε∨vSBmn>ε,则将该坐标点的三通道像素值vSRmn、vSGmn和vSBmn都设置为Vback,其中ε和Vback分别为事先给定的降噪阈值和背景像素值;步骤4.4:对各通道再次进行半径Rmedian=1的自适应中值滤波;第二次平滑处理后的图像灰度图如图6所示;
步骤4.5:对三个通道图像SRij,SGij和SBij进行合并,得到新的彩色子图Sij,处理后合并图像,其灰度图如图7所示;
步骤4.6:对彩色子图Sij进行高斯滤波,在本实例中,高斯核半径取RGauss=3,高斯滤波后图像灰度图如图8所示;
步骤4.7:利用OCR技术对彩色子图Sij进行文字识别,得到文字tij
步骤5:每个单元格文字tij与价格表TB={(typei,pi)|i=1,2,…,T}进行匹配,得到该单元格对应元件的价格,具体策略为:若存在k使tij=typek,则pk即为该元件的报价;否则,从任意typek对应的语义库TBSk={wkq|q=1,2,…,Tk}中去匹配,若存在k使wk=tij,则pk即为该元件的报价,若仍无法匹配,则手工输入tij对应的价格p′i,同时将(tij,p′i)添加到TB中e;其中,TB表示事先录入到数据库e中的价格表,T表示已经录入的元件数量,typee表示价格表TB中第i类元件的名称,pi表示价格表TB中第i类元件的价格,TBSe表示与第k类元件typee对应的语义库,wkq表示语义库TBSk中第e个元件名称,Tk表示语义库TBSk中的语义数量。
本说明书实施例所述的内容仅仅是对发明构思的实现形式的列举,本发明的保护范围的不应当被视为仅限于实施例所陈述的具体形式,本发明的保护范围也及于本领域技术人员根据本发明构思所能够想到的等同技术手段。

Claims (4)

1.一种基于图像识别的电气元件报价方法,其特征在于包括如下步骤:
步骤1:读入电气设计图的扫描图像F1
步骤2:对扫描图像F1进行倾斜校正,为倾斜校正后的图像F2
步骤3:对校正图像F2进行表格切割,具体为:
步骤3.1:采用Hough方法对校正图像F2再次进行直线检测,并分类得到垂直直线集合LV={(lvi,xi)|i=1,2,…,nv}和水平直线集合LH={(lhj,yj)|j=1,2,…,nh},其中xi表示垂直直线lvi的横坐标,nv表示集合LV中的元素数量,yj表示水平直线lhj的纵坐标,nh表示集合LH中的元素数量;
步骤3.2:垂直直线合并,具体为:若垂直直线集合LV中存在nvs条直线,记为集合LVS={(lvi,xi)|i=1,2,…,nvs,(lvi,xi)∈LV},且这nvs条直线中的任意两条直线lvi与lvj满足|xi-xj|≤λ,则将这nvs条直线合并成为一条直线(lvk,xk)加入到集合LV中,并将集合LV中对应的nvs条直线去除,其中横坐标xk根据式(3)计算,λ表示事先给定的直线合并阈值;重复这一过程直到LV中无直线可合并,得到新的垂直直线集合LV;
步骤3.3:根据步骤3.2相同的原理对水平直线进行合并,得到新的水平直线集合LH;
步骤3.4:将新的垂直直线集合LV划分为q个子集,记为LVTk={(lvki,xki)|i=1,2,…,nk,(lvki,xki)∈LV},k=1,2,…,q,且每个子集需满足条件:(1)子集LVTk中的nk条直线连续相邻;(2)计算LVTk中相邻直线的间距,得到间距集合LVAk={aki|i=1,2,…,nk-1,aki=|xki-xki+1|},须满足|ap-ar|≤μ且p∈{1,2,…,nk-1}且r∈{1,2,…,nk-1}且|p-r|=1;其中,LVTk表示第k个子集,lvki表示子集LVTk中第i条直线,xki表示直线lvki对应的横坐标,nk表示第k个子集的直线数量,μ表示事先选定的间距阈值;将这q个子集中nk最大的子集记为LVTmax={(lvmaxi,xmaxi)|i=1,2,…,nvmax,(lvmaxi,xmaxi)∈LV};
步骤3.5:根据步骤3.4相同的原理找到水平直线集合LH中的子集LHTmax={(lhmaxj,ymaxj)|j=1,2,…,nhmax,(lhmaxj,ymaxj)∈LH};
步骤3.6:计算得到包含H行W列的单元格集合C={Rij=(xij,yij,wij,hij)|i=1,2,…,H,j=1,2,…,W},具体为:
式中,H=nhmax-1,W=nvmax-1,xij表示第i行第j列单元格左上角的横坐标,yij表示第i行第j列单元格左上角的纵坐标,wij表示第i行第j列单元格的宽度,hij表示第i行第j列单元格的高度,xmaxj表示垂直直线lvmaxj的横坐标,且(lvmaxj,xmaxj)∈LVAmax,ymaxi表示水平直线lhmaxi的纵坐标,且(lhmaxi,ymaxi)∈LHAmax
步骤3.7:根据单元格集合C进行表格切割;
步骤4:针对每个单元格Rij进行降噪与文字识别处理,得到对应的文字tij
步骤5:每个单元格文字tij与价格表TB={(typei,pi)|i=1,2,…,T}进行匹配,得到该单元格对应元件的价格,具体策略为:若存在k使tij=typek,则pk即为该元件的报价;否则,从任意typek对应的语义库TBSk={wkq|q=1,2,…,Tk}中去匹配,若存在q使wkq=tij,则pk即为该元件的报价,若仍无法匹配,则手工输入tij对应的价格p′i,同时将(tij,p′i)添加到价格表TB中;其中,TB表示事先录入到数据库中的价格表,T表示已经录入的元件数量,typei表示价格表TB中第i类元件的名称,pi表示价格表TB中第i类元件的价格,TBSk表示与第k类元件typek对应的语义库,wkq表示元件typek在语义库TBSk中第q个元件名称,Tk表示语义库TBSk中的语义数量。
2.根据权利要求1所述的一种基于图像识别的电气元件报价方法,其特征在于步骤2)对扫描图像F1进行倾斜校正的具体过程为:
步骤2.1:采用Hough方法进行直线检测,提取扫描图像F1中的直线,得到直线集合L={li|i=1,2,…,n},n表示直线数量;
步骤2.2:求直线li与水平线的夹角,记为ai,从L取得那些ai满足式(1)的直线构成子集LS={(lsj,bj)|j=1,2,…,m,lsj∈L},其中bj表示直线lsj与水平线的夹角,m表示子集LS中的元素数量;根据式(2)计算得到扫描图像F1的倾斜角A:
|ai|≤a0 (1)
其中a0表示事先选定的倾斜角阈值;
步骤2.3:根据倾斜角度A,利用旋转矩阵对图像进行旋转,旋转后的图像即为倾斜校正后的图像F2
3.根据权利要求2所述的一种基于图像识别的电气元件报价方法,其特征在于步骤2.2)中的提取出的直线需要进行分类,分为水平直线和垂直直线两类;水平提取直线和水平线的角度在0°~30°或150°~180°之间,垂直提取直线和水平线的角度在60°~120°之间,根据其直线的类型,计算出所有直线的倾斜角度,取其中间值作为倾斜角度。
4.根据权利要求1所述的一种基于图像识别的电气元件报价方法,其特征在于步骤4)的针对每个单元格Rij进行降噪与文字识别处理具体为:
步骤4.1:从图像F2截取与单元格Rij对应的彩色子图Sij,并将其拆分分别对应于红、绿、蓝三个单通道的灰度图像SRij,SGij和SBij
步骤4.2:对每个通道图像SRij,SGij和SBij都进行半径为Rmedian的自适应中值滤波,Rmedian为事先给定的滤波器半径;
步骤4.3:在每个通道图像中都存在WSij*HSij个像素点,通道图像SRij中,存在集合PSRij={(xSmn,ySmn,vSRmn)|m=1,2,…,WSij,n=1,2,…,HSij},其中WSij为单元格Rij的宽度,HSij为单元格Rij的高度,xSmn为图像SRij中坐标点的横坐标,ySmn为图像SRij中坐标点的纵坐标,vSRmn为通道图像SRij中坐标点(xSmn,ySmn)的像素值;同理,通道图像SGij中存在集合PSGij={(xSmn,ySmn,vSGmn)|m=1,2,…,WSij,n=1,2,…,HSij},通道图像SBij中存在集合PSBij={(xSmn,ySmn,vSBmn)|m=1,2,…,WSij,n=1,2,…,HSij},其中vSGmn和vSBmn分别为通道图像SGij和SBij在坐标点(xSmnySmn)的像素值;若满足在坐标点(xSmn,ySmn)上,三通道的像素值满足vSRmn>ε∨vSGmn>ε∨vSBmn>ε,则将该坐标点的三通道像素值vSRmn、vSGmn和vSBmn都设置为Vback,其中ε和Vback分别为事先给定的降噪阈值和背景像素值;
步骤4.4:对各通道再次进行半径为Rmedian的自适应中值滤波;
步骤4.5:对三个通道图像SRij,SGij和SBij进行合并,得到新的彩色子图Sij
步骤4.6:对彩色子图Sij进行高斯核半径为RGauss的高斯滤波;
步骤4.7:利用OCR技术对彩色子图Sij进行文字识别,得到文字tij
CN201611168652.1A 2016-12-16 2016-12-16 一种基于图像识别的电气元件报价方法 Active CN107066997B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611168652.1A CN107066997B (zh) 2016-12-16 2016-12-16 一种基于图像识别的电气元件报价方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611168652.1A CN107066997B (zh) 2016-12-16 2016-12-16 一种基于图像识别的电气元件报价方法

Publications (2)

Publication Number Publication Date
CN107066997A CN107066997A (zh) 2017-08-18
CN107066997B true CN107066997B (zh) 2019-07-30

Family

ID=59618590

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611168652.1A Active CN107066997B (zh) 2016-12-16 2016-12-16 一种基于图像识别的电气元件报价方法

Country Status (1)

Country Link
CN (1) CN107066997B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112818813A (zh) * 2018-12-13 2021-05-18 北京金山数字娱乐科技有限公司 图像中表格信息的识别方法、装置、电子设备及存储介质
JP2021028770A (ja) * 2019-08-09 2021-02-25 株式会社日立製作所 情報処理装置及び表認識方法
CN111898402A (zh) * 2020-06-01 2020-11-06 王昌龙 一种智能排版系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103258198A (zh) * 2013-04-26 2013-08-21 四川大学 一种表格文档图像中字符提取方法
CN104517112A (zh) * 2013-09-29 2015-04-15 北大方正集团有限公司 一种表格识别方法与系统
CN105426834A (zh) * 2015-11-17 2016-03-23 中国传媒大学 一种基于投影特征与结构特征进行表格图像检测的方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103258198A (zh) * 2013-04-26 2013-08-21 四川大学 一种表格文档图像中字符提取方法
CN104517112A (zh) * 2013-09-29 2015-04-15 北大方正集团有限公司 一种表格识别方法与系统
CN105426834A (zh) * 2015-11-17 2016-03-23 中国传媒大学 一种基于投影特征与结构特征进行表格图像检测的方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
数据表格自动识别系统;陈新春;《中国优秀硕士学位论文全文数据库 信息科技辑》;20110915;论文正文 *
表格文档图像分析方法研究;刘兵;《中国优秀硕士学位论文全文数据库 信息科技辑》;20130715;论文正文 *
证劵资料自动识别系统的分析与设计;陈川;《中国优秀硕士学位论文全文数据库 信息科技辑》;20150615;论文正文 *

Also Published As

Publication number Publication date
CN107066997A (zh) 2017-08-18

Similar Documents

Publication Publication Date Title
CN109840519B (zh) 一种自适应的智能单据识别录入装置及其使用方法
CN106156761B (zh) 面向移动终端拍摄的图像表格检测与识别方法
CN102567300B (zh) 图片文档的处理方法及装置
CN106960208B (zh) 一种仪表液晶数字自动切分和识别的方法及系统
CN104751142B (zh) 一种基于笔划特征的自然场景文本检测方法
CN103034848B (zh) 一种表单类型的识别方法
CN105205488B (zh) 基于Harris角点和笔画宽度的文字区域检测方法
CN103810474A (zh) 一种基于多特征低秩矩阵表示的车牌检测方法
CN111666938A (zh) 一种基于深度学习的两地双车牌检测识别方法及系统
CN103208004A (zh) 票据信息区域自动识别和提取方法及设备
CN101777124A (zh) 一种提取视频文本信息的方法及装置
CN107066997B (zh) 一种基于图像识别的电气元件报价方法
CN104680130A (zh) 一种身份证汉字识别方法
CN109977723A (zh) 大票据图片文字识别方法
CN108460418B (zh) 一种基于文字识别与语义分析的发票分类方法
CN111753706B (zh) 一种基于图像统计学的复杂表格交点聚类提取方法
CN102236788A (zh) 电力电能表图像自动识别方法
CN101976114A (zh) 一种基于摄像头的计算机与纸笔信息交互系统及方法
CN102254159A (zh) 一种数显仪表判读方法
CN106846354B (zh) 一种基于图像分割和随机hough变换的架上图书清点方法
CN104408449A (zh) 智能移动终端场景文字处理方法
CN102509109B (zh) 一种唐卡图像与非唐卡图像的区分方法
CN103440035A (zh) 一种三维空间中的手势识别系统及其识别方法
CN104182728A (zh) 一种基于模式识别的车标自动定位与识别方法
CN110335280A (zh) 一种基于移动端的金融单据图像分割与矫正方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant