CN115116073A - 洗涤标签识别方法、装置、存储介质及电子装置 - Google Patents

洗涤标签识别方法、装置、存储介质及电子装置 Download PDF

Info

Publication number
CN115116073A
CN115116073A CN202210612535.9A CN202210612535A CN115116073A CN 115116073 A CN115116073 A CN 115116073A CN 202210612535 A CN202210612535 A CN 202210612535A CN 115116073 A CN115116073 A CN 115116073A
Authority
CN
China
Prior art keywords
washing
label
result
character
matching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210612535.9A
Other languages
English (en)
Inventor
潘威滔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Haier Technology Co Ltd
Haier Smart Home Co Ltd
Original Assignee
Qingdao Haier Technology Co Ltd
Haier Smart Home Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Haier Technology Co Ltd, Haier Smart Home Co Ltd filed Critical Qingdao Haier Technology Co Ltd
Priority to CN202210612535.9A priority Critical patent/CN115116073A/zh
Publication of CN115116073A publication Critical patent/CN115116073A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/22Character recognition characterised by the type of writing
    • G06V30/224Character recognition characterised by the type of writing of printed characters having additional code marks or containing code marks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/12Detection or correction of errors, e.g. by rescanning the pattern
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/19Recognition using electronic means
    • G06V30/19007Matching; Proximity measures

Abstract

本申请公开了一种洗涤标签识别方法、装置、存储介质及电子装置,涉及智能家居/智慧家庭技术领域,该方法包括:对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;根据洗涤标图案识别结果确定洗涤标签对应的洗涤释义;对洗涤标签进行字符识别,得到字符识别结果;根据洗涤释义与字符识别结果确定洗涤标签的识别结果,以基于洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令,可以解决相关技术中对于图像中只有文字或者标签中既有图标又有文字的洗涤标签无法准确地进行水洗标识别的问题,通过将水洗标识别与字符识别结合起来,可以准确识别水洗标,提高了水洗标识别的准确性。

Description

洗涤标签识别方法、装置、存储介质及电子装置
技术领域
本申请涉及智能家居/智慧家庭技术领域,具体而言,涉及一种洗涤标签识别方法、装置、存储介质及电子装置。
背景技术
水洗标检测算法指的是输入一张拍摄的带有水洗标标签的图像,通过检测算法定位到图像中所有水洗标框位置信息及相应的标签,其中位置信息按照框的左上点x,y坐标和框的宽高w,h来表示的。
水洗标检测算法只能够对洗涤标签上面的图案进行识别,对于洗涤标签上有的水洗标印制不清晰,但是对应的洗涤释义印制清楚;洗涤标签上由于遮挡问题,导致标签难以识别,但是对应的洗涤释义印制清晰,无法准确识别。即对于图像中只有文字或者标签中既有图标又有文字的洗涤标签是没办法进行准确识别的。
针对相关技术中对于图像中只有文字或者标签中既有图标又有文字的洗涤标签无法准确地进行水洗标识别的问题,尚未提出解决方案。
发明内容
本发明实施例提供了一种洗涤标签识别方法、装置、存储介质及电子装置,以至少相关技术中对于图像中只有文字或者标签中既有图标又有文字的洗涤标签无法准确地进行水洗标识别的问题。
根据本发明的一个实施例,提供一种洗涤标签识别方法,包括:
对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;
根据所述洗涤标图案识别结果确定所述洗涤标签对应的洗涤释义;
对所述洗涤标签进行字符识别,得到字符识别结果;
根据所述洗涤标签对应的洗涤释义与所述字符识别结果确定所述洗涤标签的识别结果,以基于所述洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令。
可选地,根据所述洗涤标图案识别结果确定洗涤标签对应的洗涤释义包括:
在所述洗涤标图案识别结果与预置数据库中存储的任一洗涤标图案的图像匹配的情况下,根据所述数据库中所述任一洗涤标图案与洗涤释义的映射关系,确定所述洗涤标签对应的洗涤释义。
可选地,在对所述洗涤标签进行字符识别,得到字符识别结果之后,所述方法还包括:
对所述字符识别结果中的一个或多个字符串进行正则校验。
可选地,对所述字符识别结果中的一个或多个字符串进行正则校验包括:
根据预先建立的错误识别字符串与正确识别字符串之间的映射关系,确定所述一个或多个字符串对应的正确识别字符串;
根据所述一个或多个字符串对应的正确识别字符串对所述一个或多个字符串进行纠错。
可选地,根据所述洗涤标签对应的洗涤释义与所述字符识别结果确定所述洗涤标签的识别结果包括:
将所述洗涤标签对应的洗涤释义与所述字符识别结果进行匹配,得到匹配结果;
根据所述匹配结果确定所述洗涤标签的识别结果。
可选地,将所述洗涤标签对应的洗涤释义与所述字符识别结果进行匹配,得到匹配结果包括:
在所述洗涤标签对应的洗涤释义与所述字符识别结果均存在的情况下,将所述洗涤标图案识别结果中一个或多个洗涤标签对应的洗涤释义与所述字符识别结果中一个或多个字符串进行Brute-Force算法匹配,得到所述匹配结果;
在仅所述洗涤标签对应的洗涤释义或所述字符识别结果不存在的情况下,确定所述匹配结果为匹配失败。
可选地,根据所述匹配结果确定所述洗涤标签的识别结果包括:
在所述匹配结果均为匹配失败且仅所述洗涤标签对应的洗涤释义不存在的情况下,确定所述字符识别结果为所述洗涤标签的识别结果;
在所述匹配结果均为匹配失败且仅所述字符识别结果不存在的情况下,确定所述洗涤标签对应的洗涤释义为所述洗涤标签的识别结果;
在所述匹配结果为存在匹配成功的目标匹配结果情况下,删除所述目标匹配结果中长度较短的洗涤释义或字符串,确定所述目标匹配结果中长度较长的字符串或洗涤释义为所述洗涤标签的识别结果。
根据本发明的另一个实施例,还提供了一种洗涤标签识别装置,包括:
图像识别模块,用于对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;
第一确定模块,用于根据所述洗涤标图案识别结果确定洗涤标签对应的洗涤释义;
字符识别模块,用于对所述洗涤标签进行字符识别,得到字符识别结果;
第二确定模块,用于根据所述洗涤标签对应的洗涤释义与所述字符识别结果确定所述洗涤标签的识别结果,以基于所述洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令。
可选地,所述第一确定模块,还用于在所述洗涤标图案识别结果与预置数据库中存储的任一洗涤标图案的图像匹配的情况下,根据所述数据库中所述任一洗涤标图案与洗涤释义的映射关系,确定所述洗涤标签对应的洗涤释义。
可选地,所述装置还包括:
校验模块,用于在对所述洗涤标签进行字符识别,得到字符识别结果之后,对所述字符识别结果中的一个或多个字符串进行正则校验。
可选地,所述校验模块,还用于根据预先建立的错误识别字符串与正确识别字符串之间的映射关系,确定所述一个或多个字符串对应的正确识别字符串;根据所述一个或多个字符串对应的正确识别字符串对所述一个或多个字符串进行纠错。
可选地,所述第二确定模块包括:
匹配子模块,用于将所述洗涤标签对应的洗涤释义与所述字符识别结果进行匹配,得到匹配结果;
确定子模块,用于根据所述匹配结果确定所述洗涤标签的识别结果。
可选地,所述匹配子模块,还用于在所述洗涤标签对应的洗涤释义与所述字符识别结果均存在的情况下,将所述洗涤标图案识别结果中一个或多个洗涤标签对应的洗涤释义与所述字符识别结果中一个或多个字符串进行Brute-Force算法匹配,得到所述匹配结果;在仅所述洗涤标签对应的洗涤释义或所述字符识别结果不存在的情况下,确定所述匹配结果为匹配失败。
可选地,所述确定子模块,还用于在所述匹配结果均为匹配失败且仅所述洗涤标签对应的洗涤释义不存在的情况下,确定所述字符识别结果为所述洗涤标签的识别结果;在所述匹配结果均为匹配失败且仅所述字符识别结果不存在的情况下,确定所述洗涤标签对应的洗涤释义为所述洗涤标签的识别结果;在所述匹配结果为存在匹配成功的目标匹配结果情况下,删除所述目标匹配结果中长度较短的洗涤释义或字符串,确定所述目标匹配结果中长度较长的字符串或洗涤释义为所述洗涤标签的识别结果。
根据本发明的又一个实施例,还提供了一种计算机可读的存储介质,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例,还提供了一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明实施例,对洗涤标签进行图像识别,得到洗涤标图案识别结果;根据所述洗涤标图案识别结果确定洗涤标签对应的洗涤释义;对所述洗涤标签进行字符识别,得到字符识别结果;根据所述洗涤标签对应的洗涤释义与所述字符识别结果确定所述洗涤标签的识别结果,以基于所述洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令,可以解决相关技术中对于图像中只有文字或者标签中既有图标又有文字的洗涤标签无法准确地进行水洗标识别的问题,通过将水洗标识别与字符识别结合起来,对于图像中只有文字或者标签中既有图标又有文字的洗涤标签也可以准确识别水洗标,提高了水洗标识别的准确性。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是根据本申请实施例的一种洗涤标签识别方法的硬件环境示意图;
图2是根据发明实施例的洗涤标签识别方法的流程图;
图3是根据发明可选实施例的洗涤标签识别方法的流程图;
图4是根据本发明可选实施例的洗涤标签识别的流程图;
图5是根据本发明实施例的洗涤标签识别装置的框图;
图6是根据本发明可选实施例的洗涤标签识别装置的框(一);
图7是根据本发明可选实施例的洗涤标签识别装置的框图(二)。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本申请实施例的一个方面,提供了一种洗涤标签识别方法。该洗涤标签识别方法广泛应用于智慧家庭(Smart Home)、智能家居、智能家用设备生态、智慧住宅(Intelligence House)生态等全屋智能数字化控制应用场景。可选地,在本实施例中,上述洗涤标签识别方法可以应用于如图1所示的由终端设备102和服务器104所构成的硬件环境中。如图1所示,服务器104通过网络与终端设备102进行连接,可用于为终端或终端上安装的客户端提供服务(如应用服务等),可在服务器上或独立于服务器设置数据库,用于为服务器104提供数据存储服务,可在服务器上或独立于服务器配置云计算和/或边缘计算服务,用于为服务器104提供数据运算服务。
上述网络可以包括但不限于以下至少之一:有线网络,无线网络。上述有线网络可以包括但不限于以下至少之一:广域网,城域网,局域网,上述无线网络可以包括但不限于以下至少之一:WIFI(Wireless Fidelity,无线保真),蓝牙。终端设备102可以并不限定于为PC、手机、平板电脑、智能洗衣机等。
图2是根据发明实施例的洗涤标签识别方法的流程图,如图2所示,包括:
步骤S202,对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;
步骤S204,根据洗涤标图案识别结果确定洗涤标签对应的洗涤释义;
本发明实施例中,上述步骤S204具体可以包括:在所述洗涤标图案识别结果与预置数据库中存储的任一洗涤标图案的图像匹配的情况下,根据所述数据库中所述任一洗涤标图案与洗涤释义的映射关系,确定所述洗涤标签对应的洗涤释义,上述数据库可以是一般的数据库,也可以是待洗涤物品的厂商数据库。
步骤S206,对洗涤标签进行字符识别,得到字符识别结果;
上述步骤S206中,可以通过预先训练好的字符识别模型进行识别,将洗涤标签输入训练好的字符识别模型中,字符识别模型能够准确地识别出洗涤标签中的字符,得到字符识别结果。具体可以是OCR识别模型,采用基于光学字符识别(Optical CharacterRecognition,简称为OCR)技术构建的OCR识别模型检测图像中的文本区域,识别文本区域中的文本信息并将识别到的文本信息转换成计算机等设备可编辑的信息。其中,在构建OCR识别模型时需要使用大量的标注了正确的标签数据(包括但不限于:图像中文本区域以及文本区域内的文本信息)的图像样本进行模型训练,使OCR识别模型具备较高的OCR识别能力。
上述的字符识别模型具体可以通过一下方式训练得到:以第一目标图像作为第一字符识别模型的输入,获得第一特征图。以样本图像作为第二字符识别模型的输入,获得第二特征图。第一目标图像与样本图像为包括相同文字的任意图像,且第一目标图像中的文字以目标格式表示。该目标格式例如可以为用目标字体表示的格式,目标字体可以为宋体、黑体、国际楷体等。在一实施例中,目标格式还可以为不包括背景颜色的格式等,本实施例对此不做限定。例如,第一目标图像与样本图像例如可以都包括文字“水洗”,第一目标图像中的“水洗”为宋体格式,样本图像中的“水洗”为手写体或者艺术字体等。
本实施例中,第二字符识别模型的初始模型为第一字符识别模型。第二字符识别模型可以为采用该实施例的训练方法对第一字符识别模型训练至少一个轮次所得到的模型,也可以为第一字符识别模型。第一字符识别模型可以包括用于将文字图像转化为特征图的模型,例如可以为卷积神经网络模型等,以定位第一目标图像中包括文字的区域,并提取该区域的视觉特征,该提取的识别特征可以构成特征图。
示例性地,第一字符识别模型可以为卷积神经网络模型等端到端模型,以读取输入的图像,提取图像特征并根据该图像特征确定图像中的文字。第一特征图和第二特征图可以为字符识别模型包括的多个处理层中,除最后一层外任一处理层输出的数据,且第一字符识别模型中输出第一特征图的处理层与第二字符识别模型中输出第二特征图的处理层相对应。
基于第一特征图和第二特征图的差异,确定损失值。在得到第一特征图和第二特征图后,可以将第一特征图和第二特征图之间的欧式距离、余弦距离、汉明距离或交叉熵损失值等作为损失值。
基于损失值,对第二字符识别模型进行训练。在得到损失值后,可以采用反向梯度算法或者反向传播算法等对第二字符识别模型进行训练,得到训练好的字符识别模型,具体可以训练第二字符识别模型中得到第二特征图的处理层及位于该处理层之前的其他层。以此在后续使用时,使得经由第二字符识别模型得到的特征图与从包括目标格式文字的图像中提取的特征图更为接近。
在一可选的实施例中,还可以对洗涤标签进行缩放、归一化处理,将处理后的图像送入图像文字方向检测模型进行图像文字方向的识别;根据图像文字方向检测模型输出的文字方向识别结果,对洗涤标签进行校正,具体的,文字方向识别结果指示文字方向角度为x,顺时针旋转x或逆时针旋转360°-x。例如,若文字方向识别结果指示文字方向角度为180°,将洗涤标签顺时针或逆时针旋转180°;若文字方向识别结果指示文字方向角度为90°,将洗涤标签顺时针旋转90°;若文字方向识别结果指示文字方向角度为270°,将洗涤标签逆时针旋转90°,或顺时针旋转270°。对校正后的洗涤标签进行缩放、归一化处理,之后将处理后的洗涤标签输入到字符识别模型中。
步骤S208,根据洗涤标签对应的洗涤释义与字符识别结果确定洗涤标签的识别结果,以基于洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令。
图3是根据发明可选实施例的洗涤标签识别方法的流程图,如图3所示,上述步骤S208具体可以包括:
S302,将洗涤标签对应的洗涤释义与字符识别结果进行匹配,得到匹配结果;
进一步的,步骤S302具体可以包括:在洗涤标签对应的洗涤释义与字符识别结果均存在的情况下,将图案识别结果中一个或多个洗涤标签对应的洗涤释义与字符识别结果中一个或多个字符串进行Brute-Force算法匹配,得到上述匹配结果;在仅洗涤标签对应的洗涤释义或字符识别结果不存在的情况下,确定匹配结果为匹配失败。
S304,根据匹配结果确定洗涤标签的识别结果。
进一步的,步骤S304具体可以包括:在所有匹配结果均为匹配失败且仅洗涤标签对应的洗涤释义不存在的情况下,即无洗涤标签对应的洗涤释义,此时仅有字符识别结果,导致匹配识别,确定字符识别结果为洗涤标签的识别结果;在所有匹配结果均为匹配失败且仅字符识别结果不存在的情况下,即只有洗涤标签对应的洗涤释义,此时由于无字符识别结果,导致匹配识别,确定洗涤标签对应的洗涤释义为洗涤标签的识别结果;在匹配结果为存在匹配成功的目标匹配结果情况下,即同时存在洗涤标签对应的洗涤释义与字符识别结果,且匹配成功,删除目标匹配结果中长度较短的洗涤释义或字符串,确定目标匹配结果中长度较长的字符串或洗涤释义为洗涤标签的识别结果,即若洗涤释义的长度大于字符串,将洗涤释义作为最终的识别结果;若洗涤释义的长度小于字符串,则将字符串作为最终的识别结果。例如,洗涤标签对应的洗涤释义为“可以水洗”,字符识别结果为“水洗”,洗涤标签对应的洗涤释义的长度大于字符识别结果,确定最终识别结果为“可以水洗”。
在一可选的实施例中,在上述步骤S206之后,还可以对字符识别结果中的一个或多个字符串进行正则校验,可以提高字符识别的准确性,具体可以通过以下方式进行校验:根据预先建立的错误识别字符串与正确识别字符串之间的映射关系,确定一个或多个字符串对应的正确识别字符串;根据一个或多个字符串对应的正确识别字符串对一个或多个字符串进行纠错,即将一个或多个字符串对应的正确识别字符串替换字符识别结果中的一个或多个字符串,进一步提高了字符识别的准确性。
本发明实施例采用的水洗标检测+字符识别,同时对文字结果进行合并的方式,既能够识别洗涤标签上的图案信息,也能够识别标签上的文字信息,并对两种信息进行合并,得到最终识别结果。
下面以OCR识别为例进行说明。
图4是根据本发明可选实施例的洗涤标签识别的流程图,如图4所示,具体包括以下步骤:洗涤释义步骤S401,对RGB图像进行水洗标检测识别,识别出图像中所有的洗涤标签;
步骤S402,根据洗涤标签与洗涤释义的映射关系,确定洗涤标签对应的完整洗涤释义,得到洗涤释义集合A;
步骤S403,对RGB图像进行字符识别,识别出图像中所有的字符,得到字符识别结果;
上述步骤S403中,对RGB图像进行字符识别,具体可以采用OCR识别模型,即将RGB图像输入训练好的OCR识别模型中,得到OCR识别模型输出的字符识别结果。OCR识别模型具体可以通过一下方式进行训练:可以通过使用带有标签数据的第一类图像样本对预设的OCR识别模型进行初始训练,获得初始的OCR识别模型,再使用初始的OCR识别模型识别无标签数据的第二类图像样本,并根据识别结果对第二类图像样本进行标注,以确定第二类图像样本的标签数据。由于第一类图像样本是具备准确的标签数据的,因此利用第一类图像样本训练得到的初始的OCR识别模型会具备较高的OCR识别能力,进而再利用这个初始的OCR识别模型对第二类图像样本进行OCR识别得到的OCR识别的结果也是较为准确的结果,故根据OCR识别的结果生成的第二类图像样本的标签数据同样也是比较准确的标签数据。根据本发明实施例的OCR模型训练方法通过上述初始的OCR识别模型不仅可以实现对第二类图像样本的标签数据自动标注,还可以使标注的标签数据具备较高的准确性。在实际应用中,为了确保第一类图像样本的标签数据的准确性,可以先采用人工标注的方式对少量的第一类图像样本进行标签标注,然后再采用根据本发明实施例的OCR模型训练方法使用这些少量的第一类图像样本,对大量的第二类图像样本进行标签数据自动标注,从而能够在保证第二类图像样本具备准确性较高的标签数据的前提下极大地减轻人工标注的工作量。进一步,在完成第二类图像样本的标签数据标注后,可以最后再同时使用第一类图像样本与第二类图像样本对上述初始的OCR识别模型进行再训练,以进一步提高获得满足需求的OCR识别模型的OCR识别能力,得到最终的OCR识别模型。
步骤S404,对字符识别结果进行正则校验,得到正则校验文字集合B。具体的,对所有之前出现过的误识别文字,建立错误识别字符串与正确识别字符串之间的映射关系,对文字信息进行纠错;
步骤S405,将水洗标识别得到的洗涤释义集合A与正则校验文字集合B取并集,即A∪B;
步骤S406,对A∪B的所有文字进行Brute-Force算法匹配(又称为暴力搜索法),举个例子:假设A中存在元素“不可垫布熨烫”,B中存在元素“不可垫布”,即认为这两个元素匹配;
步骤S407,对A∪B中所有字符串对进行两两匹配
Figure BDA0003673378390000111
对于每两两匹配的匹配结果,如果匹配成功,删除长度较短的元素(即去重作用),得到最终的识别结果。
本发明实施例采用的水洗标检测+字符识别,同时对文字结果进行合并的方式,既能够识别洗涤标签上的图案信息,也能够识别标签上的文字信息,并对两种信息进行合并,有效解决了有文字无图标,或者图标和文字都存在但是它们并不是描述的相同情况(或者说它们不是一一对应),又或者虽然图标文字完全一一对应,但是因为印制,遮挡,光照等原因使得部分图标或者文字无法识别等的情况。
实施例2
根据本发明的另一个实施例,还提供了一种洗涤标签识别装置,图5是根据本发明实施例的洗涤标签识别装置的框图,如图5所示,包括:
图像识别模块52,用于对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;
第一确定模块54,用于根据该洗涤标图案识别结果确定洗涤标签对应的洗涤释义;
字符识别模块56,用于对该洗涤标签进行字符识别,得到字符识别结果;
第二确定模块58,用于根据该洗涤标签对应的洗涤释义与该字符识别结果确定该洗涤标签的识别结果,以基于所述洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令。
可选地,该第一确定模块54,还用于在所述洗涤标图案识别结果与预置数据库中存储的任一洗涤标图案的图像匹配的情况下,根据所述数据库中所述任一洗涤标图案与洗涤释义的映射关系,确定所述洗涤标签对应的洗涤释义。
图6是根据本发明可选实施例的洗涤标签识别装置的框(一),如图6所示,该装置还包括:
校验模块62,用于对该字符识别结果中的一个或多个字符串进行正则校验。
可选地,校验模块62,还用于根据预先建立的错误识别字符串与正确识别字符串之间的映射关系,确定该一个或多个字符串对应的正确识别字符串;根据该一个或多个字符串对应的正确识别字符串对该一个或多个字符串进行纠错。
图7是根据本发明可选实施例的洗涤标签识别装置的框图(二),如图7所示,第二确定模块58包括:
匹配子模块72,用于将该洗涤标签对应的洗涤释义与该字符识别结果进行匹配,得到匹配结果;
确定子模块74,用于根据该匹配结果确定该洗涤标签的识别结果。
可选地,匹配子模块72,还用于在该洗涤标签对应的洗涤释义与该字符识别结果均存在的情况下,将该图案识别结果中一个或多个洗涤标签对应的洗涤释义与该字符识别结果中一个或多个字符串进行Brute-Force算法匹配,得到该匹配结果;在仅该洗涤标签对应的洗涤释义或该字符识别结果不存在的情况下,确定该匹配结果为匹配失败。
可选地,确定子模块74,还用于在该匹配结果均为匹配失败且仅该洗涤标签对应的洗涤释义不存在的情况下,确定该字符识别结果为该洗涤标签的识别结果;在该匹配结果均为匹配失败且仅该字符识别结果不存在的情况下,确定该洗涤标签对应的洗涤释义为该洗涤标签的识别结果;在该匹配结果为存在匹配成功的目标匹配结果情况下,删除该目标匹配结果中长度较短的洗涤释义或字符串,确定该目标匹配结果中长度较长的字符串或洗涤释义为该洗涤标签的识别结果。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
实施例3
本发明的实施例还提供了一种存储介质,该存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1,对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;
S2,根据该洗涤标图案识别结果确定洗涤标签对应的洗涤释义;
S3,对该洗涤标签进行字符识别,得到字符识别结果;
S4,根据该洗涤标签对应的洗涤释义与该字符识别结果确定该洗涤标签的识别结果,以基于所述洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(Read-ONly Memory,简称为ROM)、随机存取存储器(RaNdom Access Memory,简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
实施例4
本发明的实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;
S2,根据该洗涤标图案识别结果确定洗涤标签对应的洗涤释义;
S3,对该洗涤标签进行字符识别,得到字符识别结果;
S4,根据该洗涤标签对应的洗涤释义与该字符识别结果确定该洗涤标签的识别结果,以基于所述洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令。
可选地,本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例,本实施例在此不再赘述。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅是本申请的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种洗涤标签识别方法,其特征在于,包括:
对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;
根据所述洗涤标图案识别结果确定所述洗涤标签对应的洗涤释义;
对所述洗涤标签进行字符识别,得到字符识别结果;
根据所述洗涤标签对应的洗涤释义与所述字符识别结果确定所述洗涤标签的识别结果,以基于所述洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令。
2.根据权利要求1所述的方法,其特征在于,所述根据所述洗涤标图案识别结果确定所述洗涤标签对应的洗涤释义,包括:
在所述洗涤标图案识别结果与预置数据库中存储的任一洗涤标图案的图像匹配的情况下,根据所述数据库中所述任一洗涤标图案与洗涤释义的映射关系,确定所述洗涤标签对应的洗涤释义。
3.根据权利要求1所述的方法,其特征在于,在对所述洗涤标签进行字符识别,得到字符识别结果之后,所述方法还包括:
对所述字符识别结果中的一个或多个字符串进行正则校验。
4.根据权利要求3所述的方法,其特征在于,对所述字符识别结果中的一个或多个字符串进行正则校验包括:
根据预先建立的错误识别字符串与正确识别字符串之间的映射关系,确定所述一个或多个字符串对应的正确识别字符串;
根据所述一个或多个字符串对应的正确识别字符串对所述一个或多个字符串进行纠错。
5.根据权利要求1至4中任一项所述的方法,其特征在于,根据所述洗涤标签对应的洗涤释义与所述字符识别结果确定所述洗涤标签的识别结果包括:
将所述洗涤标签对应的洗涤释义与所述字符识别结果进行匹配,得到匹配结果;
根据所述匹配结果确定所述洗涤标签的识别结果。
6.根据权利要求5所述的方法,其特征在于,将所述洗涤标签案对应的洗涤释义与所述字符识别结果进行匹配,得到匹配结果包括:
在所述洗涤标签对应的洗涤释义与所述字符识别结果均存在的情况下,将所述洗涤标图案识别结果中一个或多个洗涤标签对应的洗涤释义与所述字符识别结果中一个或多个字符串进行Brute-Force算法匹配,得到所述匹配结果;
在仅所述洗涤标签对应的洗涤释义或所述字符识别结果不存在的情况下,确定所述匹配结果为匹配失败。
7.根据权利要求6所述的方法,其特征在于,根据所述匹配结果确定所述洗涤标签的识别结果包括:
在所述匹配结果均为匹配失败且仅所述洗涤标签对应的洗涤释义不存在的情况下,确定所述字符识别结果为所述洗涤标签的识别结果;
在所述匹配结果均为匹配失败且仅所述字符识别结果不存在的情况下,确定所述洗涤标签对应的洗涤释义为所述洗涤标签的识别结果;
在所述匹配结果为存在匹配成功的目标匹配结果情况下,删除所述目标匹配结果中长度较短的洗涤释义或字符串,确定所述目标匹配结果中长度较长的字符串或洗涤释义为所述洗涤标签的识别结果。
8.一种洗涤标签识别装置,其特征在于,包括:
图像识别模块,用于对待洗涤物品的洗涤标签进行图像识别,得到洗涤标图案识别结果;
第一确定模块,用于根据所述洗涤标图案识别结果确定所述洗涤标签对应的洗涤释义;
字符识别模块,用于对所述洗涤标签进行字符识别,得到字符识别结果;
第二确定模块,用于根据所述洗涤标签对应的洗涤释义与所述字符识别结果确定所述洗涤标签的识别结果,以基于所述洗涤标签的识别结果控制洗涤设备执行匹配的洗涤指令。
9.一种计算机可读的存储介质,其特征在于,所述计算机可读的存储介质包括存储的程序,其中,所述程序运行时执行权利要求1至7中任一项所述的方法。
10.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为通过所述计算机程序执行权利要求1至7中任一项所述的方法。
CN202210612535.9A 2022-05-31 2022-05-31 洗涤标签识别方法、装置、存储介质及电子装置 Pending CN115116073A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210612535.9A CN115116073A (zh) 2022-05-31 2022-05-31 洗涤标签识别方法、装置、存储介质及电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210612535.9A CN115116073A (zh) 2022-05-31 2022-05-31 洗涤标签识别方法、装置、存储介质及电子装置

Publications (1)

Publication Number Publication Date
CN115116073A true CN115116073A (zh) 2022-09-27

Family

ID=83327075

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210612535.9A Pending CN115116073A (zh) 2022-05-31 2022-05-31 洗涤标签识别方法、装置、存储介质及电子装置

Country Status (1)

Country Link
CN (1) CN115116073A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115497106A (zh) * 2022-11-14 2022-12-20 合肥中科类脑智能技术有限公司 基于数据增强和多任务模型的电池激光喷码识别方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115497106A (zh) * 2022-11-14 2022-12-20 合肥中科类脑智能技术有限公司 基于数据增强和多任务模型的电池激光喷码识别方法
CN115497106B (zh) * 2022-11-14 2023-01-24 合肥中科类脑智能技术有限公司 基于数据增强和多任务模型的电池激光喷码识别方法

Similar Documents

Publication Publication Date Title
CN109117848B (zh) 一种文本行字符识别方法、装置、介质和电子设备
CN109325538B (zh) 目标检测方法、装置和计算机可读存储介质
CN109343920B (zh) 一种图像处理方法及其装置、设备和存储介质
CN110222687A (zh) 复杂背景卡面信息识别方法及系统
JP6997369B2 (ja) プログラム、測距方法、及び測距装置
CN111639648A (zh) 证件识别方法、装置、计算设备和存储介质
CN112766255A (zh) 一种光学文字识别方法、装置、设备及存储介质
CN110046085B (zh) 识别终端设备上显示的应用程序控件的方法及装置
CN110781856A (zh) 异质人脸识别模型训练方法、人脸识别方法及相关装置
CN112861842A (zh) 基于ocr的案件文本识别方法及电子设备
CN111626177A (zh) 一种pcb元件识别方法及装置
CN111340796A (zh) 一种缺陷检测方法、装置、电子设备及存储介质
CN111476232A (zh) 一种洗水唛检测方法、设备和存储介质
CN107403179A (zh) 一种物品包装信息的注册方法及装置
CN115116073A (zh) 洗涤标签识别方法、装置、存储介质及电子装置
CN111488798A (zh) 指纹识别方法、装置、电子设备及存储介质
CN112949523A (zh) 从身份证影像图片中提取关键信息的方法与系统
CN112036362A (zh) 图像处理方法、装置、计算机设备和可读存储介质
CN110956133A (zh) 单字符文本归一化模型训练方法、文本识别方法及装置
CN107330470B (zh) 识别图片的方法和装置
Calefati et al. Reading meter numbers in the wild
CN114898379A (zh) 一种弯曲文本识别的方法、装置、设备及存储介质
CN114187445A (zh) 识别图像中文本的方法、装置、电子设备及存储介质
CN114663751A (zh) 一种基于增量学习技术的输电线路缺陷识别方法和系统
CN111783780B (zh) 图像处理方法、装置及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination