CN113055570B - 一种用于提升商品信息视觉识别方法 - Google Patents

Abstract

本发明涉及商家积分发行方法技术领域，具体为一种用于提升商品信息视觉识别方法，包括图片采集以及图片处理，图片采集使用摄像镜头进行采集，在图片采集前对摄像镜头进行加热除雾，对镜头加热除雾采用喷射暖气加热除雾法，具体包括如下步骤：S1：发出拍照指令；S2：喷气除雾：S2.1：喷气装置对气体进行加热；S2.2：对摄像头进行加热除雾；S3：执行拍照指令；S4：商品信息识别。本发明，在对商品进行拍照获取信息时，喷气装置对气体进行加热，加热后的气体喷向摄像镜头，对摄像头进行加热除雾，除去摄像头上的雾气，使摄像头不会因温差问题起雾导致拍摄不清晰，使摄像头拍摄的图片能够良好的获取商品信息。

Description

一种用于提升商品信息视觉识别方法

技术领域

本发明涉及一种提升商品信息视觉识别的方法，特别是涉及一种用于提升商品信息视觉识别方法，属于图像采集处理技术领域。

背景技术

自动售货机，是一种能根据投入的钱币自动付货的机器，自动售货机是商业自动化的常用设备，它不受时间、地点的限制，能节省人力、方便交易，是一种全新的商业零售形式，又被称为24小时营业的微型超市，常见的自动售卖机共分为四种:饮料自动售货机、食品自动售货机、综合自动售货机、化妆品自动售卖机。

自动售卖机的发展非常迅猛，自动售货机产业正在走向信息化并进一步实现合理化，例如实行联机方式，通过电话线路将自动售货机内的库存信息及时地传送各营业点的电脑中，从而确保了商品的发送、补充以及商品选定的顺利进行。并且，为防止地球暖化，自动售货机的开发致力于能源的节省，节能型清凉饮料自动售货机成为该行业的主流。在夏季电力消费高峰时，这种机型的自动售货机即使在关掉冷却器的状况下也能保持低温，与以往的自动售货机相比，它能够节约10-15％的电力。进入21世纪时，自动售货机也将进一步向节省资源和能源以及高功能化的方向发展。

自动化是未来的发展趋势，不论是制造业、服务业还是零售业。我们都将看到更多的设备取代人工。在这样一个大的趋势下，自动售货机行业的前景是光明的。

中国发明专利CN 105346515 B公开了一种辅助除雾装置，包括：气体收集部件、控制部件、气体输送管道以及喷气部件；所述气体收集部件，贴近汽车发动机散热器，以收集汽车发动机散热器所散发的热气；所述控制部件，与所述气体收集部件电连接，向所述气体收集部件发送控制信号，以供所述气体收集部件将收集的热气引导进所述气体传输管道；所述气体传输管道，可与所述气体收集部件连通，将热气输送到所述喷气部件；所述喷气部件，从汽车的车窗外部指向车窗，以供将热气吹到车窗外表面，对车窗进行加热。该辅助除雾装置，具有一定的除雾(霜)能力，不影响车窗内的温度舒适度，并可与车载空调系统相配合，提高除雾的速度，以及在预防起雾(霜)时，节省汽车的能耗。

但是目前自动售货机使用时，用户在打开柜门挑选商品时，由于柜体内外的温差较大，较长时间开门后再关门容易使摄像头起雾从而导致拍摄照片模糊，图像识别引擎很难识别商品信息。

因此，亟需对商家积分发行方法进行改进，以解决上述存在的问题。

发明内容

本发明的目的是提供一种用于提升商品信息视觉识别方法，本发明中加热后的气体喷向所述摄像镜头除去摄像头上的雾气，摄像头不会因温差问题起雾导致拍摄不清晰，使摄像头拍摄的图片能够良好的获取商品信息。

为了达到上述目的，本发明采用的主要技术方案包括：

一种用于提升商品信息视觉识别方法，包括图片采集以及图片处理，所述图片采集使用摄像镜头进行采集，在所述图片采集前对所述摄像镜头进行加热除雾；

对所述镜头加热除雾采用喷射暖气加热除雾法，具体包括如下步骤：

S1：发出拍照指令，对所述摄像镜头发出拍照指令；

S2：喷气除雾：

S2.1：喷气装置对气体进行加热；

S2.2：加热后的气体喷向所述摄像镜头，对所述摄像头进行加热除雾；

S3：执行拍照指令，所述摄像镜头执行拍照指令进行拍照；

在喷气除雾步骤之前判断是否执行喷气除雾，是否执行加热步骤根据室外温度判断，若室外温度低于10摄氏度则执行加热步骤，若室外温度高于10摄氏度则跳过加热步骤直接执行拍照步骤；

S4：商品信息识别：当所述摄像镜头执行拍照指令进行拍照后，通过图像识别单元根据所述摄像镜头拍摄的图片清晰度判断商品信息识别是否能顺利进行，若图像识别单元识别出所述摄像镜头拍摄的图片模糊，则商品信息识别不顺利，若图像识别单元识别出所述摄像镜头拍摄的图片清晰，则商品信息识别顺利；

通过上述技术方案，本发明中在对商品进行拍照获取信息时，喷气装置对气体进行加热，加热后的气体喷向所述摄像镜头，对摄像头进行加热除雾，除去摄像头上的雾气，使摄像头不会因温差问题起雾导致拍摄不清晰，使摄像头拍摄的图片能够良好的获取商品信息；

在喷气除雾步骤之前判断是否执行喷气除雾，是否执行加热步骤根据室外温度判断，若室外温度低于10摄氏度则执行加热步骤，若室外温度高于10摄氏度则跳过加热步骤直接执行拍照步骤，是否执行加热步骤根据室外温度判断，更加智能化，当不需要除雾时喷气装置停止工作节省了能源。

优选的，在S1中，当商品在出货时，所述摄像镜头接收到处理芯片发出的拍照指令，然后先对商品进行一次拍照，然后由所述图像识别单元对所述摄像镜头拍摄的图片进行识别，若图片识别成功，则不需要进行S2、S3和S4，若图片识别失败，则进入S2。

优选的，在S2中，所述喷气装置采用电加热丝对气体进行加热处理，且电加热丝的加热温度为50摄氏度；

喷气装置内的气体通过电加热丝加热处理后，通过输送管道输送到喷嘴处，喷嘴对准摄像镜头将加热后的气体喷出，从而完成喷气装置将加热后的气体精准喷射到摄像镜头上，将摄像镜头上的雾气清除。

优选的，在S3中，根据室外温度调节所述喷气装置喷射的气体温度，当室外温度越低，则所述喷气装置喷射的气体温度越高，当室外温度越高，则所述喷气装置喷射的气体温度越低。

优选的，在S4中，当图像识别单元识别出所述摄像镜头拍摄的图片模糊时，则再次执行S2，直至图像识别单元识别出所述摄像镜头拍摄的图片清晰为止。

优选的，所述喷气装置通过电磁调节阀控制喷气开关以及气体流量；

所述喷气装置的单次喷射时间为2-4S，所述喷气装置的气体流量为3-5L/min，当所述喷气装置需要多次喷射加热气体时，则喷气装置喷射的时间间隔为2-3S。

优选的，所述摄像镜头执行拍照指令时采用多点对焦法对图片进行拍照，所述摄像镜头为超高清镜头；

摄像镜头进行所述图片采集时采集多组图片，多组图片对比后选取最优图片留存。

优选的，所述图片处理包括如下步骤：

步骤一：图像拆分，把图像拆分成图块；

步骤二：分类关联，拆分后的图块进行分类，同类的图块关联到一起；

步骤三：处理图块，对分类后的图块进行处理；

步骤四：图块组合，对处理后的图块进行组合生成主视觉提升后的图片；

图像拆分、处理图块以及图块组合均采用PhotoShop软件进行；

步骤一中：把图片拆分成背景图块，字体信息图块以及标签图块分别拆分独立出来；

步骤三中：对背景图块进行暗化处理，对文字图块进行提高亮度处理，且进行加粗处理，对标签图块进行提高亮度处理；

通过上述技术方案，采用上述步骤一、步骤二、步骤三、步骤四对摄像头获取的图片进行进一步优化更加突出商品的标签信息以及文字信息，优化后的图片中包含的商品信息更加突明显，更利于获取图片中的信息，摄像镜头执行拍照指令时采用多点对焦法对图片进行拍照，多点对焦法拍照使拍出来的照片更加清晰，同时采集的图片更容易获取商品信息，摄像镜头进行图片采集时采集多组图片，多组图片对比后选取最优图片留存，多组图片选取最清晰的留存使图片更加清晰，图片更容易被获取商品信息。

优选的，所述的一种用于提升商品信息视觉识别方法，步骤一中，图像拆分，把图像拆分成图块包括：

筛选最优图片中的一组目标像素点，包括：第一像素点以及相隔预设距离对应的第二像素点；

估算所述第一像素点在多个预设方向的图像卷积的二阶变化率的第一强度以及所述第二像素点在多个预设方向的图像卷积的二阶变化率的第二强度；

当所述第一强度和所述第二强度的差值小于第一阈值时，判定所述第一像素点和所述第二像素点位于相同图块，则重新筛选一组目标像素点进行判定；

当所述第一强度和所述第二强度的差值大于所述第二阈值时，将所述第一强度和所述第二强度中较大强度对应的像素点作为边界像素点；

当所述第一强度和所述第二强度的差值大于所述第一阈值且小于第三阈值时，判定第一像素点与第二像素点之间的连接线上存在两个边界像素点，并筛选所述连接线上的第一目标端点进行边界像素点的判定，直到确定出存在的两个边界像素点；

当所述第一强度和所述第二强度的差值大于所述第三阈值且小于第二阈值时，判定第一像素点与第二像素点之间的连接线上存在一个边界像素点，并筛选所述连接线上的第二目标端点进行边界像素点的判定，直到确定出存在的一个边界像素点；

当确定出存在一个边界像素点或存在的两个边界像素点相同时，继续筛选最优图片中的下一组目标像素点，直至确定出两个不同的边界像素点；

其中，目标端点包括：与第一像素点相邻的第三像素点以及与第二像素点相邻的第四像素点；

从所述最优图片中标定与两个不同的边界像素点相一致的所有第五像素点，基于商品图像规则，将所有第五像素点构建成连接曲线，进行轮廓筛选；

基于筛选的轮廓，把图像拆分成背景图块、字体信息图块以及标签图块。

优选的，所述的一种用于提升商品信息视觉识别方法，标定与边界像素点相一致的所有第五像素点包括：

读取所述最优图片中所有像素点的像素值以及所有像素点基于标准二维坐标系的当前坐标；

基于像素点值以及当前坐标，计算两个不同的边界像素点对应的边界阈值，其包括：

首先，基于所述最优图片中所有像素点的像素值，计算所述最优图片中所有像素点对应于所述两个不同的边界像素点的权重值：

式中，i为所述最优图片中的第i个像素点，且不包括两个边界像素点在内，σ_1i为所述最优图片中的第i个像素点对应于第一个边界像素点的权重值，x_i为所述最优图片中的第i个像素点的横坐标，y_i为所述最优图片中的第i个像素点的纵坐标，x₁₀为所述第一个边界像素点的横坐标，y₁₀为所述第一个边界像素点的纵坐标，σ为所述最优图片中所有像素点的像素值标准差，δ₁₀为所述第一个边界像素点的像素值，δ_i为所述最优图片中的第i个像素点的像素值，σ_2i为所述最优图片中的第i个像素点对应于第二个边界像素点的权重值，x₂₀为所述第二个边界像素点的横坐标，y₂₀为所述第二个边界像素点的纵坐标，δ₂₀为所述第二个边界像素点的像素值；

然后，基于所述最优图片中所有像素点的权重值，计算两个不同的边界像素点对应的边界阈值：

式中，S₁为所述第一个像素点对应的边界阈值，S₂为所述第二个像素点对应的边界阈值，n为所述最优图片中所有像素点总个数；

基于所述边界阈值标定与两个不同的边界像素点相一致的所有第五像素点。

本发明至少具备以下有益效果：

1、本发明中在对商品进行拍照获取信息时，喷气装置对气体进行加热，加热后的气体喷向所述摄像镜头，对摄像头进行加热除雾，除去摄像头上的雾气，使摄像头不会因温差问题起雾导致拍摄不清晰，使摄像头拍摄的图片能够良好的获取商品信息。

2、在喷气除雾步骤之前判断是否执行喷气除雾，是否执行加热步骤根据室外温度判断，若室外温度低于10摄氏度则执行加热步骤，若室外温度高于10摄氏度则跳过加热步骤直接执行拍照步骤，是否执行加热步骤根据室外温度判断，更加智能化，当不需要除雾时喷气装置停止工作节省了能源。

3、本发明在图片处理过程中，通过识别字体信息图块和标签图块的边界像素点，形成字体信息图块和标签图块的边界轮廓，并把图像拆分成背景图块，字体信息图块以及标签图块，有利于后续商品信息的获取。

4、本发明通过基于所有像素点的像素值和坐标，计算出除边界像素点以外的所有像素点基于标准坐标系的权重值，并基于所述权重值计算两个不同的边界像素点对应的边界阈值，有利于根据所述边界阈值更加准确地筛选所述最优图片中与所述边界像素点相一致的所有第五像素点，有利于筛选所述背景图块，字体信息图块以及标签图块的所有边界像素点，，进一步有利于形成所述背景图块，字体信息图块以及标签图块对应的边界轮廓，有利于把图像拆分成所述背景图块，字体信息图块以及标签图块，提高了拆分所述背景图块，字体信息图块以及标签图块的精准度和效率。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1为本发明的图片采集流程图；

图2为本发明的喷气除雾的流程图；

图3为本发明的图片处理的流程图；

图4为本发明的图片识别的流程图；

图5为本发明的一组目标像素点和一组目标端点的位置关系；

图6为本发明判定一组目标像素点位于相同图块时的位置关系；

图7为本发明判定一组目标像素点其中之一为边界像素点时的位置关系；

图8为本发明判定一组目标像素点之间的连接线上存在两个边界像素点时的位置关系；

图9为本发明判定一组目标像素点之间的连接线上存在一个边界像素点时的位置关系。

具体实施方式

以下将配合附图及实施例来详细说明本申请的实施方式，借此对本申请如何应用技术手段来解决技术问题并达成技术功效的实现过程能充分理解并据以实施。

如图1-图4所示，本实施例提供的用于提升商品信息视觉识别的方法，包括图片采集以及图片处理，图片采集使用摄像镜头进行采集，在图片采集前对摄像镜头进行加热除雾；

对镜头加热除雾采用喷射暖气加热除雾法，具体包括如下步骤：

S1：发出拍照指令，对摄像镜头发出拍照指令；

在S1中，当商品在出货时，摄像镜头接收到处理芯片发出的拍照指令，然后先对商品进行一次拍照，然后由图像识别单元对摄像镜头拍摄的图片进行识别，若图片识别成功，则不需要进行S2、S3和S4，若图片识别失败，则进入S2；

S2：喷气除雾：

S2.1：喷气装置对气体进行加热；

S2.2：加热后的气体喷向摄像镜头，对摄像头进行加热除雾；

在S2中，喷气装置采用电加热丝对气体进行加热处理，且电加热丝的加热温度为50摄氏度；

喷气装置内的气体通过电加热丝加热处理后，通过输送管道输送到喷嘴处，喷嘴对准摄像镜头将加热后的气体喷出，从而完成喷气装置将加热后的气体精准喷射到摄像镜头上，将摄像镜头上的雾气清除；

S3：执行拍照指令，摄像镜头执行拍照指令进行拍照；

在喷气除雾步骤之前判断是否执行喷气除雾，是否执行加热步骤根据室外温度判断，若室外温度低于10摄氏度则执行加热步骤，若室外温度高于10摄氏度则跳过加热步骤直接执行拍照步骤；

在S3中，根据室外温度调节喷气装置喷射的气体温度，当室外温度越低，则喷气装置喷射的气体温度越高，当室外温度越高，则喷气装置喷射的气体温度越低；

S4：商品信息识别：当所述摄像镜头执行拍照指令进行拍照后，通过图像识别单元根据所述摄像镜头拍摄的图片清晰度判断商品信息识别是否能顺利进行，若图像识别单元识别出所述摄像镜头拍摄的图片模糊，则商品信息识别不顺利，若图像识别单元识别出所述摄像镜头拍摄的图片清晰，则商品信息识别顺利；

在S4中，当图像识别单元识别出摄像镜头拍摄的图片模糊时，则再次执行S2，直至图像识别单元识别出摄像镜头拍摄的图片清晰为止；

喷气装置通过电磁调节阀控制喷气开关以及气体流量；

喷气装置的单次喷射时间为2-4S，喷气装置的气体流量为3-5L/min；

当喷气装置需要多次喷射加热气体时，则喷气装置喷射的时间间隔为2-3S。

本发明中在对商品进行拍照获取信息时，喷气装置对气体进行加热，加热后的气体喷向所述摄像镜头，对摄像头进行加热除雾，除去摄像头上的雾气，使摄像头不会因温差问题起雾导致拍摄不清晰，使摄像头拍摄的图片能够良好的获取商品信息。

摄像镜头执行拍照指令时采用多点对焦法对图片进行拍照，摄像镜头为超高清镜头，多点对焦法拍照使拍出来的照片更加清晰，同时采集的图片更容易获取商品信息。

摄像镜头进行图片采集时采集多组图片，多组图片对比后选取最优图片留存，多组图片选取最清晰的留存使图片更加清晰，图片更容易被获取商品信息。

在喷气除雾步骤之前判断是否执行喷气除雾，是否执行加热步骤根据室外温度判断，若室外温度低于10摄氏度则执行加热步骤，若室外温度高于10摄氏度则跳过加热步骤直接执行拍照步骤，在喷气除雾步骤之前判断是否执行喷气除雾，是否执行加热步骤根据室外温度判断，若室外温度低于10摄氏度则执行加热步骤，若室外温度高于10摄氏度则跳过加热步骤直接执行拍照步骤，是否执行加热步骤根据室外温度判断，更加智能化，当不需要除雾时喷气装置停止工作节省了能源。

当摄像镜头执行拍照指令进行拍照后，通过图像识别单元根据摄像镜头拍摄的图片清晰度判断商品信息识别是否成功，若图像识别单元识别出摄像镜头拍摄的图片模糊，则商品信息识别失败，若图像识别单元识别出摄像镜头拍摄的图片清晰，则商品信息识别成功，当图像识别单元识别出摄像镜头拍摄的图片模糊时，则再次执行S2，直至图像识别单元识别出摄像镜头拍摄的图片清晰为止。

图片处理包括如下步骤：

步骤一：图像拆分，把图像拆分成图块；

步骤二：分类关联，拆分后的图块进行分类，同类的图块关联到一起；

步骤三：处理图块，对分类后的图块进行处理；

步骤四：图块组合，对处理后的图块进行组合生成主视觉提升后的图片。

图像拆分、处理图块以及图块组合均采用PhotoShop软件进行。

步骤一中：把图片拆分成背景图块，字体信息图块以及标签图块分别拆分独立出来。

步骤三中：对背景图块进行暗化处理，对文字图块进行提高亮度处理，且进行加粗处理，对标签图块进行提高亮度处理。

采用上述步骤一、步骤二、步骤三、步骤四对摄像头获取的图片进行进一步优化更加突出商品的标签信息以及文字信息，优化后的图片中包含的商品信息更加突明显，更利于获取图片中的信息。

综上所述本发明提供的用于提升商品信息视觉识别的方法，当对摄像镜头发出拍照指令后喷气装置对气体进行加热，然后加热后的气体喷向摄像镜头，对摄像头进行加热除雾，最后摄像镜头执行拍照指令进行拍照，本发明中在对商品进行拍照获取信息时，喷气装置对气体进行加热，加热后的气体喷向所述摄像镜头，对摄像头进行加热除雾，除去摄像头上的雾气，使摄像头不会因温差问题起雾导致拍摄不清晰，使摄像头拍摄的图片能够良好的获取商品信息；摄像镜头执行拍照指令时采用多点对焦法对图片进行拍照，摄像镜头为超高清镜头，多点对焦法拍照使拍出来的照片更加清晰，同时采集的图片更容易获取商品信息；摄像镜头进行图片采集时采集多组图片，多组图片对比后选取最优图片留存，多组图片选取最清晰的留存使图片更加清晰，图片更容易被获取商品信息；在喷气除雾步骤之前判断是否执行喷气除雾，是否执行加热步骤根据室外温度判断，若室外温度低于10摄氏度则执行加热步骤，若室外温度高于10摄氏度则跳过加热步骤直接执行拍照步骤，在喷气除雾步骤之前判断是否执行喷气除雾，是否执行加热步骤根据室外温度判断，若室外温度低于10摄氏度则执行加热步骤，若室外温度高于10摄氏度则跳过加热步骤直接执行拍照步骤，是否执行加热步骤根据室外温度判断，更加智能化，当不需要除雾时喷气装置停止工作节省了能源；图片处理包括如下步骤：步骤一：图像拆分、步骤二：分类关联、步骤三：对分类后的图块进行处理、步骤四：图块组合；采用上述步骤一、步骤二、步骤三、步骤四对摄像头获取的图片进行进一步优化更加突出商品的标签信息以及文字信息，优化后的图片中包含的商品信息更加突明显，更利于获取图片中的信息。

如在说明书及权利要求当中使用了某些词汇来指称特定组件。本领域技术人员应可理解，硬件制造商可能会用不同名词来称呼同一个组件。本说明书及权利要求并不以名称的差异来作为区分组件的方式，而是以组件在功能上的差异来作为区分的准则。如在通篇说明书及权利要求当中所提及的“包含”为一开放式用语，故应解释成“包含但不限定于”。“大致”是指在可接收的误差范围内，本领域技术人员能够在一定误差范围内解决技术问题，基本达到技术效果。

需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的商品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种商品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的商品或者系统中还存在另外的相同要素。

参考图5，所述的一种用于提升商品信息视觉识别方法，步骤一中，图像拆分，把图像拆分成图块包括：

筛选最优图片(摄像镜头拍摄的多组图片中清晰度最高的图片)中的一组目标像素点，包括：第一像素点以及相隔预设距离(所述预设距离可以是大于所述背景图块、字体信息图块以及标签图块任一所对应的对角线最大值)对应的第二像素点；

估算所述第一像素点在多个预设方向(预设标准二维坐标系中与坐标轴重合且相隔90度的四个方向)的图像卷积的二阶变化率的第一强度以及所述第二像素点在多个预设方向的图像卷积的二阶变化率的第二强度；

当所述第一强度和所述第二强度的差值小于第一阈值时，判定所述第一像素点和所述第二像素点位于相同图块，则重新筛选一组目标像素点进行判定；

当所述第一强度和所述第二强度的差值大于所述第二阈值时，将所述第一强度和所述第二强度中较大强度对应的像素点作为边界像素点；

当所述第一强度和所述第二强度的差值大于所述第一阈值且小于第三阈值时，判定第一像素点与第二像素点之间的连接线上存在两个边界像素点，并筛选所述连接线上的第一目标端点进行边界像素点的判定，直到确定出存在的两个边界像素点；

当所述第一强度和所述第二强度的差值大于所述第三阈值且小于第二阈值时，判定第一像素点与第二像素点之间的连接线上存在一个边界像素点，并筛选所述连接线上的第二目标端点进行边界像素点的判定，直到确定出存在的一个边界像素点；

当确定出存在一个边界像素点或存在的两个边界像素点相同时，继续筛选最优图片中的下一组目标像素点，直至确定出两个不同的边界像素点；

其中，目标端点包括：与第一像素点相邻的第三像素点以及与第二像素点相邻的第四像素点；

从所述最优图片中标定与两个不同的边界像素点相一致的所有第五像素点，基于商品图像规则，将所有第五像素点构建成连接曲线，进行轮廓筛选；

基于筛选的轮廓，把图像拆分成背景图块、字体信息图块以及标签图块；

其中，第一像素点和第二像素点是图像中的任意两点，且第一像素点和第二像素点之间的距离为预设距离。

该实施例中，字体信息图块、标签图块是基于背景图块上进行设计实现的，且在进行像素点的筛选过程中，如图6-9所示：

例如，图6中，当第一像素点和第二像素点都位于标签图块时，重新筛选一组目标像素点进行判定。

例如，图7中，当第一像素点位于标签图块边界上，且第二像素点位于标签图块内时，将第一像素点作为边界像素点，继续筛选最优图片中的下一组目标像素点。

例如，图8中，当第一像素点位于字体信息图块内，且第二像素点位于标签图块内时，即对应的连接线上存在两个边界像素点时，判定第一像素点与第二像素点之间的连接线上存在两个边界像素点，并筛选连接线上的第一目标端点进行边界像素点的判定，直到确定出存在的两个边界像素点。

例如，图9中，当第一像素点位于背景图块内，且第二像素点位于标签图块内时，即对应的连接线上存在一个边界像素点时，判定第一像素点与第二像素点之间的连接线上存在一个边界像素点，并筛选连接线上的第二目标端点进行边界像素点的判定，直到确定出存在的一个边界像素点，继续筛选最优图片中的下一组目标像素点，直至确定出两个不同的边界像素点。

该实施例中，商品图像规则即背景图块，字体信息图块以及标签图块的大致轮廓图像，是预先设置好的，在进行第五像素点的绘制的时候，避免因为两两点之间的连线，导致轮廓结果混乱，通过设置规则，便于得到有效的连接曲线。

该实施例中，所有第五像素点构建成连接曲线是指将所有第五像素点基于背景图块，字体信息图块以及标签图块的大致轮廓连接成曲线。

上述技术方案的有益效果是：本发明在图片处理过程中，通过根据两个单独像素点之间的强度比较，便于确定边界像素点，且通过识别字体信息图块和标签图块的边界像素点，且通过对第五像素点进行连接，便于确定不同的图块的边界轮廓，有利于后续商品信息的获取。

所述的一种用于提升商品信息视觉识别方法，标定与边界像素点相一致的所有第五像素点包括：

读取所述最优图片中所有像素点的像素值以及所有像素点基于标准二维坐标系的当前坐标；

基于像素点值以及当前坐标，计算两个不同的边界像素点对应的边界阈值(用于筛选所述背景图块、字体信息图块以及标签图块所有边界像素点的阈值)，其包括：

首先，基于所述最优图片中所有像素点的像素值，计算所述最优图片中所有像素点对应于所述两个不同的边界像素点的权重值：

式中，i为所述最优图片中的第i个像素点，且不包括两个边界像素点在内，σ_1i为所述最优图片中的第i个像素点对应于第一个边界像素点的权重值，x_i为所述最优图片中的第i个像素点的横坐标，y_i为所述最优图片中的第i个像素点的纵坐标，x₁₀为所述第一个边界像素点的横坐标，y₁₀为所述第一个边界像素点的纵坐标，σ为所述最优图片中所有像素点的像素值标准差，δ₁₀为所述第一个边界像素点的像素值，δ_i为所述最优图片中的第i个像素点的像素值，σ_2i为所述最优图片中的第i个像素点对应于第二个边界像素点的权重值，x₂₀为所述第二个边界像素点的横坐标，y₂₀为所述第二个边界像素点的纵坐标，δ₂₀为所述第二个边界像素点的像素值；

然后，基于所述最优图片中所有像素点的权重值，计算两个不同的边界像素点对应的边界阈值：

式中，S₁为所述第一个像素点对应的边界阈值，S₂为所述第二个像素点对应的边界阈值，n为所述最优图片中所有像素点总个数；

基于所述边界阈值标定与两个不同的边界像素点相一致的所有第五像素点。

以上技术的工作原理及有益效果为：读取所述最优图片中所有像素点的像素值以及所有像素点基于标准二维坐标系的当前坐标；基于所述最优图片中所有像素点的像素值，计算所述最优图片中所有像素点对应于所述两个不同的边界像素点的权重值，基于所述最优图片中所有像素点的权重值，计算两个不同的边界像素点对应的边界阈值；基于所述边界阈值标定与两个不同的边界像素点相一致的所有第五像素点；本发明通过基于所有像素点的像素值和坐标，计算出除边界像素点以外的所有像素点基于标准坐标系的权重值，并基于所述权重值计算两个不同的边界像素点对应的边界阈值，有利于根据所述边界阈值更加准确快速地筛选所述最优图片中与所述边界像素点相一致的所有第五像素点，比根据像素点属性比较标定相一致的边界像素点的传统方式更加快速准确，有利于筛选所述背景图块，字体信息图块以及标签图块的所有边界像素点，进一步有利于形成所述背景图块，字体信息图块以及标签图块对应的边界轮廓，有利于把图像拆分成所述背景图块，字体信息图块以及标签图块，提高了拆分所述背景图块，字体信息图块以及标签图块的精准度和效率。

上述说明示出并描述了本发明的若干优选实施例，但如前所述，应当理解本发明并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述发明构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围，则都应在本发明所附权利要求的保护范围内。

Claims (7)

1.一种用于提升商品信息视觉识别方法，包括图片采集以及图片处理，其特征在于，所述图片采集使用摄像镜头进行采集，在所述图片采集前对所述摄像镜头进行加热除雾；

对所述摄像镜头加热除雾采用喷射暖气加热除雾法，具体包括如下步骤：

S1：发出拍照指令，对所述摄像镜头发出拍照指令；

S2：喷气除雾：

S2.1：喷气装置对气体进行加热；

S2.2：加热后的气体喷向所述摄像镜头，对所述摄像镜头进行加热除雾；

S3：执行拍照指令，所述摄像镜头执行拍照指令进行拍照，采集获得多组图片，将多组图片对比后选取最优图片留存；

所述图片处理包括如下步骤：

步骤一：图片拆分，把最优图片拆分成图块；

步骤二：分类关联，拆分后的图块进行分类，同类的图块关联到一起；

步骤三：处理图块，对分类后的图块进行处理；

步骤四：图块组合，对处理后的图块进行组合生成主视觉提升后的图片；

还包括：商品信息识别：通过图像识别单元根据所述主视觉提升后的图片的清晰度判断商品信息识别是否能顺利进行，若图像识别单元识别出所述主视觉提升后的图片模糊，则商品信息识别不顺利，若图像识别单元识别出所述主视觉提升后的图片清晰，则商品信息识别顺利；

其中，在喷气除雾步骤之前判断是否执行喷气除雾，是否执行喷气除雾根据室外温度判断，若室外温度低于10摄氏度则执行喷气除雾，若室外温度高于10摄氏度则直接执行拍照指令；

其中，图片拆分、处理图块以及图块组合均采用PhotoShop软件进行；

其中，步骤一中：把最优图片拆分成背景图块和字体信息图块以及标签图块；

其中，步骤三中：对背景图块进行暗化处理，对文字图块进行提高亮度处理，且进行加粗处理，对标签图块进行提高亮度处理；

其中，把最优图片拆分成背景图块和字体信息图块以及标签图块，包括：

筛选最优图片中的一组目标像素点，包括：第一像素点以及相隔预设距离对应的第二像素点；

估算所述第一像素点在多个预设方向的图像卷积的二阶变化率的第一强度以及所述第二像素点在多个预设方向的图像卷积的二阶变化率的第二强度；

当所述第一强度和所述第二强度的差值小于第一阈值时，判定所述第一像素点和所述第二像素点位于相同图块，则重新筛选一组目标像素点进行判定；

当所述第一强度和所述第二强度的差值大于第二阈值时，将所述第一强度和所述第二强度中较大强度对应的像素点作为边界像素点；

当所述第一强度和所述第二强度的差值大于所述第一阈值且小于第三阈值时，判定第一像素点与第二像素点之间的连接线上存在两个边界像素点，并筛选所述连接线上的第一目标端点进行边界像素点的判定，直到确定出存在的两个边界像素点；

当所述第一强度和所述第二强度的差值大于所述第三阈值且小于第二阈值时，判定第一像素点与第二像素点之间的连接线上存在一个边界像素点，并筛选所述连接线上的第二目标端点进行边界像素点的判定，直到确定出存在的一个边界像素点；

当确定出存在一个边界像素点或存在的两个边界像素点相同时，继续筛选最优图片中的下一组目标像素点，直至确定出两个不同的边界像素点；

其中，目标端点包括：与第一像素点相邻的第三像素点以及与第二像素点相邻的第四像素点；

从所述最优图片中标定与两个不同的边界像素点相一致的所有第五像素点，基于商品图像规则，将所有第五像素点构建成连接曲线，进行轮廓筛选；

基于筛选的轮廓，把图像拆分成背景图块、字体信息图块以及标签图块。

2.根据权利要求1所述的一种用于提升商品信息视觉识别方法，其特征在于，在S1中，当商品在出货时，所述摄像镜头接收到处理芯片发出的拍照指令，然后先对商品进行一次拍照，然后由所述图像识别单元对所述摄像镜头拍摄的图片进行识别，若图片识别成功，则不需要进行S2、S3和S4，若图片识别失败，则进入S2。

3.根据权利要求1所述的一种用于提升商品信息视觉识别方法，其特征在于，在S2中，所述喷气装置采用电加热丝对气体进行加热处理，且电加热丝的加热温度为50摄氏度；

喷气装置内的气体通过电加热丝加热处理后，通过输送管道输送到喷嘴处，喷嘴对准摄像镜头将加热后的气体喷出，从而完成喷气装置将加热后的气体精准喷射到摄像镜头上，将摄像镜头上的雾气清除。

4.根据权利要求1所述的一种用于提升商品信息视觉识别方法，其特征在于，在S3中，根据室外温度调节所述喷气装置喷射的气体温度，当室外温度越低，则所述喷气装置喷射的气体温度越高，当室外温度越高，则所述喷气装置喷射的气体温度越低。

5.根据权利要求1所述的一种用于提升商品信息视觉识别方法，其特征在于，在S4中，当图像识别单元识别出所述摄像镜头拍摄的图片模糊时，则再次执行S2，直至图像识别单元识别出所述摄像镜头拍摄的图片清晰为止。

6.根据权利要求1所述的一种用于提升商品信息视觉识别方法，其特征在于，所述喷气装置通过电磁调节阀控制喷气开关以及气体流量；

所述喷气装置的单次喷射时间为2-4S，所述喷气装置的气体流量为3-5L/min，当所述喷气装置需要多次喷射加热气体时，则喷气装置喷射的时间间隔为2-3S。

7.根据权利要求1所述的一种用于提升商品信息视觉识别方法，其特征在于，标定与边界像素点相一致的所有第五像素点包括：

读取所述最优图片中所有像素点的像素值以及所有像素点基于标准二维坐标系的当前坐标；

基于像素点值以及当前坐标，计算两个不同的边界像素点对应的边界阈值，其包括：

首先，基于所述最优图片中所有像素点的像素值，计算所述最优图片中所有像素点对应于所述两个不同的边界像素点的权重值：

；

；

式中，

为所述最优图片中的第

个像素点，且不包括两个边界像素点在内，

为所述 最优图片中的第

个像素点对应于第一个边界像素点的权重值，

为所述最优图片中的第

个像素点的横坐标，

为所述最优图片中的第

个像素点的纵坐标，

为所述第一个边 界像素点的横坐标，

为所述第一个边界像素点的纵坐标，

为所述最优图片中所有像 素点的像素值标准差，

为所述第一个边界像素点的像素值，

为所述最优图片中的第

个像素点的像素值，

为所述最优图片中的第

个像素点对应于第二个边界像素点的 权重值，

为所述第二个边界像素点的横坐标，

为所述第二个边界像素点的纵坐标，

为所述第二个边界像素点的像素值；

然后，基于所述最优图片中所有像素点的权重值，计算两个不同的边界像素点对应的边界阈值：

；

；

式中，

为所述第一个边界像素点对应的边界阈值，

为所述第二个边界像素点对 应的边界阈值，

为所述最优图片中所有像素点总个数；

基于所述边界阈值标定与两个不同的边界像素点相一致的所有第五像素点。

Images