CN113379015A - 一种营养成分信息分析方法、装置、服务器及存储介质 - Google Patents
一种营养成分信息分析方法、装置、服务器及存储介质 Download PDFInfo
- Publication number
- CN113379015A CN113379015A CN202110767118.7A CN202110767118A CN113379015A CN 113379015 A CN113379015 A CN 113379015A CN 202110767118 A CN202110767118 A CN 202110767118A CN 113379015 A CN113379015 A CN 113379015A
- Authority
- CN
- China
- Prior art keywords
- food
- information
- nutrient
- bar code
- picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 235000015097 nutrients Nutrition 0.000 title claims abstract description 87
- 238000003860 storage Methods 0.000 title claims abstract description 22
- 239000000203 mixture Substances 0.000 title claims description 63
- 238000004458 analytical method Methods 0.000 title claims description 22
- 235000013305 food Nutrition 0.000 claims abstract description 138
- 235000016709 nutrition Nutrition 0.000 claims abstract description 52
- 238000000034 method Methods 0.000 claims abstract description 48
- 235000021049 nutrient content Nutrition 0.000 claims abstract description 22
- 230000036541 health Effects 0.000 claims abstract description 12
- 230000035764 nutrition Effects 0.000 claims abstract description 10
- 239000004615 ingredient Substances 0.000 claims description 30
- 235000012041 food component Nutrition 0.000 claims description 21
- 238000005516 engineering process Methods 0.000 claims description 15
- 238000012937 correction Methods 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 6
- 238000004422 calculation algorithm Methods 0.000 claims description 5
- 238000012216 screening Methods 0.000 claims description 5
- 238000005520 cutting process Methods 0.000 claims description 4
- 230000002194 synthesizing effect Effects 0.000 claims description 4
- 230000009466 transformation Effects 0.000 claims description 4
- 238000004806 packaging method and process Methods 0.000 claims 1
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000003044 adaptive effect Effects 0.000 description 6
- 230000009471 action Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000037213 diet Effects 0.000 description 3
- 235000005911 diet Nutrition 0.000 description 3
- 238000009826 distribution Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 235000018823 dietary intake Nutrition 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 235000006286 nutrient intake Nutrition 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
- G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
- G06K17/0025—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device the arrangement consisting of a wireless interrogation device in combination with a device for optically marking the record carrier
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/018—Certifying business or products
- G06Q30/0185—Product, service or business identity fraud
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/60—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to nutrition control, e.g. diets
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Economics (AREA)
- Development Economics (AREA)
- General Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Nutrition Science (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
本发明实施例公开了一种营养成分信息分析方法、装置、服务器及存储介质。该方法包括：扫描食品包装上的条形码，得到条形码编码值；将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息；若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。本发明实施例的技术方案，通过比对条形码编码值比对并提取信息，食品营养成分信息的获取快速准确，不会因为包装不平整或拍照角度因素影响准确度。
Description
技术领域
本发明实施例涉及食品健康技术领域，尤其涉及一种营养成分信息分析方法、装置、服务器及存储介质。
背景技术
随着人们生活水平的提高，用户对饮食的营养摄入越来越讲究，许多食品包装上印有营养成分表，但用户很难将多个食品的营养成分关联起来计算自身所需。如果能快速准确的将食品包装上的图片信息转为电子数据信息，并且根据用户个人身体特征提供食品的食用建议，将为用户的生活饮食提供很大便利。
现有食品营养成分标签识别方法是通过拍摄食品包装，通过直线检测技术检测包装照片上营养成分表外边框所在位置，再对表内所有文字词组一一识别，最后组合营养成分表中的内容文本。
实际由于拍摄角度、光线，以及包装的不平整等因素的影响，拍摄的包装图片中往往并不具有营养成分表的四条完整直线外边框，此场景下无法利用直线检测技术准确定位出营养成分表所在位置，根据现有方法也就无法对其中对应内容进行很好的识别。识别过程相对复杂，如果每次对食品营养成分的信息的获取都通过这种形式，那效率不高且消耗的服务器资源较多。
发明内容
本发明实施例提供一种营养成分信息分析方法、装置、服务器及存储介质，以解决在常见的无法拍摄到食品包装四条完整直线外边框的场景下，无法准确定位并识别营养成分信息的技术问题。
第一方面，本发明实施例提供了一种营养成分信息分析方法，包括：
扫描食品包装上的条形码，得到条形码编码值；
将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息；
若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
可选的，在根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息之后，还包括：
若否，则通过用移动终端设备拍摄或从设备本地文件中读取食品包装上含营养成分信息的彩色照片，对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息。
可选的，在判别所识别的食品对当前用户的影响并提供食用建议之后，还包括：
通过对比食品信息数据库中原有的当前食物的营养成分信息与营养成分表上的识别信息，判断当前食物是否可能是假冒伪劣食品。
可选的，在扫描食品包装上的条形码，得到条形码编码值之前，还包括：
准备一个存有条形码、食品营养成分信息以及其他食品信息的食品信息数据库。
可选的，所述对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息，包括：
对图片进行灰度处理，将彩色图片转为灰度图片，并使用自适应阈值技术将灰度图片转为二值化图片；
利用霍夫直线变换技术，从二值化图片中检测出多条直线，筛选出符合条件的直线确定图片的偏转角度，分别对彩色原图和二值化图片进行旋转矫正，得到摆正后的彩色原图和二值化图片；
利用DBSCAN算法，对得到的摆正后的二值化图片所有白色像素点进行聚类处理，组成图中营养成分表外边框线条的所有点自动归为一类，得到营养成分表外边框所在位置，裁剪出图片中营养成分表区域；
利用OCR技术分别对裁剪得到的营养成分表区域和摆正后的彩色原图进行全图文字识别，每个识别结果均按每行从左至右进行拼接成连续字符，拼接点处加上特定标识字符，同时从上到下将所有识别内容拼接成整段连续字符，拼接点处加上特定标识字符，生成两段文本；
根据营养成分表的国标规范，设计正则匹配规则，从得到的两段文本中分别提取出每一组营养成分信息，综合两者信息得到最终的食品营养成分信息。
第二方面，本发明实施例还提供了一种营养成分信息分析装置，包括：
扫描单元，用于扫描食品包装上的条形码，得到条形码编码值；
检索单元，用于将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息；
建议单元，用于若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
可选的，所述装置还包括：
识别单元，用于若否，则通过用移动终端设备拍摄或从设备本地文件中读取食品包装上含营养成分信息的彩色照片，对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息。
可选的，所述建议单元，还用于：通过对比食品信息数据库中原有的当前食物的营养成分信息与营养成分表上的识别信息，判断当前食物是否可能是假冒伪劣食品。
第三方面，本发明实施例还提供了一种服务器，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述实施例中任一所述的营养成分信息分析方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述实施例中任一所述的营养成分信息分析方法。
本发明实施例的技术方案，通过比对条形码编码值比对并提取信息，食品营养成分信息的获取快速准确，不会因为包装不平整或拍照角度因素影响准确度。
附图说明
图1是本发明实施例一中的一种营养成分信息分析方法的流程示意图；
图2是本发明实施例二中的一种营养成分信息分析方法的流程示意图；
图3是本发明实施例二中的二值化图像的示意图；
图4是本发明实施例二中的图像倾斜矫正的夹角示意图；
图5是本发明实施例二中的坐标点在平面上的分布的示意图；
图6是本发明实施例三中的一种营养成分信息分析装置的结构示意图；
图7是本发明实施例四中的一种服务器的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
此外，术语“第一”、“第二”等可在本文中用于描述各种方向、动作、步骤或元件等，但这些方向、动作、步骤或元件不受这些术语限制。这些术语仅用于将第一个方向、动作、步骤或元件与另一个方向、动作、步骤或元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一速度差值称为第二速度差值，且类似地，可将第二速度差值称为第一速度差值。第一速度差值和第二速度差值两者都是速度差值，但其不是同一速度差值。术语“第一”、“第二”等不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
实施例一
图1为本发明实施例一提供的一种营养成分信息分析方法的流程示意图，本发明实施例可适用于食品营养分析的情况。本发明实施例的方法可以由一种营养成分信息分析装置来执行，该装置可以由软件和/或硬件的方式实现，并一般可集成于服务器或终端设备中。参照图1，本发明实施例的营养成分信息分析方法，具体包括如下步骤：
步骤S110、扫描食品包装上的条形码，得到条形码编码值。
具体的，通过在终端设备利用扫码工具扫描食品包装上的条形码识别编码值，或者用户手动输入条形码的编码值，将编码值传给服务器。在此之前，还包括：准备一个存有条形码、食品营养成分信息以及其他食品信息的食品信息数据库，其中可以预先添加部分食品信息，并在后续持续补充数据。
步骤S120、将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息。
具体的，将条形码编码值传值数据库，匹配云端食品数据库，得到对应食品基础信息和营养成分信息，如果能匹配到对应营养成分信息，则可以执行步骤S130，如果未能匹配到对应营养成分信息，则不执行步骤S130。
步骤S130、若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
具体的，如果根据条形码编码值检索食品信息数据库中存在对应的食品营养成分信息，则通过用户自行输入或智能终端设备检测识别等方式获取的用户个体身体健康指标信息，结合膳食营养指南，分析当前食品所含营养成分对用户的影响，反馈营养成分信息数据和食用建议。
进一步的，还包括：通过对比食品信息数据库中原有的当前食物的营养成分信息与营养成分表上的识别信息，判断当前食物是否可能是假冒伪劣食品。
本发明实施例的技术方案，通过比对条形码编码值比对并提取信息，食品营养成分信息的获取快速准确，不会因为包装不平整或拍照角度因素影响准确度。
实施例二
图2为本发明实施例二提供的一种营养成分信息分析方法的流程示意图，本实施例在上述实施例一的技术方案的基础上进行了进一步优化。该方法包括：
步骤S210、扫描食品包装上的条形码，得到条形码编码值。
步骤S220、将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息，若是，则跳过步骤S230执行步骤S240，若否，则执行步骤S230。
步骤S230、通过用移动终端设备拍摄或从设备本地文件中读取食品包装上含营养成分信息的彩色照片，对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息。
具体的，步骤S230包括以下步骤：
子步骤S310、通过用移动终端设备拍摄或从设备本地文件中读取食品包装上含营养成分信息的彩色照片。
具体的，通过用移动终端设备拍摄或从设备本地文件中读取食品包装上含营养成分信息的彩色照片，对照片文件进行像素及文件大小的压缩后，上传至服务器。
子步骤S320、对图片进行灰度处理，将彩色图片转为灰度图片，并使用自适应阈值技术将灰度图片转为二值化图片。
具体的，图像灰度化，是一个让图片数据简单化的过程，将彩色图片变为只有黑灰白的灰度图片。图像转换存在特定的公式，例如RGB彩色图像中，一种彩色由R(红色)、G(绿色)、B(蓝色)三原色按比例混合而成，而灰度图像每个像素点都只有一个Grey(灰度值)，它们间的转换关系为：Grey＝0.299*R+0.587*G+0.114*B。
图像二值化，进一步去除图片中的无效信息，利用阈值进行分割，将灰度图像转为非黑即白的二值化图像，二值化图像如图3所示效果。由于包装图片上背景颜色可能比较复杂，而我们图像二值化真正想实现的是凸显营养成分表外边框线条，所以需要自适应阈值法(adaptiveThreshold)，它的思想不是计算全局图像的阈值，而是根据图像不同区域亮度分布，计算其局部阈值，所以对于图像不同区域，能够自适应计算不同的阈值，因此被称为自适应阈值法。
自适应阈值化计算大概过程是为每一个象素点单独计算的阈值，即每个像素点的阈值都是不同的，就是将该像素点周围B*B区域内的像素高斯加权，然后减去一个常数C，从而得到该点的阈值。若该点的灰度值小于阈值，则该点取值为0，否则取值为1，即将每个像素点上灰度值(数值范围为0～255)变为0或者1。其中参数B和C可以设计为根据实际计算效果自动调整的变量形式。
子步骤S330、利用霍夫直线变换技术，从二值化图片中检测出多条直线，筛选出符合条件的直线确定图片的偏转角度，分别对彩色原图和二值化图片进行旋转矫正，得到摆正后的彩色原图和二值化图片。
具体的，图像倾斜矫正，对图片中营养成分表内容存在倾斜的情况进行判断和矫正，便于后续OCR文字识别。通过直线检测技术检测图片中符合条件的直线，计算图片倾斜角度，再通过图片绕中心点旋转倾斜角度的形式达到图像倾斜矫正的目的，具体操作如下：
子步骤S331、设定所需检测的直线的长度、连续程度等条件，利用霍夫变换检测出二值化图片中符合设定条件的所有直线。
子步骤S332、根据实际需求设定一个小于45度的角度θ，如图4所示，从步骤241中检测到的所有直线中筛选出与水平直线间的夹角小于θ的直线并得到这些直线的与水平线的夹角。
子步骤S333、为了避免营养成分表边框线条以外的直线干扰，同时考虑到图片中营养成分表边框线可能并非规整的直线，所以可以划分多个角度区间，每个角度区间范围不宜过大，计算每个角度区间内所含直线数量，所含直线数量最多的角度区间内的所有直线的平均倾斜角度作为图片倾斜角度。
子步骤S334、将彩色原图和二值化图片分别绕图片中心点旋转上述图片倾斜角度，得到倾斜矫正后的彩色图片和二值化图片，彩色图片旋转造成的空缺处可以用临色填充，二值化图片则直接填充0即可。
子步骤S340、利用DBSCAN算法，对得到的摆正后的二值化图片所有白色像素点进行聚类处理，组成图中营养成分表外边框线条的所有点自动归为一类，得到营养成分表外边框所在位置，裁剪出图片中营养成分表区域。
具体的，检测图片中营养成分表外边框，并裁剪出营养成分表图片。只对图片中营养成分表内容进行文字识别的话，所需识别检测的内容区域更小，利于更快速的进行文字内容识别，同时内容区域内的信息干扰更少，有利于提高识别的精度和后续文字提取的效果，具体操作如下：
子步骤S341、提取出二值化图片中所有值为1的像素点位置信息，生成对应坐标数组，如从下方所示(1)中数据变为(2)中所示数据；
(1)二值化图片数据示例
0 0 0 0 0 0……0 0 0 0 0
0 0 0 1 1 1……0 0 0 0 0
0 0 0 0 0 1……1 1 0 0 0
…
0 0 0 0 1 1……1 0 1 0 0
0 0 0 0 0 0……0 0 0 0 0
0 0 0 0 0 0……0 0 0 0 0
(2)坐标数组数据示例
[[3,1][3,2][3,3]……[250,214][250,216]]
子步骤S342、使用DBSCAN(具有噪声的基于密度的空间聚类方法)算法，对所有提取出的坐标数组中所有坐标点进行分类，统计各类别中所含的坐标点个数，取所含坐标点个数最多的一个分类(如果想尽可能为了避免图片存在干扰背景，可以取所含坐标点个数较多的几类，每类均独立执行后续步，对所有可能结果均进行识别)。此类中所含的所有坐标点在平面上的分布会呈现如图5所示效果。
子步骤S343、此类中所有点的最大横坐标为Xmax，最小横坐标为Xmin，最大纵坐标为Ymax，最小纵坐标为Ymin。据此，我们可以对倾斜矫正后的二值化图像或倾斜矫正后的彩色图像进行切割裁剪，得到包含边框内所有内容的营养成分表截图。
子步骤S350、利用OCR技术分别对裁剪得到的营养成分表区域和摆正后的彩色原图进行全图文字识别，每个识别结果均按每行从左至右进行拼接成连续字符，拼接点处加上特定标识字符，同时从上到下将所有识别内容拼接成整段连续字符，拼接点处加上特定标识字符，生成两段文本。
具体的，使用OCR文字识别模型或者OCR文字识别软件对预处理过的图片进行全图文字识别，识别内容每行从左至右进行拼接成连续字符，拼接点处可以加上特定标识字符，同时从上到下将所有识别内容拼接成整段连续字符，拼接点处可以加上特定标识字符。
上方所提的预处理过的图片是指以下两张图，分别得到各自图像的识别结果：(1)营养成分表截图彩色图像或二值化图像；(2)倾斜矫正后的彩色图像或二值化图像。
子步骤S360、根据营养成分表的国标规范，设计正则匹配规则，从得到的两段文本中分别提取出每一组营养成分信息，综合两者信息得到最终的食品营养成分信息。
具体的，食品包装上的营养成分标签有国家标准规范，国内可以参考《食品安全国家标准预包装食品营养标签通则》，其中对营养成分名称、数值小数位数、单位、格式等都有明确要求，据此可以设计正则表达式，将识别的文本中每一营养成分的名称、含量、NRV％等信息提取出来。由于子步骤S310获取的图片可能存在大角度的翻转，导致图片倾斜矫正后也无法得到正常朝向的文字内容，所以如果没有可提取的数据结果，则回到子步骤S330，依次尝试图片旋转矫正角度额外增加90度、180度、270度，可正常得到营养成分信息后停止步骤循环。
步骤S240、获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
本发明实施例的技术方案，通过比对条形码编码值比对并提取信息，食品营养成分信息的获取快速准确，不会因为包装不平整或拍照角度因素影响准确度。
本发明实施例的技术方案，对于需要拍摄营养成分表信息进行识别的，无需依赖照片中完整的四条直线边框进行营养成分定位，在客观常见的包装不平整情景下依然能够对营养成分表内容进行高效识别。
本发明实施例的技术方案，把对营养成分表图片的识别结果会存入云端数据库，不断完善数据库数据，从而提升性能和效率，是具有自我优化能力的。
本发明实施例的技术方案，结合用户个人身体情况，将识别结果整理出食用建议反馈给用户。
实施例三
本发明实施例所提供的一种营养成分信息分析装置可执行本发明任意实施例所提供的营养成分信息分析方法，具备执行方法相应的功能模块和有益效果，该装置可以由软件和/或硬件(集成电路)的方式实现，并一般可集成于服务器或终端设备中。图6是本发明实施例三中的一种营养成分信息分析装置的结构示意图。参照图6，本发明实施例的营养成分信息分析装置300具体可以包括：
扫描单元310，用于扫描食品包装上的条形码，得到条形码编码值；
检索单元320，用于将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息；
建议单元330，用于若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
可选的，所述装置300还包括：
识别单元，用于若否，则通过用移动终端设备拍摄或从设备本地文件中读取食品包装上含营养成分信息的彩色照片，对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息。
可选的，所述建议单元330，还用于：通过对比食品信息数据库中原有的当前食物的营养成分信息与营养成分表上的识别信息，判断当前食物是否可能是假冒伪劣食品。
可选的，在扫描食品包装上的条形码，得到条形码编码值之前，还包括：
准备一个存有条形码、食品营养成分信息以及其他食品信息的食品信息数据库。
可选的，所述对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息，包括：
对图片进行灰度处理，将彩色图片转为灰度图片，并使用自适应阈值技术将灰度图片转为二值化图片；
利用霍夫直线变换技术，从二值化图片中检测出多条直线，筛选出符合条件的直线确定图片的偏转角度，分别对彩色原图和二值化图片进行旋转矫正，得到摆正后的彩色原图和二值化图片；
利用DBSCAN算法，对得到的摆正后的二值化图片所有白色像素点进行聚类处理，组成图中营养成分表外边框线条的所有点自动归为一类，得到营养成分表外边框所在位置，裁剪出图片中营养成分表区域；
利用OCR技术分别对裁剪得到的营养成分表区域和摆正后的彩色原图进行全图文字识别，每个识别结果均按每行从左至右进行拼接成连续字符，拼接点处加上特定标识字符，同时从上到下将所有识别内容拼接成整段连续字符，拼接点处加上特定标识字符，生成两段文本；
根据营养成分表的国标规范，设计正则匹配规则，从得到的两段文本中分别提取出每一组营养成分信息，综合两者信息得到最终的食品营养成分信息。
本发明实施例的技术方案，通过比对条形码编码值比对并提取信息，食品营养成分信息的获取快速准确，不会因为包装不平整或拍照角度因素影响准确度。
实施例四
图7为本发明实施例四提供的一种服务器的结构示意图，如图7所示，该服务器包括处理器410、存储器420、输入装置430和输出装置440；服务器中处理器410的数量可以是一个或多个，图7中以一个处理器410为例；服务器中的处理器410、存储器420、输入装置430和输出装置440可以通过总线或其他方式连接，图7中以通过总线连接为例。
存储器420作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的营养成分信息分析方法对应的程序指令/模块(例如，营养成分信息分析装置中的扫描单元310、检索单元320和建议单元330)。处理器410通过运行存储在存储器420中的软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述的营养成分信息分析方法。
也即：
扫描食品包装上的条形码，得到条形码编码值；
将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息；
若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
当然，本发明实施例所提供的服务器，其处理器不限于执行如上所述的方法操作，还可以执行本发明任意实施例所提供的营养成分信息分析方法中的相关操作。
存储器420可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器420可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器420可进一步包括相对于处理器410远程设置的存储器，这些远程存储器可以通过网络连接至服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置430可用于接收输入的数字或字符信息，以及产生与服务器的用户设置以及功能控制有关的键信号输入。输出装置440可包括显示屏等显示设备。
本发明实施例的技术方案，通过比对条形码编码值比对并提取信息，食品营养成分信息的获取快速准确，不会因为包装不平整或拍照角度因素影响准确度。
实施例五
本发明实施例五还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种营养成分信息分析方法，该方法包括：
扫描食品包装上的条形码，得到条形码编码值；
将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息；
若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
当然，本发明实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的营养成分信息分析方法中的相关操作。
本发明实施例的计算机可读存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
存储介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或终端上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
本发明实施例的技术方案，通过比对条形码编码值比对并提取信息，食品营养成分信息的获取快速准确，不会因为包装不平整或拍照角度因素影响准确度。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种营养成分信息分析方法，其特征在于，包括：
扫描食品包装上的条形码，得到条形码编码值；
将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息；
若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
2.根据权利要求1所述的营养成分信息分析方法，其特征在于，在根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息之后，还包括：
若否，则通过用移动终端设备拍摄或从设备本地文件中读取食品包装上含营养成分信息的彩色照片，对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息。
3.根据权利要求2所述的营养成分信息分析方法，其特征在于，在判别所识别的食品对当前用户的影响并提供食用建议之后，还包括：
通过对比食品信息数据库中原有的当前食物的营养成分信息与营养成分表上的识别信息，判断当前食物是否可能是假冒伪劣食品。
4.根据权利要求1所述的营养成分信息分析方法，其特征在于，在扫描食品包装上的条形码，得到条形码编码值之前，还包括：
准备一个存有条形码、食品营养成分信息以及其他食品信息的食品信息数据库。
5.根据权利要求2所述的营养成分信息分析方法，其特征在于，所述对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息，包括：
对图片进行灰度处理，将彩色图片转为灰度图片，并使用自适应阈值技术将灰度图片转为二值化图片；
利用霍夫直线变换技术，从二值化图片中检测出多条直线，筛选出符合条件的直线确定图片的偏转角度，分别对彩色原图和二值化图片进行旋转矫正，得到摆正后的彩色原图和二值化图片；
利用DBSCAN算法，对得到的摆正后的二值化图片所有白色像素点进行聚类处理，组成图中营养成分表外边框线条的所有点自动归为一类，得到营养成分表外边框所在位置，裁剪出图片中营养成分表区域；
利用OCR技术分别对裁剪得到的营养成分表区域和摆正后的彩色原图进行全图文字识别，每个识别结果均按每行从左至右进行拼接成连续字符，拼接点处加上特定标识字符，同时从上到下将所有识别内容拼接成整段连续字符，拼接点处加上特定标识字符，生成两段文本；
根据营养成分表的国标规范，设计正则匹配规则，从得到的两段文本中分别提取出每一组营养成分信息，综合两者信息得到最终的食品营养成分信息。
6.一种营养成分信息分析装置，其特征在于，包括：
扫描单元，用于扫描食品包装上的条形码，得到条形码编码值；
检索单元，用于将所述条形码编码值传送到服务器，根据所述条形码编码值检索食品信息数据库中是否存在对应的食品营养成分信息；
建议单元，用于若是，则获取用户身体健康指标及用户的个人变化期望，结合营养摄入指导标准，判别所识别的食品对当前用户的影响并提供食用建议。
7.根据权利要求6所述的营养成分信息分析装置，其特征在于，所述装置还包括：
识别单元，用于若否，则通过用移动终端设备拍摄或从设备本地文件中读取食品包装上含营养成分信息的彩色照片，对食品包装照片上营养成分表内的信息内容进行文字识别，提取出所有营养成分信息的文本，得到食品营养成分信息。
8.根据权利要求7所述的营养成分信息分析装置，其特征在于，所述建议单元，还用于：通过对比食品信息数据库中原有的当前食物的营养成分信息与营养成分表上的识别信息，判断当前食物是否可能是假冒伪劣食品。
9.一种服务器，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现根据权利要求1-5中任一所述的营养成分信息分析方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现根据权利要求1-5中任一所述的营养成分信息分析方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110767118.7A CN113379015A (zh) | 2021-07-07 | 2021-07-07 | 一种营养成分信息分析方法、装置、服务器及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110767118.7A CN113379015A (zh) | 2021-07-07 | 2021-07-07 | 一种营养成分信息分析方法、装置、服务器及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113379015A true CN113379015A (zh) | 2021-09-10 |
Family
ID=77581308
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110767118.7A Pending CN113379015A (zh) | 2021-07-07 | 2021-07-07 | 一种营养成分信息分析方法、装置、服务器及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113379015A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104216939A (zh) * | 2013-06-03 | 2014-12-17 | 戴旭志 | 饮食控管系统及方法 |
| CN104866849A (zh) * | 2015-04-30 | 2015-08-26 | 天津大学 | 一种基于移动终端的食品营养成分标签识别方法 |
| CN110718282A (zh) * | 2019-10-14 | 2020-01-21 | 杭州睿琪软件有限公司 | 一种包装类食品识别方法及装置 |
| CN110867239A (zh) * | 2019-11-07 | 2020-03-06 | 北京理工大学 | 一种饮食建议生成方法及装置、计算机装置及存储介质 |
| CN111652337A (zh) * | 2020-05-25 | 2020-09-11 | 内蒙古农业大学 | 一种新型有声食品电子营养标签及信息处理方法 |
-
2021
- 2021-07-07 CN CN202110767118.7A patent/CN113379015A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104216939A (zh) * | 2013-06-03 | 2014-12-17 | 戴旭志 | 饮食控管系统及方法 |
| CN104866849A (zh) * | 2015-04-30 | 2015-08-26 | 天津大学 | 一种基于移动终端的食品营养成分标签识别方法 |
| CN110718282A (zh) * | 2019-10-14 | 2020-01-21 | 杭州睿琪软件有限公司 | 一种包装类食品识别方法及装置 |
| CN110867239A (zh) * | 2019-11-07 | 2020-03-06 | 北京理工大学 | 一种饮食建议生成方法及装置、计算机装置及存储介质 |
| CN111652337A (zh) * | 2020-05-25 | 2020-09-11 | 内蒙古农业大学 | 一种新型有声食品电子营养标签及信息处理方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110956225B (zh) | 一种违禁品检测方法及系统、一种计算设备及存储介质 | |
| CN110348439B (zh) | 一种自动识别价签的方法、计算机可读介质及系统 | |
| EP2767928B1 (en) | Device and method for automatically identifying a qr code | |
| CN109886928B (zh) | 一种目标细胞标记方法、装置、存储介质及终端设备 | |
| CN110490181B (zh) | 一种基于ocr识别技术的表单填写审核方法、装置、设备以及计算机存储介质 | |
| CN110222694B (zh) | 图像处理方法、装置、电子设备及计算机可读介质 | |
| KR102002024B1 (ko) | 객체 라벨링 처리 방법 및 객체 관리 서버 | |
| WO2020060632A1 (en) | Converting an image into a structured table | |
| CN113569840A (zh) | 基于自注意力机制的表单识别方法、装置及存储介质 | |
| CN111767754B (zh) | 一种识别码的识别方法、装置、电子设备及存储介质 | |
| CN114120307A (zh) | 显示内容的识别方法、装置、设备和存储介质 | |
| CN115302963A (zh) | 一种基于机器视觉的条形码印刷控制方法、系统及介质 | |
| CN111062252B (zh) | 一种实时危险物品语义分割方法、装置及存储装置 | |
| CN110796210A (zh) | 一种标签信息的识别方法及装置 | |
| KR101842535B1 (ko) | 부호의 광학적 검출 방법 | |
| CN113128522B (zh) | 目标识别方法、装置、计算机设备和存储介质 | |
| US20160371543A1 (en) | Classifying document images based on parameters of color layers | |
| CN111507119B (zh) | 标识码识别方法、装置、电子设备及计算机可读存储介质 | |
| CN112445849A (zh) | 一种报表分析方法及装置 | |
| CN113379015A (zh) | 一种营养成分信息分析方法、装置、服务器及存储介质 | |
| CN113130023B (zh) | Edc系统中图文识别录入方法及系统 | |
| CN115170471A (zh) | 基于图像识别模型的部件识别方法及装置 | |
| CN114926464A (zh) | 在双录场景下的图像质检方法、图像质检装置及系统 | |
| CN108805190B (zh) | 一种图像处理方法及装置 | |
| RU2571510C2 (ru) | Метод и устройство, использующие увеличение изображения для подавления визуально заметных дефектов на изображении |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210910 |
|
| RJ01 | Rejection of invention patent application after publication |