CN107798521A - 一种基于机器码图像识别的菜品识别与收银系统及方法 - Google Patents

一种基于机器码图像识别的菜品识别与收银系统及方法 Download PDF

Info

Publication number
CN107798521A
CN107798521A CN201711131562.XA CN201711131562A CN107798521A CN 107798521 A CN107798521 A CN 107798521A CN 201711131562 A CN201711131562 A CN 201711131562A CN 107798521 A CN107798521 A CN 107798521A
Authority
CN
China
Prior art keywords
machine code
vegetable
cash register
identification
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711131562.XA
Other languages
English (en)
Inventor
胡建平
杨晓枫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Czechoslovo Intelligent Technology Co Ltd
Original Assignee
Shanghai Czechoslovo Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Czechoslovo Intelligent Technology Co Ltd filed Critical Shanghai Czechoslovo Intelligent Technology Co Ltd
Priority to CN201711131562.XA priority Critical patent/CN107798521A/zh
Publication of CN107798521A publication Critical patent/CN107798521A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/08Payment architectures
    • G06Q20/20Point-of-sale [POS] network systems
    • G06Q20/208Input by product or record sensing, e.g. weighing or scanner processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/22Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Multimedia (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

本发明涉及一种基于机器码图像识别的菜品识别与收银系统及方法,所述的系统包括外包装贴有机器码标志的菜品、盛放菜品的收银托盘,放置收银托盘的收银区、固定在收银区正上方的CCD相机、与CCD相机连接的机器码识别模块以及与机器码识别模块连接的收银模块;所述的方法包括:1)拍摄机器码:CCD相机对菜品进行拍照,将图像传入机器码识别模块;2)识别机器码:机器码识别模块对菜品图像中所包含的机器码进行识别,获取机器码的ID、数量以及机器码的图像位置后传入收银模块;3)生成账单:收银模块根据机器码的ID与菜品的对应关系,统计菜品种类的数量并计算结账,生成账单;4)结束收银。与现有技术相比,本发明具有快速方便、低成本等优点。

Description

一种基于机器码图像识别的菜品识别与收银系统及方法
技术领域
本发明涉及自选餐厅菜品收银领域,尤其是涉及一种基于机器码图像识别的菜品识别与收银系统及方法。
背景技术
在餐饮行业,为了提高工作效率和顾客体验,智能收银系统越来越多地被应用于大型餐厅,减轻了人力劳动成本,减少了顾客排队时间,从而提升了餐饮业的营利水平。餐饮行业的数字化、智能化已经成为一种趋势,尤其体现在智能收银系统的普及上。
目前餐饮业的智能收银系统中,为了识别菜的品种与数量,多使用RFID技术。RFID是一种无线射频识别技术,它利用电子标签和标签阅读器间的无线电波进行通信。餐饮菜品贴上电子标签,即可实现收银。但RFID具有明显的缺点:首先,成本高昂;一个电子标签的价格最低也需几角钱,且餐厅菜品及包装经常是一次性出售,电子标签不能反复利用,每天海量的电子标签形成了高昂的成本。第二点,电子标签具有一定厚度,贴在包装上显得突兀,不方便使用。
因此使用低成本的硬件设备,实现方便快捷、高准确率的自动菜品识别收银系统具有很高的应用价值。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种方便快捷、准确率高的基于机器码图像识别的菜品识别与收银系统及方法。
本发明的目的可以通过以下技术方案来实现:
一种基于机器码图像识别的菜品识别与收银系统,该系统包括外包装贴有机器码标志的菜品、盛放菜品的收银托盘,放置收银托盘的收银区、固定在收银区正上方的CCD相机、与CCD相机连接的机器码识别模块以及与机器码识别模块连接的收银模块。
优选地,所述的CCD相机的分辨率为1920*1080。
优选地,所述的CCD相机的固定高度条件为使机器码的大小不小于整体拍摄图像的长或宽的1/30。
优选地,所述的机器码识别模块中设有用于存储机器码图像库存储所有机器码的图案、ID及对应的菜品信息的机器码图像库。
优选地,所述的收银模块包括收银数据库、与收银数据库连接的价格计算单元,以及与价格计算单元连接的顾客显示屏和打印机。
优选地,所述的顾客显示屏为lcd显示屏或led显示屏。
一种菜品识别与收银方法,应用基于机器码图像识别的菜品识别与收银系统,该方法包括以下步骤:
1)拍摄机器码:CCD相机对盛放在收银托盘中的菜品进行一次性拍照,并将拍摄的菜品图像传入机器码识别模块;
2)识别机器码:机器码识别模块对菜品图像中所包含的机器码进行识别,获取机器码的ID、每种机器码的数量以及机器码的图像位置,机器码识别模块将信息统计后传入收银模块;
3)生成账单:收银模块根据机器码的ID与菜品的对应关系,统计菜品数量种类并计算结账金额,生成账单;
4)结束收银:账单结清后,收银数据库更新。
优选地,所述的步骤2)的具体内容为:
21)对菜品图像计算灰度梯度,获取灰度梯度图像;
22)对灰度梯度图像使用直线提取方法提取出机器码矩形边界的角点,获取机器码的矩形轮廓图;
23)将机器码的矩形轮廓图通过透视变换进行矫正,获取正方形机器码;
24)将获取的正方形机器码与机器码图像库中的每一个机器码做灰度最小二乘匹配,取相似度最高的ID值,获取每一个机器码的ID与数量;
25)将统计后的机器码的ID与数量信息传入收银模块。
与现有技术相比,本发明具有以下优点:。
一、快速方便:相机对收银托盘中的商品拍照,实时地一次性检测识别所包含的商品种类和数量,通过系统预设的商品价格,实时结账;
二、高精度:本发明提供超过1000种样式的机器码,在保证成像清晰完整的条件下,识别率准确率在99%以上;
三、低成本:本发明采用分辨率为1920*1080的高清CCD相机,且该相机只需一台奔腾级别的CPU即可达到实时检测,相比于传统复杂的收银系统,大大降低了成本。
附图说明
图1为一种基于机器码图像识别的菜品识别与收银系统的结构示意图;
图2为一种菜品识别与收银方法的流程图;
图3为一种菜品识别与收银方法中机器码识别模块的算法流程图。
图1中标号所示:
1、CCD相机,2、机器码识别模块,3、收银模块,4、收银托盘,5、菜品,501、机器码图案标志,6、收银区。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。
实施例
本发明涉及一种基于机器码图像识别的菜品识别与收银系统及方法,其中:
一种基于机器码图像识别的菜品识别与收银系统包括收银区6、CCD相机1、机器码识别模块2和收银模块3,如图1所示。CCD相机1固定在收银区6正上方,机器码识别模块2与CCD相机1连接,收银模块3与机器码识别模块2连接。
菜品5放置在收银托盘4上,收银托盘4放置在收银区6中。机器码图案标志501贴在菜品5的正面,且菜品5与机器码ID唯一对应。每一个机器码的图案与ID唯一。
CCD相机1的分辨率为1920*1080,该相机只需一台奔腾级别的CPU即可达到实时检测;CCD相机1设于收银区6正上方的安装高度需要保证菜品的机器码成像完整,且机器码的大小不小于图像长或宽的1/30。
机器码识别模块2中设有机器码图像库,人工设计的机器码种类超过1000个,也可随时更换或增加更多的机器码。所有的机器码的图案、ID及对应的菜品信息都储存在机器码图像库中。
收银模块3包括收银数据库、与之相连的价格计算单元和与价格计算单元连接的顾客显示屏和打印机。价格计算单元设有所有菜品对应的价格信息,收银数据库负责存储获取的机器码的图案、ID及对应的菜品信息后,通过价格计算单元计算所有菜品总额。价格计算总额通过顾客显示屏显示,并通过打印机打印账单。顾客显示屏可采用lcd显示屏或led显示屏。
一种菜品识别与收银方法,应用基于机器码图像识别的菜品识别与收银系统,该方法的流程如图2所示,包括:
1)CCD相机对盛放在收银托盘中的菜品进行一次性拍照,并将拍摄的菜品图像传入机器码识别模块;
2)机器码识别模块对菜品图像中所包含的机器码进行识别,得到机器码的ID与每种机器码的数量以及机器码的图像位置,机器码识别模块将信息统计后传入收银模块;
3)收银模块根据机器码的ID与菜品的对应关系,统计菜品数量种类,计算结账金额,生成账单;
4)顾客通过顾客显示屏显示的账单进行买单,账单结清,收银数据库更新。
如图3可知,机器码识别模块对CCD相机获取的机器码标志图像的检测识别过程具体包括:
21)采用灰度梯度模板在机器码标志图像上滑窗计算灰度梯度,获取灰度梯度图像;
22)对灰度梯度图像使用直线提取方法提取出机器码的边界,再提取出机器码矩形边界的角点,可利用Harris角点提取算法来获取机器码的矩形轮廓图;
23)将机器码的矩形轮廓图通过透视变换进行矫正,获取正方形机器码;
24)将获取的正方形机器码与机器码图像库中的每一个机器码做灰度最小二乘匹配,取相似度最高的ID值,即可得到每一个机器码的ID与数量;
25)将步骤24)中统计的机器码ID,与收银数据库预设的对应菜品相关联,即可得到收银托盘中菜品种类与数量。
灰度梯度模块可采用Roberts算子或Sobel算子,直线提取方法可采用LSD算法或Hough算法。经过多次尝试,采用本发明方法的菜品识别准确率在99%以上,达到了理想的效果。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的工作人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (8)

1.一种基于机器码图像识别的菜品识别与收银系统,其特征在于,该系统包括外包装贴有机器码标志的菜品、盛放菜品的收银托盘,放置收银托盘的收银区、固定在收银区正上方的CCD相机、与CCD相机连接的机器码识别模块以及与机器码识别模块连接的收银模块。
2.根据权利要求1所述的一种基于机器码图像识别的菜品识别与收银系统,其特征在于,所述的CCD相机的分辨率为1920*1080。
3.根据权利要求1所述的一种基于机器码图像识别的菜品识别与收银系统,其特征在于,所述的CCD相机的固定高度条件为使机器码的大小不小于整体拍摄图像的长或宽的1/30。
4.根据权利要求1所述的一种基于机器码图像识别的菜品识别与收银系统,其特征在于,所述的机器码识别模块中设有用于存储所有机器码的图案、ID及对应的菜品信息的机器码图像库。
5.根据权利要求1所述的一种基于机器码图像识别的菜品识别与收银系统,其特征在于,所述的收银模块包括收银数据库、与收银数据库连接的价格计算单元,以及与价格计算单元连接的顾客显示屏和打印机。
6.根据权利要求5所述的一种基于机器码图像识别的菜品识别与收银系统,其特征在于,所述的顾客显示屏为lcd显示屏或led显示屏。
7.一种应用如权利要求1-6任一项所述的基于机器码图像识别的菜品识别与收银系统的菜品识别与收银方法,其特征在于,所述的方法包括以下步骤:
1)拍摄机器码:CCD相机对盛放在收银托盘中的菜品进行一次性拍照,并将拍摄的菜品图像传入机器码识别模块;
2)识别机器码:机器码识别模块对菜品图像中所包含的机器码进行识别,获取机器码的ID、每种机器码的数量以及机器码的图像位置,机器码识别模块将信息统计后传入收银模块;
3)生成账单:收银模块根据机器码的ID与菜品的对应关系,统计菜品数量种类并计算结账金额,生成账单;
4)结束收银:账单结清后,收银数据库更新。
8.根据权利要求7所述的一种菜品识别与收银方法,其特征在于,所述的步骤2)的具体内容包括:
21)对菜品图像计算灰度梯度,获取灰度梯度图像;
22)对灰度梯度图像使用直线提取方法提取出机器码矩形边界的角点,获取机器码的矩形轮廓图;
23)将机器码的矩形轮廓图通过透视变换进行矫正,获取正方形机器码;
24)将获取的正方形机器码与机器码图像库中的每一个机器码做灰度最小二乘匹配,取相似度最高的ID值,获取每一个机器码的ID与数量;
25)将统计后的机器码的ID与数量信息传入收银模块。
CN201711131562.XA 2017-11-15 2017-11-15 一种基于机器码图像识别的菜品识别与收银系统及方法 Pending CN107798521A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711131562.XA CN107798521A (zh) 2017-11-15 2017-11-15 一种基于机器码图像识别的菜品识别与收银系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711131562.XA CN107798521A (zh) 2017-11-15 2017-11-15 一种基于机器码图像识别的菜品识别与收银系统及方法

Publications (1)

Publication Number Publication Date
CN107798521A true CN107798521A (zh) 2018-03-13

Family

ID=61535043

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711131562.XA Pending CN107798521A (zh) 2017-11-15 2017-11-15 一种基于机器码图像识别的菜品识别与收银系统及方法

Country Status (1)

Country Link
CN (1) CN107798521A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113455660A (zh) * 2021-05-28 2021-10-01 天津博诺智创机器人技术有限公司 一种食物智能协作方法以及应用该方法的早餐制备系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007094672A (ja) * 2005-09-28 2007-04-12 Casio Hitachi Mobile Communications Co Ltd 携帯端末装置及びプログラム
CN102326187A (zh) * 2008-12-23 2012-01-18 数据逻辑扫描公司 识别和结算物体的方法和系统
CN103226687A (zh) * 2012-01-30 2013-07-31 东芝泰格有限公司 商品读取装置及商品读取方法
CN103646475A (zh) * 2013-11-14 2014-03-19 成都博约创信科技有限责任公司 集图像识别与标签识别于一体的收银系统
CN104268498A (zh) * 2014-09-29 2015-01-07 杭州华为数字技术有限公司 一种二维码的识别方法及终端
CN104766037A (zh) * 2015-03-20 2015-07-08 中国联合网络通信集团有限公司 一种二维码的识别方法及设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007094672A (ja) * 2005-09-28 2007-04-12 Casio Hitachi Mobile Communications Co Ltd 携帯端末装置及びプログラム
CN102326187A (zh) * 2008-12-23 2012-01-18 数据逻辑扫描公司 识别和结算物体的方法和系统
CN103226687A (zh) * 2012-01-30 2013-07-31 东芝泰格有限公司 商品读取装置及商品读取方法
CN103646475A (zh) * 2013-11-14 2014-03-19 成都博约创信科技有限责任公司 集图像识别与标签识别于一体的收银系统
CN104268498A (zh) * 2014-09-29 2015-01-07 杭州华为数字技术有限公司 一种二维码的识别方法及终端
CN104766037A (zh) * 2015-03-20 2015-07-08 中国联合网络通信集团有限公司 一种二维码的识别方法及设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
黄珂等: "QR码图像几何校正算法的研究", 《计算机工程与应用》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113455660A (zh) * 2021-05-28 2021-10-01 天津博诺智创机器人技术有限公司 一种食物智能协作方法以及应用该方法的早餐制备系统

Similar Documents

Publication Publication Date Title
US11587195B2 (en) Image processing methods and arrangements useful in automated store shelf inspections
CN108320404B (zh) 基于神经网络的商品识别方法、装置、自助收银台
US9697429B2 (en) Method and apparatus for image processing to avoid counting shelf edge promotional labels when counting product labels
CN107844790A (zh) 一种基于图像识别的菜品识别与收银系统及方法
CN107767590A (zh) 物品自动识别商用条码电子秤及物品自动识别方法
US5497314A (en) Automated apparatus and method for object recognition at checkout counters
CN104463167A (zh) 一种餐厅自动结算方法及系统
WO2019019525A1 (zh) 基于卷积神经网络的图像识别技术的结算方法和装置
CN103617420A (zh) 基于图像特征匹配的商品快速识别方法及系统
CN108345912A (zh) 一种基于rgbd信息与深度学习的商品快速结算系统
CN109635705B (zh) 一种基于二维码和深度学习的商品识别方法及装置
US10503961B2 (en) Object recognition for bottom of basket detection using neural network
WO2019062812A1 (zh) 用于自动结算的人机交互装置及其应用
JP2004127013A (ja) 販売時点情報管理装置
CN108596137A (zh) 一种基于图像识别算法的商品扫描录入方法
US20180039841A1 (en) Object Recognition for Bottom of Basket Detection
US11409977B1 (en) Universal product labeling for vision-based commerce
Bobbit et al. Visual item verification for fraud prevention in retail self-checkout
CN104978585A (zh) 一种自动计价方法
US20180068534A1 (en) Information processing apparatus that identifies an item based on a captured image thereof
TWI494866B (zh) License plate identification method and its hand - held electronic device
CN109345733A (zh) 智能秤的计价方法及系统
CN111222388B (zh) 基于视觉识别的结算方法和系统
CN107798521A (zh) 一种基于机器码图像识别的菜品识别与收银系统及方法
US20180308084A1 (en) Commodity information reading device and commodity information reading method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180313