CN116189358B - 一种具有菜品视觉识别功能的智能收款机系统及收款机 - Google Patents
一种具有菜品视觉识别功能的智能收款机系统及收款机 Download PDFInfo
- Publication number
- CN116189358B CN116189358B CN202310163954.3A CN202310163954A CN116189358B CN 116189358 B CN116189358 B CN 116189358B CN 202310163954 A CN202310163954 A CN 202310163954A CN 116189358 B CN116189358 B CN 116189358B
- Authority
- CN
- China
- Prior art keywords
- dishes
- dish
- payment
- bill
- meat
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000000007 visual effect Effects 0.000 title claims abstract description 79
- 238000000034 method Methods 0.000 claims abstract description 6
- 235000021186 dishes Nutrition 0.000 claims description 140
- 235000013311 vegetables Nutrition 0.000 claims description 74
- 235000013372 meat Nutrition 0.000 claims description 52
- 235000012046 side dish Nutrition 0.000 claims description 26
- 238000005303 weighing Methods 0.000 claims description 15
- 238000004891 communication Methods 0.000 claims description 13
- 235000013599 spices Nutrition 0.000 claims description 11
- 235000003166 Opuntia robusta Nutrition 0.000 claims description 10
- 244000218514 Opuntia robusta Species 0.000 claims description 10
- 239000003086 colorant Substances 0.000 claims description 9
- 239000000796 flavoring agent Substances 0.000 claims description 9
- 235000019634 flavors Nutrition 0.000 claims description 9
- 235000012054 meals Nutrition 0.000 claims description 9
- 238000012216 screening Methods 0.000 claims description 9
- 230000008030 elimination Effects 0.000 claims description 8
- 238000003379 elimination reaction Methods 0.000 claims description 8
- 238000005259 measurement Methods 0.000 claims description 3
- 230000001502 supplementing effect Effects 0.000 claims description 3
- 230000007717 exclusion Effects 0.000 claims 1
- 230000000694 effects Effects 0.000 abstract 1
- 239000004615 ingredient Substances 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 235000013410 fast food Nutrition 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 235000021022 fresh fruits Nutrition 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000033764 rhythmic process Effects 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 235000019640 taste Nutrition 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
- G07G1/00—Cash registers
- G07G1/12—Cash registers electronically operated
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/10—Payment architectures specially adapted for electronic funds transfer [EFT] systems; specially adapted for home banking systems
- G06Q20/102—Bill distribution or payments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/68—Food, e.g. fruit or vegetables
Landscapes
- Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Finance (AREA)
- Theoretical Computer Science (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Multimedia (AREA)
- Economics (AREA)
- Development Economics (AREA)
- Cash Registers Or Receiving Machines (AREA)
Abstract
本发明公开了一种具有菜品视觉识别功能的智能收款机系统及收款机，应用在智能收款机技术领域，其技术方案要点是：区分套餐制以及自选制，并对套餐制度以及自选制的菜品识别方式以及菜品总价计算方式进行单独设置；具有的技术效果是：智能化程度高，能够适用于自选性较强的餐厅使用，对于新菜品的识别适应性强，投入成本低。
Description
技术领域
本发明涉及智能收款机技术领域，特别涉及一种具有菜品视觉识别功能的智能收款机系统及收款机。
背景技术
随着社会经济的发展，人们的生活节奏越来越快，大家都希望用在就餐的时间能减少，然而现在的情况不容乐观，很明显的例子是在大城市的写字楼附近的自助快餐店里，在吃饭的时间排队的时间要远远大于实际就餐时间，浪费的时间其实并不在于选菜过程，而是浪费在排队结账过程中，目前餐饮行业内的结算模式基本上都还处于人工结算阶段，都是人为对菜品进行判断定价后再在扣费机上输入价格实行扣费或者收取现金，这样大大降低了结算的速度，增加了人工的成本，在人流高峰的同时出错率亦大大增加。
为了解决这一问题，现在的大型餐厅或是大型商超中通常会使用智能收款机，其通过人工事先将菜品或是水果生鲜等产品进行打包称重并贴上条形码，当顾客进店后选走对应的产品并到柜台处进行自助结账或是人工辅助结账，其大大增加了在人流高峰时的结账效率，但是也带来一些问题：首先在大型餐厅内尤其是自选式餐厅内，为了使得顾客能够有更多选择的空间，通常会有各种各样、不同种类的菜品，同样也会有不同的购买形式，如套餐制或是自选式，当顾客选择套餐制时，通常顾客会在指定的地方拿取套餐盘，套餐盘内会有3-5个用于放菜品的格子，顾客到不同的窗口选取餐品，这就不适合现有智能收款机的结账模式；同样当顾客选择自选式时，顾客对菜品的分量有要求时，如有的顾客需要大份菜品，有的则需要小份菜品，此时结账时需要对菜品进行称重，现有的智能收款机同样也不适用于该种情况，因此现有的智能收款机的结账模式较为单一，不适用于自选性较强的餐厅使用；
同样也有的餐厅或商超使用带视觉识别的智能收款机，其通过大数据或是AI对菜品整体进行进行视觉识别，一方面这样视觉识别效率低，需要数据库对大量的数据进行整合处理，投入成本以及识别效率低，尤其是当菜品的某些关键特征被遮挡在盘子底部时其根本无法进行有效识别；另一方面，当餐厅需要添加新的菜品时需要向数据库补充大量数据，菜品的识别数据需要长时间的补充，过程繁琐，投入成本大。
发明内容
本发明的第一目的是提供一种具有菜品视觉识别功能的智能收款机系统，其优点是智能化程度高，能够适用于自选性较强的餐厅使用，对于新菜品的识别适应性强，投入成本低。
本发明的上述技术目的是通过以下技术方案得以实现的：一种具有菜品视觉识别功能的智能收款机系统，包括信息录入系统、菜品识别系统、菜品称重系统、支付系统以及数据库系统；
所述信息录入系统包括菜品信息录入模组以及菜品价格录入模组，菜品信息录入模组通过人工手动录入菜品的关键配菜、关键香料以及菜品的特征颜色系，菜品价格录入模组通过分别录入在套餐制下不同种类的素菜荤菜搭配价格以及在自选制下不同菜品单位重量的价格；
所述菜品识别系统接入所述数据库系统，其通过若干个环绕菜品的视觉识别相机对菜品的特征进行拍摄识别，包括：
步骤1、对盛放菜品的容器进行识别，识别容器为套餐盘或是自选盘；
步骤2、若盛放菜品的容器为套餐盘，则视觉识别相机识别套餐盘内的荤菜以及素菜的数量组合并传递到所述数据库系统中得到套餐的总价；
步骤3、若盛放菜品的容器为自选盘，则视觉识别相机首先识别实际的菜品，随后控制所述菜品称重系统对菜品进行称重得到菜品重量，结合菜品单位重量的价格得到自选菜品的总价；
步骤4、支付系统产生账单，顾客支付菜品账单。
本发明进一步设置为：所述套餐盘以及所述自选盘为透明构造，所述视觉识别相机设有若干组，其能够对套餐盘或自选盘内菜品的关键配菜、关键香料的种类以及菜品的特征颜色进行识别。
本发明进一步设置为：步骤2还包括：
步骤2.1、视觉识别相机通过测量套餐盘的大小或识别套餐盘的结构判断套餐盘的类型，并以此初步确认套餐盘内荤菜以及素菜数量的总和并判定套餐价格所在挡位，挡位根据套餐盘内套餐格的数量由少至多分为若干档，每个挡位设置不同素菜荤菜搭配组合所对应的价格；
步骤2.2、视觉识别相机识别并判断每个套餐格内的菜品的关键配菜中是否存在肉菜品种，若套餐格内存在肉菜品种的关键配菜，则标记该套餐格为荤菜格，反之则标记该套餐格为素菜格，对荤菜格以及素菜的数量匹配套餐制下对应挡位的素菜荤菜搭配组合，若能够匹配已确定挡位下的套餐搭配类型则直接跳转到步骤2.4；
步骤2.3、在步骤2.2中，若是荤菜格以及素菜格的数量无法匹配已确定挡位下的套餐类型，则按序将已确定挡位进行升档或降档操作直到找到正确挡位下素菜荤菜搭配组合；
步骤2.4、根据已确定挡位下素菜荤菜搭配组合匹配在套餐制下不同种类的素菜荤菜搭配价格并传递到支付系统自动生成账单。
本发明进一步设置为：步骤3还包括：
步骤3.1、视觉识别相机首先结合数据库系统识别并判断自选盘内菜品中的若干关键配菜，并根据关键配菜进行逐次筛查排除，若是最终筛查排除只有一个菜品则直接转到步骤3.4，若是筛选菜品中存在的所有关键配菜后还无法确定最终的菜品则跳转到步骤3.2；
步骤3.2、视觉识别相机进一步识别并判断自选盘内菜品的若干关键香料，并根据关键香料进一步进行逐次筛查排除，若是最终筛查排除只有一个菜品则直接转到步骤3.4，若是筛选菜品中存在的所有关键香料后还无法确定最终的菜品则跳转到步骤3.3；
步骤3.3、视觉识别相机进一步识别并判断自选盘内菜品的特征颜色并比对菜品的特征颜色系，并根据特征颜色系最终进行逐次筛查排除，若是筛选菜品中存在的所有特征颜色后还无法确定最终的菜品则提示人工进行介入判定并跳转到下一步；
步骤3.4、对自选盘以及自选盘内的菜品进行统一称重后减去自选盘的重量即得到菜品的重量；
步骤3.5、菜品重量结合菜品单位重量下的价格得到自选菜品的总价并传递到支付系统自动生成账单。
本发明进一步设置为：所述菜品称重系统的的计量单位为1两（50g）、1斤（500g）或是1公斤（1000g）。
本发明进一步设置为：所述支付系统包括账单生成系统、账单支付系统、账单通信系统以及支付结果显示系统，所述账单生成系统用于根据菜品的总价得到总的账单并进行通知或显示，所述账单支付系统用于对不同的支付方式进行识别并扣除与账单相等的金额，所述账单通信系统用于对账单支付结果进行通信查询以判定账单是否支付成功，所述支付结果显示系统用于显示最终的支付结果。
本发明进一步设置为：所述账单支付系统设置若干支付方式，每个支付方式单独设置一个与所述账单通信系统连接的支付接口，支付方式可进行选择，包括：二维码扫码支付、信用卡/银行卡刷卡支付、触碰支付、付款码识别支付以及储值卡支付等，系统管理员可对不同的支付接口进行选择性开启或关闭以对支付方式进行选择。
本发明进一步设置为：所述数据库系统集成运算系统以及存储系统，所述存储系统连接所述信息录入系统以及所述支付系统用于存储菜品信息以及账单信息，所述运算系统连接所述菜品识别系统以及所述菜品称重系统用于进行菜品识别逻辑运算以及菜品总价数学计算。
本发明的第二目的是提供一种收款机，其优点是智能化程度高，能够适用于自选性较强的餐厅使用，对于新菜品的识别适应性强，投入成本低。
本发明的上述技术目的是通过以下技术方案得以实现的：一种收款机，应用如上述任一技术方案所述的一种具有菜品视觉识别功能的智能收款机系统；所述视觉识别相机分设有4组，包括设置于菜品顶部的顶部视觉识别相机、设置于菜品底部的底部视觉识别相机以及分别设置于菜品两侧的侧部视觉识别相机，所述底部视觉识别相机以及所述侧部视觉识别相机用于补充所述顶部视觉识别相机无法进行有效识别的菜品特征，避免菜品的特征被其他特征遮挡无法被所述顶部视觉识别相机有效识别，所述视觉识别相机分别搭配有用于实现快速对焦识别的激光雷达，所述收款机还设有账单支付模块。
本发明进一步设置为：所述账单支付模块包括用于显示支付二维码的显示屏幕、用于识别付款码的扫描枪、刷卡槽以及NFC支付面板。
综上所述，本发明具有以下有益效果：
1.通过区分套餐制以及自选制，通过对盛放菜品的盘子进行简单初步识别即可实现区分套餐制或自选制，当顾客选择套餐制时，对套餐盘进行识别对套餐价格的挡位进行初步判定，同时系统无需对菜品的具体品种进行识别只需要通过判断菜品的关键配菜中是否含有肉菜即可判断素菜荤菜的种类，通过匹配不同挡位下的素菜荤菜搭配组合即可得到套餐的价格，从而大大减少了识别的时间，当顾客选择自选制时通过分别识别对比菜品的关键配菜、关键香料以及关键颜色从而能够精确识别出菜品的品种，无需通过大数据数据整合或是AI对菜品进行识别，当添加新菜品时仅需要向系统内输入菜品的相关信息即可，增加了对菜品的识别适应性，智能化程度高，更加适用于自选性强的餐厅使用；
2.当顾客选择套餐制时通过对套餐盘进行识别从而对套餐价格的挡位进行初步判定的同时设置升档降档步骤，避免客户没有拿取与套餐格数量对应的菜品，增加了客户的选择性；
3.通过设置多组环绕菜品的视觉识别相机并设置套餐盘以及自选盘为透明构造，从而避免菜品的某些关键特征被遮挡在盘子底部时无法对菜品进行识别，提成了菜品的识别准确率。
附图说明
图1是实施例1的智能收款机系统整体结构示意图；
图2是实施例1的菜品识别系统的流程示意图；
图3是实施例1的步骤2的具体流程示意图；
图4是实施例1的步骤3的具体流程示意图；
图5是实施例2的收款机的整体结构示意图；
图6是图5的A部分放大示意图。
附图标记：1、信息录入系统；11、菜品信息录入模组；12、菜品价格录入模组；2、菜品识别系统；3、菜品称重系统；4、支付系统；41、账单生成系统；42、账单支付系统；43、账单通信系统；44、支付结果显示系统；5、数据库系统；51、运算系统；52、存储系统；6、视觉识别相机；61、顶部视觉识别相机；62、底部视觉识别相机；63、侧部视觉识别相机；7、显示屏幕；8、扫描枪；9、刷卡槽；10、NFC支付面板。
具体实施方式
以下结合附图对本发明作进一步详细说明。
实施例1：
参考图1，一种具有菜品视觉识别功能的智能收款机系统，包括信息录入系统1、菜品识别系统2、菜品称重系统3、支付系统4以及数据库系统5。
参考图1，具体的，信息录入系统1包括菜品信息录入模组11以及菜品价格录入模组12，菜品信息录入模组11通过人工手动录入菜品的关键配菜、关键香料以及菜品的特征颜色系信息，菜品的关键配料以及关键香料需要结合菜品的关键配料以及关键香料处于成品状态下位于在不同视角下的图片，输入的内容作为系统的基础识别信息，同时系统会自动后台在互联网上进行搜索并将相关的图片等信息存储到数据库系统5中作为辅助识别信息，同时信息录入系统1会在实际使用中进行学习，在实际进行菜品识别时不断记录并存储菜品的关键信息，从而实现在智能收款机系统不断使用中完善识别精度及速度，同时对于菜品的特征颜色系，不同菜品以及相同菜品的不同味道均具有不同的特征颜色系，同时菜品处于不同时间，不同光照等情况下其特征颜色均有一定的差异，因此在确定菜品的特征颜色系时，可首先确定菜品的最相近的颜色，随后对颜色进行色度的增减直到颜色有明显区别为止，在色度增减范围内的颜色即为菜品的特征颜色系，从而降低不同条件下对菜品颜色的影响。
参考图1，具体的，菜品价格录入模组12通过分别录入在套餐制下不同种类的素菜荤菜搭配价格以及在自选制下不同菜品单位重量的价格，在套餐制下，素菜荤菜的搭配价格依据素菜荤菜的总数分为不同挡位，不同挡位下素菜荤菜的搭配组合的价格均由商家进行设置，如在3挡下（即素菜荤菜的总数为3个），0荤菜3素菜的价格为10元，1荤菜2荤菜的价格为12元，2荤菜1素菜的价格为14元，3荤菜0素菜的价格为16元，其他挡位下不同荤菜素菜的搭配组合的价格设置与此类似，为了区分套餐制以及自选制下菜品的区别，避免套餐制与自选制由于菜品价格的区别而导致顾客消费行为的倒挂，即顾客在长期消费行为中发现某种制度更加实惠而更加偏爱该制度，商家可通过区分套餐制与自选制菜品以及调整菜品价格等措施减少顾客消费行为的倒挂；
参考图2至图4，菜品识别系统2接入数据库系统5，其通过若干个环绕菜品的视觉识别相机6对菜品的特征进行拍摄识别，包括如下步骤：
步骤1、对盛放菜品的容器进行识别，识别容器为套餐盘或是自选盘；
步骤2、若盛放菜品的容器为套餐盘，则视觉识别相机6识别套餐盘内的荤菜以及素菜的数量组合并传递到数据库系统5中得到套餐的总价；
步骤2.1、视觉识别相机6通过测量套餐盘的大小或识别套餐盘的结构判断套餐盘的类型，并以此初步确认套餐盘内荤菜以及素菜数量的总和并判定套餐价格所在挡位，挡位根据套餐盘内套餐格的数量由少至多分为若干档，每个挡位设置不同素菜荤菜搭配组合所对应的价格；
步骤2.2、视觉识别相机6识别并判断每个套餐格内的菜品的关键配菜中是否存在肉菜品种，若套餐格内存在肉菜品种的关键配菜，则标记该套餐格为荤菜格，反之则标记该套餐格为素菜格，对荤菜格以及素菜的数量匹配套餐制下对应挡位的素菜荤菜搭配组合，若能够匹配已确定挡位下的套餐搭配类型则直接跳转到步骤2.4；
步骤2.3、在步骤2.2中，若是荤菜格以及素菜格的数量无法匹配已确定挡位下的套餐类型，则按序将已确定挡位进行升档或降档操作直到找到正确挡位下素菜荤菜搭配组合；
步骤2.4、根据已确定挡位下素菜荤菜搭配组合匹配在套餐制下不同种类的素菜荤菜搭配价格并传递到支付系统4自动生成账单。
步骤3、若盛放菜品的容器为自选盘，则视觉识别相机6首先识别实际的菜品，随后控制菜品称重系统3对菜品进行称重得到菜品重量，结合菜品单位重量的价格得到自选菜品的总价；
步骤3.1、视觉识别相机6首先结合数据库系统5识别并判断自选盘内菜品中的若干关键配菜，并根据关键配菜进行逐次筛查排除，若是最终筛查排除只有一个菜品则直接转到步骤3.4，若是筛选菜品中存在的所有关键配菜后还无法确定最终的菜品则跳转到步骤3.2；
步骤3.2、视觉识别相机6进一步识别并判断自选盘内菜品的若干关键香料，并根据关键香料进一步进行逐次筛查排除，若是最终筛查排除只有一个菜品则直接转到步骤3.4，若是筛选菜品中存在的所有关键香料后还无法确定最终的菜品则跳转到步骤3.3；
步骤3.3、视觉识别相机6进一步识别并判断自选盘内菜品的特征颜色并比对菜品的特征颜色系，并根据特征颜色系最终进行逐次筛查排除，若是筛选菜品中存在的所有特征颜色后还无法确定最终的菜品则提示人工进行介入判定并跳转到下一步；
步骤3.4、对自选盘以及自选盘内的菜品进行统一称重后减去自选盘的重量即得到菜品的重量；
步骤3.5、菜品重量结合菜品单位重量下的价格得到自选菜品的总价并传递到支付系统4自动生成账单。
步骤4、支付系统4产生账单，顾客支付菜品账单。
参考图2至图4，具体的，在步骤2中，当顾客选择套餐制时，对套餐盘进行识别对套餐价格的挡位进行初步判定，同时系统无需对菜品的具体品种进行识别只需要通过判断菜品的关键配菜中是否含有肉菜即可判断素菜荤菜的种类，通过匹配不同挡位下的素菜荤菜搭配组合即可得到套餐的价格，从而大大减少了识别的时间，减少了数据库系统5的运算量，从而大大提升了菜品结算的速度；
参考图2至图4，同时当顾客选择套餐制时通过对套餐盘进行识别从而对套餐价格的挡位进行初步判定的同时设置升档降档步骤，避免客户没有拿取与套餐格数量对应的菜品而导致系统无法进行结算，如系统识别到顾客拿取的是3挡的套餐盘，即在正常情况下顾客选取的荤菜素菜的总数为3个，此时系统快速定位到第三挡位下素菜荤菜的搭配组合，但是顾客实际拿取的荤菜素菜的总数可能少于或多于3个，此时系统无法在第三挡位下找到符合的素菜荤菜的搭配组合，此时系统依据实际识别到的荤菜素菜的总数从数据库系统5中找到套餐制下对应的套餐挡位，同时当顾客拿取的素菜荤菜的总数多余套餐盘的套餐格数时，其存在多种情形，如顾客让工作人员将菜品放在原本盛放米饭等主食的位置等，其可通过对工作人员进行培训来减少此类情形的发生。
参考图2至图4，具体的，在步骤3中，当顾客选择自选制时通过分别识别对比菜品的关键配菜、关键香料以及关键颜色从而能够精确识别出菜品的品种，无需通过大数据数据整合或是AI对菜品进行识别，当添加新菜品时仅需要向系统内输入菜品的相关信息即可，增加了对菜品的识别适应性，智能化程度高，同时对菜品的具体品种进行识别时，其通过分步依次识别菜品的关键配菜、关键香料以及特征颜色直到某个步骤筛查排除到只有一个菜品，其能够在识别准确的同时减少数据的运算量，无需进行全部识别运算，提升了识别的效率以及数据库系统5的运算量。
具体的，套餐盘以及自选盘为无色透明构造，同时放置套餐盘以及自选盘的表面也为无色透明构造，视觉识别相机6设有若干组，其能够对套餐盘或自选盘内菜品的关键配菜、关键香料的种类以及菜品的特征颜色进行识别，避免菜品的某些关键特征被遮挡在盘子底部时无法对菜品进行识别。
具体的，菜品称重系统3的的计量单位为1两（50g）、1斤（500g）或是1公斤（1000g）。
参考图1，具体的，支付系统4包括账单生成系统41、账单支付系统42、账单通信系统43以及支付结果显示系统44，账单生成系统41用于根据菜品的总价得到总的账单并进行通知或显示，账单支付系统42用于对不同的支付方式进行识别并扣除与账单相等的金额，账单通信系统43用于对账单支付结果进行通信查询以判定账单是否支付成功，支付结果显示系统44用于显示最终的支付结果，账单支付系统42设置若干支付方式，每个支付方式单独设置一个与账单通信系统43连接的支付接口，支付方式可进行选择，包括：二维码扫码支付、信用卡/银行卡刷卡支付、触碰支付、付款码识别支付以及储值卡支付等，系统管理员可对不同的支付接口进行选择性开启或关闭以对支付方式进行选择，由于菜品的总价精确到小数点后两位，使用现金支付会较为麻烦，因此支付系统4不设置现金支付方式，顾客可将现金存储到储值卡内并通过储值卡进行支付。
参考图1，具体的，数据库系统5集成运算系统51以及存储系统52，存储系统52连接信息录入系统1以及支付系统4用于存储菜品信息以及账单信息，运算系统51连接菜品识别系统2以及菜品称重系统3用于进行菜品识别逻辑运算以及菜品总价数学计算。
实施例2：
参考图5和图6，一种收款机，应用如实施例1所示的一种具有菜品视觉识别功能的智能收款机系统，视觉识别相机6分设有4组，包括设置在菜品顶部的顶部视觉识别相机61、设置在菜品底部的底部视觉识别相机62以及分别设置在菜品两侧的侧部视觉识别相机63，底部视觉识别相机62以及侧部视觉识别相机63用于补充顶部视觉识别相机61无法进行有效识别的菜品特征，同时套餐盘以及自选盘为无色透明构造，同时放置套餐盘以及自选盘的台面也为无色透明构造，避免菜品的特征被其他特征遮挡无法被顶部视觉识别相机61有效识别，同时视觉识别相机6分别搭配有用于实现快速对焦识别的激光雷达从而提升菜品的识别速度，收款机还设有账单支付模块，账单支付模块包括用于显示支付二维码的显示屏幕7、用于识别付款码的扫描枪8、刷卡槽9以及NFC支付面板10，分别对应支付系统4的不同支付方式。
本具体实施例仅仅是对本发明的解释，其并不是对本发明的限制，本领域技术人员在阅读完本说明书后可以根据需要对本实施例做出具有创造性贡献的修改，但只要在本发明的权利要求范围内都受到专利法的保护。
Claims (8)
1.一种具有菜品视觉识别功能的智能收款机系统，包括信息录入系统(1)、菜品识别系统(2)、菜品称重系统(3)、支付系统(4)以及数据库系统(5)；其特征在于，
所述信息录入系统(1)包括菜品信息录入模组(11)以及菜品价格录入模组(12)，菜品信息录入模组(11)通过人工手动录入菜品的关键配菜、关键香料以及菜品的特征颜色系，菜品价格录入模组(12)通过分别录入在套餐制下不同种类的素菜荤菜搭配价格以及在自选制下不同菜品单位重量的价格；
所述菜品识别系统(2)接入所述数据库系统(5)，其通过若干个环绕菜品的视觉识别相机(6)对菜品的特征进行拍摄识别，包括：
步骤1、对盛放菜品的容器进行识别，识别容器为套餐盘或是自选盘；
步骤2、若盛放菜品的容器为套餐盘，则视觉识别相机(6)识别套餐盘内的荤菜以及素菜的数量组合并传递到所述数据库系统(5)中得到套餐的总价；
步骤3、若盛放菜品的容器为自选盘，则视觉识别相机(6)首先识别实际的菜品，随后控制所述菜品称重系统(3)对菜品进行称重得到菜品重量，结合菜品单位重量的价格得到自选菜品的总价；
步骤4、支付系统(4)产生账单，顾客支付菜品账单；
步骤2还包括：
步骤2.1、视觉识别相机(6)通过测量套餐盘的大小或识别套餐盘的结构判断套餐盘的类型，并以此初步确认套餐盘内荤菜以及素菜数量的总和并判定套餐价格所在挡位，挡位根据套餐盘内套餐格的数量由少至多分为若干档，每个挡位设置不同素菜荤菜搭配组合所对应的价格；
步骤2.2、视觉识别相机(6)识别并判断每个套餐格内的菜品的关键配菜中是否存在肉菜品种，若套餐格内存在肉菜品种的关键配菜，则标记该套餐格为荤菜格，反之则标记该套餐格为素菜格，对荤菜格以及素菜的数量匹配套餐制下对应挡位的素菜荤菜搭配组合，若能够匹配已确定挡位下的套餐搭配类型则直接跳转到步骤2.4；
步骤2.3、在步骤2.2中，若是荤菜格以及素菜格的数量无法匹配已确定挡位下的套餐类型，则按序将已确定挡位进行升档或降档操作直到找到正确挡位下素菜荤菜搭配组合；
步骤2.4、根据已确定挡位下素菜荤菜搭配组合匹配在套餐制下不同种类的素菜荤菜搭配价格并传递到支付系统(4)自动生成账单。
2.根据权利要求1所述的一种具有菜品视觉识别功能的智能收款机系统，其特征在于，所述套餐盘以及所述自选盘为透明构造，所述视觉识别相机(6)设有若干组，其能够对套餐盘或自选盘内菜品的关键配菜、关键香料的种类以及菜品的特征颜色进行识别。
3.根据权利要求1所述的一种具有菜品视觉识别功能的智能收款机系统，其特征在于，步骤3还包括：
步骤3.1、视觉识别相机(6)首先结合数据库系统(5)识别并判断自选盘内菜品中的若干关键配菜，并根据关键配菜进行逐次筛查排除，若是最终筛查排除只有一个菜品则直接转到步骤3.4，若是筛选菜品中存在的所有关键配菜后还无法确定最终的菜品则跳转到步骤3.2；
步骤3.2、视觉识别相机(6)进一步识别并判断自选盘内菜品的若干关键香料，并根据关键香料进一步进行逐次筛查排除，若是最终筛查排除只有一个菜品则直接转到步骤3.4，若是筛选菜品中存在的所有关键香料后还无法确定最终的菜品则跳转到步骤3.3；
步骤3.3、视觉识别相机(6)进一步识别并判断自选盘内菜品的特征颜色并比对菜品的特征颜色系，并根据特征颜色系最终进行逐次筛查排除，若是筛选菜品中存在的所有特征颜色后还无法确定最终的菜品则提示人工进行介入判定并跳转到下一步；
步骤3.4、对自选盘以及自选盘内的菜品进行统一称重后减去自选盘的重量即得到菜品的重量；
步骤3.5、菜品重量结合菜品单位重量下的价格得到自选菜品的总价并传递到支付系统(4)自动生成账单。
4.根据权利要求1所述的一种具有菜品视觉识别功能的智能收款机系统，其特征在于，所述菜品称重系统(3)的的计量单位为1两（50g）、1斤（500g）或是1公斤（1000g）。
5.根据权利要求1所述的一种具有菜品视觉识别功能的智能收款机系统，其特征在于，所述支付系统(4)包括账单生成系统(41)、账单支付系统(42)、账单通信系统(43)以及支付结果显示系统(44)，所述账单生成系统(41)用于根据菜品的总价得到总的账单并进行通知或显示，所述账单支付系统(42)用于对不同的支付方式进行识别并扣除与账单相等的金额，所述账单通信系统(43)用于对账单支付结果进行通信查询以判定账单是否支付成功，所述支付结果显示系统(44)用于显示最终的支付结果。
6.根据权利要求5所述的一种具有菜品视觉识别功能的智能收款机系统，其特征在于，所述账单支付系统(42)设置若干支付方式，每个支付方式单独设置一个与所述账单通信系统(43)连接的支付接口，支付方式可进行选择，包括：二维码扫码支付、信用卡/银行卡刷卡支付、触碰支付、付款码识别支付以及储值卡支付等，系统管理员可对不同的支付接口进行选择性开启或关闭以对支付方式进行选择。
7.一种收款机，应用如上述权利要求1-6任一所述的一种具有菜品视觉识别功能的智能收款机系统；其特征在于，所述视觉识别相机(6)分设有4组，包括设置于菜品顶部的顶部视觉识别相机(61)、设置于菜品底部的底部视觉识别相机(62)以及分别设置于菜品两侧的侧部视觉识别相机(63)，所述底部视觉识别相机(62)以及所述侧部视觉识别相机(63)用于补充所述顶部视觉识别相机(61)无法进行有效识别的菜品特征，避免菜品的特征被其他特征遮挡无法被所述顶部视觉识别相机(61)有效识别，所述视觉识别相机(6)分别搭配有用于实现快速对焦识别的激光雷达，所述收款机还设有账单支付模块。
8.根据权利要求7所述的一种收款机，其特征在于，所述账单支付模块包括用于显示支付二维码的显示屏幕(7)、用于识别付款码的扫描枪(8)、刷卡槽(9)以及NFC支付面板(10)。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310163954.3A CN116189358B (zh) | 2023-02-24 | 2023-02-24 | 一种具有菜品视觉识别功能的智能收款机系统及收款机 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310163954.3A CN116189358B (zh) | 2023-02-24 | 2023-02-24 | 一种具有菜品视觉识别功能的智能收款机系统及收款机 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116189358A CN116189358A (zh) | 2023-05-30 |
| CN116189358B true CN116189358B (zh) | 2023-12-12 |
Family
ID=86441991
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310163954.3A Active CN116189358B (zh) | 2023-02-24 | 2023-02-24 | 一种具有菜品视觉识别功能的智能收款机系统及收款机 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116189358B (zh) |
Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS61131064A (ja) * | 1984-11-30 | 1986-06-18 | Toshiba Corp | 食堂の自動会計システム |
| JPH05266358A (ja) * | 1992-03-17 | 1993-10-15 | Matsushita Electric Ind Co Ltd | 食堂向けｐｏｓシステム |
| JP2002032862A (ja) * | 2000-07-14 | 2002-01-31 | Matsushita Electric Ind Co Ltd | 食堂料金精算システム |
| CN105809587A (zh) * | 2016-03-03 | 2016-07-27 | 上海博康智能信息技术有限公司 | 智能收银方法及其系统 |
| CN106056487A (zh) * | 2016-06-06 | 2016-10-26 | 杭州汇萃智能科技有限公司 | 基于餐具图案的菜品自动识别系统的计价方法 |
| CN109523428A (zh) * | 2018-09-13 | 2019-03-26 | 上海交通大学 | 基于图像识别技术的智能餐饮结算方法、系统、装置及介质 |
| CN109740579A (zh) * | 2019-03-01 | 2019-05-10 | 上海柏珍信息科技有限公司 | 一种基于碗盘智能识别的快餐收银系统 |
| CN109830072A (zh) * | 2019-02-26 | 2019-05-31 | 魔珐(上海)信息科技有限公司 | 基于视觉识别的计价和收银装置、控制系统及方法 |
| CN110348829A (zh) * | 2019-06-13 | 2019-10-18 | 深圳市科拜斯物联网科技有限公司 | 餐饮结算系统和方法 |
| TW202013301A (zh) * | 2018-09-18 | 2020-04-01 | 周文彬 | 影像辨識的餐飲自動結帳系統 |
| RU2724797C1 (ru) * | 2020-01-22 | 2020-06-25 | Общество с ограниченной ответственностью "Ай Ти Ви групп" | Кассовая система и способ для идентификации блюд на подносе |
| CN112906697A (zh) * | 2021-05-06 | 2021-06-04 | 浙江口碑网络技术有限公司 | 商品识别及结算方法、装置、电子设备、存储介质 |
| CN114202652A (zh) * | 2021-12-06 | 2022-03-18 | 绍兴数鸿科技有限公司 | 一种基于Dish-YOLO的菜品识别方法和系统 |
| CN115439908A (zh) * | 2022-09-01 | 2022-12-06 | 杭州松美智能科技有限公司 | 人脸识别自助称重消费系统 |
-
2023
- 2023-02-24 CN CN202310163954.3A patent/CN116189358B/zh active Active
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS61131064A (ja) * | 1984-11-30 | 1986-06-18 | Toshiba Corp | 食堂の自動会計システム |
| JPH05266358A (ja) * | 1992-03-17 | 1993-10-15 | Matsushita Electric Ind Co Ltd | 食堂向けｐｏｓシステム |
| JP2002032862A (ja) * | 2000-07-14 | 2002-01-31 | Matsushita Electric Ind Co Ltd | 食堂料金精算システム |
| CN105809587A (zh) * | 2016-03-03 | 2016-07-27 | 上海博康智能信息技术有限公司 | 智能收银方法及其系统 |
| CN106056487A (zh) * | 2016-06-06 | 2016-10-26 | 杭州汇萃智能科技有限公司 | 基于餐具图案的菜品自动识别系统的计价方法 |
| CN109523428A (zh) * | 2018-09-13 | 2019-03-26 | 上海交通大学 | 基于图像识别技术的智能餐饮结算方法、系统、装置及介质 |
| TW202013301A (zh) * | 2018-09-18 | 2020-04-01 | 周文彬 | 影像辨識的餐飲自動結帳系統 |
| CN109830072A (zh) * | 2019-02-26 | 2019-05-31 | 魔珐(上海)信息科技有限公司 | 基于视觉识别的计价和收银装置、控制系统及方法 |
| CN109740579A (zh) * | 2019-03-01 | 2019-05-10 | 上海柏珍信息科技有限公司 | 一种基于碗盘智能识别的快餐收银系统 |
| CN110348829A (zh) * | 2019-06-13 | 2019-10-18 | 深圳市科拜斯物联网科技有限公司 | 餐饮结算系统和方法 |
| RU2724797C1 (ru) * | 2020-01-22 | 2020-06-25 | Общество с ограниченной ответственностью "Ай Ти Ви групп" | Кассовая система и способ для идентификации блюд на подносе |
| CN112906697A (zh) * | 2021-05-06 | 2021-06-04 | 浙江口碑网络技术有限公司 | 商品识别及结算方法、装置、电子设备、存储介质 |
| CN114202652A (zh) * | 2021-12-06 | 2022-03-18 | 绍兴数鸿科技有限公司 | 一种基于Dish-YOLO的菜品识别方法和系统 |
| CN115439908A (zh) * | 2022-09-01 | 2022-12-06 | 杭州松美智能科技有限公司 | 人脸识别自助称重消费系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116189358A (zh) | 2023-05-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108549851B (zh) | 智能货柜内货品识别方法及装置、智能货柜 | |
| US8306860B2 (en) | Pay at the table system | |
| CN103034839B (zh) | 基于图像识别技术的食堂支付系统及方法 | |
| CN107657736A (zh) | 一种开放式蔬菜瓜果智能售卖机 | |
| CN107016810B (zh) | 一种自助减量称重计费系统及自助减量称重计费方法 | |
| CN111080493B (zh) | 一种菜品信息识别方法、装置及菜品自助结算系统 | |
| CN101477729A (zh) | 自助售饭系统以及该系统的信息处理方法 | |
| US6140922A (en) | System for indicating locations of sales items, method thereof, and apparatus thereof | |
| CN100585654C (zh) | 自检验终端 | |
| CN112700352A (zh) | 一种智慧餐厅的自助管理系统及方法 | |
| CN112132567A (zh) | 一种基于rfid的按需取餐系统 | |
| CN107730321A (zh) | 一种基于餐食图像特征的识别计价系统 | |
| CN212675641U (zh) | 基于计算机视觉技术的智能称重装置 | |
| CN112132629A (zh) | 取餐数据处理方法及装置、存储介质、计算机设备 | |
| CN110570331A (zh) | 用于智慧餐厅的数据处理系统 | |
| JP2018205802A (ja) | 商品販売データ処理装置 | |
| CN116189358B (zh) | 一种具有菜品视觉识别功能的智能收款机系统及收款机 | |
| RU2724797C1 (ru) | Кассовая система и способ для идентификации блюд на подносе | |
| US20150379495A1 (en) | Money handling system, money handling apparatus, and money handling method | |
| CN207233098U (zh) | 一种开放式蔬菜瓜果智能售卖机 | |
| EP0223785A1 (en) | Restaurant control system | |
| US11562338B2 (en) | Automated point of sale systems and methods | |
| KR20110122006A (ko) | 식당 정산 시스템 | |
| JP6766906B2 (ja) | オーダリングシステム及びプログラム | |
| CN116611796A (zh) | 一种店铺交易数据的异常检测方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |