CN109389020A - 一种基于视觉方法生成订单的操作系统 - Google Patents

一种基于视觉方法生成订单的操作系统 Download PDF

Info

Publication number
CN109389020A
CN109389020A CN201710692388.XA CN201710692388A CN109389020A CN 109389020 A CN109389020 A CN 109389020A CN 201710692388 A CN201710692388 A CN 201710692388A CN 109389020 A CN109389020 A CN 109389020A
Authority
CN
China
Prior art keywords
commodity
image
operating system
access control
control model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710692388.XA
Other languages
English (en)
Inventor
吴建斌
王彬生
朱冬冬
楼贻杰
韩超
杨玉婷
薛鹏斌
倪文根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Kind Base Of Internet Polytron Technologies Inc
Original Assignee
Shanghai Kind Base Of Internet Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Kind Base Of Internet Polytron Technologies Inc filed Critical Shanghai Kind Base Of Internet Polytron Technologies Inc
Priority to CN201710692388.XA priority Critical patent/CN109389020A/zh
Publication of CN109389020A publication Critical patent/CN109389020A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • G06Q30/0635—Processing of requisition or of purchase orders

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Warehouses Or Storage Devices (AREA)

Abstract

本发明公开了一种基于视觉方法生成订单的操作系统，该操作系统包括安卓屏，所述安卓屏装配安卓系统，所述安卓屏设置图像采集接口，所述图像采集接口通过数据线连接图像采集相机，所述图像采集相机采集售货机柜内部的商品图像；本发明提供的基于视觉方法生成订单的操作系统，可广泛应用在自助终端、无人便利店等领域，在当前公众场合中具有广泛的应用前景。

Description

一种基于视觉方法生成订单的操作系统
技术领域
本发明涉及视觉智能识别领域，尤其涉及一种基于视觉方法生成订单的操作系统。
背景技术
本发明提供一种基于视觉方法生成订单的操作系统，该基于视觉方法生成订单的技术可广泛应用在自助终端、无人便利店等领域，在当前具有广泛的应用前景。
发明内容
本发明为解决上述技术问题而采用的技术方案是提供一种基于视觉方法生成订单的操作系统，其中，具体技术方案为：
该操作系统包括安卓屏，所述安卓屏装配安卓系统，所述安卓屏设置图像采集接口，所述图像采集接口通过数据线连接图像采集相机，所述图像采集相机采集售货机柜内部的商品图像；
采集的商品图像通过数据线反馈给安卓系统，安卓系统对商品图像进行识别；识别方法是图像采集相机拍摄二张图片，一张是柜门开启前的图像，另一张是柜门关闭后的图像，通过前后二台图像对比，获取到货道的出货信息。
上述的基于视觉方法生成订单的操作系统，其中：安卓系统对数种商品的图像信息进行存储，在通过前后二台图像对比后，运用机器学习、深度学习算法，识别出出货的货物种类以及出货的数量。
上述的基于视觉方法生成订单的操作系统，其中：安卓系统识别出商品的种类和出货数量，再乘以商品金额生成出货单。
上述的基于视觉方法生成订单的操作系统，其中：所述图像采集相机采用高清免驱USB工业摄像头模组，支持LIUNX安卓系统，最大分辨率1280*720，支持带UXC协议的LIUNX安卓系统，尺寸32*32MM 38*38MM，光源选用LED灯带。
上述的基于视觉方法生成订单的操作系统，其中：所述图像采集接口包括USB接口、RS232接口。
上述的基于视觉方法生成订单的操作系统，其中：售货机柜的柜体采用内部梯田或鱼鳞结构，使得商品不是垂直放置，带倾斜，下一层商品有1/3以内会被上一层商品覆盖，每个商品都有一个挡板，每一层设置数个格子，每个格子只能放置一个商品；保证放在柜体内的任何一个商品都有1/3以上的截面能拍照识别。
上述的基于视觉方法生成订单的操作系统，其中：售货机柜包括外部锁和60秒自动关门防夹手机械结构，柜门只要不是有顾客背对或用拉着都会通过内部机械结构自动关门弹回，在柜门被开启再关闭后图像采集相机采集售货机柜内部的商品图像，采集后系统与上一次采集对比识别。
本发明相对于现有技术具有如下有益效果：利用图像采集相机对售货机内商品拍照，对所拍照片系统利用视觉图像处理算法自动的识别商品的品类和数量并生成订单，基于视觉方法生成订单的技术可广泛应用在自助终端、无人便利店等领域，在当前公众场合中具有广泛的应用前景。
附图说明
图1为基于视觉方法生成订单的操作系统的示意图。
具体实施方式
本发明提供了一种基于视觉方法生成订单的操作系统，技术上有三大技术难点分别是：1)利用相机对售货机内商品拍照，对所拍照片系统利用视觉图像处理算法自动的识别商品的品类和数量并生成订单；2)利用梯田或鱼鳞状的原理设计新型售货机货柜，使得每个商品都至少有1/3的面可以被相机拍照。售货机内部电路部分只有一个相机和一个大门锁，在电路和结构上与传统售货机相比有相当大的便捷；3)视觉售货机配合后台管理系统。
该操作系统包括安卓屏，所述安卓屏装配安卓系统，所述安卓屏设置图像采集接口，所述图像采集接口通过数据线连接图像采集相机，所述图像采集相机采集售货机柜内部的商品图像；
采集的商品图像通过数据线反馈给安卓系统，安卓系统对商品图像进行识别；识别方法是图像采集相机拍摄二张图片，一张是柜门开启前的图像，另一张是柜门关闭后的图像，通过前后二台图像对比，获取到货道的出货信息。
安卓系统对数种商品的图像信息进行存储，在通过前后二台图像对比后，运用机器学习、深度学习算法，识别出出货的货物种类以及出货的数量。安卓系统识别出商品的种类和出货数量，再乘以商品金额生成出货单。
所述图像采集相机采用高清免驱USB工业摄像头模组，支持LIUNX安卓系统，最大分辨率1280*720，支持带UXC协议的LIUNX安卓系统，尺寸32*32MM 38*38MM，光源选用LED灯带。所述图像采集接口包括USB接口、RS232接口。
售货机柜的柜体采用内部梯田或鱼鳞结构，使得商品不是垂直放置，带倾斜，下一层商品有1/3以内会被上一层商品覆盖，每个商品都有一个挡板，每一层设置数个格子，每个格子只能放置一个商品；保证放在柜体内的任何一个商品都有1/3以上的截面能拍照识别。
售货机柜包括外部锁和60秒自动关门防夹手机械结构，柜门只要不是有顾客背对或用拉着都会通过内部机械结构自动关门弹回，在柜门被开启再关闭后图像采集相机采集售货机柜内部的商品图像，采集后系统与上一次采集对比识别。
在具体实施中，硬件软件开发和界面需求(android或windows界面)。
屏幕无需触摸，屏幕采用以太网或wifi通讯，屏幕会将每个商品的模型数据保存在本地屏幕内，需要更新不识别的情况可以给后台请求。比如这个机器内的放的商品全是饮料系列的，突然客户想放一个饼干零食进去销售，而且这个商品在后台的已经有模型了，系统自动将图片传输给后台，后台将商品名称价格和商品文件发给屏幕控制器内本地保存为本地判断数据来源。
后台管理软件接口以及管理逻辑
保留原来的经销商、代理商、商户和维护人员权限功能，现在的数据结构完全以商品，内部货道只判断有或没有在库存和补货里做统计。
与RFID、微称重技术比较可靠性和安全性
由于RFID技术的兴起，公众对扫码开门取货支付的流程应该已经不陌生和排斥了。RFID技术最大的弊端在与标签的成本、增加贴标签的工作量、客户购买漏洞将标签放在柜内而实际货物已经取出的损失、增加争议的取证工作。
微称重是利用一个电子称将每个商品的重量确定好，当用户采购商品后通过减少商品的重量判断用户购买商品的种类和价格等，漏洞和不确定习惯很多。
图像采集相机通过前后二台图像对比获取货道出货信息、运用机器学习、深度学习识别出货的货物种类以及出货的数量，取样，建模的方法在所属领域现有技术中比较成熟，在视觉方法生成订单的操作系统中具体应用方式是：
一)图像采集相机通过前后二台图像对比获取到货道的出货信息的实现方式为：货柜背景统一为白色，货物为其他颜色，当顾客取完货后，图像可以识别出当前格子对应的货物被取出。
二)运用机器学习、深度学习算法，识别出出货的货物种类以及出货的数量的实现方案为：货物种类是固定的，事先我们会对这些货物进行取样，建模，运用机器学习的方法(深度学习)，对货物进行识别训练，得出参数。实际运行时，直接运用该参数对货物进行识别，判断已取出的货物种类。
虽然本发明已以较佳实施例揭示如上，然其并非用以限定本发明，任何本领域技术人员，在不脱离本发明的精神和范围内，当可作些许的修改和完善，因此本发明的保护范围当以权利要求书所界定的为准。

Claims (7)

1.一种基于视觉方法生成订单的操作系统，其特征在于：
该操作系统包括安卓屏，所述安卓屏装配安卓系统，所述安卓屏设置图像采集接口，所述图像采集接口通过数据线连接图像采集相机，所述图像采集相机采集售货机柜内部的商品图像；
采集的商品图像通过数据线反馈给安卓系统，安卓系统对商品图像进行识别；识别方法是图像采集相机拍摄二张图片，一张是柜门开启前的图像，另一张是柜门关闭后的图像，通过前后二台图像对比，获取到货道的出货信息。
2.如权利要求1所述的基于视觉方法生成订单的操作系统，其特征在于：安卓系统对数种商品的图像信息进行存储，在通过前后二台图像对比后，运用机器学习、深度学习算法，识别出出货的货物种类以及出货的数量。
3.如权利要求2所述的基于视觉方法生成订单的操作系统，其特征在于：安卓系统识别出商品的种类和出货数量，再乘以商品金额生成出货单。
4.如权利要求3所述的基于视觉方法生成订单的操作系统，其特征在于：所述图像采集相机采用高清免驱USB工业摄像头模组，支持LIUNX安卓系统，最大分辨率1280*720，支持带UXC协议的LIUNX安卓系统，尺寸32*32MM 38*38MM，光源选用LED灯带。
5.如权利要求4所述的基于视觉方法生成订单的操作系统，其特征在于：所述图像采集接口包括USB接口、RS232接口。
6.如权利要求5所述的基于视觉方法生成订单的操作系统，其特征在于：售货机柜的柜体采用内部梯田或鱼鳞结构，使得商品不是垂直放置，带倾斜，下一层商品有1/3以内会被上一层商品覆盖，每个商品都有一个挡板，每一层设置数个格子，每个格子只能放置一个商品；保证放在柜体内的任何一个商品都有1/3以上的截面能拍照识别。
7.如权利要求6所述的基于视觉方法生成订单的操作系统，其特征在于：售货机柜包括外部锁和60秒自动关门防夹手机械结构，柜门只要不是有顾客背对或用拉着都会通过内部机械结构自动关门弹回，在柜门被开启再关闭后图像采集相机采集售货机柜内部的商品图像，采集后系统与上一次采集对比识别。
CN201710692388.XA 2017-08-14 2017-08-14 一种基于视觉方法生成订单的操作系统 Pending CN109389020A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710692388.XA CN109389020A (zh) 2017-08-14 2017-08-14 一种基于视觉方法生成订单的操作系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710692388.XA CN109389020A (zh) 2017-08-14 2017-08-14 一种基于视觉方法生成订单的操作系统

Publications (1)

Publication Number Publication Date
CN109389020A true CN109389020A (zh) 2019-02-26

Family

ID=65416864

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710692388.XA Pending CN109389020A (zh) 2017-08-14 2017-08-14 一种基于视觉方法生成订单的操作系统

Country Status (1)

Country Link
CN (1) CN109389020A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8335380B1 (en) * 1998-07-13 2012-12-18 Cognex Corporation Method for fast, robust, multi-dimensional pattern recognition
CN106600388A (zh) * 2016-12-31 2017-04-26 尤赛飞 一种应用在货柜中的自动购物方法
CN106781014A (zh) * 2017-01-24 2017-05-31 广州市蚁道互联网有限公司 自动售货机及其运行方法
CN106971457A (zh) * 2017-03-07 2017-07-21 深圳市楼通宝实业有限公司 自助售卖方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8335380B1 (en) * 1998-07-13 2012-12-18 Cognex Corporation Method for fast, robust, multi-dimensional pattern recognition
CN106600388A (zh) * 2016-12-31 2017-04-26 尤赛飞 一种应用在货柜中的自动购物方法
CN106781014A (zh) * 2017-01-24 2017-05-31 广州市蚁道互联网有限公司 自动售货机及其运行方法
CN106971457A (zh) * 2017-03-07 2017-07-21 深圳市楼通宝实业有限公司 自助售卖方法及系统

Similar Documents

Publication Publication Date Title
CN108846621B (zh) 一种基于策略模块的库存管理系统
CN108922026B (zh) 一种自动售货机的补货管理方法、装置和用户终端
CN107274555B (zh) 自动售货方法、装置及系统
US10984282B2 (en) Neural vending machine
US10643270B1 (en) Smart platform counter display system and method
CN207164889U (zh) 一种基于物联网技术的自动售货机
CN111295696A (zh) 自动售卖店
CN109409291A (zh) 智能货柜的商品识别方法和系统及购物订单的生成方法
CN109543527A (zh) 用于无人货架的商品检测方法、装置以及零售终端
US20200193404A1 (en) An automatic in-store registration system
CN109166000B (zh) 一种智能货柜及创建订单的方法
CN110111502A (zh) 一种自助售药方法及终端
WO2019165895A1 (zh) 自动售货方法和系统以及自动售货装置和自动贩售机
CN110197240A (zh) 基于图像识别的无人称重式售货柜的控制方法
RU2730112C1 (ru) Система и способ идентификации объектов в составном объекте
CN110837824B (zh) 用于售货装置中的商品识别方法、售货装置及存储介质
CN108629654A (zh) 一种基于物联网的社区零售管理系统
CN111444796B (zh) 售货机器人的商品摆放判断方法及装置
CN109271920A (zh) 支持物品识别的视觉系统及方法与介质
CN109389020A (zh) 一种基于视觉方法生成订单的操作系统
CN211787297U (zh) 一种重力识别智能货柜
CN208969793U (zh) 无人超市系统
CN111583521A (zh) 一种安全防护方法及装置
CN208314913U (zh) 一种货物检测装置和无人贩卖机
CN106157045A (zh) 基于物流数据识别虚假交易的方法、装置及服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Wu Jianbin

Inventor after: Wang Binsheng

Inventor after: Zhu Dongdong

Inventor after: Lou Yijie

Inventor after: Han Chao

Inventor after: Yang Yuting

Inventor after: Xue Pengbin

Inventor after: Ni Wengen

Inventor before: Wu Jianbin

Inventor before: Wang Binsheng

Inventor before: Zhu Dongdong

Inventor before: Lou Yijie

Inventor before: Han Chao

Inventor before: Yang Yuting

Inventor before: Xue Pengbin

Inventor before: Ni Wengen

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190226