CN109330284B - 一种货架系统 - Google Patents

一种货架系统 Download PDF

Info

Publication number
CN109330284B
CN109330284B CN201811107719.XA CN201811107719A CN109330284B CN 109330284 B CN109330284 B CN 109330284B CN 201811107719 A CN201811107719 A CN 201811107719A CN 109330284 B CN109330284 B CN 109330284B
Authority
CN
China
Prior art keywords
article
preset
shelf
space
placing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811107719.XA
Other languages
English (en)
Other versions
CN109330284A (zh
Inventor
孙俊民
倪攀
曹磊
任妍
王子锋
张治国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN201811107719.XA priority Critical patent/CN109330284B/zh
Publication of CN109330284A publication Critical patent/CN109330284A/zh
Priority to US16/375,832 priority patent/US11071399B2/en
Application granted granted Critical
Publication of CN109330284B publication Critical patent/CN109330284B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47FSPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F5/00Show stands, hangers, or shelves characterised by their constructional features
    • A47F5/0043Show shelves
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47FSPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F5/00Show stands, hangers, or shelves characterised by their constructional features
    • A47F5/10Adjustable or foldable or dismountable display stands
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47FSPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F10/00Furniture or installations specially adapted to particular types of service systems, not otherwise provided for
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47FSPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F5/00Show stands, hangers, or shelves characterised by their constructional features
    • A47F5/0018Display racks with shelves or receptables
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47FSPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F5/00Show stands, hangers, or shelves characterised by their constructional features
    • A47F5/16Platform-type show stands with flat, inclined, or curved upper surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47FSPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F5/00Show stands, hangers, or shelves characterised by their constructional features
    • A47F5/16Platform-type show stands with flat, inclined, or curved upper surface
    • A47F2005/165Platform-type show stands with flat, inclined, or curved upper surface with inclined display surface
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47FSPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F10/00Furniture or installations specially adapted to particular types of service systems, not otherwise provided for
    • A47F10/02Furniture or installations specially adapted to particular types of service systems, not otherwise provided for for self-service type systems, e.g. supermarkets
    • A47F2010/025Furniture or installations specially adapted to particular types of service systems, not otherwise provided for for self-service type systems, e.g. supermarkets using stock management systems

Abstract

本发明提供一种货架系统,包括:货架本体,包括至少一置物空间;在货架本体上,沿置物空间的水平边缘设置有物品标识图形,且物品标识图形沿水平边缘的长度方向延伸预设长度;图像采集元件,用于获取置物空间的图像信息,其中图像信息内包括物品标识图形;处理器,用于根据图像信息,确定置物空间内的预设摆放范围内,所存放与物品标识图形相匹配的匹配物品的存放情况;预设摆放范围为在置物空间内,以所述物品标识图形的所述预设长度的延伸范围对应的水平面所形成的延伸空间;物品标识图形与匹配物品具有预先设定的对应关系。该货架系统能够通过简单的结构准确地获取货架上物品情况。

Description

一种货架系统
技术领域
本发明涉及智能产品技术领域,尤其是指一种货架系统。
背景技术
目前,普通单纯具有商品放置功能的货架已不能满足商家与消费者的使用需求,因此当前具有货品信息掌握功能的智能货架成为人们的研究重点。
现有智能货架的实现方式具有两种,一种方式是在货架的每一层用于放置物品的支撑架上均安装摄像头,利用每一层的摄像头拍摄获得所在层的物品,以实时掌握支撑架上所存放物品的存量信息,判断是否存在缺货的情况。然而,该种结构的货架由于大量摄像头的安装,会导致成本增加的问题,另外由于摄像头众多,还会存在安装走线复杂的情况,而且商家在货架上摆放商品时容易碰到摄像头,导致商品识别准确度下降等一系列不良反应。另一种方式是只在货架的侧货架或者天花板上放置一个摄像头,用于拍摄货架上的物品,然而该种结构的货构受安装环境的限制,对两个货架之间的距离要求较高,同时当有人员站在两个货架之间时容易发生阻挡的情况,从而无法有效地获取到货架上所存放物品的信息;另一方面当商家移动货架时需要对应的调整摄像头的位置,很大可能需要重新安装固定摄像头,这样会导致成本上升同时给商家也带来诸多不便。
因此现有技术智能货架获取所存放物品信息的方式均存在使用不便及受约束条件较多的情况,有必要进行结构改进,以能够准确地掌握货架上所存放物品的动态信息,且使货架的应用更加广泛。
发明内容
本发明技术方案的目的是提供一种货架系统,用于解决现有技术的智能货架为拍摄获取货架上的物品,需要安装多个摄像头或者在特殊位置安装摄像头,导致线路复杂、容易遮挡,无法通过简单的结构准确地获取货架上物品情况的问题。
本发明实施例提供一种货架系统,其中,包括:
货架本体,包括至少一置物空间;其中在所述货架本体上,沿所述置物空间的水平边缘设置有物品标识图形,且所述物品标识图形沿所述水平边缘的长度方向延伸预设长度;
图像采集元件,用于获取所述置物空间的图像信息,其中所述图像信息内包括所述物品标识图形;
处理器,用于根据所述图像信息,确定所述置物空间内的预设摆放范围内,所存放与所述物品标识图形相匹配的匹配物品的存放情况;其中,所述预设摆放范围为在所述置物空间内,以所述物品标识图形的所述预设长度的延伸范围对应的水平面所形成的延伸空间;所述物品标识图形与所述匹配物品具有预先设定的对应关系。
可选地,所述的货架系统,其中,所述处理器具体用于:
根据所述图像信息,判断所述置物空间内的预设摆放范围内,是否存放有与所述匹配物品所不同的物品;当判断存在与所述匹配物品不同的物品时,则确定所述置物空间内存在放错物品情况。
可选地,所述的货架系统,其中,所述图像采集元件设置于所述货架本体上,且位于所有的所述置物空间的上方。
可选地,所述的货架系统,其中,所述货架本体包括至少两个由下至上依次排列的置物板,其中相邻两个所述置物板之间的间隔空间形成为所述置物空间,所述物品标识图形设置于位于所述置物空间下方的所述置物板的水平边缘上。
可选地,所述的货架系统,其中,所述置物空间的数量为至少两个,每一所述置物空间下方的所述置物板的水平边缘均设置有所述物品标识图形;
其中,所述图像采集元件能够获取包括全部的所述置物空间的图像信息,且所述图像信息中包括每一所述物品标识图形。
可选地,所述的货架系统,其中,相邻两个所述置物板中,第一置物板上所设置的所述物品标识图形在所述第二置物板所在平面的正投影,位于所述第二置物板的所在区域之内,其中所述第一置物板位于所述第二置物板的上方。
可选地,所述的货架系统,其中,所述置物板用于放置物品的承载面相较于水平面向下倾斜预设角度,所述预设角度小于或等于45度。
可选地,所述的货架系统,其中,所述处理器具体用于:
根据所述图像信息,判断有人员从所述货架本体上取放物品,且取放过程中,位于所述第一置物板上的物品标识图形和所述第一置物板下方的所述物品标识图形被遮挡,位于所述第一置物板上方的所述物品标识图形未被遮挡时,则确定所取放物品为与所述第一置物板所设置的所述物品标识图形相匹配的匹配物品。
可选地,所述的货架系统,其中,所述处理器还用于间隔预设时长统计每一所述匹配物品被拿取的次数和被放置的次数,根据被拿取的次数和被放置的次数,统计每一所述匹配物品当前所存放物品的数量。
可选地,所述的货架系统,其中,所述处理器具体用于:
根据所述图像信息,判断所述置物空间的所述预设摆放范围内是否存在空置区域;当判断所述预设摆放范围内存在空置区域时,则确定所述预设摆放范围内的所述匹配物品存在缺货的情况。
可选地,所述的货架系统,其中,在所述货架本体上,沿同一所述置物空间的水平边缘设置有两个不同的物品标识图形,不同的物品标识图形与不同的匹配物品具有预先设定的对应关系;
其中,所述图像采集元件所获取的所述图像信息内包括所述两个不同的物品标识图形。
可选地,所述的货架系统,其中,所述货架系统包括至少两个依次排列的所述货架本体,每一所述货架本体包括位于同一高度的所述置物空间,且相邻两个所述货架本体的位于同一高度的所述置物空间相互连通;
其中,对应每一所述货架本体分别设置有一个所述图像采集元件,每一所述图像采集元件用于获取相对应所述货架本体上所述置物空间的图像信息,还用于获取与相对应所述货架本体相邻的所述货架本体上所述置物空间的图像信息;
所述处理器具体用于根据相邻两个所述图像采集元件所采集的图像信息,确定所述置物空间内的预设摆放范围内,所存放与所述物品标识图形相匹配的匹配物品的存放情况。
可选地,所述的货架系统,其中,所述物品标识图形具有预设颜色,其中不同颜色的所述物品标识图形与不同的所述匹配物品具有预先设定的对应关系。
可选地,所述的货架系统,其中,所述物品标识图形通过电子货架标签ESL或者显示面板显示。
可选地,所述的货架系统,其中,所述货架本体包括竖直设置的架体,其中每一所述置物板通过调节结构安装于所述架体上;通过所述调节结构,所述置物板的高度和承载面相较于水平面的倾斜角度可调。
本发明具体实施例上述技术方案中的至少一个具有以下有益效果:
本发明实施例所述货架系统,在货架本体上设置物品标识图形,不同物品对应不同的物品标识图形,并利用图像采集元件拍摄获取包括物品标识图形的置物空间的图像信息,通过所拍摄的图像信息,即使无法获取货架本体上物品标识图形所对应置物空间内的全部物品的图像,也能够监控物品标识图形所对应物品的存放情况。因此,采用该方式,无需设置过多的摄像头,能够通过简单的结构准确地获取货架上物品的存放情况,解决现有技术的智能货架为拍摄获取货架上的物品,需要安装多个摄像头或者在特殊位置安装摄像头,导致线路复杂、容易遮挡的问题。
附图说明
图1为本发明具体实施例所述货架系统的其中一实施结构的示意图;
图2为本发明实施例所述货架系统的侧视图;
图3为本发明实施例所述货架系统的俯视图;
图4为本发明具体实施例所述货架系统的另一实施结构的示意图。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚,下面将结合附图及具体实施例进行详细描述。
为解决现有技术的智能货架为拍摄获取货架上的物品,需要安装多个摄像头或者在特殊位置安装摄像头,导致线路复杂、容易遮挡,无法通过简单的结构准确地获取货架上物品情况的问题,本发明实施例提供一种货架系统,通过在货架本体上设置物品标识图形,不同物品对应不同的物品标识图形,并利用图像采集元件拍摄获取包括物品标识图形的置物空间的图像信息,采用该方式,通过所拍摄的图像信息,即使无法获取货架本体上物品标识图形所对应放置全部物品的图像,也能够监控物品标识图形所对应物品的存放情况。因此,采用该方式,无需设置过多的摄像头,能够通过简单的结构准确地获取货架上物品的存放情况。
如图1所示,本发明具体实施例所述货架系统的其中一实施结构中,所述货架系统包括:
货架本体100,包括至少一置物空间110;其中在货架本体100上,沿置物空间110的水平边缘设置有物品标识图形200,且物品标识图形200沿水平边缘的长度方向延伸预设长度;
图像采集元件300,用于获取置物空间110的图像信息,其中该图像信息内包括物品标识图形200;
处理器,用于根据该图像信息,确定置物空间110内的预设摆放范围内,所存放与物品标识图形相匹配的匹配物品的存放情况;其中,预设摆放范围为在置物空间110内,以物品标识图形200的预设长度的延伸范围对应的水平面所形成的延伸空间;物品标识图形200与匹配物品具有预先设定的对应关系。
本发明实施例所述货架系统中,沿货架本体100上一置物空间110的水平边缘的长度方向设置物品标识图形200,该物品标识图形200与一匹配物品具有预先设定的对应关系。在该置物空间110内,以物品标识图形200的延伸范围对应的水平面所形成的延伸空间即形成为该匹配物品的置物空间,用于放置相对应的匹配物品。
其中,不同的物品标识图形200与不同匹配物品具有预先设定的对应关系,当货架本体100上设置有不同的物品标识图形200时,不同物品标识图形200所对应的置物空间110用于放置不同的物品。
可选地,本发明实施例中,可以通过颜色区分不同的物品标识图形200,也即每一物品标识图形200具有一种预设颜色,该预设颜色对应一匹配物品,两者具有预先设定的对应关系,不同颜色的物品标识图形200与不同的匹配物品具有预先设定的对应关系。
举例说明,货架本体100上一置物空间110的水平边缘贴设的物品标识图形200为红色时,该红色的物品标识图形200可以与“矿泉水”具有预先设定的对应关系,在置物空间110内,该红色的物品标识图形200的延伸范围对应的水平面所形成的延伸空间形成为矿泉水的置物空间;货架本体100上一置物空间110的水平边缘贴设的物品标识图形200为绿色时,该绿色的物品标识图形200可以与“杯子”具有预先设定的对应关系,在置物空间110内,该绿色的物品标识图形200的延伸范围对应的水平面所形成的延伸空间形成为杯子的置物空间。
可选地,本发明实施例中,物品标识图形200上可以显示有对应匹配物品的图形,通过所显示的不同形状的图形区分不同的物品。或者,物品标识图形200具有预定形状,形成为摄像头能够识别的标记形状,其中不同形状的物品标识图形200与不同的匹配物品具有预先设定的对应关系。
当然,上述物品标识图形200的形式仅为举例说明,具体并不以此为限,只要各个物品标识图形200能够相互区分,并能够分别与不同的匹配物品相对应即可。
本发明实施例中,可选地,物品标识图形200可以通过电子货架标签(ElectronicShelf Label,ESL)或者显示面板显示。当采用显示面板或ESL显示物品标识图形200时,对于置物空间110内的同一置物区域,可以通过改变物品标识图形200所显示的图形或颜色,与不同的匹配物品相对应,改变该置物区域的功能,以用于放置不同的物品;或者可以改变物品标识图形200沿货架本体100的延伸长度,以改变置物空间110内与该物品标识图形200相对应的匹配物品的存放空间范围。
本发明实施例中,如图1所示,图像采集元件300包括摄像头,能够获取图像信息。具体地,该图像采集元件300在采集图像信息时,可以每间隔预设时长获取一图片,也可以持续进行视频录制。
本发明实施例中,可选地,图像采集元件300设置于货架本体100上,位于所有的置物空间110的上方。
另外,如图1所示,货架本体100包括至少两个由下至上依次排列的置物板120,其中相邻两个置物板120之间的间隔空间形成为置物空间110,物品标识图形200设置于位于置物空间110下方的置物板120的水平边缘上。
可选地,本发明实施例中,货架本体100上,置物空间110的数量为至少两个,每一置物空间110下方的置物板120的水平边缘均设置有物品标识图形200。
另外,可选地,对于处于同一层的置物空间110,下方的置物板120上,沿长度延伸方向,可以设置至少两个不同的物品标识图形200,将上方的置物空间110划分为至少两个区域,用于存放不同种类的物品。可选地,对于同一置物板120上的物品标识图形200,相邻两个物品标识图形200之间具有一定间隔,以保证图像采集元件300能够区分出位于同一层置物空间110内用于存在不同种类物品的区域。
本发明实施例中,可选地,图像采集元件300的设置位置,能够获取到货架本体100上全部的置物空间110的图像信息,且该图像信息中包括每一物品标识图形200。
具体地,图像采集元件300的数量可以为一个,当然也可以根据需要设置两个或更多,只要能够拍摄到货架本体上全部的物品标识图形200即可。
结合图2与图3所示本发明实施例所述货架系统的侧视图和俯视图,本发明实施例中,相邻两个置物板120中,第一置物板121上所设置的物品标识图形200在第二置物板122所在平面的正投影,位于第二置物板122的所在区域之内,其中第一置物板121位于第二置物板122的上方。
如图2和图3所示,每一置物板120安装于竖直设置的架体130上,对于相邻两个置物板120,位于下方的第二置物板122相较于位于上方的第一置物板121向远离架体130的方向突出设置,形成为由上至下,各置物板120依次相较于上层的置物板120突出的结构。
采用上述的设置方式,每一置物板120相较于上层的置物板120延伸突出的长度,保证设置于货架本体100上的图像采集元件300能够采集到每一置物板120上的物品标识图形200。可选地,设置于置物板120的水平边缘的物品标识图形200相较于置物板120为突出设置,以保证图像采集元件300能够获取到物品标识图形200的图像。
基于上述设置结构,每一货架本体100上可以仅设置一个图像采集元件300,该图像采集元件300的图像采集范围包括货架本体100上的每一物品标识图形200。
采用上述方式,当设置一个图像采集元件300时,货架本体100的置物空间110沿物品标识图形200设置方向上的宽度,应该与图像采集元件300的图像采集范围对应。若置物空间110在沿物品标识图形200设置方向上的宽度大于图像采集元件300的图像采集范围,可以考虑沿物品标识图形200的设置方向,间隔设置至少两个的图像采集元件300,以能够获取到货架本体100上全部物品标识图形200的图像。
可选地,本发明实施例中,如图2和图3所示,置物板120用于放置物品的承载面相较于水平面向下倾斜预设角度,其中该预设角度小于或等于45度。采用该设置方式,置物板120放置物品的承载面形成为倾斜状态,使得当置物板120上的一物品被取走后,其他物品会随着置物板120的倾斜向靠近物品标识图形200的一端下移,使得图像采集元件300通过获取物品标识图形200的图像,同时能够获取到相应的置物空间内所存放的物品的图像。
可选地,如图2所示,整个的置物板120形成为相较于水平面向下倾斜的结构。
本发明实施例中,可选地,如图1所示,每一置物板120通过一调节结构140安装于架体130上,利用该调节结构140,置物板120在架体130上的高度和承载面相较于水平面的倾斜角度均可调。
具体地,本领域技术人员应该能够了解实现上述调节功能的调节结构的具体实施方式,该调节结构并非为本发明的研究重点,在此不作详细说明。
本发明实施例所述货架系统中,处理器(图中未显示)与图像采集元件300连接,用于根据图像采集元件300所采集的图像信息,确定置物空间110的预设摆放范围内,所存放与物品标识图形200相匹配的匹配物品的存放情况。
其中,该预设范围为在置物空间110内,以物品标识图形200的预设长度的延伸范围对应的水平面所形成的延伸空间。当该图像采集元件300所采集的图像信息中包括一个物品标识图形200时,处理器能够分析确定与该物品标识图形200相对应的预设摆放范围内的物品存放情况;当该图像采集元件300所采集的图像信息中包括多个物品标识图形200时,处理器能够分析确定与图像信息中每一物品标识图形200相对应的预设摆放范围内的物品存放情况。
具体地,处理器可以用于:
根据图像信息,判断置物空间110内的预设摆放范围内,是否存放有与物品标识图形200相对应的匹配物品所不同的物品;当判断存在与匹配物品不同的物品时,则确定所述置物空间内存在放错物品情况。
根据本发明实施例所述货架系统,由于每一种物品标识图形200与一种匹配物品具有预先设定的对应关系,通过预先获取物品标识图形200与匹配物品之间的对应关系,并提取图像信息内物品标识图形200相对应的预设摆放范围内物品的图像,确定该预设摆放范围内的物品是否为匹配物品,当确定并非为匹配物品时,则确定与该物品标识图形200相对应的预设摆放范围内存在放错物品的情况。
图像采集元件300所获取的图像信息包括置物空间110内存放物品的图像和物品标识图形的图像。举例说明,当与一物品标识图形200具有预先设定的对应关系的匹配物品为“矿泉水”时,提取图像采集元件300所采集的图像信息,判断与该物品标识图形200相对应的预设摆放范围内是否存在非矿泉水的物品,当存在时,则确定与该物品标识图形200相对应的预设摆放范围内存在放错物品的情况。当不存在时,则确定与该物品标识图形200相对应的预设摆放范围内不存在放错物品的情况。
根据本发明实施例所述货架系统,由于置物板120放置物品的承载面形成为倾斜状态,使得当置物板120上的一物品被取走后,其他物品会随着置物板120的倾斜向靠近物品标识图形200的一端下移,而且置物板120上的物品依据承载面的倾斜状态依次增高,使得图像采集元件300采集置物空间的图像信息时,能够获取到绝大部分物品的图像,从而能够准确分析出置物空间内是否存在放错物品的情况。
可选地,所述处理器还用于:
根据所述图像信息,判断有人员从所述货架本体上取放物品,且取放过程中,位于所述第一置物板上的物品标识图形和所述第一置物板下方的所述物品标识图形被遮挡,位于所述第一置物板上方的所述物品标识图形未被遮挡时,则确定所取放物品为与所述第一置物板所设置的所述物品标识图形相匹配的匹配物品。
具体地,结合图2和图3所示,当由上至下,各置物板120依次相较于上层的置物板120突出设置,且每一层的置物空间110上的物品标识图形200设置于置物空间110下方的置物板120上,从货架本体100上取放物品时,在取放过程中,位于所取放的置物空间110下方的各置物板120上的物品标识图形200会被遮挡,位于所取放的置物空间110上方的各置物板120上的物品标识图形200不会被遮挡。因此通过分析图像信息,确定货架本体100上未被遮挡的物品标识图形200和被遮挡的物品标识图形200,分析获得第一置物板,确定该第一置物板上的物品标识图形200和位于该第一置物板下方的物品标识图形200被遮挡,位于第一置物板上方的物品标识图形200未被遮挡时,则确定此次物品取放过程为取放的是该第一置物板上方的置物空间110内的物品,也即与该第一置物板上所设置的物品标识图形相匹配的匹配物品,从而确定出此次物品取放过程所取放的物品。
可以理解的是,在取放过程中,图像采集元件300间隔预设时长获取图像信息,通过分析一段时长内所采集的图像信息,依据多帧图像内的图像变化,即能够确定出每一物品取放过程是存放物品过程还是取出物品过程。
另外,本发明实施例所述货架系统中,当货架本体100上设置至少两个图像采集元件300,且至少两个图像采集元件300在货架本体100的顶部沿物品标识图形200的延伸方向设置时,为保证物品取放过程对所取放物品的准确识别,每一图像采集元件300可以同时获取相邻的图像采集元件300所采集的图像信息,用于辅助判断取放过程所取放的物品。
例如,当一人双手同时取放不同层的置物空间110内的物品时,通过获取相邻的图像采集元件300所采集的图像信息,能够判断出此次取放过程为双手同时取放,且辅助分析出每只手所取放物品的置物空间。
可选地,所述处理器还用于间隔预设时长统计每一所述匹配物品被拿取的次数和被放置的次数,根据被拿取的次数和被放置的次数,统计每一所述匹配物品当前所存放物品的数量。
根据以上,由于处理器能够准确分析出每次取放过程所取放的物品,以及每次取放过程是存放物品过程还是取出物品过程,因此处理器还能够进一步地间隔预设时长统计放置于置物空间的预设摆放范围内的匹配物品被拿取的次数和被放置的次数,并根据被拿取的次数和被放置的次数,当掌握匹配物品的初始放置数量时,能够统计每一匹配物品当前所存放物品的数量,也即剩余物品的数量。
可选地,所述处理器还用于:
根据所述图像信息,判断所述置物空间的所述预设摆放范围内是否存在空置区域;当判断所述预设摆放范围内存在空置区域时,则确定所述预设摆放范围内的所述匹配物品存在缺货的情况。
本发明实施例所述货架系统,由于处理器能够根据图像采集元件300所采集的图像信息,确定置物空间110内与每一物品标识图形相对应的预设摆放范围内应该放置的匹配物品,因此处理器当根据图像信息确定该预设摆放范围内存在空置区域时,能够判断出该预设摆放范围内存在与物品标识图形相对应的匹配物品缺货的情况。
可选地,当判断与一物品标识图形相对应的匹配物品缺货时,处理器发出警示信息,以提醒工作人员及时补货。
本发明实施例所述货架系统,如图4所示,可以包括至少两个依次排列的货架本体100,每一货架本体100包括位于同一高度的置物空间110,且相邻两个货架本体100的位于同一高度的置物空间相互连通;
其中,对应每一货架本体100分别设置有一个图像采集元件300,每一图像采集元件300用于获取相对应货架本体100上置物空间110的图像信息,还用于获取与相对应货架本体100相邻的货架本体100上置物空间110的图像信息;
所述处理器具体用于根据相邻两个图像采集元件300所采集的图像信息,确定置物空间110内的预设摆放范围内,所存放与物品标识图形200相匹配的匹配物品的存放情况。
具体地,根据以上,处理器可以根据相邻两个图像采集元件300所采集的图像信息,判断置物空间110内与每一物品标识图形200相对应的预设摆放范围内是否存在放错物品的情况、是否存在缺货的情况和/或统计该预设摆放范围内物品的取放次数等。
进一步地,根据图1,本发明实施例所述货架系统中,所设置的处理器可以放置于货架本体100的底座111,以类似抽屉类结构存放。
根据以上,本发明实施例所述货架系统,在货架本体上设置与物品具有一一对应关系的物品标识图形,该物品标识图形在货架本体上对应置物空间内的预设摆放范围,形成为与物品标识图形相对应匹配物品的放置空间;通过图像采集元件实时采集包括物品标识图形的置物空间的图像信息,处理器对图像采集元件所采集的图像信息进行关键帧提取以及分析,能够确定出置物空间内与物品标识图形相对应的预设摆放范围内是否存在放错物品和/或缺货的情况;进一步地,由于每一置物板相较于上层的置物板延伸突出,以保证设置于货架本体上的图像采集元件能够采集到每一置物板上的物品标识图形的图像;另外由于置物板的承载面为倾斜状态,使得当置物板上的一物品被取走后,其他物品会随着置物板的倾斜向靠近物品标识图形的一端下移,使得图像采集元件通过获取物品标识图形的图像,同时能够获取到相应的置物空间内所存放的物品的图像。基于该方式,处理器能够根据图像采集元件所采集的图像信息,统计置物空间内与物品标识图形相对应的预设摆放范围内的物品的取放次数,以及进一步统计剩余物品的数量。
采用上述方式,利用物品标识图形的设置,无需设置过多的摄像头,能够通过简单的结构准确地获取货架上物品的存放情况,解决现有技术的智能货架为拍摄获取货架上的物品,需要安装多个摄像头或者在特殊位置安装摄像头,导致线路复杂、容易遮挡,无法通过简单的结构准确地获取货架上物品情况的问题。
以上所述的是本发明的优选实施方式,应当指出对于本技术领域的普通人员来说,在不脱离本发明所述原理前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (13)

1.一种货架系统,其特征在于,包括:
货架本体,包括至少一置物空间;其中在所述货架本体上,沿所述置物空间的水平边缘设置有物品标识图形,且所述物品标识图形沿所述水平边缘的长度方向延伸预设长度;
图像采集元件,用于获取所述置物空间的图像信息,其中所述图像信息内包括所述物品标识图形;
处理器,用于根据所述图像信息,确定所述置物空间内的预设摆放范围内,所存放与所述物品标识图形相匹配的匹配物品的存放情况;其中,所述预设摆放范围为在所述置物空间内,以所述物品标识图形的所述预设长度的延伸范围对应的水平面所形成的延伸空间;所述物品标识图形与所述匹配物品具有预先设定的对应关系;
其中,所述货架本体包括至少两个由下至上依次排列的置物板,所述置物板用于放置物品的承载面相较于水平面向下倾斜预设角度,其中相邻两个所述置物板之间的间隔空间形成为所述置物空间,所述物品标识图形设置于位于所述置物空间下方的所述置物板的水平边缘上;所述置物空间的数量为至少两个,每一所述置物空间下方的所述置物板的水平边缘均设置有所述物品标识图形;相邻两个所述置物板中,第一置物板上所设置的所述物品标识图形在第二置物板所在平面的正投影,位于所述第二置物板的所在区域之内,其中所述第一置物板位于所述第二置物板的上方。
2.根据权利要求1所述的货架系统,其特征在于,所述处理器还用于:
根据所述图像信息,判断所述置物空间内的预设摆放范围内,是否存放有与所述匹配物品所不同的物品;当判断存在与所述匹配物品不同的物品时,则确定所述置物空间内存在放错物品情况。
3.根据权利要求1所述的货架系统,其特征在于,所述图像采集元件设置于所述货架本体上,且位于所有的所述置物空间的上方。
4.根据权利要求1所述的货架系统,其特征在于,
所述图像采集元件能够获取包括全部的所述置物空间的图像信息,且所述图像信息中包括每一所述物品标识图形。
5.根据权利要求1所述的货架系统,其特征在于,所述预设角度小于或等于45度。
6.根据权利要求1所述的货架系统,其特征在于,所述处理器具体用于:
根据所述图像信息,判断有人员从所述货架本体上取放物品,且取放过程中,位于所述第一置物板上的物品标识图形和所述第一置物板下方的所述物品标识图形被遮挡,位于所述第一置物板上方的所述物品标识图形未被遮挡时,则确定所取放物品为与所述第一置物板所设置的所述物品标识图形相匹配的匹配物品。
7.根据权利要求1所述的货架系统,其特征在于,所述处理器还用于间隔预设时长统计每一所述匹配物品被拿取的次数和被放置的次数,根据被拿取的次数和被放置的次数,统计每一所述匹配物品当前所存放物品的数量。
8.根据权利要求1所述的货架系统,其特征在于,所述处理器还用于:
根据所述图像信息,判断所述置物空间的所述预设摆放范围内是否存在空置区域;当判断所述预设摆放范围内存在空置区域时,则确定所述预设摆放范围内的所述匹配物品存在缺货的情况。
9.根据权利要求1所述的货架系统,其特征在于,在所述货架本体上,沿同一所述置物空间的水平边缘设置有两个不同的物品标识图形,不同的物品标识图形与不同的匹配物品具有预先设定的对应关系;
其中,所述图像采集元件所获取的所述图像信息内包括所述两个不同的物品标识图形。
10.根据权利要求1所述的货架系统,其特征在于,所述货架系统包括至少两个依次排列的所述货架本体,每一所述货架本体包括位于同一高度的所述置物空间,且相邻两个所述货架本体的位于同一高度的所述置物空间相互连通;
其中,对应每一所述货架本体分别设置有一个所述图像采集元件,每一所述图像采集元件用于获取相对应所述货架本体上所述置物空间的图像信息,还用于获取与相对应所述货架本体相邻的所述货架本体上所述置物空间的图像信息;
所述处理器具体用于根据相邻两个所述图像采集元件所采集的图像信息,确定所述置物空间内的预设摆放范围内,所存放与所述物品标识图形相匹配的匹配物品的存放情况。
11.根据权利要求1所述的货架系统,其特征在于,所述物品标识图形具有预设颜色,其中不同颜色的所述物品标识图形与不同的所述匹配物品具有预先设定的对应关系。
12.根据权利要求1所述的货架系统,其特征在于,所述物品标识图形通过电子货架标签ESL或者显示面板显示。
13.根据权利要求5所述的货架系统,其特征在于,所述货架本体包括竖直设置的架体,其中每一所述置物板通过调节结构安装于所述架体上;通过所述调节结构,所述置物板的高度和承载面相较于水平面的倾斜角度可调。
CN201811107719.XA 2018-09-21 2018-09-21 一种货架系统 Active CN109330284B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201811107719.XA CN109330284B (zh) 2018-09-21 2018-09-21 一种货架系统
US16/375,832 US11071399B2 (en) 2018-09-21 2019-04-04 Shelf system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811107719.XA CN109330284B (zh) 2018-09-21 2018-09-21 一种货架系统

Publications (2)

Publication Number Publication Date
CN109330284A CN109330284A (zh) 2019-02-15
CN109330284B true CN109330284B (zh) 2020-08-11

Family

ID=65306327

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811107719.XA Active CN109330284B (zh) 2018-09-21 2018-09-21 一种货架系统

Country Status (2)

Country Link
US (1) US11071399B2 (zh)
CN (1) CN109330284B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3944221A4 (en) 2019-03-21 2022-11-02 Boe Technology Group Co., Ltd. METHOD AND DEVICE FOR DISPLAYING PRICE TAG INFORMATION, AND SHELF SYSTEM
CN109961101B (zh) * 2019-03-29 2021-04-27 京东方科技集团股份有限公司 货架状态确定方法及装置、电子设备、存储介质
CN109977886B (zh) * 2019-03-29 2021-03-09 京东方科技集团股份有限公司 货架空置率计算方法及装置、电子设备、存储介质
USD961971S1 (en) * 2019-04-10 2022-08-30 Target Brands, Inc. Retail display fixture
CN112052701B (zh) * 2019-06-06 2022-08-05 杭州海康威视数字技术股份有限公司 物品取放检测系统、方法及装置
CN111768137A (zh) * 2019-06-17 2020-10-13 北京京东尚科信息技术有限公司 一种物品上架的方法及装置
EP4016384A4 (en) * 2019-08-16 2023-05-31 Hanshow Technology Co., Ltd. METHOD, DEVICE AND SYSTEM FOR IDENTIFYING ARTICLES ON A SHELF
USD1010365S1 (en) * 2020-02-10 2024-01-09 Edible Garden Ag Incorporated Plant display apparatus
CN111667530A (zh) 2020-06-24 2020-09-15 京东方科技集团股份有限公司 确定货架展位状态的方法和装置、货架
USD998389S1 (en) * 2020-09-24 2023-09-12 Michael D. Hornbacher Freestanding ladder storage rack
CN113158876A (zh) * 2021-04-16 2021-07-23 青岛海尔电冰箱有限公司 冰箱内物品信息识别方法、冰箱和计算机存储介质
US11887332B2 (en) * 2021-06-29 2024-01-30 7-Eleven, Inc. Item identification using digital image processing

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2350988A4 (en) * 2008-10-22 2015-11-18 Newzoom Inc SALES STORE INVENTORY MANAGEMENT AND REPORTING SYSTEM
CN105190655B (zh) * 2013-03-04 2018-05-18 日本电气株式会社 物品管理系统、信息处理设备及其控制方法和控制程序
JP6202215B2 (ja) * 2014-09-30 2017-09-27 日本電気株式会社 情報処理装置、棚札管理システム、制御方法、及びプログラム
RU2722857C2 (ru) * 2015-05-04 2020-06-04 САНРАЙЗ Ар ЭНД Ди ХОЛДИНГЗ, ЭлЭлСи Системы и способы для управления полочными блоками отображения и для графического представления информации на полочных блоках отображения
US11593755B2 (en) * 2016-05-19 2023-02-28 Simbe Robotics, Inc. Method for stock keeping in a store with fixed cameras
JP6981002B2 (ja) * 2016-12-20 2021-12-15 大日本印刷株式会社 陳列棚、情報処理装置、プログラム及び陳列棚システム
CN107093051A (zh) * 2017-06-20 2017-08-25 江苏方天电力技术有限公司 一种电能表自识别存储装置
US20190149725A1 (en) * 2017-09-06 2019-05-16 Trax Technologies Solutions Pte Ltd. Using augmented reality for image capturing a retail unit
CN108492482B (zh) * 2017-12-18 2020-11-03 上海云拿智能科技有限公司 货品监控系统及监控方法
EP3738073A4 (en) * 2018-01-10 2021-10-06 Trax Technology Solutions Pte Ltd. AUTOMATIC MONITORING OF RETAIL PRODUCTS BASED ON CAPTURED IMAGES
US10628660B2 (en) * 2018-01-10 2020-04-21 Trax Technology Solutions Pte Ltd. Withholding notifications due to temporary misplaced products
CN108198052A (zh) * 2018-03-02 2018-06-22 北京京东尚科信息技术有限公司 用户选购商品识别方法、装置以及智能货架系统
CN108416403B (zh) * 2018-03-08 2021-05-04 上海扩博智能技术有限公司 商品与标签的自动关联方法、系统、设备及存储介质

Also Published As

Publication number Publication date
US11071399B2 (en) 2021-07-27
US20200093288A1 (en) 2020-03-26
CN109330284A (zh) 2019-02-15

Similar Documents

Publication Publication Date Title
CN109330284B (zh) 一种货架系统
JP7136284B2 (ja) 情報処理システム、情報処理方法及びプログラム
JP6755292B2 (ja) ターゲットオブジェクトとアイテムとの関連付け方法、装置、及びシステム
EP3154008B1 (en) Determination of a product position along a fixture
US20180114183A1 (en) Stock Level Determination
US20130134178A1 (en) Vending machine with automated detection of product position
EP3944221A1 (en) Price tag information display method and device, and shelf system
US10929629B2 (en) Positional relationship detection device and positional relationship detection system
CN108550002B (zh) 一种银行贵金属智能盘库系统及方法
CN109712315B (zh) 一种基于双摄像头的自动售卖机货物掉落检测方法
CN108447056A (zh) 基于几何特征聚类划分的配电柜圆形压板状态识别方法
KR200495293Y1 (ko) 부피 및 중량을 측정하는 스마트 전자 저울
WO2022217928A1 (zh) 冰箱内物品信息标识方法、冰箱和计算机存储介质
US11756213B2 (en) Object detection based on wrist-area region-of-interest
CN102929438A (zh) 光学式触控装置及其检测触控点坐标的方法
CN109573526A (zh) 搬运控制方法及搬运机器人
CN112823130A (zh) 用于存储至少一个存储产品载体的存储搁架以及用于检测存储搁架的存储库存的方法
CN110889317B (zh) 操作辅助装置
US11893759B2 (en) Homography error correction using a disparity mapping
JP2024036380A (ja) 情報処理装置、情報処理方法、プログラム
CN109801007A (zh) 一种货架及其物品跟踪方法
CN110326032A (zh) 图像识别系统、图像识别方法和存储介质
CN106248058A (zh) 一种对于仓储运输工具的定位方法、装置及系统
JP2020144830A (ja) 作業分析装置及び作業分析プログラム
JP6560067B2 (ja) 支援システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant