CN111713922A - 冷藏销售柜 - Google Patents

冷藏销售柜 Download PDF

Info

Publication number
CN111713922A
CN111713922A CN202010195766.5A CN202010195766A CN111713922A CN 111713922 A CN111713922 A CN 111713922A CN 202010195766 A CN202010195766 A CN 202010195766A CN 111713922 A CN111713922 A CN 111713922A
Authority
CN
China
Prior art keywords
refrigerated sales
pointing device
transparent door
cameras
cabinet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010195766.5A
Other languages
English (en)
Other versions
CN111713922B (zh
Inventor
S.M.奥贾努
W.迪克逊
M.范德林登
C.瓦莱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Carrier Corp
Original Assignee
Carrier Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Carrier Corp filed Critical Carrier Corp
Publication of CN111713922A publication Critical patent/CN111713922A/zh
Application granted granted Critical
Publication of CN111713922B publication Critical patent/CN111713922B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47F—SPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F3/00—Show cases or show cabinets
    • A47F3/04—Show cases or show cabinets air-conditioned, refrigerated
    • A47F3/0404—Cases or cabinets of the closed type
    • A47F3/0426—Details
    • A47F3/0434—Glass or transparent panels
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47F—SPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F11/00—Arrangements in shop windows, shop floors or show cases
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47F—SPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F3/00—Show cases or show cabinets
    • A47F3/04—Show cases or show cabinets air-conditioned, refrigerated
    • A47F3/0478—Control or safety arrangements
    • E—FIXED CONSTRUCTIONS
    • E06—DOORS, WINDOWS, SHUTTERS, OR ROLLER BLINDS IN GENERAL; LADDERS
    • E06B—FIXED OR MOVABLE CLOSURES FOR OPENINGS IN BUILDINGS, VEHICLES, FENCES OR LIKE ENCLOSURES IN GENERAL, e.g. DOORS, WINDOWS, BLINDS, GATES
    • E06B7/00—Special arrangements or measures in connection with doors or windows
    • E06B7/28—Other arrangements on doors or windows, e.g. door-plates, windows adapted to carry plants, hooks for window cleaners
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00—Arrangement or mounting of control or safety devices
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00—Means for sensing or measuring; Sensors therefor
    • F25D2700/04—Sensors detecting the presence of a person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G06T2207/10012—Stereo images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30204—Marker

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Thermal Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Structural Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Civil Engineering (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

根据本发明的示例性实施方案的冷藏销售柜包括:冷藏销售空间:控制单元；和至少两个相机；其中所述控制单元包括存储器或连接到存储器，每个数据集包括相应商品在所述冷藏销售空间内的位置和这些商品的商品规格；以及控制单元被配置为通过对由所述至少两个相机捕获的至少两个图片的图像处理和/或所述冷藏销售柜中或周围的位置标记来确定站立在透明门前面的所述观察区域中的人员的指向装置的位置和方向两者；计算所述指向装置所指向的在所述冷藏销售空间内的目标位置；将位于所述冷藏销售空间内的该目标位置的商品的数据集与所计算出的目标位置相关联；以及将该数据集的商品规格传送到显示装置以显示所述商品规格。

Description

冷藏销售柜
本发明涉及冷藏销售柜。
超市的冷藏销售柜通常在其前部配备有门，或为滑动门或为铰链门，这些门由打开和关闭它们的顾客操作，以便从冷藏销售空间中取出商品以及如果需要的话，将其放回到冷藏销售空间中。
为了获得特定商品的信息和规格，顾客必须打开门并将其从冷藏销售空间中取出。这使得商品规格的收集变得复杂并且耗时。
此外，在这种打开期间，冷空气从冷藏销售空间流出，这造成了能量浪费。
因此本发明的目的是提供一种冷藏销售柜，所述冷藏销售柜更加节能并且能够更快更容易地获取存储在其中的商品的规格。
根据本发明的示例性实施方案的冷藏销售柜包括：冷藏销售空间，待出售的不同商品在所述冷藏销售空间中位于不同的位置；控制单元；和至少两个相机，其定位成彼此间隔开并被配置为捕获冷藏销售柜前面的观察区域的图片。
控制单元包括存储器或连接到存储器，其中存储器包括存储在冷藏销售空间中的不同商品的数据集，每个数据集包括相应商品在冷藏销售空间内的位置和这些商品的商品规格。
控制单元被配置为：通过对由至少两个相机捕获的至少两个图片的图像处理来确定站立在冷藏销售柜前面的观察区域中的人员的指向装置的位置和方向两者；计算指向装置所指向的在冷藏销售空间内的目标位置；将位于冷藏销售空间内的该目标位置的商品的数据集与计算出的目标位置相关联；以及将相关联的数据集的商品的规格传送到显示装置以显示商品规格。
这样的冷藏销售柜是节能的，因为顾客不必为了获取特定商品的规格而通过阅读包装上的文本来从冷藏销售空间中取出商品。替代地，顾客只是简单地用他们的指向装置、特别是用他们的手指指向冷藏销售空间内的特定感兴趣的商品。然后，控制单元通过对由至少两个相机捕获的至少两个图片的图像支配来确定站立在冷藏销售柜前面的观察区域中的该人员的指向装置的位置和方向两者。控制单元计算指向装置所指向的在冷藏销售空间内的目标位置，所述控制单元将位于冷藏销售空间内的该目标位置的商品的数据集与计算出的目标位置相关联，并且所述控制单元将该数据集的商品的规格传送到显示装置以显示商品规格。
这些商品规格可以显示在例如冷藏销售柜的透明门上或可以将这些商品规格传送到顾客的移动装置上、特别是智能电话或平板电脑上。
因此，可以更容易、更快速地获得期望的商品规格，并且可以节省能源，尤其是在冷藏销售柜包括至少一个透明门的情况下，因为不必为了获得该商品规格而打开门，这大大减少了从冷藏销售空间流出的冷空气的量。
要移位的商品规格包括价格、营养信息、有效期、配方、与同类产品的比较、温度或供应链历史记录等。
数据集可以在控制器的存储器中是静态的，或者通过使用识别产品的技术(包括扫描代码或视频分析)进行动态更新。
作为另外的优点，根据本发明的示例性实施方案的冷藏销售柜被顾客视为互动的并且提供个性化的顾客体验。
根据本发明的第一实施方案，冷藏销售柜还包括至少一个透明门，并且至少两个相机被配置为捕获至少一个透明门前面的观察区域的图片。
根据本发明的另一实施方案，至少两个相机位于冷藏销售柜的柜体的顶板部分的前部、特别是在冷藏销售柜的至少一个透明门的左边缘和右边缘。至少两个相机可以被配置为使得它们的视域范围在至少一个透明门前面重叠；并且至少两个相机的视域范围重叠的区域形成观察区域。观察区域可以在至少一个透明门的基本上整个宽度上延伸。
这样的实施方案在图像识别(例如，确定是否存在指向装置，特别是手指或特意指向某些商品的类似对象)以及在确定位于至少一个透明门前面的任何位置的人员的指向装置(只要该指向装置在观察区域内即可)的位置和方向两者方面特别有效。
根据本发明的另外的实施方案，指向装置是站立在冷藏销售柜前面、特别是在至少一个透明门前面的观察区域中的人员的手指、手或拳头或另一对象。
根据本发明的另外的实施方案，控制单元被配置为：通过对由至少两个相机从不同位置拍摄的至少两个图片的图像处理来检测指向装置；以及可选地，通过图像处理去除人员的指向装置和其他部位的背景；以及确定在至少一个透明门前面的观察区域中的指向装置的位置，以便确定站立在至少一个透明门前面的观察区域中的人员的指向装置的位置。
为了确定在至少一个透明门前面的观察区域中的指向装置的位置，可以使用三角测量的原理。两个相机彼此之间的距离是已知的，并且可以计算出两个相机所位于的竖直平面与包括指向装置的位置的竖直平面之间的角度。根据这些值，可以确定在观察区域中的指向装置的位置。
该实施方案提供了有效的指向装置识别，并提供了在至少一个透明门前面的观察区域内的指向装置的位置的精确确定。
根据本发明的另外的实施方案，冷藏销售柜还包括冷藏销售柜周围的标记，以提高对指向装置的位置和方向的确定的准确性。
根据本发明的另外的实施方案，其中控制单元被配置为确定指向装置的方向线，特别是针对指向装置的至少两个不同点使用三角测量的原理，以便确定站立在至少一个透明门前面的观察区域中的人员的指向装置的方向。利用该实施方案，可以精确地确定指向装置的方向。
根据本发明的另外的实施方案，控制单元被配置为将指向装置的方向线从确定的指向装置位置延伸到冷藏销售空间，特别是延伸到延伸穿过冷藏销售空间的前部的竖直平面，以便计算指向装置所指向的在冷藏销售空间内的目标位置。利用该实施方案，可以可靠地计算出指向装置所指向的在冷藏销售空间内的目标位置。
根据本发明的另外的实施方案，至少两个相机被配置为一旦有人员进入观察区域，就捕获在至少一个透明门前面的观察区域的图片。
根据本发明的另外的实施方案，至少两个相机被配置为连续捕获在至少一个透明门前面的观察区域的图片。
根据本发明的另外的实施方案，控制单元被配置为通过对由至少两个相机捕获一系列的至少两个图片的图像处理来连续确定站立在透明门前面的观察区域中的人员的指向装置的位置和方向两者；并且在控制单元确定的指向装置的位置和方向在预定时间段内保持不变的情况下，则执行以下步骤中的一个或多个步骤：计算指向装置所指向的在冷藏销售空间内的目标位置；将位于冷藏销售空间内的该目标位置的商品的数据集与计算出的目标位置相关联；以及将该数据集的商品规格传送到显示装置以显示商品规格。
预定时间段可以是但不限于1秒至8秒、特别是2秒至5秒的范围。通过该实施方案，确保了仅在指向装置已经朝向这些产品指向达这样的预定时间段的情况下才显示站立在冷藏销售柜前面的人员的指向装置所指向的特定商品的商品规格。换句话说，顾客必须在预定的时间段内(例如，至少1秒或2秒)在不移动他的指向装置的情况下指向对产品规格感兴趣的产品。
根据本发明的另外的实施方案，为冷藏销售柜的横向相邻部分提供两对或更多对相机。提供第一对相机并且其被配置为捕获至少一个透明门前面的第一观察区域的图片；提供第二对相机并且其被配置为捕获至少一个透明门前面的与第一观察区域横向相邻的第二观察区域的图片。
本发明还可以用在任何柜中，并且不限于冷藏销售柜。申请人保留对不包括冷藏限制的柜提出独立权利要求的权利。
该实施方案适用于宽的冷藏销售柜。为冷藏销售柜的宽度的横向相邻部分提供两对或更多对相机。对于每个这样的相机对，适用上述特征、实施方案和优点，为简洁起见，在此不再赘述。
根据本发明的另外的实施方案，控制单元被配置为监测站立在透明门前面的观察区域中的人员的指向装置、特别是手指已经指向了哪些产品的次数。通过这样的实施方案，可以收集关于人们行为的信息，并且可以使用这样的信息来改善产品在冷藏销售空间内的放置。这允许改进和有针对性的商品放置以及改进和有针对性的销售机会。
根据本发明的另外的实施方案，显示装置形成为在冷藏销售柜的前侧、特别是在透明门处的显示器，或形成为投影仪，所述投影仪被配置为将商品规格投影在冷藏销售柜的前侧上、特别是在透明门上。控制单元还可以被配置为使显示器或投影仪显示该数据集的商品规格。商品的商品规格可以包括价格、营养信息、有效期、配方、与同类产品的比较、温度或供应链历史记录等。
通过该实施方案，商品规格直接显示在冷藏销售柜的前侧、特别是在其透明门处，这是特别用户友好的。
本发明的另外的示例性实施方案涉及如本文所述的冷藏销售柜和移动装置、特别是智能电话或平板电脑的设备。冷藏销售柜的控制单元还被配置为使站立在至少一个透明门前面的观察区域中的人员的移动装置的显示器显示相应商品的商品规格。
在这样的设备中，处于站立在透明门点前面的观察区域中的人员的指向装置所指向的目标位置中的商品的商品规格显示在移动装置的显示器上。
当柜前面有多个人员时，可以使用图像识别算法来确保人员、其手指和装置之间的连接与同一个人员相关。
在另外的实施方案中，所述设备、特别是控制单元还包括视频分析算法，以确定哪个移动装置对应于指向包含了产品的所在位置的人员。
在另外的实施方案中，冷藏销售柜的控制单元还被配置为使用移动装置网络或云计算机系统将该数据集的商品规格传送到站立在至少一个透明门前面的观察区域中的人员的移动装置。
在下文中，关于附图更详细地描述了根据本发明的示例性实施方案的冷藏销售柜。
图1示出了冷藏销售柜2的透视图，其中其两个门8处于其各自的关闭位置，其中两对相机14、16和18、20位于冷藏销售柜2的顶板的前端的位置处，并且其中顾客站立在冷藏销售柜2前面并且用其手指24指向冷藏销售空间内的特定产品；
图2示出了图1的冷藏销售柜2和左相机14的侧视图，其中站立在透明门8前面的人员的手指24位于相机的观察区域22中；
图3示出了图1和图2的冷藏销售柜2和两对相机14、16和18、20的俯视图，其中站立在左透明门8前面的人员的手指24位于左对相机14、16的观察区域22中；
图4示出了图1的冷藏销售柜2，其中站立在冷藏销售柜前面的顾客的手指24所指向的商品的商品规格显示在显示器10上；以及
图5示出了图1的冷藏销售柜2，其中站立在冷藏销售柜前面的顾客的手指24所指向的商品的商品规格显示在移动装置的显示器上。
在图1至图3的示例性非限制性实施方案中，冷藏销售柜2包括柜体4，所述柜体4具有底部、后壁、顶棚/顶板部分以及侧壁。在柜体4内，形成有冷藏销售空间，冷藏商品存储和展示在所述冷藏销售空间中。冷藏销售柜2包括压缩循环系统的至少一个蒸发器和与其相关联的蒸气膨胀装置。制冷剂流过该蒸气压缩循环系统，除了膨胀装置和蒸发器外，所述蒸气压缩循环系统还包括压缩机单元、冷凝器/液化器和使制冷剂循环通过其中的制冷剂导管。至少一个蒸发器可以配备有蒸发器风扇，所述蒸发器风扇被配置为用于在蒸发器的盘管上方吹送或吸入空气。
冷藏销售柜2的前侧配备有两个门8，在附图的实施方案中，所述两个门8形成为铰接门/枢转门，但是也可以形成为滑动门。在图1至图3中，冷藏销售柜2包括柜体4，所述柜体4具有底部、后壁、顶棚/顶板部分以及侧壁。在柜体4内，形成有冷藏销售空间，冷藏商品存储和展示在所述冷藏销售空间中。冷藏销售柜2包括压缩循环系统的至少一个蒸发器和与其相关联的蒸气膨胀装置。制冷剂流过该蒸气压缩循环系统，除了膨胀装置和蒸发器外，所述蒸气压缩循环系统还包括压缩机单元、冷凝器/液化器和使制冷剂循环的制冷剂导管。至少一个蒸发器可以配备有蒸发器风扇，所述蒸发器风扇被配置为用于在蒸发器的盘管上方吹送或吸入空气。
冷藏销售柜2的前侧配备有两个门8，在附图的实施方案中，所述两个门8形成为铰接门/枢转门，但是也可以形成为滑动门。可以借助于把手9手动地或者通过至少一个门操作马达(未显示)自动地在关闭位置和打开位置之间操作门。
冷藏销售柜2包括例如两个门8，即左门8和右门8。门可以是透明的。当然，冷藏销售柜可以配备有任意合适数量的门。
在冷藏销售柜2内存在有冷藏销售空间，待出售的不同商品在所述冷藏销售空间中存储在不同的位置，特别是由多个架子支撑。
在示例性非限制性实施方案中，两对相机14、16和18、20位于柜体4的顶板部分的前端。第一左相机对中的左相机14布置在与左透明门8的左边缘相对应的宽度的位置处，第一相机对的右相机16位于与左透明门8的右边缘相对应的宽度的位置处。同样地，第二右相机对的左相机18位于与右透明门8的左边缘相对应的宽度的位置处，第二相机对的右相机20被布置在与右透明门8的右边缘相对应的宽度的位置处。
应当理解，仅提供两个相机/一对相机(例如，14和16)就足以确定站立在冷藏销售柜2前面、特别是透明门8前面的观察区域22中的人员的手指24的位置和方向两者。仅利用两个相机14和16，就可以检测到手指24的方向和绝对初始位置(例如，手指的x位置、y位置、z位置)，特别是相对于冷藏销售柜2的某个固定点。
可以提供多于一对的相机(例如14+16和18+20)，这取决于冷藏销售柜2的长度和观察区域/视野。
可以另外在冷藏销售柜2中或其处提供某些标记，并且其可以另外用于识别手指24的x位置、y位置、z位置。
在该示例中，当将相机14+16和18+20放置在冷藏销售柜2的顶部时，可能另外需要测量手指24的高度。这可以通过不同的方式来完成。一种方式是提供一些离散的标记并具有某种图像识别。
在示例性非限制性实施方案中，第一显示器10形成在左透明门8处，并且同样地，第二显示器10形成在右透明门8处。然而，应当理解，在指向冷藏销售空间内、特别是架子上的特定商品的人员前面提供至少一个显示器(包括仅一个显示器)也是足够的。
显示器10被描绘为透明门8和10的矩形透明部分。它们可以形成在透明门8和10的玻璃板处或其内。可替代地，它们可以形成为被布置和配置为在所述矩形部分中引起显示的一个或两个投影仪(未示出)。
此外，图1的冷藏销售柜2包括控制单元12，所述控制单元12可布置在冷藏销售柜2的顶板部分或在顶板部分顶部，特别是在其后部。
相机14、16、18和20与控制单元12进行信号通信。
同样地，控制单元12与显示器10进行信号通信。
在图2的侧视图中，可以很好地看到第一相机对的左相机14的相机视域范围14r。
该视域范围14r从平行于冷藏销售柜2的前侧的第一竖直平面延伸到第二倾斜平面，所述第二倾斜平面与所述竖直平面成大约20°至60°、特别是30°至50°的角度。
如将关于图3更详细地说明的，一个相应相机对中的两个相机的视域范围14r、16r和18r、20r重叠以形成观察区域22，在所述观察区域22中可以确定站立在冷藏销售柜2前面的人员的指向装置。
在附图的描述中，指向装置是站立在冷藏销售柜2前面的人员的手指24。然而，应当理解，指向装置也可以是站立在冷藏销售柜2前面的人员的手或拳头或其他对象。
在图2中，可以很好地看到，站立在冷藏销售柜2前面的包括顾客的手指24的手臂和手在所述观察区域22内。
在图3中，相机14、16、18和20的视域范围14r、16r、18r和20r可以在俯视图中很好地看到。
第一左相机对14、16中的左相机14的视域范围14r在第一竖直平面和第二竖直平面之间延伸，所述第一竖直平面位于左透明门8的平面内或平行于左透明门8的平面或者与其成1°至10°的小角度，所述第二竖直平面从左透明门8的左边缘沿向前方向延伸并且与该第一竖直平面成大约90°的角度。
同样地，左对相机14、16中的右相机16的视域范围16r在第一竖直平面和第二竖直平面之间延伸，所述第一竖直平面位于左透明门的平面内或平行于左透明门的平面或者与其成1°至10°的小角度，所述第二竖直平面从左透明门8的右边缘沿向前方向延伸并且与该第一竖直平面成大约90°的角度。
第一对左相机14、16的视域范围14r、16r在左透明门8前面重叠的区域形成观察区域22，两个相机14和16可以在所述观察区域22从两个不同位置捕获站立在该透明左门8前面的人员的同一个对象、特别是手指的图片。
控制单元12还包括存储器，存储在冷藏销售空间中的不同商品的数据集存储在所述存储器中。
每个数据集包括相应商品在冷藏销售空间内的位置(例如特定的架子和架子上的特定位置)以及这些商品的商品规格，所述商品规格包括价格、营养信息、有效期、配方、与同类产品的比较、温度或供应链历史记录等。
如果人员站立在冷藏销售柜2前面并且用其手指指向冷藏销售空间内存储的特定商品，则顾客站立于其前面的透明门8的相应对的相机的两个相机14、16从不同位置捕获人员的两张图片并且通过图像支配来确定手指的手指位置和手指方向。
为了确定手指的位置x、y、z，可以在冷藏销售柜2处或其中提供至少可以供手指24的高度作为参考的标记。手指24的x位置可以基于相机14和16之间的距离来确定。手指24的y位置可以基于某些标记或x、y相对位置来确定。
特别地，首先，通过使用图像处理、特别是通过手指识别，在两个图片中都检测到手指。可选地，可以通过图像处理去除人员的手指和其他部位的背景。在捕获的图像内检测到手指之后，确定在透明门前面的观察区域中的手指的位置。
在这种情况下，可以使用三角测量的原理，其中两个相机14和16彼此之间的距离是已知的，并且其中两个相机14和16所位于的竖直平面之间的角度也是已知的。
此外，可以计算出两个相机14和16所位于的竖直平面与包括手指的位置的竖直平面之间的角度。
在已知/已经计算出这些值的情况下，可以确定在左透明门8前面的观察区域22中的手指24的位置。
为了还确定站立在左透明门8前面的观察区域22中的人员的手指24的手指方向，控制单元22可以确定手指方向线，特别是使用三角测量的原理来确定手指24的至少两个不同的点，例如指尖和另一个手指点(如手指的基部或手指24的中间或中间点)。
在确定了手指24的位置和方向两者之后，控制单元12计算手指24所指向的在冷藏销售空间内的目标位置。
为了计算手指24所指向的在冷藏销售空间内的目标位置，控制单元22将手指方向线从所确定的手指位置延伸到冷藏销售空间、特别是延伸到延伸穿过冷藏销售空间的前部或者冷藏销售空间内的架子的前边缘的竖直平面。控制单元22还必须知道手指的坐标x、y、z。图像处理和柜中或周围标记的组合可用于此目的。
此后，控制单元12将存储在控制单元22的存储器中的位于冷藏销售空间内的该目标位置处的商品的数据集与计算出的目标位置相关联。
然后，该数据集的商品规格被传送到显示器10以显示这些商品规格。数据库可以是静态的-其中对于每种物品类型和品牌预先确定位置，或者动态的-其中使用图像识别或代码来动态更新存储器中的数据集，或者两种方法的组合。
这有利于并加快购物行动，因为为了获得商品规格，不再需要打开透明门，取出感兴趣的商品并阅读印在该商品包装上的商品规格，并且可选地，将商品放回冷藏销售空间中，然后关闭透明门8。
替代地，商品规格将立即显示在显示器10上。
而且，减少了或甚至完全避免了由于打开透明门8且冷空气从冷藏销售空间流出而造成的能量浪费。
成对的相机14、16和18、20可以被配置为连续地捕获在相应的透明门8前面的观察区域22的图片，或者特别是仅在有人员进入观察区域22的情况下才连续地捕获在相应的透明门8前面的观察区域22的图片。
控制单元22可以被配置为通过对由相应的相机对14、16和18、20捕获的一系列的至少两个图片的图像处理来连续确定站立在透明门8前面的观察区域22中的人员的手指24的手指位置和手指方向两者。
然而，有可能仅在控制单元22确定的手指位置和手指方向在预定时间段(例如，1秒至8秒、特别是2秒至5秒)内保持不变的情况下才进行以下步骤：计算手指24所指向的在冷藏销售空间内的目标位置；将位于冷藏销售空间内的该目标位置的商品的数据集与计算出的目标位置相关联；以及将该数据集的商品规格传送到显示器10以进行显示。这确保仅在顾客确实需要的情况下才显示商品规格，并且避免了由于手指的无意移动而导致商品规格的显示。
图4示出了图1的冷藏销售柜2，其中站立在冷藏销售柜前面的顾客的手指24所指向的商品的商品规格，即“奶酪，30%脂肪，售价2,50€”显示在显示器10上。
图5示出了图1的冷藏销售柜2，其中站立在冷藏销售柜前面的顾客的手指24所指向的商品的商品规格显示在移动装置的显示器上。
作为在相应的透明门8的玻璃板处或其内的显示器10上显示商品规格的替代方案，还可以将该商品规格显示在站立在相应的透明门8前面的观察区域22中的人员的移动装置、特别是智能装置的显示器上。
在这种情况下，冷藏销售柜2的控制单元22可以使移动装置的显示器显示该商品规格。
可以使用移动装置网络或云计算机系统将数据集的商品规格从控制单元22传送到站立在相应的透明门8前面的观察区域22中的人员的移动装置。
由于多个人员可能站立在冷藏销售柜前面，因此可以将识别哪个移动装置对应于“指向”特定商品的哪个人员的算法结合作为视频分析算法的一部分，例如，示出人体与特定移动装置ID之间的机械连接。
虽然已经参考示例性实施方案描述了本发明，但本领域技术人员应当理解，在不脱离权利要求的范围的情况下，可做出各种改变并且可用等效物来替代示例性实施方案的要素。此外，在不脱离权利要求的范围的情况下，可以进行许多修改以使特定情况或材料适于本发明的教导。因此，不旨在将本发明限于所公开的特定实施方案，而是本发明包括落入权利要求的范围内的所有实施方案。
附图标记列表:
2 冷藏销售柜
4 柜体
6 冷藏销售空间
8 铰链门
9 把手
10 显示器
12 控制单元
14 相机
14r 相机视域范围
16 相机
16r 相机视域范围
18 相机
18r 相机视域范围
20 相机
20r 相机视域范围
22 观察区域
24 手指
26 移动装置。

Claims (15)

1.冷藏销售柜(2)，其包括
冷藏销售空间，待出售的不同商品在所述冷藏销售空间中存储在不同的位置；
控制单元(12)；和
至少两个相机(14、16；18、20)，其定位成彼此间隔开并被配置为捕获所述冷藏销售柜(2)前面的观察区域(22)的图片；
其中所述控制单元(12)包括存储器或连接到存储器，其中所述存储器包括存储在所述冷藏销售空间中的所述不同商品的数据集，每个数据集包括相应商品在所述冷藏销售空间内的位置和这些商品的商品规格；以及
其中所述控制单元(12)被配置为
通过对由所述至少两个相机(14、16；18、20)捕获的至少两个图片的图像处理和/或所述柜中或周围的位置标记来确定站立在所述冷藏销售柜(2)前面的所述观察区域(22)中的人员的指向装置(24)的位置和方向两者；
计算所述指向装置(24)所指向的在所述冷藏销售空间内的目标位置；
将位于所述冷藏销售空间内的该目标位置的商品的所述数据集与所计算出的目标位置相关联；以及
将该数据集的商品规格传送到显示装置以显示所述商品规格。
2.根据权利要求1所述的冷藏销售柜(2)，
其还包括至少一个透明门(8)；并且
其中所述至少两个相机被配置为捕获在所述至少一个透明门(8)前面的观察区域的图片。
3.根据权利要求2所述的冷藏销售柜(2)，
其中至少两个相机(14、16；18、20)位于所述冷藏销售柜(2)的柜体的顶板部分的前部，特别是在所述冷藏销售柜(2)的至少一个透明门(8)的左边缘和右边缘；和/或
其中所述至少两个相机(14、16；18、20)被配置为使得它们的视域范围(14r、16r；18r，20r)在所述至少一个透明门(8)前面重叠；和/或
其中所述至少两个相机(14、16；18、20)的视域范围(14r、16r；18r，20r)重叠的区域形成所述观察区域(22)；和/或
其中所述观察区域(22)在所述至少一个透明门(8)的基本上整个宽度上延伸。
4.根据前述权利要求中任一项所述的冷藏销售柜(2)，
其中所述指向装置是站立在所述冷藏销售柜(2)前面、特别是在所述至少一个透明门(8)前面的所述观察区域(22)中的人员的手指(24)、手或拳头或另一对象；和/或
其中，为了确定站立在所述至少一个透明门(8)前面的所述观察区域(22)中的人员的指向装置(24)的所述位置和指向方向，所述控制单元(12)被配置为
通过对由所述至少两个相机(14、16；18、20)从不同位置拍摄的至少两个图片的图像处理来检测所述指向装置(24)；以及
可选地，通过图像处理去除所述人员的所述指向装置(24)和其他部分的背景；以及
确定在所述至少一个透明门(8)前面的所述观察区域(22)中的所述指向装置(24)的所述位置。
5.根据权利要求4所述的冷藏销售柜(2)，
其中为了确定在所述至少一个透明门(8)前面的所述观察区域(22)中的所述指向装置(24)的所述位置，使用三角测量的原理，其中所述两个相机(14、16；18、20)彼此之间的距离是已知的，并且其中计算所述两个相机(14、16；18、20)所位于的竖直平面与包括所述指向装置(24)的所述位置的竖直平面之间的角度；并且其中根据这些值确定在所述观察区域(22)中的所述指向装置(24)的所述位置。
6.根据前述权利要求中任一项所述的冷藏销售柜(2)，
其还包括在所述冷藏销售柜(2)处、周围或其中的标记，以提高对指向装置的位置和方向的确定的准确性。
7.根据前述权利要求中任一项所述的冷藏销售柜(2)，
其中，为了确定站立在所述至少一个透明门(8)前面的所述观察区域(22)中的所述人员的指向装置(24)的所述指向方向，所述控制单元(12)被配置为确定指向装置的方向线，特别是针对所述指向装置(24)的至少两个不同点使用三角测量的原理。
8.根据权利要求7所述的冷藏销售柜(2)，
其中，为了计算指向装置(24)所指向的在所述冷藏销售空间内的所述目标位置，所述控制单元(12)被配置为将所述指向装置的方向线从所确定的指向装置位置延伸到所述冷藏销售空间，特别是延伸到延伸穿过所述冷藏销售空间前部的竖直平面。
9.根据前述权利要求中任一项所述的冷藏销售柜(2)，
其中所述至少两个相机(14、16；18、20)被配置为一旦有人员进入所述观察区域(22)，就捕获在所述至少一个透明门(8)前面的观察区域(22)的图片；和/或其中所述至少两个相机(14、16；18、20)被配置为连续捕获在所述至少一个透明门(8)前面的观察区域(22)的图片。
10.根据权利要求9所述的冷藏销售柜(2)，
其中所述控制单元(12)被配置为
通过对由所述至少两个相机(14、16；18、20)捕获的一系列的至少两个图片的图像处理来连续确定站立在所述透明门(8)前面的所述观察区域(22)中的人员的指向装置(24)的所述位置和所述方向两者；以及
仅在所述控制单元(12)确定的所述指向装置位置和所述指向装置方向在预定时间段内保持不变的情况下，才执行以下步骤中的一个或多个步骤：
计算所述指向装置(24)所指向的在所述冷藏销售空间内的所述目标位置；
将位于所述冷藏销售空间内的该目标位置的商品的所述数据集与所计算出的目标位置相关联；以及
将该数据集的商品规格传送到显示装置以显示所述商品规格。
11.根据前述权利要求中任一项所述的冷藏销售柜(2)，
其中为所述冷藏销售柜(2)的宽度的横向相邻部分提供两对或更多对相机(14、16；18、20)；
其中提供第一对相机(14、16)并且其被配置为捕获至少一个透明门(8)前面的第一观察区域(22)的图片；以及
提供第二对相机(18、20)并且其被配置为捕获至少一个透明门(8)前面的与所述第一观察区域(22)横向相邻的第二观察区域(22)的图片。
12.根据前述权利要求中任一项所述的冷藏销售柜(2)，
其中所述控制单元(12)被配置为监测站立在所述透明门(8)前面的所述观察区域(22)中的人员的指向装置(24)已经指向了哪些产品的次数。
13.根据前述权利要求中任一项所述的冷藏销售柜(2)，
其中所述显示装置形成为在所述冷藏销售柜(2)的前侧、特别是在其透明门(8)处的显示器(10)，或形成为投影仪，所述显示器(10)或所述投影仪被配置为使所述商品规格显示在所述冷藏销售柜(2)的前侧、特别是在其透明门(8)处；以及
其中所述控制单元(12)还被配置为使所述显示器(10)或所述投影仪显示该数据集的所述商品规格。
14.根据前述权利要求中任一项所述的冷藏销售柜(2)和移动装置(26)的设备、移动装置(26)特别是智能电话或平板电脑；
其中所述冷藏销售柜(2)的所述控制单元(12)还被配置为使站立在所述至少一个透明门(8)前面的所述观察区域(22)中的所述人员的所述移动装置(26)的所述显示器显示该数据集的所述商品规格。
15.根据权利要求14所述的设备，
其中所述设备、特别是所述控制单元(12)还包括视频分析算法，以确定哪个移动装置对应于指向被包含的哪个产品的人员；和/或
其中所述冷藏销售柜(2)的所述控制单元(12)还被配置为使用移动装置网络或云计算机系统将该数据集的商品规格传送到站立在所述至少一个透明门(8)前面的所述观察区域(22)中的所述人员的所述移动装置(26)。
CN202010195766.5A 2019-03-19 2020-03-19 冷藏销售柜 Active CN111713922B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP19163688.5A EP3712852B1 (en) 2019-03-19 2019-03-19 Refrigerated sales cabinet
EP19163688.5 2019-03-19

Publications (2)

Publication Number Publication Date
CN111713922A true CN111713922A (zh) 2020-09-29
CN111713922B CN111713922B (zh) 2024-05-24

Family

ID=65903932

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010195766.5A Active CN111713922B (zh) 2019-03-19 2020-03-19 冷藏销售柜

Country Status (2)

Country Link
EP (1) EP3712852B1 (zh)
CN (1) CN111713922B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230168028A1 (en) * 2021-12-01 2023-06-01 SNWC, Inc. Refrigeration system with imaging

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102609871A (zh) * 2012-02-18 2012-07-25 扬州市前景电子技术研究所有限公司 网络自助商店及其购物方法
CN103384892A (zh) * 2011-03-01 2013-11-06 宝洁公司 在实体零售环境的虚拟图示上显示实体零售环境的数据
CN103854369A (zh) * 2012-12-04 2014-06-11 乐天铝箔有限公司 多功能自动售货机的价格设定装置及其方法
CN205722165U (zh) * 2016-06-21 2016-11-23 刘学成 一种基于移动网络的销售装置
CN108353089A (zh) * 2015-08-21 2018-07-31 三星电子株式会社 用于用户可配置的交互区域监视的装置和方法
CN108597105A (zh) * 2018-05-23 2018-09-28 山东烟台烟草有限公司 基于物联网的智能卷烟销售货架、销售方法、计数方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7227526B2 (en) * 2000-07-24 2007-06-05 Gesturetek, Inc. Video-based image control system
WO2015192117A1 (en) * 2014-06-14 2015-12-17 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
US10169677B1 (en) * 2014-12-19 2019-01-01 Amazon Technologies, Inc. Counting stacked inventory using image analysis

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103384892A (zh) * 2011-03-01 2013-11-06 宝洁公司 在实体零售环境的虚拟图示上显示实体零售环境的数据
CN102609871A (zh) * 2012-02-18 2012-07-25 扬州市前景电子技术研究所有限公司 网络自助商店及其购物方法
CN103854369A (zh) * 2012-12-04 2014-06-11 乐天铝箔有限公司 多功能自动售货机的价格设定装置及其方法
CN108353089A (zh) * 2015-08-21 2018-07-31 三星电子株式会社 用于用户可配置的交互区域监视的装置和方法
CN205722165U (zh) * 2016-06-21 2016-11-23 刘学成 一种基于移动网络的销售装置
CN108597105A (zh) * 2018-05-23 2018-09-28 山东烟台烟草有限公司 基于物联网的智能卷烟销售货架、销售方法、计数方法

Also Published As

Publication number Publication date
EP3712852B1 (en) 2021-12-15
CN111713922B (zh) 2024-05-24
EP3712852A1 (en) 2020-09-23

Similar Documents

Publication Publication Date Title
CN108846621B (zh) 一种基于策略模块的库存管理系统
US20210304176A1 (en) Information processing system
US10769666B2 (en) Intelligent marketing and advertising platform
RU2739542C1 (ru) Система автоматической регистрации для торговой точки
TWI793719B (zh) 店鋪裝置、店鋪系統、店鋪管理方法及程式
US20160203499A1 (en) Customer behavior analysis system, customer behavior analysis method, non-transitory computer readable medium, and shelf system
US20150039458A1 (en) Method and system for automated retail checkout using context recognition
US20160196575A1 (en) Sales promotion system, sales promotion method, non-transitory computer readable medium, and shelf system
CN109726759B (zh) 无人售货方法、装置、系统、电子设备及计算机可读介质
CN114037462A (zh) 店铺内物品警告体系结构
JP2009003701A (ja) 情報システム及び情報処理装置
WO2013174983A1 (en) Registering system
US20190279229A1 (en) Flow line output device, flow line output method, and recording medium
CN108557365A (zh) 无人店铺自动售货系统
WO2013135968A1 (en) Method, arrangement, and computer program product for coordinating video information with other measurements
CN112074842A (zh) 价签信息显示方法、装置及货架系统
US11493268B2 (en) Refrigerator appliance having a weight-detecting drawer assembly
CN110895747B (zh) 商品信息识别、显示、信息关联、结算方法及系统
CN111713922B (zh) 冷藏销售柜
TWI741451B (zh) 智慧型行銷及廣告平台
JP2019102016A (ja) 庫内管理サーバ、電子商取引サーバ、商品購入支援システムおよびプログラム
EP3862954A1 (en) Article display system
KR20110019087A (ko) 전자가격표시기를 이용한 구매자의 패턴 검출장치 및 방법
CN112154488B (zh) 信息处理装置、控制方法和程序
JP2021033636A (ja) 什器制御サーバ、方法、システムおよびプログラム、ならびに可動什器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant