KR102638616B1 - 전자 선반 라벨이 장착된 선반용 카메라-구현된 물품 레이아웃 제어 방법 - Google Patents
전자 선반 라벨이 장착된 선반용 카메라-구현된 물품 레이아웃 제어 방법 Download PDFInfo
- Publication number
- KR102638616B1 KR102638616B1 KR1020207011262A KR20207011262A KR102638616B1 KR 102638616 B1 KR102638616 B1 KR 102638616B1 KR 1020207011262 A KR1020207011262 A KR 1020207011262A KR 20207011262 A KR20207011262 A KR 20207011262A KR 102638616 B1 KR102638616 B1 KR 102638616B1
- Authority
- KR
- South Korea
- Prior art keywords
- gondola
- area
- layout
- image
- electronic shelf
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 74
- 238000001514 detection method Methods 0.000 claims abstract description 35
- 230000000007 visual effect Effects 0.000 claims description 26
- 238000003384 imaging method Methods 0.000 claims description 10
- 238000003909 pattern recognition Methods 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 235000004936 Bromus mango Nutrition 0.000 description 3
- 241001093152 Mangifera Species 0.000 description 3
- 235000014826 Mangifera indica Nutrition 0.000 description 3
- 235000009184 Spondias indica Nutrition 0.000 description 3
- 235000011389 fruit/vegetable juice Nutrition 0.000 description 3
- 238000012545 processing Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000001627 detrimental effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
- G06Q10/0875—Itemisation or classification of parts, supplies or services, e.g. bill of materials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
- G06Q10/06316—Sequencing of tasks or work
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Library & Information Science (AREA)
- Tourism & Hospitality (AREA)
- Operations Research (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Development Economics (AREA)
- Databases & Information Systems (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- General Engineering & Computer Science (AREA)
- Educational Administration (AREA)
- Game Theory and Decision Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Cash Registers Or Receiving Machines (AREA)
- Display Racks (AREA)
- Image Analysis (AREA)
Abstract
판매 영역에서, 곤돌라 내의 물품 레이아웃을 체크하는 방법으로서, 곤돌라는 곤돌라 번호, 행 번호 및 선반 라벨 번호를 포함하는 단일 제품 슬롯 필드와 함께, 곤돌라의 매칭 영역에 대응하는 적어도 하나의 전자 선반 라벨을 포함하며, 상기 방법은 곤돌라의 이미지 획득 단계, 전자 선반 라벨의 자동 검출 단계 및 행의 자동 검출 단계; 적어도 하나의 전자 선반 라벨에 대해서, 곤돌라의 매칭 영역의 결정 및 슬롯 필드의 결정 단계; 획득된 이미지에서 곤돌라의 상기 영역의 레이아웃 정보의 검출 단계; 리얼로그램 데이터베이스에서 연관된 물품 식별자의 식별 단계; 및 리얼로그램 데이터베이스에 저장된 예상 레이아웃 정보에 대해 검출된 레이아웃 정보의 일치성 체크 단계를 포함한다.
Description
본 발명은 판매 지역에서 판매 중인 물품(article)의 레이아웃(layout)을 관리하는 분야에 관한 것이다.
판매 지점의 선반(shelf)은 일반적으로, 곤돌라(gondola)로 구성되며, 판매중인 물품은 각각의 곤돌라에 대해 여러 행(row)에 배치된다. 일반적으로, 선반은 또한, 선반의 외부 에지(edge)를 따라 배치되는 선반 라벨(shelf label)을 포함하며, 이는 바람직하게, 가격, 중량당 가격, 물품 명칭 등과 같은, 판매용 물품과 관련된 정보를 표시하기 위한 전자 선반 라벨일 수 있다.
전자 선반 라벨(아래에서 ESL로 지칭됨)의 특정 경우에, 하나의 ESL의 스크린에 표시되는 정보는 저주파 또는 고주파일 수 있는 무선주파수에 의해 원격 제어된다. 예를 들어, 라벨 데이터베이스에 포함된 판매중인 각각의 물품에 대해 표시된 정보는 데이터베이스의 중앙 파일 업데이트에 따라서 실시간으로 업데이트될 수 있다. 중앙 파일에서, 고유한 물품 식별자에 의해 식별되는, 판매중인 각각의 물품은 지속적으로 업데이트될 수 있는 가격, 명칭, 중량당 가격과 같은 여러 데이터와 연관되어 모든 ESL이 중앙 파일에 포함된 관련 및 최신 정보를 표시한다. 특정 전자 선반 라벨과 해당 물품 사이의 링크(link)는 전형적으로, 중앙 파일에서 각각의 ESL에 대해 고유하고 특정한 라벨 식별자와 물품 식별자 사이의 연관성에 의해 식별된다. 실제로, 판매중인 물품은 선반의 미리 결정된 영역에, 전형적으로 대응하는 ESL 바로 아래 또는 위에 위치된다. 다음의 모든 것에서, 주어진 ESL에 대응하는 선반의 영역을 해당 ESL과의 "매칭 영역(matching area)"으로 지칭할 것이다. 물품과 관련된 물품 정보를 표시하는 ESL의 경우에, 대응하는 매칭 영역은 선반의 해당 영역 내의 하나 이상의 라인에 배열된 해당 물품의 하나 이상의 품목을 포함한다. 해당 물품에 대해 표시된 라인의 수는 판매 지점에서 해당 물품에 대한 "대면 정보(facing information)"의 일부이다.
이러한 방식으로, 판매 지점의 고객에게는 법적 요건에 따른 항상 유효한 정보가 제공된다. 구매한 품목의 지불을 위해 현금 인출에 효과적으로 사용되는 정보는 동일한 중앙 파일에서 검색되므로, 고객이 선택할 때 선반의 ESL에 의해 표시된 정보와 지불 시점에 사용된 정보의 불일치가 방지된다. 또한, 선반에 ESL이 장착된 판매 지점에서, 중앙 파일의 제품 정보에 관한 변경이 선반에 있는 소비자에게 표시된 정보로 자동으로 매우 빠르게 변환되는 반면에, 비-전자식 선반 라벨은 개별적으로 수동으로 변경되어야 한다.
판매 지점에서 물품의 레이아웃은 판매 지점의 플래노그램(planogram) 데이터베이스에 표시될 수 있다. 플래노그램 데이터베이스는 판매 중인 물품품의 식별자와 해당 물품을 포함하도록 의도된 판매 지점의 선반 영역 사이에 링크를 포함한다. 그러한 플래노그램 데이터베이스는 전형적으로, 판매 지점 내의 위치(예컨대, 선반 영역)의 식별자를 갖는 물품 식별자, 예를 들어 EAN 번호와 일치하는 상관표(correlation table)의 형태를 취한다. 플래노그램 데이터베이스는 일반적으로, 시각적 플래노그램, 즉 선반 구성의 2 차원 또는 3 차원 시각적 표현에 의해 확장되며, 여기서 물품은 정면 뷰(front view)"라 불리는, 선반을 향하는 동시에 고객이 볼 수 있는 품목의 예상 정면 측에 의해 시각적으로 인식될 수 있다.
그러나, 표준 경우에, 판매 지점에 반드시 맞지 않는 일반적인 모델에 따라 때때로 해당 판매 지점을 열 때 판매 지점에 대해 플래노그램 데이터베이스 및 대응하는 시각적 플래노그램이 생성된다. 이는 특히, 상점 크기에 대응하는 모델일 수 있다. 플래노그램 데이터베이스가 초기화된 후, 특정 제품에 대한 선반 영역 할당이 최종적으로 변경될 수 있다. 최근에, 선반 공간 할당에 대해 수행된 변경 또는 선반 라벨 할당에 대해 수행된 변경을 고려한 "리얼로그램(realogram)", 즉 플래노그램을 생성하려는 노력이 있었다. 전자 선반 라벨이 장착된 판매 지점의 전형적인 경우에, ESL을 다른 제품에 재할당할 때마다 "리얼로그램 데이터베이스"가 업데이트된다. 따라서, 리얼로그램 데이터베이스는 (모든 물품이 선반에 적절하게 그리고 예상 방향으로 입고된 경우에)선반의 현실을 신뢰할 수 있는 최신 표현이다. 리얼로그램 데이터베이스와 판매 지점의 실제 선반 사이에는 불일치가 있을 수 없다.
신뢰할 수 있는 리얼로그램 데이터베이스를 유지하기 위해서는 단순한 종이 선반 라벨이 아닌 전자 선반 라벨을 사용하는 것이 매우 바람직하다. 실제로, 전자 선반 라벨은 판매 지점의 중앙 파일에 따른 물품 정보의 자동 업데이트뿐만 아니라, 선반 라벨과 물품 식별자 사이의 연관성에 대해 수행된 임의의 변경을 리얼로그램 데이터베이스에 반영하게 한다. 또한 ESL은 일반적으로, 판매 지점 직원이 의도하지 않는 한 변경할 수 없는 선반의 특정 위치에 고정된 상태로 유지된다. 따라서, 주어진 ESL이 다른 제품에 다시 영향을 받을 때, 선반 라벨의 이러한 재-할당은 해당 선반 라벨에 대응하는 선반 영역에 대한 리얼로그램 데이터베이스에 존재하는 정보에서 영향을 받을 수 있다.
신뢰할 수 있고 완전한 리얼로그램 데이터베이스의 제공은 판매 지점 고객 또는 판매 지점 직원 모두에게 전달될 수 있는, 판매 지점 내 물품의 지리적 위치에 대한 애플리케이션의 개발을 허용한다. 두 경우 모두, 물품에 대한(예컨대, 선반의 대응 영역이 비어 있는지 또는 가득 찼는지에 관한, 선반에 올바른 물품 참조사항이 채워져 있는지에 관한, 물품이 선반에 충분히 입고되었는지에 관한, 등) 최신 레이아웃 정보를 가지면 상점의 수입 및 물품 선택의 운영 효율성을 개선하는데 중요하다. 고객의 경우에, 물품의 최적 가용성과 물품 선택에 대한 시간 단축으로 인해 만족도가 향상되고 판매 지점의 매력이 향상된다. 선반 준비 및 재고 관리와 관련된 직원의 경우에, 이는 생산성 향상을 초래한다.
해결해야 할 제 1 문제점은 일반적으로 판매 지점에서 판매 중인 물품의 부족이다. 일반적으로 판매 지점에서 구할 수 있는 특정 품목을 구매하려는 고객이 판매 지점에서 해당 품목의 재고가 없음을 발견한 상황은 두 가지 수준에서: 즉, 잃어버린 판매 기회로 인한 효율 손실, 및 불만족 고객이 경쟁업체의 다른 판매지점으로 일시적으로 또는 영구적으로 전환할 위험에서 불편하다.
이론적으로, 모든 품목 판매가 현금 인출시 중앙 재고 관리 파일에 즉시 영향을 미치고 해당 품목의 가용성 수준이 임계 값 아래로 떨어지는 즉시 판매 중인 각각의 품목이 재입고되는 경우에 부족이 발생하지 않아야 한다. 부족을 방지하기 위한 다른 중요한 요소는 대면(facing)(즉, 선반의 주어진 영역, 행의 길이 및 물품 전용 라인의 수)이 제품의 실제 소비율에 맞춰져야 한다는 점이다. 이러한 대면은 계절적 요인과 제품의 변동 수요를 고려하여 달라져야 한다. 실제 소비율에 비해 대면이 너무 낮으면, 부족을 방지하기 위해 제품이 매우 높은 빈도로 재입고되어야 할 수 있다. 대면 정보가 리얼로그램에 존재하는 정보의 일부이므로, 빈 공간, 곤돌라에 현재 존재하는 물품, 및 대면 정보를 포함한(이에 제한되지는 않음) 곤돌라의 현재 상황에 관한 믿을 수 있는 정보를 제공하는 방법의 필요성이 존재한다.
또한, 중앙 재고 관리 파일은 공급 또는 현금 인출과 같은 판매 지점 정보 시스템의 다른 기능과 항상 완벽하게 동기화되는 것이 아니다. 고객은 이들이 찾고자 하는 제품의 빈 선반을 여전히 빈번히 찾는다. 고객이 빈 제품 슬롯 근처에 배치된 선반 라벨에서 제품이 누락되었음을 볼 수 있기 때문에, 이는 특히 불편하다.
물품 레이아웃 관리를 위한 몇몇 공지된 시스템에서, 선반 정면의 뷰(view)에서 빈 영역이 검출될 수 있다. 그러나, 상기 공지된 시스템이 리얼로그램 데이터베이스에 존재하는 정보를 사용하지 않기 때문에, 검출된 빈 공간은 대응하는 물품 참조사항과 자동으로 연관되지 않는다. 따라서, 상기 공지된 시스템은 물품 부족의 효율적인 관리를 허용하지 않는다.
다른 문제점은 리얼로그램에서 계획된 레이아웃으로 선반에서 이용 가능한 물품의 일치성(compliance)이다. 여기서 중요한 문제점은 선반의 주어진 영역에 대해서, 해당 영역의 리얼로그램에 포함된 예상 물품 참조사항과 해당 영역에 실제로 표시된 물품 사이의 일치성이다. 잘못 표시된 물품 참조사항 또는 잘못된 대면(예를 들어, 해당 물품이 두 줄에 있어야 하는데, 특정 물품이 선반의 한 줄에만 있음)과 같이, 예상 레이아웃과 일치하지 않는 물품의 레이아웃을 갖는 것은 판매 지점의 효율성에 유해하다. 위에서 언급한 바와 같이, 예상 대면과 관련하여 잘못된 대면은 실제 대면이 너무 높을 경우의 곤돌라의 공간 낭비, 또는 실제 대면이 너무 낮은 경우의 높은 부족 가능성을 초래하기 쉽다. 또한, 판매 지점 내에서 판매 중인 브랜드는 그들 제품을 선반에 표시해야 하는 방법에 관한 특정 요건이 있을 수 있다.
물품 레이아웃 제어와 관련하여 위에서 확인된 문제점을 고려하면, 판매 지점 매출의 최대 15 %까지 증가할 가능성이 있는 것으로 추정된다. 부족을 피하는 것은 잠재적인 수입 증가의 약 3 % 내지 5 %에 이르며; 판매 지점에서 실제로 구할 수 있는 제품이 리얼로그램 데이터베이스의 정보와 관련하여 고객이 쉽게 추적할 수 있는 제품의 올바른 예상 위치에 위치하도록 보장하면, 5 % 증가에 이르게 할 수 있으며; 각각의 특정 판매 지점에 맞게 개인화된 신뢰할 수 있는 리얼로그램 데이터베이스(즉, 여러 판매 지점에 대한 단일 예상된 플래노그램이 아님)의 보유는 3 % 내지 5 % 증가에 이르게 할 수 있다.
따라서 판매 지점 직원에게 임의의 문제점에 대해 알리며 예를 들어, 선반에서 재고가 없는 물품을 주문 및/또는 재-분류하거나, 해당 레이아웃이 리얼로그램 데이터베이스에서 이용 가능한 정보와 일치하지 않을 때 물품의 레이아웃을 재조정함으로써 신속하게 조치를 취할 수 있도록, 선반에서 판매 중인 물품의 레이아웃 정보의 검출을 허용하는 해결책이 필요하다.
후술되는 해결책은 판매 지점의 데이터베이스에 존재하는 정보와 물품 레이아웃의 일치성을 체크하기 위한 시스템으로 종래 기술의 전술한 결점을 극복한다. 상기 시스템은 이미지 인식에 의해 임의의 불일치(예컨대, 물품을 이용 가능하게 해야 하는 선반의 빈 영역, 또는 물품에 대한 잘못된 대면 또는 잘못된 정면 뷰를 갖는 물품)를 직접 추적할 수 있다.
이러한 목적을 위해, 그리고 제 1 양태에 따라서, 본 발명은 곤돌라에서 예상되는 물품의 배열을 나타내는 리얼로그램 데이터베이스를 이용하여 판매 영역의 곤돌라에서 물품의 레이아웃을 체크하는 방법에 관한 것으로서, 각각의 곤돌라는 적어도 하나의 전자 선반 라벨을 포함하며, 각각의 전자 선반 라벨은 단일 제품 슬롯 필드를 갖는 곤돌라의 매칭 영역에 대응하며, 상기 슬롯 필드는 하나의 특정 곤돌라 내의 전자 선반 라벨의 연속적인 행 중 하나에 대응하는 행 번호, 및 하나의 특정 행 내의 연속적인 전자 선반 라벨 중 하나에 대응하는 라벨 번호와 함께, 곤돌라 번호를 포함하며, 상기 방법은 컴퓨터-구현되는, 이미징 장치에 의해 곤돌라의 이미지의 획득 단계, 곤돌라의 획득 이미지에서 전자 선반 라벨의 자동 검출 단계, 획득 이미지에서 전자 선반 라벨의 행의 자동 검출 단계, 획득된 이미지에서 보이는 주어진 전자 선반 라벨에 대해서: 상기 전자 선반 라벨의 행 번호 및 라벨 번호의 결정 및 대응하는 제품 슬롯 필드의 결정 단계, 획득 이미지에서 상기 전자 선반 라벨에 대응하는 곤돌라의 매칭 영역의 결정 단계, 획득 이미지를 사용하는 이미지 인식에 의해, 곤돌라의 상기 매칭 영역에 도시된 물품에 관한 레이아웃 정보의 검출 단계, 리얼로그램 데이터베이스에 대한 접근 단계로서, 각각의 슬롯 필드가 상기 리얼로그램 데이터베이스의 물품 식별자와 관련되는 접근 단계, 결정된 슬롯 필드와 연관된 물품 식별자의 리얼로그램 데이터베이스에서의 식별 단계, 및 식별된 물품에 대한 리얼로그램 데이터베이스에 저장된 예상 레이아웃 정보와 관련한 검출된 레이아웃 정보의 체크 단계를 포함한다.
이에 의해 제공된 시스템은 곤돌라의 각각의 영역이 상기 영역의 바로 근처에, 예를 들어 상기 영역 아래에 위치된 곤돌라의 열에 배치된 전자 선반 라벨(또는 ESL)에 대응한다는 사실의 장점을 취한다. 곤돌라, 전형적으로 곤돌라 정면의 획득된 이미지로부터, 선반의 주어진 영역에 도시된 물품에 대한 레이아웃 정보는 자동화된 이미지 인식에 의해 검출될 수 있다. 상기 레이아웃 정보는 전자 선반 라벨 또는 ESL의 중재에 의해서, 아래에서 "슬롯 필드"로 지칭되는 데이터베이스 내의 곤돌라 영역의 식별자와 대응할 수 있다. 실제로, 획득된 이미지에서 ESL의 자동 인식은 시스템이 곤돌라의 영역에 대응하는 슬롯 필드를 식별하게 한다.
상기 방법은 단독으로 또는 기술적으로 가능한 조합으로 취해진 다음의 특징에 의해 제한적이지 않지만, 유리하게 완전해진다.
상기 방법은 선반의 이미지의 획득 후에, 이미지 인식에 의해 상기 획득 이미지에서 곤돌라의 적어도 하나의 빈 영역의 식별 단계를 더 포함하며, 상기 주어진 전자 선반 라벨에 대해서, 곤돌라의 매칭 영역에서 검출된 레이아웃 정보는 상기 영역이 비어 있다는 정보이며, 따라서 식별된 물품이 곤돌라에서 재고가 없다는 결정을 초래한다;
ㆍ 후자의 경우에서, 곤돌라의 빈 영역의 식별은 곤돌라의 후면 또는 곤돌라의 행의 미리 결정된 패턴에 대한 색 인식에 의해 수행된다.
ㆍ 상기 방법은 물품 이미지 데이터베이스에서 식별된 물품과 연관된 미리 등록된 이미지의 검색 단계를 더 포함하며, 미리 등록된 이미지는 결정된 물품 식별자에 대한 예상 정면 뷰이며, 또한 한편으로, 곤돌라의 결정된 영역에 대한 실제 정면 뷰에 대응하는 획득 이미지의 영역과 다른 한편으로, 예상 정면 뷰의 상기 미리 등록된 이미지 사이의 유사성 비율의 계산 단계를 포함하며, 상기 방법은 유사성 비율의 값으로부터 곤돌라의 정면 뷰가 불만족스럽다고 결정되는 결정 슬롯 필드 및/또는 물품 식별자의 리스트의 출력 단계를 포함한다.
ㆍ 상기 방법은 결정된 슬롯 필드에 대한 예상 대면 정보의 리얼로그램 데이터베이스에서의 검색 단계를 더 포함하며, 상기 방법은 또한, 이미지 인식에 의해, 예상 대면 정보와 결정된 슬롯 필드에 의해 식별된 제품 슬롯에 대해 획득된 이미지에서 보이는 실제 대면 사이의 일치성 검출 단계를 더 포함한다.
ㆍ 후자의 경우에서, 예상 대면 정보는 곤돌라 내의 동일 물품의 품목의 연속적인 라인의 수이다.
ㆍ 상기 방법은 곤돌라의 빈 공간을 강조하는 시각적 신호, 및/또는 검출된 빈 제품 슬롯과 연관된 물품 식별자 및/또는 슬롯 필드가 재입고되어야 한다는 시각적 알람(visual alert), 및/또는 예상 정면 뷰와 일치하지 않는 곤돌라의 영역을 강조하는 시각적 신호, 및/또는 예상 대면과 일치하지 않는 곤돌라의 영역을 강조하는 시각적 신호와 함께, 곤돌라의 표현의 그래픽 인터페이스에서의 시각적 표시 단계를 더 포함한다.
ㆍ 획득 이미지 상의 전자 선반 라벨의 자동 검출은 가능한 전자 선반 라벨 형상의 미리 결정된 세트에 대한 패턴 인식에 의해 수행된다.
ㆍ 획득 이미지의 주어진 검출 전자 선반 라벨에 대해서, 매칭 영역은 상기 전자 선반 라벨 바로 위에 위치되고 상기 전자 선반 라벨과 오른쪽 측면 상의 연속적인 선반 라벨 사이에 위치된 획득 이미지의 영역이 상기 전자 선반 라벨에 대응하는 곤돌라의 매칭 영역의 이미지로서 결정되는 것으로 정의된다.
제 2 양태에 따라서, 레이아웃을 체크하기 위한 전술한 방법을 구현하기 위한 코드 명령어(code instruction)를 포함하는 컴퓨터 프로그램 제품이 제공된다.
또 다른 양태에 따라서, 본 발명은 판매 영역의 곤돌라에서 물품의 레이아웃을 체크하는 시스템을 제안하며, 상기 시스템은:
곤돌라에 배열된 복수의 전자 선반 라벨,
라벨 데이터베이스와 통신하도록 구성되는 서버로서, 고유한 라벨 식별자에 의해 식별되는 각각의 전자 선반 라벨이 단일 물품 식별자와 연관되며, 전자 선반 라벨이 또한 단일 제품 슬롯 필드를 갖는 곤돌라의 매칭 영역에 대응하며, 서버가 또한 리얼로그램 데이터베이스와 통신하도록 구성되며, 각각의 슬롯 필드가 물품 식별자와 연관되는, 서버, 및
곤돌라의 이미지를 획득할 수 있는 이미징 장치를 포함하며,
서버는:
이미징 장치에 의해 제공된 곤돌라의 이미지에서 전자 선반 라벨의 자동 인식을 실행하고,
전자 선반 라벨에 대응하는 슬롯 필드 및, 전자 선반 라벨에 대응하는 곤돌라의 매칭 영역을 결정하고,
상기 이미지에서 곤돌라의 주어진 영역에서 보이는 물품에 대한 레이아웃 정보를 검출하고,
리얼로그램 데이터베이스에 저장된 정보와 관련하여 검출된 레이아웃 정보를 체크하도록 구성된다.
위에서 정의된 시스템은 유리하고 비-제한적인 방식으로, 단독으로 또는 임의의 기술적으로 가능한 조합으로 취해진 다음 특징을 포함할 수 있다:
ㆍ 서버는 물품 이미지 데이터베이스와 통신하도록 추가로 구성되며, 각각의 물품 식별자는 상기 식별된 물품에 대한 예상 정면 뷰의 미리 등록된 이미지와 연관되며, 서버는 검출된 레이아웃 정보에 기여하는 실제 정면 뷰에 대응하는 획득된 이미지의 영역을 예상 정면 뷰와 비교할 수 있다.
ㆍ 획득된 이미지에서의 레이아웃 정보의 검출은 곤돌라의 빈 영역의 자동 인식을 포함한다.
ㆍ 획득된 이미지에서의 검출 가능한 레이아웃 정보는 곤돌라의 상기 영역에서의 라인의 수와 같은 곤돌라의 영역에서 보이는 실제 대면을 포함하며, 서버는 상기 실제 대면을 리얼로그램 데이터베이스에서 검색된 예상 대면 정보와 비교할 수 있다.
본 발명의 다른 특징, 목적 및 장점은 단지 예시적이고 비-제한적이며 다음의 첨부 도면과 함께 읽혀져야 하는 다음의 상세한 설명에 기재된다.
도 1은 전자 선반 라벨, 중앙 서버 및 이동 단말기를 포함하는 종래 기술에 공지된 가격 표시 시스템을 나타낸다.
도 2는 선반의 물품 레이아웃을 체크하기 위한 방법의 단계를 개략적으로 나타낸다.
도 3은 선반의 빈 영역이 검출되는 특정 실시예에서 물품 레이아웃을 체크하는 방법의 단계를 개략적으로 나타낸다.
도 4는 도 3에 예시된 방법의 선반 라벨 검출 단계의 개략도이다.
도 5는 도 3에 예시된 방법의 행 검출 및 선반 라벨 카운트 단계의 개략도이다.
도 6은 도 3에 예시된 방법의 빈 선반 영역 검출 단계의 개략도이다.
도 7은 도 3에 예시된 방법의 일부로서, 검출된 빈 영역에 대응하는 슬롯 필드와 관련된 물품이 재고가 없음을 결정하는 단계의 개략도이다.
도 8은 여러 곤돌라가 구별되어 있는 판매 지점의 선반의 대안적인 개략도이다.
도 9는 선반의 주어진 영역에서 보이는 실제 정면 뷰가 예상 정면 뷰와 비교되는 대안적인 실시예에 따른 물품 레이아웃을 체크하기 위한 방법을 개략적으로 나타낸다.
도 10은 판매 지점의 선반과 관련된 리얼로그램 데이터베이스 및 물품 이미지 데이터베이스의 예시적인 표현을 개략적으로 표시한다.
도 11은 특정 대면 정보(선반의 특정 영역에 있는 제품의 라인의 수)가 검출되고 예상된 대면 정보와 비교되는 또 다른 실시예에 따른 물품 레이아웃을 체크하는 방법을 개략적으로 나타낸다.
도 12는 도 11에 예시된 방법의 일부로서 선반의 주어진 영역에 있는 제품의 라인의 수를 획득하는 단계의 개략도이다.
도 13은 도 11에 예시된 방법의 일부로서, 예상된 수와 관련하여 검출된 제품 라인의 수를 체크하는 단계의 개략도이다.
도 1은 전자 선반 라벨, 중앙 서버 및 이동 단말기를 포함하는 종래 기술에 공지된 가격 표시 시스템을 나타낸다.
도 2는 선반의 물품 레이아웃을 체크하기 위한 방법의 단계를 개략적으로 나타낸다.
도 3은 선반의 빈 영역이 검출되는 특정 실시예에서 물품 레이아웃을 체크하는 방법의 단계를 개략적으로 나타낸다.
도 4는 도 3에 예시된 방법의 선반 라벨 검출 단계의 개략도이다.
도 5는 도 3에 예시된 방법의 행 검출 및 선반 라벨 카운트 단계의 개략도이다.
도 6은 도 3에 예시된 방법의 빈 선반 영역 검출 단계의 개략도이다.
도 7은 도 3에 예시된 방법의 일부로서, 검출된 빈 영역에 대응하는 슬롯 필드와 관련된 물품이 재고가 없음을 결정하는 단계의 개략도이다.
도 8은 여러 곤돌라가 구별되어 있는 판매 지점의 선반의 대안적인 개략도이다.
도 9는 선반의 주어진 영역에서 보이는 실제 정면 뷰가 예상 정면 뷰와 비교되는 대안적인 실시예에 따른 물품 레이아웃을 체크하기 위한 방법을 개략적으로 나타낸다.
도 10은 판매 지점의 선반과 관련된 리얼로그램 데이터베이스 및 물품 이미지 데이터베이스의 예시적인 표현을 개략적으로 표시한다.
도 11은 특정 대면 정보(선반의 특정 영역에 있는 제품의 라인의 수)가 검출되고 예상된 대면 정보와 비교되는 또 다른 실시예에 따른 물품 레이아웃을 체크하는 방법을 개략적으로 나타낸다.
도 12는 도 11에 예시된 방법의 일부로서 선반의 주어진 영역에 있는 제품의 라인의 수를 획득하는 단계의 개략도이다.
도 13은 도 11에 예시된 방법의 일부로서, 예상된 수와 관련하여 검출된 제품 라인의 수를 체크하는 단계의 개략도이다.
다음의 모든 측면에서, 판매 지점에서의 부분 또는 완전 자동화된 선반 레이아웃 관리와 관련된 여러 방법이 설명될 것이다. 후술될 첨부 도면에서 유사한 요소는 동일한 참조 번호로 지정될 것이다.
다음에서, 전자 선반 라벨, 또는 곤돌라의 매칭 영역에 "대응하는" ESL에 대해 언급될 때마다, 이는 해당 전자 선반 라벨이 곤돌라의 해당 영역에서 고객에게 이용 가능한 제품에 관한 정보를 표시하도록 의도된다는 것을 의미한다. 실제로, 이는 ESL이 특정 물품 식별자에 대한 물품 정보를 표시하는 경우에, 상기 곤돌라의 대응하는 영역은 해당 물품의 특정 수의 품목을 포함해야 한다는 것을 의미한다. 따라서 "곤돌라의 영역"은 동일한 제품의 하나 또는 여러 라인을 포함하거나 포함하지 않을 수 있는 곤돌라의 지리적 영역으로 정의된다. 이는 일반적으로, 상기 영역의 특정 길이를 커버하는, 곤돌라의 2 개의 연속적인 수평 행 사이의 수평 영역에 위치된다.
후술될 물품 레이아웃을 체크하기 위한 시스템은 획득된 이미지에서 보이는 곤돌라의 "매칭 영역"과 상기 이미지에서 또한 보이는 ESL 사이의 대응성을 자체적으로 식별할 수 있다. 시스템은 주어진 ESL에서 시작하는, 곤돌라의 매칭 영역의 자동 인식(즉, 곤돌라의 해당 영역이 보이는 이미지 영역의 인식)을 위한 미리 결정된 규칙을 사용할 수 있다. 다음에서, 다음과 같이 정의된 매칭 영역을 식별하기 위한 조건을 고려한다: 곤돌라에 위치된 주어진 검출된 ESL에 대해서, 상기 ESL 바로 위에 위치하고, 상기 ESL과 오른쪽 측면상의 연속적인 ESL 사이에 위치된 상기 곤돌라의 획득 이미지의 영역은 곤돌라의 매칭 영역의 이미지로 결정된다. 문제를 반대로 고려할 수 있다: 곤돌라의 주어진 영역에 대해서, 대응하는 ESL은 상기 영역의 왼쪽에 있는, 곤돌라의 상기 영역 바로 아래의 행에 위치된 가장 가까운 ESL이다.
또한, 곤돌라의 각각의 영역은 아래에서 "제품 슬롯 필드(product slot field)" 또는 "슬롯 필드"로서 지칭되는 고유한 특정 번호로 식별된다. 슬롯 필드를 정의하기 위한 특정 모드가 아래에 설명될 것이다. 슬롯 필드에 "대응하는" ESL이 언급될 때마다, 이는 ESL이 상기 슬롯 필드에 의해 식별된 곤돌라의 매칭 영역에 도시된 제품에 관한 정보를 표시하도록 의도된다는 것을 의미한다.
또한, 곤돌라에 도시된 물품에 대한 "레이아웃 정보"의 검출에 대해 아래에서 참조될 것이다. 레이아웃 정보는 넓은 의미로, 곤돌라에서 판매 중인 물품의 상황에 대한 정보를 의미하며, 이는 곤돌라의 이미지(일반적으로, 선반 정면 뷰)를 사용하여 자동 인식으로부터 추론될 수 있다. 특정 종류의 레이아웃 정보는 예를 들어, 곤돌라 영역 빈 상태 또는 비어 있지 않은 상태(선반에서 물품이 재고가 없는지의 여부를 나타냄) 또는 곤돌라에서 보이는 동일한 제품의 라인의 수를 포함한다.
도 1은 예시적이고 비-제한적인 방식으로, 고객에게 가격 정보를 표시하기 위해 판매 영역에서 롤-아웃(rolled out)될 수 있는 전자 선반 라벨 관리 시스템을 개략적으로 나타낸다. 그러한 시스템은 출원인을 대표하여 출원된 공개 번호 WO2017/017366 호를 갖는 국제 특허 출원에 설명된 시스템과 유사하다. 이러한 시스템은 곤돌라에 설치된 전자 선반 라벨링 서브-시스템(1), 중앙 서버(2) 및 판독 장치(3)를 포함한다. 중앙 서버(2)는 도 1에 나타내지 않은 디스플레이 시스템과 로컬 또는 원격 네트워크를 통해 추가로 통신할 수 있다. 중앙 서버(2)는 또한, 임의의 이미지 캡처 방법에 의해서 물품의 레이아웃을 모니터링하기 위해 판매 지점의 곤돌라 사진을 찍을 수 있는 이미징 장치 또는 복수의 이미징 장치와 통신한다. 판독 장치(3)와 중앙 서버(2) 사이의 통신은 와이-파이, 3G나 4G, 또는 DECT와 같은 임의의 통신 네트워크에 따라서 수행될 수 있다.
전자 선반 라벨(또한, 다음에서 ESL로서 지칭됨)은 전체 판매 영역의 선반에 우선적으로 배열된다. 도 1에서, 3 개의 ESL(10, 11, 12)은 판매 중인 물품을 도시하기 위해 선반 에지에 위치되는 선반 레일(13)에 배열된다. 각각의 ESL은 제품 정보의 표시를 위한 액정 디스플레이 스크린과 같은 디스플레이(14)를 포함한다. 이러한 정보는 전형적으로, 킬로그램 당 가격과 같은 기타 필수 정보와 함께 규정 요건에 따라 물품 가격을 포함한다. 각각의 ESL은 예를 들어, 바코드를 통해 ESL의 케이스에 표시될 수 있는 고유 라벨 식별자로 식별된다. 이러한 라벨 식별자는 전형적으로 특정 영숫자 순서일 수 있다. 이러한 라벨 식별자는 판매 지점의 각각의 선반 라벨을 반드시 식별한다. 또한, 각각의 전자 선반 라벨은 하나의 판매 중인 물품에 대응하며, 이는 EAN 코드와 같은 특정 물품 식별자에 의해 자체적으로 식별될 수 있다. ESL은 전체 영역에 제공된 가격 정보가 중앙 서버(2)에 저장된 정보와 일치하도록 전체 판매 영역에 퍼져있는 것이 바람직하다. 선반 라벨(10)과 같은 ESL과 도 1에 도시된 전자 선반 라벨 관리 시스템의 나머지 구성요소 사이의 통신은 다음과 같이 작동할 수 있다. ESL은 무선 주파수 통신 모듈을 포함하며, 이는 중앙 서버(2)에 연결된 중앙 스테이션에 의해 방출된 무선 주파수 신호로 인코딩된 물품 정보를 수신할 수 있다. ESL은 전형적으로, NFC 또는 RFID 유형의 안테나 및 칩을 포함한다. ESL은 또한, 상기 전송된 데이터를 저장하기 위한 메모리, 및 데이터를 스크린(14)에 표시하기 위한 마이크로 제어기를 포함한다. 판독 장치(3)는 ESL의 무선 주파수 주변 장치를 통한 무선 통신을 통해 ESL과 통신할 수 있다. 이러한 방식으로, 판독 장치(3)는 ESL을 설치할 때 ESL을 물품 식별자와 연관시키는데 사용될 수 있다. 판독 장치(3)는 또한, 바코드를 사용하여 ESL의 라벨 식별자를 광학적으로 인식하기 위한 모듈이 장착되어있다. 결과적으로, 선반 라벨 관리 시스템의 모든 구성요소(1, 2, 3)는 무선 통신을 통해 통신할 수 있다.
중앙 서버(2)는 예를 들어, 고유 라벨 식별자와 물품의 EAN 번호 사이의 표 연관성의 형태인, 전자 선반 라벨(예를 들어, ESL(10, 11, 12))과 판매 중인 물품 사이의 연관 정보를 포함하는 미니마(minima), 라벨 데이터베이스(DB)를 포함한다. 여기서, 중앙 서버(2)는 또한, 리얼로그램 데이터베이스(P) 및 물품 이미지 데이터베이스(A)를 포함한다. 그러나, 상기 데이터베이스(A)는 후술될 모든 방법에 대해 필요한 것은 아니다.
리얼로그램 데이터베이스(P)는 제품 슬롯 필드, 판매 지점에서 판매 중인 물품의 물품 식별자, 및 판매 지점의 선반에 배치된 ESL의 라벨 식별자 사이의 연관 정보를 포함한다. 제품 슬롯 필드는 선반의 제품 슬롯을 명확하게 식별할 수 있는 모든 형태를 취할 수 있다. 다음 모두에서, 제품 슬롯 필드는 3 개의 숫자 인덱스(도 1에서 볼 수 없음)로 구성된다. 제 1 인덱스(i)는 판매 지점의 곤돌라에 대응하며, 이는 서로 평행하게 서로 적층된 하나 또는 복수의 일련의 선반을 포함할 수 있다. 제 2 인덱스(j)는 곤돌라(i)의 특정 행에 대응한다. 다음 모두에서, 행은 최저 행(행 0)으로부터 최고 행까지 하나의 곤돌라 내에서 연속으로 계산된다. 제 3 인덱스(k)는 행(j) 내의 특정 전자 선반 라벨에 대응한다. 다음 모두에서, ESL은 최좌측 ESL(ESL 1)로부터 최우측 ESL까지 행을 따라(즉, 선반 레일을 따라) 연속으로 계산된다. 삼중항(i, j, k)에서 인덱스(i, j, k)의 조합은 단일 전자 선반 라벨의 명확한 식별을 허용한다. 리얼로그램 데이터베이스(P)에서 제품 슬롯 필드(i, j, k)과 연관되는 물품 식별자는 용어(Pijk)에 의해 지정된다. 제품 슬롯 필드(i, j, k)와 관련된 판매 지점의 하나의 ESL을 식별하는 고유 라벨 식별자는 Lijk임에 주목한다. 라벨 데이터베이스(DB)에서, 고유 라벨 식별자(Lijk)는 따라서 물품 식별자(Pijk)와 연관될 것이다. 리얼로그램 데이터베이스(P)의 그래픽 표현은 도 10과 관련하여 후술될 것이다. 물품 이미지 데이터베이스(A)는 각각의 물품 식별자(예컨대, EAN 번호)를 상기 식별자에 의해 식별된 물품의 정면 뷰의 예상된 이미지에 대응하는 임의의 통상적인 이미지 포맷의 숫자 이미지와 연관시킨다. 또한, 중앙 서버는 가격 정보 및 고객에게 표시될 기타 정보, 재고 정보와 같은 관리 정보 등을 포함한 판매 지점 운영에 필요한 정보와 각각의 물품 식별자를 연관시키는 물품 정보에 접근(access)한다.
라벨 데이터베이스(DB), 물품 이미지 데이터베이스(A) 및 리얼로그램 데이터베이스(P)는 판매 지점의 단일 파일에 공동으로 포함되거나 아니면, 별도의 파일에 포함될 수 있다. 여러 판매 지점의 관리는 단일 중앙 파일로 원격 관리되거나 아니면, 각각의 판매 지점이 자체 파일 또는 파일 세트를 소유할 수 있다.
게다가, 리얼로그램 데이터베이스(P)는 선택적으로, 그러나 매우 유리하게, 라벨 데이터베이스(DB)에 존재하는 정보에 대하여 실시간으로 업데이트된다. 이는 상기 ESL과 관련된 정보가 (새로운 물품 식별자에 대한 연관성, 또는 이전에 연관된 물품 식별자와 다른 새로운 물품 식별자와의 재-연관성에 의해)라벨 데이터베이스(DB)에서 수정된 경우에, 선반에 미리 정해진 위치를 갖고 - 그리고 도 1에서 볼 수 있듯이, 상기 ESL이 상기 선반의 선반 레일(13)과 고정되게 맞물리기 때문에, 상기 위치에 고정 상태로 유지되는 - 따라서 주어진 슬롯 필드(i, j, k)에 대응하는 주어진 ESL에 대해서, 리얼로그램 데이터베이스(P)의 정보가 그에 따라 수정되어, 대응 슬롯 필드(i, j, k)가 또한 상기 새로운 물품 식별자와 관련되는 것을 의미한다. 예를 들어, 리얼로그램은 라벨 식별자와 슬롯 필드 사이의 연관성을 포함할 수 있어서, 주어진 라벨 식별자가 라벨 데이터베이스(DB)에서 새로운 물품 식별자와 재-연관될 때, 상기 수정은 리얼로그램 데이터베이스(P)에 즉시 반영된다.
(위에서 미리 논의된 넓은 의미로)레이아웃 정보의 검출 형태로 선반에서 물품 레이아웃을 체크하는 방법이 이제, 도 2를 참조하여 설명될 것이다. 단계(210)에서, 고객에게 보이는 물품의 대면을 볼 수 있는 곤돌라(i)를 포함한 곤돌라 또는 복수의 곤돌라의 수치 이미지는 중앙 서버(2)와 통신하는 이미징 장치에 의해 획득된다. 곤돌라(i)의 이미지(I)가 얻어지고 중앙 서버(2)의 메모리에 저장된다. 단계(220)에서, 이미지(I) 상의 모든 존재하는 ESL의 자동 검출이 수행된다. 획득 이미지 상의 전자 선반 라벨의 이러한 자동 검출은 전형적으로, 중앙 서버(2)의 메모리에 저장되는 가능한 전자 선반 라벨 형상의 미리 결정된 세트에 대해서 패턴 인식에 의해 수행된다.
이미지에 보이는 모든 전자 선반 라벨이 단일화된 후에, 행 검출(즉, 동일한 선반 레일(14)에 위치된 연속적인 ESL 세트의 검출)의 단계(221)가 수행될 수 있다. 행(j)은 대략적으로 정렬되는 이전 단계(220)로부터 발생하는 검출된 ESL의 각각의 세트에 대해 검출된다. 그런 다음 최저 행부터 최고 행까지 0부터 시작하는 행 번호가 매겨질 수 있다. 단계(222)에서, 각각의 행(j)의 검출된 선반 라벨은 최좌측 선반 라벨로부터 최우측 선반 라벨까지 1부터 시작하는 번호가 연속적으로 매겨진다.
이러한 시점에서, 중앙 서버(2)는 얼마나 많은 행(j)이 곤돌라(i)에서 보이는지 그리고 얼마나 많은 연속적인 선반 라벨이 각각의 행에 대응하는 각각의 선반 레일에 배열되는지를 알고 있다. 따라서, 서버는 도 1과 관련하여 위에서 정의된 바와 같이, 획득된 이미지(I)에서 보이는 각각의 ESL에 슬롯 필드(i, j, k)를 부여할 수 있다.
획득된 이미지에서 보이는 단일의 주어진 ESL에 대해 이제 뒤따르는 도 2의 방법의 모든 단계, 즉 단계(230 내지 260)가 설명될 것이다. 그러나, 상기 단계는 원하는만큼 여러 번 구현될 수 있다. 이들은 특히, 재고가 없는 선반 영역과 같은 해당 영역에서 발생할 수 있는 이벤트 또는 물품의 오류 대면을 자동 검출할 목적으로, 전체 선반의 모든 ESL 또는 선반의 지리적 영역의 모든 ESL에 대해 반복될 수 있다.
슬롯 필드(i, j, k)에 대응하는 주어진 ESL로부터 시작하여 상기 ESL에 대응하는, 이미지(I)에서 보이는 선반의 매칭 영역은 단계(230)에서 서버에 의해 식별될 수 있다. 상기 단계에서, 서버는 미리 결정된 조건을 사용한다. 리마인더(reminder)로서, 예시적인 조건은 상기 ESL과 오른쪽 측면상의 연속적인 ESL 사이에 있는 주어진 ESL 바로 위에 위치된 선반의 영역이 상기 주어진 ESL에 대응하는 선반의 영역이라는 것이다. 당업자는 매칭 영역의 인식이 서버에 의해 어떻게 수행될 수 있는지를 이해하는데 어려움이 없을 것이다. 그 후, 단계(240)에서, 서버는 결정된 선반의 영역과 관련된 레이아웃 정보를 검출한다. 그러한 레이아웃 정보 검출을 수행하는 특정 모드는 여러 실시예에 대응하는 여러 유형의 레이아웃 정보와 관련하여 아래에서 더 상세히 설명될 것이다.
이러한 시점에서, 시스템은 검출된 레이아웃 정보 및 주어진 ESL에 대응하는 슬롯 필드(i, j, k)를 대응시킬 수 있다. 실제로, 이전 단계(222)의 결과로서, 시스템은 선반에서 ESL의 순서를 알고, 따라서 각각의 보이는 ESL에 대응하는 슬롯 필드(i, j, k)를 설정할 수 있다. 도 2의 방법에서, 주어진 ESL에 대한 슬롯 필드는 단계(222)의 종료와 단계(250)의 시작 사이의 임의의 시점에서 서버에 의해 결정될 수 있다.
그 후, 단계(250)에서, 리얼로그램 데이터베이스(P)에서 이용 가능한 정보가 참조된다. 여기서의 목표는 단계(240)에서 검출된 레이아웃 정보를 특정 물품 식별자와 연결하는 것이다. 리마인더로서, 리얼로그램 데이터베이스(P)는 슬롯 필드(i, j, k)와 물품의 EAN 번호와 같은 물품 식별자(Pijk) 사이의 연관성을 포함한다. 이러한 단계(250)에서, 슬롯 필드(i, j, k)에 대한 물품 식별자(Pijk)가 검색된다. 이러한 제품 슬롯 필드와 관련하여 검색되는 식별자는 상기 제품 슬롯 필드에 대응하는 선반의 영역 내에 있는 재고로 예상되고 판매에 이용될 수 있는 물품에 대응한다.
마지막으로, 단계(260)에서, 검출된 레이아웃 정보가 체크된다. 통상적으로, 단계(230)에서 결정된 선반의 영역에 보일 것으로 예상되는 물품에 대한 물품 식별자(Pijk)를 알면, 상기 물품(Pijk)에 대한 리얼로그램 데이터베이스(P)에서 이용 가능한 정보가 참조될 수 있거나, 물품 식별자(Pijk)가 물품의 예상 정면 뷰와 같은 물품 레이아웃과 관련된 다른 정보와 연관된 임의의 다른 데이터베이스가 또한 참조될 수 있다(도 10에 대한 아래의 설명 참조).
도 2의 일반적인 방법은 선반 내에서 물품의 레이아웃을 제어하는 매우 간단하고 효과적인 방법을 제공한다. 예를 들어, 상기 방법은 선반의 검출 가능한 모든 ESL에 대해 규칙적인 간격으로 주기적으로 실행될 수 있다. 선반에 있는 물품에 대해 검출된 레이아웃 정보와 리얼로그램 데이터베이스의 예상 정보 사이의 링크가 ESL의 중재에 의해 자동으로 수행되므로, 사람의 입력이 거의 필요하지 않다. 단계(260)의 체크가 부정적인 불만족스러운 물품 또는 불만족스러운 슬롯 필드의 리스트는 운영자에게 자동으로 제공될 수 있으며, 이는 물품의 레이아웃을 정정하기 위해 적절한 조치를 취할 수 있게 한다.
방법(200)의 예시적인 실시예가 이제 설명될 것이다. 상기 실시예는 도 3 및 예시적인 도 4 내지 도 7과 관련하여 특정 곤돌라(i) 내부의 빈 영역을 검출하기 위한 방법(300)에 관한 것이다. 여기서, 검출되는 레이아웃 정보는 단순히 선반의 주어진 영역에서 물품의 존재 또는 부재이다. 또한, 이러한 특정 실시예에서, 레이아웃 정보는 획득된 이미지에서 검출된 각각의 ESL뿐만 아니라 주어진 ESL에 대해 검출된다. 환언하면, 상기 방법은 상기 곤돌라(i) 내의 모든 빈 영역을 검출하기 위해 전체 곤돌라(i)에서 실행된다. 그러나, 검출된 ESL의 전체 중에서 임의의 주어진 ESL 세트에 대해 상기 방법이 유사하게 실행될 수 있다. 단계(310 내지 322)는 전술한 단계(210 내지 222)와 정확하게 일치한다. 단계(310 내지 322)의 결과로서, 서버는 획득된 곤돌라(i)의 이미지(I)를 지체시키고, 상기 곤돌라 내의 ESL의 행(j) 및 각각의 행에서의 ESL의 순서와 함께, 상기 곤돌라의 모든 ESL을 검출한다.
ESL 검출의 단계(320)를 참조하면, 중앙 서버(2)의 디스플레이 시스템은 검출 결과를 실시간으로 표시할 수 있다. 예시적인 도면이 도 4에 주어지며: 상기 도면에서, ESL에 대응하는 이미지(I)의 검출된 영역이 점선으로 도시되고, 이들 중에서 ESL(10)이 선반(13)에 위치된다. 곤돌라(i)는 여러 선반 레일(13)을 포함하며, 여러 ESL이 각각의 선반 레일(13)에 배열된다. 이러한 방법의 단계에서, ESL에 대응하는 이미지(I)의 모든 부분이 패턴 인식에 의해 단일화된다. ESL의 형상에 대응하는 획득된 이미지(I) 상의 모든 형상은 하나의 전자 선반 라벨로서 중앙 서버(2)에 의해 인식된다.
이제 단계(321)를 참조하면, 행은 최저 행부터 최고 행까지 0부터 시작하는 번호가 매겨질 수 있다. 단계(322)에서, 각각의 행(j)의 검출된 선반 라벨은 최좌측 선반 라벨로부터 최우측 선반 라벨까지 1부터 시작하는 번호가 연속적으로 매겨진다. 상기 작동의 결과가 도 5에 표시된다. 설명을 위해서, 특정 전자 선반 라벨(10), 더 정확하게 최저 행의 좌측으로부터 시작하는 제 2 선반 라벨이 단일화된다.
도 3을 다시 참조하면, 방법(300)은 이미지(I)에서 보이는 선반의 빈 영역을 검출하기 위한 보충 단계(330)를 포함한다. 이러한 단계에서, 선반의 모든 빈 영역이 식별된다. 여기서, 빈 제품 슬롯의 식별은 선반 라벨 및 행이 단계(320, 321 및 322)에서 검출된 후에 수행된다. 그러나, 선반 라벨 및 행의 검출 이전에, 빈 제품 슬롯의 검출에 대응하는 이미지(I)의 영역을 검출하는 것이 또한 가능하다. 빈 영역의 이미지 판독 및 검출을 위한 여러 모드가 사용될 수 있다. 빈 슬롯 검출은 선반 후면의 미리 결정된 패턴 또는 선반의 행에 대한 색 인식에 의해 수행될 수 있다. 예를 들어, 선반의 최상부 표면을 보도록 허용하는 각도로 생각대로 취해진 이미지(I)에 대해서 각각의 선반의 최상부 표면이 생생한 연한 녹색이면, 단계(330)는 이미지의 생생한 연한 녹색 영역의 검출에 머물 수 있다. 비어 있지 않은 영역에 대응하는 이미지의 영역이 빈 영역에 대해 혼동되는 것을 방지하기 위해서, 선반의 최상부 표면은 특정 패턴으로 덮일 수 있고, 상기 패턴에 의한 이미지(I) 영역의 검출은 단계(330)에서 수행될 수 있다. 대안적으로, 단계(330)에서, 더 낮은 광도의 영역이 이미지(I)에서 검색될 수 있으며: 곤돌라(i)의 조명이 작동중이면, 품목을 포함하는 제품 슬롯은 이미지(I)의 빈 제품 슬롯보다 더 밝은 외관을 가질 것이다.
빈 영역의 식별 단계(330) 동안, 중앙 서버(2)가 검출을 통해 진행함에 따라서, 서버는 곤돌라의 이미지(I)의 처리 결과를 사용자에게 표시할 수 있다. 단계(330)에 따른 이미지(I)의 처리 후의 결과는 도 6에 개략적으로 표시된다. 설명을 위해서, 선반의 특정한 빈 영역(30)은 도 6에서 단일화되어 있다. 이러한 빈 영역은 상기 열의 제 4 위치에서 곤돌라(i)의 행(4)에 위치된다. 단계(330)의 결과로서, 중앙 서버(2)는 한편으로, 선반의 빈 영역에 대응하는 이미지(I)의 영역을 단일화한다. 다른 한편으로, 행(j)이 검출되고 이미지(I)에 존재하는 각각의 선반 라벨은 제품 슬롯 필드(i, j, k)와 연관될 수 있다.
그런 다음 빈 영역은 재고가 없는 물품, 아니면 시스템에서 누락된 리얼로그램 참조사항과 일치해야 한다. 여기서, 방법(300)의 일부로서, 서버는 도 7의 ESL(10)을 포함한, 보이는 각각의 ESL에 대해 단계(340 내지 351)를 수행한다. 상기 ESL(10)은 좌측에서 출발하여 인덱스 k = 4에 도달하는 4 행의 제 4 선반 라벨이다. 또한, 이미징 장치가 미리 결정된 곤돌라 또는 복수의 곤돌라의 이미지를 캡처하도록 설정되기 때문에, 곤돌라 수가 i인 것으로 이미 공지되어 있다. 따라서, 상기 ESL(10)에 대한 대응 제품 슬롯 필드는 i, 4, 4이다. 단계(340)에서, 서버는 도 5에서 발견된 ESL(10)에 대응하는 이미지(I)에서 보이는 매칭 영역(즉, 선반의 영역)을 결정하고, 상기 매칭 영역은 도 7에서 참조 번호(30)을 가진다. 그 후, 단계(341)에서, 서버는 상기 ESL(10)에 대해서, 선반의 대응 영역(즉, 영역(30))이 비어 있는 지의 여부를 설정할 수 있다. 도 6의 경우에, 영역(30)은 빈 영역으로서 실제로 검출된다. 그 후, 단계(350)에서, 리얼로그램 데이터베이스(P)를 참조하여, 서버는 슬롯 필드(i, 4,4)와 연관된 물품 식별자(Pi44)를 검색한다. 최종적으로, 단계(351)에서, 선반의 영역(30)이 비어 있기 때문에, 물품(Pi44)이 재고가 없는 것으로 결정된다. 대안적으로, 주어진 ESL에 대응하는 선반의 결정된 영역이 단계(341)에서 비어있는 것으로 밝혀지고, 서버가 단계(350)에서 연관된 물품 식별자를 검색하는데 실패하면, 선반의 상기 결정된 영역은 물품과 연관되어 있지 않으며, 그 경우에 리얼로그램 참조사항이 누락되어 있을 가능성이 있다. 이러한 경우에, 리얼로그램이 완료되어야 함을 개인에게 경고하기 위해서 특정 알람이 실시될 수 있다.
단계(320)에서 이전에 검출된 모든 ESL에 대해 단계(340 내지 351)가 실행된 후, 재고가 없는 물품(Pijk)의 리스트(L1) 또는 대안적으로 선반의 빈 영역에 대응하는 슬롯 필드의 리스트가 사용자에게 전달될 수 있다.
선택적으로, 단계(351) 후에, 중앙 서버(2)의 그래픽 인터페이스(graphical interface)는 빈 제품 슬롯을 통지하는 신호에 의해서 최종 사용자에게 선반의 시각적 표현을 표시할 수 있다. 선반의 이러한 시각적 표현은 도 4 내지 도 7의 표현에 대응할 수 있거나, 아니면 선반의 임의의 유형의 시각적 표현일 수 있다. 예를 들어, 상기 시각적 표현은 직사각형 또는 원과 같은 특정 표시에 의해서 선반의 빈 제품 슬롯을 강조하는 시각적 신호를 특징으로 할 수 있다. 그렇지 않으면, 중앙 서버(2)는 팝업 메시지(pop-up message)와 같이, 검출된 빈 영역과 연관된 슬롯 필드가 재입고되어야 한다는 시각적 알람을 송신할 수 있다. 대안적으로, 최종 사용자에 대한 선반의 시각적 표현이 없을 수 없으며, 빈 영역에 대응하는 슬롯 필드가 숫자 형태로 최종 사용자에게 전달될 수 있다.
도 8은 판매 지점의 곤돌라에 관한 대체 유형의 시각적 표현을 제공한다. 여기서, 서로 병치된 여러 곤돌라(i = 1,2,3,4)가 도시된다. 제 2 곤돌라 내부의 행 인덱스(j = 7)에 대응하는 행이 강조되어 있다. 상기 행 내에서, 선반 라벨(k = 1 내지 k = 9)이 도시되어 있다. 여러 곤돌라에 대한 이러한 유형의 공동 시각 표현은 유리하게, 여러 곤돌라에서 빈 영역을 공동으로 모니터링하기 위해서 방법(300)에 의해 검출된 빈 영역을 강조하는 시각적 신호 및/또는 경고 메시지와 함께, 인간 사용자에 의해 사용될 수 있다.
따라서, 도 3의 방법(300)은 빈 영역을 자동으로 검출하는 매우 간단한 방법을 제공한다. 상기 방법을 수행하는 중앙 서버(2)는 적절한 조치를 취하기 위해서 재고 관리를 위한 시스템과 접속될 수 있다. 이러한 방법은 간단한 이미지 판독에 의존하기 때문에 매우 간단하다.
이제, 제 2 실시예가 도 9와 관련하여 설명될 것이다. 물품 이미지 데이터베이스(A)의 예상 정면 뷰와 관련하여 선반 내부의 불만족스러운 정면 뷰를 검출하는 방법(900)이 제공된다. 이러한 특정 실시예에서, "레이아웃 정보"는 선반의 결정된 영역에서 볼 수 있는 물품의 정면 측의 도면이다.
먼저, 단계(910)에서, 도 3의 방법의 단계(310)와 유사하게, 곤돌라 또는 곤돌라(i)를 포함한 복수의 곤돌라의 이미지(I)가 획득된다. 결과적으로, 곤돌라(i)의 이미지(I)가 얻어지고, 중앙 서버(2)의 메모리에 저장된다.
상기 획득된 이미지(I)를 기본으로 사용하여, 획득된 이미지에 대한 ESL의 인식 및 상기 ESL의 순서 결정을 하는 단계(920)는 도 3의 방법의 전술한 단계(320 내지 322)와 유사하게 수행된다.
그 후, 단계(930)에서, 도 3의 방법의 단계(340)와 유사하게, 주어진 ESL에 대응하는 선반의 매칭 영역이 결정된다. 유리하게, 단계(930 내지 960)는 단계(920)에서 검출된 모든 ESL에 대해 수행된다. 다른 한편으로, 획득된 이미지(I)의 행이 자동으로 검출되어 각각의 행 내의 선반 라벨이 카운트되기 때문에, 고려된 전자 선반 라벨은 단계(931)에서 슬롯 필드(i, j, k)와 매칭될 수 있다. 대안적으로, ESL이 선반의 영역과 대응하기 전에 슬롯 필드가 결정될 수 있다(따라서 단계(930 및 931)은 반대로 될 수 있다). 최종적으로, 단계(932)에서, 선반의 결정된 영역 내에서, 서버는 물품의 실제 정면 뷰에 대응하는 이미지(I)의 영역을 단일화한다. 결정된 영역이 하나의 품목 라인만을 포함하면, 실제 정면 뷰는 라인에서 제 1 물품의 정면으로서 결정된다. 선반의 결정된 영역이 하나 초과의 품목 라인을 포함하면, 선반의 이러한 단일 영역에 대해 복수의 실제 정면 뷰가 고려되고, 상기 실제 정면 뷰의 각각에 대해서 다음의 비교 단계(960)가 반복되거나, 품목 라인 중 하나만이 고려되고 단지 하나의 실제 정면 뷰만이 획득된다.
이어서, 방법(900)은 주어진 ESL 및 선반의 대응 영역에 대해서 단계(940 내지 960)를 실행하는 것을 포함한다. 단계(940)에서, 도 3의 방법의 단계(350)와 유사하게, 슬롯 필드(i, j, k)에 대응하는 영역에 어떤 물품이 표시되어야 하는지를 결정하기 위해서 리얼로그램 데이터베이스(P)를 참조한다. 따라서, 물품 식별자(Pijk)는 리얼로그램 데이터베이스(P)로부터 검색된다. 이어서, 단계(950)에서, 중앙 서버(2)는 물품 이미지 데이터베이스(A)를 참조한다. 물품 이미지 데이터베이스(A)에서 결정된 물품 식별자(Pijk)와 연관된 사전 등록 이미지가 검색된다. 이러한 이미지는 결정된 물품 식별자(Pijk)의 예상 정면 뷰에 대응한다. 상기 이미지는 전형적으로, 제품 슬롯 필드와 물품 식별자 사이의 연관성을 보여주기 위해서 리얼로그램 데이터베이스(P)의 시각적 표현에 사용되는 정면 뷰의 이미지이다.
단계(960)에서, 획득된 이미지(I)에서 보이는 실제 정면 뷰와 물품 이미지 데이터베이스(A)로부터 검색된 예상 정면 뷰 사이의 유사성 비율이 계산된다. 이러한 단계(960)의 목적은 선반 내의 제품 슬롯에 도시된 물품의 실제 정면 뷰가 예상 정면 뷰와 일치하는지를 결정하는 것이다. 특히, 제품 슬롯에 도시된 물품이 리얼로그램에서 예상되는 것과 다른 기준에 대응하는 상황을 검출하는 것이 가능하다. 이러한 방식으로, 불일치를 유발하는 선반 영역이 추적될 수 있기 때문에, 리얼로그램에서 계획된 물품의 예상 배치와 판매 지점에서 물품의 실제 배치 사이의 불일치가 자동으로 검출되고 쉽게 해결할 수 있다. 이러한 단계에서, 올바른 물품이 결정된 영역에서 고객에게 보이지만 예상된 정면 뷰는 아닌 상황을 검출하는 것이 또한 가능하다. 예를 들어, 영역의 정면 품목이 올바른 위치에 있지 않으면, 예상된 정면 뷰와 계산된 유사성 비율이 낮아진다. 실제로, 한편으로, 제품 슬롯 필드(i, j, k)에 대한 실제 정면 뷰에 대응하는 획득된 이미지(I)의 영역에 대한 픽셀과 다른 한편으로, 실제 정면 뷰에 대응하는 획득된 이미지(I)의 영역에 대한 치수와 일치하도록 재-치수화된, 물품 데이터베이스(A)에 포함된 예상 정면 뷰의 사전 등록된 이미지의 적응된 버전에 대한 픽셀 사이의 비교가 수행될 수 있다. 이미지를 비교하고 유사성 비율을 계산하기 위한 임의의 다른 공지된 기술이 단계(960)에서 실행될 수 있다. 특히, 이미지(I) 내에서 예상 정면 뷰와 실제 정면 뷰 사이의 광도 또는 방위의 가능한 변화를 고려하기 위해서 간단한 픽셀 비교보다 더 스마트한 알고리즘을 사용할 수 있다.
첨부된 도 10과 관련하여 예가 제공된다. 최좌측 이미지(I)는 곤돌라(i)의 획득된 이미지(I)의 일부에 대응한다. 특정 물품 정면 뷰(40)는 상기 이미지에서 볼 수 있다: 이는 망고 주스 병의 정면 뷰이다. 단계(930)에서, 상기 물품 정면 뷰는 제품 슬롯 필드(i, 0, 8), 곤돌라(i), 최저측으로부터 시작하는 제 1 행, 및 최저측 선반 라벨로부터 시작하는 상기 행의 제 8 전자 선반 라벨에 대응하는 것으로 결정된다. 도 10의 중심 이미지로 개략적으로 표현되는 리얼로그램 데이터베이스(P)에서, 슬롯 필드(i, 0, 8)는 물품 참조 "망고 주스"에 자체로 대응하는 물품 식별자와 실제로 연관된다. 물품과 연관된 가격 또는 대면 정보와 같은 다른 물품 정보가 리얼로그램 데이터베이스(P)에 포함될 수 있다(아래의 도 11의 설명 참조). 최우측 이미지는 곤돌라(i)의 시각적으로 예상되는 전체 뷰에 해당하는, 리얼로그램 데이터베이스(P)와 물품 이미지 데이터베이스(A) 사이의 조합 결과이다. 실제로, 상기 시각적 표현에 도시된 모든 제품 슬롯은 물품 식별자가 상기 영역의 슬롯 필드와 관련하여 리얼로그램 데이터베이스(P)에 등록되는 물품에 대한 예상 정면 뷰를 포함한다. 실제 정면 뷰(40)에서 볼 수 있는 망고 주스에 대하여, 상기 정면 뷰는 단계(960)에서 만족스러운 것으로 결정되는데, 이는 슬롯 필드(i, 0, 8)에 대한 최우측 이미지에 도시된 예상 정면 뷰(41)가 최좌측 이미지의 물품 정면 뷰와 유사하기 때문이다. 예상 정면 뷰(41) 및 실제 정면 뷰(40)는 상이한 광도 조건 및 상이한 시야각에 의해 약간 다를 수 있다. 이미지(I)를 촬영하는 상기 조건은 실제 정면 뷰와 예상 정면 뷰 사이의 유사성 비율을 계산하는 동안 고려될 수 있다.
이미지(I) 내의 모든 검출된 모든 제품 슬롯, 또는 대안적으로 검출된 제품 슬롯의 단지 일부에 대한 단계(940 내지 960)의 완료 후에, 대응하는 제품 슬롯에 제공된 정면 뷰가 예상된 정면 뷰와 일치하지 않는 결정된 슬롯 필드의 리스트(L2) 및/또는 물품 식별자가 출력될 수 있고, 따라서 상기 목록은 불만족스러운 제품 정면 뷰를 강조한다. 미리 결정된 최소 유사성 비율이 중앙 서버(2)에 미리 등록될 수 있으며, 그 초과의 비율에서는 실제 정면 뷰가 만족스러운 것으로 간주되고, 대응 제품 슬롯 필드 및/또는 물품 식별자는 불만족스러운 제품 정면 뷰를 강조하는 리스트에 포함되지 않아야 한다.
불만족스러운 정면 뷰에 대응하는 슬롯 필드 및/또는 물품 식별자의 출력 리스트는 최종 사용자에게 검출된 불일치를 알람하기 위한 시각적 신호를 제공하는 단계(970)에서 사용될 수 있다. 예를 들어, 도 10의 최우측에서 보이는 표현은 불만족스러운 정면 뷰에 대응하는 강조된 영역을 포함할 수 있다.
도 9의 불만족스러운 대면을 검출하는 방법은 도 2의 빈 제품 슬롯을 검출하는 방법과는 완전히 독립적임을 주목해야 한다. 그러나, 두 방법은 유리하게 조합될 수 있다. 예를 들어, 빈 영역의 검출 후에, 유사성 비율의 계산이 복수의 또는 나머지 모든 제품 슬롯에 대해 실행될 수 있다. 빈 영역(및 대응하는 물품 식별자)과 실제 정면 뷰가 예상된 정면 뷰와 일치하지 않는 영역 모두를 통지하는 알람이 최종 사용자에게 궁극적으로 송신될 수 있다. 대안적으로, 실제 정면 뷰와 예상 정면 뷰 사이의 유사성 비율의 계산은 선반의 대응하는 영역이 비어 있다는 결정을 또한 포함할 수 있다. 후자의 경우에, 영역이 비어 있는 지의 여부 및 물품 정면 뷰가 만족스러운 지의 여부에 관한 2 가지 결정이 공동으로 수행된다.
예시적인 도 12 및 13과 함께, 제 3 및 최종 실시예가 도 11과 관련하여 이제, 설명될 것이다. 이러한 실시예는 리얼로그램 데이터베이스(P)에 포함된 예상 대면 정보에 대하여 선반 내부의 불만족스러운 물품 대면을 검출하기 위한 방법(1100)에 관한 것이다. 이러한 특정 실시예에서, "레이아웃 정보"는 선반의 결정된 영역 내부의 품목 라인의 수이다. 대안적으로, 다른 종류의 대면 정보(예를 들어, 특정 제품 전용 선반 영역의 길이)가 고려될 수 있다.
물품의 불만족스러운 정면 뷰의 검출을 위한 전술한 방법(900)과 유사하게, 방법(1100)은 선반의 각각의 가시적인 ESL에 대해 유리하게 수행되지만, 대안적으로 하나의 주어진 ESL 또는 특정 세트의 ESL에 대해서만 수행될 수 있다.
단계(1110 내지 1131)는 분명히 방법(900)의 단계(910 내지 931)와 유사하다. 즉, ESL은 이미지 인식에 의해 검출되고 정렬되며, 주어진 ESL에 대해서 선반의 대응 영역이 결정되고 대응 슬롯 필드(i, j, k)가 또한 결정된다.
그 후, 선반의 결정된 영역에서 보이는 다수의 품목 라인의 자동 인식의 단계(1132)가 수행된다. 이론적으로, 선반의 결정된 영역 내의 표시된 모든 품목 라인은 동일한 제품이어야 한다 - 단지 하나의 ESL만이 전체 결정된 영역에 대응하기 때문이다 -. 그렇지 않은 경우에, 전술한 방법(900)은 실제 정면 뷰 중 하나가 리얼로그램 데이터베이스(P)에 포함된 정보와 관련하여 실수한 결과를 반환해야 한다. 여기서는 선반의 상기 영역 내부의 모든 품목 라인이 동일한 제품이라 가정될 것이다.
후속 단계(1140)는 방법(900)의 단계(940)와 유사하며, 여기서는 리얼로그램 데이터베이스(P)에서 이전에 결정된 슬롯 필드(i, j, k)와 연관된 물품 식별자(Pijk)가 결정된다. 이어서, 단계(1150)에서, 선반의 결정된 영역에서 물품(Pijk)에 대한 예상 라인의 수는 리얼로그램 데이터베이스(P)(또는 서버가 통신하여 대면 정보를 물품 식별자와 관련시킬 수 있는 다른 데이터베이스)로부터 검색된다. 최종적으로, 단계(1160)에서, 검색된 예상 라인의 수는 실제 검출된 라인의 수와 비교된다.
방법(900)의 단계(970)와 유사하게, 단계(1170)는 선반의 시각적 신호 강조 영역 및/또는 물품 식별자의 목록(L3) 및/또는 실제 대면이 예상 대면과 일치하지 않는 것으로 밝혀진 슬롯 필드의 목록을 최종 사용자에게 제공하는 것을 포함할 수 있다.
불만족스러운 물품 대면의 검출을 위한 상기 방법(1100)의 작동의 예는 도 12에서 시작하는 첨부 도면에서 제공된다. 상기 도면에서, 전술한 도 4 내지 도 7과 관련하여 동일한 곤돌라(i)가 고려된다. 이제는 다른 ESL(11)을 고려한다. 상기 ESL은 제 2 위치(k = 2)에서 아래 측(j = 2)으로부터 시작하여 제 3 행에 위치된다. 도 12에서 알 수 있는 바와 같이, 선반 라벨(11)은 동일한 제품의 복수의 라인에 대응한다. 방법(1100)의 과정에서 ESL(11)에 도달하고, 단계(1132)의 결과로서, 슬롯 필드(i, 2, 2)에 대응하는 ESL(11)에 대한 선반의 매칭 영역이 3 개의 제품 라인을 포함하는 것으로 검출된다. 이어서, 단계(1140)에서 그리고 촬영된 곤돌라 내에서 물품의 예상된 배열을 나타내는 리얼로그램 데이터베이스(P)를 참조하여, 물품 식별자(Pi22)가 결정된다.
도 13을 참조하고, 단계(1150)에서, 서버는 제품의 예상 라인의 수의 형태로 슬롯 필드(i, 2, 2)에 대한 예상 대면 정보를 리얼로그램 데이터베이스(P)로부터 검색한다. 이러한 경우에, 예상 라인의 수는 4이며, 이는 단계(1150)에서 실제 대면이 예상 대면과 일치하지 않는다는 결정을 초래한다. 따라서 실제 검출된 대면 정보는 리얼로그램 데이터베이스에 저장된 예상 대면을 따르지 않는다.
전술한 3 개의 실시예의 방법(300, 900 및 1100)은 이들이 개별적으로 그리고 독립적으로 설명되었지만, 불만족스러운 물품 레이아웃과 관련된 복수의 가능한 이벤트의 검출을 위해 유리하게 조합될 수 있다. 게다가, 당업자는 바람직하게, 사람의 입력 없이 자동화된 방식으로 선반의 획득된 이미지에서 판독 가능한 임의의 다른 종류의 레이아웃 정보가 본 발명의 가능한 구현예로서 고려될 수 있음을 쉽게 이해할 것이다.
게다가, 전술한 임의의 방법은 판매 영역의 선반에서 물품 레이아웃과 관련된 성과 지표를 결정하기 위한 시스템과 매우 유리하게 연결될 수 있다. 예를 들어, 이전에 설명된 방법 중 하나와 관련된 서버는 판매 지점의 모든 곤돌라 또는 심지어 선반의 모든 영역에 대한 만족 지수를 계산하도록 구성될 수 있다. 그러한 만족 지수는 다음의 중요도 순서, 즉 물품의 존재, 현재 물품이 예상 물품 기준과 일치하는 지의 여부, 실제 대면이 예상 대면과 일치하는 지의 여부, 도시된 물품이 예상된 레이아웃과 관련하여 올바른 방향으로 있는 지의 여부에 따라서 여러 가능한 기준을 고려할 수 있다.
Claims (15)
- 곤돌라(gondola)에서 예상되는 물품(article)의 레이아웃(layout)을 나타내는 리얼로그램 데이터베이스(realogram database; P)를 이용하여 판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법으로서,
상기 곤돌라는 적어도 하나의 전자 선반 라벨(10)을 포함하며, 각각의 전자 선반 라벨(10)은 단일 제품 슬롯 필드(i, j, k)를 갖는 곤돌라의 매칭 영역(matching area)에 대응하며, 상기 슬롯 필드는:
- 곤돌라 번호(i),
- 하나의 특정 곤돌라(i) 내의 전자 선반 라벨의 연속적인 행(row)(1,…, j,…) 중 하나에 대응하는 행 번호(j),
- 하나의 특정 행(j) 내의 연속적인 전자 선반 라벨(10) 중 하나에 대응하는 라벨 번호(k)를 포함하며,
방법(200)은 컴퓨터-구현되는:
- 이미징 장치에 의해 곤돌라의 이미지(I)의 획득 단계(210);
- 곤돌라의 획득 이미지(I)에서 전자 선반 라벨(10)의 자동 검출 단계(220);
- 획득 이미지에서 전자 선반 라벨의 행(1,…, j,…)의 자동 검출 단계(221)를 포함하는 방법에 있어서;
- 획득 이미지에서 보이는 주어진 전자 선반 라벨에 대해서, 상기 전자 선반 라벨의 행 번호(j) 및 라벨 번호(k)의 결정, 및 대응하는 제품 슬롯 필드(i, j, k)의 결정 단계,
- 획득 이미지(I)에서 상기 전자 선반 라벨에 대응하는 곤돌라의 매칭 영역의 결정 단계,
- 획득 이미지(I)를 사용하는 이미지 인식에 의해, 곤돌라의 상기 매칭 영역에 도시된 물품에 관한 레이아웃 정보의 검출 단계,
- 리얼로그램 데이터베이스(P)에 대한 접근 단계로서, 각각의 슬롯 필드가 상기 리얼로그램 데이터베이스(P)의 물품 식별자와 연관되는 접근 단계,
- 결정된 슬롯 필드(i, j, k)와 연관된 물품 식별자(Pijk)의 리얼로그램 데이터베이스(P)에서의 식별 단계,
- 검출된 레이아웃 정보와 식별된 물품(Pijk)에 대한 리얼로그램 데이터베이스에 저장된 예상 레이아웃 사이의 일치성(compliance) 확인 단계를 더 포함하는 것을 특징으로 하는,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 1 항에 있어서,
각각의 전자 선반 라벨은 라벨 데이터베이스(DB)에서 단일 물품 식별자와 연관되며, 특정 대응 슬롯 필드를 갖는 주어진 전자 선반 라벨이 상기 라벨 데이터베이스(DB)에서 특정 물품 식별자와 연관되거나 재-연관될 때마다, 상기 대응 슬롯 필드(i, j, k)는 또한, 리얼로그램 데이터베이스(P)에서 상기 특정 물품 식별자와 연관되거나 재-연관되어, 라벨 데이터베이스에 대해 실시간으로 리얼로그램 데이터베이스(P)의 업데이트를 초래하는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 1 항 또는 제 2 항에 있어서,
상기 곤돌라의 이미지(I)의 획득 단계(310) 후에, 이미지 인식에 의해 상기 획득 이미지(I)에서 곤돌라의 적어도 하나의 빈 영역(30)의 식별 단계(322)를 더 포함하며,
상기 주어진 전자 선반 라벨에 대해서, 곤돌라의 결정된 영역에서 검출된 레이아웃 정보는 상기 영역이 비어 있다는 정보이며, 따라서 식별된 물품(Pijk)이 곤돌라에서 재고가 없다는 결정 단계(350)를 초래하는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 3 항에 있어서,
상기 선반의 빈 영역(30)의 식별은 선반의 후면 또는 선반의 행의 미리 결정된 패턴에 대한 색 인식에 의해 수행되는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 1 항에 있어서,
물품 이미지 데이터베이스(A)에서 식별된 물품(Pijk)과 연관된 미리 등록된 이미지(41)의 검색 단계(950)를 더 포함하며, 미리 등록된 이미지는 결정된 물품 식별자(Pijk)에 대한 예상 정면 뷰(expected front view)이며,
이후, 상기 방법은 한편으로, 레이아웃 정보를 검출하는데 사용되는, 곤돌라의 매칭 영역에 대한 실제 정면 뷰에 대응하는 획득 이미지(40)의 영역과, 다른 한편으로, 예상 정면 뷰의 상기 미리 등록된 이미지(41) 사이의 유사성 비율의 계산 단계(960)를 포함하며,
상기 방법은 유사성 비율의 값으로부터 정면 뷰가 불만족스럽다고 결정되는 결정 슬롯 필드(i, j, k) 또는 물품 식별자(Pijk)의 리스트(L2)의 출력 단계(970)를 포함하는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 1 항에 있어서,
상기 결정된 슬롯 필드(i, j, k)에 대한 예상 대면 정보의 리얼로그램 데이터베이스(P)에서의 검색 단계(1150), 및
상기 이미지 인식에 의해, 예상 대면 정보와 곤돌라(31)의 매칭 영역에 대해 획득된 이미지(I)에서 보이는 실제 대면 사이의 일치성 확인 단계(1160)를 더 포함하는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 6 항에 있어서,
상기 예상 대면 정보는 곤돌라에 표시되어야 하는 동일 물품(Pijk)의 연속적인 라인의 수인 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 1 항에 있어서,
곤돌라의 빈 공간(30)을 강조하는 시각적 신호, 또는
곤돌라의 검출된 빈 영역과 연관된 물품 식별자(Pijk) 또는 슬롯 필드(i, j, k)에 재입고되어야 한다는 시각적 알람(visual alert), 또는
예상 정면 뷰와 일치하지 않는 곤돌라의 영역을 강조하는 시각적 신호, 또는
예상 대면과 일치하지 않는 곤돌라(31)의 영역을 강조하는 시각적 신호와 함께,
그래픽 인터페이스는 곤돌라(1)의 표현을 사용자에게 표시(260, 970, 1170)할 수 있는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 1 항에 있어서,
상기 획득 이미지(I) 상의 전자 선반 라벨의 자동 검출은 가능한 전자 선반 라벨 형상의 미리 결정된 세트에 대한 패턴 인식에 의해 수행되는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 제 1 항에 있어서,
상기 매칭 영역은 획득 이미지(I)의 주어진 검출 전자 선반 라벨(10)에 대하여, 상기 전자 선반 라벨 바로 위에 위치되고 상기 전자 선반 라벨과 오른쪽 측면 상의 연속적인 선반 라벨 사이에 위치된 획득 이미지의 영역이 상기 전자 선반 라벨(10)에 대응하는 곤돌라의 매칭 영역의 이미지로서 결정되는 것으로 정의되는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 방법. - 코드 명령어(code instruction)가 컴퓨터 장치의 서버에서 실행될 때, 제 1 항에 따른 방법을 구현하기 위한 코드 명령어를 포함하는 것인,
컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램 제품. - 판매 영역의 곤돌라(1)에서 물품의 레이아웃을 체크하는 시스템으로서,
- 곤돌라에 배열된 복수의 전자 선반 라벨(10),
- 라벨 데이터베이스(DB)와 통신하도록 구성되는 서버(2)로서, 고유한 라벨 식별자에 의해 식별되는 각각의 전자 선반 라벨(10)이 단일 물품 식별자와 연관되며, 전자 선반 라벨이 또한 단일 제품 슬롯 필드(i, j, k)를 갖는, 곤돌라의 매칭 영역에 대응하며, 서버가 또한 리얼로그램 데이터베이스(P)와 통신하도록 구성되며, 각각의 슬롯 필드(i, j, k)가 물품 식별자(Pijk)와 연관되는, 서버(2),
- 곤돌라(1)의 이미지(I)를 획득할 수 있는 이미징 장치를 포함하는, 판매 영역의 곤돌라(1)에서 물품의 레이아웃을 확인하는 시스템으로서,
상기 서버는:
- 이미징 장치에 의해 제공된 곤돌라(1)의 이미지(I)에서 전자 선반 라벨(10)의 자동 인식을 실행하고,
- 전자 선반 라벨에 대응하는 슬롯 필드(i, j, k), 및 전자 선반 라벨에 대응하는 곤돌라의 영역을 결정하고,
- 상기 이미지(I)에서, 곤돌라의 주어진 영역에서 보이는 물품에 대한 레이아웃 정보를 검출하고,
- 리얼로그램 데이터베이스(P)에 저장된 예상 레이아웃 정보와 관련하여, 검출된 레이아웃 정보를 확인하도록 추가로 구성되는 것을 특징으로 하는,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 시스템. - 제 12 항에 있어서,
상기 서버는 물품 이미지 데이터베이스(A)와 통신하도록 추가로 구성되며, 각각의 물품 식별자(Pijk)는 상기 식별된 물품에 대한 예상 정면 뷰의 미리 등록된 이미지(41)와 연관되며,
상기 서버는 검출된 레이아웃 정보에 기여하는 실제 정면 뷰에 대응하는 획득된 이미지(40)의 영역을 예상 정면 뷰와 비교할 수 있는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 시스템. - 제 12 항 또는 제 13 항에 있어서,
상기 획득된 이미지에서의 검출 가능한 레이아웃 정보가 곤돌라의 빈 영역(30)의 자동 인식을 포함하는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 시스템. - 제 12 항에 있어서,
상기 획득된 이미지에서의 검출 가능한 레이아웃 정보가 곤돌라의 상기 영역에서의 라인의 수와 같은, 곤돌라의 영역에서 보이는 실제 대면을 포함하며, 서버는 상기 실제 대면을 리얼로그램 데이터베이스(P)에서 검색된 예상 대면 정보와 비교할 수 있는 것인,
판매 영역의 곤돌라에서 물품의 레이아웃을 확인하는 시스템.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1758650 | 2017-09-19 | ||
| FR1758650A FR3071341B1 (fr) | 2017-09-19 | 2017-09-19 | Procede mis en oeuvre par camera de controle de disposition d'articles pour des etageres equipees d'etiquettes electroniques de gondole |
| PCT/EP2018/075221 WO2019057716A1 (en) | 2017-09-19 | 2018-09-18 | METHOD FOR CONTROLLING ARRANGEMENT OF ARTICLES IMPLEMENTED BY CAMERA FOR SHELVES EQUIPPED WITH SHELF ELECTRONIC TAGS |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20200108271A KR20200108271A (ko) | 2020-09-17 |
| KR102638616B1 true KR102638616B1 (ko) | 2024-02-21 |
Family
ID=61003079
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020207011262A KR102638616B1 (ko) | 2017-09-19 | 2018-09-18 | 전자 선반 라벨이 장착된 선반용 카메라-구현된 물품 레이아웃 제어 방법 |
Country Status (9)
| Country | Link |
|---|---|
| US (1) | US11989684B2 (ko) |
| EP (1) | EP3685327B1 (ko) |
| JP (1) | JP7220221B2 (ko) |
| KR (1) | KR102638616B1 (ko) |
| CN (1) | CN111684477B (ko) |
| AU (1) | AU2018336847A1 (ko) |
| CA (1) | CA3076228A1 (ko) |
| FR (1) | FR3071341B1 (ko) |
| WO (1) | WO2019057716A1 (ko) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019087519A1 (ja) * | 2017-10-30 | 2019-05-09 | パナソニックＩｐマネジメント株式会社 | 棚監視装置、棚監視方法、及び、棚監視プログラム |
| DE102018129886A1 (de) * | 2018-11-27 | 2020-05-28 | Chep Technology Pty Ltd. | Warenbevorratungssystem |
| TWI799712B (zh) * | 2019-06-05 | 2023-04-21 | 聯詠科技股份有限公司 | 具有貨物資訊的操作方法和其非暫時性電腦可讀取媒體及電腦程式產品 |
| EP4016384A4 (en) * | 2019-08-16 | 2023-05-31 | Hanshow Technology Co., Ltd. | METHOD, DEVICE AND SYSTEM FOR IDENTIFYING ARTICLES ON A SHELF |
| CN113643083A (zh) * | 2020-04-27 | 2021-11-12 | 京东方科技集团股份有限公司 | 一种商品标记及展示方法、服务器、终端及商品展示系统 |
| USD980322S1 (en) * | 2020-07-23 | 2023-03-07 | Elite Creative Solutions, Llc | Tag for an electronic shelf display |
| JP2022053849A (ja) * | 2020-09-25 | 2022-04-06 | 東芝テック株式会社 | 画像処理装置及び画像処理システム並びにその制御プログラム |
| CN113536881A (zh) * | 2021-02-24 | 2021-10-22 | 上海汉时信息科技有限公司 | 缺货检测方法、货架排面缺货检测的边缘计算设备及系统 |
| CN112883955B (zh) * | 2021-03-10 | 2024-02-02 | 洛伦兹（北京）科技有限公司 | 货架布局检测方法、装置及计算机可读存储介质 |
| FR3122762A1 (fr) * | 2021-05-07 | 2022-11-11 | Captana Gmbh | Séparateur pour un support de rayon, comprenant un émetteur de lumière |
| FR3122763A1 (fr) * | 2021-05-07 | 2022-11-11 | Captana Gmbh | Procédé automatisé de réglage d’un paramètre de visualisation d’un dispositif d’imagerie en magasin |
| FR3122764A1 (fr) * | 2021-05-07 | 2022-11-11 | Captana Gmbh | Dispositif d’imagerie d’étagère pour un support d’étagère et un système d’étagère comprenant le dispositif d’imagerie d’étagère |
| CN113935774A (zh) * | 2021-10-15 | 2022-01-14 | 北京百度网讯科技有限公司 | 图像处理方法、装置、电子设备及计算机存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012126532A (ja) | 2010-12-16 | 2012-07-05 | Japan Tobacco Inc | 商品管理装置、商品管理方法およびプログラム |
| JP2017004505A (ja) | 2015-05-16 | 2017-01-05 | タタ コンサルタンシー サービシズ リミテッドＴＡＴＡ Ｃｏｎｓｕｌｔａｎｃｙ Ｓｅｒｖｉｃｅｓ Ｌｉｍｉｔｅｄ | 視覚分析に基づくプラノグラム・コンプライアンス照合のための方法及びシステム |
| WO2017083424A1 (en) | 2015-11-09 | 2017-05-18 | Simbe Robotics, Inc. | Method for tracking stock level within a store |
| JP2017162375A (ja) * | 2016-03-11 | 2017-09-14 | パナソニックＩｐマネジメント株式会社 | 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法 |
Family Cites Families (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7693757B2 (en) * | 2006-09-21 | 2010-04-06 | International Business Machines Corporation | System and method for performing inventory using a mobile inventory robot |
| US8630924B2 (en) * | 2007-08-31 | 2014-01-14 | Accenture Global Services Limited | Detection of stock out conditions based on image processing |
| US8189855B2 (en) * | 2007-08-31 | 2012-05-29 | Accenture Global Services Limited | Planogram extraction based on image processing |
| KR20110000789A (ko) | 2009-06-29 | 2011-01-06 | (주)쓰리디미디어솔루션코리아 | 이미지 인식 기술을 이용하여 매장 진열 상품을 자동으로 정량화 하는 방법과 시스템 |
| JP2011096038A (ja) | 2009-10-30 | 2011-05-12 | Seiko Instruments Inc | 位置情報取得装置および位置情報取得方法 |
| JP2011096039A (ja) * | 2009-10-30 | 2011-05-12 | Seiko Instruments Inc | 情報表示システム、管理サーバ及び電子棚札システム |
| JP6301743B2 (ja) * | 2014-06-05 | 2018-03-28 | 東芝テック株式会社 | 棚札管理装置およびその制御プログラム |
| US10176452B2 (en) * | 2014-06-13 | 2019-01-08 | Conduent Business Services Llc | Store shelf imaging system and method |
| EP3032459A1 (en) * | 2014-12-10 | 2016-06-15 | Ricoh Company, Ltd. | Realogram scene analysis of images: shelf and label finding |
| US9483704B2 (en) * | 2014-12-10 | 2016-11-01 | Ricoh Co., Ltd. | Realogram scene analysis of images: superpixel scene analysis |
| US9442958B2 (en) * | 2014-12-24 | 2016-09-13 | International Business Machines Corporation | Product identification via image analysis |
| US9864969B2 (en) * | 2015-06-26 | 2018-01-09 | Toshiba Tec Kabushiki Kaisha | Image processing apparatus for generating map of differences between an image and a layout plan |
| MA43332A (fr) | 2015-07-27 | 2018-06-06 | Ses Imagotag | Procédé de mise à jour de données d'association entre des articles et des emplacements |
| US10592854B2 (en) * | 2015-12-18 | 2020-03-17 | Ricoh Co., Ltd. | Planogram matching |
| KR20170091298A (ko) * | 2016-02-01 | 2017-08-09 | (주)노스브릿지 | Ｅｓｌ 시스템 및 그 관리 방법 |
| CN106296088A (zh) * | 2016-08-09 | 2017-01-04 | 王茂 | 基于物联网的托盘物流管理系统的工作方法 |
| US10832436B2 (en) * | 2018-04-05 | 2020-11-10 | Symbol Technologies, Llc | Method, system and apparatus for recovering label positions |
-
2017
- 2017-09-19 FR FR1758650A patent/FR3071341B1/fr not_active Expired - Fee Related
-
2018
- 2018-09-18 AU AU2018336847A patent/AU2018336847A1/en active Pending
- 2018-09-18 KR KR1020207011262A patent/KR102638616B1/ko active IP Right Grant
- 2018-09-18 JP JP2020537855A patent/JP7220221B2/ja active Active
- 2018-09-18 CA CA3076228A patent/CA3076228A1/en active Pending
- 2018-09-18 US US16/648,120 patent/US11989684B2/en active Active
- 2018-09-18 CN CN201880074838.1A patent/CN111684477B/zh active Active
- 2018-09-18 WO PCT/EP2018/075221 patent/WO2019057716A1/en unknown
- 2018-09-18 EP EP18766297.8A patent/EP3685327B1/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012126532A (ja) | 2010-12-16 | 2012-07-05 | Japan Tobacco Inc | 商品管理装置、商品管理方法およびプログラム |
| JP2017004505A (ja) | 2015-05-16 | 2017-01-05 | タタ コンサルタンシー サービシズ リミテッドＴＡＴＡ Ｃｏｎｓｕｌｔａｎｃｙ Ｓｅｒｖｉｃｅｓ Ｌｉｍｉｔｅｄ | 視覚分析に基づくプラノグラム・コンプライアンス照合のための方法及びシステム |
| WO2017083424A1 (en) | 2015-11-09 | 2017-05-18 | Simbe Robotics, Inc. | Method for tracking stock level within a store |
| JP2017162375A (ja) * | 2016-03-11 | 2017-09-14 | パナソニックＩｐマネジメント株式会社 | 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| FR3071341A1 (fr) | 2019-03-22 |
| JP7220221B2 (ja) | 2023-02-09 |
| US20200234227A1 (en) | 2020-07-23 |
| AU2018336847A1 (en) | 2020-05-07 |
| CA3076228A1 (en) | 2019-03-28 |
| CN111684477A (zh) | 2020-09-18 |
| US11989684B2 (en) | 2024-05-21 |
| FR3071341B1 (fr) | 2019-09-20 |
| KR20200108271A (ko) | 2020-09-17 |
| WO2019057716A1 (en) | 2019-03-28 |
| JP2020534630A (ja) | 2020-11-26 |
| EP3685327A1 (en) | 2020-07-29 |
| CN111684477B (zh) | 2024-06-18 |
| EP3685327B1 (en) | 2022-03-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102638616B1 (ko) | 전자 선반 라벨이 장착된 선반용 카메라-구현된 물품 레이아웃 제어 방법 | |
| US20210398099A1 (en) | Estimating shelf capacity from image data to improve store execution | |
| US11978016B2 (en) | Selective usage of product models | |
| US11562581B2 (en) | Camera configured to be mounted to store shelf | |
| US20190149725A1 (en) | Using augmented reality for image capturing a retail unit | |
| EP3695365A1 (en) | Method for initializing or updating a realogram database for a shelf space, using optical signals emitted by electronic shelf labels | |
| US20220383248A1 (en) | Method for scene segmentation | |
| CN107622437B (zh) | 一种即到即取红酒的系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right |