JP2018147028A - ラベル生成装置及びプログラム - Google Patents

ラベル生成装置及びプログラム Download PDF

Info

Publication number
JP2018147028A
JP2018147028A JP2017038404A JP2017038404A JP2018147028A JP 2018147028 A JP2018147028 A JP 2018147028A JP 2017038404 A JP2017038404 A JP 2017038404A JP 2017038404 A JP2017038404 A JP 2017038404A JP 2018147028 A JP2018147028 A JP 2018147028A
Authority
JP
Japan
Prior art keywords
product
label
information
shelf
article
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017038404A
Other languages
English (en)
Other versions
JP6938169B2 (ja
Inventor
平 和樹
Kazuki Taira
和樹 平
友成 柿野
Tomonari Kakino
友成 柿野
真明 安永
Masaaki Yasunaga
真明 安永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba TEC Corp
Original Assignee
Toshiba TEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba TEC Corp filed Critical Toshiba TEC Corp
Priority to JP2017038404A priority Critical patent/JP6938169B2/ja
Priority to EP18153457.9A priority patent/EP3370143A1/en
Priority to US15/886,135 priority patent/US20180251253A1/en
Publication of JP2018147028A publication Critical patent/JP2018147028A/ja
Application granted granted Critical
Publication of JP6938169B2 publication Critical patent/JP6938169B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65CLABELLING OR TAGGING MACHINES, APPARATUS, OR PROCESSES
    • B65C11/00Manually-controlled or manually-operable label dispensers, e.g. modified for the application of labels to articles
    • B65C11/02Manually-controlled or manually-operable label dispensers, e.g. modified for the application of labels to articles having printing equipment
    • B65C11/0289Manually-controlled or manually-operable label dispensers, e.g. modified for the application of labels to articles having printing equipment using electrical or electro-mechanical means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65CLABELLING OR TAGGING MACHINES, APPARATUS, OR PROCESSES
    • B65C9/00Details of labelling machines or apparatus
    • B65C9/46Applying date marks, code marks, or the like, to the label during labelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • G06Q10/0875Itemisation or classification of parts, supplies or services, e.g. bill of materials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/08Payment architectures
    • G06Q20/20Point-of-sale [POS] network systems
    • G06Q20/201Price look-up processing, e.g. updating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/22Character recognition characterised by the type of writing
    • G06V30/224Character recognition characterised by the type of writing of printed characters having additional code marks or containing code marks
    • G06V30/2247Characters composed of bars, e.g. CMC-7
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65CLABELLING OR TAGGING MACHINES, APPARATUS, OR PROCESSES
    • B65C9/00Details of labelling machines or apparatus
    • B65C9/40Controls; Safety devices
    • B65C2009/408Controls; Safety devices reading information before printing and applying a label
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/04Electronic labels

Abstract

【課題】棚の画像から物品のレイアウトを示すラベルを生成するラベル生成装置及びプログラムを提供する。【解決手段】実施形態によると、ラベル生成装置は、取得部と、特定部と、棚割情報生成部と、ラベル生成部と、を備える。取得部は、物品を配置された棚を撮影領域に含む撮影画像を取得する。特定部は、前記撮影画像に基づいて前記物品及び前記物品の位置を特定する。棚割情報生成部は、前記物品及び前記物品の位置に基づいて棚割情報を生成する。ラベル生成部は、前記棚割情報に基づいて前記物品のラベルを生成する。【選択図】 図1

Description

本発明の実施形態は、ラベル生成装置及びプログラムに関する。
店舗などに設置される商品棚には、商品棚に配置される商品の近傍に商品情報などを示す商品ラベルを備えるものがある。商品ラベルは、商品の価格などの他に商品の陳列位置などを示す商品陳列情報を備える。
従来、ラベル生成装置は、商品ラベルを生成するため、オペレータから商品の陳列位置などの入力を受け付ける必要がある。
特許第2978514号公報
上記の課題を解決するために、棚の画像から物品のレイアウトを示すラベルを生成するラベル生成装置及びプログラムを提供する。
実施形態によると、ラベル生成装置は、取得部と、特定部と、棚割情報生成部と、ラベル生成部と、を備える。取得部は、物品を配置された棚を撮影領域に含む撮影画像を取得する。特定部は、前記撮影画像に基づいて前記物品及び前記物品の位置を特定する。棚割情報生成部は、前記物品及び前記物品の位置に基づいて棚割情報を生成する。ラベル生成部は、前記棚割情報に基づいて前記物品のラベルを生成する。
図1は、実施形態に係るラベル生成システムの構成例を示すブロック図である。 図2は、実施形態に係る撮影画像の例を示す図である。 図3は、実施形態に係る棚割情報の構成例を示す図である。 図4は、実施形態に係る商品ラベルの例を示す図である。 図5は、実施形態に係るラベル生成装置の動作例を示すフローチャートである。 図6は、実施形態に係るラベル生成装置の動作例を示すフローチャートである。 図7は、実施形態に係るラベル生成装置の動作例を示すフローチャートである。
実施形態に係るラベル生成システムは、商品棚などにおいて商品(物品)の情報などを示す商品ラベルを生成する。さらに、商品ラベルは、商品の陳列に関する情報を示す。ラベル生成システムは、商品ラベルを付与する商品棚の画像を取得する。ラベル生成システムは、当該画像に基づいて商品ラベルを生成する。
図1は、実施形態に係るラベル生成システム1の構成例を示すブロック図である。図1が示すように、ラベル生成システム1は、ラベル生成装置10、商品サーバ30及びプリンタ40などから構成される。なお、ラベル生成システム1は、図1が示すような構成の他に、必要に応じた構成を具備したり特定の構成を除外したりしてもよい。
ラベル生成装置10は、後述するカメラ19からの画像に基づいて商品ラベルを生成する。また、ラベル生成装置10は、生成した商品ラベルをプリンタ40を用いて印刷する。ラベル生成装置10については、後に詳述する。
商品サーバ30は、インターネット又は独自の通信網を通じてラベル生成装置10に接続する。商品サーバ30は、ラベル生成装置10に商品情報(物品情報)及びラベルフォーマットを送信する。
たとえば、商品サーバ30は、オペレータからの操作などに基づいて商品(たとえば、商品コード)と商品情報とを対応付けた商品データベースを格納する。
また、商品サーバ30は、オペレータからの操作などに基づいてラベルフォーマットを格納する。たとえば、商品サーバ30は、複数のラベルフォーマットを格納する。たとえば、商品サーバ30は、商品陳列情報(物品陳列情報)に対応したラベルフォーマットを格納する。なお、商品サーバ30は、商品棚又は商品情報に対応したラベルフォーマットを格納してもよい。
商品情報、ラベルフォーマット及び商品陳列情報については、後述する。
たとえば、商品サーバ30は、ラベル生成装置10から商品コードを含むリクエストを受信すると、商品データベースを参照して当該商品コードに対応する商品情報を取得する。商品サーバ30は、取得した商品情報をリクエストに対するレスポンスとしてラベル生成装置10へ送信する。
また、商品サーバ30は、ラベル生成装置10から商品陳列情報を含むリクエストを受信すると、当該商品陳列情報に対応するラベルフォーマットを取得する。商品サーバ30は、取得したラベルフォーマットをリクエストに対するレスポンスとしてラベル生成装置10へ送信する。
プリンタ40は、ラベル生成装置10からの信号に従って商品ラベルを印刷する。たとえば、プリンタ40は、用紙を供給する供給部、用紙を搬送する搬送モータ、搬送モータを制御するモータ制御部及び用紙に印字する印字部などから構成される。
たとえば、供給部は、商品ラベルを印刷する用紙を格納する。搬送モータは、モータ制御部からの信号などによって用紙を供給部から印字部へ搬送する。
印字部は、供給部から供給された用紙に商品ラベルを印刷する。たとえば、印字部は、インクを用紙に付加して画像を形成する。
また、用紙が感熱紙である場合、印字部は、用紙を加熱して商品ラベルを形成する。たとえば、印字部は、用紙を加熱するサーマルヘッド、及び、サーマルヘッドを制御するサーマルヘッド制御部などから構成される。
次に、ラベル生成装置10について説明する。
図1が示すように、ラベル生成装置10は、基本的な構成として、CPU11、ROM12、RAM13、NVM14、操作部15、表示部16、通信部17、カメラインターフェース18、カメラ19及びプリンタインターフェース20などを備える。これらの各部は、データバスを介して互いに接続される。なお、ラベル生成装置10は、図1が示すような構成の他に必要に応じた構成を具備したり、特定の構成を除外したりしてもよい。
CPU11(プロセッサ)は、ラベル生成装置10全体の動作を制御する機能を有する。CPU11は、内部キャッシュおよび各種のインターフェースなどを備えてもよい。CPU11は、内部メモリ、ROM12又はNVM14が予め記憶するプログラムを実行することにより種々の処理を実現する。
なお、CPU11がプログラムを実行することにより実現する各種の機能のうちの一部は、ハードウエア回路により実現されるものであっても良い。この場合、CPU11は、ハードウエア回路により実行される機能を制御する。
ROM12は、予め制御用のプログラム及び制御データなどが記憶された不揮発性のメモリである。ROM12に記憶される制御プログラム及び制御データは、予めラベル生成装置10の仕様に応じて組み込まれる。ROM12は、たとえば、ラベル生成装置10の回路基板を制御するプログラム(例えば、BIOS)などを格納する。
RAM13は、揮発性のメモリである。RAM13は、CPU11の処理中のデータなどを一時的に格納する。RAM13は、CPU11からの命令に基づき種々のアプリケーションプログラムを格納する。また、RAM13は、アプリケーションプログラムの実行に必要なデータ及びアプリケーションプログラムの実行結果などを格納してもよい。
NVM14は、データの書き込み及び書き換えが可能な不揮発性のメモリである。NVM14は、例えば、ハードディスク、SSD、EEPROM(登録商標)又はフラッシュメモリなどにより構成される。NVM14は、ラベル生成装置10の運用用途に応じて制御プログラム、アプリケーション、及び種々のデータを格納する。
NVM14は、画像処理によって商品を認識するための辞書情報を格納してもよい。たとえば、辞書情報は、商品の画像である。また、辞書情報は、商品の画像から抽出された特徴量又は特徴量の分布などであってもよい。
操作部15は、ラベル生成装置10のオペレータによって、種々の操作指示が入力される。操作部15は、オペレータに入力された操作指示の信号をCPU11へ送信する。操作部15は、たとえば、キーボード、テンキー、及び、タッチパネルなどである。
表示部16は、CPU11の制御により種々の情報を表示する表示装置である。表示部16は、たとえば、液晶モニタなどである。なお、操作部15がタッチパネルなどで構成される場合、表示部16は、操作部15と一体的に形成されてもよい。
通信部17は、商品サーバ30とデータを送受信するためのインターフェースである。たとえば、通信部17は、商品サーバ30から商品情報及びラベルフォーマットを受信する。通信部17は、受信した商品情報及びラベルフォーマットをCPU11へ送信する。たとえば、通信部17は、インターネットへの接続をサポートする。たとえば、通信部17は、LAN接続などをサポートする。
カメラインターフェース18は、カメラ19とデータを送受信するためのインターフェースである。たとえば、カメラインターフェース18は、カメラ19から撮影画像を受信する。カメラインターフェース18は、受信した撮影画像をCPU11へ送信する。
カメラ19は、CPU11からの信号に従って画像を撮影する。カメラ19は、撮影した画像をCPU11へ送信する。カメラ19は、たとえば、CCDカメラなどである。
なお、カメラ19は、CPU11から感度又は絞りなどのカメラ設定を受け付けてもよい。
プリンタインターフェース20は、プリンタ40とデータを送受信するためのインターフェースである。たとえば、プリンタインターフェース20は、CPU11からのデータをプリンタ40へ送信する。たとえば、プリンタインターフェース20は、USB接続をサポートする。
たとえば、ラベル生成装置10は、スマートフォン、タブレットPC又はノートPCなどのポータブルデバイスであってもよい。
次に、ラベル生成装置10のCPU11が実現する機能について説明する。
まず、CPU11は、カメラ19を用いて商品が配置された商品棚を含む撮影領域の撮影画像を取得する機能を有する(取得部)。
たとえば、オペレータは、ラベル生成装置10を所持して店舗内の所定の商品棚まで移動する。オペレータは、操作部15に所定の操作を入力してカメラ19で画像を撮影する。
CPU11は、操作部15を通じて所定の操作を受け付けると、カメラインターフェース18を通じてカメラ19に画像を撮影させる信号を送信する。カメラ19は、当該信号に従って画像を撮影する。カメラ19は、カメラインターフェース18を通じて撮影画像をCPU11へ送信する。CPU11は、カメラインターフェース18を通じてカメラ19から撮影画像を取得する。
また、CPU11は、撮影画像に含まれる商品棚を特定する機能を有する。
たとえば、CPU11は、商品棚を特定する棚特定情報を取得する。棚特定情報は、たとえば、商品棚を特定するIDなどである。
たとえば、CPU11は、操作部15を通じてオペレータから棚特定情報の入力を受け付けてもよい。
また、CPU11は、取得した撮影画像に基づいて棚特定情報を取得してもよい。たとえば、商品棚は、バーコード又は二次元コードなど、棚特定情報を示すコードを備える。CPU11は、撮影画像からコードを抽出し当該コードをデコードして棚特定情報を取得する。また、CPU11は、商品棚が備える文字列などを読み取って棚特定情報を取得してもよい。
また、商品棚は、RFIDなどの無線装置を備えてもよい。たとえば、CPU11は、通信部などを通じて無線装置から棚特定情報を取得する。
また、CPU11は、店舗内のレイアウトを3次元モデリングにより生成した地図に基づいて自身の位置を特定し当該位置から棚特定情報を取得してもよい。また、CPU11は、撮影画像から店舗内に予め配置された光学的標識など読み取って自身の位置を特定し当該位置から棚特定情報を取得してもよい。また、CPU11は、RFID又はブルートゥース(登録商標)などの無線情報から自身の位置を特定し当該位置から棚特定情報を取得してもよい。
CPU11が商品棚を特定する方法は、特定の方法に限定されるものではない。
また、CPU11は、撮影画像から商品及び商品の位置を特定する機能を有する(特定部)。
ここでは、CPU11は、商品として、商品を示す商品コードを特定するものとする。
たとえば、CPU11は、撮影画像から商品が写る商品領域を特定する。たとえば、CPU11は、商品棚の背景色に基づいて商品領域を特定してもよい。また、CPU11は、エッジを検出して商品領域を特定してもよい。CPU11は、特定された商品領域の位置を商品の位置として特定する。
商品領域を特定すると、CPU11は、商品領域に写る商品を特定する。たとえば、CPU11は、NVM14に格納される辞書情報を取得する。CPU11は、取得した辞書情報と商品領域の画像とをマッチングすることで商品領域に写る商品を特定する。
なお、CPU11が商品及び商品の位置を特定する方法は、特定の構成に限定されるものではない。
図2は、撮影画像の例を示す。
図2が示すように、撮影画像は、商品棚100の画像を含む。ここでは、商品棚100は、5つの棚段を備えるものとする。
CPU11は、撮影画像から商品及び商品の位置を特定する。たとえば、CPU11は、1段目の棚段に左から商品A、商品B及び商品Cを認識する。また、CPU11は、2段目の棚段に左から商品D、商品D及び商品Eを認識する。CPU11は、2つの商品Eを上下に重なった位置に認識する。
商品棚100は、ラベル付与領域101乃至105を備える。ラベル付与領域101乃至105は、商品ラベルを付与する予定の領域である。
商品棚100は、1段目の棚段を構成する仕切り板上において、商品A、商品B及び商品Cの下部にそれぞれラベル付与領域101乃至103を備える。また、商品棚100は、2段目の棚段を構成する仕切り板上において、2つの商品Dの間にラベル付与領域104を備える。また、商品棚100は、2段目の棚段を構成する仕切り板上において、商品Eの下部にラベル付与領域105を備える。
また、CPU11は、撮影画像などに基づいて、商品棚に商品を陳列するレイアウトを示す棚割情報を生成する機能を有する(棚割情報生成部)。
たとえば、CPU11は、撮影画像に含まれる商品棚に陳列されているレイアウトを示す棚割情報を生成する。
図3は、棚割情報の構成例を示すブロック図である。
図3が示すように、棚割情報は、棚構造情報、商品情報及び商品陳列情報などから構成される。
CPU11は、棚構造情報を取得する。
棚構造情報は、商品棚の構造を示す。たとえば、棚構造情報は、商品棚の段数、各段の幅、高さ並びに奥行き、商品の配置方法など示す。商品の配置方法は、仕切り板に積載する、又は、フックなどに吊すなど、商品を配置する方法である。
たとえば、CPU11は、棚特定情報に基づいて棚構造情報を取得する。たとえば、NVM14は、予め棚特定情報に対応する棚構造情報を格納する。CPU11は、棚特定情報に対応する棚構造情報をNVM14から取得する。
また、CPU11は、商品サーバ30など外部装置から棚特定情報に対応する棚構造情報を取得してもよい。
また、CPU11は、撮影画像に基づいて棚構造情報を生成してもよい。たとえば、CPU11は、撮影画像から商品棚の抽出し画像処理を用いて当該商品棚の段数などの棚構造を抽出する。CPU11は、抽出した棚構造に基づいて棚構造情報を生成する。
また、CPU11は、撮影画像から特定した商品に対応する商品情報を取得する。
たとえば、CPU11は、通信部17を通じて商品サーバ30から商品に対応する商品情報を取得する。たとえば、CPU11は、商品の商品コードを含むリクエストを商品サーバ30へ送信し、当該リクエストのレスポンスとして当該商品の商品情報を取得する。
商品情報は、商品に関する情報である。たとえば、商品情報は、商品ラベルに表示する情報を含む。たとえば、商品情報は、商品コードをエンコードしたコード(たとえば、バーコード)、商品の名称、価格又は値引き情報などである。また、商品情報は、商品の外寸などを備えてもよい。また、商品情報は、仕入個数又は在庫数などを備えてもよい。商品情報の構成は、特定の構成に限定されるものではない。
また、CPU11は、特定した商品のレイアウトを示す商品陳列情報を生成する。
たとえば、CPU11は、特定した商品の位置に基づいて商品陳列情報を生成する。たとえば、商品陳列情報は、商品を配置する棚段の段数及び当該棚段での順序(たとえば、左端からの順序)を示す位置情報と、商品のフェースを示すフェース情報とから構成される。
たとえば、位置情報は、棚特定情報−段数−順序のフォーマットで形成される。
たとえば、CPU11は、商品の位置から商品が配置される棚段の段数を特定する。また、CPU11は、他の商品の位置との関係から、当該棚段で配置される順序を特定する。CPU11は、棚段の段数及び順序から位置情報を生成する。
たとえば、フェース情報は、F−Hのフォーマットで形成される。
Fは、商品を横に並べる個数を示す。Hは、商品を積み上げる個数を示す。たとえば、CPU11は、商品の位置からF及びHを決定する。
また、フェース情報は、奥行き方向の並べる個数Mを備えてもよい。たとえば、CPU11は、棚構造情報が示す商品棚の奥行きと商品情報が示す商品の外寸とからMを決定してもよい。
なお、商品陳列情報、位置情報及びフェース情報の構成は、特定の構成に限定されるものではない。
図3が示す例において、代表して、商品Dの商品陳列情報について説明する。ここでは、商品棚100の棚特定情報は、001であるものとする。
CPU11は、2つの商品Dを2段目の棚段に認識する。また、CPU11は、商品Dが2段目の棚段の最初(左端)に配置されるものと認識する。そのため、CPU11は、位置情報として、「001−02−01」を生成する。
また、CPU11は、商品Dを横並びで2つ認識する。また、CPU11は、商品Dが重なって配置されていないことを認識する。そのため、CPU11は、フェース情報として、「F2−H1」を生成する。
CPU11は、生成した位置情報及びフェース情報から構成される商品陳列情報を生成する。
また、CPU11は、生成した棚構造情報、商品情報及び商品陳列情報から構成される棚割情報を生成する。
なお、棚割情報は、複数の商品に対応する商品情報及び商品陳列情報を備えてもよい。
また、CPU11は、棚割情報に基づいて、商品に関する情報を表示する商品ラベル(商品ラベルの画像)を生成する機能を有する(ラベル生成部)。
商品ラベルは、棚割情報の商品情報の少なくとも一部を表示する。たとえば、商品ラベルは、商品のバーコード、商品名及び価格などを表示する。
また、商品ラベルは、棚割情報の商品陳列情報の少なくとも一部をさらに表示する。たとえば、商品ラベルは、位置情報及びフェース情報を表示する。
まず、CPU11は、ラベルフォーマットを取得する。ラベルフォーマットは、商品ラベルのレイアウトを示す。たとえば、ラベルフォーマットは、商品ラベルに表示する情報及び情報の位置などを示す。
たとえば、CPU11は、通信部17を通じて、商品サーバ30から商品陳列情報に対応するラベルフォーマットを取得する。たとえば、CPU11は、商品陳列情報を含むリクエストを商品サーバ30に送信し、当該リクエストに対するレスポンスとして商品陳列情報に対応するラベルフォーマットを取得する。
なお、CPU11は、商品棚、商品又は商品情報に対応するラベルフォーマットを取得してもよい。また、NVM14は、予めラベルフォーマットを格納し、CPU11は、NVM14からラベルフォーマットを取得してもよい。
CPU11は、ラベルフォーマットに従って商品ラベルを生成する。たとえば、CPU11は、棚割情報を構成する各情報をラベルフォーマットに従って配置し商品ラベルを生成する。なお、CPU11は、棚割情報にない情報を含む商品ラベルを生成してもよい。
図4は、商品ラベルの構成例を示す。図4は、図3が示す商品Dの商品ラベル(ラベル付与領域104に付与する商品ラベル)を示す。
図4が示すように、商品ラベル200は、矩形状である。商品ラベル200は、表示領域201乃至204を備える。
表示領域201は、商品名を示す。図4が示す例では、表示領域201は、商品名として「商品D」を示す。
表示領域202は、商品の価格を示す。図4が示す例では、表示領域202は、価格として「198円」を示す。
表示領域203は、商品のコードを示す。図4が示す例では、表示領域203は、商品Dの商品コードをエンコードして得られるバーコードを示す。
表示領域204は、商品の商品陳列情報を示す。図4が示す例では、表示領域204は、商品陳列情報の位置情報として「001−02−01」を示す。また、表示領域204は、商品陳列情報のフェース情報として「F2−H1」を示す。
なお、商品ラベル200は、割引前の通常価格などを示してもよい。また、商品ラベル200は、「特価」などの文字列を示してもよい。商品ラベルの構成は、特定の構成に限定されるものではない。
また、CPU11は、商品ラベルを印刷する機能を有する。
たとえば、CPU11は、商品ラベルを生成すると、生成した商品ラベルを表示部16に表示する。CPU11は、操作部15を通じて表示している商品ラベルを印刷する操作を受け付ける。当該操作を受け付けると、CPU11は、プリンタインターフェース20を通じて、プリンタ40に商品ラベルを送信する。プリンタ40は、送信された商品ラベルを印刷する。
なお、商品棚が電子棚札を備える場合、CPU11は、生成した商品ラベルを電子棚札に送信してもよい。電子棚札は、送信された商品ラベルを表示する。
次に、ラベル生成装置10の動作例について説明する。
図5は、ラベル生成装置10の動作例を説明するためのフローチャートである。
まず、ラベル生成装置10のCPU11は、棚割情報を生成する(ACT11)。棚割情報を生成すると、CPU11は、棚割情報に基づく商品ラベルを印刷する(ACT12)。商品ラベルを印刷すると、CPU11は、動作を終了する。
次に、CPU11が棚割情報を生成する動作例(ACT11の動作例)について説明する。
図6は、CPU11が棚割情報を生成する動作例を説明するためのフローチャートである。
まず、CPU11は、商品棚を撮影領域に含む撮影画像を取得する(ACT21)。撮影画像を取得すると、CPU11は、当該商品棚の棚特定情報を取得する(ACT22)。棚特定情報を取得すると、CPU11は、当該商品棚の棚構造情報を取得する(ACT23)。
棚構造情報を取得すると、CPU11は、撮影画像から商品及び商品の位置を特定する(ACT24)。商品及び商品の位置を特定すると、CPU11は、特定した商品の商品情報を取得する(ACT25)。商品情報を取得すると、CPU11は、特定した商品及び商品の位置から商品陳列情報を生成する(ACT26)。
商品陳列情報を生成すると、CPU11は、棚構造情報、商品情報及び商品陳列情報などに基づいて棚割情報を生成する(ACT27)。棚割情報を生成すると、CPU11は、動作を終了する。
次に、CPU11が商品ラベルを生成する動作例(ACT12の動作例)について説明する。
図7は、CPU11が商品ラベルを生成する動作例を説明するためのフローチャートである。
まず、CPU11は、棚割情報を取得する(ACT31)。棚割情報を取得すると、CPU11は、ラベルフォーマットを取得する(ACT32)。ラベルフォーマットを取得すると、CPU11は、棚割情報及びラベルフォーマットに基づいて商品ラベルを生成する(ACT33)。
商品ラベルを生成すると、CPU11は、表示部16に商品ラベルを表示する(ACT34)。商品ラベルを表示すると、CPU11は、操作部15を通じて印刷を開始する操作を受け付けたか判定する(ACT35)。
当該操作を受け付けていないと判定すると(ACT35、NO)、CPU11は、ACT35に戻る。
当該操作を受け付けたと判定すると(ACT35、YES)、CPU11は、プリンタ40を用いて商品ラベルを印刷する(ACT36)。商品ラベルを印刷すると、CPU11は、動作を終了する。
なお、棚割情報が複数の商品の商品情報及び商品陳列情報を備える場合、CPU11は、各商品についてACT32乃至36を実行してもよい。
また、ラベル生成装置10は、プリンタ40を備える構成であってもよい。
また、ラベル生成装置10は、カメラ19を備えなくともよい。たとえば、ラベル生成装置10は、外部のカメラと無線又は有線で接続し当該カメラから撮影画像を取得してもよい。また、カメラは、撮影画像を格納する取り外し可能なメモリなどを備えてもよい。ラベル生成装置10は、当該メモリから撮影画像を取得してもよい。
以上のように構成されたラベル生成装置は、商品を配置された商品棚の撮影画像から商品のレイアウトを示す棚割情報を生成する。ラベル生成装置は、棚割情報に基づいて、商品陳列情報などを示す商品ラベルを生成する。その結果、ラベル生成装置は、オペレータによる商品の入力などを必要とせずに、撮影画像に基づいて商品の陳列レイアウトを示す商品ラベルを生成することができる。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
1…ラベル生成システム、10…ラベル生成装置、11…CPU、14…NVM、15…操作部、16…表示部、17…通信部、18…カメラインターフェース、19…カメラ、20…プリンタインターフェース、30…商品サーバ、40…プリンタ、100…商品棚、101乃至105…ラベル付与領域、200…商品ラベル、201乃至204…表示領域。

Claims (5)

  1. 物品を配置された棚を撮影領域に含む撮影画像を取得する取得部と、
    前記撮影画像に基づいて前記物品及び前記物品の位置を特定する特定部と、
    前記物品及び前記物品の位置に基づいて棚割情報を生成する棚割情報生成部と、
    前記棚割情報に基づいて前記物品のラベルを生成するラベル生成部と、
    を備える、
    ラベル生成装置。
  2. 前記棚割情報生成部は、前記物品を配置する位置を示す位置情報と前記物品のフェースを示すフェース情報とから構成される物品陳列情報を備える前記棚割情報を生成し、
    前記ラベル生成部は、前記物品陳列情報の少なくとも一部を示す前記ラベルを生成する、
    前記請求項1に記載のラベル生成装置。
  3. 前記ラベル生成部は、前記物品陳列情報に対応するラベルフォーマットに従って前記ラベルを生成する、
    前記請求項2に記載のラベル生成装置。
  4. 前記棚割情報生成部は、前記物品に関する物品情報を取得し、前記物品情報を備える前記棚割情報を生成し、
    前記ラベル生成部は、前記物品情報の少なくとも一部を示す前記ラベルを生成する、
    前記請求項1乃至3の何れか1項に記載のラベル生成装置。
  5. プロセッサに、
    物品を配置された棚を撮影領域に含む撮影画像を取得させ、
    前記撮影画像に基づいて前記物品及び前記物品の位置を特定させ、
    前記物品及び前記物品の位置に基づいて棚割情報を生成させ、
    前記棚割情報に基づいて前記物品のラベルを生成させる、
    プログラム。
JP2017038404A 2017-03-01 2017-03-01 ラベル生成装置及びプログラム Active JP6938169B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017038404A JP6938169B2 (ja) 2017-03-01 2017-03-01 ラベル生成装置及びプログラム
EP18153457.9A EP3370143A1 (en) 2017-03-01 2018-01-25 Label generation apparatus and method for generating commodity label indicating commodity display layout
US15/886,135 US20180251253A1 (en) 2017-03-01 2018-02-01 Label generation apparatus and method for generating commodity label indicating commodity display layout

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017038404A JP6938169B2 (ja) 2017-03-01 2017-03-01 ラベル生成装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2018147028A true JP2018147028A (ja) 2018-09-20
JP6938169B2 JP6938169B2 (ja) 2021-09-22

Family

ID=61189209

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017038404A Active JP6938169B2 (ja) 2017-03-01 2017-03-01 ラベル生成装置及びプログラム

Country Status (3)

Country Link
US (1) US20180251253A1 (ja)
EP (1) EP3370143A1 (ja)
JP (1) JP6938169B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020141750A1 (ko) * 2019-01-03 2020-07-09 주식회사 라인어스 전자가격표시기 및 진열가이드를 관리하는 시스템

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10552933B1 (en) 2015-05-20 2020-02-04 Digimarc Corporation Image processing methods and arrangements useful in automated store shelf inspections
US11042161B2 (en) 2016-11-16 2021-06-22 Symbol Technologies, Llc Navigation control method and apparatus in a mobile automation system
US11449059B2 (en) 2017-05-01 2022-09-20 Symbol Technologies, Llc Obstacle detection for a mobile automation apparatus
US10949798B2 (en) 2017-05-01 2021-03-16 Symbol Technologies, Llc Multimodal localization and mapping for a mobile automation apparatus
EP3619600A4 (en) 2017-05-01 2020-10-21 Symbol Technologies, LLC METHOD AND APPARATUS FOR OBJECT STATE DETECTION
US11093896B2 (en) 2017-05-01 2021-08-17 Symbol Technologies, Llc Product status detection system
WO2018201423A1 (en) 2017-05-05 2018-11-08 Symbol Technologies, Llc Method and apparatus for detecting and interpreting price label text
JP7019357B2 (ja) * 2017-09-19 2022-02-15 東芝テック株式会社 棚情報推定装置及び情報処理プログラム
US11049279B2 (en) * 2018-03-27 2021-06-29 Denso Wave Incorporated Device for detecting positional relationship among objects
US11010920B2 (en) 2018-10-05 2021-05-18 Zebra Technologies Corporation Method, system and apparatus for object detection in point clouds
US11506483B2 (en) 2018-10-05 2022-11-22 Zebra Technologies Corporation Method, system and apparatus for support structure depth determination
US11090811B2 (en) 2018-11-13 2021-08-17 Zebra Technologies Corporation Method and apparatus for labeling of support structures
US11003188B2 (en) 2018-11-13 2021-05-11 Zebra Technologies Corporation Method, system and apparatus for obstacle handling in navigational path generation
US11416000B2 (en) 2018-12-07 2022-08-16 Zebra Technologies Corporation Method and apparatus for navigational ray tracing
US11079240B2 (en) 2018-12-07 2021-08-03 Zebra Technologies Corporation Method, system and apparatus for adaptive particle filter localization
US11100303B2 (en) * 2018-12-10 2021-08-24 Zebra Technologies Corporation Method, system and apparatus for auxiliary label detection and association
US11015938B2 (en) 2018-12-12 2021-05-25 Zebra Technologies Corporation Method, system and apparatus for navigational assistance
US11126861B1 (en) 2018-12-14 2021-09-21 Digimarc Corporation Ambient inventorying arrangements
CA3028708A1 (en) 2018-12-28 2020-06-28 Zih Corp. Method, system and apparatus for dynamic loop closure in mapping trajectories
US11341663B2 (en) 2019-06-03 2022-05-24 Zebra Technologies Corporation Method, system and apparatus for detecting support structure obstructions
US11151743B2 (en) 2019-06-03 2021-10-19 Zebra Technologies Corporation Method, system and apparatus for end of aisle detection
US11402846B2 (en) 2019-06-03 2022-08-02 Zebra Technologies Corporation Method, system and apparatus for mitigating data capture light leakage
US11960286B2 (en) 2019-06-03 2024-04-16 Zebra Technologies Corporation Method, system and apparatus for dynamic task sequencing
US11200677B2 (en) 2019-06-03 2021-12-14 Zebra Technologies Corporation Method, system and apparatus for shelf edge detection
US11080566B2 (en) 2019-06-03 2021-08-03 Zebra Technologies Corporation Method, system and apparatus for gap detection in support structures with peg regions
US11662739B2 (en) 2019-06-03 2023-05-30 Zebra Technologies Corporation Method, system and apparatus for adaptive ceiling-based localization
CN110316446A (zh) * 2019-06-27 2019-10-11 宁波三星智能电气有限公司 一种料盘自动扫描贴标装置
US11507103B2 (en) 2019-12-04 2022-11-22 Zebra Technologies Corporation Method, system and apparatus for localization-based historical obstacle handling
WO2021114126A1 (zh) * 2019-12-11 2021-06-17 汉朔科技股份有限公司 商超商品定位系统及方法
US11107238B2 (en) 2019-12-13 2021-08-31 Zebra Technologies Corporation Method, system and apparatus for detecting item facings
US11822333B2 (en) 2020-03-30 2023-11-21 Zebra Technologies Corporation Method, system and apparatus for data capture illumination control
US11450024B2 (en) 2020-07-17 2022-09-20 Zebra Technologies Corporation Mixed depth object detection
US11593915B2 (en) 2020-10-21 2023-02-28 Zebra Technologies Corporation Parallax-tolerant panoramic image generation
US11392891B2 (en) 2020-11-03 2022-07-19 Zebra Technologies Corporation Item placement detection and optimization in material handling systems
US11847832B2 (en) 2020-11-11 2023-12-19 Zebra Technologies Corporation Object classification for autonomous navigation systems
US11954882B2 (en) 2021-06-17 2024-04-09 Zebra Technologies Corporation Feature-based georegistration for mobile computing devices

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08339168A (ja) * 1995-06-13 1996-12-24 Tec Corp 棚ラベル装置
JP2006218030A (ja) * 2005-02-09 2006-08-24 Seiko Epson Corp 棚札、棚札作成システム、棚札作成方法、プログラム及び記憶媒体
JP2014048752A (ja) * 2012-08-29 2014-03-17 Teraoka Seiko Co Ltd 表示札処理システム
JP2014169163A (ja) * 2013-03-04 2014-09-18 Nec Corp 物品管理システム、物品管理方法、情報処理装置およびその制御方法と制御プログラム
JP2014170431A (ja) * 2013-03-04 2014-09-18 Nec Corp 情報処理システム、情報処理装置およびその制御方法と制御プログラム
WO2015140852A1 (ja) * 2014-03-20 2015-09-24 日本電気株式会社 情報処理装置、商品棚管理システム、及び、商品棚管理方法
JP2016224831A (ja) * 2015-06-03 2016-12-28 日本電気株式会社 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2720217C (en) * 2010-04-08 2016-03-29 Accenture Global Services Limited Digital point-of-sale analyzer
US20150166210A1 (en) * 2013-12-12 2015-06-18 S.C. Johnson & Son, Inc. Accurate Product Placement
US10176452B2 (en) * 2014-06-13 2019-01-08 Conduent Business Services Llc Store shelf imaging system and method
US9342900B1 (en) * 2014-12-23 2016-05-17 Ricoh Co., Ltd. Distinguishing between stock keeping units using marker based methodology
US9262741B1 (en) * 2015-04-28 2016-02-16 Codeshelf Continuous barcode tape based inventory location tracking
US10262176B1 (en) * 2016-02-23 2019-04-16 Digimarc Corporation Scanner with control logic for resolving package labeling

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08339168A (ja) * 1995-06-13 1996-12-24 Tec Corp 棚ラベル装置
JP2006218030A (ja) * 2005-02-09 2006-08-24 Seiko Epson Corp 棚札、棚札作成システム、棚札作成方法、プログラム及び記憶媒体
JP2014048752A (ja) * 2012-08-29 2014-03-17 Teraoka Seiko Co Ltd 表示札処理システム
JP2014169163A (ja) * 2013-03-04 2014-09-18 Nec Corp 物品管理システム、物品管理方法、情報処理装置およびその制御方法と制御プログラム
JP2014170431A (ja) * 2013-03-04 2014-09-18 Nec Corp 情報処理システム、情報処理装置およびその制御方法と制御プログラム
WO2015140852A1 (ja) * 2014-03-20 2015-09-24 日本電気株式会社 情報処理装置、商品棚管理システム、及び、商品棚管理方法
JP2016224831A (ja) * 2015-06-03 2016-12-28 日本電気株式会社 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020141750A1 (ko) * 2019-01-03 2020-07-09 주식회사 라인어스 전자가격표시기 및 진열가이드를 관리하는 시스템

Also Published As

Publication number Publication date
EP3370143A1 (en) 2018-09-05
JP6938169B2 (ja) 2021-09-22
US20180251253A1 (en) 2018-09-06

Similar Documents

Publication Publication Date Title
JP6938169B2 (ja) ラベル生成装置及びプログラム
JP6202215B2 (ja) 情報処理装置、棚札管理システム、制御方法、及びプログラム
JP6956485B2 (ja) 表示制御装置及びプログラム
JP2021043991A (ja) 画像処理装置
JP6789670B2 (ja) 画像処理装置
JP2014048752A (ja) 表示札処理システム
US20170103623A1 (en) Server and point-of-sale terminal configured for higher throughput processing of returned merchandise
KR20140001785A (ko) 데이터 처리 장치, pos 시스템 및 pos 시스템의 제어 방법
US20150332356A1 (en) Electronic shelf label system, electronic shelf label tag, method of recognizing display device information thereof
JP2018131331A (ja) 物品管理装置及び物品管理方法
JP7259754B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP2018160897A (ja) 画像処理装置
US20170185987A1 (en) Product information print device and product information print system
EP3432134B1 (en) Printer and method of controlling printer
JP2018147335A (ja) 販売データ処理装置およびプログラム
US20190026549A1 (en) Data processing apparatus and method, and non-transitory computer readable medium
JP2023083290A (ja) 商品棚
JP2014136376A (ja) 制御装置及びプリンタ
JP2018045314A (ja) 無線通信システム、情報出力装置、及び商品販売情報処理装置
JP5756432B2 (ja) クレジット処理装置およびそのプログラム
JP2019079534A (ja) 広告管理システム、その制御方法、及びプログラム
JP7314227B2 (ja) 表示制御装置及びプログラム
KR20170077493A (ko) 휴대용 rfid 라벨 프린터 및 rfid 라벨 출력방법
JP2024061221A (ja) 物品識別システム、物品識別装置、及びプログラム
JP2022148646A (ja) 印字情報発行装置、印字情報発行方法及び印字情報発行プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210401

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210511

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210705

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210901

R150 Certificate of patent or registration of utility model

Ref document number: 6938169

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150