JP2023029656A - 情報処理装置、情報処理システム、制御方法、及びプログラム - Google Patents
情報処理装置、情報処理システム、制御方法、及びプログラム Download PDFInfo
- Publication number
- JP2023029656A JP2023029656A JP2023004493A JP2023004493A JP2023029656A JP 2023029656 A JP2023029656 A JP 2023029656A JP 2023004493 A JP2023004493 A JP 2023004493A JP 2023004493 A JP2023004493 A JP 2023004493A JP 2023029656 A JP2023029656 A JP 2023029656A
- Authority
- JP
- Japan
- Prior art keywords
- product
- information
- display information
- image
- shelf
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 146
- 238000000034 method Methods 0.000 title claims description 41
- 238000010191 image analysis Methods 0.000 claims abstract description 35
- 238000012937 correction Methods 0.000 claims description 22
- 238000010586 diagram Methods 0.000 description 27
- 230000006870 function Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 7
- 230000004044 response Effects 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 235000013405 beer Nutrition 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 201000003373 familial cold autoinflammatory syndrome 3 Diseases 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47F—SPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
- A47F5/00—Show stands, hangers, or shelves characterised by their constructional features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/0008—Industrial image inspection checking presence/absence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30242—Counting objects in image
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Economics (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Library & Information Science (AREA)
- Operations Research (AREA)
- Development Economics (AREA)
- Accounting & Taxation (AREA)
- Tourism & Hospitality (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【課題】商品の陳列の正しさを容易に把握できる技術を提供する。【解決手段】情報処理装置2000は、商品棚が撮像されている棚画像を画像解析して、商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析部2020と、実陳列情報と、商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較部2040と、比較情報を用いて、基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成部2060と、を備え、結果画像は、基準陳列情報が示す基準に合致しない商品と、基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、生成部2060は、結果画像において、比較の結果を示す重畳データとして、基準陳列情報と合致しない商品に対応する部分の色が比較的濃く、基準陳列情報と合致する商品に対応する部分の色が比較的薄いヒートマップを棚画像に重畳させる。【選択図】図10
Description
本発明は商品の管理に関する。
コンビニエンスストアやスーパーマーケットなどの店舗では、商品棚に商品が陳列されている。そして、このような商品の陳列に関する作業を効率化する情報処理技術が開発されている。例えば特許文献1は、商品棚に置かれている商品と、商品棚に付されている棚札との関係が正しいかどうかを自動的に判定する技術を開示している。
商品棚に各商品をどのように陳列すべきか(陳列位置やフェイス数など)を予め規定しておき、その規定に従って商品を陳列するという運用がなされることがある。しかしながら、このような運用をしていても、実際には商品が規定に従って陳列されてないことがある。そこで、メーカの担当者などが商品の陳列状況を目視で確認し、商品が正しく陳列されているかどうかをチェックするという作業が行われている。しかしながら、目視でのチェックには、作業者の作業負担が大きいなどといった問題がある。
本願発明は上記の課題に鑑みてなされたものであり、その目的の一つは、商品の陳列の正しさを容易に把握できる技術を提供することである。
本発明の情報処理装置は、
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成手段と、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記生成手段は、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして、前記棚画像に重畳させる。
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成手段と、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記生成手段は、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして、前記棚画像に重畳させる。
本発明の情報処理システムは、情報処理装置及び携帯端末を有する。
携帯端末は、商品棚が撮像されている棚画像を情報処理装置に送信する。
情報処理装置は、
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成手段と、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記生成手段は、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして、前記棚画像に重畳させ、当該結果画像を前記携帯端末へ送信し、
前記携帯端末は、前記結果画像を受信してディスプレイ装置に表示させる。
携帯端末は、商品棚が撮像されている棚画像を情報処理装置に送信する。
情報処理装置は、
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成手段と、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記生成手段は、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして、前記棚画像に重畳させ、当該結果画像を前記携帯端末へ送信し、
前記携帯端末は、前記結果画像を受信してディスプレイ装置に表示させる。
本発明の制御方法は、コンピュータによって実行される。
当該制御方法は、
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析ステップと、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較ステップと、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成ステップと、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記生成ステップにおいて、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして、前記棚画像に重畳させる。
当該制御方法は、
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析ステップと、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較ステップと、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成ステップと、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記生成ステップにおいて、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして、前記棚画像に重畳させる。
本発明のプログラムは、本発明の制御方法が有する各ステップをコンピュータに実行させる。
本発明によれば、商品の陳列の正しさを容易に把握できる技術が提供される。
上述した目的、およびその他の目的、特徴および利点は、以下に述べる好適な実施の形態、およびそれに付随する以下の図面によってさらに明らかになる。
以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。また、特に説明する場合を除き、各ブロック図において、各ブロックは、ハードウエア単位の構成ではなく、機能単位の構成を表している。
[実施形態1]
<概要>
図1は、実施形態1に係る情報処理装置(図2でその構成を例示する情報処理装置2000)の動作を概念的に例示する図である。ここで、図1を用いて説明する情報処理装置2000の動作は、情報処理装置2000の理解を容易にするための例示であり、情報処理装置2000の動作を限定するものではない。情報処理装置2000の動作の詳細やバリエーションについては後述する。
<概要>
図1は、実施形態1に係る情報処理装置(図2でその構成を例示する情報処理装置2000)の動作を概念的に例示する図である。ここで、図1を用いて説明する情報処理装置2000の動作は、情報処理装置2000の理解を容易にするための例示であり、情報処理装置2000の動作を限定するものではない。情報処理装置2000の動作の詳細やバリエーションについては後述する。
情報処理装置2000は、商品が陳列されている商品棚が撮像された棚画像を取得する。図1では、カメラ10によって商品棚20が撮像された結果、棚画像12が生成されている。棚画像12には、商品棚20及び商品棚20に陳列されている商品が含まれている。なお、情報処理装置2000が対象とする商品棚は、商品が陳列される場所であればよく、図1に示されるような複数の段を持つものに限定されない。例えば、机に商品が平積みにされるようなケースでは、この机が商品棚として扱われる。
情報処理装置2000は、商品棚20における商品の陳列の基準を表す基準陳列情報を取得する。例えば基準陳列情報は、商品棚20に陳列されるべき商品や、商品棚20における各商品の位置などに関する情報を示す。
情報処理装置2000は、棚画像12によって表される実際の陳列状況と、基準陳列情報とを比較して、その比較結果を表す情報を生成する。例えば図1では、2つの商品の配置に誤りがあることを示す情報が生成されている。
上述の処理を実現するために、情報処理装置2000は、棚画像12を画像解析して、商品棚20における商品の陳列状況に関する情報(以下、実陳列情報)を生成する。実陳列情報は、例えば、商品棚20に陳列されている商品の名称や、各商品の位置などを示す。
情報処理装置2000は、棚画像12を画像解析することで生成した実陳列情報と、取得した基準陳列情報とを比較し、その結果を表す比較情報を生成する。
<作用・効果>
本実施形態の情報処理装置2000によれば、棚画像12が画像解析されることで生成される実陳列情報と、基準陳列情報とが比較されることにより、その結果を表す比較情報が生成される。このように実陳列情報と基準陳列情報とを比較することにより、商品棚20における商品の陳列状況が基準に合致しているか否かを把握することができる。よって、商品の陳列状況が基準に合致しているか否かを人が目視で確認するケースと比較し、商品の陳列状況が基準に合致しているか否かを容易に把握することができる。
本実施形態の情報処理装置2000によれば、棚画像12が画像解析されることで生成される実陳列情報と、基準陳列情報とが比較されることにより、その結果を表す比較情報が生成される。このように実陳列情報と基準陳列情報とを比較することにより、商品棚20における商品の陳列状況が基準に合致しているか否かを把握することができる。よって、商品の陳列状況が基準に合致しているか否かを人が目視で確認するケースと比較し、商品の陳列状況が基準に合致しているか否かを容易に把握することができる。
また、人が目視で確認するケースでは、見間違いなどの人為的なミスが生じる恐れがある。情報処理装置2000によれば、このような人為的なミスの発生も防ぐことができる。
<機能構成の例>
図2は、情報処理装置2000の機能構成を例示する図である。情報処理装置2000は、画像解析部2020及び比較部2040を有する。画像解析部2020は、棚画像12を画像解析することで、実陳列情報を生成する。比較部2040は、実陳列情報と基準陳列情報とを比較することで、比較情報を生成する。
図2は、情報処理装置2000の機能構成を例示する図である。情報処理装置2000は、画像解析部2020及び比較部2040を有する。画像解析部2020は、棚画像12を画像解析することで、実陳列情報を生成する。比較部2040は、実陳列情報と基準陳列情報とを比較することで、比較情報を生成する。
<情報処理装置2000のハードウエア構成の例>
情報処理装置2000の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。以下、情報処理装置2000の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。
情報処理装置2000の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。以下、情報処理装置2000の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。
計算機1000は種々の計算機である。例えば計算機1000は、Personal Computer(PC)、サーバマシン、タブレット端末、又はスマートフォンなどである。計算機1000は、情報処理装置2000を実現するために設計された専用の計算機であってもよいし、汎用の計算機であってもよい。
図3は、情報処理装置2000を実現する計算機1000の構成を例示する図である。計算機1000は、バス1020、プロセッサ1040、メモリ1060、ストレージデバイス1080、入出力インタフェース1100、及びネットワークインタフェース1120を有する。バス1020は、プロセッサ1040、メモリ1060、ストレージデバイス1080、入出力インタフェース1100、及びネットワークインタフェース1120が、相互にデータを送受信するためのデータ伝送路である。ただし、プロセッサ1040などを互いに接続する方法は、バス接続に限定されない。プロセッサ1040は、CPU (Central Processing Unit) や GPU (Graphics Processing Unit) などで実現されるプロセッサである。メモリ1060は、RAM (Random Access Memory) などで実現される主記憶装置である。ストレージデバイス1080は、ハードディスク、SSD (Solid State Drive)、メモリカード、又は ROM (Read Only Memory) などで実現される補助記憶装置である。入出力インタフェース1100は、計算機1000と入出力デバイスとを接続するためのインタフェースである。例えば入出力インタフェース1100には、キーボードなどの入力装置や、ディスプレイ装置などの出力装置が接続される。ネットワークインタフェース1120は、計算機1000をネットワークに接続するためのインタフェースである。この通信網は、例えば LAN(Local Area Network)や WAN(Wide Area Network)である。ネットワークインタフェース1120がネットワークに接続する方法は、無線接続であってもよいし、有線接続であってもよい。
ストレージデバイス1080は情報処理装置2000の各機能を実現するプログラムモジュールを記憶している。プロセッサ1040は、これら各プログラムモジュールを実行することで、そのプログラムモジュールに対応する各機能を実現する。
<カメラ10について>
カメラ10は、撮像を行い、撮像結果を表す画像を生成することができる任意の撮像装置である。例えばカメラ10は、スマートフォンやタブレット端末などに設けられているカメラである。
カメラ10は、撮像を行い、撮像結果を表す画像を生成することができる任意の撮像装置である。例えばカメラ10は、スマートフォンやタブレット端末などに設けられているカメラである。
<情報処理装置2000の利用形態の例>
例えば情報処理装置2000のユーザは、携帯端末を介して情報処理装置2000を利用する。情報処理装置2000のユーザは、例えばラウンダーなど、商品の陳列状況をチェックする作業を行う人である。図4は、情報処理装置2000の利用形態を例示する図である。図4では、情報処理装置2000と携帯端末3000により、情報処理システム4000が構成されている。携帯端末3000は、ユーザによって利用される携帯端末である。情報処理装置2000は、例えばサーバ装置として実現される。
例えば情報処理装置2000のユーザは、携帯端末を介して情報処理装置2000を利用する。情報処理装置2000のユーザは、例えばラウンダーなど、商品の陳列状況をチェックする作業を行う人である。図4は、情報処理装置2000の利用形態を例示する図である。図4では、情報処理装置2000と携帯端末3000により、情報処理システム4000が構成されている。携帯端末3000は、ユーザによって利用される携帯端末である。情報処理装置2000は、例えばサーバ装置として実現される。
携帯端末3000には、カメラ10が設けられている。また、携帯端末3000には、情報処理装置2000を利用するためのアプリケーション100が予めインストールされている。アプリケーション100は、カメラ10を制御して撮像を行わせる。さらにアプリケーション100は、カメラ10によって生成された棚画像12を含むリクエストを、情報処理装置2000に送信する。情報処理装置2000は、このアプリケーションから上記リクエストを受信する。
情報処理装置2000は、リクエストに示されている棚画像12を画像解析して実陳列情報を生成し、これを基準陳列情報と比較することで、比較情報を生成する。そして情報処理装置2000は、生成した比較情報を携帯端末3000へ送信する。
なお、比較情報は必ずしも携帯端末3000に送信される必要はない。生成された比較情報の扱い方については後述する。また、情報処理装置2000は必ずしも携帯端末3000を介して利用される必要はない。
<処理の流れ>
図5は、実施形態1の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。画像解析部2020は、棚画像12を取得する(S102)。画像解析部2020は、棚画像12を画像解析することで、実陳列情報を生成する(S104)。比較部2040は基準陳列情報を取得する(S106)。比較部2040は、実陳列情報と基準陳列情報とを比較することで、比較情報を生成する(S108)。
図5は、実施形態1の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。画像解析部2020は、棚画像12を取得する(S102)。画像解析部2020は、棚画像12を画像解析することで、実陳列情報を生成する(S104)。比較部2040は基準陳列情報を取得する(S106)。比較部2040は、実陳列情報と基準陳列情報とを比較することで、比較情報を生成する(S108)。
なお、情報処理装置2000によって実行される処理の流れは、上述の例に限定されない。例えば基準陳列情報の取得は、実陳列情報の生成より前に行われてもよい。
情報処理装置2000が図5に示した一連の処理を実行するタイミングは任意である。例えば情報処理装置2000は、前述したアプリケーション100からリクエストを受信したことに応じて、図5に示す一連の処理を実行する。その他にも例えば、情報処理装置2000は、情報処理装置2000に接続されている入力デバイスを操作するユーザから、棚画像12を指定する入力操作を受け付けてもよい。この場合、情報処理装置2000は、ユーザから入力操作を受け付けたことを契機として、図5に示す一連の処理を実行する。
<棚画像12を取得する方法:S102>
画像解析部2020が棚画像12を取得する方法は任意である。例えば画像解析部2020は、前述した携帯端末3000によって送信されるリクエストに含まれる棚画像12を取得する。その他にも例えば、画像解析部2020は、棚画像12を指定するユーザ操作を受け付けたことに応じて、指定された棚画像12が記憶されている記憶装置にアクセスして、その棚画像12を取得してもよい。
画像解析部2020が棚画像12を取得する方法は任意である。例えば画像解析部2020は、前述した携帯端末3000によって送信されるリクエストに含まれる棚画像12を取得する。その他にも例えば、画像解析部2020は、棚画像12を指定するユーザ操作を受け付けたことに応じて、指定された棚画像12が記憶されている記憶装置にアクセスして、その棚画像12を取得してもよい。
ここで、1つの商品棚20が、複数の棚画像12によって表されてもよい。例えば商品棚20が横に長い場合、カメラ10の撮像範囲を横方向にずらしながら商品棚20を複数回撮像することで、商品棚20の全ての部分を撮像することができる。
この際、商品棚20に陳列されている全ての商品が撮像されることを担保するために、商品棚20の互いに隣接する領域を含む2つの棚画像12について、その境界上(棚画像12の端)にある商品が、双方の棚画像12に含まれるように商品棚20を撮像することが好適である。例えば、情報処理装置2000は、複数の棚画像12を、共通の商品を含む部分で結合されるものとして扱うことにより、複数の棚画像12から1つの商品棚20の状況を把握することができる。これは例えば、パノラマ写真を得るために、2つの写真で互いの一部が重複するように、複数の写真を撮影することに相当する。
<棚画像12に含まれる商品棚20を特定する方法>
情報処理装置2000は、取得した棚画像12に含まれる商品棚20が、店舗等に設置されているどの商品棚であるのかを特定する必要がある。例えば情報処理装置2000は、棚画像12を取得する際に、その棚画像12に含まれる商品棚20を特定する識別子も取得するようにする。
情報処理装置2000は、取得した棚画像12に含まれる商品棚20が、店舗等に設置されているどの商品棚であるのかを特定する必要がある。例えば情報処理装置2000は、棚画像12を取得する際に、その棚画像12に含まれる商品棚20を特定する識別子も取得するようにする。
例えば前述したように、携帯端末3000上で動作するアプリケーション100から情報処理装置2000に対し、棚画像12を含むリクエストが送信されるとする。この場合、アプリケーション100は、このリクエストに、棚画像12に含まれる商品棚20の識別子を含めるようにする。例えばアプリケーション100は、携帯端末3000のユーザから、商品棚20の識別子を指定する入力を受け付け、入力された識別子をリクエストに含める。
棚画像12に含まれる商品棚20を特定する方法は、棚画像12と共に商品棚20の識別子を取得する方法に限定されない。例えば、商品棚20の識別子がカメラ10によって撮像されるようにしておく。具体的には、商品棚20の識別子を表すマークなどを、商品棚20に予め付しておく。こうすることで、カメラ10で商品棚20を撮像した結果生成される棚画像12に、その商品棚20の識別子を表すマークが含まれるようになる。情報処理装置2000は、このマークを画像解析することによって、棚画像12に含まれる商品棚20を特定することができる。例えばこのマークとしては、商品棚20の識別子を表す文字列や QR コード(登録商標)などを利用することができる。
<実陳列情報の生成:S104>
画像解析部2020は、棚画像12を画像解析することで、実陳列情報を生成する(S104)。以下、実陳列情報に含める情報について説明する。
画像解析部2020は、棚画像12を画像解析することで、実陳列情報を生成する(S104)。以下、実陳列情報に含める情報について説明する。
<<商品の識別情報>>
実陳列情報は、商品棚20に陳列されている各商品の識別情報を含む。例えば商品の識別情報は、商品名や、JAN(Japanese Article Number)コードなどの識別子である。以下では、特に断らない限り、商品の識別情報として商品名が使用されることを前提として説明を行う。後述する基準陳列情報においても同様である。
実陳列情報は、商品棚20に陳列されている各商品の識別情報を含む。例えば商品の識別情報は、商品名や、JAN(Japanese Article Number)コードなどの識別子である。以下では、特に断らない限り、商品の識別情報として商品名が使用されることを前提として説明を行う。後述する基準陳列情報においても同様である。
例えば、画像解析部2020は、棚画像12から、各商品を表す画像領域を抽出する。画像解析部2020は、抽出した画像領域と、商品データベースに登録されている商品の画像特徴とを比較することで、商品データベースから、その画像領域によって表される商品に関する情報を取得する。商品データベースには、各商品について、少なくとも、商品名、識別子(JAN(Japanese Article Number)コードなど)、商品が属するグループの名称(例えばブランド名)、商品が属する商品カテゴリ、商品の内容量(例えば、350ml)、商品のサイズ、商品の標準価格、及びメーカなどの情報の何れかが登録されているものとする。なお、商品のメーカとは、その商品に関連する任意のメーカ(例えば、製造メーカや販売メーカ)である。
画像解析部2020は、上述のように商品データベースから取得した情報により、棚画像12に含まれる各商品の商品名を特定することができる。
<<グループ名>>
その他にも例えば、実陳列情報は、商品が属するグループの名称を示す。商品が属するグループは、例えば前述した商品名と同様に、商品データベースから取得することができる。なお、グループ名の代わりに、メーカの識別子など、メーカを識別できる任意の情報を利用することもできる。後述する基準陳列情報においても同様である。
その他にも例えば、実陳列情報は、商品が属するグループの名称を示す。商品が属するグループは、例えば前述した商品名と同様に、商品データベースから取得することができる。なお、グループ名の代わりに、メーカの識別子など、メーカを識別できる任意の情報を利用することもできる。後述する基準陳列情報においても同様である。
<<メーカ名>>
その他にも例えば、実陳列情報は、商品のメーカを示す。商品のメーカは、例えば前述した商品名と同様に、商品データベースから取得することができる。なお、メーカ名の代わりに、メーカの識別子など、メーカを識別できる任意の情報を利用することもできる。後述する基準陳列情報においても同様である。
その他にも例えば、実陳列情報は、商品のメーカを示す。商品のメーカは、例えば前述した商品名と同様に、商品データベースから取得することができる。なお、メーカ名の代わりに、メーカの識別子など、メーカを識別できる任意の情報を利用することもできる。後述する基準陳列情報においても同様である。
<<位置>>
その他にも例えば、実陳列情報は、商品の商品棚20における位置を示す。商品の位置は、例えば、段方向の位置(例えば、最上段から何段目に位置するか)と、列方向の位置(例えば、左端の列から何列目に位置するか)との組み合わせで表される。ここで、商品棚が含まれる画像から各商品の位置を特定する技術には、既存の技術を利用することができる。
その他にも例えば、実陳列情報は、商品の商品棚20における位置を示す。商品の位置は、例えば、段方向の位置(例えば、最上段から何段目に位置するか)と、列方向の位置(例えば、左端の列から何列目に位置するか)との組み合わせで表される。ここで、商品棚が含まれる画像から各商品の位置を特定する技術には、既存の技術を利用することができる。
なお、同じ種類の商品(商品名が同一の商品)が複数の位置に配置されている場合、実陳列情報は、1つの商品について、複数の位置を示す。
<<フェイス数>>
その他にも例えば、実陳列情報は、商品のフェイス数を示す。なお、商品棚20において、同一の商品が離れて陳列されることもありうる。図6は、同一の商品が離れて陳列されているケースを例示する図である。図6において、商品Aは、エリア70-1とエリア70-2とに分けて配置されている。エリア70-1におけるフェイス数は2であり、エリア70-2におけるフェイス数は3である。
その他にも例えば、実陳列情報は、商品のフェイス数を示す。なお、商品棚20において、同一の商品が離れて陳列されることもありうる。図6は、同一の商品が離れて陳列されているケースを例示する図である。図6において、商品Aは、エリア70-1とエリア70-2とに分けて配置されている。エリア70-1におけるフェイス数は2であり、エリア70-2におけるフェイス数は3である。
このように互いに離れた場所に同一の商品が配置されている場合、例えば実陳列情報は、互いに離れた複数の場所それぞれについて個別にフェイス数を示す。例えば図6の場合、実陳列情報は、商品Aのフェイス数として、エリア70-1について2を示し、エリア70-2について3を示す。
その他にも例えば、実陳列情報は、互いに離れた複数の場所におけるフェイスを合計した値を、商品のフェイス数としてもよい。例えば図6の場合、実陳列情報は、商品Aのフェイス数として5を示す。
<<実陳列情報の構成の例>>
図7は、実陳列情報の構成を例示する図である。図7の陳列情報を、テーブル400と表記する。テーブル400は、商品402、グループ404、メーカ406、位置408、及びフェイス数410という列を有する。
図7は、実陳列情報の構成を例示する図である。図7の陳列情報を、テーブル400と表記する。テーブル400は、商品402、グループ404、メーカ406、位置408、及びフェイス数410という列を有する。
ここで、実陳列情報が含むべき情報、すなわち、棚画像12を画像解析することで得るべき情報は、予め画像解析部2020に設定されていてもよいし、動的に決定されてもよい。後者の場合、例えば画像解析部2020は、取得した基準陳列情報に基づいて、棚画像12から得るべき情報を決定する。例えば基準陳列情報が、棚に置かれるべき商品と、各商品が置かれるべき位置を示している場合、画像解析部2020が棚画像12から得るべき情報は、商品名及び商品の位置となる。
<基準陳列情報について>
前述したように、基準陳列情報は、商品棚20における商品の陳列の基準を表す。以下、基準陳列情報に示される情報について説明する。
前述したように、基準陳列情報は、商品棚20における商品の陳列の基準を表す。以下、基準陳列情報に示される情報について説明する。
<<商品の識別情報>>
例えば基準陳列情報は、商品棚20に陳列されるべき各商品の識別情報(商品名や JAN コードなど)を示す。以下の説明では、特に断らない限り、基準陳列情報が示す商品の識別情報は商品名であるとする。
例えば基準陳列情報は、商品棚20に陳列されるべき各商品の識別情報(商品名や JAN コードなど)を示す。以下の説明では、特に断らない限り、基準陳列情報が示す商品の識別情報は商品名であるとする。
<<位置>>
その他にも例えば、基準陳列情報は、商品棚20において各商品が置かれるべき位置を示す。基準陳列情報が示す商品の位置は、例えば、段方向の位置と列方向の位置との組み合わせで表される。この場合、基準陳列情報は、商品の段方向の位置及び列方向の位置の双方が、基準陳列情報によって示される位置となるべきことを示している。
その他にも例えば、基準陳列情報は、商品棚20において各商品が置かれるべき位置を示す。基準陳列情報が示す商品の位置は、例えば、段方向の位置と列方向の位置との組み合わせで表される。この場合、基準陳列情報は、商品の段方向の位置及び列方向の位置の双方が、基準陳列情報によって示される位置となるべきことを示している。
基準陳列情報が示す商品の位置は、列方向や縦方向の位置の範囲であってもよい。例えば、基準陳列情報は、「2段目から4段目」や「3列目から5列目」などのような範囲を示す。その他にも例えば、基準陳列情報は、或る商品について段方向の位置のみを示してもよい。この場合、その商品は、基準陳列情報に示されている段の任意の列に陳列することができる。同様に、基準陳列情報は、或る商品について列方向の位置のみを示してもよい。
<<フェイス数>>
その他にも例えば、基準陳列情報は、商品のフェイス数を示す。例えば、基準陳列情報が商品Aのフェイス数として5を示している場合、商品Aは、フェイス数が5となるように陳列されるべきことを示している。
その他にも例えば、基準陳列情報は、商品のフェイス数を示す。例えば、基準陳列情報が商品Aのフェイス数として5を示している場合、商品Aは、フェイス数が5となるように陳列されるべきことを示している。
<<並列要求>>
その他にも例えば、基準陳列情報は、或る商品について、その商品がまとめて配置されるべきこと(並列要求)を示していてもよい。言い換えれば、並列要求が基準陳列情報に示されている商品は、図6で例示したように複数のエリアに分かれて配置されてはいけないことを意味する。
その他にも例えば、基準陳列情報は、或る商品について、その商品がまとめて配置されるべきこと(並列要求)を示していてもよい。言い換えれば、並列要求が基準陳列情報に示されている商品は、図6で例示したように複数のエリアに分かれて配置されてはいけないことを意味する。
ここで、並列要求が指定される単位は、商品に限定されない。例えば並列要求は、商品グループの単位で指定されてもよい。この場合、例えば基準陳列情報は、特定のブランドの商品について並列要求を示す。基準陳列情報において並列要求が示されているブランドに属する各商品は、商品棚20においてまとまった位置に配置されることが要求される。
その他にも例えば、並列要求は、メーカ単位で指定されてもよい。この場合、例えば基準陳列情報は、特定のメーカの商品について並列要求を示す。基準陳列情報において並列要求が示されているメーカの各商品は、商品棚20においてまとまった位置に配置されることが要求される。
その他にも例えば、並列要求は、商品の内容量で指定されてもよい。この場合、例えば基準陳列情報は、特定の内容量の商品について並列要求を示す。基準陳列情報において並列要求が示されている特定の内容量の各商品は、商品棚20においてまとまった位置に配置されることが要求される。より具体的に、例えば、係る特定の内容量が 500ml を示す場合に、内容量 500ml の商品、例えば、メーカから販売されているビール 500ml 缶が商品棚20においてまとまった位置に配置されることとする。
<<配列要求>>
その他にも例えば、基準陳列情報は、複数の商品間の配置関係についての要求(以下、配列要求)を示してもよい。例えば、配列要求は、「商品Aと商品Bを互いに隣接させて配置する」という要求である。例えば基準陳列情報が、商品Aと商品Bについて、位置を示さずに配列要求を示しているとする。この場合、商品Aと商品Bは、互いに隣接している限り、商品棚20の任意の位置に配置してよいこととなる。
その他にも例えば、基準陳列情報は、複数の商品間の配置関係についての要求(以下、配列要求)を示してもよい。例えば、配列要求は、「商品Aと商品Bを互いに隣接させて配置する」という要求である。例えば基準陳列情報が、商品Aと商品Bについて、位置を示さずに配列要求を示しているとする。この場合、商品Aと商品Bは、互いに隣接している限り、商品棚20の任意の位置に配置してよいこととなる。
逆に、配列要求は、複数の商品を離して置くべきことを示してもよい。例えば、「商品Aと商品Bは異なる段に配置する」といった配列要求を定義することが考えられる。
ここで、配列要求が指定される単位は、商品に限定されない。例えば配列要求は、商品グループの単位で指定されてもよい。例えば、「グループDとグループEを互いに隣接させて配置する」という要求である。この場合、商品棚20において、グループDに属する商品が配置される領域と、グループEに属する商品が配置される領域とは、互いに隣接している必要がある。なお、商品の配列要求と同様に、グループの配列要求も、複数のグループを離して配置すべきことを示してもよい。
その他にも例えば、配列要求は、メーカ単位で指定されてもよい。この場合、例えば、「メーカXの商品とメーカYの商品とを互いに隣接させて配置する」という要求である。この場合、商品棚20において、メーカXの商品が配置される領域と、メーカYの商品が配置される領域とは、互いに隣接している必要がある。なお、商品の配列要求と同様に、メーカの配列要求も、複数のメーカの商品を互いに離して配置すべきことを示してもよい。
<<適用期間>>
その他にも例えば、基準陳列情報は、各商品について、その商品に基準陳列情報が適用される期間を示してもよい。例えば基準陳列情報が、商品Aについて、「2017/10/01 から 2017/10/31」という適用期間を示している場合、基準陳列情報が示す商品Aについての情報(例えば位置など)は、上記適用期間内において守るべき必要があることを意味する。なお、適用期間は、商品毎ではなく、商品のグループや、基準陳列情報全体について定められていてもよい。
その他にも例えば、基準陳列情報は、各商品について、その商品に基準陳列情報が適用される期間を示してもよい。例えば基準陳列情報が、商品Aについて、「2017/10/01 から 2017/10/31」という適用期間を示している場合、基準陳列情報が示す商品Aについての情報(例えば位置など)は、上記適用期間内において守るべき必要があることを意味する。なお、適用期間は、商品毎ではなく、商品のグループや、基準陳列情報全体について定められていてもよい。
<<基準陳列情報の構成の例>>
図8は、基準陳列情報の構成を例示する図である。図8のテーブルを、テーブル500と表記する。テーブル500は、商品502、グループ504、メーカ506、位置508、フェイス数510、並列要求512、配列要求514、及び適用期間516、という列を有している。
図8は、基準陳列情報の構成を例示する図である。図8のテーブルを、テーブル500と表記する。テーブル500は、商品502、グループ504、メーカ506、位置508、フェイス数510、並列要求512、配列要求514、及び適用期間516、という列を有している。
商品502、グループ504、及びメーカ506は、いずれか1つにデータが示されている。商品502に商品名が示されているレコードは、その名称の商品に関する基準を示す。グループ504にグループ名が示されているレコードは、その名称のグループに関する基準を示す。メーカ506にメーカ名が示されているレコードは、その名称のメーカに関する基準を示す。なお、商品棚20に配置されるべき商品は、商品502に商品名が示されている商品である。なお、図8を参照して説明したテーブル500は、上述した構成に限定されない。例えば、テーブル500は、さらに、少なくとも、識別子、商品カテゴリ、内容量及び商品のサイズの何れかを含んでいてもよい。
基準陳列情報は、商品棚20に置かれる全ての商品に関する情報であってもよいし、一部の商品に関する情報であってもよい。後者の場合、例えば基準陳列情報は、特定のメーカの商品について、その商品の陳列の基準を示す。この場合、1つの商品棚20についての基準陳列情報が、メーカごとに用意される。そのため、図8の基準陳列情報は、メーカ506を有さなくてよい。
基準陳列情報がメーカごとに用意されている場合、情報処理装置2000は、特定のメーカの基準陳列情報のみを、実陳列情報と比較するようにしてもよい。この場合、例えば情報処理装置2000は、比較対象とする基準陳列情報を特定する情報(例えばメーカ名)を取得する。この情報は、情報処理装置2000のユーザによって入力される。例えばユーザは、前述した携帯端末3000に対して、メーカ名を指定する入力操作を行う。アプリケーション100は、ユーザによって入力されたメーカ名を前述したリクエストに含めて送信する。情報処理装置2000は、このリクエストを受信することで、ユーザによって指定されたメーカ名を把握することができる。その他にも例えば、ユーザは、情報処理装置2000に接続された入力デバイスを操作することで、メーカ名を入力してもよい。
<基準陳列情報を取得する方法:S106>
情報処理装置2000が基準陳列情報を取得する方法は様々である。例えば、情報処理装置2000からアクセス可能な記憶装置に、基準陳列情報を予め記憶させておく。この場合、情報処理装置2000は、この記憶装置にアクセスすることで、基準陳列情報を取得する。この際、情報処理装置2000は、処理対象とする商品棚20の識別子を用いて、その商品棚20に関する基準陳列情報を取得する。また、特定のメーカの基準陳列情報を取得する場合、情報処理装置2000は、上述の方法で取得したメーカ名等を用いて、特定のメーカの基準陳列情報を取得する。
情報処理装置2000が基準陳列情報を取得する方法は様々である。例えば、情報処理装置2000からアクセス可能な記憶装置に、基準陳列情報を予め記憶させておく。この場合、情報処理装置2000は、この記憶装置にアクセスすることで、基準陳列情報を取得する。この際、情報処理装置2000は、処理対象とする商品棚20の識別子を用いて、その商品棚20に関する基準陳列情報を取得する。また、特定のメーカの基準陳列情報を取得する場合、情報処理装置2000は、上述の方法で取得したメーカ名等を用いて、特定のメーカの基準陳列情報を取得する。
その他にも例えば、基準陳列情報は、管理サーバが有する記憶装置に記憶されていてもよい。この場合、例えば情報処理装置2000は、商品棚20の識別子を含めたリクエストを管理サーバに送信することで、その識別子で特定される商品棚20の基準陳列情報を取得する。なお、特定のメーカの基準陳列情報を取得する場合、このリクエストに、そのメーカの識別子(例えばメーカ名)も含めるようにする。
<実陳列情報と基準陳列情報との比較:S108>
比較部2040は、実陳列情報と基準陳列情報とを比較し、その比較結果を表す比較情報を生成する(S108)。そのために、比較部2040は、基準陳列情報が示す各基準(商品、商品のグループ、又はメーカについての各基準)が、実陳列情報において満たされているか否かの判定を行う。
比較部2040は、実陳列情報と基準陳列情報とを比較し、その比較結果を表す比較情報を生成する(S108)。そのために、比較部2040は、基準陳列情報が示す各基準(商品、商品のグループ、又はメーカについての各基準)が、実陳列情報において満たされているか否かの判定を行う。
例えば比較部2040は、実陳列情報に示される商品名(商品の識別情報)と、基準陳列情報に示される商品名(商品の識別情報)とを比較することで、基準陳列情報に示されている各商品が、実陳列情報に示されているかを判定する。
その他にも例えば、基準陳列情報が或る商品の位置を示している場合、比較部2040は、実陳列情報におけるその商品の位置が、基準陳列情報に示されている位置に合致するか否かを判定する。
その他にも例えば、基準陳列情報が或る商品のフェイス数を示している場合、比較部2040は、実陳列情報が示すその商品のフェイス数が、基準陳列情報に示されているフェイス数に合致するか否かを判定する。ここで、実陳列情報が示す商品のフェイス数が、基準陳列情報が示すその商品のフェイス数よりも多いことがありうる。例えば、フェイス数を3とすべき商品について、実際の陳列状況ではフェイス数が5となっているような状況である。このように実際の陳列状況における商品のフェイス数が基準陳列情報によって示されるフェイス数を超えている場合、その商品は、フェイス数が基準に合致していると判定されてもよいし、基準に合致されていないと判定されてもよい。判定結果をどちらにするかを定める情報は、例えば基準陳列情報に含めておく。
基準陳列情報が並列要求や配列要求を示す場合、比較部2040は、実陳列情報に示されている各商品の位置に基づいて、並列要求や配列要求が満たされているか否かを判定する。例えば基準陳列情報が、或る商品グループに属する商品がまとめて置かれるべきことを表す並列要求を示しているとする。この場合、比較部2040は、実陳列情報におけるその商品グループに属する各商品の位置に基づいて、その商品グループの商品がまとめて置かれているか否かを判定する。具体的には、その商品グループに属する各商品の位置が段方向や列方向について連続していれば、それらの商品はまとめて置かれていることになるため、並列要求が満たされる。また、例えば基準陳列情報が、或る複数の商品が隣接して置かれるべきことを表す配列要求を示しているとする。この場合、比較部2040は、実陳列情報において、それら複数の商品の位置が隣接しているか否かを判定することで、配列要求が満たされているか否かを判定する。
なお、基準陳列情報が適用期間を示す場合、比較部2040は、実陳列情報に示される商品のうち、基準陳列情報において適用期間が現在時点を含んでいる商品についてのみ、基準陳列情報との比較を行う。
図9は、比較情報を例示する図である。図9のテーブルをテーブル600と呼ぶ。テーブル600は、商品602、グループ604、メーカ606、陳列608、位置610、フェイス数612、並列要求614、及び配列要求616という列を有している。商品602に商品名が示されているレコードは、基準陳列情報において示されるその商品名の商品の基準と実陳列情報との比較結果を示す。グループ604にグループ名が示されているレコードは、基準陳列情報において示されるそのグループ名の商品グループの基準と実陳列情報との比較結果を示す。メーカ606にメーカ名が示されているレコードは、基準陳列情報において示されるそのメーカ名の商品の基準と実陳列情報との比較結果を示す。
陳列608、位置610、フェイス数612、並列要求614、及び配列要求616はそれぞれ、実陳列情報が基準に合致しているか否かを示す。例えばテーブル600において、或る商品のレコードの陳列608が「非合致」を示している場合、基準陳列情報にはその商品の名称が示されている一方で、実陳列情報にはその商品の名称が示されていないことを表す。すなわち、商品棚20に陳列されるべき商品が陳列されていないことを表す。その他にも例えば、テーブル600において、或る商品のレコードの位置610が「非合致」である場合、実陳列情報が示すその商品の位置が、基準陳列情報に示される基準に合致していないことを表す。
比較情報の扱い方は様々である。例えば比較部2040は、比較情報を記憶装置に記憶させる。その他にも例えば、比較部2040は、後述の実施形態で説明するように、比較情報を利用して、比較結果を表す画像データ等を生成してもよい。
<<比較項目の限定>>
基準陳列情報が、商品棚20に陳列されるべき商品の商品名、各商品の位置、各商品のフェイス数などといった複数の項目について基準を示しているとする。この場合、比較部2040は、基準陳列情報に示されている項目全てについて実陳列情報と基準陳列情報とを比較してもよいし、一部の項目について実陳列情報と基準陳列情報とを比較してもよい。後者の場合、例えばユーザによる入力操作により、比較する項目が指定される。
基準陳列情報が、商品棚20に陳列されるべき商品の商品名、各商品の位置、各商品のフェイス数などといった複数の項目について基準を示しているとする。この場合、比較部2040は、基準陳列情報に示されている項目全てについて実陳列情報と基準陳列情報とを比較してもよいし、一部の項目について実陳列情報と基準陳列情報とを比較してもよい。後者の場合、例えばユーザによる入力操作により、比較する項目が指定される。
また、比較部2040は、実陳列情報と基準陳列情報との比較を、一部の商品についてのみ行うようにしてもよい。例えば比較部2040は、特定のメーカの商品のみについて実陳列情報と基準陳列情報とを比較する。この場合、例えば、ユーザによる入力操作により、上記特定のメーカが指定される。
なお、特定のメーカについてのみ実陳列情報と基準陳列情報とを比較する方法は、上述の方法に限定されない。例えば前述したように、基準陳列情報をメーカごとに用意しておき、特定のメーカの基準陳列情報のみが比較部2040によって取得されるようにすればよい。
<<合致率の算出>>
比較部2040は、実陳列情報によって表される商品の陳列状況が基準陳列情報に示される基準と合致している度合いを表す指標値を算出してよい。この指標値を合致率と呼ぶ。例えば合致率は、「商品棚20に陳列されている、基準陳列情報に示される基準と合致している商品の数」を、「その商品棚20に陳列すべき商品の総数」で割った値として定義することができる。以下の数式(1)は、この定義を表している。ここで、「或る商品が基準に合致している」とは、実陳列情報が示すその商品の情報が、基準陳列情報が示す全ての基準(位置やフェイス数など)に合致していることを意味する。
比較部2040は、実陳列情報によって表される商品の陳列状況が基準陳列情報に示される基準と合致している度合いを表す指標値を算出してよい。この指標値を合致率と呼ぶ。例えば合致率は、「商品棚20に陳列されている、基準陳列情報に示される基準と合致している商品の数」を、「その商品棚20に陳列すべき商品の総数」で割った値として定義することができる。以下の数式(1)は、この定義を表している。ここで、「或る商品が基準に合致している」とは、実陳列情報が示すその商品の情報が、基準陳列情報が示す全ての基準(位置やフェイス数など)に合致していることを意味する。
また、合致率は、個々の商品棚20についてだけでなく、店舗全体について算出されてもよい。この場合、複数の商品棚20それぞれについて生成された比較情報を用いて、店舗全体の合致率が算出される。具体的には、「店舗に陳列されている、基準陳列情報に示される基準に合致する商品の数」を、「その店舗に陳列すべき商品の総数」で割った値として、この合致率を定義することができる。以下の数式(2)は、この定義を表している。
以下、棚ごとに算出した合致率(数式(1))を「棚別合致率」と呼び、店舗全体について算出された合致率(数式(2))を「店舗別合致率」と呼ぶ。例えば1つの企業が複数の店舗を経営している場合、各店舗の運営状況を把握する指標の一つとして、各店舗の店舗別合致率を利用することができる。店舗別合致率が高い店舗は、基準に沿って適切に商品の陳列が行われていると言える。一方、店舗別合致率が低い店舗では、商品の陳列が適切に行われていない可能性がある。
ここで、情報処理装置2000が店舗別合致率を算出する契機は任意である。例えば情報処理装置2000は、店舗に存在する全ての商品棚20について比較情報が生成されたことを契機に、その店舗について店舗別合致率を算出する。
なお、棚別合致率や店舗別合致率は、陳列されている全ての商品についてではなく、特定のメーカの商品についてのみ算出されてもよい。例えば或るメーカについての棚別合致率を算出するとする。この場合、比較部2040は、「商品棚20に置かれているそのメーカの商品のうち、基準陳列情報に示されている基準に合致する商品の数」を「商品棚20に陳列すべきそのメーカの商品の総数」で割った値を、そのメーカについての棚別合致率として算出する。また、比較部2040は、「店舗に置かれているそのメーカの商品のうち、基準陳列情報に示されている基準に合致する商品の数」を「店舗に陳列すべきそのメーカの商品の数」で割った値を、そのメーカについての店舗別合致率として算出する。
なお、特定のメーカについて棚別合致率や店舗別合致率を算出する場合、情報処理装置2000は、そのメーカを特定する識別情報(メーカ名やメーカの識別子など)を取得する。メーカの識別情報は、例えば、携帯端末3000から送信されるリクエストに含められる。
<<合致率を利用したアラート>>
前述したように、情報処理装置2000は、棚画像12に含まれる商品棚20を特定するために、商品棚20の識別子を取得する。そして、情報処理装置2000は、その識別子で特定される商品棚20についての基準陳列情報を取得する。ここで仮に、棚画像12に含まれる商品棚20とは別の商品棚20の識別子を情報処理装置2000が取得してしまうと、情報処理装置2000は、棚画像12に含まれる商品棚20の陳列状況と、他の商品棚20についての基準陳列情報とを比較してしまう。そのため、この場合に算出される棚別合致率は、低くなる蓋然性が高い。
前述したように、情報処理装置2000は、棚画像12に含まれる商品棚20を特定するために、商品棚20の識別子を取得する。そして、情報処理装置2000は、その識別子で特定される商品棚20についての基準陳列情報を取得する。ここで仮に、棚画像12に含まれる商品棚20とは別の商品棚20の識別子を情報処理装置2000が取得してしまうと、情報処理装置2000は、棚画像12に含まれる商品棚20の陳列状況と、他の商品棚20についての基準陳列情報とを比較してしまう。そのため、この場合に算出される棚別合致率は、低くなる蓋然性が高い。
そこで情報処理装置2000は、比較部2040によって算出された棚別合致率が所定値以下であるか否かを判定し、所定値以下である場合には、商品棚20の識別子が誤っている可能性がある旨のアラートを出力するように構成されていてもよい。
例えば情報処理装置2000が、携帯端末3000から、棚画像12及び商品棚20の識別子を含むリクエストを受信するとする。この場合、情報処理装置2000は、算出した棚別合致率が所定値以上であれば、上記リクエストに対するレスポンスとして、前述したアラートを表すメッセージを送信する。このメッセージを受信した携帯端末3000のユーザは、例えば、正しい商品棚20の識別子を指定してリクエストの送信をやり直すといった対処ができる。
上述では、商品棚20の識別子を誤った可能性がある状況でアラートを出力することを例示したが、アラートを出力される状況はこのような状況に限定されない。例えば、情報処理装置2000は、比較部2040によって算出された棚別合致率及び店舗別合致率の少なくとも何れかの合致率を利用して、合致率が所定の条件を満たさない場合に、基準に沿った適切な陳列が行われていない旨を表すアラートを出力してもよい。例えば所定の条件は、合致率が所定値以上であるという条件である。
[実施形態2]
図10は、実施形態2の情報処理装置2000の機能構成を例示するブロック図である。以下で説明する事項を除き、実施形態2の情報処理装置2000は、実施形態1の情報処理装置2000と同様の機能を有する。
図10は、実施形態2の情報処理装置2000の機能構成を例示するブロック図である。以下で説明する事項を除き、実施形態2の情報処理装置2000は、実施形態1の情報処理装置2000と同様の機能を有する。
実施形態2の情報処理装置2000は、生成部2060を有する。生成部2060は、商品棚20について生成された比較情報を用いて、その商品棚20について結果画像を生成する。商品棚20についての結果画像は、基準陳列情報が示す基準に合致しない商品と、基準陳列情報が示す基準に合致する商品とを識別可能な態様で表す画像データである。結果画像は、画像ファイルとして記憶装置に記憶されてもよいし、画面データとしてディスプレイ装置に表示されてもよい。
本実施形態の情報処理装置2000によれば、商品棚20における商品の陳列状況と、基準陳列情報とを比較した結果が、結果画像という形でグラフィカルに表される。そのため、商品棚20における商品の陳列状況と陳列の基準との差異を、直感的に容易に把握することができる。
<ディスプレイ装置について>
結果画像が表示されるディスプレイ装置は、任意のディスプレイ装置とすることができる。例えばディスプレイ装置は、情報処理装置2000に接続されているディスプレイ装置や携帯端末3000のディスプレイ装置などである。その他にも例えば、ディスプレイ装置は、商品棚20が設置されている店舗のスタッフルームなどに設置されている端末や、その店舗を運営する会社のオフィスに設置されている端末に接続されているディスプレイ装置であってもよい。その他にも例えば、或るメーカのラウンダーなどが、商品棚20においてそのメーカの商品が正しく陳列されているかを調べるために、情報処理装置2000を利用するとする。この場合、結果画像が表示されるディスプレイ装置は、そのメーカのオフィスなどに設置されている端末に接続されているディスプレイ装置であってもよい。なお、スタッフルームやオフィスに設置されている端末は、例えば PC である。
結果画像が表示されるディスプレイ装置は、任意のディスプレイ装置とすることができる。例えばディスプレイ装置は、情報処理装置2000に接続されているディスプレイ装置や携帯端末3000のディスプレイ装置などである。その他にも例えば、ディスプレイ装置は、商品棚20が設置されている店舗のスタッフルームなどに設置されている端末や、その店舗を運営する会社のオフィスに設置されている端末に接続されているディスプレイ装置であってもよい。その他にも例えば、或るメーカのラウンダーなどが、商品棚20においてそのメーカの商品が正しく陳列されているかを調べるために、情報処理装置2000を利用するとする。この場合、結果画像が表示されるディスプレイ装置は、そのメーカのオフィスなどに設置されている端末に接続されているディスプレイ装置であってもよい。なお、スタッフルームやオフィスに設置されている端末は、例えば PC である。
ここで、結果画像が表示されるディスプレイ装置が情報処理装置2000と接続されているものでない場合、情報処理装置2000は、そのディスプレイ装置が接続されている端末に対して、結果画像を送信する。そのため、情報処理装置2000は、結果画像の送信先を特定できる必要がある。
結果画像の送信先を特定する方法は様々である。例えば結果画像の送信先を特定する情報を、予め情報処理装置2000からアクセス可能な記憶装置に記憶させておく。この場合、情報処理装置2000は、上記記憶装置にアクセスすることで、結果画像の送信先を特定する。
その他にも例えば、携帯端末3000から送信されたリクエストに応じて情報処理装置2000が処理を行う場合、情報処理装置2000は、上記リクエストの送信元に結果画像を送信する。また、上記リクエストに結果画像の送信先を含めるようにしてもよい。この場合、情報処理装置2000は、リクエストに示されている送信先に、結果画像を送信する。
<結果画像について>
結果画像の具体的な内容は様々である。以下、結果画像のバリエーションについて例示する。
結果画像の具体的な内容は様々である。以下、結果画像のバリエーションについて例示する。
例えば生成部2060は、実陳列情報と基準陳列情報の比較結果を表す重畳データを棚画像12に重畳させることで、結果画像を生成する。図11は、結果画像を例示する第1の図である。図11の結果画像80において、棚画像12には、比較結果を示す重畳データが重畳されている。基準陳列情報が示す基準に合致する商品の画像領域には、重畳データ90(ドット柄の矩形)が重畳されている。また、基準陳列情報が示す基準に合致しない商品の画像領域には、重畳データ92(斜線柄の矩形)が重畳されている。さらに、商品が陳列されていない画像領域のうち、基準陳列情報によれば商品が陳列されるべきである位置を表す画像領域(すなわち、商品が欠品している位置を表す画像領域)には、重畳データ94(格子柄の矩形)が重畳されている。例えば、基準陳列情報が商品Aの位置として「2段目、3列目」という位置を示しているにもかかわらず、この位置に商品が配置されていない場合、この位置において商品が欠品しているといえる。
なお、重畳データには、ドット柄等の模様ではなく色を利用してもよい。例えば、ドット柄、斜線柄、及び格子柄それぞれの代わりに、緑色、赤色、及び黄色を利用する。
ここで、基準陳列情報が示す基準に合致していない部分を表す重畳データ(図11の重畳データ92又は重畳データ94)は、点滅させるなどの方法で強調するようにしてもよい。
基準に合致している商品と基準に合致していない商品とは、重畳データの柄や色ではなく、重畳データの形状で識別されてもよい。図12は、結果画像80を例示する第2の図である。図12の結果画像80において、基準陳列情報が示す基準に合致しない商品の画像領域には、重畳データ96(黒丸印)が重畳されている。また、商品が欠品している位置を表す画像領域には、重畳データ97(バツ印)が重畳されている。
その他にも例えば、重畳データとしてヒートマップが利用されてもよい。図13は、結果画像80を例示する第3の図である。図13では、1つの重畳データ98が棚画像12に重畳されている。重畳データ98は、基準陳列情報と合致しない部分の色が比較的濃く、基準陳列情報と合致する部分の色が比較的薄いヒートマップである。
結果画像80は、比較結果を表す重畳データが重畳された棚画像12に加え、棚別合致率を表す文字列等を含んでもよい。図14は、棚別合致率を含む結果画像80を例示する図である。図14の結果画像80は、棚画像12の上に、棚別合致率を表す文字列70を含んでいる。
結果画像80は、比較結果を表す重畳データが重畳された棚画像12に加え、棚画像12に陳列されている商品のリストを含んでいてもよい。図15は、商品のリストを含む結果画像80を例示する図である。図15において、エリア120には、重畳データが重畳された棚画像12が表示されている。一方、エリア130は、商品リスト140が表示されている。
ここで、結果画像をディスプレイ装置に表示させる場合、生成部2060は、商品リスト140に対してユーザが入力操作を加えることに応じて、エリア120の表示を変更してもよい。例えばユーザが、商品リスト140の或るレコードを選択したとする。この場合、比較部2040は、エリア120において、選択されたレコードが示す商品に対応する画像領域が強調される様にする。
図16は、商品リスト140に対する操作に応じて結果画像80が変化する様子を例示する図である。図16では、図15で表される結果画像80に対し、ユーザが、商品Aのレコードを選択する入力操作を加えたことを想定している。この入力操作に応じ、結果画像80には、重畳データ160が表示されている。重畳データ160は、図15の結果画像80から商品Aに対応する画像領域を抽出して拡大したものであり、棚画像12よりも前面に位置するように表示されている。これにより、ユーザが選択した商品Aに対応する画像領域が、前面に浮き出したように強調されて見えている。なお、レコードを選択する操作はタッチ操作には限定されず、マウス操作などであってもよい。
逆に、生成部2060は、エリア120に表示されている商品の画像に対してユーザが入力操作を加えたことに応じて、商品リスト140の表示を変更してもよい。具体的には、ユーザが或る商品の画像を選択すると、その商品を示す商品リスト140のレコードが強調表示される。
図17は、商品の画像に対する操作に応じて結果画像80が変化する様子を例示する図である。図17では、ユーザが、エリア120において商品Aを表している画像領域170を選択したことに応じて、商品Aを示すレコードの背景色が変更されている。
<ディスプレイ装置の表示を更新する方法>
結果画像80を表示させるディスプレイ装置が情報処理装置2000以外の端末に接続されている場合、結果画像80に対する入力操作はその端末によって検出される。例えば結果画像80が、携帯端末3000のディスプレイ装置に表示される場合、結果画像80に対する入力操作は携帯端末3000によって検出される。
結果画像80を表示させるディスプレイ装置が情報処理装置2000以外の端末に接続されている場合、結果画像80に対する入力操作はその端末によって検出される。例えば結果画像80が、携帯端末3000のディスプレイ装置に表示される場合、結果画像80に対する入力操作は携帯端末3000によって検出される。
このように情報処理装置2000以外の端末によって結果画像80に対する入力操作が検出される場合に、その入力操作に応じてディスプレイ装置の表示を更新する方法には、様々な方法を採用できる。例えば結果画像80に対する入力操作を検出した端末は、情報処理装置2000に対し、その入力操作の内容(例えば、入力操作の対象となった重畳データに関する情報など)を送信する。情報処理装置2000は、受信した情報に基づいて内容を更新した結果画像80を生成し、その結果画像80を端末へ送信する。そして端末が、受信した結果画像80をディスプレイ装置に表示させる。この一連の流れにより、ディスプレイ装置に表示される結果画像80が更新される。
その他にも例えば、携帯端末3000などの端末に、結果画像80に対する入力操作に応じてディスプレイ装置の表示を更新する機能を持たせてもよい。この場合、端末は、ユーザの入力操作を検出した際、その内容を情報処理装置2000に送信することなく、自身で結果画像80の変更を行う。この場合、端末には、結果画像80を閲覧するためのアプリケーションを予めインストールしておく。例えば携帯端末3000の場合、前述したアプリケーション100に、結果画像80を閲覧するための機能を持たせておく。
<棚画像12から認識できなかった商品がある場合について>
棚画像12の一部が不鮮明などの理由から、棚画像12に含まれる商品の一部を認識できないことがありうる。この場合、実陳列情報は、特定できない何らかの商品(不明商品)が置かれている位置を示してもよい。
棚画像12の一部が不鮮明などの理由から、棚画像12に含まれる商品の一部を認識できないことがありうる。この場合、実陳列情報は、特定できない何らかの商品(不明商品)が置かれている位置を示してもよい。
実陳列情報に不明商品の位置が示されている場合、結果画像80は不明商品の位置を示すことが好適である。具体的には、生成部2060は、不明商品を表す重畳データを結果画像80に含める。図18は、不明商品を表す重畳データが含まれる結果画像80を例示する図である。図18において、重畳データ110は、不明商品を表している。すなわち、図18の結果画像80は、重畳データ110が重畳されている位置の商品が特定されていないことを表している。
不明商品については、カメラ10による撮像をやり直すことが好ましい。そこで例えば、重畳データ110は、カメラ機能を呼び出すためのボタンとして実現されてもよい。この場合、例えば結果画像80は、カメラ10が設けられている携帯端末3000のディスプレイ装置に表示される。この場合、アプリケーション100は、ユーザが重畳データ110を押下等したことを検知し、これに応じてカメラ10を制御するカメラアプリケーションを起動させる。ユーザがカメラアプリケーションを操作してカメラ10に撮像を行わせると、アプリケーション100は、生成された棚画像12を情報処理装置2000へ送信する。情報処理装置2000は、取得した棚画像12を用いて実陳列情報を再度生成する。
ここで、新たに生成された棚画像12において、不明商品であった商品が認識可能に(鮮明に)含まれていれば、新たに生成された実陳列情報には、不明商品であった商品の商品名などが示されることになる。そこで、情報処理装置2000は、新たに生成された実陳列情報と基準陳列情報とを比較することで再度比較情報を生成し、結果画像80を更新する。この際、情報処理装置2000は、前回生成した実陳列情報において不明商品であったものについてのみ比較情報を生成し、前回生成した比較情報とマージするようにしてもよい。
なお、不明商品を表す重畳データ110の利用方法は、カメラ10により撮像をやり直せるようにすることに限定されない。例えば、重畳データ110には、不明商品の位置に配置されるべき商品に関する情報を含む構成を採用してもよい。係る商品に関する情報の表示態様は、後述する図19に示す情報(修正情報150-1及び修正情報150-2)と同様な構成を採用してもよい。その場合に、情報処理装置2000は、基準陳列情報から不明商品の位置に関連付けられた商品に関する情報を求めることによって実現することができる。表示された商品に関する情報がユーザに選択された場合に、その選択に応じて、情報処理装置2000は、選択された商品に関する情報と、既に取得された棚画像12を用いて生成された実陳列情報とに基づいて、当該実陳列情報と異なる実陳列情報を再度生成してもよい(つまり、実陳列情報に選択された商品に関する情報を含める)。
<商品の陳列を修正するための情報の表示>
結果画像80は、基準陳列情報が示す基準に合致しない部分について、基準陳列情報が示す基準を表す情報(すなわち、どのように陳列状況を修正すれば基準に合致するかを表す情報)を含んでもよい。以下、この情報を修正情報と呼ぶ。
結果画像80は、基準陳列情報が示す基準に合致しない部分について、基準陳列情報が示す基準を表す情報(すなわち、どのように陳列状況を修正すれば基準に合致するかを表す情報)を含んでもよい。以下、この情報を修正情報と呼ぶ。
図19は、修正情報を例示する図である。図19の結果画像80は、2つの修正情報150を含んでいる。修正情報150-1を見ることにより、重畳データ92が重畳されている場所に置かれている商品を、商品Aに置き換えるべきことが分かる。また、修正情報150-2を見ることにより、重畳データ94が重畳されている場所に、商品Bを置くべきことが分かる。
ここで、結果画像80がディスプレイ装置に表示される場合、生成部2060は、修正情報150を最初から結果画像80に含めてもよいし、基準に合致していないことを表す重畳データ(重畳データ92や重畳データ94など)に対して入力操作が加えられたタイミングで、結果画像80に修正情報150を含めてもよい。
また、生成部2060は、修正情報150に対して入力操作が加えられたことに応じて、修正情報150に示されている商品に関する詳細な情報を示す画面データを生成してもよい。商品に関する情報とは、例えば、その商品の識別子、その商品が属するグループ、その商品のメーカ、その商品が保管されている場所(倉庫に設置されている棚の場所やその棚における商品の位置)などである。例えば商品が欠品している場合、商品を保管場所から持ってきて補充する必要がある。そこで、商品の保管場所が表示されるようにすることで、このような商品の補充作業を容易にすることができる。
ここで、修正情報150は、基準陳列情報が示す基準に合致しない全ての商品について表示されてもよいし、一部の商品について表示されてもよい。後者の場合、商品に対して修正情報150を表示するか否かは、その商品の重要度に基づいて決定される。この場合、各商品に対して重要度を予め設定しておく。
例えば生成部2060は、重要度が所定値以上の商品についてのみ修正情報150を生成し、結果画像80に含める。その他にも例えば、生成部2060は、基準陳列情報が示す基準に合致しない商品のうち、重要度が上位所定数の商品についてのみ修正情報150を生成し、結果画像80に含めるようにしてもよい。
[ハードウエア構成の例]
実施形態2の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。
実施形態2の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。
以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記各実施形態の組み合わせ、又は上記以外の様々な構成を採用することもできる。
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
1. 商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、を有する情報処理装置。
2. 前記基準陳列情報は、前記商品棚に陳列されるべき各商品の識別情報を示し、
前記画像解析手段は、前記商品棚に陳列されている各商品の識別情報を示す前記実陳列情報を生成する、1.に記載の情報処理装置。
3. 前記基準陳列情報は、前記商品棚における前記商品の陳列位置と、フェイス数と、他の商品との配置関係とのうちの少なくとも1つを示す、2.に記載の情報処理装置。
4. 前記比較手段は、商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、1.乃至3.いずれか一つに記載の情報処理装置。
5. 前記比較手段は、メーカの識別子を取得し、前記識別子で特定されるメーカの商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、1.乃至3.いずれか一つに記載の情報処理装置。
6. 前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成手段を有する、請求項1乃至5いずれか一項に記載の情報処理装置。
7. 前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表す、6.に記載の情報処理装置。
8. 前記生成手段は、前記基準陳列情報が示す基準に合致しない商品について、その商品を陳列すべき位置、又はその商品が陳列されている位置に陳列すべき商品を表す修正情報を前記結果画像に含める、6.又は7.に記載の情報処理装置。
1. 商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、を有する情報処理装置。
2. 前記基準陳列情報は、前記商品棚に陳列されるべき各商品の識別情報を示し、
前記画像解析手段は、前記商品棚に陳列されている各商品の識別情報を示す前記実陳列情報を生成する、1.に記載の情報処理装置。
3. 前記基準陳列情報は、前記商品棚における前記商品の陳列位置と、フェイス数と、他の商品との配置関係とのうちの少なくとも1つを示す、2.に記載の情報処理装置。
4. 前記比較手段は、商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、1.乃至3.いずれか一つに記載の情報処理装置。
5. 前記比較手段は、メーカの識別子を取得し、前記識別子で特定されるメーカの商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、1.乃至3.いずれか一つに記載の情報処理装置。
6. 前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成手段を有する、請求項1乃至5いずれか一項に記載の情報処理装置。
7. 前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表す、6.に記載の情報処理装置。
8. 前記生成手段は、前記基準陳列情報が示す基準に合致しない商品について、その商品を陳列すべき位置、又はその商品が陳列されている位置に陳列すべき商品を表す修正情報を前記結果画像に含める、6.又は7.に記載の情報処理装置。
9. 情報処理装置及び携帯端末を有する情報処理システムであって、
前記携帯端末は、商品棚が撮像されている棚画像を前記情報処理装置に送信し、
前記情報処理装置は、
前記送信された棚画像を受信し、その棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、
前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成し、前記携帯端末へ送信する生成手段と、を有し、
前記携帯端末は、前記結果画像を受信してディスプレイ装置に表示させる、情報処理システム。
10. 前記基準陳列情報は、前記商品棚における前記商品の陳列位置と、フェイス数と、他の商品との配置関係とのうちの少なくとも1つを示す前記実陳列情報を生成する、9.に記載の情報処理システム。
11. 前記基準陳列情報は、前記商品棚における前記商品の陳列位置、フェイス数、又は他の商品との配置関係を示す、10.に記載の情報処理システム。
12. 前記比較手段は、商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、9.乃至11.いずれか一つに記載の情報処理システム。
13. 前記比較手段は、メーカの識別子を取得し、前記識別子で特定されるメーカの商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、9.乃至11.いずれか一つに記載の情報処理システム。
14. 前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表す、9.乃至13.いずれか一つに記載の情報処理システム。
15. 前記生成手段は、前記基準陳列情報が示す基準に合致しない商品について、その商品を陳列すべき位置、又はその商品が陳列されている位置に陳列すべき商品を表す修正情報を前記結果画像に含める、9.乃至14.いずれか一つに記載の情報処理システム。
前記携帯端末は、商品棚が撮像されている棚画像を前記情報処理装置に送信し、
前記情報処理装置は、
前記送信された棚画像を受信し、その棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、
前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成し、前記携帯端末へ送信する生成手段と、を有し、
前記携帯端末は、前記結果画像を受信してディスプレイ装置に表示させる、情報処理システム。
10. 前記基準陳列情報は、前記商品棚における前記商品の陳列位置と、フェイス数と、他の商品との配置関係とのうちの少なくとも1つを示す前記実陳列情報を生成する、9.に記載の情報処理システム。
11. 前記基準陳列情報は、前記商品棚における前記商品の陳列位置、フェイス数、又は他の商品との配置関係を示す、10.に記載の情報処理システム。
12. 前記比較手段は、商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、9.乃至11.いずれか一つに記載の情報処理システム。
13. 前記比較手段は、メーカの識別子を取得し、前記識別子で特定されるメーカの商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、9.乃至11.いずれか一つに記載の情報処理システム。
14. 前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表す、9.乃至13.いずれか一つに記載の情報処理システム。
15. 前記生成手段は、前記基準陳列情報が示す基準に合致しない商品について、その商品を陳列すべき位置、又はその商品が陳列されている位置に陳列すべき商品を表す修正情報を前記結果画像に含める、9.乃至14.いずれか一つに記載の情報処理システム。
16. コンピュータによって実行される制御方法であって、
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析ステップと、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較ステップと、を有する制御方法。
17. 前記基準陳列情報は、前記商品棚に陳列されるべき各商品の識別情報を示し、
前記画像解析ステップにおいて、前記商品棚に陳列されている各商品の識別情報を示す前記実陳列情報を生成する、16.に記載の制御方法。
18. 前記基準陳列情報は、前記商品棚における前記商品の陳列位置と、フェイス数と、他の商品との配置関係とのうちの少なくとも1つを示す、17.に記載の制御方法。
19. 前記比較ステップにおいて、商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、16.乃至18.いずれか一つに記載の制御方法。
20. 前記比較ステップにおいて、メーカの識別子を取得し、前記識別子で特定されるメーカの商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、16.乃至18.いずれか一つに記載の制御方法。
21. 前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成ステップを有する、16.乃至20.いずれか一項に記載の制御方法。
22. 前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表す、21.に記載の制御方法。
23. 前記生成ステップにおいて、前記基準陳列情報が示す基準に合致しない商品について、その商品を陳列すべき位置、又はその商品が陳列されている位置に陳列すべき商品を表す修正情報を前記結果画像に含める、21.又は22.に記載の制御方法。
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析ステップと、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較ステップと、を有する制御方法。
17. 前記基準陳列情報は、前記商品棚に陳列されるべき各商品の識別情報を示し、
前記画像解析ステップにおいて、前記商品棚に陳列されている各商品の識別情報を示す前記実陳列情報を生成する、16.に記載の制御方法。
18. 前記基準陳列情報は、前記商品棚における前記商品の陳列位置と、フェイス数と、他の商品との配置関係とのうちの少なくとも1つを示す、17.に記載の制御方法。
19. 前記比較ステップにおいて、商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、16.乃至18.いずれか一つに記載の制御方法。
20. 前記比較ステップにおいて、メーカの識別子を取得し、前記識別子で特定されるメーカの商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、16.乃至18.いずれか一つに記載の制御方法。
21. 前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成ステップを有する、16.乃至20.いずれか一項に記載の制御方法。
22. 前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表す、21.に記載の制御方法。
23. 前記生成ステップにおいて、前記基準陳列情報が示す基準に合致しない商品について、その商品を陳列すべき位置、又はその商品が陳列されている位置に陳列すべき商品を表す修正情報を前記結果画像に含める、21.又は22.に記載の制御方法。
24. 16.乃至23.いずれか一つに記載の制御方法の各ステップをコンピュータに実行させるプログラム。
この出願は、2017年9月29日に出願された日本出願特願2017-191790号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
Claims (10)
- 商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成手段と、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記生成手段は、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして、前記棚画像に重畳させる、情報処理装置。 - 前記基準陳列情報は、前記商品棚に陳列されるべき各商品の識別情報を示し、
前記画像解析手段は、前記商品棚に陳列されている各商品の識別情報を示す前記実陳列情報を生成する、請求項1に記載の情報処理装置。 - 前記基準陳列情報は、前記商品棚における前記商品の陳列位置と、フェイス数と、他の商品との配置関係とのうちの少なくとも1つを示す、請求項2に記載の情報処理装置。
- 前記比較手段は、商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、請求項1乃至3いずれか一項に記載の情報処理装置。
- 前記比較手段は、メーカの識別子を取得し、前記識別子で特定されるメーカの商品の陳列状況が前記基準陳列情報によって示される基準に合致する度合いを表す合致率を算出して前記比較情報に含める、請求項1乃至3いずれか一項に記載の情報処理装置。
- 前記結果画像は、さらに、前記合致率を表す文字列を含む、請求項4または5に記載の情報処理装置。
- 前記生成手段は、前記基準陳列情報が示す基準に合致しない商品について、その商品を陳列すべき位置、又はその商品が陳列されている位置に陳列すべき商品を表す修正情報を前記結果画像に含める、請求項1に記載の情報処理装置。
- 情報処理装置及び携帯端末を有する情報処理システムであって、
前記携帯端末は、商品棚が撮像されている棚画像を前記情報処理装置に送信し、
前記情報処理装置は、
前記送信された棚画像を受信し、その棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析手段と、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較手段と、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成し、前記携帯端末へ送信する生成手段と、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記情報処理装置の前記生成手段は、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして、前記棚画像に重畳させ、当該結果画像を前記携帯端末へ送信し、
前記携帯端末は、前記結果画像を受信してディスプレイ装置に表示させる、情報処理システム。 - コンピュータによって実行される制御方法であって、
商品棚が撮像されている棚画像を画像解析して、前記商品棚における商品の陳列状況を表す実陳列情報を生成する画像解析ステップと、
前記実陳列情報と、前記商品棚における商品の陳列の基準を表す基準陳列情報とを比較し、その比較の結果を表す比較情報を生成する比較ステップと、
前記比較情報を用いて、前記基準陳列情報が示す基準に合致しない商品を表す結果画像を生成する生成ステップと、を有し、
前記結果画像は、前記基準陳列情報が示す基準に合致しない商品と、前記基準陳列情報が示す基準に合致する商品とを識別可能な態様で表し、
前記生成ステップにおいて、前記結果画像において、
棚画像に、前記比較の結果を示す重畳データを重畳させ、
前記基準陳列情報と合致しない商品に対応する部分の色が他の部分に比較して濃く、前記基準陳列情報と合致する商品に対応する部分の色が他の部分に比較して薄いヒートマップを前記重畳データとして前記棚画像に重畳させる、制御方法。 - 請求項9に記載の制御方法の各ステップをコンピュータに実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023212804A JP2024019591A (ja) | 2017-09-29 | 2023-12-18 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017191790 | 2017-09-29 | ||
JP2017191790 | 2017-09-29 | ||
JP2019544538A JP7243627B2 (ja) | 2017-09-29 | 2018-09-11 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
PCT/JP2018/033600 WO2019065212A1 (ja) | 2017-09-29 | 2018-09-11 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019544538A Division JP7243627B2 (ja) | 2017-09-29 | 2018-09-11 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023212804A Division JP2024019591A (ja) | 2017-09-29 | 2023-12-18 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023029656A true JP2023029656A (ja) | 2023-03-03 |
JP7416292B2 JP7416292B2 (ja) | 2024-01-17 |
Family
ID=65901825
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019544538A Active JP7243627B2 (ja) | 2017-09-29 | 2018-09-11 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
JP2023004493A Active JP7416292B2 (ja) | 2017-09-29 | 2023-01-16 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
JP2023212804A Pending JP2024019591A (ja) | 2017-09-29 | 2023-12-18 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019544538A Active JP7243627B2 (ja) | 2017-09-29 | 2018-09-11 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023212804A Pending JP2024019591A (ja) | 2017-09-29 | 2023-12-18 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (5) | US11531960B2 (ja) |
JP (3) | JP7243627B2 (ja) |
WO (1) | WO2019065212A1 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10846561B1 (en) * | 2020-04-01 | 2020-11-24 | Scandit Ag | Recognition and selection of discrete patterns within a scene or image |
JP6665337B1 (ja) * | 2019-07-02 | 2020-03-13 | 株式会社スタディスト | メーカーが販売を希望する商品の販売促進作業を管理するための装置およびその装置において実行されるプログラム |
WO2021033310A1 (ja) * | 2019-08-22 | 2021-02-25 | 日本電気株式会社 | 処理装置、処理方法及びプログラム |
JP6754987B1 (ja) * | 2019-08-29 | 2020-09-16 | パナソニックIpマネジメント株式会社 | 業務支援システム、業務支援装置、業務支援方法、及び、コンピュータプログラム |
JP6899535B2 (ja) * | 2019-11-18 | 2021-07-07 | パナソニックIpマネジメント株式会社 | 業務支援装置、業務支援方法、コンピュータプログラム、及び、業務支援システム |
JP2021009674A (ja) * | 2020-01-21 | 2021-01-28 | 株式会社スタディスト | メーカーが販売を希望する商品の販売促進作業を管理するための装置およびその装置において実行されるプログラム |
US11922271B1 (en) | 2020-05-15 | 2024-03-05 | Scandit Ag | Virtual screen standby mode for mobile device camera |
JP7464129B2 (ja) | 2020-07-31 | 2024-04-09 | 日本電気株式会社 | 商品検知装置、商品検知システム、商品検知方法および商品検知プログラム |
US20230385895A1 (en) * | 2020-11-11 | 2023-11-30 | Nec Corporation | Display control apparatus, display control method, and non-transitory computer-readable medium |
US11495036B1 (en) | 2021-01-29 | 2022-11-08 | Scandit Ag | Segmenting images for optical character recognition |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9361729B2 (en) * | 2010-06-17 | 2016-06-07 | Microsoft Technology Licensing, Llc | Techniques to present location information for social networks using augmented reality |
JP4914528B1 (ja) | 2010-08-31 | 2012-04-11 | 新日鉄ソリューションズ株式会社 | 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム |
US9026631B2 (en) * | 2012-01-24 | 2015-05-05 | International Business Machines Corporation | Business-to-business social network |
US8941645B2 (en) | 2012-05-11 | 2015-01-27 | Dassault Systemes | Comparing virtual and real images in a shopping experience |
CN104871198A (zh) | 2012-12-04 | 2015-08-26 | 日本电气株式会社 | 商品信息处理装置、其数据处理方法和程序 |
JP5881022B1 (ja) | 2014-09-11 | 2016-03-09 | パナソニックIpマネジメント株式会社 | 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法 |
WO2016052383A1 (ja) | 2014-09-30 | 2016-04-07 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
US20180002109A1 (en) | 2015-01-22 | 2018-01-04 | Nec Corporation | Shelf space allocation management device and shelf space allocation management method |
-
2018
- 2018-09-11 WO PCT/JP2018/033600 patent/WO2019065212A1/ja active Application Filing
- 2018-09-11 US US16/651,762 patent/US11531960B2/en active Active
- 2018-09-11 JP JP2019544538A patent/JP7243627B2/ja active Active
-
2022
- 2022-11-14 US US17/986,038 patent/US20230074521A1/en active Pending
-
2023
- 2023-01-16 JP JP2023004493A patent/JP7416292B2/ja active Active
- 2023-08-01 US US18/229,022 patent/US20230376894A1/en active Pending
- 2023-08-01 US US18/228,975 patent/US20240020635A1/en active Pending
- 2023-08-02 US US18/229,324 patent/US20230376895A1/en active Pending
- 2023-12-18 JP JP2023212804A patent/JP2024019591A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
JP2024019591A (ja) | 2024-02-09 |
US20230376895A1 (en) | 2023-11-23 |
US20200258033A1 (en) | 2020-08-13 |
JPWO2019065212A1 (ja) | 2020-10-22 |
JP7243627B2 (ja) | 2023-03-22 |
US20240020635A1 (en) | 2024-01-18 |
US20230376894A1 (en) | 2023-11-23 |
US11531960B2 (en) | 2022-12-20 |
WO2019065212A1 (ja) | 2019-04-04 |
JP7416292B2 (ja) | 2024-01-17 |
US20230074521A1 (en) | 2023-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7243627B2 (ja) | 情報処理装置、情報処理システム、制御方法、及びプログラム | |
US20230394428A1 (en) | Information processing apparatus, control method, and program | |
US20170293959A1 (en) | Information processing apparatus, shelf label management system, control method, and program | |
JP6202216B2 (ja) | 情報処理装置、棚札管理システム、制御方法、及びプログラム | |
JP2018190398A (ja) | 誘導画像キャプチャユーザインタフェース | |
US10943363B2 (en) | Image processing apparatus, and image processing method | |
US9031872B1 (en) | Digital sign with incorrectly stocked item identification | |
CA2950801A1 (en) | Planogram matching | |
KR102319893B1 (ko) | 재고 파악 방법 및 시스템 | |
JP2018156478A (ja) | コンピュータプログラム | |
JP2023073432A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP2018181321A (ja) | リアログラムからプラノグラムのユーザー・インターフェース | |
US10275439B2 (en) | Information processing device, display method and control program | |
JP2016224831A (ja) | 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム | |
JP5538287B2 (ja) | 商品検索システム | |
JP6847137B2 (ja) | 情報処理装置、棚管理システム、情報処理方法、及びプログラム | |
JP2021096635A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
WO2019181441A1 (ja) | 情報処理装置、制御方法、及びプログラム | |
US20230385895A1 (en) | Display control apparatus, display control method, and non-transitory computer-readable medium | |
US20230306741A1 (en) | Product detection device, product detection method, and recording medium | |
WO2021117625A1 (ja) | 表示制御装置、制御方法、及びプログラム | |
JP6702434B2 (ja) | 情報処理装置、制御方法、及びプログラム | |
JP2017162240A (ja) | 熟読率計測システム、方法及びプログラム | |
CN115222466A (zh) | 一种商品及其图片的关联方法 | |
WO2019181442A1 (ja) | 情報処理装置、制御方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230116 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231205 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231218 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7416292 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |