JP7435771B2 - 制御装置、制御方法、およびプログラム - Google Patents
制御装置、制御方法、およびプログラム Download PDFInfo
- Publication number
- JP7435771B2 JP7435771B2 JP2022531199A JP2022531199A JP7435771B2 JP 7435771 B2 JP7435771 B2 JP 7435771B2 JP 2022531199 A JP2022531199 A JP 2022531199A JP 2022531199 A JP2022531199 A JP 2022531199A JP 7435771 B2 JP7435771 B2 JP 7435771B2
- Authority
- JP
- Japan
- Prior art keywords
- height
- customer
- shelf
- light emitting
- control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 89
- 238000003384 imaging method Methods 0.000 claims description 87
- 238000005286 illumination Methods 0.000 claims description 30
- 238000001514 detection method Methods 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 39
- 238000004891 communication Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 239000000470 constituent Substances 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 3
- 238000009434 installation Methods 0.000 description 3
- 239000000796 flavoring agent Substances 0.000 description 2
- 235000019634 flavors Nutrition 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
- G07F9/02—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
- G07G1/00—Cash registers
- G07G1/01—Details for indicating
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
- G07G1/00—Cash registers
- G07G1/12—Cash registers electronically operated
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Circuit Arrangement For Electric Light Sources In General (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
第一の側面に係る制御装置は、
棚の前方を含む領域を撮影する撮像装置とともに使用され、前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する推定手段と、
前記顧客の身長を用いて、前記棚に関連する発光装置および音声出力装置の少なくとも一方の動作状態を制御する制御手段と、を有する。
第二の側面に係る制御方法は、
制御装置は、
棚の前方を含む領域を撮影する撮像装置とともに使用され、
前記制御装置が、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定し、
前記顧客の身長を用いて、前記棚に関連する発光装置および音声出力装置の少なくとも一方の動作状態を制御する、ことを含む。
このコンピュータプログラムは、コンピュータにより実行されたとき、コンピュータに、制御装置上で、その制御方法を実施させるコンピュータプログラムコードを含む。
<システム概要>
図1は、本発明の実施の形態に係る制御装置100の商品登録システム1における使用環境を示す図である。図2は、商品登録システム1の撮像装置200を説明するための図である。図3は、図2の撮像装置200を構成する撮像ユニット202を説明するための図である。
図4は、本実施形態の制御装置100の機能構成の一例を示す機能ブロック図である。制御装置100は、推定部102と、制御部104とを備える。制御装置100は、陳列棚40の前方を含む領域を撮影する撮像ユニット202とともに使用される。
推定部102は、撮像ユニット202により撮影された画像を処理することにより顧客の身長を推定する。制御部104は、顧客の身長を用いて、陳列棚40に関連する発光装置および音声出力装置80の少なくとも一方の動作状態を制御する。
(a2)推定部102により推定された顧客の身長が基準未満の場合、照明部222の発光部を上側から下方向に照射させる。推定部102により推定された顧客の身長が基準以上の場合、照明部222の発光部の下側から下方向に照射させる。
例えば、顧客の身長の高さを複数に区分し、各区分に属する顧客が聞こえやすい高さに、スピーカはそれぞれ配置される。制御部104による各スピーカへの音声出力は個別に制御可能である。制御部104は、例えば、どの高さのスピーカから音声出力を行うか、あるいは、各スピーカから出力される音声または報知音の音量を制御する。
図5は、各実施形態の制御装置100を実現するコンピュータ1000のハードウェア構成を例示するブロック図である。制御装置100は、例えば、サーバコンピュータ、パーソナルコンピュータである。また、商品登録装置30、画像処理装置70などもコンピュータ1000によって実現される。制御装置100の少なくとも一部の機能は、商品登録装置30を実現するコンピュータ1000が実現してもよい。例えば、制御装置100は、商品登録装置30の一部の機能として組み込まれてもよい。上記したように、画像処理装置70は制御装置100と同じコンピュータ1000に含まれてもよい。また、後述する第3および第5実施形態の操作端末60もコンピュータ1000によって実現される。
図6は、本実施形態の制御装置100の動作例を示すフローチャートである。まず、推定部102は、撮像ユニット202のカメラ212により陳列棚40の前方を含む領域を撮影した画像を画像処理装置70に処理させる(ステップS101)。そして、推定部102は、画像処理装置70から取得した画像処理結果に基づいて、顧客の身長を推定する(ステップS103)。そして、制御部104は、顧客の身長を用いて、陳列棚40に関連する発光装置(照明部222の発光部)および音声出力装置80の少なくとも一方の動作状態を制御する(ステップS105)。
例えば、発光装置は、照射方向が制御可能である。制御部104は、ステップS103で推定された身長が基準未満の場合、照明部222の発光部を下側から上方向に照射させる。基準は、例えば、160cmである。基準は、制御装置100の設定画面(不図示)により設定可能であってよい。基準は複数であってもよい。また、制御部104は、ステップS103で推定された身長が基準以上の場合、照明部222の発光部の上側から下方向に照射させる。
制御部104は、ステップS103で推定された身長が基準以上の場合、図7(a)に示すように、陳列棚40の上方に設置されたスピーカから音声または報知音を出力させる。また、制御部104は、ステップS103で推定された身長が基準未満の場合、図7(b)に示すように、陳列棚40の下方に設置されたスピーカから音声または報知音を出力させる。
本実施形態の制御装置100は、上記実施形態の制御対象である照明部222が高さ方向に複数に区分されていて、身長に応じて各区分の発光状態を制御する構成を有する点以外は上記第1実施形態と同様である。本実施形態の制御装置100は、図4の第1実施形態と同様な構成を有するため、以下、第1実施形態の図4の機能ブロック図を用いて説明する。ただし、本実施形態の構成は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
制御部104により制御される発光装置は、一例として、撮像ユニット202の照明部222の発光部である。照明部222の発光部は、上記したように、陳列棚40の高さ方向に延在する。本実施形態では、照明部222の発光部は、当該高さ方向に複数に区分されており、制御部104により区分毎に独立して制御可能である。制御部104は、照明部222の発光部の各区分の発光状態を、推定部102により推定された身長に応じて制御する。
(b2)当該区分の発光部を他の区分の発光部より明るさを弱くする。
(b3)当該区分の発光部を点滅させる。
(b4)当該区分の以外の発光部を点滅させる。
(b5)当該区分の発光部のみ発光させ、他の区分の発光部は消灯する。
(b6)当該区分の発光部のみ消灯し、他の区分の発光部は発光させる。
図9は、本実施形態の制御装置100の動作例を示すフローチャートである。図9のフローチャートは、図6のフローチャートと同じステップS101とステップS103を含むとともに、さらに、ステップS201~ステップS207を含む。
ステップS103で顧客の身長が推定された後、制御部104は、身長に応じて、照明部222の発光部の動作状態を制御する(ステップS201)。例えば、ステップS103で推定された身長が170cmを超える(「高」)の場合、対応テーブル120を参照し、「高」に対応する発光部ID「001」を取得する。図10(a)に示すように、制御部104は、発光部ID001に対応する上から1番目の発光部222aを発光させる(ステップS203)。
本実施形態では、陳列棚40の高さ方向において異なる高さに設置される複数の表示装置を発光装置とし、身長に応じてアクティブにする表示装置を選択して動作制御する構成を有する点以外は、上記第1実施形態と同様である。本実施形態の制御装置100は、図4の第1実施形態と同様な構成を有するため、以下、第1実施形態の図4の機能ブロック図を用いて説明する。ただし、本実施形態の構成は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
図11は、本実施形態の制御装置100の商品登録システム1における使用環境を示す図である。本実施形態では、制御装置100は、陳列棚40の所定の位置に配置される表示装置を制御する。表示装置は、液晶ディスプレイ、有機ELディスプレイなどである。本実施形態では、表示装置は、例えば、タブレット端末、スマートフォンなどの操作端末60である。操作端末60は、図5のコンピュータ1000によって実現される。
制御部104により制御される発光装置は、陳列棚40の高さ方向において異なる高さに設置される複数の表示装置である。図12に示すように、複数の操作端末60が陳列棚40の高さ方向において異なる高さに3つの操作端末60(図中、上から60a、60b、60cと示す)が設置されている。
図13は、本実施形態の制御装置100の動作例を示すフローチャートである。図13のフローチャートは、図9のフローチャートと同じステップS101、ステップS103、およびステップS201を含むとともに、さらに、ステップS301~ステップS307を含む。なお、本実施形態のフローは、図6および図9の少なくとも一方のフローと組み合わせて並列に実行されてもよい。
ステップS103で顧客の身長が推定された後、制御部104は、身長に応じて、照明部222の発光部の動作状態を制御する(ステップS201)。例えば、ステップS103で推定された身長が170cmを超える(「高」)の場合、対応テーブル120を参照し、「高」に対応する表示装置の識別情報を取得する。図12(a)に示すように、制御部104は、表示装置の識別情報に対応する上から1番目の操作端末60aのディスプレイ62をアクティブにする(ステップS303)。
本実施形態では、制御部104により制御される発光装置は、プロジェクタ90である点以外は、上記第1実施形態と同様である。ただし、本実施形態の構成は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
図14は、本実施形態の制御装置100の商品登録システム1における使用環境を示す図である。本実施形態では、制御装置100に制御される発光装置は、プロジェクタ90である。
図15は、本実施形態の制御装置100の機能構成の一例を示す機能ブロック図である。制御装置100は、図4の制御装置100と同じ、推定部102と、制御部104と、を有するとともに、さらに、位置特定部106を有する。
(c1)陳列棚40の前面フレーム42
(c2)陳列棚40の棚および棚に陳列されている商品を含む領域
(c3)商品の表面
(c4)顧客の身体の一部(例えば、手の甲など)
本実施形態の制御装置100は、画像処理により顧客が陳列棚40から取り出した商品を特定し、複数の候補が特定された場合に顧客に選択させる構成を有する点で上記実施形態と相違する。ただし、本実施形態の制御装置100は、他の実施形態の構成の少なくともいずれか一つと矛盾を生じない範囲で組み合わせてもよい。
図16は、本実施形態の制御装置100の商品登録システム1における使用環境を示す図である。図17は、本実施形態の制御装置100の機能構成の一例を示す機能ブロック図である。図16では、商品登録システム1は、図1の音声出力装置80に替えて、操作端末60を備えている。ただし、商品登録システム1は、後述するように、図14の音声出力装置80およびプロジェクタ90をさらに備えてもよい。
商品特定部110は、陳列棚40の前方を含む領域を撮影した画像を処理することにより、顧客が陳列棚40から取り出した商品を特定する。制御部104は、陳列棚40に関連する発光装置および表示装置を制御する。
商品特定部110により、複数の候補の商品が特定された場合に、制御部104は、表示装置に当該複数の候補から顧客に選択させる表示を行わせるとともに、発光装置に所定の発光状態で発光させる。
図19は、本実施形態の制御装置100の動作例を示すフローチャートである。まず、推定部102は、撮像ユニット202のカメラ212により陳列棚40の前方を含む領域を撮影した画像を画像処理装置70に処理させる(ステップS101)。そして、商品特定部110は、顧客が陳列棚40から取り出した商品を特定する(ステップS401)。
一例として、発光装置は、プロジェクタ90である。
図20は、制御部104による発光装置の発光状態の制御例を示す図である。
この例では、制御部104は、プロジェクタ90に、陳列棚40の前面フレーム42に複数候補が見つかったこと、および複数候補の中から決済対象となる商品を選択する必要がある旨を顧客に伝えるためのメッセージを投影させている。
顧客は、このメッセージを見て、選択操作が必要であること、および操作端末60の存在を知ることができる。
制御部104は、照明部222の発光部を、候補の数の回数分、発光させてもよい。
この例では、発光装置は、プロジェクタ90である。制御部104は、プロジェクタ90に、複数の候補商品のパッケージの画像402と、当該候補の中から決済対象の商品の選択を促すメッセージ404とを含む画像400を投影する。
投影画像400は、棚と、棚に陳列されている商品との表面に投影される。
図22の例では、制御部104は、検出部により検出された顧客の手の甲に、複数の候補から決済対象となる商品を選択するよう指示するメッセージを含む画像を投影している。
図23の例では、制御部104は、検出部により検出された商品パッケージの表面に、複数の候補から決済対象となる商品を選択するよう指示するメッセージを含む画像を投影している。
例えば、第5実施形態において、複数候補の中から決済対象となる商品の選択を行う操作端末60の存在を顧客に伝える際に、制御部104は、第1実施形態の推定部102により推定された顧客の身長を用いてもよい。
なお、本発明において利用者(顧客)に関する情報を取得、利用する場合は、これを適法に行うものとする。
前記顧客の身長を用いて、前記棚に関連する発光装置および音声出力装置の少なくとも一方の動作状態を制御する制御手段と、を備える、制御装置。
2. 1.に記載の制御装置において、
前記発光装置は照明装置であり、
前記制御手段は、前記照明装置の光の照射方向を制御する、制御装置。
3. 1.または2.に記載の制御装置において、
前記発光装置は照明装置であり、
前記照明装置は、前記棚の高さ方向に延在し、当該高さ方向に複数に区分されており、前記区分毎に独立して制御可能であり、
前記制御手段は、前記照明装置の各前記区分の発光状態を、前記推定手段により推定された前記身長に応じて制御する、制御装置。
4. 1.から3.のいずれか一つに記載の制御装置において、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
前記制御手段は、前記推定手段により推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する、制御装置。
5. 1.から4.のいずれか一つに記載の制御装置において、
前記発光装置はプロジェクタである、制御装置。
6. 5.に記載の制御装置において、
前記推定手段により推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定する特定手段をさらに備え、
前記制御手段は、特定された前記投影位置に所定の画像を前記プロジェクタに投影させる、制御装置。
7. 6.に記載の制御装置において、
前記顧客の身体を検出する検出手段をさらに備え、
前記制御手段は、前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる、制御装置。
棚の前方を含む領域を撮影する撮像装置とともに使用され、
前記制御装置が、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定し、
前記顧客の身長を用いて、前記棚に関連する発光装置および音声出力装置の少なくとも一方の動作状態を制御する、制御方法。
9. 8.に記載の制御方法において、
前記発光装置は照明装置であり、
前記制御装置が、
前記照明装置の光の照射方向を制御する、制御方法。
10. 8.または9.に記載の制御方法において、
前記発光装置は照明装置であり、
前記照明装置は、前記棚の高さ方向に延在し、当該高さ方向に複数に区分されており、前記区分毎に独立して制御可能であり、
前記制御装置が、
前記照明装置の各前記区分の発光状態を、推定された前記身長に応じて制御する、制御方法。
11. 8.から9.のいずれか一つに記載の制御方法において、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
前記制御装置が、
推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する、制御方法。
12. 8.から11.のいずれか一つに記載の制御方法において、
前記発光装置はプロジェクタである、制御方法。
13. 12.に記載の制御方法において、
前記制御装置が、さらに、
推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定し、
特定された前記投影位置に所定の画像を前記プロジェクタに投影させる、制御方法。
14. 13.に記載の制御方法において、
前記制御装置が、さらに、
前記顧客の身体を検出し、
前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる、制御方法。
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する手順、
前記顧客の身長を用いて、前記棚に関連する発光装置および音声出力装置の少なくとも一方の動作状態を制御する手順、を実行させるためのプログラム。
16. 15.に記載のプログラムにおいて、
前記発光装置は照明装置であり、
前記照明装置の光の照射方向を制御する手順をコンピュータに実行させるためのプログラム。
17. 15.または16.に記載のプログラムにおいて、
前記発光装置は照明装置であり、
前記照明装置は、前記棚の高さ方向に延在し、当該高さ方向に複数に区分されており、前記区分毎に独立して制御可能であり、
前記照明装置の各前記区分の発光状態を、前記推定する手順により推定された前記身長に応じて制御する手順をコンピュータに実行させるためのプログラム。
18. 15.から17.のいずれか一つに記載のプログラムにおいて、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
前記推定する手順により推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する手順をコンピュータに実行させるためのプログラム。
19. 15.から18.のいずれか一つに記載のプログラムにおいて、
前記発光装置はプロジェクタである、プログラム。
20. 19.に記載のプログラムにおいて、
前記推定する手順により推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定する手順、
特定された前記投影位置に所定の画像を前記プロジェクタに投影させる手順、をコンピュータに実行させるためのプログラム。
21. 20.に記載のプログラムにおいて、
前記顧客の身体を検出する手順、
前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる手順、をコンピュータに実行させるためのプログラム。
前記棚に関連する発光装置および表示装置を制御する制御手段と、
を備え、
前記特定手段により、複数の候補の商品が特定された場合に、前記制御手段は、前記表示装置に当該複数の候補から前記顧客に選択させる表示を行わせるとともに、前記発光装置に所定の発光状態で発光させる、制御装置。
23. 22.に記載の制御装置において、
前記制御手段は、前記候補の数の回数分、前記発光装置を発光させる、制御装置。
24. 22.または23.に記載の制御装置において、
さらに、前記画像を処理することにより顧客の身長を推定する推定手段を備え、
前記制御手段は、前記顧客の身長を用いて、前記発光装置および前記表示装置の少なくとも一方の動作状態を制御する、制御装置。
25. 22.から24.のいずれか一つに記載の制御装置において、
前記発光装置は照明装置であり、
前記制御手段は、前記照明装置の光の照射方向を制御する、制御装置。
26. 22.から25.のいずれか一つに記載の制御装置において、
前記発光装置は照明装置であり、
さらに、前記画像を処理することにより顧客の身長を推定する推定手段を備え、
前記照明装置は、前記棚の高さ方向に延在し、当該高さ方向に複数に区分されており、前記区分毎に独立して制御可能であり、
前記制御手段は、前記照明装置の各前記区分の発光状態を、前記推定手段により推定された前記身長に応じて制御する、制御装置。
27. 22.から26.のいずれか一つに記載の制御装置において、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
さらに、前記画像を処理することにより顧客の身長を推定する推定手段を備え、
前記制御手段は、前記推定手段により推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する、制御装置。
28. 22.から27.のいずれか一つに記載の制御装置において、
前記発光装置はプロジェクタである、制御装置。
29. 28.に記載の制御装置において、
さらに、前記画像を処理することにより顧客の身長を推定する推定手段を備え、
前記推定手段により推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定する特定手段をさらに備え、
前記制御手段は、特定された前記投影位置に所定の画像を前記プロジェクタに投影させる、制御装置。
30. 29.に記載の制御装置において、
前記顧客の身体を検出する検出手段をさらに備え、
前記制御手段は、前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる、制御装置。
棚の前方を含む領域を撮影する撮像装置とともに使用され、前記撮像装置が撮像した画像を処理することにより、前記顧客が前記棚から取り出した商品を特定し、
前記棚に関連する発光装置および表示装置を制御し、
複数の候補の商品が特定された場合に、前記表示装置に当該複数の候補から前記顧客に選択させる表示を行わせるとともに、前記発光装置に所定の発光状態で発光させる、制御方法。
32. 31.に記載の制御方法において、
前記制御装置が、
前記候補の数の回数分、前記発光装置を発光させる、制御方法。
33. 31.または32.に記載の制御方法において、
前記制御装置が、
さらに、前記画像を処理することにより顧客の身長を推定し、
前記顧客の身長を用いて、前記発光装置および前記表示装置の少なくとも一方の動作状態を制御する、制御方法。
34. 31.から33.のいずれか一つに記載の制御方法において、
前記発光装置は照明装置であり、
前記制御装置が、
前記照明装置の光の照射方向を制御する、制御方法。
35. 31.から34.のいずれか一つに記載の制御方法において、
前記発光装置は照明装置であり、
前記照明装置は、前記棚の高さ方向に延在し、当該高さ方向に複数に区分されており、前記区分毎に独立して制御可能であり、
前記制御装置が、
さらに、前記画像を処理することにより顧客の身長を推定し、
前記照明装置の各前記区分の発光状態を、推定された前記身長に応じて制御する、制御方法。
36. 31.から35.のいずれか一つに記載の制御方法において、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
前記制御装置が、
さらに、前記画像を処理することにより顧客の身長を推定し、
推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する、制御方法。
37. 31.から36.のいずれか一つに記載の制御方法において、
前記発光装置はプロジェクタである、制御方法。
38. 37.に記載の制御方法において、
前記制御装置が、さらに、
前記画像を処理することにより顧客の身長を推定し、
推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定し、
特定された前記投影位置に所定の画像を前記プロジェクタに投影させる、制御方法。
39. 38.に記載の制御方法において、
前記制御装置が、さらに、
前記顧客の身体を検出し、
前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる、制御方法。
前記撮像装置が撮像した画像を処理することにより、前記顧客が前記棚から取り出した商品を特定する手順、
前記棚に関連する発光装置および表示装置を制御する手順、
前記特定する手順により、複数の候補の商品が特定された場合に、前記表示装置に当該複数の候補から前記顧客に選択させる表示を行わせるとともに、前記発光装置に所定の発光状態で発光させる手順、を実行させるためのプログラム。
41. 40.に記載のプログラムにおいて、
前記候補の数の回数分、前記発光装置を発光させる手順をコンピュータに実行させるためのプログラム。
42. 40.または41.に記載のプログラムにおいて、
さらに、前記画像を処理することにより顧客の身長を推定する手順、
前記顧客の身長を用いて、前記発光装置および前記表示装置の少なくとも一方の動作状態を制御する手順、をコンピュータに実行させるためのプログラム。
43. 40.から42.のいずれか一つに記載のプログラムにおいて、
前記発光装置は照明装置であり、
前記照明装置の光の照射方向を制御する手順をコンピュータに実行させるためのプログラム。
44. 40.から43.のいずれか一つに記載のプログラムにおいて、
前記発光装置は照明装置であり、
前記照明装置は、前記棚の高さ方向に延在し、当該高さ方向に複数に区分されており、前記区分毎に独立して制御可能であり、
さらに、前記画像を処理することにより顧客の身長を推定する手順、
前記照明装置の各前記区分の発光状態を、前記推定する手順により推定された前記身長に応じて制御する手順、をコンピュータに実行させるためのプログラム。
45. 40.から44.のいずれか一つに記載のプログラムにおいて、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
さらに、前記画像を処理することにより顧客の身長を推定する手順、
前記推定する手順により推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する手順、をコンピュータに実行させるためのプログラム。
46. 40.から45.のいずれか一つに記載のプログラムにおいて、
前記発光装置はプロジェクタである、プログラム。
47. 46.に記載のプログラムにおいて、
前記制御装置が、さらに、
前記画像を処理することにより顧客の身長を推定する手順、
前記推定する手順により推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定する手順、
特定された前記投影位置に所定の画像を前記プロジェクタに投影させる手順、をコンピュータに実行させるためのプログラム。
48. 47.に記載のプログラムにおいて、
さらに、
前記顧客の身体を検出する手順、
前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる手順、をコンピュータに実行させるためのプログラム。
3 通信ネットワーク
30 商品登録装置
40 陳列棚
42 前面フレーム
60、60a、60b、60c 操作端末
62 ディスプレイ
70 画像処理装置
80 音声出力装置
90 プロジェクタ
100 制御装置
102 推定部
104 制御部
106 位置特定部
110 商品特定部
120 対応テーブル
200 撮像装置
202 撮像ユニット
210 撮像部筐体
212 カメラ
220 照明部筐体
222 照明部
222a、222b、222c 発光部
300 画面
300 操作画面
302 選択指示部
304 候補商品情報表示部
306 選択ボタン
308 金額表示部
310 会計ボタン
312 クリアボタン
314 キャンセルボタン
1000 コンピュータ
1010 バス
1020 プロセッサ
1030 メモリ
1040 ストレージデバイス
1050 入出力インタフェース
1060 ネットワークインタフェース
Claims (13)
- 棚の前方を含む領域を撮影する撮像装置とともに使用され、前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する推定手段と、
前記顧客の身長を用いて、前記棚に関連する複数の音声出力装置の動作状態をそれぞれ制御する制御手段と、を備え、
前記複数の音声出力装置は、前記棚の高さ方向の異なる高さにそれぞれ配置される、制御装置。 - 棚の前方を含む領域を撮影する撮像装置とともに使用され、前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する推定手段と、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御する制御手段と、を備え、
前記発光装置は照明装置であり、
前記照明装置は、前記棚の高さ方向に延在しており、
前記制御手段は、前記推定手段により推定された前記身長が基準未満の場合、前記照明装置の下側から上方向に照射させ、前記推定手段により推定された前記身長が基準以上の場合、前記照明装置の上側から下方向に照射させるように、前記照明装置の光の照射方向を制御する、制御装置。 - 請求項2に記載の制御装置において、
前記照明装置は、当該高さ方向に複数に区分されており、前記区分毎に独立して制御可能であり、
前記制御手段は、前記照明装置の各前記区分の発光状態を、前記推定手段により推定された前記身長に応じて制御する、制御装置。 - 棚の前方を含む領域を撮影する撮像装置とともに使用され、前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する推定手段と、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御する制御手段と、を備え、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
前記制御手段は、前記推定手段により推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する、制御装置。 - 棚の前方を含む領域を撮影する撮像装置とともに使用され、前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する推定手段と、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御する制御手段と、を備え、
前記発光装置はプロジェクタであり、
前記推定手段により推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定する特定手段をさらに備え、
前記制御手段は、特定された前記投影位置に所定の画像を前記プロジェクタに投影させ、
前記顧客の身体を検出する検出手段をさらに備え、
前記制御手段は、前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる、制御装置。 - 制御装置は、
棚の前方を含む領域を撮影する撮像装置とともに使用され、
前記制御装置が、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定し、
前記顧客の身長を用いて、前記棚に関連する複数の音声出力装置の動作状態をそれぞれ制御し、
前記複数の音声出力装置は、前記棚の高さ方向の異なる高さにそれぞれ配置される、制御方法。 - 制御装置は、
棚の前方を含む領域を撮影する撮像装置とともに使用され、
前記制御装置が、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定し、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御し、
前記発光装置は照明装置であり、
前記照明装置は、前記棚の高さ方向に延在しており、
制御手段は、推定手段により推定された前記身長が基準未満の場合、前記照明装置の下側から上方向に照射させ、前記推定手段により推定された前記身長が基準以上の場合、前記照明装置の上側から下方向に照射させるように、前記照明装置の光の照射方向を制御する、制御方法。 - 制御装置は、
棚の前方を含む領域を撮影する撮像装置とともに使用され、
前記制御装置が、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定し、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御し、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
制御手段は、推定手段により推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する、制御方法。 - 制御装置は、
棚の前方を含む領域を撮影する撮像装置とともに使用され、
前記制御装置が、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定し、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御し、
前記発光装置はプロジェクタであり、
推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定し、
特定された前記投影位置に所定の画像を前記プロジェクタに投影させ、
前記顧客の身体を検出し、
前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる、制御方法。 - 棚の前方を含む領域を撮影する撮像装置とともに使用されるコンピュータに、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する手順、
前記顧客の身長を用いて、前記棚に関連する複数の音声出力装置の動作状態をそれぞれ制御する手順、を実行させ、
前記複数の音声出力装置は、前記棚の高さ方向の異なる高さにそれぞれ配置される、プログラム。 - 棚の前方を含む領域を撮影する撮像装置とともに使用されるコンピュータに、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する手順、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御する手順、を実行させ、
前記発光装置は照明装置であり、
前記照明装置は、前記棚の高さ方向に延在しており、
推定された前記身長が基準未満の場合、前記照明装置の下側から上方向に照射させ、推定された前記身長が基準以上の場合、前記照明装置の上側から下方向に照射させるように、前記照明装置の光の照射方向を制御する手順、を実行させるためのプログラム。 - 棚の前方を含む領域を撮影する撮像装置とともに使用されるコンピュータに、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する手順、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御する手順、を実行させ、
前記発光装置は、前記棚の高さ方向において異なる高さに設置される複数の表示装置であり、
推定された前記身長に応じて、いずれの前記高さの前記表示装置をアクティブにさせるかを制御する手順を実行させるためのプログラム。 - 棚の前方を含む領域を撮影する撮像装置とともに使用されるコンピュータに、
前記撮像装置が撮像した画像を処理することにより顧客の身長を推定する手順、
前記顧客の身長を用いて、前記棚に関連する発光装置の動作状態を制御する手順、を実行させ、
前記発光装置はプロジェクタであり、
推定された前記顧客の身長を用いて、前記プロジェクタの投影位置を特定する手順、
特定された前記投影位置に所定の画像を前記プロジェクタに投影させる手順、
前記顧客の身体を検出する手順、
前記プロジェクタに、検出された前記顧客の身体を前記投影位置として前記所定の画像を投影させる手順、を実行させるためのプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2020/023963 WO2021255894A1 (ja) | 2020-06-18 | 2020-06-18 | 制御装置、制御方法、およびプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021255894A1 JPWO2021255894A1 (ja) | 2021-12-23 |
JPWO2021255894A5 JPWO2021255894A5 (ja) | 2023-02-28 |
JP7435771B2 true JP7435771B2 (ja) | 2024-02-21 |
Family
ID=79267653
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022531199A Active JP7435771B2 (ja) | 2020-06-18 | 2020-06-18 | 制御装置、制御方法、およびプログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7435771B2 (ja) |
WO (1) | WO2021255894A1 (ja) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000194914A (ja) | 1998-12-24 | 2000-07-14 | Sanyo Electric Co Ltd | 自動販売機 |
JP2011118807A (ja) | 2009-12-07 | 2011-06-16 | Sanden Shoji Kk | タッチパネル自動販売機 |
JP2015156211A (ja) | 2014-01-17 | 2015-08-27 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | 商品演出方法、および、情報表示方法 |
JP2016170586A (ja) | 2015-03-12 | 2016-09-23 | 株式会社東芝 | 自動改札機 |
JP2018077666A (ja) | 2016-11-09 | 2018-05-17 | 大日本印刷株式会社 | 情報処理システム、情報処理装置、表示装置及びプログラム |
WO2018235198A1 (ja) | 2017-06-21 | 2018-12-27 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
WO2019059213A1 (ja) | 2017-09-20 | 2019-03-28 | パナソニックIpマネジメント株式会社 | 商品案内システム、商品案内方法及びプログラム |
JP2019133530A (ja) | 2018-02-01 | 2019-08-08 | 富士ゼロックス株式会社 | 情報処理装置 |
-
2020
- 2020-06-18 JP JP2022531199A patent/JP7435771B2/ja active Active
- 2020-06-18 WO PCT/JP2020/023963 patent/WO2021255894A1/ja active Application Filing
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000194914A (ja) | 1998-12-24 | 2000-07-14 | Sanyo Electric Co Ltd | 自動販売機 |
JP2011118807A (ja) | 2009-12-07 | 2011-06-16 | Sanden Shoji Kk | タッチパネル自動販売機 |
JP2015156211A (ja) | 2014-01-17 | 2015-08-27 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | 商品演出方法、および、情報表示方法 |
JP2016170586A (ja) | 2015-03-12 | 2016-09-23 | 株式会社東芝 | 自動改札機 |
JP2018077666A (ja) | 2016-11-09 | 2018-05-17 | 大日本印刷株式会社 | 情報処理システム、情報処理装置、表示装置及びプログラム |
WO2018235198A1 (ja) | 2017-06-21 | 2018-12-27 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
WO2019059213A1 (ja) | 2017-09-20 | 2019-03-28 | パナソニックIpマネジメント株式会社 | 商品案内システム、商品案内方法及びプログラム |
JP2019133530A (ja) | 2018-02-01 | 2019-08-08 | 富士ゼロックス株式会社 | 情報処理装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2021255894A1 (ja) | 2021-12-23 |
JPWO2021255894A1 (ja) | 2021-12-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6946635B2 (ja) | 情報処理システム、情報処理装置及びプログラム | |
JP2018181251A (ja) | 読取装置およびプログラム | |
JP2010039095A (ja) | 音声出力制御装置、音声出力装置、音声出力制御方法、及び、プログラム | |
US20150254488A1 (en) | Code symbol reading apparatus and method for reading code symbol | |
US8804026B1 (en) | Mobile device and method for controlling the same | |
US10268175B2 (en) | Information presentation method and information presentation apparatus | |
US20140285686A1 (en) | Mobile device and method for controlling the same | |
JP2021051501A (ja) | 情報処理装置、プログラム、及び報知方法 | |
JP7435771B2 (ja) | 制御装置、制御方法、およびプログラム | |
EP2573651A1 (en) | Pointer information processing device, pointer information processing program and conference system | |
JP7416231B2 (ja) | 設置支援装置、設置支援方法、およびプログラム | |
US10069984B2 (en) | Mobile device and method for controlling the same | |
JP2010032851A (ja) | 広告出力システム、及び、広告出力方法 | |
JP6326866B2 (ja) | 表示装置、表示方法及びプログラム | |
JP2019117424A (ja) | 情報処理装置、及びその制御方法、プログラム | |
JPWO2014136292A1 (ja) | インタフェース装置、及び制御方法 | |
JP5349646B2 (ja) | スキャナ | |
US20210149544A1 (en) | Information processing apparatus, information processing method, and program | |
JP7452647B2 (ja) | 処理装置、処理方法及びプログラム | |
US12014370B2 (en) | Processing apparatus, processing method, and non-transitory storage medium | |
WO2021234842A1 (ja) | 処理システム、処理方法及びプログラム | |
JP7366547B2 (ja) | 情報処理装置及び情報処理プログラム | |
US11600152B2 (en) | Reading device | |
JP7525022B2 (ja) | 処理装置、処理方法及びプログラム | |
WO2021181452A1 (ja) | 商品検出装置、商品検出方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221215 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230718 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230823 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231205 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240122 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7435771 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |