JP4914528B1 - 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム - Google Patents
拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム Download PDFInfo
- Publication number
- JP4914528B1 JP4914528B1 JP2011174373A JP2011174373A JP4914528B1 JP 4914528 B1 JP4914528 B1 JP 4914528B1 JP 2011174373 A JP2011174373 A JP 2011174373A JP 2011174373 A JP2011174373 A JP 2011174373A JP 4914528 B1 JP4914528 B1 JP 4914528B1
- Authority
- JP
- Japan
- Prior art keywords
- information
- product
- shelf
- size
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 64
- 238000000034 method Methods 0.000 title claims description 90
- 230000003190 augmentative effect Effects 0.000 title claims description 26
- 238000003672 processing method Methods 0.000 title claims description 5
- 230000004044 response Effects 0.000 claims abstract description 47
- 238000003860 storage Methods 0.000 claims abstract description 39
- 238000003384 imaging method Methods 0.000 claims abstract description 26
- 230000008569 process Effects 0.000 claims description 69
- 238000010586 diagram Methods 0.000 description 16
- 239000003550 marker Substances 0.000 description 14
- 230000006870 function Effects 0.000 description 10
- 238000001514 detection method Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 230000003442 weekly effect Effects 0.000 description 6
- 239000000284 extract Substances 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 235000013405 beer Nutrition 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 239000002453 shampoo Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Processing Or Creating Images (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【解決手段】情報処理端末は、撮影部での撮影内容の画像情報を含む、画像情報から特定され得る棚に陳列できる商品を示す商品情報を取得するための要求を情報処理装置に送信する要求手段と、要求に応答して情報処理装置から送信された返答に含まれる商品情報を撮影部で撮影された画像情報に重畳して表示部に表示する表示制御手段と、を有し、情報処理装置は、要求に含まれる画像情報から棚を特定して棚の空き空間の大きさを特定する特定手段と、商品を示す商品情報と商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、特定手段で特定された棚の空き空間の大きさよりも小さい商品の商品情報を選択する選択手段と、選択手段で選択された商品情報を含む返答を情報処理端末に送信する返答手段と、を有することで課題を解決する。
【選択図】図1
Description
例えば、棚の大きさの情報、季節性など商品毎の優先順位、顧客視点での棚の見やすさ等に基づいて棚割りを決定する技術が開示されている(特許文献1)。
また、例えば、店舗内を撮影した画像に、商品の画像を合成して棚割りの様子を視覚的に表示する技術も開示されている(特許文献2)。
AR提供装置100は、情報処理端末(コンピュータ)の一例であり、携帯情報端末、携帯電話、HMD(Head Mounted Display)、デジタルカメラ等である。AR提供装置100は、AR提供装置100を介して知覚できる現実空間に整合する位置に、AR提供装置100で生成した画像(コンピュータグラフィックス画像など)を表示することにより、拡張された現実感(AR:Augmented Reality)を提供する。本実施形態では、AR提供装置100は、タッチパネル式の表示画面10を有し、AR提供装置100を介して知覚できる現実空間の商品を陳列する棚に整合する位置に、商品に関する各種の情報(後述する商品情報など)を表す画像(拡張画像)を表示画面10に表示する。
なお、AR提供システムの構成は、上述した構成に限られるものではない。例えば、サーバ装置200が棚DB及び商品DBを有する構成を採用したが、サーバ装置200とは異なる装置が棚DB及び商品DBを有する構成を採用してもよい。
制御装置105は、例えばCPU(Central Processing Unit)であり、必要に応じて、記憶装置110よりプログラムを読み出して、プログラムを実行する。プログラムが実行されることで、AR提供装置100における後述の機能、及び後述のフローチャートに係る処理が実現される。
表示装置120は、表示部の一例であり、表示画面10を有し、各種の画像を表示画面10に表示する。なお、本実施形態では、表示装置120として、非透過型の液晶ディスプレイを例に挙げて説明するが、透過型の液晶ディスプレイを採用してもよい。
姿勢検出装置130は、例えばジャイロセンサであり、物体の角速度を検知し、角速度を積分などして角度(AR提供装置100の姿勢(姿勢情報))を算出する。
撮影装置135は、撮影部の一例であり、現実空間の撮影を行う。
なお、AR提供装置100のハードウェア構成は、これに限られるものではない。例えば、方位検出装置125及び姿勢検出装置130に代えて、方位検出装置125及び姿勢検出装置130の機能を一体とした機能を有する方位姿勢検出装置を採用してもよい。また、例えば、AR提供装置100は、方位検出装置125及び姿勢検出装置130を有していなくてもよい。
サーバ装置200は、制御装置205、記憶装置210、通信装置215、表示装置220、及び入力装置225を有する。
制御装置205は、例えばCPU(Central Processing Unit)であり、必要に応じて、記憶装置210よりプログラムを読み出して、プログラムを実行する。プログラムが実行されることで、サーバ装置200における後述の機能、及び後述のフローチャートに係る処理が実現される。
通信装置215は、外部装置(POS端末300、AR提供装置100等)と通信を行う。例えば、通信装置215は、AR提供装置100から商品情報の取得要求を受信する。また、例えば、通信装置215は、POS端末300から販売情報を受信する。通信装置215で受信された販売情報は、記憶装置210(商品DB等)に記憶される。
表示装置220は、ディスプレイ等であり、各種の情報を表示する。
入力装置225は、ユーザが操作するキーボード及びマウス等であり、サーバ装置200に各種の情報を入力する。
商品コードには、商品を一意に識別する符号の情報が格納される。商品カテゴリには、商品が属するカテゴリの情報(カテゴリ情報)、例えば「食料品」、「医薬品」などの情報が格納される。商品名には、商品の名称の情報が格納される。ブランドには、商品の銘柄(会社の名称、商標など)の情報(ブランド情報)が格納される。商品サイズには、商品の縦・横・奥行きの情報(商品の大きさを示すサイズ情報)が格納される。
商品画像には、商品を立体的に表す画像の格納先の情報が格納される。格納先の情報より取得される画像は、商品の正面・側面・上面・下面のカラー画像(商品画像情報)である。より好ましくは、商品毎の3次元情報(例えば3次元オブジェクトの生成の用に供する情報)であり、これにより任意の方向から商品を見た画像が描画できるようになる。なお、商品画像には、画像の格納先の情報ではなく、画像のバイナリデータが格納されていてもよい。また、商品画像情報は、白黒画像であってもよい。
ここで、マスタ情報には、売価、原価、販売開始予定年月日(或いは販売終了予定年月日)の項目の情報が含まれていてもよい。売価には、商品の売値の情報が格納される。原価には、商品の仕入値の情報が格納される。販売開始予定年月日には、商品の販売を開始する予定の時期(年月日)の情報(開始情報)が格納される。販売終了予定年月日には、商品の販売を終了する予定の年月日の情報(終了情報)が格納される。
ここで、トランザクション情報には、入庫予定年月日、及び入庫予定数の項目の情報が含まれていてもよい。入庫予定年月日には、商品が入庫する予定の年月日の情報が格納される。入庫予定数には、入庫予定年月日に入庫する商品の数の情報が格納される。
棚割パターンマスタ情報は、商品カテゴリ、棚数(各棚ID)、棚番地(段/列)毎の指定商品及び陳列数、並びに、棚番地(段/列)毎の指定ブランド及び陳列数の項目の情報を含んで構成されている。すなわち、棚割パターンマスタ情報は、棚への陳列を許可(換言するならば、制限)する商品を識別するためのルールの情報(陳列ルール情報)である。
なお、図4では、マスタ情報、トランザクション情報、棚(什器)マスタ情報、棚割パターンマスタ情報における必須の項目を示しているが、本実施形態は、これらの必須の項目に代えて又は加えて他の項目を必須の項目としてもよい。
AR提供装置100は、要求部150、及び表示制御部155を有する。サーバ装置200は、特定部250、選択部255、生成部260、及び返答部265を有する。なお、AR提供装置100は、要求部150、表示制御部155などを統括する制御部を有している。また、サーバ装置200は、特定部250、選択部255、生成部260、返答部265などを統括する制御部を有している。
表示制御部155は、要求部150による要求に応答してサーバ装置200から送信された返答に含まれる商品情報を撮影装置135で撮影されている棚に重畳して表示画面10に表示する。
選択部255は、商品DBに格納される複数のマスタ情報から、特定部250で特定された空き空間サイズよりも小さいサイズの商品のマスタ情報(広義には商品情報)を選択する。なお、詳細については後述するが、選択部255は、商品DBのトランザクション情報、棚DBの棚割パターンマスタ情報に基づいて、選択したマスタ情報から推奨する商品のマスタ情報を更に選択する。
生成部260は、商品DBのトランザクション情報などを参照して、商品の陳列に関する情報(付加情報)を生成する。
返答部265は、選択部255で選択されたマスタ情報と生成部260で生成された付加情報とに基づいて生成される商品情報を含む返答をAR提供装置100に送信する。
SQ610では、要求部150は、撮影装置135で撮影されている映像から画像を一定の間隔で取得する。
SQ620では、要求部150は、取得した画像をサーバ装置200に適宜のタイミングで送信する。
そして、特定部250は、特定した空き空間の奥行き及び段高さを棚500の棚仕様から決定することで、決定した奥行き及び段高さと、取得した幅とを有する空き空間サイズを特定する。例えば、棚仕様で特定される棚の幅に対する空き空間の幅の割合で、空き空間の実寸を推定(幅1mの棚に空き空間の幅が15%程度存在していると判断した場合、実際の空き空間の幅を15cmと推定)することができる。なお、一定の幅は、棚(什器)マスタ情報の項目として棚毎に予め設けられていてもよいし、設けられていなくてもよい。
SQ660では、返答部265は、要求部150による要求に対する、商品情報と特定部250で特定された棚500のどの段/列に空き空間が対応するかという位置情報とを含む応答をAR提供装置100に送信する。
ここで、表示画面10における商品画像情報12の位置合わせの方法としては、任意の重畳表示技術を適用できるが、本実施形態では、一般的なマーカーを利用したARの重畳表示技術を採用した場合を例に挙げて説明する。より詳細に説明すると、表示制御部155は、撮影装置135で撮影されているマーカー510の画像を基準として、返答部265から受信した空き空間の位置情報により空き空間の位置を特定し、商品画像情報12を当該位置に表示する。なお、マーカー510によって棚500とAR提供装置100との相対位置(向き)も割り出せるので、商品画像情報12は、棚500に正面向きに置いたように表示することができる。
はじめに、AR提供装置100の制御部は、サーバ装置200に対する前回の画像の送信から一定の時間が経過したか否かを判断する(S710)。このとき、一定の時間が経過したと判断された場合、S720の処理が行われ、他方、一定の時間が経過していないと判断された場合、S730の処理が行われる。
S720では、要求部150は、撮影装置135で撮影されている映像から画像を取得し、取得した画像をサーバ装置200に送信する。続いて、S730の処理が行われる。
S740では、表示制御部155は、後述の拡張画像表示処理を行う。続いて、S750の処理が行われる。
S750では、制御部は、AR提供装置100に設けられるタッチパネル式の表示画面10、入力ボタン等の入力部の操作(ユーザ操作)を受け付けたか否かを判断する。このとき、ユーザ操作を受け付けたと判断された場合、S760の処理が行われ、他方、ユーザ操作を受け付けていないと判断された場合、メイン処理は終了する。
S760では、表示制御部155は、後述の表示変更処理を行い、メイン処理を終了する。
はじめに、表示制御部155は、受信した応答に含まれる商品情報に基づいて拡張画像を生成する。上述の通り表示制御部155は、マーカー510の画像を基準にして商品画像情報12を表示するが、この際、撮影装置135で撮影された映像に表示されている棚の寸法に対応するように商品情報に含まれる最初の商品画像情報(或いは次の候補の商品画像情報)を拡大・縮小し、サイズを調整した商品を表す拡張画像を生成する(S810)。
続いて、表示制御部155は、商品を表す拡張画像に対応する付加情報の内容を表す拡張画像を生成する(S820)。
続いて、表示制御部155は、生成した商品を表す拡張画像を撮影装置135で撮影された映像に重畳し、付加情報の内容を表す拡張画像を適宜の位置に表示し(S830)、拡張画像表示処理を終了する。なお、1つの画像内に空き空間が複数存在する場合、各々の空き空間に商品画像情報12を表示するようにしてもよい。
はじめに、表示制御部155は、商品を表す拡張画像の向きの変更を指示するタッチパネルへのユーザ操作を受け付けたか否かを判断する(S910)。このとき、表示制御部155は、当該ユーザ操作を受け付けたと判断した場合、S920の処理を行い、他方、当該ユーザ操作を受け付けていないと判断した場合、S930の処理を行う。
S930では、表示制御部155は、棚に陳列が許可されている商品の次の候補の表示を指示するユーザ操作(切替えインタフェース14を押下する操作など)を受け付けたか否かを判断する。このとき、表示制御部155は、当該ユーザ操作を受け付けたと判断した場合、S940の処理を行い、他方、当該ユーザ操作を受け付けていないと判断した場合、表示変更処理を終了する。
S940では、表示制御部155は、拡張画像表示処理を行い、表示変更処理を終了する。
はじめに、サーバ装置200の制御部は、AR提供装置100から画像を受信したか否かを判断する(S1010)。このとき、受信したと判断された場合、S1020の処理が行われ、他方、受信していないと判断された場合、メイン処理は終了する。
S1020では、制御部は、受信した画像に棚の画像が含まれているか否かを判断する。このとき、含まれていると判断した場合、S1030からS1070までの処理が行われ、他方、含まれていないと判断された場合、メイン処理は終了する。ここで、制御部は、受信した画像を解析し、マーカーの情報が含まれていると認識したときは棚の画像が含まれていると判断する。
S1040では、選択部255は、後述のマスタ情報選択処理を行う。
S1050では、生成部260は、後述の付加情報生成処理を行う。
S1060では、生成部260は、マスタ情報選択処理で選択されるマスタ情報と付加情報生成処理で生成される付加情報とから商品情報を生成する。
S1070では、返答部265は、生成部260で生成された商品情報を含む応答をAR提供装置100に送信する。
はじめに、特定部250は、制御部により抽出されたマーカーの情報より棚IDを特定する(S1110)。本実施形態では、マーカーには、棚IDそのものが記され、特定部250は、画像処理することで、棚の特定の場所に付されているマーカーを抽出して棚IDを取得するものとする。なお、棚を特定する方法は、この構成に限られるものではない。例えば、特定部250は、棚に陳列されている複数の商品を特定することで、すなわち、複数の商品をマーカーとして見立てて棚IDを特定してもよい。この構成によれば、棚の特定の場所にマーカーを付す必要がなくなる。以下では、棚IDが「0001」であると特定された場合を例に挙げて適宜説明する。
続いて、特定部250は、商品DBのマスタ情報に含まれる商品画像の情報と、受信した画像情報とから、棚に陳列されている商品を特定する(S1130)。例えば、特定部250は、受信した画像情報に商品画像の情報が含まれていると判断した場合、その商品画像の情報が含まれているマスタ情報から商品コードを取得する。
S1160では、特定部250は、受信した画像を解析して得られる空き空間、及びS1150で指定した空き空間の位置・幅を特定する。ここでは、特定部250は、画像を解析して幅が「20」の空き空間を1つ取得し、その空き空間が棚の2段目に位置していると特定したものとする。なお、空き空間のサイズは、上記SQ640で説明したような処理で特定される。
S1180では、特定部250は、同じ段の空き空間の幅を合算し、続いてS1190の処理を行う。
S1190では、特定部250は、S1120で取得した棚(什器)マスタ情報から、空き空間が位置する段高さ・奥行きを読み出し、S1160で特定した幅(或いはS1180で合算した幅)と読み出した段高さ・奥行きとからなる空間の大きさを空き空間サイズとし、空き空間サイズ特定処理を終了する。なお、上述の例では、特定部250は、幅「20」、高さ「60」、奥行き「100」の空き空間サイズを特定する。
はじめに、選択部255は、特定部250で特定された空き空間サイズごとに、空き空間サイズに収まる商品のマスタ情報を商品DBから抽出する(S1210)。上述の例では、空き空間サイズが「20,60,100」であるので、選択部255は、空き空間サイズよりも商品サイズが小さい商品コード「0123」、商品コード「0124」、及び商品コード「0234」のマスタ情報を商品DBから抽出する。
はじめに、生成部260は、マスタ情報選択処理で選択されたマスタ情報毎に推奨度が設定された推奨度情報を生成する(S1310)。例えば、生成部260は、商品DBを参照して、週次売上数実績の情報が高いほど推奨度を高く設定する。また、例えば、生成部260は、商品DBを参照して、在庫回転数の情報が高いほど推奨度を高く設定する。また、例えば、生成部260は、商品DBを参照して、販売終了予定年月日の情報が現在に近いほど推奨度を高く設定する。なお、生成部260は、これらを組み合わせて推奨度を設定してもよい。ここで、マスタ情報選択処理で複数のマスタ情報が選択され、推奨度情報が生成された場合には、表示制御部155は、推奨度情報をそのまま表示してもよいし、推奨度情報に基づいて推奨度が高い順に商品情報を表示してもよい。
続いて、生成部260は、S1130において特定部250で特定された棚に陳列されている商品に、棚割パターンマスタ情報に反する商品が含まれているか否かを判断する。このとき、生成部260は、含まれていると判断した場合、該当する商品の陳列が許可されている棚IDを、棚DBの棚割パターンマスタ情報を参照して特定する。その後、生成部260は、該当する商品の位置、商品コード、棚IDの情報、陳列が許可されていない商品が存在する旨の情報を含む誤り情報(指摘情報)を生成する(S1330)。
続いて、生成部260は、推奨度情報、配置許可数情報、誤り情報、及び予告情報を含む付加情報を生成する(S1350)。なお、生成部260は、S1220で用いた棚割パターンマスタ情報に陳列方法の情報が含まれていると判断した場合は、陳列方法の情報を付加情報に加える。
なお、上述した処理は、適宜組み合わせて採用することができる。
・空き空間サイズに合った商品を探さなければならない、
・複数個所に空き空間が生じた場合には、複合的な空き空間サイズを加味したい、
・商品によってはサプライヤからの陳列方法などの指定があるものがあり、この指定に沿った状態で商品を選択して陳列することが要求される、
・元々の在庫切れ商品が納入されたときに、直ぐに戻さなければならない、
等の要素を考慮して、空き空間に的確な商品を推奨することができる。
第1の実施形態では、空き空間が発生した棚に対する推奨する代替商品の情報をAR提供装置に表示する構成を中心に説明したが、本実施形態では、第1の実施形態で示した同じハードウェア構成を用いて、商品の陳列に関する別の情報をAR提供装置に表示する構成をより詳細に説明する。
より具体的には、本実施形態では、棚に許可されていない商品が陳列されている、つまり店員がうっかり商品の陳列を誤った場合、客がある棚で取った商品を別の棚に置いてしまった場合などを想定している。この商品の置き間違いは、特に空きスペースがある場合に起きやすい課題であり、空きスペースを有効に活用する上で障害になりやすい。そこで、本実施形態では、その誤りを正すための情報を店員に提供する構成を採用する。
なお、本実施形態では、第1の実施形態の構成と同一の構成については、同一の符号を用いて、その説明を省略する。
S1560では、生成部260は、棚に許可されていない商品が陳列されているか否かを判断する。判断の方法は、特に限定されるものではない。例えば、棚500に全ての商品が配置されているときの画像を予め撮影しておき、現在の画像との差分を求めることで異なる商品があるか否かを特定する構成であってもよい。また、例えば、撮影装置135で撮影された棚500に陳列されている個々の商品画像について商品DBと棚DBとに格納されている情報をもとに、個別に画像のマッチング処理を行って特定する構成であってもよい。
このように、商品の棚への陳列について、間違えていることを人間が1つ1つ探すことが困難であるような場合でも、本実施形態によれば容易に把握でき、且つ本来の陳列の位置を示すことで、店員の業務負荷を軽減することが可能となる。
なお、単に商品の陳列の向きが間違えているというだけのこともあるため、商品画像については、複数の方向から撮影した写真を用いたり、3次元情報を用いたりすることが好ましい。
このとき、生成部260は、在庫数が所定数を下回っていない(No)と判断した場合、S1600の処理を行う。他方、生成部260は、在庫数が所定数を下回っている(Yes)と判断した場合、S1590で在庫切れ予告情報を生成する。
在庫切れ予告情報とは、「この商品は店内在庫が不足気味です」、「この商品はバックヤードに在庫が有りません」などの在庫の状況を店員に知らせるための情報であり、第1の実施形態で説明したようにAR提供装置100で棚に重畳して表示される。
以上のように、本実施形態によれば、棚での空きスペースを活用できるだけでなく、店員がうっかり商品の陳列を誤った場合、客がある棚で取った商品を別の棚に置いてしまった場合などに店員に間違いを正すよう指示できるようになり、棚をより有効に活用できるようになる。
なお、本実施形態については、独立して採用することができるが、例えば第1の実施形態に組み合わせて実装することも可能である。
本実施形態では、AR提供装置100が特定部250の機能を有し、サーバ装置200が特定部250の機能を有していない。以下では、図18を参照して第1の実施形態と異なる構成について主に説明する。
図18は、AR提供システムのシーケンスの一例を示す図である。SQ1410は、SQ610と同様の処理であり、SQ1420は、SQ630と同様の処理であり、SQ1430は、SQ640と同様の処理であり、SQ1450は、SQ650と同様の処理であり、SQ1460は、SQ660と同様の処理であり、SQ1470は、SQ670と同様の処理であるので説明を省略する。
SQ1440では、要求部150は、特定情報を含む商品情報の取得要求をサーバ装置200に送信する。特定情報には、SQ1420で特定された棚IDの情報、SQ1430で特定された空き空間サイズの情報などが含まれている。
上述した各実施形態の構成によれば、棚の空き空間をより有効に使用することができる。
例えば、AR提供装置100としては、タッチパネル式の表示画面10を有した装置として説明したが、HMDなど、メガネ型の装置を採用してもよい。
また、例えば、商品サイズについては、基本的には陳列する向きに合わせた情報として商品DBに格納されているが、同一の商品であっても陳列の向きを複数想定して商品サイズを格納しておく構成としてもよい。即ち、図12のS1210では、選択部255は、空き空間サイズに収まる商品を抽出する際に、商品DBに格納した商品サイズに従って抽出を行うが、この構成によれば、何れかの向きで商品が陳列された場合でも抽出されるようになる。
また、例えば、図15で説明した空き空間サイズ特定処理では、全ての処理を行う必要はなく、S1130〜S1150の処理を行わないで実際に空いている空間のみを空き空間として特定してもよい。
また、例えば、図16では、1つの空き空間に1種類の商品を提示したが、空き空間が大きい場合には、複数種の商品を並べて陳列するよう商品を選択する構成としてもよい。この場合、複数の商品サイズの合計値が空き空間サイズより小さくなるように条件を設定し、必要に応じて棚割パターンマスタ情報も設定しておく。
また、例えば、各実施形態を必要に応じて組み合わせて使用してもよい。
150 要求部
155 表示制御部
200 サーバ装置
250 特定部
255 選択部
260 生成部
265 返答部
Claims (17)
- 撮影部及び表示部を有する情報処理端末と情報処理装置とが通信可能な拡張現実提供システムであって、
前記情報処理端末は、
前記撮影部での撮影内容の画像情報を含む、前記画像情報から特定され得る棚に陳列できる商品を示す商品情報を取得するための要求を前記情報処理装置に送信する要求手段と、
前記要求に応答して前記情報処理装置から送信された返答に含まれる商品情報を前記撮影部で撮影された画像情報に重畳して前記表示部に表示する表示制御手段と、
を有し、
前記情報処理装置は、
前記要求に含まれる前記画像情報から棚を特定して前記棚の空き空間の大きさを特定する特定手段と、
商品を示す商品情報と前記商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、前記特定手段で特定された前記棚の空き空間の大きさよりも小さい商品の商品情報を選択する選択手段と、
前記選択手段で選択された商品情報を含む返答を前記情報処理端末に送信する返答手段と、
を有することを特徴とする拡張現実提供システム。 - 前記記憶部には、前記棚への陳列が許容される商品を識別する陳列ルール情報が記憶され、
前記選択手段は、前記棚の空き空間の大きさよりも小さい商品の商品情報のうち、前記陳列ルール情報より前記棚への陳列が許容されると識別した商品の商品情報を選択することを特徴とする請求項1に記載の拡張現実提供システム。 - 前記陳列ルール情報には、前記棚への陳列が許容される商品のカテゴリ情報が含まれ、
前記選択手段は、前記棚の空き空間の大きさよりも小さい商品の商品情報のうち、前記カテゴリ情報に属する商品の商品情報を選択することを特徴とする請求項2に記載の拡張現実提供システム。 - 前記陳列ルール情報には、前記棚への陳列が許容される商品のブランド情報が含まれ、
前記選択手段は、前記棚の空き空間の大きさよりも小さい商品の商品情報のうち、前記ブランド情報に対応するブランドの商品の商品情報を選択することを特徴とする請求項2又は3に記載の拡張現実提供システム。 - 前記陳列ルール情報には、前記棚への陳列が許容される商品の商品情報が含まれ、
前記選択手段は、前記棚の空き空間の大きさよりも小さい商品の商品情報のうち、前記陳列ルール情報に含まれる商品情報に一致する商品情報を選択することを特徴とする請求項2乃至4の何れか1項に記載の拡張現実提供システム。 - 前記記憶部には、商品毎に売上数を示す実績情報が記憶され、
前記選択手段は、前記棚の空き空間の大きさよりも小さい商品の商品情報のうち、前記実績情報に基づいて商品の売上数が相対的に高い商品の商品情報を優先的に選択することを特徴とする請求項1乃至5の何れか1項に記載の拡張現実提供システム。 - 前記記憶部には、商品毎に売上数を示す実績情報が記憶され、
前記記憶部に記憶される商品情報には、商品を表す商品画像情報が含まれ、
前記特定手段は、前記要求に含まれる前記画像情報と前記記憶部に記憶される商品画像情報とから前記棚に陳列されている商品を識別し、前記実績情報に基づいて前記棚に陳列されている商品から売上数が相対的に低い商品を特定し、特定した商品を前記棚から排したときに生じる空間の大きさを前記棚の空き空間の大きさとして特定することを特徴とする請求項1乃至6の何れか1項に記載の拡張現実提供システム。 - 前記特定手段は、前記要求に含まれる前記画像情報から前記棚の同じ段に複数の空き空間があると判断した場合、前記複数の空き空間を合算した大きさを前記棚の空き空間の大きさとして特定することを特徴とする請求項1乃至7の何れか1項に記載の拡張現実提供システム。
- 前記記憶部には、商品毎に販売の終了の時期を示す終了情報が記憶され、
前記情報処理装置は、
前記選択手段で選択された商品情報において、予め定められた時間が経過したときに販売が終了する商品の商品情報があると前記終了情報に基づいて判断した場合、該当する商品の販売の終了に関する指示を示す指示情報を生成する生成手段を更に有し、
前記返答手段は、前記生成手段で指示情報が生成された場合、前記指示情報を前記情報処理端末に送信し、
前記表示制御手段は、前記指示情報を前記表示部に表示することを特徴とする請求項1乃至8の何れか1項に記載の拡張現実提供システム。 - 前記記憶部には、前記棚への陳列が許容される商品を識別する陳列ルール情報と前記商品を表す商品画像情報とが記憶され、
前記情報処理装置は、
前記要求に含まれる前記画像情報と前記記憶部に記憶されている商品画像情報とから前記陳列ルール情報より前記棚への陳列が許容されない商品があると識別した場合、前記棚で陳列が許可されていない商品が存在する旨の指摘情報を生成する生成手段を更に有し、
前記返答手段は、前記生成手段で指摘情報が生成された場合、前記指摘情報を前記情報処理端末に送信し、
前記表示制御手段は、前記指摘情報を前記表示部に表示することを特徴とする請求項1乃至9の何れか1項に記載の拡張現実提供システム。 - 撮影部及び表示部を有する情報処理端末から送信される前記撮影部での撮影内容の画像情報から棚を特定して前記棚の空き空間の大きさを特定する特定手段と、
商品を示す商品情報と前記商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、前記特定手段で特定された前記棚の空き空間の大きさよりも小さい商品の商品情報を選択する選択手段と、
前記選択手段で選択された商品情報を含む返答を前記情報処理端末に送信する返答手段と、
を有することを特徴とする情報処理装置。 - 撮影部及び表示部を有する情報処理端末であって、
前記撮影部での撮影内容の画像情報から棚を特定して前記棚の空き空間の大きさを特定する特定手段と、
前記特定手段で特定された前記棚の空き空間の大きさの情報を含む前記棚に陳列できる商品を示す商品情報を取得するための要求を、商品を示す商品情報と前記商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、前記棚の空き空間の大きさよりも小さい商品の商品情報を選択する情報処理装置に送信する要求手段と、
前記要求に応答して前記情報処理装置から送信された返答に含まれる商品情報を前記撮影部で撮影された画像情報に重畳して前記表示部に表示する表示制御手段と、
を有することを特徴とする情報処理端末。 - 撮影部及び表示部を有する情報処理端末と情報処理装置とが通信可能な拡張現実提供システムにおける拡張現実提供方法であって、
前記情報処理端末が、前記撮影部での撮影内容の画像情報を含む要求を前記情報処理装置に送信する要求工程と、
前記情報処理装置が、前記要求に含まれる前記画像情報から棚を特定して前記棚の空き空間の大きさを特定する特定工程と、
前記情報処理装置が、商品を示す商品情報と前記商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、前記特定工程で特定された前記棚の空き空間の大きさよりも小さい商品の商品情報を選択する選択工程と、
前記情報処理装置が、前記選択工程で選択された商品情報を含む返答を前記情報処理端末に送信する返答工程と、
前記情報処理端末が、前記要求に応答して前記情報処理装置から送信された返答に含まれる商品情報を前記撮影部で撮影された画像情報に重畳して前記表示部に表示する表示制御工程と、
を有することを特徴とする拡張現実提供方法。 - 撮影部及び表示部を有する情報処理端末から送信される前記撮影部での撮影内容の画像情報から棚を特定して前記棚の空き空間の大きさを特定する特定工程と、
商品を示す商品情報と前記商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、前記特定工程で特定された前記棚の空き空間の大きさよりも小さい商品の商品情報を選択する選択工程と、
前記選択工程で選択された商品情報を含む返答を前記情報処理端末に送信する返答工程と、
を有することを特徴とする情報処理方法。 - 撮影部及び表示部を有する情報処理端末が実行する情報処理方法であって、
前記撮影部での撮影内容の画像情報から棚を特定して前記棚の空き空間の大きさを特定する特定工程と、
前記特定工程で特定された前記棚の空き空間の大きさの情報を含む前記棚に陳列できる商品を示す商品情報を取得するための要求を、商品を示す商品情報と前記商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、前記棚の空き空間の大きさよりも小さい商品の商品情報を選択する情報処理装置に送信する要求工程と、
前記要求に応答して前記情報処理装置から送信された返答に含まれる商品情報を前記撮影部で撮影された画像情報に重畳して前記表示部に表示する表示制御工程と、
を有することを特徴とする情報処理方法。 - コンピュータを、
撮影部及び表示部を有する情報処理端末から送信される前記撮影部での撮影内容の画像情報から棚を特定して前記棚の空き空間の大きさを特定する特定手段と、
商品を示す商品情報と前記商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、前記特定手段で特定された前記棚の空き空間の大きさよりも小さい商品の商品情報を選択する選択手段と、
前記選択手段で選択された商品情報を含む返答を前記情報処理端末に送信する返答手段と、
して機能させるプログラム。 - 撮影部及び表示部を有するコンピュータを、
前記撮影部での撮影内容の画像情報から棚を特定して前記棚の空き空間の大きさを特定する特定手段と、
前記特定手段で特定された前記棚の空き空間の大きさの情報を含む前記棚に陳列できる商品を示す商品情報を取得するための要求を、商品を示す商品情報と前記商品の大きさを示すサイズ情報とが関連付けられて複数記憶された記憶部から、前記棚の空き空間の大きさよりも小さい商品の商品情報を選択する情報処理装置に送信する要求手段と、
前記要求に応答して前記情報処理装置から送信された返答に含まれる商品情報を前記撮影部で撮影された画像情報に重畳して前記表示部に表示する表示制御手段と、
して機能させるプログラム。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011174373A JP4914528B1 (ja) | 2010-08-31 | 2011-08-09 | 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム |
SG2012048070A SG182287A1 (en) | 2010-08-31 | 2011-08-18 | Augmented reality provision system, information processing terminal, information processor, augmented reality provision method, information processing method, and program |
US13/504,457 US8982155B2 (en) | 2010-08-31 | 2011-08-18 | Augmented reality providing system, information processing terminal, information processing apparatus, augmented reality providing method, information processing method, and program |
CN201180003821.5A CN102523758B (zh) | 2010-08-31 | 2011-08-18 | 增强现实提供系统、信息处理终端、信息处理装置、增强现实提供方法、信息处理方法以及程序 |
EP11821565.6A EP2472475B1 (en) | 2010-08-31 | 2011-08-18 | Augmented reality providing system, information processing terminal, information processing apparatus, augmented reality providing method, information processing method, and program |
PCT/JP2011/068657 WO2012029548A1 (ja) | 2010-08-31 | 2011-08-18 | 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010194263 | 2010-08-31 | ||
JP2010194263 | 2010-08-31 | ||
JP2011174373A JP4914528B1 (ja) | 2010-08-31 | 2011-08-09 | 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP4914528B1 true JP4914528B1 (ja) | 2012-04-11 |
JP2012074014A JP2012074014A (ja) | 2012-04-12 |
Family
ID=45772652
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011174373A Active JP4914528B1 (ja) | 2010-08-31 | 2011-08-09 | 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US8982155B2 (ja) |
EP (1) | EP2472475B1 (ja) |
JP (1) | JP4914528B1 (ja) |
CN (1) | CN102523758B (ja) |
SG (1) | SG182287A1 (ja) |
WO (1) | WO2012029548A1 (ja) |
Families Citing this family (112)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140201040A1 (en) * | 2012-03-30 | 2014-07-17 | Thomas A. Birch | Presentation-structure-aware display of planograms |
JP6043094B2 (ja) * | 2012-05-30 | 2016-12-14 | 辛東主 | 商品陳列情報集計システム |
CN102902710B (zh) * | 2012-08-08 | 2015-08-26 | 成都理想境界科技有限公司 | 基于条形码的增强现实方法、系统及移动终端 |
TW201426403A (zh) * | 2012-12-27 | 2014-07-01 | Hon Hai Prec Ind Co Ltd | 顯示裝置、可攜式裝置及虛擬情境控制方法 |
US20140192182A1 (en) * | 2013-01-10 | 2014-07-10 | General Electric Company | Method for viewing virtual objects within an appliance |
US9336629B2 (en) | 2013-01-30 | 2016-05-10 | F3 & Associates, Inc. | Coordinate geometry augmented reality process |
JP6108159B2 (ja) * | 2013-03-04 | 2017-04-05 | 日本電気株式会社 | 情報処理システム、情報処理装置およびその制御方法と制御プログラム |
JP5790692B2 (ja) * | 2013-03-29 | 2015-10-07 | ソニー株式会社 | 情報処理装置、情報処理方法および記録媒体 |
JP6255706B2 (ja) | 2013-04-22 | 2018-01-10 | 富士通株式会社 | 表示制御装置、表示制御方法、表示制御プログラムおよび情報提供システム |
US9158988B2 (en) | 2013-06-12 | 2015-10-13 | Symbol Technclogies, LLC | Method for detecting a plurality of instances of an object |
US10176456B2 (en) | 2013-06-26 | 2019-01-08 | Amazon Technologies, Inc. | Transitioning items from a materials handling facility |
US10268983B2 (en) | 2013-06-26 | 2019-04-23 | Amazon Technologies, Inc. | Detecting item interaction and movement |
JP5913236B2 (ja) * | 2013-09-06 | 2016-04-27 | 東芝テック株式会社 | 棚割支援装置、サーバおよびプログラム |
US10217284B2 (en) | 2013-09-30 | 2019-02-26 | Qualcomm Incorporated | Augmented virtuality |
JP2015108974A (ja) * | 2013-12-04 | 2015-06-11 | Book World Consulting株式会社 | 書籍管理システム、書籍管理方法、およびコンピュータプログラム |
JP6244954B2 (ja) * | 2014-02-06 | 2017-12-13 | 富士通株式会社 | 端末装置、情報処理装置、表示制御方法、及び表示制御プログラム |
FR3021144B1 (fr) * | 2014-03-26 | 2016-07-15 | Bull Sas | Procede de gestion des equipements d'un centre de donnees |
WO2015166527A1 (ja) * | 2014-04-28 | 2015-11-05 | パイオニア株式会社 | 表示制御装置、制御方法、プログラム及び記憶媒体 |
US9886162B2 (en) * | 2014-06-02 | 2018-02-06 | Qualcomm Incorporated | Device-provided tracking data for augmented reality |
JP5881022B1 (ja) * | 2014-09-11 | 2016-03-09 | パナソニックIpマネジメント株式会社 | 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法 |
JP6269851B2 (ja) * | 2014-09-30 | 2018-01-31 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
US10352689B2 (en) | 2016-01-28 | 2019-07-16 | Symbol Technologies, Llc | Methods and systems for high precision locationing with depth values |
JP6719945B2 (ja) * | 2016-03-31 | 2020-07-08 | キヤノン株式会社 | 情報処理装置、情報処理方法、情報処理システム及びプログラム |
JP6728404B2 (ja) * | 2016-05-19 | 2020-07-22 | シムビ ロボティクス, インコーポレイテッドSimbe Robotics, Inc. | 店舗の棚への製品の配置を追跡する方法 |
US10592962B1 (en) * | 2016-06-24 | 2020-03-17 | Amazon Technologies, Inc. | Systems and methods for parallelizing customer input with real-time picking for item substitutions |
WO2018009594A1 (en) * | 2016-07-08 | 2018-01-11 | Wal-Mart Stores, Inc. | Physical product display-based apparatus |
US10339497B2 (en) | 2016-07-21 | 2019-07-02 | Ebay Inc. | System and method for dynamic inventory management |
US11042161B2 (en) | 2016-11-16 | 2021-06-22 | Symbol Technologies, Llc | Navigation control method and apparatus in a mobile automation system |
CN106779735A (zh) * | 2016-11-18 | 2017-05-31 | 章美前 | 一种中式古典家具资源整合系统 |
CN106779541A (zh) * | 2016-11-30 | 2017-05-31 | 长威信息科技发展股份有限公司 | 一种基于ar技术的仓库管理方法及系统 |
CN107123013B (zh) * | 2017-03-01 | 2020-09-01 | 阿里巴巴集团控股有限公司 | 基于增强现实的线下交互方法及装置 |
JP6996093B2 (ja) * | 2017-03-13 | 2022-01-17 | 日本電気株式会社 | 管理装置、管理方法及びプログラム |
US11449059B2 (en) | 2017-05-01 | 2022-09-20 | Symbol Technologies, Llc | Obstacle detection for a mobile automation apparatus |
US11978011B2 (en) | 2017-05-01 | 2024-05-07 | Symbol Technologies, Llc | Method and apparatus for object status detection |
US10726273B2 (en) | 2017-05-01 | 2020-07-28 | Symbol Technologies, Llc | Method and apparatus for shelf feature and object placement detection from shelf images |
US11367092B2 (en) | 2017-05-01 | 2022-06-21 | Symbol Technologies, Llc | Method and apparatus for extracting and processing price text from an image set |
US11093896B2 (en) | 2017-05-01 | 2021-08-17 | Symbol Technologies, Llc | Product status detection system |
US10949798B2 (en) | 2017-05-01 | 2021-03-16 | Symbol Technologies, Llc | Multimodal localization and mapping for a mobile automation apparatus |
US10505057B2 (en) | 2017-05-01 | 2019-12-10 | Symbol Technologies, Llc | Device and method for operating cameras and light sources wherein parasitic reflections from a paired light source are not reflected into the paired camera |
US10663590B2 (en) | 2017-05-01 | 2020-05-26 | Symbol Technologies, Llc | Device and method for merging lidar data |
US10591918B2 (en) | 2017-05-01 | 2020-03-17 | Symbol Technologies, Llc | Fixed segmented lattice planning for a mobile automation apparatus |
US11600084B2 (en) | 2017-05-05 | 2023-03-07 | Symbol Technologies, Llc | Method and apparatus for detecting and interpreting price label text |
CN107274266A (zh) * | 2017-06-09 | 2017-10-20 | 北京小米移动软件有限公司 | 商品推荐方法及装置 |
US20180365616A1 (en) * | 2017-06-20 | 2018-12-20 | Walmart Apollo, Llc | Systems and methods for management of inventory audits |
JP6440043B1 (ja) | 2017-06-27 | 2018-12-19 | 株式会社マーケットヴィジョン | 商品特定システム |
WO2019005951A1 (en) | 2017-06-29 | 2019-01-03 | Walmart Apollo, Llc | SYSTEMS AND METHODS FOR REALIZING AND MONITORING ASSET INSPECTIONS |
US10572763B2 (en) | 2017-09-07 | 2020-02-25 | Symbol Technologies, Llc | Method and apparatus for support surface edge detection |
US10521914B2 (en) | 2017-09-07 | 2019-12-31 | Symbol Technologies, Llc | Multi-sensor object recognition system and method |
US10489677B2 (en) | 2017-09-07 | 2019-11-26 | Symbol Technologies, Llc | Method and apparatus for shelf edge detection |
JP7019357B2 (ja) * | 2017-09-19 | 2022-02-15 | 東芝テック株式会社 | 棚情報推定装置及び情報処理プログラム |
JP7243627B2 (ja) * | 2017-09-29 | 2023-03-22 | 日本電気株式会社 | 情報処理装置、情報処理システム、制御方法、及びプログラム |
JP7081140B2 (ja) * | 2017-12-25 | 2022-06-07 | 富士通株式会社 | 物体認識装置、物体認識方法及び物体認識プログラム |
US10846561B1 (en) * | 2020-04-01 | 2020-11-24 | Scandit Ag | Recognition and selection of discrete patterns within a scene or image |
CN108364504B (zh) * | 2018-01-23 | 2019-12-27 | 浙江中新电力工程建设有限公司自动化分公司 | 增强现实三维互动学习系统及控制方法 |
US11327504B2 (en) | 2018-04-05 | 2022-05-10 | Symbol Technologies, Llc | Method, system and apparatus for mobile automation apparatus localization |
US10809078B2 (en) | 2018-04-05 | 2020-10-20 | Symbol Technologies, Llc | Method, system and apparatus for dynamic path generation |
US10740911B2 (en) | 2018-04-05 | 2020-08-11 | Symbol Technologies, Llc | Method, system and apparatus for correcting translucency artifacts in data representing a support structure |
US10832436B2 (en) | 2018-04-05 | 2020-11-10 | Symbol Technologies, Llc | Method, system and apparatus for recovering label positions |
US10823572B2 (en) | 2018-04-05 | 2020-11-03 | Symbol Technologies, Llc | Method, system and apparatus for generating navigational data |
JP7370556B2 (ja) * | 2018-07-31 | 2023-10-30 | 株式会社彩いろり | 酒類の情報管理システム及び管理方法 |
CN109190919A (zh) * | 2018-08-10 | 2019-01-11 | 上海扩博智能技术有限公司 | 零售关键业绩指标生成方法、系统、设备及存储介质 |
JP2020030478A (ja) * | 2018-08-20 | 2020-02-27 | 富士ゼロックス株式会社 | 荷物配達システム、端末装置及びプログラム |
CN109410176B (zh) * | 2018-09-28 | 2022-03-04 | 中民筑友科技投资有限公司 | 一种监控货架装配状态的方法、装置和存储介质 |
US11506483B2 (en) | 2018-10-05 | 2022-11-22 | Zebra Technologies Corporation | Method, system and apparatus for support structure depth determination |
US11010920B2 (en) | 2018-10-05 | 2021-05-18 | Zebra Technologies Corporation | Method, system and apparatus for object detection in point clouds |
US11003188B2 (en) | 2018-11-13 | 2021-05-11 | Zebra Technologies Corporation | Method, system and apparatus for obstacle handling in navigational path generation |
US11090811B2 (en) | 2018-11-13 | 2021-08-17 | Zebra Technologies Corporation | Method and apparatus for labeling of support structures |
US11079240B2 (en) | 2018-12-07 | 2021-08-03 | Zebra Technologies Corporation | Method, system and apparatus for adaptive particle filter localization |
US11416000B2 (en) | 2018-12-07 | 2022-08-16 | Zebra Technologies Corporation | Method and apparatus for navigational ray tracing |
US11100303B2 (en) | 2018-12-10 | 2021-08-24 | Zebra Technologies Corporation | Method, system and apparatus for auxiliary label detection and association |
US11015938B2 (en) | 2018-12-12 | 2021-05-25 | Zebra Technologies Corporation | Method, system and apparatus for navigational assistance |
US10731970B2 (en) | 2018-12-13 | 2020-08-04 | Zebra Technologies Corporation | Method, system and apparatus for support structure detection |
CA3028708A1 (en) | 2018-12-28 | 2020-06-28 | Zih Corp. | Method, system and apparatus for dynamic loop closure in mapping trajectories |
JP7274292B2 (ja) * | 2019-01-11 | 2023-05-16 | 東芝テック株式会社 | 支援システム、支援装置及び情報処理プログラム |
CN109977886B (zh) * | 2019-03-29 | 2021-03-09 | 京东方科技集团股份有限公司 | 货架空置率计算方法及装置、电子设备、存储介质 |
JP7326004B2 (ja) | 2019-04-10 | 2023-08-15 | 東芝テック株式会社 | 情報提供装置及び制御プログラム |
US10896584B2 (en) * | 2019-04-30 | 2021-01-19 | Walmart Apollo, Llc | Systems and methods for projecting action indicators |
US11200677B2 (en) | 2019-06-03 | 2021-12-14 | Zebra Technologies Corporation | Method, system and apparatus for shelf edge detection |
US11960286B2 (en) | 2019-06-03 | 2024-04-16 | Zebra Technologies Corporation | Method, system and apparatus for dynamic task sequencing |
US11341663B2 (en) | 2019-06-03 | 2022-05-24 | Zebra Technologies Corporation | Method, system and apparatus for detecting support structure obstructions |
US11151743B2 (en) | 2019-06-03 | 2021-10-19 | Zebra Technologies Corporation | Method, system and apparatus for end of aisle detection |
US11402846B2 (en) | 2019-06-03 | 2022-08-02 | Zebra Technologies Corporation | Method, system and apparatus for mitigating data capture light leakage |
US11080566B2 (en) | 2019-06-03 | 2021-08-03 | Zebra Technologies Corporation | Method, system and apparatus for gap detection in support structures with peg regions |
US11662739B2 (en) | 2019-06-03 | 2023-05-30 | Zebra Technologies Corporation | Method, system and apparatus for adaptive ceiling-based localization |
CN112395930A (zh) * | 2019-08-19 | 2021-02-23 | 阿里巴巴集团控股有限公司 | 商品信息的确定方法及装置、商品信息的展示方法及装置 |
JPWO2021039314A1 (ja) * | 2019-08-28 | 2021-03-04 | ||
US20220301246A1 (en) * | 2019-08-28 | 2022-09-22 | Nec Corporation | Store management system, store management method, computer program and recording medium |
JP7419004B2 (ja) * | 2019-09-13 | 2024-01-22 | 東芝テック株式会社 | 情報処理装置 |
CN112535392B (zh) * | 2019-09-20 | 2023-03-31 | 北京外号信息技术有限公司 | 基于光通信装置的物品陈列系统和信息提供方法、设备及介质 |
WO2021108555A1 (en) | 2019-11-25 | 2021-06-03 | Simbe Robotics, Inc | Method for tracking and maintaining inventory in a store |
US11507103B2 (en) | 2019-12-04 | 2022-11-22 | Zebra Technologies Corporation | Method, system and apparatus for localization-based historical obstacle handling |
US11107238B2 (en) | 2019-12-13 | 2021-08-31 | Zebra Technologies Corporation | Method, system and apparatus for detecting item facings |
CN113142913A (zh) * | 2020-01-22 | 2021-07-23 | 松下知识产权经营株式会社 | 陈列柜和陈列柜管理系统 |
JP7444652B2 (ja) | 2020-03-17 | 2024-03-06 | 東芝テック株式会社 | 商品管理装置及び商品管理システム |
US11822333B2 (en) | 2020-03-30 | 2023-11-21 | Zebra Technologies Corporation | Method, system and apparatus for data capture illumination control |
US11922271B1 (en) | 2020-05-15 | 2024-03-05 | Scandit Ag | Virtual screen standby mode for mobile device camera |
US11295135B2 (en) * | 2020-05-29 | 2022-04-05 | Corning Research & Development Corporation | Asset tracking of communication equipment via mixed reality based labeling |
US11374808B2 (en) | 2020-05-29 | 2022-06-28 | Corning Research & Development Corporation | Automated logging of patching operations via mixed reality based labeling |
US11450024B2 (en) | 2020-07-17 | 2022-09-20 | Zebra Technologies Corporation | Mixed depth object detection |
US11593915B2 (en) | 2020-10-21 | 2023-02-28 | Zebra Technologies Corporation | Parallax-tolerant panoramic image generation |
US11392891B2 (en) | 2020-11-03 | 2022-07-19 | Zebra Technologies Corporation | Item placement detection and optimization in material handling systems |
JP7533615B2 (ja) | 2020-11-11 | 2024-08-14 | 日本電気株式会社 | 表示制御装置、表示制御方法、及びプログラム |
US11847832B2 (en) | 2020-11-11 | 2023-12-19 | Zebra Technologies Corporation | Object classification for autonomous navigation systems |
US11250635B1 (en) | 2020-12-08 | 2022-02-15 | International Business Machines Corporation | Automated provisioning of three-dimensional (3D) printable images |
US11495036B1 (en) | 2021-01-29 | 2022-11-08 | Scandit Ag | Segmenting images for optical character recognition |
US11954882B2 (en) | 2021-06-17 | 2024-04-09 | Zebra Technologies Corporation | Feature-based georegistration for mobile computing devices |
JP7262549B1 (ja) | 2021-10-27 | 2023-04-21 | 楽天グループ株式会社 | 情報処理システム、占有率算出方法、及びプログラム |
US12106265B2 (en) * | 2022-01-31 | 2024-10-01 | Walmart Apollo, Llc | Methods and apparatus for generating planograms |
US12086867B2 (en) | 2022-01-31 | 2024-09-10 | Walmart Apollo, Llc | Methods and apparatus for generating planograms |
JP7386446B2 (ja) * | 2022-04-13 | 2023-11-27 | 株式会社マーケットヴィジョン | 情報処理システム |
US20230418430A1 (en) * | 2022-06-24 | 2023-12-28 | Lowe's Companies, Inc. | Simulated environment for presenting virtual objects and virtual resets |
JP2024098386A (ja) * | 2023-01-10 | 2024-07-23 | パナソニックIpマネジメント株式会社 | 情報処理装置、情報処理システム及び情報処理方法 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2962259B2 (ja) | 1997-02-13 | 1999-10-12 | 日本電気株式会社 | 棚割情報作成装置 |
JP2002163436A (ja) | 2000-11-27 | 2002-06-07 | Matsushita Electric Works Ltd | 棚割支援システム |
JP2002366621A (ja) * | 2001-06-05 | 2002-12-20 | Komatsu Noriko | 店舗経営指導情報提供方法およびそのサーバのプログラム |
JP2004010201A (ja) * | 2002-06-04 | 2004-01-15 | Seibu Electric & Mach Co Ltd | 自動倉庫システムにおける棚在庫情報管理方法 |
US7356495B2 (en) * | 2002-06-04 | 2008-04-08 | Sap Aktiengesellschaft | Supply chain management using item detection system |
JP4267469B2 (ja) * | 2004-01-27 | 2009-05-27 | 富士通株式会社 | 駐車場管理プログラム、駐車場管理装置、及び駐車場管理方法 |
JP3978432B2 (ja) * | 2004-01-29 | 2007-09-19 | 株式会社つくばマルチメディア | ウェブカメラ買物システム |
US20080077510A1 (en) * | 2006-09-21 | 2008-03-27 | Polymer Logistics Bv | Method And System For Providing Security Surveillance And Shelf Monitoring Functions |
US20080147475A1 (en) * | 2006-12-15 | 2008-06-19 | Matthew Gruttadauria | State of the shelf analysis with virtual reality tools |
DE102007045834B4 (de) | 2007-09-25 | 2012-01-26 | Metaio Gmbh | Verfahren und Vorrichtung zum Darstellen eines virtuellen Objekts in einer realen Umgebung |
US8091782B2 (en) * | 2007-11-08 | 2012-01-10 | International Business Machines Corporation | Using cameras to monitor actual inventory |
GB2458388A (en) * | 2008-03-21 | 2009-09-23 | Dressbot Inc | A collaborative online shopping environment, virtual mall, store, etc. in which payments may be shared, products recommended and users modelled. |
DE102008018436B4 (de) * | 2008-04-11 | 2022-01-13 | Hänel & Co. | Lagerregal mit automatischer Lagerortbuchung |
US8199966B2 (en) * | 2008-05-14 | 2012-06-12 | International Business Machines Corporation | System and method for providing contemporaneous product information with animated virtual representations |
KR101465668B1 (ko) | 2008-06-24 | 2014-11-26 | 삼성전자주식회사 | 단말 및 그의 블로깅 방법 |
US8606657B2 (en) * | 2009-01-21 | 2013-12-10 | Edgenet, Inc. | Augmented reality method and system for designing environments and buying/selling goods |
-
2011
- 2011-08-09 JP JP2011174373A patent/JP4914528B1/ja active Active
- 2011-08-18 WO PCT/JP2011/068657 patent/WO2012029548A1/ja active Application Filing
- 2011-08-18 US US13/504,457 patent/US8982155B2/en active Active
- 2011-08-18 EP EP11821565.6A patent/EP2472475B1/en active Active
- 2011-08-18 SG SG2012048070A patent/SG182287A1/en unknown
- 2011-08-18 CN CN201180003821.5A patent/CN102523758B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
WO2012029548A1 (ja) | 2012-03-08 |
CN102523758A (zh) | 2012-06-27 |
US20130147839A1 (en) | 2013-06-13 |
US8982155B2 (en) | 2015-03-17 |
CN102523758B (zh) | 2015-06-17 |
EP2472475A4 (en) | 2014-11-05 |
SG182287A1 (en) | 2012-08-30 |
JP2012074014A (ja) | 2012-04-12 |
EP2472475B1 (en) | 2016-10-05 |
EP2472475A1 (en) | 2012-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4914528B1 (ja) | 拡張現実提供システム、情報処理端末、情報処理装置、拡張現実提供方法、情報処理方法、及びプログラム | |
US20180336734A1 (en) | Augmented Reality System, Method, and Apparatus for Displaying an Item Image in a Contextual Environment | |
KR101620938B1 (ko) | 의류 제품 판매 지원 장치와 이와 통신 가능한 의류 제품 정보 관리 서버, 의류 연관 제품 추천 서버 및 의류 제품 정보 제공 방법 | |
CN110880139B (zh) | 一种商品展示方法、装置、终端、服务器及存储介质 | |
US20170038924A1 (en) | Graphical user interface indicating virtual storage of consumable items | |
JP2013109539A (ja) | 商品購入装置および商品購入方法 | |
JP2010014927A (ja) | 表示装置、表示管理システム、表示装置の制御方法およびそのプログラム | |
US20200134697A1 (en) | Apparatus and method for offering purchase support | |
WO2014027433A1 (ja) | 情報提供装置、情報提供方法、及び、プログラム | |
JP7003171B2 (ja) | 情報処理方法 | |
JP2021111215A (ja) | プログラム及び注文システム | |
WO2015125455A1 (ja) | 販売支援装置、販売システム、販売支援方法、及び、プログラム | |
JPH09138860A (ja) | 仮想画像空間内への実写画像取込システム | |
AU2019261789A1 (en) | Slider Fashion Portal | |
JP7477439B2 (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
JP2005309786A (ja) | 情報処理システム及び情報処理方法 | |
JP2011159171A (ja) | 商品情報提供装置、注文受付装置、注文受付方法、商品情報提供プログラム及び注文受付プログラム | |
JP2006079143A (ja) | 試着状態撮影システム | |
JP2014164333A (ja) | サーバおよびプログラム | |
JP6090358B2 (ja) | 情報提供装置及びプログラム | |
JP2015028683A (ja) | 商品販売装置およびそのプログラム | |
JP2022031542A (ja) | 情報処理方法 | |
JP2022093039A (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
JP2022093040A (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
JP2014102573A (ja) | 商品販売システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120110 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120120 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4914528 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150127 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |