JP2022553542A - 実店舗で客のショッピングセッションの映像に基づき仮想ショッピングカートをポピュレートするシステム及び方法 - Google Patents
実店舗で客のショッピングセッションの映像に基づき仮想ショッピングカートをポピュレートするシステム及び方法 Download PDFInfo
- Publication number
- JP2022553542A JP2022553542A JP2022523938A JP2022523938A JP2022553542A JP 2022553542 A JP2022553542 A JP 2022553542A JP 2022523938 A JP2022523938 A JP 2022523938A JP 2022523938 A JP2022523938 A JP 2022523938A JP 2022553542 A JP2022553542 A JP 2022553542A
- Authority
- JP
- Japan
- Prior art keywords
- virtual
- physical
- rack
- item
- shopping cart
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000004570 mortar (masonry) Substances 0.000 title claims description 262
- 238000000034 method Methods 0.000 title claims description 63
- 230000004044 response Effects 0.000 claims description 120
- 238000012545 processing Methods 0.000 claims description 33
- 239000011449 brick Substances 0.000 claims description 16
- 238000012549 training Methods 0.000 claims description 2
- 239000003550 marker Substances 0.000 description 77
- 238000010801 machine learning Methods 0.000 description 21
- 230000001360 synchronised effect Effects 0.000 description 16
- 241001482322 Trachemys scripta Species 0.000 description 12
- 238000004891 communication Methods 0.000 description 11
- 238000012986 modification Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000007792 addition Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 230000002452 interceptive effect Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- -1 for example Substances 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 239000010813 municipal solid waste Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
- G07G1/00—Cash registers
- G07G1/0036—Checkout procedures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F9/00—Details other than those peculiar to special kinds or types of apparatus
- G07F9/02—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
- G07F9/026—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus for alarm, monitoring and auditing in vending machines or means for indication, e.g. when empty
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
- G07G3/00—Alarm indicators, e.g. bells
Landscapes
- Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Finance (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Multimedia (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
本開示は、実店舗をエミュレートするよう構成される仮想店舗を生成し、実店舗内で行われるショッピングセッションの映像とともに、仮想店舗を使用して、物理ショッピングセッションを仮想的にエミュレートすることを概して対象とする。本開示は、実店舗の仮想エミュレーションについて記載するが、本開示は、如何なるタイプの物理空間(例えば、倉庫、保管センター、アミューズメントパーク、空港、オフィス建物、など)も、本開示で記載されるツールを用いて、仮想的にエミュレートされ得ると考えている。例えば、実店舗は、コンビニエンスストア又はグローサリーストアであってよい。本開示はまた、実店舗が物理的な建物ではなく、買い物客が買い物をし得る物理空間又は環境であってよいと考えている。例えば、実店舗は、空港のグラブ・アンド・ゴー(grab and go)パントリ、オフィス建物のキオスク、又は公園の屋外マーケット、などであってもよい。
図4は、仮想店舗ツール405、デバイス115、ディスプレイ410、ネットワーク430a、ネットワーク430b、レイアウトカメラ490、及びラックカメラ495を含む例示的なシステム400を表す。特定の実施形態では、システム400は、更に、外部システム485及びセンサ498を含む。一般に、仮想店舗ツール405は、実店舗100をエミュレートする仮想店舗110を生成するよう構成される。特定の実施形態では、仮想店舗ツール405は、実店舗100に置かれているレイアウトカメラ490及び/又はラックカメラ495から受け取られた、ショッピングセッションを追跡する映像に部分的に基づいて、実店舗100において人105によって行われるショッピングセッションの領収書を生成するために、仮想店舗110を使用する。いくつかの実施形態で、仮想店舗ツール405は、仮想店舗110と、レイアウトカメラ490及びラックカメラ495から受け取られた映像とを使用して、実店舗100においてショッピングセッション中に人105によって選択されたアイテムについてアルゴリズム488によってなされた決定を妥当性確認する。
上述されたように、仮想店舗ツール405は、仮想レイアウト205を使用して、カメラフィードセグメント415及び/又は425によって捕捉された実店舗100での客105のショッピングセッションをエミュレートし得る。図5~8は、仮想店舗ツール405がカメラフィードセグメント415及び/又は425を生成及び表示する方法について記載するために使用される。
図5Aは、実店舗100におけるレイアウトカメラ490及びラックカメラ495の位置の例を表す。実店舗100のために選択されたレイアウトカメラ490及びラックカメラ495の数は、実店舗100のサイズ及び/又はレイアウトに依存し得る。図5Aの例で分かるように、実店舗100は、5台のレイアウトカメラ490aないし490eを含み得る。実店舗100の天井に設置されるものとして表されているが、本開示は、レイアウトカメラ490が実店舗100内のどこにでも取り付けられてよいと考えている。更に、図5Aの例では、実店舗100は、4台のラックカメラ495aないし495dを含み得る。実店舗100の天井及び側壁の両方に設置されるものとして表されているが、本開示は、ラックカメラ495が実店舗100内のどこにでも取り付けられてよいと考えている。ラックカメラ495は、レイアウトカメラ490とは別であっても、又はレイアウトカメラ490と同じであってもよい。
レイアウトカメラ490及び/又はラックカメラ495によって捕捉された実店舗100の映像及び/又は画像は、カメラフィードの形で仮想店舗ツール405へ送信される。仮想店舗ツール405は、次いで、映像処理部465を使用して、それらのカメラフィードに基づいて、実店舗100においてショッピングセッションを行う人105に割り当てられるカメラフィードセグメント415及びラックカメラフィードセグメント425を生成する。図6は、仮想店舗ツール405の映像処理部465の動作を表す。
映像処理部465がカメラフィード605及び620から映像450の組を記録すると、仮想店舗ツール405は、次いで、デバイス115のディスプレイ410で映像450の組を表示するために表示制御部470を使用し得る。特定の実施形態では、仮想店舗ツール405は、グラフィカルユーザインターフェース700の形でデバイス115のディスプレイ410で映像450の組を表示し得る。図7A~7Cは、仮想店舗ツール405がディスプレイ410で映像450の組を表示する様態を表す例を示す。
上述されたように、カメラフィードセグメント415及び425は、実店舗100で行われて、カメラフィードセグメント415及び/又は425によって捕捉されるショッピングセッションを仮想的にエミュレートするために、仮想レイアウト205とともに使用されてよい。例えば、特定の実施形態では、カメラフィードセグメント415及び425は、仮想レイアウト205とともに、グラフィカルユーザインターフェース700の形で、ユーザ120に提示されてよい。ここで、カメラフィードセグメント415及び425は、客105に割り当てられ、実店舗100における客105のショッピングセッションを捕捉し得る。ユーザ120は、カメラフィードセグメント415及び425を監視して、物理ラック210から物理アイテム315を選択する客105を見ることができる。それに応じて、ユーザ120は、客105によって選択された物理アイテム315を表す仮想アイテムで仮想ショッピングカート420をポピュレートし得る。それにより、客105のショッピングセッションの終わりに、仮想ショッピングカート420は、客105によって選択された物理アイテム315ごとに仮想アイテム320を含み得る。
図9Bに表されているように仮想店舗ツール405は、実店舗100に置かれている物理ラック210aに関連したイベントの指示を受け取ってよい。特定の実施形態では、物理ラック210aに関連したイベントは、客105が物理ラック210aと関係を持つことを含む。例えば、物理ラック210aに関連したイベントは、客105aが物理ラック210aに近づくこと、及び/又は物理ラック210aから物理アイテム315fを選択することを含んでよい。イベントの指示は、仮想店舗ツール405によって受け取られる如何なる適切な指示も含んでよい。例えば、特定の実施形態では、イベントの指示は、客105が物理ラック210aに近づくこと及び/又は物理ラック210aと関係を持つことを見ることに応答して、ユーザ120が仮想レイアウト205において仮想ラック230aを選択することを含んでよい。他の例として、イベントの指示は、スライダバー705上のスライダ710がマーカ715に到達することを含んでよく、マーカ715は、メタデータ740により、イベントに関連した物理ラック210を示す。更なる例として、特定の実施形態では、イベントの指示は、実店舗100に設置されているセンサ498から受け取られた入力に基づいて、客105が物理ラック210aに近づいたこと及び/又は物理ラック210aからアイテム315を選択したことを決定するよう構成されるアルゴリズム488から情報を受け取ることを含んでよい。
イベントが、人105が物理ラック210aからアイテム315を選択することを含む特定の実施形態では、イベントの指示は、人105によって選択されたアイテムを特定する情報を含んでよい。例えば、イベントが、人105が物理ラック210aからアイテム315fを選択することを含む場合に、仮想店舗ツール405によって受け取られるイベントの指示は、物理アイテム315f及び/又は仮想アイテム320fを特定する情報を含んでよい。例として、特定の実施形態では、物理ラック210aの各物理シェルフ305は、図13B~13Dの説明において、以下で記載されるように、物理シェルフ305のゾーン325へ結合されている重量センサ1300の組を含む。人105が物理シェルフ305からアイテム315を持ち去るとき、アイテム315が置かれていた物理シェルフ305のゾーンに結合されている重量センサ1300は、アイテム315が物理ラック210aの物理シェルフ305から選択されたことを示す情報を(直接に、又は外部システム485のような、システム400の他のコンポーネントを通じて)仮想店舗ツール405へ送信し得る。仮想店舗ツール405は、この情報を使用して、ディスプレイ410の第3領域905に表示される仮想ラック230a上の対応する仮想アイテム320を強調表示し得る。例えば、物理ラック210aの第2物理シェルフ305bの第3ゾーンへ結合されている重量センサは、物理ラック210aの第2物理シェルフ305bの第3ゾーンからアイテム315fが持ち去られたことを示す情報を仮想店舗ツール405へ送信し得る。
特定の実施形態では、ディスプレイ410で仮想店舗ツール405によって表示されるグラフィカルユーザインターフェース700は、更に、図9Dに表されているように、仮想ショッピングカート420を含んでよい。仮想ショッピングカート420は、人105によって彼/彼女のショッピングセッション中に選択された物理アイテム315に対応する仮想アイテム320を格納することによって、実店舗100における客105のショッピングセッションを更にエミュレートするために使用されてよい。仮想店舗ツール405は、ディスプレイ410の第5領域965において仮想ショッピングカート420を表示してよい。特定の実施形態では、ディスプレイ410の第5領域965は、ディスプレイ410の第3領域905に表示される仮想ラック230aと、ラックカメラフィードセグメント425aとの間に位置している。
図10は、仮想店舗ツール405が、仮想レイアウトと、実店舗100から受け取られ、ショッピングセッションを捕捉するカメラフィードセグメント415及び/又は425とを用いて、実店舗100における客105のショッピングセッションをエミュレートする様態を説明するフローチャートを表す。ステップ1005で、仮想店舗ツール405は、仮想店舗110の仮想レイアウト205を表示する。仮想レイアウト205は、実店舗100の物理レイアウト200をエミュレートするよう構成される。特に、仮想レイアウト205での仮想ラック230の配置は、実店舗100における物理ラック210の物理レイアウト200をエミュレートするよう構成される。
特定の実施形態では、仮想店舗ツール405のレイアウト生成部460は、第2グラフィカルユーザインターフェース1100を表示するよう構成され、これを通じて、ユーザ120は、実店舗100の物理レイアウト200をエミュレートするよう構成される仮想レイアウト205を生成し得る。図11A及び11Bは、そのようなグラフィカルユーザインターフェース1100の例示的な実施形態を表す。
仮想店舗ツール405のレイアウト生成部460は、実店舗100に置かれている物理ラック210に関連した位置及び向きの組を受け取ることに応答して、実店舗100の物理レイアウト200をエミュレートするよう構成される仮想レイアウト205を生成し得る。レイアウト生成部460は、如何なる適切な方法でも位置及び向きの組を受け取ってよい。例えば、仮想店舗ツール405は、ユーザがグラフィカルユーザインターフェース1100で仮想ラック230を作成し、それから、仮想ラック230を仮想レイアウト205上の所与の位置にドラッグ・アンド・ドロップすること及び/又は仮想ラック230を仮想レイアウト205上の所与の向きに回転させることによって、グラフィカルユーザインターフェース1100を通じて、ユーザ120から位置及び向きを受け取り得る。他の例として、レイアウト生成部460は、仮想店舗ツール405にアップロードされたファイルから位置及び向きを受け取ってもよい。例えば、ユーザ120は、グラフィカルユーザインターフェース1100上の「ファイルをここにドロップしてください」(“drop your file here”)ボタン1150を用いて、位置及び向きを含むファイルをアップロードし得る。ファイルは、位置及び角度の対を含むリストを含み得る。特定の実施形態では、各位置は、実店舗100での物理ラック210の質量位置を指定し得る。いくつかの実施形態で、各位置は、実店舗100での物理ラック210の所与の角の位置を指定し得る。位置は、物理レイアウト200に重ね合わされている任意の座標系に関して指定されてもよい。例えば、各位置は、原点が実店舗100の真ん中に位置している直交座標系の(x,y)座標として指定されてよい。特定の実施形態では、各向きは、所与の方向に対する物理ラック210の角度を指定し得る。例えば、各向きは、上記の例の直交座標系のx軸に対する物理ラック210の角度を指定し得る。特定の実施形態では、各物理ラック210について、ファイルは、物理ラック210の長さ及び幅を更に含んでもよい。
仮想レイアウト205に仮想ラック230を置くことに加えて、レイアウト生成部460は、仮想アイテム320で仮想ラック230をポピュレートするよう動作する。例えば、レイアウト生成部460は、実店舗100で各ラック210に置かれる物理アイテム315を指定するプラノグラム(planogram)を受け取ってよい。例えば、各物理ラック210について、プラノグラムは、物理ラック210に置かれる物理アイテム315のリストを含み得る。各物理アイテム315について、リストは、その物理アイテム315が置かれるべきである物理ラック210のシェルフ305と、その物理アイテム315が置かれるべきである各シェルフ305のゾーン325とを指定し得る。プラノグラムを受け取ることに応答して、レイアウト生成部460は、対応する仮想アイテム320を仮想ラック230に置き得る。他の例として、レイアウト生成部460は、仮想ラック230ごとの仮想アイテム320のリストを受け取ってもよく、リスト内の各仮想アイテム320は物理アイテム315と関連付けられている。そのようなリストは、物理アイテム315をエミュレートする仮想アイテム320ごとに、店舗識別番号1105、ラック識別番号755、シェルフ識別番号750、及び/又はゾーン識別番号745を指定し得る。ここで、店舗識別番号1105は、物理アイテム315を保管する実店舗100を識別し、ラック識別番号755は、物理アイテム315を保持している実店舗100内の物理ラック210を識別し、シェルフ識別番号750は、物理アイテム315が置かれている物理ラック210の物理シェルフ305を識別し、ゾーン識別番号745は、物理アイテム315を収容している物理シェルフ305のゾーンを識別する。特定の実施形態では、ゾーン識別番号745は、物理アイテム315を収容している物理シェルフ305のゾーンに結合されているセンサ498のセンサ識別番号に対応し得る。レイアウト生成部460は、それから、店舗識別番号1105、ラック識別番号755、シェルフ識別番号750、及びゾーン識別番号745に従って、仮想アイテム320をメモリ440に記憶し得る。このとき、レイアウト生成部460は、店舗識別番号1105を仮想レイアウト205に、ラック識別番号755を仮想ラック230に、シェルフ識別番号750を仮想シェルフ310に、及びゾーン識別番号745を、物理アイテム315を収容している物理シェルフ305の物理ゾーンをエミュレートするよう構成される仮想シェルフ310の仮想ゾーンに割り当てている。ゾーンへの物理シェルフ305及び仮想シェルフ310の分割は、図13C及び13Dの説明において、以下で更に詳細に記載される。
図12は、仮想店舗ツール405が、実店舗100の物理レイアウト200をエミュレートするよう構成される仮想レイアウト205を生成し得る様態を説明するフローチャートを表す。ステップ1205で、仮想店舗ツール405は、仮想レイアウト205上で仮想的な位置に仮想的な向きで仮想ラック230の組を置く。仮想ラック230の仮想的な位置及び仮想的な向きは、実店舗100内の物理ラック210の物理的な位置及び物理的な向きをエミュレートするよう選択される。仮想店舗ツール405は、如何なる適切な方法でも仮想的な位置及び仮想的な向きを受け取ってよい。例えば、仮想店舗ツール405は、グラフィカルユーザインターフェース1100を通じてユーザ120から位置及び向きを受け取ってよい。他の例として、仮想店舗ツール405は、仮想店舗ツール405にアップロードされたファイルから位置及び向きを受け取ってもよい。
仮想店舗ツール405は、外部システム485によって生成されるアルゴリズム488と組み合わされて使用されてよい。アルゴリズム488は、実店舗100に設置されているセンサ498から受け取られた入力に基づいて、客105を追跡し、実店舗100での客105aのショッピングセッション中に所与の客105aによって選択されたアイテム315を決定するよう構成される。例えば、仮想店舗ツール405は、アルゴリズム488によってなされた決定を妥当性確認するために、及び/又はアルゴリズム488の精度を改善するのを助けるために、使用されてよい。図13~16は、仮想店舗ツール405のこの態様について記載するために使用される。
上述されたように、外部アルゴリズム488は、実店舗100に設置されているセンサ498から受け取られた入力に基づいて、客105を追跡し、実店舗100でのショッピングセッション中に所与の客105によって選択されたアイテムを決定するよう構成される。本開示は、実店舗100が如何なるタイプの適切なセンサ498も含んでもよいと考えている。例えば、実店舗100は、カメラ、光検出及び測距センサ、ミリメートル波センサ、重量センサ、及び/又は実店舗100において客105を追跡しかつ実店舗100から1つ以上のアイテムを選択する客105に関連した情報を検出するよう動作可能な任意の他の適切なセンサを含んでよい。
特定の実施形態では、仮想店舗ツール405は、実店舗100に設置されているセンサ498から受け取られた入力に基づいて、実店舗100内の客105を追跡し、実店舗100でのショッピングセッション中に客105によって選択された物理アイテム315を決定するよう訓練されたアルゴリズムとともに、使用されてよい。上述されたように、図13A~13Dの説明において、センサ498は、カメラ1305及び重量センサ1300を含み得る。
特定の実施形態では、仮想店舗ツール405は、アルゴリズム488によってなされた決定の正確さを改善するために、アルゴリズム488とともに使用されてよい。具体的に、機械学習モジュール480は、仮想ショッピングカート420の中身とアルゴリズム的ショッピングカート1420の中身との比較に基づいて、フィードバックをアルゴリズム488へ供給してよい。図15は、機械学習モジュール480の動作を表す。
第1のアイテムの組を含むアルゴリズム的ショッピングカートを受け取り、前記第1のアイテムの組は、アルゴリズムによって、実店舗内の設置されているセンサから受け取られた入力の組に基づいて、第1人物によって前記実店舗でのショッピングセッション中に選択されたと決定され、
前記ショッピングセッションに関連した第2のアイテムの組を含む仮想ショッピングカートを受け取り、前記ショッピングセッションの映像は、前記実店舗に置かれているカメラの組によって捕捉されたものであり、前記映像は、前記第2のアイテムの組を選択する前記人物を表し、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較し、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較することに応答して、
前記アルゴリズム的ショッピングカートと前記仮想ショッピングカートとの間に不一致が存在することを決定し、
前記入力の組の中から前記不一致に関連したサブセットを決定し、
前記不一致を説明するメタデータを前記サブセットに付加し、
前記サブセットを使用して前記アルゴリズムを訓練する
よう構成されるハードウェアプロセッサを有する装置。
前記プロセッサは、
第3のアイテムの組を含む第2アルゴリズム的ショッピングカートを受け取り、前記第3のアイテムの組は、前記アルゴリズムによって、前記実店舗内に設置されている前記センサから受け取られた第2の入力の組に基づいて、第2人物によって前記実店舗での第2ショッピングセッション中に選択されたと決定され、
第4のアイテムの組を含む第2仮想ショッピングカートを受け取り、前記第4のアイテムの組は、前記第2ショッピングセッションの映像に基づいて、前記実店舗での前記第2ショッピングセッション中に前記人物によって選択されたと決定され、
前記第2アルゴリズム的ショッピングカートを前記第2仮想ショッピングカートと比較し、
前記第2アルゴリズム的ショッピングカートを前記第2仮想ショッピングカートと比較することに応答して、前記第2アルゴリズム的ショッピングカートが前記第2仮想ショッピングカートと一致することを決定する
よう更に構成される、
付記1に記載の装置。
前記不一致は、前記アルゴリズム的ショッピングカートにおける第1アイテムの不存在を含み、前記第1のアイテムは、前記仮想ショッピングカートには存在する、
付記1に記載の装置。
前記センサは、前記第1アイテムの選択を検出することができなかった、
付記3に記載の装置。
前記不一致は、前記アルゴリズム的ショッピングカートにおける第1アイテムの存在を含み、前記第1アイテムは、前記仮想ショッピングカートには存在しない、
付記1に記載の装置。
前記不一致は、前記第1人物によって選択された第1アイテムが前記アルゴリズム的ショッピングカートに存在せず、第2人物に関連した第2アルゴリズム的ショッピングカートに存在するような、前記第1人物と前記第2人物との間の識別入れ替えを含む、
付記1に記載の装置。
前記センサは、
前記カメラの組とは異なるアルゴリズムカメラのアレイと、
重量センサの組と
を有し、
前記第1のアイテムの組の中の各アイテムは、前記重量センサの組の中の重量センサへ結合される、
付記1に記載の装置。
第1のアイテムの組を含むアルゴリズム的ショッピングカートを受け取ることであり、前記第1のアイテムの組は、アルゴリズムによって、実店舗内の設置されているセンサから受け取られた入力の組に基づいて、第1人物によって前記実店舗でのショッピングセッション中に選択されたと決定される、ことと、
前記ショッピングセッションに関連した第2のアイテムの組を含む仮想ショッピングカートを受け取ることであり、前記ショッピングセッションの映像は、前記実店舗に置かれているカメラの組によって捕捉されたものであり、前記映像は、前記第2のアイテムの組を選択する前記人物を表す、ことと、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較することと、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較することに応答して、
前記アルゴリズム的ショッピングカートと前記仮想ショッピングカートとの間に不一致が存在することを決定することと、
前記入力の組の中から前記不一致に関連したサブセットを決定することと、
前記不一致を説明するメタデータを前記サブセットに付加することと、
前記サブセットを使用して前記アルゴリズムを訓練することと
を有する方法。
第3のアイテムの組を含む第2アルゴリズム的ショッピングカートを受け取ることであり、前記第3のアイテムの組は、前記アルゴリズムによって、前記実店舗内に設置されている前記センサから受け取られた第2の入力の組に基づいて、第2人物によって前記実店舗での第2ショッピングセッション中に選択されたと決定される、ことと、
第4のアイテムの組を含む第2仮想ショッピングカートを受け取ることであり、前記第4のアイテムの組は、前記第2ショッピングセッションの映像に基づいて、前記実店舗での前記第2ショッピングセッション中に前記人物によって選択されたと決定される、ことと、
前記第2アルゴリズム的ショッピングカートを前記第2仮想ショッピングカートと比較することと、
前記第2アルゴリズム的ショッピングカートを前記第2仮想ショッピングカートと比較することに応答して、前記第2アルゴリズム的ショッピングカートが前記第2仮想ショッピングカートと一致することを決定することと
を更に有する、付記8に記載の方法。
前記不一致は、前記アルゴリズム的ショッピングカートにおける第1アイテムの不存在を含み、前記第1のアイテムは、前記仮想ショッピングカートには存在する、
付記8に記載の方法。
前記センサは、前記第1アイテムの選択を検出することができなかった、
付記10に記載の方法。
前記不一致は、前記アルゴリズム的ショッピングカートにおける第1アイテムの存在を含み、前記第1アイテムは、前記仮想ショッピングカートには存在しない、
付記8に記載の方法。
前記不一致は、前記第1人物によって選択された第1アイテムが前記アルゴリズム的ショッピングカートに存在せず、第2人物に関連した第2アルゴリズム的ショッピングカートに存在するような、前記第1人物と前記第2人物との間の識別入れ替えを含む、
付記8に記載の方法。
前記センサは、
前記カメラの組とは異なるアルゴリズムカメラのアレイと、
重量センサの組と
を有し、
前記第1のアイテムの組の中の各アイテムは、前記重量センサの組の中の重量センサへ結合される、
付記8に記載の装置。
実店舗内に設置され、アルゴリズムカメラのアレイ及び重量センサの組を含むセンサの組と、
プロセッサ
とを有し、前記プロセッサは、
第1のアイテムの組を含むアルゴリズム的ショッピングカートを受け取り、前記第1のアイテムの組は、アルゴリズムによって、前記センサの組から受け取られた入力の組に基づいて、第1人物によって前記実店舗でのショッピングセッション中に選択されたと決定され、
前記ショッピングセッションに関連した第2のアイテムの組を含む仮想ショッピングカートを受け取り、前記ショッピングセッションの映像は、前記実店舗に置かれているカメラの組によって捕捉されたものであり、前記映像は、前記第2のアイテムの組を選択する前記人物を表し、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較し、
前記アルゴリズム的ショッピングカートを前記仮想ショッピングカートと比較することに応答して、
前記アルゴリズム的ショッピングカートと前記仮想ショッピングカートとの間に不一致が存在することを決定し、
前記入力の組の中から前記不一致に関連したサブセットを決定し、
前記不一致を説明するメタデータを前記サブセットに付加し、
前記サブセットを使用して前記アルゴリズムを訓練する
よう構成される、
システム。
前記プロセッサは、
第3のアイテムの組を含む第2アルゴリズム的ショッピングカートを受け取り、前記第3のアイテムの組は、前記アルゴリズムによって、前記センサの組から受け取られた第2の入力の組に基づいて、第2人物によって前記実店舗での第2ショッピングセッション中に選択されたと決定され、
第4のアイテムの組を含む第2仮想ショッピングカートを受け取り、前記第4のアイテムの組は、前記第2ショッピングセッションの映像に基づいて、前記実店舗での前記第2ショッピングセッション中に前記人物によって選択されたと決定され、
前記第2アルゴリズム的ショッピングカートを前記第2仮想ショッピングカートと比較し、
前記第2アルゴリズム的ショッピングカートを前記第2仮想ショッピングカートと比較することに応答して、前記第2アルゴリズム的ショッピングカートが前記第2仮想ショッピングカートと一致することを決定する
よう更に構成される、
付記15に記載のシステム。
前記不一致は、前記アルゴリズム的ショッピングカートにおける第1アイテムの不存在を含み、前記第1のアイテムは、前記仮想ショッピングカートには存在する、
付記15に記載のシステム。
前記センサは、前記第1アイテムの選択を検出することができなかった、
付記17に記載のシステム。
前記不一致は、前記アルゴリズム的ショッピングカートにおける第1アイテムの存在を含み、前記第1アイテムは、前記仮想ショッピングカートには存在しない、
付記15に記載のシステム。
前記不一致は、前記第1人物によって選択された第1アイテムが前記アルゴリズム的ショッピングカートに存在せず、第2人物に関連した第2アルゴリズム的ショッピングカートに存在するような、前記第1人物と前記第2人物との間の識別入れ替えを含む、
付記15に記載のシステム。
実店舗の物理レイアウトをエミュレートするように仮想店舗の仮想レイアウトを生成するよう構成される装置であって、
メモリと、
前記メモリへ通信可能に結合されるハードウェアプロセッサと
を有し、前記ハードウェアプロセッサは、
前記実店舗に置かれている第1物理ラックに関連した第1物理位置及び第1物理方向を受け取り、
前記第1物理位置及び前記第1物理方向を受け取ることに応答して、第1仮想位置において第1仮想方向により第1仮想ラックを前記仮想レイアウトに置き、前記仮想レイアウトでの前記第1仮想ラックの前記第1仮想位置は、前記物理レイアウトでの前記第1物理ラックの前記第1物理位置に相当し、前記仮想レイアウトでの前記第1仮想ラックの前記第1仮想方向は、前記物理レイアウトでの前記第1物理ラックの前記第1物理方向に相当し、
前記第1物理ラックの第1物理シェルフにある第1物理アイテムに関連した第1仮想アイテムを受け取り、
前記第1仮想アイテムを受け取ることに応答して、前記第1仮想アイテムを前記第1仮想ラックの第1仮想シェルフに置き、前記第1仮想ラックの前記第1仮想シェルフは、前記第1物理ラックの前記第1物理シェルフに相当し、
前記第1物理ラックの第2物理シェルフにある第2物理アイテムに関連した第2仮想アイテムを受け取り、
前記第2仮想アイテムを受け取ることに応答して、前記第2仮想アイテムを前記第1仮想ラックの第2仮想シェルフに置き、前記第1仮想ラックの前記第2仮想シェルフは、前記第1物理ラックの前記第2物理シェルフに相当し、
前記実店舗に置かれている第1ラックカメラを前記第1仮想ラックに割り当て、前記第1ラックカメラは、前記第1物理ラックを含む映像を捕捉するよう構成され、
前記仮想レイアウトを前記メモリに保存する
よう構成される、
装置。
前記プロセッサは、
前記実店舗に置かれている第2物理ラックに関連した第2物理位置及び第2物理方向を受け取り、
前記第2物理位置及び前記第2物理方向を受け取ることに応答して、第2仮想位置において第2仮想方向により第2仮想ラックを前記仮想レイアウトに置き、前記仮想レイアウトでの前記第2仮想ラックの前記第2仮想位置は、前記物理レイアウトでの前記第2物理ラックの前記第2物理位置に相当し、前記仮想レイアウトでの前記第2仮想ラックの前記第2仮想方向は、前記物理レイアウトでの前記第2物理ラックの前記第2物理方向に相当し、
前記第2物理ラックの第3物理シェルフにある第3物理アイテムに関連した第3仮想アイテムを受け取り、
前記第3仮想アイテムを受け取ることに応答して、前記第3仮想アイテムを前記第2仮想ラックの第3仮想シェルフに置き、前記第2仮想ラックの前記第3仮想シェルフは、前記第2物理ラックの前記第3物理シェルフに相当し、
前記第2物理ラックの第4物理シェルフにある第4物理アイテムに関連した第4仮想アイテムを受け取り、
前記第4仮想アイテムを受け取ることに応答して、前記第4仮想アイテムを前記第2仮想ラックの第4仮想シェルフに置き、前記第2仮想ラックの前記第4仮想シェルフは、前記第2物理ラックの前記第4物理シェルフに相当し、
前記実店舗に置かれている第2ラックカメラを前記第2仮想ラックに割り当て、前記第2ラックカメラは、前記第2物理ラックを含む映像を捕捉するよう構成される、
よう更に構成される、
付記21に記載の装置。
店舗識別番号が、前記実店舗に割り当てられ、
前記仮想レイアウトは、前記店舗識別番号に従って前記メモリに記憶される、
付記21に記載の装置。
ディスプレイを更に有し、
前記プロセッサは、
前記店舗識別番号を受け取り、
前記店舗識別番号を受け取ることに応答して、前記ディスプレイの第1領域で前記仮想レイアウトを表示し、
前記第1物理ラックに関連したイベントの指示を受け取ることに応答して、
前記ディスプレイの第2領域で前記第1仮想ラックを表示し、
前記ディスプレイの第3領域で前記第1ラックカメラからの映像を表示する
よう更に構成される、
付記23に記載の装置。
前記第1仮想アイテムは、前記第1物理ラックの前記第1物理シェルフの第1物理ゾーンと更に関連付けられ、
前記第2仮想アイテムは、前記第1物理ラックの前記第2物理シェルフの第2物理ゾーンと更に関連付けられ、
前記第1仮想アイテムを前記第1仮想ラックの前記第1仮想シェルフに置くことは、前記第1仮想アイテムを前記第1仮想ラックの前記第1仮想シェルフの第1仮想ゾーンに置くことを更に含み、前記第1仮想シェルフの前記第1仮想ゾーンは、前記第1物理シェルフの前記第1物理ゾーンを表し、
前記第2仮想アイテムを前記第1仮想ラックの前記第2仮想シェルフに置くことは、前記第2仮想アイテムを前記第1仮想ラックの前記第2仮想シェルフの第2仮想ゾーンに置くことを更に含み、前記第2仮想シェルフの前記第2仮想ゾーンは、前記第2物理シェルフの前記第2物理ゾーンを表す、
付記21に記載の装置。
第1センサ識別番号に関連した第1センサは、前記第1物理シェルフの前記第1物理ゾーンに割り当てられ、
第2センサ識別番号に関連した第2センサは、前記第2物理シェルフの前記第2物理ゾーンに割り当てられ、
前記プロセッサは、
前記第1センサ識別番号を前記第1仮想シェルフの前記第1仮想ゾーンに割り当て、
前記第2センサ識別番号を前記第2仮想シェルフの前記第2仮想ゾーンに割り当てる
よう更に構成される、
付記25に記載の装置。
前記第1仮想アイテム及び前記第2仮想アイテムを受け取ることは、プラノグラムを含むファイルを受け取ることを有する、
付記21に記載の装置。
前記第1仮想アイテム及び前記第2仮想アイテムを受け取ることは、
前記第1仮想アイテム及び前記第2仮想アイテムを含むアイテムのスクロール可能なリストを表示することと、
前記スクロール可能なリストからの前記第1仮想アイテムを前記第1仮想ラックの前記第1仮想シェルフに加える第1命令を受け取ることと、
前記スクロール可能なリストからの前記第2仮想アイテムを前記第1仮想ラックの前記第2仮想シェルフに加える第2命令を受け取ることと
を有する、
付記21に記載の装置。
前記プロセッサは、
第1入力を受け取り、
前記第1入力が前記第1仮想位置から新しい仮想位置への前記第1仮想ラックのドラッグを表すことを決定し、
前記第1入力が前記第1仮想位置から前記新しい仮想位置への前記第1仮想ラックのドラッグを表すとの決定に応答して、前記第1仮想ラックを前記新しい仮想位置に置き、
第2入力を受け取り、
前記第2入力が前記第1仮想方向から新しい仮想方向への前記第1仮想ラックの回転を表すことを決定し、
前記第2入力が前記第1仮想方向から前記新しい仮想方向への前記第1仮想ラックの回転を表すとの決定に応答して、前記第1仮想ラックを前記新しい仮想方向で置く
よう更に構成される、
付記21に記載の装置。
ディスプレイを更に有し、
前記プロセッサは、
前記仮想レイアウトを含む第1グラフィカルユーザインターフェースを前記ディスプレイに表示し、前記第1入力及び前記第2入力は、前記第1グラフィカルユーザインターフェースから受け取られ、
前記第1グラフィカルユーザインターフェースとは別に表示され、前記仮想レイアウト及び前記第1ラックカメラから受け取られた映像を含む第2グラフィカルユーザインターフェースを前記ディスプレイに表示し、
前記第2グラフィカルユーザインターフェースから第3入力を受け取り、
前記第3入力が前記仮想レイアウトからの前記第1仮想ラックの選択を表すことを決定し、
前記第3入力が前記仮想レイアウトからの前記第1仮想ラックの選択を表すとの決定に応答して、前記ディスプレイで前記第2グラフィカルユーザインターフェースに前記第1仮想ラックを表示する
よう更に構成される、
付記29に記載の装置。
実店舗の物理レイアウトをエミュレートするように仮想店舗の仮想レイアウトを生成する方法であって、
前記実店舗に置かれている第1物理ラックに関連した第1物理位置及び第1物理方向を受け取ることと、
前記第1物理位置及び前記第1物理方向を受け取ることに応答して、第1仮想位置において第1仮想方向により第1仮想ラックを前記仮想レイアウトに置くことであり、前記仮想レイアウトでの前記第1仮想ラックの前記第1仮想位置は、前記物理レイアウトでの前記第1物理ラックの前記第1物理位置に相当し、前記仮想レイアウトでの前記第1仮想ラックの前記第1仮想方向は、前記物理レイアウトでの前記第1物理ラックの前記第1物理方向に相当する、ことと、
前記第1物理ラックの第1物理シェルフにある第1物理アイテムに関連した第1仮想アイテムを受け取ることと、
前記第1仮想アイテムを受け取ることに応答して、前記第1仮想アイテムを前記第1仮想ラックの第1仮想シェルフに置くことであり、前記第1仮想ラックの前記第1仮想シェルフは、前記第1物理ラックの前記第1物理シェルフに相当する、ことと、
前記第1物理ラックの第2物理シェルフにある第2物理アイテムに関連した第2仮想アイテムを受け取ることと、
前記第2仮想アイテムを受け取ることに応答して、前記第2仮想アイテムを前記第1仮想ラックの第2仮想シェルフに置くことであり、前記第1仮想ラックの前記第2仮想シェルフは、前記第1物理ラックの前記第2物理シェルフに相当する、ことと、
前記実店舗に置かれている第1ラックカメラを前記第1仮想ラックに割り当てることであり、前記第1ラックカメラは、前記第1物理ラックを含む映像を捕捉するよう構成される、ことと、
前記仮想レイアウトをメモリに保存することと
を有する方法。
前記実店舗に置かれている第2物理ラックに関連した第2物理位置及び第2物理方向を受け取ることと、
前記第2物理位置及び前記第2物理方向を受け取ることに応答して、第2仮想位置において第2仮想方向により第2仮想ラックを前記仮想レイアウトに置くことであり、前記仮想レイアウトでの前記第2仮想ラックの前記第2仮想位置は、前記物理レイアウトでの前記第2物理ラックの前記第2物理位置に相当し、前記仮想レイアウトでの前記第2仮想ラックの前記第2仮想方向は、前記物理レイアウトでの前記第2物理ラックの前記第2物理方向に相当する、ことと、
前記第2物理ラックの第3物理シェルフにある第3物理アイテムに関連した第3仮想アイテムを受け取ることと、
前記第3仮想アイテムを受け取ることに応答して、前記第3仮想アイテムを前記第2仮想ラックの第3仮想シェルフに置くことであり、前記第2仮想ラックの前記第3仮想シェルフは、前記第2物理ラックの前記第3物理シェルフに相当する、ことと、
前記第2物理ラックの第4物理シェルフにある第4物理アイテムに関連した第4仮想アイテムを受け取ることと、
前記第4仮想アイテムを受け取ることに応答して、前記第4仮想アイテムを前記第2仮想ラックの第4仮想シェルフに置くことであり、前記第2仮想ラックの前記第4仮想シェルフは、前記第2物理ラックの前記第4物理シェルフに相当する、ことと、
前記実店舗に置かれている第2ラックカメラを前記第2仮想ラックに割り当てることであり、前記第2ラックカメラは、前記第2物理ラックを含む映像を捕捉するよう構成される、ことと
を更に有する、付記31に記載の方法。
店舗識別番号が、前記実店舗に割り当てられ、
前記仮想レイアウトは、前記店舗識別番号に従って前記メモリに記憶される、
付記31に記載の方法。
前記店舗識別番号を受け取ることと、
前記店舗識別番号を受け取ることに応答して、ディスプレイの第1領域で前記仮想レイアウトを表示することと、
前記第1物理ラックに関連したイベントの指示を受け取ることに応答して、
前記ディスプレイの第2領域で前記第1仮想ラックを表示することと、
前記ディスプレイの第3領域で前記第1ラックカメラからの映像を表示することと
を更に有する、付記33に記載の方法。
前記第1仮想アイテムは、前記第1物理ラックの前記第1物理シェルフの第1物理ゾーンと更に関連付けられ、
前記第2仮想アイテムは、前記第1物理ラックの前記第2物理シェルフの第2物理ゾーンと更に関連付けられ、
前記第1仮想アイテムを前記第1仮想ラックの前記第1仮想シェルフに置くことは、前記第1仮想アイテムを前記第1仮想ラックの前記第1仮想シェルフの第1仮想ゾーンに置くことを更に含み、前記第1仮想シェルフの前記第1仮想ゾーンは、前記第1物理シェルフの前記第1物理ゾーンを表し、
前記第2仮想アイテムを前記第1仮想ラックの前記第2仮想シェルフに置くことは、前記第2仮想アイテムを前記第1仮想ラックの前記第2仮想シェルフの第2仮想ゾーンに置くことを更に含み、前記第2仮想シェルフの前記第2仮想ゾーンは、前記第2物理シェルフの前記第2物理ゾーンを表す、
付記31に記載の方法。
第1センサ識別番号を前記第1仮想シェルフの前記第1仮想ゾーンに割り当てることであり、前記第1センサ識別番号に関連した第1センサが、前記第1物理シェルフの前記第1物理ゾーンに割り当てられる、ことと、
第2センサ識別番号を前記第2仮想シェルフの前記第2仮想ゾーンに割り当てることであり、前記第2センサ識別番号に関連した第2センサが、前記第2物理シェルフの前記第2物理ゾーンに割り当てられる、ことと
を更に有する、付記35に記載の方法。
前記第1仮想アイテム及び前記第2仮想アイテムを受け取ることは、プラノグラムを含むファイルを受け取ることを有する、
付記31に記載の方法。
前記第1仮想アイテム及び前記第2仮想アイテムを受け取ることは、
前記第1仮想アイテム及び前記第2仮想アイテムを含むアイテムのスクロール可能なリストを表示することと、
前記スクロール可能なリストからの前記第1仮想アイテムを前記第1仮想ラックの前記第1仮想シェルフに加える第1命令を受け取ることと、
前記スクロール可能なリストからの前記第2仮想アイテムを前記第1仮想ラックの前記第2仮想シェルフに加える第2命令を受け取ることと
を有する、
付記31に記載の方法。
第1入力を受け取ることと、
前記第1入力が前記第1仮想位置から新しい仮想位置への前記第1仮想ラックのドラッグを表すことを決定することと、
前記第1入力が前記第1仮想位置から前記新しい仮想位置への前記第1仮想ラックのドラッグを表すとの決定に応答して、前記第1仮想ラックを前記新しい仮想位置に置くことと、
第2入力を受け取ることと、
前記第2入力が前記第1仮想方向から新しい仮想方向への前記第1仮想ラックの回転を表すことを決定することと、
前記第2入力が前記第1仮想方向から前記新しい仮想方向への前記第1仮想ラックの回転を表すとの決定に応答して、前記第1仮想ラックを前記新しい仮想方向で置くことと
を更に有する、付記31に記載の方法。
前記仮想レイアウトを含む第1グラフィカルユーザインターフェースをディスプレイに表示することであり、前記第1入力及び前記第2入力は、前記第1グラフィカルユーザインターフェースから受け取られる、ことと、
前記第1グラフィカルユーザインターフェースとは別に表示され、前記仮想レイアウト及び前記第1ラックカメラから受け取られた映像を含む第2グラフィカルユーザインターフェースを前記ディスプレイに表示することと、
前記第2グラフィカルユーザインターフェースから第3入力を受け取ることと、
前記第3入力が前記仮想レイアウトからの前記第1仮想ラックの選択を表すことを決定することと、
前記第3入力が前記仮想レイアウトからの前記第1仮想ラックの選択を表すとの決定に応答して、前記ディスプレイで前記第2グラフィカルユーザインターフェースに前記第1仮想ラックを表示することと
を更に有する、付記39に記載の方法。
実店舗に置かれており、前記実店舗内の第1位置に向けられている第1カメラに対応する第1カメラフィードと、前記実店舗に置かれており、前記実店舗内の第2位置に向けられている第2カメラに対応する第2カメラフィードと含む第1ビデオフィードを受け取るよう構成されるインターフェースと、
ディスプレイと、
メモリと、
前記メモリ及び前記ディスプレイへ通信可能に結合されるハードウェアプロセッサと
を有し、
前記ハードウェアプロセッサは、
第1人物に割り当てられ、開始タイムスタンプと終了タイムスタンプとの間の時間インターバル中に起こる前記実店舗における前記第1人物のショッピングセッションの部分を捕捉する第1ビデオセグメントを前記メモリに保存し、前記第1ビデオセグメントは、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第1カメラフィードの記録に対応する第1カメラフィードセグメントと、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第2カメラフィードの記録に対応する第2カメラフィードセグメントと
を含み、
第1スライダバーを前記第1ビデオセグメントに割り当て、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生は同期し、前記第1スライダバーは、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を制御し、
前記ディスプレイの第1領域において前記第1カメラフィードセグメント及び前記第1スライダの第1コピーを表示し、
前記ディスプレイの第2領域において前記第2カメラフィードセグメント及び前記第1スライダの第2コピーを表示し、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を調整ために、前記第1スライダの前記第1コピー及び前記第1スライダの前記第2コピーのうちの少なくとも一方から命令を受け取り、
前記命令を受け取ることに応答して、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を調整する
よう構成される、
装置。
前記プロセッサは、
第2人物に割り当てられ、第2開始タイムスタンプと第2終了タイムスタンプとの間の第2時間インターバル中に起こる前記実店舗における前記第2人物のショッピングセッションの部分を捕捉する第2ビデオセグメントを前記メモリに保存し、前記第2開始タイムスタンプは前記開始スタンプよりも遅く、前記終了タイムスタンプよりも早く、前記第2ビデオセグメントは、
前記第2開始タイムスタンプから前記第2終了タイムスタンプまでの前記第1カメラフィードの記録に対応する第3カメラフィードセグメントと、
前記第2開始タイムスタンプから前記第2終了タイムスタンプまでの前記第2カメラフィードの記録に対応する第4カメラフィードセグメントと
を含み、
前記第1スライダバーから独立している第2スライダバーを前記第2ビデオセグメントに割り当て、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生は同期し、前記第2スライダバーは、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を制御し、
前記ディスプレイの第3領域において前記第3カメラフィードセグメント及び前記第2スライダの第1コピーを表示し、
前記ディスプレイの第4領域において前記第4カメラフィードセグメント及び前記第2スライダの第2コピーを表示し、
前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を調整ために、前記第2スライダの前記第1コピー及び前記第2スライダの前記第2コピーのうちの少なくとも一方から第2命令を受け取り、
前記第2命令を受け取ることに応答して、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を調整する
よう更に構成される、
付記41に記載の装置。
前記プロセッサは、
前記第1カメラフィードセグメントが第1時点での前記第1人物を表すことを決定し、
前記第1カメラフィードセグメントが前記第1時点での前記第1人物を表すとの決定に応答して、
共通するスライダバーが前記第1時点に到達したことを決定し、
前記共通スライダバーが前記第1時点に到達したとの決定に応答して、前記第1カメラフィードセグメントを強調表示する
よう更に構成される、
付記41に記載の装置。
共通するスライダバーは、該共通するスライダバー上で第1時点に位置しているマーカを有し、該マーカは、前記第1時点で起こるイベントに関連し、該イベントは、前記第1人物が前記実店舗内のラックにあるシェルフからアイテムを選択することに関連する、
付記41に記載の装置。
前記アイテムは、アイテム識別番号を割り当てられ、
前記シェルフは、シェルフ識別番号を割り当てられ、
前記ラックは、ラック識別番号を割り当てられ、
前記マーカは、前記アイテム識別番号、前記シェルフ識別番号、及び前記ラック識別番号を含むメタデータを有する、
付記44に記載の装置。
前記第1ビデオフィードは、前記実店舗に置かれており、前記ラックに向けられている第3カメラに対応する第3カメラフィードを更に有し、
前記第1ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記第3カメラフィードの記録に対応する第3カメラフィードセグメントを更に有し、
前記プロセッサは、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記マーカに到達したことを決定し、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記マーカに到達したとの決定に応答して、
前記マーカの前記メタデータに基づいて、前記第1人物が前記実店舗内の前記ラックにある前記シェルフから前記アイテムを選択することに関連した前記イベントが起きたことを決定し、
前記イベントが起きたとの決定に応答して、前記ディスプレイの第3領域において前記第3カメラフィードセグメントを表示する
よう更に構成される、
請求項45に記載の装置。
前記開始タイムスタンプと前記終了タイムスタンプとの間の前記時間インターバルは、所定の長さを有し、
前記プロセッサは、
前記第1人物に割り当てられ、前記終了タイムスタンプと新しい終了タイムスタンプとの間の第2時間インターバル中に起こる前記実店舗における前記第1人物の前記ショッピングセッションの部分を捕捉する第2ビデオセグメントを前記メモリに保存し、前記第2ビデオセグメントは、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第1カメラフィードの記録に対応する新しい第1カメラフィードセグメントと、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第2カメラフィードの記録に対応する新しい第2カメラフィードセグメントと
を含み、
第2スライダバーを前記第2ビデオセグメントに割り当て、前記新しい第1カメラフィードセグメント及び前記新しい第2カメラフィードセグメントの再生は同期し、前記第2スライダバーは、前記新しい第1カメラフィードセグメント及び前記新しい第2カメラフィードセグメントの再生進行を制御し、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したことを決定し、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したとの決定に応答して、
前記ディスプレイの前記第1領域において前記新しい第1カメラフィードセグメント及び前記第2スライダの第1コピーを表示し、
前記ディスプレイの前記第2領域において前記新しい第2カメラフィードセグメント及び前記第2スライダの第2コピーを表示する
よう更に構成される、
付記41に記載の装置。
実店舗に置かれており、前記実店舗内の第1位置に向けられている第1カメラに対応する第1カメラフィードと、前記実店舗に置かれており、前記実店舗内の第2位置に向けられている第2カメラに対応する第2カメラフィードと含む第1ビデオフィードを受け取ることと、
第1人物に割り当てられ、開始タイムスタンプと終了タイムスタンプとの間の時間インターバル中に起こる前記実店舗における前記第1人物のショッピングセッションの部分を捕捉する第1ビデオセグメントを前記メモリに保存することであり、前記第1ビデオセグメントは、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第1カメラフィードの記録に対応する第1カメラフィードセグメントと、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第2カメラフィードの記録に対応する第2カメラフィードセグメントと
を含む、ことと、
第1スライダバーを前記第1ビデオセグメントに割り当てることであり、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生は同期し、前記第1スライダバーは、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を制御する、ことと、
前記ディスプレイの第1領域において前記第1カメラフィードセグメント及び前記第1スライダの第1コピーを表示することと、
前記ディスプレイの第2領域において前記第2カメラフィードセグメント及び前記第1スライダの第2コピーを表示することと、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を調整ために、前記第1スライダの前記第1コピー及び前記第1スライダの前記第2コピーのうちの少なくとも一方から命令を受け取ることと、
前記命令を受け取ることに応答して、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を調整することと
を有する方法。
第2人物に割り当てられ、第2開始タイムスタンプと第2終了タイムスタンプとの間の第2時間インターバル中に起こる前記実店舗における前記第2人物のショッピングセッションの部分を捕捉する第2ビデオセグメントを前記メモリに保存することであり、前記第2開始タイムスタンプは前記開始スタンプよりも遅く、前記終了タイムスタンプよりも早く、前記第2ビデオセグメントは、
前記第2開始タイムスタンプから前記第2終了タイムスタンプまでの前記第1カメラフィードの記録に対応する第3カメラフィードセグメントと、
前記第2開始タイムスタンプから前記第2終了タイムスタンプまでの前記第2カメラフィードの記録に対応する第4カメラフィードセグメントと
を含む、ことと、
前記第1スライダバーから独立している第2スライダバーを前記第2ビデオセグメントに割り当てることであり、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生は同期し、前記第2スライダバーは、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を制御する、ことと、
前記ディスプレイの第3領域において前記第3カメラフィードセグメント及び前記第2スライダの第1コピーを表示することと、
前記ディスプレイの第4領域において前記第4カメラフィードセグメント及び前記第2スライダの第2コピーを表示することと、
前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を調整ために、前記第2スライダの前記第1コピー及び前記第2スライダの前記第2コピーのうちの少なくとも一方から第2命令を受け取ることと、
前記第2命令を受け取ることに応答して、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を調整することと
を更に有する、付記48に記載の方法。
前記第1カメラフィードセグメントが第1時点での前記第1人物を表すことを決定することと、
前記第1カメラフィードセグメントが前記第1時点での前記第1人物を表すとの決定に応答して、
共通するスライダバーが前記第1時点に到達したことを決定することと、
前記共通スライダバーが前記第1時点に到達したとの決定に応答して、前記第1カメラフィードセグメントを強調表示することと
を更に有する、請求項48に記載の方法。
共通するスライダバーは、該共通するスライダバー上で第1時点に位置しているマーカを有し、該マーカは、前記第1時点で起こるイベントに関連し、該イベントは、前記第1人物が前記実店舗内のラックにあるシェルフからアイテムを選択することに関連する、
付記48に記載の方法。
前記アイテムは、アイテム識別番号を割り当てられ、
前記シェルフは、シェルフ識別番号を割り当てられ、
前記ラックは、ラック識別番号を割り当てられ、
前記マーカは、前記アイテム識別番号、前記シェルフ識別番号、及び前記ラック識別番号を含むメタデータを有する、
付記51に記載の方法。
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記マーカに到達したことを決定することと、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記マーカに到達したとの決定に応答して、
前記マーカの前記メタデータに基づいて、前記第1人物が前記実店舗内の前記ラックにある前記シェルフから前記アイテムを選択することに関連した前記イベントが起きたことを決定することと、
前記イベントが起きたとの決定に応答して、前記ディスプレイの第3領域において第3カメラフィードセグメントを表示することと
を更に有し、
前記第1ビデオフィードは、前記実店舗に置かれており、前記ラックに向けられている第3カメラに対応する第3カメラフィードを更に有し、
前記第1ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記第3カメラフィードの記録に対応する前記第3カメラフィードセグメントを更に有する、
請求項52に記載の方法。
前記第1人物に割り当てられ、前記終了タイムスタンプと新しい終了タイムスタンプとの間の第2時間インターバル中に起こる前記実店舗における前記第1人物の前記ショッピングセッションの部分を捕捉する第2ビデオセグメントを前記メモリに保存することであり、前記第2ビデオセグメントは、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第1カメラフィードの記録に対応する新しい第1カメラフィードセグメントと、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第2カメラフィードの記録に対応する新しい第2カメラフィードセグメントと
を含む、ことと、
第2スライダバーを前記第2ビデオセグメントに割り当てることであり、前記新しい第1カメラフィードセグメント及び前記新しい第2カメラフィードセグメントの再生は同期し、前記第2スライダバーは、前記新しい第1カメラフィードセグメント及び前記新しい第2カメラフィードセグメントの再生進行を制御する、ことと、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したことを決定することと、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したとの決定に応答して、
前記ディスプレイの前記第1領域において前記新しい第1カメラフィードセグメント及び前記第2スライダの第1コピーを表示することと、
前記ディスプレイの前記第2領域において前記新しい第2カメラフィードセグメント及び前記第2スライダの第2コピーを表示することと
を更に有する、付記48に記載の方法。
実店舗に置かれており、前記実店舗内の第1位置に向けられている第1カメラに対応する第1カメラフィードと、前記実店舗に置かれており、前記実店舗内の第2位置に向けられている第2カメラに対応する第2カメラフィードと含む第1ビデオフィードを受け取るよう動作するインターフェースと、
表示要素と、
記憶要素と、
前記記憶要素及び前記表示要素へ通信可能に結合される処理要素と
を有し、
前記処理要素は、
第1人物に割り当てられ、開始タイムスタンプと終了タイムスタンプとの間の時間インターバル中に起こる前記実店舗における前記第1人物のショッピングセッションの部分を捕捉する第1ビデオセグメントを前記記憶要素に保存し、前記第1ビデオセグメントは、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第1カメラフィードの記録に対応する第1カメラフィードセグメントと、
前記開始タイムスタンプから前記終了タイムスタンプまでの前記第2カメラフィードの記録に対応する第2カメラフィードセグメントと
を含み、
第1スライダバーを前記第1ビデオセグメントに割り当て、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生は同期し、前記第1スライダバーは、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を制御し、
前記表示要素の第1領域において前記第1カメラフィードセグメント及び前記第1スライダの第1コピーを表示し、
前記表示要素の第2領域において前記第2カメラフィードセグメント及び前記第1スライダの第2コピーを表示し、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を調整ために、前記第1スライダの前記第1コピー及び前記第1スライダの前記第2コピーのうちの少なくとも一方から命令を受け取り、
前記命令を受け取ることに応答して、前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行を調整し、
前記第1人物に割り当てられ、前記終了タイムスタンプと新しい終了タイムスタンプとの間の第2時間インターバル中に起こる前記実店舗における前記第1人物の前記ショッピングセッションの部分を捕捉する第2ビデオセグメントを前記記憶要素に保存し、前記第2ビデオセグメントは、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第1カメラフィードの記録に対応する新しい第1カメラフィードセグメントと、
前記終了タイムスタンプから前記新しい終了タイムスタンプまでの前記第2カメラフィードの記録に対応する新しい第2カメラフィードセグメントと
を含み、
第2スライダバーを前記第2ビデオセグメントに割り当て、前記新しい第1カメラフィードセグメント及び前記新しい第2カメラフィードセグメントの再生は同期し、前記第2スライダバーは、前記新しい第1カメラフィードセグメント及び前記新しい第2カメラフィードセグメントの再生進行を制御し、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したことを決定し、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記終了タイムスタンプに到達したとの決定に応答して、
前記表示要素の前記第1領域において前記新しい第1カメラフィードセグメント及び前記第2スライダの第1コピーを表示し、
前記表示要素の前記第2領域において前記新しい第2カメラフィードセグメント及び前記第2スライダの第2コピーを表示する
よう動作する、
システム。
前記処理要素は、
第2人物に割り当てられ、第2開始タイムスタンプと第2終了タイムスタンプとの間の第2時間インターバル中に起こる前記実店舗における前記第2人物のショッピングセッションの部分を捕捉する第2ビデオセグメントを前記記憶要素に保存し、前記第2開始タイムスタンプは前記開始スタンプよりも遅く、前記終了タイムスタンプよりも早く、前記第2ビデオセグメントは、
前記第2開始タイムスタンプから前記第2終了タイムスタンプまでの前記第1カメラフィードの記録に対応する第3カメラフィードセグメントと、
前記第2開始タイムスタンプから前記第2終了タイムスタンプまでの前記第2カメラフィードの記録に対応する第4カメラフィードセグメントと
を含み、
前記第1スライダバーから独立している第2スライダバーを前記第2ビデオセグメントに割り当て、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生は同期し、前記第2スライダバーは、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を制御し、
前記表示要素の第3領域において前記第3カメラフィードセグメント及び前記第2スライダの第1コピーを表示し、
前記表示要素の第4領域において前記第4カメラフィードセグメント及び前記第2スライダの第2コピーを表示し、
前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を調整ために、前記第2スライダの前記第1コピー及び前記第2スライダの前記第2コピーのうちの少なくとも一方から第2命令を受け取り、
前記第2命令を受け取ることに応答して、前記第3カメラフィードセグメント及び前記第4カメラフィードセグメントの再生進行を調整する
よう更に動作する、
付記55に記載のシステム。
前記処理要素は、
前記第1カメラフィードセグメントが第1時点での前記第1人物を表すことを決定し、
前記第1カメラフィードセグメントが前記第1時点での前記第1人物を表すとの決定に応答して、
共通するスライダバーが前記第1時点に到達したことを決定し、
前記共通スライダバーが前記第1時点に到達したとの決定に応答して、前記第1カメラフィードセグメントを強調表示する
よう更に動作する、
付記55に記載のシステム。
共通するスライダバーは、該共通するスライダバー上で第1時点に位置しているマーカを有し、該マーカは、前記第1時点で起こるイベントに関連し、該イベントは、前記第1人物が前記実店舗内のラックにあるシェルフからアイテムを選択することに関連する、
付記55に記載のシステム。
前記アイテムは、アイテム識別番号を割り当てられ、
前記シェルフは、シェルフ識別番号を割り当てられ、
前記ラックは、ラック識別番号を割り当てられ、
前記マーカは、前記アイテム識別番号、前記シェルフ識別番号、及び前記ラック識別番号を含むメタデータを有する、
付記58に記載のシステム。
前記第1ビデオフィードは、前記実店舗に置かれており、前記ラックに向けられている第3カメラに対応する第3カメラフィードを更に有し、
前記第1ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記第3カメラフィードの記録に対応する第3カメラフィードセグメントを更に有し、
前記処理要素は、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記マーカに到達したことを決定し、
前記第1カメラフィードセグメント及び前記第2カメラフィードセグメントの再生進行が前記マーカに到達したとの決定に応答して、
前記マーカの前記メタデータに基づいて、前記第1人物が前記実店舗内の前記ラックにある前記シェルフから前記アイテムを選択することに関連した前記イベントが起きたことを決定し、
前記イベントが起きたとの決定に応答して、前記表示要素の第3領域において前記第3カメラフィードセグメントを表示する
よう更に動作する、
請求項59に記載のシステム。
ディスプレイと、
実店舗に置かれており、前記実店舗に置かれている物理ラックの組の中の第1物理ラックに向けられているラックカメラからラックカメラフィードを受け取るよう構成されるインターフェースと、
前記ディスプレイへ通信可能に結合されるハードウェアプロセッサと
を有し、前記ハードウェアプロセッサは、
前記ディスプレイの第1領域において、仮想店舗の仮想レイアウトを表示し、前記仮想レイアウトは、前記実店舗の物理レイアウトをエミュレートするよう構成され、前記仮想レイアウトは、前記第1物理ラックに割り当てられている第1仮想ラックと、第2物理ラックに割り当てられている第2仮想ラックとを含み、前記仮想レイアウトにおける前記第1仮想ラック及び前記第2仮想ラックの配置は、前記実店舗における前記第1物理ラック及び前記第2物理ラックの配置をエミュレートするよう構成され、
前記第1物理ラックに関連したイベントの指示を受け取り、前記イベントは、前記実店舗にいる人が前記第1物理ラックと関係を持っていることを含み、
前記第1物理ラックに関連した前記イベントの前記指示を受け取ることに応答して、
前記ディスプレイの第2領域において、前記第1仮想ラックを表示し、前記第1仮想ラックは、第1仮想シェルフ及び第2仮想シェルフを含み、前記第1仮想シェルフは第1仮想アイテムを含み、前記第2仮想シェルフは第2仮想アイテムを含み、前記第1仮想アイテムは、前記第1物理ラックの第1物理シェルフにある第1物理アイテムのグラフィカル表現を含み、前記第2仮想アイテムは、前記第1物理ラックの第2物理シェルフにある第2物理アイテムのグラフィカル表現を含み、
前記ディスプレイの第3領域において、開始タイムスタンプから終了タイムスタンプまでの前記ラックカメラフィードの記録に対応するラックビデオセグメントを表示し、前記ラックビデオセグメントは、前記第1物理ラックに関連した前記イベントを表す
よう構成される、
装置。
前記インターフェースは、前記実店舗に置かれている第2ラックカメラから第2ラックカメラフィードを受信するよう更に構成され、前記第2ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第2物理ラックに向けられており、
前記プロセッサは、
前記第2物理ラックに関連した第2イベントの指示を受け取り、前記第2イベントは、前記人が前記第2物理ラックと関係を持っていることを有し、
前記第2物理ラックに関連した前記第2イベントの前記指示を受け取ることに応答して、
前記ディスプレイの前記第2領域において、前記第2仮想ラックを表示し、前記第2仮想ラックは、第3仮想シェルフ及び第4仮想シェルフを含み、前記第3仮想シェルフは第3仮想アイテムを含み、前記第4仮想シェルフは第4仮想アイテムを含み、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフにある第3物理アイテムのグラフィカル表現を含み、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフにある第4物理アイテムのグラフィカル表現を含み、
前記ディスプレイの前記第3領域において、第2開始タイムスタンプから第2終了タイムスタンプまでの前記第2ラックカメラフィードの記録に対応する第2ラックビデオセグメントを表示し、前記第2ラックビデオセグメントは、前記第2物理ラックに関連した前記第2イベントを表す
よう更に構成される、
付記61に記載の装置。
前記第1物理ラックに関連した前記イベントは、前記第1物理アイテムが前記第1物理ラックの前記第1物理シェルフの第1ゾーンから選択されることを有し、前記第1物理シェルフの前記第1ゾーンへ結合されている重量センサは、前記第1物理アイテムが前記第1物理シェルフから選択されることを検出するよう構成され、
前記イベントの前記指示は、前記重量センサから受け取られた情報を含む、
付記61に記載の装置。
前記第1仮想ラックを表示することに応答して、前記プロセッサは、前記第1仮想シェルフ上の前記第1仮想アイテムを強調表示するよう更に構成される、
付記63に記載の装置。
前記インターフェースは、前記実店舗に置かれている第1カメラに対応するビデオフィードを受け取るよう更に構成され、
前記プロセッサは、
第1人物に割り当てられ、前記実店舗における前記第1人物のショッピングセッションの部分を捕捉する第1ビデオセグメントをメモリに記憶し、前記第1ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記ビデオフィードの記録に対応し、
スライダバーを前記第1ビデオセグメントに割り当て、前記スライダバーは、前記第1ビデオセグメントの再生進行を制御し、前記イベントは第1時点で起こり、前記スライダバーは、該スライダバー上で前記第1時点に位置しているマーカを有し、該マーカは、前記第1時点で起こる前記イベントに関連し、前記マーカは、前記第1仮想アイテムに割り当てられているアイテム識別番号と、前記第1仮想ラックに割り当てられているラック識別番号と、前記第1仮想ラックのゾーンに割り当てられているゾーン識別番号とを有し、前記イベントの前記指示は、前記第1ビデオセグメントの再生進行が前記マーカに到達したことを含み、
前記第1仮想ラックを表示することに応答して、前記メタデータに基づいて、前記第1仮想ラック上の前記第1仮想アイテムを強調表示する
よう更に構成される、
付記61に記載の装置。
前記スライダバーは、該スライダバー上で第2時点に位置している第2マーカを有し、前記第2マーカは、前記第2時点で起こる第2イベントに関連し、前記第2イベントは、前記第2物理ラックに関連し、前記第2マーカは、第3仮想アイテムに割り当てられている第2アイテム識別番号と、前記第2仮想ラックに割り当てられている第2ラック識別番号と、前記第2仮想ラックの第2ゾーンに割り当てられている第2ゾーン識別番号とを含む第2メタデータを有し、
前記プロセッサは、
前記第1ビデオセグメントの再生進行が前記第2マーカに到達したことを決定し、
前記第1ビデオセグメントの再生進行が前記第2マーカに到達したとの決定に応答して、
前記ディスプレイの前記第2領域において、前記第2仮想ラックを表示し、前記第2仮想ラックは、第3仮想シェルフ及び第4仮想シェルフを有し、前記第3仮想シェルフは第3仮想アイテムを有し、前記第4仮想シェルフは第4仮想アイテムを有し、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフに置かれている第3物理アイテムのグラフィカル表現を有し、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフに置かれている第4物理アイテムのグラフィカル表現を有し、
前記第2メタデータに基づいて、前記第2仮想ラック上の前記第3仮想アイテムを強調表示する
よう更に構成される、
付記65に記載の装置。
前記第1物理ラックに関連した前記イベントの前記指示は、前記実店舗内に設置されているセンサから受け取られた入力の組に基づいて、前記イベントの検出に応答してアルゴリズムによって生成された情報を含む、
付記61に記載の装置。
実店舗に置かれており、前記実店舗に置かれている物理ラックの組の中の第1物理ラックに向けられているラックカメラからラックカメラフィードを受け取ることと、
前記ディスプレイの第1領域において、仮想店舗の仮想レイアウトを表示することであり、前記仮想レイアウトは、前記実店舗の物理レイアウトをエミュレートするよう構成され、前記仮想レイアウトは、前記第1物理ラックに割り当てられている第1仮想ラックと、第2物理ラックに割り当てられている第2仮想ラックとを含み、前記仮想レイアウトにおける前記第1仮想ラック及び前記第2仮想ラックの配置は、前記実店舗における前記第1物理ラック及び前記第2物理ラックの配置をエミュレートするよう構成される、ことと、
前記第1物理ラックに関連したイベントの指示を受け取ることであり、前記イベントは、前記実店舗にいる人が前記第1物理ラックと関係を持っていることを含む、ことと、
前記第1物理ラックに関連した前記イベントの前記指示を受け取ることに応答して、
前記ディスプレイの第2領域において、前記第1仮想ラックを表示することであり、前記第1仮想ラックは、第1仮想シェルフ及び第2仮想シェルフを含み、前記第1仮想シェルフは第1仮想アイテムを含み、前記第2仮想シェルフは第2仮想アイテムを含み、前記第1仮想アイテムは、前記第1物理ラックの第1物理シェルフにある第1物理アイテムのグラフィカル表現を含み、前記第2仮想アイテムは、前記第1物理ラックの第2物理シェルフにある第2物理アイテムのグラフィカル表現を含む、ことと、
前記ディスプレイの第3領域において、開始タイムスタンプから終了タイムスタンプまでの前記ラックカメラフィードの記録に対応するラックビデオセグメントを表示することであり、前記ラックビデオセグメントは、前記第1物理ラックに関連した前記イベントを表す、ことと
を有する方法。
前記実店舗に置かれている第2ラックカメラから第2ラックカメラフィードを受信することであり、前記第2ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第2物理ラックに向けられている、ことと、
前記第2物理ラックに関連した第2イベントの指示を受け取ることであり、前記第2イベントは、前記人が前記第2物理ラックと関係を持っていることを有する、ことと、
前記第2物理ラックに関連した前記第2イベントの前記指示を受け取ることに応答して、
前記ディスプレイの前記第2領域において、前記第2仮想ラックを表示することであり、前記第2仮想ラックは、第3仮想シェルフ及び第4仮想シェルフを含み、前記第3仮想シェルフは第3仮想アイテムを含み、前記第4仮想シェルフは第4仮想アイテムを含み、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフにある第3物理アイテムのグラフィカル表現を含み、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフにある第4物理アイテムのグラフィカル表現を含む、ことと、
前記ディスプレイの前記第3領域において、第2開始タイムスタンプから第2終了タイムスタンプまでの前記第2ラックカメラフィードの記録に対応する第2ラックビデオセグメントを表示することであり、前記第2ラックビデオセグメントは、前記第2物理ラックに関連した前記第2イベントを表す、ことと
を更に有する、付記68に記載の方法。
前記第1物理ラックに関連した前記イベントは、前記第1物理アイテムが前記第1物理ラックの前記第1物理シェルフの第1ゾーンから選択されることを有し、前記第1物理シェルフの前記第1ゾーンへ結合されている重量センサは、前記第1物理アイテムが前記第1物理シェルフから選択されることを検出するよう構成され、
前記イベントの前記指示は、前記重量センサから受け取られた情報を含む、
付記68に記載の方法。
前記第1仮想ラックを表示することに応答して、前記第1仮想シェルフ上の前記第1仮想アイテムを強調表示することを更に有する、
付記70に記載の方法。
前記実店舗に置かれている第1カメラに対応するビデオフィードを受け取ることと、
第1人物に割り当てられ、前記実店舗における前記第1人物のショッピングセッションの部分を捕捉する第1ビデオセグメントを記憶することであり、前記第1ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記ビデオフィードの記録に対応する、ことと、
スライダバーを前記第1ビデオセグメントに割り当てることであり、前記スライダバーは、前記第1ビデオセグメントの再生進行を制御し、前記イベントは第1時点で起こり、前記スライダバーは、該スライダバー上で前記第1時点に位置しているマーカを有し、該マーカは、前記第1時点で起こる前記イベントに関連し、前記マーカは、前記第1仮想アイテムに割り当てられているアイテム識別番号と、前記第1仮想ラックに割り当てられているラック識別番号と、前記第1仮想ラックのゾーンに割り当てられているゾーン識別番号とを有し、前記イベントの前記指示は、前記第1ビデオセグメントの再生進行が前記マーカに到達したことを含む、ことと、
前記第1仮想ラックを表示することに応答して、前記メタデータに基づいて、前記第1仮想ラック上の前記第1仮想アイテムを強調表示することと
を更に有する、付記68に記載の方法。
前記第1ビデオセグメントの再生進行が第2マーカに到達したことを決定することであり、前記スライダバーは、該スライダバー上で第2時点に位置している前記第2マーカを有し、前記第2マーカは、前記第2時点で起こる第2イベントに関連し、前記第2イベントは、前記第2物理ラックに関連し、前記第2マーカは、第3仮想アイテムに割り当てられている第2アイテム識別番号と、前記第2仮想ラックに割り当てられている第2ラック識別番号と、前記第2仮想ラックの第2ゾーンに割り当てられている第2ゾーン識別番号とを含む第2メタデータを有する、ことと、
前記第1ビデオセグメントの再生進行が前記第2マーカに到達したとの決定に応答して、
前記ディスプレイの前記第2領域において、前記第2仮想ラックを表示することであり、前記第2仮想ラックは、第3仮想シェルフ及び第4仮想シェルフを有し、前記第3仮想シェルフは第3仮想アイテムを有し、前記第4仮想シェルフは第4仮想アイテムを有し、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフに置かれている第3物理アイテムのグラフィカル表現を有し、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフに置かれている第4物理アイテムのグラフィカル表現を有する、ことと、
前記第2メタデータに基づいて、前記第2仮想ラック上の前記第3仮想アイテムを強調表示することと
を更に有する、付記72に記載の方法。
前記第1物理ラックに関連した前記イベントの前記指示は、前記実店舗内に設置されているセンサから受け取られた入力の組に基づいて、前記イベントの検出に応答してアルゴリズムによって生成された情報を含む、
付記68に記載の方法。
表示要素と、
実店舗に置かれており、前記実店舗に置かれている物理ラックの組の中の第1物理ラックに向けられているラックカメラからラックカメラフィードを受け取るよう、かつ、前記実店舗に置かれており、前記実店舗に置かれている前記物理ラックの組の中の第2物理ラックに向けられている第2ラックカメラから第2ラックカメラフィードを受け取るよう動作するインターフェースと、
前記表示要素へ通信可能に結合される処理要素と
を有し、前記処理要素は、
前記表示要素の第1領域において、仮想店舗の仮想レイアウトを表示し、前記仮想レイアウトは、前記実店舗の物理レイアウトをエミュレートするよう構成され、前記仮想レイアウトは、前記第1物理ラックに割り当てられている第1仮想ラックと、第2物理ラックに割り当てられている第2仮想ラックとを含み、前記仮想レイアウトにおける前記第1仮想ラック及び前記第2仮想ラックの配置は、前記実店舗における前記第1物理ラック及び前記第2物理ラックの配置をエミュレートするよう構成され、
前記第1物理ラックに関連したイベントの指示を受け取り、前記イベントは、前記実店舗にいる人が前記第1物理ラックと関係を持っていることを含み、
前記第1物理ラックに関連した前記イベントの前記指示を受け取ることに応答して、
前記表示要素の第2領域において、前記第1仮想ラックを表示し、前記第1仮想ラックは、第1仮想シェルフ及び第2仮想シェルフを含み、前記第1仮想シェルフは第1仮想アイテムを含み、前記第2仮想シェルフは第2仮想アイテムを含み、前記第1仮想アイテムは、前記第1物理ラックの第1物理シェルフにある第1物理アイテムのグラフィカル表現を含み、前記第2仮想アイテムは、前記第1物理ラックの第2物理シェルフにある第2物理アイテムのグラフィカル表現を含み、
前記表示要素の第3領域において、開始タイムスタンプから終了タイムスタンプまでの前記ラックカメラフィードの記録に対応するラックビデオセグメントを表示し、前記ラックビデオセグメントは、前記第1物理ラックに関連した前記イベントを表し、
前記第2物理ラックに関連した第2イベントの指示を受け取り、前記第2イベントは、前記人が前記第2物理ラックと関係を持っていることを有し、
前記第2物理ラックに関連した前記第2イベントの前記指示を受け取ることに応答して、
前記表示要素の前記第2領域において、前記第2仮想ラックを表示し、前記第2仮想ラックは、第3仮想シェルフ及び第4仮想シェルフを含み、前記第3仮想シェルフは第3仮想アイテムを含み、前記第4仮想シェルフは第4仮想アイテムを含み、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフにある第3物理アイテムのグラフィカル表現を含み、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフにある第4物理アイテムのグラフィカル表現を含み、
前記表示要素の前記第3領域において、第2開始タイムスタンプから第2終了タイムスタンプまでの前記第2ラックカメラフィードの記録に対応する第2ラックビデオセグメントを表示し、前記第2ラックビデオセグメントは、前記第2物理ラックに関連した前記第2イベントを表す
よう動作する、
システム。
前記第1物理ラックに関連した前記イベントは、前記第1物理アイテムが前記第1物理ラックの前記第1物理シェルフの第1ゾーンから選択されることを有し、前記第1物理シェルフの前記第1ゾーンへ結合されている重量センサは、前記第1物理アイテムが前記第1物理シェルフから選択されることを検出するよう構成され、
前記イベントの前記指示は、前記重量センサから受け取られた情報を含む、
付記75に記載のシステム。
前記第1仮想ラックを表示することに応答して、前記処理要素は、前記第1仮想シェルフ上の前記第1仮想アイテムを強調表示するよう更に動作する、
付記76に記載のシステム。
前記インターフェースは、前記実店舗に置かれている第1カメラに対応するビデオフィードを受け取るよう更に動作し、
前記処理要素は、
第1人物に割り当てられ、前記実店舗における前記第1人物のショッピングセッションの部分を捕捉する第1ビデオセグメントを記憶要素に記憶し、前記第1ビデオセグメントは、前記開始タイムスタンプから前記終了タイムスタンプまでの前記ビデオフィードの記録に対応し、
スライダバーを前記第1ビデオセグメントに割り当て、前記スライダバーは、前記第1ビデオセグメントの再生進行を制御し、前記イベントは第1時点で起こり、前記スライダバーは、該スライダバー上で前記第1時点に位置しているマーカを有し、該マーカは、前記第1時点で起こる前記イベントに関連し、前記マーカは、前記第1仮想アイテムに割り当てられているアイテム識別番号と、前記第1仮想ラックに割り当てられているラック識別番号と、前記第1仮想ラックのゾーンに割り当てられているゾーン識別番号とを有し、前記イベントの前記指示は、前記第1ビデオセグメントの再生進行が前記マーカに到達したことを含み、
前記第1仮想ラックを表示することに応答して、前記メタデータに基づいて、前記第1仮想ラック上の前記第1仮想アイテムを強調表示する
よう更に動作する、
付記75に記載のシステム。
前記スライダバーは、該スライダバー上で第2時点に位置している第2マーカを有し、前記第2マーカは、前記第2時点で起こる第2イベントに関連し、前記第2イベントは、前記第2物理ラックに関連し、前記第2マーカは、第3仮想アイテムに割り当てられている第2アイテム識別番号と、前記第2仮想ラックに割り当てられている第2ラック識別番号と、前記第2仮想ラックの第2ゾーンに割り当てられている第2ゾーン識別番号とを含む第2メタデータを有し、
前記処理要素は、
前記第1ビデオセグメントの再生進行が前記第2マーカに到達したことを決定し、
前記第1ビデオセグメントの再生進行が前記第2マーカに到達したとの決定に応答して、
前記表示要素の前記第2領域において、前記第2仮想ラックを表示し、前記第2仮想ラックは、第3仮想シェルフ及び第4仮想シェルフを有し、前記第3仮想シェルフは第3仮想アイテムを有し、前記第4仮想シェルフは第4仮想アイテムを有し、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフに置かれている第3物理アイテムのグラフィカル表現を有し、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフに置かれている第4物理アイテムのグラフィカル表現を有し、
前記第2メタデータに基づいて、前記第2仮想ラック上の前記第3仮想アイテムを強調表示する
よう更に動作する、
付記78に記載のシステム。
前記第1物理ラックに関連した前記イベントの前記指示は、前記実店舗内に設置されているセンサから受け取られた入力の組に基づいて、前記イベントの検出に応答してアルゴリズムによって生成された情報を含む、
付記75に記載のシステム。
Claims (20)
- ディスプレイと、
実店舗に置かれているラックカメラからラック映像を受信するよう構成されるインターフェースであり、前記ラックカメラは、前記実店舗に置かれている物理ラックの組の中の第1物理ラックに向けられており、前記ラックカメラは、前記実店舗における人のショッピングセッション中に前記第1物理ラックの映像を捕捉するよう構成される、前記インターフェースと、
前記ディスプレイへ通信可能に結合されるハードウェアプロセッサと
を有し、
前記ハードウェアプロセッサは、
前記ディスプレイの第1領域で、前記第1物理ラックをエミュレートするよう構成される第1仮想ラックを表示し、前記第1仮想ラックは第1仮想シェルフ及び第2仮想シェルフを有し、前記第1仮想シェルフは第1仮想アイテムを有し、前記第2仮想シェルフは第2仮想アイテムを有し、前記第1仮想アイテムは、前記第1物理ラックの第1物理シェルフに置かれている第1物理アイテムのグラフィカル表現を有し、前記第2仮想アイテムは、前記第1物理ラックの第2物理シェルフに置かれている第2物理アイテムのグラフィカル表現を有し、
前記ディスプレイの第2領域で、前記ラック映像を表示し、前記ラック映像は、前記人が前記第1物理ラックと関係を持つことを含むイベントを表し、
前記ディスプレイの第3領域で、仮想ショッピングカートを表示し、
前記イベントに関連した情報を受信し、該情報は前記第1仮想アイテムを特定し、前記ラック映像は、前記人が前記第1物理ラックと関係を持っているときに前記第1物理アイテムを選択したことを表し、
前記イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第1仮想アイテムを格納する
よう構成される、装置。 - 前記インターフェースは、前記実店舗に置かれている第2ラックカメラから第2ラック映像を受信するよう更に構成され、
前記第2ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第2物理ラックに向けられており、前記第2ラックカメラは、前記実店舗における前記人の前記ショッピングセッション中に前記第2物理ラックの映像を捕捉するよう構成され、
前記ハードウェアプロセッサは、
前記ディスプレイの前記第1領域で、前記第2物理ラックをエミュレートするよう構成される第2仮想ラックを表示し、前記第2仮想ラックは第3仮想シェルフ及び第4仮想シェルフを有し、前記第3仮想シェルフは第3仮想アイテムを有し、前記第4仮想シェルフは第4仮想アイテムを有し、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフに置かれている第3物理アイテムのグラフィカル表現を有し、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフに置かれている第4物理アイテムのグラフィカル表現を有し、
前記ディスプレイの前記第2領域で、前記第2ラック映像を表示し、前記第2ラック映像は、前記人が前記第2物理ラックと関係を持つことを含む第2イベントを表し、
前記第2イベントに関連した情報を受信し、該情報は前記第3仮想アイテムを特定し、前記第2ラック映像は、前記人が前記第2物理ラックと関係を持っているときに前記第3物理アイテムを選択したことを表し、
前記第2イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第3仮想アイテムを格納する
よう更に構成される、
請求項1に記載の装置。 - 前記ハードウェアプロセッサは、
前記ショッピングセッションが終了したことを決定し、
前記ショッピングセッションが終了したとの決定に応答して、
前記仮想ショッピングカートを、前記ショッピングセッション中に選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較し、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力の組に基づき決定され、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致することを決定し、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致するとの決定に応答して、
前記第1仮想アイテムに割り当てられている第1価格と、前記第3仮想アイテムに割り当てられている第2価格とを含む領収書を生成し、
前記領収書を前記人へ送る
よう更に構成される、
請求項2に記載の装置。 - 前記センサは、
前記ラックカメラとは異なるアルゴリズムカメラのアレイと、
重みセンサの組と
を有し、
前記ショッピングセッション中に選択されたと前記アルゴリズムによって決定された前記アイテムのうちの各アイテムは、前記重みセンサの組の中の重みセンサへ結合される、
請求項3に記載の装置。 - 前記アルゴリズム的ショッピングカートがエラーを有するとの決定に応答して、前記ハードウェアプロセッサは、
前記入力の組の中から前記エラーに関連したサブセットを決定し、該サブセットは、前記アルゴリズムカメラのアレイから受信された入力を含み、
不一致を説明するメタデータを前記サブセットに付加し、
前記サブセットを使用して前記アルゴリズムを訓練する
よう更に構成される、
請求項4に記載の装置。 - 前記ハードウェアプロセッサは、
前記ショッピングセッションが終了したことを決定し、
前記ショッピングセッションが終了したとの決定に応答して、
前記仮想ショッピングカートを、前記ショッピングセッション中に前記人によって選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較し、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力に基づき決定され、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないことを決定し、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないとの決定に応答して、
前記アルゴリズム的ショッピングカートがエラーを有することを決定し、
前記アルゴリズム的ショッピングカートがエラーを有するとの決定に応答して、
前記仮想ショッピングカートに基づいて、前記第1仮想アイテムに割り当てられている第1価格と、前記第3仮想アイテムに割り当てられている第2価格とを含む領収書を生成し、
前記領収書を前記人へ送る
よう更に構成される、
請求項2に記載の装置。 - 前記ハードウェアプロセッサは、
前記ショッピングセッションが終了したことを決定し、
前記ショッピングセッションが終了したとの決定に応答して、
前記仮想ショッピングカートを、前記ショッピングセッション中に選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較し、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力に基づき決定され、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないことを決定し、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないとの決定に応答して、
前記仮想ショッピングカートがエラーを有することを決定し、
前記仮想ショッピングカートがエラーを有するとの決定に応答して、
前記アルゴリズム的ショッピングカートに基づいて、前記ショッピングセッション中に前記人によって選択されたと前記アルゴリズムによって決定された前記アイテムの価格を含む領収書を生成し、
前記領収書を前記人へ送る
よう更に構成される、
請求項1に記載の装置。 - 前記イベントに関連した前記情報は、前記第1仮想ラックから前記仮想ショッピングカートへ前記第1仮想アイテムをドラッグ・アンド・ドロップすることに関連した情報を含む、
請求項1に記載の装置。 - 実店舗に置かれているラックカメラからラック映像を受信するステップであり、前記ラックカメラは、前記実店舗に置かれている物理ラックの組の中の第1物理ラックに向けられており、前記ラックカメラは、前記実店舗における人のショッピングセッション中に前記第1物理ラックの映像を捕捉するよう構成される、ステップと、
ディスプレイの第1領域で、前記第1物理ラックをエミュレートするよう構成される第1仮想ラックを表示するステップであり、前記第1仮想ラックは第1仮想シェルフ及び第2仮想シェルフを有し、前記第1仮想シェルフは第1仮想アイテムを有し、前記第2仮想シェルフは第2仮想アイテムを有し、前記第1仮想アイテムは、前記第1物理ラックの第1物理シェルフに置かれている第1物理アイテムのグラフィカル表現を有し、前記第2仮想アイテムは、前記第1物理ラックの第2物理シェルフに置かれている第2物理アイテムのグラフィカル表現を有する、ステップと、
前記ディスプレイの第2領域で、前記ラック映像を表示するステップであり、前記ラック映像は、前記人が前記第1物理ラックと関係を持つことを含むイベントを表す、ステップと、
前記ディスプレイの第3領域で、仮想ショッピングカートを表示するステップと、
前記イベントに関連した情報を受信するステップであり、該情報は前記第1仮想アイテムを特定し、前記ラック映像は、前記人が前記第1物理ラックと関係を持っているときに前記第1物理アイテムを選択したことを表す、ステップと、
前記イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第1仮想アイテムを格納するステップと
を有する方法。 - 前記実店舗に置かれている第2ラックカメラから第2ラック映像を受信するステップであり、前記第2ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第2物理ラックに向けられており、前記第2ラックカメラは、前記実店舗における前記人の前記ショッピングセッション中に前記第2物理ラックの映像を捕捉するよう構成される、ステップと、
前記ディスプレイの前記第1領域で、前記第2物理ラックをエミュレートするよう構成される第2仮想ラックを表示するステップであり、前記第2仮想ラックは第3仮想シェルフ及び第4仮想シェルフを有し、前記第3仮想シェルフは第3仮想アイテムを有し、前記第4仮想シェルフは第4仮想アイテムを有し、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフに置かれている第3物理アイテムのグラフィカル表現を有し、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフに置かれている第4物理アイテムのグラフィカル表現を有する、ステップと、
前記ディスプレイの前記第2領域で、前記第2ラック映像を表示するステップであり、前記第2ラック映像は、前記人が前記第2物理ラックと関係を持つことを含む第2イベントを表す、ステップと、
前記第2イベントに関連した情報を受信するステップであり、該情報は前記第3仮想アイテムを特定し、前記第2ラック映像は、前記人が前記第2物理ラックと関係を持っているときに前記第3物理アイテムを選択したことを表す、ステップと、
前記第2イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第3仮想アイテムを格納するステップと
を更に有する、請求項9に記載の方法。 - 前記ショッピングセッションが終了したことを決定するステップと、
前記ショッピングセッションが終了したとの決定に応答して、
前記仮想ショッピングカートを、前記ショッピングセッション中に選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較するステップであり、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力の組に基づき決定される、ステップと
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致することを決定するステップと、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致するとの決定に応答して、
前記第1仮想アイテムに割り当てられている第1価格と、前記第3仮想アイテムに割り当てられている第2価格とを含む領収書を生成するステップと、
前記領収書を前記人へ送るステップと
を更に有する、請求項10に記載の方法。 - 前記センサは、
前記ラックカメラとは異なるアルゴリズムカメラのアレイと、
重みセンサの組と
を有し、
前記ショッピングセッション中に選択されたと前記アルゴリズムによって決定された前記アイテムのうちの各アイテムは、前記重みセンサの組の中の重みセンサへ結合される、
請求項11に記載の方法。 - 前記アルゴリズム的ショッピングカートがエラーを有するとの決定に応答して、
前記入力の組の中から前記エラーに関連したサブセットを決定するステップであり、該サブセットは、前記アルゴリズムカメラのアレイから受信された入力を含む、ステップと、
不一致を説明するメタデータを前記サブセットに付加するステップと、
前記サブセットを使用して前記アルゴリズムを訓練するステップと
を更に有する、請求項12に記載の方法。 - 前記ショッピングセッションが終了したことを決定するステップと、
前記ショッピングセッションが終了したとの決定に応答して、
前記仮想ショッピングカートを、前記ショッピングセッション中に前記人によって選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較するステップであり、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力に基づき決定される、ステップと、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないことを決定するステップと、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないとの決定に応答して、
前記アルゴリズム的ショッピングカートがエラーを有することを決定するステップと、
前記アルゴリズム的ショッピングカートがエラーを有するとの決定に応答して、
前記仮想ショッピングカートに基づいて、前記第1仮想アイテムに割り当てられている第1価格と、前記第3仮想アイテムに割り当てられている第2価格とを含む領収書を生成するステップと、
前記領収書を前記人へ送るステップと
を更に有する、請求項10に記載の方法。 - 前記ショッピングセッションが終了したことを決定するステップと、
前記ショッピングセッションが終了したとの決定に応答して、
前記仮想ショッピングカートを、前記ショッピングセッション中に選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較するステップであり、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力に基づき決定される、ステップと、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないことを決定するステップと、
前記仮想ショッピングカートが前記アルゴリズム的ショッピングカートと一致しないとの決定に応答して、
前記仮想ショッピングカートがエラーを有することを決定するステップと、
前記仮想ショッピングカートがエラーを有するとの決定に応答して、
前記アルゴリズム的ショッピングカートに基づいて、前記ショッピングセッション中に前記人によって選択されたと前記アルゴリズムによって決定された前記アイテムの価格を含む領収書を生成するステップと、
前記領収書を前記人へ送るステップと
を更に有する、請求項9に記載の方法。 - 前記イベントに関連した前記情報は、前記第1仮想ラックから前記仮想ショッピングカートへ前記第1仮想アイテムをドラッグ・アンド・ドロップすることに関連した情報を含む、
請求項9に記載の方法。 - 表示要素と、
実店舗に置かれているラックカメラからラック映像を受信し、前記ラックカメラは、前記実店舗に置かれている物理ラックの組の中の第1物理ラックに向けられており、前記ラックカメラは、前記実店舗における人のショッピングセッション中に前記第1物理ラックの映像を捕捉するよう構成され、
前記実店舗に置かれている第2ラックカメラから第2ラック映像を受信し、前記第2ラックカメラは、前記実店舗に置かれている前記物理ラックの組の中の第2物理ラックに向けられており、前記第2ラックカメラは、前記実店舗における前記人の前記ショッピングセッション中に前記第2物理ラックの映像を捕捉するよう構成される、よう動作するインターフェースと、
前記表示要素へ通信可能に結合される処理要素と
を有し、
前記処理要素は、
前記表示要素の第1領域で、前記第1物理ラックをエミュレートするよう構成される第1仮想ラックを表示し、前記第1仮想ラックは第1仮想シェルフ及び第2仮想シェルフを有し、前記第1仮想シェルフは第1仮想アイテムを有し、前記第2仮想シェルフは第2仮想アイテムを有し、前記第1仮想アイテムは、前記第1物理ラックの第1物理シェルフに置かれている第1物理アイテムのグラフィカル表現を有し、前記第2仮想アイテムは、前記第1物理ラックの第2物理シェルフに置かれている第2物理アイテムのグラフィカル表現を有し、
前記表示要素の第2領域で、前記ラック映像を表示し、前記ラック映像は、前記人が前記第1物理ラックと関係を持つことを含むイベントを表し、
前記表示要素の第3領域で、仮想ショッピングカートを表示し、
前記イベントに関連した情報を受信し、該情報は前記第1仮想アイテムを特定し、前記ラック映像は、前記人が前記第1物理ラックと関係を持っているときに前記第1物理アイテムを選択したことを表し、
前記イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第1仮想アイテムを格納し、
前記表示要素の前記第1領域で、前記第2物理ラックをエミュレートするよう構成される第2仮想ラックを表示し、前記第2仮想ラックは第3仮想シェルフ及び第4仮想シェルフを有し、前記第3仮想シェルフは第3仮想アイテムを有し、前記第4仮想シェルフは第4仮想アイテムを有し、前記第3仮想アイテムは、前記第2物理ラックの第3物理シェルフに置かれている第3物理アイテムのグラフィカル表現を有し、前記第4仮想アイテムは、前記第2物理ラックの第4物理シェルフに置かれている第4物理アイテムのグラフィカル表現を有し、
前記表示要素の前記第2領域で、前記第2ラック映像を表示し、前記第2ラック映像は、前記人が前記第2物理ラックと関係を持つことを含む第2イベントを表し、
前記第2イベントに関連した情報を受信し、該情報は前記第3仮想アイテムを特定し、前記第2ラック映像は、前記人が前記第2物理ラックと関係を持っているときに前記第3物理アイテムを選択したことを表し、
前記第2イベントに関連した前記情報の受信に応答して、前記仮想ショッピングカートに前記第3仮想アイテムを格納し、
前記ショッピングセッションが終了したことを決定し、
前記ショッピングセッションが終了したとの決定に応答して、
前記仮想ショッピングカートを、前記ショッピングセッション中に選択されたとアルゴリズムによって決定されたアイテムを含むアルゴリズム的ショッピングカートと比較し、前記アルゴリズム的ショッピングカートは、前記実店舗内にあるセンサから受信された入力の組に基づき決定され、前記センサは、前記ラックカメラとは異なるアルゴリズムカメラのアレイと、重みセンサの組とを有し、前記ショッピングセッション中に選択されたと前記アルゴリズムによって決定された前記アイテムのうちの各アイテムは、前記重みセンサの組の中の重みセンサへ結合され、
前記仮想ショッピングカートを前記アルゴリズム的ショッピングカートと比較することに応答して、
前記ショッピングセッションの領収書を生成し、
前記領収書を前記人へ送る
よう動作する、システム。 - 前記領収書は、前記第1仮想アイテムに割り当てられている第1価格と、前記第3仮想アイテムに割り当てられている第2価格とを含む、
請求項17に記載のシステム。 - 前記仮想ショッピングカートを前記アルゴリズム的ショッピングカートと比較することに応答して、前記処理要素は、
前記アルゴリズム的ショッピングカートがエラーを有することを決定し、
前記入力の組の中から前記エラーに関連したサブセットを決定し、該サブセットは、前記アルゴリズムカメラのアレイから受信された入力を含み、
不一致を説明するメタデータを前記サブセットに付加し、
前記サブセットを使用して前記アルゴリズムを訓練する
よう更に動作する、
請求項17に記載のシステム。 - 前記イベントに関連した前記情報は、前記第1仮想ラックから前記仮想ショッピングカートへ前記第1仮想アイテムをドラッグ・アンド・ドロップすることに関連した情報を含む、
請求項17に記載のシステム。
Applications Claiming Priority (11)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/663,589 | 2019-10-25 | ||
US16/664,490 | 2019-10-25 | ||
US16/663,589 US10861085B1 (en) | 2019-10-25 | 2019-10-25 | Apparatus, system and method for populating a virtual shopping cart based on video of a customers shopping session at a physical store |
US16/664,470 | 2019-10-25 | ||
US16/663,564 | 2019-10-25 | ||
US16/663,564 US10607080B1 (en) | 2019-10-25 | 2019-10-25 | Feedback and training for a machine learning algorithm configured to determine customer purchases during a shopping session at a physical store |
US16/664,470 US10922555B1 (en) | 2019-10-25 | 2019-10-25 | Customer-based video feed |
US16/664,529 | 2019-10-25 | ||
US16/664,529 US11798065B2 (en) | 2019-10-25 | 2019-10-25 | Tool for generating a virtual store that emulates a physical store |
US16/664,490 US11100717B2 (en) | 2019-10-25 | 2019-10-25 | System and method for presenting a virtual store shelf that emulates a physical store shelf |
PCT/US2020/057048 WO2021081319A1 (en) | 2019-10-25 | 2020-10-23 | System and method for populating a virtual shopping cart based on video of a customer's shopping session at a physical store |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2022553542A true JP2022553542A (ja) | 2022-12-23 |
JPWO2021081319A5 JPWO2021081319A5 (ja) | 2023-10-31 |
JP7440627B2 JP7440627B2 (ja) | 2024-02-28 |
Family
ID=73449221
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022523938A Active JP7440627B2 (ja) | 2019-10-25 | 2020-10-23 | 実店舗で客のショッピングセッションの映像に基づき仮想ショッピングカートをポピュレートするシステム及び方法 |
Country Status (7)
Country | Link |
---|---|
EP (1) | EP4049250B1 (ja) |
JP (1) | JP7440627B2 (ja) |
KR (1) | KR102634141B1 (ja) |
CN (1) | CN114830200A (ja) |
CA (1) | CA3165136A1 (ja) |
MX (1) | MX2022004899A (ja) |
WO (1) | WO2021081319A1 (ja) |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050177463A1 (en) * | 2004-02-10 | 2005-08-11 | Crutchfield William G.Jr. | Virtual showroom for interactive electronic shopping |
US7178722B2 (en) * | 2004-12-09 | 2007-02-20 | International Business Machines Corporation | Virtual shopping environment |
US20070073717A1 (en) * | 2005-09-14 | 2007-03-29 | Jorey Ramer | Mobile comparison shopping |
WO2009120616A1 (en) * | 2008-03-25 | 2009-10-01 | Wms Gaming, Inc. | Generating casino floor maps |
US8112920B2 (en) * | 2008-07-03 | 2012-02-14 | 7-Eleven, Inc. | Rolling information display for roller grill |
US20120215656A1 (en) | 2011-02-23 | 2012-08-23 | Liang Light Chen | Drag-and-drop internet shopping with an embedded shopping cart view |
US20130110666A1 (en) * | 2011-10-28 | 2013-05-02 | Adidas Ag | Interactive retail system |
US10083430B2 (en) * | 2012-06-08 | 2018-09-25 | Ronny Hay | Computer-controlled, unattended, automated checkout store outlet system and related method |
RU2671767C2 (ru) * | 2013-04-08 | 2018-11-06 | Ронни ХЕЙ | Управляемый компьютером киоск с автоматической оплатой, не требующий присутствия продавца |
US9473747B2 (en) * | 2013-07-25 | 2016-10-18 | Ncr Corporation | Whole store scanner |
US20150161712A1 (en) * | 2013-12-10 | 2015-06-11 | 12 Retail (HK) Limited | Unifying shopping experience system |
WO2015163460A1 (ja) | 2014-04-25 | 2015-10-29 | 佳弘 東 | 決済支援装置、決済支援方法及びプログラム |
JP5704279B1 (ja) | 2014-10-14 | 2015-04-22 | 富士ゼロックス株式会社 | 関連付プログラム及び情報処理装置 |
WO2017196822A1 (en) * | 2016-05-09 | 2017-11-16 | Grabango Co. | System and method for computer vision driven applications within an environment |
US10368057B1 (en) * | 2016-09-28 | 2019-07-30 | Amazon Technologies, Inc. | Synchronizing data streams |
CA3052292A1 (en) * | 2017-02-10 | 2018-08-16 | Grabango Co. | A dynamic customer checkout experience within an automated shopping environment |
US20180240180A1 (en) * | 2017-02-20 | 2018-08-23 | Grabango Co. | Contextually aware customer item entry for autonomous shopping applications |
CN108269371B (zh) * | 2017-09-27 | 2020-04-03 | 缤果可为(北京)科技有限公司 | 商品自动结算方法、装置、自助收银台 |
US10963704B2 (en) * | 2017-10-16 | 2021-03-30 | Grabango Co. | Multiple-factor verification for vision-based systems |
US20210027318A1 (en) | 2018-03-20 | 2021-01-28 | Nec Corporation | Store management device and store management method |
US10373322B1 (en) * | 2018-07-16 | 2019-08-06 | Accel Robotics Corporation | Autonomous store system that analyzes camera images to track people and their interactions with items |
-
2020
- 2020-10-23 JP JP2022523938A patent/JP7440627B2/ja active Active
- 2020-10-23 MX MX2022004899A patent/MX2022004899A/es unknown
- 2020-10-23 WO PCT/US2020/057048 patent/WO2021081319A1/en unknown
- 2020-10-23 CA CA3165136A patent/CA3165136A1/en active Pending
- 2020-10-23 CN CN202080088562.XA patent/CN114830200A/zh active Pending
- 2020-10-23 KR KR1020227017402A patent/KR102634141B1/ko active IP Right Grant
- 2020-10-23 EP EP20807605.9A patent/EP4049250B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
KR20220082919A (ko) | 2022-06-17 |
KR102634141B1 (ko) | 2024-02-07 |
MX2022004899A (es) | 2022-05-16 |
JP7440627B2 (ja) | 2024-02-28 |
WO2021081319A1 (en) | 2021-04-29 |
EP4049250A1 (en) | 2022-08-31 |
EP4049250B1 (en) | 2024-05-29 |
CA3165136A1 (en) | 2021-04-29 |
CN114830200A (zh) | 2022-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10810428B1 (en) | Feedback and training for a machine learning algorithm configured to determine customer purchases during a shopping session at a physical store | |
US11386631B2 (en) | System and method for presenting a virtual store shelf that emulates a physical store shelf | |
US10861085B1 (en) | Apparatus, system and method for populating a virtual shopping cart based on video of a customers shopping session at a physical store | |
US11475674B2 (en) | Customer-based video feed | |
US11798065B2 (en) | Tool for generating a virtual store that emulates a physical store | |
US11023728B1 (en) | Machine learning algorithm trained to identify algorithmically populated shopping carts as candidates for verification | |
WO2020047919A1 (zh) | 无人售货方法、装置、系统、服务器及计算机可读存储介质 | |
US11995684B2 (en) | System and method for populating a virtual shopping cart based on a verification of algorithmic determinations of items selected during a shopping session in a physical store | |
JP2006350751A (ja) | 店舗内の販売分析装置及びその方法 | |
CN110895747B (zh) | 商品信息识别、显示、信息关联、结算方法及系统 | |
US20220180424A1 (en) | System and method for populating a virtual shopping cart based on video of a customer's shopping session at a physical store | |
US11475656B2 (en) | System and method for selectively verifying algorithmically populated shopping carts | |
US11386647B2 (en) | System and method for processing a refund request arising from a shopping session in a cashierless store | |
JP7440627B2 (ja) | 実店舗で客のショッピングセッションの映像に基づき仮想ショッピングカートをポピュレートするシステム及び方法 | |
WO2022115841A1 (en) | System and method for selectively verifying algorithmically populated shopping carts | |
JP2012216117A (ja) | 販売支援装置、販売支援装置システム、販売支援装置の制御方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231023 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231023 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20231023 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240116 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7440627 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |