JP2008537226A - 小売店ディスプレイコンプライアンスを自動的に測定する方法およびシステム - Google Patents
小売店ディスプレイコンプライアンスを自動的に測定する方法およびシステム Download PDFInfo
- Publication number
- JP2008537226A JP2008537226A JP2008506646A JP2008506646A JP2008537226A JP 2008537226 A JP2008537226 A JP 2008537226A JP 2008506646 A JP2008506646 A JP 2008506646A JP 2008506646 A JP2008506646 A JP 2008506646A JP 2008537226 A JP2008537226 A JP 2008537226A
- Authority
- JP
- Japan
- Prior art keywords
- image
- retail store
- store
- captured images
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Development Economics (AREA)
- Educational Administration (AREA)
- Operations Research (AREA)
- Marketing (AREA)
- Game Theory and Decision Science (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Alarm Systems (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
小売店ディスプレイコンプライアンスを測定する方法およびシステムが提供される。1つまたは複数の小売店状態の1つまたは複数のイメージが取り込まれ、関連情報と関連付けられる。その1つまたは複数の取込みイメージおよび関連情報が、格納および処理のために処理位置に送信される。その1つまたは複数の取込みイメージおよび関連情報が処理位置で受信され、リポジトリに格納され、処理される。1つまたは複数の取込みイメージ内の1つまたは複数の小売店状態がライブラリと比較され、それが識別され、識別情報が得られる。1つまたは複数の小売店状態に関する1つまたは複数の識別後取込みイメージおよび識別情報がリポジトリに格納される。1つまたは複数の取込みイメージおよび識別情報内の1つまたは複数の小売店状態が分析され、分析に基づいて1つまたは複数の概要レポートあるいは1つまたは複数の警報が生成される。
Description
本開示は一般に消費者製品販売の分野に関し、より詳細には、自動化されたデジタルイメージ取込および分析を介して小売店ディスプレイコンプライアンスを測定する方法およびシステムに関する。
本開示は、参照によりその内容全体が本明細書に組み込まれる「Method And System For Automatically Meauring Retail Store Display Compliance」という名称の2005年4月13日に出願された仮出願60/670802号に基づき、その特典を主張するものである。
小売店の人の出入りが多いエリアの2次位置に設置された大型ディスプレイを使用すると、消費者製品の販売が、その1次棚位置から直接販売された同一の製品の販売と比較して劇的に増加することが示されている。その結果、製造業者は、例えば通路端ディスプレイ(end−of−aisle display)、スタンドアロンディスプレイ、販売地点ディスプレイ(point−of−sale display)、パレットディスプレイなどの形態の、小売店内のディスプレイスペースの購入に年間数十億ドルを費している。ある場合には、製造業者は、製品販売を促進するために、指定の期間に食料雑貨店またはスーパーマーケットでの製品の最良の位置、例えば目の高さの棚または通路端ディスプレイに配置するための料金を小売業者に支払うことがある。
小売業者が適切に製造業者の製品およびディスプレイを陳列していることを保証するために、製造業者は通常、製造業者の人員または独立の監査人を小売場所に派遣する。監査人は、製造業者にとって満足が行き、製造業者が支払いをした仕方でディスプレイが設置されているかどうかを検証する。しかし、そのような監査に伴う問題は、監査が通常はサンプル的に行われ、通常は全マーケットの10%未満であることである。監査の頻度は非常に限られており、せいぜい週に1度である。例えば、数百の小売店のチェーンを定期的に検査することは、全国にわたって配置されている場合には特に、費用がかかり、困難である。次いで、この小さいサンプルに基づいて、チェーンまたはマーケットに関して結果が見積もられる。例えば食料雑貨店の商品は回転率が高いので、ディスプレイは日ごとに変化し、それにより、現在のレポートの方法が実際の店の状態の公正な表現とはならなくなる。
製造業者は、それに対する支払いを行った場所と期間に小売店が実際に製造業者の促進する製品を販売していることを保証するための十分な方法を持たずに小売ディスプレイスペースに対して数十億ドルを支払っていることに気付くことがしばしばある。したがって、小売店ディスプレイコンプライアンスを監査するための、信頼性が高く効率的な方法が求められている。
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法は、1つまたは複数の小売店状態の1つまたは複数のイメージを取り込むこと、1つまたは複数の取込みイメージを関連情報と関連付けること、1つまたは複数の取込みイメージおよび関連情報を格納および処理のために処理位置に送信すること、1つまたは複数の取込みイメージおよび関連情報を処理位置で受信し、1つまたは複数の取込みイメージおよび関連情報をリポジトリに格納すること、1つまたは複数の取込みイメージを処理すること、1つまたは複数の取込みイメージ内の1つまたは複数の小売店状態をライブラリと比較し、1つまたは複数の小売店状態を識別し、1つまたは複数の小売店状態についての識別情報を得ること、1つまたは複数の小売店状態に関する1つまたは複数の識別後取込みイメージおよび識別情報をリポジトリに格納すること、1つまたは複数の取込みイメージおよび識別情報内の1つまたは複数の小売店状態を分析すること、ならびに分析に基づいて1つまたは複数の概要レポートあるいは1つまたは複数の警報を生成することを含む。
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定するシステムは、1つまたは複数の小売店状態の1つまたは複数のイメージを取り込むイメージ取込みユニットと、1つまたは複数の取込みイメージを関連情報と関連付ける手段と、1つまたは複数の取込みイメージおよび関連情報を送信する手段、ならびに1つまたは複数の取込みイメージおよび関連情報を受信する手段と、1つまたは複数の取込みイメージを処理する手段と、1つまたは複数の取込みイメージ内の1つまたは複数の小売店状態をライブラリと比較し、1つまたは複数の小売店状態を識別し、1つまたは複数の小売店状態についての識別情報を得るイメージ認識モジュールと、1つまたは複数の識別後取込みイメージおよび識別情報を格納するリポジトリと、1つまたは複数の取込みイメージおよび識別情報内の1つまたは複数の小売店状態を分析し、分析に基づいて1つまたは複数の概要レポートあるいは1つまたは複数の警報を生成する報告エンジンとを含む処理位置を含む。
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定するコンピュータ実行可能コードを含むコンピュータ記憶媒体は、1つまたは複数の小売店状態の1つまたは複数のイメージを取り込むコードと、1つまたは複数の取込みイメージを関連情報と関連付けるコードと、1つまたは複数の取込みイメージおよび関連情報を格納および処理のために処理位置に送信するコードと、1つまたは複数の取込みイメージおよび関連情報を処理位置で受信し、1つまたは複数の取込みイメージおよび関連情報をリポジトリに格納するコードと、1つまたは複数の取込みイメージを処理するコードと、1つまたは複数の取込みイメージ内の1つまたは複数の小売店状態をライブラリと比較し、1つまたは複数の小売店状態を識別し、1つまたは複数の小売店状態についての識別情報を得るコードと、1つまたは複数の小売店状態に関する1つまたは複数の識別後取込みイメージおよび識別情報をリポジトリに格納するコードと、1つまたは複数の取込みイメージおよび識別情報内の1つまたは複数の小売店状態を分析するコードと、分析に基づいて1つまたは複数の概要レポートあるいは1つまたは複数の警報を生成するコードとを含む。
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定するコンピュータ実行可能コードを含むコンピュータ記憶媒体は、機器の位置を識別かつ検証するコードと、1つまたは複数の小売店状態の1つまたは複数のイメージを取り込むコードと、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを格納するコードと、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを処理するコードと、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを処理位置に送信するコードと、1つまたは複数の小売店状態の1つまたは複数の取込みイメージが処理位置に首尾よく送られたかどうかを示す確認を生成するコードとを含む。
添付の図面を参照しながら、以下の詳細な説明から本願の特徴をより容易に理解することができる。
本発明は、自動化されたデジタルイメージ取込みおよび分析を介して小売店ディスプレイコンプライアンスを測定する(方法およびシステムの形態の)ツールを提供する。図1に、本発明の方法およびシステムを実装することのできるコンピュータシステム100の一例を示す。本発明のシステムおよび方法を、コンピュータシステム、例えばメインフレーム、パーソナルコンピュータ(PC)、ハンドヘルドコンピュータ、またはサーバ上で動作するソフトウェアアプリケーションの形態で実装することができる。ソフトウェアアプリケーションを、コンピュータシステムでローカルにアクセス可能な記録媒体、例えばフロッピィディスク、コンパクトディスク、またはハードディスク上に格納することができ、あるいはコンピュータシステムからリモートであり、ネットワーク(例えばローカルエリアネットワークまたはインターネット)に対する有線またはワイヤレス接続または別の伝送媒体を介してアクセス可能でよい。
コンピュータシステム100は、中央演算処理装置(CPU)102、プログラムおよびデータ記憶装置104、プリンタインターフェース106、ディスプレイユニット108、(LAN)ローカルエリアネットワークデータ伝送コントローラ110、LANインターフェース112、ネットワークコントローラ114、内部バス116、および1つまたは複数の入力装置118(例えばキーボードまたはマウス)を含むことができる。図示するように、リンク122を介してシステム100をデータベース120に接続することができる。
イメージ取込みユニットの使用により、小売店に設置されたディスプレイを定期的に一日中スキャンおよび監視する手段が得られる。本開示の方法およびシステムは、小売店状態のデジタルイメージ、例えば複数の小売店のディスプレイおよび棚の状態の画像を取り込み、格納することができる。こうした取込みイメージを処理位置に例えばインターネットを介して電子的に送る前に、日付、時刻、および位置情報を記録することができる。処理位置は中央プロセッサでよい。次いで、取込みイメージをライブラリ内のエントリと一致させてディスプレイ上の製品を識別することができる。製品を識別できるだけでなく、ディスプレイ上に満たされた製品の量を近似することもできる。ディスプレイ活動をレポートとして要約し、製造業者の関係者または小売業者に対して例えば電子フォーマットまたはレポートフォーマットで入手可能にすることができる。例えば、製造業者は、報告を掘り下げて、レポートが発行されたディスプレイの写真を確認することができる。
本発明の一実施形態による、自動化されたデジタルイメージ取込みおよび分析を介して小売店ディスプレイコンプライアンスを測定するシステムを、図2Aを参照しながら論ずる。システム20は、イメージ取込みユニット21、製品ディスプレイ22、製品ディスプレイ22a、イメージ認識モジュール23、ライブラリ24、リポジトリ25、および報告エンジン26を含む。1つまたは複数の製品ディスプレイ22を含む小売店1でイメージ取込みユニット21を使用することができる。処理位置2は、イメージ認識モジュール23、ライブラリ24、リポジトリ25、報告エンジン26、外部データリポジトリ27、および例外編集機構28を含む。外部データ27および例外編集機構28と共に報告エンジン26を使用して、1つまたは複数のレポートおよび/または警報を生成することができる。例えば、レポートは、ブランドビュー29、販売チームビュー30、マーチャンダイジングビュー31、ストア・オペレーション・ビュー32、および/または標準電子データフィード33の形でよい。
本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を、図2Aおよび2Bを参照しながら論ずる。イメージ取込みユニット21は、例えば製造業者製品ディスプレイ22、22a、および小売店1内の他の小売店状態のイメージを取り込む(ステップS201)。イメージ取込みユニット21は、以下でさらに詳細に説明する以下の装置を含むことができる。店内セキュリティカメラ、カメラフォン、固定ビデオまたは他のデジタルカメラ、移動ビデオまたは他のデジタルカメラ(例えば、店のあるエリアから別のエリアに移動する移動トラックに取り付けられたカメラ)、ウェブカメラ、モバイル取込みユニット、モバイルカート、および/または自走ロボット。1つまたは複数の取込みイメージが日付、時刻、および位置情報などの関連情報と関連付けられ(ステップS202)(例えば、店名、店の位置、ディスプレイ位置、ディスプレイタイプ、イメージ取込みの日付および時刻)、取込みイメージと関連情報が共に、格納および処理のためにイメージ取込みユニット21から処理位置2に送信される(ステップS203)。これは、イメージ取込みユニット21からの有線接続またはワイヤレス接続を介するものでよい。
処理位置2は、1つまたは複数の取込みイメージおよび関連情報を受信し、1つまたは複数の取込みイメージをリポジトリ25に格納する(ステップS204)。イメージ認識モジュール23は、1つまたは複数の取込みイメージを処理し、イメージが十分な品質であるかどうか、十分な内容を含んでいるか否かを判定する(ステップS205)。1つまたは複数の取込みイメージ内の1つまたは複数の小売店状態を識別するために、イメージ認識モジュール23は、1つまたは複数の小売店状態をライブラリ24と比較し、各小売店状態を例えば製品と突き合わせる。イメージ認識モジュール23はまた、各小売店状態についての識別情報も得る(ステップS206)。例えば、識別情報は、店名、店の位置、ディスプレイ位置、ディスプレイタイプ、イメージ取込みの日付および時刻、ディスプレイ量(Display Quantity)、ユニバーサル製品コード(Universal Product code)(「UPC」)、ブランド、説明、サイズ、カテゴリなどを含むことができる。次いで、1つまたは複数の識別後取込みイメージおよび識別情報がリポジトリ25に格納される(ステップS207)。
報告エンジン26は、リポジトリ25に格納された情報を他の外部データリポジトリ27(例えば販売情報、在庫情報)と共に分析および編集し、情報の概要および/あるいは1つまたは複数の警報を生成する(ステップS208およびS209)。概要をレポートフォーマットおよび/または電子データフィードフォーマットで製造業者または小売業者の内部報告システムに提供することができる。例えば、1つまたは複数の小売店状態の生画像フィードおよび/または生データフィードを提供することができる。報告エンジン26はまた、1つまたは複数の小売店状態が満たされ、または超過するときに自動警報を提供することもできる。こうした警報は、Eメールなどによって遠隔通信リンクを介して送ることができる。例えば、一定の数の特定の製品のみが小売店の棚の上に残っている場合、報告エンジンは自動Eメール警報を生成し、例えば製造業者に送ることができる。報告エンジン26はまた、異なるユーザに対して異なるビューの情報を編集することもできる。例えば、ブランドビュー29、販売チームビュー30、マーチャンダイジングビュー31、および/またはストア・オペレーション・ビュー32である。さらに、報告エンジン26は、任意の所与の時間に、小売店内の任意の場所の任意の小売店内の任意の取込みイメージへのアクセスを与えることできる。
イメージ取込みユニット
a)アドホック手法
本開示の一実施形態によれば、店内セキュリティカメラ、カメラフォン、ウェブカメラ、固定ビデオまたは他のデジタルカメラ、および移動ビデオまたは他のデジタルカメラの各装置のうちの1つまたは複数の使用を含むことのできるアドホック手法を使用することによってイメージを取り込むことができる。例えば、ディスプレイや棚などの小売店状態のイメージをデジタルカメラおよび/またはカメラフォンで撮影することができ、格納および処理のためにそれを処理位置にEメールすることができる。アドホック手法を使用して撮影されたイメージを、アドホックビューイングのためにリポジトリ25に格納することができる。処理位置2は、例えば携帯電話で撮影されるイメージをアップロードするためのウェブポータルを含むことができる。ウェブポータルは、無許可アクセスを防止するためのユーザ識別およびパスワードと、店、場所、説明などを含む、各イメージの報告に関するキーデータを取り込むためのデータ入力画面と、画像をアップロードし、処理および格納のためにそれを待ち行列化する能力とを含むことができる。こうしたイメージが送信されるとき、こうしたイメージは、小売店識別、小売店内の画像の場所のテキスト説明などの関連情報を含むべきである。本開示の一実施形態によれば、アドホックイメージ取込み手法を使用して取り込まれたイメージの送信の前に、潜在的なコンピュータウィルス、ワームなどに関してイメージをスキャンすべきである。
a)アドホック手法
本開示の一実施形態によれば、店内セキュリティカメラ、カメラフォン、ウェブカメラ、固定ビデオまたは他のデジタルカメラ、および移動ビデオまたは他のデジタルカメラの各装置のうちの1つまたは複数の使用を含むことのできるアドホック手法を使用することによってイメージを取り込むことができる。例えば、ディスプレイや棚などの小売店状態のイメージをデジタルカメラおよび/またはカメラフォンで撮影することができ、格納および処理のためにそれを処理位置にEメールすることができる。アドホック手法を使用して撮影されたイメージを、アドホックビューイングのためにリポジトリ25に格納することができる。処理位置2は、例えば携帯電話で撮影されるイメージをアップロードするためのウェブポータルを含むことができる。ウェブポータルは、無許可アクセスを防止するためのユーザ識別およびパスワードと、店、場所、説明などを含む、各イメージの報告に関するキーデータを取り込むためのデータ入力画面と、画像をアップロードし、処理および格納のためにそれを待ち行列化する能力とを含むことができる。こうしたイメージが送信されるとき、こうしたイメージは、小売店識別、小売店内の画像の場所のテキスト説明などの関連情報を含むべきである。本開示の一実施形態によれば、アドホックイメージ取込み手法を使用して取り込まれたイメージの送信の前に、潜在的なコンピュータウィルス、ワームなどに関してイメージをスキャンすべきである。
b)モバイル取込みユニット
本開示の別の実施形態によれば、イメージ取込みユニット21はモバイル取込みユニットである。モバイル取込みユニットは、例えば、移送が容易であり、ユーザが店から店に搬送することを可能にするポータブルユニットでよく、または、例えば店内の通路を通じて楽に押すことによってユーザがイメージを取り込むことを可能にするホイール付きのカート(ショッピングカートと同様のサイズ)の形態の、より大きなユニットでよい。例えば、ショッピングカートと同様のフォームサイズのモバイル取込みユニットは、カートを使用しない店で有用であることがあり、一方ポータブルユニットは、カートを配置することのできない狭い通路を有する店で使用されることになる。モバイル取込みユニットは(例えば電動機を使用することによって)自走することができ、充電可能で、バックアップ電源を含むべきである。使用されないとき、ポータブルモバイル取込みユニットは待機モードに入る。モバイル取込みユニットが小売店状態のイメージの取込みを終了したとき、ユニットをその電池を充電するために電源に接続する合図としてスピーカから音を放出することができる。
本開示の別の実施形態によれば、イメージ取込みユニット21はモバイル取込みユニットである。モバイル取込みユニットは、例えば、移送が容易であり、ユーザが店から店に搬送することを可能にするポータブルユニットでよく、または、例えば店内の通路を通じて楽に押すことによってユーザがイメージを取り込むことを可能にするホイール付きのカート(ショッピングカートと同様のサイズ)の形態の、より大きなユニットでよい。例えば、ショッピングカートと同様のフォームサイズのモバイル取込みユニットは、カートを使用しない店で有用であることがあり、一方ポータブルユニットは、カートを配置することのできない狭い通路を有する店で使用されることになる。モバイル取込みユニットは(例えば電動機を使用することによって)自走することができ、充電可能で、バックアップ電源を含むべきである。使用されないとき、ポータブルモバイル取込みユニットは待機モードに入る。モバイル取込みユニットが小売店状態のイメージの取込みを終了したとき、ユニットをその電池を充電するために電源に接続する合図としてスピーカから音を放出することができる。
モバイル取込みユニットはタッチスクリーンPCを含むことができ、モバイル取込みユニットを複数のユニバーサルシリアルバス(「USB」)装置にリンクし、給電USBハブを介してそれを制御することができる。一実施形態によれば、PC上のソフトウェアは、各モータのモータ速度および方向を制御することができ、PCが、小売店を通じてモバイル取込みユニットを駆動するのに人々が使用するインターフェースを制御することが可能となる。ソフトウェアはまた、店を通じたモバイル取込みユニットの移動を追跡および記録することもできる。カメラトリガホイールは、例えばホイールの回転をカウントすることにより、PCがモバイル取込みユニットの前方移動および後方移動を測定することを可能にすることができる。画像スティッチングのために、PCは、次のイメージを取り込む前にモバイル取込みユニットが移動する必要のある適切な距離を計算することができる。例えば、画像を互いにスティッチングして、小売店状態の複数のイメージからパノラマビューを作成するのに必要な最適な水平および垂直オーバラップによってこの計算を求めることができる。モバイル取込みユニットと共に1つまたは複数のUSBカメラを使用することができる。一実施形態によれば、モバイル取込みユニットは、画像品質を改善するために、ライトを使用してディスプレイを照明することができる。
モバイル取込みユニットは、複数のUSB赤外線装置を使用して、モバイル取込みユニットと、各小売店内のディスプレイ、棚、および/または他の物体との間の距離を測定かつ記録することができる。
本開示の代替実施形態によれば、モバイル取込みユニットは、人工知能を使用して自動的かつ自立的に小売店内を動き回って1つまたは複数の小売店状態のイメージを取り込む自走ロボットでよい。人々の注意をロボットの実際の使命からそらすために、ロボットシェルは、小売業者用のマーケティングビークルでよい。例えば、シェルは、ストアマスコットでよく、かつ/または広告をその上に表示または放送することのできるビデオ画面を含むことができる。製品の場所、価格チェック、調理レシピなどの質問を尋ねるために買物客が画面を使用することもできる。店のどのエリアを取り込まなければならないかを知ることができることに加えて、ロボットは、その電池を充電するために自動的にそれ自体をドッキングすることもできなければならない。自走ロボットは、店内ナビゲーションシステム、例えばグローバルポジショニングシステム(「GPS」)タイプの技術、またはロボットがその周囲を見て、ホイールの回転をカウントし、店を「学習」して、通路の位置を認識する技術を必要とすることがある。ロボットは履歴画像データとX−Y座標を共に使用して、通路がどこにあるかを学習することができるだけでなく、特定の場所が例えばパンの通路または乳製品の通路であることを学習することもできる。例えば、どちらのデータの組もロボットで作成することができ、次いで処理位置2にリンクすることができ、その結果、システムは店内の特定の場所が例えばパンの通路であることを学習する。経時的に店内のこの場所で多くのパン商品を見つけることにより、ロボットは、イメージ内に見つけたUPCにX−Y座標をマッピングすることによってパン区画の場所および境界を学習することができる。ライブラリ24内の製品階層により、データ入力をせずに区画を識別することが可能となる。例えば、イメージ内のすべてのUPCの90%がライブラリ24のパン区画内にある場合、実際のデータによってそのマッピングが否定されるまで、店内のその場所を「Bread」と符号化することができる。
本開示の一実施形態によれば、モバイル取込みユニット30は、Radio Frequency Identification(「RFID」)を使用して店内を自動的にナビゲートすることができる。
以下で図3Aおよび3Bを参照しながら本開示の一実施形態によるモバイル取込みユニットを論ずる。モバイル取込みユニット30は、識別および検証手段31、取込み手段32、格納手段33、処理手段34、および送信手段35を含むことができる。識別および検証手段31は、モバイル取込みユニット30の場所を識別かつ検証する(ステップS301)。例えば、小売店外にある間は、モバイル取込みユニット30はGPS技術を使用して小売店位置を識別および確認することができる。モバイル取込みユニット30は、処理位置から情報および/または更新を受信することができる(ステップS302)。取込み手段32は、1つまたは複数の小売店状態の1つまたは複数のイメージを取り込む(ステップS303)。格納手段33は、所定の時間、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを一時的に格納する(ステップS304)。処理手段34は、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを処理する(ステップS305)。送信手段35は、1つまたは複数の小売店状態の1つまたは複数の格納後取込みイメージを処理位置2に送信する(ステップS306)。1つまたは複数の取込みイメージが首尾よく処理位置2に送信されたか否かを示す確認を生成することができる(ステップS307)。
モバイル取込みユニットの取込み手段32は、1つまたは複数のデジタルカメラ、ビデオカメラ、ウェブカメラなどを含むことができる。例えば、複数の低コストウェブカメラをモバイル取込みユニット上の高い位置および/または低い位置に取り付けて、棚の平坦かつ完全なイメージ取込みを得ることができる。例えばエンドキャップディスプレイ、通路内ディスプレイ、および標準ゴンドラ(床から8フィートの高さまで)の適切な角度で画像を撮影するようにカメラを配置することができる。ディスプレイ全体のイメージと、通路が非常に狭い棚のイメージを取り込むのに魚眼レンズを使用することもできる。モバイル取込みユニット30は、例えばポータブルユニットまたはカートに固定されないカメラも含むことができる。これにより、カートに取り付けられたカメラで取り込むことが難しいショットに関して固定されないカメラを使用する柔軟性が得られる。例えば、コフィンフリーザ(coffin freezer)、ドアに標識または霜が付いた冷凍庫、棚の正面にディスプレイを有するプラノグラム区画(planogram section)などは問題となることがある。本開示の一実施形態によれば、モバイル取込みユニットは、運動検出器技術を使用してイメージ取込みを開始および停止することができる。
モバイル取込みユニットは、インターネットに接続するための手段、例えばワイヤレスインターネット接続を含むことができる。インターネット接続の可用性に応じて様々な方式で1つまたは複数の取込みイメージが処理位置2に送信される。ユニットが使用される小売店でインターネット接続が利用可能でない場合、モバイル取込みユニット30は、高速インターネット接続を使用して、バッチプロセスで1つまたは複数の取込みイメージをすべて一緒に送信することができる。アップロードプロセスが1つまたは複数の取込みイメージの送信中に中断された場合、プロセスは、それが中断されたところで再始動すべきである。例えば、アップロードプロセスが400個のイメージのうちの350番目のイメージで失敗した場合、アップロードは351番目のイメージで再始動すべきである。同様に、処理位置2との接続が失われた場合、モバイル取込みユニット30は、接続を自動的に再確立することができるべきである。本開示の一実施形態によれば、イメージ転送で圧縮技術を使用して、アップロードすべきデータ量を最小限に抑えることができ、送信の前に、潜在的なコンピュータウィルス、ワームなどに関してイメージをスキャンすべきである。
しかし、インターネット接続が小売店で利用可能である場合、例えば、モバイル取込みユニット30が店内に永続的に配置されるカートである場合、モバイル取込みユニット30は、取込みイメージを処理位置2に自動的に送ることができる。例えば、モバイル取込みユニット30が、処理位置2への1つまたは複数の取込みイメージの送信を開始することができ、または処理位置2が、モバイル取込みユニット30が処理位置2に1つまたは複数の取込みイメージを送信することを要求することができる。送信プロセスが中断された場合、システムは、自動的に回復することができるべきであり、例えばモバイル取込みユニット30は、送信エラーのために使用不可能である任意のイメージを自動的に再送信すべきである。
上述のカートユニットの場合には特に、モバイル取込みユニットの盗難の危険を最小限に抑えるために、モバイル取込みユニットが出口の数フィート以内に運ばれた場合、可聴警報を鳴らすことができ、かつ/またはEメール警報を店長に送信することができる。モバイル取込みユニットはまた、オペレータがユーザ識別および/またはパスワードを入力することを要求することができ、カートを押す人の画像を撮影することができる。
本開示の一実施形態によれば、モバイル取込みユニット、例えばカートユニットは、イメージの取込みを制御して、以下でさらに論ずる仮想ウォークスルービューア機能に関するオーバラップを保証することができる。カートユニットを使用することにより、すべての画像を正しいシーケンスで処理することができるように同じ高さから十分なオーバラップで撮影することができる。例えば、ウェブカメラ技術を介して、システムは画像取込みのタイミングを制御することができる。
1人または複数の監査人は、日常の店監査スケジュールに従って、モバイル取込みユニット30を使用して1つまたは複数の小売店を訪問し、各店についての小売店状態の1つまたは複数のイメージを取り込むことができる。日常の店監査スケジュールを処理位置2からモバイル取込みユニット30に送信することができ、モバイル取込みユニット30の画面上に表示することができる。
図4は、モバイル取込みユニット30のメイン画面を示すブロック図である。監査すべき店の外部で、監査人はモバイル取込みユニット30に電源を投入し、モバイル取込みユニットのメイン画面40上に配置された「ログイン/ログアウト」41をタッチまたはクリックする。監査人は、システムにアクセスするために自分のユーザ名およびパスワードを入力することができる。日常の監査スケジュールに対して行われる変更または任意の他の情報を直ちに送信することができ、監査人がメッセージボード48を介して取り出すことができる。「店の注記」44を介して特定の店についての任意の注記にアクセスすることができる。監査人がログインした後、モバイル取込みユニット40は、例えば標準GPS技術と小売位置のデータベースを使用することにより、その位置を検証および識別することができる。モバイル取込みユニットがその位置を識別した後、モバイル取込みユニットは、処理位置2から小売店の平面図構成を取り出すことができる。平面図構成は、例えば、通路の数、冷凍庫、設備、および他の平面図詳細を含む。この情報を使用して、モバイル取込みユニット30は、監査人がイメージを取り込む必要のあるすべてのエリアとそのステータス47のリストを含む平面図47をモバイル取込みユニット30のメイン画面40上に表示する。本開示の代替実施形態によれば、実際のグラフィカルな平面図を得て表示することができる。どのイメージが既に取り込まれているか、どのイメージをまだ取り込む必要があるかを監査人が迅速に確認する助けとなるように、各区画を色分けすることができる。本開示の一実施形態によれば、取り込む必要のあるエリアが、データを取り込むことについて道理にかなった順序で表示される。例えば、監査人の休止時間を最小限に抑えるために、第1区画は入口付近でよい。メイン画面40上の提案される順序/シーケンスは、標準的な店監査を実施する人が店内を歩く典型的な方式に追従することができる。任意の時間に、監査人は、「電池をチェック」43をタッチまたはクリックすることによってモバイル取込みユニット30の電池寿命をチェックすることができる。すべてのイメージが取り込まれた後、「画像をアップロード」45をタッチまたはクリックすることによってイメージを処理位置2にアップロードすることができる。
例えばプラノグラムを使用することにより、監査人は、モバイル取込みユニット30を使用して、ディスプレイ活動を監査し、店内小売状態を検討することができる。プラノグラムは、特定の製品および製品カテゴリの配置を含む、店のレイアウトのダイアグラム、図面、または他の視覚的記述である。小売店状態の1つまたは複数のイメージを取り込むために、監査人は、平面図47内の任意の場所をタッチまたはクリックし、「詳細画面に進む」42をタッチまたはクリックすることができ、例えば、監査人が第4エントリ「通路2」をタッチまたはクリックした場合、図5の詳細画面50が表示される。詳細画面50は、監査人がプラノグラム52を使用することによってイメージを取り込む助けになる。通路のレイアウトを詳述するプラノグラム52が、詳細画面50上に表示される。「画像を追加」51をタッチまたはクリックすることにより、監査人は、小売店状態のイメージの取込みを開始することができる。イメージを取り込んだ後、イメージがモバイル取込みユニット30の記憶域に自動的にダウンロードされる。イメージをプラノグラム52の適切な位置に追加するために、監査人は、適切な位置で画面をタッチして、イメージを大きいイメージ53として画面の右側に出現させ、通路内のより小さなサムネイル54として出現させることができる。監査人が誤った位置にイメージを置いた場合、監査人は、「画像を移動」58をタッチまたはクリックし、イメージが現れるべき画面上の正しい位置をタッチすることによってイメージを移動することができる。イメージが受け入れられない場合、監査人は、「画像を削除」59をタッチまたはクリックすることによってイメージを削除し、イメージを撮影し直すことができる。監査人は、「フルサイズを閲覧」60をタッチまたはクリックすることによってフルサイズイメージを閲覧することもできる。
本開示の一実施形態によれば、監査人は、上述のカートユニットなどの固定カメラを有するモバイル取込みユニット30に切り換えることによって通路の全長を取り込むことができる。カートユニットは1つのカメラを有することができ、またはユニットの両側に複数のカメラを有することができ、カートが通路で押されるときにカートが小売店状態の高品質画像を撮影する能力が最大となる。監査人は、「カメラを開始」55をタッチまたはクリックすることができ、またはイメージ取込みが開始される場所のプラノグラム52エリアをタッチまたはクリックすることができる。次いで、監査人は、通路でモバイル取込みユニット30、例えばカートユニットを押して、その通路内の小売店状態の1つまたは複数のイメージを取り込むことができる。次いで、監査人は、「カメラを停止」56、および/または通路の端部のプラノグラム52上の位置をタッチして、その通路に関するイメージ取込みが完了することを示すことができる。監査人は、「メイン画面」をタッチまたはクリックすることによってメイン画面40に戻ることができ、または監査人を次の通路または前の通路に移動する矢印57をタッチまたはクリックすることによってすべての通路の全長の取込みを続行することができる。矢印57はまた、監査人を店内の他の場所、例えば店の正面、店の後部、店の精算エリア、店の青果物エリアなどに移動することもできる。あるいは、監査人は、「ビデオを開始」62、および/またはイメージ取込みが開始されるプラノグラム52上の位置をタッチまたはクリックすることもできる。次いで、監査人は、通路でモバイル取込みユニット30、例えばカートユニットを押して、その通路内の小売店状態の1つまたは複数のイメージを取り込むことができる。監査人は、「ビデオを停止」63をタッチまたはクリックすることによってイメージ取込みが完了するまで、隣接する通路でのモバイル取込みユニット30の移動を続行することができる。
格納手段33は、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを、所定の時間、一時的に格納する。例えば、イメージを格納し、様々な方式で互いにスティッチングして、比較ステップまたはイメージ認識ステップのためにイメージを編成および準備することができる。さらに、イメージを互いにスティッチングすることは、小売店の順次イメージ間、およびそうしたイメージを撮影する1つまたは複数のカメラにわたる可能なオーバラップによって引き起こされる重複をなくす助けになる。さらに、イメージスティッチングは、仮想ウォークスルービューア機能ならびにアドホックピクチャ閲覧に関する生データベースを提供することもできる。代替実施形態によれば、取込みイメージの送信後、またはイメージの取込み中に画像スティッチングを実施することができる。
互いにスティッチングされて仮想店ウォークスルーに関するより大きい画像が作成される元のソース画像を、新しい画像が作成され、品質保証試験に合格した後に削除することができる。スティッチング用の画像のための元のソースを取り込むのにビデオストリームが使用される場合、個々のフレームが分離され、抽出され、フォーマット変換され、互いにスティッチングされるとすぐに、ビデオストリームが削除される。所定の時間、最終処理済みイメージをイメージ取込みユニット21のデータベースに格納すべきである。例えば、1週間イメージを保持し、次いで現在の週のイメージで置き換えることができる。本開示の一実施形態によれば、各イメージを個々のファイルとして格納することができる。
伝送の前に、モバイル取込みユニット30は、1つまたは複数の取込みイメージを処理することができる。具体的には、モバイル取込みユニット30は、区画の紛失および/または画像マッピングでの誤りなどの、イメージに伴う何らかの問題があるかどうか、例えば、モバイル取込みユニット30と棚またはディスプレイとの間に障害物があったかどうか、棚またはディスプレイに対するモバイル取込みユニット30の角度が不良であったためにイメージがひずんでいるかどうか、レンズが汚れており、または焦点が合っていないかどうか、モバイル取込みユニット30が移動中であっためにイメージがぼやけているかどうか、イメージが最後の画像とオーバラップしていないためにイメージ内に情報ギャップがあるかどうか、イメージが既に撮影されたイメージの複製であり、または既に撮影された前のイメージとオーバラップするかどうか、イメージが使用不能となる何らかのタイプのハードウェア障害があるかどうか、モバイル取込みユニット30が製品のはっきりした画像を得る妨げとなる、縦型冷凍庫または冷蔵庫の窓の霜があるかどうかなどを判定することができる。上述のような何らかの紛失イメージまたは誤りがある場合、監査人は、そうしたイメージを再撮影することができ、またはモバイル取込みユニットは自動的にイメージを再撮影することができる。さらに、すべてのイメージを正しい向きに回転し(例えば、イメージを画面上に示すことができ、監査人は、それが正しくない場合に回転を上書きすることができる)、色、輝度、色相などを自動的に向上させ(例えば、イメージを圧縮する前にバッチモードで行うことができる)、焦点についてチェックし(例えば、画面上にイメージを表示することができ、したがって監査人はそれを拒絶するかどうかを判定することができる)、かつ/またはイメージ認識モジュール23で棚の上の製品を正しく識別することができるようにディスプレイからイメージをクロッピングすることができる。本開示の一実施形態によれば、モバイル取込みユニット30のオペレータは、次の組の棚画像を取り込む前に、処理済み仮想店ウォークスルーイメージを視覚的に検討し、画像品質を承認することができる。例えば、製品が非常に小さいラベルを含む場合、監査人は、ディスプレイから製品の1つを除去し、イメージを撮影する前にラベルをより目立つようにすることができる。
処理手段は、1つまたは複数の取込みイメージを、限定はしないが店名、店の位置、ディスプレイ位置、ディスプレイタイプ、イメージ取込みの日付および時刻を含む、日付、時刻、位置情報などの関連情報と関連付けることもできる。代替実施形態によれば、イメージ取込みユニット21によって実施される処理を、処理位置2による取込みイメージの送信後に実施することができる。
取込みイメージおよび関連情報を処理位置に送信することができ、そこに格納し、さらに処理して有用な情報に変換することができる。
処理位置
1つまたは複数の取込みイメージおよび関連情報を送信した後、処理位置2でそれを受信する。集中型とすることができる処理位置2は、イメージ認識モジュール23、ライブラリ24、リポジトリ25、報告エンジン26、外部データリポジトリ27、および例外編集機構28を含む。
処理位置
1つまたは複数の取込みイメージおよび関連情報を送信した後、処理位置2でそれを受信する。集中型とすることができる処理位置2は、イメージ認識モジュール23、ライブラリ24、リポジトリ25、報告エンジン26、外部データリポジトリ27、および例外編集機構28を含む。
1つまたは複数の取込みイメージおよび関連情報を受信すると、それをリポジトリ25に格納する。取込みイメージのすべてが永続的に格納されるわけではない。例えば、重複、不良イメージなどは廃棄される。本開示の一実施形態によれば、店、位置、日付、時刻、および向きによる迅速なアクセスのために、1つまたは複数の取込みイメージを生イメージとしてMS−SQLデータベースに保存することができる。例えばデータミラーリングまたはその他の形態のバックアップソフトウェアを使用して、1つまたは複数の取込みイメージをバックアップ位置にも格納することができる。データ記憶を最小限に抑えるために、イメージ認識モジュールに対して必要な最小解像度でイメージを取り込み、格納すべきである。イメージ認識処理に関して画像をどんな形でも低下させない方式で各イメージに透かしを付けることができる。日ごとの多くの記憶要件のために、最終的画像をオフラインで保存することができる。
図6は、本開示の一実施形態による、イメージ認識モジュールによる処理のステップを示す流れ図である。このステップをイメージ取込みユニット21またはイメージ認識モジュール23によって実施することができる。イメージ認識モジュール23は、各イメージについてのイメージ品質およびイメージ内容が十分であるかどうかを判定することにより、1つまたは複数の取込みイメージを処理する。例えば、イメージ認識モジュール23はまず、イメージ品質が十分であるかどうか(すなわち焦点合せ、ひずみなど)を判定することができる(ステップS601)。イメージ品質が十分でないとイメージ認識モジュール23が判定した場合(ステップS601のNo)、イメージ認識モジュール23は、イメージを削除し、またはイメージにフラグを立てることができ、終了することができ、あるいはイメージを再撮影することを要求することができる(ステップS602)。一方、イメージ品質が十分であるとイメージ認識モジュール23が判定した場合(ステップS601のYes)、イメージ認識モジュール23は、イメージ内容全体がその符号化位置と整合するかどうかを判定することができる(ステップS603)(すなわち、イメージが棚のビューとして符号化される場合、イメージ内にディスプレイユニットがあるか否か)。イメージ内に障害物があるとイメージ認識モジュール23が判定した場合(ステップS603のNo)(すなわち、棚またはディスプレイのビューを遮る人々、ショッピングカート、または任意の他の障害物)、イメージを削除し、またはイメージにフラグを立てることができ、終了することができ、あるいはイメージを再撮影することを要求することができる(ステップS602)。しかし、イメージ内容が十分であるとイメージ認識モジュール23が判定した場合(ステップS603のYes)、イメージが承認され、処理の第2ステップに送られる(ステップS604)。一実施形態によれば、分析されない異なる棚の上の製品の遠方のビューをイメージが含むとイメージ認識モジュール23が判定した場合、イメージ認識モジュール23は、イメージをクロッピングして除去することによってイメージを分析から除外することができる。代替実施形態によれば、イメージ認識モジュールは、店内のハンドヘルドバーコードリーダを使用して製品を識別する。(例えば、押したり、または運転することによって)モバイル取込みユニット30を操作する人は、ハンドヘルドバーコードリーダを使用して、在庫切れ状態などの追従措置を必要とする製品のUPCを記録することに加えて、小売店で表示されている各製品のUPCコードを電子的に記録する。
処理の第2ステップは、イメージ認識モジュール23が、1つまたは複数の取込みイメージを、ライブラリ24、例えばCPG製品ピクチャデータベースまたはサードパーティベンダライブラリと比較して、1つまたは複数の取込みイメージ内の1つまたは複数の小売店状態を識別し、小売店状態についての識別情報、例えば店番号、イメージ日付/時刻、UPC、および/または店内の製品の厳密な位置を記述する他の詳細情報などを得ることを含む。これにより、各店でどの製品が見つかったか、および店内のその製品の位置に関する詳細を含む、店による小売状態に関する情報のデータベースの作成が可能となる。例えば、イメージ認識モジュール23は、各取込みイメージ内の各小売店状態をライブラリ24と比較して、(例えば、イメージ内で見つかった各UPCを識別しようと試みることによって)各取込みイメージ内に出現する製品を識別することができる。複数の中央演算処理装置(「CPU」)にわたって処理を分割することができ、その結果、CPUは、次のレポートが期限となる前に処理を完了する。処理時間を加速するために、イメージ認識モジュール23は、各イメージについてライブラリ24の関連する部分のみを使用することができる。例えば、イメージ認識モジュール23がディスプレイのみを分析している場合、イメージ認識モジュール23は、通路端ディスプレイ上に一般的に存在する5000個程度のUPCを使用することができ、または缶詰商品区画内のイメージのみを分析している場合、ライブラリ24内の冷凍製品イメージを分析しない。
ライブラリ24は、UPC、棚タグ、製品イメージ、および/またはイメージ認識モジュール23が1つまたは複数の取込みイメージ内の1つまたは複数の小売店状態を識別することを可能にする任意の他の情報を含むことができる。例えば、化粧品売場は、UPC間の主な違いが色だけである非常に小さい製品を有することがある。イメージ認識を完了するために、各イメージに対して複数のパスを実施しなければならないことがある。例えば、製品上の少量のテキストのみが相異なるUPCを区別することができるいくつかのカテゴリが存在する。こうしたタイプのUPCに、ライブラリ内でフラグを立てることができる。フラグを立てたUPCが配置される場合、異なるビジネス規則を使用してイメージが再び処理される。例えば、こうした製品のうちのただ1つが画像内で見つかった場合、説明、UPCバーコード、および関連標識を含む棚タグ上の情報などの追加の情報を使用して識別プロセスを完了することができる。ディスプレイについて、厚紙箱(cardboard box)および/またはシッパ(shipper)上の情報が使用される。
本開示の一実施形態によれば、イメージ認識モジュール23は、1つまたは複数の取込みイメージをサードパーティベンダライブラリと比較することによって特定の標識および店内バナーを見つけることができる。
各イメージ内の1つまたは複数の小売店状態を識別し、関連情報を得た後、この情報がデータベース25に格納される。例えば、識別した各小売店状態について、イメージ取込みの日付、イメージ取込みの時刻、画像識別、店番号、ユーザ識別、平面図、店の位置、設備、設備図、シーケンス位置、処理位置区画、UPC、量、マーチャンダイジング識別、イメージ内のX/Y位置、処理日付/時刻、ソフトウェアバージョンなどの情報をデータベースに格納することができる。例えば、イメージ取込みの日付は、画像が撮影された日付に関係し、イメージ取込みの時刻は、画像が撮影された時刻に関係し、それを、関連する時間帯に関する地方時間に変換することができる。画像識別は、画像が処理位置2にアップロードされるときに画像に割り当てられるファイル名または識別タグでよい。この識別をアドホック報告モードで使用して、イメージを得ることができる。店番号は、米国内のあらゆる店に割り当てられた番号IDである。米国内のあらゆる小売店の物理的位置が地球の緯度および経度で識別される市販のデータベースが存在する。このデータベースは、小売名などの各小売位置についての他の情報も含む。この情報を使用して、モバイル取込みユニットの小売監査の物理的位置および小売元を確認かつ記録することができる。ユーザ識別は、イメージ取込みユニット21の監査人またはオペレータの識別に関係する。平面図は、ソフトウェアが店設備を実際のフロア設計図にマッピングする場合に使用することのできるフィールドである。店内の位置を識別するのに1つまたは複数のデータフィールドを使用しなければならないことがある。設備フィールドには、イメージ取込みが開始した場合にイメージが入力される。設備ビューフィールドには、イメージ取込みが終了した場合にイメージが入力される。シーケンス位置は、画像をローカルグループ(すなわち通路全体)として互いにスティッチングする助けになる内部シーケンス番号が関係する。処理位置区画は、UPCおよび物理位置を使用することで区画を推定または計算することのできるイメージ認識モジュール23によって計算されるフィールドでよい。UPCは、イメージ内で見つかった製品のUPCである。イメージ内で見つかった各UPCについてテーブル内に1つのレコードが存在することになる。量フィールドは、画像内で見つかったUPCの数に関係する。例えば、棚が製品の3つの外装面を有する場合、量は3となる。マーチャンダイジング識別は、シェルフトーカ(shelf−talker)やバナーなどの棚ラベルおよび店内標識とを識別するのに使用することのできるフィールドである。イメージ内のX/Y位置は、製品が見つかったイメージ内の位置に関係する。例えば、これを使用して、棚の上のどこに製品が配置されたか、およびこれが会社の指示に従っていたか否かを識別することができる。X/Y位置の別の使用法は、クライアントによって識別されたデータ精度の問題を調査し、それに対処することでよい。処理日付/時刻は、イメージ認識モジュール23が画像を処理し、このイメージ内の特定の製品を識別した日付である。ソフトウェアバージョンは、製品を識別したイメージ認識モジュール23によって使用されるイメージ認識ソフトウェアのバージョンである。
報告エンジン26は、任意の所与の時刻に関する任意の小売店内の任意の位置での小売店内の任意の取込みイメージへのアクセスを提供することができる。例えば、アドホックイメージビューアを介して、フィルタを使用して個々のイメージを1度に1つ引き上げることができる。フィルタにより、ユーザは、日付範囲、時刻、店、製品などの検索パラメータを選択することが可能となる。個々のイメージを見るとき、ユーザは、時刻の順方向または逆方向に反転して、同じ位置が経時的にどう見えるか、またはどう見えることになるかを確認することができる。特定のイメージを見るとき、ユーザは、プラノグラム上の同一の識別位置を複数の店にわたって見ることができる。仮想店ウォークスルービューアを介して、小売店状態のイメージを2次元または3次元で順次閲覧することができる。ビューアは、1つまたは複数の小売店状態についてのイメージを引き上げて、各イメージを「ウォークスルー」することができる。同一の店設備および位置の重複イメージがある場合、ビューアは、重複イメージを除去することができ、または重複イメージに関する異なる閲覧オプションを提供することができる。イメージ内にギャップがある場合、ビューアは、標準壁紙でギャップを埋めることができる。
1つまたは複数の取込みイメージおよび関連情報が分析され、1つまたは複数の概要レポートおよび/または警報が生成される。店、日付、時刻、および製品によって情報を詳述する、店内小売状態の自動警報およびレポートを自動的にクライアントに送ることができる。警報は構成可能であり、テーブル駆動され、処理位置2が警報をトリガするビジネス規則を容易にセットアップすることが可能となる。例えば、店が、取込みイメージを送る期限が過ぎた状態である場合、店が特定の製品をディスプレイすることを怠った場合、マーチャンダイジングが許可されていない製品がディスプレイ上に見つかった場合、または任意の他のユーザ定義の警報である。警報をコンピュータ、ラップトップ、携帯情報端末、携帯電話、および任意の他のハンドヘルド装置に送信することができる。メッセージ内にウェブリンクを埋め込むことができ、その結果、装置がブラウザ支援を有する場合、受信側は、支援レポートまたはイメージに直接進むことができる。可能なときには、個々のユーザが短い時間フレームで関連する大量のEメールを受信しないように警報が組み合わされる。
レポートは、店、ゾーン、チェーン、または任意の他の位置を含む概要レベルで動作することができる。レポートは、店内の位置(すなわち、エンドキャップ、通路など)ごとの結果を報告してよい。ディスプレイ上の製品について、レポートは、製品がディスプレイ上にあった日数、UPC、説明、ブランド、サイズなどの要約を含むことができる。本開示の一実施形態によれば、小売販売地点データ(retail point of sale data)を小売店状態と統合して、ほぼリアルタイムのポストプロモーション分析(post promotion analysis)を実現することができる。販売地点データが処理位置2によって統合されるとき、レポートは、通常価格、販売価格、ベースボリューム、実際のボリューム、リフト、商品UPC、ブランド説明、サイズ、カテゴリ要約、カテゴリベース、実際のカテゴリ、カテゴリリフト、カテゴリ目標利益率、カテゴリ実利益率、参加販売促進ブランド概要などのうちの1つまたは複数に関する情報を含むことができる。
図7〜12に、本発明の一実施形態による、小売店ディスプレイコンプライアンスを測定する方法を使用して生成されたサンプルレポートを示す。例えば、図8は、店ごとにディスプレイコンプライアンスを示すレポートを示す。図9は、地域レベルでディスプレイコンプライアンスを表示するレポートを示し、図10は、地区レベルでディスプレイコンプライアンスを表示するレポートを示し、図11は、小売業者レベルでディスプレイコンプライアンスを表示するレポートを示し、図12は、競合ブランドごとにディスプレイコンプライアンスを表示するレポートを示す。リポジトリ25に格納されたデータと、1つまたは複数の外部データリポジトリ27からの外部データとを使用することによって各レポートを生成することができる。例えば、店に関する情報を、固有小売店識別番号、名前、説明、住所、親会社、取引のクラス、フォーマット、ならびに他の情報および属性を含むすべての店のリストを含む外部データリポジトリ27に格納することができる。親会社に関する情報を、説明、住所、および/または任意の他の情報を含むすべての親会社のリストを含む外部データリポジトリ27に格納することができる。これにより、親会社への個々の店バナーの情報をすべてロールアップすることが可能となる。UPCに関する情報を、UPC説明、製品寸法、いくつかの角度からの製品イメージ、および他の属性を含むすべての製品のリストを含む外部データリポジトリ27に格納することができる。ブランドに関する情報を、説明、カテゴリ、製造業者などを含むすべてのブランドのリストを含む外部データリポジトリ27に格納することができる。カテゴリおよび製造業者に関する情報も外部データリポジトリ27に格納することができる。
本開示の一実施形態による、小売店ディスプレイコンプライアンスを測定するコンピュータ実行可能コードを含むコンピュータ記憶媒体は、1つまたは複数の小売店状態の1つまたは複数のイメージを取り込むコードと、1つまたは複数の取込みイメージを関連情報と関連付けるコードと、1つまたは複数の取込みイメージおよび関連情報を格納および処理のために処理位置に送信するコードと、1つまたは複数の取込みイメージおよび関連情報を処理位置で受信し、1つまたは複数の取込みイメージおよび関連情報をリポジトリに格納するコードと、1つまたは複数の取込みイメージを処理するコードと、1つまたは複数の取込みイメージ内の1つまたは複数の小売店状態をライブラリと比較し、1つまたは複数の小売店状態を識別し、1つまたは複数の小売店状態についての識別情報を得るコードと、1つまたは複数の小売店状態に関する1つまたは複数の識別後取込みイメージおよび識別情報をリポジトリに格納するコードと、1つまたは複数の取込みイメージおよび識別情報内の1つまたは複数の小売店状態を分析するコードと、分析に基づいて1つまたは複数の概要レポートあるいは1つまたは複数の警報を生成するコードとを含む。
本開示の一実施形態による、1つまたは複数の小売店状態の1つまたは複数のイメージを取り込むコードは、機器の位置を識別かつ検証するコードと、1つまたは複数の小売店状態の1つまたは複数のイメージを取り込むコードと、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを格納するコードと、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを処理するコードと、1つまたは複数の小売店状態の1つまたは複数の取込みイメージを処理位置に送信するコードと、1つまたは複数の小売店状態の1つまたは複数の取込みイメージが処理位置に首尾よく送られたかどうかを示す確認を生成するコードとをさらに含む。
上記の教示に照らして、本発明の多数の追加の修正形態および変形形態が可能である。
Claims (1)
- 小売店ディスプレイコンプライアンスを測定する方法であって、
1つまたは複数の小売店状態の1つまたは複数のイメージを取り込むステップと、
前記1つまたは複数の取込みイメージを関連情報と関連付けるステップと、
前記1つまたは複数の取込みイメージおよび前記関連情報を格納および処理のために処理位置に送信するステップと、
前記1つまたは複数の取込みイメージおよび前記関連情報を前記処理位置で受信し、前記1つまたは複数の取込みイメージおよび関連情報をリポジトリに格納するステップと、
前記1つまたは複数の取込みイメージを処理するステップと、
前記1つまたは複数の取込みイメージ内の前記1つまたは複数の小売店状態をライブラリと比較し、前記1つまたは複数の小売店状態を識別し、前記1つまたは複数の小売店状態についての識別情報を得るステップと、
前記1つまたは複数の小売店状態に関する前記1つまたは複数の識別後取込みイメージおよび識別情報を前記リポジトリに格納するステップと、
前記1つまたは複数の取込みイメージおよび識別情報内の前記1つまたは複数の小売店状態を分析するステップと、
前記分析に基づいて1つまたは複数の概要レポートあるいは1つまたは複数の警報を生成するステップと
を含む方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US67080205P | 2005-04-13 | 2005-04-13 | |
PCT/US2006/013703 WO2006113281A2 (en) | 2005-04-13 | 2006-04-12 | System and method for measuring display compliance |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008537226A true JP2008537226A (ja) | 2008-09-11 |
Family
ID=37115676
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008506646A Pending JP2008537226A (ja) | 2005-04-13 | 2006-04-12 | 小売店ディスプレイコンプライアンスを自動的に測定する方法およびシステム |
Country Status (9)
Country | Link |
---|---|
US (1) | US8429004B2 (ja) |
EP (1) | EP1872264A4 (ja) |
JP (1) | JP2008537226A (ja) |
CN (1) | CN101160576B (ja) |
AU (1) | AU2006236789A1 (ja) |
BR (1) | BRPI0610589A2 (ja) |
CA (1) | CA2603522A1 (ja) |
MX (1) | MX2007012658A (ja) |
WO (1) | WO2006113281A2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016117600A1 (ja) * | 2015-01-22 | 2016-07-28 | 日本電気株式会社 | 商品棚割管理装置及び商品棚割管理方法 |
JP2017014014A (ja) * | 2015-06-26 | 2017-01-19 | 東芝テック株式会社 | 画像処理装置 |
JP2021009674A (ja) * | 2020-01-21 | 2021-01-28 | 株式会社スタディスト | メーカーが販売を希望する商品の販売促進作業を管理するための装置およびその装置において実行されるプログラム |
JP2021009610A (ja) * | 2019-07-02 | 2021-01-28 | 株式会社スタディスト | メーカーが販売を希望する商品の販売促進作業を管理するための装置およびその装置において実行されるプログラム |
Families Citing this family (168)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7287001B1 (en) | 1995-07-31 | 2007-10-23 | Ipms, Inc. | Electronic product information display system |
US20140254896A1 (en) * | 2011-07-18 | 2014-09-11 | Tiger T G Zhou | Unmanned drone, robot system for delivering mail, goods, humanoid security, crisis negotiation, mobile payments, smart humanoid mailbox and wearable personal exoskeleton heavy load flying machine |
AU2006236789A1 (en) * | 2005-04-13 | 2006-10-26 | Store Eyes, Inc. | System and method for measuring display compliance |
US20130002903A1 (en) * | 2006-04-13 | 2013-01-03 | Manico Joseph A | Camera user input based image value index |
US20080077510A1 (en) * | 2006-09-21 | 2008-03-27 | Polymer Logistics Bv | Method And System For Providing Security Surveillance And Shelf Monitoring Functions |
US7693757B2 (en) * | 2006-09-21 | 2010-04-06 | International Business Machines Corporation | System and method for performing inventory using a mobile inventory robot |
US20080215460A1 (en) * | 2007-01-31 | 2008-09-04 | Mckibben Michael T | Merchandise location system |
WO2008108095A1 (ja) * | 2007-03-05 | 2008-09-12 | Japan Tobacco Inc. | データ処理装置、コンピュータプログラム、データ記憶媒体 |
WO2008108094A1 (ja) * | 2007-03-05 | 2008-09-12 | Japan Tobacco Inc. | データ処理装置、コンピュータプログラム、データ記憶媒体 |
US20100031158A1 (en) * | 2007-03-05 | 2010-02-04 | Norikazu Takashima | Data processing device, computer program, data storage medium |
JP5037248B2 (ja) * | 2007-07-17 | 2012-09-26 | 株式会社日立製作所 | 情報収集システムおよび情報収集ロボット |
US8630924B2 (en) * | 2007-08-31 | 2014-01-14 | Accenture Global Services Limited | Detection of stock out conditions based on image processing |
US8189855B2 (en) * | 2007-08-31 | 2012-05-29 | Accenture Global Services Limited | Planogram extraction based on image processing |
US8009864B2 (en) * | 2007-08-31 | 2011-08-30 | Accenture Global Services Limited | Determination of inventory conditions based on image processing |
US9135491B2 (en) | 2007-08-31 | 2015-09-15 | Accenture Global Services Limited | Digital point-of-sale analyzer |
US7949568B2 (en) * | 2007-08-31 | 2011-05-24 | Accenture Global Services Limited | Determination of product display parameters based on image processing |
US8483473B2 (en) * | 2008-01-18 | 2013-07-09 | Mitek Systems, Inc. | Systems and methods for obtaining financial offers using mobile image capture |
US20090192921A1 (en) * | 2008-01-24 | 2009-07-30 | Michael Alan Hicks | Methods and apparatus to survey a retail environment |
US20090204512A1 (en) * | 2008-02-11 | 2009-08-13 | Connell Ii Jonathan H | Method and system for determining a restocking state of a product |
US8494909B2 (en) * | 2009-02-09 | 2013-07-23 | Datalogic ADC, Inc. | Automatic learning in a merchandise checkout system with visual recognition |
US9367851B2 (en) * | 2009-09-17 | 2016-06-14 | Information Planning & Management Service, Inc. | System and method for managing compliance with retail display regulations across a plurality of jurisdictions |
WO2011063527A1 (en) * | 2009-11-27 | 2011-06-03 | Sentry Technology Corporation | Enterprise management system and auditing method employed thereby |
WO2011101800A1 (en) * | 2010-02-17 | 2011-08-25 | Alon Atsmon | Automatic method and system for visual analysis of object against preset |
JP5083395B2 (ja) * | 2010-09-17 | 2012-11-28 | カシオ計算機株式会社 | 情報読取装置及びプログラム |
DE102010047783A1 (de) * | 2010-10-08 | 2012-04-12 | Context Marketing Services Gmbh | System zur Bestandsprüfung, Anordnung und/oder Sortierung von in einem Verkaufsraum, in einer Verkaufsfläche und/oder in einem Regal angeordneten bzw. anzuordnenden Waren |
US8622284B1 (en) * | 2010-12-22 | 2014-01-07 | Amazon Technologies, Inc. | Determining and recording the locations of objects |
US11068954B2 (en) * | 2015-11-20 | 2021-07-20 | Voicemonk Inc | System for virtual agents to help customers and businesses |
US9041707B2 (en) * | 2011-06-01 | 2015-05-26 | Rbm Technologies | Confirming compliance with a configuration |
US9785898B2 (en) * | 2011-06-20 | 2017-10-10 | Hi-Tech Solutions Ltd. | System and method for identifying retail products and determining retail product arrangements |
US20130030915A1 (en) * | 2011-06-23 | 2013-01-31 | Qualcomm Incorporated | Apparatus and method for enhanced in-store shopping services using mobile device |
US11288472B2 (en) | 2011-08-30 | 2022-03-29 | Digimarc Corporation | Cart-based shopping arrangements employing probabilistic item identification |
US9367770B2 (en) | 2011-08-30 | 2016-06-14 | Digimarc Corporation | Methods and arrangements for identifying objects |
WO2013090603A1 (en) * | 2011-12-16 | 2013-06-20 | Cozad Thomas Michael Jr | Systems and methods for managing product location information |
US20130226683A1 (en) * | 2012-02-23 | 2013-08-29 | GM Global Technology Operations LLC | Online vehicle buying systems and methods |
JP5520992B2 (ja) * | 2012-03-30 | 2014-06-11 | 東芝テック株式会社 | 商品管理装置 |
CA2872762A1 (en) * | 2012-05-10 | 2013-11-14 | Sca Hygiene Products Ab | Method for assisting in locating a desired item in a storage location |
JP6043094B2 (ja) * | 2012-05-30 | 2016-12-14 | 辛東主 | 商品陳列情報集計システム |
US9836907B2 (en) * | 2012-06-12 | 2017-12-05 | Snap-On Incorporated | Tool training for automated tool control systems |
US9264500B2 (en) | 2012-06-12 | 2016-02-16 | Qualcomm Incorporated | Method and apparatus for optimized object searching |
US10026044B1 (en) | 2012-09-10 | 2018-07-17 | Amazon Technologies, Inc. | System and method for arranging an order |
CN102930264B (zh) * | 2012-09-29 | 2015-10-28 | 李炳华 | 基于图像识别技术的商品陈列信息采集分析系统及方法 |
US9663293B2 (en) * | 2012-10-08 | 2017-05-30 | Amazon Technologies, Inc. | Replenishing a retail facility |
US9185359B1 (en) | 2013-04-23 | 2015-11-10 | Target Brands, Inc. | Enterprise-wide camera data |
US9317775B2 (en) * | 2013-08-14 | 2016-04-19 | Ricoh Co., Ltd. | Recognition procedure for identifying multiple items in images |
US20150088701A1 (en) * | 2013-09-23 | 2015-03-26 | Daniel Norwood Desmarais | System and method for improved planogram generation |
US20160048714A1 (en) * | 2013-12-27 | 2016-02-18 | Empire Technology Development Llc | Data collection scheme |
US20150227884A1 (en) * | 2014-02-07 | 2015-08-13 | Oracle International Corporation | Ranged item indicator |
US10360566B2 (en) | 2014-04-07 | 2019-07-23 | Westrock Shared Services, Llc | Compliance system for display units in a retail setting |
US10176452B2 (en) | 2014-06-13 | 2019-01-08 | Conduent Business Services Llc | Store shelf imaging system and method |
US10453046B2 (en) * | 2014-06-13 | 2019-10-22 | Conduent Business Services, Llc | Store shelf imaging system |
GB2528963B (en) | 2014-08-07 | 2018-07-25 | Artform Int Ltd | Product display shelf, system and method |
EP3198530A4 (en) * | 2014-09-26 | 2018-05-09 | Asset Owl Pty Ltd | A management platform for a distribution network |
WO2016052383A1 (ja) * | 2014-09-30 | 2016-04-07 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
GB2530769B (en) * | 2014-10-01 | 2017-05-17 | Asda Stores Ltd | System and method for monitoring display unit compliance |
GB2533759A (en) * | 2014-10-01 | 2016-07-06 | Asda Stores Ltd | System and method for surveying display units in a retail store |
JP5942173B2 (ja) * | 2014-11-05 | 2016-06-29 | パナソニックIpマネジメント株式会社 | 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法 |
KR101610148B1 (ko) * | 2014-11-17 | 2016-04-08 | 현대자동차 주식회사 | 차체 검사 시스템 및 방법 |
US10671856B1 (en) | 2014-12-19 | 2020-06-02 | Amazon Technologies, Inc. | Detecting item actions and inventory changes at an inventory location |
US9996818B1 (en) | 2014-12-19 | 2018-06-12 | Amazon Technologies, Inc. | Counting inventory items using image analysis and depth information |
US10169677B1 (en) * | 2014-12-19 | 2019-01-01 | Amazon Technologies, Inc. | Counting stacked inventory using image analysis |
US10169660B1 (en) * | 2014-12-19 | 2019-01-01 | Amazon Technologies, Inc. | Counting inventory items using image analysis |
CN104616131B (zh) * | 2015-02-16 | 2018-12-21 | 北京任我在线电子商务有限公司 | 货架管理系统及方法 |
US20160260142A1 (en) | 2015-03-06 | 2016-09-08 | Wal-Mart Stores, Inc. | Shopping facility assistance systems, devices and methods to support requesting in-person assistance |
US20180099846A1 (en) | 2015-03-06 | 2018-04-12 | Wal-Mart Stores, Inc. | Method and apparatus for transporting a plurality of stacked motorized transport units |
WO2016142794A1 (en) | 2015-03-06 | 2016-09-15 | Wal-Mart Stores, Inc | Item monitoring system and method |
US11721414B2 (en) * | 2015-03-12 | 2023-08-08 | Walmart Apollo, Llc | Importing structured prescription records from a prescription label on a medication package |
US10552933B1 (en) | 2015-05-20 | 2020-02-04 | Digimarc Corporation | Image processing methods and arrangements useful in automated store shelf inspections |
CA2928391A1 (en) * | 2015-05-28 | 2016-11-28 | Wal-Mart Stores, Inc. | System for inventory management |
WO2016203282A1 (en) | 2015-06-18 | 2016-12-22 | The Nielsen Company (Us), Llc | Methods and apparatus to capture photographs using mobile devices |
US10452707B2 (en) | 2015-08-31 | 2019-10-22 | The Nielsen Company (Us), Llc | Product auditing in point-of-sale images |
US9767387B2 (en) * | 2015-09-09 | 2017-09-19 | Accenture Global Services Limited | Predicting accuracy of object recognition in a stitched image |
EP3357019A4 (en) * | 2015-09-30 | 2019-03-27 | The Nielsen Company (US), LLC. | INTERACTIVE EXAMINATION OF PRODUCTS WITH A MOBILE DEVICE |
WO2017091183A1 (en) * | 2015-11-26 | 2017-06-01 | Oleksandr Serhiiovych Mytskevych | Method for automated receiving and processing inventory levels data on at least one item type at sales outlets |
US10417696B2 (en) * | 2015-12-18 | 2019-09-17 | Ricoh Co., Ltd. | Suggestion generation based on planogram matching |
US10592854B2 (en) | 2015-12-18 | 2020-03-17 | Ricoh Co., Ltd. | Planogram matching |
EP3405074A1 (en) | 2016-01-18 | 2018-11-28 | DCI Marketing, Inc. dba DCI - Artform | Sensors, devices, adapters and mating structures for merchandisers and related methods |
GB2548475A (en) * | 2016-02-11 | 2017-09-20 | Wal Mart Stores Inc | A mobile camera-equipped device-based approach to assessing a display |
US9928438B2 (en) | 2016-03-10 | 2018-03-27 | Conduent Business Services, Llc | High accuracy localization system and method for retail store profiling via product image recognition and its corresponding dimension database |
GB2564306B (en) | 2016-03-16 | 2022-01-19 | Walmart Apollo Llc | System for verifying physical object absences from assigned regions using video analytics |
WO2017164968A1 (en) | 2016-03-23 | 2017-09-28 | Dci Marketing, Inc. Dba Dci - Artform | Low product indicator for self facing merchandiser and related methods |
CA2961938A1 (en) | 2016-04-01 | 2017-10-01 | Wal-Mart Stores, Inc. | Systems and methods for moving pallets via unmanned motorized unit-guided forklifts |
EP3459008A4 (en) | 2016-05-19 | 2019-11-27 | Simbe Robotics, Inc. | METHOD FOR MONITORING THE PLACEMENT OF PRODUCTS ON SHELVES IN A STORE |
EP3458235A4 (en) * | 2016-05-19 | 2019-11-27 | Simbe Robotics, Inc. | METHOD FOR THE AUTOMATIC PRODUCTION OF PATHWAY POINTS FOR THE IMAGING OF RAYS IN A STORE |
BR102016013037A2 (pt) * | 2016-06-07 | 2017-12-19 | Whirlpool S.A. | Product control process |
US10565554B2 (en) * | 2016-06-10 | 2020-02-18 | Walmart Apollo, Llc | Methods and systems for monitoring a retail shopping facility |
MX2019000335A (es) * | 2016-07-08 | 2019-06-10 | Walmart Apollo Llc | Aparato basado en exhibidor fisico de productos. |
WO2018053847A1 (zh) * | 2016-09-26 | 2018-03-29 | 达闼科技(北京)有限公司 | 一种智能库存管理系统、服务器、方法、终端和程序产品 |
US10210603B2 (en) | 2016-10-17 | 2019-02-19 | Conduent Business Services Llc | Store shelf imaging system and method |
US10019803B2 (en) | 2016-10-17 | 2018-07-10 | Conduent Business Services, Llc | Store shelf imaging system and method using a vertical LIDAR |
US10002344B2 (en) | 2016-10-17 | 2018-06-19 | Conduent Business Services, Llc | System and method for retail store promotional price tag detection |
US10289990B2 (en) | 2016-10-17 | 2019-05-14 | Conduent Business Services, Llc | Store shelf imaging system and method |
WO2018075662A2 (en) | 2016-10-18 | 2018-04-26 | Retail Space Solutions Llc | Illuminated merchandiser, retrofit kit and related methods |
US11042161B2 (en) | 2016-11-16 | 2021-06-22 | Symbol Technologies, Llc | Navigation control method and apparatus in a mobile automation system |
DE102016122163A1 (de) * | 2016-11-17 | 2018-05-17 | Endress+Hauser Conducta Gmbh+Co. Kg | Verfahren zur Online-Konfiguration und -Bestellung |
US11494783B2 (en) * | 2017-01-18 | 2022-11-08 | International Business Machines Corporation | Display and shelf space audit system |
JP2018117329A (ja) * | 2017-01-20 | 2018-07-26 | オリンパス株式会社 | 情報取得装置 |
JP6779150B2 (ja) * | 2017-02-03 | 2020-11-04 | 鹿島建設株式会社 | 情報取得装置 |
WO2018159132A1 (ja) * | 2017-03-03 | 2018-09-07 | 日本電気株式会社 | 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム |
US10438165B2 (en) * | 2017-03-07 | 2019-10-08 | Ricoh Company, Ltd. | Planogram generation |
WO2018165521A1 (en) * | 2017-03-10 | 2018-09-13 | Walmart Apollo, Llc | Systems and methods for robotic assistance with retail location monitoring |
US10726273B2 (en) | 2017-05-01 | 2020-07-28 | Symbol Technologies, Llc | Method and apparatus for shelf feature and object placement detection from shelf images |
DE112018002314T5 (de) | 2017-05-01 | 2020-01-23 | Symbol Technologies, Llc | Verfahren und vorrichtung zur erkennung eines objektstatus |
WO2018204342A1 (en) | 2017-05-01 | 2018-11-08 | Symbol Technologies, Llc | Product status detection system |
US11449059B2 (en) | 2017-05-01 | 2022-09-20 | Symbol Technologies, Llc | Obstacle detection for a mobile automation apparatus |
US10591918B2 (en) | 2017-05-01 | 2020-03-17 | Symbol Technologies, Llc | Fixed segmented lattice planning for a mobile automation apparatus |
US10949798B2 (en) | 2017-05-01 | 2021-03-16 | Symbol Technologies, Llc | Multimodal localization and mapping for a mobile automation apparatus |
US10663590B2 (en) | 2017-05-01 | 2020-05-26 | Symbol Technologies, Llc | Device and method for merging lidar data |
US11367092B2 (en) | 2017-05-01 | 2022-06-21 | Symbol Technologies, Llc | Method and apparatus for extracting and processing price text from an image set |
US10505057B2 (en) | 2017-05-01 | 2019-12-10 | Symbol Technologies, Llc | Device and method for operating cameras and light sources wherein parasitic reflections from a paired light source are not reflected into the paired camera |
WO2018201423A1 (en) | 2017-05-05 | 2018-11-08 | Symbol Technologies, Llc | Method and apparatus for detecting and interpreting price label text |
US10664704B2 (en) | 2017-05-18 | 2020-05-26 | Walmart Apollo, Llc | Systems, devices, and methods for monitoring object locations |
KR101810673B1 (ko) * | 2017-05-23 | 2018-01-25 | 링크플로우 주식회사 | 촬상 위치 정보를 결정하는 방법 및 이러한 방법을 수행하는 장치 |
US20180365616A1 (en) * | 2017-06-20 | 2018-12-20 | Walmart Apollo, Llc | Systems and methods for management of inventory audits |
WO2019005951A1 (en) | 2017-06-29 | 2019-01-03 | Walmart Apollo, Llc | SYSTEMS AND METHODS FOR REALIZING AND MONITORING ASSET INSPECTIONS |
KR20190007681A (ko) * | 2017-07-13 | 2019-01-23 | 삼성에스디에스 주식회사 | 매장 분석 장치 및 방법 |
KR102003691B1 (ko) * | 2017-07-31 | 2019-07-25 | 코닉오토메이션 주식회사 | 소품 등록 시스템 |
US10521914B2 (en) | 2017-09-07 | 2019-12-31 | Symbol Technologies, Llc | Multi-sensor object recognition system and method |
US10572763B2 (en) | 2017-09-07 | 2020-02-25 | Symbol Technologies, Llc | Method and apparatus for support surface edge detection |
US11308516B2 (en) | 2017-09-29 | 2022-04-19 | Nec Corporation | Information processing apparatus, information processing method, and program for identifying whether an advertisement is positioned in association with a product |
US10452924B2 (en) | 2018-01-10 | 2019-10-22 | Trax Technology Solutions Pte Ltd. | Withholding alerts due to temporary shelf occlusion |
EP3754545A1 (en) | 2018-01-10 | 2020-12-23 | Trax Technology Solutions Pte Ltd. | Automatically monitoring retail products based on captured images |
CA3088511A1 (en) * | 2018-01-27 | 2019-08-01 | Walmart Apollo, Llc | Dynamic flex-space allocation system |
US10740911B2 (en) | 2018-04-05 | 2020-08-11 | Symbol Technologies, Llc | Method, system and apparatus for correcting translucency artifacts in data representing a support structure |
US11327504B2 (en) | 2018-04-05 | 2022-05-10 | Symbol Technologies, Llc | Method, system and apparatus for mobile automation apparatus localization |
US10832436B2 (en) | 2018-04-05 | 2020-11-10 | Symbol Technologies, Llc | Method, system and apparatus for recovering label positions |
US10809078B2 (en) | 2018-04-05 | 2020-10-20 | Symbol Technologies, Llc | Method, system and apparatus for dynamic path generation |
US10823572B2 (en) | 2018-04-05 | 2020-11-03 | Symbol Technologies, Llc | Method, system and apparatus for generating navigational data |
US11506483B2 (en) | 2018-10-05 | 2022-11-22 | Zebra Technologies Corporation | Method, system and apparatus for support structure depth determination |
US11010920B2 (en) | 2018-10-05 | 2021-05-18 | Zebra Technologies Corporation | Method, system and apparatus for object detection in point clouds |
US10776893B2 (en) * | 2018-10-19 | 2020-09-15 | Everseen Limited | Adaptive smart shelf for autonomous retail stores |
US11003188B2 (en) | 2018-11-13 | 2021-05-11 | Zebra Technologies Corporation | Method, system and apparatus for obstacle handling in navigational path generation |
US11090811B2 (en) | 2018-11-13 | 2021-08-17 | Zebra Technologies Corporation | Method and apparatus for labeling of support structures |
US11079240B2 (en) | 2018-12-07 | 2021-08-03 | Zebra Technologies Corporation | Method, system and apparatus for adaptive particle filter localization |
US11416000B2 (en) | 2018-12-07 | 2022-08-16 | Zebra Technologies Corporation | Method and apparatus for navigational ray tracing |
US11100303B2 (en) | 2018-12-10 | 2021-08-24 | Zebra Technologies Corporation | Method, system and apparatus for auxiliary label detection and association |
US11015938B2 (en) | 2018-12-12 | 2021-05-25 | Zebra Technologies Corporation | Method, system and apparatus for navigational assistance |
US10731970B2 (en) | 2018-12-13 | 2020-08-04 | Zebra Technologies Corporation | Method, system and apparatus for support structure detection |
US11126861B1 (en) | 2018-12-14 | 2021-09-21 | Digimarc Corporation | Ambient inventorying arrangements |
CA3028708A1 (en) | 2018-12-28 | 2020-06-28 | Zih Corp. | Method, system and apparatus for dynamic loop closure in mapping trajectories |
US11966929B2 (en) * | 2019-02-05 | 2024-04-23 | Infilect Technologies Private Limited | System and method for quantifying brand visibility and compliance metrics for a brand |
US11263615B2 (en) * | 2019-03-01 | 2022-03-01 | Visa International Service Association | System, method, and computer program product for authentication by augmented reality for fraud prevention |
US10997414B2 (en) * | 2019-03-29 | 2021-05-04 | Toshiba Global Commerce Solutions Holdings Corporation | Methods and systems providing actions related to recognized objects in video data to administrators of a retail information processing system and related articles of manufacture |
CN110070064B (zh) * | 2019-04-29 | 2023-03-24 | 成都云盯科技有限公司 | 一种商品货架整洁度识别方法及系统 |
US11080566B2 (en) | 2019-06-03 | 2021-08-03 | Zebra Technologies Corporation | Method, system and apparatus for gap detection in support structures with peg regions |
US11662739B2 (en) | 2019-06-03 | 2023-05-30 | Zebra Technologies Corporation | Method, system and apparatus for adaptive ceiling-based localization |
US11960286B2 (en) | 2019-06-03 | 2024-04-16 | Zebra Technologies Corporation | Method, system and apparatus for dynamic task sequencing |
US11200677B2 (en) | 2019-06-03 | 2021-12-14 | Zebra Technologies Corporation | Method, system and apparatus for shelf edge detection |
US11151743B2 (en) | 2019-06-03 | 2021-10-19 | Zebra Technologies Corporation | Method, system and apparatus for end of aisle detection |
US11341663B2 (en) | 2019-06-03 | 2022-05-24 | Zebra Technologies Corporation | Method, system and apparatus for detecting support structure obstructions |
US11402846B2 (en) | 2019-06-03 | 2022-08-02 | Zebra Technologies Corporation | Method, system and apparatus for mitigating data capture light leakage |
US11915192B2 (en) | 2019-08-12 | 2024-02-27 | Walmart Apollo, Llc | Systems, devices, and methods for scanning a shopping space |
US11341448B2 (en) * | 2019-08-29 | 2022-05-24 | Meiyume Holdings (BVI) Limited | Systems and methods for cosmetics products retail displays |
US11334849B2 (en) | 2019-08-29 | 2022-05-17 | Meiyume Holdings (B.V.I.) Limited | Systems and methods for cosmetics products retail displays |
US11507103B2 (en) | 2019-12-04 | 2022-11-22 | Zebra Technologies Corporation | Method, system and apparatus for localization-based historical obstacle handling |
US11107238B2 (en) | 2019-12-13 | 2021-08-31 | Zebra Technologies Corporation | Method, system and apparatus for detecting item facings |
WO2021159010A1 (en) * | 2020-02-05 | 2021-08-12 | Simbe Robotics, Inc | Method for tracking and maintaining promotional states of slots in inventory structures within a store |
US11822333B2 (en) | 2020-03-30 | 2023-11-21 | Zebra Technologies Corporation | Method, system and apparatus for data capture illumination control |
CA3177901C (en) * | 2020-06-01 | 2024-01-02 | Ido Merkado | Systems and methods for retail environments |
US11450024B2 (en) | 2020-07-17 | 2022-09-20 | Zebra Technologies Corporation | Mixed depth object detection |
CN111860462B (zh) * | 2020-08-07 | 2024-02-20 | 多点(深圳)数字科技有限公司 | 货架陈列反馈方法和装置 |
US11341456B2 (en) | 2020-08-25 | 2022-05-24 | Datalogic Usa, Inc. | Compact and low-power shelf monitoring system |
US20220075907A1 (en) * | 2020-09-09 | 2022-03-10 | Sap Se | Planogram management system |
US11593915B2 (en) | 2020-10-21 | 2023-02-28 | Zebra Technologies Corporation | Parallax-tolerant panoramic image generation |
US11392891B2 (en) | 2020-11-03 | 2022-07-19 | Zebra Technologies Corporation | Item placement detection and optimization in material handling systems |
US11847832B2 (en) | 2020-11-11 | 2023-12-19 | Zebra Technologies Corporation | Object classification for autonomous navigation systems |
US11393597B1 (en) | 2021-01-30 | 2022-07-19 | Walmart Apollo, Llc | Prescription label scanner |
US11954882B2 (en) | 2021-06-17 | 2024-04-09 | Zebra Technologies Corporation | Feature-based georegistration for mobile computing devices |
US20230274225A1 (en) * | 2022-01-31 | 2023-08-31 | Walmart Apollo, Llc | Methods and apparatus for generating planograms |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1994027408A1 (en) * | 1993-05-14 | 1994-11-24 | Rct Systems, Inc. | Video traffic monitor for retail establishments and the like |
KR0152788B1 (ko) * | 1994-11-26 | 1998-10-15 | 이헌조 | 디지탈 영상 시스템의 복사 방지 방법 및 장치 |
JP2001036893A (ja) * | 1999-07-19 | 2001-02-09 | Matsushita Electric Ind Co Ltd | 監視装置 |
AUPQ212499A0 (en) * | 1999-08-10 | 1999-09-02 | Ajax Cooke Pty Ltd | Item recognition method and apparatus |
US7526440B2 (en) * | 2000-06-12 | 2009-04-28 | Walker Digital, Llc | Method, computer product, and apparatus for facilitating the provision of opinions to a shopper from a panel of peers |
US7016532B2 (en) * | 2000-11-06 | 2006-03-21 | Evryx Technologies | Image capture and identification system and process |
US6584375B2 (en) * | 2001-05-04 | 2003-06-24 | Intellibot, Llc | System for a retail environment |
US7206753B2 (en) * | 2001-05-04 | 2007-04-17 | Axxon Robotics, Llc | Methods for facilitating a retail environment |
US20030036985A1 (en) * | 2001-08-15 | 2003-02-20 | Soderholm Mark J. | Product locating system for use in a store or other facility |
CA2460892A1 (en) * | 2001-09-18 | 2003-03-27 | Pro-Corp Holdings International Limited | Image recognition inventory management system |
US7374096B2 (en) | 2001-11-21 | 2008-05-20 | Goliath Solutions, Llc | Advertising compliance monitoring system |
US6837427B2 (en) * | 2001-11-21 | 2005-01-04 | Goliath Solutions, Llc. | Advertising compliance monitoring system |
US20030133614A1 (en) * | 2002-01-11 | 2003-07-17 | Robins Mark N. | Image capturing device for event monitoring |
US7356495B2 (en) * | 2002-06-04 | 2008-04-08 | Sap Aktiengesellschaft | Supply chain management using item detection system |
CN2542010Y (zh) * | 2002-06-05 | 2003-03-26 | 北京大恒正智电子科技发展有限公司 | 多功能视频监控信号处理装置 |
US20050055223A1 (en) * | 2003-09-04 | 2005-03-10 | Rajesh Khosla | Method and implementation for real time retail |
WO2005033645A1 (en) * | 2003-09-30 | 2005-04-14 | Intrinsic Marks International Llc | Item monitoring system and methods |
WO2005076852A2 (en) * | 2004-02-04 | 2005-08-25 | Perseus Wireless, Inc. | Method and system for providing information to remote clients |
EP1716518A4 (en) * | 2004-02-12 | 2009-11-25 | Spar Group Inc | SYSTEM AND METHOD FOR USING THE HIGH FREQUENCY IDENTIFICATION OF GOODS MANAGEMENT |
US7631808B2 (en) * | 2004-06-21 | 2009-12-15 | Stoplift, Inc. | Method and apparatus for detecting suspicious activity using video analysis |
US20060163349A1 (en) * | 2004-09-30 | 2006-07-27 | W5 Networks, Inc. | Wireless systems suitable for retail automation and promotion |
US20060109125A1 (en) * | 2004-11-08 | 2006-05-25 | Goliath Solutions Llc. | System for RF detection and location determination of merchandising materials in retail environments |
US7535337B2 (en) * | 2004-11-18 | 2009-05-19 | Goliath Solutions, Llc | Systems and methods for monitoring open stock merchandising |
US7510123B2 (en) * | 2004-11-18 | 2009-03-31 | Goliath Solutions, Llc | RF contact signal detector |
WO2006055667A2 (en) * | 2004-11-19 | 2006-05-26 | Goliath Solutions L.L.C. | Low stock alert system |
US7646887B2 (en) * | 2005-01-04 | 2010-01-12 | Evolution Robotics Retail, Inc. | Optical flow for object recognition |
EP1696397A3 (en) * | 2005-02-23 | 2007-10-24 | Prospect SA | Method and apparatus for monitoring |
AU2006236789A1 (en) * | 2005-04-13 | 2006-10-26 | Store Eyes, Inc. | System and method for measuring display compliance |
US20100171826A1 (en) * | 2006-04-12 | 2010-07-08 | Store Eyes, Inc. | Method for measuring retail display and compliance |
-
2006
- 2006-04-12 AU AU2006236789A patent/AU2006236789A1/en not_active Abandoned
- 2006-04-12 EP EP06758315A patent/EP1872264A4/en not_active Withdrawn
- 2006-04-12 BR BRPI0610589-0A patent/BRPI0610589A2/pt not_active Application Discontinuation
- 2006-04-12 US US11/887,599 patent/US8429004B2/en not_active Expired - Fee Related
- 2006-04-12 WO PCT/US2006/013703 patent/WO2006113281A2/en active Application Filing
- 2006-04-12 CN CN2006800123503A patent/CN101160576B/zh not_active Expired - Fee Related
- 2006-04-12 JP JP2008506646A patent/JP2008537226A/ja active Pending
- 2006-04-12 CA CA002603522A patent/CA2603522A1/en not_active Abandoned
- 2006-04-12 MX MX2007012658A patent/MX2007012658A/es active IP Right Grant
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016117600A1 (ja) * | 2015-01-22 | 2016-07-28 | 日本電気株式会社 | 商品棚割管理装置及び商品棚割管理方法 |
JPWO2016117600A1 (ja) * | 2015-01-22 | 2017-11-09 | 日本電気株式会社 | 商品棚割管理装置及び商品棚割管理方法 |
US10872264B2 (en) | 2015-01-22 | 2020-12-22 | Nec Corporation | Shelf space allocation management device and shelf space allocation management method |
US10891470B2 (en) | 2015-01-22 | 2021-01-12 | Nec Corporation | Shelf space allocation management device and shelf space allocation management method |
JP2017014014A (ja) * | 2015-06-26 | 2017-01-19 | 東芝テック株式会社 | 画像処理装置 |
JP2021009610A (ja) * | 2019-07-02 | 2021-01-28 | 株式会社スタディスト | メーカーが販売を希望する商品の販売促進作業を管理するための装置およびその装置において実行されるプログラム |
JP2021009674A (ja) * | 2020-01-21 | 2021-01-28 | 株式会社スタディスト | メーカーが販売を希望する商品の販売促進作業を管理するための装置およびその装置において実行されるプログラム |
Also Published As
Publication number | Publication date |
---|---|
WO2006113281B1 (en) | 2007-03-01 |
EP1872264A4 (en) | 2010-07-07 |
CN101160576A (zh) | 2008-04-09 |
WO2006113281A3 (en) | 2007-01-18 |
CA2603522A1 (en) | 2006-10-26 |
AU2006236789A1 (en) | 2006-10-26 |
US8429004B2 (en) | 2013-04-23 |
EP1872264A2 (en) | 2008-01-02 |
MX2007012658A (es) | 2007-12-13 |
CN101160576B (zh) | 2010-05-19 |
US20080306787A1 (en) | 2008-12-11 |
BRPI0610589A2 (pt) | 2010-07-06 |
WO2006113281A2 (en) | 2006-10-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8429004B2 (en) | Method and system for automatically measuring retail store display compliance | |
US20100171826A1 (en) | Method for measuring retail display and compliance | |
US10373116B2 (en) | Intelligent inventory management and related systems and methods | |
CA3177901C (en) | Systems and methods for retail environments | |
JP7009389B2 (ja) | 環境内のコンピュータビジョン駆動型アプリケーションのためのシステムおよび方法 | |
CN107331051B (zh) | 无人值守的移动式零售店系统及零售方法 | |
JP5866559B2 (ja) | コンピュータシステムおよび店内通路を管理する方法 | |
US10706386B2 (en) | Machine learning inventory management | |
JP5958723B2 (ja) | 待ち行列管理のためのシステム及び方法 | |
US7825792B2 (en) | Systems and methods for distributed monitoring of remote sites | |
US8195499B2 (en) | Identifying customer behavioral types from a continuous video stream for use in optimizing loss leader merchandizing | |
JP5508848B2 (ja) | リモートサイトの分散監視のためのシステム及び方法 | |
WO2007117368A2 (en) | Method for measuring retail display and compliance | |
WO2020163217A1 (en) | Systems, method and apparatus for frictionless shopping | |
US20220284384A1 (en) | On-Shelf Image Based Barcode Reader for Inventory Management System | |
CA2648776A1 (en) | Method and apparatus for automatically measuring retail store display and shelf compliance | |
US11676225B1 (en) | System and method of automated real estate management | |
US11720986B1 (en) | System and method of automated real estate analysis | |
US20230101275A1 (en) | Audited training data for an item recognition machine learning model system | |
US11416803B1 (en) | Automatic retail, display management |