JP7483984B2 - 支援システム、支援装置及び情報処理プログラム - Google Patents

Description

本発明の実施形態は、支援システム、支援装置及び情報処理プログラムに関する。

売場に陳列した商品を販売するスーパーマーケットなどのような店舗においては、店員が売場を巡回しつつ、商品の補充などの作業を行っている。
このような作業は、店員の判断により行われることが多く、店員にとっての大きな負荷となる恐れがあった。また店員が不慣れである場合などにおいては、行われるべき作業が行われない恐れがあった。
このような事情から、店舗における商品陳列に関する店員の作業を支援できることが望まれていた。

特開２０１１－１４０８２号公報

本発明が解決しようとする課題は、店舗における商品陳列に関する店員の作業を支援できる支援システム、支援装置及び情報処理プログラムを提供することである。

実施形態の支援装置は、カメラ、取得手段、第１の制御手段及び第２の制御手段を備える。カメラは、作業者の位置から複数の売場を含む範囲を目視した様子を表した第１の画像を撮影する。取得手段は、店舗内の売場のそれぞれにおける商品の陳列状況に関する状況データを取得する。第１の制御手段は、カメラにより撮影された第１の画像に、当該の第１の画像に映り込む売場における陳列状況の異常を取得手段により取得された状況データに基づき表した第２の画像を重畳した第１の画面を表示デバイスに表示させる。第２の制御手段は、複数の売場の異常を解消するための作業を、その作業のために進むべき方向を示した矢印を含んで案内する第３の画像をカメラにより撮影された第１の画像に重畳した第２の画面を表示デバイスに表示させる。

一実施形態に係る支援システムの概略構成と、この支援システムに含まれる情報端末装置及び支援サーバの要部回路構成とを示すブロック図。 図１中の状況データに含まれるデータレコードの構造を模式的に示す図。 図１中の作業データに含まれるデータレコードの構造を模式的に示す図。 図１中の実績データに含まれるデータレコードの構造を模式的に示す図。 図１中の支援サーバに備えられたプロセッサによる情報処理のフローチャート。 図１中の情報処理端末に備えられたプロセッサによる情報処理のフローチャート。 図１中の情報処理端末に備えられたプロセッサによる情報処理のフローチャート。 確認画面を示す図。 案内画面を示す図。 確認画面を示す図。

以下、実施の形態の一例について図面を用いて説明する。
図１は本実施形態に係る支援システム１００の概略構成と、この支援システム１００に含まれる情報端末装置１０及び支援サーバ２０の要部回路構成とを示すブロック図である。

支援システム１００は、売場に陳列した商品を販売する店舗において、陳列された商品に関する店員の作業（以下、陳列作業と称する）を支援する。当該陳列作業は例えば、売場への商品の補充、陳列済みの商品の整列、あるいは不適切な商品の売場からの回収などである。なお、陳列作業は、例えば納品業者の従業員などのような店員以外の作業者により行われてもよい。
支援システム１００は、情報端末装置１０及び支援サーバ２０を、通信ネットワーク２００を介して通信可能とすることで構成されている。なお支援サーバ２０は、店舗サーバ３００及び状況管理サーバ４００とも、通信ネットワーク２００を介して通信可能である。

通信ネットワーク２００は、インターネット、ＶＰＮ（virtual private network）、ＬＡＮ（local area network）、公衆通信網、移動体通信網などを、単独又は適宜に組み合わせて用いることができる。
店舗サーバ３００は、店舗に関する各種のデータを管理するための情報処理を行う。店舗に関する各種のデータの１つは、商品の陳列レイアウトを表したレイアウトデータである。また店舗に関する各種のデータの１つは、商品の在庫を管理するための在庫データである。また店舗に関する各種のデータの１つは、店員を管理するための管理データである。

状況管理サーバ４００は、店舗における売場での陳列状況を管理するための情報処理を行う。状況管理サーバ４００は、陳列状況を管理するために、ＰＯＳ（point-of-sale）システム５００により管理される販売データ及びセンサ群６００での検出結果を参照する。販売データは、各商品の販売の実績を管理するためのデータである。センサ群６００は、店舗内に配置された多数のセンサを含む。これら多数のセンサはそれぞれ、商品の陳列状況を検出する。これらセンサは例えば、カメラ、光センサ、赤外線センサ、温度センサ、あるいは重量センサなどである。

情報端末装置１０は、支援サーバ２０によって提供される状況データに基づき、店員による陳列作業を支援するための画面表示を行う。つまり情報端末装置１０は、支援装置としての機能を備える。情報端末装置１０は、典型的には、スマートフォン、携帯電話、あるいはタブレット端末等のような携帯型の情報処理装置である。情報端末装置１０は、ヘッドマウント型のようなウェアラブルな情報処理装置であってもよい。

情報端末装置１０は、プロセッサ１１、メインメモリ１２、補助記憶デバイス１３、タッチパネル１４、カメラ１５、通信インタフェース１６及び伝送路１７等を備える。プロセッサ１１と、メインメモリ１２、補助記憶デバイス１３、タッチパネル１４、カメラ１５及び通信インタフェース１６とは、伝送路１７を介して接続される。

情報端末装置１０においては、プロセッサ１１、メインメモリ１２及び補助記憶デバイス１３を伝送路１７で接続することによって、情報端末装置１０を制御するための情報処理を行うコンピュータを構成する。
プロセッサ１１は、上記コンピュータの中枢部分に相当する。プロセッサ１１は、オペレーティングシステム、ミドルウェア及びアプリケーションプログラム等の情報処理プログラムに従って、情報端末装置１０としての各種の機能を実現するべく各部を制御する。

メインメモリ１２は、上記コンピュータの主記憶部分に相当する。メインメモリ１２は、不揮発性のメモリ領域と揮発性のメモリ領域とを含む。メインメモリ１２は、不揮発性のメモリ領域では情報処理プログラムを記憶する。またメインメモリ１２は、プロセッサ１１が各部を制御するための処理を実行する上で必要なデータを不揮発性又は揮発性のメモリ領域で記憶する場合もある。メインメモリ１２は、揮発性のメモリ領域を、プロセッサ１１によってデータが適宜書き換えられるワークエリアとして使用する。

補助記憶デバイス１３は、上記コンピュータの補助記憶部分に相当する。補助記憶デバイス１３は、例えばＥＥＰＲＯＭ（electric erasable programmable read-only memory）である。ＨＤＤ（hard disc drive）、ＳＳＤ（solid state drive）などが補助記憶デバイス１３として使用されてもよい。補助記憶デバイス１３は、プロセッサ１１が各種の処理を行う上で使用するデータや、プロセッサ１１での処理によって生成されたデータを保存する。補助記憶デバイス１３は、情報処理プログラムを記憶する。

補助記憶デバイス１３が記憶する情報処理プログラムの１つは、陳列作業の支援のための画面表示を行う動作制御のためのアプリケーションプログラム（以下、陳列支援アプリと称する）Ｐ１である。ただし典型的には、陳列支援アプリＰ１は、情報端末装置１０の管理者又はサービスマンなどによる操作に応じて、例えばインターネットを介してダウンロードされて補助記憶デバイス１３に書き込まれる。つまり、情報端末装置１０を使用する企業等への情報端末装置１０の譲渡は、陳列支援アプリＰ１が補助記憶デバイス１３に記憶されていない状態で行われる。しかしながら、陳列支援アプリＰ１が補助記憶デバイス１３に記憶された状態の情報端末装置１０が上記の企業等に譲渡されても構わない。

タッチパネル１４は、情報端末装置１０の入力デバイス及び表示デバイスとして機能する。
カメラ１５は、光学系及びイメージセンサを含み、光学系により形成される視野内の像を表した画像データをイメージセンサにより生成する。カメラ１５は、動画撮影が可能であることが好ましい。しかしながらカメラ１５は、静止画像を単独で、又は連続で撮影するものであっても構わない。

通信インタフェース１６は、通信ネットワーク２００を介したデータ通信のインタフェースである。通信インタフェース１６としては、例えば移動通信網又はインターネットを介したデータ通信を行うための周知の通信デバイスを利用できる。
伝送路１７は、アドレスバス、データバス及び制御信号線等を含み、接続された各部の間で授受されるデータ及び制御信号を伝送する。

支援サーバ２０は、プロセッサ２１、メインメモリ２２、補助記憶デバイス２３、通信インタフェース２４及び伝送路２５等を備える。プロセッサ２１と、メインメモリ２２、補助記憶デバイス２３及び通信インタフェース２４とは、伝送路２５によって接続される。伝送路２５は、アドレスバス、データバス及び制御信号線等を含み、接続された各部の間で授受されるデータ及び制御信号を伝送する。

支援サーバ２０においては、プロセッサ２１、メインメモリ２２及び補助記憶デバイス２３を伝送路２５で接続することによって、支援サーバ２０を制御するための情報処理を行うコンピュータを構成する。
プロセッサ２１は、上記コンピュータの中枢部分に相当する。プロセッサ２１は、情報処理プログラムに従って、支援サーバ２０としての各種の機能を実現するべく各部を制御する。

メインメモリ２２は、上記コンピュータの主記憶部分に相当する。メインメモリ２２は、不揮発性のメモリ領域と揮発性のメモリ領域とを含む。メインメモリ２２は、不揮発性のメモリ領域では情報処理プログラムを記憶する。またメインメモリ２２は、プロセッサ２１が各部を制御するための処理を実行する上で必要なデータを不揮発性又は揮発性のメモリ領域で記憶する場合もある。メインメモリ２２は、揮発性のメモリ領域を、プロセッサ２１によってデータが適宜書き換えられるワークエリアとして使用する。

補助記憶デバイス２３は、上記コンピュータの補助記憶部分に相当する。補助記憶デバイス２３は、例えばＥＥＰＲＯＭ、ＨＤＤ、ＳＳＤなどである。補助記憶デバイス２３は、プロセッサ２１が各種の処理を行う上で使用するデータや、プロセッサ２１での処理によって生成されたデータを保存する。補助記憶デバイス２３は、情報処理プログラムを記憶する場合もある。補助記憶デバイス２３が記憶する情報処理プログラムの１つは、支援サーバ２０としての動作制御のためのアプリケーションプログラム（以下、支援サーバアプリと称する）Ｐ２である。補助記憶デバイス２３は、状況データＤ１、作業データＤ２及び実績データＤ３を記憶する。これら状況データＤ１、作業データＤ２及び実績データＤ３については後述する。

通信インタフェース２４は、通信ネットワーク２００を介したデータ通信のインタフェースである。通信インタフェース２４としては、例えばインターネットを介したデータ通信を行うための周知の通信デバイスを利用できる。

支援サーバ２０は、例えば汎用のコンピュータ装置を基本ハードウェアとして用いることができる。このときに典型的には、支援サーバアプリＰ２が補助記憶デバイス２３に記憶されない状態のコンピュータ装置と支援サーバアプリＰ２とが個別に支援サーバ２０を使用する企業等に譲渡される。支援サーバアプリＰ２の譲渡は、磁気ディスク、光磁気ディスク、光ディスク、半導体メモリなどのようなリムーバブルな記録媒体に記録して、あるいはネットワークを介したダウンロードにより実現できる。そしてこの場合は、支援サーバ２０の管理者又はサービスマンなどによる操作に応じて、支援サーバアプリＰ２が補助記憶デバイス２３に書き込まれる。ただし、支援サーバアプリＰ２をコンピュータ装置の補助記憶デバイス２３に記憶してなる支援サーバ２０が上記の企業等に譲渡されても構わない。

図２は状況データＤ１に含まれるデータレコードＲ１の構造を模式的に示す図である。
状況データＤ１は、データレコードＲ１を１つ又は複数含む。状況データＤ１がデータレコードＲ１をいくつ含むかは、店舗における商品の陳列状況に応じて変化する。データレコードＲ１は、陳列状況に異常が生じている売場に関連付けられる。なお、ここでの売場とは、店舗内の商品を陳列するスペースを複数に区切って設定された空間を表す。そしてデータレコードＲ１は、関連付けられた売場における陳列状況を表す。つまり状況データＤ１は、店舗内における陳列状況を表すデータである。

データレコードＲ１は、フィールドＦ１１，Ｆ１２，Ｆ１３，Ｆ１４を含み得る。フィールドＦ１１には、関連付けられた売場を識別するための売場コードがセットされる。フィールドＦ１２には、関連付けられた売場を店員が容易に識別できるように予め定められた売場名称を表すデータがセットされる。フィールドＦ１３には、関連付けられた売場に陳列される商品を識別するための商品コードがセットされる。フィールドＦ１４には、関連付けられた売場での陳列状況を識別するための状況コードがセットされる。なお、売場コード、売場名称及び状況コードは、例えば支援サーバ２０のメンテナンスを担うサービスマン、あるいは店舗の管理者などによって適宜に設定されてよい。状況コードは、陳列作業の支援のために店員に知らせるべきいくつかの陳列状況のそれぞれを識別できるように定められる。状況コードで識別される陳列状況は例えば、「品切れ」、「商品不足」、「陳列の乱れ」、「商品の品質チェックが必要」、あるいは「異物の混入」、などとすることが想定される。なおデータレコードＲ１は、例えばフィールドＦ１２などの一部のフィールドが省略されてもよいし、別のフィールドを設けて、別の任意のデータがセットされてもよい。

図３は作業データＤ２に含まれるデータレコードＲ２の構造を模式的に示す図である。
作業データＤ２は、データレコードＲ２を１つ又は複数含む。作業データＤ２がデータレコードＲ２をいくつ含むかは、陳列作業の実施状況に応じて変化する。データレコードＲ２は、実施中の陳列作業に関連付けられる。そしてデータレコードＲ２は、関連付けられた陳列作業を管理するためのデータである。

データレコードＲ２は、フィールドＦ２１，Ｆ２２，Ｆ２３，Ｆ２４，Ｆ２５を含み得る。フィールドＦ２１には、関連付けられた陳列作業の対象となっている売場を識別するための売場コードがセットされる。フィールドＦ２２には、関連付けられた陳列作業が開始される契機となった陳列状況を識別するための状況コードがセットされる。フィールドＦ２３には、関連付けられた陳列作業を実施する店員を識別するための店員コードがセットされる。フィールドＦ２４には、関連付けられた陳列作業の開始を通知した情報端末装置１０を識別するための端末コードがセットされる。フィールドＦ２５には、関連付けられた陳列作業を開始した時刻を表すデータがセットされる。なおデータレコードＲ２は、例えばフィールドＦ２４などの一部のフィールドが省略されてもよいし、別のフィールドを設けて、別の任意のデータがセットされてもよい。

図４は実績データＤ３に含まれるデータレコードＲ３の構造を模式的に示す図である。
実績データＤ３は、データレコードＲ３を複数含む。実績データＤ３がデータレコードＲ３をいくつ含むかは、陳列作業を実施する店員の数に応じて変化する。データレコードＲ３は、陳列作業を実施する店員に関連付けられる。そしてデータレコードＲ３は、関連付けられた店員による陳列作業の実績を管理するためのデータである。

データレコードＲ３は、フィールドＦ３１，Ｆ３２，Ｆ３３，Ｆ３４…を含み得る。データレコードＲ３が、フィールドＦ３２以降のフィールドをいくつ含むかは、陳列作業の実績を管理する区分の数に応じて変化する。図４は、部門毎で実績を管理する場合の一例を示しており、フィールドＦ３２以降のフィールドの数は陳列作業の対象となる部門の数となる。そしてフィールドＦ３２以降の各フィールドは、陳列作業の対象となる部門がそれぞれ対応付けられる。フィールドＦ３１には、関連付けられた店員を識別するための店員コードがセットされる。フィールドＦ３２以降の各フィールドには、そのフィールドが対応付けられた部門に属する売場に関して、当該データレコードＲ３が関連付けられた店員が実施した陳列作業の回数を表したデータがセットされる。なおデータレコードＲ３は、別のフィールドを設けて、別の任意のデータをセットしてもよい。

次に以上のように構成された支援システム１００の動作について説明する。
支援サーバ２０においてプロセッサ２１は、支援サーバアプリＰ２に従って、以下に説明する情報処理を行う。
図５はプロセッサ２１による情報処理のフローチャートである。なお、以下に説明する処理の内容は一例であって、一部の処理の順序の変更、一部の処理の省略、あるいは別の処理の追加などは適宜に可能である。

Ａｃｔ１としてプロセッサ２１は、データ取得タイミングが到来したか否かを確認する。そしてプロセッサ２１は、データ取得タイミングが到来していないならばＮｏと判定し、Ａｃｔ２へと進む。
Ａｃｔ２としてプロセッサ２１は、送信要求がなされたか否かを確認する。そしてプロセッサ２１は、送信要求がなされていないならばＮｏと判定し、Ａｃｔ３へと進む。
Ａｃｔ３としてプロセッサ２１は、開始通知がなされたか否かを確認する。そして開始通知がなされていないならばＮｏと判定し、Ａｃｔ１へと戻る。
かくしてプロセッサ２１はＡｃｔ１～Ａｃｔ３としては、データ取得タイミングが到来するか、あるいは送信要求又は開始通知がなされるのを待ち受ける。

プロセッサ２１は、データ取得タイミングとして予め定められたタイミングが到来するとＡｃｔ１にてＹｅｓと判定し、Ａｃｔ４へと進む。なおデータ取得タイミングは、例えば支援サーバアプリＰ２の作成者などによって任意に定められてよい。データ取得タイミングは、例えば一定時間毎のタイミングとすることが想定される。

Ａｃｔ４としてプロセッサ２１は、異常データを取得する。プロセッサ２１は例えば、異常データの送信を要求するための予め定められた要求データを状況管理サーバ４００に宛てて通信ネットワーク２００へと通信インタフェース２４を介して送出する。そしてプロセッサ２１は、この要求に対して状況管理サーバ４００が送信する異常データが通信ネットワーク２００によって支援サーバ２０へと伝送されて、通信インタフェース２４により取り込まれると、この異常データを取得する。

ところで状況管理サーバ４００は、ＰＯＳシステム５００で管理されている販売データと、センサ群６００での検出結果などに基づき、店舗における各売場の陳列状況を監視している。そして状況管理サーバ４００は、「品切れ」、「商品不足」、「陳列の乱れ」、「商品の品質チェックが必要」、あるいは「異物の混入」などの異常が発生している売場が存在するならば、その売場の売場コードと、発生している異常の状況コードとを互いに関連付けて含んだ異常データを生成し、上記のように支援サーバ２０へと送信する。なお、状況管理サーバ４００が陳列状況を監視するための情報処理は、既存の処理を用いることができる。

Ａｃｔ５としてプロセッサ２１は、状況データＤ１を更新する。プロセッサ２１は例えば、互いに関連付けて異常データに含まれた売場コード及び状況コードの組み合わせのそれぞれに関して、その売場コード及び状況コードがフィールドＦ１１，Ｆ１４にそれぞれセットされているデータレコードＲ１が状況データＤ１に含まれるか否かを確認する。そしてプロセッサ２１は、該当のデータレコードＲ１が見つからない売場コード及び状況コードの組み合わせに関して、その売場コード及び状況コードをフィールドＦ１１，Ｆ１４にそれぞれセットした新たなデータレコードＲ１を状況データＤ１に追加する。なおプロセッサ２１は、この追加するデータレコードＲ１のフィールドＦ１２，Ｆ１３には、フィールドＦ１１にセットするデータが表す売場コードで識別される売場についての売場名称を表すデータと、当該売場に陳列される商品の商品コードとをそれぞれセットする。なおプロセッサ２１は、このようにフィールドＦ１２，Ｆ１３にセットするデータは、例えば店舗サーバ３００から取得する。

またプロセッサ２１は例えば、同じデータレコードＲ１のフィールドＦ１１，Ｆ１４にそれぞれセットされているデータが表す売場コード及び状況コードの組み合わせのそれぞれに関して、その売場コード及び状況コードが互いに関連付けて異常データに含まれているか否かを確認する。そしてプロセッサ２１は、該当の売場コード及び状況コードの組み合わせが異常データに含まれていないならば、当該売場コード及び状況コードがフィールドＦ１１，Ｆ１４にそれぞれセットされているデータレコードＲ１を状況データＤ１から削除する。

Ａｃｔ６としてプロセッサ２１は、実施中の作業のいずれか１つでも完了したか否かを確認する。上記のようにデータレコードＲ１を状況データＤ１から削除する場合、そのデータレコードＲ１に関する異常が解消されたのであるから、当該の異常を解消するための作業が完了している。そこでプロセッサ２１は、状況データＤ１からデータレコードＲ１を１つも削除していないならばＮｏと判定し、Ａｃｔ１～Ａｃｔ３の待受状態に戻る。 かくしてプロセッサ２１は、データ取得タイミング毎にＡｃｔ４及びＡｃｔ５を繰り返し、最新の陳列状況の監視結果を表すように状況データを更新してゆく。

さて情報端末装置１０においてプロセッサ１１は、陳列支援アプリＰ１に基づくアプリケーションの起動が操作者によって指示されたならば、陳列支援アプリＰ１に基づく情報処理を開始する。
図６及び図７はプロセッサ１１による情報処理のフローチャートである。なお、以下に説明する処理の内容は一例であって、一部の処理の順序の変更、一部の処理の省略、あるいは別の処理の追加などは適宜に可能である。

Ａｃｔ２１としてプロセッサ１１は、カメラ画像の表示を開始する。プロセッサ１１は例えば、カメラ１５を起動させ、カメラ１５が出力する画像データに基づく動画の表示をタッチパネル１４に開始させる。

Ａｃｔ２２としてプロセッサ１１は、状況データを取得する。プロセッサ１１は例えば、状況データの送信を要求するための予め定められた要求データを支援サーバ２０に宛てて通信ネットワーク２００へと通信インタフェース１６を介して送出する。そしてプロセッサ２１は、この要求に対して支援サーバ２０が送信する状況データが通信ネットワーク２００によって情報端末装置１０へと伝送されて、通信インタフェース１６により取り込まれると、この状況データを取得する。プロセッサ１１は、取得した状況データをメインメモリ１２又は補助記憶デバイス１３に保存しておく。かくして情報処理プログラムに基づく情報処理をプロセッサ１１が実行することによって、プロセッサ１１を中枢部分とするコンピュータは取得手段として機能する。

なお支援サーバ２０においてプロセッサ２１は、上記のように情報端末装置１０から送信された要求データが通信ネットワーク２００によって支援サーバ２０へと伝送されて、通信インタフェース２４により取り込まれると、図５中のＡｃｔ２にてＹｅｓと判定し、Ａｃｔ７へと進む。

Ａｃｔ７としてプロセッサ２１は、補助記憶デバイス２３に記憶されている状況データＤ１を、要求元の情報端末装置１０に宛てて通信ネットワーク２００へと通信インタフェース２４を介して送出する。そしてプロセッサ２１はこののち、Ａｃｔ１～Ａｃｔ３の待受状態に戻る。

図６中のＡｃｔ２３としてプロセッサ１１は、データ更新タイミングが到来したか否かを確認する。そしてプロセッサ１１は、データ更新タイミングが到来していないならばＮｏと判定し、Ａｃｔ２４へと進む。
Ａｃｔ２４としてプロセッサ１１は、画面更新タイミングが到来したか否かを確認する。そしてプロセッサ１１は、画面更新タイミングが到来していないならばＮｏと判定し、Ａｃｔ２５へと進む。
Ａｃｔ２５としてプロセッサ１１は、実施の対象とする陳列作業の指定がなされたか否かを確認する。そしてプロセッサ１１は、該当の指定のための操作が行われていないならばＮｏと判定し、Ａｃｔ２３へと戻る。
かくしてプロセッサ１１はＡｃｔ２４～Ａｃｔ２５としては、データ更新タイミング又は画面更新タイミングのいずれかが到来するか、あるいは陳列作業が指定されるのを待ち受ける。

プロセッサ１１は、データ更新タイミングとして予め定められたタイミングが到来するとＡｃｔ２３にてＹｅｓと判定し、Ａｃｔ２２へと戻る。つまりプロセッサ１１は、状況データを再度取得した上で、Ａｃｔ２３～Ａｃｔ２５の待受状態に戻る。なおデータ更新タイミングは、例えば陳列支援アプリＰ１の作成者などによって任意に定められてよい。データ更新タイミングは、例えば一定時間毎のタイミングとすることが想定される。かくしてプロセッサ１１は、データ更新タイミング毎に、最新の状況データを取得する。なおプロセッサ１１は、最も新しく取得した状況データを、メインメモリ１２又は補助記憶デバイス１３に保存しておく。

プロセッサ１１は、画面更新タイミングとして予め定められたタイミングが到来するとＡｃｔ２４にてＹｅｓと判定し、Ａｃｔ２６へと進む。
Ａｃｔ２６としてプロセッサ１１は、情報端末装置１０の位置と、カメラ１５の撮影方向とを判定する。

Ａｃｔ２７としてプロセッサ１１は、状況画像を生成する。状況画像は、カメラ画像に映り込んでいる売場に関する陳列状況を表した画像である。プロセッサ１１は例えば、店舗サーバ３００からレイアウトデータを取得する。プロセッサ１１は、このタイミングでレイアウトデータを店舗サーバ３００から取得してもよいし、事前に店舗サーバ３００から取得したデータをメインメモリ１２又は補助記憶デバイス１３に保存しておいてもよい。プロセッサ１１は、情報端末装置１０の位置と、カメラ１５の撮影方向と、レイアウトデータとから、カメラ画像に映り込む売場を全て判定する。プロセッサ１１は、メインメモリ１２又は補助記憶デバイス１３に保存してある状況データから、カメラ画像に映り込む売場の売場コードがフィールドＦ１１にセットされているデータレコードＲ１を抽出する。そしてプロセッサ１１は、抽出したデータレコードＲ１のフィールドＦ１２，Ｆ１３，Ｆ１４にセットされたデータに基づいて陳列状況を表した画像を状況画像として生成する。

Ａｃｔ２８としてプロセッサ１１は、上記のように生成した状況画像を、既にタッチパネル１４で表示しているカメラ画像に重畳して表示させる。なお以下においては、このようにしてタッチパネル１４で表示される画面を、確認画面と称することとする。そしてこののちにプロセッサ１１は、Ａｃｔ２３～Ａｃｔ２５の待受状態に戻る。

かくしてプロセッサ１１は、画面更新タイミングとなる毎に、カメラ画像に重畳する状況画像を、カメラ画像に映り込んでいる売場に関する陳列状況を表すように、確認画面を更新して行く。ここで確認画面は、第１の画像としてのカメラ画像に陳列状況の異常を表した第２の画像としての状況画像を重畳した第１の画面に相当する。つまり情報処理プログラムに基づく情報処理をプロセッサ１１が実行することによって、プロセッサ１１を中枢部分とするコンピュータは、第１の画面を表示デバイスとしてのタッチパネル１４に表示させる制御手段として機能する。

図８は確認画面ＳＣ１を示す図である。
確認画面ＳＣ１は、データレコードＲ１が２つ抽出された場合の一例である。確認画面ＳＣ１は、当該２つのデータレコードＲ１のそれぞれに対応した２つの表示オブジェクトＯＢ１１，ＯＢ１２を含む。２つのデータレコードＲ１の一方は、フィールドＦ１２，Ｆ１３，Ｆ１４にセットされたデータが「売場Ａ」、「商品Ｘ」及び「商品不足」をそれぞれ表す。プロセッサ１１は、当該データレコードＲ１に基づいて表示オブジェクトＯＢ１１を生成する。そしてプロセッサ１１は、確認画面ＳＣ１においては、表示オブジェクトＯＢ１１の突起の先端を、当該データレコードＲ１のフィールドＦ１１にセットされたデータが表す売場コードで識別される売場が映り込んでいる領域に位置させている。２つのデータレコードＲ１の他方は、フィールドＦ１２，Ｆ１３，Ｆ１４にセットされたデータが「売場Ｂ」、「商品Ｙ」及び「陳列の乱れ」をそれぞれ表す。プロセッサ１１は、当該データレコードＲ１に基づいて表示オブジェクトＯＢ１２を生成する。そしてプロセッサ１１は、確認画面ＳＣ１においては、表示オブジェクトＯＢ１２の突起の先端を、当該データレコードＲ１のフィールドＦ１１にセットされたデータが表す売場コードで識別される売場が映り込んでいる領域に位置させている。

プロセッサ１１は、画面更新タイミングが到来する毎にＡｃｔ２６～Ａｃｔ２８を繰り返すことにより、状況画像を更新する。かくして、画面更新タイミングをカメラ画像のフレーム間隔と同程度の時間間隔のタイミングとして定めておけば、最新のカメラ画像に、そのカメラ画像に映り込んだ売場に関する状況画像を重畳した確認画面を常に表示させておくことが可能となる。ただし、画面更新タイミングの間隔は、カメラ画像のフレーム間隔よりも十分に長くてもよい。ただしこの場合には、カメラ画像の変化に対する状況画像の更新の遅れが生じる。しかしながら、店員が、画面更新タイミングの間隔以上の時間に渡ってカメラ１５の向きを変えない状態で表示画面を確認するようにすれば、上記の遅れは問題にならない。例えば、カメラ画像のフレーム間隔が１／３０秒である場合に、画面更新タイミングの間隔が１秒としてもよい。この場合、最大で１秒間に渡り店員がカメラ１５の撮影方向を変えなければ、最新のカメラ画像に、そのカメラ画像に映り込んだ売場に関する状況画像を重畳した確認画面が表示されることになる。

店員は、状況画像に示された陳列状況に関する陳列作業を開始する場合には、対象とする陳列作業を指定するための操作を行う。当該操作は例えば、表示オブジェクトへのタップである。ただし、上記操作は、表示オブジェクトの長押しなどのような別の操作としてもよい。つまり例えば店員は、確認画面ＳＣ１に基づいて売場Ａに商品Ｘを補充するための陳列作業を行うことを決めたならば、表示オブジェクトＯＢ１１をタップする。
このようにして陳列作業の指定がなされたならば、プロセッサ１１はＡｃｔ２５にてＹｅｓと判定し、図７中のＡｃｔ３０へと進む。

Ａｃｔ３０としてプロセッサ１１は、支援サーバ２０に対する開始通知を行う。開始通知は、店員が作業を開始することの通知である。プロセッサ１１は例えば、開始通知のための予め定められた通知データを支援サーバ２０に宛てて通信ネットワーク２００へと通信インタフェース１６を介して送出する。プロセッサ１１は、通知データには、タップされた表示オブジェクトに対応するデータレコードＲ１のフィールドＦ１１及びＦ１４にセットされたデータが表す状況コード及び状況コードを含める。またプロセッサ１１は、通知データには、メインメモリ１２又は補助記憶デバイス１３に保存された店員コードを含める。なおプロセッサ１１は例えば、情報端末装置１０の使用が開始される際に店員の認証を行うなどして取得しておいた店員コードをメインメモリ１２又は補助記憶デバイス１３に保存しておく。あるいはプロセッサ１１は、利用者設定により指定された店員コードをメインメモリ１２又は補助記憶デバイス１３に保存しておいてもよい。つまり本実施形態においては、情報端末装置１０の使用者が確認画面ＳＣ１の閲覧者となることを前提としており、プロセッサ１１は、ここで取得される店員コードで識別される店員として閲覧者を識別しているのである。かくして情報処理プログラムに基づく情報処理をプロセッサ１１が実行することによって、プロセッサ１１を中枢部分とするコンピュータは識別手段として機能する。

通知データが通信ネットワーク２００によって支援サーバ２０へと伝送されると、通信インタフェース２４により取り込まれる。そしてプロセッサ２１はこれに応じて、図５中のＡｃｔ３にてＹｅｓと判定し、Ａｃｔ８へと進む。

Ａｃｔ８としてプロセッサ２１は、開始通知に応じて作業データを更新する。プロセッサ２１は例えば、通知データに含まれた売場コード、状況コード及び店員コードと、開始通知の送信元の情報端末装置１０の端末コードと、開始時刻を表すデータとを、フィールドＦ２１～Ｆ２５にそれぞれセットした新たなデータレコードＲ２を生成し、当該データレコードＲ２を含むように作業データＤ２を更新する。プロセッサ２１は例えば、作業を開始した時刻、あるいは開始通知を行った時刻に関する時刻データが開始通知に含まれるならば、その時刻データが表す時刻を、上記の開始時刻とすればよい。プロセッサ２１は例えば、開始通知が通信インタフェース２４により取り込まれた時刻を上記の開始時刻としてもよい。プロセッサは例えば、上記の各種の時刻のうちの１つを予め定められた決まりに従って修正した時刻を上記の開始時刻としてもよい。また、プロセッサ２１は、任意の記憶デバイスにて情報端末装置１０を識別するための端末コードに関連付けて記憶されている店員コードを取得し、この店員コードを上記の新たなデータレコードＲ２のフィールドＦ２３にセットしてもよい。上記記憶デバイスは、メインメモリ２２又は補助記憶デバイス２３、店舗サーバ３００に設けられた記憶デバイス、あるいはその他の記憶デバイスであってよい。

Ａｃｔ９としてプロセッサ２１は、開始通知を行った情報端末装置１０に対して案内データを送信する。案内データは、作業のサポートのための案内の手順を表したデータである。プロセッサ２１は、通知データに含まれた売場コード及び状況コードの組み合わせに関連付けてメインメモリ２２又は補助記憶デバイス２３に保存されている案内データを、読み出して、開始通知を行った情報端末装置１０に宛てて通信インタフェース２４を介して通信ネットワーク２００へと送出する。そしてプロセッサ２１はこののち、Ａｃｔ１～Ａｃｔ３の待受状態に戻る。

案内データは例えば、「売場Ａ」に陳列される商品が「商品Ｘ」であり、「商品Ｘ」が「第１倉庫」に在庫されているとする場合に、「売場Ａ」及び「商品不足」の組み合わせに対しては、「第１倉庫へと誘導」「商品Ｘの搬出を指示」「売場Ａへと誘導」「商品Ｘの陳列を指示」といった手順を表したデータとされる。

情報端末装置１０においてプロセッサ１１は図７中のＡｃｔ３０にて前述のように開始通知を行った後には、Ａｃｔ３１へと進む。一方、前述の案内データは、通信ネットワーク２００によって情報端末装置１０へと伝送されると、通信インタフェース１６により取り込まれる。

Ａｃｔ３１としてプロセッサ１１は、案内データを、通信インタフェース１６を介して取得する。プロセッサ１１は、取得した案内データをメインメモリ１２又は補助記憶デバイス１３に保存しておく。
Ａｃｔ３２としてプロセッサ１１は、情報端末装置１０の位置と、カメラ１５の撮影方向とを判定する。

Ａｃｔ３３としてプロセッサ１１は、案内データに基づいて案内画像を生成する。案内画像は、店員による作業をサポートするための画像である。例えばプロセッサ１１は、案内データが表す手順の「第１倉庫へと誘導」に関しては、案内画像は店員を第１倉庫へと誘導するための画像とする。
Ａｃｔ３４としてプロセッサ１１は、上記のように生成した案内画像を、既にタッチパネル１４で表示しているカメラ画像に重畳して表示させる。なお以下においては、このようにしてタッチパネル１４で表示される画面を、案内画面と称することとする。

図９は案内画面ＳＣ２を示す図である。
案内画面ＳＣ２は、確認画面ＳＣ１における表示オブジェクトＯＢ１１がタップされたことに応じて、商品Ｘを売場Ａに補充する作業を案内するための案内画面の一例である。案内画面ＳＣ２はさらに詳しくは、店員を第１の倉庫へと誘導するための案内画面の一例である。案内画面ＳＣ２は、２つの表示オブジェクトＯＢ２１，ＯＢ２２を含む。表示オブジェクトＯＢ２１は、第１の倉庫への移動のために進むべき方向を示した矢印である。表示オブジェクトＯＢ２２は、商品Ｘが第１倉庫に在庫されていることを店員に知らせるメッセージを表す。ここで案内画面は、第１の画像としてのカメラ画像に陳列作業を案内する第３の画像としての案内画像を重畳した第２の画面に相当する。つまり情報処理プログラムに基づく情報処理をプロセッサ１１が実行することによって、プロセッサ１１を中枢部分とするコンピュータは、第２の画面を表示デバイスとしてのタッチパネル１４に表示させる制御手段として機能する。

Ａｃｔ３５としてプロセッサ１１は、画面更新タイミングが到来したか否かを確認する。そしてプロセッサ１１は、画面更新タイミングが到来していないならばＮｏと判定し、Ａｃｔ３６へと進む。
Ａｃｔ３６としてプロセッサ１１は、実施中の作業の完了が通知されたか否かを確認する。そしてプロセッサ１１は、該当の通知がなされていないならばＮｏと判定し、Ａｃｔ３５へと戻る。
かくしてプロセッサ１１はＡｃｔ３５，Ａｃｔ３６としては、画面更新タイミングが到来するか、あるいは完了通知がなされるのを待ち受ける。

プロセッサ１１は、画面更新タイミングとして予め定められたタイミングが到来するとＡｃｔ３５にてＹｅｓと判定し、Ａｃｔ３２～Ａｃｔ３４を上述と同様に繰り返す。かくしてプロセッサ１１は、画面更新タイミングとなる毎に、カメラ画像に重畳する案内画像を、その時点での情報端末装置１０の位置及びカメラ１５の撮影方向とを考慮して更新して行く。これにより店員は、カメラ１５により店内を撮影しながら、案内画像での案内に従って動作することにより、陳列作業を容易に行うことが可能である。

店員が適切に作業を完了した場合、その作業の対象である売場の陳列状況に関して、状況管理サーバ４００が異常を検出しなくなる。そしてこの場合に支援サーバ２０においてプロセッサ２１は、図５中のＡｃｔ５にて前述のようにデータレコードＲ１を状況データＤ１から削除することになる。そしてプロセッサ２１はこの場合には、Ａｃｔ６にてＹｅｓと判定し、Ａｃｔ１０へと進む。

Ａｃｔ１０としてプロセッサ２１は、完了した作業の開始を通知した情報端末装置１０に対して完了通知を行う。プロセッサ２１は例えば、Ａｃｔ５にて削除したデータレコードＲ１を削除する場合には、当該データレコードＲ１のフィールドＦ１１にセットされている売場コードがフィールドＦ２１にセットされているデータレコードＲ２を作業データＤ２の中から抽出しておく。プロセッサ２１は、この抽出しておいたデータレコードＲ２のフィールドＦ２４にセットされたデータが表す端末コードで識別される情報端末装置１０に宛てて、完了通知のための予め定められた通知データを通信ネットワーク２００へと通信インタフェース２４を介して送出する。プロセッサ２１は、通知データには、上記の抽出したデータレコードＲ２のフィールドＦ２１にセットされた売場コードを含める。

Ａｃｔ１１としてプロセッサ２１は、作業データＤ２を、完了した作業を実施中の作業として表すことがないように更新する。例えばプロセッサ２１は、上記の抽出したデータレコードＲ２を作業データＤ２から削除する。あるいはプロセッサ２１は、完了済みである旨を表すデータをセットした新たなフィールドを、上記の抽出したデータレコードＲ２に追加してもよい。あるいはプロセッサ２１は、生成時に未完了であることを表す状態としてデータレコードＲ２に含めたフラグを、完了を表す状態に変更してもよい。

Ａｃｔ１２としてプロセッサ２１は、実績データＤ３を、完了した陳列作業を反映するように更新する。つまりプロセッサ２１は、完了した陳列作業の対象となっていた売場が属する部門についての作業回数を１つ増やす。例えばプロセッサ２１は、上記の抽出したデータレコードＲ２のフィールドＦ２３にセットされた店員コードがフィールドＦ３１にセットされたデータレコードＲ３を選択する。プロセッサ２１は、この選択したデータレコードＲ３の中で、上記の部門に関連付けられたフィールドにセットされたデータを、現状よりも１つ大きな回数を表すように更新する。プロセッサ２１は、ここで更新するフィールドを、上記の抽出したデータレコードＲ２のフィールドＦ２１にセットされた売場コードで識別される売場が属する部門に関連付けられたフィールドとして特定すればよい。かくして情報処理プログラムに基づく情報処理をプロセッサ２１が実行することによって、プロセッサ２１を中枢部分とするコンピュータは記録手段として機能する。
プロセッサ２１はこののち、Ａｃｔ１～Ａｃｔ３の待受状態に戻る。

さて、上記の完了通知のための通知データが通信ネットワーク２００によって宛先とされた情報端末装置１０へと伝送されると、該当の情報端末装置１０の通信インタフェース１６により取り込まれる。そしてプロセッサ１１はこれに応じて、図７中のＡｃｔ３６にてＹｅｓと判定し、図６中のＡｃｔ２２へと戻る。そしてプロセッサ１１は、Ａｃｔ２２以降の処理を前述と同様に繰り返す。つまりプロセッサ１１は、確認画面ＳＣ１のような画面の表示によって、陳列状況の異常を店員に確認させる状態に戻る。

以上のように支援システム１００によれば、カメラ画像に状況画像を重畳して示した確認画面の表示により、カメラ１５により店内を撮影した動画像上において、異常が生じている陳列状況を店員に認識させることが可能となる。かくして支援システム１００によれば、店舗における商品陳列に関する店員の作業を支援できる。

また支援システム１００によれば、カメラ画像に案内画像を重畳して示した案内画面の表示により、店員が指定した陳列の異常を解消するために行うべき作業を店員に認識させることが可能となる。かくして支援システム１００によれば、店舗における商品陳列に関する店員の作業を、さらに簡易とするように支援できる。

また支援システム１００によれば、状況画像において対象とする作業として指定された作業が完了したならば、当該完了した作業が、当該作業を指定した店員により行われたこととして、作業の実績を実績データＤ３に記録する。かくして、支援システム１００による支援の下での作業の実施状況を管理することが可能である。

この実施形態は、次のような種々の変形実施が可能である。
確認画面は、カメラ画像に映り込んでいない売場に関する異常を表す表示オブジェクトを含んでもよい。例えば、確認画面ＳＣ１が表示される状況において、カメラ画像には映り込んでいない「売場Ｃ」に関して「品切れ」となっている場合に、その状況を表す表示オブジェクトを追加表示する。
図１０は確認画面ＳＣ３を示す図である。
確認画面ＳＣ３は、確認画面ＳＣ１に表示オブジェクトＯＢ３１，ＯＢ３２を加えている。表示オブジェクトＯＢ３１は、カメラ画像内で売場Ｃが位置する方向を表す。表示オブジェクトＯＢ３２は、上記の異常の発生状況を表し、その突起の先端は、表示オブジェクトＯＢ３１を指している。

確認画面での異常の発生状況の表し方、あるいは案内画面での案内の表し方は任意であってよく、例えば陳列支援アプリＰ１の作成者などにより任意に定められてよい。

確認画面と案内画面とを並べて同時に表示してもよい。

カメラ画像に、状況画像及び案内画像の双方を重畳した画面を表示してもよい。

状況画像及び案内画像の少なくともいずれか一方は、支援サーバ２０にて例えばプロセッサ２１が生成してもよい。この場合は例えば、プロセッサ１１は、情報端末装置１０の位置及びカメラ１５の撮影方向などに関する撮影条件データを支援サーバ２０に送る。プロセッサ２１は、情報端末装置１０から受信した撮影条件データと状況データＤ１とに基づいて、前記実施形態と同様にして状況画像又は案内画像を生成する。プロセッサ２１は、状況画像又は案内画像を表す画像データを情報端末装置１０に送る。プロセッサ１１は、支援サーバ２０から受信した画像データが表す状況画像又は案内画像をカメラ画像に重畳して、確認画面又は案内画面を生成し、タッチパネル１４に表示させる。この場合においては、取得手段及び制御手段としての機能は、プロセッサ１１を中枢とするコンピュータによる情報処理及びプロセッサ２１を中枢とするコンピュータによる情報処理の協働により実現される。

確認画面及び案内画面の少なくともいずれか一方を、支援サーバ２０において生成してもよい。この場合は例えば、プロセッサ１１は、上記の撮影条件データと、カメラ画像を表した画像データとを支援サーバ２０に送る。プロセッサ２１は、撮影条件データと状況データＤ１とに基づいて状況画像又は案内画面を生成し、これを情報端末装置１０から受信した画像データが表すカメラ画像に重畳して確認画面又は案内画面を生成する。プロセッサ２１は、確認画面又は案内画面を表す画面データを情報端末装置１０へと送信する。そしてプロセッサ１１は、支援サーバ２０から受信した画面データが表す確認画面又は案内画面をタッチパネル１４に表示させる。この場合においては、取得手段及び制御手段としての機能は、プロセッサ２１を中枢とするコンピュータによる情報処理により実現される。

状況データＤ１の生成を、状況管理サーバ４００で行ってもよい。そしてプロセッサ１１は、状況管理サーバ４００から状況データを取得してもよい。

プロセッサ１１が、状況管理サーバ４００から異常データを取得して、プロセッサ２１による前述の処理と同様な処理によって状況データを生成してもよい。

情報端末装置１０の個々において、その情報端末装置１０を使用する店員が行う陳列作業を管理してもよい。つまり例えば、補助記憶デバイス１３に、この補助記憶デバイス１３を備えた情報端末装置１０を使用する店員が行う陳列作業に関するデータレコードＲ２のみを含んだ作業データＤ２を保存しておく。そしてプロセッサ１１は、図７中のＡｃｔ３０に代えて、上記の作業データＤ２の更新を図５中のＡｃｔ１１と同様な処理として実行する。またプロセッサ１１は図７中のＡｃｔ３６に代えて、作業データＤ２にて管理している陳列作業が完了したか否かの判断を図５中のＡｃｔ６と同様な処理として実行する。

情報端末装置１０の個々において、その情報端末装置１０を使用する店員の作業実績を管理してもよい。つまり例えば、補助記憶デバイス１３に、この補助記憶デバイス１３を備えた情報端末装置１０を使用する店員に関するデータレコードＲ３を含んだ実績データＤ３を保存しておく。なお、情報端末装置１０が一人の店員により使用されるのであれば、その情報端末装置１０が備える補助記憶デバイス１３に記憶される実績データＤ３は１つのデータレコードＲ３のみを含む。そしてプロセッサ２１は、図７中のＡｃｔ３６にてＹｅｓと判定したのちに、上記の実績データＤ３の更新を図５中のＡｃｔ１２と同様な処理として実行する。なお、この場合には、プロセッサ１１が記録手段として機能することになる。

カメラ画像に代えて、店内の見た目を表したアニメーション、あるいはコンピュータグラフィクスなどを用いてもよい。

確認画面又は案内画面は、静止画像に対して状況画像又は案内画像を重畳して生成してもよい。

プロセッサ２１は、作業終了を宣言するための予め定められた操作が情報端末装置１０又はその他の任意の情報処理装置で行われたことに応じて、Ａｃｔ６にてＹｅｓと判定してもよい。この場合に、作業終了の宣言は、作業を行っている店員により行われてもよいし、作業対象の売場を管理する管理者などのような別の店員により行われてもよい。

情報処理によりプロセッサ１１，２１が実現する各機能は、その一部又は全てをロジック回路などのようなプログラムに基づかない情報処理を実行するハードウェアにより実現することも可能である。また上記の各機能のそれぞれは、上記のロジック回路などのハードウェアにソフトウェア制御を組み合わせて実現することも可能である。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
以下に、本願の当初の特許請求の範囲に記載された発明を付記する。
［付記１］ 売場における商品の陳列状況に関する状況データを取得する取得手段と、
作業者の位置から前記売場を目視した様子を表した第１の画像に、前記取得手段により取得された前記状況データに基づき前記陳列状況の異常を表した第２の画像を重畳した第１の画面を表示デバイスに表示させる制御手段と、
を具備した支援システム。
［付記２］ 前記制御手段は、前記第２の画像が表す異常が指定されたことに応じて、当該指定された異常を解消するための作業を案内する第３の画像を前記第１の画像に重畳した第２の画面を前記表示デバイスに表示させる、
付記１に記載の支援システム。
［付記３］ 前記表示デバイスが表示する画面の閲覧者を識別する識別手段と、
前記表示デバイスが表示する画面を前記制御手段が前記第２の画面に変更させたのちに、前記第３の画像に関する異常が解消されたことに応じて、前記識別手段により識別された閲覧者による作業の実績として記録する記録手段と、
をさらに具備した付記２に記載の支援システム。
［付記４］ 売場における商品の陳列状況に関する状況データを取得する取得手段と、
作業者の位置から前記売場を目視した様子を表した第１の画像に、前記取得手段により取得された前記状況データに基づき前記陳列状況の異常を表した第２の画像を重畳した第１の画面を表示デバイスに表示させる制御手段と、
を具備した支援装置。
［付記５］ 支援装置を制御するコンピュータを、
売場における商品の陳列状況に関する状況データを取得する取得手段と、
作業者の位置から前記売場を目視した様子を表した第１の画像に、前記取得手段により取得された前記状況データに基づき前記陳列状況の異常を表した第２の画像を重畳した第１の画面を表示デバイスに表示させる制御手段と、
して機能させるための情報処理プログラム。

１０…情報端末装置、１１…プロセッサ、１２…メインメモリ、１３…補助記憶デバイス、１４…タッチパネル、１５…カメラ、１６…通信インタフェース、１７…伝送路、２０…支援サーバ、２１…プロセッサ、２２…メインメモリ、２３…補助記憶デバイス、２４…通信インタフェース、２５…伝送路、１００…支援システム、２００…通信ネットワーク、３００…店舗サーバ、４００…状況管理サーバ、５００…ＰＯＳシステム、６００…センサ群。

Claims (5)

1. 作業者の位置から店舗内の複数の売場を含む範囲を目視した様子を表した第１の画像を撮影するカメラと、
   店舗内の売場のそれぞれにおける商品の陳列状況に関する状況データを取得する取得手段と、
   前記カメラにより撮影された第１の画像に、当該の第１の画像に映り込む売場における陳列状況の異常を前記取得手段により取得された前記状況データに基づき表した第２の画像を重畳した第１の画面を表示デバイスに表示させる第１の制御手段と、
   前記複数の売場の異常を解消するための作業を、その作業のために進むべき方向を示した矢印を含んで案内する第３の画像を前記カメラにより撮影された第１の画像に重畳した第２の画面を前記表示デバイスに表示させる第２の制御手段と、
   を具備した支援装置。
2. 作業者の位置から店舗内の複数の売場を含む範囲を目視した様子を表した第１の画像を撮影するカメラと、
   店舗内の売場のそれぞれにおける商品の陳列状況に関する状況データを取得する取得手段と、
   前記カメラにより撮影された第１の画像に、当該の第１の画像に映り込む売場における陳列状況の異常を前記取得手段により取得された前記状況データに基づき表すとともに、当該の第１の画像に映り込まない売場における陳列状況の異常を、その売場が位置する方向とともに表した第２の画像を重畳した第１の画面を表示デバイスに表示させる第１の制御手段と、
   を具備した支援装置。
3. 前記取得手段は、予め定められたデータ更新タイミングが到来すると状況データを取得し、
   前記第１の制御手段は、予め定められた画面更新タイミングが到来すると作業者の位置、前記カメラの撮影方向及びレイアウトデータから、前記カメラにより撮影された第１の画像に映り込む複数の売場を判定する、
   請求項１又は請求項２に記載の支援装置。
4. 作業者の位置から店舗内の複数の売場を含む範囲を目視した様子を表した第１の画像を撮影するカメラを備える支援装置を制御するコンピュータを、
   店舗内の売場のそれぞれにおける商品の陳列状況に関する状況データを取得する取得手段と、
   前記カメラにより撮影された第１の画像に、当該の第１の画像に映り込む売場における陳列状況の異常を前記取得手段により取得された前記状況データに基づき表した第２の画像を重畳した第１の画面を表示デバイスに表示させる第１の制御手段と、
   前記複数の売場の異常を解消するための作業を、その作業のために進むべき方向を示した矢印を含んで案内する第３の画像を前記カメラにより撮影された第１の画像に重畳した第２の画面を前記表示デバイスに表示させる第２の制御手段と、
   して機能させるための情報処理プログラム。
5. 作業者の位置から店舗内の複数の売場を含む範囲を目視した様子を表した第１の画像を撮影するカメラを備える支援装置を制御するコンピュータを、
   店舗内の売場のそれぞれにおける商品の陳列状況に関する状況データを取得する取得手段と、
   前記カメラにより撮影された第１の画像に、当該の第１の画像に映り込む売場における陳列状況の異常を前記取得手段により取得された前記状況データに基づき表すとともに、当該の第１の画像に映り込まない売場における陳列状況の異常を、その売場が位置する方向とともに表した第２の画像を重畳した第１の画面を表示デバイスに表示させる第１の制御手段と、
   して機能させるための情報処理プログラム。