JPWO2018163547A1 - 商品監視装置、商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム - Google Patents
商品監視装置、商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム Download PDFInfo
- Publication number
- JPWO2018163547A1 JPWO2018163547A1 JP2019504330A JP2019504330A JPWO2018163547A1 JP WO2018163547 A1 JPWO2018163547 A1 JP WO2018163547A1 JP 2019504330 A JP2019504330 A JP 2019504330A JP 2019504330 A JP2019504330 A JP 2019504330A JP WO2018163547 A1 JPWO2018163547 A1 JP WO2018163547A1
- Authority
- JP
- Japan
- Prior art keywords
- product
- information
- time
- change detection
- removal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/203—Inventory monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
- G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/30—Services specially adapted for particular environments, situations or purposes
- H04W4/35—Services specially adapted for particular environments, situations or purposes for the management of goods or merchandise
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Finance (AREA)
- Theoretical Computer Science (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Marketing (AREA)
- Development Economics (AREA)
- Human Resources & Organizations (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Tourism & Hospitality (AREA)
- Entrepreneurship & Innovation (AREA)
- Multimedia (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する変化検知情報出力部と、を備える商品監視装置。
Description
本発明は、商品監視装置、商品監視システム、出力先装置、商品監視方法、表示方法及びプログラムに関する。
商品棚に置かれた商品の管理に関連して幾つかの技術が提案されている。
例えば、特許文献１に記載の在庫状況管理方法では、商品の陳列棚（商品棚）の画像を監視し、陳列棚に設けられた商品無マーカを検知したときに、その商品無マーカに関連付けられた該当商品を割り出す。そして、商品無マーカが検知された陳列棚の画像の位置に在庫確認中である旨のメッセージを重ねる処理が行われる。
例えば、特許文献１に記載の在庫状況管理方法では、商品の陳列棚（商品棚）の画像を監視し、陳列棚に設けられた商品無マーカを検知したときに、その商品無マーカに関連付けられた該当商品を割り出す。そして、商品無マーカが検知された陳列棚の画像の位置に在庫確認中である旨のメッセージを重ねる処理が行われる。
商品を販売する店舗において、商品の不正な店外への持ち出しが予想される事象を、なるべく低コストで検出できることが好ましい。これに対し、特許文献１には、商品の不正な店外への持ち出しが予想される事象を検出する方法は示されていない。
本発明は、上述の課題を解決することのできる商品監視装置、商品監視システム、出力先装置、商品監視方法、表示方法及びプログラムを提供することを目的としている。
本発明の第１の態様によれば、商品監視装置は、商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する変化検知情報出力部と、を備える。
本発明の第２の態様によれば、商品監視システムは、商品監視装置と出力先装置とを備えた商品監視システムであって、前記商品監視装置は、商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を前記出力先装置へ出力する変化検知情報出力部と、を備える。
本発明の第３の態様によれば、出力先装置は、所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得する変化検知情報取得部と、前記変化検知情報に含まれる前記商品群エリアの前記画像を表示する表示部とを備える。
本発明の第４の態様によれば、商品監視方法は、商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出した場合、前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力することを含む。
本発明の第５の態様によれば、表示方法は、所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得し、前記変化検知情報に含まれる前記商品群エリアの前記画像を表示することを含む。
本発明の第６の態様によれば、プログラムは、コンピュータに、商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出した場合、前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力させる処理を実行させる。
本発明の第７の態様によれば、プログラムは、コンピュータに、所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得させ、前記変化検知情報に含まれる前記商品群エリアの前記画像を表示させる処理を実行させる。
この発明によれば、商品の不正な店外への持ち出しが予想される事象を、比較的低コストで検出することができる。
以下、本発明の実施形態を説明するが、以下の実施形態は請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
図１は、一実施形態に係る商品監視システムの装置構成例を示す概略構成図である。図１の例で、商品監視システム１０は、棚監視カメラ１１と、ハブ１２と、商品監視装置１３と、無線ルータ装置１４と、端末装置１５と、店内監視カメラ１６と、ＰＯＳ（Point Of Sales）システム１７とを備える。
図１は、一実施形態に係る商品監視システムの装置構成例を示す概略構成図である。図１の例で、商品監視システム１０は、棚監視カメラ１１と、ハブ１２と、商品監視装置１３と、無線ルータ装置１４と、端末装置１５と、店内監視カメラ１６と、ＰＯＳ（Point Of Sales）システム１７とを備える。
また、図１には、商品監視システム１０が監視する対象の商品が陳列される商品棚９１０が示されている。商品監視システム１０が対象とする商品棚９１０は１つであってもよいし複数あってもよい。
また、図１の例では、棚監視カメラ１１と、端末装置１５と、店内監視カメラ１６と、ＰＯＳシステム１７と、商品棚９１０とが売場に配置されている。ハブ１２と、商品監視装置１３と、無線ルータ装置１４とがバックルームに配置されている。バックルームは、基本的には顧客の立ち入りが禁止されている部屋である。
また、図１の例では、棚監視カメラ１１と、端末装置１５と、店内監視カメラ１６と、ＰＯＳシステム１７と、商品棚９１０とが売場に配置されている。ハブ１２と、商品監視装置１３と、無線ルータ装置１４とがバックルームに配置されている。バックルームは、基本的には顧客の立ち入りが禁止されている部屋である。
商品監視システム１０は、商品棚９１０に陳列された商品を監視する。特に、商品監視システム１０は、商品棚９１０から、所定条件を満たす数量の商品が纏めて取り出されたことを検出する。
商品棚から一度に多数の商品が取り出された場合、これらの商品が盗まれると１つの商品が盗まれる場合よりも被害額が大きくなる。また、ある店舗で一度に多数の商品が盗まれた場合に、同じ店舗又は同系列の他の店舗で同様の盗難が行われる事例が見受けられる。
商品棚から一度に多数の商品が取り出された場合、これらの商品が盗まれると１つの商品が盗まれる場合よりも被害額が大きくなる。また、ある店舗で一度に多数の商品が盗まれた場合に、同じ店舗又は同系列の他の店舗で同様の盗難が行われる事例が見受けられる。
そこで、商品監視システム１０が商品の取出しを検出した場合、店員が商品棚９１０付近の状況を確認し、必要に応じて顧客への声掛け、顧客の近くでの作業、警備員への通報等を行う。これにより、盗難を未然に防げる可能性がある。また、商品監視システム１０が取出しを検出した商品が盗まれたことが事後に判明した場合、従業員や系列店に注意喚起する。これにより、盗難の再発を防止できる可能性がある。
棚監視カメラ１１は、商品棚９１０を撮影し、商品棚９１０の画像を商品監視装置１３へ送信する。
店内監視カメラ１６は、例えば店舗の天井に設けられ、店内を撮影する。特に店内監視カメラ１６は、店内の通路を撮影する。店内監視カメラ１６は、撮影した店内の画像を商品監視装置１３へ送信する。店内監視カメラ１６が撮影した画像は、商品監視装置１３が顧客の動線を検出するために用いられる。
ＰＯＳシステム１７は、顧客が商品又はサービスを購入する際の代金のやり取りに用いられ、販売情報を記憶する。ＰＯＳシステム１７は、商品監視装置１３からの要求に応じて販売情報を商品監視装置１３へ送信する。ＰＯＳシステム１７は、販売情報管理装置の例に該当する。
店内監視カメラ１６は、例えば店舗の天井に設けられ、店内を撮影する。特に店内監視カメラ１６は、店内の通路を撮影する。店内監視カメラ１６は、撮影した店内の画像を商品監視装置１３へ送信する。店内監視カメラ１６が撮影した画像は、商品監視装置１３が顧客の動線を検出するために用いられる。
ＰＯＳシステム１７は、顧客が商品又はサービスを購入する際の代金のやり取りに用いられ、販売情報を記憶する。ＰＯＳシステム１７は、商品監視装置１３からの要求に応じて販売情報を商品監視装置１３へ送信する。ＰＯＳシステム１７は、販売情報管理装置の例に該当する。
商品監視装置１３は、棚監視カメラ１１が撮影した画像に基づいて、商品棚９１０の商品を監視する。特に、商品監視装置１３は、商品棚９１０から所定条件を満たす数量の商品が纏めて取り出されたことを検出する。
また、商品監視装置１３は、端末装置１５に対するサーバ装置として機能する。特に、商品監視装置１３は、商品棚９１０から所定条件を満たす数量の商品が纏めて取り出されたことを検出した場合、変化検知情報を端末装置１５へ送信する。ここでいう変化検知情報は、商品棚９１０から所定条件を満たす数量の商品が纏めて取り出されたことを通知する情報である。変化検知情報は、商品棚９１０から所定条件を満たす数量の商品が纏めて取り出された時点から過去に遡った時点の商品棚９１０の画像の画像データを含む。
商品監視装置１３は例えばノートパソコン（Personal Computer；ＰＣ）又はワークステーション（Workstation）等のコンピュータを用いて構成される。
また、商品監視装置１３は、端末装置１５に対するサーバ装置として機能する。特に、商品監視装置１３は、商品棚９１０から所定条件を満たす数量の商品が纏めて取り出されたことを検出した場合、変化検知情報を端末装置１５へ送信する。ここでいう変化検知情報は、商品棚９１０から所定条件を満たす数量の商品が纏めて取り出されたことを通知する情報である。変化検知情報は、商品棚９１０から所定条件を満たす数量の商品が纏めて取り出された時点から過去に遡った時点の商品棚９１０の画像の画像データを含む。
商品監視装置１３は例えばノートパソコン（Personal Computer；ＰＣ）又はワークステーション（Workstation）等のコンピュータを用いて構成される。
図２は、商品監視装置１３の機能構成の例を示す概略ブロック図である。図２の例で、商品監視装置１３は、第一通信部１１０と、第一操作入力部１２０と、第一表示部１３０と、第一記憶部１８０と、第一制御部１９０とを備える。第一制御部１９０は、商品状態検出部１９１と、変化検知情報出力部１９２と、動画像処理部１９３とを備える。
第一通信部１１０は、他の装置と通信を行う。特に、第一通信部１１０は、棚監視カメラ１１及び店内監視カメラ１６が撮影した画像データを受信する。また、第一通信部１１０は、ＰＯＳシステム１７に対する販売情報の要求（リクエスト）を送信し、ＰＯＳシステム１７が送信した販売情報を受信する。また、第一通信部１１０は、変化検知情報を端末装置１５へ送信する。
第一操作入力部１２０は、例えばキーボード及びマウス等の入力デバイスを備え、ユーザ操作を受ける。
第一操作入力部１２０は、例えばキーボード及びマウス等の入力デバイスを備え、ユーザ操作を受ける。
第一表示部１３０は、例えば液晶パネル等の表画面を備え、第一制御部１９０の制御に従って各種画像を表示する。
第一記憶部１８０は、各種データを記憶する。第一記憶部１８０は、商品監視装置１３が備える記憶デバイスを用いて構成される。
第一制御部１９０は、商品監視装置１３の各部を制御して各種処理を行う。第一制御部１９０は、商品監視装置１３が備えるＣＰＵ（Central Processing Unit、中央処理装置）が第一記憶部１８０からプログラムを読み出して実行することで構成される。
第一記憶部１８０は、各種データを記憶する。第一記憶部１８０は、商品監視装置１３が備える記憶デバイスを用いて構成される。
第一制御部１９０は、商品監視装置１３の各部を制御して各種処理を行う。第一制御部１９０は、商品監視装置１３が備えるＣＰＵ（Central Processing Unit、中央処理装置）が第一記憶部１８０からプログラムを読み出して実行することで構成される。
商品状態検出部１９１は、商品棚９１０に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、商品群エリアからの数量の商品の取出しを検出する。具体的には、商品状態検出部１９１は、棚監視カメラ１１が撮影した商品棚９１０の画像を商品群エリア毎に過去の画像と比較する。商品群エリアの画像の面積のうち過去の画像との相違が検出された部分面積の割合が、所定の閾値以上であった場合、商品状態検出部１９１は、その商品群エリアから所定条件を満たす数量の商品が取り出されたと判定する。
顧客が棚の前を通過した場合の一時的な画像の変化による誤検出の可能性を低減させるために、比較対象の過去の画像として、例えば３秒前の画像などある程度、長い時間を遡った過去の画像を用いるようにしてもよい。
顧客が棚の前を通過した場合の一時的な画像の変化による誤検出の可能性を低減させるために、比較対象の過去の画像として、例えば３秒前の画像などある程度、長い時間を遡った過去の画像を用いるようにしてもよい。
このように、商品状態検出部１９１の判定基準に用いられる所定条件を満たす数量が、面積の割合を示す場合を例として説明する。所定の条件は、例えば、棚監視カメラ１１が撮影した画像における取り出された商品の画像の面積が、その商品の画像を含む商品群エリアの画像の面積のうち所定の割合以上を占めることである。
但し、商品状態検出部１９１の判定基準に用いられる所定条件を満たす数量は、この例に限定されない。例えば、所定条件を満たす数量は、所定以上の商品の個数を示していてもよい。この場合、例えば、商品状態検出部１９１は、商品群エリアの画像情報に基づいて取り出された商品の個数を算出し、取り出された商品の個数が所定数以上であるか否かを判定するようにしてもよい。
但し、商品状態検出部１９１の判定基準に用いられる所定条件を満たす数量は、この例に限定されない。例えば、所定条件を満たす数量は、所定以上の商品の個数を示していてもよい。この場合、例えば、商品状態検出部１９１は、商品群エリアの画像情報に基づいて取り出された商品の個数を算出し、取り出された商品の個数が所定数以上であるか否かを判定するようにしてもよい。
ここでの所定の閾値は、例えば５０％に設定される。ただし、所定の閾値は５０％に限定されない。また、商品群エリア毎に異なる閾値が設定されていてもよい。例えばユーザが、高価な商品のエリアには比較的小さい閾値が設定されていてもよい。これにより、商品状態検出部１９１は、高価な商品については、比較的少数の商品が取り出された場合でも取出しを検知する。
図３は、商品群エリアの設定例を示す図である。図３に示す実線の矩形は、商品群エリアを示す。図３に示すように、商品棚９１０の画像には、商品の配置に応じて１つ以上の商品群エリアが予め設定されている。上記のように商品状態検出部１９１は、図３に示す商品群エリア毎に所定条件を満たす数量の商品の取出しの有無を判定する。
商品群エリアの設定基準は特定の基準に限定されない。例えば、同一商品の配置エリア毎に商品群エリアが設定されていてもよいし、同一メーカの商品の配置エリア毎に商品群エリアが設定されていてもよい。或いは、雑誌など同一種類の商品の配置エリア毎に商品群エリアが設定されていてもよい。或いは、商品棚９１０の段ごとに商品群エリアが設定されていてもよい。また、複数の基準の組み合わせにて商品群エリアが設定されていてもよい。
商品状態検出部１９１の検出精度を高める観点からは、同一の商品群エリア内に配置される商品の大きさは同じぐらいの大きさであることが好ましい。
以下では、商品群エリアからの所定条件を満たす数量の商品の取出しを、単に取出しとも称する。
商品群エリアの設定基準は特定の基準に限定されない。例えば、同一商品の配置エリア毎に商品群エリアが設定されていてもよいし、同一メーカの商品の配置エリア毎に商品群エリアが設定されていてもよい。或いは、雑誌など同一種類の商品の配置エリア毎に商品群エリアが設定されていてもよい。或いは、商品棚９１０の段ごとに商品群エリアが設定されていてもよい。また、複数の基準の組み合わせにて商品群エリアが設定されていてもよい。
商品状態検出部１９１の検出精度を高める観点からは、同一の商品群エリア内に配置される商品の大きさは同じぐらいの大きさであることが好ましい。
以下では、商品群エリアからの所定条件を満たす数量の商品の取出しを、単に取出しとも称する。
変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した場合、商品状態検出部１９１が取出しを検出した時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を端末装置１５へ出力する。
具体的には、棚監視カメラ１１が撮影した商品棚９１０の画像のうち直近の所定期間分の画像を第一記憶部１８０が記憶しておく。商品状態検出部１９１が取出しを検出した場合、例えば取り出しの検出時から過去１０秒間など予め定められた期間分の画像データのうち、例えば１秒毎など予め定められた周期毎の画像データを第一記憶部１８０から読み出す。そして、変化検知情報出力部１９２は、読み出した画像データを含む変化検知情報を生成する。変化検知情報出力部１９２は、生成した変化検知情報を、第一通信部１１０を介して端末装置１５へ送信する。
具体的には、棚監視カメラ１１が撮影した商品棚９１０の画像のうち直近の所定期間分の画像を第一記憶部１８０が記憶しておく。商品状態検出部１９１が取出しを検出した場合、例えば取り出しの検出時から過去１０秒間など予め定められた期間分の画像データのうち、例えば１秒毎など予め定められた周期毎の画像データを第一記憶部１８０から読み出す。そして、変化検知情報出力部１９２は、読み出した画像データを含む変化検知情報を生成する。変化検知情報出力部１９２は、生成した変化検知情報を、第一通信部１１０を介して端末装置１５へ送信する。
また、変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した時点より後の商品の販売履歴を示す販売情報を、第一通信部１１０を介してＰＯＳシステム１７から取得する。そして、変化検知情報出力部１９２は、取得した販売情報を含む変化検知情報を、第一通信部１１０を介して端末装置１５へ出力する。端末装置１５を参照する店員は、販売情報を参照することで、取出しが購入目的の正当な取出しであったか否かを判定することができる。つまり、店員は、販売情報に基づいて、商品の取出しが検出された後に当該商品の購入が行われたか否かを判定する。
変化検知情報出力部１９２は、変化検知情報を端末装置１５へ出力した後に、取得した販売情報を端末装置１５へ出力するようにしてもよい。具体的に、変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した時点より後の、取り出された商品の販売履歴を示す販売情報をＰＯＳシステム１７から取得し、取得した販売情報を端末装置１５へ出力する。このように、変化検知情報出力部１９２が、販売情報の取得を待たずに変化検知情報を端末装置１５へ出力する。これにより、端末装置１５を所持する店員（端末装置１５のユーザ）は、商品棚９１０からの商品の取出しをいち早く認識して対応することができる。
変化検知情報出力部１９２が、商品状態検出部１９１が取出しを検出した時点から所定の時間以内にＰＯＳシステム１７に登録された販売情報を取得するようにしてもよい。この場合の所定の時間を第一時間とも表記する。
このように、変化検知情報出力部１９２が販売情報を取得する時間範囲を限定することで、端末装置１５を所持する店員が参照する販売情報を限定することができる。この点で、店員の負荷を軽減することができる。
このように、変化検知情報出力部１９２が販売情報を取得する時間範囲を限定することで、端末装置１５を所持する店員が参照する販売情報を限定することができる。この点で、店員の負荷を軽減することができる。
商品状態検出部１９１が取出しを検出した時点から所定の時間以内に、取り出された商品の販売情報をＰＯＳシステム１７から取得できない場合、変化検知情報出力部１９２は、販売情報を含まない変化検知情報を端末装置１５へ出力するようにしてもよい。この場合の所定の時間を第二時間とも表記する。
端末装置１５を所持する店員は、変化検知情報に販売情報が含まれていない場合、該当商品がＰＯＳシステム１７によって処理されずに店外へ持ち出された可能性が高いと推定することできる。すなわち、店員は、該当商品が盗まれた可能性が高いと推定することができる。
端末装置１５を所持する店員は、変化検知情報に販売情報が含まれていない場合、該当商品がＰＯＳシステム１７によって処理されずに店外へ持ち出された可能性が高いと推定することできる。すなわち、店員は、該当商品が盗まれた可能性が高いと推定することができる。
第一時間と第二時間とは同じ時間であってもよいし、異なる時間であってもよい。例えば、第二時間が第一時間よりも長い時間に設定されていてもよい。第一時間が長くなると、端末装置１５を所持する店員が参照する販売情報の個数が増えて店員の負荷が増加することが考えられる。一方、第二時間が長くなっても、店員の負荷は増加しない。そこで、第二時間は、比較的長い時間に設定されてもよい。これにより、商品がＰＯＳシステム１７によって処理されずに店外へ持ち出されたか否かの判定が、より正確に行われる。
変化検知情報出力部１９２が、商品状態検出部１９１が取出しを検出した時点を基準とする商品群エリアの過去の画像に基づいて、取出しを行った人物に関する情報を取得するようにしてもよい。そして、変化検知情報出力部１９２は、取出しを行った人物に関する情報を含む変化検知情報を端末装置１５へ出力するようにしてもよい。
商品状態検出部１９１が取出しを検出した時点から近い過去の画像に映っている人物は、取出しを行った人物である可能性が高い。そこで、変化検知情報出力部１９２が、商品状態検出部１９１が取出しを検出した時点から過去に遡って、棚監視カメラ１１の画像に映っている人物を検出するようにしてもよい。例えば、変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した時点の画像から順に過去にさかのぼって、人物の検出に成功するまで人物の検出を行う。或いは、変化検知情報出力部１９２が、商品状態検出部１９１が取出しを検出した時点から過去の所定時間（例えば３秒）以内の画像について、画像に映っている全ての人を検出するようにしてもよい。
変化検知情報出力部１９２は、人物の検出に成功した場合、その人物に関する情報を、取出しを行った人物（取出しを行った可能性のある人物）に関する情報として検出する。
商品状態検出部１９１が取出しを検出した時点から近い過去の画像に映っている人物は、取出しを行った人物である可能性が高い。そこで、変化検知情報出力部１９２が、商品状態検出部１９１が取出しを検出した時点から過去に遡って、棚監視カメラ１１の画像に映っている人物を検出するようにしてもよい。例えば、変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した時点の画像から順に過去にさかのぼって、人物の検出に成功するまで人物の検出を行う。或いは、変化検知情報出力部１９２が、商品状態検出部１９１が取出しを検出した時点から過去の所定時間（例えば３秒）以内の画像について、画像に映っている全ての人を検出するようにしてもよい。
変化検知情報出力部１９２は、人物の検出に成功した場合、その人物に関する情報を、取出しを行った人物（取出しを行った可能性のある人物）に関する情報として検出する。
変化検知情報出力部１９２は、例えばこの人物の服の色を判定し、判定した服の色の情報を変化検知情報に含めて端末装置１５へ出力する。取出しを行った人物に関する情報は、この人物の服の色の情報に限らずいろいろな情報とすることができる。例えば、変化検知情報出力部１９２が、取出しを行った人物に関する情報として、この人物の服の色の情報に加えて、或いは、この人物の服の色の情報に代えて、この人物に関する別の情報を変化検知情報に含めるようにしてもよい。人物に関する別の情報は、例えば、この人物の顔画像、この人物の動きを示す動線情報、この人物が商品をＰＯＳシステム１７で処理したか否かを示す情報、又は、この人物の属性情報等、或いはこれらの組み合わせである。人物の属性情報は、性別及び身長のうち何れか一方、または両方である。
このように、端末装置１５を所持する店員が、取出しを行った人物を特定する際、取出しを行った人物に関する情報を参照する。これにより、人物特定の精度を高めることができる。
このように、端末装置１５を所持する店員が、取出しを行った人物を特定する際、取出しを行った人物に関する情報を参照する。これにより、人物特定の精度を高めることができる。
或いは変化検知情報出力部１９２が、変化検知情報を端末装置１５へ出力した後に、取出しを行った人物に関する情報を端末装置１５へ出力するようにしてもよい。
このように、変化検知情報出力部１９２が取出しを行った人物に関する情報の取得を待たずに、変化検知情報を端末装置１５へ出力する。これにより、端末装置１５を所持する店員は、商品棚９１０からの商品の取出しをいち早く認識して対応することができる。
このように、変化検知情報出力部１９２が取出しを行った人物に関する情報の取得を待たずに、変化検知情報を端末装置１５へ出力する。これにより、端末装置１５を所持する店員は、商品棚９１０からの商品の取出しをいち早く認識して対応することができる。
変化検知情報出力部１９２が、取出しを行った人物に関する情報に基づいて、この人物がその商品を所定の清算エリアを通過させたか否かを判定するようにしてもよい。具体的には、変化検知情報出力部１９２は、この人物がＰＯＳシステム１７にて代金を清算したか否かを判定するようにしてもよい。この人物が商品を精算エリアに通過させていないと判定した場合、変化検知情報出力部１９２が、変化検知情報を端末装置１５へ出力した後に、取出しを行った人物に関する情報を端末装置１５へ出力するようにしてもよい。
このように、変化検知情報出力部１９２が、取出しを行った人物がその商品を所定の清算エリアを通過させていないと判定した場合に限定して、取出しを行った人物に関する情報を端末装置１５へ出力する。これにより、変化検知情報出力部１９２は、端末装置１５を所持する店員が人物に関する情報を参照する回数を減らすことができる。取出しを行った人物がその商品を所定の清算エリアを通過させていない場合、この商品が盗まれた可能性が高い。したがって、店員は、商品が盗まれた可能性が高い場合のみ、その取出しを行った人物に関する情報を参照すればよい。このため、店員の負荷を軽減することができる。
動画像処理部１９３は、商品状態検出部１９１が取出しを検出した場合に、商品状態検出部１９１が取出しを検出した時点から過去の所定時間分の商品棚９１０の動画像を第一表示部１３０に表示させる。この場合、第一表示部１３０を備える商品監視装置１３は、表示装置の例に該当する。
例えば、棚監視カメラ１１が商品棚９１０の動画像を撮影して動画像データを商品監視装置１３へ送信する。商品監視装置１３では、動画像処理部１９３が、棚監視カメラ１１によって撮影された過去の動画像データのうち、直近の所定時間分を第一記憶部１８０に一時的に記憶させる。商品状態検出部１９１が取出しを検出した場合、動画像処理部１９３は、第一記憶部１８０が一時的に記憶している動画像データのうち、商品状態検出部１９１が取出しを検出した時点から過去所定時間分の動画像データを第一記憶部１８０に保存させる。第一記憶部１８０は、動画像処理部１９３から保存が指示された動画像データを消去せずに記憶しておく。そして、動画像処理部１９３は、ユーザ操作に従って動画像データを再生し第一表示部１３０に表示させる。
商品監視装置１３は商品棚９１０の動画像を表示し、端末装置１５は商品棚９１０のコマ送り画像（一定時間毎の静止画像）を表示する。このように、通信帯域及び装置の処理能力に応じて画像を使い分けることができる。
但し、端末装置１５が商品棚９１０の動画像を表示するようにしてもよい。
例えば、棚監視カメラ１１が商品棚９１０の動画像を撮影して動画像データを商品監視装置１３へ送信する。商品監視装置１３では、動画像処理部１９３が、棚監視カメラ１１によって撮影された過去の動画像データのうち、直近の所定時間分を第一記憶部１８０に一時的に記憶させる。商品状態検出部１９１が取出しを検出した場合、動画像処理部１９３は、第一記憶部１８０が一時的に記憶している動画像データのうち、商品状態検出部１９１が取出しを検出した時点から過去所定時間分の動画像データを第一記憶部１８０に保存させる。第一記憶部１８０は、動画像処理部１９３から保存が指示された動画像データを消去せずに記憶しておく。そして、動画像処理部１９３は、ユーザ操作に従って動画像データを再生し第一表示部１３０に表示させる。
商品監視装置１３は商品棚９１０の動画像を表示し、端末装置１５は商品棚９１０のコマ送り画像（一定時間毎の静止画像）を表示する。このように、通信帯域及び装置の処理能力に応じて画像を使い分けることができる。
但し、端末装置１５が商品棚９１０の動画像を表示するようにしてもよい。
端末装置１５は、商品監視装置１３から変化検知情報を受信すると、取出し警報（アラーム）を出力する。ここでいう取出し警報は、取出しが行われたことを示す警報である。端末装置１５は、出力先装置の例に該当する。
また、端末装置１５は、ユーザ操作に従って被害情報を生成及び更新する。ここでいう被害情報は、取出しが不正な取出しか否か、及び、取出しの状況を示す情報である。
また、端末装置１５は、ユーザ操作に従って被害情報を生成及び更新する。ここでいう被害情報は、取出しが不正な取出しか否か、及び、取出しの状況を示す情報である。
端末装置１５は、例えばタブレット端末装置又はスマートフォンなど携帯型の端末装置を用いて構成される。或いは、端末装置１５は、固定型の端末装置として構成されていてもよい。例えば、端末装置１５は、ＰＯＳシステム１７の付近に固定して設置される。
例えば売場にいる店員が端末装置１５を所持しておく。端末装置１５が取出し警報を出力した場合、店員は商品棚９１０の状況を確認する。上記のように、店員が商品棚９１０付近の状況を確認し、必要に応じて顧客への声掛け、顧客の近くでの作業、警備員への通報等を行う。これにより、盗難を未然に防げる可能性がある。
また、店員は、商品棚９１０の状況の確認結果に基づいて、被害情報を端末装置１５へ入力する。
例えば売場にいる店員が端末装置１５を所持しておく。端末装置１５が取出し警報を出力した場合、店員は商品棚９１０の状況を確認する。上記のように、店員が商品棚９１０付近の状況を確認し、必要に応じて顧客への声掛け、顧客の近くでの作業、警備員への通報等を行う。これにより、盗難を未然に防げる可能性がある。
また、店員は、商品棚９１０の状況の確認結果に基づいて、被害情報を端末装置１５へ入力する。
図４は、端末装置１５の機能構成例を示す概略ブロック図である。図４の例で、端末装置１５は、第二通信部２１０と、第二操作入力部２２０と、第二表示部２３０と、第二記憶部２８０と、第二制御部２９０とを備える。第二制御部２９０は、変化検知情報取得部２９１と、被害情報処理部２９２を備える。
第二通信部２１０は、他の装置と通信を行う。特に、第二通信部２１０は、商品監視装置１３から変化検知情報を受信する。また、第二通信部２１０は、被害情報を商品監視装置１３へ送信する。
第二通信部２１０は、他の装置と通信を行う。特に、第二通信部２１０は、商品監視装置１３から変化検知情報を受信する。また、第二通信部２１０は、被害情報を商品監視装置１３へ送信する。
第二表示部２３０は、例えは液晶パネル等の表示画面を備え、第二制御部２９０の制御に従って各種画像を表示する。特に第二表示部２３０は、第二制御部２９０の制御に従って、変化検知情報に含まれる画像の時系列データのうちの何れかの画像をユーザ操作に基づいて表示する。具体的には、変化検知情報には棚監視カメラ１１が商品棚９１０を撮影した画像のうち所定時間毎の画像が含まれている。第二表示部２３０は、変化検知情報に含まれる商品棚９１０の画像のうち、ユーザ操作にて指定された画像を第二制御部２９０の制御に従って表示する。
第二操作入力部２２０は、例えば第二表示部２３０の表示画面に設けられてタッチパネルを構成するタッチセンサを備え、ユーザ操作を受ける。
第二記憶部２８０は、各種データを記憶する。第二記憶部２８０は、端末装置１５が備える記憶デバイスを用いて構成される。
第二制御部２９０は、端末装置１５の各部を制御して各種処理を行う。第二制御部２９０は、端末装置１５が備えるＣＰＵが第二記憶部２８０からプログラムを読み出して実行することで構成される。
第二記憶部２８０は、各種データを記憶する。第二記憶部２８０は、端末装置１５が備える記憶デバイスを用いて構成される。
第二制御部２９０は、端末装置１５の各部を制御して各種処理を行う。第二制御部２９０は、端末装置１５が備えるＣＰＵが第二記憶部２８０からプログラムを読み出して実行することで構成される。
変化検知情報取得部２９１は、商品監視装置１３からの変化検知情報を取得する。具体的には、商品監視装置１３が取出しを検出して変化検知情報を送信すると、第二通信部２１０が、商品監視装置１３からの通信データを受信する。変化検知情報取得部２９１は、第二通信部２１０が受信した通信データから変化検知情報を取り出す。
変化検知情報取得部２９１は、変化検知情報に基づいて、取出し警報を第二表示部２３０に表示させる。端末装置１５は、取出し警報を、第二表示部２３０の表示に加えて、或いは第二表示部２３０の表示に代えて、音声及び振動のうち何れか一方又は両方で出力するようにしてもよい。
変化検知情報取得部２９１は、変化検知情報に基づいて、取出し警報を第二表示部２３０に表示させる。端末装置１５は、取出し警報を、第二表示部２３０の表示に加えて、或いは第二表示部２３０の表示に代えて、音声及び振動のうち何れか一方又は両方で出力するようにしてもよい。
被害情報処理部２９２は、ユーザ操作に従って被害情報の生成及び更新を行う。具体的には、被害情報処理部２９２は、変化検知情報の受信又はユーザ操作を契機（トリガ）として、被害情報を編集するための詳細登録画面を第二表示部２３０に表示させる。そして、端末装置１５のユーザである店員が詳細登録画面に従って被害情報を入力するユーザ操作を行うと、被害情報処理部２９２は、ユーザ操作に従って被害情報を生成又は更新する。
図１に戻り、ハブ１２は、ハブ１２に接続された各装置間の通信を仲介する。特に、ハブ１２は、棚監視カメラ１１と商品監視装置１３との間、店内監視カメラ１６と商品監視装置１３との間、ＰＯＳシステム１７と商品監視装置１３との間、無線ルータ装置１４と商品監視装置１３との間それぞれの通信経路を確立する。
無線ルータ装置１４は、端末装置１５と無線通信を行って、端末装置１５と各機器との間の通信を仲介する。特に、ハブ１２と無線ルータ装置１４との組み合わせにより、商品監視装置１３と端末装置１５との通信経路を確立する。
無線ルータ装置１４は、端末装置１５と無線通信を行って、端末装置１５と各機器との間の通信を仲介する。特に、ハブ１２と無線ルータ装置１４との組み合わせにより、商品監視装置１３と端末装置１５との通信経路を確立する。
但し、商品監視システム１０の構成は、図１に示す構成に限定されない。
例えば、端末装置１５が商品監視装置１３の機能も兼ね備えるようにしてもよい。この場合、商品監視システム１０が商品監視装置１３を備えていなくてもよい。
また、店内監視カメラ１６及びＰＯＳシステム１７は、商品監視システム１０に必須ではない。商品監視システム１０は、店内監視カメラ１６及びＰＯＳシステム１７の何れか一方又は両方を備えていなくてもよい。
また、商品監視装置１３は、他の機器と直接通信を行うようにしてもよい。この場合、商品監視システム１０は、ハブ１２及び無線ルータ装置１４の何れか一方又は両方を備えていなくてもよい。
例えば、端末装置１５が商品監視装置１３の機能も兼ね備えるようにしてもよい。この場合、商品監視システム１０が商品監視装置１３を備えていなくてもよい。
また、店内監視カメラ１６及びＰＯＳシステム１７は、商品監視システム１０に必須ではない。商品監視システム１０は、店内監視カメラ１６及びＰＯＳシステム１７の何れか一方又は両方を備えていなくてもよい。
また、商品監視装置１３は、他の機器と直接通信を行うようにしてもよい。この場合、商品監視システム１０は、ハブ１２及び無線ルータ装置１４の何れか一方又は両方を備えていなくてもよい。
次に、図５〜図１１を参照して、端末装置１５の第二表示部２３０（図４）による画面表示について説明する。
図５は、第二表示部２３０が表示する通知画面の例を示す図である。第二表示部２３０による通知画面の表示は、取出し警報の出力の例に該当する。
図５の例で第二表示部２３０は、取出しが検知された商品群エリアを表示するとともに、取出しが検知された旨を示すメッセージを表示している。さらに、第二表示部２３０は、領域Ａ１１１、Ａ１１２のそれぞれに押ボタンのアイコンを表示している。
図５は、第二表示部２３０が表示する通知画面の例を示す図である。第二表示部２３０による通知画面の表示は、取出し警報の出力の例に該当する。
図５の例で第二表示部２３０は、取出しが検知された商品群エリアを表示するとともに、取出しが検知された旨を示すメッセージを表示している。さらに、第二表示部２３０は、領域Ａ１１１、Ａ１１２のそれぞれに押ボタンのアイコンを表示している。
領域Ａ１１１へのタッチ操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って取出し警報の表示を終了し、待ち受け画面（デスクトップ画面）を表示する。
領域Ａ１１２へのタッチ操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って、検知情報画面を表示する。検知情報画面を図６にしたがって説明する。
領域Ａ１１２へのタッチ操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って、検知情報画面を表示する。検知情報画面を図６にしたがって説明する。
図６は、第二表示部２３０が表示する検知情報画面の例を示す図である。
図６の例で、第二表示部２３０は、領域Ａ２１１に棚監視カメラ１１が撮影した商品棚９１０の画像を表示している。商品棚９１０の画像中の領域Ａ２１２は、商品状態検出部１９１が画像の変化を検出した領域である。第二表示部２３０は、商品棚９１０の画像中で画像の変化を検出した領域を示している。
第二表示部２３０が領域Ａ２１１に表示する画像は、商品状態検出部１９１が取出しを検出した時点から所定の過去の時点までの時系列の複数の画像のうち、１つの画像である。第二表示部２３０は、ユーザ操作に従って画像を切り替える。例えば、領域Ａ２１１内で右方向へのフリック操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って後の時点の画像を表示する。領域Ａ２１１内で左方向へのフリック操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って前の時点の画像を表示する。
図６の例で、第二表示部２３０は、領域Ａ２１１に棚監視カメラ１１が撮影した商品棚９１０の画像を表示している。商品棚９１０の画像中の領域Ａ２１２は、商品状態検出部１９１が画像の変化を検出した領域である。第二表示部２３０は、商品棚９１０の画像中で画像の変化を検出した領域を示している。
第二表示部２３０が領域Ａ２１１に表示する画像は、商品状態検出部１９１が取出しを検出した時点から所定の過去の時点までの時系列の複数の画像のうち、１つの画像である。第二表示部２３０は、ユーザ操作に従って画像を切り替える。例えば、領域Ａ２１１内で右方向へのフリック操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って後の時点の画像を表示する。領域Ａ２１１内で左方向へのフリック操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って前の時点の画像を表示する。
第二表示部２３０は、領域Ａ２１１に表示している画像の撮影時刻情報を領域Ａ２２１示している。また、領域Ａ２２２へのタッチ操作が行われた場合、第二表示部２３０は、第二制御部２９０に従って、領域Ａ２１１に表示する画像を商品状態検出部１９１が取出しを検出した時点における画像に切り替える。
また、第二表示部２３０は、表示領域Ａ２３１、Ａ２３２のそれぞれに押ボタンのアイコンを表示している。
領域Ａ２３１へのタッチ操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って詳細登録画面を表示する。詳細登録画面を図７にしたがって後述する。
また、第二表示部２３０は、表示領域Ａ２３１、Ａ２３２のそれぞれに押ボタンのアイコンを表示している。
領域Ａ２３１へのタッチ操作が行われた場合、第二表示部２３０は、第二制御部２９０の制御に従って詳細登録画面を表示する。詳細登録画面を図７にしたがって後述する。
一方、領域Ａ２３２へのタッチ操作が行われた場合、第二表示部２３０は、待ち受け画面を表示する。この場合、端末装置１５のユーザである店員が、取出しが正当な取出しであったと判定したことを意味する。そこで、端末装置１５は、取出しについての詳細情報の入力をユーザに要求することなく、取出しに関する画面表示を終了する。
また、第二表示部２３０は、商品状態検出部１９１が取出しを検出した時刻を領域Ａ２４１に表示し、商品状態検出部１９１が取出しを検出した商品群エリアの名称を領域Ａ２４２に表示している。商品群エリアの名称は、例えばユーザが予め設定しておく。
また、第二表示部２３０は、商品状態検出部１９１が取出しを検出した時刻を領域Ａ２４１に表示し、商品状態検出部１９１が取出しを検出した商品群エリアの名称を領域Ａ２４２に表示している。商品群エリアの名称は、例えばユーザが予め設定しておく。
図７は、第二表示部２３０が表示する詳細登録画面の第一例を示す図である。
図７の例で、領域Ａ３１１、Ａ３２１、Ａ３２２は、それぞれ図６の領域Ａ２１１、Ａ２２１、Ａ２２２と同様である。領域Ａ３３１、Ａ３３２は、それぞれ図６の領域Ａ２４１、Ａ２４２と同様である。
図７の詳細登録画面において、第二表示部２３０は、領域Ａ３３３に状況情報を表示している。この状況情報は、端末装置１５のユーザである店員が取出しについて問題の有無を判定した判定結果を示す情報である。図６の領域Ａ２３１へのタッチ操作によって状況情報の値は「問題あり」に設定される。または、図６の領域Ａ２３２へのタッチ操作によって状況情報の値は「問題なし」に設定される。領域Ａ３３３では、ユーザは、状況情報の値を変更することができる。具体的には、領域Ａ３３３の黒塗りの下向きの三角形のボタンへのタッチ操作が行われると、第二表示部２３０は、「問題あり」及び「問題なし」を示すプルダウンメニューを表示する。プルダウンメニューにて「問題あり」、「問題なし」の何れかへのタッチ操作が行われると、被害情報処理部２９２は、状況情報の値をタッチ操作にて選択された値に更新する。
図７の例で、領域Ａ３１１、Ａ３２１、Ａ３２２は、それぞれ図６の領域Ａ２１１、Ａ２２１、Ａ２２２と同様である。領域Ａ３３１、Ａ３３２は、それぞれ図６の領域Ａ２４１、Ａ２４２と同様である。
図７の詳細登録画面において、第二表示部２３０は、領域Ａ３３３に状況情報を表示している。この状況情報は、端末装置１５のユーザである店員が取出しについて問題の有無を判定した判定結果を示す情報である。図６の領域Ａ２３１へのタッチ操作によって状況情報の値は「問題あり」に設定される。または、図６の領域Ａ２３２へのタッチ操作によって状況情報の値は「問題なし」に設定される。領域Ａ３３３では、ユーザは、状況情報の値を変更することができる。具体的には、領域Ａ３３３の黒塗りの下向きの三角形のボタンへのタッチ操作が行われると、第二表示部２３０は、「問題あり」及び「問題なし」を示すプルダウンメニューを表示する。プルダウンメニューにて「問題あり」、「問題なし」の何れかへのタッチ操作が行われると、被害情報処理部２９２は、状況情報の値をタッチ操作にて選択された値に更新する。
図８は、第二表示部２３０が表示する詳細登録画面の第二例を示す図である。
図８は、図７に示した詳細登録画面の下方向の続きの詳細登録画面の例を示している。第二表示部２３０は、図７の詳細登録画面に対するスクロールダウンによって、被害情報処理部２９２の制御に従って図８の画面を表示している。
領域Ａ３３４は、被害商品に関する情報を入力可能な入力欄である。第二操作入力部２２０は、盗難に遭った商品（商品棚９１０から取り出された商品）の商品名及び数量入力をフリーワード入力にて受け付ける。
図８は、図７に示した詳細登録画面の下方向の続きの詳細登録画面の例を示している。第二表示部２３０は、図７の詳細登録画面に対するスクロールダウンによって、被害情報処理部２９２の制御に従って図８の画面を表示している。
領域Ａ３３４は、被害商品に関する情報を入力可能な入力欄である。第二操作入力部２２０は、盗難に遭った商品（商品棚９１０から取り出された商品）の商品名及び数量入力をフリーワード入力にて受け付ける。
領域Ａ３３５は、被害総額の入力欄である。第二操作入力部２２０は、対象となっている取出しによる被害の総額（例えば盗難被害の合計金額）の入力をフリーワード入力にて受け付ける。
領域Ａ３３６は、コメントの入力欄である。第二操作入力部２２０は、ユーザのコメントをフリーワード入力にて受け付ける。
領域Ａ３３６は、コメントの入力欄である。第二操作入力部２２０は、ユーザのコメントをフリーワード入力にて受け付ける。
領域Ａ３３７は、登録者の表示欄である。第二操作入力部２２０は、登録者名の入力操作を受け付けるようにしてもよい。或いは、第二操作入力部２２０は、被害情報の入力時に端末装置１５にログインしているユーザの氏名を、被害情報処理部２９２が自動的に領域Ａ３３７に表示するようにしてもよい。
領域Ａ３４１へのタッチ操作が行われた場合、被害情報処理部２９２は、入力された被害情報を、第二通信部２１０を介して商品監視装置１３へ送信する。商品監視装置１３では、第一記憶部１８０が被害情報を、変化検知情報と対応付けて記憶する。また、領域Ａ３４１へのタッチ操作により、第二表示部２３０は詳細登録画面の表示を終了し、例えば被害情報一覧画面を表示する。被害情報一覧画面を図９にしたがって説明する。
領域Ａ３４１へのタッチ操作が行われた場合、被害情報処理部２９２は、入力された被害情報を、第二通信部２１０を介して商品監視装置１３へ送信する。商品監視装置１３では、第一記憶部１８０が被害情報を、変化検知情報と対応付けて記憶する。また、領域Ａ３４１へのタッチ操作により、第二表示部２３０は詳細登録画面の表示を終了し、例えば被害情報一覧画面を表示する。被害情報一覧画面を図９にしたがって説明する。
図９は、第二表示部２３０が表示する被害情報一覧画面の例を示す図である。
図９の例で、第二表示部２３０は、領域Ａ４１１に被害情報のリストを表示している。
領域Ａ４２１は、被害情報の更新を受け付けるタッチ領域である。領域Ａ４１１のリストでいずれかの被害情報がタッチ操作にて選択された状態で、領域Ａ４２１へのタッチ操作が行われると、被害情報処理部２９２は、選択された被害情報を商品監視装置１３から取得する。そして、被害情報処理部２９２は、取得した被害情報を有する詳細登録画面を、第二表示部２３０に表示させる。被害情報処理部２９２は、ユーザ操作に従って更新された情報にしたがって、被害情報を更新する。
図９の例で、第二表示部２３０は、領域Ａ４１１に被害情報のリストを表示している。
領域Ａ４２１は、被害情報の更新を受け付けるタッチ領域である。領域Ａ４１１のリストでいずれかの被害情報がタッチ操作にて選択された状態で、領域Ａ４２１へのタッチ操作が行われると、被害情報処理部２９２は、選択された被害情報を商品監視装置１３から取得する。そして、被害情報処理部２９２は、取得した被害情報を有する詳細登録画面を、第二表示部２３０に表示させる。被害情報処理部２９２は、ユーザ操作に従って更新された情報にしたがって、被害情報を更新する。
領域Ａ４２２は、被害情報の削除を受け付けるタッチ領域である。領域Ａ４１１のリストでいずれかの被害情報がタッチ操作にて選択された状態で、領域Ａ４２２へのタッチ操作が行われると、被害情報処理部２９２は、選択された被害情報の削除指示を、第一通信部１１０を介して商品監視装置１３へ送信する。商品監視装置１３は、削除指示に従って被害情報を削除する。
被害情報に対する不正操作を防止するために、複数の店員のうち権限を付与された店員のみが、被害情報の更新又は削除を行えるようにしてもよい。
領域Ａ４３１は、取出しに関する表示の終了指示を受け付けるタッチ領域である。領域Ａ４３１へのタッチ操作が行われると、第二表示部２３０は、第二制御部２９０の制御に従って、取出しに関する表示を終了し待ち受け画面を表示する。
領域Ａ４３１は、取出しに関する表示の終了指示を受け付けるタッチ領域である。領域Ａ４３１へのタッチ操作が行われると、第二表示部２３０は、第二制御部２９０の制御に従って、取出しに関する表示を終了し待ち受け画面を表示する。
図１０は、第二表示部２３０が表示する販売履歴画面の例を示す図である。
商品状態検出部１９１が検出した取出しに対応付けられる販売情報がある場合、商品監視装置１３がＰＯＳシステム１７から販売情報を取得し、変化検知情報と販売情報とを対応付けて第一記憶部１８０に記憶させる。ここで、取出しと販売情報との対応関係として、いろいろな対応関係を採用することができる。例えば、商品監視装置１３が、取出しが行われた後、所定時間以内の販売情報を、この取出しに対応する販売情報として判定してもよい。あるいは、商品監視装置１３が、取出しが行われた後、所定時間以内の販売情報のうち、商品棚９１０から取り出された商品の購入を示す販売情報を、この取出しに対応する販売情報として判定してもよい。
商品状態検出部１９１が検出した取出しに対応付けられる販売情報がある場合、商品監視装置１３がＰＯＳシステム１７から販売情報を取得し、変化検知情報と販売情報とを対応付けて第一記憶部１８０に記憶させる。ここで、取出しと販売情報との対応関係として、いろいろな対応関係を採用することができる。例えば、商品監視装置１３が、取出しが行われた後、所定時間以内の販売情報を、この取出しに対応する販売情報として判定してもよい。あるいは、商品監視装置１３が、取出しが行われた後、所定時間以内の販売情報のうち、商品棚９１０から取り出された商品の購入を示す販売情報を、この取出しに対応する販売情報として判定してもよい。
第二表示部２３０が検知情報画面（図６）を表示しているときに販売履歴画面（図１０）の表示を指示するユーザ操作が行われた場合、被害情報処理部２９２は、検知情報画面に対応付けられた販売情報を第二表示部２３０に表示させる。具体的に、被害情報処理部２９２は、表示中の検知情報画面で対象となっている取出しに対応付けられた販売情報を商品監視装置１３から取得して、第二表示部２３０に表示させる。
第二表示部２３０が詳細登録画面（図７、図８）を表示しているときに販売履歴画面（図１０）の表示を指示するユーザ操作が行われた場合、被害情報処理部２９２は、詳細登録画面に対応付けられた販売情報を第二表示部２３０に表示させる。具体的に、被害情報処理部２９２は、表示中の詳細登録画面で対象となっている取出しに対応付けられた販売情報を商品監視装置１３から取得して第二表示部２３０に表示させる。
販売履歴画面の表示終了を指示するユーザ操作が行われた場合、第二表示部２３０は、販売履歴画面の表示を終了し、検知情報画面（図６）の表示又は詳細登録画面（図７、図８）の表示へ戻る。
第二表示部２３０が詳細登録画面（図７、図８）を表示しているときに販売履歴画面（図１０）の表示を指示するユーザ操作が行われた場合、被害情報処理部２９２は、詳細登録画面に対応付けられた販売情報を第二表示部２３０に表示させる。具体的に、被害情報処理部２９２は、表示中の詳細登録画面で対象となっている取出しに対応付けられた販売情報を商品監視装置１３から取得して第二表示部２３０に表示させる。
販売履歴画面の表示終了を指示するユーザ操作が行われた場合、第二表示部２３０は、販売履歴画面の表示を終了し、検知情報画面（図６）の表示又は詳細登録画面（図７、図８）の表示へ戻る。
図１１は、第二表示部２３０が表示する動線画面の例を示す図である。
図１１の例で、第二表示部２３０は、取出しを行った顧客の動線情報を店舗の見取り図上に表示している。
図１１の例では、顧客はカウンタに立ち寄っている。カウンタは、所定の精算エリアの例に該当する。第二表示部２３０は、顧客の動線情報に加えて、顧客がカウンタに立ち寄った時刻を表示している。
図１１の例で、第二表示部２３０は、取出しを行った顧客の動線情報を店舗の見取り図上に表示している。
図１１の例では、顧客はカウンタに立ち寄っている。カウンタは、所定の精算エリアの例に該当する。第二表示部２３０は、顧客の動線情報に加えて、顧客がカウンタに立ち寄った時刻を表示している。
端末装置１５のユーザである店員は、顧客がカウンタに立ち寄ったタイミングにおける販売情報を端末装置１５に表示させる。これにより、取出しが正当な取出しであるか否かを判定することができる。顧客がカウンタに立ち寄ったタイミングにおける販売情報が、取出しの対象となった商品が購入されたことを示す場合、取出しが正当な取出しであったと判定することができる。
あるいは、第二表示部２３０が、動線情報に代えて、または、動線情報に加えて、取出しを行った顧客がカウンタで支払いを行ったか否かを示す情報を文字、又は記号で表示してもよい。支払いを行ったか否かを示す文字は、例えば、「支払有」／「支払無」である。支払いを行ったか否かを示す記号は、例えば「マル」／「バツ」である。
あるいは、第二表示部２３０が、動線情報に代えて、または、動線情報に加えて、取出しを行った顧客がカウンタで支払いを行ったか否かを示す情報を文字、又は記号で表示してもよい。支払いを行ったか否かを示す文字は、例えば、「支払有」／「支払無」である。支払いを行ったか否かを示す記号は、例えば「マル」／「バツ」である。
次に図１２及び図１３を参照して、商品監視システム１０の動作について説明する。
図１２は、取出しを検出する場合の商品監視システム１０の動作の一例を示す図である。
棚監視カメラ１１は、商品棚９１０を撮影して生成した画像データを商品監視装置１３へ送信する（シーケンスＳ１０１）。棚監視カメラ１１は、商品棚９１０の動画像データを連続的に商品監視装置１３へ送信するようにしてもよい。或いは、棚監視カメラ１１は、商品棚９１０の動画像データを一定時間分毎に纏めて商品監視装置１３へ送信するようにしてもよい。或いは、棚監視カメラ１１は動画像データの送信に代えて、動画像データのフレームに相当する静止画像データを商品監視装置１３へ送信するようにしてもよい。
図１２は、取出しを検出する場合の商品監視システム１０の動作の一例を示す図である。
棚監視カメラ１１は、商品棚９１０を撮影して生成した画像データを商品監視装置１３へ送信する（シーケンスＳ１０１）。棚監視カメラ１１は、商品棚９１０の動画像データを連続的に商品監視装置１３へ送信するようにしてもよい。或いは、棚監視カメラ１１は、商品棚９１０の動画像データを一定時間分毎に纏めて商品監視装置１３へ送信するようにしてもよい。或いは、棚監視カメラ１１は動画像データの送信に代えて、動画像データのフレームに相当する静止画像データを商品監視装置１３へ送信するようにしてもよい。
商品棚９１０の画像データを取得した商品監視装置１３は、得られた画像データに基づいて取出しの有無を判定する（シーケンスＳ１０２）。具体的には、商品監視装置１３は、新たに取得した商品棚９１０の画像と、商品棚９１０の過去の画像とを比較し、画像の差分を検出する。商品監視装置１３は、いずれかの商品群エリアについて、検出された差分に対応する部分面積の商品群エリア全体の面積に対する割合が閾値以上であるか否かを判定する。割合が閾値以上であると判定した場合、商品監視装置１３は、取出し有りと判定する。図１２の例では、商品監視装置１３は取出し有りと判定している。
取出し有りと判定した商品監視装置１３は、検出した取出しに関する変化検知情報を生成して端末装置１５へ送信する（シーケンスＳ１０３）。
端末装置１５は、商品監視装置１３から受信した変化検知情報に基づいて、取出し警報を出力する（シーケンスＳ１０４）。
また、商品監視装置１３は、生成した変化検知情報を保存（記憶）する（シーケンスＳ１０５）。
商品監視装置１３は、販売情報及び動線情報のうち何れか一方又は両方を含む変化検知情報を生成するようにしてもよい。或いは、商品監視装置１３が、変化検知情報を端末装置１５へ送信した後に、販売情報及び動線情報のうち何れか一方又は両方を端末装置１５へ送信するようにしてもよい。
端末装置１５は、商品監視装置１３から受信した変化検知情報に基づいて、取出し警報を出力する（シーケンスＳ１０４）。
また、商品監視装置１３は、生成した変化検知情報を保存（記憶）する（シーケンスＳ１０５）。
商品監視装置１３は、販売情報及び動線情報のうち何れか一方又は両方を含む変化検知情報を生成するようにしてもよい。或いは、商品監視装置１３が、変化検知情報を端末装置１５へ送信した後に、販売情報及び動線情報のうち何れか一方又は両方を端末装置１５へ送信するようにしてもよい。
図１３は、商品監視装置１３が取出しの有無を判定する処理手順の例を示すフローチャートである。
図１３の処理で、商品状態検出部１９１は、第一通信部１１０を介して棚監視カメラ１１から商品棚９１０の画像データを取得する（ステップＳ２０１）。そして、商品状態検出部１９１は、ステップＳ２０１で得られた商品棚９１０の画像データと、商品棚９１０の過去の画像データ（例えば１０秒前の画像）とを比較する（ステップＳ２０２）。そして、商品状態検出部１９１は、商品群エリアそれぞれについて、商品群エリアの画像の相違部分（差分）の面積の、商品群エリア全体の面積に対する割合が閾値以上か否かを判定する（ステップＳ２０３）。
図１３の処理で、商品状態検出部１９１は、第一通信部１１０を介して棚監視カメラ１１から商品棚９１０の画像データを取得する（ステップＳ２０１）。そして、商品状態検出部１９１は、ステップＳ２０１で得られた商品棚９１０の画像データと、商品棚９１０の過去の画像データ（例えば１０秒前の画像）とを比較する（ステップＳ２０２）。そして、商品状態検出部１９１は、商品群エリアそれぞれについて、商品群エリアの画像の相違部分（差分）の面積の、商品群エリア全体の面積に対する割合が閾値以上か否かを判定する（ステップＳ２０３）。
何れの商品群エリアについても割合が閾値未満であると判定した場合（ステップＳ２０３：ＮＯ）、ステップＳ２０１へ戻る。一方、何れかの商品群エリアについて割合が閾値以上であると判定した場合（ステップＳ２０３：ＹＥＳ）、商品監視装置１３は取出し検出時の処理を行う（ステップＳ２０４）。例えば、図１２を参照して説明したように、商品監視装置１３は、変化検知情報を生成して端末装置１５へ送信し、また、生成した変化検知情報を記憶する。
ステップＳ２０４の後、ステップＳ２０１へ戻る。
ステップＳ２０４の後、ステップＳ２０１へ戻る。
以上のように、商品状態検出部１９１は、商品棚９１０に設定された商品群エリアの画像情報に基づいて、商品群エリアからの所定条件を満たす数量の商品の取出しを検出する。
変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した場合、取出しが検出された時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を、端末装置１５へ出力する。
端末装置１５のユーザである店員は、変化検知情報に基づいて取出しを認識することで、不正な取出しの可能性を認識することができる。例えば、端末装置１５が変化検知情報に基づいて取出し警報を出力することで、店員は、取出しを認識することができる。
特に商品監視システム１０では、棚監視カメラ１１で商品棚９１０を撮影するという比較的簡単な構成で不正な取出しの可能性を検出することができる。この点で、商品監視システム１０によれば、商品の不正な店外への持ち出しが予想される事象を、比較的低コストで検出することができる。
変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した場合、取出しが検出された時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を、端末装置１５へ出力する。
端末装置１５のユーザである店員は、変化検知情報に基づいて取出しを認識することで、不正な取出しの可能性を認識することができる。例えば、端末装置１５が変化検知情報に基づいて取出し警報を出力することで、店員は、取出しを認識することができる。
特に商品監視システム１０では、棚監視カメラ１１で商品棚９１０を撮影するという比較的簡単な構成で不正な取出しの可能性を検出することができる。この点で、商品監視システム１０によれば、商品の不正な店外への持ち出しが予想される事象を、比較的低コストで検出することができる。
変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した時点より後の販売情報を取得し、販売情報を含む変化検知情報を端末装置１５へ出力するようにしてもよい。
これにより、端末装置１５のユーザである店員は、変化検知情報を参照して取出しが正当な取出しであったか否かを判定することができる。
これにより、端末装置１５のユーザである店員は、変化検知情報を参照して取出しが正当な取出しであったか否かを判定することができる。
変化検知情報出力部１９２は、変化検知情報を端末装置１５へ出力した後に、商品状態検出部１９１が取出しを検出した時点より後の販売情報を取得して端末装置１５へ出力するようにしてもよい。
端末装置１５のユーザは、販売情報を参照することで取出しが正当な取出しか否かを判定することができる。また、変化検知情報出力部１９２は、販売情報の取得を待たずに変化検知情報を端末装置１５へ出力する。このため、端末装置１５のユーザは、商品棚９１０からの商品の取出しをいち早く認識して対応することができる。
端末装置１５のユーザは、販売情報を参照することで取出しが正当な取出しか否かを判定することができる。また、変化検知情報出力部１９２は、販売情報の取得を待たずに変化検知情報を端末装置１５へ出力する。このため、端末装置１５のユーザは、商品棚９１０からの商品の取出しをいち早く認識して対応することができる。
変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した時点から所定の時間以内にＰＯＳシステム１７に登録された販売情報を取得するようにしてもよい。このように、変化検知情報出力部１９２は、販売情報を取得する時間範囲を限定する。これにより、端末装置１５を所持する店員が参照する販売情報を限定することができる。この点で、店員の負荷を軽減することができる。
変化検知情報出力部１９２が、取り出された商品に関連する販売情報を、商品状態検出部１９１が取出しを検出した時点から所定の時間以内にＰＯＳシステム１７から取得できない場合には、販売情報を含まない変化検知情報を端末装置１５へ出力するようにしてもよい。
端末装置１５を所持する店員は、変化検知情報に販売情報が含まれていない場合、該当商品がＰＯＳシステム１７を経ずに店外へ持ち出された可能性が高いと推定することできる。すなわち、店員は、該当商品が盗まれた可能性が高いと推定することができる。
端末装置１５を所持する店員は、変化検知情報に販売情報が含まれていない場合、該当商品がＰＯＳシステム１７を経ずに店外へ持ち出された可能性が高いと推定することできる。すなわち、店員は、該当商品が盗まれた可能性が高いと推定することができる。
変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した時点を基準とする商品群エリアの過去の画像に基づいて、取出しを行った人物に関する情報を取得して端末装置１５へ出力するようにしてもよい。
端末装置１５のユーザは、取出しを行った人物を特定する際、取出しを行った人物に関する情報を参照することで、人物特定の精度を高めることができる。
端末装置１５のユーザは、取出しを行った人物を特定する際、取出しを行った人物に関する情報を参照することで、人物特定の精度を高めることができる。
変化検知情報出力部１９２は、商品状態検出部１９１が取出しを検出した時点を基準とする商品群エリアの過去の画像に基づいて、取出しを行った人物に関する情報を検出する。このとき、変化検知情報出力部１９２は、変化検知情報を端末装置１５へ出力した後に、取出しを行った人物に関する情報を端末装置１５へ出力するようにしてもよい。
端末装置１５のユーザは、取出しを行った人物を特定する際、取出しを行った人物に関する情報を参照することで、特定の精度を高めることができる。また、変化検知情報出力部１９２は、取出しを行った人物に関する情報の取得を待たずに変化検知情報を端末装置１５へ出力する。これにより、端末装置１５のユーザは、商品棚９１０からの商品の取出しをいち早く認識して対応することができる。
端末装置１５のユーザは、取出しを行った人物を特定する際、取出しを行った人物に関する情報を参照することで、特定の精度を高めることができる。また、変化検知情報出力部１９２は、取出しを行った人物に関する情報の取得を待たずに変化検知情報を端末装置１５へ出力する。これにより、端末装置１５のユーザは、商品棚９１０からの商品の取出しをいち早く認識して対応することができる。
変化検知情報出力部１９２は、取出しを行った人物に関する情報に基づいて、その人物がその商品（取り出された商品）を所定の清算エリアを通過させたか否かを判定するようにしてもよい。通過させていないと判定した場合、変化検知情報出力部１９２は、変化検知情報を端末装置１５へ出力した後に、取出しを行った人物に関する情報を端末装置１５へ出力するようにしてもよい。
このように、変化検知情報出力部１９２が、取出しを行った人物が、取り出された商品を精算エリアに通過させたか否かを判定する。これにより、端末装置１５のユーザは、取出しが正当な取出しか否かを判定する際の参考情報とすることができる。
このように、変化検知情報出力部１９２が、取出しを行った人物が、取り出された商品を精算エリアに通過させたか否かを判定する。これにより、端末装置１５のユーザは、取出しが正当な取出しか否かを判定する際の参考情報とすることができる。
端末装置１５の第二表示部２３０は、変化検知情報に含まれる画像の時系列データのうちの何れかの画像をユーザ操作に基づいて表示するようにしてもよい。
端末装置１５のユーザは、第二表示部２３０が表示する画像を参照して、取出しが行われたときの状況を把握することができる。
端末装置１５のユーザは、第二表示部２３０が表示する画像を参照して、取出しが行われたときの状況を把握することができる。
商品監視装置１３の第一表示部１３０が、商品状態検出部１９１が取出しを検出した時点から所定の過去の時点までの商品群エリアの動画像を表示するようにしてもよい。
商品監視装置１３のユーザは、この動画像を参照して、取出しが行われたときの状況を把握することができる。
商品監視装置１３のユーザは、この動画像を参照して、取出しが行われたときの状況を把握することができる。
次に、図１４〜図１６を参照して、本実施形態の最小構成について説明する。
図１４は、本実施形態に係る商品監視装置の最小構成の例を示す図である。図１４に示す商品監視装置２０は、商品状態検出部２１と、変化検知情報出力部２２とを備える。
かかる構成にて、商品状態検出部２１は、商品棚に設定された商品群エリアの画像情報に基づいて、商品群エリアからの所定条件を満たす数量の商品の取出しを検出する。変化検知情報出力部２２は、商品状態検出部２１が取出しを検出した場合、商品状態検出部２１が取出しを検出した時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する。
ユーザは、変化検知情報に基づいて取出しを認識することで、不正な取出しの可能性を認識することができる。特に商品監視装置２０では、カメラで商品棚を撮影するという比較的簡単な構成で不正な取出しの可能性を検出することができる。この点で、商品監視装置２０によれば、商品の不正な店外への持ち出しが予想される事象を、比較的低コストで検出することができる。
図１４は、本実施形態に係る商品監視装置の最小構成の例を示す図である。図１４に示す商品監視装置２０は、商品状態検出部２１と、変化検知情報出力部２２とを備える。
かかる構成にて、商品状態検出部２１は、商品棚に設定された商品群エリアの画像情報に基づいて、商品群エリアからの所定条件を満たす数量の商品の取出しを検出する。変化検知情報出力部２２は、商品状態検出部２１が取出しを検出した場合、商品状態検出部２１が取出しを検出した時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する。
ユーザは、変化検知情報に基づいて取出しを認識することで、不正な取出しの可能性を認識することができる。特に商品監視装置２０では、カメラで商品棚を撮影するという比較的簡単な構成で不正な取出しの可能性を検出することができる。この点で、商品監視装置２０によれば、商品の不正な店外への持ち出しが予想される事象を、比較的低コストで検出することができる。
図１５は、本実施形態に係る商品監視システムの最小構成の例を示す図である。図１５に示す商品監視システム３０は、商品監視装置３１と、出力先装置３４とを備える。商品監視装置３１は、商品状態検出部３２と、変化検知情報出力部３３とを備える。
かかる構成にて、商品状態検出部３２は、商品棚に設定された商品群エリアの画像情報に基づいて、商品群エリアからの所定条件を満たす数量の商品の取出しを検出する。変化検知情報出力部３３は、商品状態検出部３２が取出しを検出した場合、商品状態検出部３２が取出しを検出した時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を出力先装置３４へ出力する。
ユーザは、変化検知情報に基づいて取出しを認識することで、不正な取出しの可能性を認識することができる。特に商品監視システム３０では、カメラで商品棚を撮影するという比較的簡単な構成で不正な取出しの可能性を検出することができる。この点で、商品監視システム３０によれば、商品の不正な店外への持ち出しが予想される事象を、比較的低コストで検出することができる。
かかる構成にて、商品状態検出部３２は、商品棚に設定された商品群エリアの画像情報に基づいて、商品群エリアからの所定条件を満たす数量の商品の取出しを検出する。変化検知情報出力部３３は、商品状態検出部３２が取出しを検出した場合、商品状態検出部３２が取出しを検出した時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を出力先装置３４へ出力する。
ユーザは、変化検知情報に基づいて取出しを認識することで、不正な取出しの可能性を認識することができる。特に商品監視システム３０では、カメラで商品棚を撮影するという比較的簡単な構成で不正な取出しの可能性を検出することができる。この点で、商品監視システム３０によれば、商品の不正な店外への持ち出しが予想される事象を、比較的低コストで検出することができる。
図１６は、本実施形態に係る出力先装置の最小構成の例を示す図である。図１６に示す出力先装置４０は、変化検知情報取得部４１と、表示部４２とを備える。
かかる構成にて、変化検知情報取得部４１は、商品棚に設定された商品群エリアから所定条件を満たす数量の商品の取出しが検出された場合、取出しが検出された時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を取得する。表示部４２は、変化検知情報に含まれる前記商品群エリアの画像を表示する。
ユーザは、商品群エリアの画像を参照することで、取出しが行われたときの状況を把握することができる。
かかる構成にて、変化検知情報取得部４１は、商品棚に設定された商品群エリアから所定条件を満たす数量の商品の取出しが検出された場合、取出しが検出された時点から所定の過去の時点までの商品群エリアの画像の時系列データを含む変化検知情報を取得する。表示部４２は、変化検知情報に含まれる前記商品群エリアの画像を表示する。
ユーザは、商品群エリアの画像を参照することで、取出しが行われたときの状況を把握することができる。
なお、第一制御部１９０及び第二制御部２９０の機能の全部または一部を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより処理を行うようにしてもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、
前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する変化検知情報出力部と、
を備える商品監視装置。
（付記１）
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、
前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する変化検知情報出力部と、
を備える商品監視装置。
（付記２）
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点より後の時点の前記商品の販売履歴を示す販売情報を取得し、前記販売情報を含む前記変化検知情報を前記出力先装置へ出力する
付記１に記載の商品監視装置。
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点より後の時点の前記商品の販売履歴を示す販売情報を取得し、前記販売情報を含む前記変化検知情報を前記出力先装置へ出力する
付記１に記載の商品監視装置。
（付記３）
前記変化検知情報出力部は、前記変化検知情報を前記出力先装置へ出力した後に、前記商品状態検出部が前記取出しを検出した時点より後の時点の前記商品の販売履歴を示す販売情報を取得し、前記販売情報を前記出力先装置へ出力する
付記１に記載の商品監視装置。
前記変化検知情報出力部は、前記変化検知情報を前記出力先装置へ出力した後に、前記商品状態検出部が前記取出しを検出した時点より後の時点の前記商品の販売履歴を示す販売情報を取得し、前記販売情報を前記出力先装置へ出力する
付記１に記載の商品監視装置。
（付記４）
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点から所定の時間以内に販売情報管理装置に登録された販売情報を取得する
付記２または付記３に記載の商品監視装置。
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点から所定の時間以内に販売情報管理装置に登録された販売情報を取得する
付記２または付記３に記載の商品監視装置。
（付記５）
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点から所定の時間以内に前記販売情報管理装置から前記商品に関連する販売情報を取得できない場合には、前記販売情報を含まない前記変化検知情報を前記出力先装置へ出力する
付記４に記載の商品管理装置。
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点から所定の時間以内に前記販売情報管理装置から前記商品に関連する販売情報を取得できない場合には、前記販売情報を含まない前記変化検知情報を前記出力先装置へ出力する
付記４に記載の商品管理装置。
（付記６）
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点を基準とする前記商品群エリアの過去の画像に基づいて、前記商品を取り出した人物に関する情報を取得し、前記商品を取り出した人物に関する情報を前記出力先装置へ出力する
付記１から５の何れか一項に記載の商品監視装置。
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点を基準とする前記商品群エリアの過去の画像に基づいて、前記商品を取り出した人物に関する情報を取得し、前記商品を取り出した人物に関する情報を前記出力先装置へ出力する
付記１から５の何れか一項に記載の商品監視装置。
（付記７）
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点を基準とする前記商品群エリアの過去の画像に基づいて、前記商品を取り出した人物に関する情報を検出し、前記変化検知情報を前記出力先装置へ出力した後に、前記人物に関する情報を前記出力先装置へ出力する
付記１から５のいずれか一項に記載の商品監視装置。
前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点を基準とする前記商品群エリアの過去の画像に基づいて、前記商品を取り出した人物に関する情報を検出し、前記変化検知情報を前記出力先装置へ出力した後に、前記人物に関する情報を前記出力先装置へ出力する
付記１から５のいずれか一項に記載の商品監視装置。
（付記８）
前記変化検知情報出力部は、前記商品を取り出した人物に関する情報に基づいて前記人物が前記商品を所定の清算エリアを通過させたか否かを判定し、通過させていないと判定した場合に、前記人物に関する情報を前記出力先装置へ出力する
付記７に記載の商品監視装置。
前記変化検知情報出力部は、前記商品を取り出した人物に関する情報に基づいて前記人物が前記商品を所定の清算エリアを通過させたか否かを判定し、通過させていないと判定した場合に、前記人物に関する情報を前記出力先装置へ出力する
付記７に記載の商品監視装置。
（付記９）
商品監視装置と出力先装置とを備えた商品監視システムであって、
前記商品監視装置は、
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、
前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を前記出力先装置へ出力する変化検知情報出力部と、
を備える商品監視システム。
商品監視装置と出力先装置とを備えた商品監視システムであって、
前記商品監視装置は、
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、
前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を前記出力先装置へ出力する変化検知情報出力部と、
を備える商品監視システム。
（付記１０）
前記出力先装置は、
前記変化検知情報に含まれる前記画像の時系列データのうちの何れかの画像をユーザ操作に基づいて表示する表示部を備える
付記９に記載の商品監視システム。
前記出力先装置は、
前記変化検知情報に含まれる前記画像の時系列データのうちの何れかの画像をユーザ操作に基づいて表示する表示部を備える
付記９に記載の商品監視システム。
（付記１１）
前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの動画像を表示する表示装置を備える
付記９又は付記１０に記載の商品監視システム。
前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの動画像を表示する表示装置を備える
付記９又は付記１０に記載の商品監視システム。
（付記１２）
所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得する変化検知情報取得部と、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示する表示部と
を備える出力先装置。
所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得する変化検知情報取得部と、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示する表示部と
を備える出力先装置。
（付記１３）
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出した場合、前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する
ことを含む商品監視方法。
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出した場合、前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する
ことを含む商品監視方法。
（付記１４）
所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得し、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示する
ことを含む表示方法。
所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得し、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示する
ことを含む表示方法。
（付記１５）
コンピュータに、
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出した場合、前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力させる
処理を実行させるプログラム。
コンピュータに、
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出した場合、前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力させる
処理を実行させるプログラム。
（付記１６）
コンピュータに、
所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得させ、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示させる
処理を実行させるプログラム。
コンピュータに、
所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得させ、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示させる
処理を実行させるプログラム。
この出願は、２０１７年３月６日に日本出願された特願２０１７−０４２０７９号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
この発明によれば、商品の不正な店外への持ち出しが予想される事象を、比較的低コストで検出することができる。
１０ 商品監視システム
１１ 棚監視カメラ
１２ ハブ
１３ 商品監視装置
１４ 無線ルータ装置
１５ 端末装置
１６ 店内監視カメラ
１７ ＰＯＳシステム
１１０ 第一通信部
１２０ 第一操作入力部
１３０ 第一表示部
１８０ 第一記憶部
１９０ 第一制御部
１９１ 商品状態検出部
１９２ 変化検知情報出力部
２１０ 第二通信部
２２０ 第二操作入力部
２３０ 第二表示部
２８０ 第二記憶部
２９０ 第二制御部
２９１ 変化検知情報取得部
２９２ 被害情報処理部
１１ 棚監視カメラ
１２ ハブ
１３ 商品監視装置
１４ 無線ルータ装置
１５ 端末装置
１６ 店内監視カメラ
１７ ＰＯＳシステム
１１０ 第一通信部
１２０ 第一操作入力部
１３０ 第一表示部
１８０ 第一記憶部
１９０ 第一制御部
１９１ 商品状態検出部
１９２ 変化検知情報出力部
２１０ 第二通信部
２２０ 第二操作入力部
２３０ 第二表示部
２８０ 第二記憶部
２９０ 第二制御部
２９１ 変化検知情報取得部
２９２ 被害情報処理部
Claims (16)
- 商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、
前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する変化検知情報出力部と、
を備える商品監視装置。 - 前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点より後の時点の前記商品の販売履歴を示す販売情報を取得し、前記販売情報を含む前記変化検知情報を前記出力先装置へ出力する
請求項１に記載の商品監視装置。 - 前記変化検知情報出力部は、前記変化検知情報を前記出力先装置へ出力した後に、前記商品状態検出部が前記取出しを検出した時点より後の時点の前記商品の販売履歴を示す販売情報を取得し、前記販売情報を前記出力先装置へ出力する
請求項１に記載の商品監視装置。 - 前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点から所定の時間以内に販売情報管理装置に登録された販売情報を取得する
請求項２または請求項３に記載の商品監視装置。 - 前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点から所定の時間以内に前記販売情報管理装置から前記商品に関連する販売情報を取得できない場合には、前記販売情報を含まない前記変化検知情報を前記出力先装置へ出力する
請求項４に記載の商品管理装置。 - 前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点を基準とする前記商品群エリアの過去の画像に基づいて、前記商品を取り出した人物に関する情報を取得し、前記商品を取り出した人物に関する情報を前記出力先装置へ出力する
請求項１から５の何れか一項に記載の商品監視装置。 - 前記変化検知情報出力部は、前記商品状態検出部が前記取出しを検出した時点を基準とする前記商品群エリアの過去の画像に基づいて、前記商品を取り出した人物に関する情報を検出し、前記変化検知情報を前記出力先装置へ出力した後に、前記人物に関する情報を前記出力先装置へ出力する
請求項１から５のいずれか一項に記載の商品監視装置。 - 前記変化検知情報出力部は、前記商品を取り出した人物に関する情報に基づいて前記人物が前記商品を所定の清算エリアを通過させたか否かを判定し、通過させていないと判定した場合に、前記人物に関する情報を前記出力先装置へ出力する
請求項７に記載の商品監視装置。 - 商品監視装置と出力先装置とを備えた商品監視システムであって、
前記商品監視装置は、
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出する商品状態検出部と、
前記商品状態検出部が前記取出しを検出した場合、前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を前記出力先装置へ出力する変化検知情報出力部と、
を備える商品監視システム。 - 前記出力先装置は、
前記変化検知情報に含まれる前記画像の時系列データのうちの何れかの画像をユーザ操作に基づいて表示する表示部を備える
請求項９に記載の商品監視システム。 - 前記商品状態検出部が前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの動画像を表示する表示装置を備える
請求項９又は請求項１０に記載の商品監視システム。 - 所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得する変化検知情報取得部と、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示する表示部と
を備える出力先装置。 - 商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出した場合、前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力する
ことを含む商品監視方法。 - 所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得し、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示する
ことを含む表示方法。 - コンピュータに、
商品棚に設定された商品群エリアの画像情報に基づいて、所定条件を満たす、前記商品群エリアからの数量の商品の取出しを検出した場合、前記取出しを検出した時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を出力先装置へ出力させる
処理を実行させるプログラム。 - コンピュータに、
所定条件を満たす、商品棚に設定された商品群エリアからの数量の商品の取出しが検出された場合、前記取出しが検出された時点から所定の過去の時点までの前記商品群エリアの画像の時系列データを含む変化検知情報を取得させ、
前記変化検知情報に含まれる前記商品群エリアの前記画像を表示させる
処理を実行させるプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021188102A JP7318697B2 (ja) | 2017-03-06 | 2021-11-18 | 商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017042079 | 2017-03-06 | ||
| JP2017042079 | 2017-03-06 | ||
| PCT/JP2017/044360 WO2018163547A1 (ja) | 2017-03-06 | 2017-12-11 | 商品監視装置、商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021188102A Division JP7318697B2 (ja) | 2017-03-06 | 2021-11-18 | 商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2018163547A1 true JPWO2018163547A1 (ja) | 2019-12-19 |
| JP6981463B2 JP6981463B2 (ja) | 2021-12-15 |
Family
ID=63448181
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019504330A Active JP6981463B2 (ja) | 2017-03-06 | 2017-12-11 | 商品監視装置、商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム |
| JP2021188102A Active JP7318697B2 (ja) | 2017-03-06 | 2021-11-18 | 商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021188102A Active JP7318697B2 (ja) | 2017-03-06 | 2021-11-18 | 商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム |
Country Status (3)
| Country | Link |
|---|---|
| US (2) | US11270257B2 (ja) |
| JP (2) | JP6981463B2 (ja) |
| WO (1) | WO2018163547A1 (ja) |
Families Citing this family (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6238028B2 (ja) * | 2016-03-11 | 2017-11-29 | パナソニックＩｐマネジメント株式会社 | 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法 |
| JP6981463B2 (ja) * | 2017-03-06 | 2021-12-15 | 日本電気株式会社 | 商品監視装置、商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム |
| JP2022508808A (ja) * | 2018-10-20 | 2022-01-19 | ザ・ノーダム・グループ・エルエルシー | ニューラル自動販売機 |
| US11126861B1 (en) | 2018-12-14 | 2021-09-21 | Digimarc Corporation | Ambient inventorying arrangements |
| JP6849234B2 (ja) | 2019-02-20 | 2021-03-24 | Ｎｅｃプラットフォームズ株式会社 | セルフｐｏｓシステム、制御方法及び制御プログラム |
| US11617436B1 (en) * | 2019-03-21 | 2023-04-04 | Curadite, Inc. | Secure medical cabinet |
| US11100745B2 (en) * | 2019-04-09 | 2021-08-24 | Rakuten Group, Inc. | Settlement processing system, settlement processing device, and settlement processing method |
| CN114342360A (zh) * | 2019-08-30 | 2022-04-12 | 日本电气株式会社 | 处理设备、处理系统、处理方法和程序 |
| JP7372099B2 (ja) * | 2019-09-24 | 2023-10-31 | 東芝テック株式会社 | 情報処理装置、情報処理システム、情報処理方法及び情報処理プログラム |
| CN111667530B (zh) * | 2020-06-24 | 2024-06-04 | 京东方科技集团股份有限公司 | 确定货架展位状态的方法和装置、货架 |
| JPWO2023037549A1 (ja) * | 2021-09-13 | 2023-03-16 | ||
| WO2024195074A1 (ja) * | 2023-03-23 | 2024-09-26 | 日本電気株式会社 | 情報処理装置、情報処理方法、コンピュータ可読媒体、及び管理システム |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004171240A (ja) * | 2002-11-20 | 2004-06-17 | Casio Comput Co Ltd | 不正監視システムおよびプログラム |
| JP2007013629A (ja) * | 2005-06-30 | 2007-01-18 | Canon Marketing Japan Inc | 情報処理装置、画像ファイル転送方法、プログラム及びコンピュータ読み取り可能な記録媒体 |
| JP2009009231A (ja) * | 2007-06-26 | 2009-01-15 | Toshiba Corp | セキュリティ管理システムおよびセキュリティ管理方法 |
| JP2009088648A (ja) * | 2007-09-27 | 2009-04-23 | Sogo Keibi Hosho Co Ltd | 画像抽出装置および画像抽出方法 |
| JP2009284167A (ja) * | 2008-05-21 | 2009-12-03 | Toshiba Tec Corp | 人物行動監視装置及び人物行動監視プログラム |
| JP2010277264A (ja) * | 2009-05-27 | 2010-12-09 | Takachiho Koeki Kk | 防犯装置、その制御方法、プログラム、及び防犯システム |
| JP2011215941A (ja) * | 2010-03-31 | 2011-10-27 | Mizuho Information & Research Institute Inc | 商品監視システム、商品監視方法及び商品監視プログラム |
| JP2013256167A (ja) * | 2012-06-12 | 2013-12-26 | Toyoda Gosei Co Ltd | ドライブレコーダシステム、および、車載カメラシステム |
Family Cites Families (42)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9892606B2 (en) * | 2001-11-15 | 2018-02-13 | Avigilon Fortress Corporation | Video surveillance system employing video primitives |
| US20030107650A1 (en) * | 2001-12-11 | 2003-06-12 | Koninklijke Philips Electronics N.V. | Surveillance system with suspicious behavior detection |
| US10271017B2 (en) * | 2012-09-13 | 2019-04-23 | General Electric Company | System and method for generating an activity summary of a person |
| WO2005033645A1 (en) * | 2003-09-30 | 2005-04-14 | Intrinsic Marks International Llc | Item monitoring system and methods |
| US10339495B2 (en) * | 2004-02-03 | 2019-07-02 | Rtc Industries, Inc. | System for inventory management |
| US8047385B2 (en) * | 2004-02-03 | 2011-11-01 | Rtc Industries, Inc. | Product securement and management system |
| US7631808B2 (en) * | 2004-06-21 | 2009-12-15 | Stoplift, Inc. | Method and apparatus for detecting suspicious activity using video analysis |
| US9036028B2 (en) * | 2005-09-02 | 2015-05-19 | Sensormatic Electronics, LLC | Object tracking and alerts |
| US7671728B2 (en) * | 2006-06-02 | 2010-03-02 | Sensormatic Electronics, LLC | Systems and methods for distributed monitoring of remote sites |
| TW200822751A (en) * | 2006-07-14 | 2008-05-16 | Objectvideo Inc | Video analytics for retail business process monitoring |
| US8570375B1 (en) * | 2007-12-04 | 2013-10-29 | Stoplift, Inc. | Method and apparatus for random-access review of point of sale transactional video |
| US8325036B1 (en) * | 2008-11-06 | 2012-12-04 | Target Brands, Inc. | In stock analytic monitoring |
| US8538820B1 (en) * | 2009-10-26 | 2013-09-17 | Stoplift, Inc. | Method and apparatus for web-enabled random-access review of point of sale transactional video |
| US8457354B1 (en) * | 2010-07-09 | 2013-06-04 | Target Brands, Inc. | Movement timestamping and analytics |
| JP2012174154A (ja) | 2011-02-24 | 2012-09-10 | Fujitsu Frontech Ltd | 在庫状況管理方法および在庫状況管理装置 |
| US8094026B1 (en) * | 2011-05-02 | 2012-01-10 | Robert M Green | Organized retail crime detection security system and method |
| US8803687B2 (en) * | 2011-12-06 | 2014-08-12 | Southern Imperial, Inc. | Retail system signal receiver unit for recognizing a preset audible alarm tone |
| US20130169810A1 (en) * | 2011-12-29 | 2013-07-04 | Geoffrey Scott Hieronymus | System and method of fraud detection |
| US9195883B2 (en) * | 2012-04-09 | 2015-11-24 | Avigilon Fortress Corporation | Object tracking and best shot detection system |
| US9892438B1 (en) * | 2012-05-03 | 2018-02-13 | Stoplift, Inc. | Notification system and methods for use in retail environments |
| CN105518755A (zh) * | 2013-09-06 | 2016-04-20 | 日本电气株式会社 | 安全系统、安全方法和非暂时性计算机可读介质 |
| US9916561B2 (en) * | 2013-11-05 | 2018-03-13 | At&T Intellectual Property I, L.P. | Methods, devices and computer readable storage devices for tracking inventory |
| US9697709B2 (en) * | 2014-09-18 | 2017-07-04 | Indyme Solutions, Inc. | Merchandise activity sensor system and methods of using same |
| US10037662B2 (en) * | 2014-09-18 | 2018-07-31 | Indyme Solutions, Inc. | Merchandise activity sensor system and methods of using same |
| JP6019414B2 (ja) * | 2014-11-26 | 2016-11-02 | パナソニックＩｐマネジメント株式会社 | モニタリング装置、モニタリングシステムおよびモニタリング方法 |
| JP6341388B2 (ja) | 2016-01-20 | 2018-06-13 | パナソニックＩｐマネジメント株式会社 | 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法 |
| US11417202B2 (en) * | 2016-03-01 | 2022-08-16 | James Carey | Theft prediction and tracking system |
| WO2017151631A1 (en) * | 2016-03-01 | 2017-09-08 | James Carey | Theft prediction and tracking system |
| MX2018013491A (es) * | 2016-05-05 | 2019-07-08 | Walmart Apollo Llc | Sistemas y metodos para identificar incidentes potenciales de robos en tiendas. |
| US10255779B2 (en) * | 2017-02-16 | 2019-04-09 | Walmart Apollo, Llc | Methods and systems for detecting shoplifting at a retail facility |
| JP6981463B2 (ja) * | 2017-03-06 | 2021-12-15 | 日本電気株式会社 | 商品監視装置、商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム |
| US10740622B2 (en) * | 2017-03-23 | 2020-08-11 | Hall Labs Llc | Method of theft detection and prevention |
| US20180300557A1 (en) * | 2017-04-18 | 2018-10-18 | Amazon Technologies, Inc. | Object analysis in live video content |
| US10706386B2 (en) * | 2017-09-14 | 2020-07-07 | Sensormatic Electronics, LLC | Machine learning inventory management |
| US10043360B1 (en) * | 2017-10-26 | 2018-08-07 | Scott Charles Mullins | Behavioral theft detection and notification system |
| US10186124B1 (en) * | 2017-10-26 | 2019-01-22 | Scott Charles Mullins | Behavioral intrusion detection system |
| US11087130B2 (en) * | 2017-12-29 | 2021-08-10 | RetailNext, Inc. | Simultaneous object localization and attribute classification using multitask deep neural networks |
| US11961083B2 (en) * | 2018-04-10 | 2024-04-16 | Ncr Voyix Corporation | Alert controller for loss prevention |
| JP6573185B1 (ja) * | 2018-12-07 | 2019-09-11 | 株式会社鈴康 | 情報処理システム、情報処理方法及びプログラム |
| KR20210153089A (ko) * | 2019-04-10 | 2021-12-16 | 스캇 찰스 멀린스 | 모니터링 시스템 |
| US20200349820A1 (en) * | 2019-04-13 | 2020-11-05 | Michael A. Speagle | Theft monitoring and identification system for self-service point of sale |
| JP6773389B1 (ja) * | 2020-03-18 | 2020-10-21 | 株式会社 テクノミライ | デジタル・オートファイル・セキュリティシステム、方法及びプログラム |
-
2017
- 2017-12-11 JP JP2019504330A patent/JP6981463B2/ja active Active
- 2017-12-11 US US16/490,398 patent/US11270257B2/en active Active
- 2017-12-11 WO PCT/JP2017/044360 patent/WO2018163547A1/ja active Application Filing
-
2021
- 2021-11-18 JP JP2021188102A patent/JP7318697B2/ja active Active
-
2022
- 2022-02-01 US US17/590,190 patent/US20220156686A1/en not_active Abandoned
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004171240A (ja) * | 2002-11-20 | 2004-06-17 | Casio Comput Co Ltd | 不正監視システムおよびプログラム |
| JP2007013629A (ja) * | 2005-06-30 | 2007-01-18 | Canon Marketing Japan Inc | 情報処理装置、画像ファイル転送方法、プログラム及びコンピュータ読み取り可能な記録媒体 |
| JP2009009231A (ja) * | 2007-06-26 | 2009-01-15 | Toshiba Corp | セキュリティ管理システムおよびセキュリティ管理方法 |
| JP2009088648A (ja) * | 2007-09-27 | 2009-04-23 | Sogo Keibi Hosho Co Ltd | 画像抽出装置および画像抽出方法 |
| JP2009284167A (ja) * | 2008-05-21 | 2009-12-03 | Toshiba Tec Corp | 人物行動監視装置及び人物行動監視プログラム |
| JP2010277264A (ja) * | 2009-05-27 | 2010-12-09 | Takachiho Koeki Kk | 防犯装置、その制御方法、プログラム、及び防犯システム |
| JP2011215941A (ja) * | 2010-03-31 | 2011-10-27 | Mizuho Information & Research Institute Inc | 商品監視システム、商品監視方法及び商品監視プログラム |
| JP2013256167A (ja) * | 2012-06-12 | 2013-12-26 | Toyoda Gosei Co Ltd | ドライブレコーダシステム、および、車載カメラシステム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2022019797A (ja) | 2022-01-27 |
| US20200005231A1 (en) | 2020-01-02 |
| US11270257B2 (en) | 2022-03-08 |
| WO2018163547A1 (ja) | 2018-09-13 |
| JP6981463B2 (ja) | 2021-12-15 |
| US20220156686A1 (en) | 2022-05-19 |
| JP7318697B2 (ja) | 2023-08-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7318697B2 (ja) | 商品監視システム、出力先装置、商品監視方法、表示方法及びプログラム | |
| JP6249021B2 (ja) | セキュリティシステム、セキュリティ方法及びセキュリティプログラム | |
| US11216847B2 (en) | System and method for retail customer tracking in surveillance camera network | |
| JP5673888B1 (ja) | 情報通知プログラム及び情報処理装置 | |
| US9760919B2 (en) | Preventing purchased merchandise from being left at a checkout counter | |
| US20140225734A1 (en) | Inhibiting alarming of an electronic article surviellance system | |
| JP7485447B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| JP2015099549A (ja) | 商品認識装置及び商品認識プログラム | |
| US20230394556A1 (en) | Information processing method, information processing device, and recording medium | |
| WO2019123714A1 (ja) | 情報処理装置、商品推薦方法、およびプログラム | |
| US20210089757A1 (en) | Information processing device and reporting method | |
| US20230101001A1 (en) | Computer-readable recording medium for information processing program, information processing method, and information processing device | |
| JP5903557B2 (ja) | セキュリティシステム | |
| US20220270099A1 (en) | Self-checkout system and method | |
| JP2018173855A (ja) | 万引き防止システム及びそれに使用される店舗側装置並びにセンタ側装置 | |
| JP2019053735A (ja) | 情報処理装置 | |
| JP2016024601A (ja) | 情報処理装置、情報処理システム、情報処理方法、商品推薦方法、およびプログラム | |
| US11978068B2 (en) | Customer information registration apparatus | |
| WO2024166313A1 (ja) | 報知システム、報知方法、および記録媒体 | |
| JPWO2020066444A1 (ja) | 顧客情報登録装置 | |
| KR20070101956A (ko) | 적응적 판매관리 시스템과 방법 및 이를 이용한경보시스템과 방법 | |
| WO2024166234A1 (ja) | 報知システム、報知方法、および記録媒体 | |
| EP4113458A1 (en) | Information processing program, information processing method, and information processing apparatus | |
| WO2022168265A1 (ja) | システム、情報処理装置、方法、および記録媒体 | |
| WO2016002695A1 (ja) | 情報処理装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190703 |
|
| A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A801 Effective date: 20190703 |
|
| A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20190703 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200923 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201124 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210309 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210510 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211019 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211101 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6981463 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |