JP7545801B2 - 情報処理システム、情報処理システムの制御方法及びプログラム - Google Patents
情報処理システム、情報処理システムの制御方法及びプログラム Download PDFInfo
- Publication number
- JP7545801B2 JP7545801B2 JP2019223707A JP2019223707A JP7545801B2 JP 7545801 B2 JP7545801 B2 JP 7545801B2 JP 2019223707 A JP2019223707 A JP 2019223707A JP 2019223707 A JP2019223707 A JP 2019223707A JP 7545801 B2 JP7545801 B2 JP 7545801B2
- Authority
- JP
- Japan
- Prior art keywords
- person
- tracking
- store
- processing system
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 56
- 230000010365 information processing Effects 0.000 title claims description 36
- 230000008569 process Effects 0.000 claims description 32
- 238000001514 detection method Methods 0.000 claims description 30
- 230000009471 action Effects 0.000 claims description 18
- 230000008859 change Effects 0.000 claims description 14
- 230000004044 response Effects 0.000 claims description 10
- 230000006870 function Effects 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- KNMAVSAGTYIFJF-UHFFFAOYSA-N 1-[2-[(2-hydroxy-3-phenoxypropyl)amino]ethylamino]-3-phenoxypropan-2-ol;dihydrochloride Chemical compound Cl.Cl.C=1C=CC=CC=1OCC(O)CNCCNCC(O)COC1=CC=CC=C1 KNMAVSAGTYIFJF-UHFFFAOYSA-N 0.000 description 3
- 230000006399 behavior Effects 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Description
図1、図2は、本発明の一実施形態を示す情報処理システムの概要を説明する図である。
本実施形態の情報処理システムは、店舗300の天井等に設けられたTOFカメラ308で撮影された映像を用いて、店舗300内の顧客を追尾(「追跡」、「トラッキング」ともいう)するシステムである。
なお、顧客305は、既に本システムにおいて追尾中の顧客に対応する。
本実施形態の情報処理システムにおいて、追尾装置100は、TOFカメラ301で撮影されている店舗300内の映像を用いて店舗300内の顧客の追尾を行う情報処理装置である。なお、追尾装置100とTOFカメラ301とは別体でもよいが、TOFカメラ301の内部に追尾装置100を組み込んで、TOFカメラ301の内部で追尾開始や追尾終了を判断するエッジ処理型のTOFカメラ301を用いてもよい。
図4において、CPU201は、ROM203又は外部メモリ212等に格納されたプログラムを必要に応じてRAM202にロードして実行することにより、各種制御を実行する。RAM202は、CPU201の作業領域として利用される。ROM203は、各種プログラムや各種データが記憶されている。
通信I/Fコントローラ208は、有線又は無線のネットワークとの通信を制御する。
システムバス204は、各デバイス201~208を接続する。
また、来店者端末313のハードウェア構成も基本的に追尾装置100と同様であるが、通信I/Fコントローラ208は、例えば、移動通信システム等の携帯電話回線および無線LAN等の通信モジュールによって実現される。来店者端末313は、所謂スマートフォン等で実現可能である。
また、店舗管理者デバイス(ウェラブルデバイス)316も同様の構成で実現可能である。
図5、図6は、本実施形態の情報処理システムの動作の一例を示すフローチャートである。この図において、追尾装置100の動作は、追尾装置100のCPU201が外部メモリ212に格納されたプログラムを必要に応じてRAM202にロードして実行することにより実現される。また、TOFカメラ308の動作は、上述したTOFカメラ308に備えらえた制御部が実行するものである。また、決済端末312の動作は、決済端末312のCPUが外部メモリに格納されたプログラムを必要に応じてRAMにロードして実行することにより実現される。なお、図5に左部に記載される「来店者の店舗内の行動」は説明を容易にするために記載してあるものであり、本システムの動作に含まれるものではない。
一方、上記ショーケース番号に対応するショーケース309の前の人物が追尾中の人物でないと判定した場合(S102でNoの場合)、追尾装置100は、S103に処理を進める。
S104において、追尾装置100は、追尾者のルート管理、追尾人数を更新する。例えば図7(a)のような店内の追尾者テーブルの店内の追尾者、位置情報を更新する。
商品決済画面1000には、商品購入リスト1001、お買い上げ合計金額1005、決済方法選択ボタン1002~1004等が表示される。顧客は、決済方法選択ボタン1002~1004のいずれかを選択することにより、該選択した決済方法で決済を行うことができる。
このようにすることにより、より速やかに追尾者の数を減らすことができる。
また、ショーケースの扉を開けただけでは追尾を開始せず、ショーケースの扉を開けて且つショーケースから商品を取った場合に、ショーケースの前の来店者の追尾を開始するようにしてもよい。
一方、追尾装置100は、商品を持っている追尾者が通過ゲート315を通過したと判定した場合(S202でYesの場合)、S203に処理を進める。
一方、追尾装置100は、上記商品を持ってゲート通過している追尾者の決済方法テーブル(例えば図7(c))に保持されている決済方法が「Null」の場合(S203でYesの場合)、S204に処理を進める。
追尾装置100から未決済者の検出通知を受信した店舗管理者デバイス316は、バイブレーション、アラーム音、警告表示等により、未決済者の検出を管理者に通知する(S205)。
追尾装置100から未決済者の検出時刻の通知を受信した監視カメラ映像記録サーバは、該検出時刻を、タイムスタンプとして撮影時刻に紐づけて記録する(S207)。これにより、未決済の商品を持ってゲートを通過した来店者の画像情報を記録することが可能となる。
また、未精算の顧客が通過ゲートを通過しているタイミングで、店舗管理者に通知を行うことにより、未精算の商品を店外に持ち出そうとしている顧客への対応が可能となる。
さらに、ショーケースにTOFカメラ等を設けて、ショーケース内からショーケース外に持ち出された商品を検知したことを、顧客の追尾を開始するトリガーとしてもよい。
さらに、ショーケース毎のドアセンサで、ショーケースの扉が開けられたことを検知した場合で、その次に、同じ識別番号のショーケースのTOFカメラで、ショーケース内からショーケース外に持ち出された商品を検知し、追尾開始をするための複数条件を満たした場合に、顧客の追尾を開始するトリガーとしてもよい。このように、複数条件にすることで、追尾対象とする店舗内の顧客を更に絞り込むことが可能である。
さらに、通過ゲート315を設けることなく、TOFカメラ301で撮影されている映像から顧客の退店を検知するように構成してもよい。
また、ショーケースに設けた扉の開閉を検知可能なセンサ等を用いて顧客の追尾開始を制御することにより、システムのコストアップを抑え、安価な構成で、追尾が必要な対象者を適切に減らすシステムを実現することが可能となる。
以上、一実施形態について示したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
また、上記各実施形態を組み合わせた構成も全て本発明に含まれるものである。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
また、本発明は、複数の機器から構成されるシステムに適用しても、1つの機器からなる装置に適用してもよい。
本発明は上記実施形態に限定されるものではなく、本発明の趣旨に基づき種々の変形(各実施形態の有機的な組合せを含む)が可能であり、それらを本発明の範囲から除外するものではない。即ち、上述した各実施形態及びその変形例を組み合わせた構成も全て本発明に含まれるものである。
300 店舗
301 TOFカメラ(天井に設置)
308 TOFカメラ(ショーケースに設置)
309 ショーケース
312 商品決済端末
315 通過ゲート
317 監視カメラ
Claims (15)
- 店舗内の商品の陳列場所に対して人物が行う所定のアクション又は該アクションに応じて生じる該陳列場所における所定の変化を検知する検知手段と、
前記検知手段で前記所定のアクションまたは前記所定の変化を検知したことに応じて、前記店舗内を撮影する撮影手段で撮影した画像に基づいて前記所定のアクションまたは前記所定の変化の要因となった人物を追尾対象とした所定の追尾処理を行うように制御する制御手段と、
前記所定の追尾処理の対象となっている人物について商品決済の終了を示す情報を取得すると、当該人物に関する前記所定の追尾処理を終了するように処理する処理手段と、
を有し、
前記制御手段は、前記店舗の情報処理システムにおける前記撮影手段での追尾を管理すべく、前記所定の追尾処理の対象となっている人物の人数を管理し、前記所定の追尾処理の対象となっている人物について商品決済の終了を示す情報を取得した場合は、前記人数を減らすように制御することを特徴とする情報処理システム。 - 前記制御手段は、前記店舗への入店が認識された人物であっても、前記検知手段で前記所定のアクションまたは前記所定の変化を検知していない場合には前記所定の追尾処理の対象とはしないように制御することを特徴とする請求項1に記載の情報処理システム。
- 前記検知手段は、前記所定のアクションとして、前記陳列場所に対して設置されている該陳列場所を撮影するカメラで撮影された画像に基づいて前記陳列場所から商品が持ち出されたことを検知したことに応じて、追尾処理が行われ、追尾処理の対象となっている人物の人数を管理する追尾装置に検知に係る情報を通知することを特徴とする請求項1又は2に記載の情報処理システム。
- 前記陳列場所は、扉を備え、該扉を開けることで該陳列場所に陳列されている商品の取り出しが可能なものであり、
前記検知手段は、前記扉が開けられたこと、前記扉に人が触れたこと、又は、前記扉を開けるためのボタンが操作されたこと、を検知することを特徴とする請求項1又は2に記載の情報処理システム。 - 前記検知手段は、前記陳列場所に陳列されている商品重量の変化を検知することを特徴とする請求項1又は2に記載の情報処理システム。
- 前記制御手段は、前記検知手段により前記所定のアクションもしくは所定の変化が検知された場合でも、前記検知の要因となった人物に所定の特徴が認識される場合には、該人物を追尾対象としない、ことを特徴とする請求項1乃至5のいずれか1項に記載の情報処理システム。
- 前記検知の要因となった人物に所定の特徴が認識される場合とは、該人物が所定の識別子を身に着けていることが認識される場合であること特徴とする請求項6に記載の情報処理システム。
- 前記商品と関連付けされている前記追尾対象の人物が前記店舗の出口を通過しようとしていることが認識された場合に、所定の通知先に通知を行う通知手段を有することを特徴とする請求項1乃至7のいずれか1項に記載の情報処理システム。
- 前記通知先は、前記店舗の管理者が身に着けるウェラブル端末であることを特徴とする請求項8に記載の情報処理システム。
- 前記商品と関連付けされている前記追尾対象の人物が前記店舗の出口を通過しようとしていることが認識された場合に、該通過しようとする時刻と前記店舗内を撮影した監視映像とを対応付け可能にするタイムスタンプ手段を有することを特徴とする請求項1乃至9のいずれか1項に記載の情報処理システム。
- 商品決済が終了したことを示す情報を取得する取得手段をさらに有し、
前記取得手段は、前記商品決済を行う決済端末の前に前記人物が居ると認識されたことを条件に、前記商品決済が終了したことを示す情報を取得することを特徴とする請求項1乃至10のいずれか1項に記載の情報処理システム。 - 前記所定の追尾処理は、ルート管理を含む処理であることを特徴とする請求項1乃至11のいずれか1項に記載の情報処理システム。
- 前記陳列場所から取られた商品を特定する特定手段をさらに有し、
前記制御手段は、前記特定手段による特定に基づき、前記所定の追尾処理の対象となっている人物に関連付けて、当該人物が前記陳列場所から取った商品を関連付けて記録するように制御する請求項1乃至12のいずれか1項に記載の情報処理システム。 - 店舗内の商品の陳列場所に対して人物が行う所定のアクション又は該アクションに応じて生じる該陳列場所における所定の変化を検知する検知工程と、
前記検知工程において前記所定のアクションまたは前記所定の変化を検知したことに応じて、前記店舗内を撮影する撮影手段で撮影した画像に基づいて前記所定のアクションまたは前記所定の変化の要因となった人物を追尾対象とした所定の追尾処理を行うように制御する制御工程と、
前記所定の追尾処理の対象となっている人物について商品決済の終了を示す情報を取得すると、当該人物に関する前記所定の追尾処理を終了するように処理する処理工程と、
を有し、
前記制御工程は、前記店舗の情報処理システムにおける前記撮影手段での追尾を管理すべく、前記所定の追尾処理の対象となっている人物の人数を管理し、前記所定の追尾処理の対象となっている人物について商品決済の終了を示す情報を取得した場合は、前記人数を減らすように制御することを特徴とする情報処理システムの制御方法。 - 少なくとも1つのコンピュータを、請求項1乃至13のいずれか1項に記載された情報処理システムの各手段として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019223707A JP7545801B2 (ja) | 2019-12-11 | 2019-12-11 | 情報処理システム、情報処理システムの制御方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019223707A JP7545801B2 (ja) | 2019-12-11 | 2019-12-11 | 情報処理システム、情報処理システムの制御方法及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021093649A JP2021093649A (ja) | 2021-06-17 |
JP2021093649A5 JP2021093649A5 (ja) | 2022-12-20 |
JP7545801B2 true JP7545801B2 (ja) | 2024-09-05 |
Family
ID=76312853
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019223707A Active JP7545801B2 (ja) | 2019-12-11 | 2019-12-11 | 情報処理システム、情報処理システムの制御方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7545801B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7290842B2 (ja) * | 2021-09-06 | 2023-06-14 | キヤノンマーケティングジャパン株式会社 | 情報処理システム、情報処理システムの制御方法、プログラム |
WO2023053243A1 (ja) * | 2021-09-29 | 2023-04-06 | 日本電気株式会社 | 報知システム、方法、及び、記録媒体 |
CN115242845B (zh) * | 2022-07-26 | 2024-03-22 | 厦门贝尔斯特科技有限公司 | 一种超市商品智能理货防盗系统及其设备 |
JP2024098392A (ja) * | 2023-01-10 | 2024-07-23 | 富士通株式会社 | 検出プログラム、検出方法および情報処理装置 |
CN116471384B (zh) * | 2023-06-20 | 2023-12-12 | 深圳市泽威信息科技有限公司 | 无人值守商店监控系统的控制方法及控制装置 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000123086A (ja) | 1998-10-16 | 2000-04-28 | Nippon Signal Co Ltd:The | 電子決済システム |
JP2004171240A (ja) | 2002-11-20 | 2004-06-17 | Casio Comput Co Ltd | 不正監視システムおよびプログラム |
JP2007215658A (ja) | 2006-02-15 | 2007-08-30 | Sun Corp | 遊技場における不正防止支援システム |
JP2009284167A (ja) | 2008-05-21 | 2009-12-03 | Toshiba Tec Corp | 人物行動監視装置及び人物行動監視プログラム |
JP2016219990A (ja) | 2015-05-19 | 2016-12-22 | キヤノン株式会社 | 位置推定システム、位置推定方法及びプログラム |
JP2017521780A (ja) | 2014-07-01 | 2017-08-03 | ロニー ヘイ | コンピュータ制御式の無人自動チェックアウト式店舗アウトレット及び関連方法 |
US20170256149A1 (en) | 2016-03-01 | 2017-09-07 | James Carey | Theft prediction and tracking system |
CN108573333A (zh) | 2017-03-14 | 2018-09-25 | 思凯睿克有限公司 | 实体店面的关键绩效指标的评估方法及其系统 |
WO2018198385A1 (ja) | 2017-04-28 | 2018-11-01 | 株式会社 テクノミライ | デジタルレジスタセキュリティシステム、方法及びプログラム |
CN109979130A (zh) | 2019-03-29 | 2019-07-05 | 厦门益东智能科技有限公司 | 一种商品自动识别和结算售货柜、方法以及系统 |
JP6573185B1 (ja) | 2018-12-07 | 2019-09-11 | 株式会社鈴康 | 情報処理システム、情報処理方法及びプログラム |
JP6581751B1 (ja) | 2019-04-09 | 2019-09-25 | 楽天株式会社 | 決済処理システム、決済処理装置、及び決済処理方法 |
-
2019
- 2019-12-11 JP JP2019223707A patent/JP7545801B2/ja active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000123086A (ja) | 1998-10-16 | 2000-04-28 | Nippon Signal Co Ltd:The | 電子決済システム |
JP2004171240A (ja) | 2002-11-20 | 2004-06-17 | Casio Comput Co Ltd | 不正監視システムおよびプログラム |
JP2007215658A (ja) | 2006-02-15 | 2007-08-30 | Sun Corp | 遊技場における不正防止支援システム |
JP2009284167A (ja) | 2008-05-21 | 2009-12-03 | Toshiba Tec Corp | 人物行動監視装置及び人物行動監視プログラム |
JP2017521780A (ja) | 2014-07-01 | 2017-08-03 | ロニー ヘイ | コンピュータ制御式の無人自動チェックアウト式店舗アウトレット及び関連方法 |
JP2016219990A (ja) | 2015-05-19 | 2016-12-22 | キヤノン株式会社 | 位置推定システム、位置推定方法及びプログラム |
US20170256149A1 (en) | 2016-03-01 | 2017-09-07 | James Carey | Theft prediction and tracking system |
CN108573333A (zh) | 2017-03-14 | 2018-09-25 | 思凯睿克有限公司 | 实体店面的关键绩效指标的评估方法及其系统 |
WO2018198385A1 (ja) | 2017-04-28 | 2018-11-01 | 株式会社 テクノミライ | デジタルレジスタセキュリティシステム、方法及びプログラム |
JP6573185B1 (ja) | 2018-12-07 | 2019-09-11 | 株式会社鈴康 | 情報処理システム、情報処理方法及びプログラム |
CN109979130A (zh) | 2019-03-29 | 2019-07-05 | 厦门益东智能科技有限公司 | 一种商品自动识别和结算售货柜、方法以及系统 |
JP6581751B1 (ja) | 2019-04-09 | 2019-09-25 | 楽天株式会社 | 決済処理システム、決済処理装置、及び決済処理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2021093649A (ja) | 2021-06-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7545801B2 (ja) | 情報処理システム、情報処理システムの制御方法及びプログラム | |
US12039508B2 (en) | Information processing system | |
JP7260022B2 (ja) | 店舗装置、店舗システム、店舗管理方法、プログラム | |
JP7371614B2 (ja) | 店舗管理装置および店舗管理方法 | |
TWI778030B (zh) | 店鋪裝置、店鋪管理方法及程式 | |
JP6730079B2 (ja) | 監視装置及びプログラム | |
JP6261197B2 (ja) | 表示制御装置、表示制御方法、及びプログラム | |
US20230027382A1 (en) | Information processing system | |
US20170068945A1 (en) | Pos terminal apparatus, pos system, commodity recognition method, and non-transitory computer readable medium storing program | |
JP2008257488A (ja) | 顔認証応用インストアマーケティング分析システム | |
WO2015025490A1 (ja) | 店舗内顧客行動分析システム、店舗内顧客行動分析方法および店舗内顧客行動分析プログラム | |
JP7416594B2 (ja) | 店舗管理装置、店舗管理システム及び店舗管理方法 | |
JP2013196043A (ja) | 特定人物監視システム | |
US20230136054A1 (en) | Information processing method, information processing device, and recording medium | |
US11216651B2 (en) | Information processing device and reporting method | |
CN110647825A (zh) | 无人超市物品确定方法、装置、设备及存储介质 | |
JP2023162229A (ja) | 監視装置及びプログラム | |
TWI760521B (zh) | 智慧商店購物系統及使用其之購物方法 | |
JP7337625B2 (ja) | 購買行動データ収集システム、及び購買行動データ収集プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221212 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221212 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230831 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230919 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231117 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240213 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240411 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240730 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240826 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7545801 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |