JP7318679B2 - 情報処理プログラム、情報処理方法、および情報処理装置 - Google Patents
情報処理プログラム、情報処理方法、および情報処理装置 Download PDFInfo
- Publication number
- JP7318679B2 JP7318679B2 JP2021125672A JP2021125672A JP7318679B2 JP 7318679 B2 JP7318679 B2 JP 7318679B2 JP 2021125672 A JP2021125672 A JP 2021125672A JP 2021125672 A JP2021125672 A JP 2021125672A JP 7318679 B2 JP7318679 B2 JP 7318679B2
- Authority
- JP
- Japan
- Prior art keywords
- person
- product
- action
- information
- parameter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/44—Event detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0609—Buyer or seller confidence or verification
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Health & Medical Sciences (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
- Image Analysis (AREA)
Description
次に、不正検知装置10の機能構成について説明する。図5は、実施例1にかかる不正検知装置10の構成例を示す図である。図5に示すように、不正検知装置10は、通信部20、記憶部30、および制御部40を有する。
次に、不正検知装置10を動作主体として実行される不正検知処理について図7~14を用いて詳細に説明する。図7は、実施例1にかかる不正検知処理の一例を示す図である。図7に示される撮像画像250は、カメラ装置200によって撮像された小売店の店舗内の撮像画像の一例である。不正検知装置10は、撮像画像250から人物や物体を特定する。撮像画像250からの物体特定について図8を用いて説明する。
次に、不正検知装置10によって実行される不正検知処理の流れを説明する。図15は、実施例1にかかる不正検知処理の流れを示すフローチャートである。図15に示す不正検知処理は、例えば、一定時間ごと、またはカメラ装置200から撮像画像が受信される度に実行されてよい。
上述したように、不正検知装置10は、撮像した画像から、店舗に滞在する人物の骨格情報を生成し、骨格情報を用いて、人物の商品に対する特定の動作を検出し、画像の中の人物の位置情報を用いて、店舗において特定の動作を検出した時に人物が滞在しているエリアを特定し、特定されたエリアと対応づけられた設定情報を特定し、特定された設定情報に基づいて、人物の商品に対する行動を評価するためのパラメータを変更する。
上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報は、特記する場合を除いて任意に変更されてもよい。また、実施例で説明した具体例、分布、数値などは、あくまで一例であり、任意に変更されてもよい。
図16は、不正検知装置10のハードウェア構成例を説明する図である。図16に示すように、不正検知装置10は、通信インタフェース10a、HDD(Hard Disk Drive)10b、メモリ10c、プロセッサ10dを有する。また、図16に示した各部は、バスなどで相互に接続される。
前記骨格情報を用いて、前記人物の商品に対する特定の動作を検出し、
前記画像の中の人物の位置情報を用いて、前記店舗において前記特定の動作を検出した時に前記人物が滞在しているエリアを特定し、
前記特定されたエリアと対応づけられた設定情報を特定し、
前記特定された設定情報に基づいて、前記人物の前記商品に対する行動を評価するためのパラメータを変更する
処理をコンピュータに実行させることを特徴とする情報処理プログラム。
前記パラメータを変更する処理は、前記第2の動作のスピードに対する第2のパラメータを前記パラメータとして変更する処理を含むことを特徴とする付記2または3に記載の情報処理プログラム。
前記パラメータを変更する処理は、前記第2の動作と前記第3の動作との検出時間の差分に対する第3のパラメータを前記パラメータとして変更する処理を含むことを特徴とする付記4に記載の情報処理プログラム。
前記骨格情報を用いて、前記人物の商品に対する特定の動作を検出し、
前記画像の中の人物の位置情報を用いて、前記店舗において前記特定の動作を検出した時に前記人物が滞在しているエリアを特定し、
前記特定されたエリアと対応づけられた設定情報を特定し、
前記特定された設定情報に基づいて、前記人物の前記商品に対する行動を評価するためのパラメータを変更する
処理をコンピュータが実行することを特徴とする情報処理方法。
前記パラメータを変更する処理は、前記第2の動作のスピードに対する第2のパラメータを前記パラメータとして変更する処理を含むことを特徴とする付記10または11に記載の情報処理方法。
前記パラメータを変更する処理は、前記第2の動作と前記第3の動作との検出時間の差分に対する第3のパラメータを前記パラメータとして変更する処理を含むことを特徴とする付記12に記載の情報処理方法。
前記骨格情報を用いて、前記人物の商品に対する特定の動作を検出し、
前記画像の中の人物の位置情報を用いて、前記店舗において前記特定の動作を検出した時に前記人物が滞在しているエリアを特定し、
前記特定されたエリアと対応づけられた設定情報を特定し、
前記特定された設定情報に基づいて、前記人物の前記商品に対する行動を評価するためのパラメータを変更する
処理を実行する制御部を有することを特徴とする情報処理装置。
前記パラメータを変更する処理は、前記第2の動作のスピードに対する第2のパラメータを前記パラメータとして変更する処理を含むことを特徴とする付記18または19に記載の情報処理装置。
前記パラメータを変更する処理は、前記第2の動作と前記第3の動作との検出時間の差分に対する第3のパラメータを前記パラメータとして変更する処理を含むことを特徴とする付記20に記載の情報処理装置。
プロセッサに動作可能に接続されたメモリと
を備えた情報処理装置であって、プロセッサは、
撮像した画像から、店舗に滞在する人物の骨格情報を生成し、
前記骨格情報を用いて、前記人物の商品に対する特定の動作を検出し、
前記画像の中の人物の位置情報を用いて、前記店舗において前記特定の動作を検出した時に前記人物が滞在しているエリアを特定し、
前記特定されたエリアと対応づけられた設定情報を特定し、
前記特定された設定情報に基づいて、前記人物の前記商品に対する行動を評価するためのパラメータを変更する
処理を実行することを特徴とする情報処理装置。
10 不正検知装置
10a 通信インタフェース
10b HDD
10c メモリ
10d プロセッサ
20 通信部
30 記憶部
31 画像DB
32 骨格情報
33 エリア情報
40 制御部
41 特定部
42 生成部
43 評価部
44 通知部
50 ネットワーク
100 利用者端末
150-1、150-2、150-3 セルフスキャン対象者
160-1、160-2、160-3 通常レジ対象者
200 カメラ装置
250、251、252 撮像画像
300 店員端末
400 セルフレジ端末
400a 通信インタフェース
400b HDD
400c メモリ
400d プロセッサ
400e 入力部
400f 出力部
500 ゲート用リーダ
500a USBインタフェース
500b イメージセンサ
500c 発光部
500d プロセッサ
1000 情報処理端末
1000a 通信インタフェース
1000b HDD
1000c メモリ
1000d プロセッサ
1000e 入力部
1000f 表示部
Claims (9)
- 撮像した画像から、店舗に滞在する人物の骨格情報を生成し、
前記骨格情報を用いて、商品を買い物カゴに入れる第2の動作、および前記人物が前記商品を第1の端末に登録する第3の動作を、特定の動作として検出し、
前記画像の中の人物の位置情報を用いて、前記店舗において前記特定の動作を検出した時に前記人物が滞在しているエリアを特定し、
前記特定されたエリアと対応づけられた設定情報を特定し、
前記特定された設定情報に基づいて、前記第2の動作と前記第3の動作との検出時間の差分に対する第3のパラメータを、前記人物の前記商品に対する行動を評価するためのパラメータとして変更する
処理をコンピュータに実行させることを特徴とする情報処理プログラム。 - 前記特定の動作を検出する処理は、前記人物が前記商品を収容した棚から前記商品を取り出す第1の動作を前記特定の動作として検出する処理を含むことを特徴とする請求項1に記載の情報処理プログラム。
- 前記パラメータを変更する処理は、前記第1の動作のスピードに対する第1のパラメータを前記パラメータとして変更する処理を含むことを特徴とする請求項2に記載の情報処理プログラム。
- 前記パラメータを変更する処理は、前記第2の動作のスピードに対する第2のパラメータを前記パラメータとして変更する処理を含むことを特徴とする請求項2または3に記載の情報処理プログラム。
- 前記パラメータに基づいて前記人物の前記商品に対する行動を評価する処理を前記コンピュータに実行させることを特徴とする請求項1乃至4のいずれか一項に記載の情報処理プログラム。
- 前記行動を評価する処理は、前記特定されたエリア、ならびに前記人物の年齢および性別の少なくとも1つに基づいて重み付けして前記行動を評価する処理を含むことを特徴とする請求項5に記載の情報処理プログラム。
- 前記行動を評価する処理によって前記人物が不正をしたと評価された場合、第2の端末にアラートを通知する処理を前記コンピュータに実行させることを特徴とする請求項5または6に記載の情報処理プログラム。
- 撮像した画像から、店舗に滞在する人物の骨格情報を生成し、
前記骨格情報を用いて、商品を買い物カゴに入れる第2の動作、および前記人物が前記商品を第1の端末に登録する第3の動作を、特定の動作として検出し、
前記画像の中の人物の位置情報を用いて、前記店舗において前記特定の動作を検出した時に前記人物が滞在しているエリアを特定し、
前記特定されたエリアと対応づけられた設定情報を特定し、
前記特定された設定情報に基づいて、前記第2の動作と前記第3の動作との検出時間の差分に対する第3のパラメータを、前記人物の前記商品に対する行動を評価するためのパラメータとして変更する
処理をコンピュータが実行することを特徴とする情報処理方法。 - 撮像した画像から、店舗に滞在する人物の骨格情報を生成し、
前記骨格情報を用いて、商品を買い物カゴに入れる第2の動作、および前記人物が前記商品を第1の端末に登録する第3の動作を、特定の動作として検出し、
前記画像の中の人物の位置情報を用いて、前記店舗において前記特定の動作を検出した時に前記人物が滞在しているエリアを特定し、
前記特定されたエリアと対応づけられた設定情報を特定し、
前記特定された設定情報に基づいて、前記第2の動作と前記第3の動作との検出時間の差分に対する第3のパラメータを、前記人物の前記商品に対する行動を評価するためのパラメータとして変更する
処理を実行する制御部を有することを特徴とする情報処理装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021125672A JP7318679B2 (ja) | 2021-07-30 | 2021-07-30 | 情報処理プログラム、情報処理方法、および情報処理装置 |
US17/745,061 US20230034988A1 (en) | 2021-07-30 | 2022-05-16 | Computer-readable recording medium storing information processing program, information processing method, and information processing device |
EP22180685.4A EP4125056A1 (en) | 2021-07-30 | 2022-06-23 | Information processing program, information processing method, and information processing device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021125672A JP7318679B2 (ja) | 2021-07-30 | 2021-07-30 | 情報処理プログラム、情報処理方法、および情報処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023020356A JP2023020356A (ja) | 2023-02-09 |
JP7318679B2 true JP7318679B2 (ja) | 2023-08-01 |
Family
ID=83050011
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021125672A Active JP7318679B2 (ja) | 2021-07-30 | 2021-07-30 | 情報処理プログラム、情報処理方法、および情報処理装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230034988A1 (ja) |
EP (1) | EP4125056A1 (ja) |
JP (1) | JP7318679B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7502964B2 (ja) | 2020-10-29 | 2024-06-19 | 日立Geニュークリア・エナジー株式会社 | 圧力開放装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010097458A (ja) | 2008-10-17 | 2010-04-30 | Okamura Corp | 商品陳列装置 |
JP2015011649A (ja) | 2013-07-02 | 2015-01-19 | パナソニック株式会社 | 人物行動分析装置、人物行動分析システムおよび人物行動分析方法、ならびに監視装置 |
JP2015176227A (ja) | 2014-03-13 | 2015-10-05 | 富士通株式会社 | 監視方法、監視装置および監視プログラム |
JP2015033576A5 (ja) | 2014-07-10 | 2018-02-08 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6416521B2 (ja) | 2013-07-11 | 2018-10-31 | 株式会社三共 | 遊技機 |
US20160210829A1 (en) * | 2013-09-06 | 2016-07-21 | Nec Corporation | Security system, security method, and non-transitory computer readable medium |
US10332117B2 (en) | 2015-08-13 | 2019-06-25 | Newstore, Inc. | System and method for mobile device self-checkout for retail transactions with loss protection |
US11049373B2 (en) * | 2017-08-25 | 2021-06-29 | Nec Corporation | Storefront device, storefront management method, and program |
JP2019193089A (ja) | 2018-04-24 | 2019-10-31 | 東芝テック株式会社 | 映像解析装置 |
US20220198550A1 (en) * | 2019-04-30 | 2022-06-23 | Tracxone Ltd | System and methods for customer action verification in a shopping cart and point of sales |
-
2021
- 2021-07-30 JP JP2021125672A patent/JP7318679B2/ja active Active
-
2022
- 2022-05-16 US US17/745,061 patent/US20230034988A1/en active Pending
- 2022-06-23 EP EP22180685.4A patent/EP4125056A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010097458A (ja) | 2008-10-17 | 2010-04-30 | Okamura Corp | 商品陳列装置 |
JP2015011649A (ja) | 2013-07-02 | 2015-01-19 | パナソニック株式会社 | 人物行動分析装置、人物行動分析システムおよび人物行動分析方法、ならびに監視装置 |
JP2015176227A (ja) | 2014-03-13 | 2015-10-05 | 富士通株式会社 | 監視方法、監視装置および監視プログラム |
JP2015033576A5 (ja) | 2014-07-10 | 2018-02-08 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7502964B2 (ja) | 2020-10-29 | 2024-06-19 | 日立Geニュークリア・エナジー株式会社 | 圧力開放装置 |
Also Published As
Publication number | Publication date |
---|---|
US20230034988A1 (en) | 2023-02-02 |
EP4125056A1 (en) | 2023-02-01 |
JP2023020356A (ja) | 2023-02-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210304176A1 (en) | Information processing system | |
CN109353397B (zh) | 商品管理方法、装置和系统及存储介质及购物车 | |
JP2024008245A (ja) | 情報処理プログラム、情報処理方法、および情報処理装置 | |
JP7318679B2 (ja) | 情報処理プログラム、情報処理方法、および情報処理装置 | |
KR20230060452A (ko) | 행동 판정 프로그램, 행동 판정 방법 및 행동 판정 장치 | |
JP7318753B2 (ja) | 情報処理プログラム、情報処理方法、および情報処理装置 | |
JP7318680B2 (ja) | 情報処理プログラム、情報処理方法、および情報処理装置 | |
WO2019225260A1 (ja) | 情報処理装置、制御方法、及びプログラム | |
EP4160533A1 (en) | Estimation program, estimation method, and estimation device | |
JP7318683B2 (ja) | 情報処理プログラム、情報処理方法、および情報処理装置 | |
JP7318684B2 (ja) | 情報処理プログラム、情報処理方法、および情報処理装置 | |
US20230267743A1 (en) | Computer-readable recording medium, information processing method, and information processing apparatus | |
US20230005267A1 (en) | Computer-readable recording medium, fraud detection method, and fraud detection apparatus | |
EP4202880A1 (en) | Information processing program, information processing method, and information processing apparatus | |
JP7315049B1 (ja) | 情報処理プログラム、情報処理方法、および情報処理装置 | |
US20230267486A1 (en) | Computer-readable recording medium, information processing method, and information processing apparatus | |
JP2024008708A (ja) | 判定プログラム、判定方法、および判定装置 | |
WO2023148856A1 (ja) | 購買分析装置、購買分析方法、及び非一時的なコンピュータ可読媒体 | |
KR20240085839A (ko) | 정보 처리 프로그램, 정보 처리 방법 및 정보 처리 장치 | |
JP2024085336A (ja) | 情報処理プログラム、情報処理方法、および情報処理装置 | |
JP2023051360A (ja) | 情報処理プログラム、情報処理方法および情報処理装置 | |
JP2023121668A (ja) | 配信プログラム、配信方法および情報処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230517 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230620 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230703 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7318679 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |