JP7080615B2 - 監視装置、その方法および、そのシステム - Google Patents
監視装置、その方法および、そのシステム Download PDFInfo
- Publication number
- JP7080615B2 JP7080615B2 JP2017193916A JP2017193916A JP7080615B2 JP 7080615 B2 JP7080615 B2 JP 7080615B2 JP 2017193916 A JP2017193916 A JP 2017193916A JP 2017193916 A JP2017193916 A JP 2017193916A JP 7080615 B2 JP7080615 B2 JP 7080615B2
- Authority
- JP
- Japan
- Prior art keywords
- worker
- work object
- data
- area
- monitoring device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012806 monitoring device Methods 0.000 title claims description 21
- 238000000034 method Methods 0.000 title claims description 16
- 230000005856 abnormality Effects 0.000 claims description 51
- 238000004364 calculation method Methods 0.000 claims description 16
- 238000012544 monitoring process Methods 0.000 claims description 14
- 230000007704 transition Effects 0.000 claims description 5
- 238000001514 detection method Methods 0.000 description 9
- 238000013500 data storage Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/04—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
- G08B21/0407—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons based on behaviour analysis
- G08B21/0423—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons based on behaviour analysis detecting deviation from an expected pattern of behaviour or schedule
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/24—Character recognition characterised by the processing or recognition method
- G06V30/248—Character recognition characterised by the processing or recognition method involving plural approaches, e.g. verification by template match; Resolving confusion among similar patterns, e.g. "O" versus "Q"
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/04—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
- G08B21/0438—Sensor means for detecting
- G08B21/0476—Cameras to detect unsafe condition, e.g. video cameras
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Gerontology & Geriatric Medicine (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Factory Administration (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
Description
Claims (8)
- 処理部と、データ記録部とを有する監視装置であって、
前記処理部は、
作業状況の画像を入力し、入力した前記画像から作業者と作業対象物の領域を認識し、
前記作業者と前記作業対象物の領域を認識したデータを前記データ記録部に保存し、
認識した前記作業者と前記作業対象物の領域を囲う、それぞれの外接四角形のいずれかの頂点の座標と、前記外接四角形の幅および高さに基づいて直積を計算し、
前記作業者と前記作業対象物の領域の認識と、認識した前記作業者と前記作業対象物との直積の計算を繰り返し、
直積座標を有するモデルデータが前記作業者と前記作業対象物の領域の取り得る組み合わせとなるように更新し、
前記モデルデータの直積座標ごとに過去の出現頻度を算出し、その出現確率を正常確率として前記モデルデータの列を更新することを特徴とする監視装置。 - 請求項1に記載の監視装置において、
前記処理部は、
前記正常確率から異常度を算出することを特徴とする監視装置。 - 請求項2記載の監視装置において、
前記処理部は、
前記異常度を時間とともに前記データ記録部に保存し、
外部装置に前記異常度の推移を出力することを特徴とする監視装置。 - 請求項1記載の監視装置において、
前記処理部は、
入力した前記作業状況の画像から前記作業対象物が回転したかどうかを検出し、回転した場合には、モデル番号を更新することを特徴とする監視装置。 - 請求項1に記載の監視装置において、
前記直積は、異常度を求める対象の各作業者と各作業対象物の前記頂点の座標と、前記外接四角形の幅および高さの4次元データを組み合わせた8次元のデータであることを特徴とする監視装置。 - 監視装置における監視方法であって、
前記監視装置は、
作業状況の画像を入力し、入力した前記画像から作業者と作業対象物の領域を認識し、
前記作業者と前記作業対象物の領域を認識したデータを保存し、
認識した前記作業者と前記作業対象物の領域を囲う、それぞれの外接四角形のいずれかの頂点の座標と、前記外接四角形の幅および高さに基づいて直積を計算し、
前記作業者と前記作業対象物の領域の認識と、認識した前記作業者と前記作業対象物との直積の計算を繰り返し、
直積座標を有するモデルデータが前記作業者と前記作業対象物の領域の取り得る組み合わせとなるように更新し、
前記モデルデータの直積座標ごとに過去の出現頻度を算出し、その出現確率を正常確率として前記モデルデータの列を更新することを特徴とする監視方法。 - 監視装置と外部装置とを有する監視システムであって、
前記監視装置は、
作業状況の画像を入力し、入力した前記画像から作業者と作業対象物の領域を認識し、
前記作業者と前記作業対象物の領域を認識したデータを保存し、
認識した前記作業者と前記作業対象物の領域を囲う、それぞれの外接四角形のいずれかの頂点の座標と、前記外接四角形の幅および高さに基づいて直積を計算し、
前記作業者と前記作業対象物の領域の認識と、認識した前記作業者と前記作業対象物との直積の計算を繰り返し、
直積座標を有するモデルデータが前記作業者と前記作業対象物の領域の取り得る組み合わせとなるように更新し、
前記モデルデータの直積座標ごとに過去の出現頻度を算出し、その出現確率を正常確率として前記モデルデータの列を更新し、
前記正常確率から異常度を算出し、
前記外部装置は前記異常度に基づいて異常発生を通知することを特徴とする監視システム。 - 請求項7に記載の監視システムにおいて、前記外部装置は、表示端末であり、前記異常度を、前記表示端末が表示することを特徴とする監視システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017193916A JP7080615B2 (ja) | 2017-10-04 | 2017-10-04 | 監視装置、その方法および、そのシステム |
US16/118,545 US10380865B2 (en) | 2017-10-04 | 2018-08-31 | Monitoring apparatus, method and system of the same |
CN201811028230.3A CN109614281B (zh) | 2017-10-04 | 2018-09-04 | 监控装置、其方法、及其系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017193916A JP7080615B2 (ja) | 2017-10-04 | 2017-10-04 | 監視装置、その方法および、そのシステム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019067271A JP2019067271A (ja) | 2019-04-25 |
JP7080615B2 true JP7080615B2 (ja) | 2022-06-06 |
Family
ID=65897314
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017193916A Active JP7080615B2 (ja) | 2017-10-04 | 2017-10-04 | 監視装置、その方法および、そのシステム |
Country Status (3)
Country | Link |
---|---|
US (1) | US10380865B2 (ja) |
JP (1) | JP7080615B2 (ja) |
CN (1) | CN109614281B (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003196661A (ja) | 2001-12-07 | 2003-07-11 | Xerox Corp | 視覚型動き解析及び視覚型追跡のためのアピアランスモデル |
JP2013003773A (ja) | 2011-06-15 | 2013-01-07 | Nara Institute Of Science & Technology | 画像判別装置、画像特定装置、この画像特定装置を備えた作業工程管理システム、および、プログラム |
JP2015156172A (ja) | 2014-02-21 | 2015-08-27 | 関電プラント株式会社 | 物品認識システムおよび物品管理方法 |
JP2016042306A (ja) | 2014-08-18 | 2016-03-31 | 株式会社リコー | 軌跡描画装置、軌跡描画方法、軌跡描画システム、及びプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5369778B2 (ja) | 2009-03-11 | 2013-12-18 | 日本電気株式会社 | 動線モニタリングシステム、方法、及び、プログラム |
US9332229B2 (en) * | 2010-06-18 | 2016-05-03 | Hitachi Construction Machinery Co., Ltd. | Surrounding area monitoring device for monitoring area around work machine |
JP6044764B2 (ja) * | 2012-10-19 | 2016-12-14 | 株式会社Ihi | 異物監視方法及び異物監視装置 |
JP2016157357A (ja) * | 2015-02-26 | 2016-09-01 | 株式会社日立製作所 | 作業者品質管理方法及び作業者品質管理装置 |
JP6617963B2 (ja) * | 2016-02-17 | 2019-12-11 | 株式会社Screenホールディングス | 基板保持状態の異常検査の検査領域の自動決定方法および基板処理装置 |
CN106779418B (zh) * | 2016-12-20 | 2020-09-04 | 河海大学常州校区 | 基于神经网络和证据理论的水污染事件智能决策方法 |
-
2017
- 2017-10-04 JP JP2017193916A patent/JP7080615B2/ja active Active
-
2018
- 2018-08-31 US US16/118,545 patent/US10380865B2/en active Active
- 2018-09-04 CN CN201811028230.3A patent/CN109614281B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003196661A (ja) | 2001-12-07 | 2003-07-11 | Xerox Corp | 視覚型動き解析及び視覚型追跡のためのアピアランスモデル |
JP2013003773A (ja) | 2011-06-15 | 2013-01-07 | Nara Institute Of Science & Technology | 画像判別装置、画像特定装置、この画像特定装置を備えた作業工程管理システム、および、プログラム |
JP2015156172A (ja) | 2014-02-21 | 2015-08-27 | 関電プラント株式会社 | 物品認識システムおよび物品管理方法 |
JP2016042306A (ja) | 2014-08-18 | 2016-03-31 | 株式会社リコー | 軌跡描画装置、軌跡描画方法、軌跡描画システム、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20190103006A1 (en) | 2019-04-04 |
US10380865B2 (en) | 2019-08-13 |
JP2019067271A (ja) | 2019-04-25 |
CN109614281A (zh) | 2019-04-12 |
CN109614281B (zh) | 2022-03-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101467663B1 (ko) | 영상 모니터링 시스템에서 영상 제공 방법 및 시스템 | |
TWI419081B (zh) | 提供擴增實境的標籤追蹤方法、系統與電腦程式產品 | |
JP3977776B2 (ja) | ステレオキャリブレーション装置とそれを用いたステレオ画像監視装置 | |
CN108876934B (zh) | 关键点标注方法、装置和系统及存储介质 | |
US20190012621A1 (en) | Work data management system and work data management method | |
US20150016671A1 (en) | Setting apparatus, output method, and non-transitory computer-readable storage medium | |
Dellen et al. | Growth signatures of rosette plants from time-lapse video | |
JP6519656B2 (ja) | 製造工程管理システム、製造工程管理方法および製造工程管理プログラム | |
JP2020061158A (ja) | 画像処理装置、表示制御装置、画像処理方法、および、記録媒体 | |
JP2020517926A (ja) | スクリーン状態自動検出ロボット、方法及びコンピュータ読み取り可能な記憶媒体 | |
CN112883955B (zh) | 货架布局检测方法、装置及计算机可读存储介质 | |
JP2008009849A (ja) | 人物追跡装置 | |
JP7080615B2 (ja) | 監視装置、その方法および、そのシステム | |
CN110858302A (zh) | 在画面影像中编辑监控脚本的系统及方法 | |
CN114219946B (zh) | 文本图像的二值化方法及装置、电子设备和介质 | |
US20230091536A1 (en) | Camera Placement Guidance | |
JP2007200364A (ja) | ステレオキャリブレーション装置とそれを用いたステレオ画像監視装置 | |
TWI636425B (zh) | 介面運作方法及其手持裝置 | |
US10152810B2 (en) | Techniques for displaying data comprising time and angular values acquired from a technical or industrial process | |
KR20200042782A (ko) | 입체 모델 생성 장치 및 그 영상 표시 방법 | |
US20230068757A1 (en) | Work rate measurement device and work rate measurement method | |
JP6858159B2 (ja) | 頭部装着装置を使用して関心領域を標識するテレプレゼンスのフレームワーク | |
JP2022139903A5 (ja) | ||
CN111460896B (zh) | 视觉数据中防护设备的检测方法、装置和存储介质 | |
KR101894945B1 (ko) | 족장 설치 정보 제공 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200316 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210311 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210406 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210603 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220510 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220525 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7080615 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |