JP6157170B2 - 監視支援システム - Google Patents
監視支援システム Download PDFInfo
- Publication number
- JP6157170B2 JP6157170B2 JP2013069393A JP2013069393A JP6157170B2 JP 6157170 B2 JP6157170 B2 JP 6157170B2 JP 2013069393 A JP2013069393 A JP 2013069393A JP 2013069393 A JP2013069393 A JP 2013069393A JP 6157170 B2 JP6157170 B2 JP 6157170B2
- Authority
- JP
- Japan
- Prior art keywords
- gazing point
- monitoring
- captured image
- image
- point history
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012544 monitoring process Methods 0.000 title claims description 124
- 238000004364 calculation method Methods 0.000 claims description 9
- 230000000007 visual effect Effects 0.000 claims description 7
- 230000007704 transition Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 5
- 210000005252 bulbus oculi Anatomy 0.000 description 11
- 238000000034 method Methods 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 5
- 230000002194 synthesizing effect Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 210000001508 eye Anatomy 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 210000001747 pupil Anatomy 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 210000004087 cornea Anatomy 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000010835 comparative analysis Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003703 image analysis method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 230000007847 structural defect Effects 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Description
監視対象領域A、B・・・を監視する監視者の視界を撮影するために、監視者の視線方向を撮影方向とする視野撮影カメラ2が監視者に装着されている。さらに、この視野撮影カメラ2による撮影画像上の監視者の視点である注視点を当該撮影画像上の位置データとして演算する注視点演算ユニット3も、通常は監視者に装着されている。注視点演算ユニット3は、監視者の眼球つまり瞳孔の動きを解析して、その瞳孔の向きから注視点を演算する機能を有する。この注視点を順次求めていくことで視線追跡(アイトラッキング)が行われる。
この監視支援システムでは、図4で例示するように、視野撮影カメラ2と眼球監視カメラ31がヘッドセットHSとして一体的に構成されており、演算モジュール32と注視点履歴データ生成部41とデータ記録部42がポーチセッPSとして一体的に構成されている。つまり、監視支援システムのデータ収集機器は、ヘッドセットHSとポーチセットPSとに集約されて、監視者が身に着けるウェアラブル監視ユニットとして構成されている。
(1)上述した具体的な実施形態では、図1で説明された原理が採用されていたが、実質的には画像合成部43とデータ記録部42とを交換することで、図2で説明された原理を採用した監視支援システムを構築することができる。また、図1で説明された原理と図2で説明された原理の両方を採用した監視支援システムを構築することも可能である。
(2)
上述した具体的な実施形態では、ヘッドセットHSとポーチセットPSとからなるウェアラブル監視ユニットとのデータ交換のために、データ記録部42を外部記憶装置としてコンピュータのI/Oインターフェースに接続したが、これ以外の方法でのデータ交換も可能である。例えば、無線データ通信を用いてデータ交換することも可能である。この場合、監視員の監視中に、注視点履歴付き撮影画像を出力することや、その監視状態を判定して、リアルタイムに監視者に監視助言を行うことも可能である。さらに、この監視支援システム全体をウェアラブル監視ユニットとして構築することも可能である。
3:注視点演算ユニット
31:眼球監視カメラ
32:演算モジュール
41:注視点履歴データ生成部
42:データ記録部
43:画像合成部
44:画像出力部
50:参照画像登録部
51:監視判定部
52:判定結果出力部
61:モニタ
62:プリンタ
Claims (5)
- 監視対象領域を監視する監視者の視線方向を撮影方向とする視野撮影カメラと、
前記視野撮影カメラによる撮影画像上の前記監視者の視点である注視点を当該撮影画像上の位置データとして演算する注視点演算ユニットと、
前記撮影画像と前記注視点とを関係付けて前記注視点の変移履歴を示す注視点履歴データを生成する注視点履歴データ生成部と、
前記撮影画像と前記注視点履歴データとを記録するデータ記録部と、
異なる日時でのあるいは異なる監視者での同一監視対象領域に関する前記撮影画像と前記注視点履歴データとを前記データ記録部から読み出し、読み出された前記撮影画像と前記注視点履歴データとを画像合成し、注視点履歴付き撮影画像として出力する画像出力部と、
を備えた監視支援システム。 - 監視対象領域を監視する監視者の視線方向を撮影方向とする視野撮影カメラと、
前記視野撮影カメラによる撮影画像上の前記監視者の視点である注視点を当該撮影画像上の位置データとして演算する注視点演算ユニットと、
前記撮影画像と前記注視点とを関係付けて前記注視点の変移履歴を示す注視点履歴データを生成する注視点履歴データ生成部と、
前記注視点履歴データを当該注視点履歴データに対応する前記撮影画像に画像合成し、前記撮影画像を注視点履歴付き撮影画像として記録するデータ記録部と、
同一監視対象領域に関する前記注視点履歴付き撮影画像を前記データ記録部から読み出して出力する画像出力部と、
を備えた監視支援システム。 - 前記注視点履歴データは、対応する撮影画像に対して人的に識別可能でかつ画像処理的に識別可能に合成される請求項1または2に記載の監視支援システム。
- 前記監視対象領域において前もって設定されている重要監視箇所と当該監視対象領域の撮影画像上の前記注視点の位置とに基づいて監視不十分箇所を推定する監視判定部が備えられている請求項3に記載の監視支援システム。
- 前記監視対象領域に対する適正な監視に基づく適正注視点履歴付き撮影画像が前もって記録されており、評価対象となる前記注視点履歴付き撮影画像と前記適正注視点履歴付き撮影画像とが比較可能な形態で前記画像出力部から出力される請求項1から4のいずれか一項に記載の監視支援システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013069393A JP6157170B2 (ja) | 2013-03-28 | 2013-03-28 | 監視支援システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013069393A JP6157170B2 (ja) | 2013-03-28 | 2013-03-28 | 監視支援システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014192861A JP2014192861A (ja) | 2014-10-06 |
JP6157170B2 true JP6157170B2 (ja) | 2017-07-05 |
Family
ID=51838722
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013069393A Expired - Fee Related JP6157170B2 (ja) | 2013-03-28 | 2013-03-28 | 監視支援システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6157170B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6487545B2 (ja) * | 2015-05-25 | 2019-03-20 | 株式会社ジオクリエイツ | 認知度算出装置、認知度算出方法及び認知度算出プログラム |
JP6586824B2 (ja) * | 2015-08-27 | 2019-10-09 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP6646511B2 (ja) * | 2016-04-14 | 2020-02-14 | 株式会社フジタ | 技能伝承システム及び方法 |
US10110802B2 (en) * | 2016-12-30 | 2018-10-23 | Axis Ab | Historical gaze heat map for a video stream |
CN110402420B (zh) * | 2017-03-23 | 2022-05-17 | 东芝三菱电机产业系统株式会社 | 钢铁厂的分析支援装置 |
JPWO2022259677A1 (ja) * | 2021-06-07 | 2022-12-15 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3217723B2 (ja) * | 1997-03-13 | 2001-10-15 | ▲すすむ▼ 舘 | 遠隔通信システム及び遠隔通信方法 |
JP2002143094A (ja) * | 2000-11-07 | 2002-05-21 | Nac Image Technology Inc | 視線検出装置 |
JP2005250990A (ja) * | 2004-03-05 | 2005-09-15 | Mitsubishi Electric Corp | 作業支援装置 |
JP4474529B2 (ja) * | 2004-11-29 | 2010-06-09 | 独立行政法人産業技術総合研究所 | 作業状況記録装置、その記録方法及び記録プログラム |
-
2013
- 2013-03-28 JP JP2013069393A patent/JP6157170B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2014192861A (ja) | 2014-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6157170B2 (ja) | 監視支援システム | |
US10554829B2 (en) | Information processing device, photographing device, image sharing system, and method of information processing | |
KR101715001B1 (ko) | 웨어러블 기기를 이용한 건설현장의 안전평가 표시 시스템 및 그 방법 | |
JP6732522B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP2020078058A (ja) | 画像処理装置、監視システム、画像処理方法、及びプログラム | |
WO2011052165A1 (ja) | 表示画像切替装置及び表示方法 | |
JP2010540970A (ja) | 一体型の物体取り込みシステム及び表示装置並びに関連方法 | |
JP5407742B2 (ja) | 形状認識方法及び形状認識装置 | |
EP2476999B1 (en) | Method for measuring displacement, device for measuring displacement, and program for measuring displacement | |
KR101211366B1 (ko) | 전자발찌 착용자에 대한 영상 감시 시스템 및 방법 | |
CN108830964A (zh) | 用于冶金厂房的多功能ar巡检设备 | |
JP5719216B2 (ja) | 視線測定装置および視線測定プログラム | |
WO2019085945A1 (zh) | 探测装置、探测系统和探测方法 | |
JP3462754B2 (ja) | 監視装置 | |
KR101926510B1 (ko) | 광각카메라를 이용한 안면인식 기반의 광역 감시 시스템 | |
JPWO2018100631A1 (ja) | 情報処理装置 | |
CN208141469U (zh) | 用于冶金厂房的多功能ar巡检设备 | |
JP6941458B2 (ja) | 監視システム | |
JPWO2023008540A5 (ja) | ウエアラブル情報処理装置及びプログラム並びに記憶媒体 | |
JP6515473B2 (ja) | 動作指示システム、動作指示方法、および、動作指示管理サーバ | |
KR102152319B1 (ko) | 3d 공간상에서 객체의 위치와 크기를 계산하는 방법 및 이를 이용한 영상관제시스템 | |
JP7040627B2 (ja) | 算出装置、情報処理方法およびプログラム | |
JP2017055233A (ja) | 表示装置、表示システム、及び、表示装置の制御方法 | |
JP4812099B2 (ja) | カメラ位置検出方法 | |
KR102527918B1 (ko) | Ar 스마트 글래스 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160129 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160923 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170606 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6157170 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |