JP2019016258A - 作業監視システムおよび作業監視方法 - Google Patents
作業監視システムおよび作業監視方法 Download PDFInfo
- Publication number
- JP2019016258A JP2019016258A JP2017134472A JP2017134472A JP2019016258A JP 2019016258 A JP2019016258 A JP 2019016258A JP 2017134472 A JP2017134472 A JP 2017134472A JP 2017134472 A JP2017134472 A JP 2017134472A JP 2019016258 A JP2019016258 A JP 2019016258A
- Authority
- JP
- Japan
- Prior art keywords
- image
- filter
- pixels
- work
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 52
- 238000000034 method Methods 0.000 title claims description 22
- 238000012545 processing Methods 0.000 claims description 20
- 230000010365 information processing Effects 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 5
- 238000001914 filtration Methods 0.000 claims 1
- 238000010191 image analysis Methods 0.000 abstract description 8
- 238000004458 analytical method Methods 0.000 description 13
- 230000005856 abnormality Effects 0.000 description 7
- 230000007423 decrease Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000012854 evaluation process Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
本実施形態の作業監視システムは、図1に示されるように、作業者が作業エリアAから作業エリアBに荷物を移動させる作業について解析して、作業者の動線に異常がある場合に警告をする作業モデルを対象とするものとする。ここで、図2に示されるUsual Pathが正常な動線であり、Unusual Pathが異常な動線である。
作業監視システムは、図3に示されるように、作業監視サーバ100、クライアントPC10、Webカメラ30がネットワークHUB20を介してネットワークにより接続された形態である。
本発明は、図2に示したように、作業者の動線解析をおこなうために、画像データから作業者の作業開始点(開始時刻)、作業終了点(終了時刻)を求めることを目的とする。
作業監視サーバ100のハードウェア構成としては、例えば、図5に示されるような一般的な情報処理装置で実現される。
HDD250は、大容量の記憶容量を有しており、本実施形態を実行するためのプログラムが格納されている。作業監視サーバ100には、画像ユーティリティプログラム40、開始・終了点解析プログラム50、動線解析プログラム60、異常判定プログラム70がインストールされている。
また、HDD250には、図3に示した画像DB150のデータと設定・解析結果DB160のデータが格納される。
画像データ80は、図6に示されるように、画素ごとにR(RED:赤)801、G(GREEN:緑)802、B(BLUE:青)803の各成分ごとに格納されている。各成分は、0〜255の値を取り、行列型の値となっている。
そのためイベントとして判定される条件は、以下の(式1)のようになる。
先ず、画像フィルタ(From)処理101では、画像データ80に対し、予め設定してある画像フィルタ定義(From)データ91で指定した画像フィルタを施して、画像データ80の各画素が、画像フィルタを通過するか、不通過であるかの判定処理を行う。
例えば、画像フィルタ通過割合差分が、前景フィルタの通過する割合である前景レートである場合を考える。
Claims (10)
- カメラで撮影した画像データによって作業を情報処理装置により解析する作業監視システムであって、
画像データの第一の領域と第二の領域に対してそれぞれ画像フィルタを施し、各々の画像フィルタを通過した画素の数を算出し、
前記第一の領域の画素数における前記画像フィルタを透過した割合と、前記第二の領域の画素数における前記画像フィルタを通過した割合とを算出し、
前記第一の領域の画素数における前記画像フィルタを通過した割合と、前記第二の領域の画素数における前記画像フィルタを透過した割合との差分を算出し、
算出した前記差分に基づいて、前記作業のイベントを検知することを特徴とする作業監視システム。 - 前記作業のイベントは、作業の開始・終了であることを特徴とする請求項1記載の作業監視システム。
- 前記画像フィルタは、特定の色のみを抜き出すカラーフィルタ、移動している画素を特定する前景フィルタ、ある一定以上の速度で移動している画素を特定する速度ベクトルフィルタのいずれかであることを特徴とする請求項1記載の作業監視システム。
- 前記第一の領域、前記第二の領域は、矩形領域または矩形領域の和集合または共通集合として定義された領域であることを特徴とする請求項1記載の作業監視システム。
- 前記第一の領域の画素数における前記画像フィルタを通過した割合と、前記第二の領域の画素数における前記画像フィルタを透過した割合との差分を複数算出して、時間軸を横軸にし、前記差分の値を縦軸としたグラフにおける回帰直線の傾きに基づいて、前記イベントを検知することを特徴とする請求項1記載の作業監視システム。
- 前記第一の領域の画素数における前記画像フィルタを透過した割合、または、前記第二の領域の画素数における前記画像フィルタを通過した割合と定められたしきい値と比較した結果を前記イベントの検知の条件とすることを特徴とする請求項1記載の作業監視システム。
- イベント検知の後に、一定のイベント検知の無処理期間を前記イベント検知の条件とすることを特徴とする請求項1記載の作業監視システム。
- カメラで撮影した画像データによって作業を情報処理装置により解析する作業監視方法であって、
前記情報処理装置が、画像データの第一の領域と第二の領域に対してそれぞれ画像フィルタを施し、各々の画像フィルタを通過した画素の数を算出するステップと、
前記情報処理装置が、前記第一の領域の画素数における前記画像フィルタを透過した割合と、前記第二の領域の画素数における前記画像フィルタを通過した割合とを算出するステップと、
前記情報処理装置が、前記第一の領域の画素数における前記画像フィルタを通過した割合と、前記第二の領域の画素数における前記画像フィルタを透過した割合との差分を算出するステップと、
前記情報処理装置が、算出した前記差分に基づいて、前記作業のイベントを検知するステップとを有することを特徴とする作業監視方法。 - 前記作業のイベントは、作業の開始・終了であることを特徴とする請求項8記載の作業監視方法。
- 前記画像フィルタは、特定の色のみを抜き出すカラーフィルタ、移動している画素を特定する前景フィルタ、ある一定以上の速度で移動している画素を特定する速度ベクトルフィルタのいずれかであることを特徴とする請求項9記載の作業監視方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017134472A JP6941993B2 (ja) | 2017-07-10 | 2017-07-10 | 作業監視システムおよび作業監視方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017134472A JP6941993B2 (ja) | 2017-07-10 | 2017-07-10 | 作業監視システムおよび作業監視方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019016258A true JP2019016258A (ja) | 2019-01-31 |
JP6941993B2 JP6941993B2 (ja) | 2021-09-29 |
Family
ID=65359327
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017134472A Active JP6941993B2 (ja) | 2017-07-10 | 2017-07-10 | 作業監視システムおよび作業監視方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6941993B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020246186A1 (ja) * | 2019-06-04 | 2020-12-10 | ソニー株式会社 | 撮像システム |
WO2022225192A1 (ko) * | 2021-04-22 | 2022-10-27 | 삼성전자 주식회사 | 커넥터의 연결을 확인하는 전자 장치와 이의 동작 방법 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001043383A (ja) * | 1999-07-29 | 2001-02-16 | Oki Electric Ind Co Ltd | 画像監視システム |
JP2014026372A (ja) * | 2012-07-25 | 2014-02-06 | Dainippon Printing Co Ltd | カメラの撮影視野変動検知装置 |
JP2015225630A (ja) * | 2014-05-30 | 2015-12-14 | パナソニックIpマネジメント株式会社 | 作業管理装置、作業管理システムおよび作業管理方法 |
WO2016139868A1 (ja) * | 2015-03-04 | 2016-09-09 | ノ-リツプレシジョン株式会社 | 画像解析装置、画像解析方法、及び、画像解析プログラム |
-
2017
- 2017-07-10 JP JP2017134472A patent/JP6941993B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001043383A (ja) * | 1999-07-29 | 2001-02-16 | Oki Electric Ind Co Ltd | 画像監視システム |
JP2014026372A (ja) * | 2012-07-25 | 2014-02-06 | Dainippon Printing Co Ltd | カメラの撮影視野変動検知装置 |
JP2015225630A (ja) * | 2014-05-30 | 2015-12-14 | パナソニックIpマネジメント株式会社 | 作業管理装置、作業管理システムおよび作業管理方法 |
WO2016139868A1 (ja) * | 2015-03-04 | 2016-09-09 | ノ-リツプレシジョン株式会社 | 画像解析装置、画像解析方法、及び、画像解析プログラム |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020246186A1 (ja) * | 2019-06-04 | 2020-12-10 | ソニー株式会社 | 撮像システム |
CN113785560A (zh) * | 2019-06-04 | 2021-12-10 | 索尼集团公司 | 成像系统 |
US11760267B2 (en) | 2019-06-04 | 2023-09-19 | Sony Group Corporation | Imaging system |
JP7505490B2 (ja) | 2019-06-04 | 2024-06-25 | ソニーグループ株式会社 | 撮像システム |
WO2022225192A1 (ko) * | 2021-04-22 | 2022-10-27 | 삼성전자 주식회사 | 커넥터의 연결을 확인하는 전자 장치와 이의 동작 방법 |
Also Published As
Publication number | Publication date |
---|---|
JP6941993B2 (ja) | 2021-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20180374022A1 (en) | Methods and systems for improved quality inspection | |
CN109084955A (zh) | 显示屏质量检测方法、装置、电子设备及存储介质 | |
CN105302413B (zh) | 控件的ui测试方法及系统 | |
US20210272272A1 (en) | Inspection support apparatus, inspection support method, and inspection support program for concrete structure | |
US20200014856A1 (en) | Image processing device, control method, and program storage medium | |
WO2019056503A1 (zh) | 门店监控评价方法、装置及存储介质 | |
CN111325128A (zh) | 违规操作检测方法、装置、计算机设备和存储介质 | |
CN108921840A (zh) | 显示屏外围电路检测方法、装置、电子设备及存储介质 | |
JP6941993B2 (ja) | 作業監視システムおよび作業監視方法 | |
US20230049656A1 (en) | Method of processing image, electronic device, and medium | |
JP2018005752A (ja) | 振る舞い検知システム | |
CN115512134A (zh) | 快件堆积异常预警方法、装置、设备及存储介质 | |
CN113906357A (zh) | 信息管理系统、信息管理方法 | |
CN114708535A (zh) | 测试事件检测算法的方法、装置、电子设备及存储介质 | |
CN114443034A (zh) | 优化界面布局的方法、装置、设备及介质 | |
CN117094660A (zh) | 一种基于数字孪生技术的施工监控方法及系统 | |
CN116778837A (zh) | 一种多功能显示器故障检测平台 | |
US11481996B2 (en) | Calculation device, information processing method, and storage medium | |
CN115035481A (zh) | 一种图像物距融合方法、装置、设备及存储介质 | |
US11922659B2 (en) | Coordinate calculation apparatus, coordinate calculation method, and computer-readable recording medium | |
CN113986671A (zh) | 运维数据异常检测方法、装置、设备及介质 | |
CN112949490A (zh) | 设备动作检测方法、装置、电子设备及可读存储介质 | |
JP6798276B2 (ja) | 鋼構造物の保全管理システム及び劣化判定装置 | |
US20240112498A1 (en) | Image analysis device and method | |
JP7345355B2 (ja) | 物体識別装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210319 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210817 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210907 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6941993 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |