JP7275327B1 - プログラマブルロジックコントローラ、動画像管理装置、動画像管理システム、動画像管理方法及びプログラム - Google Patents
プログラマブルロジックコントローラ、動画像管理装置、動画像管理システム、動画像管理方法及びプログラム Download PDFInfo
- Publication number
- JP7275327B1 JP7275327B1 JP2021575079A JP2021575079A JP7275327B1 JP 7275327 B1 JP7275327 B1 JP 7275327B1 JP 2021575079 A JP2021575079 A JP 2021575079A JP 2021575079 A JP2021575079 A JP 2021575079A JP 7275327 B1 JP7275327 B1 JP 7275327B1
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- log
- time
- reference point
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007726 management method Methods 0.000 title claims description 75
- 238000003384 imaging method Methods 0.000 claims abstract description 51
- 238000012937 correction Methods 0.000 claims description 24
- 238000000034 method Methods 0.000 claims description 10
- 238000004891 communication Methods 0.000 description 24
- 230000003139 buffering effect Effects 0.000 description 15
- 238000004519 manufacturing process Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 12
- 238000005259 measurement Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 10
- 230000005856 abnormality Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 239000000872 buffer Substances 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 2
- 101100408455 Arabidopsis thaliana PLC7 gene Proteins 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/05—Programmable logic controllers, e.g. simulating logic interconnections of signals according to ladder diagrams or function charts
- G05B19/058—Safety, monitoring
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/05—Programmable logic controllers, e.g. simulating logic interconnections of signals according to ladder diagrams or function charts
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/05—Programmable logic controllers, e.g. simulating logic interconnections of signals according to ladder diagrams or function charts
- G05B19/054—Input/output
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B23/00—Testing or monitoring of control systems or parts thereof
- G05B23/02—Electric testing or monitoring
- G05B23/0205—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
- G05B23/0218—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults
- G05B23/0221—Preprocessing measurements, e.g. data collection rate adjustment; Standardization of measurements; Time series or signal analysis, e.g. frequency analysis or wavelets; Trustworthiness of measurements; Indexes therefor; Measurements using easily measured parameters to estimate parameters difficult to measure; Virtual sensor creation; De-noising; Sensor fusion; Unconventional preprocessing inherently present in specific fault detection methods like PCA-based methods
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- General Factory Administration (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
Description
クロック素子と、
前記クロック素子が発するクロック信号に基づいて、ログを記録時刻とともに第1記憶装置に記録するログ記録手段と、
撮像装置により撮像された動画像を示す動画像データを前記撮像装置から取得する動画像データ取得手段と、
前記クロック素子が発するクロック信号に基づいて、前記動画像データが示す動画像のフレーム速度を測定するフレーム速度測定手段と、
前記フレーム速度に基づいて前記動画像データが示す動画像に付される時刻を補正する補正手段と、
前記補正手段により補正された時刻が付された動画像を示す新たな動画像データを第2記憶装置に保存する動画像保存手段と、
を備える。
図1を参照しながら、実施の形態1に係る動画像管理システム1を説明する。動画像管理システム1は、例えば生産設備が設置された生産現場に設けられる。動画像管理システム1は、PLC10と動画像管理装置20とカメラ30とを備える。後述するとおり、動画像管理システム1によれば、カメラ30により撮像された生産設備の動画像に付された時刻と、PLC10が記録したログの記録時刻とを整合させることができる。動画像管理システム1は、本開示に係る動画像管理システムの一例である。
y=0.0169x+D ・・・式(1)
ここで、xはフレーム番号、yは受信時刻、Dはy切片である。この数式におけるxの係数「0.0169」が、平均フレーム間隔となる。つまり、この逆数がフレーム速度となる。したがって、フレーム速度を測定することは、式(1)を求めることと等価である。
実施の形態1において、ログDLと動画像データDMとバッファリングデータDBとは、同一の記憶装置110に保存されるものとしたが、これらはそれぞれ別個の記憶装置に保存されるものであってもよい。例えば、ログDLとバッファリングデータDBとはPLC10が備える記憶装置110に保存されるものとし、動画像データDMは外部の記憶装置に保存されるものであってもよい。
以下、図面を参照しながら実施の形態2に係る動画像管理システム1を説明する。ただし、動画像管理システム1の全体構成は図1に示す実施の形態1の場合と同様である。
実施の形態2においては、PLC10が表示装置140を備えるものとしたが、PLC10が表示装置を備えず、外部の表示装置にパターンを表示させるものであってもよい。例えばカメラ30がPLC10を撮像できない位置に設置されている場合、カメラ30が撮像可能な位置に外部の表示装置を設置し、当該表示装置にパターンを表示させることにより、実施の形態2と同様の効果を得ることができる。
実施の形態1及び2においては、PLC10が「クロック差」及び「ジッタ」についての問題を解消するものであった。一方、精度は劣る可能性があるものの、以下に説明するように動画像管理装置20により「クロック差」「ジッタ」「レイテンシ」の全てについての問題を解消するものであってもよい。
各実施の形態において、動画像管理装置20のログ基準点指定部202は、ユーザの入力に基づいてログ基準点を指定するものとした。これに代えて、ログ基準点指定部202は、ユーザの入力によらずに、トリガが発生した時刻をログ基準点として指定してもよい。
Claims (7)
- クロック素子と、
前記クロック素子が発するクロック信号に基づいて、ログを記録時刻とともに第1記憶装置に記録するログ記録手段と、
撮像装置により撮像された動画像を示す動画像データを前記撮像装置から取得する動画像データ取得手段と、
前記クロック素子が発するクロック信号に基づいて、前記動画像データが示す動画像のフレーム速度を測定するフレーム速度測定手段と、
前記フレーム速度に基づいて前記動画像データが示す動画像に付される時刻を補正する補正手段と、
前記補正手段により補正された時刻が付された動画像を示す新たな動画像データを第2記憶装置に保存する動画像保存手段と、
を備えるプログラマブルロジックコントローラ。 - 表示装置に予め定められたパターンを表示させる表示制御手段と、
前記動画像データが示す動画像に前記パターンを撮像して得られた動画像が含まれているか否かを判定するパターン判定手段と、
をさらに備え、
前記補正手段は、前記動画像データが示す動画像に前記パターンを撮像して得られた動画像が含まれていると前記パターン判定手段により判定されたとき、前記表示制御手段により前記パターンを表示させた時刻に基づいて、前記動画像データが示す動画像に付される時刻を補正する、
請求項1に記載のプログラマブルロジックコントローラ。 - 請求項1又は2に記載のプログラマブルロジックコントローラの前記ログ記録手段により前記第1記憶装置に記録された前記ログにおける時系列的な基準点であるログ基準点を、ユーザの入力に基づいて指定し又は前記動画像保存手段に動画像の保存を指示するための信号であるトリガの発生時刻に基づいて指定するログ基準点指定手段と、
ユーザの入力に基づいて、前記プログラマブルロジックコントローラの前記動画像保存手段により前記第2記憶装置に保存された前記新たな動画像データが示す動画像における時系列的な基準点である動画像基準点を指定する動画像基準点指定手段と、
前記ログ基準点と前記動画像基準点とが同一時刻となるように、前記ログと前記新たな動画像データが示す動画像とを連動して表示装置に表示させる表示制御手段と、
を備える動画像管理装置。 - プログラマブルロジックコントローラにより第1記憶装置に記録されたログにおける2つの時系列的な基準点である第1ログ基準点と第2ログ基準点とを、ユーザの入力に基づいて指定し又は第2記憶装置への動画像の保存を指示するための信号であるトリガの発生時刻に基づいて指定するログ基準点指定手段と、
ユーザの入力に基づいて、前記プログラマブルロジックコントローラにより前記第2記憶装置に保存された動画像データが示す動画像における2つの時系列的な基準点である第1動画像基準点と第2動画像基準点とを指定する動画像基準点指定手段と、
前記第1ログ基準点と前記第1動画像基準点とが同一時刻となり、前記第2ログ基準点と前記第2動画像基準点とが同一時刻となるように、前記ログと前記動画像データが示す動画像とを連動して表示手段に表示させる表示制御手段と、
を備える動画像管理装置。 - 請求項1又は2に記載のプログラマブルロジックコントローラと、請求項3に記載の動画像管理装置とを備える動画像管理システム。
- プログラマブルロジックコントローラにより動画像を管理する方法であって、
前記プログラマブルロジックコントローラが備えるクロック素子が発するクロック信号に基づいて、前記プログラマブルロジックコントローラに関するログを記録時刻とともに第1記憶装置に記録し、
撮像装置により撮像された動画像を示す動画像データを前記撮像装置から取得し、
前記クロック素子が発するクロック信号に基づいて、前記動画像データが示す動画像のフレーム速度を測定し、
前記フレーム速度に基づいて前記動画像データが示す動画像に付される時刻を補正し、
補正された時刻が付された動画像を示す新たな動画像データを第2記憶装置に保存する、
動画像管理方法。 - コンピュータを、
クロック素子、
前記クロック素子が発するクロック信号に基づいて、ログを記録時刻とともに第1記憶装置に記録するログ記録手段、
撮像装置により撮像された動画像を示す動画像データを前記撮像装置から取得する動画像データ取得手段、
前記クロック素子が発するクロック信号に基づいて、前記動画像データが示す動画像のフレーム速度を測定するフレーム速度測定手段、
前記フレーム速度に基づいて前記動画像データが示す動画像に付される時刻を補正する補正手段、
前記補正手段により補正された時刻が付された動画像を示す新たな動画像データを第2記憶装置に保存する動画像保存手段、
として機能させるプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2021/021786 WO2022259379A1 (ja) | 2021-06-08 | 2021-06-08 | プログラマブルロジックコントローラ、動画像管理装置、動画像管理システム、動画像管理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2022259379A1 JPWO2022259379A1 (ja) | 2022-12-15 |
JP7275327B1 true JP7275327B1 (ja) | 2023-05-17 |
Family
ID=84425945
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021575079A Active JP7275327B1 (ja) | 2021-06-08 | 2021-06-08 | プログラマブルロジックコントローラ、動画像管理装置、動画像管理システム、動画像管理方法及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US12093012B2 (ja) |
JP (1) | JP7275327B1 (ja) |
CN (1) | CN116685914A (ja) |
WO (1) | WO2022259379A1 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150213838A1 (en) * | 2014-01-30 | 2015-07-30 | Imperx, Inc. | Network based video event recording system |
JP2018073185A (ja) * | 2016-10-31 | 2018-05-10 | 株式会社小林製作所 | 記録システム、端末装置、サーバ装置、プログラムおよび方法 |
WO2018151202A1 (ja) * | 2017-02-17 | 2018-08-23 | 日本電信電話株式会社 | センシングシステムおよびタイムスタンプ補正方法 |
JP2021082028A (ja) * | 2019-11-19 | 2021-05-27 | 株式会社キーエンス | 安全コントローラおよび履歴表示装置 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6005638A (en) * | 1996-03-04 | 1999-12-21 | Axcess, Inc. | Frame averaging for use in processing video data |
JPH11331766A (ja) * | 1998-05-15 | 1999-11-30 | Omron Corp | 設備ロギング装置 |
JP2001125612A (ja) * | 1999-10-25 | 2001-05-11 | Omron Corp | 設備ロギング装置 |
EP1515298A1 (en) * | 2003-08-21 | 2005-03-16 | VastView Technology Inc. | High-quality image liquid crystal display device with improved response speed and the driving method thereof |
JP4276920B2 (ja) * | 2003-10-07 | 2009-06-10 | オリンパス株式会社 | 情報処理プログラム、記憶媒体、情報処理装置、情報処理方法 |
JP4381952B2 (ja) * | 2004-10-14 | 2009-12-09 | 株式会社タイテック | 記録再生装置 |
US9116001B2 (en) * | 2012-06-14 | 2015-08-25 | Qualcomm Incorporated | Adaptive estimation of frame time stamp latency |
JP5935903B2 (ja) * | 2013-01-08 | 2016-06-15 | 富士電機株式会社 | 制御システム、マスタープログラマブルコントローラ、スレーブプログラマブルコントローラ、および、制御方法 |
US10511888B2 (en) * | 2017-09-19 | 2019-12-17 | Sony Corporation | Calibration system for audience response capture and analysis of media content |
JP6757385B2 (ja) | 2018-10-23 | 2020-09-16 | 株式会社キーエンス | プログラマブルロジックコントローラおよびメインユニット |
JP7316056B2 (ja) * | 2019-02-12 | 2023-07-27 | 株式会社キーエンス | プログラマブルロジックコントローラ及びカメラ入力拡張ユニット |
US10983743B2 (en) * | 2019-03-29 | 2021-04-20 | Keyence Corporation | Programmable display and programmable logic controller system including the same |
-
2021
- 2021-06-08 JP JP2021575079A patent/JP7275327B1/ja active Active
- 2021-06-08 US US18/266,288 patent/US12093012B2/en active Active
- 2021-06-08 WO PCT/JP2021/021786 patent/WO2022259379A1/ja active Application Filing
- 2021-06-08 CN CN202180088693.2A patent/CN116685914A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150213838A1 (en) * | 2014-01-30 | 2015-07-30 | Imperx, Inc. | Network based video event recording system |
JP2018073185A (ja) * | 2016-10-31 | 2018-05-10 | 株式会社小林製作所 | 記録システム、端末装置、サーバ装置、プログラムおよび方法 |
WO2018151202A1 (ja) * | 2017-02-17 | 2018-08-23 | 日本電信電話株式会社 | センシングシステムおよびタイムスタンプ補正方法 |
JP2021082028A (ja) * | 2019-11-19 | 2021-05-27 | 株式会社キーエンス | 安全コントローラおよび履歴表示装置 |
Also Published As
Publication number | Publication date |
---|---|
CN116685914A (zh) | 2023-09-01 |
WO2022259379A1 (ja) | 2022-12-15 |
JPWO2022259379A1 (ja) | 2022-12-15 |
US20240027985A1 (en) | 2024-01-25 |
US12093012B2 (en) | 2024-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6816802B2 (ja) | 画像処理装置、画像処理システム、画像処理方法およびプログラム | |
US10127942B2 (en) | Recording apparatus and recording method | |
US10334242B1 (en) | Test system and test method for audio-video device | |
CN113473086B (zh) | 视频播放的方法、装置、电子设备、智慧高速大屏 | |
TW201740275A (zh) | 錄製與重播滑鼠行為之系統及方法、記錄媒體及程式產品 | |
JP2015136073A (ja) | 記録装置、撮像装置、記録装置の制御方法、及びプログラム | |
JPH11331766A (ja) | 設備ロギング装置 | |
JP7275327B1 (ja) | プログラマブルロジックコントローラ、動画像管理装置、動画像管理システム、動画像管理方法及びプログラム | |
JP5180910B2 (ja) | 映像処理装置 | |
US10755385B2 (en) | Image processing apparatus and recording medium | |
JPWO2015083408A1 (ja) | システム管理装置、システム管理方法、及びプログラム | |
US8824872B2 (en) | Display control apparatus, reproduction system, and recording medium in which display control is performed based on a detected event | |
US7475290B2 (en) | Debugging apparatus and method for information storage apparatus | |
JP2021027579A (ja) | 画像判定装置および画像判定システム | |
JP2018084443A (ja) | 画像処理装置、画像処理システム、画像処理方法、及び画像処理プログラム | |
CN112788332B (zh) | 一种智能电视测试方法以及相关装置 | |
JP7221463B1 (ja) | 制御システム及びプログラマブルロジックコントローラ | |
KR20190090917A (ko) | 비디오 감시 장치 및 비디오 감시 방법 | |
JP2008085626A (ja) | 出力処理装置及びその制御方法 | |
CN115878379A (zh) | 一种数据备份方法、主服务器、备份服务器及存储介质 | |
KR101484783B1 (ko) | 디지털 비디오 레코더와 하드디스크 관리방법 | |
CN112307882A (zh) | 图像判断装置及图像判断系统 | |
KR200444596Y1 (ko) | 디지털 비디오 레코더의 자동 테스트 제어시스템 | |
US8929712B2 (en) | Display for displaying progress | |
JP7013110B1 (ja) | モデル生成装置、異常判定装置、異常判定システム、モデル生成方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220921 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220921 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230203 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230404 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230502 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7275327 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |