JP2020527816A - 機械操作の音声ベースの監視のためのデバイスおよびその操作方法 - Google Patents
機械操作の音声ベースの監視のためのデバイスおよびその操作方法 Download PDFInfo
- Publication number
- JP2020527816A JP2020527816A JP2020523832A JP2020523832A JP2020527816A JP 2020527816 A JP2020527816 A JP 2020527816A JP 2020523832 A JP2020523832 A JP 2020523832A JP 2020523832 A JP2020523832 A JP 2020523832A JP 2020527816 A JP2020527816 A JP 2020527816A
- Authority
- JP
- Japan
- Prior art keywords
- machine
- voice
- sound
- processor
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 8
- 238000004458 analytical method Methods 0.000 claims abstract description 91
- 230000005236 sound signal Effects 0.000 claims abstract description 13
- 238000000034 method Methods 0.000 claims description 34
- 230000002093 peripheral effect Effects 0.000 claims description 5
- 238000001514 detection method Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 claims description 4
- 238000012806 monitoring device Methods 0.000 description 8
- 230000006399 behavior Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 241000282412 Homo Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000012774 diagnostic algorithm Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000013024 troubleshooting Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B23/00—Testing or monitoring of control systems or parts thereof
- G05B23/02—Electric testing or monitoring
- G05B23/0205—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
- G05B23/0218—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults
- G05B23/0243—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults model based detection method, e.g. first-principles knowledge model
- G05B23/0254—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults model based detection method, e.g. first-principles knowledge model based on a quantitative model, e.g. mathematical relationships between inputs and outputs; functions: observer, Kalman filter, residual calculation, Neural Networks
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
- G05B19/406—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by monitoring or safety
- G05B19/4065—Monitoring tool breakage, life or condition
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B23/00—Testing or monitoring of control systems or parts thereof
- G05B23/02—Electric testing or monitoring
- G05B23/0205—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
- G05B23/0259—Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterized by the response to fault detection
- G05B23/0267—Fault communication, e.g. human machine interface [HMI]
- G05B23/027—Alarm generation, e.g. communication protocol; Forms of alarm
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/187—Machine fault alarms
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/37—Measurements
- G05B2219/37214—Detect failed machine component, machine performance degradation
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/37—Measurements
- G05B2219/37337—Noise, acoustic emission, sound
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Automation & Control Theory (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Theoretical Computer Science (AREA)
- Mathematical Physics (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Manufacturing & Machinery (AREA)
- Testing Of Devices, Machine Parts, Or Other Structures Thereof (AREA)
- Testing And Monitoring For Control Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
さらに、当業者であれば図中の要素は簡単のために示されており、必ずしも一定の縮尺で描かれていないかもしれないことを理解するであろう。さらに、デバイスの構成の点で、デバイスの1つの以上の構成要素は、従来の記号によって図面に示されていてもよいし、数字はないように、本開示の実施形態の理解に関連しているだけ特定の詳細を表示することができます本明細書の記載の利益を有する当業者には容易に明らかとなるであろう詳細を図面を不明瞭。
Claims (14)
- 機械であっの動作状態を監視するための装置(10)。
音声検出装置(40)が機械に近接して配置され、マシンからリアルタイムで音声信号の複数を収集するように構成されました。
プロセッサ(20)電気音響検出器(40)に結合され、ように構成される。
マシンに関連付けられた1つ以上の定義済みのサウンド分析モデルを取得します。
1つ以上の事前定義された音響分析モデルに基づいて複数の音響信号を分析する。
解析結果に基づいて機械の動作条件および1つまたは複数の事前定義された音の解析モデルを識別する。
音声分析システム(50)に動作プロセッサ(20)に結合され、音声信号を複数に基づいて1つまたは複数の所定の音解析モデルを更新するように構成される。 - デバイス(10)請求項1に記載のとおりここで音検出装置(40)を含むマイクロフォン。
- 音声分析システム(50)はさらに、1つまたは複数の障害を検出したときに外部のコンピューティングデバイスにリアルタイムの通知を送信するように構成されている、請求項1に記載の装置(10)。
- デバイスは、請求項3に記載されているリアルタイムの通知と、グラフィック、振動、ショートメッセージサービス(SMS)メッセージまたはアラーム音。
- 請求項3に記載の装置は、前記外部計算装置は携帯電話、タブレット、ラップトップまたはコンピュータを含みます。
- デバイス(10)記憶装置をさらに備える、請求項1に記載の装置。(30)と複数の周辺機器(60)。
- デバイス(10)さらにケーシングを含む、請求項1に記載の(70)音声検出デバイスを収容するように構成(40)プロセッサ(20)、サウンド分析システム(50)、メモリ(30)と複数の周辺機器(60)。
- デバイス(10)請求項7において、前記音声検出装置に記載されています(40)はケーシングの外側に配置されています(70)。
- デバイス(10)請求項1において、前記音響分析システムに記載されています(50)さらに、外部ソースから更新されたモデルを追加することによって、音声信号の複数の学習するように構成されています。
- メソッド(100)構成:
音検出装置により、機械からリアルタイムで複数の音信号を収集する。 (110)
プロセスによって、マシンに関連付けられた1つ以上の事前定義済みのサウンド分析モデルを取得します。 (120)
プロセッサにより、1つ以上の事前定義された音響分析モデルに基づいて複数の音響信号を分析する。 (130)
識別、プロセッサによって、解析結果に基づいて、機械の運転条件および1つまたは複数の事前定義された音の解析モデル。(140)
音響分析システムにより、複数の音響信号に基づいて1つ以上の事前定義された音響分析モデルを更新する。(150) - 前記プロセッサにより、前記分析結果および前記1つ以上の所定の音響分析モデルに基づいて前記機械の動作状態を識別することは、前記機械の1つ以上の故障を識別することを含む、請求項10に記載の方法。
- 方法(100)解析結果に基づいて、音の複数の複数のクラスを識別する機械含むにおける1つ以上の障害が、プロセッサにより、識別を特徴とする請求項11に記載の方法。
- メソッド(100)請求項10に記載のであって、前記音声解析システムによって更新、1つ以上の動作パターンとの1つ以上の動作統計を計算する際に一つ以上の学習モデルを更新する音声信号含む複数に基づいて1つまたは複数の学習モデル マシン。
- メソッド(100)請求項10に記載のであって、さらに、1つまたは複数の障害を検出したときに外部のコンピューティングデバイスにリアルタイムの通知を送信することを含みます。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
IN201741024830 | 2017-07-13 | ||
IN201741024830 | 2017-07-13 | ||
PCT/IB2018/055097 WO2019012437A1 (en) | 2017-07-13 | 2018-07-11 | SOUND DEVICE BASED ON MONITORING OF MACHINE USES AND METHOD OF OPERATING SAME |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020527816A true JP2020527816A (ja) | 2020-09-10 |
Family
ID=65001936
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020523832A Pending JP2020527816A (ja) | 2017-07-13 | 2018-07-11 | 機械操作の音声ベースの監視のためのデバイスおよびその操作方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10976730B2 (ja) |
JP (1) | JP2020527816A (ja) |
WO (1) | WO2019012437A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11308545B2 (en) * | 2018-10-12 | 2022-04-19 | Accenture Global Solutions Limited | Automated order troubleshooting |
WO2020153934A1 (en) * | 2019-01-21 | 2020-07-30 | Hewlett-Packard Development Company, L.P. | Fault prediction model training with audio data |
US11568731B2 (en) * | 2019-07-15 | 2023-01-31 | Apple Inc. | Systems and methods for identifying an acoustic source based on observed sound |
US11650551B2 (en) | 2019-10-04 | 2023-05-16 | Mitsubishi Electric Research Laboratories, Inc. | System and method for policy optimization using quasi-Newton trust region method |
CN111007817A (zh) * | 2019-12-11 | 2020-04-14 | 三一重工股份有限公司 | 设备加工工件质量检测方法、装置及计算机可读存储介质 |
CN111933177B (zh) * | 2020-07-23 | 2024-01-09 | 安徽声讯信息技术有限公司 | 基于机器声波识别智能故障分析方法及系统 |
KR102509699B1 (ko) * | 2021-01-14 | 2023-03-14 | 서울대학교 산학협력단 | 사운드 기반 다중 기기 운영 모니터링 방법과 이를 위한 시스템 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0723481A (ja) * | 1993-06-17 | 1995-01-24 | Toshiba Corp | 監視制御装置 |
JP2002140090A (ja) * | 2000-11-02 | 2002-05-17 | Toshiba Corp | 異常監視装置 |
JP2014227272A (ja) * | 2013-05-23 | 2014-12-08 | 東芝エレベータ株式会社 | マンコンベアの異常診断システム |
JP2017090606A (ja) * | 2015-11-09 | 2017-05-25 | 日本電信電話株式会社 | 異常音検出装置、異常音検出学習装置、これらの方法及びプログラム |
US20170178311A1 (en) * | 2015-12-20 | 2017-06-22 | Prophecy Sensors, Llc | Machine fault detection based on a combination of sound capture and on spot feedback |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101472401B1 (ko) | 2009-07-31 | 2014-12-12 | 엘지전자 주식회사 | 가전기기 진단시스템 및 그 진단방법 |
US8964995B2 (en) | 2012-09-07 | 2015-02-24 | International Business Machines Corporation | Acoustic diagnosis and correction system |
US9223299B2 (en) | 2012-11-30 | 2015-12-29 | Discovery Sound Technology, Llc | Equipment sound monitoring system and method |
US20180158288A1 (en) * | 2014-04-10 | 2018-06-07 | Twin Harbor Labs Llc | Methods and apparatus for notifying a user of the operating condition of a household appliance |
US9396632B2 (en) * | 2014-12-05 | 2016-07-19 | Elwha Llc | Detection and classification of abnormal sounds |
GB2545257A (en) | 2015-12-10 | 2017-06-14 | Gm Global Tech Operations Llc | Internal combustion engine comprising a shifting cam system for variable valve actuation |
-
2018
- 2018-07-11 JP JP2020523832A patent/JP2020527816A/ja active Pending
- 2018-07-11 US US16/627,176 patent/US10976730B2/en active Active
- 2018-07-11 WO PCT/IB2018/055097 patent/WO2019012437A1/en active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0723481A (ja) * | 1993-06-17 | 1995-01-24 | Toshiba Corp | 監視制御装置 |
JP2002140090A (ja) * | 2000-11-02 | 2002-05-17 | Toshiba Corp | 異常監視装置 |
JP2014227272A (ja) * | 2013-05-23 | 2014-12-08 | 東芝エレベータ株式会社 | マンコンベアの異常診断システム |
JP2017090606A (ja) * | 2015-11-09 | 2017-05-25 | 日本電信電話株式会社 | 異常音検出装置、異常音検出学習装置、これらの方法及びプログラム |
US20170178311A1 (en) * | 2015-12-20 | 2017-06-22 | Prophecy Sensors, Llc | Machine fault detection based on a combination of sound capture and on spot feedback |
Also Published As
Publication number | Publication date |
---|---|
US10976730B2 (en) | 2021-04-13 |
US20200159201A1 (en) | 2020-05-21 |
WO2019012437A1 (en) | 2019-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2020527816A (ja) | 機械操作の音声ベースの監視のためのデバイスおよびその操作方法 | |
US20200233397A1 (en) | System, method and computer-accessible medium for machine condition monitoring | |
EP3759558B1 (en) | Intelligent audio analytic apparatus (iaaa) and method for space system | |
US10540994B2 (en) | Personal device for hearing degradation monitoring | |
Natesha et al. | Fog-based intelligent machine malfunction monitoring system for industry 4.0 | |
JP7068246B2 (ja) | 異常判定装置、および、異常判定方法 | |
RU2011152611A (ru) | Способ и браузер для уведомления об обновлении | |
US11747405B2 (en) | System and method for audio and vibration based power distribution equipment condition monitoring | |
KR102270347B1 (ko) | 딥러닝 앙상블 모델을 이용한 이상 상황 탐지 장치 및 그 방법 | |
JP4635194B2 (ja) | 異常検知装置 | |
US20160371600A1 (en) | Systems and methods for verification and anomaly detection using a mixture of hidden markov models | |
JPWO2011036815A1 (ja) | モニタリング装置 | |
CN113670434A (zh) | 变电站设备声音异常识别方法、装置和计算机设备 | |
WO2019097412A1 (en) | System and method for multimedia-based performance monitoring of an equipment | |
US10121109B2 (en) | Flexible and self-adaptive classification of received audio measurements in a network environment | |
EP4314734A1 (en) | A system for sensing and recognizing acoustic and/or vibrational anomalies associated with a site to be monitored | |
EP3627357A1 (en) | Sound analysis apparatus, sound analysis method, and non-transitory computer readable storage medium | |
RU2793797C2 (ru) | Интеллектуальное аудиоаналитическое устройство и способ для космического аппарата | |
US20240153526A1 (en) | Audio event analysis, classification, and detection system | |
Alsaif et al. | Predict Drilling Equipment Failure Using AI-Based Sound Waive Analysis Methodology | |
US20240214404A1 (en) | System and Method for Detecting and Preventing Model Inversion Attacks | |
WO2022173041A1 (ja) | 異常音判定システム、異常音判定装置、及びプログラム | |
WO2020100967A1 (ja) | 音状態表示方法、音状態表示装置および音状態表示システム | |
Shaikh et al. | Sound Database of Industrial Machine for Audio Anomaly Detection | |
CN117782302A (zh) | 一种噪声监测方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210524 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220715 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20221014 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230116 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230502 |