JP2019207224A - Acoustic diagnostic device - Google Patents
Acoustic diagnostic device Download PDFInfo
- Publication number
- JP2019207224A JP2019207224A JP2019086283A JP2019086283A JP2019207224A JP 2019207224 A JP2019207224 A JP 2019207224A JP 2019086283 A JP2019086283 A JP 2019086283A JP 2019086283 A JP2019086283 A JP 2019086283A JP 2019207224 A JP2019207224 A JP 2019207224A
- Authority
- JP
- Japan
- Prior art keywords
- image
- unit
- diagnostic
- acoustic
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003745 diagnosis Methods 0.000 claims abstract description 81
- 238000012545 processing Methods 0.000 claims abstract description 42
- 238000004458 analytical method Methods 0.000 claims abstract description 41
- 238000003384 imaging method Methods 0.000 claims description 15
- 230000005236 sound signal Effects 0.000 abstract description 6
- 238000005259 measurement Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 16
- 230000006866 deterioration Effects 0.000 description 10
- 230000002159 abnormal effect Effects 0.000 description 7
- 230000001133 acceleration Effects 0.000 description 4
- 238000001228 spectrum Methods 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Landscapes
- Testing Of Devices, Machine Parts, Or Other Structures Thereof (AREA)
- Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)
Abstract
Description
本発明の実施形態は、音響診断装置に関する。 Embodiments described herein relate generally to an acoustic diagnostic apparatus.
例えば電動機などの回転機器は、運転時間の経過とともに構成部品が劣化する。例えば電動機のロータを支える軸受は、ロータの回転により徐々に劣化し、劣化が進行すると異常振動や異常音を引き起こすことが知られている。従来は、聴感により異常音を検知し、その後に加速度センサによって異常振動を計測、解析することによって電動機の異常部位の診断を行っていた。このとき、人間の聴感で異常音を判定すると基準が一定にならないため、電動機の回転音をマイクロフォンで測定し、所定の指標を算出すれば一定の基準で異常判定を行うことができる。また、加速度センサにより振動を計測すれば、精度良く診断を行うことができるが、電動機に加速度センサを直接取り付ける必要があることから、運転中の電動機の異常を検出する際には安全上のリスクがある。マイクロフォンにより異常音を検知する場合、電動機に対して非接触で音響信号を測定できるため、加速度センサを用いる場合よりも安全面での優位性がある。上記状況を踏まえて、携帯端末のマイクロフォンを利用して機器の状態を診断する装置の提案がなされている。 For example, components of a rotating device such as an electric motor deteriorate as the operating time elapses. For example, it is known that a bearing that supports a rotor of an electric motor gradually deteriorates due to rotation of the rotor, and causes abnormal vibration and abnormal noise as the deterioration progresses. Conventionally, abnormal parts of an electric motor have been diagnosed by detecting abnormal sounds by hearing and then measuring and analyzing abnormal vibrations with an acceleration sensor. At this time, if the abnormal sound is determined by human hearing, the reference does not become constant. Therefore, if the rotation sound of the electric motor is measured with a microphone and a predetermined index is calculated, the abnormality can be determined based on a constant reference. In addition, if vibration is measured by an acceleration sensor, diagnosis can be performed with high accuracy. However, since it is necessary to attach the acceleration sensor directly to the motor, there is a safety risk when detecting abnormalities in the motor during operation. There is. When an abnormal sound is detected by a microphone, an acoustic signal can be measured in a non-contact manner with respect to the electric motor. Therefore, there is an advantage in terms of safety as compared with the case where an acceleration sensor is used. Based on the above situation, an apparatus for diagnosing the state of a device using a microphone of a mobile terminal has been proposed.
従来、現在の測定データと過去の測定データとを比較することにより、機器の現在の状態を判定することが提案されている。現在の測定データと過去の測定データとの比較を行う為には、同一条件でデータを測定することが必要である。特に、マイクロフォンで回転音を測定する場合、電動機からの距離や角度によって測定される音圧レベルが異なるため、電動機に対して以前と同じ位置で測定しないとデータの信頼性が低下する。また、マイクロフォンと電動機の周囲に配置されている物や周囲に居る人間との位置関係によっても、測定データが変化する可能性があった。 Conventionally, it has been proposed to determine the current state of a device by comparing current measurement data with past measurement data. In order to compare current measurement data with past measurement data, it is necessary to measure data under the same conditions. In particular, when rotating sound is measured with a microphone, the sound pressure level measured differs depending on the distance and angle from the motor, and therefore the reliability of data is reduced unless the motor is measured at the same position as before. In addition, there is a possibility that the measurement data may change depending on the positional relationship between the microphone and the objects arranged around the electric motor and the human being in the vicinity.
本発明の実施形態は上記事情を鑑みて成されたものであって、信頼性の高い診断を行う音響診断装置を提供することを目的とする。 Embodiments of the present invention have been made in view of the above circumstances, and an object thereof is to provide an acoustic diagnostic apparatus that performs a highly reliable diagnosis.
実施形態による音響診断装置は、画像を表示可能な表示部と、撮影対象の画像を電気信号である画像信号に変換する撮影部と、周囲環境の音を電気信号である音響信号に変換する集音部と、前記画像信号のデータ、前記音響信号のデータ、および予め撮影した基準画像のデータを記録可能な記憶部と、前記記憶部に記録された基準画像のデータを読み出し、前記基準画像と、前記撮影部にて現在撮影されている診断用画像とを比較表示させる画像処理部と、前記基準画像と前記診断用画像とを表示している際に、利用者の操作に基づいて、前記集音部にて集音された診断用音の前記音響信号のデータを前記記憶部に記録する信号処理部と、前記診断用音を予め設定された解析条件を用いて解析する信号解析部と、を備える。 The acoustic diagnostic apparatus according to the embodiment includes a display unit that can display an image, a photographing unit that converts an image to be photographed into an image signal that is an electrical signal, and a collection that converts sound in the surrounding environment into an acoustic signal that is an electrical signal. A sound unit, a storage unit capable of recording data of the image signal, data of the acoustic signal, and data of a reference image captured in advance, data of the reference image recorded in the storage unit, and reading the reference image The image processing unit for comparing and displaying the diagnostic image currently captured by the imaging unit, and when displaying the reference image and the diagnostic image, based on the operation of the user, A signal processing unit that records data of the acoustic signal of the diagnostic sound collected by the sound collecting unit in the storage unit, and a signal analysis unit that analyzes the diagnostic sound using preset analysis conditions; .
以下、実施形態の音響診断装置について図面を参照して詳細に説明する。
図１は、第１実施形態の音響診断装置の一構成例を概略的に示すブロック図である。 本実施形態の音響診断装置は、携帯端末１を備える。携帯端末１は、例えば、携帯電話、スマートフォン、タブレッド端末などであるが、これらに限定されるものではない。
Hereinafter, an acoustic diagnostic apparatus according to an embodiment will be described in detail with reference to the drawings.
FIG. 1 is a block diagram schematically illustrating a configuration example of the acoustic diagnostic apparatus according to the first embodiment. The acoustic diagnostic apparatus according to the present embodiment includes a mobile terminal 1. The mobile terminal 1 is, for example, a mobile phone, a smartphone, a tab red terminal, or the like, but is not limited thereto.
携帯端末１は、制御部１１と、記憶部１２と、撮影部１３と、集音部１４と、表示部１５と、外部と通信可能に構成された通信部（図示せず）と、を備えている。記憶部１２、撮影部１３、集音部１４、表示部１５、および、通信部は、バス通信線を介して制御部１１と通信可能に接続している。 The portable terminal 1 includes a control unit 11, a storage unit 12, a photographing unit 13, a sound collection unit 14, a display unit 15, and a communication unit (not shown) configured to be able to communicate with the outside. ing. The storage unit 12, the image capturing unit 13, the sound collecting unit 14, the display unit 15, and the communication unit are communicably connected to the control unit 11 via a bus communication line.
記憶部１２は、制御部１１によって実行されるプログラムと、撮影部１３および集音部１４で取得されたデータと、制御部１１にて処理された後のデータと、機器のパラメータ（軸受では軸受パス周波数、ギアボックスでは噛み合い周波数、ポンプでは羽根切り周波数など）と、を保存することができる。なお、携帯端末１は、データを一時的に保存可能であるメモリ（図示せず）を更に備えていてもよい。 The storage unit 12 includes a program executed by the control unit 11, data acquired by the imaging unit 13 and the sound collection unit 14, data after processing by the control unit 11, and device parameters (for bearings, bearings). Pass frequency, meshing frequency for gearboxes, blade cutting frequency for pumps, etc.). The mobile terminal 1 may further include a memory (not shown) that can temporarily store data.
撮影部１３は、画像（静止画および動画）を撮影可能なカメラを備えている。撮影部１３は、例えば、表示部１５の画面が設けられた携帯端末１の一方の面に対向した他方の面に設けられたカメラレンズを備え、このカメラレンズを介して撮像した撮影対象の画像を電気信号である画像信号に変換し、制御部１１および記憶部１２へ供給可能である。 The photographing unit 13 includes a camera capable of photographing images (still images and moving images). The imaging unit 13 includes, for example, a camera lens provided on the other surface opposite to one surface of the mobile terminal 1 on which the screen of the display unit 15 is provided, and an image of an imaging target captured through this camera lens. Can be converted into an image signal which is an electrical signal and supplied to the control unit 11 and the storage unit 12.
集音部１４は、携帯端末１の周囲環境の音による空気振動を電気信号である音響信号に変換する機能を有するマイクロフォンを少なくとも１つ備えている。マイクロフォンは、例えば、携帯端末１の筐体に設けられた孔（図示せず）の近傍に配置され、周囲環境の音に基づく音響信号を、制御部１１へ供給可能である。 The sound collection unit 14 includes at least one microphone having a function of converting air vibration due to sound in the surrounding environment of the mobile terminal 1 into an acoustic signal that is an electrical signal. For example, the microphone is arranged in the vicinity of a hole (not shown) provided in the housing of the mobile terminal 1 and can supply an acoustic signal based on the sound of the surrounding environment to the control unit 11.
表示部１５は、例えば撮影部１３により撮影された画像や、集音部１４により取得した音響信号に基づく音の波形画像等の各種画像を表示可能である。また、表示部１５は、制御部１１にて画像処理された画像、文字、操作ボタンなどを表示することが可能である。また、表示部１５は、撮影部１３で撮影された画像をリアルタイムで表示可能であり、カメラのファインダー機能も兼ねている。ユーザは、表示部１５に表示される画像にて携帯端末１の位置や角度を調整して、撮影する画像の調整をすることができる。
なお、表示部１５は、タッチパネル機能を備えていてもよく、この場合には、ユーザは表示部１５に指やペンなどで接触することにより、各種操作を行うことが可能である。
The display unit 15 can display various images such as an image photographed by the photographing unit 13 and a sound waveform image based on an acoustic signal acquired by the sound collecting unit 14. The display unit 15 can display images, characters, operation buttons, and the like that have been subjected to image processing by the control unit 11. In addition, the display unit 15 can display an image captured by the imaging unit 13 in real time, and also serves as a camera finder function. The user can adjust the image to be captured by adjusting the position and angle of the mobile terminal 1 using the image displayed on the display unit 15.
Note that the display unit 15 may have a touch panel function. In this case, the user can perform various operations by touching the display unit 15 with a finger or a pen.
制御部１１は、携帯端末１に含まれる複数の構成の動作を制御する。制御部１１は、例えば、ＣＰＵ（central processing unit）やＭＰＵ（micro processing unit）などのプロセッサを少なくとも１つ備えている。制御部１１は、記憶部１２に記憶されたプログラムを読み出して実行し、後述する各種動作をソフトウエアにより実現するように構成され得る。 The control unit 11 controls operations of a plurality of configurations included in the mobile terminal 1. The control unit 11 includes at least one processor such as a central processing unit (CPU) or a micro processing unit (MPU). The control unit 11 can be configured to read and execute a program stored in the storage unit 12 and realize various operations described later by software.
制御部１１は、信号処理部１１１と、信号解析部１１２と、診断部１１３と、画像処理部１１４と、を備えている。
信号処理部１１１は、撮影部１３にて撮影された画像を電気信号に変換した画像信号と、集音部１４にて集音された音を電気信号に変換した音響信号とを受信し、デジタルデータに変換して、記憶部１２に電子ファイルとして保存する。
The control unit 11 includes a signal processing unit 111, a signal analysis unit 112, a diagnosis unit 113, and an image processing unit 114.
The signal processing unit 111 receives an image signal obtained by converting an image photographed by the photographing unit 13 into an electric signal, and an acoustic signal obtained by converting the sound collected by the sound collecting unit 14 into an electric signal, and is digitally The data is converted into data and stored in the storage unit 12 as an electronic file.
信号解析部１１２は、携帯端末１のメモリ上にあるデジタルデータ、あるいは、記憶部１２に保存されているデジタルデータを、予め設定された解析条件を用いて、所定の解析方法に基づいて解析する。信号解析部１１２は、たとえば機器の状態を表す兆候パラメータの算出や、高速フーリエ変換による周波数スペクトルの算出などの解析を行うことができる。 The signal analysis unit 112 analyzes the digital data on the memory of the mobile terminal 1 or the digital data stored in the storage unit 12 based on a predetermined analysis method using preset analysis conditions. . The signal analysis unit 112 can perform analysis such as calculation of a sign parameter representing the state of the device, calculation of a frequency spectrum by fast Fourier transform, and the like.
例えば、信号解析部１１２は、予め設定された特定周波数の信号の判断レベルと診断対象である音響信号とを比較する。さらに、信号解析部１１２は、機械固有のパラメータ（軸受では軸受パス周波数、ギアボックスでは噛み合い周波数、ポンプでは羽根切り周波数など）のレベルから異常の有無を判断することができる。 For example, the signal analysis unit 112 compares a predetermined determination level of a signal having a specific frequency with an acoustic signal to be diagnosed. Further, the signal analysis unit 112 can determine the presence or absence of abnormality from the level of machine-specific parameters (bearing path frequency for bearings, meshing frequency for gearboxes, blade cutting frequency for pumps, etc.).
診断部１１３は、信号解析部１１２が算出した解析結果に基づいて、所定の判定基準にしたがって機器の状態を診断する。なお、信号解析部１１２での解析結果に基づいて、利用者が劣化の診断を行うことが可能な場合には、診断部１１３は省略しても構わない。 The diagnosis unit 113 diagnoses the state of the device according to a predetermined criterion based on the analysis result calculated by the signal analysis unit 112. If the user can diagnose deterioration based on the analysis result of the signal analysis unit 112, the diagnosis unit 113 may be omitted.
画像処理部１１４は、記憶部１２に保存されている画像信号のデータや、メモリに一次保存されている画像信号のデータを用いて所定の画像処理を行った後、表示可能な画像信号として表示部１５へ出力可能である。このとき、画像処理部１１４は、記憶部１２に記録された画像のデータを読み出し、利用者が複数の画像を比較可能となるように表示させる（比較表示させる）ことができる。 The image processing unit 114 performs predetermined image processing using the image signal data stored in the storage unit 12 or the image signal data temporarily stored in the memory, and then displays the image signal as a displayable image signal. The data can be output to the unit 15. At this time, the image processing unit 114 can read out the image data recorded in the storage unit 12 and display (comparison display) so that the user can compare a plurality of images.
画像処理部１１４は、例えば、表示部１５に複数の画像を並べて比較表示するように画像信号を生成可能であり、複数の画像を重ねて表示部１５に比較表示するように画像信号を生成可能であり、比較表示させる画像と文字や操作ボタンなどの画像とを組み合わせて表示部１５に表示するように画像信号を生成可能である。例えば、画像処理部１１４は、撮影部１３により撮影された複数の画像の一つを透過させるように処理し、他の画像上に重ねて表示させる画像信号を生成可能である。 For example, the image processing unit 114 can generate an image signal so that a plurality of images are compared and displayed on the display unit 15, and can generate an image signal so that a plurality of images are superimposed and displayed on the display unit 15. Thus, it is possible to generate an image signal so that the image to be displayed for comparison and the image such as characters and operation buttons are combined and displayed on the display unit 15. For example, the image processing unit 114 can process one of a plurality of images photographed by the photographing unit 13 so as to be transmitted, and can generate an image signal to be displayed on another image.
次に、携帯端末１を用いて診断対象機器が動作している際の劣化診断手順について説明する。ここでは、診断対象機器が電動機である場合を一例として説明する。
図２は、劣化診断を行う際の、一実施形態の音響診断装置における表示の一例を概略的に示す図である。
Next, a deterioration diagnosis procedure when the diagnosis target device is operating using the mobile terminal 1 will be described. Here, a case where the diagnosis target device is an electric motor will be described as an example.
FIG. 2 is a diagram schematically illustrating an example of display in the acoustic diagnostic apparatus according to the embodiment when performing deterioration diagnosis.
最初に、利用者は、携帯端末１にて診断対象機器の周囲の音を測定すると同時に、音を測定したときの携帯端末１の位置にて画像を撮影する。このときに測定する音と撮影した画像は、後に、診断対象機器を診断する際に測定される周囲の音および撮影される画像と比較される基準音および基準画像となる。 First, the user measures the sound around the diagnosis target device with the mobile terminal 1 and simultaneously takes an image at the position of the mobile terminal 1 when the sound is measured. The sound to be measured at this time and the captured image become a reference sound and a reference image to be compared with the ambient sound and the captured image to be measured later when diagnosing the diagnosis target device.
利用者は、測定を開始する際に、例えば表示部１５のタッチパネルを操作して、所定のアプリケーションを起動する。 When starting the measurement, the user operates a touch panel of the display unit 15 to start a predetermined application, for example.
所定のアプリケーションが起動されると、制御部１１は、撮影部１３および集音部１４により画像信号および音響信号のデータの取得を開始するとともに、撮影部１３が撮影した画像と集音部１４が集音した音の波形画像ＳＤ１とを、表示部１５に表示させる。これにより、利用者は、診断対象機器が動作しているときの周囲環境の音を視覚的に確認するとともに、撮影部１３および集音部１４を用いた診断が可能な状態であることを確認することができる。 When a predetermined application is activated, the control unit 11 starts acquisition of image signal and sound signal data by the imaging unit 13 and the sound collection unit 14, and the image captured by the imaging unit 13 and the sound collection unit 14 The waveform image SD1 of the collected sound is displayed on the display unit 15. Thus, the user visually confirms the sound of the surrounding environment when the diagnosis target device is operating, and confirms that the diagnosis using the photographing unit 13 and the sound collecting unit 14 is possible. can do.
なお、この時点では、取得したデータは記憶部１２に保存されなくてもよく、例えば携帯端末１のメモリに画像情報および音響情報が一時的に記録されてもよい。また、集音した音の波形画像ＳＤ１の表示は必須ではなく、省略しても構わない。 At this time, the acquired data may not be stored in the storage unit 12, and for example, image information and acoustic information may be temporarily recorded in the memory of the mobile terminal 1. Moreover, the display of the waveform image SD1 of the collected sound is not essential and may be omitted.
続いて、利用者は、撮影部１３および集音部１４を用いた診断が可能な状態であることを確認できたら、撮影部１３により撮影された画像のデータを記憶部１２に保存するとともに、集音部１４により集音した周囲の音のデータを記憶部１２に保存するよう操作を行う。この操作は、表示部１５のタッチパネルを用いて行われてもよく、携帯端末１に設けられた操作ボタン２を用いて行われてもよい。画像処理部１１４は、「保存」ボタンや、操作ボタン２を押して保存を開始することを利用者に促す文字などを表示部１５に表示しても構わない。 Subsequently, when the user can confirm that the diagnosis using the photographing unit 13 and the sound collecting unit 14 is possible, the user saves the data of the image photographed by the photographing unit 13 in the storage unit 12, and An operation is performed so as to save the data of surrounding sounds collected by the sound collection unit 14 in the storage unit 12. This operation may be performed using the touch panel of the display unit 15, or may be performed using the operation button 2 provided on the mobile terminal 1. The image processing unit 114 may display, on the display unit 15, a “save” button, characters that prompt the user to press the operation button 2 to start saving, and the like.
利用者がデータを保存する操作を行うと、信号処理部１１１は、集音部１４により所定時間集音された音の電気信号（音響信号）のデータと、撮影部１３により撮影された画像（例えば静止画像）の電気信号（画像信号）のデータとを測定日時により紐づけて記憶部１２に保存する。すなわち、本実施形態では、信号処理部１１１は、利用者の共通の操作に基づいて、基準画像を記憶部１２に記録するとともに、集音部１４により得られた所定期間の基準音を記憶部１２に記録する。 When the user performs an operation to save data, the signal processing unit 111 performs data collection of sound electrical signals (acoustic signals) collected by the sound collection unit 14 for a predetermined period of time and an image captured by the imaging unit 13 ( For example, the data of an electrical signal (image signal) of a still image) is associated with the measurement date and stored in the storage unit 12. That is, in the present embodiment, the signal processing unit 111 records the reference image in the storage unit 12 based on the common operation of the user, and stores the reference sound for a predetermined period obtained by the sound collection unit 14. 12 is recorded.
なお、記憶部１２に保存される画像（静止画像）が撮影される日時は、例えば、集音部１４により集音された周囲の音が記録される期間に含まれていてもよい。また、画像を撮影する際にカメラのシャッタ音が発せられる場合には、シャッタ音が含まれないように、画像を撮影するタイミングとずらして周囲の音の音響信号のデータを記録してもよい。記憶部１２には、画像が撮影された日時により音響信号のデータと画像信号のデータとを紐づけて保存してもよく、周囲の音の集音を開始した日時や、集音を終了した日時にて音響信号と画像信号とを紐づけて保存してもよい。 Note that the date and time when the image (still image) stored in the storage unit 12 is captured may be included in a period in which ambient sounds collected by the sound collection unit 14 are recorded, for example. In addition, when a shutter sound of the camera is emitted when taking an image, the sound signal data of surrounding sounds may be recorded at a different timing from the image taking time so that the shutter sound is not included. . The storage unit 12 may store the sound signal data and the image signal data in association with the date and time when the image was taken. The date and time when the sound collection of the surrounding sounds was started and the sound collection was terminated. The sound signal and the image signal may be linked and stored at the date and time.
以上のように、診断対象機器の周囲の音と画像とに測定日時を付すことにより、撮影された画像と集音された音とのデータを紐づけて記憶部１２に保存し、周囲の音を測定したときの携帯端末１の位置を保存することができる。 As described above, by attaching the measurement date and time to the sound and image around the diagnosis target device, the data of the photographed image and the collected sound are linked and stored in the storage unit 12, and the surrounding sound is stored. It is possible to store the position of the mobile terminal 1 when measuring.
信号解析部１１２は、記憶部１２に保存された音響信号のデータを所定の解析方法、たとえば機器の状態を表す兆候パラメータの算出や、高速フーリエ変換による周波数スペクトルの算出などの解析を行う。信号解析部１１２は、解析結果と、診断対象機器および測定日時等とを紐づけて、記憶部１２へ記録する。 The signal analysis unit 112 analyzes the data of the acoustic signal stored in the storage unit 12 by a predetermined analysis method, for example, calculation of a sign parameter indicating the state of the device, calculation of a frequency spectrum by fast Fourier transform, and the like. The signal analysis unit 112 associates the analysis result with the diagnosis target device, the measurement date and time, and records the result in the storage unit 12.
続いて、利用者は、異なる日時にて同一の診断対象機器の周囲の音を再度測定し、劣化の診断を行う。
図３は、劣化診断を行う際の、一実施形態の音響診断装置における表示の他の例を概略的に示す図である。
Subsequently, the user again measures sounds around the same diagnosis target device at different dates and performs a diagnosis of deterioration.
FIG. 3 is a diagram schematically illustrating another example of display in the acoustic diagnostic apparatus according to the embodiment when performing deterioration diagnosis.
利用者は、診断を開始する際に、例えば表示部１５のタッチパネルを操作して、所定のアプリケーションを起動する。
所定のアプリケーションが起動されると、制御部１１は、撮影部１３および集音部１４によりデータの取得を開始するとともに、画像処理部１１４は、撮影部１３が撮影した画像と集音部１４が集音した音の波形画像ＳＤ２とを表示部１５に表示させる画像信号を生成して表示部１５へ出力する。
When starting the diagnosis, the user operates a touch panel of the display unit 15 to start a predetermined application, for example.
When a predetermined application is activated, the control unit 11 starts data acquisition by the photographing unit 13 and the sound collecting unit 14, and the image processing unit 114 is configured so that the image collected by the photographing unit 13 and the sound collecting unit 14 An image signal for displaying the collected sound waveform image SD <b> 2 on the display unit 15 is generated and output to the display unit 15.
例えば、利用者は表示部１５のタッチパネルを操作して、記憶部１２に記録されたデータの中から、今回診断を行う機器を指定することができる。
診断対象機器が指定されると、画像処理部１１４は、以前撮影された診断対象機器の基準画像データを記憶部１２から読み出し、基準画像Ｐ１と現在撮影している画像（診断用画像）Ｐ２との少なくともいずれか一方を、アルファ値を所定の値に設定した透過画像とし、基準画像Ｐ１と診断用画像Ｐ２とを重ねて表示部１５に表示させる。
For example, the user can operate the touch panel of the display unit 15 and specify the device to be diagnosed this time from the data recorded in the storage unit 12.
When the diagnosis target device is designated, the image processing unit 114 reads the reference image data of the diagnosis target device previously captured from the storage unit 12, and the reference image P1 and the currently captured image (diagnosis image) P2 At least one of these is a transmission image with an alpha value set to a predetermined value, and the reference image P1 and the diagnostic image P2 are superimposed and displayed on the display unit 15.
例えば、画像処理部１１４は、撮影部１３が現在撮影している診断用画像Ｐ２のアルファ値を所定の値に設定して透過させた透過画像として、表示部１５にて、記憶部１２から読み出した基準画像Ｐ１上に診断用画像Ｐ２を重ねた画像を表示させる。 For example, the image processing unit 114 reads out from the storage unit 12 in the display unit 15 as a transmission image obtained by setting the alpha value of the diagnostic image P2 currently captured by the imaging unit 13 to a predetermined value and transmitting the image. An image obtained by superimposing the diagnostic image P2 on the reference image P1 is displayed.
利用者は、過去の基準画像Ｐ１と、撮影部１３が現在撮影している診断用画像Ｐ２とを比較して、基準画像Ｐ１と診断用画像Ｐ２とに写された物の位置が一致するように、携帯端末１の位置や角度を調整することにより、基準画像Ｐ１を撮影したときの携帯端末１（すなわちマイクロフォン）の位置を診断時に再現することが可能となる。 The user compares the past reference image P1 with the diagnostic image P2 currently photographed by the photographing unit 13 so that the positions of the objects copied in the reference image P1 and the diagnostic image P2 match. In addition, by adjusting the position and angle of the mobile terminal 1, the position of the mobile terminal 1 (that is, the microphone) when the reference image P1 is captured can be reproduced at the time of diagnosis.
また、基準画像Ｐ１と診断用画像Ｐ２とには、診断対象機器の周囲に配置されている物も含まれるため、例えば、同じ機種の機器が複数設置されている施設等において、診断対象機器を取り違えることを回避することが可能となる。また、診断対象機器の周囲に配置されている物の位置等の周囲環境の変化による影響を考慮した診断も可能となる。 In addition, since the reference image P1 and the diagnostic image P2 include objects arranged around the diagnosis target device, for example, in a facility where a plurality of devices of the same model are installed, It is possible to avoid mistakes. In addition, it is possible to perform diagnosis in consideration of the influence of changes in the surrounding environment such as the positions of objects arranged around the diagnosis target device.
携帯端末１の位置の調整が完了した後、利用者は、例えば表示部１５のタッチパネルや操作ボタン２を操作して、集音部１４にて集音された音（診断用音）の音響信号のデジタルデータを記憶部１２に保存する。このとき記憶部１２に保存された音響信号が診断対象となる。 After the adjustment of the position of the mobile terminal 1 is completed, the user operates, for example, the touch panel or the operation button 2 of the display unit 15 to generate an acoustic signal of sound collected by the sound collecting unit 14 (sound for diagnosis). Are stored in the storage unit 12. At this time, the acoustic signal stored in the storage unit 12 becomes a diagnosis target.
なお、診断対象の音響信号を記憶部１２に保存するタイミングで、同時に撮影部１３にて撮影された画像信号のデジタルデータを記憶部１２に保存してもよい。この場合には、信号処理部１１１は、集音部１４により所定時間集音された音響信号と、撮影部１３により撮影された画像信号とを測定日時により紐づけて記憶部１２に保存する。 Note that the digital data of the image signal captured by the imaging unit 13 may be stored in the storage unit 12 at the same time that the acoustic signal to be diagnosed is stored in the storage unit 12. In this case, the signal processing unit 111 associates the acoustic signal collected by the sound collection unit 14 for a predetermined time and the image signal photographed by the photographing unit 13 with the measurement date and time and stores them in the storage unit 12.
信号解析部１１２は、記憶部１２に保存された音響信号のデジタルデータを所定の解析方法、たとえば機器の状態を表す兆候パラメータの算出や、高速フーリエ変換による周波数スペクトルの算出などの解析を行う。信号解析部１１２は、解析結果と、診断対象機器および測定日時等とを紐づけて、記憶部１２へ記録する。 The signal analysis unit 112 analyzes the digital data of the acoustic signal stored in the storage unit 12 by a predetermined analysis method, for example, calculation of a sign parameter indicating the state of the device, calculation of a frequency spectrum by fast Fourier transform, and the like. The signal analysis unit 112 associates the analysis result with the diagnosis target device, the measurement date and time, and records the result in the storage unit 12.
診断部１１３は、信号解析部１１２の解析結果を用いて、所定の診断基準にしたがって機器の状態を診断する。診断部１１３は、例えば、診断対象機器の兆候パラメータが所定の範囲に含まれているか否かにより機器の状態を判断することができ、過去の兆候パラメータと現在の兆候パラメータとを比較して機器の状態を判断することも可能である。 The diagnosis unit 113 uses the analysis result of the signal analysis unit 112 to diagnose the state of the device according to a predetermined diagnosis standard. The diagnosis unit 113 can determine the state of the device based on, for example, whether or not the sign parameter of the diagnosis target device is included in a predetermined range, and compares the past sign parameter with the current sign parameter to check the device state. It is also possible to determine the state of
図４は、複数の測定日にて測定された音響信号に基づく診断対象機器の過去の兆候パラメータの表示例を示す図である。
信号解析部１１２にて解析が終了すると、画像処理部１１４は、診断対象機器について記憶部１２に記憶された過去の兆候パラメータと、今回の兆候パラメータとを読み出して、例えば測定日時に対応した兆候パラメータをプロットした画像を表示部１５に表示させることができる。また、画像処理部１１４は、解析結果と合わせて診断部１１３での診断結果を表示させてもよい。
利用者は、表示部１５に表示された解析結果や診断結果に基づいて、診断対象機器の状態を判断することができる。
FIG. 4 is a diagram illustrating a display example of past sign parameters of a diagnosis target device based on acoustic signals measured on a plurality of measurement days.
When the analysis is completed in the signal analysis unit 112, the image processing unit 114 reads the past sign parameter and the present sign parameter stored in the storage unit 12 for the diagnosis target device, for example, a sign corresponding to the measurement date and time. An image in which the parameters are plotted can be displayed on the display unit 15. Further, the image processing unit 114 may display the diagnosis result in the diagnosis unit 113 together with the analysis result.
The user can determine the state of the diagnosis target device based on the analysis result and the diagnosis result displayed on the display unit 15.
携帯端末１を用いて動作している機器の動作音により機器の劣化を診断するとき、携帯端末１と機器との距離や角度によって測定される音が異なるため、基準となる音を測定したときの機器と携帯端末１との位置関係を再現する必要がある。 When diagnosing device degradation based on the operating sound of a device that is operating using the mobile terminal 1, the sound that is measured depends on the distance or angle between the mobile terminal 1 and the device, so that the reference sound is measured It is necessary to reproduce the positional relationship between the device and the portable terminal 1.
本実施形態の音響診断装置では、上記のように表示部１５に表示された画像の位置合わせを行うことにより、過去に診断対象機器の周囲の音を測定したときの携帯端末１の位置を再現することが可能となる。 In the acoustic diagnostic apparatus of the present embodiment, the position of the mobile terminal 1 when the sound around the diagnosis target device has been measured in the past is reproduced by aligning the images displayed on the display unit 15 as described above. It becomes possible to do.
また、携帯端末１にて測定される音は、機器が設置されている環境の影響を受けるため、比較する過去の音を測定したときの機器の周囲に配置されている物と携帯端末１との位置関係を再現することにより、より信頼性の高い診断を行うことが可能となる。
また、本実施形態では、音を測定するときの利用者の位置ではなく、携帯端末１の位置を再現することができるため、基準となる音を測定したときと診断を行うときとで携帯端末１の利用者が異なる場合であっても、利用者の体格などに依存せずに正確な位置合わせを行うことが可能である。
Moreover, since the sound measured by the portable terminal 1 is influenced by the environment where the device is installed, the portable terminal 1 and the objects arranged around the device when the past sound to be compared is measured. By reproducing the positional relationship, it is possible to perform a more reliable diagnosis.
In this embodiment, since the position of the mobile terminal 1 can be reproduced instead of the position of the user when measuring the sound, the mobile terminal is used when the reference sound is measured and when the diagnosis is performed. Even when one user is different, accurate alignment can be performed without depending on the physique of the user.
すなわち、本実施形態によれば、信頼性の高い診断を行う音響診断装置を提供することができる。
なお、上記の実施形態では、携帯端末１の位置を調整するために、過去に撮影した基準画像Ｐ１と現在撮影されている診断用画像Ｐ２との少なくとも一方を透過画像として、表示部１５に表示していたが、他の画像処理を行っても構わない。
That is, according to the present embodiment, an acoustic diagnostic apparatus that performs highly reliable diagnosis can be provided.
In the above embodiment, in order to adjust the position of the mobile terminal 1, at least one of the reference image P1 captured in the past and the diagnostic image P2 currently captured is displayed on the display unit 15 as a transmission image. However, other image processing may be performed.
例えば、画像処理部１１４は、基準画像Ｐ１と診断用画像Ｐ２とを比較表示する際に、基準画像Ｐ１又は診断用画像Ｐ２の少なくとも一方をエッジ抽出した画像としてもよく、又は、元の画像のエッジ部分を抽出したものを更に二値化処理を行った画像としてもよい。 For example, when comparing and displaying the reference image P1 and the diagnostic image P2, the image processing unit 114 may use an edge-extracted image of at least one of the reference image P1 or the diagnostic image P2, or An image obtained by further binarizing the image obtained by extracting the edge portion may be used.
図５は、診断対象機器を含む画像の画像処理の一例ついて説明するための図である。 画像処理部１１４は、例えば図５に示すように、過去に撮影された基準画像Ｐ１のエッジ情報を二値化処理した画像Ｐ１２を生成する。画像Ｐ１２は、例えばエッジ以外の部分は透明であってもよく、診断用画像Ｐ２と重ねたときにエッジが強調されるように、エッジのラインが太く強調されていてもよく、エッジラインが赤色や黄色など白黒以外の色で表示されるものであってもよい。 FIG. 5 is a diagram for describing an example of image processing of an image including a diagnosis target device. For example, as shown in FIG. 5, the image processing unit 114 generates an image P12 obtained by binarizing the edge information of the reference image P1 captured in the past. For example, the image P12 may be transparent except for the edge, and the edge line may be emphasized thickly so that the edge is emphasized when superimposed on the diagnostic image P2, and the edge line is red. It may be displayed in a color other than black and white such as yellow or yellow.
利用者は、現在撮影されている画像Ｐ２にエッジのみの画像Ｐ１２を重ねた状態の表示部１５を見ながら携帯端末１の位置や角度を調整することにより、容易に両者を一致させることが可能となる。
すなわち、利用者は、携帯端末１が過去に音響信号を測定したときの位置を容易に再現することが可能となり、信頼性の高い診断を実現することができる。
The user can easily match the two by matching the position and angle of the mobile terminal 1 while viewing the display unit 15 in which the edge-only image P12 is superimposed on the currently captured image P2. It becomes.
That is, the user can easily reproduce the position when the mobile terminal 1 measured the acoustic signal in the past, and can realize a highly reliable diagnosis.
次に、第２実施形態に係る音響診断装置について図面を参照して詳細に説明する。
図６は、第２実施形態の音響診断装置の一構成例を概略的に示すブロック図である。 本実施形態の音響診断装置は、制御部１１が、画像情報類似性算出部１１５を更に備えている。
Next, the acoustic diagnostic apparatus according to the second embodiment will be described in detail with reference to the drawings.
FIG. 6 is a block diagram schematically illustrating a configuration example of the acoustic diagnostic apparatus according to the second embodiment. In the acoustic diagnostic apparatus of the present embodiment, the control unit 11 further includes an image information similarity calculation unit 115.
画像情報類似性算出部１１５は、例えば、基準画像と診断用画像とのデータを用いて、基準画像と診断用画像との相関関係を算出することにより、画像情報の類似性を算出することができる。 For example, the image information similarity calculation unit 115 may calculate the similarity between the image information by calculating the correlation between the reference image and the diagnostic image using data of the reference image and the diagnostic image. it can.
相関係数は、例えば、基準画像のデータから得た１次元のベクトルＸと、診断用画像のデータから得た１次元のベクトルＹとを用いて、以下の式で計算することができる。なお、ベクトルＸとベクトルＹとは、例えば、２次元の画像に基づくデータを所定の規則に基づいて１次元のデータに変換したものである。 The correlation coefficient can be calculated by the following equation using, for example, a one-dimensional vector X obtained from the reference image data and a one-dimensional vector Y obtained from the diagnostic image data. The vector X and the vector Y are, for example, data obtained by converting data based on a two-dimensional image into one-dimensional data based on a predetermined rule.
ベクトルＸ =（ｘ1,ｘ2,ｘ3…ｘn）ベクトルＹ =（ｙ1,ｙ2,ｙ3…ｙn）
また、画像情報類似性算出部１１５は、例えば、基準画像と診断用画像とのデータを用いて、内積を算出することにより、基準画像と診断用画像との類似性を算出することができる。
内積は、基準画像のデータから得たベクトルＸ´と診断用画像のデータから得たベクトルＹ´とを用いて、以下の式で計算することができる。
In addition, the image information similarity calculation unit 115 can calculate the similarity between the reference image and the diagnostic image by calculating the inner product using data of the reference image and the diagnostic image, for example.
The inner product can be calculated by the following equation using the vector X ′ obtained from the reference image data and the vector Y ′ obtained from the diagnostic image data.
ベクトルＸ=（ｘ1,ｘ2,ｘ3…ｘn）ベクトルＹ=（ｙ1,ｙ2,ｙ3…ｙn）を正規化して
図７は、複数の測定日にて測定されたデータに基づく診断対象機器の兆候パラメータと、画像情報類似性を示す指標としての内積との表示例である。
図７では測定日Ｂにおける内積値が低いため、他の測定日と比較して測定位置の再現が不十分であると判断できる。
FIG. 7 is a display example of a sign parameter of a diagnosis target device based on data measured on a plurality of measurement dates and an inner product as an index indicating image information similarity.
In FIG. 7, since the inner product value on the measurement date B is low, it can be determined that the reproduction of the measurement position is insufficient compared to other measurement dates.
したがって、利用者は、画像情報類似性が低い測定データは、測定位置の再現が不十分であるため、診断対象とするデータからから除くことができる。また、信号解析部１１２および診断部１１３は、画像情報類似性が所定の範囲外にある測定データを解析および診断の対象から除外してもよく、今回診断時に撮影した画像の画像情報類似性が低い場合には、今回の測定を最初からやり直すように処理を進めてもよい。
本実施形態の音響診断装置は、上記以外は上述の第１実施形態と同様である。すなわち、本実施形態によれば、信頼性の高い診断を行う音響診断装置を提供することができる。
Therefore, the user can exclude measurement data with low image information similarity from the data to be diagnosed because reproduction of the measurement position is insufficient. In addition, the signal analysis unit 112 and the diagnosis unit 113 may exclude measurement data whose image information similarity is outside a predetermined range from the analysis and diagnosis targets, and the image information similarity of the image captured at the time of the current diagnosis may be excluded. If it is low, the process may be advanced so that the current measurement is repeated from the beginning.
The acoustic diagnostic apparatus of this embodiment is the same as that of the above-described first embodiment except for the above. That is, according to the present embodiment, an acoustic diagnostic apparatus that performs highly reliable diagnosis can be provided.
次に、第３実施形態に係る音響診断装置について図面を参照して詳細に説明する。
本実施形態では、診断対象音を記録する際の音響診断装置の動作が上述の第１実施形態と異なっている。
Next, an acoustic diagnostic apparatus according to the third embodiment will be described in detail with reference to the drawings.
In the present embodiment, the operation of the acoustic diagnostic apparatus when recording the diagnosis target sound is different from that in the first embodiment.
図８は、第３実施形態の音響診断装置にて劣化診断を行う際の、表示の一例を概略的に示す図である。
利用者は、診断を開始する際に、例えば表示部１５のタッチパネルを操作して、所定のアプリケーションを起動する。
FIG. 8 is a diagram schematically illustrating an example of display when performing deterioration diagnosis in the acoustic diagnosis apparatus according to the third embodiment.
When starting the diagnosis, the user operates a touch panel of the display unit 15 to start a predetermined application, for example.
所定のアプリケーションが起動されると、制御部１１は、撮影部１３および集音部１４によりデータの取得を開始するとともに、画像処理部１１４は、撮影部１３が撮影した画像と集音部１４が集音した音の波形画像ＳＤ２とを表示部１５に表示させる画像信号を生成して表示部１５へ出力する。 When a predetermined application is activated, the control unit 11 starts data acquisition by the photographing unit 13 and the sound collecting unit 14, and the image processing unit 114 is configured so that the image collected by the photographing unit 13 and the sound collecting unit 14 An image signal for displaying the collected sound waveform image SD <b> 2 on the display unit 15 is generated and output to the display unit 15.
例えば、利用者は表示部１５のタッチパネルを操作して、記憶部１２に記録されたデータの中から、今回診断を行う機器を指定することができる。
診断対象機器が指定されると、画像処理部１１４は、以前撮影された診断対象機器の基準画像データを記憶部１２から読み出し、基準画像Ｐ１と現在撮影している画像（診断用画像）Ｐ２とを、並べて表示部１５に比較表示させる。
For example, the user can operate the touch panel of the display unit 15 and specify the device to be diagnosed this time from the data recorded in the storage unit 12.
When the diagnosis target device is designated, the image processing unit 114 reads the reference image data of the diagnosis target device previously captured from the storage unit 12, and the reference image P1 and the currently captured image (diagnosis image) P2 Are displayed side by side on the display unit 15 for comparison.
このとき、診断用画像Ｐ２は、基準画像Ｐ１を撮影したときとカメラのズームを同じ倍率に設定して撮影されることが望ましく、基準画像Ｐ１と診断用画像Ｐ２とが表示されるエリアは同じ大きさであることが望ましい。また、基準画像Ｐ１と診断用画像Ｐ２との間には他の画像が表示されないことが望ましい。 At this time, it is desirable that the diagnostic image P2 be captured with the camera zoom set to the same magnification as when the reference image P1 was captured, and the area where the reference image P1 and the diagnostic image P2 are displayed is the same. The size is desirable. Further, it is desirable that no other image is displayed between the reference image P1 and the diagnostic image P2.
利用者は、過去の基準画像Ｐ１と、撮影部１３が現在撮影している診断用画像Ｐ２とを比較して、基準画像Ｐ１と診断用画像Ｐ２とに写された物の位置が一致するように、携帯端末１の位置や角度を調整することにより、基準画像Ｐ１を撮影したときの携帯端末１（すなわちマイクロフォン）の位置を診断時に再現することが可能となる。 The user compares the past reference image P1 with the diagnostic image P2 currently photographed by the photographing unit 13 so that the positions of the objects copied in the reference image P1 and the diagnostic image P2 match. In addition, by adjusting the position and angle of the mobile terminal 1, the position of the mobile terminal 1 (that is, the microphone) when the reference image P1 is captured can be reproduced at the time of diagnosis.
また、基準画像Ｐ１と診断用画像Ｐ２とには、診断対象機器の周囲に配置されている物も含まれるため、例えば、同じ機種の機器が複数設置されている施設等において、診断対象機器を取り違えることを回避することが可能となる。また、診断対象機器の周囲に配置されている物の位置等の周囲環境の変化による影響を考慮した診断も可能となる。 In addition, since the reference image P1 and the diagnostic image P2 include objects arranged around the diagnosis target device, for example, in a facility where a plurality of devices of the same model are installed, It is possible to avoid mistakes. In addition, it is possible to perform diagnosis in consideration of the influence of changes in the surrounding environment such as the positions of objects arranged around the diagnosis target device.
携帯端末１の位置の調整が完了した後、利用者は、例えば表示部１５のタッチパネルや操作ボタン２を操作して、集音部１４にて集音された音（診断用音）の音響信号のデジタルデータを記憶部１２に保存する。このとき記憶部１２に保存された音響信号が診断対象となる。 After the adjustment of the position of the mobile terminal 1 is completed, the user operates, for example, the touch panel or the operation button 2 of the display unit 15 to generate an acoustic signal of sound collected by the sound collecting unit 14 (sound for diagnosis). Are stored in the storage unit 12. At this time, the acoustic signal stored in the storage unit 12 becomes a diagnosis target.
なお、診断対象の音響信号を記憶部１２に保存するタイミングで、同時に撮影部１３にて撮影された画像信号のデジタルデータを記憶部１２に保存してもよい。この場合には、信号処理部１１１は、集音部１４により所定時間集音された音響信号と、撮影部１３により撮影された画像信号とを測定日時により紐づけて記憶部１２に保存する。 Note that the digital data of the image signal captured by the imaging unit 13 may be stored in the storage unit 12 at the same time that the acoustic signal to be diagnosed is stored in the storage unit 12. In this case, the signal processing unit 111 associates the acoustic signal collected by the sound collecting unit 14 for a predetermined time and the image signal photographed by the photographing unit 13 with the measurement date and time and stores them in the storage unit 12.
信号解析部１１２は、記憶部１２に保存された音響信号のデジタルデータを所定の解析方法、たとえば機器の状態を表す兆候パラメータの算出や、高速フーリエ変換による周波数スペクトルの算出などの解析を行う。信号解析部１１２は、解析結果と、診断対象機器および測定日時等とを紐づけて、記憶部１２へ記録する。 The signal analysis unit 112 analyzes the digital data of the acoustic signal stored in the storage unit 12 by a predetermined analysis method, for example, calculation of a sign parameter indicating the state of the device, calculation of a frequency spectrum by fast Fourier transform, and the like. The signal analysis unit 112 associates the analysis result with the diagnosis target device, the measurement date and time, and records the result in the storage unit 12.
診断部１１３は、信号解析部１１２の解析結果を用いて、所定の診断基準にしたがって機器の状態を診断する。診断部１１３は、例えば、診断対象機器の兆候パラメータが所定の範囲に含まれているか否かにより機器の状態を判断することができ、過去の兆候パラメータと現在の兆候パラメータとを比較して機器の状態を判断することも可能である。
本実施形態の音響診断装置は、上記以外は上述の第１実施形態と同様である。すなわち、本実施形態によれば、信頼性の高い診断を行う音響診断装置を提供することができる。
The diagnosis unit 113 uses the analysis result of the signal analysis unit 112 to diagnose the state of the device according to a predetermined diagnosis standard. The diagnosis unit 113 can determine the state of the device based on, for example, whether or not the sign parameter of the diagnosis target device is included in a predetermined range, and compares the past sign parameter with the current sign parameter to check the device state. It is also possible to determine the state of
The acoustic diagnostic apparatus of this embodiment is the same as that of the above-described first embodiment except for the above. That is, according to the present embodiment, an acoustic diagnostic apparatus that performs highly reliable diagnosis can be provided.
図９は、表示部に基準画像および診断用画像を比較表示する際の表示例を示す図である。
なお、上述の複数の実施形態において、画像処理部１１４は、表示部１５に基準画像Ｐ１と診断用画像Ｐ２とを比較表示する際に、位置合わせのガイドとして、グリッドを表示させてもよい。グリッドは、画像の水平方向に平行なラインＡ１−Ａ３と、垂直方向に平行なラインＢ１−Ｂ３との少なくとも一方を含んでいる。なお、グリッドに含まれるラインの本数は図９に表示された例に限定されるものではなく、適宜調整されてもよい。
FIG. 9 is a diagram illustrating a display example when the reference image and the diagnostic image are comparatively displayed on the display unit.
In the above-described embodiments, the image processing unit 114 may display a grid as an alignment guide when the reference image P1 and the diagnostic image P2 are displayed on the display unit 15 for comparison. The grid includes at least one of a line A1-A3 parallel to the horizontal direction of the image and a line B1-B3 parallel to the vertical direction. The number of lines included in the grid is not limited to the example displayed in FIG. 9 and may be adjusted as appropriate.
例えば基準画像Ｐ１と診断用画像Ｐ２とが表示部１５に並んで比較表示される場合には、利用者は、基準画像Ｐ１のグリッドの位置と診断用画像Ｐ２のグリッドの位置が合うように携帯端末１の位置を調整することにより、基準画像Ｐ１を撮影したときの携帯端末１の位置を再現することができる。 For example, when the reference image P1 and the diagnostic image P2 are compared and displayed side by side on the display unit 15, the user carries the mobile phone so that the grid position of the reference image P1 matches the grid position of the diagnostic image P2. By adjusting the position of the terminal 1, the position of the portable terminal 1 when the reference image P1 is captured can be reproduced.
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although several embodiments of the present invention have been described, these embodiments are presented by way of example and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.
１…携帯端末、２…操作ボタン、１１…制御部、１２…記憶部、１３…撮影部、１４…集音部、１５…表示部、１１１…信号処理部、１１２…信号解析部、１１３…診断部、１１４…画像処理部、１１５…画像情報類似性算出部、Ｐ１…基準画像、Ｐ１２…画像、Ｐ２…診断用画像。 DESCRIPTION OF SYMBOLS 1 ... Portable terminal, 2 ... Operation button, 11 ... Control part, 12 ... Memory | storage part, 13 ... Image pick-up part, 14 ... Sound collecting part, 15 ... Display part, 111 ... Signal processing part, 112 ... Signal analysis part, 113 ... Diagnosis unit 114... Image processing unit 115... Image information similarity calculation unit P1... Reference image P12.
Claims (11)
撮影対象の画像を電気信号である画像信号に変換する撮影部と、
周囲環境の音を電気信号である音響信号に変換する集音部と、
前記画像信号のデータ、前記音響信号のデータ、および予め撮影した基準画像のデータを記録可能な記憶部と、
前記記憶部に記録された基準画像のデータを読み出し、前記基準画像と、前記撮影部にて現在撮影されている診断用画像とを比較表示させる画像処理部と、
前記基準画像と前記診断用画像とを表示している際に、利用者の操作に基づいて、前記集音部にて集音された診断用音の前記音響信号のデータを前記記憶部に記録する信号処理部と、
前記診断用音を予め設定された解析条件を用いて解析する信号解析部と、を備えたことを特徴とする音響診断装置。 A display unit capable of displaying an image;
An imaging unit that converts an image to be imaged into an image signal that is an electrical signal;
A sound collection unit that converts the sound of the surrounding environment into an acoustic signal that is an electrical signal;
A storage unit capable of recording the data of the image signal, the data of the acoustic signal, and the data of a reference image captured in advance;
An image processing unit that reads data of a reference image recorded in the storage unit and displays the reference image in comparison with the diagnostic image currently captured by the imaging unit;
When displaying the reference image and the diagnostic image, the acoustic signal data of the diagnostic sound collected by the sound collecting unit is recorded in the storage unit based on a user operation. A signal processing unit to
An acoustic diagnosis apparatus comprising: a signal analysis unit that analyzes the diagnostic sound using a preset analysis condition.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018102340 | 2018-05-29 | ||
| JP2018102340 | 2018-05-29 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019207224A true JP2019207224A (en) | 2019-12-05 |
| JP7313895B2 JP7313895B2 (en) | 2023-07-25 |
Family
ID=68767608
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019086283A Active JP7313895B2 (en) | 2018-05-29 | 2019-04-26 | Acoustic diagnostic equipment |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7313895B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023286447A1 (en) * | 2021-07-14 | 2023-01-19 | 株式会社日立産機システム | Device abnormality diagnosis method |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005009899A (en) * | 2003-06-17 | 2005-01-13 | Jfe Steel Kk | Method for detecting state change and apparatus for detecting state change in specimen |
| JP2014016199A (en) * | 2012-07-06 | 2014-01-30 | Toshiba Industrial Products Manufacturing Corp | Mobile terminal, vibration sound measuring system, and vibration sound measuring method |
| JP2017111293A (en) * | 2015-12-16 | 2017-06-22 | 富士ゼロックス株式会社 | Diagnosis device, diagnosis system, device, and program |
| WO2017110111A1 (en) * | 2015-12-25 | 2017-06-29 | 富士ゼロックス株式会社 | Terminal device, diagnosis system, diagnosis method, and program |
-
2019
- 2019-04-26 JP JP2019086283A patent/JP7313895B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005009899A (en) * | 2003-06-17 | 2005-01-13 | Jfe Steel Kk | Method for detecting state change and apparatus for detecting state change in specimen |
| JP2014016199A (en) * | 2012-07-06 | 2014-01-30 | Toshiba Industrial Products Manufacturing Corp | Mobile terminal, vibration sound measuring system, and vibration sound measuring method |
| JP2017111293A (en) * | 2015-12-16 | 2017-06-22 | 富士ゼロックス株式会社 | Diagnosis device, diagnosis system, device, and program |
| WO2017110111A1 (en) * | 2015-12-25 | 2017-06-29 | 富士ゼロックス株式会社 | Terminal device, diagnosis system, diagnosis method, and program |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023286447A1 (en) * | 2021-07-14 | 2023-01-19 | 株式会社日立産機システム | Device abnormality diagnosis method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7313895B2 (en) | 2023-07-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8707785B2 (en) | On-board ultrasonic frequency spectrum and image generation | |
| US11960002B2 (en) | Systems and methods for analyzing and displaying acoustic data | |
| EP1983316A3 (en) | Sound quality display apparatus, sound quality display method, computer readable medium on which sound quality display program is recorded and sound camera | |
| JP6523941B2 (en) | Water leak detection device | |
| US20170201824A1 (en) | Terminal device and information output method | |
| JP6780767B2 (en) | Inspection support device, inspection support method and program | |
| US20130107036A1 (en) | Inspection system and method for correlating data from sensors and visual displays | |
| US11594243B2 (en) | Sound source estimation system and sound source estimation method | |
| US11941749B2 (en) | Image display method, display control device, and recording medium for displaying shape image of subject and coordinates estimated from two-dimensional coordinates in reference image projected thereon | |
| CN106851087A (en) | Information processor and information processing method | |
| JP5985281B2 (en) | Portable terminal, vibroacoustic measurement system, and vibroacoustic measurement method | |
| JP2017162103A (en) | Inspection work support system, inspection work support method, and inspection work support program | |
| US20060152478A1 (en) | Projection of synthetic information | |
| CN110659542A (en) | Monitoring method and device | |
| JP2022054521A (en) | Round inspection work evaluation system, round inspection work evaluation device, operation terminal, position detection terminal, and round inspection work evaluation method | |
| JP7201413B2 (en) | Analyzer and analysis program | |
| JP7313895B2 (en) | Acoustic diagnostic equipment | |
| WO2018158815A1 (en) | Inspection assistance device, inspection assistance method, and recording medium | |
| WO2015096824A1 (en) | Analysis device and analysis method | |
| JP2022029352A (en) | Acoustic diagnostic device | |
| WO2023286447A1 (en) | Device abnormality diagnosis method | |
| KR20120084612A (en) | Apparatus for providing focus information and apparatus for adjusting focus | |
| WO2018158818A1 (en) | Inspection assistance device, inspection assistance method, and recording medium | |
| WO2022162817A1 (en) | Failure diagnosis system, failure diagnosis method, and program | |
| JP7516172B2 (en) | Ultrasound diagnostic device and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220310 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230117 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230120 |
|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20230302 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20230302 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230314 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20230303 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230613 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230712 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7313895 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |