JP7313895B2

JP7313895B2 - 音響診断装置

Info

Publication number: JP7313895B2
Application number: JP2019086283A
Authority: JP
Inventors: 達也廣瀬; 文章竹内; 利昌平手
Original assignee: Toshiba Industrial Products and Systems Corp; Toshiba Infrastructure Systems and Solutions Corp
Current assignee: Toshiba Industrial Products and Systems Corp; Toshiba Infrastructure Systems and Solutions Corp
Priority date: 2018-05-29
Filing date: 2019-04-26
Publication date: 2023-07-25
Anticipated expiration: 2039-04-26
Also published as: JP2019207224A

Description

本発明の実施形態は、音響診断装置に関する。

例えば電動機などの回転機器は、運転時間の経過とともに構成部品が劣化する。例えば電動機のロータを支える軸受は、ロータの回転により徐々に劣化し、劣化が進行すると異常振動や異常音を引き起こすことが知られている。従来は、聴感により異常音を検知し、その後に加速度センサによって異常振動を計測、解析することによって電動機の異常部位の診断を行っていた。このとき、人間の聴感で異常音を判定すると基準が一定にならないため、電動機の回転音をマイクロフォンで測定し、所定の指標を算出すれば一定の基準で異常判定を行うことができる。また、加速度センサにより振動を計測すれば、精度良く診断を行うことができるが、電動機に加速度センサを直接取り付ける必要があることから、運転中の電動機の異常を検出する際には安全上のリスクがある。マイクロフォンにより異常音を検知する場合、電動機に対して非接触で音響信号を測定できるため、加速度センサを用いる場合よりも安全面での優位性がある。上記状況を踏まえて、携帯端末のマイクロフォンを利用して機器の状態を診断する装置の提案がなされている。

特開２０１４－１６１９９号公報

従来、現在の測定データと過去の測定データとを比較することにより、機器の現在の状態を判定することが提案されている。現在の測定データと過去の測定データとの比較を行う為には、同一条件でデータを測定することが必要である。特に、マイクロフォンで回転音を測定する場合、電動機からの距離や角度によって測定される音圧レベルが異なるため、電動機に対して以前と同じ位置で測定しないとデータの信頼性が低下する。また、マイクロフォンと電動機の周囲に配置されている物や周囲に居る人間との位置関係によっても、測定データが変化する可能性があった。

本発明の実施形態は上記事情を鑑みて成されたものであって、信頼性の高い診断を行う音響診断装置を提供することを目的とする。

実施形態による音響診断装置は、画像を表示可能な表示部と、撮影対象の画像を電気信号である画像信号に変換する撮影部と、周囲環境の音を電気信号である音響信号に変換する集音部と、前記画像信号のデータ、前記音響信号のデータ、および予め撮影した基準画像のデータを記録可能な記憶部と、前記記憶部に記録された基準画像のデータを読み出し、前記基準画像と、前記撮影部にて現在撮影されている診断用画像とを、撮影対象の物の位置が一致するように比較表示させる画像処理部と、前記基準画像と前記診断用画像とを表示している際に、利用者の操作に基づいて、前記集音部にて集音された診断用音の前記音響信号のデータを前記記憶部に記録する信号処理部と、前記診断用音を予め設定された解析条件を用いて解析する信号解析部と、を備えた、携帯端末である。

図１は、第１実施形態の音響診断装置の一構成例を概略的に示すブロック図である。図２は、劣化診断を行う際の、一実施形態の音響診断装置における表示の一例を概略的に示す図である。図３は、劣化診断を行う際の、一実施形態の音響診断装置における表示の他の例を概略的に示す図である。図４は、複数の測定日にて測定されたデータに基づく診断対象機器の過去の兆候パラメータの表示例を示す図である。図５は、診断対象機器を含む画像の画像処理の一例ついて説明するための図である。図６は、第２実施形態の音響診断装置の一構成例を概略的に示すブロック図である。図７は、複数の測定日にて測定されたデータに基づく診断対象機器の兆候パラメータと、画像情報類似性を示す指標としての内積との表示例である。図８は、第３実施形態の音響診断装置にて劣化診断を行う際の、表示の一例を概略的に示す図である。図９は、表示部に基準画像および診断用画像を比較表示する際の表示例を示す図である。

以下、実施形態の音響診断装置について図面を参照して詳細に説明する。
図１は、第１実施形態の音響診断装置の一構成例を概略的に示すブロック図である。本実施形態の音響診断装置は、携帯端末１を備える。携帯端末１は、例えば、携帯電話、スマートフォン、タブレッド端末などであるが、これらに限定されるものではない。

携帯端末１は、制御部１１と、記憶部１２と、撮影部１３と、集音部１４と、表示部１５と、外部と通信可能に構成された通信部（図示せず）と、を備えている。記憶部１２、撮影部１３、集音部１４、表示部１５、および、通信部は、バス通信線を介して制御部１１と通信可能に接続している。

記憶部１２は、制御部１１によって実行されるプログラムと、撮影部１３および集音部１４で取得されたデータと、制御部１１にて処理された後のデータと、機器のパラメータ（軸受では軸受パス周波数、ギアボックスでは噛み合い周波数、ポンプでは羽根切り周波数など）と、を保存することができる。なお、携帯端末１は、データを一時的に保存可能であるメモリ（図示せず）を更に備えていてもよい。

撮影部１３は、画像（静止画および動画）を撮影可能なカメラを備えている。撮影部１３は、例えば、表示部１５の画面が設けられた携帯端末１の一方の面に対向した他方の面に設けられたカメラレンズを備え、このカメラレンズを介して撮像した撮影対象の画像を電気信号である画像信号に変換し、制御部１１および記憶部１２へ供給可能である。

集音部１４は、携帯端末１の周囲環境の音による空気振動を電気信号である音響信号に変換する機能を有するマイクロフォンを少なくとも１つ備えている。マイクロフォンは、例えば、携帯端末１の筐体に設けられた孔（図示せず）の近傍に配置され、周囲環境の音に基づく音響信号を、制御部１１へ供給可能である。

表示部１５は、例えば撮影部１３により撮影された画像や、集音部１４により取得した音響信号に基づく音の波形画像等の各種画像を表示可能である。また、表示部１５は、制御部１１にて画像処理された画像、文字、操作ボタンなどを表示することが可能である。また、表示部１５は、撮影部１３で撮影された画像をリアルタイムで表示可能であり、カメラのファインダー機能も兼ねている。ユーザは、表示部１５に表示される画像にて携帯端末１の位置や角度を調整して、撮影する画像の調整をすることができる。
なお、表示部１５は、タッチパネル機能を備えていてもよく、この場合には、ユーザは表示部１５に指やペンなどで接触することにより、各種操作を行うことが可能である。

制御部１１は、携帯端末１に含まれる複数の構成の動作を制御する。制御部１１は、例えば、ＣＰＵ（central processing unit）やＭＰＵ（micro processing unit）などのプロセッサを少なくとも１つ備えている。制御部１１は、記憶部１２に記憶されたプログラムを読み出して実行し、後述する各種動作をソフトウエアにより実現するように構成され得る。

制御部１１は、信号処理部１１１と、信号解析部１１２と、診断部１１３と、画像処理部１１４と、を備えている。
信号処理部１１１は、撮影部１３にて撮影された画像を電気信号に変換した画像信号と、集音部１４にて集音された音を電気信号に変換した音響信号とを受信し、デジタルデータに変換して、記憶部１２に電子ファイルとして保存する。

信号解析部１１２は、携帯端末１のメモリ上にあるデジタルデータ、あるいは、記憶部１２に保存されているデジタルデータを、予め設定された解析条件を用いて、所定の解析方法に基づいて解析する。信号解析部１１２は、たとえば機器の状態を表す兆候パラメータの算出や、高速フーリエ変換による周波数スペクトルの算出などの解析を行うことができる。

例えば、信号解析部１１２は、予め設定された特定周波数の信号の判断レベルと診断対象である音響信号とを比較する。さらに、信号解析部１１２は、機械固有のパラメータ（軸受では軸受パス周波数、ギアボックスでは噛み合い周波数、ポンプでは羽根切り周波数など）のレベルから異常の有無を判断することができる。

診断部１１３は、信号解析部１１２が算出した解析結果に基づいて、所定の判定基準にしたがって機器の状態を診断する。なお、信号解析部１１２での解析結果に基づいて、利用者が劣化の診断を行うことが可能な場合には、診断部１１３は省略しても構わない。

画像処理部１１４は、記憶部１２に保存されている画像信号のデータや、メモリに一次保存されている画像信号のデータを用いて所定の画像処理を行った後、表示可能な画像信号として表示部１５へ出力可能である。このとき、画像処理部１１４は、記憶部１２に記録された画像のデータを読み出し、利用者が複数の画像を比較可能となるように表示させる（比較表示させる）ことができる。

画像処理部１１４は、例えば、表示部１５に複数の画像を並べて比較表示するように画像信号を生成可能であり、複数の画像を重ねて表示部１５に比較表示するように画像信号を生成可能であり、比較表示させる画像と文字や操作ボタンなどの画像とを組み合わせて表示部１５に表示するように画像信号を生成可能である。例えば、画像処理部１１４は、撮影部１３により撮影された複数の画像の一つを透過させるように処理し、他の画像上に重ねて表示させる画像信号を生成可能である。

次に、携帯端末１を用いて診断対象機器が動作している際の劣化診断手順について説明する。ここでは、診断対象機器が電動機である場合を一例として説明する。
図２は、劣化診断を行う際の、一実施形態の音響診断装置における表示の一例を概略的に示す図である。

最初に、利用者は、携帯端末１にて診断対象機器の周囲の音を測定すると同時に、音を測定したときの携帯端末１の位置にて画像を撮影する。このときに測定する音と撮影した画像は、後に、診断対象機器を診断する際に測定される周囲の音および撮影される画像と比較される基準音および基準画像となる。

利用者は、測定を開始する際に、例えば表示部１５のタッチパネルを操作して、所定のアプリケーションを起動する。

所定のアプリケーションが起動されると、制御部１１は、撮影部１３および集音部１４により画像信号および音響信号のデータの取得を開始するとともに、撮影部１３が撮影した画像と集音部１４が集音した音の波形画像ＳＤ１とを、表示部１５に表示させる。これにより、利用者は、診断対象機器が動作しているときの周囲環境の音を視覚的に確認するとともに、撮影部１３および集音部１４を用いた診断が可能な状態であることを確認することができる。

なお、この時点では、取得したデータは記憶部１２に保存されなくてもよく、例えば携帯端末１のメモリに画像情報および音響情報が一時的に記録されてもよい。また、集音した音の波形画像ＳＤ１の表示は必須ではなく、省略しても構わない。

続いて、利用者は、撮影部１３および集音部１４を用いた診断が可能な状態であることを確認できたら、撮影部１３により撮影された画像のデータを記憶部１２に保存するとともに、集音部１４により集音した周囲の音のデータを記憶部１２に保存するよう操作を行う。この操作は、表示部１５のタッチパネルを用いて行われてもよく、携帯端末１に設けられた操作ボタン２を用いて行われてもよい。画像処理部１１４は、「保存」ボタンや、操作ボタン２を押して保存を開始することを利用者に促す文字などを表示部１５に表示しても構わない。

利用者がデータを保存する操作を行うと、信号処理部１１１は、集音部１４により所定時間集音された音の電気信号（音響信号）のデータと、撮影部１３により撮影された画像（例えば静止画像）の電気信号（画像信号）のデータとを測定日時により紐づけて記憶部１２に保存する。すなわち、本実施形態では、信号処理部１１１は、利用者の共通の操作に基づいて、基準画像を記憶部１２に記録するとともに、集音部１４により得られた所定期間の基準音を記憶部１２に記録する。

なお、記憶部１２に保存される画像（静止画像）が撮影される日時は、例えば、集音部１４により集音された周囲の音が記録される期間に含まれていてもよい。また、画像を撮影する際にカメラのシャッタ音が発せられる場合には、シャッタ音が含まれないように、画像を撮影するタイミングとずらして周囲の音の音響信号のデータを記録してもよい。記憶部１２には、画像が撮影された日時により音響信号のデータと画像信号のデータとを紐づけて保存してもよく、周囲の音の集音を開始した日時や、集音を終了した日時にて音響信号と画像信号とを紐づけて保存してもよい。

以上のように、診断対象機器の周囲の音と画像とに測定日時を付すことにより、撮影された画像と集音された音とのデータを紐づけて記憶部１２に保存し、周囲の音を測定したときの携帯端末１の位置を保存することができる。

信号解析部１１２は、記憶部１２に保存された音響信号のデータを所定の解析方法、たとえば機器の状態を表す兆候パラメータの算出や、高速フーリエ変換による周波数スペクトルの算出などの解析を行う。信号解析部１１２は、解析結果と、診断対象機器および測定日時等とを紐づけて、記憶部１２へ記録する。

続いて、利用者は、異なる日時にて同一の診断対象機器の周囲の音を再度測定し、劣化の診断を行う。
図３は、劣化診断を行う際の、一実施形態の音響診断装置における表示の他の例を概略的に示す図である。

利用者は、診断を開始する際に、例えば表示部１５のタッチパネルを操作して、所定のアプリケーションを起動する。
所定のアプリケーションが起動されると、制御部１１は、撮影部１３および集音部１４によりデータの取得を開始するとともに、画像処理部１１４は、撮影部１３が撮影した画像と集音部１４が集音した音の波形画像ＳＤ２とを表示部１５に表示させる画像信号を生成して表示部１５へ出力する。

例えば、利用者は表示部１５のタッチパネルを操作して、記憶部１２に記録されたデータの中から、今回診断を行う機器を指定することができる。
診断対象機器が指定されると、画像処理部１１４は、以前撮影された診断対象機器の基準画像データを記憶部１２から読み出し、基準画像Ｐ１と現在撮影している画像（診断用画像）Ｐ２との少なくともいずれか一方を、アルファ値を所定の値に設定した透過画像とし、基準画像Ｐ１と診断用画像Ｐ２とを重ねて表示部１５に表示させる。

例えば、画像処理部１１４は、撮影部１３が現在撮影している診断用画像Ｐ２のアルファ値を所定の値に設定して透過させた透過画像として、表示部１５にて、記憶部１２から読み出した基準画像Ｐ１上に診断用画像Ｐ２を重ねた画像を表示させる。

利用者は、過去の基準画像Ｐ１と、撮影部１３が現在撮影している診断用画像Ｐ２とを比較して、基準画像Ｐ１と診断用画像Ｐ２とに写された物の位置が一致するように、携帯端末１の位置や角度を調整することにより、基準画像Ｐ１を撮影したときの携帯端末１（すなわちマイクロフォン）の位置を診断時に再現することが可能となる。

また、基準画像Ｐ１と診断用画像Ｐ２とには、診断対象機器の周囲に配置されている物も含まれるため、例えば、同じ機種の機器が複数設置されている施設等において、診断対象機器を取り違えることを回避することが可能となる。また、診断対象機器の周囲に配置されている物の位置等の周囲環境の変化による影響を考慮した診断も可能となる。

携帯端末１の位置の調整が完了した後、利用者は、例えば表示部１５のタッチパネルや操作ボタン２を操作して、集音部１４にて集音された音（診断用音）の音響信号のデジタルデータを記憶部１２に保存する。このとき記憶部１２に保存された音響信号が診断対象となる。

なお、診断対象の音響信号を記憶部１２に保存するタイミングで、同時に撮影部１３にて撮影された画像信号のデジタルデータを記憶部１２に保存してもよい。この場合には、信号処理部１１１は、集音部１４により所定時間集音された音響信号と、撮影部１３により撮影された画像信号とを測定日時により紐づけて記憶部１２に保存する。

信号解析部１１２は、記憶部１２に保存された音響信号のデジタルデータを所定の解析方法、たとえば機器の状態を表す兆候パラメータの算出や、高速フーリエ変換による周波数スペクトルの算出などの解析を行う。信号解析部１１２は、解析結果と、診断対象機器および測定日時等とを紐づけて、記憶部１２へ記録する。

診断部１１３は、信号解析部１１２の解析結果を用いて、所定の診断基準にしたがって機器の状態を診断する。診断部１１３は、例えば、診断対象機器の兆候パラメータが所定の範囲に含まれているか否かにより機器の状態を判断することができ、過去の兆候パラメータと現在の兆候パラメータとを比較して機器の状態を判断することも可能である。

図４は、複数の測定日にて測定された音響信号に基づく診断対象機器の過去の兆候パラメータの表示例を示す図である。
信号解析部１１２にて解析が終了すると、画像処理部１１４は、診断対象機器について記憶部１２に記憶された過去の兆候パラメータと、今回の兆候パラメータとを読み出して、例えば測定日時に対応した兆候パラメータをプロットした画像を表示部１５に表示させることができる。また、画像処理部１１４は、解析結果と合わせて診断部１１３での診断結果を表示させてもよい。
利用者は、表示部１５に表示された解析結果や診断結果に基づいて、診断対象機器の状態を判断することができる。

携帯端末１を用いて動作している機器の動作音により機器の劣化を診断するとき、携帯端末１と機器との距離や角度によって測定される音が異なるため、基準となる音を測定したときの機器と携帯端末１との位置関係を再現する必要がある。

本実施形態の音響診断装置では、上記のように表示部１５に表示された画像の位置合わせを行うことにより、過去に診断対象機器の周囲の音を測定したときの携帯端末１の位置を再現することが可能となる。

また、携帯端末１にて測定される音は、機器が設置されている環境の影響を受けるため、比較する過去の音を測定したときの機器の周囲に配置されている物と携帯端末１との位置関係を再現することにより、より信頼性の高い診断を行うことが可能となる。
また、本実施形態では、音を測定するときの利用者の位置ではなく、携帯端末１の位置を再現することができるため、基準となる音を測定したときと診断を行うときとで携帯端末１の利用者が異なる場合であっても、利用者の体格などに依存せずに正確な位置合わせを行うことが可能である。

すなわち、本実施形態によれば、信頼性の高い診断を行う音響診断装置を提供することができる。
なお、上記の実施形態では、携帯端末１の位置を調整するために、過去に撮影した基準画像Ｐ１と現在撮影されている診断用画像Ｐ２との少なくとも一方を透過画像として、表示部１５に表示していたが、他の画像処理を行っても構わない。

例えば、画像処理部１１４は、基準画像Ｐ１と診断用画像Ｐ２とを比較表示する際に、基準画像Ｐ１又は診断用画像Ｐ２の少なくとも一方をエッジ抽出した画像としてもよく、又は、元の画像のエッジ部分を抽出したものを更に二値化処理を行った画像としてもよい。

図５は、診断対象機器を含む画像の画像処理の一例ついて説明するための図である。画像処理部１１４は、例えば図５に示すように、過去に撮影された基準画像Ｐ１のエッジ情報を二値化処理した画像Ｐ１２を生成する。画像Ｐ１２は、例えばエッジ以外の部分は透明であってもよく、診断用画像Ｐ２と重ねたときにエッジが強調されるように、エッジのラインが太く強調されていてもよく、エッジラインが赤色や黄色など白黒以外の色で表示されるものであってもよい。

利用者は、現在撮影されている画像Ｐ２にエッジのみの画像Ｐ１２を重ねた状態の表示部１５を見ながら携帯端末１の位置や角度を調整することにより、容易に両者を一致させることが可能となる。
すなわち、利用者は、携帯端末１が過去に音響信号を測定したときの位置を容易に再現することが可能となり、信頼性の高い診断を実現することができる。

次に、第２実施形態に係る音響診断装置について図面を参照して詳細に説明する。
図６は、第２実施形態の音響診断装置の一構成例を概略的に示すブロック図である。本実施形態の音響診断装置は、制御部１１が、画像情報類似性算出部１１５を更に備えている。

画像情報類似性算出部１１５は、例えば、基準画像と診断用画像とのデータを用いて、基準画像と診断用画像との相関関係を算出することにより、画像情報の類似性を算出することができる。

相関係数は、例えば、基準画像のデータから得た１次元のベクトルＸと、診断用画像のデータから得た１次元のベクトルＹとを用いて、以下の式で計算することができる。なお、ベクトルＸとベクトルＹとは、例えば、２次元の画像に基づくデータを所定の規則に基づいて１次元のデータに変換したものである。

ベクトルＸ =（ｘ₁,ｘ₂,ｘ₃…ｘ_n）ベクトルＹ =（ｙ₁,ｙ₂,ｙ₃…ｙ_n）
上記相関係数は、基準画像と診断用画像とが同一であれば（ベクトルＸとベクトルＹとが等しければ）１となり、１に近いほど基準画像と診断用画像とが類似していることを示す。

また、画像情報類似性算出部１１５は、例えば、基準画像と診断用画像とのデータを用いて、内積を算出することにより、基準画像と診断用画像との類似性を算出することができる。
内積は、基準画像のデータから得たベクトルＸ´と診断用画像のデータから得たベクトルＹ´とを用いて、以下の式で計算することができる。

ベクトルＸ=（ｘ₁,ｘ₂,ｘ₃…ｘ_n）ベクトルＹ=（ｙ₁,ｙ₂,ｙ₃…ｙ_n）を正規化して
上記内積は、基準画像と診断用画像とが同一であれば（ベクトルＸとベクトルＹとが等しければ）１となり、１に近いほど基準画像と診断用画像とが類似していることを示す。

図７は、複数の測定日にて測定されたデータに基づく診断対象機器の兆候パラメータと、画像情報類似性を示す指標としての内積との表示例である。
図７では測定日Ｂにおける内積値が低いため、他の測定日と比較して測定位置の再現が不十分であると判断できる。

したがって、利用者は、画像情報類似性が低い測定データは、測定位置の再現が不十分であるため、診断対象とするデータからから除くことができる。また、信号解析部１１２および診断部１１３は、画像情報類似性が所定の範囲外にある測定データを解析および診断の対象から除外してもよく、今回診断時に撮影した画像の画像情報類似性が低い場合には、今回の測定を最初からやり直すように処理を進めてもよい。
本実施形態の音響診断装置は、上記以外は上述の第１実施形態と同様である。すなわち、本実施形態によれば、信頼性の高い診断を行う音響診断装置を提供することができる。

次に、第３実施形態に係る音響診断装置について図面を参照して詳細に説明する。
本実施形態では、診断対象音を記録する際の音響診断装置の動作が上述の第１実施形態と異なっている。

図８は、第３実施形態の音響診断装置にて劣化診断を行う際の、表示の一例を概略的に示す図である。
利用者は、診断を開始する際に、例えば表示部１５のタッチパネルを操作して、所定のアプリケーションを起動する。

所定のアプリケーションが起動されると、制御部１１は、撮影部１３および集音部１４によりデータの取得を開始するとともに、画像処理部１１４は、撮影部１３が撮影した画像と集音部１４が集音した音の波形画像ＳＤ２とを表示部１５に表示させる画像信号を生成して表示部１５へ出力する。

例えば、利用者は表示部１５のタッチパネルを操作して、記憶部１２に記録されたデータの中から、今回診断を行う機器を指定することができる。
診断対象機器が指定されると、画像処理部１１４は、以前撮影された診断対象機器の基準画像データを記憶部１２から読み出し、基準画像Ｐ１と現在撮影している画像（診断用画像）Ｐ２とを、並べて表示部１５に比較表示させる。

このとき、診断用画像Ｐ２は、基準画像Ｐ１を撮影したときとカメラのズームを同じ倍率に設定して撮影されることが望ましく、基準画像Ｐ１と診断用画像Ｐ２とが表示されるエリアは同じ大きさであることが望ましい。また、基準画像Ｐ１と診断用画像Ｐ２との間には他の画像が表示されないことが望ましい。

診断部１１３は、信号解析部１１２の解析結果を用いて、所定の診断基準にしたがって機器の状態を診断する。診断部１１３は、例えば、診断対象機器の兆候パラメータが所定の範囲に含まれているか否かにより機器の状態を判断することができ、過去の兆候パラメータと現在の兆候パラメータとを比較して機器の状態を判断することも可能である。
本実施形態の音響診断装置は、上記以外は上述の第１実施形態と同様である。すなわち、本実施形態によれば、信頼性の高い診断を行う音響診断装置を提供することができる。

図９は、表示部に基準画像および診断用画像を比較表示する際の表示例を示す図である。
なお、上述の複数の実施形態において、画像処理部１１４は、表示部１５に基準画像Ｐ１と診断用画像Ｐ２とを比較表示する際に、位置合わせのガイドとして、グリッドを表示させてもよい。グリッドは、画像の水平方向に平行なラインＡ１－Ａ３と、垂直方向に平行なラインＢ１－Ｂ３との少なくとも一方を含んでいる。なお、グリッドに含まれるラインの本数は図９に表示された例に限定されるものではなく、適宜調整されてもよい。

例えば基準画像Ｐ１と診断用画像Ｐ２とが表示部１５に並んで比較表示される場合には、利用者は、基準画像Ｐ１のグリッドの位置と診断用画像Ｐ２のグリッドの位置が合うように携帯端末１の位置を調整することにより、基準画像Ｐ１を撮影したときの携帯端末１の位置を再現することができる。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１…携帯端末、２…操作ボタン、１１…制御部、１２…記憶部、１３…撮影部、１４…集音部、１５…表示部、１１１…信号処理部、１１２…信号解析部、１１３…診断部、１１４…画像処理部、１１５…画像情報類似性算出部、Ｐ１…基準画像、Ｐ１２…画像、Ｐ２…診断用画像。

Claims

画像を表示可能な表示部と、
撮影対象の画像を電気信号である画像信号に変換する撮影部と、
周囲環境の音を電気信号である音響信号に変換する集音部と、
前記画像信号のデータ、前記音響信号のデータ、および予め撮影した基準画像のデータを記録可能な記憶部と、
前記記憶部に記録された基準画像のデータを読み出し、前記基準画像と、前記撮影部にて現在撮影されている診断用画像とを、撮影対象の物の位置が一致するように比較表示させる画像処理部と、
前記基準画像と前記診断用画像とを表示している際に、利用者の操作に基づいて、前記集音部にて集音された診断用音の前記音響信号のデータを前記記憶部に記録する信号処理部と、
前記診断用音を予め設定された解析条件を用いて解析する信号解析部と、
を備えた、携帯端末である音響診断装置。
前記画像処理部は、前記基準画像と、前記撮影部にて現在撮影されている前記診断用画像との少なくとも一方を透過させて重ねた画像を前記表示部に表示させて比較する、請求項１に記載の音響診断装置。
前記基準画像と前記診断用画像との少なくとも一方は、前記撮影部にて撮影された画像のエッジ部分を抽出した画像である、請求項１または２記載の音響診断装置。
前記基準画像と前記診断用画像との少なくとも一方は、前記撮影部にて撮影された画像のエッジ部分を抽出した後、二値化した画像である、請求項１または２記載の音響診断装置。
前記基準画像と前記診断用画像との類似性を算出する画像情報類似性算出部を更に備えた、請求項１または２記載の音響診断装置。
前記基準画像と前記診断用画像との類似性を示す指標として相関係数を用いる、請求項５記載の音響診断装置。
前記基準画像と前記診断用画像との類似性を示す指標として内積を用いる、請求項５記載の音響診断装置。
前記画像処理部は、前記基準画像と、前記撮影部にて現在撮影されている前記診断用画像とを前記表示部に並べて比較表示させる、請求項１に記載の音響診断装置。
前記画像処理部は、前記基準画像上および前記診断用画像上にグリッドを表示させる、請求項８記載の音響診断装置。
前記携帯端末は、前記表示部の画面が配置された一方の面と、前記一方の面と対向した面であって、前記撮影部のカメラレンズが設けられた他方の面と、を備える、請求項１乃至請求項９のいずれか１項記載の音響診断装置。
前記信号処理部は、前記基準画像を前記記憶部に記録するときの利用者による操作に基づいて、前記集音部から得られた所定期間の前記音響信号のデータを前記記憶部に記録する、請求項１乃至請求項１０のいずれか１項記載の音響診断装置。