WO2021156962A1

WO2021156962A1 - 昇降機の点検補助システム

Info

Publication number: WO2021156962A1
Application number: PCT/JP2020/004269
Authority: WO
Inventors: 武藤田; 雅哉安部; 賢一小泉
Original assignee: 三菱電機ビルテクノサービス株式会社; 三菱電機株式会社
Priority date: 2020-02-05
Filing date: 2020-02-05
Publication date: 2021-08-12
Also published as: CN114829281B; JP7006864B2; JPWO2021156962A1; CN114829281A

Abstract

昇降機において音が発生した箇所を効率的に把握できる点検補助システムを提供する。点検補助システム（１）は、観測部と、積層画像生成部（１８）と、音源方向推定部（１９）と、重畳部（２０）と、を備える。観測部は、第１方向に長い点検対象に沿って移動しながら、複数の時刻において、点検対象の画像の撮影および音の収音を行う。積層画像生成部（１８）は、観測部が撮影した各時刻の画像から、第１方向を中心軸とする方位角について展開したスライス画像を抽出する。積層画像生成部（１８）は、抽出したスライス画像をつなぎ合わせて積層画像のデータを生成する。音源方向推定部（１９）は、第１方向を中心軸とする方位角のうちから観測部が収音した各時刻の音の音源の方向を推定し、方向推定のデータを生成する。重畳部（２０）は、方向推定のデータに基づいて、積層画像に音源の位置を表す表示を重畳した重畳画像のデータを生成する。

Description

昇降機の点検補助システム

　本開示は、昇降機の点検補助システムに関する。

　特許文献１は、昇降機の保守確認システムの例を開示する。保守確認システムは、撮影装置と、収音装置と、サーバと、を備える。撮影装置は、共通画像を動画として撮影する。収音装置は、撮影装置の撮影に同期して音を収音する。サーバは、撮影された共通画像に収音された音を付加して記憶する。

日本特開２０１８－１１８８１３号公報

　しかしながら、特許文献１のシステムにおいて、記憶された音を確認する場合に、撮影された動画を再生する必要がある。このため、昇降路において音が発生した箇所の把握に時間がかかる。

　本開示は、このような課題の解決に係るものである。本開示は、昇降機において音が発生した箇所を効率的に把握できる点検補助システムを提供する。

　本開示に係るエレベーターの昇降機の点検補助システムは、第１方向に長い点検対象に沿って移動しながら、複数の時刻において点検対象の画像の撮影および音の収音を行う観測部と、第１方向を中心軸とする方位角について展開したスライス画像を観測部が撮影した各時刻の画像から抽出し、抽出したスライス画像をつなぎ合わせて積層画像のデータを生成する積層画像生成部と、第１方向を中心軸とする方位角のうちから観測部が収音した各時刻の音の音源の方向を推定し、各時刻の音について推定した音源の方向から方向推定のデータを生成する音源方向推定部と、方向推定のデータに基づいて、積層画像に音源の位置を表す表示を重畳した重畳画像のデータを生成する重畳部と、を備える。

　本開示に係る点検補助システムであれば、昇降機において音が発生した箇所を効率的に把握できる。

実施の形態１に係る点検補助システムの構成図である。実施の形態１に係る点検補助システムの構成を示すブロック図である。実施の形態１に係る点検補助システムによる重畳画像の生成の例を示す図である。実施の形態１に係る点検補助システムの動作の例を示すフローチャートである。実施の形態１に係る点検補助システムの主要部のハードウェア構成図である。

　本開示の実施の形態について添付の図面を参照しながら説明する。各図において、同一または相当する部分には同一の符号を付して、重複する説明は適宜に簡略化または省略する。

　実施の形態１．
　図１は、実施の形態１に係る点検補助システムの構成図である。

　点検補助システム１は、昇降機の点検作業を補助するシステムである。

　この例において、昇降機は、エレベーター２である。エレベーター２は、建築物に適用される。建築物は、複数の階床を有する。建築物において、複数の階床にわたる昇降路３が設けられる。昇降路３は、鉛直方向に長い空間である。昇降路３において、鉛直方向に長いガイドレール４が設けられる。複数の階床の各々において、乗場５が設けられる。乗場５において、乗場ドア６が設けられる。乗場ドア６は、乗場５と昇降路３とを区画するドアである。

　エレベーター２は、巻上機７と、主ロープ８と、かご９と、釣合い錘１０と、制御盤１１と、を備える。巻上機７は、例えば昇降路３の上部または下部などに設けられる。建築物において昇降路３の上部などに機械室が設けられる場合に、巻上機７は、機械室に設けられてもよい。巻上機７は、シーブおよびモーターを有する。巻上機７のシーブは、巻上機７のモーターの回転軸に接続される。巻上機７のモーターは、巻上機７のシーブを回転させる駆動力を発生させる機器である。主ロープ８は、巻上機７のシーブに巻き掛けられる。かご９および釣合い錘１０は、昇降路３において主ロープ８によって吊られている。かご９は、昇降路３の内部を鉛直方向に走行することでエレベーター２の利用者を複数の階床の間で輸送する機器である。かご９は、かごドア１２と、ガイドシュー１３と、を備える。かごドア１２は、いずれかの階床にかご９が停止しているときに、乗場５およびかご９の内部の間において利用者が乗降しうるように開閉する機器である。かごドア１２は、開閉するときに乗場ドア６を連動させて開閉させる。ガイドシュー１３は、ガイドレール４に接触することでかご９の走行をガイドする機器である。釣合い錘１０は、主ロープ８を通じて巻上機７のシーブにかかる荷重の釣合いをかご９との間でとる機器である。かご９および釣合い錘１０は、巻上機７のシーブの回転によって主ロープ８が移動することで、昇降路３において互いに反対方向に走行する。制御盤１１は、エレベーター２の動作を制御する機器である。エレベーター２の動作は、かご９の走行を含む。制御盤１１は、例えば昇降路３の上部または下部などに設けられる。建築物において機械室が設けられる場合に、制御盤１１は、機械室に設けられてもよい。

　この例において、昇降機の点検の点検対象は、昇降路３に設けられる機器または装置などである。点検対象は、例えばガイドレール４、乗場ドア６、および釣合い錘１０などを含む。ガイドレール４などを含む点検対象の全体は、鉛直方向に長い。すなわち、点検対象は鉛直方向に長い。鉛直方向は、第１方向の例である。なお、点検対象に含まれる個別の機器または装置などの各々は、鉛直方向に長い機器などでなくてもよい。

　点検補助システム１は、点検補助装置１４と、情報端末１５と、を備える。

　点検補助装置１４は、点検対象に沿って移動しうるように配置される装置である。この例において、点検補助装置１４は、昇降路３内に設けられる点検対象に沿って移動しうるように、かご９の上またはかご９の下などに配置される。点検補助装置１４は、例えばかご９に対して取付けおよび取外しが可能である。点検補助装置１４は、取付けおよび取外しがしやすいように、外部に磁石などを備えていてもよい。点検補助装置１４は、例えばかご９を通じて制御盤１１に接続される。

　情報端末１５は、昇降機の点検の作業を行う作業員が扱う装置である。情報端末１５は、例えば作業員が所持する可搬な端末装置である。情報端末１５は、例えば可搬なパーソナルコンピュータ、タブレットコンピュータ、またはスマートフォンなどであってもよい。情報端末１５は、制御盤１１に接続される。

　図２は、実施の形態１に係る点検補助システムの構成を示すブロック図である。

　点検補助装置１４は、マイクカメラ１６と、マイクカメラ制御部１７と、積層画像生成部１８と、音源方向推定部１９と、重畳部２０と、を備える。

　マイクカメラ１６は、撮影部２１と、収音部２２と、を備える。

　撮影部２１は、点検対象の画像を撮影する装置である。撮影部２１は、例えば水平方向の画像を撮影するカメラである。この例において、撮影部２１は、水平方向を全周にわたって同時に撮影可能な装置である。撮影部２１は、例えば全天球カメラである。撮影部２１は、サンプリング周期ごとの時刻において点検対象の画像を撮影する。この例において、撮影部２１は、動画として点検対象を撮影する。このとき、サンプリング周期は、例えば動画のサンプリング周期である。サンプリング周期ごとの時刻において撮影される画像は、例えば動画の各フレームである。

　収音部２２は、点検対象の位置から発せられた音を収音する装置である。この例において、収音部２２は、方向性を持ったベクトル量としての音響インテンシティが計測可能な計測装置である。収音部２２は、例えばマイクアレイである。収音部２２は、撮影部２１によるサンプリング周期ごとの撮影に同期して音を収音する。

　マイクカメラ１６は、観測部の例である。マイクカメラ１６は、サンプリング周期ごとの時刻における撮影および収音によって、観測部として点検対象の観測を行う。

　マイクカメラ制御部１７は、マイクカメラ１６の動作を制御する部分である。マイクカメラ１６の動作は、例えば観測の開始および終了を含む。マイクカメラ制御部１７は、マイクカメラ１６によって観測されたデータを取得しうるように、マイクカメラ１６に接続される。マイクカメラ制御部１７は、制御盤１１に接続される。マイクカメラ制御部１７は、撮影部２１が撮影した画像のデータを積層画像生成部１８に出力する。マイクカメラ制御部１７は、収音部２２が収音した音のデータを音源方向推定部１９に出力する。

　積層画像生成部１８は、撮影部２１が撮影した画像に基づいて積層画像のデータを生成する部分である。積層画像は、スライス画像をつなぎ合わせた画像である。スライス画像は、鉛直方向を中心軸とする水平面内の方位角について展開された点検対象の画像である。スライス画像は、サンプリング周期ごとの各時刻において撮影部２１が撮影した画像から抽出される。積層画像生成部１８は、生成した積層画像のデータを重畳部２０に出力する。

　音源方向推定部１９は、鉛直方向を中心軸とする水平面内の方位角のうちから、収音部２２が収音したサンプリング周期ごとの各時刻の音の音源の方向を推定する部分である。音源方向推定部１９は、各時刻の音について生成した音源の方向から方向推定のデータを生成する。音源方向推定部１９は、生成した方向推定のデータを重畳部２０に出力する。

　重畳部２０は、重畳画像のデータを生成する部分である。重畳画像は、積層画像に音源の位置を表す表示を重畳した画像である。音源の位置を表す表示は、方向推定のデータに基づいて生成される。重畳部２０は、生成した重畳画像のデータを例えばマイクカメラ制御部１７を通じて制御盤１１に出力する。

　制御盤１１は、エレベーター制御部２３と、第１接続部２４と、を備える。エレベーター制御部２３は、エレベーター２の動作を制御する部分である。第１接続部２４は、制御盤１１の外部の機器との間の通信を仲介するインターフェイスである。制御盤１１の外部の機器は、例えば情報端末１５である。

　情報端末１５は、点検指令送信部２５と、第２接続部２６と、表示部２７と、発音部２８と、を備える。点検指令送信部２５は、点検指令を制御盤１１に出力する部分である。点検指令は、点検運転をエレベーター２に開始させる指令信号である。点検運転は、例えば点検のためのエレベーター２の運転である。第２接続部２６は、情報端末１５の外部の機器との間の通信を仲介するインターフェイスである。情報端末１５の外部の機器は、例えば制御盤１１である。点検指令は、例えば第２通信部を通じて制御盤１１に出力される。表示部２７は、点検作業を補助する画像などを表示する部分である。点検作業を補助する画像は、例えば重畳画像である。重畳画像のデータは、例えば制御盤１１を通じて点検補助装置１４から取得される。発音部２８は、音を発する部分である。発音部２８は、例えばスピーカーである。

　続いて、図３を用いて、点検補助システム１の機能を説明する。点検補助システム１は、重畳画像の生成によって点検作業を補助する。
　図３は、実施の形態１に係る点検補助システムによる重畳画像の生成の例を示す図である。

　まず、作業員は、点検補助装置１４をかご９の上に取り付ける。このとき、作業員は、点検補助装置１４および制御盤１１がかご９を通じて通信しうるように、点検補助装置１４およびかご９を接続する。

　次に、作業員は、例えば昇降路３の外部において情報端末１５を制御盤１１に接続する。作業員は、情報端末１５を操作して、点検指令送信部２５に点検指令を送信させる。点検指令送信部２５は、第２接続部２６および第１接続部２４を通じて、制御盤１１に点検指令を出力する。

　制御盤１１のエレベーター制御部２３は、点検指令が入力されるときに、点検運転を行う。点検運転は、例えば最下階から最上階までかご９を走行させる運転である。点検運転は、最下階から最上階まで通常運転と同様に走行する運転であってもよい。あるいは、点検運転は、昇降路３においてかご９が一定速度で走行する区間が通常運転より長い運転であってもよい。あるいは、点検運転は、通常運転より走行速度が遅い運転であってもよい。点検運転は、最上階から最下階までの走行経路、あるいは点検対象に応じたその他の走行経路であってもよい。

　エレベーター２が点検運転を行うときに、マイクカメラ制御部１７は、例えばエレベーター制御部２３から点検運転の開始の通知を受ける。このとき、マイクカメラ制御部１７は、マイクカメラ１６に観測を開始させる。エレベーター２が点検運転を行っている間に、点検補助装置１４のマイクカメラ１６は、かご９とともに鉛直方向に移動する。このとき、マイクカメラ１６は、点検対象に沿って移動している。

　撮影部２１は、鉛直方向に移動しながらサンプリング周期ごとの時刻において点検対象の画像を撮影する。収音部２２は、撮影部２１の撮影に同期して、点検対象の位置から発せられる音を収音する。

　積層画像生成部１８は、マイクカメラ制御部１７を通じて撮影部２１が撮影した画像のデータを取得する。積層画像生成部１８は、撮影部２１に撮影された各時刻の画像からスライス画像を抽出する。この例において、スライス画像は、サンプリング周期ごとの各時刻において撮影部２１と鉛直方向の同じ高さにある点検対象の画像である。スライス画像は、例えば撮影部２１の鉛直方向の位置に対応する高さ１ピクセルの画像である。スライス画像は、高さが複数ピクセルの画像であってもよい。撮影部２１は水平方向の画像を全周にわたって撮影しているので、スライス画像は、鉛直方向を中心軸とした水平面内の方位角について展開された画像となる。積層画像生成部１８は、抽出したスライス画像を高さ方向に積層してつなぎ合わせることで積層画像のデータを生成する。撮影部２１は点検対象に沿って移動するので、積層画像は、鉛直方向に長い点検対象を一覧できる画像となる。積層画像生成部１８は、生成した積層画像のデータを重畳部２０に出力する。

　音源方向推定部１９は、マイクカメラ制御部１７を通じて収音部２２が収音した音のデータを取得する。音源方向推定部１９は、撮影部２１による各時刻の撮影に同期して収音された音について、鉛直方向を中心軸とした水平面内の方位角のうちから音源の方向を推定する。例えば収音部２２が音響インテンシティを計測する場合に、音源方向推定部１９は、方位角に対して音響インテンシティの水平成分を抽出する。音源方向推定部１９は、例えば音響インテンシティのピークに対応する方位角を音源の方向として推定する。この例において、音源方向推定部１９は、Ｎを予め設定された自然数として、高い方から順に高々Ｎ個のピークを検出する。Ｎは、例えば２である。音源方向推定部１９は、Ｎ＋１番目に高いピークを検出しなくてもよい。なお、音源方向推定部１９は、予め設定された閾値より低いピークを検出しなくてもよい。この例において、音源方向の推定についての方位角の分解能は、積層画像の方位角方向の分解能より低い。すなわち、音源方向の推定についての方位角の分割数は、積層画像の横方向の画素数より小さい。音源方向推定部１９は、各時刻に収音された音について音源の方向として推定した方位角の情報に基づいて、方向推定のデータを生成する。音源方向推定部１９は、方向推定のデータを重畳部２０に出力する。

　重畳部２０は、積層画像のデータおよび方向推定のデータに基づいて重畳画像のデータを例えば次のように生成する。

　まず、重畳部２０は、重畳画像についてブロックを設定する。ブロックは、重畳画像において音源の位置を表す表示の単位となる範囲である。音源の位置を表す表示は、例えば重畳画像に重畳される色またはアイコンなどである。この例において、ブロックは、積層画像を横方向および縦方向に格子状に区切る複数の領域の各々である。横方向は、第１方向に垂直な方向である。この例において、横方向は、鉛直方向を中心軸とした水平面内の方位角に対応する周方向である。縦方向は、第１方向に沿う方向である。この例において、縦方向は、鉛直方向に対応する軸方向である。積層画像は点検対象に沿って移動しながら撮影されたスライス画像をつなぎ合わせて生成された画像であるので、縦方向は、観測部による観測が行われた時刻に対応する方向でもある。

　重畳部２０は、例えば横方向のブロック数を音源方向の推定についての方位角の分割数に設定する。このとき、横方向のブロック当たりの画素数は、積層画像の横方向の画素数を音源方向の推定についての分割数で割った値となる。

　縦方向のブロック数の設定方法は、点検対象に応じて予め設定される。縦方向のブロック数は、重畳画像において１ブロックの大きさの表示が視認しやすいように設定される。重畳部２０は、例えば縦方向のブロック当たりの画素数が横方向のブロック当たりの画素数と同程度になるように縦方向のブロック数を設定する。このとき、縦方向のブロックは、複数のサンプリング周期にわたる期間に対応する。すなわち、縦方向のブロックは、複数のフレームに対応する。

　次に、重畳部２０は、横方向のブロックの１つに対応する方位角を選択する。

　重畳部２０は、方向推定のデータを縦方向に走査して、縦方向のブロックの各々のスコアを算出する。重畳部２０は、例えば縦方向の１つのブロックに対応する期間において、当該ブロックに対応する方位角が音源の方向として推定されているかを判定する。当該ブロックの方位角が音源の方向として推定されているときに、重畳部２０は、当該ブロックの期間において収音された音の特徴量を算出する。特徴量は、例えば音の波形の特徴を表す量である。音の波形の特徴は、例えば音の大きさで規格化されたデータの特徴量などの音の大きさによらない特徴であってもよい。音の波形の特徴は、例えばフーリエ変換またはウェーブレット変換などによって得られる周波数特性などであってもよい。重畳部２０は、音の特徴量に基づいてブロックのスコアを算出する。重畳部２０は、ブロックの期間に含まれる各時刻において収音された音の各々について特徴量を算出し、算出した特徴量の最大値または平均値などの代表値に基づいて当該ブロックのスコアを算出してもよい。図３において、算出されたスコアの例が「１」または「２」などの数値によって示されている。一方、ブロックの方位角が音源の方向として推定されていないときに、重畳部２０は、当該ブロックのスコアを例えば最低値の０として算出する。

　重畳部２０は、算出したスコアに基づいて、積層画像の各ブロックの上に重畳する表示を設定する。重畳部２０は、例えばスコアが最低値のブロックに対して、表示の重畳を行わないように設定する。この例において、重畳部２０は、算出したスコアに基づいて、各ブロックに対応する表示の表示方法を変更する。表示方法は、例えば表示の色、表示の透明度、または表示に対応するアイコンの種類もしくは大きさなどである。このように設定される表示は、音源の位置の推定結果に対応している。

　同様に、重畳部２０は、他の方位角についても、スコアの算出および積層画像の上に重畳する表示の設定を行う。

　重畳部２０は、各ブロックについて設定した表示を積層画像の上に重畳した重畳画像のデータを生成する。このとき、重畳部２０は、各ブロックに対応する音を重畳画像のデータに含めてもよい。ブロックに対応する音は、例えば当該ブロックの期間に収音された音である。また、重畳部２０は、各ブロックに対応する付加情報を重畳画像のデータに含めてもよい。ブロックに対応する付加情報は、例えば当該ブロックの位置に対応する点検対象の機器を表す機器名などの情報である。付加情報は、例えば積層画像または積層画像のもとになる撮影部２１が撮影した画像などを重畳部２０が画像処理することで取得した情報であってもよい。

　重畳部２０は、生成した重畳画像のデータを制御盤１１に出力する。情報端末１５は、第２接続部２６および第１接続部２４を通じて、制御盤１１から重畳画像のデータを取得する。

　表示部２７は、取得したデータが表す重畳画像を表示する。作業員は、重畳画像を見て音が発生した箇所を確認する。ここで、作業員は、音が発生した箇所を表示部２７において選択する。作業員は、例えば音源の位置を表す表示が重畳されているブロックを選択する。このとき、発音部２８は、重畳画像のデータに含まれている当該ブロックに対応する音を発する。また、表示部２７は、重畳画像のデータに含まれている当該ブロックに対応する付加情報を表示する。発音部２８が発する音および表示部２７の表示によって、作業員は、発生した音の原因を推定する。これにより、作業員は、当該音の発生源に対する対処の要否を判断できる。

　作業員は、例えば釣合い錘１０の位置に音源の表示がある場合に、釣合い錘１０に異常音が発生している可能性があると判断する。作業員は、例えば乗場ドア６の位置に音源の表示がある場合に、乗場ドア６に異常音が発生している可能性があると判断する。作業員は、例えばガイドレール４に沿った位置に音源の表示がある場合に、ガイドシュー１３とガイドレール４との摩擦音が発生している可能性があると判断する。作業員は、例えば点検対象がない昇降路３の位置に音源の表示がある場合に、例えばエレベーター２以外の機器などの点検対象以外から音が発生している可能性があると判断する。

　続いて、点検補助システム１の動作の例を説明する。
　図４は、実施の形態１に係る点検補助システムの動作の例を示すフローチャートである。
　図４において、重畳画像の生成に係る点検補助システム１の動作の例が示される。

　ステップＳ１において、重畳部２０は、積層画像のデータおよび方向推定のデータを積層画像生成部１８および音源方向推定部１９から取得する。その後、点検補助システム１の動作は、ステップＳ２に進む。

　ステップＳ２において、重畳部２０は、横方向のブロック数を設定する。この例において、重畳部２０は、横方向のブロック当たりの画素数が積層画像の横方向の画素数を音源方向の推定についての分割数で割った値となるように設定する。その後、点検補助システム１の動作は、ステップＳ３に進む。

　ステップＳ３において、重畳部２０は、縦方向のブロック数を設定する。この例において、重畳部２０は、縦方向のブロックが複数のフレームに対応するように設定する。その後、点検補助システム１の動作は、ステップＳ４に進む。

　ステップＳ４において、重畳部２０は、各ブロックについてスコアを算出する。重畳部２０は、算出したスコアに基づいて積層画像の上に重畳する表示の設定を行う。その後、点検補助システム１の動作は、ステップＳ５に進む。

　ステップＳ５において、重畳部２０は、各ブロックについて設定した表示を積層画像の上に重畳することで重畳画像のデータを生成する。その後、重畳画像の生成に係る点検補助システム１の動作は、終了する。

　以上に説明したように、実施の形態１に係る点検補助システム１は、観測部と、積層画像生成部１８と、音源方向推定部１９と、重畳部２０と、を備える。観測部は、点検対象に沿って移動しながら、複数の時刻において点検対象の画像の撮影および音の収音を行う。画像の撮影および音の収集は、例えばサンプリング周期ごとの時刻において行われる。点検対象は、第１方向に長い。積層画像生成部１８は、観測部が撮影した各時刻の画像からスライス画像を抽出する。スライス画像は、第１方向を中心軸とする方位角について展開した画像である。積層画像生成部１８は、抽出したスライス画像をつなぎ合わせて積層画像のデータを生成する。音源方向推定部１９は、第１方向を中心軸とする方位角のうちから観測部が収音した各時刻の音の音源の方向を推定する。音源方向推定部１９は、各時刻の音について推定した音源の方向から方向推定のデータを生成する。重畳部２０は、方向推定のデータに基づいて重畳画像のデータを生成する。重畳画像は、積層画像に音源の位置を表す表示を重畳した画像である。

　積層画像は、スライス画像をつなぎ合わせることによって、第１方向に長い点検対象を一覧しうるように生成されている。重畳画像は、積層画像に音源の位置を表す表示を重畳した画像である。このため、作業員は、重畳画像によって、音が発生した箇所を一見して効率的に把握できる。また、重畳画像は、静止画像であるため、点検報告書などに載せることができる。これにより、点検の報告を視覚的にわかりやすい形で行うことができる。

　また、点検補助システム１は、表示部２７を備える。表示部２７は、重畳部２０がデータを生成した重畳画像を表示する。
　また、点検補助システム１は、発音部２８を備える。発音部２８は、表示部２７に表示される重畳画像において画像上の位置が指定されるときに、当該位置に対応するスライス画像についての撮影の時刻に収音された音を発する。ここで、画像上の位置は、例えば重畳画像において表示が重畳されているブロック上の位置である。当該位置に対応するスライス画像は、例えば当該ブロックの範囲に重なるスライス画像である。
　また、重畳部２０は、重畳画像における画像上の位置に対応する付加情報を含めて重畳画像のデータを生成する。表示部２７は、重畳画像において画像上の位置が指定されるときに、当該位置に対応する付加情報を表示する。

　重畳画像の表示および音によって、作業員は、発生した音の原因を推定できる。これにより、作業員は、当該音の発生源に対する対処の要否を判断できる。点検対象の各機器の点検の前に重畳画像を確認することによって、作業員は、点検作業を効率化できる。

　また、重畳部２０は、観測部が収音した各時刻の音の特徴量を算出する。重畳部２０は、特徴量に応じて音源の位置を表す表示の表示方法を変更する。
　また、重畳部２０は、音の波形の特徴を表す量を特徴量として算出する。

　これにより、重畳画像による音源の位置の表示は、発生した音の特徴を反映するようになる。点検対象の異常などによって音が発生する場合に、発生する音は当該異常に応じた特徴を有することがある。このため、重畳画像における表示に基づいて、作業員は、発生した音の原因をより効率的に推定できるようになる。また、音の大きさは、音源と観測部との距離などの位置関係によって変動しうる。音の波形の特徴が反映された表示によって、作業員は、音源と観測部との位置関係によらずに音の原因を推定できる。

　また、重畳部２０は、観測部による複数の画像の撮影の時刻にわたる期間に対応する重畳画像上の範囲を１つのブロックとする。当該期間は、例えば複数のサンプリング周期にわたる期間である。重畳部２０は、１つのブロックに含まれる時刻に観測部が収音した音の音源の位置を表す表示を、当該ブロックに対応する範囲に重畳して重畳画像のデータを生成する。

　これにより、サンプリング周期などの観測に係る周期が短い場合においても、音源の位置の表示の視認性を高めることができる。このため、作業員は、音が発生した箇所をより効率的に把握できる。

　なお、点検補助装置１４は、かご９の上またはかご９の下などに設けられる常設の装置であってもよい。このとき、作業員は、昇降路３の内部に立ち入ることなく点検対象の状況を把握できる。情報端末１５は、エレベーター２が設けられる建築物の外部から通信ネットワークなどを経由して重畳画像のデータを取得してもよい。作業員は、エレベーター２が設けられる建築物の遠隔地から点検対象の状況を把握できる。作業員は、点検対象の状況に応じた点検の準備などを事前に行うことができる。

　また、付加情報は、追記可能な情報であってもよい。このとき、付加情報は、例えば作業員によって点検の前または後に追記されてもよい。追記する内容は、点検作業の作業項目のリスト、または点検作業の作業実績などである。これにより、点検漏れなどが防がれる。また、点検報告書に重畳画像を載せる場合などに、点検の報告が視覚的にわかりやすくなる。

　また、重畳画像におけるブロックは、格子状に区切られた領域でなくてもよい。ブロックは、互いに重なりを持ちうる範囲であってもよい。ブロックは、例えば方向推定のデータを走査するときに互いに重なる一定の幅の範囲であってもよい。あるいは、ブロックは、例えば重畳画像において音源の位置を中心とする円などの範囲の内部であってもよい。重畳部２０は、方向推定のデータを縦方向および横方向の順に走査しなくてもよい。

　また、情報端末１５および点検補助装置１４は、制御盤１１を介さずに通信してもよい。このとき、情報端末１５および点検補助装置１４は、例えば無線通信によって接続される。積層画像生成部１８、音源方向推定部１９、または重畳部２０の全部または一部は、情報端末１５に設けられてもよい。点検補助システム１の観測部、積層画像生成部１８、音源方向推定部１９、重畳部２０、表示部２７、および発音部２８などの各部分の一部または全部は、一体の装置に設けられてもよい。点検補助システム１の各部分の一部または全部は、個別の装置に設けられてもよい。

　また、観測部は、画像の撮影および音の収音のサンプリング周期を同期して観測しなくてもよい。このとき、観測部は、画像を撮影した時刻および音を収音した時刻が互いに対応付けられる形式で観測を行う。

　また、昇降機は、エスカレーターまたは動く歩道などの乗客コンベアであってもよい。このとき、第１方向は、水平方向または斜め方向であってもよい。

　続いて、図５を用いて点検補助システム１の主要部のハードウェア構成の例を説明する。
　図５は、実施の形態１に係る点検補助システムの主要部のハードウェア構成図である。

　点検補助システム１の各機能は、処理回路により実現しうる。処理回路は、少なくとも１つのプロセッサ１ｂと少なくとも１つのメモリ１ｃとを備える。処理回路は、プロセッサ１ｂおよびメモリ１ｃと共に、あるいはそれらの代用として、少なくとも１つの専用のハードウェア１ａを備えてもよい。

　処理回路がプロセッサ１ｂとメモリ１ｃとを備える場合、点検補助システム１の各機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせで実現される。ソフトウェアおよびファームウェアの少なくとも一方は、プログラムとして記述される。そのプログラムはメモリ１ｃに格納される。プロセッサ１ｂは、メモリ１ｃに記憶されたプログラムを読み出して実行することにより、点検補助システム１の各機能を実現する。

　プロセッサ１ｂは、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、ＤＳＰともいう。メモリ１ｃは、例えば、ＲＡＭ、ＲＯＭ、フラッシュメモリ、ＥＰＲＯＭ、ＥＥＰＲＯＭ等の、不揮発性または揮発性の半導体メモリ、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤ等により構成される。

　処理回路が専用のハードウェア１ａを備える場合、処理回路は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、またはこれらの組み合わせで実現される。

　点検補助システム１の各機能は、それぞれ処理回路で実現することができる。あるいは、点検補助システム１の各機能は、まとめて処理回路で実現することもできる。点検補助システム１の各機能について、一部を専用のハードウェア１ａで実現し、他部をソフトウェアまたはファームウェアで実現してもよい。このように、処理回路は、専用のハードウェア１ａ、ソフトウェア、ファームウェア、またはこれらの組み合わせで点検補助システム１の各機能を実現する。

　本開示に係る点検補助システムは、昇降機の点検作業に適用できる。

　１　点検補助システム、　２　エレベーター、　３　昇降路、　４　ガイドレール、　５　乗場、　６　乗場ドア、　７　巻上機、　８　主ロープ、　９　かご、　１０　釣合い錘、　１１　制御盤、　１２　かごドア、　１３　ガイドシュー、　１４　点検補助装置、　１５　情報端末、　１６　マイクカメラ、　１７　マイクカメラ制御部、　１８　積層画像生成部、　１９　音源方向推定部、　２０　重畳部、　２１　撮影部、　２２　収音部、　２３　エレベーター制御部、　２４　第１接続部、　２５　点検指令送信部、　２６　第２接続部、　２７　表示部、　２８　発音部、　１ａ　ハードウェア、　１ｂ　プロセッサ、　１ｃ　メモリ

Claims

　第１方向に長い点検対象に沿って移動しながら、複数の時刻において前記点検対象の画像の撮影および音の収音を行う観測部と、
　前記第１方向を中心軸とする方位角について展開したスライス画像を前記観測部が撮影した各時刻の画像から抽出し、抽出した前記スライス画像をつなぎ合わせて積層画像のデータを生成する積層画像生成部と、
　前記第１方向を中心軸とする方位角のうちから前記観測部が収音した各時刻の音の音源の方向を推定し、各時刻の音について推定した音源の方向から方向推定のデータを生成する音源方向推定部と、
　前記方向推定のデータに基づいて、前記積層画像に音源の位置を表す表示を重畳した重畳画像のデータを生成する重畳部と、
　を備える昇降機の点検補助システム。
　前記重畳部がデータを生成した前記重畳画像を表示する表示部
　を備える請求項１に記載の昇降機の点検補助システム。
　前記表示部に表示される前記重畳画像において画像上の位置が指定されるときに、当該位置に対応する前記スライス画像についての撮影の時刻に収音された音を発する発音部
　を備える請求項２に記載の昇降機の点検補助システム。
　前記重畳部は、前記重畳画像における画像上の位置に対応する付加情報を含めて前記重畳画像のデータを生成し、
　前記表示部は、前記重畳画像において画像上の位置が指定されるときに、当該位置に対応する前記付加情報を表示する
　請求項２または請求項３に記載の昇降機の点検補助システム。
　前記重畳部は、前記観測部が収音した各時刻の音の特徴量を算出し、前記特徴量に応じて音源の位置を表す表示の表示方法を変更する
　請求項１から請求項４のいずれか一項に記載の昇降機の点検補助システム。
　前記重畳部は、音の波形の特徴を表す量を前記特徴量として算出する
　請求項５に記載の昇降機の点検補助システム。
　前記重畳部は、前記観測部が音を収音した時刻を含み前記観測部による複数の画像の撮影の時刻にわたる期間に対応する前記重畳画像上の範囲を１つのブロックとして、当該音の音源の位置を表す表示を当該ブロックに対応する範囲に重畳した前記重畳画像のデータを生成する
　請求項１から請求項６のいずれか一項に記載の昇降機の点検補助システム。