JP2021011136A - 信号検出装置 - Google Patents

Abstract

【課題】不規則な変動等に起因する点滅周期に関するノイズの影響を抑制して検出すべき点滅動作を的確かつ確実に検出できる信号検出装置を提供すること。【解決手段】連続画像を撮像する撮像部１０と、連続画像における輝度の周波数スペクトルに関して平均及び分散を算出する周波数演算部２０ｃとを備え、周波数演算部２０ｃにより算出された平均及び分散に基づき所定対象物たる特殊信号発光機２００の点滅を検出する。これにより、不規則な変動等のノイズが影響しても、これに基づく誤検出を回避あるいは抑制し、検出すべき点滅動作の有無すなわち検出すべき信号の有無を的確かつ確実に判断できる。【選択図】図３

Description

本発明は、例えば特殊信号発光機における発光等の信号を検出する信号検出装置に関する。

列車の運転士に列車運行情報を伝達する装置である鉄道信号機では、例えば色灯の点灯又は消灯を運転士が目視確認することで信号の伝達がなされる。このため、運転士が見落とさないように、鉄道信号機の視認可否を確認すべく、例えば、赤外線発光器を鉄道信号機に取り付け、赤外線発光器からの赤外線発光を赤外線ビデオカメラで撮影するものが知られている（特許文献１参照）。なお、特許文献１において、鉄道信号機とは、鉄道用色灯式信号機、標識又は特殊信号発光機である、とされている。すなわち、特殊信号発光機が鉄道信号機の一態様に含まれるものとされている。

また、特殊信号発光機の視認可否の確認において、特殊信号発光機等において現存するケーブルをそのまま利用できるように、内部構造において断線検出を行うものも知られている（特許文献２参照）。

しかし、上記特許文献１のように、赤外線発光器を利用するには、発光を行う既設の信号機等の装置に赤外線発光器を取り付けるといった改修を加える必要があり、改修の時間や労力等が莫大なものになるという問題がある。また、上記引用文献２においても、断線検出を行うための構造を新たに設ける必要があると考えられる。

さらに、例えば走行する列車に搭載された撮像部での撮像により、特殊信号発光機等を捉えるに際して、光を発する物体が画面内に占める面積が不規則に変動することで、実際には特殊信号発光機が点滅していない場合であるにもかかわらず、特殊信号発光機の発生時と同等の点滅周期が検出されてしまう可能性がある、すなわち誤検出が生じる可能性がある。

特許第４９２５９８７号公報 特開２０１５−１７８３５７号公報

本発明は上記した点に鑑みてなされたものであり、不規則な変動等に起因する点滅周期に関するノイズの影響を抑制して検出すべき点滅動作を的確かつ確実に検出できる信号検出装置を提供することを目的とする。

上記目的を達成するための信号検出装置は、連続画像を撮像する撮像部と、連続画像における輝度の周波数スペクトルに関して平均及び分散を算出する周波数演算部とを備え、周波数演算部により算出された平均及び分散に基づき所定対象物の点滅を検出する。

上記信号検出装置では、周波数演算部により算出された平均及び分散に基づき所定対象物の点滅を検出することで、不規則な変動等のノイズが影響しても、これに基づく誤検出を回避あるいは抑制し、検出すべき点滅動作の有無すなわち検出すべき信号の有無を的確かつ確実に判断できる。

本発明の具体的な側面では、周波数演算部において検出される輝度の周波数スペクトルのうち、所定対象物の点滅周期に対応する成分と所定対象物の点滅周期以外の成分とを比較して、所定対象物の点滅を検出する。この場合、当該比較に基づいて、所定対象物の点滅の発生であるか、不規則な変動であるかを判断できる。

本発明の別の側面では、所定対象物は、特殊信号発光機である。この場合、特殊信号発光機の点滅の発生を識別できる。

本発明のさらに別の側面では、周波数演算部は、検出される輝度の周波数スペクトルの全周波数についての平均及び分散を算出する。この場合、輝度の周波数スペクトル全体についての平均及び分散に基づいて、所定対象物の点滅であるか否かを判定できる。

本発明のさらに別の側面では、周波数演算部は、検出される輝度の周波数スペクトルのうち特定の周波数成分を除去したものについての平均及び分散を算出する。この場合、特性の違いをより顕著に示す平均及び分散に基づいて、所定対象物の点滅であるか否かを判定できる。

本発明のさらに別の側面では、周波数演算部での算出において、除去の対象となる特定の周波数成分に特発周波数成分及び直流成分のうち少なくともいずれかを含む。この場合、ノイズとなり得る成分の特性をより顕著に示す平均及び分散に基づいて、所定対象物の点滅であるか否かを判定できる。

本発明のさらに別の側面では、周波数演算部は、輝度の周波数スペクトルに関して正規化された成分値を算出する。この場合、画一的な判定基準を設けることができる。

本発明のさらに別の側面では、周波数演算部は、分散について設定した下限値に基づき成分値を定める。この場合、分散の値が小さくなり過ぎることに起因する誤検知を抑制できる。

本発明のさらに別の側面では、撮像部で取得した連続画像について、対象外波長帯域の成分検出に基づきノイズ領域を除去するノイズ除去部を備え、周波数演算部は、ノイズ除去部によりノイズ領域を除去した連続画像の輝度の周波数スペクトルに関して平均及び分散を算出する。この場合、特殊信号発光機等の所定対象物から発光される光以外に由来する成分をノイズとして除去したものについて、判定できる。

本発明のさらに別の側面では、周波数演算部は、連続画像の全体に対して、フーリエ変換処理して輝度の周波数スペクトルを抽出する。この場合、フーリエ変換処理を施すことで、検出すべき信号の有無を判断できる。

本発明のさらに別の側面では、所定対象物における発光有りと判断された場合に、報知を行う報知部を備える。この場合、特殊信号発光機が作動することに基づく異常事態発生について、信号検出装置の側において、特殊信号発光機による伝達とは別の方法で報知を行うことができる。

本発明のさらに別の側面では、報知部は、警報を発する音声部である。この場合、特殊信号発光機が作動することに基づく異常事態発生について、信号検出装置の側において警報による音声での報知ができる。

第１実施形態に係る信号検出装置としての特殊信号検出装置の一例についての概要を説明するための概念図である。 特殊信号発光機の外観について一例を示す正面図である。 （Ａ）は、特殊信号検出装置の一構成例について説明するためのブロック図であり、（Ｂ）は、特殊信号検出装置における演算処理について一例を説明するためのブロック図である。 （Ａ）は、処理対象となる複数のフレームからなる全体画像についての概念図であり、（Ｂ）は、（Ａ）の全体画像に対する処理結果から得られる輝度についての周波数に関する振幅データを示す周波数スペクトルのグラフである。 （Ａ）は、特殊信号発光機の点滅時における周波数スペクトルの典型的一例を示すグラフであり、（Ｂ）は、特殊信号発光機の点滅ではなくノイズの発生における周波数スペクトルの典型的一例を示すグラフである。 平均及び分散の算出対象となる周波数成分の選択について一例を説明するためのグラフである。 特殊信号検出装置の動作についての一例を説明するためのフローチャートである。 特殊信号発光機の周波数成分の検出に関する一例を説明するためのフローチャートである。 （Ａ）は、第２実施形態に係る信号検出装置としての特殊信号検出装置の一構成例について説明するためのブロック図であり、（Ｂ）は、特殊信号検出装置における各種処理について一例を説明するためのブロック図である。 特殊信号検出装置の動作についての一例を説明するためのフローチャートである。 平均及び分散の算出対象となる周波数成分の選択について一例を説明するためのグラフである。 正規化の方法について一例と他の一例の際を説明するためのグラフである。 （Ａ）は、平均及び分散の算出対象となる周波数成分の選択について他の一例を説明するためのグラフであり、（Ｂ）は、平均及び分散の算出対象となる周波数成分の選択についてさらに他の一例を説明するためのグラフである。 撮像部の他の一構成例について説明するためのブロック図である。

〔第１実施形態〕
以下、図１等を参照して、本発明の第１実施形態に係る信号検出装置としての特殊信号検出装置について、一例を説明する。図１は、本実施形態に係る特殊信号検出装置１００の一例についての概要を説明するための概念図であり、図１では、特殊信号検出装置１００を搭載した鉄道の列車ＴＲや、列車ＴＲが走行する専用走行路である線路ＲＲの脇に設置された特殊信号発光機２００（以下、特殊信号発光機を単に特発とも言う。）を含む地上側の特殊信号発生システムＳＧの様子を示している。特に、ここでは、列車ＴＲが走行する線路ＲＲの脇に設置された特殊信号発光機２００で異常事態の発生を示す赤色光の点滅動作がなされた場合にこれを列車ＴＲに搭載された特殊信号検出装置１００において確認する場合についての様子を概略的に示している。

以上のような構成の前提として、図示の例では、まず、列車ＴＲに搭載されている特殊信号検出装置１００は、移動体である列車ＴＲの進行方向（矢印Ａ１で示す方向）前方に設置されている。より具体的には、一部拡大して示すように、特殊信号検出装置１００は、例えば、カメラ等で構成される撮像部１０を備え、さらに、列車ＴＲの車内（特に運転士）に報知するための報知部ＩＰとしてスピーカーやモニター等で構成される音声部３０や表示部４０を備え、また、これらを統括制御するための管理装置ＭＣを備える。特殊信号検出装置１００は、撮像部１０を列車ＴＲの進行方向前方に向けて配置して前方の特殊信号発光機２００を捉え、撮像部１０での特殊信号発光機２００についての画像データを管理装置ＭＣにおいて処理することで、異常事態の発生を示す点滅動作がなされているかを確認し、必要に応じて、確認結果に基づく車内への報知を報知部ＩＰによって行う。

ここで、既述のように、図１では、上記した特殊信号検出装置１００に関するもののほか、特殊信号発光機２００を含む地上側の特殊信号発生システムＳＧについても例示している。ここでは、一例として、特殊信号発生システムＳＧは、踏切ＣＲに設けられており、踏切ＣＲに連動する非常ボタンＥＢに加え、非常ボタンＥＢが押されることで発動する特殊信号発光機２００を有した構成となっている。この場合、例えば図示のように、踏切ＣＲ内において自動車等の車両ＶＥが立ち往生して非常ボタンＥＢが押されると、特殊信号発光機２００が赤色光による所定の点滅動作を開始することで、踏切ＣＲに近づく列車ＴＲへの点滅表示による緊急事態発生の連絡がなされる。

以下、本実施形態の特殊信号検出装置１００を説明するための前提として、まず、特殊信号発光機２００の構造等について、図２を参照して説明する。なお、ここでの例では、特殊信号発光機２００は、踏切付近に設けられるものとしているが、この他、落石のおそれがある場所等、異常事態が発生する可能性のある種々の場所に設置されている。

図２に外観の一例を示すように、ここでの特殊信号発光機２００は、前面２００ａに配された多数の線状に並ぶＬＥＤ光源ＬＳを赤色に発光させて点滅することにより、踏切等で異常が発生したなどの情報を運転士などに伝えている。すなわち、前面２００ａが列車ＴＲに配置された特殊信号検出装置１００（図１等参照）に向けられるように、特殊信号発光機２００は線路脇に設置されている。

特殊信号発光機２００での点滅動作の一例として、ここでは、１分間に５００回程度で点滅の動作をするものとする。言い換えると、特殊信号発光機２００での点滅動作についての周波数は、８．３Ｈｚ程度になっている。この周波数８．３Ｈｚは、特殊信号発光機２００での点滅動作を示す特殊信号発光機２００に固有の周波数であると考えることができる。以下では、この周波数８．３Ｈｚを、特発点滅周波数、あるいは特発周波数と呼ぶ。なお、上記のような点滅動作については、全ての特殊信号発光機２００において共通している。すなわち、２以上の特殊信号発光機２００が存在する場合、各特殊信号発光機２００のいずれもが、周波数８．３Ｈｚを特発点滅周波数として点滅動作をする。

以上のように、特殊信号発光機２００は、異常発生を知らせるための動作として、一定の特定周期で赤色をすなわち特定周波数帯域の光を点滅する。なお、特殊信号発光機２００の発光に採用する特定周波数帯域の光について、具体的一例としては、赤色ＬＥＤとして、ピーク波長６６０ｎｍ、半値幅２０ｎｍのものとすることが考えられる。

また、以上のような特殊信号発光機２００の点滅周期の検出方法として、ここでは、フーリエ変換を利用している。ここでのフーリエ変換とは、撮像部１０で取得した時系列のデータを周波数成分ごとの大きさに変換する手法であり、例えば撮像部１０で取得した連続画像から抽出した連続部分画像全体の輝度に対して複数フレームごとにフーリエ変換を行うことで、特殊信号発光機２００での点滅周期を検出できる。つまり、フーリエ変換処理をすることで特殊信号発光機２００での点滅動作の周期すなわち周波数を捉え、確実な特殊信号発光機２００の動作検出を可能にしている。言い換えると、連続部分画像についてフーリエ変換処理を施すことで、各部分画像中の輝度に関する周波数特性を抽出した場合に、上記特発点滅周波数が存在するか否かによって特殊信号発光機２００において点滅動作の発光がなされているか否かを判定する。

また、上記のような解析の結果、特殊信号発光機２００において点滅動作する発光有りと判断された場合には、報知部ＩＰにより報知を行う。すなわち、特殊信号検出装置１００側において、特殊信号発光機２００による伝達とは別の方法で運転士に対して報知を行うことができるようにしている。

ここで、上記のような特殊信号発光機２００での点滅動作による緊急事態発生の検知において、実際には特殊信号発光機２００が点滅していない場合であるにもかかわらず、特殊信号発光機２００の発生時と同等の点滅周期が検出されてしまう可能性がある、すなわち誤検出が生じる可能性がある。例えば、列車ＴＲが走行することに起因して、列車ＴＲに搭載されている撮像部１０による撮像に際して、被写体のうち光を発する物体の画面内に占める面積が、不規則に変動することで、特発点滅周波数（特発周波数）と同等の条件を満たす点滅周期が検出され得る。

以上に対して、本実施形態の特殊信号検出装置１００では、上記に例示したような不規則な変動等のノイズが影響しても、これに基づく特殊信号発光機２００に関する誤検出を回避あるいは抑制し、検出すべき点滅動作の有無すなわち検出すべき信号の有無を的確かつ確実に判断できるための構成を有している。

以下、図３（Ａ）及び図３（Ｂ）のブロック図を参照して、特殊信号検出装置１００における構成及び特殊信号検出装置１００を構成する各部の機能等について説明する。

図３（Ａ）に示すように、また、図１を参照して既述のように、特殊信号検出装置１００は、撮像部１０と、管理装置ＭＣと、報知部ＩＰとを備える。このうち、管理装置ＭＣは、図示のように、各種画像処理を行う画像処理部２０と、各種データを記憶する記憶装置５０と、各部の動作を司る制御部６０とを備える。なお、報知部ＩＰは、図示のように、また、既述のように、音声部３０と、表示部４０とを備える。

特殊信号検出装置１００のうち、まず、撮像部１０は、カメラ等で構成されており、例示するように、撮像用のレンズＬＬと、ＣＭＯＳやＣＣＤ等で構成される撮像素子（受光素子）ＳＤとを有し、動画すなわち連続画像を撮像することが可能であり、撮像により取得した画像データを管理装置ＭＣ（図３（Ａ）参照）に送信する。ここでの連続画像として、例えば３０ｆｐｓ程度での動画の録画が可能となっている。したがって、８．３Ｈｚ程度で点滅する特殊信号発光機２００の発光動作についてであれば、数フレーム程度で１回分の点滅動作を捉えることになる。

次に、図３（Ａ）に示すように、管理装置ＭＣのうち、画像処理部２０は、例えばＧＰＵ等で構成され、撮像部１０で取得した連続画像について各種処理を行う。特に、ここでは、画像処理部２０は、撮像部１０で取得した連続画像について、輝度の周波数に関する各種演算を行う周波数演算部２０ｃを有する。周波数演算部２０ｃは、例えば、連続画像における輝度の周波数スペクトルに関して平均及び分散を算出し、さらに、平均及び分散に基づいて周波数スペクトルに関する正規化をすることで、平均及び分散に基づき所定対象物たる特殊信号発光機２００の点滅の有無を検出するための判断指標を作成する。なお、周波数演算部２０ｃは、上記のような周波数スペクトルに関する演算を行うための前提として、上述したフーリエ変換処理を施すための変換処理部２０ｆを有する。また、変換処理部２０ｆでは、フーリエ変換処理の一例として高速フーリエ変換（ＦＦＴ）を用いるものとする。

次に、管理装置ＭＣのうち、記憶装置５０は、例えばストレージデバイス等で構成され、各種データ等を格納する。すなわち、記憶装置５０は、撮像部１０で取得されたデータやこれを画像処理部２０の周波数演算部２０ｃにおいて加工したデータ等の各種画像データを格納する録画装置として機能するほか、例えば、特殊信号発光機２００における発光での点滅周期（点滅周波数）や周波数演算部２０ｃでの算出結果に基づく判定を行うための各種閾値等の各種データ、さらに、画像処理部２０の周波数演算部２０ｃのうち、変換処理部２０ｆでの高速フーリエ変換（ＦＦＴ）の処理を行うためのプログラムや、平均や分散等を算出するための演算プログラム等の各種プログラムを格納する。

次に、管理装置ＭＣのうち、制御部６０は、例えばＣＰＵ等で構成されて、特殊信号検出装置１００を構成する各部の動作を統括制御する。すなわち、処理に応じて必要なデータやプログラムを記憶装置５０から適宜読み出して、各種指令を行う。また、制御部６０は、画像処理部２０の周波数演算部２０ｃによる平均及び分散等の算出結果に基づき所定対象物たる特殊信号発光機２００の点滅の有無を検出する。すなわち、制御部６０は、周波数演算部２０ｃによる算出結果に基づいて、所定周期で点滅する特殊信号発光機２００における発光の有無を判断する判断部として機能する。

次に、報知部ＩＰのうち、音声部３０は、スピーカー等で構成される。音声部３０は、例えば運転席内において十分聞こえる程度の音量で警報を発することで、運転士に対して聴覚による異常発生の報知が可能となっている。通常の運転のため、各種操作や確認を行っている運転士に対して、聴覚による異常発生通知を行うことで、より気づきやすくし、見落とす可能性を低減させることができる。

最後に、報知部ＩＰのうち、表示部４０は、モニター等で構成される。表示部４０は、例えば運転席内において運転士の眼にとまりやすい位置に配置されて文字や図柄表示、あるいは各種点滅・点灯表示等を行うことで、特殊信号発光機２００での発光による表示とは別個に、運転席内において運転士に対して視覚による異常発生の報知が可能となっている。

以下、図３（Ｂ）等を参照して、撮像部１０で取得した連続画像の処理から特殊信号発光機２００における発光の有無の判断に至るまでの一連の処理の概要を説明する。

図３（Ｂ）において一動作例を概念的に示すように、周波数演算部２０ｃにおいて、変換処理部２０ｆは、撮像部１０で取得した連像画像における点滅動作の周波数（輝度周波数）の特性を抽出すべく高速フーリエ変換処理を施す。これにより、連続画像における輝度の周波数スペクトルが算出される。周波数演算部２０ｃは、得られた周波数スペクトルに関して、平均及び分散を算出する。ここでは、さらに、周波数演算部２０ｃは、算出された平均及び分散に基づき、周波数成分についての正規化を行うものとする。判断部としての制御部６０は、輝度周波数に関して、平均及び分散から正規化された値（成分値）に基づいて、特殊信号発光機２００の発光動作の有無を判断する。

以下、図４を参照して、画像処理部２０の変換処理部２０ｆでの画像解析のための高速フーリエ変換（ＦＦＴ）についてより詳細に説明する。図４（Ａ）は、画像処理部２０での処理対象となる連続画像ＧＣ（より具体的には連続画像ＧＣの画像データあるいは連続画像データ）についての概念図であり、図示では、連続画像ＧＣを構成する各フレームＧＩｄを時系列に順次並べた様子を概念的に示している。ここでは、これらの時系列に並ぶ複数のフレームＧＩｄを取り出し、これらについて高速フーリエ変換（ＦＦＴ）を行うことで、時系列のデータを周波数成分ごとの大きさに変換している。

また、図４（Ｂ）は、図４（Ａ）に例示した連続画像ＧＣを構成する複数のフレームＧＩｄについてのフーリエ変換処理の結果から得られる輝度に関する周波数スペクトルについて示すデータの一例についてグラフで示している。図４（Ｂ）において、横軸は、周波数であり、縦軸は、振幅すなわち成分の強度を示しており、これは、各周波数で繰り返される輝度変化の度合に相当する。ここでは、この値を周波数成分とする。なお、図示の場合、特発点滅周波数（特発周波数）である８．３Ｈｚあるいはこれの近傍においてピークが発生している場合、すなわち特殊信号発光機２００での点滅動作が生じている可能性がある場合を示している。

以上において、連続画像ＧＣを構成する複数のフレームＧＩｄに関して、上記高速フーリエ変換（ＦＦＴ）による処理を可能とするために必要となるフレーム数は、特発点滅周波数とフレームレートとの関係で定まる。上記例のように、特発点滅周波数が８．３Ｈｚ程度（１分間に５００回程度の点滅）であり、撮像部１０での動画撮像が３０ｆｐｓ程度のフレームレートで処理されている場合に、図４（Ｂ）のようなデータ取得を１回行うために最低限必要な特殊信号発光機２００の点滅回数（点滅周期）を２〜３回分程度とすると、数フレームから十数フレーム分の画像データが必要となる。すなわち、数フレームから十数フレーム分のフレームＧＩｄについて高速フーリエ変換（ＦＦＴ）をすることで、判定に必要なデータが取得できる。なお、一般には、撮像部１０においては、フレームレート数が大きいほど、すなわち細かな動きを捉えられるほどより詳細な輝度変化を捉えられるが、以上の考察から、特発点滅周波数が８．３Ｈｚ程度（１分間に５００回程度の点滅）であれば、撮像部１０に３０ｆｐｓ程度の動画撮像能力があれば、必要に足る程度のデータが十分に得られると言える。

ここで、図４（Ｂ）に例示したような周波数スペクトルがフーリエ変換処理の結果として算出された場合において、実際に、特殊信号発光機２００の点滅が生じていると言えるか否かが問題となる。すなわち、特発点滅周波数に相当する周波数成分が検出されてもこれがノイズであるか否かが問題となる。

図５は、周波数スペクトルの典型例について示すグラフであり、図５（Ａ）は、特殊信号発光機２００の点滅時における周波数スペクトルの典型的一例を示すグラフであり、図５（Ｂ）は、特殊信号発光機２００の点滅ではなくノイズの発生における周波数スペクトルの典型的一例を示すグラフである。特に、図５（Ｂ）は、ノイズとして、特発点滅周波数の成分もある程度以上含んでいるものを例示している。例えば、列車ＴＲすなわち撮像部１０（図１参照）から比較的近い位置において、光を発する面積が不規則に変化するような物体が画面内を占めているような場合には、図５（Ｂ）に示されるような算出結果が特殊信号発光機２００の点滅ではなくノイズに起因して生じる可能性がある。

例えば、図５（Ａ）に示す場合のように特殊信号発光機２００の点滅が生じているのか、そうではないのかの判定に関する１つの考え方として、図中において直線Ｌ１で示す閾値を予め定めておき、領域ＣＲ１として囲って示す特発点滅周波数の範囲において、当該閾値を超える値になっているか否かで判断する、という手法が考えられる。しかしながら、このような手法をとると、図５（Ｂ）に示すようなノイズの場合も、当該閾値を超えてしまっていると、特殊信号発光機２００の点滅が生じているという誤検知を招いてしまう。

これに対して、本実施形態では、周波数スペクトルにおける分布の特性の違いを勘案することで、上記のような誤検知を回避している。図５（Ａ）の場合と図５（Ｂ）の場合とを比較すると、例えば領域ＣＲ２として囲って示す特発点滅周波数以外の範囲において、顕著な差異があると考えられる。具体的には、図５（Ａ）のように、特殊信号発光機２００の点滅を捉えている場合には、特発点滅周波数の範囲である領域ＣＲ１について比較的高い値が検出される一方、特発点滅周波数以外の範囲である領域ＣＲ２については、領域ＣＲ１と比較するとあまり高い値が検知されず、低い値となっている。これに対して、図５（Ｂ）の場合、領域ＣＲ１のみならず、領域ＣＲ２についても比較的高い値を示している。すなわち、ノイズの場合、特定の周波数（特発点滅周波数）だけでなく不特定多数の波長帯域でピークを生じている。本実施形態に係る特殊信号検出装置１００では、周波数演算部２０ｃにおいて検出される輝度の周波数スペクトルのうち、特殊信号発光機２００の点滅周期に対応する成分すなわち領域ＣＲ１に示される成分と特殊信号発光機２００の点滅周期以外の成分すなわち領域ＣＲ２に示される成分とを比較して、特殊信号発光機２００の点滅を検出することで、当該比較に基づいて、所定対象物の点滅の発生であるか、不規則な変動等のノイズであるかを判断している。

なお、図５（Ａ）の場合及び図５（Ｂ）の場合を問わず、領域ＣＲ３で示す最も低い周波数帯域では、常に直流成分が発生している。直流成分は、例えば背景画像や列車の走行に伴う不可避的な変化等に起因して発生する。

ここでは、既述のように、周波数演算部２０ｃにおいて、周波数スペクトルに関して、周波数成分の平均及び分散を算出し、算出された平均及び分散に基づいて、制御部６０により、特殊信号発光機２００における点滅動作の発生であるか否かを判断することで、上記のような周波数スペクトルにおける分布の特性の違いを的確に捉え、誤検出を抑制している。

以下、周波数演算部２０ｃにおける平均及び分散の算出等について、一例を説明する。まず、周波数演算部２０ｃは、周波数スペクトルのうち、平均及び分散の算出対象となる周波数成分の選択を行う。ここでは、一例として、図６に示すように、直流成分や特発点滅周波数あるいはその近傍の成分を含んだ全ての周波数スペクトルを算出対象として選択する。すなわち、図中に示す周波数ｆ（１）、ｆ（２）、…、ｆ（Ｎ）の全てを用いる。つまり、ここでの一例では、周波数演算部２０ｃは、検出される輝度の周波数スペクトルの全周波数についての平均及び分散を算出する。なお、図中において、特発周波数（あるいは特発点滅周波数：８．３Ｈｚ）あるいはこれに最も近い周波数を、ｆ（ｔ）とする。

選択された周波数成分に対して、周波数演算部２０ｃは、以下の式（１）、（２）にしたがって、周波数成分（振幅あるいは成分強度）の平均μ及び分散Ｖを算出する。なお、ｉ＝１、２、…、Ｎについて、Ｓ（ｆ（ｉ））は、周波数ｆ（ｉ）おける周波数成分の値を示す。したがって、例えば、Ｓ（ｆ（ｔ））は、特発周波数における周波数成分である特発周波数成分を意味する。

さらに、周波数演算部２０ｃは、以下の式（３）にしたがって、周波数成分Ｓ（ｆ（ｉ））を正規化する。すなわち、平均が０、分散が１なるように、

と規定する。なお、上記のような目的とする判断を行うための相対的な値（偏差値に相当）であるＡ（ｉ）を、成分値とする。この場合における特発周波数成分Ｓ（ｆ（ｔ））の成分値は、上式（３）から、以下の式（４）のように算出される。

この成分値Ａ（ｔ）が、ある程度以上に大きければ、周波数成分の全体的な分布を加味した相対的な関係において、特発周波数成分が他の成分に比して十分大きい、すなわち図５（Ａ）に典型例を示したように、特殊信号発光機２００の点滅が生じていると判断できる。一方、成分値Ａ（ｔ）が、ある程度以下であれば、特発周波数成分が他の成分に比して十分大きいとは言えない、すなわち図５（Ｂ）に典型例を示したように、特殊信号発光機２００の点滅が生じているのではなくノイズによるものと判断できる。したがって、成分値Ａ（ｔ）に関して、予め閾値を定めておき、算出した成分値Ａ（ｔ）が当該閾値よりも大きいか否かによって特殊信号発光機２００の点滅が生じているか否かを判定できる。すなわち、図５（Ａ）に例示するような特性を有するとの結果が得られた場合、成分値Ａ（ｔ）が当該閾値よりも大きくなり、判断部としての制御部６０は、特殊信号発光機２００における点滅動作する発光有り、との判断をし、判断結果に従って、報知部ＩＰに前方で異常が発生している旨の報知の動作を行わせる。一方、図５（Ｂ）に例示するような特性を示している場合、成分値Ａ（ｔ）が当該閾値以下となり、制御部６０は、特殊信号発光機２００における発光ではない、と判断する。以上のように、本実施形態では、周波数演算部２０ｃが、輝度の周波数スペクトルに関して正規化された成分値Ａ（ｔ）を算出し、これに基づいて判断がなされている。この場合、例えば連続画像の検出によって差異があっても、これらについて画一的な判定基準を設けて判定できることになる。

以下、図７等のフローチャートを参照して、特殊信号検出装置１００の動作についての一例を説明する。

まず、特殊信号検出装置１００の制御部６０は、撮像部１０から入力された映像（連続画像）を読み出す（ステップＳ１）。次に、制御部６０は、画像処理として、画像処理部２０に、連続画像についての画面全体の輝度を合計させ（ステップＳ２）、周波数成分に関する検出処理を行わせる（ステップＳ３）。すなわち、周波数成分の平均及び分散を算出し、さらにこれに基づく正規化を行ったものから特発周波数成分に関する値を算出する。なお、ステップＳ３の詳細については、図８を参照して後述する。

制御部６０は、ステップＳ３により取得された特発周波数成分に関する成分値について、予め定めた閾値と比較し、閾値以上である場合（ステップＳ４：Ｙｅｓ）、特殊信号発光機２００の動作が検出されたと判断し、制御部６０は、管理装置ＭＣとして、報知部ＩＰによる運転士に対する報知を行うことで、注意喚起をする（ステップＳ５）。ステップＳ５の処理の後、あるいは、ステップＳ４において、閾値以上でない場合（ステップＳ４：Ｎｏ）、制御部６０は、一連の処理動作を終了する。なお、ステップＳ５の報知部ＩＰによる報知動作については、例えば運転士による終了動作等が別途なされるまで継続される。

以下、図８のフローチャートを参照して、上記のうちステップＳ３における画像処理部２０の周波数演算部２０ｃによる演算処理について一例を説明する。まず、ステップＳ２で算出された連続画像における輝度の合計について、変換処理部２０ｆでのフーリエ変換処理（ＦＦＴ）により周波数スペクトルを算出する（ステップＳ１０１）。次に、周波数演算部２０ｃは、ステップＳ１０１で得られた周波数スペクトルに関して、図６を参照して例示したように、算出対象とすべき周波数成分の選択を行い（ステップＳ１０２）、選択された周波数成分の平均及び分散を算出し（ステップＳ１０３）、さらに、ステップＳ１０３で算出された平均及び分散に基づき周波数成分についての正規化を行う（ステップＳ１０４）。特に、ここでは、周波数成分を正規化したものについて、特発周波数（８．３Ｈｚ）に対応する特発周波数成分について、成分値Ａ（ｔ）を抽出する。以上が、ステップＳ３での処理となっている。なお、ステップＳ１０４において抽出された成分値Ａ（ｔ）が、ステップＳ４において予め定められた閾値と比較されることで、目的とする判断がなされる。

以上のように、本実施形態では、連続画像を撮像する撮像部１０と、連続画像における輝度の周波数スペクトルに関して平均及び分散を算出する周波数演算部２０ｃとを備え、周波数演算部２０ｃにより算出された平均及び分散に基づき所定対象物たる特殊信号発光機２００の点滅を検出する。この場合、周波数演算部２０ｃにより算出された平均μ及び分散Ｖに基づき特殊信号発光機２００の点滅を検出することで、不規則な変動等のノイズが影響しても、これに基づく誤検出を回避あるいは抑制し、検出すべき点滅動作の有無すなわち検出すべき信号の有無を的確かつ確実に判断できる。

〔第２実施形態〕
以下、図９等を参照して、第２実施形態に係る信号検出装置としての特殊信号検出装置の一例について説明する。なお、本実施形態に係る特殊信号検出装置は、第１実施形態の特殊信号検出装置１００の変形例であり、画像処理部においてノイズ除去部を有することを除いて第１実施形態の場合と同様であるため、各部の詳細な説明は省略する。なお、図９は、図３に対応する図である。

第１実施形態において説明したように、検出における所定対象物たる特殊信号発光機２００での発光動作は、例えば赤色ＬＥＤとして、ピーク波長６６０ｎｍ、半値幅２０ｎｍのものとする、といった特定周波数帯域の光による点滅動作となっている。

本実施形態では、この点に着目し、特殊信号検出装置１００の撮像部１０で取得した画像データから赤色成分を抽出し、連続する動画の各コマを構成するフレームに関して、現フレームと前フレームとの差分から赤色の点灯を検出している。すなわち、取得した画像データにおいて、赤色の点灯が一定フレームの周期であることを検出した場合に、特殊信号検出装置１００は、特殊信号発光機２００における発光があると判断し、スピーカーである音声部３０から警報を鳴らすようにしている。

上記態様を可能とするため、本実施形態では、図９（Ａ）及び図９（Ｂ）に示すように、画像処理部２２０において、周波数演算部２０ｃに加えて、ノイズ除去部２０ｎを有している。

ノイズ除去部２０ｎは、撮像部１０で取得した連続画像について、特殊信号発光機２００において発光される成分（特定の赤色成分）以外の成分についての検出に基づきノイズ領域を除去する。ここでは、図９（Ｂ）に例示するように、画像処理部２２０において、まず、ノイズ除去部２０ｎにより、赤色光以外のノイズを含んだ画像領域をノイズ領域とみなして除去した上で、周波数演算部２０ｃによる各種処理を施している。

上記について、より具体的に説明すると、まず、前提として、ここでは、特殊信号発光機２００からの特定波長帯域の光を検出対象としており、当該特定波長帯域を対象波長帯域とする。一方、これ以外の波長帯域を対象外波長帯域とする。本実施形態の場合、特殊信号発光機２００が赤色光の点滅動作をするため、赤色光の波長帯域が対象波長帯域であり、これ以外の波長帯域が対象外波長帯域となる。例えば緑色光の波長帯域や青色光の波長帯域が、対象外波長帯域である。

図９（Ｂ）に示すように、ノイズ除去部２０ｎは、撮像部１０で取得した連続画像を形成する画像領域において、対象外波長帯域すなわち緑色光や青色光の波長帯域の成分を検出するか否かによって画像領域中のノイズ領域を決定し、当該ノイズ領域を除去する。周波数演算部２０ｃは、ノイズ除去された連像画像における点滅動作の周波数（輝度周波数）の特性を抽出する。すなわち、変換処理部２０ｆによる高速フーリエ変換処理や、その後の各種演算処理を行う。以上のような処理がなされた画像について、判断部としての制御部６０は、輝度周波数に基づく特殊信号発光機２００の発光動作の有無を判断する。

以上のように、本実施形態では、撮像部１０で取得した連続画像について、対象外波長帯域の成分検出に基づきノイズ領域を除去するノイズ除去部２０ｎを備え、周波数演算部２０ｃは、ノイズ除去部２０ｎによりノイズ領域を除去した連続画像の輝度の周波数スペクトルに関して平均及び分散を算出している。

以下、図１０のフローチャートを参照して、特殊信号検出装置１００の動作についての一例を説明する。

まず、制御部６０は、撮像部１０から入力された映像（連続画像）を読み出し（ステップＳ１）。次に、制御部６０は、画像処理として、画像処理部２０のうちノイズ除去部２０ｎに、連続画像中に含まれる対象外波長帯域を含むノイズ領域（特に太陽光等の白色光ノイズを含むノイズ領域）を除去させる（ステップＳＡ）。ステップＳ２以降の処理については、処理対象がノイズ領域を除去した連続画像となっていることを除いて、図７の場合と同様であるので説明等を省略する。また、ステップＳ３における処理手順は、図８の場合と同様であるので説明等を省略する。

さらに、本実施形態では、上記のうち、ステップＳ３での演算処理のうち、周波数スペクトルの選択において（図８ステップＳ１０２参照）、周波数スペクトルのうち特定の周波数成分を除去したものについての平均及び分散を算出する。ここでは、図１１に示すように、除去する特定の周波数成分として、特発周波数成分及び直流成分の双方を選択している。すなわち、図中に示す周波数ｆ（１）、ｆ（２）、…、ｆ（Ｎ）のうち、特発周波数成分を含む周波数ｆ（ｔ−１）、ｆ（ｔ）、ｆ（ｔ＋１）に対応する周波数成分と、直流成分を含む周波数ｆ（１）、ｆ（２）、ｆ（３）に対応する周波数成分を平均や分散の算出対象から除外している、すなわち未選択としている。

さらに、本実施形態では、分散Ｖについて、第１実施形態に示した分散Ｖについての式（２）をそのまま採用せず、分散Ｖについて設定した下限値Ｖ_ｍｉｎに基づき新たな分散を設定している。具体的には、分散Ｖと下限値Ｖｍｉｎのうち大きい方を採用している。この場合、判断を行うための成分値Ａ（ｉ）は、式（３）を変形した以下の式（５）

で規定される。なお、分散Ｖをそのまま使用した場合と、上記の場合とを比較すると、図１２のようになる。すなわち、図１２において、曲線ＣＣ１は、分散Ｖをそのまま使用した場合を示しており、曲線ＣＣ２は、上記のように設定した下限値Ｖ_ｍｉｎを利用した場合を示している。図示から、特に、分散Ｖの値が小さくなる場合、成分値Ａ（ｉ）の値が発散しやすくなることが分かる。上記のように、設定した下限値Ｖ_ｍｉｎを利用することで、成分値Ａ（ｉ）のとりうる範囲を制限でき、かかる事態を回避できる。なお、下限値Ｖ_ｍｉｎの設定基準については、種々の態様が考えられるが、例えば、列車が走行する環境下において、どの程度分散Ｖが小さくなるかや、特殊信号発光機２００の点滅が発生していると判断すべき特発周波数のピーク値の基準設定等に応じて定めることが考えられる。

本実施形態においても、周波数演算部２０ｃにより算出された平均μ及び分散Ｖに基づき所定対象物たる特殊信号発光機２００の点滅を検出することで、不規則な変動等のノイズが影響しても、これに基づく誤検出を回避あるいは抑制し、検出すべき点滅動作の有無すなわち検出すべき信号の有無を的確かつ確実に判断できる。特に、本実施形態では、ノイズ除去部２０ｎによる除去により、特殊信号発光機等の所定対象物から発光される光以外に由来する成分をノイズとして除去したものについて、判定できる。

また、周波数演算部２０ｃにおいて、検出される輝度の周波数スペクトルのうち特定の周波数成分を除去したものについての平均及び分散を算出している、特に、特発周波数成分及び直流成分を除去の対象としていることで、ノイズとなり得る成分の特性をより顕著に示す平均及び分散に基づいて、所定対象物たる特殊信号発光機２００の点滅であるか否かを判定できる。

さらに、上記では、分散について設定した下限値に基づき成分値を定めることで、分散の値が小さくなり過ぎることに起因する誤検知を抑制できる。

なお、上記において、ノイズ除去部２０ｎによって除去すべきノイズ領域の特定は、画素単位で行ってもよいが、これに限らず、例えばある程度の大きさを持った領域単位でノイズ領域の特定を行うものとしてもよい。

〔その他〕
この発明は、上記の実施形態に限られるものではなく、その要旨を逸脱しない範囲において種々の態様で実施することが可能である。

例えば、図１３において、一変形例として示すように、平均及び分散の算出対象となる周波数成分の選択について、図６や図１１に示した場合以外の態様も考えられる。すなわち、図１３（Ａ）のグラフにおいて他の一例として示すように、直流成分を含む周波数ｆ（１）、ｆ（２）、ｆ（３）に対応する周波数成分のみを平均や分散の算出対象から除外することが考えられる。また、図１３（Ｂ）に示すように、特発周波数成分を含む周波数ｆ（ｔ−１）、ｆ（ｔ）、ｆ（ｔ＋１）に対応する周波数成分のみを平均や分散の算出対象から除外することも考えられる。

また、算出対象となる周波数成分の選択について、列車の走行位置等に応じて、選択する態様を変更可能としてもよい。

なお、図１１や図１３において、除外する対象となる周波数の帯域は、例示であり、例えば直流成分側を周波数ｆ（１）、ｆ（２）、ｆ（３）の３つとする場合に限らず、隣接する周波数間の間隔等に応じて、種々変更可能である。

また、図１４に例示する他の一構成例の撮像部２１０のように、撮像用のレンズＬＬの前段に、フィルタＦＬを有しているものとしてもよい。すなわち、フィルタＦＬにおいてカットされずに通過した成分のみが撮像素子ＳＤにおいて検出される態様としてもよい。

ここで、フィルタＦＬについては、ノイズ等を除去すべく種々の態様とすることが考えられ、特定波長帯域について高い透過特性を示すものや、逆に、特定波長帯域について透過させない特性を示すものを採用することが考えられる。さらに、対象波長帯域の抽出（あるいは排除）の精度をより高めるべく、対象波長帯域に関する半値幅をより狭めるようにしてもよい。

また、上記各実施形態や、変形例等について、適宜組み合わせることも考えられる。

一方、上記第２実施形態や他の変形例では、フィルタやノイズ除去部により、例えば特定波長帯域の光や当該光の通過領域を予め除去するようにしているが、これらを除去しなくても適切な判断が可能である状況下においては、かかる事前の除去を行うことなく簡易な構成で処理を行うようにできる。

また、上記では、特殊信号発光機２００において、特定の赤色光波長帯域の発光がなされるものとしているが、発光させる波長帯域については、これに限らず、例えば緑色光波長帯域の光を発光する場合も考えられる。

また、各種閾値についても、種々定められ、例えば、朝晩や昼間等時間帯によって太陽光等の特性分布が変化する可能性もあり、一方で、列車ＴＲが通過するルートや時間に応じて、影響するノイズの特性も異なり、これらに対応させるようにする、といったことも考えられる。

また、上記では、専用走行路として線路において、移動体としての鉄道の列車に特殊信号検出装置１００を搭載した場合について説明しているが、これに限らず、例えば、専用走行路としての軌道（新設軌道、併用軌道）を走行する車両（移動体）である路面電車、専用走行路としての専用道路を走行する車両であるバスについて、当該専用道路脇等に設けられた特殊信号発光機２００に対して特殊信号検出装置１００を設けることも可能である。

また、列車等の移動体において、障害物の有無の検知のためといった各種検知のためにカメラを設けている場合には、当該カメラを撮像部１０として利用してもよい。すなわち、各種検知のために設けたカメラにおいて取得された画像情報を利用して、本願構成による特殊信号発光機２００での発光検知を行ってもよい。例えば障害物検知のカメラで撮像したデータのうち、特殊信号検出装置１００による検出対象区間における画像データのみ利用する、といった態様が考えられる。また、撮像部１０については、カメラとしているが、データ抽出に必要な光の受光が可能であれば、種々のものが適用でき、例えばレンズを有さず撮像素子（受光素子）のみで構成するといったことも考えられる。

また、例えば図１において一部拡大して例示した特殊信号検出装置１００を構成する各部を、例えば一つの筐体にユニット化したひとまとまりの装置として、既存の列車等の移動体に、後から取り付けることができるようにしてもよい。

１０…撮像部、２０…画像処理部、２０ｃ…周波数演算部、２０ｆ…変換処理部、２０ｎ…ノイズ除去部、３０…音声部、４０…表示部、５０…記憶装置、６０…制御部、１００…特殊信号検出装置、２００…特殊信号発光機、２００ａ…前面、２１０…撮像部、２２０…画像処理部、Ａ１…進行方向、ＣＣ１，ＣＣ２…曲線、ＣＲ…踏切、ＣＲ１〜ＣＲ３…領域、ＥＢ…非常ボタン、ＦＬ…フィルタ、ＧＣ…連続画像、ＧＩｄ…フレーム、ＩＰ…報知部、Ｌ１…直線、ＬＬ…レンズ、ＬＳ…ＬＥＤ光源、ＭＣ…管理装置、ＲＲ…線路、ＳＤ…撮像素子、ＳＧ…特殊信号発生システム、ＴＲ…列車、ＶＥ…車両

Claims (12)

1. 連続画像を撮像する撮像部と、
   前記連続画像における輝度の周波数スペクトルに関して平均及び分散を算出する周波数演算部と
   を備え、
   前記周波数演算部により算出された平均及び分散に基づき所定対象物の点滅を検出する、信号検出装置。
2. 前記周波数演算部において検出される輝度の周波数スペクトルのうち、前記所定対象物の点滅周期に対応する成分と前記所定対象物の点滅周期以外の成分とを比較して、前記所定対象物の点滅を検出する、請求項１に記載の信号検出装置。
3. 前記所定対象物は、特殊信号発光機である、請求項１及び２のいずれか一項に記載の信号検出装置。
4. 前記周波数演算部は、検出される輝度の周波数スペクトルの全周波数についての平均及び分散を算出する、請求項１〜３のいずれか一項に記載の信号検出装置。
5. 前記周波数演算部は、検出される輝度の周波数スペクトルのうち特定の周波数成分を除去したものについての平均及び分散を算出する、請求項１〜３のいずれか一項に記載の信号検出装置。
6. 前記周波数演算部での算出において、除去の対象となる前記特定の周波数成分に特発周波数成分及び直流成分のうち少なくともいずれかを含む、請求項５に記載の信号検出装置。
7. 前記周波数演算部は、輝度の周波数スペクトルに関して正規化された成分値を算出する、請求項１〜６のいずれか一項に記載の信号検出装置。
8. 前記周波数演算部は、分散について設定した下限値に基づき前記成分値を定める、請求項７に記載の信号検出装置。
9. 前記撮像部で取得した連続画像について、対象外波長帯域の成分検出に基づきノイズ領域を除去するノイズ除去部を備え、
   前記周波数演算部は、前記ノイズ除去部により前記ノイズ領域を除去した連続画像の輝度の周波数スペクトルに関して平均及び分散を算出する、請求項１〜８のいずれか一項に記載の信号検出装置。
10. 前記周波数演算部は、前記連続画像の全体に対して、フーリエ変換処理して輝度の周波数スペクトルを抽出する、請求項１〜９のいずれか一項に記載の信号検出装置。
11. 前記所定対象物における発光有りと判断された場合に、報知を行う報知部を備える、請求項１〜１０のいずれか一項に記載の信号検出装置。
12. 前記報知部は、警報を発する音声部である、請求項１１に記載の信号検出装置。

Images