JP2022135498A - 座席濡れ検出システム - Google Patents

Abstract

【課題】座席の濡れ検出における作業時間及び身体的負担を低減できる座席濡れ検出システムを提供する。【解決手段】本開示は、座席の濡れを検出する座席濡れ検出システムである。座席濡れ検出システムは、座席を含む空間の温度分布を示すサーモグラフィ画像と空間の可視光画像とを取得するように構成された画像取得部と、可視光画像から座席領域を抽出するように構成された抽出部と、抽出部が抽出した座席領域の温度分布に基づいて座席の濡れを判定するように構成された判定部と、を備える。【選択図】図１

Description

本開示は、座席濡れ検出システムに関する。

乗物（例えば、鉄道車両、バス、航空機等）及び施設（例えば、映画館、コンサートホール等）には、クッションを備える座席が配置される（特許文献１参照）。この座席には、不特定多数の利用者が入れ替わりで着席するため、飲料物等の液体によって座席が濡れる場合がある。

そこで、座席の清掃作業者は、利用者の入れ替えを行う間に、座席の濡れの有無を確認し、濡れがあった場合に回復作業を行う必要がある。このような濡れの検出方法としては、例えば、電極を取り付けた箒で座席をなでることで水分を検出する方法がある。

特開２０１４－８７５５７号公報

上述の濡れの検出方法では、座席ごとに座面等の検出部位を箒でなでる作業を繰り返す必要がある。そのため、全ての座席の検出を完了するまでに時間を要する。また、検出作業を行う作業者の身体的負担も大きい。

本開示の一局面は、座席の濡れ検出における作業時間及び身体的負担を低減できる座席濡れ検出システムを提供することを目的としている。

本開示の一態様は、座席の濡れを検出する座席濡れ検出システムである。座席濡れ検出システムは、座席を含む空間の温度分布を示すサーモグラフィ画像と空間の可視光画像とを取得するように構成された画像取得部と、可視光画像から座席領域を抽出するように構成された抽出部と、抽出部が抽出した座席領域の温度分布に基づいて座席の濡れを判定するように構成された判定部と、を備える。

このような構成によれば、座席を含むサーモグラフィ画像及び可視光画像を取得することで、座席の濡れを検出することができる。そのため、濡れ検出の作業時間が短縮される。さらに、座席に対する物理的な接触が不要となるため、作業者の身体的負担が軽減される。

本開示の一態様では、抽出部は、座席領域が指定された複数の画像を教師データとする機械学習により生成された学習済みモデルを用いて、座席領域を抽出するように構成されてもよい。このような構成によれば、検出対象とする座席を含む画像を教師データとして使用することで、検出対象の座席の形状、模様等に応じた座席領域の抽出が可能となる。

本開示の一態様では、判定部は、座席の濡れ箇所を判定するように構成されてもよい。このような構成によれば、濡れに対する回復作業の必要箇所が把握できるため、清掃作業の効率を高めることができる。

本開示の一態様では、抽出部は、座席領域の抽出時に、座席の座面以外の特定領域を座席領域から除外するように構成されてもよい。このような構成によれば、座席のうち濡れの判定が不要な部位が濡れ箇所として検出されることを回避できる。その結果、濡れの検出作業の効率が向上する。

図１は、実施形態における座席濡れ検出システムの構成を概略的に示すブロック図である。 図２Ａは、図１の画像取得部が取得するサーモグラフィ画像の一例であり、図２Ｂは、図１の抽出部が抽出する座席領域の一例であり、図２Ｃは、図１の判定部が判定する濡れ箇所の一例である。 図３は、図１の処理部が実行する処理を概略的に示すフロー図である。

以下、本開示が適用された実施形態について、図面を用いて説明する。
［１．第１実施形態］
［１－１．構成］
図１に示す座席濡れ検出システム１は、乗物又は施設に配置された座席の濡れを検出する。座席濡れ検出システム１は、画像取得部２と、処理部３と、通知部４とを備える。

座席が配置される乗物としては、鉄道車両、バス、航空機等の多数の乗客を輸送する公共輸送機関が挙げられる。座席が配置される施設としては、映画館、コンサートホール、テーマパーク等の多数の乗客がコンテンツを観賞又は体験する設備が挙げられる。

これらの中でも鉄道車両では、座席が配置される客室空間が狭く、かつ、折り返し運転時の短いインターバルで座席の清掃を行う必要がある。そのため、鉄道車両では、座席の濡れ検出における作業時間及び身体的負担の低減が特に求められる。

＜画像取得部＞
画像取得部２は、座席を含む空間の温度分布を示すサーモグラフィ画像と、この空間の可視光画像（つまり写真画像）とを同時に取得するように構成されている。可視光画像は、サーモグラフィ画像と同じ画角を有する。１回の撮影（つまり、１つのサーモグラフィ画像及び１つの可視光画像）には、複数の座席が含まれてもよい。

画像取得部２としては、赤外線放射量の分析を利用した公知のサーモグラフィカメラと、可視光カメラとを備えた撮影機器が使用できる。画像取得部２は、例えば、作業者が使用する携帯端末に取り付けられた可搬タイプとすることもできるし、座席が配置された空間（例えば天井等）に設置された固定タイプとすることもできる。

なお、画像取得部２は、サーモグラフィ画像から可視光画像を抽出することによって、可視光画像を取得してもよい。

図２Ａに、画像取得部２が取得するサーモグラフィ画像の一例を示す。図２Ａの画像は、鉄道車両の客室内に配置された３つの座席が連結されたシートを画像取得部２によって撮影したものである。

図２Ａの画像では、色の暗い（つまり黒い）部分が低温、色の明るい（つまり白い）部分が高温で表されている。なお、実際のサーモグラフィ画像ではカラーで段階的に温度の高低が示される。例示した図２Ａの画像は、カラーのサーモグラフィ画像を白黒で２値化したものである。

＜処理部＞
処理部３は、画像取得部２が取得したサーモグラフィ画像及び可視光画像に基づいて座席の濡れの有無を判定する処理を実行するように構成されている。処理部３は、抽出部３１と、判定部３２と、記憶部３３とを有する。

処理部３は、例えば、プロセッサと、ＲＡＭ、ＲＯＭ等の記憶媒体と、入出力部とを備えるコンピュータにより構成される。処理部３としては、例えば、スマートフォン等の携帯端末が使用できる。

（抽出部）
抽出部３１は、可視光画像から座席領域を抽出するように構成されている。「座席領域」は、濡れの検出対象領域であり、例えば、座席のクッション及び背もたれを含み、床、壁、窓、天井等の座席以外の構造を含まない領域である。

また、抽出部３１は、座席領域の抽出時に、座席の座面以外の特定領域を座席領域から除外する。特定領域は、予め定められた領域であり、例えば、ひじ掛け、交換可能なシートカバー等が挙げられる。

図２Ｂに、図２Ａのサーモグラフィ画像と同じ画角の可視光画像から、抽出部３１によって抽出された座席領域Ｓの一例を示す。図２Ｂでは、３つの座席のクッション及び背もたれが座席領域Ｓとして抽出されている。一方、図２Ｂでは、座席が配置された客室空間における床及び壁、並びに座席が有する２つのひじ掛けは、座席領域Ｓから除外されている。

具体的には、抽出部３１は、座席領域が指定された複数の画像を教師データ（つまりラベル付きデータ）とする機械学習により生成された学習済みモデルを用いて、座席領域を抽出する。学習済みモデルは、記憶部３３に記憶されている。

抽出部３１が用いる学習済みモデルは、入力データである少なくとも１つの座席を含んだ複数の画像と、入力データに対するラベルである座席領域とによる機械学習により構築される。

入力データとしての画像は、画像取得部２が取得した可視光画像を用いてもよいし、画像取得部２以外の撮影機器で撮影した可視光画像を用いてもよい。さらに、ラベル付きデータには、同一の可視光画像の向きを変えた（例えば９０°回転させた）ものが含まれてもよい。

学習済みモデルは、教師あり機械学習によって構築される分類器（つまり分類モデル）であり、例えば多層ニューラルネットワークで構成される。なお、学習済みモデルとして、ニューラルネットワーク以外のモデルを用いてもよい。

学習済みモデルを生成する学習ステップでは、多数のラベル付きデータを機械学習装置（図示省略）に分析させる。機械学習装置は、多数のラベル付きデータから座席領域の範囲を分類するための特徴量を学習し、学習モデルを構築する。

学習済みモデルは、検出対象とする座席の属性（例えば、サイズ、形状、模様、配置される空間等）毎に生成されるとよい。また、複数の種類の座席に対応可能な汎用的な学習済みモデルが生成されてもよい。なお、機械学習装置は処理部３に組み込まれていてもよい。

（判定部）
判定部３２は、抽出部３１が抽出した座席領域の温度分布に基づいて座席の濡れを判定するように構成さている。具体的には、判定部３２は、座席の濡れ箇所を判定し、判定した濡れ箇所を通知部４に出力するように構成されている。

判定部３２による濡れの判定手順は以下の通りである。まず、判定部３２は、座席領域の平均温度を算出する。次に、判定部３２は、座席領域のうち、平均温度よりも予め定められた閾値以上低い箇所を濡れ箇所Ｗと判定する。閾値としては、例えば３℃とすることができる。

図２Ｃに、図２Ａのサーモグラフィ画像から判定部３２によって判定された濡れ箇所Ｗの一例を示す。図２Ｃでは、中央の座席における座面に温度の低い（つまり色が黒い）領域が存在しており、この領域が判定部３２によって濡れ箇所Ｗとして判定される。

なお、図２Ａのサーモグラフィ画像では座席の周囲の床及び壁も温度が低いが、床及び壁は座席領域Ｓに含まれない。そのため、判定部３２は、床及び壁を濡れ箇所Ｗとして判定しない。また、２つの座席の間に配置されたひじ掛けも座席領域Ｓに含まれないため、濡れの判定対象からは除外されている。

＜通知部＞
通知部４は、判定部３２が判定した結果（つまり、濡れ箇所の有無及びその位置）を画像及び／又は音声によって通知する。通知部４としては、例えば、スマートフォン等の携帯端末の出力装置（例えば、ディスプレイ、スピーカ等）が使用できる。

［１－２．処理］
以下、図３のフロー図を参照しつつ、座席濡れ検出システム１の処理部３が実行する処理の一例について説明する。

本処理では、処理部３は、最初に、座席領域の抽出に適切なサイズに可視光画像をリサイズする（ステップＳ１０）。

リサイズ後、処理部３は、学習済みモデルを利用して座席領域を抽出する（ステップＳ２０）。座席領域の抽出後、処理部３は、サーモグラフィ画像に座席領域を重ね合わせることで、座席領域内の温度を抽出する（ステップＳ３０）。

温度の抽出後、処理部３は、座席領域の平均温度よりも閾値以上低い箇所を濡れ箇所として判定する（ステップＳ４０）。さらに、処理部３は、判定した結果を通知部４に出力する。

［１－３．効果］
以上詳述した実施形態によれば、以下の効果が得られる。
（１ａ）座席を含むサーモグラフィ画像及び可視光画像を取得することで、座席の濡れを検出することができる。そのため、濡れ検出の作業時間が短縮される。さらに、座席に対する物理的な接触が不要となるため、作業者の身体的負担が軽減される。

（１ｂ）抽出部３１が学習済みモデルを用いて座席領域を抽出するため、検出対象とする座席を含む画像を教師データとして使用することで、検出対象の座席の形状、模様等に応じた座席領域の抽出が可能となる。

（１ｃ）判定部３２が濡れ箇所を判定することで、濡れに対する回復作業の必要箇所が把握できるため、清掃作業の効率を高めることができる。

（１ｄ）抽出部３１が特定領域を座席領域から除外することで、座席のうち濡れの判定が不要な部位が濡れ箇所として検出されることを回避できる。その結果、濡れの検出作業の効率が向上する。

［２．他の実施形態］
以上、本開示の実施形態について説明したが、本開示は、上記実施形態に限定されることなく、種々の形態を採り得ることは言うまでもない。

（２ａ）上記実施形態の座席濡れ検出システム１において、抽出部は、必ずしも座席領域が指定された複数の画像を教師データとする機械学習により生成された学習済みモデルを用いなくてもよい。例えば、抽出部は、教師なし学習によって生成された学習済みモデルを用いてもよい。また、抽出部は、学習済みモデル以外のアルゴリズムを用いて座席領域を抽出してもよい。

（２ｂ）上記実施形態の座席濡れ検出システム１において、判定部は、必ずしも座席の濡れ箇所を判定しなくてもよい。例えば、判定部は、座席における濡れの有無だけを判定してもよい。

（２ｃ）上記実施形態の座席濡れ検出システム１において、抽出部は、必ずしも特定領域を座席領域から除外しなくてもよい。つまり、抽出部は、座席全体を常に座席領域に含めてもよい。

（２ｄ）上記実施形態における１つの構成要素が有する機能を複数の構成要素として分散させたり、複数の構成要素が有する機能を１つの構成要素に統合したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加、置換等してもよい。なお、特許請求の範囲に記載の文言から特定される技術思想に含まれるあらゆる態様が本開示の実施形態である。

１…座席濡れ検出システム、２…画像取得部、３…処理部、４…通知部、
３１…抽出部、３２…判定部、３３…記憶部。

Claims (4)

1. 座席の濡れを検出する座席濡れ検出システムであって、
   座席を含む空間の温度分布を示すサーモグラフィ画像と前記空間の可視光画像とを取得するように構成された画像取得部と、
   前記可視光画像から座席領域を抽出するように構成された抽出部と、
   前記抽出部が抽出した前記座席領域の温度分布に基づいて前記座席の濡れを判定するように構成された判定部と、
   を備える、座席濡れ検出システム。
2. 請求項１に記載の座席濡れ検出システムであって、
   前記抽出部は、前記座席領域が指定された複数の画像を教師データとする機械学習により生成された学習済みモデルを用いて、前記座席領域を抽出するように構成される、座席濡れ検出システム。
3. 請求項１又は請求項２に記載の座席濡れ検出システムであって、
   前記判定部は、前記座席の濡れ箇所を判定するように構成される、座席濡れ検出システム。
4. 請求項１から請求項３のいずれか１項に記載の座席濡れ検出システムであって、
   前記抽出部は、前記座席領域の抽出時に、前記座席の座面以外の特定領域を前記座席領域から除外するように構成される、座席濡れ検出システム。

Images