JP6971069B2 - 監視プログラム、監視方法、及び監視装置 - Google Patents

Description

本発明は、監視プログラム、監視方法、及び監視装置に関する。

従来、種々の対象を監視する技術が提供されている。例えば、ビルや家屋等の監視対象を遠隔位置で監視して防犯等の安全対策を行うための監視システムに関する技術が知られている。

特開２００４−２８７９２２号公報

しかしながら、上記の従来技術では、自動運転技術により運行されるバス等の移動体を適切に監視可能にすることが難しい。例えば、移動体から遠隔に位置する監視者が移動体を動画像（画像）や音声に基づいて監視する場合、移動体において検知された音が、監視者に対して出力された場合、監視装置に表示されたいずれの画像に対応するかを、監視者が把握することが難しい場合がある。

本願は、上記に鑑みてなされたものであって、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にする監視プログラム、監視方法、及び監視装置を提供することを目的とする。

本願に係る監視プログラムは、監視者が遠隔監視する移動体であって、自動運転により動作する移動体において検知された複数の音声情報を取得する取得手順と、前記取得手順により取得された複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報を監視者に対して通知する通知手順と、を備えたことを特徴とする。

実施形態の一態様によれば、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができるという効果を奏する。

図１は、実施形態に係る監視処理の一例を示す図である。 図２は、実施形態に係る監視システムの構成例を示す図である。 図３は、実施形態に係る監視装置の構成例を示す図である。 図４は、実施形態に係る移動体情報記憶部の一例を示す図である。 図５は、実施形態に係る決定装置の構成例を示す図である。 図６は、実施形態に係る移動体情報記憶部の一例を示す図である。 図７は、実施形態に係る監視者情報記憶部の一例を示す図である。 図８は、実施形態に係る監視対応情報記憶部の一例を示す図である。 図９は、実施形態に係る監視処理の一例を示す図である。 図１０は、実施形態に係る表示の変更の一例を示す図である。 図１１は、実施形態に係る監視処理の一例を示す図である。 図１２は、実施形態に係る表示の変更の一例を示す図である。 図１３は、実施形態に係る監視処理の一例を示すフローチャートである。 図１４は、１つの移動体を対象とした監視処理の一例を示す図である。 図１５は、監視装置及び決定装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。

以下に、本願に係る監視プログラム、監視方法、及び監視装置を実施するための形態（以下、「実施形態」と呼ぶ）について図面を参照しつつ詳細に説明する。なお、この実施形態により本願に係る監視プログラム、監視方法、及び監視装置が限定されるものではない。また、以下の各実施形態において同一の部位には同一の符号を付し、重複する説明は省略される。

（実施形態）
〔１．監視処理〕
まず、図１を用いて、実施形態に係る監視処理の一例について説明する。図１は、実施形態に係る監視処理の一例を示す図である。図１に示す例では、決定装置１００（図５参照）が、道路を自動走行する自動運転バス（以下、単に「バス」ともいう）を遠隔で監視する監視者（操作者）を種々の情報に基づいて変更（決定）する場合を示す。また、図１に示す例では、決定装置１００は、道路を自動走行するバスを遠隔で監視する監視者（操作者）を種々の情報に基づくタイミングで変更する。具体的には、決定装置１００が、複数のバス２０−１〜２０−５を対象として、各バス２０−１〜２０−５を遠隔で監視する監視者を各種の条件に基づくタイミングで変更する場合を示す。また、図１では、各監視者（操作者）が、複数台のバスを遠隔監視する場合を示す。

また、図１に示す例では、バス２０−１〜２０−５が、各々に対応付けられた運行ルートに基づいて動作する場合を示す。例えば、バス２０−１〜２０−５は、公道を所定の運行ルートで走行する。なお、バス２０−１〜２０−５は、運行ルートに基づいて走行する場合に限らず、搭乗者の行先の指定に応じたルートで走行してもよい。図１では、自動走行する車両であるバスを対象とする場合を示すが、移動体は、バスに限らず、種々の移動体であってもよい。例えば、対象はバスに限らず、タクシーやトラック等の貨物自動車等の種々の事業用自動車が対象であってもよい。また、例えば、移動体は、自家用自動車、いわゆる自家用車であってもよい。例えば、監視システム１（図２参照）における監視処理の対象となる移動体が運搬するものは、人に限らず種々の物体であってもよい。言い換えると、監視システム１における移動体の運送の客体となるものは、人や人以外の物品等の有体物を含む種々の対象であってもよい。

〔監視システムの構成〕
図１の説明に先立って、図２を用いて監視システム１の構成について説明する。図２は、実施形態に係る監視システムの構成例を示す図である。図２に示すように、監視システム１は、監視装置１０−１と、監視装置１０−２と、バス２０−１と、バス２０−２と、決定装置１００とが含まれる。例えば、監視システム１は、いわゆる遠隔型自動走行システムであってもよい。ここでいう遠隔型自動走行システムとは、自動車（移動体）から遠隔に存在する運転者（監視者や操作者）が電気通信技術を利用して、その自動車の運転操作を行うことができる自動運転技術に関するシステムを意味する。

以下では、監視装置１０−１、１０−２について、特に区別なく説明する場合には、監視装置１０と記載する。なお、図２に示した監視システム１では、２台の監視装置１０−１、１０−２を図示するが、監視システム１には、３台以上の監視装置１０が含まれてもよい。また、図２に示した監視システム１では、２台のバス２０−１、２０−２を図示するが、監視システム１には、図１に示すように５台のバス２０−１〜２０−５が含まれてもよい。また、以下では、バス２０−１〜２０−５について、特に区別なく説明する場合には、バス２０と記載する。なお、監視システム１には、６台以上のバス２０が含まれてもよい。また、図２に示すように、監視装置１０と、バス２０と、決定装置１００とは所定のネットワークＮを介して、有線または無線により通信可能に接続される。なお、図２に示した監視システム１には、複数台の決定装置１００が含まれてもよい。

監視装置１０は、バス２０を遠隔監視する監視者によって利用される情報処理装置である。監視装置１０は、監視者が移動体を監視するための端末装置である。例えば、監視者Ａ１や監視者Ａ２等の監視者は、バス２０による旅客輸送の事業を行う事業者（企業）の従業員等であってもよい。例えば、監視者Ａ１や監視者Ａ２は、バス２０による運輸業を営む交通機関の被雇用者等であってもよい。例えば、監視者Ａ１や監視者Ａ２は、バス２０による運輸業を営む交通機関の所在地（ビル等）において遠隔監視業務に従事する従事者であってもよい。なお、「監視者Ａ＊（＊は任意の数値）」と記載した場合、その監視者は監視者ＩＤ「Ａ＊」により識別されるユーザであることを示す。例えば、「監視者Ａ１」と記載した場合、その監視者は監視者ＩＤ「Ａ１」により識別される監視者である。

監視装置１０は、例えば、ノート型ＰＣや、デスクトップＰＣにより実現される。また、監視装置１０は、スマートフォンや、タブレット型端末や、携帯電話機や、ＰＤＡ等の情報処理装置であってもよい。また、監視装置１０は、メガネ型端末等のウェアラブル端末であってもよい。すなわち、監視装置１０は、監視者が遠隔監視業務を遂行可能であれば、どのような情報処理装置であってもよい。図１の例では、図示を簡単にするために、監視装置１０がノート型ＰＣである場合を示す。

バス２０は、自動運転により走行する移動体である。例えば、バス２０は、自動運転に関する種々の従来技術を適宜用いて自動走行する移動体である。また、バス２０は、遠隔に存在する監視者が電気通信技術を利用して、そのバス２０を遠隔監視や遠隔操作することができる移動体である。また、バス２０は、図示は省略するが通信機能を有し、監視装置１０や決定装置１００との間での情報通信が可能な移動体であるものとする。また、バス２０は、図示は省略するが情報処理機能を有し、監視装置１０や決定装置１００から受信した情報に基づいて制御される移動体であるものとする。

また、バス２０は、カメラ（図示省略）やマイクロフォン（図示省略）等の種々のセンサを備え、バス２０の周囲やバス２０内の状況を示す情報を検知可能である。バス２０に搭載されるカメラは、バス２０の周囲やバス２０内の画像や動画像を撮像可能であれば、どのようなセンサであってもよい。例えば、カメラは、ＣＣＤ（Charge-Coupled Device）イメージセンサ等の種々のセンサであってもよい。バス２０に搭載されるマイクロフォンは、バス２０の周囲やバス２０内の音声を集音可能であれば、どのようなセンサであってもよい。

また、バス２０は、監視者が利用する監視装置１０や決定装置１００に、カメラで検知（撮像）した動画像を送信する。例えば、バス２０は、監視者が利用する監視装置１０や決定装置１００に、カメラで検知した動画像をリアルタイムで送信する。また、バス２０は、監視者が利用する監視装置１０や決定装置１００にマイクロフォンで検知（集音）した音声を送信する。例えば、バス２０は、監視者が利用する監視装置１０や決定装置１００に、マイクロフォンで検知した音声をリアルタイムで送信する。

また、バス２０は、ＧＰＳ（Global Positioning System）センサ等の位置情報を検知可能なセンサ（以下、「位置センサ」ともいう）を有し、バス２０の位置を検知可能であるものとする。例えば、バス２０は、監視者が利用する監視装置１０や決定装置１００に位置センサで検知した位置情報を送信する。例えば、バス２０は、監視者が利用する監視装置１０や決定装置１００に、位置センサで検知した位置情報をリアルタイムで送信する。

また、バス２０は、監視者等による外部からの指示を受信していない間は、カメラやマイクロフォンで検知した情報に基づいて、指定されたルートを自律的に走行可能であるものとする。なお、バス２０は、カメラやマイクロフォンに限らず、レーダー等の種々の従来技術を用いて、自律的に走行を行ってもよい。また、図１に示す例におけるバス２０には、バス２０内においてバス２０を操作する操作者、いわゆる運転手は搭乗していないものとする。

決定装置１００は、監視者に関する情報に基づいて、一の監視者の監視状況が所定の条件を満たすかどうかに応じて、複数の移動体の自動運転に関する態様を決定する情報処理装置である。また、決定装置１００は、複数の移動体に関する情報に基づいて、当該複数の移動体の状況が所定の条件を満たす場合、複数の移動体の自動運転に関する態様を決定する情報処理装置である。また、決定装置１００は、遠隔監視に関する情報に基づいて、複数の移動体を監視する監視者を変更するタイミングを決定する情報処理装置である。例えば、監視者に関する情報には、監視者が監視可能かどうかを示す情報や監視者の監視態様を示す情報や監視者の監視対象となっている移動体に関する情報が含まれてもよい。例えば、移動体に関する情報には、移動体において検知されたセンサ情報（動画像や音声等）や収集された情報が含まれてもよい。例えば、遠隔監視に関する情報には、監視者に関する情報や移動体に関する情報等の種々の情報が含まれてもよい。

ここから、図１を用いて監視処理について説明する。なお、図１の例では、５台のバス２０−１〜２０−５を２人の監視者Ａ１及び監視者Ａ２が遠隔監視している場合を図示する。なお、監視システム１においては、３人以上の多数（例えば１００人）の監視者が５台以上の多数（例えば千台）のバス２０を監視していてもよい。

まず、図１に示す地図情報ＭＰ１１−１について、簡単に説明する。図１に示す地図情報ＭＰ１１−１は、バス２０−１〜２０−５の位置やバス２０と監視者との関係等を模式的に示す図である。図１に示す地図情報ＭＰ１１−１は、バス２０と監視者との関係の変化、すなわちバス２０の監視者の変更を図示するためのものである。

また、以下では、地図情報ＭＰ１１−１、ＭＰ１１−２（図９、図１１参照）について、特に区別なく説明する場合には、地図情報ＭＰ１１と記載する。また、図１の例において、地図情報ＭＰ１１中に示すバス２０と監視装置１０との間を結ぶ点線が、バス２０と監視者との関係を示す。図１中の地図情報ＭＰ１１−１においては、バス２０−１〜２０−３と監視者Ａ１が利用する監視装置１０−１とが点線で結ばれているため、図１中の地図情報ＭＰ１１−１に対応する時点では、バス２０−１〜２０−３が監視者Ａ１により遠隔監視されていることを示す。なお、図１中の点線の矢印は、バス２０において収集された情報（以下、「対象情報」ともいう）を監視装置１０が取得することを示す。

ここから、図１を用いて、一のバス２０において故障の兆候を示す異音が発生した場合における監視処理について説明する。上述したように、図１中の地図情報ＭＰ１１−１に対応する時点では、バス２０−１〜２０−３は、監視者Ａ１により遠隔監視されている。また、図１中の地図情報ＭＰ１１−１に対応する時点では、バス２０−４、２０−５は、監視者Ａ２により遠隔監視されている。すなわち、図１の例では、決定装置１００による監視処理の前の時点では、監視者Ａ１が３台のバス２０−１〜２０−３を遠隔監視し、監視者Ａ２が２台のバス２０−４、２０−５を遠隔監視している。図１の例では、バス２０の動作状況の確認を要する所定の条件として、バス２０において検知された音声情報に通常と異なる音（以下、「異音」ともいう）が含まれる場合を一例に説明する。なお、異音には、バス２０における通常とは異なる状況を示唆する音であれば、種々の音が含まれる。例えば、異音には、エンジン等の故障を示す異音のほか、周囲の車両の急ブレーキを示す音、クラクション等の警告を示す音、衝突を示す音等といった移動体の外部において異常が発生したことを特定する音が含まれてもよい。また、乗客の叫び声や罵声等といった移動体の内部において異常が発生したことを特定する音が含まれていてもよい。なお、所定の条件を満たす音声情報を「対象音声情報」と記載する場合がある。

まず、監視者Ａ１が利用する監視装置１０−１は、バス２０−１の対象情報を取得する（ステップＳ１１−１）。図１の例では、監視装置１０−１は、バス２０−１の対象情報として、地図情報ＭＰ１１−１に示すバス２０−１において検知された動画像や音声等の種々の情報を取得する。また、監視装置１０−１は、図示を省略するが、バス２０−１の動画像を画面（図３中の出力部１４に対応。以下同じ）に表示したり、音声をスピーカ（図３中のスピーカ１６に対応。以下同じ）等により出力したりすることにより、監視者Ａ１がバス２０−１を遠隔監視することを可能にする。例えば、監視装置１０−１は、取得後直ぐに、バス２０−１の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ１がバス２０−１をリアルタイムに遠隔監視することを可能にする。

また、監視者Ａ１が利用する監視装置１０−１は、バス２０−２の対象情報を取得する（ステップＳ１１−２）。図１の例では、監視装置１０−１は、バス２０−２の対象情報として、地図情報ＭＰ１１−１に示すバス２０−２において検知された動画像や音声等の種々の情報を取得する。また、監視装置１０−１は、図示を省略するが、バス２０−２の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ１がバス２０−２を遠隔監視することを可能にする。例えば、監視装置１０−１は、取得後直ぐに、バス２０−２の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ１がバス２０−２をリアルタイムに遠隔監視することを可能にする。

また、監視者Ａ１が利用する監視装置１０−１は、バス２０−３の対象情報を取得する（ステップＳ１１−３）。図１の例では、監視装置１０−１は、バス２０−３の対象情報として、地図情報ＭＰ１１−１に示すバス２０−３において検知された動画像や音声等の種々の情報を取得する。また、監視装置１０−１は、図示を省略するが、バス２０−３の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ１がバス２０−３を遠隔監視することを可能にする。例えば、監視装置１０−１は、取得後直ぐに、バス２０−３の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ１がバス２０−３をリアルタイムに遠隔監視することを可能にする。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−４の対象情報を取得する（ステップＳ１１−４）。図１の例では、監視装置１０−２は、バス２０−４の対象情報として、地図情報ＭＰ１１−１に示すバス２０−４において検知された動画像や音声等の種々の情報を取得する。また、監視装置１０−２は、図示を省略するが、バス２０−４の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ２がバス２０−４を遠隔監視することを可能にする。例えば、監視装置１０−２は、取得後直ぐに、バス２０−４の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ２がバス２０−４をリアルタイムに遠隔監視することを可能にする。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−５の対象情報を取得する（ステップＳ１１−５）。図１の例では、監視装置１０−２は、バス２０−５の対象情報として、地図情報ＭＰ１１−１に示すバス２０−５において検知された動画像や音声等の種々の情報を取得する。また、監視装置１０−２は、図示を省略するが、バス２０−５の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ２がバス２０−５を遠隔監視することを可能にする。例えば、監視装置１０−２は、取得後直ぐに、バス２０−５の動画像を画面に表示したり、音声をスピーカ等により出力したりすることにより、監視者Ａ２がバス２０−５をリアルタイムに遠隔監視することを可能にする。

以下、ステップＳ１１−１〜Ｓ１１−５を区別せずに説明する場合、ステップＳ１１と総称する。また、ステップＳ１１−１〜Ｓ１１−５は、バス２０と監視装置１０との対応関係を示すためのものであり、監視装置１０は、監視対象となっているバス２０の対象情報を複数回に亘って取得してもよい。

なお、監視装置１０は、監視対象となっているバス２０から対象情報を取得してもよいし、決定装置１００等の外部装置を介してバス２０から対象情報を取得してもよい。例えば、決定装置１００は、バス２０から動画像や音声等の対象情報を取得し、バス２０を監視している監視者が利用する監視装置１０へ対象情報を送信してもよい。例えば、決定装置１００は、バス２０から動画像や音声等の対象情報を取得し、移動体情報記憶部１２１（図６参照）へ記憶してもよい。

また、監視者Ａ１は、ステップＳ１１において取得した対象情報に基づいて、監視対象となっているバス２０を遠隔監視する（ステップＳ１２−１）。図１の例では、監視者Ａ１は、監視装置１０−１によりバス２０−１〜２０−３の３台のバスを遠隔監視する。監視者Ａ１は、監視装置１０−１が画面に表示するバス２０−１〜２０−３の動画像を見たり、監視装置１０−１がスピーカ等により出力するバス２０−１〜２０−３の音声を聞いたりすることにより、バス２０−１〜２０−３の３台のバスをリアルタイムに遠隔監視する。

図１の例では、監視装置１０−１には、バス２０−１に対応する動画像ＭＶ１１やバス２０−２に対応する動画像ＭＶ１２やバス２０−３に対応する動画像ＭＶ１３が一覧表示される。例えば、動画像ＭＶ１１には、バス２０−１の前方、すなわち通常走行時の進行方向を撮像した動画像ＭＶ１１−１や、バス２０−１の後方を撮像した動画像ＭＶ１１−２等が含まれる。

また、例えば、動画像ＭＶ１２には、バス２０−２の前方を撮像した動画像ＭＶ１２−１や、バス２０−２の後方を撮像した動画像ＭＶ１２−２等が含まれる。また、図１の例では図示を省略するが、動画像ＭＶ１３には、バス２０−３の前方を撮像した動画像や、バス２０−３の後方を撮像した動画像等が含まれる。

なお、図１の例では、説明を簡単にするために、バス２０の前方及び後方の２箇所に対応する動画像を表示する場合を示すが、動画像ＭＶ１１〜ＭＶ１５等のバス２０における動画像には、前方や後方に限らず、種々の箇所の動画像が含まれてもよい。例えば、バス２０における動画像には、バス２０の側部、すなわち左右を撮像した動画像やバス２０の内部を撮像した動画像が含まれてもよい。また、監視装置１０は、各バス２０に対応する動画像は、監視者の所望の箇所に切り替え可能に表示してもよい。監視装置１０は、監視者がバス２０の前方及び内部に対応する動画像を所望する場合、バス２０の前方及び内部に対応する動画像を表示してもよい。

また、監視者Ａ２は、ステップＳ１１において取得した対象情報に基づいて、監視対象となっているバス２０を遠隔監視する（ステップＳ１２−２）。図１の例では、監視者Ａ２は、監視装置１０−２によりバス２０−４、２０−５の２台のバスを遠隔監視する。監視者Ａ２は、監視装置１０−２が画面に表示するバス２０−４、２０−５の動画像を見たり、監視装置１０−２がスピーカ等により出力するバス２０−４、２０−５の音声を聞いたりすることにより、バス２０−４、２０−５の２台のバスをリアルタイムに遠隔監視する。図１の例では、監視装置１０−２には、バス２０−４に対応する動画像ＭＶ１４やバス２０−５に対応する動画像ＭＶ１５が一覧表示される。

図１の例では図示を省略するが、動画像ＭＶ１４には、バス２０−４の前方を撮像した動画像や、バス２０−４の後方を撮像した動画像等が含まれ、動画像ＭＶ１５には、バス２０−５の前方を撮像した動画像や、バス２０−５の後方を撮像した動画像等が含まれる。

以下、ステップＳ１２−１、Ｓ１２−２を区別せずに説明する場合、ステップＳ１２と総称する。また、ステップＳ１２−１、Ｓ１２−２は、監視者Ａ１や監視者Ａ２がバス２０を、監視装置１０を用いて遠隔監視していることを示すためのものであり、監視者Ａ１や監視者Ａ２は、監視対象となっているバス２０を所定の期間（例えば業務時間中等）に亘って継続して監視する。

ここで、バス２０−１に所定の事象が発生する（ステップＳ１３）。図１の例では、バス２０−１から故障の可能性を示す異音が発生する。そして、監視装置１０−１は、バス２０−１から取得した音声情報に異音が含まれるため、バス２０−１の音声情報を対象音声情報と判定する。なお、バス２０−１から取得した音声情報に異音が含まれるかどうかの判定は決定装置１００が行ってもよい。この場合、監視装置１０は、決定装置１００から対象音声情報と画像情報との対応付けを示す情報を取得してもよい。例えば、監視装置１０や決定装置１００は、バス２０−１から取得した音声情報と通常動作時の音声パターンとを比較することにより、音声情報に異音が含まれるかどうかを判定してもよい。また、例えば、監視装置１０や決定装置１００は、バス２０−１から取得した音声情報と、異音と判定される音の一覧情報とを比較することにより、音声情報に異音が含まれるかどうかを判定してもよい。例えば、移動体内外における正常時の音データ（学習データ）から得られる特徴量から正常時のモデルを学習し、バス２０−１から取得した音声情報の特徴量と正常時のモデルとの剥離から正常および異常を判定してもよい。なお、上記は一例であり、監視装置１０や決定装置１００は、バス２０−１から取得した音声情報に確認を要する音声が含まれるかどうかを判定可能であれば、どのような情報を用いて、音声情報に異音が含まれるかどうかを判定してもよい。

図１の例では、バス２０−１において異音が発生しているため、監視装置１０−１は、バス２０−１に対応する画像情報を、対象音声情報に対応することを識別可能な表示態様に変更する（ステップＳ１３−１）。すなわち、監視装置１０−１は、バス２０−１から取得した音声情報が動作状況の確認を要する対象音声情報であるとして、バス２０−１を遠隔監視している監視者Ａ１に、その対象音声情報がバス２０−１から取得した音声情報であることが把握可能なように表示態様を変更する。

例えば、監視装置１０−１は、バス２０−１に対応する動画像ＭＶ１１の色を他の動画像ＭＶ１２や動画像ＭＶ１３と異なる色に変更することにより、対象音声情報の発生源がバス２０−１であることを識別可能な表示態様で複数の動画像ＭＶ１１〜ＭＶ１３を表示する。例えば、監視装置１０−１は、バス２０−１に対応する動画像ＭＶ１１のフレームの色を赤や黄色等の注目を引く色に変更することにより、対象音声情報の発生源がバス２０−１であることを識別可能な表示態様で複数の動画像ＭＶ１１〜ＭＶ１３を表示する。また、表示態様の変更とともに、監視装置１０−１は、バス２０−１において発生した異音を含む音声を出力する（ステップＳ１３−２）。

このように、監視装置１０は、あるバス２０が動作状況の確認を要する所定の条件を満たす場合に、そのバス２０の動画像を他のバス２０の動画像と異なる表示態様に変更することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。なお、監視装置１０は、所定の条件を満たす複数の対象音声情報がある場合、複数の対象音声情報の各々のレベルに応じて変動する表示態様で、複数の対象音声情報の各々に対応する画像情報を表示してもよい。例えば、監視装置１０は、複数の対象音声情報の各々のうち、レベルが高い方から順にヒートマップのような態様で複数の対象音声情報の各々に対応する画像情報を表示してもよい。例えば、監視装置１０は、複数の対象音声情報の各々のうち、レベルが高い方から順に赤、黄色、青等の異なる色で複数の対象音声情報の各々に対応する画像情報を表示してもよい。例えば、監視装置１０は、大きさが異なる複数の閾値に基づいて、大きい閾値から順に赤、黄色、青等の異なる色で、閾値を越えた対象音声情報の各々に対応する画像情報を表示してもよい。

（１−１．システム構成）
なお、上述したように、対象音声情報と画像情報との対応付けは、監視システム１中のいずれの構成において行われてもよい。例えば、監視装置１０自身が対象音声情報と画像情報との対応付けを行ってもよい。また、決定装置１００やバス２０が対象音声情報と画像情報との対応付けを行ってもよい。この場合、監視装置１０は、決定装置１００やバス２０から対象音声情報と画像情報との対応付けを示す情報を取得してもよい。このように、監視システム１は、監視装置１０が対象音声情報の出力とともにその対象音声情報に対応する画像情報（動画像）を対象音声情報に対応することを識別可能な表示態様で表示可能であればどのように構成されてもよい。

（１−２．対応付けの対象）
図１の例では、複数のバス２０のうち、対象音声情報が検知されたバス２０がいずれのバス２０であるかを識別可能に表示する場合を示したが、監視装置１０は、対象音声情報が検知されたバス２０のうち、いずれの箇所で検知されたかを識別可能に表示してもよい。この場合、バス２０には、対象音声情報が検知された箇所として識別したい各箇所に対応する複数のマイクを有してもよい。また、バス２０に設けられたマイクが検知した音声の方向等を種々の従来技術を適宜用いて推定することにより、対象音声情報が検知された箇所を特定してもよい。

例えば、バス２０の前方、後方、内部及びエンジン部分にマイクが設置される場合、いずれのマイクが対象音声情報を検知したかに応じて、監視装置１０は、バス２０の前方、後方、内部及びエンジン部分いずれの箇所で検知されたかを識別可能に表示してもよい。例えば、監視装置１０は、バス２０の前方、後方、内部及びエンジン部分の各々に対応する動画像を表示し、いずれの箇所で対象音声情報が検知されたかを識別可能に表示してもよい。例えば、監視装置１０は、バスの２０俯瞰図を表示し、異音の発生箇所を表示してもよい。

例えば、監視装置１０は、バス２０の後方で対象音声情報が検知された場合、バス２０の後方に対応する動画像（例えば動画像ＭＶ１１−２等）を他の動画像と異なる態様で表示することにより、対象音声情報が検知されたかを識別可能に表示してもよい。また、例えば、監視装置１０は、バス２０のエンジン部分で対象音声情報が検知された場合、バス２０のエンジン部分に対応する動画像を他の動画像と異なる態様で表示することにより、対象音声情報が検知されたかを識別可能に表示してもよい。また、例えば、監視装置１０は、対象音声情報が検知されたバス２０の箇所を文字情報等で識別可能に表示してもよい。

上記の点について図１４を用いて説明する。図１４は、１つの移動体を対象とした監視処理の一例を示す図である。図１４の例は、バス２０−５０の前方、後方、車内、及びエンジンルーム内の４箇所の動画像及び音声を検知する場合を示す。例えば、バス２０−５０における前方、後方、車内、及びエンジンルーム内の４箇所に、カメラ及びマイクが各々設置されることにより、バス２０−５０の前方、後方、車内、及びエンジンルーム内の４箇所の動画像及び音声が検知される。

図１４に示す例では、監視装置１０には、バス２０−５０に対応する動画像ＭＶ５０が表示される。すなわち、図１４の例では、監視装置１０を利用する監視者が、バス２０−５０を監視している状態を示す。

例えば、動画像ＭＶ５０には、バス２０−５０の前方、すなわち通常走行時の進行方向を撮像した動画像ＭＶ５０−１や、バス２０−５０の後方を撮像した動画像ＭＶ５０−２や、バス２０−５０の車内を撮像した動画像ＭＶ５０−３やバス２０−５０のエンジンルーム内を撮像した動画像ＭＶ５０−４等が含まれる。

ここで、図１４の例では、バス２０−５０のエンジンルーム内において異音が発生した場合を示す。この場合、監視装置１０は、バス２０−５０のエンジンルーム内において検知された音声情報に異音が含まれるため、バス２０−５０のエンジンルームの音声情報を対象音声情報と判定する。そのため、監視装置１０は、バス２０−５０のエンジンルーム内を撮像した動画像ＭＶ５０−４を、対象音声情報に対応することを識別可能な表示態様で表示する。すなわち、監視装置１０は、バス２０−５０のエンジンルームの音声情報が異音を含む音声情報であることを監視者が把握可能なように、動画像ＭＶ５０−４を、他の動画像ＭＶ５０−１〜ＭＶ５０−３とは異なる態様で表示する。

図１４の例では、監視装置１０は、バス２０−５０のエンジンルーム内を撮像した動画像ＭＶ５０−４が表示される領域に、識別サインＳＮ５０を付すことにより、動画像ＭＶ５０−４を、他の動画像ＭＶ５０−１〜ＭＶ５０−３とは異なる態様で表示する。具体的には、監視装置１０は、「異音発生中」を含む識別サインＳＮ５０で囲んで動画像ＭＶ５０−４を表示することにより、動画像ＭＶ５０−４を、他の動画像ＭＶ５０−１〜ＭＶ５０−３とは異なる態様で表示する。このように、監視装置１０は、１つのバス２０のある箇所において検知された対象音声情報とその箇所の画像との対応付けを識別可能にすることにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

（１−３．表示態様）
図１の例では、対象音声情報に対応する動画像の色を他の動画像と異ならせることにより、いずれのバス２０が対象音声情報に対応するかを把握可能にしたが、監視装置１０は、種々の表示態様により、いずれのバス２０が対象音声情報に対応するかを把握可能にしてもよい。例えば、監視装置１０は、対象音声情報に対応する動画像を他の動画像よりも大きく表示したり、対象音声情報に対応する動画像を点滅表示したりすることにより、いずれのバス２０が対象音声情報に対応するかを把握可能にしてもよい。

また、例えば、監視装置１０は、各動画像に対応する音声を視覚化して表示してもよい。例えば、監視装置１０は、各動画像に対応する音声の波形を動画像に対応付けて表示することにより、いずれのバス２０が対象音声情報に対応するかを把握可能にしてもよい。例えば、あるバス２０において大きな音が検知された場合、監視装置１０に表示された音声の波形のうち、そのバス２０に対応する音声の波形が大きく変化するため、監視者は、いずれのバス２０が対象音声情報に対応するかを把握することができる。

（１−４．監視者の注視）
また、監視装置１０は、監視者が画面中のどの領域に注視しているかを示す情報に基づいて、音声の出力等の態様を変更してもよい。例えば、監視装置１０は、監視者の視線を検知するアイトラッキング等の種々の従来技術を適宜用いて、監視者が画面中のどの領域に注視しているかを示す情報を取得してもよい。

例えば、監視装置１０は、複数の画像情報（動画像）のうち、監視者の視線の動きに応じて前記監視者が注視していると推定される画像情報（以下、「注視画像情報」ともいう）に対応する音声情報を、他の画像情報に対応する音声情報とは異なる出力態様により出力してもよい。例えば、監視装置１０は、複数の画像情報のうち、注視画像情報に対応する音声情報のみを出力してもよい。例えば、監視装置１０は、注視画像情報に対応する音声情報の音量を、他の画像情報に対応する音声情報の音量よりも大きくしてもよい。例えば、監視装置１０は、複数の画像情報のうち、注視画像情報に対応する音声情報を他の音声情報よりも大きな音量で出力してもよい。なお、上記は一例であり、監視装置１０は、種々の情報を適宜用いて、音声情報や画像情報の出力態様を決定してもよい。

（１−５．音声出力）
また、監視装置１０は、画面の表示位置と対応する方向から音声情報が聞こえるようにスピーカ１６に音声を出力させてもよい。例えば、監視装置１０は、複数のスピーカ１６を有することにより、サラウンド音声を出力してもよい。例えば、監視装置１０は、画面の右側に表示された画像に対応する音声を、その画像側（右側）に位置するスピーカ１６から出力してもよい。例えば、監視装置１０は、画面の左側に表示された画像に対応する音声を、その画像側（左側）に位置するスピーカ１６から出力してもよい。例えば、監視装置１０は、画面の中央部に表示された画像に対応する音声を、中央部に位置するスピーカ１６から出力してもよい。例えば、監視装置１０の前方や左右方向にそれぞれスピーカ１６を配置することにより上記の処理を実現してもよい。なお、上記は一例であり、監視装置１０は、種々の従来技術を適宜用いて、画像と音声が出力される方向とが対応付け可能に音声を出力してもよい。例えば、監視装置１０は、単一のスピーカ１６やイヤホン等を用いる場合であっても、種々の従来技術を用いて上記の処理を実現してもよい。

（１−６．対象のフォーカス）
また、監視装置１０は、監視者がバス２０を指定した場合、監視者が指定したバス２０の音声情報と画像情報のみを出力してもよい。例えば、監視装置１０は、監視者があるバス２０が表示された領域を指定した場合、監視者が指定したバス２０の音声情報と画像情報のみを出力してもよい。また、監視装置１０は、監視者がバス２０を指定したバス２０以外のバス２０の監視者を他の監視者に変更するように、決定装置１００へ要求してもよい。この場合、決定装置１００は、要求に応じて、監視者がバス２０を指定したバス２０以外のバス２０の監視者を他の監視者に変更してもよい。また、監視装置１０は、対象音声情報が複数ある場合、複数の対象音声情報のうち、所定の対象音声情報に対応するバス２０の監視者を他の監視者に変更するように、決定装置１００へ要求してもよい。例えば、監視装置１０は、対象音声情報が２つある場合、２つの対象音声情報のうち、いずれか一方の対象音声情報に対応するバス２０の監視者を他の監視者に変更するように、決定装置１００へ要求してもよい。

〔２．監視装置の構成〕
次に、図３を用いて、実施形態に係る監視装置１０の構成について説明する。図３は、実施形態に係る監視装置の構成例を示す図である。図３に示すように、監視装置１０は、通信部１１と、記憶部１２と、入力部１３と、出力部１４と、制御部１５とを有する。また、監視装置１０は、監視者の視線を検知するアイトラッキングを行う場合、図示を省略するが監視者の視線を検知するためのセンサ等を有してもよい。

（通信部１１）
通信部１１は、例えば、通信回路やＮＩＣ（Network Interface Card）等によって実現される。そして、通信部１１は、ネットワークＮと有線または無線で接続され、決定装置１００との間で情報の送受信を行う。また、通信部１１は、バス２０や決定装置１００等との間で情報の送受信を行ってもよい。

（記憶部１２）
記憶部１２は、例えば、ＲＡＭ（Random Access Memory）、フラッシュメモリ（Flash Memory）等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。記憶部１２は、例えば、監視装置１０にインストールされているアプリケーションに関する情報、例えばプログラム（監視プログラム）等を記憶する。実施形態に係る記憶部１２は、図３に示すように、移動体情報記憶部１２Ａを有する。

（移動体情報記憶部１２Ａ）
実施形態に係る移動体情報記憶部１２Ａは、移動体に関する各種情報を記憶する。例えば、移動体情報記憶部１２Ａは、監視装置１０を利用する監視者が遠隔監視中の移動体に関する各種情報を記憶する。図４は、実施形態に係る移動体情報記憶部の一例を示す図である。図４に示す移動体情報記憶部１２Ａは、「バスＩＤ」、「最新位置」、「動画像」、「音声」、「運行経路」、「運行エリア」といった項目が含まれる。図４に示す移動体情報記憶部１２Ａは、図１中の監視者Ａ１に対応する移動体情報記憶部を示す。

「バスＩＤ」は、遠隔監視される移動体であるバスを識別するための識別情報を示す。例えば、バスＩＤ「２０−１」により識別されるバスは、図１中のバス２０−１に対応する。また、「最新位置」は、バスＩＤにより識別されるバスの最新の位置情報を示す。なお、図４に示す例では、「最新位置」は、「位置ＬＣ１１」といった抽象的な符号を図示するが、緯度や経度を示す情報であってもよい。

また、「動画像」は、バスから取得した動画像（単に「動画」ともいう）を示す。図４では「動画像」に「動画像ＭＶ１１」といった概念的な情報が格納される例を示したが、実際には、動画情報、または、その格納場所を示すファイルパス名などが格納される。

また、「音声」は、バスから取得した音声情報（単に「音声」ともいう）を示す。図４では「音声」に「音声ＡＤ１１」といった概念的な情報が格納される例を示したが、実際には、音声情報、または、その格納場所を示すファイルパス名などが格納される。

また、「運行経路」は、バスＩＤにより識別されるバスの運行経路を示す。例えば、「運行経路」は、バスＩＤにより識別されるバスが自動運転により運行する経路を示す。なお、図４に示す例では、「運行経路」は、「経路Ｒ１１」といった抽象的な符号を図示するが、通行する道路や停止するバス停等の緯度や経度を示す情報であってもよい。また、「運行エリア」は、バスＩＤにより識別されるバスの運行エリアを示す。例えば、「運行エリア」は、バスＩＤにより識別されるバスが自動運転により運行するエリアを示す。なお、図４に示す例では、「運行エリア」は、「エリアＡ」といった抽象的な符号を図示するが、「○○市」や「××区」等の具体的な地域名等を示す情報であってもよい。

図４の例では、バスＩＤ「２０−１」により識別されるバスの最新位置は、「位置ＬＣ１１」であることを示す。また、バスＩＤ「２０−１」により識別されるバスの動画像は、「動画像ＭＶ１１」であることを示す。また、バスＩＤ「２０−１」により識別されるバスの音声は、「音声ＡＤ１１」であることを示す。また、バスＩＤ「２０−１」により識別されるバスの運行経路は、「経路Ｒ１１」であることを示す。また、バスＩＤ「２０−１」により識別されるバスの運行エリアは、「エリアＡ」であることを示す。

このように、図４に示す移動体情報記憶部１２Ａは、図１中の監視者Ａ１がバス２０−１〜２０−３の３台を監視している状態における監視装置１０−１の移動体情報記憶部１２Ａを示す。すなわち、図４に示す移動体情報記憶部１２Ａには、図１中の監視者Ａ１が監視するバス２０−１〜２０−３の３台のバス２０に関する移動体情報が記憶される。なお、移動体情報記憶部１２Ａは、上記に限らず、目的に応じて種々の情報を記憶してもよい。

また、例えば、図１中の監視者Ａ２が利用する端末装置１０−２においては、移動体情報記憶部１２Ａには、図１中の監視者Ａ２が監視するバス２０−４、２０−５の２台のバス２０に関する移動体情報が記憶される。

また、記憶部１２は、上記以外にも種々の情報を記憶してもよい。例えば、記憶部１２は、決定装置１００の記憶部１２０に記憶される情報を記憶してもよい。例えば、記憶部１２は、監視者情報記憶部１２２（図７参照）や監視対応情報記憶部１２３（図８参照）等に示す情報を記憶してもよい。例えば、記憶部１２は、監視装置１０が配置されるバス２０に対応する情報を記憶してもよい。例えば、バス２０−１に配置される監視装置１０−１の場合、監視装置１０−１の記憶部１２は、決定装置１００の記憶部１２０に記憶される情報のうち、バス２０−１に対応する情報を記憶してもよい。

例えば、記憶部１２は、後述する通知部１５４により表示される各種情報を記憶してもよい。例えば、記憶部１２は、特定情報や明示情報等を記憶してもよい。例えば、記憶部１２は、監視装置１０が配置されるバス２０の監視者となり得る監視者の顔写真や業務経歴等に関する情報を記憶してもよい。

（入力部１３）
入力部１３は、ユーザからの各種操作を取得する。例えば、入力部１３は、タッチパネル機能により表示面（例えば出力部１４）を介してユーザからの各種操作を受け付けてもよい。また、入力部１３は、監視装置１０に設けられたボタンや、監視装置１０に接続されたキーボードやマウスからの各種操作を受け付けてもよい。

（出力部１４）
出力部１４は、例えば液晶ディスプレイや有機ＥＬ（Electro-Luminescence）ディスプレイ等によって実現されるスマートフォンやタブレット型端末等の表示画面であり、各種情報を表示するための表示手段である。例えば、出力部１４は、通知部１５４からの指示に応じて種々の情報を出力（表示）する。

（制御部１５）
制御部１５は、コントローラ（controller）であり、例えば、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等によって、監視装置１０内部の記憶部１２などの記憶装置に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。例えば、この各種プログラムには、インストールされているアプリケーションのプログラムが含まれる。また、制御部１５は、コントローラ（controller）であり、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路により実現される。

図３に示すように、制御部１５は、送信部１５１と、取得部１５２と、通知部１５４とを有し、以下に説明する監視処理の機能や作用を実現または実行する。なお、制御部１５の内部構成は、図３に示した構成に限られず、後述する監視処理を行う構成であれば他の構成であってもよい。また、制御部１５が有する各処理部の接続関係は、図３に示した接続関係に限られず、他の接続関係であってもよい。

（送信部１５１）
送信部１５１は、各種情報を送信する。例えば、送信部１５１は、外部の情報処理装置に対して各種情報を送信する。例えば、送信部１５１は、入力部１３により取得した操作に従って、バス２０や決定装置１００へ各種要求を送信する。例えば、送信部１５１は、所定のタイミングで決定装置１００へ対応監視者に関する情報を要求してもよい。

（取得部１５２）
取得部１５２は、各種情報を取得する。例えば、取得部１５２は、記憶部１２から各種情報を取得する。例えば、取得部１５２は、外部の情報処理装置から各種情報を取得する。取得部１５２は、外部の情報処理装置から各種情報を受信する。例えば、取得部１５２は、バス２０や決定装置１００から各種情報を取得する。

例えば、取得部１５２は、監視者が遠隔監視する移動体であって、自動運転により動作する移動体において検知された複数の画像情報と複数の音声情報とを取得する。例えば、取得部１５２は、複数の移動体の各々に対応する前記複数の画像情報と前記複数の音声情報とを取得する。例えば、取得部１５２は、監視対象となっている複数の移動体の各々から随時、画像情報や音声情報を取得してもよい。例えば、取得部１５２は、監視対象となっている複数の移動体の画像情報や音声情報を記憶部１２や決定装置１００から取得してもよい。

例えば、取得部１５２は、一の移動体における各箇所に対応する前記複数の画像情報と前記複数の音声情報とを取得する。例えば、取得部１５２は、監視対象となっている一の移動体から随時、一の移動体における各箇所に対応する画像情報や音声情報を取得してもよい。例えば、取得部１５２は、監視対象となっている一の移動体における各箇所に対応する画像情報や音声情報を記憶部１２や決定装置１００から取得してもよい。例えば、取得部１５２は、決定装置１００から対象音声情報と画像情報との対応付けを示す情報を取得してもよい。

（判定部１５３）
判定部１５３は、各種情報を判定する。例えば、判定部１５３は、取得部１５２により外部装置から取得された各種情報に基づいて、各種情報を判定する。例えば、判定部１５３は、決定装置１００から取得された各種情報に基づいて、各種情報を判定する。例えば、判定部１５３は、バス２０から取得された各種情報に基づいて、各種情報を判定する。例えば、判定部１５３は、記憶部１２に記憶された情報に基づいて、各種情報を判定する。例えば、判定部１５３は、移動体情報記憶部１２Ａ等に記憶された情報に基づいて、各種情報を判定する。

例えば、判定部１５３は、バス２０−１から取得した音声情報に異音が含まれる場合、バス２０−１の音声情報を対象音声情報と判定する。例えば、判定部１５３は、バス２０−１から取得した音声情報と通常動作時の音声パターンとを比較することにより、音声情報に異音が含まれるかどうかを判定する。また、例えば、判定部１５３は、バス２０−１から取得した音声情報と、異音と判定される音の一覧情報とを比較することにより、音声情報に異音が含まれるかどうかを判定する。

（通知部１５４）
通知部１５４は、各種情報を通知する。例えば、通知部１５４は、出力部１４やスピーカ１６（音出部）を介して各種情報を通知する。例えば、通知部１５４は、出力部１４を介して各種情報を表示する。例えば、通知部１５４は、スピーカ１６を介して音声情報を出力する。例えば、通知部１５４は、スピーカ１６を介して複数の音声情報を出力する。例えば、通知部１５４は、各種情報を出力部１４に表示させる。例えば、通知部１５４は、取得部１５２により取得された各種情報を通知する。例えば、通知部１５４は、記憶部１２に記憶された各種情報を通知する。例えば、通知部１５４は、バス２０や決定装置１００から受信した各種情報を通知する。例えば、通知部１５４は、判定部１５３による判定に応じて各種情報を通知する。例えば、通知部１５４は、複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報を監視者に対して通知する。例えば、通知部１５４は、判定部１５３により対応音声情報と判定された音声情報と画像情報とが対応することを識別可能な表示態様で複数の画像情報を表示する。

例えば、通知部１５４は、取得部１５２により取得された複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報に対応する画像情報と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示する。

例えば、通知部１５４は、対象音声情報に対応する画像情報と、対象音声情報に関する表示情報とを対応付けて表示する。例えば、通知部１５４は、対象音声情報に対応する画像情報と、対象音声情報を視覚化した表示情報とを対応付けて表示する。例えば、通知部１５４は、注視画像情報に対応する音声情報の音量を、他の画像情報に対応する音声情報の音量よりも大きくする。

例えば、通知部１５４は、所定の条件を満たす複数の対象音声情報がある場合、複数の対象音声情報の各々のレベルに応じて変動する表示態様で、複数の対象音声情報の各々に対応する画像情報を表示する。例えば、通知部１５４は、取得部１５２により取得された複数の音声情報のうち、所定の条件を満たす対象音声情報に対応する移動体と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示する。例えば、通知部１５４は、取得部１５２により取得された複数の音声情報のうち、所定の条件を満たす対象音声情報に対応する一の移動体における箇所と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示する。

図１の例では、通知部１５４は、バス２０−１に対応する画像情報を、対象音声情報に対応することを識別可能な表示態様に変更する。例えば、通知部１５４は、バス２０−１から取得した音声情報が動作状況の確認を要する対象音声情報であるとして、バス２０−１を遠隔監視している監視者Ａ１に、その対象音声情報がバス２０−１から取得した音声情報であることが把握可能なように表示態様を変更する。

図１の例では、通知部１５４は、バス２０−１に対応する動画像ＭＶ１１の色を他の動画像ＭＶ１２や動画像ＭＶ１３と異なる色に変更することにより、対象音声情報の発生源がバス２０−１であることを識別可能な表示態様で複数の動画像ＭＶ１１〜ＭＶ１３を表示する。例えば、通知部１５４は、バス２０−１に対応する動画像ＭＶ１１のフレームの色を赤や黄色等の注目を引く色に変更することにより、対象音声情報の発生源がバス２０−１であることを識別可能な表示態様で複数の動画像ＭＶ１１〜ＭＶ１３を表示する。

なお、上述した制御部１５による監視処理等の処理は、例えば、ＪａｖａＳｃｒｉｐｔ（登録商標）などにより実現されてもよい。また、上述した監視処理が所定のアプリケーションにより行われる場合や監視処理が専用アプリにより行われる場合、制御部１５は、例えば、所定のアプリや専用アプリを制御するアプリ制御部を有してもよい。

（スピーカ１６）
また、図３に示す監視装置１０は、音声情報を出力する音出部であるスピーカ１６を有する。例えば、スピーカ１６は、移動体において検知された音声情報を出力する。例えば、スピーカ１６は、通知部１５４からの指示に応じて種々の音声情報を出力する。なお、出力部１４が音声情報も出力可能である場合、監視装置１０はスピーカ１６を有さず、出力部１４により音声情報も出力してもよい。また、スピーカ１６は、監視装置１０と一体でなくてもよく、監視装置１０に外付けされるスピーカやヘッドフォンやイヤホンであってもよい。すなわち、スピーカ１６は、監視者に対して移動体における音声情報を出力可能であればどのような態様により実現されてもよい。

スピーカ１６は、取得部１５２により取得された複数の音声情報を出力する。例えば、スピーカ１６は、監視者の視線に関する情報に基づく出力態様で、複数の音声情報を出力する。例えば、スピーカ１６は、複数の画像情報のうち、監視者の視線の動きに応じて監視者が注視していると推定される画像情報である注視画像情報に対応する音声情報を、他の画像情報に対応する音声情報とは異なる出力態様で出力する。例えば、スピーカ１６は、複数の画像情報のうち、注視画像情報に対応する音声情報のみを出力する。図１の例では、スピーカ１６は、バス２０−１において発生した異音を含む音声を出力する。

〔３．決定装置の構成〕
次に、図５を用いて、実施形態に係る決定装置１００の構成について説明する。図５は、実施形態に係る決定装置の構成例を示す図である。図５に示すように、決定装置１００は、通信部１１０と、記憶部１２０と、制御部１３０とを有する。なお、決定装置１００は、決定装置１００の管理者等から各種操作を受け付ける入力部（例えば、キーボードやマウス等）や、各種情報を表示するための出力（例えば、液晶ディスプレイ等）を有してもよい。

（通信部１１０）
通信部１１０は、例えば、通信回路やＮＩＣ等によって実現される。そして、通信部１１０は、ネットワークＮと有線または無線で接続され、監視装置１０やバス２０との間で情報の送受信を行う。

（記憶部１２０）
記憶部１２０は、例えば、ＲＡＭ、フラッシュメモリ等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。実施形態に係る記憶部１２０は、図５に示すように、移動体情報記憶部１２１と、監視者情報記憶部１２２と、監視対応情報記憶部１２３とを有する。

（移動体情報記憶部１２１）
実施形態に係る移動体情報記憶部１２１は、ユーザに関する各種情報を記憶する。例えば、移動体情報記憶部１２１は、ユーザ属性に関する各種情報を記憶する。図６は、実施形態に係る移動体情報記憶部の一例を示す図である。図６に示す移動体情報記憶部１２１は、「バスＩＤ」、「最新位置」、「動画像」、「音声」、「運行経路」、「運行エリア」といった項目が含まれる。

「バスＩＤ」は、遠隔監視される移動体であるバスを識別するための識別情報を示す。例えば、バスＩＤ「２０−１」により識別されるバスは、図１中のバス２０−１に対応する。また、「最新位置」は、バスＩＤにより識別されるバスの最新の位置情報を示す。なお、図６に示す例では、「最新位置」は、「位置ＬＣ１１」といった抽象的な符号を図示するが、緯度や経度を示す情報であってもよい。

また、「動画像」は、バスから取得した動画像（単に「動画」ともいう）を示す。図６では「動画像」に「動画像ＭＶ１１」といった概念的な情報が格納される例を示したが、実際には、動画情報、または、その格納場所を示すファイルパス名などが格納される。

また、「音声」は、バスから取得した音声情報（単に「音声」ともいう）を示す。図６では「音声」に「音声ＡＤ１１」といった概念的な情報が格納される例を示したが、実際には、音声情報、または、その格納場所を示すファイルパス名などが格納される。

また、「運行経路」は、バスＩＤにより識別されるバスの運行経路を示す。例えば、「運行経路」は、バスＩＤにより識別されるバスが自動運転により運行する経路を示す。なお、図６に示す例では、「運行経路」は、「経路Ｒ１１」といった抽象的な符号を図示するが、通行する道路や停止するバス停等の緯度や経度を示す情報であってもよい。また、「運行エリア」は、バスＩＤにより識別されるバスの運行エリアを示す。例えば、「運行エリア」は、バスＩＤにより識別されるバスが自動運転により運行するエリアを示す。なお、図６に示す例では、「運行エリア」は、「エリアＡ」といった抽象的な符号を図示するが、「○○市」や「××区」等の具体的な地域名等を示す情報であってもよい。

図６の例では、バスＩＤ「２０−１」により識別されるバスの最新位置は、「位置ＬＣ１１」であることを示す。また、バスＩＤ「２０−１」により識別されるバスの動画像は、「動画像ＭＶ１１」であることを示す。また、バスＩＤ「２０−１」により識別されるバスの音声は、「音声ＡＤ１１」であることを示す。また、バスＩＤ「２０−１」により識別されるバスの運行経路は、「経路Ｒ１１」であることを示す。また、バスＩＤ「２０−１」により識別されるバスの運行エリアは、「エリアＡ」であることを示す。

なお、移動体情報記憶部１２１は、上記に限らず、目的に応じて種々の情報を記憶してもよい。

（監視者情報記憶部１２２）
実施形態に係る監視者情報記憶部１２２は、ユーザのコンテキストに関する各種情報を記憶する。図７は、実施形態に係る監視者情報記憶部の一例を示す図である。例えば、監視者情報記憶部１２２は、監視者に関する各種情報を記憶する。図７に示す監視者情報記憶部１２２は、「監視者ＩＤ」、「状況」、「業務時間情報」、「業務スキル」、「最大監視台数」といった項目が含まれる。

「監視者ＩＤ」は、自動運転で移動するバスを遠隔監視する監視者を識別するための識別情報を示す。例えば、監視者ＩＤ「Ａ１」により識別される監視者は、図１中の監視装置１０−１を利用する監視者Ａ１に対応する。「状況」は、監視者ＩＤにより識別される監視者の業務状況を示す。

また、「業務時間情報」は、監視者ＩＤにより識別される監視者の業務時間を示す。なお、図７に示す例では、「業務時間情報」は、「業務時間ＳＦ１１」といった抽象的な符号を図示するが、「平日９時〜１７時」等の具体的な業務時間を示す情報であってもよい。

また、「業務スキル」は、監視者ＩＤにより識別される監視者の業務に関するスキルを示す。図７では「業務スキル」に「業務スキルＳＫ１１（勤続５年）」といった抽象的な符号と勤続年数を図示するが、「業務スキル」には、勤続年数に限らず、対応可能な障害の種別等が含まれてもよい。

また、「最大監視台数」は、監視者ＩＤにより識別される監視者が同時に遠隔監視可能な移動体の台数を示す。なお、各監視者の最大監視台数は、各監視者の勤続年数等の業務経験や個人の能力に応じて決定されてもよい。

図７の例では、監視者ＩＤ「Ａ１」により識別される監視者の状況は、「勤務中」であることを示す。また、監視者ＩＤ「Ａ１」により識別される監視者の業務時間情報は、「業務時間ＳＦ１１」であることを示す。また、監視者ＩＤ「Ａ１」により識別される監視者の業務スキルは、「業務スキルＳＫ１１（勤続５年）」であることを示す。また、監視者ＩＤ「Ａ１」により識別される監視者の最大監視台数は、「５台」であることを示す。

なお、監視者情報記憶部１２２は、上記に限らず、目的に応じて種々の情報を記憶してもよい。

（監視対応情報記憶部１２３）
実施形態に係る監視対応情報記憶部１２３は、監視者と遠隔監視対象であるバスとの対応付けに関する各種情報を記憶する。図８は、実施形態に係る監視対応情報記憶部の一例を示す図である。例えば、監視対応情報記憶部１２３は、監視者と遠隔監視対象であるバスとの対応付けやバスの状態（ステータス）等に関する各種情報を記憶する。図８に示す監視対応情報記憶部１２３には、「監視者ＩＤ」、「監視対象」といった項目が含まれる。また、「監視対象」には、「バスＩＤ」、「ステータス」といった項目が含まれる。

「監視者ＩＤ」は、自動運転で移動するバスを遠隔監視する監視者を識別するための識別情報を示す。「監視対象」は、監視対象となるバスの各種情報が含まれる。「バスＩＤ」は、遠隔監視される移動体であるバスを識別するための識別情報を示す。「ステータス」は、バスＩＤにより識別されるバスの状態（ステータス）を示す。

図８の例では、監視者ＩＤ「Ａ１」により識別される監視者は、バスＩＤ「２０−１」により識別されるバス、バスＩＤ「２０−２」により識別されるバス、及びバスＩＤ「２０−３」により識別されるバスの３台のバスを遠隔監視中であることを示す。すなわち、監視者Ａ１は、バス２０−１〜２０−３の３台のバスを遠隔監視中であることを示す。また、バスＩＤ「２０−１」により識別されるバスのステータスは、「通常」であることを示す。例えば、ステータス「通常」は、対応するバスが定常通り運行中であることを示す。また、バスＩＤ「２０−２」により識別されるバスのステータスは、「通常」であることを示す。また、バスＩＤ「２０−３」により識別されるバスのステータスは、「通常」であることを示す。

図８の例では、監視者ＩＤ「Ａ５」により識別される監視者は、バスＩＤ「２０−１５」により識別されるバスのみを遠隔監視中であることを示す。すなわち、監視者Ａ５は、バス２０−１５の１台のバスを遠隔監視中であることを示す。また、バスＩＤ「２０−１５」により識別されるバスのステータスは、「事象発生」であることを示す。例えば、ステータス「事象発生」は、対応するバスに所定の事象が発生していることを示す。すなわち、図８の例では、監視者Ａ５は、バス２０−１５に故障等の所定の事象が発生したため、バス２０−１５の１台のみを対応中であることを示す。

なお、監視対応情報記憶部１２３は、上記に限らず、目的に応じて種々の情報を記憶してもよい。例えば、ステータスには、「事象発生」に限らず、事象に応じて複数の種別が含まれてもよい。例えば、ステータスは、各事象に対応する「緊急車両接近」や「故障」や「異音発生」や「障害物有」等のより詳細な内容であってもよい。

（制御部１３０）
図５の説明に戻って、制御部１３０は、コントローラ（controller）であり、例えば、ＣＰＵやＭＰＵ等によって、決定装置１００内部の記憶装置に記憶されている各種プログラム（決定プログラムの一例に相当）がＲＡＭを作業領域として実行されることにより実現される。また、制御部１３０は、コントローラ（controller）であり、例えば、ＡＳＩＣやＦＰＧＡ等の集積回路により実現される。

図５に示すように、制御部１３０は、取得部１３１と、判定部１３２と、決定部１３３と、送信部１３４とを有し、以下に説明する情報処理の機能や作用を実現または実行する。なお、制御部１３０の内部構成は、図５に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。

（取得部１３１）
取得部１３１は、各種情報を取得する。例えば、取得部１３１は、外部装置から各種情報を取得する。例えば、取得部１３１は、監視装置１０から各種情報を取得する。例えば、取得部１３１は、バス２０から各種情報を取得する。例えば、取得部１３１は、移動体情報記憶部１２１や、監視者情報記憶部１２２や、監視対応情報記憶部１２３等に示す各種情報を、外部の情報処理装置から取得してもよい。

例えば、取得部１３１は、記憶部１２０から各種情報を取得する。例えば、取得部１３１は、移動体情報記憶部１２１や、監視者情報記憶部１２２や、監視対応情報記憶部１２３等から各種情報を取得する。

例えば、取得部１３１は、自動運転により動作する複数の移動体を遠隔監視する一の監視者に関する情報を取得する。例えば、取得部１３１は、自動運転により道路を走行する複数の車両を遠隔監視する一の監視者に関する情報を取得する。

例えば、取得部１３１は、監視者が遠隔監視する複数の移動体であって、自動運転により動作する複数の移動体に関する情報を取得する。例えば、取得部１３１は、一の監視者が遠隔監視する複数の移動体であって、自動運転により動作する複数の移動体の遠隔監視に関する情報を取得する。

例えば、取得部１３１は、バス２０の対象情報を取得する。例えば、取得部１３１は、バス２０において検知された動画像や音声等の種々の情報を取得する。例えば、取得部１３１は、監視装置１０−１からバス２０−１に所定の事象が発生していることを示す情報を取得する。

例えば、取得部１３１は、監視装置１０−１から監視者Ａ１が全監視対象の監視が困難になることを示す情報を取得する。例えば、取得部１３１は、監視装置１０−１が撮像する監視装置１０−１の画面側の画像を取得する。

（判定部１３２）
判定部１３２は、各種情報を判定する。例えば、判定部１３２は、取得部１３１により外部装置から取得された各種情報に基づいて、各種情報を判定する。例えば、判定部１３２は、監視装置１０から取得された各種情報に基づいて、各種情報を判定する。例えば、判定部１３２は、バス２０から取得された各種情報に基づいて、各種情報を判定する。例えば、判定部１３２は、記憶部１２０に記憶された情報に基づいて、各種情報を判定する。例えば、判定部１３２は、移動体情報記憶部１２１や、監視者情報記憶部１２２や、監視対応情報記憶部１２３等に記憶された情報に基づいて、各種情報を判定する。

例えば、判定部１３２は、取得部１３１により取得された一の監視者に関する情報に基づいて、一の監視者の監視状況が所定の条件を満たすかどうかを判定する。例えば、判定部１３２は、一の監視者が複数の移動体を監視することが困難な状況になったかどうかを判定する。例えば、判定部１３２は、一の監視者に関する情報に基づく一の監視者の監視状況が所定の条件を満たすかどうかを判定する。

例えば、判定部１３２は、所定の移動体への一の監視者による対応が発生したかどうかを判定する。例えば、判定部１３２は、複数の移動体に含まれる所定の移動体への一の監視者による対応が発生したかどうかを判定する。

例えば、判定部１３２は、複数の移動体の監視における一の監視者の負荷が所定の基準を満たすかどうかを判定する。例えば、判定部１３２は、複数の移動体の監視における一の監視者の負荷が所定の閾値以上であるかどうかを判定する。例えば、判定部１３２は、複数の移動体の監視における一の監視者の負荷が所定の閾値未満となったかどうかを判定する。

例えば、判定部１３２は、一の監視者が複数の移動体を監視することが困難な状況になったかどうかを判定する。例えば、判定部１３２は、一の監視者が複数の移動体を監視するための監視装置を視認不可能な状況になったかどうかを判定する。例えば、判定部１３２は、一の監視者が複数の移動体の監視を行う席から離れたかどうかを判定する。

例えば、判定部１３２は、取得部１３１により取得された複数の移動体に関する情報に基づいて、当該複数の移動体の状況が所定の条件を満たすかどうかを判定する。例えば、判定部１３２は、複数の移動体のうち、一の移動体において所定の事象が発生したかどうかを判定する。

例えば、判定部１３２は、一の移動体の移動を妨げる事象が発生したかどうかを判定する。例えば、判定部１３２は、一の移動体における不具合が発生したかどうかを判定する。例えば、判定部１３２は、一の移動体の進行方向において障害が発生したかどうかを判定する。

例えば、判定部１３２は、取得部１３１により取得された遠隔監視に関する情報に基づいて、複数の移動体を監視する監視者を変更するタイミングかどうかを判定する。例えば、判定部１３２は、複数の移動体のうち一の移動体の状況が所定の条件を満たすかどうかを判定する。

例えば、判定部１３２は、監視装置１０−１から取得した移動体に関する情報に基づいて、移動体が所定の条件を満たすかどうかを判定する。例えば、判定部１３２は、監視装置１０−１から取得するバス２０−１に所定の事象が発生していることを示す情報に基づいて、バス２０−１に所定の事象が発生したと判定してもよい。また、例えば、判定部１３２は、監視装置１０−１から取得するバス２０−１に所定の事象が発生していることを示す情報に基づいて、バス２０−１が所定の条件を満たすと判定してもよい。

例えば、判定部１３２は、監視装置１０−１が撮像する監視装置１０−１の画面側の画像に基づいて、監視者Ａ１が監視装置１０−１から離れたと判定する。例えば、判定部１３２は、監視装置１０−１から取得した画像を解析することにより、監視者Ａ１が監視装置１０−１から離れたと判定する。また、例えば、判定部１３２は、監視者Ａ１の位置情報等に基づいて、監視者Ａ１が監視装置１０−１から離れたと判定する。また、例えば、判定部１３２は、監視者Ａ１が監視装置１０−１から離れたと判定することにより、全監視対象の監視が困難になったと判定してもよい。例えば、判定部１３２は、監視者Ａ１と監視装置１０−１との位置関係を把握可能であれば、どのような情報に基づいて、監視者Ａ１により監視が困難になったかを判定してもよい。

例えば、判定部１３２は、バス２０−１から取得した音声情報に異音が含まれる場合、バス２０−１の音声情報を対象音声情報と判定する。例えば、判定部１３２は、バス２０−１から取得した音声情報と通常動作時の音声パターンとを比較することにより、音声情報に異音が含まれるかどうかを判定してもよい。また、例えば、判定部１３２は、バス２０−１から取得した音声情報と、異音と判定される音の一覧情報とを比較することにより、音声情報に異音が含まれるかどうかを判定してもよい。

（決定部１３３）
決定部１３３は、各種情報を決定する。例えば、決定部１３３は、取得部１３１により外部装置から取得された各種情報に基づいて、各種情報を決定する。例えば、決定部１３３は、監視装置１０から取得された各種情報に基づいて、各種情報を決定する。例えば、決定部１３３は、バス２０から取得された各種情報に基づいて、各種情報を決定する。例えば、決定部１３３は、記憶部１２０に記憶された情報に基づいて、各種情報を決定する。例えば、決定部１３３は、移動体情報記憶部１２１や、監視者情報記憶部１２２や、監視対応情報記憶部１２３等に記憶された情報に基づいて、各種情報を決定する。また、決定部１３３は、判定部１３２による判定に基づいて、各種情報を決定する。

例えば、決定部１３３は、取得部１３１により取得された一の監視者に関する情報に基づいて、一の監視者の監視状況が所定の条件を満たすかどうかに応じて、複数の移動体の自動運転に関する態様を決定する。例えば、決定部１３３は、一の監視者が複数の移動体を監視することが困難な状況になった場合、複数の移動体のうち、一部の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、一の監視者に関する情報に基づく一の監視者の監視状況が所定の条件を満たすかどうかの判定に応じて、複数の移動体の自動運転に関する態様を決定する。

例えば、決定部１３３は、所定の移動体への一の監視者による対応が発生した場合、複数の移動体のうち、一部の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、複数の移動体に含まれる所定の移動体への一の監視者による対応が発生した場合、複数の移動体のうち、一部の移動体の自動運転に関する態様を変更すると決定する。

例えば、決定部１３３は、複数の移動体の監視における一の監視者の負荷が所定の基準を満たすように、一部の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、複数の移動体の監視における一の監視者の負荷が他の監視者と平均化するように、一部の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、複数の移動体の監視における一の監視者の負荷が所定の閾値以上である場合、一部の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、複数の移動体の監視における一の監視者の負荷が所定の閾値未満となるように、一部の移動体の自動運転に関する態様を変更すると決定する。

例えば、決定部１３３は、一部の移動体以外の移動体の監視者を一の監視者から他の監視者に変更するか、または、一部の移動体以外の移動体の動作を停止させると決定する。例えば、決定部１３３は、一の監視者が複数の移動体を監視することが困難な状況になった場合、複数の移動体の自動運転に関する態様を変更すると決定する。

例えば、決定部１３３は、一の監視者が複数の移動体を監視するための監視装置を視認不可能な状況になった場合、複数の移動体の監視者を一の監視者から他の監視者に変更するか、または、複数の移動体の動作を停止させると決定する。例えば、決定部１３３は、一の監視者が複数の移動体の監視を行う席から離れた場合、複数の移動体の監視者を一の監視者から他の監視者に変更するか、または、複数の移動体の動作を停止させると決定する。

例えば、決定部１３３は、取得部１３１により取得された複数の移動体に関する情報に基づいて、当該複数の移動体の状況が所定の条件を満たす場合、複数の移動体の自動運転に関する態様を決定する。例えば、決定部１３３は、複数の移動体のうち、一の移動体において所定の事象が発生した場合、複数の移動体のうち、一の移動体の自動運転に関する態様を変更すると決定する。

例えば、決定部１３３は、一の移動体の移動を妨げる事象が発生した場合、複数の移動体のうち、一の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、一の移動体における不具合が発生した場合、複数の移動体のうち、一の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、一の移動体の進行方向において障害が発生した場合、複数の移動体のうち、一の移動体の自動運転に関する態様を変更すると決定する。

例えば、決定部１３３は、複数の移動体のうち、一の移動体以外の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、一の移動体以外の移動体の監視者を他の監視者に変更するか、または、一の移動体以外の移動体の動作を停止させると決定する。例えば、決定部１３３は、一の移動体の自動運転に関する態様を変更すると決定する。例えば、決定部１３３は、一の移動体の自動運転に関する態様を変更するか、または、一の移動体の動作を停止させると決定する。

例えば、決定部１３３は、取得部１３１により取得された遠隔監視に関する情報に基づいて、複数の移動体を監視する監視者を変更するタイミングを決定する。例えば、決定部１３３は、複数の移動体のうち一の移動体の状況が所定の条件を満たすタイミングに基づいて、複数の移動体を監視する監視者を変更すると決定する。

例えば、決定部１３３は、一の移動体が停止したタイミングに基づいて、複数の移動体を監視する監視者を変更すると決定する。例えば、決定部１３３は、一の移動体が停止したタイミングで、複数の移動体を監視する監視者を変更すると決定する。例えば、決定部１３３は、一の移動体が停止してから所定の時間が経過したタイミングで、複数の移動体を監視する監視者を変更すると決定する。

例えば、決定部１３３は、タイミングに基づいて、一の移動体を監視する監視者を変更すると決定する。例えば、決定部１３３は、タイミングに基づいて、複数の移動体のうち、一の移動体以外の移動体を監視する監視者を変更すると決定する。例えば、決定部１３３は、一の移動体が一の監視者を含む複数の監視者により遠隔監視される場合、タイミングに基づいて、一の移動体を監視する監視者を変更すると決定する。

例えば、決定部１３３は、一の移動体が一の監視者を含む複数の監視者により遠隔監視される場合、タイミングに基づいて、一の移動体を監視する一の監視者を変更すると決定する。例えば、決定部１３３は、一の移動体が一の監視者を含む複数の監視者により遠隔監視される場合、タイミングに基づいて、一の移動体を監視する複数の監視者から一の監視者を除外すると決定する。例えば、決定部１３３は、一の移動体が一の監視者を含む複数の監視者により遠隔監視される場合、タイミングに基づいて、一の移動体を監視する複数の監視者のうち、一の監視者を他の監視者に変更すると決定する。

図９の例では、決定部１３３は、所定の事象が発生したバス２０−１を遠隔監視している監視者Ａ１の監視対象のうち、バス２０−１以外のバス２０の監視者を他の監視者へ変更すると決定する。例えば、決定部１３３は、監視者Ａ１の監視対象であるバス２０−１〜２０−３のうち、バス２０−２、２０−３の監視者を監視者Ａ２へ変更すると決定する。例えば、決定部１３３は、バス２０−１が所定の条件を満たすと判定したタイミングで、監視者Ａ１の監視対象のうち、バス２０−１以外のバス２０の監視者を変更すると決定する。そして、決定部１３３は、監視者Ａ１の監視対象であるバス２０−２、２０−３の監視者を監視者Ａ２へ変更する。図９の例では、地図情報ＭＰ１１−２に示すように、決定部１３３は、各監視者Ａ１、Ａ２の監視対象を変更することにより、複数の移動体の自動運転に関する態様を決定する。

図１１の例では、決定部１３３は、全監視対象の監視が困難になった監視者Ａ１の監視対象の全バス２０の監視者を他の監視者へ変更すると決定する。例えば、決定部１３３は、監視者Ａ１の監視対象であるバス２０−１〜２０−３の監視者を監視者Ａ２へ変更すると決定する。例えば、決定部１３３は、監視者Ａ１が全監視対象の監視が困難になったことを示す情報を取得したタイミングで、監視者Ａ１の監視対象のバス２０の監視者を変更すると決定する。そして、決定部１３３は、監視者Ａ１の監視対象であるバス２０−１〜２０−３の監視者を監視者Ａ２へ変更する。図１１の例では、地図情報ＭＰ１１−２に示すように、決定部１３３は、各監視者Ａ１、Ａ２の監視対象を変更することにより、複数の移動体の自動運転に関する態様を決定する。

（送信部１３４）
送信部１３４は、外部装置に各種情報を送信する。例えば、送信部１３４は、監視装置１０に各種情報を送信する。例えば、送信部１３４は、バス２０と監視装置１０が直接通信する場合、バス２０に対象情報を送信する先を指定する情報を送信してもよい。例えば、送信部１３４は、バス２０−１が監視装置１０−１を利用する監視者Ａ１に監視される場合、バス２０−１に監視装置１０−１へ対象情報を送信するように送信先を指定する情報を送信してもよい。

例えば、送信部１３４は、監視装置１０に監視対象となるバス２０に関する対象情報を送信してもよい。例えば、送信部１３４は、バス２０において検知された動画像や音声等の種々の情報を監視装置１０に送信してもよい。

〔４．表示の変更〕
図９〜図１２を用いて監視装置１０における表示の変更について説明する。図９及び図１１は、実施形態に係る監視処理の一例を示す図である。図１０及び図１２は、実施形態に係る表示の変更の一例を示す図である。図９及び図１１に示す地図情報ＭＰ１１−１、ＭＰ１１−２について、簡単に説明する。図９及び図１１に示す地図情報ＭＰ１１−１、ＭＰ１１−２は、バス２０−１〜２０−５の位置やバス２０と監視者との関係等を模式的に示す図である。図９及び図１１に示す地図情報ＭＰ１１−１は、図１に示す地図情報ＭＰ１１−１に対応する。図９及び図１１に示す地図情報ＭＰ１１−１及び地図情報ＭＰ１１−２は、バス２０と監視者との関係の変化、すなわちバス２０の監視者の変更を図示するためのものであり、地図情報ＭＰ１１−１及び地図情報ＭＰ１１−２に示す範囲（エリア）は、同一のエリアである。また、地図情報ＭＰ１１−１、ＭＰ１１−２について、特に区別なく説明する場合には、地図情報ＭＰ１１と記載する。

まず、図９を用いて監視装置１０−１における表示の変更の一例を示す。図９中のステップＳ１１〜Ｓ１３は、図１中のステップＳ１１〜Ｓ１３と同様のため説明を省略する。図９の例では、ステップＳ１３においてバス２０−１から異音等の故障の可能性を示す事象が発生する。また、図１中のステップＳ１３−１、Ｓ１３−２による出力により、バス２０−１を遠隔監視している監視者Ａ１は、監視装置１０−１が出力する異音を含む対象音声情報がバス２０−１に対応する音声であると把握し、バス２０−１に所定の事象が発生していると推定する。そして、監視者Ａ１は、監視装置１０−１を操作することにより、決定装置１００へバス２０−１に所定の事象が発生していることを示す情報を送信する。

例えば、決定装置１００は、監視装置１０−１から取得した移動体に関する情報に基づいて、移動体が所定の条件を満たすかどうかを判定する。例えば、決定装置１００は、監視装置１０−１から取得するバス２０−１に所定の事象が発生していることを示す情報に基づいて、バス２０−１に所定の事象が発生したと判定してもよい。また、例えば、決定装置１００は、監視装置１０−１から取得するバス２０−１に所定の事象が発生していることを示す情報に基づいて、バス２０−１が所定の条件を満たすと判定してもよい。なお、所定の条件は、バス２０に所定の事象が発生したかどうかに限らず、種々の条件であってもよい。

バス２０−１が所定の条件を満たすと判定した決定装置１００は、複数の移動体の監視態様を決定する（ステップＳ１４）。例えば、決定装置１００は、複数の移動体の自動運転に関する態様を決定する。例えば、決定装置１００は、複数の移動体を監視する監視者を変更するタイミングを決定する。図９の例では、決定装置１００は、所定の事象が発生したバス２０−１を遠隔監視している監視者Ａ１の監視対象のうち、バス２０−１以外のバス２０の監視者を他の監視者へ変更すると決定する。具体的には、決定装置１００は、監視者Ａ１の監視対象であるバス２０−１〜２０−３のうち、バス２０−２、２０−３の監視者を監視者Ａ２へ変更すると決定する。例えば、決定装置１００は、バス２０−１が所定の条件を満たすと判定したタイミングで、監視者Ａ１の監視対象のうち、バス２０−１以外のバス２０の監視者を変更すると決定する。そして、決定装置１００は、監視者Ａ１の監視対象であるバス２０−２、２０−３の監視者を監視者Ａ２へ変更する。なお、監視者Ａ２は、１０台まで複数のバス２０を監視可能な監視者であるものとする（図８参照）。また、例えば、決定装置１００は、他の監視者への監視者の変更ができない場合は、バス２０−１またはバス２０−２、２０−３のいずれかの動作（走行）を停止させてもよい。また、例えば、決定装置１００は、バス２０−１の監視者を監視者Ａ１から他の監視者（例えば監視対象が０台の監視者）へ監視者を変更すると決定してもよい。なお、ここでいう、「自動運転に関する態様」には、上述のような、監視者の変更や移動体の停止に限らず種々の態様が含まれるものとする。例えば、「自動運転に関する態様」には、移動体の速度を落とす（低下させる）ことが含まれてもよい。また、例えば、「自動運転に関する態様」には、移動体の所定のランプを点灯（点滅）させる、例えば移動体のハザードを出すことが含まれてもよい。また、例えば、「自動運転に関する態様」には、移動体から所定の音を出力させる、例えば移動体のクラクションを鳴らすことが含まれてもよい。

図９中の地図情報ＭＰ１１−２に示すように、決定装置１００は、各監視者Ａ１、Ａ２の監視対象を変更することにより、複数の移動体の自動運転に関する態様を決定する。図９の例では、決定装置１００による監視処理の後の時点では、監視者Ａ１が１台のバス２０−１を遠隔監視し、監視者Ａ２が４台のバス２０−２〜２０−５を遠隔監視している。

ここで、図１０に示すように、監視者Ａ１の監視対象がバス２０−１のみに変更されたため、監視装置１０−１の表示が変更される（ステップＳ１４−１）。具体的には、監視装置１０−１に表示されていた動画像ＭＶ１１〜ＭＶ１３のうち、バス２０−１に対応する動画像ＭＶ１１のみが残り、他のバス２０−２、２０−３に各々対応する動画像ＭＶ１２、ＭＶ１３は表示から除外される。このように、監視装置１０−１の表示が変更される。

この場合、監視装置１０−１には、バス２０−１に対応する動画像ＭＶ１１のみが表示される。これにより、監視者Ａ１は、バス２０−１を集中して監視することが可能となる。また、監視者Ａ２の監視対象がバス２０−２〜２０−５に変更されたため、監視装置１０−２には、バス２０−２、２０−３に各々対応する動画像ＭＶ１２、ＭＶ１３が追加され、バス２０−２〜２０−５に各々対応する動画像ＭＶ１２〜ＭＶ１５が表示されるが、図示を省略する。

監視者Ａ１が利用する監視装置１０−１は、バス２０−１の対象情報を取得する（ステップＳ１５−１）。図９の例では、監視装置１０−１は、バス２０−１の対象情報として、地図情報ＭＰ１１−２に示すバス２０−１において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−２の対象情報を取得する（ステップＳ１５−２）。図９の例では、監視装置１０−２は、バス２０−２の対象情報として、地図情報ＭＰ１１−２に示すバス２０−２において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−３の対象情報を取得する（ステップＳ１５−３）。図９の例では、監視装置１０−２は、バス２０−３の対象情報として、地図情報ＭＰ１１−２に示すバス２０−３において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−４の対象情報を取得する（ステップＳ１５−４）。図９の例では、監視装置１０−２は、バス２０−４の対象情報として、地図情報ＭＰ１１−２に示すバス２０−４において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−５の対象情報を取得する（ステップＳ１５−５）。図９の例では、監視装置１０−２は、バス２０−５の対象情報として、地図情報ＭＰ１１−２に示すバス２０−５において検知された動画像や音声等の種々の情報を取得する。

以下、ステップＳ１５−１〜Ｓ１５−５を区別せずに説明する場合、ステップＳ１５と総称する。また、ステップＳ１５−１〜Ｓ１５−５は、バス２０と監視装置１０との対応関係を示すためのものであり、監視装置１０は、監視対象となっているバス２０の対象情報を複数回に亘って取得してもよい。

また、監視者Ａ１は、ステップＳ１５において取得した対象情報に基づいて、監視対象となっているバス２０を遠隔監視する（ステップＳ１６−１）。図９の例では、監視者Ａ１は、監視装置１０−１によりバス２０−１のみを遠隔監視する。監視者Ａ１は、監視装置１０−１が画面に表示するバス２０−１の動画像を見たり、監視装置１０−１がスピーカ等により出力するバス２０−１の音声を聞いたりすることにより、所定の事象が発生しているバス２０−１をリアルタイムに遠隔監視する。

また、監視者Ａ２は、ステップＳ１５において取得した対象情報に基づいて、監視対象となっているバス２０を遠隔監視する（ステップＳ１６−２）。図９の例では、監視者Ａ２は、監視装置１０−２によりバス２０−２〜２０−５の４台のバスを遠隔監視する。監視者Ａ２は、監視装置１０−２が画面に表示するバス２０−２〜２０−５の動画像を見たり、監視装置１０−２がスピーカ等により出力するバス２０−２〜２０−５の音声を聞いたりすることにより、バス２０−２〜２０−５の４台のバスをリアルタイムに遠隔監視する。

以下、ステップＳ１６−１、Ｓ１６−２を区別せずに説明する場合、ステップＳ１６と総称する。また、ステップＳ１６−１、Ｓ１６−２は、監視者Ａ１や監視者Ａ２がバス２０を、監視装置１０を用いて遠隔監視していることを示すためのものであり、監視者Ａ１や監視者Ａ２は、監視対象となっているバス２０を所定の期間（例えば業務時間中等）に亘って継続して監視する。

そして、監視者Ａ１は、ステップＳ１５において取得した対象情報に基づいて、監視対象となっているバス２０−１に発生した事象への対応を行う（ステップＳ１７）。例えば、監視者Ａ１は、監視装置１０−１に表示されるバス２０−１の動画像や、監視装置１０−１により出力されるバス２０−１の音声等に基づいて、バス２０−１に発生した所定の事象に対応する。例えば、監視者Ａ１は、バス２０−１に発生した事象の影響度に応じて、バス２０−１を遠隔操作したり、バス２０−１を所定の位置（例えば路肩等）に停止させたりする。上記のように、決定装置１００は、バス２０−１に所定の事象が発生していることを示す情報に基づいて、複数の移動体の自動運転に関する態様を決定することにより、遠隔監視される複数の移動体の適切な動作を可能にすることができる。なお、図９の例では、バス２０に所定の事象が発生した際に、監視者を変更する場合を示したが、決定装置１００は、所定の事象が発生した際に、種々の自動運転に関する態様を決定してもよい。例えば、決定装置１００は、バス２０に所定の事象が発生した際に、上述のように、バス２０の停止やバス２０の速度低下やバス２０の所定のランプの点灯やバス２０からの所定の音の出力等の種々の自動運転に関する態様を決定してもよい。また、例えば、決定装置１００は、バス２０に所定の事象が発生した際に、そのバス２０を監視する監視者へ対応可能かどうかの確認を行ってもよい。この場合、決定装置１００は、バス２０を監視する監視者が対応不可能と回答した場合、そのバス２０またはその監視者が監視する他のバス２０の監視者を他の監視者に変更すると決定してもよい。また、決定装置１００は、バス２０を監視する監視者が対応可能と回答した場合、監視者を変更しないと決定してもよい。また、例えば、決定装置１００は、バス２０に所定の事象が発生した際に、そのバス２０を監視する監視者の数を増加させると決定してもよい。また、例えば、決定装置１００は、１人の監視者が監視しているバス２０に所定の事象が発生した際に、そのバス２０を監視する監視者の数を２人に増加させると決定してもよい。なお、上記は一例であり、決定装置１００は、バス２０に所定の事象が発生した際に、その時の状況等に応じて、種々の決定を行ってもよい。

次に、図１１を用いて、監視装置１０−２における表示の変更の一例を示す。上述したように、図１１中の地図情報ＭＰ１１−１に対応する時点では、バス２０−１〜２０−３は、監視者Ａ１により遠隔監視されている。また、図１１中の地図情報ＭＰ１１−１に対応する時点では、バス２０−４、２０−５は、監視者Ａ２により遠隔監視されている。すなわち、図１１の例では、決定装置１００による監視処理の前の時点では、監視者Ａ１が３台のバス２０−１〜２０−３を遠隔監視し、監視者Ａ２が２台のバス２０−４、２０−５を遠隔監視している。

まず、監視者Ａ１が利用する監視装置１０−１は、バス２０−１の対象情報を取得する（ステップＳ２１−１）。図１１の例では、監視装置１０−１は、バス２０−１の対象情報として、地図情報ＭＰ１１−１に示すバス２０−１において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ１が利用する監視装置１０−１は、バス２０−２の対象情報を取得する（ステップＳ２１−２）。図１１の例では、監視装置１０−１は、バス２０−２の対象情報として、地図情報ＭＰ１１−１に示すバス２０−２において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ１が利用する監視装置１０−１は、バス２０−３の対象情報を取得する（ステップＳ２１−３）。図１１の例では、監視装置１０−１は、バス２０−３の対象情報として、地図情報ＭＰ１１−１に示すバス２０−３において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−４の対象情報を取得する（ステップＳ２１−４）。図１１の例では、監視装置１０−２は、バス２０−４の対象情報として、地図情報ＭＰ１１−１に示すバス２０−４において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−５の対象情報を取得する（ステップＳ２１−５）。図１１の例では、監視装置１０−２は、バス２０−５の対象情報として、地図情報ＭＰ１１−１に示すバス２０−５において検知された動画像や音声等の種々の情報を取得する。

以下、ステップＳ２１−１〜Ｓ２１−５を区別せずに説明する場合、ステップＳ２１と総称する。また、ステップＳ２１−１〜Ｓ２１−５は、バス２０と監視装置１０との対応関係を示すためのものであり、監視装置１０は、監視対象となっているバス２０の対象情報を複数回に亘って取得してもよい。

また、監視者Ａ１は、ステップＳ２１において取得した対象情報に基づいて、監視対象となっているバス２０を遠隔監視する（ステップＳ２２−１）。図１１の例では、監視者Ａ１は、監視装置１０−１によりバス２０−１〜２０−３の３台のバスを遠隔監視する。監視者Ａ１は、監視装置１０−１が画面に表示するバス２０−１〜２０−３の動画像を見たり、監視装置１０−１がスピーカ等により出力するバス２０−１〜２０−３の音声を聞いたりすることにより、バス２０−１〜２０−３の３台のバスをリアルタイムに遠隔監視する。

また、監視者Ａ２は、ステップＳ２１において取得した対象情報に基づいて、監視対象となっているバス２０を遠隔監視する（ステップＳ２２−２）。図１１の例では、監視者Ａ２は、監視装置１０−２によりバス２０−４、２０−５の２台のバスを遠隔監視する。監視者Ａ２は、監視装置１０−２が画面に表示するバス２０−４、２０−５の動画像を見たり、監視装置１０−２がスピーカ等により出力するバス２０−４、２０−５の音声を聞いたりすることにより、バス２０−４、２０−５の２台のバスをリアルタイムに遠隔監視する。

以下、ステップＳ２２−１、Ｓ２２−２を区別せずに説明する場合、ステップＳ２２と総称する。また、ステップＳ２２−１、Ｓ２２−２は、監視者Ａ１や監視者Ａ２がバス２０を、監視装置１０を用いて遠隔監視していることを示すためのものであり、監視者Ａ１や監視者Ａ２は、監視対象となっているバス２０を所定の期間（例えば業務時間中等）に亘って継続して監視する。

ここで、監視者Ａ１がバス２０の遠隔監視が困難になったものとする（ステップＳ２３）。図１１の例では、監視者Ａ１が全監視対象の監視が困難になったものとする。例えば、監視者Ａ１の体調の急変等により、監視装置１０−１から離れる等により、全監視対象の監視が困難になったものとする。例えば、監視者Ａ１の体調の急変等により、監視装置１０−１を配置した机から離席する等により、全監視対象の監視が困難になったものとする。なお、監視者Ａ１は、監視装置１０−１を操作することにより、決定装置１００へ監視者Ａ１が全監視対象の監視が困難になることを示す情報を送信してもよい。

また、決定装置１００は、監視装置１０−１が撮像する監視装置１０−１の画面側の画像に基づいて、監視者Ａ１が監視装置１０−１から離れたと判定することにより、全監視対象の監視が困難になったと判定してもよい。すなわち、決定装置１００は、監視者が複数の移動体を監視するための監視装置１０を視認不可能な状況になったと判定する。例えば、決定装置１００は、監視装置１０−１が撮像する監視装置１０−１の画面側の画像をリアルタイムに取得し、画像を解析することにより、監視者Ａ１が監視装置１０−１から離れたと判定することにより、全監視対象の監視が困難になったと判定してもよい。また、例えば、決定装置１００は、監視者Ａ１の位置情報等に基づいて、監視者Ａ１が監視装置１０−１から離れたと判定することにより、全監視対象の監視が困難になったと判定してもよい。なお、決定装置１００は、監視者Ａ１と監視装置１０−１との位置関係を把握可能であれば、どのような情報に基づいて、監視者Ａ１により監視が困難になったかを判定してもよい。例えば、決定装置１００は、監視者Ａ１や監視装置１０−１に装着されたＲＦＩＤ（Radio frequency identification）等から取得した情報に基づいて、監視者Ａ１と監視装置１０−１との位置関係を把握してもよい。

なお、決定装置１００は、監視者が監視困難になったかどうかに限らず、監視者の監視状況に関する種々の条件を所定の条件としてもよい。例えば、決定装置１００は、監視者の注意レベルが所定の閾値以上かどうかを、監視者の監視状況に関する所定の条件としてもよい。

監視者Ａ１が全監視対象の監視が困難になったことを示す情報を取得した決定装置１００は、複数の移動体の監視態様を決定する（ステップＳ２４）。例えば、決定装置１００は、複数の移動体の自動運転に関する態様を決定する。例えば、決定装置１００は、複数の移動体を監視する監視者を変更するタイミングを決定する。図１１の例では、決定装置１００は、全監視対象の監視が困難になった監視者Ａ１の監視対象の全バス２０の監視者を他の監視者へ変更すると決定する。具体的には、決定装置１００は、監視者Ａ１の監視対象であるバス２０−１〜２０−３の監視者を監視者Ａ２へ変更すると決定する。例えば、決定装置１００は、監視者Ａ１が全監視対象の監視が困難になったことを示す情報を取得したタイミングで、監視者Ａ１の監視対象のバス２０の監視者を変更すると決定する。そして、決定装置１００は、監視者Ａ１の監視対象であるバス２０−１〜２０−３の監視者を監視者Ａ２へ変更する。また、例えば、決定装置１００は、他の監視者への監視者の変更ができない場合は、バス２０−１〜２０−３の動作（走行）を停止させてもよい。

図１１中の地図情報ＭＰ１１−２に示すように、決定装置１００は、各監視者Ａ１、Ａ２の監視対象を変更することにより、複数の移動体の自動運転に関する態様を決定する。図１１の例では、決定装置１００による監視処理の後の時点では、監視者Ａ２が５台のバス２０−１〜２０−５を遠隔監視している。

ここで、図１２に示すように、監視者Ａ２の監視対象がバス２０−１〜２０−５に変更されたため、監視装置１０−２の表示が変更される（ステップＳ２４−１）。具体的には、監視装置１０−２には、バス２０−１〜２０−３に各々対応する動画像ＭＶ１１〜ＭＶ１３が追加され、バス２０−１〜２０−５に各々対応する動画像ＭＶ１１〜ＭＶ１５が表示される。このように、監視装置１０−２の表示が変更される。

この場合、監視装置１０−２には、バス２０−１〜２０−５の５台のバス２０に対応する動画像ＭＶ１１〜ＭＶ１５が表示される。これにより、監視者Ａ２は、監視者Ａ１から引き継いだバス２０−１〜２０−３を含むバス２０を監視することが可能となる。また、監視者Ａ１の監視対象が０台に変更されたため、監視装置１０−１には、いずれのバス２０に対応する動画像も表示されなくなるが、図示を省略する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−１の対象情報を取得する（ステップＳ２５−１）。図１１の例では、監視装置１０−２は、バス２０−１の対象情報として、地図情報ＭＰ１１−２に示すバス２０−１において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−２の対象情報を取得する（ステップＳ２５−２）。図１１の例では、監視装置１０−２は、バス２０−２の対象情報として、地図情報ＭＰ１１−２に示すバス２０−２において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−３の対象情報を取得する（ステップＳ２５−３）。図１１の例では、監視装置１０−２は、バス２０−３の対象情報として、地図情報ＭＰ１１−２に示すバス２０−３において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−４の対象情報を取得する（ステップＳ２５−４）。図１１の例では、監視装置１０−２は、バス２０−４の対象情報として、地図情報ＭＰ１１−２に示すバス２０−４において検知された動画像や音声等の種々の情報を取得する。

また、監視者Ａ２が利用する監視装置１０−２は、バス２０−５の対象情報を取得する（ステップＳ２５−５）。図１１の例では、監視装置１０−２は、バス２０−５の対象情報として、地図情報ＭＰ１１−２に示すバス２０−５において検知された動画像や音声等の種々の情報を取得する。

以下、ステップＳ２５−１〜Ｓ２５−５を区別せずに説明する場合、ステップＳ２５と総称する。また、ステップＳ２５−１〜Ｓ２５−５は、バス２０と監視装置１０との対応関係を示すためのものであり、監視装置１０は、監視対象となっているバス２０の対象情報を複数回に亘って取得してもよい。

また、監視者Ａ２は、ステップＳ２５において取得した対象情報に基づいて、監視対象となっているバス２０を遠隔監視する（ステップＳ２６）。図１１の例では、監視者Ａ２は、監視装置１０−２によりバス２０−１〜２０−５の５台のバスを遠隔監視する。監視者Ａ２は、監視装置１０−２が画面に表示するバス２０−１〜２０−５の動画像を見たり、監視装置１０−２がスピーカ等により出力するバス２０−１〜２０−５の音声を聞いたりすることにより、バス２０−１〜２０−５の５台のバスをリアルタイムに遠隔監視する。

なお、ステップＳ２６は、監視者Ａ１や監視者Ａ２がバス２０を、監視装置１０を用いて遠隔監視していることを示すためのものであり、監視者Ａ２は、監視対象となっているバス２０を所定の期間（例えば業務時間中等）に亘って継続して監視する。また、監視者Ａ１が監視可能な状態に戻った場合、決定装置１００は、バス２０−１〜２０−３の監視者を監視者Ａ１に変更してもよい。例えば、監視者Ａ１が監視装置１０−１の前に戻ることにより監視可能な状態に戻った場合、決定装置１００は、バス２０−１〜２０−３の監視者を監視者Ａ１に変更してもよい。

（４−１．監視態様）
なお、監視システム１におけるバス２０の監視態様や監視者の変更態様については、上述した例に限らず、種々の態様であってもよい。上述した例では、各バス２０を１人の監視者が監視する場合を示したが、１つのバス２０を複数の監視者が監視する態様であってもよい。例えば、１つのバス２０は、複数の監視者により重畳的に監視されてもよい。この場合、１つのバス２０を監視する複数の監視者は、主たる監視者（第１監視者）と従たる監視者（第２監視者）等の異なる種別であってもよい。例えば、第１監視者と第２監視者とは、操作内容や責任等が異なってもよい。例えば、第１監視者がバス２０の遠隔監視を主として行い、第２監視者は第１監視者及びバス２０全体の運行管理等を行ってもよい。この場合、１人の第２監視者は、複数の第１監視者に対応付けられてもよい。

また、決定装置１００は、１つのバス２０が複数の監視者により重畳的に監視されている場合、バス２０が走行中であっても監視者が変更可能であってもよい。例えば、決定装置１００は、１つのバス２０が複数の監視者により重畳的に監視されている場合、変更タイミングに関する所定の条件を満たすとして、バス２０が走行中であっても監視者を変更してもよい。例えば、決定装置１００は、１つのバスが複数の監視者により遠隔監視される場合、所定の条件を満たすタイミングで、そのバスを監視する複数の監視者のうち、１人の監視者を除外すると決定してもよい。また、例えば、決定装置１００は、１つのバスが複数の監視者により遠隔監視される場合、所定の条件を満たすタイミングで、そのバスを監視する複数の監視者のうち、１人の監視者を他の監視者に変更すると決定してもよい。例えば、決定装置１００は、走行中のバス２０を監視する監視者が０人にならない限り、所望のタイミングで走行中のバス２０を監視する監視者に関する変更を行ってもよい。

（４−２．業務分担）
また、決定装置１００は、各監視者の業務負荷やスキル等に応じて各監視者の監視対象となるバス２０の台数等を決定してもよい。例えば、決定装置１００は、複数の移動体の監視における各監視者の負荷が所定の基準を満たすように、移動体の自動運転に関する態様を変更してもよい。例えば、決定装置１００は、各監視者の負荷が平均化するように、各監視者の監視対象となるバス２０の台数等を決定してもよい。例えば、決定装置１００は、１００台のバス２０を２０人の監視者で監視する場合、各監視者の負荷が平均化するように、各監視者に５台ずつバス２０を監視させてもよい。また、例えば、決定装置１００は、スキルが低い監視者や最大監視台数が５台未満の監視者には、５台未満のバス２０を監視させると決定し、残りの監視者の負荷が平均化するように、各監視者が監視するバス２０の台数を決定してもよい。

また、決定装置１００は、監視台数に限らず、種々の情報に基づいて各監視者の負荷を決定してもよい。例えば、決定装置１００は、各バス２０の運行ルートに応じてバス２０を監視する監視負荷を決定してもよい。例えば、決定装置１００は、各バス２０の運行ルートに応じてバス２０の負荷スコアを決定し、各監視者の監視対象となるバス２０の負荷スコアの合計が平均化するように、各監視者が監視するバス２０を決定してもよい。例えば、決定装置１００は、歩行者や自転車等の交通量が多い運行ルートのバス２０の負荷スコアを他の運行ルートのバス２０よりも高く決定してもよい。また、例えば、決定装置１００は、一本道等の分岐の少ない運行ルートのバス２０の負荷スコアを他の運行ルートのバス２０よりも低く決定してもよい。

また、例えば、決定装置１００は、各バス２０のステータス（図８参照）に応じて負荷スコアを決定してもよい。例えば、決定装置１００は、ステータスが「事象発生」であるバス２０の負荷スコアをステータスが「通常」であるバス２０よりも高く決定してもよい。例えば、決定装置１００は、一の監視者の負荷が所定の閾値（上限閾値）以上である場合、一の監視者の監視対象となるバス２０の監視者を他の監視者へ変更してもよい。例えば、決定装置１００は、一の監視者の負荷が所定の閾値（上限閾値）未満となるように、一の監視者の監視対象となるバス２０の監視者を他の監視者へ変更してもよい。なお、上記は一例であり、決定装置１００は、種々の情報に基づいて、各監視者が監視するバス２０を決定してもよい。

（４−３．所定の事象）
なお、移動体であるバス２０における所定の事象は、故障や異音の発生に限らず、種々の事象であってもよい。バス２０における所定の事象は、緊急車両接近や障害物有等の種々の事象であってもよい。例えば、決定装置１００は、バス２０の移動を妨げる事象を所定の事象として、バス２０の自動運転に関する態様を変更すると決定してもよい。例えば、決定装置１００は、バス２０の進行方向において障害が発生した場合、バス２０の自動運転に関する態様を変更してもよい。例えば、決定装置１００は、１つのバス２０（「要対応バス」とする）の進行方向において工事や落石等の障害物が発生した場合、要対応バスを監視する監視者の監視対象となっている他のバス２０の監視者を他の監視者に変更してもよい。

（４−４．変更タイミング）
また、決定装置１００は、種々のタイミングでバス２０の監視者を変更してもよい。例えば、決定装置１００は、バス２０が停止したタイミングで、そのバス２０を監視する監視者を変更してもよい。また、例えば、決定装置１００は、バス２０が停止してから所定の時間が経過したタイミングで、そのバス２０を監視する監視者を変更してもよい。例えば、決定装置１００は、バス２０が信号停止時にそのバス２０を監視する監視者を変更してもよい。また、ここでいう、バス２０の監視者を変更するタイミングには、上述のような、バス２０の停止時に限らず種々のタイミングが含まれるものとする。例えば、決定装置１００は、バス２０が低速走行時にそのバス２０を監視する監視者を変更してもよい。例えば、決定装置１００は、バス２０が所定の閾値未満の速度で走行時にそのバス２０を監視する監視者を変更してもよい。また、例えば、決定装置１００は、バス２０が安定走行時にそのバス２０を監視する監視者を変更してもよい。例えば、決定装置１００は、バス２０が安定走行に関する所定の条件を満たす走行時に、そのバス２０を監視する監視者を変更してもよい。例えば、決定装置１００は、バス２０が所定の距離以上に亘って一車線の道路を走行時に、そのバス２０を監視する監視者を変更してもよい。例えば、決定装置１００は、バス２０が所定の距離以上に亘って交差点等の分岐が無い道路を走行時に、そのバス２０を監視する監視者を変更してもよい。例えば、決定装置１００は、バス２０がまっすぐな道路を走行時に、そのバス２０を監視する監視者を変更してもよい。例えば、決定装置１００は、バス２０が所定の距離以上に亘って所定の閾値以下の回転半径のカーブが無い道路を走行時に、そのバス２０を監視する監視者を変更してもよい。

〔５．監視処理のフロー〕
次に、図１３を用いて、実施形態に係る監視システム１による監視処理について説明する。図１３は、実施形態に係る監視処理の一例を示すフローチャートである。

まず、監視装置１０は、複数の移動体において検知された複数の画像情報と複数の音声情報とを出力する（ステップＳ１０１）。

そして、監視装置１０は、動作状況の確認を要する所定の条件を満たす対象音声情報がある場合（ステップＳ１０２：Ｙｅｓ）、対象音声情報に対応する画像情報を識別可能な表示態様で表示する（ステップＳ１０３）。

また、決定装置１００は、動作状況の確認を要する所定の条件を満たす対象音声情報がない場合（ステップＳ１０２：Ｎｏ）、ステップＳ１０２に戻って処理を繰り返す。

〔６．効果〕
上述してきたように、実施形態に係る監視装置１０は、取得部１５２と、通知部１５４とを有する。取得部１５２は、監視者が遠隔監視する移動体であって、自動運転により動作する移動体において検知された複数の音声情報を取得する。通知部１５４は、取得部１５２により取得された複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報を監視者に対して通知する。

このように、実施形態に係る決定装置１００は、複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報を監視者に対して通知することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、取得部１５２は、監視者が遠隔監視する移動体であって、自動運転により動作する移動体において検知された複数の画像情報と複数の音声情報とを取得する。通知部１５４は、取得部１５２により取得された複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報に対応する画像情報と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示する。

このように、実施形態に係る決定装置１００は、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報に対応する画像情報と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、通知部１５４は、対象音声情報に対応する画像情報と、対象音声情報に関する表示情報とを対応付けて表示する。

このように、実施形態に係る決定装置１００は、対象音声情報に対応する画像情報と、対象音声情報に関する表示情報とを対応付けて表示することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、通知部１５４は、対象音声情報に対応する画像情報と、対象音声情報を視覚化した表示情報とを対応付けて表示する。

このように、実施形態に係る決定装置１００は、対象音声情報に対応する画像情報と、対象音声情報を視覚化した表示情報とを対応付けて表示することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、通知部１５４は、取得部１５２により取得された複数の音声情報を出力する。

このように、実施形態に係る決定装置１００は、複数の音声情報を出力する場合であっても、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、通知部１５４は、複数の画像情報のうち、監視者の視線に関する情報に基づく出力態様で、複数の音声情報を出力する。

このように、実施形態に係る決定装置１００は、複数の画像情報のうち、監視者の視線に関する情報に基づく出力態様で、複数の音声情報を出力することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、通知部１５４は、複数の画像情報のうち、監視者の視線の動きに応じて監視者が注視していると推定される画像情報である注視画像情報に対応する音声情報を、他の画像情報に対応する音声情報とは異なる出力態様で出力する。

このように、実施形態に係る決定装置１００は、複数の画像情報のうち、監視者の視線の動きに応じて監視者が注視していると推定される画像情報である注視画像情報に対応する音声情報を、他の画像情報に対応する音声情報とは異なる出力態様で出力することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、通知部１５４は、複数の画像情報のうち、注視画像情報に対応する音声情報のみを出力する。

このように、実施形態に係る決定装置１００は、複数の画像情報のうち、注視画像情報に対応する音声情報のみを出力することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、通知部１５４は、注視画像情報に対応する音声情報の音量を、他の画像情報に対応する音声情報の音量よりも大きくする。

このように、実施形態に係る決定装置１００は、注視画像情報に対応する音声情報の音量を、他の画像情報に対応する音声情報の音量よりも大きくすることにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、通知部１５４は、所定の条件を満たす複数の対象音声情報がある場合、複数の対象音声情報の各々のレベルに応じて変動する表示態様で、複数の対象音声情報の各々に対応する画像情報を表示する。

このように、実施形態に係る決定装置１００は、所定の条件を満たす複数の対象音声情報がある場合、複数の対象音声情報の各々のレベルに応じて変動する表示態様で、複数の対象音声情報の各々に対応する画像情報を表示することにより、遠隔監視される移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、取得部１５２は、複数の移動体の各々に対応する複数の画像情報と複数の音声情報とを取得する。通知部１５４は、取得部１５２により取得された複数の音声情報のうち、所定の条件を満たす対象音声情報に対応する移動体と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示する。

このように、実施形態に係る決定装置１００は、複数の音声情報のうち、所定の条件を満たす対象音声情報に対応する移動体と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示することにより、遠隔監視される複数の移動体に関する画像と音声との対応を適切に把握可能にすることができる。

また、実施形態に係る決定装置１００において、取得部１５２は、一の移動体における各箇所に対応する複数の画像情報と複数の音声情報とを取得する。通知部１５４は、取得部１５２により取得された複数の音声情報のうち、所定の条件を満たす対象音声情報に対応する一の移動体における箇所と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示する。

このように、実施形態に係る決定装置１００は、複数の音声情報のうち、所定の条件を満たす対象音声情報に対応する一の移動体における箇所と、対象音声情報とが対応することを識別可能な表示態様で複数の画像情報を表示することにより、遠隔監視される一の移動体に関する画像と音声との対応を適切に把握可能にすることができる。

〔７．プログラム〕
上述してきた監視装置１０による処理は、本願に係る監視プログラムにより実現される。例えば、監視装置１０に係る通知部１５４は、監視装置１０が有するＣＰＵやＭＰＵ等によって、例えば監視プログラムがＲＡＭを作業領域として、監視プログラムに係る通知手順が実行されることにより実現される。例えば、監視装置１０に係る通知部１５４は、監視装置１０が有するＣＰＵやＭＰＵ等によって、例えば表示アプリ等に含まれる監視プログラムがＲＡＭを作業領域として、監視プログラムに係る通知手順が実行されることにより実現される。監視装置１０に係る他の処理部も同様に、監視プログラムによる各手順が実行されることにより実現される。

なお、本願に係る監視装置１０が実行する処理は、必ずしも全てが監視プログラムによって実現されるものでなくてもよい。例えば、監視装置１０外の情報等は、監視装置１０が有するＯＳ（Operating System）によって取得されてもよい。すなわち、監視プログラム自体が、上述してきたような監視装置１０で実行される処理を実行するのではなく、ＯＳによって取得されたデータ（例えば、移動体の動画像を表示するために用いるデータや移動体の音声を出力するために用いるデータ）を受け取ったりすることにより、上述してきた監視装置１０の処理を実現するようにしてもよい。

〔８．ハードウェア構成〕
上述してきた実施形態に係る監視装置１０や決定装置１００は、例えば図１５に示すような構成のコンピュータ１０００によって実現される。図１５は、監視装置及び決定装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。コンピュータ１０００は、ＣＰＵ１１００、ＲＡＭ１２００、ＲＯＭ１３００、ＨＤＤ１４００、通信インターフェイス（Ｉ／Ｆ）１５００、入出力インターフェイス（Ｉ／Ｆ）１６００、及びメディアインターフェイス（Ｉ／Ｆ）１７００を有する。

ＣＰＵ１１００は、ＲＯＭ１３００またはＨＤＤ１４００に格納されたプログラムに基づいて動作し、各部の制御を行う。ＲＯＭ１３００は、コンピュータ１０００の起動時にＣＰＵ１１００によって実行されるブートプログラムや、コンピュータ１０００のハードウェアに依存するプログラム等を格納する。

ＨＤＤ１４００は、ＣＰＵ１１００によって実行されるプログラム、及び、プログラムによって使用されるデータ等を格納する。通信インターフェイス１５００は、ネットワークＮ（図２中においてはネットワークＮ）を介して他の機器からデータを受信してＣＰＵ１１００へ送り、ＣＰＵ１１００が収集したデータをネットワークＮを介して他の機器へ送信する。

ＣＰＵ１１００は、入出力インターフェイス１６００を介して、ディスプレイやプリンタ等の出力装置、及び、キーボードやマウス等の入力装置を制御する。ＣＰＵ１１００は、入出力インターフェイス１６００を介して、入力装置からデータを取得する。また、ＣＰＵ１１００は、収集したデータを入出力インターフェイス１６００を介して出力装置へ出力する。

メディアインターフェイス１７００は、記録媒体１８００に格納されたプログラムまたはデータを読み取り、ＲＡＭ１２００を介してＣＰＵ１１００に提供する。ＣＰＵ１１００は、プログラムを、メディアインターフェイス１７００を介して記録媒体１８００からＲＡＭ１２００上にロードし、ロードしたプログラムを実行する。記録媒体１８００は、例えばＤＶＤ（Digital Versatile Disc）、ＰＤ（Phase change rewritable Disk）等の光学記録媒体、ＭＯ（Magneto-Optical disk）等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。

例えば、コンピュータ１０００が実施形態に係る監視装置１０や決定装置１００として機能する場合、コンピュータ１０００のＣＰＵ１１００は、ＲＡＭ１２００上にロードされたプログラムを実行することにより、制御部１５、１３０の機能を実現する。コンピュータ１０００のＣＰＵ１１００は、これらのプログラムを記録媒体１８００から読み取って実行するが、他の例として、他の装置からネットワークＮを介してこれらのプログラムを取得してもよい。

以上、本願の実施形態及び変形例のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の行に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。

〔９．その他〕
また、上記実施形態及び変形例において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。

また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。

また、上述してきた実施形態及び変形例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。

また、上述してきた「部（section、module、unit）」は、「手段」や「回路」などに読み替えることができる。例えば、送信部は、送信手段や送信回路に読み替えることができる。

１ 監視システム
１０ 監視装置
１２ 記憶部
１２Ａ 移動体情報記憶部
１３ 入力部
１４ 出力部
１５ 制御部
１５１ 送信部
１５２ 取得部
１５３ 判定部
１５４ 通知部
１６ スピーカ（音出部）
１００ 決定装置
１２１ 移動体情報記憶部
１２２ 監視者情報記憶部
１２３ 監視対応情報記憶部
１３０ 制御部
１３１ 取得部
１３２ 判定部
１３３ 決定部
１３４ 送信部
２０ バス（移動体）
Ｎ ネットワーク

Claims (13)

1. 監視者により遠隔監視され、自動運転により動作する移動体において検知された複数の音声情報を取得する取得手順と、
   前記取得手順により取得された複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報を監視者に対して通知する通知手順と、
   をコンピュータに実行させ、
   前記取得手順は、
   監視者により遠隔監視され、自動運転により動作する移動体において検知された複数の画像情報と前記複数の音声情報とを取得し、
   前記通知手順は、
   前記取得手順により取得された複数の音声情報のうち、前記所定の条件を満たす音声情報である対象音声情報に対応する画像情報と、前記対象音声情報とが対応することを識別可能な表示態様で前記複数の画像情報を前記コンピュータに表示する
   ことを特徴とする監視プログラム。
2. 前記通知手順は、
   前記対象音声情報に対応する画像情報と、前記対象音声情報に関する表示情報とを対応付けて表示する
   ことを特徴とする請求項１に記載の監視プログラム。
3. 前記通知手順は、
   前記対象音声情報に対応する画像情報と、前記対象音声情報を視覚化した前記表示情報とを対応付けて表示する
   ことを特徴とする請求項２に記載の監視プログラム。
4. 前記通知手順は、
   前記取得手順により取得された複数の音声情報を出力する
   ことを特徴とする請求項１〜３のいずれか１項に記載の監視プログラム。
5. 前記通知手順は、
   前記監視者の視線に関する情報に基づく出力態様で、前記複数の音声情報を出力する
   ことを特徴とする請求項４に記載の監視プログラム。
6. 前記通知手順は、
   前記複数の画像情報のうち、前記監視者の視線の動きに応じて前記監視者が注視していると推定される画像情報である注視画像情報に対応する音声情報を、他の画像情報に対応する音声情報とは異なる出力態様で出力する
   ことを特徴とする請求項５に記載の監視プログラム。
7. 前記通知手順は、
   前記複数の画像情報のうち、前記注視画像情報に対応する音声情報のみを出力する
   ことを特徴とする請求項６に記載の監視プログラム。
8. 前記通知手順は、
   前記注視画像情報に対応する音声情報の音量を、他の画像情報に対応する音声情報の音量よりも大きくする
   ことを特徴とする請求項６に記載の監視プログラム。
9. 前記通知手順は、
   前記所定の条件を満たす複数の対象音声情報がある場合、前記複数の対象音声情報の各々のレベルに応じて変動する表示態様で、前記複数の対象音声情報の各々に対応する画像情報を表示する
   ことを特徴とする請求項１〜８のいずれか１項に記載の監視プログラム。
10. 前記取得手順は、
    複数の移動体の各々に対応する前記複数の画像情報と前記複数の音声情報とを取得し、
    前記通知手順は、
    前記取得手順により取得された複数の音声情報のうち、前記所定の条件を満たす前記対象音声情報に対応する移動体と、前記対象音声情報とが対応することを識別可能な表示態様で前記複数の画像情報を表示する
    ことを特徴とする請求項１〜９のいずれか１項に記載の監視プログラム。
11. 前記取得手順は、
    一の移動体における各箇所に対応する前記複数の画像情報と前記複数の音声情報とを取得し、
    前記通知手順は、
    前記取得手順により取得された複数の音声情報のうち、前記所定の条件を満たす前記対象音声情報に対応する前記一の移動体における箇所と、前記対象音声情報とが対応することを識別可能な表示態様で前記複数の画像情報を表示する
    ことを特徴とする請求項１〜９のいずれか１項に記載の監視プログラム。
12. コンピュータが実行する監視方法であって、
    監視者により遠隔監視され、自動運転により動作する移動体において検知された複数の音声情報を取得する取得工程と、
    前記取得工程により取得された複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報を監視者に対して通知する通知工程と、
    を含み、
    前記取得工程は、
    監視者により遠隔監視され、自動運転により動作する移動体において検知された複数の画像情報と前記複数の音声情報とを取得し、
    前記通知工程は、
    前記取得工程により取得された複数の音声情報のうち、前記所定の条件を満たす音声情報である対象音声情報に対応する画像情報と、前記対象音声情報とが対応することを識別可能な表示態様で前記複数の画像情報を前記コンピュータに表示する
    ことを特徴とする監視方法。
13. 監視装置であって、
    監視者により遠隔監視され、自動運転により動作する移動体において検知された複数の音声情報を取得する取得部と、
    前記取得部により取得された複数の音声情報のうち、動作状況の確認を要する所定の条件を満たす音声情報である対象音声情報を監視者に対して通知する通知部と、
    を備え、
    前記取得部は、
    監視者により遠隔監視され、自動運転により動作する移動体において検知された複数の画像情報と前記複数の音声情報とを取得し、
    前記通知部は、
    前記取得部により取得された複数の音声情報のうち、前記所定の条件を満たす音声情報である対象音声情報に対応する画像情報と、前記対象音声情報とが対応することを識別可能な表示態様で前記複数の画像情報を前記監視装置に表示する
    ことを特徴とする監視装置。

Images