JP6412665B1 - 検査支援システムおよび検査支援方法、ならびにプログラム - Google Patents

検査支援システムおよび検査支援方法、ならびにプログラム Download PDF

Info

Publication number
JP6412665B1
JP6412665B1 JP2018040023A JP2018040023A JP6412665B1 JP 6412665 B1 JP6412665 B1 JP 6412665B1 JP 2018040023 A JP2018040023 A JP 2018040023A JP 2018040023 A JP2018040023 A JP 2018040023A JP 6412665 B1 JP6412665 B1 JP 6412665B1
Authority
JP
Japan
Prior art keywords
inspection
control unit
position information
result information
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018040023A
Other languages
English (en)
Other versions
JP2019153238A (ja
Inventor
洋介 宮坂
洋介 宮坂
Original Assignee
株式会社トータル・インフォメーション・サービス
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社トータル・インフォメーション・サービス filed Critical 株式会社トータル・インフォメーション・サービス
Priority to JP2018040023A priority Critical patent/JP6412665B1/ja
Application granted granted Critical
Publication of JP6412665B1 publication Critical patent/JP6412665B1/ja
Publication of JP2019153238A publication Critical patent/JP2019153238A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

【課題】過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行う。
【解決手段】ユーザ端末２が、ＧＮＳＳ装置４１により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示するＡＲ表示部３５と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するマイク３７と、マイク３７を介して取得された検査対象物の検査結果情報に相当する発話音声をサーバ１に送信する端末通信部３１とを備え、サーバ１が、端末通信部３１から受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部１５と、検査対象物の検査結果情報を登録する点検結果データベース２０と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、過去の検査結果情報をユーザ端末２に送信するサーバ側通信部１１とを有する。
【選択図】図１

Description

本発明は、検査支援システムおよび検査支援方法、ならびにプログラムに関する。
鉄道の保守検査においては、検査担当者が実際に線路上を歩いて点検することが必要となる。検査結果は、検査担当者が所定の用紙に記入したり、写真をその場で撮像することなどにより得られ、これらの検査結果が登録されて、管理運用される。
鉄道と同様に、日常の保守点検が必要なものに、例えば、高速道路などがある。従来、高速道路等の保全点検業務としては、点検管理員が自動車などに乗り、担当区域の高速道路等を見回りながら道路状況を点検する。そして、点検管理員は、例えば道路に落石や凹凸等を発見し、かつ、発見した道路状況から第三者に被害を与える可能性がある場合、緊急対応処置が必要であると判断し、道路管理関係者や道路補修関係者に対して、電話等を用いて口頭報告を行っている。
そこで、損傷場所を含めて現地の状況を詳細、かつ、迅速に報告することにより、迅速な対応処置を講じることを可能とするために、道路状況を撮影する撮像カメラと、現在位置検知機能を有するＧＰＳ受信機と、道路の損傷状況から緊急対応の必要性が有ると判断した場合、予め定める画面を表示し、その画面内に損傷個所を特定する道路諸元、道路損傷状況及び必要なコメント等の道路損傷状況関係情報を登録する損傷データ登録手段と、この道路損傷状況関係情報の登録後に撮像カメラおよびＧＰＳ受信機を駆動し、損傷部分を含む道路状況撮影写真及び損傷位置を取得する手段と、登録された道路損傷状況関係情報、道路状況撮影写真及び損傷位置からなる緊急報告情報を外部の所定のサーバに送信する報告情報送信手段とを有する道路状況報告用携帯端末が用いられている（例えば、特許文献１）。
特開２００７−６５８５４号公報
従来行われてきたように、点検結果を登録するために、所定の用紙等に記入したり、カメラや所定の装置に操作入力を行う場合、両手がふさがってしまうため、検査担当者の安全性が損なわれてしまう恐れがある。例えば、上述した特許文献１に記載の技術を、鉄道の保守点検に適応した場合においても、検査結果の登録にかかる手間は減少するが、依然、検査担当者は、装置を把持して操作入力を行う必要がある。したがって、できるだけ検査担当者の安全を確保し、点検結果の登録を容易かつ確実なものとする必要がある。
また、過去の検査結果を確認しつつ、現状の検査を行うに当たっては、例えば、過去の検査結果の一覧を検査担当者が閲覧しながら線路上を移動しながら検査する必要がある。検査担当者は、過去の不良内容を見落としたり、その位置を間違えたりしないように、大きな注意を払わなければならない。
そこで、本発明は、上記課題を解決すること、すなわち、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる、検査支援システムおよび検査支援方法、ならびにプログラムを提供することを目的とする。
上記課題を解決するために、本発明の検査支援システムの第１の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備え、ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、ウェアラブル端末を装着するユーザの眼前に配置され、位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に表示部に過去の検査結果情報を表示させる表示制御部と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、発話音声取得部を介して取得された検査対象物の検査結果情報に相当する発話音声をサーバに送信する端末側通信部とを備え、表示制御部は、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ウェアラブル端末を装着するユーザの視線の向きを検出するためのセンサにより検出されたユーザの視線の向きの変化に応じて変化させ、サーバは、端末側通信部から受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、検査対象物の検査結果情報を登録する検査結果情報記憶部と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するサーバ側通信部とを有することを特徴とする。
また、本発明の検査支援システムの他の側面は、ウェアラブル端末は、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させる音声制御部を有することを特徴とする。
また、本発明の検査支援システムの他の側面は、音声制御部は、取得した位置情報に対応する地点のキロ程において不良状態が確認された場合に発話される地点のキロ程データに相当する発話音声及び不良情報を含む検査結果情報に相当する発話音声を音声出力部から出力させることを特徴とする。
また、本発明の検査支援システムの他の側面は、検査結果情報記憶部は、取得した位置情報に対応する地点のキロ程において不良状態が確認された場合に取得された不良情報を含む検査結果情報を登録することを特徴とする。
本発明の検査支援方法の第１の側面は、眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、ウェアラブル端末が、位置情報取得部により現在位置を取得するステップと、ウェアラブル端末が、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、ウェアラブル端末が、受信された過去の検査結果情報を、ウェアラブル端末を装着するユーザの眼前に配置された表示部に表示するステップと、ウェアラブル端末が、さらに、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ユーザの視線の向きの変化に応じて変化させて表示させるステップと、ウェアラブル端末が、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、ウェアラブル端末が、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声をサーバに送信するステップと、サーバが、送信するステップにおいて送信された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、サーバが、検査対象物の検査結果情報を登録するステップと、サーバが、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するステップとを有することを特徴とする。
また、本発明の検査支援方法の他の側面は、ウェアラブル端末が、ウェアラブル端末が、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させるステップを有することを特徴とする。
また、本発明のプログラムの第１の側面は、眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、ウェアラブル端末のコンピュータに実行させるためのプログラムであって、位置情報取得部により現在位置を取得するステップと、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、受信された過去の検査結果情報を、ウェアラブル端末を装着するユーザの眼前に配置された表示部に表示するステップと、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ユーザの視線の向きの変化に応じて変化させて表示させるステップと、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声をサーバに送信するステップと、をコンピュータに実行させる。
本発明の検査支援システムの第２の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備え、ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、ウェアラブル端末を装着するユーザの眼前に配置され、位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に表示部に過去の検査結果情報を表示させる表示制御部と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、発話取得部により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、音声認識処理部により音声認識された検査対象物の検査結果情報をサーバに送信する端末側通信部とを備え、表示制御部は、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ウェアラブル端末を装着するユーザの視線の向きを検出するためのセンサにより検出されたユーザの視線の向きの変化に応じて変化させ、サーバは、端末側通信部から受信された検査対象物の検査結果情報を登録する検査結果情報記憶部と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するサーバ側通信部とを有することを特徴とする。
また、本発明の検査支援方法の第２の側面は、眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、ウェアラブル端末が、位置情報取得部により現在位置を取得するステップと、ウェアラブル端末が、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、ウェアラブル端末が、受信された過去の検査結果情報を、ウェアラブル端末を装着するユーザの眼前に配置された表示部に表示するステップと、ウェアラブル端末が、さらに、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ユーザの視線の向きの変化に応じて変化させて表示させるステップと、ウェアラブル端末が、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、ウェアラブル端末が、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、ウェアラブル端末が、音声認識処理するステップの処理結果をサーバに送信するステップと、サーバが、送信するステップにおいて送信された検査対象物の検査結果情報を登録するステップと、サーバが、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するステップとを有することを特徴とする。
また、本発明のプログラムの第２の側面は、眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、ウェアラブル端末のコンピュータに実行させるためのプログラムであって、位置情報取得部により現在位置を取得するステップと、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、受信された過去の検査結果情報を、ウェアラブル端末を装着するユーザの眼前に配置された表示部に表示するステップと、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ユーザの視線の向きの変化に応じて変化させて表示させるステップと、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、音声認識処理するステップの処理結果をサーバに送信するステップと、をコンピュータに実行させる。
本発明によれば、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
検査支援システムの機能構成例について説明するための図である。 検査支援システムが実行する処理について説明するための図である。 検査支援システムが実行する処理について説明するための図である。 ユーザ端末２が実行する処理について説明するためのフローチャートである。 ユーザ端末２が実行する処理について説明するためのフローチャートである。 ユーザ端末２が実行する処理について説明するためのフローチャートである。 サーバ１が実行する処理について説明するためのフローチャートである。 サーバ１が実行する処理について説明するためのフローチャートである。 サーバ１が実行する処理について説明するためのフローチャートである。 サーバ１が実行する処理について説明するためのフローチャートである。 サーバ１が実行する処理について説明するためのフローチャートである。 サーバ１が実行する処理について説明するためのフローチャートである。 サーバ１が実行する処理について説明するためのフローチャートである。 サーバ１が実行する処理について説明するためのフローチャートである。 検査支援システムの他の機能構成例について説明するための図である。 ユーザ端末７２が実行する処理について説明するためのフローチャートである。 ユーザ端末７２が実行する処理について説明するためのフローチャートである。 ユーザ端末７２が実行する処理について説明するためのフローチャートである。 サーバ７１が実行する処理について説明するためのフローチャートである。 サーバ７１が実行する処理について説明するためのフローチャートである。 サーバ７１が実行する処理について説明するためのフローチャートである。 サーバ７１が実行する処理について説明するためのフローチャートである。 サーバ７１が実行する処理について説明するためのフローチャートである。 サーバ７１が実行する処理について説明するためのフローチャートである。 サーバ７１が実行する処理について説明するためのフローチャートである。 サーバ７１が実行する処理について説明するためのフローチャートである。
以下、本発明の一実施の形態の検査支援システムについて、図１〜図２６を参照しながら説明する。
図１を参照して、本発明の一実施例である検査支援システムが有する機能構成について説明する。
検査支援システムは、検査結果情報が登録されるサーバ１と、検査担当者であるユーザが線路上を歩行しながら検査現場にて用いるユーザ端末２とを含んで構成されている。ユーザ端末２は、ユーザが携帯可能な形状である。ユーザ端末２は、特に、メガネ型ウェアラブル端末（メガネ形状の透過型のヘッドマウントディスプレイやスマートグラスとも称される）であると、検査実施時に両手が自由になり、ユーザがより安全に検査を行うことができるようになるため好適である。ユーザ端末２は、ウェアラブル端末に対応する。
サーバ１は、サーバ通信部１１、サーバ通信処理制御部１２、点検処理制御部１３、音声認識用データベース１４、音声認識処理部１５、使用者データベース１６、使用者認識処理部１７、位置情報データベース１８、位置情報演算処理部１９、点検結果データベース２０、点検結果登録制御部２１、テキストデータ生成部２２、および、音声データ生成部２３の各機能を含んで構成されている。
サーバ通信部１１は、ユーザ端末２との無線での通信を実行し、情報を授受する。サーバ通信部１１は、サーバ側通信部に対応する。
サーバ通信処理制御部１２は、サーバ通信部１１によるユーザ端末２との情報の授受を制御する。
点検処理制御部１３は、サーバ１の各部の処理を制御するものである。具体的には、点検処理制御部１３は、サーバ通信処理制御部１２を制御して、サーバ通信部１１で受信された情報の供給を受ける。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。点検処理制御部１３は、供給された音声データがユーザ端末２のログイン要求である場合、使用者認識処理部１７を制御して、ユーザ端末２の使用者を認識する処理を実行させる。また、点検処理制御部１３は、サーバ通信部１１より受信された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、路線名とキロ程による位置情報を、サーバ通信部１１からユーザ端末２に送信させる。
また、点検処理制御部１３は、ユーザ端末２の位置情報に基づいて、必要に応じて点検結果登録制御部２１を制御して、過去の点検結果を点検結果データベース２０から検索させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、過去の点検結果を、サーバ通信部１１からユーザ端末２に送信させる。また、点検処理制御部１３は、ユーザ端末２より送信され、サーバ通信部１１において受信された現在の点検結果の情報を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。また、点検処理制御部１３は、テキストデータ生成部２２を制御して、ユーザ端末２において表示出力されるテキストデータを生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。また、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データを生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
音声認識用データベース１４は、ユーザ端末２から送信された音声データの認識処理に用いられる情報が登録されているデータベースである。
音声認識処理部１５は、点検処理制御部１３の制御に基づいて、音声認識処理を実行する。音声認識処理部１５は、サーバ通信部１１が、ユーザ端末２から受信した音声データを、音声認識用データベース１４に登録されている情報を用いて認識し、音声認識結果を点検処理制御部１３に供給する。
使用者データベース１６は、ユーザ端末２の使用者の情報を記録するものである。使用者データベース１６に記録される情報には、登録された使用者の発声を本人のものであるかを識別するための声紋などの音声情報が含まれている。
使用者認識処理部１７は、サーバ通信部１１がユーザ端末２から受信した音声データがログイン要求であると認識された場合、点検処理制御部１３の制御に基づいて、使用者データベース１６に登録されている情報を用いて、その音声データに対応する発話が登録されたユーザであるか否かの認識処理を実行し、認識処理結果を点検処理制御部１３に供給する。
位置情報データベース１８は、緯度経度情報と、鉄道路線の各線における基点からのキロ程との対応関係が登録されているデータベースである。鉄道路線の位置は、それぞれの路線の起点からのキロ程によってあらわすことが可能である。
位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、サーバ通信部１１がユーザ端末２から受信した緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。
点検結果データベース２０は、過去の点検結果（検査結果情報）が登録されているとともに、サーバ通信部１１がユーザ端末２から受信した新たな点検結果（検査結果情報）を新たに登録するために用いられるデータベースである。点検結果データベース２０は、検査結果情報記憶部に対応する。
点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、ユーザ端末２を利用している検査担当者であるユーザが検査を行っている路線の過去の点検結果を、点検結果データベース２０から検索し、点検処理制御部１３に供給する。また、点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、サーバ通信部１１がユーザ端末２から受信した新たな点検結果情報を、点検結果データベース２０に供給して登録する処理を実行する。
テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータを生成し、点検処理制御部１３に供給する。
音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データを生成し、点検処理制御部１３に供給する。
なお、図１において、サーバ１は１つの装置として構成されているものとして説明したが、図1のサーバ１が有する機能を、複数の装置で実現するものとしてもよい。例えば、音声認識用データベース１４、および、音声認識処理部１５が実現する処理を他の処理とは異なる装置において実現可能とし、それぞれの装置間で情報を授受することができるようにしてもよい。
ユーザ端末２は、端末通信部３１、端末通信処理制御部３２、ユーザ端末処理制御部３３、ＡＲ（Augmented Reality：拡張現実）表示制御部３４、ＡＲ表示部３５、音声データ取得制御部３６、マイク３７、音声データ出力制御部３８、ヘッドホン３９、位置データ取得制御部４０、ＧＮＳＳ(Global Navigation Satellite System / 全球測位衛星システム)装置４１、ジャイロスコープ４２、地磁気センサ４３、撮像制御部４４、および、カメラ４５の各機能を有して構成されている。
端末通信部３１は、サーバ１との無線での通信を実行し、情報を授受する。端末通信部３１は、端末側通信部に対応する。
端末通信処理制御部３２は、端末通信部３１によるサーバ１との情報の授受を制御する。
ユーザ端末処理制御部３３は、ユーザ端末２の各部の処理を制御するものである。具体的には、ユーザ端末処理制御部３３は、端末通信処理制御部３２を制御して、端末通信部３１により受信された情報の供給を受ける。ユーザ端末処理制御部３３は、供給された音声データや、ユーザに注意を促すための所定の音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから音声出力させる。ユーザ端末処理制御部３３は、供給されたテキストデータや画像データを、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５に表示させる。ユーザ端末処理制御部３３は、マイク３７により集音され、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
また、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報の供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。また、ユーザ端末処理制御部３３は、撮像制御部４４を制御して、カメラ４５により画像を撮像させ、撮像された画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。また、ユーザ端末処理制御部３３は、ジャイロスコープ４２、および、地磁気センサ４３から供給された計測値に基づいて、ユーザ端末２を装着しているユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。そして、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報、および、ユーザ端末２を装着しているユーザの視線の向きの検出結果に基づいて、ＡＲ表示制御部３４による、過去の検査結果の表示の座標や大きさを制御する。
ＡＲ表示制御部３４は、端末通信処理制御部３２から供給された、画像データおよびテキストデータのＡＲ表示部３５への表示を制御する。ＡＲ表示制御部３４は、表示制御部に対応する。
ＡＲ表示部３５は、実在する風景にバーチャルの視覚情報を重ねて表示することが可能な表示部である。ＡＲ表示部３５では、テキストや画像の表示がない部分には、現実世界が表示される。ユーザ端末２がメガネ型ウェアラブル端末である場合、ＡＲ表示部３５のテキストや画像の表示がない部分は透過式になっており、ユーザ端末２を装着しているユーザの目に見える現実世界に、ＡＲ表示制御部３４の制御により表示されるテキストや画像が重なって表示されるものである。また、ユーザ端末２がメガネ型ウェアラブル端末ではない場合、ＡＲ表示部３５には、カメラ４５により撮像された現実世界の映像に重ねて、ＡＲ表示制御部３４の制御により表示されるテキストや画像が表示される。ＡＲ表示部３５は、表示部に対応する。
音声データ取得制御部３６は、マイク３７による周囲の音声の取得を制御し、取得された音声データを、ユーザ端末処理制御部３３に供給する。
マイク３７は、音声データ取得制御部３６の制御に基づいて、周囲の音声を取得する。マイク３７は、発話音声取得部に対応する。
音声データ出力制御部３８は、ユーザ端末処理制御部３３から供給された音声データの、ヘッドホン３９からの音声出力を制御する。音声データ出力制御部３８は、音声制御部に対応する。
ヘッドホン３９は、音声データ出力制御部３８の制御に基づいて、音声データを、内蔵されているスピーカーから出力する。ヘッドホン３９は、音声出力部に対応する。
位置データ取得制御部４０は、ＧＮＳＳ装置４１による緯度経度情報の受信を制御し、取得された緯度経度情報を、ユーザ端末処理制御部３３に供給する。
ＧＮＳＳ装置４１は、GPS（Global Positioning System）、GLONASS（Global Navigation Satellite System）、Galileo、QZSS（Quasi-Zenith Satellite System：準天頂衛星）等の衛星測位システムを利用して、現在の緯度経度情報を取得する。ＧＮＳＳ装置４１は、位置情報取得部に対応する。
ジャイロスコープ４２は、ユーザ端末２の角度（姿勢）や角速度あるいは角加速度を検出し、ユーザ端末処理制御部３３に供給する。
地磁気センサ４３は、磁場の向きを計測することにより、ユーザ端末２が向いている角度を検出し、ユーザ端末処理制御部３３に供給する。
撮像制御部４４は、カメラ４５による画像の撮像を制御し、撮像された画像データを、ユーザ端末処理制御部３３に供給する。
カメラ４５は、撮像制御部４４の制御に基づいて、撮像処理を行う。
このように、検査支援システムでは、ユーザ端末２が、ＧＮＳＳ装置４１により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示するＡＲ表示部３５と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するマイク３７と、マイク３７を介して取得された検査対象物の検査結果情報に相当する発話音声をサーバ１に送信する端末通信部３１とを備え、サーバ１が、端末通信部３１から受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部１５と、検査対象物の検査結果情報を登録する点検結果データベース２０と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、過去の検査結果情報をユーザ端末２に送信するサーバ側通信部１１とを有する。
したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
次に、図２および図３を参照し、ユーザ端末２を利用した鉄道の線路における保守点検の具体的な例について説明する。
図２を参照して、ログインからシステム終了までの流れについて説明する。
検査担当者であるユーザが、線路の保守点検において、ユーザ端末２を装着し、ユーザ端末２に対して、「ログイン」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「ログイン」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「ログイン」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２のログイン要求を受け、使用者認識処理部１７を制御して、ユーザ端末２の使用者を認識する処理を実行させる。使用者認識処理部１７による使用者の認識処理の結果、ユーザ端末２の利用者が登録された利用者であると認識された場合、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「こんにちは○○さん」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「こんにちは○○さん」を音声出力させる。
また、位置データ取得制御部４０は、ＧＮＳＳ装置４１による緯度経度情報の受信を制御し、取得された緯度経度情報を、随時、ユーザ端末処理制御部３３に供給する。ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報の供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された緯度経度情報は、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、位置情報データベース１８に登録されている情報に基づいて、供給された緯度経度情報を、路線名および基点からのキロ程により表される位置情報に変換し、点検処理制御部１３に供給する。点検処理制御部１３は、現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
端末通信部３１で受信された位置情報は、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された位置情報を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−１として図示）に表示させる。
ユーザが、検査開始位置まで移動している間も、上述した場合と同様の緯度経度情報からキロ程により表される位置情報への変換処理が実行される。ユーザ端末処理制御部３３は、供給された位置情報を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−２として図示）に表示させる。ユーザが、検査開始位置まで移動したとき、ユーザ端末２に対して、「検査開始」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「検査開始」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「検査開始」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２の検査開始要求を受け、位置情報演算処理部１９の処理により得られる発話時のユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「１ｋ２００から検査を開始します」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。また、点検処理制御部１３は、検査開始位置「１ｋ２００」を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「１ｋ２００から検査を開始します」を音声出力させる。
点検処理制御部１３は、位置情報演算処理部１９の処理により得られる発話時のユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、点検結果登録制御部２１を制御して、過去の点検結果のうち、ユーザ端末２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、ユーザ端末２を利用しているユーザが検査を行っている路線の過去の点検結果情報を、点検結果データベース２０から検索し、対応する過去の点検結果を点検処理制御部１３に供給する。点検処理制御部１３は、サーバ通信処理制御部１２を制御して、供給された過去の点検結果情報を、サーバ通信部１１からユーザ端末２に送信させる。過去の不良発生個所の情報には、例えば、不良発生個所を示す位置情報、不良種類、および健全度などを示すテキストデータや、不良個所を撮像した画像データが含まれている。
端末通信部３１で受信された過去の不良発生個所の情報は、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、ユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、過去の不良発生個所との距離が所定の距離以内になった場合、過去の検査において発見された不良情報に対応するテキストデータや画像データを、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５‐３として図示）に表示させる。これにより、検査担当者であるユーザは、前回の検査における不良の状態を事前に把握し、理解することができる。また、ユーザ端末処理制御部３３は、例えば「ポーン」などの警告音を、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから音声出力させる。これにより、過去の不良個所が近くなったことを、ユーザが間違えなく認識することができ、過去における不良発生個所の見落としを防ぐことができる。
この時、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報、ならびに、ジャイロスコープ４２および地磁気センサ４３により検出されるユーザ端末２を装着しているユーザの視線の向きの検出結果に基づいて、ＡＲ表示制御部３４による、図２中の不良発生個所情報５１の座標や大きさを制御する。不良発生個所情報５１は、ＡＲ表示部３５においてユーザが認識する現実世界に対して、不良発生個所に対応する部分を重畳して表示し、ユーザに対して、視線の中のいずれの位置に、次の過去の不良発生個所があるかを示すものである。すなわち、不良発生個所情報５１は、過去の検査結果情報の表示の一部である。過去の不良発生個所をユーザに提示するために、キロ程で示される位置情報に加えて、不良発生個所情報５１として、ＡＲ表示部３５において現実世界と重畳するように表示させることにより、過去の不良発生個所の見落としを効果的に防止することが可能となる。
具体的には、ユーザ端末処理制御部３３は、ジャイロスコープ４２、および、地磁気センサ４３から供給された計測値に基づいて、ユーザ端末２を装着しているユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。そして、ユーザ端末処理制御部３３は、ＧＮＳＳ装置４１において受信された緯度経度情報に基づいて、ユーザ端末２が過去の不良発生個所との距離が所定の距離以内になり、かつ、ユーザの視線の向きが、過去の不良発生個所の方向と一致している場合に、ユーザ端末２を装着しているユーザの視線の向きに基づいて、例えば、図２中の不良発生個所情報５１の表示の座標や大きさを算出し、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５に表示させる。
ユーザ端末２の位置が過去の不良発生個所に近づくに従い、ＡＲ表示部３５（３５‐４として図示）に表示されている不良発生個所情報５１の表示は大きくなる。このように、不良発生個所情報５１を表示させることにより、ユーザが過去の不良内容を見落としたり、その位置を間違えることを防止することができる。
ユーザが、ユーザ端末２に対して、「不良発見。枕木に〇〇、健全度Ａ」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「不良発見。枕木に〇〇、健全度Ａ」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「不良発見。まくらぎに〇〇、健全度Ａ」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２からの現在の点検結果の登録要求を認識する。点検処理制御部１３は、現在のユーザ端末２の位置情報、および、点検結果の情報である「まくらぎに〇〇、健全度Ａ」を、点検結果登録制御部２１に供給して、位置情報とともに、点検結果データベース２０に登録させる。そして、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「１ｋ１１３、まくらぎ○○、健全度Ａで登録します。よろしいですか？」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「１ｋ１１３、まくらぎ○○、健全度Ａで登録します。よろしいですか？」を音声出力させる。
音声データにより登録内容を確認したユーザは、必要に応じて、音声で、上述した場合と同様に、登録内容の変更を指示することが可能である。また、ユーザが、カメラ４５を操作し、現在の点検結果の画像を撮像した場合、ユーザ端末処理制御部３３は、撮像制御部４４を制御して、カメラ４５により画像を撮像させ、撮像された画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。サーバ通信部１１で受信された画像データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された画像データを、現在の点検結果の情報として、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。
不良個所を発見したユーザが、不良個所に対して措置作業を行う場合については、図３を用いて後述する。
ユーザが、検査終了位置に移動している間も、上述した場合と同様の処理が実行されて、ユーザ端末処理制御部３３は、供給された位置情報を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−５として図示）に表示させる。ユーザが、ユーザ端末２に対して、「検査終了」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「検査終了」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「検査終了」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２の検査終了要求を受け付ける。そして、点検処理制御部１３は、位置情報演算処理部１９の処理により得られる発話時のユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「２ｋ０００で検査を終了します」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。また、点検処理制御部１３は、検査終了位置「２ｋ０００」を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「２ｋ０００で検査を終了します」を音声出力させる。
ユーザが、ユーザ端末２に対して、「システム終了」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「システム終了」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「システム終了」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２のシステム終了要求を受け、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「お疲れ様でした。終了します」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「お疲れ様でした。終了します」を音声出力させる。この時、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、検査終了をユーザに通知するための画像やテキストなどを、ＡＲ表示部３５（３５−６として図示）に表示させるようにしてもよい。
次に、図３を参照して、不良個所の表示方法の他の例、および、不良個所を発見したユーザが、不良個所に対して処理作業を行う場合の表示の例について説明する。
過去の点検結果の表示は、図３中のＡＲ表示部３５（３５−１１と図示）に示されるように、例えば、最小限のテキストデータのみであってもよい。また、過去の点検結果の表示は、図３中のＡＲ表示部３５（３５−１２と図示）に示されるように、例えば、詳細なテキストデータおよび画像データの表示であってもよい。
そして、不良個所を発見したユーザが、ユーザ端末２に対して、「措置作業中」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「措置作業中」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「措置作業中」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２を装着している点検担当者が、措置作業中であることを認識し、措置作業内容についての情報の供給待ち状態となる。
ユーザが、ユーザ端末２に対して、「左締結装置内側ボルト緩み、Ｃランク」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「左締結装置内側ボルト緩み、Ｃランク」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「左締結装置内側ボルト緩み、Ｃランク」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、現在のユーザ端末２の位置情報、および、措置作業内容についての情報である「左締結装置内側ボルト緩み、Ｃランク」を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。そして、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランクで登録します。よろしいですか」を生成させるとともに、テキストデータ生成部２２を制御して、ユーザ端末２において表示出力されるテキストデータ「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランク」を生成させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、音声データおよびテキストデータを、サーバ通信部１１からユーザ端末２に送信させる。
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「１ｋ１１３、まくらぎ○○、健全度Ａで登録します。よろしいですか」を音声出力させる。また、端末通信部３１で受信されたテキストデータは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給されたテキストデータ「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランク」を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−１３と図示）に表示させる。この時、すでに表示中のテキストデータや画像データがあった場合、ＡＲ表示部３５には、それらの表示位置を変更し、点検作業員から優先度の高い順に大きく表示されるものとすると好適である。
音声データにより登録内容を確認したユーザは、必要に応じて、音声で、上述した場合と同様に、登録内容の変更を指示することが可能である。また、ユーザが、カメラ４５を操作し、措置作業結果の画像を撮像した場合、ユーザ端末処理制御部３３は、撮像制御部４４を制御して、カメラ４５により画像を撮像させ、撮像された画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。サーバ通信部１１で受信された画像データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された画像データを、現在の点検結果の情報として、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。
ユーザが、ユーザ端末２に対して、「ここは定期的にボルトが緩んでいる気がする」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「ここは定期的にボルトが緩んでいる気がする」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「ここは定期的にボルトが緩んでいる気がする」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、現在の措置作業内容についての情報である「ここは定期的にボルトが緩んでいる気がする」を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。そして、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「ここは定期的にボルトが緩んでいる気がする、を登録します。よろしいですか」を生成させるとともに、テキストデータ生成部２２を制御して、ユーザ端末２において表示出力されるテキストデータ「ここは定期的にボルトが緩んでいる気がする」を生成させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、音声データおよびテキストデータを、サーバ通信部１１からユーザ端末２に送信させる。
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「ここは定期的にボルトが緩んでいる気がする、を登録します。よろしいですか」を音声出力させる。また、端末通信部３１で受信されたテキストデータは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給されたテキストデータ「ここは定期的にボルトが緩んでいる気がする」を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−１４と図示）に付け加えて表示させる。
また、ユーザが、ユーザ端末２に対して、「不良個所一覧表示」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「不良個所一覧表示」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「不良個所一覧表示」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、不良個所一覧表示要求を受け、点検結果登録制御部２１を制御し、点検結果データベース２０に登録されている、該当する路線の不良個所の情報を検索させ、供給させる。そして、点検処理制御部１３は、テキストデータ生成部２２を制御して、ユーザ端末２において表示出力される不良個所一覧に対応するテキストデータを生成させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、不良個所に対応する画像データおよびテキストデータを、サーバ通信部１１からユーザ端末２に送信させる。
端末通信部３１で受信された画像データおよびテキストデータは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された画像データおよびテキストデータを、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−１５と図示）に表示させる。
次に、図４〜図６のフローチャートを参照して、図１のユーザ端末２が実行するユーザ端末の処理１について説明する。
ステップＳ１において、ユーザ端末処理制御部３３は、音声データ取得制御部３６から供給される情報に基づいて、ユーザの音声を取得したか否かを判断する。検査の最初にユーザより発話され、取得される音声データは、ログイン要求を示すものである。ステップＳ１において、ユーザの音声を取得していないと判断された場合、ユーザの音声を取得したと判断されるまで、ステップＳ１の処理が繰り返される。
ステップＳ１において、ユーザの音声を取得したと判断された場合、ステップＳ２において、ユーザ端末処理制御部３３は、マイク３７により取得され、音声データ取得制御部３６から供給された音声データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、供給された音声データを、サーバ１に送信する。
ステップＳ３において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１よりエラーメッセージが通知されたか否かを判断する。ステップＳ３において、エラーメッセージが通知されたと判断された場合、処理は、ステップＳ１に戻り、それ以降の処理が繰り返される。
ステップＳ３において、エラーメッセージが通知されていないと判断された場合、ステップＳ４において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１よりログイン許可が通知されたか否かを判断する。ステップＳ４において、サーバ１よりログイン許可が通知されていないと判断された場合、処理は、ステップＳ３に戻り、それ以降の処理が繰り返される。
ステップＳ４において、サーバ１よりログイン許可が通知されたと判断された場合、ステップＳ５において、ユーザ端末処理制御部３３は、ログイン状態となる。
ステップＳ６において、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、緯度経度情報をサーバ１に送信する。
ステップＳ７において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
ステップＳ８において、ユーザ端末処理制御部３３は、音声データ取得制御部３６から供給される情報に基づいて、ユーザの音声を取得したか否かを判断する。図２および図３を用いて説明したように、検査中のユーザは、ユーザ端末２に対して、検査開始または終了の通知や、それらの位置変更の要求、または、不良内容の登録内容などを発話する。ステップＳ８において、ユーザの音声を取得していないと判断された場合、処理は、ステップＳ６に戻り、それ以降の処理が繰り返される。
ステップＳ８において、ユーザの音声を取得したと判断された場合、ステップＳ９において、ユーザ端末処理制御部３３は、マイク３７により取得され、音声データ取得制御部３６から供給された音声データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、供給された音声データを、サーバ１に送信する。
ステップＳ１０において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１より過去の検査結果情報を受信したか否かを判断する。
ステップＳ１０において、過去の検査結果情報を受信したと判断された場合、ステップＳ１１において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された過去の検査結果情報を取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、過去の検査結果情報であるテキストデータおよび画像データを、例えば、図２または図３を用いて説明したように、ＡＲ表示部３５に表示させる。ＡＲ表示部３５は、過去の検査結果情報を表示出力する。
ステップＳ１０において、過去の検査結果情報を受信していないと判断された場合、または、ステップＳ１１の処理の終了後、ステップＳ１２において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１より、過去の検査結果以外のテキストデータまたは音声データの少なくとも一方を受信したか否かを判断する。ここで、過去の検査結果以外のテキストデータまたは音声データとは、例えば、図２または図３を用いて説明したように、「１ｋ２００から検査を開始します」や「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランクで登録します。よろしいですか」などの、ユーザの発話内容を確認するためのキストデータまたは音声データである。ステップＳ１２において、過去の検査結果以外のテキストデータまたは音声データのいずれも受信していないと判断された場合、処理は、後述するステップＳ１６に進む。
ステップＳ１２において、過去の検査結果以外のテキストデータまたは音声データのうちの少なくとも一方を受信したと判断された場合、ステップＳ１３において、ユーザ端末処理制御部３３は、受信したデータの出力処理を実行する。具体的には、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信されたテキストデータを取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、テキストデータを、例えば、図２または図３を用いて説明したように、ＡＲ表示部３５に表示させる。ＡＲ表示部３５は、テキストデータを表示出力する。また、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された音声データを取得する。そして、ユーザ端末処理制御部３３は、音声データ出力制御部３８を制御して、ヘッドホン３９から音声データを出力させる。ヘッドホン３９は、音声データを出力する。
ステップＳ１４において、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、緯度経度情報をサーバ１に送信する。
ステップＳ１５において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
ステップＳ１２において、過去の検査結果以外のテキストデータまたは音声データのいずれも受信していないと判断された場合、または、ステップＳ１５の処理の終了後、ステップＳ１６において、ユーザ端末処理制御部３３は、取得されている現在位置情報に基づいて、過去の検査結果のうちのいずれかが所定距離以内であるか否かを判断する。ステップＳ１６において、過去の検査結果のうちのいずれかが所定距離以内ではないと判断された場合、処理は、後述するステップＳ２３に進む。
ステップＳ１６において、過去の検査結果のうちのいずれかが所定距離以内であると判断された場合、ステップＳ１７において、ユーザ端末処理制御部３３は、ジャイロスコープ４２から供給されるユーザ端末２の角度（姿勢）や角速度あるいは角加速度の検出結果、および、地磁気センサ４３から供給されるユーザ端末２が向いている角度の検出結果に基づいて、ユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。
ステップＳ１８において、ユーザ端末処理制御部３３はステップＳ１７における検出結果に基づいて、ユーザが、次の過去の不良発生個所の方向に対応する所定の方向を向いているか否かを判断する。
ステップＳ１８において、ユーザが所定の方向を向いていると判断された場合、ステップＳ１９において、ユーザ端末処理制御部３３は、例えば、図２のＡＲ表示部３５‐３および３５‐４を用いて説明したような、過去の検査結果の表示の一部である不良発生個所情報５１の座標および大きさを演算する。
ステップＳ１８において、ユーザが所定の方向を向いていないと判断された場合、または、ステップＳ１９の処理の終了後、ステップＳ２０において、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、例えば、図２のＡＲ表示部３５‐３および３５‐４を用いて説明したような、または、図３のＡＲ表示部３５‐１１および３５‐１２を用いて説明したような、過去の検査結果の詳細表示を実行させる。ＡＲ表示制御部３４は、ＡＲ表示部３５に、過去の検査結果の詳細を表示させる。
すなわち、ステップＳ１８において、ユーザが所定の方向を向いていると判断された場合には、ステップＳ２０の処理により、不良発生個所情報５１が、演算結果に基づいた座標および大きさで、他の過去の検査結果であるテキストデータまたは画像データとともに、ＡＲ表示部３５に表示されるが、ステップＳ１８において、ユーザが所定の方向を向いていないと判断された場合、ステップＳ２０の処理により、不良発生個所情報５１は表示されず、他の過去の検査結果であるテキストデータまたは画像データのみがＡＲ表示部３５に表示される。
ステップＳ２１において、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、緯度経度情報をサーバ１に送信する。
ステップＳ２２において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
ステップＳ１６において、過去の検査結果のうちのいずれかが所定距離以内ではないと判断された場合、または、ステップＳ２２の処理の終了後、ステップＳ２３において、ユーザ端末処理制御部３３は、撮像制御部４４から供給された信号に基づいて、撮像が指令されたか否かを判断する。
ステップＳ２３において、撮像が指令されたと判断された場合、ステップＳ２４において、ユーザ端末処理制御部３３は、撮像制御部４４を制御して、カメラ４５により撮像処理を実行させる。そして、ユーザ端末処理制御部３３は、撮像されて得られた画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、画像データをサーバ１に送信する。
ステップＳ２３において、撮像が指令されていないと判断された場合、または、ステップＳ２４の処理の終了後、ステップＳ２５において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１よりアプリケーション終了要求を受けたことが通知されたか否かを判断する。ステップＳ２５において、アプリケーション終了要求を受けていないと判断された場合、処理は、ステップＳ８に戻り、それ以降の処理が繰り返される。
ステップＳ２５において、アプリケーション終了要求を受けたと判断された場合、ステップＳ２６において、端末通信部３１は、サーバ１より、例えば、「お疲れ様でした。終了します」などの音声データ、または、テキストデータの少なくとも一方、および、必要に応じて、図２のＡＲ表示部３５−６の表示画面を表示させるための画像データを受信する。ユーザ端末処理制御部３３は、端末通信処理制御部３２から、これらの音声データ、テキストデータ、または、画像データを取得し、音声データ出力制御部３８を制御してヘッドホン３９より出力させるとともに、ＡＲ表示制御部３４を制御してＡＲ表示部３５に表示させて、ログアウト状態となり、処理が終了される。
このような処理により、ユーザ端末２は、現在位置情報や、ユーザの発話に対応する音声データをサーバ１に送信し、サーバ１から、過去の検査結果、ならびに、ユーザの発話内容やサーバ１への登録内容を確認するためのテキストデータおよび音声データを受信して、ＡＲ表示部３５に表示させ、ヘッドホン３９のスピーカーから音声出力させることが可能となる。したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
次に、図７〜図１４のフローチャートを参照して、図１のサーバ１が実行するサーバの処理１について説明する。
ステップＳ４１において、サーバ１の点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から音声データを受信したか否かを判断する。ステップＳ４１において受信される音声データは、上述したユーザ端末処理１のステップＳ２において送信された、ログイン要求を示す音声データである。ステップＳ４１において、音声データを受信していないと判断された場合、音声データを受信したと判断されるまで、ステップＳ４１の処理が繰り返される。
ステップＳ４１において、音声データを受信したと判断された場合、ステップＳ４２において、点検処理制御部１３は、受信された音声データを音声認識処理部１５に供給し、音声認識処理部１５からログイン要求であるという認識結果を受けて、その音声データを使用者認識処理部１７に供給し、ユーザ端末２の使用者の認識処理を実行させる。使用者認識処理部１７は、点検処理制御部１３の制御に基づいて、使用者データベース１６に登録されている情報を用いて、その音声データに対応する発話が登録されたユーザであるか否かの認識処理を実行し、認識処理結果を点検処理制御部１３に供給する。
ステップＳ４３において、点検処理制御部１３は、ステップＳ４２の認識処理の結果に基づいて、ユーザ端末２の使用者は登録された使用者であるか否かを判断する。
ステップＳ４３において、ユーザ端末２の使用者は登録された使用者ではないと判断された場合、ステップＳ４４において、点検処理制御部１３は、サーバ通信処理制御部１２を制御し、サーバ通信部１１からユーザ端末２へ、所定のエラーメッセージを送信させる。サーバ通信部１１は、ユーザ端末２に、エラーメッセージを送信する。ステップＳ４４の処理の終了後、処理は、ステップＳ４１に戻り、それ以降の処理が繰り返される。
ステップＳ４３において、ユーザ端末２の使用者は登録された使用者であると判断された場合、ステップＳ４５において、点検処理制御部１３は、サーバ通信処理制御部１２を制御し、サーバ通信部１１からユーザ端末２へ、ログイン許可を送信させる。サーバ通信部１１は、ユーザ端末２に、ログイン許可を送信する。
ステップＳ４６において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。
ステップＳ４６において、緯度経度情報を受信したと判断された場合、ステップＳ４７において、点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
ステップＳ４６において、緯度経度情報を受信していないと判断された場合、または、ステップＳ４７の処理の終了後、ステップＳ４８において、点検処理制御部１３は、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は、ユーザ端末２へ送信済みであるか否かを判断する。
ステップＳ４８において、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は送信済みではないと判断された場合、ステップＳ４９において、点検処理制御部１３は、位置情報演算処理部１９の処理により得られるユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、点検結果登録制御部２１を制御して、過去の点検結果のうち、ユーザ端末２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、ユーザ端末２を利用しているユーザが検査を行っている路線の過去の点検結果を、点検結果データベース２０から検索し、ユーザ端末２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検処理制御部１３に供給する。点検処理制御部１３は、サーバ通信処理制御部１２を制御して、供給された過去の点検結果を、サーバ通信部１１からユーザ端末２に送信させる。
ステップＳ４８において、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は送信済みであると判断された場合、または、ステップＳ４９の処理の終了後、ステップＳ５０において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から音声データを受信したか否かを判断する。ステップＳ５０において受信される音声データは、上述したユーザ端末処理１のステップＳ９において送信された、ユーザからの要求や不良内容の登録内容などを示す音声データである。ステップＳ５０において、音声データを受信していないと判断された場合、音声データを受信したと判断されるまで、ステップＳ５０の処理が繰り返される。
ステップＳ５０において、音声データを受信したと判断された場合、ステップＳ５１において、点検処理制御部１３は、受信された音声データを音声認識処理部１５に供給し、音声認識処理を実行させる。音声認識処理部１５は、点検処理制御部１３の制御に基づいて、音声認識処理を実行する。音声認識処理部１５は、サーバ通信部１１が、ユーザ端末２から受信した音声データを、音声認識用データベース１４に登録されている情報を用いて認識し、音声認識結果を点検処理制御部１３に供給する。
ステップＳ５２において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「検査開始」などの検査開始要求であるか否かを判断する。ステップＳ５２において、ユーザの発話内容は、検査開始要求ではないと判断された場合、処理は、後述するステップＳ５９に進む。
ステップＳ５２において、ユーザの発話内容は、検査開始要求であると判断された場合、ステップＳ５３において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ５３において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ５３の処理が繰り返される。
ステップＳ５３において、緯度経度情報を受信したと判断された場合、ステップＳ５４において、点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
ステップＳ５５において、点検処理制御部１３は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程から検査を開始します」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「○○キロ程から検査を開始します」を生成し、点検処理制御部１３に供給する。
ステップＳ５６において、サーバの点検処理制御部１３は、音声データ生成部２３を制御して、変換されたキロ程情報に基づいて、「○○キロ程から検査を開始します」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程から検査を開始します」を生成し、点検処理制御部１３に供給する。
ステップＳ５７において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
ステップＳ５８において、点検処理制御部１３は、点検結果登録制御部２１を制御して、検査開始位置の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、検査開始位置を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ５２において、ユーザの発話内容は、検査開始要求ではないと判断された場合、または、ステップＳ５８の処理の終了後、ステップＳ５９において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「検査開始位置を○○キロ程に変更」などの、検査開始キロ程変更要求であるか否かを判断する。ステップＳ５９において、ユーザの発話内容は、検査開始キロ程変更要求ではないと判断された場合、処理は、後述するステップＳ６５に進む。
ステップＳ５９において、ユーザの発話内容は、検査開始キロ程変更要求であると判断された場合、ステップＳ６０において、点検処理制御部１３は、ステップＳ５１において認識された音声認識結果から、ユーザが変更を指令した検査開始キロ程情報を取得する。
ステップＳ６１において、点検処理制御部１３は、テキストデータ生成部２２を制御して、取得された検査開始キロ程情報に基づいて、「検査開始位置を○○キロ程に修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「検査開始位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ６２において、点検処理制御部１３は、音声データ生成部２３を制御して、「検査開始位置を○○キロ程に修正します。よろしいですか？」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「検査開始位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ６３において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
ステップＳ６４において、点検処理制御部１３は、点検結果登録制御部２１を制御して、検査開始位置の登録変更処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、変更された検査開始位置を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ５９において、ユーザの発話内容は、検査開始キロ程変更要求ではないと判断された場合、または、ステップＳ６４の処理の終了後、ステップＳ６５において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「枕木に××、健全度Ａ」などの、不良内容登録要求であるか否かを判断する。ステップＳ６５において、ユーザの発話内容は、不良内容登録要求ではないと判断された場合、処理は、後述するステップＳ７４に進む。
ステップＳ６５において、ユーザの発話内容は、不良内容登録要求であると判断された場合、ステップＳ６６において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ６６において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ６６の処理が繰り返される。
ステップＳ６６において、緯度経度情報を受信したと判断された場合、ステップＳ６７において、点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
ステップＳ６８において、サーバの点検処理制御部１３は、テキストデータ生成部２２を制御して、音声認識結果、キロ程情報に基づいて、「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ６９において、点検処理制御部１３は、音声データ生成部２３を制御して、「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」の出力用音声データを生成せる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ７０において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
ステップＳ７１において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から画像データを受信したか否かを判断する。ステップＳ７１において、画像データを受信していないと判断された場合、処理は、後述するステップＳ７３の処理に進む。
ステップＳ７１において、画像データを受信したと判断された場合、ステップＳ７２において、点検処理制御部１３は、画像データと音声認識の結果得られた不良内容とを対応付ける。
ステップＳ７１において、画像データを受信していないと判断された場合、または、ステップＳ７２の処理の終了後、ステップＳ７３において、点検処理制御部１３は、点検結果登録制御部２１を制御して、不良内容の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、不良内容を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ６５において、ユーザの発話内容は、不良内容登録要求ではないと判断された場合、または、ステップＳ７３の処理の終了後、ステップＳ７４において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「○○キロ程、枕木に××、健全度Ａに登録内容を変更」などの、不良内容登録変更要求であるか否かを判断する。ステップＳ７４において、ユーザの発話内容は、不良内容登録変更要求ではないと判断された場合、処理は、後述するステップＳ８１に進む。
ステップＳ７４において、ユーザの発話内容は、不良内容登録変更要求であると判断された場合、ステップＳ７５において、点検処理制御部１３は、テキストデータ生成部２２を制御して、音声認識結果に基づいて、「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ７６において、点検処理制御部１３は、音声データ生成部２３を制御して、「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ７７において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
ステップＳ７８において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から画像データを受信したか否かを判断する。ステップＳ７８において、画像データを受信していないと判断された場合、処理は、後述するステップＳ８０の処理に進む。
ステップＳ７８において、画像データを受信したと判断された場合、ステップＳ７９において、点検処理制御部１３は、画像データと修正された不良内容とを対応付ける。
ステップＳ７８において、画像データを受信していないと判断された場合、または、ステップＳ７９の処理の終了後、ステップＳ８０において、点検処理制御部１３は、点検結果登録制御部２１を制御して、不良内容の登録修正処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、修正された不良内容を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ７４において、ユーザの発話内容は、不良内容登録変更要求ではないと判断された場合、または、ステップＳ８１の処理の終了後、ステップＳ８１において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「措置作業、××××」などの、措置作業内容登録要求であるか否かを判断する。ステップＳ８１において、ユーザの発話内容は、措置作業内容登録要求ではないと判断された場合、処理は、後述するステップＳ９０に進む。
ステップＳ８１において、ユーザの発話内容は、措置作業内容登録要求であると判断された場合、ステップＳ８２において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ８２において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ８２の処理が繰り返される。
ステップＳ８２において、緯度経度情報を受信したと判断された場合、ステップＳ８３において、サーバの点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
ステップＳ８４において、点検処理制御部１３は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程、措置作業、××××」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「○○キロ程、措置作業、××××」を生成し、点検処理制御部１３に供給する。
ステップＳ８５において、点検処理制御部１３は、音声データ生成部２３を制御して、「○○キロ程、措置作業、××××を登録します。よろしいですか？」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程、措置作業、××××を登録します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ８６において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
ステップＳ８７において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から画像データを受信したか否かを判断する。ステップＳ８７において、画像データを受信していないと判断された場合、処理は、後述するステップＳ８９の処理に進む。
ステップＳ８７において、画像データを受信したと判断された場合、ステップＳ８８において、点検処理制御部１３は、画像データと音声認識の結果得られた措置作業内容とを対応付ける。
ステップＳ８７において、画像データを受信していないと判断された場合、または、ステップＳ８８の処理の終了後、ステップＳ８９において、点検処理制御部１３は、点検結果登録制御部２１を制御して、措置作業内容の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、措置作業内容を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ８１において、ユーザの発話内容は、措置作業内容登録要求ではないと判断された場合、または、ステップＳ８９の処理の終了後、ステップＳ９０において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「検査終了」などの、検査終了要求であるか否かを判断する。ステップＳ９０において、ユーザの発話内容は、検査終了要求ではないと判断された場合、処理は、後述するステップＳ９７に進む。
ステップＳ９０において、ユーザの発話内容は、検査終了要求であると判断された場合、ステップＳ９１において、サーバの点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ９１において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ９１の処理が繰り返される。
ステップＳ９１において、緯度経度情報を受信したと判断された場合、ステップＳ９２において、サーバの点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
ステップＳ９３において、点検処理制御部１３は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程で検査を終了します」の出力用テキストデータを生成せる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末において表示出力されるテキストデータ「○○キロ程で検査を終了します」を生成し、点検処理制御部１３に供給する。
ステップＳ９４において、点検処理制御部１３は、音声データ生成部２３を制御して、「○○キロ程で検査を終了します」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程で検査を終了します」を生成し、点検処理制御部１３に供給する。
ステップＳ９５において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
ステップＳ９６において、点検処理制御部１３は、点検結果登録制御部２１を制御して、検査終了位置の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、点検結果データベース２０に登録されている検査位置を修正登録する処理を実行する。
ステップＳ９０において、ユーザの発話内容は、検査終了要求ではないと判断された場合、または、ステップＳ９６の処理の終了後、ステップＳ９７において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「検査終了位置を○○キロ程に変更」などの、検査終了キロ程変更要求であるか否かを判断する。ステップＳ９７において、ユーザの発話内容は、検査終了キロ程変更要求ではないと判断された場合、処理は、後述するステップＳ１０２に進む。
ステップＳ９７において、ユーザの発話内容は、検査終了キロ程変更要求であると判断された場合、ステップＳ９８において、点検処理制御部１３は、テキストデータ生成部２２を制御して、音声認識の結果得られた検査終了キロ程情報に基づいて、「検査終了位置を○○キロ程に修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「検査終了位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ９９において、点検処理制御部１３は、音声データ生成部２３を制御して、「検査開始終了を○○キロ程に修正します。よろしいですか？」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「検査開始終了を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
ステップＳ１００において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
ステップＳ１０１において、点検処理制御部１３は、点検結果登録制御部２１を制御して、検査終了位置の登録変更処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、点検結果データベース２０に登録されている検査開始位置を変更する処理を実行する。
ステップＳ９７において、ユーザの発話内容は、検査終了キロ程変更要求ではないと判断された場合、またはステップＳ１０１の処理の終了後、ステップＳ１０２において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、不良個所一覧表示要求であるか否かを判断する。
ステップＳ１０２において、ユーザの発話内容は、不良個所一覧表示要求であると判断された場合、ステップＳ１０３において、点検処理制御部１３は、ユーザ端末２の位置に対応する路線名に基づいて、点検結果登録制御部２１を制御して、対応する路線名の過去の点検結果のうち、対応する過去の不良発生個所の一覧を構成する情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、対応する過去の不良個所一覧を構成する情報を、点検結果データベース２０から検索し、点検処理制御部１３に供給する。点検処理制御部１３は、サーバ通信処理制御部１２を制御して、供給された過去の不良個所一覧を構成するデータを、サーバ通信部１１からユーザ端末２に送信させる。
ステップＳ１０２において、ユーザの発話内容は、不良個所一覧表示要求ではないと判断された場合、または、ステップＳ１０３の処理の終了後、ステップＳ１０４において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「ログアウト」などの、アプリケーション終了要求であるか否かを判断する。ステップＳ１０４において、ユーザの発話内容は、アプリケーション終了要求ではないと判断された場合、処理は、ステップＳ４６に戻り、それ以降の処理が繰り返される。
ステップＳ１０４において、ユーザの発話内容は、アプリケーション終了要求であると判断された場合、ステップＳ１０５において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ１０５において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ１０５の処理が繰り返される。
ステップＳ１０５において、緯度経度情報を受信したと判断された場合、ステップＳ１０６において、点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。
ステップＳ１０７において、点検処理制御部１３は、例えば、「お疲れ様でした。終了します。」などの、アプリケーション終了時の出力用テキストデータおよび出力用音声データを、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、アプリケーション終了時の出力用テキストデータおよび出力用音声データを、ユーザ端末２に送信する。
ステップＳ１０８において、点検処理制御部１３は、点検結果登録制御部２１を制御して、アプリケーション終了情報の登録を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、アプリケーション終了情報を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ１０９において、点検処理制御部１３は、アプリケーション終了要求を受けたことを通知する情報を、信処理制御部の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、アプリケーション終了要求を受けたことを通知する情報を、ユーザ端末２に送信して処理が終了される。この通知は、上述したユーザ端末処理1のステップＳ２５において、ユーザ端末において受信されたか否かが判断される。
このような処理により、サーバ１は、ユーザ端末２から送信された音声データを認識し、ユーザ端末２を利用しているユーザからの要求に対応する処理や、検査結果の登録処理を実行することができる。また、サーバ１は、ユーザ端末２の位置に基づいて、過去の検査結果に対応する情報を送信する。したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
次に、図１５を参照して、本発明の他の実施例である検査支援システムが有する機能構成について説明する。なお、図１における場合と同様な部分においては、同一の番号を付し、その説明は適宜省略する。
図１５の検査支援システムは、検査結果情報が登録されるサーバ７１と、検査担当者であるユーザが線路上を歩行しながら検査現場にて用いるユーザ端末７２とを含んで構成されている。ユーザ端末７２は、ユーザが携帯可能な形状である。ユーザ端末７２は、特に、メガネ型ウェアラブル端末（メガネ形状の透過型のヘッドマウントディスプレイやスマートグラスとも称される）であると、検査実施時に両手が自由になり、ユーザがより安全に検査を行うことができるようになるため好適である。ユーザ端末７２は、ウェアラブル端末に対応する。
サーバ７１は、サーバ通信部１１、サーバ通信処理制御部１２、点検処理制御部８１、使用者データベース８３、使用者認識処理部８４、位置情報データベース１８、位置情報演算処理部１９、点検結果データベース２０、点検結果登録制御部２１、テキストデータ生成部２２、および、音声出力用データ生成部８２の各機能を含んで構成されている。
すなわち、点検処理制御部１３に代わって点検処理制御部８１、使用者データベース１６に代わって使用者データベース８３、使用者認識処理部１７に代わって使用者認識処理部８４の機能が備えられ、音声認識用データベース１４、音声認識処理部１５、および、音声データ生成部２３の機能が削除され、新たに、音声出力用データ生成部８２の機能が備えられている以外は、基本的に、図１を用いて説明したサーバ１と同様の機能構成を有している。なお、サーバ通信処理制御部１２、使用者認識処理部８４、位置情報演算処理部１９、点検結果登録制御部２１、テキストデータ生成部２２、および、音声出力用データ生成部８２の各部は、点検処理制御部８１の制御に基づいて、それぞれの機能を実現する。
点検処理制御部８１は、サーバ７１の各部の処理を制御するものである。具体的には、点検処理制御部８１は、サーバ通信処理制御部１２を制御して、サーバ通信部１１で受信された情報の供給を受ける。点検処理制御部８１は、ユーザ端末７２から供給された音声認識結果がユーザ端末７２のログイン要求である場合、使用者認識処理部８４を制御して、ユーザ端末７２の使用者を認識する処理を実行させる。また、点検処理制御部８１は、サーバ通信部１１より受信された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。そして、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、路線名とキロ程による位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。
また、点検処理制御部８１は、ユーザ端末７２の位置情報に基づいて、必要に応じて点検結果登録制御部２１を制御して、過去の点検結果を点検結果データベース２０から検索させる。そして、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、過去の点検結果を、サーバ通信部１１からユーザ端末７２に送信させる。また、点検処理制御部８１は、ユーザ端末７２より送信され、サーバ通信部１１において受信された現在の点検結果の情報を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。また、点検処理制御部８１は、テキストデータ生成部２２を制御して、ユーザ端末７２において表示出力されるテキストデータを生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。また、点検処理制御部８１は、音声出力用データ生成部８２を制御して、ユーザ端末７２における音声出力のためのデータを生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。
音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２における音声出力のためのデータを生成し、点検処理制御部８１に供給する。
使用者データベース８３は、ユーザ端末７２の使用者の情報を記録するものである。使用者データベース８３に記録される情報には、登録された使用者と、ユーザ端末７２にログインするためのパスワードが含まれている。
使用者認識処理部８４は、サーバ通信部１１がユーザ端末７２から受信した音声認識結果がログイン要求であると認識された場合、点検処理制御部８１の制御に基づいて、使用者データベース８３に登録されているパスワード情報を用いて、ログインするユーザが、登録されたユーザであるか否かの認識処理を実行し、認識処理結果を点検処理制御部８１に供給する。
なお、図１５において、サーバ７１は１つの装置として構成されているものとして説明したが、図１５のサーバ７１が有する機能を、複数の装置で実現するものとしてもよい。
ユーザ端末７２は、端末通信部３１、端末通信処理制御部３２、ユーザ端末処理制御部９１、ＡＲ表示制御部３４、ＡＲ表示部３５、音声データ取得制御部３６、マイク３７、音声データ出力制御部３８、ヘッドホン３９、位置データ取得制御部４０、ＧＮＳＳ装置４１、ジャイロスコープ４２、地磁気センサ４３、撮像制御部４４、カメラ４５、音声認識用データベース９２、音声認識処理部９３、および、音声データ生成部９４の各機能を有して構成されている。
すなわち、図１５のユーザ端末７２は、ユーザ端末処理制御部３３に代わって、ユーザ端末処理制御部９１の機能が設けられ、新たに、音声認識用データベース９２、音声認識処理部９３、および、音声データ生成部９４の各機能を備えている以外は、図１を用いて説明したユーザ端末２と基本的に同様の機能を有している。なお、末通信処理制御部３２、ＡＲ表示制御部３４、音声データ取得制御部３６、音声データ出力制御部３８、位置データ取得制御部４０、ジャイロスコープ４２、地磁気センサ４３、撮像制御部４４、音声認識処理部９３、および、音声データ生成部９４は、それぞれ、ユーザ端末処理制御部９１の制御に基づいて、それらの機能を実現する。
ユーザ端末処理制御部９１は、ユーザ端末７２の各部の処理を制御するものである。具体的には、ユーザ端末処理制御部９１は、端末通信処理制御部３２を制御して、端末通信部３１により受信された情報の供給を受ける。ユーザ端末処理制御部９１は、供給された音声出力のためのデータを、音声データ生成部９４に供給して、音声データを生成させる。また、ユーザ端末処理制御部９１は、音声データ生成部９４により生成された音声データや、ユーザに注意を促すための所定の音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから音声出力させる。ユーザ端末処理制御部９１は、供給されたテキストデータや画像データを、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５に表示させる。
また、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報の供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。また、ユーザ端末処理制御部９１は、撮像制御部４４を制御して、カメラ４５により画像を撮像させ、撮像された画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。また、ユーザ端末処理制御部９１は、ジャイロスコープ４２、および、地磁気センサ４３から供給された計測値に基づいて、ユーザ端末７２を装着しているユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。そして、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報、および、ユーザ端末７２を装着しているユーザの視線の向きの検出結果に基づいて、ＡＲ表示制御部３４による、過去の検査結果の表示の座標や大きさを制御する。
更に、ユーザ端末処理制御部９１は、マイク３７により集音され、音声データ取得制御部３６により取得された音声データの供給を受け、音声認識処理部９３を制御して、音声認識処理を実行させる。そして、ユーザ端末処理制御部９１は、音声認識処理部９３による音声認識結果の供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。
音声認識用データベース９２は、マイク３７により集音され、音声データ取得制御部３６により取得された音声データの認識処理に用いられる情報が登録されているデータベースである。
音声認識処理部９３は、ユーザ端末処理制御部９１の制御に基づいて、供給された音声データを、音声認識用データベース９２に登録されている情報を用いて音声認識し、音声認識結果をユーザ端末処理制御部９１に供給する。
音声データ生成部９４は、ユーザ端末処理制御部９１の制御に基づいて、サーバ７１から送信される音声出力用データを基に、ユーザ端末７２において音声出力される音声データを生成し、ユーザ端末処理制御部９１に供給する。
すなわち、図１５の検査支援システムは、音声認識処理および音声データの生成の機能が、サーバ７１ではなく、ユーザ端末７２に備えられている。また、ログインにおいては、ユーザの声紋などを用いる代わりに、ログインパスワードが用いられる。なお、ユーザ端末７２を用いた鉄道の保守点検のログインからシステム終了までの流れや、不良個所の表示方法については、音声認識に関する部分以外においては、図２および図３を用いて説明した場合と基本的に同様であるので、その説明は省略する。
このように、検査支援システムでは、ユーザ端末７２が、ＧＮＳＳ装置４１により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示するＡＲ表示部３５と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するマイク３７と、マイク３７により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部９３と、音声認識処理部９３により音声認識された検査対象物の検査結果情報をサーバ７１に送信する端末通信部３１とを備え、サーバ７１は、端末通信部３１から受信された検査対象物の検査結果情報を登録する点検結果データベース２０と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、過去の検査結果情報をユーザ端末７２に送信するサーバ通信部１１とを有する。
したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
次に、図１６〜図１８のフローチャートを参照して、図１５のユーザ端末７２が実行するユーザ端末の処理２について説明する。
ステップＳ１３１において、ユーザ端末処理制御部９１は、音声データ取得制御部３６から供給される情報に基づいて、ユーザの音声を取得したか否かを判断する。検査の最初にユーザより発話され、取得される音声データは、ログイン要求を示すものである。ステップＳ１３１において、ユーザの音声を取得していないと判断された場合、ユーザの音声を取得したと判断されるまで、ステップＳ１３１の処理が繰り返される。
ステップＳ１３１において、ユーザの音声を取得したと判断された場合、ステップＳ１３２において、ユーザ端末処理制御部９１は、マイク３７により取得され、音声データ取得制御部３６から供給された音声データを、音声認識処理部９３に供給し、音声認識処理を実行させる。音声認識処理部９３は、ユーザ端末処理制御部９１の制御に基づいて、供給された音声データを、音声認識用データベース９２に登録されている情報を用いて音声認識し、音声認識結果をユーザ端末処理制御部９１に供給する。
ステップＳ１３３において、ユーザ端末処理制御部９１は、ステップＳ１３２の処理により得られた音声認識結果を、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、供給された音声データを、サーバ７１に送信する。
ステップＳ１３４において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１よりエラーメッセージが通知されたか否かを判断する。ステップＳ１３４において、エラーメッセージが通知されたと判断された場合、処理は、ステップＳ１３１に戻り、それ以降の処理が繰り返される。
ステップＳ１３４において、エラーメッセージが通知されていないと判断された場合、ステップＳ１３５において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１よりログイン許可が通知されたか否かを判断する。ステップＳ１３５において、サーバ７１よりログイン許可が通知されていないと判断された場合、処理は、ステップＳ１３４に戻り、それ以降の処理が繰り返される。
ステップＳ１３５において、サーバ７１よりログイン許可が通知されたと判断された場合、ステップＳ１３６において、ユーザ端末処理制御部９１は、ログイン状態となる。
ステップＳ１３７において、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、緯度経度情報をサーバ７１に送信する。
ステップＳ１３８において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
ステップＳ１３９において、ユーザ端末処理制御部９１は、音声データ取得制御部３６から供給される情報に基づいて、ユーザの音声を取得したか否かを判断する。図２および図３を用いて説明したように、検査中のユーザは、ユーザ端末７２に対して、検査開始または終了の通知や、それらの位置変更の要求、または、不良内容の登録内容などを発話する。ステップＳ１３９において、ユーザの音声を取得していないと判断された場合、処理は、ステップＳ１３７に戻り、それ以降の処理が繰り返される。
ステップＳ１３９において、ユーザの音声を取得したと判断された場合、ステップＳ１４０において、ユーザ端末処理制御部９１は、マイク３７により取得され、音声データ取得制御部３６から供給された音声データを、音声認識処理部９３に供給し、音声認識処理を実行させる。音声認識処理部９３は、ユーザ端末処理制御部９１の制御に基づいて、供給された音声データを、音声認識用データベース９２に登録されている情報を用いて音声認識し、音声認識結果をユーザ端末処理制御部９１に供給する。
ステップＳ１４１において、ユーザ端末処理制御部９１は、ステップＳ１４０の処理により得られた音声認識結果を、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、供給された音声データを、サーバ７１に送信する。
ステップＳ１４２において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１より過去の検査結果情報を受信したか否かを判断する。
ステップＳ１４２において、過去の検査結果情報を受信したと判断された場合、ステップＳ１４３において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された過去の検査結果情報を取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、過去の検査結果情報であるテキストデータおよび画像データを、例えば、図２または図３を用いて説明したように、ＡＲ表示部３５に表示させる。ＡＲ表示部３５は、過去の検査結果情報を表示出力する。
ステップＳ１４２において、過去の検査結果情報を受信していないと判断された場合、または、ステップＳ１４３の処理の終了後、ステップＳ１４４において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１より、過去の検査結果以外のテキストデータまたは音声出力のためのデータの少なくとも一方を受信したか否かを判断する。ここで、過去の検査結果以外のテキストデータまたは音声出力のためのデータとは、例えば、図２または図３を用いて説明したように、「１ｋ２００から検査を開始します」や「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランクで登録します。よろしいですか」などの、ユーザの発話内容を確認するためのキストデータまたは音声出力のためのデータである。ステップＳ１４４において、過去の検査結果以外のテキストデータまたは音声出力のためのデータのいずれも受信していないと判断された場合、処理は、後述するステップＳ１４８に進む。
ステップＳ１４４において、過去の検査結果以外のテキストデータまたは音声出力のためのデータのうちの少なくとも一方を受信したと判断された場合、ステップＳ１４５において、ユーザ端末処理制御部９１は、受信したデータの出力処理を実行する。
具体的には、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信されたテキストデータを取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、テキストデータを、例えば、図２または図３を用いて説明したように、ＡＲ表示部３５に表示させる。ＡＲ表示部３５は、テキストデータを表示出力する。
また、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された音声出力のためのデータを取得する。そして、ユーザ端末処理制御部９１は、供給された音声出力のためのデータを、音声データ生成部９４に供給して、音声データを生成させる。音声データ生成部９４は、ユーザ端末処理制御部９１の制御に基づいて、サーバ７１から送信された音声出力用データを基に、音声データを生成し、ユーザ端末処理制御部９１に供給する。ユーザ端末処理制御部９１は、音声データ出力制御部３８を制御して、ヘッドホン３９から音声データを出力させる。ヘッドホン３９は、音声データを出力する。
ステップＳ１４６において、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、緯度経度情報をサーバ７１に送信する。
ステップＳ１４７において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
ステップＳ１４４において、過去の検査結果以外のテキストデータまたは音声出力のためのデータのいずれも受信していないと判断された場合、または、ステップＳ１４７の処理の終了後、ステップＳ１４８６において、ユーザ端末処理制御部９１は、取得されている現在位置情報に基づいて、過去の検査結果のうちのいずれかが所定距離以内であるか否かを判断する。ステップＳ１４８において、過去の検査結果のうちのいずれかが所定距離以内ではないと判断された場合、処理は、後述するステップＳ１５５に進む。
ステップＳ１４８において、過去の検査結果のうちのいずれかが所定距離以内であると判断された場合、ステップＳ１４９において、ユーザ端末処理制御部９１は、ジャイロスコープ４２から供給されるユーザ端末７２の角度（姿勢）や角速度あるいは角加速度の検出結果、および、地磁気センサ４３から供給されるユーザ端末７２が向いている角度の検出結果に基づいて、ユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。
ステップＳ１５０において、ユーザ端末処理制御部９１は、ステップＳ１４９における検出結果に基づいて、ユーザが、次の過去の不良発生個所の方向に対応する所定の方向を向いているか否かを判断する。
ステップＳ１５０において、ユーザが所定の方向を向いていると判断された場合、ステップＳ１５１において、ユーザ端末処理制御部９１は、例えば、図２のＡＲ表示部３５‐３および３５‐４を用いて説明したような、過去の検査結果の表示の一部である不良発生個所情報５１の座標および大きさを演算する。
ステップＳ１５０において、ユーザが所定の方向を向いていないと判断された場合、または、ステップＳ１５１の処理の終了後、ステップＳ１５２において、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、例えば、図２のＡＲ表示部３５‐３および３５‐４を用いて説明したような、または、図３のＡＲ表示部３５‐１１および３５‐１２を用いて説明したような、過去の検査結果の詳細表示を実行させる。ＡＲ表示制御部３４は、ＡＲ表示部３５に、過去の検査結果の詳細を表示させる。
すなわち、ステップＳ１５０において、ユーザが所定の方向を向いていると判断された場合には、ステップＳ１５２の処理により、不良発生個所情報５１が、演算結果に基づいた座標および大きさで、他の過去の検査結果であるテキストデータまたは画像データとともに、ＡＲ表示部３５に表示されるが、ステップＳ１５０において、ユーザが所定の方向を向いていないと判断された場合、ステップＳ１５２の処理により、不良発生個所情報５１は表示されず、他の過去の検査結果であるテキストデータまたは画像データのみがＡＲ表示部３５に表示される。
ステップＳ１５３において、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、緯度経度情報をサーバ７１に送信する。
ステップＳ１５４において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
ステップＳ１４８において、過去の検査結果のうちのいずれかが所定距離以内ではないと判断された場合、または、ステップＳ１５４の処理の終了後、ステップＳ１５５において、ユーザ端末処理制御部９１は、撮像制御部４４から供給された信号に基づいて、撮像が指令されたか否かを判断する。
ステップＳ１５５において、撮像が指令されたと判断された場合、ステップＳ１５６において、ユーザ端末処理制御部９１は、撮像制御部４４を制御して、カメラ４５により撮像処理を実行させる。そして、ユーザ端末処理制御部９１は、撮像されて得られた画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、画像データをサーバ７１に送信する。
ステップＳ１５５において、撮像が指令されていないと判断された場合、または、ステップＳ１５６の処理の終了後、ステップＳ１５７において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１よりアプリケーション終了要求を受けたことが通知されたか否かを判断する。ステップＳ１５７において、アプリケーション終了要求を受けていないと判断された場合、処理は、ステップＳ１３９に戻り、それ以降の処理が繰り返される。
ステップＳ１５７において、アプリケーション終了要求を受けたと判断された場合、ステップＳ１５８において、端末通信部３１は、サーバ７１より、例えば、「お疲れ様でした。終了します」などの音声を出力するためのデータ、または、テキストデータの少なくとも一方、および、必要に応じて、図２のＡＲ表示部３５−６の表示画面を表示させるための画像データを受信する。ユーザ端末処理制御部９１は、端末通信処理制御部３２から、これらの音声を出力するためのデータ、テキストデータ、または、画像データを取得する。ユーザ端末処理制御部９１は、音声出力のためのデータを音声データ生成部９４に供給して、音声データを生成させる。音声データ生成部９４は、ユーザ端末処理制御部９１の制御に基づいて、サーバ７１から送信された音声出力用データを基に、音声データを生成し、ユーザ端末処理制御部９１に供給する。ユーザ端末処理制御部９１は、音声データ出力制御部３８を制御して、音声データをヘッドホン３９より出力させるとともに、ＡＲ表示制御部３４を制御して、テキストデータおよび画像データをＡＲ表示部３５に表示させて、ログアウト状態となり、処理が終了される。
このような処理により、ユーザ端末７２は、現在位置情報や、ユーザの発話に対応する音声データの認識結果をサーバ７１に送信し、サーバ７１から、過去の検査結果、ならびに、ユーザの発話内容やサーバ７１への登録内容を確認するためのテキストデータおよび音声出力のためのデータを受信して、ＡＲ表示部３５に表示させ、ヘッドホン３９のスピーカーから音声出力させることが可能となる。したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
次に、図１９〜図２６のフローチャートを参照して、図１５のサーバ７１が実行するサーバの処理２について説明する。
ステップＳ１７１において、サーバ７１の点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から音声認識結果を受信したか否かを判断する。ステップＳ１７１において受信される音声認識結果は、上述したユーザ端末処理２のステップＳ１３３において送信された、ログイン要求、および、パスワード情報を示す音声認識結果である。ステップＳ１７１において、音声認識結果を受信していないと判断された場合、音声認識結果を受信したと判断されるまで、ステップＳ１７１の処理が繰り返される。
ステップＳ１７１において、音声認識結果を受信したと判断された場合、ステップＳ１７２において、点検処理制御部８１は、受信された音声認識結果すなわち、ログイン要求であるという認識結果を受けて、ユーザ端末７２から送信されたパスワードを使用者認識処理部８４に供給し、ユーザ端末７２の使用者の認識処理を実行させる。使用者認識処理部８４は、点検処理制御部８１の制御に基づいて、使用者データベース８３に登録されているパスワード情報を用いて、ユーザ端末７２にログインしようとしているユーザが登録されたユーザであるか否かの認識処理を実行し、認識処理結果を点検処理制御部８１に供給する。
ステップＳ１７３において、点検処理制御部８１は、ステップＳ４２の認識処理の結果に基づいて、ユーザ端末７２の使用者は登録された使用者であるか否かを判断する。
ステップＳ１７３において、ユーザ端末７２の使用者は登録された使用者ではないと判断された場合、ステップＳ１７４において、点検処理制御部８１は、サーバ通信処理制御部１２を制御し、サーバ通信部１１からユーザ端末７２へ、所定のエラーメッセージを送信させる。サーバ通信部１１は、ユーザ端末７２に、エラーメッセージを送信する。ステップＳ１７４の処理の終了後、処理は、ステップＳ１７１に戻り、それ以降の処理が繰り返される。
ステップＳ１７３において、ユーザ端末７２の使用者は登録された使用者であると判断された場合、ステップＳ１７５において、点検処理制御部８１は、サーバ通信処理制御部１２を制御し、サーバ通信部１１からユーザ端末７２へ、ログイン許可を送信させる。サーバ通信部１１は、ユーザ端末７２に、ログイン許可を送信する。
ステップＳ１７６において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。
ステップＳ１７６において、緯度経度情報を受信したと判断された場合、ステップＳ１７７において、点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
ステップＳ１７６において、緯度経度情報を受信していないと判断された場合、または、ステップＳ１７７の処理の終了後、ステップＳ１７８において、点検処理制御部８１は、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は、ユーザ端末７２へ送信済みであるか否かを判断する。
ステップＳ１７８において、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は送信済みではないと判断された場合、ステップＳ１７９において、点検処理制御部８１は、位置情報演算処理部１９の処理により得られるユーザ端末７２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、点検結果登録制御部２１を制御して、過去の点検結果のうち、ユーザ端末７２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、ユーザ端末７２を利用しているユーザが検査を行っている路線の過去の点検結果を、点検結果データベース２０から検索し、ユーザ端末７２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検処理制御部８１に供給する。点検処理制御部８１は、サーバ通信処理制御部１２を制御して、供給された過去の点検結果を、サーバ通信部１１からユーザ端末７２に送信させる。
ステップＳ１７８において、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は送信済みであると判断された場合、または、ステップ１７９の処理の終了後、ステップＳ１８０において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から音声認識結果を受信したか否かを判断する。ステップＳ１８０において受信される音声認識結果は、上述したユーザ端末処理２のステップＳ１４１において送信された、ユーザからの要求や不良内容の登録内容などを示す音声認識結果である。ステップＳ１８０において、音声認識結果を受信していないと判断された場合、音声認識結果を受信したと判断されるまで、ステップＳ１８０の処理が繰り返される。
ステップＳ１８０において、音声データを受信したと判断された場合、ステップＳ１８１において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「検査開始」などの検査開始要求であるか否かを判断する。ステップＳ１８１において、ユーザの発話内容は、検査開始要求ではないと判断された場合、処理は、後述するステップＳ１８８に進む。
ステップＳ１８１において、ユーザの発話内容は、検査開始要求であると判断された場合、ステップＳ１８２において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ１８２において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ１８２の処理が繰り返される。
ステップＳ１８２において、緯度経度情報を受信したと判断された場合、ステップＳ１８３において、点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
ステップＳ１８４において、点検処理制御部８１は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程から検査を開始します」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「○○キロ程から検査を開始します」を生成し、点検処理制御部８１に供給する。
ステップＳ１８５において、サーバの点検処理制御部８１は、音声出力用データ生成部８２を制御して、変換されたキロ程情報に基づいて、「○○キロ程から検査を開始します」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程から検査を開始します」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
ステップＳ１８６において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
ステップＳ１８７において、点検処理制御部８１は、点検結果登録制御部２１を制御して、検査開始位置の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、検査開始位置を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ１８１において、ユーザの発話内容は、検査開始要求ではないと判断された場合、または、ステップＳ１８７の処理の終了後、ステップＳ１８８において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「検査開始位置を○○キロ程に変更」などの検査開始キロ程変更要求であるか否かを判断する。ステップＳ１８８において、ユーザの発話内容は、検査開始キロ程変更要求ではないと判断された場合、処理は、後述するステップＳ１９４に進む。
ステップＳ１８８において、ユーザの発話内容は、検査開始キロ程変更要求であると判断された場合、ステップＳ１８９において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果から、ユーザが変更を指令した検査開始キロ程情報を取得する。
ステップＳ１９０において、点検処理制御部８１は、テキストデータ生成部２２を制御して、取得された検査開始キロ程情報に基づいて、「検査開始位置を○○キロ程に修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「検査開始位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部８１に供給する。
ステップＳ１９１において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「検査開始位置を○○キロ程に修正します。よろしいですか？」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「検査開始位置を○○キロ程に修正します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
ステップＳ１９２において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
ステップＳ１９３において、点検処理制御部８１は、点検結果登録制御部２１を制御して、検査開始位置の登録変更処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、変更された検査開始位置を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ１８８において、ユーザの発話内容は、検査開始キロ程変更要求ではないと判断された場合、または、ステップＳ１９３の処理の終了後、ステップＳ１９４において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「枕木に××、健全度Ａ」などの、不良内容登録要求であるか否かを判断する。ステップＳ１９４において、ユーザの発話内容は、不良内容登録要求ではないと判断された場合、処理は、後述するステップＳ２０３に進む。
ステップＳ１９４において、ユーザの発話内容は、不良内容登録要求であると判断された場合、ステップＳ１９５において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ１９５において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ１９５の処理が繰り返される。
ステップＳ１９５において、緯度経度情報を受信したと判断された場合、ステップＳ１９６において、点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
ステップＳ１９７において、サーバの点検処理制御部８１は、テキストデータ生成部２２を制御して、音声認識結果、キロ程情報に基づいて、「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」を生成し、点検処理制御部８１に供給する。
ステップＳ１９８において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」の音声出力のためのデータを生成せる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
ステップＳ１９９において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、ユーザ端末７２に送信する。
ステップＳ１２０において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から画像データを受信したか否かを判断する。ステップＳ１２０において、画像データを受信していないと判断された場合、処理は、後述するステップＳ２０２の処理に進む。
ステップＳ１２０において、画像データを受信したと判断された場合、ステップＳ１２１において、点検処理制御部８１は、画像データと受信した不良内容とを対応付ける。
ステップＳ１２０において、画像データを受信していないと判断された場合、または、ステップＳ１２１の処理の終了後、ステップＳ２０２において、点検処理制御部８１は、点検結果登録制御部２１を制御して、不良内容の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、不良内容を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ１９４において、ユーザの発話内容は、不良内容登録要求ではないと判断された場合、または、ステップＳ２０２の処理の終了後、ステップＳ２０３において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「○○キロ程、枕木に××、健全度Ａに登録内容を変更」などの、不良内容登録変更要求であるか否かを判断する。ステップＳ２０３において、ユーザの発話内容は、不良内容登録変更要求ではないと判断された場合、処理は、後述するステップＳ２１０に進む。
ステップＳ２０３において、ユーザの発話内容は、不良内容登録変更要求であると判断された場合、ステップＳ２０４において、点検処理制御部８１は、テキストデータ生成部２２を制御して、音声認識結果に基づいて、「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」を生成し、点検処理制御部８１に供給する。
ステップＳ２０５において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
ステップＳ２０６において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
ステップＳ２０７において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から画像データを受信したか否かを判断する。ステップＳ２０７において、画像データを受信していないと判断された場合、処理は、後述するステップＳ２０９の処理に進む。
ステップＳ２０７において、画像データを受信したと判断された場合、ステップＳ２０８において、点検処理制御部８１は、画像データと修正された不良内容とを対応付ける。
ステップＳ２０７において、画像データを受信していないと判断された場合、または、ステップＳ２０８の処理の終了後、ステップＳ２０９において、点検処理制御部８１は、点検結果登録制御部２１を制御して、不良内容の登録修正処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、修正された不良内容を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ２０３において、ユーザの発話内容は、不良内容登録変更要求ではないと判断された場合、または、ステップＳ２０９の処理の終了後、ステップＳ２１０において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「措置作業、××××」などの、措置作業内容登録要求であるか否かを判断する。ステップＳ２１０において、ユーザの発話内容は、措置作業内容登録要求ではないと判断された場合、処理は、後述するステップＳ２１９に進む。
ステップＳ２１０において、ユーザの発話内容は、措置作業内容登録要求であると判断された場合、ステップＳ２１１において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ２１１において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ２１１の処理が繰り返される。
ステップＳ２１１において、緯度経度情報を受信したと判断された場合、ステップＳ２１２において、サーバの点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
ステップＳ２１３において、点検処理制御部８１は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程、措置作業、××××」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「○○キロ程、措置作業、××××」を生成し、点検処理制御部８１に供給する。
ステップＳ２１４において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「○○キロ程、措置作業、××××を登録します。よろしいですか？」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程、措置作業、××××を登録します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
ステップＳ２１５において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
ステップＳ２１６において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から画像データを受信したか否かを判断する。ステップＳ２１６において、画像データを受信していないと判断された場合、処理は、後述するステップＳ２１８の処理に進む。
ステップＳ２１６において、画像データを受信したと判断された場合、ステップＳ２１７において、点検処理制御部８１は、画像データと受信した措置作業内容とを対応付ける。
ステップＳ２１６において、画像データを受信していないと判断された場合、または、ステップＳ２１７の処理の終了後、ステップＳ２１８において、点検処理制御部８１は、点検結果登録制御部２１を制御して、措置作業内容の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、措置作業内容を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ２１０において、ユーザの発話内容は、措置作業内容登録要求ではないと判断された場合、または、ステップＳ２１８の処理の終了後、ステップＳ２１９において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「検査終了」などの、検査終了要求であるか否かを判断する。ステップＳ２１９において、ユーザの発話内容は、検査終了要求ではないと判断された場合、処理は、後述するステップＳ２２６に進む。
ステップＳ２１９において、ユーザの発話内容は、検査終了要求であると判断された場合、ステップＳ２２０において、サーバの点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ２２０において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ２２０の処理が繰り返される。
ステップＳ２２０において、緯度経度情報を受信したと判断された場合、ステップＳ２２１において、サーバの点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
ステップＳ２２２において、点検処理制御部８１は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程で検査を終了します」の出力用テキストデータを生成せる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末において表示出力されるテキストデータ「○○キロ程で検査を終了します」を生成し、点検処理制御部８１に供給する。
ステップＳ２２３において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「○○キロ程で検査を終了します」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程で検査を終了します」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
ステップＳ２２４において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
ステップＳ２２５において、点検処理制御部８１は、点検結果登録制御部２１を制御して、検査終了位置の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、点検結果データベース２０に登録されている検査位置を修正登録する処理を実行する。
ステップＳ２１９において、ユーザの発話内容は、検査終了要求ではないと判断された場合、または、ステップＳ２２５の処理の終了後、ステップＳ２２６において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「検査終了位置を○○キロ程に変更」などの、検査終了キロ程変更要求であるか否かを判断する。ステップＳ２２６において、ユーザの発話内容は、検査終了キロ程変更要求ではないと判断された場合、処理は、後述するステップＳ２３１に進む。
ステップＳ２２６において、ユーザの発話内容は、検査終了キロ程変更要求であると判断された場合、ステップＳ２２７において、点検処理制御部８１は、テキストデータ生成部２２を制御して、受信した音声認識の結果に含まれる検査終了キロ程情報に基づいて、「検査終了位置を○○キロ程に修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「検査終了位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部８１に供給する。
ステップＳ２２８において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「検査開始終了を○○キロ程に修正します。よろしいですか？」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「検査開始終了を○○キロ程に修正します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
ステップＳ２２９において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
ステップＳ２３０において、点検処理制御部８１は、点検結果登録制御部２１を制御して、検査終了位置の登録変更処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、点検結果データベース２０に登録されている検査開始位置を変更する処理を実行する。
ステップＳ２２６において、ユーザの発話内容は、検査終了キロ程変更要求ではないと判断された場合、またはステップＳ２３０の処理の終了後、ステップＳ２３１において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、不良個所一覧表示要求であるか否かを判断する。
ステップＳ２３１において、ユーザの発話内容は、不良個所一覧表示要求であると判断された場合、ステップＳ２３２において、点検処理制御部８１は、ユーザ端末７２の位置に対応する路線名に基づいて、点検結果登録制御部２１を制御して、対応する路線名の過去の点検結果のうち、対応する過去の不良発生個所の一覧を構成する情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、対応する過去の不良個所一覧を構成する情報を、点検結果データベース２０から検索し、点検処理制御部８１に供給する。点検処理制御部８１は、サーバ通信処理制御部１２を制御して、供給された過去の不良個所一覧を構成するデータを、サーバ通信部１１からユーザ端末７２に送信させる。
ステップＳ２３１において、ユーザの発話内容は、不良個所一覧表示要求ではないと判断された場合、または、ステップＳ２３２の処理の終了後、ステップＳ２３３において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「ログアウト」などの、アプリケーション終了要求であるか否かを判断する。ステップＳ２３３において、ユーザの発話内容は、アプリケーション終了要求ではないと判断された場合、処理は、ステップＳ１７６に戻り、それ以降の処理が繰り返される。
ステップＳ２３３において、ユーザの発話内容は、アプリケーション終了要求であると判断された場合、ステップＳ２３４において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ２３４において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ２３４の処理が繰り返される。
ステップＳ２３４において、緯度経度情報を受信したと判断された場合、ステップＳ２３５において、点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。
ステップＳ２３６において、点検処理制御部８１は、例えば、「お疲れ様でした。終了します。」などの、アプリケーション終了時の出力用テキストデータおよび音声出力のためのデータを、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、アプリケーション終了時の出力用テキストデータおよび音声出力のためのデータを、ユーザ端末７２に送信する。
ステップＳ２３７において、点検処理制御部８１は、点検結果登録制御部２１を制御して、アプリケーション終了情報の登録を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、アプリケーション終了情報を、点検結果データベース２０に供給して登録する処理を実行する。
ステップＳ２３８において、点検処理制御部８１は、アプリケーション終了要求を受けたことを通知する情報を、信処理制御部の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、アプリケーション終了要求を受けたことを通知する情報を、ユーザ端末７２に送信して処理が終了される。この通知は、上述したユーザ端末処理1のステップＳ１５７において、ユーザ端末において受信されたか否かが判断される。
このような処理により、サーバ７１は、ユーザ端末７２から送信された音声認識結果に基づいて、ユーザ端末７２を利用しているユーザからの要求に対応する処理や、検査結果の登録処理を実行することができる。また、サーバ７１は、ユーザ端末７２の位置に基づいて、過去の検査結果に対応する情報を送信する。したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
また、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
１…サーバ、 ２…ユーザ端末（ウェアラブル端末）、 １１…サーバ通信部、 １２…サーバ通信処理制御部、 １３…点検処理制御部、 １４…音声認識用データベース、 １５…音声認識処理部、 １６…使用者データベース、 １７…使用者認識処理部、 １８…位置情報データベース、 １９…位置情報演算処理部、 ２０…点検結果データベース、 ２１…点検結果登録制御部、 ２２…テキストデータ生成部、 ２３…音声データ生成部、 ３１…端末通信部、 ３２…端末通信処理制御部、 ３３…ユーザ端末処理制御部、 ３４…ＡＲ表示制御部（表示部）、 ３５…ＡＲ表示部、 ３６…音声データ取得制御部、 ３７…マイク（発話音声取得部）、 ３８…音声データ出力制御部（音声制御部）、 ３９…ヘッドホン（音声出力部）、 ４０…位置データ取得制御部、 ４１…ＧＮＳＳ装置（位置情報取得部）、 ４２…ジャイロスコープ、 ４３…地磁気センサ、 ４４…撮像制御部、 ４５…カメラ、 ５１…不良発生個所情報 ７１…サーバ、 ７２…ユーザ端末（ウェアラブル端末）、 ８１…点検処理制御部８１、 ８２…音声出力用データ生成部、 ８３…使用者データベース、 ８４…使用者認識処理部、 ９１…ユーザ端末処理制御部、 ９２…音声認識用データベース、 ９３…音声認識処理部、 ９４…音声データ生成部

Claims (16)

  1. 位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
    前記ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、
    前記ウェアラブル端末を装着するユーザの眼前に配置され、前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
    前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
    前記発話音声取得部を介して取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信する端末側通信部とを備え、
    前記表示制御部は、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ウェアラブル端末を装着する前記ユーザの視線の向きを検出するためのセンサにより検出された前記ユーザの視線の向きの変化に応じて変化させ、
    前記サーバは、
    前記端末側通信部から受信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
    前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
    取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
    ことを特徴とする検査支援システム。
  2. 前記ウェアラブル端末は、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させる音声制御部を有する、
    ことを特徴とする請求項１に記載の検査支援システム。
  3. 前記音声制御部は、取得した前記位置情報に対応する地点のキロ程において不良状態が確認された場合に発話される地点のキロ程データに相当する発話音声及び不良情報を含む検査結果情報に相当する発話音声を音声出力部から出力させる、
    ことを特徴とする請求項２に記載の検査支援システム。
  4. 前記検査結果情報記憶部は、取得した前記位置情報に対応する地点のキロ程において不良状態が確認された場合に取得された不良情報を含む検査結果情報を登録する、
    ことを特徴とする請求項３に記載の検査支援システム。
  5. 眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
    前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
    前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
    前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
    前記ウェアラブル端末が、前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
    前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
    前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
    前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
    前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
    前記サーバが、前記検査対象物の検査結果情報を登録するステップと、
    前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップと、
    ことを特徴とする検査支援方法。
  6. 前記ウェアラブル端末が、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させるステップを有する、
    ことを特徴とする請求項５に記載の検査支援方法。
  7. 眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、前記ウェアラブル端末のコンピュータに実行させるためのプログラムであって、
    前記位置情報取得部により現在位置を取得するステップと、
    前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
    前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
    前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
    前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
    前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
    をコンピュータに実行させるためのプログラム。
  8. 位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
    前記ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、
    前記ウェアラブル端末を装着するユーザの眼前に配置され、前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
    前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
    前記発話取得部により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
    前記音声認識処理部により音声認識された前記検査対象物の検査結果情報を前記サーバに送信する端末側通信部とを備え、
    前記表示制御部は、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ウェアラブル端末を装着する前記ユーザの視線の向きを検出するためのセンサにより検出された前記ユーザの視線の向きの変化に応じて変化させ、
    前記サーバは、
    前記端末側通信部から受信された前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
    取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
    ことを特徴とする検査支援システム。
  9. 眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
    前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
    前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
    前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
    前記ウェアラブル端末が、前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
    前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
    前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
    前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
    前記ウェアラブル端末が、前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
    前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報を登録するステップと、
    前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップとを有する、
    ことを特徴とする検査支援方法。
  10. 眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、前記ウェアラブル端末のコンピュータに実行させるためのプログラムであって、
    前記位置情報取得部により現在位置を取得するステップと、
    前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
    前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
    前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
    前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
    前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
    前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
    をコンピュータに実行させるためのプログラム。
  11. 位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
    前記ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、
    前記ウェアラブル端末を装着するユーザの眼前に配置され、前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
    前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
    前記発話音声取得部を介して取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信する端末側通信部とを備え、
    前記表示制御部は、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ウェアラブル端末を装着する前記ユーザの視線の向きを検出するためのセンサにより検出された前記ユーザの視線の向きの変化に応じて変化させ、
    前記サーバは、
    前記端末側通信部から受信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
    前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
    取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
    ことを特徴とする検査支援システム。
  12. 眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
    前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
    前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
    前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
    前記ウェアラブル端末が、前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
    前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
    前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
    前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
    前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
    前記サーバが、前記検査対象物の検査結果情報を登録するステップと、
    前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップと、
    ことを特徴とする検査支援方法。
  13. 眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、前記ウェアラブル端末のコンピュータに実行させるためのプログラムであって、
    前記位置情報取得部により現在位置を取得するステップと、
    前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
    前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
    前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
    前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
    前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
    をコンピュータに実行させるためのプログラム。
  14. 位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
    前記ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、
    前記ウェアラブル端末を装着するユーザの眼前に配置され、前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
    前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
    前記発話取得部により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
    前記音声認識処理部により音声認識された前記検査対象物の検査結果情報を前記サーバに送信する端末側通信部とを備え、
    前記表示制御部は、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ウェアラブル端末を装着する前記ユーザの視線の向きを検出するためのセンサにより検出された前記ユーザの視線の向きの変化に応じて変化させ、
    前記サーバは、
    前記端末側通信部から受信された前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
    取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
    ことを特徴とする検査支援システム。
  15. 眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
    前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
    前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
    前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
    前記ウェアラブル端末が、前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
    前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
    前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
    前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
    前記ウェアラブル端末が、前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
    前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報を登録するステップと、
    前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップとを有する、
    ことを特徴とする検査支援方法。
  16. 眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、前記ウェアラブル端末のコンピュータに実行させるためのプログラムであって、
    前記位置情報取得部により現在位置を取得するステップと、
    前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
    前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
    前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
    前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
    前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
    前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
    前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
    をコンピュータに実行させるためのプログラム。
JP2018040023A 2018-03-06 2018-03-06 検査支援システムおよび検査支援方法、ならびにプログラム Active JP6412665B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018040023A JP6412665B1 (ja) 2018-03-06 2018-03-06 検査支援システムおよび検査支援方法、ならびにプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018040023A JP6412665B1 (ja) 2018-03-06 2018-03-06 検査支援システムおよび検査支援方法、ならびにプログラム

Publications (2)

Publication Number Publication Date
JP6412665B1 true JP6412665B1 (ja) 2018-10-24
JP2019153238A JP2019153238A (ja) 2019-09-12

Family

ID=63920639

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018040023A Active JP6412665B1 (ja) 2018-03-06 2018-03-06 検査支援システムおよび検査支援方法、ならびにプログラム

Country Status (1)

Country Link
JP (1) JP6412665B1 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004173108A (ja) * 2002-11-21 2004-06-17 Central Res Inst Of Electric Power Ind センサ情報のデータベース化方法および点検支援システム並びに点検支援用プログラム
JP2008062733A (ja) * 2006-09-06 2008-03-21 Railway Technical Res Inst 鉄道設備保守検査支援システム及びプログラム
JP2015102880A (ja) * 2013-11-21 2015-06-04 三菱電機株式会社 作業支援システム
JP2016177800A (ja) * 2015-03-20 2016-10-06 東洋ビルメンテナンス株式会社 点検管理装置、点検支援システム、点検管理方法、点検支援方法、点検管理プログラムおよび点検支援プログラム
JP2017021401A (ja) * 2015-07-07 2017-01-26 東芝エレベータ株式会社 メンテナンス支援システムおよびメンテナンス支援情報処理方法
JP2018005661A (ja) * 2016-07-05 2018-01-11 株式会社サイバー・ラボ 点検システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004173108A (ja) * 2002-11-21 2004-06-17 Central Res Inst Of Electric Power Ind センサ情報のデータベース化方法および点検支援システム並びに点検支援用プログラム
JP2008062733A (ja) * 2006-09-06 2008-03-21 Railway Technical Res Inst 鉄道設備保守検査支援システム及びプログラム
JP2015102880A (ja) * 2013-11-21 2015-06-04 三菱電機株式会社 作業支援システム
JP2016177800A (ja) * 2015-03-20 2016-10-06 東洋ビルメンテナンス株式会社 点検管理装置、点検支援システム、点検管理方法、点検支援方法、点検管理プログラムおよび点検支援プログラム
JP2017021401A (ja) * 2015-07-07 2017-01-26 東芝エレベータ株式会社 メンテナンス支援システムおよびメンテナンス支援情報処理方法
JP2018005661A (ja) * 2016-07-05 2018-01-11 株式会社サイバー・ラボ 点検システム

Also Published As

Publication number Publication date
JP2019153238A (ja) 2019-09-12

Similar Documents

Publication Publication Date Title
CN111239790B (zh) 一种基于5g网络机器视觉的车辆导航系统
US20200042800A1 (en) Image acquiring system, terminal, image acquiring method, and image acquiring program
CN106289800A (zh) 车辆故障在线求助系统及方法
CN104851142A (zh) 一种基于移动计算的通信线路巡检工具及方法
CN110208739A (zh) 辅助车辆定位的方法、装置、设备和计算机可读存储介质
US10899358B2 (en) Vehicle driver monitoring system and method for capturing driver performance parameters
TWI589839B (zh) 辨別車輛當前位於高架道路或平面道路的方法
US20160005332A1 (en) Method for administering a driving test
WO2019230687A1 (ja) 打音検査端末、打音検査システムおよび打音検査データ登録方法
JP2014137752A (ja) 視覚障害者用の歩行誘導システム、視覚障害者用の歩行誘導方法、サーバ及び該サーバで実行することが可能なコンピュータプログラム
CN106292625A (zh) 车辆故障在线检测系统及方法
JP2019079303A (ja) 道路設備点検システムおよび道路設備点検方法、ならびにそれに使用されるサーバ
JP2017163445A (ja) 点検支援システム、点検支援方法、およびプログラム
JP6412665B1 (ja) 検査支援システムおよび検査支援方法、ならびにプログラム
JP7294381B2 (ja) 情報処理装置、情報処理方法、プログラム
JP2016212767A (ja) 点検支援システムおよび点検支援方法
US20190143926A1 (en) Vehicle management system, inspection information transmission system, information management system, vehicle management program, inspection information transmission program, and information management program
JP2004341182A (ja) 地図誤り情報取得システムおよび地図誤り情報取得方法
CN109426757B (zh) 基于深度学习的驾驶人头部姿态监测方法、系统、介质及设备
CN113759938B (zh) 一种无人车路径规划质量测评方法和系统
JP2018010320A (ja) サーバ装置、端末装置、情報処理方法並びに情報処理システム及び情報処理プログラム
Ihejimba et al. DetectSignal: A cloud-based traffic signal notification system for the blind and visually impaired
JP2019039850A (ja) 鉄道設備モニタリング装置及び鉄道設備モニタリングシステム
JP6224343B2 (ja) サーバ装置、情報処理方法並びに情報処理システム及び情報処理プログラム
JP2022099774A (ja) 情報表示装置、情報表示方法及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180316

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180316

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20180426

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180515

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180717

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180718

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180925

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180928

R150 Certificate of patent or registration of utility model

Ref document number: 6412665

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250