JP2017228030A - 作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラム - Google Patents

Abstract

【課題】高騒音下で実施される検査・点検作業に伴う音声入力において音声認識性能の向上を図ること。【解決手段】管理サーバは、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける受付部と、前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録する辞書登録部と、前記帳票情報と前記辞書とを関連付けて記憶する記憶部と、前記帳票情報を送信する際に対応する辞書とともに送信する送信部とを備えている。【選択図】図２

Description

本発明は、作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラムに関し、特に作業員によるハンズフリーでの検査・点検作業を支援する作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラムに関する。

人の声を文字に置き換えるための音声認識技術が近年飛躍的に進歩している。これに伴い、音声認識技術はコンタクトセンターにおける業務支援、議事録の作成支援、工場やオフィスにおける検査・点検作業の際の音声入力にも応用され始めている。

関連技術として、特許文献１にはシステムが利用者の発話を誤認識した際にも利用者とシステムがスムーズに対話を進めるための音声対話システムが記載されている。

特開２００５−３１６２４７号公報

上記特許文献の全開示内容は、本書に引用をもって繰り込み記載されているものとする。以下の分析は、本発明者らによってなされたものである。

工場やオフィスにおける検査・点検作業では、検査・点検項目（以下、「作業項目」という。）は通常多岐に亘る。したがって、作業者は紙ベースの作業項目のリストを参照しつつ、順次作業を進めて行く必要がある。この場合、作業者は作業項目のリストを参照するために一時的に作業を中断する必要があり、作業効率の低下を招くおそれがある。

また、多数の作業項目を実施する場合には、作業者は各作業項目を実施して結果が得られる都度、作業結果を記録（保存）する必要がある。しかしながら、作業結果を所定の書面に手書きで入力し、または、タブレット、スマートフォン、ノートＰＣなど（以下、「携帯端末」という。）に手作業で入力する場合、作業者は一端作業を中断して入力を行う必要があり、さらに作業効率の低下を招く。

したがって、検査・点検作業を行う場合の作業効率の向上を図るためには、実施すべき作業項目の確認および作業結果の入力を、いずれもハンズフリー（手ぶら）で行うことが望ましい。かかる要望に応える技術として、作業項目を音声で案内しつつ、作業結果を音声入力する技術が実用化されている。

ところで、工場の組み立て（製造）ラインで行われる製品の検査・点検作業では、作業者の周囲の環境は高騒音下である場合も考えられる。このような環境下で作業結果を音声入力した場合、必ずしも作業者が意図した入力結果とならず、正しい入力結果が得られるまで、作業者は発話を繰り返したり、または、音声入力の代わりに手作業で入力し直したりする必要がある。

特許文献１に記載された技術では、システムが誤認識した利用者の発話を修正するために、対話の状態の変化を記録する対話履歴を設け、対話履歴中の情報と予め用意されたテンプレートを用いて利用者の訂正発話を認識するルールを生成し、生成されたルールを用いて利用者の発話が認識された場合に、利用者の発話を訂正発話と見なして誤認識を修正する処理に移行する、といった複雑な処理が必要とされる。また、特許文献１の技術を採用した場合にも、利用者による再度の発話が必要とされる。

このような作業者による再度の音声入力を避けるには、作業環境が高騒音下であっても作業者の音声入力が誤認識される可能性をできるだけ低くすることが望ましい。

そこで、高騒音下で実施される検査・点検作業に伴う音声入力において音声認識性能を向上させることが課題となる。本発明の目的は、かかる課題解決に寄与する作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラムを提供することにある。

本発明の第１の態様に係る管理サーバは、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける受付部と、前記帳票情報に含まれる作業結果候補を作業項目、または帳票情報と関連付けて辞書に登録する辞書登録部と、前記帳票情報と前記辞書とを関連付けて記憶する記憶部と、前記帳票情報を送信する際に対応する辞書とともに送信する送信部とを備えている。

本発明の第２の態様に係る携帯端末は、作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた辞書を取得する通信部と、前記作業項目情報を提示する提示部と、前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識する音声認識部と、音声認識した結果を前記作業項目情報に対する作業結果として保持する記憶部と、を備えている。

本発明の第３の態様に係る作業支援システムは、上記管理サーバと上記携帯端末を備えている。

本発明の第４の態様に係る作業支援方法は、管理サーバが、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けるステップと、前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録するステップと、前記帳票情報と前記辞書とを関連付けて記憶するステップと、前記帳票情報を送信する際に対応する辞書とともに送信するステップと、を含む。

本発明の第５の態様に係る作業支援方法は、携帯端末が、作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた辞書を取得するステップと、前記作業項目情報を提示するステップと、前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識するステップと、音声認識した結果を前記作業項目情報に対する作業結果として保持するステップと、を含む。

本発明の第６の態様に係るプログラムは、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける処理と、前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録する処理と、前記帳票情報と前記辞書とを関連付けて記憶する処理と、前記帳票情報を送信する際に対応する辞書とともに送信する処理と、をコンピュータに実行させる。

本発明の第７の態様に係るプログラムは、作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた辞書を取得する処理と、前記作業項目情報を提示する処理と、前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識する処理と、音声認識した結果を前記作業項目情報に対する作業結果として保持する処理と、をコンピュータに実行させる。

なお、プログラムは、非一時的なコンピュータ可読記録媒体（non-transitory computer-readable storage medium）に記録されたプログラム製品として提供することもできる。

本発明に係る作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラムによると、高騒音下で実施される検査・点検作業に伴う音声入力において音声認識性能を向上させることが可能となる。

一実施形態に係る作業支援システムの構成を例示する図である。 第１の実施形態に係る作業支援システムの構成を例示するブロック図である。 第１の実施形態に係る作業支援システムにおいて管理サーバおよび携帯端末が保持するデータを例示する図である。 第１の実施形態における作業帳票のフォーマット（形式）を例示する図である。 第１の実施形態における作業帳票に記載される選択肢の書式を例示する図である。 第１の実施形態における作業帳票に記載される数値の書式を例示する図である。 第１の実施形態におけるカスタム辞書の作成方法を例示する図である。 第１の実施形態における作業結果ファイルの形式を例示する図である。 第１の実施形態に係る作業支援システムの動作を例示するシーケンス図である。 第１の実施形態に係る作業支援システムの動作を例示するフロー図である。 第２の実施形態に係る作業支援システムの構成を例示するブロック図である。 第２の実施形態における作業帳票のフォーマットを例示する図である。 第３の実施形態における作業帳票のフォーマットを例示する図である。 第３の実施形態における作業帳票のフォーマットを例示する図である。 第４の実施形態に係る作業支援システムの構成を例示するブロック図である。 第４の実施形態に係る作業支援システムにおいて管理サーバおよび携帯端末が保持するデータを例示する図である。 第４の実施形態に係る作業支援システムの動作を例示するシーケンス図である。 第５の実施形態に係る作業支援システムにおいて管理サーバおよび携帯端末が保持するデータを例示する図である。 第５の実施形態に係る作業支援システムの動作を例示するシーケンス図である。

はじめに、一実施形態の概要について説明する。なお、この概要に付記する図面参照符号は、専ら理解を助けるための例示であり、本発明を図示の態様に限定することを意図するものではない。

図１は、一実施形態に係る作業支援システムの構成を例示する図である。図１を参照すると、作業支援システムは、管理サーバ１と携帯端末２（例えば作業者が携行するスマートフォン）を備えている。なお、本発明における作業支援システムは、例えば、組立て作業、梱包作業、搬入作業、計測作業など、作業指示書に従って作業する作業に対する作業支援システムである。

図２は、図１に示す作業支援システムにおける管理サーバ１および携帯端末２の構成を例示するブロック図である。図２を参照すると、管理サーバ１は、作業項目を表す作業項目情報（例えば図４の作業項目、作業内容（読み上げ用））と作業結果候補（例えば図４の入力種別、選択肢）とを関連付けて保持する帳票情報を受け付ける受付部（例えば通信部１１）と、帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録する辞書登録部１３と、帳票情報と辞書とを関連付けて記憶する記憶部１２と、帳票情報を送信する際に対応する辞書とともに（例えば携帯端末２に向けて）送信する送信部（例えば通信部１１）と、を備えている。一方、携帯端末２は、作業項目を表す作業項目情報を含む帳票情報と、帳票情報と関連付けられた辞書を取得する通信部２１と、作業項目情報を提示（例えば表示、読み上げ）する提示部２３と、作業項目情報に対して受け付けた音声入力を、辞書を用いて音声認識する音声認識部２４と、音声認識した結果を作業項目情報に対する作業結果として保持（例えば図８）する記憶部２２と、を備えている。

一実施形態に係る作業支援システムでは、管理サーバは各作業項目の作業結果として作業者が音声入力する入力候補（作業結果候補）を辞書（例えば音声認識辞書）に登録する。また、携帯端末は管理サーバから取得した当該辞書を用いて音声認識を行う。このとき、携帯端末による音声認識において入力候補が辞書に登録された候補（文字列、数式等）に限定されるため、誤認識が生じる可能性を著しく低下させることが可能となる。したがって、一実施形態の作業支援システムによると、作業員が高騒音下で実施する作業に伴う音声入力において、音声認識性能を向上させることが可能となる。

また、一実施形態に係る作業支援システムによると、作業開始前の事前準備として、現場管理者が作業項目と作業結果の入力候補とを関連付けた帳票を管理サーバに登録するだけでよい。したがって、一実施形態の作業支援システムによると、システムのハードウェア・ソフトウェア構成に何ら変更を加えることなく、帳票の記載内容を変更するだけで、さまざまな業種における多様な検査・点検作業に本システムを適用することができる。

＜実施形態１＞
次に、第１の実施形態に係る作業支援システムについて、図面を参照して説明する。

［構成］
図２は、本実施形態に係る作業支援システムの構成を例示するブロック図である。図２を参照すると、作業支援システムは管理サーバ１と携帯端末２を備えている。図２には、作業支援システムの管理サーバ２にアクセス可能な管理者端末３も併せて示す。

図３は、管理サーバ１および携帯端末２が保持するデータを例示する図である。図３を参照すると、管理サーバ１の記憶部１２はテンプレート、作業帳票、カスタム辞書、音声認識辞書、作業者ファイル、および、作業結果ファイルを記憶する。一方、携帯端末２の記憶部２２は作業帳票、音声認識辞書、および、作業結果ファイルを記憶する。なお、これらの各ファイルの詳細については後述する。

また、図２には図示しないものの、携帯端末２はヘッドセットと無線または有線で接続され、携帯端末２からの音声出力はヘッドセットのヘッドホンを介して行い、携帯端末２への音声入力はヘッドセットのマイクを経由して行うようにしてもよい。

管理サーバ１は、作業項目と作業結果の入力候補とを関連付けて保持する作業帳票を受け付け、作業帳票に含まれる入力候補を音声認識用の音声認識辞書に登録する。

携帯端末２は、検査・点検作業を実施する作業者が携行する端末（例えばスマートフォン）である。携帯端末２は管理サーバ１から作業帳票と音声認識辞書を取得し、作業帳票に含まれる作業項目を実施する際に受け付けた音声入力を、音声認識辞書を用いて音声認識し、音声認識した結果を作業項目に対する作業結果として保持する。

管理者端末３は、検査・点検作業を管理する管理者が操作する端末（例えばＰＣ（Personal Computer、パーソナルコンピュータ））である。管理者端末３は管理サーバ１への作業帳票の登録、および、携帯端末２が管理サーバ１にアップロードした作業結果ファイルの参照を行う。

はじめに、管理サーバ１の詳細な構成について説明する。図２を参照すると、管理サーバ１は通信部１１、記憶部１２および辞書登録部１３を備えている。

通信部１１は、管理者端末３の要求に応じて作業帳票およびカスタム辞書のテンプレートを管理者端末３に送信する。また、通信部１１は管理者端末３から記載済の作業帳票およびカスタム辞書を受け付け、受け付けた作業帳票およびカスタム辞書を記憶部１２（図３）に保持する。さらに、通信部１１は携帯端末２から作業者の登録を受け付けると、受け付けた作業者名を記憶部１２に保持する。また、通信部１１は携帯端末２に向けて、作業帳票と音声認識辞書を送信する。さらに、通信部１１は携帯端末２から作業結果ファイルがアップロードされると、受け付けた作業結果ファイルを記憶部１２に蓄積する。また、通信部１１は管理者端末３からの閲覧要求に応じて作業結果ファイルを管理者端末３に送信する。

辞書登録部１３は、作業帳票に含まれる入力候補（入力種別および選択肢）を音声認識用の音声認識辞書として登録する。図４は、本実施形態における作業帳票のフォーマットを例示する図である。

図４を参照すると、作業帳票は作業項目、作業内容（読み上げ用）、入力種別（種別情報ともいう。）、選択肢、最小値、および最大値を保持している。作業帳票が保持する情報を作業帳票情報という。作業項目は、検査・点検作業に含まれる作業項目の名称を表す。作業内容（読み上げ用）は、作業実施時に作業内容を音声案内する際に読み上げられる。入力種別は、作業結果を入力する形式を表す。ここでは、一例として、入力種別は、選択式、数値、カスタム、または、コード読み取りのいずれかとする。選択肢の欄には、入力種別に応じて入力語句の候補が指定される。なお、作業項目および／または作業内容（読み上げ用）を「作業項目情報」という。また、入力種別および選択肢によって指定される入力語句の候補を「入力候補」（作業結果候補ともいう。）と呼ぶ。最小値および最大値の欄には、入力候補が数値である場合に想定される数値の最小値および最大値を指定する。

入力種別を「選択式」とした場合、選択肢の欄には、入力候補である語句とその読みが指定される。図５は、選択肢の書式と記入例を示す。図５に示すように、選択肢の欄には、入力語句とその読みの組み合わせが指定される。なお、１つの入力語句に対して、複数通りの読みを対応付けることも可能である。

これにより、作業者の発話に特徴（例えば作業者の年齢、出身地に応じた特徴、発音の癖など）がある場合や高騒音下であっても、作業者による音声入力が誤認識される可能性を低減することが可能となる。辞書登録部１３は、選択肢に指定された入力語句と読み（１または２以上）との組み合わせを音声認識辞書に登録する。

一方、入力種別を数値とする場合、入力種別の欄には入力候補である数値の書式を指定し、選択肢の欄は空欄とする。図６は、数値の書式の指定方法を例示する図である。数値の書式として「マイナス（−）」を指定すると、正数および負数の双方を指定することができる。また、整数部桁数および小数部桁数の箇所には、それぞれ整数部および小数部の桁数を指定する。辞書登録部１３は、数値の書式に応じた数値の読みのパターンを音声認識辞書に登録する。

入力候補が数値である場合、所定の範囲の数値に対する音声認識辞書を単純に作成すると、音声認識辞書を定義するために煩雑な入力作業が必要となる。例えば３ケタの整数が入力候補の場合、想定されるあらゆるパターンの数値（０〜９９のすべて）の読み（「ぜろ」〜「きゅうひゃくきゅうじゅうきゅう」）について音声認識辞書を作成する必要がある。しかし、本実施形態によると、管理者は数値の書式を作業帳票に指定するだけで、所定の桁数、小数点位置、符号を有する数値のあらゆるパターンについて容易に音声認識辞書を定義することが可能となる。

次に、入力種別がカスタムの場合について説明する。入力種別がカスタムの場合、入力種別の欄には「カスタム」を指定し、選択肢の欄にはカスタム辞書に定義したルール名を記載する。図７は、カスタム辞書の作成方法を説明するための図である。カスタム辞書では、図７に示すルールに従って入力語句の書式を指定することができる。

例えば、装置型番が１文字の英字と３ケタの数値から成る場合には、図７に示すカスタム辞書を作成することにより、装置型番に対する入力候補の語句（A000〜Z999）とその読みを指定することが可能となる。このとき、辞書登録部１３は、カスタム辞書に定義されたルールに基づいて生成される入力語句のあらゆる組み合わせについて、語句とその読みを音声認識辞書に登録する。

かかる構成によると、入力語句が数値のみならず、文字と数値を含むものであっても音声認識辞書を容易に作成することができる。すなわち、入力候補が所定の書式に従う場合（例えば、装置や製品の型番など）、管理者はカスタム辞書に対してわずかな入力作業を行うだけで、すべてのパターンの入力候補に対する音声認識辞書を定義することが可能となる。

次に、携帯端末２の詳細な構成について説明する。図２を参照すると、携帯端末２は通信部２１、記憶部２２、提示部２３、音声認識部２４、および、読取部２５を備えている。

通信部２１は、携帯端末２を用いて検査・点検作業を実施する作業者名を管理サーバ１に送信する。また、通信部２１は管理サーバ１が管理者端末３から受け付けた作業帳票と、管理サーバ１が生成した音声認識辞書を管理サーバ１から取得し、取得した作業帳票および音声認識辞書を記憶部２２に保持する。さらに、通信部２１は、検査・点検作業を実施して得られた作業結果ファイルを管理サーバ１にアップロードする。

図４に例示するように、作業帳票は作業項目と作業項目の内容を表す作業内容を関連付けて保持している。提示部２３は、作業項目を実施する際に作業項目名を携帯端末２のディスプレイに表示するとともに、作業項目の内容を示す作業内容を読み上げる（音声出力する）。例えば、図４に示す作業帳票の作業項目「装置・汚れ」を実施する際、提示部２３は「装置・汚れ」を携帯端末２のディスプレイに表示するとともに「装置の周囲に汚れは」という音声案内を行う。

かかる構成によると、作業者は実施すべき作業項目をハンズフリーのまま把握することが可能となる。また、「作業項目」をそのまま音声出力する代わりに、作業項目において実施すべき作業内容を具合的に説明する「作業内容（読み上げ用）」を音声案内することで、作業者はスムーズかつ的確に作業を進めることができる。これにより、検査・点検作業の効率を大幅に向上させることが可能となる。

音声認識部２４は、作業帳票に含まれる作業項目を実施する際に受け付けた音声入力を、記憶部２２が保持する音声認識辞書を用いて音声認識する。また、音声認識部２４は、音声認識した結果を、当該作業項目に対する作業結果として記憶部２２に記録する。

例えば、音声認識部２４は、図４に示す作業帳票の作業項目「装置・汚れ」を実施する際に作業者が発話した音声が、音声認識辞書に蓄積された「かくにんかんりょう」および「よごれあり」のいずれに近似するかを判定し、当該作業項目に対する作業結果の入力語句が「確認完了」または「汚れあり」のいずれであるかを決定する。一例として、図４に示す作業項目「装置・汚れ」に対して音声認識部２４が判定した入力語句が「作業完了」である場合、図８に示すように作業結果ファイルの作業結果に反映され、記憶部２２に蓄積される。

また、提示部２３は、音声認識部２４が認識した入力語句を作業者に音声で通知（復唱）してもよい。音声認識部２４が認識した入力語句と作業者が意図した入力語句とが異なる場合、作業者は携帯端末２に所定の操作（例えば「前に戻る」旨の音声入力、携帯端末２に対するタップ操作など）を行い、これに応じて携帯端末２は入力語句を再度受け付ける（例えば音声入力、ソフトキー入力）ようにしてもよい。かかる構成によると、作業者が意図していない入力語句が作業結果ファイルに反映されること（すなわち入力ミス）を防ぐことできる。

なお、携帯端末２が入力語句を手動(画面タッチ)で受け付ける際の動作を次のようにしてもよい。具体的には、入力種別が「選択式」の場合、携帯端末２は音声認識辞書に定義された選択肢の情報に従って、点検結果入力画面の下部に結果を手動で入力するプルダウンメニュー（例えば「汚れあり」等）を表示する。同様に、入力種別が「数値」の場合、携帯端末２の画面をタッチすると「数値入力用ソフトキーボード」を自動で起動し、それ以外の入力種別の場合、通常の「ソフトキーボード」を起動する。かかる構成によると、音声認識が不可能な高騒音下や騒音が偶発的に非常に大きくなった場合であっても、シームレスに作業結果の入力を行うことができる。

読取部２５は入力候補が作業対象物の識別子（識別情報）である場合に自動的に起動され、当該識別子を読み取る。具体的には、図４の作業帳票の作業項目「装置ＩＤ」のように、入力種別が「コード読み取り」の場合、読取部２５は携帯端末２に設けられたカメラを起動して、検査・点検対象の装置（または製品）に付されたＱＲコード（登録商標）、バーコードなどを読み取る。

一例として、図４に示す作業項目「装置ＩＤ」に対して読取部２５が読み取った装置の識別子が「ABC5678」である場合、図８に示すように作業結果ファイルの作業結果に反映され、記憶部２２に蓄積される。

なお、作業者が携帯端末２とともに、専用の（バーコードなど）読取機器を携行する場合には、読取部２５は読取機器と無線通信して作業対象物の識別子を取得するようにしてもよい。なお、読取部２５が識別子を取得する方法はバーコードなどの読み取りに限定されない。例えば、読取部２５は対象物に付されたタグまたはＩＣチップから、近距離無線通信（ＮＦＣ：near field radio communication）を用いて識別子を取得してもよい。

さらに、携帯端末２は計時部（非図示）を用いて各作業項目を実施するのに要した時間を計測し、計測した時間を作業項目と関連付けて記録してもよい。図８を参照すると、作業結果ファイルには、作業者および作業項目と関連付けて、各作業項目を実施するのに要した時間が蓄積される。図８に示す例では、作業項目「装置・汚れ」について２０秒の作業時間を要したことが分かる。このように、作業者および作業項目ごとに作業時間を取得し、これらを分析することにより検査・点検作業の改善および効率化に向けた検討を行うこともできる。

図４に例示するように、作業項目に対する入力種別が数値の場合、作業帳票はさらに入力候補の数値の最小値と最大値を作業項目に関連付けて保持していてもよい。この場合、音声認識部２４が認識した入力語句が最小値を下回るとき、または、最大値を上回るとき、提示部２３はその旨の通知（警告）を出力（音声、表示、振動など）する。また、携帯端末２は、例えば音声入力、キー入力などにより入力語句を再度受け付けるようにしてもよい。かかる構成によると、作業者による計器（電圧計など）の読み取りミスや入力ミスを防ぐことでき、装置や計器に異常が生じた際には、早期に発見することが可能となる。

［動作］
次に、本実施形態の作業支援システムの動作について、図９のシーケンス図および図１０のフロー図を参照して説明する。

図９を参照すると、管理者端末３は作業帳票のテンプレートと、必要に応じてカスタム辞書のテンプレートを管理サーバ１に要求する。管理サーバ１の通信部１１はこれらのテンプレートを記憶部１２から読みだして管理者端末３に送信する（ステップＳ１）。ここで、作業帳票のテンプレートは、図４に例示した作業帳票の２行目以降を空欄としたものであってもよい。また、カスタム辞書のテンプレートは、図７に示す記載例を例示したファイルとしてもよい。

管理者は、ダウンロードしたテンプレートを用いて作業帳票、および、必要に応じてカスタム辞書を作成する（ステップＳ２）。ここでは、一例として、図４に示す作業帳票と、図７に示す＜装置型番＞を定義するカスタム辞書が作成されたものとする。管理者端末３は、管理者が作成した作業帳票およびカスタム辞書を管理サーバ１にアップロードする（ステップＳ３）。

管理サーバ１の通信部１１は管理者端末３から送信された作業帳票およびカスタム辞書を記憶部１２に保存する。また、辞書登録部１３は作業帳票に含まれる入力候補（例えば、選択肢、数値の書式、カスタム辞書など）に基づいて、入力候補となる語句とその読みを音声認識辞書に登録する（ステップＳ４）。

携帯端末２の通信部２１は、携帯端末２を用いて検査・点検作業を実施する作業者名を管理サーバ１に送信する（ステップＳ５）。管理サーバ１の通信部１１は携帯端末２から作業者の登録を受け付け、受け付けた作業者名を記憶部１２の作業者ファイルに保持する（ステップＳ６）。

検査・点検作業を開始する際、携帯端末２の通信部２１は管理サーバ１が管理者端末３から受け付けた作業帳票と、管理サーバ１が生成した音声認識辞書を管理サーバ１から取得し、取得した作業帳票および音声認識辞書を記憶部２２に保持する（ステップＳ７）。このとき、携帯端末２は作業を開始した旨を管理サーバ１に通知し、これに応じて管理サーバ１は作業帳票のリストを携帯端末２に提示し、携帯端末２によって選択された作業帳票を携帯端末２に送信するようにしてもよい。

次に、現場の作業者は携帯端末２を用いて、検査・点検作業を実施する（ステップＳ８）。図１０は、図９の作業実施（ステップＳ８）の際の携帯端末２の動作を例示するフロー図である。

図１０を参照すると、例えば、図４に示す作業帳票の場合、最初の作業項目として「装置・汚れ」が選択される（ステップＡ１）。このとき、提示部２３は「装置・汚れ」という文字を携帯端末２のディスプレイに表示しつつ、「装置の周囲に汚れは」という音声案内を行う（ステップＡ２）。

ここでは、作業者が装置の周囲を観察し、汚れがないことを確認して、例えば「かくにんしゅうりょう」と発声したとする。すると、音声認識部２４は、図４に示す作業帳票の作業項目「装置・汚れ」を実施する際に作業者が発した音声入力が音声認識辞書に蓄積された「かくにんかんりょう」および「よごれあり」のうちの「かくにんかんりょう」に近似するものと判定し、当該作業項目に対する作業結果の入力語句が「確認完了」であると決定する（ステップＡ３）。また、提示部２３は、音声認識部２４が認識した入力語句「確認完了」を音声で作業者に復唱する（ステップＡ４）。

作業者から訂正を行うための所定の操作（音声入力、タップ操作など）が携帯端末２に対して行われた場合（ステップＡ５のＹｅｓ）、ステップＡ３に戻り、作業からの音声入力（またはテキスト入力）を再度受け付ける。

一方、作業者から訂正を行うための所定の操作が携帯端末２に対して行われない場合（ステップＡ５のＮｏ）、図８に示すように、作業項目「装置・汚れ」について、作業結果「確認完了」と作業時間「２０秒」が作業結果ファイルに蓄積される（ステップＡ６）。

次に、提示部２３は作業帳票に未実施の作業項目が残っているかどうかを判定する（ステップＡ７）。未実施の作業項目が存在しない場合（ステップＡ７のＮｏ）、検査・点検作業を終了する。

一方、未実施の作業項目が存在する場合（ステップＡ７のＹｅｓ）、提示部２３は次の作業項目（例えば「装置・ねじ緩み」）を選択し（ステップＡ８）、選択した作業項目についてディスプレイ表示および音声案内を行う（ステップＡ２）。

以上の動作を繰り返すことで、作業帳票に含まれる作業項目が順次実施される。未実施の作業項目が無くなると（ステップＡ７のＮｏ）、検査・点検作業は終了する。ここでは、図４に示す作業帳票に対して、図８に示す作業結果ファイルが得られたものとする。

図９の説明に戻る。作業帳票に含まれるすべての作業項目が完了すると、携帯端末２の通信部２１は作業結果ファイル（図８）を管理サーバ１にアップロードする（図９のステップＳ９）。管理サーバ１の通信部１１は、受信した作業結果ファイルを記憶部１２に記録する（ステップＳ１０）。

管理者は、管理者端末３を用いて管理サーバ１から作業結果ファイル（図８）をダウンロードし（ステップＳ１１）、検査・点検作業が問題なく行われたかどうかを確認する（ステップＳ１２）。

［効果］
本実施形態に係る作業支援システムでは、管理サーバは各作業項目の作業結果として作業者が音声入力する入力候補を作業帳票として受け付け、受け付けた作業帳票に含まれる入力候補を音声認識用の音声認識辞書に事前に登録する。また、携帯端末は管理サーバから取得した音声認識辞書を用いて作業者の音声入力に対する音声認識を行う。かかる構成によると、入力候補が絞られるため雑音を拾うおそれがなくなる。したがって、本実施形態によると、工場のような騒音環境における音声入力の認識率が高まるという格別な効果がもたらされる。

すなわち、本実施形態では、作業項目と作業結果の入力候補とが関連付けられているため、作業項目ごとに音声認識の対象となる単語（認識単語）に限定（ないし制約）を課すように携帯端末側で制御することができ、これにより音声認識性能が向上する。また、本実施形態によると、入力候補において典型的な発話のブレ(例えばおっけー/おーけー、じゃんぷ/じゃん等)を定義することができ、発話のブレが存在する場合であっても高い認識率を確保することができる。

また、本実施形態に係る作業支援システムによると、作業開始前の事前準備として、現場管理者などが作業項目と作業結果の入力候補とを関連付けた帳票を管理サーバに登録するのみでよい。したがって、かかる作業支援システムによると、さまざまな分野の検査・点検作業に対してシステムを適用でき、作業項目を容易に変更することもできる。

さらに、本実施形態では、数値、カスタムなどの入力種別を設けたことにより、管理者は作業帳票やカスタム辞書に対するわずかな編集作業を行うだけで、所定の形式の数値、文字列のあらゆる組み合わせ（例えば英字と数字の並び）について、音声認識辞書を定義することができる。

＜実施形態１の変形例＞
第１の実施形態において、作業帳票に複数の作業項目が含まれる場合（図４参照）、管理サーバ１の辞書登録部１３は、図３に示す音声認識辞書を、作業項目ごとの辞書の集合として生成してもよい。具体的には、管理サーバ１において、辞書登録部１３は、作業帳票に複数の作業項目が含まれる場合、各作業項目に関連付けられた作業結果候補を、作業項目ごとの辞書に登録し、通信部１１は、作業帳票を携帯端末２に送信する際、作業帳票に含まれる各作業項目に対応する各辞書とともに送信する。一方、携帯端末２において、通信部２１は、作業帳票に複数の作業項目が含まれる場合、作業帳票を取得する際、各作業項目に関連付けられた作業項目ごとの辞書を取得し、音声認識部２４は、音声入力を、各作業項目ごとの辞書を用いて音声認識する。かかる構成によると、音声認識の際に作業項目に対応する辞書を参照することで、音声認識の認識率を向上させることができる。

なお、辞書登録部１３は、作業結果候補を作業項目と関連付けて辞書に登録する代わりに、作業結果候補を作業帳票と関連付けて辞書に登録してもよい。

さらに、通信部２１は、複数の作業帳票を管理サーバ１からダウンロードするようにしてもよい。このとき、携帯端末２は、音声認識部２４を利用することで、作業帳票名の音声発話を認識して、ダウンロード済みの複数の作業帳票の中から所望の作業帳票を選択可能としてもよい。

＜実施形態２＞
次に、第２の実施形態に係る作業支援システムについて、図面を参照して説明する。本実施形態の作業支援システムは、作業者の検査・点検作業に対する習熟度（例えば、熟練者、初心者など）を判定し、習熟度に応じて作業内容の案内および入力候補を切り替える。以下では、主に本実施形態と第１の実施形態との差異点について説明する。なお、ここでは、簡単のため、習熟度を２段階（初心者と熟練者）とする。ただし、さらに多くの段階の習熟度を設定可能としてもよい。

［構成］
図１１は、本実施形態に係る作業支援システムの構成を例示するブロック図である。図１１を参照すると、本実施形態の携帯端末２は、さらに習熟度判定部２６を備えている点で、第１の実施形態の携帯端末２（図２）と相違する。また、本実施形態では、作業帳票のフォーマットが第１の実施形態とは異なる。

図１２は、本実施形態における作業帳票のフォーマットを例示する。本実施形態の作業帳票は、熟練者用および初心者用の「作業内容（読み上げ用）」を有する。また、本実施形態の作業帳票は、熟練者用および初心者用の「選択肢」を有する。なお、本実施形態の作業帳票では、「作業内容（読み上げ用）」および「選択肢」の双方について、習熟度に応じた記入を可能としたが、これらの一方についてのみ習熟度に応じた記入を可能としてもよい。

習熟度判定部２６は、作業者ごとに作業帳票を用いて実施した検査・点検作業の回数を記録する。また、習熟度判定部２６は、当該作業帳票を用いた作業者の作業回数が所定の回数以上となった場合、作業者の習熟度を「熟練者」と判定し、それ以外の場合、「初心者」と判定する。なお、習熟度判定部２６は、作業者の習熟度に対する指定（例えば作業者による携帯端末２への習熟度の入力、管理者による管理サーバ１への習熟度の登録と携帯端末２への通知など）を受け付けた場合、作業者は指定された習熟度を有するものと見なしてもよい。

提示部２３は、習熟度判定部２６の判定結果に応じて、作業項目の内容を示す作業内容を読み上げる（音声出力する）。

例えば、図１２に示す作業帳票の作業項目「装置・ねじ緩み」を実施する際、作業者が「熟練者」である場合、提示部２３は「装置・ねじ緩み」を携帯端末２のディスプレイに表示しつつ「ねじ確認」という音声案内を行う。一方、作業項目「装置・ねじ緩み」を実施する際、作業者が「初心者」である場合、提示部２３は「装置・ねじ緩み」を携帯端末２のディスプレイに表示しつつ「装置のねじに緩みは、８か所確認」という音声案内を行う。

さらに、音声認識部２４は、作業帳票に含まれる作業項目を実施する際に受け付けた音声入力を、作業者の習熟度に応じて指定された選択肢に基づいて音声認識する。

例えば、音声認識部２４は、図１２に示す作業帳票の作業項目「装置・外観異常」を実施する際、作業者が熟練者である場合、作業者が発話した音声が音声認識辞書に蓄積された「かくにんかんりょう」、「きず」、「よごれ」、「はそん」、「おいるふちゃく」のいずれに近似するかを判定し、当該作業項目に対する作業結果の入力語句が「確認完了」、「傷」、「汚れ」、「破損」、「オイル付着」のいずれであるかを決定する。一方、音声認識部２４は、作業項目「装置・外観異常」を実施する際、作業者が初心者である場合、作業者が発話した音声が、音声認識辞書に蓄積された「かくにんかんりょう」、「いじょうあり」のいずれに近似するかを判定し、当該作業項目に対する作業結果の入力語句が「確認完了」、「異常あり」のいずれであるかを決定する。

［動作］
本実施形態の作業支援システムの動作は、作業実施（図９のステップＳ８）の際、携帯端末２の習熟度判定部２６が作業者の習熟度を判定する点と、判定結果に応じて作業内容の音声案内（図１０のステップＡ２）および音声認識（図１０のステップＡ３）が行われる点で、第１の実施形態と相違する。ただし、その他の動作については、本実施形態の動作は第１の実施形態の動作と同様である。

［効果］
本実施形態では、作業者の習熟度を判定し、判定した習熟度に応じた作業内容の音声案内および作業結果の音声入力を行うようにした。かかる構成によると、熟練者に対しては相対的に短い（簡潔な）メッセージで作業内容を案内することができ、熟練者による作業効率をさらに向上させることができる。一方、初心者に対してはより詳細な作業内容を案内することで、作業手順の誤りを防ぐことが可能となる。

また、作業者の習熟度に応じた入力候補の選択肢を設けたことにより、初心者による検査・点検作業からは大まかな作業結果を取得し、熟練者による検査・点検作業から詳細な作業結果を収集することもできる。

＜実施形態２の変形例＞
第２の実施形態について、以下の変形が可能である。具体的には、習熟度判定部２６は、習熟度を作業帳票単位で判定する代わりに、作業者の作業項目ごとの習熟度を判定してもよい。この場合、提示部は、判定した習熟度に基づいて、読み上げ時の指示内容または画像もしくは動画による作業指示の提示内容を変更することが好ましい。また、習熟度判定部２６は、複数の作業者について同一の作業項目の作業時間を比較することで、各作業者の当該作業項目に対する習熟度を判定してもよい。さらに、習熟度判定部２６は、判定した習熟度を作業者に提示してもよい。

また、携帯端末２は、作業項目ごとに設定された標準時間（すなわち作業者が作業項目を実施するのに要する標準的な時間）を過去（例えば別の作業日）にクリアして（すなわち下回って）いた作業者の作業時間が標準時間を超える回数が所定の閾値以上となった場合、当該作業者は疲労状態にあるものと判定する（さらに表示する）疲労度判定部を備えていてもよい。

さらに、習熟度判定部２６は、同一の作業項目に要する作業時間の平均値を測定し、測定した平均値と作業者の作業時間とを比較して、当該作業者の習熟度を判定してもよい。

また、作業者の携帯端末２に、作業項目ごとの作業時間や、作業項目ごとの標準時間との差をフィードバック可能とすることで、作業員に気付きを促すようにしてもよい。具体的には、以下のように実現することが可能である。すなわち、携帯端末２は作業時間の実測値を計測および保持する。また、作業帳票（図４）には、作業項目ごとに標準時間の列を設ける。さらに、作業時間の実測値と標準時間との差を、携帯端末２で計算するか、または、携帯端末２と常時接続された管理サーバ１で計算し、計算した結果を携帯端末２に返却する。なお、作業時間の実測値と標準時間との差が閾値以上である場合、携帯端末２は所定の表示（例えば赤色等）を行うか、または警告音を出す等のアラートを出力し、作業員の気付きを促すようにしてもよい。

＜実施形態３＞
次に、第３の実施形態に係る作業支援システムについて、図面を参照して説明する。本実施形態の作業支援システムでは、作業結果に応じて次に実施する作業項目を検査・点検中に切り替える（条件分岐する）ことを可能とする。以下、本実施形態と第１の実施形態との差分を中心に説明する。

［構成］
本実施形態に係る作業支援システムの構成は、第１の実施形態の作業支援システムの構成（図２）と同様である。ただし、本実施形態と第１の実施形態では、提示部２３の機能、および、作業帳票のフォーマットが相違する。

図１３は、本実施形態における作業帳票の構成を例示する図である。図１３を参照すると、作業帳票は「条件分岐」の欄を有し、第１の作業項目の作業結果に応じて第１の作業項目の次に実施すべき第２の作業項目と第１の作業項目とを関連付けて保持する。

図１３に例示する作業帳票では、作業項目「装置・外観異常」の作業結果として入力された音声が「異常あり」と音声認識された場合、提示部２３は次に実施すべき作業項目として作業項目「装置・異常の原因」を選択する。すなわち、提示部２３は作業項目「装置・異常の原因」を携帯端末２のディスプレイに表示しつつ「装置の外観異常の原因は」という音声案内を行う。

一方、作業項目「装置・外観異常」の作業結果として入力された音声が「確認完了」と音声認識された場合、提示部２３は次に実施すべき作業項目として作業項目「装置型番」を選択する。すなわち、提示部２３は作業項目「装置・異常の原因」をスキップし、作業項目「装置型番」を携帯端末２のディスプレイに表示すると同時に「装置型番は」という音声案内を行う。

図１３に例示した帳票では、作業結果に応じた遷移先（分岐先）の作業項目は同一の作業帳票内に記載されている。一方、図１４に示すように遷移先（分岐先）の作業項目は他の作業帳票に記載された作業項目であってもよい。図１４に例示する作業帳票では、作業帳票Ａの作業項目「装置・外観異常」の作業結果が「異常あり」の場合、提示部２３は次に実施すべき作業項目として作業帳票Ｂの作業項目「装置・異常の原因」を選択する。さらに、作業帳票Ｂの作業項目「装置・異常の原因」が終了すると、提示部２３は次に実施すべき作業項目として作業帳票Ａの作業項目「装置型番」を選択する。

［動作］
本実施形態の作業支援システムの動作は、作業実施（図９のステップＳ８）の際、提示部２３が作業帳票の条件分岐欄に記載された条件に従って次に実施すべき作業項目へと遷移する点で第１の実施形態の動作と相違する。ただし、その他の動作については、本実施形態は第１の実施形態と同様である。

［効果］
本実施形態によると、途中の作業項目の作業結果に応じて、次に実施すべき作業項目を柔軟に切り替えることが可能となる。したがって、作業結果次第では省略し得る作業項目を飛ばして作業を進めることができ、検査・点検作業を効率良く実施することが可能となる。さらに、本実施形態によると、作業結果に応じて複数の作業帳票を切り替えることができる。かかる構成によると、作業の内容に応じて作業項目を分類して複数の作業帳票に分けて管理することができ、管理者による作業帳票の作成および管理が容易となる。

＜実施形態４＞
次に、第４の実施形態に係る作業支援システムについて、図面を参照して説明する。本実施形態の作業支援システムでは、作業者の発話の特徴を事前に学習し、作業者による音声入力の認識率のさらに向上させる。以下、本実施形態と第１の実施形態との差異点を中心に説明する。

［構成］
図１５は、本実施形態に係る作業支援システムの構成を例示するブロック図である。図１５を参照すると、本実施形態の携帯端末２は話者学習部２７をさらに有する点で、第１の実施形態と相違する。図１６は、本実施形態に係る作業支援システムにおいて管理サーバ１および携帯端末２が保持するデータを例示する図である。図１６を参照すると、本実施形態の管理サーバ１および携帯端末２は、作業者による発話の特徴を学習した結果である学習結果ファイルをさらに保持する点で、第１の実施形態と相違する。

話者学習部２７は、複数（一例として５０個程度）の単語とその読みを作業者に提示し、提示した単語を読み上げるように作業者に指示する。話者学習部２７は、例えば作業者が発話した音声を正しく認識できるまで作業者に発話を繰り返させるなどの方法により、作業者の発話の特徴を学習する。学習が完了すると、通信部２１は、学習結果を作業者名と関連付けた学習結果ファイルを管理サーバ１にアップロードする。管理サーバ１の通信部１１は受信した学習結果ファイルを記憶部１２（図１６）に記録する。

また、本実施形態では、検査・点検作業の開始前に、携帯端末２の通信部２１は作業者に対応する学習結果ファイルを管理サーバ１からダウンロードして記憶部２２（図１６）に保持する。さらに、検査・点検作業の実施時に、音声認識部２４は、作業項目を実施する際に受け付けた音声入力を、記憶部２２が保持する音声認識辞書と学習結果ファイルを用いて音声認識する。

［動作］
図１７は、本実施形態に係る作業支援システムの動作を例示するシーケンス図である。ここでは、本実施形態と第１の実施形態の差分について説明する。

本実施形態では、検査・点検作業を実施する前に、話者学習部２７は話者学習を実施する（ステップＳ１３）。また、携帯端末２の通信部２１は作業者名を管理サーバ１に送信する際、学習結果ファイルを併せて送信する（ステップＳ５）。さらに、管理サーバ１の通信部１１は携帯端末２から作業者名と学習結果ファイルの登録を受け付け、受け付けた作業者名と学習結果ファイルを記憶部１２に保持する（ステップＳ６）。

また、検査・点検作業を開始する前に、携帯端末２の通信部２１は作業帳票および音声認識辞書とともに、学習結果ファイルを管理サーバ１から取得し、取得した作業帳票、音声認識辞書および学習結果ファイルを記憶部２２に保持する（ステップＳ７）。

さらに、検査・点検作業（ステップＳ８）に含まれる音声認識（図１０のステップＡ３）の際、音声認識部２４は作業者による音声入力を、記憶部２２が保持する音声認識辞書のみならず学習結果ファイルを用いて音声認識する。

［効果］
本実施形態によると、作業帳票から抽出された入力候補に基づく音声認識辞書のみならず、作業者の発話の特徴を事前に学習した学習結果ファイルを併用して音声認識を行うことにより、高騒音下であっても作業者が意図した通りの音声入力をさらに高い認識率で実現することができる。

＜実施形態５＞
次に、第５の実施形態に係る作業支援システムについて、図面を参照して説明する。本実施形態の作業支援システムでは、作業内容の読み上げおよび音声認識結果の復唱の際における、正しい読みを可能とする。以下、本実施形態と第１の実施形態との差分を中心に説明する。

［構成］
本実施形態に係る作業支援システムの構成は、第１の実施形態の作業支援システムの構成（図２）と同様である。ただし、本実施形態と第１の実施形態では、管理サーバ１および携帯端末２が保持するデータが相違する。図１８は、本実施形態に係る作業支援システムにおいて管理サーバ１および携帯端末２が保持するデータを例示する図である。図１８を参照すると、本実施形態の管理サーバ１および携帯端末２は、単語とその読みとを関連付けた読み上げ辞書をさらに保持する点で、第１の実施形態と相違する。

読み上げ辞書には、特に難読語句、専門用語、業界用語、社内用語などの語句とその読みを登録しておくことが好ましい。また、作業内容（読み上げ用）の読み上げ、および、音声認識結果の復唱の際に正しく読み上げられなかった語句と読みを、随時読み上げ辞書に登録するようにしてもよい。

また、本実施形態では、管理サーバ１の通信部１１は、管理者端末３の要求に応じて作業帳票、カスタム辞書および読み上げ辞書のテンプレートを管理者端末３に送信する。さらに、通信部１１は管理者端末３から記載済の作業帳票、カスタム辞書および読み上げ辞書を受け付け、受け付けた作業帳票、カスタム辞書および読み上げ辞書を記憶部１２（図１８）に保持する。

また、本実施形態では、携帯端末２の通信部２１は作業帳票および音声認識辞書とともに読み上げ辞書を管理サーバ１からダウンロードして記憶部２２（図１８）に保持する。さらに、提示部２３は、作業項目をディスプレイに表示しつつ作業内容を読み上げる際、読み上げ辞書を参照して読み上げを実施する。また、提示部２３は、音声認識部２４が認識した入力語句を復唱する際にも、読み上げ辞書に登録された入力語句の読みを参照して読み上げを行う。

［動作］
図１９は、本実施形態に係る作業支援システムの動作を例示するシーケンス図である。ここでは、本実施形態と第１の実施形態の差分を中心に説明する。

図１９を参照すると、管理者端末３は作業帳票（および必要に応じてカスタム辞書）のテンプレートとともに、読み上げ辞書のテンプレートを管理サーバ１からダウンロードする（ステップＳ１）。読み上げ辞書のテンプレートは、例えば、語句とその読みの定義方法を例示したファイルとしてもよい。

管理者は、ダウンロードしたテンプレートを用いて作業帳票、カスタム辞書および読み上げ辞書を作成する（ステップＳ２）。管理者端末３は管理者が作成した作業帳票、カスタム辞書および読み上げ辞書を管理サーバ１にアップロードする（ステップＳ３）。管理サーバ１の通信部１１は管理者端末３から送信された作業帳票、カスタム辞書および読み上げ辞書を記憶部１２に保存する（ステップＳ４）。

検査・点検作業を開始する前に、携帯端末２の通信部２１は作業帳票および音声認識辞書とともに読み上げ辞書を管理サーバ１から取得し、取得した作業帳票、音声認識辞書および読み上げ辞書を記憶部２２に保持する（ステップＳ７）。

また、検査・点検作業（ステップＳ８）を実施する際、提示部２３は、作業項目をディスプレイに表示しつつ作業内容を読み上げる際、読み上げ辞書を参照して読み上げを実施する（図１０のステップＡ２）。さらに、提示部２３は、音声認識部２４が認識した入力語句を復唱する際、読み上げ辞書に登録された当該語句の読みに基づいて読み上げを行う（図１０のステップＡ４）。

［効果］
本実施形態によると、作業内容や入力候補の選択肢に専門用語などが含まれる場合であっても、正しい読みに従って音声案内や復唱を行うことができ、誤った読みによって作業者を混乱させたり、作業を中断させたりすることなく、検査・点検作業をスムーズに進めることが可能となる。

＜変形例＞
上記実施形態に対してさまざまな変形が可能である。例えば、図４に例示した作業帳票において、さらに、作業項目と当該作業項目において作業対象とされる装置（または製品）の画像（静止画）または動画を関連付けて保持するようにしてもよい。この場合、提示部２３は、作業項目を実施する際に作業項目名と併せて、作業項目に関連付けられた対象装置（または対象製品）の画像または動画を携帯端末２のディスプレイに表示する（図１０のステップＡ２）。また、提示部２３は、当該作業項目の内容を表す作業内容を読み上げるのに伴い、対象装置（または対象製品）の画像または動画を表示中である旨を音声で作業者に通知する（図１０のステップＡ２）ことが好ましい。

かかる変形例によると、作業者は各作業項目において検査・点検の対象とすべき装置（または製品）を容易に把握することができ、迅速かつ正確に作業を進めることができる。

なお、本発明において、下記の形態が可能である。
［形態１］
上記第１の態様に係る管理サーバのとおりである。
［形態２］
前記作業結果候補は、少なくとも作業結果の種別を表す種別情報を含み、前記種別情報は、前記作業結果の種別が少なくとも文字列、数値、カスタム、または、読み取りのいずれか１つであることを表す、
形態１に記載の管理サーバ。
［形態３］
前記受付部は、前記種別が文字列であることを表す前記種別情報と、文字列と、前記文字列に対する１つ以上の読み方を表す文字列の読み情報とを含む前記作業結果候補を保持する帳票情報を受け付け、
前記辞書登録部は、前記文字列に対応付けて、１つ以上の前記文字列の読み情報を前記辞書に登録する、
形態２に記載の管理サーバ。
［形態４］
前記受付部は、前記種別が数値であることを表す前記種別情報と数値の書式とを含む前記作業結果候補を保持する帳票情報を受け付け、
前記辞書登録部は、前記数値の書式に対応付けて、前記数値の読み情報を前記辞書に登録する、
形態１ないし３のいずれか一に記載の管理サーバ。
［形態５］
前記受付部は、前記種別がカスタムであることを表す前記種別情報と、文字列を所定のルールで定義したときのルール名とを含む前記作業結果候補を保持する帳票情報を受け付けるとともに、前記ルール名と前記所定のルールに基づく前記文字列の定義とを対応付けて保持するファイルを受け付け、
前記辞書登録部は、前記ルール名に対応付けて、前記所定のルールに基づく前記文字列の読み情報を前記辞書に登録する、
形態１ないし４のいずれか一に記載の管理サーバ。
［形態６］
前記辞書登録部は、前記帳票情報に複数の前記作業項目情報が含まれる場合、前記各作業項目情報に関連付けられた前記作業結果候補を、前記作業項目情報ごとの辞書に登録し、
前記送信部は、前記帳票情報を送信する際に、前記帳票情報に含まれる前記各作業項目情報に対応する前記各辞書とともに送信する、
形態１ないし５のいずれか一に記載の管理サーバ。
［形態７］
前記送信部は、前記帳票情報と前記帳票情報と関連付けられた辞書を携帯端末に送信し、
前記携帯端末は、前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識するとともに音声認識した結果を前記作業項目情報に対する作業結果として保持する、
形態１ないし６のいずれか一に記載の管理サーバ。
［形態８］
前記携帯端末は、前記作業結果候補に含まれる前記種別情報が読み取りを表す場合に、作業対象物の識別情報を読み取る読取手段を介して受け付けた情報を、前記作業項目情報に対する作業結果として保持する、
形態７に記載の管理サーバ。
［形態９］
前記作業項目情報は、前記作業項目の名称と前記作業項目の内容を表す情報を関連付けて保持し、
前記携帯端末は、前記作業項目の名称を表示するとともに、前記作業項目の内容を表す情報を読み上げる、
形態７または８に記載の管理サーバ。
［形態１０］
前記携帯端末は、前記作業項目情報を提示してから前記音声認識が完了するまでに要した時間を前記作業項目情報と関連付けて記録する、
形態７ないし９のいずれか一に記載の管理サーバ。
［形態１１］
前記受付部は、前記作業項目情報、および／または、前記作業結果候補を、作業者の習熟度別に保持する前記帳票情報を受け付け、
前記辞書登録部は、前記帳票情報に含まれる習熟度別の作業結果候補を作業項目と関連付けて前記辞書に登録し、
前記携帯端末は、前記作業者の習熟度に応じて前記作業項目情報を提示し、かつ／または、前記辞書のうちの前記作業者の習熟度に対応する作業結果候補を用いて前記音声認識を行う、
形態７ないし１０のいずれか一に記載の管理サーバ。
［形態１２］
前記携帯端末は、作業者による前記帳票情報を用いた作業回数を作業者ごとに保持し、前記作業回数に基づいて前記作業者の習熟度を判定し、判定した習熟度を用いて前記作業項目情報の提示、および／または、前記音声認識を行う、
形態１１に記載の管理サーバ。
［形態１３］
前記受付部は、第１の作業項目を表す第１の作業項目情報と前記第１の作業項目の作業結果に応じて前記第１の作業項目の次に実施すべき第２の作業項目を表す第２の作業項目情報とを関連付けて保持する帳票情報を受け付け、
前記携帯端末は、前記第１の作業項目情報に対して受け付けた音声入力を音声認識した結果に応じて、前記第２の作業項目を選択する、
形態７ないし１２のいずれか一に記載の管理サーバ。
［形態１４］
前記受付部は、前記第１の作業項目情報と前記第２の作業項目情報とを関連付けて保持する第１の帳票情報、および、前記第２の作業項目情報を保持する第２の帳票情報を受け付け、
前記携帯端末は、前記第１の作業項目情報に対して受け付けた音声入力を音声認識した結果に応じて、前記第２の作業項目を前記第２の帳票情報から選択する、
形態１３に記載の管理サーバ。
［形態１５］
上記第２の態様に係る携帯端末のとおりである。
［形態１６］
前記通信部は、前記帳票情報に複数の前記作業項目情報が含まれる場合、前記帳票情報を取得する際に、前記各作業項目情報に関連付けられた作業項目ごとの辞書を取得し、
前記音声認識部は、前記音声入力を、前記各作業項目ごとの辞書を用いて音声認識する、
形態１５に記載の携帯端末。
［形態１７］
前記通信部は、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録するとともに、前記帳票情報と前記辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた辞書を取得する、
形態１５に記載の携帯端末。
［形態１８］
前記作業結果候補は、少なくとも作業結果の種別を表す種別情報を含み、前記種別情報は、前記作業結果の種別が少なくとも文字列、数値、カスタム、または、読み取りのいずれか１つであることを表す、
形態１７に記載の携帯端末。
［形態１９］
前記作業結果候補に含まれる前記種別情報が読み取りを表す場合に、作業対象物の識別情報を読み取る読取手段を備え、
前記記憶部は、前記読取手段を介して受け付けた情報を、前記作業項目情報に対する作業結果として保持する、
形態１８に記載の携帯端末。
［形態２０］
前記作業項目情報は、前記作業項目の名称と前記作業項目の内容を表す情報を関連付けて保持し、
前記提示部は、前記作業項目の名称を表示するとともに、前記作業項目の内容を表す情報を読み上げる、
形態１６ないし１９のいずれか一に記載の携帯端末。
［形態２１］
前記記憶部は、前記作業項目情報を提示してから前記音声認識が完了するまでに要した時間を前記作業項目情報と関連付けて記録する、
形態１６ないし２０のいずれか一に記載の携帯端末。
［形態２２］
前記音声認識に失敗した場合、前記作業結果候補を表示し、前記記憶部は、表示した前記作業結果候補のうちの選択された作業結果を前記作業項目情報に対する作業結果として保持する、
形態１８に記載の携帯端末。
［形態２３］
前記通信部は、前記管理サーバから複数の帳票情報を取得し、
前記音声認識部は、前記複数の帳票情報のうちの少なくともいずれかの帳票情報の名称に対する音声発話を認識する、
形態１７に記載の携帯端末。
［形態２４］
前記帳票情報は、前記作業項目情報と作業対象物の静止画または動画とを関連付けて保持し、
前記提示部は、前記作業項目情報とともに前記静止画または動画を表示する、
形態１５に記載の携帯端末。
［形態２５］
形態１ないし１４のいずれか一に記載の管理サーバと、
形態１５ないし２４のいずれか一に記載の携帯端末と、を備える、
ことを特徴とする作業支援システム。
［形態２６］
上記第４の態様に係る作業支援方法のとおりである。
［形態２７］
上記第５の態様に係る作業支援方法のとおりである。
［形態２８］
上記第６の態様に係るプログラムのとおりである。
［形態２９］
上記第７の態様に係るプログラムのとおりである。

なお、上記特許文献の全開示内容は、本書に引用をもって繰り込み記載されているものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態の変更・調整が可能である。また、本発明の全開示の枠内において種々の開示要素（各請求項の各要素、各実施形態の各要素、各図面の各要素などを含む）の多様な組み合わせ、ないし、選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。

１ 管理サーバ
２ 携帯端末
３ 管理者端末
１１ 通信部
１２ 記憶部
１３ 辞書登録部
２１ 通信部
２２ 記憶部
２３ 提示部
２４ 音声認識部
２５ 読取部
２６ 習熟度判定部
２７ 話者学習部

Claims (26)

1. 作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける受付部と、
   前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録する辞書登録部と、
   前記帳票情報と前記辞書とを関連付けて記憶する記憶部と、
   前記帳票情報を送信する際に対応する辞書とともに送信する送信部と、を備える、
   ことを特徴とする管理サーバ。
2. 前記作業結果候補は、少なくとも作業結果の種別を表す種別情報を含み、前記種別情報は、前記作業結果の種別が少なくとも文字列、数値、カスタム、または、読み取りのいずれか１つであることを表す、
   請求項１に記載の管理サーバ。
3. 前記受付部は、前記種別が文字列であることを表す前記種別情報と、文字列と、前記文字列に対する１つ以上の読み方を表す文字列の読み情報とを含む前記作業結果候補を保持する帳票情報を受け付け、
   前記辞書登録部は、前記文字列に対応付けて、１つ以上の前記文字列の読み情報を前記辞書に登録する、
   請求項２に記載の管理サーバ。
4. 前記受付部は、前記種別が数値であることを表す前記種別情報と数値の書式とを含む前記作業結果候補を保持する帳票情報を受け付け、
   前記辞書登録部は、前記数値の書式に対応付けて、前記数値の読み情報を前記辞書に登録する、
   請求項１ないし３のいずれか１項に記載の管理サーバ。
5. 前記受付部は、前記種別がカスタムであることを表す前記種別情報と、文字列を所定のルールで定義したときのルール名とを含む前記作業結果候補を保持する帳票情報を受け付けるとともに、前記ルール名と前記所定のルールに基づく前記文字列の定義とを対応付けて保持するファイルを受け付け、
   前記辞書登録部は、前記ルール名に対応付けて、前記所定のルールに基づく前記文字列の読み情報を前記辞書に登録する、
   請求項１ないし４のいずれか１項に記載の管理サーバ。
6. 前記辞書登録部は、前記帳票情報に複数の前記作業項目情報が含まれる場合、前記各作業項目情報に関連付けられた前記作業結果候補を、前記作業項目情報ごとの辞書に登録し、
   前記送信部は、前記帳票情報を送信する際に、前記帳票情報に含まれる前記各作業項目情報に対応する前記各辞書とともに送信する、
   請求項１ないし５のいずれか１項に記載の管理サーバ。
7. 前記送信部は、前記帳票情報と前記帳票情報と関連付けられた辞書を携帯端末に送信し、
   前記携帯端末は、前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識するとともに音声認識した結果を前記作業項目情報に対する作業結果として保持する、
   請求項１ないし６のいずれか１項に記載の管理サーバ。
8. 前記携帯端末は、前記作業結果候補に含まれる前記種別情報が読み取りを表す場合に、作業対象物の識別情報を読み取る読取手段を介して受け付けた情報を、前記作業項目情報に対する作業結果として保持する、
   請求項７に記載の管理サーバ。
9. 前記作業項目情報は、前記作業項目の名称と前記作業項目の内容を表す情報を関連付けて保持し、
   前記携帯端末は、前記作業項目の名称を表示するとともに、前記作業項目の内容を表す情報を読み上げる、
   請求項７または８に記載の管理サーバ。
10. 前記携帯端末は、前記作業項目情報を提示してから前記音声認識が完了するまでに要した時間を前記作業項目情報と関連付けて記録する、
    請求項７ないし９のいずれか１項に記載の管理サーバ。
11. 前記受付部は、前記作業項目情報、および／または、前記作業結果候補を、作業者の習熟度別に保持する前記帳票情報を受け付け、
    前記辞書登録部は、前記帳票情報に含まれる習熟度別の作業結果候補を作業項目と関連付けて前記辞書に登録し、
    前記携帯端末は、前記作業者の習熟度に応じて前記作業項目情報を提示し、かつ／または、前記辞書のうちの前記作業者の習熟度に対応する作業結果候補を用いて前記音声認識を行う、
    請求項７ないし１０のいずれか１項に記載の管理サーバ。
12. 前記携帯端末は、作業者による前記帳票情報を用いた作業回数を作業者ごとに保持し、前記作業回数に基づいて前記作業者の習熟度を判定し、判定した習熟度を用いて前記作業項目情報の提示、および／または、前記音声認識を行う、
    請求項１１に記載の管理サーバ。
13. 前記受付部は、第１の作業項目を表す第１の作業項目情報と前記第１の作業項目の作業結果に応じて前記第１の作業項目の次に実施すべき第２の作業項目を表す第２の作業項目情報とを関連付けて保持する帳票情報を受け付け、
    前記携帯端末は、前記第１の作業項目情報に対して受け付けた音声入力を音声認識した結果に応じて、前記第２の作業項目を選択する、
    請求項７ないし１２のいずれか１項に記載の管理サーバ。
14. 前記受付部は、前記第１の作業項目情報と前記第２の作業項目情報とを関連付けて保持する第１の帳票情報、および、前記第２の作業項目情報を保持する第２の帳票情報を受け付け、
    前記携帯端末は、前記第１の作業項目情報に対して受け付けた音声入力を音声認識した結果に応じて、前記第２の作業項目を前記第２の帳票情報から選択する、
    請求項１３に記載の管理サーバ。
15. 作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた辞書を取得する通信部と、
    前記作業項目情報を提示する提示部と、
    前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識する音声認識部と、
    音声認識した結果を前記作業項目情報に対する作業結果として保持する記憶部と、を備える、
    ことを特徴とする携帯端末。
16. 前記通信部は、前記帳票情報に複数の前記作業項目情報が含まれる場合、前記帳票情報を取得する際に、前記各作業項目情報に関連付けられた作業項目ごとの辞書を取得し、
    前記音声認識部は、前記音声入力を、前記各作業項目ごとの辞書を用いて音声認識する、
    請求項１５に記載の携帯端末。
17. 前記通信部は、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録するとともに、前記帳票情報と前記辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた辞書を取得する、
    請求項１５に記載の携帯端末。
18. 前記作業結果候補は、少なくとも作業結果の種別を表す種別情報を含み、前記種別情報は、前記作業結果の種別が少なくとも文字列、数値、カスタム、または、読み取りのいずれか１つであることを表す、
    請求項１７に記載の携帯端末。
19. 前記作業結果候補に含まれる前記種別情報が読み取りを表す場合に、作業対象物の識別情報を読み取る読取手段を備え、
    前記記憶部は、前記読取手段を介して受け付けた情報を、前記作業項目情報に対する作業結果として保持する、
    請求項１８に記載の携帯端末。
20. 前記作業項目情報は、前記作業項目の名称と前記作業項目の内容を表す情報を関連付けて保持し、
    前記提示部は、前記作業項目の名称を表示するとともに、前記作業項目の内容を表す情報を読み上げる、
    請求項１６ないし１９のいずれか１項に記載の携帯端末。
21. 前記記憶部は、前記作業項目情報を提示してから前記音声認識が完了するまでに要した時間を前記作業項目情報と関連付けて記録する、
    請求項１６ないし２０のいずれか１項に記載の携帯端末。
22. 請求項１ないし１４のいずれか１項に記載の管理サーバと、
    請求項１５ないし２１のいずれか１項に記載の携帯端末と、を備える、
    ことを特徴とする作業支援システム。
23. 管理サーバが、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けるステップと、
    前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録するステップと、
    前記帳票情報と前記辞書とを関連付けて記憶するステップと、
    前記帳票情報を送信する際に対応する辞書とともに送信するステップと、を含む、
    ことを特徴とする作業支援方法。
24. 携帯端末が、作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた辞書を取得するステップと、
    前記作業項目情報を提示するステップと、
    前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識するステップと、
    音声認識した結果を前記作業項目情報に対する作業結果として保持するステップと、を含む、
    ことを特徴とする作業支援方法。
25. 作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける処理と、
    前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録する処理と、
    前記帳票情報と前記辞書とを関連付けて記憶する処理と、
    前記帳票情報を送信する際に対応する辞書とともに送信する処理と、をコンピュータに実行させる、
    ことを特徴とするプログラム。
26. 作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた辞書を取得する処理と、
    前記作業項目情報を提示する処理と、
    前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識する処理と、
    音声認識した結果を前記作業項目情報に対する作業結果として保持する処理と、をコンピュータに実行させる、
    ことを特徴とするプログラム。

Images