JP5149722B2 - 検査システム - Google Patents

Description

本発明は、作業者が所定の装置に含まれる複数の部品の正否を確認する場合において、作業の効率化及び検査ミスの防止を図るための技術に関する。

例えば自動車などにおいて、同一の車種であっても各部品（例えば、タイヤ、ミラー、バンパー、ホイール、シート、カーナビゲーションなど）は購入者の好みによって異なる場合が多く、工場から出荷する際には、発注されたとおりの製品に仕上がっているかを確認する必要がある。従来、作業者は、その製品に本来取り付けられているべき部品の型番などが印刷されたチェック用紙に基づき、各部品の確認を行っており、チェック結果をチェック用紙に記入する。

このような従来の方式では、作業者は、ボールペン等の筆記用具とチェック用紙とを手に持ちながら作業を行うことになり、両手を使う場合（例えば、ボンネット又はドアを開ける、止め金を外す場合など）には、一旦筆記用具及びチェック用紙を手から放さなければならず、作業効率が悪くなる。また、例えば、作業者が、作業効率を向上させようとして、複数の部品のチェック結果をまとめて記入するようになると、記入ミスや検査ミスなどが生じていた。さらに、例えば筆記用具を持ち替える際に筆記用具を落としてしまって、製品に傷を付けてしまう場合もある。

例えば特開平７−３１８５６５号公報には、両手を塞がれた状態でも音声にて分析装置を操作可能とする、音声入出力機能付き分析装置が開示されている。具体的には、測定の開始や停止等の指示を外部から受付け、測定結果を外部に出力する分析装置において、外部からの指示を音声により受付ける機能と、音声によって外部に出力する機能を有する。しかしながら、当該公報記載の技術によれば、例えば机上などの一定の場所で作業をする場合であれば、机上に設置された分析装置を音声にて操作できるかもしれないが、ある製品の各部品を見回りながら作業をする場合には、その都度分析装置のところに戻らなければならず、作業効率が向上するとは言えない。

また、例えば特開昭６３−４７００号公報には、部品データを聴覚により検査者へ伝達し、検査による視覚の疲労度を軽減できる印刷配線板外観検査装置が開示されている。具体的には、当該印刷配線板外観検査装置は、検査をすべき従印刷配線板上の座標を読み取るＸ・Ｙ座標読み取り装置と、標準となる主印刷配線板のＸ・Ｙ座標に対する部品データを音声データとして記録する音声データ記憶回路と、音声データ記憶回路から読み出された音声データを音声に合成する音声合成回路と、音声合成回路で合成された音声を出力する音声出力機器と、これらを制御する中央演算処理装置とを備える。しかし、当該公報では、音声入力を行うようにはなっておらず、上記のような問題を解決することはできない。

さらに、例えば特開２００７−１８８７０号公報には、外観検査工程での作業効率を向上させることにより安定した品質を維持することができる外観検査誘導システムが開示されている。具体的には、所定の指示書を読み込んで表示された作業指示に基づいて、組み立てられたワイヤハーネスの外観検査を実行する外観検査誘導システムであって、少なくとも検査部分を画像表示する画像表示手段、または検査部分を音声で伝える音声手段のいずれかを有し、前記外観検査が完了した前記ワイヤハーネスのみに出荷ラベルを発行するようになっている。しかし、当該公報においても、音声入力を行うようにはなっておらず、上記のような問題を解決することはできない。

また、例えば特開２００３−１９４７３３号公報には、オペレータの両手がふさがっている状態においても容易に検査結果データの修正入力作業等が実施でき、作業能率を向上させることができる外観検査支援システムが開示されている。具体的には、被検査対象物の外観を撮像素子で撮影して画像処理を行い、該被検査対象物の良否等を検査する外観検査手段と、該外観検査手段の検査結果データを書き込み及び該書き込まれたデータを読み出すデータ入出力手段と、該データ入出力手段に書き込まれた該検査結果データを読み出して表示する表示手段と、該表示手段に表示された該検査結果データの修正入力を行なうデータ修正入力手段と、該データ修正入力手段の修正入力に基づいて該検査結果データの修正処理を行なうデータ修正処理手段とを備えた情報処理手段とを有し、該表示手段に表示された該検査結果データに基づいて、オペレータが該被検査対象物を目視で再検査し、該検査結果データに誤りがあったときに、該オペレータが該データ修正入力手段を用いて該検査結果データを修正し、該修正された検査結果データを該データ入出力手段に書き込む被検査対象物の外観検査支援システムにおいて、上記データ修正入力手段が、上記オペレータの発声した音声を認識して該音声に対応した認識データを上記データ修正処理手段に出力する音声認識手段を有する。しかし、当該公報記載の技術によれば、例えば机上などの一定の場所で作業をする場合であれば、机上に設置されたＰＣ（パーソナル・コンピュータ）の表示装置に表示された検査結果データを見ながら、音声にて検査結果データの修正を行うことができるかもしれないが、ある製品の各部品を見回りながら作業をする場合には、その都度ＰＣのところに戻らなければならず、作業効率が向上するとは言えない。
特開平７−３１８５６５号公報 特開昭６３−４７００号公報 特開２００７−１８８７０号公報 特開２００３−１９４７３３号公報

以上のように、従来技術では、ある一定の場所で作業する場合であれば、手が塞がれてしまうことによる作業効率の低下を防止することはできるかもしれないが、例えば自動車などの製品に含まれる各部品を見回りながら確認する場合には、作業効率の低下を防止することはできない。また、例えば騒音の大きい工場などでは、音声の誤認識などもあり、検査ミスが生じるという問題もある。

従って、本発明は、例えば自動車などの製品に含まれる各部品を見回りながら確認する場合においても、手が塞がれてしまうことによる作業効率の低下を防止するための技術を提供することである。

また、本発明の他の目的は、複数の部品をまとめてチェックすることによる検査対象の漏れや記入ミスによる検査ミスを防止するための技術を提供することである。

さらに、本発明の他の目的は、例えば騒音の大きい工場などにおいても、騒音の影響をより軽減するための技術を提供することである。

本発明に係る検査システムは、マイク及びイヤホンを備え且つ通信機能を有する携帯端末と、携帯端末と通信可能な中央装置とを有する。そして、上で述べた中央装置は、所定の装置に含まれる部品毎に、当該部品の確認指示を含む第１音声データと、正解とみなされる部品に関するデータである正解データとを格納する検査データ格納部を有し、上で述べた携帯端末は、特定の装置の識別情報の入力を受け付け、当該特定の装置に含まれる複数の部品の各々に対応する第１音声データを取得する第１音声データ取得手段と、特定の装置に含まれる複数の部品の各々について、当該部品に対応する第１音声データに係る音声をイヤホンを介して出力する音声処理手段とを有する。また、上で述べた携帯端末と中央装置とのうちいずれかが、特定の装置に含まれる複数の部品の各々について、マイクを介して入力され且つ当該部品の確認結果を含む第１入力音声データと当該部品に対応する正解データとに基づき、当該部品の正否を判断する第１判断手段を有する。

このようにすれば、作業者は、イヤホンからの音声に従って確認作業を行うことができ、確認結果をマイクに向かって発声すればよいので、チェック用紙及び筆記用具が不要になり、両手が使えるようになり、作業効率の向上につながる。また、所定の装置（例えば、自動車などの製品）を傷付けることもほとんどなくなる。

また、上で述べた第１判断手段が、第１入力音声データに対してテキスト変換処理を実施することにより、当該第１入力音声データの音声波形に対応する文字列を含む入力テキストデータを生成するテキスト変換手段と、入力テキストデータと部品に対応する正解データとが一致するか否か判断し、入力テキストデータと部品に対応する正解データとが一致する場合、当該部品は正しい部品であると判断する手段とを有するようにしてもよい。

さらに、上で述べた中央装置が、音声波形のデータと当該音声波形に対応する文字列とを含むテキスト変換用音声データを格納する変換用データ格納部をさらに有するようにしてもよい。そして、上で述べたテキスト変換手段が、変換用データ格納部に格納されているテキスト変換用音声データのうち、第１入力音声データと音声波形が一致するテキスト変換用音声データを特定する変換用データ特定手段と、特定したテキスト変換用音声データに含まれる文字列を、第１入力音声データの音声波形に対応する文字列として入力テキストデータを生成する手段とを有するようにしてもよい。

また、上で述べた検査データ格納部が、所定の装置に含まれる部品毎に音声入力時間をさらに格納するようにしてもよい。そして、上で述べた音声処理手段が、部品に対応する第１音声データに係る音声を出力してから当該部品に対応する音声入力時間が経過するまでの間、音声入力が可能となるようにマイクを制御する手段を有するようにしてもよい。このようにすれば、例えば騒音が大きい工場においても、確認結果とみなされる部分を特定し易くなり、音声の誤認識をより防止することができるようになる。また、正解の音声データを用意する場合、データ量の削減を図ることができる。

さらに、上で述べた正解データが、正解とみなされる部品の型番を表すデータである場合もある。そして、上で述べた確認指示が、確認結果として部品の型番を回答するように促す指示である場合もある。このようにすれば、作業者に一部品ずつ、型番を回答させることができ、複数の部品をまとめてチェックすることによる検査対象の漏れや記入ミスによる検査ミスを防止することができるようになる。

また、上で述べた検査データ格納部が、部品の型番の正否を回答するように促す再確認指示を含む第２音声データをさらに格納するようにしてもよい。そして、上で述べた携帯端末が、特定の装置に含まれる複数の部品のうち、第１判断手段により正しいと判断された部品以外の部品である再確認部品の各々に対応する第２音声データを取得する手段と、再確認部品の各々について、当該再確認部品に対応する第２音声データに係る音声をイヤホンを介して出力する手段とをさらに有するようにしてもよい。また、携帯端末と中央装置とのうちいずれかが、再確認部品の各々について、マイクを介して入力された第２入力音声データに基づき、当該再確認部品の正否を判断する第２判断手段をさらに有するようにしてもよい。このようにすれば、２段階でチェックされるため、より正確な検査を行うことができるようになる。また、雑音等で誤認識した場合でも、再確認して本来の結果を得ることができるようにもなる。

さらに、上で述べた携帯端末と中央装置とのうちいずれかが、再確認部品のうち、第２判断手段により正しいと判断された部品以外の部品を特定するための１次元コード又は２次元コードを生成する手段をさらに有するようにしてもよい。そして、上で述べた携帯端末が、携帯端末に接続される印刷装置に１次元コード又は２次元コードを印刷させる手段をさらに有するようにしてもよい。このようにすれば、例えば型番が異なるとみなされた部品を、以降の工程にて容易に特定することができる。

また、上で述べた識別情報が、１次元コード又は２次元コード形式のデータである場合もある。そして、上で述べた携帯端末が、１次元コード又は２次元コードを読み取る手段を有するようにしてもよい。

さらに、上で述べた検査データ格納部が、所定の装置毎に当該所定の装置の識別情報と当該所定の装置に含まれる部品のリストとをさらに格納する場合もある。そして、上で述べた第１音声データ取得手段が、特定の装置の識別情報に対応するリストに含まれる部品の各々に対応する第１音声データを検査データ格納部から取得する手段を有するようにしてもよい。

なお、本システムは、プログラムが上記処理をハードウエアに実行させることによって実現可能であり、当該プログラムは、例えばフレキシブル・ディスク、ＣＤ−ＲＯＭ、光磁気ディスク、半導体メモリ、ハードディスク等の記憶媒体又は記憶装置に格納される。また、ネットワークを介してディジタル信号にて頒布される場合もある。なお、処理途中のデータについては、コンピュータのメモリ等の記憶装置に一時保管される。

本発明によれば、例えば自動車などの製品を構成する各部品を見回りながら確認する場合においても、手が塞がれてしまうことによる作業効率の低下を防止することができる。

また、本発明の他の側面によれば、複数の部品をまとめてチェックすることによる検査ミスを防止することができる。

さらに、本発明の他の側面によれば、例えば騒音の大きい工場などにおいても、騒音の影響をより軽減することができる。

本発明の一実施の形態に係る検査システムの概要を図１に示す。例えばイントラネットや携帯電話網であるネットワーク１には、中央装置３と、作業者が腰に下げるなどして携帯しているＰＤＡ（Personal Digital Assistant）５（図１では、５ａ、５ｂ、・・・）とが接続されている。ＰＤＡ５には、マイク及びイヤホンを備えたハンズフリーセット６（図１では、６ａ、６ｂ、・・・）と、二次元コード（例えばＱＲ（Quick Response code）コード）を読み取る二次元コードリーダ７と、プリンタ８と、ランプ９とが接続されている。なお、ハンズフリーセット６、二次元コードリーダ７、プリンタ８及びランプ９は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）等によってＰＤＡ５と無線通信を行うような場合もある。また、二次元コードリーダ７、プリンタ８及びランプ９は、予めＰＤＡ５に組み込まれるような場合もある。

中央装置３は、ＰＤＡ５からのデータを受信するデータ受信部３１と、検査に必要となるデータ（例えば、作業者に対する指示を含む音声データなど）を検査データ格納部４１から読み出し、ＰＤＡ５に送信するなどの処理を実施する検査データ処理部３３と、ハンズフリーセット６のマイクを介して入力され且つ部品の確認結果を含む入力音声データをテキストデータに変換するための処理を実施するテキスト変換処理部３５と、テキスト変換処理部３５により変換されたテキストデータを、後で説明する正解データと照合する照合処理部３７と、二次元コードに関連する処理を実施する二次元コード処理部３９とを有する。

また、中央装置３は、後で説明するチェック項目テーブル、第１の検査テーブル及び第２の検査テーブルを格納する検査データ格納部４１と、入力音声データをテキストデータに変換する際に利用するテキスト変換用音声データを格納するテキスト変換用データ格納部４３と、照合処理部３７による照合結果を格納する照合結果格納部４５とを管理している。

図２に、ＰＤＡ５の機能ブロック図を示す。ＰＤＡ５は、ネットワーク１を介して中央装置３と通信する通信処理部５１と、ハンズフリーセット６、二次元コードリーダ７、プリンタ８及びランプ９などを制御する制御部５３と、作業者からの音声入力をハンズフリーセット６のマイクを介して受け付ける音声データ入力部５５と、音声データに係る音声をハンズフリーセット６のイヤホンを介して出力する音声データ出力部５７と、ＰＤＡ５からの音声データなどを格納する検査データ格納部５９とを有する。

図３乃至図６に、検査データ格納部４１に格納されるデータの一例を示す。図３は、チェック項目テーブルの一例であり、チェック項目テーブルには、二次元コードの列と、チェック項目の列と、正解データの格納先の列とが含まれる。二次元コードの列には、例えば発注書データから製品を一意に決定するために、製品を特定可能なユニークな二次元コードが設定される。チェック項目の列には、二次元コードに対応する製品において、確認すべき項目の項目ＩＤのリストが設定される。なお、項目の内容については、図４に示すような項目一覧にて予め定められているものとする。例えば、エアロ（項目ＩＤ「１２」）やナビゲーション（項目ＩＤ「２９」）など、標準装備でない部品の項目は、購入者が取り付けを希望した製品のチェック項目にはリストアップされるが、購入者が取り付けを希望しなかった製品のチェック項目には含まれない。従って、製品毎にチェック項目の内容が異なる。また、正解データの格納先の列には、後で説明する第１の検査テーブルの正解１の列、正解２の列、・・・のうち、当該二次元コードに対応する製品の正解データが格納されている列の情報が設定される。

図５は、第１の検査テーブルの一例であり、第１の検査テーブルには、項目ＩＤの列と、第１の音声データの列と、第１のマイクフラグ（１：マイクオン／０：マイクオフ）の列と、第１の音声入力時間の列と、正解１の列と、正解２の列と、・・・とが含まれる。第１の音声データの列には、作業者に対する指示を含む音声データが格納される。例えば項目ＩＤ「２」であれば、「タイヤの仕様を答えて下さい」という音声が出力されることを示す。第１のマイクフラグの列には、当該項目が作業者からの回答を要する場合には（すなわち、音声入力を受け付ける場合には）、１（マイクオン）が設定され、作業者からの回答を要しない単なるアナウンスの場合には、０（マイクオフ）が設定される。第１の音声入力時間の列には、第１のマイクフラグが１の場合に、マイクをオンにしてからオフにするまでの時間が設定される。なお、第１のマイクフラグが０の場合には、第１の音声入力時間の列にも０が設定される。正解１、正解２、・・・の各列には、製品毎の正解データが設定される。本実施の形態では、発注書データなどに含まれる部品の型番などに従って予め正解データが用意されているものとし、この正解データに基づき、発注されたとおりの製品に仕上がっているか否かを確認するものとする。

図６は、第２の検査テーブルの一例であり、第２の検査テーブルには、項目ＩＤの列と、第２の音声データの列と、第２のマイクフラグ（１：マイクオン／０：マイクオフ）の列と、第２の音声入力時間の列とが含まれる。第２の音声データの列には、作業者に対する指示を含む音声データが格納される。例えば項目ＩＤ「２」であれば、「タイヤの仕様は”ラジアルＲＴ−２３０−５５”ですか」という音声が出力されることを示す。第１の音声データは、作業者に部品の型番を回答させるような指示を含むものであったが、第２の音声データは、作業者に部品の型番の正否（Ｙｅｓ／Ｎｏ）を回答させるような指示を含むものである。第２のマイクフラグ及び第２の音声入力時間は、第１のマイクフラグ及び第１の音声入力時間と同じように設定される。図６の例では、第２の音声入力時間は、部品の型番の正否（Ｙｅｓ／Ｎｏ）の音声入力を受け付ければよいので、第１の音声入力時間に比べ、短い時間が設定される。なお、同一の項目ＩＤであっても、部品の型番が異なると第２の音声データの内容も異なってくるため、二次元コード毎に第２の検査テーブルが格納される。

図７に、テキスト変換用データ格納部４３に格納されるテキスト変換用音声データの一例を示す。なお、図７は、「ラジアルＲＴ−２３０−５５」に関連するテキスト変換用音声データの例である。例えば、作業者が「ラジアルＲＴ−２３０−５５」と発声したつもりでも、発声の仕方（母音の長音化の有無や英語部分の正確さ等）などの個人差によって様々な音声波形（例えば、図７における音声波形７０１及び７０２など）となる。ここで、音声波形７０２を「ラあジアルうＲるＴ−２３０−５５」とテキスト変換すると、作業者によって検査結果が変わってしまう可能性がある。そこで、本実施の形態では、類似する複数の音声波形のデータを用意しておき、発声の仕方などの個人差によって音声波形が多少異なっても、同じように「ラジアルＲＴ−２３０−５５」とテキスト変換できるようにする。具体的には、各テキスト変換用音声データには、変換先文字列が予め定められており（テキスト変換用音声データ１、２及び３は、いずれも「ラジアルＲＴ−２３０−５５」）、作業者からの入力音声データと音声波形が一致するテキスト変換用音声データを検索し、該当するテキスト変換用音声データの変換先文字列に変換する。このようにして、発声の仕方が異なる回答者の音声を回答として扱う。なお、上で説明したように、マイクは、第１の音声入力時間だけオンの状態となるので、第１の音声入力時間幅を上限として、類似する複数の音声波形を用意すればよい。これにより、データ量の削減を図ることができる。

図８及び図９に、照合結果格納部４５に格納されるデータの一例を示す。図８は、照合結果テーブルの一例であり、照合結果テーブルには、項目ＩＤの列と、照合結果の列とが含まれる。照合結果の列は、さらに第１検査の列と第２検査の列とに分かれている。第１検査の列には、第１の検査テーブルのデータに従って実施された照合結果（○：一致／×：不一致）が設定され、第２検査の列には、第２の検査テーブルのデータに従って実施された照合結果が設定される。なお、照合結果テーブルは、二次元コード毎に格納される。

図９は、不一致項目テーブルの一例であり、不一致項目テーブルには、二次元コードの列と、不一致項目の列とが含まれる。二次元コードの列には、チェック項目テーブル（図３）の二次元コードのうちのいずれかが設定される。不一致項目の列には、当該二次元コードに対応する照合結果テーブル（図８）における第２検査の列に「×」（不一致）が設定されている項目の項目ＩＤが設定される。なお、後で説明するように、各レコードについて、当該レコードの内容をコード化することにより、新たな二次元コードを生成する。

次に、図１０乃至図１５を用いて、図１に示した検査システムの処理を説明する。まず、作業者は、マイクテストのためにハンズフリーセット６のマイクに向かって所定のフレーズを発声する。ＰＤＡ５の音声データ入力部５５は、ハンズフリーセット６を介して作業者からの音声入力を受け付け、音声データを生成するための音声周波数等の調整を行う（図１０：ステップＳ１）。また、ＰＤＡ５の通信処理部５１は、チューニングに必要な情報を中央装置３に送信する（ステップＳ３）。そして、中央装置３のデータ受信部３１は、ＰＤＡ５からのチューニング情報を受信し、記憶装置に格納する（ステップＳ５）。

また、作業者は、例えば検査の対象となる製品に貼り付けられたシールなどに印刷された二次元コードに二次元コードリーダ７を近づける。そして、ＰＤＡ５の通信処理部５１は、二次元コードリーダ７により読み込んだ二次元コードを中央装置３に送信する（ステップＳ７）。

中央装置３のデータ受信部３１は、ＰＤＡ５からの二次元コードを受信し、記憶装置に格納する（ステップＳ９）。そして、中央装置３の検査データ処理部３３は、記憶装置に格納された二次元コードでチェック項目テーブルを検索し、当該二次元コードに対応するチェック項目を抽出する（ステップＳ１１）。そして、中央装置３の検査データ処理部３３は、第１の検査テーブルからチェック項目の各々に対応する第１の音声データ、第１のマイクフラグ及び第１の音声入力時間を読み出し、ＰＤＡ５に送信する（ステップＳ１３）。

ＰＤＡ５の通信処理部５１は、中央装置３からの第１の音声データ、第１のマイクフラグ及び第１の音声入力時間を受信し、検査データ格納部５９に格納する（ステップＳ１５）。そして、ＰＤＡ５の音声データ出力部５７は、先頭から順に未処理の項目を特定する（ステップＳ１７）。そして、ＰＤＡ５の音声データ出力部５７は、特定項目の第１の音声データに係る音声をハンズフリーセット６のイヤホンを介して出力する（ステップＳ１９）。その後、端子Ａ及び端子Ｂを介して図１１の処理に移行する。

図１１の説明に移行して、端子Ｂの後、ＰＤＡ５の音声データ入力部５５は、特定項目の第１のマイクフラグが１であるか判断する（図１１：ステップＳ２１）。特定項目の第１のマイクフラグが０であれば（ステップＳ２１：Ｎｏルート）、ステップＳ２７の処理に移行する。一方、特定項目の第１のマイクフラグが１である場合（ステップＳ２１：Ｙｅｓルート）、ＰＤＡ５の音声データ入力部５５は、音声入力受付処理を実施する（ステップＳ２３）。

音声入力受付処理については、図１２を用いて説明する。音声データ入力部５５は、検査データ格納部５９から特定項目の第１の音声入力時間を取得し、タイマにセットする（図１２：ステップＳ１０１）。そして、音声データ入力部５５は、ハンズフリーセット６のマイクをオンに設定し（ステップＳ１０３）、タイマをスタートする。図示していないが、例えば、ランプ９を点灯させるなどして、マイクがオンであることを作業者に知らせるようにしてもよい。なお、作業者は、ステップＳ１９において出力された音声に従って部品の確認を行い、確認結果をハンズフリーセット６のマイクに向かって発声する。

そして、音声データ入力部５５は、ハンズフリーセット６のマイクを介して作業者からの音声入力を受け付け（ステップ１０５）、入力音声データとして一旦記憶装置に格納する。そして、タイマのタイムアウトを検出すると、音声データ入力部５５は、マイクをオフに設定する（ステップＳ１０７）。その後、音声入力受付処理を終了し、元の処理に戻る。

図１１の説明に戻って、ステップＳ２３の処理の後、ＰＤＡ５の通信処理部５１は、特定項目の項目ＩＤ及び入力音声データを中央装置３に送信する（ステップＳ２５）。また、ＰＤＡ５の音声データ出力部５７は、全項目終了したか判断する（ステップＳ２７）。全項目終了していなければ（ステップＳ２７：Ｎｏルート）、端子Ｃを介してステップＳ１７（図１０）の処理に戻る。一方、全項目終了した場合（ステップＳ２７：Ｙｅｓルート）、ステップＳ３９の処理に移行する。

また、端子Ａの後、中央装置３のデータ受信部３１は、ＰＤＡ５からの項目ＩＤ及び入力音声データを受信し、一旦記憶装置に格納する（ステップＳ２９）。そして、中央装置３のテキスト変換処理部３５は、入力音声データに対してテキスト変換処理を施し、入力テキストデータを生成する（ステップＳ３１）。具体的には、入力音声データを基にテキスト変換用データ格納部４３を検索し、入力音声データと音声波形が一致するテキスト変換用音声データを検出する。この際、必要に応じて、チューニング情報を用いて入力音声データを調整する。そして、検出したテキスト変換用音声データの変換先文字列を含むデータを生成し、入力テキストデータとして記憶装置に格納する。なお、入力音声データと音声波形が一致するテキスト変換用音声データを検出できなければ、従来のテキスト変換処理を施し、入力音声データを入力テキストデータに変換する。

その後、中央装置３の照合処理部３７は、入力テキストデータと正解データとを照合して、照合結果を照合結果テーブルにおける該当項目の第１検査の列に格納する（ステップＳ３３）。なお、照合する正解データは、二次元コード及び項目ＩＤを基に特定する。その後、中央装置３の照合処理部３７は、全項目終了したか判断する（ステップＳ３５）。全項目終了していなければ（ステップＳ３５：Ｎｏルート）、ステップＳ２９の処理に戻る。一方、全項目終了した場合（ステップＳ３５：Ｙｅｓルート）、中央装置３の照合処理部３７は、照合結果をＰＤＡ５に送信する（ステップＳ３７）。ＰＤＡ５の通信処理部５１は、中央装置３からの照合結果を受信し、一旦記憶装置に格納する（ステップＳ３９）。

そして、中央装置３の照合処理部３７は、照合結果が全て一致であるか判断する（ステップＳ４１）。照合結果が全て一致である場合（ステップＳ４１：Ｙｅｓルート）、ここで処理を終了する（ステップＳ４３）。一方、照合結果が全て一致でなければ（ステップＳ４１：Ｎｏルート）、端子Ｄを介して図１３の処理に移行する。

また、ＰＤＡ５の制御部５３は、照合結果が全て一致であるか判断する（ステップＳ４５）。照合結果が全て一致である場合（ステップＳ４５：Ｙｅｓルート）、ここで処理を終了する（ステップＳ４７）。一方、照合結果が全て一致でなければ（ステップＳ４５：Ｎｏルート）、端子Ｅを介して図１３の処理に移行する。

図１３の説明に移行して、端子Ｄの後、中央装置３の検査データ処理部３３は、照合結果が不一致の項目を再検査項目として特定する（図１３：ステップＳ４９）。具体的には、照合結果テーブルの第１検査の列に「×」（不一致）が設定されている項目を再検査項目として特定する。そして、中央装置３の検査データ処理部３３は、記憶装置に格納されている二次元コードに対応する第２の検査テーブルを特定する（ステップＳ５１）。そして、中央装置３の検査データ処理部３３は、特定した第２の検査テーブルから再検査項目に対応する第２の音声データ、第２のマイクフラグ及び第２の音声入力時間を読み出し、ＰＤＡ５に送信する（ステップＳ５３）。

また、端子Ｅの後、ＰＤＡ５の通信処理部５１は、中央装置３からの第２の音声データ、第２のマイクフラグ及び第２の音声入力時間を受信し、検査データ格納部５９に格納する（ステップＳ５５）。そして、ＰＤＡ５の音声データ出力部５７は、先頭から順に未処理の項目を特定する（ステップＳ５７）。そして、ＰＤＡ５の音声データ出力部５７は、特定項目の第２の音声データに係る音声をハンズフリーセット６のイヤホンを介して出力する（ステップＳ５９）。その後、端子Ｆ及び端子Ｇを介して図１４の処理に移行する。

図１４の説明に移行して、端子Ｇの後、ＰＤＡ５の音声データ入力部５５は、特定項目の第２のマイクフラグが１であるか判断する（図１４：ステップＳ６１）。特定項目の第２のマイクフラグが０であれば（ステップＳ６１：Ｎｏルート）、ステップＳ６７の処理に移行する。一方、特定項目の第２のマイクフラグが１である場合（ステップＳ６１：Ｙｅｓルート）、ＰＤＡ５の音声データ入力部５５は、音声入力受付処理を実施する（ステップＳ６３）。なお、音声入力受付処理は、基本的には、上で説明した処理と変わらないため、詳細な説明は省略するが、ステップＳ６３の処理では、第１の音声入力時間の代わりに第２の音声入力時間を用いる。

そして、ＰＤＡ５の通信処理部５１は、特定項目の項目ＩＤ及び入力音声データを中央装置３に送信する（ステップＳ６５）。なお、入力音声データは、音声入力受付処理（ステップＳ６３）にて受け付けたデータである。また、ＰＤＡ５の音声データ出力部５７は、全項目終了したか判断する（ステップＳ６７）。全項目終了していなければ（ステップＳ６７：Ｎｏルート）、端子Ｈを介してステップＳ５７（図１３）の処理に戻る。一方、全項目終了した場合（ステップＳ６７：Ｙｅｓルート）、ステップＳ７９の処理に移行する。

また、端子Ｆの後、中央装置３のデータ受信部３１は、ＰＤＡ５からの項目ＩＤ及び入力音声データを受信し、一旦記憶装置に格納する（ステップＳ６９）。なお、上で述べたが、第２の音声データには、部品の型番の正否（Ｙｅｓ／Ｎｏ）を回答するように促す指示を含んでいるため、当該入力音声データには、部品の型番の正否が含まれることとなる。そして、中央装置３のテキスト変換処理部３５は、入力音声データに対して従来のテキスト変換処理を施し、入力テキストデータを生成する（ステップＳ７１）。

そして、中央装置３の照合処理部３７は、入力テキストデータに従って照合結果を照合結果テーブルにおける該当項目の第２検査の列に格納する（ステップＳ７３）。具体的には、入力テキストデータが、部品の型番が正しい旨の回答（Ｙｅｓ）を含む場合には、照合結果として「○」（一致）を格納し、それ以外の場合には、照合結果として「×」（不一致）を格納する。

その後、中央装置３の照合処理部３７は、全項目終了したか判断する（ステップＳ７５）。全項目終了していなければ（ステップＳ７５：Ｎｏルート）、ステップＳ６９の処理に戻る。一方、全項目終了した場合（ステップＳ７５：Ｙｅｓルート）、中央装置３の照合処理部３７は、照合結果をＰＤＡ５に送信する（ステップＳ７７）。ＰＤＡ５の通信処理部５１は、中央装置３からの照合結果を受信し、一旦記憶装置に格納する（ステップＳ７９）。

そして、中央装置３の照合処理部３７は、照合結果が全て一致であるか判断する（ステップＳ８１）。照合結果が全て一致である場合（ステップＳ８１：Ｙｅｓルート）、ここで処理を終了する（ステップＳ８３）。一方、照合結果が全て一致でなければ（ステップＳ８１：Ｎｏルート）、端子Ｉを介して図１５の処理に移行する。

また、ＰＤＡ５の制御部５３は、照合結果が全て一致であるか判断する（ステップＳ８５）。照合結果が全て一致である場合（ステップＳ８５：Ｙｅｓルート）、ここで処理を終了する（ステップＳ８７）。一方、照合結果が全て一致でなければ（ステップＳ４５：Ｎｏルート）、端子Ｊを介して図１５の処理に移行する。

図１５の説明に移行して、端子Ｉの後、中央装置３の二次元コード処理部３９は、照合結果が不一致の項目の項目ＩＤと二次元コードとを含むレコードを生成し、不一致項目テーブルに登録する（図１５：ステップＳ８９）。すなわち、照合結果テーブルの第２検査の列に「×」（不一致）が設定されている項目の項目ＩＤが不一致項目テーブルに登録される。そして、中央装置３の二次元コード処理部３９は、当該レコードの内容をコード化することにより、新たな二次元コードを生成し、一旦記憶装置に格納する（ステップＳ８９）。そして、中央装置３の二次元コード処理部３９は、生成した二次元コードのデータ（例えばイメージ化する前のデータ）をＰＤＡ５に送信する（ステップＳ９３）。

また、端子Ｊの後、ＰＤＡ５の通信処理部５１は、中央装置３からの二次元コードのデータを受信し、一旦記憶装置に格納する。そして、ＰＤＡ５の制御部５３が、当該二次元コードをイメージ化し、印刷指示をプリンタ８に出力する（ステップＳ９５）。例えば、プリンタ８は、ＰＤＡ５からの印刷指示に従って、イメージ化された二次元コードをシールなどに印刷する。作業者は、印刷されたシールを製品の所定の場所に貼り付ける。例えば、次の工程などにおいて、シールに印刷された二次元コードを二次元コードリーダで読み込むことで、当該製品を特定可能なユニーク値と、不一致と判断された部品とが判明し、いずれの部品が不一致と判断されたかを容易に特定できるようになる。

以上のような処理を実施することにより、例えば自動車などの製品に含まれる各部品を見回りながら確認する場合において、作業者は両手が使えるようになり、作業効率の向上につながる。また、作業者に一部品ずつ、型番を回答させるので、複数の部品をまとめてチェックすることによる検査ミスを防止することができる。音声入力時間を設け、一定の時間帯で音声入力を受け付けるため、騒音などによる誤認識をより軽減することができる。なお、雑音等で誤認識した場合でも、再確認を行うようになっているため、本来の結果を得ることができる。

以上本発明の一実施の形態について説明したが、本発明はこれに限定されるものではない。例えば、上で説明した機能ブロック図は必ずしも実際のプログラムモジュール構成に対応するものではない。中央装置３は、１台のコンピュータではなく複数台のコンピュータで実現するようにしても良い。

また、上で説明した各テーブルの構成は一例であって、必ずしも上記のような構成でなければならないわけではない。さらに、処理フローにおいても、処理結果が変わらなければ処理の順番を入れ替えることも可能である。

また、上では、入力音声データをＰＤＡ５から中央装置３へ送信し、中央装置３にて、テキスト変換処理、正解データとの照合処理、再検査項目の特定処理、及び、不一致項目テーブルへ登録すべきレコードの生成処理を実施する例を説明したが、これらの処理の少なくとも一部の処理をＰＤＡ５にて実施するような構成を採用することも可能である。

また、上では、部品の型番を回答させる第１の検査と、部品の型番の正否を回答させる第２の検査との２段階の検査を行う例を説明したが、第１の検査の後、直ちに第２の検査に移るのではなく、照合結果が不一致の項目について、第１の検査をやり直すような構成を採用することも可能である。

なお、中央装置３は、図１６のようなコンピュータ装置であって、メモリ２５０１（記憶装置）とＣＰＵ２５０３（処理装置）とハードディスク・ドライブ（ＨＤＤ）２５０５と表示装置２５０９に接続される表示制御部２５０７とリムーバブル・ディスク２５１１用のドライブ装置２５１３と入力装置２５１５とネットワークに接続するための通信制御部２５１７とがバス２５１９で接続されている。オペレーティング・システム（ＯＳ：Operating System）及び本実施の形態における処理を実施するためのアプリケーション・プログラムは、ＨＤＤ２５０５に格納されており、ＣＰＵ２５０３により実行される際にはＨＤＤ２５０５からメモリ２５０１に読み出される。必要に応じてＣＰＵ２５０３は、表示制御部２５０７、通信制御部２５１７、ドライブ装置２５１３を制御して、必要な動作を行わせる。また、処理途中のデータについては、メモリ２５０１に格納され、必要があればＨＤＤ２５０５に格納される。本発明の実施の形態では、上で述べた処理を実施するためのアプリケーション・プログラムはリムーバブル・ディスク２５１１に格納されて頒布され、ドライブ装置２５１３からＨＤＤ２５０５にインストールされる。インターネットなどのネットワーク及び通信制御部２５１７を経由して、ＨＤＤ２５０５にインストールされる場合もある。このようなコンピュータ装置は、上で述べたＣＰＵ２５０３、メモリ２５０１などのハードウエアとＯＳ及び必要なアプリケーション・プログラムとが有機的に協働することにより、上で述べたような各種機能を実現する。なお、ＰＤＡ５は、ＨＤＤ２５０５やドライブ装置２５１３を有さないが、基本的には図１６と同様の構成を有する。

本発明の一実施の形態に係る検査システムの概要を示す図である。 ＰＤＡの機能ブロック図である。 検査データ格納部に格納されるチェック項目テーブルの一例を示す図である。 項目一覧の一例を示す図である。 検査データ格納部に格納される第１の検査テーブルの一例を示す図である。 検査データ格納部に格納される第２の検査テーブルの一例を示す図である。 テキスト変換用データ格納部に格納されるテキスト変換用音声データの一例を示す図である。 照合結果格納部に格納される照合結果テーブルの一例を示す図である。 照合結果格納部に格納される不一致項目テーブルの一例を示す図である。 本検査システムの処理フロー（第１の部分）を示す図である。 本検査システムの処理フロー（第２の部分）を示す図である。 音声入力受付処理の処理フローを示す図である。 本検査システムの処理フロー（第３の部分）を示す図である。 本検査システムの処理フロー（第４の部分）を示す図である。 本検査システムの処理フロー（第５の部分）を示す図である。 コンピュータの機能ブロック図である。

符号の説明

１ ネットワーク
３ 中央装置
５ａ，５ｂ ＰＤＡ
６ａ，６ｂ ハンズフリーセット
７ 二次元コードリーダ
８ プリンタ
９ ランプ
３１ データ受信部 ３３ 検査データ処理部
３５ テキスト変換処理部 ３７ 照合処理部
３９ 二次元コード処理部 ４１ 検査データ格納部
４３ テキスト変換用データ格納部 ４５ 照合結果格納部
５１ 通信処理部 ５３ 制御部
５５ 音声データ入力部 ５７ 音声データ出力部
５９ 検査データ格納部

Claims (7)

1. マイク及びイヤホンを備え且つ通信機能を有する携帯端末と、
   前記携帯端末と通信可能な中央装置と、
   を有し、
   前記中央装置は、
   所定の装置に含まれる部品毎に、当該部品の確認指示を含む第１音声データと、正解とみなされる部品に関するデータである正解データとを格納する検査データ格納部
   を有し、
   前記携帯端末は、
   特定の装置の識別情報の入力を受け付け、当該特定の装置に含まれる複数の部品の各々に対応する前記第１音声データを取得する第１音声データ取得手段と、
   前記特定の装置に含まれる複数の部品の各々について、当該部品に対応する前記第１音声データに係る音声を前記イヤホンを介して出力する音声処理手段と、
   を有し、
   前記携帯端末と前記中央装置とのうちいずれかが、
   前記特定の装置に含まれる複数の部品の各々について、前記マイクを介して入力され且つ当該部品の確認結果を含む第１入力音声データと当該部品に対応する前記正解データとに基づき、当該部品の正否を判断する第１判断手段
   を有し、
   前記正解データが、正解とみなされる部品の型番を表すデータであり、
   前記確認指示が、前記確認結果として前記部品の型番を回答するように促す指示であり、
   前記検査データ格納部が、前記部品の型番の正否を回答するように促す再確認指示を含む第２音声データをさらに格納し、
   前記携帯端末が、
   前記特定の装置に含まれる複数の部品のうち、前記第１判断手段により正しいと判断された部品以外の部品である再確認部品の各々に対応する前記第２音声データを取得する手段と、
   前記再確認部品の各々について、当該再確認部品に対応する前記第２音声データに係る音声を前記イヤホンを介して出力する手段と、
   をさらに有し、
   前記携帯端末と前記中央装置とのうちいずれかが、
   前記再確認部品の各々について、前記マイクを介して入力された第２入力音声データに基づき、当該再確認部品の正否を判断する第２判断手段
   をさらに有する検索システム。
2. 前記第１判断手段が、
   前記第１入力音声データに対してテキスト変換処理を実施することにより、当該第１入力音声データの音声波形に対応する文字列を含む入力テキストデータを生成するテキスト変換手段と、
   前記入力テキストデータと前記部品に対応する前記正解データとが一致するか否か判断し、前記入力テキストデータと前記部品に対応する前記正解データとが一致する場合、当該部品は正しい部品であると判断する手段と、
   を有する請求項１記載の検査システム。
3. 前記中央装置が、
   音声波形のデータと当該音声波形に対応する文字列とを含むテキスト変換用音声データを格納する変換用データ格納部
   をさらに有し、
   前記テキスト変換手段が、
   前記変換用データ格納部に格納されている前記テキスト変換用音声データのうち、前記第１入力音声データと音声波形が一致する前記テキスト変換用音声データを特定する変換用データ特定手段と、
   特定した前記テキスト変換用音声データに含まれる前記文字列を、前記第１入力音声データの音声波形に対応する文字列として前記入力テキストデータを生成する手段と、
   を有する請求項２記載の検査システム。
4. 前記検査データ格納部が、前記所定の装置に含まれる部品毎に音声入力時間をさらに格納し、
   前記音声処理手段が、
   前記部品に対応する前記第１音声データに係る音声を出力してから当該部品に対応する前記音声入力時間が経過するまでの間、音声入力が可能となるように前記マイクを制御する手段
   を有する請求項３記載の検査システム。
5. 前記携帯端末と前記中央装置とのうちいずれかが、
   前記再確認部品のうち、前記第２判断手段により正しいと判断された部品以外の部品を特定するための１次元コード又は２次元コードを生成する手段
   をさらに有し、
   前記携帯端末が、
   前記携帯端末に接続される印刷装置に前記１次元コード又は２次元コードを印刷させる手段
   をさらに有する請求項１記載の検索システム。
6. 前記識別情報が、１次元コード又は２次元コード形式のデータであり、
   前記携帯端末が、
   前記１次元コード又は２次元コードを読み取る手段
   を有する請求項１記載の検索システム。
7. 前記検査データ格納部が、前記所定の装置毎に当該所定の装置の識別情報と当該所定の装置に含まれる部品のリストとをさらに格納しており、
   前記第１音声データ取得手段が、
   前記特定の装置の識別情報に対応する前記リストに含まれる部品の各々に対応する前記第１音声データを前記検査データ格納部から取得する手段
   を有する請求項１記載の検索システム。

Images