JP2006337480A - System and method for supporting operation - Google Patents

System and method for supporting operation Download PDF

Info

Publication number
JP2006337480A
JP2006337480A JP2005159168A JP2005159168A JP2006337480A JP 2006337480 A JP2006337480 A JP 2006337480A JP 2005159168 A JP2005159168 A JP 2005159168A JP 2005159168 A JP2005159168 A JP 2005159168A JP 2006337480 A JP2006337480 A JP 2006337480A
Authority
JP
Japan
Prior art keywords
phrase
voice
evaluation
input
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005159168A
Other languages
Japanese (ja)
Other versions
JP4718246B2 (en
Inventor
和裕 ▲高▼橋
Kazuhiro Takahashi
Ryuichi Fujita
龍一 藤田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KUBO IND
KUBO KOGYO KK
Original Assignee
KUBO IND
KUBO KOGYO KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KUBO IND, KUBO KOGYO KK filed Critical KUBO IND
Priority to JP2005159168A priority Critical patent/JP4718246B2/en
Publication of JP2006337480A publication Critical patent/JP2006337480A/en
Application granted granted Critical
Publication of JP4718246B2 publication Critical patent/JP4718246B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a system for supporting operations that can properly evaluate "vocal confirmation" and give guidance for improvement. <P>SOLUTION: The system 1 for supporting operations that perform evaluation related to vocal confirmation that an operator performs includes: a speech input means 11 of inputting a speech of the operator; a speech recognizing means 12 of recognizing the speech; a word/phrase discriminating means 13 of discriminating a specified word or phrase in the speech; a word/phrase evaluating means 14 of performing the evaluation related to the vocal confirmation based upon the specified word or phrase; and an evaluation storage means 15 of storing an evaluation result. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、作業者が実施する声だし確認に関する評価を行う業務支援システムおよび業務支援方法に関し、具体的には、医療現場、工事現場、建築現場、造船所、機械等の製造現場、あるいは自動車の運転等の業務を行う際に使用される業務支援システムおよび業務支援方法に関するものである。   The present invention relates to a business support system and a business support method for performing evaluation related to voice confirmation performed by an operator. Specifically, the present invention relates to a medical site, a construction site, a building site, a shipyard, a manufacturing site such as a machine, or an automobile. The present invention relates to a business support system and a business support method used when performing business such as driving.

医療現場、工事現場、建築現場、造船所、機械等の製造現場、あるいは自動車の運転等の業務を行う際、各業務におけるミス防止および安全対策は、非常に重要な事項であり、それぞれの業務において様々な方法が採用されている。   When performing operations such as medical sites, construction sites, building sites, shipyards, machinery manufacturing sites, or automobile operations, error prevention and safety measures in each business are very important matters. Various methods have been adopted.

各業務におけるミス防止および安全対策の一つの方法としては、例えば、指差呼称等の「声だし確認」があげられる。「声だし確認」とは、指さし呼称、指差呼称、確認喚呼、コメンタリ運転等いろいろな名称で呼ばれる、安全確認の方法であり、通常、「指さし動作」を伴って行われる。   One method of preventing mistakes and safety measures in each business is, for example, “voice check” such as pointing and calling. “Voice check” is a method of safety check called by various names such as pointing call, pointing call, confirmation call, commentary driving, etc., and is usually performed with “pointing action”.

上述した「声だし確認」は、実施すれば確かに効果はあるが、「声だし確認」を実施するか否かは、作業者本人に委ねられている場合が大半である。したがって、作業者がその業務に慣れてくると、「声だし確認」を怠ったり失念したりすることが多くなるという問題があった。   The above-mentioned “voice check” is surely effective if executed, but whether or not to perform “voice check” is mostly left to the operator himself / herself. Therefore, there is a problem that when the worker gets used to the work, the person often neglects or forgets to confirm the voice.

また、実際の業務箇所に管理者が存在し、作業者の「声だし確認」の状況を管理・監督する場合もある。しかしながら、かかる管理等だけのために、管理者がその業務箇所に長時間待機することは、事実上困難である。したがって、管理者が作業者の「声だし確認」の状況を正確に把握・評価することは難しく、かかる業務の改善指導等を適切に行うことができないという問題があった。   In addition, there is a case where an administrator exists in the actual business location and manages / supervises the status of the worker's “voice confirmation”. However, it is practically difficult for an administrator to wait for a long time at the business location only for such management. Therefore, it is difficult for the manager to accurately grasp and evaluate the situation of the “voice check” of the worker, and there is a problem that it is not possible to appropriately provide improvement guidance for such work.

以上のことから、従来においては、「声だし確認」は結果的に作業者任せとなり、業務内における「声だし確認」の定着は進まず、管理者側からもその評価や改善指導を行うことは非常に困難であった。   From the above, in the past, “confirming the voice” will be left to the worker as a result, and “confirmation of the voice” will not be established in the work, and the manager will also evaluate and give guidance for improvement. Was very difficult.

ところで、音声認識を用いて点検業務を行うシステムとして、特許文献1に記載の技術が知られている。しかしながら、この技術は、単に声だし内容を照会して確認するだけであって、「声だし確認」に関する評価や改善指導等を行うものではない。   By the way, the technique of patent document 1 is known as a system which performs inspection work using voice recognition. However, this technique merely checks and confirms the content of the voice, and does not perform evaluation or guidance for improvement on “voice check”.

特開2000−112494号公報JP 2000-112494 A

そこで、本発明は、上記従来の問題を解決するためになされたものであって、「声だし確認」の評価や改善指導を適切に行うことが可能である、業務支援システムおよび業務支援方法を提供することを課題とする。   Therefore, the present invention has been made in order to solve the above-described conventional problems, and provides a business support system and a business support method capable of appropriately performing evaluation and improvement guidance of “voice check”. The issue is to provide.

本発明は、上記課題を解決するためになされたものであり、作業者が実施する声だし確認に関する評価を行う業務支援システムであって、前記作業者の音声を入力する音声入力手段と、前記音声を認識する音声認識手段と、前記音声中の所定語句を識別する語句識別手段と、前記所定語句に基づき声だし確認に関する評価を行う語句評価手段と、前記評価結果を記憶する評価記憶手段とを備えたことを特徴としている。   The present invention has been made in order to solve the above-described problem, and is a business support system that performs evaluation related to voice confirmation performed by an operator, and includes voice input means for inputting the voice of the worker, Speech recognition means for recognizing speech, phrase identification means for identifying a predetermined phrase in the speech, phrase evaluation means for evaluating speech confirmation based on the predetermined phrase, and evaluation storage means for storing the evaluation result It is characterized by having.

このような構成によれば、かかる業務支援システムを利用することによって、管理者等の存在がなくとも、作業者が実施する声だし確認の評価・記憶等を行うことができる。つまり、この業務支援システムの評価・記憶結果に基づいて、管理者が作業者の「声だし確認」の状況を正確に把握・評価することができる。したがって、管理者側から「声だし確認」に関する評価や改善指導を行うことが可能となるため、「声だし確認」が作業者任せとならず、業務内における「声だし確認」の定着を効果的に進めることができる。   According to such a configuration, by using such a business support system, it is possible to evaluate and store voice confirmation performed by an operator without the presence of an administrator or the like. That is, the manager can accurately grasp and evaluate the situation of the “voice check” of the worker based on the evaluation / memory result of the business support system. Therefore, it is possible for managers to conduct evaluations and guidance for improvement regarding “voice check”, so “voice check” is not left to the operator, and it is effective to establish “voice check” within the work. Can proceed.

また、本発明にかかる業務支援システムは、前記音声入力手段、前記音声認識手段、前記語句識別手段、前記語句評価手段、および前記評価記憶手段が、一つの携帯端末装置内に設けられている構成であることが好ましい。   In the business support system according to the present invention, the voice input unit, the voice recognition unit, the phrase identification unit, the phrase evaluation unit, and the evaluation storage unit are provided in one portable terminal device. It is preferable that

この好ましい構成によれば、作業者が携帯に便利な業務支援システムとすることができる。   According to this preferable configuration, it is possible to provide a business support system that is convenient for the operator to carry.

また、本発明にかかる業務支援システムは、通信機能を有する第二携帯端末装置と、前記第二携帯端末装置と通信可能なコンピュータとを用いて構成されており、前記第二携帯端末装置が、前記音声入力手段と前記音声認識手段と前記語句識別手段とを備え、前記コンピュータが、前記語句評価手段と前記評価記憶手段とを備えている構成であることが好ましい。   The business support system according to the present invention is configured using a second mobile terminal device having a communication function and a computer capable of communicating with the second mobile terminal device, and the second mobile terminal device is Preferably, the voice input unit, the voice recognition unit, and the phrase identification unit are provided, and the computer includes the phrase evaluation unit and the evaluation storage unit.

この好ましい構成によれば、前記第二携帯端末装置を比較的簡易な構成とすることが可能となる。また、簡易な構成であるため、作業者がより容易に携帯可能となる。さらに、前記コンピュータを用いて語句評価等を行うことができるため、より詳細な評価等を行うことが可能となる。   According to this preferable configuration, the second portable terminal device can be configured to be relatively simple. Moreover, since it is a simple structure, an operator can carry more easily. Furthermore, since it is possible to perform word evaluation and the like using the computer, more detailed evaluation and the like can be performed.

また、本発明にかかる業務支援システムは、前記語句識別手段において、前記音声中に前記所定語句が含まれていないと判断された場合、前記作業者に対し前記所定語句が含まれていないことを伝達する不明確伝達手段が設けられている構成であることが好ましい。   Further, in the business support system according to the present invention, when the phrase identifying unit determines that the predetermined phrase is not included in the voice, the predetermined phrase is not included for the worker. It is preferable that an unclear transmission means for transmitting is provided.

この好ましい構成によれば、作業者自身がリアルタイムで音声入力状況を把握可能となって、音声入力のミスを無くすことができるため、より信頼性の高い業務支援システムを構成することが可能となる。   According to this preferable configuration, since the operator can grasp the voice input situation in real time and eliminate the mistake of voice input, it is possible to configure a more reliable business support system. .

さらに、本発明は、上記課題を解決するためになされたものであり、作業者が実施する声だし確認に関する評価を行う業務支援方法であって、前記作業者の音声を入力する音声入力工程と、前記音声を認識する音声認識工程と、前記音声中の所定語句を識別する語句識別工程と、前記所定語句に基づき声だし確認に関する評価を行う語句評価工程と、前記評価結果を記憶する評価記憶工程とを備えたことを特徴としている。   Furthermore, the present invention is made in order to solve the above-described problem, and is a business support method for performing an evaluation related to voice confirmation performed by an operator, and a voice input step for inputting the voice of the worker; A speech recognition step for recognizing the speech, a phrase identification step for identifying a predetermined phrase in the speech, a phrase evaluation step for evaluating speech confirmation based on the predetermined phrase, and an evaluation memory for storing the evaluation result And a process.

また、本発明にかかる業務支援方法は、前記語句識別工程において、前記音声中に前記所定語句が含まれていないと判断された場合、前記作業者に対し前記所定語句が含まれていないことを伝達する不明確伝達工程が行われる構成であることが好ましい。   In the business support method according to the present invention, when it is determined in the phrase identifying step that the predetermined phrase is not included in the speech, the operator does not include the predetermined phrase. It is preferable that the unclear transmission process to transmit is performed.

本発明によれば、「声だし確認」の評価や改善指導を適切に行うことが可能である、業務支援システムおよび業務支援方法を得ることができる。   According to the present invention, it is possible to obtain a business support system and a business support method that can appropriately perform “voice confirmation” evaluation and improvement guidance.

以下、図面に基づいて、本発明の実施形態を説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

<第一実施形態>
まず、本発明の第一実施形態にかかる業務支援システムについて説明する。図1は、本発明の第一実施形態にかかる業務支援システムを構成する装置の一例を示す概略図である。具体的には、携帯端末装置1を用いて構成された業務支援システムを示している。この携帯端末装置1(本発明の「業務支援システム」に相当)は、作業者が各種業務を実施する際に、携帯可能に構成されている。例えば、上着の胸ポケット内に挿入可能な大きさに構成されている。そして、この業務支援システムは、作業者が行う「声だし確認」の評価や改善指導を適切に行うことが可能であるべく構成されている。
<First embodiment>
First, the business support system according to the first embodiment of the present invention will be described. FIG. 1 is a schematic diagram showing an example of an apparatus constituting the business support system according to the first embodiment of the present invention. Specifically, a business support system configured using the mobile terminal device 1 is shown. The mobile terminal device 1 (corresponding to the “business support system” of the present invention) is configured to be portable when an operator performs various business operations. For example, it is configured such that it can be inserted into a breast pocket of an outerwear. The business support system is configured so as to be able to appropriately perform evaluation and guidance for improvement of “voice check” performed by the worker.

図1に示すように、本実施形態にかかる携帯端末装置1(業務支援システム)は、音声入力手段11、音声認識手段12、語句識別手段13、語句評価手段14、評価記憶手段15、および不明確伝達手段16を有している。この携帯端末装置1としては、業務支援システム専用の端末(専用端末)として構成する場合の他に、例えば、携帯電話、PHS、PDA等を用いることも可能である。   As shown in FIG. 1, the portable terminal device 1 (business support system) according to the present embodiment includes a voice input unit 11, a voice recognition unit 12, a phrase identification unit 13, a phrase evaluation unit 14, an evaluation storage unit 15, and a It has a clear transmission means 16. For example, a mobile phone, a PHS, or a PDA can be used as the mobile terminal device 1 in addition to the case where the mobile terminal device 1 is configured as a terminal (dedicated terminal) dedicated to the business support system.

音声入力手段11は、作業者が「声だし確認」を行う際における音声の入力を行うものであり、マイクロフォン等(例えば、イヤホンマイク等)を用いて構成される。携帯電話やPHS等であれば、予めマイクロフォンが設けられているため、携帯電話等を利用する場合は、この予め設けられたマイクロフォンを用いて音声入力手段11が構成される。なお、イヤホンマイクが用いられる場合、その一部たるマイク部が音声入力手段11に相当する。   The voice input means 11 is used to input voice when the operator performs “voice check”, and is configured using a microphone or the like (for example, an earphone microphone or the like). In the case of a mobile phone, PHS, or the like, since a microphone is provided in advance, when using a mobile phone or the like, the voice input means 11 is configured using the microphone provided in advance. Note that when an earphone microphone is used, a microphone part as a part thereof corresponds to the voice input unit 11.

音声認識手段12は、音声入力手段11を介して入力された音声を認識するためのものであって、この音声認識手段12は、音声認識エンジン等を用いて構成されている。ここで、音声認識エンジンとは、音声入力手段11を介して入力された音声をテキストに変換したり、入力された音声でアプリケーションの操作を行ったりすることが可能なソフトウエア(音声認識ソフトウエア)のことである。   The voice recognition means 12 is for recognizing the voice input via the voice input means 11, and this voice recognition means 12 is configured using a voice recognition engine or the like. Here, the speech recognition engine is software (speech recognition software) that can convert speech input via the speech input means 11 into text, or operate an application with the input speech. ).

語句識別手段13は、入力された音声中に、「声だし確認」にて使用される語句(語あるいは句)(本発明の「所定語句」に相当)が含まれているか否かを識別する手段である。本実施形態においては、この語句(所定語句)のデータ(以下、「所定語句データベース」ともいう。)が、予め携帯端末装置1中のメモリ(記憶手段)に記憶されている。語句識別手段13は、音声認識エンジンを用いて認識された(文字に変換された)語句と、メモリに記憶された所定語句データベース中の語句(所定語句)とを対比して、入力された音声中に所定語句が存在するか否かを判断する。   The phrase identifying means 13 identifies whether or not the input speech includes a phrase (word or phrase) used in “voice check” (corresponding to “predetermined phrase” of the present invention). Means. In the present embodiment, data of this phrase (predetermined phrase) (hereinafter also referred to as “predetermined phrase database”) is stored in advance in a memory (storage means) in the mobile terminal device 1. The phrase identifying unit 13 compares the phrase recognized (converted into characters) using the speech recognition engine and the phrase (predetermined phrase) in the predetermined phrase database stored in the memory, and receives the input speech. It is determined whether or not a predetermined phrase is present.

語句評価手段14は、入力された音声中の語句(語句識別手段13にて所定語句であると判断された語句)の一つ一つに対して、その評価を行う手段である。本実施形態においては、それぞれの語句(所定語句)に対する評価(重み付け)に関するデータ(以下、「評価データベース」ともいう。)が、予め携帯端末装置1中のメモリ(記憶手段)に記憶されている。つまり、語句評価手段14は、評価データベースを用いて、入力された各語句(所定語句)についての評価を行う。   The phrase evaluation means 14 is a means for evaluating each of the phrases in the input speech (phrases determined to be a predetermined phrase by the phrase identification means 13). In the present embodiment, data (hereinafter also referred to as “evaluation database”) relating to evaluation (weighting) for each word (predetermined word) is stored in advance in a memory (storage means) in the mobile terminal device 1. . That is, the phrase evaluation means 14 performs evaluation for each input phrase (predetermined phrase) using the evaluation database.

評価記憶手段15は、入力された語句(所定語句)とその入力時の各種データ(入力日時等)、およびその評価結果とを関連付けて記憶する箇所(メモリ)である。つまり、この評価記憶手段15を構成するメモリ中においては、入力された語句(所定語句)に関するデータベース(入力日時、評価結果等を含むデータベース)が構成されることになる。   The evaluation storage means 15 is a location (memory) that stores an input word / phrase (predetermined word / phrase), various data at the time of input (input date / time, etc.) and an evaluation result in association with each other. That is, in the memory constituting the evaluation storage means 15, a database (a database including the input date and time, evaluation results, etc.) relating to the input phrase (predetermined phrase) is configured.

不明確伝達手段16は、音声認識手段12にて音声の入力は認識されたものの、その入力音声中に所定語句を識別できなかった場合において、その旨(以下、「不明確である旨」ともいう。)を作業者に伝達するための手段である。この「入力音声中に所定語句を識別できなかった場合」としては、音声入力はされたものの発音の具合や周りの雑音等の影響で語句識別手段13が所定語句を識別できなかった場合や、音声入力はされたものの所定語句を正確に入力していない場合や、周りの雑音によって誤入力が行われた場合等があげられる。不明確伝達手段16にて不明確である旨を作業者に伝達する方法としては、具体的には、音で伝達する場合、振動で伝達する場合、映像で伝達する場合、あるいはこれらの方法を組み合わせて伝達する場合等があげられる。したがって、本実施形態にかかる不明確伝達手段16は、スピーカ、振動発生手段(モータあるいは振動子等)、およびディスプレイの少なくとも一つを用いて構成される。   When the voice recognition means 12 recognizes the input of the voice but the predetermined word / phrase cannot be identified in the input voice, the unclear transmission means 16 (hereinafter referred to as “unclear”). It is a means for transmitting to the worker. As this “when the predetermined phrase cannot be identified in the input speech”, the phrase identifying means 13 cannot identify the predetermined phrase due to the influence of the sound generation, surrounding noise, etc., although the speech is input, There are cases where voice input has been made but a predetermined word / phrase has not been input correctly, or an erroneous input has been made due to ambient noise. As a method of transmitting to the worker that the unclearness is unclear by the unclear transmission means 16, specifically, when transmitting by sound, transmitting by vibration, transmitting by video, or these methods are used. For example, it may be transmitted in combination. Therefore, the ambiguity transmission means 16 according to the present embodiment is configured using at least one of a speaker, vibration generation means (motor or vibrator), and a display.

なお、この図1については特に示さなかったが、本実施形態にかかる携帯端末装置1は、当然のことながら、携帯端末装置1を操作するための各種のボタン・スイッチ等が設けられており、これらのボタン等を用いて、電源のON/OFF、各部の調整(例えば、スピーカ(不明確伝達手段16)の音量調整等)が行われる。また、携帯電話等を本実施形態にかかる携帯端末装置1として使用する場合には、当然のことならが、一般的な携帯電話としての構成および機能を有する。   Although not particularly shown in FIG. 1, the mobile terminal device 1 according to the present embodiment is naturally provided with various buttons and switches for operating the mobile terminal device 1. Using these buttons and the like, power ON / OFF and adjustment of each part (for example, volume adjustment of a speaker (unclear transmission means 16), etc.) are performed. Moreover, when using a mobile phone etc. as the portable terminal device 1 concerning this embodiment, it has a structure and function as a general mobile phone as a matter of course.

次に、図1に加え、図2を用いて、本実施形態にかかる携帯端末装置1の使用方法等について説明する。この図2は、本発明の第一実施形態にかかる業務支援システム(携帯端末装置1)を使用する際のフローチャートを示したものである。なお、ここでは、業務として自動車の運転を行う際に携帯端末装置1を使用する場合を例示して説明する。   Next, using FIG. 2 in addition to FIG. 1, a method of using the mobile terminal device 1 according to the present embodiment will be described. FIG. 2 shows a flowchart when the business support system (mobile terminal device 1) according to the first embodiment of the present invention is used. Here, a case where the mobile terminal device 1 is used when driving a car as a business will be described as an example.

本実施形態にかかる携帯端末装置1を使用する場合には、作業者の声が届く箇所(作業者の声を音声入力手段11がひろえる箇所)に、作業者が携帯端末装置1を装着する。例えば、作業者の肩部あるいは胸部に装着する。なお、音声入力手段11が、携帯端末装置1(本体)に接続されたイヤホンマイク等を用いて構成される場合には、携帯端末装置1の装着位置は特に限定されない。   When the portable terminal device 1 according to the present embodiment is used, the worker wears the portable terminal device 1 at a place where the voice of the worker reaches (a place where the voice input means 11 picks up the voice of the worker). . For example, it is worn on the shoulder or chest of the operator. When the voice input unit 11 is configured using an earphone microphone or the like connected to the mobile terminal device 1 (main body), the mounting position of the mobile terminal device 1 is not particularly limited.

作業者が携帯端末装置1を装着した状態で、携帯端末装置1の電源スイッチ等(図示省略)を操作して、携帯端末装置1を起動させる(ステップS201)と、携帯端末装置1が、音声入力待機状態(ステップS202,S208)となる。つまり、携帯端末装置1は、音声入力手段11において、何らかの音声入力が確認されるまで(S203にて「Yes」と判断されるまで)、音声入力ループ(S202,S208)を繰り返して待機状態を維持することとなる。本実施形態において、音声が入力されているか否かは、音声認識手段12を用いて行われる。   When an operator operates the power switch or the like (not shown) of the mobile terminal device 1 with the mobile terminal device 1 mounted thereon, the mobile terminal device 1 is activated (step S201). It will be in an input standby state (step S202, S208). That is, the portable terminal device 1 repeats the voice input loop (S202, S208) until the voice input unit 11 confirms any voice input (until “Yes” is determined in S203), and enters the standby state. Will be maintained. In the present embodiment, whether or not a voice is input is determined using the voice recognition means 12.

携帯端末装置1を装着した作業者は、例えば、自動車に乗り込む際に、「前方ヨシ」「後方ヨシ」等の「声だし確認」を行ってから乗車する。そして、携帯端末装置1を構成する音声認識手段12が、音声入力手段11を介して「音声」入力を検知(認識)すると、図2のフローチャートに従い(S203にて「Yes」と判断されて)、携帯端末装置1においては、次いでステップS204以降の処理が行われる。一方、作業者が「音声」を発したにも関わらず、音声認識手段12において「音声」入力を検知(認識)できない場合(S203にて「No」の場合)には、携帯端末装置1は音声入力ループ(S202,S208)を繰り返すこととなる。   For example, when the operator wearing the mobile terminal device 1 gets into the automobile, the operator gets on the vehicle after performing “voice check” such as “frontward reed” and “rearward reed”. Then, when the voice recognition unit 12 constituting the mobile terminal device 1 detects (recognizes) “voice” input via the voice input unit 11, it follows the flowchart of FIG. 2 (determined as “Yes” in S 203). Then, in the mobile terminal device 1, the processing after step S204 is performed. On the other hand, in the case where the voice recognition unit 12 cannot detect (recognize) the “voice” input (“No” in S203) even though the worker utters “voice”, the mobile terminal device 1 The voice input loop (S202, S208) will be repeated.

作業者が自動車に乗車した後の運転中においても、必要に応じて作業者は、「制限速度40、速度ヨシ」、「車線変更、後方ヨシ」等の「声だし確認」を行い、その「声だし確認」のたびに、携帯端末装置1の音声認識手段12においては、音声入力がなされたか否かの判断が行われる(S203)。そして、その判断結果に基づいて、ステップS204以降の処理あるいは音声入力ループ(S202,S208)が行われることとなる。   Even during the operation after the worker gets in the car, the worker performs “voice check” such as “speed limit 40, speed reed”, “lane change, rear reed” as necessary. Each time “voice check” is performed, the voice recognition unit 12 of the mobile terminal device 1 determines whether or not a voice input has been made (S203). Then, based on the determination result, the processing after step S204 or the voice input loop (S202, S208) is performed.

音声入力手段11を介して音声入力がなされていると、音声認識手段12において判断された(S203にて「Yes」と判断された)場合には、次いで、語句識別手段13を用いて、その入力された音声中に「所定語句」が存在するか否かの判断が行われる(ステップS204)。先にも説明したように、本実施形態においては、携帯端末装置1中のメモリに所定語句データベースが記憶されており、語句識別手段13によって、音声認識手段12(音声認識エンジン)を用いて認識された(文字に変換された)語句(音声入力された語句)と、所定語句データベース中の所定語句とが対比され、その結果に基づいて、入力された音声中に所定語句が存在するか否かが判断される(S204)。   If it is determined by the voice recognition means 12 that the voice input is made through the voice input means 11 ("Yes" is determined in S203), then the phrase identification means 13 is used to It is determined whether or not a “predetermined phrase” exists in the input voice (step S204). As described above, in the present embodiment, the predetermined phrase database is stored in the memory in the mobile terminal device 1 and is recognized by the phrase recognition unit 13 using the speech recognition unit 12 (speech recognition engine). The phrase (converted into characters) (speech input phrase) is compared with the predetermined phrase in the predetermined phrase database, and based on the result, whether or not the predetermined phrase exists in the input speech Is determined (S204).

語句識別手段13にて、入力された音声中に所定語句が存在すると判断された場合(S204にて「Yes」の場合)には、次いでステップS205以降の処理が行われ、所定語句が存在しないと判断された場合(S204にて「No」の場合)には、不明確伝達処理が行われる(ステップS207)。   If the phrase identifying unit 13 determines that a predetermined phrase is present in the input voice (“Yes” in S204), then the processing from step S205 is performed, and the predetermined phrase does not exist. Is determined (in the case of “No” in S204), unclear transmission processing is performed (step S207).

不明確伝達処理とは、携帯端末装置1を構成する不明確伝達手段16を用いて、作業者に対して、明確な音声入力がなされていない旨を伝達する処理である。この不明確伝達処理(S207)は、「音声」入力はなされたものの、作業者の発声の仕方や周りの雑音等の影響によって、語句識別手段13にて音声中の所定語句を識別できない場合に、スピーカ、振動発生手段、あるいはディスプレイ等を用いて、入力された音声が不明確である旨を作業者に伝達する処理である。つまり、音、振動、あるいは画像等を用いて、作業者に対して入力された音声が不明確である旨を作業者に伝達する処理である。例えば、本実施形態にかかる携帯端末装置1の一部(音声入力手段11および不明確伝達手段16)がイヤホンマイクにて構成されている場合、不明確伝達手段16を成すイヤホン部からの音によって、作業者に対し、入力された音声が不明確である旨が伝達される(S207)。不明確伝達処理が行われた後は、ステップS202以降の処理が繰り返し行われる。   The unclear transmission process is a process of transmitting to the operator that no clear voice input has been made using the unclear transmission means 16 constituting the mobile terminal device 1. This ambiguity transmission process (S207) is performed when “speech” input has been made, but the phrase identification means 13 cannot identify a predetermined phrase in the speech due to the influence of the worker's utterance, surrounding noise, etc. , A process of transmitting to the operator that the input voice is unclear using a speaker, vibration generating means, display, or the like. That is, it is a process of transmitting to the worker that the voice input to the worker is unclear using sound, vibration, or an image. For example, when a part of the mobile terminal device 1 according to the present embodiment (the voice input unit 11 and the unclear transmission unit 16) is configured with an earphone microphone, the sound from the earphone unit that forms the unclear transmission unit 16 is used. The operator is informed that the input voice is unclear (S207). After the unclear transmission process is performed, the processes after step S202 are repeated.

語句識別手段13にて、入力された音声中に所定語句が存在すると判断された場合(S204にて「Yes」の場合)には、語句評価手段14を用いて、入力された音声に関する評価が行われる(ステップS205)。先にも説明したように、語句評価手段14は、入力された音声中の語句(語句識別手段13にて所定語句であると判断された語句)の一つ一つに対して、その評価を行う手段である。本実施形態においては、各所定語句に対する評価(重み付け)に関する評価データベースが、予め携帯端末装置1中のメモリ(記憶手段)に記憶されているので、この評価データと入力された所定語句とを用いて、語句評価手段14が、入力された音声中の所定語句についての評価を行う(S205)。   When the phrase identifying unit 13 determines that a predetermined phrase exists in the input voice (in the case of “Yes” in S204), the phrase evaluation unit 14 is used to evaluate the input voice. Performed (step S205). As described above, the phrase evaluation means 14 evaluates each of the phrases in the input speech (phrases determined to be predetermined phrases by the phrase identification means 13). Means to do. In the present embodiment, an evaluation database relating to evaluation (weighting) for each predetermined phrase is stored in advance in a memory (storage means) in the mobile terminal device 1, so that this evaluation data and the input predetermined phrase are used. Then, the phrase evaluation unit 14 evaluates a predetermined phrase in the input voice (S205).

例えば、評価データベース中には、入力音声中の「前方」「後方」「40」という所定語句には「2点」、「制限速度」という所定語句には「3点」、「ヨシ」という所定語句には「1点」というように、それぞれの所定語句に対する評価(評価ポイント)に関するデータが記憶されている。そして、語句評価手段14においては、作業者が音声入力する所定語句と、上記評価データベースとを用いて、作業者の音声入力(「声だし確認」)に対する評価(評価ポイントの演算)が行われることとなる(S205)。   For example, in the evaluation database, the predetermined words “front”, “rear”, “40” in the input speech are “2 points”, the predetermined words “limit speed” are “3 points”, “Yoshi”. The word / phrase stores data related to evaluation (evaluation point) for each predetermined word / phrase, such as “1 point”. Then, in the phrase evaluation means 14, evaluation (calculation of evaluation points) is performed on the worker's voice input ("voice check") using the predetermined phrase that the worker inputs by voice and the evaluation database. (S205).

語句評価手段14にて作業者が入力する音声に関する評価が行われた後には、評価記憶手段15において、入力された所定語句とその入力時の各種データ(入力日時等)、およびその評価結果(語句評価手段14にて得られる結果)とを関連付けて、所定語句等に関する集計管理が行われる(ステップS206)。つまり、この評価記憶手段15を構成するメモリ中に、入力された所定語句に関するデータベース(入力日時、評価結果等を含むデータベース)が構成されることになる。   After the phrase evaluation means 14 evaluates the voice input by the operator, the evaluation storage means 15 inputs the predetermined phrase and various data (input date and time) at the time of input, and the evaluation result ( (Results obtained by the phrase evaluation means 14) are associated with each other, and tabulation management regarding a predetermined phrase or the like is performed (step S206). That is, in the memory that constitutes the evaluation storage means 15, a database (a database including the input date and time, evaluation results, etc.) relating to the input predetermined word / phrase is configured.

この評価記憶手段15においては、例えば、実際に入力された「所定語句」、入力された「日時」、語句評価手段14にて演算された「評価ポイント」、所定時間毎(例えば1時間毎)の「評価ポイントの合計」、一日毎の「評価ポイントの合計」、一週間毎の「評価ポイントの合計」、一月毎の「評価ポイントの合計」、空白時間(音声入力を行っていない時間)に関するデータ、入力された「所定語句」の種類に関する統計データ、評価ポイントの相乗平均等が記憶されている。   In this evaluation storage means 15, for example, the “predetermined phrase” actually input, the input “date and time”, the “evaluation point” calculated by the phrase evaluation means 14, every predetermined time (for example, every hour) “Total Evaluation Points”, “Total Evaluation Points” per day, “Total Evaluation Points” per week, “Total Evaluation Points” per month, Blank time (time without voice input) ), Statistical data regarding the type of the input “predetermined phrase”, geometric average of evaluation points, and the like.

評価記憶手段15における集計管理(語句評価手段14にて行った評価結果の集計処理)を行った後には、再度、ステップS202以降の処理が行われることとなる。   After performing the aggregation management (evaluation result aggregation processing performed by the phrase evaluation unit 14) in the evaluation storage unit 15, the processes after step S202 are performed again.

本発明の第一実施形態にかかる業務支援システム(携帯端末装置1)は、以上のように構成され機能するため、次のような効果を得ることができる。   Since the business support system (mobile terminal device 1) according to the first embodiment of the present invention is configured and functions as described above, the following effects can be obtained.

本実施形態によれば、かかる業務支援システム(携帯端末装置1)を作業者が携帯することによって、管理者等の存在がなくとも、作業者が実施する声だし確認の評価・記憶等を行うことができる。つまり、この携帯端末装置1の評価・記憶結果に基づいて、管理者が作業者の「声だし確認」の状況を正確に把握・評価することができる。したがって、管理者側から「声だし確認」に関する評価や改善指導を行うことが可能となるため、「声だし確認」が作業者任せとならず、業務内における「声だし確認」の定着を効果的に進めることができる。   According to the present embodiment, when the worker carries such a business support system (mobile terminal device 1), the voice confirmation performed by the worker is evaluated and stored without the presence of an administrator or the like. be able to. That is, based on the evaluation / storage result of the mobile terminal device 1, the manager can accurately grasp and evaluate the situation of the operator's “voice check”. Therefore, it is possible for managers to conduct evaluations and guidance for improvement regarding “voice check”, so “voice check” is not left to the operator, and it is effective to establish “voice check” within the work. Can proceed.

また、本実施形態によれば、一台の携帯端末装置1にて業務支援システムが構成されているため、作業者が携帯に便利な業務支援システムとすることができる。   In addition, according to the present embodiment, since the business support system is configured by a single mobile terminal device 1, it is possible to provide a business support system that is convenient for an operator to carry.

さらに、上記実施形態においては説明していないが、携帯端末装置1は、その内部の評価記憶手段15中のデータを、必要に応じて、外部のPC(パーソナルコンピュータ)等に転送可能に構成してもよい。具体的には、携帯端末装置1にUSB端子等を設けて、携帯端末装置1(評価記憶手段15)中のデータを、直接的にPC等に転送可能に構成してもよい。このような構成によれば、携帯端末装置1を用いて得られたデータを、PCにて詳細に評価・解析することが可能となって、「声だし確認」の評価や改善指導をより効果的に行うことができる。   Further, although not described in the above embodiment, the mobile terminal device 1 is configured so that the data in the internal evaluation storage means 15 can be transferred to an external PC (personal computer) or the like as necessary. May be. Specifically, a USB terminal or the like may be provided in the mobile terminal device 1 so that data in the mobile terminal device 1 (evaluation storage unit 15) can be directly transferred to a PC or the like. According to such a configuration, it becomes possible to evaluate and analyze the data obtained using the mobile terminal device 1 in detail on the PC, and the evaluation and improvement guidance of “voice check” are more effective. Can be done automatically.

<第二実施形態>
次に、本発明の第二実施形態にかかる業務支援システムについて説明する。図3は、本発明の第二実施形態にかかる業務支援システムを構成する装置の一例を示す概略図である。具体的には、第二携帯端末装置30とサーバとして機能する複数のコンピュータ41,42等とを用いて構成された業務支援システムを示している。この業務支援システムを成す第二携帯端末装置30は、作業者が各種業務を実施する際に、携帯可能に構成されている。例えば、第一実施形態の場合(携帯端末装置1)と同様に、上着の胸ポケット内に挿入可能な大きさに構成されている。そして、この業務支援システムは、この第二携帯端末装置30等を用いることによって、作業者が行う「声だし確認」の評価や改善指導を適切に行うことが可能であるべく構成されている。
<Second embodiment>
Next, a business support system according to the second embodiment of the present invention will be described. FIG. 3 is a schematic diagram showing an example of an apparatus constituting the business support system according to the second embodiment of the present invention. Specifically, a business support system configured using the second mobile terminal device 30 and a plurality of computers 41 and 42 functioning as a server is shown. The second mobile terminal device 30 constituting this business support system is configured to be portable when an operator performs various business operations. For example, as in the case of the first embodiment (portable terminal device 1), it is configured to be a size that can be inserted into a breast pocket of an outerwear. The business support system is configured so as to be able to appropriately perform evaluation and guidance for improvement of “voice check” performed by the operator by using the second portable terminal device 30 and the like.

図3に示すように、本実施形態にかかる第二携帯端末装置30は、音声入力手段31、音声認識手段32、語句識別手段33、および不明確伝達手段36を有している。この第二携帯端末装置30としては、第一実施形態の場合(携帯端末装置1)と同様に、業務支援システム専用の端末(専用端末)として構成する場合の他に、例えば、携帯電話、PHS、PDA等を用いることも可能である。   As shown in FIG. 3, the second portable terminal device 30 according to the present embodiment includes a voice input unit 31, a voice recognition unit 32, a phrase identification unit 33, and an unclear transmission unit 36. As the second mobile terminal device 30, as in the case of the first embodiment (mobile terminal device 1), in addition to the case where it is configured as a terminal dedicated to a business support system (dedicated terminal), for example, a mobile phone, PHS, etc. It is also possible to use a PDA or the like.

また、本実施形態にかかる第二携帯端末装置30は、インターネット44を介して、サーバとして機能する二台のコンピュータ(第一コンピュータ41、第二コンピュータ42)と通信可能に構成されている。インターネット44と二台のコンピュータ41,42との間にはルータ43が設けられており、第二携帯端末装置30と二台のコンピュータ41,42との通信状態は、必要に応じて、このルータ43によって制御される。   The second portable terminal device 30 according to the present embodiment is configured to be able to communicate with two computers (first computer 41 and second computer 42) functioning as a server via the Internet 44. A router 43 is provided between the Internet 44 and the two computers 41 and 42, and the communication state between the second mobile terminal device 30 and the two computers 41 and 42 is determined according to necessity. 43.

本実施形態において、第一コンピュータ41は、アプリケーションダウンロード用のWEBサーバとして機能し、第二コンピュータ42は、データベース用サーバとして機能する。   In the present embodiment, the first computer 41 functions as a web server for application download, and the second computer 42 functions as a database server.

本実施形態にかかる業務支援システムを構成する第二携帯端末装置30は、後述するように音声認識等の種々の機能を有し、本実施形態においては、これらの機能を発揮すべきアプリケーションは、第一コンピュータ41からダウンロードされるように構成されている。つまり、第一コンピュータ41には、第二携帯端末装置30を適切に機能させるための種々のアプリケーションが用意されている。   The second portable terminal device 30 constituting the business support system according to the present embodiment has various functions such as voice recognition as will be described later. In the present embodiment, applications that should exhibit these functions are: It is configured to be downloaded from the first computer 41. That is, the first computer 41 is provided with various applications for causing the second portable terminal device 30 to function properly.

このような構成であるため、本実施形態にかかる第二携帯端末装置30は、常に最適な状態で使用可能であり、アプリケーションのバージョンアップ等にも早急に対応可能である。   Due to such a configuration, the second portable terminal device 30 according to the present embodiment can always be used in an optimal state, and can quickly cope with an application version upgrade or the like.

また、第二コンピュータ42は、第二携帯端末装置30からインターネット44を介して送られているデータについて、評価を下すと共にその集計管理を行うべく構成されている。つまり、この第二コンピュータ42は、第一実施形態にて説明した語句評価手段14、評価記憶手段15等と同様の機能を有している。第二コンピュータ42に設けられた語句評価手段および評価記憶手段については、第一実施形態の場合と略同様であるため、ここではその説明を省略する。   In addition, the second computer 42 is configured to evaluate and collect and manage data transmitted from the second portable terminal device 30 via the Internet 44. That is, the second computer 42 has the same functions as the phrase evaluation unit 14 and the evaluation storage unit 15 described in the first embodiment. Since the phrase evaluation unit and the evaluation storage unit provided in the second computer 42 are substantially the same as those in the first embodiment, the description thereof is omitted here.

本実施形態にかかる第二携帯端末装置30を成す音声入力手段31は、作業者が「声だし確認」を行う際における音声の入力を行うものであり、第一実施形態の場合と同様に、マイクロフォン等(例えば、イヤホンマイク等)を用いて構成される。携帯電話やPHS等であれば、予めマイクロフォンが設けられているため、携帯電話等を利用する場合は、この予め設けられたマイクロフォンを用いて音声入力手段31が構成される。なお、イヤホンマイクが用いられる場合、その一部たるマイク部が音声入力手段31に相当する。   The voice input means 31 that constitutes the second portable terminal device 30 according to the present embodiment performs voice input when the operator performs “voice check”. As in the case of the first embodiment, A microphone or the like (for example, an earphone microphone or the like) is used. In the case of a mobile phone, PHS, or the like, a microphone is provided in advance. Therefore, when the mobile phone or the like is used, the voice input means 31 is configured using the microphone provided in advance. Note that when an earphone microphone is used, the microphone part as a part thereof corresponds to the voice input means 31.

第二携帯端末装置30を成す音声認識手段32は、音声入力手段31を介して入力された音声を認識するためのものであって、この音声認識手段32は、音声認識エンジン(音声認識ソフトウエア)等を用いて構成されている。   The voice recognition means 32 constituting the second portable terminal device 30 is for recognizing the voice inputted through the voice input means 31, and this voice recognition means 32 is a voice recognition engine (voice recognition software). ) And the like.

第二携帯端末装置30を成す語句識別手段33は、入力された音声中に、「声だし確認」にて使用される語句(本発明の「所定語句」に相当)が含まれているか否かを識別する手段である。本実施形態においては、この語句(所定語句)に関するデータ(所定語句データベース)が、予め携帯端末装置1中のメモリ(記憶手段)に記憶されている。語句識別手段33は、音声認識エンジンを用いて認識された(文字に変換された)語句と、メモリに記憶された所定語句データベース中の語句(所定語句)とを対比して、入力された音声中に所定語句が存在するか否かを判断する。   The phrase identifying means 33 constituting the second mobile terminal device 30 determines whether or not a phrase (corresponding to the “predetermined phrase” of the present invention) used in “voice check” is included in the input voice. It is a means to identify. In the present embodiment, data (predetermined phrase database) relating to this phrase (predetermined phrase) is stored in advance in a memory (storage means) in the mobile terminal device 1. The phrase identifying unit 33 compares the phrase recognized (converted into characters) using the speech recognition engine with the phrase (predetermined phrase) in the predetermined phrase database stored in the memory, and receives the input speech. It is determined whether or not a predetermined phrase is present.

第二携帯端末装置30を成す不明確伝達手段36は、音声認識手段32にて音声の入力は認識されたものの、その入力音声中に所定語句を識別できなかった場合において、その旨(不明確である旨)を作業者に伝達するための手段である。この「入力音声中に所定語句を識別できなかった場合」としては、音声入力はされたものの発音の具合や周りの雑音等の影響で語句識別手段33が所定語句を識別できなかった場合や、音声入力はされたものの所定語句を正確に入力していない場合や、周りの雑音によって誤入力が行われた場合等があげられる。不明確伝達手段36にて不明確である旨を作業者に伝達する方法としては、具体的には、音で伝達する場合、振動で伝達する場合、映像で伝達する場合、あるいはこれらの方法を組み合わせて伝達する場合等があげられる。したがって、本実施形態にかかる不明確伝達手段36は、スピーカ、振動発生手段(モータあるいは振動子等)、およびディスプレイの少なくとも一つを用いて構成される。   The unclear transmission means 36 constituting the second portable terminal device 30 recognizes that when the voice recognition means 32 recognizes the input of the voice but cannot identify a predetermined word in the input voice (unclear This is a means for communicating to the worker. As the case where “the predetermined phrase cannot be identified in the input speech”, the phrase identifying means 33 cannot identify the predetermined phrase due to the influence of the sound generation, surrounding noise, etc. although the speech is input, There are cases where voice input has been made but a predetermined word / phrase has not been input correctly, or an erroneous input has been made due to ambient noise. Specifically, the unclear transmission means 36 transmits an unclearness to the worker as a method of transmitting by sound, transmitting by vibration, transmitting by video, or these methods. For example, it may be transmitted in combination. Therefore, the ambiguity transmission means 36 according to the present embodiment is configured using at least one of a speaker, vibration generation means (motor or vibrator), and a display.

なお、この図3については特に示さなかったが、本実施形態にかかる第二携帯端末装置30は、当然のことながら、第二携帯端末装置30を操作するための各種のボタン・スイッチ等が設けられており、これらのボタン等を用いて、電源のON/OFF、各部の調整(例えば、スピーカ(不明確伝達手段36)の音量調整等)が行われる。また、携帯電話等を本実施形態にかかる第二携帯端末装置30として使用する場合には、当然のことならが、一般的な携帯電話としての構成および機能を有する。   Although not specifically shown in FIG. 3, the second mobile terminal device 30 according to the present embodiment is naturally provided with various buttons and switches for operating the second mobile terminal device 30. These buttons and the like are used to turn the power on / off and adjust each part (for example, adjust the volume of the speaker (unclear transmission means 36)). Moreover, when using a mobile phone etc. as the 2nd portable terminal device 30 concerning this embodiment, naturally, it has a structure and function as a general mobile phone.

次に、図3に加え、図4を用いて、本実施形態にかかる第二携帯端末装置30の使用方法等について説明する。この図4は、本発明の第二実施形態にかかる業務支援システムを使用する際のフローチャートを示したものである。なお、ここでは、業務として自動車の運転を行う際に第二携帯端末装置30を使用する場合を例示して説明する。また、先に説明した第一実施形態と略同様の部分もあるため、その部分については説明を割愛し、ここでは、主に第一実施形態と異なる部分について説明する。   Next, in addition to FIG. 3, the usage method of the 2nd portable terminal device 30 concerning this embodiment, etc. are demonstrated using FIG. FIG. 4 shows a flowchart when the business support system according to the second embodiment of the present invention is used. Here, the case where the second portable terminal device 30 is used when driving a car as a business will be described as an example. In addition, since there is a portion that is substantially the same as that of the first embodiment described above, description thereof is omitted, and here, a portion that is different from the first embodiment is mainly described.

作業者が第二携帯端末装置30を装着した状態で、第二携帯端末装置30の電源スイッチ等(図示省略)を操作して、第二携帯端末装置30を起動させる(ステップS401)と、第二携帯端末装置30が、音声入力待機状態(ステップS402,S408)となる。つまり、第二携帯端末装置30は、音声入力手段31において、何らかの音声入力が確認されるまで(S403にて「Yes」と判断されるまで)、音声入力ループ(S402,S408)を繰り返して待機状態を維持することとなる。本実施形態において、音声が入力されているか否かは、音声認識手段32を用いて行われる。   When the operator wears the second mobile terminal device 30 and operates the power switch or the like (not shown) of the second mobile terminal device 30 to activate the second mobile terminal device 30 (step S401), The two portable terminal devices 30 enter a voice input standby state (steps S402 and S408). That is, the second portable terminal device 30 repeats the voice input loop (S402, S408) and waits until some voice input is confirmed by the voice input unit 31 (until "Yes" is determined in S403). The state will be maintained. In the present embodiment, whether or not voice is input is determined using the voice recognition means 32.

第二携帯端末装置30を装着した作業者は、例えば、自動車に乗り込む際に、「前方ヨシ」「後方ヨシ」等の「声だし確認」を行ってから乗車する。そして、第二携帯端末装置30を構成する音声認識手段32が、音声入力手段31を介して「音声」入力を検知(認識)すると、図4のフローチャートに従い(S403にて「Yes」と判断されて)、第二携帯端末装置30においては、次いでステップS404以降の処理が行われる。一方、作業者が「音声」を発したにも関わらず、音声認識手段32において「音声」入力を検知(認識)できない場合(S403にて「No」の場合)には、第二携帯端末装置30は音声入力ループ(S402,S408)を繰り返すこととなる。   For example, when the operator wearing the second mobile terminal device 30 gets into the car, he / she gets on after performing “speech confirmation” such as “frontward reed” and “rearward reed”. Then, when the voice recognition unit 32 configuring the second portable terminal device 30 detects (recognizes) the “voice” input via the voice input unit 31, it is determined as “Yes” in the flowchart of FIG. 4 (S403). Then, in the second portable terminal device 30, the process after step S404 is then performed. On the other hand, in the case where the voice recognition means 32 cannot detect (recognize) “voice” input (“No” in S403) even though the worker utters “voice”, the second portable terminal device 30 repeats the voice input loop (S402, S408).

作業者が自動車に乗車した後の運転中においても、必要に応じて作業者は、「制限速度40、速度ヨシ」、「車線変更、後方ヨシ」等の「声だし確認」を行い、その「声だし確認」のたびに、第二携帯端末装置30の音声認識手段32においては、音声入力がなされたか否かの判断が行われる(S403)。そして、その判断結果に基づいて、ステップS404以降の処理あるいは音声入力ループ(S402,S408)が行われることとなる。   Even during the operation after the worker gets in the car, the worker performs “voice check” such as “speed limit 40, speed reed”, “lane change, rear reed” as necessary. Each time “voice check” is performed, the voice recognition unit 32 of the second portable terminal device 30 determines whether or not a voice input has been made (S403). Then, based on the determination result, the processing after step S404 or the voice input loop (S402, S408) is performed.

音声入力手段31を介して音声入力がなされていると、音声認識手段32において判断された(S403にて「Yes」と判断された)場合には、次いで、語句識別手段43を用いて、その入力された音声中に「所定語句」が存在するか否かの判断が行われる(ステップS404)。本実施形態においても、第一実施形態と同様に、第二携帯端末装置30中のメモリに所定語句データベースが記憶されており、語句識別手段33によって、音声認識手段32(音声認識エンジン)を用いて認識された(文字に変換された)語句(音声入力された語句)と、所定語句データベース中の所定語句とが対比され、その結果に基づいて、入力された音声中に所定語句が存在するか否かが判断される(S404)。   If it is determined in the voice recognition means 32 that the voice input is made through the voice input means 31 (“Yes” in S403), then the phrase identification means 43 is used to It is determined whether or not a “predetermined phrase” exists in the input voice (step S404). Also in the present embodiment, as in the first embodiment, a predetermined phrase database is stored in the memory in the second portable terminal device 30, and the speech recognition means 32 (voice recognition engine) is used by the phrase identification means 33. The words (converted into characters) recognized in speech (the words input by voice) and the predetermined words in the predetermined word database are compared, and based on the result, the predetermined words are present in the input voice Is determined (S404).

語句識別手段33にて、入力された音声中に所定語句が存在すると判断された場合(S404にて「Yes」の場合)には、次いでステップS409以降の処理が行われ、所定語句が存在しないと判断された場合(S404にて「No」の場合)には、不明確伝達処理が行われる(ステップS407)。   If the phrase identifying unit 33 determines that the predetermined phrase is present in the input voice (“Yes” in S404), then the process from step S409 is performed, and the predetermined phrase does not exist. Is determined (in the case of “No” in S404), an unclear transmission process is performed (step S407).

不明確伝達処理とは、第一実施形態でも説明したように、第二携帯端末装置30を構成する不明確伝達手段36を用いて、作業者に対して、明確な音声入力がなされていない旨を伝達する処理である。この不明確伝達処理(S407)は、「音声」入力はなされたものの、作業者の発声の仕方や周りの雑音等の影響によって、語句識別手段43にて音声中の所定語句を識別できない場合に、スピーカ、振動発生手段、あるいはディスプレイ等を用いて、入力された音声が不明確である旨を作業者に伝達する処理である。つまり、音、振動、文字、あるいは画像等を用いて、作業者に対して入力された音声が不明確である旨を作業者に伝達する処理である。例えば、本実施形態にかかる第二携帯端末装置30の一部(音声入力手段31および不明確伝達手段36)がイヤホンマイクにて構成されている場合、不明確伝達手段36を成すイヤホン部からの音によって、作業者に対し、入力された音声が不明確である旨が伝達される(S407)。不明確伝達処理が行われた後は、ステップS402以降の処理が繰り返し行われる。   As described in the first embodiment, the unclear transmission process means that a clear voice input is not made to the worker using the unclear transmission means 36 constituting the second mobile terminal device 30. Is a process of transmitting. This ambiguity transmission process (S407) is performed when “speech” input has been made, but the phrase identification means 43 cannot identify a predetermined phrase in the speech due to the influence of the worker's utterance method, surrounding noise, etc. , A process of transmitting to the operator that the input voice is unclear using a speaker, vibration generating means, display, or the like. That is, it is a process of transmitting to the worker that the voice input to the worker is unclear using sound, vibration, characters, images, or the like. For example, when a part of the second portable terminal device 30 according to the present embodiment (the voice input unit 31 and the unclear transmission unit 36) is configured by an earphone microphone, the earphone unit that forms the unclear transmission unit 36 The sound is transmitted to the worker that the input voice is unclear (S407). After the unclear transmission process is performed, the processes after step S402 are repeatedly performed.

語句識別手段33にて、入力された音声中に所定語句が存在すると判断された場合(S304にて「Yes」の場合)には、その入力された所定語句に関する情報が、インターネット44を介して、サーバ(データベースサーバ)として機能する第二コンピュータ42に送信される(ステップS409)。例えば、第二携帯端末装置30を携帯電話にて構成した場合においては、第二携帯端末装置30とデータベースサーバ(第二コンピュータ42)との間で、HTTP通信によるデータ転送が行われる。そして、第二コンピュータ42内に設けられている語句評価手段(図示省略)を用いて、転送されたデータ(入力された音声)に関する評価が行われる。   When the phrase identifying unit 33 determines that the predetermined phrase is present in the input voice (“Yes” in S304), information regarding the input predetermined phrase is transmitted via the Internet 44. Are transmitted to the second computer 42 functioning as a server (database server) (step S409). For example, when the second mobile terminal device 30 is configured by a mobile phone, data transfer by HTTP communication is performed between the second mobile terminal device 30 and the database server (second computer 42). Then, using the word evaluation means (not shown) provided in the second computer 42, the transferred data (input voice) is evaluated.

この第二コンピュータ42中で行われる「評価」は、基本的に第一実施形態にて説明したものと同様である。先にも説明したように、語句評価手段は、入力された音声中の語句(語句識別手段33にて所定語句であると判断された語句)の一つ一つに対して、その評価を行う手段である。そして、本実施形態においても、第一実施形態と同様に、各所定語句に対する評価(重み付け)に関する評価データベースが、予め第二コンピュータ42中のメモリ(記憶手段)に記憶されているので、この評価データと入力された所定語句とを用いて、語句評価手段が、入力された音声中の所定語句についての評価を行う。   The “evaluation” performed in the second computer 42 is basically the same as that described in the first embodiment. As described above, the phrase evaluation unit evaluates each phrase in the input voice (the phrase determined to be a predetermined phrase by the phrase identification unit 33). Means. Also in the present embodiment, as in the first embodiment, an evaluation database relating to evaluation (weighting) for each predetermined phrase is stored in advance in a memory (storage means) in the second computer 42. Using the data and the inputted predetermined word / phrase, the word / phrase evaluating means evaluates the predetermined word / phrase in the inputted voice.

例えば、評価データベース中には、入力音声中の「前方」「後方」「40」という所定語句には「2点」、「制限速度」という所定語句には「3点」、「ヨシ」という所定語句には「1点」というように、それぞれの所定語句に対する評価(評価ポイント)に関するデータが記憶されている。そして、語句評価手段においては、作業者が音声入力する所定語句と、上記評価データベースとを用いて、作業者の音声入力(「声だし確認」)に対する評価(評価ポイントの演算)が行われることとなる。   For example, in the evaluation database, the predetermined words “front”, “rear”, “40” in the input speech are “2 points”, the predetermined words “limit speed” are “3 points”, “Yoshi”. The word / phrase stores data related to evaluation (evaluation point) for each predetermined word / phrase, such as “1 point”. In the word evaluation means, evaluation (calculation of evaluation points) is performed on the worker's voice input (“voice check”) using the predetermined word / phrase input by the worker and the evaluation database. It becomes.

語句評価手段にて作業者が入力する音声に関する評価が行われた後には、第二コンピュータ42中の評価記憶手段(図示省略)において、入力された所定語句とその入力時の各種データ(入力日時等)、およびその評価結果(語句評価手段にて得られる結果)とを関連付けて、所定語句等に関する集計管理が行われる。つまり、この評価記憶手段を構成するメモリ中に、入力された所定語句に関するデータベース(入力日時、評価結果等を含むデータベース)が構成されることになる。   After the phrase evaluation means evaluates the voice input by the operator, the evaluation storage means (not shown) in the second computer 42 receives the input predetermined words and various data (input date and time). Etc.) and their evaluation results (results obtained by the phrase evaluation means) are associated with each other and tabulation management relating to predetermined phrases is performed. That is, a database (a database including input date and time, evaluation results, etc.) relating to the input predetermined word / phrase is configured in the memory constituting the evaluation storage means.

この評価記憶手段においては、例えば、実際に入力された「所定語句」、入力された「日時」、語句評価手段にて演算された「評価ポイント」、所定時間毎(例えば1時間毎)の「評価ポイントの合計」、一日毎の「評価ポイントの合計」、一週間毎の「評価ポイントの合計」、一月毎の「評価ポイントの合計」、空白時間(音声入力を行っていない時間)に関するデータ、入力された「所定語句」の種類に関する統計データ、評価ポイントの相乗平均等が記憶されている。   In this evaluation storage means, for example, “predetermined phrases” actually input, “date and time” input, “evaluation points” calculated by the phrase evaluation means, “every hour (for example, every hour)” “Total evaluation points”, “Total evaluation points” per day, “Total evaluation points” per week, “Total evaluation points” per month, Blank time (time when voice input is not performed) Data, statistical data related to the type of the input “predetermined phrase”, geometric average of evaluation points, and the like are stored.

なお、本実施形態にかかる業務支援システムは、第一実施形態と異なり、入力された音声に関する評価および集計管理が、携帯端末装置ではなく、第二コンピュータ42を用いて行われる。つまり、本実施形態にかかる業務支援システムは、大容量且つ高速処理が可能な装置を用いて、評価および集権管理が行われる。したがって、本実施形態によれば、第一実施形態と比較して、入力された音声に対してリアルタイムにより詳細で且つきめ細かい評価、分析、および集計管理を行うことができる。   Note that, in the business support system according to the present embodiment, unlike the first embodiment, evaluation and totalization management regarding input voice are performed using the second computer 42 instead of the mobile terminal device. That is, the business support system according to the present embodiment performs evaluation and centralized management using a device capable of high-capacity and high-speed processing. Therefore, according to this embodiment, compared with the first embodiment, it is possible to perform detailed, detailed evaluation, analysis, and tabulation management in real time with respect to the input voice.

本実施形態においては、入力された所定語句に関する情報が、インターネット44を介して、サーバ(データベースサーバ)として機能する第二コンピュータ42に送信された(ステップS409)後には、再度、ステップS202以降の処理が行われることとなる。   In the present embodiment, after the input information related to the predetermined phrase is transmitted to the second computer 42 functioning as a server (database server) via the Internet 44 (step S409), the steps after step S202 are performed again. Processing will be performed.

本発明の第二実施形態にかかる業務支援システムは、以上のように構成され機能するため、次のような効果を得ることができる。   Since the business support system according to the second embodiment of the present invention is configured and functions as described above, the following effects can be obtained.

本実施形態によれば、第一実施形態の場合と同様に、第二携帯端末装置30を作業者が携帯することによって、管理者等の存在がなくとも、作業者が実施する声だし確認の評価・記憶等を第二コンピュータ42にて行うことができる。つまり、この第二携帯端末装置30を用いて得られる評価等・記憶結果に基づいて、管理者が作業者の「声だし確認」の状況を正確に把握・評価することができる。したがって、管理者側から「声だし確認」に関する評価や改善指導を行うことが可能となるため、「声だし確認」が作業者任せとならず、業務内における「声だし確認」の定着を効果的に進めることができる。   According to the present embodiment, as in the case of the first embodiment, the operator carries the second portable terminal device 30 so that the voice confirmation performed by the worker can be confirmed even if there is no administrator or the like. Evaluation, storage, and the like can be performed by the second computer 42. That is, based on the evaluation etc./stored result obtained by using the second portable terminal device 30, the manager can accurately grasp and evaluate the situation of the operator's “voice check”. Therefore, it is possible for managers to conduct evaluations and guidance for improvement regarding “voice check”, so “voice check” is not left to the operator, and it is effective to establish “voice check” within the work. Can proceed.

また、本実施形態によれば、所定語句に関する具体的な評価等が第二コンピュータ42を用いて行うべく構成されているので、第一実施形態と比較して、携帯端末装置(第二携帯端末装置30)の構成をより簡略化することができる。   Moreover, according to this embodiment, since the specific evaluation etc. regarding a predetermined phrase are performed using the 2nd computer 42, compared with 1st embodiment, a portable terminal device (2nd portable terminal) The configuration of the device 30) can be further simplified.

なお、本発明は、上述した実施形態に限定されるものではなく、本発明の趣旨に適合し得る範囲で必要に応じて種々の変更を加えて実施することも可能であり、それらはいずれも本発明の技術的範囲に含まれる。   Note that the present invention is not limited to the above-described embodiment, and can be implemented with various modifications as necessary within the scope that can meet the spirit of the present invention. It is included in the technical scope of the present invention.

例えば、上述した各実施形態における携帯端末装置1,30には、必要に応じて、「声だし指示手段」等を設けてもよい。この「声だし指示手段」は、作業者に「声だし確認」の実施を促すためのものであって、例えば、音声出力手段等(記憶された音声ファイル、あるいは音声合成を用いて音声を出力可能な装置)を用いて構成される。声だし指示手段は、予め定められたタイミング、ランダムなタイミング、あるいは作業者の「声だし確認」の実施状況に応じて(例えば1時間「声だし確認」が行われていない場合等)、作動するように構成されている。例えば、音声出力手段等を介して、「声だし確認を行いましょう。」「声だし確認を行っていますか?」「声だし確認が1時間行われておりません。」「制限速度は何キロですか?」等のメッセージを作業者に伝達し、作業者に対して「声だし確認」の実施を促すべく構成されている。   For example, the mobile terminal devices 1 and 30 in the above-described embodiments may be provided with “speech instruction means” and the like as necessary. This “voice out instruction means” is for urging the operator to perform “voice check”. For example, the voice output means or the like (sound output using a stored voice file or voice synthesis) Possible device). The voice output instruction means operates according to a predetermined timing, a random timing, or the execution status of the “voice check” by the worker (for example, when “voice check” is not performed for 1 hour). Is configured to do. For example, via voice output means, etc. “Let's make a voice check.” “Do you make a voice check?” “No voice check has been done for 1 hour.” “The speed limit is It is configured to transmit a message such as “how many kilometers?” To the worker, and to encourage the worker to perform “voice check”.

また、この「声だし指示手段」による作業者に対するメッセージの伝達方法は、「音声」に限定されず、画像情報、文字情報、バイブレータによる振動等、作業者に伝達可能であればいかなる方法を用いてもよい。つまり、「声だし指示手段」は、音声出力手段にて構成される場合に限定されず、ディスプレイ、振動発生装置等を用いて構成してもよい。当然のことながら、これら(音声出力手段、ディスプレイ等)を組み合わせて、「声だし指示手段」を構成してもよい。   In addition, the method of transmitting a message to the worker by this “voice out instruction means” is not limited to “voice”, and any method can be used as long as it can be transmitted to the worker, such as image information, text information, vibration by a vibrator, etc. May be. That is, the “speech output instruction unit” is not limited to the case of being configured by the audio output unit, and may be configured by using a display, a vibration generator, or the like. As a matter of course, these (voice output means, display, etc.) may be combined to constitute a “voice output instruction means”.

さらに、この「声だし指示手段」は、特定の声色、話し方、姿、表情等を種々設定しておくことにより、作業者(上記各実施形態においては運転者)への働きかけの効果を高めることができる。   Furthermore, this “voice out instruction means” enhances the effect of acting on the operator (driver in the above embodiments) by setting various specific voice colors, speaking methods, appearances, facial expressions, etc. Can do.

また、上述した実施形態においては、携帯端末装置1,30が、専用端末である場合や携帯電話等を利用して構成されている場合について説明したが、本発明はこの構成に限定されるものではない。したがって、例えば、カーナビゲーションシステムに、この業務支援システムの構成要素を付加してもよい。さらに、例えば、ビデオカメラを用いた業務を行う場合には、ビデオカメラに、この業務支援システムの構成要素を付加してもよい。すなわち、なんらかの装置を用いて業務を行う場合には、その装置内に、この業務支援システムの構成要素を付加することが好ましい。この好ましい構成によれば、新たな装置等を携帯することなく、業務支援システムを利用することが可能となって、「声だし確認」の評価や改善指導を適切に行うことができる。   In the above-described embodiment, the case where the mobile terminal devices 1 and 30 are dedicated terminals or configured using a mobile phone or the like has been described, but the present invention is limited to this configuration. is not. Therefore, for example, a component of the business support system may be added to the car navigation system. Furthermore, for example, when business using a video camera is performed, components of the business support system may be added to the video camera. That is, when business is performed using any device, it is preferable to add the components of the business support system to the device. According to this preferable configuration, it is possible to use the business support system without carrying a new device or the like, and it is possible to appropriately perform “voice check” evaluation and improvement guidance.

さらに、上述した実施形態においては、明確な音声入力がなされていない際にその旨を伝達する「不明確伝達手段」を設ける場合について説明したが、本発明は、この構成に限定されるものではない。つまり、「不明確」である旨を積極的に作業者に伝える構成のみに限定されるものではなく、「明確」である旨を積極的に作業者に伝える構成としてもよい。すなわち、音声入力後、語句識別手段にて入力された音声中に所定語句が存在すると判断された場合に、その旨(音声入力が明確に行われて、その音声中に所定語句が含まれていた旨)を、音、振動、文字、あるいは画像等を用いて、作業者に伝達するような構成としてもよい。このような構成であれば、「明確」である旨の伝達がなかった場合に、作業者は「不明確」であることを認識可能となる。   Further, in the above-described embodiment, the case where “unclear transmission means” is provided to transmit the fact when a clear voice input is not made has been described, but the present invention is not limited to this configuration. Absent. That is, the present invention is not limited to a configuration that positively informs the worker that it is “unclear”, but may be a configuration that positively notifies the worker that it is “clear”. That is, when it is determined that a predetermined word / phrase exists in the voice inputted by the word / phrase identifying means after the voice input, the fact (the voice input is clearly performed and the predetermined word / phrase is included in the voice). May be transmitted to the worker using sound, vibration, characters, images, or the like. With such a configuration, when there is no transmission of “clear”, the worker can recognize that it is “unclear”.

本発明の第一実施形態にかかる業務支援システムを構成する装置の一例を示す概略図である。It is the schematic which shows an example of the apparatus which comprises the work assistance system concerning 1st embodiment of this invention. 本発明の第一実施形態にかかる業務支援システムを使用する際のフローチャートを示したものである。1 is a flowchart for using a business support system according to a first embodiment of the present invention. 本発明の第二実施形態にかかる業務支援システムを構成する装置の一例を示す概略図である。It is the schematic which shows an example of the apparatus which comprises the work assistance system concerning 2nd embodiment of this invention. 本発明の第二実施形態にかかる業務支援システムを使用する際のフローチャートを示したものである。The flowchart at the time of using the business support system concerning 2nd embodiment of this invention is shown.

符号の説明Explanation of symbols

1…携帯端末装置
11…音声入力手段
12…音声認識手段
13…語句識別手段
14…語句評価手段
15…評価記憶手段
16…不明確伝達手段
30…第二携帯端末装置
31…音声入力手段
32…音声認識手段
33…語句識別手段
36…不明確伝達手段
41…第一コンピュータ
42…第二コンピュータ
43…ルータ
44…インターネット
DESCRIPTION OF SYMBOLS 1 ... Portable terminal device 11 ... Voice input means 12 ... Speech recognition means 13 ... Phrase identification means 14 ... Phrase evaluation means 15 ... Evaluation storage means 16 ... Unclear transmission means 30 ... Second portable terminal device 31 ... Voice input means 32 ... Voice recognition means 33 ... Phrase identification means 36 ... Unclear transmission means 41 ... First computer 42 ... Second computer 43 ... Router 44 ... Internet

Claims (6)

作業者が実施する声だし確認に関する評価を行う業務支援システムであって、
前記作業者の音声を入力する音声入力手段と、前記音声を認識する音声認識手段と、前記音声中の所定語句を識別する語句識別手段と、前記所定語句に基づき声だし確認に関する評価を行う語句評価手段と、前記評価結果を記憶する評価記憶手段と
を備えたことを特徴とする業務支援システム。
A business support system for evaluating voice verification performed by a worker,
A voice input means for inputting the voice of the operator; a voice recognition means for recognizing the voice; a phrase identifying means for identifying a predetermined phrase in the voice; and a phrase for evaluating speech confirmation based on the predetermined phrase A business support system comprising: an evaluation unit; and an evaluation storage unit that stores the evaluation result.
前記音声入力手段、前記音声認識手段、前記語句識別手段、前記語句評価手段、および前記評価記憶手段が、一つの携帯端末装置内に設けられている
請求項1に記載の業務支援システム。
The business support system according to claim 1, wherein the voice input unit, the voice recognition unit, the phrase identification unit, the phrase evaluation unit, and the evaluation storage unit are provided in one portable terminal device.
通信機能を有する第二携帯端末装置と、前記第二携帯端末装置と通信可能なコンピュータとを用いて構成されており、
前記第二携帯端末装置が、前記音声入力手段と前記音声認識手段と前記語句識別手段とを備え、
前記コンピュータが、前記語句評価手段と前記評価記憶手段とを備えている
請求項1に記載の業務支援システム。
It is configured using a second portable terminal device having a communication function and a computer capable of communicating with the second portable terminal device,
The second portable terminal device comprises the voice input means, the voice recognition means, and the phrase identification means,
The business support system according to claim 1, wherein the computer includes the phrase evaluation unit and the evaluation storage unit.
前記語句識別手段において、前記音声中に前記所定語句が含まれていないと判断された場合、前記作業者に対し前記所定語句が含まれていないことを伝達する不明確伝達手段が設けられている
請求項1から3のいずれか1項に記載の業務支援システム。
The word identifying means is provided with an unclear transmission means for notifying the worker that the predetermined word / phrase is not included when it is determined that the predetermined word / phrase is not included in the voice. The business support system according to any one of claims 1 to 3.
作業者が実施する声だし確認に関する評価を行う業務支援方法であって、
前記作業者の音声を入力する音声入力工程と、前記音声を認識する音声認識工程と、前記音声中の所定語句を識別する語句識別工程と、前記所定語句に基づき声だし確認に関する評価を行う語句評価工程と、前記評価結果を記憶する評価記憶工程と
を備えたことを特徴とする業務支援方法。
A work support method for performing an evaluation on voice confirmation performed by a worker,
A speech input step for inputting the worker's speech, a speech recognition step for recognizing the speech, a phrase identifying step for identifying a predetermined phrase in the speech, and a phrase for evaluating speech confirmation based on the predetermined phrase A business support method comprising an evaluation step and an evaluation storage step for storing the evaluation result.
前記語句識別工程において、前記音声中に前記所定語句が含まれていないと判断された場合、前記作業者に対し前記所定語句が含まれていないことを伝達する不明確伝達工程が行われる
請求項5に記載の業務支援方法。
In the phrase identification step, when it is determined that the predetermined word / phrase is not included in the voice, an unclear transmission step of transmitting that the predetermined word / phrase is not included to the worker is performed. 5. The business support method according to 5.
JP2005159168A 2005-05-31 2005-05-31 Business support system and business support method Active JP4718246B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005159168A JP4718246B2 (en) 2005-05-31 2005-05-31 Business support system and business support method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005159168A JP4718246B2 (en) 2005-05-31 2005-05-31 Business support system and business support method

Publications (2)

Publication Number Publication Date
JP2006337480A true JP2006337480A (en) 2006-12-14
JP4718246B2 JP4718246B2 (en) 2011-07-06

Family

ID=37558125

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005159168A Active JP4718246B2 (en) 2005-05-31 2005-05-31 Business support system and business support method

Country Status (1)

Country Link
JP (1) JP4718246B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014085832A (en) * 2012-10-23 2014-05-12 Yazaki Energy System Corp On-vehicle device
JP2014167703A (en) * 2013-02-28 2014-09-11 Toyama Prefecture Finger pointing and call monitoring system
JP2015038525A (en) * 2011-03-31 2015-02-26 株式会社東芝 Voice recognition device and voice recognition method
JP2015103183A (en) * 2013-11-27 2015-06-04 株式会社東芝 Medical examination support system
JP2017152948A (en) * 2016-02-25 2017-08-31 株式会社三菱東京Ufj銀行 Information provision method, information provision program, and information provision system

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02287488A (en) * 1989-04-28 1990-11-27 Toshiba Corp Simulator for training driving
JPH03175477A (en) * 1989-12-05 1991-07-30 Toshiba Corp Operation training simulator device
JPH09114579A (en) * 1995-10-23 1997-05-02 Hitachi Ltd Pointing calling confirmation system
JP2003327009A (en) * 2002-05-14 2003-11-19 Toyota Central Res & Dev Lab Inc Attention attracting device
JP2004019360A (en) * 2002-06-19 2004-01-22 Komine Dengyo Kk Field management system in construction work using information communication technique
JP2005056060A (en) * 2003-08-01 2005-03-03 Nippon Kayaku Co Ltd Method, system and program for misoperation prevention in chemical plant by voice input system
JP2005115629A (en) * 2003-10-07 2005-04-28 Mitsubishi Electric Engineering Co Ltd Driving support device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02287488A (en) * 1989-04-28 1990-11-27 Toshiba Corp Simulator for training driving
JPH03175477A (en) * 1989-12-05 1991-07-30 Toshiba Corp Operation training simulator device
JPH09114579A (en) * 1995-10-23 1997-05-02 Hitachi Ltd Pointing calling confirmation system
JP2003327009A (en) * 2002-05-14 2003-11-19 Toyota Central Res & Dev Lab Inc Attention attracting device
JP2004019360A (en) * 2002-06-19 2004-01-22 Komine Dengyo Kk Field management system in construction work using information communication technique
JP2005056060A (en) * 2003-08-01 2005-03-03 Nippon Kayaku Co Ltd Method, system and program for misoperation prevention in chemical plant by voice input system
JP2005115629A (en) * 2003-10-07 2005-04-28 Mitsubishi Electric Engineering Co Ltd Driving support device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015038525A (en) * 2011-03-31 2015-02-26 株式会社東芝 Voice recognition device and voice recognition method
JP2014085832A (en) * 2012-10-23 2014-05-12 Yazaki Energy System Corp On-vehicle device
JP2014167703A (en) * 2013-02-28 2014-09-11 Toyama Prefecture Finger pointing and call monitoring system
JP2015103183A (en) * 2013-11-27 2015-06-04 株式会社東芝 Medical examination support system
JP2017152948A (en) * 2016-02-25 2017-08-31 株式会社三菱東京Ufj銀行 Information provision method, information provision program, and information provision system

Also Published As

Publication number Publication date
JP4718246B2 (en) 2011-07-06

Similar Documents

Publication Publication Date Title
CN110288987B (en) System for processing sound data and method of controlling the same
KR102574593B1 (en) The divice and method for providing service by using a chatbot
CN112970059B (en) Electronic device for processing user utterance and control method thereof
JP2006154926A (en) Electronic equipment operation system using character display and electronic apparatuses
CN112331196A (en) Electronic device for managing a plurality of intelligent agents and method of operating the same
JP4718246B2 (en) Business support system and business support method
KR102421824B1 (en) Electronic device for providing voice based service using external device and operating method thereof, the external device and operating method thereof
KR102326272B1 (en) Electronic device for network setup of external device and operating method thereof
KR20190009488A (en) An electronic device and system for deciding a duration of receiving voice input based on context information
JP2010130223A (en) Voice activation system and voice activation method
KR20200043642A (en) Electronic device for ferforming speech recognition using microphone selected based on an operation state and operating method thereof
US11474780B2 (en) Method of providing speech recognition service and electronic device for same
EP3779963A1 (en) Voice recognition service operating method and electronic device supporting same
KR102629796B1 (en) An electronic device supporting improved speech recognition
KR102421745B1 (en) System and device for generating TTS model
US20190026074A1 (en) Electronic device and method for expressing natural language
JP2020077135A (en) Control unit, agent device, and program
JP2020080116A (en) Control device, agent apparatus, and program
KR102519635B1 (en) Method for displaying an electronic document for processing a voice command and electronic device thereof
EP3608905A1 (en) Electronic apparatus for processing user utterance and controlling method thereof
KR20210061091A (en) Electronic device for providing intelligent assistance service and operating method thereof
KR102396343B1 (en) Method and apparatus for transmitting data based on a change in state associated with movement of electronic device
CN111640429B (en) Method for providing voice recognition service and electronic device for the same
JP2020077136A (en) Control unit, agent device, and program
KR20210052972A (en) Apparatus and method for supporting voice agent involving multiple users

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080512

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101019

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110322

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110331

R150 Certificate of patent or registration of utility model

Ref document number: 4718246

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140408

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250