JP6744025B2 - 作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラム - Google Patents
作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラム Download PDFInfo
- Publication number
- JP6744025B2 JP6744025B2 JP2016122804A JP2016122804A JP6744025B2 JP 6744025 B2 JP6744025 B2 JP 6744025B2 JP 2016122804 A JP2016122804 A JP 2016122804A JP 2016122804 A JP2016122804 A JP 2016122804A JP 6744025 B2 JP6744025 B2 JP 6744025B2
- Authority
- JP
- Japan
- Prior art keywords
- work
- information
- voice recognition
- work item
- form information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 51
- 238000004891 communication Methods 0.000 claims description 47
- 238000003860 storage Methods 0.000 claims description 42
- 230000008569 process Effects 0.000 claims description 25
- 230000005540 biological transmission Effects 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 2
- 238000007689 inspection Methods 0.000 description 76
- 238000010586 diagram Methods 0.000 description 22
- 230000004048 modification Effects 0.000 description 13
- 238000012986 modification Methods 0.000 description 13
- 230000005856 abnormality Effects 0.000 description 11
- 230000033001 locomotion Effects 0.000 description 9
- 238000012790 confirmation Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 230000004044 response Effects 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
- G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/12—Use of codes for handling textual entities
- G06F40/151—Transformation
- G06F40/157—Transformation using dictionaries or tables
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/237—Lexical tools
- G06F40/242—Dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/20—Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L2015/088—Word spotting
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Human Resources & Organizations (AREA)
- Acoustics & Sound (AREA)
- Entrepreneurship & Innovation (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Educational Administration (AREA)
- Game Theory and Decision Science (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Machine Translation (AREA)
Description
前記第1の態様の変形として、管理サーバは、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける受付部と、前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成する辞書登録部と、前記帳票情報と前記音声認識辞書とを関連付けて記憶する記憶部と、前記帳票情報を送信する際に対応する前記音声認識辞書とともに送信する送信部と、を備える。
前記第2の態様の変形として、携帯端末は、作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた音声認識辞書を取得する通信部と、前記作業項目情報を提示する提示部と、前記作業項目情報に対して受け付けた音声入力を、前記音声認識辞書を用いて音声認識する音声認識部と、音声認識した結果を前記作業項目情報に対する作業結果として保持する記憶部と、を備え、前記通信部は、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成するとともに、前記帳票情報と前記音声認識辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた前記音声認識辞書とを取得する。
前記第4の態様の変形として、作業支援方法は、管理サーバが、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けるステップと、前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成するステップと、前記帳票情報と前記音声認識辞書とを関連付けて記憶するステップと、前記帳票情報を送信する際に対応する前記音声認識辞書とともに送信するステップと、を含む。
前記第5の態様の変形として、作業支援方法は、携帯端末が、作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた音声認識辞書を取得するステップと、前記作業項目情報を提示するステップと、前記作業項目情報に対して受け付けた音声入力を、前記音声認識辞書を用いて音声認識するステップと、音声認識した結果を前記作業項目情報に対する作業結果として保持するステップと、を含み、前記音声認識辞書を取得するステップでは、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成するとともに、前記帳票情報と前記音声認識辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた前記音声認識辞書とを取得する。
前記第6の態様の変形として、プログラムは、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける処理と、前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成する処理と、前記帳票情報と前記音声認識辞書とを関連付けて記憶する処理と、前記帳票情報を送信する際に対応する前記音声認識辞書とともに送信する処理と、をコンピュータに実行させる。
前記第7の態様の変形として、プログラムは、作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた音声認識辞書を取得する処理と、前記作業項目情報を提示する処理と、前記作業項目情報に対して受け付けた音声入力を、前記音声認識辞書を用いて音声認識する処理と、音声認識した結果を前記作業項目情報に対する作業結果として保持する処理と、をコンピュータに実行させ、前記音声認識辞書を取得する処理では、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成するとともに、前記帳票情報と前記音声認識辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた前記音声認識辞書とを取得する。
次に、第1の実施形態に係る作業支援システムについて、図面を参照して説明する。
図2は、本実施形態に係る作業支援システムの構成を例示するブロック図である。図2を参照すると、作業支援システムは管理サーバ1と携帯端末2を備えている。図2には、作業支援システムの管理サーバ2にアクセス可能な管理者端末3も併せて示す。
次に、本実施形態の作業支援システムの動作について、図9のシーケンス図および図10のフロー図を参照して説明する。
本実施形態に係る作業支援システムでは、管理サーバは各作業項目の作業結果として作業者が音声入力する入力候補を作業帳票として受け付け、受け付けた作業帳票に含まれる入力候補を音声認識用の音声認識辞書に事前に登録する。また、携帯端末は管理サーバから取得した音声認識辞書を用いて作業者の音声入力に対する音声認識を行う。かかる構成によると、入力候補が絞られるため雑音を拾うおそれがなくなる。したがって、本実施形態によると、工場のような騒音環境における音声入力の認識率が高まるという格別な効果がもたらされる。
第1の実施形態において、作業帳票に複数の作業項目が含まれる場合(図4参照)、管理サーバ1の辞書登録部13は、図3に示す音声認識辞書を、作業項目ごとの辞書の集合として生成してもよい。具体的には、管理サーバ1において、辞書登録部13は、作業帳票に複数の作業項目が含まれる場合、各作業項目に関連付けられた作業結果候補を、作業項目ごとの辞書に登録し、通信部11は、作業帳票を携帯端末2に送信する際、作業帳票に含まれる各作業項目に対応する各辞書とともに送信する。一方、携帯端末2において、通信部21は、作業帳票に複数の作業項目が含まれる場合、作業帳票を取得する際、各作業項目に関連付けられた作業項目ごとの辞書を取得し、音声認識部24は、音声入力を、各作業項目ごとの辞書を用いて音声認識する。かかる構成によると、音声認識の際に作業項目に対応する辞書を参照することで、音声認識の認識率を向上させることができる。
次に、第2の実施形態に係る作業支援システムについて、図面を参照して説明する。本実施形態の作業支援システムは、作業者の検査・点検作業に対する習熟度(例えば、熟練者、初心者など)を判定し、習熟度に応じて作業内容の案内および入力候補を切り替える。以下では、主に本実施形態と第1の実施形態との差異点について説明する。なお、ここでは、簡単のため、習熟度を2段階(初心者と熟練者)とする。ただし、さらに多くの段階の習熟度を設定可能としてもよい。
図11は、本実施形態に係る作業支援システムの構成を例示するブロック図である。図11を参照すると、本実施形態の携帯端末2は、さらに習熟度判定部26を備えている点で、第1の実施形態の携帯端末2(図2)と相違する。また、本実施形態では、作業帳票のフォーマットが第1の実施形態とは異なる。
本実施形態の作業支援システムの動作は、作業実施(図9のステップS8)の際、携帯端末2の習熟度判定部26が作業者の習熟度を判定する点と、判定結果に応じて作業内容の音声案内(図10のステップA2)および音声認識(図10のステップA3)が行われる点で、第1の実施形態と相違する。ただし、その他の動作については、本実施形態の動作は第1の実施形態の動作と同様である。
本実施形態では、作業者の習熟度を判定し、判定した習熟度に応じた作業内容の音声案内および作業結果の音声入力を行うようにした。かかる構成によると、熟練者に対しては相対的に短い(簡潔な)メッセージで作業内容を案内することができ、熟練者による作業効率をさらに向上させることができる。一方、初心者に対してはより詳細な作業内容を案内することで、作業手順の誤りを防ぐことが可能となる。
第2の実施形態について、以下の変形が可能である。具体的には、習熟度判定部26は、習熟度を作業帳票単位で判定する代わりに、作業者の作業項目ごとの習熟度を判定してもよい。この場合、提示部は、判定した習熟度に基づいて、読み上げ時の指示内容または画像もしくは動画による作業指示の提示内容を変更することが好ましい。また、習熟度判定部26は、複数の作業者について同一の作業項目の作業時間を比較することで、各作業者の当該作業項目に対する習熟度を判定してもよい。さらに、習熟度判定部26は、判定した習熟度を作業者に提示してもよい。
次に、第3の実施形態に係る作業支援システムについて、図面を参照して説明する。本実施形態の作業支援システムでは、作業結果に応じて次に実施する作業項目を検査・点検中に切り替える(条件分岐する)ことを可能とする。以下、本実施形態と第1の実施形態との差分を中心に説明する。
本実施形態に係る作業支援システムの構成は、第1の実施形態の作業支援システムの構成(図2)と同様である。ただし、本実施形態と第1の実施形態では、提示部23の機能、および、作業帳票のフォーマットが相違する。
本実施形態の作業支援システムの動作は、作業実施(図9のステップS8)の際、提示部23が作業帳票の条件分岐欄に記載された条件に従って次に実施すべき作業項目へと遷移する点で第1の実施形態の動作と相違する。ただし、その他の動作については、本実施形態は第1の実施形態と同様である。
本実施形態によると、途中の作業項目の作業結果に応じて、次に実施すべき作業項目を柔軟に切り替えることが可能となる。したがって、作業結果次第では省略し得る作業項目を飛ばして作業を進めることができ、検査・点検作業を効率良く実施することが可能となる。さらに、本実施形態によると、作業結果に応じて複数の作業帳票を切り替えることができる。かかる構成によると、作業の内容に応じて作業項目を分類して複数の作業帳票に分けて管理することができ、管理者による作業帳票の作成および管理が容易となる。
次に、第4の実施形態に係る作業支援システムについて、図面を参照して説明する。本実施形態の作業支援システムでは、作業者の発話の特徴を事前に学習し、作業者による音声入力の認識率のさらに向上させる。以下、本実施形態と第1の実施形態との差異点を中心に説明する。
図15は、本実施形態に係る作業支援システムの構成を例示するブロック図である。図15を参照すると、本実施形態の携帯端末2は話者学習部27をさらに有する点で、第1の実施形態と相違する。図16は、本実施形態に係る作業支援システムにおいて管理サーバ1および携帯端末2が保持するデータを例示する図である。図16を参照すると、本実施形態の管理サーバ1および携帯端末2は、作業者による発話の特徴を学習した結果である学習結果ファイルをさらに保持する点で、第1の実施形態と相違する。
図17は、本実施形態に係る作業支援システムの動作を例示するシーケンス図である。ここでは、本実施形態と第1の実施形態の差分について説明する。
本実施形態によると、作業帳票から抽出された入力候補に基づく音声認識辞書のみならず、作業者の発話の特徴を事前に学習した学習結果ファイルを併用して音声認識を行うことにより、高騒音下であっても作業者が意図した通りの音声入力をさらに高い認識率で実現することができる。
次に、第5の実施形態に係る作業支援システムについて、図面を参照して説明する。本実施形態の作業支援システムでは、作業内容の読み上げおよび音声認識結果の復唱の際における、正しい読みを可能とする。以下、本実施形態と第1の実施形態との差分を中心に説明する。
本実施形態に係る作業支援システムの構成は、第1の実施形態の作業支援システムの構成(図2)と同様である。ただし、本実施形態と第1の実施形態では、管理サーバ1および携帯端末2が保持するデータが相違する。図18は、本実施形態に係る作業支援システムにおいて管理サーバ1および携帯端末2が保持するデータを例示する図である。図18を参照すると、本実施形態の管理サーバ1および携帯端末2は、単語とその読みとを関連付けた読み上げ辞書をさらに保持する点で、第1の実施形態と相違する。
図19は、本実施形態に係る作業支援システムの動作を例示するシーケンス図である。ここでは、本実施形態と第1の実施形態の差分を中心に説明する。
本実施形態によると、作業内容や入力候補の選択肢に専門用語などが含まれる場合であっても、正しい読みに従って音声案内や復唱を行うことができ、誤った読みによって作業者を混乱させたり、作業を中断させたりすることなく、検査・点検作業をスムーズに進めることが可能となる。
上記実施形態に対してさまざまな変形が可能である。例えば、図4に例示した作業帳票において、さらに、作業項目と当該作業項目において作業対象とされる装置(または製品)の画像(静止画)または動画を関連付けて保持するようにしてもよい。この場合、提示部23は、作業項目を実施する際に作業項目名と併せて、作業項目に関連付けられた対象装置(または対象製品)の画像または動画を携帯端末2のディスプレイに表示する(図10のステップA2)。また、提示部23は、当該作業項目の内容を表す作業内容を読み上げるのに伴い、対象装置(または対象製品)の画像または動画を表示中である旨を音声で作業者に通知する(図10のステップA2)ことが好ましい。
[形態1]
上記第1の態様に係る管理サーバのとおりである。
[形態2]
前記作業結果候補は、少なくとも作業結果の種別を表す種別情報を含み、前記種別情報は、前記作業結果の種別が少なくとも文字列、数値、カスタム、または、読み取りのいずれか1つであることを表す、
形態1に記載の管理サーバ。
[形態3]
前記受付部は、前記種別が文字列であることを表す前記種別情報と、文字列と、前記文字列に対する1つ以上の読み方を表す文字列の読み情報とを含む前記作業結果候補を保持する帳票情報を受け付け、
前記辞書登録部は、前記文字列に対応付けて、1つ以上の前記文字列の読み情報を前記辞書に登録する、
形態2に記載の管理サーバ。
[形態4]
前記受付部は、前記種別が数値であることを表す前記種別情報と数値の書式とを含む前記作業結果候補を保持する帳票情報を受け付け、
前記辞書登録部は、前記数値の書式に対応付けて、前記数値の読み情報を前記辞書に登録する、
形態1ないし3のいずれか一に記載の管理サーバ。
[形態5]
前記受付部は、前記種別がカスタムであることを表す前記種別情報と、文字列を所定のルールで定義したときのルール名とを含む前記作業結果候補を保持する帳票情報を受け付けるとともに、前記ルール名と前記所定のルールに基づく前記文字列の定義とを対応付けて保持するファイルを受け付け、
前記辞書登録部は、前記ルール名に対応付けて、前記所定のルールに基づく前記文字列の読み情報を前記辞書に登録する、
形態1ないし4のいずれか一に記載の管理サーバ。
[形態6]
前記辞書登録部は、前記帳票情報に複数の前記作業項目情報が含まれる場合、前記各作業項目情報に関連付けられた前記作業結果候補を、前記作業項目情報ごとの辞書に登録し、
前記送信部は、前記帳票情報を送信する際に、前記帳票情報に含まれる前記各作業項目情報に対応する前記各辞書とともに送信する、
形態1ないし5のいずれか一に記載の管理サーバ。
[形態7]
前記送信部は、前記帳票情報と前記帳票情報と関連付けられた辞書を携帯端末に送信し、
前記携帯端末は、前記作業項目情報に対して受け付けた音声入力を、前記辞書を用いて音声認識するとともに音声認識した結果を前記作業項目情報に対する作業結果として保持する、
形態1ないし6のいずれか一に記載の管理サーバ。
[形態8]
前記携帯端末は、前記作業結果候補に含まれる前記種別情報が読み取りを表す場合に、作業対象物の識別情報を読み取る読取手段を介して受け付けた情報を、前記作業項目情報に対する作業結果として保持する、
形態7に記載の管理サーバ。
[形態9]
前記作業項目情報は、前記作業項目の名称と前記作業項目の内容を表す情報を関連付けて保持し、
前記携帯端末は、前記作業項目の名称を表示するとともに、前記作業項目の内容を表す情報を読み上げる、
形態7または8に記載の管理サーバ。
[形態10]
前記携帯端末は、前記作業項目情報を提示してから前記音声認識が完了するまでに要した時間を前記作業項目情報と関連付けて記録する、
形態7ないし9のいずれか一に記載の管理サーバ。
[形態11]
前記受付部は、前記作業項目情報、および/または、前記作業結果候補を、作業者の習熟度別に保持する前記帳票情報を受け付け、
前記辞書登録部は、前記帳票情報に含まれる習熟度別の作業結果候補を作業項目と関連付けて前記辞書に登録し、
前記携帯端末は、前記作業者の習熟度に応じて前記作業項目情報を提示し、かつ/または、前記辞書のうちの前記作業者の習熟度に対応する作業結果候補を用いて前記音声認識を行う、
形態7ないし10のいずれか一に記載の管理サーバ。
[形態12]
前記携帯端末は、作業者による前記帳票情報を用いた作業回数を作業者ごとに保持し、前記作業回数に基づいて前記作業者の習熟度を判定し、判定した習熟度を用いて前記作業項目情報の提示、および/または、前記音声認識を行う、
形態11に記載の管理サーバ。
[形態13]
前記受付部は、第1の作業項目を表す第1の作業項目情報と前記第1の作業項目の作業結果に応じて前記第1の作業項目の次に実施すべき第2の作業項目を表す第2の作業項目情報とを関連付けて保持する帳票情報を受け付け、
前記携帯端末は、前記第1の作業項目情報に対して受け付けた音声入力を音声認識した結果に応じて、前記第2の作業項目を選択する、
形態7ないし12のいずれか一に記載の管理サーバ。
[形態14]
前記受付部は、前記第1の作業項目情報と前記第2の作業項目情報とを関連付けて保持する第1の帳票情報、および、前記第2の作業項目情報を保持する第2の帳票情報を受け付け、
前記携帯端末は、前記第1の作業項目情報に対して受け付けた音声入力を音声認識した結果に応じて、前記第2の作業項目を前記第2の帳票情報から選択する、
形態13に記載の管理サーバ。
[形態15]
上記第2の態様に係る携帯端末のとおりである。
[形態16]
前記通信部は、前記帳票情報に複数の前記作業項目情報が含まれる場合、前記帳票情報を取得する際に、前記各作業項目情報に関連付けられた作業項目ごとの辞書を取得し、
前記音声認識部は、前記音声入力を、前記各作業項目ごとの辞書を用いて音声認識する、
形態15に記載の携帯端末。
[形態17]
前記通信部は、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる作業結果候補を作業項目または帳票情報と関連付けて辞書に登録するとともに、前記帳票情報と前記辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた辞書を取得する、
形態15に記載の携帯端末。
[形態18]
前記作業結果候補は、少なくとも作業結果の種別を表す種別情報を含み、前記種別情報は、前記作業結果の種別が少なくとも文字列、数値、カスタム、または、読み取りのいずれか1つであることを表す、
形態17に記載の携帯端末。
[形態19]
前記作業結果候補に含まれる前記種別情報が読み取りを表す場合に、作業対象物の識別情報を読み取る読取手段を備え、
前記記憶部は、前記読取手段を介して受け付けた情報を、前記作業項目情報に対する作業結果として保持する、
形態18に記載の携帯端末。
[形態20]
前記作業項目情報は、前記作業項目の名称と前記作業項目の内容を表す情報を関連付けて保持し、
前記提示部は、前記作業項目の名称を表示するとともに、前記作業項目の内容を表す情報を読み上げる、
形態16ないし19のいずれか一に記載の携帯端末。
[形態21]
前記記憶部は、前記作業項目情報を提示してから前記音声認識が完了するまでに要した時間を前記作業項目情報と関連付けて記録する、
形態16ないし20のいずれか一に記載の携帯端末。
[形態22]
前記音声認識に失敗した場合、前記作業結果候補を表示し、前記記憶部は、表示した前記作業結果候補のうちの選択された作業結果を前記作業項目情報に対する作業結果として保持する、
形態18に記載の携帯端末。
[形態23]
前記通信部は、前記管理サーバから複数の帳票情報を取得し、
前記音声認識部は、前記複数の帳票情報のうちの少なくともいずれかの帳票情報の名称に対する音声発話を認識する、
形態17に記載の携帯端末。
[形態24]
前記帳票情報は、前記作業項目情報と作業対象物の静止画または動画とを関連付けて保持し、
前記提示部は、前記作業項目情報とともに前記静止画または動画を表示する、
形態15に記載の携帯端末。
[形態25]
形態1ないし14のいずれか一に記載の管理サーバと、
形態15ないし24のいずれか一に記載の携帯端末と、を備える、
ことを特徴とする作業支援システム。
[形態26]
上記第4の態様に係る作業支援方法のとおりである。
[形態27]
上記第5の態様に係る作業支援方法のとおりである。
[形態28]
上記第6の態様に係るプログラムのとおりである。
[形態29]
上記第7の態様に係るプログラムのとおりである。
2 携帯端末
3 管理者端末
11 通信部
12 記憶部
13 辞書登録部
21 通信部
22 記憶部
23 提示部
24 音声認識部
25 読取部
26 習熟度判定部
27 話者学習部
Claims (26)
- 作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける受付部と、
前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成する辞書登録部と、
前記帳票情報と前記音声認識辞書とを関連付けて記憶する記憶部と、
前記帳票情報を送信する際に対応する前記音声認識辞書とともに送信する送信部と、を備える、
ことを特徴とする管理サーバ。 - 前記作業結果候補は、少なくとも作業結果の種別を表す種別情報を含み、前記種別情報は、前記作業結果の種別が少なくとも文字列、数値、カスタム、または、読み取りのいずれか1つであることを表す、
請求項1に記載の管理サーバ。 - 前記受付部は、前記種別が文字列であることを表す前記種別情報と、文字列と、前記文字列に対する1つ以上の読み方を表す文字列の読み情報とを含む前記作業結果候補を保持する帳票情報を受け付け、
前記辞書登録部は、1つ以上の前記文字列の読み情報を前記文字列に対応付けるようにして前記音声認識辞書を生成する、
請求項2に記載の管理サーバ。 - 前記受付部は、前記種別が数値であることを表す前記種別情報と数値の書式とを含む前記作業結果候補を保持する帳票情報を受け付け、
前記辞書登録部は、前記数値の読み情報を前記数値の書式に対応付けるようにして前記音声認識辞書を生成する、
請求項2に記載の管理サーバ。 - 前記受付部は、前記種別がカスタムであることを表す前記種別情報と、文字列を所定のルールで定義したときのルール名とを含む前記作業結果候補を保持する帳票情報を受け付けるとともに、前記ルール名と前記所定のルールに基づく前記文字列の定義とを対応付けて保持するファイルを受け付け、
前記辞書登録部は、前記文字列の読み情報を前記ルール名に対応付けるようにして前記音声認識辞書を生成する、
請求項2に記載の管理サーバ。 - 前記辞書登録部は、前記帳票情報に複数の前記作業項目情報が含まれる場合、前記各作業項目情報に関連付けられた前記作業結果候補に対する前記音声認識辞書を、前記作業項目情報ごとに生成し、
前記送信部は、前記帳票情報を送信する際に、前記帳票情報に含まれる前記各作業項目情報に対応する前記各音声認識辞書とともに送信する、
請求項1ないし5のいずれか1項に記載の管理サーバ。 - 前記送信部は、前記帳票情報と前記帳票情報と関連付けられた前記音声認識辞書とを携帯端末に送信し、
前記携帯端末は、前記作業項目情報に対して受け付けた音声入力を、前記音声認識辞書を用いて音声認識するとともに音声認識した結果を前記作業項目情報に対する作業結果として保持する、
請求項1ないし6のいずれか1項に記載の管理サーバ。 - 前記送信部は、前記帳票情報と前記帳票情報と関連付けられた前記音声認識辞書とを携帯端末に送信し、
前記携帯端末は、前記作業項目情報に対して受け付けた音声入力を、前記音声認識辞書を用いて音声認識するとともに音声認識した結果を前記作業項目情報に対する作業結果として保持し、
前記携帯端末は、前記作業結果候補に含まれる前記種別情報が読み取りを表す場合に、作業対象物の識別情報を読み取る読取手段を介して受け付けた情報を、前記作業項目情報に対する作業結果として保持する、
請求項2ないし5のいずれか1項に記載の管理サーバ。 - 前記作業項目情報は、前記作業項目の名称と前記作業項目の内容を表す情報を関連付けて保持し、
前記携帯端末は、前記作業項目の名称を表示するとともに、前記作業項目の内容を表す情報を読み上げる、
請求項7または8に記載の管理サーバ。 - 前記携帯端末は、前記作業項目情報を提示してから前記音声認識が完了するまでに要した時間を前記作業項目情報と関連付けて記録する、
請求項7ないし9のいずれか1項に記載の管理サーバ。 - 前記受付部は、前記作業項目情報、および/または、前記作業結果候補を、作業者の習熟度別に保持する前記帳票情報を受け付け、
前記辞書登録部は、前記帳票情報に含まれる習熟度別の作業結果候補を作業項目と関連付けるようにして前記音声認識辞書を生成し、
前記携帯端末は、前記作業者の習熟度に応じて前記作業項目情報を提示し、かつ/または、前記音声認識辞書のうちの前記作業者の習熟度に対応する作業結果候補を用いて前記音声認識を行う、
請求項7ないし10のいずれか1項に記載の管理サーバ。 - 前記携帯端末は、作業者による前記帳票情報を用いた作業回数を作業者ごとに保持し、前記作業回数に基づいて前記作業者の習熟度を判定し、判定した習熟度を用いて前記作業項目情報の提示、および/または、前記音声認識を行う、
請求項11に記載の管理サーバ。 - 前記作業結果候補は、第1の作業項目を表す第1の作業項目情報と前記第1の作業項目の作業結果に応じて前記第1の作業項目の次に実施すべき第2の作業項目を表す第2の作業項目情報とを関連付ける条件分岐を含み、
前記携帯端末は、前記第1の作業項目情報に対して受け付けた音声入力を音声認識した結果に応じて、前記第2の作業項目を選択する、
請求項7ないし12のいずれか1項に記載の管理サーバ。 - 前記受付部は、前記第1の作業項目情報と前記第2の作業項目情報とを関連付ける前記条件分岐を含む第1の帳票情報、および、前記第2の作業項目情報を保持する第2の帳票情報を受け付け、
前記携帯端末は、前記第1の作業項目情報に対して受け付けた音声入力を音声認識した結果に応じて、前記第2の作業項目を前記第2の帳票情報から選択する、
請求項13に記載の管理サーバ。 - 作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた音声認識辞書を取得する通信部と、
前記作業項目情報を提示する提示部と、
前記作業項目情報に対して受け付けた音声入力を、前記音声認識辞書を用いて音声認識する音声認識部と、
音声認識した結果を前記作業項目情報に対する作業結果として保持する記憶部と、を備え、
前記通信部は、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成するとともに、前記帳票情報と前記音声認識辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた前記音声認識辞書とを取得する、
ことを特徴とする携帯端末。 - 前記通信部は、前記帳票情報に複数の前記作業項目情報が含まれる場合、前記帳票情報を取得する際に、前記各作業項目情報に関連付けられた作業項目ごとの前記音声認識辞書を取得し、
前記音声認識部は、前記音声入力を、前記作業項目ごとの前記音声認識辞書を用いて音声認識する、
請求項15に記載の携帯端末。 - 前記作業結果候補は、少なくとも作業結果の種別を表す種別情報を含み、前記種別情報は、前記作業結果の種別が少なくとも文字列、数値、カスタム、または、読み取りのいずれか1つであることを表す、
請求項15に記載の携帯端末。 - 前記作業結果候補に含まれる前記種別情報が読み取りを表す場合に、作業対象物の識別情報を読み取る読取手段を備え、
前記記憶部は、前記読取手段を介して受け付けた情報を、前記作業項目情報に対する作業結果として保持する、
請求項17に記載の携帯端末。 - 前記作業項目情報は、前記作業項目の名称と前記作業項目の内容を表す情報を関連付けて保持し、
前記提示部は、前記作業項目の名称を表示するとともに、前記作業項目の内容を表す情報を読み上げる、
請求項16ないし18のいずれか1項に記載の携帯端末。 - 前記記憶部は、前記作業項目情報を提示してから前記音声認識が完了するまでに要した時間を前記作業項目情報と関連付けて記録する、
請求項16ないし19のいずれか1項に記載の携帯端末。 - 前記音声認識部は、前記作業項目情報に対して音声入力された後、前に戻るに関する所定の音声入力が行われたときに、再度、前記作業項目情報に対する音声入力を受け付ける、
請求項16ないし20のいずれか1項に記載の携帯端末。 - 請求項1ないし14のいずれか1項に記載の管理サーバと、
請求項15ないし21のいずれか1項に記載の携帯端末と、を備える、
ことを特徴とする作業支援システム。 - 管理サーバが、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けるステップと、
前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成するステップと、
前記帳票情報と前記音声認識辞書とを関連付けて記憶するステップと、
前記帳票情報を送信する際に対応する前記音声認識辞書とともに送信するステップと、を含む、
ことを特徴とする作業支援方法。 - 携帯端末が、作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた音声認識辞書を取得するステップと、
前記作業項目情報を提示するステップと、
前記作業項目情報に対して受け付けた音声入力を、前記音声認識辞書を用いて音声認識するステップと、
音声認識した結果を前記作業項目情報に対する作業結果として保持するステップと、を含み、
前記音声認識辞書を取得するステップでは、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成するとともに、前記帳票情報と前記音声認識辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた前記音声認識辞書とを取得する、
ことを特徴とする作業支援方法。 - 作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付ける処理と、
前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成する処理と、
前記帳票情報と前記音声認識辞書とを関連付けて記憶する処理と、
前記帳票情報を送信する際に対応する前記音声認識辞書とともに送信する処理と、をコンピュータに実行させる、
ことを特徴とするプログラム。 - 作業項目を表す作業項目情報を含む帳票情報と、前記帳票情報と関連付けられた音声認識辞書を取得する処理と、
前記作業項目情報を提示する処理と、
前記作業項目情報に対して受け付けた音声入力を、前記音声認識辞書を用いて音声認識する処理と、
音声認識した結果を前記作業項目情報に対する作業結果として保持する処理と、をコンピュータに実行させ、
前記音声認識辞書を取得する処理では、作業項目を表す作業項目情報と作業結果候補とを関連付けて保持する帳票情報を受け付けて前記帳票情報に含まれる前記作業結果候補を前記作業項目または前記帳票情報と関連付けるようにして、前記作業結果候補に対する音声認識用の音声認識辞書を生成するとともに、前記帳票情報と前記音声認識辞書とを関連付けて記憶する管理サーバから、前記帳票情報と、前記帳票情報と関連付けられた前記音声認識辞書とを取得する、
ことを特徴とするプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016122804A JP6744025B2 (ja) | 2016-06-21 | 2016-06-21 | 作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラム |
PCT/JP2017/022626 WO2017221916A1 (ja) | 2016-06-21 | 2017-06-20 | 作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラム |
CN201780016642.2A CN108780542B (zh) | 2016-06-21 | 2017-06-20 | 作业支持系统、管理服务器、便携式终端、作业支持方法以及程序 |
US16/082,335 US20190079919A1 (en) | 2016-06-21 | 2017-06-20 | Work support system, management server, portable terminal, work support method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016122804A JP6744025B2 (ja) | 2016-06-21 | 2016-06-21 | 作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2017228030A JP2017228030A (ja) | 2017-12-28 |
JP2017228030A5 JP2017228030A5 (ja) | 2019-07-18 |
JP6744025B2 true JP6744025B2 (ja) | 2020-08-19 |
Family
ID=60784576
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016122804A Active JP6744025B2 (ja) | 2016-06-21 | 2016-06-21 | 作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20190079919A1 (ja) |
JP (1) | JP6744025B2 (ja) |
CN (1) | CN108780542B (ja) |
WO (1) | WO2017221916A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190267002A1 (en) * | 2018-02-26 | 2019-08-29 | William Crose | Intelligent system for creating and editing work instructions |
JP7124442B2 (ja) * | 2018-05-23 | 2022-08-24 | 富士電機株式会社 | システム、方法、及びプログラム |
CN109087644B (zh) * | 2018-10-22 | 2021-06-25 | 奇酷互联网络科技(深圳)有限公司 | 电子设备及其语音助手的交互方法、具有存储功能的装置 |
CN111381629B (zh) * | 2018-12-29 | 2024-05-14 | 玳能本股份有限公司 | 作业支援系统及作业支援方法 |
CN110335367B (zh) * | 2019-07-11 | 2021-09-07 | 国家电网有限公司 | 设备巡检方法、设备巡检装置及终端设备 |
JP2021131806A (ja) * | 2020-02-21 | 2021-09-09 | オムロン株式会社 | 行動解析装置及び行動解析方法 |
JP6802592B1 (ja) * | 2020-05-25 | 2020-12-16 | Mintomo株式会社 | 音声による点検データ保存方法、システム及びプログラム |
JP7274059B2 (ja) * | 2020-11-27 | 2023-05-15 | 三菱電機株式会社 | 検査作業支援方法及び情報処理システム |
Family Cites Families (99)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5033088A (en) * | 1988-06-06 | 1991-07-16 | Voice Processing Corp. | Method and apparatus for effectively receiving voice input to a voice recognition system |
US4994983A (en) * | 1989-05-02 | 1991-02-19 | Itt Corporation | Automatic speech recognition system using seed templates |
US5465318A (en) * | 1991-03-28 | 1995-11-07 | Kurzweil Applied Intelligence, Inc. | Method for generating a speech recognition model for a non-vocabulary utterance |
US5305244B2 (en) * | 1992-04-06 | 1997-09-23 | Computer Products & Services I | Hands-free user-supported portable computer |
US5452397A (en) * | 1992-12-11 | 1995-09-19 | Texas Instruments Incorporated | Method and system for preventing entry of confusingly similar phases in a voice recognition system vocabulary list |
US5613036A (en) * | 1992-12-31 | 1997-03-18 | Apple Computer, Inc. | Dynamic categories for a speech recognition system |
CA2220004A1 (en) * | 1995-05-26 | 1996-11-28 | John N. Nguyen | Method and apparatus for dynamic adaptation of a large vocabulary speech recognition system and for use of constraints from a database in a large vocabulary speech recognition system |
US5842168A (en) * | 1995-08-21 | 1998-11-24 | Seiko Epson Corporation | Cartridge-based, interactive speech recognition device with response-creation capability |
JP3605682B2 (ja) * | 1996-05-16 | 2004-12-22 | 本田技研工業株式会社 | 音声入力制御装置 |
JPH11266306A (ja) * | 1998-03-16 | 1999-09-28 | Toshiba System Kaihatsu Kk | スクリプト作成装置及びctiシステム |
US6243680B1 (en) * | 1998-06-15 | 2001-06-05 | Nortel Networks Limited | Method and apparatus for obtaining a transcription of phrases through text and spoken utterances |
US6185530B1 (en) * | 1998-08-14 | 2001-02-06 | International Business Machines Corporation | Apparatus and methods for identifying potential acoustic confusibility among words in a speech recognition system |
US6208964B1 (en) * | 1998-08-31 | 2001-03-27 | Nortel Networks Limited | Method and apparatus for providing unsupervised adaptation of transcriptions |
SE9802990L (sv) * | 1998-09-04 | 2000-03-05 | Ericsson Telefon Ab L M | Förfarande och system för taligenkänning |
US6185535B1 (en) * | 1998-10-16 | 2001-02-06 | Telefonaktiebolaget Lm Ericsson (Publ) | Voice control of a user interface to service applications |
US6317039B1 (en) * | 1998-10-19 | 2001-11-13 | John A. Thomason | Wireless video audio data remote system |
US6839669B1 (en) * | 1998-11-05 | 2005-01-04 | Scansoft, Inc. | Performing actions identified in recognized speech |
US6928404B1 (en) * | 1999-03-17 | 2005-08-09 | International Business Machines Corporation | System and methods for acoustic and language modeling for automatic speech recognition with large vocabularies |
US6694296B1 (en) * | 2000-07-20 | 2004-02-17 | Microsoft Corporation | Method and apparatus for the recognition of spelled spoken words |
US6823373B1 (en) * | 2000-08-11 | 2004-11-23 | Informatica Corporation | System and method for coupling remote data stores and mobile devices via an internet based server |
US7925527B1 (en) * | 2000-08-16 | 2011-04-12 | Sparta Systems, Inc. | Process control system utilizing a database system to monitor a project's progress and enforce a workflow of activities within the project |
US6728676B1 (en) * | 2000-10-19 | 2004-04-27 | International Business Machines Corporation | Using speech recognition to improve efficiency of an inventory task |
US6975985B2 (en) * | 2000-11-29 | 2005-12-13 | International Business Machines Corporation | Method and system for the automatic amendment of speech recognition vocabularies |
JP2004516516A (ja) * | 2000-12-18 | 2004-06-03 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 単語を認識するために発言を保存しボキャブラリーを選択する方法 |
US20020138269A1 (en) * | 2001-03-20 | 2002-09-26 | Philley Charles F. | Voice recognition maintenance inspection program |
US7286985B2 (en) * | 2001-07-03 | 2007-10-23 | Apptera, Inc. | Method and apparatus for preprocessing text-to-speech files in a voice XML application distribution system using industry specific, social and regional expression rules |
WO2003032191A1 (fr) * | 2001-10-05 | 2003-04-17 | Fujitsu Limited | Systeme de traduction |
US7996232B2 (en) * | 2001-12-03 | 2011-08-09 | Rodriguez Arturo A | Recognition of voice-activated commands |
US7219062B2 (en) * | 2002-01-30 | 2007-05-15 | Koninklijke Philips Electronics N.V. | Speech activity detection using acoustic and facial characteristics in an automatic speech recognition system |
US20040117243A1 (en) * | 2002-04-15 | 2004-06-17 | Anthony Chepil (Tony) | Method and system for merchandising management |
US20050180464A1 (en) * | 2002-10-01 | 2005-08-18 | Adondo Corporation | Audio communication with a computer |
CN1241138C (zh) * | 2002-11-20 | 2006-02-08 | 金宝电子工业股份有限公司 | 电子字典的查询次数累加记录与显示的方法及其装置 |
AU2003214512A1 (en) * | 2003-04-07 | 2004-11-01 | Nokia Corporation | Method and device for providing speech-enabled input in an electronic device having a user interface |
JP2005037597A (ja) * | 2003-07-18 | 2005-02-10 | Fuji Photo Film Co Ltd | 設備の制御システム |
US20050033576A1 (en) * | 2003-08-08 | 2005-02-10 | International Business Machines Corporation | Task specific code generation for speech recognition decoding |
WO2006028464A1 (en) * | 2003-09-05 | 2006-03-16 | Wifi Med Llc | Patient workflow process |
JP2005122128A (ja) * | 2003-09-25 | 2005-05-12 | Fuji Photo Film Co Ltd | 音声認識システム及びプログラム |
JP2005181442A (ja) * | 2003-12-16 | 2005-07-07 | Fuji Electric Holdings Co Ltd | 音声対話装置、その方法、プログラム |
JP4791699B2 (ja) * | 2004-03-29 | 2011-10-12 | 中国電力株式会社 | 業務支援システム及び方法 |
US20050246177A1 (en) * | 2004-04-30 | 2005-11-03 | Sbc Knowledge Ventures, L.P. | System, method and software for enabling task utterance recognition in speech enabled systems |
US7813928B2 (en) * | 2004-06-10 | 2010-10-12 | Panasonic Corporation | Speech recognition device, speech recognition method, and program |
US7240010B2 (en) * | 2004-06-14 | 2007-07-03 | Papadimitriou Wanda G | Voice interaction with and control of inspection equipment |
KR100682897B1 (ko) * | 2004-11-09 | 2007-02-15 | 삼성전자주식회사 | 사전 업데이트 방법 및 그 장치 |
JP4218758B2 (ja) * | 2004-12-21 | 2009-02-04 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 字幕生成装置、字幕生成方法、及びプログラム |
JP2007193661A (ja) * | 2006-01-20 | 2007-08-02 | Toshiba Mitsubishi-Electric Industrial System Corp | 検査業務支援システム及びそれを用いた製品検査方法 |
JP2008052676A (ja) * | 2006-08-28 | 2008-03-06 | Tokyo Electric Power Co Inc:The | コンピュータ実行可能なプログラム、方法、および処理装置 |
US8589869B2 (en) * | 2006-09-07 | 2013-11-19 | Wolfram Alpha Llc | Methods and systems for determining a formula |
US9318108B2 (en) * | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
US8204739B2 (en) * | 2008-04-15 | 2012-06-19 | Mobile Technologies, Llc | System and methods for maintaining speech-to-speech translation in the field |
US20080109292A1 (en) * | 2006-11-03 | 2008-05-08 | Sap Ag | Voice-enabled workflow item interface |
GB2458238B (en) * | 2006-11-30 | 2011-03-23 | Nat Inst Of Advanced Ind Scien | Web site system for voice data search |
JP4451435B2 (ja) * | 2006-12-06 | 2010-04-14 | 本田技研工業株式会社 | 言語理解装置、言語理解方法、及び、コンピュータプログラム |
US20080312934A1 (en) * | 2007-03-07 | 2008-12-18 | Cerra Joseph P | Using results of unstructured language model based speech recognition to perform an action on a mobile communications facility |
US8200527B1 (en) * | 2007-04-25 | 2012-06-12 | Convergys Cmg Utah, Inc. | Method for prioritizing and presenting recommendations regarding organizaion's customer care capabilities |
US8059882B2 (en) * | 2007-07-02 | 2011-11-15 | Honeywell International Inc. | Apparatus and method for capturing information during asset inspections in a processing or other environment |
US8170874B2 (en) * | 2007-07-02 | 2012-05-01 | Canon Kabushiki Kaisha | Apparatus and method for recognizing speech based on feature parameters of modified speech and playing back the modified speech |
JP5178109B2 (ja) * | 2007-09-25 | 2013-04-10 | 株式会社東芝 | 検索装置、方法及びプログラム |
WO2009105652A2 (en) * | 2008-02-22 | 2009-08-27 | Vocollect, Inc. | Voice-activated emergency medical services communication and documentation system |
JP4749437B2 (ja) * | 2008-03-28 | 2011-08-17 | 三菱電機インフォメーションシステムズ株式会社 | 音声文字変換装置、音声文字変換方法及び音声文字変換プログラム |
US8676904B2 (en) * | 2008-10-02 | 2014-03-18 | Apple Inc. | Electronic devices with voice command and contextual data processing capabilities |
US20120309363A1 (en) * | 2011-06-03 | 2012-12-06 | Apple Inc. | Triggering notifications associated with tasks items that represent tasks to perform |
US10276170B2 (en) * | 2010-01-18 | 2019-04-30 | Apple Inc. | Intelligent automated assistant |
US9009592B2 (en) * | 2010-06-22 | 2015-04-14 | Microsoft Technology Licensing, Llc | Population of lists and tasks from captured voice and audio content |
US20120109686A1 (en) * | 2010-11-01 | 2012-05-03 | Oxbow Intellectual Property, LLC | Electronic medical record system and method |
JP5365644B2 (ja) * | 2011-01-13 | 2013-12-11 | オムロン株式会社 | はんだ付け検査方法、およびはんだ付け検査機ならびに基板検査システム |
CN102184652A (zh) * | 2011-06-01 | 2011-09-14 | 张建强 | 一种演示文字书写过程的数字化方法及软件系统 |
JP2013019958A (ja) * | 2011-07-07 | 2013-01-31 | Denso Corp | 音声認識装置 |
JP2013019942A (ja) * | 2011-07-07 | 2013-01-31 | Fuji Xerox Co Ltd | 情報処理装置、画像形成装置及びプログラム |
JP5891664B2 (ja) * | 2011-09-08 | 2016-03-23 | 富士ゼロックス株式会社 | 情報管理装置、プログラム、および情報管理システム |
US8918789B2 (en) * | 2011-10-26 | 2014-12-23 | International Business Machines Corporation | Task assignment using ranking support vector machines |
US9489940B2 (en) * | 2012-06-11 | 2016-11-08 | Nvoq Incorporated | Apparatus and methods to update a language model in a speech recognition system |
US9646604B2 (en) * | 2012-09-15 | 2017-05-09 | Avaya Inc. | System and method for dynamic ASR based on social media |
US10276157B2 (en) * | 2012-10-01 | 2019-04-30 | Nuance Communications, Inc. | Systems and methods for providing a voice agent user interface |
KR20140056664A (ko) * | 2012-10-30 | 2014-05-12 | 삼성디스플레이 주식회사 | 광감지 패널의 검사 방법, 광감지 패널의 검사 장치 및 광검출 장치의 제조 방법 |
CN104756185B (zh) * | 2012-11-05 | 2018-01-09 | 三菱电机株式会社 | 语音识别装置 |
US9620107B2 (en) * | 2012-12-31 | 2017-04-11 | General Electric Company | Voice inspection guidance |
US9218819B1 (en) * | 2013-03-01 | 2015-12-22 | Google Inc. | Customizing actions based on contextual data and voice-based inputs |
US9626658B2 (en) * | 2013-03-15 | 2017-04-18 | Thomas W. Mustaine | System and method for generating a task list |
JP2014206880A (ja) * | 2013-04-12 | 2014-10-30 | Tis株式会社 | 作業支援装置 |
US10489750B2 (en) * | 2013-06-26 | 2019-11-26 | Sap Se | Intelligent task scheduler |
US10565984B2 (en) * | 2013-11-15 | 2020-02-18 | Intel Corporation | System and method for maintaining speech recognition dynamic dictionary |
JP5929879B2 (ja) * | 2013-12-06 | 2016-06-08 | カシオ計算機株式会社 | 音声出力装置、プログラム、及び音声出力方法 |
US9466296B2 (en) * | 2013-12-16 | 2016-10-11 | Intel Corporation | Initiation of action upon recognition of a partial voice command |
US9858039B2 (en) * | 2014-01-28 | 2018-01-02 | Oracle International Corporation | Voice recognition of commands extracted from user interface screen devices |
CA2898078C (en) * | 2014-02-05 | 2020-09-15 | Grace Castillo Soyao | Systems, devices, and methods for analyzing and enhancing patient health |
US10803538B2 (en) * | 2014-04-14 | 2020-10-13 | Optum, Inc. | System and method for automated data entry and workflow management |
US9946985B2 (en) * | 2014-04-15 | 2018-04-17 | Kofax, Inc. | Touchless mobile applications and context-sensitive workflows |
KR102247533B1 (ko) * | 2014-07-30 | 2021-05-03 | 삼성전자주식회사 | 음성 인식 장치 및 그 제어 방법 |
JP5946073B2 (ja) * | 2014-11-07 | 2016-07-05 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | 推定方法、推定システム、コンピュータ・システムおよびプログラム |
US9947313B2 (en) * | 2015-01-26 | 2018-04-17 | William Drewes | Method for substantial ongoing cumulative voice recognition error reduction |
US20160275942A1 (en) * | 2015-01-26 | 2016-09-22 | William Drewes | Method for Substantial Ongoing Cumulative Voice Recognition Error Reduction |
KR20160098910A (ko) * | 2015-02-11 | 2016-08-19 | 한국전자통신연구원 | 음성 인식 데이터 베이스 확장 방법 및 장치 |
US9865280B2 (en) * | 2015-03-06 | 2018-01-09 | Apple Inc. | Structured dictation using intelligent automated assistants |
CN105575402A (zh) * | 2015-12-18 | 2016-05-11 | 合肥寰景信息技术有限公司 | 网络教学实时语音分析方法 |
US10460024B2 (en) * | 2016-01-05 | 2019-10-29 | Adobe Inc. | Interactive electronic form workflow assistant that guides interactions with electronic forms in a conversational manner |
US11423348B2 (en) * | 2016-01-11 | 2022-08-23 | Hand Held Products, Inc. | System and method for assessing worker performance |
CA3017121C (en) * | 2016-01-29 | 2020-12-29 | Liquid Analytics, Inc. | Systems and methods for dynamic prediction of workflows |
WO2017210784A1 (en) * | 2016-06-06 | 2017-12-14 | Nureva Inc. | Time-correlated touch and speech command input |
DK179343B1 (en) * | 2016-06-11 | 2018-05-14 | Apple Inc | Intelligent task discovery |
-
2016
- 2016-06-21 JP JP2016122804A patent/JP6744025B2/ja active Active
-
2017
- 2017-06-20 CN CN201780016642.2A patent/CN108780542B/zh active Active
- 2017-06-20 US US16/082,335 patent/US20190079919A1/en not_active Abandoned
- 2017-06-20 WO PCT/JP2017/022626 patent/WO2017221916A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
JP2017228030A (ja) | 2017-12-28 |
CN108780542A (zh) | 2018-11-09 |
CN108780542B (zh) | 2023-05-02 |
US20190079919A1 (en) | 2019-03-14 |
WO2017221916A1 (ja) | 2017-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6744025B2 (ja) | 作業支援システム、管理サーバ、携帯端末、作業支援方法およびプログラム | |
US20230237999A1 (en) | Multiple inspector voice inspection | |
US10121466B2 (en) | Methods for training a speech recognition system | |
JP5150747B2 (ja) | 音声認識エラー予測値としての文法適合度評価のための方法およびシステム | |
CN103714048B (zh) | 用于校正文本的方法和系统 | |
JP4574390B2 (ja) | 音声認識方法 | |
US20150179173A1 (en) | Communication support apparatus, communication support method, and computer program product | |
KR101394284B1 (ko) | 어학 학습정보 제공 시스템, 이를 이용한 어학 학습정보 제공방법 및 이를 위한 외국어 교정 처리방법 | |
JP6675788B2 (ja) | 検索結果表示装置、検索結果表示方法、及びプログラム | |
JP2017228030A5 (ja) | ||
KR20200113775A (ko) | 사용자 페르소나를 고려한 대화형 에이전트 장치 및 방법 | |
WO2016136207A1 (ja) | 音声対話装置、音声対話システム、音声対話装置の制御方法、および、プログラム | |
CN111902831B (zh) | 演示支援系统 | |
US11556708B2 (en) | Method and apparatus for recommending word | |
JP6427377B2 (ja) | 設備点検支援装置 | |
JP2020197592A (ja) | テキスト補正装置およびテキスト補正方法 | |
JP4749437B2 (ja) | 音声文字変換装置、音声文字変換方法及び音声文字変換プログラム | |
WO2016143576A1 (ja) | 測定データの記録・管理装置 | |
CN112541651B (zh) | 电子设备、发音学习方法、服务器装置、发音学习处理系统及记录介质 | |
US20230386508A1 (en) | Information processing apparatus, information processing method, and non-transitory recording medium | |
JP4749438B2 (ja) | 音声文字変換装置、音声文字変換方法及び音声文字変換プログラム | |
JP2019049796A (ja) | 物品画像識別システムおよび物品画像識別方法 | |
JP7383667B2 (ja) | 情報処理装置、方法およびプログラム | |
JP2003140682A (ja) | 音声認識装置及び音声辞書作成方法 | |
KR101393255B1 (ko) | 스피치와 키스트로크 조합형 음성 인식 방법 및 음성 인식 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20170607 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190607 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190607 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200512 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200618 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200630 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200722 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6744025 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |