JP2020166021A - Information processor and program - Google Patents
Information processor and program Download PDFInfo
- Publication number
- JP2020166021A JP2020166021A JP2019063559A JP2019063559A JP2020166021A JP 2020166021 A JP2020166021 A JP 2020166021A JP 2019063559 A JP2019063559 A JP 2019063559A JP 2019063559 A JP2019063559 A JP 2019063559A JP 2020166021 A JP2020166021 A JP 2020166021A
- Authority
- JP
- Japan
- Prior art keywords
- text
- important
- unit
- storage unit
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本開示は、情報処理装置、およびプログラムに関する。 The present disclosure relates to information processing devices and programs.
従来より、音声認識の技術を使用し、音声をテキストに変換する技術がある。具体的には、コールセンターなどの音声通話が行われる産業分野において、このような技術を用いて業務効率の向上等に活用されている。 Conventionally, there is a technology for converting voice into text by using voice recognition technology. Specifically, in an industrial field such as a call center where voice calls are made, such technology is used to improve work efficiency and the like.
例えば、複数の音声認識エンジンで同時に音声認識を行い、夫々の音声認識エンジンの信頼性により認識結果を選択する技術がある（特許文献１参照）。 For example, there is a technique in which voice recognition is performed by a plurality of voice recognition engines at the same time and the recognition result is selected according to the reliability of each voice recognition engine (see Patent Document 1).
また、複数の音声認識エンジンで音声認識した結果のいずれかを採用するかを選択させる技術がある（特許文献２参照）。 Further, there is a technique for selecting which of the results of voice recognition by a plurality of voice recognition engines is adopted (see Patent Document 2).
音声認識の認識結果は、音声通話の業務では正解テキストを作成するのに用いられる。正解テキストとは、コールセンターの場合であれば、例えば、ユーザからの問い合わせ内容等をまとめたテキストである。従来は、正解テキストの作成は、音声を聞きながら手作業で実施していたため、多くの作業時間を要するという課題があった。作成作業に、音声認識エンジンを使用して、音声認識結果を参照しながら、正解テキストを作成する場合もある。この場合は、一社のエンジンを使用するため、同じ誤りが何度も発生するなど、手間がかかるという課題もあった。 The recognition result of voice recognition is used to create a correct answer text in the business of voice call. In the case of a call center, the correct answer text is, for example, a text summarizing the contents of inquiries from users. In the past, the creation of correct text was performed manually while listening to the voice, so there was a problem that a lot of work time was required. In some cases, the correct text is created by using the voice recognition engine and referring to the voice recognition result. In this case, since the engine of one company is used, there is also a problem that it takes time and effort such that the same error occurs many times.
音声認識エンジンを使用する場合は、複数の認識手法を並列処理させたり、正解に近い認識結果を選択する手法があるが、画面上で、正解テキストを作成する処理を行うことが検討されていないという課題があった。 When using a speech recognition engine, there are methods for processing multiple recognition methods in parallel or selecting recognition results that are close to the correct answer, but processing to create correct answer text on the screen has not been considered. There was a problem.
本開示の課題は、認識された重要箇所の修正および登録を簡易かつ効率的に行うことができる情報処理装置、およびプログラムを提供することである。 An object of the present disclosure is to provide an information processing device and a program capable of easily and efficiently correcting and registering a recognized important part.
本開示の情報処理装置は、音声認識の結果を修正して登録する情報処理装置であって、音声認識の結果を修正して登録する情報処理装置であって、音声認識を行ってテキストを記憶部に記憶する複数の音声認識部の各々と、前記記憶部に記憶された複数の前記テキストに基づいて、所定の規則に合致する前記テキストを検索し、検索されたテキストを重要テキストとして前記記憶部に記憶し、前記記憶部から読み出して前記重要テキストを表示する重要箇所絞込部と、前記重要箇所絞込部で表示された前記重要テキストから選択された前記重要テキストを前記記憶部から読み出して表示し、表示された前記重要テキストに関する情報を元に修正されたテキストである正解テキストを所定のフォームである第１フォームに入力させ、前記第１フォームに入力された前記正解テキストを前記記憶部に記憶する修正作業部と、前記正解テキストを認識して、予め定められた条件に従って、所定のフォームである第２フォームに情報を入力させる情報登録部と、を備える。 The information processing device of the present disclosure is an information processing device that corrects and registers the result of voice recognition, and is an information processing device that corrects and registers the result of voice recognition, and performs voice recognition and stores a text. Based on each of the plurality of voice recognition units stored in the unit and the plurality of texts stored in the storage unit, the text matching a predetermined rule is searched for, and the searched text is stored as important text. An important part narrowing unit that is stored in a unit and read from the storage unit to display the important text, and the important text selected from the important text displayed by the important part narrowing unit are read from the storage unit. The correct answer text, which is the text corrected based on the information about the important text displayed, is input to the first form, which is a predetermined form, and the correct answer text input to the first form is stored in the memory. It includes a correction work unit to be stored in the unit, and an information registration unit that recognizes the correct answer text and causes information to be input to a second form, which is a predetermined form, in accordance with predetermined conditions.
また、本開示のプログラムは、コンピュータを、本開示に記載の情報処理装置の各部として機能させるためのプログラムである。 Further, the program of the present disclosure is a program for causing the computer to function as each part of the information processing apparatus described in the present disclosure.
本開示の情報処理装置、およびプログラムによれば、認識された重要箇所の修正および登録を簡易かつ効率的に行うことができる、という効果を得られる。 According to the information processing apparatus and the program of the present disclosure, it is possible to obtain the effect that the recognized important parts can be corrected and registered easily and efficiently.
以下、本発明の実施形態について詳細に説明する。なお、本実施形態に係る情報処理装置は、コールセンターのオペレーションにおいて活用され、オペレータが操作する場合を例に説明する。なお、オペレーションでは、修正作業を行う修正モードと、修正を行わない登録モードとがあり、本実施形態では、修正モードを事前に選択している場合を前提とする。 Hereinafter, embodiments of the present invention will be described in detail. The information processing device according to the present embodiment will be described as an example when the information processing device is utilized in the operation of the call center and is operated by the operator. In the operation, there are a correction mode in which the correction work is performed and a registration mode in which the correction is not performed. In the present embodiment, it is assumed that the correction mode is selected in advance.
＜本発明の実施形態に係る情報処理装置の構成＞ <Structure of Information Processing Device According to Embodiment of the Present Invention>
図１は、本実施形態の情報処理装置１０の構成の一例を示すブロック図である。図１に示す構成の情報処理装置１０は、ＣＰＵと、ＲＡＭと、後述する各処理ルーチンを実行するためのプログラムや各種データを記憶したＲＯＭと、を含むコンピュータで構成することが出来る。 FIG. 1 is a block diagram showing an example of the configuration of the information processing device 10 of the present embodiment. The information processing device 10 having the configuration shown in FIG. 1 can be configured by a computer including a CPU, a RAM, and a ROM that stores a program for executing each processing routine described later and various data.
例えば、情報処理装置１０は、図２に示すコンピュータ５０で実現することができる。コンピュータ５０はＣＰＵ５１、一時記憶領域としてのメモリ５２、及び不揮発性の記憶部５３を備える。また、コンピュータ５０は、入出力装置等（図示省略）が接続される入出力interface（Ｉ／Ｆ）５４、及び記録媒体に対するデータの読み込み及び書き込みを制御するread/write（Ｒ／Ｗ）部５５を備える。また、コンピュータ５０は、インターネット等のネットワークに接続されるネットワークＩ／Ｆ５６を備える。ＣＰＵ５１、メモリ５２、記憶部５３、入出力Ｉ／Ｆ５４、Ｒ／Ｗ部５５、及びネットワークＩ／Ｆ５６は、バス５７を介して互いに接続される。 For example, the information processing device 10 can be realized by the computer 50 shown in FIG. The computer 50 includes a CPU 51, a memory 52 as a temporary storage area, and a non-volatile storage unit 53. The computer 50 also has an input / output interface (I / F) 54 to which an input / output device or the like (not shown) is connected, and a read / write (R / W) unit 55 that controls reading and writing of data to a recording medium. To be equipped. Further, the computer 50 includes a network I / F 56 connected to a network such as the Internet. The CPU 51, the memory 52, the storage unit 53, the input / output I / F 54, the R / W unit 55, and the network I / F 56 are connected to each other via the bus 57.
記憶部５３は、Hard Disk Drive（ＨＤＤ）、solid state drive（ＳＳＤ）、フラッシュメモリ等によって実現できる。記憶媒体としての記憶部５３には、コンピュータ５０を機能させるためのプログラムが記憶されている。ＣＰＵ５１は、プログラムを記憶部５３から読み出してメモリ５２に展開し、プログラムが有するプロセスを順次実行する。また、記憶部５３には認識結果記憶部２２の情報が記憶される。 The storage unit 53 can be realized by a Hard Disk Drive (HDD), a solid state drive (SSD), a flash memory, or the like. A program for operating the computer 50 is stored in the storage unit 53 as a storage medium. The CPU 51 reads the program from the storage unit 53, expands it in the memory 52, and sequentially executes the processes included in the program. Further, the storage unit 53 stores the information of the recognition result storage unit 22.
以上が図２におけるコンピュータの電気的な構成の一例の説明である。 The above is an explanation of an example of the electrical configuration of the computer in FIG.
情報処理装置１０は、機能的には、図１に示されるように、複数の音声認識部２０の各々と、認識結果記憶部２２と、重要箇所絞込部２４と、修正作業部２６と、情報登録部２８と、表示部３０とを備えている。なお、認識結果記憶部２２が本発明の記憶部の一例である。 Functionally, as shown in FIG. 1, the information processing device 10 includes each of a plurality of voice recognition units 20, a recognition result storage unit 22, an important part narrowing unit 24, a correction work unit 26, and the like. It includes an information registration unit 28 and a display unit 30. The recognition result storage unit 22 is an example of the storage unit of the present invention.
ここで、表示部３０によって出力される画面インターフェイスの例を説明する。図３は、表示部３０によって出力される画面インターフェイスの一例を示す図である。図３に示すように、画面インターフェイスでは、重要箇所絞込領域２４Ａと、修正作業領域２６Ａと、情報登録領域２８Ａとが表示画面上に一体として形成される。各領域は、それぞれ重要箇所絞込部２４、修正作業部２６、および情報登録部２８に対応する。情報処理装置１０は、画面インターフェイスの各領域に、各処理部の処理結果の各種テキストを反映させる。このような画面インターフェイスによって、画面を、作業別に領域を３分割して表示することで、各種作業を１画面で完了できる。そのため、例えば、コールセンターなどでのオペレータが対話内容の履歴を残す作業などが、短時間で効率的に実施できるようになり、結果的に、より多くのコールに対応できるなどの効果が期待できる。なお、具体的な手法については、各領域に対応する各部の処理において後述する。 Here, an example of the screen interface output by the display unit 30 will be described. FIG. 3 is a diagram showing an example of a screen interface output by the display unit 30. As shown in FIG. 3, in the screen interface, the important part narrowing down area 24A, the correction work area 26A, and the information registration area 28A are integrally formed on the display screen. Each area corresponds to an important part narrowing unit 24, a correction work unit 26, and an information registration unit 28, respectively. The information processing device 10 reflects various texts of the processing results of each processing unit in each area of the screen interface. With such a screen interface, various tasks can be completed on one screen by displaying the screen by dividing the area into three for each task. Therefore, for example, the operation of leaving a history of dialogue contents by an operator at a call center or the like can be efficiently performed in a short time, and as a result, an effect such as being able to handle more calls can be expected. The specific method will be described later in the processing of each part corresponding to each area.
音声認識部２０の各々は、対話の音声認識を行う音声認識エンジンである。音声認識エンジンは音声認識部２０ごとに異なる手法の音声認識を行う。音声認識部２０の各々は、音声認識を行ってテキストを認識結果記憶部２２に記憶する。音声認識は、音声認識エンジンによって識別可能であれば発言者の発話ごとにまとめられ、テキストに発言者の識別ラベルが付与される。 Each of the voice recognition units 20 is a voice recognition engine that performs dialogue voice recognition. The voice recognition engine performs voice recognition by a different method for each voice recognition unit 20. Each of the voice recognition units 20 performs voice recognition and stores the text in the recognition result storage unit 22. Speech recognition is grouped by speaker's utterance if it can be identified by the speech recognition engine, and the text is given a speaker identification label.
認識結果記憶部２２には、音声認識部２０の各々で認識されたラベル付きテキストが記憶される。また、重要箇所絞込部２４で検索された重要テキストが記憶される。また、修正作業部２６で修正された正解テキストにより修正された重要テキストが記憶される。また、修正作業部２６で処理された音声認識エンジンの各々の認識率が記憶される。 The recognition result storage unit 22 stores the labeled text recognized by each of the voice recognition units 20. In addition, the important text searched by the important part narrowing down unit 24 is stored. In addition, the important text corrected by the correct answer text corrected by the correction work unit 26 is stored. In addition, each recognition rate of the voice recognition engine processed by the correction work unit 26 is stored.
重要箇所絞込部２４は、認識結果記憶部２２に記憶された複数のテキストに基づいて、所定の規則に合致するテキストを検索する。重要箇所絞込部２４は、検索されたテキストを重要テキストとして認識結果記憶部２２に記憶し、認識結果記憶部２２から読み出して重要テキストを重要箇所絞込領域２４Ａに表示する。また、重要箇所絞込部２４は、重要テキストの選択を受け付ける。選択は、吹き出し２４Ｂの重要テキストをクリックするか、ドラックアンドドロップ等によりテキストを選択することで行うようにすればよい。 The important part narrowing-down unit 24 searches for texts that match a predetermined rule based on a plurality of texts stored in the recognition result storage unit 22. The important part narrowing unit 24 stores the searched text as important text in the recognition result storage unit 22, reads it from the recognition result storage unit 22, and displays the important text in the important part narrowing area 24A. In addition, the important part narrowing unit 24 accepts the selection of important texts. The selection may be made by clicking the important text in the balloon 24B or by selecting the text by drag and drop or the like.
重要箇所絞込部２４は、対話の中から、重要な箇所と判断される発言や発言内の箇所を抽出し、図２に示したように、重要箇所絞込領域２４Ａに、音声認識で識別された発言者ごと重要テキストを表示する。図３では、右側のアイコンが問い合わせしたユーザ、左側のアイコンがオペレータの発言であることを表し、吹き出し２４Ｂに重要テキストを表示している場合を例に表示している。なお、重要な箇所と判断する所定の規則については、各種方法の採用や組合せにより、重要な箇所の判断を行うルールまたは識別モデルを学習しておけばよい。所定の規則は、例えば、特定キーワードが含まれる文章を抽出する、自然言語解析技術により文脈理解したうえで該当文章を抽出する、不要な文章を省いていくことにより該当文章を抽出するなどといった方法が挙げられる。 The important part narrowing unit 24 extracts the remarks judged to be important parts and the parts in the remarks from the dialogue, and identifies the important part narrowing area 24A by voice recognition as shown in FIG. Display important text for each speaker. In FIG. 3, the icon on the right side indicates the inquiring user, the icon on the left side indicates the remark of the operator, and the case where important text is displayed in the balloon 24B is displayed as an example. As for the predetermined rule to be judged as an important part, it is sufficient to learn the rule or the discriminative model for judging the important part by adopting or combining various methods. Predetermined rules are, for example, methods such as extracting sentences containing a specific keyword, extracting the relevant sentence after understanding the context using natural language analysis technology, and extracting the relevant sentence by omitting unnecessary sentences. Can be mentioned.
また、表示された重要テキストの中に重要な箇所がない場合が考えられる。重要箇所絞込領域２４Ａには、「・・・」表示された重要テキスト以外のテキストを含むエリア２４Ｃが設けられている。当該エリア２４Ｃは、対話の時系列上で、上部の重要テキストと下部の重要テキストとの間に記録されたテキストを含んでいる。 In addition, it is possible that there is no important part in the displayed important text. The important part narrowing down area 24A is provided with an area 24C including texts other than the important texts displayed as "...". The area 24C contains the text recorded between the upper important text and the lower important text in the time series of the dialogue.
図４は、重要テキスト以外のテキストを含むエリア２４Ｃを選択した場合の一例を示す図である。当該エリアを選択することで、重要テキストとしてピックアップしていない別の発言を表示して取り出すことが可能である。重要だと判断して取り出した発言は、重要箇所絞込領域２４Ａに吹き出し２４Ｂの重要テキストとして追加することが可能である。なお、別の発言の吹き出しをポップアップ等で表示するようにしてもよい。 FIG. 4 is a diagram showing an example when the area 24C including texts other than important texts is selected. By selecting the area, it is possible to display and retrieve another statement that has not been picked up as important text. The remarks taken out as important can be added to the important part narrowing area 24A as the important text of the balloon 24B. In addition, a balloon of another remark may be displayed by a pop-up or the like.
修正作業部２６は、重要箇所絞込領域２４Ａに表示された重要テキストから選択された重要テキストを認識結果記憶部２２から読み出して、修正作業領域２６Ａの表示領域２６Ｂに選択された重要テキストに関する情報を表示する。修正作業部２６は、修正作業領域２６Ａの修正作業フォーム２６Ｃから正解テキストの入力を受け付ける。正解テキストは、表示領域２６Ｂに表示された重要テキストに関する情報である、並列表示された音声認識エンジンの音声認識結果を元に修正されたテキストである。修正作業部２６は、正解文登録ボタンの押下を受け付け、正解テキストを修正済みの重要テキストとして認識結果記憶部２２に記憶する。修正作業フォーム２６Ｃへの入力および登録の作業はオペレータが行う。また、修正作業部２６は、認識結果記憶部２２から正解テキストで修正済みの重要テキストを認識結果記憶部２２から読み出して、重要箇所絞込領域２４Ａに修正済みの重要テキストとして表示に反映する。なお、修正作業フォームが第１フォームの一例である。 The correction work unit 26 reads the important text selected from the important texts displayed in the important part narrowing down area 24A from the recognition result storage unit 22, and provides information on the important texts selected in the display area 26B of the correction work area 26A. Is displayed. The correction work unit 26 accepts the input of the correct answer text from the correction work form 26C in the correction work area 26A. The correct answer text is text corrected based on the speech recognition result of the speech recognition engine displayed in parallel, which is information about the important text displayed in the display area 26B. The correction work unit 26 accepts the press of the correct answer sentence registration button, and stores the correct answer text as the corrected important text in the recognition result storage unit 22. The operator performs the work of inputting and registering the correction work form 26C. Further, the correction work unit 26 reads the important text corrected by the correct answer text from the recognition result storage unit 22 from the recognition result storage unit 22 and reflects it on the display as the corrected important text in the important part narrowing down area 24A. The correction work form is an example of the first form.
修正作業領域２６Ａは、重要箇所絞込部２４で重要な箇所と判断された重要テキスト、すなわち選択された重要テキストの文章について、誤認識がある場合に、本領域において修正を可能とする領域である。選択された重要テキストについて、表示領域２６Ｂに複数の音声認識エンジンによる結果を並列表示させることが可能である。なお、複数の音声認識エンジンの結果が合致している部分は、正解とみなすなどすることで、正解文案を修正作業フォーム２６Ｃに自動生成することを可能とする。このように、修正作業領域２６Ａは、正解文案を、オペレータの人手で確認の上、必要に応じ修正を行い、正解文を完成させることが可能な領域である。 The correction work area 26A is an area that enables correction in this area when there is a misrecognition of an important text determined to be an important part by the important part narrowing down unit 24, that is, a sentence of the selected important text. is there. For the selected important text, the results of a plurality of speech recognition engines can be displayed in parallel in the display area 26B. The part where the results of the plurality of voice recognition engines match is regarded as the correct answer, so that the correct answer draft can be automatically generated in the correction work form 26C. As described above, the correction work area 26A is an area in which the correct answer sentence can be completed by manually confirming the correct answer sentence and correcting it as necessary.
また、修正作業部２６は、オペレータが正解テキストを修正作業フォーム２６Ｃで完成させて、正解文登録ボタンを押下したときに、表示領域２６Ｂに並列表示された音声認識エンジンの音声認識結果に対して、音声認識エンジンごとの認識率を算出して認識結果記憶部２２に記憶する。認識結果は、表示領域２６Ｂに表示することも可能である。認識率は、音声認識エンジンの元のテキストと、入力された正解テキストとを比較した場合の一致率等により算出すればよい。認識率は、音声認識エンジンの評価に活用することができる。 Further, the correction work unit 26 receives the voice recognition result of the voice recognition engine displayed in parallel in the display area 26B when the operator completes the correct answer text on the correction work form 26C and presses the correct answer sentence registration button. , The recognition rate for each voice recognition engine is calculated and stored in the recognition result storage unit 22. The recognition result can also be displayed in the display area 26B. The recognition rate may be calculated based on the match rate or the like when the original text of the voice recognition engine is compared with the input correct text. The recognition rate can be used to evaluate the speech recognition engine.
また、重要箇所絞込領域２４Ａに正解テキストの修正結果を反映する際に、重要テキストが修正済みである旨を、注釈、およびフォントの色の変更等によって提示してもよい。このように修正対象を識別可能な形式で反映することで、複数の修正箇所がある場合にいずれの重要テキストを修正したかをオペレータが把握できる。 Further, when the correction result of the correct answer text is reflected in the important part narrowing down area 24A, it may be indicated by an annotation, a font color change, or the like that the important text has been corrected. By reflecting the correction target in an identifiable format in this way, the operator can grasp which important text was corrected when there are a plurality of correction points.
情報登録部２８は、重要箇所絞込領域２４Ａの修正済みの重要テキストを認識して、予め定められた条件に従って、情報登録領域２８Ａの情報登録フォーム２８Ｂ〜Ｅに情報を入力させる。情報登録部２８は、登録ボタンの押下を受け付け、登録情報を認識結果記憶部２２に記憶する。 The information registration unit 28 recognizes the corrected important text of the important part narrowing down area 24A, and causes the information registration areas 28A to input information into the information registration forms 28B to E according to predetermined conditions. The information registration unit 28 accepts the pressing of the registration button and stores the registration information in the recognition result storage unit 22.
情報登録フォーム２８Ｂ〜Ｅには、それぞれカテゴリが設けられており、例えば、情報登録フォーム２８Ｂ、２８Ｃは「自由記入」、２８Ｄは「用件」、２８Ｅは「回答」のカテゴリと定義できる。情報登録領域２８Ａでは、重要箇所絞込領域２４Ａに表示された重要テキストを使用して、カテゴリごとに自動生成した文章や、重要テキストをコピーした文章を、予め用意した情報登録フォーム２８Ｂ〜Ｅに反映して、ユーザの問い合わせ内容にあてはめることで、情報登録を簡易に実施することが可能となる。文章の自動生成は、重要テキストを選択した際に自動で行ってもよいし、情報登録フォームをクリックすることにより行ってもよい。また、コピーは重要テキストをダブルクリックすることで行えるようにしてもよい。 Each of the information registration forms 28B to E is provided with a category. For example, the information registration forms 28B and 28C can be defined as "free entry", 28D can be defined as "message", and 28E can be defined as "answer". In the information registration area 28A, using the important text displayed in the important part narrowing area 24A, the sentences automatically generated for each category and the sentences obtained by copying the important text are put into the information registration forms 28B to E prepared in advance. By reflecting it and applying it to the contents of the user's inquiry, it is possible to easily carry out information registration. The automatic generation of sentences may be performed automatically when an important text is selected, or may be performed by clicking the information registration form. You may also make the copy by double-clicking on the important text.
また、文章の自動生成には、例えば、重要箇所絞込領域２４Ａの吹き出し２４Ｂが、１０行以上におよぶ長文だった場合に、不要な言葉などを取り除き、文章を簡潔にするなどの作業が自動で行われるように作成した自動文章作成ツールを用いてもよい。これは、吹き出し２４Ｂに表示される重要テキストは、話し言葉であるため、不要な言葉も多く含まれる場合もあるからである。 Further, in the automatic generation of sentences, for example, when the balloon 24B of the important part narrowing down area 24A is a long sentence of 10 lines or more, work such as removing unnecessary words and simplifying the sentence is automatically performed. You may use an automatic writing tool created as described in. This is because the important text displayed in the balloon 24B is a spoken word, and therefore may contain many unnecessary words.
＜本発明の実施形態に係る情報処理装置の作用＞ <Operation of the information processing device according to the embodiment of the present invention>
次に、図５を参照して、情報処理装置１０の作用を説明する。図５は、情報処理装置１０で実行する処理ルーチンのフローチャートである。処理ルーチンは、例えば、コールセンターでユーザとの対話が開始されると同時に実行される。 Next, the operation of the information processing apparatus 10 will be described with reference to FIG. FIG. 5 is a flowchart of a processing routine executed by the information processing apparatus 10. The processing routine is executed at the same time as the interaction with the user is started in the call center, for example.
ステップＳ１００において、音声認識部２０の各々は、音声認識を行ってラベル付きのテキストを認識結果記憶部２２に記憶する。 In step S100, each of the voice recognition units 20 performs voice recognition and stores the labeled text in the recognition result storage unit 22.
ステップＳ１０２において、重要箇所絞込部２４は、認識結果記憶部２２に記憶された複数のテキストに基づいて、所定の規則に合致するテキストを検索する。 In step S102, the important part narrowing unit 24 searches for text that matches a predetermined rule based on a plurality of texts stored in the recognition result storage unit 22.
ステップＳ１０４において、重要箇所絞込部２４は、検索されたテキストを重要テキストとして認識結果記憶部２２に記憶し、認識結果記憶部２２から読み出して重要テキストを重要箇所絞込領域２４Ａに表示する。 In step S104, the important part narrowing unit 24 stores the searched text as important text in the recognition result storage unit 22, reads it from the recognition result storage unit 22, and displays the important text in the important part narrowing area 24A.
ステップＳ１０６において、重要箇所絞込部２４は、重要箇所絞込領域２４Ａに表示された重要テキストから重要テキストの選択を受け付ける。 In step S106, the important part narrowing unit 24 accepts the selection of the important text from the important text displayed in the important part narrowing area 24A.
ステップＳ１０８において、修正作業部２６は、重要箇所絞込領域２４Ａに表示された重要テキストから選択された重要テキストを認識結果記憶部２２から読み出して、修正作業領域２６Ａの表示領域２６Ｂに選択された重要テキストに関する情報を表示する。 In step S108, the correction work unit 26 reads the important text selected from the important texts displayed in the important part narrowing down area 24A from the recognition result storage unit 22 and selects it in the display area 26B of the correction work area 26A. Display information about important texts.
ステップＳ１１０において、修正作業部２６は、修正作業領域２６Ａの修正作業フォーム２６Ｃから正解テキストの入力を受け付ける。オペレータは、表示内容を元に、修正作業フォーム２６Ｃに正解テキストを入力する。 In step S110, the correction work unit 26 accepts the input of the correct answer text from the correction work form 26C in the correction work area 26A. The operator inputs the correct answer text in the correction work form 26C based on the displayed contents.
ステップＳ１１２において、修正作業部２６は、正解文登録ボタンの押下を受け付け、正解テキストを修正済みの重要テキストとして認識結果記憶部２２に記憶する。 In step S112, the correction work unit 26 accepts the press of the correct answer sentence registration button, and stores the correct answer text as the corrected important text in the recognition result storage unit 22.
ステップＳ１１４において、修正作業部２６は、認識結果記憶部２２から正解テキストで修正済みの重要テキストを認識結果記憶部２２から読み出して、重要箇所絞込領域２４Ａに修正済みの重要テキストを表示に反映する。 In step S114, the correction work unit 26 reads the important text corrected by the correct answer text from the recognition result storage unit 22 from the recognition result storage unit 22, and reflects the corrected important text in the important part narrowing down area 24A on the display. To do.
ステップＳ１１６において、修正作業部２６は、表示領域２６Ｂに並列表示された音声認識エンジンの音声認識結果に対して、音声認識エンジンごとの認識率を算出して認識結果記憶部２２に記憶する。 In step S116, the correction work unit 26 calculates the recognition rate for each voice recognition engine with respect to the voice recognition result of the voice recognition engine displayed in parallel in the display area 26B, and stores it in the recognition result storage unit 22.
ステップＳ１１８において、情報登録部２８は、重要箇所絞込領域２４Ａの修正済みの重要テキストを認識して、予め定められた条件に従って、情報登録領域２８Ａの情報登録フォーム２８Ｂ〜Ｅに対する情報の入力を受け付ける。 In step S118, the information registration unit 28 recognizes the corrected important text of the important part narrowing down area 24A, and inputs information to the information registration forms 28B to E of the information registration area 28A according to predetermined conditions. Accept.
ステップＳ１２０において、情報登録部２８は、登録ボタンの押下を受け付け、登録情報を認識結果記憶部２２に記憶し、処理を終了する。 In step S120, the information registration unit 28 accepts the pressing of the registration button, stores the registration information in the recognition result storage unit 22, and ends the process.
以上説明したように、本実施形態に係る情報処理装置１０は、認識された重要箇所の修正および登録を簡易かつ効率的に行うことができる。 As described above, the information processing apparatus 10 according to the present embodiment can easily and efficiently modify and register the recognized important portion.
なお、本発明は、上述した実施の形態に限定されるものではなく、この発明の要旨を逸脱しない範囲内で様々な変形や応用が可能である。 The present invention is not limited to the above-described embodiment, and various modifications and applications are possible without departing from the gist of the present invention.
上述した実施形態では、修正モードを事前に選択している場合を例に説明したが、これに限定されるものではない。例えば、重要箇所絞込領域２４Ａでは、修正対象を選ぶのか、情報登録するのかを切り替える画面インターフェイスとしてもよい。図６は、重要箇所絞込領域２４Ａに修正モードと登録モードを切り替えるボタンを設けた場合の一例を示す図である。図６に示すように、モード選択領域２４Ｄによりモードを選択する。修正モードを選択した場合には、重要箇所絞込領域２４Ａで重要テキストを選択すると、修正作業領域２６Ａの表示領域２６Ｂおよび修正作業フォーム２６Ｃに重要テキストが反映される。登録モードを選択した場合には、重要箇所絞込領域２４Ａで重要テキストを選択すると、情報登録フォーム２８Ｂ〜Ｅに所定の条件により自動反映される。また、オペレータは、重要箇所絞込領域２４Ａの重要テキストを、情報登録フォーム２８Ｂ〜Ｅにコピーして情報の登録が行える。また、登録モードを選択した場合には、修正作業領域２６Ａを非表示にするようにしてもよい。このようにモードを切り替えられるようにすることで、オペレータが一画面で簡易に登録作業を行えるようになる。 In the above-described embodiment, the case where the modification mode is selected in advance has been described as an example, but the present invention is not limited to this. For example, in the important part narrowing down area 24A, it may be a screen interface for switching between selecting a correction target and registering information. FIG. 6 is a diagram showing an example in the case where a button for switching between the correction mode and the registration mode is provided in the important part narrowing down area 24A. As shown in FIG. 6, the mode is selected by the mode selection area 24D. When the correction mode is selected, when the important text is selected in the important part narrowing down area 24A, the important text is reflected in the display area 26B and the correction work form 26C of the correction work area 26A. When the registration mode is selected, when important text is selected in the important part narrowing down area 24A, it is automatically reflected in the information registration forms 28B to E according to predetermined conditions. Further, the operator can register the information by copying the important text of the important part narrowing down area 24A to the information registration forms 28B to E. Further, when the registration mode is selected, the correction work area 26A may be hidden. By making it possible to switch the mode in this way, the operator can easily perform the registration work on one screen.
また、本願明細書中において、プログラムが予めインストールされている実施形態として説明したが、当該プログラムを、コンピュータ読み取り可能な記録媒体に格納して提供することも可能である。 Further, although described as an embodiment in which the program is pre-installed in the specification of the present application, it is also possible to provide the program by storing it in a computer-readable recording medium.
１０ 情報処理装置
２０ 音声認識部
２２ 認識結果記憶部
２４ 重要箇所絞込部
２６ 修正作業部
２８ 情報登録部
３０ 表示部
10 Information processing device 20 Voice recognition unit 22 Recognition result storage unit 24 Important part narrowing down unit 26 Correction work unit 28 Information registration unit 30 Display unit
Claims (7)
音声認識を行ってテキストを記憶部に記憶する複数の音声認識部の各々と、
前記記憶部に記憶された複数の前記テキストに基づいて、所定の規則に合致する前記テキストを検索し、検索されたテキストを重要テキストとして前記記憶部に記憶し、前記記憶部から読み出して前記重要テキストを表示する重要箇所絞込部と、
前記重要箇所絞込部で表示された前記重要テキストから選択された前記重要テキストを前記記憶部から読み出して表示し、表示された前記重要テキストに関する情報を元に修正されたテキストである正解テキストを所定のフォームである第１フォームに入力させ、前記第１フォームに入力された前記正解テキストを前記記憶部に記憶する修正作業部と、
前記正解テキストを認識して、予め定められた条件に従って、所定のフォームである第２フォームに情報を入力させる情報登録部と、
を含む情報処理装置。 An information processing device that modifies and registers the result of voice recognition.
Each of a plurality of voice recognition units that perform voice recognition and store text in the storage unit,
Based on the plurality of the texts stored in the storage unit, the texts that match a predetermined rule are searched for, the searched texts are stored in the storage unit as important texts, read from the storage unit, and the important texts are read out. The important part narrowing down part to display the text and
The important text selected from the important text displayed in the important part narrowing section is read from the storage unit and displayed, and the correct answer text which is the text corrected based on the displayed information about the important text is displayed. A correction work unit for inputting to the first form, which is a predetermined form, and storing the correct answer text input to the first form in the storage unit.
An information registration unit that recognizes the correct answer text and inputs information to a second form, which is a predetermined form, according to predetermined conditions.
Information processing equipment including.
前記表示部は、前記重要箇所絞込部に対応する表示領域と、前記修正作業部に対応する表示領域と、前記情報登録部に対応する表示領域とを一体として表示するように形成する請求項１に記載の情報処理装置。 Including the display part
A claim in which the display unit is formed so as to integrally display a display area corresponding to the important part narrowing unit, a display area corresponding to the correction work unit, and a display area corresponding to the information registration unit. The information processing apparatus according to 1.
前記重要テキスト以外のテキストを含むエリアの選択に基づいて、前記重要テキスト以外の候補テキストを表示し、前記候補テキストから選択されたテキストを前記重要テキストとして前記記憶部に記憶する請求項１〜請求項４の何れか１項に記載の情報処理装置。 The important part narrowing down part
Claims 1 to claim that a candidate text other than the important text is displayed based on the selection of an area including a text other than the important text, and the text selected from the candidate text is stored in the storage unit as the important text. Item 4. The information processing apparatus according to any one of items 4.
前記第２フォームは、カテゴリごとに複数設けられており、
前記情報登録部は、前記予め定められた条件に従って、前記重要テキストおよび前記正解テキストに対応するカテゴリの前記第２フォームに前記情報の候補を反映する請求項１〜請求項５のいずれか１項に記載の情報処理装置。 The predetermined conditions include conditions for automatic reflection of the text.
A plurality of the second forms are provided for each category.
The information registration unit is any one of claims 1 to 5, which reflects the candidate for the information in the second form of the category corresponding to the important text and the correct answer text in accordance with the predetermined conditions. The information processing device described in.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019063559A JP7163845B2 (en) | 2019-03-28 | 2019-03-28 | Information processing device and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019063559A JP7163845B2 (en) | 2019-03-28 | 2019-03-28 | Information processing device and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020166021A true JP2020166021A (en) | 2020-10-08 |
| JP7163845B2 JP7163845B2 (en) | 2022-11-01 |
Family
ID=72716127
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019063559A Active JP7163845B2 (en) | 2019-03-28 | 2019-03-28 | Information processing device and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7163845B2 (en) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003505712A (en) * | 1999-04-20 | 2003-02-12 | ベランス・コーポレイション | Broadcast speech recognition system for keyword monitoring |
| JP2006330170A (en) * | 2005-05-24 | 2006-12-07 | Nhk Engineering Services Inc | Recording document preparation support system |
| JP5485419B1 (en) * | 2013-01-08 | 2014-05-07 | 株式会社日立システムズ | Work check sheet reading / registration method and work check sheet reading / registration system |
| JP6139714B1 (en) * | 2016-01-04 | 2017-05-31 | 東芝エレベータ株式会社 | Report creation system |
| WO2019004363A1 (en) * | 2017-06-29 | 2019-01-03 | 株式会社ビズオーシャン | Information inputting method, information inputting device, and information inputting system |
-
2019
- 2019-03-28 JP JP2019063559A patent/JP7163845B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003505712A (en) * | 1999-04-20 | 2003-02-12 | ベランス・コーポレイション | Broadcast speech recognition system for keyword monitoring |
| JP2006330170A (en) * | 2005-05-24 | 2006-12-07 | Nhk Engineering Services Inc | Recording document preparation support system |
| JP5485419B1 (en) * | 2013-01-08 | 2014-05-07 | 株式会社日立システムズ | Work check sheet reading / registration method and work check sheet reading / registration system |
| JP6139714B1 (en) * | 2016-01-04 | 2017-05-31 | 東芝エレベータ株式会社 | Report creation system |
| WO2019004363A1 (en) * | 2017-06-29 | 2019-01-03 | 株式会社ビズオーシャン | Information inputting method, information inputting device, and information inputting system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7163845B2 (en) | 2022-11-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10635392B2 (en) | Method and system for providing interface controls based on voice commands | |
| US11042579B2 (en) | Method and apparatus for natural language query in a workspace analytics system | |
| CN108847241B (en) | Method for recognizing conference voice as text, electronic device and storage medium | |
| CN110164435B (en) | Speech recognition method, device, equipment and computer readable storage medium | |
| US7636657B2 (en) | Method and apparatus for automatic grammar generation from data entries | |
| JP7042693B2 (en) | Interactive business support system | |
| US20070043562A1 (en) | Email capture system for a voice recognition speech application | |
| US8521511B2 (en) | Information extraction in a natural language understanding system | |
| JP4930379B2 (en) | Similar sentence search method, similar sentence search system, and similar sentence search program | |
| JP6622165B2 (en) | Dialog log analysis apparatus, dialog log analysis method and program | |
| CN112101003B (en) | Sentence text segmentation method, device and equipment and computer readable storage medium | |
| CN113064980A (en) | Intelligent question and answer method and device, computer equipment and storage medium | |
| JP2008129692A (en) | Answer support device, answer support system, answer support method and answer support program | |
| CN109693244B (en) | Method and device for optimizing conversation robot | |
| JP2007334429A (en) | Keyword generating method, document retrieval method, topic range estimating method, topic boundary estimating method, and device therefor, its program, and its recording medium | |
| JP2019145102A (en) | Dialog management server, dialog management method, and program | |
| JP5844375B2 (en) | Object search system and object search method | |
| CN115964115B (en) | Numerical control machine tool interaction method based on pre-training reinforcement learning and related equipment | |
| JP7163845B2 (en) | Information processing device and program | |
| JP4220151B2 (en) | Spoken dialogue device | |
| JP7475922B2 (en) | Knowledge information creation support device | |
| JP2011113426A (en) | Dictionary generation device, dictionary generating program, and dictionary generation method | |
| CN113822029A (en) | Customer service assistance method, device and system | |
| JP2007265131A (en) | Dialog information extraction device, dialog information extraction method, and program | |
| WO2021117169A1 (en) | Response work support program, response work support device, and response work support method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211110 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220909 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220920 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221003 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7163845 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |