JP4880258B2 - 信頼性スコアを使用した自然言語コール・ルーティングのための方法および装置 - Google Patents
信頼性スコアを使用した自然言語コール・ルーティングのための方法および装置 Download PDFInfo
- Publication number
- JP4880258B2 JP4880258B2 JP2005219753A JP2005219753A JP4880258B2 JP 4880258 B2 JP4880258 B2 JP 4880258B2 JP 2005219753 A JP2005219753 A JP 2005219753A JP 2005219753 A JP2005219753 A JP 2005219753A JP 4880258 B2 JP4880258 B2 JP 4880258B2
- Authority
- JP
- Japan
- Prior art keywords
- word
- words
- categories
- spoken
- score
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 37
- 239000013598 vector Substances 0.000 claims description 41
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 230000009466 transformation Effects 0.000 claims 4
- 238000012549 training Methods 0.000 description 20
- 230000008569 process Effects 0.000 description 16
- 230000006870 function Effects 0.000 description 12
- 239000011159 matrix material Substances 0.000 description 12
- 230000004044 response Effects 0.000 description 10
- 239000003795 chemical substances by application Substances 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 4
- 238000007781 pre-processing Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000000354 decomposition reaction Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/1822—Parsing for meaning understanding
Landscapes
- Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Machine Translation (AREA)
- Telephonic Communication Services (AREA)
Description
B.Carpenter、J.Chu−Carroll、「Natural language Call Routing:a Robust、Self−Organizing Approach、」Speech and Language Processingについての国際会議の議事録(1998) J.Chu−Carroll、R.L.Carpenter、「Vector−Based Natural Language Call Routing、」Computational Linguistics、vol.25、no.3、361〜388(1999) V.Matula、「Using NL to Speech−Enable Advocate and Interaction Center」、In AAU 2004、Session 624、2003年3月13日 J.Chu−Carroll、R.L.Carpenter、「Vector−Based Natural Language Call Routing」、Computational Linguistics、vol.25、no.3、361〜388(1999) L.Li、W.Chou、「Improving Latent Semantic Indexing Based Classifier with Information Gain」、ICSLP 2002議事録、2002年9月 Faloutsos、D.W.Oard、「A Survey of Information Retrieval and Filtering Method」、(1995年8月)
本発明および本発明の詳しい特徴や利点のさらに詳細な理解は、以下の詳細な説明および図面を参照することから得られる。
前述のように、トレーニング段階は、音声認識機能240のトレーニングとコール分類器250のトレーニングとの2つの部分から構成されている。音声認識機能240は、テキスト筆記を作成するために、統計的な言語モデルを利用する。これは、発呼者の話し言葉を手作業で筆記したものでトレーニングされたものである。いったん、ASRエンジン240が認識に使用するために統計的な言語モデルが取得されたなら、これと同じ一連の発呼者の話し言葉の筆記が、LSI分類器250をトレーニングするために使用される。各話し言葉の筆記には、対応するルーティング場所(または文書クラス)が割り当てられている。
Claims (8)
- 話し言葉を複数のカテゴリの少なくとも1つに分類する方法であって、
前記話し言葉のテキストへの変換を取得するステップと、
前記変換の1つまたは複数の単語に関連付けられた信頼性スコアを取得するステップと、ここで、前記信頼性スコアが、前記変換の前記1つまたは複数の単語の信頼度を指示し、
(i)前記話し言葉の前記変換の単語と前記少なくとも1つのカテゴリの単語との近似の程度、および(ii)前記信頼性スコアに基づいて、前記話し言葉を少なくとも1つのカテゴリに分類するステップとからなり、
前記近似の程度が、前記話し言葉の単語ベクトルの合計であるクエリ・ベクトル表示と前記複数のカテゴリのそれぞれとの間のコサイン類似度の大きさであり、
前記クエリ・ベクトル表示が前記信頼性スコアによることを含む方法。
- 前記分類するステップが、単語ベクトルの値による基語のリスト、および前記基語が前記複数のカテゴリの特定の1つにルーティングされることの必要性に対応した可能性を前記単語ベクトルの値によって決定する基語リストを使用する、請求項1に記載の方法。
- 前記分類するステップが、前記複数のカテゴリのそれぞれに対してスコアを生成する工程をさらに含む、請求項1に記載の方法。
- 前記変換の1つまたは複数の単語に対する前記信頼性スコアが、前記話し言葉の各単語に対する信頼性スコアを含む、請求項1に記載の方法。
- 話し言葉を複数のカテゴリの少なくとも1つに分類するためのシステムであって、該システムは、
メモリと、
該メモリに結合された、前記話し言葉のテキストへの変換を取得し、
前記変換の1つまたは複数の単語に関連付けられた信頼性スコアを取得し、ここで、前記信頼性スコアが、前記変換の前記1つまたは複数の単語の信頼度を指示し、
(i)前記話し言葉の前記変換の単語と前記少なくとも1つのカテゴリの単語との近似の程度、および(ii)前記信頼性スコアに基づいて、前記話し言葉を少なくとも1つのカテゴリに分類するよう動作する、少なくとも1つのプロセッサとからなり、
前記近似の程度が、前記話し言葉の単語ベクトルの合計であるクエリ・ベクトル表示と前記複数のカテゴリのそれぞれとの間のコサイン類似度の大きさであり、
前記クエリ・ベクトル表示が前記信頼性スコアによることを備えるシステム。
- 前記プロセッサが、単語ベクトルの値による基語のリスト、および前記基語が前記複数のカテゴリの特定の1つにルーティングされることの必要性に対応した可能性を前記単語ベクトルの値によって決定する基語リストを使用するようにさらに構成されている、請求項5に記載のシステム。
- 前記プロセッサが、前記複数のカテゴリのそれぞれに対するスコアを生成するようさらに構成されている、請求項5に記載のシステム。
- 前記プロセッサが、前記複数のカテゴリの単語ベクトルの値による順序付きリストを生成するようさらに構成されている、請求項5に記載のシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10/901556 | 2004-07-29 | ||
US10/901,556 US20060025995A1 (en) | 2004-07-29 | 2004-07-29 | Method and apparatus for natural language call routing using confidence scores |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2006039575A JP2006039575A (ja) | 2006-02-09 |
JP2006039575A5 JP2006039575A5 (ja) | 2006-12-28 |
JP4880258B2 true JP4880258B2 (ja) | 2012-02-22 |
Family
ID=35668738
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005219753A Expired - Fee Related JP4880258B2 (ja) | 2004-07-29 | 2005-07-29 | 信頼性スコアを使用した自然言語コール・ルーティングのための方法および装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20060025995A1 (ja) |
JP (1) | JP4880258B2 (ja) |
CA (1) | CA2508946C (ja) |
DE (1) | DE102005029869A1 (ja) |
Families Citing this family (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7580837B2 (en) | 2004-08-12 | 2009-08-25 | At&T Intellectual Property I, L.P. | System and method for targeted tuning module of a speech recognition system |
US7242751B2 (en) | 2004-12-06 | 2007-07-10 | Sbc Knowledge Ventures, L.P. | System and method for speech recognition-enabled automatic call routing |
US7751551B2 (en) | 2005-01-10 | 2010-07-06 | At&T Intellectual Property I, L.P. | System and method for speech-enabled call routing |
US7627096B2 (en) * | 2005-01-14 | 2009-12-01 | At&T Intellectual Property I, L.P. | System and method for independently recognizing and selecting actions and objects in a speech recognition system |
US8818808B2 (en) | 2005-02-23 | 2014-08-26 | At&T Intellectual Property Ii, L.P. | Unsupervised and active learning in automatic speech recognition for call classification |
US7657020B2 (en) * | 2005-06-03 | 2010-02-02 | At&T Intellectual Property I, Lp | Call routing system and method of using the same |
US8433558B2 (en) * | 2005-07-25 | 2013-04-30 | At&T Intellectual Property Ii, L.P. | Methods and systems for natural language understanding using human knowledge and collected data |
US8364467B1 (en) | 2006-03-31 | 2013-01-29 | Google Inc. | Content-based classification |
US8370127B2 (en) * | 2006-06-16 | 2013-02-05 | Nuance Communications, Inc. | Systems and methods for building asset based natural language call routing application with limited resources |
GB0612288D0 (en) * | 2006-06-21 | 2006-08-02 | Nokia Corp | Selection of access interface |
US20080033720A1 (en) * | 2006-08-04 | 2008-02-07 | Pankaj Kankar | A method and system for speech classification |
JP4962416B2 (ja) * | 2008-06-03 | 2012-06-27 | 日本電気株式会社 | 音声認識システム |
US9478218B2 (en) * | 2008-10-24 | 2016-10-25 | Adacel, Inc. | Using word confidence score, insertion and substitution thresholds for selected words in speech recognition |
US8509396B2 (en) * | 2009-09-24 | 2013-08-13 | International Business Machines Corporation | Automatic creation of complex conversational natural language call routing system for call centers |
JP5427581B2 (ja) * | 2009-12-11 | 2014-02-26 | 株式会社アドバンスト・メディア | 文章分類装置および文章分類方法 |
US20110251971A1 (en) * | 2010-04-08 | 2011-10-13 | International Business Machines Corporation | System and method for facilitating real-time collaboration in a customer support environment |
US8255401B2 (en) | 2010-04-28 | 2012-08-28 | International Business Machines Corporation | Computer information retrieval using latent semantic structure via sketches |
US9020803B2 (en) | 2012-09-20 | 2015-04-28 | International Business Machines Corporation | Confidence-rated transcription and translation |
US9137372B2 (en) | 2013-03-14 | 2015-09-15 | Mattersight Corporation | Real-time predictive routing |
US9106748B2 (en) | 2013-05-28 | 2015-08-11 | Mattersight Corporation | Optimized predictive routing and methods |
US9767091B2 (en) * | 2015-01-23 | 2017-09-19 | Microsoft Technology Licensing, Llc | Methods for understanding incomplete natural language query |
US9683862B2 (en) | 2015-08-24 | 2017-06-20 | International Business Machines Corporation | Internationalization during navigation |
US10506089B2 (en) | 2016-08-12 | 2019-12-10 | International Business Machines Corporation | Notification bot for topics of interest on voice communication devices |
US10075480B2 (en) | 2016-08-12 | 2018-09-11 | International Business Machines Corporation | Notification bot for topics of interest on voice communication devices |
CN108009182B (zh) * | 2016-10-28 | 2020-03-10 | 京东方科技集团股份有限公司 | 一种信息提取方法和装置 |
CN107123420A (zh) * | 2016-11-10 | 2017-09-01 | 厦门创材健康科技有限公司 | 一种语音识别系统及其交互方法 |
US10540963B2 (en) * | 2017-02-02 | 2020-01-21 | International Business Machines Corporation | Input generation for classifier |
US10885919B2 (en) * | 2018-01-05 | 2021-01-05 | Nuance Communications, Inc. | Routing system and method |
CN108564955B (zh) * | 2018-03-19 | 2019-09-03 | 平安科技(深圳)有限公司 | 电子装置、身份验证方法和计算机可读存储介质 |
CN108564954B (zh) * | 2018-03-19 | 2020-01-10 | 平安科技(深圳)有限公司 | 深度神经网络模型、电子装置、身份验证方法和存储介质 |
US10777203B1 (en) * | 2018-03-23 | 2020-09-15 | Amazon Technologies, Inc. | Speech interface device with caching component |
KR102666658B1 (ko) * | 2018-12-19 | 2024-05-20 | 현대자동차주식회사 | 차량 및 그 제어방법 |
CN110245355B (zh) * | 2019-06-24 | 2024-02-13 | 深圳市腾讯网域计算机网络有限公司 | 文本话题检测方法、装置、服务器及存储介质 |
CN110265018B (zh) * | 2019-07-01 | 2022-03-04 | 成都启英泰伦科技有限公司 | 一种连续发出的重复命令词识别方法 |
US11289086B2 (en) * | 2019-11-01 | 2022-03-29 | Microsoft Technology Licensing, Llc | Selective response rendering for virtual assistants |
US11676586B2 (en) * | 2019-12-10 | 2023-06-13 | Rovi Guides, Inc. | Systems and methods for providing voice command recommendations |
CN115914468B (zh) * | 2023-03-09 | 2023-05-12 | 成都秦川物联网科技股份有限公司 | 智慧燃气呼叫中心的反馈管理方法、物联网系统及介质 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3794597B2 (ja) * | 1997-06-18 | 2006-07-05 | 日本電信電話株式会社 | 話題抽出方法及び話題抽出プログラム記録媒体 |
JP2000315207A (ja) * | 1999-04-30 | 2000-11-14 | Just Syst Corp | 文書データを評価するプログラムを記憶した記憶媒体 |
US6856957B1 (en) * | 2001-02-07 | 2005-02-15 | Nuance Communications | Query expansion and weighting based on results of automatic speech recognition |
US7092888B1 (en) * | 2001-10-26 | 2006-08-15 | Verizon Corporate Services Group Inc. | Unsupervised training in natural language call routing |
US7149687B1 (en) * | 2002-07-29 | 2006-12-12 | At&T Corp. | Method of active learning for automatic speech recognition |
-
2004
- 2004-07-29 US US10/901,556 patent/US20060025995A1/en not_active Abandoned
-
2005
- 2005-05-30 CA CA2508946A patent/CA2508946C/en not_active Expired - Fee Related
- 2005-06-27 DE DE102005029869A patent/DE102005029869A1/de not_active Withdrawn
- 2005-07-29 JP JP2005219753A patent/JP4880258B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20060025995A1 (en) | 2006-02-02 |
JP2006039575A (ja) | 2006-02-09 |
CA2508946C (en) | 2012-08-14 |
CA2508946A1 (en) | 2006-01-29 |
DE102005029869A1 (de) | 2006-02-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4880258B2 (ja) | 信頼性スコアを使用した自然言語コール・ルーティングのための方法および装置 | |
US10643604B2 (en) | Language model customization in speech recognition for speech analytics | |
US11037553B2 (en) | Learning-type interactive device | |
WO2020228173A1 (zh) | 违规话术检测方法、装置、设备及计算机可读存储介质 | |
US7181387B2 (en) | Homonym processing in the context of voice-activated command systems | |
Gorin et al. | How may I help you? | |
JP4267081B2 (ja) | 分散システムにおけるパターン認識登録 | |
US6839671B2 (en) | Learning of dialogue states and language model of spoken information system | |
US6484136B1 (en) | Language model adaptation via network of similar users | |
CN109325091B (zh) | 兴趣点属性信息的更新方法、装置、设备及介质 | |
CN110033760B (zh) | 语音识别的建模方法、装置及设备 | |
US7369998B2 (en) | Context based language translation devices and methods | |
US7634406B2 (en) | System and method for identifying semantic intent from acoustic information | |
US7580835B2 (en) | Question-answering method, system, and program for answering question input by speech | |
US20130262106A1 (en) | Method and system for automatic domain adaptation in speech recognition applications | |
CN110415679B (zh) | 语音纠错方法、装置、设备和存储介质 | |
US20080235018A1 (en) | Method and System for Determing the Topic of a Conversation and Locating and Presenting Related Content | |
US20030040907A1 (en) | Speech recognition system | |
JP2004355003A (ja) | 名前付きエンティティ認識を機能強化するユーザモデル化のシステムおよび方法。 | |
Koumpis et al. | Automatic summarization of voicemail messages using lexical and prosodic features | |
Lee et al. | On natural language call routing | |
US7363212B2 (en) | Method and apparatus for translating a classification system into a target language | |
Callejas et al. | Implementing modular dialogue systems: A case of study | |
Natarajan et al. | Speech-enabled natural language call routing: BBN Call Director | |
US11989514B2 (en) | Identifying high effort statements for call center summaries |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061108 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061108 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100405 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20100519 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111201 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141209 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |