JP2009541800A - 音声認識方法 - Google Patents

音声認識方法 Download PDF

Info

Publication number
JP2009541800A
JP2009541800A JP2009516739A JP2009516739A JP2009541800A JP 2009541800 A JP2009541800 A JP 2009541800A JP 2009516739 A JP2009516739 A JP 2009516739A JP 2009516739 A JP2009516739 A JP 2009516739A JP 2009541800 A JP2009541800 A JP 2009541800A
Authority
JP
Japan
Prior art keywords
service level
record
assigning
semantic meaning
transcript
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009516739A
Other languages
English (en)
Other versions
JP2009541800A5 (ja
Inventor
コール,デトレフ
フィンケ,マイケル
Original Assignee
マルチモダル テクノロジーズ,インク.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=38834406&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2009541800(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by マルチモダル テクノロジーズ,インク. filed Critical マルチモダル テクノロジーズ,インク.
Publication of JP2009541800A publication Critical patent/JP2009541800A/ja
Publication of JP2009541800A5 publication Critical patent/JP2009541800A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/103Formatting, i.e. changing of presentation of documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/02Feature extraction for speech recognition; Selection of recognition unit
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/20ICT specially adapted for the handling or processing of patient-related medical or healthcare data for electronic clinical trials or questionnaires
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Primary Health Care (AREA)
  • Medical Informatics (AREA)
  • Epidemiology (AREA)
  • Public Health (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Document Processing Apparatus (AREA)
  • Machine Translation (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Child & Adolescent Psychology (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Seasonings (AREA)
  • Investigating Or Analysing Biological Materials (AREA)

Abstract


【課題】
正確性を犠牲にすることなく、発話から派生される筆記録およびその他の種類の報告書を作成できる速度を向上させる音声認識技術を提供する。
【解決手段】
発話の第1の筆記録の第1の部分の第1の語義的意味を特定するステップと、
前記第1の語義的意味に基づいて前記筆記録の前記第1の部分に第1のサービスレベルを割り当てるステップと、
前記第1の筆記録の第2の部分の第2の語義的意味を特定するステップと、
前記第2の語義的意味に基づいて前記筆記録の前記第2の部分に第2のサービスレベルを割り当てるステップと、
前記第1および第2のサービスレベルに応じて前記筆記録を検証するステップと、を含む音声認識方法である。
【選択図】図1

Description

本発明は音声認識方法に関するものである。
人間の発話に基づいて構造化テキスト文書を生成することは、多くの分野で望まれる。司法界においては、例えば、転写士は、証言の書面筆記録を作成するために、公判中および供述中に得られた証言を転写する。同様に、医学界では、医師やその他の医療従事者によって口述された診断、予後、処方、およびその他の情報の筆記録が作成される。
このような筆記録の作成には時間がかかる可能性がある。例えば、人間の転写士が筆記録を作成できる速さは、転写士のタイピング速度や転写されている発話の理解能力によって制限される。最初の筆記録を作成する場合に、人間の転写士の役割を補完または置換するために、ソフトウェアベースの自動音声認識装置が使用されることが多いが、人間の転写士と自動音声認識装置の組み合わせによって作成された筆記録でも誤りを含む。従って、作成されるどの筆記録でも、草稿と見なすことが必要で、何らかの形で誤りの修正が適用される。
筆記録の作成は、これら、およびその他の理由により、時間がかかる。例えば、ある種の筆記録の場合には(医学報告書等)特定の形式で保管および/または表示することが望ましい場合や必要な場合がある。適切な形式で筆記録を提供することは、典型的には、人間の編集と自動処理の何らかの組み合わせが必要で、最終の筆記録の作成に追加の遅延をもたらすことになる。
医学分野における医師、看護士および放射線技師等、報告書の消費者は、報告書を迅速に受け取ることから利益を受けることが多い。例えば、診断がある報告書の可用性に依存する場合、必要な報告書が準備されるまで、診断を下すことができない。同様に、医師が手術室にいながら手術の報告書を携帯型口述デバイスに口述する場合、看護士にとっては、口述の筆記録またはその他の報告書を患者が手術室を出た後できるだけ早く受け取ることが望ましい場合がある。これら、およびその他の理由により、正確性を犠牲にすることなく、発話から派生される筆記録およびその他の種類の報告書を作成できる速度を向上させることが望ましい。
発話は、発話の草稿筆記録を作成するために転写される。高優先度を有する筆記録の部分が特定される。例えば、筆記録の特定セクションは、高優先度セクションとして特定することができる。別の例では、人間の検証を要する筆記録の部分は、高優先度セクションとして特定される。筆記録の高優先度部分は、筆記録のその他の部分を検証せずに、最初に検証される。その他の部分は、後で検証される場合もされない場合もある。初期または全体のいずれかで、検証を筆記録の高優先度部分に制限することによって、検証を実施するために必要な時間が限定されるので、転写処理に過度の遅延をもたらすことなく、初期段階での筆記録の最重要部分の検証を促進させる。筆記録のその他の部分を後から検証することによって、高優先度部分の早期検証は、検証全体の正確性を犠牲にしないことが保証される。
例えば、本発明の一実施形態は、(A)発話の第1の筆記録の第1の部分の第1の語義的意味を特定するステップと、(B)第1の語義的意味に基づいて、筆記録の第1の部分に第1のサービスレベルを割り当てるステップと、(C)第1の筆記録の第2の部分の第2の語義的意味を特定するステップと、(D)第2の語義的意味に基づいて、筆記録の第2の部分に第2のサービスレベルを割り当てるステップと、(E)第1および第2のサービスレベルに応じて、筆記録を検証するステップと、を含む、コンピュータ実装方法である。
本発明の別の実施形態は、発話の第1の筆記録の第1の部分の第1の語義的意味を特定するための第1の意味特定手段と、第1の語義的意味に基づいて、筆記録の第1の部分に第1のサービスレベルを割り当てるための第1のサービスレベル割り当て手段と、第1の筆記録の第2の部分の第2の語義的意味を特定するための第2の意味特定手段と、第2の語義的意味に基づいて、筆記録の第2の部分に第2のサービスレベルを割り当てるための第2のサービスレベル割り当て手段と、第1および第2のサービスレベルに応じて、筆記録を検証するための検証手段と、を備える装置である。
本発明の別の実施形態は、(A)第1の発話の第1の筆記録の第1の語義的意味を特定するステップと、(B)第1の語義的意味に基づいて、第1の筆記録に第1のサービスレベルを割り当てるステップと、(C)第2の発話の第2の筆記録の第2の語義的意味を特定するステップと、(D)第2の語義的意味に基づいて、第2の筆記録に第2のサービスレベルを割り当てるステップと、(E)第1および第2のサービスレベルに応じて、第1および第2の筆記録をそれぞれ検証するステップと、を含む、コンピュータ実装方法である。
本発明の別の実施形態は、第1の発話の第1の筆記録の第1の語義的意味を特定するための手段と、第1の語義的意味に基づいて、第1の筆記録に第1のサービスレベルを割り当てるための手段と、第2の発話の第2の筆記録の第2の語義的意味を特定するための手段と、第2の語義的意味に基づいて、第2の筆記録に第2のサービスレベルを割り当てるための手段と、(E)第1および第2のサービスレベルに応じて、第1および第2の筆記録をそれぞれ検証するための手段と、を備える装置である。
本出願は、2006年6月22日に提出された米国仮申請番号第60/815,689号、「Verification of Extracted Facts」、2006年6月22日に提出された米国仮申請番号第60/815,688号、「Automatic Clinical Decision Support」、2006年月22日に提出された米国仮申請番号第60/815/687号、「Data Extraction Using Service Levels」に対する優先権の利益を請求し、参照により、全体を本出願に組み入れる。
本出願は、2004年8月20日に提出された、共同係属中、共同所有の米国仮申請番号第10/923,517号、「Automated Extraction of Semantic Content and Generation of a Structured Document from Speech」に関連し、参照により本出願に組み入れる。
本発明の多様な態様と実施形態のその他の特徴と利点は、以下の詳細説明と請求項から明らかになる。
本発明の実施形態は、複数のサービスレベルを使用して、発話の筆記録を検証することに関する。サービスレベルは、例えば、検証に必要な所要時間に対応することができる。「高優先度」サービスレベルは、例えば、比較的短い所要時間に対応することができる一方で、「低優先度」サービスレベルは、別のサービスレベルに対応することができる。
別の例としては、高優先度サービスレベルは、対応するテキストを人間が検証することが必要なことを示すことができる一方で、低優先度サービスレベルは人間の検証が不要なことを示すことができる。
筆記録の異なる部分の優先度が特定される。例えば、医学筆記録の「印象」セクションは、報告書の高優先度セクションとして特定することができる一方で、その他のセクションは低優先度セクションとして特定することができる。文書の各部分の検証は、その部分のサービスレベルに応じて実施される。例えば、高優先度セクション(「印象」セクション等)は、緊急に検証することができる一方で、低優先度セクションは後で検証することができる。別の例としては、高優先度セクションは人間によって検証することができる一方で、低優先度はソフトウェアによって検証、または全く検証することができる。
さらに特定して、図1を参照すると、本発明の一実施形態に従い、草稿筆記録106の部分を選択的に検証するためのシステム100のデータの流れ図が示される。図2を参照すると、本発明の一実施形態に従う図1のシステム100により実施される方法200の流れ図が示される。
転写システム104は、草稿筆記録106を作成するために、発話のオーディオストリーム102を転写する(ステップ202)。発話のオーディオストリーム102は、例えば、患者の診察を説明する医師により口述される場合がある。発話のオーディオストリーム102は、任意の形を取ることができる。例えば、直接または間接的に(電話またはIP接続経由等)受信されたオーディオストリーム、または、任意の媒体で任意の形式に記録されたオーディオストリームにすることができる。
転写システム104は、例えば、自動音声認識機能または、自動音声認識機能と人間の転写士との組み合わせを使用して、草稿筆記録106を作成することができる。転写システム104は、例えば、上記の関連特許出願で開示された「Automated Extraction of Semantic Content and Generation of a Structured Document from Speech」の任意の技術を使用して、草稿筆記録106を作成することができる。説明されるように、草稿筆記録106は、発話のオーディオストリーム102の文字(逐語的)の筆記録または文字以外の筆記録のいずれかであるテキスト116を含むことができる。さらに詳細を説明するように、草稿筆記録106は、プレーンテキスト文書にすることができるが、草稿筆記録106は、例えば、全体としてまたは部分的に、文書のセクションを区別するXML文書やその他の種類の文書構造のような構造化文書にすることもできる。構造化文書を符号化するため、および構造化文書に何らかの方式で関連している個別の事実(データ)によって構造化テキストの部分に注釈を付けるために、多様な基準が存在する。医学文書を符号化するための既存技術の例としては、HL7 CDA v2 XML基準(2005年5月からANSIが承認)、SNOMED CT、LOINC、CPT、ICD−9およびICD−10およびUMLSを含む。
図1に示されているように、草稿筆記録106は、1つ以上の符号化108を含み、それぞれは、発話のオーディオストリーム102から抽出された「概念」を符号化する。「概念」という用語は、上記の関連特許出願「Automated Extraction of Semantic content and Generation of a Structured Document from Speech」で定義されているように使用される。参照番号108は、一般的に、草稿筆記録106内の符号化全てを参照するために使用される。図1には2つの符号化として108aと108bだけが示されているが、草稿筆記録106は、任意の数の符号化を含むことができる。
医学報告書においては、各符号化108は、例えば、アレルギー、処方箋、診断または予後を符号化することができる。一般的に、各符号化108は、コードと対応するデータを含むが、これらは、説明を簡単にするために、図1には示されていない。各符号化は、筆記録106のテキストに連結することができる。例えば、符号化108aは、テキスト118aに連結することができ、符号化108bはテキスト118bに連結することができる。例では、その連結されたテキスト118aは、草稿筆記録106の第1のセクション(「印象」セクション等)にあり、その連結されたテキスト118bは、草稿筆記録106の第2のセクション(「患者の病歴」セクション等)にあると想定する。符号化108の実施形態のさらなる詳細は、上記の関連特許出願「Verification of Data Extracted from Speech」に見つけることができる。
優先度識別子120は、部分的優先度122を作成するために、草稿筆記録106の1つ以上の部分の検証優先度を特定する(ステップ204)。草稿筆記録106の「部分」は、例えば、単一の符号化(符号化108aまたは符号化108b等)、文、段落、またはセクションにすることができる。
一般的に、優先度識別子120は、その部分の語義的意味を特定すること、および特定された語義的意味に基づいてその部分の優先度を特定することによって、草稿筆記録106の部分の優先度を特定する。例えば、優先度識別子120は、草稿筆記録106の任意の「印象」セクションに高優先度を、そして、草稿筆記録106のその他全部のセクションに低優先度を割り当てるように構成することができる。
別の例としては、草稿筆記録106のある部分は、人間(ソフトウェアベースまたはその他の自動化ではなく)検証を必要とすることができる。典型的に、草稿筆記録106の全ての部分は、人間の検証が必要である。しかし、自動演算処理のためだけに使用されるデータを表すある符号化等、一部の部分は、見直しのために確認者(例えば医師)に描画されず、人間の検証が必要ではない場合がある。優先度識別子120は、人間の検証が必要な草稿筆記録106の任意の部分に高優先度を割り当てて、草稿筆記録106のその他全ての部分に低優先度を割り当てるように構成することができる。優先度識別子120は、任意の多様な方式で、人間の検証を必要とする草稿筆記録106の部分を検証することができる。例えば、優先度識別子120は、人間の検証が必要として、ある符号化、またはある種類の符号化を特定するように構成することができる。このような場合、優先度識別子120は、このような符号化に高優先度を割り当てることができる。
一般的に、草稿筆記録106の部分は、優先度に関連付けられたサービスレベルに応じて検証される(ステップ205)。例えば、「高優先度」サービして108aと108bだけが示されているが、草稿筆記録106は、任意の数の符号化を含むことができる。
医学報告書においては、各符号化108は、例えば、アレルギー、処方箋、診断または予後を符号化することができる。一般的に、各符号化108は、コードと対応するデータを含むが、これらは、説明を簡単にするために、図1には示されていない。各符号化は、筆記録106のテキストに連結することができる。例えば、符号化108aは、テキスト118aに連結することができ、符号化108bはテキスト118bに連結することができる。例では、その連結されたテキスト118aは、草稿筆記録106の第1のセクション(「印象」セクション等)にあり、その連結されたテキスト118bは、草稿筆記録106の第2のセクション(「患者の病歴」セクション等)にあると想定する。符号化108の実施形態のさらなる詳細は、上記の関連特許出願「Verification of Data Extracted from Speech」に見つけることができる。
優先度識別子120は、部分的優先度122を作成するために、草稿筆記録106の1つ以上の部分の検証優先度を特定する(ステップ204)。草稿筆記録106の「部分」は、例えば、単一の符号化(符号化108aまたは符号化108b等)、文、段落、またはセクションにすることができる。
一般的に、優先度識別子120は、その部分の語義的意味を特定すること、および特定された語義的意味に基づいてその部分の優先度を特定することによって、草稿筆記録106の部分の優先度を特定する。例えば、優先度識別子120は、草稿筆記録106の任意の「印象」セクションに高優先度を、そして、草稿筆記録106のその他全部のセクションに低優先度を割り当てるように構成することができる。
別の例としては、草稿筆記録106のある部分は、人間(ソフトウェアベースまたはその他の自動化ではなく)検証を必要とすることができる。典型的に、草稿筆記録106の全ての部分は、人間の検証が必要である。しかし、自動演算処理のためだけに使用されるデータを表すある符号化等、一部の部分は、見直しのために確認者(例えば医師)に描画されず、人間の検証が必要ではない場合がある。優先度識別子120は、人間の検証が必要な草稿筆記録106の任意の部分に高優先度を割り当てて、草稿筆記録106のその他全ての部分に低優先度を割り当てるように構成することができる。優先度識別子120は、任意の多様な方式で、人間の検証を必要とする草稿筆記録106の部分を検証することができる。例えば、優先度識別子120は、人間の検証が必要として、ある符号化、またはある種類の符号化を特定するように構成することができる。このような場合、優先度識別子120は、このような符号化に高優先度を割り当てることができる。
一般的に、草稿筆記録106の部分は、優先度に関連付けられたサービスレベルに応じて検証される(ステップ205)。例えば、「高優先度」サービスレベルは、高優先度を有する筆記録106の部分に適用することができる。同様に、「低優先度」サービスレベルは、低優先度を有する筆記録106の部分に適用することができる。文書部分の優先度122は、その部分の語義的意味に基づいて特定されているので、その部分に適用されるサービスレベルは、その部分の語義的意味に基づいている。
このようなサービスレベルを適用する一例は、図2のステップ206−212によって示される。さらに具体的には、初期筆記録検証機能124が、最初に、草稿筆記録106のうち、優先度識別子120が高優先度を有するとして特定した部分だけを検証する(ステップ206)。部分優先度122は、例えば、草稿筆記録106の対応部分へのリンクを含むことができる。初期筆記録検証機能124は、このようなリンクを使用して、草稿筆記録106のどの部分が高検証優先度を有するかを特定して、草稿筆記録106のこの部分だけを検証することができる。初期筆記録検証機能124は、草稿筆記録106の各高優先度部分の検証ステータスを示す、初期筆記録検証ステータス識別子128を作成する。検証ステータスは、例えば、草稿筆記録106の対応部分が正しいか、正しくないかを示すことができる。
草稿筆記録106の高優先度部分を検証するために、任意の多様な技術を使用することができる。例は、上記関連特許出願「Verification of Data Extracted from Speech」に見つけることができる。例えば、草稿筆記録106の高優先度部分は、発話のオーディオストリームを口述したのと同じ人の場合がある、人間の確認者に提示することができる。事実、発話のオーディオストリーム102の話し手は、まだ、発話のオーディオストリーム102の残りを口述している場合がある一方で、発話のオーディオストリーム102の以前の部分を表す草稿筆記録106の部分が、検証のために確認者に提示される。
初期筆記録検証機能124により実施される検証処理は、正しくないことが発見された、草稿筆記録106の任意の部分を修正することを含むことができる。例えば、確認者は、見直しのために提示された草稿筆記録106の1つ以上の部分を修正する入力を提供することができる。従って、初期筆記録検証機能124は、符号化108への任意の修正、または、初期筆記録検証機能によって行われたその他の変更を含む、改訂草稿筆記録126を作成することができる(ステップ208)。
初期筆記録検証ステータス識別子128と改訂草稿筆記録126は組み合わせることができることに注意する。例えば、改訂草稿筆記録126の部分は、独自の検証ステータスでタグ付けすることができる。
初期検証後に、何らかの遅延130が存在する(ステップ210)。遅延130は、例えば、改訂草稿筆記録126が看護士または医師に提供されて、医療の提供に使用されている間に発生することができる。
遅延130後、後続筆記録検証機能132は、初期草稿検証機能124によって検証された以外の改訂草稿筆記録126の部分を検証することによって、最終筆記録134を作成する(ステップ212)。例えば、後続筆記録検証機能132は、初期筆記録検証機能124によって検証されなかった全ての部分を検証することができる。後続筆記録検証機能132は、初期筆記録検証機能124と同じ検証技術を使用することができる。初期筆記録検証機能124と後続筆記録検証機能132は、図1では2つの個別の構成要素として示されているが、単一の構成要素に統合することができることに注意する(例えば単一のソフトウェアプログラム)。
今説明した技術は、2段階の「サービスレベル」を実装すると見ることができ、各段階は異なる所要時間要件に対応する。第1(高優先度)の段階のサービスレベルは、比較的短い所要時間に対応し、第2(低優先度)の段階のサービスレベルは、比較的長い所要時間に対応する。草稿筆記録106の部分に割り当てられた優先度122は、しかしながら、所要時間以外の特性に対応するサービスレベルを実装するために使用することができる。
例えば、第1の段階のサービスレベルは、草稿筆記録106の対応部分が人間によって検証されることを要求する場合がある一方で、第2の段階のサービスレベルは、人間の検証を要求しない場合がある。例えば、第2の段階は、ソフトウェア検証を要求する場合、または検証を全く要求しない場合がある。この例では、図2の方法は、ステップ202−208だけしか含まない。さらに具体的には、ステップ202は、上記のように、草稿筆記録106を作成するために、発話のオーディオストリームを転写するステップを含む。ステップ204は、草稿筆記録106の部分の優先度122を特定するステップを含む。この例では、高優先度は、人間の検証が必要なことを示し、低優先度は人間の検証が不要なことを示す。
ステップ206は、草稿筆記録106の高優先度を有する部分だけを検証するステップを含む(つまり、草稿筆記録106の人間の検証を有する部分だけ)。このような検証は、例えば、草稿筆記録106を見直しを行う人間の確認者(口述している医師等)に提供することによって実施することができる。
方法200は、次に、草稿筆記録106の低優先度部分は、人間の検証が不要と特定されているので、この部分を検証せずに終了する。また別の実施形態では、高サービスレベルは、口述している医師による検証を必要とし、中サービスレベルは、データ入力者による検証を必要とし、低サービスレベルは人間の検証を全く必要としない。
本発明の実施形態は、多様な利点を有する。例えば、医師が口述した報告の筆記録は、筆記録の正確性を十分迅速に検証することが不可能であったため、典型的には、看護士やその他の患者の治療にあたる者には、筆記録の草稿が作成された後すぐには提供されない。結果として、草稿筆記録は、典型的には、検証されるまで保留され、このことによって、このような筆記録が使用できるまでに顕著な遅延をもたらす可能性がある。
開示された技術の1つの利点は、少なくとも始めには、検証される筆記録の量を限定することによって、迅速、かつ正確性を高めて筆記録をこのような筆記録の消費者に提供することが可能になった点である。特に、初期または全体的に、草稿筆記録106の高優先度部分に検証を限定することによって、図1および2に示された技術は、筆記録全体を検証することによって招かれる恐れのある顕著な遅延を導入することなく、正確性が最も重要である草稿筆記録106のそれらの部分の正確性を高める。
さらに、開示された技術は、筆記録の医師またはその他の口述者/確認者に、顕著な追加作業を生み出さないので、これらのタスクを実施するために費やす必要な総時間を削減することができる。例えば、医師がある部分を口述直後に、初期筆記録検証機能124が、見直しのために草稿筆記録106の高優先度部分を医師に提示すると、切替コストが関与するために、医師は、筆記録が1時間、1日または1週間後に見直しのために提供されたよりも、そのような部分の誤りをより効率的に検証および修正することができる。さらに、草稿筆記録106が、後ではなく、口述直後に提示されるため、草稿筆記録106の口述者/確認者は、草稿筆記録の目的内容に関する記憶がもっと明確な場合があるので、全体的な正確性が向上する場合がある。
これらの技術は、筆記録の口述者ではなく、他の人が直後に利用できるようにすることが必要な場合、特に有用である。例えば、放射線報告書の「印象」セクションは、緊急病院の放射線検査のために直後に利用できるようにすることが必要であるが、文書の残りの部分は、後から完了することができる。直後の所要時間を保証するために、草稿筆記録106の「印象」セクションは、自己修正のために口述している医師に直後に提供することができるが、専門の転写士によって後から修正されるように、文書の残り部分はそのままにする。
別の例としては、カルテの投薬やアレルギーセクションは、注文入力(つまり、処方箋薬)や治療時点の決定サポートのために利用されるように、電子医療記録(EMR)システムで直後に読取および更新することができる。その他のデータ要素(例えば、現在の病歴)は、後から検証することができる。
開示された技術の別の利点は、自動臨床決定サポートを筆記録に適用するために、上記の関連特許出願「Automatic Decision Support」で開示された技術と組み合わせることができる。例えば、改訂草稿筆記録126は、上記の関連特許出願に説明されているように、臨床決定サポートを迅速に提供するために、自動臨床決定サポートシステムに提供することができる。このような技術は、例えば、草稿筆記録126が、口述している医師またはその他の医療従事者による注意が必要な危険な薬‐薬アレルギーを示すかどうかの迅速な指示を提供するために使用することができる。開示された技術は、草稿筆記録106が作成直後に実施される草稿筆記録106の高優先度部分の検証を実現することにより、このような迅速な臨床決定サポートの提供を促進する。草稿筆記録106の全ての部分が検証されるまで、このような高優先度部分の検証を待たなければならない場合、自動臨床決定サポートを高優先度部分に適用することも、待たなければならなくなる。
この点で、草稿筆記録106のうち、入力として提供することが必要な部分は、高優先度に割り当てることができる。結果として、初期筆記録検証機能124は、草稿筆記録106のうち、臨床決定サポートシステムへの入力として提供することが必要なこれらの部分を検証する。これによって、任意の望ましい臨床決定サポートは、追加の遅延を招くことなく、初期筆記録検証機能124によって作成された改訂草稿筆記録126に適用することができる。
本発明は、特定の実施形態について上記で説明したが、前述の実施形態は説明のために提供されたものであって、本発明の範囲を制限または画定するものではないことを理解する。以下の、しかしこれらに限定されない、その他多様な実施形態も請求項の範囲内である。例えば、説明された要素や構成要素は、同じ機能を実施するために、追加の構成要素にさらに分割、または結合して構成要素を少なくすることができる。
提供されたある例は、音声認識装置によって生成された文書が関与するが、これは、本発明の要件ではない。そうではなく、開示された技術は、生成方法を問わず、任意の種類の文書に適用することができる。このような技術は、例えば、従来のテキスト編集機能を使用して入力された文書と野結合において使用することができる。
発話のオーディオストリーム102は、直接または間接的に受信した生のオーディオストリーム(電話またはIP接続経由で)、または、任意の形式で任意の媒体に記録されたオーディオストリーム等、任意のオーディオストリームにすることができる。分散音声認識(DSR)においては、クライアントは、オーディオストリーム上で処理を実施して、サーバに送信される処理済のオーディオストリームを作成し、サーバは、処理されたオーディオストリーム上で音声認識を実施する。オーディオストリームは、例えば、DSRクライアントによって作成された処理済オーディオストリームにすることができる。
本発明は、説明された分野(医学や法律分野など)に限定されず、任意の分野の任意の種類の文書に一般的に適用される。例えば、確認者138は医師として説明することができるが、これは、本発明の限定ではない。代わりに、確認者138は、任意の人間とすることができる。さらに、本発明の実施形態において使用される文書は、任意の機械読取可能形式で表すことができる。このような形式は、XMLのようなマークアップ言語で表されるプレーンテキストの文書や構造化文書を含む。このような文書は、任意のコンピュータ読取可能媒体に保管することができ、任意の種類の通信チャネルおよびプロトコルを使用して、送信することができる。
説明されたある例は、高と低の2つの優先度しか含まないが、これらは、優先度の例に過ぎず、本発明の制限を構成するものではない。代わりに、開示された技術は、任意の方式で画定および/またはラベル付けされた任意の数の優先度に適用することができる。例えば、これらは、高、中、および低優先度にすることができる。別の例として、優先度は、1分、1時間および1日等の最大所要時間を指定することができる。
さらに、ある例では、高優先度サービスレベルは、「緊急」検証を提供すると説明されているが、これは、本発明の必要要件ではない。代わりに、サービスレベルは、任意の方式で画定および適用することができる。例えば、サービスレベルが所要要件を画定する場合でも、高優先度サービスレベルは緊急所要時間を要求する必要はなく、任意の遅延時間を要求または許可することができる。
開示されたある例は、異なるサービスレベルを単一の筆記録の異なる部分に適用しているが、同じまたは類似の技術を使用して、異なるサービスレベルを異なる文書に適用することができる。つまり、第1の(例えば、高優先度)サービスレベルは、第1の文書全体に適用でき、第2の(例えば、低優先度)サービスレベルは、第2の文書全体に適用できる。第1および第2の文書は、次に、それぞれのサービスレベルに応じて検証することができる。
例えば、転写システム104は、第1の発話のオーディオストリームを転写して、第1の草稿筆記録を作成し、上記の関連特許出願「Automatic Decision Support」で開示された技術を使用して、第1の草稿筆記録に自動決定サポートを適用することができる。第1のサービスレベルは、自動決定サポートの結果に基づいて、第1の草稿筆記録に関連付けることができる。例えば、自動決定サポートが、草稿筆記録は重要な誤りを含んでいないと決定すれば、低優先度サービスレベルは、第1の草稿筆記録に関連付けることができる。
また、転写システム104は、第2の発話のオーディオストリームを転写して、第2の草稿筆記録を作成し、上記の技術を使用して第2の草稿筆記録に自動決定サポートを適用することができる。第2のサービスレベルは、自動決定サポートの結果に基づいて、第2の草稿筆記録に関連付けることができる。例えば、自動決定サポートシステムが、第2の草稿筆記録は重要な誤りを含んでいると決定すれば(薬−薬アレルギーとなる処方箋を記述することによる等)、高優先度サービスレベルは、第2の草稿筆記録に関連付けることができる。
第1および第2の草稿筆記録は、次に、それぞれのサービスレベルに応じて検証することができる。例えば、第1の草稿筆記録が第2の草稿筆記録の前に転写された場合でも、第2の草稿筆記録は、第1の草稿筆記録よりも高いサービスレベルに関連付けられているので、第2の草稿筆記録は、第1の草稿筆記録の前に、検証のために提示することができる。それぞれのサービスレベルに応じて、2つの草稿筆記録を処理する一例としては、第2の草稿筆記録の口述した医師に、特定された誤りを警告するために、直後に電話をかける場合がある。別の例としては、第2の草稿筆記録は、完全な検証が適用される文書のキューの一番上に置かれる場合がある。どちらの場合も、(低優先度の)第1の草稿筆記録は後で検証することができる。このように、異なる文書に異なるサービスレベルを適用することによって、単一の文書の異なる部分に異なるサービスレベルを適用するために、開示された技術の利点が共有される。
検証ステータス130は、「正しい」や「正しくない」のようなステータスを含むことができるが、本発明は、これに限定されるものではない。代わりに、検証ステータス130は、任意の多様な形を取ることができる。検証ステータスや検証ステータスを作成するための技術のさらなる例は、上記の関連特許出願「Verification of Extracted Data」に見つけることができる。
サービスレベルのある個別のタイプを説明したが、このようなサービスレベルは例に過ぎず、本発明の制限を構成するものではない。例えば、上記の関連特許出願「Automatic Decision Support」は、リアルタイムの自動決定サポートを実施するための技術を開示するが、医師(またはその他の話し手)がまだ報告書を口述している間に、決定サポートは、作成中の筆記録に適用される。決定サポートシステムが、話し手‐確認者の緊急注意を要求する重要な誤りまたはその他の問題を特定すると、報告書はまだ口述されているが、システムは問題の話し手‐確認者に知らせる。このような、見直しのための部分的筆記録の緊急のリアルタイムの提示は、例えば、これより低い優先度の誤りは、報告書の口述が完了するまで延期されないというサービスレベルと比較して、1つのサービスレベルと見なすことができる。
さらに、開示されないサービスレベルは、開示された技術と共に使用することができる。さらに、サービスレベルは、多様な方式で互いに組み合わせることができる。例えば、「高優先度」サービスレベルは、次のような筆記録106の部分に適用することができる。(1)筆記録106の規定セクション内、または(2)人間の検証が必要である。
初期筆記録検証機能124および後続筆記録検証機能132によって実施される検証は、草稿筆記録106の口述者等の人間によって全体または一部を実施することができる。このような検証を促進するために、草稿筆記録106の高優先度部分は、草稿筆記録106の表示内で、強調または違う色で表示する等、確認者に目立つようにすることができる。このような表示は、例えば、確認者が筆記録106の内容を口述している間に、確認者に表示することができる。
上記の技術は、例えば、ハードウェア、ソフトウェア、ファームウェア、またはこれらの任意の組み合わせに実装することができる。上記の技術は、プロセッサ、プロセッサにより読取可能な記憶媒体(例えば、揮発性および非揮発性メモリおよび/または記憶要素を含む)、少なくとも1つの入力端末、および少なくとも1つの出力端末を含むプログラム可能なコンピュータ上で実行する1つ以上のコンピュータプログラムで実装することができる。プログラムコードは、説明した機能を実施して出力を生成するために、入力端末を使用して入力された入力に適用される。出力は、1つ以上の出力端末に提供できる。
以下の請求項の範囲内の各コンピュータプログラムは、アセンブリ言語、機械語、高度な手続きプログラム言語、またはオブジェクト指向のプログラム言語等、任意のプログラム言語で実装することができる。プログラム言語は、例えば、コンパイルまたは変換されたプログラム言語にすることができる。
このようなコンピュータプログラムの各々は、コンピュータプロセッサによって実行するために、機械読取可能な記憶端末で明白に実施されるコンピュータプログラム製品に実装することができる。本発明の方法のステップは、入力を操作して出力を生成することにより、本発明の機能を実施するコンピュータ読取可能媒体上に明白に実施されるプログラムを実行するコンピュータプロセッサによって実施することができる。適当なプロセッサは、例として、汎用および専用両方のマイクロプロセッサを含む。
一般的に、プロセッサは、読取専用メモリおよび/またはランダムアクセスメモリから命令やデータを受信する。コンピュータプログラム命令を明白に実施するために適当な記憶端末は、例えば、EPROM、EPROM、EEPROM,およびフラッシュメモリデバイスを含む、半導体メモリデバイス等の全種類の非揮発性メモリ、内部ハードディスクおよび外付けディスク等の磁気ディスク、磁気光ディスクおよびCD−ROMを含む。前述のいずれも、特別に設計されたASIC(アプリケーション専用集積回路)またはFPGA(フィールドプログラマブルゲートアレイ)によって補完、または組み入れることができる。コンピュータは、一般的に、内部ディスク(非表示)または外付けディスク等の記憶媒体からプログラムやデータを受信することもできる。また、これらの要素は、従来のデスクトップまたはワークステーションコンピュータ、さらに、説明した方法を実装するコンピュータプログラムを実行するために適したその他のコンピュータにも存在し、紙、フィルム、ディスプレイ画面またはその他の出力媒体上にカラーまたはグレースケールのピクセルを作成することができる、任意のデジタルプリントエンジンまたはマーキングエンジン、ディスプレイモニタ、またはその他のラスター出力デバイスと組み合わせて使用することができる。
図1は、本発明の一実施形態に従い、発話の筆記録を検証するためのシステムのデータの流れ図である。 図2は、本発明の一実施形態に従い、図1のシステムにより実施される方法の流れ図である。

Claims (13)

  1. (A)発話の第1の筆記録の第1の部分の第1の語義的意味を特定するステップと、
    (B)前記第1の語義的意味に基づいて前記筆記録の前記第1の部分に第1のサービスレベルを割り当てるステップと、
    (C)前記第1の筆記録の第2の部分の第2の語義的意味を特定するステップと、
    (D)前記第2の語義的意味に基づいて前記筆記録の前記第2の部分に第2のサービスレベルを割り当てるステップと、
    (E)前記第1および第2のサービスレベルに応じて前記筆記録を検証するステップと、を含む音声認識方法。
  2. 前記(E)は、
    (1)第1の時間に前記第1の部分を検証するステップと、
    (2)前記第1の時間より後である第2の時間に前記第2の部分を検証するステップと、を含む、請求項1に記載の方法。
  3. 前記(A)は、発話の前記第1の筆記録の第1の複数部分の第1の複数の語義的意味を特定す
    るステップを含み、
    前記(B)は、前記第1の筆記録の前記第1の複数の部分に前記第1のサービスレベルを割り当てるステップを含み、
    前記(C)は、前記第1の筆記録の第2の複数部分の第2の複数の語義的意味を特定するステップを含み、
    前記(D)は、前記第1の筆記録の前記第2の複数の部分に前記第2のサービスレベルを割り当てるステップを含み、
    前記(E)は、第1の期間中に前記第1の複数の部分を検証するステップと、前記第1の期間よりも後の第2の期間中に前記第2の複数の部分を検証するステップと、を含む、請求項1に記載の方法。
  4. 前記(E)は、人間の検証者を使用して、前記第1の部分を検証するステップを含む、請求項1に記載の方法。
  5. 前記(E)は、コンピュータによって実装される検証機能を使用して、前記第2の部分を検証するステップをさらに含む、請求項4に記載の方法。
  6. 前記(A)は、前記第1の筆記録の前記第1の部分の文書セクションタイプを特定するステップを含み、前記(B)は、前記文書セクションタイプに基づいて、前記筆記録の前記第1の部分に前記第1のサービスレベルを割り当てるステップを含む、請求項1に記載の方法。
  7. 前記(B)は、
    (1)前記第1の部分が人間による検証を必要とするかどうかを決定するステップと、
    (2)前記第1の部分が人間による検証を必要とするかどうかに基づいて、前記第1
    の部分に前記第1のサービスレベルを割り当てるステップと、を含む請求項1に記
    載の方法。
  8. 発話の第1の筆記録の第1の部分の第1の語義的意味を特定するための第1の意味特定手段と、
    前記第1の語義的意味に基づいて、前記筆記録の前記第1の部分に、第1のサービスレベルを割り当てるための第1のサービスレベル割り当て手段と、
    前記第1の筆記録の第2の部分の第2の語義的意味を特定するための第2の意味特定手段と、
    前記第2の語義的意味に基づいて、前記筆記録の前記第2の部分に、第2のサービスレベルを割り当てるための第2のサービスレベル割り当て手段と、
    前記第1および第2のサービスレベルに応じて前記筆記録を検証するための検証手段と、を備える装置。
  9. 前記検証手段は、第1の時間に前記第1の部分を検証するための手段と、
    前記第1の時間より後である第2の時間に前記第2の部分を検証するための手段と、を備える請求項8に記載の装置。
  10. 前記第1の意味特定手段は、前記第1の筆記録の前記第1の部分の文書セクションタイプを特定するための手段を備え、前記第1のサービスレベル割り当て手段は、前記文書セクションタイプに基づいて、前記筆記録の前記第1の部分に前記第1のサービスレベルを割り当てるための手段を備える、請求項8に記載の装置。
  11. 前記第1のサービスレベル割り当て手段は、
    前記第1の部分が人間による検証を必要とするかどうかを決定するための手段と、
    前記第1の部分が人間による検証を必要とするかどうかに基づいて、前記第1の部分に前記第1のサービスレベルを割り当てるための手段と、を含む請求項8に記載の装置。
  12. (A)第1の発話の第1の筆記録の第1の語義的意味を特定するステップと、
    (B)前記第1の語義的意味に基づいて前記第1の筆記録に第1のサービスレベルを割り当てるステップと、
    (C)第2発話の第2の筆記録の第2の語義的意味を特定するステップと、
    (D)前記第2の語義的意味に基づいて前記第2の筆記録に第2のサービスレベルを割り当てるステップと、
    (E)前記第1および第2のサービスレベルに応じて、それぞれ、前記第1および第2の筆記録を検証するステップと、を含むコンピュータ実装方法。
  13. 第1の発話の第1の筆記録の第1の語義的意味を特定するための手段と、
    前記第1の語義的意味に基づいて前記第1の筆記録に第1のサービスレベルを割り当てるための手段と、
    第2発話の第2の筆記録の第2の語義的意味を特定するための手段と、
    前記第2の語義的意味に基づいて前記第2の筆記録に第2のサービスレベルを割り当てるための手段と、
    前記第1および第2のサービスレベルに応じて、それぞれ、前記第1および第2の筆記録を検証するための手段と、を備える装置。
JP2009516739A 2006-06-22 2007-06-21 音声認識方法 Pending JP2009541800A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US81568906P 2006-06-22 2006-06-22
US81568706P 2006-06-22 2006-06-22
US81568806P 2006-06-22 2006-06-22
PCT/US2007/071838 WO2007150006A2 (en) 2006-06-22 2007-06-21 Applying service levels to transcripts

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2014128942A Division JP5964358B2 (ja) 2006-06-22 2014-06-24 音声認識方法

Publications (2)

Publication Number Publication Date
JP2009541800A true JP2009541800A (ja) 2009-11-26
JP2009541800A5 JP2009541800A5 (ja) 2013-09-12

Family

ID=38834406

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2009516739A Pending JP2009541800A (ja) 2006-06-22 2007-06-21 音声認識方法
JP2009516737A Active JP5167256B2 (ja) 2006-06-22 2007-06-21 コンピュータ実装方法
JP2009516738A Expired - Fee Related JP5385134B2 (ja) 2006-06-22 2007-06-21 コンピュータ実装方法
JP2014128942A Expired - Fee Related JP5964358B2 (ja) 2006-06-22 2014-06-24 音声認識方法

Family Applications After (3)

Application Number Title Priority Date Filing Date
JP2009516737A Active JP5167256B2 (ja) 2006-06-22 2007-06-21 コンピュータ実装方法
JP2009516738A Expired - Fee Related JP5385134B2 (ja) 2006-06-22 2007-06-21 コンピュータ実装方法
JP2014128942A Expired - Fee Related JP5964358B2 (ja) 2006-06-22 2014-06-24 音声認識方法

Country Status (5)

Country Link
US (10) US20070299665A1 (ja)
EP (3) EP2030197A4 (ja)
JP (4) JP2009541800A (ja)
CA (3) CA2652441C (ja)
WO (3) WO2007150006A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110024026A (zh) * 2016-11-28 2019-07-16 谷歌有限责任公司 使用语音识别模型生成结构化文本内容

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2003274592A1 (en) 2002-11-28 2004-06-18 Koninklijke Philips Electronics N.V. Method to assign word class information
US9710819B2 (en) * 2003-05-05 2017-07-18 Interactions Llc Real-time transcription system utilizing divided audio chunks
US8335688B2 (en) * 2004-08-20 2012-12-18 Multimodal Technologies, Llc Document transcription system training
US20130304453A9 (en) * 2004-08-20 2013-11-14 Juergen Fritsch Automated Extraction of Semantic Content and Generation of a Structured Document from Speech
US7584103B2 (en) * 2004-08-20 2009-09-01 Multimodal Technologies, Inc. Automated extraction of semantic content and generation of a structured document from speech
US7844464B2 (en) * 2005-07-22 2010-11-30 Multimodal Technologies, Inc. Content-based audio playback emphasis
US7502741B2 (en) * 2005-02-23 2009-03-10 Multimodal Technologies, Inc. Audio signal de-identification
US7640158B2 (en) 2005-11-08 2009-12-29 Multimodal Technologies, Inc. Automatic detection and application of editing patterns in draft documents
WO2007150006A2 (en) 2006-06-22 2007-12-27 Multimodal Technologies, Inc. Applying service levels to transcripts
US20080177623A1 (en) * 2007-01-24 2008-07-24 Juergen Fritsch Monitoring User Interactions With A Document Editing System
US8348839B2 (en) 2007-04-10 2013-01-08 General Electric Company Systems and methods for active listening/observing and event detection
US8019608B2 (en) 2008-08-29 2011-09-13 Multimodal Technologies, Inc. Distributed speech recognition using one way communication
US20100125450A1 (en) 2008-10-27 2010-05-20 Spheris Inc. Synchronized transcription rules handling
US20100145720A1 (en) * 2008-12-05 2010-06-10 Bruce Reiner Method of extracting real-time structured data and performing data analysis and decision support in medical reporting
CA2789158C (en) 2010-02-10 2016-12-20 Mmodal Ip Llc Providing computable guidance to relevant evidence in question-answering systems
WO2011106776A2 (en) * 2010-02-26 2011-09-01 Multimodal Technologies, Inc. Clinical data reconciliation as part of a report generation solution
US20150279354A1 (en) * 2010-05-19 2015-10-01 Google Inc. Personalization and Latency Reduction for Voice-Activated Commands
US8630842B2 (en) * 2010-06-30 2014-01-14 Zeus Data Solutions Computerized selection for healthcare services
US9613325B2 (en) * 2010-06-30 2017-04-04 Zeus Data Solutions Diagnosis-driven electronic charting
US11955238B2 (en) 2010-09-01 2024-04-09 Apixio, Llc Systems and methods for determination of patient true state for personalized medicine
US11971911B2 (en) * 2010-09-01 2024-04-30 Apixio, Llc Systems and methods for customized annotation of medical information
US12009093B2 (en) 2010-09-01 2024-06-11 Apixio, Llc Systems and methods for determination of patient true state for risk management
US8463673B2 (en) 2010-09-23 2013-06-11 Mmodal Ip Llc User feedback in semi-automatic question answering systems
US8959102B2 (en) 2010-10-08 2015-02-17 Mmodal Ip Llc Structured searching of dynamic structured document corpuses
US9904768B2 (en) 2011-02-18 2018-02-27 Nuance Communications, Inc. Methods and apparatus for presenting alternative hypotheses for medical facts
US8768723B2 (en) 2011-02-18 2014-07-01 Nuance Communications, Inc. Methods and apparatus for formatting text for clinical fact extraction
US10460288B2 (en) 2011-02-18 2019-10-29 Nuance Communications, Inc. Methods and apparatus for identifying unspecified diagnoses in clinical documentation
US8924394B2 (en) 2011-02-18 2014-12-30 Mmodal Ip Llc Computer-assisted abstraction for reporting of quality measures
US10032127B2 (en) 2011-02-18 2018-07-24 Nuance Communications, Inc. Methods and apparatus for determining a clinician's intent to order an item
WO2012177662A1 (en) * 2011-06-19 2012-12-27 Mmodal Ip Llc Document extension in dictation-based document generation workflow
US9286035B2 (en) 2011-06-30 2016-03-15 Infosys Limited Code remediation
US9021565B2 (en) * 2011-10-13 2015-04-28 At&T Intellectual Property I, L.P. Authentication techniques utilizing a computing device
CA2856966C (en) 2011-11-28 2017-07-04 Voicehit Electronic health record system and method for patient encounter transcription and documentation
US9569594B2 (en) 2012-03-08 2017-02-14 Nuance Communications, Inc. Methods and apparatus for generating clinical reports
US9679077B2 (en) * 2012-06-29 2017-06-13 Mmodal Ip Llc Automated clinical evidence sheet workflow
CA2881564A1 (en) 2012-08-13 2014-02-20 Mmodal Ip Llc Maintaining a discrete data representation that corresponds to information contained in free-form text
US9710431B2 (en) * 2012-08-18 2017-07-18 Health Fidelity, Inc. Systems and methods for processing patient information
US11024406B2 (en) 2013-03-12 2021-06-01 Nuance Communications, Inc. Systems and methods for identifying errors and/or critical results in medical reports
CN103198220A (zh) * 2013-04-08 2013-07-10 浙江大学医学院附属第二医院 计算机辅助抗菌药物临床应用诊间决策系统
US9154617B2 (en) * 2013-04-19 2015-10-06 International Business Machines Corporation Recording and playing back portions of a telephone call
US11183300B2 (en) * 2013-06-05 2021-11-23 Nuance Communications, Inc. Methods and apparatus for providing guidance to medical professionals
US10496743B2 (en) 2013-06-26 2019-12-03 Nuance Communications, Inc. Methods and apparatus for extracting facts from a medical text
US20150121456A1 (en) * 2013-10-25 2015-04-30 International Business Machines Corporation Exploiting trust level lifecycle events for master data to publish security events updating identity management
US10324966B2 (en) 2014-03-21 2019-06-18 Mmodal Ip Llc Search by example
US10373711B2 (en) 2014-06-04 2019-08-06 Nuance Communications, Inc. Medical coding system with CDI clarification request notification
US10754925B2 (en) 2014-06-04 2020-08-25 Nuance Communications, Inc. NLU training with user corrections to engine annotations
US10950329B2 (en) 2015-03-13 2021-03-16 Mmodal Ip Llc Hybrid human and computer-assisted coding workflow
US11152084B2 (en) * 2016-01-13 2021-10-19 Nuance Communications, Inc. Medical report coding with acronym/abbreviation disambiguation
US10043135B2 (en) * 2016-03-08 2018-08-07 InferLink Corporation Textual information extraction, parsing, and inferential analysis
EP3223179A1 (en) * 2016-03-24 2017-09-27 Fujitsu Limited A healthcare risk extraction system and method
US10796715B1 (en) * 2016-09-01 2020-10-06 Arizona Board Of Regents On Behalf Of Arizona State University Speech analysis algorithmic system and method for objective evaluation and/or disease detection
EP3571608A4 (en) * 2017-01-17 2020-10-28 MModal IP LLC PROCEDURES AND SYSTEMS FOR MANIFESTATION AND TRANSMISSION OF FOLLOW-UP NOTIFICATIONS
WO2018152352A1 (en) 2017-02-18 2018-08-23 Mmodal Ip Llc Computer-automated scribe tools
US20180315428A1 (en) * 2017-04-27 2018-11-01 3Play Media, Inc. Efficient transcription systems and methods
US11055481B2 (en) 2017-06-29 2021-07-06 Spalo Co., Ltd. Information input method, information input apparatus, and information input system
WO2019004363A1 (ja) * 2017-06-29 2019-01-03 株式会社ビズオーシャン 情報入力方法、情報入力装置、及び情報入力システム
US11133091B2 (en) 2017-07-21 2021-09-28 Nuance Communications, Inc. Automated analysis system and method
US11024424B2 (en) * 2017-10-27 2021-06-01 Nuance Communications, Inc. Computer assisted coding systems and methods
US11782967B2 (en) 2017-11-13 2023-10-10 International Business Machines Corporation Determining user interactions with natural language processor (NPL) items in documents to determine priorities to present NPL items in documents to review
US11222056B2 (en) * 2017-11-13 2022-01-11 International Business Machines Corporation Gathering information on user interactions with natural language processor (NLP) items to order presentation of NLP items in documents
EP3714466A4 (en) * 2017-11-22 2021-08-18 3M Innovative Properties Company AUTOMATED CODE FEEDBACK SYSTEM
US10387576B2 (en) * 2017-11-30 2019-08-20 International Business Machines Corporation Document preparation with argumentation support from a deep question answering system
US11037665B2 (en) 2018-01-11 2021-06-15 International Business Machines Corporation Generating medication orders from a clinical encounter
US10467335B2 (en) 2018-02-20 2019-11-05 Dropbox, Inc. Automated outline generation of captured meeting audio in a collaborative document context
US11488602B2 (en) 2018-02-20 2022-11-01 Dropbox, Inc. Meeting transcription using custom lexicons based on document history
US10657954B2 (en) 2018-02-20 2020-05-19 Dropbox, Inc. Meeting audio capture and transcription in a collaborative document context
US20190272921A1 (en) * 2018-03-02 2019-09-05 Mmodal Ip Llc Automated Diagnostic Support System for Clinical Documentation Workflows
US11461801B2 (en) * 2018-03-02 2022-10-04 Adobe Inc. Detecting and resolving semantic misalignments between digital messages and external digital content
US11670291B1 (en) * 2019-02-22 2023-06-06 Suki AI, Inc. Systems, methods, and storage media for providing an interface for textual editing through speech
US11341204B2 (en) 2019-05-22 2022-05-24 Adobe Inc. Identifying and presenting misalignments between digital messages and external digital content
US11689379B2 (en) 2019-06-24 2023-06-27 Dropbox, Inc. Generating customized meeting insights based on user interactions and meeting media
US20210241773A1 (en) * 2020-02-04 2021-08-05 Frank Appiah Voice recording & label making system
US11830586B2 (en) 2020-12-08 2023-11-28 Kyndryl, Inc. Enhancement of patient outcome forecasting
US20220383874A1 (en) 2021-05-28 2022-12-01 3M Innovative Properties Company Documentation system based on dynamic semantic templates
US20230317225A1 (en) * 2022-03-29 2023-10-05 ScribeAmerica, LLC Platform and interfaces for clinical services
CN115082045B (zh) * 2022-08-22 2023-01-03 深圳译码阁科技有限公司 数据校对方法、装置、计算机设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07325597A (ja) * 1994-05-31 1995-12-12 Fuji Xerox Co Ltd 情報入力方法およびその方法を実施するための装置
JPH09106428A (ja) * 1995-10-11 1997-04-22 Kitsusei Comtec Kk 所見作成装置
JP2001272990A (ja) * 2000-03-28 2001-10-05 Fuji Xerox Co Ltd 対話記録編集装置
JP2003202895A (ja) * 2002-01-10 2003-07-18 Sony Corp 対話装置及び対話制御方法、記憶媒体、並びにコンピュータ・プログラム
JP2004334253A (ja) * 2003-01-15 2004-11-25 Kyosan Electric Mfg Co Ltd データ作成装置、データ検証方法及びデータ検証プログラム
WO2006023622A2 (en) * 2004-08-20 2006-03-02 Multimodal Technologies, Inc. Automated extraction of semantic content and generation of a structured document from speech

Family Cites Families (211)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62221775A (ja) 1986-03-20 1987-09-29 Fujitsu Ltd 自然言語処理方式
US5329609A (en) 1990-07-31 1994-07-12 Fujitsu Limited Recognition apparatus with function of displaying plural recognition candidates
US5434962A (en) * 1990-09-07 1995-07-18 Fuji Xerox Co., Ltd. Method and system for automatically generating logical structures of electronic documents
JPH0769921B2 (ja) 1990-11-09 1995-07-31 株式会社日立製作所 文書論理構造生成方法
AU2868092A (en) 1991-09-30 1993-05-03 Riverrun Technology Method and apparatus for managing information
JPH06168267A (ja) 1992-11-30 1994-06-14 Itec:Kk 構造化文書作成方法及び構造化文書作成支援装置
US5384892A (en) 1992-12-31 1995-01-24 Apple Computer, Inc. Dynamic language model for speech recognition
DE4397100C2 (de) 1992-12-31 2003-02-27 Apple Computer Verfahren zum Erkennen von Sprachsignalen und Spracherkennungssystem mit rekursiver Grammatik mit endlicher Zustandsanzahl
US7631343B1 (en) * 1993-03-24 2009-12-08 Endgate LLC Down-line transcription system using automatic tracking and revenue collection
US6206829B1 (en) * 1996-07-12 2001-03-27 First Opinion Corporation Computerized medical diagnostic and treatment advice system including network access
US5594638A (en) 1993-12-29 1997-01-14 First Opinion Corporation Computerized medical diagnostic system including re-enter function and sensitivity factors
NZ248751A (en) * 1994-03-23 1997-11-24 Ryan John Kevin Text analysis and coding
JP2618832B2 (ja) * 1994-06-16 1997-06-11 日本アイ・ビー・エム株式会社 文書の論理構造の解析方法及びシステム
US6061675A (en) 1995-05-31 2000-05-09 Oracle Corporation Methods and apparatus for classifying terminology utilizing a knowledge catalog
US5664109A (en) 1995-06-07 1997-09-02 E-Systems, Inc. Method for extracting pre-defined data items from medical service records generated by health care providers
US5701469A (en) 1995-06-07 1997-12-23 Microsoft Corporation Method and system for generating accurate search results using a content-index
GB9525719D0 (en) * 1995-12-15 1996-02-14 Hewlett Packard Co Speech system
US6041292A (en) * 1996-01-16 2000-03-21 Jochim; Carol Real time stenographic system utilizing vowel omission principle
US6684188B1 (en) * 1996-02-02 2004-01-27 Geoffrey C Mitchell Method for production of medical records and other technical documents
US5835893A (en) * 1996-02-15 1998-11-10 Atr Interpreting Telecommunications Research Labs Class-based word clustering for speech recognition using a three-level balanced hierarchical similarity
US5870706A (en) * 1996-04-10 1999-02-09 Lucent Technologies, Inc. Method and apparatus for an improved language recognition system
US5823948A (en) * 1996-07-08 1998-10-20 Rlis, Inc. Medical records, documentation, tracking and order entry system
CA2260836A1 (en) * 1996-07-12 1998-01-22 Edwin C. Iliff Computerized medical diagnostic system utilizing list-based processing
US5797123A (en) * 1996-10-01 1998-08-18 Lucent Technologies Inc. Method of key-phase detection and verification for flexible speech understanding
US6182029B1 (en) 1996-10-28 2001-01-30 The Trustees Of Columbia University In The City Of New York System and method for language extraction and encoding utilizing the parsing of text data in accordance with domain parameters
US6055494A (en) * 1996-10-28 2000-04-25 The Trustees Of Columbia University In The City Of New York System and method for medical language extraction and encoding
US5839106A (en) * 1996-12-17 1998-11-17 Apple Computer, Inc. Large-vocabulary speech recognition using an integrated syntactic and semantic statistical language model
US6122613A (en) 1997-01-30 2000-09-19 Dragon Systems, Inc. Speech recognition using multiple recognizers (selectively) applied to the same input sample
US5995936A (en) 1997-02-04 1999-11-30 Brais; Louis Report generation system and method for capturing prose, audio, and video by voice command and automatically linking sound and image to formatted text locations
CA2284168A1 (en) * 1997-03-13 1998-09-17 First Opinion Corporation Disease management system
US5970449A (en) * 1997-04-03 1999-10-19 Microsoft Corporation Text normalization using a context-free grammar
US6126596A (en) 1997-06-02 2000-10-03 Freedman; Joshua Apparatus and method for evaluating a client's condition and the concordance of a clinician's treatment with treatment guidelines
US6490561B1 (en) * 1997-06-25 2002-12-03 Dennis L. Wilson Continuous speech voice transcription
US5926784A (en) 1997-07-17 1999-07-20 Microsoft Corporation Method and system for natural language parsing using podding
EP0903727A1 (en) 1997-09-17 1999-03-24 Istituto Trentino Di Cultura A system and method for automatic speech recognition
WO1999017223A1 (en) 1997-09-30 1999-04-08 Ihc Health Services, Inc. Aprobabilistic system for natural language processing
US6112168A (en) * 1997-10-20 2000-08-29 Microsoft Corporation Automatically recognizing the discourse structure of a body of text
US6304870B1 (en) * 1997-12-02 2001-10-16 The Board Of Regents Of The University Of Washington, Office Of Technology Transfer Method and apparatus of automatically generating a procedure for extracting information from textual information sources
US6006183A (en) 1997-12-16 1999-12-21 International Business Machines Corp. Speech recognition confidence level display
US6154722A (en) * 1997-12-18 2000-11-28 Apple Computer, Inc. Method and apparatus for a speech recognition system language model that integrates a finite state grammar probability and an N-gram probability
US6782510B1 (en) * 1998-01-27 2004-08-24 John N. Gross Word checking tool for controlling the language content in documents using dictionaries with modifyable status fields
DE19809563A1 (de) 1998-03-05 1999-09-09 Siemens Ag Medizinischer Arbeitsplatz
US6182039B1 (en) * 1998-03-24 2001-01-30 Matsushita Electric Industrial Co., Ltd. Method and apparatus using probabilistic language model based on confusable sets for speech recognition
US7043426B2 (en) * 1998-04-01 2006-05-09 Cyberpulse, L.L.C. Structured speech recognition
US6778970B2 (en) * 1998-05-28 2004-08-17 Lawrence Au Topological methods to organize semantic network data flows for conversational applications
US6915254B1 (en) * 1998-07-30 2005-07-05 A-Life Medical, Inc. Automatically assigning medical codes using natural language processing
US6304848B1 (en) 1998-08-13 2001-10-16 Medical Manager Corp. Medical record forming and storing apparatus and medical record and method related to same
US6064965A (en) * 1998-09-02 2000-05-16 International Business Machines Corporation Combined audio playback in speech recognition proofreader
US6064961A (en) * 1998-09-02 2000-05-16 International Business Machines Corporation Display for proofreading text
US6122614A (en) * 1998-11-20 2000-09-19 Custom Speech Usa, Inc. System and method for automating transcription services
US6249765B1 (en) * 1998-12-22 2001-06-19 Xerox Corporation System and method for extracting data from audio messages
US6278968B1 (en) 1999-01-29 2001-08-21 Sony Corporation Method and apparatus for adaptive speech recognition hypothesis construction and selection in a spoken language translation system
US6243669B1 (en) * 1999-01-29 2001-06-05 Sony Corporation Method and apparatus for providing syntactic analysis and data structure for translation knowledge in example-based language translation
WO2000054180A1 (fr) 1999-03-05 2000-09-14 Cai Co., Ltd. Systeme et procede de creation de document formate sur la base de la reconnaissance vocale conversationnelle
JP2000259175A (ja) 1999-03-08 2000-09-22 Mitsubishi Electric Corp 音声認識装置
US6526380B1 (en) 1999-03-26 2003-02-25 Koninklijke Philips Electronics N.V. Speech recognition system having parallel large vocabulary recognition engines
US6609087B1 (en) * 1999-04-28 2003-08-19 Genuity Inc. Fact recognition system
US6611802B2 (en) * 1999-06-11 2003-08-26 International Business Machines Corporation Method and system for proofreading and correcting dictated text
US7475019B2 (en) * 1999-11-18 2009-01-06 Visicu, Inc. System and method for physician note creation and management
US6345249B1 (en) * 1999-07-07 2002-02-05 International Business Machines Corp. Automatic analysis of a speech dictated document
US6865258B1 (en) 1999-08-13 2005-03-08 Intervoice Limited Partnership Method and system for enhanced transcription
US20030195774A1 (en) 1999-08-30 2003-10-16 Abbo Fred E. Medical practice management system
US6963837B1 (en) 1999-10-06 2005-11-08 Multimodal Technologies, Inc. Attribute-based word modeling
US6434547B1 (en) * 1999-10-28 2002-08-13 Qenm.Com Data capture and verification system
US7392185B2 (en) * 1999-11-12 2008-06-24 Phoenix Solutions, Inc. Speech based learning/training system using semantic decoding
US7725307B2 (en) 1999-11-12 2010-05-25 Phoenix Solutions, Inc. Query engine for processing voice based queries including semantic decoding
JP2003515778A (ja) 1999-12-02 2003-05-07 トムソン ライセンシング ソシエテ アノニム 別々の言語モデルによる音声認識方法及び装置
US6535849B1 (en) 2000-01-18 2003-03-18 Scansoft, Inc. Method and system for generating semi-literal transcripts for speech recognition systems
US20020068857A1 (en) * 2000-02-14 2002-06-06 Iliff Edwin C. Automated diagnostic system and method including reuse of diagnostic objects
US6738784B1 (en) * 2000-04-06 2004-05-18 Dictaphone Corporation Document and information processing system
WO2001084535A2 (en) * 2000-05-02 2001-11-08 Dragon Systems, Inc. Error correction in speech recognition
US7447988B2 (en) 2000-05-10 2008-11-04 Ross Gary E Augmentation system for documentation
GB0011798D0 (en) 2000-05-16 2000-07-05 Canon Kk Database annotation and retrieval
EP1305767B1 (en) * 2000-05-18 2014-03-19 Commwell, Inc. Method for remote medical monitoring incorporating video processing
US6662168B1 (en) * 2000-05-19 2003-12-09 International Business Machines Corporation Coding system for high data volume
US6636848B1 (en) * 2000-05-31 2003-10-21 International Business Machines Corporation Information search using knowledge agents
US7031908B1 (en) * 2000-06-01 2006-04-18 Microsoft Corporation Creating a language model for a language processing system
AU2001268293A1 (en) * 2000-06-12 2001-12-24 L And H Holdings Usa, Inc. Using utterance-level confidence estimates
US7490092B2 (en) * 2000-07-06 2009-02-10 Streamsage, Inc. Method and system for indexing and searching timed media information based upon relevance intervals
US6869018B2 (en) * 2000-07-31 2005-03-22 Reallegal, Llc Transcript management software and methods therefor
US6785651B1 (en) 2000-09-14 2004-08-31 Microsoft Corporation Method and apparatus for performing plan-based dialog
US6435849B1 (en) * 2000-09-15 2002-08-20 Paul L. Guilmette Fluid pump
JP4108948B2 (ja) 2000-09-25 2008-06-25 富士通株式会社 複数の文書を閲覧するための装置および方法
WO2002046886A2 (en) 2000-11-07 2002-06-13 Antaeus Healthcom, Inc. D.B.A. Ascriptus, Inc. System for the creation of database and structured information from verbal input
JP2004514981A (ja) * 2000-11-22 2004-05-20 リケア・インコーポレイテッド 医学検査の医療上の発見を記録するシステム及び方法
US20020077833A1 (en) * 2000-12-20 2002-06-20 Arons Barry M. Transcription and reporting system
US6937983B2 (en) * 2000-12-20 2005-08-30 International Business Machines Corporation Method and system for semantic speech recognition
US20020087315A1 (en) 2000-12-29 2002-07-04 Lee Victor Wai Leung Computer-implemented multi-scanning language method and system
US20020087311A1 (en) 2000-12-29 2002-07-04 Leung Lee Victor Wai Computer-implemented dynamic language model generation method and system
US6714939B2 (en) * 2001-01-08 2004-03-30 Softface, Inc. Creation of structured data from plain text
US20020099717A1 (en) * 2001-01-24 2002-07-25 Gordon Bennett Method for report generation in an on-line transcription system
WO2002082318A2 (en) 2001-02-22 2002-10-17 Volantia Holdings Limited System and method for extracting information
US6754626B2 (en) * 2001-03-01 2004-06-22 International Business Machines Corporation Creating a hierarchical tree of language models for a dialog system based on prompt and dialog context
US7346521B2 (en) * 2001-03-05 2008-03-18 Ims Health Incorporated System and methods for generating physician profiles concerning prescription therapy practices
US7366979B2 (en) 2001-03-09 2008-04-29 Copernicus Investments, Llc Method and apparatus for annotating a document
EP1490790A2 (en) * 2001-03-13 2004-12-29 Intelligate Ltd. Dynamic natural language understanding
JP2002272990A (ja) 2001-03-21 2002-09-24 Heiwa Corp 遊技機の図柄表示方法
US6834264B2 (en) 2001-03-29 2004-12-21 Provox Technologies Corporation Method and apparatus for voice dictation and document production
US20020147616A1 (en) 2001-04-05 2002-10-10 Mdeverywhere, Inc. Method and apparatus for introducing medical necessity policy into the clinical decision making process at the point of care
US7188064B2 (en) * 2001-04-13 2007-03-06 University Of Texas System Board Of Regents System and method for automatic semantic coding of free response data using Hidden Markov Model methodology
US6973428B2 (en) 2001-05-24 2005-12-06 International Business Machines Corporation System and method for searching, analyzing and displaying text transcripts of speech after imperfect speech recognition
US7519529B1 (en) 2001-06-29 2009-04-14 Microsoft Corporation System and methods for inferring informational goals and preferred level of detail of results in response to questions posed to an automated information-retrieval or question-answering service
JP2003022091A (ja) 2001-07-10 2003-01-24 Nippon Hoso Kyokai <Nhk> 音声認識方法および音声認識装置ならびに音声認識プログラム
DE10138408A1 (de) 2001-08-04 2003-02-20 Philips Corp Intellectual Pty Verfahren zur Unterstützung des Korrekturlesens eines spracherkannten Textes mit an die Erkennungszuverlässigkeit angepasstem Wiedergabegeschwindigkeitsverlauf
JP2003058559A (ja) 2001-08-17 2003-02-28 Hitachi Ltd 文書分類方法、検索方法、分類システム及び検索システム
US7529685B2 (en) * 2001-08-28 2009-05-05 Md Datacor, Inc. System, method, and apparatus for storing, retrieving, and integrating clinical, diagnostic, genomic, and therapeutic data
US20030065503A1 (en) * 2001-09-28 2003-04-03 Philips Electronics North America Corp. Multi-lingual transcription system
WO2003030069A1 (en) * 2001-10-03 2003-04-10 Mdoffices.Com, Inc. Health care management method and system
US20030069760A1 (en) * 2001-10-04 2003-04-10 Arthur Gelber System and method for processing and pre-adjudicating patient benefit claims
JP4434536B2 (ja) * 2001-10-10 2010-03-17 株式会社東芝 電子カルテシステム
US6708148B2 (en) * 2001-10-12 2004-03-16 Koninklijke Philips Electronics N.V. Correction device to mark parts of a recognized text
AU2002332971B2 (en) * 2001-10-18 2008-07-03 Yeong Kuang Oon System and method of improved recording of medical transactions
US20030083903A1 (en) 2001-10-30 2003-05-01 Myers Gene E. Method and apparatus for contemporaneous billing and documenting with rendered services
EP1442451B1 (en) 2001-10-31 2006-05-03 Koninklijke Philips Electronics N.V. Method of and system for transcribing dictations in text files and for revising the texts
US20030101054A1 (en) * 2001-11-27 2003-05-29 Ncc, Llc Integrated system and method for electronic speech recognition and transcription
US20030105638A1 (en) 2001-11-27 2003-06-05 Taira Rick K. Method and system for creating computer-understandable structured medical data from natural language reports
US20030144885A1 (en) 2002-01-29 2003-07-31 Exscribe, Inc. Medical examination and transcription method, and associated apparatus
EP1473639A1 (en) 2002-02-04 2004-11-03 Celestar Lexico-Sciences, Inc. Document knowledge management apparatus and method
US20030154085A1 (en) * 2002-02-08 2003-08-14 Onevoice Medical Corporation Interactive knowledge base system
US20030163348A1 (en) * 2002-02-27 2003-08-28 Stead William W. Method and system for clinical action support
US8738396B2 (en) * 2002-04-19 2014-05-27 Greenway Medical Technologies, Inc. Integrated medical software system with embedded transcription functionality
US7257531B2 (en) * 2002-04-19 2007-08-14 Medcom Information Systems, Inc. Speech to text system using controlled vocabulary indices
US7716072B1 (en) * 2002-04-19 2010-05-11 Greenway Medical Technologies, Inc. Integrated medical software system
US20110301982A1 (en) 2002-04-19 2011-12-08 Green Jr W T Integrated medical software system with clinical decision support
US7197460B1 (en) 2002-04-23 2007-03-27 At&T Corp. System for handling frequently asked questions in a natural language dialog service
US7869998B1 (en) * 2002-04-23 2011-01-11 At&T Intellectual Property Ii, L.P. Voice-enabled dialog system
US7292975B2 (en) 2002-05-01 2007-11-06 Nuance Communications, Inc. Systems and methods for evaluating speaker suitability for automatic speech recognition aided transcription
US7548847B2 (en) * 2002-05-10 2009-06-16 Microsoft Corporation System for automatically annotating training data for a natural language understanding system
US7028038B1 (en) * 2002-07-03 2006-04-11 Mayo Foundation For Medical Education And Research Method for generating training data for medical text abbreviation and acronym normalization
US20040073458A1 (en) 2002-07-31 2004-04-15 Aviacode Inc. Method and system for processing medical records
US20040230404A1 (en) * 2002-08-19 2004-11-18 Messmer Richard Paul System and method for optimizing simulation of a discrete event process using business system data
US20060041836A1 (en) 2002-09-12 2006-02-23 Gordon T J Information documenting system with improved speed, completeness, retriveability and granularity
US7016844B2 (en) * 2002-09-26 2006-03-21 Core Mobility, Inc. System and method for online transcription services
US8606594B2 (en) 2002-10-29 2013-12-10 Practice Velocity, LLC Method and system for automated medical records processing
EP1576586A4 (en) * 2002-11-22 2006-02-15 Transclick Inc LANGUAGE TRANSLATION SYSTEM AND METHOD
JP2006509295A (ja) 2002-12-03 2006-03-16 シーメンス メディカル ソリューションズ ユーエスエー インコーポレイテッド 患者記録内の課金情報を自動的に抽出し処理するシステム及び方法
US7444285B2 (en) 2002-12-06 2008-10-28 3M Innovative Properties Company Method and system for sequential insertion of speech recognition results to facilitate deferred transcription services
US7774694B2 (en) 2002-12-06 2010-08-10 3M Innovation Properties Company Method and system for server-based sequential insertion processing of speech recognition results
JP4415546B2 (ja) 2003-01-06 2010-02-17 三菱電機株式会社 音声対話処理装置とそのプログラム
US20040148170A1 (en) 2003-01-23 2004-07-29 Alejandro Acero Statistical classifiers for spoken language understanding and command/control scenarios
US7958443B2 (en) 2003-02-28 2011-06-07 Dictaphone Corporation System and method for structuring speech recognized text into a pre-selected document format
JP5025261B2 (ja) 2003-03-31 2012-09-12 ニュアンス コミュニケーションズ オーストリア ゲーエムベーハー 信頼水準の指示により音声認識の結果を訂正するためのシステム
US8095544B2 (en) 2003-05-30 2012-01-10 Dictaphone Corporation Method, system, and apparatus for validation
US20040243545A1 (en) 2003-05-29 2004-12-02 Dictaphone Corporation Systems and methods utilizing natural language medical records
US20070174041A1 (en) * 2003-05-01 2007-07-26 Ryan Yeske Method and system for concept generation and management
US7383172B1 (en) * 2003-08-15 2008-06-03 Patrick William Jamieson Process and system for semantically recognizing, correcting, and suggesting domain specific speech
US8311835B2 (en) 2003-08-29 2012-11-13 Microsoft Corporation Assisted multi-modal dialogue
US20050065774A1 (en) * 2003-09-20 2005-03-24 International Business Machines Corporation Method of self enhancement of search results through analysis of system logs
US7860717B2 (en) * 2003-09-25 2010-12-28 Dictaphone Corporation System and method for customizing speech recognition input and output
US20050120300A1 (en) * 2003-09-25 2005-06-02 Dictaphone Corporation Method, system, and apparatus for assembly, transport and display of clinical data
JP2005122128A (ja) * 2003-09-25 2005-05-12 Fuji Photo Film Co Ltd 音声認識システム及びプログラム
JP4495431B2 (ja) * 2003-09-26 2010-07-07 株式会社湯山製作所 Icdコード付与装置及び方法
US7996223B2 (en) 2003-10-01 2011-08-09 Dictaphone Corporation System and method for post processing speech recognition output
US20050144184A1 (en) 2003-10-01 2005-06-30 Dictaphone Corporation System and method for document section segmentation
US20050102140A1 (en) * 2003-11-12 2005-05-12 Joel Davne Method and system for real-time transcription and correction using an electronic communication environment
JP2005149083A (ja) 2003-11-14 2005-06-09 Hitachi Medical Corp 電子カルテ入力支援装置
US20050137910A1 (en) 2003-12-19 2005-06-23 Rao R. B. Systems and methods for automated extraction and processing of billing information in patient records
US7542971B2 (en) * 2004-02-02 2009-06-02 Fuji Xerox Co., Ltd. Systems and methods for collaborative note-taking
WO2005091175A1 (en) 2004-03-15 2005-09-29 Yahoo! Inc. Search systems and methods with integration of user annotations
JP2005267358A (ja) * 2004-03-19 2005-09-29 Hitachi Medical Corp 地域医療のための電子カルテ作成・管理システム及びその運営方法
JP2005284834A (ja) * 2004-03-30 2005-10-13 Toshiba Corp 文書入力装置、文書入力プログラム、文書入力プログラムを記録した記録媒体、及び文書入力方法
US7379946B2 (en) 2004-03-31 2008-05-27 Dictaphone Corporation Categorization of information using natural language processing and predefined templates
US20050240439A1 (en) * 2004-04-15 2005-10-27 Artificial Medical Intelligence, Inc, System and method for automatic assignment of medical codes to unformatted data
US20050273365A1 (en) 2004-06-04 2005-12-08 Agfa Corporation Generalized approach to structured medical reporting
US20050288930A1 (en) * 2004-06-09 2005-12-29 Vaastek, Inc. Computer voice recognition apparatus and method
US7421647B2 (en) * 2004-07-09 2008-09-02 Bruce Reiner Gesture-based reporting method and system
JP4653976B2 (ja) 2004-07-09 2011-03-16 Hoya株式会社 カメラ
US20060020886A1 (en) 2004-07-15 2006-01-26 Agrawal Subodh K System and method for the structured capture of information and the generation of semantically rich reports
US20060020466A1 (en) * 2004-07-26 2006-01-26 Cousineau Leo E Ontology based medical patient evaluation method for data capture and knowledge representation
US20060020492A1 (en) * 2004-07-26 2006-01-26 Cousineau Leo E Ontology based medical system for automatically generating healthcare billing codes from a patient encounter
EP1787289B1 (en) 2004-07-30 2018-01-10 Dictaphone Corporation A system and method for report level confidence
KR20060016933A (ko) 2004-08-19 2006-02-23 함정우 문서분류장치 및 문서분류방법
US8412521B2 (en) 2004-08-20 2013-04-02 Multimodal Technologies, Llc Discriminative training of document transcription system
US20130304453A9 (en) 2004-08-20 2013-11-14 Juergen Fritsch Automated Extraction of Semantic Content and Generation of a Structured Document from Speech
US7844464B2 (en) 2005-07-22 2010-11-30 Multimodal Technologies, Inc. Content-based audio playback emphasis
US7650628B2 (en) 2004-10-21 2010-01-19 Escription, Inc. Transcription data security
US8756234B1 (en) * 2004-11-16 2014-06-17 The General Hospital Corporation Information theory entropy reduction program
US20060161460A1 (en) 2004-12-15 2006-07-20 Critical Connection Inc. System and method for a graphical user interface for healthcare data
US20060129435A1 (en) * 2004-12-15 2006-06-15 Critical Connection Inc. System and method for providing community health data services
US7502741B2 (en) 2005-02-23 2009-03-10 Multimodal Technologies, Inc. Audio signal de-identification
JP2006302057A (ja) * 2005-04-22 2006-11-02 Gifu Univ 医療音声情報処理装置、及び医療音声情報処理プログラム
US7849048B2 (en) 2005-07-05 2010-12-07 Clarabridge, Inc. System and method of making unstructured data available to structured data analysis tools
WO2007014307A2 (en) * 2005-07-27 2007-02-01 Medecision, Inc. System and method for health care data integration and management
US20070043761A1 (en) * 2005-08-22 2007-02-22 The Personal Bee, Inc. Semantic discovery engine
US7640158B2 (en) 2005-11-08 2009-12-29 Multimodal Technologies, Inc. Automatic detection and application of editing patterns in draft documents
WO2007056601A2 (en) * 2005-11-09 2007-05-18 The Regents Of The University Of California Methods and apparatus for context-sensitive telemedicine
US7957968B2 (en) * 2005-12-22 2011-06-07 Honda Motor Co., Ltd. Automatic grammar generation using distributedly collected knowledge
US7610192B1 (en) 2006-03-22 2009-10-27 Patrick William Jamieson Process and system for high precision coding of free text documents against a standard lexicon
US8731954B2 (en) * 2006-03-27 2014-05-20 A-Life Medical, Llc Auditing the coding and abstracting of documents
US8233751B2 (en) 2006-04-10 2012-07-31 Patel Nilesh V Method and system for simplified recordkeeping including transcription and voting based verification
US8121838B2 (en) * 2006-04-11 2012-02-21 Nuance Communications, Inc. Method and system for automatic transcription prioritization
US10410308B2 (en) * 2006-04-14 2019-09-10 Fuzzmed, Inc. System, method, and device for personal medical care, intelligent analysis, and diagnosis
US20070282640A1 (en) * 2006-05-26 2007-12-06 Allmed Resources Llc Healthcare information accessibility and processing system
WO2007150006A2 (en) 2006-06-22 2007-12-27 Multimodal Technologies, Inc. Applying service levels to transcripts
US7844470B2 (en) * 2006-07-25 2010-11-30 Siemens Medical Solutions Usa, Inc. Treatment order processing system suitable for pharmacy and other use
WO2008064358A2 (en) 2006-11-22 2008-05-29 Multimodal Technologies, Inc. Recognition of speech in editable audio streams
US8356245B2 (en) * 2007-01-05 2013-01-15 International Business Machines Corporation System and method of automatically mapping a given annotator to an aggregate of given annotators
US20080228769A1 (en) 2007-03-15 2008-09-18 Siemens Medical Solutions Usa, Inc. Medical Entity Extraction From Patient Data
US7917355B2 (en) 2007-08-23 2011-03-29 Google Inc. Word detection
US7383183B1 (en) 2007-09-25 2008-06-03 Medquist Inc. Methods and systems for protecting private information during transcription
CA2702937C (en) 2007-10-17 2014-10-07 Neil S. Roseman Nlp-based content recommender
US20090192822A1 (en) 2007-11-05 2009-07-30 Medquist Inc. Methods and computer program products for natural language processing framework to assist in the evaluation of medical care
US7933777B2 (en) 2008-08-29 2011-04-26 Multimodal Technologies, Inc. Hybrid speech recognition
CA2680304C (en) * 2008-09-25 2017-08-22 Multimodal Technologies, Inc. Decoding-time prediction of non-verbalized tokens
US8290961B2 (en) 2009-01-13 2012-10-16 Sandia Corporation Technique for information retrieval using enhanced latent semantic analysis generating rank approximation matrix by factorizing the weighted morpheme-by-document matrix
US20100250236A1 (en) 2009-03-31 2010-09-30 Medquist Ip, Llc Computer-assisted abstraction of data and document coding
WO2010132790A1 (en) 2009-05-14 2010-11-18 Collexis Holdings, Inc. Methods and systems for knowledge discovery
US20110173153A1 (en) 2010-01-08 2011-07-14 Vertafore, Inc. Method and apparatus to import unstructured content into a content management system
US8959102B2 (en) 2010-10-08 2015-02-17 Mmodal Ip Llc Structured searching of dynamic structured document corpuses
US8924394B2 (en) 2011-02-18 2014-12-30 Mmodal Ip Llc Computer-assisted abstraction for reporting of quality measures
US9471878B2 (en) 2014-07-11 2016-10-18 International Business Machines Corporation Dynamic mathematical validation using data mining

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07325597A (ja) * 1994-05-31 1995-12-12 Fuji Xerox Co Ltd 情報入力方法およびその方法を実施するための装置
JPH09106428A (ja) * 1995-10-11 1997-04-22 Kitsusei Comtec Kk 所見作成装置
JP2001272990A (ja) * 2000-03-28 2001-10-05 Fuji Xerox Co Ltd 対話記録編集装置
JP2003202895A (ja) * 2002-01-10 2003-07-18 Sony Corp 対話装置及び対話制御方法、記憶媒体、並びにコンピュータ・プログラム
JP2004334253A (ja) * 2003-01-15 2004-11-25 Kyosan Electric Mfg Co Ltd データ作成装置、データ検証方法及びデータ検証プログラム
WO2006023622A2 (en) * 2004-08-20 2006-03-02 Multimodal Technologies, Inc. Automated extraction of semantic content and generation of a structured document from speech

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110024026A (zh) * 2016-11-28 2019-07-16 谷歌有限责任公司 使用语音识别模型生成结构化文本内容
US11763936B2 (en) 2016-11-28 2023-09-19 Google Llc Generating structured text content using speech recognition models
CN110024026B (zh) * 2016-11-28 2023-12-01 谷歌有限责任公司 使用语音识别模型生成结构化文本内容

Also Published As

Publication number Publication date
EP2030197A4 (en) 2012-04-04
US20070299651A1 (en) 2007-12-27
US7716040B2 (en) 2010-05-11
CA2652441A1 (en) 2007-12-27
US20130346074A1 (en) 2013-12-26
WO2007150004A2 (en) 2007-12-27
WO2007150006A3 (en) 2008-10-09
US20140316772A1 (en) 2014-10-23
US20070299652A1 (en) 2007-12-27
EP2030197A2 (en) 2009-03-04
WO2007150005A3 (en) 2008-10-09
US20140149114A1 (en) 2014-05-29
CA2650816C (en) 2015-10-27
US20120296639A1 (en) 2012-11-22
US20180166081A1 (en) 2018-06-14
CA2652441C (en) 2014-09-23
JP5385134B2 (ja) 2014-01-08
JP2010512561A (ja) 2010-04-22
WO2007150006A2 (en) 2007-12-27
EP2030196B1 (en) 2018-09-05
EP2030198A2 (en) 2009-03-04
US8521514B2 (en) 2013-08-27
WO2007150005A2 (en) 2007-12-27
US10339937B2 (en) 2019-07-02
US20070299665A1 (en) 2007-12-27
WO2007150004A3 (en) 2008-11-06
US20140039880A1 (en) 2014-02-06
US8560314B2 (en) 2013-10-15
EP2030196A4 (en) 2017-05-17
JP5167256B2 (ja) 2013-03-21
US20100211869A1 (en) 2010-08-19
CA2652444A1 (en) 2007-12-27
JP2014197223A (ja) 2014-10-16
CA2652444C (en) 2020-04-28
EP2030196A2 (en) 2009-03-04
JP5964358B2 (ja) 2016-08-03
CA2650816A1 (en) 2007-12-27
EP2030198B1 (en) 2018-08-29
US8321199B2 (en) 2012-11-27
EP2030198A4 (en) 2012-04-25
US9892734B2 (en) 2018-02-13
US8768694B2 (en) 2014-07-01
JP2009541865A (ja) 2009-11-26

Similar Documents

Publication Publication Date Title
JP5964358B2 (ja) 音声認識方法
US11922373B2 (en) Clinical data reconciliation as part of a report generation solution
JP6078057B2 (ja) 口述ベース文書生成ワークフローにおける文書拡張
JP2009541800A5 (ja)
WO2006091551A2 (en) Audio signal de-identification
US20090287487A1 (en) Systems and Methods for a Visual Indicator to Track Medical Report Dictation Progress
US20240105294A1 (en) De-duplication and contextually-intelligent recommendations based on natural language understanding of conversational sources
US20140344679A1 (en) Systems and methods for creating a document
WO2024187198A2 (en) Systems and methods for optimizing workflow of reports based on diagnostic images

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100618

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120327

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20120411

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120411

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120626

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120703

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120725

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120801

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120820

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120921

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130305

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130604

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130611

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130704

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130711

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130726

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20130726

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131015

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140110

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140225