JP6023593B2 - 質問応答システムにおける関連する証拠への計算可能なガイダンスの提供 - Google Patents
質問応答システムにおける関連する証拠への計算可能なガイダンスの提供 Download PDFInfo
- Publication number
- JP6023593B2 JP6023593B2 JP2012553007A JP2012553007A JP6023593B2 JP 6023593 B2 JP6023593 B2 JP 6023593B2 JP 2012553007 A JP2012553007 A JP 2012553007A JP 2012553007 A JP2012553007 A JP 2012553007A JP 6023593 B2 JP6023593 B2 JP 6023593B2
- Authority
- JP
- Japan
- Prior art keywords
- response
- question
- region
- user
- instructions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000004044 response Effects 0.000 claims description 411
- 238000000034 method Methods 0.000 claims description 57
- 238000012790 confirmation Methods 0.000 claims description 5
- 241000282412 Homo Species 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 11
- 230000008901 benefit Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000004590 computer program Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000001356 surgical procedure Methods 0.000 description 5
- 238000003066 decision tree Methods 0.000 description 4
- 238000012552 review Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 206010007559 Cardiac failure congestive Diseases 0.000 description 1
- 206010019280 Heart failures Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 210000001367 artery Anatomy 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 230000036992 cognitive tasks Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/04—Inference or reasoning models
- G06N5/048—Fuzzy inferencing
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
- G09B7/02—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2452—Query translation
- G06F16/24522—Translation of natural language queries to structured queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/9032—Query formulation
- G06F16/90332—Natural language query formulation or dialogue systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
- G06F9/453—Help systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/04—Billing or invoicing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Development Economics (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Economics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Automation & Control Theory (AREA)
- Fuzzy Systems (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
本出願は、2010年2月10日に出願された「Providing Computable Guidance to Relevant Evidence in Question−Answering System」という名称の、所有者が共通する米国仮特許出願第61/303,242号からの優先権を主張し、その内容が参照により本明細書に組み込まれる。
・領域定義は、文書のタイプを指定し得、その場合、領域識別器122は、指定されたタイプの文書コーパス102内の全ての文書を識別された領域124aとして識別し得る
・領域定義は、セクションのタイプを指定し得、その場合、領域識別器122は、指定されたタイプの文書コーパス102内の全ての文書セクションを識別された領域124aとして識別し得る
・領域定義は、キーワードを指定し得、その場合、領域識別器122は、指定されたキーワードに合致するか、かつ/または指定されたキーワードの近くにある文書コーパス102内の全てのテキストを識別された領域124aとして識別し得る
・領域定義は、概念との関係(例えば、「XはYである」または「XはYを有する」)を指定し得、その場合、領域識別器122は、文書コーパス102内のその概念を表す他のデータとの指定された関係を有する文書コーパス102内の全てのデータを、識別された領域124aとして識別し得る。
・応答生成器132が同じ質問の後続のインスタンスに対する応答を生成しないようにするか、または応答生成器132に、かかる質問インスタンスに対して「無応答(no answer)」の応答を生成させる
・応答生成器132が第2の応答134bを表す出力136bをユーザー130に提供しないようにする
・第2の応答内容138bが「無応答」の応答を表すように、第2の応答134bを修正する。
Claims (48)
- システムとともに使用するためのコンピューター実施方法であって、
前記方法が、
(a)第1のテキストおよび第1の領域定義を含む第1の質問インスタンスを選択し、前記第1の領域定義は、前記第1のテキストで表される質問に対して応答を提供するために使用され得る情報を含んでいる可能性のあるデータセットの領域を識別するように設計されており、前記領域定義は、前記データセット中のタグ付き要素に合わせられた領域を識別することと、
(b)ステップ(c)および(d)の前に、前記第1の領域定義に基づき、前記データセットの第1の領域を識別することと、
(c)前記第1の質問インスタンスを表す出力をユーザーに提供することと、
(d)前記第1の質問インスタンスに対する答えを受け取る前に、前記データセットの前記第1の領域を表す出力を前記ユーザーに提供することとを含む方法。 - 前記(b)は、
前記第1の領域定義によって指定される第1の文書タイプを識別することと、
前記データセット内の前記第1の文書タイプの文書を識別することと
をさらに含む、請求項1に記載の方法。 - 前記(b)は、
前記第1の領域定義によって指定されるセクションタイプを識別することと、
前記データセット内の前記第1のセクションタイプのセクションを識別することと
をさらに含む、請求項1に記載の方法。 - 前記第1の領域定義によって指定される概念との関係を識別することと、
前記データセット内の前記概念を表す第2のコード化データと前記指定された関係を有する前記データセット内の第1のコード化データを識別することと
をさらに含む、請求項1に記載の方法。 - 前記(b)は、
前記第1の領域定義に基づき、前記データセットの複数の部分を識別することを含み、前記第1の領域が前記複数の部分を含む、請求項1に記載の方法。 - 前記データセットが複数の文書を含み、
前記複数の部分が前記複数の文書のうちの第1の文書の第1の部分を含み、
前記複数の部分が前記複数の文書のうちの第2の文書の第2の部分を含む、
請求項5に記載の方法。 - (e)前記第1の質問インスタンスおよび前記データセットに基づき、前記第1の質問インスタンスに対する第1の応答を自動的に生成することをさらに含む、請求項1に記載の方法。
- (f)前記第1の応答を表す出力を前記ユーザーに提供することをさらに含む、請求項7に記載の方法。
- (e)が前記データセットの特定のサブセットに基づき、前記第1の質問インスタンスに対する前記第1の応答を自動的に生成することを含み、
前記方法が、
(f)が前記データセットの前記特定のサブセットを表す出力を前記ユーザーに提供することをさらに含む、請求項7に記載の方法。 - 前記第1の応答が、応答内容および、前記応答内容が前記第1の質問インスタンスに正しく応答する可能性を示す信頼性スコアを含む、請求項7に記載の方法。
- (e)が、前記応答内容と、人間から受信した前記第1の質問インスタンスに対する少なくとも1つの以前の応答との間の一致の程度に基づき、前記信頼性スコアを自動的に生成することを含む、請求項10に記載の方法。
- 前記第1の応答が、前記第1の応答を生成するため、(e)において信頼する前記データセットの少なくとも1つの部分への少なくとも1つのポインターを含む、請求項7に記載の方法。
- (f)前記第1の応答に関するフィードバックを表す入力を前記ユーザーから受信することと、
(g)前記入力のレコードをコンピューター可読媒体に保存することとをさらに含む、請求項7に記載の方法。 - 前記ユーザーからの前記入力が前記第1の応答の確認ステータスを示す、請求項13に記載の方法。
- (h)第2のテキストおよび第2の領域定義を含む、第2の質問インスタンスにアクセスすることと、
(i)前記第1の応答の前記確認ステータスに基づき前記第2の質問に対する応答を生成するか否かを判断することと
をさらに含む、請求項14記載の方法。 - 前記ユーザーからの前記入力が前記第1の質問インスタンスに対する第2の応答を表す、請求項13記載の方法。
- (f)前記応答内容が前記第1の質問インスタンスに正しく応答する可能性を示す信頼性スコアを生成することと、
(g)前記信頼性スコアに基づき、前記ユーザーに対して、前記第1の応答に関するフィードバックを表す入力を求めるか否かを判断することと、
(h)前記ユーザーに前記入力を求めるべきと判断される場合に限り、前記ユーザーに、前記第1の応答に関するフィードバックを表す入力を求めることとをさらに含む、
請求項7記載の方法。 - 前記第1の質問インスタンスが、第1の質問定義をさらに含み、(e)が、前記第1の応答を自動的に生成するために、前記第1の質問定義を処理することを含む、請求項7に記載の方法。
- 前記第1の質問定義が前記第1のテキストと無関係である、請求項18に記載の方法。
- 前記第1の領域定義が、前記第1のテキストと無関係である、請求項1に記載の方法。
- コンピューター可読媒体であって、
前記コンピューター可読媒体上に有形的に保存されているコンピューター可読命令を含み、
前記命令が、システムと共に使用するための方法を実行するため、少なくとも1つのコンピュータープロセッサーによって実行可能であって、
前記コンピューター可読媒体が、
前記少なくとも1つのコンピュータープロセッサーによって、第1のテキストおよび第1の領域定義を含む第1の質問インスタンスを選択し、前記第1の領域定義は、前記第1のテキストで表される質問に対して応答を提供するために使用され得る情報を含んでいる可能性のあるデータセットの領域を識別するように設計されており、前記領域定義は、前記データセット中のタグ付き要素に合わせられた領域を識別するための命令と、
前記少なくとも1つのコンピュータープロセッサーによって、前記第1の質問インスタンスを表す出力をユーザーに提供する前、および前記データセットの前記第1の領域を表す出力をユーザーに提供する前に、前記第1の領域定義に基づき、前記データセットの第1の領域を識別するための命令と、
前記少なくとも1つのコンピュータープロセッサーによって、前記第1の質問インスタンスを表す出力をユーザーに提供するための命令と、
前記少なくとも1つのコンピュータープロセッサーによって、前記第1の質問インスタンスに対する答えを受け取る前に、前記データセットの前記第1の領域を表す出力をユーザーに提供するための命令とを含む、コンピューター可読媒体。 - 前記データセットの第1の領域を識別するための命令が、
前記第1の領域定義によって指定される第1の文書タイプを識別するための命令と、
前記データセット内の前記第1の文書タイプの文書を識別するための命令と
を含む、請求項21に記載のコンピューター可読媒体。 - 前記データセットの第1の領域を識別するための命令が、
前記第1の領域定義によって指定されるセクションタイプを識別するための命令と、
前記データセット内の前記第1のセクションタイプのセクションを識別するための命令と
を含む、請求項21に記載のコンピューター可読媒体。 - 前記データセットの第1の領域を識別するための命令が、
前記第1の領域定義によって指定される概念との関係を指定し、
(1)が前記データセット内の前記概念を表す第2のコード化データとの前記指定された関係を有する前記データセット内の第1のコード化データを識別することを含む、請求項21に記載のコンピューター可読媒体。 - 前記データセットの第1の領域を識別するための命令が、
前記第1の領域定義に基づき、前記データセットの複数の部分を識別するための命令を含み、前記第1の領域が前記複数の部分を含む、請求項21に記載のコンピューター可読媒体。 - 前記データセットが複数の文書を含み、
前記複数の部分が前記複数の文書のうちの第1の文書の第1の部分を含み、
前記複数の部分が前記複数の文書のうちの第2の文書の第2の部分を含む、
請求項25に記載のコンピューター可読媒体。 - 前記第1の質問インスタンスおよび前記データセットに基づき、前記第1の質問インスタンスに対する第1の応答を自動的に生成するための命令をさらに含む、請求項21に記載のコンピューター可読媒体。
- 前記第1の応答を表す出力を前記ユーザーに提供するための命令をさらに含む、請求項27に記載のコンピューター可読媒体。
- 前記第1の応答を自動的に生成するための命令が、前記データセットの特定のサブセットに基づき、前記第1の質問インスタンスに対する前記第1の応答を自動的に生成するための命令を含み、
前記コンピューター可読媒体が、
前記データセットの前記特定のサブセットを表す出力を前記ユーザーに提供するための命令をさらに含む、
請求項27に記載のコンピューター可読媒体。 - 前記第1の応答が、応答内容および、前記応答内容が前記質問インスタンスに正しく応答する可能性を示す信頼性スコアを含む、請求項27に記載のコンピューター可読媒体。
- 前記第1の応答を自動的に生成するための命令が、前記応答内容と、人間から受信した前記第1の質問インスタンスに対する少なくとも1つの以前の応答との間の一致の程度に基づき、前記信頼性スコアを自動的に生成するための命令を含む、請求項30に記載のコンピューター可読媒体。
- 前記第1の応答が、前記第1の応答を生成するため、前記第1の応答を自動的に生成するための命令において信頼する前記データセットの少なくとも1つの部分への少なくとも1つのポインターを含む、請求項27に記載のコンピューター可読媒体。
- 前記第1の応答に関するフィードバックを表す入力を前記ユーザーから受信するための命令と、
前記入力のレコードをコンピューター可読媒体に保存するための命令とをさらに含む、
請求項27に記載のコンピューター可読媒体。 - 前記ユーザーからの前記入力が前記第1の応答の確認ステータスを示す、請求項33に記載のコンピューター可読媒体。
- 前記システムが、第2のテキストおよび第2の領域定義を含む第2の質問インスタンスをさらに含み、
前記コンピューター可読媒体が、
前記第1の応答の前記確認ステータスに基づき、前記第2の質問に対する応答を生成するか否かを判断するための命令をさらに含む、
請求項34に記載のコンピューター可読媒体。 - 前記ユーザーからの前記入力が前記第1の質問インスタンスに対する第2の応答を表す、請求項33に記載のコンピューター可読媒体。
- 前記応答内容が前記第1の質問インスタンスに正しく応答する可能性を示す信頼性スコアを生成するための命令と、
前記信頼性スコアに基づき、前記ユーザーに対して、前記第1の応答に関するフィードバックを表す入力を求めるか否かを判断するための命令と、
前記ユーザーに前記入力を求めるべきと判断される場合に限り、前記ユーザーに、前記第1の応答に関するフィードバックを表す入力を求めるための命令とをさらに含む、
請求項27に記載のコンピューター可読媒体。 - 前記第1の質問インスタンスが、第1の質問定義をさらに含み、前記第1の応答を自動的に生成するための命令が、前記第1の応答を自動的に生成するために、前記第1の質問定義を処理するための命令を含む、
請求項27に記載のコンピューター可読媒体。 - 前記第1の質問定義が前記第1のテキストと無関係である、請求項38に記載のコンピューター可読媒体。
- 前記第1の領域定義が、前記第1のテキストと無関係である、請求項21に記載のコンピューター可読媒体。
- システムと共に使用するためのコンピューター実施方法であって、
前記方法が、
(a)第1のテキストおよび第1の領域定義を含む第1の質問インスタンスを選択し、前記第1の領域定義は、前記第1のテキストで表される質問に対して応答を提供するために使用され得る情報を含んでいる可能性のあるデータセットの領域を識別するように設計されており、前記領域定義は、前記データセット中のタグ付き要素に合わせられた領域を識別することと、
(b)(c)の前に、前記第1の質問の複数のインスタンスQの各々に対して、
(b−1)前記第1の領域定義に基づき、前記データセットの領域RQを識別することと、
(b−2)前記第1の質問のインスタンスQに応じて、コンピューター生成された応答CQを受信することと、
(b−3)前記第1の質問のインスタンスQを表す出力をユーザーに提供することと、
(b−4)(b−5)の前に、前記データセットの前記領域RQを表す出力を前記ユーザーに提供することと、
(b−5)前記第1の質問のインスタンスQに対して人間が生成した応答を表す入力HQを前記ユーザーから受信することと、
(c)前記コンピューター生成された応答CQと前記人間が生成した応答HQとの間の一致の程度を識別することと、
を含む方法。 - (d)前記第1の質問の追加のインスタンスを受信することと、
(e)前記一致の程度が所定の閾値を満足するか否かを判断することと、
(f)前記一致の程度が前記所定の閾値を満足しない場合、前記第1の質問の前記追加のインスタンスに応じて、前記第1の質問の前記追加のインスタンスに対して自動応答が生成されていないことを示す出力を提供することとをさらに含む、
請求項41に記載の方法。 - 前記人間が生成した応答HQが、人間の応答の第1の集合によって提供される複数の人間が生成した応答および、少なくとも1つの人間の応答の第2の集合によって提供される複数の人間が生成した応答を含み、
前記方法が
(d)人間の応答の前記第1の集合によって提供される前記複数の人間が生成した応答と、前記コンピューター生成された応答CQとの間の第1の一致の程度を計算することと、
(e)少なくとも1つの人間の応答の前記第2の集合によって提供される前記複数の人間が生成した応答と、前記複数のコンピューター生成された応答CQとの間の第2の一致の程度を計算することと、
(f)前記第1の一致の程度と前記第2の一致の程度との間の差を計算することとをさらに含む、請求項41に記載の方法。 - (b)が、(b−6)前記コンピューター生成された応答CQを表す出力を前記ユーザーに提供することをさらに含む、請求項41に記載の方法。
- コンピューター可読媒体であって、
前記コンピューター可読媒体上に有形的に保存されているコンピューター可読命令を含み、
前記命令が、システムと共に使用するための方法を実行するため、少なくとも1つのコンピュータープロセッサーによって実行可能であり、
前記コンピューター可読媒体が、
(a)第1のテキストおよび第1の領域定義を含む第1の質問インスタンスを選択し、前記第1の領域定義は、前記第1のテキストで表される質問に対して応答を提供するために使用され得る情報を含んでいる可能性のあるデータセットの領域を識別するように設計されており、前記領域定義は、前記データセット中のタグ付き要素に合わせられた領域を識別するための命令と、
(b)(c)の前に、前記第1の質問の複数のインスタンスQの各々に対して、
(b−1)前記第1の領域定義に基づき、前記データセットの領域RQを識別するための命令と、
(b−2)前記第1の質問のインスタンスQに応じて、コンピューター生成された応答CQを受信するための命令と、
(b−3)前記第1の質問のインスタンスQを表す出力をユーザーに提供するための命令と、
(b−4)前記データセットの前記領域RQを表す出力を前記ユーザーに提供するための命令と、
(b−5)前記第1の質問のインスタンスQに対して人間が生成した応答を表す入力HQを前記ユーザーから受信するための命令と、
(c)前記コンピューター生成された応答CQと前記人間が生成した応答HQとの間の一致の程度を識別するための命令と、
を含む、
コンピューター可読媒体。 - 前記コンピューター可読媒体が、
(d)前記第1の質問の追加のインスタンスを受信するための命令と、
(e)前記一致の程度が所定の閾値を満足するか否かを判断するための命令と、
(f)前記一致の程度が前記所定の閾値を満足しない場合、前記第1の質問の前記追加のインスタンスに応じて、前記第1の質問の前記追加のインスタンスに対して自動応答が生成されていないことを示す出力を提供するための命令とをさらに含む、
請求項45に記載のコンピューター可読媒体。 - 前記人間が生成した応答HQが、人間の応答の第1の集合によって提供される複数の人間が生成した応答および、少なくとも1つの人間の応答の第2の集合によって提供される複数の人間が生成した応答を含み、
前記コンピューター可読媒体が、
(d)人間の応答の前記第1の集合によって提供される前記複数の人間が生成した応答と、前記コンピューター生成された応答CQとの間の第1の一致の程度を計算するための命令と、
(e)少なくとも1つの人間の応答の前記第2の集合によって提供される前記複数の人間が生成した応答と、前記複数のコンピューター生成された応答CQとの間の第2の一致の程度を計算するための命令と、
(f)前記第1の一致の程度と前記第2の一致の程度との間の差を計算するための命令とをさらに含む、請求項45に記載のコンピューター可読媒体。 - (b)が、(b−6)前記コンピューター生成された応答CQを表す出力を前記ユーザーに提供するための命令をさらに含む、請求項45に記載のコンピューター可読媒体。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US30324210P | 2010-02-10 | 2010-02-10 | |
US61/303,242 | 2010-02-10 | ||
US13/025,051 | 2011-02-10 | ||
US13/025,051 US9082310B2 (en) | 2010-02-10 | 2011-02-10 | Providing computable guidance to relevant evidence in question-answering systems |
PCT/US2011/024405 WO2011100474A2 (en) | 2010-02-10 | 2011-02-10 | Providing computable guidance to relevant evidence in question-answering systems |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016067686A Division JP6215383B2 (ja) | 2010-02-10 | 2016-03-30 | 質問応答システムにおける関連する証拠への計算可能なガイダンスの提供 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013519947A JP2013519947A (ja) | 2013-05-30 |
JP6023593B2 true JP6023593B2 (ja) | 2016-11-09 |
Family
ID=44368439
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012553007A Expired - Fee Related JP6023593B2 (ja) | 2010-02-10 | 2011-02-10 | 質問応答システムにおける関連する証拠への計算可能なガイダンスの提供 |
JP2016067686A Expired - Fee Related JP6215383B2 (ja) | 2010-02-10 | 2016-03-30 | 質問応答システムにおける関連する証拠への計算可能なガイダンスの提供 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016067686A Expired - Fee Related JP6215383B2 (ja) | 2010-02-10 | 2016-03-30 | 質問応答システムにおける関連する証拠への計算可能なガイダンスの提供 |
Country Status (5)
Country | Link |
---|---|
US (3) | US9082310B2 (ja) |
EP (1) | EP2534591A4 (ja) |
JP (2) | JP6023593B2 (ja) |
CA (1) | CA2789158C (ja) |
WO (1) | WO2011100474A2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11282596B2 (en) | 2017-11-22 | 2022-03-22 | 3M Innovative Properties Company | Automated code feedback system |
Families Citing this family (83)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9280603B2 (en) * | 2002-09-17 | 2016-03-08 | Yahoo! Inc. | Generating descriptions of matching resources based on the kind, quality, and relevance of available sources of information about the matching resources |
US20100005085A1 (en) * | 2008-07-03 | 2010-01-07 | Oracle International Corporation | Creating relationship maps from enterprise application system data |
CA2789158C (en) | 2010-02-10 | 2016-12-20 | Mmodal Ip Llc | Providing computable guidance to relevant evidence in question-answering systems |
JP5986930B2 (ja) | 2010-02-26 | 2016-09-06 | エムモーダル アイピー エルエルシー | レポート作成問題解決手法の一部としての臨床データ調整 |
US8463673B2 (en) | 2010-09-23 | 2013-06-11 | Mmodal Ip Llc | User feedback in semi-automatic question answering systems |
US20120078062A1 (en) | 2010-09-24 | 2012-03-29 | International Business Machines Corporation | Decision-support application and system for medical differential-diagnosis and treatment using a question-answering system |
US8924394B2 (en) | 2011-02-18 | 2014-12-30 | Mmodal Ip Llc | Computer-assisted abstraction for reporting of quality measures |
US9153142B2 (en) * | 2011-05-26 | 2015-10-06 | International Business Machines Corporation | User interface for an evidence-based, hypothesis-generating decision support system |
EP2721606A4 (en) * | 2011-06-19 | 2015-04-01 | Mmodal Ip Llc | DOCUMENT EXTENSION IN A DICTIONARY BASED DOCUMENT GENERATION WORKFLOW |
US8601030B2 (en) * | 2011-09-09 | 2013-12-03 | International Business Machines Corporation | Method for a natural language question-answering system to complement decision-support in a real-time command center |
CN103208211A (zh) * | 2012-01-13 | 2013-07-17 | 深圳市育才幻音信息技术有限公司 | 网络教育考试选题方法及装置 |
US9679568B1 (en) * | 2012-06-01 | 2017-06-13 | Google Inc. | Training a dialog system using user feedback |
US9123338B1 (en) | 2012-06-01 | 2015-09-01 | Google Inc. | Background audio identification for speech disambiguation |
US9679077B2 (en) * | 2012-06-29 | 2017-06-13 | Mmodal Ip Llc | Automated clinical evidence sheet workflow |
US9965472B2 (en) | 2012-08-09 | 2018-05-08 | International Business Machines Corporation | Content revision using question and answer generation |
WO2014028529A2 (en) | 2012-08-13 | 2014-02-20 | Mmodal Ip Llc | Maintaining a discrete data representation that corresponds to information contained in free-form text |
US10169456B2 (en) * | 2012-08-14 | 2019-01-01 | International Business Machines Corporation | Automatic determination of question in text and determination of candidate responses using data mining |
US20140108321A1 (en) * | 2012-10-12 | 2014-04-17 | International Business Machines Corporation | Text-based inference chaining |
US20140120513A1 (en) * | 2012-10-25 | 2014-05-01 | International Business Machines Corporation | Question and Answer System Providing Indications of Information Gaps |
US9158772B2 (en) | 2012-12-17 | 2015-10-13 | International Business Machines Corporation | Partial and parallel pipeline processing in a deep question answering system |
US9141660B2 (en) * | 2012-12-17 | 2015-09-22 | International Business Machines Corporation | Intelligent evidence classification and notification in a deep question answering system |
US9754215B2 (en) | 2012-12-17 | 2017-09-05 | Sinoeast Concept Limited | Question classification and feature mapping in a deep question answering system |
CN103870528B (zh) * | 2012-12-17 | 2018-04-17 | 东方概念有限公司 | 深度问题回答系统中的问题分类和特征映射的方法和系统 |
US9342608B2 (en) | 2013-08-01 | 2016-05-17 | International Business Machines Corporation | Clarification of submitted questions in a question and answer system |
US9965548B2 (en) * | 2013-12-05 | 2018-05-08 | International Business Machines Corporation | Analyzing natural language questions to determine missing information in order to improve accuracy of answers |
US20150221052A1 (en) * | 2014-02-04 | 2015-08-06 | John Howard Messing | Automated legal issue spotting and reasoning method |
US20150261859A1 (en) * | 2014-03-11 | 2015-09-17 | International Business Machines Corporation | Answer Confidence Output Mechanism for Question and Answer Systems |
US20150278264A1 (en) * | 2014-03-31 | 2015-10-01 | International Business Machines Corporation | Dynamic update of corpus indices for question answering system |
US9536443B2 (en) | 2014-04-28 | 2017-01-03 | International Business Machines Corporation | Evaluating expert opinions in a question and answer system |
US10642935B2 (en) | 2014-05-12 | 2020-05-05 | International Business Machines Corporation | Identifying content and content relationship information associated with the content for ingestion into a corpus |
US9607035B2 (en) | 2014-05-21 | 2017-03-28 | International Business Machines Corporation | Extensible validation framework for question and answer systems |
US9697099B2 (en) | 2014-06-04 | 2017-07-04 | International Business Machines Corporation | Real-time or frequent ingestion by running pipeline in order of effectiveness |
US9542496B2 (en) | 2014-06-04 | 2017-01-10 | International Business Machines Corporation | Effective ingesting data used for answering questions in a question and answer (QA) system |
US20160125751A1 (en) * | 2014-11-05 | 2016-05-05 | International Business Machines Corporation | Answer management in a question-answering environment |
US20160134741A1 (en) * | 2014-11-06 | 2016-05-12 | Vinc Corporation | User-directed information content |
US20160180726A1 (en) * | 2014-12-17 | 2016-06-23 | International Business Machines Corporation | Managing a question and answer system |
US11017312B2 (en) * | 2014-12-17 | 2021-05-25 | International Business Machines Corporation | Expanding training questions through contextualizing feature search |
US10347146B2 (en) | 2014-12-23 | 2019-07-09 | International Business Machines Corporation | Managing answer feasibility |
US9916395B2 (en) | 2015-01-03 | 2018-03-13 | International Business Machines Corporation | Determining answer stability in a question answering system |
US10318527B2 (en) | 2015-01-27 | 2019-06-11 | International Business Machines Corporation | Search-based detection, link, and acquisition of data |
US10950329B2 (en) | 2015-03-13 | 2021-03-16 | Mmodal Ip Llc | Hybrid human and computer-assisted coding workflow |
US9858335B2 (en) * | 2015-04-21 | 2018-01-02 | International Business Machines Corporation | Providing searching strategy in connection with answering question in message |
US9646250B1 (en) * | 2015-11-17 | 2017-05-09 | International Business Machines Corporation | Computer-implemented cognitive system for assessing subjective question-answers |
US9471668B1 (en) * | 2016-01-21 | 2016-10-18 | International Business Machines Corporation | Question-answering system |
US10656794B1 (en) * | 2016-02-16 | 2020-05-19 | Growpath, Inc. | Database searching based on user-definable parameters and automated notifications in response to scores |
JP7059929B2 (ja) * | 2016-05-30 | 2022-04-26 | ソニーグループ株式会社 | 情報処理装置 |
US10679398B2 (en) * | 2016-07-29 | 2020-06-09 | International Business Machines Corporation | Determining and representing health of cognitive systems |
US10740683B2 (en) | 2016-07-29 | 2020-08-11 | International Business Machines Corporation | Determining and representing health of cognitive systems |
US10732965B2 (en) * | 2016-10-13 | 2020-08-04 | Tata Consultancy Services Limited | Systems and methods for dynamic generation of questionnaires on programming concepts |
US10685047B1 (en) * | 2016-12-08 | 2020-06-16 | Townsend Street Labs, Inc. | Request processing system |
US11043306B2 (en) | 2017-01-17 | 2021-06-22 | 3M Innovative Properties Company | Methods and systems for manifestation and transmission of follow-up notifications |
US10929759B2 (en) | 2017-04-06 | 2021-02-23 | AIBrain Corporation | Intelligent robot software platform |
US11151992B2 (en) | 2017-04-06 | 2021-10-19 | AIBrain Corporation | Context aware interactive robot |
US10963493B1 (en) | 2017-04-06 | 2021-03-30 | AIBrain Corporation | Interactive game with robot system |
US10810371B2 (en) | 2017-04-06 | 2020-10-20 | AIBrain Corporation | Adaptive, interactive, and cognitive reasoner of an autonomous robotic system |
US10839017B2 (en) | 2017-04-06 | 2020-11-17 | AIBrain Corporation | Adaptive, interactive, and cognitive reasoner of an autonomous robotic system utilizing an advanced memory graph structure |
US10817670B2 (en) | 2017-05-10 | 2020-10-27 | Oracle International Corporation | Enabling chatbots by validating argumentation |
US11586827B2 (en) | 2017-05-10 | 2023-02-21 | Oracle International Corporation | Generating desired discourse structure from an arbitrary text |
US11386274B2 (en) | 2017-05-10 | 2022-07-12 | Oracle International Corporation | Using communicative discourse trees to detect distributed incompetence |
CN110612525B (zh) | 2017-05-10 | 2024-03-19 | 甲骨文国际公司 | 通过使用交流话语树启用修辞分析 |
US10599885B2 (en) | 2017-05-10 | 2020-03-24 | Oracle International Corporation | Utilizing discourse structure of noisy user-generated content for chatbot learning |
US11373632B2 (en) | 2017-05-10 | 2022-06-28 | Oracle International Corporation | Using communicative discourse trees to create a virtual persuasive dialogue |
US11615145B2 (en) | 2017-05-10 | 2023-03-28 | Oracle International Corporation | Converting a document into a chatbot-accessible form via the use of communicative discourse trees |
US10839154B2 (en) | 2017-05-10 | 2020-11-17 | Oracle International Corporation | Enabling chatbots by detecting and supporting affective argumentation |
US11960844B2 (en) | 2017-05-10 | 2024-04-16 | Oracle International Corporation | Discourse parsing using semantic and syntactic relations |
US10817483B1 (en) | 2017-05-31 | 2020-10-27 | Townsend Street Labs, Inc. | System for determining and modifying deprecated data entries |
CN111149107B (zh) | 2017-09-28 | 2023-08-22 | 甲骨文国际公司 | 使自主代理能够区分问题和请求 |
CN111149100B (zh) | 2017-09-28 | 2023-08-29 | 甲骨文国际公司 | 基于命名实体的解析和识别确定跨文档的修辞相互关系 |
US10762089B2 (en) * | 2017-12-05 | 2020-09-01 | International Business Machines Corporation | Open ended question identification for investigations |
US11551815B2 (en) * | 2017-12-12 | 2023-01-10 | Medical Informatics Corp. | Risk monitoring scores |
US11676588B2 (en) | 2017-12-26 | 2023-06-13 | Rakuten Group, Inc. | Dialogue control system, dialogue control method, and program |
US11537645B2 (en) | 2018-01-30 | 2022-12-27 | Oracle International Corporation | Building dialogue structure by using communicative discourse trees |
US10795886B1 (en) | 2018-03-30 | 2020-10-06 | Townsend Street Labs, Inc. | Dynamic query routing system |
JP7258047B2 (ja) | 2018-05-09 | 2023-04-14 | オラクル・インターナショナル・コーポレイション | 収束質問に対する回答を改善するための仮想談話ツリーの構築 |
US11455494B2 (en) | 2018-05-30 | 2022-09-27 | Oracle International Corporation | Automated building of expanded datasets for training of autonomous agents |
US11645459B2 (en) | 2018-07-02 | 2023-05-09 | Oracle International Corporation | Social autonomous agent implementation using lattice queries and relevancy detection |
US11562135B2 (en) | 2018-10-16 | 2023-01-24 | Oracle International Corporation | Constructing conclusive answers for autonomous agents |
US11803556B1 (en) | 2018-12-10 | 2023-10-31 | Townsend Street Labs, Inc. | System for handling workplace queries using online learning to rank |
US11321536B2 (en) | 2019-02-13 | 2022-05-03 | Oracle International Corporation | Chatbot conducting a virtual social dialogue |
US11531707B1 (en) | 2019-09-26 | 2022-12-20 | Okta, Inc. | Personalized search based on account attributes |
US20210173837A1 (en) * | 2019-12-06 | 2021-06-10 | Nec Laboratories America, Inc. | Generating followup questions for interpretable recursive multi-hop question answering |
US11967253B2 (en) | 2021-05-27 | 2024-04-23 | International Business Machines Corporation | Semi-automated evaluation of long answer exams |
US20230148228A1 (en) * | 2021-11-05 | 2023-05-11 | International Business Machines Corporation | Computer assisted answering boolean questions with evidence |
Family Cites Families (72)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0415828A (ja) | 1990-05-09 | 1992-01-21 | Hitachi Ltd | 推論方法及びシステム |
US5359509A (en) | 1991-10-31 | 1994-10-25 | United Healthcare Corporation | Health care payment adjudication and review system |
US5675819A (en) | 1994-06-16 | 1997-10-07 | Xerox Corporation | Document information retrieval using global word co-occurrence patterns |
JPH09106428A (ja) | 1995-10-11 | 1997-04-22 | Kitsusei Comtec Kk | 所見作成装置 |
US5933809A (en) | 1996-02-29 | 1999-08-03 | Medcom Solutions, Inc. | Computer software for processing medical billing record information |
WO1999017223A1 (en) | 1997-09-30 | 1999-04-08 | Ihc Health Services, Inc. | Aprobabilistic system for natural language processing |
US7467094B2 (en) | 1999-06-23 | 2008-12-16 | Visicu, Inc. | System and method for accounting and billing patients in a hospital environment |
US7725307B2 (en) | 1999-11-12 | 2010-05-25 | Phoenix Solutions, Inc. | Query engine for processing voice based queries including semantic decoding |
EP1266338A2 (en) * | 2000-02-14 | 2002-12-18 | First Opinion Corporation | Automated diagnostic system and method |
US7447988B2 (en) | 2000-05-10 | 2008-11-04 | Ross Gary E | Augmentation system for documentation |
US6636848B1 (en) | 2000-05-31 | 2003-10-21 | International Business Machines Corporation | Information search using knowledge agents |
AU2001261600A1 (en) | 2000-10-23 | 2002-05-06 | Mindsearch | System and method providing automated and interactive consumer information gathering |
JP2002207823A (ja) | 2001-01-09 | 2002-07-26 | Sanyo Electric Co Ltd | 診療支援装置、及び医療文書用データの供給方法 |
US6834264B2 (en) | 2001-03-29 | 2004-12-21 | Provox Technologies Corporation | Method and apparatus for voice dictation and document production |
US6655583B2 (en) | 2001-04-13 | 2003-12-02 | Advanced Medical Interventions, Inc. | Medical billing method and system |
US7519529B1 (en) | 2001-06-29 | 2009-04-14 | Microsoft Corporation | System and methods for inferring informational goals and preferred level of detail of results in response to questions posed to an automated information-retrieval or question-answering service |
US6778979B2 (en) | 2001-08-13 | 2004-08-17 | Xerox Corporation | System for automatically generating queries |
US7707046B2 (en) | 2001-10-24 | 2010-04-27 | Qtc Management, Inc. | Automated processing of electronic medical data for insurance and disability determinations |
US20030105638A1 (en) * | 2001-11-27 | 2003-06-05 | Taira Rick K. | Method and system for creating computer-understandable structured medical data from natural language reports |
US7818186B2 (en) | 2001-12-31 | 2010-10-19 | Genworth Financial, Inc. | System for determining a confidence factor for insurance underwriting suitable for use by an automated system |
GB2404268A (en) | 2002-05-16 | 2005-01-26 | Gordon T Moore | Checklist-based flow and tracking system for patient care by medical providers |
US20040128163A1 (en) | 2002-06-05 | 2004-07-01 | Goodman Philip Holden | Health care information management apparatus, system and method of use and doing business |
JP2004157815A (ja) | 2002-11-07 | 2004-06-03 | Hitachi Ltd | 医用画像報告書入力システム |
WO2004051432A2 (en) | 2002-12-03 | 2004-06-17 | Siemens Medical Solutions Usa, Inc. | Systems and methods for automated extraction and processing of billing information in patient records |
US7233938B2 (en) | 2002-12-27 | 2007-06-19 | Dictaphone Corporation | Systems and methods for coding information |
US8326653B2 (en) | 2003-03-04 | 2012-12-04 | Nuance Communications, Inc. | Method and apparatus for analyzing patient medical records |
US20040243545A1 (en) | 2003-05-29 | 2004-12-02 | Dictaphone Corporation | Systems and methods utilizing natural language medical records |
US7290016B2 (en) | 2003-05-27 | 2007-10-30 | Frank Hugh Byers | Method and apparatus for obtaining and storing medical history records |
JP4057962B2 (ja) | 2003-06-30 | 2008-03-05 | 株式会社東芝 | 質問応答装置、質問応答方法及びプログラム |
US8200775B2 (en) | 2005-02-01 | 2012-06-12 | Newsilike Media Group, Inc | Enhanced syndication |
US7454393B2 (en) | 2003-08-06 | 2008-11-18 | Microsoft Corporation | Cost-benefit approach to automatically composing answers to questions by extracting information from large unstructured corpora |
US20050137910A1 (en) * | 2003-12-19 | 2005-06-23 | Rao R. B. | Systems and methods for automated extraction and processing of billing information in patient records |
US7788040B2 (en) | 2003-12-19 | 2010-08-31 | Siemens Medical Solutions Usa, Inc. | System for managing healthcare data including genomic and other patient specific information |
JP2005267358A (ja) | 2004-03-19 | 2005-09-29 | Hitachi Medical Corp | 地域医療のための電子カルテ作成・管理システム及びその運営方法 |
US20050240439A1 (en) | 2004-04-15 | 2005-10-27 | Artificial Medical Intelligence, Inc, | System and method for automatic assignment of medical codes to unformatted data |
US20050251422A1 (en) | 2004-05-06 | 2005-11-10 | Wolfman Jonathan G | System and method for near real-time coding of hospital billing records |
US20060020493A1 (en) | 2004-07-26 | 2006-01-26 | Cousineau Leo E | Ontology based method for automatically generating healthcare billing codes from a patient encounter |
US20130304453A9 (en) | 2004-08-20 | 2013-11-14 | Juergen Fritsch | Automated Extraction of Semantic Content and Generation of a Structured Document from Speech |
US7584103B2 (en) | 2004-08-20 | 2009-09-01 | Multimodal Technologies, Inc. | Automated extraction of semantic content and generation of a structured document from speech |
JP2006072436A (ja) | 2004-08-31 | 2006-03-16 | Ricoh Co Ltd | 文書作成支援システム、文書作成支援方法、プログラムおよび記録媒体 |
US8060376B2 (en) * | 2004-10-01 | 2011-11-15 | Nomoreclipboard, Llc | System and method for collection of community health and administrative data |
US20060122865A1 (en) | 2004-11-24 | 2006-06-08 | Erik Preiss | Procedural medicine workflow management |
US20060184393A1 (en) | 2004-12-29 | 2006-08-17 | Ewin Leon H | Online medical data collection |
US20080005064A1 (en) * | 2005-06-28 | 2008-01-03 | Yahoo! Inc. | Apparatus and method for content annotation and conditional annotation retrieval in a search context |
US20070050187A1 (en) | 2005-08-30 | 2007-03-01 | James Cox | Medical billing system and method |
US20070088564A1 (en) | 2005-10-13 | 2007-04-19 | R&G Resources, Llc | Healthcare provider data submission and billing system and method |
US8560350B2 (en) | 2005-11-22 | 2013-10-15 | Robert J. Nadai | Method, system and computer program product for generating an electronic bill having optimized insurance claim items |
US20070143141A1 (en) | 2005-12-16 | 2007-06-21 | Siemens Medical Solutions Health Services Corporation | Integrated Clinical and Medication Reconciliation System |
US20070198907A1 (en) | 2006-02-23 | 2007-08-23 | Meenakshi Degala | System and method for enabling persistent values when navigating in electronic documents |
US7610192B1 (en) | 2006-03-22 | 2009-10-27 | Patrick William Jamieson | Process and system for high precision coding of free text documents against a standard lexicon |
WO2007150005A2 (en) | 2006-06-22 | 2007-12-27 | Multimodal Technologies, Inc. | Automatic decision support |
US20080077451A1 (en) | 2006-09-22 | 2008-03-27 | Hartford Fire Insurance Company | System for synergistic data processing |
JP2008108021A (ja) | 2006-10-25 | 2008-05-08 | Hitachi Medical Corp | 症例データベースシステム |
US20080134038A1 (en) | 2006-12-05 | 2008-06-05 | Electronics And Telecommunications Research | Interactive information providing service method and apparatus |
US8676605B2 (en) | 2006-12-20 | 2014-03-18 | Artificial Medical Intelligence, Inc. | Delphi method for medical coding |
JP2008250378A (ja) | 2007-03-29 | 2008-10-16 | Sanyo Electric Co Ltd | 入力文字列予測装置および入力文字列予測プログラム |
US20080249374A1 (en) | 2007-04-06 | 2008-10-09 | General Electric Company | Method and apparatus to enable multiple methods of clinical order input into a healthcare it application |
US7917355B2 (en) | 2007-08-23 | 2011-03-29 | Google Inc. | Word detection |
JP5214277B2 (ja) | 2008-02-29 | 2013-06-19 | 卓雄 田中 | 医用診断支援システム |
US8275803B2 (en) | 2008-05-14 | 2012-09-25 | International Business Machines Corporation | System and method for providing answers to questions |
US20100063907A1 (en) | 2008-09-11 | 2010-03-11 | American Management Group, LLC | Insurance Billing System |
US20100138241A1 (en) | 2008-11-25 | 2010-06-03 | Ruark William Marcus | System and Method for Computerized Medical Records Review |
US20100274584A1 (en) | 2009-04-23 | 2010-10-28 | Kim Hyong S | Method and system for presenting and processing multiple text-based medical reports |
JP2011118538A (ja) | 2009-12-01 | 2011-06-16 | Hokkaido Univ | 電子レセプトデータ変換プログラムおよび電子レセプトデータ変換システム |
CA2789158C (en) | 2010-02-10 | 2016-12-20 | Mmodal Ip Llc | Providing computable guidance to relevant evidence in question-answering systems |
US20120102405A1 (en) | 2010-10-25 | 2012-04-26 | Evidence-Based Solutions, Inc. | System and method for matching person-specific data with evidence resulting in recommended actions |
US20120166220A1 (en) | 2010-12-22 | 2012-06-28 | Cerner Innovation, Inc. | Presenting quality measures and status to clinicians |
US20120185275A1 (en) | 2011-01-15 | 2012-07-19 | Masoud Loghmani | System and method of automated data analysis for implementing health records personal assistant with automated correlation of medical services to insurance and tax benefits for improved personal health cost management |
WO2012177611A2 (en) | 2011-06-19 | 2012-12-27 | Mmodal Ip Llc | Using alternative sources of evidence in computer-assisted billing coding |
WO2014046707A1 (en) | 2012-09-21 | 2014-03-27 | Atigeo Llc | Methods and systems for medical auto-coding using multiple agents with automatic adjustment |
US20150371203A1 (en) | 2013-02-01 | 2015-12-24 | 3M Innovative Properties Company | Medical billing using a single workflow to process medical billing codes for two or more classes of reimbursement |
US10950329B2 (en) | 2015-03-13 | 2021-03-16 | Mmodal Ip Llc | Hybrid human and computer-assisted coding workflow |
-
2011
- 2011-02-10 CA CA2789158A patent/CA2789158C/en active Active
- 2011-02-10 WO PCT/US2011/024405 patent/WO2011100474A2/en active Application Filing
- 2011-02-10 JP JP2012553007A patent/JP6023593B2/ja not_active Expired - Fee Related
- 2011-02-10 US US13/025,051 patent/US9082310B2/en active Active
- 2011-02-10 EP EP11742821.9A patent/EP2534591A4/en not_active Ceased
-
2015
- 2015-06-22 US US14/746,174 patent/US9424523B2/en active Active
-
2016
- 2016-03-30 JP JP2016067686A patent/JP6215383B2/ja not_active Expired - Fee Related
- 2016-07-25 US US15/218,510 patent/US9704099B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11282596B2 (en) | 2017-11-22 | 2022-03-22 | 3M Innovative Properties Company | Automated code feedback system |
Also Published As
Publication number | Publication date |
---|---|
US20150371145A1 (en) | 2015-12-24 |
US20160335554A1 (en) | 2016-11-17 |
US9082310B2 (en) | 2015-07-14 |
EP2534591A4 (en) | 2013-07-17 |
CA2789158A1 (en) | 2011-08-18 |
WO2011100474A3 (en) | 2012-01-19 |
US9424523B2 (en) | 2016-08-23 |
JP2013519947A (ja) | 2013-05-30 |
CA2789158C (en) | 2016-12-20 |
JP6215383B2 (ja) | 2017-10-18 |
US9704099B2 (en) | 2017-07-11 |
EP2534591A2 (en) | 2012-12-19 |
WO2011100474A2 (en) | 2011-08-18 |
JP2016164788A (ja) | 2016-09-08 |
US20120041950A1 (en) | 2012-02-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6215383B2 (ja) | 質問応答システムにおける関連する証拠への計算可能なガイダンスの提供 | |
US11626195B2 (en) | Labeling medical scans via prompt decision trees | |
Jordan et al. | Factors that impact on the use of mechanical ventilation weaning protocols in critically ill adults and children: a qualitative evidence‐synthesis | |
AU2023214261A1 (en) | Method and platform for creating a web-based form that Incorporates an embedded knowledge base, wherein the form provides automatic feedback to a user during and following completion of the form | |
US20180101879A1 (en) | User Feedback in Semi-Automatic Question Answering Systems | |
US20180040087A1 (en) | Automated Billing Code Generation | |
US20200395119A1 (en) | Medical scan labeling quality assurance system | |
US20220253592A1 (en) | System with report analysis and methods for use therewith | |
Drabiak et al. | AI and machine learning ethics, law, diversity, and global impact | |
US11901052B2 (en) | System and method for handling exceptions during healthcare record processing | |
Martins et al. | Offline testing of the ATHENA Hypertension decision support system knowledge base to improve the accuracy of recommendations | |
Souvignet et al. | Modeling patient safety incidents knowledge with the categorial structure method | |
Talburt et al. | Evaluating and improving data fusion accuracy | |
Usman et al. | Selecting test cases from the electronic health record for software testing of knowledge-based clinical decision support systems | |
Jia | Embracing Machine Learning in Safety Assurance in Healthcare | |
Shaw et al. | Acute assessment services for patient flow assistance in hospital emergency departments | |
Dunlap et al. | Data-Centric Machine Learning in Nursing: A Concept Clarification | |
Tu et al. | Structural Patterns in Chronic Disease Clinical Practice Guidelines Formalized for Clinical Decision Support | |
Lazarova | An Interoperable Clinical Cardiology Electronic Health Record System-a standards based approach for Clinical Practice and Research with Data Reuse | |
JP5908910B2 (ja) | 半自動質問応答システムにおけるユーザフィードバック | |
Tschantz et al. | On the Semantics of Purpose Requirements in Privacy Policies (CMU-CS-11-102) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140203 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150331 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150629 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20151201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160330 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20160705 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160920 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161007 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6023593 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |