KR101178310B1 - 대화 관리 방법 및 이를 실행하는 시스템 - Google Patents

대화 관리 방법 및 이를 실행하는 시스템 Download PDF

Info

Publication number
KR101178310B1
KR101178310B1 KR1020110016755A KR20110016755A KR101178310B1 KR 101178310 B1 KR101178310 B1 KR 101178310B1 KR 1020110016755 A KR1020110016755 A KR 1020110016755A KR 20110016755 A KR20110016755 A KR 20110016755A KR 101178310 B1 KR101178310 B1 KR 101178310B1
Authority
KR
South Korea
Prior art keywords
speech
utterance
similarity
intentions
calculating
Prior art date
Application number
KR1020110016755A
Other languages
English (en)
Inventor
이근배
이규송
이성진
노형종
Original Assignee
포항공과대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 포항공과대학교 산학협력단 filed Critical 포항공과대학교 산학협력단
Priority to KR1020110016755A priority Critical patent/KR101178310B1/ko
Priority to PCT/KR2011/007906 priority patent/WO2012115324A1/ko
Priority to EP11859398.7A priority patent/EP2680250A4/en
Priority to CN201180067701.1A priority patent/CN103380449B/zh
Priority to US13/985,556 priority patent/US20130325468A1/en
Priority to JP2013555350A priority patent/JP5810176B2/ja
Application granted granted Critical
Publication of KR101178310B1 publication Critical patent/KR101178310B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
    • G09B7/02—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/04—Speaking
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/06—Foreign languages

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Machine Translation (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

대화 관리 방법 및 이를 실행하는 시스템이 개시된다. 미리 정의된 말뭉치에 포함된 복수개의 발화 의도들 중 적어도 하나의 발화 의도 및 이와 선후관계에 존재하는 발화 의도를 이용하여 발화 의도의 중요성, 발화 의도간 유사도 및 발화 의도간 상대적 거리를 계산하는 계산부, 상기 발화 의도간 중요도 및 유사도를 이용하여 상기 미리 정의된 말뭉치로부터 획득된 대화 흐름과 사용자 발화로부터 획득된 대화 흐름을 비교하고, 상기 비교 결과에 따라 대화 흐름간 유사도를 계산하는 유사도 계산부, 상기 발화 의도간 상대적 거리에 따라 사용자 발화를 평가하여 발화 의도 평가 점수를 계산하는 발화의도 검증부를 포함하여 구성된다. 따라서, 기존의 정보획득 대화시스템에서 미처 처리하지 못하는 다양한 대화의 흐름 처리를 가능하게 하고 각각의 대화 상황에서의 적절한 발화 의도들을 랭킹 함수에 의해서 계산된 점수에 의해 순위를 매겨 출력할 수 있다. 발화 의도간의 상대적 거리정보를 이용하여 발화 의도에 대한 점수 생성뿐 아니라 사용자 발화 의도에 대한 검증 또한 수행할 수 있다.

Description

대화 관리 방법 및 이를 실행하는 시스템{METHOD OF MANAGING COMMUNICATION AND SYSTEM FOR THE SAME}
본 발명은 대화 관리 방법 및 이를 실행하는 시스템에 관한 것으로, 더욱 상세하게는 발화 의도 순위를 이용하여 대화를 관리하는 방법 및 이를 실행하는 시스템에 관한 것이다.
외국어를 학습하기 위한 방법은 실제 외국어를 모국어로 사용하는 나라에서 현지인들과 생활하면서 문화와 풍습 등을 언어와 같이 학습하는 것과 차선책으로 국내에서 학습 외국어를 모국어로 하는 원어민 교사에게서 배우는 것이라고 여겨지지만, 학습 비용이 매우 커서 경제적 부담이 생긴다. 또한, 이와 같은 전통적인 외국어 학습방법은 외국을 방문하거나 원어민 교사와 정기적으로 만남을 갖는 것에 대한 공간적 및 시간적 제한을 가진다.
종래의 외국어 학습 방법이 가지는 경제적 부담, 공간적 및 시간적 제한을 극복하기 위하여, 컴퓨터 장치에 의한 학습 방법들이 최근 많이 출시되고 있다. 종래의 컴퓨터 장치에 의한 외국어 학습 방법들은 단순한 정보나 학습자료, 풀이 방법 제시의 형태이며, 외국어 회화 교육과 관련해서는 정해진 시나리오상에서 대화를 순서대로 진행하여 정해진 문장과 상황에서만 학습자가 학습하는 단점을 가진다.
이러한 문제점을 해결하기 위해서, 컴퓨터가 원어민을 대신하여 학습자와 일대일 대화를 진행하는 대화 시스템을 외국어 회화 교육에 활용하는 방법들이 제안되었다. 기존의 대화 시스템들은 호텔/기차/항공권 예약 또는 버스노선/방안내 등의 정보 서비스를 위하여, 컴퓨터가 사용자와 대화하여 사용자가 원하는 예약이나 정보 제공 등을 파악하여 제공하였다. 이러한 기존 대화 시스템이 영어 대화를 위하여 개발되었다면 호텔, 항공권 등과 같은 예약 도메인이나 버스노선 또는 방 찾기를 위한 영어 회화 학습에 사용될 수 있다.
하지만 기존의 대화 시스템들은 특정 목적을 위한 정보서비스용 대화 흐름만을 고려하여 개발되어서 정해진 대화 흐름만을 고려하는 대화 플랜이나 대화 흐름을 제어하기 어려운 학습 및 예제 기반의 대화 관리 방법이어서, 외국어 회화 교육에 적합하도록 실제 도메인에서 나타나는 다양한 대화 흐름을 고려하면서 대화 흐름을 제어할 수 있는 방법이 필요하다. 또한, 대화 플랜이나 학습 및 예제 기반에 상관없이 기존 대화 시스템들은 사용자에게 빠르게 정확한 정보 및 예약을 제공하기 위하여, 항상 최적의 대화 흐름으로 대화가 진행되도록 구성되어 있다. 대부분의 대화 시스템에서 최적은 항상 짧은 대화흐름이므로, 대화가 될 수 있으면 짧게 끝나도록 시스템이 대화를 진행하기 때문에, 학습자에게 다양한 영어 체험을 주지 못한다는 단점이 있다.
또한 많은 수의 발화 의도가 등장하는 대화를 다루는 데에 있어서 대화 흐름이나 발화 의도의 중요도 등을 세부적으로 고려하지 못하고 시스템 발화를 제시한다. 그리고 사용자 발화에 대해서는 예상 발화 후보를 제시하지 못한다는 문제점도 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 제 1 목적은, 대화 관리 시스템을 제공하는데 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 제 2 목적은, 대화 관리 방법을 제공하는데 있다.
상기한 본 발명의 제 1 목적을 달성하기 위한 본 발명의 일 실시예에 따른 대화 관리 시스템은, 미리 정의된 말뭉치에 포함된 복수개의 발화 의도들 중 적어도 하나의 발화 의도 및 이와 선후관계에 존재하는 발화 의도를 이용하여 발화 의도의 중요성, 발화 의도간 유사도 및 발화 의도간 상대적 거리를 계산하는 계산부, 상기 발화 의도간 중요도 및 유사도를 이용하여 상기 미리 정의된 말뭉치로부터 획득된 대화 흐름과 사용자 발화로부터 획득된 대화 흐름을 비교하고, 상기 비교 결과에 따라 대화 흐름간 유사도를 계산하는 유사도 계산부 및 상기 발화 의도간 상대적 거리에 따라 사용자 발화를 평가하여 발화 의도 평가 점수를 계산하는 발화의도 검증부를 포함하여 구성될 수 있다.
본 발명의 제2 목적을 달성하기 위한 본 발명의 일 실시예에 따른 대화 관리 방법은, 미리 정의된 말뭉치에 포함된 복수개의 발화 의도들 중 적어도 하나의 발화 의도 및 이와 선후관계에 존재하는 발화 의도를 이용하여 발화 의도의 중요성, 발화 의도간 유사도 및 발화 의도간 상대적 거리를 계산하는 제 1 계산 단계, 상기 발화 의도간 중요도 및 유사도를 이용하여 상기 미리 정의된 말뭉치로부터 획득된 대화 흐름과 사용자 발화로부터 획득된 대화 흐름을 비교하고, 상기 비교 결과에 따라 대화 흐름간 유사도를 계산하는 유사도 계산 단계 및 상기 발화 의도간 상대적 거리에 따라 사용자 발화를 평가하여 발화 의도 평가 점수를 계산하는 발화 의도 평가 점수 계산 단계를 포함하여 구성될 수 있다.
상기와 같은 본 발명에 따른 대화 관리 방법 및 이를 실행하는 시스템을 이용할 경우에는 기존의 정보획득 대화시스템에서 미처 처리하지 못하는 다양한 대화의 흐름 처리를 가능하게 하고 각각의 대화 상황에서의 적절한 발화 의도들을 랭킹 함수에 의해서 계산된 점수에 의해 순위를 매겨 출력할 수 있다. 발화 의도간의 상대적 거리정보를 이용하여 발화 의도에 대한 점수 생성뿐 아니라 사용자 발화 의도에 대한 검증 또한 수행할 수 있다. 또한, 레벤스타인 거리 측정 방법을 이용함으로써 기존의 기술로 처리하기 어려웠던 각 턴에서 복수 개의 사용자, 시스템 발화가 존재할 때의 대화 흐름 유사도 계산을 해낼 수 있다.
도 1은 본 발명의 일 실시예에 따른 대화 관리 시스템의 내부 구조를 개략적으로 도시한 블럭도이다.
도 2는 본 발명의 일 실시예에 따른 대화 관리 방법을 설명하기 위한 흐름도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
한편, 이하에서 설명될 본 발명의 일 실시예에 따른 대화 관리 시스템은 영어 교육을 위한 발화 의도 순위에 기반하여 대화를 관리하는 방법을 설명하지만, 교육을 위한 언어가 반드시 영어로만 한정되는 것은 아니다.
도 1은 본 발명의 일 실시예에 따른 대화 관리 시스템의 내부 구조를 개략적으로 도시한 블럭도이다.
대화 관리 시스템는 계산부(101), 유사도 계산부(103), 발화의도 검증부(105), 교육요소 적용부(107), 최종 점수 계산부(108) 및 순위 출력부(109)를 포함하여 구성될 수 있고, 계산부(101)는 제 1 계산부(111), 제 2 계산부(131) 및 제 3 계산부(151)를 포함하여 구성될 수 있다.
제 1 계산 유닛(111)은 미리 정의된 말뭉치에 포함된 복수개의 발화 의도들 중 적어도 하나의 발화 의도 및 발화 의도와 선후관계에 존재하는 발화 의도를 비교한 결과에 따라 발화 의도의 중요도를 계산한다. 여기서, 발화 의도는 사용자 또는 교육 장치가 발화한 문장의 의도를 의미하며, 예를 들어 사용자가 “I'm looking for a bank.”라고 발화하였을 경우에는, 사용자가 발화한 문장의 의도가 길을 묻고 있으므로 발화 의도는 “request/location”과 같이 표기할 수 있다. 이와 같이, 각 발화에 대해 발화 의도를 파악함에 따라, 본 발명의 일 실시예에 따른 대화 관리 시스템은 현재까지의 발화 의도의 흐름에 따라 다음 발화 의도를 예측할 수 있다.
본 발명의 일 실시예에 따르면, 미리 정의된 말뭉치에 포함된 복수개의 발화 의도 중 하나의 발화 의도가 (A)길을 묻는 발화 의도이고, (A)길을 묻는 발화 의도 전에 존재하는 발화 의도가 (B)도움이 필요한지 요청하는 발화 의도이고, (A)길을 묻는 발화 의도 후에 존재하는 발화 의도가 (C)길을 안내하는 의도인 경우, 제 1 계산 유닛(111)은 (A)길을 묻는 발화 의도와 전후관계에 존재하는 발화 의도가 다양하게 나타나는 경우가 아니라고 판단하여 (A)길을 묻는 발화 의도의 중요도를 높은 발화 의도로 결정한다. 반면 다른 실시예에 따르면, 제 1 계산 유닛(111)은 (D)상대의 의견에 긍정하는 발화의도와 전후관계에 존재하는 발화 의도가 다양하게 나타나는 경우에는 (D)상대의 의견에 긍정하는 발화의도의 중요도를 낮은 발화 의도로 결정한다.
제 2 계산 유닛(131)은 제 1 계산 유닛(111)로부터 발화 의도를 수신하고, 미리 정의된 말뭉치를 기초로하여 수신된 발화 의도 및 수신된 발화 의도와 선후관계에 존재하는 발화 의도의 분포 상태를 파악하여 발화 의도간 유사도를 계산한다. 본 발명의 일 실시예에 따르면, 제 1 계산 유닛(111)로부터 발화 의도 (A)길을 묻는 발화 의도 및 (A)길을 묻는 발화 의도 전에 존재하는 (B) 도움이 필요한지 요청하는 발화 의도의 유사도를 계산하는 경우를 설명하면, 제 2 계산 유닛(131)은 미리 정의된 말뭉치로부터 (A)길을 묻는 발화 의도가 나타난 모든 경우에 대해서 (A)길을 묻는 발화 의도의 전후관계에 존재하는 발화 의도의 제 1 분포도(a)를 계산하고, 미리 정의된 말뭉치로부터 (B) 도움이 필요한지 요청하는 발화 의도가 나타난 모든 경우에 대해서 (B) 도움이 필요한지 요청하는 발화 의도의 전후관계에 존재하는 발화 의도의 제 2 분포도(b)를 계산한 후, 제 1 분포도(a) 및 제 2 분포도(b)를 비교하여 발화 의도간 유사도를 계산한다.
제 3 계산 유닛(151)은 발화 의도 및 발화 의도와 선후관계에 존재하는 모든 발화 의도를 조합하여 조합 가능한 모든 발화 의도 쌍에 대해서 상대적 거리를 계산한다. 본 발명의 일 실시예에 따르면, 미리 정의된 말뭉치에 포함된 복수개의 발화 의도 중 하나의 발화 의도가 (A)길을 묻는 발화 의도이고, (A)길을 묻는 발화 의도 전에 존재하는 발화 의도가 (B)도움이 필요한지 요청하는 발화 의도인 경우, 제 3 계산 유닛(151)은 (A)길을 묻는 발화 의도 및 (B)도움이 필요한지 요청하는 발화 의도를 조합하여, 예를 들어 (A)길을 묻는 발화 의도 및 (B)도움이 필요한지 요청하는 발화 의도가 동시에 나타나는 대화의 개수, (A)길을 묻는 발화 의도가 (B)도움이 필요한지 요청하는 발화 의도보다 대화의 앞쪽으로 나타난 개수, (A)길을 묻는 발화 의도가 (B)도움이 필요한지 요청하는 발화 의도보다 앞쪽으로 나타난 경우들에 대해 대화 시점에 대한 (A)길을 묻는 발화 의도와 (B)도움이 필요한지 요청하는 발화 의도의 상대적인 거리를 계산한다.
유사도 계산부(103)는 제 1 계산 유닛(111)로부터 발화 의도의 중요도를 수신하고, 제 2 계산 유닛(131)로부터 발화 의도간 유사도를 수신하고, 사용자로부터 사용자 발화를 수신한다. 유사도 계산부(103)는 수신된 발화 의도의 중요도 및 발화 의도간 유사도를 이용하여 미리 정의된 말뭉치로부터 획득된 예제 대화 흐름과 사용자 발화로부터 획득된 대화 흐름을 비교하여 대화 흐름간 유사도를 계산한다. 본 발명의 일 실시예에 따르면, 유사도 계산부(103)는 레벤스타인 거리 측정 방법(Levenshtein distance edit-distance)을 기초로하여 미리 정의된 말뭉치로부터 획득된 예제 대화 흐름과 사용자 발화로부터 획득된 대화 흐름을 비교하여 대화 흐름간 유사도를 계산한다. 하지만, 기존의 레벤스타인 거리 측정 방법은 각 발화 의도의 중요도 및 유사도를 고려하지 못하고, 또한 대화 흐름에 있어서 예전의 발화와 최근의 발화를 똑같은 비중으로 다루기 때문에 본 발명에서는 좀 더 개선된 레벤스타인 거리 측정 방법론을 제시한다. 추가적으로 제시되는 방법론의 내용은 다음과 같다. 첫째, 각 발화 의도 삽입, 삭제, 교체 시에 발생하는 비용(cost)을 동일한 상수가 아닌 각각의 발화 의도의 중요도 수치로 적용한다. 둘째, 발화 의도 교체 시에는 교체되는 발화간의 유사도를 고려하여, 유사도가 클수록 교체 비용이 줄어들도록 적용한다. 셋째, 각 발화 의도 삽입, 삭제, 교체 시에 발생하는 비용을 계산할 때에, 최근에 발생한 발화 의도에 대해 각 비용을 더 크도록 적용한다.
발화의도 검증부(105)는 제 3 계산 유닛(151)로부터 발화 의도간의 상대적 거리를 수신하고, 사용자로부터 사용자 발화를 수신한 후, 수신된 발화 의도간의 상대적 거리를 이용하여 사용자 발화가 적절한지 판단하여 발화 의도의 점수를 계산한다. 본 발명의 일 실시예에 따르면, 검증하고자 하는 사용자 발화 의도가 A이고, 현재까지 대화가 진행되면서 발생하였던 사용자 발화들과 교육 장치의 발화들이 B, C, D인 경우, 발화의도 검증부(105)는 검증하고자 하는 사용자 발화 의도 A와 현재까지 대화가 진행되면서 발생하였던 사용자 발화들과 교육 장치의 발화 B, C D의 조합하여, 예를 들어, (A, B), (A, C), (A, D)에 대하여 먼저, A와 B가 동시에 나타나는 대화의 개수, A가 B보다 대화의 앞쪽에 나타난 개수, A가 B보다 앞쪽에 나타난 경우들에 대해 대화 시작점에 대한 A와 B의 상대적 거리를 계산한다.
발화의도 검증부(105)는 계산된 결과를 기초로 하여 발화 의도 A가 각각의 발화 의도 B, C, D보다 뒤쪽에 나타나는 경우가 많을수록 높은 점수를 부가하고, A가 각각의 발화 의도 B, C, D보다 뒤쪽에 나타나지 않은 경우가 적을수록 낮은 점수를 부가한다. 또한, 상대적 거리와 제 3 계산 유닛(151)로부터 수신된 발화 의도를 비교하여 유사할 경우 높은 점수를 부가하고, 유사하지 않을 경우 낮은 점수를 부가한다. 이때, 발화의도 검증부(105)는 발화 의도에 부가된 점수가 임계값보다 작을 경우 사용자 발화가 잘못되었다고 가정하고 이를 사용자에게 피드백(Feedback)하고, 발화 의도에 부가된 점수가 임계값보다 큰 경우 해당 점수를 최종 점수 계산부(108)로 전송한다.
교육요소 적용부(107)는 사용자로부터 사용자 발화를 수신하고, 수신된 사용자 발화를 이용하여 외국어 교육 요소들과 관련한 점수를 계산한다. 영어 교육 목적을 위해서는 대화 내에서 보다 다양한 발화가 등장하는 것이 좋다. 따라서 본 발명의 일 실시예에 따른 대화 관리 시스템의 교육요소 적용부(107)는 각 발화 의도 후보에 대해 이전에 나왔던 발화인지를 체크하고, 그 결과 이전에 나왔던 발화인 경우 낮은 점수를 부여한다. 만약, 사용자의 외국어 학습 수준을 알 수 있다면, 교육요소 적용부(107)는 사용자의 외국어 학습 수준에 따라 적절한 난이도의 문장에 높은 점수를 부여하여 사용자 수준에 맞는 대화로 진행되도록 유도한다. 그 외에도 대화 주제나 상황에 따라서 특정한 제약 조건들이 존재하게 되는데 이 또 한 점수로 환산한 후 최종 점수 계산부(108)로 전송한다.
최종 점수 계산부(108)는 유사도 계산부(103)로부터 대화 흐름간 유사도를 수신하고, 발화의도 검증부(105)로부터 사용자 발화의 적절성에 해당하는 점수를 수신하고, 교육요소 적용부(107)로부터 외국어 교육 요소들과 관련된 점수를 수신한다. 최종 점수 계산부(108)는 수신된 대화 흐름간 유사도, 사용자 발화의 적절성에 해당하는 점수 및 외국어 교육 요소들과 관련된 점수를 기초로 하여 예상 발화 의도의 최종 점수를 계산한다.
순위 출력부(109)는 최종 점수 계산부(108)로부터 최종 점수를 수신하고, 수신된 최종 점수를 기초로 하여 각 예상 발화 의도의 순위를 출력한다. 본 발명의 일 실시예에 따르면, 순위 출력부(109)는 가장 상위의 예상 발화 하나만을 출력할 수도 있고, 외국어 대화에 익숙하지 않은 사용자의 학습을 돕기 위해서 다중인식 후보열(N-best list)의 상위 발화들을 모두 출력하여 사용자가 다양한 표현을 학습하도록 할 수 있다. 그러면 이하에서는, 도 2를 참조하여 본 발명의 일 실시예에 따른 대화 관리 방법을 설명하기로 한다.
도 2는 본 발명의 일 실시예에 따른 대화 관리 방법을 설명하기 위한 흐름도이다.
도 2를 참조하면, 대화 관리 시스템은 미리 정의된 말뭉치에 포함된 복수개의 발화 의도들 중 적어도 하나의 발화 의도 및 이와 선후관계에 존재하는 발화 의도를 이용하여 발화 의도의 중요성, 발화 의도간 유사도 및 발화 의도간 상대적 거리를 계산한다(S201). 보다 구체적으로, 대화 관리 시스템은 미리 정의된 말뭉치에 포함된 복수개의 발화 의도들 중 적어도 하나의 발화 의도 및 발화 의도와 선후관계에 존재하는 발화 의도를 비교한 결과에 따라 발화 의도의 중요도를 계산한다. 또한, 대화 관리 시스템은 미리 정의된 말뭉치를 기초로 하여 수신된 발화 의도 및 수신된 발화 의도와 선후관계에 존재하는 발화 의도의 분포 상태를 파악하여 발화 의도간 유사도를 계산하고, 발화 의도 및 발화 의도와 선후관계에 존재하는 모든 발화 의도를 조합하여 조합 가능한 모든 발화 의도 쌍에 대해서 상대적 거리를 계산한다.
대화 관리 시스템은 발화 의도간 중요도 및 유사도를 이용하여 미리 정의된 말뭉치로부터 획득된 대화 흐름과 사용자 발화로부터 획득된 대화 흐름을 비교하고, 비교 결과에 따라 대화 흐름간 유사도를 계산한다(S202). 대화 관리 시스템은 발화 의도간 상대적 거리에 따라 사용자 발화를 평가하여 발화 의도 평가 점수를 계산하는 발화 의도 평가 점수 계산하고(S203), 수신된 사용자 발화를 이용하여 외국어 교육 요소들과 관련한 점수를 계산한다(S204). 그런 다음, 대화 관리 시스템은 흐름간 유사도, 발화 의도 평가 점수 및 교육 요소 평가 점수를 이용하여 최종 점수를 계산하고, 최종 점수를 기초로 하여 각 예상 발화 의도의 순위를 출력한다(S205).
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
101: 계산부 111: 제 1 계산 유닛
131: 제 2 계산 유닛 151: 제 3 계산 유닛
103: 유사도 계산부 105: 발화 의도 검증부
107: 교육 요소 적용부 108: 최종 점수 계산부
109: 순위 출력부

Claims (18)

  1. 미리 정의된 말뭉치에 포함된 복수개의 발화 의도들 중 적어도 하나의 발화 의도 및 이와 선후관계에 존재하는 발화 의도를 이용하여 발화 의도의 중요성, 발화 의도간 유사도 및 발화 의도간 상대적 거리를 계산하는 계산부;
    상기 발화 의도간 중요도 및 유사도를 이용하여 상기 미리 정의된 말뭉치로부터 획득된 대화 흐름과 현재까지 사용자와 교육 장치간 대화 흐름을 비교하고, 상기 비교 결과에 따라 대화 흐름간 유사도를 계산하는 유사도 계산부; 및
    상기 발화 의도간 상대적 거리에 따라 사용자 발화를 평가하여 발화 의도 평가 점수를 계산하는 발화의도 검증부를 포함하는 것을 특징으로 하는 대화 관리 시스템.
  2. 제 1 항에 있어서, 상기 유사도 계산부는,
    상기 발화 의도간 삽입, 삭제 및 교체중 적어도 하나의 동작이 실행될 시 발생하는 비용에 상기 발화 의도간 중요도를 적용하여 대화 흐름간 유사도를 계산하는 것을 특징으로 하는 대화 관리 시스템.
  3. 제 1 항에 있어서, 상기 발화의도 검증부는,
    상기 평가 점수가 미리 결정된 임계값보다 작은 경우 사용자 발화가 잘못되었다고 판단하고 이를 사용자에게 피드백하는 것을 특징으로 하는 대화 관리 시스템.
  4. 제 1 항에 있어서, 상기 발화의도 검증부는,
    상기 사용자 발화 및 현재까지 대화가 진행되면서 발생하였던 발화의 조합 를 조합하여 조합한 쌍에 대한 상대적 거리를 계산하고, 상기 계산된 상대적 거리에 따라 발화 의도 평가 점수를 계산하는 것을 특징으로 하는 대화 관리 시스템.
  5. 제 1 항에 있어서, 상기 계산부는,
    상기 미리 정의된 말뭉치를 기초로하여 상기 발화 의도 및 이와 선후관계에 존재하는 발화 의도의 분포 상태를 파악하여 발화 의도간 유사도를 계산하는 것을 특징으로 하는 대화 관리 시스템.
  6. 제 1 항에 있어서, 상기 계산부는,
    상기 미리 정의된 말뭉치를 기초로하여 상기 발화 의도 및 이와 선후관계에 존재하는 모든 발화 의도를 조합하여 조합한 발화 의도 쌍에 대한 상대적 거리를 계산하는 것을 특징으로 하는 대화 관리 시스템.
  7. 제 1 항에 있어서,
    외국어 교육 요소들에 해당하는 교육 요소 평가 점수를 계산하는 교육요소 적용부를 더 포함하는 것을 특징으로 하는 대화 관리 시스템.
  8. 제 1 항에 있어서,
    상기 대화 흐름간 유사도, 발화 의도 평가 점수 및 교육 요소 평가 점수를 이용하여 최종 점수를 계산하는 최종 점수 계산부를 더 포함하는 것을 특징으로 하는 대화 관리 시스템.
  9. 제 1 항에 있어서,
    최종 점수를 기초로 하여 예상 발화 의도 순위를 출력하는 순위 출력부를 더 포함하는 것을 특징으로 하는 대화 관리 시스템.
  10. 미리 정의된 말뭉치에 포함된 복수개의 발화 의도들 중 적어도 하나의 발화 의도 및 이와 선후관계에 존재하는 발화 의도를 이용하여 발화 의도의 중요성, 발화 의도간 유사도 및 발화 의도간 상대적 거리를 계산하는 제 1 계산 단계;
    상기 발화 의도간 중요도 및 유사도를 이용하여 상기 미리 정의된 말뭉치로부터 획득된 대화 흐름과 현재까지 사용자와 교육 장치간 대화 흐름을 비교하고, 상기 비교 결과에 따라 대화 흐름간 유사도를 계산하는 유사도 계산 단계; 및
    상기 발화 의도간 상대적 거리에 따라 사용자 발화를 평가하여 발화 의도 평가 점수를 계산하는 발화 의도 평가 점수 계산 단계를 포함하는 것을 특징으로 하는 대화 관리 방법.
  11. 제 10 항에 있어서, 상기 유사도 계산 단계는,
    상기 발화 의도간 삽입, 삭제 및 교체중 적어도 하나의 동작이 실행될 시 발생하는 비용에 상기 발화 의도간 중요도를 적용하여 대화 흐름간 유사도를 계산하는 것을 특징으로 하는 대화 관리 방법.
  12. 제 10 항에 있어서, 상기 발화 의도 평가 점수 계산 단계는,
    상기 평가 점수가 미리 결정된 임계값보다 작은 경우 사용자 발화가 잘못되었다고 판단하고 이를 사용자에게 피드백하는 것을 특징으로 하는 대화 관리 방법.
  13. 제 10 항에 있어서, 상기 발화 의도 평가 점수 계산 단계는,
    상기 사용자 발화 및 현재까지 대화가 진행되면서 발생하였던 발화의 조합 를 조합하여 조합한 쌍에 대한 상대적 거리를 계산하고, 상기 계산된 상대적 거리에 따라 발화 의도 평가 점수를 계산하는 것을 특징으로 하는 대화 관리 방법.
  14. 제 10 항에 있어서, 상기 제 1 계산 단계는,
    상기 미리 정의된 말뭉치를 기초로하여 상기 발화 의도 및 이와 선후관계에 존재하는 발화 의도의 분포 상태를 파악하여 발화 의도간 유사도를 계산하는 것을 특징으로 하는 대화 관리 방법.
  15. 제 10 항에 있어서, 상기 제 1 계산 단계는,
    상기 미리 정의된 말뭉치를 기초로하여 상기 발화 의도 및 이와 선후관계에 존재하는 모든 발화 의도를 조합하여 조합한 발화 의도 쌍에 대한 상대적 거리를 계산하는 것을 특징으로 하는 대화 관리 방법.
  16. 제 10 항에 있어서,
    외국어 교육 요소들에 해당하는 교육 요소 평가 점수를 계산하는 단계를 더 포함하는 것을 특징으로 하는 대화 관리 방법.
  17. 제 10 항에 있어서,
    상기 대화 흐름간 유사도, 발화 의도 평가 점수 및 교육 요소 평가 점수를 이용하여 최종 점수를 계산하는 단계를 더 포함하는 것을 특징으로 하는 대화 관리 방법.
  18. 제 10 항에 있어서,
    최종 점수를 기초로 하여 예상 발화 의도 순위를 출력하는 단계를 더 포함하는 것을 특징으로 하는 대화 관리 방법.
KR1020110016755A 2011-02-24 2011-02-24 대화 관리 방법 및 이를 실행하는 시스템 KR101178310B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020110016755A KR101178310B1 (ko) 2011-02-24 2011-02-24 대화 관리 방법 및 이를 실행하는 시스템
PCT/KR2011/007906 WO2012115324A1 (ko) 2011-02-24 2011-10-21 대화 관리 방법 및 이를 실행하는 장치
EP11859398.7A EP2680250A4 (en) 2011-02-24 2011-10-21 CONVERSATION MANAGEMENT FOR METHOD AND DEVICE FOR ITS EXECUTION
CN201180067701.1A CN103380449B (zh) 2011-02-24 2011-10-21 对话管理方法和执行该方法的装置
US13/985,556 US20130325468A1 (en) 2011-02-24 2011-10-21 Conversation management method, and device for executing same
JP2013555350A JP5810176B2 (ja) 2011-02-24 2011-10-21 対話管理方法及びこれを実行する装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110016755A KR101178310B1 (ko) 2011-02-24 2011-02-24 대화 관리 방법 및 이를 실행하는 시스템

Publications (1)

Publication Number Publication Date
KR101178310B1 true KR101178310B1 (ko) 2012-08-29

Family

ID=46721075

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110016755A KR101178310B1 (ko) 2011-02-24 2011-02-24 대화 관리 방법 및 이를 실행하는 시스템

Country Status (6)

Country Link
US (1) US20130325468A1 (ko)
EP (1) EP2680250A4 (ko)
JP (1) JP5810176B2 (ko)
KR (1) KR101178310B1 (ko)
CN (1) CN103380449B (ko)
WO (1) WO2012115324A1 (ko)

Cited By (121)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105190607A (zh) * 2013-03-15 2015-12-23 苹果公司 通过智能数字助理的用户培训
US9986419B2 (en) 2014-09-30 2018-05-29 Apple Inc. Social reminders
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10049675B2 (en) 2010-02-25 2018-08-14 Apple Inc. User profiling for voice input processing
US10079014B2 (en) 2012-06-08 2018-09-18 Apple Inc. Name recognition system
US10083690B2 (en) 2014-05-30 2018-09-25 Apple Inc. Better resolution when referencing to concepts
US10108612B2 (en) 2008-07-31 2018-10-23 Apple Inc. Mobile device having human language translation capability with positional feedback
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
KR20190059074A (ko) 2017-11-22 2019-05-30 주식회사 이르테크 화행 제어를 이용한 대화 처리 시스템 및 그 동작 방법
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10311871B2 (en) 2015-03-08 2019-06-04 Apple Inc. Competing devices responding to voice triggers
US10332518B2 (en) 2017-05-09 2019-06-25 Apple Inc. User interface for correcting recognition errors
US10354652B2 (en) 2015-12-02 2019-07-16 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10356243B2 (en) 2015-06-05 2019-07-16 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10381016B2 (en) 2008-01-03 2019-08-13 Apple Inc. Methods and apparatus for altering audio output signals
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10403283B1 (en) 2018-06-01 2019-09-03 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10410637B2 (en) 2017-05-12 2019-09-10 Apple Inc. User-specific acoustic models
US10417405B2 (en) 2011-03-21 2019-09-17 Apple Inc. Device access using voice authentication
US10417344B2 (en) 2014-05-30 2019-09-17 Apple Inc. Exemplar-based natural language processing
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10431204B2 (en) 2014-09-11 2019-10-01 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10438595B2 (en) 2014-09-30 2019-10-08 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10453443B2 (en) 2014-09-30 2019-10-22 Apple Inc. Providing an indication of the suitability of speech recognition
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10482874B2 (en) 2017-05-15 2019-11-19 Apple Inc. Hierarchical belief states for digital assistants
US10497365B2 (en) 2014-05-30 2019-12-03 Apple Inc. Multi-command single utterance input method
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10529332B2 (en) 2015-03-08 2020-01-07 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US10580409B2 (en) 2016-06-11 2020-03-03 Apple Inc. Application integration with a digital assistant
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10643611B2 (en) 2008-10-02 2020-05-05 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10657961B2 (en) 2013-06-08 2020-05-19 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10684703B2 (en) 2018-06-01 2020-06-16 Apple Inc. Attention aware virtual assistant dismissal
US10699717B2 (en) 2014-05-30 2020-06-30 Apple Inc. Intelligent assistant for home automation
US10714117B2 (en) 2013-02-07 2020-07-14 Apple Inc. Voice trigger for a digital assistant
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733993B2 (en) 2016-06-10 2020-08-04 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10741185B2 (en) 2010-01-18 2020-08-11 Apple Inc. Intelligent automated assistant
US10748546B2 (en) 2017-05-16 2020-08-18 Apple Inc. Digital assistant services based on device capabilities
US10755703B2 (en) 2017-05-11 2020-08-25 Apple Inc. Offline personal assistant
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10769385B2 (en) 2013-06-09 2020-09-08 Apple Inc. System and method for inferring user intent from speech inputs
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10791176B2 (en) 2017-05-12 2020-09-29 Apple Inc. Synchronization and task delegation of a digital assistant
US10789945B2 (en) 2017-05-12 2020-09-29 Apple Inc. Low-latency intelligent automated assistant
US10810274B2 (en) 2017-05-15 2020-10-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US10904611B2 (en) 2014-06-30 2021-01-26 Apple Inc. Intelligent automated assistant for TV user interactions
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10942703B2 (en) 2015-12-23 2021-03-09 Apple Inc. Proactive assistance based on dialog communication between devices
US10942702B2 (en) 2016-06-11 2021-03-09 Apple Inc. Intelligent device arbitration and control
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US11010127B2 (en) 2015-06-29 2021-05-18 Apple Inc. Virtual assistant for media playback
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US11023513B2 (en) 2007-12-20 2021-06-01 Apple Inc. Method and apparatus for searching using an active ontology
US11048473B2 (en) 2013-06-09 2021-06-29 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US11069336B2 (en) 2012-03-02 2021-07-20 Apple Inc. Systems and methods for name pronunciation
US11069347B2 (en) 2016-06-08 2021-07-20 Apple Inc. Intelligent automated assistant for media exploration
US11070949B2 (en) 2015-05-27 2021-07-20 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display
US11120372B2 (en) 2011-06-03 2021-09-14 Apple Inc. Performing actions associated with task items that represent tasks to perform
US11126400B2 (en) 2015-09-08 2021-09-21 Apple Inc. Zero latency digital assistant
US11127397B2 (en) 2015-05-27 2021-09-21 Apple Inc. Device voice control
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US11231904B2 (en) 2015-03-06 2022-01-25 Apple Inc. Reducing response latency of intelligent automated assistants
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11269678B2 (en) 2012-05-15 2022-03-08 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11314370B2 (en) 2013-12-06 2022-04-26 Apple Inc. Method for extracting salient dialog usage from live data
US11350253B2 (en) 2011-06-03 2022-05-31 Apple Inc. Active transport based notifications
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11388291B2 (en) 2013-03-14 2022-07-12 Apple Inc. System and method for processing voicemail
US11423886B2 (en) 2010-01-18 2022-08-23 Apple Inc. Task flow identification based on user intent
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11468282B2 (en) 2015-05-15 2022-10-11 Apple Inc. Virtual assistant in a communication session
US11467802B2 (en) 2017-05-11 2022-10-11 Apple Inc. Maintaining privacy of personal information
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11495218B2 (en) 2018-06-01 2022-11-08 Apple Inc. Virtual assistant operation in multi-device environments
US11500672B2 (en) 2015-09-08 2022-11-15 Apple Inc. Distributed personal assistant
US11526368B2 (en) 2015-11-06 2022-12-13 Apple Inc. Intelligent automated assistant in a messaging environment
US11532306B2 (en) 2017-05-16 2022-12-20 Apple Inc. Detecting a trigger of a digital assistant
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11657813B2 (en) 2019-05-31 2023-05-23 Apple Inc. Voice identification in digital assistant systems
US11671920B2 (en) 2007-04-03 2023-06-06 Apple Inc. Method and system for operating a multifunction portable electronic device using voice-activation
US11696060B2 (en) 2020-07-21 2023-07-04 Apple Inc. User identification using headphones
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11765209B2 (en) 2020-05-11 2023-09-19 Apple Inc. Digital assistant hardware abstraction
US11790914B2 (en) 2019-06-01 2023-10-17 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11798547B2 (en) 2013-03-15 2023-10-24 Apple Inc. Voice activated device for use with a voice-based digital assistant
US11809483B2 (en) 2015-09-08 2023-11-07 Apple Inc. Intelligent automated assistant for media search and playback
US11838734B2 (en) 2020-07-20 2023-12-05 Apple Inc. Multi-device audio adjustment coordination
US11853536B2 (en) 2015-09-08 2023-12-26 Apple Inc. Intelligent automated assistant in a media environment
US11914848B2 (en) 2020-05-11 2024-02-27 Apple Inc. Providing relevant data items based on context
WO2024043729A1 (ko) * 2022-08-26 2024-02-29 삼성전자주식회사 전자 장치 및 전자 장치의 사용자에 대한 응답 처리 방법
US11928604B2 (en) 2005-09-08 2024-03-12 Apple Inc. Method and apparatus for building an intelligent automated assistant

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140295400A1 (en) * 2013-03-27 2014-10-02 Educational Testing Service Systems and Methods for Assessing Conversation Aptitude
JP6310150B2 (ja) * 2015-03-20 2018-04-11 株式会社東芝 意図理解装置、方法およびプログラム
JP6334815B2 (ja) * 2015-03-20 2018-05-30 株式会社東芝 学習装置、方法、プログラムおよび音声対話システム
WO2019098803A1 (en) * 2017-11-20 2019-05-23 Lg Electronics Inc. Device for providing toolkit for agent developer
US10706086B1 (en) * 2018-03-12 2020-07-07 Amazon Technologies, Inc. Collaborative-filtering based user simulation for dialog systems
JP7135887B2 (ja) * 2019-01-24 2022-09-13 トヨタ自動車株式会社 促し発話装置、促し発話方法及びプログラム
CN111666384A (zh) * 2019-03-05 2020-09-15 京东数字科技控股有限公司 面向任务式对话系统意图识别的语料库生成方法和装置
CN112017660B (zh) * 2020-10-30 2021-01-12 北京淇瑀信息科技有限公司 一种智能语音机器人的对话策略构建方法、装置及系统
US11115353B1 (en) 2021-03-09 2021-09-07 Drift.com, Inc. Conversational bot interaction with utterance ranking

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH103478A (ja) 1996-06-14 1998-01-06 Nippon Telegr & Teleph Corp <Ntt> 概念の類似性判別方法
KR100772660B1 (ko) 2006-04-14 2007-11-01 학교법인 포항공과대학교 대화 관리 장치 및 그를 위한 대화 예제 기반의 대화모델링기법을 통한 대화 관리 방법

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2673831B2 (ja) * 1989-07-13 1997-11-05 エヌ・ティ・ティ・データ通信株式会社 会話マナー教育システム
JPH06332939A (ja) * 1993-05-21 1994-12-02 Matsushita Electric Ind Co Ltd 単語間の概念的距離計算装置
JP3249743B2 (ja) * 1996-05-29 2002-01-21 松下電器産業株式会社 文書検索システム
US5836771A (en) * 1996-12-02 1998-11-17 Ho; Chi Fai Learning method and system based on questioning
JP4908495B2 (ja) * 2005-04-05 2012-04-04 エーアイ リミテッド 意味論的知識の評価と指導と習得とに関するシステムおよび方法
JP4826275B2 (ja) * 2006-02-16 2011-11-30 株式会社豊田中央研究所 応答生成装置、方法及びプログラム
CN101957826A (zh) * 2009-07-15 2011-01-26 财团法人工业技术研究院 教材自动扩充方法与相关学习教材扩充系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH103478A (ja) 1996-06-14 1998-01-06 Nippon Telegr & Teleph Corp <Ntt> 概念の類似性判別方法
KR100772660B1 (ko) 2006-04-14 2007-11-01 학교법인 포항공과대학교 대화 관리 장치 및 그를 위한 대화 예제 기반의 대화모델링기법을 통한 대화 관리 방법

Cited By (192)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11928604B2 (en) 2005-09-08 2024-03-12 Apple Inc. Method and apparatus for building an intelligent automated assistant
US11671920B2 (en) 2007-04-03 2023-06-06 Apple Inc. Method and system for operating a multifunction portable electronic device using voice-activation
US11023513B2 (en) 2007-12-20 2021-06-01 Apple Inc. Method and apparatus for searching using an active ontology
US10381016B2 (en) 2008-01-03 2019-08-13 Apple Inc. Methods and apparatus for altering audio output signals
US10108612B2 (en) 2008-07-31 2018-10-23 Apple Inc. Mobile device having human language translation capability with positional feedback
US10643611B2 (en) 2008-10-02 2020-05-05 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11900936B2 (en) 2008-10-02 2024-02-13 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11348582B2 (en) 2008-10-02 2022-05-31 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11423886B2 (en) 2010-01-18 2022-08-23 Apple Inc. Task flow identification based on user intent
US10741185B2 (en) 2010-01-18 2020-08-11 Apple Inc. Intelligent automated assistant
US10049675B2 (en) 2010-02-25 2018-08-14 Apple Inc. User profiling for voice input processing
US10692504B2 (en) 2010-02-25 2020-06-23 Apple Inc. User profiling for voice input processing
US10417405B2 (en) 2011-03-21 2019-09-17 Apple Inc. Device access using voice authentication
US11350253B2 (en) 2011-06-03 2022-05-31 Apple Inc. Active transport based notifications
US11120372B2 (en) 2011-06-03 2021-09-14 Apple Inc. Performing actions associated with task items that represent tasks to perform
US11069336B2 (en) 2012-03-02 2021-07-20 Apple Inc. Systems and methods for name pronunciation
US11321116B2 (en) 2012-05-15 2022-05-03 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11269678B2 (en) 2012-05-15 2022-03-08 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US10079014B2 (en) 2012-06-08 2018-09-18 Apple Inc. Name recognition system
US11636869B2 (en) 2013-02-07 2023-04-25 Apple Inc. Voice trigger for a digital assistant
US10978090B2 (en) 2013-02-07 2021-04-13 Apple Inc. Voice trigger for a digital assistant
US10714117B2 (en) 2013-02-07 2020-07-14 Apple Inc. Voice trigger for a digital assistant
US11557310B2 (en) 2013-02-07 2023-01-17 Apple Inc. Voice trigger for a digital assistant
US11862186B2 (en) 2013-02-07 2024-01-02 Apple Inc. Voice trigger for a digital assistant
US11388291B2 (en) 2013-03-14 2022-07-12 Apple Inc. System and method for processing voicemail
US11151899B2 (en) 2013-03-15 2021-10-19 Apple Inc. User training by intelligent digital assistant
CN105190607B (zh) * 2013-03-15 2018-11-30 苹果公司 通过智能数字助理的用户培训
CN105190607A (zh) * 2013-03-15 2015-12-23 苹果公司 通过智能数字助理的用户培训
US11798547B2 (en) 2013-03-15 2023-10-24 Apple Inc. Voice activated device for use with a voice-based digital assistant
US10657961B2 (en) 2013-06-08 2020-05-19 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US11048473B2 (en) 2013-06-09 2021-06-29 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10769385B2 (en) 2013-06-09 2020-09-08 Apple Inc. System and method for inferring user intent from speech inputs
US11727219B2 (en) 2013-06-09 2023-08-15 Apple Inc. System and method for inferring user intent from speech inputs
US11314370B2 (en) 2013-12-06 2022-04-26 Apple Inc. Method for extracting salient dialog usage from live data
US11257504B2 (en) 2014-05-30 2022-02-22 Apple Inc. Intelligent assistant for home automation
US11810562B2 (en) 2014-05-30 2023-11-07 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10878809B2 (en) 2014-05-30 2020-12-29 Apple Inc. Multi-command single utterance input method
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US11699448B2 (en) 2014-05-30 2023-07-11 Apple Inc. Intelligent assistant for home automation
US10497365B2 (en) 2014-05-30 2019-12-03 Apple Inc. Multi-command single utterance input method
US10714095B2 (en) 2014-05-30 2020-07-14 Apple Inc. Intelligent assistant for home automation
US10657966B2 (en) 2014-05-30 2020-05-19 Apple Inc. Better resolution when referencing to concepts
US10417344B2 (en) 2014-05-30 2019-09-17 Apple Inc. Exemplar-based natural language processing
US10083690B2 (en) 2014-05-30 2018-09-25 Apple Inc. Better resolution when referencing to concepts
US10699717B2 (en) 2014-05-30 2020-06-30 Apple Inc. Intelligent assistant for home automation
US11670289B2 (en) 2014-05-30 2023-06-06 Apple Inc. Multi-command single utterance input method
US11516537B2 (en) 2014-06-30 2022-11-29 Apple Inc. Intelligent automated assistant for TV user interactions
US10904611B2 (en) 2014-06-30 2021-01-26 Apple Inc. Intelligent automated assistant for TV user interactions
US11838579B2 (en) 2014-06-30 2023-12-05 Apple Inc. Intelligent automated assistant for TV user interactions
US10431204B2 (en) 2014-09-11 2019-10-01 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10438595B2 (en) 2014-09-30 2019-10-08 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10453443B2 (en) 2014-09-30 2019-10-22 Apple Inc. Providing an indication of the suitability of speech recognition
US9986419B2 (en) 2014-09-30 2018-05-29 Apple Inc. Social reminders
US10390213B2 (en) 2014-09-30 2019-08-20 Apple Inc. Social reminders
US11231904B2 (en) 2015-03-06 2022-01-25 Apple Inc. Reducing response latency of intelligent automated assistants
US11842734B2 (en) 2015-03-08 2023-12-12 Apple Inc. Virtual assistant activation
US10529332B2 (en) 2015-03-08 2020-01-07 Apple Inc. Virtual assistant activation
US10930282B2 (en) 2015-03-08 2021-02-23 Apple Inc. Competing devices responding to voice triggers
US11087759B2 (en) 2015-03-08 2021-08-10 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US10311871B2 (en) 2015-03-08 2019-06-04 Apple Inc. Competing devices responding to voice triggers
US11468282B2 (en) 2015-05-15 2022-10-11 Apple Inc. Virtual assistant in a communication session
US11070949B2 (en) 2015-05-27 2021-07-20 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display
US11127397B2 (en) 2015-05-27 2021-09-21 Apple Inc. Device voice control
US10681212B2 (en) 2015-06-05 2020-06-09 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10356243B2 (en) 2015-06-05 2019-07-16 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US11010127B2 (en) 2015-06-29 2021-05-18 Apple Inc. Virtual assistant for media playback
US11947873B2 (en) 2015-06-29 2024-04-02 Apple Inc. Virtual assistant for media playback
US11550542B2 (en) 2015-09-08 2023-01-10 Apple Inc. Zero latency digital assistant
US11500672B2 (en) 2015-09-08 2022-11-15 Apple Inc. Distributed personal assistant
US11954405B2 (en) 2015-09-08 2024-04-09 Apple Inc. Zero latency digital assistant
US11853536B2 (en) 2015-09-08 2023-12-26 Apple Inc. Intelligent automated assistant in a media environment
US11126400B2 (en) 2015-09-08 2021-09-21 Apple Inc. Zero latency digital assistant
US11809483B2 (en) 2015-09-08 2023-11-07 Apple Inc. Intelligent automated assistant for media search and playback
US11526368B2 (en) 2015-11-06 2022-12-13 Apple Inc. Intelligent automated assistant in a messaging environment
US11809886B2 (en) 2015-11-06 2023-11-07 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US11886805B2 (en) 2015-11-09 2024-01-30 Apple Inc. Unconventional virtual assistant interactions
US10354652B2 (en) 2015-12-02 2019-07-16 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10942703B2 (en) 2015-12-23 2021-03-09 Apple Inc. Proactive assistance based on dialog communication between devices
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US11069347B2 (en) 2016-06-08 2021-07-20 Apple Inc. Intelligent automated assistant for media exploration
US11657820B2 (en) 2016-06-10 2023-05-23 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US11037565B2 (en) 2016-06-10 2021-06-15 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10733993B2 (en) 2016-06-10 2020-08-04 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US11152002B2 (en) 2016-06-11 2021-10-19 Apple Inc. Application integration with a digital assistant
US10580409B2 (en) 2016-06-11 2020-03-03 Apple Inc. Application integration with a digital assistant
US10942702B2 (en) 2016-06-11 2021-03-09 Apple Inc. Intelligent device arbitration and control
US11749275B2 (en) 2016-06-11 2023-09-05 Apple Inc. Application integration with a digital assistant
US11809783B2 (en) 2016-06-11 2023-11-07 Apple Inc. Intelligent device arbitration and control
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10553215B2 (en) 2016-09-23 2020-02-04 Apple Inc. Intelligent automated assistant
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US11656884B2 (en) 2017-01-09 2023-05-23 Apple Inc. Application integration with a digital assistant
US10332518B2 (en) 2017-05-09 2019-06-25 Apple Inc. User interface for correcting recognition errors
US10741181B2 (en) 2017-05-09 2020-08-11 Apple Inc. User interface for correcting recognition errors
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10755703B2 (en) 2017-05-11 2020-08-25 Apple Inc. Offline personal assistant
US11467802B2 (en) 2017-05-11 2022-10-11 Apple Inc. Maintaining privacy of personal information
US10847142B2 (en) 2017-05-11 2020-11-24 Apple Inc. Maintaining privacy of personal information
US11599331B2 (en) 2017-05-11 2023-03-07 Apple Inc. Maintaining privacy of personal information
US10789945B2 (en) 2017-05-12 2020-09-29 Apple Inc. Low-latency intelligent automated assistant
US11405466B2 (en) 2017-05-12 2022-08-02 Apple Inc. Synchronization and task delegation of a digital assistant
US11862151B2 (en) 2017-05-12 2024-01-02 Apple Inc. Low-latency intelligent automated assistant
US10791176B2 (en) 2017-05-12 2020-09-29 Apple Inc. Synchronization and task delegation of a digital assistant
US11580990B2 (en) 2017-05-12 2023-02-14 Apple Inc. User-specific acoustic models
US11538469B2 (en) 2017-05-12 2022-12-27 Apple Inc. Low-latency intelligent automated assistant
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US11380310B2 (en) 2017-05-12 2022-07-05 Apple Inc. Low-latency intelligent automated assistant
US10410637B2 (en) 2017-05-12 2019-09-10 Apple Inc. User-specific acoustic models
US10810274B2 (en) 2017-05-15 2020-10-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10482874B2 (en) 2017-05-15 2019-11-19 Apple Inc. Hierarchical belief states for digital assistants
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10748546B2 (en) 2017-05-16 2020-08-18 Apple Inc. Digital assistant services based on device capabilities
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US11675829B2 (en) 2017-05-16 2023-06-13 Apple Inc. Intelligent automated assistant for media exploration
US11217255B2 (en) 2017-05-16 2022-01-04 Apple Inc. Far-field extension for digital assistant services
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US11532306B2 (en) 2017-05-16 2022-12-20 Apple Inc. Detecting a trigger of a digital assistant
US10909171B2 (en) 2017-05-16 2021-02-02 Apple Inc. Intelligent automated assistant for media exploration
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
KR20190059074A (ko) 2017-11-22 2019-05-30 주식회사 이르테크 화행 제어를 이용한 대화 처리 시스템 및 그 동작 방법
US11081110B2 (en) 2017-11-22 2021-08-03 Iir Tech Inc. Dialogue processing system using speech act control and operation method thereof
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US11710482B2 (en) 2018-03-26 2023-07-25 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11169616B2 (en) 2018-05-07 2021-11-09 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11907436B2 (en) 2018-05-07 2024-02-20 Apple Inc. Raise to speak
US11487364B2 (en) 2018-05-07 2022-11-01 Apple Inc. Raise to speak
US11900923B2 (en) 2018-05-07 2024-02-13 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11854539B2 (en) 2018-05-07 2023-12-26 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US11009970B2 (en) 2018-06-01 2021-05-18 Apple Inc. Attention aware virtual assistant dismissal
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US10720160B2 (en) 2018-06-01 2020-07-21 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10984798B2 (en) 2018-06-01 2021-04-20 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10684703B2 (en) 2018-06-01 2020-06-16 Apple Inc. Attention aware virtual assistant dismissal
US11431642B2 (en) 2018-06-01 2022-08-30 Apple Inc. Variable latency device coordination
US10403283B1 (en) 2018-06-01 2019-09-03 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11630525B2 (en) 2018-06-01 2023-04-18 Apple Inc. Attention aware virtual assistant dismissal
US11360577B2 (en) 2018-06-01 2022-06-14 Apple Inc. Attention aware virtual assistant dismissal
US11495218B2 (en) 2018-06-01 2022-11-08 Apple Inc. Virtual assistant operation in multi-device environments
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10944859B2 (en) 2018-06-03 2021-03-09 Apple Inc. Accelerated task performance
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11893992B2 (en) 2018-09-28 2024-02-06 Apple Inc. Multi-modal inputs for voice commands
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11783815B2 (en) 2019-03-18 2023-10-10 Apple Inc. Multimodality in digital assistant systems
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11675491B2 (en) 2019-05-06 2023-06-13 Apple Inc. User configurable task triggers
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11705130B2 (en) 2019-05-06 2023-07-18 Apple Inc. Spoken notifications
US11888791B2 (en) 2019-05-21 2024-01-30 Apple Inc. Providing message response suggestions
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11657813B2 (en) 2019-05-31 2023-05-23 Apple Inc. Voice identification in digital assistant systems
US11360739B2 (en) 2019-05-31 2022-06-14 Apple Inc. User activity shortcut suggestions
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11790914B2 (en) 2019-06-01 2023-10-17 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11765209B2 (en) 2020-05-11 2023-09-19 Apple Inc. Digital assistant hardware abstraction
US11914848B2 (en) 2020-05-11 2024-02-27 Apple Inc. Providing relevant data items based on context
US11924254B2 (en) 2020-05-11 2024-03-05 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11838734B2 (en) 2020-07-20 2023-12-05 Apple Inc. Multi-device audio adjustment coordination
US11750962B2 (en) 2020-07-21 2023-09-05 Apple Inc. User identification using headphones
US11696060B2 (en) 2020-07-21 2023-07-04 Apple Inc. User identification using headphones
WO2024043729A1 (ko) * 2022-08-26 2024-02-29 삼성전자주식회사 전자 장치 및 전자 장치의 사용자에 대한 응답 처리 방법

Also Published As

Publication number Publication date
EP2680250A4 (en) 2016-03-09
JP5810176B2 (ja) 2015-11-11
US20130325468A1 (en) 2013-12-05
JP2014508968A (ja) 2014-04-10
CN103380449B (zh) 2015-06-03
CN103380449A (zh) 2013-10-30
EP2680250A1 (en) 2014-01-01
WO2012115324A1 (ko) 2012-08-30

Similar Documents

Publication Publication Date Title
KR101178310B1 (ko) 대화 관리 방법 및 이를 실행하는 시스템
KR102302137B1 (ko) 외국어 학습장치 및 이를 이용하는 외국어 학습서비스 제공방법
Acosta et al. Achieving rapport with turn-by-turn, user-responsive emotional coloring
WO2013172531A1 (ko) 어학 학습 시스템 및 학습 방법
KR101037247B1 (ko) 외국어 회화 연습 방법 및 장치와 이것의 빠른 개발과 검증을 돕는 학습자 시뮬레이션 방법과 장치
US20140297277A1 (en) Systems and Methods for Automated Scoring of Spoken Language in Multiparty Conversations
Ramanarayanan et al. Human and Automated Scoring of Fluency, Pronunciation and Intonation During Human-Machine Spoken Dialog Interactions.
KR20210048730A (ko) 언어교육 서비스 시스템 및 그 제공방법
Skantze Galatea: A discourse modeller supporting concept-level error handling in spoken dialogue systems
Yurievna et al. RuTOC: A corpus of online lessons in Russian as a foreign language
KR102410110B1 (ko) 한국어 학습 서비스 제공 방법
JP7268849B2 (ja) 記述式試験採点プログラム及び記述式試験採点方法
Litman et al. Evaluating a spoken dialogue system that detects and adapts to user affective states
Saeki et al. Analysis of multimodal features for speaking proficiency scoring in an interview dialogue
Skidmore Incremental disfluency detection for spoken learner english
Ureta et al. At home with Alexa: a tale of two conversational agents
KR20140131307A (ko) 어학 학습 시스템 및 학습 방법
Wang et al. Predicting gradation of L2 English mispronunciations using crowdsourced ratings and phonological rules
Sinclair et al. Finding the zone of proximal development: Student-tutor second language dialogue interactions
Noh et al. An example-based approach to ranking multiple dialog states for flexible dialog management
Götze et al. User simulation for the evaluation of bus information systems
Filighera et al. Towards A Vocalization Feedback Pipeline for Language Learners
Meguro et al. Wizard of oz evaluation of listening-oriented dialogue control using pomdp
Kovacevic The relationship between lexical complexity measures and language learning beliefs
CN108959464A (zh) 含有助词的学习方法及系统

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150609

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20161005

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee