KR102017544B1 - Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium - Google Patents

Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium Download PDF

Info

Publication number
KR102017544B1
KR102017544B1 KR1020180037857A KR20180037857A KR102017544B1 KR 102017544 B1 KR102017544 B1 KR 102017544B1 KR 1020180037857 A KR1020180037857 A KR 1020180037857A KR 20180037857 A KR20180037857 A KR 20180037857A KR 102017544 B1 KR102017544 B1 KR 102017544B1
Authority
KR
South Korea
Prior art keywords
user
messenger
message
disclosure
friend
Prior art date
Application number
KR1020180037857A
Other languages
Korean (ko)
Inventor
설재호
Original Assignee
주식회사 머니브레인
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 머니브레인 filed Critical 주식회사 머니브레인
Priority to KR1020180037857A priority Critical patent/KR102017544B1/en
Application granted granted Critical
Publication of KR102017544B1 publication Critical patent/KR102017544B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00Arrangements for user-to-user messaging in packet-switching networks, e.g. e-mail or instant messages
    • H04L51/36Unified messaging, e.g. interactions between instant messaging, e-mail or other types of messages such as converged IP messaging [CPM]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00Arrangements for user-to-user messaging in packet-switching networks, e.g. e-mail or instant messages
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00Arrangements for user-to-user messaging in packet-switching networks, e.g. e-mail or instant messages
    • H04L51/06Message adaptation based on network or terminal capabilities
    • H04L51/066Message adaptation based on network or terminal capabilities with adaptation of format

Abstract

Provided is a method of transmitting and receiving various types of messages between users who use a plurality of messengers regardless of messenger platforms, provided by an interactive AI agent system. The disclosed method comprises the steps of: generating a relation database configured to store a relation between a friend list of a user with respect to each of a plurality of messengers used by the user and a friend list of the user with respect to each of the plurality of messengers; generating a conversion database configured to store a conversion method for a type of a message with respect to each of the plurality of messenger platforms; receiving, from a terminal of the user, a message of the user via a first chat room including a TossBot friend and at least one first friend included in a friend list of a first messenger on the first messenger among the plurality of messengers; determining, based on the relation database, a second friend related to the first friend, using a second messenger among the plurality of messengers; determining a type of a messenger of the user and converting the message into a converted message in a form suitable to the second messenger based on the conversion database; and allowing the TossBot friend to deliver the converted message via a second chat room including the TossBot friend, the user, and the second friend on the second messenger.

Description

메신저 플랫폼에 관계없이 복수의 메신저를 이용하는 사용자간 다양한 형식의 채팅 서비스를 제공하는 대화형 AI 에이전트 시스템, 방법 및 컴퓨터 판독가능 기록 매체{INTERACTIVE AI AGENT SYSTEM AND METHOD FOR PROVIDING SEAMLESS CHATTING SERVICE AMONG USERS USING MULTIPLE MESSANGER PROGRAM, COMPUTER READABLE RECORDING MEDIUM}INTERACTIVE AI AGENT SYSTEM AND METHOD FOR PROVIDING SEAMLESS CHATTING SERVICE AMONG USERS USING MULTIPLE MESSANGER PROGRAM, COMPUTER READABLE RECORDING MEDIUM}

본 개시는, 대화형 AI 에이전트 시스템에 의한 복수의 메신저를 이용하는 사용자간 다양한 형식의 채팅 서비스를 제공하는 방법에 관한 것이며, 보다 구체적으로는 대화형 AI 에이전트 시스템이 복수의 메신저를 이용하는 사용자간 온라인 대화 세션을 모니터링하고, 사용자로부터의 별도의 명시적이고 구체적인 요청 없이, 복수의 메신저를 이용하는 사용자에게 다양한 형식의 채팅 서비스를 제공하는 기술에 관한 것이다.The present disclosure relates to a method of providing a chat service of various types between users using a plurality of messengers by an interactive AI agent system, and more specifically, to an online conversation between users using a plurality of messengers by the interactive AI agent system. The present invention relates to a technology for monitoring a session and providing various types of chat services to a user using a plurality of messengers without any explicit and specific request from the user.

근래, 인공지능 분야, 특히 자연어 이해 분야의 기술 발전에 따라, 전통적인 기계 중심의 명령 입출력 방식에 따른 기계 조작에서 벗어나, 사용자로 하여금, 보다 사람 친화적인 방식, 예컨대 음성 및/또는 텍스트 형태의 자연어를 매개로 한 대화 방식으로 기계를 조작하고 기계로부터 원하는 서비스를 얻을 수 있도록 하는 대화형 AI 에이전트 시스템(예컨대, 챗봇)의 개발 및 활용이 점차 늘어나고 있다. In recent years, with advances in the field of artificial intelligence, in particular in the field of understanding natural language, the user has moved away from the operation of the traditional machine-oriented command input / output schemes, thereby allowing users to use natural language in a more human-friendly manner, such as speech and / or text. Increasingly, the development and use of interactive AI agent systems (e.g., chatbots), which enable the operator to operate the machine in a mediated manner and obtain the desired service from the machine.

스마트폰의 보급 확대에 따라 각종 온라인 대화 서비스(예컨대, 인스턴트 메신저 서비스)의 사용 또한 폭발적으로 증가하여, 이제 사람들의 생활 속 대화의 상당 부분이 온라인 대화를 통해 이루어지고 있다. 온라인 대화를 통해 사람들은 멀리 떨어져 있는 하나 또는 다수의 상대방과 실시간으로 다양한 주제의 대화를 주고 받을 수 있다. With the spread of smart phones, the use of various online conversation services (eg, instant messenger services) has explosively increased, and much of the conversations in people's lives are now made through online conversations. Online conversations allow people to exchange conversations on a variety of topics in real time with one or more remote parties.

한편, 사용자들은 선호나 필요에 의해 특정 온라인 대화 서비스를 주로 이용하는 경향이 있는데, 통상적으로 온라인 대화 서비스 간에 호환이 가능한 경우는 매우 드물기 때문에 서로 다른 온라인 대화 서비스를 사용하는 사용자들 간에 온라인 대화를 이용하려는 경우 불편함이 있다. 이에 대해, 한국 특허 출원 제10-2013-0153533호에서는 각각의 메신저의 통신 기능을 추가한 통합 메신저 프로그램을 통해 서로 다른 온라인 대화 서비스 간에 온라인 대화 서비스를 제공하는 방법이 개시되어 있으나, 별도의 통합 메신저 프로그램을 설치하여야 하고, 통합 메신저를 통해서만 대화 내용을 확인할 수 있다는 불편함이 여전히 존재한다. On the other hand, users tend to use a particular online chat service by preference or need. In general, it is rarely compatible between online chat services. Therefore, users who want to use online chat between users who use different online chat services tend to use it. If there is discomfort. In this regard, Korean Patent Application No. 10-2013-0153533 discloses a method for providing an online chat service between different online chat services through an integrated messenger program in which communication functions of each messenger are added, but a separate integrated messenger is disclosed. There is still the inconvenience of having to install the program and confirming the conversation only through the integrated messenger.

특허문헌 1: 한국 특허 출원 제10-2012-0030266호Patent Document 1: Korean Patent Application No. 10-2012-0030266 특허문헌 2: 한국 특허 출원 제10-2013-0153533호Patent Document 2: Korean Patent Application No. 10-2013-0153533

본 발명의 실시예에 따르면 별도의 프로그램 설치 등의 과정 없이 사용자가 사용하는 복수의 온라인 대화 서비스를 통해서 사용자간 온라인 대화 서비스를 제공할 수 있다. According to an embodiment of the present invention, an online chat service between users may be provided through a plurality of online chat services used by a user without a separate program installation process.

본 발명의 실시예에 따르면 복수의 온라인 대화 서비스를 이용하는 경우에도 심리스한 채팅 서비스를 제공할 수 있다. According to an embodiment of the present invention, even when a plurality of online chat services are used, a seamless chat service can be provided.

본 개시의 일 특징에 의하면, 대화형 AI 에이전트 시스템에 의해 제공되는, 메신저 플랫폼에 관계없이 복수의 메신저를 이용하는 사용자간 다양한 형식의 메시지를 송수신하는 방법이 제공된다. 본 개시의 방법은, 사용자가 사용하는 복수의 메신저 각각에 대해 상기 사용자의 친구 목록 및 상기 복수의 메신저 각각의 상기 사용자의 친구 목록 간의 연관관계를 저장하는 관계데이터베이스를 생성하는 단계; 상기 복수의 메신저 플랫폼 각각에 대해 메시지 유형별 변환 방법을 저장하는 변환데이터베이스를 생성하는 단계; 상기 사용자의 단말기로부터, 상기 복수의 메신저 중 하나인 제1 메신저 상에서의, 토스봇 친구와 상기 제1 메신저의 친구 목록에 포함된 적어도 하나의 제1 친구를 포함하는 제1 대화방을 통해 상기 사용자의 메시지를 입력받는 단계; 상기 관계데이터베이스에 기초하여, 상기 복수의 메신저 중 하나인 제2 메신저를 사용하는, 상기 제1 친구와 연관된 제2 친구를 결정하는 단계; 상기 사용자의 메시지의 유형을 결정하고, 상기 변환데이터베이스를 기초로 상기 제2 메신저에 적합한 형식으로 상기 메시지를 전환 메시지로 전환하는 단계; 및 상기 토스봇 친구로 하여금 상기 제2 메신저 상에서의, 상기 토스봇 친구, 상기 사용자 및 제2 친구를 포함하는 제2 대화방을 통해 상기 전환 메시지를 전달하도록 하는 단계를 포함한다. According to one aspect of the present disclosure, a method for transmitting and receiving various types of messages between users using a plurality of messengers regardless of a messenger platform provided by an interactive AI agent system is provided. The method of the present disclosure includes generating a relational database for storing an association between a friend list of the user and a friend list of the user of each of the plurality of messengers for each of a plurality of messengers used by the user; Generating a conversion database for storing a message type conversion method for each of the plurality of messenger platforms; From the terminal of the user via a first chat room on a first messenger that is one of the plurality of messengers, the first chat room comprising a tosbot friend and at least one first friend included in a friend list of the first messenger; Receiving a message; Determining a second friend associated with the first friend using a second messenger, which is one of the plurality of messengers, based on the relationship database; Determining a type of the user's message and converting the message into a conversion message in a format suitable for the second messenger based on the conversion database; And causing the tossbo friend to forward the diversion message on the second messenger via a second chat room including the tossbo friend, the user and the second friend.

본 개시의 일 실시예에 따르면, 상기 변환데이터베이스를 생성하는 단계는 상기 메시지의 유형을 정의하는 단계; 및 상기 복수의 메신저 플랫폼 각각에 대해 상기 유형 별로 입력 가능여부 및 변환 규칙을 정의하는 단계;를 포함한다. According to an embodiment of the present disclosure, the generating of the conversion database may include defining a type of the message; And defining whether or not each of the plurality of messenger platforms can be input for each type and a conversion rule.

본 개시의 일 실시예에 따르면,상기 변환데이터베이스를 생성하는 단계는 상기 메시지의 유형을 정의하는 단계; 및 상기 유형 별로 상기 복수의 메신저 플랫폼 중 제1 메신저 플랫폼을 상기 복수의 메신저 플랫폼 중 제2 메신저 플랫폼으로 변환하는 규칙을 정의하는 단계;를 포함한다. According to an embodiment of the present disclosure, the generating of the conversion database may include defining a type of the message; And defining a rule for converting a first messenger platform of the plurality of messenger platforms into a second messenger platform of the plurality of messenger platforms for each type.

본 개시의 일 실시예에 따르면, 상기 메시지의 유형은 텍스트, 이미지, 버튼, 투표, URL, 이모티콘 중 적어도 하나를 포함한다. According to an embodiment of the present disclosure, the type of message includes at least one of text, image, button, voting, URL, and emoticon.

본 개시의 일 실시예에 따르면, 상기 사용자의 메시지의 유형을 결정하고, 상기 변환데이터베이스를 기초로 상기 제2 메신저에 적합한 형식으로 상기 메시지를 전환 메시지로 전환하는 단계는 상기 메시지의 유형이 이모티콘인 경우, 상기 이모티콘을 이미지 형식으로 변환할 수 있다. According to an embodiment of the present disclosure, determining the type of the user's message, and converting the message into a switch message in a format suitable for the second messenger based on the conversion database, wherein the type of the message is an emoticon In this case, the emoticon may be converted into an image format.

본 개시의 일 실시예에 따르면, 상기 사용자의 메시지의 유형을 결정하고, 상기 변환데이터베이스를 기초로 상기 제2 메신저에 적합한 형식으로 상기 메시지를 전환 메시지로 전환하는 단계는 상기 메시지의 유형이 이모티콘인 경우, 상기 이모티콘을 상기 이모티콘과 연관된 이미지로 치환할 수 있다. According to an embodiment of the present disclosure, determining the type of the user's message, and converting the message into a switch message in a format suitable for the second messenger based on the conversion database, wherein the type of the message is an emoticon In this case, the emoticon may be replaced with an image associated with the emoticon.

본 개시의 다른 특징에 의하면, 하나 이상의 명령어를 포함하는 컴퓨터 판독 가능 기록 매체로서, 하나 이상의 명령어는, 컴퓨터에 위해 실행되는 경우, 컴퓨터로 하여금, 전술한 방법들 중 어느 하나의 방법을 수행하게 하는, 컴퓨터 판독 가능 기록 매체가 제공된다.According to another aspect of the present disclosure, a computer readable recording medium including one or more instructions, wherein the one or more instructions, when executed for a computer, cause the computer to perform any one of the methods described above. A computer readable recording medium is provided.

본 개시에 의하면, 사용자는, 별도의 프로그램 설치 등의 과정 없이 사용자가 사용하는 복수의 온라인 대화 서비스를 통해서 사용자간 온라인 대화 서비스를 이용할 수 있으며 상대방과 다른 온라인 대화 서비스를 이용하는 경우에도 심리스한 채팅을 이어갈 수 있다. According to the present disclosure, a user can use an online chat service between users through a plurality of online chat services used by the user without a separate program installation process, and seamless chatting even when the other party uses a different online chat service. You can continue.

도 1은, 본 개시의 일 실시예에 따라, 대화형 AI 에이전트 시스템이 구현될 수 있는 시스템 환경을 개략적으로 도시한 도면이다.
도 2는, 본 개시의 일 실시예에 따른, 도 1의 사용자 단말(102)의 기능적 구성을 개략적으로 도시한 기능 블록도이다.
도 3은, 본 개시의 일 실시예에 따른, 도 1의 대화형 AI 에이전트 서버(108)의 기능적 구성을 개략적으로 도시한 기능 블록도이다.
도 4는, 본 개시의 일 실시예에 따른, 대화형 AI 에이전트 서버(108)에 의해 수행되는, 온라인 대화 서비스 서버(106)를 통한 사용자들간 대화 세션의 모니터링 및 복수의 메신저를 이용하는 사용자간 다양한 형식의 채팅 서비스 제공을 위한 예시적 동작 흐름을 보여주는 흐름도이다.
도 5의 (a) 내지 (d)는, 본 개시의 일 실시예에 따라, 대화형 AI 에이전트 서버(108)가, 온라인 대화 서비스 서버(106)를 통한 사용자들간 대화 세션을 모니터링하고 복수의 온라인 대화 서비스 상에서 다양한 형식의 채팅 서비스를 제공하는 경우의 예시적 대화방을 보여주는 화면이다.
1 is a diagram schematically illustrating a system environment in which an interactive AI agent system may be implemented, according to an embodiment of the present disclosure.
2 is a functional block diagram schematically illustrating the functional configuration of the user terminal 102 of FIG. 1, according to an embodiment of the disclosure.
3 is a functional block diagram schematically illustrating the functional configuration of the interactive AI agent server 108 of FIG. 1, in accordance with an embodiment of the present disclosure.
4 illustrates the monitoring of a chat session between users via an online chat service server 106 and a variety of users using a plurality of messengers, performed by the interactive AI agent server 108, according to one embodiment of the disclosure. A flow diagram illustrating an example operational flow for providing a chat service in a form.
5A to 5D illustrate that, according to an embodiment of the present disclosure, the interactive AI agent server 108 monitors a chat session between users through an online chat service server 106 and displays a plurality of online sessions. This is a screen showing an exemplary chat room in the case of providing various types of chat services on the chat service.

이하, 첨부 도면을 참조하여 본 개시의 실시예에 관하여 상세히 설명한다. 이하에서는, 본 개시의 요지를 불필요하게 흐릴 우려가 있다고 판단되는 경우, 이미 공지된 기능 및 구성에 관한 구체적인 설명을 생략한다. 또한, 이하에서 설명하는 내용은 어디까지나 본 개시의 일 실시예에 관한 것일 뿐 본 개시가 이로써 제한되는 것은 아님을 알아야 한다.Hereinafter, exemplary embodiments of the present disclosure will be described in detail with reference to the accompanying drawings. In the following, when it is determined that there is a risk of unnecessarily obscuring the subject matter of the present disclosure, a detailed description of already known functions and configurations is omitted. In addition, it should be understood that what is described below is only related to an embodiment of the present disclosure, but the present disclosure is not limited thereto.

본 개시에서 사용되는 용어는 단지 특정한 실시예를 설명하기 위해 사용되는 것으로 본 개시를 한정하려는 의도에서 사용된 것이 아니다. 예를 들면, 단수로 표현된 구성요소는 문맥상 명백하게 단수만을 의미하지 않는다면 복수의 구성요소를 포함하는 개념으로 이해되어야 한다. 본 개시에서 사용되는 "및/또는"이라는 용어는, 열거되는 항목들 중 하나 이상의 항목에 의한 임의의 가능한 모든 조합들을 포괄하는 것임이 이해되어야 한다. 본 개시에서 사용되는 '포함하다' 또는 '가지다' 등의 용어는 본 개시 상에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것일 뿐이고, 이러한 용어의 사용에 의해 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 배제하려는 것은 아니다.The terminology used herein is for the purpose of describing particular embodiments only and is not intended to be limiting of the present disclosure. For example, a component expressed in the singular should be understood as a concept including a plurality of components unless the context clearly indicates the singular. It is to be understood that the term "and / or" as used in this disclosure encompasses all possible combinations by one or more of the listed items. The terms 'comprise' or 'having' as used in the present disclosure are merely intended to designate that there exists a feature, number, step, operation, component, part, or combination thereof described on the present disclosure. It is not intended to exclude the possibility of the presence or the addition of one or more other features or numbers, steps, actions, components, parts or combinations thereof by use.

본 개시의 실시예에 있어서 '모듈' 또는 '부'는 적어도 하나의 기능이나 동작을 수행하는 기능적 부분을 의미하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 '모듈' 또는 '부'는, 특정한 하드웨어로 구현될 필요가 있는 '모듈' 또는 '부'를 제외하고는, 적어도 하나의 소프트웨어 모듈로 일체화되어 적어도 하나의 프로세서에 의해 구현될 수 있다.In the exemplary embodiment of the present disclosure, the module or the unit means a functional part that performs at least one function or operation, and may be implemented in hardware or software or in a combination of hardware and software. Also, a plurality of 'modules' or 'units' may be integrated by at least one software module and implemented by at least one processor, except for 'modules' or 'units', which need to be implemented by specific hardware. have.

본 개시의 실시예에 있어서 '대화형 AI 에이전트 시스템'은, 사용자와의 사이에서 음성 및/또는 텍스트 형태의 자연어를 매개로 한 대화형 인터랙션을 통해, 사용자로부터 입력되는 자연어 입력(예컨대, 자연어로 된 사용자로부터의 명령, 진술, 요청, 질문 등)을 수신 및 해석하여 사용자의 인텐트(intent)를 알아내고 그 알아낸 사용자의 인텐트에 기초하여 필요한 동작 수행, 즉 적절한 대화 응답의 제공 및/또는 태스크의 수행을 제공할 수 있는 임의의 정보 처리 시스템을 지칭할 수 있으며, 특정 형태로 제한되는 것은 아니다. In an embodiment of the present disclosure, the interactive AI agent system may be a natural language input (eg, a natural language) input from a user through an interactive interaction with a user through a natural language in the form of voice and / or text. Receive and interpret commands, statements, requests, questions, etc.) from a user who has been determined to determine the user's intent and perform the necessary actions based on that user's intent, i.e. provide appropriate conversational response and / or Or any information processing system capable of providing performance of a task, without being limited to a particular form.

본 개시의 실시예에 있어서, '대화형 AI 에이전트 시스템'에 의해 제공되는 대화 응답은 시각, 청각 및/또는 촉각 형태(예컨대, 음성, 음향, 텍스트, 비디오, 이미지, 기호, 이모티콘, 하이퍼링크, 애니메이션, 각종 노티스, 모션, 햅틱 피드백 등을 포함할 수 있으며, 이로써 제한되는 것은 아님) 등 다양한 형태로써 제공될 수 있음을 알아야 한다. 본 개시의 실시예에 있어서 '대화형 AI 에이전트 시스템'에 의해 수행되는 태스크는, 예컨대 정보의 검색, 주문, 예약 또는 결제 진행, SMS 메시지 작성, 이메일 작성, 전화 걸기, 사용자 위치 탐색 등을 비롯한 각종 다양한 형태의 태스크(다만, 예시일 뿐이며 이로써 제한되는 것은 아님)를 포함할 수 있다.In an embodiment of the present disclosure, the dialogue response provided by the 'interactive AI agent system' may be in visual, auditory and / or tactile form (eg, voice, sound, text, video, image, symbol, emoticon, hyperlink, It may be included in various forms such as, but not limited to, animation, various knots, motion, haptic feedback, and the like. Tasks performed by the 'interactive AI agent system' in an embodiment of the present disclosure may include, for example, searching for information, placing an order, making a reservation or making a payment, writing an SMS message, writing an email, making a call, searching a user location, and the like. It may include various types of tasks (however, they are illustrative only and not limiting).

덧붙여, 달리 정의되지 않는 한 기술적 또는 과학적인 용어를 포함하여, 본 개시에서 사용되는 모든 용어들은 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의된 용어들은, 관련 기술의 문맥상 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 개시에서 명백하게 달리 정의하지 않는 한 과도하게 제한 또는 확장하여 해석되지 않는다는 점을 알아야 한다.In addition, all terms used in this disclosure, including technical or scientific terms, unless otherwise defined, have the same meaning as commonly understood by one of ordinary skill in the art to which this disclosure belongs. It is to be understood that the terms used in the dictionary, which are generally used, should be interpreted as having a meaning consistent with the contextual meaning of the related art, and shall not be construed as being excessively limited or extended unless clearly defined otherwise in the present disclosure. .

이하, 첨부된 도면을 참조하여, 본 개시의 실시예에 대해 구체적으로 설명하기로 한다.Hereinafter, exemplary embodiments of the present disclosure will be described in detail with reference to the accompanying drawings.

도 1은, 본 개시의 일 실시예에 따라, 대화형 AI 에이전트 시스템이 구현될 수 있는 시스템 환경(100)을 개략적으로 도시한 도면이다. 도시된 바에 의하면, 시스템 환경(100)은, 복수의 사용자 단말(102), 통신망(104), 복수의 온라인 대화 서비스 서버(106), 대화형 AI 에이전트 서버(108), 및 외부 서비스 서버(도시되지 않음)를 포함한다.1 is a diagram schematically illustrating a system environment 100 in which an interactive AI agent system may be implemented, in accordance with an embodiment of the present disclosure. As shown, the system environment 100 includes a plurality of user terminals 102, a communication network 104, a plurality of online chat service servers 106, an interactive AI agent server 108, and an external service server (shown). Not included).

본 개시의 일 실시예에 의하면, 복수의 사용자 단말(102) 각각은 유선 또는 무선 통신 기능을 구비한 임의의 사용자 전자 장치일 수 있다. 사용자 단말(102) 각각은, 예컨대 스마트 폰, 태블릿 PC, 뮤직 플레이어, 스마트 스피커, 데스크탑, 랩탑, PDA, 게임 콘솔, 디지털 TV, 셋탑박스 등을 포함한 다양한 유선 또는 무선 통신 단말일 수 있으며, 특정 형태로 제한되지 않음을 알아야 한다.According to one embodiment of the present disclosure, each of the plurality of user terminals 102 may be any user electronic device having a wired or wireless communication function. Each of the user terminals 102 may be a variety of wired or wireless communication terminals, including, for example, smart phones, tablet PCs, music players, smart speakers, desktops, laptops, PDAs, game consoles, digital TVs, set-top boxes, and the like. It should be understood that this is not limited.

본 개시의 일 실시예에 의하면, 사용자 단말(102) 각각은, 통신망(104)을 통해서, 온라인 대화 서비스 서버(106)와 통신, 즉 필요한 정보를 송수신할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 단말(102) 각각은, 통신망(104) 및 온라인 대화 서비스 서버(106)를 통해, 하나 또는 복수의 다른 사용자 단말(102)과 대화 세션을 수립하고, 수립된 대화 세션을 통해 하나 또는 복수의 다른 사용자 단말(102)과 음성 및/또는 텍스트 방식으로 실시간 대화를 주고 받을 수 있다. 본 개시의 일 실시예에 의하면, 사용자 단말(102) 각각은, 외부로부터 음성 및/또는 텍스트 형태의 사용자 입력을 수신하고, 통신망(104) 및 온라인 대화 서비스 서버(106)를 경유하여 수립된 대화 세션을 통해, 위 사용자 입력을 해당 대화 세션에 참여하는 다른 사용자 단말(102)로 제공할 수 있다.According to an embodiment of the present disclosure, each of the user terminals 102 may communicate with the online chat service server 106, that is, transmit and receive necessary information through the communication network 104. According to one embodiment of the present disclosure, each of the user terminals 102 establishes and establishes a chat session with one or a plurality of other user terminals 102 through the communication network 104 and the online chat service server 106. The conversation session may be used to exchange a real-time conversation with one or more other user terminals 102 in a voice and / or text manner. According to one embodiment of the present disclosure, each of the user terminals 102 receives a user input in the form of voice and / or text from the outside, and establishes a conversation through the communication network 104 and the online chat service server 106. Through the session, the user input may be provided to another user terminal 102 participating in the conversation session.

본 개시의 일 실시예에 의하면, 사용자 단말(102) 각각은, 통신망(104)을 통해서, 대화형 AI 에이전트 서버(108)와 통신, 즉 필요한 정보를 송수신할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 단말(102) 각각은, 통신망(104)을 통해서, 외부 서비스 서버와 통신, 즉 필요한 정보를 송수신할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 단말(102) 각각은, 외부로부터 음성, 텍스트 및/또는 터치 형태의 사용자 입력을 수신할 수 있고, 통신망(104)을 통한 대화형 AI 에이전트 서버(108) 및/또는 외부 서비스 서버와의 통신(및/또는 사용자 단말(102) 내 처리)을 통해 얻어진, 위 사용자 입력에 대응한 동작 결과(예컨대, 특정 대화 응답의 제공 및/또는 특정 태스크의 수행 등)를 사용자에게 제공할 수 있다.According to an embodiment of the present disclosure, each of the user terminals 102 may communicate with the interactive AI agent server 108, that is, transmit and receive necessary information through the communication network 104. According to the exemplary embodiment of the present disclosure, each of the user terminals 102 may communicate with an external service server, that is, transmit and receive necessary information through the communication network 104. According to one embodiment of the present disclosure, each of the user terminals 102 may receive user input in the form of voice, text, and / or touch from the outside, and communicate with the interactive AI agent server 108 via the communication network 104. And / or an operation result corresponding to the user input (eg, providing a specific conversation response and / or performing a specific task, etc.) obtained through communication with an external service server (and / or processing in the user terminal 102). Can be provided to the user.

본 개시의 실시예에 있어서, 사용자 입력에 대응한 동작으로서의 태스크 수행은, 예컨대 정보의 검색, 주문, 예약, 또는 결제 진행, SMS 메시지 작성, 이메일 작성, 전화 걸기, 사용자 위치 탐색 등을 비롯한 각종 다양한 형태의 태스크(그러나 이로써 제한되는 것은 아님) 수행을 포함할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 단말(102) 각각은, 사용자 입력에 대응한 동작 결과로서의 대화 응답을, 시각, 청각 및/또는 촉각 형태(예컨대, 음성, 음향, 텍스트, 비디오, 이미지, 기호, 이모티콘, 하이퍼링크, 애니메이션, 각종 노티스, 모션, 햅틱 피드백 등을 포함할 수 있으며, 이로써 제한되는 것은 아님) 등 다양한 형태로써 사용자에게 제공할 수 있다.In an embodiment of the present disclosure, performing a task as an operation corresponding to a user input may be performed in various ways including, for example, searching for information, placing an order, making a reservation, or making a payment, writing an SMS message, writing an email, making a phone call, searching a user's location, and the like. It may include performing (but not limited to) forms of tasks. According to an embodiment of the present disclosure, each of the user terminals 102 may transmit a conversation response as a result of an operation corresponding to a user input in a visual, audio, and / or tactile form (eg, voice, sound, text, video, image, Symbols, emoticons, hyperlinks, animations, various knots, motion, haptic feedback, and the like, but are not limited thereto.

본 개시의 일 실시예에 의하면, 통신망(104)은, 임의의 유선 또는 무선 통신망, 예컨대 TCP/IP 통신망을 포함할 수 있다. 본 개시의 일 실시예에 의하면, 통신망(104)은, 예컨대 Wi-Fi망, LAN망, WAN망, 인터넷망 등을 포함할 수 있으며, 본 발명이 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 통신망(104)은, 예컨대 이더넷, GSM, EDGE(Enhanced Data GSM Environment), CDMA, TDMA, OFDM, 블루투스, VoIP, Wi-MAX, Wibro 기타 임의의 다양한 유선 또는 무선 통신 프로토콜을 이용하여 구현될 수 있다.According to one embodiment of the present disclosure, communication network 104 may include any wired or wireless communication network, such as a TCP / IP communication network. According to one embodiment of the present disclosure, the communication network 104 may include, for example, a Wi-Fi network, a LAN network, a WAN network, an Internet network, and the like, but the present invention is not limited thereto. According to one embodiment of the present disclosure, the communication network 104 may include, for example, Ethernet, GSM, Enhanced Data GSM Environment (EDGE), CDMA, TDMA, OFDM, Bluetooth, VoIP, Wi-MAX, Wibro, and any other various wired or wireless. It may be implemented using a communication protocol.

본 개시의 일 실시예에 의하면, 온라인 대화 서비스 서버(106)는, 통신망(104)을 통해 사용자 단말(102)과 통신할 수 있다. 본 개시의 일 실시예에 의하면, 온라인 대화 서비스 서버(106)는, 예컨대 통신망(104)을 통해 사용자 단말(102)로부터 수신된 요청에 따라, 해당 사용자 단말(102)과 하나 또는 복수의 다른 사용자 단말(102) 사이에 대화 세션을 수립하고, 해당 대화 세션에 참여하는 사용자 단말(102)들 간에 실시간 대화가 진행되도록 할 수 있다. 본 개시의 일 실시예에 의하면, 온라인 대화 서비스 서버(106)는, 인스턴트 메신저 서비스 제공 서버일 수 있다. 본 개시의 일 실시예에 의하면, 온라인 대화 서비스 서버(106)는, 사용자 단말(102)로부터의 요청에 따라 사용자 단말(102)들 간의 대화 세션을 수립할 때, 사용자 선택에 따라 해당 대화 세션에 대해 하나 또는 복수의 대화형 AI 에이전트 시스템을 이용할 것인지 여부를 정할 수 있다(이러한 실시예의 경우, 후술하는 대화형 AI 에이전트 시스템에 의한 대화 세션의 모니터링 및 서비스 제공 등은, 해당 대화 세션의 수립 시에 대화형 AI 에이전트 시스템을 이용하도록 선택된 경우에, 수행될 것이다). 본 개시의 일 실시예에 의하면, 각 사용자 단말(102) 상에서 수신된 음성 및/또는 텍스트 형태의 사용자 입력은, 통신망(104) 및 온라인 대화 서비스 서버(106)를 경유하여 수립된 대화 세션을 통해, 해당 대화 세션에 참여하는 다른 사용자 단말(102)로 전달될 수 있다.According to one embodiment of the present disclosure, the online chat service server 106 may communicate with the user terminal 102 via the communication network 104. According to one embodiment of the present disclosure, the on-line chat service server 106 may be connected to the user terminal 102 and one or more other users according to a request received from the user terminal 102 through, for example, the communication network 104. A conversation session may be established between the terminals 102 and a real time conversation may be performed between the user terminals 102 participating in the conversation session. According to an embodiment of the present disclosure, the online chat service server 106 may be an instant messenger service providing server. According to an embodiment of the present disclosure, when the online chat service server 106 establishes a chat session between the user terminals 102 in response to a request from the user terminal 102, the online chat service server 106 is connected to the chat session according to a user selection. It is possible to determine whether to use one or a plurality of interactive AI agent systems for each other. (In this embodiment, monitoring of a conversation session and service provision by the interactive AI agent system described later may be performed at the time of establishment of the conversation session. If selected to use the interactive AI agent system). According to one embodiment of the present disclosure, user input in the form of voice and / or text received on each user terminal 102 is via a chat session established via communication network 104 and online chat service server 106. The data may be transferred to another user terminal 102 participating in the conversation session.

본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는, 통신망(104)을 통해 사용자 단말(102)과 통신할 수 있다. 본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는, 예컨대 통신망(104)을 통해 사용자 단말(102)로부터 음성, 텍스트 및/또는 터치 형태의 사용자 입력을 수신하고, 미리 준비된 지식베이스 모델들에 기초해서 그 수신된 사용자 입력을 처리하여 사용자의 인텐트(intent)를 결정할 수 있다. 본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는, 예컨대 사용자 인텐트에 부합하는 특정한 대화 응답을 생성하여 사용자 단말(102)로 전송할 수 있다.According to one embodiment of the present disclosure, the interactive AI agent server 108 may communicate with the user terminal 102 via the communication network 104. According to one embodiment of the present disclosure, the interactive AI agent server 108 receives user input in the form of voice, text, and / or touch from the user terminal 102, for example, via the communication network 104, and has prepared knowledge in advance. Based on the base models, the received user input can be processed to determine the user's intent. According to one embodiment of the present disclosure, the interactive AI agent server 108 may generate and send to the user terminal 102 a specific conversation response that corresponds, for example, to the user intent.

본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는, 위 결정된 사용자 인텐트에 대응하는 대화 응답을 음성 및/또는 텍스트 형태로써 생성하고, 생성된 응답을, 통신망(104)을 통해, 사용자 단말(102) 및/또는 온라인 대화 서비스 서버(106)로 전달할 수 있다. 본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)에 의해 생성되는 대화 응답은, 전술한 음성 및/또는 텍스트 형태의 자연어 응답과 함께, 이미지, 비디오, 기호, 이모티콘 등 다른 시각적 요소들이나, 음향 등의 다른 청각적 요소들이나, 기타 다른 촉각적 요소들을 포함할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 단말(102) 상에서 수신된 사용자 입력의 형태(예컨대, 음성 입력인지 아니면 텍스트 입력인지)에 따라, 대화형 AI 에이전트 서버(108) 상에서 동일한 형태의 응답이 생성될 수 있으며(예컨대, 음성 입력이 주어진 경우에는 음성 응답이 생성되고 텍스트 입력이 주어진 경우에는 텍스트 응답이 생성됨), 다만 본 발명이 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 사용자 입력의 형태와 무관하게 음성 및/또는 텍스트 형태의 응답이 생성 및 제공될 수 있음을 알아야 한다.According to an embodiment of the present disclosure, the interactive AI agent server 108 generates a conversation response corresponding to the user intent determined above in voice and / or text form, and generates the generated response in the communication network 104. Via the user terminal 102 and / or the online chat service server 106. According to one embodiment of the present disclosure, the conversation response generated by the interactive AI agent server 108 may be accompanied by other visual elements such as images, videos, symbols, and emoticons, in addition to the aforementioned natural language responses in the form of voice and / or text. Or other acoustic elements such as sound, sound, or other tactile elements. According to one embodiment of the present disclosure, the same type of response is generated on the interactive AI agent server 108, depending on the type of user input received on the user terminal 102 (eg, voice input or text input). (Eg, a voice response is generated if a voice input is given and a text response is generated if a text input is given), but the present invention is not so limited. In accordance with another embodiment of the present disclosure, it should be appreciated that responses in the form of voice and / or text may be generated and provided regardless of the form of user input.

본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는, 앞서 언급한 바와 같이, 통신망(104)을 통해서 외부 서비스 서버와 통신할 수 있다. 외부 서비스 서버는, 예컨대 각종 온라인 예약 센터 서버, 각종 음식 주문 서비스 서버, 온라인 쇼핑몰 서버, 정보 검색 서버, 각종 결제 대행 서버, 위치 탐색 서버 등일 수 있으며, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)로부터 사용자 단말(102) 및/또는 온라인 대화 서비스 서버(106)로 전달되는, 사용자 인텐트에 기초한 응답은, 예컨대 외부 서비스 서버로부터 검색 및 획득된 데이터 콘텐츠를 포함한 것일 수 있음을 알아야 한다.According to one embodiment of the present disclosure, the interactive AI agent server 108 may communicate with an external service server via the communication network 104, as mentioned above. The external service server may be, for example, various online reservation center servers, various food order service servers, online shopping mall servers, information retrieval servers, various payment agency servers, location search servers, and the like, but the present disclosure is not limited thereto. According to one embodiment of the present disclosure, the response based on the user intent, which is communicated from the interactive AI agent server 108 to the user terminal 102 and / or the online chat service server 106, may be, for example, from an external service server. It should be understood that this may include the retrieved and acquired data content.

본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는, 예컨대 통신망(104)을 통하여, 복수의 온라인 대화 서비스 서버(106)를 통한 복수의 메신저 상에서 복수의 사용자 단말(102)들 간의 대화 세션을 모니터링하고, 그 대화 세션 상에서 사용자 단말(102)들 간에 송수신되는 각각의 사용자 자연어 입력을 수신할 수 있다. 본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는 일 메신저를 통해 사용자 입력을 수신하여 다른 메신저의 대화 세션에 사용자 입력을 전달할 수 있다. According to one embodiment of the present disclosure, the interactive AI agent server 108 may be configured to provide a plurality of user terminals 102 on a plurality of messengers via a plurality of online chat service servers 106, for example, via a communication network 104. Monitor a conversation session between and receive respective user natural language inputs transmitted and received between user terminals 102 on the conversation session. According to an embodiment of the present disclosure, the interactive AI agent server 108 may receive a user input through one messenger and pass the user input to a chat session of another messenger.

본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는 일 메신저를 통해 사용자 입력을 수신하여 다른 메신저의 대화 세션에 사용자 입력을 전달할 수 있다. 본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는 아무런 응답을 제공하지 않은 채 침묵을 유지하면서 메신저의 이후 대화를 계속하여 모니터링할 수 있다.According to an embodiment of the present disclosure, the interactive AI agent server 108 may receive a user input through one messenger and pass the user input to a chat session of another messenger. According to one embodiment of the present disclosure, the interactive AI agent server 108 may continue to monitor subsequent conversations of the messenger while providing silence without providing any response.

본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는 일 메신저를 통해 사용자 입력을 수신하여 다른 메신저의 입력형식에 맞도록 입력의 형식을 변환하여 다른 메신저의 대화 세션에 사용자 입력을 전달할 수 있다. According to an embodiment of the present disclosure, the interactive AI agent server 108 receives a user input through one messenger, converts the input format to match the input format of another messenger, and inputs the user input to a chat session of another messenger. I can deliver it.

본 도면에서는, 대화형 AI 에이전트 서버(108)가 외부 서비스 서버와 통신망(104)을 통해 통신 가능하게 구성된 별도의 물리 서버인 것으로 설명하고 있으나, 본 개시가 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 대화형 AI 에이전트 서버는, 예컨대 각종 온라인 예약 센터 서버, 각종 음식 주문 서비스 서버, 온라인 쇼핑몰 서버, 정보 검색 서버, 각종 결제 대행 서버, 위치 탐색 서버, 토스봇 서버 등 각종 서비스 서버의 일부로 포함되어 구성될 수도 있음을 알아야 한다.In this figure, the interactive AI agent server 108 is described as a separate physical server configured to communicate with the external service server through the communication network 104, but the present disclosure is not limited thereto. According to another embodiment of the present disclosure, the interactive AI agent server may include, for example, various online reservation center servers, various food order service servers, online shopping mall servers, information retrieval servers, various payment agency servers, location search servers, tossbot servers, and the like. It should be understood that the configuration may be included as part of various service servers.

도 2는, 본 개시의 일 실시예에 따른, 도 1에 도시된 사용자 단말(102)의 기능적 구성을 개략적으로 도시한 기능 블록도이다. 도시된 바에 의하면, 사용자 단말(102)은, 사용자 입력 수신 모듈(202), 센서 모듈(204), 프로그램 메모리 모듈(206), 프로세싱 모듈(208), 통신 모듈(210), 및 응답 출력 모듈(212)을 포함한다.2 is a functional block diagram schematically showing the functional configuration of the user terminal 102 shown in FIG. 1, according to an embodiment of the present disclosure. As shown, the user terminal 102 includes a user input receiving module 202, a sensor module 204, a program memory module 206, a processing module 208, a communication module 210, and a response output module ( 212).

본 개시의 일 실시예에 의하면, 사용자 입력 수신 모듈(202)은, 사용자로부터 다양한 형태의 입력, 예컨대 음성 입력 및/또는 텍스트 입력 등의 자연어 입력(및 부가적으로 터치 입력 등의 다른 형태의 입력)을 수신할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 입력 수신 모듈(202)은, 예컨대 마이크로폰 및 오디오 회로를 포함하며, 마이크로폰을 통해 사용자 음성 입력 신호를 획득하고 획득된 신호를 오디오 데이터로 변환할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 입력 수신 모듈(202)은, 예컨대 마우스, 조이스틱, 트랙볼 등의 각종 포인팅 장치, 키보드, 터치패널, 터치스크린, 스타일러스 등 다양한 형태의 입력 장치를 포함할 수 있고, 이들 입력 장치를 통해 사용자로부터 입력된 텍스트 입력 및/또는 터치 입력 신호를 획득할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 입력 수신 모듈(202)에서 수신되는 사용자 입력은, 소정의 태스크 수행, 예컨대 소정의 애플리케이션 실행이나 소정 정보의 검색 등과 연관될 수 있으나, 본 개시가 이로써 제한되는 것은 아니다.According to an embodiment of the present disclosure, the user input receiving module 202 may input various types of inputs from a user, for example, natural language inputs such as voice inputs and / or text inputs (and additionally other types of inputs such as touch inputs). ) Can be received. According to an embodiment of the present disclosure, the user input receiving module 202 may include, for example, a microphone and an audio circuit, and may acquire a user voice input signal through the microphone and convert the obtained signal into audio data. According to an embodiment of the present disclosure, the user input receiving module 202 may include various pointing devices such as a mouse, a joystick, a trackball, a keyboard, a touch panel, a touch screen, a stylus, and the like. The user may acquire text input and / or touch input signals input from the user through these input devices. According to an embodiment of the present disclosure, the user input received by the user input receiving module 202 may be associated with performing a predetermined task, for example, executing a predetermined application or retrieving predetermined information, but the present disclosure is limited thereto. It is not.

본 개시의 일 실시예에 의하면, 센서 모듈(204)은 하나 이상의 서로 다른 유형의 센서를 포함하고, 이들 센서를 통해 사용자 단말(102)의 상태 정보, 예컨대 해당 사용자 단말(102)의 물리적 상태, 소프트웨어 및/또는 하드웨어 상태, 또는 사용자 단말(102)의 주위 환경 상태에 관한 정보 등을 획득할 수 있다. 본 개시의 일 실시예에 의하면, 센서 모듈(204)은, 예컨대 광 센서를 포함하고, 광 센서를 통해 해당 사용자 단말(102)의 주변 광 상태를 감지할 수 있다. 본 개시의 일 실시예에 의하면, 센서 모듈(204)은, 예컨대 이동 센서를 포함하고, 이동 센서를 통해 해당 사용자 단말(102)의 이동 상태 여부를 감지할 수 있다. 본 개시의 일 실시예에 의하면, 센서 모듈(204)은, 예컨대 속도 센서 및 GPS 센서를 포함하고, 이들 센서를 통해 해당 사용자 단말(102)의 위치 및/또는 배향 상태를 감지할 수 있다. 본 개시의 다른 실시예에 의하면, 센서 모듈(204)은 온도 센서, 이미지 센서, 압력 센서, 접촉 센서 등을 비롯한 다른 다양한 형태의 센서를 포함할 수 있음을 알아야 한다.According to one embodiment of the present disclosure, the sensor module 204 includes one or more different types of sensors, through which the status information of the user terminal 102, such as the physical state of the corresponding user terminal 102, The software and / or hardware state or information about the environment state of the user terminal 102 may be obtained. According to an embodiment of the present disclosure, the sensor module 204 may include, for example, an optical sensor, and detect an ambient light state of the corresponding user terminal 102 through the optical sensor. According to an embodiment of the present disclosure, the sensor module 204 may include, for example, a movement sensor, and detect whether the corresponding user terminal 102 is moved through the movement sensor. According to an embodiment of the present disclosure, the sensor module 204 may include, for example, a speed sensor and a GPS sensor, and may detect a position and / or orientation state of the corresponding user terminal 102 through these sensors. According to another embodiment of the present disclosure, it should be appreciated that the sensor module 204 may include other various types of sensors, including temperature sensors, image sensors, pressure sensors, contact sensors, and the like.

본 개시의 일 실시예에 의하면, 프로그램 메모리 모듈(206)은, 사용자 단말(102) 상에서 실행될 수 있는 각종 프로그램, 예컨대 각종 애플리케이션 프로그램 및 관련 데이터 등이 저장된 임의의 저장 매체일 수 있다. 본 개시의 일 실시예에 의하면, 프로그램 메모리 모듈(206)에는, 예컨대 인스턴트 메시징 애플리케이션, 전화 걸기 애플리케이션, 이메일 애플리케이션, 지도 애플리케이션, 웹 브라우저 애플리케이션, 결제 및/또는 송금 애플리케이션 등을 비롯한 다양한 애플리케이션 프로그램들과 이들 프로그램의 실행과 관련된 데이터들이 저장될 수 있다. 본 개시의 일 실시예에 의하면, 프로그램 메모리 모듈(206)은, DRAM, SRAM, DDR RAM, ROM, 자기 디스크, 광 디스크, 플래시 메모리 등 다양한 형태의 휘발성 또는 비휘발성 메모리를 포함하도록 구성될 수 있다.According to an embodiment of the present disclosure, the program memory module 206 may be any storage medium in which various programs, for example, various application programs and related data, which may be executed on the user terminal 102, are stored. According to one embodiment of the present disclosure, program memory module 206 includes various application programs, including, for example, instant messaging applications, dialing applications, email applications, map applications, web browser applications, payment and / or remittance applications, and the like. Data related to the execution of these programs can be stored. According to an embodiment of the present disclosure, the program memory module 206 may be configured to include various types of volatile or nonvolatile memory such as DRAM, SRAM, DDR RAM, ROM, magnetic disk, optical disk, flash memory, and the like. .

본 개시의 일 실시예에 의하면, 프로세싱 모듈(208)은, 사용자 단말(102)의 각 컴포넌트 모듈과 통신하고 사용자 단말(102) 상에서 각종 연산을 수행할 수 있다. 본 개시의 일 실시예에 의하면, 프로세싱 모듈(208)은, 프로그램 메모리 모듈(206) 상의 각종 애플리케이션 프로그램을 구동 및 실행시킬 수 있다. 본 개시의 일 실시예에 의하면, 프로세싱 모듈(208)은, 필요한 경우, 사용자 입력 수신 모듈(202) 및 센서 모듈(204)에서 획득된 신호를 수신하고, 이들 신호에 관한 적절한 처리를 수행할 수 있다. 본 개시의 일 실시예에 의하면, 프로세싱 모듈(208)은, 필요한 경우, 통신 모듈(210)을 통해 외부로부터 수신되는 신호에 대해 적절한 처리를 수행할 수 있다.According to one embodiment of the present disclosure, the processing module 208 may communicate with each component module of the user terminal 102 and perform various operations on the user terminal 102. According to one embodiment of the present disclosure, the processing module 208 may drive and execute various application programs on the program memory module 206. According to one embodiment of the present disclosure, the processing module 208 may receive the signals obtained by the user input receiving module 202 and the sensor module 204 and perform appropriate processing on these signals, if necessary. have. According to one embodiment of the present disclosure, the processing module 208 may perform appropriate processing on a signal received from the outside through the communication module 210 if necessary.

본 개시의 일 실시예에 의하면, 통신 모듈(210)은, 사용자 단말(102)이 도 1의 통신망(104)을 통하여, 온라인 대화 서비스 서버(106), 대화형 AI 에이전트 서버(108) 및/또는 외부 서비스 서버와 통신할 수 있게 한다. 본 개시의 일 실시예에 의하면, 통신 모듈(210)은, 예컨대 사용자 입력 수신 모듈(202) 및 센서 모듈(204) 상에서 획득된 신호가 소정의 프로토콜에 따라 통신망(104)을 통하여 온라인 대화 서비스 서버(106), 대화형 AI 에이전트 서버(108) 및/또는 외부 서비스 서버로 전송되도록 할 수 있다. 본 개시의 일 실시예에 의하면, 통신 모듈(210)은, 예컨대 통신망(104)을 통하여 온라인 대화 서비스 서버(106), 대화형 AI 에이전트 서버(108) 및/또는 외부 서비스 서버로부터 수신된 각종 신호, 예컨대 음성 및/또는 텍스트 형태의 자연어 응답을 포함한 응답 신호 또는 각종 제어 신호 등을 수신하고, 소정의 프로토콜에 따라 적절한 처리를 수행할 수 있다.According to one embodiment of the present disclosure, the communication module 210 is configured such that the user terminal 102 is connected to the online chat service server 106, the interactive AI agent server 108, and / or via the communication network 104 of FIG. 1. Or to communicate with an external service server. According to an embodiment of the present disclosure, the communication module 210 may be configured such that, for example, signals acquired on the user input receiving module 202 and the sensor module 204 may be connected to the online chat service server through the communication network 104 according to a predetermined protocol. 106, interactive AI agent server 108 and / or external service server. According to one embodiment of the present disclosure, the communication module 210 may, for example, receive various signals received from the online chat service server 106, the interactive AI agent server 108 and / or an external service server via the communication network 104. For example, a response signal or various control signals including a natural language response in voice and / or text form may be received, and appropriate processing may be performed according to a predetermined protocol.

본 개시의 일 실시예에 의하면, 응답 출력 모듈(212)은, 사용자 입력에 대응하는 응답을 시각, 청각 및/또는 촉각 등 다양한 형태로써 출력할 수 있다. 본 개시의 일 실시예에 의하면, 응답 출력 모듈(212)은, 예컨대 LCD, LED, OLED, QLED 등의 기술에 기초한 터치 스크린 등의 각종 디스플레이 장치를 포함하고, 이들 디스플레이 장치를 통해 사용자 입력에 대응하는 시각적 응답, 예컨대 텍스트, 기호, 비디오, 이미지, 하이퍼링크, 애니메이션, 각종 노티스 등을 사용자에게 제시할 수 있다. 본 개시의 일 실시예에 의하면, 응답 출력 모듈(212)은, 예컨대 스피커 또는 헤드셋을 포함하고, 사용자 입력에 대응하는 청각적 응답, 예컨대 음성 및/또는 음향 응답을 스피커 또는 헤드셋을 통해 사용자에게 제공할 수 있다. 본 개시의 일 실시예에 의하면, 응답 출력 모듈(212)는 모션/햅틱 피드백 생성부를 포함하고, 이를 통해 촉각적 응답, 예컨대 모션/햅틱 피드백을 사용자에게 제공할 수 있다. 본 개시의 일 실시예에 의하면, 응답 출력 모듈(212)은, 사용자 입력에 대응하는 텍스트 응답, 음성 응답 및 모션/햅틱 피드백 중 임의의 두 개 이상의 조합을 동시에 제공할 수 있음을 알아야 한다.According to an embodiment of the present disclosure, the response output module 212 may output a response corresponding to a user input in various forms such as visual, auditory, and / or tactile. According to one embodiment of the present disclosure, the response output module 212 includes various display devices such as a touch screen based on technologies such as LCD, LED, OLED, QLED, etc., and responds to user input through these display devices. Visual responses such as text, symbols, videos, images, hyperlinks, animations, various notes, and the like, to the user. According to one embodiment of the present disclosure, the response output module 212 includes, for example, a speaker or a headset, and provides an audible response, such as a voice and / or acoustic response, to the user via the speaker or the headset, corresponding to a user input. can do. According to an embodiment of the present disclosure, the response output module 212 may include a motion / haptic feedback generator, thereby providing a tactile response, eg, motion / haptic feedback, to a user. In accordance with one embodiment of the present disclosure, it should be appreciated that the response output module 212 can simultaneously provide any two or more combinations of text response, voice response, and motion / haptic feedback corresponding to user input.

도 3은, 본 개시의 일 실시예에 따른, 도 1의 대화형 AI 에이전트 서버(108)의 기능적 구성을 개략적으로 도시한 기능 블록도이다. 도시된 바에 의하면, 대화형 에이전트 서버(108)는, 통신 모듈(302), 음성-텍스트 변환(Speech-To-Text; STT) 모듈(304), 자연어 이해(Natural Language Understanding; NLU) 모듈(306), 대화 이해 지식베이스(308), 사용자 데이터베이스(310), 대화 세션 모니터링/개입부(312), 대화 관리 모듈(314), 대화 생성 모듈(316), 및 음성 합성(Text-To-Speech; TTS) 모듈(318)을 포함한다.3 is a functional block diagram schematically illustrating the functional configuration of the interactive AI agent server 108 of FIG. 1, in accordance with an embodiment of the present disclosure. As shown, the interactive agent server 108 may include a communication module 302, a speech-to-text (STT) module 304, a natural language understanding (NLU) module 306. ), Conversation understanding knowledge base 308, user database 310, conversation session monitoring / intervention 312, conversation management module 314, conversation generation module 316, and speech synthesis (Text-To-Speech; TTS) module 318.

본 개시의 일 실시예에 의하면, 통신 모듈(302)은, 소정의 유선 또는 무선 통신 프로토콜에 따라, 통신망(104)을 통하여, 대화형 AI 에이전트 서버(108)가 사용자 단말(102), 온라인 대화 서비스 서버(106) 및/또는 외부 서비스 서버와 통신할 수 있게 한다. 본 개시의 일 실시예에 의하면, 통신 모듈(302)은, 통신망(104)을 통해, 사용자 단말(102) 및/또는 온라인 대화 서비스 서버(106)로부터 전송되어 온, 사용자 입력(예컨대 터치 입력, 음성 입력 및/또는 텍스트 입력 등을 포함하며, 이로써 제한되지 않음)을 수신할 수 있다. 본 개시의 일 실시예에 의하면, 통신 모듈(302)은, 전술한 사용자 입력과 함께 또는 그와 별도로, 통신망(104)을 통해, 사용자 단말(102) 등으로부터 전송되어 온, 사용자 단말(102)의 상태 정보를 수신할 수 있다. 본 개시의 일 실시예에 의하면, 상태 정보는, 예컨대 전술한 사용자 입력 당시의 해당 사용자 단말(102)에 관련된 여러가지 상태 정보(예컨대, 사용자 단말(102)의 물리적 상태, 사용자 단말(102)의 소프트웨어 및/또는 하드웨어 상태, 사용자 단말(102) 주위의 환경 상태 정보 등)일 수 있다. 본 개시의 일 실시예에 의하면, 통신 모듈(302)은, 또한, 위 수신된 사용자 입력에 대응하여 대화형 AI 에이전트 서버(108)에서 생성된 대화 응답(예컨대, 음성 및/또는 텍스트 형태의 자연어 대화 응답 등) 및/또는 제어 신호를, 통신망(104)을 통해, 사용자 단말(102) 및/또는 온라인 대화 서비스 서버(106)로 전달하기 위해 필요한 적절한 조치를 수행할 수 있다.According to one embodiment of the present disclosure, the communication module 302 is configured such that the interactive AI agent server 108 communicates with the user terminal 102 via the communication network 104 according to a predetermined wired or wireless communication protocol. Enable communication with the service server 106 and / or external service server. According to one embodiment of the present disclosure, the communication module 302 is a user input (eg, touch input, transmitted from the user terminal 102 and / or the online chat service server 106) via the communication network 104. Voice input and / or text input, and the like, but not limited thereto). According to one embodiment of the present disclosure, the communication module 302 is transmitted from the user terminal 102 or the like via the communication network 104, together with or separately from the user input described above, to the user terminal 102. It can receive the state information of. According to one embodiment of the present disclosure, the state information may include, for example, various state information related to the corresponding user terminal 102 at the time of the user input (for example, the physical state of the user terminal 102 and the software of the user terminal 102). And / or hardware status, environmental status information around the user terminal 102, and the like. According to one embodiment of the present disclosure, the communication module 302 may further include a conversation response generated by the interactive AI agent server 108 in response to the received user input (eg, natural language in the form of voice and / or text). Chat response, etc.) and / or control signals, may be performed through the communication network 104, appropriate measures necessary to communicate to the user terminal 102 and / or the online chat service server 106.

본 개시의 일 실시예에 의하면, STT 모듈(304)은, 통신 모듈(302)을 통해 수신된 사용자 입력 중 음성 입력을 수신하고, 수신된 음성 입력을 패턴 매칭 등에 기초하여 텍스트 데이터로 변환할 수 있다. 본 개시의 일 실시예에 의하면, STT 모듈(304)은, 사용자의 음성 입력으로부터 특징을 추출하여 특징 벡터열을 생성할 수 있다. 본 개시의 일 실시예에 의하면, STT 모듈(304)은, DTW(Dynamic Time Warping) 방식이나 HMM 모델(Hidden Markov Model), GMM 모델(Gaussian-Mixture Mode), 딥 신경망 모델, n-gram 모델 등의 다양한 통계적 모델에 기초하여, 텍스트 인식 결과, 예컨대 단어들의 시퀀스를 생성할 수 있다. 본 개시의 일 실시예에 의하면, STT 모듈(304)은, 수신된 음성 입력을 패턴 매칭에 기초하여 텍스트 데이터로 변환할 때, 후술하는 사용자 데이터베이스(310)의 각 사용자 데이터를 참조할 수 있다.According to an embodiment of the present disclosure, the STT module 304 may receive a voice input among user inputs received through the communication module 302 and convert the received voice input into text data based on pattern matching or the like. have. According to one embodiment of the present disclosure, the STT module 304 may generate a feature vector sequence by extracting features from a user's voice input. According to an embodiment of the present disclosure, the STT module 304 may include a dynamic time warping (DTW) method, a HMM model (Hidden Markov Model), a GMM model (Gaussian-Mixture Mode), a deep neural network model, an n-gram model, and the like. Based on a variety of statistical models of, a text recognition result, such as a sequence of words, can be generated. According to an embodiment of the present disclosure, when converting the received voice input into text data based on pattern matching, the STT module 304 may refer to each user data of the user database 310 described later.

본 개시의 일 실시예에 의하면, NLU 모듈(306)은, 통신 모듈(302) 또는 STT 모듈(304)로부터 텍스트 입력을 수신할 수 있다. 본 개시의 일 실시예에 의하면, NLU 모듈(306)에서 수신되는 텍스트 입력은, 예컨대 통신 모듈(302)에서 통신망(104)을 통하여 사용자 단말(102) 및/또는 온라인 대화 서비스 서버(106)로부터 수신되었던 사용자 텍스트 입력, 또는 통신 모듈(302)에서 수신된 사용자 음성 입력으로부터 STT 모듈(304)에서 생성된 텍스트 인식 결과, 예컨대 단어들의 시퀀스일 수 있다. 본 개시의 일 실시예에 의하면, NLU 모듈(306)은, 텍스트 입력을 수신하는 것과 함께 또는 그 이후에, 해당 사용자 입력과 연관된 상태 정보, 예컨대 해당 사용자 입력 당시의 사용자 단말(102)의 상태 정보 등을 수신할 수 있다. 전술한 바와 같이, 상태 정보는, 예컨대 사용자 단말(102)에서 사용자 음성 입력 및/또는 텍스트 입력 당시의 해당 사용자 단말(102)에 관련된 여러가지 상태 정보(예컨대, 사용자 단말(102)의 물리적 상태, 소프트웨어 및/또는 하드웨어 상태, 사용자 단말(102) 주위의 환경 상태 정보 등)일 수 있다.According to one embodiment of the present disclosure, the NLU module 306 may receive a text input from the communication module 302 or the STT module 304. According to one embodiment of the present disclosure, text input received at the NLU module 306 is received from the user terminal 102 and / or the online chat service server 106 via the communication network 104, for example, in the communication module 302. It may be a text recognition result, eg, a sequence of words, generated at STT module 304 from a user text input that was received, or from a user voice input received at communication module 302. According to one embodiment of the present disclosure, the NLU module 306, along with or after receiving the text input, state information associated with the user input, such as state information of the user terminal 102 at the time of the user input. And the like. As described above, the status information may include, for example, various status information related to the corresponding user terminal 102 at the time of user voice input and / or text input (eg, physical state of the user terminal 102 and software). And / or hardware status, environmental status information around the user terminal 102, and the like.

본 개시의 일 실시예에 의하면, NLU 모듈(306)은, 후술하는 대화 이해 지식베이스(308)에 기초하여, 위 수신된 텍스트 입력을 하나 이상의 사용자 인텐트(intent)에 대응시킬 수 있다. 본 개시의 일 실시예에 의하면, 여기서 사용자 인텐트는, 그 사용자 인텐트에 따라 대화형 AI 에이전트 서버(108)에 의해 이해되고 수행될 수 있는 일련의 동작(들)과 연관될 수 있다. 본 개시의 일 실시예에 의하면, NLU 모듈(306)은, 수신된 텍스트 입력을 하나 이상의 사용자 인텐트에 대응시킴에 있어서 전술한 상태 정보를 참조할 수 있다. 본 개시의 일 실시예에 의하면, NLU 모듈(306)은, 수신된 텍스트 입력을 하나 이상의 사용자 인텐트에 대응시킴에 있어서 후술하는 사용자 데이터베이스(310)의 각 사용자 데이터를 참조할 수 있다.According to one embodiment of the present disclosure, the NLU module 306 may map the received text input to one or more user intents based on the conversation understanding knowledge base 308 described below. According to one embodiment of the present disclosure, a user intent here may be associated with a series of action (s) that can be understood and performed by the interactive AI agent server 108 in accordance with the user intent. According to one embodiment of the present disclosure, the NLU module 306 may refer to the aforementioned state information in mapping the received text input to one or more user intents. According to one embodiment of the present disclosure, the NLU module 306 may refer to respective user data of the user database 310 described below in mapping the received text input to one or more user intents.

본 개시의 일 실시예에 의하면, 대화 이해 지식베이스(308)는, 예컨대 미리 정의된 온톨로지 모델을 포함할 수 있다. 본 개시의 일 실시예에 의하면, 온톨로지 모델은, 예컨대 노드들 간의 계층 구조로 표현될 수 있는데, 각 노드는 사용자의 인텐트에 대응한 "인텐트" 노드 또는 "인텐트" 노드에 링크된 하위 "속성" 노드 중 하나일 수 있다. 본 개시의 일 실시예에 의하면, 온톨로지 모델은, 노드의 추가나 삭제, 또는 노드 간의 관계의 수정 등에 의해 동적으로 변경될 수 있다. 본 개시의 일 실시예에 의하면, 대화 이해 지식베이스(308)는, 예컨대 대화형 AI 에이전트 시스템이 이해하고 그에 대응한 동작을 수행할 수 있는 모든 인텐트들에 각각 대응하는 도메인들을 포함하도록 구성될 수 있다. According to one embodiment of the present disclosure, conversation understanding knowledge base 308 may include, for example, a predefined ontology model. According to one embodiment of the present disclosure, the ontology model may be represented, for example, in a hierarchical structure between nodes, each node being a "intent" node or a child linked to an "intent" node corresponding to the user's intent. It may be one of the "attribute" nodes. According to an embodiment of the present disclosure, the ontology model may be dynamically changed by adding or deleting nodes, or modifying relationships between nodes. According to one embodiment of the present disclosure, the conversation understanding knowledge base 308 may be configured to include domains corresponding to all intents, for example, that the interactive AI agent system can understand and perform operations corresponding thereto. Can be.

본 개시의 일 실시예에 의하면, 온톨로지 모델 내의 각 도메인의 인텐트 노드 및 속성 노드들은, 그에 대응하는 사용자 인텐트 또는 속성들에 관련된 단어들 및/또는 구절들과 각각 연관될 수 있다. 본 개시의 일 실시예에 의하면, 대화 이해 지식베이스(308)은, 온톨로지 모델을, 계층 구조의 노드들과, 각 노드 별로 연관된 단어들 및/또는 구절들의 집합으로 구성된, 예컨대 어휘 사전 형태(구체적으로 도시되지 않음)로 구현할 수 있고, NLU 모듈(306)은 이와 같이 어휘 사전 형태로 구현된 온톨로지 모델에 기초하여 사용자 인텐트를 결정할 수 있다. 예컨대, 본 개시의 일 실시예에 의하면, NLU 모듈(306)은, 텍스트 입력 또는 단어들의 시퀀스를 수신하면, 그 시퀀스 내의 각 단어들이 온톨로지 모델 내의 어떤 도메인의 어떤 노드들에 연관되는지 결정할 수 있고, 그러한 결정에 기초하여 대응하는 도메인, 즉 사용자 인텐트를 결정할 수 있다. According to one embodiment of the present disclosure, intent nodes and attribute nodes of each domain in the ontology model may be associated with words and / or phrases related to corresponding user intents or attributes, respectively. According to one embodiment of the present disclosure, the dialogue understanding knowledge base 308 comprises an ontology model consisting of nodes in a hierarchy and a set of words and / or phrases associated with each node, for example in the form of a lexical dictionary (specific (Not shown), the NLU module 306 may determine the user intent based on the ontology model implemented in the form of a lexical dictionary. For example, according to one embodiment of the present disclosure, upon receiving text input or a sequence of words, the NLU module 306 may determine which words of which domain in the ontology model are associated with each word in the sequence, Based on such a determination, the corresponding domain, ie user intent, can be determined.

본 개시의 일 실시예에 의하면, 플랫폼변환 데이터베이스(320)는, 각 메신저 플랫폼별 데이터를 저장 및 관리하는 데이터베이스일 수 있다. 본 개시의 일 실시예에 의하면, 플랫폼변환 데이터베이스(320)에 포함되는 각 플랫폼별 데이터는, 예컨대 각 플랫폼별로 멀티미디어 컨텐츠, 리스트, 이미지, 버튼, 투표 등 항목 별 지원가능여부, 제한 사항, 채널 별 정보를 포함할 수 있다. According to an embodiment of the present disclosure, the platform conversion database 320 may be a database that stores and manages data for each messenger platform. According to an embodiment of the present disclosure, the platform-specific data included in the platform transformation database 320 may support, for example, multimedia content, list, image, button, voting for each platform, etc. for each platform. May contain information.

본 개시의 일 실시예에 의하면, 사용자 데이터베이스(310)는, 각 사용자별 데이터를 저장 및 관리하는 데이터베이스일 수 있다. 본 개시의 일 실시예에 의하면, 사용자 데이터베이스(310)에 포함되는 각 사용자별 데이터는, 예컨대 각 사용자별로 해당 사용자의 이전 대화/거동 기록, 해당 사용자를 위한 이전의 주문 또는 예약 기록(예컨대, 이전 주문 또는 예약 업체/품목 정보, 이전 주문 상품이나 음식의 배송 주소 정보, 해당 사용자에 의하여 입력된 결제 정보 등 이전에 행해진 주문 또는 예약에 관련된 각종 기록), 사용자의 발음 특징 정보, 사용자 어휘 선호도, 사용자의 소재지, 설정 언어, 연락처/친구 목록, 기타 다양한 사용자 정보를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 사용자 데이터베이스(310)는, 각 사용자별 온라인 대화 서비스의 친구 목록 데이터 및 온라인 대화 서비스의 친구 목록간의 관계 데이터를 저장 및 관리하는 관계데이터베이스를 포함할 수 있다. 본 개시의 일 실시예에 의하면, 관계데이터베이스에 포함된 사용자별 친구 목록 데이터 및 친구 목록간의 관계 데이터는, 예컨대 각 온라인 대화 서비스 별로 친구의 식별자(ID) 목록, 및 온라인 대화 서비스 간의 식별자 관계 정보를 포함할 수 있다. According to an embodiment of the present disclosure, the user database 310 may be a database that stores and manages data for each user. According to one embodiment of the present disclosure, each user-specific data included in the user database 310 may, for example, record a previous conversation / behavior of the user for each user, a previous order or reservation record for the user (eg, a previous transfer). Order or booking company / item information, shipping address information of previous orders or foods, payment information entered by the user, and other records related to previous orders or reservations), user's pronunciation feature information, user vocabulary preferences, user It may include your location, your preferred language, your contact / friend list, and a variety of other user information. According to an embodiment of the present disclosure, the user database 310 may include a relational database that stores and manages relationship data between friend list data of each user's online chat service and friend list of the online chat service. According to an embodiment of the present disclosure, the friend list data for each user and the relationship data between the friend list included in the relationship database may include, for example, an identifier (ID) list of a friend for each online chat service, and identifier relationship information between the online chat service. It may include.

본 개시의 일 실시예에 의하면, 전술한 바와 같이, STT 모듈(304)은, 음성 입력을 텍스트 데이터로 변환할 때 사용자 데이터베이스(310)의 각 사용자 데이터, 예컨대 각 사용자별 발음 특징을 참조함으로써, 보다 정확한 텍스트 데이터를 얻을 수 있다. 본 개시의 일 실시예에 의하면, NLU 모듈(306)은, 사용자 인텐트를 결정할 때 사용자 데이터베이스(310)의 각 사용자 데이터, 예컨대 각 사용자별 특징이나 맥락을 참조함으로써, 보다 정확한 사용자 인텐트 결정을 할 수 있다. 본 개시의 일 실시예에 의하면, 후술하는 바와 같이, 대화 생성 모듈(316)은, 대화 응답의 생성시, 사용자 데이터베이스(310)의 사용자 데이터를 참조할 수 있다.According to an embodiment of the present disclosure, as described above, the STT module 304 refers to each user data of the user database 310, for example, a pronunciation characteristic of each user, when converting a voice input into text data. You can get more accurate text data. According to an embodiment of the present disclosure, the NLU module 306 refers to each user data of the user database 310, for example, a feature or context of each user, in determining the user intent, thereby making more accurate user intent determination. can do. According to one embodiment of the present disclosure, as described below, the conversation generating module 316 may refer to user data of the user database 310 when generating a conversation response.

본 도면에서는, 각 사용자별 데이터를 저장 및 관리하는 사용자 데이터베이스(310)가 대화형 AI 에이전트 서버(108)에 배치되는 것으로 도시되어 있으나, 본 발명이 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 각 사용자별 특징적 데이터를 저장 및 관리하는 사용자 데이터베이스(310)는, 예컨대 사용자 단말(102)에 존재할 수도 있고, 사용자 단말(102) 및 대화형 AI 에이전트 서버(108)에 분산되어 배치될 수도 있음을 알아야 한다.In this figure, a user database 310 for storing and managing data for each user is illustrated as being arranged in the interactive AI agent server 108, but the present invention is not limited thereto. According to another embodiment of the present disclosure, a user database 310 for storing and managing characteristic data for each user may exist, for example, in the user terminal 102, and the user terminal 102 and the interactive AI agent server 108. It should be noted that they may be distributed in

본 개시의 일 실시예에 의하면, 대화 세션 모니터링/개입부(312)는, 온라인 대화 서비스 서버(106)를 통해 복수의 사용자 단말(102)들 간에 수립된 대화 세션 상의 각 대화 항목, 즉 각 사용자 입력을 모니터링할 수 있다. 본 개시의 일 실시예에 의하면, 대화 세션 모니터링/개입부(312)는, 온라인 대화 서비스 서버(106)를 통한 복수의 사용자 단말(102)들 간의 대화 세션 상에서, 각 사용자 단말(102)로부터의 대화 항목, 즉 각 사용자 입력에 기초하여, NLU 모듈(306)로부터 획득된 각 대응하는 사용자 인텐트를 결정할 수 있다. According to one embodiment of the present disclosure, the chat session monitoring / intervention 312 is configured for each chat item on the chat session established between the plurality of user terminals 102 via the online chat service server 106, that is, each user. The input can be monitored. According to one embodiment of the present disclosure, the chat session monitoring / intervention 312 is provided from each user terminal 102 on a chat session between the plurality of user terminals 102 via the online chat service server 106. Based on the conversation item, ie, each user input, each corresponding user intent obtained from the NLU module 306 may be determined.

본 개시의 일 실시예에 의하면, 대화 세션 모니터링/개입부(312)는, 사용자 인텐트에 기초하고, 소정의 기준에 따라, 대화형 AI 에이전트 서버(108)가 해당 대화 세션에 개입해야 할 상황인지 여부를 결정할 수 있다. 본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는, 예컨대 복수의 사용자 단말(102)들 간의 대화 세션 상에서 획득된 하나 이상의 사용자 입력에 대응하는 하나 이상의 사용자 인텐트가 그 사용자 단말(102)에서 사용하는 온라인 대화 서비스를 통해 상대방 단말로 대화 메시지를 전달하는 것인 경우, 해당 대화 세션에 개입하여 필요한 서비스를 제공해야 하는 것으로 미리 정해 둘 수 있다.According to one embodiment of the present disclosure, the conversation session monitoring / intervention unit 312 is based on the user intent and according to a predetermined criterion, the situation in which the interactive AI agent server 108 should intervene in the conversation session. Can be determined. According to one embodiment of the present disclosure, the interactive AI agent server 108 may include one or more user intents corresponding to one or more user inputs obtained, for example, on a conversation session between the plurality of user terminals 102. When the conversation message is transmitted to the counterpart terminal through the online conversation service used at 102, it may be determined in advance that the necessary service should be provided by intervening in the conversation session.

본 개시의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는, 예컨대 복수의 사용자 단말(102)들 간의 대화 세션 상에서 획득된 하나 이상의 사용자 입력에 대응하는 하나 이상의 사용자 인텐트가 그 사용자 단말(102)들 모두 또는 일부를 위한 소정의 주문 또는 예약의 실행을 희망하는 것인 경우(그러나, 본 개시가 이로써 제한되는 것은 아님), 해당 대화 세션에 개입하여 필요한 서비스를 제공해야 하는 것으로 미리 정해 둘 수 있다.According to one embodiment of the present disclosure, the interactive AI agent server 108 may include one or more user intents corresponding to one or more user inputs obtained, for example, on a conversation session between the plurality of user terminals 102. If it is desired to execute a given order or reservation for all or some of the (102) (but this disclosure is not so limited), it is determined in advance that it must intervene in the conversation session to provide the necessary services. You can put it.

본 개시의 일 실시예에 의하면, 대화 세션 모니터링/개입부(312)는, 사용자 인텐트에 기초하여 대화형 AI 에이전트 서버(108)가 대화 세션에 개입해야 하는 것으로 결정한 경우, 후술하는 대화 관리 모듈(314) 및 대화 생성 모듈(316) 등에 의해 생성된 대화 응답 등이 온라인 대화 서비스 서버(106)를 통한 해당 대화 세션 상에서 제공되도록 할 수 있다. According to an embodiment of the present disclosure, when the conversation session monitoring / intervention unit 312 determines that the interactive AI agent server 108 should intervene in the conversation session based on the user intent, the conversation management module described below. 314 and the conversation response generated by the conversation creation module 316 or the like may be provided on the corresponding conversation session through the online conversation service server 106.

본 개시의 일 실시예에 의하면, 대화 관리 모듈(314)은, NLU 모듈(306)에 의해 결정된 사용자 인텐트에 따라, 그에 대응하는 일련의 동작 흐름을 생성할 수 있다. 본 개시의 일 실시예에 의하면, 대화 관리 모듈(314)은, 소정의 대화 흐름 관리 모델에 기초하여, 예컨대 NLU 모듈(306)로부터 수신된 사용자 인텐트에 대응하여 어떠한 동작, 예컨대 어떠한 대화 진행 및/또는 태스크 수행을 행하여야 할지를 결정하고, 그에 따른 세부 동작 흐름을 생성할 수 있다.According to one embodiment of the present disclosure, the conversation management module 314 may generate a series of operation flows corresponding thereto according to the user intent determined by the NLU module 306. According to one embodiment of the present disclosure, the conversation management module 314 is based on a certain conversation flow management model, for example, in response to a user intent received from the NLU module 306, for example, any conversation progress and And / or determine whether to perform a task execution and generate a detailed operational flow accordingly.

본 개시의 일 실시예에 의하면, 대화 생성 모듈(316)은, 대화 관리 모듈(314) 에 의하여 생성된 대화 흐름에 기초하여 사용자에게 제공될 대화 응답을 생성할 수 있다. 본 개시의 일 실시예에 의하면, 대화 생성 모듈(316)은, 대화 응답의 생성에 있어서, 전술한 사용자 데이터베이스(310)의 사용자 데이터(예컨대, 해당 사용자의 이전 대화/거동 기록, 해당 사용자를 위한 이전의 주문 또는 예약 기록, 사용자의 발음 특징 정보, 사용자 어휘 선호도, 사용자의 소재지, 설정 언어, 연락처/친구 목록, 기타 다양한 사용자 특징적 정보 등)를 참조할 수 있다. According to one embodiment of the present disclosure, the conversation generation module 316 may generate a conversation response to be provided to the user based on the conversation flow generated by the conversation management module 314. According to an embodiment of the present disclosure, the conversation generating module 316 may, in the generation of a conversation response, record the user data of the aforementioned user database 310 (eg, a previous conversation / behavior of the user, for the user). History of previous orders or reservations, user's pronunciation feature information, user vocabulary preferences, user's location, setting language, contact / friend list, and various other user characteristic information).

본 개시의 일 실시예에 의하면, TTS 모듈(318)은, 대화 생성 모듈(316)에 의해 사용자 단말(102)로 전송되도록 생성된 대화 응답을 수신할 수 있다. TTS 모듈(318)에서 수신되는 대화 응답은 텍스트 형태를 갖는 자연어 또는 단어들의 시퀀스일 수 있다. 본 개시의 일 실시예에 의하면, TTS 모듈(318)은, 다양한 형태의 알고리즘에 따라, 위 수신된 텍스트 형태의 입력을 음성 형태로 변환할 수 있다.According to one embodiment of the present disclosure, the TTS module 318 may receive a conversation response generated to be sent to the user terminal 102 by the conversation generation module 316. The conversation response received at the TTS module 318 may be a natural language or a sequence of words in text form. According to an embodiment of the present disclosure, the TTS module 318 may convert the received text form input into a speech form according to various types of algorithms.

도 1 내지 3을 참조하여 전술한 본 개시의 실시예에서는, 대화형 AI 에이전트 시스템이 사용자 단말(102)과 대화형 AI 에이전트 서버(108)가 클라이언트-서버 모델, 특히 클라이언트는 오로지 사용자 입출력 기능만을 제공하고 그 외 대화형 AI 에이전트 시스템의 다른 모든 기능들이 서버에 위임된, 소위 "씬 클라이언트-서버 모델"에 기초하여 구현된 것과 같이 설명되어 있으나, 본 발명이 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 대화형 AI 에이전트 시스템은 그 기능들이 사용자 단말과 서버 사이에 분배되어 구현될 수 있고, 또는 그와 달리 사용자 단말 상에 설치된 독립형 애플리케이션으로 구현될 수도 있음을 알아야 한다. 또한, 본 개시의 일 실시예에 따라 대화형 AI 에이전트 시스템이 그 기능들을 사용자 단말과 서버 사이에 분배하여 구현하는 경우, 클라이언트와 서버 사이의 대화형 AI 에이전트 시스템의 각 기능의 분배는 실시예마다 달리 구현될 수 있음을 알아야 한다. 또한, 도 1 내지 3을 참조하여 전술한 본 개시의 실시예에서는, 편의상 특정 모듈이 소정의 동작들을 수행하는 것처럼 설명되었으나, 본 발명이 이로써 제한되는 것은 아니다. 본 개시의 다른 실시예에 의하면, 위 설명에서 어느 특정 모듈에 의해 수행되는 것과 같이 설명된 동작들이, 그와 다른 별개의 모듈에 의해 각각 수행될 수 있음을 알아야 한다.In the embodiment of the present disclosure described above with reference to FIGS. 1 to 3, the interactive AI agent system includes a user terminal 102 and an interactive AI agent server 108 in a client-server model, in particular a client only with user input / output functions. All other functions of the interactive AI agent system are provided as described and implemented based on a so-called "thin client-server model," which is delegated to a server, but the invention is not so limited. According to another embodiment of the present disclosure, the interactive AI agent system should be aware that the functions may be implemented by being distributed between the user terminal and the server, or alternatively, may be implemented as a standalone application installed on the user terminal. . In addition, when the interactive AI agent system distributes the functions between the user terminal and the server according to an embodiment of the present disclosure, the distribution of each function of the interactive AI agent system between the client and the server may vary from embodiment to embodiment. It should be appreciated that other implementations may be made. In addition, in the embodiments of the present disclosure described above with reference to FIGS. 1 to 3, for convenience, a specific module has been described as performing certain operations, but the present invention is not limited thereto. According to another embodiment of the present disclosure, it should be understood that the operations described as performed by any particular module in the above description may be performed by a separate module from each other.

도 4는, 본 개시의 일 실시예에 따른, 대화형 AI 에이전트 서버(108)에 의해 수행되는, 온라인 대화 서비스 서버(106)를 통한 사용자들간 대화 세션의 모니터링 및 복수의 메신저를 이용하는 사용자간 심리스한 채팅 서비스 제공을 위한 예시적 동작 흐름을 보여주는 흐름도이다. 이하, 도 4 를 참조하여, 본 개시의 일 실시예에 의한 대화형 AI 에이전트 서버(108)의 예시적 동작 흐름을 설명하기로 한다.4 illustrates the monitoring of a chat session between users via an online chat service server 106 and seamless communication between users using a plurality of messengers, performed by the interactive AI agent server 108, according to one embodiment of the disclosure. A flow diagram illustrating an exemplary operational flow for providing a chat service. Hereinafter, an exemplary operation flow of the interactive AI agent server 108 according to an embodiment of the present disclosure will be described with reference to FIG. 4.

우선, 도 4를 참조하면, 단계(402)에서, 대화형 AI 에이전트 서버(108)는, 복수의 온라인 대화 서비스 서버(106)를 통하여 복수의 사용자 단말(102)간에 수립된 대화 세션 상에서, 각 사용자 단말(102)로부터 입력되는 각 사용자 입력을 수신할 수 있다. 본 개시의 일 실시예에 의하면, 수신되는 사용자 입력은 각 대응 사용자 단말(102) 상에서 수신된 텍스트 및/또는 음성 입력일 수 있다. 본 발명의 일 실시예에 의하면, 대화형 AI 에이전트 서버(108)는 사용자 단말(102)과 동일하게 온라인 대화 서비스 서버(106)가 제공하는 온라인 대화 서비스에 참여하는 하나의 참여자로서(예컨대 토스봇 친구) 대화방에 존재할 수 있다. 본 발명의 일 실시예에 따르면, 대화형 AI 에이전트 서버(108)는 복수의 온라인 대화 서비스 서버(106) 중 하나가 제공하는 서비스인 제1 메신저상에서 제1 대화방에 참여한 토스봇 친구를 매개로 하여 제1 대화방의 참여자인 사용자의 사용자 단말(102)로부터 입력된 메시지를 수신할 수 있다. First, referring to FIG. 4, in step 402, the interactive AI agent server 108 is configured to communicate with each other on a conversation session established between the plurality of user terminals 102 through the plurality of online chat service servers 106. Each user input received from the user terminal 102 may be received. According to one embodiment of the present disclosure, the received user input may be a text and / or voice input received on each corresponding user terminal 102. According to one embodiment of the present invention, the interactive AI agent server 108 is a participant participating in the online chat service provided by the online chat service server 106 in the same manner as the user terminal 102 (for example, a tossbot). Friends) can exist in chat rooms. According to an embodiment of the present invention, the interactive AI agent server 108 is provided via a tosbot friend who participates in the first chat room on a first messenger, which is a service provided by one of the plurality of online chat service servers 106. A message input from the user terminal 102 of a user who is a participant of the first chat room may be received.

단계(404)에서, 대화형 AI 에이전트 서버(108)는, 복수의 온라인 대화 서비스 서버(106) 중 다른 하나가 제공하는 메신저 중 하나인 제2 메신저상에서, 제1 친구와 연관된 제2 친구를 관계데이터베이스에 기초하여 결정할 수 있다. 본 발명의 일 실시예에 따르면, 관계데이터베이스는 복수의 온라인 대화 서비스 서버(106)에서 각각 제공하는 온라인 대화 서비스 상의 회원정보와 복수의 온라인 대화 서비스 서버(106) 간의 회원정보의 관계를 저장하는 데이터베이스일 수 있다. In step 404, the interactive AI agent server 108 associates a second friend associated with the first friend on a second messenger, which is one of the messengers provided by another one of the plurality of online chat service servers 106. You can decide based on your database. According to one embodiment of the invention, the relational database is a database for storing the relationship between the member information on the online chat service provided by the plurality of online chat service server 106 and the member information between the plurality of online chat service server 106. Can be.

본 발명의 일 실시예에 따르면, 관계데이터베이스는 사용자 단말(102)로부터 입력된 메시지를 기초로 생성될 수 있다. 본 발명의 일 실시예에 따르면, 회원정보 레코드는 온라인 대화 서비스 서버(106)에서 제공하는 온라인 대화 서비스의 대화방으로 통해 사용자 단말(102)로부터 입력될 수 있다. 예컨대 카카오톡 메신저의 대화방에 참여한 제1 친구가 다른 온라인 대화 서비스, 예컨대 페이스북 메신저에서는 어떤 아이디를 사용하는지에 대한 정보를 사용자 단말(102)로부터 입력받을 수 있다. 예컨대, 사용자는 카카오톡 메신저의 토스봇 친구 및 제1 친구가 참여한 제1 대화방에서 "페이스북메신저 hongildong에게 전달해줘"와 같이 연결관계를 제공할 수 있다. 본 발명의 당업자는 관계데이터베이스를 구축하는 다양한 예시 및 그 변형에 대해서 잘 알 수 있을 것이므로 이하 설명은 생략한다. According to an embodiment of the present invention, the relational database may be generated based on a message input from the user terminal 102. According to an embodiment of the present invention, the member information record may be input from the user terminal 102 through the chat room of the online chat service provided by the online chat service server 106. For example, a first friend who participates in a chat room of a KakaoTalk messenger may receive information about an ID of another online chat service, for example, a Facebook messenger, from the user terminal 102. For example, a user may provide a connection such as "deliver to Facebook Messenger hongildong" in a first chat room where a tosbot friend and a first friend of KakaoTalk Messenger participate. Those skilled in the art will be well aware of various examples of constructing a relational database and variations thereof, and thus the following description is omitted.

단계(406)에서, 대화형 AI 에이전트 서버(108)는 제2 메신저 상에 토스봇 친구, 사용자 및 제2 친구를 포함하는 제2 대화방이 있는지를 판정한다. In step 406, the interactive AI agent server 108 determines whether there is a second chat room on the second messenger that includes a tosbot friend, a user, and a second friend.

단계(408)에서, 제2 메신저 상에 제2 대화방이 없는 경우, 대화형 AI 에이전트 서버(108)는 토스봇 친구로 하여금 제2 메신저 상에서 사용자와 제2 친구를 초대하여 제2 대화창을 생성하도록 할 수 있다. 제2 메신저 상에 제2 대화방이 있는 경우, 단계(408)은 생략될 수 있다. In step 408, if there is no second chat room on the second messenger, the interactive AI agent server 108 causes the tosbot friend to invite the user and the second friend on the second messenger to create a second chat window. can do. If there is a second chat room on the second messenger, step 408 may be omitted.

단계(410)에서, 대화형 AI 에이전트 서버(108)는 단계(402)에서 획득한 사용자의 입력을 플랫폼변환 데이터베이스(320)를 기초로 제2 메신저에 적합한 형식으로 변환할 수 있다. 본 발명의 일 실시예에서, 대화형 AI 에이전트 서버(108)는 사용자의 메시지의 유형을 결정하고, 플랫폼변환 데이터베이스를 기초로 상기 제2 메신저에 적합한 형식으로 상기 메시지를 전환 메시지로 전환할 수 있다. 본 발명의 일 실시예에서, 대화형 AI 에이전트 서버(108)는 메시지의 유형을 정의하고, 복수의 메신저 플랫폼 각각에 대해 유형 별로 입력 가능여부 및 변환 규칙을 정의하여 플랫폼변환 데이터베이스에 저장할 수 있다. 본 발명의 일 실시예에서, 대화형 AI 에이전트 서버(108)는 복수의 메신저 플랫폼 중 제1 메신저 플랫폼을 상기 복수의 메신저 플랫폼 중 제2 메신저 플랫폼으로 변환하는 규칙에 대한 정의를 플랫폼변환 데이터베이스에 저장할 수 있다. 본 발명의 일 실시예에서, 메시지의 유형은 텍스트, 이미지, 버튼, 투표, URL, 이모티콘 중 적어도 하나를 포함할 수 있다. 본 발명의 일 실시예에서, 대화형 AI 에이전트 서버(108)는 플랫폼변환 데이터베이스를 기초로, 예컨대, 메시지의 유형이 이모티콘인 경우, 상기 이모티콘을 이미지 형식으로 변환할 수 있다. 본 발명의 일 실시예에서, 대화형 AI 에이전트 서버(108)는 플랫폼변환 데이터베이스를 기초로, 메시지의 유형이 이모티콘인 경우, 이모티콘을 이모티콘과 연관된 이미지로 치환하여 전달할 수 있다. 본 발명의 일 실시예에서, 메시지의 유형이 투표인 경우, 대화형 AI 에이전트 서버(108)는 플랫폼변환 데이터베이스를 기초로, 예컨대, 리스트의 형태로 변환하거나, 이미지로 변환하여 보여주고 그에 대한 입력을 수신하는 등 제2 메신저 플랫폼이 제공하는 형식으로 변환할 수 있고 본 발명이 이에 제한되는 것이 아니다. 본 분야의 당업자라면 각 유형 별로 변환할 수 있는 여러 다양한 형태의 변형을 생각해 낼 수 있으므로 이하 설명은 생략한다. In step 410, the interactive AI agent server 108 may convert the user's input obtained in step 402 into a format suitable for the second messenger based on the platform conversion database 320. In one embodiment of the invention, the interactive AI agent server 108 may determine the type of the user's message, and convert the message into a conversion message in a format suitable for the second messenger based on a platform conversion database. . In an embodiment of the present invention, the interactive AI agent server 108 may define a type of a message, define whether inputs and conversion rules for each type of a plurality of messenger platforms are stored in a platform conversion database. In one embodiment of the present invention, the interactive AI agent server 108 stores a definition of a rule for converting a first messenger platform of a plurality of messenger platforms into a second messenger platform of the plurality of messenger platforms in a platform conversion database. Can be. In one embodiment of the present invention, the type of message may include at least one of a text, an image, a button, a vote, a URL, and an emoticon. In one embodiment of the present invention, the interactive AI agent server 108 may convert the emoticon into an image format based on a platform conversion database, for example, when the type of the message is an emoticon. In an embodiment of the present invention, the interactive AI agent server 108 may transfer the emoticon by replacing the emoticon with an image associated with the emoticon when the message type is an emoticon based on the platform transformation database. In one embodiment of the present invention, if the message type is voting, the interactive AI agent server 108 converts it to a form of a list or converts it to an image based on the platform transformation database, for example, and displays and inputs it. It can be converted into a format provided by the second messenger platform, such as receiving the present invention, and the present invention is not limited thereto. Those skilled in the art will be able to contemplate various types of variations that can be converted for each type, and thus the description is omitted.

단계(412)에서, 대화형 AI 에이전트 서버(108)는 단계(410)에서 변환한 사용자의 입력을 메시지를 토스봇 친구로 하여금 제2 메신저 상의 제2 대화방에 입력하도록 할 수 있다. 본 발명의 일 실시예에 있어서, 대화형 AI 에이전트 서버(108)는 사용자의 입력에 사용자의 식별자를 추가할 수 있다. 예컨대, 사용자가 입력한 메시지가 "잘 지내?"인 경우, 사용자의 식별자, 예컨대 아이디 등을 추가하여 "B 님: 잘 지내?"라는 메시지를 제2 대화방에 입력할 수 있다. In step 412, the interactive AI agent server 108 may cause the tossbo friend to enter a message in the second chat room on the second messenger using the user's input converted in step 410. In one embodiment of the invention, the interactive AI agent server 108 may add the user's identifier to the user's input. For example, when the message input by the user is “how are you doing?”, The message “B like: how are you?” May be input to the second chat room by adding the user's identifier such as an ID.

도 5의 (a) 내지 (d)는, 본 개시의 일 실시예에 따라, 대화형 AI 에이전트 서버(108)가, 온라인 대화 서비스 서버(106)를 통한 사용자들간 대화 세션에 개입하여 복수의 메신저를 이용하는 사용자간 심리스한 채팅 서비스를 제공하는 경우의 예시적 대화방을 보여주는 화면이다. 본 발명의 일 실시예에서, 복수의 메신저는 동종 또는 이종의 메신저일 수 있다. 5A to 5D illustrate a plurality of messengers in which an interactive AI agent server 108 intervenes in a chat session between users through an online chat service server 106, according to an embodiment of the present disclosure. Screen showing an example chat room in the case of providing a seamless chat service between users. In one embodiment of the present invention, the plurality of messengers may be homogeneous or heterogeneous messengers.

도 5의 (a)는 대화방에 참여한 사용자들이 동종 메신저(이하, 제1 메신저)를 사용하는 경우, 사용자들이 사용하고 있는 제1 메신저의 화면을 도시한 도면이고, 도 5의 (b)는 대화방에 참여한 사용자들이 동종 메신저(이하, 제1 메신저)를 사용하는 경우 사용자들이 사용하고 있지 않은 제2의 메신저의 화면을 도시한 도면이다. FIG. 5A is a diagram illustrating a screen of a first messenger used by users when the users participating in the chat room use the same type of messenger (hereinafter, referred to as a first messenger), and FIG. 5B is a chat room. If the user participating in the same type of messenger (hereinafter referred to as the first messenger) is a diagram showing a screen of a second messenger not used by the users.

도 5의 (a)에 도시된 바와 같이, 사용자들이 동종 메신저(제1 메신저)를 사용하는 경우, 제1 메신저 상에서 사용자들의 입력이 이루어지기 때문에 대화형 AI 에이전트 서버(108)는 아무런 응답을 제공하지 않은 채 침묵을 유지하면서 이후 대화를 계속하여 모니터링할 수 있다.As shown in FIG. 5A, when the users use the same type of messenger (first messenger), the interactive AI agent server 108 provides no response since the user's input is made on the first messenger. You can still monitor the conversation afterwards while remaining silent.

도 5의 (b)에 도시된 바와 같이, 제2 메신저 상에서는 사용자들의 입력이 이루어지지 않기 때문에 대화형 AI 에이전트 서버(108)가 토스봇 친구를 통해 제1 메신저에서 이뤄지는 대화를 모니터링하여 제2 메신저에 입력할 수 있다. 본 발명의 일 실시예에 있어서, 대화형 AI 에이전트 서버(108)는 사용자의 입력에 사용자의 식별자를 추가할 수 있다. 본 발명의 일 실시예에 따라, 사용자가 제2메신저를 사용하지 않는 경우, 토스봇 친구는 사용자가 제1 메신저를 사용하여 입력한 내용을 사용자의 식별자와 함께 제2 메신저의 화면에 표시할 수 있다.As shown in (b) of FIG. 5, since the user's input is not made on the second messenger, the interactive AI agent server 108 monitors the conversation made in the first messenger through the tossbo friend and thus the second messenger. You can type in In one embodiment of the invention, the interactive AI agent server 108 may add the user's identifier to the user's input. According to an embodiment of the present invention, when the user does not use the second messenger, the tossbot friend may display the contents input by the user using the first messenger on the screen of the second messenger along with the user's identifier. have.

이와 같이 동작함으로써 대화형 AI 에이전트 서버(108)는 사용자가 복수의 메신저를 사용하는 경우에도 사용자에게 심리스한 채팅 서비스를 제공할 수 있다. 예컨대 A사용자와 B사용자가 카톡 메신저를 통해서 대화하고 이후 페이스북 메신저를 통해서 대화하는 경우, 페이스북 메신저에서도 이전에 카톡 메신저를 통해 대화한 대화 로그를 제공할 수 있다.By doing so, the interactive AI agent server 108 can provide a seamless chat service to the user even when the user uses a plurality of messengers. For example, when user A and user B communicate through katok messenger and then chat through Facebook messenger, Facebook messenger may provide a conversation log previously communicated through katok messenger.

도 5의 (c) 및 도 5의 (d)는, 본 발명의 일 실시예에 따라 대화방에 참여한 사용자들이 이종의 메신저를 사용하는 경우 각각의 메신저의 대화방 화면을 도시한 도면이다. 5C and 5D are diagrams illustrating chat room screens of respective messengers when users participating in chat rooms use heterogeneous messengers according to an exemplary embodiment of the present invention.

도 5의 (c)는 본 발명의 일 실시예에 따라 제1 메신저를 사용하여 메시지를 입력하는 사용자 단말(102: B)의 대화방 화면을 도시하는 도면이다. 도시된 바와 같이, 대화방에는 사용자 단말(102: B)의 사용자인 사용자 B를 포함하여 사용자 A와 토스봇 친구가 참여하고 있다. 본 발명의 일 실시예에 따라, 사용자 단말(102: B)의 제1 메신저 화면은 사용자 단말(102: B)로부터 메시지를 입력받아 메시지 내용을 화면에 표시할 수 있다. FIG. 5C is a diagram illustrating a chat room screen of a user terminal 102 (B) for inputting a message using a first messenger according to an embodiment of the present invention. As shown, the chat room includes a user A and a tossbot friend, including user B, a user of the user terminal 102 (B). According to an embodiment of the present invention, the first messenger screen of the user terminal 102 (B) may receive a message from the user terminal 102 (B) and display the message content on the screen.

도 5의 (d)는 본 발명의 일 실시예에 따라 제2 메신저를 사용하는 사용자 단말(102: A)의 대화방 화면을 도시하는 도면이다. 도시된 바와 같이, 대화방에는 사용자 단말(102: A)의 사용자인 사용자 A를 포함하여, 사용자 B와 토스봇 친구가 참여하고 있다. 본 발명의 일 실시예에 따라, 사용자 단말(102: A)의 제2 메신저 화면은 제1 메신저의 제1 대화창에 사용자 B가 입력한 메시지 내용을 토스봇 친구를 통해 제2 메신저의 제2 대화창에 표시할 수 있다. 도 5의 (c) 및 (d)에 도시된 바와 같이, 본 발명의 일 실시예에 있어서 제1 메신저의 제1 대화창에 입력된 메시지를 제2 메신저의 제2 대화창에 표시하는 경우 메시지와 메시지를 입력한 사용자의 식별자를 함께 표시할 수 있다. FIG. 5D is a diagram illustrating a chat room screen of a user terminal 102 A using a second messenger according to an embodiment of the present invention. As shown, the chat room includes a user B, a user A, a user of the user terminal 102 A, and a tosbot friend. According to one embodiment of the invention, the second messenger screen of the user terminal 102 (A) is a second chat window of the second messenger via the tosbot friend the message content input by the user B in the first chat window of the first messenger Can be marked on. As shown in (c) and (d) of FIG. 5, when the message inputted in the first chat window of the first messenger is displayed on the second chat window of the second messenger, the message and the message are displayed. You can display the identifier of the user who entered.

본 명세서에서는, 주로, 대화형 AI 에이전트 서버(108)가, 특별한 입력 없이, 사용자간 대화 세션에 개입하는 것으로 설명되어 있으나 본 발명이 이로써 제한되는 것은 아님을 알아야 한다. 본 개시의 다른 실시예에 의하면 대화형 AI 에이전트 서버(108)는, 사용자가, 대화 세션 중에 소정의 이름(예컨대, 해당 대화형 AI 에이전트를 지칭하는 것으로 미리 정해진 이름)을 부르는 경우에 비로소 그 대화 세션에 개입하여 심리스한 온라인 대화 서비스를 제공할 수 있다. 다만, 이 경우에도, 대화형 AI 에이전트 서버(108)는, 해당 대화 세션의 각 사용자 입력에 대한 모니터링을 지속하여 수행해왔으므로, 단순히 사용자의 호출에 의해 대화 세션으로의 개입의 최종 확인을 받는다는 의미일 뿐, 사용자가 대화형 AI 에이전트 서버(108)에게 다시 명시적으로 원하는 서비스를 요청할 필요는 없음을 알아야 한다. It is to be noted herein that primarily the interactive AI agent server 108 is described as intervening in a user-to-user conversation session, without special input, but the invention is not so limited. According to another embodiment of the present disclosure, the interactive AI agent server 108 does not communicate when the user calls a predetermined name (eg, a name predetermined to refer to the corresponding interactive AI agent) during the conversation session. Intervene in sessions to provide seamless online chat services. However, even in this case, since the interactive AI agent server 108 has continuously performed monitoring of each user input of the corresponding chat session, it means that the user receives the final confirmation of the intervention into the chat session by simply calling the user. It should be noted that the user does not need to explicitly request the desired service from the interactive AI agent server 108 again.

본 명세서에서는, 주로 화면을 통해 대화 세션의 대화 내용이 제시되는 인스턴트 메시지를 중심으로 설명되었으나, 본 발명이 이로써 제한되는 것은 아니다. 본 발명의 대화 세션은, 예컨대 지능형 스피커 등을 통한 사용자 간 실시간 음성 대화에 기초한 것일 수도 있음을 알아야 한다. In the present specification, the description has been mainly focused on an instant message in which a conversation content of a conversation session is presented on a screen, but the present invention is not limited thereto. It should be appreciated that the conversation session of the present invention may be based on real time voice conversations between users, for example via intelligent speakers.

당업자라면 알 수 있듯이, 본 발명이 본 명세서에 기술된 예시에 한정되는 것이 아니라 본 발명의 범주를 벗어나지 않는 범위 내에서 다양하게 변형, 재구성 및 대체될 수 있다. 본 명세서에 기술된 다양한 기술들은 하드웨어 또는 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수 있음을 알아야 한다.As will be appreciated by those skilled in the art, the present invention is not limited to the examples described herein but may be variously modified, reconfigured and replaced without departing from the scope of the present invention. It should be understood that the various techniques described herein may be implemented by hardware or software, or a combination of hardware and software.

본 개시의 일 실시예에 따른 컴퓨터 프로그램은, 컴퓨터 프로세서 등에 의해 판독 가능한 저장 매체, 예컨대 EPROM, EEPROM, 플래시 메모리장치와 같은 비휘발성 메모리, 내장형 하드 디스크와 착탈식 디스크 같은 자기 디스크, 광자기 디스크, 및 CDROM 디스크 등을 포함한 다양한 유형의 저장 매체에 저장된 형태로 구현될 수 있다. 또한, 프로그램 코드(들)는 어셈블리어나 기계어로 구현될 수 있다. 본 발명의 진정한 사상 및 범주에 속하는 모든 변형 및 변경을 이하의 특허청구범위에 의해 모두 포괄하고자 한다.A computer program according to an embodiment of the present disclosure may include a storage medium readable by a computer processor or the like, such as an EPROM, an EEPROM, a nonvolatile memory such as a flash memory device, a magnetic disk such as an internal hard disk and a removable disk, a magneto-optical disk, and It may be implemented in a form stored in various types of storage media, including a CDROM disk. In addition, the program code (s) may be implemented in assembly or machine language. All modifications and changes that fall within the true spirit and scope of the present invention are intended to be covered by the following claims.

Claims (7)

대화형 AI 에이전트 시스템에 의해 제공되는, 메신저 플랫폼에 관계없이 복수의 메신저를 이용하는 사용자간 다양한 형식의 메시지를 송수신하는 방법으로서,
사용자가 사용하는 복수의 메신저 각각에 대해 상기 사용자의 친구 목록 및 상기 복수의 메신저 각각의 상기 사용자의 친구 목록 간의 연관관계를 저장하는 관계데이터베이스를 생성하는 단계;
상기 복수의 메신저 플랫폼 각각에 대해 메시지 유형별 변환 방법을 저장하는 변환데이터베이스를 생성하는 단계;
상기 사용자의 단말기로부터, 상기 복수의 메신저 중 하나인 제1 메신저 상에서의, 토스봇 친구와 상기 제1 메신저의 친구 목록에 포함된 적어도 하나의 제1 친구를 포함하는 제1 대화방을 통해 상기 사용자의 메시지를 입력받는 단계;
상기 관계데이터베이스에 기초하여, 상기 복수의 메신저 중 하나인 제2 메신저를 사용하는, 상기 제1 친구와 연관된 제2 친구를 결정하는 단계;
상기 사용자의 메시지의 유형을 결정하고, 상기 변환데이터베이스를 기초로 상기 제2 메신저에 적합한 형식으로 상기 메시지를 전환 메시지로 전환하는 단계; 및
상기 토스봇 친구로 하여금 상기 제2 메신저 상에서의, 상기 토스봇 친구, 상기 사용자 및 제2 친구를 포함하는 제2 대화방을 통해 상기 전환 메시지를 전달하도록 하는 단계;
를 포함하는, 복수의 메신저 플랫폼에 관계없이 메시지를 송수신하는 방법.
A method for transmitting and receiving messages in various formats among users using a plurality of messengers regardless of a messenger platform provided by an interactive AI agent system,
Generating a relational database for storing a relation between a friend list of the user and a friend list of the user of each of the plurality of messengers for each of a plurality of messengers used by a user;
Generating a conversion database for storing a message type conversion method for each of the plurality of messenger platforms;
From the terminal of the user via a first chat room on a first messenger that is one of the plurality of messengers, the first chat room comprising a tosbot friend and at least one first friend included in a friend list of the first messenger; Receiving a message;
Determining a second friend associated with the first friend using a second messenger, which is one of the plurality of messengers, based on the relationship database;
Determining a type of the user's message and converting the message into a conversion message in a format suitable for the second messenger based on the conversion database; And
Causing the tossbo friend to forward the diversion message via a second chat room on the second messenger, the second chat room including the tossbo friend, the user and a second friend;
A method comprising transmitting and receiving a message regardless of the plurality of messenger platforms.
제1항에 있어서,
상기 변환데이터베이스를 생성하는 단계는
상기 메시지의 유형을 정의하는 단계; 및
상기 복수의 메신저 플랫폼 각각에 대해 상기 유형 별로 입력 가능여부 및 변환 규칙을 정의하는 단계;
를 포함하는 복수의 메신저 플랫폼에 관계없이 메시지를 송수신하는 방법.
The method of claim 1,
Creating the conversion database is
Defining a type of the message; And
Defining whether or not each of the plurality of messenger platforms can be input for each type and a conversion rule;
How to send and receive messages regardless of the plurality of messenger platform comprising a.
제1항에 있어서,
상기 변환데이터베이스를 생성하는 단계는
상기 메시지의 유형을 정의하는 단계; 및
상기 유형 별로 상기 복수의 메신저 플랫폼 중 제1 메신저 플랫폼을 상기 복수의 메신저 플랫폼 중 제2 메신저 플랫폼으로 변환하는 규칙을 정의하는 단계;
를 포함하는 복수의 메신저 플랫폼에 관계없이 메시지를 송수신하는 방법.
The method of claim 1,
Creating the conversion database is
Defining a type of the message; And
Defining a rule for converting a first messenger platform of the plurality of messenger platforms into a second messenger platform of the plurality of messenger platforms for each type;
How to send and receive messages regardless of the plurality of messenger platform comprising a.
제2항에 있어서,
상기 메시지의 유형은 텍스트, 이미지, 버튼, 투표, URL, 이모티콘 중 적어도 하나를 포함하는 복수의 메신저 플랫폼에 관계없이 메시지를 송수신하는 방법.
The method of claim 2,
And the type of the message is a message, regardless of a plurality of messenger platforms including at least one of text, image, button, voting, URL, emoticon.
제1항에 있어서,
상기 사용자의 메시지의 유형을 결정하고, 상기 변환데이터베이스를 기초로 상기 제2 메신저에 적합한 형식으로 상기 메시지를 전환 메시지로 전환하는 단계는
상기 메시지의 유형이 이모티콘인 경우, 상기 이모티콘을 이미지 형식으로 변환하는 것인 복수의 메신저 플랫폼에 관계없이 메시지를 송수신하는 방법.
The method of claim 1,
Determining the type of the user's message and converting the message into a conversion message in a format suitable for the second messenger based on the conversion database;
If the message type is an emoticon, converting the emoticon into an image format.
제1항에 있어서,
상기 사용자의 메시지의 유형을 결정하고, 상기 변환데이터베이스를 기초로 상기 제2 메신저에 적합한 형식으로 상기 메시지를 전환 메시지로 전환하는 단계는
상기 메시지의 유형이 이모티콘인 경우, 상기 이모티콘을 상기 이모티콘과 연관된 이미지로 치환하는 것인 복수의 메신저 플랫폼에 관계없이 메시지를 송수신하는 방법.
The method of claim 1,
Determining the type of the user's message and converting the message into a conversion message in a format suitable for the second messenger based on the conversion database;
If the message type is an emoticon, replacing and replacing the emoticon with an image associated with the emoticon.
하나 이상의 명령어를 포함하는 컴퓨터 판독 가능 기록 매체로서,
상기 하나 이상의 명령어는, 컴퓨터에 의해 실행되는 경우, 상기 컴퓨터로 하여금, 제1항 내지 제6항 중 어느 한 항의 방법을 수행하게 하는, 컴퓨터 판독 가능 기록 매체.
A computer readable recording medium comprising one or more instructions,
The one or more instructions, when executed by a computer, cause the computer to perform the method of any one of claims 1 to 6.
KR1020180037857A 2018-04-02 2018-04-02 Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium KR102017544B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180037857A KR102017544B1 (en) 2018-04-02 2018-04-02 Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180037857A KR102017544B1 (en) 2018-04-02 2018-04-02 Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium

Publications (1)

Publication Number Publication Date
KR102017544B1 true KR102017544B1 (en) 2019-10-21

Family

ID=68460019

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180037857A KR102017544B1 (en) 2018-04-02 2018-04-02 Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium

Country Status (1)

Country Link
KR (1) KR102017544B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210096878A (en) 2020-01-29 2021-08-06 주식회사 컴홈 Real time payment information provision system on messenger service platform
KR20210122431A (en) 2020-04-01 2021-10-12 주식회사 컴홈 Machining system for artificial intelligence processing on service platform

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0153533B1 (en) 1989-11-06 1998-10-15 데일 리챠드 마틴 Safety tire and take apart wheel construction
KR20120030266A (en) 2010-09-20 2012-03-28 삼성전자주식회사 Integrated message transmitting and receiving method and apparatus using portable device
KR101712180B1 (en) * 2015-12-29 2017-03-06 라인 가부시키가이샤 Computer Readable Recording Medium with Program, method and apparatus for Transmitting/Receiving Message

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0153533B1 (en) 1989-11-06 1998-10-15 데일 리챠드 마틴 Safety tire and take apart wheel construction
KR20120030266A (en) 2010-09-20 2012-03-28 삼성전자주식회사 Integrated message transmitting and receiving method and apparatus using portable device
KR101712180B1 (en) * 2015-12-29 2017-03-06 라인 가부시키가이샤 Computer Readable Recording Medium with Program, method and apparatus for Transmitting/Receiving Message

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210096878A (en) 2020-01-29 2021-08-06 주식회사 컴홈 Real time payment information provision system on messenger service platform
KR20210122431A (en) 2020-04-01 2021-10-12 주식회사 컴홈 Machining system for artificial intelligence processing on service platform

Similar Documents

Publication Publication Date Title
KR101891496B1 (en) Interactive ai agent system and method for actively monitoring and joining a dialogue session among users, computer readable recording medium
KR101891492B1 (en) Method and computer device for providing contextual natural language conversation by modifying plain response, and computer readable recording medium
KR102017544B1 (en) Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium
KR101914583B1 (en) Interactive ai agent system and method for actively providing a security related service based on monitoring of a dialogue session among users via the dialogue session or a separate session, computer readable recording medium
KR101891498B1 (en) Method, computer device and computer readable recording medium for multi domain service resolving the mixture of multi-domain intents in interactive ai agent system
US20200335097A1 (en) Method and computer apparatus for automatically building or updating hierarchical conversation flow management model for interactive ai agent system, and computer-readable recording medium
KR20190094087A (en) User terminal including a user customized learning model associated with interactive ai agent system based on machine learning, and computer readable recording medium having the customized learning model thereon
KR102004092B1 (en) Method for generating relation database for providing seamless chatting service among users using multiple messanger program, computer readable recording medium
KR101934582B1 (en) Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium
KR20190094080A (en) Interactive ai agent system and method for actively providing an order or reservation service based on monitoring of a dialogue session among users, computer readable recording medium
KR20190103951A (en) Method, computer device and computer readable recording medium for building or updating knowledgebase models for interactive ai agent systen, by labeling identifiable but not-learnable data in training data set
KR101970899B1 (en) Method and computer device for providing improved speech-to-text based on context, and computer readable recording medium
KR101945983B1 (en) Method for determining a best dialogue pattern for achieving a goal, method for determining an estimated probability of achieving a goal at a point of a dialogue session associated with a conversational ai service system, and computer readable recording medium
KR101959292B1 (en) Method and computer device for providing improved speech recognition based on context, and computer readable recording medium
KR20190104853A (en) Interactive ai agent system and method for providing seamless chatting service among users using multiple messanger program, computer readable recording medium
KR101924217B1 (en) Interactive ai agent system and method for actively providing an order or reservation service based on monitoring of a dialogue session among users and using previous history occuring in the dialogue session, computer readable recording medium
KR20190103928A (en) Interactive ai agent system and method for actively providing an order or reservation service based on monitoring of a dialogue session among users and using previous history occuring in the dialogue session, computer readable recording medium
US20200364271A1 (en) Method and computer device for providing natural language conversation by providing interjection response in timely manner, and computer-readable recording medium
US11302332B2 (en) Method, computer device and computer readable recording medium for providing natural language conversation by timely providing substantial reply
KR101950387B1 (en) Method, computer device and computer readable recording medium for building or updating knowledgebase models for interactive ai agent systen, by labeling identifiable but not-learnable data in training data set
KR20190103927A (en) Interactive ai agent system and method for actively providing a security related service based on monitoring of a dialogue session among users via the dialogue session or a separate session, computer readable recording medium
KR102185925B1 (en) Method, computer device and computer readable recording medium for creating a trascation on a blockchain network, via a conversation understanding service server
KR101932264B1 (en) Method, interactive ai agent system and computer readable recoding medium for providing intent determination based on analysis of a plurality of same type entity information
KR101914582B1 (en) Method, interactive ai agent system and computer readable recoding medium for providing semantic-free user voiceprint authentication having enhanced security
KR101924215B1 (en) Method of generating a dialogue template for conversation understainding ai service system having a goal, and computer readable recording medium

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant