KR102135077B1 - System for providing topics of conversation in real time using intelligence speakers - Google Patents
System for providing topics of conversation in real time using intelligence speakers Download PDFInfo
- Publication number
- KR102135077B1 KR102135077B1 KR1020180134168A KR20180134168A KR102135077B1 KR 102135077 B1 KR102135077 B1 KR 102135077B1 KR 1020180134168 A KR1020180134168 A KR 1020180134168A KR 20180134168 A KR20180134168 A KR 20180134168A KR 102135077 B1 KR102135077 B1 KR 102135077B1
- Authority
- KR
- South Korea
- Prior art keywords
- providing
- conversation
- artificial intelligence
- voice
- intelligence speaker
- Prior art date
Links
- 238000013473 artificial intelligence Methods 0.000 claims abstract description 149
- 238000000034 method Methods 0.000 claims abstract description 40
- 239000000284 extract Substances 0.000 claims abstract description 9
- 238000000605 extraction Methods 0.000 claims abstract description 5
- 238000006243 chemical reaction Methods 0.000 claims abstract description 4
- 239000000463 material Substances 0.000 claims description 73
- 230000002996 emotional effect Effects 0.000 claims description 34
- 206010027940 Mood altered Diseases 0.000 claims description 9
- 230000007510 mood change Effects 0.000 claims description 9
- 238000000926 separation method Methods 0.000 claims description 5
- 230000008569 process Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000008901 benefit Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000007405 data analysis Methods 0.000 description 3
- 230000008451 emotion Effects 0.000 description 3
- 230000036651 mood Effects 0.000 description 3
- 238000003058 natural language processing Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013332 literature search Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
- H04R1/028—Casings; Cabinets ; Supports therefor; Mountings therein associated with devices performing functions other than acoustics, e.g. electric candles
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Economics (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
본 발명의 일실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치 및 방법이 개시된다. 본 발명의 일실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치는 상기 인공지능 스피커를 통해서 수신한 복수의 사용자 간 대화 음성을 텍스트로 변환하는 텍스트 변환부와, 상기 텍스트를 분석하여 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 기초로 대화 주제를 추출하는 대화 주제 추출부와, 상기 대화 주제를 기초로 인터넷 검색하여 연관된 이야깃거리를 획득하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 이야깃거리 제공부를 포함하여 구성된다.Disclosed is an apparatus and method for providing a real-time talking distance using an artificial intelligence speaker according to an embodiment of the present invention. An apparatus for providing a real-time talking distance using an artificial intelligence speaker according to an embodiment of the present invention includes a text conversion unit for converting a conversation voice between a plurality of users received through the artificial intelligence speaker into text, and analyzing the text to determine a predetermined A conversation topic extraction unit that extracts a conversation topic based on a vocabulary that appears at a frequency above a threshold, and searches the Internet based on the conversation topic to obtain a related story and delivers it to the artificial intelligence speaker, or to a predefined user terminal It is configured to include a talking distance provider.
Description
본 발명은 실시간 이야깃거리 제공 시스템에 관한 것으로, 더욱 상세하게는 인공지능 스피커를 이용한 실시간 이야깃거리 제공 시스템에 관한 것이다.The present invention relates to a real-time talking distance providing system, and more particularly, to a real-time talking distance providing system using an artificial intelligence speaker.
현대인은 바쁘게 생활을 하다 보면, 여러 가지 상황에서 잘 모르는 다양한 사람을 만나서 대화해야 하는 경우가 있다. 자주 만나는 친구나 가족은 대부분 공통 화제가 있기 때문에, 대화를 이어나가기 쉽지만, 형식적인 자리에서 업무상 만난 사람이거나 어쩌다 한번 보는 사람들은 대화 주제를 찾기 어려워서, 날씨나 식사 이야기를 조금 한 후에 어색한 침묵이 이어질 수 있다. 이런 상황에서 재치 있는 입담을 갖는 제3자가 나타나서 침묵을 깨주기를 은긴히 기대하기도 한다.When living in a hurry, modern people sometimes have to meet and talk to various people they do not know in various situations. Most of the friends and family you meet often have a common topic, so it's easy to keep up with the conversation, but it's hard to find the topic of the conversation if you're someone you've met on the job in a formal place, or sometime you see it. Can. In this situation, a third party with a witty talk may appear and secretly expect to break the silence.
이런 상황에 대비해서, 어떤 사람들은 재미있는 무용담이나 일화를 메모해 놓았다가 필요 시 활용하거나, 유머 사이트를 검색하여 대화에 필요한 이야깃거리를 수집하기도 한다. 그러나 최근에는 스마트폰 이용자가 늘어나면서, 대화가 끊기면 각자 스마트폰만 볼뿐, 대화를 이어나가기 위한 시도조차 하지 않는 경우가 많아지고, 사람들은 점점 자신만의 세계로 고립되는 문제가 있다. To prepare for this situation, some people take notes of funny saga or anecdotes and use them when necessary, or search humorous sites to gather stories to talk about. However, in recent years, as the number of smart phone users increases, when the conversation is terminated, each person only sees the smart phone and does not even attempt to continue the conversation, and people are increasingly isolated to their own world.
이와 같은 문제를 해결하기 위해서, 인공지능 스피커를 제3자로 활용할 수 있다. 인공지능 스피커(또는 스마트 스피커)는 무선 스피커의 일종으로서, 사용자의 말을 인식하여 사용자의 명령에 따라서 동작을 수행하는 가상 비서 기능이 내장된 음성 명령 장치이며, 음성인식을 통해 음악 감상, 정보 검색 등의 기능을 수행한다는 것이 일반 스피커와의 차이점이다. 인공지능 스피커의 주된 입출력장치는 마이크와 스피커이므로 상시로 음성 데이터를 녹음하고 클라우드에 서버를 축적할 수 있다.To solve this problem, an artificial intelligence speaker can be used as a third party. The artificial intelligence speaker (or smart speaker) is a type of wireless speaker. It is a voice command device with a built-in virtual secretary function that recognizes the user's words and performs actions according to the user's commands. Listening to music and retrieving information through voice recognition The difference between a regular speaker and the fact that it performs the function of the back. Since the main input/output devices of the artificial intelligence speaker are'microphone' and'speaker', they can record voice data at all times and accumulate servers in the cloud.
일부 인공지능 스피커는 와이파이, 블루투스 등과 같은 다양한 무선 프로토콜을 사용하여 스마트홈 장치를 제어하기 위한 용도로 많이 사용되며, 인공지능 스피커를 이용하여 상용화된 주요 서비스는 음악 추천 기능, 알람 및 타이머 기능, 뉴스 및 날씨 기능 등이 있다. 최근에는 온라인 쇼핑과 같은 좀 더 스마트한 기능이 많이 부가되고 있다. Some of the artificial intelligence speakers are widely used for controlling the'smart home' device using various wireless protocols such as Wi-Fi, Bluetooth, etc., and the main commercialized services using the artificial intelligence speakers are music recommendation function, alarm and timer function, news And weather functions. Recently, many smarter functions such as online shopping have been added.
그러나 이와 같은 기능들은 종래의 음성 인식 기능을 인공지능 스피커에 접목시킨 것에 불과하다. 물론 기존의 스마트폰을 이용한 터치 방식에서 말하는 방식으로 바뀌어서, 좀 더 빠르게 원하는 서비스를 제공받을 수 있고, 기기 조작에 익숙하지 않은 사용자에게 편리하다는 장점이 있지만, 종래에 제공되던 서비스의 음성인식 정도에 불과하여, 음성 명령이 없는 상황에서 스스로 판단하여, 사용자에게 대화 주제를 찾아주거나 대화에 참여하는 서비스를 제공하기 어려운 문제가 있다. However, these functions are merely grafting a conventional speech recognition function to an artificial intelligence speaker. Of course, it has the advantage of being able to provide desired services more quickly and convenient for users unfamiliar with the operation of the device by changing from a touch method using an existing smartphone to a speaking method. There is a problem in that it is difficult to provide a service to find a conversation topic to a user or to participate in a conversation by judging by himself in the absence of a voice command.
상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 사용자의 명령이 없는 상황에서도 스스로 판단하여 적합한 대화소재를 찾아주는 이야깃거리 제공 장치를 제공하는 데 있다.An object of the present invention for solving the above problems is to provide an apparatus for providing a story to find a suitable conversation material by judging by itself even in the absence of a user command.
상기와 같은 문제점을 해결하기 위한 본 발명의 다른 목적은, 사용자의 명령이 없는 상황에서도 스스로 판단하여 적합한 대화소재를 찾아주는 이야깃거리 제공 방법을 제공하는 데 있다.Another object of the present invention for solving the above problems is to provide a method for providing a story to find a suitable conversation material by judging by itself even in the absence of a user command.
상기와 같은 문제점을 해결하기 위한 본 발명의 또 다른 목적은, 사용자의 명령이 없는 상황에서도 스스로 판단하여 적합한 대화소재를 찾아주는 이야깃거리 제공 시스템을 제공하는 데 있다.Another object of the present invention for solving the above problems is to provide a story providing system that finds a suitable conversation material by judging by itself even in the absence of a user command.
상기 목적을 달성하기 위한 본 발명은 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치에 있어서, 상기 인공지능 스피커를 통해서 수신한 복수의 사용자 간 대화 음성을 텍스트로 변환하는 텍스트 변환부와, 상기 텍스트를 분석하여 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 기초로 대화 주제를 추출하는 대화 주제 추출부와, 상기 대화 주제를 기초로 인터넷 검색하여 연관된 이야깃거리를 획득하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 이야깃거리 제공부를 포함하는 이야깃거리 제공 장치를 제공한다.The present invention for achieving the above object is a device for providing a real-time talking distance using an artificial intelligence speaker, a text conversion unit for converting a conversation voice between a plurality of users received through the artificial intelligence speaker into text, and analyzing the text A conversation topic extraction unit that extracts a conversation topic based on a vocabulary that appears at a frequency above a predetermined threshold, and searches the Internet based on the conversation topic to obtain a related story and delivers it to the artificial intelligence speaker, or a predefined user Provided is a talking distance providing device including a talking distance providing unit delivered to a terminal.
여기서 상기 이야깃거리 제공부는 상기 이야깃거리를 요약하고, 음성으로 변환하여 상기 인공지능 스피커를 통해서 음성 출력하는 것을 특징으로 한다.Here, the story distance providing unit is characterized by summarizing the story distance, converting it into voice, and outputting the voice through the artificial intelligence speaker.
또한, 여기서 상기 인공지능 스피커로부터 요청된 상황에 따른 상황 적응형 콘텐츠를 제공하는 상황별 콘텐츠 제공부를 더 포함하고, 상기 상황별 콘텐츠 제공부는 상기 복수의 사용자간 대화가 일정시간 동안 대화가 이어지지 않는 것을 감지한 인공지능 스피커로부터 대화 소재 제공 요청을 수신하면, 인터넷 검색을 통해서 실시간 이슈를 검색하여 대화 소재를 선정하고, 상기 대화 소재와 관련된 이야깃거리를 획득하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 대화 소재 제공 모듈을 포함하는 것을 특징으로 한다.In addition, the context-specific content providing unit for providing context-adaptive content according to the requested situation from the artificial intelligence speaker, wherein the context-specific content providing unit is that the conversation between the plurality of users does not continue the conversation for a certain period of time When a request to provide a conversational material is received from the detected artificial intelligence speaker, a real-time issue is searched through an Internet search to select a conversational material, and a story related to the conversational material is obtained and delivered to the artificial intelligence speaker, or a user terminal designated in advance. It characterized in that it comprises a dialogue material providing module to deliver to.
또한, 여기서 상기 상황별 콘텐츠 제공부는 상기 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면, 상기 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 감성 콘텐츠 제공 모듈을 더 포함하는 것을 특징으로 한다.In addition, when the content providing unit for each situation receives a request for content for atmosphere change from an artificial intelligence speaker that detects a controversial situation by analyzing a conversation voice between the plurality of users, the content providing unit selects predetermined emotional content for switching the controversial situation. In addition, it characterized in that it further comprises a module for providing emotional content to be delivered to the artificial intelligence speaker, or to a predetermined user terminal.
또한, 여기서 상기 상황별 콘텐츠 제공부는 상기 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면, 상기 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 제작하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 패러디 영상 제공 모듈을 더 포함하는 것을 특징으로 한다.In addition, when the content providing unit for each situation receives a request for content for mood change from an artificial intelligence speaker that detects a controversial situation by analyzing the conversation voice between the plurality of users, a video character is given to each conversation voice of the plurality of users It characterized in that it further comprises a parody image providing module to produce a replayed parody image and deliver it to an artificial intelligence speaker, or to a pre-specified user terminal.
상기 목적을 달성하기 위한 본 발명의 다른 측면은 마이크와, 스피커와, 복수의 대화 소재 및 상기 대화 소재 관련 이야깃거리를 포함하는 대화 소재 데이터베이스 및 미리 학습한 사용자 음성 데이터베이스가 저장되는저장부와, 사용자 특성에 맞는 이야깃거리를 제공하기 위한 이야깃거리 제공부를 포함하고, 상기 이야깃거리 제공부는 상기 마이크를 통해 수신한 사용자 음성을 분리하는 음성 분리 모듈과, 상기 사용자 음성 데이터베이스를 참조하여 상기 음성에 대응하는 사용자와 사용자 단말을 식별하는 사용자 식별 모듈과, 상기 수신한 음성이 복수의 사용자간 대화 음성이라면 대화 주기를 점검하여, 소정의 임계 시간 이상 대화가 이어지지 않는다고 판단하면, 상기 대화 소재 데이터베이스로부터 미리 지정된 순위에 따라 대화 소재를 선정하여 상기 스피커나 상기 사용자 단말을 통해 전달하는 대화 소재 제공 모듈을 포함하는 인공지능 스피커를 제공한다.Another aspect of the present invention for achieving the above object is a microphone, a speaker, a conversation material database including a plurality of conversation materials, and a conversation-related talk, and a storage unit in which a pre-trained user voice database is stored, and a user It includes a talking distance providing unit for providing a talking distance suitable for the characteristics, the talking distance providing unit is a voice separation module for separating the user voice received through the microphone, and the user corresponding to the voice by referring to the user voice database And a user identification module that identifies a user terminal, and if the received voice is a conversation voice between a plurality of users, checks a conversation cycle and determines that the conversation is not continued for a predetermined threshold time or more, in a predetermined rank from the conversation material database Accordingly, an artificial intelligence speaker including a conversation material providing module for transmitting a conversation material through the speaker or the user terminal is selected.
여기서 상기 저장부에는 분위기 전환을 위한 상황별 감성 콘텐츠 데이터베이스가 저장되고, 상기 이야깃거리 제공부는 상기 대화 음성을 분석하여 복수의 사용자간 논쟁 상황이 감지되면, 상기 상황별 감성 콘텐츠 데이터베이스로부터 상기 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 상기 스피커로 출력하는 분위기 전환 모듈을 더 포함하는 것을 특징으로 한다.Here, in the storage unit, a context sensitive emotional content database is stored, and the story providing unit analyzes the conversation voice and detects a dispute situation between a plurality of users. It characterized in that it further comprises an atmosphere switching module for selecting a predetermined emotional content for switching and outputting it to the speaker.
또한, 여기서 영상 출력을 위한 디스플레이부를 더 포함하고, 상기 이야깃거리 제공부는 상기 대화 음성을 분석하여 복수의 사용자간 논쟁 상황이 감지되면, 상기 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 상기 디스플레이부를 통해서 출력하는 패러디 영상 제공 모듈을 더 포함하는 것을 특징으로 한다.In addition, the display unit for outputting the video is further included, and the story providing unit analyzes the conversational voice and detects a controversial situation between a plurality of users, thereby reproducing by assigning a video character to each conversational voice of the plurality of users. It characterized in that it further comprises a parody image providing module for outputting the parody image through the display unit.
또한, 여기서 상기 대화 소재 제공 모듈은 인터넷 검색을 통해서 실시간 이슈를 검색하고, 상기 실시간 이슈와 관련된 뉴스를 검색하여 상기 뉴스를 상기 대화 소재로 선정하고, 상기 디스플레이부를 통해서 제공하는 것을 특징으로 한다.In addition, the conversation material providing module is characterized in that it searches for real-time issues through Internet search, selects the news as the conversation material by searching for news related to the real-time issues, and provides the information through the display unit.
상기 다른 목적을 달성하기 위한 본 발명은 컴퓨팅 장치에서 수행되는 인공지능 스피커를 이용한 실시간 이야깃거리 제공 방법에 있어서, 상기 인공지능 스피커를 통해서 수신한 복수의 사용자 간 대화 음성을 텍스트로 변환하는 단계와, 상기 텍스트를 분석하여 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 기초로 대화 주제를 추출하는 단계와, 상기 대화 주제를 기초로 인터넷 검색하여 연관된 이야깃거리를 획득하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 이야깃거리 제공단계를 포함하는 이야깃거리 제공 방법을 제공한다.The present invention for achieving the other object is a method for providing a real-time talking distance using an artificial intelligence speaker performed on a computing device, comprising: converting a conversation voice between a plurality of users received through the artificial intelligence speaker into text; Analyzing the text and extracting a conversation topic based on a vocabulary appearing at a frequency above a predetermined threshold, and searching the Internet based on the conversation topic to obtain an associated story and deliver it to the artificial intelligence speaker, or It provides a method for providing a story distance, including the step of providing a story distance to the user terminal.
여기서 상기 이야깃거리 제공 단계는 상기 이야깃거리를 요약하고, 음성으로 변환하여 상기 인공지능 스피커를 통해서 음성 출력하는 것을 특징으로 한다.Here, the talking distance providing step is characterized by summarizing the talking distance, converting it into voice, and outputting the voice through the artificial intelligence speaker.
또한, 여기서 상기 인공지능 스피커로부터 요청된 상황에 따른 상황 적응형 콘텐츠를 제공하는 상황별 콘텐츠 제공단계를 더 포함하고, 상기 상황별 콘텐츠 제공단계는 상기 복수의 사용자간 대화가 일정시간 동안 대화가 이어지지 않는 것을 감지한 인공지능 스피커로부터 대화 소재 제공 요청을 수신하면, 인터넷 검색을 통해서 실시간 이슈를 검색하여 대화 소재를 선정하고, 상기 대화 소재와 관련된 이야깃거리를 획득하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 대화 소재 제공 단계를 포함하는 것을 특징으로 한다.In addition, here, further comprising a context-specific content providing step of providing context-adaptive content according to the requested situation from the artificial intelligence speaker, wherein the context-specific content providing step continues the conversation for a certain period of time between the plurality of users When receiving a request to provide a conversational material from an artificial intelligence speaker that detects that it is not, search for real-time issues through Internet search to select a conversational material, obtain a story related to the conversational material, and deliver it to the artificial intelligence speaker, or specify in advance It characterized in that it comprises a step of providing a conversation material delivered to the user terminal.
또한, 여기서 상기 상황별 콘텐츠 제공단계는 상기 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면, 상기 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 감성 콘텐츠 제공 단계를 더 포함하는 것을 특징으로 한다.In addition, when the content providing step by context receives a request for content for mood change from an artificial intelligence speaker that detects a controversial situation by analyzing a conversation voice between the plurality of users, the predetermined emotional content for switching the controversial situation is provided. It is characterized in that it further comprises the step of providing emotional content to the selected user terminal or delivered to the artificial intelligence speaker.
또한, 여기서 상기 상황별 콘텐츠 제공단계는 상기 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면 상기 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 제작하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 패러디 영상 제공 단계를 더 포함하는 것을 특징으로 한다.In addition, in the context-specific content providing step, when a content request for mood change is received from an artificial intelligence speaker that detects a controversial situation by analyzing a conversation voice between the plurality of users, a video character is given to each conversation voice of the plurality of users. It is characterized in that it further comprises a step of providing a parody image to deliver the replayed parody image to an artificial intelligence speaker or to a pre-specified user terminal.
상기 또 다른 목적을 달성하기 위한 본 발명은 인공지능 스피커와 이야깃거리 제공장치를 포함하여 구성되는 실시간 이야깃거리 제공 시스템에 있어서, 상기 인공지능 스피커는 마이크를 통해 수신한 사용자 음성을 분석하여, 사용자 및 사용자의 단말을 식별하고, 상기 수신한 음성이 복수의 사용자간 대화 음성인 경우에 상기 대화 음성을 상기 이야깃거리 제공장치에 전달하도록 구성되고, 상기 이야깃거리 제공장치는 상기 인공지능 스피커로부터 수신한 복수의 사용자간 대화 음성을 텍스트로 변환하고, 상기 텍스트를 분석하여 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 기초로 대화 주제를 추출하고, 대화 주제를 기초로 인터넷 검색하여 연관된 이야깃거리를 상기 인공지능 스피커를 통해 출력하거나, 미리 지정된 사용자 단말로 전달하도록 구성되는 것을 특징으로 하는 이야깃거리 제공 시스템을 제공한다.In another aspect of the present invention for achieving the above object, in a real-time talking distance providing system comprising an artificial intelligence speaker and a talking distance providing device, the artificial intelligence speaker analyzes a user's voice received through a microphone, and It is configured to identify a user's terminal, and when the received voice is a conversational voice between a plurality of users, the conversational voice is configured to be delivered to the talking distance providing device, and the talking distance providing device is received from the artificial intelligence speaker. Converts the conversation voice between users into text, analyzes the text, extracts a conversation topic based on vocabulary appearing at a frequency above a predetermined threshold, and searches the Internet based on the conversation topic to determine the related story by using the artificial intelligence speaker It provides a talking distance providing system characterized in that it is configured to be outputted through, or delivered to a predetermined user terminal.
여기서, 상기 인공지능 스피커는 상기 대화 음성의 발생 주기를 점검하여, 일정시간 동안 대화가 이어지지 않는다고 판단하면, 상기 이야깃거리 제공 장치로 대화 소재 제공을 요청하고, 상기 이야깃거리 제공 장치는 인터넷 검색을 통해서 실시간 이슈를 검색하여 대화 소재를 선정하고, 상기 대화 소재와 관련된 이야깃거리를 획득하여 상기 인공지능 스피커에게 전달하도록 구성되는 것을 특징으로 한다.Here, the artificial intelligence speaker checks the occurrence cycle of the conversation voice, and if it is determined that the conversation is not continued for a certain period of time, requests the conversation material providing device to provide the conversation material, and the device providing the conversation distance through the Internet search It is characterized in that it is configured to select a conversation material by searching for a real-time issue, acquire a story related to the conversation material, and deliver it to the artificial intelligence speaker.
또한, 여기서 상기 인공지능 스피커는 상기 대화 음성을 분석하여 복수의 사용자간 논쟁 상황을 감지하면, 상기 이야깃거리 제공 장치로 분위기 전환용 콘텐츠 제공을 요청하고, 상기 이야깃거리 제공 장치는 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 제작하여 상기 인공지능 스피커로 전달하는 것을 특징으로 한다.In addition, when the artificial intelligence speaker analyzes the conversational voice and detects a controversial situation among a plurality of users, the artificial intelligence speaker requests the content providing device for switching the atmosphere to the device providing the story, and the device providing the story is provided to each of the multiple users. It is characterized in that a video character is given to a conversational voice, and a replayed parody image is produced and delivered to the artificial intelligence speaker.
또한, 여기서 상기 인공지능 스피커는 상기 대화 음성을 분석하여 복수의 사용자간 논쟁 상황이 감지되면, 저장부에 저장된 상황별 감성 콘텐츠 중에서 상기 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 스피커를 통해서 출력하는 것을 특징으로 한다.In addition, the artificial intelligence speaker analyzes the conversation voice, and when a controversial situation between a plurality of users is detected, selects predetermined emotional content for switching the controversial situation from the emotional content stored in the storage unit through the speaker. It is characterized by outputting.
또한, 여기서 상기 인공지능 스피커는 상기 이야깃거리 제공 장치로부터 상기 패러디 영상을 수신하면, 디스플레이를 통해서 상기 풍자 영상을 출력하는 것을 특징으로 한다.In addition, the artificial intelligence speaker is characterized by outputting the satire image through a display when the parody image is received from the story distance providing device.
본 발명의 인공지능 스피커를 이용한 이야깃거리 제공 시스템을 이용하면, 인공지능 스피커가 사용자의 대화 음성을 수신하여, 대화 주제에 따라 필요한 정보를 제공하거나, 대화자 간 침묵이 흐르는 경우, 필요한 대화 소재를 검색하여 인공지능 스피커를 통해서 알려줄 수 있다. 또한, 사용자 음성의 톤이나 크기 등을 분석하여, 논쟁 상황이라고 판단되면, 분위기 전환을 위한 콘텐츠를 사용자에게 제공하거나, 논쟁상황을 재연한 패러디 영상을 보여주면서 사용자를 진정시켜서 논쟁을 종료시킬 수 있는 장점이 있다. When the story distance providing system using the artificial intelligence speaker of the present invention is used, the artificial intelligence speaker receives a user's conversation voice, provides necessary information according to a conversation topic, or when silence between conversations flows, searches for a necessary conversation material You can tell it through the artificial intelligence speaker. In addition, by analyzing the tone or size of the user's voice, if it is determined to be a controversial situation, content can be provided to the user, or a parody video that reproduces the controversial situation can calm the user and end the debate. There are advantages.
도 1은 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 시스템의 개념도이다.
도 2는 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치의 구성을 보여주는 블록도이다.
도 3은 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치의 일 구성인 상황 콘텐츠 제공부의 구성을 보여주는 블록도이다.
도 4는 본 발명의 일 실시예에 따른 실시간 이야깃거리를 제공하기 위한 인공지능 스피커의 구성을 보여주는 블록도이다.
도 5는 본 발명의 일 실시예에 따른 실시간 이야깃거리를 제공하기 위한 인공지능 스피커의 이야깃거리 제공부의 구성을 보여주는 블록도이다.
도 6 내지 도 9는 본 발명의 일 실시예에 따른 인공지능 스피커를 이용하여 실시간 이야깃거리를 제공하는 예를 보여주는 도면이다.
도 10은 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 방법이 수행되는 과정을 보여주는 순서도이다.
도 11은 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 상황 적응형 콘텐츠를 제공하는 과정을 보여주는 순서도이다.
도 12는 본 발명의 일 실시예에 따른 인공지능 스피커를 통해서 사용자에게 이야깃거리를 제공하는 과정을 보여주는 순서도이다.1 is a conceptual diagram of a real-time talking distance providing system using an artificial intelligence speaker according to an embodiment of the present invention.
2 is a block diagram showing the configuration of a real-time talking distance providing apparatus using an artificial intelligence speaker according to an embodiment of the present invention.
3 is a block diagram showing the configuration of a context content providing unit, which is one component of a real-time talking distance providing apparatus using an artificial intelligence speaker according to an embodiment of the present invention.
4 is a block diagram showing the configuration of an artificial intelligence speaker for providing a real-time talking distance according to an embodiment of the present invention.
5 is a block diagram showing the configuration of a talking distance providing unit of an artificial intelligence speaker for providing a real-time talking distance according to an embodiment of the present invention.
6 to 9 are views showing an example of providing a real-time talking distance using an artificial intelligence speaker according to an embodiment of the present invention.
10 is a flowchart illustrating a process in which a method for providing a real-time talking distance using an artificial intelligence speaker according to an embodiment of the present invention is performed.
11 is a flowchart illustrating a process of providing context-adaptive content using an artificial intelligence speaker according to an embodiment of the present invention.
12 is a flowchart illustrating a process of providing a story to a user through an artificial intelligence speaker according to an embodiment of the present invention.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. The present invention can be applied to various changes and can have various embodiments, and specific embodiments will be illustrated in the drawings and described in detail in the detailed description. However, this is not intended to limit the present invention to specific embodiments, and it should be understood that all modifications, equivalents, and substitutes included in the spirit and scope of the present invention are included. In describing each drawing, similar reference numerals are used for similar components.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다. Terms such as first, second, A, and B may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from other components. For example, the first component may be referred to as a second component without departing from the scope of the present invention, and similarly, the second component may be referred to as a first component. The term and/or includes a combination of a plurality of related described items or any one of a plurality of related described items.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. When an element is said to be "connected" or "connected" to another component, it is understood that other components may be directly connected to or connected to the other component, but there may be other components in between. It should be. On the other hand, when a component is said to be "directly connected" or "directly connected" to another component, it should be understood that no other component exists in the middle.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in this application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this application, terms such as “include” or “have” are intended to indicate that a feature, number, step, operation, component, part, or combination thereof described in the specification exists, and that one or more other features are present. It should be understood that the existence or addition possibilities of fields or numbers, steps, operations, components, parts or combinations thereof are not excluded in advance.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상의 의미와 일치하는 의미로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by a person skilled in the art to which the present invention pertains. Terms such as those defined in a commonly used dictionary should be interpreted as meanings consistent with the contextual meaning of the related art, and should not be interpreted as ideal or excessively formal meanings unless explicitly defined in the present application.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.
먼저, 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 시스템에 대해서 설명한다.First, a real-time story distance providing system using an artificial intelligence speaker according to an embodiment of the present invention will be described.
도 1은 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 시스템의 개념도이다.1 is a conceptual diagram of a real-time talking distance providing system using an artificial intelligence speaker according to an embodiment of the present invention.
도 1을 참조하면, 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 시스템은 사용자(10)의 대화 음성을 수신하는 인공지능 스피커(100)와 인공지능 스피커(100)로부터 수신한 대화 음성을 전달받아서, 이를 기초로 인터넷상의 콘텐츠(30)를 검색하여 인공지능 스피커(100)로 이야깃거리를 제공하는 이야깃거리 제공장치(200)를 포함하여 구성될 수 있다. Referring to FIG. 1, a system for providing a real-time talking distance using an artificial intelligence speaker according to an embodiment of the present invention is received from the
또한, 도 1을 참조하면, 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 시스템의 각 구성은 다음과 같이 설명될 수 있다. In addition, referring to Figure 1, each configuration of a real-time talking distance providing system using an artificial intelligence speaker according to an embodiment of the present invention can be described as follows.
인공지능 스피커(100)는 마이크를 통해 수신한 사용자 음성을 분석하여, 사용자(10) 및 사용자의 단말(20)을 식별하고, 상기 수신한 음성이 복수의 사용자 간 대화 음성인 경우에 상기 대화 음성을 이야깃거리 제공장치(200)에 전달하도록 구성될 수 있다.The
인공지능 스피커(100)는 마이크, 스피커, 카메라, 디스플레이, 저장장치, 프로세서 등이 구비되어 자체적으로 음성인식, 화상인식, 멀티미디어 콘텐츠 제작, 음성 인식을 통한 상황 인식 등이 가능하도록 구성될 수 있다. 또한, 이야깃거리 제공을 위한 프로그램이 설치되어 어플리케이션으로 구동되어 이야깃거리 제공장치(200)와 상호 연관되는 서비스와 데이터를 주고받을 수 있다. The
이야깃거리 제공장치(200)는 인공지능 스피커(100)로부터 수신한 복수의 사용자간 대화 음성을 텍스트로 변환하고, 텍스트를 분석하여 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 기초로 대화 주제를 추출하고, 대화 주제를 기초로 인터넷 검색하여 연관된 이야깃거리를 상기 인공지능 스피커(100)를 통해 출력하거나, 상기 인공지능 스피커(100)가 지정하는 사용자 단말(20)로 전달하도록 구성될 수 있다. The story
이야깃거리 제공장치(200)는 인공지능 스피커(100)와 네트워크로 연결되어 별도의 장소(예를 들면, 클라우드)에서 구축되는 서버로서 구성되거나 인공지능 스피커(100)에 프로그램으로 설치되어 어플리케이션으로 구동할 수 있다. 유무선 네트워크 연결상황이나 속도 등을 고려하여 이야깃거리 제공을 위한 일부 또는 전체 기능이 인공지능 스피커(100)와 이야깃거리 제공장치(200)에 분산 배치될 수 있다. The story
한편, 이야깃거리는 텍스트나 멀티미디어 형태로 생성되어 인공지능 스피커(100)의 스피커나 디스플레이 출력을 통해서 사용자(10)에게 직접 전달될 수 있고, 또는 사용자 단말(20)을 통해서 제공될 수 있다. 사용자 단말(20)은 모바일폰, 스마트폰, 랩톱 컴퓨터, 휴대용 컴퓨터, 데스크톱 컴퓨터, PDA 등 모든 유무선 통신 가능한 컴퓨팅 장치를 포함할 수 있다.Meanwhile, the talk may be generated in the form of text or multimedia, and may be directly transmitted to the
이하, 본 발명의 일 실시예에 따른 이야깃거리 제공장치(200)의 구성에 대하여 좀 더 상세하게 설명한다.Hereinafter, the configuration of the story
도 2는 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치의 구성을 보여주는 블록도이다.2 is a block diagram showing the configuration of a real-time talking distance providing apparatus using an artificial intelligence speaker according to an embodiment of the present invention.
도 2를 참조하면, 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치(200)는 텍스트 변환부(210), 대화 주제 추출부(220), 이야깃거리 제공부(230) 및 상황별 콘텐츠 제공부(240)를 포함하여 구성될 수 있다.2, the
또한, 도 2를 참조하면, 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치의 각 구성과 구성 간의 연결관계는 다음과 같이 설명될 수 있다.In addition, referring to FIG. 2, a connection relationship between each configuration and configuration of a real-time talking distance providing apparatus using an artificial intelligence speaker according to an embodiment of the present invention can be described as follows.
텍스트 변환부(210)에서 인공지능 스피커(100)를 통해서 수신한 복수의 사용자(10) 간 대화 음성을 텍스트로 변환하면, 대화 주제 추출부(220)는 상기 텍스트를 분석하여 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 기초로 대화 주제를 추출할 수 있다. 즉, 대화 주제 추출부(220)는 텍스트로 변환된 대화를 자연어 처리 과정을 통해서 동의어, 유사어를 도출하여 키워드를 추출하고 인터넷 검색을 통해서 연관어 등을 검색하면, 대화 내용 중 동일한 어휘는 아니지만, 동일하거나 유사한 맥락으로 사용되는 어휘를 추출할 수 있으며, 이를 기초로 대화 주제를 추출할 수 있다. When the text converting unit 210 converts the conversation speech between the plurality of
예를 들면, 대화 내용 중에 '야구'라는 명시적인 어휘가 제시되지 않았지만, 야구 선수나 팀의 이름이 등장하고, '홈런', '안타', '도루', '직구', '변화구' 등의 야구 용어 등이 등장하면, 연관어 검색을 통해서 주제가 야구에 대한 것임을 알 수 있을 것이다. For example, although the explicit vocabulary of'baseball' is not presented in the dialogue, the names of baseball players or teams appear, such as'home run','hit','stealing','soccer ball','change ball', etc. When baseball terms or the like appear, it may be understood that the subject is related to baseball through searching related words.
이야깃거리 제공부(230)는 추출된 대화 주제를 기초로 인터넷 검색하여 연관된 이야깃거리를 획득하여 인공지능 스피커(100)로 전달하거나, 사용자 단말(20)로 전달할 수 있다. 사용자 단말(20)은 인공지능 스피커(100)에 등록되어 있거나 이야깃거리 제공 장치(200)에 미리 지정되어 있는 단말이거나, 사용자 단말(20)에서 동작하는 어플리케이션을 통해 인공지능 스피커(100)나 이야깃거리 제공 장치(200)에 연결된 단말(20) 또는 로그인한 사용자를 통해서 식별 가능하다.The story distance providing unit 230 may search the Internet based on the extracted conversation topic to obtain an associated story distance and deliver it to the
또한, 이야깃거리 제공부(230)는 이야깃거리를 텍스트로 요약하고, 음성으로 변환하여 인공지능 스피커(100)를 통해서 음성 출력할 수 있다.In addition, the story distance providing unit 230 may summarize the story distance into text, convert it into voice, and output the voice through the
상황별 콘텐츠 제공부(240)는 인공지능 스피커(100)로부터 요청된 상황에 따른 상황 적응형 콘텐츠를 제공할 수 있다. 예를 들면, 사용자 간 대화가 중단된 상황에 대한 대화 소재 요청이나, 사용자 간 분쟁 상황에 대처하기 위한 콘텐츠 제공 요청 등에 대응하여 적합한 콘텐츠를 제공할 수 있다. The context-specific content providing unit 240 may provide context-adaptive content according to the requested situation from the
이하, 상황 적응형 콘텐츠 제공에 대하여 좀 더 상세하게 설명한다. Hereinafter, provision of context-adaptive content will be described in more detail.
도 3은 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 장치의 일 구성인 상황 콘텐츠 제공부의 구성을 보여주는 블록도이다.3 is a block diagram showing the configuration of a context content providing unit, which is one component of a real-time talking distance providing apparatus using an artificial intelligence speaker according to an embodiment of the present invention.
도 3을 참조하면 상황 콘텐츠 제공부(240)는 상황별 요청 수신 모듈(241), 대화 소재 제공 모듈(242), 감성 콘텐츠 제공 모듈(243) 및 패러디 영상 제공 모듈(244)을 포함하여 구성될 수 있다.Referring to FIG. 3, the contextual content providing unit 240 may be configured to include a contextual request receiving module 241, a dialogue material providing module 242, an emotional content providing module 243, and a parody video providing module 244. Can.
또한, 도 3을 참조하면 상황 콘텐츠 제공부(240)의 각 구성은 다음과 같이 설명될 수 있다. In addition, referring to FIG. 3, each configuration of the context content providing unit 240 may be described as follows.
상황별 요청 수신 모듈(241)은 인공지능 스피커로(100)로부터 사용자의 대화 상태에 대응하는 콘텐츠 제공에 관한 요청을 수신하면 요청사항을 관련 모듈로 전달할 수 있다. 예를 들면, 사용자 간 대화가 일정시간 동안 이어지지 않는 것을 감지한 인공지능 스피커(100)로부터 대화 소재 제공 요청을 수신하면, 요청을 대화 소재 제공 모듈(242)로 전달할 수 있다. The context-specific request receiving module 241 may transmit a request to the related module when receiving a request for providing content corresponding to a user's conversation state from the
또는, 상황별 요청 수신 모듈(241)은 사용자 간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커(100)로부터 분위기 전환용 콘텐츠 요청을 수신하면, 요청을 분위기 전환 모듈(243)이나 패러디 영상 제공 모듈(244)로 전달할 수 있다.Alternatively, the request receiving module 241 for each situation receives the content request for mood switching from the
대화 소재 제공 모듈(242)은 인터넷 검색을 통해서 실시간 이슈를 검색하여 대화 소재를 선정하고, 대화 소재와 관련된 이야깃거리(예를 들면, 뉴스 기사, 블로그, 개인방송 링크 등)를 획득하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달할 수 있다. The conversation material providing module 242 searches for real-time issues through internet search, selects conversation materials, and acquires stories related to the conversation materials (for example, news articles, blogs, personal broadcasting links, etc.), and artificial intelligence speakers. It can be delivered to, or delivered to a pre-specified user terminal.
감성 콘텐츠 제공 모듈(243)은 사용자 간 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 상기 인공지능 스피커(100)로 전달하거나, 미리 지정된 사용자 단말로 전달할 수 있다. 예를 들면, 감성 콘텐츠는 음악, 문구, 사진, 동영상 또는 논쟁 주제와 관련된 뉴스 기사 등을 포함할 수 있다. 감성 콘텐츠는 논쟁 상황에 따라서 빅데이터 분석을 통해서 미리 학습한 감성 콘텐츠를 선정할 수 있다.The emotional content providing module 243 may select and transmit predetermined emotional content for switching the contention situation between users to the
패러디 영상 제공 모듈(244)은 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 제작하여 인공지능 스피커(100)로 전달하거나, 미리 지정된 사용자 단말로 전달할 수 있다. 인공지능 스피커(100)로 전달된 영상은 디스플레이를 통해서 재생될 수 있다.The parody image providing module 244 may give a video character to each conversation voice of a plurality of users to produce a replayed parody image and transmit it to the
도 4는 본 발명의 일 실시예에 따른 실시간 이야깃거리를 제공하기 위한 인공지능 스피커의 구성을 보여주는 블록도이다.4 is a block diagram showing the configuration of an artificial intelligence speaker for providing a real-time talking distance according to an embodiment of the present invention.
도 4를 참조하면, 본 발명의 일 실시예에 따른 실시간 이야깃거리를 제공하기 위한 인공지능 스피커(100)는 마이크(110), 스피커(120), 디스플레이부(130), 저장부(140) 및 이야깃거리 제공부(150)를 포함하여 구성될 수 있다.4, the
또한, 도 4를 참조하면 본 발명의 일 실시예에 따른 실시간 이야깃거리를 제공하기 위한 인공지능 스피커(100)의 저장부(140)는 사용자 음성 데이터베이스(141), 대화소재 데이터베이스(142), 감성 콘텐츠 데이터베이스(143), 캐릭터 데이터베이스(144) 및 음성 학습 모델(145)이 저장될 수 있다.In addition, referring to FIG. 4, the storage unit 140 of the
사용자 음성 데이터베이스(141)에는 미리 학습한 사용자의 음성이 저장될 수 있다. 또는 유명 연예인이나 가족, 친구 등의 음성이 저장될 수 있다. The user voice database 141 may store a user's voice previously learned. Or, a voice of a famous celebrity, family, friend, etc. may be stored.
대화 소재 데이터베이스(142)는 사용자가 미리 등록한 대화 소재와 경험담이나 저장되거나, 대화 소재 부족 시 활용하고자 하는 이야기 등이 저장되어 있을 수 있으며, 인터넷이나 문헌 검색을 통해서 수집한 데이터가 주제별, 시기별로 분류되어 저장되어 있을 수 있다. 대화 소재 데이터베이스는 일정 주기별로 갱신될 수 있다. The conversation material database 142 may store conversation materials previously registered by a user, experiences, or stories to be utilized when the conversation material is insufficient, and data collected through internet or literature search is classified by topic and time. And may be stored. The conversation material database may be updated at regular intervals.
감성 콘텐츠 데이터베이스(143)는 문학, 예술, 사회, 자연과학 등 다양한 장르의 콘텐츠가 텍스트나 멀티미디어의 형태로 저장되어 있어서, 인공지능 스피커(100)가 이야깃거리 제공부(150)를 통해서 대화 분위기 전환에 필요한 적절한 콘텐츠를 선정하고 새로운 형태로 제작할 수 있다. In the emotional content database 143, the contents of various genres such as literature, art, society, and natural science are stored in the form of text or multimedia, so that the
캐릭터 데이터베이스(143)는 분위기 전환용 콘텐츠 생성이나 상황 재연 패러디 영상이나 음성 재생시 활용될 수 있다. The character database 143 may be used when creating content for mood change or replaying a situational parody video or voice.
음성 학습 모델(145)은 대화 상황을 판단하기 위한 여러 유형의 감정(슬픔, 분노, 기쁨, 초초함 등)을 담은 음성이 빅데이터 분석을 통해서 학습한 모델일 수 있다. 저장부(140)는 로컬 메모리의 저장 장치일 수 있으며, 클라우드 상에 존재할 수 있고, 서버의 저장장치를 의미할 수 있다.The voice learning model 145 may be a model in which a voice containing various types of emotions (sadness, anger, joy, anxiety, etc.) for determining a conversation situation is learned through big data analysis. The storage unit 140 may be a storage device of a local memory, may exist on the cloud, and may mean a storage device of a server.
이야깃거리 제공부(150)는 마이크(110)를 통해 수신한 사용자 음성을 분석하여 상황에 맞는 이야깃거리를 제공할 수 있다. 이하, 이야깃거리 제공부(150)의 구성에 대해서 도면을 참조하여 좀 더 상세하게 설명한다.The story distance providing unit 150 may analyze the user's voice received through the microphone 110 to provide a story distance suitable for the situation. Hereinafter, the configuration of the story distance providing unit 150 will be described in more detail with reference to the drawings.
도 5는 본 발명의 일 실시예에 따른 실시간 이야깃거리를 제공하기 위한 인공지능 스피커의 이야깃거리 제공부의 구성을 보여주는 블록도이다.5 is a block diagram showing the configuration of a talking distance providing unit of an artificial intelligence speaker for providing a real-time talking distance according to an embodiment of the present invention.
도 5를 참조하면 이야깃거리 제공부(150)는 음성 분리 모듈(151), 사용자 식별 모듈(152), 대화소재 제공 모듈(153), 분위기 전환 모듈(154) 및 패러디 영상 제공 모듈(155)을 포함하여 구성될 수 있다. Referring to FIG. 5, the story distance providing unit 150 includes a voice separation module 151, a user identification module 152, a conversation material providing module 153, an atmosphere switching module 154, and a parody video providing module 155. It can be configured to include.
음성 분리 모듈(151)은 마이크(110)를 통해 수신한 사용자 음성을 분리하고, 사용자 식별 모듈(152)은 사용자 음성 데이터베이스(141)를 참조하여 분리된 사용자 음성에 대응하는 사용자와 사용자 단말을 식별할 수 있다.The voice separation module 151 separates the user voice received through the microphone 110, and the user identification module 152 identifies the user and the user terminal corresponding to the separated user voice with reference to the user voice database 141 can do.
대화소재 제공 모듈(153)은 상기 음성이 복수의 사용자간 대화 음성이라면 대화 주기를 점검하여, 소정의 임계 시간 이상 대화가 이어지지 않는다고 판단하면, 대화 소재 데이터베이스(142)로부터 미리 지정된 순위에 따라 대화 소재를 선정하여 스피커(120)나 사용자 단말을 통해 전달할 수 있다.The conversation material providing module 153 checks the conversation cycle if the voice is a conversation voice between a plurality of users, and determines that the conversation is not continued for a predetermined threshold time or more, the conversation material according to a predetermined rank from the conversation material database 142 It may be selected and delivered through the speaker 120 or the user terminal.
또는, 대화소재 제공 모듈(153)은 인터넷 검색을 통해서 실시간 이슈를 검색하고, 상기 실시간 이슈와 관련된 뉴스를 검색하여 대화 소재로 선정하고, 디스플레이부(130)를 통해서 제공할 수도 있다.Alternatively, the conversation material providing module 153 may search for real-time issues through Internet search, search for news related to the real-time issues, select them as conversation materials, and provide them through the display unit 130.
이때, 임계 시간은 사용자가 미리 지정할 수도 있고, 기본값으로 설정될 수도 있으며, 대화소재 제공 모듈(153)이 대화 주기를 점검하여 대화 상황에 따라서 이 판단할 수도 있다. 선정된 대화 소재는 음성 변환하여 스피커(120)를 통해 공개적으로 출력할 수 있고, 사용자 단말을 통해서 사용자에게만 전달할 수도 있다. At this time, the threshold time may be specified in advance by the user, or may be set as a default value, and the conversation material providing module 153 may check the conversation cycle and determine this according to the conversation situation. The selected conversational material may be voice-transformed and publicly output through the speaker 120, or may be delivered only to the user through the user terminal.
분위기 전환 모듈(154)은 대화 음성을 분석하여 사용자간 논쟁 상황이 감지되면, 감성 콘텐츠 데이터베이스(143)로부터 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 스피커로 출력할 수 있다. 사용자 간 논쟁 상황은 대화의 목소리를 음성 학습 모델(145)에 적용하여 파악할 수 있다.The atmosphere switching module 154 analyzes the conversation voice, and when a debate situation between users is detected, the emotional content database 143 may select predetermined emotional content for switching the debate situation and output it to the speaker. The debate situation between users can be grasped by applying the voice of the conversation to the voice learning model 145.
패러디 영상 제공 모듈(155)은 대화 음성을 분석하여 사용자간 논쟁 상황이 감지되면, 사용자들의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 상기 디스플레이부(130)를 통해서 출력할 수 있다. 영상 캐릭터는 캐릭터 데이터베이스(144)로부터 추출할 수 있고, 음성은 녹음된 사용자의 영상을 그대로 재연하거나, 사용자 음성 데이터베이스(141)에서 유명 연예인이나 가족의 음성을 추출하여 더빙할 수도 있다. The parody image providing module 155 analyzes the dialogue voice and, when a debate situation between users is detected, assigns an image character to each dialogue voice of the users and outputs the replayed parody image through the display unit 130. The video character may be extracted from the character database 144, and the voice may be reproduced as it is from the recorded user's video, or the user's voice database 141 may be dubbed by extracting the voice of a famous celebrity or family.
이하, 본 발명의 일실시예에 따른 인공지능 스피커를 이용하여 사용자에게 이야깃거리를 제공하는 과정을 예를 들어 설명한다.Hereinafter, a process of providing a story to a user using an artificial intelligence speaker according to an embodiment of the present invention will be described as an example.
도 6 내지 도 9는 본 발명의 일 실시예에 따른 인공지능 스피커를 이용하여 실시간 이야깃거리를 제공하는 예를 보여주는 도면이다.6 to 9 are views showing an example of providing a real-time talking distance using an artificial intelligence speaker according to an embodiment of the present invention.
도 6을 참조하면, 사용자(11,12) 간에 야구 관련 대화를 하고 있고, 인공지능 스피커(100) 또는 이야깃거리 제공 장치(미도시)는 음성 대화를 텍스트로 변환하고, 텍스트를 분석하여 야구와 연관된 용어가 많이 등장하고 있다고 판단할 수 있다. 인공지능 스피커(100)는 자연어 처리 과정을 통해서 플레이오프가 야구라는 것을 인식하고, 인터넷 검색을 통해서 5차전 경기 정보를 검색하고, 관련 정보(51)를 대화자(11,12)에게 제공할 수 있다. Referring to FIG. 6, a baseball-related conversation is performed between
도 7을 참조하면, 사용자(11,12) 간에 일상적인 대화를 하다가 대화 소재가 고갈되어 침묵하고 있는 것을 알 수 있다. 인공지능 스피커(100) 또는 이야깃거리 제공 장치(미도시)는 사용자(11,12) 간 대화가 일정시간 동안 대화가 이어지지 않는 것을 감지하고, 실시간 이슈검색이나 대화 소재 데이터베이스(142) 검색을 통해서 이야깃거리(52)를 제공할 수 있다. Referring to FIG. 7, it can be seen that the conversation material is exhausted and silenced during a routine conversation between the
도 8을 참조하면, 인공지능 스피커(100)는 사용자(11,12) 간에 말다툼이 벌어지는 것을 감지하고, 상황을 전환하기 위한 감성 콘텐츠(53)를 선정하여 인공지능 스피커를 통해서 내보낼 수 있다. 예를 들면, 감성 콘텐츠 데이터베이스(143)로부터 감성을 자극하는 음악이나, 노래, 시 등을 선정하거나 코믹하게 패러디한 음악이나 영상을 선정하여 스피커(120)나 디스플레이(130)를 통해서 전달할 수 있다.Referring to FIG. 8, the
도 9를 참조하면, 인공지능 스피커(100) 또는 이야깃거리 제공 장치(미도시)는 사용자(11,12) 간에 빛 독촉하다가 말다툼이 벌어지는 것을 감지할 수 있다. 인공지능 스피커(100)는 말다툼 상황을 재연한 패러디 영상(54)를 제작하여 디스플레이(130)를 통해서 사용자에게 보여줄 수 있다. Referring to FIG. 9, the
이하, 본 발명의 일 실시예에 따른 이야깃거리 제공방법이 수행되는 과정에 대하여 좀 더 상세하게 설명한다.Hereinafter, a process in which a method for providing a story distance according to an embodiment of the present invention is performed will be described in more detail.
도 10은 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 방법이 수행되는 과정을 보여주는 순서도이다.10 is a flowchart illustrating a process in which a method for providing a real-time story distance using an artificial intelligence speaker according to an embodiment of the present invention is performed.
도 10을 참조하면, 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 실시간 이야깃거리 제공 방법이 수행되는 과정은 다음과 같이 설명될 수 있다.Referring to FIG. 10, a process in which a method for providing a real-time talking distance using an artificial intelligence speaker according to an embodiment of the present invention is performed can be described as follows.
이야깃거리 제공장치는 인공지능 스피커 통해서 수신한 복수의 사용자 간 대화 음성을 텍스트로 변환하고(S210), 변환된 텍스트 내에 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 발견하면, 이를 기초로 대화 주제를 추출할 수 있다(S220). 즉, 본 단계(S220)에서, 이야깃거리 제공장치는 텍스트로 변환한 대화를 자연어 처리 과정을 통해서 동의어, 유사어를 도출하여 키워드를 추출하고 연관어 검색을 통해서, 대화 내용 중 동일한 어휘는 아니지만, 동일하거나 유사한 맥락으로 사용되는 어휘를 추출할 수 있으며, 이를 기초로 대화 주제를 추출할 수 있다. The device for providing a story distance converts a conversation voice between a plurality of users received through an artificial intelligence speaker into text (S210), and when a vocabulary appearing at a frequency above a predetermined threshold within the converted text is found, extracts a conversation topic based on this It can be done (S220). That is, in this step (S220), the story distance providing device extracts keywords by deriving synonyms and synonyms through a natural language processing process for converting a conversation converted to text, and searches for related words, but is not the same vocabulary among the conversation contents. Or, a vocabulary used in a similar context can be extracted, and a conversation topic can be extracted based on this.
예를 들면, 대화 내용 중에 야구라는 명시적인 어휘가 제시되지 않았지만, 야구 선수나 팀의 이름이 등장하고, 홈런, 안타, 도루, 직구, 변화구 등의 야구 용어 등이 등장하면, 연관어 검색을 통해서 사용자들의 대화 주제가 야구에 대한 것임이 도출될 수 있을 것이다. For example, if an explicit vocabulary of baseball is not provided in the conversation, but the name of a baseball player or team appears, and baseball terms such as home runs, hits, steals, fastballs, and changing balls appear, search for related words. It may be found that the conversation topic of users is about baseball.
앞 단계(S220)에서 추출된 대화 주제를 기초로, 이야깃거리 제공장치는 인터넷 검색을 통해 연관 이야깃거리를 획득하여, 인공지능 스피커로 전달하거나, 사용자 단말로 전달할 수 있다(S230). 사용자 단말은 인공지능 스피커에 등록되어 있거나 이야깃거리 제공 장치에 미리 지정되어 있는 단말이거나, 사용자 단말에서 동작하는 어플리케이션을 통해 인공지능 스피커나 이야깃거리 제공 장치에 연결된 단말 또는 로그인한 사용자를 통해서 식별 가능하다.Based on the conversation topic extracted in the previous step (S220), the story distance providing device may obtain a related story distance through an internet search and deliver it to an artificial intelligence speaker or to a user terminal (S230). The user terminal can be identified through a terminal connected to the AI speaker or a device for providing a story distance or an logged-in user through an application running on the user terminal, or registered in the AI speaker or pre-assigned to the device for providing a story distance. .
또한, 본 단계(S230)에서 획득된 이야깃거리는 텍스트로 요약된 후, 음성으로 변환되어 인공지능 스피커를 통해서 음성 출력될 수 있다.In addition, the talk obtained in this step (S230) can be summarized into text, converted into speech, and output through the artificial intelligence speaker.
한편, 사용자 간의 대화가 중단되었거나, 사용자간 논쟁이나 다툼이 발생하는 등의 상황을 인식한 인공지능 스피커로부터 상황 적응형 콘텐츠 요청이 수신되면, 침묵상황에 대처하기 위한 대화 소재 콘텐츠나 분쟁 상황에 대처하기 위한 분위기 전환용 콘텐츠 등이 제작되어 인공지능 스피커에 제공될 수 있다(S240).On the other hand, when a situation-adaptive content request is received from an artificial intelligence speaker that recognizes a situation such as a conversation between users being interrupted, or a dispute or quarrel between users, a conversation content or a conflict situation to cope with silence The content for the mood change can be produced and provided to the artificial intelligence speaker (S240).
이하, 상황 적응형 콘텐츠 제공 방법에 대하여 좀더 상세하게 설명한다. Hereinafter, a method for providing context-adaptive content will be described in more detail.
도 11은 본 발명의 일 실시예에 따른 인공지능 스피커를 이용한 상황 적응형 콘텐츠를 제공하는 과정을 보여주는 순서도이다. 11 is a flowchart illustrating a process of providing context-adaptive content using an artificial intelligence speaker according to an embodiment of the present invention.
도 11을 참조하면 상황 적응형 콘텐츠를 제공하는 과정은 상황별 요청 수신 단계(S241), 대화 소재 제공 단계(S242), 감성 콘텐츠 제공 단계(S243) 및 패러디 영상 제공 단계(S244)를 포함하여 구성될 수 있다.Referring to FIG. 11, a process of providing context-adaptive content includes a step-by-step request receiving step (S241), a conversation material providing step (S242), an emotional content providing step (S243), and a parody video providing step (S244). Can be.
또한, 도 11을 참조하면 상황 적응형 콘텐츠를 제공하는 과정은 의 각 단계는 다음과 같이 설명될 수 있다. In addition, referring to FIG. 11, each step of the process of providing context-adaptive content may be described as follows.
먼저, 이야깃거리 제공 장치는 사용자간 대화가 일정시간 동안 대화가 이어지지 않는 것을 감지한 인공지능 스피커로부터 대화 소재 제공 요청을 수신하면(S241), 인터넷 검색을 통해서 실시간 이슈를 검색을 통한 대화 소재를 선정하고 대화 소재와 관련된 이야깃거리(예를 들면, 뉴스 기사, 블로그, 개인방송 링크 등)가 획득하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달할 수 있다(S242). First, the story providing device receives a request for providing a conversation material from an artificial intelligence speaker that detects that conversation between users is not continued for a certain period of time (S241), and selects a conversation material through real-time issue search through internet search. And the story related to the conversation material (for example, news articles, blogs, personal broadcasting links, etc.) can be obtained and delivered to the artificial intelligence speaker or delivered to a predetermined user terminal (S242).
또는, 이야깃거리 제공 장치는 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면(S241), 감성 콘텐츠 제공 단계(S243)에서, 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠가 선정되어 인공지능 스피커로 전달될 수 있다. 예를 들면, 감성 콘텐츠는 음악, 문구, 사진, 동영상 또는 논쟁 주제와 관련된 뉴스 기사 등을 포함할 수 있다. 감성 콘텐츠는 논쟁 상황에 따라서 빅데이터 분석을 통해서 미리 학습한 감성 콘텐츠가 선정될 수 있다.Alternatively, the story providing device receives the content request for mood switching from the artificial intelligence speaker that detects the controversial situation by analyzing the conversation voice between a plurality of users (S241), and in the emotional content providing step (S243), switches the controversial situation A predetermined emotional content to be selected may be selected and delivered to the artificial intelligence speaker. For example, emotional content may include music, phrases, photos, videos, or news articles related to a controversial topic. Emotional content can be selected in advance through emotional analysis based on big data analysis.
또는, 상황별 요청 수신 단계(S241)에서, 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 논쟁 패러디 영상 요청을 수신하면, 패러디 영상 제공 단계(S244)에서, 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 제작되어 인공지능 스피커로 전달되거나, 미리 지정된 사용자 단말로 전달될 수 있으며, 인공지능 스피커로 전달된 영상은 디스플레이를 통해서 재생될 수 있다.Alternatively, in the request receiving step for each situation (S241), when receiving a request for a debate parody video from an artificial intelligence speaker that detects a debate situation by analyzing a conversation voice between a plurality of users, in the step of providing a parody image (S244), a plurality of users Video characters are created for each conversational voice to produce a replayed parody image, which can be delivered to an artificial intelligence speaker or delivered to a pre-designated user terminal, and an image delivered to the artificial intelligence speaker can be reproduced through a display.
이하, 인공지능 스피커에서 수행되는 이야깃거리 제공 방법에 대하여 좀 더 상세하게 설명한다.Hereinafter, a method of providing a story distance performed in an artificial intelligence speaker will be described in more detail.
도 12는 본 발명의 일 실시예에 따른 인공지능 스피커를 통해서 사용자에게 이야깃거리를 제공하는 과정을 보여주는 순서도이다.12 is a flow chart showing a process of providing a story to a user through an artificial intelligence speaker according to an embodiment of the present invention.
도 12를 참조하면 인공지능 스피커를 통해서 사용자에게 이야깃거리를 제공하는 과정은 음성 분리 단계(S151), 사용자 식별 단계(S152), 대화소재 제공 단계(S153), 분위기 전환 단계(S154) 및 패러디 영상 제공 단계(S155)을 포함하여 구성될 수 있다.Referring to Figure 12, the process of providing a user with a talk through an artificial intelligence speaker includes a voice separation step (S151), a user identification step (S152), a conversation material providing step (S153), an atmosphere switching step (S154), and a parody video. It may be configured to include a providing step (S155).
인공지능 스피커는 마이크를 통해 수신한 사용자 음성을 분리하고(S151), 사용자 음성 데이터베이스를 참조하여 분리한 사용자 음성에 대응하는 사용자와, 사용자 단말을 식별할 수 있다(S152).The artificial intelligence speaker may separate the user voice received through the microphone (S151), and identify a user corresponding to the separated user voice and a user terminal by referring to the user voice database (S152).
인공지능 스피커는 식별된 음성이 복수의 사용자간 대화 음성이라면 대화 주기를 점검하여, 소정의 임계 시간 이상 대화가 이어지지 않는다고 판단하면, 대화 소재 데이터베이스로부터 미리 지정된 순위에 따라 대화 소재를 선정하고, 선정된 대화 소재를 스피커나 사용자 단말을 통해 전달할 수 있다(S153).The artificial intelligence speaker checks the conversation cycle if the identified voice is a conversation voice between a plurality of users, and if it is determined that the conversation does not continue for a predetermined threshold time, selects the conversation material according to a predetermined rank from the conversation material database, and selects the selected conversation material. The conversation material may be delivered through a speaker or a user terminal (S153).
또는, 본 단계(S153)에서, 인공지능 스피커는 인터넷 검색을 통해서 실시간 이슈를 검색하고, 실시간 이슈와 관련된 뉴스를 검색하여 대화 소재로 선정하고, 디스플레이를 통해서 출력할 수 있다.Alternatively, in this step (S153), the artificial intelligence speaker may search for real-time issues through Internet search, search for news related to real-time issues, select them as conversation materials, and output them through a display.
이때, 임계 시간은 사용자가 미리 지정할 수도 있고, 기본값으로 설정될 수도 있으며, 대화 주기를 점검하여 대화 상황에 따라서 인공지능 스피커가 판단할 수도 있다. 선정된 대화 소재는 음성 변환하여 스피커를 통해 공개적으로 출력할 수 있고, 사용자 단말을 통해서 사용자에게만 전달할 수도 있다. At this time, the threshold time may be specified in advance by the user, or may be set as a default value, and the artificial intelligence speaker may determine the conversation period by checking the conversation period. The selected dialogue material can be voice-transformed and output publicly through a speaker, or can be delivered only to a user through a user terminal.
한편, 인공지능 스피커는 대화 음성을 분석하여 사용자간 논쟁 상황이 감지되면, 감성 콘텐츠 데이터베이스로부터 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 스피커로 출력하거나(S154), 사용자들의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 디스플레이를 통해서 출력할 수 있다(S154), 영상 캐릭터는 캐릭터 데이터베이스로부터 추출가능하고, 음성은 녹음된 사용자의 영상을 그대로 재연하거나, 사용자 음성 데이터베이스에서 유명 연예인이나 가족의 음성을 추출하여 더빙할 수도 있다. On the other hand, the artificial intelligence speaker analyzes the conversational voice, and when a debate situation between users is detected, selects some emotional content for switching the debate situation from the emotional content database and outputs it to the speaker (S154), or to each conversational voice of users. A parody image reproduced by giving a video character can be output through a display (S154), the video character can be extracted from the character database, and the voice reproduces the recorded user's image as it is, or a famous celebrity in the user voice database You can also dub your family's voice.
앞에 설명한 바와 같이, 본 발명의 인공지능 스피커를 이용한 이야깃거리 제공 시스템을 이용하면, 인공지능 스피커가 사용자의 대화 음성을 수신하여, 대화 주제에 따라 필요한 정보를 제공하거나, 대화자 간 침묵이 흐르는 경우, 필요한 대화 소재를 검색하여 인공지능 스피커를 통해서 알려줄 수 있다. 또한, 사용자 음성의 톤이나 크기 등을 분석하여, 논쟁 상황이라고 판단되면, 분위기 전환을 위한 콘텐츠를 사용자에게 제공하거나, 논쟁상황을 재연한 패러디 영상을 보여주면서 사용자를 진정시켜서 논쟁을 종료시킬 수 있는 장점이 있다. As described above, when the talking distance providing system using the artificial intelligence speaker of the present invention is used, when the artificial intelligence speaker receives a user's conversation voice, provides necessary information according to a conversation topic, or when silence between conversations flows, You can search for necessary conversation materials and inform them through artificial intelligence speakers. In addition, by analyzing the tone or size of the user's voice, if it is determined to be a controversial situation, content can be provided to the user, or a parody video that reproduces the controversial situation can calm the user and end the debate. There are advantages.
한편, 지금까지 설명한 본 발명의 방법 및 장치는 실제로 컴퓨터 프로그램에 의해 구현될 수 있고, 컴퓨터에서 실행될 때 컴퓨터 판독 가능한 기록 매체에 저장될 수 있다. 컴퓨터 판독 가능한 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있도록 프로그램 및 데이터가 저장되는 모든 종류의 기록매체를 포함하며, ROM, RAM, CD, DVD-ROM, 자기테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 인터넷을 통한 전송되는 형태로 구현되는 것도 포함될 수 있다. 즉, 이와 같은 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.On the other hand, the method and apparatus of the present invention described so far can be actually implemented by a computer program and can be stored in a computer readable recording medium when executed in a computer. Computer-readable recording media include all types of recording media in which programs and data are stored so that they can be read by a computer system. ROM, RAM, CD, DVD-ROM, magnetic tapes, floppy disks, optical data storage devices, etc. In addition, it may also include those implemented in the form of transmission over the Internet. That is, such a medium may be distributed over a networked computer system, so that the computer readable code is stored and executed in a distributed manner.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although described above with reference to preferred embodiments of the present invention, those skilled in the art variously modify and change the present invention without departing from the spirit and scope of the present invention as set forth in the claims below. You can understand that you can.
Claims (20)
상기 인공지능 스피커를 통해서 수신한 복수의 사용자 간 대화 음성을 텍스트로 변환하는 텍스트 변환부와,
상기 텍스트를 분석하여 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 기초로 대화 주제를 추출하는 대화 주제 추출부와,
상기 대화 주제를 기초로 인터넷 검색하여 연관된 이야깃거리를 획득하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 이야깃거리 제공부와,
상기 인공지능 스피커로부터 요청된 상황에 따른 상황 적응형 콘텐츠를 제공하는 상황별 콘텐츠 제공부를 포함하고, 상기 상황별 콘텐츠 제공부는
상기 복수의 사용자간 대화가 일정시간 동안 대화가 이어지지 않는 것을 감지한 인공지능 스피커로부터 대화 소재 제공 요청을 수신하면, 인터넷 검색을 통해서 실시간 이슈를 검색하여 대화 소재를 선정하고, 상기 대화 소재와 관련된 이야깃거리를 획득하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 대화 소재 제공 모듈을 포함하는 이야깃거리 제공 장치.In the real-time talking distance providing apparatus using artificial intelligence speaker,
A text conversion unit for converting a conversation voice between a plurality of users received through the artificial intelligence speaker into text;
A dialogue topic extraction unit that analyzes the text and extracts a dialogue topic based on vocabulary appearing at a frequency above a predetermined threshold;
A story distance providing unit that searches the Internet based on the conversation topic to obtain an associated story distance and delivers it to the artificial intelligence speaker, or delivers it to a predefined user terminal;
And a context-specific content providing unit that provides context-adaptive content according to the requested situation from the artificial intelligence speaker, and the context-specific content providing unit
When a request for providing a conversation material is received from an artificial intelligence speaker that detects that the conversation between the plurality of users is not continued for a certain period of time, a real-time issue is searched through an Internet search to select a conversation material, and a story related to the conversation material A device for providing a story distance including a dialogue material providing module that acquires a distance and delivers it to the artificial intelligence speaker or delivers it to a predetermined user terminal.
상기 이야깃거리를 요약하고, 음성으로 변환하여 상기 인공지능 스피커를 통해서 음성 출력하는 것을 특징으로 하는 이야깃거리 제공 장치.The method of claim 1, wherein the story providing unit
A device for providing a story distance, which summarizes the story distance, converts it into voice, and outputs voice through the artificial intelligence speaker.
상기 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면,
상기 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 감성 콘텐츠 제공 모듈을 더 포함하는 것을 특징으로 하는 이야깃거리 제공 장치.The method of claim 1, wherein the content providing unit for each situation
When receiving a request for content for mood change from an artificial intelligence speaker that detects a controversial situation by analyzing a conversation voice between the plurality of users,
Apparatus for providing a story, characterized in that it further comprises a module for providing emotional content to select the predetermined emotional content for switching the controversial situation and deliver it to the artificial intelligence speaker or to a predetermined user terminal.
상기 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면,
상기 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 제작하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 패러디 영상 제공 모듈을 더 포함하는 것을 특징으로 하는 이야깃거리 제공 장치.The method of claim 1, wherein the content providing unit for each situation
When receiving a request for content for mood change from an artificial intelligence speaker that detects a controversial situation by analyzing a conversation voice between the plurality of users,
Providing a story character by providing a video character to each conversational voice of the plurality of users to produce a replayed parody image and delivering it to an artificial intelligence speaker, or further comprising a parody image providing module to deliver to a predefined user terminal. Device.
스피커와,
복수의 대화 소재 및 상기 대화 소재 관련 이야깃거리를 포함하는 대화 소재 데이터베이스 및 미리 학습한 사용자 음성 데이터베이스가 저장되는저장부와,
사용자 특성에 맞는 이야깃거리를 제공하기 위한 이야깃거리 제공부와,
영상 출력을 위한 디스플레이부를 포함하고,
상기 이야깃거리 제공부는
상기 마이크를 통해 수신한 사용자 음성을 분리하는 음성 분리 모듈과,
상기 사용자 음성 데이터베이스를 참조하여 상기 음성에 대응하는 사용자와 사용자 단말을 식별하는 사용자 식별 모듈과,
상기 수신한 음성이 복수의 사용자간 대화 음성이라면 대화 주기를 점검하여, 소정의 임계 시간 이상 대화가 이어지지 않는다고 판단하면, 상기 대화 소재 데이터베이스로부터 미리 지정된 순위에 따라 대화 소재를 선정하여 상기 스피커나 상기 사용자 단말을 통해 전달하는 대화 소재 제공 모듈과,
상기 대화 음성을 분석하여 복수의 사용자간 논쟁 상황이 감지되면, 상기 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 상기 디스플레이부를 통해서 출력하는 패러디 영상 제공 모듈을 더 포함하는 것을 특징으로 하는 인공지능 스피커.With microphone,
With speakers,
A storage unit in which a conversational material database including a plurality of conversational materials and the conversational material related stories and a pre-trained user voice database are stored;
A talking distance providing unit for providing a talking distance suitable for user characteristics,
It includes a display for video output,
The above-mentioned story providing unit
And a voice separation module for separating the user voice received through the microphone,
A user identification module that identifies a user and a user terminal corresponding to the voice with reference to the user voice database;
If the received voice is a conversation voice between a plurality of users, the conversation cycle is checked, and if it is determined that the conversation is not continued for a predetermined threshold time or more, the conversation material is selected according to a predetermined order from the conversation material database to select the speaker or the user A module for providing a conversation material delivered through a terminal,
Further comprising a parity image providing module for outputting a replayed parody image through the display unit by assigning a video character to each dialogue voice of the plurality of users, when the dialogue voice is analyzed and a dispute between multiple users is detected. Features artificial intelligence speaker.
상기 저장부에는 분위기 전환을 위한 상황별 감성 콘텐츠 데이터베이스가 저장되고,
상기 이야깃거리 제공부는 상기 대화 음성을 분석하여 복수의 사용자간 논쟁 상황이 감지되면, 상기 상황별 감성 콘텐츠 데이터베이스로부터 상기 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 상기 스피커로 출력하는 분위기 전환 모듈을 더 포함하는 것을 특징으로 하는 인공지능 스피커.The method of claim 6,
Emotional content database for each situation is stored in the storage unit,
The story providing unit analyzes the conversation voice, and when a debate situation between a plurality of users is detected, an atmosphere switching module that selects predetermined emotional content for switching the debate situation from the emotional content database according to the situation and outputs it to the speaker Artificial intelligence speaker, characterized in that it further comprises.
인터넷 검색을 통해서 실시간 이슈를 검색하고, 상기 실시간 이슈와 관련된 뉴스를 검색하여 상기 뉴스를 상기 대화 소재로 선정하고, 상기 디스플레이부를 통해서 제공하는 것을 특징으로 하는 인공지능 스피커.The method of claim 6, wherein the conversation material providing module
An artificial intelligence speaker characterized by searching for a real-time issue through internet search, searching for news related to the real-time issue, selecting the news as the conversation material, and providing it through the display unit.
상기 인공지능 스피커를 통해서 수신한 복수의 사용자 간 대화 음성을 텍스트로 변환하는 단계와,
상기 텍스트를 분석하여 미리 정해진 임계치 이상의 빈도로 등장하는 어휘를 기초로 대화 주제를 추출하는 단계와,
상기 대화 주제를 기초로 인터넷 검색하여 연관된 이야깃거리를 획득하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 이야깃거리 제공단계와,
상기 인공지능 스피커로부터 요청된 상황에 따른 상황 적응형 콘텐츠를 제공하는 상황별 콘텐츠 제공단계를 포함하고, 상기 상황별 콘텐츠 제공단계는
상기 복수의 사용자간 대화가 일정시간 동안 대화가 이어지지 않는 것을 감지한 인공지능 스피커로부터 대화 소재 제공 요청을 수신하면, 인터넷 검색을 통해서 실시간 이슈를 검색하여 대화 소재를 선정하고, 상기 대화 소재와 관련된 이야깃거리를 획득하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 대화 소재 제공 단계를 포함하는 이야깃거리 제공 방법.In the method for providing a real-time story using artificial intelligence speaker performed in a computing device,
Converting a conversation voice between a plurality of users received through the artificial intelligence speaker into text;
Analyzing the text and extracting a conversation topic based on vocabulary appearing at a frequency above a predetermined threshold;
A step of providing a story distance by searching the Internet based on the conversation subject to obtain an associated story distance, and transmitting it to the artificial intelligence speaker, or to a predetermined user terminal;
And a context-specific content providing step of providing context-adaptive content according to the requested situation from the artificial intelligence speaker.
When a request for providing a conversation material is received from an artificial intelligence speaker that detects that the conversation between the plurality of users is not continued for a certain period of time, a real-time issue is searched through an Internet search to select a conversation material, and a story related to the conversation material A method for providing a story distance, including a step of providing a conversation material to acquire a distance and deliver it to an artificial intelligence speaker or to a predetermined user terminal.
상기 이야깃거리를 요약하고, 음성으로 변환하여 상기 인공지능 스피커를 통해서 음성 출력하는 것을 특징으로 하는 이야깃거리 제공 방법.The method of claim 10, wherein the providing of the story
A method of providing a story distance, wherein the story distance is summarized, converted into speech, and outputted through the artificial intelligence speaker.
상기 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면,
상기 논쟁 상황을 전환하기 위한 소정의 감성 콘텐츠를 선정하여 상기 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 감성 콘텐츠 제공 단계를 더 포함하는 것을 특징으로 하는 이야깃거리 제공 방법.The method of claim 10, wherein the step of providing content by context
When receiving a request for content for mood change from an artificial intelligence speaker that detects a controversial situation by analyzing a conversation voice between the plurality of users,
A method for providing a story, further comprising a step of providing emotional content to a predetermined user terminal by selecting a predetermined emotional content for switching the controversial situation, or to the artificial intelligence speaker.
상기 복수의 사용자간 대화 음성을 분석하여 논쟁 상황을 감지한 인공지능 스피커로부터 분위기 전환용 콘텐츠 요청을 수신하면,
상기 복수의 사용자의 각 대화 음성에 영상 캐릭터를 부여하여 재연한 패러디 영상을 제작하여 인공지능 스피커로 전달하거나, 미리 지정된 사용자 단말로 전달하는 패러디 영상 제공 단계를 더 포함하는 것을 특징으로 하는 이야깃거리 제공 방법.The method of claim 10, wherein the step of providing content by context
When receiving a request for content for mood change from an artificial intelligence speaker that detects a controversial situation by analyzing a conversation voice between the plurality of users,
Providing a story character by providing a video character to each conversational voice of the plurality of users, producing a replayed parody image, and transmitting it to an artificial intelligence speaker, or providing a parody image to a predetermined user terminal. Way.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180134168A KR102135077B1 (en) | 2018-11-05 | 2018-11-05 | System for providing topics of conversation in real time using intelligence speakers |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180134168A KR102135077B1 (en) | 2018-11-05 | 2018-11-05 | System for providing topics of conversation in real time using intelligence speakers |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20200051173A KR20200051173A (en) | 2020-05-13 |
| KR102135077B1 true KR102135077B1 (en) | 2020-07-17 |
Family
ID=70730057
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020180134168A KR102135077B1 (en) | 2018-11-05 | 2018-11-05 | System for providing topics of conversation in real time using intelligence speakers |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102135077B1 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP4220628A4 (en) | 2021-02-19 | 2024-05-22 | Samsung Electronics Co., Ltd. | Electronic device for supporting service for artificial intelligent agent that talks with user |
| KR20220118698A (en) * | 2021-02-19 | 2022-08-26 | 삼성전자주식회사 | Electronic device for supporting artificial intelligence agent services to talk to users |
| KR102396209B1 (en) * | 2021-11-25 | 2022-05-12 | (주)펜타유니버스 | System for providing contents according to the result of user voice analysis based on artificial intelligence |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101891496B1 (en) * | 2017-12-26 | 2018-08-24 | 주식회사 머니브레인 | Interactive ai agent system and method for actively monitoring and joining a dialogue session among users, computer readable recording medium |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101336641B1 (en) * | 2012-02-14 | 2013-12-16 | (주) 퓨처로봇 | Emotional Sympathy Robot Service System and Method of the Same |
| KR20160139771A (en) * | 2015-05-28 | 2016-12-07 | 삼성전자주식회사 | Electronic device, information providing system and information providing method thereof |
-
2018
- 2018-11-05 KR KR1020180134168A patent/KR102135077B1/en active IP Right Grant
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101891496B1 (en) * | 2017-12-26 | 2018-08-24 | 주식회사 머니브레인 | Interactive ai agent system and method for actively monitoring and joining a dialogue session among users, computer readable recording medium |
Non-Patent Citations (1)
| Title |
|---|
| aispeaker(2017.07.01.)1부* |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20200051173A (en) | 2020-05-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11557280B2 (en) | Background audio identification for speech disambiguation | |
| KR102315732B1 (en) | Speech recognition method, device, apparatus, and storage medium | |
| KR102429436B1 (en) | Server for seleting a target device according to a voice input, and controlling the selected target device, and method for operating the same | |
| US9190052B2 (en) | Systems and methods for providing information discovery and retrieval | |
| CN107040452B (en) | Information processing method and device and computer readable storage medium | |
| US11457061B2 (en) | Creating a cinematic storytelling experience using network-addressable devices | |
| US11776541B2 (en) | Communicating announcements | |
| KR102135077B1 (en) | System for providing topics of conversation in real time using intelligence speakers | |
| JP2014132464A (en) | Interactive type interface device and control method of the same | |
| US11881209B2 (en) | Electronic device and control method | |
| KR102529262B1 (en) | Electronic device and controlling method thereof | |
| US11847419B2 (en) | Human emotion detection | |
| WO2022182409A1 (en) | Age-sensitive automatic speech recognition | |
| US20220067384A1 (en) | Multimodal game video summarization | |
| EP4208817A1 (en) | Multimodal game video summarization with metadata | |
| US11024303B1 (en) | Communicating announcements | |
| CN114424148B (en) | Electronic device and method for providing manual thereof | |
| US11875786B2 (en) | Natural language recognition assistant which handles information in data sessions | |
| JP6248677B2 (en) | Conversation assistance program, conversation assistance method, and conversation system | |
| CN112040329B (en) | Method for dynamically processing and playing multimedia content and multimedia playing device | |
| WO2022224584A1 (en) | Information processing device, information processing method, terminal device, and display method | |
| CN112799630B (en) | Creating a cinematized storytelling experience using network addressable devices | |
| CN106653057A (en) | Data processing method and apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |