KR102135859B1 - 개인화된 가상 비서를 제공하는 장치 - Google Patents

개인화된 가상 비서를 제공하는 장치 Download PDF

Info

Publication number
KR102135859B1
KR102135859B1 KR1020190132838A KR20190132838A KR102135859B1 KR 102135859 B1 KR102135859 B1 KR 102135859B1 KR 1020190132838 A KR1020190132838 A KR 1020190132838A KR 20190132838 A KR20190132838 A KR 20190132838A KR 102135859 B1 KR102135859 B1 KR 102135859B1
Authority
KR
South Korea
Prior art keywords
processing
virtual
signal
user profile
user
Prior art date
Application number
KR1020190132838A
Other languages
English (en)
Inventor
방성철
Original Assignee
주식회사 유니온플레이스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 유니온플레이스 filed Critical 주식회사 유니온플레이스
Priority to KR1020190132838A priority Critical patent/KR102135859B1/ko
Application granted granted Critical
Publication of KR102135859B1 publication Critical patent/KR102135859B1/ko
Priority to PCT/KR2020/011156 priority patent/WO2021080147A1/ko
Priority to JP2021560902A priority patent/JP7372693B2/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • G10L17/24—Interactive procedures; Man-machine interfaces the user being prompted to utter a password or a predefined phrase

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Computational Linguistics (AREA)
  • Marketing (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Educational Administration (AREA)
  • Game Theory and Decision Science (AREA)
  • Data Mining & Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

유선 또는 무선 통신 인터페이스를 제공하는 통신부; 및 (a) 음성 특성 정보, 서비스 식별 정보 및 상기 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보를 각각 포함하는 하나 이상의 사용자 프로파일을 관리하는 처리; (b) 제1 서비스에 대한 지시 명령을 포함하는 음성 신호를 전자 장치로부터 상기 통신부를 통하여 수신하는 처리; (c) 상기 음성 신호를 기초로 상기 하나 이상의 사용자 프로파일 중에서 개인화 사용자 프로파일을 획득하는 처리; (d) 상기 음성 신호 또는 상기 개인화 사용자 프로파일 중 적어도 하나를 기초로 하나 이상의 가상 비서 중에서 상기 제1 서비스에 대한 상기 지시 명령에 대응하는 제1 가상 비서를 선택하는 처리; (e) 상기 음성 신호를 상기 제1 가상 비서에 적합한 제1 신호로 변환하는 처리; (f) 상기 제1 신호를 상기 제1 가상 비서를 제공하는 제1 가상 비서 플랫폼으로 상기 통신부를 통하여 전송하고 상기 제1 가상 비서 플랫폼으로부터 상기 제1 신호에 대응하는 제1 응답 신호를 상기 통신부를 통하여 수신하는 처리; 및 (g) 상기 제1 응답 신호를 상기 전자 장치로 전송하는 처리를 수행하는 연산 처리부를 포함하는 개인화된 가상 비서를 제공하는 장치가 제공된다.

Description

개인화된 가상 비서를 제공하는 장치{APPARATUS OF PROVIDING PERSONALIZED VIRTUAL ASSISTANT}
본 개시(開示)는 개인화된 가상 비서를 제공하는 장치에 관한 것이다.
일반적으로, "가상 비서"는 명령어 또는 질문을 기초로 사용자를 위한 임무(task) 또는 서비스를 수행하는 소프트웨어 에이전트를 지칭한다. 가상 비서는 지능형 가상 비서(intelligent virtual assistant) 또는 지능형 개인 비서(intelligent personal assistant)라고도 지칭된다. 가상 비서는 텍스트 기반으로 동작하거나 또는 음성 기반으로 동작할 수 있다. 예컨대 가상 비서는 소위 "스마트 스피커" 및 단말기와 같은 전자 장치를 통하여 입력되는 사용자의 음성 입력을 기초로 사용자를 위한 임무 또는 서비스를 수행할 수 있다. 스마트 스피커는 예컨대 마이크로폰과 같이 오디오 신호를 입력하기 위한 오디오 입력부, 스피커와 같이 오디오 신호를 출력하기 위한 오디오 출력부 및 가상 비서와의 유선 또는 무선 통신 연결을 위한 통신부를 포함한다. 스마트 스피커는 비디오 신호를 출력하는 디스플레이부를 더 포함할 수도 있다. 단말기는 마이크로폰과 같은 오디오 입력부, 스피커와 같은 오디오 출력부, 유선 또는 무선 통신 연결을 제공하는 통신부 및 가상 비서를 실행하기 위한 CPU와 같은 연산 처리부를 포함한다. 단말기는 바람직하게는 비디오 신호를 출력하는 디스플레이부를 더 포함한다. 단말기는 예컨대 스마트 폰과 같은 이동 통신 단말기, 노트북 또는 태블릿 컴퓨터와 같은 휴대 단말기 및 개인용 컴퓨터와 같은 컴퓨팅 장치를 포함할 수 있다.
예컨대 애플 사에 의해서 출원되고 2016년 11월 30일자로 등록된 "가상 비서에서 커맨드 처리를 용이하게 하기 위한 컨텍스트 정보의 이용"이라는 명칭의 한국등록특허 제10-1683083호(특허문헌 1)는 가상 비서를 개시하고 있다.
가상 비서를 구현하기 위해서, 예컨대 애플 사의 "Siri", 구글 사의 "Assistant", 아마존 사의 "Alexa" 및 삼성 전자의 "Bixby"와 같은 인공 지능을 이용한 가상 비서 플랫폼이 제공되고 있다. 특히 인공 지능 기술의 발달에 의해서, 가상 비서를 이용하는 사용자의 수가 증가하고 있다.
그러나 종래의 가상 비서는 다음과 같은 단점을 가진다.
우선 기존의 스마트 스피커 또는 단말기의 가상 비서는 특정한 가상 비서 플랫폼에 종속적이다.
예컨대, "Siri" 가상 비서를 위한 스마트 스피커 또는 단말기에서 실행되는 "Siri" 가상 비서는 애플 사에서 제공하는 "Siri" 가상 비서 플랫폼에 종속적이다. 따라서, 예컨대 "Siri" 가상 비서를 위한 스마트 스피커를 이용하여 다른 회사에서 제공하는 가상 비서 플랫폼, 예컨대 삼성 전자의 "Bixby" 가상 비서 플랫폼을 이용하는 것은 매우 어렵다. 또한 단말기의 사용자가 "Siri" 가상 비서를 이용하기 위해서는 "Siri" 가상 비서를 실행하여야 하며, 단말기의 사용자가 "Bixby" 가상 비서를 이용하기 위해서는 "Bixby" 가상 비서를 실행하여야 한다. 예컨대 사용자가 날씨 정보는 구글 사의 "Assistant"를 이용하여 제공받고 음악 정보는 애플 사의 "Siri"를 이용하여 제공받고 도서 정보는 아마존 사의 "Alexa"를 이용하여 제공받고 싶은 경우라도, "Siri" 가상 비서를 위한 스마트 스피커 또는 단말기에서 실행되는 "Siri" 가상 비서는 애플 사에서 제공하는 "Siri" 가상 비서 플랫폼을 이용하여 획득되는 정보를 제공한다.
또한 기존의 스마트 스피커 또는 단말기의 가상 비서는 미리 지정된 시동 명령(wakeup command)과 같은 음성 명령어를 기초로 활성화된다. 시동 명령은 트리거 명령(trigger command)라고도 지칭된다. 예컨대, "Siri" 가상 비서를 이용하여 날씨 정보를 확인하기 위해서는, 사용자는 "헤이, 시리(Hey, siri)"와 같은 시동 명령 및 "오늘 날씨 알아봐줘."라는 지시 명령을 함께 입력하여야 한다.
이러한 단점들을 개선하기 위해서, 예컨대 엘지전자 주식회사에 의해서 출원되고 2019년 2월 27일자로 공개된 "전자 장치 및 그 제어 방법"이라는 명칭의 한국공개특허 제10-2019-0019401호(특허문헌 2)는 복수의 인공 지능 서버(즉 복수의 가상 비서 플랫폼)에 음성을 전송하는 구성을 개시한다.
한국공개특허 제10-2019-0019401호에 따르면, 시동 명령 및 지시 명령을 포함하는 음성이 입력되면, 전자 장치는 복수의 가상 비서 플랫폼에 대응되는 복수의 시동 명령을 생성하고 복수의 시동 명령에 지시 명령을 결합하는 음성 신호를 생성한 후 복수의 가상 비서 플랫폼 각각에 전송한다. 그 후 전자 장치는 복수의 가상 비서 플랫폼 각각으로부터의 지시 명령에 대응하는 결과 정보를 수신하여 출력한다.
또한 예컨대 하만 인터내셔날 인더스트리스 인코포레이티드에 의해서 출원되고 2018년 10월 23일자로 공개된 "복수의 지능형 개인 비서 서비스를 위한 관리 계층"이라는 명칭의 한국공개특허 제10-2018-0115628호(특허문헌 3)는 복수의 가상 비서 플랫폼에 시동 명령 및 지시 명령을 전송하는 구성을 개시한다.
그러나 한국공개특허 제10-2019-0019401호에 따르면, 사용자가 원하지 않는 가상 비서 플랫폼에도 지시 명령이 전달되며, 또한 사용자가 원하지 않는 가상 비서 플랫폼으로부터의 결과도 수신 및 출력되는 단점이 있다. 또한 한국공개특허 제10-2018-0115628에 따르면, 사용자가 명시적으로 자신이 원하는 가상 비서 플랫폼을 특정해야 하는 단점이 있다. 즉 "구글. 오늘 내 스케쥴이 뭐야? 그리고 시리. 나의 플레이리스트로부터 음악을 재생해 줘."와 같은 형태로 사용자는 음성을 입력해야 한다.
또한, 기존의 스마트 스피커 또는 단말기의 가상 비서는 특정한 사용자를 가정하고 있을 뿐이며, 다수의 사용자에 대해서 고려하지 않고 있다. 따라서 기존의 스마트 스피커 또는 단말기의 가상 비서를 이용하여 다수의 사용자 각각에 적합한 가상 비서를 제공하는 것은 매우 어렵다.
예컨대, 가정 내에 배치된 스마트 스피커의 경우, 가족 구성원 모두가 사용할 수 있음에도 불구하고, 각 사용자에 적합한 가상 비서를 제공하는 것은 어렵다. 예컨대 노인과 같이 음성이 명확하지 않은 사용자의 경우, 해당 사용자의 음성을 인식하여 가상 비서를 제공하는 것은 매우 어렵다. 또한 가족 구성원이 아니라 일시 방문자에게 스마트 스피커를 통하여 가상 비서를 제공하는 경우에는, 방문자에게 제공할 수 없는 기능도 스마트 스피커를 통하여 제공될 수 있다. 예컨대, 가상 비서가 가정 내의 가전 제품을 제어하는 경우, 방문자에게 가정 내의 가전 제품을 제어하는 기능이 제한없이 제공될 수도 있다.
1. 한국등록특허 제10-1683083호. 2. 한국공개특허 제10-2019-0019401호. 3. 한국공개특허 제10-2018-0115628호.
본원에서 설명되는 기술의 목적은 사용자별로 설정되는 사용자 프로파일을 이용하여 개인화된 가상 비서를 제공하는 데 있다.
상기 기술적 과제를 달성하기 위하여, 본원에서 설명되는 기술의 일 형태에 따르면, 유선 또는 무선 통신 인터페이스를 제공하는 통신부; 및 (a) 음성 특성 정보, 서비스 식별 정보 및 상기 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보를 각각 포함하는 하나 이상의 사용자 프로파일을 관리하는 처리; (b) 제1 서비스에 대한 지시 명령을 포함하는 음성 신호를 전자 장치로부터 상기 통신부를 통하여 수신하는 처리; (c) 상기 음성 신호를 기초로 상기 하나 이상의 사용자 프로파일 중에서 개인화 사용자 프로파일을 획득하는 처리; (d) 상기 음성 신호 또는 상기 개인화 사용자 프로파일 중 적어도 하나를 기초로 하나 이상의 가상 비서 중에서 상기 제1 서비스에 대한 상기 지시 명령에 대응하는 제1 가상 비서를 선택하는 처리; (e) 상기 음성 신호를 상기 제1 가상 비서에 적합한 제1 신호로 변환하는 처리; (f) 상기 제1 신호를 상기 제1 가상 비서를 제공하는 제1 가상 비서 플랫폼으로 상기 통신부를 통하여 전송하고 상기 제1 가상 비서 플랫폼으로부터 상기 제1 신호에 대응하는 제1 응답 신호를 상기 통신부를 통하여 수신하는 처리; 및 (g) 상기 제1 응답 신호를 상기 전자 장치로 전송하는 처리를 수행하는 연산 처리부를 포함하고, 상기 처리 (d)는, (d-1) 상기 음성 신호가 상기 제1 가상 비서에 대응하는 시동 명령을 더 포함하면, 상기 시동 명령에 대응되는 상기 제1 가상 비서를 선택하는 처리; 및 (d-2) 상기 음성 신호가 상기 제1 가상 비서에 대응하는 상기 시동 명령을 포함하지 않으면, 상기 개인화 사용자 프로파일에 포함된 상기 서비스 식별 정보 및 상기 가상 비서 플랫폼 식별 정보를 기초로 상기 제1 가상 비서를 선택하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치가 제공된다.
본원에서 설명되는 기술에 따르면, 사용자별로 설정되는 사용자 프로파일을 기초로 개인화된 가상 비서를 제공할 수 있다. 예컨대, 스마트 스피커 또는 단말기로부터 전송되는 음성 신호를 기초로 개인화 사용자 프로파일을 획득하고, 음성 신호 또는 개인화 사용자 프로파일 중 적어도 하나를 기초로 사용자별로 개인화된 가상 비서를 제공할 수 있다.
도 1은 본원에서 설명되는 기술의 제1 실시예에 따른 개인화된 가상 비서를 제공하는 장치의 예시적인 구성을 나타내는 도면.
도 2는 제1 실시예에 따른 개인화된 가상 비서를 제공하는 장치를 포함하는 시스템 환경의 예시적인 구성을 나타내는 도면.
도 3은 제1 실시예에 따른 개인화 광고를 제공하는 장치의 연산 처리부가 수행하는 처리를 예시적으로 나타내는 도면.
도 4는 제1 실시예에 따른 개인화 광고를 제공하는 장치의 연산 처리부가 수행하는 처리를 예시적으로 나타내는 도면.
도 5는 제1 실시예에 따른 개인화 광고를 제공하는 장치의 사용자 프로파일을 예시적으로 나타내는 도면.
도 6은 제2 실시예에 따른 개인화 광고를 제공하는 장치의 연산 처리부가 수행하는 처리를 예시적으로 나타내는 도면.
이하, 본원에서 설명되는 기술에 따른 개인화된 가상 비서를 제공하는 장치의 실시예를 첨부한 도면을 참조로 보다 구체적으로 설명한다. 한편 본원에서 설명되는 기술의 실시예를 설명하기 위한 도면들에서, 설명의 편의를 위해서 실제 구성 중 일부만을 도시하거나 일부를 생략하여 도시하거나 변형하여 도시하거나 또는 축척이 다르게 도시될 수 있다.
<제1 실시예>
도 1은 본원에서 설명되는 기술의 제1 실시예에 따른 개인화된 가상 비서를 제공하는 장치의 예시적인 구성을 나타내는 도면이다.
도 1을 참조하면, 개인화된 가상 비서를 제공하는 장치(100)는 통신부(110) 및 연산 처리부(130)를 포함한다. 또한 도 1을 참조하면, 개인화된 가상 비서를 제공하는 장치(100)는 사용자 프로파일 저장부(150)를 더 포함할 수 있다. 이하 개인화된 가상 비서를 제공하는 장치(100)는 단순히 장치(100)라고도 지칭된다.
본원에서 설명되는 기술에 따른 장치(100)는 예컨대 개인용 컴퓨터 및 전용 컴퓨터와 같은 컴퓨팅 장치를 이용하여 구현될 수 있다.
통신부(110)는 유선 또는 무선 통신 인터페이스를 제공한다. 예컨대 통신부(110)는 전자 장치(도 2의 200)와의 유선 또는 무선 통신 인터페이스를 제공한다. 또한 통신부(110)는 가상 비서 플랫폼(도 2의 300)과의 유선 또는 무선 통신 인터페이스를 제공한다. 통신부(110)는 유무선 통신을 수행하는 반도체 칩을 이용하여 구현될 수 있다.
연산 처리부(130)는 예컨대 CPU(central processing unit)와 같은 반도체 소자에 의해서 구현될 수 있다. 연산 처리부(130)의 일부 기능은 제1 CPU에 의해서 구현되고, 연산 처리부(130)의 다른 일부 기능은 제2 CPU에 의해서 구현될 수도 있다. 연산 처리부(130)의 상세한 구성은 후술한다.
사용자 프로파일 저장부(150)는 하나 이상의 사용자 프로파일을 저장한다. 사용자 프로파일 저장부(150)는 예컨대 반도체 메모리와 같은 반도체 소자에 의해서 구현될 수 있다.
도 2는 제1 실시예에 따른 개인화된 가상 비서를 제공하는 장치를 포함하는 시스템 환경의 예시적인 구성을 나타내는 도면이다.
도 2를 참조하면, 시스템 환경은 개인화된 가상 비서를 제공하는 장치(100)와, 전자 장치(200)와, 하나 이상의 가상 비서 플랫폼(300)을 포함한다. 전자 장치(200)는 스마트 스피커(210) 또는 단말기(230)를 포함한다.
스마트 스피커(210)는 전술한 바와 같이 예컨대 마이크로폰과 같이 오디오 신호를 입력하기 위한 오디오 입력부, 스피커와 같이 오디오 신호를 출력하기 위한 오디오 출력부 및 가상 비서와의 유선 또는 무선 통신 연결을 위한 통신부를 포함한다. 단말기(230)는 전술한 바와 같이 예컨대 마이크로폰과 같은 오디오 입력부, 스피커와 같은 오디오 출력부, 유선 또는 무선 통신 연결을 제공하는 통신부 및 가상 비서를 실행하기 위한 CPU와 같은 연산 처리부를 포함한다.
하나 이상의 가상 비서 플랫폼(300)은 예컨대 가상 비서 플랫폼(300-1), 가상 비서 플랫폼(300-2) 내지 가상 비서 플랫폼(300-n)으로 구성될 수 있다. n은 예컨대 3 이상의 자연수이다. 예컨대, 가상 비서 플랫폼(300-1)은 애플 사의 "Siri" 가상 비서를 위한 플랫폼이며, 가상 비서 플랫폼(300-2)은 구글 사의 "Assistant" 가상 비서를 위한 플랫폼이며, 가상 비서 플랫폼(300-n)은 삼성 전자의 "Bixby" 가상 비서를 위한 플랫폼일 수 있다
이하 제1 실시예에 따른 연산 처리부(130)를 보다 상세하게 설명한다.
도 3 및 도 4는 제1 실시예에 따른 개인화 광고를 제공하는 장치의 연산 처리부가 수행하는 처리를 예시적으로 나타내는 도면이다.
도 3을 참조하면, 연산 처리부(130)는 음성 특성 정보, 서비스 식별 정보 및 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보를 각각 포함하는 하나 이상의 사용자 프로파일을 관리하는 처리 S110을 수행한다.
처리 S110은 예컨대 사용자 등록을 위한 인터페이스를 기초로 정규 사용자 프로파일을 생성하는 처리를 포함할 수 있다. 정규 사용자 프로파일은 하나 이상의 사용자 프로파일 중의 하나로서 관리된다.
예컨대, 전자 장치(200)를 사용하는 제1 사용자는 전자 장치(200)의 사용자 등록을 위한 인터페이스를 이용하여 자신의 음성을 입력하며, 처리 S110에 의해서 제1 사용자의 사용자 프로파일, 즉 제1 사용자 프로파일이 생성될 수 있다. 제1 사용자 프로파일은 사용자 등록을 위한 인터페이스를 기초로 생성되므로 정규 사용자 프로파일이다.
도 5는 제1 실시예에 따른 개인화 광고를 제공하는 장치의 사용자 프로파일을 예시적으로 나타내는 도면이다.
도 5를 참조하면, 제1 사용자 프로파일 내지 제3 사용자 프로파일이 예시적으로 도시된다.
도 5의 제1 사용자 프로파일은 즉 사용자 등록을 위한 인터페이스를 기초로 생성된 정규 사용자 프로파일이다.
제1 사용자 프로파일은 생성 초기에는 음성 특성 정보에 해당하는 항목만을 포함할 수 있다. 그 후 제1 사용자는 사용자 등록을 위한 인터페이스를 통하여 서비스 식별 정보 및 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보를 입력할 수 있다. 예컨대, 제1 사용자는 "날씨 정보는 Assistant를 이용해서 알려줘."와 같은 음성 입력을 통하여 서비스 식별 정보 및 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보를 입력할 수 있다.
한편 제1 사용자 프로파일은 생성 초기에 서비스 선호도 정보를 기초로 자동으로 생성되는 서비스 식별 정보 및 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보를 포함할 수도 있다. 예컨대, "날씨 정보" 서비스에 대해서 일반적인 사용자가 "Assistant"를 선호하고, "영화 예매" 서비스에 대해서 일반적인 사용자가 "Siri"를 선호하는 경우, 도 5에 예시되듯이, 제1 사용자 프로파일의 서비스 식별 정보 및 가상 비서 플랫폼 식별 정보로서, 서비스 식별 정보 및 가상 비서 플랫폼 식별 정보의 대응 관계는 "날씨 정보, Assistant", "영화 예매, Siri"와 같이 자동적으로 생성될 수도 있다.
한편 제1 사용자 프로파일이 생성된 후 제1 사용자가 전자 장치(200)를 사용하는 것에 따라서 제1 사용자 프로파일의 서비스 식별 정보 및 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보가 생성 또는 갱신될 수도 있다. 예컨대, 제1 사용자가 "Siri. 오늘 날씨 어때?"와 같은 음성 입력을 전자 장치(200)를 통하여 장치(100)로 전송한 경우, 제1 사용자 프로파일의 서비스 식별 정보 및 가상 비서 플랫폼 식별 정보의 대응 관계는 "날씨 정보, Siri"와 같이 생성되거나 갱신될 수 있다. 즉 후술하는 처리 S140을 통하여 선택되는 제1 가상 비서를 기초로, 서비스 식별 정보 및 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보가 생성 또는 갱신될 수도 있다.
처리 S110은 예컨대 음성 신호를 기초로 임시 사용자 프로파일을 생성하는 처리를 포함할 수 있다. 임시 사용자 프로파일은 하나 이상의 사용자 프로파일 중의 하나로서 관리된다.
예컨대, 전자 장치(200)가 가정 내에 설치되고 가족 구성원이 사용하는 경우에는, 정규 사용자 프로파일은 가족 구성원에 대해서 생성되며, 임시 사용자 프로파일은 예컨대 방문자와 같이 임시적인 사용자를 위해서 생성된다.
도 5를 참조하면, 제3 사용자 프로파일은 임시 사용자 프로파일이다. 제3 사용자 프로파일은 생성 초기에는 음성 특성 정보에 해당하는 항목만을 포함할 수 있다. 그 후 임시 사용자가 전자 장치(200)를 사용하는 것에 따라서 제3 사용자 프로파일의 서비스 식별 정보 및 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보가 생성 또는 갱신될 수도 있다. 예컨대, 제3 사용자가 "Siri. 오늘 날씨 어때?"와 같은 음성 입력을 전자 장치(200)를 통하여 장치(100)로 전송한 경우, 제3 사용자 프로파일의 서비스 식별 정보 및 가상 비서 플랫폼 식별 정보의 대응 관계는 "날씨 정보, Siri"와 같이 생성되거나 갱신될 수 있다.
한편 사용자 프로파일은 서비스 식별 정보에 대응하는 서비스 제공 가능 여부 정보를 더 포함할 수 있다. 예컨대, 도 5를 참조하면, 제3 사용자 프로파일은 "냉장고 온도 제어"에 대해서는 "사용 불가"로 정의되어 있다. 즉 임시 사용자는 "냉장고 온도 제어"와 같은 서비스는 사용할 수 없다. 임시 사용자 뿐만 아니라, 예컨대 가족 구성원, 즉 정규 사용자라고 하더라도 "냉장고 온도 제어"와 같은 서비스를 사용하지 못하도록 서비스 제공 가능 여부 정보가 설정될 수도 있다. 예컨대 어린이는 가족 구성원이라도 "냉장고 온도 제어"와 같은 서비스는 사용할 수 없도록 설정될 수 있다. 서비스 제공 가능 여부 정보는 예컨대 민감한 정보를 제공하는 서비스 및 위험성이 있는 가전 제품을 제어하는 서비스에 대해서 사용 불가로서 설정될 수 있다.
처리 S110은 미리 지정된 조건을 기초로 임시 사용자 프로파일을 정규 사용자 프로파일로 전환하거나 임시 사용자 프로파일을 삭제하는 처리를 포함할 수도 있다.
즉 임시 사용자라 하더라도 사용자 등록을 위한 인터페이스를 통하여 정규 사용자로 전환될 수 있다. 또는 임시 사용자 프로파일로서 등록된 이후에 주기적으로 임시 사용자 프로파일에 대응하는 임시 사용자의 음성 입력이 전자 장치(200)를 통하여 수신된다면, 해당 임시 사용자 프로파일은 정규 사용자 프로파일로 전환될 수 있다. 또한, 임시 사용자 프로파일로서 등록된 이후 일정 기간 이상 임시 사용자 프로파일에 대응하는 임시 사용자의 음성 입력이 없었다면, 임시 사용자 프로파일을 삭제할 수 있다.
다시 도 3을 참조하면, 연산 처리부(130)는 제1 서비스에 대한 지시 명령을 포함하는 음성 신호를 전자 장치(200)로부터 통신부(110)를 통하여 수신하는 처리 S120을 수행한다. 음성 신호를 수신하는 처리는 종래의 구성과 유사하므로 상세한 설명을 생략한다.
그 후 연산부(130)는 처리 S120을 통하여 수신한 음성 신호를 기초로 하나 이상의 사용자 프로파일 중에서 개인화 사용자 프로파일을 획득하는 처리 S130을 수행한다.
연산부(130)는 예컨대 처리 S120을 통하여 수신한 음성 신호와 하나 이상의 사용자 프로파일의 음성 특성 정보를 비교하여 하나 이상의 사용자 프로파일 중에서 개인화 사용자 프로파일을 선택할 수 있다.
다시 도 3을 참조하면, 연산 처리부(130)는 처리 S120을 통하여 수신한 음성 신호 또는 처리 S130을 통하여 획득한 개인화 사용자 프로파일 중 적어도 하나를 기초로 하나 이상의 가상 비서 중에서 제1 서비스에 대한 지시 명령에 대응하는 제1 가상 비서를 선택하는 처리 S140을 수행한다.
처리 S120을 통하여 수신한 음성 신호가 시동 명령을 포함하는 경우, 처리 S140은 시동 명령에 대응되는 제1 가상 비서를 선택하는 처리를 포함할 수 있다.
예컨대 음성 신호가 "Siri. 오늘 날씨 어때?"와 같이 "Siri"를 제1 서비스, 즉 날씨 정보에 대한 가상 비서로서 지정하는 시동 명령을 포함한다면, 처리 S140을 통하여 제1 서비스에 대응하는 제1 가상 비서로서 "Siri"가 선택된다.
처리 S120을 통하여 수신한 음성 신호가 특정한 시동 명령을 포함하지 않는 경우에는, 처리 S140은 처리 S130을 통하여 획득한 개인화 사용자 프로파일에 포함된 서비스 식별 정보 및 가상 비서 플랫폼 식별 정보를 기초로 제1 가상 비서를 선택하는 처리를 포함할 수 있다.
즉, "오늘 날씨 어때?"와 같은 음성 신호를 수신하면, 연산 처리부(130)는 개인화 사용자 프로파일에 포함된 서비스 식별 정보 및 가상 비서 플랫폼 식별 정보를 기초로 제1 가상 비서를 선택한다. 예컨대 개인화 사용자 프로파일이 도 5에 도시된 제1 사용자 프로파일인 경우, 연산 처리부(130)는 처리 S140을 통하여 제1 서비스, 즉 "날씨 정보"에 대응하는 제1 가상 비서로서 "Assistant"를 선택한다.
한편, 음성 신호는 전자 장치 시동 명령을 포함할 수도 있다. 즉 특정한 가상 비서를 선택하기 위해서가 아니라 전자 장치(200)를 구동하기 위해서 음성 신호는 전자 장치 시동 명령을 포함할 수 있다. 예컨대 스마트 스피커(210)의 시동 명령이 "스피커"로 정의된다면, 음성 신호는 "스피커. 오늘 날씨 어때?"와 같이 전자 장치 시동 명령을 포함할 수 있다. 음성 신호가 전자 장치 시동 명령을 포함하는 경우에는, 연산 처리부(130)는 처리 S130을 통하여 획득한 개인화 사용자 프로파일에 포함된 서비스 식별 정보 및 가상 비서 플랫폼 식별 정보를 기초로 제1 가상 비서를 선택할 수 있다.
도 4를 참조하면, 연산 처리부(130)는 처리 S120을 통하여 수신한 음성 신호를 제1 가상 비서에 적합한 제1 신호로 변환하는 처리 S150을 수행한다.
처리 S150은 예컨대 제1 가상 비서에 대응하는 시동 명령 및 제1 서비스에 대한 지시 명령을 포함하는 제1 신호를 생성하는 처리를 포함할 수 있다.
예컨대 음성 신호가 "오늘 날씨 어때?"와 같이 특정 가상 비서를 지정하지 않은 형태인 경우라도, 연산 처리부(130)는 처리 S140을 통하여 선택된 제1 가상 비서에 대응하는 시동 명령을 포함하는 제1 신호를 생성할 수 있다. 예컨대 제1 가상 비서로서 "Assistant"를 선택한 경우, 연산 처리부(130)는 "Assistant. 오늘 날씨 어때?"와 같이 제1 가상 비서에 대응하는 시동 명령 및 제1 서비스에 대한 지시 명령을 포함하는 제1 신호를 생성할 수 있다.
처리 S150은 예컨대 지시 명령을 STT(speech to text) 기능을 이용하여 텍스트 정보로 변환하는 처리; 텍스트 정보를 명확하게 수정한 수정 텍스트 정보를 생성하는 처리; 및 수정 텍스트 정보를 TTS(text to speech) 기능을 이용하여 변환한 수정 지시 명령을 포함하는 제1 신호를 생성하는 처리를 포함할 수 있다.
예컨대 지시 명령이 "날씨 오늘"과 같이 문법적으로 명확하지 않은 경우 또는 사투리를 포함하는 경우에도, 연산 처리부(130)는 지시 명령을 "날씨 오늘"과 같이 텍스트 정보로 변환한다. 그 후 연산 처리부(130)는 텍스트 정보를 분석하여 "오늘 날씨 어때?"와 같이 보다 자연스럽고 명확하게 수정 텍스트 정보를 생성한다. 그 후 연산 처리부(130)는 수정 텍스트 정보를 TTS 기능을 이용하여 변환한 수정 지시 명령을 포함하는 제1 신호를 생성할 수 있다.
수정 지시 명령은 예컨대 표준 음성 특성을 기초로 TTS 기능을 이용하여 생성될 수 있다. 즉 수정 지시 명령은 개인화 사용자 프로파일에 포함된 음성 특성 정보를 이용하여 사용자의 원래 음성과 유사하게 생성될 수도 있지만, 표준 음성 특성을 이용하여 생성될 수 있다. 표준 음성 특성을 이용하여 수정 지시 명령이 생성되는 경우, 제1 가상 비서 플랫폼은 보다 정확하게 제1 신호를 인식할 수 있다. 수정 지시 명령을 포함하는 제1 신호는 제1 가상 비서에 대응하는 시동 명령을 더 포함할 수도 있다.
또한 표준 음성 특성을 기초로 TTS 기능을 이용하여 수정 지시 명령을 생성하는 경우, 사용자의 음성 특성 정보는 수정 지시 명령에 포함되지 않는다. 따라서 제1 가상 비서 플랫폼에는 사용자의 음성 특성 정보가 전달되지 않으므로, 사용자의 음성 특성 정보를 노출하지 않으면서도 제1 가상 비서 플랫폼을 통하여 제1 가상 비서를 제공받을 수 있다.
연산 처리부(130)는 인공 지능 플랫폼을 이용하여 처리 S150을 수행할 수 있다. 즉 연산 처리부(130)는 음성 인식 처리, 자연어 이해 처리, 자연어 생성 처리 및 STT 처리, TTS 처리와 같은 처리를 인공 지능 플랫폼을 이용하여 수행할 수 있다. 인공 지능 플랫폼을 이용하여 연산 처리부(130)가 처리를 수행하는 것에 의해서, 연산 처리부(130)는 제1 신호를 보다 효율적으로 생성할 수 있다.
다시 도 4를 참조하면, 연산 처리부(130)는 처리 S150을 통하여 생성된 제1 신호를 제1 가상 비서 플랫폼으로 통신부(110)를 통하여 전송하고 제1 가상 비서 플랫폼으로부터 제1 신호에 대응하는 제1 응답 신호를 통신부(110)를 통하여 수신하는 처리 S160을 수행한다.
예컨대, 제1 가상 비서로서 "Assistant"를 선택한 경우, 제1 신호가 "Assistant. 오늘 날씨 어때?"인 경우, 연산 처리부(130)는 제1 가상 비서 플랫폼으로서 가상 비서 플랫폼(300-2)을 지정하고, 가상 비서 플랫폼(300-2)으로 제1 신호를 전송한다. 그 후, 연산 처리부(130)는 가상 비서 플랫폼(300-2)으로부터 제1 응답 신호를 수신한다.
바람직하게는 사용자 프로파일은 사용자 식별 정보를 포함한다. 사용자 식별 정보는 절대적으로 사용자를 식별하는 정보일 수도 있지만, 전자 장치(200)의 사용자를 상대적으로 식별하기 위해서 사용되는 정보일 수도 있다.
처리 S160은 개인화 사용자 프로파일의 사용자 식별 정보를 제1 신호와 함께 제1 가상 비서 플랫폼으로 통신부(110)를 통하여 전송하는 처리를 포함할 수 있다. 제1 가상 비서 플랫폼, 예컨대 가상 비서 플랫폼(300-2)은 개인화 사용자 프로파일의 사용자 식별 정보를 수신하면, 전자 장치(200)의 사용자 식별 정보에 해당하는 사용자가 서비스를 요청한 것을 확인할 수 있다.
그 후 연산 처리부(130)는 처리 S160을 통하여 수신한 제1 응답 신호를 전자 장치(200)로 전송하는 처리 S170을 수행한다.
이상에서 설명한 바와 같이 제1 실시예에 따르면, 사용자가 가상 비서에 대한 시동 명령을 입력하지 않더라도 사용자별로 설정되는 사용자 프로파일을 기초로 개인화된 가상 비서가 제공될 수 있다. 또한 가상 비서 플랫폼으로 전달되는 가상 비서에 대한 시동 명령은 연산 처리부(130)에 의해서 자동적으로 생성될 수 있다.
<제2 실시예>
도 6은 제2 실시예에 따른 개인화 광고를 제공하는 장치의 연산 처리부가 수행하는 처리를 예시적으로 나타내는 도면이다.
제2 실시예에 따르면, 음성 신호는 제2 서비스에 대한 지시 명령을 더 포함한다. 예컨대 "오늘 날씨 어때? 그리고 음악 재생해줘."와 같이, 음성 신호는 제1 서비스에 대한 지시 명령, 즉 "오늘 날씨 어때?"와, 제2 서비스에 대한 지시 명령, 즉 "음악 재생해줘."를 포함할 수 있다.
제1 서비스에 대한 지시 명령은 전술한 제1 실시예와 마찬가지로 처리된다. 즉 연산 처리부(130)는 제1 가상 비서 플랫폼으로부터 제1 응답 신호를 수신하여 전자 장치(200)로 전송한다.
제2 서비스에 대한 지시 명령 역시 전술한 제2 실시예와 마찬가지로 처리된다.
보다 구체적으로, 연산 처리부(130)는 음성 신호 또는 개인화 사용자 프로파일 중 적어도 하나를 기초로 하나 이상의 가상 비서 중에서 제2 서비스에 대한 지시 명령에 대응하는 제2 가상 비서를 선택하는 처리 S180과, 음성 신호를 제2 가상 비서에 적합한 제2 신호로 변환하는 처리 S190과, 제2 신호를 제2 가상 비서를 제공하는 제2 가상 비서 플랫폼으로 통신부(110)를 통하여 전송하고 제2 가상 비서 플랫폼으로부터 제2 신호에 대응하는 제2 응답 신호를 통신부(110)를 통하여 수신하는 처리 S200과, 제2 응답 신호를 전자 장치(200)로 전송하는 처리 S210을 더 수행한다. 제2 가상 비서는 제1 가상 비서와 동일하거나 또는 다를 수 있다. 처리 S180 내지 처리 S210은 도 3 내지 도 4를 참조로 설명된 처리 S140 내지 처리 S170과 실질적으로 동일하므로 상세한 설명을 생략한다.
이상에서 설명한 바와 같이 제2 실시예에 따르면, 전술한 제1 실시예에 따른 효과에 더해서, 사용자가 복수의 서비스 각각에 대해서 가상 비서에 대한 시동 명령을 입력하지 않더라도, 사용자별로 설정되는 사용자 프로파일을 기초로 복수의 서비스 각각에 대해서 개인화된 가상 비서가 제공될 수 있다. 또한 복수의 가상 비서 플랫폼으로 전달되는 복수의 가상 비서에 대한 시동 명령은 연산 처리부(130)에 의해서 복수의 가상 비서 별로 자동적으로 생성될 수 있다.
<다른 실시예>
비록 본원에서 설명되는 기술의 실시예가 구체적으로 설명되었지만 이는 단지 본원에서 설명되는 기술을 예시적으로 설명한 것에 불과한 것으로, 본원에서 설명되는 기술이 속하는 기술 분야에서 통상의 지식을 가지는 자라면 본원에서 설명되는 기술의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 변형이 가능할 것이다.
예컨대 도 5를 참조로 예시된 서비스 식별 정보 및 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보는 예시적인 것일 뿐이며, 서비스 식별 정보는 다양하게 변경될 수 있다.
따라서 본 명세서에 설명된 실시예들은 본원에서 설명되는 기술을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본원에서 설명되는 기술의 사상과 범위가 한정되는 것은 아니다. 본원에서 설명되는 기술의 권리 범위는 아래의 청구범위에 의해 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술은 본원에서 설명되는 기술의 권리 범위에 포함되는 것으로 해석되어야 할 것이다.
본원에서 설명되는 기술에 따르면, 사용자별로 설정되는 사용자 프로파일을 기초로 개인화된 가상 비서를 제공할 수 있다. 예컨대, 스마트 스피커 또는 단말기로부터 전송되는 음성 신호를 기초로 개인화 사용자 프로파일을 획득하고, 음성 신호 또는 개인화 사용자 프로파일 중 적어도 하나를 기초로 사용자별로 개인화된 가상 비서를 제공할 수 있다.
100: 개인화된 가상 비서를 제공하는 장치
110: 통신부 130: 연산 처리부
150: 사용자 프로파일 저장부
200: 전자 장치 210: 스마트 스피커
230: 단말기 300: 가상 서비스 플랫폼

Claims (18)

  1. 유선 또는 무선 통신 인터페이스를 제공하는 통신부; 및
    (a) 음성 특성 정보, 서비스 식별 정보 및 상기 서비스 식별 정보에 대응하는 가상 비서 플랫폼 식별 정보를 각각 포함하는 하나 이상의 사용자 프로파일을 관리하는 처리; (b) 제1 서비스에 대한 지시 명령을 포함하는 음성 신호를 전자 장치로부터 상기 통신부를 통하여 수신하는 처리; (c) 상기 음성 신호를 기초로 상기 하나 이상의 사용자 프로파일 중에서 개인화 사용자 프로파일을 획득하는 처리; (d) 상기 음성 신호 또는 상기 개인화 사용자 프로파일 중 적어도 하나를 기초로 하나 이상의 가상 비서 중에서 상기 제1 서비스에 대한 상기 지시 명령에 대응하는 제1 가상 비서를 선택하는 처리; (e) 상기 음성 신호를 상기 제1 가상 비서에 적합한 제1 신호로 변환하는 처리; (f) 상기 제1 신호를 상기 제1 가상 비서를 제공하는 제1 가상 비서 플랫폼으로 상기 통신부를 통하여 전송하고 상기 제1 가상 비서 플랫폼으로부터 상기 제1 신호에 대응하는 제1 응답 신호를 상기 통신부를 통하여 수신하는 처리; 및 (g) 상기 제1 응답 신호를 상기 전자 장치로 전송하는 처리를 수행하는 연산 처리부
    를 포함하고,
    상기 처리 (d)는,
    (d-1) 상기 음성 신호가 상기 제1 가상 비서에 대응하는 시동 명령을 더 포함하면, 상기 시동 명령에 대응되는 상기 제1 가상 비서를 선택하는 처리; 및
    (d-2) 상기 음성 신호가 상기 제1 가상 비서에 대응하는 상기 시동 명령을 포함하지 않으면, 상기 개인화 사용자 프로파일에 포함된 상기 서비스 식별 정보 및 상기 가상 비서 플랫폼 식별 정보를 기초로 상기 제1 가상 비서를 선택하는 처리
    를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  2. 제1항에 있어서,
    상기 하나 이상의 사용자 프로파일은, 상기 서비스 식별 정보에 대응하는 서비스 제공 가능 여부 정보를 각각 더 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  3. 제1항에 있어서,
    상기 처리 (a)는, (a-1) 사용자 등록을 위한 인터페이스를 기초로 정규 사용자 프로파일을 생성하여 상기 하나 이상의 사용자 프로파일에 추가하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  4. 제1항에 있어서,
    상기 처리 (a)는, (a-2) 서비스 선호도 정보를 기초로 상기 하나 이상의 사용자 프로파일을 관리하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  5. 제1항에 있어서,
    상기 처리 (a)는, (a-3) 상기 음성 신호를 기초로 임시 사용자 프로파일을 생성하여 상기 하나 이상의 사용자 프로파일에 추가하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  6. 제5항에 있어서,
    상기 처리 (a)는, (a-4) 미리 지정된 조건을 기초로 상기 임시 사용자 프로파일을 정규 사용자 프로파일로 전환하거나 상기 임시 사용자 프로파일을 삭제하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  7. 제1항에 있어서,
    상기 처리 (a)는, (a-5) 상기 제1 가상 비서를 기초로 상기 개인화 사용자 프로파일을 갱신하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  8. 제1항에 있어서,
    상기 처리 (c)는, (c-1) 상기 음성 신호와 상기 하나 이상의 사용자 프로파일의 상기 음성 특성 정보를 비교하여 상기 하나 이상의 사용자 프로파일 중에서 상기 개인화 사용자 프로파일을 선택하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  9. 삭제
  10. 삭제
  11. 제1항에 있어서,
    상기 음성 신호는 전자 장치 시동 명령을 더 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  12. 제1항에 있어서,
    상기 처리 (e)는, (e-1) 상기 제1 가상 비서에 대응하는 시동 명령 및 상기 지시 명령을 포함하는 상기 제1 신호를 생성하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  13. 제12항에 있어서,
    상기 처리 (e)는, (e-2) 상기 지시 명령을 STT(speech to text) 기능을 이용하여 텍스트 정보로 변환하는 처리; (e-3) 상기 텍스트 정보를 기초로 수정 텍스트 정보를 생성하는 처리; 및 (e-4) 상기 수정 텍스트 정보를 TTS(text to speech) 기능을 이용하여 변환한 수정 지시 명령을 포함하는 상기 제1 신호를 생성하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  14. 제13항에 있어서,
    상기 제1 신호는 상기 제1 가상 비서에 대응하는 시동 명령을 더 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  15. 제13항에 있어서,
    상기 수정 지시 명령은 표준 음성 특성을 기초로 상기 TTS를 이용하여 생성되는 것인 개인화된 가상 비서를 제공하는 장치.
  16. 제1항에 있어서,
    상기 하나 이상의 사용자 프로파일은, 사용자 식별 정보를 각각 더 포함하고,
    상기 처리 (f)는, (f-1) 상기 개인화 사용자 프로파일의 사용자 식별 정보를 상기 제1 신호와 함께 상기 제1 가상 비서 플랫폼으로 상기 통신부를 통하여 전송하는 처리를 포함하는 것인 개인화된 가상 비서를 제공하는 장치.
  17. 제1항에 있어서,
    상기 음성 신호는 제2 서비스에 대한 지시 명령을 더 포함하고,
    상기 연산 처리부는,
    (h) 상기 음성 신호 또는 상기 개인화 사용자 프로파일 중 적어도 하나를 기초로 하나 이상의 가상 비서 중에서 상기 제2 서비스에 대한 상기 지시 명령에 대응하는 제2 가상 비서를 선택하는 처리; (i) 상기 음성 신호를 상기 제2 가상 비서에 적합한 제2 신호로 변환하는 처리; (j) 상기 제2 신호를 상기 제2 가상 비서를 제공하는 제2 가상 비서 플랫폼으로 상기 통신부를 통하여 전송하고 상기 제2 가상 비서 플랫폼으로부터 상기 제2 신호에 대응하는 제2 응답 신호를 상기 통신부를 통하여 수신하는 처리; 및 (k) 상기 제2 응답 신호를 상기 전자 장치로 전송하는 처리를 더 수행하는 것인 개인화된 가상 비서를 제공하는 장치.
  18. 제1항에 있어서,
    상기 하나 이상의 사용자 프로파일을 저장하는 사용자 프로파일 저장부
    를 더 포함하는 개인화된 가상 비서를 제공하는 장치.
KR1020190132838A 2019-10-24 2019-10-24 개인화된 가상 비서를 제공하는 장치 KR102135859B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020190132838A KR102135859B1 (ko) 2019-10-24 2019-10-24 개인화된 가상 비서를 제공하는 장치
PCT/KR2020/011156 WO2021080147A1 (ko) 2019-10-24 2020-08-21 개인화된 가상 비서를 제공하는 장치
JP2021560902A JP7372693B2 (ja) 2019-10-24 2020-08-21 個人化された仮想秘書を提供する装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190132838A KR102135859B1 (ko) 2019-10-24 2019-10-24 개인화된 가상 비서를 제공하는 장치

Publications (1)

Publication Number Publication Date
KR102135859B1 true KR102135859B1 (ko) 2020-07-20

Family

ID=71831775

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190132838A KR102135859B1 (ko) 2019-10-24 2019-10-24 개인화된 가상 비서를 제공하는 장치

Country Status (3)

Country Link
JP (1) JP7372693B2 (ko)
KR (1) KR102135859B1 (ko)
WO (1) WO2021080147A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021080147A1 (ko) * 2019-10-24 2021-04-29 주식회사 유니온플레이스 개인화된 가상 비서를 제공하는 장치
WO2024123107A1 (ko) * 2022-12-07 2024-06-13 삼성전자 주식회사 인공 지능 비서를 제공하기 위한 전자 장치, 방법 및 비 일시적 저장 매체

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130124799A (ko) * 2012-05-07 2013-11-15 고일권 스마트 단말에서의 진화형 가상 비서 서비스 시스템
KR101683083B1 (ko) 2011-09-30 2016-12-07 애플 인크. 가상 비서에서 커맨드 처리를 용이하게 하기 위한 컨텍스트 정보의 이용
KR101876262B1 (ko) * 2017-12-14 2018-07-09 주식회사 솔루게이트 복합 사용자 인증 시스템
KR20180115628A (ko) 2017-04-13 2018-10-23 하만인터내셔날인더스트리스인코포레이티드 복수의 지능형 개인 비서 서비스를 위한 관리 계층
KR20190019401A (ko) 2017-08-17 2019-02-27 엘지전자 주식회사 전자 장치 및 그 제어 방법

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
KR20170049817A (ko) * 2015-10-29 2017-05-11 주식회사 엘지유플러스 홈 네트워크에서 음성 인식을 위한 음성 인식 디바이스 및 그 동작 방법
US10097919B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Music service selection
CN109844855B (zh) 2016-10-03 2023-12-05 谷歌有限责任公司 任务的多重计算代理执行
US10229680B1 (en) * 2016-12-29 2019-03-12 Amazon Technologies, Inc. Contextual entity resolution
US20180336275A1 (en) * 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
EP3692522A4 (en) * 2017-12-31 2020-11-11 Midea Group Co., Ltd. METHOD AND SYSTEM FOR THE CONTROL OF HOME ASSISTANT DEVICES
KR102135859B1 (ko) * 2019-10-24 2020-07-20 주식회사 유니온플레이스 개인화된 가상 비서를 제공하는 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101683083B1 (ko) 2011-09-30 2016-12-07 애플 인크. 가상 비서에서 커맨드 처리를 용이하게 하기 위한 컨텍스트 정보의 이용
KR20130124799A (ko) * 2012-05-07 2013-11-15 고일권 스마트 단말에서의 진화형 가상 비서 서비스 시스템
KR20180115628A (ko) 2017-04-13 2018-10-23 하만인터내셔날인더스트리스인코포레이티드 복수의 지능형 개인 비서 서비스를 위한 관리 계층
KR20190019401A (ko) 2017-08-17 2019-02-27 엘지전자 주식회사 전자 장치 및 그 제어 방법
KR101876262B1 (ko) * 2017-12-14 2018-07-09 주식회사 솔루게이트 복합 사용자 인증 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021080147A1 (ko) * 2019-10-24 2021-04-29 주식회사 유니온플레이스 개인화된 가상 비서를 제공하는 장치
WO2024123107A1 (ko) * 2022-12-07 2024-06-13 삼성전자 주식회사 인공 지능 비서를 제공하기 위한 전자 장치, 방법 및 비 일시적 저장 매체

Also Published As

Publication number Publication date
JP7372693B2 (ja) 2023-11-01
JP2022534648A (ja) 2022-08-03
WO2021080147A1 (ko) 2021-04-29

Similar Documents

Publication Publication Date Title
JP6704450B2 (ja) 開発者ボイスアクションシステム
KR102112814B1 (ko) 다이얼로그 시스템들에서의 파라미터 수집 및 자동 다이얼로그 생성
KR102351587B1 (ko) 선택가능한 그래픽 엘리먼트를 통해 자동화된 에이전트로 대화를 초기화하기
US10026394B1 (en) Managing dialogs on a speech recognition platform
JP2020502682A (ja) 対話型アシスタントモジュールによるアクセスの条件付き提供
US12033629B2 (en) Systems and methods for automating voice commands
US10964322B2 (en) Voice interaction tool for voice-assisted application prototypes
KR20170103801A (ko) 디지털 개인 비서 내에서 헤드리스로 작업을 완료하기 위한 기법
CN108564946A (zh) 在语音对话平台创建技能、语音对话产品的方法及系统
CN111095892A (zh) 电子装置及其控制方法
US11721338B2 (en) Context-based dynamic tolerance of virtual assistant
KR102135859B1 (ko) 개인화된 가상 비서를 제공하는 장치
US11527235B2 (en) Text independent speaker recognition
KR20210134359A (ko) 시맨틱 지능형 태스크 학습 및 적응형 실행 방법 및 시스템
US20180061393A1 (en) Systems and methods for artifical intelligence voice evolution
US7984109B2 (en) System and method for storing and accessing data files at wireless devices
WO2017172499A1 (en) One step task completion
US12008985B2 (en) Natural language processing of declarative statements
CN111602133A (zh) 针对自然语言处理系统的词嵌入的压缩
US9275034B1 (en) Exceptions to action invocation from parsing rules
US11640823B1 (en) Natural language processing routing
US10862841B1 (en) Systems and methods for automating voice commands
CN110457063B (zh) 脚本程序的封装方法及装置、电子设备、可读存储介质
CA3143953A1 (en) Systems and methods for automating voice commands
US10535342B2 (en) Automatic learning of language models

Legal Events

Date Code Title Description
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant