KR102605731B1 - 개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법 - Google Patents

개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법 Download PDF

Info

Publication number
KR102605731B1
KR102605731B1 KR1020160145570A KR20160145570A KR102605731B1 KR 102605731 B1 KR102605731 B1 KR 102605731B1 KR 1020160145570 A KR1020160145570 A KR 1020160145570A KR 20160145570 A KR20160145570 A KR 20160145570A KR 102605731 B1 KR102605731 B1 KR 102605731B1
Authority
KR
South Korea
Prior art keywords
service
personal assistant
group
event
providing
Prior art date
Application number
KR1020160145570A
Other languages
English (en)
Other versions
KR20180049540A (ko
Inventor
김미희
강현정
권순종
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020160145570A priority Critical patent/KR102605731B1/ko
Publication of KR20180049540A publication Critical patent/KR20180049540A/ko
Application granted granted Critical
Publication of KR102605731B1 publication Critical patent/KR102605731B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Automation & Control Theory (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 댁 내의 상황정보 분석을 통한 개인비서 서비스 제공방법으로 개인비서 단말을 통해 이벤트를 입력 받는 단계, 개인비서 서버가 상기 입력 받은 이벤트에 대응하는 서비스를 미리 정해진 그룹(Group)들에 분류하고, 상기 그룹의 우선순위를 기반으로 차단 또는 허용할 서비스를 분석하여 개인비서 단말에 제공하는 단계를 포함하는 개인비서 서비스를 제공하는데 있다.
또한 댁 내의 상황정보 분석을 통한 개인비서 서비스 제공방법에서 개인비서 단말을 통해 이벤트를 입력 받는 단계, 개인비서 서버가 상기 입력 받은 이벤트의 유형(Type) 및 발생 빈도(Hit)를 포함하는 이벤트 내용에 기반하여 제공할 서비스를 분석하여 개인비서 단말에 제공하는 단계를 포함하는 개인비서 서비스를 제공하는데 있다.
이러한 개인비서 서비스 제공방법은 그룹을 자동으로 분류하고 우선순위에 따라 서비스를 제어하는 기술로 별도의 솔루션 없이 적용 가능하다. 또한 다양한 홈 IoT 이벤트, 서비스 이벤트의 속성에 따라 적합한 이벤트만을 추출하여 홈 상황 분석의 정확도를 높일 수 있으며, 고객 반응을 고려하여 적절한 서비스를 제공함으로써 개인화된 비서 서비스 제공이 가능하다.

Description

개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법{DEVICE TO PROVIDE PERSONAL ASSISTANT SERVICE AND SERVICE METHOD USING THE SAME}
본 발명은 개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법에 관한 것으로, 보다 구체적으로는 댁 내에서 다양한 이벤트 정보를 수집하여 관리 및 분석하고 상황에 맞는 서비스를 제공하는 방법에 관한 것이다.
일반적으로 가상 개인비서란 음성인식, 문장분석, 상황인지 등 인공지능 기술과 첨단 기술의 결합으로 사용자의 언어를 이해하고 사용자가 원하는 지시사항을 수행하는 소프트웨어 애플리케이션으로 정의된다.
이는 사용자의 말을 이해하고 사용자가 원하는 정보, 작업을 알아서 수행이 가능하며, 사용자의 습관 혹은 행동 패턴을 학습함으로써 개인에 필요한 맞춤형 서비스를 마치 비서처럼 제공하는 것을 의미한다.
2011년 음성인식 서비스 Siri를 탑재해 개인비서 시장을 개척, 지속적인 업그레이드를 통해 수동적인 비서 업무(스케줄 관리, 알람 설정 등)에서 자연어 인식률 개선과 사용자 습관을 학습하여 상황에 맞는 정보를 제공하거나 기능을 작동하는 수준으로 발전하고 있다.
이러한 개인비서 서비스를 제공하는 방법과 관련하여, 종래의 기술은 스마트홈 서비스 제공을 위해 자동으로 홈 IoT 기기를 개통하고 설치하기 위한 방식을 설명하거나 스마트 홈 사물인터넷 기기의 상태 정보를 제어하는 방식, 클라우드 컴퓨팅 기반의 가상 스마트홈 서버를 두어 스마트홈 서비스를 제공하는 방식에 대해서만 기술되어 있다. 다른 종래의 기술은 스마트 홈 시나리오를 구동하는데 있어 과거 시나리오의 이력 레코드와 현재 시나리오의 상태 파라미터를 기반으로 시나리오의 전환 규칙을 결정하고 현재 상태에서의 이력 레코드 기반으로 우선순위를 결정하여 시나리오를 전환하는 방식에 대해서 기술되어 있다.
한편 종래 기술 중에도 서비스를 제공함에 있어 사용자 및 환경, 사용자별 정책에 따른 우선순위 정보를 이용하여 서비스를 추론하는 방법에 대해서 개시하고 있으나, 본 발명과 같이 서비스의 속성을 기반으로, 각 서비스들을 그룹별로 분류하고, 그룹별로 우선순위를 정하여 사용자에게 서비스를 제공하는 방식에 대해서는 개시하고 있지는 않았다.
한국 특허공개번호 제10-2016-0068943호 한국 특허등록번호 제10-1009638호
본 발명은 상기 문제점을 해결하기 위한 것으로서, 서비스 어플리케이션 등록 시 서비스 속성을 이용하여 그룹을 결정하고, 우선순위(priority)에 따라 이벤트(event)를 제어하며, 과거 이력 레코드를 이벤트 유형(Type)에 따라 가중치(rating)를 두어 스마트 홈 상태관리에 반영하는 방법을 제공하는데 있다.
상기 기술적 과제를 해결하기 위하여 본 발명은 댁 내의 상황정보 분석을 통한 개인비서 서비스 제공방법으로 개인비서 단말을 통해 이벤트를 입력받는 단계, 개인비서 서버가 상기 입력 받은 이벤트에 대응하는 서비스를 미리 정해진 그룹(Group)들에 분류하고, 상기 그룹의 우선순위를 기반으로 차단 또는 허용할 서비스를 분석하여 개인비서 단말에 제공하는 단계를 포함하는 것을 특징으로 한다.
또한 미리 정해진 그룹들은 서비스의 속성(Property) 정보에 기초하여 우선순위가 부여되어 있는 것을 특징으로 한다.
또한 미리 정해진 그룹들은 서비스의 속성과 관계없이 가장 높은 우선순위를 가지는 그룹0, 비디오(Videdo) 리소스 및 오디오(Audio) 리소스를 모두 사용하는 그룹1, 비디오 리소스를 사용하는 그룹2, 오디오 리소스를 사용하는 그룹3 및 그외 메뉴 정보만을 제공하는 그룹4 중 적어도 하나를 포함하는 것을 특징으로 할 수 있다.
또한 상기 그룹0은 사용자가 특정 서비스를 방해 금지모드로 설정하거나, 서비스 특성이 방해 금지모드를 가지는 서비스가 속하는 그룹인 것을 특징으로 할 수 있다.
또한 미리 정해진 그룹들의 우선순위는 그룹0, 그룹1, 그룹2, 그룹3, 그룹4의 순서인 것을 특징으로 할 수 있다.
또한 우선순위를 기반으로 서비스를 분석하는 단계는 사용자가 요청한 이벤트가 현재 실행중인 서비스 보다 우선순위가 낮을 경우 상기 현재 실행중인 서비스를 유지하며, 현재 실행중인 서비스와 우선순위가 같거나 높을 경우 사용자 의사를 조건으로 요청한 서비스를 실행하는 것을 특징으로 할 수 있다.
또한 댁 내의 상황정보 분석을 통한 개인비서 서비스 제공방법으로 개인비서 단말을 통해 이벤트를 입력 받는 단계, 개인비서 서버가 상기 입력 받은 이벤트의 유형(Type) 및 발생 빈도(Hit)를 포함하는 이벤트 내용에 기반하여 제공할 서비스를 분석하여 개인비서 단말에 제공하는 단계를 포함하는 것을 특징으로 한다.
또한 개인비서 단말(100)은 이벤트 관리 테이블을 두어 상기 입력 받은 이벤트 내용을 이벤트 관리 테이블에 기록하고, 상기 이벤트 관리 테이블은 상기 이벤트의 유형과 발생 빈도를 기반으로 결정되는 이벤트 정책(Event Policy)과 만료시간(expired time)에 따라 주기적으로 업데이트(Update) 되는 것을 특징으로 할 수 있다.
또한 댁 내의 상황정보 분석을 통한 개인비서 서비스 시스템은 이벤트를 입력 받는 개인비서 단말, 상기 입력 받은 이벤트에 대응하는 서비스를 미리 정해진 그룹(Group)들에 분류하고, 상기 그룹의 우선순위를 기반으로 차단 또는 허용할 서비스를 분석하여 개인비서 단말에 제공하는 개인비서 서버를 포함하는 것을 특징으로 할 수 있다.
그리고 댁 내의 상황정보 분석을 통한 개인비서 서비스 시스템은 이벤트를 입력 받는 개인비서 단말, 상기 입력 받은 이벤트의 유형(Type) 및 발생 빈도(Hit)를 포함하는 이벤트 내용에 기반하여 제공할 서비스를 분석하여 개인비서 단말에 제공하는 개인비서 서버를 포함하는 것을 특징으로 할 수 있다.
본 발명의 실시예에 따르면, 그룹을 자동으로 분류하고 우선순위에 따라 서비스를 제어하는 기술구현이 별도의 솔루션 없이 적용가능하고, 다양한 홈 IoT 이벤트, 서비스 이벤트의 속성에 따라 적합한 이벤트만을 추출하여 홈 상황 분석의 정확도를 높일 수 있으며, 고객 반응을 고려하여 적절한 서비스를 제공함으로써 개인화된 비서 서비스 제공이 가능하다.
본 발명에 관한 이해를 돕기 위해 상세한 설명의 일부로 포함되는, 첨부도면은 본 발명에 대한 실시예를 제공하고, 상세한 설명과 함께 본 발명의 기술적 사상을 설명한다.
도 1 은 본 발명에 따른 전체 서비스 구성도이다.
도 2는 본 발명에 개인비서에서 연계하는 서비스의 등록 및 그룹(Group) 분류방식을 통한 개인비서 서비스 시스템 구조를 도시한 것이다.
도 3은 본 발명에 따른 개인비서 단말의 구성 블록도이다.
도 4는 본 발명에 따른 이벤트 제어 및 관리기술의 순서도이다.
도 5는 본 발명에 따른 홈 IoT 디바이스 이벤트(Home IoT Device Event) 및 서비스 이벤트를 분류하는 방식을 도시한다.
도 6은 본 발명에 따른 개인비서 서비스 제공을 위한 홈 상황 테이블(Home State Table) 관리 방식을 도시한다.
도 7은 본 발명에 따른 개인비서 서비스의 상태 천이모델을 도시한다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 이하에서는 특정 실시예들을 첨부된 도면을 기초로 상세히 설명하고자 한다.
이하의 실시예는 본 명세서에서 기술된 방법, 장치 및/또는 시스템에 대한 포괄적인 이해를 돕기 위해 제공된다. 그러나 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다.
본 발명의 실시예들을 설명함에 있어서, 본 발명과 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 상세한 설명에서 사용되는 용어는 단지 본 발명의 실시 예들을 기술하기 위한 것이며, 결코 제한적이어서는 안 된다. 명확하게 달리 사용되지 않는 한, 단수 형태의 표현은 복수 형태의 의미를 포함한다. 본 설명에서, "포함" 또는 "구비"와 같은 표현은 어떤 특성들, 숫자들, 단계들, 동작들, 요소들, 이들의 일부 또는 조합을 가리키기 위한 것이며, 기술된 것 이외에 하나 또는 그 이상의 다른 특성, 숫자, 단계, 동작, 요소, 이들의 일부 또는 조합의 존재 또는 가능성을 배제하도록 해석되어서는 안 된다.
또한, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되는 것은 아니며, 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
이하에서는, 본 발명에 따른 홈 상황정보 분석을 통한 개인비서 서비스 제공방법의 예시적인 실시 형태들을 첨부된 도면을 참조하여 상세히 설명한다.
본 발명은 댁 내에서 적절한 개인비서 서비스를 제공하기 위해 홈 IoT 이벤트, 음성/영상 이벤트 및 서비스 이벤트를 분석하여 홈 상황을 관리하는 기술에 관한 것으로, 홈 캠, 홈 폰(영상통화), 홈 미디어(iptv music) 서비스등을 모두 포함한 댁내 기기에서 사용자 음성을 통해 수집된 이벤트를 우선순위 및 사용자 이력 정보에 기반하여 적절한 서비스를 제공하는 방법에 관한 것이다.
도 1은 본 발명에 따른 전체 서비스 구성도이다.
도 1을 참조하면, 본 발명에 따른 개인비서 서비스 제공에 따른 홈 네트워크 시스템은 개인비서 단말(100), 개인비서 서버(200), 데이터 베이스 서버(300), 기타 연관 서비스 서버(400), 외부 표시장치(500)를 포함한다.
개인비서 단말(100)은 개인비서 서버(200)를 통해 서비스 제공에 필요한 관련 어플리케이션을 등록한다, 등록된 서비스 어플리케이션과 관련된 이벤트 및 서비스 내역(History)은 1차적으로 개인비서 단말(100)에 저장된다. 개인비서 단말은 실시간 및 주기적으로 이벤트 정보와 서비스 내역(History) 정보를 개인비서 서버(200)로 전달한다.
개인비서 서버(200)는 전달받은 이벤트 정보와 서비스 내역 정보를 토대로 사용자에게 제공할 서비스를 분석한다. 데이터베이스 서버(300)는 상기 이벤트 정보와 서비스 내역(History) 정보를 저장하여 서비스를 분석하는 경우 이력 데이터를 제공한다. 연관 서비스 서버(400)는 입력 받은 사용자의 음성을 분석 및 합성하거나 서비스 제공과 관련하여 통화 또는 회의할 수 있도록 하는 등의 역할을 한다. 외부 표시장치는(500) 분석한 서비스 정보를 영상 또는 홀로그램 방식으로 사용자에게 제공한다. 여기서 외부 표시장치(500)는 2 이상 존재할 수 있다.
개인비서 단말의 서비스 UX(User Experiecne : 사용자 경험)는 기본적으로 ‘호출어 인식’과 ‘명령어 인식’에 기반한 Natural UX를 제공한다. 여기서 UX는 ‘사용자 경험’을 나타내는 것으로, 사용자가 제품이나 서비스, 시스템을 이용하면서 느끼고 생각하게 되는 반응, 행동등과 같은 경험을 총칭하여 이르는 용어이다. Natural UX는 키보드나 마우스와 같은 부가적인 장치 없이 사람의 신체기관으로 직접 상호작용하여 얻어지는 UX를 의미한다. Natural이란 단어의 의미대로 이는 사람에게 내재된 자연스러운 행동을 기반으로 하여 학습비용이 매우 낮다. 때문에 과거에 전문가들만 사용했던 CLI(Command Line Interface)나 어느 정도 학습을 해야 능숙하게 사용할 수 있는 GUI(Graphical User Interface)와 비교했을 때 매우 손쉽게 사용할 수 있는 장점이 있다.
전체적인 프로세스를 살펴보면, 사용자가 개인비서 단말(100)에 Natural UX에 기반한 ‘호출어’ 또는 ‘명령어’를 입력하면, 1차적으로 상기 입력된 언어는 개인비서 단말(100)의 대화 플랫폼에서 개인비서 서버(200)에 전송 가능한 형태로 분석된다. 상기 분석된 데이터는 개인비서 서버(200)에 전송되고, 개인비서 서버(200)에서는 이벤트 내역(Event History) 및 서비스 내역(Service History)을 기반으로 상기 분석된 데이터를 2차적으로 적용하여 사용자에게 적절한 응답 및 추천 서비스를 외부 표시장치(500)를 통해 제공하게 된다. 상기 서비스를 제공함에 있어, 통화, 회의, 컨설팅, 음성합성과 같은 역할을 수행하는 연관 서비스 서버(400)를 이용하는 것을 포함할 수 있다.
이때 고객의 어조, 말의 빠르기, 평소의 음성 정보와 비교한 음고(音高 : 음의 높이) 정보를 분석하여 사용자 감정을 추측하고 감정 키워드별로 관리되는 대화 커맨드를 TTS(Text to Speech)를 통해 Natural UX로 제공한다. 여기서 TTS는 문자음성 자동변환 기술을 의미하는 것으로, 미리 녹음된 육성을 이용하는 음성 서비스와 달리 문자를 바로 소리로 바꿔 전달하는 기술을 말한다. 이하에서는 구체적으로 개인비서 단말(100)을 통해 고객에게 제공되는 서비스들을 관리하고 제어하기 위한 방법을 설명한다.
도 2는 개인비서에서 연계하는 서비스의 등록 및 그룹(Group) 분류방식을 통한 개인비서 서비스 시스템 구조를 도시한 것이다.
사용자가 이용하고자 하는 서비스 어플리케이션을 추가로 등록할 때, 개인비서 서버(200)에는 기본적으로 서비스의 그룹을 판별할 수 있는 기준이 되는 정보를 XML 파일로 함께 등록한다. XML 파일에는 해당 서비스의 특징(예를 들면 비디오(Video)/오디오(Audio)를 사용하는지, 카메라/마이크(Mic) 리소스를 사용하는지, 서비스가 실행(Running)될 때 특정 모드로 동작해야 하는지) 등에 대한 정보가 저장된다(S10). 이때, 개인비서 서버는 설정한 시간간격에 따라 주기적으로 실행되도록 설정된다(S20).
개인비서 서버(200)에 등록된 어플리케이션은 실제 서비스 오픈 데이터(Open Date) 정보를 기반으로 해당일의 새벽에 개인비서 단말로 소프트웨어 프로비저닝(SW Provisioning)을 진행한다(S30). 여기서 소프트웨어 프로비저닝이란 소프트웨어를 시스템에 설치/배포하고 필요한 구성 셋팅 작업을 하여 실행할 수 있도록 해놓는 것을 말한다. 이러한 프로비저닝 작업은 각 시스템 담당자가 수동으로 하는 것이 아닌, 자동화 툴을 이용하는바 일종의 ‘자동 프로비저닝’이라고 볼 수 있다. 자동 프로비저닝을 이용하는 경우 서비스의 요구에 따라 시스템 자원을 자동으로 할당/회수, 재배치하여 시스템 자원을 최적화 할 수 있다.
개인비서 단말은 서버로부터 다운로드한 어플리케이션을 묵시적, 자동적으로 설치한 후, 기본적인 Test URL 정보와 테스트시에 사용되는 Test parameter 정보로 자가 점검을 진행한다. 테스트 결과, 문제가 없는 경우 서비스는 준비(Ready)상태가 된다. 해당 서비스가 준비상태 되는 경우, 해당 서비스의 어플리케이션 특징정보를 확인하고 그룹을 자동으로 분류하여 서비스 그룹 관리 테이블(Service Group Management Table)에 등록한다(S40).
도 3은 본 발명에 따른 개인비서 단말(100)의 구성 블록도이다.
일 실시예로서 개인비서 단말(100)은 마이크부(110), 메모리부(120), 제어부(130), 통신부(140), 스피커부(150)를 포함한다. 마이크부(110)는 사용자의 호출어 또는 명령어를 기초로한 Natural UX 방식에 의해 사용자로부터 이벤트를 수신한다. 메모리부(120)에는 어플리케이션, 사용자로부터 수신한 이벤트 정보와 같은 데이터가 저장된다. 제어부(130)는 전체적인 동작을 제어하여, 사용자로부터 수신한 이벤트를 관리 테이블 추가하고 이벤트 빈도수를 기록하며, 서버로부터 수신한 분석결과에 맞게 이벤트 정책을 수정하는 역할을 한다. 통신부(140)는 무선통신망 방식을 통해 개인비서 서버(200)와 이벤트 정보와 같은 데이터를 송수신할 수 있게 하며, 스피커부(150)는 음성을 사용자의 귀에 전달시키는 리시버(receiver)로 구현될 수 있으며, 이를 통해 관련 서비스 정보 및 현재 서비스 진행상황을 사용자에게 안내한다. 한편, 외부 표시장치(500)에 더하여 개인비서 단말(100)에 디스플레이부(미도시)를 포함하여 사용자에게 서비스를 제공하는 것도 가능하다.
도 4는 본 발명에 따른 이벤트 제어 및 관리기술의 순서도이다.
기본적으로 현재 실행 중인 서비스가 속한 그룹의 우선순위(Priority)에 따라 특정 서비스를 차단하거나 허용하는 정책을 가진다.
도 4를 참조하면, “엄마에게 영상전화”와 같은 음성의 이벤트를 수신하는 경우(S100), 개인비서 단말(100)에서 1차적으로 대화를 분석한 후(S200), 분석결과를 개인비서 서버(200)에 전송하고, 개인비서 서버(200)에서는 요청된 이벤트를 적절한 서비스 그룹에 분류한다.
이 때 요청한 이벤트가 속한 서비스 그룹과 현재 실행중인 서비스 그룹의 우선순위를 비교한다. 현재 서비스가 속한 그룹보다 요청한 서비스 그룹의 우선순위가 같거나 높은 경우(S300)에는 사용자에게 UI(User Interface) 혹은 TTS 방식을 통해 현재 실행중인 서비스를 중지하고 요청한 새로운 서비스를 실행할 것인지 여부를 확인(S400)하고, 사용자가 승인을 조건으로 요청한 새로운 서비스를 실행(S500)한 후 종료(S600)한다. 반대로 현재 서비스 그룹이 요청한 서비스 그룹보다 우선순위가 높은 경우(S310)에는 해당 이벤트가 무시(Ignore)되고 현재 실행중인 서비스를 유지한 후 종료한다(S600). 한편, 이때 실행된 서비스가 기본적으로 방해 금지 모드로 동작할 경우 그룹 우선순위는 자동으로 ‘0’설정되어 최우선순위가 부여될 수 있다.
본 발명의 개인비서에서 제공하는 모든 서비스는 서비스 등록 시 속성(Property) 정보를 기반으로 자동으로 분류될 수 있다. 본 발명의 일 실시예로서 아래와 같은 속성을 가지는 그룹을 예시할 수 있다. Video/Audio 리소스를 모두 사용하는 ‘그룹 1’, Video 리소스를 사용하는 ‘그룹 2’, Audio 리소스를 사용하는 ‘그룹 3’, 그 외 기타 메뉴 정보만을 제공하는 ‘그룹 4’ 서비스로 분류될 수 있다. 특히 사용자가 명시적으로 해당 서비스 도중에 방해 금지 모드를 설정하거나 서비스의 특성이 방해 금지모드를 가지는 경우 서비스의 원래 속성과 상관 없이‘그룹 0’으로 분류되어 가장 높은 우선순위가 된다. 따라서 기본적으로 그룹 우선순위는 ‘그룹 0’ > ‘그룹 1’ > ‘그룹 2’ > ‘그룹 3’이 된다.
한편 ‘그룹1’의 상태와 관련하여 관련 어플리케이션은 동시에 2개가 실행될 수 없으나, 1개의 ‘그룹 1’어플리케이션과 1개의 ‘그룹 2’어플리케이션은 동시에 실행이 가능하다. ‘그룹 1’상태에서는 특정 어플리케이션의 동작이 불가능한데, 이는 사생활 보호와 관계있는 어플리케이션의 경우이다. ‘그룹 2’의 어플리케이션은 동시 실행이 가능하며, 같은 그룹의 서비스가 동시에 실행되는 경우 최근 서비스의 상태로 천이된다.
표 1은 서비스 그룹 관리 테이블에 등록된 서비스 목록의 예시를 나타낸다.
Service App Name Video Audio Mic Camera Mode Group
Call(영상) Y Y Y Y 0 1
Conference Y Y Y Y 0 1
개인방송하기 Y Y Y Y 1 1
OTV Y N N N 0 2
표 1을 통해 그룹 우선순위를 이용하여 서비스를 제공하는 본 발명의 일 실시예를 설명한다.
Call(영상), Conference 서비스의 경우에 Video, Audio, Mic, Camera 자원을 모두 이용하여 ‘그룹1’로 분류되고, 방해금지모드로 동작하는 것이 아닌바 모드는 ‘0’로 분류된다.
개인방송하기 또한 Call(영상), Conference 서비스와 같이 Video, Audio, Mic, Camera 자원을 모두 이용하여 ‘그룹1’로 분류되나, 방해금지모드로 동작하는바 모드는 ‘1’로 분류된다.
OTV 서비스는 Video 리소스를 이용하나 Mic, Camera 리소스를 이용하지 않은바 ‘그룹 2’으로 분류되고, 방해금지모드로 동작하는 것이 아닌바 모드는 ‘0’으로 분류된다. 한편 상기 예시에서 사용자가 개인방송하기 외에 다른 서비스에도 방해 금지 모드를 설정할 수 있음은 물론이다.
‘그룹 1’의 어플리케이션은 동시에 2개가 실행될 수 없는바, 상기 표 1에서 Call(영상), Conference는 동시에 실행될 수 없다. 사용자가 ‘그룹 3’에 속하는 서비스 어플리케이션은 ‘OTV’ 서비스를 실행하고 있는 중에 우선순위가 높은 ‘그룹 1’서비스인 Call 이나 Conference 서비스 어플리케이션이 요청된 경우, TTS/UI로 “영상 통화가 왔습니다 연결하시겠습니까”와 같은 안내를 주어 사용자의 의사를 조건으로 Call 이나 Conference 서비스가 실행되게 된다.
만약 사용자가 실행한 서비스인 ‘개인방송하기’가 방해금지 모드로 설정되는 경우, ‘그룹 0’으로 자동으로 분류되어 설정되고, 다른 새로운 서비스가 요청되어도 새로운 이벤트가 속한 서비스 Group의 우선순위가 낮으므로 이벤트를 사용자에게 알려주지 않고, 우선선위가 가장 높은 현재의 서비스(즉 개인방송하기)가 유지 된다. 따라서 해당 서비스가 종료될 때, 일반적으로 분류된 앱 서비스 그룹에 따라 동작한다.
기존의 방식과 다르게 그룹별로 서비스 이벤트들을 관리하는 경우, 각 그룹에 맞는 기본 Policy 등이 일괄 적용되어, 여러가지 복잡한 서비스들을 연계시킬 수 있어, 서비스 구현 및 제공시 간결한 로직 적용이 가능하다.
즉, Rule Based 기능 로직에 더하여 이벤트는 사용자 설정/학습 기반의 Event Table Based 로직으로 사용자 상황 인지 기반의(context-aware) 서비스 제공이 가능하다.
도 5는 본 발명에 따른 홈 IoT 디바이스 이벤트(Home IoT Device Event) 및 서비스 이벤트를 분류하는 방식을 도시한다.
도 5를 참조하면, 사용자로부터 음성/영상과 같은 이벤트가 개인비서 단말(100)을 통해 입력되면 개인비서 단말(100)에서 이벤트 정보가 기록된 XML 파일을 로딩하여 이벤트 관리 테이블에 기본 정책으로 등록한다. 이때 발생한 이벤트를 수집하는 개인 비서 단말(100)의 이벤트 집합부(Event Aggregator)는 이벤트 유형 정책 테이블(Event Type Policy Table)에 이벤트 내역(Event history)을 기록하고 이벤트 유형(Event Type)별 이벤트 정책(Event Policy)정보를 확인하여 사용자에게 제공하거나 해당 이벤트를 무시(Ignore)한다.
구체적인 이벤트 내역(Event History)은 주기적으로 개인비서 서버(200)로 전송되고, 개인비서 서버(200)에서는 이벤트의 유형(Type)과 발생 빈도(Hit) 기반으로 이벤트 정책(Event Policy)과 만료시간(Expired Time)을 결정하여 개인비서 단말(100)에서 관리하는 이벤트 유형 정책 테이블(Event Type Policy Table) 정보를 업데이트 한다.
본 발명의 일 실시예로 도 4의 표에 나타난 이벤트를 예를들어 설명하면, DeviceID_event1은 홈 IoT Event 등으로 사용자에게 음성/TV 화면으로 해당 이벤트 안내를 TTS/팝업을 통해 제공하는 것을 예로 설명할 수 있다. 예를 들어. 세탁이 완료된 경우 “세탁이 끝났습니다”와 같은 정보를 제공하는 것이다. 상기 표에서는 Type은 Info이고, 빈도는 5, 정책은 Noti, Expired Time은 1800sec로 기록되었다.
DeviceID_event2는 홈 IoT Event 등으로 사용자가 Noti 하는 것에 대해 부정적인 반응을 하거나 Noti 설정 거부한 경우(Ignore)를 예로 설명할 수 있다. 예를 들어 문이 열렸을 때, 개인비서가 “문이 열렸습니다”와 같은 알림을 제공하는 경우 사용자가 Ignore함으로써 알림을 받지 않았다는 것을 의미한다. 빈도(Hit)수가 많아진다면 후에 문이 열리는 이벤트가 발생하여도 “문이 열렸습니다”와 같은 알림은 제공되지 않게 된다.
DeviceID_event3은 홈 IoT 이벤트 또는 이상감지 이벤트가 발생한 경우 알람을 설정한 경우를 예로 들 수 있다. 이 경우 Type은 Warning이 될 수 있다.
DeviceID_event4는 홈 IoT 기기가 가열되거나 기기가 파손되는 등의 이벤트 가 발생한 경우를 예로 들 수 있다. 이와 같은 경우 Type은 Emergency가 되고. Policy는 Push이며 Expired Time은 0sec이다.
도 6은 개인비서 서비스 제공을 위한 홈 상황 테이블(Home State Table) 관리 방식을 도시한다.
도 6을 참조하면 음성/영상 이벤트에 따라 관련 서비스를 제공하고 사용자의 반응(Reaction) 정보를 저장, 사용자가 의도한 서비스가 올바르게 제공되었는지 여부인 반응 평가(Reacting Rate)를 고객 반응의 긍정/부정 값과 빈도수를 기반으로 분석하여 고객이 생각하는 서비스의 우선순위와 관심 서비스를 분석한다. 이렇게 긍정/부정 값과 빈도수를 분석함으로써 이후 사용자가 서비스를 요청한 경우, 이와 유사한 상황에서 제공된 서비스의 이력(history)내의 빈도(Hit)를 분석하여 빈도수가 가장 높은 서비스를 제공하게 된다.
고객이 선호하는 서비스 영역에 대해서는 고객별 서비스 우선순위 분석 및 Policy 결정을 AI 서버(600)로 전송하여, AI 서버(600)와 연계함으로써 학습 정보를 추가로 획득하여 제공할 수 있다.
결과적으로 서비스에 대한 고객 반응(reaction)을 평가(Rating), 학습하여 고객의 라이프 사이클(Life Cycle)과 패턴(Pattern)에 맞는 홈 상황 관리가 가능하다. 즉, 댁 내에서 사용자의 의도에 맞는 개인화된 비서 서비스 제공이 가능하게 된다.
도 7은 본 발명에 따른 개인비서 서비스의 상태 천이모델을 도시한다.
도 7을 참조하면, 개인비서 서비스가 부팅되면, 기본(Default)설정인 재실 상태(실내에 있는 상태)가 설정된다. 재실 상태에서는 사용자의 선택에 따라 ‘외출(outdoor)상태’, ‘그룹 1 서비스 상태’, ‘그룹 2 서비스 상태’, ‘그룹 3서비스 상태’, ‘이벤트가 없는 휴식 상태’로 서비스를 시작할 수 있다.
재실상태에서 사용자로부터 요청되는 이벤트가 없는 경우 ‘휴식 상태’가 되며, ‘휴식 상태’에서 요청이 있는 경우 다른 상태로 즉시 전환이 가능하다.
현재 서비스가 실행 중인데, 사용자로부터 새로운 서비스 요청이 있는 경우, 우선순위와 사용자 의사를 고려하여 현재 실행중인 서비스를 종료시키고, 새로운 서비스를 실행한다.
재실상태에서 ‘그룹 1’에 속하는 서비스 A, B, C, D 중 어느 하나의 서비스가 실행될 수 있고, 이 때 ‘그룹 1’에 속하는 각 서비스들은 그룹내에서 어느 하나의 서비스로 전환이 가능하다. 이때 동시에 두 개의 서비스가 실행될 수 없다.
사용자가 다른 서비스를 실행하는 경우 ‘그룹 1’의 서비스가 종료되고 다른 서비스로 전환된다. ‘그룹 2’, ‘그룹 3’의 서비스 또한 동일한 프로세스를 따른다.
한편 사용자의 외출(outdoor)에 의해 외출 이벤트가 발생한다면, 실행중이던 현재 서비스가 중지되고, 외출 상태로 전환된다. 비상(emergency) 상태는 사용자의 의사 또는 설정해 놓은 특정한 이벤트가 발생 되는 경우 자동으로 실행될 수 있으며. 상기 특정한 이벤트가 종료되거나 사용자의 의사에 의해서 종료된다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서 본 발명에 기재된 실시예는 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의해서 해석되어야 하며, 그와 균등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100: 개인비서 단말
110 : 마이크부 120 : 메모리부
130 : 제어부 140 : 통신부
150 : 스피커부
200 : 개인비서 서버 300: 데이터베이스 서버
400 : 연관서비스 서버 500: 외부 표시장치
600 : AI 서버

Claims (10)

  1. 댁 내의 상황정보 분석을 통한 개인비서 서비스 제공방법에 있어서,
    개인비서 단말을 통해 이벤트를 입력 받는 단계; 및
    개인비서 서버가 상기 입력 받은 이벤트에 대응하는 서비스를 미리 정해진 그룹(Group)들에 분류하고, 상기 그룹의 우선순위를 기반으로 차단 또는 허용할 서비스를 분석하여 상기 개인비서 단말에 제공하는 단계;를 포함하되,
    상기 우선순위를 기반으로 서비스를 분석하는 단계는, 사용자가 요청한 이벤트에 대응하는 서비스가 속한 그룹이 현재 실행중인 서비스가 속한 그룹보다 우선순위가 낮을 경우 상기 현재 실행중인 서비스를 유지하고, 사용자가 요청한 이벤트에 대응하는 서비스가 속한 그룹이 현재 실행중인 서비스가 속한 그룹과 우선순위가 같거나 높을 경우 사용자의 의사를 조건으로 요청한 서비스를 실행하는 것을 특징으로 하는 개인비서 서비스 제공방법.
  2. 제1항에 있어서,
    상기 미리 정해진 그룹들은 서비스의 속성(Property) 정보에 기초하여 우선순위가 부여되어 있는 것을 특징으로 하는 개인비서 서비스 제공방법.
  3. 제1항에 있어서,
    상기 미리 정해진 그룹들은,
    서비스의 속성과 관계없이 가장 높은 우선순위를 가지는 그룹0;
    비디오 리소스 및 오디오 리소스를 모두 사용하는 그룹1;
    비디오 리소스를 사용하는 그룹2;
    오디오 리소스를 사용하는 그룹3; 및
    그 외 메뉴 정보만을 제공하는 그룹4;
    중 적어도 하나를 포함하는 것을 특징으로 하는 개인비서 서비스 제공방법.
  4. 제3항에 있어서,
    상기 그룹0은,
    사용자가 특정 서비스를 방해 금지모드로 설정하거나, 서비스 특성이 방해 금지모드를 가지는 서비스가 속하는 그룹
    인 것을 특징으로 하는 개인비서 서비스 제공방법.
  5. 제3항에 있어서,
    상기 미리 정해진 그룹들의 우선순위는
    그룹0, 그룹1, 그룹2, 그룹3, 그룹4의 순서인 것을 특징으로 하는 개인비서 서비스 제공방법.
  6. 삭제
  7. 제1항에 있어서,
    상기 개인비서 서버가 상기 입력 받은 이벤트의 유형 및 발생 빈도를 포함하는 이벤트 내용에 기반하여 제공할 서비스를 분석하여 상기 개인비서 단말에 제공하는 단계를 더 포함하는 개인비서 서비스 제공방법.
  8. 제7항에 있어서,
    상기 개인비서 단말은 이벤트 관리 테이블을 두어 상기 입력 받은 이벤트 내용을 이벤트 관리 테이블에 기록하고, 상기 이벤트 관리 테이블은 상기 이벤트의 유형과 발생 빈도를 기반으로 결정되는 이벤트 정책(Event Policy)과 만료시간(expired time)에 따라 주기적으로 업데이트(Update) 되는 것을 특징으로 하는 개인비서 서비스 제공방법.
  9. 댁 내의 상황정보 분석을 통한 개인비서 서비스 시스템에 있어서,
    이벤트를 입력 받는 개인비서 단말; 및
    상기 입력 받은 이벤트에 대응하는 서비스를 미리 정해진 그룹(Group)들에 분류하고, 상기 그룹의 우선순위를 기반으로 차단 또는 허용할 서비스를 분석하여 개인비서 단말에 제공하는 개인비서 서버;를 포함하되,
    상기 개인비서 서버는, 사용자가 요청한 이벤트에 대응하는 서비스가 속한 그룹이 현재 실행중인 서비스가 속한 그룹보다 우선순위가 낮을 경우 상기 현재 실행중인 서비스를 유지하고, 사용자가 요청한 이벤트에 대응하는 서비스가 속한 그룹이 현재 실행중인 서비스가 속한 그룹과 우선순위가 같거나 높을 경우 사용자의 의사를 조건으로 요청한 서비스를 실행하는 것을 특징으로 하는 개인비서 서비스 시스템.
  10. 제9항에 있어서,
    상기 개인비서 서버는, 상기 입력 받은 이벤트의 유형 및 발생 빈도를 포함하는 이벤트 내용에 기반하여 제공할 서비스를 분석하여 상기 개인비서 단말에 제공하는 것을 특징으로 하는 개인비서 서비스 시스템.
KR1020160145570A 2016-11-03 2016-11-03 개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법 KR102605731B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160145570A KR102605731B1 (ko) 2016-11-03 2016-11-03 개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160145570A KR102605731B1 (ko) 2016-11-03 2016-11-03 개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법

Publications (2)

Publication Number Publication Date
KR20180049540A KR20180049540A (ko) 2018-05-11
KR102605731B1 true KR102605731B1 (ko) 2023-11-24

Family

ID=62185497

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160145570A KR102605731B1 (ko) 2016-11-03 2016-11-03 개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법

Country Status (1)

Country Link
KR (1) KR102605731B1 (ko)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100622303B1 (ko) * 2004-12-07 2006-09-19 한국전자통신연구원 디지털 홈 네트워크 시스템의 지능형 관리 장치 및 관리방법
KR101009638B1 (ko) 2007-11-22 2011-01-19 중앙대학교 산학협력단 상황 적응적 서비스 제공을 위한 추론 장치 및 그 방법과그를 이용한 상황인지 지식서비스 시스템
CN104142659B (zh) 2013-11-12 2017-02-15 珠海优特物联科技有限公司 一种智能家居场景切换方法及系统
US9462438B2 (en) * 2013-11-14 2016-10-04 Google Inc. Do-not-disturb modes

Also Published As

Publication number Publication date
KR20180049540A (ko) 2018-05-11

Similar Documents

Publication Publication Date Title
US11860668B2 (en) Smart assist for repeated actions
US11451656B2 (en) Intelligent notification mode switching in user equipment
US10235990B2 (en) System and method for cognitive intervention on human interactions
KR101122817B1 (ko) 사용자 커뮤니티의 선호도 인코딩을 고려하여애플리케이션 및 서비스의 개인화를 지원하는 통계 모델및 방법
US20200219499A1 (en) Methods and systems for managing voice commands and the execution thereof
US8055602B2 (en) Method and system for customization of a graphical user interface (GUI) of a communication device in a communication network
US10904258B2 (en) Intelligent cluster learning in an internet of things (IoT) computing environment
US20070299631A1 (en) Logging user actions within activity context
US10701206B2 (en) System and method for contact center communications
Mehrotra et al. Intelligent notification systems: A survey of the state of the art and research challenges
US10382475B2 (en) System and method for preventing attacks in communications
US9596347B2 (en) Method and system for providing a hold media service
US20140143666A1 (en) System And Method For Effectively Implementing A Personal Assistant In An Electronic Network
US20220021551A1 (en) Contextually aware conferencing system
CN108881649B (zh) 用于提供语音服务的方法和装置
CN110992937B (zh) 语言离线识别方法、终端及可读存储介质
US11833685B2 (en) System using natural conversation for monitoring a facility
CN111222044A (zh) 基于情绪感知的信息推荐方法、设备及存储介质
EP1761015B1 (en) Self-adaptive user interface for dialogue systems
US10373515B2 (en) System and method for cognitive intervention on human interactions
US10991361B2 (en) Methods and systems for managing chatbots based on topic sensitivity
US9747070B1 (en) Configurable state machine actions
KR102605731B1 (ko) 개인비서 서비스를 제공하는 디바이스 및 이를 이용한 서비스 제공방법
US11223595B2 (en) Methods and systems for managing communication sessions for discussion completeness
JPH1115664A (ja) エージェントインタフェース装置

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant