KR101914708B1 - 서버 및 서버의 제어 방법 - Google Patents

서버 및 서버의 제어 방법 Download PDF

Info

Publication number
KR101914708B1
KR101914708B1 KR1020120064505A KR20120064505A KR101914708B1 KR 101914708 B1 KR101914708 B1 KR 101914708B1 KR 1020120064505 A KR1020120064505 A KR 1020120064505A KR 20120064505 A KR20120064505 A KR 20120064505A KR 101914708 B1 KR101914708 B1 KR 101914708B1
Authority
KR
South Korea
Prior art keywords
voice
user
service domain
display device
response information
Prior art date
Application number
KR1020120064505A
Other languages
English (en)
Other versions
KR20130141241A (ko
Inventor
윤승일
차태환
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to KR1020120064505A priority Critical patent/KR101914708B1/ko
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to PCT/KR2013/005247 priority patent/WO2013187715A1/en
Priority to BR112014030658A priority patent/BR112014030658A2/pt
Priority to MX2014014548A priority patent/MX2014014548A/es
Priority to RU2015101131A priority patent/RU2015101131A/ru
Priority to EP13172077.3A priority patent/EP2675180A3/en
Priority to US13/918,538 priority patent/US9230559B2/en
Priority to CN201310235180.7A priority patent/CN103517094B/zh
Priority to JP2013125501A priority patent/JP2014002737A/ja
Publication of KR20130141241A publication Critical patent/KR20130141241A/ko
Application granted granted Critical
Publication of KR101914708B1 publication Critical patent/KR101914708B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/54—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for retrieval
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

디스플레이 장치와 연동하는 서버가 개시된다. 본 서버는 서비스 도메인별 대화 패턴을 저장하는 저장부, 디스플레이 장치로부터 사용자의 음성을 수신하는 통신부 및, 사용자의 음성이 속하는 서비스 도메인을 판단하고, 판단된 서비스 도메인의 대화 패턴을 기초로 사용자의 음성에 대응되는 응답 정보를 생성하여 디스플레이 장치로 전송하도록 통신부를 제어하는 제어부를 포함하며, 제어부는, 현재 수신된 사용자의 음성이 이전에 수신된 사용자의 음성과 다른 서비스 도메인에 속하는 것으로 판단되면, 다른 서비스 도메인의 대화 패턴을 기초로 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성한다.

Description

서버 및 서버의 제어 방법 {SERVER AND METHOD FOR CONTROLLING THE SAME }
본 발명은 서버 및 서버의 제어 방법에 관한 것으로, 더욱 상세하게는 사용자와 대화 가능한 디스플레이 장치를 제어하는 서버 및 서버의 제어 방법에 관한 것이다.
전자 기술의 발달에 힘입어 다양한 종류의 디스플레이 장치가 개발되어 보급되고 사용자의 요구에 따라 점차 다양한 기능을 구비하게 되었다. 특히, TV의 경우, 최근에는 인터넷과 연결되어 인터넷 서비스까지 지원하고, 사용자는 TV를 통해 많은 수의 디지털 방송 채널까지 시청할 수 있게 되었다.
한편, 최근에는 디스플레이 장치를 조금 더 편리하고 직관적으로 제어하기 위하여 음성 인식을 이용한 기술이 개발되고 있다. 특히, TV의 경우, 사용자의 음성을 인식하고, 볼륨 조절 또는 채널 변경과 같이 사용자의 음성에 대응되는 기능을 수행할 수 있게 되었다.
그러나, 종래 사용자의 음성을 인식하는 디스플레이 장치들은 인식된 음성에 대응되는 기능을 제공할 뿐, 사용자와의 대화를 통해 인터랙티브한 정보를 제공하지 못하는 점에서 한계가 존재하였다.
본 발명은 상술한 필요성에 따라 안출된 것으로, 본 발명의 목적은, 사용자의 음성이 속하는 서비스 도메인을 고려하여 사용자와 대화 가능한 디스플레이 장치를 제어할 수 있는 서버 및 서버의 제어 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 디스플레이 장치와 연동하는 서버는 서비스 도메인별 대화 패턴을 저장하는 저장부, 상기 디스플레이 장치로부터 사용자의 음성을 수신하는 통신부 및, 상기 사용자의 음성이 속하는 서비스 도메인을 판단하고, 상기 판단된 서비스 도메인의 대화 패턴을 기초로 상기 사용자의 음성에 대응되는 응답 정보를 생성하여 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어하는 제어부를 포함하며, 상기 제어부는, 현재 수신된 사용자의 음성이 이전에 수신된 사용자의 음성과 다른 서비스 도메인에 속하는 것으로 판단되면, 상기 다른 서비스 도메인의 대화 패턴을 기초로 상기 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성한다.
여기에서, 상기 제어부는, 상기 이전에 수신된 사용자의 음성에 의해, 상기 서비스 도메인을 구성하는 슬롯이 모두 채워지기 전이라도 현재 수신된 사용자의 음성이 상기 다른 서비스 도메인에 속하는 것으로 판단되면, 상기 다른 서비스 도메인의 대화 패턴을 기초로 상기 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성할 수 있다.
또한, 상기 제어부는, 상기 현재 수신된 사용자의 음성에 포함된 발화 의도를 판단하고, 상기 다른 서비스 도메인의 대화 패턴을 기초로 상기 판단된 발화 의도에 대응되는 응답 정보를 생성하여 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어할 수 있다.
한편, 상기 응답 정보는, 상기 사용자의 음성에 대응되는 응답 메시지 정보를 포함하며, 상기 디스플레이 장치는, 상기 응답 메시지 정보에 기초하여 상기 사용자의 음성에 대응되는 응답 메시지를 출력할 수 있다.
또한, 상기 응답 정보는, 상기 디스플레이 장치의 기능을 제어하기 위한 제어 명령을 더 포함할 수 있다.
한편, 본 발명의 일 실시 예에 따른 디스플레이 장치와 연동하는 서버의 제어 방법은 상기 디스플레이 장치로부터 사용자의 음성을 수신하는 단계, 기저장된 서비스 도메인별 대화 패턴을 이용하여 상기 사용자의 음성이 속하는 서비스 도메인을 판단하는 단계, 현재 수신된 사용자의 음성이 이전에 수신된 사용자의 음성과 다른 서비스 도메인에 속하는 것으로 판단되면, 상기 다른 서비스 도메인의 대화 패턴을 기초로 상기 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성하는 단계 및, 상기 생성된 응답 정보를 상기 디스플레이 장치로 전송하는 단계를 포함한다.
여기에서, 상기 생성하는 단계는, 상기 이전에 수신된 사용자의 음성에 의해, 상기 서비스 도메인을 구성하는 슬롯이 모두 채워지기 전이라도 현재 수신된 사용자의 음성이 상기 다른 서비스 도메인에 속하는 것으로 판단되면, 상기 다른 서비스 도메인의 대화 패턴을 기초로 상기 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성할 수 있다.
또한, 상기 생성하는 단계는, 상기 사용자의 음성에 포함된 발화 의도를 판단하고, 상기 다른 서비스 도메인의 대화 패턴을 기초로 상기 판단된 발화 의도에 대응되는 응답 정보를 생성할 수 있다.
한편, 상기 응답 정보는, 상기 사용자의 음성에 대응되는 응답 메시지 정보를 포함하며, 상기 디스플레이 장치는, 상기 응답 메시지 정보에 기초하여 상기 사용자의 음성에 대응되는 응답 메시지를 출력할 수 있다.
여기에서, 상기 응답 정보는, 상기 디스플레이 장치의 기능을 제어하기 위한 제어 명령을 더 포함할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 사용자의 음성이 속하는 서비스 도메인이 변경되어도 변경된 서비스 도메인에 기초하여, 사용자의 음성에 대응되는 응답 메시지를 출력할 수 있게 된다. 이에 따라, 서비스 도메인에 관계 없이 사용자와 디스플레이 장치 사이에 끊김 없이 대화가 진행될 수 있다.
도 1은 본 발명의 일 실시 예에 따른 대화형 시스템을 설명하기 위한 도면,
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도,
도 3는 도 2에 도시된 디스플레이 장치의 세부 구성을 설명하기 위한 블록도,
도 4는 본 발명의 일 실시 예에 따른 서버의 구성을 설명하기 위한 블록도 그리고,
도 5는 본 발명의 일 실시 예에 따른 대화형 시스템의 동작을 설명하기 위한 도면, 그리고
도 6은 본 발명의 일 실시 예에 따른 서버의 제어 방법을 설명하기 위한 흐름도이다.
이하에서는 첨부된 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
도 1은 본 발명의 일 실시 예에 따른 대화형 시스템을 설명하기 위한 도면이다. 도 1에 도시된 바와 같이, 대화형 시스템은 디스플레이 장치(100) 및 서버(200)를 포함한다. 디스플레이 장치(100)는 도 1에 도시된 바와 같이, 스마트 TV일 수 있으나, 이는 일 예에 불과할 뿐, 스마트폰과 같은 휴대폰, 데스크탑 PC, 노트북, 네비게이션 등과 같은 다양한 전자 장치로 구현될 수 있다.
디스플레이 장치(100)는 수집된 사용자의 음성을 서버(200)로 전송하고, 서버(200)는 디스플레이 장치(100)로부터 수신된 사용자의 음성에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송할 수 있다.
구체적으로, 서버(200)는 사용자의 음성이 속하는 서비스 도메인을 판단하고, 판단된 서비스 도메인의 대화 패턴을 기초로 사용자의 응답 정보를 생성할 수 있다. 예를 들어, 서버(200)는 "현재 방송 중인 프로그램의 명칭이 뭐야?"라는 음성이 수집된 경우, 수신된 음성이 방송 서비스 도메인인 것으로 판단하고 방송 서비스 도메인에 저장된 대화 패턴에서 수신된 음성에 대응되는 답변을 검출하여 디스플레이 장치(100)로 전송할 수 있다.
디스플레이 장치(100)는 서버(200)로부터 수신된 응답 정보에 기초하여, 다양한 동작을 수행할 수 있다. 상술한 예에서, 디스플레이 장치(100)는 응답 정보에 기초하여, "현재 방송 중인 프로그램의 명칭이 뭐야?"라는 음성에 대한 답변으로 "문의하신 프로그램 제목은 ○○○ 입니다"라는 메시지를 음성 또는 텍스트로 출력하거나, 이들의 조합으로 출력할 수 있다.
한편, 디스플레이 장치(100)는 현재 수집된 사용자의 음성이 속하는 서비스 도메인이 이전에 수집된 사용자의 음성이 속하는 서비스 도메인과 다른 경우라도, 현재 수집된 사용자의 음성에 대응되는 응답 메시지를 출력하거나, 사용자의 음성에 대응되는 기능을 수행할 수 있다.
즉, 서버(200)는 디스플레이 장치(100)로부터 현재 수신된 사용자의 음성이 이전에 수신된 사용자의 음성과 다른 서비스 도메인에 속하는 것으로 판단되면, 다른 서비스 도메인의 대화 패턴을 이용하여 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송할 수 있다.
상술한 예에서, "현재 방송 중인 프로그램의 명칭이 뭐야?"라는 음성이 수신된 이후, "오늘 날씨 어때?"라는 음성이 디스플레이 장치(100)로부터 수신된 경우를 가정한다. 이 경우, 서버(200)는 현재 수신된 음성이 속하는 서비스 도메인이 날씨 서비스 도메인인 것으로 판단되면, 날씨 서비스 도메인에 저장된 대화 패턴에서 현재 수신된 음성에 대응되는 답변을 검출하고, 검출된 "원하시는 지역을 말씀해 주세요"라는 답변을 디스플레이 장치(100)로 전송할 수 있다.
이와 같이, 본 발명의 일 실시 예에 따른 대화형 시스템은 사용자가 발화한 음성이 이전과 다른 서비스 도메인에 속하더라고 사용자에게 연속적인 답변을 제공할 수 있게 된다.
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도이다. 도 2에 따르면, 디스플레이 장치(100)는 출력부(110), 음성 수집부(120), 통신부(130) 및 제어부(140)를 포함한다.
출력부(110)는 음성 및 영상 중 적어도 하나를 출력한다. 구체적으로, 출력부(110)는 음성 수집부(120)를 통해 수집된 사용자의 음성에 대응되는 응답 메시지를 음성 및 텍스트 중 적어도 하나로 출력할 수 있다.
이를 위해, 출력부(110)는 디스플레이부(미도시) 및 오디오 출력부(미도시)를 구비할 수 있다.
구체적으로, 디스플레이부는 액정 표시 장치(Liquid Crystal Display, LCD), 유기 전기 발광 다이오드(Organic Light Emitting Display, OLED) 또는 플라즈마 표시 패널(Plasma Display Panel, PDP) 등으로 구현되어, 디스플레이 장치(100)를 통해 제공 가능한 다양한 디스플레이 화면을 제공할 수 있다. 특히, 디스플레이부는 사용자의 음성에 대응되는 응답 메시지를 텍스트 또는 이미지로 디스플레이할 수 있다.
여기에서, 디스플레이부가 터치패드와 함께 상호 레이어 구조를 이루는 터치 스크린 형태로 구현될 수 있으며, 터치 스크린은 터치 입력 위치, 면적, 터치 입력의 압력까지도 검출하도록 구성될 수 있다.
한편, 오디오 출력부는 잭 등과 같은 출력 포트 또는 스피커로 구현되어, 사용자 음성에 대응되는 응답 메시지를 음성으로 출력할 수 있다.
음성 수집부(120)는 사용자의 음성을 수집한다. 예를 들어, 음성 수집부(120)는 사용자의 음성을 수집하기 위한 마이크로 구현되어, 디스플레이 장치(100)에 내장되어 일체형을 이루거나, 디스플레이 장치(100)와 분리된 형태로 구현될 수 있다. 분리된 형태로 구현되는 경우, 음성 수집부(120)는 사용자가 손으로 쥐는 형태, 또는 식탁이나 테이블에 놓일 수 있는 형태로 구현될 수 있으며, 디스플레이 장치(100)와 유선 또는 무선 네트워크를 통하여 연결되어 수집된 사용자의 음성을 디스플레이 장치(100)로 전송할 수 있다.
한편, 음성 수집부(120)는 수집된 사용자의 음성을 처리하여, 음성 신호를 생성한다. 즉, 음성 수집부(120)는 수집된 사용자의 음성에서 노이즈(예를 들어, 에어컨 소리, 청소기 소리, 음악 소리 등)를 제거하여, 음성 신호를 생성할 수 있다.
구체적으로, 음성 수집부(120)는 아날로그 형태의 사용자 음성이 입력되면, 이를 샘플링하여 디지털 신호로 변환한다. 그리고, 음성 수집부(120)는 변환된 디지털 신호의 에너지를 계산하여, 디지털 신호의 에너지가 기설정된 값 이상인지 여부를 판단한다.
디지털 신호의 에너지가 기설정된 값 이상인 경우, 음성 수집부(120)는 디지털 신호에서 노이즈 성분을 제거하여 통신부(130)로 전달한다. 이때, 노이즈 성분은 가정 환경에서 발생할 수 있는 돌발성 잡음으로써, 에어컨 소리, 청소기 소리, 음악 소리 등이 포함될 수 있다. 한편, 디지털 신호의 에너지가 기설정된 값 미만인 경우, 음성 수집부(120)는 디지털 신호에 별다른 처리 과정을 수행하지 않고, 다른 입력을 기다린다. 이에 의해, 사용자 발화 음성이 아닌 다른 소리에 의해 전체 오디오 처리 과정이 활성화되지 않아, 불필요한 전력 소모를 방지할 수 있다.
통신부(130)는 서버(도 1의 200)와 통신을 수행한다. 구체적으로, 통신부(130)는 사용자 음성을 서버(200)로 전송하고, 사용자 음성에 대응되는 응답 정보를 서버(200)로부터 수신할 수 있다.
이를 위해, 통신부(130)는 근거리 무선 통신 모듈(미도시), 무선 통신 모듈(미도시) 등과 같은 다양한 통신 모듈을 포함할 수 있다. 여기에서, 근거리 무선 통신 모듈이란 블루투스, 지그비 방식 등과 같은 근거리 무선 통신 방식에 따라, 근거리에 위치한 외부 기기와 통신을 수행하기 위한 모듈이다. 또한, 무선 통신 모듈이란 WiFi, IEEE 등과 같은 무선 통신 프로토콜에 따라 외부 네트워크에 연결되어 통신을 수행하는 모듈이다. 이 밖에 무선 통신 모듈은 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 이동 통신 규격에 따라 이동 통신 망에 접속하여 통신을 수행하는 이동 통신 모듈을 더 포함할 수도 있다.
제어부(140)는 디스플레이 장치(100)의 전반적인 동작을 제어한다. 구체적으로, 제어부(140)는 사용자의 음성을 수집하여 디지털 신호로 변환하고 디지털 신호에서 노이즈 성분을 제거하도록 음성 수집부(120)를 제어할 수 있다. 그리고, 제어부(140)는 노이즈 성분이 제거된 음성 신호를 서버(200)로 전송하여 사용자 음성에 대응되는 응답 정보를 수신하도록 통신부(130)를 제어할 수 있다.
또한, 제어부(140)는 서버(200)로부터 수신된 응답 정보에 기초하여 사용자의 음성에 대응되는 응답 메시지를 출력하도록 출력부(110)를 제어할 수 있다.
여기에서, 응답 정보는 응답 메시지를 출력하기 위한 응답 메시지 정보를 포함할 수 있다. 응답 메시지 정보는, 사용자의 음성에 대응되는 응답 메시지가 텍스트 형식으로 표현된 것으로, 제어부(150)는 응답 메시지 정보에 기초하여, 사용자의 음성에 대응되는 응답 메시지를 음성 및 텍스트 중 적어도 하나로 출력부(110)를 통해 출력할 수 있다.
구체적으로, 제어부(140)는 TTS(Text to Speech) 엔진을 이용하여, 텍스트 형태의 응답 메시지 정보를 음성으로 변환하여 출력부(110)를 통해 출력할 수 있다. 여기에서, TTS 엔진은 텍스트를 음성으로 변환하기 위한 모듈로서, 종래 개시되어 있는 다양한 TTS 알고리즘을 이용하여 텍스트를 음성으로 변환할 수 있다. 또한, 제어부(140)는 응답 메시지 정보를 구성하는 텍스트가 포함되도록 UI 화면을 구성하여 출력부(110)를 통해 출력할 수도 있다.
이와 같이, 제어부(140)가 디스플레이 장치(100)에서 별도의 기능을 실행함이 없이 사용자 음성에 대응되는 응답 메시지를 출력하는 경우는, 사용자의 음성이 디스플레이 장치(100)에서 실행될 수 없는 기능을 실행시키고자 하는 의미를 포함하거나, 답변을 요구하는 질문인 경우를 들 수 있다.
예를 들어, 디스플레이 장치(100)가 스마트 TV로 구현되고 "XXX에게 전화 걸어줘"라는 사용자 음성이 입력되었으나, 스마트 TV에서 화상통화 기능을 지원하지 않는 경우, 제어부(140)는 별도의 기능을 실행함이 없이 응답 메시지 정보에 기초하여 "지원되지 않는 기능입니다"라는 응답 메시지를 출력부(110)를 통해 음성 및 텍스트 중 적어도 하나로 출력할 수 있다. 또한, 디스플레이 장치(100)가 스마트 TV로 구현되고 "최근 가장 인기있는 프로그램 명을 알려줘"라는 사용자 음성이 입력되면, 제어부(140)는 별도의 기능을 실행함이 없이 응답 메시지 정보에 기초하여 "가장 인기 있는 프로그램은 ○○○(방송프로그램명) 입니다"라는 응답 메시지를 출력부(110)를 통해 음성 및 텍스트 중 적어도 하나로 출력할 수 있다.
한편, 응답 정보는 디스플레이 장치(100)의 기능을 제어하기 위한 제어 명령을 더 포함할 수 있다. 이에 따라, 제어부(140)는 서버(200)로부터 수신된 제어 명령에 기초하여 디스플레이 장치(100)의 제품 종류에 따라 디스플레이 장치(100)에서 실행 가능한 특정 기능을 실행하도록 디스플레이 장치(100)의 각 구성요소를 제어할 수 있다. 예를 들어, 디스플레이 장치(100)가 스마트 TV로 구현되는 경우, 제어부(140)는 제어 명령에 따라 전원 온/오프, 채널 변경, 볼륨 변경 등을 수행할 수 있다.
또한, 응답 정보는, 디스플레이 장치(100)의 기능을 제어하기 위한 제어 명령 및 제어 명령에 따라 실행된 특정 기능과 관련된 응답 메시지 정보를 포함할 수 있다. 이 경우, 제어부(140)는 제어 명령에 따른 기능을 수행하고, 그와 관련된 응답 메시지를 음성 및 텍스트 중 적어도 하나로 출력부(110)를 통해 출력할 수 있다.
예를 들어, 사용자의 음성이 디스플레이 장치(100)에서 실행될 수 있는 기능을 실행시키고자 의미를 포함하면, 제어부(140)는 서버(200)로부터 수신된 제어 명령에 따라 사용자가 의도하는 기능을 실행하고, 서버(200)로부터 수신된 응답 메시지 정보에 기초하여 실행된 기능과 관련된 정보를 음성 및 텍스트 중 적어도 하나로 출력할 수 있다. 예를 들어, 디스플레이 장치(100)가 스마트 TV로 구현되고 "채널을 11번으로 변경해줘"라는 사용자 음성이 입력되면, 제어부(140)는 채널을 11번으로 변경하기 위한 제어 명령에 따라 채널 11번을 선국하고, 응답 메시지 정보에 기초하여 "채널이 11번으로 변경되었습니다" 또는 "채널 변경이 완료되었습니다"라는 응답 메시지를 음성 및 텍스트 중 적어도 하나로 출력부(110)를 통해 출력할 수 있다.
한편, 제어부(140)는 현재 수집된 사용자의 음성이 속하는 서비스 도메인이 이전에 수집된 사용자의 음성이 속하는 서비스 도메인과 다른 경우라도, 현재 수집된 사용자의 음성에 대응되는 응답 메시지를 출력하거나, 사용자의 음성에 대응되는 기능을 수행할 수 있다.
예를 들어, 이전에 수집된 "현재 방송되는 프로그램의 제목이 뭐야?"라는 사용자의 음성에 대해, 디스플레이 장치(100)가 서버(200)로부터 수신된 응답 정보에 기초하여 "문의하신 프로그램은 ○○○(방송 프로그램명)입니다"라는 응답 메시지를 출력한 경우를 가정한다. 이후, 이전의 사용자 음성과 다른 서비스 도메인에 속하는 "날씨는 어때?"라는 사용자의 음성이 수집되면, 제어부(140)는 서버(200)로부터 수신된 응답 정보에 기초하여 "원하시는 지역을 말씀해 주세요"라는 응답 메시지를 음성 및 텍스트 중 적어도 하나로 출력부(110)를 통해 출력할 수 있다.
즉, 특정 서비스 도메인에 구비된 슬롯(slot)이 사용자의 음성에 따라 모두 채워지지 않더라도, 이후 다른 서비스 도메인에 속하는 사용자의 음성이 수신된 경우, 제어부(140)는 이후 수신된 사용자 음성에 대응되는 응답 메시지를 출력할 수 있다.
이를 위해, 서버(200)는 다른 서비스 도메인에 속하는 사용자의 음성이 수신된 경우, 다른 서비스 도메인의 대화 패턴을 기초로 사용자의 음성에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송할 수 있다. 이에 대해서는, 도 4와 함께 후술하기로 한다.
한편, 상술한 실시 예에서는, 서버(200)로부터 전송되는 응답 메시지 정보는 응답 메시지가 텍스트 형식으로 표현된 것으로 설명하였으나 이는 일 예에 불과하다. 즉, 응답 메시지 정보는 디스플레이 장치(100)에서 출력되는 응답 메시지를 구성하는 음성 데이터 자체이거나, 해당 응답 메시지를 구성하는 음성 데이터의 일부이거나, 디스플레이 장치(100)에 기저장된 음성 또는 텍스트를 이용하여 해당 응답 메시지를 출력하기 위한 제어 신호의 형태가 될 수 있다.
이에 따라, 제어부(140)는 응답 메시지 정보의 형태를 고려하여, 응답 메시지를 출력할 수 있다. 구체적으로, 제어부(140)는 응답 메시지를 구성하는 음성 데이터 자체가 수신되면, 해당 데이터를 출력부(110)에서 출력가능한 형태로 처리하여 출력할 수 있다.
다른 한편, 제어부(140)는 응답 메시지를 출력하기 위한 제어 신호가 수신되면, 디스플레이 장치(100)에 기저장된 데이터들 중에서 제어 신호에 매칭되는 데이터를 검색하고, 검색된 음성 또는 텍스트 데이터를 출력가능한 형태로 처리하여 출력부(110)를 통해 출력할 수 있다. 이를 위해, 디스플레이 장치(100)는 기능 실행과 관련된 응답 메시지를 제공하기 위한 음성 또는 텍스트 데이터, 정보 제공 요청과 관련된 음성 또는 텍스트 데이터 등을 저장하고 있을 수 있다. 예를 들어, 디스플레이 장치(100)는 "채널 변경이 완료되었습니다"와 같은 완전한 문장 형태의 데이터를 저장하고 있을 수 있으며, 또한 "채널 ...번으로 변경하였습니다"와 같은 문장을 구성하는 일부 데이터를 저장하고 있을 수 있다. 이 경우, 해당 문장을 완성시키는 채널 명은 서버(200)로부터 수신될 수 있다.
도 3는 도 2에 도시된 디스플레이 장치의 세부 구성을 설명하기 위한 블록도이다. 도 3에 따르면, 디스플레이 장치(100)는 도 3에 도시된 구성요소 외에 입력부(150), 저장부(160), 수신부(170) 및 신호 처리부(180)를 더 포함할 수 있다. 도 3에 도시된 구성요소들 중 도 2에 도시된 구성요소와 중복되는 구성요소들은 그 기능이 동일하므로 자세한 설명은 생략하도록 한다.
입력부(150)는 다양한 사용자 조작을 입력받아 제어부(140)로 전달하기 위한 입력 수단으로써, 입력 패널로 구현될 수 있다. 여기에서, 입력 패널은 터치패드(Touch Pad) 혹은 각종 기능키, 숫자키, 특수키, 문자키 등을 구비한 키패드(Key Pad) 또는 터치 스크린(Touch Screen) 방식으로 이루어질 수 있다. 뿐만 아니라, 입력부(160)는 디스플레이 장치(100)를 제어하기 위한 리모컨에서 전송되는 리모컨 신호를 수신하기 위한 IR 수신부(미도시)로 구현될 수도 있다.
한편, 입력부(150)는 디스플레이 장치(100)의 기능을 제어하기 위한 각종 사용자 조작을 입력받을 수 있다. 예를 들어, 디스플레이 장치(100)가 스마트 TV로 구현되는 경우, 전원 온/오프, 채널 변경, 볼륨 변경 등 스마트 TV의 기능을 제어하기 위한 사용자 조작을 입력받을 수 있다. 이 경우, 제어부(140)는 입력부(150)를 통해 입력된 사용자 조작에 대응되는 각종 기능을 실행하도록 다른 구성요소를 제어할 수 있다. 예를 들어, 제어부(140)는 전원 오프 명령이 입력되면, 디스플레이 장치(100)의 각 구성요소에 공급되는 전원을 차단할 수 있으며, 채널 변경이 입력되면 사용자 조작에 따라 선택된 채널을 선국하도록 수신부(170)를 제어할 수 있다.
특히, 입력부(150)는 사용자의 음성을 수집하기 위한 음성 인식 모드를 개시하기 위한 사용자 조작을 입력받는다. 예를 들어, 입력부(150)는 디스플레이부와 함께 터치 스크린 형태로 구현되어, 음성 인식 모드를 입력받기 위한 오브젝트(가령, 아이콘)를 디스플레이할 수 있다. 다른 한편, 입력부(150)는 음성 인식 모드를 입력받기 위한 별도의 버튼을 구비할 수도 있다. 음성 인식 모드를 개시하기 위한 사용자 조작이 입력부(150)를 통해 입력되면, 제어부(140)는 음성 수집부(120)를 활성화하여 기설정된 거리 내에서 발화되는 사용자의 음성을 수집할 수 있다. 그리고, 제어부(140)는 서버(200)와 통신을 통해 수집된 사용자 음성에 대응되는 응답 정보를 수신하여, 응답 메시지를 출력하거나, 특정 기능을 실행하도록 제어할 수 있다.
저장부(160)는 디스플레이 장치(100)를 동작시키기 위해 필요한 각종 프로그램 등이 저장되는 저장매체로서, 메모리, HDD(Hard Disk Drive) 등으로 구현가능하다. 예를 들어, 저장부(160)는 제어부(140)의 동작 수행을 위한 프로그램을 저장하기 위한 ROM, 제어부(140)의 동작 수행에 따른 데이터를 일시적으로 저장하기 위한 RAM 등을 구비할 수 있다. 또한 각종 참조 데이터를 저장하기 위한 EEROM(Electrically Erasable and Programmable ROM) 등을 더 구비할 수 있다.
특히, 저장부(160)는 사용자의 음성에 대응되는 각종 응답 메시지를 음성 또는 텍스트 데이터로 기저장하고 있을 수 있다. 이에 따라, 제어부(140)는 서버(200)로부터 수신되는 음성 메시지 정보(특히, 제어 신호)에 대응되는 음성 및 텍스트 데이터 중 적어도 하나를 저장부(160)로부터 독출하여 오디오 출력부(112) 또는 디스플레이부(111)로 출력할 수 있다. 이 경우, 제어부(140)는 음성 데이터에 대해 디코딩 등의 신호 처리를 수행하고 디코딩된 음성 데이터를 증폭하여 오디오 출력부(112)를 통해 출력할 수 있으며, 텍스트 데이터를 구성하는 텍스트가 포함되도록 UI 화면을 구성하여 디스플레이부(111)를 통해 출력할 수 있다. 비록, 상술한 실시 예에서는, 제어부(140)가 저장부(160)로부터 독출된 음성 및 텍스트 데이터에 대한 신호 처리를 수행하는 것으로 설명하였으나, 제어부(140)는 음성 및 텍스트 데이터에 대한 신호 처리를 수행하도록 신호 처리부(180)를 제어할 수도 있다.
수신부(170)는 다양한 컨텐츠를 수신한다. 구체적으로, 수신부(170)는 방송 네트워크를 이용하여 방송 프로그램 컨텐츠를 전송하는 방송국 또는 인터넷을 이용하여 컨텐츠 파일을 전송하는 웹 서버로부터 컨텐츠를 수신한다. 또한, 디스플레이 장치(100) 내에 마련되거나 디스플레이 장치(100)에 연결된 각종 기록 매체 재생 장치로부터 컨텐츠를 수신할 수도 있다. 기록 매체 재생 장치란 CD, DVD, 하드디스크, 블루레이 디스크, 메모리 카드, USB 메모리 등과 같은 다양한 유형의 기록 매체에 저장된 컨텐츠를 재생하는 장치를 의미한다.
방송국으로부터 컨텐츠를 수신하는 실시 예의 경우에는, 수신부(170)는 튜너(미도시), 복조기(미도시), 등화기(미도시) 등과 같은 구성을 포함하는 형태로 구현될 수 있다. 반면, 웹 서버와 같은 소스로부터 컨텐츠를 수신하는 실시 예의 경우에는, 수신부(170)는 네트워크 인터페이스 카드(미도시)로 구현될 수 있다. 또는, 상술한 각종 기록 매체 재생 장치로부터 컨텐츠를 수신하는 실시 예의 경우에는, 수신부(170)는 기록 매체 재생 장치와 연결된 인터페이스부(미도시)로 구현될 수 있다. 이와 같이, 수신부(170)는 실시 예에 따라 다양한 형태로 구현될 수 있다.
신호 처리부(180)는 수신부(170)를 통해 수신된 컨텐츠가 출력부(110)를 통해 출력될 수 있도록 컨텐츠에 대한 신호처리를 수행한다.
구체적으로, 신호 처리부(180)는 컨텐츠에 포함된 비디오 신호에 대해 디코딩, 스케일링 및 프레임 레이트 변환 등의 동작을 수행하여, 디스플레이부(111)에서 출력 가능한 형태로 비디오 신호를 변환할 수 있다. 또한, 신호 처리부(180)는 컨텐츠에 포함된 오디오 신호에 대해 디코딩 등의 신호 처리를 수행하여 오디오 출력부(112)에서 출력 가능한 형태로 오디오 신호를 변환할 수 있다.
도 4는 본 발명의 일 실시 예에 따른 서버의 구성을 설명하기 위한 블록도이다. 도 4에 따르면, 서버(200)는 저장부(210), 통신부(220) 및 제어부(230)를 포함한다.
저장부(210)는 서비스 도메인별 대화 패턴을 저장한다. 이를 위해, 저장부(210)는 각 서비스 도메인별 말뭉치(corpus) 데이터베이스를 구비할 수 있다. 여기에서, 서비스 도메인은 사용자가 발화한 음성이 속하는 주제에 따라 구분될 수 있다.
예를 들어, 저장부(210)는 방송 서비스 도메인에 대한 제1 말뭉치 데이터베이스 및 날씨 서비스 도메인에 대한 제2 말뭉치 데이터베이스를 구비할 수 있다.
이 경우, 제1 말뭉치 데이터베이스는 방송 서비스 도메인 내에서 발생할 수 있는 다양한 대화 패턴을 저장할 수 있다. 예를 들어, "프로그램 언제 시작해?"에 대한 답변으로 "어느 프로그램의 시작시간을 알고 싶습니까?"를 저장하고, "○○○(방송 프로그램명) 언제 시작해?"에 대한 답변으로 "문의하신 ○○○의 시작시간은 ... 입니다"를 저장할 수 있다.
또한, 제2 말뭉치 데이터베이스는 날씨 서비스 도메인 내에서 발생할 수 있는 대화 패턴을 저장할 수 있다. 예를 들어, "○○(지역명)의 날씨 어때?"에 대한 답변으로 "온도를 말씀드릴까요?"를 저장하고, "서울의 온도는 어때?"에 대한 답변으로 "문의하신 ○○의 온도는 ... 입니다"를 답변으로 저장할 수 있다.
통신부(220)는 디스플레이 장치(100)로부터 사용자의 음성을 수신한다. 이를 위해, 통신부(220)는 디스플레이 장치(100)와 통신을 수행하기 위한 근거리 무선 통신 모듈(미도시), 무선 통신 모듈(미도시) 등과 같은 다양한 통신 모듈을 포함할 수 있다.
또한, 통신부(220)는 인터넷 망을 통해 웹 서버와 통신을 수행하여, 각종 검색 키워드를 웹 서버로 전송하고 그에 따른 웹 검색 결과를 수신할 수 있다. 여기에서, 검색 키워드란, 날씨 관련 키워드(가령, 지역명, 온도, 비 올 확률 등), 컨텐츠 관련 키워드(가령, 영화 제목, 영화 개봉일, 음악 제목, 가수 등) 등과 같이 웹 검색이 가능한 다양한 키워드를 포함할 수 있으며, 이는 저장부(210)에 기저장되어 있을 수 있다.
제어부(230)는 서버(200)의 전반적인 동작을 제어한다. 특히, 제어부(230)는 사용자의 음성이 속하는 서비스 도메인을 판단하고, 판단된 서비스 도메인의 대화 패턴을 기초로 사용자의 음성에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송하도록 통신부(210)를 제어한다.
이를 위해, 제어부(230)는 STT(Speech to Text) 알고리즘을 이용하여 수신된 사용자의 음성을 텍스트로 변환한다. 그리고, 제어부(230)는 각 말뭉치 데이터베이스에서 변환된 텍스트에 매칭되는 사용자 발화를 검출하여, 사용자의 음성이 속하는 서비스 도메인을 판단할 수 있다.
이후, 제어부(230)는 사용자의 음성이 속하는 서비스 도메인에 기초하여, 사용자의 음성으로부터 화행(dialogue act), 주행(main action) 및 구성요소(component slot)를 추출한다. 예를 들어, 제어부(230)는 사용자의 음성에서 MaxEnt(Maximum Entropy Classifier)를 이용하여 화행, 주행을 추출하고, CRF(Conditional Random Field)를 이용하여 구성요소를 추출할 수 있다. 하지만, 이에 한정되는 것은 아니며 이미 공지된 다양한 방식을 통해 화행, 주행 및 구성요소를 추출할 수 있다.
여기에서, 화행은 문장의 형태와 관련된 분류 기준으로, 해당 문장이 서술문(Statement), 요청문(Request), Why 의문문(WH-Question) 또는 Yes-No 의문문(YN-Question)인지를 나타내는 것이다. 주행은 해당 발화가 특정 도메인에서 대화를 통해 원하는 행위를 나타내는 의미적 정보이다. 예를 들어, 방송 서비스 도메인에서, 주행은 TV 온/오프, 프로그램 찾기, 프로그램 시간 찾기, 프로그램 예약 등을 포함할 수 있다. 구성요소는 발화에 나타나는 특정 도메인에 대한 개체 정보즉, 특정 도메인에서 의도하는 행동의 의미를 구체화하기 위해서 부가되는 정보이다. 예를 들어, 방송 서비스 도메인에서 구성요소는 장르, 프로그램명, 시작시간, 채널명, 배우 이름 등을 포함할 수 있다.
또한, 제어부(230)는 추출된 화행, 주행 및 구성요소를 이용하여 사용자의 음성에 포함된 발화 의도를 판단하고, 판단된 발화 의도에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송할 수 있다.
여기에서, 응답 정보는, 사용자의 음성에 대응되는 응답 메시지 정보를 포함한다. 응답 메시지 정보는 디스플레이 장치(100)에서 출력되는 응답 메시지가 텍스트 형식으로 표현된 것으로, 디스플레이 장치(100)는 서버(200)로부터 수신된 응답 메시지 정보에 기초하여 사용자의 음성에 대응되는 응답 메시지를 출력할 수 있다.
구체적으로, 제어부(230)는 판단된 발화 의도에 대한 답변을 말뭉치 데이터베이스에서 추출하고, 추출된 답변을 텍스트로 변환하여 응답 메시지 정보를 생성할 수 있다.
예를 들어, "○○○(방송프로그램명)를 언제 해?"라는 사용자 음성이 디스플레이 장치(100)로부터 수신된 경우를 가정한다. 이 경우, 제어부(230)는 텍스트 형식으로 변환된 사용자의 음성과 매칭되는 사용자 발화가 존재하는 말뭉치 데이터베이스를 검색하여, "○○○를 언제 해?"라는 음성이 방송 서비스 도메인에 포함되는 것으로 판단할 수 있다.
그리고, 제어부(230)는 화행을 통해 해당 음성의 문장 형태가 "의문형"인 것으로 판단하고, 주행 및 핵심 요소를 통해 "○○○"에 대한 "프로그램 시작시간"을 알기 원하는 것으로 판단한다. 결과적으로, 제어부(230)는 수신된 사용자 음성에 포함된 발화 의도는 "○○○"에 대해 "프로그램 시작시간"을 "문의"하는 것으로 판단할 수 있다.
이후, 제어부(230)는 "○○○"에 대해 "프로그램 시작시간"을 "문의"하는 발화 의도에 대해 "문의하신 ○○○의 시작시간은 ... 입니다"라는 답변을 방송 서비스 도메인의 말뭉치 데이터베이스에서 추출한다. 이 경우, 제어부(230)는 EPG(Electronic Program Guide) 정보를 이용하여 "○○○"에 대한 방송 시작시간을 검색하고, "문의하신 ○○○의 시작시간은 토요일 7시입니다"라는 응답 메시지 정보를 생성하여 디스플레이 장치(100)로 전송할 수 있다.
또한, 응답 정보는, 디스플레이 장치(100)의 기능을 제어하기 위한 제어 명령을 더 포함할 수 있다. 즉, 제어부(230)는 사용자의 발화 의도에 대응되는 기능이 디스플레이 장치(100)에서 수행되도록 하기 위한 제어 명령을 생성할 수 있다.
이를 위해, 저장부(220)는 사용자의 발화 의도에 대응되는 제어 명령을 기저장하고 있을 수 있다. 예를 들어, 사용자의 발화 의도가 채널 변경인 경우 디스플레이 장치(100)의 채널을 변경하기 위한 제어 명령을 매칭시켜 저장하고, 사용자의 발화 의도가 예약 녹화인 경우 디스플레이 장치(100)에서 특정 프로그램에 대한 예약 녹화 기능을 실행시키기 위한 제어 명령을 매칭시켜 저장하고 있을 수 있다.
예를 들어, "○○○(방송 프로그램명)를 예약해줘"라는 사용자 음성이 디스플레이 장치(100)로부터 수신된 경우를 가정한다. 이 경우, 제어부(230)는 텍스트 형식으로 변환된 사용자의 음성과 매칭되는 사용자 발화가 존재하는 말뭉치 데이터베이스를 검색하여, "○○○를 예약해줘"라는 음성이 방송 서비스 도메인에 포함되는 것으로 판단할 수 있다.
그리고, 제어부(230)는 화행을 통해 해당 음성이 "요청"과 관련된 문장 형태인 것으로 판단하고, 주행 및 핵심 요소를 통해 "○○○"에 대한 "프로그램 예약"을 원하는 것으로 판단한다. 결과적으로, 제어부(230)는 수신된 사용자 음성에 포함된 발화 의도는 "○○○"에 대해 "프로그램 예약"을 "요청"하는 것으로 판단할 수 있다.
이후, 제어부(230)는 "○○○"에 대해 "프로그램 예약"을 "요청"하는 발화 의도에 대응되는 제어 명령을 저장부(210)에서 검출하여, 디스플레이 장치(100)에서 "○○○"의 예약 녹화 기능을 수행하기 위한 제어 명령을 생성할 수 있다. 이 경우, 제어부(230)는 "○○○"에 대해 "프로그램 예약"을 "요청"하는 발화 의도에 대해 "요청하신 프로그램의 녹화가 예약되었습니다"라는 응답 메시지 정보를 방송 서비스 도메인의 말뭉치 데이터베이스에서 추출하여, 디스플레이 장치(100)로 함께 전송할 수 있다.
한편, 제어부(230)는 현재 수신된 사용자의 음성에 포함된 사용자의 발화 의도를 판단할 수 없는 경우, 이전에 수신된 사용자의 음성에 참조하여, 현재 수신된 사용자의 음성에 포함된 사용자의 발화 의도를 판단할 수 있다. 즉, 제어부(230)는 현재 수신된 사용자의 음성을 말뭉치 데이터베이스에 저장된 대화 패턴과 비교하여 현재 수신된 사용자의 음성이 대화 패턴에서 최초 사용자 발화에 해당하는지 여부를 판단하고, 최초 사용자 발화에 해당하지 않는 것으로 판단되면 이전에 수신된 사용자의 음성을 참조하여 현재 수신된 사용자의 음성에 포함된 사용자의 발화 의도를 판단할 수 있다.
예를 들어, "○○○(방송 프로그램명) 언제 해?"라는 사용자 음성이 입력된 후, "출연진은?"라는 사용자 음성이 입력된 경우를 가정한다. 이 경우, 제어부(230)는 "출연진은?"라는 사용자 음성이 방송 서비스 도메인 내에서 최초 사용자 발화에 해당되지 않는 것으로 판단되면, 이전에 수신된 "○○○ 언제 해?"라는 사용자 음성에 기초하여, "출연진은?"의 발화 의도를 판단하게 된다.
즉, 제어부(230)는 구성요소를 추출할 수 없는 "출연진은?"라는 사용자 음성의 발화 의도를 판단하기 위해 이전에 수신된 사용자 음성에 포함된 "○○○"를 이용하여 "출연진은?"의 발화 의도를 "○○○"에 대한 "출연자"를 "문의"하는 것으로 판단할 수 있다.
다른 예로, "□□□(방송 프로그램명)은?"이라는 사용자의 음성이 입력된 경우를 가정한다. 이 경우, 제어부(230)는 주행을 추출할 수 없는 "□□□은?"의 발화 의도를 판단하기 위해 이전에 수신된 사용자 음성에 포함된 "언제 해?"를 이용하여, "□□□은?"에 포함된 발화 의도를 "□□□"의 "프로그램 시작시간"을 "문의"하는 것으로 판단할 수 있다.
한편, 제어부(230)는 현재 수신된 사용자의 음성이 이전에 수신된 사용자의 음성과 다른 서비스 도메인에 속하는 것으로 판단되면, 다른 서비스 도메인의 대화 패턴을 기초로 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성한다.
구체적으로, 제어부(230)는 이전에 수신된 사용자의 음성에 의해 서비스 도메인을 구성하는 슬롯(slot)이 모두 채워지기 전이라도, 현재 수신된 사용자의 음성이 다른 서비스 도메인에 속하는 것으로 판단되면 다른 서비스 도메인의 대화 패턴을 기초로 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성할 수 있다.
여기에서, 슬롯이란, 각 서비스 도메인마다 사용자의 음성에서 추출된 구성요소가 채워지는 블랭크를 의미한다. 예를 들어, 방송 서비스 도메인의 경우, 구성요소인 장르, 프로그램명, 시작시간, 채널명, 배우 이름 등이 채워지는 블랭크를 의미한다.
일반적인 대화형 시스템에서는 서비스 도메인을 구성하는 슬롯이 모두 채워지면 구성요소가 채워진 모든 슬롯을 리셋하고, 이후 수신된 사용자의 음성이 속하는 서비스 도메인을 판단하였다. 즉, 최초 수신된 사용자의 음성이 속하는 서비스 도메인이 판단되면, 판단된 서비스 도메인의 슬롯이 모두 채워져 리셋되기 전까지는 이후 수신된 사용자의 음성이 속하는 서비스 도메인을 재차 판단하지 않았다.
따라서, 이와 같은 방식의 경우, 다른 서비스 도메인에 속하는 음성이 수신되어도 이전에 판단된 서비스 도메인을 기초로 현재 수신된 사용자의 음성에서 주행 및 구성요소를 추출하고자 하므로, 현재 수신된 사용자의 음성에 대한 발화 의도를 판단할 수 없었다.
하지만, 본 발명의 일 실시 예에서는, 서비스 도메인을 구성하는 빈 슬롯이 모두 채워지지 않은 상태라도, 수신되는 사용자의 음성이 속하는 서비스 도메인을 판단하여 이전과 다른 서비스 도메인에 속하는 사용자의 음성이 수신된 경우라도 해당 음성의 발화 의도를 판단할 수 있다.
이를 위해, 제어부(230)는 이전에 수신된 사용자의 음성이 속하는 서비스 도메인의 말뭉치 데이터베이스에 현재 수신된 사용자의 음성이 매칭되는지 여부를 판단한다.
매칭되는 것으로 판단되는 경우, 제어부(230)는 해당 서비스 도메인을 이용하여 현재 수신된 사용자의 음성에 대한 발화 의도를 판단하고, 그에 대응되는 응답 정보를 생성한다. 이에 대해서는 앞서 설명한바 있으므로 중복 설명은 생략한다.
한편, 매칭되지 않는 것으로 판단되면, 제어부(230)는 현재 수신된 사용자의 음성을 다른 말뭉치 데이터베이스와 비교하여, 현재 수신된 사용자의 음성이 속하는 서비스 도메인을 판단한다.
이후, 제어부(230)는 현재 수신된 사용자의 음성에 포함된 발화 의도를 판단하고, 다른 서비스 도메인의 대화 패턴을 기초로 판단된 발화 의도에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송하도록 통신부(210)를 제어할 수 있다.
즉, 제어부(230)는 현재 사용자의 음성이 속하는 서비스 도메인에 기초하여, 사용자의 음성으로부터 화행, 주행 및 구성요소를 추출한다. 그리고, 제어부(230)는 추출된 화행, 주행 및 구성요소를 이용하여 현재 수신된 사용자의 음성에 포함된 발화 의도를 판단하고, 판단된 발화 의도에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송할 수 있다. 보다 구체적인 설명을 위해 도 5를 참조한다.
도 5는 본 발명의 일 실시 예에 따른 대화형 시스템의 동작을 설명하기 위한 도면이다.
도 5의 (a)와 같이, 디스플레이 장치(300)는 서버(미도시)와 연동하여 "프로그램 언제 해?"라는 사용자 음성이 수신되면, "어떠한 프로그램을 말씀하시나요?"라는 응답 메시지를 음성으로 출력할 수 있다.
이후, 도 5의 (b)와 같이, 디스플레이 장치(300)가 방송 서비스 도메인에 속하는 "프로그램 언제 해?"와 다른 서비스 도메인에 속하는 "서울의 온도는 어때?"라는 음성을 수신한 경우를 가정한다. 이 경우, 서버는 방송 서비스 도메인을 구성하는 슬롯이 모두 채워지기 전이라도, "서울의 온도는 어때?"이 속하는 서비스 도메인을 판단한다. 이에 따라, 서버는 해당 음성이 날씨 서비스 도메인인 것으로 판단되면, 날씨 서비스 도메인에 기초하여 "서울의 온도는 어때?"에서 화행, 주행 및 구성요소를 추출하고, 현재 수신된 사용자 음성에 포함된 발화 의도는 "서울"의 "온도 정보"을 "문의"하는 것으로 판단한다.
그리고, 서버는 "서울"의 "온도 정보"을 "문의"하는 발화 의도에 대해 "문의하신 서울의 현재 온도는 ...입니다"라는 답변을 날씨 서비스 도메인의 말뭉치 데이터베이스에서 추출한다. 이 경우, 서버는 해당 음성에서 "서울", "온도"를 키워드로 추출하여 이를 웹 서버로 전송하고, 서울의 온도에 대한 검색 결과를 웹 서버로부터 수신하여 "현재 서울의 온도는 23℃ 입니다"라는 응답 메시지 정보를 디스플레이 장치(300)로 전송할 수 있다. 이에 따라, 디스플레이 장치(300)는 이전과는 다른 서비스 도메인에 속하는 "서울의 온도는 어때?"에 대한 답변으로 "현재 서울의 온도는 23℃ 입니다"를 음성으로 출력할 수 있다.
한편, 상술한 실시 예에서는 서버(200)가 하나로 구현되는 경우를 설명하였지만 이는 일 예에 불과하다.
즉, 서버(200)는 디스플레이 장치(100)로부터 사용자의 음성을 수신하여 이를 텍스트로 변환하고, 변환된 텍스트를 디스플레이 장치(100)로 전송하는 제1 서버(미도시) 및 변환된 텍스트를 수신하여 사용자의 음성에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송하는 제2 서버(미도시)로 구현될 수 있다.
구체적으로, 제1 서버는 STT 알고리즘을 이용하여, 디스플레이 장치(100)로부터 수신된 음성 신호를 텍스트로 변환하여 디스플레이 장치(100)로 전송할 수 있다. 그리고, 제2 서버는 수신된 텍스트에 기초하여 사용자의 발화 의도를 판단하고 그에 대응되는 응답 정보를 생성하여 디스플레이 장치(100)로 전송할 수 있다.
도 6은 본 발명의 일 실시 예에 따른 디스플레이 장치와 연동하는 서버의 제어 방법을 설명하기 위한 흐름도이다.
먼저, 디스플레이 장치로부터 사용자의 음성을 수신한다(S410).
이후, 기저장된 서비스 도메인별 대화 패턴을 이용하여 사용자의 음성이 속하는 서비스 도메인을 판단한다(S420).
이어서, 현재 수신된 사용자의 음성이 이전에 수신된 사용자의 음성과 다른 서비스 도메인에 속하는 것으로 판단되면(S430-Y), 다른 서비스 도메인의 대화 패턴을 기초로 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성한다(S440).
구체적으로, 이전에 수신된 사용자의 음성에 의해, 서비스 도메인을 구성하는 슬롯이 모두 채워지기 전이라도 현재 수신된 사용자의 음성이 다른 서비스 도메인에 속하는 것으로 판단되면, 다른 서비스 도메인의 대화 패턴을 기초로 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성할 수 있다. 여기에서, 사용자의 음성에 포함된 발화 의도를 판단하고, 다른 서비스 도메인의 대화 패턴을 기초로 판단된 발화 의도에 대응되는 응답 정보를 생성할 수 있다.
한편, 이전과 동일한 서비스 도메인에 속하는 사용자의 음성이 속하는 것으로 판단되면(S430-N), 이전 서비스 도메인의 대화 패턴을 기초로 현재 수신된 사용자의 음성에 대응되는 응답 정보를 생성한다(S450).
이후, 생성된 응답 정보를 디스플레이 장치로 전송한다(S460).
한편, 응답 정보는, 사용자의 음성에 대응되는 응답 메시지 정보를 포함하며, 디스플레이 장치는, 응답 메시지 정보에 기초하여 사용자의 음성에 대응되는 응답 메시지를 출력할 수 있다.
또한, 응답 정보는, 디스플레이 장치의 기능을 제어하기 위한 제어 명령을 더 포함할 수 있다.
한편, 이들 실시 예에 대해서는 구체적으로 상술한바 있다는 점에서 중복 설명은 생략하도록 한다.
또한, 본 발명에 따른 제어 방법을 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 디스플레이 장치 및 서버에 대해 도시한 상술한 블록도에서는 버스(bus)를 미도시하였으나, 디스플레이 장치 및 서버에서 각 구성요소 간의 통신은 버스를 통해 이루어질 수도 있다. 또한, 각 디바이스에는 상술한 다양한 단계를 수행하는 CPU, 마이크로 프로세서 등과 같은 프로세서가 더 포함될 수도 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100 : 디스플레이 장치 110 : 출력부
120 : 음성수집부 130 : 통신부
140 : 제어부 200 : 서버
210 : 저장부 220 : 통신부
230 : 제어부

Claims (10)

  1. 디스플레이 장치와 연동하는 서버에 있어서,
    서비스 도메인별 대화 패턴을 저장하는 저장부;
    상기 디스플레이 장치로부터 사용자 음성을 수신하는 통신부; 및,
    상기 사용자 음성에 대응되는 텍스트가 속하는 서비스 도메인을 판단하고, 상기 서비스 도메인에 기초하여 상기 사용자 음성에 대응되는 텍스트로부터 구성 슬롯을 획득하고, 상기 구성 슬롯 및 상기 판단된 서비스 도메인의 대화 패턴을 기초로 상기 사용자 음성에 대응되는 응답 정보를 생성하여 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어하는 제어부;를 포함하며,
    상기 제어부는,
    상기 수신된 사용자 음성으로부터 구성 슬롯을 획득할 수 없는 경우, 이전에 수신된 사용자 음성으로부터 획득된 구성 슬롯에 기초하여 상기 사용자 음성에 대응되는 응답 정보를 생성하는, 서버.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 이전에 수신된 사용자 음성에 의해, 상기 서비스 도메인을 구성하는 슬롯이 모두 채워지기 전이라도 현재 수신된 사용자 음성이 다른 서비스 도메인에 속하는 것으로 판단되면, 다른 서비스 도메인의 대화 패턴을 기초로 상기 수신된 사용자 음성에 대응되는 응답 정보를 생성하는 것을 특징으로 하는 서버.
  3. 제2항에 있어서,
    상기 제어부는,
    상기 현재 수신된 사용자 음성에 포함된 발화 의도를 판단하고, 상기 다른 서비스 도메인의 대화 패턴을 기초로 상기 판단된 발화 의도에 대응되는 응답 정보를 생성하여 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어하는 것을 특징으로 하는 서버.
  4. 제1항에 있어서,
    상기 응답 정보는,
    상기 사용자 음성에 대응되는 응답 메시지 정보를 포함하며,
    상기 디스플레이 장치는,
    상기 응답 메시지 정보에 기초하여 상기 사용자 음성에 대응되는 응답 메시지를 출력하는 것을 특징으로 하는 서버.
  5. 제4항에 있어서,
    상기 응답 정보는,
    상기 디스플레이 장치의 기능을 제어하기 위한 제어 명령을 더 포함하는 것을 특징으로 하는 서버.
  6. 디스플레이 장치와 연동하는 서버의 제어 방법에 있어서,
    상기 디스플레이 장치로부터 사용자 음성을 수신하는 단계;
    기저장된 서비스 도메인별 대화 패턴을 이용하여 상기 사용자 음성에 대응되는 텍스트가 속하는 서비스 도메인을 판단하는 단계;
    상기 서비스 도메인에 기초하여 상기 사용자 음성에 대응되는 텍스트로부터 구성 슬롯을 획득하고, 상기 구성 슬롯 및 상기 서비스 도메인의 대화 패턴을 기초로 상기 사용자 음성에 대응되는 응답 정보를 생성하는 단계; 및,
    상기 생성된 응답 정보를 상기 디스플레이 장치로 전송하는 단계;를 포함하며,
    상기 응답 정보를 생성하는 단계는,
    상기 수신된 사용자 음성으로부터 구성 슬롯을 획득할 수 없는 경우, 이전에 수신된 사용자 음성으로부터 획득된 구성 슬롯에 기초하여 상기 사용자 음성에 대응되는 응답 정보를 생성하는, 제어 방법.
  7. 제6항에 있어서,
    상기 생성하는 단계는,
    상기 이전에 수신된 사용자 음성에 의해, 상기 서비스 도메인을 구성하는 슬롯이 모두 채워지기 전이라도 상기 사용자 음성이 다른 서비스 도메인에 속하는 것으로 판단되면, 다른 서비스 도메인의 대화 패턴을 기초로 상기 수신된 사용자 음성에 대응되는 응답 정보를 생성하는 것을 특징으로 하는 제어 방법.
  8. 제7항에 있어서,
    상기 생성하는 단계는,
    상기 사용자 음성에 포함된 발화 의도를 판단하고, 상기 다른 서비스 도메인의 대화 패턴을 기초로 상기 판단된 발화 의도에 대응되는 응답 정보를 생성하는 것을 특징으로 하는 제어 방법.
  9. 제6항에 있어서,
    상기 응답 정보는,
    상기 사용자 음성에 대응되는 응답 메시지 정보를 포함하며,
    상기 디스플레이 장치는,
    상기 응답 메시지 정보에 기초하여 상기 사용자 음성에 대응되는 응답 메시지를 출력하는 것을 특징으로 하는 제어 방법.
  10. 제9항에 있어서,
    상기 응답 정보는,
    상기 디스플레이 장치의 기능을 제어하기 위한 제어 명령을 더 포함하는 것을 특징으로 하는 제어 방법.
KR1020120064505A 2012-06-15 2012-06-15 서버 및 서버의 제어 방법 KR101914708B1 (ko)

Priority Applications (9)

Application Number Priority Date Filing Date Title
KR1020120064505A KR101914708B1 (ko) 2012-06-15 2012-06-15 서버 및 서버의 제어 방법
BR112014030658A BR112014030658A2 (pt) 2012-06-15 2013-06-13 servidor, que interage com um monitor, e método para controlar um servidor, que interage com um monitor.
MX2014014548A MX2014014548A (es) 2012-06-15 2013-06-13 Servidor y metodo para controlar el mismo.
RU2015101131A RU2015101131A (ru) 2012-06-15 2013-06-13 Сервер и способ управления им
PCT/KR2013/005247 WO2013187715A1 (en) 2012-06-15 2013-06-13 Server and method of controlling the same
EP13172077.3A EP2675180A3 (en) 2012-06-15 2013-06-14 Server and method of controlling the same.
US13/918,538 US9230559B2 (en) 2012-06-15 2013-06-14 Server and method of controlling the same
CN201310235180.7A CN103517094B (zh) 2012-06-15 2013-06-14 服务器和控制该服务器的方法
JP2013125501A JP2014002737A (ja) 2012-06-15 2013-06-14 サーバ及びサーバの制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120064505A KR101914708B1 (ko) 2012-06-15 2012-06-15 서버 및 서버의 제어 방법

Publications (2)

Publication Number Publication Date
KR20130141241A KR20130141241A (ko) 2013-12-26
KR101914708B1 true KR101914708B1 (ko) 2019-01-14

Family

ID=48625882

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120064505A KR101914708B1 (ko) 2012-06-15 2012-06-15 서버 및 서버의 제어 방법

Country Status (9)

Country Link
US (1) US9230559B2 (ko)
EP (1) EP2675180A3 (ko)
JP (1) JP2014002737A (ko)
KR (1) KR101914708B1 (ko)
CN (1) CN103517094B (ko)
BR (1) BR112014030658A2 (ko)
MX (1) MX2014014548A (ko)
RU (1) RU2015101131A (ko)
WO (1) WO2013187715A1 (ko)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140272883A1 (en) * 2013-03-14 2014-09-18 Northwestern University Systems, methods, and apparatus for equalization preference learning
WO2015098079A1 (ja) * 2013-12-26 2015-07-02 パナソニックＩｐマネジメント株式会社 音声認識処理装置、音声認識処理方法、および表示装置
CN104360897B (zh) * 2014-10-29 2017-09-22 百度在线网络技术（北京）有限公司 对话处理方法和对话管理系统
JP2016192121A (ja) * 2015-03-31 2016-11-10 ソニー株式会社 制御装置、制御方法及びコンピュータプログラム
US10057642B2 (en) 2015-10-06 2018-08-21 Comcast Cable Communications, Llc Controlling the provision of power to one or more devices
US11956503B2 (en) * 2015-10-06 2024-04-09 Comcast Cable Communications, Llc Controlling a device based on an audio input
CN106249614A (zh) * 2016-10-12 2016-12-21 杭州创辉农业科技有限公司 智能终端、智能家居系统、语音识别方法及下单方法
KR102527082B1 (ko) * 2018-01-04 2023-04-28 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR102515023B1 (ko) * 2018-02-23 2023-03-29 삼성전자주식회사 전자 장치 및 그 제어 방법
KR102635811B1 (ko) * 2018-03-19 2024-02-13 삼성전자 주식회사 사운드 데이터를 처리하는 시스템 및 시스템의 제어 방법
JP2019190785A (ja) * 2018-04-27 2019-10-31 積水ハウス株式会社 環境再現プログラムおよび環境再現システム
US11756575B2 (en) 2021-02-16 2023-09-12 Samsung Electronics Co., Ltd. Electronic device and method for speech recognition processing of electronic device
KR20220116949A (ko) * 2021-02-16 2022-08-23 삼성전자주식회사 전자 장치 및 전자 장치의 음성 인식 처리 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007088877A1 (ja) * 2006-01-31 2007-08-09 Honda Motor Co., Ltd. 会話システムおよび会話ソフトウェア

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7693720B2 (en) 2002-07-15 2010-04-06 Voicebox Technologies, Inc. Mobile systems and methods for responding to natural language speech utterance
JPWO2005064592A1 (ja) 2003-12-26 2007-12-20 株式会社ケンウッド 機器制御装置、音声認識装置、エージェント装置、車載機器制御装置、ナビゲーション装置、オーディオ装置、機器制御方法、音声認識方法、エージェント処理方法、車載機器制御方法、ナビゲーション方法、オーディオ装置制御方法及びプログラム
US8023624B2 (en) 2005-11-07 2011-09-20 Ack Ventures Holdings, Llc Service interfacing for telephony
TW201042986A (en) * 2009-05-20 2010-12-01 Inventec Appliances Corp Communication device having voice service automatic answering function and automatic answering method thereof
US8340255B2 (en) * 2009-07-07 2012-12-25 CallVU, Ltd. Interactive display response system
US8626511B2 (en) * 2010-01-22 2014-01-07 Google Inc. Multi-dimensional disambiguation of voice commands
US20110184740A1 (en) * 2010-01-26 2011-07-28 Google Inc. Integration of Embedded and Network Speech Recognizers

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007088877A1 (ja) * 2006-01-31 2007-08-09 Honda Motor Co., Ltd. 会話システムおよび会話ソフトウェア

Also Published As

Publication number Publication date
CN103517094A (zh) 2014-01-15
US20130339032A1 (en) 2013-12-19
RU2015101131A (ru) 2016-08-10
US9230559B2 (en) 2016-01-05
BR112014030658A2 (pt) 2017-06-27
EP2675180A3 (en) 2015-04-22
JP2014002737A (ja) 2014-01-09
MX2014014548A (es) 2015-02-20
EP2675180A2 (en) 2013-12-18
CN103517094B (zh) 2018-04-17
WO2013187715A1 (en) 2013-12-19
KR20130141241A (ko) 2013-12-26

Similar Documents

Publication Publication Date Title
KR101914708B1 (ko) 서버 및 서버의 제어 방법
KR102056461B1 (ko) 디스플레이 장치 및 디스플레이 장치의 제어 방법
USRE49493E1 (en) Display apparatus, electronic device, interactive system, and controlling methods thereof
US9412368B2 (en) Display apparatus, interactive system, and response information providing method
KR101309794B1 (ko) 디스플레이 장치, 디스플레이 장치의 제어 방법 및 대화형 시스템
US9219949B2 (en) Display apparatus, interactive server, and method for providing response information
US20140195230A1 (en) Display apparatus and method for controlling the same
EP2752846A1 (en) Dialogue-type interface apparatus and method for controlling the same
KR102030114B1 (ko) 서버 및 그의 제어 방법
US20140123185A1 (en) Broadcast receiving apparatus, server and control methods thereof
JP2014132756A (ja) ディスプレイ装置及びその制御方法
JP2014021495A (ja) コンテンツ情報提供方法及びそれを適用した放送受信装置
KR102160756B1 (ko) 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR20140026220A (ko) 단말 장치 및 단말 장치의 제어 방법
KR102118195B1 (ko) 서버 및 그의 제어 방법
KR102182689B1 (ko) 서버 및 그의 제어 방법
KR20200133697A (ko) 서버 및 그의 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant