CN103916687A - 显示装置和控制显示装置的方法 - Google Patents

显示装置和控制显示装置的方法 Download PDF

Info

Publication number
CN103916687A
CN103916687A CN201410004898.XA CN201410004898A CN103916687A CN 103916687 A CN103916687 A CN 103916687A CN 201410004898 A CN201410004898 A CN 201410004898A CN 103916687 A CN103916687 A CN 103916687A
Authority
CN
China
Prior art keywords
content
controller
utterance
intention
display unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410004898.XA
Other languages
English (en)
Inventor
车泰焕
金裁彻
朴泰济
李天成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103916687A publication Critical patent/CN103916687A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227Providing Remote input by a user located remotely from the client device, e.g. at work
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4826End-user interface for program selection using recommendation lists, e.g. of programs or channels sorted out according to their score
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4828End-user interface for program selection for searching program descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/654Transmission by server directed to the client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6582Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number

Abstract

一种电子装置包括:输出端;语音收集器,配置为收集用户语音;第一通信器,配置为向第一服务器发送用户语音并且从第一服务器接收与用户语音相对应的文本信息;第二通信器,配置为向第二服务器发送接收的文本信息;以及控制器,配置为响应于从第二服务器接收到与文本信息相对应的响应信息,控制输出端基于响应信息输出根据用户语音中包含的话语意图而有所区别的系统响应。话语意图与内容搜索或内容推荐有关。

Description

显示装置和控制显示装置的方法
相关申请的交叉引用
本申请基于35U.S.C.§119要求于2013年1月7日在韩国知识产权局提交的韩国专利申请No.10-2013-0001804的优先权,其公开内容通过引用的方式全部并入本文。
技术领域
根据示例性实施例的装置和方法大体上涉及提供显示装置和控制显示装置的方法,更具体地,涉及提供一种根据用户语音控制的显示装置和控制显示装置的方法。
背景技术
随着电子技术的发展,已经开发和提供了多种类型的显示装置,并且已经根据用户的需求逐渐添加了多种功能。具体地,电视(TV)现在能够连接到互联网以支持互联网服务,因此,用户能够通过TV观看大量数字广播频道。
在相关技术中,已经开发了使用语音识别的技术来控制显示装置。具体地,TV现在能够识别用户的语音并且执行与用户语音相对应的功能,例如,音量控制或频道改变。
然而,识别用户语音以执行与用户语音相对应的功能的现有显示装置不提供通过与用户的交互的交互信息。
发明内容
示例性实施例至少解决了上述问题和/或缺点以及上文未描述的其它缺点。此外,示例性实施例不需要克服上述缺点,并且示例性实施例可以不克服上述问题中的任意一个。
一个或多个示例性实施例提供根据用户语音中包含的话语意图与内容搜索还是内容推荐有关来输出不同的系统响应的显示装置,以及控制显示装置的方法。
根据示例性实施例的一个方案,提供了一种电子装置,包括:输出端;语音收集器,配置为收集用户语音;第一通信器,配置为向第一服务器发送所述用户语音并且从所述第一服务器接收与所述用户语音相对应的文本信息;第二通信器,配置为向第二服务器发送所接收的文本信息;以及控制器,配置为响应于从所述第二服务器接收到与所述文本信息相对应的响应信息,基于所述响应信息控制所述输出端以输出根据所述用户语音中包含的话语意图而有所区别的系统响应,所述话语意图可以与内容搜索或内容推荐有关。
所述第二服务器可以进一步配置为,根据所述文本信息包括指示所述话语意图与内容搜索有关的关键词还是指示所述话语意图与内容推荐有关的关键词,来产生不同类型的响应信息,并且向所述电子装置发送不同类型的响应信息。
响应于所述话语意图与所述内容搜索有关,所述控制器可以进一步配置为将根据所述话语意图搜索的内容的搜索列表作为所述系统响应进行输出。
响应于所述话语意图与所述内容推荐有关,所述控制器可以进一步配置为将基于收视率从根据所述话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
响应于所述话语意图与所述内容推荐有关,所述控制器可以进一步配置为将基于用户偏好信息从根据所述话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
所述电子装置可以是显示装置。
根据另一示例性实施例的一个方案,提供了一种控制电子装置的方法。所述方法可以包括:收集用户语音;向第一服务器发送所述用户语音,并且从所述第一服务器接收与所述用户语音相对应的文本信息;向第二服务器发送所接收的文本信息;以及响应于从所述第二服务器接收到与所述文本信息相对应的响应信息,基于所述响应信息来输出根据所述用户语音中包含的话语意图而有所区别的系统响应。所述话语意图可以与内容搜索或内容推荐有关。
所述第二服务器可以进一步配置为,根据所述文本信息包括指示所述话语意图与内容搜索有关的关键词还是指示所述话语意图与内容推荐有关的关键词,来产生不同类型的响应信息,并且向所述电子装置发送不同类型的响应信息。
响应于所述话语意图与内容搜索有关,可以将根据所述话语意图搜索的内容的搜索列表作为所述系统响应进行输出。
响应于所述话语意图与内容推荐有关,可以将基于收视率从根据所述话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
响应于所述话语意图与内容推荐有关,可以将基于用户偏好信息从根据所述话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
所述电子装置可以是显示装置。
根据另一示例性实施例的一个方案,提供了一种提供系统响应的方法,包括:接收用户语音;输出与所述用户语音中包含的确定的话语意图以及响应信息相对应的系统响应,所述响应信息对应于用户语音。所确定的话语意图可以与内容搜索或内容推荐有关。
响应于所确定的话语意图与内容搜索有关,可以将根据所确定的话语意图搜索的内容的搜索列表作为系统响应进行输出。
响应于所确定的话语意图与内容推荐有关,可以将从根据所确定的话语意图搜索的内容中选择的内容的推荐列表作为系统响应进行输出。
可以基于收视率信息或用户偏好信息,从根据所确定的话语意图搜索的内容中选择内容推荐列表。
可以通过将用户语音与存储的例句或关键词进行比较来确定所确定的话语意图。
输出系统响应可以包括显示系统响应。
根据另一示例性实施例的一个方案,提供了一种电子设备,包括:输入端,配置为接收用户语音;输出端,配置为输出系统响应;通信器,配置为向服务器发送与所述用户语音相对应的文本信息,并且从所述服务器接收与所述文本信息相对应的响应信息;以及控制器,配置为响应于接收到所述响应信息,控制所述输出端以输出所述系统响应。所述系统响应可以与所述用户语音中包含的确定的话语意图和响应信息相对应,并且确定的话语意图可以与内容搜索或内容推荐有关。
响应于所确定的话语意图与内容搜索有关,控制器可以进一步配置为,控制所述输出端以将根据所确定的话语意图搜索的内容的搜索列表作为所述系统响应进行输出。
响应于所确定的话语意图与内容推荐有关,所述控制器可以进一步配置为,控制所述输出端以将从根据所确定的话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
可以基于收视率信息或用户偏好信息,从根据所确定的话语意图搜索的内容中选择内容推荐列表。
可以通过将所述用户语音与存储的例句或关键词进行比较来确定所确定的话语意图。
电子设备可以是显示设备。
根据另一示例性实施例的一个方案,提供了一种服务器,配置为与电子设备进行通信,所述服务器包括:通信器,配置为从所述电子设备接收与用户语音相对应的文本信息,并且向所述电子设备发送与所述文本信息相对应的响应信息;存储设备,配置为存储用于产生所述响应信息的信息;以及控制器,配置为确定在所接收的文本信息中包含的话语意图,并且基于所述话语意图和所接收的文本信息来产生所述响应信息。所述话语意图可以被确定为与内容搜索或内容推荐有关。
附图说明
通过参照附图描述特定示例性实施例,上述和/或其它方案将更加显而易见,在附图中:
图1是示出了根据示例性实施例的交互系统的视图;
图2是示出了根据示例性实施例的显示装置的框图;
图3是示出了图2的显示装置的详细结构的框图;
图4是示出了图1的第一服务器的框图;
图5是示出了图1的第二服务器的框图;
图6至图12C是示出了根据示例性实施例显示用户界面(UI)屏幕的方法的视图;以及
图13是示出了根据示例性实施例控制显示装置的方法的流程图。
具体实施方式
现在将参照附图更详细地描述特定示例性实施例。
在下面的描述中,即使在不同的附图中,相同的附图标记用于相同的元件。提供描述中定义的内容(例如,详细的构造和元素)以帮助全面理解示例性实施例。因此,显而易见,可以在没有这些具体定义的内容的情况下执行示例性实施例。此外,未详细描述公知的功能或构造,这是因为它们会因不必要的细节使示例性实施例模糊。
图1是示出了根据示例性实施例的交互系统1000的视图。参照图1,交互系统1000包括显示装置100、第一服务器200和第二服务器300。
显示装置100可以由用于控制显示装置100的遥控器(未示出)来控制。具体地,显示装置100可以执行与从遥控器接收的遥控信号相对应的操作。例如,如果显示装置100被实现为TV,如图1中所示,则显示装置100可以根据接收的遥控信号来执行诸如开机/关机、频道改变、音量改变等操作。
显示装置100还可以根据用户的语音来执行多种操作。
具体地,显示装置100可以执行与用户的语音相对应的功能,或者可以输出与用户的语音相对应的系统响应。
为此目的,显示装置100向第一服务器200发送收集的用户语音。如果第一服务器200从显示装置100接收到用户语音,则第一服务器200将接收的用户语音转换为文本信息(或文本)并且向显示装置100发送该文本信息。
显示装置100向第二服务器300发送从第一服务器200接收的文本信息。如果第二服务器300从显示装置100接收到文本信息,则第二服务器300产生与接收的文本信息相对应的响应信息,并且向显示装置100发送响应信息。
显示装置100可以基于从第二服务器300接收的响应信息来执行多种操作。
在这里,响应信息可以包括以下各项中的至少一项:使显示装置100执行特定功能的控制命令、使显示装置100输出系统响应的控制命令、以及与从显示装置100输出的系统响应有关的多种类型的信息。
具体地,显示装置100可以执行与用户语音相对应的功能。换言之,显示装置100可以执行由显示装置100提供的功能中与用户语音相对应的功能。例如,如果输入用户语音“打开频道○(频道号)”,则显示装置100可以基于从第二服务器300接收的控制命令将频道改变到频道○。为此目的,第二服务器300可以向显示装置100发送用于将显示装置100的频道改变到频道○的控制信号。
在该情况下,显示装置100还可以提供与相应功能相对应的系统响应。换言之,显示装置100可以将与根据用户语音执行的功能有关的信息作为语音和用户界面(UI)屏幕(文本、图像等)中的至少一个进行输出。在上述示例中,显示装置100可以将与改变的频道有关的信息或者指示频道已经完全改变的消息作为语音和UI屏幕中的至少一个进行输出。
显示装置100可以输出与用户语音相对应的系统响应。在这里,可以将系统响应作为语音和UI屏幕中的至少一个进行输出。例如,如果输入询问特定节目的广播时间的用户语音,则显示装置100可以将特定节目的广播时间作为语音和UI屏幕中的至少一个进行输出。
具体地,显示装置100可以输出根据用户语音中包含的话语意图而有所区别的系统响应。在这里,用户的意图可以与内容搜索或推荐有关。
具体地,如果话语意图与内容搜索有关,则显示装置100可以输出根据话语意图搜索的内容搜索列表作为系统响应。例如,如果输入用户语音“搜索○○○(演员名字)出现的广播节目”,则显示装置100可以输出○○○(演员名字)出现的广播节目的列表作为系统响应。
如果话语意图与内容推荐有关,则显示装置100可以输出从根据话语意图搜索的内容中选择的内容推荐列表作为系统响应,其中,内容是基于收视率(viewer ratings)来选择的。
例如,如果收集到用户语音“推荐○○○(演员名字)出现的广播节目”,则显示装置100可以输出○○○(演员名字)出现的并且按最高收视率的顺序列出的广播节目的列表。
如果话语意图与内容推荐有关,则显示装置100可以输出从根据话语意图搜索的内容中选择的内容推荐列表作为系统响应,其中,内容是基于用户偏好信息来选择的。
例如,如果收集用户语音“推荐○○○(演员名字)出现的广播节目”,则显示装置100可以输出○○○(演员名字)出现的广播节目之中通过用户最近观看的频道而提供的广播节目的列表。备选地,显示装置100可以输出流派与用户频繁观看的广播节目的流派相同的广播节目的列表。
为此目的,第二服务器300可以向显示装置100发送以下各项中的至少一项:使显示装置100输出系统响应的控制命令,和与从显示装置输出的系统响应有关的多种类型的信息。
如上所述,显示在装置100可以根据用户语音中包含的话语意图是要搜索内容还是要推荐内容来输出不同类型的系统响应。因此,可以向用户提供与用户意图相对应的系统响应,从而可以提供用户的便利性。
在图1中将显示装置100示出为TV,但是这仅是示例。换言之,显示装置100可以实现为多种类型的电子设备,例如,TV、诸如智能电话等便携式电话、台式个人计算机(PC)、笔记本PC、导航系统等。
在图2中将第一服务器200和第二服务器300实现为不同的服务器,但是这仅是示例。换言之,第一服务器200和第二服务器300可以实现为包括第一服务器200和第二服务器300的交互服务器。
图2是示出了根据示例性实施例的显示装置100的框图。参照图2,显示装置100包括输出端110、语音收集器120、第一通信器130、第二通信器140和控制器150。
输出端110输出语音和图像中的至少一个。具体地,输出端100可以将与通过语音收集器120收集的用户语音相对应的系统响应作为语音和图形UI(GUI)中的至少一个进行输出。
为此目的,输出端110可以包括显示器(未示出)和音频输出端(未示出)。
具体地,显示器可以实现为液晶显示器(LCD)、有机发光二极管(OLED)、等离子显示板(PDP)等。显示器可以提供可以通过显示装置100提供的多种类型的显示屏。具体地,显示器可以形成包括文本、图像、图标和GUI中的至少一个的UI屏幕,以在UI屏幕上显示与用户语音相对应的系统响应。
音频输出端可以实现为诸如插孔等的输出端口或扬声器等,以将与用户语音相对应的系统响应作为语音进行输出。
输出端110可以输出多种类型的内容。在这里,内容可以包括广播内容、视频点播(VOD)内容、数字通用盘(DVD)内容等。例如,显示器可以输出构成内容的图像,音频输出端可以输出构成内容的音频。
语音收集器120收集用户语音。例如,语音收集器120可以实现为用于收集用户语音的麦克风,以便嵌入在显示装置100中形成单体,或者与显示装置100分离地安装。如果语音收集器120与显示装置100分离地安装,则语音收集器120可以以用户的手握住的形式或者以放置在桌子上的形式来实现,并且通过有线或无线连接被连接到显示装置100以向显示装置100发送收集的用户语音。
语音收集器120确定收集的语音是否是用户语音,并且从用户语音中滤除噪声(例如,空调声、吸尘器声、音乐声等)。
例如,如果输入用户的模拟语音,则语音收集器120对模拟语音进行采样,并且将采样的模拟语音转换为数字信号。
语音收集器120计算数字信号的能量,以确定数字信号的能量是否高于或等于预置值。
如果数字信号的能量高于或等于预置值,则语音收集器120从数字信号中移除噪声分量,并且向第一通信器130发送已经移除了噪声分量的数字信号。在这里,噪声分量是可能出现在家庭环境中的不期望的噪声,并且可能包括空调声、吸尘器声、音乐声等。如果数字信号的能量低于预置值,则语音收集器120不对数字信号进行特定处理,而是等待另一输入。
因此,除了用户语音以外的声音不激活整个语音处理,因此可以防止不必要的功耗。
第一通信器130与图1的第一服务器200进行通信。具体地,第一通信器130可以向第一服务器200发送用户语音,并且从第一服务器200接收与用户语音相对应的文本信息。
第二通信器140与图1的第二服务器300进行通信。具体地,第二通信器140可以向第二服务器300发送接收的文本信息,并且从第二服务器300接收与文本信息相对应的响应信息。
为此目的,第一通信器130和第二通信器140可以通过使用多种通信方法来与第一服务器200和第二服务器300进行通信。
例如,第一通信器130和第二通信器140可以通过使用有线/无线局域网(LAN)、广域网(WAN)、以太网、蓝牙、Zigbee、通用串行总线(USB)、IEEE1394、Wi-Fi等来与第一服务器200和第二服务器300进行通信。为此目的,第一通信器130和第二通信器140可以包括分别与各通信方法相对应的芯片或输入端口。例如,如果第一通信器130和第二通信器140通过使用有线LAN与第一服务器200和第二服务器300进行通信,则第一通信器130和第二通信器140可以包括有线LAN卡(未示出)和输入端口(未示出)。
在上述示例性实施例中,显示装置100还包括用于与第一服务器200和第二服务器300进行通信的第一通信器130和第二通信器140,但是这仅是示例。备选地,显示装置100可以通过一个通信模块来与第一服务器200和第二服务器300进行通信。
在上述示例性实施例中,第一通信器130和第二通信器140与第一服务器200和第二服务器300进行通信,但是这仅是示例。备选地,第一通信器130和第二通信器140可以连接到web服务器(未示出)以执行web浏览,或者可以连接到提供VOD服务的内容提供器以搜索VOD内容。
控制器150控制显示装置100的整体操作。换言之,控制器150可以控制输出端110、语音收集器120、第一通信器130和第二通信器140的操作。控制器150可以包括中央处理器单元(CPU)、用于控制显示装置100的模块、以及存储数据的只读存储器(ROM)和随机存取存储器(RAM)。
具体地,控制器150可以通过语音收集器120收集用户语音,并且控制第一通信器130向第一服务器200发送收集的用户语音。如果从第一服务器200接收到与用户语音相对应的文本信息,则控制器150可以控制第二通信器140向第二服务器300发送接收的文本信息。
如果从第二服务器300接收到与文本信息相对应的响应信息,则控制器150可以基于接收的响应信息来执行多种操作。
具体地,控制器150可以基于接收的响应信息来执行与用户语音相对应的功能。
在这里,响应信息可以包括用于控制显示装置100的功能的控制命令。具体地,控制命令可以包括用于执行可以在显示装置100中执行的功能中与用户语音相对应的功能。因此,控制器150可以基于从第二服务器300接收的控制命令来控制显示装置100的元件以执行与用户语音相对应的功能。
例如,如果实现为TV的显示装置100收集用户语音“打开频道○(频道号)”,则第二服务器300可以将“打开频道○(频道号)”的话语意图确定为请求频道改变到频道○(频道号),并且向显示装置100发送用于将频道改变到频道○(频道号)的控制命令。因此,控制器150可以基于接收的控制命令来控制显示装置100以将频道改变到频道○(频道号),并且输出通过频道○(频道号)提供的内容。
然而,这仅是示例,并且控制器150可以根据收集的用户语音来控制显示装置100的元件以执行诸如开机/关机、音量控制等的多种操作。
控制器150还可以基于接收的响应信息来控制输出端110以输出与用户语音相对应的系统响应。
为此目的,响应信息可以包括用于从显示装置100输出与用户语音相对应的系统响应的多种类型信息。在该情况下,响应信息还可以包括用于从显示装置100输出与用户语音相对应的系统响应的控制命令。
例如,第二服务器300可以根据用户语音将从显示装置100输出的系统响应表达为文本,并且向显示装置100发送文本。
因此,控制器150可以通过使用文本到语音(TTS)引擎将文本信息转换为语音,并且通过输出端110输出语音。在这里,TTS引擎是将文本转换为语音的模块,并且控制器150可以通过使用相关技术中公开的多种TTS算法来将文本信息转换为语音。
控制器150可以形成包括文本的UI屏幕,并且通过输出端110输出UI屏幕。
例如,如果实现为TV的显示装置100收集用户语音“何时广播○○○(广播节目名称)?”,则第二服务器300可以将“何时广播○○○(广播节目名称)?”的话语意图确定为询问“○○○(广播节目名称)”的广播时间,基于确定的话语意图将“询问的○○○(广播节目名称)的广播时间是○点钟”表达为文本,并且向显示装置100发送文本。
在该情况下,控制器150可以将文本“询问的○○○(广播节目名称)的广播时间是○点钟”转换为语音,并且通过输出端110输出语音。备选地,控制器150可以形成包括文本“询问的○○○(广播节目名称)的广播时间是○点钟”的UI屏幕,并且通过输出端110输出UI屏幕。
响应信息可以包括用于输出根据控制命令执行的与系统响应有关的功能的多种类型信息。在该情况下,控制器150可以控制显示装置100以执行可以在显示装置100中执行的功能中与控制命令相对应的功能,并且将与通过使用用于输出系统响应的多种类型信息执行的功能有关的系统响应作为语音和UI屏幕中的至少一个进行输出。
例如,如果实现为TV的显示装置100收集用户语音“打开频道○(频道号)”,则第二服务器300可以向显示装置100发送用于将显示装置100的频道改变到频道○(频道号)的控制命令。在这里,第二服务器300可以将“显示装置100的频道已经改变到频道○(频道号)”表达为文本,并且向显示装置100发送文本。
因此,控制器150可以基于控制命令将通过输出端110输出的广播频道改变到频道○。控制器150还可以将系统响应“显示装置100的频道已经改变到频道○(频道号)”作为语音和UI屏幕中的至少一个进行输出。
如上所述,控制器150可以控制显示装置100执行与用户语音相对应的功能或者输出与用户语音相对应的系统响应。
如果显示装置100输出与用户语音相对应的系统响应,而不执行附加功能,则用户语音可能是在尝试执行显示装置100中无法执行的功能。
例如,显示装置100可以实现为不支持视频呼叫功能的TV。在该情况下,如果显示装置100收集用户语音“呼叫XXX”,则第二服务器300可以向显示装置100发送用于执行视频呼叫的控制命令。然而,因为显示装置100不支持与控制命令相对应的功能,因此控制器150无法识别从第二服务器300接收的控制命令。在该情况下,控制器150可以通过输出端110将系统响应“不支持该功能”作为语音和UI屏幕中的至少一个进行输出。
在上述示例性实施例中,第二服务器300向显示装置100发送文本信息以从显示装置100输出系统响应,但是这仅是示例。
第二服务器300还可以向显示装置100发送构成从显示装置100输出的系统响应的语音数据或者语音数据的一部分。第二服务器300还可以通过使用存储在显示装置100中的数据来发送用于输出系统响应的控制命令。
因此,控制器150可以在考虑从第二服务器300接收的响应信息的格式的情况下输出系统响应。
具体地,如果接收到构成系统响应的语音数据或语音数据的一部分,则控制器150可以按照从输出端110可输出的格式处理相应数据并且将相应数据作为语音进行输出。
如果接收到用于输出系统响应的控制命令,则控制器150可以搜索显示装置100以在显示装置100存储的数据中得到与控制命令相匹配的数据,将搜索的数据处理为语音和UI屏幕中的至少一个,并且通过输出端110输出语音和UI屏幕中的至少一个。为此目的,显示装置100可以存储与语音和UI屏幕有关的数据,以提供系统响应。
例如,显示装置100可以存储具有诸如“频道未改变”或“不支持该功能”等完整语句格式的数据。
备选地,显示装置100可以存储构成系统响应的数据的一部分,例如,“询问的○○○(广播节目名称)的广播时间是○(广播时间)”或者“频道已经改变到○(频道号)”。在该情况下,可以从第二服务器300接收用于完成系统响应的信息。
例如,控制器150可以使用从第二服务器300接收的广播节目名称或频道号来完成相应句子,然后将完成的句子作为语音和UI屏幕中的至少一个进行输出。
如果从第二服务器300接收到与文本信息相对应的响应信息,则控制器150可以基于响应信息来控制输出端110以输出根据用户语音中包含的话语意图而有所区别的系统响应。在这里,用户的话语意图可以与内容搜索或者内容推荐有关。
具体地,如果用户的话语意图与内容搜索有关,则控制器150可以将根据话语意图搜索的内容列表作为系统响应进行输出。
为此目的,响应信息可以包括与搜索的内容有关的信息。
例如,如果用户的话语意图与内容搜索有关,则第二服务器300可以搜索与话语意图相匹配的内容。换言之,第二服务器300可以搜索电子节目指南(EPG)信息和VOD服务以得到与话语意图相匹配的内容,或者可以在连接到显示装置100的外部装置中存储的内容中搜索与话语意图相匹配的内容。
第二服务器300可以向显示装置100发送与搜索的内容有关的信息。在这里,与搜索的内容有关的信息可以包括以下各项中的至少一项:内容的标题、缩略图、广播时间、流派、演员和制片人、广播内容的频道号以及频道名称。
在该情况下,第二服务器300可以另外向显示装置100发送用于通过使用与搜索的内容有关的信息来输出内容列表的控制命令。
因此,控制器150可以使用与接收的内容有关的信息产生内容搜索列表,形成UI屏幕,并且在UI屏幕上输出内容列表。
举另一例子,响应信息可以包括用于搜索特定内容并且输出搜索内容的列表的控制命令。
例如,如果话语意图与内容搜索有关,则第二服务器300可以搜索与话语意图相匹配的内容。甚至在该情况下,第二服务器300可以搜索EPG信息和VOD服务以得到与话语意图相匹配的内容,或者可以在连接到显示装置100的外部装置中存储的内容中搜索与话语意图相匹配的内容。
第二服务器300可以产生用于搜索具有与搜索的内容相同的标题或者在广播搜索的内容的相同广播时间通过与搜索的内容相同的频道广播的内容的控制命令,并且向显示装置100发送控制命令。
因此,控制器150可以搜索EPG信息以得到与控制命令相对应的内容,或者可以搜索VOD服务以得到与控制命令相对应的内容。为此目的,控制器150可以从内容提供商服务器接收VOD内容列表和多种类型的信息(例如,VOD内容的标题、缩略图、流派、演员、制片人等)。控制器150可以在连接到显示装置100的外部装置中存储的内容中搜索与控制命令相对应的内容。
控制器150可以产生搜索内容的列表,形成UI屏幕,并且在UI屏幕上输出搜索内容的列表。
在上述示例性实施例中,控制器150可以产生包括以下各项中的至少一项的搜索列表:内容的标题、缩略图、广播时间、流派、演员、制片人、广播内容的频道号以及频道名称。控制器150可以产生以广播时间的顺序列出搜索内容的搜索列表。
如果话语意图与内容推荐有关,则控制器150可以将基于收视率选择的内容的推荐列表作为系统响应进行输出,其中,内容是从根据话语意图搜索的内容中选择的。
为此目的,响应信息可以包括与根据话语意图搜索的内容有关的信息以及与搜索的内容有关的收视率信息。
例如,如果用户的话语意图与内容推荐有关,则第二服务器300可以搜索与话语意图相匹配的内容。甚至在该情况下,第二服务器300可以搜索EPG信息和VOD服务以得到与话语意图相匹配的内容,或者可以在连接到显示装置100的外部装置中存储的内容中搜索与话语意图相匹配的内容。第二服务器300还可以向显示装置100发送与搜索的内容有关的信息,例如,以下各项中的至少一项:内容的标题、缩略图、广播时间、流派、演员、制片人、广播内容的频道号以及频道名称。此外,第二服务器300可以通过web搜索等获取与搜索的内容有关的收视率信息,并且向显示装置100发送获取的收视率信息。
在该情况下,第二服务器300可以另外向显示装置100发送控制命令,所述控制命令用于通过使用与搜索的内容有关的信息和与搜索的内容有关的收视率信息产生和输出推荐列表。
因此,控制器150可以通过使用与搜索的内容有关的信息和收视率信息来产生内容推荐列表,形成UI屏幕,并且通过UI屏幕输出内容推荐列表。
具体地,控制器150可以按照高收视率的顺序列出基于收视率信息搜索的内容,以产生推荐列表。控制器150可以按照高收视率的顺序从基于收视率信息搜索的内容中选择预置数量的内容,并且产生推荐列表,使得推荐列表仅包括所选的内容。
在该情况下,控制器150可以将与搜索的内容有关的多种信息添加至推荐列表。例如,控制器150可以产生推荐列表,使得推荐列表包括以下各项中的至少一项:标题、缩略图、广播时间、流派、演员、制片人、广播内容的频道号以及频道名称。
在上述示例性实施例中,第二服务器300搜索收视率信息,并且向显示装置100发送收视率信息,但是这仅是示例。备选地,第二服务器300可以不向显示装置100发送收视率信息。
在该情况下,显示装置100可以预先存储收视率信息,或者可以通过web搜索获取收视率信息。
具体地,控制器150可以从与内容有关的信息中提取关键词,并且可以使用提取的关键词执行web搜索以获取收视率信息,其中,信息是从第二服务器300接收的。例如,控制器150可以提取搜索的内容的标题、广播时间、频道名称等作为关键词,并且向web服务器(未示出)发送提取的关键词,以从web服务器接收与内容有关的收视率信息。
在上述示例性实施例中,第二服务器300向显示装置100发送与根据话语意图搜索的内容有关的信息,但是这仅是示例。备选地,第二服务器300可以向显示装置100发送用于搜索特定内容并且基于收视率信息输出搜索的特定内容的控制命令。
例如,第二服务器300可以向显示装置100发送用于搜索具有与根据话语意图搜索的内容相同的标题的内容并且按照高收视率的顺序输出搜索的内容的控制命令。在该情况下,控制器150可以通过EPG信息等来搜索内容,并且产生和输出按照高收视率的顺序列出搜索内容的推荐列表。
如果用户的话语意图与内容推荐有关,则控制器150可以将基于用户偏好信息所选的内容的推荐列表作为系统响应进行输出,其中,内容是从根据用户的话语意图搜索的内容中选择的。在这里,用户偏好信息可以包括以下各项中的至少一项:与用户频繁观看的内容的流派有关的信息,以及与用户最近通过其观看内容的频道有关的信息。
为此目的,响应信息可以包括与根据话语意图搜索的内容有关的信息以及用户偏好信息。
例如,如果用户的话语意图与内容推荐有关,则第二服务器300可以搜索与话语意图相匹配的内容。甚至在该情况下,第二服务器300可以搜索EPG信息或VOD服务以得到与话语意图相匹配的内容,或者可以在存储在连接到显示装置100的外部装置中的内容中搜索与话语意图相匹配的内容。
第二服务器300可以向显示装置100发送与搜索的内容有关的信息,例如,以下各项中的至少一项:内容的标题、缩略图、广播时间、流派、演员、制片人、广播内容的频道号以及频道名称。
第二服务器300可以向显示装置100发送用户偏好信息。具体地,第二服务器300可以根据每一个用户账户存储与用户已经观看的内容有关的信息,并且向显示装置100发送与用户账户信息(例如,ID和密码)相对应的用户偏好信息。
为此目的,控制器150可以控制第二通信器140以向第二服务器300发送用户账户信息和用户偏好信息。
例如,如果预置事件发生,则控制器150可以控制输出端110输出用于输入用户偏好信息的UI屏幕,并且控制第二通信器140向第二服务器300发送通过UI屏幕输入的用户账户信息。在这里,预置事件可以包括输入用于打开电源或者输入用户账户的额外用户命令。
当输入用户账户信息时,控制器150可以控制第二通信器140向第二服务器300发送与用户观看的内容有关的多种类型信息。
例如,每当输入开机命令和频道改变命令时,控制器150都可以基于EPG信息来确定通过选择的频道提供的内容,并且向第二服务器300发送与以下各项中的至少一项有关的信息:输入开机命令和频道改变命令的时间、所确定的内容的标题和流派、提供相应内容的频道号和频道名称、以及内容的演员和制片人。每当输入端子改变命令被输入时,控制器150可以确定从选择的输入端子接收的内容,并且向第二服务器300发送与以下各项有关的信息:输入端子改变命令被输入的时间、确定的内容的标题、流派、演员和制片人。
因此,第二服务器300可以使用从显示装置100接收的信息,根据每一个用户账户信息来存储用户偏好信息。具体地,第二服务器300可以使用接收的信息来确定用户已经观看至少预置次数的内容作为具有高观看频率的内容,并且确定用户已经在预置时间内观看的频道作为用户最近观看的频道,以存储用户偏好信息。如果从显示装置100接收到用户账户信息,则第二服务器300可以向显示装置100发送与用户账户信息相对应的用户偏好信息。
第二服务器300可以另外向显示装置100发送用于使用与搜索的内容有关的信息和用户偏好信息来产生和输出推荐列表的控制命令。
因此,控制器150可以通过使用与内容有关的信息和用户偏好信息来产生内容推荐列表,形成UI屏幕,并且通过UI屏幕输出推荐列表。
在这里,用户偏好信息可以包括与用户频繁观看的内容的流派和用户最近观看的频道有关的信息。
因此,控制器150可以产生推荐列表,使得推荐列表包括具有与搜索的内容中用户频繁观看的内容相同的流派的内容。控制器150可以产生推荐列表,使得推荐列表包括搜索的内容中通过用户最近观看的频道提供的内容。
在该情况下,控制器150可以将与搜索的内容有关的多种类型的信息添加至推荐列表。例如,控制器150可以产生推荐列表,使得推荐列表包括以下各项中的至少一项:内容标题、缩略图、广播时间、流派、演员和制片人以及广播内容的频道号和频道名称。
在上述示例性实施例中,第二服务器300向显示装置100发送用户偏好信息,但是这仅是示例。备选地,第二服务器300可以不向显示装置100发送用户偏好信息。
在该情况下,显示装置100可以根据每一个用户的账户信息来预先存储用户偏好信息。
换言之,如果输入用户账户信息,则控制器150可以确定与输入的账户信息相对应的用户偏好信息,并且使用所确定的用户偏好信息和与内容有关的信息来产生推荐列表,其中,信息是从第二服务器300接收的。
在上述示例性实施例中,第二服务器300根据话语意图向显示装置100发送与搜索的内容有关的信息,但是这仅是示例。换言之,第二服务器300可以向显示装置100发送用于基于用户偏好信息搜索特定内容并且输出搜索的内容的控制命令。
例如,第二服务器300可以向显示装置发送控制命令,所述控制命令用于在考虑用户偏好信息的情况下搜索具有与根据话语意图搜索的内容相同的标题的内容并且输出搜索的内容。在该情况下,控制器150可以通过EPG信息等搜索内容,并且产生推荐列表,使得推荐列表包括流派与搜索的内容中具有高观看频率的内容流派相同的内容或者通过用户最近观看的频道提供的内容。
图3是示出了图2的显示装置100的详细结构的框图。参照图3,除了图2的元件以外,显示装置100还包括存储设备160、接收机170、信号处理器180、遥控信号接收机191、输入端193和接口195。图3的显示装置100的元件可以由控制器150来控制。图3中与图2的元件相同的元件执行相同的功能,并且省略其详细描述。
存储设备160是存储对于操作显示装置100必需的多种类型程序的存储介质,并且可以实现为存储器、硬盘驱动器(HDD)等。例如,存储设备160可以包括存储用于执行控制器150的操作的程序的ROM、临时存储根据控制器150的操作的执行所获取的数据的RAM等。存储设备160还可以包括存储多种类型参考数据的电可擦除可编程ROM(EEPROM)。
具体地,存储设备160可以根据每一个用户的账户信息存储用户偏好信息。在这里,用户偏好信息可以包括与用户频繁观看的内容的流派和用户最近观看的频道有关的信息。
例如,每当输入开机命令和频道改变命令时,控制器150均可以基于EPG信息来确定通过接收机170从所选频道提供的内容。此外,控制器150可以在存储设备160中存储与以下各项中的至少一项有关的信息:输入开机命令和频道改变命令的时间、确定的内容的标题和流派、以及提供相应内容的频道号和频道名称。每当输入端子改变命令被输入时,控制器150可以确定通过接口195从选择的输入端子接收的内容,并且在存储设备160中存储与以下各项中的至少一项有关的内容:输入端子改变命令被输入的时间、确定的内容的标题和流派以及提供相应内容的频道号和频道名称。
存储设备160可以存储收视率信息。例如,控制器150可以通过web搜索来搜索与内容有关的收视率信息,并且在存储设备160中存储搜索的收视率信息。
接收机170接收多种类型的内容。具体地,接收机170可以从使用广播网络发送广播节目的广播站或者使用互联网发送内容文件的web服务器接收内容。
根据示例性实施例,如果从广播站接收内容,则接收机170可以实现为包括诸如调谐器(未示出)、解调器(未示出)、均衡器(未示出)等元件。如果从诸如web服务器等的源接收内容,则接收机170可以实现为网络接口卡(未示出)。
如上所述,接收机170可以根据示例性实施例实现为多种类型的接收机。
信号处理器180对内容进行信号处理以通过输出端110输出内容,其中,内容是通过接收机170或接口195接收的。
具体地,信号处理器180可以对包含在内容中的图像执行诸如解码、缩放、帧率转换等操作,以将图像转换为可以从显示器111输出的形式。信号处理器180还可以对包含在内容中的音频信号执行诸如解码等信号处理,以将音频信号转换为可以从音频输出端112输出的形式。
遥控信号接收机191从外部遥控器接收遥控信号。控制器150可以基于输入到遥控接收机191中的遥控信号来执行多种操作。例如,控制器150可以根据从遥控信号接收机191输入的遥控信号来执行诸如开机/关机、频道改变、音量控制等操作。
输入端193接收多种类型的用户命令。控制器150可以执行与从输入端193输入的用户命令相对应的操作。例如,控制器150可以根据从输入端193输入的用户命令来执行开机/关机、频道改变、音量控制等。
为此目的,输入端193可以实现为输入面板。输入面板可以是触摸板,包括多种类型功能键、数字键、特殊键、字母键等的键盘,或者触摸屏。
接口195与外部装置(未示出)进行通信。在这里,外部装置可以实现为多种类型的电子装置,向显示装置100发送内容。
例如,如果显示装置100实现为TV,则外部装置可以实现为连接到显示装置100以执行功能的多种类型电子装置,诸如机顶盒、音响系统、游戏机、DVD播放器、蓝光盘(BD)等。
例如,接口195可以根据多种类型的有线通信方法(例如,高清多媒体接口(HDMI)、USB等)或者无线通信方法(例如,蓝牙、Zigbee等)与外部装置进行通信。例如,接口195可以包括分别与通信方法相对应的芯片和输入端口。例如,如果接口195根据HDMI通信方法与外部装置进行通信,则接口195可以包括HDMI端口。
如果确定外部装置连接到接口195,则控制器150可以控制接口195请求外部装置发送存储在外部装置中的内容列表,以从外部装置接收内容列表和多种类型的信息。在该情况下,控制器150可以控制第二通信器140向第二服务器300发送内容列表和多种类型的信息。
图4是示出了图1的第一服务器200的框图。参照图4,第一服务器200包括通信器210和控制器220。
通信器210与显示装置100进行通信。具体地,通信器210可以从显示装置100接收用户语音,并且向显示装置100发送与用户语音相对应的文本信息。为此目的,通信器210可以包括多种类型的通信模块。
控制器220控制第一服务器200的整体操作。具体地,如果从显示装置100接收到用户语音,则控制器220控制通信器210产生与用户语音相对应的文本信息,并且向显示装置100发送文本信息。
具体地,控制器220可以通过使用语音到文本(STT)引擎来产生与用户语音相对应的文本信息。在这里,STT引擎是使用相关技术中公开的多种类型的STT算法将语音信号转换为文本的模块。
例如,控制器220根据接收的用户语音来检测用户发出的语音的起始和结束,以确定语音部分。具体地,控制器220可以计算接收的语音信号的能量,并且根据计算出的能量对语音信号的能量水平进行分类,以通过动态规划(dynamic programming)检测语音部分。控制器220可以基于声学模型检测音素作为检测到的语音部分中的最小语音单元以产生音素数据,并且向音素数据应用隐马尔可夫模型(HMM)概率模型以将用户语音转换为文本。
图5是示出了图1的第二服务器300的框图。参照图5,第二服务器300包括通信器310、存储设备320和控制器330。
通信器310与显示装置100进行通信。具体地,通信器310可以从显示装置100接收文本信息,并且向显示装置100发送与文本信息相对应的响应信息。为此目的,通信器310可以包括多种类型的通信模块。
通信器310可以连接到web服务器(未示出)以执行web浏览。换言之,控制器330可以通过通信器310向web服务器发送多种关键词以执行web搜索,并且接收web搜索结果。
为此目的,存储设备320可以预先存储用于web搜索的多种类型的关键词,或者控制器330可以从从显示装置100接收的文本信息中提取关键词。
例如,从显示装置100接收的文本可以是“推荐○○○(演员名字)出现的广播节目”。在该情况下,控制器330可以从相应文本中提取“○○○(演员名字)”和“广播节目”作为关键词,并且通过提取的关键词执行web搜索以从web服务器接收与○○○(演员名字)出现的广播节目有关的收视率信息。
存储设备320存储用于产生与从显示装置100接收的文本信息相对应的响应信息的多种类型的信息。
具体地,存储设备320存储每一个服务域的对话模式。在这里,可以根据用户发出的语音所属的主题将服务域分类为“广播”、“VOD”、“应用管理”、“装置控制”、“信息(天气、股票、新闻等)等”。然而,这仅是示例,并且可以根据除了上述主题以外的多种主题来对服务域进行分类。
更具体地,存储设备320可以包括根据服务域的语料(corpus)数据库(DB)。在这里,语料DB可以实现为存储例句和对例句的答复的类型。
换言之,存储设备320可以根据每一个服务域存储多个例句和对例句的答复。存储设备320可以为例句标记和存储用于解释例句的信息和对例句的答复。
例如,例句“何时将广播○○○(广播节目名称)?”可以存储在广播服务域中。
在该情况下,存储设备320可以为相应的例句标记用于解释例句“何时将广播○○○(广播节目名称)?”的信息,并且存储该信息。具体地,存储设备320可以为相应的例句标记信息,并存储该信息,该信息指示在例句“何时将广播○○○(广播节目名称)?”中,“○○○(广播节目名称)”指示广播节目、“何时”指示询问广播时间、以及“广播?”指示问句。存储设备320可以为相应的例句标记信息并且存储该信息,该信息指示与广播节目有关的词被置于具有形式“何时将广播“○○○”?”的例句的前部。在这里,与广播节目有关的词可以包括广播节目名称、演员、制片人等。
存储设备320可以为相应的例句标记针对例句“何时将广播○○○(广播节目名称)?”的答复,并且存储该答复。具体地,存储设备320可以标记和存储“(询问的广播节目名称)的广播时间是○点钟”作为针对“何时将广播○○○(广播节目名称)?”的答复。
根据另一个示例性实施例,例句“打开频道○(频道号)”可以存储在广播服务域中。
在该情况下,存储设备320可以为相应的例句标记用于解释例句“请打开频道○(频道号)”的信息,并且存储该信息。具体地,存储设备320可以为相应的例句标记信息并且存储该信息,该信息指示在例句“请打开频道○(频道号)”中,“频道○(频道号)”指示频道号,“打开”指示频道选择命令,和“请”指示请求句。存储设备320可以为相应的例句标记信息并且存储该信息,该信息指示与广播节目有关的词被置于具有形式“请打开~”的例句的前部。在这里,与广播节目有关的词可以是频道号、频道名称、广播节目名称、演员、制片人等。
存储设备320可以为相应的例句标记针对例句“请打开频道○(频道号)”的答复,并且存储该答复。具体地,存储设备320可以标记“频道已经改变到频道号”作为针对例句“请打开频道○(频道号)”的答复,并且存储该答复。
存储设备320可以为每一个例句标记用于控制显示装置100的控制命令,并且存储控制命令。具体地,存储设备320可以为与用于控制显示装置100的用户语音相对应的例句标记用于控制显示装置100的控制命令,并且存储该控制命令。例如,存储设备320可以为例句“请打开频道○(频道号)”标记用于将显示装置100的频道改变到频道号○的控制命令,并且存储该控制命令。在这里,控制命令可以是具有脚本格式的系统命令。
如上所述,存储设备320可以存储例句和对该例句的答复。然而,上文所描述的例句和对该例句的答复仅是示例。因此,存储设备320可以根据服务域存储多种类型的例句和对例句的答复。
控制器330可以控制第二服务器300的整体操作。具体地,如果从显示装置100接收到与用户语音相对应的文本信息,则控制器330可以控制通信器310产生与接收的文本信息相对应的响应信息,并且通过通信器310向显示装置100发送产生的响应信息。
具体地,控制器330可以控制通信器310分析文本信息从而确定包含在用户语音中的话语意图,产生与确定的话语意图相对应的响应信息,并且向显示装置100发送响应信息。
为此目的,控制器330可以检测存储有与接收的文本信息相匹配的对话模式的语料DB,以确定用户语音所属的服务域。
具体地,控制器330可以将接收的文本信息与分别存储在服务域中的例句进行比较,并且确定与接收的文本信息相匹配的例句所属的服务域作为用户语音所属的服务域。
例如,如果从显示装置100接收到文本“何时将广播○○○(广播节目名称)?”或者“请打开频道○(频道号)”,则控制器320可以确定显示装置100收集的用户语音属于广播服务域。
如果与接收的文本信息相匹配的例句不存在,则控制器330可以统计地确定用户语音所属的域。
例如,显示装置100可以收集用户语音“请打开频道○(频道号)”,并且向第二服务器300发送收集的用户语音的文本。在该情况下,控制器330可以使用诸如HMM、条件随机场(CRF)、支持向量机(SVM)等分类模型来确定用户语音在统计上与“请打开频道○(频道号)”类似,并且确定“请打开频道○(频道号)”属于广播服务域。
控制器330可以存储已经被确定为在统计上与预先存储的例句相类似的文本信息。在该情况下,控制器330可以存储文本信息作为在统计上类似的例句被确定所属的服务域的另一例句。控制器330可以为新存储的例句标记用于解释新存储的例句的信息和对新存储的例句的答复,并且参考预先存储的例句存储该信息和答复。
例如,可以将“请打开频道○(频道号)”作为新的例句进行存储。
在该情况下,控制器330可以为相应的例句标记用于参考“打开频道○(频道号)”解释诸如“请打开频道○(频道号)”等例句的信息,并且存储该信息。具体地,控制器330可以为相应的例句标记信息并且存储该信息,该信息指示例句“请打开频道○(频道号)”中,“频道○(频道号)”指示频道号,“打开”指示频道选择命令,以及“请”指示例句的类型为请求句。存储设备320可以为相应的例句标记指示了与广播节目有关的词被置于具有形式“请打开~”的例句的前部的信息,并且存储该信息。在这里,与广播节目有关的词可以是频道号、频道名称、广播节目名称、演员、制片人等。
存储设备320可以为相应的例句标记对“请打开频道○(频道号)”的答复,并且存储该答复。具体地,存储设备320可以标记和存储“频道已经改变到频道号○”作为对“请打开频道○(频道号)”的答复。
如果与从显示装置100接收的文本信息相匹配的多个例句存在并且属于不同的服务域,则控制器330可以统计地分析多个例句以确定用户语音所属的服务域。
具体地,控制器330可以基于构成从显示装置100接收的文本信息的词(词素)存在于每一个服务域中的频率将权重添加至该词,并且在考虑添加的权重的情况下确定用户语音所属的服务域。
例如,当例句“打开○○○(广播节目名称)”被存储在广播服务域和VOD服务域中时,可以从显示装置100接收到文本“请打开○○○(广播节目名称)”。
在该情况下,控制器330可以确定与“请打开○○○(广播节目名称)”相匹配的例句存在于广播服务域和VOD服务域中,并且可以基于构成“请打开○○○(广播节目名称)”的词“打开”和“请”存在于广播服务域和VOD服务域中的每一个中的频率,在广播服务域和VOD服务域中的每一个中将权重添加至词“打开”和“请”。
例如,控制器330可以计算在广播服务域中存储的所有例句中包括“打开”的例句在广播服务域中占有的比例作为“打开”在广播服务域中的权重。此外,控制器330可以计算在广播服务域中存储的所有例句中包括“请”的示例中句子在广播服务域中占有的比例作为“请”在广播服务域中的权重。
根据与上述方法相同的方法,控制器330可以计算在VOD服务域中存储的所有例句中包括“打开”的例句在VOD服务域中占有的比例作为“打开”在VOD服务域中的权重。此外,控制器330可以计算在VOD服务域中存储的所有例句中包括“请”的例句在VOD服务域中占有的比例作为“请”在VOD服务域中的权重。
控制器330可以计算添加至每一个词的权重,以确定用户语音所属的服务域。在上述示例中,控制器330可以将通过将在广播服务域中分别添加至“打开”和“请”的权重相乘而获取的结果与通过将在VOD服务域中分别添加至“打开”和“请”的权重相乘而获取的结果进行比较,确定用户语音属于具有更高结果值的广播服务域或VOD服务域。
换言之,如果基于在广播服务域中添加的权重计算出的结果值高于基于在VOD服务域中添加的权重计算出的结果值,则控制器330可以确定“请打开○○○(广播节目名称)”属于广播服务域。如果基于在VOD服务域中添加的权重计算出的结果值高于基于在广播服务域中添加的权重计算出的结果值,则控制器330可以确定“请打开○○○(广播节目名称)”属于VOD服务域。
然而,这仅是示例,并且控制器330可以通过使用多种方法统计地确定用户语音所属的服务域。
控制器330可以基于用户语音所属的服务域从用户语音中提取对话动作、主动作和组成空位(component slot)(或实体名称)。
在这里,对话动作是与句子形式有关的分类标准,指示了相应句子是陈述句、请求句或问句。
主动作是指语义信息,通过具体域中的对话指示了相应的话语表示期望的动作。例如,在广播服务域中,主动作可以包括打开/关闭TV、广播节目搜索、广播节目时间搜索、广播节目预留等。举另一个例子,在装置控制域中,主动作可以包括打开/关闭装置、播放、暂停等。
组成空位是指与具体域有关的指示了话语的实体信息,即,被添加以详细地具体化期望动作的意义的信息。例如,在广播服务域中,组成空位可以包括流派、广播节目名称、广播时间、频道号、频道名称、演员、制片人等。在装置控制服务域中,组成空位可以包括外部装置名称、制造商等。
控制器330可以使用对话动作、主动作和组成空位来确定包含在用户语音中的话语意图,产生与确定的话语意图相对应的响应信息,并且向显示装置100发送响应信息。
在这里,响应信息可以指示以文本的形式来表达从显示装置100输出的系统响应。因此,显示装置100可以基于响应信息输出与用户语音相对应的系统响应。
为此目的,控制器330可以从存储设备320中提取对确定的话语意图的答复,将提取的答复转换为文本,并且向显示装置100发送文本。
响应信息可以包括用于执行与用户语音相对应的功能的控制命令。在这里,控制命令可以包括用于控制显示装置100执行与用户语音相对应的功能的控制命令。
为此目的,控制器330可以产生与确定的话语意图相对应的控制命令,并且向显示装置100发送产生的控制命令。
现在将描述通过控制器产生与用户语音相对应的响应信息的详细方法。
控制器330可以使用与用户语音相匹配的例句或者为已经被确定为在统计上类似于用户语音的例句标记的信息,来从用户语音中提取对话动作、主动作和组成空位,产生与用户语音相对应的响应信息,并且向显示装置100发送响应信息。
例如,可以从显示装置100接收文本“何时将广播○○○(广播节目名称)?”。
在该情况下,控制器330可以确定接收的文本属于广播服务域,使用为广播服务域中的与接收的文本相匹配的例句“何时将广播○○○(广播节目名称)?”标记的信息从用户语音中提取对话动作、主动作和组成空位,并且产生与接收的文本有关的响应信息。
换言之,为存储在广播服务域中的例句“何时将广播○○○(广播节目名称)?”标记用于解释例句的信息,该信息指示“○○○(广播节目名称)”指示广播节目、“何时”指示广播时间询问、以及“广播?”指示例句的类型是问句。
因此,参考这些类型的信息,控制器330可以确定从显示装置接收的文本“何时将广播○○○(广播节目名称)?”的对话动作是问句,主动作是广播时间询问,并且组成空位是“○○○(广播节目名称)”。因此,控制器330可以确定用户的话语意图是询问“○○○”的广播时间。
控制器330可以搜索存储设备320以得到为存储在广播服务域中的例句“何时将广播○○○(广播节目名称)?”标记的答复,并且使用标记的答复来产生响应信息。
换言之,控制器330搜索为存储在广播服务域中的例句“何时将广播○○○(广播节目名称)?”标记的答复“询问的广播节目的广播时间是○点钟”作为对用户语音的答复。
在该情况下,控制器330可以完成搜索的答复中包含的空白以产生完整的句子。
例如,控制器330可以在答复“询问的广播节目的广播时间是○点钟”的空白(广播节目名称)中写入广播节目名称“○○○(广播节目名称)”。控制器330可以通过EPG信息来搜索“○○○(广播节目名称)”的广播时间,并且在另一空白(广播时间)中写入搜索的广播时间。因此,控制器330可以将完整句“询问的广播节目的广播时间是周六7点钟”表达为文本形式,以产生响应信息并且向显示装置100发送产生的响应信息。
因此,显示装置100可以将“询问的广播节目的广播时间是周六7点钟”作为语音和UI屏幕中的至少一个进行输出。
根据另一示例性实施例,可以从显示装置100接收文本“请打开频道○(频道号)”。
在该情况下,控制器330可以确定接收的文本属于广播服务域,使用为广播服务域中与接收的文本相匹配的例句“请打开频道○(频道号)”标记的信息来提取对话动作、主动作和组成空位,并且产生针对接收的文本的响应信息。
换言之,为存储在广播服务域中的例句“请打开频道○(频道号)”标记指示了“频道○(频道号)”表示频道号、“打开”表示广播选择命令、“请”表示例句类型为请求句的信息,作为用于解释例句的信息。因此,控制器330可以参考这些类型的信息来确定从显示装置100接收的文本“请打开频道○(频道号)”的对话是请求句、主动作是广播选择命令、并且组成空位是频道○(频道号)。因此,控制器330可以确定用户的话语意图是请求选择广播频道○。
控制器330可以搜索存储设备320以得到为存储在广播服务域中的例句“请打开频道○(频道号)”标记的答复,并且使用标记的答复产生响应信息。
换言之,控制器330搜索为存储在广播服务域中的例句“请打开频道○(频道号)”标记的答复“频道已经改变到频道号”,作为对用户语音的答复。
在该情况下,控制器330可以完成搜索的答复中包含的空白以产生完整句。
例如,控制器330可以在答复“频道已经改变到频道号”的空白(频道号)中写入频道号(频道○(频道号))。因此,控制器330可以将完整句“频道已经改变到频道号”表达为文本形式以产生响应信息,并且向显示装置100发送产生的响应信息。
控制器330可以搜索存储设备320以得到为存储在广播服务域中的例句“请打开频道○(频道号)”标记的控制命令,并且向显示装置100发送搜索到的控制命令。换言之,控制器330可以发送用于将显示装置100的频道改变到频道○的控制命令。
因此,显示装置100可以基于从第二服务器300接收的响应信息将频道改变到频道○,并且将系统响应“频道已经改变到频道○”作为语音和UI屏幕中的至少一个进行输出。
在上述示例中,控制器330产生用于基于为例句标记的控制命令来执行显示装置100的功能的控制命令。然而,这仅是示例。
备选地,控制器330可以基于确定的话语意图产生控制命令,并且向显示装置100发送控制命令。例如,如果用户的话语意图被确定为请求选择广播频道○,则控制器330可以产生用于将频道改变到频道○的控制命令,并且向显示装置100发送控制命令。
此外,在上述示例中,控制器330发送用于输出系统响应的信息以及用于执行显示装置100的功能的控制命令。然而,这仅是示例。备选地,控制器330可以根据用户的话语意图向显示装置100仅发送用于执行显示装置100的功能的控制命令。
在该情况下,显示装置100可以不输出额外的系统响应,或者可以使用预先存储在显示装置100中的数据输出系统响应。
控制器330可以使用为已经被确定为在统计上类似于用户语音的例句而标记的信息来从用户语音中提取对话动作、主动作和组成空位,并且产生与用户语音相对应的响应信息。
例如,可以从显示装置100接收文本“何时将广播△△△(广播节目名称)?”。
在该情况下,控制器330可以确定文本“何时将广播△△△(广播节目名称)?”在统计上类似于存储在广播服务域中的例句“何时将广播○○○(广播节目名称)?”。因此,控制器330可以使用为存储在广播服务域中的例句“何时将广播○○○(广播节目名称)?”标记的信息,来从用户语音中提取对话动作、主动作和组成空位,并且产生与用户语音相对应的响应信息。
换言之,为存储在广播服务域中的例句“何时将广播○○○(广播节目名称)?”标记指示了与广播节目有关的词被置于“何时将广播~”的前部并且用于解释例句的信息。因此,控制器330可以在作为与广播节目有关的词的广播节目名称、演员、制片人等中确定词“△△△(广播节目名称)”具有的意义。
为此目的,存储设备320可以包括存储与每一个服务域中的每一个元素有关的信息的实体名称词典或TIMEX词典。
换言之,控制器330可以参考实体名称词典或TIMEX词典来确定“△△△(广播节目名称)”是指示广播节目名称的词。
然而,这仅是示例,并且控制器330可以通过使用EPG信息等或者通过使用预先存储的例句和CRF来确定“△△△(广播节目名称)”具有的意义。
因此,控制器330可以确定从显示装置100接收的文本“何时将广播△△△(广播节目名称)?”的对话动作是问句,其主动作是广播时间,并且其组成空位是△△△(广播节目名称)。此外,控制器330可以确定包含在用户语音中的话语意图是询问△△△的广播时间。
控制器330可以通过使用为存储在广播服务域中的例句“何时将广播○○○(广播节目名称)?”标记的答复来产生针对文本“何时将广播△△△(广播节目名称)?”的响应信息,并且向显示装置100发送产生的响应信息。
换言之,控制器330搜索为存储在广播服务域中的例句“何时将广播○○○(广播节目名称)?”标记的答复“(询问的广播节目名称)的广播时间是○点钟”作为对用户语音的答复。控制器330可以将完整句“询问的△△△(广播节目名称)的广播时间是周三11点钟”表达为文本形式以产生响应信息,并且向显示装置100发送产生的响应信息。
如果显示装置100预先存储构成系统响应的数据,则控制器330可以向显示装置100发送用于将相应数据作为系统响应进行输出的控制命令。
如果显示装置100预先存储构成系统响应的数据中的一些,则控制器330可以向显示装置100仅发送用于输出完整的系统响应的信息。
例如,如果显示装置100预先存储答复“(询问的广播节目名称)的广播时间是○点钟”,则控制器330可以控制通信器310向显示装置100发送与用户询问的广播节目名称和广播时间有关的信息,从而形成作为完整句存储在显示装置中的答复。在该情况下,控制器330可以向显示装置100发送用于输出在显示装置100中预先存储的答复的额外控制命令。
因此,显示装置100可以在预先存储的答复中写入从第二服务器300接收的信息,以将“询问的广播节目名称的广播时间是周六7点钟”作为系统响应进行输出。
在上述示例性实施例中,控制器330通过使用为例句标记的信息来提取对话动作、主动作和组成空位。然而,这仅是示例。备选地,控制器330可以通过使用最大熵分类器(MaxEnt)从用户语音中提取对话动作和主动作,并且通过使用CRF提取组成空位。
然而,示例性实施例不限于此,控制器330可以通过使用多种已知的方法来从用户语音中提取对话动作、主动作和组成空位。
如果未确定包含在当前接收的用户语音中的用户的话语意图,则控制器330可以参考先前接收的用户语音来确定包含在当前接收的用户语音中的用户的话语意图。
具体地,如果基于先前接收的用户语音所属的服务域未确定当前接收的用户语音中包含的用户的话语意图,则控制器330可以参考先前接收的用户语音来确定包含在当前接收的用户语音中的用户的话语意图。
换言之,控制器330可以将当前接收的用户语音与存储在语料DB中的对话模式进行比较,以确定当前接收的用户语音是否与对话模式中的用户的最初话语相对应。如果确定当前接收的用户语音未与用户的最初话语相对应,则控制器330可以参考先前接收的用户语音来确定包含在当前接收的用户语音中的话语意图。
例如,存储设备320可以分级地在每一个服务域中存储每一个例句。换言之,存储设备320可以将与用户最初发出的语音相匹配的例句作为每一个域中的最高层进行存储,并且分级地存储与用户可能在稍后发出的语音相匹配的例句。
例如,可以输入用户语音“何时将广播○○○(广播节目名称)?”,然后可以输入用户语音“何时将对其进行广播?”。在该情况下,如果确定用户语音“何时将对其进行广播?”未与广播服务域中的用户的最初话语相对应,则控制器330可以基于先前接收的用户语音“何时将广播○○○(广播节目名称)?”来确定“何时将对其进行广播?”的话语意图。
换言之,控制器330可以将“何时将对其进行广播?”的话语意图确定为使用包含在先前接收的用户语音中的○○○(广播节目名称)询问○○○的节目开始时间,以确定不可能从其提取组成空位的用户语音“何时将对其进行广播?”的话语意图。
如上所述,第二服务器300可以产生与用户的话语意图相对应的响应信息,并且向显示装置100发送响应信息。此外,显示装置100可以基于从第二服务器300接收的响应信息来执行与用户语音相对应的功能,或者可以输出与用户语音相对应的系统响应。
显示装置100可以根据用户语音是包括搜索内容的话语意图还是被推荐内容的话语意图来输出不同的系统响应。
为此目的,第二服务器300可以根据文本信息包括具有搜索内容的意图的关键词还是具有推荐内容的意图的关键词,来产生不同类型的响应信息,并且向显示装置100发送不同类型的响应信息。
换言之,存储设备320可以将用于确定用户希望搜索内容还是被推荐内容的信息作为用于解释例句的信息进行存储。
例如,例句“请搜索○○○(演员的名字)出现的广播节目”可以存储在广播服务域中。
在该情况下,存储设备320可以为相应的例句标记用于解释例句“请搜索○○○(演员的名字)出现的广播节目”的信息,并且存储该信息。具体地,存储设备320可以为相应的例句标记信息并存储该信息,该信息指示了例句“请搜索○○○(演员的名字)出现的广播节目”中,○○○(演员的名字)指示演员的名字,“出现”和“搜索广播节目”指示询问演员出现的广播节目,“搜索”指示用户的话语意图是搜索内容,并且“请”指示例句的类型是请求句。
在上述示例性实施例中,存储设备320存储指示了例句“请搜索○○○(演员的名字)出现的广播节目”中的用户话语意图“搜索”与内容搜索相对应的信息。然而,这仅是示例。备选地,存储设备320可以存储指示了例句“请搜索○○○(演员的名字)出现的广播节目”中的用户话语意图“搜索”与内容搜索相对应的信息以及指示了例句“请让我知道○○○(演员的名字)出现的广播节目”中的用户话语意图“让我知道”与内容搜索相对应的信息。
如上所述,如果例句包括与内容搜索有关的词,则存储设备320可以为每一个例句标记相应信息,并且存储相应信息。
根据另一示例性实施例,可以在广播服务域中存储例句“请推荐○○○出现的广播节目”。
在该情况下,存储设备320可以为相应的例句标记用于解释例句“请推荐○○○出现的广播节目”的信息,并且存储该信息。具体地,存储设备320可以为相应例句标记如下信息并且存储该信息:该信息指示了在例句“请推荐○○○出现的广播节目”中,○○○(演员的名字)指示演员的名字,“出现”和“推荐广播节目”指示询问演员出现的广播节目,“推荐”指示用户的话语是推荐内容,并且“请”指示例句的类型是请求句。
在上述示例性实施例中,存储设备320存储指示了例句“请推荐○○○出现的广播节目”中的用户话语意图“推荐”与内容推荐相对应的信息。然而,这仅是示例。根据另一示例性实施例,存储设备320可以存储指示了例句“在○○○(演员的名字)出现的广播节目中哪一个广播节目是可观看的”中的用户话语意图“可观看”与内容推荐相对应的信息。
如上所述,如果例句包括与内容推荐有关的词,则存储设备320可以为每一个例句标记相应信息,并且存储相应信息。
控制器330可以确定用户语音包括与内容搜索还是内容推荐有关的话语意图,产生与确定的话语意图相对应的响应信息,并且向显示装置100发送响应信息。
具体地,控制器330可以使用为与用户语音相匹配的例句或者已经被确定为在统计上类似于用户语音的例句标记的信息,从用户语音中提取与对话动作、主动作和组成空位有关的信息。此外,控制器330可以使用提取的信息来确定用户语音包括与内容搜索还是内容推荐有关的话语意图。
控制器330还可以产生与确定的用户话语意图相对应的响应信息,并且向显示装置100发送产生的响应信息。
具体地,如果用户的话语意图与内容搜索有关,则控制器330搜索与话语意图相匹配的内容。
在该情况下,控制器330可以搜索内容提供商服务器以得到与用户的话语意图相匹配的内容,其中,内容提供商服务器使用EPG信息或者提供VOD服务。
控制器330可以搜索连接到显示装置100的外部装置(未示出)以得到与用户的话语意图相匹配的内容。例如,如果从显示装置100接收到与存储在连接到显示装置100的外部装置中的内容有关的信息,则控制器330可以在存储在外部装置中的内容中搜索与用户的话语意图相匹配的内容。
控制器330可以向显示装置100发送与搜索的内容有关的信息。在这里,与搜索的内容有关的信息可以包括以下各项中的至少一项:内容的标题、缩略图、广播时间、流派、演员、制片人以及广播内容的频道号和频道名称。
在该情况下,控制器330可以向显示装置100发送用于使用与搜索的内容有关的信息来输出内容搜索列表的控制命令。
控制器330可以向显示装置100发送用于搜索具体内容并且输出搜索的内容列表的控制命令。
具体地,控制器330可以根据EPG信息或VOD服务来搜索与用户的话语意图相匹配的内容,或者搜索连接到显示装置100的外部装置以得到与用户的话语意图相匹配的内容。
控制器330可以产生用于搜索具有与搜索内容相同的标题并且通过广播搜索内容的相同频道和相同广播时间而广播的内容的控制命令,并且向显示装置100发送控制命令。
如果用户的话语意图与内容推荐有关,则控制器330可以搜索与话语意图相匹配的内容,并且向显示装置100发送与搜索的内容有关的信息。在这里,与搜索的内容有关的信息可以包括以下各项中的至少一项:内容的标题、缩略图、流派、演员、制片人以及广播内容的频道号和频道名称。
甚至在该情况下,控制器330可以根据EPG信息或VOD服务来搜索与用户的话语意图相匹配的内容。控制器330可以搜索连接到显示装置100的外部装置以得到与用户的话语意图相匹配的内容。
在这里,控制器330可以向显示装置100发送与搜索的内容有关的收视率信息。
为此目的,控制器330可以使用多种类型的关键词来执行web搜索以获取收视率信息。例如,控制器330可以提取搜索内容的标题、广播时间等作为关键词,并且向web服务器(未示出)发送提取的关键词,以从web服务器接收与搜索内容有关的收视率信息。
控制器330可以控制通信器310以向显示装置100发送用户偏好信息。为此目的,存储设备320可以根据每一个用户账户预先存储用户偏好信息。控制器330可以在存储设备320中存储的用户偏好信息之中确定与从显示装置100接收的用户账户信息相匹配的用户偏好信息,并且向显示装置100发送确定的用户偏好信息。
现在将描述控制器330根据用户的话语意图是与内容搜索还是内容推荐有关而执行的操作。
可以从显示装置100接收“请搜索○○○(演员的名字)出现的广播节目”。
在该情况下,控制器330可以确定接收的文本属于广播服务域,使用为广播服务域中与接收的文本相匹配的例句“请搜索○○○(演员的名字)出现的广播节目”而标记的信息来确定用户的话语意图,并且产生针对接收的文本的响应信息。
换言之,为存储在广播服务域中的例句“请搜索○○○(演员的名字)出现的广播节目”标记用于解释例句的信息,该信息指示了○○○(演员的名字)指示演员的名字,“出现”和“搜索广播节目”指示询问演员出现的广播节目,“搜索”指示用户的话语意图是内容搜索,以及“请”指示例句的类型是请求句。
因此,控制器330可以参考这些类型的信息来确定从显示装置100接收的文本“请搜索○○○(演员的名字)出现的广播节目”的对话动作是请求句、接收的文本的主动作是询问演员出现的广播节目、并且接收的文本的组成空位是○○○(演员的名字)。在这里,控制器330可以完成包含在用于解释例句的信息中的空白。换言之,控制器330可以确定对演员出现的广播节目的询问中的空白(演员)是被确定为组成空位的○○○(演员的名字)。
因此,控制器330可以确定包含在“请搜索○○○(演员的名字)出现的广播节目”中的○○○(演员的名字)的话语意图是请求○○○(演员的名字)出现的广播节目。
控制器330可以基于用于解释例句的信息来确定用户的话语意图与内容搜索还是内容推荐有关。
在上述示例性实施例中,为例句“请搜索○○○(演员的名字)出现的广播节目”标记指示了话语意图与内容搜索相对应的信息。因此,控制器330可以确定用户语音“请搜索○○○(演员的名字)出现的广播节目”包括搜索内容的话语意图。
因此,控制器330可以确定用户语音“请搜索○○○(演员的名字)出现的广播节目”与内容搜索有关,并且包括请求○○○(演员的名字)出现的广播节目的话语意图。
控制器330基于确定的话语意图来产生响应信息。在上述示例性实施例中,控制器330可以参考EPG信息来搜索○○○(演员的名字)出现的广播节目,并且搜索与搜索的广播节目有关的信息(例如,以下各项中的至少一项:广播节目的标题、缩略图、流派、演员和制片人、以及广播内容的频道号和频道名称)。控制器330还可以将与搜索的广播节目有关的信息作为响应信息向显示装置100进行发送。
根据另一示例性实施例,可以从显示装置100接收“请推荐○○○(演员的名字)出现的广播节目”。
在该情况下,控制器330可以确定接收的文本属于广播服务域,通过使用为广播服务域中的与接收的文本相匹配的例句“请推荐○○○(演员的名字)出现的广播节目”标记的信息来确定用户的话语意图,并且产生与接收的文本相对应的响应信息。
换言之,为例句“请推荐○○○(演员的名字)出现的广播节目”标记用于解释该例句的信息,并且该信息指示了○○○(演员的名字)指示演员的名字,“出现”和“搜索广播节目”指示询问演员出现的广播节目,“推荐”指示用户的话语意图是内容推荐,以及“请”指示例句的类型是请求句。
因此,控制器330可以参考这些类型的信息来确定从显示装置100接收的文本“请推荐○○○(演员的名字)出现的广播节目”的对话动作是请求句、接收的文本的主动作是询问○○○出现的广播节目、并且接收的文本的组成空位是○○○(演员的名字)。在这里,控制器330可以完成用于解释例句的信息中包含的空白。换言之,控制器330可以确定空白(演员的名字)被确定为对演员出现的广播节目的询问中的组成空位。
因此,控制器330可以确定“请推荐○○○(演员的名字)出现的广播节目”的话语意图是请求○○○(演员的名字)出现的广播节目。
控制器330可以基于用于解释例句的信息来确定用户的话语意图与内容搜索还是内容推荐有关。
在上述示例性实施例中,为例句“请推荐○○○(演员的名字)出现的广播节目”标记指示了话语意图与内容推荐相对应的信息。因此,控制器330可以确定用户语音“请推荐○○○(演员的名字)出现的广播节目”包括推荐内容的话语意图。
因此,控制器330可以确定用户语音“请推荐○○○(演员的名字)出现的广播节目”与内容推荐有关,并且包括请求○○○(演员的名字)出现的广播节目的话语意图。
控制器330基于确定的话语意图来产生响应信息。在上述示例性实施例中,控制器330可以参考EPG信息来搜索○○○(演员的名字)出现的广播节目,并且搜索与搜索的广播节目有关的信息(例如,以下各项中的至少一项:广播节目的标题、缩略图、广播时间、流派、演员和制片人以及广播内容的频道号和频道名称)。
控制器可以执行web搜索以得到搜索的广播节目的收视率信息。控制器330可以确定与用户账户信息相匹配的用户偏好信息。
因此,控制器330可以将与搜索的广播节目有关的信息和搜索的广播节目的收视率信息作为响应信息向显示装置100进行发送。备选地,控制器330可以将与搜索的广播节目有关的信息和用户偏好信息作为响应信息向显示装置100进行发送。
因此,显示装置100可以根据包含在用户语音中的话语意图与内容搜索还是内容推荐有关来输出不同类型的系统响应。
现在将参照图6至图12C和图2至图5来描述根据各个示例性实施例显示UI屏幕的方法。
如图6中的(a)中所示,用户可以说出“请搜索○○○(演员的名字)出现的广播节目”。
在该情况下,控制器330可以参考EPG信息来搜索○○○(演员的名字)出现的广播节目,并且将与搜索的广播节目有关的信息作为响应信息向显示装置100进行发送。
因此,控制器150可以基于从第二服务器300接收的响应信息来输出与“请搜索○○○(演员的名字)出现的广播节目”相对应的系统响应。
具体地,如图6的(b)中所示,控制器160可以显示根据广播时间顺序列出○○○(演员的名字)出现的广播节目的搜索列表140。在该情况下,控制器150可以向搜索列表410添加以下各项中的至少一项:广播节目名称、广播时间、提供广播节目的频道名称和频道号以及广播节目的演员和制片人。
在这里,控制器150可以控制搜索列表包括预置数量的内容。因此,如果搜索的内容的数量高于通过搜索列表显示的内容的数量,则控制器150可以在搜索列表中显示预置数量的内容,并且根据用户命令改变搜索列表的页面以显示其它内容。为此目的,控制器150可以显示用于选择前一页面和下一页面的GUI。
在上述示例性实施例中,控制器330参考EPG信息来搜索○○○(演员的名字)出现的广播节目,并且向显示装置100发送搜索结果。然而,这仅是示例。
备选地,控制器330可以在EPG信息、VOD服务和连接到显示装置100的外部装置(未示出)中存储的内容之中,搜索与用户的话语意图相匹配的内容,并且向显示装置100发送搜索结果。
例如,如图7的(a)中所示,用户可以说出“请搜索○○○(演员的名字)出现的广播节目”。
在该情况下,控制器330可以在EPG信息、VOD服务和连接到显示装置100的外部装置(未示出)中存储的内容中搜索○○○(演员的名字)出现的广播节目,并且向显示装置100发送搜索结果。
在该情况下,如图7的(b)中所示,控制器150可以对根据服务而分别搜索的内容进行分类以显示搜索列表。
例如,可以根据EPG信息和连接到显示装置100的DVD播放器来搜索○○○(演员的名字)出现的广播节目。在该情况下,控制器150可以在一个屏幕上显示搜索列表510和搜索列表520,其中,搜索列表510包括根据EPG信息搜索的广播节目,搜索列表520包括根据DVD播放器搜索的DVD内容。
如上所述,控制器150可产生和显示根据服务而搜索的其他内容列表。在该情况下,如果搜索的内容的数量高于在每一个搜索列表中显示的内容的数量,则控制器150可以在每一个搜索列表中显示预置数量的内容,并且根据用户命令改变每一个搜索列表的页面以显示其它内容。
如上所述,如果在根据页面改变来显示其它内容的过程中在一个服务中搜索的内容包括还未显示的内容但是包括已经在另一服务中搜索并且显示的所有内容,则控制器150可以移除显示所有搜索的内容的搜索列表并且通过一个搜索列表显示还未显示的内容。
在图7的(a)和(b)的示例性实施例中,根据EPG信息搜索到9个广播节目,并且根据DVD播放器搜索到3个DVD内容。此外,可以在每一个搜索列表的每一个页面中显示两个内容。
在该情况下,控制器150可以分别在相应的搜索列表的第一页面510和520上显示两个广播节目和两个DVD内容,如图7的(b)中所示。
如果输入用于显示下一页面的用户命令,则控制器150可以分别在相应的搜索列表的第二页面530和540上显示在第一页面510和520上还未显示的两个广播节目和一个DVD内容,如图8的(a)中所示。
在这里,控制器150可以确定已经显示了所有搜索的VOD内容。
如上所述,显示所有DVD内容。因此,如果输入用于显示下一页面的用户命令,则控制器150可以移除DVD内容的搜索列表并且显示广播节目的搜索列表550,如图8的(b)中所示。在该情况下,控制器150可以按照通过每一个搜索列表可显示的内容的数量来显示内容。换言之,控制器150可以在一个广播节目的搜索列表550中显示4个广播节目。
根据另一个示例性实施例,如图9的(a)中所示,用户可以说出“请推荐○○○(演员的名字)出现的广播节目”。
在该情况下,控制器330可以参考EPG信息来搜索○○○(演员的名字)出现的广播节目,并且向显示装置100发送与搜索广播节目有关的信息。在这里,控制器330可以向显示装置100发送○○○(演员的名字)出现的广播节目的收视率信息。
因此,如图9的(b)中所示,控制器150可以基于从第二服务器300接收的响应信息来输出与“请推荐○○○(演员的名字)出现的广播节目”相对应的系统响应。
具体地,控制器150可以显示按收视率顺序列出○○○(演员的名字)出现的广播节目的推荐列表。在该情况下,控制器150可以向推荐列表610添加以下各项中的至少一项:广播节目名称、广播时间、提供广播节目的频道名称和频道号、演员、制片人等。
在这里,控制器150可以控制推荐列表610以包括预置数量的内容。因此,如果搜索的内容的数量高于通过推荐列表610显示的内容的数量,则控制器150可以在推荐列表610中显示预置数量的内容,并且根据用户命令改变推荐列表610的页面以显示其它内容。为此目的,控制器150可以显示用于选择前一页面和下一页面的GUI。
根据另一示例性实施例,如图10的(a)中所示,用户可以说出“请推荐○○○(演员的名字)出现的广播节目”。
在该情况下,控制器330可以参考EPG信息来搜索○○○(演员的名字)出现的广播节目,并且向显示装置100发送与搜索的广播节目有关的信息。在这里,控制器330可以向显示装置100发送用户偏好信息。在这里,用户偏好信息可以包括用户频繁观看的广播节目的流派。
因此,如图10的(b)中所示,控制器150可以基于从第二服务器300接收的响应信息来接收与“请推荐○○○(演员的名字)出现的广播节目”相对应的系统响应。
具体地,控制器150可以显示列出了在○○○(演员的名字)出现的广播节目之中流派与高观看频率的广播节目相同的广播节目的推荐列表710。
例如,如果具有高观看频率的广播节目的流派是戏剧,则控制器150可以显示列出了在○○○(演员的名字)出现的广播节目之中具有戏剧流派的广播节目的推荐列表710。在这里,控制器150可以显示包括流派与高观看频率的广播节目相同的广播节目的推荐列表710。在这里,控制器150可以产生用于按照广播时间顺序列出广播节目的推荐列表710。
控制器150可以向推荐列表710添加以下各项中的至少一项:广播节目名称、广播时间、提供广播节目的频道名称和频道号、演员、制片人等。
在这里,控制器150可以控制推荐列表710包括当前数量的内容。因此,如果内容的数量高于通过推荐列表710显示的内容的数量,则控制器150可以在推荐列表710上显示预置数量的内容,并且根据用户命令改变推荐列表710的页面以显示其它内容。为此目的,控制器150可以显示用于选择前一页面和下一页面的GUI。
根据另一示例性实施例,如图11的(a)中所示,用户可以说出“请推荐○○○(演员的名字)出现的广播节目”。
在该情况下,控制器330可以参考EPG信息来搜索○○○(演员的名字)出现的广播节目,并且向显示装置100发送与搜索的广播节目有关的信息。在这里,控制器330可以向显示装置100发送用户偏好信息。在这里,用户偏好信息可以包括与用户最近观看的频道有关的信息。
因此,如图11的(b)中所示,控制器150可以基于从第二服务器300接收的响应信息来输出与“请推荐○○○(演员的名字)出现的广播节目”相对应的系统响应。
具体地,控制器150可以显示包括了○○○(演员的名字)出现的广播节目之中通过用户最近观看的频道提供的广播节目的推荐列表810。
例如,如果用户最近观看的频道是11,则显示装置100可以显示包括了○○○(演员的名字)出现广播节目之中通过频道11提供的广播节目的推荐列表810。在这里,控制器150可以产生用于按照广播时间的顺序列出广播节目的推荐列表810。
控制器150可以向推荐列表810添加以下各项中的至少一项:广播节目名称、广播时间、提供广播节目的频道名称和频道号、演员、制片人等。
在这里,控制器150可以控制推荐列表810包括预置数量的内容。如果搜索的内容的数量高于通过推荐列表810显示的内容的数量,则控制器150可以在推荐列表810上显示预置数量的内容,并且根据用户命令来改变推荐列表810的页面以显示其它内容。为此目的,控制器150可以显示用于选择前一页面和后一页面的GUI。
在图9至图11的上述示例性实施例中,控制器330参考EPG信息来搜索内容。然而,这仅是示例。在图7的上述示例性实施例中,控制器330可以在提供EPG信息和VOD服务的内容提供商服务器和连接到显示装置100的外部装置中存储的内容中搜索与用户的话语意图相匹配的内容,并且向显示装置100发送搜索结果。
在图10至图11的上述示例性实施例中,控制器330使用收视率信息和用户偏好信息中的每一个来产生推荐列表。然而,该仅是示例。
备选地,控制器150可以基于收视率信息产生推荐列表,基于用户偏好信息产生推荐列表,并且在一个屏幕上显示这些推荐列表。此外,控制器150可以在一个屏幕上显示基于用户偏好信息的信息而产生的推荐列表。
例如,用户可以说出“请推荐○○○(演员的名字)出现的广播节目”。
在该情况下,控制器330可以参考EPG信息来搜索○○○(演员的名字)出现的广播节目,并且向显示装置100发送与搜索的广播节目有关的信息。在这里,控制器330可以向显示装置100发送收视率信息和用户偏好信息。
因此,控制器150可以基于从第二服务器300接收的响应信息来输出与“请推荐○○○(演员的名字)出现的广播节目”相对应的系统响应。
具体地,如图12A中所示,控制器150可以在一个屏幕上显示推荐列表910和推荐列表920,其中,推荐列表910按照收视率的顺序列出○○○(演员的名字)出现的广播节目,并且推荐列表920列出具有与用户高度频繁观看的广播节目相同的流派的广播节目。
备选地,如图12B中所示,控制器150可以在一个屏幕上显示推荐列表910和推荐列表930,其中,推荐列表910按照收视率的顺序列出○○○(演员的名字)出现的广播节目,并且推荐列表930列出通过用户最近观看的频道提供的广播节目。
备选地,如图12C中所示,控制器150可以在一个屏幕上显示推荐列表920和推荐列表930,其中,推荐列表920列出具有与高观看频率的广播节目相同流派的广播节目,并且推荐列表930列出通过用户最近观看的频道提供的广播节目。
在这里,控制器150可以进行控制以在推荐列表上包括预置数量的内容。因此,如果搜索的内容的数量高于通过推荐列表显示的内容的预置数量,则控制器150可以在推荐列表上显示预置数量的内容,并且根据用户命令改变推荐列表的页面以显示其它内容。为此目的,控制器150可以显示用于选择前一页面和后一页面的GUI。
如果在根据页面改变来显示其它内容的过程中在一个推荐列表上提供的内容包括还未显示的内容但是包括已经在另一推荐列表上提供并显示的所有内容,则控制器150可以移除显示了所有内容的推荐列表,并且通过其它推荐列表显示还未显示的内容。这可以应用上文参照图8所描述的方法,因此省略其详细描述。
图13是示出了根据示例性实施例控制显示装置的方法的流程图。
在操作S1310中,显示装置100收集用户语音。
在操作S1320中,显示装置100向第一服务器200发送用户语音,并且从第一服务器200接收与用户语音相对应的文本信息。第一服务器200可以使用STT引擎产生与用户语音相对应的文本信息,并且向显示装置100发送文本信息。
在操作S1330中,显示装置100向第二服务器300发送接收的文本信息。在该情况下,第二服务器可以根据文本信息是包括具有搜索内容意图的关键词还是包括具有推荐内容意图的关键词来产生不同类型的响应信息,并且向显示装置100发送不同类型的响应信息。
如果显示装置100从第二服务器200接收到与文本信息相对应的响应信息,则在操作S1340中,显示装置100基于响应信息来输出根据包含在用户语音中的话语意图而有所区别的系统响应。在这里,话语意图可以与内容搜索或内容推荐有关。
如果话语意图与内容搜索有关,则显示装置100可以将根据话语意图搜索的内容的搜索列表作为系统响应进行输出。
为此目的,响应信息可以包括与根据话语意图搜索的内容有关的信息。显示装置100可以基于与内容有关的接收信息来产生内容的搜索列表,并且输出产生的搜索列表。在这里,显示装置100可以产生用于按照广播时间的顺序列出搜索内容的搜索列表。
如果话语意图与内容推荐有关,则显示装置100将基于收视率从根据话语意图搜索的内容中选择的内容的推荐列表作为系统响应进行输出。
为此目的,响应信息可以包括与根据话语意图搜索的内容有关的信息和与收视率有关的信息。因此,显示装置100可以基于接收的信息产生内容的推荐列表并且输出产生的推荐列表。在这里,显示装置100可以基于与收视率有关的信息产生用于按照高收视率的顺序列出搜索内容的推荐列表。
如果话语意图与内容推荐有关,则显示装置100可以将基于用户偏好信息从根据话语意图搜索的内容中选择的内容的推荐列表作为系统响应进行输出。在这里,用户偏好信息可以包括与用户频繁观看的内容的流派和用户最近观看的频道有关的信息。
为此目的,响应信息可以包括与根据用户的话语意图搜索的内容有关的信息和用户偏好信息。因此,显示装置100可以基于接收的信息产生和输出内容的推荐列表。具体地,显示装置100可以产生推荐列表,使得推荐列表包括搜索的内容之中流派与高观看频率的内容相同的内容。显示装置100还可以产生推荐列表,使得推荐列表包括搜索的内容之中通过用户最近观看的频道提供的内容。
根据上文所描述的各个示例性实施例,显示装置100可以输出进一步与用户的话语意图相匹配的系统响应。因此,可以增加用户的便利,并且可以通过交互向用户提供交互信息。
可以提供存储程序的非临时性计算机可读介质,其中,程序顺序地执行根据示例性实施例的控制方法。
非临时性计算机可读介质是指半持久性地存储数据并且可以由设备读取的介质。具体地,上述应用或程序可以被存储和提供在诸如CD、DVD、硬盘、蓝光光盘、通用串行总线(USB)、存储卡、ROM等的非临时性计算机可读介质上。
此外,在示出显示装置和服务器的上述框图中未示出总线。然而,可以通过总线来执行显示装置的元件与服务器的元件之间的通信。此外,每一个设备还可以包括执行上述各个操作的以下各项中的至少一项:诸如中央处理单元(CPU)、微处理器等的处理器、硬件模块、电路等。
前述示例性实施例和优点仅是示例性的,而不应理解为限制性的。本教导可以容易地应用于其它类型的装置。此外,示例性的实施例的描述旨在是说明性的,而非限制由所附权利要求限定的发明构思的范围,并且对于本领域技术人员而言,很多替换形式、修改和变形将是显而易见的。

Claims (12)

1.一种电子装置,包括:
输出端;
语音收集器,配置为收集用户语音;
第一通信器,配置为向第一服务器发送所述用户语音并且从所述第一服务器接收与所述用户语音相对应的文本信息;
第二通信器,配置为向第二服务器发送所接收的文本信息;以及
控制器,配置为响应于从所述第二服务器接收到与所述文本信息相对应的响应信息,基于所述响应信息控制所述输出端,以输出根据所述用户语音中包含的话语意图而有所区别的系统响应,
其中,所述话语意图与内容搜索或内容推荐有关。
2.根据权利要求1所述的电子装置,其中,所述第二服务器进一步配置为,根据所述文本信息是包括对所述话语意图与内容搜索有关加以指示的关键词还是包括对所述话语意图与内容推荐有关加以指示的关键词,来产生不同类型的响应信息,并且向所述电子装置发送不同类型的响应信息。
3.根据权利要求1所述的电子装置,其中,响应于所述话语意图与内容搜索有关,所述控制器进一步配置为将根据所述话语意图搜索的内容的搜索列表作为所述系统响应进行输出。
4.根据权利要求1所述的电子装置,其中,响应于所述话语意图与内容推荐有关,所述控制器进一步配置为将基于收视率从根据所述话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
5.根据权利要求1所述的电子装置,其中,响应于所述话语意图与内容推荐有关,所述控制器进一步配置为将基于用户偏好信息从根据所述话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
6.根据权利要求1所述的电子装置,其中,所述电子装置是显示装置。
7.一种控制电子装置的方法,所述方法包括:
收集用户语音;
向第一服务器发送所述用户语音,并且从所述第一服务器接收与所述用户语音相对应的文本信息;
向第二服务器发送所接收的文本信息;以及
响应于从所述第二服务器接收到与所述文本信息相对应的响应信息,基于所述响应信息来输出根据所述用户语音中包含的话语意图而有所区别的系统响应,
其中,所述话语意图与内容搜索或内容推荐有关。
8.根据权利要求7所述的方法,其中,所述第二服务器进一步配置为,根据所述文本信息是包括对所述话语意图与内容搜索有关加以指示的关键词还是包括对所述话语意图与内容推荐有关加以指示的关键词,来产生不同类型的响应信息,并且向所述电子装置发送不同类型的响应信息。
9.根据权利要求7所述的方法,其中,响应于所述话语意图与内容搜索有关,将根据所述话语意图搜索的内容的搜索列表作为所述系统响应进行输出。
10.根据权利要求7所述的方法,其中,响应于所述话语意图与所述内容推荐有关,将基于收视率从根据所述话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
11.根据权利要求7所述的方法,其中,响应于所述话语意图与所述内容推荐有关,将基于用户偏好信息从根据所述话语意图搜索的内容中选择的内容的推荐列表作为所述系统响应进行输出。
12.根据权利要求7所述的方法,其中,所述电子装置是显示装置。
CN201410004898.XA 2013-01-07 2014-01-06 显示装置和控制显示装置的方法 Pending CN103916687A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020130001804A KR20140089862A (ko) 2013-01-07 2013-01-07 디스플레이 장치 및 그의 제어 방법
KR10-2013-0001804 2013-01-07

Publications (1)

Publication Number Publication Date
CN103916687A true CN103916687A (zh) 2014-07-09

Family

ID=49999713

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410004898.XA Pending CN103916687A (zh) 2013-01-07 2014-01-06 显示装置和控制显示装置的方法

Country Status (7)

Country Link
US (1) US20140195244A1 (zh)
EP (1) EP2752763A3 (zh)
JP (1) JP2014132465A (zh)
KR (1) KR20140089862A (zh)
CN (1) CN103916687A (zh)
TW (1) TW201435856A (zh)
WO (1) WO2014107102A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105335498A (zh) * 2015-10-23 2016-02-17 广东小天才科技有限公司 一种基于语音信息进行信息推荐的方法和系统
CN105389143A (zh) * 2014-08-22 2016-03-09 三星电子株式会社 显示装置及其控制方法
CN106201733A (zh) * 2015-05-29 2016-12-07 三星电子株式会社 用于处理装置之间的输入的方法及其电子装置
CN107734370A (zh) * 2017-10-18 2018-02-23 北京地平线机器人技术研发有限公司 信息交互方法、信息交互装置和电子设备
CN109635093A (zh) * 2018-12-17 2019-04-16 北京百度网讯科技有限公司 用于生成回复语句的方法和装置

Families Citing this family (139)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US20120311585A1 (en) 2011-06-03 2012-12-06 Apple Inc. Organizing task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
KR101912409B1 (ko) * 2012-01-06 2018-10-26 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US10199051B2 (en) 2013-02-07 2019-02-05 Apple Inc. Voice trigger for a digital assistant
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
CN110442699A (zh) 2013-06-09 2019-11-12 苹果公司 操作数字助理的方法、计算机可读介质、电子设备和系统
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
EP3480811A1 (en) 2014-05-30 2019-05-08 Apple Inc. Multi-command single utterance input method
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
KR102147329B1 (ko) * 2014-06-17 2020-08-24 엘지전자 주식회사 영상 표시 기기 및 그의 동작 방법
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
KR20160056548A (ko) * 2014-11-12 2016-05-20 삼성전자주식회사 질의 응답을 위한 디스플레이 장치 및 방법
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
CN104902081B (zh) * 2015-04-30 2017-05-03 广东欧珀移动通信有限公司 一种飞行模式的控制方法及移动终端
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10331312B2 (en) * 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
KR20170035309A (ko) * 2015-09-22 2017-03-30 삼성전자주식회사 전자 장치 및 이의 컨텐츠 제공 방법
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
KR20180024927A (ko) * 2016-08-31 2018-03-08 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
KR102619661B1 (ko) * 2016-10-28 2023-12-29 삼성전자주식회사 영상 표시 장치 및 그 동작 방법
CN108010523B (zh) * 2016-11-02 2023-05-09 松下电器(美国)知识产权公司 信息处理方法以及记录介质
JP2018082283A (ja) * 2016-11-15 2018-05-24 富士通株式会社 情報提供装置、情報提供プログラムおよび情報提供方法
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
CN106874467B (zh) * 2017-02-15 2019-12-06 百度在线网络技术(北京)有限公司 用于提供搜索结果的方法和装置
US11170768B2 (en) * 2017-04-17 2021-11-09 Samsung Electronics Co., Ltd Device for performing task corresponding to user utterance
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
AU2017435621B2 (en) * 2017-10-09 2022-01-27 Huawei Technologies Co., Ltd. Voice information processing method and device, and terminal
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
EP4319174A3 (en) * 2018-01-08 2024-04-24 LG Electronics Inc. Display device and system comprising same
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11076039B2 (en) 2018-06-03 2021-07-27 Apple Inc. Accelerated task performance
KR20200013152A (ko) * 2018-07-18 2020-02-06 삼성전자주식회사 이전에 대화를 수집한 결과를 기반으로 인공 지능 서비스를 제공하는 전자 장치 및 방법
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
KR102568626B1 (ko) * 2018-10-31 2023-08-22 삼성전자주식회사 전자 장치, 그 제어 방법 및 전자 시스템
JPWO2020121776A1 (ja) * 2018-12-11 2021-10-28 ソニーグループ株式会社 受信装置および制御方法
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
WO2020258082A1 (zh) * 2019-06-26 2020-12-30 深圳市欢太科技有限公司 信息推荐方法、装置、电子设备以及存储介质
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11043220B1 (en) 2020-05-11 2021-06-22 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
KR20220129366A (ko) * 2021-03-16 2022-09-23 현대자동차주식회사 음성 인식 시스템 및 그 제어 방법
TWI777781B (zh) * 2021-09-23 2022-09-11 聯寶電子股份有限公司 語音控制燈具組
KR20240025396A (ko) * 2022-08-18 2024-02-27 삼성전자주식회사 추천 컨텐츠 리스트를 제공하는 전자 장치 및 그 제어 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030074200A1 (en) * 2001-10-02 2003-04-17 Hitachi, Ltd. Speech input system, speech portal server, and speech input terminal
CN101021855A (zh) * 2006-10-11 2007-08-22 鲍东山 基于内容的视频检索系统
US20110067059A1 (en) * 2009-09-15 2011-03-17 At&T Intellectual Property I, L.P. Media control
US20110123004A1 (en) * 2009-11-21 2011-05-26 At&T Intellectual Property I, L.P. System and Method to Search a Media Content Database Based on Voice Input Data

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6345389B1 (en) * 1998-10-21 2002-02-05 Opentv, Inc. Interactive television system and method for converting non-textual information to textual information by a remote server
KR100305320B1 (ko) * 1998-10-30 2001-11-22 전주범 음성다중텔레비전에서의음성제어방법
US6314398B1 (en) * 1999-03-01 2001-11-06 Matsushita Electric Industrial Co., Ltd. Apparatus and method using speech understanding for automatic channel selection in interactive television
US20050071328A1 (en) * 2003-09-30 2005-03-31 Lawrence Stephen R. Personalization of web search
US20060075429A1 (en) * 2004-04-30 2006-04-06 Vulcan Inc. Voice control of television-related information
US7664746B2 (en) * 2005-11-15 2010-02-16 Microsoft Corporation Personalized search and headlines
US7711732B2 (en) * 2006-04-21 2010-05-04 Yahoo! Inc. Determining related terms based on link annotations of documents belonging to search result sets
US7890499B1 (en) * 2006-07-28 2011-02-15 Google Inc. Presentation of search results with common subject matters
US9318108B2 (en) * 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8832742B2 (en) * 2006-10-06 2014-09-09 United Video Properties, Inc. Systems and methods for acquiring, categorizing and delivering media in interactive media guidance applications
US9519715B2 (en) * 2006-11-02 2016-12-13 Excalibur Ip, Llc Personalized search
US8250605B2 (en) * 2006-12-18 2012-08-21 Verizon Services Corp. Systems and methods for presentation of preferred program selections
US7996392B2 (en) * 2007-06-27 2011-08-09 Oracle International Corporation Changing ranking algorithms based on customer settings
US8645390B1 (en) * 2007-08-31 2014-02-04 Google Inc. Reordering search query results in accordance with search context specific predicted performance functions
US9445036B2 (en) * 2009-06-30 2016-09-13 Rovi Guides, Inc. Methods and systems for content scheduling across multiple devices
EP2609750A4 (en) * 2010-08-26 2014-10-08 Tarik Taleb SYSTEM AND METHOD FOR CREATING A CUSTOMIZED MULTIMEDIA CONTENT CHANNEL FOR A SOCIAL NETWORK
US8577915B2 (en) * 2010-09-10 2013-11-05 Veveo, Inc. Method of and system for conducting personalized federated search and presentation of results therefrom
JP5126633B2 (ja) * 2010-11-24 2013-01-23 株式会社Jvcケンウッド アイテム選択装置、アイテム選択方法およびコンピュータプログラム
JP5771002B2 (ja) * 2010-12-22 2015-08-26 株式会社東芝 音声認識装置、音声認識方法および音声認識装置を搭載したテレビ受像機
KR101804917B1 (ko) * 2011-05-06 2018-01-10 엘지전자 주식회사 채널 가이드 화면을 제공하는 디스플레이 장치 및 그 제어 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030074200A1 (en) * 2001-10-02 2003-04-17 Hitachi, Ltd. Speech input system, speech portal server, and speech input terminal
CN101021855A (zh) * 2006-10-11 2007-08-22 鲍东山 基于内容的视频检索系统
US20110067059A1 (en) * 2009-09-15 2011-03-17 At&T Intellectual Property I, L.P. Media control
US20110123004A1 (en) * 2009-11-21 2011-05-26 At&T Intellectual Property I, L.P. System and Method to Search a Media Content Database Based on Voice Input Data

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105389143A (zh) * 2014-08-22 2016-03-09 三星电子株式会社 显示装置及其控制方法
CN106201733A (zh) * 2015-05-29 2016-12-07 三星电子株式会社 用于处理装置之间的输入的方法及其电子装置
CN106201733B (zh) * 2015-05-29 2022-01-04 三星电子株式会社 用于处理装置之间的输入的方法及其电子装置
CN105335498A (zh) * 2015-10-23 2016-02-17 广东小天才科技有限公司 一种基于语音信息进行信息推荐的方法和系统
CN107734370A (zh) * 2017-10-18 2018-02-23 北京地平线机器人技术研发有限公司 信息交互方法、信息交互装置和电子设备
CN107734370B (zh) * 2017-10-18 2020-05-29 北京地平线机器人技术研发有限公司 信息交互方法、信息交互装置、 电子设备和计算机可读存储介质
CN109635093A (zh) * 2018-12-17 2019-04-16 北京百度网讯科技有限公司 用于生成回复语句的方法和装置
CN109635093B (zh) * 2018-12-17 2022-05-27 北京百度网讯科技有限公司 用于生成回复语句的方法和装置

Also Published As

Publication number Publication date
US20140195244A1 (en) 2014-07-10
TW201435856A (zh) 2014-09-16
EP2752763A2 (en) 2014-07-09
JP2014132465A (ja) 2014-07-17
EP2752763A3 (en) 2015-06-17
KR20140089862A (ko) 2014-07-16
WO2014107102A1 (en) 2014-07-10

Similar Documents

Publication Publication Date Title
CN103916687A (zh) 显示装置和控制显示装置的方法
US9520133B2 (en) Display apparatus and method for controlling the display apparatus
CN103517119B (zh) 显示设备、控制显示设备的方法、服务器以及控制服务器的方法
CN103916704A (zh) 对话型接口设备及其控制方法
RU2583445C1 (ru) Устройство отображения, интерактивная система и способ обеспечения ответной информации
US20140195230A1 (en) Display apparatus and method for controlling the same
CN103516711A (zh) 显示设备、用于控制显示设备的方法和交互系统
CN103517094A (zh) 服务器和控制该服务器的方法
CN103516854A (zh) 终端装置及其控制方法
CN103916709A (zh) 服务器和用于控制服务器的方法
CN103517147A (zh) 提供响应信息的显示设备、交互服务器以及方法
CN103546763A (zh) 用于提供内容信息的方法和广播接收设备
KR20180014137A (ko) 디스플레이 장치 및 그의 제어 방법
KR20190140890A (ko) 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR102091006B1 (ko) 디스플레이 장치 및 그의 제어 방법
KR102118195B1 (ko) 서버 및 그의 제어 방법
KR20160022326A (ko) 디스플레이 장치 및 그의 제어 방법
KR20200062156A (ko) 서버 및 그의 제어 방법
KR20170038772A (ko) 디스플레이 장치 및 그의 제어 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140709

WD01 Invention patent application deemed withdrawn after publication