CN105635609A - 显示设备和显示方法 - Google Patents

显示设备和显示方法 Download PDF

Info

Publication number
CN105635609A
CN105635609A CN201510809101.8A CN201510809101A CN105635609A CN 105635609 A CN105635609 A CN 105635609A CN 201510809101 A CN201510809101 A CN 201510809101A CN 105635609 A CN105635609 A CN 105635609A
Authority
CN
China
Prior art keywords
window
display
controller
content
voice data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510809101.8A
Other languages
English (en)
Inventor
李升焕
金起贤
柳亮善
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN105635609A publication Critical patent/CN105635609A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1431—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00—Aspects of the constitution of display devices
    • G09G2300/02—Composition of display devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4852—End-user interface for client configuration for modifying audio parameters, e.g. switching between mono and stereo

Abstract

提供一种显示设备和显示方法。所述显示设备包括：显示器，被配置为显示包括多个窗口的多窗口屏幕图像。所述显示设备还包括：音频输出接口；控制器，被配置为检测焦点在所述多个窗口之中从一个窗口到另一窗口的移动，响应于控制器检测到焦点的移动分析在聚焦的另一窗口中再现的内容的流，基于分析控制音频输出接口输出音频数据。

Description

显示设备和显示方法
本申请要求于2014年11月20日提交到韩国知识产权局的第10-2014-0162605号韩国专利申请的优先权，其公开通过引用全部内容合并于此。
技术领域
与示例性实施例一致的设备和方法涉及一种显示设备和显示方法，更具体地讲，涉及一种提供多窗口屏幕图像的显示设备及由显示设备执行的显示方法。
背景技术
显示设备具有显示能够由用户观看的图像的功能。用户能够经由显示设备观看广播。显示设备在包含其中的显示器上显示用户从由广播站发送的广播信号中所选择的广播。世界上大多数国家已经从模拟广播转变为数字广播。
在数字广播中，发送数字图像信号和数字音频信号。当与模拟广播进行比较时，数字广播具有抗外部噪声的弹性，因此具有小的数据损失，有利于纠错并提供高分辨率、高清晰度屏幕图像。另外，与模拟广播形成对比，数字广播能够提供双向服务。
除了数字广播功能以外，已经供应提供各种类型的内容的智能电视(TV)。取代根据用户的选择被手动操作，智能TV旨在分析并提供用户所需而不用用户的操作。也已经供应实现多窗口屏幕的智能TV。
发明内容
示例性实施例至少解决以上问题和/或缺点以及以上未描述的其它缺点。此外，不需要示例性实施例克服上述缺点，并且示例性实施例可不克服上述任何问题。
一个或多个示例性实施例提供一种提供包括多个窗口的多窗口屏幕图像并控制声音输出的显示设备以及由显示设备执行的显示方法。
根据示例性实施例的一方面，提供一种显示设备，包括：显示器，被配置为显示包括多个窗口的多窗口屏幕图像。显示设备还包括：音频输出接口；控制器，被配置为检测焦点在多个窗口之中从一个窗口到另一窗口的移动，响应于控制器检测到焦点的移动分析在聚焦的另一窗口中再现的内容的流，基于分析控制音频输出接口输出音频数据。
控制器可还被配置为控制显示器基于所述分析在所述窗口或所述聚焦的另一窗口上显示指示输出所述窗口或所述聚焦的另一窗口的音频数据的图标。
控制器可还被配置为确定所述内容的流是否包括音频数据。
控制器可还被配置为响应于控制器确定所述内容的流包括音频数据而控制音频输出接口输出所述内容的流的音频数据。
控制器可还被配置为响应于控制器确定所述内容的流包括音频数据控制显示器在聚焦的另一窗口上显示指示聚焦的另一窗口的音频数据被输出的图标。
控制器可还被配置为响应于控制器确定所述内容的流不包括音频数据而控制音频输出接口保持焦点从其开始被移动的窗口的音频数据的输出。
根据另一示例性实施例的一方面，提供一种显示设备，包括：显示器，被配置为显示包括多个窗口的多窗口屏幕图像并在所述多个窗口中的至少一个中显示内容项目。显示设备还包括：音频输出接口；控制器，被配置为检测用于选择所述内容项目的输入，控制显示器显示所选择的内容项目的内容，基于对所选择的内容项目的内容的流的分析控制音频输出接口输出音频数据。
控制器可还被配置为控制显示器在所述多个窗口之中除聚焦的窗口以外的窗口中显示所选择的内容项目的内容。
根据另一示例性实施例的一方面，提供一种显示方法，包括：显示包括多个窗口的多窗口屏幕图像。所述显示方法还包括：检测焦点在多个窗口之中从一个窗口到另一窗口的移动；响应于检测到焦点的移动，分析在聚焦的另一窗口中再现的内容的流；基于分析输出音频数据。
所述显示方法可还包括：基于分析在所述窗口或所述聚焦的另一窗口上显示指示所述窗口或所述聚焦的另一窗口的音频数据被输出的图标。
所述分析步骤可包括：确定所述内容的流是否包括音频数据。
所述输出步骤可包括：响应于确定所述内容的流包括音频数据，输出所述内容的流的音频数据。
所述显示方法可还包括：响应于确定所述内容的流包括音频数据，在聚焦的另一窗口上显示指示聚焦的另一窗口的音频数据被输出的图标。
所述输出步骤可包括：响应于确定所述内容的流不包括音频数据，保持焦点从其开始被移动的所述窗口的音频数据的输出。
根据另一示例性实施例的一方面，提供一种显示方法，包括：显示包括多个窗口的多窗口屏幕图像，并在所述多个窗口中的至少一个中显示内容项目。所述显示方法还包括：检测用于选择所述内容项目的输入；显示所选择的内容项目的内容；基于对所选择的内容项目的内容的流的分析，输出音频数据。
所述显示内容的步骤可包括：在所述窗口之中除聚焦的窗口以外的窗口中显示所选择的内容项目的内容。
所述显示方法可还包括：确定所述内容的流是否包括音频数据，
根据另一示例性实施例的一方面，提供一种显示设备，包括：显示器，被配置为显示多个窗口；音频输出接口；控制器，被配置为检测焦点在所述多个窗口之中从一个窗口到另一窗口的移动，确定在聚焦的另一窗口中再现的内容的流是否包括音频数据，响应于控制器确定所述内容的流包括音频数据而控制音频输出接口输出所述内容的流的音频数据，响应于控制器确定所述内容的流不包括音频数据而控制音频输出接口保持焦点从其开始被移动的窗口的音频数据的输出。
所述控制器可还被配置为：响应于控制器确定所述内容的流不包括音频数据，控制显示器保持在窗口上显示指示所述窗口的音频数据被输出的图标。
所述控制器可还被配置为：确定在聚焦的另一窗口中执行的应用是否具有音频数据；响应于控制器确定所述应用具有音频数据，控制音频输出接口输出所述应用的音频数据；响应于控制器确定所述应用不具有音频数据，控制音频输出接口保持焦点从其开始被移动的窗口的音频数据的输出。
所述控制器可还被配置为确定在聚焦的另一窗口中可再现的内容项目并控制显示器以显示针对内容项目的视觉效果。
附图说明
通过参照附图描述示例性实施例，以上和/或其它方面将会更清楚，其中：
图1是示出根据示例性实施例的在显示设备与控制装置之间的操作的示意图；
图2是根据示例性实施例的显示设备的框图；
图3是根据示例性实施例的显示设备的详细结构的框图；
图4是在显示设备中包括的存储器中存储的软件结构的框图；
图5A、图5B和图5C是示出根据示例性实施例的图1的控制装置的示图；
图6是示出根据示例性实施例的包括多个窗口的多窗口屏幕图像的示图；
图7是根据示例性实施例的操作显示设备的方法的流程图；
图8A、图8B、图8C和图8D是示出图7的方法的示图；
图9是示出根据示例性实施例的节目映射表(PMT)的示图；
图10是根据示例性实施例的操作显示设备的方法的流程图；
图11A、图11B、图11C和图11D是示出图10的方法的示图；
图12是根据另一示例性实施例的操作显示设备的方法的流程图；
图13A、图13B、图13C、图13D和图13E是示出图12的方法的示图；
图14是根据另一示例性实施例的操作显示设备的方法的流程图；
图15是示出图14的方法的示图。
具体实施方式
以下参照附图更详细地描述示例性实施例。
在以下描述中，即使在不同附图中，同样的附图标号被用于同样的元件。提供在描述中限定的事项(诸如详细构造和元件)以帮助全面理解示例性实施例。然而，清楚的是：可在没有那些具体限定的事项的情况下来实践示例性实施例。此外，因为公知的功能或构造将利用不必要的细节使描述变模糊，所以可不详细描述它们。
将理解：在此使用的术语“包括”明确指定所陈述的特征或组件的存在，不过所述术语并不排除一个或多个其它特征或组件的存在或添加。此外，在说明书中描述的术语(诸如“单元”、“～器”及“模块”)是指用于执行至少一个功能或操作的元件并且可在硬件、软件或硬件和软件的组合中实施。
虽然术语(诸如“第一”、“第二”等)可被用于描述各种组件，但是所述组件可不限于以上术语。以上术语仅被用于使一个组件区别于另一组件。例如，在不脱离本公开的教导的情况下，能够将在以下讨论的第一组件称为第二组件，类似地，可将第二组件称为第一组件。术语“和/或”包括一个或多个所列出的关联项目的任何及全部组合。
对布置在控制装置上的键的选择可以是表示在控制装置上的键的按压、在触摸面板上的键的触摸或在触摸面板上的键的拖曳的术语。
内容可包括视频、音频、文本或web文档。
以单数形式使用的表述包含复数的表述，除非所述表述在语境中明确具有不同含义。
图1是示出根据示例性实施例的在显示设备100与控制装置200之间的操作的示意图。
参照图1，所示出的显示设备100和控制装置200能够通过有线通信或无线通信彼此进行通信。
控制装置200可经由包括红外或蓝牙的通信来控制显示设备100。控制装置200可由用户操纵以通过使用从在控制装置200中包括的键(包括按钮)、触摸板、能够接收用户的语音的麦克风、能够识别控制装置200的运动的传感器中所选择的至少一个来控制显示设备100的功能。
控制装置200包括用于开启或关闭显示设备100的通电/断电按钮。控制装置200可根据用户输入来改变显示设备100的频道、调整显示设备100的音量、选择显示设备100的地面广播/有线广播/卫星广播或执行显示设备100的设置。
不仅可通过使用平面显示设备来实施显示设备100，而且可通过使用具有能够调整曲率的弧形或柔性显示设备来实施显示设备100。显示设备100的输出分辨率可以是，例如，高清晰度(HD)、全HD、超HD或比超HD更清晰的分辨率。显示设备100的屏幕的对角线长度可以是，例如，650㎜或更少、660㎜、800㎜、1010㎜、1520㎜、1890㎜或不少于2000㎜。显示设备100的屏幕的水平/垂直长度可以是，例如，643.4㎜×396.5㎜、934.0㎜×548.6㎜、1670.2㎜×962.7㎜或2004.3㎜×1635.9㎜。可选地，显示设备100的屏幕的宽长比可以是，例如，4:3、16:9、16:10、21:9或21:10。
在此使用的术语“用户”表示通过使用控制装置200控制显示设备100的功能或操作的人。用户的示例可包括观看者、管理员或安装工程师。
根据示例性实施例，显示设备100将包括多个窗口的多窗口屏幕图像提供到显示器115，可检测在所述多个窗口之中从一个窗口到另一窗口的焦点移动并可响应于所述检测来控制音频数据的输出。
根据示例性实施例，显示设备100将包括多个窗口的多窗口屏幕提供到显示器115并可响应于选择提供到所述多个窗口中的一个的内容项目的输入控制音频数据的输出。
根据示例性实施例，显示设备100将包括多个窗口的多窗口屏幕提供到显示器115，可检测在多个窗口之中从一个窗口到另一窗口的焦点移动并可响应于所述检测根据在聚焦的窗口上执行的应用的类型或外部源的类型控制音频数据的输出。
图2是根据示例性实施例的显示设备100的框图。
参照图2，显示设备100包括显示器115、音频输出接口125、控制器180及传感器160。
在控制器180的控制下，显示器115输出包括多个窗口的多窗口屏幕图像。
在控制器180的控制下，传感器160可从控制装置200接收在多窗口屏幕图像的多个窗口之中将焦点从一个窗口移动到另一窗口的信号以及选择提供到窗口的内容项目的输入信号。
响应于经由传感器160接收到的窗口焦点移动信号或内容项目选择信号，控制器180可控制音频输出接口125以根据分析在窗口上再现的内容的流的结果来输出音频数据。
在控制器180的控制下，音频输出接口125可输出已经在从其开始移动焦点的窗口上再现的内容的音频数据或在焦点被移动到的窗口上再现的内容的音频数据。
在控制器180的控制下，音频输出接口125可输出音频数据或可不输出音频数据。
图3是根据示例性实施例的显示设备100的详细结构的框图。
参照图3，显示设备100包括视频处理器110、显示器115、音频处理器120、音频输出接口125、电源130、调谐器140、通信接口150、传感器160、输入/输出接口170、控制器180及存储器190。
视频处理器110处理由显示设备100接收到的视频数据。视频处理器110可对视频数据执行各种图像处理操作，诸如解码、缩放、噪声滤波、帧率变换及分辨率变换。
根据示例性实施例，当向显示器115提供包括多个窗口的多窗口屏幕图像并且与多条内容相应的视频被分别输出到所述多个窗口时，视频处理器110可通过使用多个视频处理模块处理与所述多条内容相应的视频。
在控制器180的控制下，显示器115在其屏幕上显示在经由调谐器140接收到的广播信号中包括的视频。显示器115也可显示经由通信接口150或输入/输出接口170输入的内容(例如，运动图像)。在控制器180的控制下，显示器115可输出在存储器190中存储的图像。显示器115也可显示用于执行与语音识别相应的语音识别任务的语音用户界面(UI)(例如，包括语音命令词汇指南)或用于执行与运动识别相应的运动识别任务的运动UI(例如，包括针对运动识别的用户运动指南)。
在控制器180的控制下，显示器115可提供包括多个窗口的多窗口屏幕图像。
在控制器180的控制下，显示器115可响应于从控制装置200接收到的窗口焦点移动信号将视觉效果提供到聚焦的窗口以突出显示聚焦的窗口。
在控制器180的控制下，显示器115可响应于从控制装置200接收到的内容项目选择信号提供表示内容项目已被选择的视觉效果。
如图8C所示，显示器115也可输出能够接收针对声音设置的用户输入的UI。
音频处理器120处理音频数据。音频处理器120可对音频数据执行各种处理操作，诸如解码、放大或噪声滤波。音频处理器120可包括用于处理与多条内容相应的多条音频的多个音频处理模块。
在控制器180的控制下，音频输出接口125输出在经由调谐器140接收到的广播信号中包括的音频。音频输出接口125也可输出经由通信接口150或输入/输出接口170输入的音频(例如，语音或声音)。在控制器180的控制下，音频输出接口125也可输出在存储器190中存储的音频。音频输出接口125可包括从扬声器126、耳机输出端口127、索尼/飞利浦数字接口(S/PDIF)输出端口128中选择的至少一个。音频输出接口125可包括扬声器126、耳机输出端口127及S/PDIF输出端口128的组合。
在控制器180的控制下，音频输出接口125可输出在多窗口屏幕图像中包括的多个窗口之中的聚焦的窗口上再现的内容的音频数据。
在控制器180的控制下，即使在检测到窗口焦点移动之后，音频输出接口125可输出在多窗口屏幕图像中包括的多个窗口之中从其开始移动焦点的窗口上再现的内容的音频数据。
在控制器180的控制下，音频输出接口125可基于在聚焦的窗口上执行的应用的类型或外部源的类型输出或不输出音频数据。
在控制器180的控制下，电源130将从外部电源输入的电能供应给显示设备100的内部组件110至190。在控制器180的控制下，电源130也可将由位于显示设备100中的一个或多个电池输出的电能供应给显示设备100的内部组件110至190。
调谐器140可进行调谐并仅从例如通过将有线或无线广播信号放大、混频或谐振而获得的许多无线电波成分中选择频道的频率。广播信号包括音频、视频及附加信息(例如，电子节目指南(EPG))。
调谐器140可根据用户输入(例如，从控制装置200接收到的控制信号，例如，频道号码输入、频道上下及在EPG屏幕图像上输入的频道)接收在与频道号码相应的频段中的广播信号。
调谐器140可从各种源(诸如，地面广播、有线广播、卫星广播及互联网广播)接收广播信号。调谐器140也可从源(诸如模拟广播或数字广播)接收广播信号。经由调谐器140接收到的广播信号被解码(例如，音频解码、视频解码或附加信息解码)并由此被划分为音频、视频和/或附加信息。在控制器180的控制下，可将音频、视频和/或附加信息存储在存储器190中。
显示设备100可包括单个调谐器140或多个调谐器140。根据示例性实施例，当包括多个调谐器140时，多个调谐器140可将多个广播信号输出到在被提供到显示器115的多窗口屏幕图像中包括的多个窗口。
调谐器140可与显示器100一体化或被实施为具有电连接到显示设备100的调谐器的单独的设备(例如，连接到机顶盒和输入/输出接口170的调谐器)。
在控制器180的控制下，通信接口150可将显示设备100连接到外部设备(例如，音频设备)。控制器180可将内容发送到经由通信接口150连接的外部设备/从经由通信接口150连接的外部设备接收内容、从外部设备下载应用或执行web浏览。与显示设备100的性能和结构相应，通信接口150可包括从无线局域网(LAN)151、蓝牙网络152及有线以太网网络153中选择的至少一个。通信接口150可包括无线LAN151、蓝牙网络152及有线以太网网络153的组合。在控制器180的控制下，通信接口150可接收控制装置200的控制信号。可将控制信号实施为蓝牙信号、射频(RF)信号或Wi-Fi型信号。
根据示例性实施例，通信接口150可经由互联网接收被输出到在多窗口屏幕图像中包括的多个窗口中的至少一个的内容并将接收到的内容提供到控制器180、视频处理器110或显示器115。
通信接口150可还包括通信(例如，近场通信(NFC))或蓝牙低能量(BLE)，而不是蓝牙网络152。
传感器160感测用户的语音、用户的图像或与用户的交互。
麦克风161接收用户的语音。麦克风161可将接收到的语音变换为电信号并将电信号输出到控制器180。用户语音可包括，例如，与显示设备100的菜单或功能相应的语音。麦克风161的识别范围可被推荐为从麦克风161到用户的位置在4m以内并且可与用户的语音的大小和周围环境(例如，扬声器声音或环境噪声)相应地变化。
麦克风161可与显示设备100集成或独立于显示设备100。可经由通信接口150或输入/输出接口170将单独的麦克风161电连接到显示设备100。
本领域普通技术人员将理解：根据显示设备100的性能和结构，可排除麦克风161。
相机162接收与在相机162的识别范围以内包括手势的用户的运动相应的图像(例如，连续帧)。例如，相机162的识别范围可以是从相机162到用户在0.1至5m以内的距离。用户的运动可包括用户的身体部位或用户部位(诸如用户的脸、面部表情、手、拳头及手指)的运动等。在控制器180的控制下，相机162可将接收到的图像转换为电信号并将电信号输出到控制器180。
控制器180可通过使用接收到的运动的识别的结果来选择在显示设备100上显示的菜单或执行与运动识别的结果相应的控制。例如，所述控制可以是频道改变、音量调整或指示器移动。
相机162可包括镜头和图像传感器。相机162可通过使用多个镜头和图像处理支持光学变焦或数字变焦。可根据相机162的角度和周围环境条件不同地设置相机162的识别范围。当相机162包括多个相机时，可由多个相机接收三维(3D)静止图像或3D运动图像。
相机162可与显示设备100集成或独立于显示设备100。可经由通信接口150或输入/输出接口170将包括单独的相机162的单独装置电连接到显示设备100。
本领域普通技术人员将理解：根据显示设备100的性能和结构，可排除相机162。
光接收器163经由显示器115的边框的光窗口从控制装置200接收光信号(包括控制信号)。光接收器163可从控制装置200接收与用户输入(例如，触摸、按压、触摸手势、语音或运动)相应的光信号。在控制器180的控制下，可从接收到的光信号中提取控制信号。
根据示例性实施例，光接收器163可经由控制装置200接收在多窗口屏幕图像中包括的多个窗口之中将焦点从一个窗口移动到另一窗口的输入并将接收到的输入输出到控制器180。
根据示例性实施例，光接收器163可经由控制装置200接收用于选择输出到在多窗口屏幕图像中包括的多个窗口之中的一个的内容项目的用户输入并将接收到的用户输入输出到控制器180。
光接收器163也可经由控制装置200从用户接收声音设置并将接收到的声音设置输出到控制器180。
在控制器180的控制下，输入/输出接口170从显示设备100外部接收视频(例如，运动图像)、音频(例如，语音或音乐)及附加信息(例如，EPG)。输入/输出接口170包括高清晰度多媒体接口(HDMI)端口171、组件插口172、PC端口173及USB端口174。输入/输出接口170可包括HDMI端口171、组件插口172、PC端口173及USB端口174的组合。
根据示例性实施例，输入/输出接口170可接收输出到在多窗口屏幕图像中包括的多个窗口中的至少一个的内容并将接收到的内容输出到控制器180。
本领域普通技术人员将理解：根据示例性实施例，可不同地实施输入/输出接口170的结构和操作。
控制器180控制显示设备100的整体操作以及在显示设备100的内部组件110至190之中的信号传输并处理数据。当存在用户的输入或满足存储的预设条件时，控制器180可执行在存储器190中存储的操作系统(OS)和各种应用。
控制器180包括存储由显示设备100的外部源输入的信号或数据或者被用作针对由显示设备100执行的各种操作的存储器区域的随机存取存储器(RAM)181、存储用于控制显示设备100的控制程序的只读存储器(ROM)182以及处理器183。
处理器183可包括用于执行视频图形处理的图形处理器。可通过使用核和GPU被结合在其中的芯片系统(SoC)来实施处理器183。处理器183可包括单核处理器、双核处理器、三核处理器、四核处理器等。
处理器183可包括多个处理器。例如，可通过使用主处理器和在睡眠模式中操作的子处理器来实施处理器183。
图形处理器184通过使用计算器和渲染器产生包括各种对象(诸如图标、图像及文本)的屏幕图像。计算器基于由传感器160感测到的用户交互计算属性值(诸如坐标值、形状、尺寸、色彩等)，其中，将根据屏幕图像的布局利用所述属性值来显示各个对象。渲染器基于由计算器计算的属性值产生包括对象的各种布局的屏幕图像。在显示器115的显示区域上显示由渲染器产生的屏幕图像。
将第一接口185-1至第n个接口185-n连接到显示设备100的上述组件。第一接口185-1至第n个接口185-n中的一个可以是经由网络被连接到外部设备的网络接口。
经由内部总线186将RAM181、ROM182、处理器183、图形处理器184以及第一接口185-1至第n个接口185-n相互连接。
在示例性实施例中使用的术语“显示设备的控制器”包括处理器183、ROM182、RAM181。
控制器180可控制从接收由控制装置200输出的光的光接收器163、位于显示设备100的侧面或背面的面板键、接收用户的语音的麦克风161及接收用户的运动的相机162中所选择的至少一个以接收在被提供到显示器115的多窗口屏幕图像中包括的多个窗口之中将焦点从一个窗口移动到另一窗口的用户输入或选择被提供到窗口的内容项目的用户输入。可按照各种术语(诸如用户操作、用户命令及输入的命令)来描述用户输入。
根据示例性实施例，控制器180可检测在多窗口屏幕图像中包括的多个窗口之中焦点从一个窗口到另一窗口的移动，响应于所述检测分析在聚焦的窗口上再现的内容的流，基于所述分析控制音频输出接口125以输出音频数据。
根据示例性实施例，控制器180可控制显示器115以将预定图标提供到焦点已经被移动到的所述一个窗口或另一窗口，从而基于对在聚焦的窗口上再现的内容的流的分析通知音频数据被输出。
根据示例性实施例，控制器180可检查在聚焦的窗口上再现的内容的流是否包含音频信息。
根据示例性实施例，响应于表示已经从在聚焦的窗口上再现的内容的流中检测到音频信息的信号，控制器180可控制音频输出接口125以输出与音频信息相应的音频数据。
根据示例性实施例，控制器180可控制显示器115以将预定图标提供到聚焦的窗口以通知在聚焦的窗口上再现的内容的音频数据被输出。
根据示例性实施例，响应于表示已经从在聚焦的窗口上再现的内容的流中检测到音频信息的信号，控制器180可控制显示器115以输出用于设置与音频信息相应的音频数据的输出的UI。
根据示例性实施例，响应于指示尚未从在聚焦的窗口上再现的内容的流中检测到音频信息的信号，控制器180可控制音频输出接口125以保持输出从其开始移动焦点的窗口所使用的音频数据。
根据示例性实施例，控制器180可控制显示器115以将预定义图标输出到从其开始移动焦点的窗口以通知由从其开始移动焦点的窗口所使用的音频数据被输出。
根据示例性实施例，控制器180可检测用于选择提供到在多窗口屏幕图像中包括的多个窗口中的一个的内容项目的输入，响应于所述检测输出与所选择的内容项目相应的内容，基于与所选择的内容项目相应的内容的流的分析控制音频输出接口125以输出音频数据。
根据示例性实施例，控制器180可控制显示器115以经由除当前聚焦的窗口以外的窗口输出与所选择的内容项目相应的内容。
根据示例性实施例，控制器180可检测焦点从多窗口屏幕图像中所包括的多个窗口之中的一个窗口到另一窗口的移动，响应于所述检测分析在聚焦的窗口上再现的内容的流，基于所述分析控制音频输出接口125以输出音频数据。
根据示例性实施例，控制器180可检测焦点从多窗口屏幕图像中所包括的多个窗口之中的一个窗口到另一窗口的移动，响应于所述检测识别在聚焦的窗口上执行的应用的类型或外部源的类型，基于识别出的应用或外部源的类型控制音频输出接口125以输出音频数据。
本领域普通技术人员将理解：根据示例性实施例，可不同地实施控制器180的结构和操作。
在控制器180的控制下，存储器190可存储用于驱动并控制显示设备100的各种数据、程序或应用。存储器190可存储与视频处理器110、显示器115、音频处理器120、音频输出接口125、电源130、调谐器140、通信接口150、传感器160及输入/输出接口170的驱动相应的输入/输出信号或数据。存储器190可存储用于控制显示设备100和控制器180的控制程序、最初由制造商提供或从显示设备100的外部下载的应用、与应用相关联的图形用户界面(GUI)、用于提供GUI的对象(例如，图像文本、图标及按钮)、用户信息、文档、数据库或相关数据。
根据示例性实施例，术语“存储器”包括存储器190、控制器180的ROM182和/或RAM181、在显示设备100中安装的存储卡(例如，微SD卡或USB存储器)。存储器190可包括非易失性存储器、易失性存储器、硬盘驱动器(HDD)或固态驱动器(SSD)。
存储器190可包括广播接收模块、频道控制模块、音量控制模块、通信控制模块、语音识别模块、运动识别模块、光接收模块、显示控制模块、音频控制模块、外部输入控制模块、电源控制模块、无线连接的外部设备(例如，蓝牙)的电源控制模块、语音数据库(DB)或运动DB。存储器190的这些模块和DB可被实施为用于执行显示设备100的广播接收控制功能、频道控制功能、音量控制功能、通信控制功能、语音识别功能、运动识别功能、光接收控制功能、显示控制功能、音频控制功能、外部输入控制功能、电源控制功能、无线连接的外部设备(例如，蓝牙)的电源控制功能的软件。控制器180可通过使用在存储器190中存储的软件来执行这些功能。
根据示例性实施例，存储器190可存储从用户获得的及经由光接收器163、面板键、麦克风161或相机162接收到的声音设置信息。
存储器190可存储与视觉反馈相应的运动图像或图像。
存储器190可存储与听觉反馈相应的声音。
可将具有显示器115的显示设备100电连接到具有调谐器的外部设备(例如，机顶盒)。例如，可通过使用模拟TV、数字TV、3DTV、智能TV、LEDTV、OLEDTV、等离子TV、监视器等实施显示设备100，不过本领域普通技术人员将理解：示例性实施例不限于此。
显示设备100可包括用于检测显示设备100的内部或外部状态的传感器(例如，照度传感器或温度传感器)。
根据显示设备100的性能，至少一个组件可被添加到图3的显示设备100的所述组件(例如，组件110至190)，或者图3的显示设备100的所述组件(例如，组件110至190)中的至少一个可被删除。本领域普通技术人员也将理解：根据显示设备100的性能或结构，可改变图3的显示设备100的所述组件(例如，组件110至190)的位置。
图4是在显示设备100中包括的存储器190中存储的软件结构的框图。
参照图4，存储器190存储包括基本模块191、感测模块192、通信模块193、呈现模块194、web浏览器模块195及服务模块196的软件。
基础模块191是处理从在显示设备100中包括的各个硬件接收到的信号并将处理后的信号发送到上层模块的基础模块。基础模块191包括存储模块191-1、安全模块191-2及网络模块191-3。存储模块191-1是管理DB或注册表的程序模块。处理器183可通过使用存储模块191-1访问在存储器190中的DB并从DB中读取各种数据。安全模块191-2是支持硬件的认证、许可、安全存储等的程序模块。网络模块191-3支持网络连接并包括DNET模块、UPnP模块等。
感测模块192从各种传感器收集信息、分析并管理收集到的信息。感测模块192可包括头部方向识别模块、面部识别模块、语音识别模块、运动识别模块、NFC识别模块、旋转识别模块、触摸识别模块及手势识别模块等。
通信模块193执行与外部源的通信。通信模块193包括消息模块193-1(诸如信使程序、短消息服务(SMS)&多媒体消息服务(MMS)程序或电子邮件程序)和包括呼叫信息聚合器程序模块、VoIP模块等的电话模块193-2。
呈现模块194构建显示屏图像。呈现模块194包括用于再现并输出多媒体内容的多媒体模块194-1以及渲染UI并执行图形处理的UI渲染模块194-2。多媒体模块194-1可包括播放器模块、摄像机模块、声音处理模块等。因此，多媒体模块194-1通过再现各种类型的多媒体内容产生并再现屏幕图像和声音。UI渲染模块194-2可包括合成图像的图像合成模块、将在其上显示图像的屏幕上的坐标组合的坐标组合模块、从硬件接收各种事件的X11模块以及提供用于构建2DUI或3DUI的工具的2D/3DUI工具包。
web浏览器模块195通过执行web浏览来访问web服务器。web浏览器模块195可包括各种模块，诸如构建web页面的web视图模块、执行下载的下载代理模块、书签模块以及Webkit模块。
服务模块146包括用于提供各种服务的各种应用。详细地讲，服务模块146可包括各种程序模块，诸如SNS程序、内容再现程序、游戏程序、电子书程序、日历程序、闹钟管理程序以及其它微件。
图4示出各种程序模块，不过根据显示设备100的类型和特性，可省略或修改所示出的程序模块中的一些或者可将其它程序模块添加到所示出的各种程序模块。例如，用于通过与硬件(诸如全球定位系统(GPS)芯片)交互支持基于位置的服务的基于位置的模块可还被包括在存储器190中。
图5A、图5B和图5C是示出根据示例性实施例的图1的控制装置200的示图。
参照图5A，控制装置200的示例性实施例包括四个方向按钮或四个方向键220。可将四个方向按钮或四个方向键220用于控制在显示器115上显示的窗口、区域、用于或项目。换言之，传感器160可感测按压四个方向按钮或四个方向键220中的一个的用户交互并由此控制显示器115。可将四个方向按钮或四个方向键用于指示，例如，上、下、左、右移动。本领域普通技术人员将理解：控制装置200可包括两个方向键或两个方向按钮，而不是四个方向按钮或四个方向键。
参照图5B，控制装置200的另一示例性实施例包括触摸面板210，而不是四个方向按钮或四个方向键220。
相应地，传感器160可感测经由控制装置200的触摸面板210执行拖曳、触摸或轻翻的用户交互。可根据感测到的用户交互的类型(例如，输入拖曳命令的方向或输入触摸命令的时间)来控制显示设备100。
参照图5C，通过使用包括四个方向按钮或四个方向键240及触摸板230的指示装置来实施控制装置200的另一示例性实施例。换言之，当通过使用指示装置实施控制装置200时，可根据例如控制装置200被倾斜的方向或角度来控制显示设备100的功能。
根据示例性实施例，通过使用控制装置200的方向键、触摸板、指示功能等，用户可在构成多窗口屏幕图像的多个窗口之中将焦点从一个窗口移动到另一窗口，或者选择提供到窗口的内容项目。
此外，根据示例性实施例，通过使用控制装置200的方向键、触摸板或指示功能，用户可执行输出的内容的音频数据的声音设置。
图6是示出根据示例性实施例的包括多个窗口的多窗口屏幕图像600的示图。
参照图6，提供到显示器115的多窗口屏幕图像600包括四个窗口，即窗口610、窗口620、窗口630及窗口640。在此使用的窗口是指当显示器115的屏幕图像被划分为多个区域时的各个局部屏幕图像并且可被称为各种术语，诸如屏幕局部或子屏幕。
虽然在图6中多窗口屏幕图像600包括四个窗口，但是多窗口屏幕图像600的示例性实施例不限于此。如果屏幕图像被划分为多个窗口，则多窗口屏幕图像可包括任何数量的窗口。例如，显示设备100可在多窗口屏幕图像中包括任何数量的窗口，诸如两个窗口、三个窗口、四个窗口或八个窗口。
显示设备100可将窗口用于再现不同应用或不同内容。换言之，显示设备100可将窗口独立地用于显示经由调谐器140接收到的TV广播节目、通过使用经由通信接口150接收到的数据输出web浏览屏幕图像或输出经由输入/输出接口170或存储器190接收到的数据。
在图6的示例中，显示设备100经由窗口610输出TV广播节目，经由窗口620提供互联网web浏览屏幕图像，经由窗口630输出关于当前正在广播的节目的信息，经由窗口640提供YouTube屏幕图像。
通过使用控制装置200的方向键、触摸面板或指示功能，用户可在多窗口屏幕图像600中包括的四个窗口(即窗口610、窗口620、窗口630及窗口640)之间移动焦点。
参照图6，着色带状物环绕窗口610的边缘以表示当前聚焦于窗口610。为了表现聚焦的窗口，也可将各种视觉效果提供到聚焦的窗口的边缘。
例如，用户可观看经由聚焦的窗口610正在输出的广播内容，然后通过使用控制装置200以选择窗口620以经由web浏览器屏幕图像执行互联网搜索。由于该用户选择，可将焦点从窗口610移动到窗口620，然后，着色的带状物例如可环绕窗口620的边缘以表示窗口620是聚焦的窗口。
当显示器115的屏幕被用于提供多窗口屏幕图像时，可将多个窗口提供到多窗口屏幕图像，可将包括音频/视频数据的多个不同内容分别输出到多个窗口。虽然因为屏幕被划分所以可经由多个窗口输出多个视频数据，但是由于音频数据的特性因此在许多情况下同时输出多个音频数据是毫无意义的。因此，当实现多窗口屏幕图像时，可将音频数据设置为从多个窗口中的一个中输出声音。因此，当经由其输出声音的窗口被固定时，其声音被输出的内容可被控制为一直经由被固定的窗口输出，因此，窗口控制被限制。此外，为了改变经由其输出声音的窗口，用户可手动设置经由其输出声音的窗口，由此造成用户不便。根据示例性实施例，该用户不便被解决以根据内容选择或焦点移动来适应性地控制声音输出。
图7是根据示例性实施例的操作显示设备100的方法700的流程图。图8A、图8B、图8C和图8D是示出图7的方法的示图。
参照图7，在操作710，显示设备100检测在构成多窗口屏幕图像的多个窗口之中从一个窗口到另一窗口的焦点移动。
如图8A所示，显示设备100提供包括具有相同尺寸的两个窗口的多窗口屏幕图像。
参照图8A，显示设备100提供包括两个窗口(即窗口810和窗口820)的多窗口屏幕图像800。例如，可经由窗口810输出经由互联网接收到的内容，可经由窗口820输出TV广播节目内容。
显示设备100的控制器180可控制经由通信接口150接收到的内容在显示器115的多窗口屏幕图像800的窗口810上输出。显示设备100的控制器180可控制经由调谐器140接收到的TV广播节目内容在显示器115的多窗口屏幕图像800的窗口820上输出。
可在控制器180的控制下基于在存储器190中预设的信息或在控制器180的控制下基于经由通信接口150或传感器160接收到的用户设置信息由显示器115提供构成多窗口屏幕图像800的窗口的数量。
此外，可在控制器180的控制下基于在存储器190中预存储的信息或在控制器180的控制下基于经由通信接口150或传感器160接收到的用户设置信息由显示器115提供将在多窗口屏幕图像800的各个窗口上再现的内容的源。
根据示例性实施例，控制器180可控制音频输出接口125以输出经由正被聚焦的窗口810输出的内容的音频数据。
根据示例性实施例，控制器180控制显示器115在正被聚焦的窗口810的区域上输出预定义图标840以表示正在输出经由聚焦的窗口810输出的内容的音频数据。预定义图标840是图8A中的扬声器图像，不过示例性实施例不限于此，预定义图标840可以是任意图像形状。
根据示例性实施例，控制器180控制显示器115以在窗口810的边缘上显示着色带状物830以指示聚焦于窗口810。
根据示例性实施例，正在观看经由聚焦的窗口810输出的内容的用户可通过使用控制装置200将焦点从窗口810移动到窗口820以选择经由窗口820输出的内容。
例如，用户可通过按压在控制装置200的四个方向键之中的右方向键、通过在控制装置200的触摸面板上向右拖曳或通过使用指示装置来将焦点从聚焦的窗口810移动到窗口820。控制器180可通过经由传感器160从控制装置200接收窗口焦点移动信号来检测焦点移动。
参照图8B，响应于焦点移动的检测，控制器180在窗口820的边缘上显示着色带状物830以表示焦点已经从窗口810移动到窗口820。
参照回到图7，在操作720，响应于从一个窗口到另一窗口的焦点移动，显示设备100分析在聚焦的窗口上再现的内容的流。
当控制器180经由传感器160检测到从一个窗口到另一窗口的焦点移动时，控制器180分析经由聚焦的窗口820再现的内容的流。控制器180可通过分析例如如图9所示的节目映射表(PMT)的数据来分析经由聚焦的窗口820再现的内容的流。
图9是示出根据示例性实施例的PMT900的示图。
参照图9，PMT900包含关于节目的信息。针对一个节目存在一个PMT。PMT900提供作为关于在传输流中存在的每个节目的信息的节目号码910、选择性地描述整个MPEG-2节目的描述符的位置920、关于每个基本流的选择性描述符930、包括描述的MPEG-2节目的基本流的列表940。利用“stream_value”值960标记每个基本流950。“stream_value”值960表示每个基本流950是音频还是视频。因此，控制器180可通过分析“stream_value”值960来确定在节目中是否包括音频数据。
通过使用在如图9所示的PMT中包括的指示音频流的存在或不存在的信息，当PMT包括关于音频流的信息时，控制器180可确定与PMT相应的内容包括音频数据，并且当PMT不包括关于音频流的信息时，确定相应内容不包括音频数据。
返回参照图7，在操作730，显示设备100基于在聚焦的窗口上再现的内容的流的分析的结果输出音频数据。
根据示例性实施例，当在聚焦的窗口上再现的内容的流中包括音频信息时，控制器180可控制音频输出接口125以输出在聚焦的窗口在再现的内容中包括的音频数据。
根据示例性实施例，如图8B所示，控制器180控制显示器115以在聚焦的窗口820的区域上显示预定图标840，从而表示正在输出在聚焦的窗口820上正被再现的内容中包括的音频数据。
根据示例性实施例，当未从在聚焦的窗口上再现的内容的流中检测到音频信息时，控制器180可控制音频输出接口125以保持输出焦点已经从其开始移动的窗口所使用的音频数据。
参照图8D，根据示例性实施例，为了表示保持已经由从其开始移动焦点的窗口使用的音频数据的输出，控制器180控制音频输出接口125以在从其开始移动焦点的窗口810上继续显示预定图标840，尽管已经将焦点移动到窗口820。
例如，当在新聚焦的窗口上再现的内容是运动图像内容时，音频数据可存在于所述内容中。另一方面，当在新聚焦的窗口上正在输出web浏览屏幕图像或在其上正在输出在USB存储器中包括的文件夹时，音频数据可能不存在。因此，当音频内容存在于在新聚焦的窗口820上再现的内容中时，输出音频数据。当音频内容不存在于在新聚焦的窗口820上再现的内容中时，即使用户想要输出音频数据，因为没有音频数据存在于所述内容中，所以可不输出音频数据。因此，当没有音频数据存在于经由新聚焦的窗口820输出的内容中时，可保持已经在先前聚焦的窗口810上输出的内容的音频数据的输出。
参照图8C，根据示例性实施例，当控制器180控制音频输出接口125以输出在经由聚焦的窗口再现的内容中包括的音频数据时，控制器180控制显示器115以在当前聚焦的窗口上输出UI850以设置音频数据的声音。
参照图8C，针对声音设置的UI850显示用于表示针对声音设置的UI的项目851以及指导用户设置声音的消息852。消息852可以是<请设置当前聚焦的窗口的声音。>。
UI850也显示用于设置声音的条853，用户可通过使用控制装置200选择在条853上的位置854并通过使用控制装置200的方向键、在触摸板上的拖曳操作或指示装置将位置854移动到与期望的声音相应的位置来设置声音。
图10是根据另一示例性实施例的操作显示设备100的方法1000的流程图。图11A、图11B、图11C和图11D是示出图10的方法的示图。
参照图10，在操作1010，显示设备100检测用于选择提供到构成多窗口屏幕图像的多个窗口中的一个的内容项目的输入。
已经在上文中参照图7描述显示设备100对包括多个窗口的多窗口屏幕图像的提供。
图11A示出多窗口屏幕图像1100包括四个窗口1110、1120、1130及1140的示例。
参照图11A，在窗口1110上输出经由互联网接收到的内容，在窗口1120上输出TV广播节目，在窗口1130上输出广播频道信息，在窗口1140上输出YouTube屏幕图像。
在窗口1110的边缘上显示用于表示窗口1110被聚焦的着色带状物1150。为了表示正在输出在当前聚焦的窗口1110上正被再现的内容的音频数据，控制器180控制显示器115以在窗口1110上的预定区域上输出扬声器图像图标1170。
在这种状态下，例如，用户可将焦点移动到在其上输出YouTube屏幕图像的窗口1140并选择在已经将焦点移动到窗口1140上显示的内容项目中的一个。
换言之，用户可通过使用控制装置200将焦点移动到窗口1140。图11B示出在窗口1140上的着色带状物1150以表示已经将焦点移动到窗口1140。
随后，用户可通过使用控制装置200选择在当前聚焦的窗口1140上显示的内容项目中的一个。参照图11C，用户通过使用控制装置200已经选择内容项目1160，控制器180控制显示器115将视觉效果提供到内容项目1160以表示已经选择内容项目1160。
当控制器180经由传感器160从控制装置200接收到由用户产生的焦点移动信号和内容项目选择信号时，控制器180可检测选择提供到多个窗口中的一个的内容项目的输入。
返回参照图10，在操作1020，响应于选择内容项目的输入的检测，显示设备100输出与所选择的内容项目相应的内容。
例如，参照图11D，控制器180可检测用于选择在聚焦的窗口1140上的内容项目1160的用户输入并控制显示器115以在多个窗口中的一个上输出与所选择的内容项目1160相应的内容。
根据示例性实施例，控制器180可控制与所选择的内容项目1160相应的内容在除先前聚焦的窗口1110以外的窗口上输出。
根据示例性实施例，控制器180可控制与所选择的内容项目1160相应的内容在当前聚焦的窗口1140上输出。
根据示例性实施例，参照图11D，控制器180控制显示器115以在窗口1120上输出与所选择的内容项目1160相应的内容。
返回参照图10，在操作1030，显示设备100控制音频输出接口125以基于与所选择的内容项目相应的内容的流的分析的结果输出音频数据。
如上参照图7所述，当基于所选择的内容的流的分析从所选择的内容的流中检测到音频信息时，控制器180可控制音频输出接口125以输出与音频信息相应的音频数据。参照图11D，为了表示正在输出当前再现的内容的音频数据，控制器180控制显示器115以在窗口1120上的预定位置上输出扬声器图像图标1170。
当基于所选择的内容的流的分析未从所选择的内容的流中检测到音频信息时，控制器180可控制音频输出接口125以保持输出已经在先前聚焦的窗口1110上输出的音频数据。
图12是根据另一示例性实施例的操作显示设备100的方法1200的流程图。图13A、图13B、图13C和图13D是示出图12的方法的示图。
参照图12，在操作1210，显示设备100检测在构成多窗口屏幕图像的多个窗口之中从一个窗口到另一窗口的焦点移动。
图13A示出多窗口屏幕图像1300包括四个窗口1310、1320、1330及1340的示例。
参照图13A，在窗口1310上输出经由互联网接收到的内容，在窗口1320上输出web浏览屏幕图像，在窗口1330上输出广播频道信息，在窗口1340上输出YouTube屏幕图像。
在窗口1310的边缘上显示用于表示聚焦于窗口1310的着色带状物1350。为了表示正在输出在当前聚焦的窗口1310上正被再现的内容的音频数据，在窗口1310上的预定区域上显示扬声器图像图标1360。
在多窗口屏幕图像上的焦点移动的检测中，如上参照图7所述，控制器180可经由传感器160从检测控制装置200中检测焦点移动信号。参照图13B，用户将焦点从窗口1310移动到窗口1330并且根据焦点移动的检测输出着色带状物1350以表示当前聚焦于窗口1330。
返回参照图12，在操作1220，响应于焦点移动的检测，显示设备100识别在聚焦的窗口上执行的应用的类型或外部源的类型。
在操作1230，基于识别出的应用或外部源的类型，显示设备100控制音频数据的输出。
当根据来自传感器160的信号检测到焦点移动时，响应于焦点移动的检测，控制器180可识别在聚焦的窗口上执行的应用的类型或外部源的类型。
根据示例性实施例，参照图13B，聚焦的窗口1330执行显示广播频道信息的应用。未从显示广播频道信息的应用中检测到音频信息。因此，控制器180可控制继续输出先前聚焦的窗口1310的内容的音频数据。为了指示输出在先前聚焦的窗口1310上正被再现的内容的音频数据，在窗口1310上的预定区域上显示扬声器图像图标1360。
根据示例性实施例，参照图13C，聚焦于窗口1320并且聚焦的窗口1320正在执行web浏览应用。未从web浏览应用中检测到音频信息。因此，控制器180可控制继续输出先前聚焦的窗口1310的内容的音频数据。为了指示输出在先前聚焦的窗口1310上正被再现的内容的音频数据，在窗口1310上的预定区域上继续显示扬声器图像图标1360。
根据示例性实施例，参照图13D，聚焦于窗口1370并且聚焦的窗口1370显示作为外部源的USB数据空间。未从显示外部源的数据空间的应用中检测到音频信息。因此，控制器180可控制继续输出先前聚焦的窗口1310的内容的音频数据。为了表示输出在先前聚焦的窗口1310上正被再现的内容的音频数据，在窗口1310上的预定区域上继续显示扬声器图像图标1360。
根据示例性实施例，参照图13E，聚焦于窗口1340并且聚焦的窗口1340显示YouTube屏幕图像。在YouTube屏幕图像上示出可选择的内容项目。在所述YouTube屏幕图像上选择内容项目，然后再现与所选择的内容项目相应的内容。然而，在选择内容项目之前，所述YouTube屏幕图像可默认输出预定音频数据。因此，控制器180可控制音频输出接口125以输出在聚焦的窗口1340上执行的应用的默认音频数据。在这种情况下，为了表示输出在聚焦的窗口1340上正被再现的内容的音频数据，在窗口1340的预定区域上显示扬声器图像图标1360。
图14是根据另一示例性实施例的操作显示设备100的方法1400的流程图。图15是示出图14的方法的示图。
参照图14，在操作1410，显示设备100检测在构成多窗口屏幕图像的多个窗口之中从一个窗口到另一窗口的焦点移动。
在操作1420，响应于焦点移动的检测，显示设备100识别在聚焦的窗口上可再现的内容项目。
在操作1430，显示设备100控制显示器115以将视觉效果输出到识别出的内容项目。
例如，参照图15，当控制器180检测到从窗口1310到窗口1340的焦点移动时，响应于所述检测，控制器180可识别在由聚焦的窗口1340输出的内容项目之中可再现的内容项目。例如，当在聚焦的窗口1340上显示多个内容项目1341、1342、1343、1344、1345及1346时，通过使用例如由聚焦的窗口1340输出的数据的元信息，控制器180可在内容项目1341、1342、1343、1344、1345及1346之中辨别可再现的内容项目与不可再现而仅被显示的内容项目。当控制器180识别出在多个内容项目1341、1342、1343、1344、1345及1346之中的可再现的内容项目1341时，控制器180控制显示器115在内容项目1341上产生表示已经选择识别出的可再现的内容项目1341的视觉效果1370。通过利用视觉效果1370显示所选择的可再现的内容项目1341，用户可通过使用控制装置200跳过再次从聚焦的窗口中搜索可再现的内容项目的处理，并且可通过使用控制装置200经过仅选择所选择的可再现的内容项目1341的操作来再现与所选择的可再现的内容项目相应的内容。
根据示例性实施例，当用户使用包括多个窗口的多窗口屏幕图像并想要将焦点从一个窗口移动到另一窗口或选择并再现提供到窗口的内容项目时，为了用户的便利，可自然地提供声音输出。
另外，也可通过在介质(例如，计算机可读介质)上的计算机可读代码和/或指令实施示例性实施例以控制至少一个处理元件来实施示例性实施例。所述介质可与可充当存储器和/或执行计算机可读代码的传输的任何介质相应。
可按照多种方式在介质上记录和/或传输计算机可读代码，所述介质的示例包括记录介质(诸如磁存储介质(例如，ROM、软盘、硬盘等))、光学记录介质(诸如，压缩盘只读存储器(CD-ROM)或数字通用盘(DVD))以及传输介质(诸如互联网传输介质)。因此，根据一个或更多个示例性实施例，所述介质可具有适合于存储或携带信号或信息的结构，诸如携带比特流的装置。所述介质也可在分布式网络上，使得按照分布方式在介质上存储和/或传输并执行计算机可读代码。另外，处理元件可包括处理器或计算机处理器，可分布处理元件和/或在单个装置中包括处理元件。
前述示例性实施例是示例并且不被理解为限制性的。本教导能够被容易地应用于其它类型的设备。此外，期望示例性实施例的描述是示意性的并且并不限制权利要求的范围，许多可选方案、修改及变化对于本领域技术人员而言将是清楚的。

Claims (15)

1.一种显示设备，包括：
显示器，被配置为显示包括多个窗口的多窗口屏幕图像；
音频输出接口；
控制器，被配置为：
检测焦点在所述多个窗口之中从一个窗口到另一窗口的移动；
响应于控制器检测到焦点的移动，分析在聚焦的另一窗口中再现的内容的流；以及
基于分析来控制音频输出接口输出音频数据。
2.如权利要求1所述的显示设备，其中，控制器还被配置为：基于分析来控制显示器在所述窗口或所述聚焦的另一窗口上显示指示所述窗口或所述聚焦的另一窗口的音频数据被输出的图标。
3.如权利要求1所述的显示设备，其中，控制器还被配置为确定所述内容的流是否包括音频数据。
4.如权利要求3所述的显示设备，其中，控制器还被配置为：响应于控制器确定所述内容的流包括音频数据，控制音频输出接口输出所述内容的流的音频数据。
5.如权利要求4所述的显示设备，其中，控制器还被配置为：响应于控制器确定所述内容的流包括音频数据，控制显示器在所述聚焦的另一窗口上显示指示所述聚焦的另一窗口的音频数据被输出的图标。
6.如权利要求3所述的显示设备，其中，控制器还被配置为：响应于控制器确定所述内容的流不包括音频数据，控制音频输出接口保持焦点从其开始被移动的所述窗口的音频数据的输出。
7.一种显示设备，包括：
显示器，被配置为显示包括多个窗口的多窗口屏幕图像，并在所述多个窗口中的至少一个窗口中显示内容项目；
音频输出接口；
控制器，被配置为：
检测用于选择内容项目的输入；
控制显示器显示所选择的内容项目的内容；以及
基于对所选择的内容项目的内容的流的分析来控制音频输出接口输出音频数据。
8.如权利要求7所述的显示设备，其中，控制器还被配置为控制显示器在所述多个窗口之中除聚焦的窗口以外的窗口中显示所选择的内容项目的内容。
9.如权利要求7所述的显示设备，其中，控制器还被配置为确定所述内容的流是否包括音频数据。
10.如权利要求9所述的显示设备，其中，控制器还被配置为：响应于控制器确定所述内容的流包括音频数据，控制音频输出接口输出所述内容的流的音频数据。
11.一种显示方法，包括：
显示包括多个窗口的多窗口屏幕图像；
检测焦点在所述多个窗口之中从一个窗口到另一窗口的移动；
响应于检测到焦点的移动，分析在聚焦的另一窗口中再现的内容的流；
基于分析来输出音频数据。
12.如权利要求11所述的显示方法，还包括：基于分析在所述窗口或所述聚焦的另一窗口上显示指示所述窗口或所述聚焦的另一窗口的音频数据被输出的图标。
13.如权利要求11所述的显示方法，其中，分析步骤包括：确定所述内容的流是否包括音频数据。
14.如权利要求13所述的显示方法，其中，输出步骤包括：响应于确定所述内容的流包括音频数据，输出所述内容的流的音频数据。
15.一种显示方法，包括：
显示包括多个窗口的多窗口屏幕图像，并在所述多个窗口中的至少一个窗口中显示内容项目；
检测用于选择内容项目的输入；
显示所选择的内容项目的内容；基于所选择的内容项目的内容的流的分析，输出音频数据。
CN201510809101.8A 2014-11-20 2015-11-20 显示设备和显示方法 Pending CN105635609A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2014-0162605 2014-11-20
KR1020140162605A KR20160060846A (ko) 2014-11-20 2014-11-20 디스플레이 장치 및 디스플레이 방법

Publications (1)

Publication Number Publication Date
CN105635609A true CN105635609A (zh) 2016-06-01

Family

ID=54707543

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510809101.8A Pending CN105635609A (zh) 2014-11-20 2015-11-20 显示设备和显示方法

Country Status (5)

Country Link
US (1) US10203927B2 (zh)
EP (1) EP3024220A3 (zh)
KR (1) KR20160060846A (zh)
CN (1) CN105635609A (zh)
WO (1) WO2016080700A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108282687A (zh) * 2017-12-15 2018-07-13 北京歌华有线电视网络股份有限公司 一种数字电视播放方法及一种机顶盒
CN114302070A (zh) * 2021-04-30 2022-04-08 海信视像科技股份有限公司 显示设备和音频输出方法

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102213212B1 (ko) * 2014-01-02 2021-02-08 삼성전자주식회사 멀티윈도우 제어 방법 및 이를 지원하는 전자 장치
CN104793916A (zh) * 2014-01-20 2015-07-22 中兴通讯股份有限公司 一种在分屏终端进行声音控制的方法和系统
KR20170117843A (ko) * 2016-04-14 2017-10-24 삼성전자주식회사 멀티 스크린 제공 방법 및 그 장치
JP6954914B2 (ja) * 2016-09-29 2021-10-27 ソニーグループ株式会社 情報処理端末、情報処理方法、およびプログラム
US20180373800A1 (en) * 2017-06-27 2018-12-27 Alan Pizer Method of storing and ordering interactive content data in localized and connected content data structures
CN111291220B (zh) * 2020-01-20 2021-07-13 北京字节跳动网络技术有限公司 标签展示方法、装置、电子设备和计算机可读介质
CN111459447B (zh) * 2020-03-31 2023-05-19 维沃移动通信有限公司 一种音量调节显示方法及电子设备

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2260873A (en) * 1991-10-22 1993-04-28 Canon Kk Audio output selection in a multi-window display system
CN1218598A (zh) * 1996-03-15 1999-06-02 E盖德公司 用于显示电视节目和相关文本的方法和装置
US20060059525A1 (en) * 1999-12-13 2006-03-16 Jerding Dean F Media services window configuration system
US20070039032A1 (en) * 2005-08-11 2007-02-15 Echostar Technologies Corporation Method and system for toasted video distribution
US20080111822A1 (en) * 2006-09-22 2008-05-15 Yahoo, Inc.! Method and system for presenting video
US20090037966A1 (en) * 2007-05-04 2009-02-05 Rolls James A Displaying an Information Ticker in Association with a Personalized Video Mosaic in a Television Services Network
CN101959055A (zh) * 2009-05-29 2011-01-26 尼尔森（美国）有限公司 对包括多个内容窗口的多媒体呈现进行监视的方法和装置
US20110078733A1 (en) * 2009-09-30 2011-03-31 Suzin Lee Controlling program guide in broadcast receiving device
CN102194435A (zh) * 2011-04-12 2011-09-21 四川长虹电器股份有限公司 多端口显示设备的信号源显示的切换方法
CN103279517A (zh) * 2013-05-27 2013-09-04 中山爱科数字科技股份有限公司 一种网页内容的展示方法
CN103493486A (zh) * 2011-04-28 2014-01-01 松下电器产业株式会社 影像显示装置以及影像显示方法
US20140245148A1 (en) * 2013-02-25 2014-08-28 Savant Systems, Llc Video tiling
WO2014182140A1 (en) * 2013-05-10 2014-11-13 Samsung Electronics Co., Ltd. Display apparatus and method of providing a user interface thereof

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1675392A3 (en) 1996-03-15 2009-09-09 Gemstar Development Corporation Method and apparatus for displaying television programs and related text
KR100635277B1 (ko) * 2004-08-06 2006-10-19 삼성전자주식회사 Ｐｉｐ 영상 선택방법
WO2006119558A1 (en) 2005-05-11 2006-11-16 On Q Technologies Pty Ltd Effecting ancillary actions on an established transaction network
US20080063215A1 (en) * 2006-09-07 2008-03-13 Ati Technologies Ulc Multi-window picture audio visual system with targeted audio
KR20090015260A (ko) * 2007-08-08 2009-02-12 삼성전자주식회사 다중 영상 표시 장치의 음향 출력 방법과 시스템 및 이에이용되는 이동통신 단말기
KR101414898B1 (ko) * 2007-10-02 2014-07-03 엘지전자 주식회사 디스플레이 기기를 이용한 멀티비전의 구성 및 제어 방법
JP2009135576A (ja) * 2007-11-28 2009-06-18 Sony Corp 音声出力制御装置及び音声出力制御方法
US9774927B2 (en) 2012-12-21 2017-09-26 Telefonaktiebolaget L M Ericsson (Publ) Multi-layer video stream decoding
US20140181992A1 (en) 2012-12-21 2014-06-26 Michael Alexander Janson Multi-tenant content provider
US20140365888A1 (en) * 2013-06-05 2014-12-11 Narrable, Llc User-controlled disassociation and reassociation of audio and visual content in a multimedia presentation
EP3235785B1 (de) 2016-04-22 2019-01-02 L'air Liquide, Société Anonyme Pour L'Étude Et L'exploitation Des Procédés Georges Claude Verfahren und anlage zur erzeugung von synthesegas mittels katalytischer dampfreformierung eines kohlenwasserstoffhaltigen einsatzgases

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2260873A (en) * 1991-10-22 1993-04-28 Canon Kk Audio output selection in a multi-window display system
CN1218598A (zh) * 1996-03-15 1999-06-02 E盖德公司 用于显示电视节目和相关文本的方法和装置
US20060059525A1 (en) * 1999-12-13 2006-03-16 Jerding Dean F Media services window configuration system
US20070039032A1 (en) * 2005-08-11 2007-02-15 Echostar Technologies Corporation Method and system for toasted video distribution
US20080111822A1 (en) * 2006-09-22 2008-05-15 Yahoo, Inc.! Method and system for presenting video
US20090037966A1 (en) * 2007-05-04 2009-02-05 Rolls James A Displaying an Information Ticker in Association with a Personalized Video Mosaic in a Television Services Network
CN101959055A (zh) * 2009-05-29 2011-01-26 尼尔森（美国）有限公司 对包括多个内容窗口的多媒体呈现进行监视的方法和装置
US20110078733A1 (en) * 2009-09-30 2011-03-31 Suzin Lee Controlling program guide in broadcast receiving device
CN102194435A (zh) * 2011-04-12 2011-09-21 四川长虹电器股份有限公司 多端口显示设备的信号源显示的切换方法
CN103493486A (zh) * 2011-04-28 2014-01-01 松下电器产业株式会社 影像显示装置以及影像显示方法
US20140245148A1 (en) * 2013-02-25 2014-08-28 Savant Systems, Llc Video tiling
WO2014182140A1 (en) * 2013-05-10 2014-11-13 Samsung Electronics Co., Ltd. Display apparatus and method of providing a user interface thereof
CN103279517A (zh) * 2013-05-27 2013-09-04 中山爱科数字科技股份有限公司 一种网页内容的展示方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108282687A (zh) * 2017-12-15 2018-07-13 北京歌华有线电视网络股份有限公司 一种数字电视播放方法及一种机顶盒
CN114302070A (zh) * 2021-04-30 2022-04-08 海信视像科技股份有限公司 显示设备和音频输出方法

Also Published As

Publication number Publication date
EP3024220A3 (en) 2016-07-13
EP3024220A2 (en) 2016-05-25
US10203927B2 (en) 2019-02-12
US20160147496A1 (en) 2016-05-26
WO2016080700A1 (en) 2016-05-26
KR20160060846A (ko) 2016-05-31

Similar Documents

Publication Publication Date Title
CN105635609A (zh) 显示设备和显示方法
KR102354328B1 (ko) 영상 표시 장치 및 그 동작 방법
US10536742B2 (en) Display apparatus and display method
KR102347069B1 (ko) 전자 장치 및 그 동작방법
US20150237290A1 (en) Remote controller and method for controlling screen thereof
CN107636749B (zh) 图像显示设备及其操作方法
KR20160097867A (ko) 영상 표시 장치 및 영상 표시 방법
KR102414806B1 (ko) 영상 표시 장치 및 영상 표시 방법
JP2020532208A (ja) ディスプレイ装置及びその動作方法
US20170171629A1 (en) Display device and method for controlling the same
US20170026707A1 (en) Electronic device for providing information associated with broadcast content and method thereof
KR20180057473A (ko) 디스플레이 장치 및 컨텐츠를 디스플레이하는 방법
US10742880B2 (en) Image display apparatus and method of displaying image
EP3038374A1 (en) Display device and display method
US10142579B2 (en) Display apparatus and display method
KR102121535B1 (ko) 전자 장치, 보조 장치 및 전자 장치의 동작 방법
US20170185245A1 (en) Image display apparatus and method of displaying image
CN107667342B (zh) 电子装置和用于控制电子装置的声音的方法
KR102659287B1 (ko) 영상 표시 장치 및 그 동작 방법
KR20170076475A (ko) 영상 표시 장치 및 영상 표시 방법
KR20150010872A (ko) 디스플레이 장치 및 이의 ui 제공 방법
KR20160097392A (ko) 디스플레이 장치 및 이의 ｕｉ 제공 방법
KR20180098056A (ko) 영상 표시 장치 및 그 동작 방법
KR20200062868A (ko) 디스플레이 장치의 제어 방법 및 그에 따른 디스플레이 장치
KR20170101077A (ko) 서버, 영상 표시 장치 및 그 동작 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160601