CN107852531A - 显示装置及其控制方法 - Google Patents

显示装置及其控制方法 Download PDF

Info

Publication number
CN107852531A
CN107852531A CN201580082161.2A CN201580082161A CN107852531A CN 107852531 A CN107852531 A CN 107852531A CN 201580082161 A CN201580082161 A CN 201580082161A CN 107852531 A CN107852531 A CN 107852531A
Authority
CN
China
Prior art keywords
details
magnifying power
information
specific region
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580082161.2A
Other languages
English (en)
Other versions
CN107852531B (zh
Inventor
A·P·坎达加尔
K·S·塞卡尔
R·S·索拉达
R·B·马勒格达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN107852531A publication Critical patent/CN107852531A/zh
Application granted granted Critical
Publication of CN107852531B publication Critical patent/CN107852531B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42221Transmission circuitry, e.g. infrared [IR] or radio frequency [RF]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Abstract

本发明涉及一种显示装置及其控制方法,并且本发明的目的在于将内容显示在所述显示装置的主画面上,根据从遥控器接收到的放大模式输入请求来进入所述放大模式,从所述遥控器接收用于从显示在所述主画面上的整个区域中选择特定区域的输入,根据所接收到的选择输入以预定放大率放大所选择的特定区域,将放大后的特定区域显示在所述主画面上,并且根据所述预定放大率将所述放大后的特定区域的特定信息以不同的方式显示在所述主画面的PIP画面上。

Description

显示装置及其控制方法
技术领域
本发明涉及无线通信系统,更具体地,涉及一种用于当放大特定区域时根据放大率以不同的方式显示该特定区域的详细信息的技术。
背景技术
近来,诸如智能电视这样的显示装置已被许多用户使用。随着高价定制化内容市场的扩大和其类型的多样化,用户对定制图像的需求也增加。
根据相关技术,当用户执行对包括地图信息的内容中的用户感兴趣的特定部分区域进行放大的功能时,特定区域被放大,并且放大后的特定区域被显示在画面上。在这种情况下,用户可能期望在同一画面上同时看到该特定区域以及与该特定区域相关的信息。然而,这尚未被实现。也就是说,由于用户应该独立地执行搜索功能以查看与特定区域相关的详细信息,因此用户感到不便。
发明内容
技术任务
因此,本发明的一个目的在于提供一种显示装置及其控制方法。具体地,当接收到用于从整个区域中选择特定区域的输入时,显示装置能够将特定区域放大,并且根据放大率将放大后的特定区域和该特定区域的详细信息以不同的方式显示在主画面上,因此用户能够同时检查特定区域和该特定区域的详细信息。
本发明的另一个目的在于提供一种显示装置及其控制方法。具体地,当从遥控器接收到用于选择详细信息的输入时,显示装置能够将详细信息显示在主画面上,并且将与详细信息相关但比其更详细的信息显示在PIP画面上,因此用户能够容易地检查所述更详细的信息。
本发明的又一个目的在于提供一种显示装置及其控制方法。具体地,当在主画面上不能显示详细信息时,显示装置能够搜索包括在详细信息中的对象,因此用户能够容易地检查与详细信息关联的搜索结果。
本发明的又一个目的在于提供一种显示装置,该显示装置通过根据放大率和内容的类型将详细信息以不同的方式显示在主画面上来使得用户能够根据内容的特性容易地获得详细信息。
技术方案
为了实现这些目的和其它优点,在本发明的一方面,本文提供了一种用于控制显示装置的方法,该方法包括以下步骤:将内容显示在所述显示装置的主画面上;根据从遥控器接收到的用于请求放大模式的输入来进入所述放大模式;从所述遥控器接收用于从显示在所述主画面上的整个区域中选择特定区域的输入;根据所接收到的选择输入以预定放大率放大所选择的特定区域;将放大后的特定区域显示在所述主画面上;以及根据所述预定放大率将所述放大后的特定区域的详细信息以不同的方式显示在所述主画面内的PIP画面上。在这种情况下,所述内容可包括视频。
在本发明的另一方面,本文提供了一种显示装置,该显示装置包括:显示模块,该显示模块被配置为将内容显示在所述显示装置的主画面上;接口模块,该接口模块被配置为从遥控器接收用于请求放大的输入和用于从显示在所述主画面上的整个区域中选择特定区域的输入;以及控制器,该控制器被配置为控制所述显示模块和所述接口模块。在这种情况下,所述控制器可以被配置为:根据从所述遥控器接收到的用于请求放大模式的输入来进入所述放大模式,从所述遥控器接收用于从显示在所述主画面上的整个区域中选择所述特定区域的输入,根据所接收到的选择输入以预定放大率放大所选择的特定区域,将放大后的特定区域显示在所述主画面上,并且根据所述预定放大率将所述放大后的特定区域的详细信息以不同的方式显示在所述主画面内的PIP画面上,并且所述内容可包括视频。
有益效果
根据本发明的一个实施方式,当接收到用于从整个区域中选择特定区域的输入时,显示装置可将该特定区域放大,并且根据放大比率将放大后的特定区域和该特定区域的详细信息以不同的方式显示在主画面上。因此,用户能够同时检查特定区域和该特定区域的详细信息,因此提高了用户便利性。
根据本发明的另一实施方式,当从遥控器接收到用于选择详细信息的输入时,显示装置能够将详细信息显示在主画面上,并且将与该详细信息相关但比其更详细的信息显示在PIP画面上。因此,用户能够容易地检查所述更详细的信息,因此提高了用户便利性。
根据本发明的又一实施方式,当在主画面上不能显示详细信息时,显示装置能够搜索包括在详细信息中的对象。因此,用户能够容易地检查与详细信息关联的搜索结果,因此提高了用户便利性。
根据本发明的又一实施方式,显示装置能够通过根据放大比率和内容的类型将详细信息以不同的方式显示在主画面上来使得用户能够根据内容的特性容易地获得详细信息。
附图说明
图1是用于说明包括根据本发明的实施方式的数字装置的服务系统的示意图。
图2是用于说明根据本发明的实施方式的数字装置的框图。
图3是用于说明根据本发明的另一实施方式的数字装置的框图。
图4是用于说明根据本发明的又一实施方式的数字装置的框图。
图5是用于说明根据本发明的实施方式的图2至图4的各个控制器的详细配置的框图。
图6是例示根据本发明的实施方式的连接到图2至图4的各个数字装置的输入单元的图。
图7是用于说明根据本发明的实施方式的webOS的架构的图。
图8是用于说明根据本发明的实施方式的webOS装置的架构的图。
图9是用于说明根据本发明的实施方式的webOS装置中的图形组合流程的图。
图10是用于说明根据本发明的实施方式的媒体服务器的图。
图11是用于说明根据本发明的实施方式的媒体服务器的配置的框图。
图12是用于说明根据本发明的实施方式的媒体服务器与TV服务之间的关系的图。
图13是例示根据本发明的实施方式的用于控制图像显示装置当中的任意一个的遥控装置的控制方法的图。
图14是例示根据本发明的实施方式的用于控制图像显示装置当中的任意一个的遥控装置的内部的框图。
图15是例示根据本发明的实施方式的多媒体装置的配置的框图。
图16是用于说明根据本发明的实施方式的多媒体装置的控制方法的流程图。
图17是例示根据本发明的实施方式的用于放大特定区域的模式(以下称为特定区域放大模式)被启用的情况的图。
图18是例示根据本发明的实施方式的当特定区域放大模式被启用时指针形状改变的情况的图。
图19是例示根据本发明的实施方式的当特定区域放大模式被启用时控制画面的示例的图。
图20是例示根据本发明的实施方式的当特定区域放大模式被启用时使用指针来移动放大的画面上的特定点的示例的图。
图21是例示根据本发明的实施方式的当特定区域放大模式被启用时使用遥控器来控制画面的示例的图。
图22是例示根据本发明的实施方式的通过与EPG信息的关联来自动地执行特定区域放大模式的示例的图。
图23是例示根据本发明的实施方式的通过与时移功能的关联来执行特定区域放大模式的示例的图。
图24是例示根据本发明的实施方式的在全屏与变焦画面之间切换的示例的图。
图25是例示根据本发明的实施方式的选择画面上的多个点并放大所选择的点的示例的图。
图26是例示根据本发明的实施方式的选择画面上的多个点并放大所选择的点的示例的图。
图27是例示根据本发明的实施方式的针对来自遥控器的坐标与输入视频不匹配的情况的解决方案的图。
图28是例示根据本发明的实施方式的针对要放大的特定区域在视频输出范围之外的情况的解决方案的图。
图29是例示根据本发明的实施方式的当输出视频数据时将画面分割成规定数量的部分画面,如果用户从所分割的画面选择画面,则放大所选择的画面,并且显示所放大的画面的示例的图。
图30是例示根据本发明的实施方式的当输出视频数据时控制器根据用户的选择将画面分割成四个、九个或十六个部分画面并且控制所分割的画面的示例的图。
图31是例示根据本发明的实施方式的在执行特定区域放大模式的同时调节放大比率的处理的图。
图32是例示根据本发明的实施方式的在执行特定区域放大模式的同时选择要放大的区域的处理的图。
图33是例示根据本发明的实施方式的在执行特定区域放大模式的同时消除相关指示物的处理的图。
图34是例示根据本发明的实施方式的在执行特定区域放大模式的同时再次显示所消除的相关指示物的处理的图。
图35是例示根据本发明的实施方式的显示装置的配置的框图。
图36是用于说明根据本发明的实施方式的显示装置的控制方法的流程图。
图37是用于说明根据本发明的实施方式的显示装置的控制方法的流程图。
图38是例示根据本发明的实施方式的根据放大率以不同的方式显示详细信息的图。
图39是例示根据本发明的实施方式的当没有更多相关详细信息时在画面上显示搜索窗口的图。
图40是例示根据本发明的实施方式的在PIP画面的每个区域中显示每条详细信息的图。
图41是例示根据本发明的实施方式的当画面被选择时显示装置移动该画面的图。
图42是例示根据本发明的实施方式的当画面被选择时移动装置移动该画面的图。
图43是例示根据本发明的实施方式的当画面被选择时导航装置移动画面的图。
图44是例示根据本发明的实施方式的内容包括地图信息的情况的图。
图45是例示根据本发明的实施方式的内容包括EPG信息的情况的图。
图46是例示根据本发明的实施方式的内容包括特定女演员(或演员)的情况的图。
图47是例示根据本发明的实施方式的内容包括旅游信息的情况的图。
图48是例示根据本发明的实施方式的内容包括关于演出的信息的情况的图。
图49是例示根据本发明的实施方式的内容包括关于演出的信息的情况的图。
图50是例示根据本发明的实施方式的用户使用语音从显示在画面上的多个车辆中指定特定车辆的图。
图51是例示在各种视图中显示由用户使用语音指定的车辆的示例的图。
具体实施方式
在下文中,将参照附图详细地描述本发明。
用于描述本发明的组件的术语“模块”和“单元”仅用于简化本发明的描述的目的。因此,术语“模块”和“单元”可互换使用。
此外,根据本发明的图像显示装置与例如除了广播节目接收功能之外还具有计算机支持功能的智能图像显示装置对应。由于图像显示装置能够浏览因特网以及接收广播节目,因此它可以具有诸如手写输入装置、触摸屏或空间遥控器这样的用户友好界面。此外,由于图像显示装置能够支持有线或无线互联网功能,因此它能够通过连接到因特网或网络来进行电子邮件发送/接收、网页浏览、银行业务、游戏等。为了实现这些功能,图像显示装置可基于标准的通用操作系统(OS)来操作。
根据本发明,可以向图像显示装置中的例如通用OS内核自由地添加各种应用/从图像显示装置中的例如通用OS内核自由地删除各种应用。因此,图像显示装置可执行各种用户友好的功能。图像显示装置可以是网络TV、HBBTV、智能TV等。在一些情况下,图像显示装置能够被实现为智能电话。
现在将详细地参考本发明的优选实施方式,在附图中例示了本发明的优选实施方式的示例。然而,本发明不限于这些实施方式。
尽管在本发明中使用的术语是从众所周知并使用的术语中选择的,但是本文使用的术语可以根据本领域操作者的意图或习惯、新技术的出现等而改变。此外,本发明中所提及的一些术语是申请人自行选择的,其具体含义在本说明书的相关部分中进行了描述。此外,要求不仅通过所使用的实际术语而且通过所涵盖的每个术语的含义来理解本发明。
如本文所阐述的根据本发明的数字装置可以是能够处理发送、接收、处理和输出数据、内容、服务、应用等中的至少一种功能的任何装置。数字装置可通过有线网络或无线网络与其它数字装置连接,与外部服务器配对或连接,并且通过所述连接,数字装置能够发送和接收规定的数据。数字装置的示例可包括诸如网络电视、混合广播宽带电视(HBBTV)、智能电视、互联网协议电视(IPTV)和个人计算机(PC)这样的常设装置或者诸如个人数字助理(PDA)、智能手机、平板计算机或笔记本计算机这样的移动/手持装置。在本说明书中,作为数字装置的示例,在图2中使用数字电视并且在图3中使用移动装置。此外,本说明书中的数字装置可包括纯面板配置、诸如机顶盒(STB)的配置或者装置、系统等的单套配置。
此外,本说明书中所描述的“有线/无线网络”是支持用于数字装置之间或者数字装置与外部服务器之间的配对或/和数据发送与接收的各种通信规范和/或协议的通信网络的通用名称。这些有线/无线网络包括由规范当前支持的所有通信网络或者未来将支持的所有通信网络,并且能够支持用于其的一个或更多个通信协议。这些有线/无线网络可通过用于有线连接的网络及其通信规范或协议(例如,USB(通用串行总线)、CVBS(复合视频消隐同步)、组件、S视频(模拟)、DVI(数字视频接口)、HDMI(高清多媒体接口)、RGB、D-SUB等)以及用于无线连接的网络和通信规范或协议(例如,蓝牙、RFID(射频识别)、IrDA(红外数据协会)、UWB(超宽带)、ZigBee、DLNA(数字生活网络联盟)、WLAN(无线LAN)、Wi-Fi、Wibro(无线宽带)、Wimax(全球微波接入互操作性)、HSDPA(高速下行链路分组接入)、LTE/LTE-A(长期演进/LTE-Advanced)、Wi-Fi直连等)来建立。
此外,如果在本公开中将装置命名为数字装置,则含义可根据上下文指示常设装置或移动装置,或者除非特别地提及,否则可用于指示二者。
此外,数字装置是支持广播接收功能、计算机功能或支持、至少一个外部输入等的智能装置,并且能够通过上述有线/无线网络支持电子邮件、web浏览、银行业务、游戏、应用等。此外,数字装置可包括接口(例如,手动输入装置、触摸屏、空间遥控器等)以支持至少一个输入或控制手段。
另外,数字装置可使用标准化的OS(操作系统)。具体地,对于一个实施方式,本说明书中所描述的数字装置使用Web OS。因此,数字装置可在Universal OS内核或Linux内核上处理各种服务或应用的添加、删除、修改、更新等,通过其可配置和提供更加用户友好的环境。
此外,上述数字装置可接收并处理外部输入。本文中,外部输入包括外部输入装置,即,能够通过经由有线/无线网络连接到上述数字装置来发送/接收并处理数据的任何输入装置或数字装置。例如,作为外部输入,包括游戏装置(例如,HDMI(高清多媒体接口)、Playstation、X-Box等)、打印装置(例如,智能电话、平板PC、口袋照片等)和数字装置(例如,智能TV、蓝光装置等)。
此外,本说明书中所描述的“服务器”意指向上述数字装置(即,客户端)供应数据或者从其接收数据的数字装置或系统,并且可被称为处理器。例如,服务器可包括提供网页、web内容或web服务的门户服务器、提供广告数据的广告服务器、提供内容的内容服务器、提供SNS(社交网络服务)的SNS服务器、由制造商提供的服务服务器、提供VoD(视频点播)或流服务的MVPD(多通道视频编程分配器)、提供支付服务的服务服务器等。
此外,在本说明书中,如果为了清楚起见而仅提及应用,则不仅可意指应用,而且可意指服务。另外,应用可以是基于webOS平台的web应用。
在下文中,将参照附图详细地描述本发明。
图1是例示包括根据本发明的一个实施方式的数字装置的服务系统的示意图。
参照图1,服务系统可包括内容提供商(CP)10、服务提供商(SP)20、网络提供商(NP)30以及家庭网络终端用户(HNED)(客户)40。HNED 40包括客户端100(即,根据本发明的数字装置)。
CP 10生成并提供各种内容。参照图1,CP 10可包括地面广播商、有线系统运营商(SO)、多系统运营商(MSO)、卫星广播商、各种互联网广播商、私有内容提供商(CP)等。此外,CP 10除了广播内容以外可生成并提供各种服务、应用等。
SP 20对CP 10所生成的内容进行服务打包,然后将其提供给HNED 40。例如,SP 20针对一个服务将第一地面广播商、第二地面广播商、有线MSO、卫星广播商、各种互联网广播商所生成的内容、应用等中的至少一个打包,然后将其提供给HNED40。
SP 20可按照单播或多播方式向客户端100提供服务。此外,SP 20可集中地将数据发送给许多预注册的客户端100。为此,可使用IGMP(互联网组管理协议)等。
CP 10和SP 20可按照一个实体的形式配置。例如,CP 10可通过生成内容,对所生成的内容进行服务打包,然后将其提供给HNED 40而起到SP 20的作用,反之亦然。
NP 30提供用于CP 10和/或SP 20与客户端100之间的数据交换的网络环境。
客户端100是属于HNED 40的客户。客户端100可通过例如经由NP 30建立家庭网络来接收数据,并且发送/接收用于各种服务(例如,VoD、流传输等)、应用等的数据。
为了保护所发送的内容,服务系统中的CP 10或/和SP 20可使用条件访问或内容保护手段。因此,客户端100可使用与条件访问或内容保护对应的诸如有线电视卡(CableCARD)(或POD(部署点))或可下载CAS(DCAS)的处理手段。
另外,客户端100也可通过网络使用交互服务。在这种情况下,客户端100可直接用作内容提供商。并且,SP 20可接收并将其发送给另一客户端等。
在图1中,CP 10或/和SP 20可以是将在本说明书中稍后描述的服务提供服务器。在这种情况下,服务器可意指根据需要拥有或包括NP 30。在以下描述中,尽管没有具体地提及,服务或服务数据包括内部服务或应用以及从外部接收的服务或应用,并且这种服务或应用可意指用于基于Web OS的客户端100的服务或应用数据。
图2是例示根据本发明的一个实施方式的数字装置的框图。
下文中,本说明书中所提及的数字装置可对应于图1所示的客户端100。
数字装置200可包括网络接口201、TCP/IP管理器202、服务传送管理器203、SI解码器204、demux或解复用器205、音频解码器206、视频解码器207、显示A/V和OSD(屏幕显示)模块208、服务控制管理器209、服务发现管理器210、SI和元数据数据库(DB)211、元数据管理器212、服务管理器213、UI管理器214等。
网络接口201可通过所接入的网络发送/接收IP(互联网协议)分组或IP数据报(以下称为IP包)。例如,网络接口201可通过网络从图1所示的服务提供商20接收服务、应用、内容等。
TCP/IP管理器202可参与发送给数字装置200的IP分组和从数字装置200发送的IP分组的传送,即,源与目的地之间的分组传送。TCP/IP管理器202可根据适当协议将接收的分组分类,并将分类的分组输出给服务传送管理器205、服务发现管理器210、服务控制管理器209、元数据管理器212等。
服务传送管理器203可负责控制所接收的服务数据。服务传送管理器203可例如利用RTP/RTCP来控制实时流数据。在使用RTP来发送实时流数据的情况下,服务传送管理器203可在服务管理器213的控制下根据RTP解析所接收的数据分组,然后将解析的数据分组发送给解复用器205或者将解析的数据分组保存到SI和元数据DB 211。服务传送管理器203可利用RTCP将网络接收信息反馈给服务提供服务器侧。
解复用器205可将所接收的分组解复用为音频数据、视频数据、SI(系统信息)数据等,然后将解复用的数据分别发送给音频/视频解码器206/207和SI解码器204。
SI解码器204可将解复用的SI数据,即,PSI(节目特定信息)、PSIP(节目和系统信息协议)、DVB-SI(数字视频广播-服务信息)、DTMB/CMMB(数字电视地面多媒体广播/编码移动多媒体广播)等的服务信息解码。并且,SI解码器204可将解码的服务信息保存到SI和元数据DB 211。例如,所保存的服务信息可通过响应于用户的请求由对应组件读取来使用。
音频解码器206和视频解码器207可分别将解复用的音频数据和解复用的视频数据解码。解码的音频和视频数据可通过显示单元208提供给用户。
应用管理器包括服务管理器213和用户接口(UI)管理器214,并且能够执行数字装置200的控制器的功能。可以说,应用管理器可管理数字装置200的总体状态,提供用户接口(UI),并且管理其它管理器。
UI管理器214利用OSD(屏幕显示)等来提供图形用户界面/用户界面(GUI/UI)。UI管理器214从用户接收键输入,然后根据该输入执行装置操作。例如,如果从用户接收到关于频道选择的键输入,则UI管理器214将键输入信号发送给服务管理器213。
服务管理器213可控制并管理诸如服务传送管理器203、服务发现管理器210、服务控制管理器209和元数据管理器212的服务相关管理器。
服务管理器213创建频道映射并响应于从UI管理器214接收的键输入利用所创建的频道映射来控制频道的选择等。服务管理器213可从SI解码器204接收服务信息,然后将所选择的频道的音频/视频PID设定给解复用器205。这种PID可用于解复用过程。因此,解复用器205利用PID对音频数据、视频数据和SI数据执行过滤(PID或区段过滤)。
服务发现管理器210可提供选择提供服务的服务提供商所需的信息。在从服务管理器213接收到选择频道的信号时,服务发现管理器210利用该信息来搜索服务。
服务控制管理器209可选择和控制服务。例如,服务控制管理器209可在用户选择实时广播服务时使用IGMP(互联网组管理协议)或实时流协议(RTSP),在用户选择视频点播(VOD)服务时使用RTSP来执行服务选择和控制。RTSP协议可为实时流传输提供技巧模式。并且,服务控制管理器209可利用IMS(IP多媒体子系统)和SIP(会话发起协议)通过IMS网关250来初始化并管理会话。所述协议为示例性的,可根据实现方式使用其它协议。
元数据管理器212可管理与服务关联的元数据并将元数据保存到SI和元数据DB211。
SI和元数据DB 211可存储由SI解码器204解码的服务信息、由元数据管理器212管理的元数据、以及由服务发现管理器210提供的选择服务提供商所需的信息。另外,SI和元数据DB 211可为系统存储系统设置数据等。
SI和元数据数据库211可利用非易失性RAM(NVRAM)、闪存等来实现。
此外,IMS网关250是收集访问基于IMS的IPTV服务所需的功能的网关。
图3是描述根据本发明的另一实施方式的数字装置的框图。
前面参照图2的描述通过以常设装置作为数字装置的一个实施方式来进行。并且,图3使用移动装置作为数字装置的另一实施方式。
参照图3,移动装置300包括无线通信单元310、A/V(音频/视频)输入单元320、用户输入单元330、感测单元340、输出单元350、存储器360、接口单元370、控制器380、电源单元390等。
各个组件详细描述如下。
无线通信单元310通常包括允许移动装置300与无线通信系统或移动装置300所在的网络之间的无线通信的一个或更多个模块。例如,无线通信单元110可包括广播接收模块311、移动通信模块312、无线互联网模块313、短距离通信模块314、位置信息模块315等。
广播接收模块311经由广播频道从外部广播管理服务器接收广播信号和/或广播相关信息。广播频道可包括卫星频道和地面频道。广播管理服务器可意指生成以发送广播信号和/或广播相关信息的服务器,或者接收以发送预先生成的广播信号和/或广播相关信息给终端的服务器。广播信号可被实现为TV广播信号、无线电广播信号和/或数据广播信号,以及其它信号。如果需要,广播信号还可包括与TV或无线电广播信号结合的广播信号。
广播相关信息包括与广播频道、广播节目或广播服务提供商关联的信息。另外,广播相关信息可经由移动通信网络来提供。在这种情况下,广播相关信息可通过移动通信模块312来接收。
广播相关信息可按照例如电子节目指南(EPG)、电子服务指南(ESG)等的各种形式实现。
广播接收模块311可被配置为利用诸如ATSC、DMB-T(地面数字视频广播)、DMB-S(卫星)、MediaFLO(仅媒体前向链路)、DVB-H(手持)、ISDB-T(地面综合服务数字广播)等的广播系统来接收数字广播信号。可选地,广播接收模块311可被配置为除了上述数字广播系统之外还适合于其它广播系统。
通过广播接收模块311接收的广播信号和/或广播相关信息可被保存到存储器360。
移动通信模块312经由移动网络向基站、外部终端和服务器中的至少一个发送无线信号/从其接收无线信号。这些无线信号可承载音频信号、视频信号以及根据收发的文本/多媒体消息的各种类型的数据。
无线互联网模块313包括用于无线互联网接入的模块,并且可内部地或外部地联接至移动装置300。无线互联网技术可包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波接入互操作性)、HSDPA(高速下行链路分组接入)等。
短距离通信模块314是用于短距离通信的模块。用于实现此模块的合适的技术包括蓝牙、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee、RS-232、RS-485等。
位置信息模块315是用于获得移动终端100的位置信息的模块。并且例如,此模块可利用全球定位系统(GPS)模块来实现。
音频/视频(A/V)输入单元320被配置为提供音频或视频信号输入。A/V输入单元320可包括相机321、麦克风322等。相机321接收并处理在视频呼叫模式或拍照模式下通过图像传感器获得的静止画面或视频的图像帧。另外,所处理的图像帧可显示在显示器351上。
由相机321处理的图像帧可被存储在存储器360中或者经由无线通信单元310发送到外部。可选地,可根据使用环境设置至少两个相机321。
麦克风322在呼叫模式、录制模式、语音识别模式等下接收外部音频信号。该音频信号被处理并转换为电音频数据。在呼叫模式下所处理的音频数据被变换成能够经由移动通信模块312发送给移动通信基站的格式。麦克风322通常包括各种各样的噪声消除算法以消除在接收外部音频信号的过程中生成的噪声。
用户输入单元330生成用户的输入数据以控制终端的操作。用户输入单元330可包括键区、薄膜开关、触摸板(例如,静压/电容)、滚轮、触合式开关等。
感测单元340利用移动终端的各个方面的状态测量来生成感测信号以用于控制移动装置300的操作。例如,感测单元340可检测移动装置100的打开/关闭状态、移动装置300的位置、移动装置300的取向、是否存在用户与移动装置300的接触、移动装置300的加速/减速等。例如,如果移动装置300被移动或倾斜,则能够感测移动装置的位置或倾斜。此外,感测单元340可感测电源单元390是否供电、接口单元370与外部装置之间是否存在联接或其它连接等。此外,感测单元340可包括诸如NFC(近场通信)等的接近传感器341。
输出单元350生成与视觉、听觉和触觉有关的输出,并且可包括显示器351、音频输出模块352、警报单元353、触觉模块354等。
显示器351通常被实现为视觉显示(输出)由移动装置300处理的信息。例如,如果移动终端正在电话呼叫模式下操作,则显示器通常将提供与电话呼叫有关的用户界面(UI)或图形用户界面(GUI)。又如,如果移动装置300处于视频呼叫模式或拍照模式,则显示器351可显示所拍摄或/和接收的图像或UI/GUI。
显示模块351可利用已知显示技术来实现。这些技术包括例如液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管显示器(OLED)、柔性显示器和三维显示器。移动装置300可包括这些显示器中的一个或更多个。
这些显示器中的一些可被实现为透明或光学透射型(可被称为透明显示器)。透明显示器的代表性示例是TOLED(透明OLED)。显示器351的背面配置也可被实现为光学透射型。在这种配置中,用户能够透过终端主体的显示器351所占据的区域看到位于终端主体背后的物体。
根据移动装置300的实现类型,两个或更多个显示器351可被设置到移动装置300。例如,多个显示器可按照从单面间隔开或者一体地形成在单面上的方式设置在移动装置300上。另选地,多个显示器可分别设置在移动装置300的不同面上。
如果显示器元351和用于检测触摸动作的传感器(以下称为“触摸传感器)构成相互层结构,则除了输出装置之外,显示器351还可用作输入装置。在这种情况下,触摸传感器可利用触摸膜、触摸片、触摸板等来配置。
触摸传感器可被配置为将施加于显示器351的特定部分的压力或从显示器351的特定部分生成的电容变化转换为电输入信号。此外,触摸传感器可被配置为检测触摸压力以及触摸位置或大小。
如果对触摸传感器施加了触摸输入,则与该触摸输入对应的信号被传送至触摸控制器。触摸控制器处理所述信号,然后将所处理的信号传送给控制器380。因此,控制器380能够知道显示器351的规定部分是否被触摸。
可在移动装置300被触摸屏包围的内部区域或触摸屏附近设置接近传感器341。接近传感器是在没有机械接触的情况下,利用电磁场强度或红外线检测是否存在靠近指定检测表面的物体或者存在于接近传感器周围的物体的传感器。因此,接近传感器比接触型传感器更耐用,并且实用性也比接触型传感器高。
接近传感器可包括透射型光电传感器、直接反射型光电传感器、反射镜反射型光电传感器、射频振荡接近传感器、静电容量接近传感器、磁性接近传感器、红外接近传感器等中的一种。如果触摸屏包括静电容量接近传感器,则其被配置为利用电场随指点器的接近而发生的变化来检测指点器的接近。在这种配置中,触摸屏(触摸传感器)可被分类为接近传感器。
为了说明清晰和方便起见,使得靠近触摸屏的指点器能够被识别为置于触摸屏上的动作可被命名为“接近触摸”,使得指点器能够与触摸屏实际接触的动作可被命名为“接触触摸”。并且,利用指点器对触摸屏进行接近触摸的位置可表示当指点器进行接近触摸时与触摸屏垂直对应的指点器的位置。
接近传感器检测接近触摸和接近触摸模式(例如,接近触摸距离、接近触摸持续时间、接近触摸位置、接近触摸移位状态)。与检测到的接近触摸动作和检测到的接近触摸模式对应的信息可输出给触摸屏。
音频输出模块352在各种模式(包括呼叫接收模式、呼叫发起模式、录制模式、语音识别模式和广播接收模式)下起作用,以输出从无线通信单元310接收或存储在存储器360中的音频数据。在操作期间,音频输出模块352可输出与移动装置300中执行的功能(例如,接收到呼叫、接收到消息)有关的音频信号。音频输出模块352可包括受话器、扬声器、蜂鸣器等。
警报单元353输出用于通报发生移动装置300的事件的信号。移动装置中发生的典型事件可包括呼叫信号接收、消息接收、触摸输入接收等。警报单元353可通过振动以及视频或音频信号来输出用于通报事件发生的信号。视频或音频信号可经由显示器351或音频输出模块352输出。因此,显示器351或音频输出模块352可被分类为警报单元353的一部分。
触觉模块354产生用户能够感觉到的各种触觉效果。振动是触觉模块354所产生的一种代表性触觉效果。触觉模块354所产生的振动的强度和模式是可控的。例如,不同的振动可按照合成在一起的方式来输出,或者可顺序输出。除了振动之外,触觉模块354还能够产生各种触觉效果。例如,触觉模块354可产生归因于插针排列抵靠接触皮肤表面垂直移动的效果、归因于通过注入/抽吸孔对空气的注入/抽吸力的效果、归因于擦过皮肤表面的效果、归因于与电极接触的效果、归因于静电力的效果以及归因于利用吸热或发热装置表现热/冷感觉的效果。除了通过直接接触传递触觉效果之外,触觉模块354还可被实现为使得用户能够通过手指或手臂的肌肉觉来感觉到触觉效果。可选地,根据移动装置300的配置类型,两个或更多个触觉模块354可被设置到移动装置300。
存储器360可存储用于控制器380的操作的程序,或者可暂时地存储输入/输出的数据(例如,电话簿、消息、静止图像、视频等)。并且,存储器360可存储响应于对触摸屏的触摸输入而输出的各种模式的振动和声音的数据。
存储器360可利用任何类型的合适的易失性和非易失性存储器或存储装置或其组合来实现,包括硬盘、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、闪存、磁盘或光盘、多媒体卡微型存储器、卡型存储器(例如,SD存储器或XD存储器)、或者其它类似的存储器或数据存储装置。另外,移动装置300能够与在互联网上执行存储器360的存储功能的web存储器关联地操作。
接口单元370可起到每一个外部装置连接到移动装置100的通道的作用。接口单元370从外部装置接收数据,将所供应的电力传送给移动装置300的各个元件,或者使得移动装置300内的数据能够被传送到外部装置。例如,接口单元370可包括有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端口、用于联接至具有标识模块的装置的端口、音频输入/输出端口、视频输入/输出端口、耳机端口等。
标识模块是存储用于认证移动装置300的使用权限的各种类型的信息的芯片,并且可包括用户标识模块(UIM)、订户标识模块(SIM)、全球订户标识模块(USIM)等。具有标识模块的装置(以下称为“标识装置”)可按照智能卡的形式制造。因此,标识装置能够通过端口连接到移动装置300。
当移动装置300连接到外部托架时,接口单元370变成向移动装置300供应来自托架的电力的通道或者将由用户从托架输入的各种命令信号传送给移动装置300的通道。从托架输入的各种命令信号或电力中的每一个可用作用于识别出移动装置300正确地安装在托架中的信号。
控制器380通常控制移动装置300的总体操作。例如,控制器380执行与语音呼叫、数据通信、视频呼叫等关联的控制和处理。控制器380可包括提供多媒体回放的多媒体模块381。多媒体模块381可被配置成控制器380的一部分,或者被实现为单独的组件。此外,控制器380能够执行模式识别处理以用于将在触摸屏上执行的书写输入和绘画输入分别识别为文本和图像。
电源单元390被供应外部或内部电力,然后在控制器380的控制下供应各个组件的操作所需的电力。
例如,本文所描述的各种实施方式可利用软件、硬件或其一些组合实现于可由计算机或者与计算机相似的装置读取的记录介质中。
对于硬件实现方式,本文所描述的实施方式可实现于专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行本文所述的功能的其它电子单元及其选择性组合中的至少一个内。这些实施方式还可通过控制器180来实现。
对于软件实现方式,本文所述的实施方式可利用单独的软件模块(例如,程序和函数)来实现,其各自执行本文所述的一个或更多个功能和操作。软件代码可利用以任何合适的编程语言编写的软件应用来实现,并且可存储在诸如存储器360的存储器中,并由诸如控制器380的控制器或处理器执行。
图4是例示根据本发明的另一实施方式的数字装置的框图。
数字装置400的另一示例可包括广播接收单元405、外部装置接口435、存储单元440、用户输入接口450、控制器470、显示单元480、音频输出单元485、电源单元490和拍摄单元(未示出)。广播接收单元305可包括一个或更多个调谐器410、解调器420和网络接口430中的至少一个。然而,在一些情况下,广播接收单元405可包括调谐器410和解调器420而没有网络接口430,或者可包括网络接口430而没有调谐器410和解调器420。广播接收单元405可包括复用器(未示出)以对经受调谐器410并被解调器420解调的信号和通过网络接口40接收的信号进行复用。另外,广播接收单元405可包括解复用器(未示出)并且将复用的信号、解调的信号或者通过网络接口430接收的信号解复用。
调谐器410可通过调谐至通过天线接收的RF广播信号当中用户所选择的频道或所有先前存储的频道来接收射频(RF)广播信号。并且,调谐器410将所接收的RF广播信号转换为IF(中频)信号或基带信号。
例如,如果所接收的RF广播信号是数字广播信号,则其被转换为数字IF(DIF)信号。如果所接收的RF广播信号是模拟信号,则其被转换为模拟基带视频/音频信号(CVBS/SIF)。即,调谐器410能够处理数字广播信号和模拟信号二者。从调谐器410输出的模拟基带视频/音频信号(CVBS/SIF)可被直接输入到控制器470。
调谐器410可接收单载波或多载波的RF广播信号。调谐器410顺序地调谐至并接收通过天线接收的RF广播信号当中通过频道记忆功能存储的所有广播频道的RF广播信号,然后能够将其转换为中频信号或基带信号(DIF:数字中频或基带信号)。
解调器420接收并解调由调谐器410转换的数字IF信号(DIF),然后能够频道解码等。为此,解调器420可包括网格解码器、解交织器、里德-所罗门解码器等,或者可包括卷积解码器、解交织器、里德-所罗门解码器等。
解调器执行解调和频道解码,然后能够输出流信号TS。在这种情况下,流信号可包括将视频信号、音频信号和/或数据信号复用的信号。例如,流信号可包括复用PMEG-2的视频信号和杜比AC-3的音频信号的MPEG-2TS(传输流)。
从解调器420输出的流信号可输入至控制器470。控制器470可控制解复用、音频/视频信号处理等。另外,控制器470可控制分别通过显示器480和音频输出单元485的视频和音频的输出。
外部装置接口435可提供数字装置300与各种外部装置之间的接口环境。为此,外部装置接口435可包括A/V输入/输出单元(未示出)或无线通信单元(未示出)。
外部装置接口435可按照有线/无线方式与诸如数字多功能盘(DVD)、蓝光播放器、游戏装置、相机、摄像机、计算机(笔记本计算机)、平板PC、智能电话、云等的外部装置连接。外部装置接口435将通过所连接的外部装置输入的包含诸如图像、视频、音频等的数据的信号传送到数字装置的控制器470。控制器470可控制所处理的图像、视频和音频等的数据信号被输出到所连接的外部装置。为此,外部装置接口435还可包括A/V输入/输出单元(未示出)或无线通信单元(未示出)。
为了将外部装置的视频和音频信号输入到数字装置400,A/V输入/输出单元可包括USB(通用串行总线)端子、复合视频消隐同步(CVBS)端子、组件端子、S视频端子(模拟)、数字视觉接口(DVI)端子、高清多媒体接口(HDMI)端子、RGB端子、D-SUB端子等。
无线通信单元可与另一数字装置执行短距离无线通信。例如,数字装置400可通过诸如蓝牙、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee和数字生活网络联盟(DLNA)等的通信协议来与其它数字装置联网。
外部装置接口435可通过经由上述端子中的至少一个连接到机顶盒(STB)来与其执行输入/输出操作。
此外,外部装置接口435可接收相邻外部装置内的应用或应用列表,然后将其转发至控制器470或存储单元440。
网络接口430可提供用于将数字装置400连接到有线/无线网络(包括互联网)的接口。例如,网络接口430可具有以太网端子等以用于接入有线网络。为了接入无线网络,网络接口430可使用诸如WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波接入互操作性)、HSDPA(高速下行链路分组接入)等的通信规范。
网络接口430可通过所接入的网络或者链接至所接入的网络的另一网络来与另一用户或另一数字装置收发数据。具体地,网络接口430可将存储在数字装置400中的内容数据的一部分发送到从预先在数字装置400处注册的其它用户/数字装置选择的用户/数字装置。
此外,网络接口430可通过所接入的网络或者链接至所接入的网络的另一网络来访问规定的网页。即,网络接口430通过网络访问规定的网页,然后能够与对应服务器收发数据。此外,网络接口430可接收由内容提供商或网络运营商提供的内容或数据。即,网络接口430可通过网络接收由内容提供商或网络提供商提供的内容(例如,电影、广告、游戏、VOD、广播信号等)以及与内容关联的信息。网络接口430可接收由网络运营商提供的固件的更新信息和文件。并且,网络接口430可将数据发送到互联网或内容提供商或网络运营商。
此外,网络接口430可从开放应用选择期望的应用并通过网络来接收它。
存储单元440可存储用于控制器470内的各种信号处理和控制的程序,并且还可存储所处理的视频、音频或数据信号。
另外,存储单元440可执行暂时地存储从外部装置接口435或网络接口430输入的视频、音频或数据信号的功能。存储单元440可通过频道记忆功能来存储关于规定的广播频道的信息。
存储单元440可存储从外部装置接口435或网络接口430输入的应用或应用列表。
并且,存储单元440可存储各种平台(将稍后描述)。
存储单元440可包括一种或更多种类型的存储介质,例如闪存型、硬盘型、微型多媒体卡型、卡型存储器(例如,SD或XD存储器)、RAM、EEPROM等。数字装置400可播放存储在存储单元440中的内容文件(视频文件、静止图像文件、音乐文件、文本文件、应用文件等)并将其提供给用户。
图4例示了存储单元440与控制器470分离的实施方式,本发明不限于此。换言之,存储单元440可被包括在控制器470中。
用户输入接口450可将用户所输入的信号转发给控制器470,或者将从控制器470输出的信号转发给用户。
例如,用户输入接口450可根据诸如RF通信、IR通信等的各种通信方案来从遥控器500接收用于电源开启/关闭、频道选择、画面设置等的控制信号或者将控制器470的控制信号发送给遥控器500。
用户输入接口450可将通过电源键、频道键、音量键以及用于设置值等的本地键(未示出)输入的控制信号转发给控制器470。
用户输入接口450可将从感测用户的手势的感测单元(未示出)输入的控制信号转发给控制器470,或者将控制器470的信号发送给感测单元(未示出)。这里,感测单元(未示出)可包括触摸传感器、语音传感器、位置传感器、动作传感器等。
控制器470可通过将经由调谐器410、解调器420或外部装置接口435输入的流解复用或者处理解复用的信号来生成并输出用于视频或音频输出的信号。
由控制器470处理的视频信号可被输入到显示单元380并被显示为与视频信号对应的图像。另外,由控制器470视频处理的视频信号可通过外部装置接口435被输入到外部输出装置。
由控制器470处理的音频信号可被音频输出到音频输出单元485。此外,由控制器470处理的音频信号可通过外部装置接口435被输入到外部输出装置。
控制器470可包括解复用器、图像处理器等(图4中未示出)。
控制器470可控制数字装置400的总体操作。例如,控制器470可控制调谐器410调谐至与用户所选择的频道或者预先存储的频道对应的RF广播。
控制器470可根据通过用户输入接口450输入的用户命令或者内部程序来控制数字装置400。具体地,控制器470可控制数字装置400访问网络以将用户所期望的应用或应用列表下载到数字装置400。
例如,控制器470可控制调谐器410接收响应于通过用户输入接口450接收的规定频道选择命令而选择的频道的信号。并且,控制器470可处理所选择的频道的视频、音频或数据信号。控制器470可控制关于用户所选择的频道的信息与处理的视频或音频信号一起通过显示单元480或音频输出单元485输出。
又如,控制器470可响应于通过用户输入接口450接收的外部装置图像播放命令,控制通过外部装置接口单元435从外部装置(例如,相机或摄像机)输入的视频信号或音频信号通过显示单元480或音频输出单元485输出。
此外,控制器470可控制显示单元480显示视频。例如,控制器470可控制通过调谐器410输入的广播视频、通过外部装置接口435输入的外部输入视频、通过网络接口430输入的视频、或者存储在存储单元440中的视频显示在显示单元480上。这里,显示在显示单元480上的视频可包括静止图像或运动图像,或者可包括2D或3D视频。
控制器470可控制内容播放。这里,内容可包括存储在数字装置400中的内容、所接收的广播内容或者外部输入的内容。内容可包括广播视频、外部输入视频、音频文件、静止图像、访问的web画面和文档文件中的至少一个。
当进入应用查看菜单时,控制器470可控制位于数字装置300中或者可从外部网络下载的应用或应用列表显示。
控制器470可与各种用户界面一起控制从外部网络下载的应用的安装和执行。此外,控制器470可控制与启动的应用有关的视频通过用户的选择显示在显示单元480上。
此外,还可包括被配置为生成与频道信号或外部输入信号对应的缩略图的频道浏览处理器(未示出)。
频道浏览处理器可接收从解调器420输出的流信号(TS)的输入或者从外部装置接口435输出的流信号的输入,从所输入的流信号提取视频,然后生成缩略图。所生成的缩略图可被直接输入给控制器470,或者可通过编码来输入给控制器470。此外,所生成的缩略图可被编码成流,然后输入给控制器470。控制器470可利用所输入的缩略图在显示单元480上显示包括多个缩略图的缩略图列表。包括在缩略图列表中的缩略图可被顺序地或同时地更新。因此,用户可方便地查看多个广播频道的内容。
显示单元480可将控制器470所处理的视频信号、数据信号和OSD信号中的每一个或者从外部装置接口435接收的视频信号和数据信号中的每一个转换为R、G和B信号,以生成驱动信号。
显示单元480可包括PDP、LCD、OLED、柔性显示器、3D显示器等。
显示单元480可被配置成触摸屏并用作输入装置以及输出装置。
音频输出单元485接收由控制器470音频处理的信号(例如,立体声信号、3.1声道信号或5.1声道信号),然后将所接收的信号作为音频输出。音频输出单元485可被配置成各种类型的扬声器之一。
此外,数字装置400还可包括用于感测用户的手势的感测单元(未示出),如上所述,该感测单元包括触摸传感器、语音传感器、位置传感器和动作传感器中的至少一个。由感测单元(未示出)感测的信号可通过用户输入接口450被传送至控制器470。
数字装置400还可包括用于拍摄用户的拍摄单元(未示出)。通过拍摄单元(未示出)获取的图像信息可被输入到控制器470。
控制器470可从拍摄单元(未示出)所捕获的图像或者感测单元(未示出)所感测的信号,或者通过将所述图像和所述信号组合,来感测用户的手势。
电源单元490可总体向数字装置400供应对应电力。
具体地,电源单元490可向可被配置成系统芯片(SoC)的控制器470、用于视频显示的显示单元480以及用于音频输出的音频输出单元485供应电力。
为此,电源单元490可包括被配置为将AC电力转换为DC电力的转换器(未示出)。此外,例如,如果显示单元480被配置成具有大量背光灯的LCD面板,则电源单元490还可包括能够进行PWM(脉宽调制)操作以用于亮度变化或调光驱动的逆变器(未示出)。
遥控器500将用户输入发送给用户输入接口450。为此,遥控器500可使用蓝牙、RF通信、IR通信、UWB、ZigBee等。
另外,遥控器500可接收从用户输入接口350输出的音频、视频或数据信号,然后显示所接收的信号或者将其输出为音频或振动。
上述数字装置400可包括固定或移动类型的能够处理ATSC或DVB的数字广播信号的数字广播接收机。
关于根据本发明的数字装置,如果需要,所示组件中的一些可被省略或者可进一步添加新的组件(未示出)。另一方面,数字装置可与上述数字装置不同不包括调谐器和解调器,并且可通过经由网络接口或外部装置接口接收内容来播放内容。
图5是例示根据本发明的一个实施方式的图2至图4的各个控制器的详细配置的框图。
控制器的一个示例可包括解复用器510、视频处理器520、OSD生成器540、混合器550、帧频转换器(FRC)555和格式化器560。此外,控制器还可包括音频处理器和数据处理器(未示出)。
解复用器510将输入的流解复用。例如,解复用器510可将输入的流信号解复用为MPEG-2TS视频、音频和数据信号。本文中,输入至解复用器的流信号可包括从调谐器、解调器或外部装置接口输出的流信号。
视频处理器520执行解复用的视频信号的视频处理。为此,视频处理器520可包括视频解码器525和缩放器535。
视频解码器525可将解复用的视频信号解码,缩放器535可将解码的视频信号的分辨率缩放为可从显示器输出。
视频解码器525可支持各种规范。例如,如果视频信号通过MPEG-2编码,则视频解码器525执行MPEG-2解码器的功能。并且,如果视频信号通过DMB(数字多媒体广播)或H.264编码,则视频解码器525执行H.264解码器的功能。
此外,由图像处理器520解码的视频信号被输入到混合器550。
OSD生成器540可根据用户输入或者自己生成OSD数据。例如,OSD生成器540可基于用户输入接口的控制信号按照图形或文本形式生成要显示在显示器380的画面上的数据。所生成的OSD数据可包括诸如数字装置的用户界面画面、各种菜单画面、微件、图标、收视率信息等的各种数据。OSD生成器540可生成数据以显示广播视频的字幕或基于EPG的广播信息。
混合器550将OSD生成器540所生成的OSD数据与视频处理器520所处理的视频信号混合。然后,混合器550将混合的信号提供给格式化器560。通过将解码的视频信号和OSD数据混合,OSD按照覆盖广播视频或外部输入视频的方式显示。
帧频转换器(FRC)555可转换输入的视频的帧频。例如,帧频转换器555可根据显示单元的输出频率将输入的60Hz视频的帧频转换为120Hz或240Hz的帧频。如上所述,可存在转换帧频的各种方法。例如,在将帧频从60Hz转换为120HZ的情况下,帧频转换器555可通过在第一帧和第二帧之间插入第一帧或者插入从第一帧和第二帧预测的第三帧来执行转换。又如,在将帧频从60Hz转换为240HZ的情况下,帧频转换器555可通过在现有帧之间进一步插入三个相同或预测的帧来执行转换。此外,在没有执行单独的帧转换的情况下,帧频转换器555可被绕过。
格式化器560可将所输入的帧频转换器555的输出改变为适合于显示单元的输出格式。例如,格式化器560可输出RGB数据信号。在这种情况下,此RGB数据信号可作为低压差分信号(LVDS)或mini-LVDS来输出。如果所输入的帧频转换器555的输出是3D视频信号,则格式化器560通过将3D格式配置为适合于显示单元的输出格式来输出信号,因此可通过显示单元支持3D服务。
此外,控制器中的音频处理器(未示出)可执行解复用的音频信号的音频处理。这种音频处理器(未示出)可提供支持以处理各种音频格式。例如,如果音频信号按照MPEG-2、MPEG-4、AAC、HE-AAC、AC-3、BSAC等格式编码,则还包括对应解码器以处理音频信号。
并且,控制器中的音频处理器(未示出)可处理低音、高音、音量调节等。
控制器中的数据处理器(未示出)可处理解复用的数据信号。例如,当解复用的数据信号被编码时,数据处理器可将编码的解复用数据信号解码。这里,编码的数据信号可以是EPG信息,该EPG信息包括诸如各个频道上广播的广播节目的开始时间和结束时间等的广播信息。
此外,上述数字装置是根据本发明的一个示例。并且,组件中的至少一个可根据实际具体实现的数字装置的选择被集成、添加或省略。具体地,如果需要,至少两个或更多个组件可被集成为单个组件,或者规定的组件可被分成至少两个或更多个组件。此外,提供各个块所执行的功能以描述本发明的一个实施方式。功能的详细操作或装置可不限制本发明的所附权利要求书及其等同物的范围。
此外,数字装置可包括被配置为处理保存在对应装置中的图像的信号或者输入的图像的信号的图像信号处理装置。图像信号处理装置的示例可包括不包括图4所示的显示单元480和音频输出单元485的机顶盒(STB)、上述DVD播放器、蓝光播放器、游戏装置、计算机等。
图6是例示根据本发明的一个实施方式的连接到图2至图4所示的各个数字装置的输入装置的图。
为了控制数字装置600,使用安装在数字装置600中的前面板(图中未示出)或控制装置(例如,输入装置)。
此外,作为能够有线/无线通信的用户接口装置(UID),控制装置包括主要为控制数字装置600而具体实现的遥控器610、键盘630、指点设备620、触摸板等。并且,也可包括通过连接到数字装置600来专用于外部输入的控制装置。此外,控制装置还可包括尽管不具有控制数字装置600的目的,但是能够通过模式切换等来控制数字装置600的移动装置(例如,智能电话、平板PC等)。为了清晰,本说明书中的描述以指点装置作为一个示例,本发明不限于此。
输入装置可根据需要通过采用至少一种通信协议来与数字装置通信。在这种情况下,通信协议可包括蓝牙、RFID(射频识别)、IrDA(红外数据协会)、UWB(超宽带)、ZigBee、DLNA(数字生活网络联盟)、RS等。
遥控器610是设置有控制数字装置600所需的各种键按钮的一般输入装置。
设置有陀螺仪传感器等的指点装置620通过基于用户的运动、压力、旋转等在数字装置600的画面上具体实现对应指针来将规定的控制命令传送到数字装置600。指点装置620可被称为诸如魔术遥控器、魔术控制器等的各种名称之一。
由于数字装置600是能够提供诸如web浏览器、应用、SNS(社交网络服务)等的各种服务以及广播的智能集成数字装置,所以难以使用传统遥控器610来控制数字装置600。因此,键盘630被具体实现为与PC键盘相似的配置,以通过补充控制难度来方便文本等的输入。
此外,诸如遥控器610、指点装置620、键盘630等的控制装置根据需要设置有触摸板,并且可用于方便文本输入、指针移位、照片或视频的拉近/拉远等的各种控制目的。
本说明书中所描述的数字装置使用OS和/或Web OS作为平台。在下文中,诸如基于WebOS的配置或算法的处理可由上述数字装置的控制器等执行。在这种情况下,控制器在包括图2至图5所示的控制器的广义上使用。因此,在以下描述中,关于数字装置中用于处理基于WebOS或相关的服务、应用、内容等的配置、硬件或包括软件、固件等的组件被称为控制器。
这种基于Web OS的平台可通过例如基于Luna服务总线整合服务、应用等来改进开发独立性和功能可扩展性,并且能够基于web应用框架增加应用开发效率。另外,通过WebOS进程和资源管理有效地使用系统资源等,因此可支持多任务。
此外,本说明书中所描述的Web OS平台不仅可用于诸如个人计算机(PC)、TV和机顶盒(STB)的固定装置,而且可用于诸如蜂窝电话、智能电话、平板PC、膝上型计算机、可穿戴装置等的移动装置。
用于数字装置的软件结构是能够解决依赖于市场的传统问题的整体结构,并且在具有基于多线程的信号进程和封闭产品的外部应用方面有困难。为了寻求基于新平台的开发、通过芯片组置换的成本创新以及UI应用和外部应用开发效率,执行分层和组件化以获得3层结构以及用于附加(add-on)的附加结构、单源产品和开放应用。近来,已进行软件结构的模块化设计以便提供用于功能单元的回显系统和模块化架构的Web开放应用程序接口(API)或者用于游戏引擎的本地开放API,进而生成基于服务结构的多进程结构。
图7是例示根据本发明的一个实施方式的Web OS架构的图。
参照图7描述Web OS平台的架构如下。
平台可主要分成基于系统库的Web OS核心平台、应用、服务等。
Web OS平台的架构包括分层结构。OS、系统库和应用分别存在于最下层、下一层和最上层。
首先,关于最下层,由于包括Linux内核作为OS层,所以可包括Linux作为数字装置的OS。
在OS层上面,按顺序存在BSP/HAL(板级支持包/硬件抽象层)、Web OS核心模块层、服务层、Luna服务总线层、Enyo框架/NDK(本地开发包)/QT层和应用层(作为最上层)。
此外,可从上述Web OS层结构省略一些层。多个层可被集成为单个层,反之亦然。
Web OS核心模块层可包括用于管理表面窗口等的LSM(Luna表面管理器)、用于管理应用的启动、运行状态等的SAM(系统和应用管理器)、用于基于WebKit管理Web应用等的WAM(Web应用管理器)等。
LSM管理出现在画面上的应用窗口。LSM负责显示硬件(HW),提供能够渲染应用所需的内容的缓冲器,并且将多个应用的渲染结果的组合输出给画面。
SAM依据系统和应用的条件来管理性能策略。
此外,由于WebOS可将web应用(Web App)视作基本应用,所以WAM基于Enyo框架。
应用的服务使用通过Luna服务总线来执行。新服务可被注册为总线,并且应用可寻找并使用自己所需的服务。
服务层可包括诸如TV服务、Web OS服务等的各种服务级别的服务。此外,WebOS服务可包括媒体服务器、Node.JS等。具体地,例如,Node.JS服务支持javascript。
Web OS服务是实现功能逻辑的Linux进程并且可通过总线来通信。这可主要分成四部分并且由TV进程、从现有TV迁移至Web OS的服务或者与制造商区分服务对应的服务、Web OS公共服务、以及以javascript开发并通过Node.js使用的Node.js服务构造而成。
应用层可包括数字装置可支持的所有应用,例如TV应用、展示(showcase)应用、本地应用、Web应用等。
Web OS上的应用可根据实现方法分类为Web应用、PDK(Palm开发包)应用、QML(Qt元语言或Qt建模语言)应用等。
Web应用基于WebKit引擎并且在WAM Runtime上运行。这种Web应用基于Enyo框架,或者可按照基于一般HTML5、CSS(层叠样式表)和javascript开发的方式运行。
PDK应用包括基于为第三方或外部开发者提供的PDK以C/C++开发的本地应用。PDK意指一组开发库和工具,其被提供以使得第三方(例如,游戏等)能够开发本地应用(C/C++)。PDK应用可用于开发性能显著的应用。
QML应用是基于Qt的本地应用,并且包括随Web OS平台提供的基本应用(例如,卡片式视图(card view)、家庭仪表盘(home dashboard)、虚拟键盘等)。这里,QML是脚本类型的标记语言,而非C++。
此外,在以上描述中,本地应用意指以C/C++开发、编译并且以二进制形式运行的应用。这种本地应用具有高运行速度的优点。
图8是例示根据本发明的一个实施方式的Web OS装置的架构的图。
图8是基于Web OS装置的运行时的框图,其可参照图7所示的分层结构来理解。
以下描述参照图7和图8来进行。
参照图8,在系统OS(Linux)和系统库上面,包括服务、应用和Web OS核心模块。并且,它们之间的通信可通过Luna服务总线来执行。
基于HTML5、CSS和java script的Node.js服务(电子邮件、联系人、日历等)、诸如日志、备份、文件通知、数据库(DB)、活动管理器、系统策略、AudioD(音频守护进程)、更新、媒体服务器等的Web OS服务、诸如EPG(电子节目指南)、PVR(个人视频记录仪)、数据广播等的TV服务、诸如语音识别、Now on、通知、搜索、ACR(自动内容识别)、CBOX(内容列表浏览器)、wfdd、DMR、远程应用、下载、SDPIF(索尼飞利浦数字接口格式)等的CP服务、诸如PDK应用、浏览器、QML应用的本地应用、以及基于Enyo框架的UI相关TV应用和Web应用经由Luna服务总线通过Web OS核心模块(类似于上述SAM、WAM和LSM)来处理。此外,在以上描述中,不强制TV应用和Web应用基于Enyo框架或与UI相关。
CBOX可管理连接到TV的外部装置(例如,USB、DLNA、云等)的内容的列表和元数据。此外,CBOX可按照整合视图的形式输出诸如USB、DMS、DVR、云等的各种内容容器的内容列表。并且,CBOX显示诸如照片、音乐、视频等的各种类型的内容列表并且能够管理对应元数据。此外,CBOX可实时地输出附接的存储装置的内容。例如,如果诸如USB的存储装置被插入,则CBOX应该能够输出对应存储装置的内容列表。这样做,可定义用于内容列表处理的标准化方法。并且,CBOX可适应各种连接协议。
提供SAM以增强模块复杂性的改进和可扩展性。即,例如,由于现有系统管理器通过单个进程来处理各种功能(例如,系统UI、窗口管理、web应用运行时、UX上的约束条件处理等),所以实现复杂性非常高。因此,通过分离主要功能并且明晰功能间接口,可降低实现复杂性。
LSM支持系统UX实现(例如,卡片式视图、启动器等)以独立地开发和集成,并且还支持系统UX实现以容易地应对产品要求改变等。在合成多个应用画面(类似于应用上应用(App On App))的情况下,LSM能够通过最大程度地利用硬件(HW)资源来允许多任务,并且能够为多窗口、21:9等提供窗口管理机制。
LSM支持基于QML的系统UI的实现并且增强其开发生产率。QML UX可容易地配置画面布局和UI组件视图,并且方便用于处理用户输入的代码的开发。此外,QML与Web OS组件之间的接口通过QML可扩展插件来实现,并且应用的图形操作可基于wayland协议、luna服务调用等。
如上所述,LSM是Luna表面管理器的缩写,并且执行应用窗口组合器的功能。
LSM将独立开发的应用、US组件等合成,然后将合成结果输出到画面上。关于此,如果诸如通话记录应用、展示柜应用、启动器应用等的组件分别渲染其自己的内容,则作为组合器,LSM限定输出区域、协作方法等。可以说,LSM(即,组合器)处理图形合成、焦点管理、输入事件等。这样做,LSM从输入管理器接收事件、焦点等。这种输入管理器可包括遥控器、HID(例如,鼠标和键盘)、操纵杆、游戏手柄、远程应用、触控笔等。
因此,LSM支持多窗口模型,并且可由于系统UI特征而在所有应用上同时运行。关于此,LSM可支持启动器、通话记录、设置、通知、系统键盘、音量UI、搜索、手指手势、语音识别(STT(语音至文本)、TTS(文本至语音)、NLP(自然语言处理)等)、图案手势(相机、MRCU(移动无线电控制单元))、实时菜单、ACR(自动内容识别)等。
图9是例示根据本发明的一个实施方式的Web OS装置中的图形组合流程的图。
参照图9,图形组合处理可通过负责UI进程的web应用管理器910、负责web进程的webkit 920、LSM 930和图形管理器(GM)940来执行。
如果从web应用管理器910生成基于web应用的图形数据(或应用)作为UI进程,则所生成的图形数据被转发给全屏应用或LSM 930。此外,web应用管理器910接收从webkit920生成的应用以便在UI进程与web进程之间共享用于图形管理的GPU(图形处理单元)存储器,然后如果应用不是全屏应用,则将其转发给LSM 930。如果应用是全屏应用,则其可绕过LSM 930。在这种情况下,其可被直接转发给图形管理器940。
LSM 930经由wayland表面将所接收的UI应用发送给wayland组合器。wayland组合器适当地处理它,然后将它转发给图形管理器。因此,例如,经由图形管理器940的LSM GM表面将LSM 930所转发的图形数据转发给图形管理器组合器。
此外,如上所述,全屏应用被直接转发给图形管理器940而没有经过LSM 930。这种应用经由WAM GM表面由图形管理器组合器处理。
图形管理器处理Web OS装置内的所有图形数据。图形管理器接收通过GM表面(类似于数据广播应用、字幕应用等)的所有图形数据以及通过LSM GM的数据和通过WAM GM表面的数据,然后处理它们以适当地输出到画面上。本文中,GM组合器的功能等同于或类似于上述组合器。
图10是例示根据本发明的一个实施方式的媒体服务器的图。图11是例示根据本发明的一个实施方式的媒体服务器的配置的框图。图12是例示根据本发明的一个实施方式的媒体服务器与TV服务之间的关系的图。
媒体服务器支持数字装置中的各种多媒体的执行,并且管理必要的资源。媒体服务器可有效地使用媒体播放所需的硬件资源。例如,媒体服务器需要音频/视频硬件资源来执行多媒体,并且能够通过管理当前资源使用状态来有效地利用资源。通常,屏幕比移动装置大的固定(或常设)装置在多媒体执行方面需要更多硬件资源,并且由于海量数据大小而需要更快的编码/解码和图形数据传送速度。此外,媒体服务器应该能够处理广播/记录/调谐任务、在观看的同时记录的任务、在视频呼叫期间显示发送方画面和接收方画面二者的任务等以及流传输和基于文件的播放。然而,由于诸如编码器、解码器、调谐器、显示引擎等的硬件资源受芯片组单元限制,所以媒体服务器难以同时执行多个任务。因此,媒体服务器按照限制使用场景或者接收用户选择输入的方式处理任务。
媒体服务器可为系统稳定性增加鲁棒性。例如,通过在媒体播放过程中依据管线去除错误播放管线,然后重新操纵媒体播放,即使发生这种错误,另一媒体播放也不受影响。这种管线是在媒体播放请求的情况下连接各个单元功能(例如,解码、分析、输出等)的链,所需单元功能可根据媒体类型等而改变。
媒体服务器可具有可扩展性。例如,媒体服务器可增加新类型的管线而不影响现有实现方案。例如,媒体服务器可容纳相机管线、视频会议(Skype)管线、第三方管线等。
媒体服务器可将一般媒体播放和TV任务执行分别作为单独的服务来处理。其原因在于,TV服务的接口不同于媒体播放情况。在以上描述中,媒体服务器支持与TV服务关联的“设定频道”、“频道向上”、“频道向下”、“频道调谐”、“记录开始”等操作,但是支持与一般媒体播放关联的“播放”、“暂停”、“停止”等操作,从而对于两种服务分别支持不同的操作。因此,媒体服务器能够分开处理服务。
媒体服务器可整合地控制或管理资源管理功能。装置中的硬件资源分配、恢复等在媒体服务器中整合地执行。具体地,TV服务进程将当前正在运行的任务、当前资源分配状态等传送给媒体服务器。每次执行各个媒体时,媒体服务器响应于媒体执行请求基于各个管线所占用的当前资源状态确保资源,启用管线,并且根据优先级(例如,策略)、其它管线的资源恢复等来进行执行许可。本文中,预定义的执行优先级和特定请求所需的资源信息由策略管理器管理,并且资源管理器可通过与策略管理器通信来处理资源分配、恢复等。
媒体服务器可保持与播放有关的每一个操作的ID(标识符)。例如,基于标识符,媒体服务器可通过指示特定管线来给出命令。对于两个或更多个媒体播放,媒体服务器可通过区分二者来向管线给出命令。
媒体服务器可负责HTML5标准媒体的播放。
此外,对于TV管线的单独服务处理,媒体服务器可遵循TV重新配置范围。媒体服务器可被设计成与TV重新配置范围无关。如果没有单独对TV进行服务处理,则当特定任务中出现问题时,TV可整个重新执行。
媒体服务器是所谓的uMS,即,微型媒体服务器。本文中,媒体播放器是媒体客户端。这可意指用于HTML5视频标签、相机、TV、Skype、第二屏幕等的webkit。
媒体服务器的核心功能是管理诸如资源管理器、策略管理器等的微型资源。对此,媒体服务器控制对web标准媒体内容的回放控制作用。关于此,媒体服务器可管理管线控制器资源。
例如,这种媒体服务器支持可扩展性、可靠性、有效资源使用等。
可以说,uMS(即,媒体服务器)总体上管理并控制诸如资源(例如,云游戏、MVPD(付费服务等)、相机预览、第二屏幕、Skype等)、TV资源等的用于Web OS装置中的适当处理的资源的使用,从而起到管理和控制有效使用的作用。此外,当使用资源时,例如,各个资源使用管线。并且,媒体服务器可总体上管理并控制用于资源管理的管线的生成、删除、使用等。
本文中,如果与任务有关的媒体开始继续诸如请求的解析、解码流、视频输出等的作业,则可生成管线。例如,与TV服务或应用关联,按照由响应于对应请求而生成的管线控制资源使用等的方式来单独地处理观看、记录、频道调谐等。
参照图10如下详细描述媒体服务器的处理结构等。
在图10中,应用或服务通过luna服务总线1010连接到媒体服务器1020。媒体服务器1020再通过luna服务总线1010连接到所生成的管线并管理它们。
应用或服务根据其性质设置有各种客户端,并且能够通过它们来与媒体服务器1020或管线交换数据。
例如,客户端可包括用于与媒体服务器1020连接的uMedia客户端(webkit)、RM(资源管理器)客户端(C/C++)等。
如上所述,包括uMedia客户端的应用连接到媒体服务器1020。具体地,uMedia客户端对应于稍后描述的视频对象。这种客户端响应于请求等将媒体服务器1020用于视频的操作。
本文中,视频操作涉及视频状态。加载、卸载、播放(或者回放、再现)、暂停、停止等可包括与视频操作有关的所有状态数据。视频的各个操作或状态可通过单独的管线生成来处理。因此,uMedia客户端将与视频操作有关的状态数据发送给媒体服务器中的管线管理器1022。
管线管理器1022通过与资源管理器1024的数据通信来获得关于装置的当前资源的信息,并且请求分配与uMedia客户端的状态数据对应的资源。这样做,与资源分配等关联,如果需要,管线管理器1022或资源管理器1024通过与策略管理器1026的数据通信来控制资源分配。例如,如果资源管理器响应于管线管理器1022的请求所分配的资源不存在或不足,则可根据策略管理器1026的优先级比较等来执行根据请求的适当资源分配等。
此外,管线管理器1022根据uMedia客户端对根据资源管理器1024的资源分配而分配的资源的请求,向媒体管线控制器1028请求用于操作的管线生成。
媒体管线控制器1028在管线管理器1022的控制下生成必要的管线。关于所生成的管线,如图中所示,可生成与播放、暂停、停止等有关的管线以及媒体管线和相机管线。此外,管线可包括用于HTML5、Web CP、smartshare播放、缩略图提取、NDK、电影院、MHEG(多媒体和超媒体信息编码专家组)等的管线。
此外,例如,管线可包括基于服务的管线(自管线)和基于URI的管线(媒体管线)。
参照图10,包括RM客户端的应用或服务可不直接连接到媒体服务器1020。其原因在于应用或服务可直接处理媒体。可以说,在应用或服务直接处理媒体的情况下,可绕过媒体服务器。然而,这样做,由于管线生成和使用需要资源管理,所以uMS连接器用于此。此外,如果接收到对应用或服务的直接媒体处理的资源管理请求,则uMS连接器与包括资源管理器1024的媒体服务器1020通信。为此,媒体服务器1020也应该设置有uMS连接器。
因此,通过经由uMS连接器接收资源管理器1024的资源管理,应用或服务可应对RM客户端的请求。这种RM客户端可处理诸如本地CP、TV服务、第二屏幕、flash播放器、U-tubeMSE(媒体源扩展)、云游戏、Skype等的服务。在这种情况下,如上所述,如果资源管理需要,资源管理器1024可通过与策略管理器1026的适当数据通信来管理资源。
此外,代替直接处理媒体(类似于RM客户端),基于URI的管线通过媒体服务器1020来处理。基于URI的管线可包括player factory、Gstreamer、流传输插件、DRM(数字版权管理)插件管线等。
应用与媒体服务之间的接口方法描述如下。
存在使用web应用上的服务的接口方法。这可以是使用PSB(palm服务桥)的Luna调用方法或者使用Cordova的方法。这是为了利用视频标签扩展显示。此外,可存在使用用于视频标签或媒体元素的HTML5标准的方法。
并且,存在使用PDK中的服务的接口方法。
另选地,存在使用现有CP中的服务的方法。这可通过基于luna扩展现有平台的插件来使用以用于向后兼容性。
最后,存在非Web OS的情况下的接口方法。在这种情况下,能够通过直接调用luna总线来进行接口。
无缝改变由单独的模块(例如,TVWIN)来处理,这是优先在没有Web OS的情况下在画面上显示TV,然后在Web OS启动之前或期间无缝地处理的进程。由于Web OS的启动时间相当长,其用于优先提供TV服务的基本功能以便于对用户的电源开启请求作出快速响应。并且,该模块是TV服务进程的一部分并且支持能够提供快速启动和基本TV功能的无缝改变、出厂模式等。并且,该模块可负责从非Web OS模式向Web OS模式的切换。
参照图11,例示了媒体服务器的处理结构。
在图11中,实线框可指示进程处理配置,虚线框可指示进程中的内部处理模块。实线箭头可包括进程间调用(即,luna服务调用),虚线箭头可指示注册/通告的通知或数据流。
服务、web应用或PDK应用(以下称为“应用”)通过luna服务总线连接到各种服务处理配置。通过它,应用操作或者控制应用的操作。
对应数据处理路径根据应用的类型而改变。例如,如果应用是与相机传感器有关的图像数据,则其通过被发送给相机处理器1130来处理。本文中,相机处理器1130包括手势模块、脸部检测模块等,并且处理所接收的应用的图像数据。本文中,在需要自动地或者根据用户的选择使用管线等的数据的情况下,相机处理器1130可通过经由媒体服务器处理器1110生成管线来处理对应数据。
另选地,如果应用包括音频数据,则可通过音频处理器(AudioD)1140和音频模块(PulseAudio)1150来处理对应音频。例如,音频处理器1140处理从应用接收的音频数据,然后将其发送给音频模块1150。这样做,音频处理器1140可通过包括音频策略管理器来确定音频数据的处理。所处理的音频数据由音频模块1150来处理。此外,应用可将与音频数据处理有关的数据通知给音频模块1150,其可通过相关的管线通知给音频模块1150。音频模块1150包括ALSA(高级Linux声音架构)。
或者,在应用包括或处理(以下称为“包括”)DRM挂钩内容的情况下,对应内容数据被发送给DRM服务处理器1160。DRM服务处理器1160通过生成DRM实例来生成DRM挂钩内容数据。此外,为了处理DRM挂钩内容数据,DRM服务处理器1160可通过luna服务总线连接到媒体管线中的DRM管线。
如下描述应用包括媒体数据或TV服务数据(例如,广播数据)的情况的处理。
图12是例示图11中的媒体服务处理器和TV服务处理器的细节的图。
以下描述参照图11和图12二者来进行。
首先,在应用包括TV服务数据的情况下,其由TV服务处理器1120/1220处理。
本文中,TV服务处理器1120可包括DVR/频道管理器、广播模块、TV管线管理器、TV资源管理器、数据广播模块、音频设置模块、路径管理器等中的至少一个。另选地,图12中的TV服务处理器1220可包括TV广播处理机、TV广播接口、服务处理单元、TV中间件(MW)、路径管理器和BSP(NetCast)。本文中,服务处理单元可意指包括TV管线管理器、TV资源管理器、TV策略管理器、USM连接器等的模块。
在本说明书中,TV服务处理器可被实现成图11或图12所示的配置或者两种配置的组合。如果需要,所示组件中的一些可被省略或者可进一步增加新组件(未示出)。
基于从应用接收的TV服务数据的属性或类型,TV服务处理器1120/1220将DVR或频道相关数据发送给DVR/频道管理器,并且还将其发送给TV管线管理器以生成并处理TV管线。此外,如果TV服务数据的属性或类型是广播内容数据,则TV服务处理器1120通过TV管线管理器来生成并处理TV管线,以通过广播模块处理对应数据。
或者,json(Javascript标准对象符号)文件或者以c编写的文件被TV广播处理机处理,通过TV广播接口发送给TV管线管理器,然后通过生成TV管线来处理。在这种情况下,TV广播接口基于TV服务策略将通过TV广播处理机的数据或文件发送给TV管线管理器,以使得管线生成可参考所述数据或文件。
此外,TV管线管理器在响应于来自TV服务中的处理模块或管理器的TV管线生成请求生成一个或更多个管线时可由TV资源管理器控制。此外,为了响应于TV管线管理器所进行的TV管线生成请求来请求为TV服务分配的资源的状态和分配,TV资源管理器可由TV策略管理器控制并且通过uMS连接器执行与媒体服务器处理器1110/1210的数据通信。媒体服务器处理器中的资源管理器响应于TV资源管理器所进行的请求来传送用于当前TV服务的资源的状态和分配的存在/不存在。例如,作为媒体服务器处理器1110/1210内的资源管理器的确认结果,如果用于TV服务的所有资源已经被分配,则能够向TV资源管理器通知所有当前资源全部被分配。这样做,与通知一起,媒体服务器处理器中的资源管理器可通过根据优先级或规定基准从先前指派用于TV服务的TV管线去除规定的TV管线来为所请求的TV服务请求或指派TV管线生成。另选地,根据媒体服务器处理器1110/1210中的资源管理器的状态报告,TV资源管理器可控制TV管线被适当地去除、增加或建立。
此外,例如,BSP支持与现有数字装置的向后兼容性。
上面所生成的TV管线可在路径管理器的控制下在对应处理过程中适当地操作。路径管理器可通过考虑媒体服务器处理器1110/1210所生成的管线的操作以及处理过程中的TV管线来确定或控制管线的处理路径或进程。
如果应用包括媒体数据而非TV服务数据,则数据由媒体服务器处理器1110/1210处理。本文中,媒体服务器处理器1110/1210包括资源管理器、策略管理器、媒体管线管理器、媒体管线控制器等。此外,在媒体管线管理器和媒体管线控制器的控制下生成的各种管线可包括相机预览管线、云游戏管线、媒体管线等。在媒体管线中可包括流传输协议、自动/静态gstreamer、DRM等,其处理流程可在路径管理器的控制下确定。对于媒体服务器处理器1110/1210中的详细处理过程引用了前面参照图10的描述,本文中不再冗余地描述。
在本说明书中,例如,媒体服务器处理器1110/1210中的资源管理器可基于计数器执行资源管理。
图13是例示根据本发明的实施方式的用于控制图像显示装置当中的任意一个的遥控装置的控制方法的图。
如图13的(a)所示,与遥控装置200对应的指针205显示在显示单元180上。
用户可垂直地(如图13的(b)所示)或水平地(如图13的(c)所示)移动或旋转遥控装置200。显示在图像显示装置的显示单元180上的指针205与遥控装置200的移动对应。由于如图中所示,对应指针205根据3D空间上的移动而移动并显示,所以遥控装置200可被称为空间遥控器。
图13的(b)示出当用户将遥控装置200向左移动时,显示在图像显示装置的显示单元180上的指针205也响应于用户的移动向左移动的情况。
关于通过遥控装置200的传感器检测的遥控装置200的移动的信息被发送到图像显示装置。图像显示装置可从关于遥控装置200的移动的信息计算指针205的坐标。图像显示装置可显示指针205以匹配所计算的坐标。
图13的(c)示出在遥控装置200中的特定按钮被按下的同时,用户将遥控装置200远离显示单元180移动的情况。通过这样做,显示单元180中与指针205对应的选择区域可被拉近并放大。另一方面,当用户将遥控装置200靠近显示单元180移动时,显示单元180中与指针205对应的选择区域可被拉远并缩小。相反,当遥控装置200远离显示单元180时,选择区域可被拉远,当遥控装置200靠近显示单元180时,选择区域可被拉近。
另外,当遥控装置200中的特定按钮被按下时,可排除垂直或水平移动的识别。即,当遥控装置200远离或靠近显示单元180移动时,可不识别上、下、左或右移动,而可仅识别前后移动。在遥控装置200中的特定按钮未被按下的同时,指针205仅根据遥控装置200的上、下、左或右移动而移动。
此外,指针205的移动速度或移动方向可与遥控装置200的移动速度或移动方向对应。
另外,本说明书中的指针205意指响应于遥控装置200的操作而显示在显示单元180上的对象。因此,除了图中作为指针205显示的箭头形式之外,各种形式的对象是可以的。例如,以上概念包括点、光标、提示和粗轮廓。然后,指针205可显示在显示单元180上的水平轴和垂直轴的一点上,并且还可显示在诸如线和面的多个点上。
图14是例示根据本发明的实施方式的用于控制图像显示装置当中的任意一个的遥控装置的内部的框图。
如图14所示,遥控装置200可包括无线通信单元225、用户输入单元235、传感器单元240、输出单元250、电源单元260、存储单元270和控制单元280。
无线通信单元225向根据本发明的上述实施方式的图像显示装置中的任意一个发送信号以及从其接收信号。以下,将以根据本发明的实施方式的图像显示装置当中的图像显示装置100为例给出描述。
在本实施方式中,遥控装置200可包括:RF模块221,其被配置为根据RF通信标准向图像显示装置100发送信号以及从其接收信号;以及IR模块223,其被配置为根据IR通信标准向图像显示装置100发送信号以及从其接收信号。
另外,遥控装置200可通过RF模块221向图像显示装置100发送承载关于遥控装置200的运动的信息的信号。
此外,遥控装置200可通过RF模块221接收从图像显示装置100发送的信号。另外,如果需要,遥控装置200可通过IR模块223向图像显示装置100发送用于电源开启/关闭、频道改变、音量改变等的命令。
用户输入单元235可利用键区、按钮、触摸板或触摸屏来配置。用户可操纵用户输入单元235以通过遥控装置200输入与图像显示装置100有关的命令。如果用户输入单元235包括硬键按钮,则用户可通过遥控装置200利用硬键按钮的推按操作来输入与图像显示装置100有关的命令。如果用户输入单元235包括触摸屏,则用户可通过经由遥控装置200触摸触摸屏的软键来输入与图像显示装置100有关的命令。另外,用户输入单元235还可包括可由用户操纵的不同类型的输入装置,例如滚动键或轻推键。此外,在本发明的描述中给出的这些示例将不限制本发明的范围。
传感器单元240可包括陀螺仪传感器241或加速度传感器243。
陀螺仪传感器241可感测关于遥控装置200的移动的信息。
例如,陀螺仪传感器241可基于x、y和z轴感测关于遥控装置200的操作的信息,加速度传感器243可感测关于遥控装置200的移动速度的信息。此外,遥控装置200还可包括距离测量传感器以感测距显示单元180的距离。
输出单元250可输出与用户输入单元235的操纵对应的图像或语音信号或者从图像显示装置100发送的信号。用户可通过输出单元250识别用户输入单元235是否被操纵或者图像显示装置100是否被控制。
例如,如果用户输入单元235被操纵或者通过无线通信单元225向图像显示装置100发送信号/从其接收信号,则输出单元250可包括闪烁的LED模块251、生成振动的振动模块253、输出声音的声音输出模块255或者输出图像的显示模块257。
电源单元260可向遥控装置200供电,并且如果遥控装置200在预定时间期间没有移动,则停止电力供应,以使得电力消耗可减少。如果设置在遥控装置200上的预定键被操纵,则电源单元260可重新开始电力供应。
存储单元270可存储遥控装置200的控制或操作所需的各种类型的程序和应用数据。如果遥控装置200通过RF模块221按照无线方式向图像显示装置100发送信号/从其接收信号,则遥控装置200和图像显示装置100通过预定频带发送和接收信号。遥控装置200的控制单元280可在存储单元270中存储关于用于向与遥控装置200配对的图像显示装置100发送信号/从其接收信号的频带的信息并且参考该信息。
控制单元280可控制对遥控装置200的总体操作。控制单元280可通过无线通信单元225向图像显示装置100发送与用户输入单元235的预定键操纵对应的信号或者与传感器单元240所感测的遥控装置200的移动对应的信号。
图15是例示根据本发明的实施方式的多媒体装置的配置的框图。
参照图15,根据本发明的实施方式的多媒体装置1500包括调谐器1510、通信模块1520、控制器1530、显示模块1540、存储器1550和EPG信号处理模块1560。当然将显而易见的是,如果需要,在不脱离所附权利要求书及其等同物的范围的情况下,图15所示的一些模块可被切换或删除或者可增加其它模块。此外,例如,多媒体装置1500可以是电视和机顶盒(STB)中的一个。此外,图15可参考图2中所描述的特征来补充地解释。
调谐器1510接收广播信号,音频解码器(图中未示出)将包括在所接收的广播信号中的音频数据解码,并且视频解码器(图中未示出)将包括在所接收的广播信号中的视频数据解码。
显示模块1540将所解码的视频数据显示在第一区域上,并且接口模块(或通信模块1520)从外部装置接收至少一个命令。
控制器1530控制调谐器1510、显示模块1540和接口模块中的至少一个。另外,控制器1530根据从外部装置接收的至少一个命令执行特定区域放大模式。此外,控制器1530将与视频数据对应的视频数据显示在第一区域内的第二区域上。在这种情况下,第二区域包括指示物,并且显示在第一区域上的视频数据根据指示物的位置和指示物的尺寸中的至少一个而改变。
根据本发明的另一实施方式,上述处理可被应用于存储在存储器1550中的视频数据,而非广播信号。另外,控制器1530根据所接收的广播信号的类别信息自动地执行特定区域放大模式。广播信号的类别信息被设计为由EPG信号处理模块1560处理。
例如,上述指示物被实现为指引将放大或已放大的特定区域的指引框的图形图像。稍后将参照图19描述细节。
根据所接收的广播信号的视频数据,控制器1530改变根据外部装置的运动而移动的指针的坐标信息。例如,如果所接收的广播信号的视频数据的分辨率信息对应于高清(HD),则指针的坐标信息被设计为按照0.66倍缩放。如果所接收的广播信号的视频数据的分辨率信息对应于全高清(FHD),则指针的坐标信息被设计为按照1倍缩放。如果所接收的广播信号的视频数据的分辨率信息对应于超高清(UHD),则指针的坐标信息被设计为按照2倍缩放。其将参照图27详细描述。
如果在执行特定区域放大模式之后,显示在第一区域上的视频数据的放大或缩小倍率根据从外部装置接收的至少一个命令而改变,则控制器1530自动地改变第二区域中的指示物的尺寸。其将参照图31详细描述。
如果在执行特定区域放大模式之后,根据从外部装置接收的至少一个命令在第一区域内识别出要放大的特定区域,则控制器1530自动地改变第二区域中的指示物的中心点。其将参照图32详细描述。
在执行特定区域放大模式之后过去预定时间之后或者根据从外部装置接收的至少一个命令,控制器1530控制第二区域内的视频数据和指示物二者被去除。其将参照图33详细描述。
此外,在第二区域内的视频数据和指示物二者被去除之后,控制器1530显示用于指引正在执行特定区域放大模式的图形图像。在这种情况下,图形图像包括指示放大倍率的信息。控制器1530被设计为根据选择图形图像的命令将视频数据和指示物二者再次显示在第二区域上。其将参照图34详细描述。
例如,指示物的位置或尺寸基于从外部装置的触摸传感器或运动传感器获得的信息而改变。例如,外部装置可如参照图6、图13和图14所描述设计。更具体地,例如,外部装置对应于包括射频(RF)模块和红外(IR)模块中的至少一个的遥控器或移动装置。
例如,上述第一区域对应于电视的全屏,第二区域对应于包括在第一区域中的部分区域。将参照图19进一步描述细节。
图16是用于说明根据本发明的实施方式的多媒体装置的控制方法的流程图。当然将显而易见的是,图16可参照图15中所描述的特征补充地解释。
参照图16,根据本发明的实施方式的多媒体装置对从外部接收或存储在存储器中的视频数据执行解码[S1610],将所解码的视频数据显示在第一区域上[S1620],然后从外部装置接收至少一个命令[S1630]。例如,多媒体装置对应于电视、STB等中的一个。
此外,多媒体装置根据从外部装置接收的至少一个命令执行特定区域放大模式[S1640],并将与视频数据对应的视频数据显示在第一区域内的第二区域上[S1650]。
另外,第二区域包括指示物,并且显示在第一区域上的视频数据根据指示物的位置和指示物的尺寸中的至少一个而改变。将参照图19进一步描述更多细节。
图17是例示根据本发明的实施方式的启用特定区域放大模式的情况的图。
如图17的左上图1710中所示,在控制器1530通过通信模块1520从外部遥控器1740接收到用于启用特定区域放大模式的命令的情况下,控制器1530在第一区域1710上显示指示特定区域放大模式被启用的通知消息1712和能够选择要放大的特定点的指针1714中的至少一个。
如果控制器1530通过通信模块1520从外部遥控器1740接收到用于在第一区域内指定要放大的特定点的命令,则控制器1530响应于该命令利用指针指定包括特定点的区域,放大所指定的包括特定点的区域,然后显示放大的所指定的包括特定点的区域。
如图17的右上图1720中所示,在控制器1530通过通信模块1520从外部遥控器1740接收到用于停用特定区域放大模式的命令的情况下,控制器1530显示指示特定区域放大模式被停用的通知消息1722。能够选择特定点的指针1724被设计为在第一区域1720内被去除。
如图17的左下图1730中所示,控制器1530通过通信模块1520从外部遥控器1740接收利用指针1734选择第一区域的特定部分的命令,然后响应于所接收的命令预先显示要放大的特定区域1732。因此,从用户的角度,有利的是用户可预先检查要放大的区域。
图18是例示根据本发明的实施方式的当特定区域放大模式被启用时指针形状改变的情况的图。
如图18所示,如果通过从外部遥控器1830接收的命令启用特定区域放大模式1840,则控制器1530将指针形状从原始形状(第一图形图像)改变为不同的形状(第二图形图像)。
例如,如果特定区域放大模式的放大比率增大,则控制器1530将指针形状从原始形状1810改变为“+”形状1820。
如果特定区域放大模式的放大比率减小,则控制器1530将指针形状从原始模式改变为“-”形状。
即,根据本发明的实施方式,如果特定区域放大模式被启用,则指针形状改变为放大镜形状。另外,指针形状根据放大比率的增大和减小而变化。因此,用户可直观地知道特定区域放大模式是否被启用以及放大比率是否增大,从而改进用户便利。
图19是例示根据本发明的实施方式的当特定区域放大模式被启用时控制画面的示例的图。以下,为了描述方便,“特定区域放大模式”可被称为“放大模式”。
首先,根据本发明的实施方式的显示装置根据从遥控器接收的放大输入请求在主画面1910上显示内容并进入放大模式。
显示装置显示包括显示在主画面1910上的内容的窗口1920以及用于在所显示的窗口1920内选择所显示内容的特定区域的指示物1930。
显示装置放大所选择的所显示内容的特定区域。另外,显示装置被设计为将放大的所选择的所显示内容的特定区域显示在主画面1910上。上述内容对应于视频。
为了描述方便,主画面1910可被称为第一区域,窗口1920可被称为第二区域。对窗口1920的形式和尺寸不存在限制。
具体地,例如,如果在将包括在广播信号中的视频数据显示在主画面1910上的同时显示装置在预定时间或更长时间期间从遥控器1940接收到输入信号(例如,“OK”按钮),则显示装置将视频数据甚至显示在窗口1920上。当初始执行特定区域放大模式时,相同的视频数据显示在主画面1910和窗口1920二者上。具体地,显示在主画面1910上的视频数据与显示在窗口1920上的视频数据相同,但是视频数据具有不同的尺寸。
此外,指示物1930显示在窗口1920上,并且用户使用指示物1930来选择用户期望放大的特定区域。例如,指示物1930可被实现为指引将放大或已放大的特定区域的指引框的图形图像。此外,显而易见的是,采用其它图形图像落在所附权利要求书及其等同物的范围内。
另外,窗口1920可被称为总窗口,并且指示物1930可被称为局部窗口。指定的区域通过指示物1930被放大,然后显示在主画面1910上。换言之,当显示装置新进入特定区域放大模式时,显示装置通过主画面1910输出原始视频数据。当通过窗口1920和指示物1930选择要放大的特定区域时,显示装置利用仅特定区域被放大的视频数据替换原始视频数据。即,显示装置显示该视频数据代替原始视频数据。此外,例如,显示装置被设计为当指针1932的位置改变时改变指示物1930的位置。另外,如果在执行特定区域放大模式之后判定要放大的特定区域,则原始视频数据通过按照1倍缩放来显示在窗口1920上。这意味着仅原始视频数据的尺寸缩小。此后,代替原始视频数据,特定区域被放大的视频数据(按照大于1倍,例如1.2、1.5或2.0倍)显示在主画面1910上。
例如,控制器1530被设计为通过将窗口1920中的指示物1930内部的亮度调高并将指示物1930外部的亮度调低来使得用户能够容易地检查用户期望放大的特定区域。
此外,包括用于改变画面放大比率的放大按钮1924和缩小按钮1922二者的比率指示器条存在于主画面1910上。如果控制器1530接收到使用指针1932选择缩小按钮1922和放大按钮1924中的一个的命令,则控制器1530响应于该命令根据预定比率调节指示物1930的尺寸。控制器1530根据选择缩小按钮1922和放大按钮1924的命令改变指针1932的形状。包括缩小按钮1922和放大按钮1924二者的比率指示物/控制条被称为第二指示物,其可与以上描述中所提及的指示物1930相区分。
在这种情况下,根据缩小按钮1922的选择的倍率的最小值可为1倍,根据放大按钮1924的选择的倍率的最大值可为5倍。在这种情况下,放大倍率的最大值不限于5倍,而是可为可调节的。在放大倍率小于1倍的情况下,显示在画面上的图像缩小。
例如,如果控制器1530接收到选择缩小按钮1922的命令,则控制器将指针形状从指针1932的原始形状改变为“-”形状。如果控制器1530接收到选择放大按钮1924的命令,则控制器1530将指针形状从指针1932的原始形状改变为“+”形状。
此外,窗口1920可被实现为PIP画面,并且PIP画面的尺寸被设计为可调节的。例如,如果控制器1530从外部装置(例如,遥控器)接收到点击PIP画面的边缘部分(即,拐角部分)并在维持点击的状态下将其从第一点移到不同于第一点的第二点的命令,则控制器1530能够调节PIP画面的尺寸。
另外,控制器1530可改变PIP画面的位置。
例如,如果控制器1530从外部遥控器接收到通过指针点击PIP画面的第一点并在维持点击的状态下将其从第一点移至第一区域内不同于第一点的第二点的命令,则控制器1530可改变PIP画面的位置。在这种情况下,上述PIP画面对应于图19所示的窗口1920。
例如,如果窗口1920持续存在,则可能导致用户观看所播放的视频数据不便。因此,在预定时间(例如,三秒)过去之后,控制器1530将窗口1920和指示物1930的状态切换为隐藏状态。此后,如果控制器1530从外部装置1940接收到预定命令,则控制器1530再次将窗口1920和指示物1930显示在PIP画面上。
如果指针1932位于第二区域1920的右边界线、左边界线、上边界线和下边界线中的一个处,则控制器1530将窗口1920和指示物1930的状态改变为隐藏状态。如果从外部装置1940接收到特定命令,则控制器1530将窗口1920作为PIP画面再次显示在主画面1910中。
控制器1530利用指针1932移动指示物1930,并且当指示物1930的位置改变时,显示在主画面1910上的视频数据也改变。例如,指示物1930所指定的区域中的视频数据和显示在主画面1910上的放大的视频数据彼此相同,但是具有不同的尺寸(当图19所示的主画面1910和指示物1930比较时,会更明显)。具体地,例如,如果窗口1920中的指示物1930仅包括特定对象,则主画面1910也仅显示包括特定对象的视频数据。然而,当与指示物1930内的视频数据比较时,仅主画面1910内的视频数据被放大。
因此,通过实时地显示位置和尺寸改变的指示物1930,可获得更快速地检查原始视频数据的放大的特定区域的优点。
换言之,如果执行特定区域放大模式,则原始数据显示在主画面1910和窗口1920二者上。然而,尺寸缩小的视频数据显示在窗口1920上。为了放大特定区域,指针1932可位于主画面1910或窗口1920内。通过指针1932作为中心点来确认要放大的特定区域。
如果要放大的特定区域被确认,则代替原始视频数据,特定区域被放大的视频数据显示在主画面1910上。此外,显示装置可被设计为使得通过调节放大比率来利用原始视频数据再次替换显示在主画面1910上的放大的视频数据。当原始视频数据再次显示在主画面1910上时,用户可通过选择主画面1910中的随机点来新指定要放大的特定区域。当然,在窗口1920中使用指示物1930指定要放大的特定区域落入所附权利要求书及其等同物的范围内。
另外,如果在特定区域被放大的视频数据显示在主画面1910上的同时使用外部装置1940调节放大/缩小倍率,则显示装置自动地改变窗口1920中的指示物1930的尺寸。因此,用户具有容易地实时检查窗口1920的哪一部分对应于主画面1910上放大或缩小的视频数据的优点。
图19所示的第二指示物1922/1924用于设定放大级别,并且通过调谐器或外部装置接收要显示在主画面1910上的内容。例如,外部装置对应于STB、PC和蜂窝电话中的至少一个。
指示物1930的尺寸根据通过第二指示物1922/1924选择的放大级别自动地改变。
另外,尽管图16中未示出,可参照图19实现另一实施方式,其包括以下步骤:接收用于放大所显示的内容的第一放大级别,基于所接收的第一放大级别显示具有第一显示尺寸的倍率指示物,接收用于放大所显示的内容的第二放大级别,并且基于所接收的第二放大级别显示具有不同于第一显示尺寸的第二显示尺寸的倍率指示物。
例如,窗口1920包括画中画(PIP)窗口。
窗口1920在主画面1910内的移动也落入所附权利要求书及其等同物的范围内。另外,执行以选择显示在窗口1920上的内容的另一特定区域的指示物1930在窗口1920内的移动也落入所附权利要求书及其等同物的范围内。
指示物1930根据从遥控器1940接收的指针信号而移动,并且指示物1930的尺寸根据从遥控器1940接收的滚轮信号而改变。
指示物1930的尺寸根据放大级别1922减小而增大。相反,指示物1930的尺寸根据放大级别1924增大而减小。
例如,指示物1930被实现为指引将放大或已放大的特定区域的指引框的图形图像。
在本发明的另一方面,还包括以下步骤:根据显示在图19所示的主画面1910上的内容的视频数据改变根据遥控器的运动而移动的指针的坐标信息。例如,如果内容的视频数据的分辨率信息对应于HD,则还包括按照0.66倍缩放指针的坐标信息的步骤。如果内容的视频数据的分辨率信息对应于FHD,则还包括按照1倍缩放指针的坐标信息的步骤。如果内容的视频数据的分辨率信息对应于UHD,则还包括按照2倍缩放指针的坐标信息的步骤。将参照图27进一步描述更多细节。
在执行放大模式之后预定时间过去之后或者根据从遥控器1940接收的至少一个命令,窗口1920和指示物1930二者被控制被去除。在窗口1920和指示物1930二者被去除之后,显示用于指引正在执行放大模式的图形图像。另外,图形图像包括指示放大倍率的信息。根据选择图形图像的命令再次显示窗口1920和指示物1930二者。将参照图31至图34进一步描述更多细节。
图20是例示根据本发明的实施方式的当特定区域放大模式被启用时使用指针来移动放大的画面上的特定点的示例的图。
参照图20,如果在通过全屏将指示物2030所指定的区域显示在第一区域2010上的同时,控制器1530从外部装置接收到利用指针选择全屏的特定点2012的命令,则控制器1530将指示物2030所指定的区域的中心点从现有中心点移到特定点2012。随后,控制器1530针对特定区域2012生成新放大区域并通过全屏显示所生成的新放大区域。
此外,根据本发明的另一实施方式,可在第二区域2020中选择要放大的特定区域的中心点,或者可在第一区域2010中选择要放大的特定区域的中心点。当使用第一区域2010选择要放大的特定区域的中心点时,具有微小地调节放大区域的优点。另一方面,当使用第二区域2020选择要放大的特定区域的中心点时,具有在检查原始视频数据的同时改变特定区域的优点。
图21是例示根据本发明的实施方式的当特定区域放大模式被启用时使用遥控器来控制画面的示例的图。如上所述,根据本发明的实施方式的多媒体装置(例如,TV或STB)由外部装置控制,并且外部装置对应于遥控器或移动装置。尽管图21示出遥控器作为外部装置的示例,所附权利要求书及其等同物的范围不限于遥控器。
根据本发明的实施方式,外部遥控器2140包括滚轮键2142、方向键2144和音量键2146。
如果控制器1530从外部遥控器2140接收到与滚轮键2142的操纵对应的特定命令,则控制器1530根据滚轮键2142的操纵调节画面放大比率。
例如,如果控制器1530从外部遥控器2140接收到与在滚轮键2142的上方向上旋转滚轮的输入对应的特定命令,则控制器1530增大画面放大比率。如果控制器1530从外部遥控器2140接收到与在滚轮键2142的下方向上旋转滚轮的输入对应的特定命令,则控制器1530减小画面放大比率。
用户可通过遥控器的滚轮键在1倍至5倍的范围内改变画面放大比率。每当滚轮键移动1个单位时,画面放大比率改变0.2倍。画面放大比率不固定,但是被设计为能够通过用户配置修改。
如果控制器1530从外部遥控器2140接收到与音量键2146的操纵对应的特定命令,则控制器1530根据音量键2146的操纵来调节画面放大比率。
例如,如果控制器1530从外部遥控器2140接收到与音量键2146的“+”部分对应的特定命令,则控制器1530增大画面放大比率。另一方面,如果控制器1530从外部遥控器2140接收到与音量键2146的“-”部分对应的特定命令,则控制器1530减小画面放大比率。
如果控制器1530从外部遥控器2140接收到与方向键2144的操纵对应的特定命令,则控制器1530根据方向键2144的操纵将指示物2130所指定的区域的中心点从现有中心点移至特定点,针对特定点生成放大的视频数据,然后将所生成的放大的视频数据显示在第一区域2110上。
如果使用外部遥控器的键改变特定区域的放大比率和位置,则与PIP画面对应的第二区域2120内的指示物2130的位置和尺寸也改变。根据本发明的另一实施方式,外部遥控器2150包括音量键2156、频道键2152和触摸板2154。当然,外部遥控器2150由运动传感器或语音识别传感器控制。
如果控制器1530从外部遥控器2150接收到与音量键2156的操纵对应的特定命令,则控制器1530根据音量键2156的操纵来调节画面放大比率。
例如,如果控制器1530从外部遥控器2150接收到与音量键2156的顶部部分对应的特定命令,则控制器1530增大画面放大比率。如果控制器1530从外部遥控器2150接收到与音量键2156的底部部分对应的特定命令,则控制器1530减小画面放大比率。
如果控制器1530接收到与频道键2152的操纵对应的特定命令,则控制器1530根据频道键2152的操纵来调节画面放大比率。
例如,如果控制器1530从外部遥控器2150接收到与频道键2152的顶部部分对应的特定命令,则控制器1530增大画面放大比率。如果控制器1530从外部遥控器2150接收到与频道键2152的底部部分对应的特定命令,则控制器1530减小画面放大比率。
如果控制器1530从外部遥控器2140接收到与触摸板2154的操纵对应的特定命令,则控制器1530根据触摸板2154的操作将指示物2130所指定的区域的中心点从现有中心点移至特定点,生成以特定点为中心的放大的视频数据,然后将所生成的放大的视频数据显示在第一区域2110上。
图22是例示根据本发明的实施方式的通过与EPG信息的关联来自动地执行特定区域放大模式的示例的图。
参照图22,EPG信号处理模块1560从包含EPG信号的广播信号提取类别信息(例如,流派信息等),然后分析所提取的类别。在这种情况下,例如,类别包括体育、新闻、纪录片、电影、戏剧、娱乐、艺术、脱口秀等。
如果包括在广播信号中的信息对应于特定类别,则控制器1530自动地执行特定区域放大模式。
例如,如果当前显示的广播节目(即,视频数据)对应于诸如体育、新闻等的类别,则控制器1530自动地启用特定区域放大模式。
此外,如果当前显示的广播节目(即,视频数据)对应于成人视频、暴力视频、成人动作和X级内容中的一个,则控制器1530将特定区域放大模式的状态切换为关闭状态。
因此,根据本发明的实施方式,具有这样的优点:通过设计为使得特定区域放大模式根据视频数据的类别信息(例如,流派信息)自动地打开或关闭,使进入特定区域放大模式所需的时间最小化或者减少本发明的误用。图23是例示根据本发明的实施方式的通过与时移功能的关联来执行特定区域放大模式的示例的图。
在这种情况下,时移功能意指在实时观看TV的过程中使得用户能够观看错过的节目的功能。例如,存储器1550被设计为即使存储器1550没有从用户接收到明确的保存命令,也自动地将当前显示的广播节目存储规定的时间。在这种情况下,例如,存储器1550包括可移除硬盘、外部USB存储器、内置于多媒体装置中的存储器等。
控制器1530在显示有视频数据的第一区域2300的底部显示指示回放时间的条2310。例如,在视频数据的流派信息对应于体育的情况下,控制器1530标记进球得分的时间2312和对应视频数据最优选观看的时间2314。特定时间2312和2314可通过EPG信息或web搜索来收集。特定区域放大模式被设计为在特定时间被选择时自动地执行。
根据本发明的另一实施方式,控制器1530检索存储在存储器1550中的至少一条视频数据,并在执行特定区域放大功能的情况下播放检索到的视频数据的一部分。
例如,在由包括第一歌手和第二歌手的9名成员组成的特定歌手组合的视频数据的情况下,用户可能仅对第一歌手和第二歌手唱歌的部分感兴趣。与传统时移功能不同,控制器1530将关于执行特定区域放大功能的部分的信息与视频数据一起存储在存储器1550中。
控制器1530从存储器1550检索执行特定区域放大功能的部分并仅播放检索到的部分。
因此,根据本发明,由于检索自动地执行特定区域放大功能的部分并且仅播放检索到的区段,所以具有用户不需要播放视频数据的所有部分的优点。
根据本发明的另一实施方式,控制器1530基于针对暂时存储在存储器中的视频数据执行的特定区域扩大功能的次数来分割全屏。另外,控制器1530被设计为使得执行特定区域放大功能的视频数据(即,仅特定区域被放大的视频数据)通过各个分割画面显示。例如,关于一条视频数据(例如,广播节目),如果特定区域放大功能的总执行次数为9,则控制器1530显示9个分割画面。此后,控制器1530通过9个分割画面中的每一个来显示执行特定区域放大功能的各个部分。
因此,具有更快速地检查执行特定区域放大功能的部分的优点。
图24是例示根据本发明的实施方式的在全屏与变焦画面之间切换的示例的图。
如图24所示,如果控制器1530从外部遥控器接收到特定命令,则控制器1530将要发送给第一区域的视频信号和要发送给第二区域的视频信号彼此切换并且显示第一区域和第二区域中的每一个。
具体地,要发送给第一区域的视频信号对应于特定区域被放大的视频数据,并且要发送给第二区域的视频信号对应于尺寸缩小的原始视频数据。
因此,如图24的上面的图2410中所示,具有放大的特定区域的视频数据显示在主画面上,并且尺寸缩小的原始视频数据显示在PIP画面上。具体地,按照规定比率缩小的全屏和全屏的放大区域的位置显示在PIP画面上。
如图24的下面的图2420中所示,全屏显示在主画面上,并且具有放大的特定区域的画面显示在PIP画面上。
因此,根据本发明的实施方式,具有这样的优点:如果需要,原始视频数据或具有放大的特定区域的视频数据通过快速地切换来选择性地显示在全屏或PIP画面上。
图25是例示根据本发明的实施方式的选择画面上的多个点并放大所选择的点的示例的图。
参照图25,如果在特定区域放大模式被启用的状态下控制器1530在预定时间内通过通信模块从外部遥控器接收到指定第一区域2510中的多个点的命令,则控制器1530自动地生成并显示总计为点的数量的PIP画面。
例如,如果在进入特定区域放大模式之后控制器1530在三秒内通过通信模块从外部遥控器接收到选择第一区域2510中的三个特定点的命令,则控制器1530显示第一PIP画面2520、第二PIP画面2530和第三PIP画面2540。各个PIP画面包括针对三个特定点中的每一个放大的视频数据。
根据本发明的实施方式,如果用户期望通过放大画面内的多个点来观看画面,则用户可指定多个点。此后,各个指定的点可作为PIP画面显示在画面的特定部分上。
在这种情况下,如果多个人位于画面的不同位置,则用户能够同时指定多个人并识别所指定的多个人。通过这样做,用户可更精确地知道关于所识别的人的服装、手表和配饰的详细信息,从而改进用户便利。
图26是例示根据本发明的实施方式的选择画面上的多个点并放大所选择的点的示例的图。由于图26的实施方式与图25相似,将仅描述两个实施方式之间的差异。然而,图26可参照图25中所描述的特征补充地解释。
例如,如果在进入特定区域放大模式之后控制器1530在三秒内通过通信模块从外部遥控器接收到选择三个特定点的命令,则控制器1530将显示原始视频数据的第一区域2610的尺寸缩小80%,然后在除了第一区域2610之外的区域上显示第一子画面2620、第二子画面2630和第三子画面2640。各个PIP画面包括关于三个特定点中的每一个放大的视频数据。
与图25相比,在图26中提供了用于解决原始视频数据被PIP画面覆盖的问题的解决方案。具体地,根据子画面(例如,子画面2620、2630和2640)的数量显示原始视频数据的第一区域的尺寸变化可被解释为本发明的一个特征。
图27是例示根据本发明的实施方式的针对来自遥控器的坐标与输入视频不匹配的情况的解决方案的图。在实现本发明的另一实施方式的过程中,应该解决将参照图27和以下描述中提及的技术问题。
参照图27,遥控器的坐标是二维平面2710中的1920×1080,而视频信号的坐标可变为二维平面2720中的3840×2160。在这种情况下,坐标不是固定的,而是可根据输入视频信号或装置的分辨率来修改。各个坐标值不是绝对值,而是可作为相对值改变。分辨率意指画面中包括多少像素并且通过宽度像素的数量和高度像素的数量相乘来表示。即,如果分辨率是1920×1080,则宽度像素的数量是1920,高度像素的数量是1080。另外,其被表示为二维平面坐标。
例如,由于遥控器的坐标不等于视频信号的坐标,所以即使用户选择了x=1440和y=270的点P,控制器1530也识别出x=720和y=135的点P’被选择。
因此,用户所期望的坐标与控制器1530所识别的坐标之间可能存在差异。
在这种情况下,当外部遥控器意图将数据传送到显示装置时,外部遥控器通过在数据中包括对应遥控器的坐标信息来传送数据。外部遥控器和显示装置通过无线通信彼此连接,无线通信包括RF通信和IR通信。此外,外部遥控器可对应于诸如智能电话、平板PC等的移动装置。
控制器1530根据内容的视频信号信息对外部遥控器的坐标信息执行缩放。
具体地,当内容的视频信号信息改变时,控制器1530感测改变的视频信号信息,然后基于所感测的视频信号信息对所接收的外部遥控器的平面坐标执行缩放。
例如,当遥控器的坐标为1920×1080并且内容的视频信号分辨率信息是与1280×720对应的720P HD时,控制器1530通过参考视频信号信息缩放所接收的遥控器的坐标来将所接收的遥控器的坐标改变为1280×720。当分辨率对应于HD时,缩放因子变为0.66。
当内容的视频信号分辨率信息是与1920×1080对应的FHD时,控制器1530参考视频信号信息执行缩放。当分辨率是FHD时,遥控器的坐标和视频信号信息的坐标相同,因此缩放因子变为1。
如果内容的视频信号分辨率信息是与3840×2160对应的UHD,则控制器1530通过参考视频信号信息缩放所接收的遥控器的坐标来将所接收的遥控器的坐标改变为3840×2160。当分辨率对应于UHD时,缩放因子变为2。
图28是例示根据本发明的实施方式的针对要放大的特定区域在视频输出范围之外的情况的解决方案的图。
参照图28的上面的图2810,当关于指针所在的点(即,通过将该点视为中心点)放大特定区域时,可存在原始视频数据中不包括的区域。
因此,如图28的下面的图2820所示,通过将中心点移到另一点2824而非指针所在的点2822来放大特定区域。与图28的上面的图2810相比,有利的是仅包括在原始视频数据中的区域被放大。
图29是例示根据本发明的实施方式的当输出视频数据时将画面分割成规定数量的部分画面,如果用户从所分割的画面选择画面,则放大所选择的画面,并且显示所放大的画面的示例的图。
参照图29的上面的图2910,如果控制器1530从外部遥控器接收到特定命令,则控制器1530将画面分割成九个画面以显示视频数据。如果用户从分割画面选择特定画面2912并且控制器1530从外部遥控器接收到选择特定画面2912的命令,则控制器1530放大与所选择的特定画面2912对应的视频数据,然后显示放大的视频数据。
此外,如图29的下面的图所示,控制器1530按照规定的比率缩小原始视频数据,然后在第二区域2924上显示缩小的原始视频数据。另外,控制器1530如图29的上面的图2910所示放大所选择的特定区域的视频数据,然后在第一区域2920上显示放大的视频数据。此外,如在以上描述中提及的,用于指引放大的特定区域的指示物2922一起显示在第二区域2924上。
图30是例示根据本发明的实施方式的当输出视频数据时控制器根据用户的选择将画面分割成四个、九个或十六个部分画面并且控制所分割的画面的示例的图。
如图30所示,如果控制器1530从外部遥控器3010接收到特定命令3020,则控制器将画面分割成四个画面3030,然后显示四个画面以输出视频数据。另选地,控制器1530将画面分割成九个画面3040,然后显示九个画面。此外,控制器1530将画面分割成十六个画面3050,然后显示十六个画面。所分割的画面的数量可由预定值确定,或者被设计为可由用户选择。参照分割的画面,用户可选择用户期望放大的视频数据的特定区域。
如果在执行特定区域放大模式之后根据从外部装置接收的至少一个命令改变显示在第一区域上的视频数据的放大或缩小倍率,则控制器1530自动地改变第二区域中的指示物的尺寸。其将参照图31详细描述。
如果在执行特定区域放大模式之后根据从外部装置接收的至少一个命令在第一区域内识别出要放大的特定区域,则控制器1530自动地改变第二区域中的指示物的中心点。其将参照图32详细描述。
在执行特定区域放大模式之后预定时间过去之后或者根据从外部装置接收的至少一个命令,控制器1530控制第二区域内的视频数据和指示物二者被去除。其将参照图33详细描述。
此外,在第二区域内的视频数据和指示物二者被去除之后,控制器1530显示用于指引特定区域放大模式正在运行的图形图像。在这种情况下,图形图像包括关于放大倍率的信息。控制器1530被设计为根据选择图形图像的命令将视频数据和指示物二者再次显示在第二区域内。其将参照图34详细描述。
图31是例示根据本发明的实施方式的在执行特定区域放大模式的同时调节放大比率的处理的图。显而易见的是,与本领域技术人员参照以上附图实现的图31所示的实施方式部分地不同的实施方式落入所附权利要求书及其等同物的范围内。
如图31所示,当执行特定区域放大模式并且还指定要放大的特定区域时,第二区域3120内的指示物3130所指定的区域的视频数据也显示在第一区域3110上。如以上描述中提及的,指示物3130中的视频数据与第一区域3110中的视频数据匹配(即,相同),但是两条视频数据具有不同的尺寸。
此外,对于显示在第一区域3110上的视频数据,可使用外部装置3100另外向多媒体装置(例如,TV或STB)发送放大或缩小命令。例如,如图31所示通过外部装置3100的特定按钮生成用于放大第一区域3110中的视频数据的命令,然后对应命令被发送到多媒体装置。
因此,如图31所示,与第一区域3110中的先前视频数据相比,放大的视频数据显示在第一区域3111上。此外,根据本发明的特征,第二区域3121内的指示物3131的尺寸和位置中的至少一个根据第一区域3111内的视频数据而自动地改变。
图32是例示根据本发明的实施方式的在执行特定区域放大模式的同时选择要放大的区域的处理的图。显而易见的是,与本领域技术人员参照以上附图实现的图32所示的实施方式部分地不同的实施方式落入所附权利要求书及其等同物的范围内。
如上所述或如图32所示,当初始执行特定区域放大模式时,第一区域3210中的视频数据和第二区域3220中的视频数据彼此相同,但是两条视频数据具有不同的尺寸。另外,第二区域3220中的指示物3230的位置被设计为对应于在先前执行的特定区域放大模式下最后选择的特定区域或随机区域。
此外,假设在上述情况下利用外部装置3200选择要放大的特定区域。
因此,如图32所示,特定区域被放大的视频数据显示在第一区域3211上,并且原始视频数据类似于先前第二区域3220被一致地显示在第二区域3221上。然而,第二区域3221内的指示物3231的位置和尺寸中的至少一个自动地改变。另外,如图32所示,指示物3231的位置或尺寸根据显示在第一区域3211上的视频数据自动地改变。上述设计具有快速和容易地检查原始视频数据的哪一特定区域被放大和观看的优点。
图33是例示根据本发明的实施方式的在执行特定区域放大模式的同时消除相关指示物的处理的图。显而易见的是,与本领域技术人员参照以上附图实现的图33所示的实施方式部分地不同的实施方式落入所附权利要求书及其等同物的范围内。
如上所述或如图33所示,在执行特定区域放大模式之后,在第二区域3330上显示原始视频数据并且在第一区域3310上显示仅特定区域被放大的视频数据。此外,指示物3320的尺寸和位置根据第一区域3310而改变。
然而,可能存在这样的问题:放大的视频数据的一部分与第二区域3330内的视频数据和指示物3320交叠。为了解决此问题,多媒体装置可被设计为使得当预定时间(例如,3至5秒)过去时或者当多媒体装置从外部装置3300接收到特定命令时,特定区域被放大的视频数据仍显示在第一区域3311上,并且与先前第二区域3320不同,指示物和原始视频数据没有显示在第二区域3321上。因此,期望有使得用户能够仅通过第一区域3311观看特定区域被放大的视频数据的效果。
图34是例示根据本发明的实施方式的在执行特定区域放大模式的同时再次显示所消除的相关指示物的处理的图。显而易见的是,与本领域技术人员参照以上附图实现的图34所示的实施方式部分地不同的实施方式落入所附权利要求书及其等同物的范围内。具体地,在图34中,假设图33中所描述的情况。
与图33的下面的图相比,图34与图33的相同之处在于,特定区域被放大的视频数据显示在第一区域3410上。然而,图34与图33的不同之处在于,存在用于指引特定区域放大模式正在运行的第二指示物3440。具体地,第二指示物3440包括指示显示在第一区域3410上的视频数据与原始视频数据相比被放大多少次的信息。
在这种情况下,如果使用外部装置3400选择第二指示物3440,则原始视频数据再次显示在第二区域3430上,并且与第一区域3411对应的指示物3420也再次显示。
图35是例示根据本发明的实施方式的显示装置的配置的框图。明显地,本发明包括图1至图34的实施方式。
如图35所示,显示装置3500包括接口模块3510、控制器3520、显示模块3530、存储器3540和EPG信号处理模块3550。
接口模块3510接收用于请求放大模式的输入和用于从显示在主画面上的整个区域中选择特定区域的输入。
控制器3520控制显示模块3530和接口模块3510。
控制器3520根据用于请求放大模式的输入来进入放大模式,从遥控器接收用于从显示在主画面上的整个区域中选择特定区域的输入,根据所接收到的选择输入以预定放大率放大所选择的特定区域,将放大后的特定区域显示在主画面上,然后将放大后的特定区域的详细信息显示在主画面内的PIP画面上。
这里,内容包括视频。
如果预定放大率是第一放大率,则控制器3520将特定区域的第一详细信息显示在主画面内的PIP画面上。如果预定放大率是第二放大率,则控制器3520将特定区域的第二详细信息显示在主画面内的PIP画面上。如果预定放大率是第三放大率,则控制器3520将特定区域的第三详细信息显示在主画面内的PIP画面上。
稍后将参照图38来详细描述。
当控制器3520无法将详细信息显示在主画面上时,控制器3520搜索包括在详细信息中的对象。
稍后将参照图39来详细描述。
控制器3520在PIP画面的第一区域中显示第一详细信息,在PIP画面的第二区域中显示第二详细信息,并且在PIP画面的第三区域中显示第三详细信息。
稍后将参照图40来详细描述。
当从遥控器接收到用于选择详细信息的输入时,控制器3520将与详细信息对应的第一详细信息显示在主画面上,并且将与详细信息相关但比其更详细的第二详细信息显示在PIP画面上。
稍后将参照图41来详细描述。
当从遥控器接收到用于选择第一详细信息的输入时,控制器3520将第一详细信息显示在主画面的部分区域中,将第二详细信息显示在PIP画面的第一区域中,将第三详细信息显示在PIP画面的第二区域中,并且将特定区域的第四详细信息显示在PIP画面的第三区域中。
稍后将参照图41来详细描述。
显示模块3530在显示装置的主画面上显示内容。
即使没有来自用户的显式存储命令,存储器3540也在预定时间期间自动地存储当前显示的内容。在这种情况下,存储器3540可包括外部硬盘、外部USB存储器或者安装在显示装置中的存储器。
EPG信号处理模块3550从包含EPG信号的广播信号中提取类别信息(例如,流派信息等),然后分析所提取的类别。在这种情况下,例如,类别包括体育、新闻、纪录片、电影、戏剧、娱乐、艺术、脱口秀等。
相机模块3560拍摄显示装置的正面。
GPS接收模块从卫星接收GPS信号。
图36是用于说明根据本发明的实施方式的显示装置的控制方法的流程图。该控制方法由控制器3520执行。
在显示装置的主画面上显示内容[S3610]。
根据从遥控器接收到的用于请求放大模式的输入来启动放大模式[S3620]。
从遥控器接收用于从显示在主画面上的整个区域中选择特定区域的输入[S3630]。
根据接收到的选择输入以预定放大率放大所选择的特定区域[S3640]。
在主画面上显示放大后的特定区域[S3650]。
根据预定放大率以不同的方式在主画面内的PIP画面上显示放大后的特定区域的详细信息[S3660]。
在这种情况下,内容包括视频。
图37是用于说明根据本发明的实施方式的显示装置的控制方法的流程图。该控制方法由控制器3520执行。
在显示装置的主画面上显示内容[S3710]。
根据从遥控器接收到的用于请求放大模式的输入来启动放大模式[S3720]。
从遥控器接收用于从显示在主画面上的整个区域中选择特定区域的输入[S3730]。
根据接收到的选择输入以预定放大率放大所选择的特定区域[S3740]。
在主画面上显示放大后的特定区域[S3750]。
根据预定放大率以不同的方式在主画面内的PIP画面上显示放大后的特定区域的详细信息[S3760]。
当从遥控器接收到用于选择详细信息的输入时,将详细信息显示在主画面上[S3770]。
在PIP画面上显示与和详细信息对应的第一详细信息相关但比第一详细信息更详细的第二详细信息[S3780]。
检查详细信息是否能够被显示在主画面上[S3790]。
如果确定详细信息不能被显示在主画面上,则搜索包含在详细信息中的对象[S3795]。
图38是例示根据本发明的实施方式的根据放大率以不同的方式显示详细信息的图。
如果预定放大率是第一放大率,则控制器3520将特定区域的第一详细信息显示在主画面内的PIP画面上。类似地,如果预定放大率是第二放大率或第三放大率,则控制器3520将对应的详细信息显示在主画面内的PIP画面上。
例如,假定如主画面3810所示,从用户接收到用于选择特定区域3812的输入。在这种情况下,如果预定放大率是100%,则如主画面3820所示,控制器3520将诸如特定区域3812的卫星图片信息这样的第一详细信息显示在主画面或PIP画面上。
如果预定放大率是200%,则如主画面3830所示,控制器3520将诸如卫星图片的街道信息这样的第二详细信息显示在主画面或PIP画面上。
如果预定放大率是300%,则如主画面3840所示,控制器3520将诸如街道的商店信息这样的第三详细信息显示在主画面或PIP画面上。
随着预定的放大率增加,详细信息可以变得更加明确和具体。也就是说,当放大率从100%增加到300%时,详细信息可以变得更加具体和详细,使得卫星图片的街道信息改变为街道的商店信息。
图39是例示根据本发明的实施方式的当没有更多相关详细信息时在画面上显示搜索窗口的图。
当控制器3520不能在主画面上显示详细信息时,控制器3520搜索包括在详细信息中的对象。
例如,如主画面3910所示,当控制器3520无法显示详细信息时,控制器3520在主画面上显示搜索窗口3920,然后搜索包括在详细信息中的对象。
随后将详细地描述。
图40是例示根据本发明的实施方式的在PIP画面的每个区域中显示每条详细信息的图。
如主画面4010所示,控制器3520在PIP画面的第一区域4012中显示第一详细信息,在PIP画面的第二区域4014中显示第二详细信息,并且在PIP画面的第三区域4016中显示第三详细信息。
在这种情况下,第二详细信息与第一详细信息的子信息对应,并且第三详细信息与第二详细信息的子信息对应。
例如,如果第一详细信息是特定区域的卫星图片信息,则第二详细信息可以是卫星图片的街道信息,并且第三详细信息可以是卫星图片中包括的街道的商店信息。
在特定内容的情况下,如主画面4020所示,控制器3520在PIP画面的第一区域4022中显示第一详细信息,在PIP画面的第二区域4024中显示第二详细信息,并且在PIP画面的第三区域4026中显示第三详细信息。
此外,控制器3520在PIP画面的第三区域4026中连续地显示与特定区域有关的详细信息。
在这种情况下,第二详细信息与第一详细信息的子信息对应,并且第三详细信息与第二详细信息的子信息对应。
根据本发明,通过检测一次性放大输入,数字装置不仅能够显示特定详细信息,而且能够在同一单个画面上显示与该特定详细信息相关但比其更详细的多条信息。
图41是例示根据本发明的实施方式的当画面被选择时显示装置移动该画面的图。
当从遥控器接收到用于选择详细信息的输入时,控制器3520将与详细信息对应的第一详细信息显示在主画面上,并且将与第一详细信息相关但比其更详细的第二详细信息显示在PIP画面上。
如主画面4110所示,在主画面4110的部分区域中显示放大后的特定区域,在PIP画面的第一区域4112中显示第一详细信息,在PIP画面的第二区域4114中显示第二详细信息,并且在PIP画面的第三区域4116中显示第三详细信息。
如主画面4120所示,当控制器3520从遥控器接收到用于选择第一详细信息的输入时,控制器3520终止在主画面4120上显示放大后的特定区域,将第一详细信息显示在主画面4120的部分区域中,将第二详细信息显示在PIP画面的第一区域4122中,将第三详细信息显示在PIP画面的第二区域4124中,并且将特定区域的第四详细信息显示在PIP画面的第三区域4126中。
根据本发明,当接收到用于选择特定详细信息的输入时,特定详细信息被显示在主画面上,并且特定详细信息的子信息被显示在PIP画面的部分区域中。因此,用户能够同时检查特定详细信息和该特定详细信息的子信息。
图42是例示根据本发明的实施方式的当画面被选择时移动装置移动该画面的图。
在移动装置的情况下,主画面意指与显示装置中的全屏相似的全屏。
如主画面4210所示,在主画面4210的部分区域中显示放大后的特定区域,在PIP画面的第一区域4212中显示第一详细信息,在PIP画面的第二区域4214中显示第二详细信息,并且在PIP画面的第三区域4216中显示第三详细信息。
如主画面4220所示,当控制器3520从用户接收到用于选择第一详细信息的触摸输入时,控制器3520将第一详细信息显示在主画面4220的部分区域中,将第二详细信息显示在PIP画面的第一区域4222中,将第三详细信息显示在PIP画面的第二区域4224中,并且将特定区域的第四详细信息显示在PIP画面的第三区域4226中。
根据本发明,当从用户接收到用于选择特定详细信息的触摸输入时,特定详细信息被显示在主画面上,并且该特定详细信息的子信息被显示在PIP画面的部分区域中。因此,用户能够同时检查特定详细信息和该特定详细信息的子信息。
图43是例示根据本发明的实施方式的当画面被选择时导航装置移动画面的图。
在导航装置的情况下,主画面意指与显示装置中的全屏相似的全屏。
如主画面4310所示,在PIP画面的第一区域4312中显示第一详细信息,在PIP画面的第二区域4314中显示第二详细信息,并且在PIP画面的第三区域4316中显示第三详细信息。
如主画面4320所示,当控制器3520从用户接收到用于选择第一详细信息的触摸输入时,控制器3520将第一详细信息显示在主画面4320的部分区域中,将第二详细信息显示在PIP画面的第一区域4322中,将第三详细信息显示在PIP画面的第二区域4324中,并且将特定区域的第四详细信息显示在PIP画面的第三区域4326中。
根据本发明,当从用户接收到用于选择特定详细信息的触摸输入时,特定详细信息被显示在主画面上,并且该特定详细信息的子信息被显示在PIP画面的部分区域中。因此,用户能够同时检查特定详细信息和该特定详细信息的子信息。
图44是例示根据本发明的实施方式的内容包括地图信息的情况的图。
如果预定放大率是第一放大率,则第一详细信息包括特定区域的卫星图片信息。如果预定放大率是第二放大率,则第二详细信息包括卫星图片的街道信息。如果预定放大率是第三放大率,则第三详细信息包括街道的商店信息。
如主画面4410所示,在PIP画面的第一区域4412中显示第一详细信息,并且在PIP画面的第二区域4414中显示第二详细信息。
此外,在PIP画面的第三区域4416中显示第三详细信息。
如主画面4420所示,当从遥控器接收到用于选择第一详细信息的输入时,控制器3520将第一详细信息显示在主画面4420的部分区域中,将第二详细信息显示在PIP画面的第一区域4422中,将第三详细信息显示在PIP画面的第二区域4424中,并且将特定区域的第四详细信息显示在PIP画面的第三区域4426中。
图45是例示根据本发明的实施方式的内容包括EPG信息的情况的图。
如果预定放大率是第一放大率,则第一详细信息包括EPG信息的频道信息。如果预定放大率是第二放大率,则第二详细信息包括频道信息的节目信息。如果预定放大率是第三放大率,则第三详细信息包括关于节目的故事情节、演员和播放时间中的至少一个的信息。第四详细信息包括该节目的预览和快照。
如主画面4510所示,EPG信息被放大,然后被显示在主画面的部分区域中,第一详细信息被显示在PIP画面的第一区域4512中,第二详细信息被显示在PIP画面的第二区域4514中,并且第三详细信息被显示在PIP画面的第三区域4516中。
如主画面4520所示,当从遥控器接收到用于选择第一详细信息的输入时,控制器3520将第一详细信息显示在主画面4520的部分区域中,将第二详细信息显示在PIP画面的第一区域4522中,将第三详细信息显示在PIP画面的第二区域4524中,并且将特定区域的第四详细信息显示在PIP画面的第三区域4426中。
图46是例示根据本发明的实施方式的内容包括特定女演员(或演员)的情况的图。
如果预定放大率是第一放大率,则第一详细信息包括特定女演员参演的电影、特定女演员的图片和关于该特定女演员的信息。如果预定放大率是第二放大率,则第二详细信息包括关于与该特定女演员关联的其它演员(或女演员)的信息。如果预定放大率是第三放大率,则第三详细信息包括特定女演员的SNS信息。如果不再存在与该特定女演员有关的信息,则控制器3520在PIP画面上显示搜索窗口。
如主画面4610所示,在PIP画面的第一区域4612中显示第一详细信息,并且在PIP画面的第二区域4614中显示第二详细信息。
如主画面4620所示,当从遥控器接收到用于选择第一详细信息的输入时,控制器3520将第一详细信息显示在主画面4620的部分区域中,将第二详细信息显示在PIP画面的第一区域4622中,并且将第三详细信息显示在PIP画面的第二区域4624中。如果不再存在与特定女演员有关的信息,则控制器3520在PIP画面的第三区域4626中显示搜索窗口。
图47是例示根据本发明的实施方式的内容包括旅游信息的情况的图。
如果预定放大率是第一放大率,则第一详细信息包括关于特定旅游景点的介绍和地址的信息。如果预定放大率是第二放大率,则第二详细信息包括关于与特定旅游景点相邻的其它推荐旅游景点的信息。如果预定放大率是第三放大率,则第三详细信息包括特定旅游景点的天气信息。
因此,当从用户接收到用于选择特定旅游景点的输入时,控制器3520在PIP画面的特定区域中连续地显示特定旅游景点的详细信息,诸如与特定旅游景点相邻的其它推荐旅游景点的信息、关于如何到达推荐旅游景点的信息、关于推荐旅游景点处的可用设施的信息、关于如何在推荐旅游景点处预订住宿的信息等。因此,用户能够检查特定旅游景点的详细信息。
如主画面4710所示,在主画面4710的部分区域中显示关于特定旅游景点的旅游信息,在PIP画面的第一区域4712中显示第一详细信息,在PIP画面的第二区域4714中显示第二详细信息,并且在PIP画面的第三区域4716中显示第三详细信息。
如主画面4720所示,当从遥控器接收到用于选择第一详细信息的输入时,控制器3520将第一详细信息显示在主画面4720的部分区域中,将第二详细信息显示在PIP画面的第一区域4722中,并且将第三详细信息显示在PIP画面的第二区域4724中。如果不再存在与特定旅游景点有关的信息,则控制器3520在PIP画面的第三区域4726中显示搜索窗口。
图48是例示根据本发明的实施方式的内容包括关于演出的信息的情况的图。
如果预定放大率是第一放大率,则第一详细信息包括关于与演出关联并且将在预定时间段(例如,从当前日期起的一个月)内执行的演出的信息。如果预定放大率是第二放大率,则第二详细信息包括关于将在一个月内执行的演出当中的将在与今天相同的一天执行的演出的信息。如果预定放大率是第三放大率,则第三详细信息包括关于演出的场所、演员、评论和演出时间的信息。
如主画面4810所示,在PIP画面的第一区域4812中显示第一详细信息,在PIP画面的第二区域4814中显示第二详细信息,并且在PIP画面的第三区域4816中显示第三详细信息。
如主画面4820所示,当从遥控器接收到用于选择第一详细信息的输入时,控制器3520将第一详细信息显示在主画面4820的部分区域中,将第二详细信息显示在PIP画面的第一区域4822中,并且将第三详细信息显示在PIP画面的第二区域4824中。
图49是例示根据本发明的实施方式的内容包括关于演出的信息的情况的图。
如果预定放大率是第四放大率,则第四详细信息包括关于特定演出的票价、标准票价和预订选项的信息。如果预定放大率是第五放大率,则第五详细信息包括关于门票的信息和关于座位的信息。
如主画面4910所示,在主画面4910的部分区域中显示第三信息,在PIP画面的第一区域4912中显示第四详细信息,并且在PIP画面的第二区域4914中显示第五详细信息。
如主画面4920所示,当从遥控器接收到用于选择第四详细信息的输入时,控制器3520终止在主画面4920的部分区域中显示第三详细信息,将第四详细信息显示在主画面4920的部分区域中,并且将第五详细信息显示在PIP画面的第一区域4922中。
如主画面4930所示,当从遥控器接收到用于选择第五详细信息的输入时,控制器3520将第五详细信息显示在主画面4930上。
图50是例示根据本发明的实施方式的用户使用语音从显示在画面上的多个车辆中指定特定车辆的图。
控制器3520基于使用模式(即,用户如何使用显示装置)将多个内容存储在存储器3540中。例如,如果用户看到车辆超过阈值次数,则控制器3520将包括车辆对象的内容存储在存储器3540中。通过这样做,能够在各种视图中将各种车辆存储在存储器3540中。
如图50所示,控制器3520从用户5010接收到用于从多个车辆当中指定特定车辆5020的语音。
例如,可在主画面5000上显示第一车辆5020、第二车辆5022和第三车辆5021。当从用户接收到包括第一车辆5020的语音时,控制器3520使用指示物5030来指定第一车辆5020。
具体地,控制器3520从用户的语音中提取车辆的颜色和型号,然后基于提取的颜色和信号使用指示物5030从显示在画面上的多个车辆当中指定特定车辆。
图51是例示在各种视图中显示由用户使用语音指定的车辆的示例的图。
如主画面5100所示,当从用户接收到用于从多个车辆当中选择诸如第一车辆5112这样的特定车辆的语音输入时,控制器3520显示其中从主画面5100上的多个车辆当中选择特定车辆的画面。
控制器3520基于存储在存储器3540中的各种类型的车辆的各种视图来创建诸如第一车辆5112这样的特定对象的左侧、右侧和后侧的虚拟视图。
控制器3520在PIP画面的第一区域5120中显示第一车辆5112的左侧的虚拟视图。
控制器3520在PIP画面的第二区域5130中显示第一车辆5112的右侧的虚拟视图。
控制器3520在PIP画面的第三区域5140中显示第一车辆5112的后侧的虚拟视图。
根据本发明的一个实施方式,控制器3520可根据来自用户的语音或手势来移动指示物5130以改变所指定的车辆,并因此创建不同的虚拟视图。
根据本发明,用户能够使用语音从显示在画面上的多个对象当中指定特定对象,并且数字装置能够针对特定对象创建各种虚拟视图并且将所创建的视图显示在PIP画面上。因此,虽然用户看到特定对象的一侧,但是用户可能够通过显示在PIP画面上的虚拟视图来检查特定对象的全部,因此提高了用户便利性。
根据本发明的一个实施方式,当接收到用于从整个区域选择特定区域的输入时,显示装置能够放大该特定区域,并且在主画面上根据放大比率以不同的方式显示放大后的特定区域和特定区域的详细信息。因此,用户能够同时看到特定区域和该特定区域的详细信息,因此提高了用户便利性。
根据本发明的另一实施方式,当从遥控器接收到用于选择详细信息的输入时,显示装置能够将详细信息显示在主画面上,并且将与详细信息相关但比其更详细的信息显示在PIP画面上。因此,用户能够容易地检查更详细的信息,因此提高了用户便利性。
根据本发明的另一实施方式,当在主画面上不能显示详细信息时,显示装置能够搜索包括在详细信息中的对象。因此,用户能够容易地检查与详细信息关联的搜索结果,因此提高了用户便利性。
根据本发明的又一实施方式,能够根据放大比率和内容的类型在主画面上以不同的方式显示详细信息。因此,用户能够根据内容的特性容易地获取详细信息,因此提高了用户便利性。
本说明书中所公开的图像显示装置及其操作方法不限于上面参照实施方式描述的配置和方法。此外,一些或所有实施方式被选择性地组合以进行各种修改。
此外,根据本发明的图像显示装置的操作方法可被实现为可写在处理器可读记录介质上并因此由设置在网络装置中的处理器读取的代码。处理器可读记录介质可包括存储有可由处理器读取的数据的所有类型的记录介质。处理器可读记录介质可包括例如ROM、RAM、CD-ROM、磁带、软盘和光学数据存储器,并且其可按照经由互联网发送的载波的形式实现。另外,处理器可读记录介质可分布在连接到网络的多个计算机系统上,使得处理器可读代码以分散的方式写入其中并且从其执行。
尽管已参照优选实施方式描述了本发明,但是本发明不限于上述具体实施方式。另外,本领域技术人员将理解,可以在不脱离本发明的精神和范围的情况下进行形式和细节上的各种改变。还显而易见的是,本说明书的这些变化不应该相对于本说明书的技术范围或精神单独地或分开地理解。
实现本发明的模式
在上文,已针对用于实现本发明的最佳模式描述了各种实施方式。
工业实用性
本发明能够被应用于各种显示装置。
对于本领域技术人员而言显而易见的是,可以在不脱离本发明的精神和范围的情况下进行各种修改和改变。因此,本发明旨在包括在所附的权利要求和等同范围内的本发明的修改和改变。

Claims (20)

1.一种用于控制显示装置的方法,该方法包括以下步骤:
将内容显示在所述显示装置的主画面上;
根据从遥控器接收到的用于请求放大模式的输入来进入所述放大模式;
从所述遥控器接收用于从显示在所述主画面上的整个区域中选择特定区域的输入;
根据所接收到的选择输入以预定放大率放大所选择的特定区域;
将放大后的特定区域显示在所述主画面上;以及
根据所述预定放大率将所述放大后的特定区域的详细信息以不同的方式显示在所述主画面内的PIP画面上,
其中,所述内容包括视频。
2.根据权利要求1所述的方法,该方法还包括以下步骤:
当从所述遥控器接收到用于选择所述详细信息的输入时:
将所述详细信息显示在所述主画面上;以及
将与所述详细信息相关但比所述详细信息更详细的信息显示在所述PIP画面上,其中,所述详细信息和更详细的所述信息分别与第一详细信息和第二详细信息对应。
3.根据权利要求1所述的方法,该方法还包括以下步骤:
当在所述主画面上不能显示所述详细信息时,搜索包括在所述详细信息中的对象。
4.根据权利要求1所述的方法,其中,根据所述预定放大率将所述放大后的特定区域的详细信息以不同的方式显示在所述主画面内的所述PIP画面上的步骤包括以下步骤:
当所述预定放大率是第一放大率时,将所述特定区域的第一详细信息显示在所述主画面内的所述PIP画面上;
当所述预定放大率是第二放大率时,将所述特定区域的第二详细信息显示在所述主画面内的所述PIP画面上;以及
当所述预定放大率是第三放大率时,将所述特定区域的第三详细信息显示在所述主画面内的所述PIP画面上。
5.根据权利要求1所述的方法,该方法还包括以下步骤:
将第一详细信息显示在所述PIP画面的第一区域中;
将第二详细信息显示在所述PIP画面的第二区域中;以及
将第三详细信息显示在所述PIP画面的第三区域中。
6.根据权利要求5所述的方法,该方法还包括以下步骤:
当从所述遥控器接收到用于选择所述第一详细信息的输入时:
将所述第一详细信息显示在所述主画面的部分区域中;
将所述第二详细信息显示在所述PIP画面的所述第一区域中;
将所述第三详细信息显示在所述PIP画面的所述第二区域中;以及
将所述特定区域的第四详细信息显示在所述PIP画面的所述第三区域中。
7.根据权利要求1所述的方法,其中,随着所述预定放大率增加,所述详细信息变得更加明确和具体。
8.根据权利要求4所述的方法,其中,当所述内容包括地图信息时,
当所述预定放大率是所述第一放大率时,所述第一详细信息包括所述特定区域的卫星图片信息,
当所述预定放大率是所述第二放大率时,所述第二详细信息包括卫星图片的街道信息,并且
当所述预定放大率是所述第三放大率时,所述第三详细信息包括街道的商店信息。
9.根据权利要求4所述的方法,其中,当所述内容包括EPG信息时,
当所述预定放大率是所述第一放大率时,所述第一详细信息包括所述EPG信息的频道信息,
当所述预定放大率是所述第二放大率时,所述第二详细信息包括所述频道信息的节目信息,并且
当所述预定放大率是所述第三放大率时,所述第三详细信息包括关于节目的故事情节、演员和播放时间中的至少一个的信息。
10.根据权利要求4所述的方法,其中,当所述内容包括关于演出的信息时,
当所述预定放大率是所述第一放大率时,所述第一详细信息包括关于与所述演出关联并且将在预定时间段内执行的演出的信息,
当所述预定放大率是所述第二放大率时,所述第二详细信息包括关于将在所述预定时间段内执行的所述演出当中的将在特定日期执行的演出的信息,并且
当所述预定放大率是所述第三放大率时,所述第三详细信息包括关于所述演出的场所、演员、评论和演出时间中的至少一个的信息。
11.一种显示装置,该显示装置包括:
显示模块,该显示模块被配置为将内容显示在所述显示装置的主画面上;
接口模块,该接口模块被配置为从遥控器接收用于请求放大的输入和用于从显示在所述主画面上的整个区域中选择特定区域的输入;以及
控制器,该控制器被配置为控制所述显示模块和所述接口模块,
其中,所述控制器被配置为:
根据从所述遥控器接收到的用于请求放大模式的输入来进入所述放大模式,
从所述遥控器接收用于从显示在所述主画面上的整个区域中选择所述特定区域的输入,
根据所接收到的选择输入以预定放大率放大所选择的特定区域,
将放大后的特定区域显示在所述主画面上,并且
根据所述预定放大率将所述放大后的特定区域的详细信息以不同的方式显示在所述主画面内的PIP画面上,并且
其中,所述内容包括视频。
12.根据权利要求11所述的显示装置,其中,所述控制器被配置为:当从所述遥控器接收到用于选择所述详细信息的输入时,
将所述详细信息显示在所述主画面上,并且
将与所述详细信息相关但比所述详细信息更详细的信息显示在所述PIP画面上,并且其中,所述详细信息和更详细的所述信息分别与第一详细信息和第二详细信息对应。
13.根据权利要求11所述的显示装置,其中,所述控制器被配置为:当在所述主画面上不能显示所述详细信息时,搜索包括在所述详细信息中的对象。
14.根据权利要求11所述的显示装置,其中,所述控制器被配置为:
当所述预定放大率是第一放大率时,将所述特定区域的第一详细信息显示在所述主画面内的所述PIP画面上,
当所述预定放大率是第二放大率时,将所述特定区域的第二详细信息显示在所述主画面内的所述PIP画面上,并且
当所述预定放大率是第三放大率时,将所述特定区域的第三详细信息显示在所述主画面内的所述PIP画面上。
15.根据权利要求11所述的显示装置,其中,所述控制器被配置为:
将第一详细信息显示在所述PIP画面的第一区域中,
将第二详细信息显示在所述PIP画面的第二区域中,并且
将第三详细信息显示在所述PIP画面的第三区域中。
16.根据权利要求15所述的显示装置,其中,所述控制器被配置为:当从所述遥控器接收到用于选择所述第一详细信息的输入时,
将所述第一详细信息显示在所述主画面的部分区域中,
将所述第二详细信息显示在所述PIP画面的所述第一区域中,
将所述第三详细信息显示在所述PIP画面的所述第二区域中,并且
将所述特定区域的第四详细信息显示在所述PIP画面的所述第三区域中。
17.根据权利要求11所述的显示装置,其中,随着所述预定放大率增加,所述详细信息变得更加明确和具体。
18.根据权利要求14所述的显示装置,其中,当所述内容包括地图信息时,
当所述预定放大率是所述第一放大率时,所述第一详细信息包括所述特定区域的卫星图片信息,
当所述预定放大率是所述第二放大率时,所述第二详细信息包括卫星图片的街道信息,并且
当所述预定放大率是所述第三放大率时,所述第三详细信息包括街道的商店信息。
19.根据权利要求14所述的显示装置,其中,当所述内容包括EPG信息时,
当所述预定放大率是所述第一放大率时,所述第一详细信息包括所述EPG信息的频道信息,
当所述预定放大率是所述第二放大率时,所述第二详细信息包括所述频道信息的节目信息,并且
当所述预定放大率是所述第三放大率时,所述第三详细信息包括关于节目的故事情节、演员和播放时间中的至少一个的信息。
20.根据权利要求14所述的显示装置,其中,当所述内容包括关于演出的信息时,
当所述预定放大率是所述第一放大率时,所述第一详细信息包括关于与所述演出关联并且将在预定时间段内执行的演出的信息,
当所述预定放大率是所述第二放大率时,所述第二详细信息包括关于将在所述预定时间段内执行的所述演出当中的将在特定日期执行的演出的信息,并且
当所述预定放大率是所述第三放大率时,所述第三详细信息包括关于所述演出的场所、演员、评论和演出时间中的至少一个的信息。
CN201580082161.2A 2015-08-25 2015-09-17 显示装置及其控制方法 Active CN107852531B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020150119545A KR102393510B1 (ko) 2015-08-25 2015-08-25 디스플레이 디바이스 및 그 제어 방법
KR10-2015-0119545 2015-08-25
PCT/KR2015/009767 WO2017034065A1 (ko) 2015-08-25 2015-09-17 디스플레이 디바이스 및 그 제어 방법

Publications (2)

Publication Number Publication Date
CN107852531A true CN107852531A (zh) 2018-03-27
CN107852531B CN107852531B (zh) 2021-03-26

Family

ID=58100687

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580082161.2A Active CN107852531B (zh) 2015-08-25 2015-09-17 显示装置及其控制方法

Country Status (5)

Country Link
US (1) US10542311B2 (zh)
EP (1) EP3343939B1 (zh)
KR (1) KR102393510B1 (zh)
CN (1) CN107852531B (zh)
WO (1) WO2017034065A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110556096A (zh) * 2018-05-31 2019-12-10 技嘉科技股份有限公司 声控显示装置及获取语音信号的方法
CN110618398A (zh) * 2019-09-24 2019-12-27 深圳市拜洛克科技有限公司 基于uwb定位技术控制粉丝棒发光的方法
CN111107418A (zh) * 2019-12-19 2020-05-05 北京奇艺世纪科技有限公司 视频数据处理方法、装置、计算机设备和存储介质
CN112243147A (zh) * 2019-07-16 2021-01-19 青岛海信传媒网络技术有限公司 视频画面缩放方法、视频画面缩放服务装置及显示设备
TWI829609B (zh) * 2023-07-20 2024-01-11 明基電通股份有限公司 顯示器組件、顯示器組件之操作方法及顯示器

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10366376B2 (en) 2015-09-02 2019-07-30 Kenneth L. Sherman Method and system for providing pay-as-you-go pre-paid professional services
US10599527B2 (en) 2017-03-29 2020-03-24 Commvault Systems, Inc. Information management cell health monitoring system
USD880518S1 (en) * 2018-03-23 2020-04-07 Martell Broadcasting Systems, Inc. Display screen with episode watch page user interface
USD873842S1 (en) * 2018-03-23 2020-01-28 Martell Broadcasting Systems, Inc. Display screen with transitional search results user interface
KR102046148B1 (ko) * 2018-08-27 2019-11-18 스피나 시스템즈 주식회사 강의 요약본을 제공하는 전자칠판
US11908340B2 (en) * 2019-07-24 2024-02-20 Arris Enterprises Llc Magnification enhancement of video for visually impaired viewers
US11496330B2 (en) * 2020-11-07 2022-11-08 M/S. Amagi Media Labs Pvt. Ltd Video playout integrated with video conferencing for a group-watch video system

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1536883A (zh) * 2003-04-11 2004-10-13 Lg电子株式会社 在显示设备上播放pip的装置和方法
US20050128366A1 (en) * 2003-12-12 2005-06-16 Lg Electronics Inc. Method for controlling partial image enlargement in DMB receiver
US20080151125A1 (en) * 2006-12-20 2008-06-26 Verizon Laboratories Inc. Systems And Methods For Controlling A Display
US20100026721A1 (en) * 2008-07-30 2010-02-04 Samsung Electronics Co., Ltd Apparatus and method for displaying an enlarged target region of a reproduced image
US20100083144A1 (en) * 2008-09-29 2010-04-01 Apple Inc. System and method for scaling up an image of an article displayed on a sales promotion web page
WO2012026651A1 (en) * 2010-08-24 2012-03-01 Lg Electronics Inc. Method for synchronizing contents and display device enabling the method
CN102769724A (zh) * 2011-05-03 2012-11-07 Lg电子株式会社 电子设备以及操作该电子设备的方法
KR101321444B1 (ko) * 2013-08-06 2013-10-23 주식회사 센텍 Cctv 모니터링 시스템

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4418344A (en) * 1981-12-10 1983-11-29 Datamedia Corporation Video display terminal
DE69418908T2 (de) * 1993-01-26 2000-01-20 Sun Microsystems Inc Verfahren und Gerät zum Informationsanschauen in einer Rechnerdatenbank
JP4256936B2 (ja) * 1997-06-03 2009-04-22 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ テレビジョン番組間の移動方法
US6063032A (en) * 1998-09-28 2000-05-16 Scimed Systems, Inc. Ultrasound imaging with zoom having independent processing channels
US6421067B1 (en) * 2000-01-16 2002-07-16 Isurftv Electronic programming guide
JP4501209B2 (ja) * 2000-03-08 2010-07-14 ソニー株式会社 情報処理装置、情報処理方法およびリモコンのコマンダ
US7340677B2 (en) * 2002-03-26 2008-03-04 Intel Corporation Methods and apparatuses of presenting categorical programs in progressive levels of content details
EP1776630A2 (en) * 2004-08-02 2007-04-25 Koninklijke Philips Electronics N.V. Pressure-controlled navigating in a touch screen
JP3927571B2 (ja) * 2004-10-25 2007-06-13 株式会社日立国際電気 画像表示プログラム
KR20080003788A (ko) * 2005-02-14 2008-01-08 힐크레스트 래보래토리스, 인크. 3d 포인팅을 이용하여 텔레비젼 어플리케이션을향상시키는 방법 및 시스템
KR100760116B1 (ko) * 2006-02-03 2007-09-18 엘지전자 주식회사 네비게이션 시스템에서 지도축척 변경방법
EP1848212B1 (en) * 2006-02-23 2012-05-16 Samsung Electronics Co., Ltd. Digital broadcast receiver and broadcast data display method for simultaneous display of multi-channel visual images
US7930730B2 (en) * 2006-12-18 2011-04-19 Microsoft Corporation Community network navigation
KR101370343B1 (ko) * 2007-08-10 2014-03-05 삼성전자 주식회사 영상처리장치 및 영상처리방법
US8745513B2 (en) * 2007-11-29 2014-06-03 Sony Corporation Method and apparatus for use in accessing content
JP4535150B2 (ja) * 2008-03-18 2010-09-01 ソニー株式会社 画像処理装置および方法、プログラム並びに記録媒体
US8200540B2 (en) * 2008-08-26 2012-06-12 International Business Machines Corporation Interactive product maps
KR101075728B1 (ko) * 2008-09-25 2011-10-21 엘지전자 주식회사 영상표시장치 및 영상표시장치의 채널정보 표시방법
US20100188579A1 (en) * 2009-01-29 2010-07-29 At&T Intellectual Property I, L.P. System and Method to Control and Present a Picture-In-Picture (PIP) Window Based on Movement Data
US8261206B2 (en) * 2009-02-27 2012-09-04 International Business Machines Corporation Digital map having user-defined zoom areas
JP5526652B2 (ja) * 2009-08-18 2014-06-18 ソニー株式会社 表示装置及び表示方法
US8335990B2 (en) * 2009-08-18 2012-12-18 Nokia Corporation Method and apparatus for grouping points-of-interest on a map
US20110191014A1 (en) * 2010-02-04 2011-08-04 Microsoft Corporation Mapping interface with higher zoom level inset map
US9207096B2 (en) * 2011-06-09 2015-12-08 Blackberry Limited Map magnifier
KR101482094B1 (ko) * 2011-06-27 2015-01-13 주식회사 케이티 영상 관련 정보 제공 방법 및 시스템
US8832593B2 (en) * 2011-12-16 2014-09-09 Harris Corporation Systems and methods for efficient spatial feature analysis
US9973722B2 (en) * 2013-08-27 2018-05-15 Qualcomm Incorporated Systems, devices and methods for displaying pictures in a picture
JP2015056019A (ja) * 2013-09-11 2015-03-23 東芝ライフスタイル株式会社 表示装置および表示方法
US20160381297A1 (en) * 2015-06-26 2016-12-29 Jsc Yukon Advanced Optics Worldwide Providing enhanced situational-awareness using magnified picture-in-picture within a wide field-of-view optical image

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1536883A (zh) * 2003-04-11 2004-10-13 Lg电子株式会社 在显示设备上播放pip的装置和方法
US20050128366A1 (en) * 2003-12-12 2005-06-16 Lg Electronics Inc. Method for controlling partial image enlargement in DMB receiver
US20080151125A1 (en) * 2006-12-20 2008-06-26 Verizon Laboratories Inc. Systems And Methods For Controlling A Display
US20100026721A1 (en) * 2008-07-30 2010-02-04 Samsung Electronics Co., Ltd Apparatus and method for displaying an enlarged target region of a reproduced image
US20100083144A1 (en) * 2008-09-29 2010-04-01 Apple Inc. System and method for scaling up an image of an article displayed on a sales promotion web page
WO2012026651A1 (en) * 2010-08-24 2012-03-01 Lg Electronics Inc. Method for synchronizing contents and display device enabling the method
CN102769724A (zh) * 2011-05-03 2012-11-07 Lg电子株式会社 电子设备以及操作该电子设备的方法
KR101321444B1 (ko) * 2013-08-06 2013-10-23 주식회사 센텍 Cctv 모니터링 시스템

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110556096A (zh) * 2018-05-31 2019-12-10 技嘉科技股份有限公司 声控显示装置及获取语音信号的方法
CN112243147A (zh) * 2019-07-16 2021-01-19 青岛海信传媒网络技术有限公司 视频画面缩放方法、视频画面缩放服务装置及显示设备
WO2021008137A1 (zh) * 2019-07-16 2021-01-21 青岛海信传媒网络技术有限公司 显示设备及视频画面缩放方法
CN112243147B (zh) * 2019-07-16 2023-08-04 Vidaa(荷兰)国际控股有限公司 视频画面缩放方法及显示设备
CN110618398A (zh) * 2019-09-24 2019-12-27 深圳市拜洛克科技有限公司 基于uwb定位技术控制粉丝棒发光的方法
CN110618398B (zh) * 2019-09-24 2020-09-29 深圳市拜洛克科技有限公司 基于uwb定位技术控制粉丝棒发光的方法
US11950345B2 (en) 2019-09-24 2024-04-02 Shenzhen Bikelock Technology Co., Ltd. Method for controlling cheering sticks to emit light based on UWB location technology
CN111107418A (zh) * 2019-12-19 2020-05-05 北京奇艺世纪科技有限公司 视频数据处理方法、装置、计算机设备和存储介质
CN111107418B (zh) * 2019-12-19 2022-07-12 北京奇艺世纪科技有限公司 视频数据处理方法、装置、计算机设备和存储介质
TWI829609B (zh) * 2023-07-20 2024-01-11 明基電通股份有限公司 顯示器組件、顯示器組件之操作方法及顯示器

Also Published As

Publication number Publication date
WO2017034065A1 (ko) 2017-03-02
US10542311B2 (en) 2020-01-21
CN107852531B (zh) 2021-03-26
EP3343939A4 (en) 2019-01-23
EP3343939B1 (en) 2022-02-16
US20190014372A1 (en) 2019-01-10
KR20170024372A (ko) 2017-03-07
KR102393510B1 (ko) 2022-05-03
EP3343939A1 (en) 2018-07-04

Similar Documents

Publication Publication Date Title
CN105657465B (zh) 多媒体装置及其控制方法
CN105814898B (zh) 数字电视
US11962934B2 (en) Display device and control method therefor
CN107852531A (zh) 显示装置及其控制方法
CN104683862B (zh) 数字设备和处理其服务的方法
KR101586321B1 (ko) 디스플레이 디바이스 및 그 제어 방법
CN104902290B (zh) 管理多个时间源数据的显示装置及其控制方法
CN107113469A (zh) 控制装置的系统、数字装置及其控制方法
CN106534475A (zh) 移动终端及其控制方法
CN107040847A (zh) 包括主扬声器和副扬声器的系统及其控制方法
CN106507159B (zh) 显示设备及其控制方法
KR102557574B1 (ko) 디지털 디바이스 및 그 제어 방법
KR102384520B1 (ko) 디스플레이 디바이스 및 그 제어 방법
KR102603458B1 (ko) 디지털 디바이스 및 그 제어 방법
KR20170138788A (ko) 디지털 디바이스 및 그 제어 방법
KR20170126645A (ko) 디지털 디바이스 및 그 제어 방법
KR20170018519A (ko) 디스플레이 디바이스 및 그 제어 방법
KR20160148875A (ko) 디스플레이 디바이스 및 그 제어 방법
KR102204622B1 (ko) 디스플레이 디바이스 및 그 제어 방법
KR20180038273A (ko) 디지털 디바이스 및 그 제어 방법
KR20170010484A (ko) 디스플레이 디바이스 및 그 제어 방법
KR20170012998A (ko) 디스플레이 디바이스 및 그 제어 방법
KR20200137412A (ko) 디스플레이 디바이스 및 그 제어 방법
KR20200084563A (ko) 디스플레이 디바이스 및 그 제어 방법
KR20170022052A (ko) 디스플레이 디바이스 및 그 제어 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant