JP2016528575A - ディスプレイ装置及びそのｕｉ提供方法 - Google Patents

ディスプレイ装置及びそのｕｉ提供方法 Download PDF

Info

Publication number
JP2016528575A
JP2016528575A JP2016512846A JP2016512846A JP2016528575A JP 2016528575 A JP2016528575 A JP 2016528575A JP 2016512846 A JP2016512846 A JP 2016512846A JP 2016512846 A JP2016512846 A JP 2016512846A JP 2016528575 A JP2016528575 A JP 2016528575A
Authority
JP
Japan
Prior art keywords
screen
display
displayed
screens
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016512846A
Other languages
English (en)
Inventor
ジュン−ホ・ファン
ジュ−スン・ムーン
ホン−ピョ・キム
イ−サク・パク
クリストファー・イー・バングル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2016528575A publication Critical patent/JP2016528575A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04802—3D-info-object: information is displayed on the internal or external surface of a three dimensional manipulable object, e.g. on the faces of a cube that can be rotated by the user
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

ディスプレイ装置及びそのＵＩ提供方法を提供する。本ディスプレイ装置は、ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、ディスプレイ画面の第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイするディスプレイ部、ユーザインタラクションを感知するユーザインタフェース部及び複数のオブジェクトのうち、いずれか一つが選択された状態でユーザインタフェース部を介して予め設定されたユーザインタラクション（ｉｎｔｅｒａｃｔｉｏｎ）が感知されると、予め設定されたユーザインタラクションに応じて選択されたオブジェクトに対応するコンテンツを複数のスクリーンのうち、いずれか一つに再生するようにディスプレイ部を制御する制御部とを備える。

Description

本発明は、ディスプレイ装置及びそのＵＩ提供方法に関する。さらに詳細には、一つのディスプレイ画面に複数のスクリーンをディスプレイし、複数のスクリーンにディスプレイされるコンテンツを各々選択できるディスプレイ装置及びそのＵＩ提供方法に関する。
コンテンツの増加及びユーザのニーズの拡大によって、ディスプレイ装置は、多様なソースからコンテンツを受けてユーザに多様なコンテンツを提供している。ディスプレイ装置が受けるコンテンツの量が増加するにつれて、ディスプレイ装置は、数多くのコンテンツのうち、ユーザが視聴しようとするコンテンツを探すために、複数のスクリーンを提供する必要がある。例えば、既存のディスプレイ装置は、複数のスクリーンとしてメインスクリーン及びＰＩＰスクリーンのような付加的なスクリーンを提供した。
しかしながら、従来のディスプレイ装置の場合、複数のスクリーンにディスプレイするコンテンツを選択するために、ＥＰＧ画面のような別のＵＩを利用して複数のスクリーンにディスプレイするコンテンツを選択した。
すなわち、従来のように、複数のスクリーンにディスプレイするコンテンツを選択するために、別のＵＩをディスプレイすることによって、ユーザは、別のＵＩがディスプレイされる間に複数のスクリーンにディスプレイするコンテンツを確認することができず、複数のスクリーンにディスプレイするコンテンツを確認するために、画面転換動作のような追加的な動作を必要とするようになる。
したがって、複数のスクリーンにディスプレイされるコンテンツをより直観的で容易に選択するための方案の摸索が求められる。
本発明の目的は、一つのディスプレイ画面に含まれた複数のスクリーンにディスプレイされるコンテンツをユーザがより直観的でかつ容易に選択できるようにするディスプレイ装置及びその制御方法を提供することにある。
上記の目的を達成すべく、本発明の一実施の形態にかかる、ディスプレイ装置は、ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、前記ディスプレイ画面の第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイするディスプレイ部と、ユーザインタラクションを感知するユーザインタフェース部と、前記複数のオブジェクトのうち、いずれか一つが選択された状態で前記ユーザインタフェース部を介して予め設定されたユーザインタラクション（ｉｎｔｅｒａｃｔｉｏｎ）が感知されると、前記予め設定されたユーザインタラクションに応じて、前記選択されたオブジェクトに対応するコンテンツを前記複数のスクリーンのうち、いずれか一つに再生するように前記ディスプレイ部を制御する制御部とを備える。
前記ディスプレイ部は、前記ディスプレイ画面の第１領域にメインスクリーン、前記メインスクリーンの左側及び右側に台形形態の第１サブスクリーン及び第２サブスクリーンをディスプレイする。
前記制御部は、前記複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、前記予め設定されたユーザインタラクションが感知されると、前記予め設定されたユーザインタラクションに応じて、前記ハイライトの表示されたオブジェクトに対応するコンテンツを前記複数のスクリーンのうち、いずれか一つに再生するように前記ディスプレイ部を制御することができる。
前記予め設定されたユーザインタラクションがリモコンに備えられた前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンとそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つを選択するユーザインタラクションである場合、前記制御部は、前記複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、前記第１ないし第３ボタンのうち、いずれか一つが選択されるユーザインタラクションが入力される場合、前記ハイライトの表示されたオブジェクトと対応するコンテンツを前記選択されたボタンに対応するスクリーンに再生するように、前記ディスプレイ部を制御できる。
前記リモコンに備えられた第１ないし第３ボタンは、前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンの形状と対応することができる。前記ディスプレイ部は、前記ディスプレイ画面の第２領域にディスプレイされた複数のオブジェクトをグループに応じて異なる空間にディスプレイし、前記複数のオブジェクトは、各々キュービック形態のオブジェクトでありうる。
前記制御部は、前記ユーザインタフェース部を介して予め設定された第１ユーザインタラクションが入力されると、前記ディスプレイ画面の第２領域にディスプレイされた前記複数のオブジェクトを前記ディスプレイ画面から除去し、前記ディスプレイ画面の第１領域にディスプレイされた前記複数のスクリーンを拡大してディスプレイするように、前記ディスプレイ部を制御することができる。
前記制御部は、前記複数のスクリーンが拡大されてディスプレイされる間に、前記ユーザインタフェース部を介して予め設定された第２ユーザインタラクションが入力されると、前記複数のスクリーンのうち、前記メインスクリーンの大きさを縮小し、前記縮小されたメインスクリーンに基づいて予め設定された方向に複数のコンテンツに対応する複数のサムネイル画面をディスプレイし、前記複数のコンテンツに対応するサムネイル画面のうち、いずれか一つが選択された場合、前記選択されたサムネイル画面に対応するコンテンツを前記メインスクリーンに再生するように前記ディスプレイ部を制御することができる。
前記制御部は、前記ユーザインタフェース部を介して予め設定された第３ユーザインタラクションが入力されると、前記ディスプレイ画面の第１領域にディスプレイされた前記複数のスクリーンを前記ディスプレイ画面から除去し、前記ディスプレイ画面の第２領域にディスプレイされた前記複数のオブジェクトを拡大してディスプレイするよう、前記ディスプレイ部を制御することができる。
前記制御部は、前記拡大された複数のオブジェクトのうち、いずれか一つが選択された状態でリモコンに備えられた前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンとそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つが選択されると、前記拡大された複数のオブジェクトをディスプレイ画面から除去し、前記複数のスクリーンを前記ディスプレイ画面にディスプレイし、前記選択されたオブジェクトと対応するコンテンツを前記選択されたボタンに対応するスクリーンで再生するように前記ディスプレイ部を制御することができる。
上記の目的を達成すべく、本発明の一実施の形態にかかるディスプレイ装置のＵＩ提供方法は、ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、前記ディスプレイ画面の第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイするステップと、前記複数のオブジェクトのうち、いずれか一つが選択された状態で予め設定されたユーザインタラクションが感知されると、前記予め設定されたユーザインタラクションに応じて、前記選択されたオブジェクトに対応するコンテンツを前記複数のスクリーンのうち、いずれか一つに再生するステップとを含む。
ディスプレイするステップは、前記ディスプレイ画面の第１領域にメインスクリーン、前記メインスクリーンの左側及び右側に台形形態の第１サブスクリーン及び第２サブスクリーンをディスプレイすることができる。
前記再生するステップは、前記複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、前記予め設定されたユーザインタラクションが感知されると、前記予め設定されたユーザインタラクションに応じて、前記ハイライトの表示されたオブジェクトに対応するコンテンツを前記複数のスクリーンのうち、いずれか一つに再生することができる。
前記予め設定されたユーザインタラクションがリモコンに備えられた前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンとそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つを選択するユーザインタラクションである場合、前記再生するステップは、前記複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、前記第１ないし第３ボタンのうち、いずれか一つが選択されるユーザインタラクションが入力される場合、前記ハイライトの表示されたオブジェクトと対応するコンテンツを前記選択されたボタンに対応するスクリーンに再生することができる。
前記リモコンに備えられた第１ないし第３ボタンは、前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンの形状と対応することができる。
前記ディスプレイするステップは、前記ディスプレイ画面の第２領域にディスプレイされた複数のオブジェクトをグループに応じて異なる空間にディスプレイし、前記複数のオブジェクトは、各々キュービック形態のオブジェクトでありうる。
予め設定された第１ユーザインタラクションが入力されると、前記ディスプレイ画面の第２領域にディスプレイされた前記複数のオブジェクトを前記ディスプレイ画面から除去し、前記ディスプレイ画面の第１領域にディスプレイされた前記複数のスクリーンを拡大してディスプレイするステップを含む。
前記複数のスクリーンが拡大されてディスプレイされる間に、予め設定された第２ユーザインタラクションが入力されると、前記複数のスクリーンのうち、前記メインスクリーンの大きさを縮小し、前記縮小されたメインスクリーンに基づいて予め設定された方向に複数のコンテンツに対応する複数のサムネイル画面をディスプレイするステップと、前記複数のコンテンツに対応するサムネイル画面のうち、いずれか一つが選択された場合、前記選択されたサムネイル画面に対応するコンテンツを前記メインスクリーンに再生するステップとを含むことができる。
予め設定された第３ユーザインタラクションが入力されると、前記ディスプレイ画面の第１領域にディスプレイされた前記複数のスクリーンを前記ディスプレイ画面から除去し、前記ディスプレイ画面の第２領域にディスプレイされた前記複数のオブジェクトを拡大してディスプレイするステップを含むことができる。
前記拡大された複数のオブジェクトのうち、いずれか一つが選択された状態でリモコンに備えられた前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンとそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つが選択されると、前記拡大された複数のオブジェクトをディスプレイ画面から除去し、前記複数のスクリーンを前記ディスプレイ画面にディスプレイし、前記選択されたオブジェクトと対応するコンテンツを前記選択されたボタンに対応するスクリーンに再生するステップを含むことができる。
以上、上述の本発明の多様な実施の形態によって、ユーザは、自身が望むコンテンツをさらに容易でかつ直観的にディスプレイできる。
本発明の前記の及び／または他の特徴は、添付された図面を利用して本発明について具体的に説明することによって、さらに明白になるはずである。
本発明の一実施の形態にかかる、ディスプレイシステムを示す図である。 本発明の一実施の形態にかかる、ディスプレイ装置の構成を簡略に示すブロック図である。 本発明の一実施の形態にかかる、ディスプレイ装置の構成を詳細に示すブロック図である。 本発明の一実施の形態にかかる、格納部の構成を詳細に示すブロック図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するための図である。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するためのフローチャートである。 本発明の多様な実施の形態にかかる、複数のスクリーンを制御する方法を説明するためのフローチャートである。 本発明の一実施の形態にかかる、ユーザの頭回転を感知する方法を説明するための図である。
以下、添付された図面を利用して本発明について具体的に説明する。
以下の説明では、異なる図面であっても同じ構成要素を説明するために同じ図面の参照番号を使用する。詳細な構造及び構成要素などの説明に定義した内容は、本発明の実施の形態に対する幅広い理解のために提供される。したがって、本発明の実施の形態は、そういう具体的に定義された内容がなくても実行されることができる。また、周知の機能または構造は、不必要な詳述により本発明を不明にする恐れがあるから、詳細に説明しない。
以下、添付された図面を参照して、本発明を詳細に説明する。
図１は、本発明の一実施の形態にかかるディスプレイシステムを説明するための図である。図１によれば、本発明の一実施の形態にかかるディスプレイシステム１０は、ディスプレイ装置１００及び遠隔制御装置５０を備える。
ディスプレイ装置１００は、図１に示すように、デジタルＴＶにより具現化されることができるが、これに限定されるものではない。したがって、ディスプレイ装置１００は、ＰＣ、スマートフォン、携帯電話、タブレットＰＣ、ＰＭＰ、ＰＤＡ、ナビゲーションなどのように、ディスプレイ機能を揃えた多様な類型の装置により具現化されることができる。一方、ディスプレイ装置１００が携帯用機器により具現化される場合、タッチスクリーンを内蔵しているから、指またはペン（例えば、スタイラスペン）を利用してプログラムを実行させることができるように具現化されることができる。ただし、以下では、説明の便宜のために、ディスプレイ装置１００がデジタルＴＶにより具現化される場合を想定して説明する。
ディスプレイ装置１００がデジタルＴＶにより具現化される場合、ディスプレイ装置１００は、遠隔制御装置５０により制御されることができる。この場合、遠隔制御装置５０は、ディスプレイ装置１００を遠隔で制御するための装置であり、ユーザインタラクションを受け取り、受け取ったユーザインタラクションに対応する制御信号をディスプレイ装置１００に送信できる。例えば、遠隔制御装置５０は、遠隔制御装置５０の動きを感知し動きに対応する信号を送信するか、音声を認識し、認識された音声に対応する信号を送信するか、または入力されたキーに対応する信号を送信するなどの多様な形態により具現化されることができる。
特に、ディスプレイ装置１００は、ユーザインタラクションに応じて、一つのディスプレイ画面に複数のコンテンツを再生するための複数のスクリーン及び複数のグループにカテゴリー化された複数のオブジェクトをディスプレイできる。そして、ディスプレイ装置１００は、多様なタイプのユーザインタラクション（ｉｎｔｅｒａｃｔｉｏｎ）に応じて、複数のオブジェクトのうち、いずれか一つを選択して、複数のスクリーンに再生されるコンテンツを選択できる。以下、ディスプレイ装置１００の具体的構成を示すブロック図を参考して、本発明の多様な実施の形態について説明する。
図２は、本発明の一実施の形態にかかるディスプレイ装置の構成を示すブロック図である。
図２によれば、ディスプレイ装置１００は、ディスプレイ部１１０、ユーザインタフェース部１２０及び制御部１３０を備える。
ディスプレイ部１１０は、制御部１３０の制御により外部から受信されるか、または予め格納された映像データまたはＵＩを出力する。特に、ディスプレイ部１１０は、ユーザの予め設定された命令に従って、ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、ディスプレイ画面の第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイできる。具体的に、ディスプレイ部１１０は、ディスプレイ画面の上段領域の中間部のメインスクリーンをディスプレイし、メインスクリーンの左側及び右側に第１サブスクリーン及び第２サブスクリーンをディスプレイできる。また、ディスプレイ部１１０は、ディスプレイ画面の下段領域にカテゴリー化されたグループに応じて予め指定された領域上にディスプレイされる多面体形態の複数のオブジェクトをディスプレイできる。
このとき、複数のオブジェクトは、立方体になることができ、この場合、該当オブジェクトをキュービックＧＵＩと名づけることにする。ただし、これは、一実施の形態に過ぎず、オブジェクトは、三角柱、六角柱、直六面体、球などのような立体形態からなることができるだけでなく、四角形、円、三角形などのような平面図形の形態を有するように構成されることができる。
一方、ディスプレイ部１１０は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅｓ）などにより具現化されることができるが、これに限定されるものではない。また、ディスプレイ部１１０は、場合によってフレキシブルディスプレイ、透明ディスプレイなどにより具現化されることも可能である。
ユーザインタフェース部１２０は、多様なユーザインタラクションを感知する。特に、ユーザインタフェース部１２０は、複数のオブジェクトのうち、いずれか一つを選択するためのユーザインタラクション、選択されたオブジェクトに対応するコンテンツをディスプレイするスクリーンを選択するためのユーザインタラクションなどを感知できる。
ここで、ユーザインタフェース部１２０は、ディスプレイ装置１００の具現例によって多様な形態により具現化できる。ディスプレイ装置１００がデジタルＴＶにより具現化される場合、ユーザインタフェース部１２０は、遠隔制御装置５０からリモコン信号を受信するリモコン受信部、ユーザモーションを感知するカメラ、ユーザ音声を受信するマイクなどにより具現化できる。また、ディスプレイ装置１００がタッチ基盤の携帯端末により具現化される場合、ユーザインタフェース部１２０は、タッチパッドと相互レイヤ構造をなすタッチスクリーン形態により具現化されることもできる。この場合、ユーザインタフェース部１２０は、上述のディスプレイ部１１０として使用されることができる。
制御部１３０は、ディスプレイ装置１００の全般的な動作を制御する機能を果たす。特に、ディスプレイ部１１０にディスプレイされた複数のオブジェクトのうち、いずれか一つが選択された状態でユーザインタフェース部１２０を介して予め設定されたユーザインタラクションが感知されると、制御部１３０は、予め設定されたユーザインタラクションに応じて選択されたオブジェクトに対応するコンテンツを複数のスクリーンのうち、いずれか一つに再生するようにディスプレイ部１１０を制御できる。
具体的に、ディスプレイ部１１０にディスプレイされた複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、ユーザインタフェース部１２０を介して予め設定されたユーザインタラクションが感知されると、制御部１３０は、ハイライトの表示されたオブジェクトに対応するコンテンツを複数のスクリーンのうち、予め設定されたユーザインタラクションに対応する一つのスクリーンに再生するように、ディスプレイ部１１０を制御できる。
本発明の一実施の形態において、予め設定されたユーザインタラクションがリモコンに備えられたメインスクリーン、第１サブスクリーン及び第２サブスクリーンとそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つを選択するユーザインタラクションである場合、複数のキュービックＧＵＩのうち、いずれか一つにハイライトが表示される間に、第１ないし第３ボタンのうち、いずれか一つが選択されるユーザインタラクションが入力されると、制御部１３０は、ハイライトの表示されたキュービックＧＵＩと対応するコンテンツを複数のスクリーンのうち、選択されたボタンに対応するスクリーンで再生するように、ディスプレイ部１１０を制御できる。例えば、複数のキュービックＧＵＩのうち、第１放送チャネルに対応する第１キュービックＧＵＩにハイライトが表示される間に、第１ボタンが選択されるユーザインタラクションが入力される場合、制御部１３０は、第１ボタンに対応するメインスクリーンに第１キュービックＧＵＩに対応する第１放送チャネルの放送コンテンツをディスプレイするように、ディスプレイ部１１０を制御できる。複数のキュービックＧＵＩのうち、第２放送チャネルに対応する第２キュービックＧＵＩにハイライトが表示される間に、第２ボタンが選択されるユーザインタラクションが入力される場合、制御部１３０は、第２ボタンに対応する第１サブスクリーンに第２キュービックＧＵＩに対応する第２放送チャネルの放送コンテンツをディスプレイするように、ディスプレイ部１１０を制御できる。複数のキュービックＧＵＩのうち、第１ＳＮＳコンテンツに対応する第３キュービックＧＵＩにハイライトが表示される間に、第３ボタンが選択されるユーザインタラクションが入力される場合、制御部１３０は、第３ボタンに対応する第２サブスクリーンに第３キュービックＧＵＩに対応するＳＮＳコンテンツをディスプレイするように、ディスプレイ部１１０を制御できる。
上述の実施の形態では、選択されたキュービックＧＵＩに対応するコンテンツがディスプレイされるスクリーンを選択するために、リモコンに備えられた予め設定されたボタンを利用すると説明したが、これは、一実施の形態に過ぎず、他の方法を利用してコンテンツがディスプレイされるスクリーンを選択できる。例えば、ユーザは、音声命令を利用して選択されたキュービックＧＵＩに対応するコンテンツがディスプレイされるスクリーンを選択できる。具体的に、複数のキュービックＧＵＩのうち、第１放送チャネルに対応する第１キュービックＧＵＩにハイライトが表示される間に、ユーザインタフェース部１２０のうち、マイク（図示せず）を介して「メイン」というユーザ音声が入力された場合、制御部１３０は、メインスクリーンに第１キュービックＧＵＩに対応する第１放送チャネルの放送コンテンツをディスプレイするように、ディスプレイ部１１０を制御できる。さらに他の例として、ユーザは、マウスを利用して選択されたキュービックＧＵＩに対応するコンテンツがディスプレイされるスクリーンを選択できる。具体的に、複数のキュービックＧＵＩのうち、第２放送チャネルに対応する第２キュービックＧＵＩにポインタが位置する間に、マウスのクリック後に第２キュービックＧＵＩを第１サブスクリーンにドラッグした場合、制御部１３０は、第１サブスクリーンに第２キュービックＧＵＩに対応する第２放送チャネルをディスプレイするように、ディスプレイ部１１０を制御できる。さらに他の例として、ユーザは、ハンドモーションを利用して選択されたキュービックＧＵＩに対応するコンテンツがディスプレイされるスクリーンを選択できる。具体的に、複数のキュービックＧＵＩのうち、第１ＳＮＳコンテンツに対応する第３キュービックＧＵＩにポインタが位置する間に、ユーザの第１モーション（例えば、グラブモーション）が入力された後、第２キュービックＧＵＩを第２サブスクリーンが位置した領域まで移動する第２モーション（例えば、移動モーション）が入力されると、制御部１３０は、第２サブスクリーンに第３キュービックＧＵＩに対応する第１ＳＮＳコンテンツをディスプレイするように、ディスプレイ部１１０を制御できる。
上述のように、多様なユーザインタラクション方法により、ユーザの望むコンテンツを複数のスクリーンのうち、ユーザの望むスクリーンにさらに直観的にディスプレイできる。
本発明の一実施の形態において、ディスプレイ画面の第１領域に複数のスクリーンがディスプレイされ、ディスプレイ画面の第２領域に複数のオブジェクトがディスプレイされる間に、ユーザインタフェース部１１０を介して予め設定された第１ユーザインタラクションが入力されると、制御部１３０は、ディスプレイ画面の第２領域にディスプレイされた複数のオブジェクトをディスプレイ画面から除去し、ディスプレイ画面の第１領域にディスプレイされた複数のスクリーンを拡大してディスプレイするように、ディスプレイ部１１０を制御できる。具体的に、ディスプレイ画面の第１領域に複数のスクリーンがディスプレイされ、ディスプレイ画面の第２領域に複数のキュービックＧＵＩがディスプレイされる間に、ユーザインタフェース部１１０のうち、リモコンを介して予め設定されたボタン（例えば、画面転換ボタンなど）が選択されるインタラクションが入力されると、制御部１３０は、ディスプレイ画面の下段領域にディスプレイされた複数のキュービックＧＵＩをますます曇るようにディスプレイしながらディスプレイ画面から除去し、ディスプレイ画面の上段領域にディスプレイされたメインスクリーン及び複数のサブスクリーンを拡大してディスプレイするように、ディスプレイ部１１０を制御できる。
このとき、複数のスクリーンが拡大されてディスプレイ画面に複数のスクリーンがディスプレイされる間に、ユーザインタフェース部１２０を介して予め設定された第２ユーザインタラクションが入力されると、制御部１３０は、複数のスクリーンのうち、メインスクリーンの大きさを縮小し、縮小されたメインスクリーンに基づいて予め設定された方向に複数のコンテンツに対応する複数のサムネイル画面をディスプレイするように、ディスプレイ部１１０を制御できる。具体的に、メインスクリーン及び複数のサブスクリーンがディスプレイされる間に、ユーザインタフェース部１２０のうち、リモコンに備えられたＯＪセンサを擦るラビングインタラクションが入力されると、制御部１３０は、メインスクリーンの大きさを縮小し、縮小されたメインスクリーンに基づいて上下方向に他の放送チャネルに対応する複数のサムネイル画面をディスプレイするように、ディスプレイ部１１０を制御できる。このとき、制御部１３０は、複数のサムネイル画面の一側にサムネイル画面に対応する放送チャネル情報をディスプレイするように、ディスプレイ部１１０を制御できる。
そして、ユーザインタフェース部１２０を介して複数のコンテンツに対応するサムネイル画面のうち、いずれか一つが選択された場合、制御部１３０は、選択されたサムネイル画面に対応するコンテンツをメインスクリーンに再生するように、ディスプレイ部１１０を制御できる。具体的に、縮小されたメインスクリーンにハイライトが表示され、メインスクリーンに基づいて上下方向に複数のサムネイル画面がディスプレイされる間に、ユーザの上下移動命令（例えば、ＯＪセンサを上側方向または下側方向に擦る命令など）が入力されると、制御部１３０は、複数のサムネイルを上下移動命令に従って移動させて、複数のサムネイルのうち、いずれか一つにハイライトを表示するように制御できる。そして、複数のサムネイルのうち、いずれか一つにハイライトが表示される間に、ユーザの確認命令（例えば、ＯＪセンサを押す命令など）が入力されると、制御部１３０は、ハイライトの表示されたサムネイル画面を拡大し、既存のメインスクリーン位置に選択されたサムネイル画面に対応する放送チャネルをディスプレイするように、ディスプレイ部１１０を制御できる。
本発明の一実施の形態において、ディスプレイ画面の第１領域に複数のスクリーンがディスプレイされ、ディスプレイ画面の第２領域に複数のオブジェクトがディスプレイされる間に、ユーザインタフェース部１２０を介して予め設定された第３ユーザインタラクションが入力されると、制御部１３０は、ディスプレイ画面の第１領域にディスプレイされた複数のスクリーンをディスプレイ画面から除去し、ディスプレイ画面の第２領域にディスプレイされた複数のオブジェクトを拡大してディスプレイするように、ディスプレイ部１１０を制御できる。具体的に、ディスプレイ画面の第１領域に複数のスクリーンがディスプレイされ、ディスプレイ画面の第２領域に複数のキュービックＧＵＩがディスプレイされる間に、ユーザインタフェース部１１０のうち、リモコンを介して予め設定されたボタン（例えば、以前ボタンなど）が選択されるインタラクションが入力されると、制御部１３０は、ディスプレイ画面の上段領域にディスプレイされた複数のスクリーンをディスプレイ画面から除去し、ディスプレイ画面の下段領域にディスプレイされた複数のグループにカテゴリー化された複数のキュービックＧＵＩのうち、第１グループに含まれたキュービックＧＵＩを拡大してディスプレイするように、ディスプレイ部１１０を制御できる。
拡大された複数のオブジェクトのうち、いずれか一つが選択された状態でリモコンに備えられたメインスクリーン、第１サブスクリーン及び第２サブスクリーンと各々対応する第１ないし第３ボタンのうち、いずれか一つが選択されると、制御部１３０は、拡大された複数のオブジェクトをディスプレイ画面から除去し、複数のスクリーンをディスプレイ画面に再度ディスプレイし、選択されたオブジェクトと対応するコンテンツを選択されたボタンに対応するスクリーンで再生するように、ディスプレイ部１１０を制御できる。具体的に、拡大された複数のキュービックＧＵＩのうち、いずれか一つにハイライトが表示された状態でリモコンに備えられた第２ボタンが選択されると、制御部１３０は、現在ディスプレイされた複数のキュービックＧＵＩをディスプレイ画面から除去し、複数のスクリーンを再度ディスプレイし、複数のスクリーンのうち、第２ボタンに対応する第１サブスクリーンに選択されたキュービックＧＵＩに対応するコンテンツをディスプレイするように、ディスプレイ部１１０を制御できる。
上述のように、ユーザは、多様な方法で状況により望むコンテンツを複数のスクリーンのうち、いずれか一つに再生するようにすることができる。
図３は、本発明の他の実施の形態にかかる、ディスプレイ装置の構成を詳細に示すブロック図である。図３に示すように、本発明の一実施の形態にかかる、ディスプレイ装置１００は、映像受信部２１０、通信部２２０、ディスプレイ部２３０、オーディオ出力部２４０、格納部２５０、オーディオ処理部２６０、ビデオ処理部２７０、ユーザインタフェース部２８０及び制御部２９０を備える。
映像受信部２１０は、多様なソースを介して映像データを受信する。例えば、映像受信部２１０は、外部の放送局から放送データを受信することができ、外部装置（例えば、ＤＶＤ、ＢＤプレーヤー等）から映像データを受信することができ、格納部２５０に格納された映像データを受信することができる。特に、映像受信部２１０は、一つのディスプレイ画面に複数のスクリーンをディスプレイするために、複数の映像受信モジュールを具備できる。例えば、映像受信部２１０は、複数の放送チャネルを同時にディスプレイするために、複数のチューナーを具備できる。
通信部２２０は、多様な類型の通信方式によって多様な類型の外部機器または外部サーバと通信を行う構成である。通信部２２０は、ＷＩＦＩチップ、ブルートゥースチップ、ＮＦＣチップ、無線通信チップなどのような多様な通信チップを含むことができる。このとき、ＷＩＦＩチップ、ブルートゥースチップ、ＮＦＣチップは、それぞれＷｉＦｉ方式、ブルートゥース方式、ＮＦＣ方式により通信を行う。このうち、ＮＦＣチップは、１３５ｋＨｚ、１３．５６ＭＨｚ、４３３ＭＨｚ、８６０〜９６０ＭＨｚ、２．４５ＧＨｚなどのような多様なＲＦ−ＩＤ周波数帯域のうち、１３．５６ＭＨｚ帯域を使用するＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）方式により動作するチップを意味する。ＷＩＦＩチップまたはブルートゥースチップを利用する場合には、ＳＳＩＤ及びセッションキーなどのような各種接続情報をまず送受信して、これを利用して通信接続した後、各種情報を送受信できる。無線通信チップは、ＩＥＥＥ、ジグビー、３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）、３ＧＰＰ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ Ｐａｒｔｎｅｒｓｈｉｐ Ｐｒｏｊｅｃｔ）、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｏｕｔｉｏｎ）などのような多様な通信規格に従って通信を行うチップを意味する。
ディスプレイ部２３０は、映像受信部２１０が受信した映像データをビデオ処理部２７０で処理したビデオフレーム及びグラフィック処理部２９３で生成された多様な画面のうち、少なくとも一つをディスプレイする。特に、ディスプレイ部２３０は、ユーザの予め設定された命令に従って、ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、ディスプレイ画面の第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイできる。具体的に、ディスプレイ部２３０は、ディスプレイ画面の上段領域の中間部のメインスクリーンをディスプレイし、メインスクリーンの左側及び右側に第１サブスクリーン及び第２サブスクリーンをディスプレイできる。また、ディスプレイ部１１０は、ディスプレイ画面の下段領域にカテゴリー化されたグループに応じて予め指定された領域上にディスプレイされる多面体形態の複数のオブジェクトをディスプレイできる。このとき、複数のオブジェクトは、立方体になることができ、上述のように、立方体のオブジェクトをキュービックＧＵＩと名づけることができる。ただし、これは、一実施の形態に過ぎず、オブジェクトは、三角柱、六角柱、直六面体、球などのような立体形態からなることができるだけでなく、四角形、円、三角形などのような平面図形の形態からなることができる。
特に、ディスプレイ部２３０は、放送コンテンツを提供する第１グループに含まれた複数のキュービックＧＵＩを第１空間領域にディスプレイでき、ＶＯＤ（Ｖｉｄｅｏ Ｏｎ Ｄｅｍａｎｄ）コンテンツを提供するための第２グループに含まれた複数のキュービックＧＵＩを第２空間領域にディスプレイでき、ＳＮＳコンテンツを提供するための第３グループに含まれたキュービックＧＵＩを第３空間領域にディスプレイできる。しかしながら、上述のように、カテゴリー化されたグループは、一実施の形態に過ぎず、他の基準によりカテゴリー化されたグループもやはり、本発明の技術的思想が適用されることができる。例えば、ディスプレイ装置２００に接続した外部機器（例えば、ＤＶＤ）から提供される映像コンテンツを提供するためのキュービックＧＵＩを含むグループ、写真コンテンツを提供するためのキュービックＧＵＩを含むグループ、音楽コンテンツを提供するためのキュービックＧＵＩを含むグループなど、多様な基準によりカテゴリー化されたグループが提供されることができる。ディスプレイ装置２００が提供する複数のスクリーン及び複数のオブジェクトについては、後に図面を参照して詳細に説明する。
オーディオ出力部２４０は、オーディオ処理部２６０で処理された各種オーディオデータだけでなく、各種のお知らせ音または音声メッセージを出力する構成である。特に、オーディオ出力部２４０は、スピーカーにより具現化されることができるが、これは、一実施の形態に過ぎず、オーディオ出力端子のような他のオーディオ出力部により具現化されることができる。
格納部２５０は、ディスプレイ装置２００を駆動するための多様なモジュールを格納する。特に、格納部２５０の構成については、図４を参照して説明する。
図４は、格納部２５０に格納されたソフトウェア構成を説明するための図である。
図４によれば、格納部２５０には、ベースモジュール２５１、センシングモジュール２５２、通信モジュール２５３、プレゼンテーションモジュール２５４、ウェブブラウザモジュール２５５、サービスモジュール２５６を備えるソフトウェアが格納されることができる。
ベースモジュール２５１とは、ディスプレイ装置１００に含まれた各ハードウェアから伝達される信号を処理して、上位レイヤモジュールに伝達する基礎モジュールのことを意味する。ベースモジュール２５１は、ストレージモジュール２５１−１、セキュリティモジュール２５１−２及びネットワークモジュール２５１−３などを備える。ストレージモジュール２５１−１とは、データベース（ＤＢ）やレジストリを管理するプログラムモジュールである。メインＣＰＵ２９４は、ストレージモジュール２５１−１を利用して格納部２５０内のデータベースにアクセスして、各種データを読み出すことができる。セキュリティモジュール２５１−２とは、ハードウェアに対する認証（Ｃｅｒｔｉｆｉｃａｔｉｏｎ）、要請許容（Ｐｅｒｍｉｓｓｉｏｎ）、セキュリティ格納（Ｓｅｃｕｒｅ Ｓｔｏｒａｇｅ）などを支援するプログラムモジュールであり、ネットワークモジュール１４１−３とは、ネットワーク接続を支援するためのモジュールであって、ＤＮＥＴモジュール、ＵＰｎＰモジュールなどを備える。
センシングモジュール２５２は、各種センサから情報を収集し、収集された情報を分析及び管理するモジュールである。センシングモジュール２５２は、ヘッド方向認識モジュール、顔認識モジュール、音声認識モジュール、モーション認識モジュール、ＮＦＣ認識モジュールなどを備えることができる。
通信モジュール２５３は、外部と通信を行うためのモジュールである。通信モジュール２５３は、メッセンジャープログラム、ＳＭＳ（Ｓｈｏｒｔ Ｍｅｓｓａｇｅ Ｓｅｒｖｉｃｅ）＆ＭＭＳ（Ｍｕｌｔｉｍｅｄｉａ Ｍｅｓｓａｇｅ Ｓｅｒｖｉｃｅ）プログラム、電子メールプログラムなどのようなメッセージモジュール２５３−１、電話情報収集器（Ｃａｌｌ Ｉｎｆｏ Ａｇｇｒｅｇａｔｏｒ）プログラムモジュール、ＶｏＩＰモジュールなどを有する電話モジュール２５３−２を備えることができる。
プレゼンテーションモジュール２５４は、ディスプレイ画面を構成するためのモジュールである。プレゼンテーションモジュール２５４は、マルチメディアコンテンツを再生して出力するためのマルチメディアモジュール２５４−１、ＵＩ、及びグラフィック処理を行うＵＩレンダリングモジュール２５４−２を備える。マルチメディアモジュール２５４−１は、プレーヤーモジュール、ビデオカメラモジュール、サウンド処理モジュールなどを備えることができる。これにより、各種マルチメディアコンテンツを再生して画面及び音響を生成して再生する動作を行う。ＵＩレンダリングモジュール２５４−２は、イメージを組み合わせるイメージ合成器（Ｉｍａｇｅ Ｃｏｍｐｏｓｉｔｏｒ ｍｏｄｕｌｅ）、イメージをディスプレイする画面上の座標を組み合わせて生成する座標組合モジュール、ハードウェアから各種イベントを受信するＸ１１モジュール、２Ｄまたは３Ｄ形態のＵＩを構成するためのツール（ｔｏｏｌ）を提供する２Ｄ／３Ｄ ＵＩツールキットなどを備えることができる。
ウェブブラウザモジュール２５５は、ウェブブラウジングを行ってウェブサーバにアクセスするモジュールを意味する。ウェブブラウザモジュール２５５は、ウェブページを構成するウェブビュー（ｗｅｂ ｖｉｅｗ）モジュール、ダウンロードを行うダウンロードエージェントモジュール、ブックマークモジュール、ウェブキット（Ｗｅｂｋｉｔ）モジュールなどのような多様なモジュールを備えることができる。
サービスモジュール２５６は、多様なサービスを提供するための各種アプリケーションを含むモジュールである。具体的には、サービスモジュール２５６は、ＳＮＳプログラム、コンテンツ再生プログラム、ゲームプログラム、電子本プログラム、カレンダープログラム、アラーム管理プログラム、その他ウィゼットなどのような多様なプログラムモジュールを備えることができる。
図４では、多様なプログラムモジュールを示したが、図示の各種プログラムモジュールは、ディスプレイ装置２００の種類及び特性によって一部省略、り変形または追加されうることはもちろんである。たとえば、ＧＰＳチップのようなハードウェアと連動して位置基盤サービスを支援する位置基盤モジュールをさらに備える形態により具現化されることができる。
また、図３について説明すれば、オーディオ処理部２６０は、オーディオデータに対する処理を行う構成要素である。オーディオ処理部２６０では、オーディオデータに対するデコード、増幅、及びノイズ・フィルターリングなどのような多様な処理が行われることができる。一方、オーディオ処理部２６０は、複数のコンテンツに対応するオーディオを処理するために、複数のオーディオ処理モジュールを備えることができる。
ビデオ処理部２７０は、映像受信部１２０で受信した映像データに対する処理を行う構成要素である。ビデオ処理部２７０では、映像データに対するデコード、スケーリング、ノイズ・フィルターリング、フレームレート変換、解像度の変換などのような多様なイメージ処理を行うことができる。一方、ビデオ処理部２７０は、複数のコンテンツに対応するビデオを処理するために、複数のビデオ処理モジュールを備えることができる。
ユーザインタフェース部２８０は、ディスプレイ装置２００の全般的な動作を制御するためのユーザインタラクションを感知するための構成である。特に、ユーザインタフェース部２８０は、複数のスクリーンを制御するためのユーザインタラクションを感知できる。具体的に、ユーザインタフェース部２８０は、複数のスクリーンを移動するためのユーザインタラクション、メインスクリーンを変更するためのユーザインタラクション、複数のスクリーンのうち、いずれか一つのスクリーンに再生されるコンテンツを選択するためのユーザインタラクション等、多様なユーザインタラクションを感知できる。また、ユーザインタフェース部２８０は、複数のスクリーンにディスプレイされるコンテンツを選択するためのユーザインタラクションを感知できる。具体的に、ユーザインタフェース部２８０は、ユーザが視聴しようとするコンテンツを選択するためのユーザインタラクション、選択されたコンテンツをディスプレイするスクリーンを選択するためのユーザインタラクションを感知できる。また、ユーザインタフェース部２８０は、ディスプレイ画面を転換するユーザインタラクションを感知できる。具体的に、ユーザインタフェース部２８０は、第１領域にディスプレイされた複数のスクリーンをディスプレイ画面から除去するためのユーザインタラクション、及び第２領域にディスプレイされた複数のオブジェクトをディスプレイ画面から除去するためのユーザインタラクションを感知できる。
また、ユーザインタフェース部２８０は、図３に示すように、カメラ２８１、マイク２８２、リモコン信号受信部２８３などのような多様なインタラクション感知装置を備えることができる。
カメラ２８１は、ユーザの制御によって静止画または動画を撮像するための構成である。特に、カメラ２８１は、ディスプレイ装置２００を制御するための各種ユーザモーションを撮像できる。
マイク２８２は、ユーザ音声またはその他の音を受け取って、オーディオデータに変換するための構成である。制御部２９０は、マイク２８２を介して入力されるユーザ音声を通話（ｃａｌｌ）過程で利用するか、またはオーディオデータに変換して格納部２５０に格納することができる。
カメラ２８１及びマイク２８２が備えられた場合、制御部２９０は、マイク２８２を介して入力されるユーザ音声またはカメラ２８１により認識されるユーザモーションに応じて、制御動作を行うことができる。すなわち、ディスプレイ装置２００は、モーション制御モードや音声制御モードで動作できる。モーション制御モードで動作する場合、制御部２９０は、カメラ２８１をアクティブにしてユーザを撮像し、ユーザのモーション変化を追跡してそれに対応する制御動作を行う。音声制御モードで動作する場合、制御部２９０は、マイクを介して入力されたユーザ音声を分析し、分析されたユーザ音声に応じて制御動作を行う音声認識モードで動作することもできる。
また、リモコン信号受信部２８３は、外部の遠隔制御装置５０であって、リモコンから制御命令の含まれたリモコン信号を受信することができる。
制御部２９０は、格納部２５０に格納された各種プログラムを利用して、ディスプレイ装置２００の全般的な動作を制御する。
制御部２９０は、図２に示すように、ＲＡＭ２９１、ＲＯＭ２９２、グラフィック処理部２９３、メインＣＰＵ２９４、第１ないしｎインタフェース２９５−１〜２９５−ｎ、バス２９６を備える。このとき、ＲＡＭ２９１、ＲＯＭ２９２、グラフィック処理部２９３、メインＣＰＵ２９４、第１ないしｎインタフェース２９５−１〜２９５−ｎなどは、バス１３６を介して互いに接続されることができる。
ＲＯＭ２９２には、システムブートのための命令語セットなどが格納される。ターンオン命令が入力されて電源が供給されると、メインＣＰＵ２９４は、ＲＯＭ２９２に格納された命令語に従って格納部２５０に格納されたＯ／ＳをＲＡＭ２９１に複写し、Ｏ／Ｓを実行させてシステムをブートさせる。ブートが完了すると、メインＣＰＵ２９４は、格納部２５０に格納された各種アプリケーションプログラムをＲＡＭ２９１に複写し、ＲＡＭ２９１に複写されたアプリケーションプログラムを実行させて各種動作を行う。
グラフィック処理部２９３は、演算部（図示せず）及びレンダリング部（図示せず）を利用して、アイコン、イメージ、テキストなどのような多様な客体を含む画面を生成する。演算部は、受信された制御命令を利用して画面のレイアウトに沿って各客体が表示される座標値、形態、大きさ、カラーなどのような属性値を演算する。レンダリング部は、演算部で演算した属性値に基づいて客体を含む多様なレイアウトの画面を生成する。レンダリング部から生成された画面は、ディスプレイ部２３０のディスプレイ領域内に表示される。
メインＣＰＵ２９４は、格納部２５０にアクセスして、格納部２５０に格納されたＯ／Ｓを利用してブートを行う。そして、メインＣＰＵ２９４は、格納部２５０に格納された各種プログラム、コンテンツ、データなどを利用して多様な動作を行う。
第１ないしｎインタフェース２９５−１出す２９５−ｎは、上述の各種構成要素に接続される。インタフェースのうちのいずれか一つは、ネットワークを介して外部装置に接続するネットワークインタフェースになることができる。
特に、制御部２９０は、ユーザインタフェース部２８０に入力されたユーザのインタラクションに応じて、ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、ディスプレイ画面の第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイするように、ディスプレイ部２３０を制御できる。
具体的に、制御部２９０は、図５に示すように、ディスプレイ画面の上段領域にメインスクリーン５２０及び複数のサブスクリーン５１０、５３０をディスプレイするように、ディスプレイ部２３０を制御できる。制御部２９０は、ディスプレイ画面の上段の中間領域にメインスクリーン５２０をディスプレイし、メインスクリーン５２０の左側及び右側にそれぞれ傾けられた長方形の第１サブスクリーン５１０及び第２サブスクリーン５３０をディスプレイするように、ディスプレイ部２３０を制御できる。このとき、メインスクリーン５２０及び複数のサブスクリーン５１０、５３０は、立体的に配置されているから、ユーザが３次元空間上において複数のスクリーンを視聴するような効果を提供できる。
図５では、メインスクリーン５２０及び複数のサブスクリーン５１０、５３０にコンテンツが再生されていないが、これは、一実施の形態に過ぎず、以前に再生されたコンテンツが再生されていても良い。
また、制御部２９０は、ディスプレイ画面の下段領域にルーム（ｒｏｏｍ）形態の複数の空間上に複数のグループにカテゴリー化されたオブジェクトをディスプレイするように、ディスプレイ部２３０を制御できる。具体的に、制御部２９０は、図５に示すように、ディスプレイ画面の下段の中間領域に第１グループにカテゴリー化された複数のオブジェクト５５１ないし５５９を含む第１ルーム５５０、第１ルームの左側領域に第２グループにカテゴリー化された複数のオブジェクト５４１ないし５４９を含む第２ルーム５４０、及び第１ルームの右側領域に第３グループにカテゴリー化された複数のオブジェクト５６１ないし５６９を含む第３ルーム５６０をディスプレイするように、ディスプレイ部２３０を制御できる。このとき、複数のルーム５４０、５５０、５６０に含まれた複数のオブジェクトの各々は、立方体形態のキュービックＧＵＩであり、３次元空間を有する複数のルーム中にフローティング（ｆｌｏａｔｉｎｇ）されてディスプレイされることができる。
本発明の一実施の形態において、第１ルーム５５０には、放送チャネルに対応する第１キュービックＧＵＩ５５１ないし第９キュービックＧＵＩ５５９を含み、第２ルーム５４０には、ＳＮＳコンテンツに対応する第１０キュービックＧＵＩ５４１ないし第１８キュービックＧＵＩ５４９を含み、第３ルーム５６０には、ＶＯＤコンテンツに対応する第１９キュービックＧＵＩ５６１ないし第２７キュービックＧＵＩ５６９を含むことができる。しかしながら、上述のように、カテゴリー化されたキュービックＧＵＩは、一実施の形態に過ぎず、他の基準によりキュービックＧＵＩがカテゴリー化されることができる。例えば、キュービックＧＵＩは、ディスプレイ装置２００に接続した外部機器（例えば、ＤＶＤ）から提供される映像コンテンツを提供するためのキュービックＧＵＩ、写真コンテンツを提供するためのキュービックＧＵＩ、音楽コンテンツを提供するためのキュービックＧＵＩ、アプリケーションコンテンツを提供するためのキュービックＧＵＩなど、多様な基準によりカテゴリー化されることができる。
また、ルームは、ユーザの指定したコンテンツに対応するキュービックＧＵＩを含む個人化ルームにより具現化されることができる。例えば、Ａユーザの個人化ルームには、Ａユーザの指定したコンテンツに対応するキュービックＧＵＩを含むことができ、Ｂユーザの個人化ルームには、Ｂユーザの指定したコンテンツに対応するキュービックＧＵＩを含むことができる。このとき、個人化ルームに進入するためには、ユーザの認証手順（例えば、ＩＤとパスワードとを入力する手順、顔認識手順等）が必要でありうる。
このとき、制御部２９０は、キュービックＧＵＩに対応するコンテンツに対するユーザコンテキスト及びコンテンツ属性のうち、少なくとも一つに基づいて複数のルーム５４０、５５０、５６０中に含まれたキュービックＧＵＩの大きさ及び配列状態のうち、少なくとも一つを変更してディスプレイするように、ディスプレイ部２３０を制御できる。
コンテンツに対するユーザコンテキストとは、コンテンツと関連した使用履歴、使用状態、使用環境を全部含む意味になることができる。具体的に、ユーザコンテキストとは、コンテンツに対するユーザの過去利用形態、現在利用形態、未来の予想利用形態を含む意味になることができる。例えば、コンテンツが放送チャネルコンテンツである場合、該当放送チャネルに対する過去選局行為だけでなく、現在選局行為もユーザコンテキストに該当できる。ユーザは、ディスプレイ装置２００のユーザだけでなく、コンテンツに予め設定された影響を与える他のユーザ、またはサービス提供子も含む意味になることができる。例えば、コンテンツがＳＮＳにアップロードされた特定コンテンツを表す場合、該当コンテンツにコメントを入力した他のユーザがこれに該当することができる。また、コンテンツに対するコンテキストは、時間の流れ、ディスプレイ装置２００の位置（例えば、地域）、周囲照明など、多様な周辺環境を含むことができる。
また、コンテンツ属性とは、コンテンツの具現例によってコンテンツを区別できる特徴を全部含む意味になることができる。例えば、コンテンツが映像コンテンツである場合、コンテンツ属性は、コンテンツ生成、流通、消費過程から発生するコンテンツ内容、コンテンツ生成時間、アップデート時間、放送時間、再生時間、出演者等、コンテンツ自体が有する他のコンテンツと区別可能な多様な特徴になることができる。または、コンテンツがＳＮＳコンテンツである場合、コンテンツ属性は、可能なサービス種類（例えば、写真アップデートサービス）、会員数などになることができる。またはコンテンツが放送コンテンツである場合、コンテンツ属性は、提供可能なコンテンツ種類及び内容、チャネル視聴率などになることができる。
この場合、キュービックＧＵＩの大きさ及び配列状態を決定するための基準は、予め設定されているか、またはリアルタイムで判断されることができる。例えば、放送、写真、音楽、映画、ＴＶショー（ＴＶ ｓｈｏｗ）のようなコンテンツの場合、ユーザ行動パターンに基づいて大きさ及び配列状態を決定し、ＳＮＳ、教育関連コンテンツの場合、コンテンツの場合コンテンツ特性に基づいて大きさ及び配列状態を決定するように予め設定されていることができるが、場合によっては、ユーザ選択によって基準が設定されるか、またはディスプレイ装置２００からリアルタイムで判断されることができる
一方、キュービックＧＵＩの大きさは、六個の面のうち、少なくとも一つの大きさになることができる。これにより、キュービックＧＵＩの大きさが異なるというのは、少なくとも一つの面の大きさ、すなわち、横の長さ及び縦の長さのうち、いずれか一つが異なるという状態を意味できる。例えば、ユーザに正面から見える面の大きさが異なる場合も、キュービックＧＵＩの大きさが異なる場合になることができるが、ユーザにななめに見える横面の大きさが異なる場合も、キュービックＧＵＩの大きさが異なる場合になることができる。
また、キュービックＧＵＩの配列状態は、画面のＸ−Ｙ軸上におけるキュービックＧＵＩの位置及び画面のＺ軸上におけるキュービックＧＵＩのデプス（ｄｅｐｔｈ）のうち、少なくとも一つを含むことができる。キュービックＧＵＩの配列状態が異なるというのは、画面のＸ−Ｙ軸上におけるキュービックＧＵＩの位置座標が異なるか、または画面のＺ軸上におけるキュービックＧＵＩの位置座標が異なる状態になることができる。ここで、デプスとは、視聴者の視線方向である前後方向の位置に該当する深さ感を意味できる。
例えば、二つのキュービックＧＵＩの画面Ｘ−Ｙ軸上において位置が同じ場合にも、Ｚ軸上のデプス位置が異なると、配列状態が異なる場合になることができる。Ｚ軸上のデプスとは、＋Ｚ軸方向にデプスが変更される場合と−Ｚ軸方向にデプスが変更される場合がありうるが、本明細書には、＋Ｚ軸方向にデプスが変更される場合をデプスが減少すると表現し、−Ｚ軸方向にデプスが変更される場合をデプスが増加すると表現する。すなわち、デプスが減少したりデプスが小さいという表現は、ユーザにより近くディスプレイされる場合を意味し、デプスが増加したりデプスが大きいという表現は、ユーザにより遠くディスプレイされる場合を意味する。デプスは、２Ｄ映像の場合、キュービックＧＵＩに対した遠近感処理で表現されることができるが、３Ｄ映像の場合、左眼映像と右眼映像間の時差（ｄｉｓｐａｒｉｔｙ）により表現されることができる。
制御部２９０は、コンテンツに対するユーザコンテキスト及びコンテンツの属性のうち、少なくとも一つに基づいてコンテンツに対する優先順位を設定し、設定された優先順位に応じてコンテンツを表すキュービックＧＵＩの大きさ及び配列状態を異なるようにディスプレイするように、ディスプレイ部２３０を制御できる。
例えば、画面上にディスプレイする複数のキュービックＧＵＩが各々放送チャネルを表す場合、制御部２９０は、各放送チャネルに対するユーザコンテキストである「お気に入り（ｂｏｏｋｍａｒｋ）」程度に応じて優先順位を設定し、設定された優先順位に応じて優先順位の最も高い放送チャネルを表すキュービックＧＵＩを画面中央に最も大きな大きさでディスプレイし、優先順位の最も低い放送チャネルを表すキュービックＧＵＩを画面右側の下部領域に最も小さな大きさでディスプレイするように、ディスプレイ部２３０を制御できる。または、画面上にディスプレイする複数のキュービックＧＵＩが各々映画コンテンツを表す場合、制御部２９０は、各映画コンテンツに対する属性であるアップデート時間に応じて、最も最近にアップデートされた映画コンテンツを表すキュービックＧＵＩのデプスを最も小さくして、ユーザの近くにディスプレイし、最も以前にアップデートされた映画コンテンツを表すキュービックＧＵＩのデプスを最も大きくして、ユーザの遠くにディスプレイするように、ディスプレイ部２３０を制御できる。
制御部２９０は、キュービックＧＵＩのディスプレイ位置及び該当位置でのデプス及び大きさが予め設定されている状態でコンテンツの優先順位に応じてコンテンツ情報を変更してディスプレイすることもできるが、制御部２９０は、コンテンツの優先順位に応じてコンテンツを表すキュービックＧＵＩの位置、大きさデプスを自由に変更することもできる。例えば、画面の中央に最も大きな大きさを有し、最も小さなデプスを有するようにディスプレイされるキュービックＧＵＩの優先順位が変更された場合、制御部２９０は、該当キュービックＧＵＩの位置、デプス及び大きさを維持したまま、該当コンテンツの情報を他のキュービックＧＵＩにディスプレイすることもできるが、制御部は、該当キュービックＧＵＩの大きさ、位置及びデプスのうち、少なくとも一つを変更することも可能でありうる。
また、制御部２９０は、キュービックＧＵＩが現在表すコンテンツタイプに応じて、キュービックＧＵＩの大きさ及び配列状態を異なるようにディスプレイするよう制御できる。
例えば、制御部２９０は、複数のキュービックＧＵＩがコンテンツ提供者情報を表す状態で既設定されたイベントに応じて複数のキュービックＧＵＩが該当コンテンツ提供者により提供されるコンテンツ情報を表し、コンテンツ提供者の優先順位とコンテンツの優先順位に応じて、キュービックＧＵＩの大きさ、位置及びデプスのうち、少なくとも一つだけを変更できる。例えば、キュービックＧＵＩの大きさ及び位置は、コンテンツ提供者の優先順位に対応するようにディスプレイし、デプスは、コンテンツの優先順位に対応するようにディスプレイできる。
また、制御部２９０は、キュービックＧＵＩに対応するコンテンツに対する情報をキュービックＧＵＩを構成する複数の面のうち、少なくとも一面にディスプレイするように、ディスプレイ部２３０を制御できる。例えば、キュービックＧＵＩが放送コンテンツに対応するキュービックＧＵＩである場合、制御部２９０は、キュービックＧＵＩの一面に放送チャネル名、放送チャネル番号、プログラム情報などをディスプレイするように、ディスプレイ部２３０を制御できる。
また、制御部２９０は、複数のキュービックＧＵＩ上にハイライトを表示するようにディスプレイ部２３０を制御して、複数のキュービックＧＵＩのうち、いずれか一つを選択できる。このとき、制御部２９０は、複数のルーム５４０、５５０、５６０のうち、中央領域に配置された第２ルーム５５０においてのみ、ハイライトを移動させることができる。すなわち、制御部２９０は、中央領域に配置された第２ルーム５５０に含まれた複数のキュービックＧＵＩ５５１ないし５５９のうち、いずれか一つにハイライトを表示、移動させることができる。制御部２９０は、他のルームに含まれたキュービックＧＵＩを選択するためには、ユーザインタラクションを利用して他のルームを中央領域へ移動させた後、中央領域へ移動されたルームに含まれた複数のキュービックＧＵＩのうち、いずれか一つを選択できる。
複数のキュービックＧＵＩのうち、いずれか一つにハイライトが表示された場合、制御部２９０は、ハイライトの表示されたキュービックＧＵＩを他のキュービックＧＵＩと異なる方式でディスプレイするように、ディスプレイ部２３０を制御できる。例えば、制御部２９０は、ハイライトの表示されたキュービックＧＵＩに放送チャネル番号、放送プログラム名、放送プログラムのサムネイル画面をディスプレイし、ハイライトの表示されないキュービックＧＵＩには、放送チャネル名だけをディスプレイするように、ディスプレイ部２３０を制御できる。
一方、上述の実施の形態では、ハイライトを移動して複数のキュービックＧＵＩのうち、いずれか一つを選択すると説明したが、これは、一実施の形態に過ぎず、ポインタを利用して複数のキュービックＧＵＩのうち、いずれか一つを選択できる。
そして、複数のオブジェクトのうち、いずれか一つが選択された状態で予め設定されたユーザインタラクションが入力された場合、制御部２９０は、選択された複数のオブジェクトに対応するコンテンツを入力された予め設定されたユーザインタラクションに応じて、複数のスクリーンのうち、いずれか一つにディスプレイするように、ディスプレイ部２３０を制御できる。このとき、予め設定されたユーザインタラクションは、リモコンに備えられたメインスクリーン５２０、第１サブスクリーン５１０及び第２サブスクリーン５３０とそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つを選択するユーザインタラクションでありうる。特に、リモコンに備えられた第１ないし第３ボタンは、メインスクリーン５２０、第１サブスクリーン５１０及び第２サブスクリーン５３０と同じ形状でありうる。
具体的に、図５に示すように、第１ルーム５５０に含まれた複数のキュービックＧＵＩのうち、中間部に位置した第１４キュービックＧＵＩ５５５にハイライトが表示される間にリモコンに備えられた第１ないし第３ボタンのうち、第３ボタンが選択された場合、制御部２９０は、図６に示すように、第１４キュービックＧＵＩ５５５に対応する放送コンテンツを第３ボタンに対応する第２サブスクリーン５３０にディスプレイするように、ディスプレイ部２３０を制御できる。
そして、ユーザインタフェース部２８０を介して入力されたユーザ命令に従って、ハイライト表示を第１６キュービックＧＵＩ５５７に移動させた後、リモコンに備えられた第１ないし第３ボタンのうち、第１ボタンが選択された場合、制御部２９０は、図７に示すように、第１６キュービックＧＵＩ５５７に対応する放送コンテンツを第１ボタンに対応する第１サブスクリーン５１０にディスプレイするように、ディスプレイ部２３０を制御できる。
そして、ユーザインタフェース部２８０を介して入力されたルーム回転のためのユーザ命令が入力されると、制御部２９０は、複数のルームを回転させディスプレイするように、ディスプレイ部２３０を制御できる。具体的に、ユーザインタフェース部２８０を介してルームを時計反対方向に回転するユーザ命令が入力されると、制御部２９０は、複数のルーム５４０、５５０、５６０を時計反対方向に回転して、図８に示すように、第１ルーム５４０をディスプレイ画面から除去し、第３ルーム５６０をディスプレイ画面の中央へ移動させ、第２ルーム５５０を第３ルーム５６０の左側にディスプレイし、第４ルーム５７０を生成して第３ルーム５６０の右側にディスプレイするように、ディスプレイ部２３０を制御できる。
ユーザインタフェース部２８０を介して入力されたユーザ命令に従って、ハイライト表示を第２２キュービックＧＵＩ５６４に移動させた後、リモコンに備えられた第１ないし第３ボタンのうち、第２ボタンが選択された場合、制御部２９０は、図９に示すように、第２２キュービックＧＵＩ５６４に対応するＶＯＤコンテンツを第２ボタンに対応するメインスクリーン５２０にディスプレイするように、ディスプレイ部２３０を制御できる。
上述のように、リモコンを利用したユーザインタラクションに応じてコンテンツを選択して、複数のスクリーンに各々ディスプレイすることによって、ユーザは、複数のスクリーンを介して自身が望む複数のコンテンツを同時に視聴できるようになる。また、ユーザは、複数のスクリーンにディスプレイされるコンテンツを選択する間に、自身が選択するコンテンツを確認し続けることができるので、コンテンツを便利に選択できる。
上述の実施の形態では、リモコンを利用してコンテンツがディスプレイされるスクリーンを選択したが、これは、一実施の形態に過ぎず、他の方法を利用してコンテンツがディスプレイされるスクリーンを選択できる。
例えば、ユーザは、音声命令を利用してコンテンツがディスプレイされるスクリーンを選択できる。具体的に、複数のキュービックＧＵＩのうち、いずれか一つにハイライトが表示される間に、ユーザインタフェース部２８０のマイク２８２を介して「メイン」というユーザ音声が入力されると、制御部２９０は、ハイライトの表示されたキュービックＧＵＩに対応するコンテンツをユーザ音声に対応するメインスクリーンにディスプレイするように、ディスプレイ部２８０を制御できる。複数のスクリーンを選択するためのユーザ音声は、多様な実施の形態に具現されることができる。例えば、第１サブスクリーンを選択するためのユーザ音声は、「第１サブ」、「左側」、「左側」などのように多様に具現化されることができる。
さらに他の例として、ユーザは、マウス、ポインティングデバイスまたはユーザモーションにより制御されるポインタを利用して、コンテンツがディスプレイされるスクリーンを選択できる。複数のキュービックＧＵＩのうち、いずれか一つにポインタが位置する間に、ユーザ選択命令（例えば、マウスのクリック、ユーザグラブモーションなど）が入力された後、複数のスクリーンのうち、いずれか一つで移動するドラッグ命令（例えば、マウスのクリック状態を維持しながら移動、ユーザがグラブモーションを維持しながら移動）が入力されると、制御部２９０は、ポインタが位置したキュービックＧＵＩに対応するコンテンツをドラッグ命令を介して移動したスクリーンにディスプレイするように、ディスプレイ部２３０を制御できる。
制御部２９０は、多様な方法で複数のスクリーンにディスプレイされるコンテンツを選択できる。本発明の一実施の形態において、ディスプレイ画面に複数のスクリーンがディスプレイされる間に予め設定されたユーザインタラクションが入力された場合、制御部２９０は、複数のスクリーンのうち、メインスクリーンを縮小させ、メインスクリーンにディスプレイされることのできる複数のコンテンツに対応する複数のサムネイル画面をディスプレイ画面にディスプレイするように、ディスプレイ部２３０を制御できる。これにより、ユーザは、ディスプレイ画面にディスプレイされた複数のサムネイル画面を利用して、メインスクリーンにディスプレイされるコンテンツを選択できる。
具体的に、ディスプレイ画面の第１領域に複数のスクリーンがディスプレイされ、ディスプレイ画面の第２領域に複数のオブジェクトがディスプレイされる間に、予め設定されたユーザインタラクションが入力された場合、制御部２９０は、ディスプレイ画面の第２領域にディスプレイされた複数のオブジェクトを除去し、複数のスクリーンを拡大してディスプレイするように、ディスプレイ部２３０を制御できる。例えば、図９に示すように、ディスプレイ画面の上段領域にメインスクリーン５２０及び複数のサブスクリーン５１０、５３０がディスプレイされ、ディスプレイ画面の下段領域に複数のルーム５４０、５５０、５６０に複数のキュービックＧＵＩがディスプレイされる間に、ユーザインタフェース部２８０を介して予め設定されたユーザインタラクション（例えば、リモコンの予め設定されたボタンが選択される命令など）が感知された場合、制御部２９０は、時間が過ぎるにつれて、図１０に示すように、ディスプレイ画面の第２領域にディスプレイされた複数のキュービックＧＵＩをますます曇るようにし、図１１に示すように、ディスプレイ画面から除去するようにディスプレイ部２３０を制御する。そして、制御部２９０は、時間が過ぎるにつれて、図１２及び図１３に示すように、上段領域にディスプレイされたメインスクリーン５２０及び複数のサブスクリーン５１０、５３０を拡大してディスプレイするように、ディスプレイ部２３０を制御できる。図１０ないし図１３にて説明したように、メインスクリーン５２０及び複数のサブスクリーン５１０、５３０が拡大されてディスプレイされることは、一実施の形態に過ぎず、他の方法によりメインスクリーン５２０及び複数のサブスクリーン５１０、５３０が拡大されてディスプレイされても良い。例えば、制御部２９０は、ディスプレイ画面の下段領域にディスプレイされた複数のキュービックＧＵＩを下側方向へ移動させながら除去し、これと同時にメインスクリーン５２０及び複数のサブスクリーン５１０、５３０を拡大してディスプレイするように、ディスプレイ部２３０を制御できる。このとき、制御部２９０は、複数のチューナーを介して外部の放送局から受信された複数の映像をメインスクリーン５２０及び複数のサブスクリーン５１０、５３０のうち、複数にリアルタイムでディスプレイできる。
図１３に示すように、複数のスクリーンをディスプレイするための方法により、図９ないし図１３のような過程を経ることは一実施の形態に過ぎず、他の方法によりディスプレイ画面に複数のスクリーンだけをディスプレイできる。例えば、ディスプレイ装置２００が最初にオンになる場合、制御部２９０は、ディスプレイ画面に複数のスクリーンだけをディスプレイするように、ディスプレイ部２３０を制御できる。
制御部２９０は、図１３に示すように、ディスプレイ画面に複数のスクリーンをディスプレイするように、ディスプレイ部２３０を制御できる。具体的に、制御部２９０は、映像受信部２１０から受信された複数のコンテンツを複数のスクリーンに各々ディスプレイするように、ディスプレイ部２３０を制御できる。例えば、制御部２９０は、第１チューナーを介して受信された第１放送コンテンツを第１サブスクリーン５１０にディスプレイでき、第２チューナーを介して受信された第２放送コンテンツを第２サブスクリーン５３０にディスプレイでき、外部のサーバを介して受信された第１ＶＯＤコンテンツをメインスクリーン５２０にディスプレイできる。。
また、制御部２９０は、図１３に示すように、ディスプレイ画面の中央領域にメインスクリーン５２０をディスプレイし、メインスクリーン５２０の左側及び右側にそれぞれ第１サブスクリーン５１０及び第２サブスクリーン５３０をディスプレイするように、ディスプレイ部２１０を制御できる。具体的に、制御部２９０は、ディスプレイ部２３０において最も大きな比率を占めているスクリーンをメインスクリーン５２０に設定し、メインスクリーンのオーディオをオーディオ出力部２４０を介して出力できる。そして、制御部２９０は、ディスプレイ部２３０でメインスクリーンの左側及び右側にユーザが探索しようとするコンテンツを再生している第１サブスクリーン５１０及び第２サブスクリーン５３０をディスプレイするように、ディスプレイ部２３０を制御できる。このとき、第１サブスクリーン５１０及び第２サブスクリーン５３０のオーディオは、出力されないか、または予め設定された値以下の出力レベルを有することができる。
また、制御部２９０は、図１３に示すように、メインスクリーン５２０の左側及び右側に台形形態で第１サブスクリーン５１０及び第２サブスクリーン５３０をディスプレイするように、ディスプレイ部２３０を制御できる。台形形態でディスプレイされた第１サブスクリーン５１０及び第２サブスクリーン５３０は、メインスクリーン５２０に基づいて３次元空間に立体的に配置されたことのようにディスプレイされることができる。これによって、ユーザは、３次元空間上に複数のスクリーンを制御できることのような効果を享受するようになる。
また、制御部２９０は、図１３に示すように、第１サブスクリーン５１０及び第２サブスクリーン５３０全体をディスプレイしなくて、一部画面だけをディスプレイするように、ディスプレイ部２３０を制御できる。
また、制御部２９０は、ユーザインタフェース部２８０を介して感知されたユーザインタラクションに応じて、メインスクリーン５２０及び複数のサブスクリーン５１０、５３０を移動して、メインスクリーン５２０及び複数のサブスクリーン５１０、５３０の位置を変更するように、ディスプレイ部２３０を制御できる。
ユーザインタフェース部２８０を介してユーザインタラクションは、方向性を有するユーザインタラクション及び複数のスクリーンのうち、いずれか一つを直接選択するユーザインタラクションを含むことができる。
以下、方向性を有するユーザインタラクションとして、ユーザ頭回転インタラクションが感知された場合、複数のスクリーンを移動する実施の形態について説明する。
制御部２９０は、ディスプレイ部２３０に図１３に示すように、メインスクリーン５１０及び複数のサブスクリーン５２０、５３０がディスプレイされる間に、撮影部２８１を介してユーザの頭が回転されたかどうかを感知できる。
ユーザ頭回転を感知する方法は、図２５を参照して説明する。具体的に、撮影部２８１がユーザの含まれた領域を撮影する間に、制御部２９０は、撮影部２８１により撮影された映像のうち、ユーザ顔を検出できる。そして、制御部２９０は、ユーザ顔のうち、図２５の（ａ）に示すように、複数の特徴点ｆ１ないしｆ６を検出する。そして、制御部２９０は、検出された特徴点ｆ１ないしｆ６を利用して、図２５の（ｃ）に示すように、仮想の図形２４１０を生成する。そして、制御部２９０は、図２５の（ｃ）に示すように、仮想の図形２４１０の変化有無を判断して、ユーザ顔が回転したかどうかを判断できる。特に、制御部２９０は、図２５の（ｃ）に示すように、仮想の図形２４１０の模様及び大きさの変化有無によって、ユーザの頭回転方向及び角度を判断できる。
ユーザの頭回転が感知された場合、制御部２９０は、感知されたユーザの頭回転方向に沿ってメインスクリーン５２０、第１サブスクリーン５１０及び第２サブスクリーン５３０を移動するように、ディスプレイ部２３０を制御できる。具体的に、図１３に示すように、ディスプレイ部２３０に複数のスクリーン５１０、５２０、５３０がディスプレイされる間に、ユーザインタフェース部２８０のカメラ２８１を介してユーザの頭が左側方向に感知された場合、制御部２９０は、図１４に示すように、メインスクリーン５２０、第１サブスクリーン５１０及び第２サブスクリーン５３０を右に移動するように、ディスプレイ部２３０を制御できる。特に、制御部２９０は、図１４に示すように、最も左側に位置する第１サブスクリーン５１０がディスプレイ画面を占める比率を増加させるように、ディスプレイ部２３０を制御できる。このとき、制御部２９０は、感知されたユーザの頭回転角度に応じてメインスクリーン５１０、第１サブスクリーン５２０及び第２サブスクリーン５３０の移動量を判断して、メインスクリーン５１０、第１サブスクリーン５２０及び第２サブスクリーン５３０をリアルタイムで移動できる。そして、ユーザの頭が左側方向へ移動する間に、ユーザの頭回転角度が予め設定された値以上である場合、制御部２９０は、図１５に示すように、最も左側に位置する第１サブスクリーン５１０がディスプレイ画面を最も多く占めるようにディスプレイし、第１サブスクリーン５１０を新しいメインスクリーンに設定できる。第１サブスクリーン５１０が新しいメインスクリーンに設定された場合、制御部２９０は、新しくメインスクリーンに設定された第１サブスクリーン５１０のオーディオを出力するように、オーディオ出力部２４０を制御できる。
ユーザインタフェース部を介してユーザの頭が右側方向に回転されたと感知された場合、制御部２９０は、メインスクリーン５２０、第１サブスクリーン５１０及び第２サブスクリーン５３０を左に移動して、第２サブスクリーン５３０がディスプレイ画面を占める比率を増加させるように、ディスプレイ部２３０を制御できる。
そして、複数のスクリーンがディスプレイされる間に予め設定されたユーザインタラクションが感知された場合、制御部２９０は、複数のスクリーンのうち、メインスクリーンの大きさを予め設定された大きさに縮小させ、複数のコンテンツと対応する複数のサムネイル画面を縮小されたメインスクリーンに基づいて予め設定された方向にディスプレイするように、ディスプレイ部２３０を制御できる。
具体的に、図１５に示すように、第１サブスクリーン５１０及び既存のメインスクリーン５２０がディスプレイされた状態でリモコンに備えられたＯＪセンサに対する上下方向のラビングインタラクションが入力された場合、制御部２９０は、図１６に示すように、現在メインスクリーンに設定された第１サブスクリーン１６１０の大きさを予め設定された大きさに縮小させ、他の放送チャネルに対応する複数のサムネイル画面１６２０ないし１６５０を縮小された第１サブスクリーン１６１０の上下方向にディスプレイするように、ディスプレイ部２３０を制御できる。このとき、制御部２９０は、縮小された第１サブスクリーン１６１０にハイライトをディスプレイし、ハイライトの表示されたスクリーンの周辺には、ハイライトの表示されたスクリーンに対する情報（例えば、チャネル名、チャネル番号、プログラム名称等）をディスプレイするように、ディスプレイ部２３０を制御できる。
ユーザインタフェース部２８０を介して上下方向のユーザインタラクションが感知された場合、制御部２９０は、感知されたユーザインタラクションに応じてサムネイル画面を移動して、ハイライトの表示されたサムネイル画面を変更できる。具体的に、図１６に示すように、放送チャネル「１１−２」に対応するサムネイル画面１６１０にハイライトがディスプレイされる間に、ユーザインタフェース部２８０を介して上側方向のユーザインタラクションが４回感知された場合、制御部２９０は、図１７に示すように、複数のサムネイルを下方に移動させて、放送チャネル「１５−１」に対応するサムネイル画面１７１０にハイライトをディスプレイするように、ディスプレイ部２３０を制御できる。
そして、複数のサムネイル画面のうち、いずれか一つにハイライトが表示される間に予め設定されたユーザインタラクションが感知された場合、制御部２９０は、ハイライトの表示されたサムネイル画面に対応するコンテンツを拡大してメインスクリーンに再生するように、ディスプレイ部２３０を制御できる。
具体的に、図１７に示すように、放送チャネル「１５−２」に対応するサムネイル画面１７１０にハイライトが表示される間、リモコンのＥｎｔｅｒボタンが選択された場合、制御部２９０は、ハイライトの表示されたサムネイル画面に対応するコンテンツである放送チャネル「１５−２」のプログラムを拡大して、図１８に示すように、現在メインスクリーンに設定された第１サブスクリーン５１０に再生するように、ディスプレイ部２３０を制御できる。
上述のように、複数のスクリーンがディスプレイされる間にスクロールインタラクションを介してメインスクリーンに再生されることができる複数のコンテンツに対応する複数のサムネイル画面を提供することによって、ユーザは、さらに興味深くて直観的にメインスクリーンにディスプレイするコンテンツを選択できるようにする。
一方、上述の実施の形態では、スクロールインタラクションを介してメインスクリーンにディスプレイされるコンテンツとして放送コンテンツを選択すると説明したが、これは、一実施の形態に過ぎず、スクロールインタラクションを介してメインスクリーンにディスプレイされる他のコンテンツを選択できる。例えば、スクロールインタラクションを介してメインスクリーンにディスプレイされるコンテンツとしてＶＯＤコンテンツ、写真コンテンツ、音楽コンテンツ、アプリケーションコンテンツ、ウェブページコンテンツ、ＳＮＳコンテンツなどを含むことができる。
本発明の他の実施の形態において、ディスプレイ画面に複数のオブジェクトだけがディスプレイされ、ディスプレイされた複数のオブジェクトのうち、いずれか一つが選択された後、予め設定されたユーザインタラクションが入力された場合、制御部２９０は、選択されたオブジェクトに対応するコンテンツを予め設定されたユーザインタラクションに応じて、複数のスクリーンのうち、いずれか一つにディスプレイするように、ディスプレイ部２３０を制御できる。
具体的に、図９のように、ディスプレイ画面の上段領域に複数のスクリーン５１０、５２０、５３０がディスプレイされ、ディスプレイ画面の下段領域に複数のキュービックＧＵＩがディスプレイされる間に、予め設定されたユーザインタラクション（例えば、リモコンに備えられた予め設定されたボタンを選択するユーザ命令など）が入力された場合、制御部２９０は、ディスプレイ画面の上段領域にディスプレイされた複数のスクリーン５１０、５２０、５３０をディスプレイ画面から除去し、図１９に示すように、ディスプレイ画面の下段領域にディスプレイされた複数のオブジェクトを含む複数のルームを拡大してディスプレイするように、ディスプレイ部２３０を制御できる。
そして、図１９に示すように、複数のルーム５４０ないし５８０がディスプレイされた状態で予め設定されたユーザインタラクション（例えば、リモコンに備えられたメニュー進入ボタンを選択するユーザ命令など）が入力された場合、制御部２９０は、図２０のように、複数のルーム５４０ないし５８０のうち、中間領域にディスプレイされた第２ルーム５５０を拡大してディスプレイするように、ディスプレイ部２３０を制御できる。
このとき、制御部２９０は、図２０に示すように、第２ルーム５５０に複数のキュービックＧＵＩ５５１ないし５５９をディスプレイするように、ディスプレイ部２３０を制御できる。キュービックＧＵＩは、各々放送チャネルに対応し、キュービックＧＵＩの一面には、コンテンツ提供者（Ｃｏｎｔｅｎｔ ｐｒｏｖｉｄｅｒ：ＣＰ）である放送チャネル名に対する情報がディスプレイされることができる。しかしながら、キュービックＧＵＩが放送チャネルに対応することは、一実施の形態に過ぎず、他のコンテンツに対応できる。例えば、キュービックＧＵＩは、ＶＯＤコンテンツ、ＳＮＳコンテンツ、アプリケーションコンテンツ、音楽コンテンツ、写真コンテンツなどのような多様なコンテンツに対応できる。一方、ハイライトの表示されたキュービックＧＵＩは、ハイライトの表示されないキュービックＧＵＩと異なるように表示できる。例えば、制御部２９０は、図２０に示すように、ハイライトの表示されたキュービックＧＵＩ５５５は、サムネイル情報及びチャネル名を共にディスプレイするのに対し、ハイライトの表示されないキュービックＧＵＩ５５１−５５４、５５６−５５９は、チャネル名だけをディスプレイできる。
また、制御部２９０は、上述のように、キュービックＧＵＩに対応するコンテンツに対するユーザコンテキスト及びコンテンツ属性のうち、少なくとも一つに基づいて、キュービックＧＵＩの大きさ及び配列状態のうち、少なくとも一つを決定してディスプレイするように、ディスプレイ部２３０を制御できる。
ここで、コンテンツに対するユーザコンテキストとは、コンテンツと関連した使用履歴、使用状態、使用環境などを意味でき、コンテンツ属性とは、コンテンツのコンテンツ内容、コンテンツ生成時間、アップデート時間、放送時間、再生時間、出演者等、コンテンツ自体が有する他のコンテンツと区別可能な多様な特徴になることができる。
具体的に、制御部２９０は、ユーザが頻繁に視聴するコンテンツに対応するキュービックＧＵＩを他のキュービックＧＵＩより大きくディスプレイでき、中間領域に配置でき、デプスを小さくすることができる。また、制御部２９０は、最も最近にアップデートされたコンテンツに対応するキュービックＧＵＩを他のキュービックＧＵＩより大きくディスプレイでき、中間領域に配置でき、デプスを小さくすることができる。例えば、制御部２９０は、放送チャネルのうち、ユーザが頻繁に視聴するチャネルである「ＦＯＸ ＣＲＩＭＥ」チャネルに対応するキュービックＧＵＩ５５５を最も大きく、中間に位置し、デプスが小さくなるようディスプレイできる。
そして、複数のキュービックＧＵＩのうち、いずれか一つにハイライトがディスプレイされた状態で、ユーザの予め設定されたインタラクションが入力された場合、制御部２９０は、ディスプレイ画面に複数のスクリーンをディスプレイし、ハイライトの表示されたキュービックＧＵＩに対応するコンテンツをユーザインタラクションに応じて、複数のスクリーンのうち、いずれか一つに再生するように、ディスプレイ部２３０を制御できる。具体的に、図２０に示すように、「ＦＯＸ ＣＲＩＭＥ」チャネルに対応するキュービックＧＵＩ５５５にハイライトがディスプレイされた状態で、リモコンに備えられた第２サブスクリーンと対応する第３ボタンが選択された場合、制御部２９０は、図２１に示すように、ディスプレイ画面上にメインスクリーン２１２０及び複数のサブスクリーン２１１０、２１３０をディスプレイし、図２２に示すように、メインスクリーン２１２０及び複数のサブスクリーン２１１０、２１３０を左に移動させ、図２２に示すように、第２サブスクリーンがディスプレイ画面で占める比率が最も高くなるようにディスプレイ部２３０を制御できる。このとき、制御部２００は、ハイライトの表示されたチャネルに対応するコンテンツである「ＦＯＸ ＣＲＩＭＥ」において現在放送中であるプログラムを第２サブスクリーン２１３０で再生するように、ディスプレイ部２３０を制御できる。
すなわち、上述のように、ディスプレイ画面で複数のオブジェクトだけがディスプレイされる状態で、リモコンに備えられた予め設定されたボタンを選択するユーザ命令により、ユーザは、複数のスクリーンのうち、いずれか一つに自身が望むコンテンツを再生するようにすることができる。
上述の実施の形態では、オブジェクトに対応するコンテンツがディスプレイされるスクリーンを選択するユーザインタラクションとしてリモコンに備えられた予め設定されたボタンを選択するユーザ命令を入力することを説明したが、これは、一実施の形態に過ぎず、他のユーザインタラクションによりコンテンツがディスプレイされるスクリーンを選択できる。例えば、制御部２９０は、複数のオブジェクトのうち、いずれか一つにハイライトが表示された状態で、ユーザインタフェース部２８０のマイク２８２を介して入力されたユーザ音声（例えば、「メインにディスプレイしなさい」、「中間にディスプレイしてくれ」等）を利用して、オブジェクトに対応するコンテンツがディスプレイされるスクリーンを選択できる。
以下、図２３及び図２４を参照して、本発明の一実施の形態にかかる、ディスプレイ装置１００のＵＩ提供方法について説明する。
図２３は、本発明の一実施の形態にかかる、複数のスクリーンのうち、いずれか一つにディスプレイされるコンテンツを選択するためのディスプレイ装置１００のＵＩ提供方法について説明する。
まず、ディスプレイ装置１００は、ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイする（Ｓ２３１０）。具体的に、ディスプレイ装置１００は、ディスプレイ画面の上段領域の中間部のメインスクリーンをディスプレイし、メインスクリーンの左側及び右側に第１サブスクリーン及び第２サブスクリーンをディスプレイできる。また、ディスプレイ装置１００は、ディスプレイ画面の下段領域にカテゴリー化されたグループに応じて、予め指定されたルーム上にディスプレイされる多面体形態の複数のオブジェクトをディスプレイできる。このとき、複数のオブジェクトは、立方体形態のキュービックＧＵＩにより具現化されることができる。
そして、ディスプレイ装置１００は、ユーザ命令に従って、複数のオブジェクトのうち、いずれか一つを選択する（Ｓ２３２０）。具体的に、ディスプレイ装置１００は、ユーザ命令に従って、複数のオブジェクトのうち、いずれか一つにハイライトを位置させて選択できる。
ディスプレイ装置１００は、予め設定されたユーザインタラクションが入力されたかどうかを判断する（Ｓ２３３０）。このとき、予め設定されたユーザインタラクションは、リモコンに備えられた複数のスクリーンに対応するボタンのうち、いずれか一つを選択するユーザインタラクションでありうる。しかしながら、これは、一実施の形態に過ぎず、スクリーンに対応するユーザ音声を入力するユーザインタラクション、マウス、ハンドモーション、ポインティングデバイスなどを利用してポインタを制御できるユーザインタラクションなどを利用して、コンテンツがディスプレイされるスクリーンを選択できる。
予め設定されたユーザインタラクションが入力された場合（Ｓ２３３０−Ｙ）、ディスプレイ装置１００は、予め設定されたユーザインタラクションに応じて選択されたオブジェクトに対応するコンテンツを、複数のスクリーンのうち、いずれか一つにディスプレイする（Ｓ２３４０）。例えば、複数のキュービックオブジェクトのうち、いずれか一つにハイライトが表示される間に、リモコンに備えられた複数のスクリーンと各々対応する第１ないし第３ボタンのうち、いずれか一つが選択されるユーザインタラクションが入力される場合、ディスプレイ装置１００は、ハイライトの表示されたオブジェクトと対応するコンテンツを複数のスクリーンのうち、選択されたボタンに対応するスクリーンで再生できる。さらに他の実施の形態として、ユーザは、音声命令を利用して選択されたキュービックＧＵＩに対応するコンテンツがディスプレイされるスクリーンを選択できる。具体的に、複数のキュービックＧＵＩのうち、第１放送チャネルに対応する第１キュービックＧＵＩにハイライトが表示される間に、ユーザインタフェース部１２０のうち、マイク（図示せず）を介して「メイン」というユーザ音声が入力された場合、ディスプレイ装置１００は、メインスクリーンに第１キュービックＧＵＩに対応する第１放送チャネルの放送コンテンツをディスプレイできる。さらに他の例として、ユーザは、マウス、ポインティングデバイス、ハンドモーションなどにより制御されるポインタを利用して、選択されたキュービックＧＵＩに対応するコンテンツがディスプレイされるスクリーンを選択できる。具体的に、複数のキュービックＧＵＩのうち、第２放送チャネルに対応する第２キュービックＧＵＩにポインタが位置する間に、マウスのクリック後、第２キュービックＧＵＩを第１サブスクリーンにドラッグした場合、ディスプレイ装置１００は、第１サブスクリーンに第２キュービックＧＵＩに対応する第２放送チャネルをディスプレイできる。
図２４は、本発明の一実施の形態にかかる、リモコンの予め設定されたボタンを利用して、コンテンツがディスプレイされるスクリーンを選択する方法について説明する。
まず、ディスプレイ装置１００は、ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイする（Ｓ２４１０）。具体的に、ディスプレイ装置１００は、ディスプレイ画面の上段領域の中間部のメインスクリーンをディスプレイし、メインスクリーンの左側及び右側に第１サブスクリーン及び第２サブスクリーンをディスプレイできる。また、ディスプレイ装置１００は、ディスプレイ画面の下段領域にカテゴリー化されたグループに応じて、予め指定されたルーム上にディスプレイされる多面体形態の複数のオブジェクトをディスプレイできる。このとき、複数のオブジェクトは、立方体形態のキュービックＧＵＩにより具現化されることができる。
ディスプレイ装置１００は、ユーザ命令に従って複数のオブジェクトのうち、いずれか一つにハイライトを表示する（Ｓ２４２０）。具体的に、ディスプレイ装置１００は、リモコンに備えられた四方向キーを選択するユーザインタラクションまたはＯＪセンサを擦るユーザインタラクションを利用して、複数のオブジェクトのうち、いずれか一つにハイライトを表示できる。
そして、ディスプレイ装置１００は、リモコンの予め設定されたボタンが選択されたかどうかを判断する（Ｓ２４３０）。このとき、リモコンの予め設定されたボタンは、ディスプレイ装置１００にディスプレイされた複数のスクリーンと各々対応し、複数のスクリーンの形状と同一でありうる。
リモコンの予め設定されたボタンが選択された場合（Ｓ２４３０−Ｙ）、ディスプレイ装置１００は、ハイライトの表示されたオブジェクトに対応するコンテンツを選択されたボタンに対応するスクリーンにディスプレイする（Ｓ２４４０）。具体的に、複数のキュービックＧＵＩのうち、第１放送チャネルに対応する第１キュービックＧＵＩにハイライトが表示される間に、第１ボタンが選択されるユーザインタラクションが入力される場合、ディスプレイ装置１００は、第１ボタンに対応するメインスクリーンに第１キュービックＧＵＩに対応する第１放送チャネルの放送コンテンツをディスプレイできる。複数のキュービックＧＵＩのうち、第２放送チャネルに対応する第２キュービックＧＵＩにハイライトが表示される間に、第２ボタンが選択されるユーザインタラクションが入力される場合、ディスプレイ装置１００は、第２ボタンに対応する第１サブスクリーンに第２キュービックＧＵＩに対応する第２放送チャネルの放送コンテンツをディスプレイできる。複数のキュービックＧＵＩのうち、第１ＳＮＳコンテンツに対応する第３キュービックＧＵＩにハイライトが表示される間に、第３ボタンが選択されるユーザインタラクションが入力される場合、ディスプレイ装置１００は、第３ボタンに対応する第２サブスクリーンに第３キュービックＧＵＩに対応するＳＮＳコンテンツをディスプレイできる。
上述のような多様な実施の形態により、ユーザは、さらに容易でかつ直観的に自身が望むコンテンツを自身が望むスクリーンにディスプレイできるようになる。
一方、以上のような多様な実施の形態にかかる制御方法を行うためのプログラムコードは、非一時的読み取り可能媒体（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）に格納されることができる。非一時的読み取り可能媒体とは、レジスタ、キャッシュ、メモリなどのように短い瞬間の間にデータを格納する媒体でなく、半永久的にデータを格納し、機器により読み取り（ｒｅａｄｉｎｇ）が可能な媒体を意味する。具体的には、上述の多様なアプリケーションまたはプログラムは、ＣＤ、ＤＶＤ、ハードディスク、ブルーレイディスク、ＵＳＢ、メモリーカード、ＲＯＭなどのような非一時的読み取り可能媒体に格納されて提供されることができる。
以上では、本発明の実施の形態について図示し説明したが、本発明は、上述した特定の実施の形態に限定されるものではなく、請求の範囲で請求する本発明の要旨から逸脱せずに当該発明が属する技術分野における通常の知識を有した者によって多様な変形実施が可能なことはもちろんで、このような変形実施は、本発明の技術的思想や展望から個別的に理解されてはならない。
５０ 遠隔制御装置
１００ ディスプレイ装置
１１０ ディスプレイ部
１２０ ユーザインタフェース部
１３０ 制御部
１３６ バス
２００ ディスプレイ装置
２１０ 映像受信部
２１０ ディスプレイ部
２２０ 通信部
２３０ ディスプレイ部
２４０ オーディオ出力部
２５０ 格納部
２６０ オーディオ処理部
２７０ ビデオ処理部
２８０ ユーザインタフェース部
２８１ カメラ
２８２ マイク
２８３ リモコン信号受信部
２９０ 制御部
２９１ ＲＡＭ
２９２ ＲＯＭ
２９３ グラフィック処理部
２９４ メインＣＰＵ
５１０、５２０、５３０ スクリーン

Claims (15)

  1. ディスプレイ装置であって、
    ディスプレイ画面を有するディスプレイ部と、
    予め設定されたユーザインタラクションを感知するユーザインタフェース部と、
    前記ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、前記ディスプレイ画面の第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイし、
    前記複数のオブジェクトのうち、いずれか一つが選択された状態で前記ユーザインタフェース部を介して前記予め設定されたユーザインタラクション（ｉｎｔｅｒａｃｔｉｏｎ）が感知されると、前記予め設定されたユーザインタラクションに応じて、前記選択されたオブジェクトに対応するコンテンツを前記複数のスクリーンのうち、いずれか一つに再生するように前記ディスプレイ部を制御する制御部とを備えるディスプレイ装置。
  2. 前記制御部は、
    前記ディスプレイ画面の第１領域にメインスクリーン、前記メインスクリーンの左側及び右側に台形形態の第１サブスクリーン及び第２サブスクリーンをディスプレイすることをさらに含むことを特徴とする請求項１に記載のディスプレイ装置。
  3. 前記制御部は、
    前記複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、前記予め設定されたユーザインタラクションが感知されると、前記予め設定されたユーザインタラクションに応じて、前記ハイライトの表示されたオブジェクトに対応するコンテンツを前記複数のスクリーンのうち、いずれか一つに再生するように前記ディスプレイ部を制御することをさらに含むことを特徴とする請求項２に記載のディスプレイ装置。
  4. 第１ボタンないし第３ボタンを有するリモコンをさらに備え、
    前記予め設定されたユーザインタラクションがリモコンに備えられた前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンとそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つを選択するユーザインタラクションである場合、
    前記複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、前記第１ないし第３ボタンのうち、いずれか一つが選択されるユーザインタラクションが入力される場合、
    前記制御部は、前記ハイライトの表示されたオブジェクトと対応するコンテンツを前記選択されたボタンに対応するスクリーンで再生するように、ハイライトが表示された前記オブジェクトをディスプレイすることを特徴とする請求項３に記載のディスプレイ装置。
  5. 前記リモコンに備えられた第１ないし第３ボタンは、前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンの形状と対応することを特徴とする請求項４に記載のディスプレイ装置。
  6. 前記制御部は、
    前記ディスプレイ画面の第２領域にディスプレイされた複数のオブジェクトをグループに応じて異なる空間にディスプレイし、
    前記複数のオブジェクトは、各々キュービック形態のオブジェクトであることを特徴とする請求項１に記載のディスプレイ装置。
  7. 前記制御部は、
    前記ユーザインタフェース部を介して予め設定された第１ユーザインタラクションが入力されると、前記ディスプレイ画面の第２領域にディスプレイされた前記複数のオブジェクトを前記ディスプレイ画面から除去し、前記ディスプレイ画面の第１領域にディスプレイされた前記複数のスクリーンを拡大してディスプレイするように、前記ディスプレイ部を制御することを特徴とする請求項２に記載のディスプレイ装置。
  8. 前記制御部は、
    前記複数のスクリーンが拡大されてディスプレイされる間に、前記ユーザインタフェース部を介して予め設定された第２ユーザインタラクションが入力されると、前記複数のスクリーンのうち、前記メインスクリーンの大きさを縮小し、前記縮小されたメインスクリーンに基づいて予め設定された方向に複数のコンテンツに対応する複数のサムネイル画面をディスプレイし、
    前記複数のコンテンツに対応するサムネイル画面のうち、いずれか一つが選択された場合、前記選択されたサムネイル画面に対応するコンテンツを前記メインスクリーンに再生するように前記ディスプレイ部を制御することを特徴とする請求項７に記載のディスプレイ装置。
  9. 前記制御部は、
    前記ユーザインタフェース部を介して予め設定された第３ユーザインタラクションが入力されると、前記ディスプレイ画面の第１領域にディスプレイされた前記複数のスクリーンを前記ディスプレイ画面から除去し、前記ディスプレイ画面の第２領域にディスプレイされた前記複数のオブジェクトを拡大してディスプレイするよう、前記ディスプレイ部を制御することを特徴とする請求項８に記載のディスプレイ装置。
  10. 前記制御部は、
    前記拡大された複数のオブジェクトのうち、いずれか一つが選択された状態でリモコンに備えられた前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンとそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つが選択されると、前記拡大された複数のオブジェクトをディスプレイ画面から除去し、前記複数のスクリーンを前記ディスプレイ画面にディスプレイし、前記選択されたオブジェクトと対応するコンテンツを前記選択されたボタンに対応するスクリーンで再生するように前記ディスプレイ部を制御することを特徴とする請求項９に記載のディスプレイ装置。
  11. ディスプレイ装置のＵＩ提供方法であって、
    ディスプレイ画面の第１領域に複数のスクリーンをディスプレイし、前記ディスプレイ画面の第２領域に複数のグループにカテゴリー化された複数のオブジェクトをディスプレイするステップと、
    前記複数のオブジェクトのうち、いずれか一つが選択された状態で予め設定されたユーザインタラクションが感知されると、前記予め設定されたユーザインタラクションに応じて、前記選択されたオブジェクトに対応するコンテンツを前記複数のスクリーンのうち、いずれか一つに再生するステップとを含むＵＩ提供方法。
  12. 前記ディスプレイするステップは、
    前記ディスプレイ画面の第１領域にメインスクリーン、前記メインスクリーンの左側及び右側に台形形態の第１サブスクリーン及び第２サブスクリーンをディスプレイすることを特徴とする請求項１１に記載のＵＩ提供方法。
  13. 前記再生するステップは、
    前記複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、前記予め設定されたユーザインタラクションが感知されると、前記予め設定されたユーザインタラクションに応じて、前記ハイライトの表示されたオブジェクトに対応するコンテンツを前記複数のスクリーンのうち、いずれか一つに再生することを特徴とする請求項１２に記載のＵＩ提供方法。
  14. 前記再生するステップは、
    前記予め設定されたユーザインタラクションがリモコンに備えられた前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンとそれぞれ対応する第１ないし第３ボタンのうち、いずれか一つを選択するユーザインタラクションである場合、
    前記複数のオブジェクトのうち、いずれか一つにハイライトが表示される間に、前記第１ないし第３ボタンのうち、いずれか一つが選択されるユーザインタラクションが入力される場合、前記ハイライトの表示されたオブジェクトと対応するコンテンツを前記選択されたボタンに対応するスクリーンに再生することを特徴とする請求項１３に記載のＵＩ提供方法。
  15. 前記リモコンに備えられた第１ないし第３ボタンは、前記メインスクリーン、前記第１サブスクリーン及び前記第２サブスクリーンの形状と対応することを特徴とする請求項１１に記載のＵＩ提供方法。
JP2016512846A 2013-05-10 2014-05-12 ディスプレイ装置及びそのｕｉ提供方法 Pending JP2016528575A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2013-0053433 2013-05-10
KR1020130053433A KR101803311B1 (ko) 2013-05-10 2013-05-10 디스플레이 장치 및 이의 ui 제공 방법
PCT/KR2014/004223 WO2014182140A1 (en) 2013-05-10 2014-05-12 Display apparatus and method of providing a user interface thereof

Publications (1)

Publication Number Publication Date
JP2016528575A true JP2016528575A (ja) 2016-09-15

Family

ID=51864371

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016512846A Pending JP2016528575A (ja) 2013-05-10 2014-05-12 ディスプレイ装置及びそのｕｉ提供方法

Country Status (6)

Country Link
US (1) US20140333422A1 (ja)
EP (1) EP2962458A4 (ja)
JP (1) JP2016528575A (ja)
KR (1) KR101803311B1 (ja)
CN (1) CN105191328A (ja)
WO (1) WO2014182140A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160060846A (ko) * 2014-11-20 2016-05-31 삼성전자주식회사 디스플레이 장치 및 디스플레이 방법
WO2016182133A1 (ko) * 2015-05-14 2016-11-17 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
KR102444181B1 (ko) 2015-05-14 2022-09-19 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
US10718162B2 (en) 2015-10-12 2020-07-21 Itrec B.V. Servicing a top drive device of a wellbore drilling installation
US10080051B1 (en) * 2017-10-25 2018-09-18 TCL Research America Inc. Method and system for immersive information presentation
CN110858224A (zh) * 2018-08-15 2020-03-03 深圳富泰宏精密工业有限公司 数字内容管理系统及方法、电子装置
US11301907B2 (en) 2018-11-14 2022-04-12 At&T Intellectual Property I, L.P. Dynamic image service
CN109582266A (zh) * 2018-11-30 2019-04-05 维沃移动通信有限公司 一种显示屏操作方法及终端设备
CN114363457A (zh) 2020-09-30 2022-04-15 华为技术有限公司 用于调整位置信息的方法、设备和系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000112976A (ja) * 1998-10-05 2000-04-21 Hitachi Ltd マルチメディア情報機器の情報表示方法、情報処理方法、及び、情報処理装置
JP2000187542A (ja) * 1998-10-16 2000-07-04 Fuji Xerox Co Ltd プレゼンテ―ション資料のシナリオ生成装置およびシナリオ生成方法
WO2004051452A1 (ja) * 2002-12-03 2004-06-17 Fujitsu Limited デスクトップ表示方法，デスクトップ表示装置，デスクトップ表示プログラムおよび同プログラムを記録したコンピュータ読取可能な記録媒体
JP2010170516A (ja) * 2009-01-23 2010-08-05 Renbao Computer Industry Co Ltd 空間メニューを操作する方法および操作用空間メニューを有する電子装置
JP2011041220A (ja) * 2009-08-18 2011-02-24 Sony Corp 表示装置及び表示方法

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5880733A (en) * 1996-04-30 1999-03-09 Microsoft Corporation Display system and method for displaying windows of an operating system to provide a three-dimensional workspace for a computer system
US6211921B1 (en) * 1996-12-20 2001-04-03 Philips Electronics North America Corporation User interface for television
US6456334B1 (en) * 1999-06-29 2002-09-24 Ati International Srl Method and apparatus for displaying video in a data processing system
WO2001061996A1 (en) * 2000-02-16 2001-08-23 Isurftv Method and apparatus for controlling the movement or changing the appearance of a three-dimensional element
US6918132B2 (en) * 2001-06-14 2005-07-12 Hewlett-Packard Development Company, L.P. Dynamic interface method and system for displaying reduced-scale broadcasts
US20030142136A1 (en) * 2001-11-26 2003-07-31 Carter Braxton Page Three dimensional graphical user interface
JP3945445B2 (ja) * 2003-04-21 2007-07-18 ソニー株式会社 表示方法及び表示装置
JP4289025B2 (ja) * 2003-05-28 2009-07-01 ソニー株式会社 機器制御処理装置、表示処理装置、および方法、並びにコンピュータ・プログラム
KR100631763B1 (ko) * 2004-07-26 2006-10-09 삼성전자주식회사 3차원 모션 그래픽 사용자 인터페이스 및 이를 제공하는방법 및 장치
US7178111B2 (en) * 2004-08-03 2007-02-13 Microsoft Corporation Multi-planar three-dimensional user interface
KR100755684B1 (ko) * 2004-08-07 2007-09-05 삼성전자주식회사 3차원 모션 그래픽 사용자 인터페이스 및 이를 제공하는방법 및 장치
KR100643276B1 (ko) * 2004-08-07 2006-11-10 삼성전자주식회사 3차원 모션 그래픽 사용자 인터페이스 및 이를 제공하는방법 및 장치
JP4318047B2 (ja) * 2005-06-06 2009-08-19 ソニー株式会社 ３次元オブジェクト表示装置、３次元オブジェクト切替表示方法及び３次元オブジェクト表示プログラム
US20070011617A1 (en) * 2005-07-06 2007-01-11 Mitsunori Akagawa Three-dimensional graphical user interface
JP4982065B2 (ja) * 2005-09-26 2012-07-25 株式会社東芝 映像コンテンツ表示システム、映像コンテンツ表示方法及びそのプログラム
JP4774940B2 (ja) * 2005-11-14 2011-09-21 ソニー株式会社 情報処理装置、表示方法及びそのプログラム
US8549442B2 (en) * 2005-12-12 2013-10-01 Sony Computer Entertainment Inc. Voice and video control of interactive electronically simulated environment
US7552399B2 (en) * 2005-12-27 2009-06-23 International Business Machines Corporation Extensible icons with multiple drop zones
US20070245263A1 (en) * 2006-03-29 2007-10-18 Alltel Communications, Inc. Graphical user interface for wireless device
JP2007324636A (ja) * 2006-05-30 2007-12-13 Matsushita Electric Ind Co Ltd 放送受信装置
KR100817315B1 (ko) * 2006-09-25 2008-03-27 삼성전자주식회사 터치 스크린을 갖는 디지털 방송 수신용 휴대 단말기 및그의 ｐｉｐ 화면 제어 방법
US20090089692A1 (en) * 2007-09-28 2009-04-02 Morris Robert P Method And System For Presenting Information Relating To A Plurality Of Applications Using A Three Dimensional Object
US8271905B2 (en) * 2009-09-15 2012-09-18 International Business Machines Corporation Information presentation in virtual 3D
CN102598701B (zh) * 2009-11-16 2015-05-20 Lg电子株式会社 为网络电视提供内容信息
KR101714781B1 (ko) * 2009-11-17 2017-03-22 엘지전자 주식회사 컨텐츠 재생 방법
KR20110072133A (ko) * 2009-12-22 2011-06-29 엘지전자 주식회사 컨텐츠 표시 방법 및 그를 이용한 디스플레이 장치
KR20120011254A (ko) * 2010-07-28 2012-02-07 엘지전자 주식회사 영상표시장치의 동작 방법
KR101753141B1 (ko) * 2010-09-07 2017-07-04 삼성전자 주식회사 디스플레이장치 및 그 컨텐츠 표시방법
KR20120073892A (ko) * 2010-12-27 2012-07-05 삼성전자주식회사 디스플레이 장치 및 이에 적용되는 메뉴 표시방법
WO2012107892A2 (en) * 2011-02-09 2012-08-16 Primesense Ltd. Gaze detection in a 3d mapping environment
US8656430B2 (en) * 2011-07-14 2014-02-18 Vixs Systems, Inc. Processing system with electronic program guide authoring and methods for use therewith

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000112976A (ja) * 1998-10-05 2000-04-21 Hitachi Ltd マルチメディア情報機器の情報表示方法、情報処理方法、及び、情報処理装置
JP2000187542A (ja) * 1998-10-16 2000-07-04 Fuji Xerox Co Ltd プレゼンテ―ション資料のシナリオ生成装置およびシナリオ生成方法
WO2004051452A1 (ja) * 2002-12-03 2004-06-17 Fujitsu Limited デスクトップ表示方法，デスクトップ表示装置，デスクトップ表示プログラムおよび同プログラムを記録したコンピュータ読取可能な記録媒体
JP2010170516A (ja) * 2009-01-23 2010-08-05 Renbao Computer Industry Co Ltd 空間メニューを操作する方法および操作用空間メニューを有する電子装置
JP2011041220A (ja) * 2009-08-18 2011-02-24 Sony Corp 表示装置及び表示方法

Also Published As

Publication number Publication date
US20140333422A1 (en) 2014-11-13
KR20140133354A (ko) 2014-11-19
KR101803311B1 (ko) 2018-01-10
EP2962458A1 (en) 2016-01-06
EP2962458A4 (en) 2016-10-26
WO2014182140A1 (en) 2014-11-13
CN105191328A (zh) 2015-12-23

Similar Documents

Publication Publication Date Title
US9247303B2 (en) Display apparatus and user interface screen providing method thereof
US10379698B2 (en) Image display device and method of operating the same
KR101803311B1 (ko) 디스플레이 장치 및 이의 ui 제공 방법
US20140337773A1 (en) Display apparatus and display method for displaying a polyhedral graphical user interface
KR101799294B1 (ko) 디스플레이 장치 및 이의 제어 방법
US20140337792A1 (en) Display apparatus and user interface screen providing method thereof
US9628744B2 (en) Display apparatus and control method thereof
US9697702B2 (en) Display device and method for controlling the same
US20140337749A1 (en) Display apparatus and graphic user interface screen providing method thereof
US20150193036A1 (en) User terminal apparatus and control method thereof
US20140164990A1 (en) Display device and method of controlling the same
KR101934099B1 (ko) 컨텐츠 재생 장치, 그 ui 제공 방법, 네트워크 서버 및 그 제어 방법
KR101768974B1 (ko) 디스플레이 장치 및 그제어 방법
KR102132390B1 (ko) 사용자 단말 장치 및 이의 디스플레이 방법
JP2014120176A (ja) ディスプレイ装置及びそのｕｉ提供方法
KR20140141046A (ko) 디스플레이 장치 및 그 제어 방법
US20140333421A1 (en) Remote control device, display apparatus, and method for controlling the remote control device and the display apparatus thereof
KR20170125004A (ko) 디스플레이 장치 및 그 ui 화면 제공 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170327

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180115

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180813