KR20220023453A - 디스플레이장치 및 그 제어방법 - Google Patents

디스플레이장치 및 그 제어방법 Download PDF

Info

Publication number
KR20220023453A
KR20220023453A KR1020200105187A KR20200105187A KR20220023453A KR 20220023453 A KR20220023453 A KR 20220023453A KR 1020200105187 A KR1020200105187 A KR 1020200105187A KR 20200105187 A KR20200105187 A KR 20200105187A KR 20220023453 A KR20220023453 A KR 20220023453A
Authority
KR
South Korea
Prior art keywords
content
display device
display
user
processor
Prior art date
Application number
KR1020200105187A
Other languages
English (en)
Inventor
김석현
고희진
박효승
심아현
이채빈
이영아
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020200105187A priority Critical patent/KR20220023453A/ko
Priority to EP21858510.7A priority patent/EP4184925A4/en
Priority to PCT/KR2021/010424 priority patent/WO2022039423A1/ko
Priority to CN202180051286.4A priority patent/CN116158081A/zh
Publication of KR20220023453A publication Critical patent/KR20220023453A/ko
Priority to US18/112,316 priority patent/US20230199244A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204—Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668—Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4751—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for defining user accounts, e.g. accounts for children
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4755—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for defining user preferences, e.g. favourite actors or genre
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0686—Adjustment of display parameters with two or more screen areas displaying information with different brightness or colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Child & Adolescent Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

디스플레이장치는, 인터페이스에 연결 가능한 소스장치의 특성에 관한 복수의 카테고리 중에서 사용자입력부를 통한 사용자 입력에 의해 어느 하나의 카테고리를 선택하고, 인터페이스에 연결된 복수의 소스장치 중에서, 선택된 카테고리에 대응하는 2이상의 소스장치들로부터 인터페이스를 통해 컨텐츠를 각각 수신하고, 인터페이스를 통해 각각 수신되는 2이상의 컨텐츠에 기반한 다중 화면을 디스플레이에 표시하는 프로세서를 포함한다.

Description

디스플레이장치 및 그 제어방법 {DISPLAY APPARATUS AND CONTROL METHOD THEREOF}
본 발명은 소스장치로부터 컨텐트를 수신하여 영상을 표시 가능한 디스플레이장치 및 그 제어방법에 관한 것으로서, 상세하게는 다양한 종류의 소스장치가 복수 개 연결된 경우에, 복수의 소스장치 각각으로부터 수신되는 컨텐츠에 기반한 멀티뷰 화면을 표시하는 디스플레이장치 및 그 제어방법에 관한 것이다.
소정의 정보를 특정 프로세스에 따라서 연산 및 처리하기 위해, 연산을 위한 CPU, 칩셋, 메모리 등의 전자부품들을 기본적으로 포함하는 전자장치는, 처리 대상이 되는 정보 또는 사용 용도가 무엇인지에 따라서 다양한 종류로 구분될 수 있다. 예를 들면, 전자장치에는 범용의 정보를 처리하는 PC나 서버 등의 정보처리장치, 영상데이터를 처리하는 영상처리장치, 오디오를 처리하는 오디오장치, 가정 내 잡무를 수행하는 생활가전 등이 있다. 영상처리장치 중에서, 디스플레이장치는 영상을 표시하기 위한 디스플레이 패널(display panel)을 구비하는 장치이다.
기술의 발전, 사용자의 요구, 사용처의 다변화 등의 여러 요인에 따라서 디스플레이장치의 화면은 점점 대형화되고 있다. 화면을 대형화하는 한 가지 방안으로서, 디스플레이 패널을 일정한 크기로 모듈화시켜 제조하고, 복수의 디스플레이 모듈을 타일처럼 배치해서 대화면을 구현하는 모듈형 디스플레이장치가 제안되고 있다. 모듈형 디스플레이장치는 화면의 크기 및 형태를 사용자가 원하는 대로 조립할 수 있으므로, 어떠한 공간에도 조화롭게 설치될 수 있고, 그 적용범위가 점차 확대되고 있다. 일반 가정의 예를 들면, 거실의 한쪽 벽 전체를 화면이 차지하는 디스플레이장치가 구현될 수 있다.
이와 같이 디스플레이장치는, 대형화된 화면을 활용할 수 있는 다양한 표시 방식이 적용될 수 있다. 예를 들어 소형 화면을 가진 디스플레이장치는 표시 영상의 크기에 현실적인 제약이 있으므로, 화면 상에 하나의 컨텐트의 영상만을 표시하는 방식이나, 두 개의 컨텐트의 영상을 PIP(Picture-in-Picture)로 표시하는 방식이 일반적으로 적용된다. 그러나, 대형 화면을 가진 디스플레이장치는 복수의 컨텐트 영상을, PIP 또는 오버레이 방식이 아닌, 상호 겹치지 않도록 화면을 분할하여 함께 표시할 수 있다. 이러한 표시 방식을 편의상 멀티뷰(multi-view) 방식이라고 지칭한다.
디스플레이장치는 멀티뷰 화면을 표시함에 있어서, 화면 상에 표시하는 복수의 영상의 컨텐츠를 하나의 소스장치로부터 수신할 수도 있고, 복수의 소스장치로부터 각각 별개의 컨텐트를 수신할 수도 있다. 복수의 소스장치가 연결된 경우에, 디스플레이장치는 사용자의 수동 조작을 통해, 소스장치 및 컨텐트를 지정받아서 멀티뷰 화면을 표시하게 된다. 그러나, 이러한 방식은 사용자가 멀티뷰 화면에 표시하기 위한 컨텐츠를 일일이 선택해야 하므로, 사용상 불편함을 초래한다. 이러한 관점에서, 사용자의 의도를 반영하는 멀티뷰 화면을 표시하되 사용자의 입력을 최소화할 수 있는 디스플레이장치가 요구될 수 있다.
본 발명의 실시예에 따른 디스플레이장치는, 디스플레이와, 인터페이스와, 사용자입력부와, 상기 인터페이스에 연결 가능한 소스장치의 특성에 관한 복수의 카테고리 중에서 상기 사용자입력부를 통한 사용자 입력에 의해 어느 하나의 카테고리를 선택하고, 상기 인터페이스에 연결된 복수의 소스장치 중에서, 상기 선택된 카테고리에 대응하는 2이상의 소스장치들로부터 상기 인터페이스를 통해 컨텐츠를 각각 수신하고, 상기 인터페이스를 통해 각각 수신되는 상기 2이상의 컨텐츠에 기반한 다중 화면을 상기 디스플레이에 표시하는 프로세서를 포함한다.
또한, 상기 복수의 카테고리는, 상기 인터페이스에 연결 가능한 소스장치의 종류에 대응하게 마련될 수 있다.
또한, 상기 프로세서는, 상기 복수의 소스장치 각각으로부터 수신되는 기기 정보에 기초하여 각각의 상기 소스장치의 특성을 식별할 수 있다.
또한, 상기 프로세서는, 상기 복수의 카테고리 중 어느 하나를 선택 가능하게 마련된 UI를 표시할 수 있다.
또한, 상기 프로세서는, 상기 인터페이스에 단일 소스장치가 연결되어 있는 것으로 식별되는 것에 기초하여, 상기 UI를 표시하지 않을 수 있다.
또한, 상기 프로세서는, 상기 복수의 카테고리 중에서, 상기 디스플레이에 표시중인 컨텐트의 특성에 기초하여, 상기 UI에서 선택 가능하게 제공하기 위한 카테고리들을 식별할 수 있다.
또한, 상기 프로세서는, 상기 복수의 소스장치 중에서 사용자에 의해 선택된 상기 2이상의 소스장치들을 사용자 설정 옵션으로 저장하고, 상기 저장된 사용자 설정 옵션을 상기 복수의 카테고리 중 선택 가능한 어느 하나로 제공할 수 있다.
또한, 상기 프로세서는, 상기 식별된 카테고리에 대응하는 상기 2이상의 소스장치들로부터 각기 수신되는 컨텐츠 중에서, 사용자의 컨텐트 관련 랭킹이 높은 순서에 기초하여 상기 2이상의 컨텐츠를 식별할 수 있다.
또한, 상기 사용자의 컨텐트 관련 랭킹은 사용자의 컨텐트 선호도에 관련될 수 있다.
또한, 상기 프로세서는, 사용자의 컨텐트 사용 이력에 기초하여 상기 컨텐트 관련 랭킹을 식별할 수 있다.
또한, 상기 프로세서는, 상기 식별된 카테고리에 대응하는 상기 2이상의 소스장치들로부터 각기 수신되는 컨텐츠 중에서, 사용자의 시청등급에 기초하여 상기 2이상의 컨텐츠를 식별할 수 있다.
또한, 상기 프로세서는, 상기 디스플레이장치의 사용자 계정 정보에 기초하여 상기 시청등급을 식별할 수 있다.
또한, 상기 프로세서는, 상기 다중화면을 표시하는 형태에 관한 복수의 레이아웃 중에서, 상기 선택된 어느 하나의 카테고리에 대응하는 레이아웃을 식별하고, 상기 식별된 레이아웃에 기초하여 상기 다중화면을 표시할 수 있다.
또한, 상기 프로세서는, 상기 2이상의 컨텐츠에 기초하여 주영상 및 상기 주영상보다 크기가 작은 부영상을 포함하는 상기 다중화면을 표시할 수 있다.
또한, 상기 프로세서는, 상기 2이상의 컨텐츠 중에서 현재 표시중인 것으로 식별되는 컨텐트를 상기 주영상으로 표시할 수 있다.
또한, 상기 프로세서는, 상기 2이상의 컨텐츠 중에서 사용자의 컨텐트 관련 랭킹이 가장 높은 컨텐트를 상기 주영상으로 표시할 수 있다.
또한, 상기 프로세서는, 상기 2이상의 컨텐츠에 기초하여 동일한 크기의 복수의 영상을 포함하는 상기 다중화면을 표시할 수 있다.
또한, 상기 프로세서는, 상기 다중화면 내의 복수의 영상 중에서 오디오가 출력되고 있는 컨텐트의 영상 위에 마크를 표시할 수 있다.
또한, 본 발명의 실시예에 따른 디스플레이장치의 제어방법은, 인터페이스에 연결 가능한 소스장치의 특성에 관한 복수의 카테고리 중에서 사용자 입력에 의해 어느 하나의 카테고리를 선택하는 단계와, 상기 인터페이스에 연결된 복수의 소스장치 중에서, 상기 선택된 카테고리에 대응하는 2이상의 소스장치들로부터 컨텐츠를 각각 수신하는 단계와, 상기 각각 수신되는 상기 2이상의 컨텐츠에 기반한 다중 화면을 표시하는 단계를 포함한다.
도 1은 디스플레이장치의 예시도이다.
도 2는 디스플레이장치의 구성 블록도이다.
도 3은 디스플레이장치의 제어방법을 나타내는 플로우차트이다.
도 4는 복수의 소스장치를 각 특성에 대응하는 복수의 카테고리로 분류하는 예시도이다.
도 5는 디스플레이장치가 화면 상에 카테고리를 선택하도록 마련된 UI를 표시하는 모습의 예시도이다.
도 6은 디스플레이장치가 2이상의 소스장치로부터 수신되는 컨텐츠 중 멀티뷰를 위한 컨텐츠를 선택하는 원리를 나타내는 예시도이다.
도 7은 디스플레이장치가 주영상 및 부영상 형태의 레이아웃으로 표시하는 멀티뷰 화면의 예시도이다.
도 8은 디스플레이장치가 균등영상 형태의 레이아웃으로 표시하는 멀티뷰 화면의 예시도이다.
도 9는 디스플레이장치가 멀티뷰 화면의 레이아웃을 선택하는 예시의 플로우차트이다.
도 10, 도 11, 도 12 및 도 13은 두 게임콘솔이 연결된 디스플레이장치가 표시하는 멀티뷰 화면의 예시도이다.
도 14는 디스플레이장치에서 사용자가 사전 정의된 복수의 카테고리에서 소스장치들을 선택하는 경우를 나타내는 예시도이다.
도 15는 멀티뷰 화면의 선택을 위한 UI에 사용자 설정 아이콘이 포함되는 모습을 나타내는 예시도이다.
도 16은 디스플레이장치가 기 설정된 조건에 따라서 UI가 제공하는 카테고리의 선택 옵션을 변경하는 원리를 나타내는 예시도이다.
이하에서는 첨부도면을 참조하여 본 발명에 따른 실시예들에 관해 상세히 설명한다. 각 도면을 참조하여 설명하는 실시예들은 특별한 언급이 없는 한 상호 배타적인 구성이 아니며, 하나의 장치 내에서 복수 개의 실시예가 선택적으로 조합되어 구현될 수 있다. 이러한 복수의 실시예의 조합은 본 발명의 기술분야에서 숙련된 기술자가 본 발명의 사상을 구현함에 있어서 임의로 선택되어 적용될 수 있다.
만일, 실시예에서 제1구성요소, 제2구성요소 등과 같이 서수를 포함하는 용어가 있다면, 이러한 용어는 다양한 구성요소들을 설명하기 위해 사용되는 것이며, 용어는 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용되는 바, 이들 구성요소는 용어에 의해 그 의미가 한정되지 않는다. 실시예에서 사용하는 용어는 해당 실시예를 설명하기 위해 적용되는 것으로서, 본 발명의 사상을 한정하지 않는다.
또한, 본 명세서에서의 복수의 구성요소 중 "적어도 하나(at least one)"라는 표현이 나오는 경우에, 본 표현은 복수의 구성요소 전체 뿐만 아니라, 복수의 구성요소 중 나머지를 배제한 각 하나 혹은 이들의 조합 모두를 지칭한다.
도 1은 디스플레이장치의 예시도이다.
도 1에 도시된 바와 같이, 본 실시예에 따른 디스플레이장치(1)는 예를 들면 TV로 구현된다. 디스플레이장치(1)는 TV 이외에도 화면(201) 상에 영상을 표시 가능한 다양한 종류의 장치, 예를 들면 모니터, 디지털 사이니지(signage), 전자칠판, 전자액자 등으로 구현될 수 있다. 여기서, 디스플레이장치(1)는 복수의 사용자가 함께 시청하기에 충분할 정도로 대형 화면(201)을 가진다.
디스플레이장치(1)는 외부로부터 수신되거나 또는 자체 저장된 영상컨텐트에 기반한 영상신호를 처리하는 영상처리 디바이스(100)와, 영상처리 디바이스(100)로부터 출력되는 영상신호에 기초하여 영상을 표시하는 디스플레이부(200)를 포함한다. 본 실시예에서는 영상처리 디바이스(100)가 디스플레이부(200)와 분리된 미디어박스 형태인 경우의 디스플레이장치(1)에 관해 설명하지만, 디스플레이장치(1)의 구조는 이러한 예시로 한정되지 않는다. 디스플레이장치(1)는 영상처리 디바이스(100) 및 디스플레이부(200)가 하나의 프레임에 결합되거나, 하나의 하우징 내에 수용되는 형태의 단일 개체의 구조로 마련될 수도 있다.
영상처리 디바이스(100)는 PC, 셋탑박스, 게임콘솔(game console), 멀티미디어 재생기기 등과 같은 다양한 외부장치와 근거리 통신을 수행하거나, 서버와 광역 네트워크 통신을 수행하거나, RF 형태의 방송신호를 수신하는 등의 다양한 전송방식에 따라서 영상신호를 수신한다. 또는, 영상처리 디바이스(100)는 내부의 스토리지에 저장되어 있는 영상컨텐트 데이터를 획득할 수 있다. 영상처리 디바이스(100)는 획득한 영상신호에 디코딩, 스케일링 등과 같은 영상 관련 처리를 수행하여 디스플레이부(200)에 출력한다. 영상처리 디바이스(100) 및 디스플레이부(200) 사이의 신호 전송 방식은 유선 및 무선이 모두 가능하다.
디스플레이부(200)는 영상처리 디바이스(100)로부터의 영상신호를 영상으로 표시하기 위한 화면(201)을 형성한다. 디스플레이부(200)는 디스플레이 패널을 포함하는데, 디스플레이 패널의 구조에는 여러 가지 설계방식이 적용될 수 있다. 예를 들면, 디스플레이부(200)는 단일 디스플레이 패널 및 이에 광을 제공하는 백라이트를 포함할 수 있다. 또는, 디스플레이부(200)는 복수의 마이크로 LED 모듈이 타일 형태로 조합되어 대화면(201)을 형성하는 구조일 수도 있다.
이하, 디스플레이장치(1)의 구성에 관해 설명한다.
도 2는 디스플레이장치의 구성 블록도이다.
도 2에 도시된 바와 같이, 디스플레이장치(1)의 영상처리 디바이스(100)는 동작을 위해 다양한 하드웨어 요소들을 포함한다. 본 실시예에서의 디스플레이장치(1)는 영상처리 디바이스(100) 및 디스플레이부(200)가 분리되어 있는 구조이지만, 이는 하나의 예시에 불과함을 밝힌다. 설계 방식에 따라서는, 영상처리 디바이스(100) 및 디스플레이부(200)가 분리되지 않은 디스플레이장치(1)도 가능하다.
영상처리 디바이스(100)는 인터페이스부(110)를 포함할 수 있다. 인터페이스부(110)는 영상처리 디바이스(100)가 다양한 종류의 외부장치와 통신을 수행하고, 또한 데이터를 송수신하기 위한 인터페이스 회로를 포함한다. 인터페이스부(110)는 외부장치, 예를 들면 복수의 소스장치(10, 20, 30)로부터 영상컨텐트를 각각 수신하는 한편, 프로세서(150)에 의해 처리된 영상컨텐트 신호를 디스플레이부(200)에 출력할 수 있다.
인터페이스부(110)는 연결 방식에 따라서, 유선 통신연결을 위한 하나 이상의 유선인터페이스부(111)와, 무선 통신연결을 위한 하나 이상의 무선인터페이스부(112)를 포함한다.
유선인터페이스부(111)는 기 정의된 전송규격의 케이블이 접속되는 커넥터 또는 포트를 포함한다. 예를 들면, 유선인터페이스부(111)는 방송신호를 수신하도록 지상파 또는 위성방송 안테나에 접속되거나 케이블방송의 케이블이 접속되는 포트를 포함한다. 또는, 유선인터페이스부(111)는 다양한 영상처리장치와 접속하도록 HDMI, DP(DisplayPort), DVI, 컴포넌트, 컴포지트, S-Video, 썬더볼트(Thunderbolt) 등 다양한 유선전송규격의 케이블이 접속되는 포트를 포함한다. 또는, 유선인터페이스부(111)는 USB 기기와 접속하기 위한 USB 규격의 포트를 포함한다. 또는, 유선인터페이스부(111)는 광케이블이 접속되는 광포트를 포함한다. 또는, 유선인터페이스부(111)는 외부 마이크로폰이 접속되는 오디오 입력 포트와, 헤드셋, 이어폰, 외부 스피커 등이 접속되는 오디오 출력 포트를 포함한다. 또는, 유선인터페이스부(111)는 광역 네트워크에 접속하기 위해 게이트웨이, 라우터, 허브 등에 접속하는 이더넷 포트를 포함한다.
무선인터페이스부(112)는 다양한 종류의 무선통신 프로토콜에 대응하는 통신모듈, 통신칩 등의 구성요소들 중 적어도 하나 이상을 포함하는 양방향 통신회로를 포함한다. 예를 들면, 무선인터페이스부(112)는 와이파이(Wi-Fi) 방식에 따라서 AP(Access Point)와 무선통신을 수행하는 와이파이 통신칩과, 블루투스, Zigbee, Z-Wave, WirelessHD, WiGig, NFC 등의 무선통신을 수행하는 통신칩, IR 통신을 위한 IR 모듈, 모바일기기와 이동통신을 수행하는 이동통신칩 등을 포함한다.
영상처리 디바이스(100)는 사용자입력부(120)를 포함할 수 있다. 사용자입력부(120)는 사용자의 입력을 수행하기 위해 사용자가 조작할 수 있도록 마련된 다양한 종류의 사용자 입력 인터페이스 관련 회로를 포함한다. 사용자입력부(120)는 영상처리 디바이스(100)의 종류에 따라서 여러 가지 형태의 구성이 가능하며, 예를 들면 영상처리 디바이스(100)의 기계 버튼부 또는 전자 버튼부, 터치패드, 센서, 카메라, 디스플레이부(200)에 설치된 터치스크린, 영상처리 디바이스(100)와 분리된 리모트 컨트롤러 등이 있다.
영상처리 디바이스(100)는 저장부(130)를 포함할 수 있다. 저장부(130)는 디지털화된 데이터를 저장한다. 저장부(130)는 전원의 제공 유무와 무관하게 데이터를 보존할 수 있는 비휘발성 속성의 스토리지(storage)와, 프로세서(150)에 의해 처리되기 위한 데이터가 로딩되며 전원이 제공되지 않으면 데이터를 보존할 수 없는 휘발성 속성의 메모리(memory)를 포함한다. 스토리지에는 플래시메모리(flash-memory), HDD(hard-disc drive), SSD(solid-state drive) ROM(Read Only Memory) 등이 있으며, 메모리에는 버퍼(buffer), 램(RAM; Random Access Memory) 등이 있다.
영상처리 디바이스(100)는 스피커(140)를 포함할 수 있다. 스피커(140)는 프로세서(150)에 의해 처리되는 오디오신호를 음향으로 출력한다. 스피커(140)는 영상처리 디바이스(100)에 설치되거나, 디스플레이부(200)에 설치되거나, 또는 별도의 장치로 마련될 수도 있다. 스피커(140)가 별도의 장치로 마련되는 경우, 스피커(140)는 인터페이스부(110)를 통해 연결된다.
영상처리 디바이스(100)는 프로세서(150)를 포함할 수 있다. 프로세서(150)는 인쇄회로기판 상에 장착되는 CPU, 칩셋, 버퍼, 회로 등으로 구현되는 하나 이상의 하드웨어 프로세서를 포함하며, 설계 방식에 따라서는 SOC(system on chip)로 구현될 수도 있다. 프로세서(150)는 영상컨텐트를 영상으로 표시하기 위해 디멀티플렉서, 디코더, 스케일러, 오디오 DSP(Digital Signal Processor), 앰프 등의 다양한 프로세스에 대응하는 모듈들을 포함한다. 여기서, 이러한 모듈들 중 일부 또는 전체가 SOC로 구현될 수 있다. 예를 들면, 디멀티플렉서, 디코더, 스케일러 등 영상처리와 관련된 모듈이 영상처리 SOC로 구현되고, 오디오 DSP는 SOC와 별도의 칩셋으로 구현되는 것이 가능하다.
본 실시예에서는 인터페이스부(110)에 연결될 수 있는 유효한 소스장치(10, 20, 30, 40, 50, 60, 70)의 특성에 관한 복수의 카테고리가 사전에 정의된다. 프로세서(150)는 사전 정의된 복수의 카테고리 중에서 어느 하나가 선택되면, 선택된 카테고리에 기반하여 디스플레이부(200)에 멀티뷰 화면의 표시를 수행한다. 이하, 이러한 디스플레이장치(1)의 제어방법에 관해 구체적으로 설명한다.
도 3은 디스플레이장치의 제어방법을 나타내는 플로우차트이다.
도 2 및 도 3에 도시된 바와 같이, 본 실시예에 따른 디스플레이장치(1)의 동작은 프로세서(150)에 의해 수행된다.
310 단계에서 디스플레이장치(1)는 인터페이스부(110)에 연결 가능한 소스장치(10, 20, 30, 40, 50, 60, 70)의 특성에 관한 복수의 카테고리 중 어느 하나의 선택을 수신한다.
320 단계에서 디스플레이장치(1)는 인터페이스부(110)에 연결된 복수의 소스장치(10, 20, 30, 40, 50, 60, 70) 중에서, 선택된 카테고리에 대응하는 2이상의 소스장치(10, 20, 30, 40, 50, 60, 70)를 식별한다.
330 단계에서 디스플레이장치(1)는 식별된 2이상의 소스장치(10, 20, 30, 40, 50, 60, 70)로부터 인터페이스부(110)를 통해 컨텐츠를 각각 수신한다.
340 단계에서 디스플레이장치(1)는 수신되는 2이상의 컨텐츠에 기반한 다중 화면, 즉 멀티뷰 화면을 디스플레이부(200)에 표시한다.
이와 같이, 디스플레이장치(1)는 연결된 복수의 소스장치(10, 20, 30, 40, 50, 60, 70)를 인식하고, 특성 별로 동일한 카테고리에 포함되는 2이상의 소스장치(10, 20, 30, 40, 50, 60, 70)를 기반으로 멀티뷰 화면을 표시한다. 이로써, 디스플레이장치(1)는 현재 연결된 복수의 소스장치(10, 20, 30, 40, 50, 60, 70) 중에서 사용자의 의도에 맞는 특성의 2이상의 소스장치(10, 20, 30, 40, 50, 60, 70)를 용이하게 자동 선별하고, 사용자 의도에 맞는 컨텐츠에 기반한 멀티뷰 화면을 제공할 수 있다.
이하, 복수의 소스장치(10, 20, 30, 40, 50, 60, 70)를 특성에 대응하는 복수의 카테고리로 분류하는 예시에 관해 설명한다.
도 4는 복수의 소스장치를 각 특성에 대응하는 복수의 카테고리로 분류하는 예시도이다.
도 2 및 도 4에 도시된 바와 같이, 인터페이스부(110)에 연결 가능한 복수의 소스장치(10, 20, 30, 40, 50, 60, 70)가 있을 때, 소스장치(10, 20, 30, 40, 50, 60, 70)의 특성에 따라서 복수의 카테고리가 설정될 수 있다. 카테고리의 구분을 위한 소스장치(10, 20, 30, 40, 50, 60, 70)의 특성은 다양하게 정의될 수 있는 바, 예를 들면 소스장치(10, 20, 30, 40, 50, 60, 70)의 장치 종류(셋탑박스, 게임콘솔, A/V기기 등), 소스장치(10, 20, 30, 40, 50, 60, 70)의 전송 규격(HDMI, DP, 와이파이 등), 소스장치(10, 20, 30, 40, 50, 60, 70)가 컨텐트를 제공하는 방식(라이브 채널, VOD 등) 등이 있다. 이외에도, 다양한 특성이 정의될 수 있다. 본 실시예에서는, 이러한 다양한 특성 중에서 소스장치(10, 20, 30, 40, 50, 60, 70)의 장치 종류에 따른 카테고리를 구분하는 예시에 관해 설명한다.
복수의 소스장치(10, 20, 30, 40, 50, 60, 70)는 기기 종류에 따라서 복수의 카테고리(410, 420, 430)로 구분될 수 있다. 예를 들면, 셋탑박스에 관한 제1카테고리(410), 게임콘솔에 관한 제2카테고리(420), A/V 기기에 관한 제3카테고리(430)가 정의될 수 있으며, 복수의 소스장치(10, 20, 30, 40, 50, 60, 70)는 기기 종류에 따라서 어느 한 카테고리(410, 420, 430)에 대응한다. 예를 들어, 셋탑박스인 제1소스장치(10), 제2소스장치(20) 및 제3소스장치(30)는 제1카테고리(410)에 대응한다. 게임콘솔인 제4소스장치(40) 및 제5소스장치(50)는 제2카테고리(420)에 대응한다. A/V 기기인 제6소스장치(60) 및 제7소스장치(70)는 제3카테고리(430)에 대응한다. 본 실시예에서는 하나의 소스장치(10, 20, 30, 40, 50, 60, 70)가 하나의 카테고리(410, 420, 430)에만 대응하는 것으로 나타내고 있으나, 카테고리(410, 420, 430)의 설계 방식에 따라서는 하나의 소스장치(10, 20, 30, 40, 50, 60, 70)가 복수의 카테고리(410, 420, 430)에 대응할 수도 있다. 예를 들어 소정의 소스장치가 게임콘솔 및 A/V 기기의 역할을 모두 수행할 수 있다면, 해당 소스장치는 제2카테고리(420) 및 제3카테고리(430)에 공통으로 대응할 수도 있다.
디스플레이장치(1)는 이와 같이 복수의 카테고리로 분류되는 복수의 소스장치(10, 20, 30, 40, 50, 60, 70) 중에서, 현재 시점에서 어느 소스장치(10, 20, 30, 40, 50, 60, 70)가 연결되어 있는지를 식별한다. 디스플레이장치(1)는 현재 연결된 복수의 소스장치(10, 20, 30, 40, 50, 60, 70)로부터 기기 정보를 수신하고, 수신된 기기 정보에 기초하여 해당 소스장치(10, 20, 30, 40, 50, 60, 70)의 기기 ID 및 특성을 식별하고, 식별된 특성에 따라서 해당 소스장치(10, 20, 30, 40, 50, 60, 70)가 어느 카테고리(410, 420, 430)에 대응하는지를 식별할 수 있다. 예를 들어, 디스플레이장치(1)는 복수의 소스장치(10, 20, 30, 40, 50, 60, 70) 중에서 제1소스장치(10)가 연결되어 있고 제1소스장치(10)가 셋탑박스라고 식별되면, 제1소스장치(10)가 제1카테고리(410)에 대응한다고 식별한다.
이와 같은 각 특성에 대응하는 복수의 카테고리(410, 420, 430)에 관한 설정은, 테이블, 리스트 등의 다양한 형식으로 디스플레이장치(1)의 저장부(130)에 저장될 수 있다. 디스플레이장치(1)는 사전 설정된 복수의 카테고리(410, 420, 430) 중에서 멀티뷰 화면의 표시를 위해 어느 하나가 선택되면, 선택된 카테고리(410, 420, 430)에 대응하는 2이상의 소스장치(10, 20, 30, 40, 50, 60, 70)를 식별한다. 디스플레이장치(1)는 사용자가 소정 카테고리(410, 420, 430)를 선택하도록 마련된 UI를 표시할 수도 있고, 소정의 조건에 따라서 디스플레이장치(1)가 자동으로 선택할 수도 있다.
이하, 디스플레이장치(1)가 UI를 통해 사용자로부터 소정 카테고리(410, 420, 430)를 선택받는 예시에 관해 설명한다.
도 5는 디스플레이장치가 화면 상에 카테고리를 선택하도록 마련된 UI를 표시하는 모습의 예시도이다.
도 5에 도시된 바와 같이, 디스플레이장치(1)는 동작 중에 사전 설정된 사용자 입력이 감지되면, 사전 정의된 소스장치의 특성에 따른 복수의 카테고리를 선택하도록 마련된 UI(510)를 표시할 수 있다. 디스플레이장치(1)의 동작 중에 디스플레이장치(1)가 UI(510)를 표시할 수 있는 시점은 한정되어 있지 않다. 디스플레이장치(1)는 표시중인 일 컨텐트의 영상(520) 위에 UI(510)를 표시할 수 있다. 또는, 디스플레이장치(1)는 대기화면을 표시하는 중에, 대기화면 위에 UI(510)를 표시하거나 또는 대기화면을 대체하여 UI(510)를 표시할 수도 있다.
만일 디스플레이장치(1)에 단일 소스장치만이 연결되어 있을 경우에는 카테고리 별로 복수의 소스장치가 구분될 이유가 없다. 따라서, 디스플레이장치(1)는 사용자 입력이 수신되더라도 UI(510)를 표시하지 않는다.
디스플레이장치(1)는 UI(510)에 복수의 카테고리에 대응하는 옵션을 아이콘(511, 512, 513) 등의 오브젝트로 표시한다. 본 실시예에서는 UI(510)가 셋탑박스 카테고리에 대응하는 아이콘(511), 게임콘솔 카테고리에 대응하는 아이콘(512), A/V 기기에 대응하는 아이콘(513)을 포함하며, 카테고리의 설계 방식에 따라서 아이콘(511, 512, 513)의 내용은 달라질 수 있다. 본 실시예에서는 UI(510)가 아이콘(511, 512, 513)을 포함하는 경우에 관해 나타내었으나, 카테고리에 대응하는 오브젝트는 아이콘(511, 512, 513)에만 한정할 수 없다. 이러한 오브젝트는 텍스트, 썸네일 이미지 등 다양한 종류로 구현될 수 있다.
UI(510)에서 사용자가 복수의 아이콘(511, 512, 513) 중 어느 하나를 선택하면, 디스플레이장치(1)는 현재 연결된 복수의 소스장치 중에서, 선택된 아이콘(511, 512, 513)의 카테고리에 대응하는 2이상의 소스장치를 식별한다. 예를 들어, 셋탑박스 카테고리의 아이콘(511)이 선택되면, 디스플레이장치(1)는 현재 연결된 소스장치들 중에서 셋탑박스 카테고리에 대응하는 2이상의 소스장치들을 식별한다.
한편, 디스플레이장치(1)는 선택된 카테고리에 대응하는 2이상의 소스장치들로부터 컨텐츠를 제공받아, 이 컨텐츠에 기초하여 멀티뷰 화면을 표시한다. 여기서, 해당 소스장치들로부터 수신되는 컨텐츠의 수가 많은 경우에, 디스플레이장치(1)는 사전 정의된 기준에 따라서 멀티뷰로 표시하기 위한 컨텐츠를 선별한다. 이하, 이러한 실시예에 관해 설명한다.
도 6은 디스플레이장치가 2이상의 소스장치로부터 수신되는 컨텐츠 중 멀티뷰를 위한 컨텐츠를 선택하는 원리를 나타내는 예시도이다.
도 6에 도시된 바와 같이, 선택된 카테고리에 대응하는 2이상의 소스장치(10, 20, 30)가 식별되면, 디스플레이장치(1)는 이들 소스장치(10, 20, 30)로부터 각각 컨텐츠를 수신한다. 어느 하나의 소스장치(10, 20, 30)로부터 수신하는 컨텐트의 수는 단수일 수도 있고, 복수일 수도 있다. 예를 들어 멀티미디어 재생기기인 소스장치(10, 20, 30)는 현재 재생중인 컨텐트만을 출력하므로, 해당 소스장치(10, 20, 30)로부터 수신되는 컨텐트는 단수이다. 또는, 셋탑박스인 소스장치(10, 20, 30)는 다수의 방송채널을 포함하는 방송스트림을 출력하므로, 해당 소스장치(10, 20, 30)로부터 수신되는 컨텐트는 복수이다.
디스플레이장치(1)가 멀티뷰 화면(640)에서 표시하고자 하는 영상의 개수보다 2이상의 소스장치(10, 20, 30)로부터 수신되는 컨텐츠의 개수가 더 많으면, 디스플레이장치(1)는 수신되는 컨텐츠 중에서 멀티뷰 화면(640)에서 표시할 컨텐츠를 선별한다. 이 과정에서 기 설정된 컨텐츠 선별 기준(610)이 적용된다.
컨텐츠 선별 기준(610)은 설계 방식에 따라서 다양하게 지정될 수 있다. 예를 들면 소스장치(10, 20, 30)가 방송채널을 제공하는 셋탑박스인 경우에, 디스플레이장치(1)는 해당 디스플레이장치(1)의 사용자의 선호도가 높은 채널 또는 프로그램을 선별할 수 있다. 이 경우에, 디스플레이장치(1)는 사용자가 디스플레이장치(1)를 사용하여 컨텐츠를 시청한 사용 이력(620)에 기초하여, 채널 및 프로그램의 선호도 랭킹을 확인하고, 선호도 랭킹이 높은 순서대로 채널 및 프로그램을 선택할 수 있다. 선호도 랭킹은, 단일 채널 또는 프로그램의 선택 회수, 시청 시간 등 다양한 패러미터에 기반할 수 있다.
또는, 디스플레이장치(1)는 제공되는 컨텐츠 중에서 라이브 방송인 컨텐츠를 선별할 수 있다. 컨텐트는, 컨텐트제공자가 지정한 시간에 일방적으로 컨텐트를 디스플레이장치(1)에 송출하는 라이브 방식과, 사용자가 원하는 시간에 언제든지 컨텐트를 획득하여 시청할 수 있는 VOD 방식이 있다. 라이브 방식의 컨텐트는 제공되는 시점을 사용자가 놓치게 되면 시청할 수 없는 반면에, VOD 방식의 컨텐트는 사용자가 원하는 시간에 언제든지 시청할 수 있으므로, 이러한 점을 고려하여 라이브 방식의 컨텐트가 선별될 수 있다.
또는, 디스플레이장치(1)는 시청등급 제한 여부에 기반하여 컨텐츠를 선별할 수도 있다. 시청등급은 다양한 기준에 의해 결정되는 바, 예를 들면 성인과 미성년자의 구분, 유료컨텐트를 시청 가능한 등급 및 가능하지 않은 등급의 구분 등이 있다. 디스플레이장치(1)는 사용자 계정 정보(630)에 기록된 사용자의 시청등급에 기초하여 컨텐츠를 선별할 수 있다.
또는, 디스플레이장치(1)는 사전 설정된 사용자 권장 채널에 기반하여 컨텐츠를 선별할 수도 있다. 이러한 사용자 권장 채널은, 예를 들면 사용자의 특성(예를 들면, 나이, 성별, 국적, 거주지, 직업 등)에 맞게 컨텐트제공자가 추천하는 추천 채널일 수 있다. 디스플레이장치(1)는 사용자 계정 정보(630)에 기록된 사용자의 특성에 기초하여, 컨텐트제공자가 지정한 사용자 특성에 맞는 컨텐츠를 선별할 수 있다. 이상 설명한 여러 예시들 이외에도, 디스플레이장치(1)는 다양한 컨텐트 선별기준(610)에 따라서 컨텐츠를 선별할 수 있다.
디스플레이장치(1)의 프로세서(150, 도 2 참조)는 상기와 같이 컨텐트 선별기준(610)을 결정하는 동작 또는 컨텐트 선별기준(610)에 따라서 컨텐츠를 선별하는 동작을 수행하기 위한 데이터 분석, 처리, 및 결과 정보 생성 중 적어도 일부를 규칙 기반 또는 인공지능(Artificial Intelligence) 알고리즘으로서 기계학습, 신경망 네트워크(neural network), 또는 딥러닝 알고리즘 중 적어도 하나를 이용하여 수행할 수 있다. 여기서, AI는 상기한 동작만에 적용되는 것이 아니며, 본 발명의 실시예에서 설명하는 제반 동작(예를 들면 복수의 카테고리 중에서 어느 하나를 사용자의 입력 없이 자동으로 선택하는 등의 동작 등)에도 적용될 수 있다.
디스플레이장치(1)의 프로세서는 학습부 및 인식부의 기능을 함께 수행할 수 있다. 학습부는 학습된 신경망 네트워크를 생성하는 기능을 수행하고, 인식부는 학습된 신경망 네트워크를 이용하여 데이터를 인식(또는, 추론, 예측, 추정, 판단)하는 기능을 수행할 수 있다. 학습부는 신경망 네트워크를 생성하거나 갱신할 수 있다. 학습부는 신경망 네트워크를 생성하기 위해서 학습 데이터를 획득할 수 있다. 일 예로, 학습부는 학습 데이터를 디스플레이장치(1)의 저장부 또는 외부로부터 획득할 수 있다. 학습 데이터는, 신경망 네트워크의 학습을 위해 이용되는 데이터일 수 있으며, 상기한 동작을 수행한 데이터를 학습데이터로 이용하여 신경망 네트워크를 학습시킬 수 있다.
학습부는 학습 데이터를 이용하여 신경망 네트워크를 학습시키기 전에, 획득된 학습 데이터에 대하여 전처리 작업을 수행하거나, 또는 복수 개의 학습 데이터들 중에서 학습에 이용될 데이터를 선별할 수 있다. 일 예로, 학습부는 학습 데이터를 기 설정된 포맷으로 가공하거나, 필터링하거나, 또는 노이즈를 추가/제거하여 학습에 적절한 데이터의 형태로 가공할 수 있다. 학습부는 전처리된 학습 데이터를 이용하여 상기한 동작을 수행하도록 설정된 신경망 네트워크를 생성할 수 있다.
학습된 신경망 네트워크는, 복수의 신경망 네트워크(또는, 레이어)들로 구성될 수 있다. 복수의 신경망 네트워크의 노드들은 가중치를 가지며, 복수의 신경망 네트워크들은 일 신경망 네트워크의 출력 값이 다른 신경망 네트워크의 입력 값으로 이용되도록 서로 연결될 수 있다. 신경망 네트워크의 예로는, CNN (Convolutional Neural Network), DNN (Deep Neural Network), RNN (Recurrent Neural Network), RBM (Restricted Boltzmann Machine), DBN (Deep Belief Network), BRDNN (Bidirectional Recurrent Deep Neural Network) 및 심층 Q-네트워크 (Deep Q-Networks)과 같은 모델을 포함할 수 있다.
한편 인식부는 상기한 동작을 수행하기 위해, 타겟 데이터를 획득할 수 있다. 타겟 데이터는 디스플레이장치(1)의 저장부 또는 외부로부터 획득된 것일 수 있다. 타겟 데이터는 신경망 네트워크의 인식 대상이 되는 데이터일 수 있다. 인식부는 타겟 데이터를 학습된 신경망 네트워크에 적용하기 전에, 획득된 타겟 데이터에 대하여 전처리 작업을 수행하거나, 또는 복수 개의 타겟 데이터들 중에서 인식에 이용될 데이터를 선별할 수 있다. 일 예로, 인식부는 타겟 데이터를 기 설정된 포맷으로 가공하거나, 필터링 하거나, 또는 노이즈를 추가/제거하여 인식에 적절한 데이터의 형태로 가공할 수 있다. 인식부는 전처리된 타겟 데이터를 신경망 네트워크에 적용함으로써, 신경망 네트워크로부터 출력되는 출력값을 획득할 수 있다. 인식부는 출력값과 함께, 확률값 또는 신뢰도값을 획득할 수 있다.
디스플레이장치(1)는 컨텐트 선별기준(610)에 따라서 선택한 2이상의 컨텐츠에 기반하여 멀티뷰 화면(640)을 표시한다. 디스플레이장치(1)는 다양한 형태로 멀티뷰 화면(640)을 표시할 수 있는데, 이하 멀티뷰 화면(640)의 표시 예시에 관해 설명한다.
도 7은 디스플레이장치가 주영상 및 부영상 형태의 레이아웃으로 표시하는 멀티뷰 화면의 예시도이다.
도 7에 도시된 바와 같이, 디스플레이장치(1)는 식별된 2이상의 컨텐츠의 영상(710, 720)을 함께 표시하는 멀티뷰 화면(700)을 표시한다. 본 실시예에서는 4개의 컨텐츠가 식별되었으므로 멀티뷰 화면(700)은 4개의 영상(710, 720)을 포함한다. 그러나, 설계 방식에 따라서 식별되는 컨텐츠의 수는 2이상의 어떠한 자연수도 가능하므로, 멀티뷰 화면(700)이 포함하는 영상(710, 720)의 개수 또한 달라질 수 있다.
본 실시예에서의 멀티뷰 화면(700)의 레이아웃은 주영상 및 부영상 형태로서, 상대적으로 크기가 큰 하나의 주영상(710)과, 이보다 상대적으로 크기가 작은 복수의 부영상(720)을 포함한다. 식별된 복수의 컨텐트 중에서 주영상(710)으로 표시할 컨텐트를 선택하는 방법은 여러 가지가 가능하다. 예를 들어, 디스플레이장치(1)는 UI(510, 도 5 참조)가 표시될 때의 영상(520, 도 5 참조)의 컨텐트가 상기한 복수의 컨텐트로 식별되면, 해당 컨텐트를 주영상(710)으로 표시한다. 또는, 컨텐츠가 랭킹에 따라서 식별되는 경우에, 디스플레이장치(1)는 랭킹 1위의 컨텐트를 주영상(710)으로 표시할 수도 있다.
복수의 부영상(720)은 본 실시예에서와 같이 서로 크기가 동일할 수 있지만, 설계 방식에 따라서는 서로 크기가 상이할 수도 있다. 예를 들면, 복수의 부영상(720)의 크기는 식별된 컨텐츠의 랭킹에 대응할 수 있다. 사용자 선호도 랭킹의 1위부터 4위까지의 컨텐츠가 식별되었을 때에, 디스플레이장치(1)는 1위에 해당하는 컨텐트를 주영상(710)으로 표시하는 한편, 복수의 부영상(720) 내에서 2위의 해당하는 컨텐트 영상의 크기를 3위 또는 4위에 해당하는 컨텐트 영상의 크기보다 크도록 설정할 수 있다.
멀티뷰 화면(700)에서 주영상(710) 및 부영상(720)의 배치 위치는 설계 방식에 따라서 다양하게 지정될 수 있다. 멀티뷰 화면(700) 내에서, 디스플레이장치(1)는 본 실시예와 같이 주영상(710)을 좌측, 복수의 부영상(720)을 우측에 배치할 수 있다. 디스플레이장치(1)는 주영상(710)을 멀티뷰 화면(700)에서 우측, 상측, 좌측, 중앙 등 다양한 위치에 배치할 수 있으며, 주영상(710)의 위치에 따라서 부영상(720)을 적절히 배치할 수 있다.
디스플레이장치(1)는 멀티뷰 화면(700) 내의 모든 영상(710, 720)을 재생시킬 수도 있고, 또는 일부의 영상, 예를 들면 주영상(710)만을 재생시킬 수도 있다. 디스플레이장치(1)는 현재 재생중인 영상(710, 720)에 대해서는, 그 영상(710, 720) 위에 재생중임을 알리는 마크를 표시한다. 또한, 컨텐트가 오디오도 포함하는 경우에 모든 오디오를 재생시키는 것은 사용자에게 혼란을 주게 된다. 따라서, 디스플레이장치(1)는 멀티뷰 화면(700)에서 어느 하나의 영상, 예를 들면 주영상(710)의 컨텐트의 오디오를 재생시키며, 이를 알리는 마크(711)를 주영상(710) 위에 표시한다. 본 실시예에서 마크(711)는 사용자에게, 주영상(710)이 재생중임을 알리는 한편, 주영상(710)의 오디오가 출력되고 있음을 알리는 역할을 한다.
도 8은 디스플레이장치가 균등영상 형태의 레이아웃으로 표시하는 멀티뷰 화면의 예시도이다.
도 8에 도시된 바와 같이, 디스플레이장치(1)는 식별된 2이상의 컨텐츠의 영상(810)을 함께 표시하는 멀티뷰 화면(800)을 표시한다. 본 실시예에서의 멀티뷰 화면(800)은 모든 영상(810)의 크기가 동일한 균등영상 형태의 레이아웃을 가진다. 본 실시예에서는 멀티뷰 화면(800) 내 4개의 영상(810)이 있는데, 이들 영상(810)은 동일한 크기를 가지고 멀티뷰 화면(800) 내에서 상호 대칭되도록 배치된다. 물론, 멀티뷰 화면(800) 내에서의 영상(810)의 개수, 크기 및 위치는 예시일 뿐이므로, 한정되는 사항이 아니다.
디스플레이장치(1)는 멀티뷰 화면(800) 내의 복수의 영상(810) 중에서, 현재 재생중이거나 또는 현재 오디오가 출력되고 있는 영상(810) 위에, 재생중 또는 오디오 출력중임을 알리는 마크(811)를 표시할 수 있다.
한편, 도 7에 도시된 바와 같은 멀티뷰 화면(700)의 레이아웃은 도 8에 도시된 바와 같은 멀티뷰 화면(800)의 레이아웃과 차이가 있는 바, 보다 적합한 레이아웃이 적용되는 경우가 있다. 이하, 디스플레이장치(1)가 선택적으로 레이아웃을 적용하는 예시에 관해 설명한다.
도 9는 디스플레이장치가 멀티뷰 화면의 레이아웃을 선택하는 예시의 플로우차트이다.
도 2 및 도 9에 도시된 바와 같이, 하기 동작은 디스플레이장치(1)의 프로세서(150)에 의해 수행된다.
910 단계에서 디스플레이장치(1)는 소스장치(10, 20, 30, 40, 50, 60, 70)의 특성에 관한 복수의 카테고리 중 어느 하나의 카테고리에 관한 선택을 수신한다.
920 단계에서 디스플레이장치(1)는 인터페이스부(110)에 연결된 복수의 소스장치 중에서, 선택된 카테고리에 대응하는 2이상의 소스장치(10, 20, 30, 40, 50, 60, 70)를 식별한다.
930 단계에서 디스플레이장치(1)는 선택된 카테고리에 대응하는 멀티뷰 화면의 레이아웃을 식별한다.
940 단계에서 디스플레이장치(1)는 식별된 2이상의 소스장치(10, 20, 30, 40, 50, 60, 70)로부터 컨텐츠를 각각 수신한다.
950 단계에서 디스플레이장치(1)는 수신되는 2이상의 컨텐츠 및 식별된 레이아웃에 기초하여 멀티뷰 화면을 표시한다.
이상의 동작이 구현되는 예시를 들면 다음과 같다. 도 7에 도시된 바와 같은 멀티뷰 화면(700)의 레이아웃에 따르면 주영상(710)의 크기가 상대적으로 크기 때문에, 여러 사람이 동시에 시청하더라도 주영상(710)에 대해 상대적으로 더 주목하기 쉽다. 따라서, 이러한 경우는 동영상 컨텐트 또는 방송 컨텐트에 적합하다. 반면에, 도 8에 도시된 바와 같은 멀티뷰 화면(800)의 레이아웃에 따르면 복수의 영상(810)의 크기가 균등하다. 따라서 이러한 경우는 복수의 사용자가 서로 상이한 영상(810)에 각기 주목하는 경우, 예를 들면 게임 컨텐트의 멀티플레이에 적합하다. 디스플레이장치(1)에 복수의 게임콘솔이 연결되어 있을 때, 디스플레이장치(1)는 멀티뷰 화면(800)에 각 게임콘솔에 대응하는 영상(810)을 표시할 수 있다. 각 게임콘솔의 사용자는 해당 게임콘솔에 대응하는 영상(810)을 보면서 게임을 수행한다.
예를 들어, 디스플레이장치(1)는 복수의 카테고리 중에서 선택된 카테고리가 셋탑박스의 특성에 대응하면, 도 7에 도시된 바와 같은 멀티뷰 화면(700)의 레이아웃을 선택한다. 또는, 디스플레이장치(1)는 복수의 카테고리 중에서 선택된 카테고리가 게임콘솔의 특성에 대응하면, 도 8에 도시된 바와 같은 멀티뷰 화면(800)의 레이아웃을 선택한다. 이와 같이, 디스플레이장치(1)는 선택된 카테고리에 적합한 레이아웃을 적용하여, 보다 최적화된 멀티뷰 화면을 제공할 수 있다.
한편, 소스장치(10, 20, 30, 40, 50, 60, 70)가 서버 연동이 필요한 게임콘솔인 경우에, 디스플레이장치(1)는 다음과 같은 동작을 수행할 수 있다.
도 10, 도 11, 도 12 및 도 13은 두 게임콘솔이 연결된 디스플레이장치가 표시하는 멀티뷰 화면의 예시도이다.
도 10에 도시된 바와 같이, 디스플레이장치(1)에서 게임콘솔의 카테고리가 선택되면, 디스플레이장치(1)에 연결된 여러 소스장치들 중에서 게임콘솔A(1001) 및 게임콘솔B(1002)가 식별된다. 본 실시예에서 두 사용자는 각각 게임콘솔A(1001) 및 게임콘솔B(1002)을 가지고, 서버(1003)와의 연동을 통해 멀티플레이 게임을 수행하고자 한다.
디스플레이장치(1)는 게임콘솔A(1001) 및 게임콘솔B(1002)가 연결되면, 먼저 게임콘솔A(1001)의 대기화면(1010) 및 게임콘솔B(1002)의 대기화면(1020)을 포함하는 멀티뷰 화면을 표시한다. 이 시점에서는 아직 게임콘솔A(1001) 및 게임콘솔B(1002) 중 어느 곳에서도 게임이 실행되지 않은 상태이다.
디스플레이장치(1)는 게임콘솔A(1001) 및 게임콘솔B(1002)로부터 각각의 사용자 계정 정보를 획득하고, 이들 정보를 가지고 서버(1003)에 연결한다. 게임콘솔A(1001) 및 게임콘솔B(1002)는 서버(1003)에 각자의 계정으로 로그인된 상태가 된다. 이로써, 서버(1003)는 게임콘솔A(1001) 및 게임콘솔B(1002)가 서버(1003)에 연결되어 있음을 인식한다.
이하, 게임콘솔A(1001)의 사용자가 게임콘솔A(1001)에서 소정의 게임을 실행시키는 경우에 관해 설명한다.
도 11에 도시된 바와 같이, 게임콘솔A(1001)에서 소정의 게임이 실행되면, 게임콘솔A(1001)는 실행되는 해당 게임의 데이터를 디스플레이장치(1)에 전송한다. 디스플레이장치(1)는 게임콘솔A(1001)로부터 수신되는 게임 데이터에 기반하여 멀티뷰 화면에 게임콘솔A의 게임실행영상(1030)을 표시한다. 한편, 게임콘솔B(1002)로부터는 게임 데이터가 수신되지 않으므로, 디스플레이장치(1)는 게임콘솔B(1002)의 대기화면(1020)을 그대로 표시한다.
디스플레이장치(1)는 게임콘솔A(1001)로부터 수신되는 게임 데이터에 기반한 소정의 정보를 서버(1003)로 전송한다. 여기서, 디스플레이장치(1)가 게임콘솔A(1001)로부터 수신하는 게임 데이터와, 디스플레이장치(1)가 서버(1003)에 전송하는 정보는 동일할 수도 있고 상이할 수도 있으나, 적어도 상기한 정보는 상기한 게임 데이터에 기반한다. 예를 들어, 게임콘솔A(1001)가 디스플레이장치(1)에 전송하는 게임 데이터는, 게임의 실행을 위해 서버(1003)에 전송해야 할 정보와, 게임실행영상(1030)을 표시하기 위해 디스플레이장치(1)에는 필요하지만 서버(1003)에 전송할 필요가 없는 정보를 함께 포함할 수도 있다. 이 경우에, 디스플레이장치(1)는 수신하는 게임 데이터에서 서버(1003)에 보내도록 지정된 일부 정보를 식별하여 서버(1003)에 전송할 수 있다. 본 정보는, 예를 들면 게임콘솔A(1001)에서 실행되는 게임의 ID를 포함한다.
이로써, 서버(1003)는 게임콘솔A(1001)에서 현재 어떠한 게임이 실행되고 있는지 식별할 수 있다.
한편, 서버(1003)는 사용자 계정 및 게임을 관리함에 있어서, 특정 게임에 대해 멀티플레이를 수행하도록 설정된 복수의 사용자 계정을 식별할 수 있다. 예를 들어, 서버(1003)는 현재 게임콘솔A(1001)에서 실행되고 있는 게임이, 게임콘솔B(1002)에서 멀티플레이가 가능하도록 설정되어 있다고 식별할 수 있다. 이와 같이 서버(1003)가 식별한 경우의 동작에 관해 이하 설명한다.
도 12에 도시된 바와 같이, 서버(1003)는 게임콘솔A(1001)에서 소정 게임이 실행되는 것으로 식별되면, 게임콘솔B(1002)에서 해당 게임의 멀티플레이가 가능한지 여부를 식별한다. 또는, 게임콘솔A(1001)가 사용자A의 사용자 계정으로 로그인되고, 게임콘솔B(1002)가 사용자B의 사용자 계정으로 로그인되어 있을 때, 서버(1003)는 사용자B가 사용자A와 해당 게임의 멀티플레이가 가능한지 여부를 식별할 수도 있다. 또는, 서버(1003)는 사용자A와 해당 게임의 멀티플레이가 가능하게 설정된 사용자 계정의 리스트 중에서 사용자B가 있는지를 검색할 수도 있다.
서버(1003)는 게임콘솔B(1002)에서 해당 게임의 멀티플레이가 가능하지 않다고 식별되면, 도 11의 영상(1020)의 상태를 유지한다. 반면에, 서버(1003)는 게임콘솔B(1002)에서 해당 게임의 멀티플레이가 가능하다고 식별되면, 디스플레이장치(1)에 게임콘솔B(1002)의 사용자B에 대해 사용자A와 해당 게임의 멀티플레이를 수행하도록 안내하는 메시지를 전송한다. 이에, 디스플레이장치(1)는 게임콘솔A의 게임실행영상(1030)과 함께 상기한 메시지(1040)를 포함하는 멀티뷰 화면을 표시한다. 한편, 설계 방식에 따라서는, 서버(1003)는 디스플레이장치(1)에 상기한 메시지를 전송하는 것이 아니라, 해당 게임의 실행 지시를 전송할 수도 있다. 이 경우에, 디스플레이장치(1)는 게임콘솔B(1002)에 게임의 실행 지시를 전송하고, 게임콘솔B(1002)는 수신되는 지시에 따라서 게임을 자동으로 실행할 수도 있다.
이와 같이, 사용자B는 디스플레이장치(1)에 표시되는 메시지(1040)를 보고, 사용자A가 해당 게임을 수행하고 있음을 인지할 수 있다.
도 13에 도시된 바와 같이, 사용자B가 디스플레이장치(1)에 표시되는 멀티뷰 화면의 안내를 통해 사용자A가 소정 게임을 수행하고 있음을 인지하고, 게임콘솔B(1002)에서 안내받은 게임을 실행시킬 수 있다.
게임콘솔B(1002)는 해당 게임의 게임 데이터를 디스플레이장치(1)에 전송하고, 디스플레이장치(1)는 게임콘솔A(1001)에서 실행되는 게임의 영상(1030) 및 게임콘솔B(1002)에서 실행되는 게임의 영상(1050)을 포함하는 멀티뷰 화면을 포함한다. 또한, 디스플레이장치(1)는 서버(1003)에 게임콘솔A(1001) 및 게임콘솔B(1002)에서 각각 실행되는 게임 데이터에 기반한 정보를 전송한다. 이에, 서버(1003)는 해당 정보에 기초하여, 게임콘솔A(1001) 및 게임콘솔B(1002)에서 각기 실행되는 게임 내에서 사용자A 및 사용자B의 멀티플레이를 중계 및 제어할 수 있다.
한편, 앞선 실시예, 특히 도 5에서는 디스플레이장치(1)가 사전 정의된 복수의 카테고리에 대응하는 아이콘(511, 512, 513)을 포함하고, 이 중에서 어느 하나의 카테고리를 선택 가능하게 제공하는 UI(510)를 표시하는 경우에 관해 설명하였다. 아이콘(511, 512, 513) 중 어느 하나를 사용자가 선택했을 때, 해당 아이콘(511, 512, 513)의 카테고리에 대응하는 2이상의 소스장치가 식별된다. 그러나, 설계 방식에 따라서는, 사용자가 직접 각 카테고리에서 소스장치를 선택하고 선택 결과의 설정으로 저장할 수 있으며, 차후 디스플레이장치(1)가 해당 설정을 사용자가 선택할 수 있게 제공할 수도 있다. 이하, 이러한 실시예에 관해 설명한다.
도 14는 디스플레이장치에서 사용자가 사전 정의된 복수의 카테고리에서 소스장치들을 선택하는 경우를 나타내는 예시도이다.
도 14에 도시된 바와 같이, 복수의 소스장치(10, 20, 30, 40, 50, 60, 70)가 복수의 카테고리(410, 420, 430)에 대응하게 사전 설정된다. 예를 들어, 제1소스장치(10), 제2소스장치(20) 및 제3소스장치(30)는 제1카테고리(410)에 대응하고, 제4소스장치(40) 및 제5소스장치(50)는 제2카테고리(420)에 대응하고, 제6소스장치(60) 및 제7소스장치(70)는 제3카테고리(430)에 대응한다.
사용자는 이와 같이 카테고리 별로 분류된 소스장치(10, 20, 30, 40, 50, 60, 70) 중에서, 임의로 2이상의 소스장치(10, 20, 30, 40, 50, 60, 70)를 선택할 수 있다. 예를 들어, 사용자는 디스플레이장치(1)에 연결된 소스장치(10, 20, 30, 40, 50, 60, 70) 중에서, 제1카테고리(410)에 대응하는 제2소스장치(20), 제2카테고리(420)에 대응하는 제4소스장치(40), 제3카테고리(430)에 대응하는 제7소스장치(70)를 선택할 수 있다. 이 선택 결과는, 사용자 설정 카테고리(1400)가 된다.
디스플레이장치(1)는 이와 같이 새롭게 생성된 사용자 설정 카테고리(1400), 사용자 설정 카테고리 정보(1410)로 저장한다.
도 15는 멀티뷰 화면의 선택을 위한 UI에 사용자 설정 아이콘이 포함되는 모습을 나타내는 예시도이다.
도 14 및 도 15에 도시된 바와 같이, 디스플레이장치(1)는 카테고리 선택을 위해 제공되는 UI(510)를 표시한다. UI(510)는 소스장치의 특성에 따른 카테고리에 대응하는 복수의 아이콘(511, 512, 513)을 포함한다. 이상의 구성은 앞선 도 5의 실시예와 실질적으로 동일하다.
본 실시예에 따른 UI(510)는 사용자 설정 아이콘(1500)을 더 포함한다. 사용자 설정 아이콘(1500)은 사용자가 선택한 2이상의 소스장치를 지시하는 사용자 설정 카테고리(1400)에 대응하며, 사용자 설정 카테고리 정보(1410)에 기초하여 표시된다. 디스플레이장치(1)는 UI(510)를 표시할 때에 사용자 설정 카테고리 정보(1410)를 참조하며, 만일 사용자 설정 카테고리 정보(1410)가 저장되어 있지 않으면 UI(510)에 사용자 설정 아이콘(1500)을 나타내지 않는다.
UI(510)에서 사용자 설정 아이콘(1500)이 선택되면, 디스플레이장치(1)는 사용자 설정 카테고리 정보(1410)가 지시하는 대로 사용자 설정 카테고리(1400)에 대응하는 2이상의 소스장치를 식별하고, 식별된 2이상의 소스장치로부터의 컨텐츠에 기반한 멀티뷰 화면을 표시한다. 예를 들어, 사용자 설정 카테고리(1400)가 제2소스장치(20), 제4소스장치(40) 및 제7소스장치(70)에 대응할 때, 디스플레이장치(1)는 제2소스장치(20), 제4소스장치(40) 및 제7소스장치(70) 각각으로부터 수신되는 컨텐츠에 기반하여 멀티뷰 화면을 표시할 수 있다.
한편, 디스플레이장치(1)는 다양한 조건에 따라서 UI(510)에서 사용자가 선택 가능하게 제공하는 카테고리의 옵션을 변경할 수 있다. 이하, 이러한 실시예에 관해 설명한다.
도 16은 디스플레이장치가 기 설정된 조건에 따라서 UI가 제공하는 카테고리의 선택 옵션을 변경하는 원리를 나타내는 예시도이다.
도 16에 도시된 바와 같이, 디스플레이장치(1)는 UI(1600)에서 복수의 아이콘(1601, 1602, 1603, 1604, 1605)을 표시할 때, 현재의 사용 환경의 조건을 기반으로 복수의 아이콘(1601, 1602, 1603, 1604, 1605)의 카테고리를 선별할 수 있다. 본 조건은 설계 방식에 따라서 여러 가지가 적용될 수 있는데, 한 가지 예시로서 디스플레이장치(1)는 현재 재생중인 컨텐트, 즉 현재 표시하고 있는 영상(1610)의 컨텐트의 특성에 기초하여 카테고리를 선별할 수 있다. 컨텐트의 특성은, 예를 들면 컨텐트의 장르(스포츠, 드라마, 뉴스, 영화 등), 컨텐트의 제공방식(라이브, VOD 등) 등 다양한 인자들로 구현될 수 있다. 컨텐트의 특성은, 컨텐트와 함께 제공되는 메타데이터, 또는 다양한 경로로 제공되는 컨텐트 관련 정보(EPG 등)으로부터 획득될 수 있다.
이러한 방법은, UI(1600)에 표시되는 아이콘(1601, 1602, 1603, 1604, 1605)의 수가, 사전에 정의된 카테고리(1620)의 수보다 적은 경우에 적용될 수 있다. 예를 들어, UI(1600)에 표시 가능한 아이콘(1601, 1602, 1603, 1604, 1605)의 수가 5개이고 사전에 정의된 카테고리(1620)가 제1카테고리 내지 제10카테고리의 10개라면, 디스플레이장치(1)는 10개의 카테고리(1620) 중에서, 현재 표시하고 있는 영상(520)의 컨텐트의 특성에 기초하여 5개의 카테고리(1630)를 선별하고, 선별된 5개의 카테고리(1630)에 대응하는 아이콘(1601, 1602, 1603, 1604, 1605)을 UI(1600)에 표시한다.
본 실시예가 적용되는 예시로서, 현재 표시되고 있는 영상(1610)의 컨텐트가 스포츠 게임인 경우를 고려한다. 디스플레이장치(1)는 영상(1610)의 컨텐트의 특성인 "스포츠", "게임"의 두 가지 요소로부터, 영상(1610)의 컨텐트가 방송되는 동일 시간대에서 스포츠 방송을 제공하는 셋탑박스의 카테고리와, 게임을 할 수 있는 게임콘솔의 카테고리를 선별할 수 있다.
또는, 다른 실시예로서, 디스플레이장치(1)는 UI(1600)를 통해 선택된 카테고리의 2이상의 소스장치로부터 컨텐츠를 수신할 때, 수신되는 컨텐츠 중에서 현재 표시되고 있는 영상(1610)의 컨텐트의 특성에 기초하여 멀티뷰 화면을 표시할 2이상의 컨텐츠를 선별할 수도 있다.
예를 들면, 디스플레이장치(1)는 UI(1600)를 통해 셋탑박스 카테고리가 선택되고 현재 표시중인 영상(1610)이 스포츠 라이브 방송인 경우를 고려한다. 이 경우에, 디스플레이장치(1)는 셋탑박스에 대응하는 2이상의 소스장치로부터 수신되는 방송채널 중에서, 현재 시간대의 스포츠 라이브를 방송하는 채널들을 선별하여 멀티뷰 화면으로 표시할 수 있다.
이상 실시예들에서 설명한 바와 같은 장치의 동작은, 해당 장치에 탑재된 인공지능에 의해 수행될 수 있다. 인공지능은 기계 학습 알고리즘을 활용하여 다양한 제반 시스템에 적용될 수 있다. 인공지능 시스템은 인간 수준 내지는 인간 수준에 버금가는 지능을 구현하는 컴퓨터 시스템으로서, 기계, 장치 또는 시스템이 자율적으로 학습하고 판단하며, 사용 경험의 누적에 기반하여 인식률 및 판단 정확도가 향상되는 시스템이다. 인공지능 기술은 입력되는 데이터들의 특징을 스스로 분류하고 학습하는 알고리즘을 이용한 기계학습 기술 및 알고리즘을 활용하여, 인간의 두뇌의 인지, 판단 등의 기능을 모사하는 요소 기술들로 구성된다.
요소 기술들은, 예를 들면 인간의 언어와 문자를 인식하는 언어적 이해 기술, 사물을 인간의 시각처럼 인식하는 시각적 이해 기술, 정보를 판단하여 논리적으로 추론하고 예측하는 추론 및 예측 기술, 인간의 경험 정보를 지식 데이터로 처리하는 지식 표현 기술, 차량의 자율 주행이나 로봇의 움직임을 제어하는 동작 제어 기술 중 적어도 어느 하나를 포함한다.
여기서, 언어적인 이해는 인간의 언어 또는 문자를 인식하고 응용 처리하는 기술로서, 자연어의 처리, 기계 번역, 대화 시스템, 질의 응답, 음성 인식 및 합성 등을 포함한다.
추론 예측은 정보를 판단하여 논리적으로 예측하는 기술로서, 지식 및 확률 기반 추론, 최적화 예측, 선호 기반 계획, 추천 등을 포함한다.
지식 표현은 인간의 경험 정보를 지식 데이터로 자동화 처리하는 기술로서, 데이터의 생성 및 분류와 같은 지식 구축, 데이터의 활용과 같은 지식 관리 등을 포함한다.
본 발명의 예시적 실시예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 이러한 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 예를 들어, 컴퓨터 판독 가능 매체는 삭제 가능 또는 재기록 가능 여부와 상관없이, USB 메모리장치와 같은 비휘발성 저장 장치, 또는 예를 들어 RAM, ROM, 플래시메모리, 메모리 칩, 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 이동 단말 내에 포함될 수 있는 메모리는 본 발명의 실시 예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 본 저장 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어의 기술 분야에서 숙련된 기술자에게 공지되어 사용 가능한 것일 수도 있다. 또는, 본 컴퓨터 프로그램 명령은 컴퓨터 프로그램 프로덕트에 의해 구현될 수도 있다.
1 : 디스플레이장치(1)
100 : 영상처리 디바이스
110 : 인터페이스부
120 : 사용자입력부
130 : 저장부
150 : 스피커
200 : 디스플레이부

Claims (20)

  1. 디스플레이장치에 있어서,
    디스플레이와,
    인터페이스와,
    사용자입력부와,
    상기 인터페이스에 연결 가능한 소스장치의 특성에 관한 복수의 카테고리 중에서 상기 사용자입력부를 통한 사용자 입력에 의해 어느 하나의 카테고리를 선택하고,
    상기 인터페이스에 연결된 복수의 소스장치 중에서, 상기 선택된 카테고리에 대응하는 2이상의 소스장치들로부터 상기 인터페이스를 통해 컨텐츠를 각각 수신하고,
    상기 인터페이스를 통해 각각 수신되는 상기 2이상의 컨텐츠에 기반한 다중 화면을 상기 디스플레이에 표시하는 프로세서를 포함하는 디스플레이장치.
  2. 제1항에 있어서,
    상기 복수의 카테고리는, 상기 인터페이스에 연결 가능한 소스장치의 종류에 대응하게 마련된 디스플레이장치.
  3. 제1항에 있어서,
    상기 프로세서는, 상기 복수의 소스장치 각각으로부터 수신되는 기기 정보에 기초하여 각각의 상기 소스장치의 특성을 식별하는 디스플레이장치.
  4. 제1항에 있어서,
    상기 프로세서는, 상기 복수의 카테고리 중 어느 하나를 선택 가능하게 마련된 UI를 표시하는 디스플레이장치.
  5. 제4항에 있어서,
    상기 프로세서는, 상기 인터페이스에 단일 소스장치가 연결되어 있는 것으로 식별되는 것에 기초하여, 상기 UI를 표시하지 않는 디스플레이장치.
  6. 제4항에 있어서,
    상기 프로세서는, 상기 복수의 카테고리 중에서, 상기 디스플레이에 표시중인 컨텐트의 특성에 기초하여, 상기 UI에서 선택 가능하게 제공하기 위한 카테고리들을 식별하는 디스플레이장치.
  7. 제1항에 있어서,
    상기 프로세서는, 상기 복수의 소스장치 중에서 사용자에 의해 선택된 상기 2이상의 소스장치들을 사용자 설정 옵션으로 저장하고, 상기 저장된 사용자 설정 옵션을 상기 복수의 카테고리 중 선택 가능한 어느 하나로 제공하는 디스플레이장치.
  8. 제1항에 있어서,
    상기 프로세서는, 상기 식별된 카테고리에 대응하는 상기 2이상의 소스장치들로부터 각기 수신되는 컨텐츠 중에서, 사용자의 컨텐트 관련 랭킹이 높은 순서에 기초하여 상기 2이상의 컨텐츠를 식별하는 디스플레이장치.
  9. 제8항에 있어서,
    상기 사용자의 컨텐트 관련 랭킹은 사용자의 컨텐트 선호도에 관련된 디스플레이장치.
  10. 제8항에 있어서,
    상기 프로세서는, 사용자의 컨텐트 사용 이력에 기초하여 상기 컨텐트 관련 랭킹을 식별하는 디스플레이장치.
  11. 제1항에 있어서,
    상기 프로세서는, 상기 식별된 카테고리에 대응하는 상기 2이상의 소스장치들로부터 각기 수신되는 컨텐츠 중에서, 사용자의 시청등급에 기초하여 상기 2이상의 컨텐츠를 식별하는 디스플레이장치.
  12. 제11항에 있어서,
    상기 프로세서는, 상기 디스플레이장치의 사용자 계정 정보에 기초하여 상기 시청등급을 식별하는 디스플레이장치.
  13. 제1항에 있어서,
    상기 프로세서는, 상기 다중화면을 표시하는 형태에 관한 복수의 레이아웃 중에서, 상기 선택된 어느 하나의 카테고리에 대응하는 레이아웃을 식별하고, 상기 식별된 레이아웃에 기초하여 상기 다중화면을 표시하는 디스플레이장치.
  14. 제13항에 있어서,
    상기 프로세서는, 상기 2이상의 컨텐츠에 기초하여 주영상 및 상기 주영상보다 크기가 작은 부영상을 포함하는 상기 다중화면을 표시하는 디스플레이장치.
  15. 제14항에 있어서,
    상기 프로세서는, 상기 2이상의 컨텐츠 중에서 현재 표시중인 것으로 식별되는 컨텐트를 상기 주영상으로 표시하는 디스플레이장치.
  16. 제14항에 있어서,
    상기 프로세서는, 상기 2이상의 컨텐츠 중에서 사용자의 컨텐트 관련 랭킹이 가장 높은 컨텐트를 상기 주영상으로 표시하는 디스플레이장치.
  17. 제13항에 있어서,
    상기 프로세서는, 상기 2이상의 컨텐츠에 기초하여 동일한 크기의 복수의 영상을 포함하는 상기 다중화면을 표시하는 디스플레이장치.
  18. 제1항에 있어서,
    상기 프로세서는, 상기 다중화면 내의 복수의 영상 중에서 오디오가 출력되고 있는 컨텐트의 영상 위에 마크를 표시하는 디스플레이장치.
  19. 디스플레이장치의 제어방법에 있어서,
    인터페이스에 연결 가능한 소스장치의 특성에 관한 복수의 카테고리 중에서 사용자 입력에 의해 어느 하나의 카테고리를 선택하는 단계와,
    상기 인터페이스에 연결된 복수의 소스장치 중에서, 상기 선택된 카테고리에 대응하는 2이상의 소스장치들로부터 컨텐츠를 각각 수신하는 단계와,
    상기 각각 수신되는 상기 2이상의 컨텐츠에 기반한 다중 화면을 표시하는 단계를 포함하는 디스플레이장치.
  20. 제19항에 있어서,
    상기 복수의 카테고리는, 상기 인터페이스에 연결 가능한 소스장치의 종류에 대응하게 마련된 디스플레이장치의 제어방법.
KR1020200105187A 2020-08-21 2020-08-21 디스플레이장치 및 그 제어방법 KR20220023453A (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020200105187A KR20220023453A (ko) 2020-08-21 2020-08-21 디스플레이장치 및 그 제어방법
EP21858510.7A EP4184925A4 (en) 2020-08-21 2021-08-06 DISPLAY DEVICE AND CONTROL METHOD THEREOF
PCT/KR2021/010424 WO2022039423A1 (ko) 2020-08-21 2021-08-06 디스플레이장치 및 그 제어방법
CN202180051286.4A CN116158081A (zh) 2020-08-21 2021-08-06 显示装置及其控制方法
US18/112,316 US20230199244A1 (en) 2020-08-21 2023-02-21 Display apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200105187A KR20220023453A (ko) 2020-08-21 2020-08-21 디스플레이장치 및 그 제어방법

Publications (1)

Publication Number Publication Date
KR20220023453A true KR20220023453A (ko) 2022-03-02

Family

ID=80350501

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200105187A KR20220023453A (ko) 2020-08-21 2020-08-21 디스플레이장치 및 그 제어방법

Country Status (5)

Country Link
US (1) US20230199244A1 (ko)
EP (1) EP4184925A4 (ko)
KR (1) KR20220023453A (ko)
CN (1) CN116158081A (ko)
WO (1) WO2022039423A1 (ko)

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4789444B2 (ja) * 2003-10-03 2011-10-12 キヤノン株式会社 情報処理装置及びその制御方法
KR20070073284A (ko) * 2006-01-04 2007-07-10 삼성전자주식회사 디스플레이장치
KR100885299B1 (ko) * 2006-12-01 2009-02-23 한국전자통신연구원 개인별 시청 제한 방법 및 장치
US20080163059A1 (en) * 2006-12-28 2008-07-03 Guideworks, Llc Systems and methods for creating custom video mosaic pages with local content
US9237296B2 (en) * 2009-06-01 2016-01-12 Lg Electronics Inc. Image display apparatus and operating method thereof
JP5775043B2 (ja) * 2012-09-10 2015-09-09 株式会社 日立産業制御ソリューションズ マルチディスプレイ制御システム、制御サーバ及びマルチディスプレイ制御方法
KR20150071139A (ko) * 2013-12-18 2015-06-26 삼성전자주식회사 컨텐츠 추천장치, 컨텐츠 추천방법 및 영상표시방법
KR20160094754A (ko) * 2015-02-02 2016-08-10 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR102611422B1 (ko) * 2016-07-22 2023-12-07 삼성전자주식회사 디스플레이 장치 및 그 컨텐츠 추천 방법
WO2018131875A1 (en) * 2017-01-11 2018-07-19 Samsung Electronics Co., Ltd. Display apparatus and method for providing service thereof
WO2018194273A1 (en) * 2017-04-21 2018-10-25 Samsung Electronics Co., Ltd. Image display apparatus and method
KR20190103775A (ko) * 2018-02-28 2019-09-05 주식회사 케이티 개인 맞춤형 멀티스크린 서비스를 제공하는 방법, 서버 및 사용자 단말
KR102677076B1 (ko) 2019-02-28 2024-06-21 에스케이하이닉스 주식회사 저 밴딩 노이즈를 위한 비교 장치 및 그에 따른 씨모스 이미지 센서

Also Published As

Publication number Publication date
WO2022039423A1 (ko) 2022-02-24
US20230199244A1 (en) 2023-06-22
EP4184925A1 (en) 2023-05-24
EP4184925A4 (en) 2023-12-06
CN116158081A (zh) 2023-05-23

Similar Documents

Publication Publication Date Title
US11785294B2 (en) Systems and methods for dynamically adjusting media output based on presence detection of individuals
US9288531B2 (en) Methods and systems for compensating for disabilities when presenting a media asset
US9542060B1 (en) User interface for access of content
EP3467639A1 (en) Concurrent use of multiple user interface devices
CN113259741B (zh) 一种剧集经典看点的展示方法及显示设备
KR20160087649A (ko) 사용자 단말 장치, 시스템 및 그 제어 방법
JP2019521532A (ja) ユーザの軌跡に基づくメディアコンテンツの推奨
KR20200100744A (ko) 생체측정 디바이스를 동적으로 인에이블 및 디스에이블시키기 위한 시스템 및 방법
KR20200085463A (ko) 전자장치 및 그 제어방법
US11711582B2 (en) Electronic apparatus and control method thereof
KR20150136314A (ko) 디스플레이 장치, 사용자 단말 장치, 서버 및 그 제어 방법
KR20060130614A (ko) 선호도들을 레커맨더／프로파일링 시스템으로 입력하는시스템 및 방법
TWI587253B (zh) 提供口述影像可用性通知的方法與設備
CN112995733B (zh) 一种显示设备、设备发现方法及存储介质
KR20220023453A (ko) 디스플레이장치 및 그 제어방법
JP2010157117A (ja) コンテンツ抽出装置およびコンテンツ抽出方法
US11974010B2 (en) Display device for controlling one or more home appliances in consideration of viewing situation
US20240272596A1 (en) Electronic device and control method therefor
KR20230032492A (ko) 전자장치 및 그 제어방법
KR20190122379A (ko) 전자장치 및 그 제어방법
KR20240132276A (ko) 신경망 반도체와 통신하기 위해 모바일 장치를 사용하기 위한 구현 및 방법
JP2016527594A (ja) 関連するメディア・アセットの動的な発見のための方法及びシステム
KR20220078471A (ko) 전자장치 및 그 제어방법
CN116801048A (zh) 一种显示设备和视频播放方法
CN118843865A (zh) 使用移动设备与神经网络半导体通信的实施方式和方法

Legal Events

Date Code Title Description
E902 Notification of reason for refusal