KR102633595B1 - 디스플레이장치 및 그 제어방법 - Google Patents

디스플레이장치 및 그 제어방법 Download PDF

Info

Publication number
KR102633595B1
KR102633595B1 KR1020160155256A KR20160155256A KR102633595B1 KR 102633595 B1 KR102633595 B1 KR 102633595B1 KR 1020160155256 A KR1020160155256 A KR 1020160155256A KR 20160155256 A KR20160155256 A KR 20160155256A KR 102633595 B1 KR102633595 B1 KR 102633595B1
Authority
KR
South Korea
Prior art keywords
display
viewpoint
display quality
segment
display device
Prior art date
Application number
KR1020160155256A
Other languages
English (en)
Other versions
KR20180057081A (ko
Inventor
전한별
김대왕
박정훈
박한섭
윤종희
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160155256A priority Critical patent/KR102633595B1/ko
Priority to CN201780071610.2A priority patent/CN109983763B/zh
Priority to EP17872804.4A priority patent/EP3507646B1/en
Priority to JP2019526500A priority patent/JP6744492B2/ja
Priority to PCT/KR2017/012939 priority patent/WO2018093143A1/en
Priority to US15/819,455 priority patent/US10893194B2/en
Publication of KR20180057081A publication Critical patent/KR20180057081A/ko
Application granted granted Critical
Publication of KR102633595B1 publication Critical patent/KR102633595B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G06T3/4038—Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/361—Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/324—Colour aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4888—Data services, e.g. news ticker for displaying teletext characters

Abstract

디스플레이장치가 개시된다. 디스플레이장치는 수신부, 신호처리부, 디스플레이부 및 제어부를 포함한다. 수신부는 컨텐츠의 영상을 수신한다. 신호처리부는 수신부를 통해 수신되는 영상을 처리한다. 디스플레이부는 처리된 영상을 표시한다. 제어부는 세그먼트 별로 수신되는 컨텐츠의 영상 중 일 시점의 영상을 표시하고, 각 세그먼트의 수신상태에 기초하여 적어도 하나의 세그먼트에 대한 표시품질에 관한 정보를 표시하도록 디스플레이부를 제어한다. 이로 인하여, 세그먼트의 표시품질에 관한 정보를 사용자에게 제공함으로써, 사용자는 원활하게 시점을 이동하며 컨텐츠의 영상을 시청할 수 있다.

Description

디스플레이장치 및 그 제어방법{DISPLAY APPARATUS AND THE CONTROL METHOD THEREOF}
본 발명은 디스플레이장치 및 그 제어방법에 관한 것으로, 보다 구체적으로는 사용자가 원활하게 시점을 이동시켜가며 시청할 수 있는 컨텐츠의 영상을 제공하는 디스플레이장치 및 그 제어방법에 관한 것이다.
최근 디스플레이장치는 다양한 컨텐츠의 영상을 제공할 수 있다. 360도 영상은 그 중 하나로서, 여러 대의 카메라 혹은 복수의 렌즈를 장착한 카메라를 이용하여 전 방위 영상을 촬영하고, 가상공간에 맵핑하여 사용자에게 실제 공간에 있는 것처럼 화면을 보여주고 상호작용하도록 느끼게 하는 기술이다. 디스플레이장치는 360도 영상을 제공하기 위해 구형영상에서 사용자가 선택한 시점에 대응하는 영역을 평면영역으로 변환하거나 표시중인 영상을 확대 또는 축소하여 제공한다.
컨텐츠의 영상이 360도 영상인 경우, 일반 영상보다 데이터의 크기가 크기 때문에, 디스플레이장치는 모든 영역의 영상을 한번에 수신하는 것이 아니라, 사용자가 현재 시청중이거나, 시청이 예상되는 세그먼트를 먼저 수신하도록 구현될 수 있다. 또한, 네트워크 환경을 스스로 인지하며, 영상의 해상도를 적응적으로 변경하여 전송하는 어댑티브 스트리밍(adaptive streaming)을 이용할 경우, 360도 영상은 세그먼트 별로 서로 다른 해상도를 가질 수 있다.
이런 종래 기술에 따르면, 시청자는 360도 영상의 시청 중에 시점을 변경할 경우, 예상치 못한 버퍼링 또는 낮아진 해상도로 인해 원활한 시청이 방해될 수 있어 문제다.
본 발명은 상술한 문제점을 해결하기 위한 것으로서, 컨텐츠의 영상의 각 세그먼트의 수신상태에 따라 표시품질에 관한 정보를 제공하여 컨텐츠의 영상이 360도 영상인 경우, 사용자가 영상을 시청 중에 원활하게 시점을 이동시킬 수 있는 디스플레이장치 및 그 제어방법이 제공된다.
상기한 문제를 해결하기 위하여 디스플레이장치에 있어서, 복수의 세그먼트 영상을 수신할 수 있는 수신부; 상기 수신부를 통해 수신되는 영상을 처리할 수 있는 영상처리부; 상기 처리된 영상을 표시할 수 있는 디스플레이부; 및 상기 수신부를 통해 수신된 복수의 세그먼트 영상에 기반하여 3차원 컨텐츠 영상을 생성하고, 상기 생성된 3차원 컨텐츠 영상 중 일 시점에 해당하는 영상을 표시하고, 상기 각 세그먼트 영상의 수신상태에 기초하여 현재 표시되는 일 시점의 적어도 하나의 인접 시점에 대한 표시품질에 관한 정보를 표시하도록 상기 디스플레이부를 제어하는 제어부를 포함하는 디스플레이장치가 제공된다. 이로 인하여 사용자가 영상을 시청 중에 원활하게 시점을 이동시킬 수 있게 된다.
상기 표시품질은 상기 세그먼트의 영상이 수신되는 속도, 상기 세그먼트의 영상이 수신된 양(amount), 상기 세그먼트의 영상을 재생 가능한 시간 및 상기 세그먼트 영상의 해상도 중 적어도 하나를 포함함으로써, 사용자에게 표시품질에 관한 다양한 정보를 제공한다.
상기 제어부는 상기 표시품질의 정도를 텍스트로 표시함으로써, 정보가 정확하게 전달된다.
상기 제어부는 상기 표시품질의 정도에 대응하는 크기를 갖는 항목을 포함하는 UI(유저인터페이스: UI)를 상기 디스플레이부에 표시함으로써, 정보를 직관적인 인터페이스를 통해 제공하여 사용자의 이용성이 증가한다.
상기 제어부는 상기 표시품질이 제1정도일 때, 제1색상을 상기 디스플레이부에 표시하고, 상기 표시품질이 상기 제1정도보다 높은 제2정도일 때, 제2색상을 상기 디스플레이부에 표시함으로써, 사용자는 색상에 따라 표시품질의 정도를 직관적으로 인식할 수 있다.
상기 제어부는 상기 표시품질이 상기 제1정도와 상기 제2정도 사이의 제3정도일 때, 상기 제1색상과 상기 제2색상 사이의 제3색상을 상기 디스플레이부에 표시함으로써, 중간 정도의 표시품질의 정도에 대응하는 색상이 소개된다.
상기 제어부는 상기 표시품질의 정도가 다른 세그먼트보다 높거나 가장 낮은 세그먼트의 방향을 가리키는 화살표를 상기 디스플레이부에 표시함으로써, 사용자는 원활한 시청을 위한 시점을 이동시킬 방향에 대한 가이드를 제공받을 수 있다.
상기 제어부는 상기 표시중인 상기 영상 중 상기 세그먼트의 방향에 대응하는 가장자리에 상기 표시품질에 관한 정보를 표시함으로써, 표시품질에 관한 정보를 제공하는 다양한 실시예가 소개된다.
상기 제어부는 상기 시점이 정지된 상태에서 이동을 시작할 때, 상기 표시품질에 관한 정보를 상기 디스플레이부에 표시함으로써, 표시품질에 관한 정보를 제공하는 시점에 대한 실시예가 소개된다.
상기 제어부는 상기 일 시점이 이동하여 상기 세그먼트의 경계로부터 소정 거리 이내로 근접할 때, 상기 표시품질에 관한 정보를 상기 디스플레이부에 표시함으로써, 표시품질에 관한 정보를 제공할 시점에 대한 다양한 실시예가 소개된다.
상기 제어부는 상기 표시품질의 정도가 임계레벨 보다 낮아질 때, 상기 표시품질에 관한 정보를 상기 디스플레이부에 표시함으로써, 표시품질에 관한 정보를 제공할 시점에 대한 다양한 실시예가 소개된다.
상기 제어부는 상기 표시품질이 소정의 정도 이상 변경될 때, 상기 표시품질에 관한 정보를 상기 디스플레이부에 표시함으로써, 시청 품질에 관한 정보를 제공할 시점에 대한 다양한 실시예가 소개된다.
상기한 문제를 해결하기 위하여 디스플레이장치의 제어방법에 있어서, 복수의 세그먼트 영상을 수신하는 단계; 상기 수신되는 영상을 처리하는 단계; 및 상기 처리된 영상을 표시하는 단계를 포함하며, 상기 처리된 영상을 표시하는 단계는, 상기 수신된 복수의 세그먼트 영상에 기반하여 3차원 컨텐츠 영상을 생성하는 단계; 상기 생성된 3차원 컨텐츠 영상 중 일 시점에 해당하는 영상을 표시하는 단계; 및 상기 각 세그먼트 영상의 수신상태에 기초하여 현재 표시되는 일 시점의 적어도 하나의 인접 시점에 대한 표시품질에 관한 정보를 표시하는 단계를 포함하는 디스플레이장치의 제어방법이 제공된다. 이로 인하여 사용자가 영상을 시청 중에 원활하게 시점을 이동시킬 수 있게 된다.
상기 표시품질은 상기 세그먼트의 영상이 수신되는 속도, 상기 세그먼트의 영상이 수신된 양(amount), 상기 세그먼트의 영상을 재생 가능한 시간 및 상기 세그먼트 영상의 해상도 중 적어도 하나를 포함함으로써, 사용자에게 표시품질에 관한 다양한 정보를 제공한다.
상기 세그먼트의 표시품질에 관한 정보를 표시하는 단계는, 상기 표시품질의 정도를 텍스트로 표시하는 단계를 포함함으로써, 정보가 정확하게 전달된다.
상기 세그먼트의 표시품질에 관한 정보를 표시하는 단계는, 상기 표시품질의 정도에 대응하는 크기를 갖는 항목을 포함하는 UI(유저인터페이스: UI)를 표시하는 단계를 포함함으로써, 정보를 직관적인 인터페이스를 통해 제공하여 사용자의 이용성이 증가한다.
상기 세그먼트의 표시품질에 관한 정보를 표시하는 단계는, 상기 표시품질이 제1정도일 때, 제1색상을 표시하고, 상기 표시품질이 상기 제1정도보다 높은 제2정도일 때, 제2색상을 표시하는 단계를 포함함으로써, 사용자는 색상에 따라 표시품질의 정도를 직관적으로 인식할 수 있다.
상기 세그먼트의 표시품질에 관한 정보를 표시하는 단계는, 상기 표시품질이 상기 제1정도와 상기 제2정도 사이의 제3정도일 때, 상기 제1색상과 상기 제2색상 사이의 제3색상을 표시하는 단계를 포함함으로써, 중간 정도의 표시품질의 정도에 대응하는 색상이 소개된다.
상기 세그먼트의 표시품질에 관한 정보를 표시하는 단계는, 상기 표시품질의 정도가 다른 세그먼트보다 높거나 가장 낮은 세그먼트의 방향을 가리키는 화살표를 표시하는 단계를 포함함으로써, 사용자는 원활한 시청을 위한 시점을 이동시킬 방향에 대한 가이드를 제공받을 수 있다.
상기 세그먼트의 표시품질에 관한 정보를 표시하는 단계는, 상기 표시중인 상기 영상 중 상기 세그먼트의 방향에 대응하는 가장자리에 상기 표시품질에 관한 정보를 표시하는 단계를 포함함으로써, 표시품질에 관한 정보를 제공하는 다양한 실시예가 소개된다.
상기한 바와 같이, 본 발명에 의하면, 영상의 표시품질에 관한 정보를 제공함으로써 사용자는 컨텐츠의 영상이 360도 영상인 경우, 영상을 시청 중에 원활하게 시점을 이동시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 디스플레이장치를 도시한다.
도 2는 본 발명의 일 실시예에 따른 360도 영상이 처리되는 과정을 도시한다.
도 3은 본 발명의 일 실시예에 따른 디스플레이장치의 블록도를 도시한다.
도 4는 본 발명의 일 실시예에 따른 복수의 세그먼트로 구분되는 컨텐츠의 영상을 도시한다.
도 5는 본 발명의 일 실시예에 따른 표시품질의 정도에 대응하는 크기를 갖는 항목을 포함하는 UI의 제공 예를 도시한다.
도 6은 본 발명의 일 실시예에 따른 표시품질의 정도에 대응하는 색상을 갖는 항목을 포함하는 UI의 제공 예를 도시한다.
도 7은 본 발명의 다른 일 실시예에 따른 표시품질에 관한 정보를 각 세그먼트의 방향에 대응하는 가장자리에 표시품질의 정도에 대응하는 크기를 갖도록 제공하는 예를 도시한다.
도 8은 본 발명의 다른 일 실시예에 따른 표시품질에 관한 정보를 각 세그먼트의 방향에 대응하는 가장자리에 표시품질의 정도에 대응하는 색상을 갖도록 제공하는 예를 도시한다.
도 9는 본 발명의 일 실시예에 따른 표시품질이 높은 방향을 가리키는 화살표를 제공하는 예를 도시한다.
도 10은 본 발명의 일 실시예에 따른 시점이0 이동될 때, 표시품질에 관한 정보를 제공하는 예를 도시한다.
도 11은 본 발명의 일 실시예에 따른 시점이 세그먼트간 경계에 근접하는 예를 도시한다.
도 12는 본 발명의 일 실시예에 따른 시점이 세그먼트간 경계에 근접할 때, 표시품질에 관한 정보를 제공하는 예를 도시한다.
도 13은 본 발명의 일 실시예에 따른 표시품질의 정도가 임계레벨 이하일 때, 표시품질에 관한 정보를 제공하는 예를 도시한다.
도 14는 본 발명의 일 실시예에 따른 디스플레이장치의 제어흐름도를 도시한다.
이하에서는 첨부도면을 참조하여 본 발명에 따른 실시예들에 관해 상세히 설명한다. 이하 실시예들의 설명에서는 첨부된 도면들에 기재된 사항들을 참조하는 바, 각 도면에서 제시된 동일한 참조번호 또는 부호는 실질적으로 동일한 기능을 수행하는 구성요소를 나타낸다.
만일, 실시예에서 제1구성요소, 제2구성요소 등과 같이 서수를 포함하는 용어가 있다면, 이러한 용어는 다양한 구성요소들을 설명하기 위해 사용되는 것이며, 용어는 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용되는 바, 이들 구성요소는 용어에 의해 그 의미가 한정되지 않는다. 실시예에서 사용하는 용어는 해당 실시예를 설명하기 위해 적용되는 것으로서, 본 발명의 사상을 한정하지 않는다.
이하 실시예들에 의해 설명되는 본 발명의 사상은 360도로 시점을 변경할 수 있는 3차원 컨텐츠의 영상을 제공하는 디스플레이장치에 적용될 수 있다.
도 1은 본 발명의 일 실시예에 따른 디스플레이장치를 도시한다. 본 발명의 일 실시예에 따른 디스플레이장치(1)는 TV로서 구현될 수 있다. 본 발명의 다른 실시예로서, 디스플레이장치(1)는 스마트폰, 태블릿, 모바일 폰, 컴퓨터, 멀티미디어 재생기, 전자액자, 디지털광고판, LFD, 디지털 사이니지, 셋탑박스, 스마트워치, 헤드마운트형디스플레이, 등의 웨어러블 디바이스, 냉장고 등 영상을 출력할 수 있는 장치로 구현될 수 있으나, 본 발명이 이에 한정되는 것은 아니다.
본 실시예에서의 디스플레이장치(도 3의 1 참조)는 수신된 복수의 세그먼트의 영상을 처리하여 3차원 컨텐츠의 영상을 출력할 수 있는 장치로 구현된다. 3차원 컨텐츠의 영상은 복수의 시점을 갖는 360도 영상일 수 있다. 이하, 3차원 컨텐츠의 영상은 360도 영상이라고도 한다. 본 실시예에서의 디스플레이장치(1)는 3차원 컨텐츠의 영상이 360도 영상인 경우, 3차원 맵핑 오브젝트에 매핑된 영상(100))을 생성할 수 있다. 3차원 맵핑 오브젝트가 구형인 경우, 맵핑된 영상(100)은 이하, '구형영상(100)'이라고도 한다. 중 일 시점(101a, 101b)에 대응하는 영역을 처리하여 얻어진 출력화면(103a, 103b)을 화면에 표시한다. 본 실시예에서의 구형영상(100) 은, 적어도 하나 이상의 렌즈를 장착한 카메라가 서로 다른 방위에 대하여 획득한 복수의 영상을 3차원 맵핑 오브젝트에 맵핑하여 생성된 것일 수 있으며, 경우에 따라 적어도 하나 이상의 렌즈는 광각렌즈일 수 있다. 일 실시예로, 3차원 맵핑 오브젝트는 구형일 수 있으나 이에 한정되지 않는다. 또한, 구형영상(100)을 생성하기 위한 수단은 설명된 예시에 제한되지 않는다. 구형영상(100)은 복수의 카메라로부터 생성된 영상일 수 있다. 디스플레이장치(1)는 적어도 하나의 카메라로부터 구형영상(100)을 수신하거나, 서버, USB저장장치, 컴퓨터 등 외부장치를 통하여 구형영상(100)을 수신할 수 있다. 디스플레이장치(1)는 복수의 영상, 구형영상(100), 구형으로 맵핑되기 전 복수의 영상을 합하여 스티칭한 스티칭영상(도 2의 201 참조)을 외부로부터 수신할 수 있다. 수신되는 영상은 단일 영상으로 수신될 수 있으며, 구현에 따라 복수의 세그먼트 별로 수신될 수도 있다. 각 세그먼트는 해당하는 영역의 영상을 포함하는바, 이하, 세그먼트에 해당하는 영역의 영상을 세그먼트의 영상이라고도 한다. 디스플레이장치(1)는 영상이 세그먼트별로 수신되는 경우, 수신된 세그먼트별로 영상을 처리하여 제공할 수 있다. 일 시점(101)이 아직 수신되지 않은 세그먼트의 영역에 위치하는 경우, 디스플레이장치(1)는 시점(101)에 대응하는 출력영상(103a, 103b)을 원활하게 제공할 수 없다. 또한, 일 시점(101)이 해상도가 낮은 세그먼트의 영역에 위치하는 경우, 시점(101)에 대응하는 출력영상(103a, 103b)의 해상도가 시청중인 영상과 다르게 된다.
도 2는 본 발명의 일 실시예에 따른 컨텐츠의 영상이 처리되는 과정을 도시한다. 컨텐츠의 영상이 360도 시점을 갖는 3차원 컨텐츠 영상인 경우, 입력영상(200)은 적어도 하나의 카메라 혹은 적어도 하나의 렌즈를 포함하는 카메라를 이용하여 서로 다른 방위에 대하여 획득한 복수의 영상을 포함한다. 입력영상(200)에 대하여 적어도 하나의 영상처리를 수행하여 출력영상(207)을 생성한다. 영상처리는 디스플레이장치(1)에서 수행될 수도 있으나, 외부에서 영상처리가 수행되고, 처리된 영상이 디스플레이장치(1)로 전달될 수도 있다. 후술되는 바와 같이, 처리된 영상은, 단일 영상으로 수신될 수 있으며, 구현에 따라 세그먼트(도 4의 부호 400-405 참조)별로 전달될 수도 있다. 영상처리는 스티칭 처리, 맵핑 처리 및 프로젝션 처리를 포함한다.
디스플레이장치(1)는 입력영상(200)을 3D 맵핑 오브젝트에 맵핑하여 구형영상(100)을 생성한다. 3D 맵핑 오브젝트는 구형에 한정되지 아니하며, 6면체인 큐브 등을 더 포함할 수 있다. 이하에서는, 구형에 맵핑하는 실시예 위주로 설명하나, 본 발명의 사상에서 다른 형태의 맵핑처리를 제외하고자 하는 것은 아니다. 디스플레이장치(1)는 이어서, 맵핑된 구형영상(100) 중 일 시점(101)에 대응하는 영역의 곡면 영상을 평면 영상으로 변환하는 프로젝션 처리를 수행하여 평면영상을 생성하고, 이를 출력영상(207)으로 출력한다.
다른 실시예에서, 입력영상(200)이 세그먼트(400-405)별로 수신되는 경우, 디스플레이장치(1)는 구현에 따라 입력영상(200)에 스티칭 처리를 추가적으로 수행한 후 스티칭 처리된 스티칭 영상(201)을 맵핑하여 구형영상(100)을 생성할 수도 있다.
스티칭 처리는 입력영상(200)을 3D 맵핑 오브젝트에 따라 HDRI(high dynamic range imaging, HDRI) 맵 방식 또는 Cube맵 방식을 이용하여 연결(또는 '스티칭')하여 스티칭영상(201)을 생성하는 처리이다. 스티칭처리가 HDRI 맵 방식에 따라 수행될 경우 구형에 맵핑하기 전 단계인 Equirectangular에 맵핑한다. 스티칭처리가 Cube맵 방식에 따라 수행될 경우, 6방향으로 획득한 영상을 정육면체인 큐브에 맵핑한다. 구형(spherical) 맵핑 처리는 생성된 스티칭영상(201)을 구형으로 맵핑하여 구형영상(100)을 생성한다.
다른 실시예로서, 출력영상(207)은 구형영상(100)을 생성하는 단계를 거치지 않고, 시점(101)에 대응하는 스티칭영상(201)의 일 영역으로부터 생성될 수도 있다.
본 발명의 일 실시예에 의한 시점(101)에 대응하는 영역의 선택은 사용자에 의해 결정될 수 있다. 구체적으로, 디스플레이장치(1)는 화면 표시 중에, 시점(101)을 이동시키는 사용자 입력에 따라, 구형 영상에서 이동된 시점(101)에 대응하는 영역을 결정하고, 결정된 영역의 화면을 표시한다. 시점(101)을 이동시키는 사용자명령(이하, '시점이동명령'이라고도 함)은 리모컨을 통해 수신될 수 있다. 디스플레이장치(1)는 구현 방식에 따라 손가락 터치, 헤드 마운트 디스플레이의 움직임 등 다양한 입력수단에 따른 시점이동명령을 수신할 수 있다.
본 발명의 일실시예에 의한 3차원 컨텐츠의 영상은 전술한 바와 같이 세그먼트(도 4의 400-405 참조)별로 전달된다. 디스플레이장치(1)는 외부로부터 복수의 세그먼트(400-405) 별로 컨텐츠의 영상을 수신하고, 수신된 컨텐츠의 영상 중 일 시점(101)에 대응하는 영상을 표시한다. 디스플레이장치(1)는 각 세그먼트(400-405)별로 수신되는 입력영상(200)을 스티칭 및/또는 3D 맵핑 오브젝트에 맵핑함으로써 구형영상(100)을 생성할 수 있다. 디스플레이장치(1)는 또한, 세그먼트(400-405)로 분할된 스티칭영상(201)을 수신하여 세그먼트(400-405)별로 3D 맵핑 오브젝트에 맵핑함으로써 구형영상(100)을 생성하고, 일 시점(101)에 대응하는 영상을 표시할 수 있다. 다른 실시예로서, 디스플레이장치(1)는 세그먼트(400-405)로 분할된 구형영상(100)을 수신하며, 그 중 일 시점(101)에 대응하는 영상을 표시할 수도 있다. 세그먼트(400-405)별로 수신상태가 다른바, 3차원 컨텐츠의 영상의 모든 프레임은 항상 완성된 스티칭영상(201) 또는 구형영상(100)의 형태를 갖는 것은 아닐 수도 있다.
디스플레이장치(1)는 각 세그먼트(400-405)의 수신상태에 기초하여 현재 표시되는 일 시점(101)으로부터 적어도 하나의 인접 시점의 표시품질에 관한 정보를 함께 표시한다.
표시품질이란 사용자가 시점(101)을 이동할 경우, 원활하게 시청을 계속하여 유지할 수 있는지 여부에 대한 정도로서, 현재 표시중인 출력영상(207)에 대응하는 일 시점(101)과 인접한 시점이 위치한 세그먼트(400-405 참조)가 수신되는 속도, 세그먼트(400-405)가 수신된 양, 세그먼트(400-405)가 재생이 가능한 시간 및 세그먼트에 해당하는 영상의 해상도 등을 포함하나 이에 한정되지 않는다. 시점(101)의 이동의 방향은 한정되지 않는다. 디스플레이장치(1)는 시점(101)을 상하/좌우/대각선 방향으로 이동시킬 수 있으며, 전/후진 할 수 있다. 시점(101)의 이동은 화면의 확대 및 축소를 포함한다. 디스플레이장치(1)는 현재 표시중인 시점(101)으로부터 이동 가능한 인접 시점의 표시품질 또는 인접 시점이 위치한 세그먼트(400-4005)의 표시품질에 관한 정보를 제공함으로써, 사용자는 제공된 정보에 기초하여 시점(101)을 이동시키게 되어 끊김 없이 원활한 컨텐츠 이용이 가능하게 된다.
또한, 컨텐츠의 영상은 동영상일 수 있다. 이 경우, 영상은 프레임 단위로 처리되며, 디스플레이장치(1)는 컨텐츠의 영상을 프레임 단위로 수신할 수 있다. 세그먼트(400-405)는 하나의 프레임을 복수개의 영역으로 나눈 것으로, 컨텐츠의 영상이 360도 영상을 포함하는 경우, 디스플레이장치(1)는 각 프레임을 각 세그먼트(400-405)별로 수신한다.
사용자가 시점(101)을 아직 수신되지 않았거나 또는 저해상도의 영상이 수신된 세그먼트(400-405)로 이동시킨 경우, 사용자는 예상치 못한 버퍼링 및 저해상도의 영상으로 인해 컨텐츠의 영상 시청이 방해된다. 디스플레이장치(1)는 사용자가 시점(101)을 원활하게 이동하며 컨텐츠의 영상을 시청할 수 있도록 현재 표시되는 일 시점(101)과 인접한 시점의 표시품질, 예컨대 인접 시점이 위치하는 세그먼트(400-405)의 수신 속도, 세그먼트(400-405)가 수신된 양 또는 세그먼트(400-405)의 해상도, 영상 품질 등 다양한 정보를 제공한다.
도 3은 본 발명의 일 실시예에 따른 디스플레이장치의 블록도를 도시한다. 본 발명의 일 실시예에 따른 디스플레이장치(1)는 수신부(300), 신호처리부(301), 디스플레이부(303) 및 제어부(309)를 포함한다. 본 발명의 일 실시예에 따른 디스플레이장치(1)는 사용자입력부(305) 및 저장부(307) 중 적어도 하나를 더 포함할 수 있다. 도 3에 도시된 본 발명의 일 실시예에 따른 디스플레이장치(1)의 구성은 하나의 예시일 뿐이며, 본 발명의 일 실시예에 따른 디스플레이장치(1)는 도 3에 도시된 구성 외 다른 구성이 추가되거나, 혹은 도 3에 도시된 구성 중 어느 하나가 배제되어 구현될 수도 있다.
수신부(300)는 입력영상(200)을 포함하는 영상신호를 수신한다. 수신부(300)는 영상신호를 수신하기 위한 튜너(tuner)를 구비할 수 있다. 튜너는 복수의 채널 중 사용자에 의해 선택된 어느 하나의 채널의 방송신호를 튜닝하여 수신할 수 있다. 수신부(300)는 서버로부터 네트워크를 통해 세그먼트(400-405)별로 영상신호를 수신할 수 있다. 일례로서, 수신부(300)는 외부장치와 통신하기 위한 통신부를 포함한다.
통신부는 유선통신을 위한 접속부를 포함하며, 접속부는 HDMI(high definition multimedia interface), HDMI-CEC(consumer electronics control), USB, 컴포넌트(component) 등의 규격에 따른 신호/데이터를 송/수신할 수 있으며, 이들 각각의 규격에 대응하는 적어도 하나 이상의 커넥터 또는 단자를 포함한다. 통신부는 유선 LAN(local area network)을 통해 복수의 서버들과 유선 통신을 수행할 수 있다.
통신부는 유선 접속을 위한 커넥터 또는 단자를 포함하는 접속부 이외에도 다양한 다른 통신 방식으로 구현될 수 있다. 예컨대, 외부 장치와 무선 통신을 수행하기 위해 RF(radio frequency)신호를 송수신하는 RF회로를 포함할 수 있으며, Wi-fi, 블루투스, 지그비(Zigbee), UWM(Ultra-Wide Band), Wireless USB, NFC(Near Field Communication) 중 하나 이상의 통신을 수행하도록 구성될 수 있다.
사용자입력부(305)는 사용자입력을 수신하여 제어부(309)로 전달한다. 사용자입력부(305)는 사용자입력의 방식에 따라서 다양한 형태로 구현될 수 있는바, 예를 들면 디스플레이장치(1)의 외측에 설치된 메뉴버튼, 리모트 컨트롤러(remote controller, 이하 '리모컨'이라고도 함)로부터 수신되는 사용자입력의 리모컨신호를 수신하는 리모컨신호수신부, 디스플레이부(303)에 마련되어 사용자의 터치입력을 수신하는 터치스크린(touch-screen), 사용자의 제스처입력을 감지하는 카메라, 사용자의 음성입력을 인식하는 마이크, 사용자의 움직임을 감지하는 센서 등으로 구현될 수 있다. 사용자입력은 시점이동명령을 포함한다. 디스플레이장치(1)는 시점이동명령에 기초하여 시점(101)에 대응하는 영역을 변경하며, 구형영상(100) 중 변경된 일 영역에 대응하는 출력영상(203)을 디스플레이부(303)를 통해 표시한다.
저장부(307)는 디스플레이장치(1)의 다양한 데이터를 저장하도록 구성된다. 저장부(307)는 플래쉬 메모리(flash memory), EPROM 또는 EEPROM 등과 같은 비휘발성 메모리로 구현될 수 있다. 저장부(307)는 디스플레이장치(1)의 는 읽기 또는 쓰기 속도가 비휘발성 메모리에 비해 빠른 DRAM 또는 SRAM과 같은 휘발성 메모리(volatile memory)를 더 구비할 수 있다.
신호처리부(301)는 수신부(300)를 통해 수신되는 컨텐츠의 영상에 대해 영상처리를 수행하고, 영상처리가 수행된 영상신호를 디스플레이부(303)에 출력함으로써 디스플레이부(303)에 출력영상이 표시되게 한다. 신호처리부(301)는 제어부(309)의 제어에 따라, 일 시점(101)에 대응하는 영역에 영상처리를 수행하여 출력영상(203)을 생성한다. 또한, 시점(101)이 이동되면, 이동된 시점(101)에 대응하는 영역의 출력영상(203)을 생성한다. 신호처리부(301)는 하나 이상의 하드웨어 및/또는 소프트웨어 모듈 혹은 그 조합으로 구현될 수 있다. 시점(101)은 전술한 바와 같이, 사용자입력에 따라 결정된다.
다른 일 실시예로서, 시점(101)을 세그먼트(400-405)의 표시품질의 정보에 기초하여 결정할 수 있다. 예컨대, 디스플레이장치(1)는 사용자의 시점이동명령에 따라 시점(101)이 표시품질의 정도가 소정 레벨 이하의 세그먼트(400-405)에 대응하는 영역으로 이동될 때, 시점이동명령에 불구하고, 시점(101)을 더 이동시키지 않을 수 있다. 이때, 디스플레이장치(1)는 영상을 세그먼트별로 전송중인 외부서버에 사용자가 시점을 이동하고자 하는 영역에 대응하는 세그먼트(400-405)를 우선적으로 전송하도록 요청하여 추가적인 사용자의 시점이동명령에 대비할 수 있다.
디스플레이부(303)는 출력영상(203)을 표시한다. 디스플레이부(303)의 구현방식은 한정되지 않으며, 예를 들면 액정(liquid crystal), 플라즈마(plasma), 발광 다이오드(light-emitting diode), 유기발광 다이오드(organic light-emitting diode), 면전도 전자총(surface-conduction electron-emitter), 탄소 나노 튜브(carbon nano-tube), 나노 크리스탈(nano-crystal) 등의 다양한 디스플레이 방식으로 구현될 수 있다.
디스플레이부(303)는, 액정 방식인 경우에, 액정 디스플레이 패널과 액정 디스플레이 패널에 광을 공급하는 백라이트유닛과, 액정 디스플레이 패널을 구동시키는 패널구동기판 등을 포함한다. 디스플레이부(303)는, 백라이트유닛없이, 자발광 소자인 OLED 패널로 구현될 수도 있다.
제어부(309)는 디스플레이장치(1)의 제반 구성들이 동작하기 위한 제어를 수행한다. 제어부(309)는 이러한 제어 동작을 수행할 수 있도록 하는 제어프로그램과, 제어프로그램이 설치되는 비휘발성 메모리, 설치된 제어프로그램의 적어도 일부가 로드되는 휘발성의 메모리 및 로드된 제어프로그램을 실행하는 적어도 하나의 마이크로프로세서 혹은 CPU(central processing unit)를 포함할 수 있다. 제어프로그램은, BIOS, 디바이스드라이버, 운영체계, 펌웨어, 플랫폼 및 응용프로그램(어플리케이션) 중 적어도 하나의 형태로 구현되는 프로그램(들)을 포함할 수 있다. 하나의 실시예로서, 응용프로그램은, 디스플레이장치(1)의 제조 시에 디스플레이장치(1)에 미리 설치 또는 저장되거나, 혹은 추후 사용 시에 외부로부터 응용프로그램의 데이터를 수신하여 수신된 데이터에 기초하여 디스플레이장치(1)에 설치될 수 있다. 응용프로그램의 데이터는, 예컨대, 어플리케이션 마켓과 같은 외부 서버로부터 디스플레이장치(1)로 다운로드 될 수도 있다.
일 실시예로서, 제어부(309)는 일 시점(101)이 위치한 세그먼트(400-405)들의 표시품질의 정보에 기초하여 표시중인 영상의 해상도를 변경시키도록 신호처리부(301)를 제어할 수 있다. 예컨대, 시점(101)이 해상도가 720pixel인 제1세그먼트(404)에 위치하다가, 시점(101)이 해상도가 480pixel인 제2세그먼트(401)로 이동하여 시점(101)에 대응하는 영역의 일부는 제1세그먼트(404)에 다른 일부는 제2세그먼트(401)를 포함할 때, 제어부(309)는 출력영상(203)이 480pixel의 해상도를 갖도록 신호처리부(301)를 제어할 수 있다.
도 4는 본 발명의 일 실시예에 따른 복수의 세그먼트(400-405)로 구분되는 컨텐츠의 영상을 도시한다. 제어부(309)는 하나의 실시예로서, 세그먼트(400-405) 별로 수신되는 컨텐츠의 영상 중 일 시점(101)의 영상(410)과, 각 세그먼트(400-405)의 수신상태에 기초하여 표시중인 시점(101)의 인접 시점에 대한 표시품질에 관한 정보를 디스플레이부(303)를 통해 표시한다. 제어부(309)는 현재 시점(101)이 위치한 세그먼트(401)와 다른 세그먼트(400, 402, 403, 404, 405)의 표시품질에 관한 정보를 표시할 수도 있다. 전술한 바와 같이 컨텐츠의 영상은 입력영상(200), 스티칭영상(201) 또는 구형영상(100) 상태에서 세그먼트(400-405) 별로 수신부(300)를 통해 수신된다. 도면에서는 도시의 편의를 위해 구형영상(100)의 복수의 세그먼트(400-405)를 도시하나 영상이 수신되는 방법을 이에 한정하는 것은 아니다. 전술한 바와 같이 디스플레이장치(1)는 세그먼트(400-405)별로 스티칭영상(201)을 수신하여 3D 맵핑 오브젝트에 맵핑함으로써 구형영상(100)을 생성할 수도 있다. 또한, 복수의 세그먼트(400-405)에 대응하는 구형영상(100)에서의 영역 역시 도면에 한정되지 않는다.
컨텐츠의 영상이 360도 영상인 경우, 데이터 양이 상당히 크지만, 수신부(300)가 단위 시간 내에 수신할 수 있는 데이터의 양은 제한되어 있다. 제어부(309)는 사용자의 시청을 최적화 하기 위해 시청중인 영역(화면)에 대응하는 세그먼트(401) 이거나, 현재 시점(101)과 인접한 시점의 세그먼트(400, 402, 404)들을 다른 세그먼트(403, 405)보다 우선적으로 서버로부터 수신하기 위해 우선적으로 요청할 수 있다. 서버는 디스플레이장치(1)의 요청 및 디스플레이장치(1)의 데이터 처리 속도 등을 고려하여 세그먼트(400-405) 별로 컨텐츠를 전송하며, 이때 우선순위가 낮은 세그먼트(400, 402)는 네트워크 상태에 따라 낮은 해상도로 전송될 수 있다. 세그먼트(400-405)의 우선순위는 다른 사용자들의 실시태양 분석, 영상 제작자의 의도, 네트워크 상태, 현재 시점(101)의 위치 등 다양한 조건에 의해 결정될 수 있다.
이하에서는, 표시품질에 관한 정보를 제공하는 다양한 실시예를 도면을 참조하여 살펴보겠다. 표시품질에 관한 정보는 각 세그먼트(400-405)의 표시품질의 정도에 대응하는 항목을 포함하는 UI로 제공되거나, 표시품질의 정도를 나타내는 텍스트로 제공하거나, 화면의 일부에 대응하는 크기 또는 색상을 갖도록 표시하는 등 다양한 방식으로 제공될 수 있다. 이하, 다양한 실시예 중에서 도시의 편의를 위해 선택된 몇 개의 실시예만 설명하나, 설명된 예에 본 발명의 사상이 한정되는 것은 아니다.
도 5는 본 발명의 일 실시예에 따른 표시품질의 정도에 대응하는 크기를 갖는 항목을 포함하는 UI의 제공 예를 도시한다. 본 발명의 일 실시예에 따른 제어부(309)는 표시품질의 정도에 대응하는 크기를 갖는 항목을 포함하는 UI(500)를 디스플레이부(303)에 표시할 수 있다. UI(500)는 인접 시점을 가리키는 복수의 화살표를 포함한다. 또한, 도면에는 각 화살표가 가리키는 시점이 위치한 세그먼트(400-405)가 수신되는 속도를 표시하고 있으나, 이에 한정되지 않는다. 각 화살표의 크기는 인접 시점의 표시품질의 정도에 대응할 수 있다. 예컨대, 세그먼트(400-405)가 수신되는 속도가 100mb/s인 경우 화살표의 크기가 가장 크고, 속도가 50mb/s인 경우 화살표의 크기가 중간이며, 속도가 5mb/s인 경우 화살표의 크기가 가장 작다. 인접 시점 또는 인접 시점이 위치한 각 세그먼트(400-405)가 수신되는 속도와 화살표의 크기는 모두 예시일 뿐으로, 본 발명의 사상이 이에 한정되는 것은 아니다.
사용자로부터 세그먼트(400-405)가 수신되는 속도가 5mb/s인 일 방향(503)으로 시점(101)을 이동시키는 시점이동명령이 수신되어, 시점(101b)이 두 세그먼트(401, 402)간 경계에 위치한다. 이동된 시점(101b) 중 제1세그먼트(401)에 대응하는 영역의 영상(510)은 원활하게 표시되나, 제2세그먼트(402)에 대응하는 영역의 영상(511)은 서버로부터 덜 수신되어 출력영상이 제대로 표시되지 못한다.
이동된 시점(101b)의 일부가 제2세그먼트(402)에 위치함에 따라, 제2세그먼트(402)의 우선순위가 높아진다. 디스플레이장치(1)는 제2세그먼트(402)의 우선순위에 기초하여 외부서버에 제2세그먼트(402)의 우선적인 전송을 요청한다. 디스플레이장치(1)의 요청에 따라 제2세그먼트(402)가 다운로드 되는 속도가 빨라진다. 제2세그먼트(402)가 다운로드 되는 속도가 변경됨에 따라 디스플레이장치(1)는 이동된 시점(101b)의 인접 시점 중 제2세그먼트(402)를 가리키는 방향에 대응하는 항목(505)의 크기 및 텍스트가 변경된 UI(501)를 제공한다. 도면은 단지 예시일 뿐으로, 각 세그먼트(401, 402)의 형태, 크기는 도면에 도시된 형태 및 크기에 한정되지 않는다.
도 6은 본 발명의 일 실시예에 따른 표시품질의 정도에 대응하는 색상을 갖는 항목을 포함하는 UI의 제공 예를 도시한다. 또한, 도면에는 각 화살표에 가리키는 세그먼트(400-405)가 재생 가능한 시간을 표시하고 있으나, 이에 한정되지 않는다. UI(600)는 표시품질에 대응하는 색상을 갖는 복수의 화살표를 포함할 수 있다. 일례로서, 제어부(309)는 UI(600)의 표시품질이 제1정도인 세그먼트(400-405)에 위치한 인접 시점을 가리키는 화살표의 색상을 제1색상을 되도록 하고, 표시품질이 제1정도와 다른(높거나 낮은) 제2정도인 세그먼트(400-405)에 위치한 인접 시점을 가리키는 화살표의 색상을 제2색상이 되도록 할 수 있다. 제어부(309)는 표시품질의 정도가 제1정도와 제2정도의 사이인 제3정도인 세그먼트(400-405)에 위치한 인접 시점을 가리키는 화살표의 색상을 제1색상과 제2색상 사이인 제3색상이 되도록 할 수 있다. 제3색상은 제1색상 및 제2색상과 소정의 색차가 나는 색상일 수 있다. 소정의 색차는 제3정도가 제1색상 및 제2색상과 어느 정도 차이가 나는지에 기초하여 결정될 수 있다. 예컨대, 제1정도가 1분이고, 제1색상은 R: 255 G: 255 B: 255의 화이트이며, 제2정도가 0초이고, 제2색상은 R: 0, G: 0, B: 0의 블랙인 경우, 제3정도가 30초일 때, 제3색상은 제1색상과 제2색상으로부터 같은 정도의 색차를 갖는 R: 122.5, G: 122.5, B: 122.5의 회색일 수 있다. 도면에서는 도시의 편의상 서로 다른 표시품질에 대응하는 화살표가 서로 다른 명암을 갖는 예만 도시하고 있으나, 이에 한정되지 않는다.
화살표의 색상은 표시품질의 정도마다 각각 대응시켜 기 저장될 수도 있지만, 최저와 최고 정도에 각 대응하는 두 색상들이 결정된 후 표시품질의 정도에 따라 한 색상에서 다른 색상으로 그라데이션될 수도 있다.
다른 일 실시예에 의하면, 인접 시점이 위치한 세그먼트(400-405)를 가리키는 화살표는 현재 시점(101)과 세그먼트(400-405) 사이의 거리에 따라 2개 이상의 색상을 가질 수 있다. 예컨대, 시점(101)이 제1세그먼트(404)에 위치하고, 제2세그먼트(401)로부터 소정의 거리만큼 멀리 떨어져 있다면, 제어부(309)는 제2세그먼트(401)를 가리키는 화살표 중 일부는 제1세그먼트(404)의 표시품질에 대응하는 재1색상을 갖고, 나머지 부분은 제2세그먼트(401)에 대응하는 제2색상을 갖도록 할 수 있다. 이 경우, 제1색상과 제2색상의 경계를 소정의 거리에 대응하도록 구분하여 표시하거나 제1색상과 제2색상이 자연스럽게 그라데이션 되도록 할 수 있다.
도 7은 본 발명의 다른 일 실시예에 따른 표시품질에 관한 정보를 인접한 시점의 방향에 대응하는 가장자리에 표시품질의 정도에 대응하는 크기를 갖도록 제공하는 예를 도시한다. 본 발명의 일 실시예에 따른 제어부(309)는 표시품질에 관한 정보를 현재 시점과 인접한 시점의 방향에 대응하는 가장자리에 제공할 수 있다. 일례로서, 제어부(309)는 표시되는 영상의 가장자리의 방향에 대응하는 시점이 위치한 세그먼트(400-405)의 표시품질의 정도에 대응하는 두께의 쉐이딩(700)을 표시할 수 있다. 쉐이딩(700)의 두께는 쉐이딩에 대응하는 시점이 위치한 세그먼트(400-405)의 해상도에 대응할 수 있다. 예컨대, 시점이 위치한 세그먼트(400-405)의 해상도가 높을수록 시점에 대응하는 방향의 쉐이딩(700)이 두껍고, 시점이 위치한 세그먼트(400-405)의 해상도가 낮을수록 쉐이딩(700)이 얇다. 각 세그먼트(400-405)의 해상도와 쉐이딩(700)의 두께는 모두 예시일 뿐으로, 본 발명의 사상이 이에 한정되는 것은 아니다.
사용자로부터 세그먼트(400-405)가 인접 시점의 세그먼트(400-405)의 일 방향으로 시점(101a)을 이동시키는 시점이동명령이 수신되고, 제어부(309)는 시점(101a)을 이동시킨다. 이동된 시점(101b)은 두 세그먼트(401, 404)간 경계에 위치한다.
이동된 시점(101b) 중 제1세그먼트(401)에 대응하는 영역의 영상(710)은 표시되던 높은 해상도로 표시되나, 제2세그먼트(404)에 대응하는 영역의 영상(711)은 제1세그먼트(401)보다 저해상도로 표시된다. 시점(101b)이 제2세그먼트(404)에 위치하여, 제2세그먼트(404)의 우선순위가 높아진다.
디스플레이장치(1)는 우선순위에 기초하여 외부서버에 제2세그먼트(404)를 우선적으로 전송할 것을 요청하며, 외부서버는 디스플레이장치(1)로 요청에 기초하여 제2세그먼트(404)를 우선적으로 전송하게 되어 높은 해상도를 유지할 수 있게 된다. 다른 실시예에 따르면, 디스플레이장치(1)는 우선순위에 기초하여 외부서버에 제2세그먼트(404)의 높은 화질의 영상을 요청할 수도 있다.
도면은 단지 예시일 뿐으로, 각 세그먼트(401, 404)의 형태, 크기는 도면에 도시된 형태 및 크기에 한정되지 않는다.
도 8은 본 발명의 다른 일 실시예에 따른 표시품질에 관한 정보를 인접한 시점의 방향에 대응하는 가장자리에 인접 시점이 위치한 각 세그먼트(404-405)의 표시품질의 정도에 대응하는 색상을 갖도록 제공하는 예를 도시한다. 또한, 도면은 각 가장자리에 인접 시점이 위치하는 각 세그먼트(400-405)의 잔여 프레임 수를 텍스트로 표시하고 있으나, 이에 한정되지 않는다. 제어부(309)는 표시되는 영상의 가장자리의 방향에 대응하는 시점의 세그먼트(400-405)의 표시품질의 정도에 대응하는 색상의 쉐이딩(800, 801, 803, 805)을 표시할 수 있다. 일례로서, 제어부(309)는 표시품질이 제1정도인 세그먼트(400-405)가 위치한 시점을 가리키는 방향의 쉐이딩(800, 803)의 제1색상을 갖도록 하고, 제2정도인 세그먼트(400-405)가 위치한 시점을 가리키는 방향의 쉐이딩(805)의 색상을 제2색상을 갖도록 하며, 제1정도와 제2정도 사이의 제3정도인 세그먼트(400-405)가 위치한 시점을 가리키는 방향의 쉐이딩(801)의 색상을 제1색상과 제2색상의 사이인 제3색상을 갖도록 할 수 있다. 예컨대, 도8을 참조하면, 잔여 프레임 수가 100 프레임인 세그먼트(400-405)에 대응하는 쉐이딩(800, 803)의 색상은 화이트이고, 잔여 프레임 수가 50 프레임인 세그먼트(400-405)에 대응하는 쉐이딩(801)의 색상은 그레이 이며, 잔여 프레임 수가 15 프레임인 세그먼트(400-405)에 대응하는 쉐이딩(805)의 색상은 블랙이다. 도시의 편의를 위해 서로 다른 표시품질에 대응하는 쉐이딩(800, 801, 803, 805)을 서로 명암의 정도를 달리 갖도록 도시하고 있으나, 이에 한정되는 것은 아니다.
도 9는 본 발명의 일 실시예에 따른 표시품질이 높은 방향을 가리키는 화살표를 제공하는 예를 도시한다. 제어부(309)는 사용자가 원활하게 시점(101)을 이동시킬 수 있는 방향으로 시점(101)의 이동을 유도하기 위해, 복수의 세그먼트(400-405) 중 표시품질의 정도가 다른 세그먼트(400-405)보다 높은 세그먼트(400-405)가 위치하는 시점을 가리키는 화살표(900)를 디스플레이부(303)에 표시할 수 있다.
다른 예로서, 화살표(900)는 복수의 세그먼트(400-405) 중 표시품질의 정도가 다른 세그먼트(400-405)보다 낮은 세그먼트(400-405)가 위치하는 시점을 가리킬 수 있다.
이하에서는, 도면을 참조하여 표시품질에 관한 정보가 제공되는 다양한 조건의 실시예를 소개한다. 각 세그먼트(400-405)의 표시품질에 관한 정보는 항상 제공될 수 있지만, 소정의 조건이 만족될 때만 제공될 수 있다. 예컨대, 시점(101)이 이동될 때, 시점(101)이 고정되었을 때, 시점(101)이 세그먼트(400-405)간 경계에 근접할 때, 표시품질의 정도가 임계레벨을 초과할 때, 임계레벨 이하일 때, 표시품질의 정도가 소정의 정도 이상 변화가 있을 때 등 다양하게 구현될 수 있으나, 이에 한정되는 것은 아니다. 이하, 다양한 실시예 중에서 도시의 편의를 위해 선택된 몇 개의 실시예만 설명하나, 설명된 예에 본 발명의 사상이 한정되는 것은 아니다.
도 10은 본 발명의 일 실시예에 따른 시점(101)이 이동될 때, 표시품질에 관한 정보를 제공하는 예를 도시한다. 제어부(309)는 시점(101)이 정지 중에는 표시품질에 관한 정보를 제공하지 않다가 시점(101)이 이동하기 시작할 때, 시점(101)의 원활한 이동을 돕기 위해 인접 시점이 위치한 각 세그먼트(400-405)의 표시품질에 관한 정보(1000)를 제공할 수 있다. 전술한 바와 같이, 표시품질에 관한 정보(1000)는 인접 시점 또는 인접 시점이 위치한 각 세그먼트(400-405)에 대응하는 항목을 포함하는 UI, 텍스트 및 기타 다양한 방식으로 제공될 수 있다.
도 11은 본 발명의 일 실시예에 따른 시점(101)이 세그먼트간 경계에 근접하는 예를 도시하며, 도 12는 본 발명의 일 실시예에 따른 시점(101)이 세그먼트간 경계에 근접할 때, 표시품질에 관한 정보를 제공하는 예를 도시한다. 제어부(309)는 시점(101)이 이동하여 세그먼트(400-405)의 경계로부터 소정 거리 이내로 근접할 때, 표시품질에 관한 정보를 제공할 수 있다. 즉, 제어부(309)는 시점(101)이 이동하여 현재 시점이 위치한 세그먼트(400-405)의 경계로 시점(101)이 근접하면, 시점(101)이 다른 세그먼트(400-405)로 이동할 수 있다고 판단하여, 각 인접 시점이 위치한 세그먼트(400-405)의 표시품질에 관한 정보(1200)를 제공한다.
다른 예로서, 제어부(309)는 시점(101)이 소정 거리 이내로 근접한 세그먼트(400-405)의 표시품질에 관한 정보만 제공할 수 있다. 일례로서, 제어부(309)는 도 11의 시점(101)이 제1세그먼트(401)에 위치하다가, 제2세그먼트(402)의 경계에 근접하면, 제2세그먼트(402)의 표시품질에 관한 정보를 제공한다. 마찬가지로, 제어부(309)는 시점(101)이 제3세그먼트(404)의 경계로 근접하면, 제3세그먼트(404)의 표시품질에 관한 정보를 제공할 것이다.
도면은 단지 예시일 뿐으로, 각 세그먼트(401, 402, 404)의 형태, 크기는 도면에 도시된 형태 및 크기에 한정되지 않는다.
도 13은 본 발명의 일 실시예에 따른 표시품질의 정도가 임계레벨 이하일 때, 표시품질에 관한 정보를 제공하는 예를 도시한다. 제어부(309)는 사용자가 원활하게 시점을 이동할 수 있도록 표시품질의 정도가 임계레벨 이하인 세그먼트(400-405)의 표시품질에 관한 정보(1300)를 제공한다. 다른예로서, 제어부(309)는 표시품질의 정도가 임계레벨 이상인 세그먼트(400-405)의 표시품질에 관한 정보(1300)를 제공할 수도 있다. 도면은 표시되는 영상 중 표시품질의 정도가 임계레벨 이하인 세그먼트(400-405)의 방향에 대응하는 가장자리에 표시품질에 관한 정보(1300)를 쉐이딩 형태로 제공하는 예를 도시하나, 이에 한정되는 것은 아니다.
도 14는 본 발명의 일 실시예에 따른 디스플레이장치의 제어흐름도를 도시한다.
먼저, 동작 S1400에서, 수신부(300)는 컨텐츠의 영상을 수신한다. 그리고, 동작 S1401에서, 신호처리부(301)는 수신되는 영상을 처리한다. 그리고, S1402에서, 디스플레이부(303)는 영상을 표시한다. 마지막으로, 동작 S1403에서, 제어부(309)는 세그먼트(400-405) 별로 수신되는 컨텐츠의 영상 중 일 시점의 영상과 각 세그먼트의 수신상태에 기초하여 적어도 하나의 세그먼트(400-405)에 대한 표시품질에 관한 정보를 표시한다.
그 밖에, 도 14에 도시된 디스플레이장치의 제어방법에 있어서, 도 1내지 도 13을 참조하여 설명한 디스플레이장치(1)의 구성의 특징이 동일 혹은 유사하게 적용될 수 있다.
1 - 디스플레이장치
300 - 수신부
301 - 신호처리부
303 - 디스플레이부
305 - 사용자입력부
307 - 저장부
309 - 제어부

Claims (20)

  1. 디스플레이장치에 있어서,
    수신부;
    영상처리부;
    디스플레이부; 및
    상기 수신부를 통해 컨텐츠의 복수의 세그먼트 영상을 수신하고,
    상기 수신된 복수의 세그먼트 영상에 기반하여 3차원 오브젝트에 매핑된 컨텐츠 영상을 생성하도록 상기 영상처리부를 제어하고,
    상기 생성된 컨텐츠 영상 중 제1시점에 해당하는 제1영역을 표시하도록 상기 디스플레이부를 제어하고,
    상기 제1시점에 해당하는 제1영역을 표시하는 동안, 상기 복수의 세그먼트 영상의 수신상태에 기초하여 상기 제1시점에 인접한 제2시점에 대응하는 상기 컨텐츠 영상의 제2영역의 표시품질에 관한 정보를 표시하도록 상기 디스플레이부를 제어하고,
    시점을 이동시키는 사용자 명령을 통해 상기 제2시점이 선택될 때, 상기 제2시점에 대응하는 상기 컨텐츠 영상의 제2영역을 표시하도록 상기 디스플레이부를 제어하는 제어부를 포함하는 디스플레이장치.
  2. 제 1항에 있어서,
    상기 표시품질은 상기 복수의 세그먼트 영상이 수신되는 속도, 상기 복수의 세그먼트 영상이 수신된 양(amount), 상기 복수의 세그먼트 영상을 재생 가능한 시간 또는 상기 복수의 세그먼트 영상의 해상도 중 적어도 하나를 포함하는 디스플레이장치.
  3. 제 1항에 있어서,
    상기 제어부는 상기 표시품질의 정도를 텍스트로 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  4. 제 1항에 있어서,
    상기 제어부는 상기 표시품질의 정도에 대응하는 크기를 갖는 항목을 포함하는 UI(유저인터페이스: UI)를 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  5. 제 1항에 있어서,
    상기 제어부는 상기 표시품질이 제1정도일 때, 제1색상을 표시하도록 상기 디스플레이부를 제어하고, 상기 표시품질이 상기 제1정도보다 높은 제2정도일 때, 제2색상을 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  6. 제 5항에 있어서,
    상기 제어부는 상기 표시품질이 상기 제1정도와 상기 제2정도 사이의 제3정도일 때, 상기 제1색상과 상기 제2색상 사이의 제3색상을 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  7. 제 1항에 있어서,
    상기 제어부는 상기 표시품질의 정도가 다른 세그먼트 영상 보다 높거나 가장 낮은 세그먼트 영상의 방향을 가리키는 화살표를 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  8. 제 1항에 있어서
    상기 제어부는 상기 표시중인 컨텐츠 영상 중 상기 제2시점의 방향에 대응하는 가장자리에 상기 표시품질에 관한 정보를 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  9. 제 1항에 있어서,
    상기 제어부는 상기 시점의 이동이 정지된 상태에서 이동을 시작할 때, 상기 표시품질에 관한 정보를 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  10. 제 1항에 있어서,
    상기 제어부는 상기 제1시점이 이동하여 상기 제1시점과 상기 제2시점 사이의 경계로부터 소정 거리 이내로 근접할 때, 상기 표시품질에 관한 정보를 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  11. 제 1항에 있어서,
    상기 제어부는 상기 표시품질의 정도가 임계레벨 보다 낮아질 때, 상기 표시품질에 관한 정보를 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  12. 제 1항에 있어서,
    상기 제어부는 상기 표시품질이 소정의 정도 이상 변경될 때, 상기 표시품질에 관한 정보를 표시하도록 상기 디스플레이부를 제어하는 디스플레이장치.
  13. 디스플레이장치의 제어방법에 있어서,
    복수의 세그먼트 영상을 수신하는 단계;
    상기 수신되는 영상을 처리하는 단계; 및
    상기 처리된 영상을 표시하는 단계를 포함하며,
    상기 처리된 영상을 표시하는 단계는,
    상기 수신된 복수의 세그먼트 영상에 기반하여 3차원 오브젝트에 매핑된 컨텐츠 영상을 생성하는 단계;
    상기 생성된 컨텐츠 영상 중 제1시점에 해당하는 제1영역을 표시하는 단계;
    상기 제1시점에 해당하는 제1영역을 표시하는 동안, 상기 복수의 세그먼트 영상의 수신상태에 기초하여 상기 제1시점에 인접한 상기 컨텐츠 영상의 제2영역의 표시품질에 관한 정보를 표시하는 단계; 및
    시점을 이동시키는 사용자 명령을 통해 제2시점이 선택될 때, 상기 제2시점에 대응하는 상기 컨텐츠 영상의 제2영역을 표시하는 단계를 포함하는 디스플레이장치의 제어방법.
  14. 제 13항에 있어서,
    상기 표시품질은 상기 복수의 세그먼트 영상이 수신되는 속도, 상기 복수의 세그먼트 영상이 수신된 양(amount), 상기 복수의 세그먼트 영상을 재생 가능한 시간 또는 상기 복수의 세그먼트 영상의 해상도 중 적어도 하나를 포함하는 디스플레이장치의 제어방법.
  15. 제 13항에 있어서,
    상기 제2영역의 표시품질에 관한 정보를 표시하는 단계는,
    상기 표시품질의 정도를 텍스트로 표시하는 단계를 포함하는 디스플레이장치의 제어방법.
  16. 제 13항에 있어서,
    상기 제2영역의 표시품질에 관한 정보를 표시하는 단계는,
    상기 표시품질의 정도에 대응하는 크기를 갖는 항목을 포함하는 UI(유저인터페이스: UI)를 표시하는 단계를 포함하는 디스플레이장치의 제어방법.
  17. 제 13항에 있어서,
    상기 제2영역의 표시품질에 관한 정보를 표시하는 단계는,
    상기 표시품질이 제1정도일 때, 제1색상을 표시하고, 상기 표시품질이 상기 제1정도보다 높은 제2정도일 때, 제2색상을 표시하는 단계를 포함하는 디스플레이장치의 제어방법.
  18. 제 17항에 있어서,
    상기 제2영역의 표시품질에 관한 정보를 표시하는 단계는,
    상기 표시품질이 상기 제1정도와 상기 제2정도 사이의 제3정도일 때, 상기 제1색상과 상기 제2색상 사이의 제3색상을 표시하는 단계를 포함하는 디스플레이장치의 제어방법.
  19. 제 13항에 있어서,
    상기 제2영역의 표시품질에 관한 정보를 표시하는 단계는,
    상기 표시품질의 정도가 다른 세그먼트의 영상보다 높거나 가장 낮은 세그먼트 영상의 방향을 가리키는 화살표를 표시하는 단계를 포함하는 디스플레이장치의 제어방법.
  20. 제 13항에 있어서,
    상기 제2영역의 표시품질에 관한 정보를 표시하는 단계는,
    상기 표시중인 세그먼트 영상 중 상기 제2시점의 방향에 대응하는 가장자리에 상기 표시품질에 관한 정보를 표시하는 단계를 포함하는 디스플레이장치의 제어방법.

KR1020160155256A 2016-11-21 2016-11-21 디스플레이장치 및 그 제어방법 KR102633595B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020160155256A KR102633595B1 (ko) 2016-11-21 2016-11-21 디스플레이장치 및 그 제어방법
CN201780071610.2A CN109983763B (zh) 2016-11-21 2017-11-15 显示设备及其控制方法
EP17872804.4A EP3507646B1 (en) 2016-11-21 2017-11-15 Display apparatus and control method thereof
JP2019526500A JP6744492B2 (ja) 2016-11-21 2017-11-15 ディスプレイ装置及びその制御方法
PCT/KR2017/012939 WO2018093143A1 (en) 2016-11-21 2017-11-15 Display apparatus and control method thereof
US15/819,455 US10893194B2 (en) 2016-11-21 2017-11-21 Display apparatus and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160155256A KR102633595B1 (ko) 2016-11-21 2016-11-21 디스플레이장치 및 그 제어방법

Publications (2)

Publication Number Publication Date
KR20180057081A KR20180057081A (ko) 2018-05-30
KR102633595B1 true KR102633595B1 (ko) 2024-02-05

Family

ID=62145656

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160155256A KR102633595B1 (ko) 2016-11-21 2016-11-21 디스플레이장치 및 그 제어방법

Country Status (6)

Country Link
US (1) US10893194B2 (ko)
EP (1) EP3507646B1 (ko)
JP (1) JP6744492B2 (ko)
KR (1) KR102633595B1 (ko)
CN (1) CN109983763B (ko)
WO (1) WO2018093143A1 (ko)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
KR20180051288A (ko) * 2016-11-08 2018-05-16 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10999602B2 (en) 2016-12-23 2021-05-04 Apple Inc. Sphere projected motion estimation/compensation and mode decision
US11259046B2 (en) 2017-02-15 2022-02-22 Apple Inc. Processing of equirectangular object data to compensate for distortion by spherical projections
US10924747B2 (en) 2017-02-27 2021-02-16 Apple Inc. Video coding techniques for multi-view video
CN107016728A (zh) * 2017-03-08 2017-08-04 惠州Tcl移动通信有限公司 一种在虚拟现实场景中模拟摄影的方法及系统
JP6773214B2 (ja) * 2017-03-31 2020-10-21 日本電気株式会社 情報処理装置、情報処理方法および情報処理プログラム
US10491819B2 (en) * 2017-05-10 2019-11-26 Fotonation Limited Portable system providing augmented vision of surroundings
US11093752B2 (en) 2017-06-02 2021-08-17 Apple Inc. Object tracking in multi-view video
US10754242B2 (en) 2017-06-30 2020-08-25 Apple Inc. Adaptive resolution and projection format in multi-direction video
US20190005709A1 (en) * 2017-06-30 2019-01-03 Apple Inc. Techniques for Correction of Visual Artifacts in Multi-View Images
US20230031530A1 (en) * 2020-01-08 2023-02-02 Arris Enterprises Llc Service Switching for Content Output
WO2023244829A1 (en) * 2022-06-16 2023-12-21 Axon Enterprise, Inc. Generating video data for simulating human perception
CN115035808B (zh) * 2022-06-29 2024-03-01 卡莱特云科技股份有限公司 球形屏显示区域的播放方法、服务器、系统、设备及介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150317832A1 (en) * 2014-05-01 2015-11-05 Michael John Ebstyne World-locked display quality feedback
US20160277772A1 (en) * 2014-09-30 2016-09-22 Telefonaktiebolaget L M Ericsson (Publ) Reduced bit rate immersive video

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8427538B2 (en) * 2004-04-30 2013-04-23 Oncam Grandeye Multiple view and multiple object processing in wide-angle video camera
JP4727329B2 (ja) * 2005-07-15 2011-07-20 パナソニック株式会社 画像合成装置及び画像合成方法
KR100956266B1 (ko) 2008-07-15 2010-05-07 (주)씨디네트웍스 플레이어 프로그램의 화면을 통한 복수개의 화면 제공 방법및 장치
KR101629479B1 (ko) * 2009-11-04 2016-06-10 삼성전자주식회사 능동 부화소 렌더링 방식 고밀도 다시점 영상 표시 시스템 및 방법
JP2012118832A (ja) * 2010-12-02 2012-06-21 Sony Corp 情報処理装置、情報処理方法及びプログラム
KR20120080504A (ko) 2011-01-07 2012-07-17 김회원 멀티미디어 재생기 조작을 위한 그래픽 사용자 인터페이스 및 응용 방법
EP2697720B1 (en) 2011-04-13 2023-02-22 Razer (Asia-Pacific) Pte. Ltd. Computer peripheral display and communication device providing an adjunct 3d user interface
US8184069B1 (en) * 2011-06-20 2012-05-22 Google Inc. Systems and methods for adaptive transmission of data
CN102737097A (zh) * 2012-03-30 2012-10-17 北京峰盛博远科技有限公司 基于lod透明纹理的三维矢量实时动态叠加技术
JP5975739B2 (ja) * 2012-06-01 2016-08-23 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、およびパノラマ動画表示方法
KR102118438B1 (ko) * 2013-01-28 2020-06-04 한국전자통신연구원 차량용 헤드업 디스플레이 장치 및 그 방법
EP2824885B1 (en) * 2013-07-12 2019-01-23 Provenance Asset Group LLC A manifest file format supporting panoramic video
KR102611448B1 (ko) 2014-05-29 2023-12-07 네버마인드 캐피탈 엘엘씨 콘텐트를 전달 및/또는 콘텐트를 재생하기 위한 방법들 및 장치
US10007333B2 (en) * 2014-11-07 2018-06-26 Eye Labs, LLC High resolution perception of content in a wide field of view of a head-mounted display
US10027873B2 (en) * 2014-11-18 2018-07-17 The Invention Science Fund Ii, Llc Devices, methods and systems for visual imaging arrays
KR20160071797A (ko) * 2014-12-12 2016-06-22 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR102234477B1 (ko) * 2015-01-15 2021-04-01 한국전자통신연구원 영상 품질에 기초한 파노라마 영상 생성 장치 및 방법
US10863217B2 (en) * 2015-02-07 2020-12-08 Ssimwave Inc. Method and system for smart adaptive video streaming driven by perceptual quality-of-experience estimations
GB2550589B (en) * 2016-05-23 2019-12-04 Canon Kk Method, device, and computer program for improving streaming of virtual reality media content

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150317832A1 (en) * 2014-05-01 2015-11-05 Michael John Ebstyne World-locked display quality feedback
US20160277772A1 (en) * 2014-09-30 2016-09-22 Telefonaktiebolaget L M Ericsson (Publ) Reduced bit rate immersive video

Also Published As

Publication number Publication date
JP2020518141A (ja) 2020-06-18
JP6744492B2 (ja) 2020-08-19
EP3507646A4 (en) 2019-12-04
CN109983763B (zh) 2021-08-17
US10893194B2 (en) 2021-01-12
EP3507646B1 (en) 2021-04-28
WO2018093143A1 (en) 2018-05-24
US20180146138A1 (en) 2018-05-24
KR20180057081A (ko) 2018-05-30
EP3507646A1 (en) 2019-07-10
CN109983763A (zh) 2019-07-05

Similar Documents

Publication Publication Date Title
KR102633595B1 (ko) 디스플레이장치 및 그 제어방법
KR102431712B1 (ko) 전자장치, 그 제어방법 및 그 컴퓨터프로그램제품
US20130088559A1 (en) Display apparatus and display method thereof
KR102508682B1 (ko) 표시장치와 그 영상 처리 방법
US10389889B2 (en) Display apparatus and control method thereof
US11064150B2 (en) High resolution user interface
KR102508148B1 (ko) 디지털 디바이스 및 그를 이용한 컬러 제어 시스템 및 방법
US11600211B2 (en) Image display apparatus and method thereof
KR102561860B1 (ko) 전자장치 및 그 제어방법
CN111078926A (zh) 一种人像缩略图像的确定方法及显示设备
US11310441B2 (en) Electronic device for generating a background image for a display apparatus and operation method thereof
KR20160015823A (ko) 디스플레이 장치 및 이의 화면을 제어하는 방법
CN112399235B (zh) 一种智能电视的摄像头拍照效果增强方法及显示设备
KR102554743B1 (ko) 디스플레이장치 및 그 제어방법
US11899854B2 (en) Image display device and method of operating the same
US11545022B2 (en) Image display apparatus for detecting battery condition of remote control device and method thereof
US20230179819A1 (en) Image display device and operation method thereof
KR102557573B1 (ko) 디지털 디바이스 및 상기 디지털 디바이스에서 데이터 처리 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant