KR20170076471A - 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법 - Google Patents

변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법 Download PDF

Info

Publication number
KR20170076471A
KR20170076471A KR1020150186772A KR20150186772A KR20170076471A KR 20170076471 A KR20170076471 A KR 20170076471A KR 1020150186772 A KR1020150186772 A KR 1020150186772A KR 20150186772 A KR20150186772 A KR 20150186772A KR 20170076471 A KR20170076471 A KR 20170076471A
Authority
KR
South Korea
Prior art keywords
display device
user
visible region
image
screen
Prior art date
Application number
KR1020150186772A
Other languages
English (en)
Inventor
안드레이 피선느코
에프게니 아키신
미콜라 알리에크시에이브
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020150186772A priority Critical patent/KR20170076471A/ko
Priority to EP16879136.6A priority patent/EP3385819A4/en
Priority to PCT/KR2016/011327 priority patent/WO2017111268A1/ko
Priority to US16/063,867 priority patent/US10606350B2/en
Publication of KR20170076471A publication Critical patent/KR20170076471A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G09F19/12—Advertising or display means not otherwise provided for using special optical effects
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
    • G09F27/005—Signs associated with a sensor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/301—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements flexible foldable or roll-able electronic displays, e.g. thin LCD, OLED
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G06F1/325—Power saving in peripheral device
    • G06F1/3265—Power saving in display device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G06F1/3287—Power saving characterised by the action undertaken by switching off individual functional units in the computer system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04102—Flexible digitiser, i.e. constructional details for allowing the whole digitising part of a device to be flexed or rolled like a sheet of paper
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Abstract

영상을 디스플레이 하는 변형 가능한 디스플레이 장치 및 그 방법을 개시한다. 영상을 디스플레이 하는 방법은, 디스플레이 장치의 현재 형태를 결정하는 단계, 디스플레이 장치의 사용자를 촬영하는 단계, 촬영된 이미지에 기초하여 디스플레이 장치에 대한 사용자의 상대적인 위치를 검출하는 단계, 결정된 현재 형태 및 검출된 위치에 기초하여, 디스플레이 장치의 화면의 전체 영역 중에서 가시 영역을 결정하는 단계, 및 결정되는 가시 영역 상에 영상을 디스플레이하는 단계를 포함할 수 있다.

Description

변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법{DEFORMING DISPLAY APPARATUS AND METHOD FOR DISPLAYING IMAGE BY USING THE SAME}
본 개시는 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법에 관한 것으로서, 보다 상세하게는, 디스플레이 장치의 현재 상태 및 사용자의 위치에 따라 삼차원 영상을 제공하는 장치 및 방법에 관한 것이다.
디스플레이 장치의 하드웨어 및 소프트웨어가 발달함에 따라, 디스플레이 장치는 수많은 애플리케이션을 함께 실행하고, 다양한 정보를 처리할 수 있게 되었다. 또한, 플렉시블 디스플레이 장치가 개발됨에 따라, 플렉시블 디스플레이 장치의 변형되는 상태에 따라 애플리케이션을 효율적으로 실행하기 위한 요구가 생겨나고 있다. 특히, 디스플레이 장치에서 영상을 재생하는 경우, 디스플레이 장치의 변형 상태에 따라 영상을 효율적으로 재생하는 기술이 요구되고 있다.
또한, 기존의 디스플레이 장치에서 삼차원 영상을 디스플레이 하는 경우, 디스플레이 장치와 사용자와의 거리에 관계없이 삼차원 영상이 디스플레이 되었다. 따라서, 사용자는 효과적인 삼차원 영상 시청을 위하여 디스플레이 장치와의 거리를 스스로 설정해야 하는 번거로움이 존재하였다.
한편, 선행 기술로서, 한국공개특허 제2014-0105922호는 이벤트에 따라서 삼차원 영상을 표시하는 입체 표시 방법에 대하여 개시하고 있다. 하지만, 상술한 선행 기술은 디스플레이의 변형 상태 또는 사용자와 디스플레이 장치의 상대적인 위치에 기반한 효과적인 영상을 제공할 수 없는 문제가 있었다.
일 실시예에 의하여, 디스플레이 장치의 현재 형태 및 디스플레이 장치와 사용자의 상대적인 위치에 기초하여 영상을 효과적으로 디스플레이 할 수 있는, 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법이 제공될 수 있다.
일 개시에 의하여, 변형 가능한 디스플레이 장치가 영상을 디스플레이하는 방법을 제공하며, 본 방법은 디스플레이 장치의 현재 형태를 결정하는 단계, 디스플레이 장치의 사용자를 촬영하는 단계, 촬영된 이미지에 기초하여 디스플레이 장치에 대한 사용자의 상대적인 위치를 검출하는 단계, 결정된 현재 형태 및 검출된 위치에 기초하여, 디스플레이 장치의 화면의 전체 영역 중에서 가시 영역을 결정하는 단계, 및 결정된 가시 영역 상에 영상을 디스플레이하는 단계를 포함할 수 있다.
여기서, 영상은 삼차원의 영상이며, 가시 영역의 속성에 따라 삼차원의 영상을 렌더링하는 단계를 더 포함할 수 있다.
또한, 가시 영역의 속성은, 가시 영역의 크기, 위치 및 모양 중 적어도 하나를 포함할 수 있다.
또한, 화면의 전체 영역 중 가시 영역을 제외한 영역을 비활성화하는 단계를 더 포함할 수 있다.
또한, 화면의 전체 영역 중 가시 영역에 표시되는 배경 화면의 색상을 변경시키는 단계를 더 포함할 수 있다.
또한, 디스플레이 장치의 사용자를 촬영하는 단계는 사용자의 눈동자를 포함하는 사용자의 신체의 적어도 일부를 촬영하는 단계를 포함하고, 사용자의 상대적인 위치를 검출하는 단계는, 사용자의 눈동자를 포함하는 영상에 기초하여, 사용자의 시선 위치를 결정하며, 가시 영역을 결정하는 단계는 사용자의 시선 위치에 기초하여, 가시 영역을 결정할 수 있다.
또한, 사용자의 시선 위치가 변화함에 따라, 가시 영역을 변경하는 단계, 및 변경된 가시 영역 상에 영상을 디스플레이하는 단계를 포함할 수 있다.
또한, 변경된 가시 영역의 속성에 기초하여 디스플레이될 영상을 렌더링하는 단계를 더 포함할 수 있다.
또한, 가시 영역을 결정하는 단계는, 상시 사용자의 시선 위치와, 디스플레이 장치와 사용자와의 거리, 영상에 포함되는 사용자의 제스처(gesture) 또는 사용자의 시선 방향 중 적어도 어느 하나에 기초하여 가시 영역을 결정할 수 있다.
또한, 사용자의 시선의 방향이 화면을 벗어나는 경우, 가시 영역의 변경을 중단하는 단계를 더 포함할 수 있다.
여기서, 디스플레이 장치는 복수의 카메라를 포함하며, 사용자를 촬영하는 단계는, 결정된 디스플레이 장치의 현재 형태에 기초하여 복수의 카메라 중 적어도 하나를 활성화시키는 단계를 포함할 수 있다.
또한, 디스플레이 장치의 형태가 변형됨을 감지하는 단계, 디스플레이 장치의 형태가 변형됨에 따라, 변형된 형태에 기초하여, 가시 영역을 변경하는 단계, 및 변경되는 가시 영역 상에 영상을 디스플레이하는 단계를 더 포함할 수 있다.
또한, 디스플레이 장치는 복수의 화면을 포함하며, 디스플레이 장치의 현재 형태에 따라, 복수의 화면 중 적어도 하나를 선택하며, 가시 영역은, 선택된 적어도 하나의 화면의 전체 영역 중에서 결정되는 것일 수 있다.
또한, 디스플레이 장치의 다른 사용자를 촬영하는 단계, 촬영된 이미지에 기초하여 디스플레이 장치에 대한 다른 사용자의 상대적인 위치를 검출하는 단계,결정된 형태 및 검출된 다른 사용자의 위치에 기초하여, 디스플레이 장치의 화면의 전체 영역 중에서 다른 가시 영역을 결정하는 단계, 및 결정되는 다른 가시 영역 상에 영상을 디스플레이 하는 단계를 더 포함할 수 있다.
또한, 다른 가시 영역은, 디스플레이 장치의 화면의 전체 영역 중에서 설정된 가시 영역과 겹치지 않을 수 있다.
또한, 다른 가시 영역에 디스플레이 되는 영상은, 가시 영역에 디스플레이 되는 영상과 상이할 수 있다.
일 실시예에 의한 어느 하나의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 포함할 수 있다.
일 개시에 의하여, 영상을 디스플레이하는 변형 가능한 디스플레이 장치를 제공하며, 본 장치는 디스플레이 장치의 사용자를 촬영하는 감지부, 디스플레이 장치의 현재 형태를 결정하고, 촬영된 이미지에 기초하여 디스플레이 장치에 대한 사용자의 상대적인 위치를 검출하고, 결정된 현재 형태 및 검출된 위치에 기초하여, 디스플레이 장치의 화면의 전체 영역 중에서 가시 영역을 결정하는 제어부, 및 결정된 가시 영역 상에 영상을 디스플레이 하는 디스플레이 부를 포함할 수 있다.
여기서, 영상은 삼차원의 영상이며, 제어부는 가시 영역의 속성에 따라 삼차원의 영상을 렌더링할 수 있다.
또한, 가시 영역의 속성은, 가시 영역의 크기, 위치 및 모양 중 적어도 하나를 포함할 수 있다.
여기서, 제어부는 화면의 전체 영역 중 가시 영역을 제외한 영역을 비활성화 할 수 있다.
또한, 제어부는 화면의 전체 영역 중 가시 영역에 표시되는 배경 화면의 색상을 변경시킬 수 있다.
또한, 감지부는, 사용자의 눈동자를 포함하는 사용자의 신체의 적어도 일부를 촬영하고, 제어부는 사용자의 눈동자를 포함하는 영상에 기초하여, 사용자의 시선 위치를 결정하며, 사용자의 시선 위치에 기초하여, 가시 영역을 결정할 수 있다.
또한, 제어부는, 사용자의 시선 위치가 변화함에 따라, 가시 영역을 변경하고, 디스플레이 부는, 변경된 가시 영역 상에 영상을 디스플레이할 수 있다.
또한, 제어부는 변경된 가시 영역의 속성에 기초하여 디스플레이될 영상을 렌더링할 수 있다.
또한, 제어부는 사용자의 시선 위치와, 디스플레이 장치와 사용자와의 거리, 영상에 포함되는 사용자의 제스처(gesture) 또는 사용자의 시선 방향 중 적어도 어느 하나에 기초하여 가시 영역을 결정할 수 있다.
또한, 제어부는 사용자의 시선의 방향이 화면을 벗어나는 경우, 가시 영역의 변경을 중단할 수 있다.
또한, 감지부는 복수의 카메라를 포함하며,제어부는 결정된 디스플레이 장치의 현재 형태에 기초하여 복수의 카메라 중 적어도 하나를 활성화시킬 수 있다.
또한, 제어부는 디스플레이 장치의 형태가 변형됨에 따라, 변형된 형태에 기초하여, 가시 영역을 변경할 수 있으며, 디스플레이 부는 변경되는 가시 영역 상에 영상을 디스플레이할 수 있다.
여기서, 디스플레이 부는 복수의 화면을 포함하며, 제어부는디스플레이 장치의 현재 형태에 따라, 복수의 화면 중 적어도 하나를 선택하며, 가시 영역은, 선택된 적어도 하나의 화면의 전체 영역 중에서 결정되는 것일 수 있다.
또한, 감지부는 디스플레이 장치의 다른 사용자를 촬영하고, 제어부는 촬영된 이미지에 기초하여 디스플레이 장치에 대한 다른 사용자의 상대적인 위치를 검출하고, 결정된 형태 및 검출된 다른 사용자의 위치에 기초하여, 디스플레이 장치의 화면의 전체 영역 중에서 다른 가시 영역을 결정하고, 디스플레이 부는 결정되는 다른 가시 영역 상에 영상을 디스플레이할 수 있다.
여기서, 다른 가시 영역은, 디스플레이 장치의 화면의 전체 영역 중에서 설정된 가시 영역과 겹치지 않는 것 일 수 있다.
또한, 다른 가시 영역에 디스플레이 되는 영상은 가시 영역에 디스플레이 되는 영상과 상이할 수 있다.
일 실시예에 의하여, 디스플레이 장치의 형태 및 사용자의 위치에 따라 가시 영역으로 설정되는 화면에 대해 최적화된 삼차원 영상을 제공할 수 있다.
일 실시예에 의하여, 디스플레이 장치의 형태 및 사용자의 위치에 따라 가시 영역 외의 화면 영역으로 결정되는 화면을 비활성화함으로써, 디스플레이 장치의 전원을 절약하고, 에너지를 효율적으로 사용할 수 있다.
일 실시예에 의하여, 복수의 화면을 포함하는 디스플레이 장치를 통해 삼차원 영상을 효율적으로 디스플레이함으로써, 디스플레이 장치를 다방면으로 이용할 수 있는 효과가 있다.
일 실시예에 의하여, 입체적 영상이 필요한 어플리케이션의 활용이 증대될 수 있다.
도 1은 일 실시예에 따른 사용자의 위치에 따라 영상이 디스플레이 되는 변형 가능한 디스플레이 장치를 도시한 도면이다.
도 2는 일실시예에 의한 디스플레이 장치를 이용한 디스플레이 방법의 흐름을 도시한 도면이다.
도 3a 및 도 3b는 일 실시예에 의하여 현재 형태에 따라 영상을 디스플레이 하는 디스플레이 장치를 나타내는 도면이다.
도 4는 일 실시예에 의하여 사용자의 위치에 따라 가시 영역을 결정하는 방법을 나타내는 흐름도이다.
도 5a 및 도 5b는 일 실시예에 의한 사용자의 시선 위치에 기초하여 가시 영역을 결정하는 일예를 나타내는 도면이다.
도 6은 일 실시예에 의하여 디스플레이 장치에 대한 사용자의 위치를 고려하여 가시 영역을 결정하는 일례를 나타내는 도면이다.
도 7은 일 실시예에 의한 가시 영역의 속성에 따라 영상을 렌더링하는 방법을 나타내는 흐름도이다.
도 8은 일 실시예에 의한 삼차원 영상을 디스플레이 하는 디스플레이 장치를 나타내는 도면이다.
도 9a 및 9b는 일 실시예에 의한 삼차원 영상을 디스플레이하는 변형 가능한 디스플레이 장치를 예시적으로 나타낸 도면이다.
도 10은 일 실시예에 의하여, 디스플레이 장치의 형태가 변형됨에 따라 영상을 디스플레이 하는 방법을 도시한 흐름도이다.
도 11은 일실시예에 의한, 디스플레이 장치의 형태가 변형됨에 따라 영상을 디스플레이 하는 일 실시예를 나타내는 도면이다.
도 12는 일 실시예에 의한, 디스플레이 장치의 형태가 변형됨에 따라 영상을 디스플레이 하는 일 실시예를 나타내는 도면이다.
도 13은 일 실시예에 의한 디스플레이 장치의 형태에 따른 삼차원 영상을 렌더링하는 방법을 나타내는 도면이다.
도 14는 일 실시예에 의한 시선 위치의 변화에 따라 가시 영역을 변경하는 방법을 나타내는 흐름도이다.
도 15, 16 및 17은 일 실시예에 의하여, 사용자의 상대적인 위치의 변경에 따라 가시 영역이 변경되는 실시예를 도시한 도면이다.
도 18은 일 실시예에 의하여, 다른 사용자가 존재하는 경우 다른 가시 영역 상에 영상을 디스플레이 하는 방법을 나타내는 흐름도이다.
도 19는 일 실시예에 의하여, 다른 사용자가 존재하는 경우 영상을 디스플레이 하는 디스플레이 장치를 나타내는 도면이다.
도 20은 일 실시예에 의하여 디스플레이 장치에서 영상을 디스플레이 하는 방법을 나타내는 흐름도이다.
도 21은 일 실시예에 의한, 디스플레이 장치의 형태 및 사용자의 시선에 따라 논리적 스크린 및 물리적 스크린을 결정하는 것을 나타내는 도면이다.
도 22a 내지 도 22c는 일 시예에 의하여 디스플레이 장치에서 논리적 스크린을 결정하는 것을 설명하기 위한 도면이다.
도 23은 일 실시예에 의하여, 사용자의 위치 및 디스플레이 장치의 현재 형태에 기초하여 논리적 스크린을 결정하는 것을 설명하는 도면이다.
도 24는 일 실시예에 의하여 논리적 화면의 위상을 결정하는 공간 좌표의 구성을 나타내는 도면이다.
도 25는 일 실시예예 의하여 논리적 스크린을 계산한 것을 설명하기 위한 그래프이다.
도 26은 일 실시예에 의하여, 디스플레이 장치에서 객체를 디스플레이 하는 것을 나타낸 도면이다.
도 27은 일 실시예에 의하여, 파이프(pipe) 라인을 사용하여 삼차원 영상을 렌더링 하는 디스플레이 장치를 나타내는 도면이다.
도 28은 일 실시예에 의하여, 복수의 뷰포트를 기초로 렌더링 된 영상을 논리적 스크린에 표시하는 것을 나타내는 도면이다.
도 29 및 도 30은 일 실시예에 의한 디스플레이 장치의 구성을 나타내는 기능적 블록도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
또한, 본 명세서에서 디스플레이 장치는 형태의 변형이 가능한 디스플레이 장치일 수 있으며, 예를 들어, 플렉시블 디바이스, 폴딩 디바이스 등을 포함할 수 있다. 플렉시블 디바이스란, 휘거나 구부릴 수 있는 디스플레이 기판을 이용하여 유저 인터페이스를 화면에 표시하는 디스플레이 장치로서, 예를 들어, 접거나(Foldable) 말 수 있는(Rollable) 디스플레이 기판을 이용할 수 있다.
본 실시예들 전체에서 “폴딩 동작(folding motion)”또는 “벤딩 동작(bending motion)”이란 플렉시블 디바이스 또는 플렉시블 디스플레이가 접히거나 또는 휘어지는 움직임을 의미한다. 반대로, 본 실시예들 전체에서 “언폴딩 동작(unfolding motion)”또는 “언벤딩 동작(unbending motion)”이란 플렉시블 디바이스 또는 플렉시블 디스플레이가 펼쳐지는 움직임을 의미한다. 이에 대한 보다 상세한 정의는, 후술할 도 1을 참조하여 설명하도록 한다.
특히, 본 실시예들 전체에서 “변형(deforming)”이란 “폴딩(접힘)” 또는 “벤딩(휨)” 등과 같이, 플렉시블 디바이스의 외적 형태가 달라진 상태를 의미한다. 따라서, 본 실시예들 전체에서 “변형(deforming)”의 용어는 “폴딩(접힘)”, “언폴딩(펼침)(unfolding)”, “벤딩(휨 또는 구부러짐)”, “언벤딩(펼침)(unbending)” 등의 용어로 대체되어 해석될 수 있다.
일 실시예에 의하여 “디스플레이 장치”는 일 실시예에 의한 디스플레이 장치로서, 적어도 하나 이상의 화면을 가지며, 변형이 가능한 디스플레이 장치를 의미할 수 있다. 이하에서, “변형이 가능한 디스플레이 장치”, “플렉시블 디스플레이 장치”, “폴더형 디스플레이 장치”, ”멀티 스크린 디스플레이 장치”, “분절된 디스플레이 장치”, “엣지형 디스플레이 장치” 및 기타 디스플레이 장치는 모두 일 실시예에 의한 “디스플레이 장치(100)”로 혼용되어 사용될 수 있다.
이하 첨부된 도면을 참고하여 본 발명을 상세히 설명하기로 한다.
도 1은 일 실시예에 따른 사용자의 위치에 따라 영상이 디스플레이 되는 변형 가능한 디스플레이 장치를 도시한 도면이다.
도 1에 도시된 바와 같이, 일 실시예에 따른 디스플레이 장치(100)는 변형이 가능한 디스플레이 장치일 수 있다.
디스플레이 장치(100)는 모바일 장치일 수 있으나, 이는 일 실시예에 불과하며, 디스플레이를 포함하는 전자 장치로 구현될 수 있다. 예를 들어, 디스플레이 장치(100)는 TV, 태블릿 PC, 디지털 카메라, 캠코더, 노트북 컴퓨터(laptop computer), 태블릿 PC, 데스크탑, 전자책 단말기, 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션, MP3 플레이어, 착용형 기기(wearable device) 등과 같은 다양한 전자 장치로 구현될 수 있다. 또한, 디스플레이 장치(100)는 고정형 또는 이동형일 수 있다.
도 1에서는 변형이 가능한 디스플레이 장치(100)의 일 실시예로서 플렉시블 디스플레이 장치를 예를 들어 설명하도록 한다.
디스플레이 장치(100)의 출력 해상도는 예를 들어, HD(High Definition), Full HD, Ultra HD, 또는 Ultra HD 보다 더 선명한 해상도를 포함할 수 있다.
도 1에 도시된 디스플레이 장치(100)는 사용자(300)를 향하여 볼록하게 휘어질 수 있다. 즉, 디스플레이 기판에서 외부로 노출된 화면이 사용자(300)를 향하여 볼록하게 휘어질 수 있다.
디스플레이 기판의 테두리에는, 예를 들어, 압전 센서 또는 광 센서가 위치할 수 있으며, 디스플레이 장치(100)는, 압전 센서 또는 광 센서를 이용하여 디스플레이 장치가 어떤 형태로 변형되었는지 여부를 판단하고 디스플레이 장치의 현재 형태를 결정할 수 있다.
또한, 디스플레이 장치(100)에서 디스플레이 기판의 변형 정도가 연속적으로 변화될 수 있으며, 이 경우, 제어부(110)는 디스플레이 장치의 현재 형태의 변화를 실시간으로 감지할 수 있다.
일 실시예에서 “사용자”라는 용어는 디스플레이 장치(100)를 이용하여, 영상의 기능 또는 동작을 제어하는 사람을 의미하며, 시청자, 관리자 또는 설치 기사를 포함할 수 있다.
디스플레이 장치(100)는 디스플레이 장치에 대한 사용자(300)의 위치를 검출하기 위하여 사용자(300)를 감지할 수 있다.
디스플레이 장치(100)는 감지된 사용자(300)의 이미지에 기초하여 사용자(300)의 상대적인 위치를 검출할 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태와 사용자(300)의 상대적인 위치에 기초하여, 디스플레이 장치(100)의 화면의 전체 영역 중에서 가시 영역(10)을 결정할 수 있다.
여기서, “가시 영역”이란 디스플레이 장치의 전체 화면 영역 중 사용자(300)가 인식할 수 있는 화면 영역으로 결정된 화면 영역을 의미할 수 있다. 예를 들어, 도 1에서 보여지다시피, 디스플레이 장치(100)의 화면이 사용자(300)를 향하여 볼록하게 휘어진 경우, 사용자(300)는 화면의 전체 영역 중에서 사용자와 대향하지 않는 부분의 영역을 인식할 수 없다. 즉, 사용자(300)는 사용자(300) 쪽으로 보여지는 화면만을 인식할 수 있는 바, 화면의 전체 영역 중에서 사용자 쪽으로 사용자에게 보여지는 영역이 가시 영역(10)으로 결정될 수 있다.
가시 영역(10)은 디스플레이 장치(100)의 현재 형태 및 디스플레이 장치(100)에 대한 사용자(300)의 상대적인 위치에 따라 결정될 수 있다. 또한, 가시 영역(10)은 디스플레이 장치(100)의 현재 형태 및 디스플레이 장치(100)에 대한 사용자(300)의 상대적인 위치에 따라 변경될 수 있다.
디스플레이 장치(100)는 결정된 가시 영역 상에 영상을 디스플레이 할 수 있다. 즉, 디스플레이 장치(100)는 디스플레이 부에 포함된 전체 화면 영역 중 가시 영역(10) 상에만 영상이 디스플레이 되도록 제어할 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)는 전체 화면 영역 중 가시 영역(10) 외의 화면 영역을 비활성화 시킬 수 있다. 여기서, 비활성화는 전체 화면 영역 중 가시 영역(10) 외의 화면 영역에 대한 전원을 차단시키는 것, 영상을 디스플레이 하지 않는 것 또는 화면의 배경화면 색을 변경시키는 것 등을 의미할 수 있다.
여기서, 가시 영역(10) 상에 디스플레이 되는 영상은 삼차원의 영상일 수 있다. 제어부(110)는 가시 영역(10)의 속성에 따라 디스플레이 되는 영상을 렌더링(rendering) 할 수 있다.
렌더링이란 2차원의 화상에 광원·위치·색상 등 외부의 정보를 고려하여 사실감을 불어넣어, 삼차원 화상을 만드는 과정을 의미할 수 있으며, 평면적으로 보이는 물체에 그림자나 농도의 변화 등을 주어 입체감이 들게 함으로써 사실감을 추가하는 컴퓨터그래픽상의 과정을 의미할 수 있다.
예를 들어, 렌더링 방법으로는 물체의 모서리만을 그려주는 와이어프레임(wireframe) 렌더링을 들 수 있다. 또 많이 이용되는 렌더링 방법으로 레이트레이싱(raytracing) 렌더링이 있으며, 레이트레이싱 렌더링은 광선의 굴절·반사 등을 계산해서 광선이 시작되었던 조명에 이를 때까지의 경로를 역추적해 나가는 과정을 통해서 각 픽셀의 색상을 결정하는 렌더링이다.
일 실시예에 의하여, 디스플레이 장치(100)는 렌더링 된 삼차원 영상을 디스플레이 부(120)의 화면을 통해, 즉, 가시 영역(10) 상에 디스플레이 되도록 제어할 수 있다.
도 2는 일 실시예에 의한 디스플레이 장치를 이용한 디스플레이 방법의 흐름을 도시한 도면이다.
도 2에 도시된 바와 같이, 일 실시예에 의한 디스플레이 장치(100)에서는 디스플레이 장치의 현재 형태 및 사용자(300)의 상대적인 위치에 기초하여 결정된 화면 상에 영상을 디스플레이 할 수 있다.
S210에서는 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태를 결정할 수 있다. 디스플레이 장치(100)의 현재 형태는, 변형 가능한 디스플레이 장치(100)의 현재 형태를 의미할 수 있다. 예를 들어, 디스플레이 장치(100)의 현재 현태는 디스플레이 장치(100)의 휘어진 정도, 휘어진 방향, 디스플레이 장치(100)의 폴딩 상태, 디스플레이 장치(100)에 포함된 복수의 화면의 형태 및 폴딩 각도, 다면체로 이루어진 디스플레이 장치의 놓여진 상태 등을 포함할 수 있다.
S220에서 디스플레이 장치(100)는 디스플레이 장치(100)의 사용자(300)를 촬영할 수 있다. 일 실시예에 의하여 감지부는 디스플레이 장치(100)의 사용자(300)를 촬영할 수 있다. 일 실시예에 의하여, 감지부는 디스플레이 장치(100)에 포함되는 카메라 부를 의미할 수 있다.
디스플레이 장치(100)는 복수의 카메라를 포함할 수 있다. S220에서는, 디스플레이 장치(100)의 현재 상태에 기초하여 복수의 카메라 중 적어도 하나를 활성화 시킬 수 있다. 예를 들어, 디스플레이 장치(100)의 전면 및 후면 각각에 카메라가 포함되어 있는 경우, 사용자(300)가 위치한 쪽의 카메라만 활성화 시킬 수도 있다.
S230에서, 디스플레이 장치(100)는 촬영된 이미지에 기초하여 디스플레이 장치(100)에 대한 사용자(300)의 상대적인 위치를 검출할 수 있다. 즉, 디스플레이 장치(100)는 촬영되는 이미지 내의 사용자 이미지의 위치에 따라, 디스플레이 장치(100)에 대한 사용자(300)의 상대적인 위치를 추론할 수 있다.
S240에서 디스플레이 장치(100)는 결정된 디스플레이 장치(100)의 현재 형태 및 디스플레이 장치(100)에 대한 사용자(300)의 상대적인 위치에 기초하여, 디스플레이 장치(100)의 화면의 전체 영역 중에서 가시 영역을 결정할 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태에 따라 영상이 디스플레이 될 화면을 결정할 수 있다. 또한, 사용자(300)의 상대적인 위치에 따라서 사용자(300)가 인식할 수 있는 화면의 영역, 즉, 가시 영역을 결정할 수 있다. 즉, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태에 따라, 영상이 디스플레이 될 상태의 화면을 결정하며, 이에 더하여, 사용자(300)의 상대적인 위치에 따라서 영상이 디스플레이 될 수 있는 화면의 영역을 결정할 수 있다.
S250에서, 디스플레이 장치(100)는 결정된 가시 영역 상에 영상을 디스플레이 할 수 있다. 즉, 제어부(110)는 디스플레이 장치(100)의 현재 상태 및 사용자(300)의 상대적인 위치에 따라 결정되는 가시 영역 상에만 영상을 디스플레이 할 수 있다. 이에 따라, 디스플레이 장치(100)가 영상을 디스플레이 하기 위해 소모되는 에너지를 최적화 할 수 있다.
도 3a 및 도 3b는 일 실시예에 의하여 디스플레이 장치가 디스플레이 장치의 현재 형태에 따라 영상을 디스플레이 하는 예시를 나타내는 도면이다.
도 3a 및 도 3b에 도시된 바와 같이, 일 실시예에 의하여 디스플레이 장치(100)의 형태 변화에 기초하여, 디스플레이 장치(100)가 영상을 디스플레이 하기 위하여 사용되는 가시 영역이 변화될 수 있다.
도 3a는 디스플레이 장치(100)가 사용자(300)를 향하여 볼록하게 휘어진 경우를 나타내는 도면이다. 즉, 디스플레이 기판에서 외부로 노출된 화면이 사용자(300)를 향하여 볼록하게 휘어질 수 있다.
도 3a에 도시된 바와 같이, 카메라로 구현된 감지부는 사용자(300)를 촬영할 수 있다. 디스플레이 장치(100)는 사용자(300)가 촬영된 이미지를 바탕으로 사용자(300)의 위치를 검출할 수 있다.
또한, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 사용자(300)의 위치에 기초하여 가시 영역을 결정할 수 있다. 도 3a에서, 디스플레이 장치(100)는 전체 화면 영역 중 사용자(300)쪽으로 사용자(300)에게 보여지는 보여지는 화면 영역(122)을 가시 영역으로 결정할 수 있다.
디스플레이 장치(100)는 가시 영역으로 결정된 화면 영역(122) 상에 디스플레이 할 삼차원 영상을 렌더링할 수 있다. 또한 제어부(110)는 렌더링 된 삼차원 영상을 가시 영역상에 디스플레이 할 수 있다.
또한, 디스플레이 장치(100)는 가시 영역으로 결정된 화면 영역 외의 나머지 화면 영역의 화면 색상을 변경할 수 있다. 이로 인하여, 사용자(300)는 전체 화면 영역 중 가시 영역으로 결정되는 화면의 모양, 위치 및 크기 등의 속성을 인식할 수 있다.
도 3b는 디스플레이 장치(100)가 사용자(300)를 향하여 오목하게 휘어진 경우를 나타낸 도면이다. 예를 들어, 디스플레이 장치(100)의 양 끝이 사용자(300)를 향하고, 사용자(300)가 바라보는 화면이 오목하게 휘어진 경우를 포함할 수 있다.
도 3b에 도시된 바와 같이, 카메라로 구현된 감지부(130)는 사용자(300)를 촬영할 수 있다. 디스플레이 장치(100)는 사용자(300)가 촬영된 이미지를 바탕으로 사용자(300)의 위치를 검출할 수 있다.
또한, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 사용자(300)의 위치에 기초하여 가시 영역을 결정할 수 있다. 도 3b에서, 디스플레이 장치(100)는 사용자(300) 쪽으로 사용자(300)에게 보여지는 영역인, 전체 화면 영역(123)을 가시 영역으로 결정할 수 있다. 도 3b와 같은 예시에서는 전체 화면 영역(123)이 가시 영역으로 결정되기 때문에, 가시 영역 외의 화면 영역으로서 배경 화면 색이 다른 영역은 존재하지 않을 수 있다.
디스플레이 장치(100)는 가시 영역 상에 디스플레이 할 삼차원 영상을 렌더링 할 수 있다. 또한 디스플레이 장치(100)는 렌더링 된 삼차원 영상을 가시 영역(123)상에 디스플레이 할 수 있다.
일 실시예에 의하여, 도 3b에서 결정되는 가시 영역의 크기는, 도 3a에서 결정되는 가시 영역의 크기보다 클 수 있다. 이에 따라, 가시 영역의 크기에 따라 렌더링 되는 삼차원 영상의 속성이 상이할 수 있다. 여기서 삼차원 영상의 속성은 영상 파일의 크기, 소모되는 픽셀의 수, 사용되는 폴리곤(polygon)의 수 등을 포함할 수 있다.
도 4는 일 실시예에 의하여 사용자의 위치에 따라 가시 영역을 결정하는 방법을 나타내는 흐름도이다.
도 4에 제시된 일 실시예에 따라, 사용자(300)의 시선 위치에 따라 전체 화면 영역 중 가시 영역을 결정할 수 있다.
여기서, “시선 위치”는 화면 상에서 사용자의 시선이 향하는 위치를 의미할 수 있다.
S410에서, 디스플레이 장치(100)는 사용자(300)의 눈동자를 포함하는 사용자(300)의 신체의 적어도 일부를 촬영할 수 있다. 사용자(300)의 눈동자는 사용자(300)가 바라보는 디스플레이 화면의 방향을 결정하기 위한 기준점으로 사용될 수 있다. 디스플레이 장치(100)는 사용자(300)가 포함된 이미지를 실시간으로 촬영할 수 있다.
S420에서, 디스플레이 장치(100)는 사용자(300)를 촬영한 이미지로부터 사용자(300)의 시선 위치를 결정할 수 있다. 디스플레이 장치(100)는 촬영된 이미지 내의 사용자의 눈동자의 방향 및 촬영된 이미지 내의 사용자의 위치를 분석함으로써, 사용자가 디스플레이 장치(100)의 화면 상의 어느 부분을 쳐다보고 있는 지를 결정할 수 있다. 시선 위치는 디스플레이 장치(100)에 대하여 상대적인 위치를 갖는 사용자(300)의 시선이 화면 상에서 어느 부분에 위치해 있는지를 결정한 것일 수 있다.
S430에서 디스플레이 장치(100)는 사용자(300)의 시선 위치에 기초하여 가시 영역을 결정할 수 있다. 디스플레이 장치(100)는 사용자(300)의 시선 위치를 기준으로 화면의 전체 영역 중 사용자(300)의 인식 대상이 되는 영역으로서 가시 영역을 결정할 수 있다. 또한, 디스플레이 장치(100)는 사용자(300)의 시선 위치를 기준으로, 디스플레이 장치(100)의 현재 형태에 기초하여 가시 영역을 결정할 수 있다.
가시 영역은 디스플레이 장치(100)의 현재 형태에 기초하여 결정되는 바, 디스플레이 장치(100)에 포함되는 화면의 속성에 따라 달라질 수 있다. 여기서, 화면의 속성은 화면이 디스플레이 장치(100)에 배치된 모양, 디스플레이 장치(100)의 외형, 화면의 개수, 화면의 크기 및 화면의 모양 등을 포함할 수 있다. 이에 한정되는 것은 아니다.
S440에서, 디스플레이 장치(100)는 결정된 가시 영역 상에 영상이 디스플레이 되도록 제어할 수 있다.
디스플레이 장치(100)는 가시 영역의 속성에 따라 삼차원 영상을 렌더링할 수 있다. 디스플레이 장치(100)는 가시 영역의 속성에 따라, 삼차원 영상을 렌더링 하는 폴리곤의 수를 결정할 수 있다. 디스플레이 장치(100)는 화면의 전체 영역 중 가시 영역에만 표시되는 영상을 렌더링 함으로써, 프로세서를 효율적으로 사용할 수 있다. 또한, 디스플레이 장치(100)는 하드웨어의 성능 내에서 최적화된 효과를 발생시킬 수 있다.
폴리곤은 삼차원 그래픽에서 물체를 표현할 때 쓰이는 기본 단위인 다각형을 의미할 수 있다. 삼차원 그래픽에서는 폴리곤이 모여 각종 삼차원 오브젝트(3D object) 들을 표현할 수 있다. 즉, 삼차원 오브젝트는 폴리곤들의 집합체를 의미할 수 있다. 디스플레이 장치(100)에서 실시간으로 렌더링할 수 있는 폴리곤의 수는 한계가 있기 때문에, 폴리곤의 수가 많은 사물이 화면에 표시되도록 하려면 프로세서의 처리속도가 느려질 수 있다. 따라서, 디스플레이 장치(100)의 하드웨어의 성능을 초과하지 않는 범위 내에서 폴리곤의 수를 조절하는 것은 중요하다.
디스플레이 장치(100)는 가시 영역의 속성에 기초하여 적합하게 결정된 폴리곤들을 이용하여 렌더링 된 삼차원 영상을 가시 영역 상에 디스플레이 할 수 있다.
도 5a 및 도 5b는 일 실시예에 의한 사용자의 시선 위치에 기초하여 가시 영역을 결정하는 일예를 나타내는 도면이다.
도 5a를 참조하면, 변형 가능한 디스플레이 장치(100)는 사용자(300)의 시선 위치(350)에 기초하여 가시 영역(10)을 결정할 수 있다.
설명의 편의를 위하여, 도 5a의 디스플레이 장치(100)는 평면 형상의 화면의 디스플레이 부일 수 있다.
디스플레이 장치(100)는 사용자(300)를 촬영할 수 있다. 보다 구체적으로, 사용자(300)의 눈동자를 포함하는 사용자(300)의 신체의 적어도 일부를 촬영할 수 있다.
디스플레이 장치(100)는 촬영된 영상으로부터 사용자(300)의 눈동자를 인식함으로써, 화면 상에 사용자(300)의 시선 위치(350)를 결정할 수 있다. 여기서, 시선 위치(350)가 결정되는 화면은 화면의 전체 영역을 포함할 수 있다. 또는, 시선 위치(350)가 결정되는 화면은 디스플레이 장치(100)의 현재 형태에 따라 활성화된 화면 영역을 포함할 수 있다.
디스플레이 장치(100)는 사용자(300)의 시선 위치(350)를 기준으로 디스플레이 장치(100)의 전체 화면 영역 중에서 가시 영역(10)을 설정할 수 있다. 일 실시예에 의하여, 도 5a에서 가시 영역(10)은 화면의 모양과 같은 사각형태 일 수 있다. 도 5a에서 가시 영역(10)은 시선 위치(350) 및 디스플레이 장치(100)의 현재 형태를 기준으로 결정된 속성을 포함할 수 있다. 여기서 속성은, 가시 영역(10)의 크기, 모양 및 화면 영역 내의 위치 등을 포함할 수 있다.
디스플레이 장치(100)는 화면의 전체 영역 중 가시 영역을 제외한 나머지 화면 영역(20)을 비활성화 할 수 있다. 여기서 비활성화는 화면의 전체 영역 중 가시 영역을 제외한 나머지 화면 영역(20)에 공급되는 전원을 차단하는 것 또는 시스템의 최적화를 위하여 나머지 화면 영역(20)을 절전 모드로 변경하는 것을 의미할 수 있다.
디스플레이 장치(100)는 가시 영역(10)이 결정됨에 따라, 화면의 전체 영역 중 가시 영역(10)외의 나머지 화면 영역(20)의 색상을 변경할 수 있다. 예를 들어, 가시 영역(10)의 배경 색상은 녹색으로, 나머지 화면 영역(20)의 배경 색상은 검정색으로 변경함으로서 두 영역을 구분할 수 있다.
도 5b는 일 실시예에 의하여 사용자(300)가 이동됨에 따라 변경된 시선 위치에 기초하여 가시 영역을 결정하는 일 예를 나타낸 도면이다.
도 5b를 참조하면, 디스플레이 장치(100)는 디스플레이 장치(100)에서 감지한 사용자(300)의 이동에 기초하여 화면 상의 시선 위치(350)를 실시간으로 변경할 수 있다. 디스플레이 장치(100)는 실시간으로 사용자(300)의 이동을 감지할 수 있다.
디스플레이 장치(100)는 변경된 사용자(300)의 시선 위치(350)를 기준으로 디스플레이 장치(100)의 전체 화면 영역 중에서 가시 영역(10)을 설정할 수 있다. 즉, 디스플레이 장치(100)는 변경된 사용자(300)의 시선 위치(350)에 따라, 가시 영역(10)을 재설정할 수 있다.
디스플레이 장치(100)는 재설정된 가시 영역(10)과 가시 영역 외 나머지 영역(20)을 구분하기 위하여 가시 영역(10)과 나머지 영역(20)의 색상이 다르게 표시되도록 제어할 수 있다.
디스플레이 장치(100)는 재설정된 가시 영역(10) 상에서 디스플레이 되는 영상을 렌더링 할 수 있다. 디스플레이 장치(100)는 재설정된 가시 영역(10)의 속성에 따라 삼차원 영상을 렌더링 할 수 있다. 예를 들어, 기존 가시 영역과 재설정된 가시 영역(10)의 속성이 상이한 경우, 재설정된 가시 영역(10)의 속성에 따라 삼차원 영상을 렌더링 할 수 있다.
일 실시예에 의하여, 변경되는 사용자(300)의 위치에 따라 가시 영역(10)을 설정함으로써, 디스플레이 장치(100)는 시스템의 상태에 따라 최적화로 생성된 삼차원 영상을 디스플레이 할 수 있다.
또한, 디스플레이 장치(100)는 사용자(300)의 시선 위치와, 디스플레이 장치와 사용자(300)와의 거리, 영상에 포함되는 사용자(300)의 제스처 또는 사용자(300)의 시선 방향 중 적어도 어느 하나에 기초하여 가시 영역을 결정할 수 있다.
사용자(300)의 제스처는 감지부(130)의 카메라 부 또는 광 수신부를 통해 감지될 수 있다. 디스플레이 장치(100)는 사용자(300)의 제스처에 기초하여 가시 영역을 확대, 축소 또는 변화시킬 수 있다.
사용자(300)의 시선 방향은 사용자(300)의 눈동자가 촬영된 영상으로부터 감지될 수 있다. 디스플레이 장치(100)는 사용자(300)의 눈동자를 사용자(300)의 시선으로 감지하고, 사용자(300)의 시선과 화면이 이루는 각도를 통해 사용자(300)의 시선 방향을 검출할 수 있다. 또한, 디스플레이 장치(100)는 사용자(300)의 시선 방향에 기초하여 가시 영역을 결정할 수 있다.
이하, 도 6에서는 디스플레이 장치와 사용자(300)와의 거리에 따라 가시 영역을 결정하는 실시예에 대하여 설명하도록 한다.
도 6은 일 실시예에 의하여 디스플레이 장치에 대한 사용자의 위치를 고려하여 가시 영역을 결정하는 일례를 나타내는 도면이다.
도 6을 참조하면, 왼쪽 도면(60a)과 오른쪽 도면(60b)에서 사용자(300)가 디스플레이 장치(100)를 바라보는 시선 방향의 각도는 동일하지만, 디스플레이 장치(100)로부터 사용자(300)까지의 거리는 d1과 d2로 상이하다.
이와 같이, 사용자(300)의 시선 방향이 디스플레이 장치(100)와 이루는 각도가 동일할지라도 디스플레이 장치(100)와 사용자(300)간의 거리에 따라서 시선 위치는 다르게 결정될 수 있다. 왜냐하면, 디스플레이 장치(100)로부터 사용자(300)까지의 거리에 따라 원근 시점(perspective view)이 달라지기 때문이다.
따라서, 시선 위치를 결정함에 있어서 사용자(300)의 시선 방향이 디스플레이 장치(100)의 디스플레이 부(120)와 이루는 각도뿐만 아니라, 디스플레이 장치(100)로부터 사용자(300)까지의 거리도 함께 고려함으로써 보다 사실적인 삼차원 화면을 제공할 수 있다.
예를 들어, 사용자(300)가 디스플레이 장치(100)로부터 d2거리의 위치하는 경우에 결정되는 가시 영역은, 사용자(300)가 디스플레이 장치(100)로부터 d1거리에 위치하는 경우에 결정되는 가시 영역보다 넓을 수 있다.
\도 7은 일 실시예에 의한 가시 영역의 속성에 따라 영상을 렌더링하는 방법을 나타내는 흐름도이다.
S710에서, 디스플레이 장치(100)는 가시 영역을 결정할 수 있다. 특히 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 디스플레이 장치(100)에 대한 사용자(300)의 상대적 위치에 기초하여 가시 영역을 결정할 수 있다.
S720에서 디스플레이 장치(100)는 화면의 전체 영역 중 가시 영역을 제외한 영역을 비활성화시킬 수 있다. 여기서, 비활성화는 화면의 전체 영역 중 가시 영역을 제외한 영역의 전원을 차단함을 의미할 수 있다. 또는, 비활성화는 시스템의 최적화 및 디스플레이 장치(100)의 에너지 절약을 위하여 가시 영역을 제외한 나머지 화면 영역에 대한 프로세스를 최소화하는 것을 의미할 수 있다.
S730에서 디스플레이 장치(100)는 가시 영역의 속성에 따라 영상을 렌더링할 수 있다. 여기서, 가시 영역의 속성은 가시 영역의 크기, 모양 및 위치 중 적어도 어느 하나를 포함할 수 있다.
디스플레이 장치(100)는 가시 영역의 속성에 기초하여 삼차원 영상을 렌더링할 수 있다. 예를 들어, 디스플레이 장치(100)는 가시 영역의 크기, 모양 및 위치에 기초하여, 디스플레이될 객체의 크기, 디스플레이 방향 및 디스플레이 위치를 결정할 수 있다. 또한, 예를 들어, 디스플레이 장치(100)는 가시 영역의 크기에 따라 디스플레이될 객체를 구현하기 위하여 필요한 폴리곤의 수를 결정할 수 있다. 디스플레이 장치(100)는 결정된 폴리곤으로 삼차원 영상을 렌더링할 수 있다. 디스플레이 장치(100)는 가시 영역의 속성에 따라 삼차원 영상을 제작함으로써, 디스플레이 장치(100)의 시스템의 작업 환경을 최적화시킬 수 있다. 또한, 예를 들어, 디스플레이 장치(100)는 사용자의 상대적인 위치 및 시선 방향에 기초하여, 디스플레이될 객체의 디스플레이 방향을 결정할 수도 있다.
S740에서 디스플레이 장치(100)는 렌더링 된 삼차원의 영상을 가시 영역 상에 디스플레이할 수 있다. 이에 따라, 디스플레이 부(120)의 전체 화면 영역 중 가시 영역으루 설정된 화면 영역에만 삼차원의 영상을 디스플레이 할 수 있다.
이하, 도 8에서 본 발명의 흐름에 대하여 플렉시블 디스플레이 장치를 일 실시예로서 설명하도록 한다.
도 8은 일 실시예에 의한 삼차원 영상을 디스플레이 하는 디스플레이 장치를 나타내는 도면이다.
도 8을 참조하면, 디스플레이 장치(100)는 플렉시블하게 변형 가능한 디스플레이 장치(100)의 현재 형태를 감지하고, 휘어진 형태를 현재 형태로서 결정할 수 있다. 도 8에서는 디스플레이 장치(100)가 알파벳 L 모양으로 구부러진 형태를 갖음을 알 수 있다.
디스플레이 장치(100)는 사용자(300)를 감지할 수 있다. 보다 구체적으로, 카메라로 구현된 감지부는 사용자(300)를 촬영함으로써, 디스플레이 장치(100)의 사용자(300)를 감지할 수 있다.
디스플레이 장치(100)는 촬영된 이미지에 기초하여, 사용자(300)의 위치를 검출할 수 있다. 사용자(300)의 위치는 사용자(300)와 디스플레이 장치(100)간의 거리, 사용자(300)의 시선 방향, 사용자(300)의 시선 위치 등을 고려하여 검출될 수 있다.
도 8에서 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 사용자(300)의 위치에 기초하여 디스플레이 전체 화면 영역의 일부 영역을 가시 영역(10)으로 설정할 수 있다. 또한, 가시 영역(10)을 강조하기 위하여, 전체 화면 영역 중 가시 영역(10)을 제외한 나머지 영역(20)의 색을 변경시킬 수 있다.
디스플레이 장치(100)는 가시 영역(10)의 속성에 따라 삼차원 영상을 렌더링 할 수 있다. 또한, 디스플레이 장치(100)는 렌더링 된 삼차원 영상을 가시 영역(10) 상에 디스플레이할 수 있다. 이때, 전체 화면 영역 중 가시 영역(10)을 제외한 나머지 영역(20)을 비활성화 시킴으로써, 디스플레이 장치(100)의 에너지가 효율적으로 사용될 수 있다.
도 9a 및 9b는 일 실시예에 의한 삼차원 영상을 디스플레이하는 변형 가능한 디스플레이 장치를 예시적으로 나타낸 도면이다.
도 9a에서는 구 형태의 디스플레이 장치에서 삼차원 영상을 디스플레이 하는 일 실시예를 나타내고 있다.
일 실시예에 의한 디스플레이 장치(100)는 구 형태의 디스플레이 장치(100)일 수 있다.
구 형태의 디스플레이 장치(100)는 사용자(300)의 상대적인 위치를 검출할 수 있다. 또한, 구 형태 및 사용자(300)의 상대적인 위치를 기초로 하여 가시 영역(10)을 설정할 수 있다. 여기서 구 형태의 디스플레이 장치(100)는 구 형태의 화면 영역을 포함할 수 있다.
도 9a에서 가시 영역(10)은 사용자(300)의 반대 방향을 제외한 구 형태의 화면 영역에 결정될 수 있다.
디스플레이 장치(100)는 구 형태의 전체 화면 영역 중 결정되는 가시 영역(10) 상에 삼차원 영상을 디스플레이 할 수 있다.
도 9b는 엣지 형태의 디스플레이 장치에서 삼차원 영상을 디스플레이 하는 일 실시예를 나타내고 있다.
일 실시예에 의한 디스플레이 장치(100)는 엣지 형태의 디스플레이 장치(100)일 수 있다.
엣지 형태의 디스플레이 장치(100)는 사용자(300)의 상대적인 위치를 검출할 수 있다. 또한, 엣지 형태 및 사용자(300)의 상대적인 위치를 기초로 하여 가시 영역(10)을 설정할 수 있다. 여기서 엣지 형태의 디스플레이 장치(100)는 엣지 형태를 둘러싸는 화면 영역을 포함할 수 있다.
도 9b에서 가시 영역(10)은 엣지 형태의 디스플레이 장치(100)와 사용자(300) 사이의 엣지 화면 영역에서 결정될 수 있다.
제어부(110)는 엣지 형태의 전체 화면 영역 중 결정되는 가시 영역(10) 상에 삼차원 영상을 디스플레이 할 수 있다.
또한 제어부(110)는 사용자(300)의 상대적인 위치 및 사용자(300)의 시선 위치, 사용자(300)의 시선 방향, 사용자(300)의 제스처 중 적어도 어느 하나를 이용하여 가시 영역(10)을 결정할 수 있다. 또한, 디스플레이 장치(100)는 결정되는 가시 영역(10)의 속성에 따라 삼차원 영상을 렌더링할 수 있다. 또한, 디스플레이 장치(100)는 가시 영역(10)상에 삼차원 영상을 디스플레이 할 수 있다.
도 10은 일 실시예에 의하여, 디스플레이 장치의 형태가 변형됨에 따라 영상을 디스플레이 하는 방법을 도시한 흐름도이다.
S1010에서, 디스플레이 장치(100)는 디스플레이 장치(100)의 형태가 변형됨을 감지할 수 있다. 디스플레이 장치(100)는 디스플레이 장치(100)의 형태가 변형됨을 실시간으로 감지할 수 있다. 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태를 기준으로 디스플레이 장치(100)의 새로운 현재 형태를 실시간으로 판단할 수 있다.
예를 들어, 디스플레이 장치(100)는 디스플레이 장치(100)의 펼침 곡률, 펼침 각도, 휨(bending) 곡률, 말린(rolling) 정도를 감지할 수 있다. 또한, 복수의 화면을 포함하는 디스플레이 장치(100)의 경우, 화면이 놓여져 있는 상태, 화면이 놓여진 방향 및 화면의 형태 등을 감지할 수 있다.
S1020에서, 디스플레이 장치(100)는 변형된 디스플레이 장치(100)의 형태에 기초하여, 가시 영역을 변경할 수 있다. 디스플레이 장치(100)는 디스플레이 장치(100)의 변형된 정도 또는 변형 파라미터에 기초하여 가시 영역을 실시간으로 변경할 수 있다. 디스플레이 장치(100)는 디스플레이 장치(100)의 변형된 형태, 예를 들어, 디스플레이 장치(100)의 펼침 곡률, 펼침 각도, 휨(bending) 곡률, 말린(rolling) 정도에 기초하여 가시 영역의 속성을 다시 판단할 수 있다.
S1030에서는 디스플레이 장치(100)는 변경된 가시 영역에 따라, 영상을 렌더링할 수 있다. 디스플레이 장치(100)는 변경된 가시 영역의 속성에 따라 삼차원 영상을 렌더링할 수 있다. 디스플레이 장치(100)는 변경된 가시 영역에 기초하여 실시간으로 삼차원 영상을 렌더링할 수 있다. 디스플레이 장치(100)는 변경된 가시 영역에 기초하여, 삼차원 영상을 렌더링하기 위해 필요한 폴리곤의 수를 결정할 수 있다. 또한, 디스플레이 장치(100)는 적정한 수로 결정된 폴리곤들을 이용하여 삼차원 영상을 렌더링 할 수 있다.
S1040에서, 디스플레이 장치(100)는 렌더링 된 영상을 가시 영역 상에 디스플레이 할 수 있다. 디스플레이 장치(100)는 렌더링 된 삼차원 영상을 변경된 가시 영역 상에 디스플레이 할 수 있다. 즉, 디스플레이 장치(100)의 형태가 변형됨에 따라, 실시간으로 렌더링 되는 삼차원 영상이 가시 영역 상에 디스플레이될 수 있다.
도 11은 일실시예에 의한, 디스플레이 장치의 형태가 변형됨에 따라 영상을 디스플레이 하는 일 실시예를 나타내는 도면이다.
여기서 디스플레이 장치(100)는 두 개의 화면이 폴딩 축을 통해 연결된 플렉시블 형태의 디스플레이 장치를 예시로서 설명하도록 한다. 폴딩 축은, 디스플레이 장치(100)가 접히는 라인을 의미하는 것으로서, 일 실시예로서 디스플레이 장치(100)가 대칭적으로 접힐 때는 디스플레이 장치(100)의 가운데 라인일 수 있다. 하지만, 플렉시블 형태의 디스플레이 장치(100)가 비대칭적으로 접힐 때는 폴딩 축은, 플렉시블 디스플레이 장치(100)의 가운데 라인이 아닐 수 있다.
도 11을 참조하면, 디스플레이 장치(100)의 변형 정도(펼침 각도 또는 휨 곡률 등)가 “0도”, “135도”, "160도” 및 "180도"상태들이 도시되어 있다. 도 11에서는, 사용자(300)는 동일한 자리에서 시선을 유지하고, 디스플레이 장치(100)의 상태만 변형되어있다.
디스플레이 장치(100)의 형태가 변형된 정도(또는 변형 상태)가 0도인 경우, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태를 0도 펼쳐진 상태로 감지할 수 있다.
디스플레이 장치(100)는 사용자(300)를 촬영한 영상으로부터 사용자 시선 위치(350)를 결정할 수 있다. 디스플레이 장치(100)는 사용자 시선 위치(350) 및 디스플레이 장치(100)의 0도 펼쳐진 상태로부터 가시 영역(10)을 결정할 수 있다.
디스플레이 장치(100)는 결정된 가시 영역(10)에서 재생할 수 있는 삼차원 영상을 렌더링할 수 있다. 또한, 디스플레이 장치(100)는 결정된 가시 영역(10) 상에 영상을 디스플레이 할 수 있다.
디스플레이 장치(100)의 변형 정도가 135도인 경우, 제어부(110)는 디스플레이 장치(100)의 현재 형태를 135도 펼쳐진 상태로 감지할 수 있다.
디스플레이 장치(100)는 사용자(300)를 촬영한 영상으로부터 사용자 시선 위치(350)를 결정할 수 있다. 디스플레이 장치(100)는 사용자 시선 위치(350) 및 디스플레이 장치(100)의 135도 펼쳐진 상태로부터 가시 영역(10)을 재결정할 수 있다.
디스플레이 장치(100)는 사용자 시선 위치(350) 및 디스플레이 장치(100)의 135도 펼쳐진 상태에 기초하여 재결정된 가시 영역(10)을 제외한 나머지 화면 영역(20)을 결정할 수 있다. 디스플레이 장치(100)는 가시 영역(10)을 제외한 나머지 화면 영역(20)의 색을 변경시킬 수 있다.
디스플레이 장치(100)는 재결정된 가시 영역(10)에서 재생할 수 있는 삼차원 영상을 렌더링할 수 있다. 또한, 디스플레이 장치(100)는 가시 영역(10)을 제외한 화면 영역(20)을 비활성화시킬 수 있다. 디스플레이 장치(100)는 재결정된 가시 영역(10) 상에 영상을 디스플레이 할 수 있다.
다음으로, 디스플레이 장치(100)의 변형 정도가 160도로 변경된 경우, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태를 160도 펼쳐진 상태로 감지할 수 있다.
디스플레이 장치(100)는 사용자(300)를 촬영한 영상으로부터 사용자 시선 위치(350)를 결정할 수 있다. 디스플레이 장치(100)는 사용자 시선 위치(350) 및 디스플레이 장치(100)의 160도 펼쳐진 상태로부터 가시 영역(10)을 재결정할 수 있다.
도 11을 예시적으로 참조하면, 디스플레이 장치(100)의 변형 정도가 160도인 경우, 디스플레이 장치(100)의 변형 정도가 135도인 경우의 가시 영역(10)보다 크기가 큰 가시 영역(10)이 설정될 수 있다. 이에 한정되는 것은 아니다.
디스플레이 장치(100)는 사용자 시선 위치(350) 및 디스플레이 장치(100)의 160도 펼쳐진 상태에 기초하여 재결정된 가시 영역(10)을 제외한 나머지 화면 영역(20)을 결정할 수 있다. 디스플레이 장치(100)는 가시 영역(10)을 제외한 나머지 화면 영역(20)의 색을 변경시킬 수 있다.
디스플레이 장치(100)는 재결정된 가시 영역(10)에서 재생할 수 있는 삼차원 영상을 렌더링할 수 있다. 또한, 디스플레이 장치(100)는 가시 영역(10)을 제외한 화면 영역(20)을 비활성화시킬 수 있다. 디스플레이 장치(100)는 재결정된 가시 영역(10) 상에 영상을 디스플레이 할 수 있다.
마지막, 디스플레이 장치(100)의 변형 정도가 180도로 변경된 경우, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태를 180도 펼쳐진 상태로 감지할 수 있다.
디스플레이 장치(100)는 같인 위치에 위치한 사용자(300)를 촬영한 영상으로부터 사용자 시선 위치(350)를 결정할 수 있다. 디스플레이 장치(100)는 사용자 시선 위치(350) 및 디스플레이 장치(100)의 160도 펼쳐진 상태로부터 가시 영역(10)을 재결정할 수 있다.
도 11을 예시적으로 참조하면, 디스플레이 장치(100)의 변형 정도가 180도인 경우, 다른 디스플레이 장치(100)의 변형 상태에서보다 크기가 큰 가시 영역(10)이 설정될 수 있다. 이에 한정되는 것은 아니다.
디스플레이 장치(100)는 사용자 시선 위치(350) 및 디스플레이 장치(100)의 180도 펼쳐진 상태에 기초하여 재결정된 가시 영역(10)을 제외한 나머지 화면 영역(20)을 결정할 수 있다. 디스플레이 장치(100)는 가시 영역(10)을 제외한 나머지 화면 영역(20)의 색을 변경시킬 수 있다.
디스플레이 장치(100)는 재결정된 가시 영역(10)에서 재생할 수 있는 삼차원 영상을 렌더링할 수 있다. 또한, 디스플레이 장치(100)는 가시 영역(10)을 제외한 화면 영역(20)을 비활성화시킬 수 있다. 디스플레이 장치(100)는 재결정된 가시 영역(10) 상에 영상을 디스플레이 할 수 있다.
도 12는 일 실시예에 의한, 디스플레이 장치의 형태가 변형됨에 따라 영상을 디스플레이 하는 일 실시예를 나타내는 도면이다.
여기서 디스플레이 장치(100)는 하나의 화면이 유연하게 휘어지는 플렉시블 디스플레이 장치를 예시로서 설명하도록 한다. 플렉시블 디스플레이 장치(100)는 휘어질 수 있는 디스플레이 장치를 나타내는 것으로, 종이처럼 얇고 유연한 기판을 통해 손상 없이 휘거나 구부리거나 말 수 있는 것을 특징으로 한다. 이러한 플렉시블 디스플레이 장치(100)의 화면은 일반적으로 사용되는 유리 기판이 아닌 플라스틱 기판을 사용하기 때문에 기판의 손상을 방지하기 위해서 기존의 제조프로세서를 사용하지 않고 저온 제조 프로세서를 사용하여 형성될 수 있다. 플렉시블 디스플레이 장치(100)의 화면은 액정표시장치(LCD, Liquid Crystal Display), 발광다이오드(LED, Light Emitting Diode), 유기발광다이오드(OLED, Organic LED) 및 능동형 OLED(AMOLED, Active Matrix OLED) 등에서 액정을 싸고 있는 유리 기판을 플라스틱 필름으로 대체하여, 접고 펼 수 있는 유연성을 부여한다.
도 12를 참조하면, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태를 감지할 수 있다. 즉, 디스플레이 장치(100)는 디스플레이 장치(100)의 휘어지는 형태를 감지할 수 있다.
도 12에서는, 디스플레이 장치(100)의 휘어지는 정도가, 45도, 135도 및 160도 순으로 연속하여 변하는 경우를 확인할 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 휘어지는 정도에 기초하여, 가시 영역(10)을 결정할 수 있다. 여기서, 디스플레이 장치(100)에 대한 사용자(300)의 상대적인 위치는 변함없는 것으로 가정한다.
일 실시예에 의하여, 디스플레이 장치(100)의 휘어지는 각도가 커질수록 가시 영역의 속성이 변경될 수 있다. 도 12를 참조하면, 디스플레이 장치(100)의 휘어지는 각도가 커질수록 전체 화면 영역 중 가시 영역(10)이 차지하는 영역이 증가함을 확인할 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 휘어지는 각도에 따라 변경되는 가시 영역(10)에 삼차원 영상을 디스플레이 할 수 있다. 이때, 삼차원 영상은 가시 영역(10)의 속성에 기초하여 렌더링되는 삼차원 영상을 포함할 수 있다.
또한, 디스플레이 장치(100)는 전체 화면 영역 중 가시 영역(10)을 제외한 화면 영역(20)을 비활성화시킬 수 있다. 즉, 디스플레이 장치(100)는 가시 영역(10) 상에서만 재생되도록 삼차원 영상을 효율적으로 렌더링할 수 있으며, 가시 영역(10) 외의 화면 영역(20)을 비활성화시킴으로써 디스플레이 장치(100)의 프로세스가 효율적으로 작동되도록 할 수 있다.
도 13은 일 실시예에 의한 디스플레이 장치의 형태에 따른 삼차원 영상을 렌더링하는 방법을 나타내는 도면이다.
도 13에 제시된 디스플레이 장치(100)는 반구 형태(semi-spherical type)의 디스플레이 장치를 예시로서 설명하도록 한다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태를 결정할 수 있다. 도 13에서는 디스플레이 장치(100)는 복수개의 화면으로 이루어진 반구 형태의 디스플레이 장치이다.
디스플레이 장치(100)는 디스플레이 장치(100)의 복수개의 화면을 모두 이용하여 삼차원 영상을 디스플레이 할 수 있다. 도 13의 (a)에서와 같이, 제어부(110)는 데이터를 디스플레이 장치(100)에 디스플레이 할 수 있도록 화면 각각을 이루는 폴리곤(30)의 수를 결정할 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 하드웨어의 성능을 고려하여 적절한 크기의 폴리곤(30)의 수를 결정할 수 있다. 디스플레이 장치(100)에서 실시간으로 렌더링 할 수 있는 폴리곤(30)의 수는 한계가 정해져 있기 때문에, 디스플레이 장치(100)는 영상의 디스플레이 속도에 최적화된 폴리곤(30)의 수를 결정할 수 있다. 또한, 디스플레이 장치(100)는 폴리곤의 좌표 수치만을 변화시킴으로써 삼차원 영상을 변화시킬 수 있다.
보다 구체적으로, 디스플레이 장치(100)는 가시 영역의 속성, 사용자의 상대적인 위치, 사용자의 시선 위치, 사용자의 제스처, 사용자의 시선 방향 등을 고려하여 폴리곤의 수를 결정할 수 있다.
예를 들어, 가시 영역의 속성은 사용자의 상대적인 위치에 따라 변경될 수 있다. 구체적으로, 디스플레이 장치(100)는 전체 화면 영역의 100% 크기에서 전체 화면 영역의 70%의 크기로 변경되는 가시 영역의 속성을 감지할 수 있다. 디스플레이 장치(100)는 축소된 가시 영역의 속성에 기초하여, 삼차원 영상을 렌더링하기 위한 폴리곤의 수를 다시 결정할 수 있다. 즉, 디스플레이 장치(100)는 현재 디스플레이 장치(100)의 하드웨어 상태 및 가시 영역의 속성에 따라 적절한 크기의 폴리곤의 수를 결정할 수 있고, 이를 이용하여 최적화된 삼차원 영상을 렌더링할 수 있다.
또한, 디스플레이 장치(100)는 디스플레이 장치(100)의 하드웨어의 성능 및 소프트웨어의 속성에 기초하여 폴리곤의 크기 및 개수를 제한할 수 있다. 디스플레이 장치(100)는 제한된 폴리곤의 개수 범위 및 가시 영역의 속성에 기초하여 삼차원 영상을 렌더링할 수 있다. 즉, 디스플레이 장치(100)는 하드웨어의 성능 및 소프트웨어의 속성에 따라 미리 결정된 크기 및 개수의 폴리곤으로 삼차원 영상을 렌더링함으로써, 디스플레이 장치(100)를 효율적으로 이용할 수 있는 효과를 제공할 수 있다.
도 13 (b)에서, 디스플레이 장치(100)는 최적화된 개수의 폴리곤(30)을 이용하여 삼차원 영상을 렌더링 할 수 있다.
일 실시예에 의하여, 도 13을 이용하여 디스플레이 장치(100)와 사용자(300)의 상대적인 위치를 고려하지 않은 삼차원 영상 렌더링에 대하여 설명하였다. 그러나 이에 한정되는 것은 아니며, 디스플레이 장치(100)와 사용자(300)의 상대적인 위치를 고려하여, 디스플레이 장치(100)의 현재 형태에 기초한 가시 영역을 결정할 수 있다. 또한, 디스플레이 장치(100)는 결정된 가시 영역 상에 디스플레이 되기 적합한 영상을 렌더링 할 수 있다.
다른 실시예에 의하면, 디스플레이 장치(100)는 사용자(300)의 상대적인 위치 및 디스플레이 장치(100)의 현재 형태를 기초로 하여 삼차원 영상을 렌더링 할 수 있다. 이 경우, 결정되는 가시 영역 상에서만 디스플레이 되는 영상을 렌더링 할 수 있기 때문에, 렌더링 속도 및 영상의 품질이 향상될 수 있다.
도 14는 일 실시예에 의한 시선 위치의 변화에 따라 가시 영역을 변경하는 방법을 나타내는 흐름도이다.
도 14에 의하면, 일 실시예에 의하여 사용자(300)와 디스플레이 장치(100)간의 상대적인 위치의 변화에 따라서 가시 영역이 재 설정될 수 있다.
S1410에서, 디스플레이 장치(100)는 사용자(300)의 시선 위치가 변화함에 따라, 가시 영역을 변경할 수 있다. 사용자(300)의 시선 위치는 화면 상에서 사용자(300)의 시선이 향하는 위치를 의미할 수 있다. 사용자의 시선 위치는 사용자(300)의 눈동자를 포함하는 사용자(300)의 신체의 적어도 일부를 촬영한 영상으로부터 결정될 수 있다. 또한, 디스플레이 장치(100)는 사용자(300)의 시선 위치가 변화함에 따라, 가시 영역을 실시간으로 변경할 수 있다.
또한, 디스플레이 장치(100)는 사용자(300)의 시선 방향을 판단할 수 있다. 일 실시예에 의하여, 사용자(300)의 눈동자를 포함하는 영상으로부터 사용자의 시선 방향의 위치를 판단할 수 있다. 예를 들어, 화면의 형태 및 디스플레이 장치(100)의 디자인적이 관점에서 일정 범위를 벗어나는 시선 방향에 대응되는 영상을 표시할 필요가 없는 경우라면, 변경되는 가시 영역을 일정 범위로 제한할 수도 있다.
또한, 디스플레이 장치(100)는 디스플레이 장치(100)와 사용자와의 거리에 따라 시선 위치를 변경할 수 있다. 예를 들어, 디스플레이 장치(100)가 감지한 디스플레이 장치와 사용자와의 거리가 멀어진 경우 사용자가 영상을 시청할 수 있는 시야범위를 고려하여 시선 위치를 변경할 수 있다.
또한, 디스플레이 장치(100)는 디스플레이 장치(100)에서 감지한 사용자의 제스처를 기초로 하여 시선 위치를 변경할 수 있다. 예를 들어, 디스플레이 장치(100)가 사용자를 감지하기 위하여 카메라를 작동시키는 경우, 시선 위치를 변경 시키기 위한 사용자의 제스처를 함께 감지할 수 있다. 이때, 디스플레이 장치(100)는 사용자의 제스처가 포함된 영상으로부터 사용자의 시선 위치를 결정 또는 변경할 수 있다.
또한, 디스플레이 장치(100)는 디스플레이 장치(100)에서 감지한 사용자의 시선 방향에 기초하여 사용자의 시선 위치를 변경할 수 있다. 디스플레이 장치(100)를 사용자를 촬영한 영상에서 감지된 사용자의 눈동자와 디스플레이 장치(100) 사이의 각도 측정을 통해 사용자의 시선 방향을 검출할 수 있다. 디스플레이 장치(100)는 사용자의 시선 방향의 변경에 따라 사용자의 시선 위치를 변경할 수 있다.
또한, 디스플레이 장치(100)는 결정 또는 변경된 시선 위치에 따라 가시 영역을 재결정할 수 있다.
S1420에서, 디스플레이 장치(100)는 변경된 가시 영역의 속성에 기초하여 디스플레이 될 영상을 렌더링할 수 있다. 가시 영역의 속성은, 가시 영역의 크기, 위치 및 모양 중 적어도 하나를 포함할 수 있다.
일 실시예에 의하여, 변경된 가시 영역의 속성에 기초하여 삼차원 영상을 실시간으로 렌더링할 수 있다. 일 실시예에 의하여, 전체 화면 영역 중 가시 영역 외의 화면 영역을 비활성화시킬 수 있다.
S1430에서, 디스플레이 장치(100)는 렌더링 된 영상을 가시 영역 상에 디스플레이할 수 있다. 렌더링 된 영상은 가시 영역의 속성에 최적화된 삼차원 영상을 포함할 수 있다.
이에 따라, 사용자의 시선 위치의 변경에 따라 가시 영역을 재설정 할 수 있으며, 재 설정되는 가시 영역의 속성에 맞추어 삼차원 영상을 렌더링할 수 있다. 또한, 렌더링 된 삼차원 영상을 가시 영역 상에 디스플레이할 수 있다.
도 15, 16 및 17은 일 실시예에 의하여, 사용자(300)의 상대적인 위치의 변경에 따라 가시 영역이 변경되는 실시예를 도시한 도면이다.
도 15는 일 실시예에 의하여, 형태가 고정된 디스플레이 장치(100)를 기준으로 사용자 시선 위치가 변경되는 경우 가시 영역을 변경하는 실시예를 나타내는 도면이다.
도 15에서, 디스플레이 장치(100)는 두 개의 화면이 폴딩 축을 통해 연결된 플렉시블 디스플레이 장치(100)를 예시로서 설명하도록 한다. 여기서 디스플레이 장치(100)의 현재 상태는 160도 펼쳐진 상태이다. 디스플레이 장치(100)의 현재 상태는, 두 개의 화면이 160도 벌어진 상태로 고정된 상태이다.
일 실시예에 의하여 디스플레이 장치(100)는 사용자(300)의 눈동자를 포함하는 사용자(300)의 신체의 적어도 일부가 포함된 영상에서 사용자(300)의 상대적인 위치를 검출할 수 있다. 보다 구체적으로, 디스플레이 장치(100)는 사용자(300)의 눈동자를 포함하는 영상에 기초하여, 사용자(300)의 시선 위치(350)를 결정할 수 있다
도 15에서 볼 수 있듯이, 일 실시예에 따라 사용자의 시선 위치(350)는 디스플레이 장치(100)의 좌측 화면에서 검출될 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 사용자 시선 위치(350)를 기준으로 가시 영역(10)을 결정할 수 있다. 일 실시예에 의하여, 가시 영역(10)은 디스플레이 장치(100)의 좌측 화면에서만 결정될 수 있다.
일 실시예에 의하여, 가시 영역(10)과 전체 화면 영역 중 가시 영역(10)을 제외한 영역(20)에 표시되는 배경 화면의 색상은 다르게 설정될 수 있다. 사용자(300)는 이를 통해, 가시 영역(10)으로 결정되는 화면 영역을 확인할 수 있다.
다른 실시예에 의하여, 사용자의 시선 위치(350)는 이동될 수 있다. 즉, 디스플레이 장치(100)는 검출하는 사용자의 상대적인 위치가 변경될 수 있다. 보다 구체적으로, 사용자의 눈동자를 포함하는 영상에 기초하여 결정되는 사용자의 시선 위치(350)가 변경될 수 있다.
다른 실시예에 의하여, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 사용자 시선 위치(350)를 기준으로 가시 영역(10)을 재결정할 수 있다. 도 15에서 보여지듯, 변경된 사용자의 시선 위치(350)는 디스플레이 장치(100)의 폴딩 축 주변에서 검출될 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 변경된 사용자 시선 위치(350)를 기준으로 가시 영역(10)을 재결정할 수 있다. 일 실시예에 의하여, 가시 영역(10)은 디스플레이 장치(100)의 좌측 화면의 일부 영역 및 우측 화면의 일부 영역에서 결정될 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)는 가시 영역(10)과 전체 화면 영역 중 가시 영역(10)을 제외한 영역(20)에 표시되는 배경 화면의 색상을 다르게 설정할 수 있다. 사용자(300)는 이를 통해, 가시 영역(10)으로 결정되는 화면 영역을 확인할 수 있다.
디스플레이 장치(100)는 변경된 가시 영역(10)의 속성에 따라, 삼차원 영상을 렌더링 할 수 있다. 또한, 디스플레이 장치(100)는 변경된 가시 영역(10) 상에 삼차원 영상을 디스플레이 할 수 있다.
또 다른 실시예에 의하여, 사용자의 시선 위치(350)는 이동될 수 있다. 즉, 디스플레이 장치(100)는 검출하는 사용자(300)의 상대적인 위치가 변경될 수 있다. 보다 구체적으로, 사용자(300)의 눈동자를 포함하는 영상에 기초하여 결정되는 사용자(300)의 시선 위치(350)가 변경될 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 사용자 시선 위치(350)를 기준으로 가시 영역(10)을 재결정할 수 있다. 도 15에서 보여지듯, 변경된 사용자의 시선 위치(350)는 디스플레이 장치(100)의 오른쪽 화면에서 검출될 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 변경된 사용자 시선 위치(350)를 기준으로 가시 영역(10)을 재결정할 수 있다. 일 실시예에 의하여, 가시 영역(10)은 디스플레이 장치(100)의 우측 화면 영역에서 결정될 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)는 가시 영역(10)과 전체 화면 영역 중 가시 영역(10)을 제외한 영역(20)에 표시되는 배경 화면의 색상을 다르게 설정할 수 있다. 사용자(300)는 이를 통해, 가시 영역(10)으로 결정되는 화면 영역을 확인할 수 있다.
디스플레이 장치(100)는 변경된 가시 영역(10)의 속성에 따라, 삼차원 영상을 렌더링 할 수 있다. 또한, 디스플레이 장치(100)는 변경된 가시 영역(10) 상에 삼차원 영상을 디스플레이 할 수 있다.
도 16은 일 실시예에 의하여, 육면체 형태의 디스플레이 장치에서 사용자(300)의 위치에 따라 결정되는 가시 영역 상에 영상을 디스플레이 하는 실시예를 나타낸 실시예이다.
도 16(a)에서, 디스플레이 장치(100)의 현재 형태 및 사용자(300)와 디스플레이 장치(100)의 상대적인 위치에 따라, 가시 영역은 육면체 디스플레이 장치(100)의 두 면에 결정될 수 있다.
도 16(b)에서, 디스플레이 장치(100)의 현재 형태 및 사용자(300)와 디스플레이 장치(100)의 상대적인 위치에 따라, 가시 영역은 육면체 디스플레이 장치(100)의 세 면에 결정될 수 있다.
도 16(c)에서, 디스플레이 장치(100)의 현재 형태 및 사용자(300)와 디스플레이 장치(100)의 상대적인 위치에 따라, 가시 영역은 육면체 디스플레이 장치(100)의 한 면에 결정될 수 있다.
일 실시예에 의하여, 각각 결정되는 가시 영역의 속성에 따라, 디스플레이 장치(100)는 삼차원 영상을 렌더링할 수 있다. 다음으로, 각각 결정되는 가시 영역 상에 삼차원 영상을 디스플레이할 수 있다.
도 16에서 볼 수 있듯이, 일 실시예에 의하여, 디스플레이 장치(100)에 포함되는 화면의 개수 및 현재 디스플레이 장치(100)의 형태 및 사용자(300)의 상대적인 위치에 따라, 디스플레이 장치(100)는 삼차원 영상을 효율적으로 디스플레이 할 수 있다.
일 실시예에 의하여, 복수의 화면을 포함하는 다면체 형상의 디스플레이 장치(100)는 삼차원 영상을 보다 사실적으로 디스플레이 할 수 있다. 예를 들어, 도 16에서 확인할 수 있듯이, 디스플레이 장치(100)는 고정된 형태의 사물을 삼차원 영상을 이용하여 표현할 수 있다.
도 16(a)에서는 두 개의 화면을 이용하여 와인잔에 대한 삼차원 영상을 디스플레이 하는 것을 볼 수 있다. 이때 사용자는 디스플레이 장치(100)의 일 모서리 쪽을 바라보았을 때 나타나는 와인잔의 영상을 확인할 수 있다.
도 16(b)에서 감지된 사용자의 상대적인 위치에 따라, 디스플레이 장치(100)는 세 개의 화면을 사용하여 영상을 디스플레이 할 수 있다. 이에 따라, 사용자는 와인잔의 전체적인 형상에 대한 영상을 확인할 수 있다.
도 16(c)에서는 사용자는 디스플레이 장치(100)보다 높은 위치에서 디스플레이 장치(100)의 상단면을 바라보는 바, 사용자는 와인잔의 상단면에 대한 삼차원 영상을 볼 수 있다.
도 17은 일 실시예에 의하여, 디스플레이 장치(100)는 원기둥 형태의 디스플레이 장치를 포함할 수 있다.
디스플레이 장치(100)는 두 개의 원 형상의 화면 및 플렉시블 디스플레이 기판으로 이루어진 화면을 포함할 수 있다. 디스플레이 장치(100)에 포함된 화면은 서로 연결될 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태 및 검출되는 사용자(300)의 상대적인 위치에 따라 가시 영역(10)을 결정할 수 있다. 도 17을 참조하면, 사용자(300)의 눈을 기초로 하여, 가시 영역(10)은 원기둥 형태의 디스플레이 장치(100)의 옆면에 결정될 수 있다.
다른 실시예에 의하여, 디스플레이 장치(100)는 검출되는 사용자(300)의 상대적인 위치가 디스플레이 장치(100)를 기준으로 상단부 쪽 화살표(17)방향인 경우 디스플레이 장치(100)의 상단부에 가시 영역을 설정할 수 있다.
또 다른 실시예에 의하여, 디스플레이 장치(100)는 검출되는 사용자(300)의 상대적인 위치가 디스플레이 장치(100)를 기준으로 하단부 쪽 화살표(17)방향인 경우 디스플레이 장치(100)의 하단부에 가시 영역을 설정할 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)는 결정되는 가시 영역(10)의 속성에 따라 삼차원 영상을 렌더링할 수 있다. 또한, 삼차원 영상을 가시 영역(10) 상에 디스플레이 할 수 있다.
도 18은 일 실시예에 의하여, 다른 사용자가 존재하는 경우 다른 가시 영역 상에 영상을 디스플레이 하는 방법을 나타내는 흐름도이다.
도 18에 도시된 바에 의하면, 일 실시예에 의하여 디스플레이 장치(100)는 적어도 두 개 이상의 가시 영역을 설정할 수 있다.
S1810에서, 일 실시예에 의하여 디스플레이 장치(100)는 디스플레이 장치(100)의 다른 사용자(301)를 촬영할 수 있다. 다른 사용자(301)를 촬영하는 카메라는 기존의 사용자(300)를 촬영하는 카메라와 상이할 수 있다. 다른 사용자(301)를 촬영하는 카메라는 디스플레이 장치(100)의 현재 형태에 기초하여 결정될 수 있다.
S1820에서, 디스플레이 장치(100)는 촬영된 이미지에 기초하여 디스플레이 장치에 대한 다른 사용자(301)의 상대적인 위치를 검출할 수 있다. 다른 사용자(301)의 상대적인 위치는 기존 사용자(300)와 겹치지 않는 위치일 수 있다. 이에 한정되는 것은 아니다. 일 실시예에 의하여, 디스플레이 장치(100)는 다른 사용자(301)의 시선 위치를 결정하는 것을 통해 다른 사용자의 상대적인 위치를 검출할 수 있다.
S1830에서, 디스플레이 장치(100)는 결정된 디스플레이 장치(100)의 현재 형태 및 검출된 다른 사용자의 위치에 기초하여, 디스플레이 장치의 화면의 전체 영역 중에서 다른 가시 영역(15)을 결정할 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)의 현재 형태는 사용자(300)의 가시 영역(10)을 설정하기 위하여 결정된 디스플레이 장치(100)의 현재 형태를 포함할 수 있다.
다른 가시 영역은, 디스플레이 장치(100)의 화면의 전체 영역 중에서 미리 결정된 가시 영역과 겹치지 않을 수 있다. 일 실시예에 의하여, 가시 영역(10)과 다른 가시 영역(15)은 디스플레이 장치(100)의 현재 현태에 기초하여 서로 다른 화면에서 결정될 수 있다.
S1840에서, 디스플레이 장치(100)는 결정된 다른 가시 영역(15) 상에 영상을 디스플레이 할 수 있다. 여기서, 다른 가시 영역(15) 상에 디스플레이 되는 영상은 삼차원 영상을 포함할 수 있다. 또한, 다른 가시 영역(15) 상에 디스플레이 되는 영상은 가시 영역(10) 상에 디스플레이 되는 영상과 상이한 영상일 수 있다. 이에 한정되는 것은 아니다.
또한, 디스플레이 장치(100)는 다른 가시 영역(15)의 속성에 따라, 다른 가시 영역(15) 상에 디스플레이 되는 영상을 렌더링 할 수 있다. 다른 가시 영역(15)의 속성은 다른 가시 영역(15)의 크기, 모양 및 위치를 포함할 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)는 사용자(300) 외의 다른 사용자(301)를 위한 영상을 하나의 디스플레이 장치(100)에 디스플레이 할 수 있어, 듀얼 스크린의 효과를 낼 수 있다.
도 19는 일 실시예에 의하여, 다른 사용자가 존재하는 경우 영상을 디스플레이 하는 디스플레이 장치를 나타내는 도면이다.
도 19에 도시된 바와 같이, 디스플레이 장치(100)는 플렉시블 기판을 사용한 디스플레이 장치일 수 있다.
디스플레이 장치(100)는 사용자(300)를 향하여 볼록하게 휘어질 수 있다. 즉, 디스플레이 기판에서 외부로 노출된 화면이 사용자(300)를 향하여 볼록하게 휘어질 수 있다. 디스플레이 기판(미도시)의 테두리에는, 예를 들어, 압전 센서 또는 광 센서가 위치할 수 있으며, 제어부(110)는, 압전 센서 또는 광 센서를 이용하여 디스플레이 장치가 어떤 형태로 변형되었는지 여부를 판단하고 디스플레이 장치의 현재 형태를 결정할 수 있다.
또한, 디스플레이 장치(100)에서 디스플레이 기판(미도시)의 변형 정도가 연속적으로 변화될 수 있으며, 이 경우, 디스플레이 장치(100)는 디스플레이 장치의 현재 형태의 변화에 대하여 실시간으로 감지할 수 있다.
일 실시예에서 “다른 사용자”라는 용어는 디스플레이 장치(100)를 이용하여, 영상의 기능 또는 동작을 제어하는 사람을 의미하며, 사용자를 제외한 시청자, 관리자 또는 설치 기사를 포함할 수 있다.
디스플레이 장치(100)는 디스플레이 장치에 대한 사용자(300)의 위치를 검출하기 위하여 사용자를 감지할 수 있다. 여기서, 디스플레이 장치(100)는 디스플레이 장치(100)에 구비된 카메라를 이용할 수 있으며, 일반적으로 카메라이거나 또는 피사체와의 거리 측정이 가능한 뎁스(depth) 카메라일 수 있다.
또한, 디스플레이 장치(100)는 디스플레이 장치(100)에 대한 다른 사용자(301)를 감지할 수 있다. 디스플레이 장치(100)는 감지된 다른 사용자(301)의 이미지에 기초하여 다른 사용자(301)의 상대적인 위치를 검출할 수 있다.
예를 들어, 도 19에서 보여지다시피, 디스플레이 장치(100)의 볼록하게 휘어진 화면의 일 방향에서 다른 사용자(301)의 위치를 검출할 수 있다. 이때, 다른 사용자(301)는 사용자(300)의 반대 방향에 있는 것으로 도시되었지만, 이에 한정되는 것은 아니다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태와 다른 사용자(301)의 상대적인 위치에 기초하여, 디스플레이 장치(100)의 화면의 전체 영역 중에서 다른 가시 영역(15)을 결정할 수 있다.
여기서, 다른 가시 영역(15)이란 디스플레이 장치의 전체 화면 영역 중 다른 사용자(301)가 인식할 수 있는 화면 영역으로 결정된 화면 영역을 의미할 수 있다. 도 19에서 보여지듯이, 다른 가시 영역(15)은 가시 영역(10)과 겹치지 않는 화면 영역에서 결정될 수 있다. 예를 들어, 다른 사용자(301)쪽으로 볼록하게 휘어진 디스플레이 장치(100)의 화면에 다른 가시 영역(15)이 결정될 수 있다.
또한, 복수의 화면이 포함된 디스플레이 장치(100)에서 다른 가시 영역(15)은 가시 영역(10)을 제외한 남은 화면을 제외한 다른 화면에서 결정될 수 있다. 이에 한정되는 것은 아니다.
디스플레이 장치(100)는 결정된 다른 가시 영역(15)의 속성에 기초하여 삼차원 영상을 렌더링할 수 있다. 여기서, 영상은 가시 영역(10) 상에 디스플레이 되는 영상과 동일하거나, 또는 상이한 것일 수 있다. 가시 영역(10) 및 다른 가시 영역(15)에 디스플레이 되는 영상이 상이한 경우, 디스플레이 장치(100)는 각각의 영상을 렌더링한 뒤 디스플레이할 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)는 또 다른 사용자가 존재하는 경우, 디스플레이 장치(100)의 현재 형태 및 또 다른 사용자의 상대적인 위치에 따라 새로운 가시 영역들을 결정할 수 있다. 예를 들어, 다면체 디스플레이 장치로서 복수의 화면을 포함하는 경우, 각각의 화면에서 각각의 가시 영역들이 결정될 수도 있다.
즉, 디스플레이 장치(100)는 복수의 사용자를 감지하고, 복수의 영상을 하나의 디스플레이 장치(100)에 설정된 화면 영역에 각각 디스플레이 할 수 있다.
도 20은 일 실시예에 의하여 디스플레이 장치에서 영상을 디스플레이 하는 방법을 나타내는 흐름도이다.
S2010단계에서, 디스플레이 장치(100)에서 디스플레이 장치(100)에 대한 사용자의 상대적인 위치를 검출할 수 있다. 디스플레이 장치(100)는 촬영되는 이미지 내의 사용자 이미지의 위치에 따라, 디스플레이 장치(100)에 대한 사용자(300)의 상대적인 위치를 추론할 수 있다.
S2020단계에서, 디스플레이 장치(100)는 디스플레이 장치의 현재 형태 및 사용자의 위치에 기초하여 논리적 스크린(logical screen) 위상을 결정할 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)가 플렉시블 장치인지, 폴더블 장치인지, 엣지형 장치인지를 결정할 수 있다. 또한, 디스플레이 장치(100)는 장치의 휘어짐 정도, 구부러진 정도, 엣지의 개수 및 형태 등을 판단할 수 있다.
디스플레이 장치(100)는 압전 센서를 통해 디스플레이 장치(100)의 변형을 일으키는 힘의 크기를 측정할 수 있다. 디스플레이 장치(100)는 디스플레이 장치(100)에 가해지는 힘의 크기를 분석함으로써, 디스플레이 장치(100)의 변형 정도를 판단할 수 있다.
논리적 스크린은 디스플레이 장치(100)에서 설정한 가상의 화면을 의미할 수 있다. 논리적 스크린은 디스플레이 장치(100)에서 사용하는 프로그램에 의해 주어진 데이터를 입력하기 위하여, 디스플레이 장치(100)에서 설정한 화면 크기, 표시 문자수 등으로 이루어진 화면 데이터일 수 있다. 논리적 스크린은 디스플레이 장치(100)의 실제 화면 크기에 의존하지 않는 임의의 크기를 가진 가상의 화면일 수 있다.
디스플레이 장치(100)에서는 디스플레이 장치(100)의 현재 형태에 따라, 논리적 스크린을 결정할 수 있다. 또한, 디스플레이 장치(100)는 디스플레이 장치(100)에 대한 사용자의 위치에 기초하여 논리적 스크린의 위상을 결정할 수 있다. 나아가, 디스플레이 장치(100)는 디스플레이 장치(100)에서 고려할 수 있는 모든 조건을 기초로 논리적 스크린의 위상을 결정할 수 있다.
논리적 스크린의 위상은, 디스플레이 장치(100)에서 효율적으로 영상을 렌더링하기 위하여 설정하는 논리적 스크린의 위상을 의미할 수 있다.
S2030단계에서, 디스플레이 장치(100)는 논리적 스크린 위상에 기초하여 영상을 렌더링 할 수 있다.
디스플레이 장치(100)는 결정된 논리적 스크린에 기초하여, 렌더링할 영상의 크기, 표시할 수 있는 폴리곤의 수를 결정할 수 있다. 디스플레이 장치(100)는 논리적 스크린의 위상에 따라 삼차원 영상을 렌더링 할 수 있다.
S2040단계에서, 디스플레이 장치(100)는 렌더링 된 영상을 물리적 스크린에 디스플레이 할 수 있다. 디스플레이 장치(100)는 렌더링 된 삼차원 영상을 물리적 스크린에 실시간으로 디스플레이 할 수 있다.
물리적 스크린(physical screen)은 디스플레이 장치(100)에 포함된 물리적 화면을 의미할 수 있다. 물리적 스크린은 복수개일 수 있다. 물리적 스크린은 디스플레이 장치(100)가 현재 포함하고 있는 변형된 상태의 화면일 수 있다.
도 21은 일 실시예에 의한, 디스플레이 장치의 형태 및 사용자의 시선에 따라 논리적 스크린 및 물리적 스크린을 결정하는 것을 나타내는 도면이다.
일 실시예에 의하여, 디스플레이 장치(100)는 실제적인 화면으로서의 물리적 화면(3000)과 가상적인 화면으로서의 논리적 화면(2000)을 포함할 수 있다. 디스플레이 장치(100)는 사용자의 시선의 위치 및 물리적 화면(3000)의 변형 상태에 기초하여 논리적 화면(2000)을 구성할 수 있다. 또한, 디스플레이 장치(100)는 논리적 화면(2000)에 기초하여 객체(1000)를 렌더링하여 디스플레이할 수 있다.
도 22a 내지 도 22c는 일 시예에 의하여 디스플레이 장치에서 논리적 스크린을 결정하는 것을 설명하기 위한 도면이다.
디스플레이 장치(100)는 디스플레이 장치(100)에 대한 사용자의 위치 및 사용자의 시선과 디스플레이 장치(100)와의 거리에 따라 뷰포트를 설정할 수 있다.
뷰포트(view port)는 디스플레이 장치(100)의 화면 내에 미리 결정된 영역을 의미할 수 있다. 뷰포트는 디스플레이 장치(100)의 화면의 일 부분에 그래픽 화면을 디스플레이 하기 위하여 설정되는 영역일 수 있다. 뷰포트는 디스플레이 장치(100)의 일부 영역 또는 전체 영역에 설정될 수 있다. 뷰포트는 디스플레이 장치(100)의 화면 상에서 복수개 설정될 수 있다.
뷰포트는 컴퓨터 그래픽스(CG)에서 화상을 생성하는 렌더링(rendering) 과정에서 투영 변환한 도형을 실제로 표시하는 직사각형의 영역을 의미할 수 있다 디스플레이 장치(100)는 스크린의 좌표의 논리적인 계산만을 행하지만 뷰 포트는 실제로 도형을 표시해서 인쇄하기 위한 디스플레이 장치(100)의 화면의 좌표계와 합치되어야 한다. 그러므로 디스플레이 장치(100)의 화면의 좌표계로 계산된 도형을 표시, 출력하기 위해서는 뷰 포트 변환 처리에 의한 좌표 변환 계산을 행할 필요가 있다.
도 22a에서, 디스플레이 장치(100)는 제 1뷰포트(2001)를 설정할 수 있다. 도 22b에서, 디스플레이 장치(100)는 제 2뷰포트(2002)를 설정할 수 있다. 도 22c에서, 디스플레이 장치(100)는 제 3뷰포트(2003)를 설정할 수 있다.
제 1뷰포트(2001)는 사용자가 디스플레이 장치(100)의 좌측 화면을 바라본 각도에서의 좌표를 기초로 설정될 수 있다. 제 2뷰포트(2002)는 사용자가 디스플레이 장치(100)의 중앙 화면을 바라본 각도에서의 좌표를 기초로 설정될 수 있다. 제 3뷰포트(2003)는 사용자가 디스플레이 장치(100)의 우측 화면을 바라본 각도에서의 좌표를 기초로 설정될 수 있다. 이에 한정되는 것은 아니다.
디스플레이 장치(100)는 하나의 물리적 화면에 다각도에서 바라본 객체(1000)를 표시하기 위하여, 복수의 논리적 화면을 설정할 수 있다.
일 실시예에 의하여, 디스플레이 장치(100)는 렌더링 과정에서 투영 변환한 도형을 실제로 표시하기 위하여, 세개의 뷰포트(2001, 2002, 2003)를 설정할 수 있다.
도 23은 일 실시예에 의하여, 사용자의 위치 및 디스플레이 장치의 현재 형태에 기초하여 논리적 스크린을 결정하는 것을 설명하는 도면이다.
도 23에서, (a)는 사용자의 시선을 VRML(virtual reality modeling language)에서 구현한 예이며, (b)는 사용자의 시선을 평면 좌표 상에서 표시한 것이다.
여기서, VRML은 인터넷 문서에서 삼차원 공간을 표현할 수 있는 텍스트 파일일 수 있다. VRML은 인터넷 상에서 삼차원 공간을 표현하는 그래픽스 데이터의 기술 언어를 의미할 수 있다.
도 23에 도시된 바를 설명하면, 디스플레이 장치(100)는 디스플레이 장치(100)에 대한 사용자를 인식하고, 사용자의 위치에 대한 좌표를 생성할 수 있다.
도 23에서는 수학식 1에 의하여 뷰포트를 결정할 수 있다.
Figure pat00001
수학식 1에 나타난 바에 의하면,
Figure pat00002
는
Figure pat00003
가
Figure pat00004
로 이동하는 궤적을 나타내는 위치 벡터를 의미할 수 있다.
Figure pat00005
는
Figure pat00006
에서
Figure pat00007
로 이동하는 방향을 나타내는 위치 벡터를 의미할 수 있다.
Figure pat00008
는 이동하는 방향의 단위 벡터를 의미할 수 있다.
Figure pat00009
는 초기 방향의 단위 벡터를 의미하며,
Figure pat00010
=[0, 0, -1]을 의미할 수 있다.
도 24는 일 실시예에 의하여 논리적 화면의 위상을 결정하는 공간 좌표의 구성을 나타내는 도면이다.
수학식 2는 도 24에 나타난 공간 좌표를 산출하는 과정을 나타낸 것이다.
Figure pat00011
도 24 및 수학식 2에 의하여, 논리적 화면의 위상을 예측할 수 있다. 디스플레이 장치(100)는 예측된 논리적 화면의 위상에 기초하여 효율적으로 삼차원 영상을 렌더링할 수 있다.
디스플레이 장치(100)는 삼차원 영상과 이차원 영상을 전환할 때 화면이 흔들려보이는 문제를 해결하기 위하여 정확하게 스크린 좌표와 공간 좌표를 매핑해야한다. 이때, 스크린 좌표와 공간 좌표를 매핑시키기 위해 포비(fovy)를 사용하는 방법과, 좌표를 통해서 매핑시키는 방법을 사용할 수 있다. 이에 한정 되는 것은 아니다.
포비(fovy)를 이용하는 경우, 공간의 깊이를 조절하기 쉬우며, 포비 값을 조절함으로써 공감의 왜곡 정도를 변경하기 용이할 수 있다. 포비는 도 24에 도시된 바와 같이, 사용자의 시야각을 의미할 수 있다.
디스플레이 장치는 아래 수학식 3을 통하여 논리적 스크린을 구체적으로 결정할 수 있다.
수학식 3에서, z값 및 포비(fovy)값은 측정된 값에 의할 수 있다.
Figure pat00012
도 25는 일 실시예예 의하여 논리적 스크린을 계산한 것을 설명하기 위한 그래프이다.
도 25에 의하면, 사용자의 시선의 위치에 따라, 화면상에서 보여지는 가시 영역을 결정할 수 있다. 또한, 가시 영역에 표시되는 영상을 렌더링 하기 위하여 논리적 스크린을 산출할 수 있다.
도 25는 사용자의 시선의 위치를 (x, y, z)좌표로 놓았을 때, 뷰 포트 좌표
Figure pat00013
를 산출한 것을 나타낸 도면이다. 도 25에 나타낸 그래프는 수학식 4에 의하여 산출될 수 있다.
Figure pat00014
도 26 내지 도 28은 일 실시예에 의하여 디스플레이 장치에서 삼차원 영상을 디스플레이 하는 과정을 나타낸 도면이다. 도 26 내지 도 28을 통해 물리적인 화면 상에 삼차원 영상을 디스플레이 하는 과정을 확인할 수 있다.
도 26은 일 실시예에 의하여, 디스플레이 장치(100)에서 객체(1000)를 디스플레이 하는 것을 나타낸 도면이다. 도 26에서 도면부호 2001, 2002, 2003은 뷰포트이다. 도 26에서 디스플레이 장치(100)는 변형되지 않은 형태로서, 객체(1000)를 각 뷰포트에 표시되도록 설정할 수 있다.
사용자는 디스플레이 장치(100)의 제 1뷰포트(2001), 제 2뷰포트(2002) 및 제 3뷰포트(2003)에 각각 디스플레이 되는 객체(1000)의 일 부분을 확인할 수 있다.
도 27은 일 실시예에 의하여, 파이프(pipe) 라인을 사용하여 삼차원 영상을 렌더링 하는 디스플레이 장치를 나타내는 도면이다.
디스플레이 장치(100)는 복수개의 파이프 라인을 이용하여 삼차원 영상을 렌더링할 수 있다. 디스플레이 장치(100)는 OpenGL 파이프 라인을 통해 삼차원 영상을 렌더링할 수 있다. 디스플레이 장치(100)는 복수의 파이프 라인을 통한 출력을 멀티 플렉싱함으로써 영상을 렌더링할 수 있다.
OpenGL(Open Graphics Library, 오픈지엘)은 2차원 및 3차원 그래픽스 표준 API 규격으로서, 프로그래밍 언어 간 플랫폼 간의 교차 응용 프로그래밍을 지원할 수 있다. API는 약 250여개 함수 호출을 이용하여 단순한 기하도형에서부터 복잡한 삼차원 장면을 생성할 수 있다. OpenGL은 CAD, 가상현실, 정보시각화, 비행 시뮬레이션 등의 분야에서 활용되고 있다. 또한 컴퓨터 게임 분야에서도 널리 활용되고 있다. 디스플레이 장치(100)는 OpenGL을 통해 점, 선, 다각형과 같은 기본 도형을 생성할 수 있으며, 이를 픽셀 형식으로 변형할 수 있다.
디스플레이 장치(100)는 렌더링 된 영상을 렌터큐(Render queue)를 화면상에 통해 출력할 수 있다.
디스플레이 장치(100)는 복수의 파이프 라인을 이용하여, 제 1뷰포트(2001), 제 2뷰포트(2002) 및 제 3뷰포트(2003)에 디스플레이 되는 영상을 순서대로 렌더링할 수 있다.
도 28은 일 실시예에 의하여, 복수의 뷰포트를 기초로 렌더링 된 영상을 논리적 스크린에 표시하는 것을 나타내는 도면이다.
도 28에 도시된 바와 같이, 디스플레이 장치(100)는 프레임별로 제 1뷰포트(2001), 제 2뷰포트(2002) 및 제 3뷰포트(2003)를 멀티플렉싱 할 수 있다.
디스플레이 장치(100)는 제 1프레임을 렌더링 한 후 소정의 시간이 경과 한 후 제 2프레임을 렌더링 할 수 있다. 디스플레이 장치(100)는 제 2프레임을 렌더링하고 소정의 시간이 경과한 후에 제 3프레임을 렌더링 할 수 있다.
디스플레이 장치(100)는 복수의 뷰포트에 렌더링 된 프레임들을 융합함으로써 논리적 스크린에 디스플레이 되는 영상을 렌더링할 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)의 현재 형태, 즉 디스플레이 장치(100)의 변형 상태에 기초하여 물리적 스크린에 영상을 디스플레이 할 수 있다.
디스플레이 장치(100)는 복수의 뷰포트에 의해 렌더링 된 영상을 시간에 따라 융합함으로써 논리적 스크린에 영상을 디스플레이하고, 최종적으로 물리적 스크린에 영상을 디스플레이 할 수 있다. 이러한 과정을 통해 디스플레이 장치(100)는 효과적으로 삼차원 영상을 디스플레이 할 수 있다.
도 29 및 도 30은 일 실시예에 의한 디스플레이 장치의 구성을 나타내는 기능적 블록도이다.
도 29에 도시된 바와 같이, 디스플레이 장치(100)는 제어부(110), 디스플레이 부(120) 및 감지부(130)를 포함할 수 있다. 그러나, 도 29에 도시된 구성 요소 모두가 디스플레이 장치(100)의 필수 구성 요소인 것은 아니다. 도 29에 도시된 구성 요소보다 많은 구성 요소에 의해 디스플레이 장치(100)가 구현될 수도 있고, 도 29에 도시된 구성 요소보다 적은 구성 요소에 의해 디스플레이 장치(100)가 구현될 수도 있다.
예를 들어, 도 30에 도시된 바와 같이, 일부 실시예에 따른 디스플레이 장치(100)는 제어부(110), 디스플레이 부(120) 및 감지부(130)외에, 전원 공급부(140), 통신부(150), 저장부(160), 입/출력부(170), 비디오 처리부(180), 오디오 처리부(190) 및 오디오 출력부(195) 를 더 포함할 수도 있다.
디스플레이 부(120)는, 제어부(110)에서 처리된 영상 신호, 데이터 신호, OSD 신호, 제어 신호 등을 변환하여 구동 신호를 생성한다. 디스플레이 부(120)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등으로 구현될 수 있으며, 또한, 삼차원 디스플레이(3D display)로 구현될 수 있다. 또한, 디스플레이 부(120)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.
일 실시예에 따라, 디스플레이 부(120)는 렌더링 된 삼차원 영상을 디스플레이 할 수 있다. 또한, 디스플레이 부(120)는 사용자의 상대적인 위치에 따라 설정되는 사용자 가시 영역(10)을 표시할 수 있다. 또한, 디스플레이 부(120)는 가시 영역의 모양, 크기 및 위치에 따라서 디스플레이 되는 영상을 디스플레이 할 수 있다.
예를 들어, 가시 영역(10)의 크기가 전체 화면 영역의 70%범위에서 100%범위로 변화되는 경우, 동일한 영상에 대하여 30% 확대된 크기의 영상을 가시 영역(10)에 디스플레이 할 수 있다.
디스플레이 부(120)는 적어도 하나 이상의 화면을 포함할 수 있다. 디스플레이 부(120)에 포함된 복수의 화면은 미리 결정된 각도로 연결될 수 있다. 일 실시예에 따라, 디스플레이 부(120)가 포함할 수 있는 화면의 개수는 제한이 없다.
디스플레이 부(120)는 형태가 변형될 수 있다. 일 실시예에 의하여, 디스플레이 부(120)가 플렉시블 디스플레이인 경우, 플렉시블 디스플레이 부(120)의 펼침 각도(unfolding angle)가 변함에 따라 플렉시블 디스플레이 부(120)에서 제공하는 화면의 레이아웃이 동적으로 변화될 수 있다.
제어부(110)는 디스플레이 장치(100)의 변형(deform)정도를 감지하여 현재 형태를 검출할 수 있다. 제어부(110)는 디스플레이 장치(100)가 변형되는 동안 디스플레이 부(120)의 변형 범위를 감지할 수 있다. 예를 들어, 폴더블 디스플레이는 폴더블 디바이스와 동일한(conform) 형상으로 변형되기 때문에, 폴더블 디바이스인 경우의 변형 정도는 결국 폴더블 디스플레이의 변형 정도와 동일한 의미를 나타낼 수 있다.
또한, 제어부(110)는 디스플레이 장치(100)의 형태 전환을 감지할 수 있다. 예를 들어, 디스플레이 장치(100)의 펼침 곡률, 펼침 각도, 휨(bending) 곡률, 말린(rolling) 정도를 감지할 수 있다.
또한, 제어부(110)는 변형된 디스플레이 장치(100)의 화면에 대한 삼차원 화면을 구성하기 위한 폴리곤의 수를 검출할 수 있다. 보다 구체적으로, 제어부(110)는 디스플레이 장치(100)의 종류, 디자인 및 화면 변형 파라미터에 따른 디스플레이 부(120)의 화면에 대한 삼차원 구성에 대한 정보를 검출할 수 있다. 제어부(110)는 검출된 삼차원 구성을 기초로 하여 삼차원 영상을 디스플레이하기 위한 폴리곤의 개수 및 방향을 계산할 수 있다.
제어부(110)는 CPU(Central Processing Unit), AP(application processor) 등과 같은 적어도 하나의 프로세서로 구현된 하드웨어 구성으로서, 디스플레이 장치(100)의 전반적인 동작을 제어하는 기능을 수행할 수 있다.
제어부(110)는 디스플레이 장치(100)의 현재 형태 및 사용자의 상대적인 위치에 따라 가시 영역을 전체 화면 영역 내에 결정할 수 있다. 또한, 제어부(110)는 설정되는 가시 영역에 따라 영상을 렌더링할 수 있다.
여기서, 폴리곤은 삼차원 그래픽에서 물체를 표현할 때 쓰이는 기본 단위인 다각형을 의미하는 것으로서, 다각형 모양의 폴리곤이 여럿 모여서 하나의 캐릭터 또는 삼차원 오브젝트(3D object)를 이룰 수 있다. 삼차원 영상으로 변환하는 렌더링시 실시간으로 처리할 수 있는 폴리곤의 수가 한계가 있기 때문에, 하드웨어의 성능을 초과하지 않는 범위내에서 폴리곤의 수를 조절하는 것은 중요하다.
또한, 제어부(110)는 디스플레이 장치(100)의 기능을 제어하기 위하여, 디스플레이 부(120) 및 감지부(130)를 제어할 수 있다.
감지부(130)는 디스플레이 장치(100)에 대한 사용자의 상대적인 위치를 감지할 수 있다. 보다 구체적으로, 감지부(130)는 사용자의 위치 검출을 위하여 사용자를 촬영할 수 있다.
도 30을 참조하면, 감지부(130)는 카메라 부(131) 및 광 수신부(132)를 포함할 수 있다.
카메라 부(131)는 카메라 인식 범위에서 사용자를 촬영할 수 있다. 또한, 카메라 부(131)는 카메라 인식 범위에서 제스처를 포함하는 사용자의 모션에 대응되는 영상을 수신할 수 있다. 예를 들어, 카메라 부(131)의 인식 범위는 카메라 부(131)에서부터 사용자까지 0.1 ~ 5 m 이내 거리가 될 수 있다. 사용자 모션은 예를 들어, 사용자의 얼굴, 표정, 손, 주먹, 손가락과 같은 사용자의 신체 일부분 또는 사용자 일부분의 모션 등을 포함할 수 있다. 카메라 부(131)는 제어부(110)의 제어에 따라 수신된 영상을 전기 신호로 변환하여 제어부(110)로 출력할 수 있다.
일 실시예에 의하여, 제어부(110)가 디스플레이 장치(100)를 바라보는 사용자의 눈동자를 식별하는데 사용할 수 있도록 카메라 부(131)는 사용자의 눈동자가 포함된 사용자의 얼굴 등을 촬영하고, 촬영된 얼굴 이미지를 제어부(110)로 출력할 수 있다.
또한, 카메라 부(131)는 복수의 카메라 모듈을 포함할 수 있다. 제어부(110)는 디스플레이 장치(100)의 현재 형태에 기초하여 카메라 부(131)에 포함된 복수의 카메라 중 적어도 어느 하나를 활성화시킬 수 있다.
제어부(110)는 수신된 사용자의 눈동자가 포함된 영상 또는 제스처가 포함된 영상을 이용하여 디스플레이 장치(100)에 결정되는 가시 영역의 속성을 제어할 수 있다.
또한, 제어부(110)는 가시 영역의 속성, 사용자의 상대적인 위치, 사용자의 시선 위치, 사용자의 제스처, 사용자의 시선 방향 등을 고려하여 폴리곤의 크기 및 개수를 결정할 수 있다.
또한, 제어부(110)는 변경되는 가시 영역의 속성 및 하드웨어의 상태에 기초하여 폴리곤의 개수를 결정할 수 있다.
제어부(110)는 결정된 폴리곤들을 이용하여 삼차원 영상을 렌더링할 수 있다. 제어부(110)는 가시 영역의 변경 또는 하드웨어 상태의 변경 등에 따라 달라지는 개수의 폴리곤들을 이용하여 삼차원 영상을 렌더링할 수 있다.
카메라 부(131)는 렌즈(도시되지 아니함) 및 이미지 센서(도시되지 아니함)로 구성될 수 있다. 카메라 부(131)는 복수의 렌즈와 이미지 프로세싱을 이용하여 광학 줌(optical zoom) 또는 디지털 줌(digital zoom)을 지원할 수 있다. 카메라 부(131)의 인식 범위는 카메라의 각도 및 주변 환경 조건에 따라 다양하게 설정될 수 있다. 카메라 부(131)가 복수개의 카메라로 구성되는 경우, 복수의 카메라를 이용하여 삼차원 정지 이미지 또는 삼차원 모션을 수신할 수 있다.
카메라 부(131)는 디스플레이 장치(100)와 일체형 또는 분리형으로 구현될 수 있다. 분리된 카메라 부(131)를 포함하는 별도의 장치(도시되지 아니함)는 통신부(150) 또는 입/출력부(170)를 통해 디스플레이 장치(100)와 전기적으로 연결될 수 있다.
전원 공급부(140)는 제어부(110)의 제어에 의해 디스플레이 장치(100) 내부의 구성 요소들로 외부의 전원 소스에서부터 입력되는 전원을 공급할 수 있다. 또한, 전원 공급부(140)는 제어부(110)의 제어에 의해 디스플레이 장치(100) 내부에 위치하는 하나 또는 둘 이상의 배터리(도시되지 아니함)에서부터 출력되는 전원을 내부의 구성 요소들에게 공급할 수 있다.
광 수신부(132)는 디스플레이 장치(100)에 대한 사용자 입력(예를 들어, 터치, 눌림, 터치 제스처, 음성, 또는 모션)에 대응되는 광 신호를 수신할 수 있다. 수신된 광 신호로부터 제어부(110)의 제어에 의해 제어 신호가 추출될 수 있다.
통신부(150)는 제어부(110)의 제어에 의해 디스플레이 장치(100)를 외부 장치(예를 들어, 오디오 장치 등)와 연결할 수 있다. 제어부(110)는 통신부(150)를 통해 연결된 외부 장치로 영상을 송/수신, 외부 장치에서부터 어플리케이션(application)을 다운로드 하거나 또는 웹 브라우징을 할 수 있다. 통신부(150)는 디스플레이 장치(100)의 성능 및 구조에 대응하여 무선랜(151), 블루투스(152), 및 유선 이더넷(Ethernet, 153) 중 하나를 포함할 수 있다. 또한, 통신부(150)은 무선랜(151), 블루투스(152), 및 유선 이더넷(Ethernet, 153)의 조합을 포함할 수 있다. 통신부(150)는 제어부(110)의 제어에 의해 외부 기기로부터 영상 제어 신호를 수신할 수 있다. 제어 신호는 블루투스 타입, RF 신호 타입 또는 와이파이 타입으로 구현될 수 있다.
통신부(150)는 블루투스 외에 다른 근거리 통신(예를 들어, NFC(near field communication, 도시되지 아니함), BLE(bluetooth low energy, 도시되지 아니함)를 더 포함할 수 있다.
저장부(160)는 도시되지 아니한 영상 수신 모듈, 디스플레이 변형 감지 모듈, 볼륨 제어 모듈, 통신 제어 모듈, 음성 인식 모듈, 모션 인식 모듈, 광 수신 모듈, 디스플레이 제어 모듈, 오디오 제어 모듈, 외부 입력 제어 모듈, 전원 제어 모듈, 무선(예를 들어, 블루투스)으로 연결되는 외부 장치의 전원 제어 모듈, 음성 데이터베이스(DB), 또는 모션 데이터베이스(DB)를 포함할 수 있다. 저장부(160)의 도시되지 아니한 모듈들 및 데이터 베이스는 디스플레이 장치(100)에서 영상 수신의 제어 기능, 볼륨 제어 기능, 통신 제어 기능, 음성 인식 기능, 모션 인식 기능, 광 수신 제어 기능, 디스플레이 제어 기능, 오디오 제어 기능, 외부 입력 제어 기능, 전원 제어 기능 또는 무선(예를 들어, 블루투스)으로 연결되는 외부 장치의 전원 제어 기능을 수행하기 위하여 소프트웨어 형태로 구현될 수 있다. 제어부(110)는 저장부(160)에 저장된 이들 소프트웨어를 이용하여 각각의 기능을 수행할 수 있다.
입/출력부(170)는 제어부(110)의 제어에 의해 디스플레이 장치(100)의 외부에서부터 비디오(예를 들어, 동영상 등), 오디오(예를 들어, 음성, 음악 등) 및 부가 정보(예를 들어, EPG 등) 등을 수신한다. 입/출력부(170)는 HDMI 포트(High-Definition Multimedia Interface port, 171), 컴포넌트 잭(component jack, 172), PC 포트(PC port, 173), 및 USB 포트(USB port, 174) 중 하나를 포함할 수 있다. 입/출력부(170)는 HDMI 포트(171), 컴포넌트 잭(172), PC 포트(173), 및 USB 포트(174)의 조합을 포함할 수 있다.
입/출력부(170)의 구성 및 동작은 본 발명의 실시예에 따라 다양하게 구현될 수 있다는 것은 당해 기술 분야의 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
비디오 처리부(180)는, 디스플레이 장치(100)가 렌더링한 비디오 데이터에 대한 처리를 수행할 수 있다. 비디오 처리부(180)에서는 비디오 데이터에 대한 디코딩, 스케일링, 노이즈 필터링, 프레임 레이트 변환, 해상도 변환 등과 같은 다양한 이미지 처리를 수행할 수 있다.
오디오 처리부(190)는 오디오 데이터에 대한 처리를 수행할 수 있다. 오디오 처리부(190)에서는 오디오 데이터에 대한 디코딩이나 증폭, 노이즈 필터링 등과 같은 다양한 처리가 수행될 수 있다. 한편, 오디오 처리부(190)는 복수의 영상에 대응되는 오디오를 처리하기 위해 복수의 오디오 처리 모듈을 구비할 수 있다.
오디오 출력부(195)는 제어부(110)의 제어에 의해 렌더링 된 영상 신호에 포함된 오디오를 출력할 수 있다. 오디오 출력부(195)는 통신부(150) 또는 입/출력부(170)를 통해 입력되는 오디오(예를 들어, 음성, 사운드)를 출력할 수 있다. 또한, 오디오 출력부(195)는 제어부(110)의 제어에 의해 저장부(160)에 저장된 오디오를 출력할 수 있다. 오디오 출력부(195)는 스피커(196), 헤드폰 출력 단자(197) 또는 S/PDIF(Sony/Philips Digital Interface: 출력 단자(198) 중 적어도 하나를 포함할 수 있다. 오디오 출력부(195)는 스피커(196), 헤드폰 출력 단자(197) 및 S/PDIF 출력 단자(198)의 조합을 포함할 수 있다.
본 발명의 일 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (33)

  1. 변형 가능한 디스플레이 장치가 영상을 디스플레이하는 방법에 있어서,
    상기 디스플레이 장치의 현재 형태를 결정하는 단계;
    상기 디스플레이 장치의 사용자를 촬영하는 단계;
    상기 촬영된 이미지에 기초하여 상기 디스플레이 장치에 대한 상기 사용자의 상대적인 위치를 검출하는 단계;
    상기 결정된 현재 형태 및 상기 검출된 위치에 기초하여, 상기 디스플레이 장치의 화면의 전체 영역 중에서 가시 영역을 결정하는 단계; 및
    상기 결정된 가시 영역 상에 상기 영상을 디스플레이하는 단계;
    를 포함하는, 방법.
  2. 제 1항에 있어서,
    상기 영상은 삼차원의 영상이며,
    상기 방법은, 상기 가시 영역의 속성에 따라 상기 삼차원의 영상을 렌더링하는 단계;
    를 더 포함하는, 방법.
  3. 제 2항에 있어서,
    상기 가시 영역의 속성은,
    상기 가시 영역의 크기, 위치 및 모양 중 적어도 하나를 포함하는, 방법.
  4. 제 1항에 있어서,
    상기 화면의 전체 영역 중 상기 가시 영역을 제외한 영역을 비활성화하는 단계;
    를 더 포함하는, 방법.
  5. 제 1항에 있어서,
    상기 화면의 전체 영역 중 상기 가시 영역에 표시되는 배경 화면의 색상을 변경시키는 단계;
    를 더 포함하는, 방법.
  6. 제 1항에 있어서,
    상기 디스플레이 장치의 사용자를 촬영하는 단계는,
    상기 사용자의 눈동자를 포함하는 상기 사용자의 신체의 적어도 일부를 촬영하는 단계;를 포함하고,
    상기 사용자의 상대적인 위치를 검출하는 단계는,
    상기 사용자의 눈동자를 포함하는 영상에 기초하여, 상기 사용자의 시선 위치를 결정하며,
    상기 가시 영역을 결정하는 단계는
    상기 사용자의 시선 위치에 기초하여, 상기 가시 영역을 결정하는, 방법.
  7. 제 6항에 있어서,
    상기 사용자의 시선 위치가 변화함에 따라, 상기 가시 영역을 변경하는 단계; 및
    상기 변경된 가시 영역 상에 상기 영상을 디스플레이하는 단계;
    를 포함하는, 방법.
  8. 제 7항에 있어서,
    상기 변경된 가시 영역의 속성에 기초하여 상기 디스플레이될 영상을 렌더링하는 단계;
    를 더 포함하는, 변형 가능한 디스플레이 장치가 영상을 디스플레이하는 방법.
  9. 제 6항에 있어서,
    상기 가시 영역을 결정하는 단계는,
    상시 사용자의 시선 위치와, 상기 디스플레이 장치와 상기 사용자와의 거리, 상기 영상에 포함되는 사용자의 제스처(gesture) 또는 상기 사용자의 시선 방향 중 적어도 어느 하나에 기초하여 가시 영역을 결정하는, 방법.
  10. 제 7항에 있어서,
    상기 사용자의 시선의 방향이 상기 화면을 벗어나는 경우, 상기 가시 영역의 변경을 중단하는 단계;
    를 더 포함하는, 방법.
  11. 제 1항에 있어서,
    상기 디스플레이 장치는 복수의 카메라를 포함하며,
    상기 사용자를 촬영하는 단계는,
    상기 결정된 디스플레이 장치의 현재 형태에 기초하여 상기 복수의 카메라 중 적어도 하나를 활성화시키는 단계;
    를 포함하는, 방법.
  12. 제 1항에 있어서,
    상기 디스플레이 장치의 형태가 변형됨을 감지하는 단계;
    상기 디스플레이 장치의 형태가 변형됨에 따라, 상기 변형된 형태에 기초하여, 상기 가시 영역을 변경하는 단계; 및
    상기 변경되는 가시 영역 상에 상기 영상을 디스플레이하는 단계;
    를 더 포함하는, 방법.
  13. 제 1항에 있어서,
    상기 디스플레이 장치는 복수의 화면을 포함하며,
    상기 디스플레이 장치의 현재 형태에 따라, 상기 복수의 화면 중 적어도 하나를 선택하며,
    상기 가시 영역은, 상기 선택된 적어도 하나의 화면의 전체 영역 중에서 결정되는 것인, 방법.
  14. 제 1항에 있어서,
    상기 디스플레이 장치의 다른 사용자를 촬영하는 단계;
    상기 촬영된 이미지에 기초하여 상기 디스플레이 장치에 대한 상기 다른 사용자의 상대적인 위치를 검출하는 단계;
    상기 결정된 형태 및 상기 검출된 다른 사용자의 위치에 기초하여, 상기 디스플레이 장치의 화면의 전체 영역 중에서 다른 가시 영역을 결정하는 단계; 및
    상기 결정되는 다른 가시 영역 상에 영상을 디스플레이 하는 단계;
    를 더 포함하는, 방법.
  15. 제 14항에 있어서,
    상기 다른 가시 영역은,
    상기 디스플레이 장치의 화면의 전체 영역 중에서 설정된 상기 가시 영역과 겹치지 않는, 방법.
  16. 제 14항에 있어서,
    상기 다른 가시 영역에 디스플레이 되는 영상은, 상기 가시 영역에 디스플레이 되는 영상과 상이한, 방법.
  17. 제 1 항 내지 제 16 항 중 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
  18. 영상을 디스플레이하는 변형 가능한 디스플레이 장치에 있어서,
    상기 디스플레이 장치의 사용자를 촬영하는 감지부;
    상기 디스플레이 장치의 현재 형태를 결정하고, 상기 촬영된 이미지에 기초하여 상기 디스플레이 장치에 대한 상기 사용자의 상대적인 위치를 검출하고, 상기 결정된 현재 형태 및 상기 검출된 위치에 기초하여, 상기 디스플레이 장치의 화면의 전체 영역 중에서 가시 영역을 결정하는 제어부; 및
    상기 결정된 가시 영역 상에 상기 영상을 디스플레이 하는 디스플레이 부;
    를 포함하는, 장치.
  19. 제 18항에 있어서,
    상기 영상은 삼차원의 영상이며,
    상기 제어부는,
    상기 가시 영역의 속성에 따라 상기 삼차원의 영상을 렌더링하는, 장치.
  20. 제 19항에 있어서,
    상기 가시 영역의 속성은,
    상기 가시 영역의 크기, 위치 및 모양 중 적어도 하나를 포함하는, 장치.
  21. 제 18항에 있어서,
    상기 제어부는,
    상기 화면의 전체 영역 중 상기 가시 영역을 제외한 영역을 비활성화하는, 장치.
  22. 제 18항에 있어서,
    상기 제어부는,
    상기 화면의 전체 영역 중 상기 가시 영역에 표시되는 배경 화면의 색상을 변경시키는, 장치.
  23. 제 18항에 있어서,
    상기 감지부는,
    상기 사용자의 눈동자를 포함하는 상기 사용자의 신체의 적어도 일부를 촬영하고,
    상기 제어부는,
    상기 사용자의 눈동자를 포함하는 영상에 기초하여, 상기 사용자의 시선 위치를 결정하며, 상기 사용자의 시선 위치에 기초하여, 상기 가시 영역을 결정하는, 장치.
  24. 제 23항에 있어서,
    상기 제어부는,
    상기 사용자의 시선 위치가 변화함에 따라, 상기 가시 영역을 변경하고,
    상기 디스플레이 부는,
    상기 변경된 가시 영역 상에 상기 영상을 디스플레이하는, 장치.
  25. 제 24항에 있어서,
    상기 제어부는,
    상기 변경된 가시 영역의 속성에 기초하여 상기 디스플레이될 영상을 렌더링하는, 장치.
  26. 제 23항에 있어서,
    상기 제어부는,
    상기 사용자의 시선 위치와, 상기 디스플레이 장치와 상기 사용자와의 거리, 상기 영상에 포함되는 사용자의 제스처(gesture) 또는 상기 사용자의 시선 방향 중 적어도 어느 하나에 기초하여 가시 영역을 결정하는, 장치.
  27. 제 24항에 있어서
    상기 제어부는,
    상기 사용자의 시선의 방향이 상기 화면을 벗어나는 경우, 상기 가시 영역의 변경을 중단하는, 장치.
  28. 제 23항에 있어서,
    상기 감지부는 복수의 카메라를 포함하며,
    상기 제어부는,
    상기 결정된 디스플레이 장치의 현재 형태에 기초하여 상기 복수의 카메라 중 적어도 하나를 활성화시키는, 장치.
  29. 제 23항에 있어서,
    상기 제어부는,
    상기 디스플레이 장치의 형태가 변형됨에 따라, 상기 변형된 형태에 기초하여, 상기 가시 영역을 변경하고,
    상기 디스플레이 부는,
    상기 변경되는 가시 영역 상에 상기 영상을 디스플레이하는, 장치.
  30. 제 23항에 있어서,
    상기 디스플레이 부는,
    복수의 화면을 포함하며,
    상기 제어부는,
    상기 디스플레이 장치의 현재 형태에 따라, 상기 복수의 화면 중 적어도 하나를 선택하며,
    상기 가시 영역은, 상기 선택된 적어도 하나의 화면의 전체 영역 중에서 결정되는 것인, 장치.
  31. 제 18항에 있어서,
    상기 감지부는, 상기 디스플레이 장치의 다른 사용자를 촬영하고,
    상기 제어부는, 상기 촬영된 이미지에 기초하여 상기 디스플레이 장치에 대한 상기 다른 사용자의 상대적인 위치를 검출하고, 상기 결정된 형태 및 상기 검출된 다른 사용자의 위치에 기초하여, 상기 디스플레이 장치의 화면의 전체 영역 중에서 다른 가시 영역을 결정하고,
    상기 디스플레이 부는, 상기 결정된 다른 가시 영역 상에 영상을 디스플레이하는, 장치
  32. 제 31항에 있어서,
    상기 다른 가시 영역은,
    상기 디스플레이 장치의 화면의 전체 영역 중에서 설정된 상기 가시 영역과 겹치지 않는, 장치.
  33. 제 31항에 있어서,
    상기 다른 가시 영역에 디스플레이 되는 영상은,
    상기 가시 영역에 디스플레이 되는 영상과 상이한, 장치.
KR1020150186772A 2015-12-24 2015-12-24 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법 KR20170076471A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020150186772A KR20170076471A (ko) 2015-12-24 2015-12-24 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법
EP16879136.6A EP3385819A4 (en) 2015-12-24 2016-10-10 DEFORMABLE DISPLAY DEVICE AND IMAGE DISPLAY METHOD USING THE SAME
PCT/KR2016/011327 WO2017111268A1 (ko) 2015-12-24 2016-10-10 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법
US16/063,867 US10606350B2 (en) 2015-12-24 2016-10-10 Deformable display device and image display method using same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150186772A KR20170076471A (ko) 2015-12-24 2015-12-24 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법

Publications (1)

Publication Number Publication Date
KR20170076471A true KR20170076471A (ko) 2017-07-04

Family

ID=59090660

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150186772A KR20170076471A (ko) 2015-12-24 2015-12-24 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법

Country Status (4)

Country Link
US (1) US10606350B2 (ko)
EP (1) EP3385819A4 (ko)
KR (1) KR20170076471A (ko)
WO (1) WO2017111268A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10739818B2 (en) 2017-12-12 2020-08-11 Samsung Display Co., Ltd. Electronic device and method for driving the same
WO2022119398A1 (ko) * 2020-12-03 2022-06-09 삼성전자 주식회사 플랙서블 전자 장치 및 이의 아바타 서비스 운용 방법

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA3031085A1 (en) * 2016-07-16 2018-01-25 Ideal Perceptions Llc Interactive projection system
US10761591B2 (en) * 2017-04-01 2020-09-01 Intel Corporation Shutting down GPU components in response to unchanged scene detection
CN107807752B (zh) * 2017-10-27 2021-04-02 京东方科技集团股份有限公司 电子设备、柔性屏及其防误触控装置和方法
USD914672S1 (en) * 2018-06-04 2021-03-30 Compal Electronics, Inc. Notebook computer with bendable cover and screen
CN111381630B (zh) * 2018-12-29 2022-01-07 Oppo广东移动通信有限公司 电子设备
CN110288934B (zh) * 2019-06-25 2022-09-23 北京向上一心科技有限公司 基于柔性屏幕的成像保持方法、装置和移动终端
KR102574288B1 (ko) 2019-08-07 2023-09-07 삼성전자주식회사 3d 데이터 아이템을 구성하기 위한 방법 및 벤더블 디바이스
CN110751905A (zh) * 2019-09-29 2020-02-04 联想(北京)有限公司 一种电子设备和信息处理方法
CN111276047A (zh) * 2020-01-15 2020-06-12 厦门微亚智能科技有限公司 一种oled柔性屏折弯的轨迹规划方法
CN113923298A (zh) * 2020-06-24 2022-01-11 中兴通讯股份有限公司 显示方法及装置、计算机可读存储介质、电子装置
WO2022225993A1 (en) * 2021-04-19 2022-10-27 Cubios, Inc. Graphical user interface for transformable display
GB2609473A (en) * 2021-08-04 2023-02-08 Pufferfish Ltd Three-dimensional display apparatus
US11669239B1 (en) * 2021-12-03 2023-06-06 Khai Smith Smart globe

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6813074B2 (en) 2002-05-31 2004-11-02 Microsoft Corporation Curved-screen immersive rear projection display
KR100659888B1 (ko) 2005-01-07 2006-12-20 엘지전자 주식회사 이동 단말기의 3차원 영상 처리방법
WO2011044936A1 (en) 2009-10-14 2011-04-21 Nokia Corporation Autostereoscopic rendering and display apparatus
CN201937647U (zh) 2010-12-27 2011-08-17 上海华勤通讯技术有限公司 带有裸眼3d屏幕的手机
EP2500894A1 (en) * 2011-03-18 2012-09-19 Research In Motion Limited System and method for bendable display
US10120438B2 (en) * 2011-05-25 2018-11-06 Sony Interactive Entertainment Inc. Eye gaze to alter device behavior
KR101832958B1 (ko) * 2011-06-01 2018-02-28 엘지전자 주식회사 이동 단말기 및 그의 3ｄ영상 표시방법
CN103167298A (zh) 2011-12-09 2013-06-19 金耀有限公司 使用偏移和分色实现立体三维视觉效果的方法和装置
US9639959B2 (en) 2012-01-26 2017-05-02 Qualcomm Incorporated Mobile device configured to compute 3D models based on motion sensor data
US8988349B2 (en) 2012-02-28 2015-03-24 Google Technology Holdings LLC Methods and apparatuses for operating a display in an electronic device
US8947385B2 (en) 2012-07-06 2015-02-03 Google Technology Holdings LLC Method and device for interactive stereoscopic display
KR101305249B1 (ko) 2012-07-12 2013-09-06 씨제이씨지브이 주식회사 다면 상영 시스템
US8878846B1 (en) 2012-10-29 2014-11-04 Google Inc. Superimposing virtual views of 3D objects with live images
KR102027555B1 (ko) 2012-12-05 2019-11-04 삼성전자주식회사 컨텐츠 디스플레이를 위한 방법 및 그 방법을 처리하는 전자 장치
KR102062310B1 (ko) 2013-01-04 2020-02-11 삼성전자주식회사 전자 장치에서 헤드 트래킹 기술을 이용하여 제어 서비스를 제공하기 위한 장치 및 방법
US9639152B2 (en) * 2013-12-30 2017-05-02 Lenovo (Singapore) Pte. Ltd. Display alignment based on eye tracking
US20160372083A1 (en) * 2015-06-18 2016-12-22 Intel Corporation Facilitating increased user experience and efficient power performance using intelligent segmentation on flexible display screens

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10739818B2 (en) 2017-12-12 2020-08-11 Samsung Display Co., Ltd. Electronic device and method for driving the same
WO2022119398A1 (ko) * 2020-12-03 2022-06-09 삼성전자 주식회사 플랙서블 전자 장치 및 이의 아바타 서비스 운용 방법

Also Published As

Publication number Publication date
EP3385819A1 (en) 2018-10-10
US10606350B2 (en) 2020-03-31
EP3385819A4 (en) 2019-01-09
WO2017111268A1 (ko) 2017-06-29
US20180373329A1 (en) 2018-12-27

Similar Documents

Publication Publication Date Title
KR20170076471A (ko) 변형 가능한 디스플레이 장치 및 이를 이용한 영상 표시 방법
US11379105B2 (en) Displaying a three dimensional user interface
WO2018188499A1 (zh) 图像、视频处理方法和装置、虚拟现实装置和存储介质
US11393154B2 (en) Hair rendering method, device, electronic apparatus, and storage medium
KR102491443B1 (ko) 애플리케이션을 위한 디스플레이 적응 방법 및 장치, 디바이스, 및 저장 매체
JP6909554B2 (ja) 視覚効果を有するオブジェクトを表示する装置及び方法
US20130321390A1 (en) Augmented books in a mixed reality environment
JP2020042802A (ja) ３次元コンテンツ内の場所に基づく仮想要素モダリティ
US20160004335A1 (en) Three Dimensional Display System and Use
US20100128112A1 (en) Immersive display system for interacting with three-dimensional content
CN109725956B (zh) 一种场景渲染的方法以及相关装置
US20120120071A1 (en) Shading graphical objects based on face images
KR20230028532A (ko) 가상 현실 경험들을 위한 지상 실측값 데이터세트들의 생성
KR102413074B1 (ko) 사용자 단말, 전자 장치 및 이들의 제어 방법
US20130215045A1 (en) Stroke display method of handwriting input and electronic device
US11402965B2 (en) Object display method and apparatus for simulating feeling of blind person and storage medium
CN110853128B (zh) 虚拟物体显示方法、装置、计算机设备及存储介质
US20230334617A1 (en) Camera-based Transparent Display
CN114514493A (zh) 增强设备
CN115836269A (zh) 增强现实环境增强
CN117321537A (zh) 眼睛佩戴设备动态功率配置
US20230368432A1 (en) Synthesized Camera Arrays for Rendering Novel Viewpoints
KR102640871B1 (ko) 증강 현실을 이용한 영상 데이터를 제공하는 전자 장치 및 그 제어 방법
CN113168228A (zh) 用于在大面积透明触摸界面中进行视差校正的系统和/或方法
US20230119162A1 (en) Systems and methods for processing scanned objects

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
E902 Notification of reason for refusal
X601 Decision of rejection after re-examination