KR101954263B1 - 디스플레이 장치 및 그의 다시점 영상 제공 방법 - Google Patents

디스플레이 장치 및 그의 다시점 영상 제공 방법 Download PDF

Info

Publication number
KR101954263B1
KR101954263B1 KR1020140070987A KR20140070987A KR101954263B1 KR 101954263 B1 KR101954263 B1 KR 101954263B1 KR 1020140070987 A KR1020140070987 A KR 1020140070987A KR 20140070987 A KR20140070987 A KR 20140070987A KR 101954263 B1 KR101954263 B1 KR 101954263B1
Authority
KR
South Korea
Prior art keywords
cover
view image
degree
display
closed
Prior art date
Application number
KR1020140070987A
Other languages
English (en)
Other versions
KR20150142349A (ko
Inventor
한승룡
이진성
이호영
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140070987A priority Critical patent/KR101954263B1/ko
Priority to US14/596,801 priority patent/US9525864B2/en
Publication of KR20150142349A publication Critical patent/KR20150142349A/ko
Application granted granted Critical
Publication of KR101954263B1 publication Critical patent/KR101954263B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1675—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts
    • G06F1/1677—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts for detecting open or closed state or particular intermediate positions assumed by movable parts of the enclosure, e.g. detection of display lid position with respect to main body in a laptop, detection of opening of the cover of battery compartment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359—Switching between monoscopic and stereoscopic modes

Abstract

디스플레이 장치가 개시된다. 본 디스플레이 장치는 디스플레이, 다시점 영상을 렌더링하는 렌더링부 및, 디스플레이 장치에 장착된 상기 커버가 닫히면, 디스플레이 장치에 대해 닫혀진 커버가 틀어진 정도를 판단하고 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 렌더링부를 제어하고, 렌더링된 다시점 영상을 디스플레이에 디스플레이하는 제어부를 포함한다.

Description

디스플레이 장치 및 그의 다시점 영상 제공 방법 { DISPLAY APPARATUS AND MULTI VIEW PROVIDNG MEHTOD THEREOF }
본 발명은 디스플레이 장치 및 그의 다시점 영상 제공 방법에 관한 것으로, 더욱 상세하게는 무안경 방식으로 다시점 영상을 제공할 수 있는 디스플레이 장치 및 그의 다시점 영상 제공 방법에 관한 것이다.
최근 보다 현실감 있는 시청을 위하여 입체영상을 제공하는 디스플레이 장치에 대한 개발 노력이 가속화되고 있다. 이러한 디스플레이 장치는 입체 영상 시청 용 안경의 사용 여부에 따라 안경 방식 및 무안경 방식으로 나눠질 수 있다.
무안경 방식의 경우, 다시점 영상을 디스플레이하고 렌티큘러 렌즈(Lenticular Lens) 또는 패러랙스 배리어(Parallax Barrier)를 통해 사용자의 좌안과 우안에 서로 다른 시점에서 촬영한 영상이 입사되도록 하여, 사용자에게 입체감을 느끼게 한다.
한편, 사용자들은 휴대폰과 같은 휴대 가능한 디스플레이 장치를 사용함에 있어, 이들이 파손되는 것을 방지하기 위해 디스플레이 장치에 커버를 부착하여 사용하기도 한다. 이 경우, 커버는 일정 영역이 투명하게 구현되어 커버가 닫힌 상태에도 투명한 영역을 통해 사용자에게 영상을 제공하여 줄 수 있다.
다만, 커버가 플립 형태로 구현되는 경우, 그 특성상 틀어진 상태로 닫힐 수 있다는 점에서, 틀어진 상태에서도 투명한 영역을 통해 디스플레이되는 영상을 통해 사용자에게 입체감을 줄 수 있는 방안의 모색이 요청된다.
본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로, 본 발명의 목적은 틀어진 상태로 닫힌 커버를 통해 입체감 있는 영상을 제공할 수 있는 디스플레이 장치 및 그의 다시점 영상 제공 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 에에 따른 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하는 커버와 탈부착 가능한 디스플레이 장치는 디스플레이, 상기 다시점 영상을 렌더링하는 렌더링부 및, 상기 디스플레이 장치에 장착된 상기 커버가 닫히면, 상기 디스플레이 장치에 대해 상기 닫혀진 커버가 틀어진 정도를 판단하고 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 상기 렌더링부를 제어하고, 상기 렌더링된 다시점 영상을 상기 디스플레이에 디스플레이하는 제어부를 포함한다.
여기에서, 상기 제어부는 상기 닫혀진 커버의 기설정된 지점이 상기 디스플레이에 터치된 지점에 기초하여 상기 틀어진 정도를 판단하고, 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
또한, 상기 제어부는 상기 닫혀진 커버의 기설정된 지점이 상기 디스플레이에서 터치된 지점의 서브 픽셀 좌표값을 판단하고, 기설정된 서브 픽셀 좌표값을 기준으로 상기 터치된 지점의 서브 픽셀 좌표값의 회전 정도 및 위치 이동 정도를 나타내는 보정 파라미터를 산출하고, 상기 산출된 보정 파라미터에 기초하여 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
그리고, 상기 제어부는 하기의 수학식 1에 기초하여 산출된 값에 기초하여 상기 보정 파라미터를 산출할 수 있다.
또한, 상기 커버는 상기 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하기 위해, 기설정된 영역에 렌티큘러 렌즈(lenticular lens) 또는 패러랙스 배리어(parallax barrier)를 구비할 수 있다.
그리고, 상기 제어부는 기설정된 시간 간격마다 상기 커버의 틀어진 정도를 판단할 수 있다.
한편, 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하는 커버와 탈부착 가능한 디스플레이 장치의 다시점 영상 제공 방법은 상기 디스플레이 장치에 장착된 상기 커버가 닫히면, 상기 디스플레이 장치에 대해 상기 닫혀진 커버가 틀어진 정도를 판단하고 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링하는 단계 및, 상기 렌더링된 다시점 영상을 디스플레이하는 단계를 포함한다.
여기에서, 상기 렌더링하는 단계는 상기 닫혀진 커버의 기설정된 지점이 상기 디스플레이 장치에 터치된 지점에 기초하여 상기 틀어진 정도를 판단하고, 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링할 수 있다.
또한, 상기 렌더링하는 단계는 상기 닫혀진 커버의 기설정된 지점이 상기 디스플레이 장치에서 터치된 지점의 서브 픽셀 좌표값을 판단하고, 기설정된 서브 픽셀 좌표값을 기준으로 상기 터치된 지점의 서브 픽셀 좌표값의 회전 정도 및 위치 이동 정도를 나타내는 보정 파라미터를 산출하고, 상기 산출된 보정 파라미터에 기초하여 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링할 수 있다.
그리고, 상기 렌더링하는 단계는 하기의 수학식 1에 기초하여 산출된 값에 기초하여 상기 보정 파라미터를 산출할 수 있다.
또한, 상기 커버는 상기 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하기 위해, 기설정된 영역에 렌티큘러 렌즈(lenticular lens) 또는 패러랙스 배리어(parallax barrier)를 구비할 수 있다.
그리고, 본 실시 예에 따른 다시점 영상 렌더링 방법은 기설정된 시간 간격마다 상기 커버의 틀어진 정도를 판단하는 단계를 더 포함할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 커버가 틀어진 상태로 닫힌 경우 틀어진 상태에 대응되는 다시점 영상이 제공된다는 점에서, 사용자는 틀어진 상태로 닫힌 커버를 통해서도 입체감 있는 영상을 제공받을 수 있게 된다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치와 커버의 일 예를 나타낸 도면,
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도,
도 3은 본 발명의 일 실시 예에 따른 디스플레이 패널을 설명하기 위한 도면,
도 4 내지 도 11은 본 발명의 일 실시 예에 따라 렌더링되는 다시점 영상의 일 예를 나타내는 도면들,
도 12는 본 발명의 일 실시 예에 따른 다시점 영상 제공 방법을 설명하기 위한 흐름도, 그리고
도 13은 본 발명의 일 실시 예에 따른 다시점 영상 제공 방법을 설명하기 위한 흐름도이다.
이하에서는 첨부된 도면을 참조하여 본 발명을 상세히 설명하도록 한다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치와 커버의 일 예를 나타낸 도면이다. 디스플레이 장치(100)는 첨부된 도면들에 도시된 바와 같이 스마트 폰과 같은 휴대폰으로 구현될 수 있으나, 이에 한정되는 것은 아니며 태블릿 PC, PMP(Portable Multimedia Player), PDA, 전자책, 네비게이션 등과 같이 휴대 가능하며 디스플레이 기능을 갖춘 다양한 유형의 장치로 구현될 수 있다. 이 경우, 커버(200)는 디스플레이 장치(100)의 타입에 따라 다양한 형태로 구현될 수 있다.
도 1a를 참조하면, 디스플레이 장치(100)는 전면에 터치를 감지할 수 있는 터치 스크린을 포함하여, 손가락 등과 같은 터치 수단에 의해 입력된 터치에 따라 다양한 프로그램을 실행할 수 있다.
한편, 디스플레이 장치(100)를 휴대하거나 사용하는 도중에 디스플레이 장치(100)가 스크래치(scratch)나 충격에 의해 파손되는 것을 방지하기 위해, 커버(200)가 디스플레이 장치(100)에 장착될 수 있다. 이 경우, 커버(200)는 디스플레이 장치(100)에 탈부착 가능한 형태로 구현될 수 있다.
커버(200)는 플립 형태의 케이스를 통해 디스플레이 장치(100)를 커버하되, 사용자가 터치 스크린을 사용할 수 있도록 터치 스크린을 커버하는 부분이 개폐되는 형태를 가지도록 구현될 수 있다.
이 경우, 커버(200)는 일부 영역이 투명하게 구현된다는 점에서, 디스플레이 장치(100)는 도 1b에 도시된 바와 같이 커버(200)가 닫힌 경우에도 커버(200)의 투명한 영역(210)을 통해 다양한 화면을 사용자에게 제공할 수 있다.
이를 위해, 디스플레이 장치(100)는 커버(200)가 닫힌 경우 투명한 영역(210)이 터치 스크린 상에서 위치하는 영역 및 해당 영역의 사이즈에 대한 정보를 기저장하고, 이를 이용하여 터치 스크린 상에서 투명한 영역(210)이 위치하는 영역에 일정한 사이즈를 갖는 영상을 디스플레이할 수 있다.
특히, 디스플레이 장치(100)는 터치 스크린 상에서 투명한 영역(210)에 대응되는 영역에 다시점(Multi-view) 영상을 디스플레이하여, 투명한 영역(210)을 통해 다시점 영상을 사용자에게 제공할 수 있다.
여기에서, 다시점 영상은 동일한 오브젝트를 서로 다른 시점에서 촬영한 복수의 영상들을 의미한다. 예를 들어, 다시점 영상은 7 개의 서로 다른 시점에서 촬영된 복수의 영상들로 구성될 수 있다. 이 경우, 투명한 영역(210)은 렌티큘러 렌즈(lenticular lens) 또는 패러랙스 배리어(parallax barrier)와 같은 입체영상 필터를 포함하여, 디스플레이 장치(100)에서 디스플레이되는 다시점 영상을 서로 다른 시점을 갖는 복수의 영상으로 분리할 수 있다.
예를 들어, 투명한 영역(210)에 구비된 입체영상 필터는 서로 다른 시점에서 촬영된 복수의 영상을 서로 다른 각도로 굴절시키거나 서로 다른 시점에서 촬영된 복수의 영상 중 일부 시점 영상을 차단하여, 복수의 시점 영상 각각을 디스플레이 장치(100)에서 일정한 거리만큼 떨어진 서로 다른 지점에 포커싱시킬 수 있다. 여기에서, 시점 영상이 포커싱되어 형성되는 영역을 시청 영역이라 하고, 시청 영역에 형성되는 뷰를 광학 뷰라 할 수 있다.
이에 따라, 사용자의 한쪽 눈이 하나의 시청 영역에 위치하게 되면 하나의 광학 뷰가 한쪽 눈에 입사되고, 사용자의 다른 쪽이 다른 시청 영역에 위치하게 되면 다른 하나의 광학 뷰가 다른 쪽 눈에 입사하게 되어, 사용자는 투명한 영역(210)을 통해 제공되는 영상에 대해 입체감을 느낄 수 있게 된다.
일 예로, 디스플레이 장치(100)는 커버(200)가 닫힌 경우, 투명한 영역(210)이 위치되는 영역에 7 시점으로 구성된 다시점 영상을 디스플레이할 수 있다.
이 경우, 7 시점의 영상 각각은 렌티큘러 렌즈(미도시)에 의해 서로 다른 각도로 굴절되므로, 제1 시청 영역에는 1 시점 영상에 해당하는 광학 뷰가 포커싱되고 제2 시청 영역에는 2 시점 영상에 해당하는 광학 뷰가 포커싱될 수 있다.
이에 따라, 제1 시청 영역에 사용자의 좌안이 위치하고 제2 시청 영역에 사용자의 우안이 위치하게 되면, 사용자는 좌안 및 우안으로 서로 다른 시점 영상을 시청하게 되어 입체감을 느낄 수 있게 된다.
한편, 커버(200)는 플립 형태로 개폐되기 때문에, 디스플레이 장치(100)의 전면을 커버하는 부분과 후면을 커버하는 부분은 유연한 소재로 연결되어야 한다. 따라서, 이와 같은 연결 부위의 특성상 커버(200)는 도 1c와 같이 틀어진 상태로 닫히는 경우가 발생할 수 있다.
이와 같이, 커버(200)가 틀어지게 되는 경우 투명한 영역(210) 역시 틀어지게 된다는 점에서, 디스플레이 장치(100)는 커버(200)가 틀어지는 경우에도 사용자에게 무안경 방식으로 입체영상을 제공할 수 있도록, 커버(200)가 틀어진 정도에 대응되도록 다시점 영상을 렌더링하여 디스플레이할 수 있다.
이하에서는 첨부된 도면을 참조하여 다시점 영상을 렌더링하는 방법에 대해 보다 구체적으로 살펴보도록 한다.
도 2는 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도이다. 도 2에 따르면, 디스플레이 장치(100)는 디스플레이(110), 렌더링부(120) 및 제어부(130)를 포함한다.
디스플레이(110)는 디스플레이 패널(111)과 터치 센서(112)를 포함하는 터치 스크린 형태로 구현될 수 있다.
디스플레이 패널(111)은 다시점 영상을 디스플레이할 수 있다. 특히, 디스플레이 패널(111)은 디스플레이(110) 상에서 커버(200)의 투명한 영역(210)이 위치하는 영역에 다시점 영상을 디스플레이할 수 있다.
여기에서, 다시점 영상은 서로 다른 시점의 복수의 영상이 순차적으로 반복 배치된 영상일 수 있다.
이를 위해, 디스플레이 패널(111)은 각각 복수의 서브 픽셀로 구성된 복수의 픽셀을 포함한다. 여기에서, 서브 픽셀은 R(Red), G(Green), B(Blue)로 구성될 수 있다.
예를 들어, 디스플레이 패널(111)은 도 3에 도시된 바와 같이 R, G, B의 서브 픽셀로 구성된 픽셀 각각이 복수의 행 및 열 방향으로 배열된 형태를 가질 수 있다. 이 경우, 서브 픽셀은 R 서브 픽셀, G 서브 픽셀, B 서브 픽셀이 행 방향으로 서로 교번적으로 배열되고, 열 방향으로는 동일한 색의 서브 픽셀이 배열될 수 있다.
터치 센서(112)는 디스플레이(110)에 대한 터치를 감지할 수 있다. 이 경우, 터치 센서(112)는 정전용량 방식으로 터치를 감지하도록 구현될 수 있다. 이에 따라, 터치 센서(112)는 손가락뿐만 아니라 각종 도전성 물질에 대한 터치를 감지할 수 있다.
렌더링부(120)는 다시점 영상을 렌더링한다. 구체적으로, 렌더링부(120)는 서로 다른 시점에서 촬영된 복수의 시점 영상이 다양한 패턴으로 서브 픽셀에 디스플레이되도록 다시점 영상을 랜더링할 수 있다.
이때, 해상도 등의 문제를 이유로 투명한 영역(210)에 구비된 입체영상 필터는 디스플레이(110)의 수직축에 일정한 각도만큼 기울어진 형태로 형성될 수 있다는 점에서, 렌더링부(120)는 다시점 영상을 렌더링할 때 입체영상 필터가 기울어진 각도를 고려하여 다시점 영상을 렌더링하게 된다.
이를 위해, 디스플레이 장치(100)는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우 입체영상 필터가 기울어진 각도 및 해당 각도에서 각 서브 픽셀에 디스플레이되는 시점 영상에 대한 정보를 기저장할 수 있으며, 렌더링부(120)는 이를 이용하여 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우의 입체필터가 기울어진 각도에 대응되는 다시점 영상을 렌더링할 수 있다.
예를 들어, 커버(200)가 틀어짐 없이 정상적으로 닫혀졌을 때, 투명한 영역(210)에 마련된 렌티큘러 렌즈(미도시)가 80°만큼 기울어지는 경우를 가정한다. 이때, 렌티큘러 렌즈(미도시)의 각 렌즈 폭은 4.6 서브 픽셀의 가로 폭으로 형성될 수 있다.
이 경우, 렌더링부(120)는 도 4a와 같이 7 시점 영상을 이용하여 다시점 영상(410)을 렌더링할 수 있다.
예를 들어, 첫 번째 픽셀을 구성하는 R,G,B 서브 픽셀의 경우, 렌더링부(120)는 0 시점 영상의 1 행 1 열의 R 서브 픽셀이 디스플레이 패널(111)의 1 행 1 열의 R 서브 픽셀(411)에 디스플레이되고, 6 시점 영상의 1 행 2 열의 G 서브 픽셀이 디스플레이 패널(111)의 1 행 2 열의 G 서브 픽셀(412)에 디스플레이되고, 5 시점 영상의 1 행 3 열의 B 서브 픽셀이 디스플레이 패널(111)의 1 행 3 열의 B 서브 픽셀(413)에 디스플레이되는 다시점 영상(410)을 렌더링할 수 있다.
그리고, 첫 번째 픽셀 아래에 배치된 픽셀을 구성하는 R,G,B 서브 픽셀의 경우, 렌더링부(120)는 0 시점 영상의 2 행 1 열의 R 서브 픽셀이 디스플레이 패널(111)의 2 행 1 열의 R 서브 픽셀(414)에 디스플레이되고, 5 시점 영상의 2 행 2 열의 G 서브 픽셀이 디스플레이 패널(111)의 2 행 1 열의 G 서브 픽셀(415)에 디스플레이되고, 4 시점 영상의 2 행 3 열의 B 서브 픽셀이 디스플레이 패널(111)의 2 행 3 열의 B 서브 픽셀(416)에 디스플레이되는 다시점 영상(410)을 렌더링할 수 있다.
구체적으로 기술하지 않았지만, 렌더링부(120)는 나머지 픽셀에 대해서도 도 4a와 같은 방식으로 7 시점 영상의 각 서브 픽셀을 디스플레이 패널(111)의 각 서브 픽셀에 디스플레이되도록 다시점 영상(410)을 렌더링할 수 있다.
다른 예로, 렌더링부(120)는 도 4b와 같이 7 시점 영상을 이용하여 다시점 영상(440)을 렌더링할 수도 있다.
예를 들어, 첫 번째 픽셀을 구성하는 R,G,B 서브 픽셀의 경우, 렌더링부(120)는 1 시점 영상의 1 행 1 열의 R 서브 픽셀이 디스플레이 패널(111)의 1 행 1 열의 R 서브 픽셀(421)에 디스플레이되고, 0 시점 영상의 1 행 2 열의 G 서브 픽셀이 디스플레이 패널(111)의 1 행 2 열의 G 서브 픽셀(422)에 디스플레이되고, 2 시점 영상의 1 행 3 열의 B 서브 픽셀이 디스플레이 패널(111)의 1 행 3 열의 B 서브 픽셀(423)에 디스플레이되는 다시점 영상(420)을 렌더링할 수 있다.
그리고, 첫 번째 픽셀 아래에 배치된 픽셀을 구성하는 R,G,B 서브 픽셀의 경우, 렌더링부(120)는 1 시점 영상의 2 행 1 열의 R 서브 픽셀이 디스플레이 패널(111)의 2 행 1 열의 R 서브 픽셀(424)에 디스플레이되고, 2 시점 영상의 2 행 2 열의 G 서브 픽셀이 디스플레이 패널(111)의 2 행 1 열의 G 서브 픽셀(425)에 디스플레이되고, 4 시점 영상의 2 행 3 열의 B 서브 픽셀이 디스플레이 패널(111)의 2 행 3 열의 B 서브 픽셀(426)에 디스플레이되는 다시점 영상(420)을 렌더링할 수 있다.
구체적으로 기술하지 않았지만, 렌더링부(120)는 나머지 픽셀에 대해서도 도 4b와 같은 방식으로 7 시점 영상의 각 서브 픽셀을 디스플레이 패널(111)의 각 서브 픽셀에 디스플레이되도록 다시점 영상(420)을 렌더링할 수 있다.
이에 따라, 다시점 영상(430, 440)을 구성하는 7 시점 영상은 렌티큘러 렌즈(미도시)에 의해 서로 다른 각도로 굴절되어, 7 시점 영상 중에서 0 시점 영상, 1 시점 영상, 2 시점 영상, 3 시점 영상, 4 시점 영상, 5 시점 영상, 6 시점 영상이 7 개의 시청 영역 각각에 포커싱되어 7 개의 광학 뷰를 형성할 수 있게 된다.
이 경우, 도 4c에서의 7 개의 광학 뷰는 리니어(linear) 형태로 형성될 수 있고, 도 4d에서의 7 개의 광학 뷰는 사이클릭(cyclic) 형태로 형성될 수 있다.
한편, 상술한 예에서는 렌티큘러 렌즈(미도시)의 각 렌즈 폭이 4.6 서브 픽셀의 가로 폭을 가지는 것으로 설명하였으나 이는 일 예에 불과하며, 각 렌즈 폭의 다양하게 변경될 수 있음은 물론이다.
또한, 렌티큘러 렌즈(미도시)가 80°만큼 기울어진 것으로 설명하였으나 이는 일 예에 불과하고, 렌티큘러 렌즈(미도시)는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우 다양한 각도로 기울어질 수 있으며, 렌더링부(120)는 그에 대응되도록 다시점 영상을 렌더링할 수 있다.
또한, 상술한 예에서는 입체영상 필터가 렌티큘러 렌즈(미도시)로 구현되는 것으로 설명하였으나 이는 일 예일 뿐이고, 입체영상 필터는 패러랙스 배리어(미도시)로 구현될 수도 있음은 물론이다
한편, 디스플레이 장치(100)는 커버(200)가 닫힌 경우 투명한 영역(210)을 통해 사용자에게 입체영상을 제공한다는 점에서, 도 4a 및 도 4b에 도시된 서브 픽셀은 커버(200)가 닫힌 경우 디스플레이(110) 상에서 투명한 영역(210)이 위치하는 영역에 존재하는 서브 픽셀의 적어도 일부를 도시한 것이다. 즉, 렌더링부(120)는 커버(200)가 닫힌 경우 디스플레이(110) 상에서 투명한 영역(210)이 위치하는 영역에 존재하는 서브 픽셀에 디스플레이되는 다시점 영상을 렌더링할 수 있다.
제어부(130)는 디스플레이 장치(100)의 전반적인 동작을 제어한다. 이를 위해, 제어부(130)는 마이컴(또는, CPU(central processing unit)), 디스플레이 장치(100)의 동작을 위한 RAM(Random Access Memory), ROM(Read Only Memory)을 포함할 수 있다. 이 경우, 이들 모듈은 SoC(System on Chip) 형태로 구현될 수도 있다.
먼저, 제어부(130)는 다시점 영상을 렌더링하도록 렌더링부(120)를 제어할 수 있다. 즉, 제어부(130)는 커버(200)가 닫히면 투명한 영역(210)에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
이를 위해, 제어부(130)는 디스플레이 장치(100)에 장착된 커버(200)의 개폐 여부를 판단할 수 있다.
예를 들어, 디스플레이(110) 부근에 마련된 자석 홀 센서(미도시)는 커버(200)가 닫히면 커버(200)에서 디스플레이(110)를 덮는 부분에 마련된 자석을 감지하여 센싱 데이터를 제어부(130)로 출력할 수 있다. 이에 따라, 제어부(130)는 디스플레이 장치(100)에 구비된 자석 홀 센서(미도시)에서 센싱 데이터가 출력되면 커버(200)가 닫혀진 것으로 판단할 수 있다.
다만, 이에 한정되는 것은 아니며, 커버(200)의 개폐 여부를 감지할 수 있는 기술이라면 이에 한정되지 않고 적용 가능하다.
그리고, 제어부(130)는 커버(200)가 닫힌 경우, 디스플레이(110) 상에서 투명한 영역(210)에 위치하는 영역에 다시점 영상이 디스플레이되도록 제어할 수 있다.
즉, 디스플레이 장치(100)는 커버(200)가 닫힌 경우 디스플레이(110) 상에서 투명한 영역(210)이 위치하는 영역 및 해당 영역의 사이즈 등에 대한 정보를 기저장하고 있을 수 있으며, 제어부(130)는 디스플레이(110) 상에서 투명한 영역(210)이 위치하는 영역의 서브 픽셀에 디스플레이되는 다시점 영상을 렌더링하도록 렌더링부(120)를 제어하고, 렌더링된 다시점 영상을 해당 영역에 디스플레이할 수 있다.
한편, 커버(200)는 도 1b와 같이 틀어짐 없이 정상적으로 닫히거나, 도 1c와 같이 틀어져서 닫힐 수 있다.
이때, 커버(200)가 틀어져서 닫히는 경우 투명한 영역(210)의 입체영상 필터와 디스플레이(110)의 수직 축이 이루는 각도 역시 틀어지게 된다는 점에서, 틀어짐이 없이 정상적으로 닫힌 경우와 동일한 방식으로 다시점 영상을 렌더링하여 디스플레이할 경우, 사용자에게 좋은 품질의 입체영상을 제공할 수 없게 된다.
따라서, 제어부(130)는 커버(200)의 틀어짐 정도를 고려하여 다시점 영상을 렌더링하도록 렌더링부(120)를 제어할 수 있다.
즉, 제어부(130)는 디스플레이 장치(100)에 장착된 커버(200)가 닫히면, 디스플레이 장치(100)에 대해 닫혀진 커버(200)가 틀어진 정도를 판단하고 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 렌더링부(120)를 제어하고, 렌더링된 다시점 영상을 디스플레이(110)에 디스플레이할 수 있다.
이 경우, 제어부(130)는 닫혀진 커버(200)의 기설정된 지점이 디스플레이(110)에 터치된 지점에 기초하여 틀어진 정도를 판단하고, 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
즉, 커버(200)가 틀어짐 없이 닫혔을 때, 커버(200)의 안쪽 면 즉, 커버(200)가 닫혔을 때 디스플레이(110)와 맞닿게 되는 면의 기설정된 지점은 디스플레이(110)의 특정한 좌표값을 갖는 서브 픽셀(또는, 픽셀)과 접촉하게 된다.
하지만, 커버(200)가 틀어진 경우, 커버(200)의 안쪽 면 내의 기설정된 지점은 커버(200)가 틀어짐 없이 닫혔을 때 디스플레이(110)에 접촉되어야 하는 지점이 아닌, 다른 좌표값을 갖는 서브 픽셀과 접촉하게 된다.
따라서, 제어부(130)는 커버(200)가 틀어짐 없이 닫혔을 때 커버(200)의 기설정된 지점이 접촉되어야 하는 서브 픽셀 좌표값과 커버(200)가 닫혔을 때 커버(200)의 기설정된 지점이 실제 접촉되는 서브 픽셀 좌표값을 이용하여 커버(200)가 틀어졌는지 여부를 판단하고, 커버(200)가 틀어진 경우 그에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
이를 위해, 커버(200)의 기설정된 지점에는 전도성 물질이 부착되어 있을 수 있다.
예를 들어, 도 5와 같이, 커버(200)를 닫았을 때 디스플레이(110)와 맞닿게 되는 부분의 안쪽에는 터치 센싱이 가능한 전도성 물질(511 내지 518)이 부착되어 있을 수 있다. 이 경우, 커버(200)에는 최소 3 개의 전도성 물질이 나란하지 않게 배열될 수 있다.
이에 따라, 커버(200)가 닫히게 되면 전도성 물질(511 내지 518)이 디스플레이(110)에 터치되고, 터치 센서(112)는 전도성 물질(511 내지 518)이 터치된 서브 픽셀의 좌표값을 감지할 수 있게 된다.
한편, 디스플레이 장치(100)는 커버(200)가 틀어짐 없이 닫혔을 때, 커버(200)에 부착된 전도성 물질이 디스플레이(110)에서 터치되어야 하는 서브 픽셀의 좌표값에 대한 정보를 기저장하고 있을 수 있다.
이에 따라, 제어부(130)는 커버(200)가 닫히게 되면, 터치 센서(112)에서 센싱된 서브 픽셀 좌표값과 기저장된 서브 픽셀 좌표값을 비교하여 닫혀진 커버(200)가 틀어졌는지 여부를 판단할 수 있다.
즉, 제어부(130)는 커버(200)의 전도성 물질이 디스플레이(110)에 터치된 서브 픽셀 좌표값과 기저장된 서브 픽셀 좌표값이 일치하면 커버(200)가 틀어지지 않고 정확하게 닫혀진 것으로 판단하고, 전도성 물질이 디스플레이(110)에 터치된 서브 픽셀 좌표값과 기저장된 서브 픽셀 좌표값이 일치하지 않으면 커버(200)가 틀어진 상태로 닫혀진 것으로 판단할 수 있다.
그리고, 제어부(130)는 커버(200)의 틀어진 정도에 대응되는 다시점 영상을 렌더링하고, 렌더링된 다시점 영상을 디스플레이하도록 제어할 수 있다.
구체적으로, 제어부(130)는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우, 그에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다. 예를 들어, 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우, 투명한 영역(210)의 입체영상 필터는 디스플레이(110)와 80°만큼 기울어질 수 있으며, 이 경우 제어부(130)는 도 4에서 설명한 바와 같은 다시점 영상을 렌더링하도록 렌더링부(120)를 제어하고, 렌더링된 다시점 영상을 디스플레이(110)에 디스플레이할 수 있다.
한편, 제어부(130)는 닫혀진 커버(200)가 틀어진 것으로 판단되면, 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
구체적으로, 제어부(130)는 닫혀진 커버(200)의 기설정된 지점이 디스플레이(110)에 터치된 지점의 서브 픽셀 좌표값을 판단하고, 기설정된 서브 픽셀 좌표값을 기준으로 터치된 지점의 서브 픽셀 좌표값의 회전 정도 및 위치 이동 정도를 나타내는 보정 파라미터를 산출하고, 보정 파라미터에 기초하여 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
이 경우, 제어부(130)는 하기의 수학식 1에 기초하여 산출된 값을 이용하여 보정 파라미터를 산출할 수 있다.
Figure 112014054653169-pat00001
여기에서, qi는 인덱스 i를 갖는 기설정된 서브 픽셀 좌표값, R은 회전 정도, pi는 인덱스 i를 갖는 터치된 지점의 서브 픽셀 좌표값, t는 위치 이동 정도, n은 기설정된 서브 픽셀 또는 터치된 지점의 서브 픽셀의 개수이다.
이 경우, 회전 정도를 나타내는 R은 회전각 θ를 파라미터로 갖으며
Figure 112014054653169-pat00002
와 같이 표현되고, 위치 이동 정도를 나타내는 t는 각각 행 방향 및 열 방향으로 이동되는 서브 픽셀 값 tx, ty을 파라미터로 갖으며 (tx, ty)와 같이 표현될 수 있다.
이에 따라, 수학식 1의 e(R, t)는 센싱된 서브 픽셀 좌표값 pi를 θ만큼 회전 및 (tx, ty) 만큼 이동시킨 후의 서브 픽셀 좌표값과 터치되어야 하는 서브 픽셀 좌표값 사이의 거리를 제곱한 값의 평균을 의미한다.
따라서, e(R, t)가 최소가 되도록 하는 θ, tx, ty 값은 센싱된 서브 픽셀 좌표값 pi를 터치되어야 하는 서브 픽셀 좌표값 qi로 최대한 근사화시키기 위해 센싱된 서브 픽셀 좌표값 pi이 회전 및 이동되어야하는 값들에 해당한다는 점에서, 이들 값들은 커버(200)가 틀어짐 없이 정상적으로 닫혀진 상태를 기준으로 커버(200)가 회전 및 이동된 정도에 해당할 수 있다.
즉, θ는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우를 기준으로 회전된 각도를 의미하고, (tx, ty)는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우를 기준으로 행 방향 및 열 방향으로 이동된 서브 픽셀값을 의미할 수 있다.
따라서, 제어부(130)는 커버(200)가 틀어진 정도를 판단하기 위해, 수학식 1에 기초하여 e(R, t)를 산출하고 e(R, t)가 최소가 되도록 하는 θ, tx, ty 값을 산출할 수 있다.
구체적으로, 제어부(130)는 e(R, t)를 θ에 기초하여 편미분한 값이 0이 되는 θ를 산출하고, e(R, t)를 tx에 기초하여 편미분한 값이 0이 되는 tx를 산출하고, e(R, t)를 ty에 기초하여 편미분한 값이 0이 되는 ty를 산출하여, e(R, t)가 최소가 되도록 하는 θ, t를 산출할 수 있다.
이 경우, 산출된 θ, tx, ty 값들은 커버(200)가 회전된 정도 및 이동된 정도를 의미한다는 점에서, 제어부(130)는 이들 값들을 보정 파라미터로서 이용하여 커버(200)가 틀어진 정도에 대응되는 다시점 영상을 생성하도록 제어할 수 있다.
이하에서는 도 6을 참조하여 수학식 1에 기초하여 보정 파라미터를 산출하는 방법에 대해 구체적으로 설명하도록 한다. 도 6에서는 설명의 편의를 위해 커버(200)에 도전성 물질이 4 개 구비되는 것으로 가정하도록 한다.
도 6에서, 커버(200)가 틀어짐 없이 닫혔을 때 커버(200)에 전도성 물질이 디스플레이(110)에 터치되어야 하는 서브 픽셀들 q1, q2, q3, q4의 좌표는 ×로 도시하였으며, 각 서브 픽셀들의 좌표값은 (qx1, qy1)(611), (qx2, qy2)(612), (qx3, qy3)(613), (qx4, qy4)(614)인 것으로 가정한다.
또한, 커버(200)가 닫혀 전도성 물질이 디스플레이(110)에 터치되어, 터치 센서(112)에 의해 센싱된 서브 픽셀들 p1, p2, p3, p4의 좌표는 ○로 도시하였으며, 각 서브 픽셀들의 좌표값은 (px1, py1)(621), (px2, py2)(622), (px3, py3)(623), (px4, py4)(624)인 것으로 가정한다.
여기에서, e(R, t)가 최소가 되도록 하는 θ, tx, ty 값은 (px1, py1)(621), (px2, py2)(622), (px3, py3)(623), (px4, py4)(624) 각각을 θ만큼 회전시키고 tx 서브 픽셀만큼 행 방향으로 이동시키고 ty 서브 픽셀만큼 열 방향으로 이동시켰을 때, 회전 및 이동된 서브 픽셀 값들이 (qx1, qy1)(611), (qx2, qy2)(612), (qx3, qy3)(613), (qx4, qy4)(614) 각각에 최대한 근접하게 할 수 있는 값들이 될 수 있다.
따라서, 제어부(130)는 e(R, t)가 최소가 되도록 하는 θ, tx, ty 값을 산출하고, 산출된 값들을 보정 파라미터로서 이용하여 커버(200)가 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
이하에서 도 7 내지 도 11을 참조하여 커버(200)가 틀어져 닫힌 경우 다시점 영상을 렌더링하는 방법에 대해 보다 구체적으로 설명하도록 한다.
구체적으로, 산출된 θ는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우를 기준으로 틀어진 커버(200)가 회전된 정도를 의미한다는 점에서, 제어부(130)는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우를 기준으로 투명한 영역(210)에 구비된 입체영상 필터가 θ만큼 더 회전된 것으로 판단하고, 그에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
이를 위해, 디스플레이 장치(100)는 입체영상 필터가 기울어진 각도 및 해당 각도에서 각 서브 픽셀에 디스플레이되는 시점 영상에 대한 기저장할 수 있으며, 렌더링부(120)는 이를 이용하여 커버(200)가 틀어져서 닫힌 경우의 입체필터가 기울어진 각도에 대응되는 다시점 영상을 렌더링할 수 있다.
예를 들어, 도 4에서 설명한 바와 같이 커버(200)가 틀어짐 없이 정상적으로 닫혀졌을 때, 투명한 영역(210)에 마련된 렌티큘러 렌즈(미도시)가 80°만큼 기울어지는 경우를 가정한다.
이때, 수학식 1에 기초하여 산출된 θ가 5°인 경우, 제어부(130)는 틀어진 투명한 영역(210)에 마련된 렌티큘러 렌즈(미도시)가 85°만큼 기울어진 것으로 판단하고, 그에 대응되는 다시점 영상을 렌더링하도록 렌더링부(120)를 제어할 수 있다.
이 경우, 렌더링부(120)는 도 7a와 같이 7 시점 영상을 이용하여 다시점 영상(710)을 렌더링할 수 있다.
예를 들어, 첫 번째 픽셀을 구성하는 R,G,B 서브 픽셀의 경우, 렌더링부(120)는 0 시점 영상의 1 행 1 열의 R 서브 픽셀이 디스플레이 패널(111)의 1 행 1 열의 R 서브 픽셀(711)에 디스플레이되고, 6 시점 영상의 1 행 2 열의 G 서브 픽셀이 디스플레이 패널(111)의 1 행 2 열의 G 서브 픽셀(712)에 디스플레이되고, 5 시점 영상의 1 행 3 열의 B 서브 픽셀이 디스플레이 패널(111)의 1 행 3 열의 B 서브 픽셀(713)에 디스플레이되는 다시점 영상(710)을 렌더링할 수 있다.
그리고, 첫 번째 픽셀 아래에 배치된 픽셀을 구성하는 R,G,B 서브 픽셀의 경우, 렌더링부(120)는 0 시점 영상의 2 행 1 열의 R 서브 픽셀이 디스플레이 패널(111)의 2 행 1 열의 R 서브 픽셀(714)에 디스플레이되고, 6 시점 영상의 2 행 2 열의 G 서브 픽셀이 디스플레이 패널(111)의 2 행 1 열의 G 서브 픽셀(715)에 디스플레이되고, 4 시점 영상의 2 행 3 열의 디스플레이 패널(111)의 B 서브 픽셀이 2 행 3 열의 B 서브 픽셀(716)에 디스플레이되는 다시점 영상(710)을 렌더링할 수 있다.
구체적으로 기술하지 않았지만, 렌더링부(120)는 나머지 픽셀에 대해서도 도 7a와 같은 방식으로 7 시점 영상의 각 서브 픽셀을 디스플레이 패널(111)의 각 서브 픽셀에 디스플레이되도록 다시점 영상(710)을 렌더링할 수 있다.
다른 예로, 렌더링부(120)는 도 7b와 같이 7 시점 영상을 이용하여 다시점 영상(740)을 렌더링할 수도 있다.
예를 들어, 첫 번째 픽셀을 구성하는 R,G,B 서브 픽셀의 경우, 렌더링부(120)는 1 시점 영상의 1 행 1 열의 R 서브 픽셀이 디스플레이 패널(111)의 1 행 1 열의 R 서브 픽셀(721)에 디스플레이되고, 0 시점 영상의 1 행 2 열의 G 서브 픽셀이 디스플레이 패널(111)의 1 행 2 열의 G 서브 픽셀(722)에 디스플레이되고, 2 시점 영상의 1 행 3 열의 B 서브 픽셀이 디스플레이 패널(111)의 1 행 3 열의 B 서브 픽셀(723)에 디스플레이되는 다시점 영상(720)을 렌더링할 수 있다.
그리고, 첫 번째 픽셀 아래에 배치된 픽셀을 구성하는 R,G,B 서브 픽셀의 경우, 렌더링부(120)는 1 시점 영상의 2 행 1 열의 R 서브 픽셀이 디스플레이 패널(111)의 2 행 1 열의 R 서브 픽셀(724)에 디스플레이되고, 0 시점 영상의 2 행 2 열의 G 서브 픽셀이 디스플레이 패널(111)의 2 행 1 열의 G 서브 픽셀(725)에 디스플레이되고, 4 시점 영상의 2 행 3 열의 B 서브 픽셀이 디스플레이 패널(111)의 2 행 3 열의 B 서브 픽셀(726)에 디스플레이되는 다시점 영상(720)을 렌더링할 수 있다.
구체적으로 기술하지 않았지만, 렌더링부(120)는 나머지 픽셀에 대해서도 도 7b와 같은 방식으로 7 시점 영상의 각 서브 픽셀을 디스플레이 패널(111)의 각 서브 픽셀에 디스플레이되도록 다시점 영상(420)을 렌더링할 수 있다.
이에 따라, 다시점 영상(710, 720)을 구성하는 7 시점 영상은 렌티큘러 렌즈(미도시)에 의해 서로 다른 각도로 굴절되어, 7 시점 영상 중에서 0 시점 영상, 1 시점 영상, 2 시점 영상, 3 시점 영상, 4 시점 영상, 5 시점 영상, 6 시점 영상이 7 개의 시청 영역 각각에 포커싱되어 7 개의 광학 뷰를 형성할 수 있게 된다.
이 경우, 도 7a에 도시된 다시점 영상(710)은 도 4a를 기준으로 5°만큼 기울어진 경우를 나타낸다는 점에서, 도 7a에서의 7 개의 광학 뷰는 리니어 형태로 형성될 수 있고, 도 7b에 도시된 다시점 영상(720)은 도 4b를 기준으로 5°만큼 기울어진 경우를 나타낸다는 점에서, 도 7b에서의 7 개의 광학 뷰는 사이클릭 형태로 형성될 수 있다.
한편, 상술한 예에서는 θ가 5°인 경우에 렌더링되는 다시점 영상에 대해 설명하였으나, 커버(200)가 회전되는 각도는 다양하게 변경될 수 있다는 점에서, 그에 따라 투명한 영역(210)에 마련된 렌티큘러 렌즈(미도시)는 다양한 각도만큼 회전될 수 있으며, 제어부(130)는 그에 대응되도록 다시점 영상은 다양하게 렌더링하도록 제어할 수 있다.
예를 들어, 수학식 1에 기초하여 θ가 0.1°로 산출되어 렌티큘러 렌즈(미도시)는 80.1°만큼 기울어진 경우, 렌더링되는 다시점 영상은 도 8a 및 도 8b 와 같을 수 있다. 이 경우, 도 8a 및 도 8b 각각은 도 4a 및 도 4b 각각을 기준으로 회전된 각도에 대응되도록 렌더링된 다시점 영상일 수 있다.
다른 예로, 수학식 1에 기초하여 θ가 -0.1°로 산출되어 렌티큘러 렌즈(미도시)는 79.9°만큼 기울어진 경우, 렌더링되는 다시점 영상은 도 9a 및 도 9b와 같을 수 있다. 이 경우, 도 9a 및 도 9b 각각은 도 4a 및 도 4b 각각을 기준으로 회전된 각도에 대응되도록 렌더링된 다시점 영상일 수 있다.
또 다른 예로, 수학식 1에 기초하여 θ가 -5°로 산출되어 렌티큘러 렌즈(미도시)는 75°만큼 기울어진 경우, 렌더링되는 다시점 영상은 도 10a 및 도 10b 와 같을 수 있다. 이 경우, 도 10a 및 도 10b 각각은 도 4a 및 도4b 각각을 기준으로 회전된 각도에 대응되도록 렌더링된 다시점 영상일 수 있다.
한편, 산출된 tx, ty는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우를 기준으로 틀어진 커버(200)가 이동된 정도를 의미한다는 점에서, 제어부(130)는 커버(200)가 틀어짐 없이 정상적으로 닫힌 경우를 기준으로 투명한 영역(210)에 구비된 입체영상 필터가 tx 서브 픽셀만큼 우측으로 이동되고 ty 서브 픽셀만큼 하측으로 이동된 것으로 판단하고, 그에 대응되는 다시점 영상을 렌더링하도록 제어할 수 있다.
예를 들어, 수학식 1에 기초하여 산출된 θ가 5°이고, 산출된 tx, ty가 2, 2인 경우를 가정한다. 이 경우, 제어부(130)는 틀어진 투명한 영역(210)에 마련된 렌티큘러 렌즈(미도시)가 85°만큼 기울어지고, 2 서브 픽셀만큼 우측 및 하측으로 이동된 것으로 판단하고, 그에 대응되는 다시점 영상을 렌더링하도록 렌더링부(120)를 제어할 수 있다.
이 경우, 도 11a 및 도 11b 에 도시된 바와 같이, 렌더링부(120)는 도 7a 내지 도 7d 각각에 도시된 다시점 영상(710)이 좌측으로 2 서브 픽셀만큼 이동되고 상측으로 2 서브 픽셀 픽셀만큼 이동된 다시점 영상(110)을 렌더링할 수 있다.
한편, 상술한 예에서는 tx, ty가 2, 2인 경우인 것으로 설명하였으나 이는 일 예일 뿐, 커버(200)가 이동된 정도는 다양하게 산출될 수 있으며, 제어부(130)는 이동된 정도만큼의 서브 픽셀을 이동하여 다시점 영상을 렌더링하도록 제어할 수 있다.
한편, 제어부(130)는 기설정된 시간 주기마다 커버(200)가 틀어진 정도를 판단할 수 있다.
즉, 제어부(130)는 커버(200)가 닫히면 커버(200)가 틀어진 정도를 판단하여 틀어진 정도에 대응되는 다시점 영상이 렌더링되어 디스플레이되도록 제어할 수 있다. 그리고, 제어부(130)는 커버(200)가 닫힌 후 일정한 시간 간격마다 커버(200)의 틀어짐 정도를 재차 판단하고, 판단 결과에 대응되는 다시점 영상이 렌더링되어 디스플레이되도록 제어할 수 있다.
예를 들어, 제어부(130)는 커버(200)가 닫힌 시점에 85°만큼 틀어진 것으로 판단되면 도 7a 또는 도 7b와 같은 다시점 영상을 렌더링하고, 일정한 시간이 경과된 후 커버(200)가 80.1°만큼 틀어진 것으로 판단되면 도 8a 또는 도 8b와 같은 다시점 영상을 렌더링할 수 있다.
한편, 상술한 예에서는 제어부(130)가 기설정된 시간 주기마다 커버(200)의 틀어진 정도를 판단하는 것으로 설명하였으나 이는 일 예에 불과하며, 제어부(130)는 커버(200)의 틀어진 정도가 변경되는 경우마다 커버(200)가 틀어진 정도를 판단하고 그에 대응되는 다시점 영상을 렌더링하여 디스플레이할 수 있다.
즉, 커버(200)의 기설정된 지점이 디스플레이(110)와 맞닿게 되는 부분이 변경되는 경우, 터치 센서(112)에서 센싱되는 서브 픽셀 좌표값이 변경될 수 있다. 이에 따라, 제어부(130)는 커버(200)가 틀어진 정도를 감지하고 커버(200)의 틀어진 정도가 변경되는 시점마다 즉, 터치 센서(112)에서 센싱되는 서브 픽셀 좌표값이 변경되는 시점마다 커버(200)가 틀어진 정도를 판단하고 그에 대응되는 다시점 영상을 렌더링하여 디스플레이할 수 있다.
한편, 디스플레이 장치(100)와 커버(200)는 틀어짐을 방지하기 위한 별도의 연결 수단을 구비할 수도 있다.
예를 들어, 디스플레이 장치(100)의 전면에는 돌출된 연결 돌기가 형성되어 있고, 커버(200)에서 디스플레이 장치(100)의 전면을 커버하는 부분에는 디스플레이 장치(100)에 형성된 연결 돌기가 삽입될 수 있는 연결 홈이 형성되어 있을 수 있다.
이에 따라, 커버(200)가 닫혔을 때 연결 돌기가 연결 홈에 삽입되어 커버(200)가 틀어져 닫히는 것을 방지할 수 있다.
다만, 연결 돌기가 연결 홈에 삽입되더라도 연결 돌기와 연결 홈의 크기 등에 따라 커버(200)가 틀어지는 경우가 발생될 수 있다. 이 경우, 디스플레이 장치(100)는 상술한 방법에 의해 커버(200)의 틀어진 정도에 대응되는 다시점 영상을 렌더링하여 디스플레이할 수 있다.
도 12는 본 발명의 일 실시 예에 따른 다시점 영상 제공 방법을 설명하기 위한 흐름도이다.
먼저, 디스플레이 장치에 장착된 상기 커버가 닫히면, 디스플레이 장치에 대해 닫혀진 커버가 틀어진 정도를 판단하고 틀어진 정도에 대응되는 다시점 영상을 렌더링한다(S1210).
이후, 렌더링된 다시점 영상을 디스플레이한다(S1220).
S1210 단계는 닫혀진 커버의 기설정된 지점이 디스플레이 장치에 터치된 지점에 기초하여 틀어진 정도를 판단하고, 틀어진 정도에 대응되는 다시점 영상을 렌더링할 수 있다.
구체적으로, 닫혀진 커버의 기설정된 지점이 디스플레이 장치에서 터치된 지점의 서브 픽셀 좌표값을 판단하고, 기설정된 서브 픽셀 좌표값을 기준으로 터치된 지점의 서브 픽셀 좌표값의 회전 정도 및 위치 이동 정도를 나타내는 보정 파라미터를 산출하고, 산출된 보정 파라미터에 기초하여 틀어진 정도에 대응되는 다시점 영상을 렌더링할 수 있다.
이 경우, 상술한 수학식 1에 기초하여 산출된 값에 기초하여 보정 파라미터를 산출할 수 있다.
한편, 커버는 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하기 위해, 기설정된 영역에 렌티큘러 렌즈 또는 패러랙스 배리어를 구비할 수 있다.
다시점 영상을 렌더링하는 구체적인 방법에 대해서는 상술한 바 있다.
도 13은 본 발명의 일 실시 예에 따른 다시점 영상 제공 방법을 설명하기 위한 흐롬도이다.
먼저, 디스플레이 장치에 장착된 상기 커버가 닫히면, 디스플레이 장치에 대해 닫혀진 커버가 틀어진 정도를 판단하고 틀어진 정도에 대응되는 다시점 영상을 렌더링한다(S1310).
이후, 렌더링된 다시점 영상을 디스플레이한다(S1320).
이 경우, S1310 단계 및 S1320 단계는 도 12에서 설명한 S1210 단계와 S1220 단계와 동일하다는 점에서 구체적인 설명은 생략하도록 한다.
그리고, 커버의 틀어짐을 판단하고(S1330), 커버가 틀어진 것으로 판단되면(S1340-Y) 다시 S1310 단계 및 S1320 단계를 수행할 수 있다.
즉, 커버(200)가 틀어진 후 재차 다른 형태로 틀어질 수 있다는 점에서, 커버(200)의 틀어진 정도를 기설정된 시간 주기마다 판단하여 그에 대응되는 다시점 영상을 렌더링하여 디스플레이하거나 커버(200)의 틀어진 정도가 변경되는 경우마다 그에 대응되는 다시점 영상을 렌더링하여 디스플레이할 수 있다.
한편, 본 발명에 따른 다시점 영상 제공 방법을 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 디스플레이 장치에 대해 도시한 상술한 블록도에서는 버스(bus)를 미도시하였으나, 디스플레이 장치에서 각 구성요소 간의 통신은 버스를 통해 이루어질 수도 있다. 또한, 디스플레이 장치에는 상술한 다양한 단계를 수행하는 CPU, 마이크로 프로세서 등과 같은 프로세서가 더 포함될 수도 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100 : 디스플레이 장치 110 : 디스플레이
120 : 렌더링부 130 : 제어부

Claims (12)

  1. 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하는 커버와 탈부착 가능한 디스플레이 장치에 있어서,
    디스플레이;
    렌더링부; 및,
    상기 디스플레이 장치에 장착된 상기 커버가 닫히면, 상기 디스플레이 장치에 대해 상기 닫혀진 커버가 틀어진 정도를 판단하고 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 상기 렌더링부를 제어하고, 상기 렌더링된 다시점 영상을 상기 디스플레이에 디스플레이하는 제어부;를 포함하며,
    상기 제어부는,
    상기 커버의 기설정된 지점이 상기 디스플레이에 터치된 지점에 기초하여 상기 틀어진 정도를 판단하는 디스플레이 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 제어부는,
    상기 닫혀진 커버의 기설정된 지점이 상기 디스플레이에서 터치된 지점의 서브 픽셀 좌표값을 판단하고, 기설정된 서브 픽셀 좌표값을 기준으로 상기 터치된 지점의 서브 픽셀 좌표값의 회전 정도 및 위치 이동 정도를 나타내는 보정 파라미터를 산출하고, 상기 산출된 보정 파라미터에 기초하여 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링하도록 제어하는 것을 특징으로 하는 디스플레이 장치.
  4. 제3항에 있어서,
    상기 제어부는,
    하기의 수학식에 기초하여 산출된 값에 기초하여 상기 보정 파라미터를 산출하는 것을 특징으로 하는 디스플레이 장치:
    Figure 112014054653169-pat00003

    여기에서, qi는 인덱스 i를 갖는 기설정된 서브 픽셀 좌표값, R은 회전 정도, pi는 인덱스 i를 갖는 터치된 지점의 서브 픽셀 좌표값, t는 위치 이동 정도, n은 기설정된 서브 픽셀 또는 터치된 지점의 서브 픽셀의 개수이다.
  5. 제1항에 있어서,
    상기 커버는,
    상기 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하기 위해, 기설정된 영역에 렌티큘러 렌즈(lenticular lens) 또는 패러랙스 배리어(parallax barrier)를 구비하는 것을 특징으로 하는 디스플레이 장치.
  6. 제1항에 있어서,
    상기 제어부는,
    기설정된 시간 간격마다 상기 커버의 틀어진 정도를 판단하는 것을 특징으로 하는 디스플레이 장치.
  7. 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하는 커버와 탈부착 가능한 디스플레이 장치의 다시점 영상 제공 방법에 있어서,
    상기 디스플레이 장치에 장착된 상기 커버가 닫히면, 상기 디스플레이 장치에 대해 상기 닫혀진 커버가 틀어진 정도를 판단하고 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링하는 단계; 및,
    상기 렌더링된 다시점 영상을 디스플레이하는 단계;를 포함하며,
    상기 렌더링하는 단계는,
    상기 커버의 기설정된 지점이 상기 디스플레이에 터치된 지점에 기초하여 상기 틀어진 정도를 판단하는 다시점 영상 제공 방법.
  8. 삭제
  9. 제7항에 있어서,
    상기 렌더링하는 단계는,
    상기 닫혀진 커버의 기설정된 지점이 상기 디스플레이 장치에서 터치된 지점의 서브 픽셀 좌표값을 판단하고, 기설정된 서브 픽셀 좌표값을 기준으로 상기 터치된 지점의 서브 픽셀 좌표값의 회전 정도 및 위치 이동 정도를 나타내는 보정 파라미터를 산출하고, 상기 산출된 보정 파라미터에 기초하여 상기 틀어진 정도에 대응되는 다시점 영상을 렌더링하는 것을 특징으로 하는 다시점 영상 제공 방법.
  10. 제9항에 있어서,
    상기 렌더링하는 단계는,
    하기의 수학식에 기초하여 산출된 값에 기초하여 상기 보정 파라미터를 산출하는 것을 특징으로 하는 다시점 영상 제공 방법:
    Figure 112014054653169-pat00004

    여기에서, qi는 인덱스 i를 갖는 기설정된 서브 픽셀 좌표값, R은 회전 정도, pi는 인덱스 i를 갖는 터치된 지점의 서브 픽셀 좌표값, t는 위치 이동 정도, n은 기설정된 서브 픽셀 또는 터치된 지점의 서브 픽셀의 개수이다.
  11. 제7항에 있어서,
    상기 커버는,
    상기 다시점 영상을 서로 다른 시점의 복수의 영상으로 분리하기 위해, 기설정된 영역에 렌티큘러 렌즈(lenticular lens) 또는 패러랙스 배리어(parallax barrier)를 구비하는 것을 특징으로 하는 다시점 영상 제공 방법.
  12. 제7항에 있어서,
    기설정된 시간 간격마다 상기 커버의 틀어진 정도를 판단하는 단계;를 더 포함하는 것을 특징으로 하는 다시점 영상 제공 방법.


KR1020140070987A 2014-06-11 2014-06-11 디스플레이 장치 및 그의 다시점 영상 제공 방법 KR101954263B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140070987A KR101954263B1 (ko) 2014-06-11 2014-06-11 디스플레이 장치 및 그의 다시점 영상 제공 방법
US14/596,801 US9525864B2 (en) 2014-06-11 2015-01-14 Display apparatus and multi view providing method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140070987A KR101954263B1 (ko) 2014-06-11 2014-06-11 디스플레이 장치 및 그의 다시점 영상 제공 방법

Publications (2)

Publication Number Publication Date
KR20150142349A KR20150142349A (ko) 2015-12-22
KR101954263B1 true KR101954263B1 (ko) 2019-05-31

Family

ID=54837258

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140070987A KR101954263B1 (ko) 2014-06-11 2014-06-11 디스플레이 장치 및 그의 다시점 영상 제공 방법

Country Status (2)

Country Link
US (1) US9525864B2 (ko)
KR (1) KR101954263B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104881210B (zh) * 2015-06-12 2019-01-15 联想(北京)有限公司 电子设备及其显示控制方法
KR102580451B1 (ko) 2016-10-07 2023-09-20 삼성전자주식회사 보호 커버

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011068210A1 (ja) * 2009-12-04 2011-06-09 Ｎｅｃ液晶テクノロジー株式会社 立体表示装置、立体表示用画像データ生成方法、及びそのプログラム
US20110157337A1 (en) * 2009-12-30 2011-06-30 Hon Hai Precision Industry Co., Ltd. 3-dimensional display device

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002372929A (ja) 2001-06-13 2002-12-26 Namco Ltd 両面表示ディスプレイおよび電子機器
WO2004084560A1 (ja) 2003-03-20 2004-09-30 Seijiro Tomita 立体映像撮影表示システム
KR20050043329A (ko) 2003-11-06 2005-05-11 에스케이텔레텍주식회사 이동통신 단말기의 액정덮개
KR100623147B1 (ko) 2004-03-04 2006-09-18 (주)씨앤피하이텍 렌티큘러 방식이 적용된 이동통신 단말기의 윈도우 커버및 그 제조방법
US8110268B2 (en) * 2006-11-03 2012-02-07 Skinit, Inc. Adhesive cover for consumer devices
US20100253768A1 (en) * 2009-03-23 2010-10-07 Spatial View Inc. Apparatus and method for generating and displaying a stereoscopic image on a mobile computing device
TWI414170B (zh) * 2009-04-29 2013-11-01 Unique Instr Co Ltd A device with a 2D and 3D image display function mobile phone
KR101695809B1 (ko) * 2009-10-09 2017-01-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8922625B2 (en) * 2009-11-19 2014-12-30 Lg Electronics Inc. Mobile terminal and controlling method thereof
KR101685980B1 (ko) * 2010-07-30 2016-12-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20120015165A (ko) * 2010-08-11 2012-02-21 엘지전자 주식회사 영상의 깊이감 조절 방법 및 이를 이용하는 이동 단말기
KR20120056929A (ko) * 2010-09-20 2012-06-05 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
KR101633336B1 (ko) * 2010-10-01 2016-06-24 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101737840B1 (ko) * 2010-11-05 2017-05-19 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20120088609A (ko) 2011-01-31 2012-08-08 방경란 중대형 ｐｅｄ를 위한 휴대용 3ｄ 뷰어
KR101249901B1 (ko) * 2011-06-22 2013-04-09 엘지전자 주식회사 이동통신 단말기 및 그 동작방법
KR101909602B1 (ko) * 2011-08-17 2018-10-18 엘지전자 주식회사 이동 단말기
CN103853314B (zh) * 2012-11-28 2017-09-29 联想(北京)有限公司 一种自动控制的方法及装置
KR102058369B1 (ko) * 2013-01-29 2019-12-24 엘지전자 주식회사 이동 단말기 및 이동 단말기용 커버
KR102131827B1 (ko) * 2013-12-03 2020-07-09 엘지전자 주식회사 이동 단말기 및 이의 제어 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011068210A1 (ja) * 2009-12-04 2011-06-09 Ｎｅｃ液晶テクノロジー株式会社 立体表示装置、立体表示用画像データ生成方法、及びそのプログラム
US20110157337A1 (en) * 2009-12-30 2011-06-30 Hon Hai Precision Industry Co., Ltd. 3-dimensional display device

Also Published As

Publication number Publication date
KR20150142349A (ko) 2015-12-22
US9525864B2 (en) 2016-12-20
US20150365659A1 (en) 2015-12-17

Similar Documents

Publication Publication Date Title
RU2524834C2 (ru) Устройство для автостереоскопического рендеринга и отображения
CN106447727B (zh) 估计3d显示装置的参数的方法和使用其的3d显示装置
JP6449428B2 (ja) 曲面状多視点映像ディスプレイ装置及びその制御方法
CN102812420B (zh) 立体显示装置和立体成像装置、用于上述装置的优势眼判定方法
EP3595285A1 (en) Photography processing method and device for camera module, and terminal apparatus
KR102370062B1 (ko) 3차원 디스플레이 장치를 위한 보정 계수 결정 방법 및 그 방법을 이용한 3차원 디스플레이 장치
CN102497563B (zh) 跟踪式裸眼立体显示控制方法、显示控制装置和显示系统
US9086742B2 (en) Three-dimensional display device, three-dimensional image capturing device, and pointing determination method
JP5858044B2 (ja) 立体画像表示装置
CN106604018B (zh) 3d显示设备及其控制方法
JP2015149718A (ja) ディスプレイ装置及びその制御方法
US20140015942A1 (en) Adaptive monoscopic and stereoscopic display using an integrated 3d sheet
CN103392342A (zh) 视区调整的方法和装置、能实现立体显示视频信号的设备
CN105374325A (zh) 可弯曲立体3d显示装置
US20140254008A1 (en) Image display device and image display method
US20130106843A1 (en) Information processing apparatus, display control method, and program
KR20140046563A (ko) 디스플레이의 방향을 고려하여 영상 렌더링을 수행하는 영상 처리 장치 및 방법
KR101954263B1 (ko) 디스플레이 장치 및 그의 다시점 영상 제공 방법
CN105263011A (zh) 多视点图像显示设备及其多视点图像显示方法
US20150015484A1 (en) Display device
CN104850383A (zh) 一种信息处理方法和电子设备
CN111919437B (zh) 用于头部跟踪自动立体显示器的立体编织
US20130141330A1 (en) Stereoscopic display device
KR20160017618A (ko) 무안경식 입체 디스플레이 장치의 렌티큘러 또는 패럴렉스 배리어의 기울기 각도 확인 장치, 기울기 각도 확인 방법, 기울기 각도 확인 프로그램 및 기울기 각도 확인 프로그램이 저장된 매체
US20240121373A1 (en) Image display method and 3d display system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant