KR20160087703A - 다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법 - Google Patents

다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법 Download PDF

Info

Publication number
KR20160087703A
KR20160087703A KR1020150007009A KR20150007009A KR20160087703A KR 20160087703 A KR20160087703 A KR 20160087703A KR 1020150007009 A KR1020150007009 A KR 1020150007009A KR 20150007009 A KR20150007009 A KR 20150007009A KR 20160087703 A KR20160087703 A KR 20160087703A
Authority
KR
South Korea
Prior art keywords
display device
display
information
display screen
scene
Prior art date
Application number
KR1020150007009A
Other languages
English (en)
Inventor
신일홍
이은준
김동훈
이현우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020150007009A priority Critical patent/KR20160087703A/ko
Priority to US14/994,740 priority patent/US20160202945A1/en
Publication of KR20160087703A publication Critical patent/KR20160087703A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0492—Change of orientation of the displayed image, e.g. upside-down, mirrored
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2356/00—Detection of the display position w.r.t. other display screens
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Abstract

다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법이 개시된다. 본 발명의 일 실시 예에 따른 다중 디스플레이 제어장치는 다수의 디스플레이 장치 각각에 대한 공간정보를 획득하는 수신부와, 가상공간을 생성하고 생성된 가상공간에서 각 디스플레이 장치의 공간정보를 기초로 콘텐츠를 각 디스플레이 장치의 디스플레이 화면에 매핑하여 장면을 구성하는 제어부와, 구성된 각 장면 정보를 각 디스플레이 장치에 제공하는 송신부를 포함한다.

Description

다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법 {Apparatus and method for controlling multi display apparatus using space information of the multi display apparatus}
본 발명은 영상처리 기술에 관한 것으로, 보다 상세하게는 다수의 디스플레이 장치들을 제어 및 관리하는 기술에 관한 것이다.
다중 디스플레이 장치(multi display apparatus)는 전시나 예술적 표현 등을 위해 활용된다. 현재는 공공장소에서의 디지털 표지판(Digital Signage)이나 전광판 등 다양한 분야에서 활용되고 있고, 대형 디스플레이 장치의 제작이 어려운 상황에서 효율적인 대안이 되고 있다.
그런데, 다중 디스플레이 장치는 설치 및 보수가 어렵고 디스플레이 장치들을 각각 제어하기가 쉽지 않으며 유선으로 각 디스플레이 장치에 개별적인 입력이 필요하다. 또한, 컨버터나 다중 GPU 등과 같은 고가의 변환장치가 추가로 요구되어 제약이 있다. 현재는 단순히 콘텐츠의 전체 화면을 각 디스플레이 장치의 영역에 따라 2차원적으로 분할하는 방법이 주로 사용되고 있고, 특별한 시각적 효과를 주기 위해서는 전용 콘텐츠를 제작하여 사용해야 한다.
일 실시 예에 따라, 다중 디스플레이 장치를 통해 콘텐츠를 효율적으로 표출하기 위해 다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법을 제안한다.
일 실시 예에 따른 다중 디스플레이 제어장치는, 다수의 디스플레이 장치 각각에 대한 공간정보를 획득하는 수신부와, 가상공간을 생성하고 생성된 가상공간에서 각 디스플레이 장치의 공간정보를 기초로 콘텐츠를 각 디스플레이 장치의 디스플레이 화면에 매핑하여 장면을 구성하는 제어부와, 구성된 각 장면 정보를 각 디스플레이 장치에 제공하는 송신부를 포함한다.
디스플레이 장치의 공간정보는 각 디스플레이 장치의 위치정보, 크기정보 및 회전정보를 포함할 수 있다. 일 실시 예에 따른 콘텐츠는 가상공간에 표시되는 3차원 콘텐츠이다.
일 실시 예에 따른 수신부는 디스플레이 장치들의 공간정보를 센서를 이용하여 획득한다.
일 실시 예에 따른 제어부는 동적으로 변화하는 각 디스플레이 장치의 공간정보를 실시간으로 반영하여 각 디스플레이 화면에 콘텐츠를 매핑한다.
일 실시 예에 따른 제어부는 가상공간을 생성하고 생성된 가상공간에 콘텐츠를 배치하며 각 디스플레이 장치의 공간정보를 이용하여 각 디스플레이 장치의 위치 및 각도를 결정하는 공간 구성부와, 결정된 위치 및 각도를 반영하여 각 디스플레이 화면에 콘텐츠를 매핑하여 장면을 생성하고 생성된 장면을 렌더링하는 렌더링부와, 각 디스플레이 화면에 매핑되는 렌더링 결과를 추출하는 추출부를 포함한다.
일 실시 예에 따른 렌더링부는 각 디스플레이 장치의 공간정보에 따라 각 디스플레이 화면 위치에 각 카메라를 배치하여 각 디스플레이 화면에서 보이는 콘텐츠를 실제 물리공간과 매핑한다. 이때, 렌더링부는 각 디스플레이 장치의 위치정보에 따라 카메라를 배치하여 해당하는 디스플레이 화면에서 보이는 콘텐츠를 확대 또는 축소할 수 있다. 렌더링부는 각 디스플레이 장치의 회전정보에 따라 회전된 디스플레이 화면의 회전이 상쇄되도록 카메라를 회전시켜 배치할 수 있다.
일 실시 예에 따른 송신부는 유무선 네트워크를 통해 각 디스플레이 장치에 송신한다. 이때, 송신부는 각 디스플레이 장치에 통신장치를 이용하여 영상정보를 송신할 수 있다. 송신부는 영상정보를 압축하여 각 디스플레이 장치에 송신할 수 있다.
다른 실시 예에 따른 다중 디스플레이 제어방법은, 다수의 디스플레이 장치 각각에 대한 공간정보를 획득하는 단계와, 가상공간을 생성하고 생성된 가상공간에서 각 디스플레이 장치의 공간정보를 기초로 콘텐츠를 각 디스플레이 장치의 디스플레이 화면에 매핑하여 장면을 구성하는 단계와, 구성된 각 장면 정보를 각 디스플레이 장치에 제공하는 단계를 포함한다. 디스플레이 장치의 공간정보는 각 디스플레이 장치의 위치정보, 크기정보 및 회전정보를 포함할 수 있다.
일 실시 예에 따른 장면을 구성하는 단계에서, 동적으로 변화하는 각 디스플레이 장치의 공간정보를 실시간으로 반영하여 각 디스플레이 화면에 콘텐츠를 매핑한 후 장면을 구성한다.
일 실시 예에 따른 장면을 구성하는 단계는, 가상공간을 생성하고 생성된 가상공간에 콘텐츠를 배치하며 각 디스플레이 장치의 공간정보를 이용하여 각 디스플레이 장치의 위치 및 각도를 결정하는 단계와, 결정된 위치 및 각도를 반영하여 각 디스플레이 화면에 콘텐츠를 매핑하여 장면을 생성하고 생성된 장면을 렌더링하는 단계와, 각 디스플레이 화면에 매핑되는 렌더링 결과를 추출하는 단계를 포함한다.
일 실시 예에 따른 장면을 렌더링하는 단계에서, 각 디스플레이 장치의 공간정보에 따라 각 디스플레이 화면 위치에 각 카메라를 배치하여 각 디스플레이 화면에서 보이는 콘텐츠를 실제 물리공간과 매핑한다.
일 실시 예에 따른 장면을 렌더링하는 단계에서, 각 디스플레이 장치의 위치정보에 따라 카메라를 배치하여 해당하는 디스플레이 화면에서 보이는 콘텐츠를 확대 또는 축소한다.
일 실시 예에 따른 장면을 렌더링하는 단계에서, 각 디스플레이 장치의 회전정보에 따라 회전된 디스플레이 화면의 회전이 상쇄되도록 카메라를 회전시켜 배치한다.
일 실시 예에 따르면, 디스플레이 장치들의 실제 물리적인 공간정보를 반영하여 콘텐츠를 다중 디스플레이 장치에 제공함에 따라, 관측자에게 현실감과 몰입감을 줄 수 있다. 특히, 실시간으로 변화하는 디스플레이 장치들의 공간정보를 반영하여 콘텐츠를 제공함에 따라, 디스플레이 장치들이 동적으로 변화하는 경우에도 실시간 적응이 가능하다. 이때, 디스플레이 장치의 위치정보를 반영하여 콘텐츠를 자동으로 확대하거나 축소하며, 디스플레이 장치의 회전을 반영하여 콘텐츠를 제공할 수 있다.
나아가, 디스플레이 장치에 소형 USB 셋탑박스와 같은 통신장치를 이용하여 유·무선으로 콘텐츠를 송신하여 재생함에 따라, 설치공간의 구애를 크게 받지 않고, 다중 디스플레이 시스템의 설치 및 관리가 용이하여 그 활용성이 증대된다. 본 발명은 새로운 공간 지각형 콘텐츠 생성을 활성화하여 전시, 광고, 정보 전달 등에서 가장 효과적인 수단으로 적용될 것이다.
도 1은 본 발명의 일 실시 예에 따른 다중 디스플레이 시스템의 구성도,
도 2는 본 발명의 일 실시 예에 따른 도 1의 다중 디스플레이 제어장치의 세부 구성도,
도 3은 본 발명의 일 실시 예에 따른 도 2의 제어부의 세부 구성도,
도 4는 본 발명의 일 실시 예에 따른 가상공간의 개념도,
도 5는 본 발명의 일 실시 예에 따른 가상공간에 표출되는 콘텐츠를 도시한 도면,
도 6은 본 발명의 일 실시 예에 따른 가상공간에서 렌더링을 위한 카메라 배치 예를 도시한 도면,
도 7은 본 발명의 일 실시 예에 따른 도 6의 렌더링 결과에 따른 최종 표출 모습을 도시한 도면,
도 8은 본 발명의 일 실시 예에 따른 디스플레이 장치가 회전된 경우의 렌더링 예를 보여주는 도면,
도 9는 본 발명의 일 실시 예에 따른 도 8의 카메라 회전을 통해 정상적으로 디스플레이 장치에 출력되는 모습을 보여주는 도면,
도 10은 본 발명의 일 실시 예에 따른 다중 디스플레이 제어방법을 도시한 흐름도이다.
이하에서는 첨부한 도면을 참조하여 본 발명의 실시 예들을 상세히 설명한다. 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시 예에 따른 다중 디스플레이 시스템의 구성도이다.
도 1을 참조하면, 다중 디스플레이 시스템(1)은 다중 디스플레이 제어장치(10)와 다수의 디스플레이 장치(12-1,12-2,12-3,…,12-N)를 포함한다.
다중 디스플레이 제어장치(10)는 디스플레이 장치(12-1,12-2,12-3,…,12-N)를 관리 및 제어한다. 일 실시 따른 다중 디스플레이 제어장치(10)는 디스플레이 장치(12-1,12-2,12-3,…,12-N)의 공간정보를 획득하고 콘텐츠를 표출하기 위한 가상공간을 구성한다. 공간정보는 실제 디스플레이 장치들이 위치하는 물리적인 공간에서의 공간정보이다. 예를 들어, 공간정보는 디스플레이 장치들의 위치정보, 크기정보 및 회전정보 등을 포함하며, 각 디스플레이 장치들 간의 관계정보도 포함할 수 있다.
다중 디스플레이 제어장치(10)는 각 디스플레이 장치(12-1,12-2,12-3,…,12-N)의 공간정보를 이용하여 가상공간에서 콘텐츠를 각 디스플레이 화면의 위치에 매핑하여 장면을 구성한다. 그리고, 각 장면정보를 해당하는 디스플레이 장치(12-1,12-2,12-3,…,12-N)에 전송한다. 디스플레이 장치들(12-1,12-2,12-3,…,12-N)의 실제 물리적인 공간정보가 콘텐츠에 반영됨에 따라, 관측자에게 현실감과 몰입감을 줄 수 있다.
일 실시 예에 따른 다중 디스플레이 제어장치(10)는 공간정보 반영 시에, 실시간으로 변화되는 디스플레이 장치(12-1,12-2,12-3,…,12-N)의 공간정보를 반영하여 각 디스플레이 화면을 제어한다. 실시간으로 변화하는 디스플레이 장치들의 공간정보가 반영됨에 따라, 디스플레이 장치들이 동적으로 변화하는 경우에도 실시간 적응이 가능하다. 다중 디스플레이 제어장치(10)의 세부 구성은 도 2를 참조로 하여 후술한다.
디스플레이 장치(12-1,12-2,12-3,…,12-N)는 영상을 재생하기 위한 디스플레이 화면을 가진 장치로서, 실내 또는 실외에 배치된다. 디스플레이 장치(12-1,12-2,12-3,…,12-N)는 대형일 수 있다. 예를 들어, 디스플레이 장치(12-1,12-2,12-3,…,12-N)는 공공장소에서의 디지털 표지판, 전광판 등을 구성할 수 있으나, 이에 한정되지는 않는다. 디스플레이 장치(12-1,12-2,12-3,…,12-N)는 다중 디스플레이 제어장치(10)로부터 해당되는 디스플레이 장치(12-1,12-2,12-3,…,12-N)의 공간정보가 반영된 영상정보를 수신하여 이를 재생한다.
도 2는 본 발명의 일 실시 예에 따른 도 1의 다중 디스플레이 제어장치의 세부 구성도이다.
도 2를 참조하면, 다중 디스플레이 제어장치(10)는 수신부(100), 제어부(102) 및 송신부(104)를 포함한다.
수신부(100)는 디스플레이 장치들에 대한 공간정보를 획득한다. 일 실시 예에 따른 수신부(100)는 각 디스플레이 장치의 공간정보를 센서를 이용하여 획득한다. 센서는 디스플레이 장치들에 자체적으로 형성될 수 있고, 외부에 형성될 수도 있다.
제어부(102)는 가상공간을 생성하고 생성된 가상공간에서 각 디스플레이 장치의 공간정보를 기초로 콘텐츠를 각 디스플레이 장치의 디스플레이 화면에 매핑하여 장면을 구성한다. 일 실시 예에 따른 제어부(102)는 동적으로 변화하는 디스플레이 장치들의 공간정보를 실시간으로 반영하여 각 디스플레이 화면에 콘텐츠를 매핑한다. 제어부(102)의 세부 구성은 도 3을 참조로 하여 후술한다.
송신부(104)는 제어부(102)에서 구성된 각 장면 정보를 각 디스플레이 장치에 제공한다. 일 실시 예에 따른 송신부(104)는 유무선 네트워크를 통해 디스플레이 장치들에 장면 정보를 송신한다. 다른 실시 예에 따른 송신부(104)는 디스플레이 장치들에 통신장치를 이용하여 장면 정보를 송신한다. 일 실시 예에 따른 송신부(104)는 장면 정보를 압축한 후 이를 디스플레이 장치에 송신한다.
도 3은 본 발명의 일 실시 예에 따른 도 2의 제어부의 세부 구성도이다.
도 3을 참조하면, 제어부(102)는 공간 구성부(1020), 렌더링부(1022) 및 추출부(1024)를 포함한다.
공간 구성부(1020)는 3차원의 가상공간을 생성하고 생성된 가상공간에 콘텐츠를 배치하며 각 디스플레이 장치의 공간정보를 이용하여 각 디스플레이 장치의 위치 및 각도를 결정한다. 렌더링부(1022)는 공간 구성부(1020)에서 결정된 각 디스플레이 장치의 위치 및 각도를 반영하여 각 디스플레이 화면에 콘텐츠를 매핑하여 장면을 생성하고 생성된 장면을 렌더링한다. 추출부(1024)는 각 디스플레이 화면에 매핑되는 렌더링 결과를 추출한다.
일 실시 예에 따른 렌더링부(1022)는 각 디스플레이 장치의 공간정보에 따라 각 디스플레이 화면 위치에 카메라들을 배치하여 각 디스플레이 화면에서 보이는 콘텐츠를 실제 물리공간과 매핑한다. 이때, 렌더링부(1022)는 각 디스플레이 장치의 위치정보에 따라 카메라를 배치하여 해당하는 디스플레이 화면에서 보이는 콘텐츠를 확대 또는 축소할 수 있다. 카메라의 배치 실시 예는 도 6 및 도 7을 참조로 하여 후술한다. 다른 예로, 렌더링부(1022)는 각 디스플레이 장치의 회전정보에 따라 회전된 디스플레이 화면의 회전이 상쇄되도록 카메라를 회전시킬 수 있다. 카메라 회전 실시 예는 도 8 및 도 9를 참조로 하여 후술한다.
도 4는 본 발명의 일 실시 예에 따른 가상공간의 개념도이다.
도 4를 참조하면, 가상공간(40)은 디스플레이 장치들의 디스플레이 화면(42-1, 42-2,42-3, 42-4)을 3차원 공간으로 확장시킨 공간이다. 도 4에서는 4개의 디스플레이 장치를 대상으로 해당되는 디스플레이 화면(42-1, 42-2,42-3, 42-4)을 도시하고 있으나, 이는 본 발명의 이해를 돕기 위한 것일 뿐 이에 한정되지 않는다. 가상공간(40)에서 가상의 콘텐츠, 예를 들어 3차원 객체가 표출된다. 가상의 콘텐츠의 예는 도 5를 참조로 하여 후술한다.
도 5는 본 발명의 일 실시 예에 따른 가상공간에 표출되는 콘텐츠를 도시한 도면이다.
도 5를 참조하면, 가상공간(40)에 가상의 콘텐츠(50)를 표출할 수 있다. 콘텐츠(50)는 도 5에 도시된 바와 같이 3차원 물체(object)일 수 있다. 본 발명의 이해를 돕기 위해서, 도 5에서는 물체(50)의 소정의 면들이 각각 A, B라는 글자를 가진 경우를 가정한다. 예를 들어, XY 평면에는 A 글자가 형성되고, YZ 평면에는 B 글자가 형성된다. 그러나, 전술한 실시 예는 본 발명의 이해를 돕기 위한 일 실시 예일 뿐 이에 한정되는 것은 아니다.
도 6은 본 발명의 일 실시 예에 따른 가상공간에서 렌더링을 위한 카메라 배치 예를 도시한 도면이다.
도 6을 참조하면, 디스플레이 장치들의 공간정보에 따라 해당하는 디스플레이 화면(42-1,42-2,42-3,42-4) 위치에 렌더링을 위한 카메라(61-1,61-2,61-3,61-4)를 배치하여 디스플레이 화면(42-1,42-2,42-3,42-4)에서 보이는 콘텐츠를 실제 3차원 물리공간과 매핑한다. 예를 들어, 도 6에 도시된 바와 같이, 카메라 #1(61-1)과 카메라 #2(61-2)는 각각 디스플레이 화면 #1(42-1)과 디스플레이 화면 #2(42-2) 위치에 배치된다.
일 실시 예에 따른 다중 디스플레이 제어장치는 디스플레이 장치들의 공간정보에 따라 실제 물리공간의 특성을 가상공간(40)에 반영한다. 이때, 다중 디스플레이 제어장치는 디스플레이 장치들의 실제 깊이정보를 알 수 있으므로 해당 디스플레이 장치의 깊이정보를 반영하여 디스플레이 화면에 카메라를 배치하여 디스플레이 화면에서 보이는 콘텐츠의 크기를 조절한다. 예를 들어, 도 6에 도시된 바와 같이, 디스플레이 장치 #3의 깊이 정보를 반영하여 카메라 #3(61-3)을 콘텐츠(50)에 더 가깝게 이동시켜 배치한다. 이때, 관측자가 Z축 방향으로 디스플레이 화면 #3(42-3)을 관측하는 경우, 디스플레이 화면 #3(42-3)에 보이는 콘텐츠가 확대되도록 가상공간(40)에 반영한다.
이러한 디스플레이 장치의 깊이정보를 고려하지 않은 디스플레이 장치의 경우, 카메라 #3(61-3)도 카메라 #1(61-1), 카메라 #2(61-2)와 동일한 크기를 가지게 되므로, 관측자가 관측할 때 실제 디스플레이 장치의 배치 공간과 콘텐츠 사이에는 괴리가 발생한다. 그러나, 본 발명에 따르면, 실제 디스플레이 장치의 공간정보를 이용하여 가상공간(40)의 디스플레이 화면 #3(42-3)에 확대된 콘텐츠를 매핑함으로써, 각 디스플레이 장치의 유기적인 결합으로 실제 환경이 반영된 콘텐츠를 표출할 수 있다.
한편, 카메라 #4(61-4)는 도 6에 도시된 바와 같이, 콘텐츠(50)의 옆 면을 표출한다. 이러한 특성을 활용하여 벽면에 본 발명을 적용하면, 벽이 꺾어지는 곳에서 관측자가 콘텐츠의 다른 측면의 모습을 관측할 수 있어서, 관측자가 실제 3차원 공간을 인지하는 효과를 줄 수 있다.
도 7은 본 발명의 일 실시 예에 따른 도 6의 렌더링 결과에 따른 최종 표출 모습을 도시한 도면이다.
도 7을 참조하면, 디스플레이 장치들의 공간정보에 따라 디스플레이 화면(42-1,42-2,42-3,42-4)에 콘텐츠의 특성이 반영되어 표출된다. 예를 들어, 관측자 A(70)와 동일한 거리에 있는 디스플레이 화면 #1(42-1)과 디스플레이 화면 #2(42-2)에 콘텐츠가 분배되어 표시되고, 관측자 A(70)와 거리가 먼 디스플레이 화면 #3(42-3)에는 콘텐츠가 확대되어 표시되며, 디스플레이 화면 #4(42-1)에는 관측자 B(72)가 관측할 수 있는 위치에 콘텐츠를 표시한다. 전술한 바와 같이, 각 디스플레이 장치들의 실제 물리적인 공간정보를 이용하여 가상공간(40)을 구성하고 가상공간(40)에서 공간정보를 반영하여 콘텐츠를 표출함에 따라, 새로운 콘텐츠 표출의 기준이 될 수 있다.
도 8은 본 발명의 일 실시 예에 따른 디스플레이 장치가 회전된 경우의 렌더링 예를 보여주는 도면이다.
도 8을 참조하면, 실제 물리공간에서 디스플레이 장치가 회전된 경우, 관측자는 물리공간에서 디스플레이 장치의 회전과 관계없이 실제 콘텐츠를 볼 수 있도록 렌더링 처리한다. 도 8에 도시된 바와 같이 디스플레이 장치의 회전각을 θ라 하면, 일 실시 예에 따른 다중 디스플레이 제어장치는 실제 렌더링을 위한 카메라의 회전각도를 -θ로 설정하여, 디스플레이 장치의 회전 효과를 상쇄시킨다.
도 9는 본 발명의 일 실시 예에 따른 도 8의 카메라 회전을 통해 정상적으로 디스플레이 장치에 출력되는 모습을 보여주는 도면이다.
도 9를 참조하면, 카메라를 회전하여 콘텐츠를 추출한 경우 물리공간에서 회전되지 않은 디스플레이 장치의 화면에는 도 9의 좌측(900)과 같이 글자가 회전되어 나타난다. 그러나, 본 발명에 따르면, 디스플레이 화면을 θ만큼 회전하는 경우, 도 9의 우측(910)과 같이 정상적인 글자가 출력된다.
도 10은 본 발명의 일 실시 예에 따른 다중 디스플레이 제어방법을 도시한 흐름도이다.
도 10을 참조하면, 다중 디스플레이 제어장치는 실제 물리공간에서 다중 디스플레이 장치의 공간정보를 획득한다(1000). 공간정보는 각 디스플레이 장치의 위치, 크기 및 회전 정보를 포함한다.
이어서, 획득된 공간정보를 이용하여 콘텐츠를 입력(1010)한 후 가상공간을 구성한다(1020). 그리고, 카메라를 이용하여 물리공간과의 관계에 의한 콘텐츠 매핑을 이용하여 장면을 생성한다(1030). 예를 들어, 각 디스플레이 장치의 공간정보에 따라 각 디스플레이 화면 위치에 각 카메라를 배치하여 각 디스플레이 화면에 콘텐츠를 매핑한 후 장면을 생성한다.
이어서, 장면을 렌더링(1040)하고, 각 디스플레이 화면에 매핑되는 결과를 추출한다(1050). 이때, 영상 정보변환을 수행할 수 있다(1060). 변환은 이미지 압축, 비디오 압축 또는 정보를 압축하는 방법 등이 사용될 수 있다.
이어서, 네트워크나 특정한 통신장치를 통해 영상정보를 각 디스플레이 장치에 전송한다(1070). 그러면, 각 디스플레이 장치는 수신된 영상정보를 재생하게 된다.
콘텐츠를 압축하여 전송하는 경우, 디스플레이 장치에 소형 USB 셋탑박스를 이용하여 유·무선으로 영상정보를 송신하여 해당 디스플레이 장치를 통해 재생 가능하다. 이에 따라, 설치공간의 구애를 크게 받지 않고, 다중 디스플레이 장치 시스템의 설치와 관리가 용이하여 활용성을 증대시킬 수 있다.
이제까지 본 발명에 대하여 그 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (19)

  1. 다수의 디스플레이 장치 각각에 대한 공간정보를 획득하는 수신부;
    가상공간을 생성하고 생성된 가상공간에서 각 디스플레이 장치의 공간정보를 기초로 콘텐츠를 각 디스플레이 장치의 디스플레이 화면에 매핑하여 장면을 구성하는 제어부; 및
    구성된 각 장면 정보를 각 디스플레이 장치에 제공하는 송신부;
    를 포함하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  2. 제 1 항에 있어서,
    디스플레이 장치의 공간정보는 각 디스플레이 장치의 위치정보, 크기정보 및 회전정보를 포함하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  3. 제 1 항에 있어서, 상기 수신부는
    디스플레이 장치들의 공간정보를 센서를 이용하여 획득하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  4. 제 1 항에 있어서, 상기 제어부는
    동적으로 변화하는 각 디스플레이 장치의 공간정보를 실시간으로 반영하여 각 디스플레이 화면에 콘텐츠를 매핑하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  5. 제 1 항에 있어서, 상기 제어부는
    가상공간을 생성하고 생성된 가상공간에 콘텐츠를 배치하며 각 디스플레이 장치의 공간정보를 이용하여 각 디스플레이 장치의 위치 및 각도를 결정하는 공간 구성부; 및
    결정된 위치 및 각도를 반영하여 각 디스플레이 화면에 콘텐츠를 매핑하여 장면을 생성하고 생성된 장면을 렌더링하는 렌더링부; 및
    각 디스플레이 화면에 매핑되는 렌더링 결과를 추출하는 추출부;
    를 포함하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  6. 제 5 항에 있어서, 상기 렌더링부는
    각 디스플레이 장치의 공간정보에 따라 각 디스플레이 화면 위치에 각 카메라를 배치하여 각 디스플레이 화면에서 보이는 콘텐츠를 실제 물리공간과 매핑하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  7. 제 6 항에 있어서, 상기 렌더링부는
    각 디스플레이 장치의 위치정보에 따라 카메라를 배치하여 해당하는 디스플레이 화면에서 보이는 콘텐츠를 확대 또는 축소하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  8. 제 6 항에 있어서, 상기 렌더링부는
    각 디스플레이 장치의 회전정보에 따라 회전된 디스플레이 화면의 회전이 상쇄되도록 카메라를 회전시켜 배치하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  9. 제 1 항에 있어서,
    상기 콘텐츠는 가상공간에 표시되는 3차원 콘텐츠인 것을 특징으로 하는 다중 디스플레이 제어장치.
  10. 제 1 항에 있어서, 상기 송신부는
    유무선 네트워크를 통해 각 디스플레이 장치에 송신하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  11. 제 1 항에 있어서, 상기 송신부는
    각 디스플레이 장치에 통신장치를 이용하여 영상정보를 송신하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  12. 제 1 항에 있어서, 상기 송신부는
    영상정보를 압축하여 각 디스플레이 장치에 송신하는 것을 특징으로 하는 다중 디스플레이 제어장치.
  13. 다수의 디스플레이 장치 각각에 대한 공간정보를 획득하는 단계;
    가상공간을 생성하고 생성된 가상공간에서 각 디스플레이 장치의 공간정보를 기초로 콘텐츠를 각 디스플레이 장치의 디스플레이 화면에 매핑하여 장면을 구성하는 단계; 및
    구성된 각 장면 정보를 각 디스플레이 장치에 제공하는 단계;
    를 포함하는 것을 특징으로 하는 다중 디스플레이 제어방법.
  14. 제 13 항에 있어서,
    디스플레이 장치의 공간정보는 각 디스플레이 장치의 위치정보, 크기정보 및 회전정보를 포함하는 것을 특징으로 하는 다중 디스플레이 제어방법.
  15. 제 13 항에 있어서, 상기 장면을 구성하는 단계는
    동적으로 변화하는 각 디스플레이 장치의 공간정보를 실시간으로 반영하여 각 디스플레이 화면에 콘텐츠를 매핑한 후 장면을 구성하는 것을 특징으로 하는 다중 디스플레이 제어방법.
  16. 제 13 항에 있어서, 상기 장면을 구성하는 단계는
    가상공간을 생성하고 생성된 가상공간에 콘텐츠를 배치하며 각 디스플레이 장치의 공간정보를 이용하여 각 디스플레이 장치의 위치 및 각도를 결정하는 단계; 및
    결정된 위치 및 각도를 반영하여 각 디스플레이 화면에 콘텐츠를 매핑하여 장면을 생성하고 생성된 장면을 렌더링하는 단계; 및
    각 디스플레이 화면에 매핑되는 렌더링 결과를 추출하는 단계;
    를 포함하는 것을 특징으로 하는 다중 디스플레이 제어방법.
  17. 제 16 항에 있어서, 상기 장면을 렌더링하는 단계는
    각 디스플레이 장치의 공간정보에 따라 각 디스플레이 화면 위치에 각 카메라를 배치하여 각 디스플레이 화면에서 보이는 콘텐츠를 실제 물리공간과 매핑하는 것을 특징으로 하는 다중 디스플레이 제어방법.
  18. 제 16 항에 있어서, 상기 장면을 렌더링하는 단계는
    각 디스플레이 장치의 위치정보에 따라 카메라를 배치하여 해당하는 디스플레이 화면에서 보이는 콘텐츠를 확대 또는 축소하는 것을 특징으로 하는 다중 디스플레이 제어방법.
  19. 제 16 항에 있어서, 상기 장면을 렌더링하는 단계는
    각 디스플레이 장치의 회전정보에 따라 회전된 디스플레이 화면의 회전이 상쇄되도록 카메라를 회전시켜 배치하는 것을 특징으로 하는 다중 디스플레이 제어방법.
KR1020150007009A 2015-01-14 2015-01-14 다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법 KR20160087703A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020150007009A KR20160087703A (ko) 2015-01-14 2015-01-14 다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법
US14/994,740 US20160202945A1 (en) 2015-01-14 2016-01-13 Apparatus and method for controlling multiple display devices based on space information thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150007009A KR20160087703A (ko) 2015-01-14 2015-01-14 다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR20160087703A true KR20160087703A (ko) 2016-07-22

Family

ID=56367623

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150007009A KR20160087703A (ko) 2015-01-14 2015-01-14 다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법

Country Status (2)

Country Link
US (1) US20160202945A1 (ko)
KR (1) KR20160087703A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170027271A (ko) * 2015-09-01 2017-03-09 한국전자통신연구원 다중 디스플레이 시스템에서의 스크린 위치 센싱 방법 및 컨텐츠 구성 방법 및 스크린 위치 센싱을 위한 워터마크 영상 생성 방법 및 서버 및 디스플레이 단말
KR20190083423A (ko) * 2018-01-04 2019-07-12 주식회사 팬스컴스 가상공간 내 복수의 디스플레이 배치방법
KR20190083422A (ko) * 2018-01-04 2019-07-12 주식회사 팬스컴스 가상공간 내 복수의 디스플레이 화면 매핑 방법

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160266751A1 (en) * 2015-03-09 2016-09-15 Lenovo (Singapore) Pte. Ltd. Virtualized Extended Desktop Workspaces
CN111176520B (zh) * 2019-11-13 2021-07-16 联想(北京)有限公司 一种调整方法及装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3880561B2 (ja) * 2002-09-05 2007-02-14 株式会社ソニー・コンピュータエンタテインメント 表示システム
WO2005065180A2 (en) * 2003-12-19 2005-07-21 Speechgear, Inc. Display of visual data as a function of position of display device
US20150378393A1 (en) * 2013-02-10 2015-12-31 Menachem Erad Mobile device with multiple interconnected display units
KR20160035288A (ko) * 2014-09-23 2016-03-31 삼성전자주식회사 복수의 디스플레이 장치로 구성된 디스플레이 시스템을 구성하는 디스플레이 장치, 그의 컨텐츠 표시 방법, 그 방법을 수행하기 위한 프로그램이 저장되는 기록매체 및 복수의 디스플레이 장치로 구성된 디스플레이 시스템
KR20160054249A (ko) * 2014-11-06 2016-05-16 삼성전자주식회사 멀티 디스플레이 시스템 및 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170027271A (ko) * 2015-09-01 2017-03-09 한국전자통신연구원 다중 디스플레이 시스템에서의 스크린 위치 센싱 방법 및 컨텐츠 구성 방법 및 스크린 위치 센싱을 위한 워터마크 영상 생성 방법 및 서버 및 디스플레이 단말
KR20190083423A (ko) * 2018-01-04 2019-07-12 주식회사 팬스컴스 가상공간 내 복수의 디스플레이 배치방법
KR20190083422A (ko) * 2018-01-04 2019-07-12 주식회사 팬스컴스 가상공간 내 복수의 디스플레이 화면 매핑 방법

Also Published As

Publication number Publication date
US20160202945A1 (en) 2016-07-14

Similar Documents

Publication Publication Date Title
CN112205005B (zh) 使声学渲染适应基于图像的对象
KR102142643B1 (ko) 3차원 텔레프레즌스 시스템
KR20160087703A (ko) 다중 디스플레이 장치의 공간정보를 이용한 다중 디스플레이 제어장치 및 그 방법
US20170359571A1 (en) Method, apparatus, and device for realizing virtual stereoscopic scene
US20180033210A1 (en) Interactive display system with screen cut-to-shape of displayed object for realistic visualization and user interaction
US9118903B2 (en) Device and method for 2D to 3D conversion
CN102231726A (zh) 虚拟现实合成方法及终端
CN112672131B (zh) 一种全景视频图像显示方法及显示设备
Zhai et al. Multiuser collaborative viewport via temporal psychovisual modulation [applications corner]
KR20140010823A (ko) 영상 데이터 스케일링 방법 및 영상 디스플레이 장치
KR20110107691A (ko) 공간 증강 현실 기반 인터랙티브 디스플레이 방법
CN110505465B (zh) 数据传输方法、三维图像显示方法、装置及电子设备
KR102295432B1 (ko) 미디어 아트 제공 시스템
KR101609368B1 (ko) 실시간 3ｄ 영상 다중 화면 동기화 시스템
KR101443327B1 (ko) 실시간 렌더링 3d 오브젝트 인터렉티브 멀티비전 시스템 및 그의 실시간 렌더링 3d 오브젝트 처리방법
JP6679966B2 (ja) 三次元仮想空間提示システム、三次元仮想空間提示方法及びプログラム
CN109427095B (zh) 一种显示混合现实场景的方法及系统
CN113192445B (zh) 一种多媒体展示系统
CN111599011B (zh) 基于WebGL技术的电力系统场景快速构建方法及系统
US20200359007A1 (en) Information processing apparatus and information processing method
KR101690218B1 (ko) 인터랙티브 다 시점 영상 컨텐츠 제공 시스템
CN111344744A (zh) 用于展示三维物体的方法以及相关计算机程序产品、数字存储介质和计算机系统
CN216957281U (zh) 一种沙盘智能交互系统
US20170221504A1 (en) Photorealistic CGI Generated Character
US20230239446A1 (en) Remote attendance and participation systems and methods

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application