KR101997743B1 - 인비저블 효과를 구현하기 위한 장치 및 방법 - Google Patents

인비저블 효과를 구현하기 위한 장치 및 방법 Download PDF

Info

Publication number
KR101997743B1
KR101997743B1 KR1020180058979A KR20180058979A KR101997743B1 KR 101997743 B1 KR101997743 B1 KR 101997743B1 KR 1020180058979 A KR1020180058979 A KR 1020180058979A KR 20180058979 A KR20180058979 A KR 20180058979A KR 101997743 B1 KR101997743 B1 KR 101997743B1
Authority
KR
South Korea
Prior art keywords
image information
observation
image
processor
depth
Prior art date
Application number
KR1020180058979A
Other languages
English (en)
Inventor
유인두
송군
Original Assignee
주식회사 스마티웍스
유인두
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 스마티웍스, 유인두 filed Critical 주식회사 스마티웍스
Priority to KR1020180058979A priority Critical patent/KR101997743B1/ko
Application granted granted Critical
Publication of KR101997743B1 publication Critical patent/KR101997743B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/001—Image restoration
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds

Abstract

본 개시는 인비저블 효과를 구현하기 위한 방법에 관한 것이다. 본 개시에 따른 인비저블 효과의 구현 방법은 구조물의 일 면에 배치된 영상 촬영부를 이용하여 구조물에 의해 차폐되는 배경의 영상 정보를 획득하는 단계, 획득된 영상 정보를 처리하는 단계, 및 처리된 영상 정보를 상기 구조물의 관측 면에 배치된 표시부에 표시하는 단계를 포함하고, 관측 면은 구조물과 이격된 관측 점에서 보여지는 구조물의 표면이고, 획득된 영상 정보를 처리하는 단계는, 획득된 영상 정보를 관측 면의 깊이 정보를 기초로 스케일링하는 단계를 포함한다.

Description

인비저블 효과를 구현하기 위한 장치 및 방법{APPARATUS AND METHOD FOR IMPLEMENTING AN INVISIBLE EFFECT}
인비저블 효과를 구현하기 위한 장치 및 방법{APPARATUS AND METHOD FOR IMPLEMENTING AN INVISIBLE EFFECT}
건물과 같은 구조물의 일면에 카메라를 설치하여, 특정 관측 점에서 구조물에 의해 차폐되는 배경을 카메라를 통해 촬영하고, 이를 구조물의 타측 면에 구비된 디스플레이 장치에 표시함으로써 인비저블 효과(invisible effect)가 구현될 수 있다.
도 1은 종래 기술에 따른 인비저블 효과의 구현 예 및 종래 기술이 내포하는 문제점을 도시한다. 도 1을 참조하면, 구조물(1000)의 관측 면(1000b)은 편평하지 않은 복수의 표면들(a11 내지 a20)을 포함하고, 상기 복수의 표면들(a11 내지 a20) 상에 배치된 복수의 LED들을 통해 인비저블 효과가 구현되고 있다.
이때, 관측 면(1000b)의 LED들을 통해 구현되는 인비저블 효과는, 관측 면(1000b)이 깊이가 다른 복수의 면들로 구성되는 것에 따라 왜곡될 수 있다. 예를 들어, 관측 면(1000b)에서 상대적으로 높게 돌출된 부분(예를 들어, 표면(a14)과 표면(a15)이 만나는 부분)에서 표현되는 이미지는 확대되어 보여질 수 있고, 또는 관측 면(1000b)에서 상대적으로 낮게 함입된 부분(예를 들어, 표면(a12)과 표면(a14)이 만나는 부분)에서 표현되는 이미지는 축소되어 보여질 수 있다. 이는, 인비저블 효과를 감소시킨다.
따라서, 편평하지 않은 표면을 갖는 관측 면(1000b)에서 인비저블 효과를 효율적으로 구현하기 위한 장치 및 방법이 요구된다.
본 개시의 일 목적은, 편평하지 않은 구조물의 표면에서 인비져블 효과를 구현하기 위한 장치 및 방법을 제공하는 것이다.
본 개시의 일 실시 예에 따른 인비저블 효과를 구현하는 방법은, 구조물(structure)의 일 면에 배치된 영상 촬영부를 이용하여 상기 구조물에 의해 차폐되는(screened) 배경의 영상 정보를 획득하는 단계; 상기 획득된 영상 정보를 처리하는 단계; 및 상기 처리된 영상 정보를 상기 구조물의 관측 면에 배치된 표시부에 표시하는 단계를 포함하고, 상기 관측 면은 상기 구조물과 이격된 관측 점에서 보여지는 상기 구조물의 표면이고, 상기 획득된 영상 정보를 처리하는 단계는, 상기 획득된 영상 정보를 상기 관측 면의 깊이(depth) 정보를 기초로 스케일링(scaling)하는 단계를 포함한다.
본 개시의 일 실시 예에 따른 인비저블 효과를 구현하기 위한 장치는, 구조물의 일 면에 배치되며 관측 점을 기준으로 상기 구조물에 의해 차폐되는(screened) 배경의 영상 정보를 획득하기 위한 제1 영상 촬영부; 상기 제1 영상 촬영부와 통신 가능하게 연결되며, 상기 획득된 영상 정보를 처리하기 위한 프로세서; 상기 프로세서와 통신 가능하게 연결되되 상기 구조물의 관측 면에 배치되며, 상기 처리된 영상 정보를 표시하기 위한 표시부를 포함하고, 상기 관측 면은 상기 구조물과 이격된 상기 관측 점에서 보여지는 상기 구조물의 표면이고, 상기 프로세서는, 상기 획득된 영상 정보를 상기 관측 면의 깊이(depth) 정보를 기초로 스케일링(scaling)하여 상기 획득된 영상 정보를 처리한다.
본 개시에 따른 인비저블 효과를 구현하기 위한 장치 및 방법은 관측 면의 깊이 정보(depth information)를 기초로 획득된 영상 정보의 일부 영역을 확대 및/또는 축소 처리하여 나타냄으로써, 관측 면이 평면이 아닌 경우에도 왜곡(distortion) 없이 인비저블 효과가 구현될 수 있다.
첨부 도면들은 본 개시의 추가적인 이해를 제공하기 위해 포함되며 본 명세서에 통합되어 본 명세서의 일부를 구성한다. 도면들은 본 개시의 실시 예들을 도시하고, 설명과 함께 본 개시의 원리를 설명하는 역할을 한다.
도 1은 종래 기술에 따른 인비저블 효과의 구현 예의 문제점을 도시한다.
도 2는 본 개시의 일 실시 예에 따른 인비저블 효과를 구현하기 위한 시스템을 나타낸다.
도 3은 본 개시의 일 실시 예에 따른 인비저블 효과를 구현하기 위한 장치를 나타낸다.
도 4는 본 개시의 일 실시 예에 따른 인비저블 효과를 구현하기 위한 방법의 흐름도이다.
도 5는 본 개시의 일 실시 예에 따른 관측 면의 일부 영역에 대한 프로세서의 영상 처리 방법을 개략적으로 나타낸다.
도 6은 본 개시의 일 실시 예에 따른 프로세서의 영상 처리 방법을 나타내는 흐름도이다.
도 7은 본 개시의 다른 실시 예에 따른 인비저블 효과를 구현하기 위한 시스템을 나타낸다.
도 8은 도 7의 실시 예에 따른 시스템의 첫 번째 동작 방법을 나타내는 흐름도이다.
도 9는 도 7의 실시 예에 따른 시스템의 두 번째 동작 방법을 나타내는 흐름도이다.
이하의 설명에서, 다양한 실시 예들이 설명 될 것이다. 설명의 목적 상, 실시 예들에 대한 완전한 이해를 제공하기 위해 특정 구성들 및 세부 사항이 설명된다. 그러나, 실시 예가 특정 세부 사항 없이 실시될 수 있음은 또한 당업자에게 명백할 것이다. 또한, 설명된 실시 예를 모호하게 하지 않기 위해 잘 알려진 특징은 생략되거나 단순화 될 수 있다.
본 개시의 일 실시 예에 따른 인비저블 효과(invisible effect)를 구현하는 방법은 구조물(structure)의 일 면에 배치된 영상 촬영부를 이용하여 상기 구조물에 의해 차폐되는(screened) 배경의 영상 정보를 획득하는 단계, 상기 획득된 영상 정보를 처리하는 단계, 및 상기 처리된 영상 정보를 상기 구조물의 관측 면에 배치된 표시부에 표시하는 단계를 포함하고, 상기 관측 면은 상기 구조물과 이격된 관측 점에서 보여지는 상기 구조물의 표면이고, 상기 획득된 영상 정보를 처리하는 단계는, 상기 획득된 영상 정보를 상기 관측 면의 깊이(depth) 정보를 기초로 스케일링(scaling)하는 단계를 포함할 수 있다.
여기서, 상기 스케일링하는 단계는, 기준 깊이를 기준으로 상기 관측 면의 깊이가 음의 값을 갖는 영역에 대해 상기 획득된 영상 정보를 확대하는 단계를 포함할 수 있다. 한편, 상기 음의 값의 크기가 클수록 상기 배경의 영상 정보의 확대 정도가 커질 수 있다.
또는, 상기 스케일링하는 단계는, 기준 깊이를 기준으로 상기 관측 면의 깊이가 양의 값을 갖는 영역에 대해 상기 획득된 영상 정보를 축소하는 단계를 포함할 수 있다. 한편, 상기 양의 값이 크기가 클수록 상기 획득된 영상 정보의 축소 정도가 커질 수 있다.
한편, 본 개시에 따른 방법은 관측 점에 배치된 영상 촬영부를 이용하여 상기 구조물의 관측 면 및 상기 관측 면 주위 배경에 대한 영상 정보를 획득하는 단계를 더 포함할 수 있다.
여기서, 본 개시에 따른 방법은 상기 획득된 관측 면에 대한 영상 정보 및 상기 관측 면 주위 배경의 영상 정보의 색상 및 밝기를 비교하여, 표시부에 표시되는 영상 정보의 색상 및 밝기를 보정하는 단계를 더 포함할 수 있다.
한편, 본 개시에 따른 방법은 관측 점에 배치된 영상 촬영부를 이용하여 상기 관측 점 주위의 영상 정보를 획득하는 단계, 및 상기 획득된 관측 점 주위의 영상 정보를 상기 관측 면의 일부 영역에 표시하는 단계를 더 포함할 수 있다.
관측 점 주위의 영상 정보는 실시간으로 획득되고, 상기 관측 점 주위의 영상 정보는 상기 관측 면의 일부 영역에서 실시간으로 표시될 수 있다.
이때, 표시부는 상기 관측 면에 분포된 복수의 LED들을 포함하고, 상기 처리된 영상 정보는 상기 복수의 LED들의 온-오프 제어를 통해 표시될 수 있다.
한편, 배경의 영상 정보는 상기 영상 촬영부를 통해 실시간으로 획득되고, 상기 처리된 영상 정보는 상기 표시부를 통해 실시간으로 표시될 수 있다.
한편, 구조물의 일 면과 상기 구조물의 관측 면은 대향할 수 있다.
본 개시의 다른 실시 예에 따른 인비저블(invisible) 효과를 구현하기 위한 장치는, 구조물(structure)의 일 면에 배치되며 관측 점을 기준으로 상기 구조물에 의해 차폐되는(screened) 배경의 영상 정보를 획득하기 위한 제1 영상 촬영부, 상기 제1 영상 촬영부와 통신 가능하게 연결되며, 상기 획득된 영상 정보를 처리하기 위한 프로세서, 및 상기 프로세서와 통신 가능하게 연결되되 상기 구조물의 관측 면에 배치되며, 상기 처리된 영상 정보를 표시하기 위한 표시부를 포함하고, 상기 관측 면은 상기 구조물과 이격된 상기 관측 점에서 보여지는 상기 구조물의 표면이고, 상기 프로세서는, 상기 획득된 영상 정보를 상기 관측 면의 깊이(depth) 정보를 기초로 스케일링(scaling)하여 상기 획득된 영상 정보를 처리할 수 있다.
프로세서는 기준 깊이를 기준으로 상기 관측 면의 깊이가 음의 값을 갖는 영역에 대해 상기 영상 정보를 확대할 수 있다. 또는, 프로세서는 기준 깊이를 기준으로 상기 관측 면의 깊이가 양의 값을 갖는 영역에 대해 상기 영상 정보를 축소할 수 있다.
한편, 본 개시에 따른 장치는, 상기 프로세서와 통신 가능하게 연결되며 상기 관측 점에 배치된 제2 영상 촬영부를 더 포함할 수 있다. 프로세서는 상기 제2 영상 촬영부를 통해 상기 구조물의 관측 면 및 상기 관측 면 주위 배경에 대한 영상 정보를 획득할 수 있다.
프로세서는 상기 획득된 관측 면에 대한 영상 정보 및 상기 관측 면 주위의 영상 정보의 색상 및 밝기를 비교하여, 상기 표시부에 표시되는 영상 정보의 색상 및 밝기를 보정할 수 있다.
또는, 프로세서는 상기 제2 영상 촬영부를 통해 상기 관측 점 주위의 영상 정보를 획득하고, 상기 표시부를 통해 상기 관측 점 주위의 영상 정보를 상기 관측 면 일부 영역에 표시할 수 있다.
한편, 표시부는 상기 관측 면에 분포된 복수의 LED들을 포함하고, 상기 처리된 영상 정보는 상기 복수의 LED들의 온-오프 제어를 통해 표시될 수 있다.
이하 첨부된 도면을 참조하여 설명한다.
도 2는 본 개시의 일 실시 예에 따른 인비저블 효과(invisible effect)를 구현하기 위한 시스템을 나타낸다. 도 3은 본 개시의 일 실시 예에 따른 인비저블 효과를 구현하기 위한 장치를 나타낸다. 도 4는 본 개시의 일 실시 예에 따른 인비저블 효과를 구현하기 위한 방법의 흐름도이다.
도 2 내지 도 4를 참조하면, 본 개시의 일 실시 예에 따르면, 인비저블 효과는 도 2에 도시된 바와 같은 구조물(1000)에서 구현될 수 있다. 여기서, 구조물(structure)의 예는 특별히 제한되지 않으며, 건물, 조형물, 탑 등 인비저블 효과를 구현할 수 있는 표면(surface)을 갖는 모든 목적물을 포함할 수 있다.
이를 위해, 구조물(1000)의 일 면(1000a)에는 적어도 하나 이상의 영상 촬영부(100)가 배치될 수 있다. 영상 촬영부(100)는 관측 점(View Popin, VP)에서 상기 구조물(1000)을 바라봤을 때, 상기 구조물(1000)에 의해 차폐되는(screened) 배경의 영상을 촬영할 수 있는 임의의 장치를 포함할 수 있다. 예를 들어, 영상 촬영부(100)는 카메라, 캠코더 등을 포함할 수 있다. 영상 촬영부(100)는 실시간으로 구조물(1000)에 의해 차폐되는 배경의 영상을 촬영할 수 있다(S410). 또는, 영상 촬영부(100)는 일정 시간 간격으로 구조물(1000)에 의해 차폐되는 배경의 영상을 촬영할 수 있다.
프로세서(200)는 영상 촬영부(100)가 촬영 또는 획득한 영상 정보를 처리할 수 있다(S420). 이를 위해, 프로세서(200)는 유선 및/또는 무선 통신 방법을 통해 영상 촬영부(100)와 통신 가능하게 연결될 수 있으며, 획득된 영상 정보를 영상 촬영부(100)로부터 수신할 수 있다.
추후 상세히 설명되는 것처럼, 프로세서(100)는 획득된 영상 정보를 관측 면(1000b)의 깊이 정보(depth information)를 기초로 스케일링(scaling)할 수 있다. 획득된 영상 정보의 스케일링을 통해, 관측 면(1000b)의 표면이 편평(flat)하지 않은 경우에도 인비저블 효과가 왜곡 없이 구현될 수 있다.
본 실시 예에서, 프로세서의 위치는 특별히 제한되지 않는다. 예를 들어, 프로세서는 구조물 내부 또는 외부에 배치될 수 있다.
구조물(1000)의 관측 면(1000b)에는 표시부(300)가 배치될 수 있다. 여기서, 구조물(1000)의 관측 면(1000b)은 구조물(1000)과 이격된 관측 점(VP)에서 구조물을 바라봤을 때 보여지는 구조물(1000)의 표면을 의미한다. 구조물(1000)의 관측 면(1000b)은 일반적으로 영상 촬영부(100)가 배치된 상기 구조물(1000)의 일면(1000a)과 대향할 수 있다.
표시부(300)는 복수의 LED들(300-1 내지 300-n)을 포함할 수 있다. 복수의 LED들(300-1 내지 300-n)이 임의의 간격으로 서로 이격되어 관측 면(1000b) 상에 배치될 수 있으며, 복수의 LED들(300-1 내지 300-n)의 온(on)-오프(off) 제어를 통해 표시부가 구동될 수 있다. 본 실시 예에서, 복수의 LED들의 배치 간격은 특별히 제한되지 않으며, 구조물(1000)의 크기, 관측 점(VP)과 구조물(1000) 사이의 거리 등에 따라 다양하게 변경될 수 있다.
표시부(300)는 상기 프로세서(200)와 유선 및/또는 무선 통신 방법을 통해 통신 가능하게 연결될 수 있다. 표시부(300)는 프로세서(300)로부터 처리된 영상 정보를 수신하여 이를 표시할 수 있다(S430). 이때, 프로세서(200)로부터 수신된 영상 정보는 관측 면(1000b)의 깊이 정보를 기초로 스케일링 처리된 것이다. 따라서, 관측 점(VP)에서 상기 구조물(1000)의 관측 면(1000b)을 바라 봤을 때, 왜곡 없이 인비저블 효과가 관측될 수 있다.
도 5는 본 개시의 일 실시 예에 따른 관측 면의 일부 영역에 대한 프로세서의 영상 처리 방법을 개략적으로 나타낸다. 예를 들어, 도 5는 프로세서(200) 및 표시부(300)에 의해 도 4의 단계(420) 및 단계(430)을 구현하는 방법의 구체적인 예를 도시한다.
본 실시 예에 따른 관측 면(1000b)은 편평하지 않은 복수의 표면들(a12, a13, a14, a15)로 구성될 수 있다. 복수의 표면들(a12, a13, a14, a15)은 임으로 설정된 기준 깊이(reference depth, RD)를 기준으로 그 깊이가 양의 값을 갖는 영역 또는 음의 값을 갖는 영역에 해당할 수 있다.
예를 들어, 도 5를 참조하면, 기준 깊이(RD)를 관측 면(1000b)에서 가장 높은 부분으로 정한 경우, 표면들(a12, a13, a14, a15)의 깊이가 음의 값을 갖는 영역에 해당할 수 있다. 구체적으로, 표면들(a14, a15)은 중심에서 멀어질수록 음의 값의 크기가 증가하며(즉, 깊이가 증가), 표면들(a12, a13)은 음의 값의 크기가 작아질 수 있다(즉, 깊이가 감소). 다만, 도 5에 도시된 관측 면의 형태는 단순한 예시이다. 따라서, 본 개시는 이에 제한되지 않으며, 굴곡을 포함하는 모든 형태의 관측 면을 포함할 수 있다. 또한, 기준 깊이(RD)를 달리 정하는 경우, 표면들(a12, a13, a14, a15)의 깊이 정보 또한 달라 질 수 있음은 자명하다.
도 5에서와 같이 관측 면(1000b)의 깊이가 음의 값을 갖는 영역에 대해서는, 프로세서(200)는 해당 영역에 표시될 영상에 대해 확대 스케일링 처리 할 수 있다. 이때, 영상의 확대 스케일링 정도는 깊이에 비례할 수 있다. 예를 들어, 표면들(a14, a15)에서는 중심에서 멀어질수록 확대 정도가 점점 증가할 수 있고, 반면 표면들(a12, a13)에서는 중심에서 멀어질수록 확대 정도가 점점 감소할 수 있다.
도 5의 좌측 그림은 스케일링 처리하지 않고, 영상 촬영부(100)에서 촬영된 영상 정보를 표시부(300)에 그대로 디스플레이 한 것을 나타낸다. 반면, 도 5의 우측 그림은 본 실시 예에 따라, 영상 촬영부(100)에서 촬영된 영상 정보를 프로세서(200)에서 스케일링 처리한 후, 표시부(300)에 디스플레이 한 것을 나타낸다.
도 5의 좌측 그림을 참조하면, 영상 촬영부(100)가 촬영한 배경, 예를 들어 비행기의 일부 이미지가 표시부(300)에서 왜곡되어 디스플레이 되는 것을 확인할 수 있다. 앞서 언급된 것처럼, 촬영된 배경 이미지는 표시부(300)에서 복수의 LED들(300-1 내지 300-n)의 온-오프 제어를 통해 디스플레이 될 수 있다.
구체적으로, 표면들(a12, a13, a14, a15)이 기준 깊이(RD) 대비 음의 값을 갖는 영역에 해당함에 따라, 비행기의 이미지가 관측 면(1000b)의 깊이가 깊어지는 것에 따라 표시부(300)에서 축소되어 표시되는 것을 확인할 수 있다.
이와 달리, 스케일링 처리된 도 5의 우측 그림에서는 표시부(300)에 디스플레이 되는 비행기 이미지가 왜곡되지 않는 것을 알 수 있다. 즉, 도 5의 우측 그림에서 점선으로 표시된 비행기 이미지는 스케링일 처리되지 않은 상태를 나타내고, 실선으로 표시된 비행기 이미지는 관측 면(1000b)의 깊이 정보를 기초로 확대 스케일링 처리된 상태를 나타낸다. 관측 면(1000b)에서, 깊이가 가장 깊은 영역에 해당하는, 표면들(a12와 a14 또는 a13와 a15)이 만나는 영역에서 비행기 이미지가 가장 많이 확대 스케일링된 것을 확인할 수 있다.
도 6은 본 개시의 일 실시 예에 따른 프로세서의 영상 처리 방법을 나타내는 흐름도이다. 구체적으로, 도 6은 프로세서(200)의 동작 방법에 관한 것으로, 도 4의 단계(420)를 세분화하여 표현한 것이다.
도 6을 참조하면, 프로세서(200)는 관측 면(1000b)의 기준 깊이(RD)를 설정할 수 있다(S421). 관측 면(1000b)의 기준 깊이(RD)는, 관측 면(1000b)의 각각의 영역들이 기준 깊이(RD)보다 높은지 또는 낮은지를 결정하기 위해 활용될 수 있다. 관측 면(1000b)의 기준 깊이(RD)는 예를 들어, 관측 면(1000b)에서 가장 높은 부분이 될 수 있다. 또 다른 예로, 관측 면(1000b)의 기준 깊이(RD)는, 관측 면(1000b)에서 가장 넓은 영역의 깊이에 해당할 수 있다. 다만, 관측 면의 기준 깊이(RD)는 특별히 제한되는 것은 아니며, 본 발명을 포함하는 모든 범위 내에서 변경될 수 있다. 또한, 관측 면(1000b)의 기준 깊이(RD)가 미리 정의된 경우에는 단계(S421)가 생략될 수 있다.
프로세서(200)는 관측 면(1000b)이 기준 깊이(RD)와 다른 표면(또는 영역)을 갖는지 여부를 확인할 수 있다. 관측 면(1000b)의 모든 표면이 기준 깊이(RD)와 동일한 깊이를 갖는 경우, 프로세서(200)는 스케일링 처리 동작을 종료할 수 있다. 이는, 관측 면(1000b)이 편평한 경우로써, 프로세서(200)에 의한 별도의 스케일링 동작이 요구되지 않기 때문이다.
반대로, 관측 면(1000b)이 기준 깊이(RD)와 상이한 표면을 갖는 경우, 프로세서(200)는 해당 표면이 기준 깊이(RD)보다 높은지 또는 낮은지 여부를 확인할 수 있다.
프로세서(200)는 관측 면(1000b)의 표면이 기준 깊이(RD)보다 높은 경우, 음의 값 스케일링 처리할 수 있다. 즉, 프로세서(200)는 기준 깊이(RD) 보다 높은 관측 면(1000b)의 영역이 존재하는 경우, 해당 영역에 표시될 영상 부분을 축소 스케일링할 수 있다. 이때, 기준 깊이(RD)보다 깊이가 높아질수록 축소 범위가 커질 수 있다.
반대로, 프로세서(200)는 관측 면(1000b)의 표면이 기준 깊이(RD)보다 낮은 경우, 양의 값 스케일링 처리할 수 있다. 즉, 프로세서(200)는 기준 깊이(RD)보다 낮은 관측 면(1000b)의 영역이 존재하는 경우, 해당 영역에 표시될 영상 부분을 확대 스케일링 처리할 수 있다. 이때, 기준 깊이(RD)보다 깊이가 낮아질수록 확대 범위가 커질 수 있다.
이와 같은, 프로세서(200)의 스케일링 처리 동작에 따라, 표시부(300)에 표시되는 영상 이미지가 왜곡되지 않을 수 있다.
도 7은 본 개시의 다른 실시 예에 따른 인비저블 효과를 구현하기 위한 시스템을 나타낸다. 도 8은 도 7의 실시 예에 따른 시스템의 첫 번째 동작 방법을 나타내는 흐름도이고, 도 9는 도 7의 실시 예에 따른 시스템의 두 번째 동작 방법을 나타내는 흐름도이다. 본 실시 예에 따른 시스템은 도 2의 시스템의 구성과 대부분 동일하며, 다만 관측 점(view point, VP)에 배치된 영상 촬영부를 더 포함하는 점에서 차이를 갖는다. 이하 동일한 구성에 대한 상세한 설명은 생략하며, 차이점을 중심으로 기술한다.
관측 점(VP)에 배치된 영상 촬영부(100')는 유선 및/또는 무선 통신 방법을 통해 프로세서(200) 및/또는 표시부(300)와 통신 가능하게 연결될 수 있다. 여기서, 구분의 용이성을 위해, 구조물(1000)의 일 면에 배치된 영상 촬영부(100)를 제1 영상 촬영부로 지칭하고, 관측 점(VP)에 배치된 영상 촬영부(100')를 제2 영상 촬영부로 지칭한다.
제2 영상 촬영부(100')는 아래와 같이 두 가지 관점에서, 유용하게 활용될 수 있다.
먼저, 제2 영상 촬영부(100')는 표시부(300)에서 디스플레이되는 영상을 보정하는데 필요한 정보를 프로세서에 제공할 수 있다.
도 7 및 도 8을 참조하면, 제2 영상 촬영부(100')는 구조물(1000)의 관측 면(1000b) 및 관측 면(1000b) 주위의 배경을 촬영하여 관측 면(1000b) 및 상기 주위 배경에 대한 영상 정보를 획득할 수 있다(S740)(단계들 710 내지 730은 도 4의 단계들 410 내지 430과 동일하므로 상세한 설명은 생략). 이때, 관측 면(1000b)에는 단계들(710 내지 730)의 진행에 따라 도 5에 도시된 것과 같은 인비저블 효과가 구현되어 있는 상태이다. 제2 영상 촬영부(100')에서 획득된 영상 정보는 처리(processing)를 위해 유선 및/또는 무선 통신 방법을 통해 프로세서(200)로 전달될 수 있다.
프로세서(200)는 제2 영상 촬영부(100')로부터 수신된 영상 정보를 분석하여 처리할 수 있다. 즉, 프로세서(200)는 영상의 색상 및 밝기 보정을 수행할 수 있다(S750). 예를 들어, 표시부(300)의 LED들을 통해 표시되는 영상과 관측 면 주의의 배경은 밝기, 색감, 선명도 등에서 차이가 존재할 수 있다. 예를 들어, 도 5에서 관측 면(1000b)에서 복수의 LED들을 통해 표현되는 비행기 이미지와 관측 면(1000b) 주위 배경의 비행기 이미지가 밝기, 색상에 있어서 차이가 존재할 수 있다.
프로세서(200)는 제2 영상 촬영부(100')에서 획득된 관측 면(1000b)에 대한 영상의 밝기, 색감과 관측 면(1000b) 주위 배경에 대한 영상의 밝기, 색감을 비교하여 표시부(300)의 LED들의 RGB제어 및/또는 밝기 제어를 수행할 수 있다.
이에 따라, 관측 점(VP)에서 보여지는 구조물(1000)의 관측 면(1000b)에서 표현되는 영상 이미지와 구조물(1000) 주위의 배경이 보다 나은 조화를 이룰 수 있다.
다음으로, 제2 영상 촬영부(100')는 표시부(300)에서 디스플레이되는 인비저블 효과에 부가될 수 있는 추가적인 영상을 제공할 수 있다.
도 7 및 도 9를 참조하면, 제2 영상 촬영부(100')는 관측 점(VP) 주위를 촬영하여 관측 점(VP) 주위의 영상 정보를 획득할 수 있다(S940). 예를 들어, 제2 영상 촬영부(100')는 관측 점(VP) 주위에 위치하는 특정 인물, 특정 물체, 특정 상황을 촬영하여 영상 정보를 획득할 수 있다(S840)(단계들 910 내지 930은 도 4의 단계들 410 내지 430과 동일하므로 상세한 설명은 생략). 이때, 구조물(1000)의 관측 면(1000b)에는 단계들(S910 내지 S930)의 진행에 따라 인비저블 효과가 구현되어 있는 상태이다. 제2 영상 촬영부(100')에서 획득된 영상 정보는 유선 및/또는 무선 통신 방법을 통해 프로서세(200) 및/또는 표시부(300)에 전송될 수 있다.
프로세서(200)는 표시부(300)를 통해 구현되는 인비저블 효과에 제2 영상 촬영부(100')로부터 수신된 관측 점(VP) 주위 영상 정보를 부가할 수 있다. 예를 들어, 표시부(300)를 통해 하늘 배경의 인비저블 효과가 구현되고 있는 상태에서, 관측 점(VP) 주위의 특정 이벤트 영상이 부가되어 표시부(300)에 디스플레이 될 수 있다(S950).
본 개시의 범위 또는 사상을 벗어나지 않으면서, 당업자에게 본 개시의 구조 및 구성에 대한 다양한 수정 및 변형이 이루어질 수 있음이 명백할 것이다.

Claims (20)

  1. 인비저블 효과(invisible effect)를 구현하는 방법에 있어서,
    구조물(structure)의 일 면에 배치된 영상 촬영부를 이용하여 상기 구조물에 의해 차폐되는(screened) 배경의 영상 정보를 획득하는 단계;
    상기 획득된 영상 정보를 처리하는 단계로서, 상기 획득된 영상 정보를 관측 면의 깊이(depth) 정보를 기초로 스케일링(scaling)하는 단계를 포함하는, 상기 획득된 영상 정보를 처리하는 단계;
    상기 구조물의 관측 면에 배치된 표시부에 상기 처리된 영상 정보를 표시하는 단계로서, 관측 면은 상기 구조물과 이격된 관측 점에서 보여지는 상기 구조물의 표면인, 상기 처리된 영상 정보를 표시부에 표시하는 단계;
    상기 관측 점에 배치된 영상 촬영부를 이용하여 상기 구조물의 관측 면 및 관측 면 주위 배경에 대한 영상 정보를 획득하는 단계; 및
    상기 획득된 관측 면에 대한 영상 정보 및 관측 면 주위 배경의 영상 정보의 색상 및 밝기를 비교하여, 상기 표시부에 표시되는 영상 정보의 색상 및 밝기를 보정하는 단계를 포함하는, 방법.
  2. 청구항 1에 있어서, 상기 스케일링하는 단계는, 기준 깊이를 기준으로 상기 관측 면의 깊이가 음의 값을 갖는 영역에 대해 상기 획득된 영상 정보를 확대하는 단계를 포함하는, 방법.
  3. 청구항 2에 있어서, 상기 음의 값의 크기가 클수록 상기 배경의 영상 정보의 확대 정도가 커지는, 방법.
  4. 청구항 1에 있어서, 상기 스케일링하는 단계는, 기준 깊이를 기준으로 상기 관측 면의 깊이가 양의 값을 갖는 영역에 대해 상기 획득된 영상 정보를 축소하는 단계를 포함하는, 방법.
  5. 청구항 4에 있어서, 상기 양의 값이 크기가 클수록 상기 획득된 영상 정보의 축소 정도가 커지는, 방법.
  6. 삭제
  7. 삭제
  8. 인비저블 효과(invisible effect)를 구현하는 방법에 있어서,
    구조물(structure)의 일 면에 배치된 영상 촬영부를 이용하여 상기 구조물에 의해 차폐되는(screened) 배경의 영상 정보를 획득하는 단계;
    상기 획득된 영상 정보를 처리하는 단계로서, 상기 획득된 영상 정보를 관측 면의 깊이(depth) 정보를 기초로 스케일링(scaling)하는 단계를 포함하는, 상기 획득된 영상 정보를 처리하는 단계;
    상기 구조물의 관측 면에 배치된 표시부에 상기 처리된 영상 정보를 표시하는 단계로서, 관측 면은 상기 구조물과 이격된 관측 점에서 보여지는 상기 구조물의 표면인, 상기 처리된 영상 정보를 표시부에 표시하는 단계;
    상기 관측 점에 배치된 영상 촬영부를 이용하여 상기 관측 점 주위의 영상 정보를 획득하는 단계; 및
    상기 획득된 관측 점 주위의 영상 정보를 관측 면의 일부 영역에 표시하는 단계를 포함하는, 방법.
  9. 청구항 8에 있어서, 상기 관측 점 주위의 영상 정보는 실시간으로 획득되고, 상기 관측 점 주위의 영상 정보는 상기 관측 면의 일부 영역에서 실시간으로 표시되는, 방법.
  10. 청구항 1에 있어서, 상기 표시부는 상기 관측 면에 분포된 복수의 LED들을 포함하고, 상기 처리된 영상 정보는 상기 복수의 LED들의 온-오프 제어를 통해 표시되는, 방법.
  11. 청구항 1에 있어서, 상기 배경의 영상 정보는 상기 영상 촬영부를 통해 실시간으로 획득되고, 상기 처리된 영상 정보는 상기 표시부를 통해 실시간으로 표시되는, 방법.
  12. 청구항 1에 있어서, 상기 구조물의 일 면과 상기 구조물의 관측 면은 대향하는, 방법.
  13. 인비저블(invisible) 효과를 구현하기 위한 장치에 있어서,
    구조물(structure)의 일 면에 배치되며 관측 점을 기준으로 상기 구조물에 의해 차폐되는(screened) 배경의 영상 정보를 획득하기 위한 제1 영상 촬영부;
    상기 제1 영상 촬영부와 통신 가능하게 연결되며, 상기 획득된 영상 정보를 처리하기 위한 프로세서로서, 상기 획득된 영상 정보를 관측 면의 깊이(depth) 정보를 기초로 스케일링(scaling)하여 상기 획득된 영상 정보를 처리하는, 상기 프로세서;
    상기 프로세서와 통신 가능하게 연결되되 상기 구조물의 관측 면에 배치되며, 상기 처리된 영상 정보를 표시하기 위한 표시부로서, 관측 면은 상기 구조물과 이격된 상기 관측 점에서 보여지는 상기 구조물의 표면인, 상기 표시부; 및
    상기 프로세서와 통신 가능하게 연결되며 상기 관측 점에 배치된 제2 영상 촬영부를 포함하고,
    상기 프로세서는 상기 제2 영상 촬영부를 통해 상기 구조물의 관측 면 및 관측 면 주위 배경에 대한 영상 정보를 획득하고, 상기 획득된 관측 면에 대한 영상 정보 및 관측 면 주위의 영상 정보의 색상 및 밝기를 비교하여, 상기 표시부에 표시되는 영상 정보의 색상 및 밝기를 보정하는, 장치.
  14. 청구항 13에 있어서, 상기 프로세서는 기준 깊이를 기준으로 상기 관측 면의 깊이가 음의 값을 갖는 영역에 대해 상기 영상 정보를 확대하는, 장치.
  15. 청구항 13에 있어서, 상기 프로세서는 기준 깊이를 기준으로 상기 관측 면의 깊이가 양의 값을 갖는 영역에 대해 상기 영상 정보를 축소하는, 장치.
  16. 삭제
  17. 삭제
  18. 삭제
  19. 청구항 13에 있어서, 상기 프로세서는 상기 제2 영상 촬영부를 통해 상기 관측 점 주위의 영상 정보를 획득하고, 상기 표시부를 통해 상기 관측 점 주위의 영상 정보를 상기 관측 면 일부 영역에 표시하는, 장치.
  20. 청구항 13에 있어서, 상기 표시부는 상기 관측 면에 분포된 복수의 LED들을 포함하고, 상기 처리된 영상 정보는 상기 복수의 LED들의 온-오프 제어를 통해 표시되는, 장치.
KR1020180058979A 2018-05-24 2018-05-24 인비저블 효과를 구현하기 위한 장치 및 방법 KR101997743B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180058979A KR101997743B1 (ko) 2018-05-24 2018-05-24 인비저블 효과를 구현하기 위한 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180058979A KR101997743B1 (ko) 2018-05-24 2018-05-24 인비저블 효과를 구현하기 위한 장치 및 방법

Publications (1)

Publication Number Publication Date
KR101997743B1 true KR101997743B1 (ko) 2019-10-01

Family

ID=68207888

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180058979A KR101997743B1 (ko) 2018-05-24 2018-05-24 인비저블 효과를 구현하기 위한 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101997743B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100638367B1 (ko) * 2004-10-30 2006-10-25 한국과학기술연구원 비행 스크린 기구의 비행 궤적 추적을 이용한 자동 영상디스플레이 장치
KR100799304B1 (ko) * 2006-08-30 2008-01-29 한국전자통신연구원 비평면 디스플레이 환경에서 고해상도 동영상 투영 시스템및 방법
KR101640602B1 (ko) * 2009-12-15 2016-07-18 두산인프라코어 주식회사 건설기계의 사각지대 표시 장치 및 그 방법
KR20170050995A (ko) * 2015-11-02 2017-05-11 삼성전자주식회사 디스플레이 장치 및 그의 영상 표시 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100638367B1 (ko) * 2004-10-30 2006-10-25 한국과학기술연구원 비행 스크린 기구의 비행 궤적 추적을 이용한 자동 영상디스플레이 장치
KR100799304B1 (ko) * 2006-08-30 2008-01-29 한국전자통신연구원 비평면 디스플레이 환경에서 고해상도 동영상 투영 시스템및 방법
KR101640602B1 (ko) * 2009-12-15 2016-07-18 두산인프라코어 주식회사 건설기계의 사각지대 표시 장치 및 그 방법
KR20170050995A (ko) * 2015-11-02 2017-05-11 삼성전자주식회사 디스플레이 장치 및 그의 영상 표시 방법

Similar Documents

Publication Publication Date Title
EP3198852B1 (en) Image processing apparatus and control method thereof
US9460545B2 (en) Apparatus and method for generating new viewpoint image
CN107749944A (zh) 一种拍摄方法及装置
KR102225617B1 (ko) 영상 정합 알고리즘을 설정하는 방법
KR20130112574A (ko) 확대된 영상의 화질을 개선하기 위한 장치 및 방법
US20190253689A1 (en) Image processing apparatus, image processing method and storage medium for storing program
CN111246080B (zh) 控制设备、控制方法、摄像设备以及存储介质
CN110717920B (zh) 投影仪振镜测试目标图的提取方法、装置及电子设备
KR102311367B1 (ko) 화상 처리 장치, 화상 처리 방법, 및 프로그램
JP2017130794A (ja) 情報処理装置、評価用チャート、評価システム、および性能評価方法
JP5247338B2 (ja) 画像処理装置及び画像処理方法
KR101997743B1 (ko) 인비저블 효과를 구현하기 위한 장치 및 방법
US8837866B2 (en) Image processing apparatus and method for controlling image processing apparatus
KR101279576B1 (ko) 디지털 영상 처리 장치에서의 파노라마 영상 생성 방법
JP7030425B2 (ja) 画像処理装置、画像処理方法、プログラム
JP2014230088A (ja) 画像調整装置、画像調整方法、画像調整プログラムおよび撮像装置
WO2020084894A1 (ja) マルチカメラシステム、制御値算出方法及び制御装置
US20160275345A1 (en) Camera systems with enhanced document capture
JP2016072924A (ja) 画像処理装置及び画像処理方法
JP6381212B2 (ja) 撮像装置及びその制御方法
JP4147656B2 (ja) 画像処理装置
CN110827289B (zh) 投影仪清晰度测试中目标图像的提取方法及装置
KR102498870B1 (ko) 카메라 시스템 및 그의 영상처리방법
JP5850365B2 (ja) 画像処理プログラムおよび画像処理装置
CN111835968B (zh) 图像清晰度还原方法及装置、图像拍摄方法及装置