KR101273534B1 - 3d projecting image auto calibration method - Google Patents

3d projecting image auto calibration method Download PDF

Info

Publication number
KR101273534B1
KR101273534B1 KR1020130011000A KR20130011000A KR101273534B1 KR 101273534 B1 KR101273534 B1 KR 101273534B1 KR 1020130011000 A KR1020130011000 A KR 1020130011000A KR 20130011000 A KR20130011000 A KR 20130011000A KR 101273534 B1 KR101273534 B1 KR 101273534B1
Authority
KR
South Korea
Prior art keywords
infrared
screen
image
blob
blobs
Prior art date
Application number
KR1020130011000A
Other languages
Korean (ko)
Inventor
윤태수
주우석
박현우
강두철
김기현
김정훈
Original Assignee
(주)브이아이앰
동서대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)브이아이앰, 동서대학교산학협력단 filed Critical (주)브이아이앰
Priority to KR1020130011000A priority Critical patent/KR101273534B1/en
Application granted granted Critical
Publication of KR101273534B1 publication Critical patent/KR101273534B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3147—Multi-projection systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/315—Modulator illumination systems
    • H04N9/3155—Modulator illumination systems for controlling the light source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Projection Apparatus (AREA)

Abstract

PURPOSE: A screen correction method using an automatic screen correction system for stereoscopic image projection is provided to improve matching and convenience of screen correction by automatically performing correction of a projected video image using an infrared projection device, an infrared reflection marker, an infrared detection camera module and a computer device. CONSTITUTION: After binarization of obtained infrared images, a system labels each element of the infrared images. The system performs the blob processing of the each labeled object. If the number of blobs and the number of infrared markers are the same, the system calculates a location of the center point of the each blob. The system converts the obtained homography information into a keystone adjustment variable of first and second beam projectors and automatically performs screen correction of a projected left-eye two-dimensional image and a right-eye two-dimensional image. [Reference numerals] (AA) Step of obtaining infrared images; (BB) Step of binary processing; (CC) Step of label processing; (DD) Step of blob processing; (EE) Step of comparing and judging the number of blobs; (FF) Step of calculating the center point of the each blob; (GG) Step of generating quadrilaterals between blobs; (HH) Step of generating two-dimensional homography; (II) Step of adjusting projected images; (JJ) Otsu binary algorithm; (KK) The number of blobs = The number of infrared reflection makers(4)?

Description

입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법{3D projecting image auto calibration method}Screen Calibration Method Using Automatic Screen Calibration System for Stereoscopic Projection {3D projecting image auto calibration method}

본 발명은 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법에 관한 것으로, 좀더 구체적으로는 3D 입체영상의 구현을 위해 복수의 빔 프로젝터로부터 스크린으로 영사되는 좌안 2D 영상 화면과 우안 2D 영상 화면의 위치와 크기를 일치시키기 위한 화면 보정이 자동으로 수행되어 화면보정작업의 정합성과 편의성이 향상되도록 하는 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법에 관한 것이다.
The present invention relates to a screen correction method using an automatic screen correction system for stereoscopic projection. More specifically, a left eye 2D image screen and a right eye 2D image screen projected from a plurality of beam projectors to a screen for realizing a 3D stereoscopic image. The present invention relates to a screen correction method using an automatic screen correction system for stereoscopic image projection, in which screen correction is automatically performed to match the position and size of the screen.

현재 3D 입체영상에 대한 소비자들의 관심과 수요가 급속도로 늘어나고 있는 추세이다. 사람이 입체를 느낄 수 있는 것은 시각정보를 획득하게 되는 사람의 두 눈이 약 6~7cm 떨어져 있기 때문에 생기는 양안시차(Binocular disparity) 때문으로, 이와 같은 양안시차 원리를 이용하여 좌안 2D 영상과 우안 2D 영상을 동시적으로 스크린으로 영사하거나 출력함으로써 3D 입체영상을 구현하게 된다.At present, consumers' interest and demand for 3D stereoscopic image is increasing rapidly. A person can feel a stereoscopic image because of the binocular disparity caused by the two eyes of a person who obtains visual information about 6 ~ 7cm apart. By simultaneously projecting or outputting images to the screen, 3D stereoscopic images are realized.

이와 같은 3D 입체영상을 출력하기 위한 장치와 관련하여 대한민국 등록특허공보 등록번호 제10-0754773호 "입체영상 디스플레이 장치" 등이 안출되어 있는데, 상기 "입체영상 디스플레이 장치"는 외부 영상제공장치로부터 영상 신호를 제공받아 이를 출력하는 두 대의 빔 프로젝터를 구비하고, 이들로부터 각각의 영상 신호를 교대로 입력받아 이를 화면에 표시하는 디스플레이 장치; 두 대의 빔 프로젝터 전면에 설치되어 디스플레이 장치로 투사되는 빔 프로젝터 각각의 영상 신호를 교대로 차단하는 빔 셔터; 디스플레이장치 화면에 표시되는 영상을 보기 위해 착용하는 셔터 글래스; 및 디스플레이 장치 화면에 표시되는 좌우 영상에 대응하여 셔터 글래스의 좌우 렌즈 및 좌우안용 빔 셔터 개폐 동작이 이루어지도록 제어하는 이미터;를 포함하는 구성으로 이루어진 것이다.
In relation to the apparatus for outputting such a 3D stereoscopic image, Korean Patent Publication No. 10-0754773, "stereoscopic image display apparatus," and the like have been issued. The "stereoscopic image display apparatus" is an image from an external image providing apparatus. A display device having two beam projectors for receiving a signal and outputting the same, and for receiving each of the video signals alternately from the same and displaying the same on a screen; A beam shutter installed in front of the two beam projectors to alternately block image signals of the beam projectors projected to the display device; A shutter glass worn to view an image displayed on a display device screen; And an emitter for controlling opening and closing operations of the left and right lenses of the shutter glass and the left and right beam shutters in response to the left and right images displayed on the display device screen.

여기서, 복수의 빔 프로젝터로부터 스크린으로 영사되는 좌안 2D 영상 화면과 우안 2D 영상 화면의 위치와 크기를 일치시켜야 3D 입체영상이 제대로 구현될 수 있는데, 종래에는 이를 위한 화면 보정이 작업자가 직접 빔 프로젝터의 키스톤 보정을 수행하는 것으로 이루어짐에 따라, 화면 보정에 번거로움과 어려움이 많았다.
Here, the 3D stereoscopic image can be properly implemented by matching the position and size of the left eye 2D video screen and the right eye 2D video screen projected from the plurality of beam projectors to the screen. As it consists of performing keystone correction, the screen correction has been cumbersome and difficult.

대한민국 등록특허공보 등록번호 제10-0754773호 "입체영상 디스플레이 장치"Republic of Korea Patent Publication No. 10-0754773 "stereoscopic image display device"

따라서 본 발명은 이와 같은 종래 기술의 문제점을 개선하여, 스크린에 부착되어 적외선을 반사시키는 적외선 반사마커의 위치값을 각 빔 프로젝터와 연동되는 각 적외선 감지 카메라모듈로부터 검출하고, 검출된 적외선 반사마커의 위치값으로부터 각 빔 프로젝터의 영상 출력보정값을 산출하여 화면보정이 수행되도록 함에 따라, 3D 입체영상의 구현을 위해 각 빔 프로젝터로부터 스크린으로 영사되는 좌안 2D 영상 화면과 우안 2D 영상 화면의 위치와 크기를 일치시키기 위한 화면 보정이 자동으로 수행되어 화면보정작업의 정합성과 편의성이 향상될 수 있는 새로운 형태의 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법을 제공하는 것을 목적으로 한다.
Accordingly, the present invention improves the problems of the prior art, and detects the position value of the infrared reflecting marker attached to the screen to reflect the infrared rays from each infrared sensing camera module which is interlocked with each beam projector, As the image output correction value of each beam projector is calculated from the position value to perform screen correction, the position and size of the left eye 2D video screen and the right eye 2D video screen projected from each beam projector to the screen for realizing 3D stereoscopic images It is an object of the present invention to provide a screen correction method using an automatic screen correction system for projection of a new type of stereoscopic image, in which screen correction for automatically matching is automatically performed to improve the consistency and convenience of the screen correction operation.

상술한 목적을 달성하기 위한 본 발명의 특징에 의하면, 본 발명은 영상컨텐츠가 디스플레이되는 스크린과; 상기 스크린 표면의 설정위치에 서로 이격되게 배치되는 복수개의 적외선 반사마커와; 상기 스크린으로 적외선을 방사시키는 적외선 방사장치와; 상기 스크린 표면 전방으로 이격된 위치에 서로 이격되게 배치되고, 상기 적외선 방사장치의 적외선을 반사시키는 상기 스크린의 적외선 영상을 각각 획득하게 되는 복수의 적외선 감지 카메라모듈과; 상기 각 적외선 감지 카메라모듈의 위치에 배치되고, 상기 스크린으로 3D 입체영상을 이루는 좌안 2D 영상과 우안 2D 영상 중 어느 하나를 영사하게 되는 복수의 빔 프로젝터와; 상기 복수개의 적외선 감지 카메라모듈, 상기 복수개의 빔 프로젝터와 연결되고, 화면보정프로그램이 설치되되, 상기 화면보정프로그램은 상기 각 적외선 감지 카메라모듈에 의해 획득된 적외선 영상으로부터 상기 적외선 반사마커의 위치값을 검출한 후 상기 적외선 반사마커의 위치값으로부터 상기 각 빔 프로젝터의 영상 출력보정값을 산출하여 상기 각 빔 프로젝터의 영상 출력을 제어하게 되는 컴퓨터장치를 포함하여, 상기 각 빔 프로젝터로부터 영사되는 영상에 대한 화면보정이 자동으로 수행되도록 하는 입체영상 프로젝션을 위한 자동 화면보정 시스템을 제공한다.
According to a feature of the present invention for achieving the above object, the present invention comprises a screen on which the image content is displayed; A plurality of infrared reflecting markers spaced apart from each other at a predetermined position on the screen surface; An infrared radiator for emitting infrared rays to the screen; A plurality of infrared sensing camera modules arranged to be spaced apart from each other in front of the screen surface to acquire infrared images of the screen reflecting infrared rays of the infrared emitting device; A plurality of beam projectors disposed at positions of the infrared sensing camera modules and projecting any one of a left eye 2D image and a right eye 2D image to form a 3D stereoscopic image on the screen; The plurality of infrared detection camera modules and the plurality of beam projectors are connected, and a screen correction program is installed, wherein the screen correction program is configured to calculate the position values of the infrared reflection markers from the infrared images acquired by the respective infrared detection camera modules. And a computer device configured to control an image output of each beam projector by calculating an image output correction value of each beam projector after detecting the position value of the infrared reflecting marker, for the image projected from each beam projector. The present invention provides an automatic screen correction system for stereoscopic projection that automatically performs screen correction.

이와 같은 본 발명에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템에서 상기 복수의 적외선 감지 카메라모듈은 상기 스크린 표면 전방으로 이격된 위치의 일측과 타측에 배치되는 제1적외선 감지 카메라모듈과 제2적외선 감지 카메라모듈이 하나의 세트를 이루며 배치되는 구성으로 이루어지고, 상기 복수의 빔 프로젝터는 상기 제1적외선 감지 카메라모듈의 위치에 배치되어 상기 스크린으로 3D 입체영상을 이루는 좌안 2D 영상을 영사하게 되는 제1빔 프로젝터와 상기 제2적외선 감지 카메라모듈의 위치에 배치되어 상기 스크린으로 3D 입체영상을 이루는 우안 2D 영상을 영사하게 되는 제2빔 프로젝터가 하나의 세트를 이루며 배치되는 구성으로 이루어진다.
In the automatic screen correction system for stereoscopic image projection according to the present invention, the plurality of infrared detection camera modules detect a first infrared ray detection camera module and a second infrared ray disposed at one side and the other side of a position spaced forward of the screen surface. And a plurality of beam projectors arranged at positions of the first infrared ray sensing camera module to project a left eye 2D image forming a 3D stereoscopic image on the screen. A second beam projector arranged at a position of the beam projector and the second infrared ray sensing camera module to project a right eye 2D image forming a 3D stereoscopic image on the screen is formed in one set.

상술한 목적을 달성하기 위한 본 발명의 다른 특징에 의하면, 본 발명은 영상컨텐츠가 디스플레이되는 스크린; 상기 스크린 표면의 각 모서리 부위에 서로 이격되게 배치되는 4개의 적외선 반사마커; 상기 스크린으로 적외선을 방사시키는 적외선 방사장치; 상기 스크린 표면 전방으로 이격된 위치에 서로 분리되어 배치되어 상기 적외선 방사장치의 적외선을 반사시키는 상기 스크린의 적외선 영상을 획득하게 되는 제1적외선 감지 카메라모듈과 제2적외선 감지 카메라모듈 세트로 이루어지는 복수의 적외선 감지 카메라모듈; 상기 제1적외선 감지 카메라모듈과 제2적외선 감지 카메라모듈의 위치에 각각 배치되고, 상기 스크린으로 3D 입체영상을 이루는 좌안 2D 영상와 우안 2D 영상을 각각 영사하게 되는 제1빔 프로젝터와 제2빔 프로젝터 세트로 이루어지는 복수의 빔 프로젝터; 복수의 상기 적외선 감지 카메라모듈과 복수의 빔 프로젝터와 연결되고, 화면보정프로그램이 설치되는 컴퓨터장치를 포함하는 입체영상 프로젝션을 위한 자동 화면보정 시스템의 화면보정방법에 있어서, 상기 적외선 방사장치의 적외선을 반사시키는 상기 스크린의 적외선 영상을 각 적외선 감지 카메라모듈로부터 각각 획득하는 적외선 영상 획득 단계와; 각 적외선 감지 카메라모듈에서 획득된 적외선 영상의 각 요소들을 라벨링(labelling)하여 오브젝트(object)로 구별하게 되는 라벨링 처리단계와; 상기 라벨링 처리단계에서 라벨링된 각 오브젝트를 블랍(blob) 처리하는 블랍처리단계와; 블랍처리된 각 오브젝트의 면적을 계산하고, 가장 넓은 면적을 갖는 오브젝트에 우선순위를 부여하면서 블랍갯수를 산출하고, 산출된 블랍갯수와 상기 스크린에 배치된 상기 적외선 반사마커의 갯수(4개)를 비교하는 블랍갯수 비교판단단계와; 블랍갯수와 적외선 반사마커의 갯수가 서로 일치할 경우, 각 블랍의 중심점 위치를 연산하는 블랍 중심점 연산단계와; 4개의 블랍 중심점을 꼭지점으로하는 평행사변형을 구성하는 블랍 간 평행사변형 생성단계와; 생성된 평행사변형을 직사각형으로 변화시키는 2차원 호모그래피(homography)를 생성하여 획득하는 2차원 호모그래피 생성단계와; 획득된 2차원 호모그래피 정보를 각 빔 프로젝터의 키스톤 조정 변수로 변환하여 각 빔 프로젝터로부터 영사되는 영상에 대한 화면보정이 자동으로 수행되도록 하는 프로젝터 영상 조정단계를 포함하되, 상기 블랍갯수 비교판단단계에서 블랍갯수와 적외선 반사마커의 갯수가 서로 일치하지 않는 경우 상기 적외선 영상 획득 단계, 라벨링 처리단계, 블랍처리단계, 블랍갯수 비교판단단계를 다시 반복하는 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법을 제공한다.
According to another aspect of the present invention for achieving the above object, the present invention comprises a screen on which the image content is displayed; Four infrared reflecting markers spaced apart from each other at each corner of the screen surface; An infrared radiation device for emitting infrared rays to the screen; A plurality of first infrared camera modules and a second infrared camera module set arranged separately from each other at a position spaced in front of the screen surface to obtain an infrared image of the screen reflecting infrared rays of the infrared radiator; Infrared sensing camera module; A first beam projector and a second beam projector set respectively disposed at positions of the first infrared ray sensing camera module and the second infrared ray sensing camera module, and projecting the left eye 2D image and the right eye 2D image to form a 3D stereoscopic image on the screen, respectively. A plurality of beam projectors; A screen correction method of an automatic screen correction system for stereoscopic projection, comprising a computer device connected to a plurality of infrared sensing camera modules and a plurality of beam projectors, and a screen correction program is installed. An infrared image acquisition step of acquiring an infrared image of the screen to be reflected from each infrared detection camera module; A labeling processing step of labeling each element of the infrared image obtained by each infrared sensing camera module to distinguish it as an object; A blob processing step of blob processing each object labeled in the labeling processing step; Calculate the area of each blobed object, calculate the number of blobs while giving priority to the object with the largest area, and calculate the number of blobs calculated and the number of infrared reflecting markers (4) placed on the screen. Comparing the number of blobs to compare; A blob center point calculating step of calculating a center point position of each blob when the number of blobs and the number of infrared reflection markers coincide with each other; Generating inter-blob parallelograms constituting a parallelogram with four blob center points as vertices; A two-dimensional homography generating step of generating and obtaining two-dimensional homography for changing the generated parallelogram into a rectangle; A projector image adjustment step of converting the obtained two-dimensional homography information into keystone adjustment parameters of each beam projector to automatically perform screen correction on an image projected from each beam projector, wherein the blob number comparison step If the number of blobs and the number of infrared reflecting markers do not coincide with each other, screen correction using an automatic screen correction system for stereoscopic image projection which repeats the infrared image acquisition step, labeling process, blob process, and blob number comparison step again Provide a method.

이와 같은 본 발명에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법에서 상기 라벨링 처리단계는 상기 적외선 영상 획득 단계에서 획득된 적외선 영상을 이진화(binarization)하는 이진화 처리단계 이후에 수행된다.
In the screen correction method using the automatic screen correction system for stereoscopic image projection according to the present invention, the labeling processing step is performed after the binarization processing step of binarizing the infrared image obtained in the infrared image acquisition step.

이와 같은 본 발명에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법에서 상기 이진화 처리단계는 오츠 이진화 알고리즘(ostu binarization algorithm)에 의해 수행된다.
In the screen correction method using the automatic screen correction system for stereoscopic image projection according to the present invention, the binarization processing step is performed by an ostu binarization algorithm.

본 발명에 의한 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법에 의하면, 각 빔 프로젝터로부터 스크린으로 영사되는 영상 화면의 위치와 크기를 일치시키기 위한 화면 보정이 적외선 영사장치, 적외선 반사마커, 적외선 감지 카메라모듈, 컴퓨터장치에 의해 자동으로 수행됨으로써 화면보정작업의 정합성과 편의성이 향상되는 효과를 가지게 된다.
According to the screen correction method using the automatic screen correction system for stereoscopic projection according to the present invention, the screen correction for matching the position and size of the video screen projected from each beam projector to the screen is an infrared projection device, an infrared reflection marker, It is automatically performed by the infrared sensing camera module and the computer device, thereby improving the consistency and convenience of the screen correction operation.

도 1은 본 발명에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템을 보여주기 위한 블록도;
도 2는 본 발명의 실시예에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템을 보여주기 위한 도면;
도 3은 본 발명의 실시예에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템에서 사용되는 적외선 반사마커를 보여주기 위한 도면;
도 4는 본 발명의 실시예에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법을 보여주기 위한 블록도이다.1 is a block diagram showing an automatic screen correction system for stereoscopic projection according to the present invention;
2 is a diagram illustrating an automatic screen correction system for stereoscopic projection according to an embodiment of the present invention;
3 is a view showing an infrared reflection marker used in an automatic screen correction system for stereoscopic projection according to an embodiment of the present invention;
4 is a block diagram illustrating a screen correction method using an automatic screen correction system for stereoscopic image projection according to an embodiment of the present invention.

이하, 본 발명의 실시예를 첨부된 도면 도 1 내지 도 4에 의거하여 상세히 설명한다. 한편, 도면과 상세한 설명에서 일반적인 입체영상, 입체영상 프로젝션, 화면보정, 스크린, 적외선 반사마커, 빔 프로젝터, 라벨링 처리, 블랍 처리, 호모그래피 오츠 이진화 알고리즘 등으로부터 이 분야의 종사자들이 용이하게 알 수 있는 구성 및 작용에 대한 도시 및 언급은 간략히 하거나 생략하였다. 특히 도면의 도시 및 상세한 설명에 있어서 본 발명의 기술적 특징과 직접적으로 연관되지 않는 요소의 구체적인 기술적 구성 및 작용에 대한 상세한 설명 및 도시는 생략하고, 본 발명과 관련되는 기술적 구성만을 간략하게 도시하거나 설명하였다.
Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to FIGS. 1 to 4. Meanwhile, in the drawings and the detailed description, those skilled in the art can easily know from the general stereoscopic image, stereoscopic projection, screen correction, screen, infrared reflective marker, beam projector, labeling processing, blob processing, homography OTS binarization algorithm, and the like. Illustrations and references to constructions and actions have been simplified or omitted. In the drawings and specification, there are shown in the drawings and will not be described in detail, and only the technical features related to the present invention are shown or described only briefly. Respectively.

본 발명의 실시예에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템(100)은 도 1에서와 같이 스크린(10), 복수개의 적외선 반사마커(20), 복수의 적외선 감지 카메라모듈(40), 복수의 빔 프로젝터(50), 컴퓨터장치(60)를 포함하는 구성으로 이루어져 한 세트의 빔 프로젝터(50)로부터 영사되는 좌안 2D 영상과 우안 2D 영상에 대한 화면보정이 자동으로 수행되면서 3D 입체영상이 스크린(10)을 통해 구현되도록 한다. 여기서, 본 발명의 실시예에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템(100)은 도 2에서와 같이 2개의 적외선 감지 카메라모듈(40)과 2개의 빔 프로젝터(50)가 배치되는 구성으로 이루어지나, 스크린(10)이 대형스크린일 경우에는 2개 빔 프로젝터(50)가 좌우측에 배치된 하나의 세트를 이루며 다수 세트의 빔 프로젝터(50)로 구성될 수 있고, 이에 대응하여 2개 적외선 감지 카메라모듈(40)가 좌우측에 배치된 하나의 세트를 이루며 다수 세트의 적외선 감지 카메라모듈(40)로 구성될 수 있다. 즉 복수의 적외선 감지 카메라모듈(40)은 스크린(10) 표면 전방으로 이격된 위치의 일측과 타측에 배치되는 제1적외선 감지 카메라모듈(40a)과 제2적외선 감지 카메라모듈(40b)이 하나의 세트를 이루며 배치되는 구성으로 이루어지고, 복수의 빔 프로젝터(50)는 제1적외선 감지 카메라모듈(40a)의 위치에 배치되어 스크린(10)으로 3D 입체영상을 이루는 좌안 2D 영상을 영사하게 되는 제1빔 프로젝터(50a)와 제2적외선 감지 카메라모듈(40a)의 위치에 배치되어 스크린(10)으로 3D 입체영상을 이루는 우안 2D 영상을 영사하게 되는 제2빔 프로젝터(50b)가 하나의 세트를 이루며 배치되는 구성으로 이루어질 수 있다.
The automatic screen correction system 100 for stereoscopic projection according to an embodiment of the present invention includes a screen 10, a plurality of infrared reflection markers 20, a plurality of infrared detection camera modules 40, and a plurality of projection screens as shown in FIG. The projector includes a beam projector 50 and a computer device 60. The screen correction is performed on the left eye 2D image and the right eye 2D image projected from the set of beam projectors 50, and the 3D stereoscopic image is screened. (10) to be implemented. Here, the automatic screen correction system 100 for stereoscopic projection according to an exemplary embodiment of the present invention has a configuration in which two infrared sensing camera modules 40 and two beam projectors 50 are arranged as shown in FIG. 2. In the case where the screen 10 is a large screen, two beam projectors 50 may be formed of a plurality of sets of beam projectors 50 in one set arranged on the left and right sides, and correspondingly, two infrared sensors may be detected. The camera module 40 forms one set disposed on the left and right sides, and may be composed of a plurality of sets of infrared sensing camera modules 40. That is, the plurality of infrared detection camera module 40 includes a first infrared detection camera module 40a and a second infrared detection camera module 40b disposed at one side and the other side of the position spaced apart in front of the surface of the screen 10. And a plurality of beam projectors 50 arranged at a position of the first infrared ray sensing camera module 40a to project a left eye 2D image to form a 3D stereoscopic image on the screen 10. The second beam projector 50b disposed at the position of the first beam projector 50a and the second infrared ray sensing camera module 40a and projecting the right eye 2D image forming the 3D stereoscopic image on the screen 10 is one set. It may be made of a configuration arranged in.

스크린(10)은 영상컨텐츠가 디스플레이되는 것으로, 본 발명의 실시예에 따른 스크린(10)은 3D 입체영상이 구현되도록 한다.
The screen 10 is to display the image content, the screen 10 according to an embodiment of the present invention to implement a 3D stereoscopic image.

적외선 반사마커(20)는 스크린(10) 표면의 설정위치에 서로 이격되게 배치되는 것으로, 본 발명의 실시예에 따른 자동 화면보정 시스템(100)은 스크린(10)의 각 모서리에 4개의 적외선 반사마커(20)가 부착되도록 한다. 이와 같은 적외선 반사마커(20)는 도 3에서와 같이 적외선을 반사하는 필름층(21)과, 필름층(21) 저면에 형성되어 적외선 반사마커(20)가 스크린(10) 표면에 부착되도록 하는 접착층(22)으로 이루어진다. 여기서, 적외선 반사마커(20)의 필름층(21) 표면은 스크린(10) 표면과 동일한 색상으로 이루어진다.
The infrared reflecting markers 20 are arranged to be spaced apart from each other at the set position on the surface of the screen 10, the automatic screen correction system 100 according to an embodiment of the present invention is four infrared reflections at each corner of the screen 10 Allow the marker 20 to be attached. The infrared reflecting marker 20 is formed on the film layer 21 reflecting infrared rays and the bottom of the film layer 21 as shown in FIG. 3 to allow the infrared reflecting marker 20 to be attached to the surface of the screen 10. It consists of an adhesive layer 22. Here, the surface of the film layer 21 of the infrared reflecting marker 20 is made of the same color as the surface of the screen 10.

적외선 방사장치(30)는 스크린(10) 표면으로부터 일정거리 이격된 위치에 설치되어 스크린(10)으로 적외선을 방사시키는 장치이다.
The infrared radiation device 30 is a device which is installed at a position spaced apart from the surface of the screen 10 to emit infrared rays to the screen 10.

복수의 적외선 감지 카메라모듈(40)은 스크린(10) 표면 전방으로 이격된 위치에 서로 이격되게 배치되는 것으로, 적외선 방사장치(30)의 적외선을 반사시키는 스크린(10)의 적외선 영상을 각각 획득하게 된다. 복수의 적외선 감지 카메라모듈(40)은 하나의 세트를 이루는 제1적외선 감지 카메라모듈(40a)과 제2적외선 감지 카메라모듈(40b)로 이루어지는데, 제1적외선 감지 카메라모듈(40a)은 스크린(10) 표면 전방으로 이격된 위치의 일측에 배치되는 것으로, 적외선 방사장치(30)의 적외선을 반사시키는 스크린(10)의 적외선 영상을 획득하게 된다. 제2적외선 감지 카메라모듈(40b)은 스크린(10) 표면 전방으로 이격된 위치의 타측에 배치되어 제1적외선 감지 카메라모듈(40a)로부터 이격되게 설치되는 것으로, 적외선 방사장치(30)의 적외선을 반사시키는 스크린(10)의 적외선 영상을 획득하게 된다.
The plurality of infrared detection camera modules 40 are arranged to be spaced apart from each other at the front of the surface of the screen 10 so as to acquire infrared images of the screen 10 reflecting infrared rays of the infrared radiator 30. do. The plurality of infrared sensing camera modules 40 includes a first infrared sensing camera module 40a and a second infrared sensing camera module 40b constituting one set, and the first infrared sensing camera module 40a includes a screen ( 10) to be disposed on one side of the position spaced in front of the surface, to obtain an infrared image of the screen 10 reflecting the infrared radiation of the infrared radiation device (30). The second infrared ray sensing camera module 40b is disposed on the other side of the screen 10 in front of the surface and is spaced apart from the first infrared ray sensing camera module 40a. An infrared image of the screen 10 to reflect is obtained.

복수의 빔 프로젝터(50)는 각 적외선 감지 카메라모듈(40)의 위치에 배치되고, 스크린(10)으로 3D 입체영상을 이루는 좌안 2D 영상과 우안 2D 영상 중 어느 하나를 영사하게 되는데, 복수의 빔 프로젝터(50)는 하나의 세트를 이루는 제1빔 프로젝터(50a)와 제2빔 프로젝터(50b)로 이루어진다.The plurality of beam projectors 50 are disposed at positions of the respective infrared sensing camera modules 40 and project one of a left eye 2D image and a right eye 2D image forming a 3D stereoscopic image with the screen 10. The projector 50 is composed of one set of a first beam projector 50a and a second beam projector 50b.

제1빔 프로젝터(50a)는 제1적외선 감지 카메라모듈(40a)의 위치에 배치되는 것으로, 스크린(10)으로 3D 입체영상을 이루는 좌안 2D 영상을 영사하게 된다. 여기서, 제1빔 프로젝터(50a)는 제1적외선 감지 카메라모듈(40a)과 결합되어 있다. 제2빔 프로젝터(50b)는 제2적외선 감지 카메라모듈(40b)의 위치에 배치되는 것으로, 스크린(10)으로 3D 입체영상을 이루는 우안 2D 영상을 영사하게 된다. 여기서, 제2빔 프로젝터(50b)는 제2적외선 감지 카메라모듈(40b)과 결합되어 있다.
The first beam projector 50a is disposed at the position of the first infrared ray sensing camera module 40a, and projects the left eye 2D image forming the 3D stereoscopic image onto the screen 10. Here, the first beam projector 50a is coupled to the first infrared ray sensing camera module 40a. The second beam projector 50b is disposed at the position of the second infrared ray sensing camera module 40b, and projects the right eye 2D image forming a 3D stereoscopic image with the screen 10. Here, the second beam projector 50b is coupled to the second infrared detection camera module 40b.

컴퓨터장치(60)는 복수개의 적외선 감지 카메라모듈(40), 복수개의 빔 프로젝터(50)와 연결되고, 화면보정프로그램이 설치되는 것으로, 화면보정프로그램은 각 적외선 감지 카메라모듈(40)에 의해 획득된 적외선 영상으로부터 적외선 반사마커(20)의 위치값을 검출한 후 적외선 반사마커(20)의 위치값으로부터 각 빔 프로젝터(50)의 영상 출력보정값을 산출하여 각 빔 프로젝터(50)의 영상 출력을 제어하면서 각 빔 프로젝터(50)로부터 영사되는 영상에 대한 화면보정이 자동으로 수행되도록 한다.The computer device 60 is connected to the plurality of infrared detection camera module 40, the plurality of beam projectors 50, the screen correction program is installed, the screen correction program is obtained by each infrared detection camera module 40 After detecting the position value of the infrared reflection marker 20 from the infrared image, the image output correction value of each beam projector 50 is calculated from the position value of the infrared reflection marker 20 to output the image of each beam projector 50. While controlling, the screen correction for the image projected from each beam projector 50 is automatically performed.

여기서, 본 발명의 실시예에 따른 컴퓨터장치(60)는 제1적외선 감지 카메라모듈(40a), 제2적외선 감지 카메라모듈(40b), 제1빔 프로젝터(50a), 제2빔 프로젝터(50b)와 연결되는 것으로, 화면보정프로그램이 설치되어 스크린(10)으로 좌안 2D 영상과 우안 2D 영상을 각각 영사시키는 제1빔 프로젝터(50a)과 제2빔 프로젝터(50b)를 제어하여 좌안 2D 영상 화면과 우안 2D 영상 화면의 위치와 크기를 일치시키기 위한 화면 보정이 자동으로 수행되도록 한다.Here, the computer device 60 according to an embodiment of the present invention is the first infrared detection camera module 40a, the second infrared detection camera module 40b, the first beam projector 50a, the second beam projector 50b. And a screen correction program installed to control the first beam projector 50a and the second beam projector 50b for projecting the left eye 2D image and the right eye 2D image, respectively, by the screen 10 and the left eye 2D image screen. The screen correction for matching the position and size of the right eye 2D image screen is automatically performed.

여기서 화면보정프로그램은 제1적외선 감지 카메라모듈(40a)에 의해 획득된 적외선 영상으로부터 적외선 반사마커(20)의 위치값을 검출한 후 적외선 반사마커(20)의 위치값으로부터 제1빔 프로젝터(50a)의 좌안 2D 영상 출력보정값을 산출하여 제1빔 프로젝터(50a)의 영상 출력을 제어하게 된다. 또한 화면보정프로그램은 제2적외선 감지 카메라모듈(40b)에 의해 획득된 적외선 영상으로부터 적외선 반사마커(20)의 위치값을 검출한 후 적외선 반사마커(20)의 위치값으로부터 제2빔 프로젝터(50b)의 우안 2D 영상 출력보정값을 산출하여 제2빔 프로젝터(50b)의 영상 출력을 제어하게 된다.
Here, the screen correction program detects the position value of the infrared reflecting marker 20 from the infrared image acquired by the first infrared ray sensing camera module 40a, and then uses the first beam projector 50a from the position value of the infrared reflecting marker 20. The left eye 2D image output correction value of) is calculated to control the image output of the first beam projector 50a. In addition, the screen correction program detects the position value of the infrared reflecting marker 20 from the infrared image acquired by the second infrared ray sensing camera module 40b, and then the second beam projector 50b from the position value of the infrared reflecting marker 20. The right eye 2D image output correction value is calculated to control the image output of the second beam projector 50b.

상기와 같이 구성되는 본 발명의 실시예에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법은 도 4에서와 같이 적외선 영상 획득단계, 이진화 처리단계, 라벨링 처리단계, 블랍 처리단계, 블랍갯수 비교판단단계, 블랍 중심점 연산단계, 블랍 간 평행사변형 생성단계, 2차원 호모그래피 생성단계, 프로젝터 영상 조정단계를 거쳐 수행된다.
Screen correction method using the automatic screen correction system for the three-dimensional image projection according to an embodiment of the present invention configured as described above is an infrared image acquisition step, binarization processing step, labeling processing step, blob processing step, blob It is performed through the comparison determination step, the blob center point calculation step, the parallelogram generation between the blobs, the two-dimensional homography generation step, and the projector image adjustment step.

적외선 영상 획득 단계는 적외선 방사장치(30)의 적외선을 반사시키는 스크린(10)의 적외선 영상을 제1적외선 감지 카메라모듈(40a), 제2적외선 감지 카메라모듈(40b)로부터 각각 획득하는 단계이다.
The infrared image acquisition step is a step of acquiring an infrared image of the screen 10 reflecting the infrared rays of the infrared radiation device 30 from the first infrared detection camera module 40a and the second infrared detection camera module 40b, respectively.

이진화 처리단계는 적외선 영상 획득 단계에서 획득된 적외선 영상을 이진화(binarization)하여 적외선 영상으로부터 필요한 정보는 최대한 보존하면서 연산처리과정은 단순화되고 고속화되도록 하는 단계이다. 여기서 스크린(10)과 적외선 반사마커(20)의 2가지 정보가 적외선 영상의 주 정보를 이루므로, 본 발명의 실시예에 따른 이진화 처리단계는 분산비를 최대화하는 오츠 이진화 알고리즘(ostu binarization algorithm)에 의해 수행된다.
The binarization step is a step of binarizing the infrared image acquired in the infrared image acquisition step to simplify and speed up the computational process while preserving the necessary information from the infrared image. Here, since two pieces of information of the screen 10 and the infrared reflection marker 20 form main information of the infrared image, the binarization processing step according to an embodiment of the present invention is an ostu binarization algorithm for maximizing the dispersion ratio. Is performed by.

라벨링 처리단계는 제1적외선 감지 카메라모듈(40a), 제2적외선 감지 카메라모듈(40b)에서 획득된 적외선 영상의 각 요소들을 라벨링(labelling)하여 오브젝트(object)로서 구별하게 되는 단계이다.
The labeling process is a step of labeling each element of the infrared image obtained by the first infrared ray sensing camera module 40a and the second infrared ray sensing camera module 40b to distinguish them as an object.

블랍처리단계는 라벨링 처리단계에서 라벨링된 각 오브젝트를 블랍(blob) 처리하는 단계로서, 이와 같은 블랍처리는 각 오브젝트가 적외선 반사마커(20)에 해당되는지 여부를 판별하기 위한 것이다.
The blob processing step is to blob each object labeled in the labeling step, and the blob processing is to determine whether each object corresponds to the infrared reflection marker 20.

블랍갯수 비교판단단계는 블랍처리된 각 오브젝트의 면적을 계산하고, 가장 넓은 면적을 갖는 오브젝트에 우선순위를 부여하면서 블랍갯수를 산출하고, 산출된 블랍갯수와 스크린(10)에 배치된 적외선 반사마커(20)의 갯수(4개)를 비교하는 단계이다.The blob number comparison step calculates the area of each blobed object, calculates the number of blobs while giving priority to the object having the largest area, and calculates the number of blobs and the infrared reflection marker placed on the screen 10. It is a step of comparing the number (4) of (20).

이와 같은 블랍갯수 비교판단단계에서 블랍갯수와 적외선 반사마커(20)의 갯수가 서로 일치하지 않는 경우, 적외선 영상 획득 단계, 라벨링 처리단계, 블랍처리단계, 블랍갯수 비교판단단계를 다시 반복하게 된다. When the number of blobs and the number of infrared reflecting markers 20 do not coincide with each other in the comparison of the number of blobs, the infrared image acquiring step, labeling processing step, blob processing step, and blob number comparison determination step are repeated.

이와 같은 블랍갯수 비교판단단계에서 블랍갯수와 적외선 반사마커(20)의 갯수가 서로 일치할 경우, 다음의 블랍 중심점 연산단계를 진행한다.
When the number of blobs and the number of the infrared reflecting markers 20 coincide with each other in the comparison of the number of blobs, the next blob center point calculation step is performed.

블랍 중심점 연산단계는 블랍갯수와 적외선 반사마커(20)의 갯수가 서로 일치할 경우, 각 블랍의 중심점 위치를 연산하는 단계이다. 이와 같은 블랍 중심점 연산단계는 블랍을 구성하는 각 픽셀정보로부터 무게중심공식을 이용하여 블랍의 중심점 위치를 연산하게 된다.
The blob center point calculation step is a step of calculating the position of the center point of each blob when the number of blobs and the number of the infrared reflection markers 20 coincide with each other. In the blob center point calculation step, the center point position of the blob is calculated from the pixel information constituting the blob using the center of gravity formula.

블랍 간 평행사변형 생성단계는 4개의 블랍 중심점을 꼭지점으로하는 평행사변형을 구성하는 단계이다.
The inter-blob parallelogram generation step is to construct a parallelogram with four blob center points as vertices.

2차원 호모그래피 생성단계는 생성된 평행사변형을 직사각형으로 변화시키는 2차원 호모그래피(homography)를 생성하여 획득하는 단계이다.
The two-dimensional homography generating step is a step of generating and obtaining a two-dimensional homography that transforms the generated parallelogram into a rectangle.

프로젝터 영상 조정단계는 획득된 2차원 호모그래피 정보를 제1빔 프로젝터(50a)와 제2빔 프로젝터(50b)의 키스톤 조정 변수로 변환하여 제1빔 프로젝터(50a)로부터 영사되는 좌안 2D 영상과, 제2빔 프로젝터(50b)로부터 영사되는 우안 2D 영상에 대한 화면보정이 자동으로 수행되도록 하는 단계이다.
The projector image adjusting step may include converting the acquired two-dimensional homography information into keystone adjustment parameters of the first beam projector 50a and the second beam projector 50b, and projecting the left eye 2D image projected from the first beam projector 50a; The screen correction is automatically performed for the right eye 2D image projected from the second beam projector 50b.

상기와 같이 구성되는 본 발명의 실시예에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법은 적외선 반사마커(20)의 위치값으로부터 제1빔 프로젝터(50a)의 좌안 2D 영상과 제2빔 프로젝터(50b)의 우안 2D 영상의 출력보정값(키스톤 조정변수)을 산출하여 화면보정이 수행되는데, 이와 같이 3D 입체영상의 구현을 위해 2개의 빔 프로젝터(50)로부터 스크린(10)으로 영사되는 좌안 2D 영상 화면과 우안 2D 영상 화면의 위치와 크기를 일치시키기 위한 화면 보정이 자동으로 수행됨에 따라, 화면보정작업의 정합성과 편의성이 향상되게 된다.
The screen correction method using the automatic screen correction system for stereoscopic projection according to the embodiment of the present invention configured as described above includes the left eye 2D image of the first beam projector 50a from the position value of the infrared reflection marker 20 and the first eye. Screen correction is performed by calculating the output correction value (keystone adjustment variable) of the right-eye 2D image of the 2-beam projector 50b. Thus, two beam projectors 50 to the screen 10 are implemented to realize a 3D stereoscopic image. As the screen correction for automatically matching the position and size of the projected left eye 2D video screen and the right eye 2D video screen is automatically performed, the consistency and convenience of the screen correction operation are improved.

상술한 바와 같은, 본 발명의 실시예에 따른 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법을 상기한 설명 및 도면에 따라 도시하였지만, 이는 예를 들어 설명한 것에 불과하며 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능하다는 것을 이 분야의 통상적인 기술자들은 잘 이해할 수 있을 것이다.
As described above, although the screen correction method using the automatic screen correction system for stereoscopic image projection according to the embodiment of the present invention has been illustrated according to the above description and drawings, this is merely described as an example and the technical idea of the present invention. Those skilled in the art will appreciate that various changes and modifications can be made without departing from the scope of the invention.

10 : 스크린 20 : 적외선 반사마커
21 : 필름층 22 : 접착층
30 : 적외선 방사장치 40 : 적외선 감지 카메라모듈
40a : 제1적외선 감지 카메라모듈 40b : 제2적외선 감지 카메라모듈
50 : 빔 프로젝터 50a : 제1빔 프로젝터
50b : 제2빔 프로젝터 60 : 컴퓨터장치
100 : 입체영상 프로젝션을 위한 자동 화면보정 시스템10 screen 20 infrared reflection marker
21: film layer 22: adhesive layer
30: infrared radiation device 40: infrared detection camera module
40a: first infrared detection camera module 40b: second infrared detection camera module
50: beam projector 50a: first beam projector
50b: second beam projector 60: computer device
100: Automatic screen correction system for stereoscopic projection

Claims (5)

영상컨텐츠가 디스플레이되는 스크린; 상기 스크린 표면의 각 모서리 부위에 서로 이격되게 배치되는 4개의 적외선 반사마커; 상기 스크린으로 적외선을 방사시키는 적외선 방사장치; 상기 스크린 표면 전방으로 이격된 위치에 서로 분리되어 배치되어 상기 적외선 방사장치의 적외선을 반사시키는 상기 스크린의 적외선 영상을 획득하게 되는 제1적외선 감지 카메라모듈과 제2적외선 감지 카메라모듈 세트로 이루어지는 복수의 적외선 감지 카메라모듈; 상기 제1적외선 감지 카메라모듈과 제2적외선 감지 카메라모듈의 위치에 각각 배치되고, 상기 스크린으로 3D 입체영상을 이루는 좌안 2D 영상와 우안 2D 영상을 각각 영사하게 되는 제1빔 프로젝터와 제2빔 프로젝터 세트로 이루어지는 복수의 빔 프로젝터; 복수의 상기 적외선 감지 카메라모듈과 복수의 빔 프로젝터와 연결되고, 화면보정프로그램이 설치되는 컴퓨터장치를 포함하는 입체영상 프로젝션을 위한 자동 화면보정 시스템의 화면보정방법에 있어서,
상기 적외선 방사장치의 적외선을 반사시키는 상기 스크린의 적외선 영상을 각 적외선 감지 카메라모듈로부터 각각 획득하는 적외선 영상 획득 단계와;
각 적외선 감지 카메라모듈에서 획득된 적외선 영상의 각 요소들을 라벨링(labelling)하여 오브젝트(object)로 구별하게 되는 라벨링 처리단계와;
상기 라벨링 처리단계에서 라벨링된 각 오브젝트를 블랍(blob) 처리하는 블랍처리단계와;
블랍처리된 각 오브젝트의 면적을 계산하고, 가장 넓은 면적을 갖는 오브젝트에 우선순위를 부여하면서 블랍갯수를 산출하고, 산출된 블랍갯수와 상기 스크린에 배치된 상기 적외선 반사마커의 갯수(4개)를 비교하는 블랍갯수 비교판단단계와;
블랍갯수와 적외선 반사마커의 갯수가 서로 일치할 경우, 각 블랍의 중심점 위치를 연산하는 블랍 중심점 연산단계와;
4개의 블랍 중심점을 꼭지점으로하는 평행사변형을 구성하는 블랍 간 평행사변형 생성단계와;
생성된 평행사변형을 직사각형으로 변화시키는 2차원 호모그래피(homography)를 생성하여 획득하는 2차원 호모그래피 생성단계와;
획득된 2차원 호모그래피 정보를 각 빔 프로젝터의 키스톤 조정 변수로 변환하여 각 빔 프로젝터로부터 영사되는 영상에 대한 화면보정이 자동으로 수행되도록 하는 프로젝터 영상 조정단계를 포함하되,
상기 블랍갯수 비교판단단계에서 블랍갯수와 적외선 반사마커의 갯수가 서로 일치하지 않는 경우 상기 적외선 영상 획득 단계, 라벨링 처리단계, 블랍처리단계, 블랍갯수 비교판단단계를 다시 반복하는 것을 특징으로 하는 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법.A screen on which image content is displayed; Four infrared reflecting markers spaced apart from each other at each corner of the screen surface; An infrared radiation device for emitting infrared rays to the screen; A plurality of first infrared camera modules and a second infrared camera module set arranged separately from each other at a position spaced in front of the screen surface to obtain an infrared image of the screen reflecting infrared rays of the infrared radiator; Infrared sensing camera module; A first beam projector and a second beam projector set respectively disposed at positions of the first infrared ray sensing camera module and the second infrared ray sensing camera module, and projecting the left eye 2D image and the right eye 2D image to form a 3D stereoscopic image on the screen, respectively. A plurality of beam projectors; In the screen correction method of the automatic screen correction system for a three-dimensional image projection comprising a computer device connected to a plurality of the infrared detection camera module and a plurality of beam projector, the screen correction program is installed,
An infrared image acquisition step of acquiring an infrared image of the screen reflecting infrared rays of the infrared radiation device from each infrared detection camera module;
A labeling processing step of labeling each element of the infrared image obtained by each infrared sensing camera module to distinguish it as an object;
A blob processing step of blob processing each object labeled in the labeling processing step;
Calculate the area of each blobed object, calculate the number of blobs while giving priority to the object with the largest area, and calculate the number of blobs calculated and the number of infrared reflecting markers (4) placed on the screen. Comparing the number of blobs to compare;
A blob center point calculating step of calculating a center point position of each blob when the number of blobs and the number of infrared reflection markers coincide with each other;
Generating inter-blob parallelograms constituting a parallelogram with four blob center points as vertices;
A two-dimensional homography generating step of generating and obtaining two-dimensional homography for changing the generated parallelogram into a rectangle;
A projector image adjustment step of converting the obtained two-dimensional homography information into keystone adjustment parameters of each beam projector to automatically perform screen correction on an image projected from each beam projector,
If the number of blobs and the number of infrared reflecting markers do not match each other in the comparison of the number of blobs, the three-dimensional image characterized by repeating the infrared image acquisition step, labeling processing step, blob processing step, blob number comparison determination step again Screen correction method using automatic screen correction system for projection. 제 1항에 있어서,
상기 라벨링 처리단계는 상기 적외선 영상 획득 단계에서 획득된 적외선 영상을 이진화(binarization)하는 이진화 처리단계 이후에 수행되는 것을 특징으로 하는 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법.The method of claim 1,
The labeling processing step is performed after the binarization processing step of binarizing the infrared image obtained in the infrared image acquisition step, the screen correction method using an automatic screen correction system for stereoscopic image projection. 제 2항에 있어서,
상기 이진화 처리단계는 오츠 이진화 알고리즘(ostu binarization algorithm)에 의해 수행되는 것을 특징으로 하는 입체영상 프로젝션을 위한 자동 화면보정 시스템을 이용한 화면보정방법.The method of claim 2,
The binarization processing step is a screen correction method using an automatic screen correction system for three-dimensional image projection, characterized in that performed by the ostu binarization algorithm. 삭제delete 삭제delete
KR1020130011000A 2013-01-31 2013-01-31 3d projecting image auto calibration method KR101273534B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130011000A KR101273534B1 (en) 2013-01-31 2013-01-31 3d projecting image auto calibration method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130011000A KR101273534B1 (en) 2013-01-31 2013-01-31 3d projecting image auto calibration method

Publications (1)

Publication Number Publication Date
KR101273534B1 true KR101273534B1 (en) 2013-06-17

Family

ID=48866766

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130011000A KR101273534B1 (en) 2013-01-31 2013-01-31 3d projecting image auto calibration method

Country Status (1)

Country Link
KR (1) KR101273534B1 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9277162B2 (en) 2013-09-27 2016-03-01 Hyundai Motor Company Keystone correction method and apparatus of curved display
US9430865B2 (en) 2014-01-07 2016-08-30 Electronics And Telecommunications Research Institute Real-time dynamic non-planar projection apparatus and method
CN106454292A (en) * 2016-09-29 2017-02-22 西安中科晶像光电科技有限公司 System and method for automatically matching double images by fixed mark
CN109672870A (en) * 2018-12-23 2019-04-23 吉林大学 A kind of building projection method for automatically split-jointing
CN110475109A (en) * 2019-09-11 2019-11-19 北京软通智慧城市科技有限公司 A kind of projection imaging system, method, apparatus and storage medium
CN111935465A (en) * 2019-05-13 2020-11-13 中强光电股份有限公司 Projection system, projection device and correction method of display image thereof
WO2020251075A1 (en) * 2019-06-12 2020-12-17 엘지전자 주식회사 Mobile terminal, and 3d image conversion method thereof
KR102245223B1 (en) 2020-12-14 2021-04-27 주식회사 글림시스템즈 Image processing system for displaying multi-layered beam projection contents on irregular projection surface and method thereof

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001339742A (en) * 2000-03-21 2001-12-07 Olympus Optical Co Ltd Three dimensional image projection apparatus and its correction amount calculator
JP2007298665A (en) * 2006-04-28 2007-11-15 Matsushita Electric Ind Co Ltd Projector

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001339742A (en) * 2000-03-21 2001-12-07 Olympus Optical Co Ltd Three dimensional image projection apparatus and its correction amount calculator
JP2007298665A (en) * 2006-04-28 2007-11-15 Matsushita Electric Ind Co Ltd Projector

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9277162B2 (en) 2013-09-27 2016-03-01 Hyundai Motor Company Keystone correction method and apparatus of curved display
US9430865B2 (en) 2014-01-07 2016-08-30 Electronics And Telecommunications Research Institute Real-time dynamic non-planar projection apparatus and method
CN106454292A (en) * 2016-09-29 2017-02-22 西安中科晶像光电科技有限公司 System and method for automatically matching double images by fixed mark
CN109672870A (en) * 2018-12-23 2019-04-23 吉林大学 A kind of building projection method for automatically split-jointing
CN111935465A (en) * 2019-05-13 2020-11-13 中强光电股份有限公司 Projection system, projection device and correction method of display image thereof
CN111935465B (en) * 2019-05-13 2022-06-17 中强光电股份有限公司 Projection system, projection device and correction method of display image thereof
WO2020251075A1 (en) * 2019-06-12 2020-12-17 엘지전자 주식회사 Mobile terminal, and 3d image conversion method thereof
US11756262B2 (en) 2019-06-12 2023-09-12 Lg Electronics Inc. Mobile terminal, and 3D image conversion method thereof
CN110475109A (en) * 2019-09-11 2019-11-19 北京软通智慧城市科技有限公司 A kind of projection imaging system, method, apparatus and storage medium
KR102245223B1 (en) 2020-12-14 2021-04-27 주식회사 글림시스템즈 Image processing system for displaying multi-layered beam projection contents on irregular projection surface and method thereof

Similar Documents

Publication Publication Date Title
KR101273534B1 (en) 3d projecting image auto calibration method
US11115633B2 (en) Method and system for projector calibration
CN108633333B (en) Method of calibrating a multi-view display
CN108307675B (en) Multi-baseline camera array system architecture for depth enhancement in VR/AR applications
US9560345B2 (en) Camera calibration
US10762652B2 (en) Hybrid depth detection and movement detection
US10560683B2 (en) System, method and software for producing three-dimensional images that appear to project forward of or vertically above a display medium using a virtual 3D model made from the simultaneous localization and depth-mapping of the physical features of real objects
JP7270702B2 (en) Depth sensing system and method
KR20100112853A (en) Apparatus for detecting three-dimensional distance
US10990062B2 (en) Display system
JP2019082680A (en) Method, device, and method for calibration of three-dimensional display device
US9639944B2 (en) Method and apparatus for determining a depth of a target object
KR102668245B1 (en) Apparatus and method for measuring depth of three dimensions
US10197809B2 (en) Display system based on hologram and hologram display method using the same
KR102185322B1 (en) System for detecting position using ir stereo camera
CN107644438A (en) Image processing apparatus, related depth estimation system and depth estimation method
CN104584075B (en) Object-point for description object space and the connection method for its execution
JP6740614B2 (en) Object detection device and image display device including the object detection device
US11195290B2 (en) Apparatus and method for encoding in structured depth camera system
JP7088721B2 (en) Information processing system and program
TWI588441B (en) Measuring method and apparatus for carrying out the measuring method
WO2018187743A1 (en) Producing three-dimensional images using a virtual 3d model
Kraus Wireless Optical Communication: Infrared, Time-Of-Flight, Light Fields, and Beyond
KR100926348B1 (en) Apparatus for embodying 3D online shopping mall and display method thereby

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20151222

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170602

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190603

Year of fee payment: 7