KR20050015737A - Real image synthetic process by illumination control - Google Patents

Real image synthetic process by illumination control

Info

Publication number
KR20050015737A
KR20050015737A KR1020030054682A KR20030054682A KR20050015737A KR 20050015737 A KR20050015737 A KR 20050015737A KR 1020030054682 A KR1020030054682 A KR 1020030054682A KR 20030054682 A KR20030054682 A KR 20030054682A KR 20050015737 A KR20050015737 A KR 20050015737A
Authority
KR
South Korea
Prior art keywords
image
subject
background
illumination
black
Prior art date
Application number
KR1020030054682A
Other languages
Korean (ko)
Inventor
이형석
Original Assignee
이형석
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이형석 filed Critical 이형석
Priority to KR1020030054682A priority Critical patent/KR20050015737A/en
Publication of KR20050015737A publication Critical patent/KR20050015737A/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/74—Circuits for processing colour signals for obtaining special effects
    • H04N9/75—Chroma key
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Circuits (AREA)
  • Studio Devices (AREA)

Abstract

PURPOSE: A real image synthetic process by illumination control is provided to synthesize a real image by matching illumination of a virtual set image modeled by a 3D program with illumination irradiated into an object such as an actor photographed in another place such as a real studio. CONSTITUTION: A real image synthetic process by illumination control includes the steps of storing a virtual set modeled in a super computer(20) and a subdivided set illumination image data, recognizing three-dimensional position data of an object(103) when photographing the object in a real studio, sending proper illumination brightness and a color control signal to a controller(30), controlling an illumination lamp(102) depending on the proper illumination brightness and the color control signal to illuminate the object, photographing the object and a black and white image using a black and white video camera(50), inputting the photographed object and the black and white image to a chroma keyer(60) to transparently process the input image except for the object and transmitting the image signal in which only the object exists, to an image synthetic unit(70), and synthesize the image signal of the object and the virtual set image signal at the image synthetic unit.

Description

조명제어에 의한 사실적 영상합성 방법{REAL IMAGE SYNTHETIC PROCESS BY ILLUMINATION CONTROL} Realistic image synthesis method by lighting control {REAL IMAGE SYNTHETIC PROCESS BY ILLUMINATION CONTROL}

본 발명은 조명제어에 의한 사실적 영상합성 방법에 관한 것으로서, 특히 가상 배경세트를 모델링한 배경화면의 조명과 다른 장소에서 실제로 촬영한 배우 등 피사체에 조사되는 조명을 같은 수준의 조명으로 일치시켜서 영상을 합성할 수 있는 조명제어에 의한 사실적 영상합성 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a realistic image synthesis method by lighting control. In particular, an image is generated by matching the illumination of a subject, such as an actor actually photographed at another place, with the illumination of a background modeling a virtual background set at the same level. The present invention relates to a realistic image synthesis method by synthesizing lighting control.

종래에는 3D 프로그램으로 컴퓨터에서 제작된 영화의 가상 배경세트 화면이나 텔레비전의 가상 배경세트 화면을 슈퍼컴퓨터에 저장하고, 실제 스튜디오 내에서 촬영한 실제의 배우 등 피사체의 장면을 블루스크린 기법을 이용하여 촬영하고 크로마 키어에서 파란 색상의 배경을 투명하게 처리하고 피사체만을 남겨 피사체와 슈퍼 컴퓨터에 저장된 가상 배경세트 화면을 영상 합성 유닛으로 보내 합성하므로써 시청자들이 합성한 화면을 볼 경우에 피사체의 조명과 3D 프로그램으로 제작된 배경세트 화면의 조명 밝기와 컬러가 일치되지 않아 어색하였다.Conventionally, a virtual background set screen of a movie produced on a computer or a virtual background set screen of a television is stored in a super computer using a 3D program, and a scene of a subject such as a real actor shot in a real studio is shot using a blue screen technique. When the chroma keyer transparently processes the blue background and leaves only the subject, the subject and the virtual background set screen stored in the super computer are sent to the image synthesizing unit for compositing. It was awkward because the brightness and color of the produced background set screen did not match.

따라서, 시청자들에게 실제로 배우 등 피사체와 배경을 함께 촬영한 것과 같은 사실감을 느끼게 할 수 없어 시청자들은 합성된 화면을 볼 때 부자연스럽게 느끼게 되는 문제점이 있었다.Therefore, the viewers may not be able to feel the realism of actually photographing the subject and the background together such as an actor, and thus the viewers may feel unnatural when viewing the synthesized screen.

따라서, 본 발명은 상기 문제점을 해결하기 위하여 이루어진 것으로서, 본 발명의 목적은 가상 배경세트를 3D프로그램으로 모델링한 가상 배경세트 화면의 조명과 실제 스튜디오 등 다른 장소에서 실제로 촬영한 배우 등 피사체에게 조사되는 조명을 같은 수준의 조명으로 일치시켜 사실감 있는 영상을 합성할 수 있는 조명제어에 의한 사실적 영상합성 방법을 제공하는데 있다. Accordingly, the present invention has been made to solve the above problems, and an object of the present invention is to illuminate a subject such as an actor actually photographed at another place, such as lighting of a virtual background set screen modeling a virtual background set as a 3D program and a real studio. It is to provide a realistic image synthesis method by lighting control that can synthesize a realistic image by matching lighting to the same level of lighting.

이하, 본 발명의 일실시예에 의한 조명제어에 의한 사실적 영상합성 시스템에 관하여 첨부 도면에 의거하여 상세히 설명한다.Hereinafter, a realistic image synthesis system by illumination control according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 의한 조명제어에 의한 사실적 영상합성 방법의 블록도이다. 1 is a block diagram of a realistic image synthesis method by lighting control according to an embodiment of the present invention.

도 1에 도시한 바와 같이 본 발명의 일 실시예에 의한 조명제어에 의한 사실적 영상합성 방법은,As shown in FIG. 1, a realistic image synthesis method by lighting control according to an embodiment of the present invention is provided.

그래픽용 컴퓨터(10)에서 3D 프로그램을 이용하여 가상 배경세트(a)를 제작하여 모델링하고, 또한 상기에서 모델링된 가상 배경세트(a)를 다수의 격자상으로 세분하여 세분화된 배경조명 이미지 정보(b; HDRI)를 생성한 다음 상기 슈퍼 컴퓨터(20)에 전송하여 상기 슈퍼 컴퓨터(20)에 모델링된 가상 배경세트(a)와 세분화된 배경조명 이미지 정보(b)를 저장하는 단계와;In the graphics computer 10, a virtual background set (a) is produced and modeled using a 3D program, and the virtual background set (a) modeled above is subdivided into a plurality of grids to provide detailed background light image information ( b) generating and transmitting the HDRI to the supercomputer 20 to store the virtual background set modeled on the supercomputer 20 and the subdivided background light image information b;

실제 스튜디오 내에서 피사체를 촬영할 때, 상기 실제 스튜디오 내에 위치하는 배우 등의 피사체(103)에 부착된 위치검출센서(도시하지 않음)에서 출력되는 피사체(103)의 3차원 위치정보(c; 예를 들면 피사체의 x축, y축, z축의 좌표)를 슈퍼 컴퓨터(20)에서 받아 인식하는 단계와; When photographing a subject in an actual studio, three-dimensional position information c of the subject 103 output from a position detection sensor (not shown) attached to the subject 103 such as an actor located in the actual studio (e.g., For example, the x-axis, y-axis, and z-axis coordinates of the subject;

상기 슈퍼 컴퓨터(20)에서 피사체의 3차원 위치정보(c)와 세분화된 배경조명 소이미지 정보(b)를 일치시켜서 피사체가 움직이는 이동 궤적에 따라 피사체(103)가 받을 수 있는 조명정보를 맵핑하여 피사체(103)가 받아야 할 조명의 밝기 값과 컬러 값을 연산하여 제어기(30)에 적절한 조명 밝기 및 컬러 제어신호를 보내는 단계와;By matching the three-dimensional position information (c) of the subject and the subdivided background light small image information (b) in the super computer 20, the illumination information that the subject 103 can receive according to the moving trajectory of the subject is mapped out. Calculating a brightness value and a color value of an illumination to be received by the subject 103 and sending an appropriate illumination brightness and color control signal to the controller 30;

상기 제어기(30)에서 피사체(103)가 받아야 할 조명의 밝기와 컬러 제어신호에 의거해서 조명 램프(102)를 제어하여 피사체에 조명하는 단계와;Illuminating the subject by controlling an illumination lamp (102) based on the brightness and color control signal of the illumination to be received by the subject (103) by the controller (30);

순차주사 가능한 비디오 카메라(40)로 피사체와 배경을 컬러로 컬러영상(d ; 촬영 소스라고도 한다)을 촬영하고, 이와 동시에 상기 비디오 카메라(40)의 촬영위치와 같은 위치에서 적외선 필터가 부착된 흑백 비디오 카메라(50)에 의해 피사체와 배경을 흑백영상(e ; 매트(matt) 소스라고도 한다)으로 촬영하는 단계와;A video camera 40 capable of sequential scanning captures a color image (d; also referred to as a shooting source) of the subject and the background in color, and at the same time the monochrome filter is attached to the infrared filter at the same position as that of the video camera 40. Photographing the subject and the background with a black and white image (e; also called a matte source) by the video camera 50;

상기 비디오 카메라(40)에 의해 피사체와 배경을 컬러로 촬영한 컬러영상(d)과 흑백 비디오 카메라(50)에 의해 피사체 및 배경을 흑백으로 촬영한 흑백영상(e)을 크로마 키어(60)에 입력하여 상기 크로마 키어(60)에 입력된 영상에서 피사체만을 남기고 배경화면을 투명하게 처리하여 상기 영상합성유닛(70)으로 전송하는 단계와;The color image (d) photographing the subject and the background in color by the video camera 40 and the monochrome image (e) photographing the subject and the background in black and white by the black and white video camera 50 are supplied to the chroma key 60. Inputting the image to the image synthesis unit (70) by transparently processing a background screen leaving only the subject in the image inputted to the chroma keyer (60);

상기 크로마 키어(60)로부터 배경화면이 투명하게 처리되고 피사체만이 존재하는 영상신호와 상기 슈퍼 컴퓨터(20)에서 출력되는 가상 배경세트 영상신호(f ; 배경 소스라고도 한다)를 받아서 영상합성유닛(70)에서 영상을 합성하는 단계로 이루어지는 조명제어에 의한 사실적 영상합성 방법에 관한 것이다.The image synthesis unit receives a video signal transparently processed from the chroma keyer 60 and a video signal having only a subject and a virtual background set video signal (f; also referred to as a background source) output from the supercomputer 20. 70), the present invention relates to a realistic image synthesis method by illumination control.

이와 같이 구성된 본 발명의 일 실시예에 따른 조명제어에 의한 사실적 영상합성 방법의 구성 및 작용에 대하여 더 상세히 설명하면 다음과 같다.Hereinafter, the configuration and operation of the realistic image synthesis method by lighting control according to an embodiment of the present invention configured as described above will be described in detail.

먼저, 상기 그래픽용 컴퓨터(10)에서 3D 프로그램을 이용하여 가상 배경세트를 제작하여 모델링하고, 상기에서 모델링된 가상 배경세트를 다수의 격자상으로 세분하여 세분화된 배경조명 이미지 정보(HDRI)를 생성하고, 슈퍼 컴퓨터(20)에 모델링된 가상 배경세트와 세분화된 배경조명 이미지 정보(HDRI)를 전송하여 저장한다.First, a virtual background set is modeled by using a 3D program in the graphic computer 10, and the modeled virtual background set is subdivided into a plurality of grids to generate granular background image information (HDRI). The virtual background set modeled on the supercomputer 20 and the detailed background image information (HDRI) are transmitted and stored.

세분화된 배경조명 이미지 정보를 미리 생성하는 이유는 다음과 같다.The reason for generating the detailed background light image information in advance is as follows.

배경조명 이미지 정보는 피사체의 정지 상태에서는 쉽게 추출할 수 있지만, 피사체가 움직이는 실시간으로는 배경조명 이미지 정보의 생성이 거의 불가능하기 때문에 본 발명에서는 세분화된 배경조명 이미지 정보를 미리 추출하여 사용하는 것이다. 즉, 가상 배경세트를 격자상으로 세분하고 그 격자 안에 세분화된 배경조명 이미지 정보(HDRI)를 미리 생성해 내면 피사체가 어디 방향을 움직이더라도 슈퍼컴퓨터에서 피사체의 위치 정보를 받아 그에게 적용시킬 조명 정보를 실시간으로 읽고, 적용시킬 수 있게 되는 것이다.Background image information can be easily extracted in the stationary state of the subject, but since it is almost impossible to generate background image information in real time in which the subject is moving, the present invention extracts and uses the detailed background image information in advance. In other words, if you subdivide the virtual background set into a grid and generate subdivided background image information (HDRI) in the grid in advance, the supercomputer receives the location information of the subject and applies it to the supercomputer no matter where the subject moves. Can be read and applied in real time.

다음, 실제 스튜디오 내의 주위에는 조명설비(101)를 설치하게 되는데 상기 조명설비(101)는 반구형으로 형성하는 것이 바람직하며 다수의 조명 램프(102)가 설치되어 있다.Next, the lighting equipment 101 is installed around the actual studio. The lighting equipment 101 is preferably formed in a hemispherical shape, and a plurality of lighting lamps 102 are installed.

다음, 실제 스튜디오(100) 내에서 배우 등의 피사체를 촬영하게 되는데, 실제 스튜디오 내에 위치하는 배우 등의 피사체에 부착된 위치검출센서(도시하지 않음)에서 출력되는 피사체의 3차원 위치정보(예를 들면 피사체의 x축, y축, z축의 좌표)는 슈퍼 컴퓨터(20)에 전송되어 슈퍼 컴퓨터(20)는 피사체의 3차원 위치정보를 인식하게 된다. Next, a subject such as an actor is photographed in the actual studio 100, and the 3D position information of the subject output from a position detection sensor (not shown) attached to a subject such as an actor located in the actual studio (for example, For example, the x-axis, y-axis, and z-axis coordinates of the subject are transmitted to the supercomputer 20 so that the supercomputer 20 recognizes the 3D position information of the subject.

상기 슈퍼 컴퓨터(20)는 피사체의 3차원 위치정보와 세분화된 배경조명 이미지 정보(HDRI)를 일치시켜서 피사체가 움직이는 이동 궤적에 따라 피사체가 받을 수 있는 조명정보를 맵핑하여 피사체가 받아야 할 조명의 밝기 값과 컬러 값을 연산하여 제어기(30)에 적절한 밝기 및 컬러 제어신호를 보내게 된다.The supercomputer 20 matches the three-dimensional position information of the subject with the subdivided background image information (HDRI), and maps the illumination information that the subject can receive according to the moving trajectory of the subject so that the brightness of the illumination that the subject should receive Value and color values are calculated to send appropriate brightness and color control signals to the controller 30.

제어기(30)에서는 피사체가 받아야 할 적절한 조명의 밝기와 컬러 제어신호에 의거해서 조명 램프(102)를 제어하여 피사체에 조명한다.The controller 30 controls the illumination lamp 102 based on the appropriate brightness and color control signal of the subject to be illuminated by the subject.

다음, 순차주사 가능한 컬러 비디오 카메라(40)에 의해 피사체와 배경을 컬러로 컬러영상(d ; 촬영 소스라고도 한다)을 촬영하고, 이와 동시에 상기 컬러 비디오 카메라(40)의 촬영위치와 같은 위치에서 적외선 필터(52)가 부착된 흑백 비디오 카메라(50)에 의해 피사체와 배경을 흑백영상(e ; 매트(matt) 소스라고도 한다)으로 촬영한다.Next, a color image camera (d; also referred to as a photographing source) is photographed in color by the color video camera 40 capable of sequentially scanning, and at the same time, infrared rays are located at the same position as that of the color video camera 40. The black and white video camera 50 to which the filter 52 is attached photographs the subject and the background as a black and white image (e. Also referred to as a matte source).

본 발명에서는 조명 중에 파란색 또는 녹색이 포함될 가능성이 있으므로 종래의 블루 스크린 기법을 사용하지 않고 적외선으로 매트(matt) 소스를 생성하는 기법을 사용한다.In the present invention, since blue or green may be included in the lighting, a technique of generating a matte source by infrared light is used without using a conventional blue screen technique.

이때 빔 스플리터{BEAM SPLITTER(55)}를 사용해서 촬영을 하면 컬러 비디오 카메라(40)와 흑백 비디오 카메라(50)의 촬영 위치를 일치시키기가 용이하다.At this time, if a picture is taken using the beam splitter (BEAM SPLITTER 55), it is easy to match the picture positions of the color video camera 40 and the black and white video camera 50. FIG.

여기에서 상기 흑백 비디오 카메라(50)에 의해 피사체 및 배경을 흑백영상(e)으로 촬영하는 경우에 상기 흑백 비디오 카메라(50)의 대물렌즈 앞쪽에는 적외선패스필터(52)가 부착되어 있어서, 배경에 조사된 적외선은 배경에서 적외선이 반사되어 흑백 비디오 카메라(50)에 촬영되고, 피사체 뒤에서 반사되는 적외선은 피사체에 가로 막혀 반사되지 않으므로, 상기 흑백 비디오 카메라(50)에 의해 촬영된 배경은 검게 촬영되고, 상기 흑백 비디오 카메라(50)에 의해 촬영된 피사체는 희게 촬영된다. In this case, when the subject and the background are photographed by the monochrome video camera 50 as a monochrome image (e), an infrared pass filter 52 is attached to the front of the objective lens of the monochrome video camera 50, The irradiated infrared rays are photographed by the black and white video camera 50 by reflecting the infrared rays in the background, and the infrared rays reflected from behind the subject are not blocked by the object so that the background photographed by the black and white video camera 50 is black. The subject photographed by the monochrome video camera 50 is photographed white.

상기 컬러 비디오 카메라(40)에 의해 피사체와 배경을 컬러로 촬영한 컬러영상(d)과 흑백 비디오 카메라(50)에 의해 피사체 및 배경을 흑백으로 촬영한 흑백영상(e)은 크로마 키어(60)에 입력되며 상기 크로마 키어(60)에 입력된 이들 영상은 피사체만을 남기고 배경화면은 투명하게 처리되어 상기 영상합성유닛(70)으로 보내게 된다.The color image (d) photographing the subject and the background in color by the color video camera 40 and the monochrome image (e) photographing the subject and the background in black and white by the monochrome video camera 50 are chroma key (60). These images, which are inputted to the chroma keyer 60 and are input to the chroma keyer 60, leave only the subject and the background image is transparently sent to the image synthesis unit 70.

상기 영상합성유닛(70)에서는 상기 크로마 키어(60)로부터 배경화면이 투명처리되고 피사체만이 존재하는 영상신호를 받아서 상기 슈퍼 컴퓨터(20)에서 출력되는 가상 배경세트 영상신호(f ; 배경 소스라고도 한다)를 받아서 영상을 합성해서 방송용 영상신호, 영화용 영상신호 또는 광고용 영상신호로 저장하거나 방송신호로 송출한다.In the image synthesizing unit 70, a background image is transparently processed from the chroma keyer 60, and a virtual background set image signal (f; background source) output from the super computer 20 is received from the super computer 20. Video is synthesized and stored as a broadcast video signal, a movie video signal, or an advertisement video signal, or transmitted as a broadcast signal.

따라서 본 발명은 가상 배경세트를 모델링한 배경의 조명과, 다른 장소에서 실제로 촬영한 배우 등의 피사체에게 조사되는 조명을 같은 조명 수준으로 일치시키면서 영상을 합성할 수 있으므로서 실제의 현장에서 피사체와 배경을 동시에 촬영한 화면과 같이 시청자들에게 사실감을 느끼게 할 수 있다.Therefore, the present invention can synthesize the image while matching the illumination of the background modeling the virtual background set and the subject, such as the actor actually photographed in another place at the same lighting level, while the subject and background in the actual scene It can make viewers feel real like a screen shot simultaneously.

상기 설명에 있어서, 특정 실시예를 들어서 도시하고 설명하였으나, 본 발명은 이에 한정되는 것은 아니며, 예를 들면 본 발명의 개념을 이탈하지 않는 범위내에서 이 기술 분야의 통상의 지식을 가진 자에 의해 여러가지로 설계변경할 수 있음은 물론이다.In the above description, the specific embodiments have been shown and described, but the present invention is not limited thereto, for example, by those skilled in the art without departing from the concept of the present invention. Of course, the design can be changed in various ways.

앞에서 설명한 바와 같이 본 발명의 조명제어에 의한 사실적 영상합성 방법에 의하면, 본 발명은 가상 배경세트를 3D프로그램으로 모델링한 가상 배경세트 화면의 조명과 실제 스튜디오 등 다른 장소에서 실제로 촬영한 배우 등 피사체에게 조사되는 조명을 같은 수준의 조명으로 일치시켜 사실감 있는 영상을 합성할 수 있다. As described above, according to the realistic image synthesis method according to the lighting control of the present invention, the present invention provides a virtual background set modeled by a 3D program to illuminate a virtual background set screen and an actor such as an actor actually photographed in another place such as a real studio. Match the illuminated light to the same level of light to create a realistic image.

따라서, 시청자들은 실제의 현장에서 피사체와 배경을 함께 촬영한 화면과 같이 시청자들에게 실제로 사실감을 느끼게 할 수 있다는 매우 뛰어난 효과가 있다.Therefore, the viewers have a very excellent effect of making the viewers feel real, such as a screen shot of the subject and the background together in the actual scene.

도 1은 본 발명의 일실시예에 의한 조명제어에 의한 사실적 영상합성 방법의 블록도이다.1 is a block diagram of a realistic image synthesis method by lighting control according to an embodiment of the present invention.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for the main parts of the drawings>

10:그래픽용 컴퓨터 20:슈퍼 컴퓨터10: graphic computer 20: supercomputer

30:제어기 40:비디오 카메라30: controller 40: video camera

50:흑백 비디오 카메라 52:적외선패스필터50: monochrome video camera 52: infrared pass filter

55:빔 스플리터 60:크로마 키어55: beam splitter 60: chroma keyer

70:영상신호 합성유닛 100:실제의 스튜디오70: video signal synthesizing unit 100: real studio

101:조명 설비 102:조명 램프 101: lighting equipment 102: lighting lamp

103:피사체 103: Subject

Claims (3)

그래픽용 컴퓨터(10)에서 3D 프로그램을 이용하여 가상 배경세트를 제작하여 모델링하고 또한 상기에서 모델링된 가상 배경세트를 다수의 격자상으로 세분하여 세분화된 배경조명 이미지 정보(HDRI)를 생성한 다음, 상기 슈퍼 컴퓨터(20)에 전송하여 상기 슈퍼 컴퓨터(20)에 모델링된 가상 배경세트와 세분화된 배경조명 이미지 정보를 저장하는 단계와;In the graphics computer 10, a virtual background set is produced and modeled using a 3D program, and the modeled virtual background set is subdivided into a plurality of grids to generate granular background image information (HDRI). Transmitting to the supercomputer 20 to store the virtual background set modeled on the supercomputer 20 and the detailed background light image information; 실제 스튜디오 내에서 피사체를 촬영할 때, 상기 실제 스튜디오 내에 위치하는 배우 등의 피사체에 부착된 위치검출센서에서 출력되는 피사체의 3차원 위치정보(c)를 슈퍼 컴퓨터(20)가 받아들여 인식하는 단계와; When photographing a subject in an actual studio, the super computer 20 receives and recognizes three-dimensional position information (c) of the subject output from a position detection sensor attached to a subject such as an actor located in the actual studio; ; 상기 슈퍼 컴퓨터(20)에서 피사체의 3차원 위치정보(c)와 세분화된 배경조명 이미지 정보(b)를 일치시켜서 피사체가 움직이는 이동 궤적에 따라 피사체가 받을 수 있는 조명정보를 맵핑하여 피사체가 받아야 할 조명의 밝기 값과 컬러 값을 연산하여 제어기(30)에 밝기 및 컬러 제어신호를 보내는 단계와;The super computer 20 matches the three-dimensional position information (c) of the subject with the subdivided background light image information (b) to map the illumination information that the subject can receive according to the moving trajectory of the subject to be received by the subject. Calculating brightness and color values of the illumination and sending brightness and color control signals to the controller 30; 상기 제어기(30)에서 피사체가 받아야 할 조명의 밝기와 컬러 제어신호에 의거해서 조명 램프(102)를 제어하여 피사체에 조명하는 단계와;Controlling the illumination lamp (102) to illuminate the subject based on the brightness and color control signal of the illumination to be received by the subject in the controller (30); 순차주사 가능한 비디오 카메라(40)로 피사체와 배경을 컬러로 컬러영상을 촬영하고, 이와 동시에 상기 비디오 카메라(40)의 촬영위치와 같은 위치에서 적외선패스 필터(52)가 부착된 흑백 비디오 카메라(50)에 의해 피사체와 배경을 흑백영상으로 촬영하는 단계와;A black and white video camera 50 having an infrared pass filter 52 attached thereto at the same position as the photographing position of the video camera 40 by capturing a color image of a subject and a background with a sequential scanning video camera 40. Photographing the subject and the background in a black and white image; 상기 비디오 카메라(40)에 의해 피사체와 배경을 컬러로 촬영한 컬러영상(d)과 흑백 비디오 카메라(50)에 의해 피사체 및 배경을 흑백으로 촬영한 흑백영상(e)을 크로마 키어(60)에 입력하여 상기 크로마 키어(60)에 입력된 영상에서 피사체만을 남기고 배경화면을 투명하게 처리한 다음, 상기 영상합성유닛(70)으로 전송하는 단계와;The color image (d) photographing the subject and the background in color by the video camera 40 and the monochrome image (e) photographing the subject and the background in black and white by the black and white video camera 50 are supplied to the chroma key 60. Inputting and processing the background screen transparently, leaving only the subject in the image input to the chroma keyer 60, and transmitting the image to the image synthesis unit 70; 상기 크로마 키어(60)로부터 배경화면이 투명처리 되고 피사체만이 존재하는 영상신호와 상기 슈퍼 컴퓨터(20)에서 출력되는 가상 배경세트 영상신호를 받아서 영상합성유닛(70)에서 영상을 합성하는 단계로 이루어지는 조명제어에 의한 사실적 영상합성 방법.The image synthesis unit 70 synthesizes an image by receiving an image signal of which the background image is transparent from the chroma keyer 60 and only a subject and a virtual background set image signal output from the super computer 20. Realistic image synthesis method by lighting control. 제1 항에 있어서, 상기 조명설비(101)는 다수의 조명 램프(102)가 구비된 반 구형 형상으로 되는 조명제어에 의한 사실적 영상합성 방법.The method according to claim 1, wherein the lighting equipment (101) has a semi-spherical shape with a plurality of lighting lamps (102). 제1 항에 있어서, 상기 흑백 비디오 카메라(50)에 의해 피사체와 배경에 대한 흑백영상 촬영은 적외선을 이용하여 매트(matt)소스를 생성하는 기법을 사용하여 되는 것을 특징으로 하는 조명제어에 의한 사실적 영상합성 방법.The method of claim 1, wherein the black and white video photographing of the subject and the background by the black and white video camera 50 uses a technique of generating a matte source using infrared light. Image synthesis method.
KR1020030054682A 2003-08-07 2003-08-07 Real image synthetic process by illumination control KR20050015737A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020030054682A KR20050015737A (en) 2003-08-07 2003-08-07 Real image synthetic process by illumination control

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030054682A KR20050015737A (en) 2003-08-07 2003-08-07 Real image synthetic process by illumination control

Publications (1)

Publication Number Publication Date
KR20050015737A true KR20050015737A (en) 2005-02-21

Family

ID=37226490

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030054682A KR20050015737A (en) 2003-08-07 2003-08-07 Real image synthetic process by illumination control

Country Status (1)

Country Link
KR (1) KR20050015737A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013081398A1 (en) * 2011-11-29 2013-06-06 삼성전자주식회사 Image processing apparatus and method
KR101373631B1 (en) * 2012-09-17 2014-03-12 (주)지니트 System for composing images by real time and method thereof
US8768053B2 (en) 2008-10-17 2014-07-01 Samsung Electronics Co., Ltd. Image processing apparatus and method of providing high sensitive color images
KR101439787B1 (en) * 2013-08-20 2014-09-12 심철현 Image capturing device with time lapse guide system
US8989487B2 (en) 2008-05-19 2015-03-24 Samsung Electronics Co., Ltd. Apparatus and method for combining images
KR20160094030A (en) 2015-01-30 2016-08-09 김대홍 Lighting design service system using smart terminal
US9710958B2 (en) 2011-11-29 2017-07-18 Samsung Electronics Co., Ltd. Image processing apparatus and method

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8989487B2 (en) 2008-05-19 2015-03-24 Samsung Electronics Co., Ltd. Apparatus and method for combining images
US9736403B2 (en) 2008-05-19 2017-08-15 Samsung Electronics Co., Ltd. Apparatus and method for combining images
US10368015B2 (en) 2008-05-19 2019-07-30 Samsung Electronics Co., Ltd. Apparatus and method for combining images
US8768053B2 (en) 2008-10-17 2014-07-01 Samsung Electronics Co., Ltd. Image processing apparatus and method of providing high sensitive color images
US9025871B2 (en) 2008-10-17 2015-05-05 Samsung Electronics Co., Ltd. Image processing apparatus and method of providing high sensitive color images
WO2013081398A1 (en) * 2011-11-29 2013-06-06 삼성전자주식회사 Image processing apparatus and method
US9710958B2 (en) 2011-11-29 2017-07-18 Samsung Electronics Co., Ltd. Image processing apparatus and method
KR101373631B1 (en) * 2012-09-17 2014-03-12 (주)지니트 System for composing images by real time and method thereof
KR101439787B1 (en) * 2013-08-20 2014-09-12 심철현 Image capturing device with time lapse guide system
KR20160094030A (en) 2015-01-30 2016-08-09 김대홍 Lighting design service system using smart terminal

Similar Documents

Publication Publication Date Title
CN112040092B (en) Real-time virtual scene LED shooting system and method
EP2884337B1 (en) Realistic scene illumination reproduction
US5737031A (en) System for producing a shadow of an object in a chroma key environment
AU2018225269B2 (en) Method, system and apparatus for visual effects
KR20160003614A (en) Method For Producting Virtual Stereo Studio Image In Real-Time Virtual Stereo Studio System
EP0878099B1 (en) Chroma keying studio system
JPH0628449A (en) Image synthesizing device
CN113692734A (en) System and method for acquiring and projecting images, and use of such a system
KR20050015737A (en) Real image synthetic process by illumination control
JPH1127577A (en) Image system with virtual visual point
CN107430841B (en) Information processing apparatus, information processing method, program, and image display system
JP7011728B2 (en) Image data output device, content creation device, content playback device, image data output method, content creation method, and content playback method
Bimber et al. Digital illumination for augmented studios
WO2024042893A1 (en) Information processing device, information processing method, and program
WO2024075525A1 (en) Information processing device and program
CN219802409U (en) XR virtual film-making real-time synthesis system
WO2024048295A1 (en) Information processing device, information processing method, and program
JP4174018B2 (en) Video shooting system
US20230319226A1 (en) System For Providing Dynamic Backgrounds In Live-Action Videography
WO2000064144A1 (en) Method and apparatus for creating artificial reflection
WO2023090038A1 (en) Information processing apparatus, image processing method, and program
WO2023047645A1 (en) Information processing device, image processing method, and program
KR101788471B1 (en) Apparatus and method for displaying augmented reality based on information of lighting
CN117941340A (en) Information processing apparatus, video processing method, and program
CN115966143A (en) Background display device

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
NORF Unpaid initial registration fee