KR20230018571A - 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션 - Google Patents

Abstract

본 발명은 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에 관한 것으로, 리얼타임 엔진을 이용하여 촬영 상황 및 배경이 수시로 변경가능하게 함으로써 스튜디오 내에서 다양한 씬을 촬영하게 하는 LED월과, 상기 LED월에 비춰진 상황과 배우를 촬영하여 씬을 제작하는 카메라와, 상기 카메라의 이동 경로를 포착하여 전후 또는 좌우방향으로 카메라의 이동을 제어하는 트래커로 구성되어서, 리얼타임 엔진에서 라이브 상기 LED월로 전송한 이미지 결과물과 카메라 트레킹을 결합하여 카메라 내에서 최종 결과물 이미지를 제작하는 것을 특징으로 한다.

Description

버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션{Image photographing solution of extended reality based on virtual production system}

본 발명은 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에 관한 것으로, 보다 상세하게는 각각 별도로 촬영된 영상과 배경이 하나의 영상으로 결합되도록 제작하는 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에 관한 것이다.

현대 멀티미디어 발전이 있기 전, 고전적인 광고매체는 신문광고, 잡지광고, 신문광고, 옥외광고, 방송광고 등으로 크게 분류될 수 있다.

이는 현대 사회에서도 흔히 접할 수 있으며 오랜 기간 활용되어온 방법으로 다양한 작품과 콘텐츠가 존재한다.

자신의 기업을 홍보하고 관객의 정보와 관심도를 이끌어 내기 위해 기업은 더욱 참신하고 흥미로운 방식으로 관중에게 다가가야 한다.

멀티미디어는 다양하게 발전해 왔으며 뉴미디어영역이 확대되었다.

시각, 청각, 후각, 촉각을 모두 자극시키며 참여자에게 신비로운 경험 제공이 가능해지고 있으며 디지털과 아날로그의 혼합, 소통, 조화가 이루어 지고 있다.

여기서 인터랙티브 영상광고는 오프라인에서 아날로그적으로 접근하는 관객에게 디지털 영상을 노출해주고 소통의 서비스를 마련하게 된다.

기존의 고전적인 광고 방식보다 참신하며 다양한 현대인이 출퇴근길에 접하는 건물 내부/외부 및 공공장소에 설치 가능하다.

이렇게 인터랙티브 기술을 이용한 디지털 광고는 관객에세 신비로운 경험을 제공하게 된다.

우선 영상은 프로젝터를 이용하게 디스플레이 되게 된다. 프로젝션의 방식 또한 여러가지 방법이 있다. 영상은 크로마키 촬영을 통해 이루어진다.

크로마키 촬영은 보통 방송국에서 기상캐스터룰 촬영할때 가장 빈번히 쓰이는 기술이다.

영상에 보이는 모델은 블루스크린에 프로젝셔되는 정보영상을 모니터를 통해 본인과 정보영상을 함께 보게된다.

여기서 모델은 아날로그 방식인 자신과 프로젝션되는 디지털 영상 사이에서 다양한 인터랙티브 경험을 하고 있다.

본 발명 또한 비슷하게 영상과 관객을 소통을 목적으로 한다. 광고에 활용되는 모델은 추후 다양한 분야에서 선택 할 수있다.

본 발명은 처음 케이팝 문화 홍보를 위해 구안되었다. 케이팝을 예를 들자면, 모델은 연예인이 되겠다.

연예인을 우선 크로마키 촬영한뒤 다양한 에니메이션을 추가하고 이를 관람하는 관객을 촬영한 영상과 합성하고 살시간으로 보여준다면 영상과 관객은 서로를 바라보며 간접 커뮤니케이션이 가능하게 된다.

또한 이 과정에서 기업은 자신의 광고전략에 맞추어 상품 및 브랜드 이미지를 간접 노출시키게 되고 관객은 이를 간접적으로 접하게 된다.

영상의 마지막 부분에서 고객의 정보 전송과 SNS 게시의 동의를 얻으므로서 온라인 홍보 효과 또한 가능하게 된다.

고전적 광고매체인 신문, 잡지, 방송 등을 고려해보았을때 인터랙티브 영상광고는 옥외광고 형태로 외부에 전시되게 되고, 관객은 인터랙티브를 통해 SNS에 게시하여 기업은 저렴한 비용으로 광교 효과를 누릴 수 있게 된다.

본 발명의 목적은 각각 별도로 촬영된 영상과 배경이 하나의 영상으로 결합되도록 제작하되, 실제 카메라 촬영과 3D로 제작된 가상의 배경이 하나가 되어 리얼리티를 강조한 영상을 촬영하는 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션을 제공하는 데에 있다.

본 발명의 목적을 성취하기 위한 일 실시예에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션은, 리얼타임 엔진을 이용한 실시간 랜더링을 통해서, 실제 카메라로 촬영된 그린스크린 배경과 3D로 제작된 가상 배경이 하나의 합성 영상로 되어 리얼리티를 강조한 영상으로 제작되는 것을 특징으로 한다.

본 발명의 다른 실시예에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션은, 리얼타임 엔진을 이용하여 촬영 상황 및 배경이 수시로 변경가능하게 함으로써 스튜디오 내에서 다양한 씬을 촬영하게 하는 LED월과, 상기 LED월에 비춰진 상황과 배우를 촬영하여 씬을 제작하는 카메라와, 상기 카메라의 이동 경로를 포착하여 전후 또는 좌우방향으로 카메라의 이동을 제어하는 트래커로 구성되어서, 리얼타임 엔진에서 라이브 상기 LED월로 전송한 이미지 결과물과 카메라 트레킹을 결합하여 카메라 내에서 최종 결과물 이미지를 제작하는 것을 특징으로 한다.

본 발명의 다른 실시예에 따르면, 상기 트래커의 이동에 의한 상기 카메라의 이동에 따라서 상기 LED월의 배경도 동시에 이동되는 것을 특징으로 한다.

본 발명의 실시예에 따라서, 각각 별도로 촬영된 영상과 배경이 하나의 영상으로 결합되도록 제작하되, 실제 카메라 촬영과 3D로 제작된 가상의 배경이 하나가 되어 리얼리티를 강조한 영상을 촬영하는 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션을 이용함으로써, 배우 뒤쪽으로 리얼타임 이미지를 프로젝션할 수 있는 효과를 제공한다.

도 1은 본 발명의 일 실시예에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에서 크로마키 촬영 기법을 보인 도면.
도 2는 본 발명의 다른 실시예에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에서 LED월 촬영 기법을 보인 개략도.
도 3은 본 발명의 다른 실시예에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에서 LED월 촬영 기법을 보인 도면.

이하, 본 발명에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에 대한 바람직한 실시예들에 대해 첨부된 도면들을 참조로 하여 상세히 설명한다.

도 1은 본 발명의 실시예에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에서 크로마키 촬영 기법을 보인 도면이고, 도 2는 본 발명의 실시예에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에서 LED월 촬영 기법을 보인 개략도이며, 도 3은 본 발명의 실시예에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에서 LED월 촬영 기법을 보인 도면이다.

우선, 도면들 중, 동일한 구성요소 또는 부품들은 가능한 동일한 참조부호로 나타내고 있음에 유의하여야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지기능 혹은 구성에 대한 구체적인 설명은 본 발명의 요지를 모호하지 않게 하기 위하여 생략하기로 한다.

각각 별도로 촬영된 영상과 배경이 하나의 영상으로 결합되도록 제작하되, 실제 카메라 촬영과 3D로 제작된 가상의 배경이 하나가 되어 리얼리티를 강조한 영상을 촬영하는 본 발명의 실시예들에 따른 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션에서는 도 1에 도시된 바와 같은 크로마키 촬영 기법과 도 2 및 도 3에 도시된 바와 같은 LED월 촬영 기법이 이용되었다.

상기 크로마키 촬영 기법은, 리얼타임 엔진을 이용한 실시간 랜더링을 통해서, 실제 카메라로 촬영된 그린스크린 배경(1)과 3D로 제작된 가상 배경(2)이 하나의 합성 영상(3)로 되어 리얼리티를 강조한 영상으로 제작된다.

즉, 그린스크린 배경(1)으로 촬영된 영상이 엔진을 이용하여 실시간 랜더링으로 가상 배경(2)과 하나가 되어 영상이 제작되는 것이다.

상기 LED월 촬영 기법은, 리얼타임 엔진을 이용하여 촬영 상황 및 배경이 수시로 변경가능하게 함으로써 스튜디오 내에서 다양한 씬을 촬영하게 하는 LED월(10)과, 상기 LED월에 비춰진 상황과 배우를 촬영하여 씬을 제작하는 카메라(20)와, 상기 카메라(20)의 이동 경로를 포착하여 전후 또는 좌우방향으로 카메라(20)의 이동을 제어하는 트래커(30)로 구성되어서, 리얼타임 엔진에서 라이브 상기 LED월(10)로 전송한 이미지 결과물과 카메라 트레킹을 결합하여 카메라(20) 내에서 최종 결과물 이미지를 제작하는 최신 버츄얼 프로덕션 기술이다.

그리고, 상기 트래커(30)의 이동에 의한 상기 카메라(20)의 이동에 따라서 상기 LED월(10)의 배경도 동시에 이동되는 것도 가능하다.

상기 LED월 촬영 기법에서 배우 뒤쪽으로 리얼타임 이미지를 프로젝션할 수 있다는 점은 엄청난 장점이 있는데, 어떤 면에서는 지금껏 버추얼 프로덕션의 분야에서 이루어진 모든 발전의 정점이기도 하다.

그린스크린 촬영 기법과 비교해 보면, 상기 LED월 촬영 기법에는 배우나 제작팀에게 불확실성이 전혀 없으며 모두가 실시간으로 전개되는 씬을 정확하게 확인할 수 있다.

카메라 담당자는 실제 오브젝트를 대상으로 하듯 프레임을 맞출 수 있고, 배우들은 상상 속 이미지를 나타내는 마커가 아니라 눈 앞에 표시된 실제 최종 이미지에 반응할 수 있다.

화면에 표시되는 자연스러운 리플렉션과 라이팅은 중요한 미학적 큐를 제공하고 이미지의 사실감을 강화하며, 이 점은 그린 스크린이 피사체에 가하는 색 누수나 원하지 않는 리플렉션 등의 왜곡을 피하고자 많은 노력이 필요하다는 점과 대조된다.

상기 리얼타임 엔진이 영화 제작에 제공하는 일반적인 장점을 살펴보면, VP로 큰 혜택을 얻을 수 있는 영역 중 하나는 바로 에셋 제작으로서, 에셋을 제작할 때 시각적 충실도와 리얼타임 효율성 두 가지 모두 노력을 쏟을수록, 원하는 오브젝트를 다시 만들고자 비용과 시간을 더 들일 필요 없이 프리비즈부터 최종 결과물까지 쭉 사용할 수 있게 된다.

상기 리얼타임 엔진 내에 내장된 레벨 오브 디테일(LOD) 제어 및 에셋 압축 기능으로는 똑같이 퀄리티가 높은 소스 에셋의 시각적 충실도를 그대로 유지하면서 원하는 프레임 속도로 리얼타임 작업이 가능할 정도로 압축을 할 수가 있다.

또한 높은 퀄리티의 에셋은 필수 요소이므로, 디지털 백로트 및 소품들을 만들 수 있다는 추가적 사업 기회는 규모의 경제를 통해 호흡이 긴 프로덕션에 장점이 될 수 있으며 새로운 서비스 제공업체를 창출하는 기회를 제공하는 일이 가능하다.

이런 동일한 프로덕션 에셋은 보조 파이프라인에 빠르게 도입 및 전달되어 스크린을 정확하게 나타내는 프로모션용 이미지, 게임 에셋 및 토이를 만들 수 있다.

또한 이 작업은 매번 응용을 할 때마다 에셋을 다시 만들 필요가 없기 때문에 시간도 아낄 수 있고 에셋 재작업으로 인해 발생할 수 있는 퀄리티 및 일관성 문제를 피할 수 있게 된다.

상기 리얼타임 엔진은 보다 유연한 툴을 제공하며 영화 제작자에게 맞춰 커스터마이징이 가능한데, 이는 리얼타임 엔진이 항상 개발 활성화 상태이기 때문이다.

DP 입장에서 버추얼 스카우팅 이미지 중에 특정 프레이밍 라인을 항상 확인해야겠다고 결정을 내린다면 그에 맞게 리얼타임 엔진을 간단히 커스터마이징할 수 있게 된다.

그렇지 않으면, 세트에서 보고 싶은 특정 유형의 비주얼 이펙트를 추가 및 재활용할 수 있다.

원격/다중 사용자 협업을 하려면, 기존의 영화 세트에서는 원격 동영상 피드나 화면 공유가 필요하다.

상기 리얼타임 엔진은 게임에 그 근간을 두고 있기 때문에 기본적으로 '멀티플레이어' 원격 협업 및 커뮤니케이션 기능이 핵심에 깊게 통합되어 있다.

예를 들어 원격 버추얼 스카우팅 세션을 공유하는 것뿐만 아니라 협업 참여자들이 퍼포먼스 캡처 세션에서 공동으로 직접 제어하고 참여할 수 있다.

리얼타임 피직스는 리얼타임 엔진이 게임에 뿌리를 두고 있기에 얻을 수 있는 또 다른 장점이다.

즉, 스턴트 제작 및 카메라 이동 경로 확인을 이론적으로뿐만 아니라 현실의 피직스 시뮬레이션으로 해볼 수 있다는 것이다.

또한 프리비즈와 최종 결과물에 사용할 애니메이션도 미리 준비되어 있는 피직스 이펙트로 훨씬 실감나게 제작할 수 있다.

분산 렌더링은 비주얼 이펙트 애니메이션에서 전혀 새로운 개념이 아니며 보통 거대한 서버실에서 프레임별 렌더링이 진행되는 광경을 떠올리기 쉽다.

상기 리얼타임 엔진에서는 분산 렌더링을 실시간으로 활용해 애니메이션의 퍼포먼스와 해상도를 모두 높일 수 있다.

비디오 스케일러와 병렬 출력이 가능한 엔진 인스턴스를 다수 갖춘다면 라이브 인카메라 비주얼 이펙트가 4K, 심지어 8K 이상의 해상도를 갖추어 굉장히 매력적이고 충실도가 높은 이미지를 구현할 수 있다.

상기 버츄얼 프로덕션을 현장에서 적용했을 때는 사실감을 더해주는 실제 카메라 이동은 버츄얼 프로덕션에서도 활용 가능하고, 모든 것이 실시간으로 일어나기 때문에, 예전에는 포스트 프로덕션과 별 관련이 없던 여러 요소도 이제는 라이브 촬영이 가능하게 된다.

또한 합성도 라이브로 이루어지기 때문에 나중의 포스트 프로덕션 과정으로 미뤄두지 않고 세트장에서의 프로덕션 도중에 진행할 수 있다.

이처럼 버추얼 프로덕션을 포용한다면 제작팀 전체의 생각을 '사후 수정'에서 '사전 수정'과 '프로덕션 중 수정'으로 바꿔 놓게 된다.

그리고, 협업을 높여 사후 예산 누수를 막을 수 있다는 것은 버츄얼 프로덕션의 추가적인 장점이다.

전통적인 모델링 및 애니메이션 파이프라인으로 이미지를 굽는 게 아니라 보다 유연한 리얼타임 엔진으로 이미지를 제작하기 때문에, 테이크가 완성되었더라도 시간과 비용을 추가로 들이지 않고 포스트 과정에서 계속 개선과 갱신을 거칠 수 있다.

상술 한 바와 같이 본 발명은 비록 한정된 실시예들에 의해 설명되었으나, 본 발명은 이것에 한정되지 않으며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상과 아래에 기재될 특허 청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능하다 할 것이다.

1: 그린스크린 배경 2: 가상 배경
3: 합성 영상
10: LED월 20: 카메라
30: 트래커

Claims (3)

1. 리얼타임 엔진을 이용한 실시간 랜더링을 통해서, 실제 카메라로 촬영된 그린스크린 배경(1)과 3D로 제작된 가상 배경(2)이 하나의 합성 영상(3)로 되어 리얼리티를 강조한 영상으로 제작되는 것을 특징으로 하는 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션.
   
2. 리얼타임 엔진을 이용하여 촬영 상황 및 배경이 수시로 변경가능하게 함으로써 스튜디오 내에서 다양한 씬을 촬영하게 하는 LED월(10)과, 상기 LED월에 비춰진 상황과 배우를 촬영하여 씬을 제작하는 카메라(20)와, 상기 카메라(20)의 이동 경로를 포착하여 전후 또는 좌우방향으로 카메라(20)의 이동을 제어하는 트래커(30)로 구성되어서, 리얼타임 엔진에서 라이브 상기 LED월(10)로 전송한 이미지 결과물과 카메라 트레킹을 결합하여 카메라(20) 내에서 최종 결과물 이미지를 제작하는 것을 특징으로 하는 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션.
   
3. 청구항 2에 있어서, 상기 트래커(30)의 이동에 의한 상기 카메라(20)의 이동에 따라서 상기 LED월(10)의 배경도 동시에 이동되는 것을 특징으로 하는 버츄얼 프로덕션 시스템 기반의 확장현실 영상촬영 솔루션.

Images