KR101680367B1 - 시뮬레이터 카메라와 가상카메라 동기화에 의한 cg적용 영상제작시스템 - Google Patents

시뮬레이터 카메라와 가상카메라 동기화에 의한 cg적용 영상제작시스템 Download PDF

Info

Publication number
KR101680367B1
KR101680367B1 KR1020150151326A KR20150151326A KR101680367B1 KR 101680367 B1 KR101680367 B1 KR 101680367B1 KR 1020150151326 A KR1020150151326 A KR 1020150151326A KR 20150151326 A KR20150151326 A KR 20150151326A KR 101680367 B1 KR101680367 B1 KR 101680367B1
Authority
KR
South Korea
Prior art keywords
camera
simulator
information
image
motion capture
Prior art date
Application number
KR1020150151326A
Other languages
English (en)
Inventor
고재혁
주우석
조승우
이병춘
김형기
곽유진
Original Assignee
동서대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동서대학교산학협력단 filed Critical 동서대학교산학협력단
Priority to KR1020150151326A priority Critical patent/KR101680367B1/ko
Application granted granted Critical
Publication of KR101680367B1 publication Critical patent/KR101680367B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템을 제공한다. 이와 같은 본 발명에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템은 촬영현장의 시뮬레이터 카메라와 CG적용 영상편집이 이루어지는 그래픽 툴의 가상카메라가 서로 동기화되도록 하고, 그래픽 툴 상에서 시뮬레이터 카메라와 동기화된 가상카메라에 의한 촬영 영상정보(CG적용 영상)이 영상프레임 쇼트(shot) 형태로 실시간으로 시뮬레이터 카메라로 전송 및 출력되어 CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되도록 하여 CG적용 영상의 즉각적인 수정 및 재촬영이 가능해지고, 이를 통해 영상 수정기간을 현저하게 단축시킬 수 있으며, 실사 촬영이후 영상편집단계에서 요구될 수 있는 재촬영 분량이 최소화되는 한편, 촬영현장에서 카메라감독에 의해 운용되는 시뮬레이터 카메라를 통해서 CG적용 영상을 이루는 영상프레임 쇼트(shot)의 카메라 움직임이 구현될 수 있으므로, 컴퓨터그래픽 전문인력 양성을 위한 별도의 복잡한 교육이나 일정시간 이상의 교육기간 없이도 그래픽 툴을 통한 CG적용 영상 제작이 가능해지는 기술적 특징을 갖는다.
본 발명에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템은 영상제작을 위한 촬영현장에 설치되어 실사 촬영을 수행하는 시뮬레이터 카메라(10)와; 오브젝트의 모션 캡쳐정보를 검출하고, 컴퓨터그래픽스(CG)가 적용된 CG적용 영상에 모션 캡쳐정보를 적용하기 위한 모션캡쳐 시스템의 월드 축 정보가 설정되어 있는 모션캡쳐 장치(20)와; 시뮬레이터 카메라(10)와 모션캡쳐 장치(20)가 각각 연결되고, 모션캡쳐 장치(20)로부터 월드 축 정보를 전달받으며, 시뮬레이터 카메라(10)로부터 시뮬레이터 카메라정보를 전달받되, 모션캡쳐 시스템의 월드 축을 기준으로 한 시뮬레이터 카메라(10)의 위치정보를 월드 좌표값으로 계산하여 추출하는 정보 연동모듈(30)과; CG적용 영상 제작을 위한 그래픽 툴(50)이 설치되고, 그래픽 툴(50)의 활성화에 따른 영상편집 화면이 모니터에 디스플레이되며, 그래픽 툴(50)에 의해 생성된 가상공간(51)과 가상카메라(52)를 운용하여 CG적용 영상이 제작되도록 하되, 정보 연동모듈(30)과 연결되어 그래픽 툴(50)의 가상카메라(52)가 시뮬레이터 카메라(10)와 동기화되도록 하며, 시뮬레이터 카메라(10)와 동기화된 가상카메라(52)의 가상공간(51)에서의 촬영영상인 가상카메라 촬영 영상정보를 시뮬레이터 카메라(10)로 실시간 전송하는 영상편집장치(40) 및; 시뮬레이터 카메라(10)와 연결되고, 영상편집장치(40)로부터 가상카메라 촬영 영상정보를 영상프레임 쇼트(shot) 형태로 실시간으로 전송받아 디스플레이하여 CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되도록 하는 시뮬레이터 카메라 모니터(60)를 포함하는 구성으로 이루어진다.

Description

시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템{CG image product system by synchronization of simulator camera and virtual camera}
본 발명은 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템에 관한 것으로, 좀더 구체적으로는 촬영현장의 시뮬레이터 카메라와 CG적용 영상편집이 이루어지는 그래픽 툴의 가상카메라가 서로 동기화되도록 하고, 그래픽 툴 상에서 시뮬레이터 카메라와 동기화된 가상카메라에 의한 촬영 영상정보(CG적용 영상)이 영상프레임 쇼트(shot) 형태로 실시간으로 시뮬레이터 카메라로 전송 및 출력되어 CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되도록 하여 CG적용 영상의 즉각적인 수정 및 재촬영이 가능해지고, 이를 통해 영상 수정기간을 현저하게 단축시킬 수 있으며, 실사 촬영이후 영상편집단계에서 요구될 수 있는 재촬영 분량이 최소화되는 한편, 촬영현장에서 카메라감독에 의해 운용되는 시뮬레이터 카메라를 통해서 CG적용 영상을 이루는 영상프레임 쇼트(shot)의 카메라 움직임이 구현될 수 있으므로, 컴퓨터그래픽 전문인력 양성을 위한 별도의 복잡한 교육이나 일정시간 이상의 교육기간 없이도 그래픽 툴을 통한 CG적용 영상 제작이 가능해지는 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템에 관한 것이다.
컴퓨터로 CG 캐릭터와 배경을 제작하여 애니메이션을 완성하는 컴퓨터 그래픽 애니메이션(CG animation)과 더불어, 실사 촬영영상과 CG 영상을 접목시킨 CG적용 영상도 현재 활발하게 제작되고 있다. 이와 같은 CG적용 영상 제작과 관련한 기술로는 대한민국 등록특허공보 등록번호 제10-1273531호 "모션 컨트롤 카메라를 이용한 실사와 ＣＧ 합성 애니메이션 제작 방법 및 시스템" 등이 안출되어 있다.
여기서 종래에는 촬영현장에서 실사 촬영을 진행한 이후, 컴퓨터와 같은 영상편집장치에 설치되는 마야(Maya)와 같은 3D 그래픽 툴 상에서 지오메트리(geometry)를 배치하고 스토리보드에 맞는 카메라 움직임을 3D 그래픽 툴 상의 가상카메라를 직접 움직이는 방식으로 구현하면서 실사 촬영영상과 CG영상이 접목된 CG적용 영상을 제작하였다.
그러나 실사 촬영 이후, CG적용 영상이 영상편집장치를 통해 제작되는 프로세스임에 따라, 실사 촬영현장에서는 CG적용 영상을 확인할 수 없음에 따라, 즉각적인 수정작업이 이루어질 수 없었고, 이후 영상편집장치를 통한 CG적용 영상 제작시 수정이 필요할 경우 사후적인 실사 재촬영이 요구되었으며, 이에 따라 영상 수정기간이 늘어나는 문제점이 있었다. 또한 CG적용 영상을 이루는 영상프레임 쇼트(shot)의 카메라 움직임은 3D 그래픽 툴에 의해 생성되는 가상카메라를 통해 구현되므로, 이를 구현할 수 있는 컴퓨터그래픽 전문인력이 필요하였다.
(특허문헌 1) 대한민국 등록특허공보 등록번호 제10-1273531호 "모션 컨트롤 카메라를 이용한 실사와 ＣＧ 합성 애니메이션 제작 방법 및 시스템"
따라서 본 발명은 이와 같은 종래 기술의 문제점을 개선하여, 촬영현장의 시뮬레이터 카메라와 연동시킨 모션캡쳐 장치의 모션캡쳐 시스템 좌표와 CG적용 영상편집이 이루어지는 그래픽 툴에 의해 생성된 가상공간 상의 월드좌표를 동기화시킨 후, 시뮬레이터 카메라의 위치/움직임/이동 정보 및 렌즈정보와 같은 특성정보에 그래픽 툴의 가상카메라가 동기화되도록 함으로써 촬영현장에서 카메라감독에 의해 운용되는 시뮬레이터 카메라를 통해서 CG적용 영상을 이루는 영상프레임 쇼트(shot)의 카메라 움직임이 구현될 수 있으므로, 컴퓨터그래픽 전문인력 양성을 위한 별도의 복잡한 교육이나 일정시간 이상의 교육기간 없이도 그래픽 툴을 통한 CG적용 영상 제작이 가능해지는 새로운 형태의 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템을 제공하는 것을 목적으로 한다.
또한 본 발명은 그래픽 툴 상에서 시뮬레이터 카메라와 동기화된 가상카메라에 의한 촬영 영상정보(CG적용 영상)이 영상프레임 쇼트(shot) 형태로 실시간으로 시뮬레이터 카메라로 전송되어 뷰 파인더 등을 통해 디스플레이되도록 함으로써, CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되어 CG적용 영상의 즉각적인 수정 및 재촬영이 가능해지고, 이를 통해 영상 수정기간을 현저하게 단축시킬 수 있으며, 실사 촬영이후 영상편집단계에서 요구될 수 있는 재촬영 분량이 최소화되는 새로운 형태의 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템을 제공하는 것을 목적으로 한다.
상술한 목적을 달성하기 위한 본 발명의 특징에 의하면, 본 발명은 영상제작을 위한 촬영현장에 설치되어 실사 촬영을 수행하는 시뮬레이터 카메라(10)와; 오브젝트의 모션 캡쳐정보를 검출하고, 컴퓨터그래픽스(CG)가 적용된 CG적용 영상에 모션 캡쳐정보를 적용하기 위한 모션캡쳐 시스템의 월드 축 정보가 설정되어 있는 모션캡쳐 장치(20)와; 시뮬레이터 카메라(10)와 모션캡쳐 장치(20)가 각각 연결되고, 모션캡쳐 장치(20)로부터 월드 축 정보를 전달받으며, 시뮬레이터 카메라(10)로부터 시뮬레이터 카메라정보를 전달받되, 모션캡쳐 시스템의 월드 축을 기준으로 한 시뮬레이터 카메라(10)의 위치정보를 월드 좌표값으로 계산하여 추출하는 정보 연동모듈(30)과; CG적용 영상 제작을 위한 그래픽 툴(50)이 설치되고, 그래픽 툴(50)의 활성화에 따른 영상편집 화면이 모니터에 디스플레이되며, 그래픽 툴(50)에 의해 생성된 가상공간(51)과 가상카메라(52)를 운용하여 CG적용 영상이 제작되도록 하되, 정보 연동모듈(30)과 연결되어 그래픽 툴(50)의 가상카메라(52)가 시뮬레이터 카메라(10)와 동기화되도록 하며, 시뮬레이터 카메라(10)와 동기화된 가상카메라(52)의 가상공간(51)에서의 촬영영상인 가상카메라 촬영 영상정보를 시뮬레이터 카메라(10)로 실시간 전송하는 영상편집장치(40) 및; 시뮬레이터 카메라(10)와 연결되고, 영상편집장치(40)로부터 가상카메라 촬영 영상정보를 영상프레임 쇼트(shot) 형태로 실시간으로 전송받아 디스플레이하여 CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되도록 하는 시뮬레이터 카메라 모니터(60)를 포함하는 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템을 제공한다.
이와 같은 본 발명에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템에서 시뮬레이터 카메라 모니터(60)는 시뮬레이터 카메라(10)에 설치된 뷰 파인더(60a)일 수 있다.
이와 같은 본 발명에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템에서 정보 연동모듈(30)은 시뮬레이터 카메라 위치정보, 패닝 동작과 틸팅 동작을 포함하는 시뮬레이터 카메라 움직임정보, 시뮬레이터 카메라 이동정보, 렌즈정보를 포함하는 시뮬레이터 카메라 특성정보를 시뮬레이터 카메라정보로 수집하여 영상편집장치(40)로 전송할 수 있다.
이와 같은 본 발명에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템에서 영상편집장치(40)는 정보 연동모듈(30)로부터 모션캡쳐장치(20)의 월드 축 정보를 전달받고, 그래픽 툴(50)은 모션캡쳐장치(20)의 모션캡쳐 시스템의 좌표와 가상공간(51) 상의 월드좌표를 동기화시킬 수 있다.
이와 같은 본 발명에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템에서 그래픽 툴(50)은 시뮬레이터 카메라(10)의 위치정보, 움직임정보, 이동정보에 가상카메라(52)를 동기화시키는 동시에, 시뮬레이터 카메라(10)의 특성정보에 가상카메라(52)를 동기화시킬 수 있다.
본 발명에 의한 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템에 의하면, 촬영현장의 시뮬레이터 카메라와 CG적용 영상편집이 이루어지는 그래픽 툴의 가상카메라가 서로 동기화되고, 그래픽 툴 상에서 시뮬레이터 카메라와 동기화된 가상카메라에 의한 촬영 영상정보(CG적용 영상)이 영상프레임 쇼트(shot) 형태로 실시간으로 시뮬레이터 카메라로 전송 및 출력되어 CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되므로, CG적용 영상의 즉각적인 수정 및 재촬영이 가능해지고, 이를 통해 영상 수정기간을 현저하게 단축시킬 수 있으며, 실사 촬영이후 영상편집단계에서 요구될 수 있는 재촬영 분량이 최소화되는 한편, 촬영현장에서 카메라감독에 의해 운용되는 시뮬레이터 카메라를 통해서 CG적용 영상을 이루는 영상프레임 쇼트(shot)의 카메라 움직임이 구현될 수 있으므로, 컴퓨터그래픽 전문인력 양성을 위한 별도의 복잡한 교육이나 일정시간 이상의 교육기간 없이도 그래픽 툴을 통한 CG적용 영상 제작이 가능해지는 효과가 있다.
도 1은 본 발명의 실시예에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템의 구성블록도;
도 2는 본 발명의 실시예에 따른 시뮬레이터 카메라와 시뮬레이터 카메라 모니터를 보여주기 위한 도면;
도 3은 본 발명의 실시예에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템에서의 카메라 동기화 과정을 보여주기 위한 플로우차트이다.
이하, 본 발명의 실시예를 첨부된 도면 도 1 내지 도 3에 의거하여 상세히 설명한다. 한편, 도면과 상세한 설명에서 일반적인 영상제작, 컴퓨터그래픽스(CG), CG적용 영상제작, 시뮬레이터 카메라, 뷰 파인더, 모션캡쳐 장치, 영상편집장치, 그래픽 툴, 3D 그래픽 툴, 가상카메라, 영상프레임 쇼트 등으로부터 이 분야의 종사자들이 용이하게 알 수 있는 구성 및 작용에 대한 도시 및 언급은 간략히 하거나 생략하였다. 특히 도면의 도시 및 상세한 설명에 있어서 본 발명의 기술적 특징과 직접적으로 연관되지 않는 요소의 구체적인 기술적 구성 및 작용에 대한 상세한 설명 및 도시는 생략하고, 본 발명과 관련되는 기술적 구성만을 간략하게 도시하거나 설명하였다.
본 발명의 실시예에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템(100)은 도 1에서와 같이 시뮬레이터 카메라(10), 모션캡쳐 장치(20), 정보 연동모듈(30), 영상편집장치(40), 그래픽 툴(50), 시뮬레이터 카메라 모니터(60)를 포함하는 구성으로 이루어진다.
시뮬레이터 카메라(10)는 영상제작을 위한 촬영현장에 설치되어 실사 촬영을 수행하는 것으로, 현장 카메라감독에 의해 운용될 수 있다. 이와 같은 시뮬레이터 카메라(10)는 촬영현장에 위치한 모션캡쳐 장치(20)와 연동(interlock)되고, CG적용 영상 편집공간에 위치한 영상편집장치(40)에 설치된 그래픽 툴(50)의 가상카메라(52)와 동기화(synchronization)된다.
모션캡쳐 장치(20)는 오브젝트의 모션 캡쳐정보를 검출하는 것으로, 이와 같은 모션캡쳐 장치(20)에는 컴퓨터그래픽스(CG)가 적용된 CG적용 영상에 모션 캡쳐정보를 적용하기 위한 모션캡쳐 시스템의 월드 축 정보가 설정되어 있다.
정보 연동모듈(30)은 시뮬레이터 카메라(10)와 모션캡쳐 장치(20)가 각각 연결되는 것으로, 정보 연동모듈(30)을 통해 시뮬레이터 카메라(10)와 모션캡쳐 장치(20)가 서로 연동된다. 이와 같은 정보 연동모듈(30)은 모션캡쳐 장치(20)로부터 월드 축 정보를 전달받는 한편, 시뮬레이터 카메라(10)로부터 시뮬레이터 카메라정보를 전달받게 된다. 여기서 시뮬레이터 카메라정보에는 시뮬레이터 카메라 위치정보, 패닝 동작과 틸팅 동작을 포함하는 시뮬레이터 카메라 움직임정보, 시뮬레이터 카메라 이동정보, 렌즈정보(노출, 셔터 스피드, ISO 등)을 포함하는 시뮬레이터 카메라 특성정보가 포함된다.
특히 본 발명의 실시예에 따른 정보 연동모듈(30)은 모션캡쳐 시스템의 월드 축을 기준으로 한 시뮬레이터 카메라(10)의 위치정보를 월드 좌표값으로 계산하여 추출한 다음, 이와 같은 시뮬레이터 카메라 위치정보를 포함한 시뮬레이터 카메라정보를 수집하여 영상편집장치(40)로 전송하게 된다.
영상편집장치(40)는 CG적용 영상 제작을 위한 그래픽 툴(50)이 설치되는 것으로, 이와 같은 영상편집장치(40)로는 일반 컴퓨터가 사용될 수도 있고, 영상편집 전용으로 제작된 장치가 사용될 수도 있다. 여기서 그래픽 툴(50)로는 마야(Maya)와 같은 3D 그래픽 툴이 사용될 수 있는데, 이에 한정되지 않음은 물론이다.
이와 같은 영상편집장치(40)는 그래픽 툴(50)의 활성화에 따른 영상편집 화면이 모니터에 디스플레이되도록 하고, 그래픽 툴(50)에 의해 생성된 가상공간(51)과 가상카메라(52)를 운용하여 CG적용 영상이 제작되도록 한다. 이와 같은 영상편집장치(40)는 정보 연동모듈(30)과 연결되어 그래픽 툴(50)의 가상카메라(52)가 시뮬레이터 카메라(10)와 동기화되도록 한다. 이를 위하여 영상편집장치(40)는 정보 연동모듈(30)로부터 모션캡쳐장치(20)의 월드 축 정보를 전달받는다. 그리고 그래픽 툴(50)은 도 3에서와 같이 모션캡쳐장치(20)의 모션캡쳐 시스템의 좌표와 가상공간(51) 상의 월드좌표를 동기화시킨 다음, 시뮬레이터 카메라(10)의 위치정보, 움직임정보(패닝, 틸팅 등), 이동정보에 가상카메라(52)를 동기화시키는 동시에, 시뮬레이터 카메라(10)의 특성정보(노출, 셔터 스피드, IOS와 같은 렌즈정보 등)에 가상카메라(52)를 동기화시킨다.
또한 영상편집장치(40)는 시뮬레이터 카메라(10)와 동기화된 가상카메라(52)의 가상공간(51)에서의 촬영영상인 가상카메라 촬영 영상정보가 시뮬레이터 카메라(10)로 실시간 전송되도록 한다. 여기서 가상카메라 촬영 영상정보는 가상카메라(52)에 보이는 것만 보이고, 가상카메라 밖에 있는 것은 숨기는 "camera frustum" 프로세스를 통해 영상프레임 쇼트(shot)의 형태를 이루는 것으로, 이와 같은 영상프레임 쇼트가 시뮬레이터 카메라(10)로 전송된다.
시뮬레이터 카메라 모니터(60)는 시뮬레이터 카메라(10)와 연결되는 것으로, 영상편집장치(40)로부터 가상카메라 촬영 영상정보를 영상프레임 쇼트(shot) 형태로 실시간으로 전송받아 디스플레이하여 CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되도록 한다. 이와 같은 시뮬레이터 카메라 모니터(60)로는 시뮬레이터 카메라(10)에 설치된 뷰 파인더(60a)가 사용될 수 있다.
상기와 같이 구성된 본 발명의 실시예에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템(100)은 촬영현장의 시뮬레이터 카메라(10)와 CG적용 영상편집이 이루어지는 그래픽 툴(50)의 가상카메라(52)가 서로 동기화되도록 하고, 그래픽 툴(50) 상에서 시뮬레이터 카메라(10)와 동기화된 가상카메라(52)에 의한 촬영 영상정보(CG적용 영상)이 영상프레임 쇼트(shot) 형태로 실시간으로 시뮬레이터 카메라(10)로 전송 및 출력되어 CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되도록 하여 CG적용 영상의 즉각적인 수정 및 재촬영이 가능해지고, 이를 통해 영상 수정기간을 현저하게 단축시킬 수 있으며, 실사 촬영이후 영상편집단계에서 요구될 수 있는 재촬영 분량이 최소화되는 특징이 있다.
또한 본 발명의 실시예에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템(100)은 촬영현장에서 카메라감독에 의해 운용되는 시뮬레이터 카메라(10)를 통해서 CG적용 영상을 이루는 영상프레임 쇼트(shot)의 카메라 움직임이 구현될 수 있으므로, 컴퓨터그래픽 전문인력 양성을 위한 별도의 복잡한 교육이나 일정시간 이상의 교육기간 없이도 그래픽 툴을 통한 CG적용 영상 제작이 가능해지는 특징이 있다.
상술한 바와 같은, 본 발명의 실시예에 따른 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템을 상기한 설명 및 도면에 따라 도시하였지만, 이는 예를 들어 설명한 것에 불과하며 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능하다는 것을 이 분야의 통상적인 기술자들은 잘 이해할 수 있을 것이다.
10 : 시뮬레이터 카메라 20 : 모션캡쳐 장치
30 : 정보 연동모듈 40 : 영상편집장치
50 : 그래픽 툴 51 : 가상공간
52 : 가상카메라 60 : 시뮬레이터 카메라 모니터
60a : 뷰 파인더 100 : CG적용 영상제작시스템

Claims (5)

  1. 영상제작을 위한 촬영현장에 설치되어 실사 촬영을 수행하는 시뮬레이터 카메라(10)와;
    촬영현장에 위치하고, 시뮬레이터 카메라(10)와 연동되며, 오브젝트의 모션 캡쳐정보를 검출하고, 컴퓨터그래픽스(CG)가 적용된 CG적용 영상에 모션 캡쳐정보를 적용하기 위한 모션캡쳐 시스템의 월드 축 정보가 설정되어 있는 모션캡쳐 장치(20)와;
    시뮬레이터 카메라(10)와 모션캡쳐 장치(20)가 각각 연결되어 시뮬레이터 카메라(10)와 모션캡쳐 장치(20)가 서로 연동되도록 하고, 모션캡쳐 장치(20)로부터 월드 축 정보를 전달받으며, 시뮬레이터 카메라(10)로부터 시뮬레이터 카메라정보를 전달받되, 모션캡쳐 시스템의 월드 축을 기준으로 한 시뮬레이터 카메라(10)의 위치정보를 월드 좌표값으로 계산하여 추출하고, 시뮬레이터 카메라 위치정보, 패닝 동작과 틸팅 동작을 포함하는 시뮬레이터 카메라 움직임정보, 시뮬레이터 카메라 이동정보, 렌즈정보를 포함하는 시뮬레이터 카메라 특성정보를 시뮬레이터 카메라정보로 수집하여 전송하는 정보 연동모듈(30)과;
    CG적용 영상 제작을 위한 그래픽 툴(50)이 설치되고, 그래픽 툴(50)의 활성화에 따른 영상편집 화면이 모니터에 디스플레이되며, 그래픽 툴(50)에 의해 생성된 가상공간(51)과 가상카메라(52)를 운용하여 CG적용 영상이 제작되도록 하고, 정보 연동모듈(30)과 연결되어 그래픽 툴(50)의 가상카메라(52)가 시뮬레이터 카메라(10)와 동기화되도록 하며, 정보 연동모듈(30)로부터 시뮬레이터 카메라정보 및 모션캡쳐장치(20)의 월드 축 정보를 전달받고, 그래픽 툴(50)이 모션캡쳐장치(20)의 모션캡쳐 시스템의 좌표와 가상공간(51) 상의 월드좌표를 동기화시키는 동시에 시뮬레이터 카메라(10)의 위치정보, 움직임정보, 이동정보에 가상카메라(52)를 동기화시키는 한편, 시뮬레이터 카메라(10)의 특성정보에 가상카메라(52)를 동기화시키게 되며, 시뮬레이터 카메라(10)와 동기화된 가상카메라(52)의 가상공간(51)에서의 촬영영상인 가상카메라 촬영 영상정보를 시뮬레이터 카메라(10)로 실시간 전송하되, 가상카메라(52)에 보이는 것만 보이고, 가상카메라 밖에 있는 것은 숨기는 "camera frustum" 프로세스를 통해 영상프레임 쇼트(shot)의 형태를 이루는 가상카메라 촬영 영상정보가 시뮬레이터 카메라(10)로 실시간 전송되도록 하는 영상편집장치(40) 및;
    시뮬레이터 카메라(10)와 연결되어 시뮬레이터 카메라(10)에 설치되는 뷰 파인더(60a)로 이루어지고, 영상편집장치(40)로부터 가상카메라 촬영 영상정보를 영상프레임 쇼트(shot) 형태로 실시간으로 전송받아 디스플레이하여 CG적용 영상에서의 시뮬레이터 카메라 움직임이 촬영현장에서 실시간으로 확인되도록 하는 시뮬레이터 카메라 모니터(60)를 포함하여,
    촬영현장에서 카메라감독에 의해 운용되는 시뮬레이터 카메라(10)를 통해서 CG적용 영상을 이루는 영상프레임 쇼트(shot)의 카메라 움직임이 구현될 수 있도록 하는 것을 특징으로 하는 시뮬레이터 카메라와 가상카메라 동기화에 의한 CG적용 영상제작시스템.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
KR1020150151326A 2015-10-29 2015-10-29 시뮬레이터 카메라와 가상카메라 동기화에 의한 cg적용 영상제작시스템 KR101680367B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150151326A KR101680367B1 (ko) 2015-10-29 2015-10-29 시뮬레이터 카메라와 가상카메라 동기화에 의한 cg적용 영상제작시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150151326A KR101680367B1 (ko) 2015-10-29 2015-10-29 시뮬레이터 카메라와 가상카메라 동기화에 의한 cg적용 영상제작시스템

Publications (1)

Publication Number Publication Date
KR101680367B1 true KR101680367B1 (ko) 2016-11-28

Family

ID=57706644

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150151326A KR101680367B1 (ko) 2015-10-29 2015-10-29 시뮬레이터 카메라와 가상카메라 동기화에 의한 cg적용 영상제작시스템

Country Status (1)

Country Link
KR (1) KR101680367B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101807488B1 (ko) * 2017-07-31 2017-12-11 주식회사 브이런치 가상현실 영상촬영기기 모션 데이터 추출 시스템 및 방법
KR20200028828A (ko) 2018-09-07 2020-03-17 (주)위지윅스튜디오 트리거를 활용한 인터랙티브 실시간 cg 영상 제작 시스템
CN116260956A (zh) * 2023-05-15 2023-06-13 四川中绳矩阵技术发展有限公司 一种虚拟现实拍摄方法及系统
CN116320364A (zh) * 2023-05-25 2023-06-23 四川中绳矩阵技术发展有限公司 一种基于多层显示的虚拟现实拍摄方法及显示方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002271692A (ja) * 2001-03-13 2002-09-20 Canon Inc 画像処理方法、画像処理装置、スタジオ装置、スタジオシステム及びプログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002271692A (ja) * 2001-03-13 2002-09-20 Canon Inc 画像処理方法、画像処理装置、スタジオ装置、スタジオシステム及びプログラム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101807488B1 (ko) * 2017-07-31 2017-12-11 주식회사 브이런치 가상현실 영상촬영기기 모션 데이터 추출 시스템 및 방법
KR20200028828A (ko) 2018-09-07 2020-03-17 (주)위지윅스튜디오 트리거를 활용한 인터랙티브 실시간 cg 영상 제작 시스템
CN116260956A (zh) * 2023-05-15 2023-06-13 四川中绳矩阵技术发展有限公司 一种虚拟现实拍摄方法及系统
CN116260956B (zh) * 2023-05-15 2023-07-18 四川中绳矩阵技术发展有限公司 一种虚拟现实拍摄方法及系统
CN116320364A (zh) * 2023-05-25 2023-06-23 四川中绳矩阵技术发展有限公司 一种基于多层显示的虚拟现实拍摄方法及显示方法
CN116320364B (zh) * 2023-05-25 2023-08-01 四川中绳矩阵技术发展有限公司 一种基于多层显示的虚拟现实拍摄方法及显示方法

Similar Documents

Publication Publication Date Title
US20200314413A1 (en) System and method for generating videos
EP2629267A2 (en) Real-time compositing of live recording-based and computer graphics-based media streams
CN108200445B (zh) 虚拟形象的虚拟演播系统及方法
US10692288B1 (en) Compositing images for augmented reality
US9699438B2 (en) 3D graphic insertion for live action stereoscopic video
US8243123B1 (en) Three-dimensional camera adjunct
EP3379525A1 (en) Image processing device and image generation method
KR101713772B1 (ko) 사전 시각화 영상 생성 장치 및 방법
KR101680367B1 (ko) 시뮬레이터 카메라와 가상카메라 동기화에 의한 cg적용 영상제작시스템
CN105635669B (zh) 基于三维运动捕捉数据与实拍视频的动作对比系统及方法
JP4700476B2 (ja) 多視点映像合成装置及び多視点映像合成システム
CN104349155B (zh) 模拟立体图像显示方法及显示设备
JP7489960B2 (ja) 画像の合成のための方法及びデータ処理システム
CN111970453A (zh) 一种用于摄像机器人的虚拟拍摄系统及方法
CN106980369A (zh) 虚拟现实项目的第三视角视频的合成和输出系统及方法
CN114125301A (zh) 一种虚拟现实技术拍摄延迟处理方法及装置
JP2011035638A (ja) 仮想現実空間映像制作システム
US11328436B2 (en) Using camera effect in the generation of custom synthetic data for use in training an artificial intelligence model to produce an image depth map
RU2606875C2 (ru) Способ и система отображения масштабных сцен в режиме реального времени
JP2009212582A (ja) バーチャルスタジオ用フィードバックシステム
CN116503522A (zh) 互动画面的渲染方法、装置、设备、存储介质及程序产品
CN212231547U (zh) 混合现实虚拟预演拍摄系统
CN108335344A (zh) 三维形象与视频融合的方法和系统
KR101859318B1 (ko) 360˚ 가상카메라를 활용한 영상콘텐츠 제작 방법
KR102652371B1 (ko) 동작 배우기 동영상 제작 시스템

Legal Events

Date Code Title Description
GRNT Written decision to grant