KR20020061046A - 다중-카메라, 다중-공급 및 상호작용 가상 삽입 시스템 및방법 - Google Patents

Abstract

본 발명은 비디오 전송을 위한 가상 삽입 시스템에 관한 것으로서, 특히 다중 카메라들을 사용하고 다중 출력 공급을 제공하는 비디오 전송 시스템에 가상 삽입을 제공하고/하거나 시청자(viewer)로부터의 상호작용에 응답하여 가상 삽입을 제공하는 시스템과 방법에 관한 것이다.

본 발명인 가상 삽입 시스템은 카메라 출력을 제공하는 카메라들(10)과; 상기 카메라 출력을 수신하고 결합된 비디오 출력과 카메라들이 결합된 비디오 출력을 제공하는 것을 나타내고 결합된 비디오와 결합되는 탤리 신호들을 제공하는 스위쳐(31)와; 카메라들로부터 카메라 출력을 수신하여 카메라 출력에서 목표의 로케이션을 추적하는 트랙킹 모듈들(54)과; 스위쳐(31)로부터 탤리 신호들을 수신하고 비디오 출력내의 카메라들(10)간의 변환들과 카메라들(10)의 식별을 제공하는 변환 분석 모듈(50)과; 공급들의 목표의 위치에 삽입되어지는 이미지들의 순서와, 내용 및 타이밍에 관한 정보를 각각 포함하는 출력에 대한 스크립트들을 정의하는 시나리오 서버(58) 및; 트랙킹 모듈들에 의해 제공된 목표에 관한 트랙킹 데이터와, 변환 분석 모듈(50)에 의해 제공된 카메라 식별과 변환 정보 및 시나리오 서버(58)에 의해 제공된 스크립트 정보에 기반을 둔 결합된 비디오 출력으로 이미지를 삽입시킴으로써 출력 공급을 제공하는 그래픽 공급 모듈들(56)로 이루어진다.

Description

다중-카메라, 다중-공급 및 상호작용 가상 삽입 시스템 및 방법{MULTI-CAMERA, MULTI-FEED AND INTERACTIVE VIRTUAL INSERTION SYSTEMS AND METHODS}

본 발명은 비디오 전송을 위한 가상 삽입 시스템에 관한 것으로서, 특히 다중 카메라들을 사용하고 다중 출력 공급을 제공하는 비디오 전송 시스템에 가상 삽입을 제공하고/하거나 시청자(viewer)로부터의 상호작용에 응답하여 가상 삽입을 제공하는 시스템과 방법에 관한 것이다.

가상 삽입 시스템은 비디오내의 목표 영역을 대체 이미지 그래픽 또는 비디오로 교체하거나 중첩시키는 시스템이다. 전형적인 가상 삽입 시스템은 예를 들면 스포츠 이벤트와 같은 비디오 공급(전형적으로 그래픽 층과/또는 특수 효과들을 포함하는 "오손(dirty)" 공급)을 입력으로 하고, 하나의 상품 또는 기업을 광고하는 상기 비디오 공급에 나타나진 상업 광고판을 다른 상품 또는 기업을 광고하는 가상 그래픽으로 교체한다. 상기 변형된 공급은 방송 또는 다른 방법으로 상기 시청자들에게 전달된다.

일반적으로, 가상 삽입 시스템들은 이미지 인식 기술 또는 상기 공급을 제공하는 설치된 카메라로부터의 데이터를 분석함으로써 상기 비디오 공급에서 교체되어야 할 상기 목표 영역을 식별한다. 가상 삽입 시스템들은 또한 순서 또는 시퀀싱에서 차이가 있고, 또한 상기 이미지 처리 시스템들과 가상 삽입 디바이스의 시간과 위치에 따른 로케이션을 달리한다. PCT/FR99/03183(이하에서, "상기 PCT 출원"이라 함)은 다중-카메라 "중간링크(midlink)" 가상 삽입 시스템을 개시하고 청구한다.

가상 삽입 시스템들의 기본 구성요소와 프로세스데 대한 보다 완벽한 설명은 상기 PCT 출원과 미국 특허 제 5,264,933호와, 제 5,363,392호와, 제 5,436,672호와 제 5,543,856호와, 프랑스 특허 제 94-05895호에서 제공된다. 각 카메라 출력과 연결된 트랙킹 모듈(tracking module)은 상기 목표 영역에 관한 정보를 제공한다.

트랙킹 모듈은 상기 목표 영역에 관한 정보를 제공하기 위해 상기 카메라와 연결된다. 만약 다른 시청자들을 위한 다른 대체물에 대한 N 다른 출력 공급들이 요구되면, N 다른 대체 모듈들이 제공될 필요가 있다. 만약 N 출력 공급들의 전송을 위해 제어실에서 선택되어질 M 카메라들이 있다면, M.N 삽입 모듈들이 필요하다.

본 발명은 상기 PCT 출원서 개시된 시스템과 유사한 다중-카메라 가상 삽입 시스템에서 시작하여 소정의 기능들을 수행하는 추가적인 모듈들을 포함하는 네트워크-기반 시스템에 관한 것이고, 상기 소정의 기능들은 이벤트 동안에 삽입들의 순서와, 내용 및 타이밍을 제어하는 미리 정의된 "스크립트(script)"를 포함하는 다중-카메라, 다중-공급 가상 삽입 시스템을 야기한다. 장점으로서, 상기 미리 정의된 스크립트들은 방송자(broadcaster)로부터의 입력과 같이, 다른 요소들에 또는 상기 시청자와의 상호 작용에 기반을 두고, 상기 이벤트 동안에 갱신되거나 변경된다.

상기 목적으로 위해, 청구항 제 1 항에서의 시스템과 제 7 항에서의 프로세스가 제공된다. 다른 특징들은 다른 청구항들에서 한정된다. 특별한 실시예에서, 각 카메라는 라이브(live) 이벤트의 화면 필드(view field)를 구비한다.

상기 시스템은 병렬 처리 아키텍쳐에 기반을 두고, 상기 시스템의 중요한 구성요소는 시나리오 서버(scenario server)이다. 상기 서버는 스크립트들은 정의할수 있고 상기 다중 출력 비디오 출력들의 각각과 연결된 그래픽 공급 모듈로 개별적인 스크립트들은 전송할 수 있다. 상기 시나리오 서버는 또한 사이 시스템은 부분을 형성하는 다양한 다른 모듈들과 상기 그래픽 공급 모듈들 간의 데이터 흐름을 제어한다. 시스템이 상당히 복잡하다.

각 트랙킹 모듈은 상기 카메라들로부터 수신된 상기 이미지(그래픽을 포함하는 "오손" 공급)를 처리하거나 상기 카메라의 설치에 의해 제공된 데이터(즉, 팬(pan), 틸트(tilt), 줌(zoom), 포커스(focus) 등)를 분석하거나 또는 상기 두 방법의 조합으로써 상기 목표들을 추적한다. 상기 트랙킹은 실시간으로 또는 실시간에 가깝게 실행되기 때문에 자동적이고 알고리즘적이다. 상기 트랙킹 정보는 상기 시나리오 서버뿐만 아니라 상기 그래픽 공급 모듈들에게 제공된다. 상기 제공은 유럽(EP) 출원 제 99/400 986.8호에서 개시된 고정된 광대역 카메라 방법을 사용함으로써 더욱 간편해질 것이다.

변환 분석 모듈은 현재 비디오 공급을 제공하는 카메라 또는 카메라들을, 즉 "생방송" 카메라(들)의 식별에 관한 정보를 제공한다; 상기 변환 분석 시스템은 다양한 데이터에 관한 출력에 기반을 두고, 상기 데이터는 전형적인 외부 방송자(outside broadcaster: OB) 밴의 스위치(멀티플렉서)에 의해 제공되는 탤리 신호들과 상기 OB 밴에서의 연출가(director)에 의해 주어진 카메라 변환들에 관한 음성 순서들을 포함한다. 장점으로서, 상기 음성 순서들은 음성 인식 기술을 사용하여 해석된다.

상기 시나리오 서버는 클라이언트/서버 방식으로 상기 그래픽 공급 모듈들과, 상기 트랙킹 모듈들 및 상기 변환 분석 모듈에 연결되어 상기 모듈들은 제어하고 상기 모듈들간의 데이터 연결을 제공한다. 장점으로서, 상기 시나리오 서버는 이더넷과 같은 네트워크를 통하여 다양한 모듈들과 연결되고, 방송 이벤트에 대한 다양한 스크립트들 또는 시나리오들의 신속하고 효율적인 갱신을 가능하게 하는 집중 제어를 유지하는 동안에 다양한 기능들의 비-집중화를 제공한다.

상기 그래픽 공급 모듈들은 상기 트랙킹 모듈들에 의해 제공된 목표 식별과 로케이션 정보와, 상기 변환 분석 모듈에 의해 제공된 상기 "생방송" 카메라(들)에 식별 및 상기 스크립트 정보(대체 이미지 또는 에니메이션들의 내용을 포함하는)를 사용하여 특정의 교체 이미지 또는 에니메니션들을 다루고 스크립트 시간(scripted times)에 상기 특정 목표를 교체한다. 에니메이션들은 전형적으로 순서대로 표시되는 일련의 이미지들을 포함한다.

본 발명의 아키텍쳐와 기능성은 상당한 유동성을 제공하여, TV, DTV, HDTV, 케이블, 위성, 상호작용 텔레비전, 인터넷 등과 같은 다양한 배달 시스템에서 사용이 가능하다; 본 발명의 유동성은 분배 방송 즉, 예를 들면 케이블을 통하여 시청자들의 식별될 수 있는 세그먼트로의 방송을 가능하게 하는 발전된 분배 시스템들을 사용할 때 실현된다. 본 발명의 다중 공급 용량은 다양한 출력 공급들로 하여금 로케이션에 의해 또는 언어에 의해, 그리고 높은 정도의 입상도(granularity)로써 특정 하부집합의 시청자들에 맞도록 만들어지게 한다. 예를 들면, 케이블 공급은 지역, 국가, 우편 번호, 신호중계기, 또는 기초 단계(pedestal level)에 차이가 있다. 따라서, 특정 방송에 삽입되는 광고들은 적절한 공급을 위해 스크립트를 변경시킴으로써 만들어질 수 있다.

또한, 본 발명에 따른 상기 시스템은 이상적으로 상기 시청자와 상호작용이 가능한 배달 시스템의 사용에 적합하다. 상기 배달 시스템들은 개별 네트워크나 인터넷을 통한 디지틀 방송을 포함한다. 특히, 케이블 인터넷 접근에 의해 제공되는 대역폭은 현재로서는 상당히 높은 품질의 디지틀 비디오 전송을 가능하게 하고 사용가능한 품질이 지속적으로 향상되고 있다. 케이블 인터넷 접근을 사용하여, 양방향 케이블 모뎀들 또는 전화-복귀(telephone-return) 케이블 모뎀들에 의해 상호작용이 가능하다. 상호작용은 무선과 같은 다른 배달 시스템으로도 가능하다.

상술된 바와 같이, 본 발명에 따른 다중 공급 용량은 상기 스크립트들이 지역들 또는 언어와 같은 특정 배달 특성들에 적합하도록 변경될 수 있도록 한다. 또한, 상기 스크립트들은 한명의 시청자 또는 한 무리의 시청자들로부터의 상호작용에 대한 응답으로 변경되거나 변형됨으로써, 목표 및 상호작용 마켓팅(예를 들면, 일-대-일(one-on-one) 마켓팅, 인가(permission) 마켓팅, 관계(relationship) 마켓팅)을 가능하게 한다.

상기 목적을 위해, 상기 트랙킹 모듈은 상기 목표 영역의 로케이션과 상기 트랙킹 모듈이 "활성 영역(active area)"을 구성하는 사실을 나타내는 "핸들들(handles)"를 생성하도록 되고, 상기 핸들들은 시청자의 상호작용 수신기에 표시된다. 그리고, 상호작용은 예를 들면 상기 영역에서의 마우스 클릭에 응답하는, 활성 영역의 컴퓨터 검출 선택을 제공함으로써 및 대체물에서의 변화를 야기함으로써 실행된다

도 1은 본 발명에 따른 실시예의 삽입 시스템의 도해 블록 다이아그램이다.

도 2는 케이블 방송 시스템과 관련된 도 1의 삽입 시스템의 도해 블록 다이아그램이다.

도 3은 본 발명에 따른 다른 실시예의 "활성 영역"의 사용을 나타내는 스크린 디스플레이의 정면도이다.

도 4는 본 발명에 따른 또 다른 실시예의 "활성 영역"의 사용을 나타내는 스크린 디스플레이의 정면도이다.

도 5는 삽입 시스템의 다른 도해 블록도이다.

*** 도면의 주요 부분에 대한 부호의 설명 ***

31: 스위쳐36: 그래픽 프로세서 인터페이스

50: 변환 분석 모듈58: 시나리오 서버

본 발명인 가상 삽입 시스템은 카메라 출력을 각각 제공하는 다수의 카메라들(10)과; 상기 카메라 출력을 수신하고 결합된 비디오 출력과 카메라 또는 카메라들이 언제든지 상기 결합된 비디오 출력을 제공하는 것을 나타내고 상기 결합된 비디오와 결합되는 탤리 신호들을 제공하는 스위쳐(31)와; 상기 카메라들 중의 적어도 하나로부터 상기 카메라 출력을 각각 수신하여 상기 카메라 출력에서 상기 목표의 로케이션을 추적하는 다수의 트랙킹 모듈들(54)과; 상기 스위쳐(31)로부터 상기 탤리 신호들을 수신하고 상기 비디오 출력내의 카메라들(10)간의 변환들과 카메라들(10)의 식별을 제공하는 변환 분석 모듈(50)과; 다수의 공급들 중의 각각에서 상기 적어도 하나의 목표의 위치에 삽입되어지는 이미지들의 순서와, 내용 및 타이밍에 관한 정보를 각각 포함하는 다수의 출력의 각각에 대한 스크립트들을 정의하는 시나리오 서버(58) 및; 상기 다수의 트랙킹 모듈들에 의해 제공된 적어도 하나의 목표에 관한 트랙킹 데이터와, 상기 변환 분석 모듈(50)에 의해 제공된 카메라 식별과 변환 정보 및 상기 시나리오 서버(58)에 의해 제공된 스크립트 정보에 기반을 둔 상기 결합된 비디오 출력으로 이미지를 삽입시킴으로써 출력 공급을 제공하는 다수의 그래픽 공급 모듈들(56)로 이루어진다.

도 1은 본 발명에 따른 시스템을 도시한다. 도 1의 부분들은 다중-카메라 삽입 시스템을 구비한 상기 PCT 출원의 도 6에 도시된 "중간링크" 가상 삽입 시스템과 유사하다.

도 1에서, 상기 카메라(10a), (10b) 및 (10c)는 카메라를 구비하고, 각각 데이터 라인(40a), (40b) 및 (40c)을 구비한다. 3개의 카메라가 도시되고, 상기 시스템은 상기 어느 카메라들로부터의 입력도 사용하도록 될 수 있다. 3축 케이블(42a), (42b) 및 (42c)는 카메라 전력과 이미지 신호들을 운송하고, 상기 각 카메라로부터 상기 이동 제어실 또는 밴(30)으로 연결된다. 종래 스위쳐(switcher)(31)(전형적으로 디지틀 스위쳐)는 상기 PCT 출원에 개시된 바와 같이, 부가될 수 있는 모든 그래픽 및 특수 효과를 부가하는 종래의 비디오 장치(32)에 연결된다. 상기 제어실(30)은 상기 비디오 장치(32)에 연결된 그래픽 프로세서 인터페이스(graphic processor interface: GPI)(36)를 포함하고, 상기 GPI(36)는 상기 비디오 이미지 신호에 부가된 특수 효과(예를 들면, 느린 동작)뿐 만 아니라, 그래픽 층에 기반을 준 출력 신호들을 생성한다. 상기 GPI 신호들은 GPI 라인(46)을 통하여 변환 분석 모듈(transition analysis module: TAM)(50)의 입력이 된다. 또한, 상기 카메라(10a), (10b) 및 (10c)에 대한 탤리 신호들이 상기 스위쳐로부터 각 출력 라인(48a), (48b) 및 (48c)를 통해 TAM(50)으로 전송된다.

비디오 장치(32)는 스위쳐(31)와 관련하여 출력 라인(47)을 통하여 방송("오손 공급") 신호나 공급과 편집된 신호를 생성하고, 상기 편집된 신호는 상기 비디오 이미지 신호에 부가되어진 모든 그래픽들과 특수 효과의 층들을 포함한다. 상기 오손 공급은 상기 그래픽 공급 모듈(graphic feed modules: GFM들)로 디지틀 형태로 전송된다. 상기 실시예에는, 3개의 그래픽 공급 모듈(GFM1 내지 GFM 3) (56 1), (56 2), 및 (56 3)이 각각 자신의 출력 공급을 생성한다. 그러나, 그래픽 공급모듈은 출력 공급을 생성하는 수 만큼 사용될 수 있다. 만약 상기 제어실 또는 밴(30)이 아날로그 신호를 생성하도록 되면, 상기 신호의 아날로그로부터 디지틀로의 변환이 실행된다.

상기 변환 분석 모듈(TAM)(50)의 기능은 현재 "생방송" 카메라 도는 카메라들의 식별에 관한 정보를 상기 GMF들과 상기 시나리오 서버(58)로 제공하는 것이다. 도 1에 도시된 바와 같이, 상기 정보는 상기 GMF들로 직접적으로 제공되거나 상기 시나리오 서버를 통하여 제공되고, 상기 트랙킹 모듈(54a) 내지 (54c)에 의해 제공된 각 카메라에 대한 트랙킹 데이터와 관련하여 상기 GFM들(56a) 내지 (56c)에 의해 사용됨으로써 얼마나 정확하게 상기 공급으로의 에니메이션 삽입들은 조작하고 삽입하는가를 판단한다. 예를 들면, 만약 상기 공급이 카메라(10a)가 왼쪽에서 오른쪽으로의 와이프(wipe)에 의해 카메라(10b)로 변환되는 비디오 시퀀스를 포함한다면 또한 만약 제 1 목표가 카메라(10a)의 뷰 영역에 있으면, 상기 목표를 대체할 삽임은 상기 관련된 그래픽 공급 모듈에 의해 조작됨으로써 상기 제 1 목표가 상기 스크린으로부터 와이프되는 것과 같은 와이프에 대응한다.

상기 변환 분석 모듈의 기능은 상기 PCT 출원 도 7의 논리 제어 유닛과 유사한다. TAM(50)은 상기 스위쳐(31)에 의해 제공된 상기 탤리 신호들(48a) 내지 (48c)를 포함한 다양한 출력과, 상기 그래픽 프로세서 인터페이스 신호(46)와, 바람직한 실시예에서, 상기 외부 방송자(OB) 밴에서 연출가에 의해 주어진 카메라의 변환들에 관한 순서들에 의존한다. 장점으로서, 상기 순서들은 음성 순서들이고 마이크로폰(52)을 통하여 음성 인식 기술을 사용하여 해독된다.

바람직하게, 상기 변환 분석 모듈은 카메라들간의 변환들이 종종 수많은 프레임들의 형태로 및 와이프, 디졸브(dissolve)와 같은 특수 변환 형태로 점진적으로 이루어지기 때문에, 카메라로부터 다른 카메라로의 커트(cut)가 있음을 나타내는 표시를 보다 많이 제공한다. 상기 변환들을 예상하고 검출하여 상기 삽입된 이미지들과 그래픽들이 그래픽 공급 모듈에 의한 변환에 적합하도록 적절하게 조작되거나 변형될 수 있도록 하는 방법이 이하에서 개시된다.

실시예에서, 일련의 카메라 상태들(예를 들면, 카메라(1) 생방송, 카메라(2) 생방송)와 상기 상태들간의 자동 변환(예를 들면, 카메라(1)에서 카메라(2)로의 와이프, 카메라(2)에서 카메라(3)로의 디졸브)을 제공하는 변환 테이블이 발전된다. 상기 변환 테이블의 데이터는 특정 형태의 이벤트를 방송하는 특성 방송자의 방법을 특징으로 한다. 예를 들면, 방송자는 특정 팀을 위해 방송하는 가정 야구 경기에서 카메라(1)와 (2)간에 동일한 변환 또는 아주 유사한 변환을 사용할 것이다. 상기 일정한 변환들은 동일한 "보고 느낌(look and feel)"을 상기 경기들의 각각에 제공하는 것을 돕는다. 본 발명에서, 상기 일정성은 특정 이벤트에 대한 특수 카메라들간의 동일한 변환들의 예측을 가능하게 하고, 그럼으로써 변환 테이블은 상기 방송 동안의 사용을 위해 발전될 것이다. 장점으로서, 퍼지 논리 또는 신경 네트워크(neural network)가 많은 양의 변환 정보가 현재 사용된 25핀 탤리 케이블에서 제공되는 것과 같이 유사한 이벤트들의 방송에 기반을 둔 시간에 대한 변환 테이블을 발전시키는 것에 사용된다. 3개의 카메라 시스템에 대한 전형적인 변환 케이블은 표1에 개시된다.

카메라 변환	변환 형태	변환 길이
카메라(1) -> 카메라(2)	왼쪽에서 오른쪽으로의 와이프	60 프레임
카메라(1) -> 카메라(3)	디졸브	30 프레임
카메라(2) -> 카메라(1)	위에서 아래로의 와이프	30 프레임
카메라(2) -> 카메라(3)	믹스	20 프레임
카메라(3) -> 카메라(1)	디졸브	30프레임
카메라(3) -> 카메라(2)	아래에서 위로의 와이프	30 프레임

상기 변환 테이블에 대안으로 또는 추가하여, 음성 인식 기술이 마이크로폰(52)을 통하여 상기 OB 밴의 연출가로부터의 상기 명령들을 "해독"하는 것에 사용된다. 예를 들면, "디졸브 2", "와이프 3", "그래픽 준비", 또는 "그래픽들"의 명령어들은 상기 공급에서의 카메라들간의 변환을 각각 정의하고 상기 정보는 상기 변환에 적합하도록 삽입되는 그래픽의 이미지를 조작하기에 요구되는 정보를 제공하는 것을 돕는다. 상기 음성 인식 정보는 실시간으로 사용될 수 있고, 단순히 시간에 대한 변환 테이블을 발전시키는 것을 돕는 데 사용될 수 있다.

상기 변환 정보를 상기 그래픽 공급 모듈들에 제공하는 것 외에, 상기 변환 분석 모듈은 상기 시나리오 서버(58)로 상기 변환 정보를 제공한다. 상기 시나리오 서버는 스크립트들을 생성하는데 상기 변환 정보를 사용한다.

상기 시나리오 서버(58)는 클라이언트/서버 형태로 그래픽 공급 모듈들(56 1) 내지 (56 2), 트랙킹 모듈(54a) 내지 (54c) 및 변환 분석 모듈(50)에 연결되어 상기 모듈들은 제어하고 상기 모듈들간의 소정의 데이터 연결들을 제공한다. 장점으로, 상기 시나리오 서버(58)는 예를 들면 이더넷과 같은 네트워크를 통하여 다양한 모듈들과 연결되어, 집중 제어가 유지되는 동안에 다양한 기능의 비집중화를 제공하고, 그럼으로써 방송 이벤트를 위한 다양한 스크립트들 또는 시나리오의 신속하고 효율적인 갱신을 가능하게 한다.

"구성(configuration)"은 특정 공급에 대한 소정의 기간의 시간 동안의 모든 목표들의 상태를 나타낸다. 스크립트는 한 무리의 구성을 포함하여 상기 순서와 타이밍을 정의한다. 따라서, 스크립트는 특정 비디오 시퀀스의 목표들을 대시하여 순서, 내용 및 타이밍에 관한 일련의 명령어들이다. 스크립트는 특정의 공급(따라서 특정 그래픽 공급 모듈)과 관련되고 교체될 목표들과, 목표들을 대체하도록 된 이미지들 및/또는 에니메이션들, 및 각 그래픽 및/또는 에니메이션에 대한 교체의 지속에 대한 정보에 기반을 둔다. 예를 들면, 스크립트는 축구 경기의 공급에서 나타난 특정 광고판(목표)이 상기 경기의 전반전 동안에 A 기업에 대한 광고에서 상기 경기의 후반전 동안에 B 기업에 대한 광고로 교체되도록 한다. 비디오 시퀀스에 대한 단순화된 스크립트가 표2에 나타난다.

목표	전반전	후반전
목표 A	이미지 1	이미지 2
목표 B	이미지 2	에니메이션 1
목표 C	에니메이션 2	에니메이션 2
목표 D	이미지 3	이미지 1

상기 구성에 포함된 다른 정보 및 상기 스크립트는 각 이미지 또는 에니메이션(Mb단위)과 각 이미지/에니메이션의 색상에 관한 파라미터들의 크기이다. 전형적으로 이미지들은 단일 프레임 또는 이미지를 포함하고, 에니메이션들은 연속적으로 표시되는 일련의 이미지들을 포함한다.

상기 모듈들 간의 데이터 연결이 시나리오 서버(58)를 통하여 제어되는 때,상기 실시간 비디오는 상기 비디오 장치(32)로부터 상기 그래픽 모듈들(56 1) 내지 (56 3)으로 종래의 수단(케이블, 위상 등)을 통하여 신호(47)와 같이 전송된다. 바람직하게 삽입될 이미지들과 그래픽들이 상기 그래픽 공급 모듈에 의해 요구되기 전에 상기 시나리오 서버(58)로부터 상기 그래픽 공급 모듈(56a) 내지 (56c)로 전송된다. 상기 타이밍은 방송되어질 이벤트에서 발생하는 것(만약 지역 팀이 이기면 특정 광고의 교체)과 같이, 상기 시청자 또는 다른 정보와의 상호작용에 대한 응답으로, 거의 실시간으로, 교체 이미지 또는 그래픽들의 변형 또는 조작을 가능하게 한다.

상기 그래픽 공급 모듈(56)은 트랙킹 모듈(54a) 내지 (54c), 변환 분석 모듈(50)에 의해 제공된 "생방송" 카메라(들)의 식별 및 상기 스크립팅 정보 중의 적어도 하나에 의해 제공되는 로케이션 정보와 목표 식별을 사용하고, 상기 스크립팅 정보(교체 이미지들 또는 에니메이션들의 내용을 포함하는)는 특정 교체 이미지들 또는 에니메이션들을 조작하여, 상기 특정 교체 이미지들 또는 에니메이션들을 교체하고 스크립트된 시간에 특정 목표들을 교체하는 상기 시나리오 서버(58)에 의해 제공된다. 장점으로서, 각 GFM은 현재 "생방송" 카메라로부터의 포커스 정보(트랙킹 모듈들에 의해 제공된)와 줌을 사용하여 특정 레벨의 불명확성(fuzziness)을 상기 교체 이미지 또는 에니메이션과 관련시킴으로써 보다 더 상기 비디오 공급에 적합하도록 한다. GFM은 수많은 트랙킹 모듈들과 관련되어 상기 GFM은 상기 관련된 트랙킹 모듈들이 각각에 의해 식별된 목표들에 주의할 것이다(예를 들면 교체할 것이다). 도 1에 도시된 바와 같이, 트랙킹 모듈들(54a) 내지 (54c)는 상기 목표 트랙킹 정보를 GFM들(56 1) 내지 (56 3)에 제공하고 각 GFM은 수많은 트랙킹 모듈들로부터 정보를 수신한다. 상술된 바와 같이, 트랙킹 모듈들(54a) 내지 (54c)는 상기 목표들에 관련된 트랙킹 정보를 자동적으로 알고리즘적으로 제공하여야 하고, 상기 제공은 실시간으로 또는 실시간에 가깝게 실행될 것이다.

요약하면, 상기 시나리오 서버(58)는 그래픽 공급 모듈(56 1) 내지 (56 3)에 의한 목표들의 교체를 제어하는 스크립트들을 작동시킨다. 상기 스크립트들은 상기 교체 이미지들/에니메이션들의 내용과 상기 교체물들의 순서와 타이밍을 포함한다. 장점으로서, 상기 스크립트들은 상기 네트워크 연결을 통하여 GFM들(56)로 전송된다.

다중 공급들을 이용하는 본 발명의 실시예는 케이블 방송 시스템과 연결된 도 1의 상기 삽입 시스템으로부터의 상기 GFM들의 도해 블록 다이아그램인 도 2에 도시된다. 도 2의 실시예에서, GFM 1로부터의 공급은 케이블 신호중계기(72)에 제공된다. 바람직하게, 상기 GFM들은 상기 케이블 신호중계기와 나란히 배치되거나 높은 속도의 전송 라인들을 통하여 상기 케이블 신호중계기와 통신한다.

상기 케이블 신호중계기(70)는 GFM 1로부터 공급을 수신하여 케이블 네트워크를 통하여 수신기(74)로 분배한다; 동일하게 상기 케이블 신호중계기(72)는 GFM 2와 GFM 3으로부터의 공급을 수신하여 수신기(76) 및 (78)로 각각 분배한다. 따라서, 2개의 다른 공급들이 케이블 신호중계기(72)로 수신되고, 상기 공급들이 적절한 구독자에게 전송된다. 상술된 바와 같이, 다른 공급들을 수신한 구독자들은 언어, 지형, 또는 다른 인구통계학적 정보를 기반으로 구분될 것이다. 다른 실시예에서, 상기 공급들에 관한 정보는 시나리오 서버(58)에 의해 케이블 신호중계기(72)로 보내진다.

도 3 및 4의, 본 발명에 따른 실시예에서, 스크립트는 상기 시청자들과 상호작용할 수 있도록 하는 영역에로서 상기 공급의 특정 영역을 정의한다. 상기 "활성 영역"은 방송의 이미지의 미리 결정된 로케이션들이고, 상기 로케이션들 상에서 시청자는 마우스, 포인터 등을 클릭함으로써 선택을 표시한다. 활성 영역들은 일반적으로 상술된 바와 같이, 상기 목표들의 위치를 정하는 동일 기술의 사용에 의한 이미지의 동작과 필드, 표시될 프레임 또는 이미지의 기하학적 영역(예를 들면, 직교 또는 극좌표에 의해 나타나지는)에 의해 정의된다. 따라서, 상기 활성 영역들은 인터넷을 통하여 전송되는 월드 와이드 웹 페이지들에서의 베너들 또는 버튼과 같이, 스크린 상에 고정된 위치에서의 영역들이 아니고, 선택과 관련된 정보는 상기 월드 와이드 웹을 통해 실행되는 것과 같은 방법으로 수신되고 상기 네트워크로 되돌려 전송될 수 있다.

상기 다중-카메라, 다중-공급 시스템이 하기에 기술된 광범위한 기능성을 가장 단순한 형태로 제공할 때, 본 발명에 따른 상호작용 가상 삽입 시스템은 카메라 출력을 제공하는 카메라와, 상기 카메라 출력을 수신하여 상기 카메라 출력에서 미리 정의된 활성 영역을 추적하는 트랙킹 모듈과, 상기 카메라 출력을 상호작용 수신기에 제공하는 서버 및, 상기 상호작용 수신기로부터 상기 활성 영역의 선택을 검출하여 상기 선택에 대한 응답을 제공하는 컴퓨터로 구성된다.

도 5는 본 발명에 따른 다른 특성을 나타낸 시스템의 단순화된 블록도를 도시한 것으로서, 도 1의 구성요소들에 대응하는 구성요소들은 동일한 참조번호로 지정된다. 디지틀 카메라(10a) 내지 (10m), 트랙킹 모듈들(54a) 내지 (54m), GFM들(56 1) 내지 (56 3)을 포함하는 구성요소들간의 링크는 이더넷 버스이다. 스위쳐(31)는 믹서와 선택기(selector)로서 작용한다. 갑작스런 변환들 또는 "커트들"은 (62)에서 검출된다. 상기 변환 분석 모듈(50)은 (62)로부터 수신된 탤리 신호들과 데이터에 기반을 둔 GFM 1(56)을 제어한다.

본 발명의 시스템은 특정 선택들을 상기 활성 영역의 정의에 관련된 실행자(implementer)(상기 시스템을 사용하여 상기 궁극적인 사용자들에게 방송을 분배하는 사람)에게 제공하는 능력을 구비한다. 예를 들면, 도 3에 도시된 바와 같이, 만약 디스플레이(80)상에 표시된 공급이 방송되는 야구 경기의 외야 담장의 광고판(82)을 포함하는 배경과 달려가는 선수(90)를 포함하는 전경을 포함한다면, 상기 활성 영역은 1)선수(88)에 의해 차단되거나 되지 않거나 광고판(82) 전체(즉, 배경만); 2)선수(88)에 의해 차단되지 않은 광고판(82)의 영역(영역 (84))(즉, 배경에서 전경을 제외한 부분); 또는 3)선수(88)에 의해 차단된 광고판(82)의 영역(즉, 배경에 전경을 더한 부분만). 따라서, 상기 선택 중의 하나가 활성 영역으로 정의될 수 있거나, 각 선택이 다른 활성 영역을 정의할 수 있다. 상기 3개의 영역들은 상기 목표들과 활성 영역들이 구비된 카메라들을 사용하여 추적되는 실시예의 시스템을 사용할 때 특히 현저하게 된다.

상기 활성 영역들은 상기 비디오 공급과의 엄청난 잠재능력을 구비한 상호작용을 생성한다. 예를 들면, 도 4에서, 만약 디스플레이(80)상에 표시되는 공급이수영 경기이면, 수영 레인들(92a) 내지 (92e)은 특수 영역으로서 지정될 것이고, 사용자가 특정 레인상에 포인터나 마우스를 클릭한 때, 상기 수영자의 통계가 박스(92)에 도시된 바와 같이, 표시될 것이다. 바람직한 실시예에서의 수영자의 통계(즉, 요청된 데이터)는 일부 포인트 업스프림(upstream)에서 GFM에 의해 삽입되고, 다른 실시예에서, 각 수영자의 통계(즉 모든 가능한 선택과 관련된 데이터)는 상기 공급에 포함되고 상기 요청된 통계는 상기 사용자의 수신기에 의해 상기 공급으로부터 추출되어 표시된다.

상기 사용자의 활성 영역들의 다른 예로서, 자동차 경주의 자동차들이 활성 영역들로 지정될 것이고, 상기 사용자가 특정 자동차를 클릭한 때, 상기 자동차의 게이지들이 표시될 것이다. 본 발명은 사용자가 상기 공급내의 활성 영역으로 지정된 광고를 클릭한 때, 상기 광고가 완전한(clean) 공급의 일부이거나 그래픽 모듈들에 의해 삽입되든지 상술된 바와 같이, 미리 결정된 정보를 표시한다.

장점으로서, 실행자는 상술된 것과 같은 즉각적인 응답보다 원거리 또는 지연된 동작과 활성 영역을 연관시키도록 선택할 것이다. 상기 사용의 예는 경기 중계 동안에(또는 경기 중계의 선택된 부분) 시청자가 상기 선수(88)(도 3에 도시된)을 클릭할 때 올-스타(all-star) 투표를 계산하는 것을 포함한다. 상기 투표의 결과들은 상기 경기의 종료시에 표시될 수 있다. 유사하게, 특정 활성 영역의 선택은 다음 시간의 재연을 위해 메모리에 이전의 플레이를 저장할 것이다.

장점으로서, 활성 영역의 선택은 활성 영역 이미지내의 색상의 변화 또는 오디오 신호 또는 메시지에 의해 신호화된다. 유사하게, 만약 활성 영역이 다시 선택될 수 없다면, 시도된 재-선택은 적절한 텍스트나 오디오 메시지에 의해(상기 활성 영역이 투표를 위해 사용되는 때) 신호화된다.

본 발명의 중요한 부분은, 상기 목표들의 교체에 있어서, 상기 활성 영역이 상기 실행자(예를 들면, 케이블 신호중계기에서)에 의한 기능들과 관련되고, 그럼으로써 기능에 맞게 고쳐질 수 있다. 본 발명에 따른 시스템은 상기 활성 영역의 좌표의 형태로 상기 실행자에게 "핸들들"을 제공한다. 상기 핸들 정보는 상기 비디오의 귀선소거기간(blanking interval)에 삽입되거나, 디지틀 방송에서 관련된 이미지의 프레임들의 표시동안에 사용되는 적절한 시간에 삽입될 수 있다. 상기 활성 영역들( 및 만약 상기 실행자가 활성 영역에 대한 제어를 한다면 목표들)에 대한 기하학적 로케이션들을 정의하는 상기 핸들들은 상기 실행자에게 종종(예를 들면, 각 이미지 프레임당 한 번) 갱신되어야 하고, 이는 상기 핸들들이 상기 활성 영역( 및 목표들)이 상기 디스플레이에서 움직임에 따라 일정하게 변화하기 때문이다.

따라서, 상기 시스템은 유동적임으로써, 바람직하게, 상기 실행자는 상기 활성 영역들을 사용할 것인가와 사용하는 방법을 선택할 수 있다. 각 활성 영역에 관련된 기능들은 방송자 업스트림(예를 들면, 이벤트의 초기 방송자) 또는 상기 실행자에 의해 결정될 수 있다. 실시예에서, 만약 업스트림 방송자가 상기 활성 영역들의 기능을 결정하면, 상기 기능은 시나리오 서버(58)에 의해 정의되고, 상기 기능은 각 비디오 세그먼트에 대한 스크립트의 일부이다. 또한, 만약 상기 실행자가 상기 활성 영역들의 기능을 결정하면, 상기 실행자에 의해 제어되는 컴퓨터에 의해 실행된다. 상기 컴퓨터는 상기 시나리오 서버(58)에 연결됨으로써 상기 활성 영역들에 관한 데이터를 상기 시스템의 업스트림으로 되돌려 제공한다.

목표들에 대한 좌표 데이터와 상기 비디오 공급의 일부 또는 비디오 공급의 연결로서 상기 활성 영역들을 위한 핸들들의 준비는 본 발명에 따른 시스템이 지연되는 방송에도 적합하도록 한다. 상기 경우에, 상기 목표 교체와 상기 활성 영역의 사용법 및 기능을 정의하는 스크립트는 상술된 로케이션과, 언어 및 상호작용에 기반을 둔 수정뿐만 아니라, 특정 방송 시간에 맞도록 고쳐질 것이다. 따라서, 스포츠 이벤트의 초기 방송 동안에 제공되는 광고들은 상기 스포츠 이벤트의 재방송동안의 광고와는 다르다( 또한 보다 비쌀 것이다).

상기에서 비디오 이미지들 또는 그래픽들이 개시되고, 상기 시스템은 오디오 모듈들은 상기 그래픽 공급 모듈들과 함께 사용함으로써 오디오를 상기 공급에 삽입하도록 한다. 예를 들면, 다른 실시예에서, 오디오 세그먼트는 특정 항목(사람, 광고 등)이 방송 동안에 제시되는 각 시간마다 재생된다. 표준 TV 방송에서, 상기 오디오 세그먼트는 다른 언어들에서도 일반적으로 사용되고, 필요하면 정규 프로그램 사운드 트랙과도 혼합되는 제 2 오디오 트랙(secondary audio track: SAP)으로 제공된다. 장점으로서, 상술된 바와 같이, 오디오 트랙은 상기 시청자에 의한 상호작용에 대한 응답으로 제공된다. 활성 영역의 선택에 대한 단순한 인식뿐만 아니라, 관련된 오디오 세그먼트들도 제공된다. 예를 들면, 도 4에 도시된 수영 경기의 방송 동안에, 만약 상기 사용자가 수영 레인 상의 마우스를 클릭하면, 상기 사용자는 수영자의 바이오리듬, 예를 들면 심장 박동을 나타내는 오디오를 들을 것이다.

각 카메라에 대한 트랙킹 모듈을 구비한 본 발명의 다중 카메라의 용량은 소정의 부가적인 장점들을 제공한다. 첫째로, 교체 이미지들 또는 에니메이션들이 다수의 카메라 각도들에서 사용되기 때문에, 상기 이미지의 연속성이 향상된다. 또한, 이벤트(또는 목표들)에 대한 많은 정보는 다중 카메라의 사용에 의해서만 추출된다. 예를 들면, 특정의 기하학적 특성 또는 색상적 특성의 자동 검출은 3각형 측량 또는 2개의 카메라 위치들 또는 각도들을 요구하는 다른 방법(예를 들면, 자동차 경주에서의 선두의 속도, 필드 이벤트에서의 오프사이트(offside) 표시 위치 등)에 의해서만 가능하다. 또한, 목표가 하나의 뷰에서 방해되면, 잃어버린 데이터는 다른 카메라의 뷰를 통하여 보충될 수 있다. 또한, 상기 목표들의 특성들이 각 카메라에 대해 다르게 정의될 수 있고, 그럼으로써 공급들의 운영에서 현저한 유동성을 제공한다(예를 들면, 동일한 목표가 소정의 공급에서의 다른 시나리오들에 포함되는 불투명하게 및 투명하게 지정될 수 있다).

또한, 상기 목표들의 교체에 관련된 설명은 지역화된 목표들의 교체에 일반적으로 집중되지만, 보다 넓은 목표들의 교체도 본 발명에 의해 가능하다. 예를 들면, 배경 세트들에서의 오류를 나타내는 HDTV에 의해 이전보다 훨씬 상세하게 제공된 명확성과 선명도 때문에, 또한 HDTV에서의 전체 필드들/프레임들을 방송하기 위해 요구되는 광대역때문에, 본 발명은 "가상 세트(virtual sets)"를 구비한다. 가상 세트는 컴퓨터에 의해 생성되고 그래픽과 같이 단순하고 신속하게 방송될 수 있는 배경 세트이다. 본 발명에서, 상기 가상 세트는 최종 방송자에서 비디오 공급(배경이 제거된)과 연결된다. 도 5에 도시된 바와 같이, "뉴스룸(news room)"를 구비한 가상 세트는 완전한 뉴스 방송을 제고하는 뉴스진행자들을 포함하는 비디오공급과 연결된다. 상기 시스템은 필요한 대역폭을 감소시키고, 최종 생산물의 화면을 향상시키고, 배경의 주문을 가능하게 한다. 예를 들면, 주문된 뉴스룸이 방송을 보다 지역적으로 나타나게 하는 도 5의 상기 뉴스 공급과 연결되어 사용될 수 있다.

상기에서, 본 발명은 종래 TV 비디오 시스템에서 사용되는 경우를 개시한다. 또한, 인터넷 상의 TV 또는 컴퓨터 통신을 위한 시스템 및 스마트 TV 세트 또는 탐 박스를 이용한 상호작용 TV의 사용에도 적합하다. 상기 시스템에서, 개인화도 가능하다. 상기 카메라에 의해 전송된 이미지와 상기 카메라의 의해 나타난 장면의 설명과 관련된 표준 MPEG4의 부분에 의해 제공되는 높은 수준의 압축과 가능성에 의해 보다 용이하게 실현된다. 표준 MPEG2에 따른 신호들은 표시되는 이미지의 다른 시각 부분들이 어떻게 결합되는가를 설명하는 데이터를 포함할 것이다. 상기 부분들은 상기 카메라에 의해 나타나는 장면에 고정되거나 움직일 수 있다.

상술된 바와 같이, 상기 카메라에 의해 나타난 장면에서 하나 이상의 목표들의 전송된 이미지들의 로케이션은 데이터의 스트림에 포함된 패킷들에 의해 공급에서 식별될 것이다. 상기 패킷들은 각 연속하는 프레임 또는 필드에서 다각형 목표의 모서리들을 식별할 수 있다. 상기 패킷들은 상기 장면 또는 이미지에 대한 완전한 설명을 제공하고 상기 카메라의 현재 위치와 상기 목표(들)의 상대적 좌표들을 식별한다. 상기 분할 형태는 2D 또는 3D 모델들 또는 물체들의 삽입을 가능하게 한다.

또한 개인화는 다른 방법으로 실행될 수 있다:

* 내용 소유자는 목표를 프리세트(pre-set)하여 예를 들면 브라우저의 언어에 의해 정의되는 사용자의 프로필에 따라 선택된 물체를 대신하게 하거나 디스플레이에서 변경되지 않도록 한다; 그리고 각 수신기는 상기 목표를 저장된 식별 데이터와 상기 제어실에 의한 공급에 포함된 명령어들간의 비교에 대응하는 물체들 중에서 특정의 하나로 교체할 것이다.

* 상기 사용자/구독자는 모든 시청자들과 동일하거나(즉, 스포츠 이벤트의 점수) 다른 또한 저장된 식별(예를 들면 물체에서 사용되어야하는 언어를 나타내는)에 대응하는 상기 물체로 대신되어야 하는 상기 디스플레이에서 식별된 목표 영역들을 선택할 것이다.

* 제 3자가, 예를 들면 지역 네트워크의 운영자 또는 광고 외부 운영자가 패턴들을 식별하는 적절한 데이터 또는 사용자의 프로필에 의존하여 삽입되어지는 물체들을 삽입할 것이다; 상기 삽입은 상기 목표들의 식별을 포함하는 공급을 수신하는 중심 스테이션에서 이루어진다.

상기한 구성의 본 발명에 따르면, 본 발명은 상기 미리 정의된 스크립트들은 방송자(broadcaster)로부터의 입력과 같이, 다른 요소들에 또는 상기 시청자와의 상호 작용에 기반을 두고, 상기 이벤트 동안에 갱신되거나 변경되는 효과가 있다.

또한 본 발명은 시나리오 서버가 이더넷과 같은 네트워크를 통하여 다양한 모듈들과 연결되고, 방송 이벤트에 대한 다양한 스크립트들 또는 시나리오들의 신속하고 효율적인 갱신을 가능하게 하는 집중 제어를 유지하는 동안에 다양한 기능들의 비-집중화를 제공하는 효과가 있다.

본 발명은 이상적으로 상기 시청자와 상호작용이 가능한 배달 시스템을 제공하는 효과가 있다.

Claims (12)

1. 카메라 출력의 적어도 하나의 목표를 이미지로 교체하는 가상 삽입 시스템에 있어서, 상기 시스템은:

   카메라 출력을 각각 제공하는 다수의 카메라들(10)과;

   상기 카메라 출력을 수신하고 결합된 비디오 출력과 카메라 또는 카메라들이 언제든지 상기 결합된 비디오 출력을 제공하는 것을 나타내고 상기 결합된 비디오와 결합되는 탤리 신호들을 제공하는 스위쳐(31)와;

   상기 카메라들 중의 적어도 하나로부터 상기 카메라 출력을 각각 수신하여 상기 카메라 출력에서 상기 목표의 로케이션을 추적하는 다수의 트랙킹 모듈들(54)과;

   상기 스위쳐(31)로부터 상기 탤리 신호들을 수신하고 상기 비디오 출력내의 카메라들(10)간의 변환들과 카메라들(10)의 식별을 제공하는 변환 분석 모듈(50)과;

   다수의 공급들 중의 각각에서 상기 적어도 하나의 목표의 위치에 삽입되어지는 이미지들의 순서와, 내용 및 타이밍에 관한 정보를 각각 포함하는 다수의 출력의 각각에 대한 스크립트들을 정의하는 시나리오 서버(58) 및;

   상기 다수의 트랙킹 모듈들에 의해 제공된 적어도 하나의 목표에 관한 트랙킹 데이터와, 상기 변환 분석 모듈(50)에 의해 제공된 카메라 식별과 변환 정보 및 상기 시나리오 서버(58)에 의해 제공된 스크립트 정보에 기반을 둔 상기 결합된 비디오 출력으로 이미지를 삽입시킴으로써 출력 공급을 제공하는 다수의 그래픽 공급 모듈들(56)로 이루어지는 것을 특징으로 하는 가상 삽입 시스템.
2. 제 1 항에 있어서,

   상기 시나리오 서버와, 상기 다수의 트랙킹 모듈들과, 상기 다수의 그래픽 모듈들 및 상기 변환 분석 모듈은 컴퓨터 네트워크로 연결되고, 상기 모듈들간의 데이터와 비디오의 전송은 상기 컴퓨터 네트워크를 통하여 이루어지는 것을 특징으로 하는 가상 삽입 시스템.
3. 제 1 항에 있어서,

   상기 시나리오 서버는 상기 다수의 트랙킹 모듈들과, 상기 다수의 그래픽 모듈들 및 상기 변환 분석 모듈간의 데이터 흐름을 제어하는 것을 특징으로 하는 가상 삽입 시스템.
4. 제 1 항에 있어서,

   상기 다수의 트랙킹 모듈들의 각각은 상기 카메라 출력의 이미지들을 처리함으로써 카메라 출력의 상기 적어도 하나의 목표의 로케이션을 추적하는 것을 특징으로 하는 가상 삽입 시스템.
5. 제 1 항에 있어서,

   상기 다수의 카메라들의 각각은 비디오 이미지들과 설비 데이터를 포함하는 카메라 출력을 제공하고 상기 다수의 트랙킹 모듈들의 각각은 적어도 하나의 카메라로부터 설비 데이터를 수신하고 상기 설비 데이터를 처리함으로써 카메라 출력에서 상기 적어도 하나의 목표의 로케이션을 추적하는 것을 특징으로 하는 가상 삽입 시스템.
6. 제 1 항에 있어서,

   상기 결합된 비디오 출력에서 카메라들의 식별 및 카메라들간의 변환들에 관한 상기 정보를 제공하고, 상기 결합된 비디오 출력은 하나의 카메라에서 다른 카메라로의 변환이 있는 때 상기 스위쳐에 의해 사용된 변환의 형태를 포함하는 변환 테이블 또는 연출가로부터의 음성 신호들에 기반을 둔 것임을 특징으로 하는 가상 삽입 시스템.
7. 다수의 카메라 각각의 출력에서 적어도 하나의 목표를 교체하는 다중 공급 가상 삽입 시스템을 제공하는 방법에 있어서, 상기 방법은:

   상기 카메라 출력들간의 스위칭에 의해 결합된 비디오 출력을 제공하고 카메라 출력이 소정의 시간에 상기 결합된 비디오 출력에 포함됨을 나타내는 탤리 신호들을 제공하는 단계와;

   상기 각각의 출력에서의 상기 적어도 하나의 목표의 로케이션을 추적하고 트랙킹 데이터 출력을 제공하는 단계와;

   상기 탤리 신호를 분석하고 상기 결합된 비디오 출력에서의 카메라들간의 식별과 카메라들간의 변환들에 관한 변환 정보를 제공하는 단계와;

   다수의 출력의 각각에서의 상기 적어도 하나의 목표의 위치에 삽입되는 이미지의 순서, 내용 및 타이밍에 관한 정보를 포함하는 다수의 공급들 각각의 스크립트들을 정의하는 단계 및;

   상기 트랙킹 데이터와, 상기 변환 정보 및 상기 스크립트들에 기반을 둔 상기 결합된 비디오 출력으로 이미지들을 삽입함으로써 상기 출력 공급들을 제공하는 단계를 포함하는 것을 특징으로 하는 다중 공급 가상 삽입 시스템을 제공하는 방법.
8. 제 7 항에 있어서,

   상기 이미지들은 각각 하나의 공급을 제공하는 다수의 그래픽 모듈들에 의해 상기 결합된 비디오 출력으로 삽입되는 것을 특징으로 하는 다중 공급 가상 삽입 시스템을 제공하는 방법.
9. 제 8 항에 있어서,

   상기 스크립트들을 정의하는 시나리오 서버가 제공되는 것을 특징으로 하는 다중 공급 가상 삽입 시스템을 제공하는 방법.
10. 제 7 항에 있어서,

    상기 변환 정보는 상기 결합된 비디오 출력에서의 상기 다수의 카메라들간의 변환 형태에 관한 데이터를 포함하는 변환 테이블 또는 연출가로부터의 음성 신호들에 기반을 두는 것을 특징으로 하는 다중 공급 가상 삽입 시스템을 제공하는 방법.
11. 카메라 출력을 제공하는 카메라와;

    상기 카메라 출력을 수신하고 상기 카메라 출력에서 미리 정의된 활성 영역을 추적하고 상기 카메라 출력에서의 상기 활성 영역의 로케이션을 나타내는 핸들들을 제공하는 트랙킹 모듈과;

    상기 카메라 출력을 상호작용 수신기로 제공하는 서버 및;

    상기 상호작용 수신기의 상기 활성 영역의 선택을 검출하고 상기 선택에 대한 응답을 제공하는 컴퓨터로 구성되는 것을 특징으로 하는 상호작용 가상 삽입 시스템.
12. 제 11 항에 있어서,

    상기 선택에 대한 응답을 제공하는 컴퓨터는 그래픽 공급 모듈을 구비하고 상기 응답에 관련된 데이터는 시나리오 서버에 의해 상기 그래픽 공급 모듈로 제공되는 것을 특징으로 하는 상호작용 가상 삽입 시스템.