KR20040071715A - 콘텐츠에 기초하여 비트 스트림으로부터 표시를동기화하는 장치 및 방법 - Google Patents

Abstract

실질적으로 동일한 렌더링 가능 콘텐츠를 가지면서 서로 이격된 위치들에 배치되어 있는 다수의 디지털 비트 스트림들의 콘텐츠가 조화 재생된다. 첫 번째로, 각 스트림들을 재생함으로써 동기화된 시청 세션에 참여하는 프로세서들 사이에서 시간이 동기화된다. 두 번째로, 전체적으로 정밀하게 동기화된 표시를 실행하기 위해 되감기 또는 빨리감기에 의해 재생들이 콘텐츠-단위 정렬된다. 콘텐츠-단위 정렬은 송신자의 비트 스트림의 정보 특성을 포함하는 프로세서들 사이의 상태 메시지에 의해 달성된다. 소정의 참여자가 제어 기능(예로서, 되감기, 빨리감기, 정지)을 수행하는 경우에, 모든 다른 참여자들은 동기식으로 추종한다. 세션을 개시하는 프로세서는 개시자로 간주되며 그 역할은 제어 기능을 최종 수행하는 참여자에 의해 추정된다. 개시자는 개시자의 것에 그 재생들을 동기화하여 모든 재생들이 동기화되고, 동기화를 유지하도록 세션 시작시, 각 제어 기능 실행시 및 주기적으로 모든 참여자들을 감독한다.

Description

콘텐츠에 기초하여 비트 스트림으로부터 표시를 동기화하는 장치 및 방법{Apparatus and method for synchronizing presentation from bit streams based on their content}

개인용 비디오 레코더들(PVR들)은 실질적으로 모든 텔레비전 방송 시스템(예를 들면, 케이블, 디지털 케이블, 위성, 안테나, 또는 이들의 조합들)과 함께, 뿐만 아니라 VHS, DVD, 인터넷 소스들 등으로부터의 레코딩하는데 사용될 수도 있는 비디오 레코딩 디바이스들이다. PVR들은 사용자가 원하는 것, 사용자가 원할 때 시청할 수 있도록 사용자의 선호 텔레비전 프로그램 또는 프로그램들을 자동적으로 탐색하고 레코딩하도록 프로그램될 수도 있다. 통상적으로, PVR들은 상당한 양의 메모리를 포함하고 30분 이상의 프로그래밍을 레코딩하는 것이 가능하다. 다음, 레코딩된 프로그래밍은 원하는 바에 따라 사용자에 의해 검색되어 시청될 수도 있다.

현재의 PVR 테크놀로지는 사용자들이 레코딩되는 프로그램(통상적으로 텔레비전 방송들)의 콘텐츠를 시간 시프트(time shift)할 수 있게 한다. 달리 말하면, 사용자는 텔레비전 방송을 레코딩하고 이를 몇시간 또는 며칠 후에 시청할 수도 있다. 대안적으로, 사용자는 프로그램을 레코딩하려고 결정하고 프로그램의 시작 후 미리 결정된 양의 시간에 이를 시청하여 사용자가 프로그램 전체에 걸쳐 분배될 수도 있는 임의의 광고 방송들을 스킵하는 능력을 갖는다. 따라서, 사용자는 생방송을 시청하는 사람들과 실제로 동일한 시간 기간 동안 프로그램을 시청할 수 있다. 그러나, 광고 방송들을 스킵하는 능력이 제공되면, PVR의 사용자는 다른 사람들보다 적은 시간에 동일한 프로그램을 시청할 수 있다.

상기의 PVR들의 이점들에도 불구하고, 이들의 사용과 연관된 단점들이 있다. 예를 들면, 다수의 사람들은 사람들이 물리적으로 상이한 위치들에 위치하고 있음에도 다양한 프로그램들(예를 들면, 스포츠 이벤트들, 토크쇼들 또는 드라마들)을 동시에 시청하는 것을 즐긴다. 이 사람들은 종종 전화 또는 인터넷과 같은 다른 통신 수단에 의해 프로그램 중에 서로 통신할 수 있다. 따라서, 이들은 이벤트들이 구체화됨에 따라 프로그램에 대해 논의할 수 있다. 그러나, 사람들이 콘텐츠를 시간 시프트함에 따라, 이들은 그들의 각각의 위치들에 있으면서 쇼들을 "함께" 동시에 시청하는 능력을 손실한다. 필연적으로, 2명의 사용자들은 동일한 프로그램을 비동기적으로 시청할 것이고, 따라서 하나의 사용자는 예를 들면 다른 사용자보다 먼저 극적인 장면 또는 스포츠 이벤트의 결과들을 인지할 수 있다.

본원에 참조로서 합체되었지만 배경 기술 섹션에서 그의 언급에 의해 선행 기술로서 허용되지는 않는, 본 출원의 양도인에게 양도된 2001년 6월 28일 출원된발명의 명칭이 "동기화 개인용 비디오 레코더들"인 계류 중인 미국 특허 출원 제09/894,060호는 다른 PVR에 상태 메시지를 전송함으로써 하나의 PVR이 다른 PVR과 동기화되는 시스템이 개시되어 있다. 메시지는 PVR의 개시자의 사용자가 시동, 빨리감기 또는 되감기와 같은 PVR 기능을 작동하여 메시지의 수신자가 동기화된 PVR들 모두에 표시를 유지하기 위해 대응 기능을 수행하도록 할 때 발행된다. 메시지는 또한 동기화를 업데이트하도록 주기적으로 전송된다. 메시지 내에는 시청 중이거나 시청될 프로그램의 식별자, 시청 모드(예를 들면, 정상 재생, 빨리감기, 일시 정지 등)의 명령기, 및 프로그램 내로의 시간 또는 프레임이 존재한다. 시간 또는 프레임은 수신 PVR이 그 자신의 현재 시간 또는 프레임과 메시지 내의 시간 또는 프레임을 비교함으로써 전송 PVR의 것과 그의 리플레이를 동기화하게 한다.

전송 PVR로부터 수신 PVR로 시간 또는 프레임을 전송함으로써 수신 PVR과 전송 PVR을 동기화하는 이 개념의 확장에 의해, 본 발명을 설명하기 위해 양 PVR들이 각각의 동일한 비디오의 카피들을 재생한다고 초기에 가정할 수 있다. 전송 PVR의 프레임은, 저장 매체 내에 저장된 비트 스트림 내에 상주하는 비디오의 전송자의 카피의 부분이다. 유사하게, 비디오의 수신 PVR의 카피의 프레임들은 수신자의 저장 매체에 저장된 비트 스트림 내에 상주한다.

또한 하나의 PVR의 비디오 타이머가 그의 출력이 다른 PVR의 비디오 타이머와 동시인 것을 나타낼 때 각각의 비디오들은 그들의 각각의 재생들에서 동일점 콘텐츠 방향에서 재생한다. 임의의 PVR이 빨리감기 또는 되감기를 하면, 이는 대응적으로 및 동기적으로 그의 각각의 비디오 타이머의 시간 카운트를 진행하거나 복구한다.

예를 들면, 수신자 PVR의 비디오 타이머가, 수신자 PVR이 그의 출력 시간 스탬프로서 1시간 1분 2초(전송 PVR의 비디오 타이머에 따라 설정됨)를 갖는 전송 PVR 메시지로부터 수신할 때 1시간 1분 1초를 판독하면, 이는 수신자 PVR의 재생이 전송 PVR의 재생보다 1초 지체되었음을 지시할 수 있다. 이는 예를 들면, 단일 참조 클럭의 타이밍에 따라, 수신자 PVR이 전송자 PVR이 그의 재생을 시작한 후 1초 후에 그의 재생을 시작하는 경우일 수 있다. 이 전제에 기초하여, 수신자 PVR은 1초의 시간 차이를 보상하도록 교정 작용을 취할 수 있다. 구체적으로, 메시지의 전송 시간이 무시할만 하면, 예를 들면 시간 차이가 1초이면서 1밀리초인 경우에는, 전체 1초 시간 차이가 PVR들 상의 각각의 재생을 동기화하도록 교정 작용을 취하도록 의존될 수 있다. 수신자 PVR은 예를 들면 전체 초만큼 그의 프로그램의 로컬 카피를 "빨리감기"할 수 있고 초만큼 그의 비디오 타이머를 증분할 수 있다. 이 작용에 의해, 수신자의 재생은 전송자의 재생과 콘텐츠 방향을 포착할 수 있고, 전송자 및 수신자 PVR들의 각각의 비디오 타이머들이 동기화될 수 있다.

그러나, 전송 시간을 무시할 수 없으면, 적용된 교정 보상이 각각의 비디오 타이머들이 비동기화되어 있는 정도 및 이에 따라 각각의 재생들이 콘텐츠 방향으로 비동기화되어 있는 정도를 적절하게 반영하도록 수신자 PVR에서 메시지가 수신될 때와 도입 메시지의 출력 시간 스탬프의 비교를 고려할 필요가 있다.

그러나, 상기 기술 단독으로는 비디오 표시를 항상 동기화할 수는 없다, 즉 각각의 재생에서 대응 프레임들의 재생을 동시화할 수는 없다. 임의의 임의적으로선택된 공통 비디오 타이머 시간에서 각각의 PVR 상에 표시되는 콘텐츠가 동일한 상기에 수행된 가정이 엄밀히 유지되지 않는다. 2개의 PVR들 상에 레코딩된 프로그램들은 예를 들면 동일한 공칭 비디오 개시 시간에 개시되지만, 이들이 각각 시작되는 비디오의 실제 지점에 대해서는 몇초 등만큼 약간 상이하다. 그 결과, 양 재생들이 나란히 시청되면, 하나는 다른 하나보다 지체될 수 있다. 따라서, 양 각각의 PVR들의 비디오 타이머들이 완전히 동기화되더라도, 비디오의 각각의 장면들은 비동기화될 수도 있다.

또한, 2개의 재생들이 초기에 동기화되더라도, 표시는 이것이 진행함에 따라 비동기화로 표류할 수도 있다. 예를 들면, 각각의 PVR들이 그들의 비디오의 각각의 카피를 재생하는 속도는 상이할 수도 있다. 이들 차이들은 2개의 PVR들이 빨리감기 또는 되감기 모드에서 상이한 실제 속도들을 갖는 경우에 더 중요하게 되고 PVR들 중 하나가 빨리감기 또는 되감기를 수행한 후에 장면들을 비동기화하여 다른 것을 현재 및 동기적으로 따르도록 명령한다.

동기화의 결핍은 또한 예를 들면 2개의 재생들의 상이한 광고 방송들, 및 따라서 상이한 광고 방송 시간 기간들에 기인하여 종종 발생할 수도 있다. 양 시청자들은, 예를 들면 RCN 또는 타임 워너(Time Warner)와 같은 상이한 케이블 또는 위성 공급자들을 통해, 예를 들면 내쇼널 브로드캐스팅 캄파니(NBC)와 같은 동일한 네트워크를 시청할 수도 있다.

한편, 현재 시간보다는 현재 프레임이 메시지 내에 전달되면, 무시할 수 없는 전송 시간이 여전히 동기화 표시에 고려되어야 한다. 예를 들면, 소스 PVR은,프레임 번호 "n"이 현재 소스 PVR 상에 재생되는 것을 지시하는 메시지를 수신지 PVR에 전송하고, 수신지 PVR은 무시할 수 없는 경우 메시지의 수신시에 재생하는 프레임 번호를 메시지 내에 지시된 프레임 번호와 비교하여 전송 시간을 인지할 필요가 있다.

프레임 기반 기술에서, 재생들이 동기화되거나 전송 시간이 재생들을 동기화할 필요가 있더라도, PVR들은 상이한 압축 체계들을 채용하는 상이한 서비스 공급자들을 사용할 수도 있다. 하나의 체계는 더 많은 프레임들을 포함함으로써 다른 것보다 높은 이미지 품질을 공급할 수도 있고, 따라서 전송자의 비디오의 카피가 수신자의 카피와 동일하다는 상기의 가정이 엄밀하게 의존될 수 없다. 게다가, 적응성 기술들이 종종 이미지 내의 이동의 양에 기초하여 시간 순간 대 시간 순간으로 이동 이미지를 캡처링하는 프레임들의 수를 가변하는데 사용된다. 대응 비디오 콘텐츠에 대한 프레임들 수들의 차이는 문제가 있는 프레임 수들에 기초하여 동기화를 수행한다.

다수의 상황들에서, 이들 동기화 에러들은 각각의 재생들의 시청자들이 이들을 통지하지 않는 이러한 작은 크기이다.

그럼에도, "비동기화" 효과들이 중요하고 시청 향유와 간섭하는 시청 구조들이 존재한다. 더욱이, 예를 들면 사람들이 예컨대 대형 온라인 시스템을 압축해제하기 위해 수동의 미리 레코딩된 비디오 형태를 사용하여 작업을 동시에 결합적으로 실행하는 다수의 시나리오들에서, 전화 메시지, 표시 및 메시지 및/또는 표시에 기초하는 작용의 정밀한 동기화가 필요할 수도 있다.

정밀한 동기화를 성취하기 위해, 본 발명은 동기화되는 비디오 재생들의 쌍들의 "랜드마크들" 또는 대응 콘텐츠를 비교하고, 랜드 마크 쌍들 사이의 비디오 리플레이 "거리"를 결정하고, 이들 거리들에 따라 선택된 재생들을 느린 재생하거나 빠른 재생한다.

본원에 참조로서 합체되고 디미트로바(Dimitrova) 등에 허여된 발명의 명칭이 "DC 및 움직임 서명을 사용하는 MPEG 압축 시퀀스들의 비디오 검색"인 미국 특허 제5,870,754호("디미트로바")는, 그의 콘텐츠가 질의 비디오 클립의 것과 유사한 비디오 시퀀스를 검색하도록 데이터베이스 내의 DC+M 서명들과 질의 비디오 클립의 "DC+M 서명들"을 비교하고, 여기서 비디오 클립은 비디오 프레임들의 시퀀스로서 정의된다.

하나의 디미트로바의 실시예에서, I 프레임으로부터의 DC 계수 정보 및 후속 프레임으로부터의 움직임 벡터 정보가 디지털 서명, 따라서 용어 "DC+M 서명"을 형성하도록 조합된다.

MPEG(동영상 전문가 그룹) 압축 표준 하에서의 "I 프레임"은, 이동 이미지의 단일 스냅샷의 코딩인 인트라프레임 코딩 프레임이다. I 프레임들 사이에 산재된 것은 이전의 순간에 존재함에 따라 이동 이미지의 현재 상태와 이동 이미지의 기준 상태 사이의 차이를 단지 표시하는 정보로 구성된 프레임간 코딩된 프레임들이다.

서명은 그가 표시하는 프레임들의 특성들을 구체화하지만, 더 적은 데이터를 사용한다. 질의 비디오 클립 내의 각각의 I 프레임들의 서명들은 데이터베이스 비디오 클립 내의 각각의 I 프레임 서명들에 비교된다. 질의 클립의 서명들과 데이터베이스의 서명들 사이의 총 해밍 거리(Hamming distance)가 계산된다. [총 해밍 거리는 현재 질의 클립 및 데이터 클립의 질의/데이터베이스 프레임 쌍들의 각각의 서명들 사이의 해밍 거리들의 합이고, 여기서 해밍 거리는 디미트로바에 설명된 바와 같은 서명들 사이의 비트간 비교에 기초한다].

구체적으로, 방법론은 각각의 반복에 의해 데이터베이스 프레임들(I 프레임들)을 클립에 동시에 가산하고 데이터베이스 프레임들(I 프레임들)을 누락하는 현재의 데이터베이스 비디오 클립을 규정하도록 데이터베이스를 따라 반복적으로 시프트한다. 총 해밍 거리는 각각의 반복에서 재계산되고, 모든 반복들에 걸친 최소 해밍 거리가 질의 비디오 클립에 가장 유사한 데이터베이스 비디오 클립을 식별한다.

디미트로바 서명들의 장점은 이들이 이미지 비트 스트림을 완전히 압축해제하는 비용을 갖지 않고 유도될 수 있다는 것이다. 따라서, 허프만 또는 산술 코딩이 부분 디코딩된 형태의 비트 스트림을 잔류시키도록 디코딩되어, 부가의 압축해제 없이 이산 코사인 변환(DCT)과 같은 이미지 변환의 DC 계수들과 같은 주파수 성분들이 디미트로바에 완전히 설명된 바와 같이 서명을 형성하는데 이용될 수 있다.

상술된 디미트로바 실시예에서, I 프레임들은, 키이 프레임들이 디미트로바의 처리에 앞서 비디오 시퀀스에서 식별되지 않는 경우 "대표 프레임들", 즉 서명들이 유도되는 프레임들로서 사용된다. 키이 프레임들은 샷이 장면의 비디오 시퀀스인 샷 경계들에서의 프레임들이다. 통상적으로, 영화에는 수천 이상의 숏들이 존재한다. 다른 실시예에서, 디미트로바는 대표 프레임들로서 모든 프레임들을 사용한다.

본 발명은 본 발명이 스트림들의 렌더링 가능한 콘텐츠의 표시를 동기화하도록 비교를 사용하는 반면, 디미트로바는 단지 질의 비디오 클립과 유사한 비디오 클립을 탐색한다는 점을 제외하고는 2개의 비디오 스트림들의 특성들을 비교하기 위해 디미트로바의 것과 유사한 목적을 갖는다. 본 발명에 일치하는 디미트로바를 적용하기 위해, 질의 프레임들은 디미트로바에서와 같이 데이터베이스 프레임들에 대해 비교되지 않고, 참여자의 비디오의 카피에 프레임들에 비교되어, 개시자에 의한 및 참여자에 의한 비디오의 표시가 그 결과로서 동기화될 수 있다. 또한, 처리 속도를 위해, 단일 프레임에 주로 대응하는 단일 질의 서명이, 개별 프레임에 각각 주로 대응하는 디미트로바 질의 비디오 클립의 모든 서명들을 전송하기보다는 비교를 위해 참여자에 전송되는 것이 바람직하다. 따라서, 단일의 질의 서명이 각각의 반복에서 단일의 후보 참여자 프레임에 비교되기 때문에, 프레임들의 쌍의 서명들 사이의 해밍 거리가 계산된다. 이에 의해, "총 해밍 거리" 계산의 비용이 회피된다.

본 발명은 일반적으로 디지털 이미지 재생에 관한 것이며, 더 구체적으로는 이들 스트림들의 렌더링 가능 콘텐츠(renderable content)에 기초하여 2개 이상의 디지털 스트림들의 재생을 동기화하기 위한 기술들에 관한 것이다.

도 1은 본 발명이 이용 가능한 동기화 시청 시스템의 도면.

도 2는 본 발명에 따른 개인용 비디오 레코더(PVR)의 구조의 다이어그램.

도 3은 본 발명에 따른 PVR의 부품의 다이어그램.

도 4는 본 발명에 따른 동기화 기술을 도시하는 메시지 흐름도.

도 5는 도 4에 도시된 메시지들을 위한 메시지 포맷 다이어그램.

도 6은 본 발명에 따른 진핸 세션을 참가하는 프로세스의 흐름도.

도 7a 및 도 7b는 본 발명에 따른 시간 동기화의 흐름도.

도 8은 본 발명에 따른 프레임 동기화를 도시하는 흐름도.

본 발명은 개인용 비디오 레코더들(PVR들)을 갖는 2개 이상의 사람들이 이들의 시간 시프팅 시청을 동기화하는 것을 허용하는 시스템을 제공한다.

제1 양태에서, 본 발명은 각각의 저장 매체 내에 상주하는 2개의 디지털 비트 스트림들의 렌더링 가능한 콘텐츠의 표시를 동기화하기 위한 장치에 관한 것이다. 본원에 사용될 때, 렌더링 가능한 콘텐츠는 예를 들면, 시각적 또는 청각적으로 사용자가 감지할 수 있는 형태로 표시 가능한 콘텐츠를 칭한다. 장치는 상기 스트림들 중 하나의 콘텐츠의 정보 특성을 유도하고 다른 스트림의 콘텐츠의 정보 특성과 이 정보를 비교하기 위한 스트림 특성 유닛을 포함한다. 하나의 스트림의 콘텐츠는 하나의 스트림에서 순방향 진행함으로써 재생된다. 표시는 비교에 기초하여 진행을 변경함으로써 동기화된다.

다른 양태에서, 본 발명은 각각의 저장 매체에 상주하는 2개 이상의 디지털 비트 스트림들의 렌더링 가능한 표시를 동기화하는 것에 관한 것이다. 스트림들 중 하나가 수신되고, 수신된 스트림의 콘텐츠의 정보 특성이 유도되어 출력되는 신호에 합체된다. 신호가 수신될 때, 그의 특성 정보는 다른 디지털 비트 스트림들의 하나 또는 그 이상의 콘텐츠의 각각의 정보 특성에 비교된다. 2개 이상의 디지털 비트 스트림들의 표시는 비교들에 기초하여 2개 이상의 스트림들의 각각의 재생들에 순방향 진행을 변경함으로써 동기화된다.

본 발명의 다른 목적들 및 특징들은 첨부 도면들과 관련하여 고려된 이하의 상세한 설명으로부터 명백해질 것이다. 그러나, 도면들은 첨부된 청구범위를 참조해야 하는 본 발명의 범위의 한정으로서가 아니라 설명의 목적으로서만 도안된 것이라는 것을 이해해야 한다. 도면들은 축적대로 도시될 필요는 없고, 달리 지시되지 않으면 이들은 본원에 설명된 구조들 및 절차들을 개념적으로 설명하도록 의도된다는 것을 또한 이해해야 한다.

도면들에서, 유사한 도면 부호들은 다수의 도면들 전체에 걸쳐 유사한 또는 동일한 요소들을 식별한다.

도 1을 참조하면, 본 발명에 따른 동기화 PVR 시청 시스템(110)의 예가 도시되어 있다. 도 1에 도시된 바와 같이, 네트워크(A)로부터의 텔레비전 프로그램의 방송들(112a, b)은 케이블, 디지털 케이블, 위성, 안테나, 인터넷 또는 이들의 조합들과 같은 당 기술 분야의 숙련자에게 공지된 임의의 통신 수단에 따른다. 예를 들면, 특정 야구 경기와 같은 동일한 네트워크 제작물이 하우스 1 및 하우스 2의 각각에 전송된다. 방송들(112a, b)이 하우스 1 및 하우스 2 각각에 유입됨에 따라, 이들은 각각의 PVR들(114a, b)의 각각 내에 내장된 수신기들(113a, b)에 의해 수신된다. 이하, 첨자 "a"는 동기화 시청 세션의 "개시자"를, 첨자 "b"는 "참여자"를 칭한다. 초기에, "개시자"는 세션을 개시하는 PVR이지만, 이 역할은 그의 사용자에 의해 지시되는 바와 같이 제어 기능(예를 들면, 정지, 일시 정지, 빨리감기, 반전)을 수행하는 임의의 PVR에 전환된다. 세션에 참여하는 모든 다른 PVR들은 "참여자들"이다. 상황에 따라, 개시자 PVR의 사용자는 "개시자"라 칭하고, 참여자 PVR의 사용자는 "참여자"라 칭한다. 방송들(112a, b)은 사용자에 의해 수신되기 때문에, 사용자는 PVR(114a, b)에 방송(112a, b)을 레코딩하는 능력을 갖는다. 방송은 셋탑 박스, DVD 플레이어, VHS 플레이어, 퍼스널 컴퓨터, 텔레비전 등 내에 내장된 수신기에 수신되고 이어서 PVR(114a, b)로 라우팅된다. 사용자는 도입 방송 신호의 대역폭을 따라 PVR(114a, b)에 다양한 상이한 프로그램들을 레코딩하는 능력을 갖는다. 부가적으로, 방송 신호는 각각의 하우스에 개별적으로 라우팅되기 때문에, 각각의 하우스는 방송 신호를 개별적으로 턴온 또는 오프하는 능력을 갖는다. PVR(114a, b)은 텔레비전(122a, b) 상의 출력부에 접속되는 출력부를 가져서 사용자는 텔레비전(122a, b) 상에 레코딩된 프로그램들을 시청할 수도 있다.

리모트 컨트롤(116a, b)이, 사용자가 개인용 비디오 레코더(114a, b)를 원격으로 작동시키는 것을 허용하도록 개인용 비디오 레코더(114a, b)와 공통으로 결합된다. 통상적으로, 리모트 컨트롤(116a, b)은 적외선 신호를 텔레비전(122a, b)에 전송하도록 구성된다.

시스템(110)은 그와 연관된 2개의 통신 네트워크들을 갖는 것이 바람직하다. 제1은 2개의 상이한 위치들(예를 들면, 하우스 1 및 하우스 2)에 위치된 PVR들(114a, b)을 상호 접속하는 인터넷 네트워크(118)이다. 인터넷 네트워크(118)는 동기화가 성취될 수 있도록 PVR들(114a, b) 사이에 정보를 통신하는 수단(119)을 공급한다. 제2 통신 네트워크는, 2개의 사용자들이 레코딩된 프로그램(112a, b)을 동시에 시청하면서 통신하기 위한 통신 수단을 제공하는 예를 들면 공중 전화 교환망(PSTN) 또는 개인 네트워크와 같은 전화 네트워크이다. 대안적으로, 2개의 통신 네트워크들 중 하나 또는 모두는 인터넷 및/또는 전화 부품들을 포함할 수도 있다.

시스템(110)을 구현하기 위해, 사용자들 중 하나, 예를 들면 하우스 1로부터의 사용자 1은 다른 사용자, 즉 하우스 2로부터의 사용자 2를 호출할 수 있고, 각각의 사용자들은 그들의 각각의 텔레비전들 상에 미리 레코딩된 방송을 동시에 동기적으로 시청하도록 동의할 수 있다. 여기서, 미리 레코딩된 방송들은 지연 기간 동안 버퍼링되는 생방송들을 포함하고, 몇몇 수신기들은 방송이 광고 방송들 없이 엇갈림 시간 프레임에서 연속적으로 리플레이될 수 있도록 하는 능력을 갖는다. 사용자들이 프로그램을 동기화하여 시청하는 것을 동의한 후에, 이들 중 하나는 시스템을 개시하는 주도권을 가질 수 있다.

사용자 1이 "개시자"로서의 주도권을 갖는다고 가정하면, 사용자 1은 리모트 컨트롤(116)을 경유하여, PVR(114a) 자체의 제어부들을 경유하여, 또는 텔레비전 상에 디스플레이되어 키보드 또는 리모트 컨트롤러와 같은 입력 디바이스에 의해 작동되는 제어 명령들을 경유하여 PVR(114a) 상에 동기화 시청을 위한 메뉴를 작동시킬 수 있다. 사용자 1은 메뉴에 응답하여 메뉴를 전송할 수 있다. 발생하는 다른 메뉴들은 사용자 2에 전송될 수 있다. 사용자들은 이들이 세션에 참여할지의 여부를 이들이 수신한 메뉴들에 대한 이들의 각각의 응답에 의해 각각 지시할 수있다. 응답들에 기초하여, 동기화 시청 세션이 동의된 시간에 시작하도록 설정된다. 동의된 시간은 9:00 P.M.과 같은 세계시, 또는 5분 후와 같은 비교시일 수도 있다. 시청 세션을 설정하기 위한 일련의 메뉴들은 상술한 미국 특허 출원 제09/804,060호에 개시되어 있다. 메모리 디바이스 및 프로세서는 시스템(110)과 연관된 다른 디바이스들 중 하나 또는 PVR들(114a, b)에 상주하는 것이 바람직하다. 시스템(110)과 연관된 프로그래밍 코드가 메모리 디바이스 내에 상주하고 프로세서에 의해 처리되는 것이 바람직하다.

2개 이상의 사용자들이 동기화 시청 세션에 참여할 수도 있다; 예를 들면, 3개 이상의 원격 위치들에 있는 사용자들이 전화에 의해, 메뉴들에 의해, 이메일에 의해, 인터넷 채팅 등에 의해 특정 프로그램을 동시에 시청하도록 서로 배열될 수도 있다. 세션 중에, 시청자들은 세션으로부터 누락되거나 부가될 수도 있다. 임의의 세션 참여자가 제어 기능(예를 들면, 시작, 일시 정지, 되감기, 빨리감기)을 수행하면, 해당 참여자의 PVR(114b)은 표시를 동기화 유지하도록 각각의 참여자의 PVR(114b)에 즉시 통신되고 실행되는 해당 기능을 위한 명령을 방송한다. 세션에 참여하는 PVR들(114b)이 동기화를 유지하는 것을 보장하기 위해, 상태 메시지가 "개시자", 즉 세션을 개시화한 PVR(114a)에 의해 주기적으로 전송된다. 상태 메시지는 또한 제어 기능을 수행하는 참여자에 응답하여 방송된 각각의 명령을 전송한다. 상태 메시지는 시청되는 프로그램의 명령, 현재 시청 모드(예를 들면, 정상 재생, 빨리감기, 일시 정지), 프로그램 내의 시간의 명령, 및 메시지 전송자로의 재생이 발생되는 디지털 비트 스트림의 콘텐츠의 정보 특성을 포함한다. 특성 정보는 메시지 수신자의 PVR(114b) 상에 시청되는 유사한 콘텐츠의 제로화에 의해 동기화를 "미세 조정"하는데 사용된다.

도 2는 본 발명에 따른 예시적인 PVR(114a)에서의 더욱 상세한 시청을 제공한다. 개시자 PVR이 도시되어 있고 따라서 첨자 "a"가 사용되지만, 개시자의 기능은 제어 기능을 수행하는 최종 PVR로 세션 중에 전환되기 때문에 임의의 참여자 PVR이 일반적으로 동일 구조를 가질 수 있다. PVR(114a)은 수신기(113a)와, 마이크로프로세서(202), 리모트 컨트롤 센서(204) 및 디지털 메모리(206)로 구성된 비디오 처리 유닛(201)을 포함한다. 마이크로프로세서(202)는 이미지 또는 비디오 플레이어(208), 스트림 특성들 유닛(210), 비디오 타이머(212) 및 기간 타이머(213)를 포함한다. 디지털 메모리(206)는 동기화 레지스터(214), 서명 처리 작업 공간(216), 비디오 블록(218), 상태 버퍼(220) 및 보조 저장 장치(222)를 포함한다. 리모트 컨트롤 센서(204)는 텔레비전(122a)의 사용자 또는 시청자에 의해 작동되는 리모트 컨트롤(116a)로부터의 신호를 수신하고, 대응 신호를 마이크로프로세서(202)에 전달한다. 마이크로프로세서(202)는 디지털 메모리(206)로부터 판독하고 기록한다.

도 3은 디지털 메모리(206)의 예시적인 구조를 더욱 상세히 도시한다. 동기화 레지스터(214)는 좌측 시프팅 비원형 형태이고 엔트리들(302, 304, 306) 및 점들로 지시된 다른 간섭 엔트리들을 포함한다. 비디오 블록(218)은, 비디오 프레임들 K, K+L, N, N+M 및 점들로 지시된 선행 및 간섭 프레임들을 갖는 프로그램 또는 비디오(308)를 포함한다. 프레임들 K 및 N 사이의 프레임들의 일부는레지스터(214) 내에 현재 존재하는 각각의 엔트리들을 포함하고 대응한다. 따라서, 예를 들면, 엔트리(302)는 프레임 K에 대한 포인터 K, 및 프레임 K의 재생 시간에 대응하는 시간 스탬프 K로 구성된다. 엔트리(304)는 프레임 K+L에 대한 포인터 K+L, 및 프레임 K+L의 재생 시간에 대응하는 시간 스탬프 K+L로 구성된다. 프레임들 K 및 K+L 사이의 점들은 간섭 프레임들이 존재하는 것을 지시하고, 또한 동기화 레지스터(214)에 대응 엔트리들이 존재하지 않는 것을 지시한다. 이 대응성의 결핍의 이유는 프레임들 K 및 K+L이 "I 프레임들"인 반면, 프레임들 K 및 K+L 사이에 간섭하는 프레임들의 어느 것도 "I 프레임들"이 아니기 때문이다.

동기화 레지스터(214) 내의 모든 엔트리들은 I 프레임들에 속한다, 즉 각각의 포인터 및 연관 시간 스탬프는 비디오(308) 내의 I 프레임에 관계된다. 엔트리(306)는 I 프레임인 프레임 N에 대한 포인터 N과, 프레임 N의 재생 시간에 대응하는 시간 스탬프 N으로 구성된다. 각각의 엔트리는 모든 엔트리들에 균일한 전체 길이만큼 동기화 레지스터(214)를 좌측 시프팅하고, 엔트리에 의해 참조되는 프레임(즉, I 프레임)이 재생될 때 우측으로 레지스터(214) 내로 엔트리를 로딩함으로써 생성된다. 비디오(308)의 표시는 비디오(308)의 프레임에 대한 포인터를 포함하는 엔트리들 내의 시간 스탬프들에 대응하여 항상 걸친다. 상태 버퍼(220)는 재생의 상태에 대한 현재 데이터를 포함한다. 부속 저장 장치(222) 내에 상주하는 것은 메뉴 스크린의 보호 필드들에 나타나는 데이터, 에러 메시지들 등과 같은 처리 중에 필요한 임의의 데이터이다.

도 4는 타이머들이 동기화될 수 있도록 2개의 PVR들(114a, b)의 비디오 타이머들(212)의 각각의 타이밍들에서 존재하는 경우 오정렬을 결정하기 위한 본 발명의 가능한 메시지 흐름 디자인을 도시한다. 설명의 단순화를 위해, 이하의 설명은 세션의 개시자와 단일 참여자 사이의 동기화에 초점을 맞추는데, 이는 개시자가 각각의 참여자를 동기화시키도록 동일한 프로세스를 수행하고, 이에 의해 모든 참여자들이 동기화되기 때문이다. 상술한 바와 같이, "개시자"는 세션 중에 변경될 수도 있다. 참여자가 시청 모드를 변경할 때마다, 즉 제어 기능(되감기, 빨리감기 등)을 실행할 때마다, 해당 참여자는 모든 다른 참여자들("현재" 개시자를 포함)에 명령을 방송하고 이에 의해 새로운 개시자가 된다.

시간 동기화는 다수의 상이한 공지된 방법들로 구현될 수 있다. 네트워크 내의 분배된 프로세서들(노드들)은 동기화를 유지하도록 그들의 각각의 클럭값들을 주기적으로 방송할 수 있다. "Fault-Tolerant Clock Synchronization for Distributed Systems with High Message Delay Variation", 아제베도, 마르첼로 모라에스 데(Azevedo, Marcelo Moraes de) 등, 미국 캘리포니아주 어빈(1995) 참조. 동기화 메시지들은 소스와 수신자 프로세서들 사이에 릴레이될 수도 있고, 여기서 릴레이 노드들은 손실 노드로부터 도래하는 바와 같이 인식되는 메시지들을 폐기한다. "Communication Protocols for Fault-Tolerant Clock Synchronization in Not-Completely Connected Networks", 플루글, 맨프레드 제이.(Pluegl, Manfred J.) 등, 미국 캘리포니아주 어빈(1992) 참조.

본원에 개시된 실시예에서, 시간 동기화는 각각의 참여자 PVR(114b)와는 개별적으로 개시자 PVR(114a)에 의해 수행되고 개시자 PVR(114a)로부터 참여자PVR(114b)로의 개시 동기화 메시지(402)의 전송 및 참여자 PVR(114b)로부터 개시자 PVR(114a)로의 릴레이 동기화 메시지(404)의 전송을 포함한다. 개시자 PVR(114a)로부터 참여자 PVR(114b)로 및 참여자 PVR(114b)로부터 개시자 PVR(114a)로의 전송 시간들은 가변적인 것으로 가정한다. 또한 응답 메시지(404)를 위한 전송 시간은 응답 메시지(404)가 응답하는 개시 메시지(402)의 전송 시간과 대략 동일한 것으로 가정한다. 각각의 전송 시간들 사이의 차이들은 이하에 설명하는 바와 같이 개시자 및 참여자의 각각의 디지털 비트 스트림들의 콘텐츠에 기초하여 정렬하는 본 발명의 혁신적인 "미세 조정"에 의해 해결된다.

도 4에 "경우 1"로 나타낸, 타이머 또는 시간 동기화의 제1의 예시적인 경우에서, 개시자 PVR(114a)은 참여자 PVR(114b)에 개시 동기화 메시지(402)를 전송한다. 메시지(402)는 개시자 PVR(114a)의 비디오 타이머(212)에 따라 0 시간 0분 2초인 시간 A에 전송된다. 메시지(402)는 참여자 PVR(114b) 비디오 타이머(212)가 0시간 0분 3초를 판독할 때의 시간 B에 참여 PVR(114b)에 도달한다. 참여자 PVR(114b)은, 참여자 PVR(114b) 비디오 타이머(212)가 0시간 0분 4초를 판독할 때의 시간 C에 응답 동기화 메시지(404)를 재전송한다. 메시지(404)는 개시자 PVR(114a)이 0시간 0분 5초를 판독할 때의 시간 D에 개시자 PVR(114a)에 의해 수신된다.

개시자 및 참여자 PVR들(114a, b)의 각각의 비디오 타이머들(212) 사이의 시간 오정합(TM)은 이하의 수학식으로 주어진다.

[수학식 1]

TM = ½[(A+D)-(C+B)]

제1 경우에, 시간 오정합은 ½[(2+5)-(4+3)]=0초이다, 즉 2개의 타이머들(212)은 정확하게 동기화되었다, 즉 메시지들(402, 404)의 각각에 대한 1초의 전송 시간이 이 경우 타이밍들을 위해 계산된다.

경우 2에서, 개시 동기화 메시지(402)가 개시자로부터 참여자 PVR(114b)로 전송되고, 응답 동기화 메시지(404)가 참여자로부터 개시자 PVR(114a)로 전송된다. 경우 2의 시간 오정합은 ½[(2+3)-(4+3)]=-1초이다. 여기서, 개시자의 비디오 타이머(212)는 참여자의 타이머(212)보다 지체되고, 전송 시간은 무시되며 타이밍 차이는 거의 2개의 비디오 타이머들(212) 사이의 오정합에 전적으로 기인한다. 시간 오정합의 크기는 1초이다. 시간 오정합의 부호는 개시자가 참여자보다 지체되거나 그 반대의 경우를 지시한다. 부호가 음이면, 현재의 경우와 같이, 개시자가 참여자보다 지체되고, 부호가 양이면, 참여자가 개시자보다 지체된다.

경우 3에서, 개시 동기화 메시지(402)가 개시자로부터 참여자 PVR(114b)로 전송되고, 응답 동기화 메시지(404)가 참여자 PVR(114b)로부터 개시자 PVR(114a)로 전송된다. 경우 3에서의 시간 오정합은 ½[(2+6)-(4+3)]=1/2초이다; 실제로, 전송 시간은 1½초이고 참여자는 개시자보다 ½초만큼 지체된다. 즉, 개시자 PVR(114a)의 비디오 타이머(212)가 3½초를 판독하고 동시에 참여자 PVR(114b)의 비디오 타이머(212)가 3초를 판독할 때 메시지(402)가 참여자 PVR(114b)에 도달하고, 이 3½-3=½초 차이가 ½초 시간 오정합 크기를 표시한다. 따라서, 1초 후에, 개시자 PVR(114a)의 타이머(212)가 4½초를 판독할 때, 참여자는 개시자 PVR(114a)의 타이머(212)가 6초를 판독할 때 1½초의 전송 시간 후에 도달하는 응답 메시지(404)를 전송한다.

도 5는 동기화를 수행하기 위해 본 발명에 이용되는 메시지 포맷들의 예를 도시한다. 도 4의 경우들 1, 2 또는 3의 임의의 하나를 참조하면, 개시 메시지(402)는, 개시자 PVR(114a)에 의해 전송될 때, 도 4의 제1 포맷에 도시된 바와 같이 시간 스탬프 A(도 4의 사간 A에 대응)를 포함하는 필드(510)를 갖는다. 참여자 PVR(114b)에 도달시에, 시간 스탬프 B에 대응하는 필드(520)는 제2 포맷에 도시한 바와 같이 개시 메시지(402)에 부가된다. 응답 메시지(404)를 개시자 PVR(114a)에 재전송하기 직전에, 참여자 PVR(114b)은 또한 개시 메시지(402)를 응답 메시지(404)로 전환하도록 제3 포맷에 도시된 바와 같이 시간 스탬프 C를 포함하는 필드(530)에 부가된다. 개시자 PVR(114a)은 시간 D에 응답 메시지(404)를 수신하고(도 4), 수학식 1에 기초하여 시간 오정합(TM)을 계산하고, 프로그램 식별자(560), 시청 모드(570), 질의 서명(580) 및 질의 시간 스탬프(590)가 또한 삽입되는 상태 메시지(550) 내로 계산된 시간 오정합(540)을 배치시킨다. 프로그램 식별자(560)는 현재 재생 중인 비디오(308)를 식별한다. 시청 모드(570)는 이하에 설명하는 바와 같이 PVR들(114a, b)의 처리를 제어하기 위한 제어 정보이며 PVR들(114a, b)의 상태를 나타낸다.

질의 서명(580)은 개시자가 그의 고유의 비디오(308)의 카피를 재생하는 디지털 비트 스트림이 콘텐츠의 정보 특성이다. 이 정보는 개시자의 비디오(308)의 카피의 재생과 참여자의 비디오(308)의 카피의 재생의 동기화를 미세 조정하기 위해 참여자의 비디오(308)의 카피에 기초하여 유도된 서명들과 비교된다.

본 발명에 있어서, 본 발명의 제1 반복에서 질의 서명(580)(질의 프레임이 I 프레임이기 때문에 I 프레임의 서명인)에 비교되는 서명은 그의 시간 스탬프가 질의 프레임의 시간 스탬프(590)에 가장 근접한 참여자 PVR(114b)의 I 프레임의 서명이다. 이 가장 근접한 시간 스탬프를 갖는 후보 참여자 프레임(모든 후보 참여자 프레임들이 I 프레임이기 때문에 또한 I 프레임인)은 참여자의 제1 후보 프레임이다. 각각의 반복에 의해 참여자의 비트 스트림에서 각각 점진적으로 부가로 이어지는 후속의 후보 참여자 프레임들이 질의 프레임에 의해 1 대 1로 비교된다. 각각의 후보 참여자 프레임에서, 후보 참여자 프레임과 질의 프레임의 서명들 사이에 해밍 거리의 각각의 계산이 존재한다. 본 발명의 서명들은 디미트로바에서 논의된 기술들에 의해 계산된다. 모든 반복들에 걸친 최소 해밍 거리가 질의 프레임에 대한 가장 유사한 콘텐츠 방향의 특정 프레임을 식별하도록 결정되고, 누적값은 개시자의 재생과 참여자의 재생 사이의 "프레임 오정합"의 추정에 대응하는 식별된 프레임에 도달하도록 참여자의 비디오 프레임 시퀀스를 시프트 다운한다. "프레임 오정합"은 이하 2개의 재생들의 콘텐츠 방향 오정렬을 칭하는데 사용된다. 프레임 오정합이 추정되면, 참여자는 프레임 오정합을 보상하도록 그의 비디오(308)의 카피를 빨리감기 또는 되감기한다.

프레임 오정합의 추정 없이 참여자가 빨리감기를 행하는 상황은 참여자가 진행중인 세션에 신규화되는 것이다. 신규한 참여자는 일반적으로 개시자의 것을 포착하도록 그의 재생의 광대한 빨리감기를 필요로 할 수 있으며, 프레임 오정합의평가는 개시자의 비디오 프레임에 접근하는 "비디오 시간" 내의 지점으로 신규한 참여자의 재생이 먼저 전진하지 않으면 방해가 될 수 있다.

먼저, 현재 활성화 동기화 시청 세션에 참가하기 위해, 잠재적인 참여자 PVR(114b)의 사용자는 전화(124) 또는 메뉴 스크린들을 경유하여, 현재의 참여자 PVR들(114a, b)의 사용자들의 승낙을 청구하고, 이어서 메뉴 스크린을 경유하여 서명한다. 현재의 참여자 PVR들(114a, b)의 사용자들이 승인하면, 잠재적인 참여자 PVR(114b)은 개시자 PVR(114a)과 동기화되는 신규한 참여자 PVR(114b)이 된다.

도 6의 진행 중인 세션 참가 프로세스에 나타낸 바와 같이, 신규한 참여자 PVR(114b)은 현재의 세션에 참가하는 개시자 PVR(114a)에 통지한다(단계 S602). 개시자 PVR(114a)은 이에 응답하여 신규한 참여자 PVR(114b)에 개시 동기화 메시지(402)를 전송한다(단계 S604). 수신시에, 신규한 참여자 PVR(114b)은, 시간 카운트의 값이 메시지(402) 내에 포함된 시간 스탬프 A에 일치하고 이에 따라 그의 비디오(308)의 카피를 빨리감기 하도록 그의 비디오 타이머(212)의 시간 카운트를 전진시킨다(단계 S606). 빨리감기된 재생 내의 지점은 전진된 시간 카운트의 값에 대응하여, 신규한 참여자의 재생이 개시자의 재생에 의해 콘텐츠 방향으로 포착된다. 이어서, 신규한 참여자 PVR(114b)은, 프레임 동기화로 이어지는 시간 동기화에 의해 개시자 PVR(114a)과의 그의 동기화의 미세 조정을 진행하도록 참가 요구 메시지를 개시자 PVR(114a)에 전송한다(단계 S608).

도 7a 및 도 7b는 본 발명에 따른 시간 동기화의 예의 흐름도이다. 본 예에서, 동기화 프로세스를 위해 5개의 가능한 트리거링 이벤트들이 존재한다: (1) 세션의 개시, (2) 개시자의 기간 타이머(213) 만료, (3) 제어 기능의 개시, (4) 재시도 요구 메시지 수신, 또는 (5) 참가 요구 메시지 수신(단계 S701). 개시자의 기간 타이머(213)는 개시자가 세션 참여자들을 재차 동기화할 때까지 시간 간격을 카운트한다. 재시도 요구 메시지는 시도된 프레임 동기화가 비성공적일 때 참여자에 의해 개시자에 발행되고, 미리 결정된 시간 기간 후에 참여자에 의한 동기화가 재시도 되도록 요구한다.

단계 S701에서의 5개의 이벤트들 중 처음의 3개에 있어서, 개시자 PVR(114a)은 모든 참여자 PVR들(114b)과 동기화되고, 반면 마지막 2개의 이벤트들에 있어서, 개시자 PVR(114a)은 참여자 PVR들(114b) 중 단 하나와 동기화되고, 이 경우 개시자 PVR(114a) 기간 타이머(213)는 단지 단일의 참여자 PVR(114b)만이 동기화되기 때문에 재설정되지 않는다. 단계 S702에서, 트리거링 이벤트가 마지막 2개의 이벤트들 중 하나인지의 여부가 검사된다. 그렇지 않으면, 개시자는 그의 기간 타이머를 재설정한다(단계 S703).

다음, 개시자의 PVR(114a)의 마이크로프로세서(202)가 그의 비디오 타이머(212)를 검사하고, 개시 동기화 메시지(402)의 필드(510) 내에 시간 스탬프 A로서 그의 시간 카운트를 배치하고, 메시지(402)를 전송한다(단계 S704). 참여자의 PVR(114b)의 마이크로프로세서(202)는 메시지(402)의 수신시에 그의 비디오 타이머(212)를 검사하고 메시지(402)의 필드(520) 내에 시간 스탬프 B로서 시간 카운트를 저장한다. 참여자의 PVR(114b)은 또한 개시 동기화 메시지(402)를 증분하고, 이에 의해 필드(530)를 생성하고 참여자의 비디오 타이머(212)로부터 시간 스탬프C를 메시지(402)의 필드(530) 내로 배치시킴으로써 개시 동기화 메시지(402)를 응답 동기화 메시지(404)로 변환한다. 다음, 참여자의 PVR(114b)은 응답 메시지(404)를 개시자의 PVR(114a)로 즉시 전송한다(단계 S705). 응답 메시지(404)의 수신시에, 개시자의 마이크로프로세서(202)는 수신 시간(시간 D)에 대한 그의 비디오 타이머(212)를 검사하고, 수학식 1에 기초하여 시간 오정합(540)(TM)을 결정하도록 메시지(404)의 필드들에 시간 스탬프들과 함께 이를 사용한다.

시간 오정합 계산에 앞서 또는 이와 동시에, 개시자의 마이크로프로세서(202)는 질의 프레임을 선택한다. 이는 바람직하게는 질의 프레임의 콘텐츠 및 그의 각각의 시간 스탬프가 재생이 현재 진행중인 특정 시간에서의 콘텐츠 내에 있는 것을 표시하도록 개시자가 방금 재생한 또는 현재 재생되는 프레임이다. 어느 경우든, 선택된 질의 프레임은 개시자의 동기화 레지스터(214) 내의 엔트리로서 여전히 표시되는 것이고, 이는 그의 재생 진행들로서 엔트리들에 일정하게 시프팅된다(이를 시프팅함으로써 비원형 시프트 레지스터가 데이터를 삭제함). 스트림 특성들 유닛(210)은 질의 프레임에 대한 질의 서명(550)을 계산한다(단계 S706).

개시자의 마이크로프로세서(202)는, 존재하는 경우 질의 프레임에 대한 포인터를 따라 상주하는 동기화 레지스터 엔트리 내의 시간 스탬프인 질의 시간 스탬프(590)로부터 계산된 시간 오정합(540)을 백 아웃(back out)하도록 질의 시간 스탬프(590)로부터 시간 오정합(TM)을 감산한다(단계 S708). 시간 오정합(540)의백 아웃은, 콘텐츠 방향이 질의 프레임에 가장 유사한 특정 프레임에 대해 검색이 수행되는 범위의 배치 및 크기를 정규화한다. 따라서, 시간 오정합(540)이 시간 카운트에 부가되지만(단계 S714), 이는 질의 시간 스탬프(590)로부터 감산된다.

다음, 개시자의 마이크로프로세서(202)는 프로그램 식별자(560) 및 시청 모드(570)를 상태 버퍼(220)로부터 검색하고, 이들을 시간 오정합(540), 질의 서명(580) 및 변경된 질의 시간 스탬프(590)와 함께 상태 메시지(550) 내에 저장한다. 다음, 개시자의 마이크로프로세서(202)는 상태 메시지(550)를 참여자에게 전송한다(단계 S710).

메시지(550)의 수신시에, 참여자의 마이크로프로세서(202)는, 참여자의 사용자가 개시자의 사용자와 동일한 비디오를 현재 시청하는 것을 보장하도록 그의 상태 버퍼(220) 내의 그의 고유의 프로그램 식별자(560)에 메시지 내의 프로그램 식별자(560)를 비교한다(단계 S712). 그렇지 않으면(단계 S714), 참여자의 마이크로프로세서는 부속 저장 장치(222)로부터 에러 메시지를 검색하고 개시자에 메시지를 전송하는데(단계 S716), 이는 동기화 시청 세션에서 모든 참여자들이 동일한 프로그램을 동시에 시청하도록 의도되기 때문이다. 또는, 참여자가 동일한 프로그램을 시청하는 경우, 참여자의 마이크로프로세서는 메시지(550) 내의 시청 모드(570)를 검사한다(단계 S718). 참여자의 상태 버퍼(220) 내의 현재의 시청 모드와 일치하면, 처리가 진행된다. 일치하지 않으면, 참여자의 마이크로프로세서(202)는 메시지(550) 내에 수신된 시청 모드와 일치하도록, 즉 예를 들면 개시자의 빨리감기 또는 되감기에 응답하여 빨리감거나 되감기하도록, 그의 현재의 시청 모드를 즉시 변환하기 위해 제어 기능을 그의 PVR(114b)에 발행한다(단계 S720). 참여자의 마이크로프로세서(202)는 또한 시청 모드의 대응 변화를 그의 상태 버퍼(220)에 수행한다.

어느 경우든, 참여자 및 개시자의 프로그램 식별자들이 일치하지 않으면, 시간 오정합이 양인 경우 참여자의 마이크로프로세서(202)는 시간 오정합의 크기만큼 그의 비디오 타이머(212)의 시간 타이머를 전진시킴으로써, 또는 시간 오정합이 음인 경우 시간 오정합의 크기만큼 그의 비디오 타이머(212)의 시간 카운트를 후퇴시킴으로써 시간 오정합을 보상한다(단계들 S722 내지 S728). [시간 카운트의 전진 또는 후퇴는 재생되는 비디오(308)의 임의의 대응 빨리감기 또는 되감기 작동을 실행하지 않고 수행되며, 이들 후자의 기능은 후속의 프레임 보상 중에 대체되도록 기능한다.] 시간 오정합 보상(또는 "시간 보상")은, 만일 존재하는 경우 메시지(550)에 응답하여 참여자가 수행하는 시청 모드의 변화의 동시에 참여자에 의해 수행되는 것이 바람직하다.

대안 실시예에서, 개시자는 참여자들과 시간 보상 듀티들을 공유할 수 있다. 특히, 세션이 개시자에 부가하여 단 하나의 참여자를 포함하는 경우에, 개시자는 시간 오정합 보상을 완전히 추정할 수 있으며, 상태 메시지(550)의 시간 오정합 필드(540)를 유지하는 오버헤드를 제거할 수 있다. 다른 옵션은 개시자를 위해 단지 빨리감기 또는 되감기 듀티들만을 추정하고, 다른 듀티들, 즉, 빨리 감기 또는 되감기를 참여자에게 위임하는 것이다. 다른 개선으로서, 산출된 시간 오정합(TM)이 소정 임계값을 초과하는 경우에, 개시자 및 참여자는 보다 신속히 동기화시키기 위해 동기식으로 하나는 되감기하고, 나머지는 빨리감기하여 간격을 보상하는 것이다.

그러나, 또한, 본 발명은 소정의 특정 시간 동기화 방법에 한정되지 않는다.

시간 보상 이후, 참여자는 그 후 프레임 오정합을 결정하기 위해 진행하며, 존재시, 프레임 동기화가 달성되도록 이를 보상한다. 프레임 오정합을 결정하기 위한 예시적 프로세스 및 응답적인 보상은 도 8에 이어지는 흐름도에 보다 완전히 상세화되어 있다. 첫 번째로, 반복 프로세스의 변수들이 초기화된다(단계 S802). MINOFF는 아직 고려되지 않은 소정의 후보 프레임의 최소 오프셋이다. MINOFF 및 ITERATION COUNT가 0으로 설정된다. 질의 프레임과 검토된 참여자의 프레임들의 것들 사이의 현재의 최소 Hamming 거리인 MINDIST가 K로 초기화되며, 이는 제1 반복의 착수시 어떠한 일치도 발견되지 않았다는 것을 나타내기에 충분히 크게 설정된다.

"검색 범위(search range)"는 참여자의 비트 스트림내의 후보 프레임들의 범위를 규정한다. SEARCH RANGE는 검색 범위내의 I 프레임들의 수인, 소정 수 "N"으로 설정된다. 검색 범위(단계 S802)는 최근접 시간 스탬프와 연계된, 그리고, 동기화 레지스터(214)내의 엔트리로서 이 시간 스탬프와 함께 존재하는 프레임 포인터가 검색 범위의 중앙에 배치된 프레임을 지시하도록 배치된다. "N"은 예상 프레임 오정합 정도에 따라 변화될 수 있으며, 보다 큰 "N"은 보다 넓은 검색을 제공하여 결정된 오정합에 응답하여 보다 큰 보상을 가능하게 한다.

또한, 값 "N"은 불균형이 산출된 시간 오정합을 왜곡시키고, 따라서, 질의시간 스탬프의 백아웃된 시간의 양을 왜곡시키기 때문에, 원본 메시지(402) 및 그 상대 응답 메시지(404)의 전송 시간의 예상 불균형에 따라 변할 수도 있다. 백아웃 프로시저가 검색 범위의 배치를 정규화하기 때문에, 보다 큰 "N"은 왜곡을 보상하기 위해 보다 큰 검색 범위를 제공한다. 상술한 바와 같이, 본 발명의 방법론은 이들 두 전송 시간들이 동일하지만, 상술한 메카니즘에 의해 부등성을 보상할 수 있다는 것을 가정한다.

OFFSET은 현 후보 프레임이 배치되는 SEARCH RANGE의 중앙으로부터 오프셋된다. 현 후보 프레임이 시초에 가장 이른 시간 스탬프의 프레임들을 가지는 검색 범위의 종단에 위치되어 있기 때문에, OFFSET은 -N/2로 초기화된다.

단계 S803에서, 참여자는 가장 근접한 시간 스탬프를 결정하기 위해, 질의 시간 스탬프(590)를 그 동기화 레지스터(214)내의 각 시간 스탬프에 비교한다. 레지스터(214)내의 각 시간 스탬프에 비교하는 대안으로서, 비교들은 질의 시간 스탬프와 소정의 비교의 시간 스탬프 사이의 편차가 소정 임계값 미만으로 떨어지고, 따라서, 일치를 나타내는 것으로 간주될 때 종결될 수 있다.

반복들의 시작부의 CURRENT FRAME은 중앙 프레임 이전의, 즉, 검색 범위의 시간-단위 최조기 종단(시작 종단)에 프레임 N/2 I 프레임들을 지시하도록 설정된다(단계 S804). 현재의 서명들과 질의 프레임들 사이의 Hamming 거리는 Dimitrova에 기술된 기술들에 의해 참여자의 마이크로프로세서(202)에 의해 산출된다(단계 S806). Hamming 거리는 현재 및 질의 프레임 사이의 콘텐츠 유사도를 나타내며, 작은 Hamming 거리는 보다 높은 유사성을 나타내고, 보다 큰 거리는 보다 낮은 유사성을 나타낸다. 산출은 서명 처리 작업공간(216)내에 제공된 저장부를 활용한다.

가변 HAMMING DISTANCE에 의해 나타내진 현 Hamming 거리가 MINDIST 보다 작은 경우에(단계 S808), MINDIST와 MINOFF는 갱신된다(단계 810). 궁극적으로, MINOFF는 프레임 시퀀스 오정합을 보정하기 위한 빨리감기 또는 되감기시 만나는 I 프레임들의 수에 대응한다.

최소 거리(MINDIST) 및 최소 오프셋(MINOFF)이 갱신되고 나면, OFFSET 및 ITERATION COUNT는 양자 모두 1 만큼 증분되고, 다른 반복을 위한 준비시 다음 I 프레임이 CURRENT FRAME으로 지정된다. ITERATION COUNT가 SEARCH RANGE 보다 작은 경우(단계 S814), 다른 반복이 실행된다. 그 이외의 경우, MINDIST는 K에 비교된다(단계 S816). MINDIST가 K 보다 작은 경우에, 이는 일치가 발견되었다는 것을 나타내며, 참여자는 프레임 오정합을 보상하기 위해 그 비디오 비트 스트림의 |MINOFF| 프레임들 만큼 빨리감기, 즉, 양의-값의 MINOFF(단계 S822)를 위해 정상 재생시 비디오가 이동하는 것 보다 빠르게 비디오(308)를 순방향 이동(단계 S820)시키거나, 되감기, 즉, 음의-값의 MINOFF(단계 S826)를 위해 비디오를 역방향으로 이동(단계 S824)시키며, 여기서, |MINOFF|는 MINOFF의 크기 또는 절대값을 나타낸다. 따라서, 비록, 비디오(308) 재생 과정에서 참여자의 비디오 플레이어(208)가 스트림의 콘텐츠를 재생하기 위해 그 비트 스트림에서 순방향 진행하더라도, 그 진행은 참여자의, 그리고, 개시자의 각각의 비트 스트림들의 특성 정보 사이의 비교를 나타내는 MINOFF의 크기 및 부호 각각에 기초한 크기 및 방향으로 변경된다. 되감기에 대한 대안은 비디오 플레이어(208)의 순방향 진행을 느려지게 하거나,MINOFF에 기초한 시간 주기 동안 비디오 플레이어(208)의 순방향 진행을 정지시키는 것이며, 이 기술은 MINOFF가 작은 경우에 실행할 수 있다. 다른 옵션으로서, 비디오 플레이어(208)는 MINOFF의 값에 기초한 "비디오 시간"의 양 만큼 비디오(308)를 순방향 또는 역방향 진행시키도록 구현될 수 있다. 비디오 시간 증분 또는 감분은 MINOFF에 의해 참조되는 표로부터 결정될 수 있거나, 대수적으로 산출될 수 있다. 대안적으로, 비디오 시간의 순방향 및/또는 역방향 이동은 예로서 시간 X 만큼 순방향 진행 및 하나의 I 프레임 만큼 후퇴 등의 매크로 같은 소정 명령들의 복잡한 세트에 의해 기술될 수 있다.

한편, MINDIST가 K와 같게 남아있는 경우, 질의 프레임의 어떠한 일치도 발견되지 않은 것으로 판정된다. 결과적으로, 후보 PVR(114b)은 그 주기 타이머를 시작하고, 이는 소정 시간 주기 이후 만료된다. 주기 타이머가 만료될 때, 참여 PVR(114b)은 개시자에게 재시도 요청 메시지를 전송한다(단계 s828).

시간 비교를 가지는 경우와 같이, 프레임 보상 듀티들은 대안 실시예에서 개시자와 참여자들 사이에서 공유될 수 있다.

동작시, 비디오(308)의 잠재적 시청자는 예로서, 전화(124a)에 의해, 또는 텔레비전(122a)상에 나타난 메뉴를 항행 및 완성하기 위해 원격 제어기(116a)를 사용함으로써 다른 잠재적 시청자들과 특정 비디오 시작 시간을 정렬한다. 메뉴 템플릿들은 예로서, 다양한 저장부(22)에 존재할 수 있다. 동기화된 시청 세션의 개시자로서 작용하는 잠재적 시청자는 그후 대화 메뉴에 의해 비디오 시작 시간에 시작하도록 세션을 계획한다. 각 세션 참여자의 비디오 타이머(212)는 예로서,비디오(308)의 각 로컬 사본을 재생하기 위해 0시간, 0분 및 0초에 시작한다. 비디오(308)의 각 로컬 사본은 실질적으로 동일하지만, 이들은 예로서, 비교 기술들 및 사용되는 파라미터들에 대하여, 정확한 제어 기능 속도들에 대하여, 비디오 프로그램내의 정확한 시작점에 대하여 다를 수 있다.

시간 보상에 이어, 참여자 PVR(114b)은 동기화 레지스터(214)에 엔트리들의 추가가 계류되는 동안, 재생시 되감기 또는 빨리감기 동작을 수반할 수 있는 프레임 오정합을 보상한다. 보상이 되감기를 수반하는 경우에, 레지스터(214)내에 엔트리들이 더 이상 사전-존재하지 않는 지점으로 재생이 진행할 때 레지스터(214) 엔트리들의 추가가 재개되며, 빨리감기를 수반하는 경우에, 엔트리들의 추가는 빨리감기의 착점 프레임에서 재개한다.

시간 및 프레임 동기화는 동기화된 표시를 유지하기 위해 주기적으로 수행되는 것이 적합하다. 또한, 이들은 예로서, 시청 모드를 변경하는 표시를 시청하는 사용자에 의한 PVR(114a)에 대한 입력 수단의 대화 작용의 결과로서, PVR(114a)에 의해 발행된 각 기능 제어 명령과 함께 수행되는 것이 적합하다. 후자의 경우에, 사용자의 PVR(114a, b)은 새로운 개시자 PVR(114a)이 되며, 다른 참여자 PVR들(114b)이 그 제어 기능을 따르라는 명령을 방송함으로써, 개시 PVR(114a)의 역할을 맡을 때까지, 이를 사용하여 모든 참여자 PVR들(114b)이 동기화를 유지한다. 따라서, 시청 모드를 변경하는 명령을 수신하는 개시자 PVR(114a)은 이 것이 더 이상 개시자 PVR(114a)이 아니며, 명령을 발행한 참여자 PVR(114b)은 이것이 이제 개시자 PVR(114a)이라는 것을 안다.

기술된 실시예들은 단지 본 발명의 예시일 뿐이다. 예로서, 시청 모드 변경시, 새로운 시청 모드가 모든 수취 PVR들에 의해 보다 신속하게 실행될 수 있도록, 프로그램 식별자(560) 및 시청 모드(570)는 동반 시간 오정합(540), 질의 서명(580) 및 질의 시간 스탬프(590) 없이 방송될 수 있다. 대안적으로, 예로서 빨리감기 또는 되감기로의 선택된 시청 모드 전이들의 경우에만 동반되는 프로그램 식별자(560) 및 시청 모드(570)가 전송될 수 있다. 사실, 시청 모드가 변하건 변하지 않건 질의 서명(580) 및 질의 시간 스탬프(590)는 시간 오정합(540), 프로그램 식별자(560) 및 시청 모드(570)와 별개로 전송될 수 있다. 즉, 시간 오정합 및 프레임 오정합은 비동기식으로 산출 및 보상될 수 있다.

비록, 예시의 단순성을 위해, 도면들 및 명세서의 부분들이 두 개의 비트 스트림들의 표시를 동기화하기 위한 세션에 관련 또는 이를 설명하고 있지만, 본 발명의 범주는 다수의 비트 스트림들의 표시를 동기화하기 위해 적용할 수 있다는 것을 이해할 것이다. 따라서, 예로서, 하나의 개시자 PVR 및 하나의 참여자 PVR은 일 개시자 PVR 및 다수의 참여자 PVR들과 함께 동작하는 실시예를 예시 또는 설명한다.

개시자 PVR(114a)은 요청 참여자로부터 재시도 요청 메시지를 수신 및 그에 응답하는 것으로서 설명되었지만, 대안적으로, 소정의 다른 참여자들이 재시도 요청 메시지를 수신 및 그에 응답할 수 있다.

비록, 비디오(308)의 사본들이 방송들로부터 레코딩되는 것으로서 설명되었지만, 이는 제한적이지 않다. 비디오 사본들이 서비스 공급자들로부터 다운로드되거나, 비디오 사본들을 포함하는 콤팩트 디스크들이 각 PVR들내에 삽입될 수 있다. 그 재생이 동기화되는 비디오 사본들은 원격적으로 배치될 필요는 없으며, 그 각 PVR들에 로컬 배치될 필요도 없다.

다른 실시예들에서, 단지 I 프레임들만이 프레임 오정합 결정시 고려된다. 본 발명에서, Dimitrova에서와 같이, I 프레임들이 아닌 키 프레임들이 대표 프레임들로서 사용될 수 있다. 키 프레임들의 집합은 사용되는 비교 기술에 무관하게 각 참여자에 대하여 대략 동일할 수 있으며, 그에 의해, 정확한 프레임 시퀀스 오정합 결정 및 이에 따른 정확한 동기화를 제공할 수 있다. 대안적으로, 모든 프레임들이 대표 프레임들로서 간주될 수 있고, 여기서, 서명 판정은 Dimitrova에 지정된 절차를 따른다.

본 발명의 범주는 Dimitrova 서명들에 한정되지 않는다. 서명들을 생성하기 위한 다른 기술들은 여기서 전문을 참조하고 있는 발명의 명칭이 "Method for Confirming the Integrity of an Image Transmitted with a Loss"인 Lord 등의 U.S. 특허 제6,266,429에 기술되어 있다.

본 발명은 일반적으로 둘 이상의 디지털 비트 스트림들의 렌더링 가능 콘텐츠의 표시를 동기화시키는 것에 관련한다. 이 표시는 단지 시각적 또는 단지 청각적이거나, 시각적 및 청각적 양자 모두일 수 있다. 비트 스트림들은 이미지 및 오디오 데이터 양자 모두를 포함할 필요가 없다. 따라서, 특성 정보는 가시가능한 이미지들 또는 가청 음향들의 특성일 수 있다. 특성 정보가 서명들을 포함하는 것도 필수적이지 않다. 예로서, 적절한 이미지 및/또는 오디오 변환 계수들이 비트 스트림들의 콘텐츠를 특성화하기 위해 사용될 수 있다.

상기 실시예들에 묘사된 바와 같이, 서명들은 필요시, "진행중" 유도되지만, 대안적으로, 예로서, PVR(114)이 추후 시간에 재생될 방송을 수신하는 동안 서명들을 예비 연산함으로써 보다 신속한 동기화 처리가 달성된다. 방송된 디지털 비트 스트림은 수신시 서명들을 유도하기 위해 부분적으로 압축해제될 수 있으며, 이는 저장되고, 디지털 비트 스트림내에 임베딩된 대응 태그들에 의해 참조된다. 재생 동안, 각 태그는 질의 또는 후보 프레임의 각 서명을 소환하기 위해 사용된다. 따라서, 질의 동기화 메시지 형성시 및/또는 유입 질의 서명에 대한 후보 프레임들의 서명들의 일치시 "진행중" 유도를 위해 재정렬할 필요성이 회피된다.

또한, 본 발명은 서명들 대신 워터마크들 또는 텍스쳐 태그들을 사용하여 이행될 수 있다. 워터마크들은 주기적으로, 예로서, 매초 마다 콘텐츠내에 고의로 도입된 노이즈이다. 텍스쳐 태그는 텍스쳐 형태의 식별자이다. 스트림 특징들 유닛은 비트 스트림의 콘텐츠의 정보 특성으로서 비디오(308)를 통합하는 디지털 비트 스트림으로부터 워터마크 또는 태그를 유도한다. 시간 동기화 이후, 콘텐츠 단위 정렬은 각 시간과 각 워터마크 또는 태그를 연계시킴으로써 달성된다.

따라서, 그 양호한 실시예에 적용된 본 발명의 기본적 신규한 특징들을 예시, 설명 및 강조하였지만, 예시된 디바이스들의 형태 및 세부사항들에 다양한 생략들, 치환들 및 변경들이 본 발명의 개념으로부터 벗어나지 않고 본 기술의 숙련자들에 의해 이루어질 수 있다는 것을 이해할 것이다. 예로서, 동일 결과들을 달성하기 위한 실질적으로 동일한 방식으로 실질적으로 동일한 기능을 수행하는 요소들및/또는 방법 단계들의 모든 조합들이 본 발명의 범주내에 있다는 것은 명백하다. 또한, 본 발명의 소정의 설명된 형태 또는 실시예와 관련하여 예시 및/또는 설명된 구조들 및/또는 요소들 및/또는 방법 단계들은 디자인 선택의 일반적 질료로서 소정의 다른 설명 또는 기술 또는 제안된 형태 또는 실시예에 통합될 수 있다는 것을 인지하여야 한다. 따라서, 본 발명은 여기에 첨부된 청구범위의 범주에 의해 표시된 바에 의해서만 제한된다.

Claims (27)

1. 각각의 저장 매체들에 존재하는 적어도 두 개의 디지털 비트 스트림들의 렌더링 가능 콘텐츠의 표시를 동기화하기 위한 장치에 있어서:

   상기 스트림들 중 하나의 콘텐츠의 정보 특성을 유도하는 스트림 특성 유닛(210);

   다른 스트림의 콘텐츠의 정보 특성을 담고있는 신호를 수신하는 수단;

   상기 하나의 스트림의 상기 정보를 상기 다른 스트림의 상기 정보에 비교하는 수단;

   상기 하나의 스트림의 콘텐츠를 재생하기 위해 상기 하나의 스트림에서 순방향 진행하는 플레이어(208); 및

   상기 비교하는 수단에 의한 상기 비교에 기초하여 상기 진행을 변경함으로써 상기 표시를 동기화하는 수단을 포함하는, 표시 동기화 장치.
2. 제1항에 있어서, 상기 스트림들은 이미지 데이터를 포함하고, 상기 표시는 적어도 부분적으로 시각적인, 표시 동기화 장치.
3. 제1항에 있어서, 상기 스트림들은 오디오 데이터를 포함하고, 상기 표시는 적어도 부분적으로 청각적인, 표시 동기화 장치.
4. 제1항에 있어서, 상기 표시는 제1 시간과 제2 시간에 걸쳐있고, 상기 하나의 스트림의 상기 콘텐츠와 상기 다른 스트림의 상기 콘텐츠는 상기 제1 시간에 상기 스트림들의 각각의 제1 부분들에 속하고, 상기 제2 시간에 상기 스트림들의 각각의 제2 부분들에 속하는, 표시 동기화 장치.
5. 제1항에 있어서, 상기 신호는 상기 동기화를 실행하기 위해 상기 다른 스트림의 처리를 제어하기 위한 제어 정보(570)를 포함하는, 표시 동기화 장치.
6. 제1항에 있어서, 상기 다른 스트림의 렌더링에 응답하는 사용자에 의한 상기 입력 수단의 대화식 동작에 의해 기능 제어 명령이 발행되도록 구성되는 입력 수단을 더 포함하며,

   상기 명령은 상기 다른 스트림의 콘텐츠의 상기 정보 특성이 생성되게 하는, 표시 동기화 장치.
7. 제1항에 있어서, 상기 플레이어(208)는 상기 콘텐츠를 상기 하나의 스트림으로부터 유도되는 가시가능한 이미지들로서 재생하고, 상기 재생은 상기 다른 스트림으로부터 유도되는 가시가능한 이미지들의 다른 디스플레이(122a)상에서의 재생과 동기하여, 디스플레이(122b)상에 상기 가시가능한 이미지들을 생성하는, 표시 동기화 장치.
8. 제1항에 있어서, 상기 하나의 스트림은 이미지 데이터를 포함하고, 이미지 데이터의 주파수 성분들상에 동작하는 이미지 변환을 통하여 압축해제 이전의 부분적으로 압축해제된 형태를 가지며, 상기 유도는 부가의 압축해제 없이 상기 부분적으로 압축해제된 형태의 상기 스트림에 기초하여 행해지는, 표시 동기화 장치.
9. 제1항에 있어서, 상기 유도는 상기 하나의 스트림의 상기 저장 이전에 발생하고, 상기 저장된 스트림은 상기 특성 정보의 대응 부분들을 참조하는 임베딩된 태그들을 가지는, 표시 동기화 장치.
10. 제1항에 있어서, 상기 장치는 개인용 비디오 레코더(114b)를 포함하는, 표시 동기화 장치.
11. 제1항에 있어서, 상기 다른 스트림의 콘텐츠의 상기 정보 특성을 유도하는 제2 스트림 특성들 유닛(210);

    상기 제2 스트림 특성들 유닛에 의해 유도되는 상기 정보로부터 상기 신호를 형성하는 수단; 및

    상기 신호를 출력하는 수단을 더 포함하는, 표시 동기화 장치.
12. 제11항에 있어서, 렌더링 가능 콘텐츠를 갖고 제3 저장 매체에 존재하는 제3 디지털 비트 스트림의 콘텐츠의 정보 특성을 유도하는 제3 스트림 특성들유닛(210);

    상기 다른 스트림의 콘텐츠의 정보 특성을 담고있는 신호를 수신하는 수단;

    상기 제3 스트림의 상기 정보를 상기 다른 스트림의 상기 정보에 비교하는 수단;

    상기 제3 스트림의 콘텐츠를 재생하기 위해 상기 제3 스트림에서 순방향 진행하는 플레이어(208); 및

    상기 제3 스트림의 상기 정보를 비교하는 상기 수단에 의한 상기 비교에 기초하여 상기 제3 스트림에서의 상기 진행을 변경함으로써 상기 표시를 동기화하는 수단을 더 포함하는, 표시 동기화 장치.
13. 제1항에 있어서, 상기 특성 정보는 워터마크인, 표시 동기화 장치.
14. 제1항에 있어서 상기 특성 정보는 텍스쳐 태그(textual tag)인, 표시 동기화 장치.
15. 제1항에 있어서, 상기 특성 정보는 디지털 서명인, 표시 동기화 장치.
16. 제1항에 있어서, 상기 변경은 상기 진행의 방향 변경을 포함하는, 표시 동기화 장치.
17. 제1항에 있어서, 상기 변경은 상기 진행의 크기 변경을 포함하는, 표시 동기화 장치.
18. 제1항에 있어서, 상기 비교하는 수단에 의한 상기 비교의 출력은 인트라프레임 코딩된 프레임들의 카운트인, 표시 동기화 장치.
19. 제1항에 있어서, 상기 다른 스트림의 콘텐츠를 재생하기 위해 상기 다른 스트림에서 순방향 진행하는 플레이어를 더 포함하고,

    상기 표시를 동기화하는 수단은 상기 비교하는 수단에 의한 상기 비교에 기초하여 상기 다른 스트림에서의 상기 진행을 변경하는, 표시 동기화 장치.
20. 제1항에 있어서, 상기 변경은 상기 재생을 빨리감기하는, 표시 동기화 장치.
21. 제20항에 있어서, 상기 재생에 대응하여 시간 카운트를 유지하는 비디오 타이머(212)를 더 포함하고,

    상기 빨리감기는 상기 시간 카운트의 소정값에 대응하는 상기 재생의 지점까지 이루어지는, 표시 동기화 장치.
22. 제1항에 있어서, 상기 변경은 상기 재생을 되감기하는, 표시 동기화 장치.
23. 제1항에 있어서, 상기 변경은 상기 재생을 정지시키는, 표시 동기화 장치.
24. 제1항에 있어서, 상기 변경은 상기 재생의 빨리감기, 되감기, 느린 재생 및 정지로 구성되는 그룹으로부터 선택된 변경들의 조합을 포함하는, 표시 동기화 장치.
25. 각각의 저장 매체들에 존재하는 적어도 두 개의 디지털 비트 스트림들의 렌더링 가능 콘텐츠의 표시를 동기화하기 위한 방법에 있어서:

    상기 스트림들 중 하나의 콘텐츠의 정보 특성을 유도하는 단계;

    상기 정보를 다른 스트림의 콘텐츠의 정보 특성에 비교하는 단계;

    상기 하나의 스트림의 콘텐츠를 재생하기 위해 상기 하나의 스트림에서 순방향 진행하는 단계; 및

    상기 비교 수단에 의한 상기 비교에 기초하여 상기 진행을 변경함으로써 상기 표시를 동기화하는 단계를 포함하는, 표시 동기화 방법.
26. 각 저장 매체들에 존재하는 두 개 또는 그 이상의 디지털 비트 스트림들의 렌더링 가능 콘텐츠의 표시를 동기화하기 위한 방법으로서, 상기 콘텐츠는 상기 두 개 또는 그 이상의 스트림들에서 순방향 진행함으로써 재생되는, 상기 표시 동기화 방법에 있어서:

    상기 디지털 비트 스트림들 중 하나를 수신하는 단계;

    상기 수신된 스트림의 콘텐츠의 정보 특성을 유도하는 단계;

    상기 유도된 정보를 담고있는 신호를 출력하는 단계;

    상기 신호를 수신하는 단계;

    상기 수신된 신호의 특성 정보를 상기 수신된 스트림 이외의 상기 디지털 비트 스트림들 중 하나 또는 그 이상의 콘텐츠의 각 정보 특성에 비교하는 단계; 및

    상기 하나 또는 그 이상의 비교들에 기초하여 상기 각각의 재생들의 상기 진행을 변경함으로써 상기 표시를 동기화하는 단계를 포함하는, 표시 동기화 방법.
27. 각 저장 매체들에 존재하는 적어도 두 개의 디지털 비트 스트림들의 렌더링 가능 콘텐츠의 표시를 동기화하기 위한 컴퓨터 프로그램에 있어서:

    상기 스트림들 중 하나의 콘텐츠의 정보 특성을 유도하는 명령 수단;

    상기 정보를 다른 스트림의 콘텐츠의 정보 특성에 비교하는 명령 수단,

    상기 하나의 스트림의 콘텐츠를 재생하기 위해 상기 하나의 스트림에서 순방향 진행하는 명령 수단; 및

    상기 비교하는 명령 수단에 의한 상기 비교에 기초하여 상기 진행을 변경함으로써 상기 표시를 동기화하는 명령 수단을 포함하는, 컴퓨터 프로그램.