KR20020026169A - 디지털 비디오 기록물 편집 방법 및 장치, 및 이 방법에의해 제조된 기록물 - Google Patents

디지털 비디오 기록물 편집 방법 및 장치, 및 이 방법에의해 제조된 기록물 Download PDF

Info

Publication number
KR20020026169A
KR20020026169A KR1020017015347A KR20017015347A KR20020026169A KR 20020026169 A KR20020026169 A KR 20020026169A KR 1020017015347 A KR1020017015347 A KR 1020017015347A KR 20017015347 A KR20017015347 A KR 20017015347A KR 20020026169 A KR20020026169 A KR 20020026169A
Authority
KR
South Korea
Prior art keywords
sequence
data
frame
edit
stream
Prior art date
Application number
KR1020017015347A
Other languages
English (en)
Other versions
KR100821575B1 (ko
Inventor
켈리데클란피.
이이덴스피터비.
모리스옥타비우스제이.
Original Assignee
요트.게.아. 롤페즈
코닌클리케 필립스 일렉트로닉스 엔.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 요트.게.아. 롤페즈, 코닌클리케 필립스 일렉트로닉스 엔.브이. filed Critical 요트.게.아. 롤페즈
Publication of KR20020026169A publication Critical patent/KR20020026169A/ko
Application granted granted Critical
Publication of KR100821575B1 publication Critical patent/KR100821575B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537—Optical discs
    • G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

방송 목적용으로 보통 이용된 전송 스트림 포맷으로 레코딩된 제 1 및 제 2 스트림(SEQ1 및 SEQ2)으로부터 편집 MPEG 오디오/비디오 스트림을 생성하는 여러 가지 방법이 개시되어 있다. 일 구현에 따르면, 편집 포인트의 영역에서 최초 두 개의 스트림으로부터 데이터를 레코딩하는 브리지 시퀀스를 발생한다. 패딩 패킷(9 및 A 내지 B)은, 순회 카운터 값을 조정하여 브리지 시퀀스와 제 2 시퀀스 사이의 결합을 거쳐 연속적인 디코딩을 적절하게 하여 기본 스트림에 삽입된다. 또 다른 구현에 의하면, 심리스 재생은, 필요하지 않으므로 브리지 시퀀스가 생략되고, MPEG-2 사양을 따르는 편집 스트림을 발생하기 위해 "접촉식(on-the-fly)"으로 여러 가지 프로세스를 수행한다. 이 때문에, 출구 및 입구 포인트는, 특정 형태의 코딩 영상으로 제약되어 있고, 타임-베이스들 사이의 오프셋은 버퍼 오버플로우를 막기 위해 조정된다.

Description

디지털 비디오 기록물 편집 방법 및 장치, 및 이 방법에 의해 제조된 기록물{METHOD AND APPARATUS FOR EDITING DIGITAL VIDEO RECORDINGS, AND RECORDINGS MADE BY SUCH METHODS}
본 발명은, 편집하여 그 편집된 오디오/비디오 데이터를 연속적으로 재생을 하기 위한 방법 및 장치와, 그 방법 및 장치에 의해 제조된 편집 기록물에 관한 것이다. 본 발명은, MPEG-2 사양(ITU_T 권고 H.222.0｜ISO/IEC 13818-1)에 따른 전송 스트림 포맷에서의 예를 들면 편집 오디오/비디오 데이터 스트림의 부드러운 재생에서의 특정 응용이다. 그러나, 그 사양을 갖는 컴플라이언스는 본 발명에 필수적인 것이 아니다.
상술한 MPEG-2 사양은, 멀티미디어 다중화, 동기화 및 (오디오를 포함한) 디지털 오디오 프로그램을 전송, 레코딩 및 재생시에 사용하기 위한 타임-베이스 복원을 위한 일반적인 방법을 규정한다. 이 사양은, 각 기본 비트 스트림(비디오, 오디오, 기타 데이터)이 패킷화된 기본 스트림(PES; Packetised Elementary Stream)으로 구분되어서, 각 패킷이 2개의 독특한 스트림 형태 중 어느 한쪽으로 다중화되는 패킷 기반 멀티미디어 다중화를 제공한다. 프로그램 스트림(PS; Program Stream)은, 복합 가변 길이 PES 패킷이고 디스크의 레코딩과 같은 오류나기 쉬운 환경에서 사용하도록 설계되어 있다. 전송 스트림(TS; Transport Stream)은, 188바이트의 고정 길이 패킷으로 구성되고, 다중 프로그램 멀티플렉싱과 하나의 프로그램의 다양한 PES 패킷의 멀티플렉싱의 기능성을 갖고, 방송과 같은 오류가 나기 쉬운 환경에서 사용하도록 설계되어 있다. 프로그램 스트림 포맷의 PES 패킷이 모두 전송되고 방해받지 않을 수 있으므로, TS에서의 비디오 및 오디오용 PES패킷은 세분되어 보다 작은 TS 패킷에서 서로 다중화된다. 멀티미디어 동기화 및 타임-베이스 복원은, 시스템 타임 클록 및 프리젠테이션(presentation)/디코딩용 타임 스탬프에 의해 달성된다.
종래의 하나의 비디오 프로그램 분배(distribution) 시스템은, 디지털 다기능 디스크(DVD; Digital Versatile Disc)이다. 이 표준은, 동영상 저장용 MPEG-2 프로그램 스트림과 광 디스크 관련 재료의 특정 형태를 정의한다. DVD는 현재 미리 레코딩된 재료의 분배를 위해 제공하고, 현재 일반적으로 널리 사용되고 있는 대중적인 비디오 카세트 테이프 시스템이, 아날로그 A/V 재료의 레코딩을 허가하는 것처럼, 방송 및 홈 레코딩형 재료로부터 디지털 A/V 데이터를 레코딩할 수 있는 상업 및 가정용 오디오 및/또는 비디오(A/V) 장비에 대한 수요가 명백히 있다. 디지털 비디오 레코딩 시스템에 대해 기대되는 하나의 개선점은, A/V 데이터의 심리스 편집 및 부드러운 재생을 허가하는데 있다. 응용은, 재생에 있어서의 다중 분기점이 가능한 상업 또는 가정용 비디오 편집 및 대화형 비디오를 포함한다. 현대의 디스크 기반 저장 미디어의 특이한 장점은, 테이프 미디어의 "선형" 특징과 비교하여 그들의 "랜덤 액세스" 특징이 있다. 따라서, 편집 프로그램은, 원래의 스트림을 복제하지 않고 저장 및 변형될 수 있다. 원리상으로, 재생 시퀀스를 정의하는 제한된보조 정보만이 저장될 필요가 있다. 그래서, 이는 재생시에 편집된 프로그램을 합성하기 위해서 디스크의 다른 부분으로의 액세스를 제어하는데 사용된다. 이 편집 프로그램은, 사용자 입력에 따라 대화형으로 결정되어도 된다.
원리상 바람직하고, 당업자는 단일 디코더를 사용하여 디지털 비디오 스트림의 실제적인 레코딩 및 편집에 있어서의 많은 문제점을 알 것이다. 당업자에게 잘 알려진 것처럼, 최초의 기록물은, 확실하게 하도록 규정된 많은 서로 다르고 상호 관련된 제약에 따라 발생되어 저장되고, 어떠한 컴플라이언트 디코더에서도 재생이 가능하다. 일반적으로, 이들 제약은, 원하는 편집 포인트에서 하나의 최초 스트림에서 다른 스트림의 중간으로부터 한번 간단히 재생을 전환하면 위반될 것이다. 이러한 스트림을 편집하는 가장 직접적인 방법은, 편집 포인트 주위와 독립적으로 2개의 스트림을 디코딩하고, 원하는 편집 포인트에서 그들 사이를 전환하는데 있다. 이러한 기술의 예는 US 5696557 및 EP-A-0923243에 개시되어 있다. 그러나, 여기서는 제 2 디코더의 비용이 효과적으로 요구되고, 소비자는 이 비용을 피하는 것이 바람직하다. 그 이상의 문제점들이 있다.
일 예로서, 디스크 기반 레코딩 시스템이, 테이프와 비교될 때 일반적으로 특징에 있어서 "랜덤 액세스"로서 간주되었지만, 디스크 또는 다른 매체의 다른 저장 위치간에 스위칭시에 관련된 "탐색(seek) 시간"은 실시간 데이터 흐름을 어쩔 수 없이 방해하고, 디스크 할당 규칙은, 실시간 데이터가 부족한 디코더에서 너무 많은 탐색이 일어나서 그치는 것을 막기 위해서 실제 시스템에 과해진다. 유럽특허출원 EP-A-0983591(PHN 16815 EP)에 따르면, "브리지 시퀀스"는, 다른 점에서 2개의 세그먼트가 그 할당 규칙을 위반하지 않고 결합될 수 없다는 것을 확실하게 하는 2개의 A/V 세그먼트를 연결하도록 동일 디스크 상에 따로따로 발생되어 저장된다.
원리상으로, 편집은, 프레임 경계에서, 제 1 영상 그룹(GOP;Group Of Picture)과 제 2 영상 그룹 사이에서, 또는 임의 프레임 포인트에서 2개의 MPEG 스트림을 연결하는데 요구될 수도 있다. 그러나, MPEG 코딩 및 디코딩의 특징 때문에, 프레임과 버퍼링 제약간의 시간적인 의존성과 같은 그러한 요소로 인한 많은 잠재적인 문제점들이 생긴다. 예를 들면, 비디오 신호가 디코딩이 가능하지도 않을 수 있다. 이는, MPEG-2가 다른 비디오 프레임을 참조하여 비디오 프레임을 부호화하고, 기준(reference) 프레임을 잃어버릴 경우 종속 프레임이 디코딩 가능하지 않을 것이라는 사실 때문이다. MPEG 스트림은, 자체 포함되고 기준 포인트로서 사용된 독립 또는 코드내(I) 프레임들과, 기준을 위해 사용되어도 되는 예측 코드(P) 프레임들과, 과거 및/또는 미래 기준 프레임으로부터의 예측을 사용하여 부호화된 양방향 예측 코드(B) 프레임들을 포함한다.
이와 함께 공통으로 할당된 WO-A-00/00981(PHB34262 WO)은, 프레임을 재부호화하고 브리지 시퀀스에서의 2개의 스트림으로부터 오디오 및 비디오를 재다중화하기 위해서 브리지 시퀀스의 개념을 더 첨가한 것이다. 이 브리지 시퀀스는, 코딩 컴플라이언스를 유지하면서 2개의 스트림을 함께 연결시키고, 표준 디코더를 통해 부드러운 재생에 의해 정확한 프레임 편집을 수행하는 것을 가능하게 한다.
그 중에서, 본 출원은, 상기와 같은 구성에 대한 그 이상의 개선점 및 적응을 개시한다. 상기 종래 기술은, 기록물이 MPEG-2의 프로그램 스트림 포맷에 의거한다고 생각한다. MPEG 전송 스트림(TS)에 의거한 다른 가정용 디지털 비디오 기록 포맷을 새롭게 바라고 있다. 그러한 레코딩 포맷의 일 국면은, 출원중인 "Method and Apparatus for making and Replaying Digital Video Recordings, and Recordings Made by Such Methods"(PHGB 000041)의 영국특허 출원 0007870.9에 개시되어 있다. 그러므로, TS 포맷에서의 기록물의 편집 및 재생은, PS 포맷에서의 현재 기록물에 추가한 일부 문제점을 갖는다.
해결하려는 문제점들을 요약해보면, 부정확한 기준 프레임을 사용하는 디코딩으로 시각적인 결과물이 될 것이다. TS에서의 비디오 프레임의 재정리(re-ordering)는, 표시되지 않은 편집 스트림에서의 비디오 프레임이 생길 수 있다. 이와 유사하게 오디오는, 편집 공정에 의해 영향을 받을 것이다. 오디오 신호가 비디오와 정렬되지 않으므로, 2개의 스트림 결합으로 편집 포인트 주위의 부분적인 오디오 프레임이 생기고, 오디오 결과물이 생길 것이다. 버퍼 문제는, 결합 스트림이 디코더에서의 데이터 손실이 생길 수 있는 MPEG 버퍼 모델 요구사항에 따르지 않을 경우 발생할 것이다. 오디오 스큐(skew)는, 비디오 프레임에 의해 나타내어진 오디오 프레임이 일반적으로 멀티플렉스에서의 대응 비디오 1초 전 또는 후까지 도달하는 멀티플렉스 스트림에서 정렬되지 않을 때 일어난다. 불연속(discontinuity)은, (PCR/PTS/DTS) 타임 스탬프를 위해 사용된 타임-베이스에서 일어날 것이다. 또한, TS 패킷에서의 순회(continuity) 카운터는, 편집 포인트에서 불연속적일 것이다.
본 발명자는, 2개의 다른 편집 형태를 제공한 것을 제시한다. 이들은, 스트림이 영상 그룹(GOP) 경계에서 논-심리스(non-seamless) 형태로 결합되는 단순 편집(i)이고, 스트림이 GOP 경계에 상관없이 정확히 및 연속적으로(seamlessly) 프레임을 결합시킨 복합 편집(ii)이다. 각 편집 형태는, 상술한 문제점을 갖는 형태의 피하기 위해 신중한 프로세싱이 요구된다. MPEG 사양은, 심리스 및 논-심리스 형태의 전송 스트림에서 신호로 보내려고 하는 "스플라이스(splice) 포인트"를 제공한다. 그러나, 이들 편집 포인트의 사용으로 프로그램 제공자가 스트림에서의 그러한 시그널링을 포함한 범위까지만 가능하고, 소정 스플라이스 포인트는 사용자 선택 프레임에서 편집하는 정확한 프레임의 옵션을 지지할 수 없다.
US 5 917 988(소니사)은 스트림이 영상 그룹(GOP's)에 걸쳐 함께 결합될 경우 결점 있는 영상이 출력하는 것을 막는 장치 및 방법을 제안한다. 여기서 제시된 구성은, 디코딩을 위해 사용된 기준 영상 중의 하나를 반복하여 불량 영상보다 오히려 재생시에 중지한다. 여기에 개시된 방법은, 부드럽고, 정확한 프레임 편집 및 재생을 하지 않고, 버퍼 불연속 또는 멀티플렉스 순회 문제를 고려하지 않는다.
전문적 응용에 있어서 스트림 편집을 하기 위한 또 다른 제안이 EP 0 926 678 A2(Tektronix)에 있다. 프레임 기준은, 편집 포인트 주위의 입력 시퀀스와 합성되고, 디코딩 되고, 편집 장비에서의 보조 저장장치를 사용하는 I-영상만을 사용하여 재부호화된다. 이 방법은, 심리스 편집을 제시하지만 어드레스, 멀티플렉스 또는 오디오 문제로 일어나는 문제점을 해결하려는데 역점을 두지 않는다. 또한, 급속 보조 저장장치를 위한 요구사항은, 소비자용 장비에 사용하는데 적합한 광 디스크 자체에 저장된 편집을 제공하지 않는다. 말할 필요도 없이, I-영상의 순회만을 포함하는 브리지 시퀀스는, 일반적인 디스크 저장장치의 비트 전송속도(bit-rate) 제약 이내에서 인정하려고 하는 초고속 통신속도를 요구한다는 것이다.
본 발명의 목적은, MPEG-2 TS와 같은 편집된 부호화된 데이터 스트림의 부드러운 재생을 위한 여러 가지 방법 및 장치를 제공하는데 있다. 여기서 알 수 있는 것은, 본 발명이, 어떠한 부호화된 다중화 스트림을 재생 및 편집할 때 일반적으로 유사한 문제점이 일어나므로, MPEG-2 컴플라이언트 스트림의 엄격한 범위 밖에서 적용 가능하다는 것이다.
본 발명자는, 데이터 스트림 편집의 다른 형태가 가능하고, 임의의 제안 방법이 본래의 코딩 포맷에서의 이것 및 다른 제약을 특히, 외부 디코더로의 디지털 인터페이스를 통해 편집 스트림을 부드럽게 재생하게 하는 것을 고려해야 한다는 것을 알았다. MPEG 전송 스트림 멀티플렉스 포맷과 연관된 문제점들을 해결하려는데 역점을 두어, 사용자에 대한 오디오 및 비디오 외란을 감소시킨다.
본 발명의 제 1 국면에 따르면, 저장장치로부터 프레임 기반 데이터로 구성된 시퀀스를 판독 가능하도록 동작하고, 제 1 프레임 시퀀스의 제 1 편집 포인트가 소정 디코더에 의해 과해진 제약을 위반하지 않고 제 2 시퀀스의 제 2 편집 포인트에 연결되도록 그것을 편집 가능하도록 동작하는 수단을 구비한 데이터 처리장치를 제공하되, 상기 저장된 프레임 시퀀스 각각이 적어도 하나의 시리즈의 전송 패킷을 포함하고, 주어진 시리즈의 전송 패킷이 선행하는 전송 패킷에 대한 소정의 순회 규칙에 의해 각각 관련된 각각의 순회 카운터 값을 구비하고, 상기 장치는 상기 편집 포인트의 연결로 생기는 순회 카운터 값의 불연속의 크기를 계산하는 수단과,상기 제약과 순회 규칙을 따르면서 상기 제 1 및 제 2 편집 포인트를 연결하는 전송 패킷의 편집 시퀀스를 구성하도록 각각이 그 자신의 순회 카운터 값을 갖는 대응한 수의 보조 전송 패킷을 발생하는 수단을 구비한다.
실시예에서 상기 제 1 및 제 2 시퀀스는, 상기 전송 패킷을 형성하기 위해 세분된 패킷들을 갖는 적어도 하나의 패킷화된 기본 스트림을 전달하고, 상기 장치는 패킷 경계를 포함한 페이로드를 갖는 전송 패킷을 식별하고, 이 식별된 패킷 이전에 삽입될 때 상기 순회 규칙을 따르도록 상기 보조 패킷(들)을 발생하도록 더 구성되어도 된다.
이 장치는, 상기 보조 패킷을 포함한 전송 패킷의 상기 편집 시퀀스를 디지털 인터페이스를 통해 출력하는 수단을 구비한다.
제 1 및 제 2 시퀀스와 상기 편집 시퀀스는, 예를 들면 여기에 기재된 것과 같은 MPEG-2 사양을 따를 수도 있다.
프레임 기반 데이터의 제 1 및 제 2 시퀀스는, 각각 다중 패킷화된 기본 스트림을 포함하되, 각 기본 스트림은 전송 패킷의 그 자신의 시퀀스를 갖는다. 순회 규칙은, 각 기본 스트림에 대해 독립적으로 동작하고, 그 장치는 그 스트림 개개에 대해 계산된 불연속의 크기에 따라 각 기본 스트림에 대한 보조 전송 패킷을 발생하도록 구성된다.
이 장치는, 함께 편집된 시퀀스의 연속적인 재생을 허락하도록, 편집을 정의하는 보조 데이터를 발생하여 저장하는 수단을 구비한다. 상기 보조 전송 패킷은, 상기 보조 데이터의 일부로서 발생되어 저장될 수도 있다. 또한, 이 장치는, 편집된 시퀀스를 재생하기까지 상기 보조 패킷을 발생하지 않도록 구성되어도 된다.
실시예에서, 상기 제 1 및 제 2 시퀀스는, 시퀀스의 임의의 다른 프레임을 참조하지 않은 코드내(intra-coded)에 있는 다수의 프레임과, 시퀀스의 적어도 하나 이상의 프레임을 참조하여 코드간(inter-coded)에 있는 다수의 프레임을 갖는 프레임 기반 데이터를 포함하고, 이때의 장치는, 저장된 제 1 및 제 2 프레임 시퀀스로부터 프레임의 선택적인 병합과, 각각의 편집 포인트로 나타낸 제 1 및 제 2 시퀀스로부터 프레임의 코드(내- 또는 간-)형에 의해 결정된 것처럼 브리지 시퀀스 내의 하나 또는 그 이상의 프레임의 선택적인 재코딩에 의해, 전송 패킷의 브리지 시퀀스를 생성하여 상기 편집 포인트 주위의 제 1 및 제 2 시퀀스를 연결하도록 구성된 브리지 발생수단을 구비한다.
이러한 실시예에서, 보조 전송 패킷은 상기 발생된 브리지 시퀀스에 포함되어도 된다.
상기 순회 규칙은, 프레임 헤더의 특정 클래스에 의해 바로 뒤따르는 위치에서, 그 편집된 시퀀스내의 불연속을 허락할 수도 있고, 이 경우에 본 장치는, 브리지 시퀀스내의 그 불연속을 구비하고, 다른 곳에서 순회 규칙을 따르게 하기 위해서 상기 보조 패킷을 삽입하도록 구성되어도 된다. 이러한 실시예는, 순회 규칙을 따르도록 변형하려고 하는 패킷들이 거의 없는 것이 요구된다.
또한, 이 장치는, 상기 제 1 및 제 2 시퀀스 및 재생 리스트 정보와 함께 기록매체에 브리지 시퀀스를 저장하는 수단을 구비한다. 이러한 실시예에서, 보조 전송 패킷은, 저장된 브리지 시퀀스에 포함되어도 되고, 또는 본 장치에 의해 재생을하는 동안 발생되어도 된다.
또한, 본 발명의 제 1 국면에 의하면, 저장장치로부터 프레임 기반 데이터로 구성된 시퀀스를 판독하고, 제 1 프레임 시퀀스의 제 1 편집 포인트가 소정 디코더에 의해 과해진 제약을 위반하지 않고 제 2 시퀀스의 제 2 편집 포인트에 연결되도록 그것을 편집하는 방법을 제공하되, 상기 저장된 프레임 시퀀스 각각이 적어도 하나의 시리즈의 전송 패킷을 포함하고, 주어진 시리즈의 전송 패킷이 선행하는 전송 패킷에 대한 소정의 순회 규칙에 의해 각각 관련된 각각의 순회 카운터 값을 구비하고, 상기 방법은 상기 편집 포인트의 연결로 생기는 순회 카운터 값의 불연속의 크기를 계산하는 단계와, 상기 제약과 순회 규칙을 따르면서 상기 제 1 및 제 2 편집 포인트를 연결하는 전송 패킷의 편집 시퀀스를 구성하도록 각각이 그 자신의 순회 카운터 값을 갖는 대응한 수의 보조 전송 패킷을 발생하는 단계를 포함한다.
또한, 본 발명의 제 1 국면에 의하면, 제 1 프레임 시퀀스의 제 1 편집 포인트를 제 2 프레임 시퀀스의 제 2 편집 포인트에 연결하는 하나 또는 그 이상의 브리지 시퀀스와 함께 제 1 및 제 2 프레임 시퀀스를 이송하는 저장장치를 제공한다.
제 2 국면에서, 본 발명은, 제 1 시퀀스의 제 1 편집 포인트를 원하는 편집 시퀀스를 출력하도록 제 2 시퀀스의 제 2 편집 포인트에 연결하는 저장된 편집 데이터에 따라서 저장장치로부터 데이터의 제 1 및 제 2 시퀀스를 판독 동작 가능한 재생수단을 구비한 데이터 재생장치를 제공하되, 상기 제 1 및 제 2 시퀀스는, 상기 제 1 편집 포인트에서의 상기 제 1 시퀀스의 절단(truncating)과 상기 제 2 편집 포인트에서의 상기 제 2 시퀀스의 삽입(entering)이 상기 디코더 사양 이내의하나 또는 그 이상의 제약을 잠재적으로 위반하도록 소정 디코더 사양에 따른 형태로 인코딩 및 다중화된 적어도 2개의 다중화된 기본 스트림을 각각 포함하고, 상기 재생수단은, 출력으로서 상기 편집 시퀀스가 상기 디코더 사양을 따르도록 상기 편집 포인트 근처에서 상기 제 1 및 제 2 시퀀스로부터 선택적으로 데이터를 재생함으로써 상기 기본 스트림의 재코딩 또는 재다중화 없이 동작한다.
또한, 제 2 국면에서의 본 발명은, 저장된 데이터를 재생하는 방법을 제공하되, 저장된 데이터의 제 1 및 제 2 시퀀스가 저장장치로부터 판독되어, 원하는 편집 시퀀스를 출력하도록 제 1 시퀀스의 제 1 편집 포인트를 제 2 시퀀스의 제 2 편집 포인트에 연결하는 미리 저장된 편집 데이터에 따라 재생되고, 상기 제 1 및 제 2 시퀀스는, 상기 제 1 편집 포인트에서의 상기 제 1 시퀀스의 절단과 상기 제 2 편집 포인트에서의 상기 제 2 시퀀스의 삽입이 상기 디코더 사양 이내의 하나 또는 그 이상의 제약을 일반적으로 위반하도록 소정 디코더 사양에 따른 형태로 인코딩 및 다중화된 적어도 2개의 다중화된 기본 스트림을 각각 포함하고, 상기 재생수단은, 출력으로서 상기 편집 시퀀스가 상기 디코더 사양을 따르도록 상기 편집 포인트 근처에서 상기 제 1 및 제 2 시퀀스로부터 선택적으로 데이터를 재생함으로써 상기 기본 스트림의 재코딩 또는 재다중화 없이 동작한다.
또한, 제 2 국면에서의 본 발명은, 상술한 것과 같은 본 발명에 따른 방법에 의해 생성된 편집 데이터 시퀀스를 재생하는 신호를 제공한다.
본 발명의 그 이상의 특징은, 첨부된 청구범위에 인용되어 있고, 그 내용은 참조에 의해 포함된다. 또한, 본 발명의 다른 면은, 다음 내용으로부터 명백해질것이다. 이들 내용은, 실시예에 비추어 설명하였지만, 제한적인 것이 아니고, 실시예들은 아래와 같다.
본 발명의 실시예들을 아래 설명된 첨부도면을 참조하여 실시예를 설명하겠다.
도 1은 본 발명을 구체화하는데 적합한 광 디스크 기록/재생 장치를 구비한 A/V 설치에 관한 개략적인 블록도이고,
도 2는 도 1의 장치내에 구성요소들을 나타낸 더욱 상세한 개략도이고,
도 3은 광 디스크의 시퀀스 영역에 있는 정보로 구성된 블록의 기록을 나타내고,
도 4는 도 3에서 디스크에 저장된 정보의 재생을 나타내고,
도 5는 생략된 브리지 시퀀스에 의해 저장된 비디오 데이터의 편집을 일반적으로 나타내고,
도 6은 편집 과정의 일부로서 기록된 브리지 시퀀스의 포맷을 나타내고,
도 7은 도 1의 장치에 의해 만들어진 기록물의 원리를 형성한 MPEG 전송 스트림(TS)의 구조 및 중요한 특징을 나타내고,
도 8은 단순(논-심리스) 편집 동작을 나타내고,
도 9는 복합(심리스) 편집 동작에서 브리지 시퀀스내의 데이터 변형을 나타낸다.
디지털 비디오 레코딩-일반적
이하, 설명은 MPEG 표준(MPEG1용 ISO/IEC 11172 및, 특히 MPEG2용 ISO/IEC 13818)에 따라 동작하는 특정 A/V장치를 고찰하지만, 당업자는 본 발명을 MPEG표준을 따르지 않는 다른 A/V 코딩 구성에 적용 가능하다는 것을 알 것이다.
이하, 본 발명은, MPEG 코딩 및 다중화에 사용된 시간적 의존성 및 버퍼링 모델 때문에, 단순 컷 앤드 페이스트(cut-and-paste) 편집이 바로 임의의 프레임 경계에서 이루어질 수 없는 MPEG 전송 스트림에서 비디오 프레임 및/또는 오디오 프레임을 정확하게 편집하는데 있어서의 문제점을 해결하는 방법을 설명하겠다.
재생시에 이중 디코딩없이 편집을 용이하게 하기 위해서, 2개의 최초 MPEG 데이터의 기록물과 함께 연결되도록 (설명하려는 방법으로) 특별히 구성된 MPEG 데이터의 짧은 시퀀스인 브리지 시퀀스를 발생한다. 이는, 상술한 WO-A-00/00981(PHB34262 WO)에 있는 프로그램 스트림 포맷의 편집 원리에서 설명되었다. 그 이상의 배경에 대한 그 공보를 참조한다. 그 문헌으로부터 알 수 있듯이, 일반적으로 유효 MPEG 스트림을 구성하도록 이 데이터의 섹션을 부분적으로 디코딩 및 재인코딩 하는 것이 필요해진다.
비디오 편집에 있어서 마지막 요소는, 제어 구조 또는 재생 리스트이다. 이는, 스트림을 통해 시퀀싱하는 방법을 재생 시스템에 알린다. 그것은, 최초 스트림으로부터의 아웃 포인트와 브리지 시퀀스의 시작에 대한 정보를 규정한다. 그것은, 브리지 시퀀스의 끝으로부터 제 2 스트림으로 점프하는 곳을 규정한다. 또한, 그것은, 재생 관리를 보다 쉽게 하는 다른 정보를 포함하여도 된다.
도 1은 광 디스크 레코드 및 재생 장치의 형태로, 본 발명을 호스트로 하는데 적합한 장치의 실시예를 점선으로 된 박스내에 나타낸 것이다. 장치의 설명에 있어서, 프레임 기반 비디오 신호의 핸들링은, 비록 그것이 오디오 또는 데이터 신호와 같은 다른 형태의 신호가 다른 대안으로 또는 추가로 처리되는 것이라고 인식되지만, 본 발명은 자기 데이터 저장수단과 컴퓨터 하드디스크 드라이브와 같은 다른 메모리 장치에 동등하게 적용 가능한 것에 집중되어 있다.
이 장치는, 광 디스크(3)에 레코딩하려고 하는 비디오 신호를 수신하는 입력 단자(1)를 구비한다. 또한, 본 장치는, 디스크로부터 재생된 비디오 신호를 공급하는 출력단자(2)를 구비한다. 이 단자들은, IEEE 1394와 같은 디지털 인터페이스를 통해 MPEG TS 포맷으로 위성, 케이블 등으로부터 방송 신호를 수신하는 "셋탑 박스"의 형태로 디지털 TV 수신기 및 디코더(12)에 널리 쓰이게 접속되어도 된다. 디코더는, 디스플레이 신호를 종래의 아날로그 TV 세트인 디스플레이 장치(14)에 제공한다.
디스크(3)의 데이터 영역은, 대응 섹터 어드레스들을 갖는 물리 섹터의 연속적인 범위로 구성된다. 이 어드레스 공간은, 시퀀스 영역이 섹터의 연속적인 시퀀스이면서 시퀀스 영역으로 나누어진다. 도 1에 도시된 것과 같은 비디오 기록장치는, 2개의 주 시스템 부분, 즉 디스크 서브시스템(6)과 레코딩 및 재생을 제어하는 비디오 레코더 서브시스템(8)으로서 언급된 것으로 분해된다. 이 2개의 서브시스템은, 쉽게 알 수 있듯이, 디스크 서브시스템이 논리적 어드레스(LA; Logical Address)에 있어서 명백히 해결할 수 있고, 디스크로부터 데이터 판독 및/또는 디스크에 데이터를 기록하는데 최대 유지 가능 비트 전송속도를 보장할 수 있는 것을 포함하는 다수의 특징을 특징으로 한다.
도 2는 본 장치의 개략적인 버전을 더욱 상세히 나타낸 것이다. 이 장치는, 도 1의 서브시스템(8)에 포함된 신호 처리부(100)를 구비한다. 이 신호 처리부(100)는, 디지털 입력 단자(1)를 통해 비디오 신호를 수신하여, 그 비디오 데이터를 디스크(3)에 레코딩하기 위한 채널신호로 처리한다. 점선(102)으로 나타낸 판독/기록 장치는, 도 1의 디스크 서브시스템(6)에 포함된다. 이 판독/기록부(102)는, 광 디스크(3)로부터 판독하고 광 디스크(3)에 기록하도록 구성된 판독/기록헤드(104)를 구비한다. 위치 결정수단(106)은, 디스크(3)를 가로지르는 방사 방향으로 그 헤드(104)를 위치 결정하도록 되어 있다. 판독/기록 증폭기(108)는, 디스크(3)로부터의 신호를 증폭하고 그 신호를 디스크(3)로 증폭하도록 되어 있다. 모터(110)는, 신호 발생부(112)에 의해 공급된 모터 제어신호에 따라 디스크(3)를 회전시킨다. 마이크로프로세서(114)는, 제어선(116, 118, 120)을 통해 모든 회로를 제어한다.
신호처리부(100)는, 입력단자(1)를 통해 수신된 비디오 데이터를 채널 신호의 정보 블록으로 변환하도록 구성된다. 즉, 정보 블록의 크기는, 가변 가능하지만 (예를 들면) 2MB와 4MB 사이여도 된다. 기록부(102)는, 시퀀스 영역의 채널 신호의 정보 블록을 디스크(3)에 기록하도록 구성된다. 최초 비디오 신호에 대응한 정보 블록은, 분할된 레코딩으로서 배치된 것으로 알려진 도 3의 레코딩 다이어그램에 나타낸 것처럼, 반드시 연속적이지 않은 많은 시퀀스 영역 내에 기록된다. 특정 할당 규칙이 기록물을 만들 때 만족한다면, 실시간 데드라인을 만족할 만큼 충분히 빠른 그 분할된 기록물을 레코딩 및 기록할 수 있는 것이 디스크 서브시스템의 특징이다.
보다 앞선 레코딩 단계에서 디스크(3)에 레코딩된 비디오 데이터의 편집을 가능하게 하기 위해서, 이 장치는, 디스크(3)에 레코딩된 제 1 비디오 신호에서의 출구(exit) 위치(아웃-포인트)를 수신하고 동일 디스크에 레코딩된 제 2 비디오 신호에서의 입구(entry) 위치(인-포인트)를 수신하는 입력부(130)를 더 구비한다. 또한, 이 장치는, 신호처리부(100)에 포함되고, 이후 상세히 설명하는 것처럼 브리징 시퀀스를 발생하여 2개의 비디오 스트림을 연결하는 브리징 시퀀스 발생부(134)를 구비한다.
도 3은 비디오 신호의 레코딩을 나타낸다. 비디오 레코더 서브시스템(8)에서, 실시간 신호인 비디오 신호는, 도 3의 상부에 도시된 것처럼 실시간 파일 RTF로 변환된다. 실시간 파일은, (분할되었지만) 대응 시퀀스 영역에 레코딩하는 연속적인 신호 블록 시퀀스 SEQ로 구성된다. 따라서, 디스크의 시퀀스 영역의 위치에 제약이 없고, 레코딩된 비디오 신호의 데이터 부분을 포함하는 임의의 2개의 연속적인 시퀀스 영역은 도 3의 하부에 도시된 것처럼 논리적 어드레스 공간(LAS; logical address space) 어느 곳이어도 된다. 각 시퀀스 영역내에, 실시간 데이터는, 연속적으로 할당된다. 각 실시간 파일은 단일 A/V 스트림을 나타낸다. A/V 스트림의 데이터는, 파일 시퀀스의 순서로 시퀀스 데이터를 연관시켜서 얻어진다.
도 4는 디스크(3)에 레코딩된 비디오 신호의 재생을 나타낸 것이다. 비디오신호의 재생은, 논리적 어드레스 공간 모두에 저장된 재생 제어(PBC; playback control)에 의해 제어된다. 일반적으로, 각 PBC 프로그램은, 레코딩된 비디오 및/또는 오디오 세그먼트의 편집 버전을 포함하고, 각 시퀀스 영역으로부터 세그먼트의 시퀀스를 규정하는 새로운 재생 시퀀스 PBS를 정의한다. 원하는 시퀀스를 만드는 개별 시퀀스의 논리적 어드레스에 대한 포인터는, PBC에 직접적으로 또는 간접적으로 포함된다. 도 3 및 도 4를 비교하여 알 수 있듯이, (도 3으로부터) 최초 파일 시퀀스를 재생성하는데 필요한 PBC는 최초 시퀀스에 대응한 재생 프레임 연속을 제공하는 분할형 레코딩된 세그먼트를 재정리한다.
디지털 비디오 기록물 편집-일반적
도 5는 디스크(3)에 레코딩된 하나 또는 그 이상의 비디오 신호의 편집을 나타내고, "파일 A" 및 "파일 B"이라 명기된 2개의 시퀀스의 프래그먼트(fragment)로 나타낸 2개의 비디오 신호를 나타낸다. 초기에 레코딩된 하나 또는 그 이상의 비디오 신호의 편집 버전을 해결하기 위해서, 새로운 PBC 프로그램은, 새로운 순서로 초기 A/V 기록물로부터 부분을 연관시켜 얻어진 A/V 시퀀스를 정의하기 위해 발생된다. 그 부분은, 동일 기록물로부터 또는 다른 기록물로부터 일 수도 있다. PBC 프로그램을 재생하기 위해서, (하나 또는 그 이상의) 실시간 파일의 다양한 부분으로부터의 데이터는 디코더에 전달되어야 한다. 이것은, 각 실시간 파일에 의해 나타낸 스트림의 부분을 연관시켜서 얻어진 새로운 데이터 스트림을 의미한다. 도 5에서, 이것은, 파일 A로부터의 하나 및 파일 B로부터의 2개인 3 부분을 사용하는PBC 프로그램에 대해 나타낸 것이다.
도 5는 파일 A에서 연속 영역의 포인트 P1에서 시작하고, 파일 A에서 다음 시퀀스 영역의 포인트 P2까지 연속하는 그 편집된 버전을 나타낸 것이다. 그래서, 재생은, 파일 B에서 시퀀스 영역의 포인트 P3으로 점프하고 파일 B에서 그 이상의 시퀀스 영역의 포인트 P4까지 연속한다. 다음 재생은, 파일 B의 연속적인 시퀀스 영역에서 포인트 P3보다 앞의 포인트이거나, 파일 B의 연속적인 시퀀스 영역에서 그 포인트 P4보다 나중의 포인트이어도 되는 동일 파일 B에서 포인트 P5까지 점프한다. 파일 B에서 시퀀스 영역의 포인트 P5로부터, 재생은 포인트 P6까지 연속된다. 천이 P2-P3 및 P4-P5에 대한 브리지 시퀀스의 발생은, 명백함을 위해 도 5에서 생략되었다. 즉, 이들 브리지 시퀀스의 발생에 대한 이유와 수단이 고려될 것이다.
일반적으로 알 수 있듯이, 이하의 예들은, 필드 기반 편집이라기 보다는 프레임 기반 편집에 관한 것이다. 편집이 정확한 필드 레벨까지 수행될 수 있지만, MPEG은 쌍으로 필드를 취급하고, 하나의 프레임의 필드들간에 편집 포인트를 수용하는데 별도의 처리 노력이 필요할 것이다. 이러한 용이성에 대한 수요로 인해 구현시에 추가적인 복합성을 얻는 것은 생각하지 않는다. 당업자가, MPEG 컴플라이언스는 (상술한 것처럼) 필수적인 것이 아니고 여기서 설명된 기술은 논-MPEG 필드 기반 데이터에 적용하여도 되는 것을 알 수 있을 것이다.
2개의 형태의 편집은, 코드 내 영상과 인터리브된 코드간 영상을 갖는 스트림에서 고려할 수 있다. 먼저, 단순 편집은, 스트림이 비디오 프레임 경계에서 접합되는 것에서 행해질 수 있지만 조합 스트림은 부드럽게 재생되는 것을 확실하게할 수는 없다. 이 경우에 재생이 새로운 영상 그룹(GOP) 또는 다른 적합한 입구 포인트의 시작까지 점프한다고 생각하므로, 정확한 프레임 편집은 엄밀히 달성가능하지 않다. 또한, 제 1 시퀀스의 출구 포인트는, 제한되어도 된다. 사용자와 심지어 시스템은, 프레임 정밀도에 대한 출구 및 입구 포인트를 규정하여도 되지만, 재생 시스템은 가장 밀접한 근사법, 주어진 영상 코딩 형태의 제약 및 다른 가능 요소를 구현한다.
둘째로, 그 이상의 복합 편집은, 브리지 시퀀스가 2개의 스트림 사이의 모순을 조정하도록 생성되는 경우를 고려한다. 도 6은 도 5에 도시된 임의의 다른 편집 포인트를 포함하도록 발생된 브리지 시퀀스를 나타낸 것이다. 해칭 없이 도시된 브리지 시퀀스의 중심이, 편집 스트림이 버퍼링 및 데이터 의존 요구사항을 만족하도록 필요한 것처럼 재다중화되고 재코딩된 데이터의 시퀀스이다. 이는, 코딩 형태와 상관없이 편집 포인트의 자유로운 선택을 허락한다. 해칭되어 도시된 보조 A/V 데이터는, 디스크 서브시스템(6)으로부터 연속적인 재생을 하게 하는 할당 요구사항을 만족하기 위해서 편집 포인트 전후로부터 브리지 시퀀스내로 복제된다. 우리가 출원중인 상술한 WO-A-00/00981(PHB34262 WO)은, 이 기술들의 기본 원리를 설명한다. 그러나, 특히 MPEG 전송 스트림(TS)에 의거한 포맷과 그와 유사한 포맷을 갖는 기록물을 편집할 때, 효율적인 방법에 있어서 해결해야 할 일부 실제 문제가 남아 있다.
이 두 경우(단순 및 복합 편집)에 있어서, 최초 스트림은 디스크에서 변화되지 않는다고 생각한다. 브리지 시퀀스가 생성되는 복합 편집은, 디스크상에서 보통행해질 것이다. 단순 편집은, 2개의 스트림이 임의의 비디오 프레임 경계에서 테이프 상에 연관된 테이프 기반 시스템에서 구현되어도 된다. 이 단순 및 복합 형태의 상세한 편집 및 재생 과정을 이하에서 설명한다. 본 실시예에서, 스트림은 상기 언급된 종래기술에서 가정한 프로그램 스트림 포맷이라기 보다는 오히려 전송 스트림(TS)형 포맷에서 다중화된다고 가정한다.
전송 스트림 포맷
도 7은 MPEG-2 전송 스트림(TS) 포맷의 중요한 특징과 구조를 나타낸다. 도 1의 시스템에서, 데이터는, 직접 녹음되어 수신되고 디지털 인터페이스(1, 2)에서 전달된 것과 유사한 TS 기반 포맷으로 디스크(3)상에 저장된다. TS는, 도면에서 T-PKT라고 라벨이 붙여진 전송 패킷의 연속적인 스트림으로, 각각은 188바이트의 데이터를 포함하고, 도 7의 상부에 도시된 포맷을 갖는다. 구문, 시멘틱스 및 응용가능한 제약을 포함하는 MPEG-2 전송 스트림의 더 상세한 내용은, ITU-T 제안 H.262｜ISO/IEC 13818-1에 있다. MPEG-2 시스템에 대한 정보는, http://www.mpeg.org의 온라인상에서 이용 가능하다. 간략하게 말하면, 각 전송 패킷은, 헤더 부분과 페이로드 부분을 포함하고, 그 페이로드는 도면에서 DAT-0 내지 DAT-N 바이트로서 나타낸다. 헤더는, 다양한 플래그 뒤에 오는 판별 동기화 바이트 sync와 전송 오류 표시 TEI(transport error indicator), 페이로드 유니트 시작 표시 USI(unit start indicator), 전송 우선순위 표시 TPI(transport priority indicator), 패킷 식별 PID(packet identification), 전송 스크램블링 제어 필드 TSC(transportscrambling control), 적응 필드 제어 AFC(adaptation field control) 및 순회 카운터 CC(continuity counter)를 포함한 제어 필드에서 시작한다.
순회 카운터 CC는, 주어진 PID의 각 전송 스트림 패킷에 의해 증가하는 4비트 필드이다. CC는, 그것의 최대값 뒤에 0으로 순환한다. CC는 패킷의 적응 제어 필드가 패킷의 페이로드 없음을 나타낼 때 증가되지 않는다. 순회 카운터는, 프로그램 스트림 포맷이 아닌 전송 스트림의 특징이 있고, 이것은 장치가 오류가 나기 쉬운 채널에 있는 패킷의 손실을 검출하도록 설계되어 있다. 잃어버린 패킷 뒤에 오는 패킷들은, 일반적으로 새로운 헤더가 있는 새로운 동기화를 얻을 때까지 버려져야 한다. 이로 인해 TS 스트림을 편집하는데 더욱 어렵다. 그러나, 디코더는 편집함으로써 고의로 일어난 불연속들과 전송 오류에 의해 일어난 불연속 사이를 구별할 수 있어야 한다.
필드 AFC의 콘텐트에 의거하면, 페이로드 데이터에 달리 할당된 일부의 공간을 차지하는 적응 필드 AF가 존재하여도 된다. 예를 들면, 이 적응 필드 AF는, MPEG2의 ISO/IEC 13818에 정의된 것과 같은 불연속 표시 플래그를 포함해도 된다. '1'로 설정될 경우 이 플래그는 불연속 상태가 현재 전송 스트림 패킷에 대해 참(true)이라는 것을 나타낸다. 이 불연속 표시는, 2가지 형태의 불연속, 즉 시스템 타임-베이스 불연속과 순회 카운터 불연속을 표시하는데 사용된다. 미리 정의된 의미를 갖는 옵션 데이터 필드에 추가로, 적응 필드는, PES 패킷 끝과 TS 패킷 경계를 일치하도록 스터핑 바이트로 채워질 수 있다.
시스템 타임-베이스 불연속은, 프로그램 클록 기준 PCR(programme clockreference)(ISO/IEC 13818-2 2.4.4.9 섹션 참조)의 형태로 시스템 타임-베이스를 전달할 때처럼 설계된 PID의 전송 스트림 패킷에 있는 불연속 표시를 사용하여 나타낸다. 그 사양을 인용하면, 불연속 상태는 PCR_PID로서 나타낸 PID의 전송 스트림 패킷에 대해 참일 경우, 동일 PID를 갖는 전송 스트림 패킷에 있는 다음 PCR은, 관련 프로그램에 대한 새로운 시스템 타임 클록의 샘플을 나타낸다. 불연속 표시는, 시스템 타임-베이스 불연속이 일어날 때 패킷에 '1'로 설정된다. 또한, 불연속 표시 비트는, 새로운 시스템 타임-베이스 PCR을 포함한 패킷 앞에 동일 PCR_PID의 전송 스트림 패킷에 '1'로 설정되어도 된다. 이 경우, 불연속 표시가 '1'로 설정되었다면, 그것은 새로운 시스템 타임-베이스의 첫 번째 PCR을 포함한 전송 스트림 패킷까지 및 이 전송 스트림 패킷을 포함한 동일 PCR_PID를 갖는 모든 전송 스트림 패킷에서 계속하여 '1'로 설정된다.
불연속 표시에 의해 일단 플래그되면 시스템 타임-베이스에서의 불연속에 비하여, 유효 전송 스트림으로 기대되어, 디코더는 이들을 통해 연속적으로 동작한다. 불연속 표시에 의해 "주위에 알려진 것(known about)"인 신호로서 보내졌지만, 순회 카운터 값의 불연속으로, 일반적인 디코더는 새로운 시퀀스 헤더가 오디오/비디오 프레임 구조를 재동기화하여 그 디코딩 파라미터들을 확인하는 알 때까지 비유효로서 데이터를 취급한다.
또, MPEG 사양을 인용하면, 순회 카운터 불연속은, 임의의 전송 스트림 패킷의 불연속 표시의 사용에 의해 나타내어진다. 불연속 상태가 PCR_PID로서 나타내지 않은 PID의 임의의 전송 스트림 패킷에서 참일 경우, 그 패킷에서의 순회 카운터는동일한 PID를 갖는 이전의 전송 스트림 패킷에 대해 불연속적이어도 된다. 불연속 상태가 PCR_PID로서 나타내어진 PID의 전송 스트림 패킷에서 참일 경우, 순회 카운터는 시스템 타임-베이스 불연속이 일어나는 패킷에서 불연속적일 수도 있다. 순회 카운터 불연속 포인트는, 불연속 상태가 전송 스트림 패킷에서 참이고 동일 패킷에서 순회 카운터가 동일 PID의 이전 전송 스트림 패킷에 대해 불연속적일 경우 일어난다.
기본 스트림 데이터를 포함하는 것처럼 나타내어진 전송 패킷에서 순회 카운터 불연속 후에, 동일 PID의 전송 스트림 패킷에 있는 제 1 바이트의 기본 스트림 데이터는, 제 1 바이트의 기본 스트림 액세스 포인트이다. 오디오의 경우, 이러한 액세스 포인트는 새로운 오디오 프레임의 시작이다. 비디오의 경우, 제 1 바이트의 비디오 시퀀스 헤더, 또는 그렇지 않으면 비디오 시퀀스 헤더 뒤에 오는 시퀀스 엔드 코드는 액세스 포인트로서의 역할을 할 것이다. 순회 카운터 불연속 포인트가 생기고, PTS 또는 DTS가 생기는 PCR_PID로서 나타내지 않은 PID를 갖는 기본 스트림 데이터를 포함한 각 전송 스트림 패킷은, 연관 프로그램의 시스템 타임-베이스 불연속이 생긴 후 T-STD의 입력에 도달한다. 불연속 상태가 참일 경우, 동일 순회 카운터 값을 갖고 적응 필드 제어 값을 갖는 동일 PID의 2개의 연속적인 전송 스트림 패킷이 '01' 또는 '11'로 설정되면, 제 2 패킷은 폐기되어도 된다. 유효 전송 스트림은, 이러한 패킷의 폐기로 인해 PES 패킷 페이로드 데이터 또는 PSI 데이터의 손실을 일으킬 것이다.
DVB 디지털 방송 포맷의 예에서, TS 스트림 통신속도는 약 40(Mbits/s)이고,오디오 비쥬얼 프로그램에 대한 일반적인 통신속도가 10Mbits/s 미만이다. 따라서, 도 7에서 TS에 도시된 것처럼, 다양한 프로그램 PROG1, PROG3는, 단일 전송 스트림으로 다중화될 수 있다. 각 전송 패킷의 필드 PID는, 그 패킷에 관한 하나의 기본 스트림을 나타내고, 이들은 많은 다른 스트림을 갖는 전송 패킷의 유니트에 인터리브된다. 하나의 프로그램은, 예를 들면, 비디오 스트림(예에서 PID='055'), 오디오 스트림(PID='056') 및 텔레텍스트(teletext) 데이터 스트림(PID='057')으로 구성되어도 된다. PID 값과 프로그램 사이의 대응성과 각 PID에 의해 전달된 데이터 형태가 프로그램 사양 정보(PSI; Programme specific information) 테이블의 형태로 되어 있다. 전송 스트림 내에 주기적으로, 프로그램 연관 테이블(PAT)은, PID=0을 갖는 특정 전송 패킷의 스트림에서 전달된다. PAT는, 단일 프로그램에 관련하여 완전히 서로 다른 PID값을 열거하고, 각각(비디오, 오디오, 이와는 다른 언어 오디오, 등)의 내용을 설명하는 프로그램 맵핑 테이블 PAT를 스트림이 전송하는 PROG1, PROG3 등을 순차로 나타낸 것이다. 여기서는, 제어 목적을 위한 이들 테이블과 다른 데이터를 시스템 정보로 칭한다.
전송 스트림으로부터 주어진 프로그램(PROG1)을 재생 또는 레코딩하려면, 그 PID를 갖는 연속적인 전송 패킷의 페이로드 DAT-0 내지 DAT-N은, 스트림에 연관되고, 이 스트림은 MPEG-2 사양에 기재된 패킷화된 기본 스트림 패킷 PES-PKT를 전달한다. 각 PES 패킷은, 판별적 패킷 시작 코드 프리픽스 PSCP(Packet start code prefix)에서 시작한다. 다음으로, PES 패킷에서 헤더는, 기본 스트림의 형태(예: 비디오, 오디오, 패딩 스트림 또는 비밀 스트림)를 식별하는 스트림 식별자 SID이다. PES 패킷은, 특정 응용에서 규정되어 있지 않으면 고정 길이를 갖지 않고, PES 패킷 길이 필드 LEN은, PES 패킷에서의 바이트 수를 규정한다. 다양한 제어 및 플래그 필드 C&F(Control & Flag)는, 예를 들면 데이터 정렬 표시 DAI(data alignment indicator)와 헤더 길이 필드 HLEN을 포함하는 것을 따른다. 다양한 옵션 필드는, 현재의 PES 패킷에서의 시작이 존재하는 것으로 인해 C&F 필드에서 연관 플래그의 값에 의존하는 헤더 HDAT내에 존재한다(예를 들면, 프리젠테이션 타임 스탬프 PTS가 "프리젠테이션 단위" 영상, 오디오 프레임 등에서 시스템 클록을 참조하여 시간을 규정하는 것이 존재한다). 특정의 경우, 프리젠테이션 단위는, 그들의 프리젠테이션 순서와 다른 순서로 디코딩되고, 이 경우에 디코딩 타임 스탬프 DTS가 존재하여도 된다.
동일 SID를 갖는 연속적인 PES 패킷의 페이로드 PY-0 내지 PY-N은, 도 7의 ES에서 개략적으로 도시된 데이터의 연속적인 기본 스트림을 형성한다. 비디오 기본 스트림 ES-VIDEO의 경우, 다양한 영상 시퀀스 또는 클립 SEQ가 존재하고, 각각은 그 시작에서 시퀀스 헤더 SEQH(sequence header)를 포함한다. 양자화 매트릭스, 버퍼 사이즈 등을 포함한 디코더의 다양한 파라미터는, 시퀀스 헤더에 규정되어 있다. 따라서, 비디오 스트림의 정확한 재생은, 시퀀스 헤더의 위치에서 디코더를 시작시킴으로써 달성될 수 있다. 각 시퀀스에 대한 데이터내에 비디오 데이터의 하나 또는 그 이상의 "액세스 단위"이고, 영상(응용에 따르는 필드 또는 프레임)에 각각 대응한다. 각 영상은, 영상 시작 코드 PSC(picture start code)보다 앞서 있다. 영상 그룹(GOP)은, 특정 시퀀스 헤더 SEQH(particular sequence header)를 모두 뒤따르는 그룹 시작 코드 GSC(group start code) 보다 앞서도 된다.
잘 알려진 것처럼, MPEG-2의 영상과 다른 현대 디지털 포맷은, 시간적인 중복을 줄이기 위해서 서로에 대해 기준에 의해 인코딩된다. 움직임 보상은, 인접 영상 또는 영상들에 대한 이미 디코딩된 콘텐트로부터 하나의 영상의 콘텐트에 관한 평가를 제공한다. 그러므로, 영상 그룹 GOP은, 일반적으로 다른 영상에 대한 기준없이 코딩된 코드내 "I"프레임과, 선행하는 I 프레임에 의거한 움직임 벡터를 사용하여 코딩된 2개 또는 3개의 "P"(예측) 코딩 영상과, 시퀀스에서 그들 전후에 I 및/또는 P 프레임으로부터 예측에 의해 인코딩된 양방향 예측 "B" 영상을 포함할 것이다. B 영상에 대해 필요한 데이터 양은, I 영상에 대해 차례로 필요한 데이터 양 미만인 P 영상에 대해 필요한 데이터 양 미만이다. 한편, P 및 B 영상은 다른 영상을 참조하여서만 인코딩되므로, 그것은 주어진 시퀀스의 재생을 시작하는 실제 입구 포인트를 제공하는 I영상일 뿐이다. 더욱이, 주목할 것은, GOP 데이터, I 및 P 영상은, 대응 B 영상 이전에 인코딩되어 있어서, 정확한 프리젠테이션 순서를 달성하기 위해서 디코딩 후 재정리된다. 따라서, B 및 P 영상은, 프리젠테이션 타임 스탬프 PTS와 디코딩 타임 스탬프 DTS가 서로 다른 예이다. 하나의 영상 그룹 GOP의 일부를 도 7에서 비디오-ES 바로 아래에 도시되어 있다.
도 7의 끝에는 오디오 기본 스트림 ES-AUDIO의 프리젠테이션이 도시되어 있다. 이것은, 프레임 시작 코드를 갖는 단순한 데이터 프레임 FRM을 포함한다. 다양한 오디오 포맷은, 샘플비(32kHz, 48kHz 등)와 통신속도(예: 초당 32kbits/s, 가변적) 면에서 변화하는 것이 허락된다. 이들 내용 및 오디오 및 비디오 스트림의 다른 특성은 프로그램 사양 정보 PSI, PES 패킷 헤더 및 프레임 헤더에서 인코딩된다.
동일한 프리젠테이션 타임 스탬프 PTS를 갖는 오디오 프레임과 비디오 영상은, 디코더의 출력단에서 동시에 나타내는 것들이다. 한편, 동일한 PTS 값을 갖는 오디오 및 비디오 액세스 단위가 1초간 떨어진 전송 스트림 TS에 도달할 수 있도록 다른 기본 스트림으로부터 데이터 패킷의 스케쥴링에서 매우 자유롭다.
시스템 타겟 디코더
실제 디코더의 버퍼링 및 다른 국면이 그 제시된 오디오-비쥬얼 프로그램에서의 중단(break) 없이 각 스트림 형태를 디코딩할 수 있도록 하기 위해서, MPEG-2 표준은, 전송 스트림 "시스템 타겟 디코더(system target decoder)"(T-STD) 모델과 프로그램 스트림 시스템 타겟 디코더(P-STD) 모델을 규정한다. 보다 넓게 말하면, 각 시스템 타겟 디코더는, TS 또는 PS 포맷의 다른 기본 스트림을 역다중화하는 수단을 갖고, 오디오, 비디오 및 데이터 시스템 제어 형태 각각에 대한 디코더를 갖고, 인커밍 스트림 사이의 버퍼와 데이터 채널로부터의 도착과 디코딩 및 프리젠테이션의 실제 시간과의 사이의 각 기본 스트림의 데이터를 유지하는 디코더를 갖는 가정 실제 디코더의 모델이다.
T-STD 및 P-STD는, MPEG-2 사양에 아주 상세히 설명된 것처럼 일반적인 형태로 두 개가 유사하다. 그러나, T-STD와 P-STD간의 차이는, 일반적으로 전송 스트림이 PES 패킷의 레벨에서 적어도 재 스케쥴링을 하지 않고 프로그램 스트림에 직접맵핑될 수 없고, PS에서 TS 포맷으로의 대화에 대해서도 마찬가지라는 것을 의미한다. 일 예로서, TS 포맷의 오디오 디코더는, P-STD에서 보다 작은 버퍼를 갖는다. 다른 예로서, T-STD에 있는 각 메인 버퍼는, 전송 스트림 자체에 있는 좀 "버스트한(bursty)" 데이터를 부드럽게 하도록 동작하는 전송 버퍼 보다 앞서 있다. 주어진 스트림에 대한 데이터는, 초당 40메가비트의 피크 속도(peak rate)에서 일부 전송 패킷으로 구성된 버스트에 도달하는 동안, 전체 전송 스트림을 고려하여 다중화할 때 그러한 스트림의 평균 속도(average rate)가 꽤 낮다. "리크 속도(leak rate)"는, 메인 버퍼로 전달될 데이터라고 가정하면, 2Mbit/s(오디오) 및 18Mbit/s(비디오)의 비율에 대한 인커밍 데이터를 조절하도록 전송 버퍼를 위해 정의된다.
단순 편집
단순 편집의 경우, 스트림이 부드럽게 재생되는 것을 확실히 하기 위해 편집하는 동안 아무것도 하지 않는다. 특히, 브리지 시퀀스는 발생되어 저장되지 않는다. 따라서, 본 장치는 재생 시간의 문제점을 다루어야 한다. 일반적으로, 완벽한 재생을 보장하는 것이 가능하지 않지만 제안된 방법은 가능한 많이 사용자에 대한 외란을 감소시키는데 목적이 있다.
임의의 프레임 경계에서 2개의 MPEG 스트림을 결합하여 일어날 수도 있는 잠재적인 문제점들은 다음과 같다.
1. 비디오가 디코딩이 가능하지 않을 수도 있음
상술한 것처럼, MPEG은 다른 비디오 프레임을 참조하여 대부분의 비디오 프레임을 부호화한다. 기준 프레임에 대한 데이터를 잃어버릴 경우, 그 종속 프레임은 디코딩 가능하지 않을 것이다. 하나의 프레임이 부정확한 참조 프레임을 사용하여 디코딩될 경우, 그 결과는 비쥬얼 결과물을 방해할 것이다. 또한, MPEG TS에서 비디오 프레임의 재정리 때문에, 디스플레이 되지 않는 그 편집된 스트림에 포함된 비디오 프레임이 있을 가능성이 있다.
특별한 경우는, 입구 및 출구 프레임이 모두 디코딩 가능하도록 선택되는 경우이다. 이것은, 사용자가 출구 및 입구 프레임의 자유로운 선택을 가질 때 랜덤하게 일어나지만, 일반적으로 이 경우는 아니다. 다른 실시예에서, 사용자는 출구 및 입구 포인트로서 특정 프레임만을 선택하도록 제한되어도 된다.
2. 부분 오디오 프레임
오디오 및 비디오 프레임은 188바이트의 전송 스트림 패킷으로 분할되고, 이들 전송 스트림 패킷은 전송 스트림 다중화에 인터리브된다. 그 다중화내에서 오디오 및 비디오 프레임 경계간의 정렬이 없다. 그러므로, 비디오 프레임 경계에서 2개의 스트림을 결합하면, 편집 포인트 주위의 부분 오디오 프레임이 생길 것이다. 디코더에 의해 이들 부분 오디오 프레임에 대한 시도로 오디오 결과물이 생길 것이다.
3. 버퍼 문제
MPEG 사양의 주요한 특징은, 버퍼 용량의 파라미터와 주변 범위(상기 시스템 타겟 디코더 참조)에서 디코더의 동작을 규정하는데 있다. 2개의 MPEG-컴플라이언트 스트림의 부분을 임의의 포인트에서 연관시키므로써 얻어진 스트림은, 일반적으로 MPEG 버퍼 모델을 따르지 않을 것이다. 재생시에, 이로 인해 버퍼 오버- 또는 언더- 플로우를 통해 디코더가 데이터를 잃어버리게 되고, 오디오 및/또는 비디오 결과물로 될 수도 있다.
4. 오디오 스큐
비디오 프레임에 의해 나타내어진 오디오 프레임은, 다중화에서 정렬되지 않는다. 일반적으로, 비디오에 대응한 오디오는 다중화에서 비디오보다 나중에 온다. 그러나, 일반적으로, 오디오는, 다중화에서 대응 비디오 전 1초 또는 대응 비디오 후 1초까지 일 수 있다.
5. 타임-베이스 불연속
PCR/PTS/DTS 타임스탬프를 위해 사용된 타임-베이스는, 편집 포인트에서 불연속적이다. 2개의 타임-베이스간의 정확한 오프셋은, 제 1 시퀀스 플러스 하나의 프레임 주기의 마지막 프레임의 PTS(i)와 제 2 시퀀스의 첫 번째 프레임의 PTS(ii) 사이의 차이에 의해 주어진다.
6. 순회 카운터 불연속
TS 패킷에서의 순회 카운터는, 편집 포인트에서 불연속적이다. 이로 인해 디코더가 새로운 시퀀스 헤더가 발견될 때까지 각 재생을 억제한다.
설명하려고 하는 방법 및 장치는, 이들 문제점을 해결하는데 있다.
단순 편집의 생성
단순 편집의 경우, 편집시에 스트림이 변화하지 않지만 일부 보조 데이터("메터 데이터")는 그 편집된 레코딩에 대한 재생 리스트의 일부로서 저장되어야 한다. 특히, 포인터는, 디스플레이 하려고 하는 마지막 프레임이 끝나는 제 1 스트림에서의 포인트(i)와 디스플레이 하려고 하는 첫 번째 프레임이 시작하는 제 2 스트림에서의 포인트(ii)를 식별하는 것이 저장된다. 예를 들면, 도 5의 예에서 첫 번째 편집의 경우, 이들 포인터는 포인트 P2 및 P3 각각을 나타낸다. 이들 포인터는 데이터의 논리적 어드레스를 직접 가리키거나 시간 값을 참조하여 저장될 수 있다. 후자의 경우, 시간 포인터는 특성 포인트 정보 즉 CPI(characteristic point information) 의 룩업 테이블을 참조하여 어드레스로 해석될 수 있다. CPI는, 비트 스트림내에 각 영상 시퀀스 시작 위치를 식별하는(말하는) 적어도 그 저장된 프로그램의 섹션에 대한 인덱스의 형태이다.
또한, 제 1 스트림의 마지막 프레임의 PTS 마이너스 제 2 스트림의 첫 번째 프레임의 PTS에 의해 주어진 2개의 타임-베이스 사이의 프리젠테이션 타임에서의 오프셋(iii)이 저장된다. 주목할 것은, 그 오프셋이 다음 섹션에서 설명된 단계 1내지 4에서 제안된 조절을 한 후 저장되는 경우 재생이 더 단순해질 것이라는 것이다. 그러나, 또한, 오프셋이 조정 없이 저장되는 실시예를 갖는 것이 가능하고, 그 조절은 재생시에 필요하게 된다. 이것은, 재생시에 데이터를 판독 및 구문 해석을 요구한다.
디지털 인터페이스를 통한 단순 편집의 재생
내장 디코더를 통한 편집 스트림을 재생하려면, 어느 정도의 복잡한 핸들이 원리상으로 가능하다. 그러나, 어떠한 방해 결과물 없이 표준 STB에 관한 단순 편집의 재생을 가능하게 하기 위해서, 다음 과정을 도 1의 장치에 의해 구현한다. 이는, 재생시에 수행하려고 하는 단계를 포함하고, 편집을 정의하는 보조 데이터를 생성할 때 수행된 단계를 포함한다.
1. 유일한 디코딩 가능한 오디오/비디오의 STB로의 송신.
편집을 위한 메터-데이터의 포인터는, 제 1 스트림은 (프리젠테이션 순서에 반대인 것처럼, 비트 스트림에서) P- 또는 I-프레임 전에 항상 끝날 것이고, 제 2 스트림은 I-프레임에서 시작할 것이다. 완전한 오디오 프레임만 디코더에 전송된다. 오디오 프리젠테이션에서의 갭은, 편집 포인트에 남아 있다. 원하지 않는 오디오 패킷은, 각 패킷의 PID를 NULL_패킷을 나타낸 0x1FFF로 변경하므로써 그 스트림으로부터 제거된다. 이로 인해, 패킷이 순회 카운터 불연속 직전 또는 직후에만 삭제되기 때문에 순회 카운터에 의한 문제점이 일어나지 않을 것이다.
2. 버퍼 오버플로우가 없게 함
버퍼 오버플로우 없음을 확보하기 위해서, 편집 포인트에서의 버퍼 상태를 계산한다. 다음 알고리즘이 사용되고, 다른 것은 다음과 것을 가능하게 한다.
(a) 편집 포인트에서 최초 제 2 스트림에서의 버퍼 충만 Dbuff을 계산한다. 이것은 편집 포인트보다 앞서 있지만 그 편집 포인트의 시간 후 DTS 시간을 갖는 모든 비디오 프레임의 크기를 더하여서 쉽게 계산될 수 있다.
(b) 편집 포인트에서의 제 1 스트림의 버퍼 충만 Sbuff을 계산한다. 이것은, 포인트 1이 유사한 방법으로 계산될 수 있다.
(c) Sbuff>Dbuff이면 프레임 주기를 스트림 사이의 오프셋에 더하고, Sbuff의 값을 이전보다 1 프레임 주기 나중에 버퍼 충만까지 조절한다.
(d) Sbuff<Dbuff일 때까지 포인트 3를 반복한다.
이것은 버퍼 오버플로우가 없다는 것을 확실하게 할 것이다. 상기 단계 (c) 및 (d)에 대한 다른 방법은, 단계 (c)에서 오프셋을 일정하게 유지하지만 제 1 스트림의 편집 포인트를 이동하여 마지막 프레임을 배제한다. 실제로, 한 프레임 이상은, 제 1 스트림이 항상 P/I프레임 전에 끝나는 것을 확실히 하여 제거될 필요가 있다. 이 두 경우에, 제 1 프레임으로부터 마지막 프레임은, 하나의 프레임 주기 이상 동안 디스플레이 상에서 정지(frozen)되는 재생시의 결과가 될 것이다. 이 두 방법은, 각각이 사용자 만족을 위해 갖는 역효과를 완화할 수도 있는 조합하여 사용될 수 있다.
GOP 경계에서 편집이 되었을 경우, 대부분의 경우 제 1 스트림의 끝과 제 2 스트림의 시작에서 버퍼 충만은 유사할 것이다. 그러므로, GOP 경계에서만 편집하도록 선택하므로써, 일반적으로 스트림간의 오프셋만큼 증가되는 양을 감소시킬 수 있으므로, 동결 프레임이 편집 시퀀스의 재생시에 나타나는 것을 감소시킬 수 있다. 본 장치의 설계자는, 이러한 이유 때문에 사용자에 의해 GOP 경계만을 선택하도록 결정하여도 된다. 일반적으로, 그러나, 사용자는 어느 것이 최선의 선택인지에 관하여 장치로부터 충고를 갖거나 충고 없이 편집 포인트의 자유로운 선택을 가져도 된다.
3. 버퍼 언더플로우가 없게 함
2개의 스트림간의 오프셋은, 초기에 PTS값으로부터 게산되어 상술한 것처럼 조정된다. 제 2 스트림이 로딩을 시작하는 시간은 제 1 타임-베이스의 면에서, 오프셋, 제 2 스트림의 첫 번째 PCR 타임스탬프 및 다중화 속도(multiplex rate)를 사용하여 계산된다. 로딩하기 시작하는 제 2 스트림에 대해 수반된 시간이 제 1 스트림의 끝 이전에 있을 경우, 이것은 발생할 수 없기 때문에 잠재적인 문제점이다. 그 결과는, 제 2 스트림이 다중화에 수반된 시간보다 뒤에 로딩하기 시작할 것이고, 이로 인해 버퍼 언더플로우(하나의 프레임에 대한 데이터는 그 디코드 시간에서 완전히 로딩되지 않는 곳)가 생길 수도 있다. 이 문제점을 해결하려면, 2개의 스트림간의 오프셋은, 편집용 보조 데이터에서 그것을 레코딩하기 전에 2개의 스트림의 로딩 시간에 중첩되지 않을 때까지 다중 프레임 주기에 의해 간단히 증가된다.
4. 타임스탬프 PCR/PTS/DTS 갱신
재생시에, 본 장치는, 디코더는 연속적인 스트림을 참조하도록 편집 포인트 후에 모든 타임스탬프를 갱신한다. 타임스탬프를 갱신하는데 사용할 오프셋은, 상기 여러 가지의 단계에서 필요한 경우 조정된, 편집 포인트 후의 첫 번째 프레임과 그 편집 포인트 이전의 마지막 프레임의 PTS간의 차이에 의해 주어진다. 모든 프레임이 디스플레이 되지 않기 때문에, 오디오 및 비디오용 프리젠테이션 시간의 갭이 있을 것이다. 디코더는, 비디오를 동결하고 오디오를 뮤트시켜야 한다(MPEG-2 규격 적합 사양, ISO/IEC 13818-4:1995, 2.3.3.1.1 섹션 참조). 타임스탬프가 갱신되어 있지 않으면, 디코더는 오디오 및 비디오가 연속적이다는 것을 가정할 것이다. 이로 인해 버퍼 오버플로우와 데이터 손실이 생길 수도 있다.
5. 순회 카운터 불연속에서 불연속 표시의 세트
비디오 시퀀스 헤더는, 보통 GOP의 시작에서, 상기 포인트 1로부터 보내지고, 편집 후 비디오 기본 스트림의 첫 번째 바이트는, 비디오 시퀀스 헤더이다. 또한, 첫 번째 오디오 패킷은, 오디오 프레임의 시작을 포함해야 한다. 재생시에, 본 장치는, 이들 패킷에 있는 불연속 표시 비트를 설정한다.
시퀀스 헤더가 GOP의 시작에 존재할 필요는 없다. 그러나, 시퀀스 헤더가 없을 경우 디코더가 스트림을 디코딩할 필요가 있는 양자화 매트릭스를 알지 못하기 때문에 비디오 스트림을 디코딩하는 문제점이 있을 수 있다. 방송 스트림에서, 채널을 변경할 때 유사한 문제점이 일어나고, 이러한 이유 때문에, 방송장치는 일반적으로 스트림의 작은 시간 간격으로 시퀀스 헤더를 포함한다. 그러므로, 제 2 스트림에서 편집하려는 포인트를 선택하는 대신에, 다음 편리한 I-프레임을 선택할 때, 본 장치는 시퀀스 헤더보다 앞서 있는 다음 I-프레임을 선택할 수 있다.
그러나, 필드 시퀀스(톱-보텀(top-bottom))는, 편집 포인트를 가로지르게 보보존될 필요가 없고, 필드 시퀀스가 보존되지 않은 경우 2개의 스트림간의 오프셋은 홀수의 필드 주기이어야 한다. 이것은, 3:2 풀-다운의 경우를 포함한다. (예 : NTSC 및 PAL로부터의) 해상도 변경 및 혼합 프레임 속도는 결과물에 방해가 되어서 피해야 한다.
단순 편집으로 정확한 프레임을 생성하지만, 그들은 디지털 인터페이스상에서 정확한 GOP를 재생한다. 도 8은 실시예를 나타낸다. 편집으로 정확한 프레임이 생성된다는 사실은, 예를 들면 내장형 디코더를 사용하여 또 다른 장치에 의해 재생시에 더 이상 복잡한 처리 가능성이 남아 있다. 표준 인터페이스와 디코더를 통해 재생을 위한 치환(over-riding) 요구사항은, 구현을 허락하는 더 좋은 성능을 막는 것 없이 만족된다.
상기 고려한 내용에 의거하여 볼 때, 다음 동작들을 본 장치에 의해서 수행하여서 디지털 인터페이스(1)(도 1)상에서 단순 편집을 재생한다.
A1.제 1 스트림은, 이전 GOP의 끝인 포인트 X까지 재생된다. 여기서 고려된 레코딩 시스템에서, 그러한 포인트는, 디스크의 재생 리스트 데이터에 자동으로 저장된 특성 포인트 정보 CPI로부터 알 수 있다. 본 출원의 우선일에 공개되지 않은 출원중인 출원 PCT/EP99/08252(PHN 17161)는, CPI에 대해 가능한 응용과 포맷이 기재되어 있다. 원리상으로, 동일 정보는, 충분한 스트림을 시퀀스 헤더가 발견될 때까지 구문해석을 함으로써 발견될 수 있다.
A2.포인트 X까지의 전송 패킷들은, 그들의 타임스탬프에 따라 전송된다. 제 1 스트림의 끝에는, 불연속 정보 테이블(DIT; Discontinuity Information Table)이 삽입된다. DIT는 MPEG 그 자체라기보다는 DVB 표준 시스템 정보의 일부이다. 기본적으로, DIT는 불연속이 부분 전송 스트림에서 발견되는 곳을 규정한다. 더욱 상세한 것은 ETSI 문헌 EN 300 468 "디지털 비디오 방송(DVB; Digital Video Broadcasting), 즉 DVB 스트림의 서비스 정보(SI) 사양에서 알 수 있다.
A3.제 1 스트림의 끝에는, 전송 패킷이 제 2 스트림용 프로그램 할당 테이블(PAT; Program Allocation Table)과 함께 삽입되고, 전송 패킷이 제 2 스트림용 PMT와 함께 삽입된다. 또한, 이 패킷들은, 디코더가 그들을 잘못된 것으로서 폐기하는 것을 막기 위해서 적응 필드 AF내에 불연속 표시를 세트시킨다.
A4.포인트 X까지 제 1 스트림의 끝을 구문 해석함으로써, 마지막 영상의 DTS와포인트 X에 있는 STC(PCR)를 결정할 수 있다. 포인트 X와 그 삽입된 PAT/PMT의 전송 패킷 뒤에, STC 값이 마지막 프레임의 DTS보다 클 때까지 패킷 전송을 중단할 수 있다. 또한, (지연을 위해 허락된 최대값) 1초를 지연할 수 있다. 그러나, 그 저장된 오프셋 정보를 사용하여 본 장치는, 새로운 프레임의 프리젠테이션 이전의 갭을 최소화할 수 있다. 특히, 입구 포인트로부터 앞으로 제 2 스트림을 살펴보면, 재생장치는, 새로운 타임-베이스하에서의 PCR값을 발견할 것이다. 그 저장된 오프셋은 제 1 스트림 동안 STC 표시(running)에 추가되어, 새로운 타임-베이스면에서 새로운 시간 값을 얻을 수 있다. 이것이 제 2 시퀀스의 입구 포인트에서 인코딩된 PCR과 일치할 때, 패킷 전송을 계속할 수 있다. 주목할 것은, 모든 입구 포인트가 바로 근처에서 편리하게 인코딩된 PCR을 갖지 않는다는 것이다. 그러나, 본 장치가 편집 포인트를 앞 또는 뒤로 판독하여, (새로운 타임-베이스하에서) PCR 코드간의 원하는 STC를 추측하거나 다음 PCR이 도착하기까지 단순히 대기하는 것이 가능하다. 적어도 0.04초마다 반복하는 권고에 의하면 하나의 PCR과 다음 PCR사이에서 허락된 최대 0.1초의 갭이 있다. 따라서, 새로운 시간 값은 순간적으로 이용 가능하지 않아도, 다르게 제안된 "안전한" 1초 지연보다 안전하게 더 빨리 이송 패킷을 재개하는 것이 통상 더 가능할 것이다.
A5.포인트 X까지 스트림의 구문해석시에, 마지막 비디오 프레임이 시작할 때를 아는 것은 쉽다. 마지막 비디오 프레임에 의해 다중화된 데이터의 구문해석시에, 일단 새로운 오디오 프레임의 시작이 발견되면, 이 오디오 패킷과 동일 PID를 갖는모든 연속적인 오디오 패킷들이 그들의 PID를 0x1FFF(널 패킷)으로 변경시킬 것이다. 이는 부분 오디오 프레임이 디코더로 보내질 경우를 막기 위함이다. 이는 모든 오디오 PID에 대해 수행되어야 한다. 오디오 프레임이 전송 패킷과 정렬되지 않기 때문에, 마지막 오디오 패킷의 일부를 채워 다음 오디오 프레임의 시작을 제거할 필요가 있을 수도 있다. PES 스터핑 패킷을 추가 또는 적응 필드를 추가하여서 스터핑을 할 수 있다. 이 적응 필드로 인해 임의의 원하는 데이터 바이트의 수가 MPEG 사양에 기재된 것처럼 PES 패킷에 추가된다. 이 데이터는 스터핑 목적에 무의미할 수 있다.
A6.제 2 스트림은 포인트 Y에서 재생하기 시작하고, 이 포인트는 (재생 리스트와 함께 저장된 CPI로부터 발견된) 인 포인트 뒤의 GOP의 시작이다. 제 2 스트림은 상기 단계 A4에 기재된 지연 후와, 전송 패킷이 대응 오프셋과 함께 그 전송 패킷들의 도착 타임스탬프에 따라 전송된 후 재생하기 시작해야 한다.
A7.각 기본 스트림은, 그 자신의 PID를 갖는다. 비디오 PID의 경우, 1로 세트된 불연속 표시를 갖는 전송 패킷과 스트림_id 0xBE(패딩 스트림)을 갖는 PES 패킷이 1로 세트된 순회 카운터와 함께 제 1 비디오 패킷 이하에 삽입된다.
A8.제 1 비디오 PTS 이전에 PTS를 갖는 오디오("선행 오디오")가 폐기된다.
A9.각 오디오 PID의 경우, 모든 패킷은, 다음 오디오 프레임의 시작까지 삭제되어야 한다. 나머지 첫 번째 오디오 전송 패킷이 적응 필드를 갖을 경우 불연속 표시는 1로 세트되어야 한다. 또한, 첫 번째 오디오 패킷을 채우고 이전 오디오 프레임의 끝을 제거할 필요가 있다.
A10.전용 PCR PID가 있을 경우 불연속 표시는 PCR를 갖는 그 첫 번째 패킷에 세트되어야 한다. 또한, PCR PID가 오디오 또는 비디오와 공유될 경우, 일반적으로 이 표시가 적응 필드내에 있기 때문에 그 불연속 표시를 세트하는데 불편하다. 적응 필드를 삽입하는 것은, 재패킷화하고 나머지 스트림을 리타임(re-time)하는 것을 요구하는 패킷의 페이로드를 변경한다. 특히, 이것은 바로 그 표시가 세트되어 있으면 PCR까지 모든 패킷에 세트되어야 하기 때문이다. 이것을 행하지 않을 경우 STB 동작은 MPEG 사양에 기재되어 있지 않다.
심리스 재생용 복합 편집
복합 편집-생성
아주 복합적인 편집일 경우에, 브리지 시퀀스는 도 6을 참조하여 상기 설명된 것과 같이 생성된다. 그러나, 여기서 설명된 신규한 방법 및 장치는 다음 추가 제약을 첨가한다:
1.오디오 프리젠테이션에 작은 갭(< 1프레임 주기)이 있어야 하고 오버랩이 없어야 한다. 이는, 디지털 인터페이스상에서 오디오 스트림이 전방향일 때 표준 디코더를 혼란시키는 것을 막는데 있다. 이와 대조하여, 0과 1프레임 사이의 포지티브 오버랩이 제공되는 것이 WO-A-00/00981(PHB 34262)에 제안되어 있다. 두 방법은 장점을 갖는다. 그 오버랩의 하나의 장점은, 내장형 디코더가, 원할 경우 예를 들면 하나의 스트림에서 다른 스트림까지 크로스 페이드(cross-fade)에 의해 표준 디코더보다 더 복잡하게 오디오 편집을 취급할 수 있다는 것이다. 그러나, 본 장치는 디지털 인터페이스상에서 표준 디코더(STB)에 대해 재생할 때 하나 또는 다른 오버랩의 일부를 억제해야 한다.
2.2개의 다른 경우는 오디오 핸들링에 적용한다. 첫 번째 경우, 오디오는, 제 1 스트림으로부터의 일부 오디오가 제 2 스트림의 비디오에 의해 다중화되는 것을 의미하는 MPEG-2 버퍼 제약을 만족하도록 재다중화된다. 편집 포인트 뒤에 오는 제 1 스트림으로부터 오디오 프레임의 PTS/DTS 값은 제 2 스트림의 타임-베이스를 참조하기 위해서 적절한 오프셋에 의해 변경되어야 한다. 전송 스트림 시스템 타겟 디코더 모델(T-STD)의 오디오 버퍼 모델은, 프로그램 스트림용 오디오 버퍼 모델(P-STD)와 다르다. 브리지 생성시에, 그 재다중화된 스트림이 T-STD를 만족하게 하여야 한다.
두 번째의 경우, 제 1 및 제 2 데이터 스트림 사이에 갑작스러운 중단이 유지되면서 혼합하지 않는다. 디지털 인터페이스상에서 그러한 편집 시퀀스의 재생시에, 일부 오디오는, 폐기되어서, 이후 상세히 설명된 것처럼, STB에서의 버퍼 문제를 해결한다.
3.브리지를 생성할 경우, 초기에 순회 카운터 CC는 선행하는 스트림과 일관되게 하여야 한다.
4.브리지 시퀀스의 끝에 있는 순회 카운터(CC)에 관련하여, 이는 잘못하여 폐기되는 편집 스트림을 어떻게 해서든지 막아야 한다. 주목할 것은, 브리지 시퀀스의 CC 값은, 브리지 시퀀스의 합성시에 자유롭게 세트될 수 있지만, 브리지의 양측에 있는 그 저장된 시퀀스의 CC값은 고정된 것으로서 간주된다.
제 1 실시예에서, 각 스트림의 순회 카운터는, 브리지 시퀀스 동안 끊임없이 증가하도록 설정되고, 순회가 특히 편집 포인트에 걸쳐서 제공된다. 브리지 시퀀스의 각 스트림에 있는 패킷의 수는, 편집 스트림의 일부 포인트에서 순회 카운트에 있는 불연속을 막는데 요구된 수를 우연에 의해서만 정확할 것이다.
따라서, 브리지 시퀀스의 끝에는, 순회 카운터가, 빈(Empty) PES 패킷(PES 헤더이지만 데이터가 없음)을 삽입하여서 나머지 스트림과 일관되게 한다. 재생장치가 제 2 스트림 뒤로 점프하는 포인트는 오디오 및 비디오용 PES 패킷의 시작이라고 보장되지 않고, 그것은 페이로드와 패킷 구조를 망가뜨려 "실제"PES 패킷의 중간에 패딩 패킷을 삽입할 것이다. 그러므로, 각 기본 스트림의 CC 패딩은 브리지시퀀스의 끝 이전의 적합한 포인트에서 행해지므로, 새로운 패킷은 오디오 및 비디오용 새로운 PES 헤더 이전에 삽입된다. 브리지에서 마지막 패킷 수를 고려하면, 브리지 시퀀스에 있는 최종 카운터 값은 뒤따르는 스트림과 일관되게 할 수 있다. 이 문단에서, 할당 규칙을 만족하도록 단순히 복제된 패킷들을 제외한 브리지 시퀀스의 "코어(Core)"만을 고려한다면 충분하다.
주목할 것은, MPEG은 전송 스트림의 패딩용 널 패킷을 규정하고 있다는 것이다. 그러나, 이들은, 브리지 시퀀스내에서 CC 패딩 목적용으로 사용되지 않는데, 그 이유는 그들이 디코더에서 순회 카운팅 기능에 의해 무시되기 때문이다. 널 패킷은, 재다중화 프로세스에 의해 삽입 또는 삭제되어도 되므로, 디코더로의 널 패킷의 페이로드 전달을 가정할 수 없다. 발명자는, PES 패킷이 각 패딩 패킷에 포함되면 CC 패딩을 달성할 수 있다는 것을 알았다. MPEG 디코더는, 페이로드 없이 패킷용 순회 카운터를 증가시키지 않을 것이다. 그러므로, CC 패딩 목적을 위해, 본 장치는, 완전하지만 그 내부가 빈 PES 패킷을 갖는 진짜 전송 패킷을 사용한다.
서로 다른 포맷은 그러한 빈 패킷들에 대해 가능하다. 여기 첨부물 A에는 바람직한 실시예가 표준 MPEG 구문을 사용하여 설명되어 있다. 비록 MPEG이 오디오/비디오 ES패킷 헤더에서 스터핑을 허락하지만, 이 옵션은 적합하지 않은데 그 이유는 최대 32 스터핑 바이트가 허락된다. 첨부물 A의 예에서, 스터핑은 실제 페이로드(도 7의 SID와 ISO/IEC 13818-2 2.4.3.7섹션 참조)에 사용되지 않는 보조 기본 스트림(stream_id=padding_stream ID 0xBE)을 사용하여 수행된다. 첨부물 B는, 능동 오디오 또는 비디오의 적응 필드에서 스터핑을 실행한 다른 내용을 설명한다.첨부물 C는, 전용 패딩 스트림의 적응 필드에서 스터핑에 의한 또 다른 내용을 설명한다.
복합 편집- 예시적인 예
도 9는 상술한 단계들의 결과로서 본 실시예에서 브리지 시퀀스를 변형한 것을 나타낸다. 할당 규칙에 따르기 위해 복제된 데이터(도 6에서 해칭됨)는, 간략화를 위해 생략된다. 상술한 것처럼, 각 기본 스트림(PID 마다)은 별도의 처리가 요구된다. 즉, 오디오 스트림용 TS 패킷은, 비디오용 패킷 뒤에 파선으로 도시되어 있다. 즉, 본 프로세스의 중요한 특징을 설명하도록 약간만 도시되어 있지만, 실제 브리지 시퀀스는, 일반적으로 다수의 188 바이트의 패킷을 포함할 것이다. 또한, 비디오 대 오디오 패킷의 비율은, 일반적으로 다이어그램에 의해 제안된 것보다 훨씬 낮은 실제로 약 12:1이다.
설명상, 비디오 스트림에서, 브리지 시퀀스 끝 근처의 패킷은, 본 장치가 제 2 스트림으로의 입구 포인트 SEQ2 앞에 마지막 PES 헤더를 발견하는 도면에서 이중윤곽선으로 그려진 곳이다. 4비트의 CC값은, 주어진 PID에서 보내진 각 패킷에 의해 하나씩 증가하는 각 패킷에서 16진수('0' 내지 '9', 'A' 내지 'F')로 나타낸다. 강조 패킷은, 편집 프로세스에 의해 비디오 스트림에 삽입된 빈 패킷들이다. 브리지 시퀀스의 다른 패킷은 레코딩 및/또는 재다중화된다. 그들의 CC값은 강조되게 표시되어 있다. SEQ2에서 첫 번째 패킷은, 비디오 시퀀스 헤더가 유효 입구 포인트를 제 2 스트림내로 제공하는 것을 나타내기 위해 삼중 윤곽선으로 도시되어 있다.
전방으로 향하는 제 1 스트림으로부터 순회 카운터 값의 시퀀스 뒤에, 우리는, (브리지 시퀀스의 레코딩된 부분으로 점프할 목적으로) 제 1 스트림 SEQ1 내의 비디오 ES는 CC=5인 패킷에서 끝난다는 것을 알 것이다. 따라서, 브리지내의 비디오 ES 데이터의 PW 1 패킷은, 브리지 시퀀스의 구성시에 6으로 세트된 CC를 가져서, 제 1 스트림 SEQ1으로부터의 출구 포인트를 거쳐 순회를 제공하고, 그 포인트로부터 편집 포인트(도시되지 않음)를 통해 그리고 브리지 시퀀스의 끝쪽으로 CC의 값이 7, 8 등으로 연속한다.
일부 포인트에서, 그 편집 포인트와 연관된 새로운 PMT, PAT 및 PCR 값들을 저장하는데 필요하다. 이 실시예에서, 강조되어 표시된 브리지의 제 1 패킷은, PAT, PMT 및 다른 코드들을 전달하기 위해 삽입된 PID=0인 패킷이다. 이들은, 편집 포인트 뒤에 시퀀스를 위한 예비적인 것을 나타내는 "다음(next)"이라 말하는 현재_다음_표시(current_next_indicator) 필드와 함께 보내진다. PID=0인 스트림의 CC값 시퀀스는, 비디오 및 오디오 스트림용 시퀀스와 상관없다. 실시예를 위해서, PAT/PMT를 갖는 삽입된 패킷은, 제 1 스트림 SEQ1에서 PID=0인 마지막 TS 패킷이 CC=8을 가졌다는 것에 의거하여 CC=9로 도시되어 있다.
주요 실시예에서처럼 비디오 ES로 돌아가면, 디스크에 저장된 것처럼 제 2 스트림 SEQ2의 제 1 패킷은, CC=3을 갖고, 이는 변하지 않는다. 제 1 스트림 SEQ1의 출구 포인트로부터 순회를 갖는 브리지 시퀀스의 코어를 재코딩 및 재다중화 후에, 알 수 있는 것은, 그 브리지에 있는 마지막 CC 값이 'D'로, 그것은 제 2 스트림을 결합할 때 순회에 대한 필요한 값의 5개가 부족하다. 따라서, 이 실시예에서편집 장치는, 제 2 스트림(SEQ2)과 연속적이도록 브리지의 마지막 부분 동안 5개의 빈 패킷을 삽입하였다. 브리지 시퀀스의 끝으로부터 CC=2, 1, 0 등으로 역카운트하면, CC=E을 갖는 이중 윤곽선으로 도시된 패킷은, PES 헤더를 갖는 비디오 ES용 마지막 TS 패킷과 일치한다는 것을 알 것이다. 본 장치는, 이것 직전에 CC=9, A, B, C 및 D의 5개의 여분의 빈 패킷을 삽입함으로써, 편집을 통해 CC 순회를 얻는다.
빈 패킷의 서로 다른 번호는 각 오디오 및 시스템 정보 스트림에서 적합하고, 그 브리지내의 마지막 PES 헤더의 위치는 비디오 스트림의 위치와 다를 수도 있다. 간략화를 위해, 패킷 삽입은, 도 9에서 비디오 ES만을 위해 도시되어 있다.
알 수 있는 것은, 각 스트림에 15개의 빈 패킷 이상을 삽입하는데 결코 필요하지 않다는 것인데, 그 이유는 4비트 값이 순환(roll-over)하기 때문이다. 또한, 16개에서 대략 한번은, 빈 패킷을 삽입할 필요가 없는데, 그 이유는 CC가 기회에 관한 문제에 의해 편집에서 연속적이기 때문이다. 또한, 명백한 것은, 그 삽입된 패킷이, 도시된 것처럼 마지막 가능한 포인트에서 묶을 필요가 없지만, 그 보다 앞선 포인트에 있을 수 있고, 바람직한 경우 큰 간격으로 퍼져 있을 수 있다는 것이다.
불연속 표시는, 타임-베이스가 변하는 곳에만 세트될 필요가 있고, 그것은 원리상 브리지 시퀀스에 어디에 있을 수 있지만, 브리지 시퀀스의 중간쯤에 원하는 편집 포인트에서 보다 쉽게 구현된다.
상기 기술의 변화에서, 순회 카운터 불연속은, (브리지 내에) 편집 포인트에 남을 수 있지만, 그 불연속에 의한 표시 비트는 순회 카운터 불연속이 일어나는 패킷들에 세트될 수 있다. MPEG에 따라 불연속 상태가 새로운 시퀀스 헤더가 발견되기까지 존재하는지를 생각하자. 보통 편집 포인트 뒤에 비디오 시퀀스 헤더와 새로운 오디오 프레임의 시작이 있으므로, 그 불연속 상태는 재생에 영향을 미치지 않을 것이다. 이 변화를 이용하는 것은 브리지의 끝에서 순회 카운터를 일관되게 하기 위해서 브리지의 끝으로부터 뒤로 죽 작용할 필요가 있다.
디지털 인터페이스를 통한 복합 편집의 재생
편집 및 브리지 시퀀스가 연속적으로 MPEG-2 컴플라이언트가 되도록 구성되므로, 재생장치를 위한 처리 작업이 거의 없다. 유일한 문제는, (PCR 타임스탬프에서) 타임-베이스 불연속과 여분의 오디오가 있다는 것뿐이다.
재생시에 PCR 불연속은 다음에 의해 스트림으로부터 제거된다:
C1.PCR 패킷에서 불연속 표시를 0으로 세트.
C2.모든 PCR/DTS/PTS 값을 편집 포인트 이전의 마지막 PTS와 그 편집 포인트 뒤의 첫 번째 PTS 사이의 오프셋에 의해 갱신.
연속적인 편집 포인트의 경우, 새로운 오프셋은, 이전의 오프셋과 사용된 그 조합 값에 더해져야 한다.
다른 대안으로서, PCR 불연속이 제거되지 않으면, DIT 테이블을 갖는 전송 패킷이 편집 포인트에서 삽입될 수 있다.
오디오 버퍼 모델에 의한 문제점을 해결하기 위해서, 일부 오디오 패킷을 삭제하는 것이 필요하다. 제 1 스트림 SEQ1에서 마지막 비디오 프레임의 끝 뒤에, 새로운 오디오 프레임의 시작이 발견되면, 패킷과 모든 연속적인 오디오 패킷이 디지털 인터페이스를 거쳐 보내지기 전에 삭제되어야 한다. 종래의 널 TS 패킷은, TS 포맷을 보존하기 위해서 그들의 자리에 삽입될 수 있다. 선행하는 오디오(즉, 제 1 비디오 패킷보다 앞서 있는 오디오)는, 마찬가지로 삭제되어 오디오 버퍼 오버플로우를 갖는 문제점을 해결한다.
다른 실시예들
일반적으로 알 수 있듯이, 선행하는 실시예들은, 필드 기반 편집이라기 보다는 오히려 프레임 기반 편집에 관한 것이다. 즉, 이는 MPEG에서 비디오 인코딩의 일반적인 단위가 프레임이기 때문이다. 당업자는, MPEG 컴플라이언스가 (상술한 것처럼) 필수적인 것이 아니고, 여기서 설명된 기술들은 논-MPEG 필드 기반 데이터에 첨가되어도 된다는 것을 알 것이다.
상기 포인트 4에서 브리지 시퀀스의 패킷에서 순회 카운터의 처리를 참조하면, 또 다른 방법은, 심리스 편집을 위한 요구사항을 만족하는 것이 고려된다. 그러나, 상술한 기술들은, 재생시간의 특정 처리가 최소라는 이유로 바람직한 것이다. 그러한 하나의 대안은, 브리지 생성시에 순회 카운터에 대해 정정하는데 있다. 재생시에 순회 카운터는, 상술한 것처럼 여분의 패킷을 각 PID 스트림에 삽입하여서 그 편집 포인트를 거쳐 연속적이게 된다.

Claims (39)

  1. 저장장치로부터 데이터의 시퀀스를 판독 가능하도록 동작하고, 제 1 시퀀스의 제 1 편집 포인트가 소정 디코더에 의해 과해진 제약을 위반하지 않고 제 2 시퀀스의 제 2 편집 포인트에 연결되도록 그것을 편집 가능하도록 동작하는 수단을 구비하되, 상기 저장된 시퀀스 각각이 적어도 하나의 시리즈의 전송 패킷을 포함하고, 주어진 시리즈의 전송 패킷이 선행하는 전송 패킷에 대한 소정의 순회 규칙에 의해 각각 관련된 각각의 순회 카운터 값을 구비하고, 상기 편집 포인트의 연결로 생기는 순회 카운터 값의 불연속의 크기를 계산하는 수단과, 상기 제약과 순회 규칙을 따르면서 상기 제 1 및 제 2 편집 포인트를 연결하는 전송 패킷의 편집 시퀀스를 구성하도록 각각이 그 자신의 순회 카운터 값을 갖는 대응한 수의 보조 전송 패킷을 발생하는 수단을 구비한 것을 특징으로 하는 장치.
  2. 제 1 항에 있어서,
    적어도 상기 제 1 시퀀스는, 그 자신들이 상기 전송 패킷을 형성하도록 세분된 패킷들을 갖는 적어도 하나의 패킷화된 기본 스트림을 전달하는 것을 특징으로 하는 장치.
  3. 제 2 항에 있어서,
    상기 장치는, 패킷 경계를 포함한 페이로드를 갖는 전송 패킷을 식별하고, 이 식별된 패킷 이전에 삽입될 때 상기 순회 규칙을 따르도록 상기 보조 패킷(들)을 발생하도록 구성된 것을 특징으로 하는 장치.
  4. 제 1 항 내지 제 3 항 중 어느 한 항에 있어서,
    상기 보조 패킷을 포함한 전송 패킷의 상기 편집 시퀀스를 디지털 인터페이스를 통해 출력하는 수단을 구비한 것을 특징으로 하는 장치.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    데이터의 제 1 및 제 2 시퀀스는, 각각 다중 패킷화된 복수의 기본 스트림을 포함하되, 각 기본 스트림은 전송 패킷의 그 자신의 시퀀스를 갖는 것을 특징으로 하는 장치.
  6. 제 5 항에 있어서,
    순회 규칙은, 각 기본 스트림에 대해 독립적으로 동작하고, 그 장치는 그 스트림 개개에 대해 계산된 불연속의 크기에 따라 각 기본 스트림에 대한 보조 전송패킷을 발생하도록 구성된 것을 특징으로 하는 장치.
  7. 제 1 항 내지 제 6 항 중 어느 한 항에 있어서,
    상기 장치는, 편집을 정의하는 보조 데이터의 재생에 앞서서 발생하여 저장하는 수단을 구비한 것을 특징으로 하는 장치.
  8. 제 1 항 내지 제 7 항 중 어느 한 항에 있어서,
    상기 제 1 및 제 2 시퀀스는, 시퀀스의 임의의 다른 프레임을 참조하지 않은 코드내에 있는 다수의 프레임과, 시퀀스의 적어도 하나 이상의 프레임을 참조하여 코드간에 있는 다수의 프레임을 구비한 프레임 기반 데이터를 포함하는 것을 특징으로 하는 장치.
  9. 제 8 항에 있어서,
    상기 장치는, 저장된 제 1 및 제 2 프레임 시퀀스로부터 프레임의 선택적인 병합과, 각각의 편집 포인트로 나타낸 제 1 및 제 2 시퀀스로부터 프레임의 코드(내- 또는 간-)형에 의해 결정된 것처럼 브리지 시퀀스 내의 하나 또는 그 이상의 프레임의 선택적인 재코딩에 의해, 전송 패킷의 브리지 시퀀스를 생성하여 상기 편집 포인트 주위의 제 1 및 제 2 시퀀스를 연결하도록 구성된 브리지 발생수단을 구비한 것을 특징으로 하는 장치.
  10. 제 9 항에 있어서,
    상기 순회 규칙은, 프레임 헤더의 특정 클래스에 의해 바로 뒤따르는 위치에서, 그 편집된 시퀀스내의 불연속을 허락하고, 상기 장치는, 브리지 시퀀스내의 그 불연속을 구비하고, 그 저장된 제 2 시퀀스를 삽입하기에 앞서 순회 규칙을 따르게 하기 위해서 상기 보조 패킷을 삽입하도록 구성된 것을 특징으로 하는 장치.
  11. 제 1 항 내지 제 10 항 중 어느 한 항에 있어서,
    상기 제 1 및 제 2 시퀀스 및 재생 리스트 정보와 함께 기록매체에 브리지 시퀀스를 저장하는 수단을 구비한 것을 특징으로 하는 장치.
  12. 저장장치로부터 데이터의 시퀀스를 판독하고, 제 1 시퀀스의 제 1 편집 포인트가 소정 디코더에 의해 과해진 제약을 위반하지 않고 제 2 시퀀스의 제 2 편집 포인트에 연결되도록 그것을 편집하되, 상기 저장된 시퀀스 각각이 적어도 하나의 시리즈의 전송 패킷을 포함하고, 주어진 시리즈의 전송 패킷이 선행하는 전송 패킷에 대한 소정의 순회 규칙에 의해 각각 관련된 각각의 순회 카운터 값을 구비하며, 상기 편집 포인트의 연결로 생기는 순회 카운터 값의 불연속의 크기를 계산하는 단계와, 상기 제약과 순회 규칙을 따르면서 상기 제 1 및 제 2 편집 포인트를 연결하는 전송 패킷의 편집 시퀀스를 구성하도록 각각이 그 자신의 순회 카운터 값을 갖는 대응한 수의 보조 전송 패킷을 발생하는 단계를 포함한 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  13. 제 12 항에 있어서,
    적어도 상기 제 1 시퀀스는, 그 자신들이 상기 전송 패킷을 형성하도록 세분된 패킷들을 갖는 적어도 하나의 패킷화된 기본 스트림을 전달하는 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  14. 제 13 항에 있어서,
    상기 방법은, 패킷 경계를 포함한 페이로드를 갖는 전송 패킷을 식별하고, 이 식별된 패킷 이전에 삽입될 때 상기 순회 규칙을 따르도록 상기 보조 패킷(들)을 발생하도록 구성된 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  15. 제 12 항 내지 제 14 항 중 어느 한 항에 있어서,
    데이터의 제 1 및 제 2 시퀀스는, 각각 다중 패킷화된 복수의 기본 스트림을 포함하되, 각 기본 스트림은 전송 패킷의 그 자신의 시퀀스를 갖는 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  16. 제 15 항에 있어서,
    순회 규칙은, 각 기본 스트림에 대해 독립적으로 동작하고, 상기 방법은 그 스트림 개개에 대해 계산된 불연속의 크기에 따라 각 기본 스트림에 대한 보조 전송 패킷을 발생하도록 구성된 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  17. 제 12 항 내지 제 16 항 중 어느 한 항에 있어서,
    상기 방법은, 편집을 정의하는 보조 데이터의 재생에 앞서서 발생하여 저장하는 단계를 포함한 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  18. 제 12 항 내지 제 17 항 중 어느 한 항에 있어서,
    상기 제 1 및 제 2 시퀀스는, 시퀀스의 임의의 다른 프레임을 참조하지 않은 코드내에 있는 다수의 프레임과, 시퀀스의 적어도 하나 이상의 프레임을 참조하여 코드간에 있는 다수의 프레임을 구비한 프레임 기반 데이터를 포함하는 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  19. 제 18 항에 있어서,
    저장된 제 1 및 제 2 프레임 시퀀스로부터 프레임의 선택적인 병합과, 각각의 편집 포인트로 나타낸 제 1 및 제 2 시퀀스로부터 프레임의 코드(내- 또는 간-)형에 의해 결정된 것처럼 브리지 시퀀스 내의 하나 또는 그 이상의 프레임의 선택적인 재코딩에 의해, 전송 패킷의 브리지 시퀀스를 생성하여 상기 편집 포인트 주위의 제 1 및 제 2 시퀀스를 연결하는 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  20. 제 19 항에 있어서,
    상기 순회 규칙은, 프레임 헤더의 특정 클래스에 의해 바로 뒤따르는 위치에서, 그 편집된 시퀀스내의 불연속을 허락하고, 상기 방법은, 브리지 시퀀스내의 그 불연속을 구비하고, 그 저장된 제 2 시퀀스를 삽입하기에 앞서 순회 규칙을 따르게하기 위해서 상기 보조 패킷을 삽입하도록 구성된 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  21. 제 12 항 내지 제 20 항 중 어느 한 항에 있어서,
    상기 제 1 및 제 2 시퀀스 및 재생 리스트 정보와 함께 기록매체에 브리지 시퀀스를 저장하는 단계를 구비한 것을 특징으로 하는 저장장치로부터의 데이터 시퀀스 판독 및 그 편집방법.
  22. 제 1 및 제 2 프레임 데이터 시퀀스를 하나 또는 그 이상의 시퀀스와 함께 이송하여 제 1 프레임 시퀀스의 제 1 편집 포인트가 제 2 프레임 시퀀스의 제 2 편집 포인트에 연결되고, 상기 브리지 시퀀스가 청구항 12 내지 청구항 21 중 어느 한 항에 기재된 방법에 의해 발생된 것을 특징으로 하는 기록물.
  23. 제 1 시퀀스의 제 1 편집 포인트를 원하는 편집 시퀀스를 출력하도록 제 2 시퀀스의 제 2 편집 포인트에 연결하는 저장된 편집 데이터에 따라서 저장장치로부터 데이터의 제 1 및 제 2 시퀀스를 판독 동작 가능한 재생수단을 구비하고, 상기 제 1 및 제 2 시퀀스는, 상기 제 1 편집 포인트에서의 상기 제 1 시퀀스의 절단과상기 제 2 편집 포인트에서의 상기 제 2 시퀀스의 삽입이 상기 디코더 사양 이내의 하나 또는 그 이상의 제약을 잠재적으로 위반하도록 소정 디코더 사양에 따른 형태로 인코딩 및 다중화된 적어도 2개의 다중화된 기본 스트림을 각각 포함하고, 상기 재생수단은, 출력으로서 상기 편집 시퀀스가 상기 디코더 사양을 따르도록 상기 편집 포인트 근처에서 상기 제 1 및 제 2 시퀀스로부터 선택적으로 데이터를 재생함으로써 상기 기본 스트림의 재코딩 또는 재다중화 없이 동작하는 것을 특징으로 하는 데이터 재생장치.
  24. 제 23 항에 있어서,
    제 1 시퀀스의 상기 기본 스트림 중 적어도 하나는, 그 시퀀스의 임의의 다른 프레임을 참조하지 않는 다수의 프레임(이후 "I-프레임")이 코드내에 있고, 시퀀스의 하나 그 이상의 프레임을 참조하여 다수의 프레임(이후 "P-프레임")이 각각 코딩되고, 시퀀스의 2개 또는 그 이상의 프레임을 참조하여 나머지 프레임(이후 "B-프레임")이 각각 코딩되는 프레임 기반 데이터를 포함하고, 상기 재생수단은, 상기 제 1 편집 포인트의 위치와 상기 제 1 편집 포인트에 의해 나타낸 근처의 프레임의 코딩 형태를 참조하여 출구 포인트를 식별하여, 상기 출구 포인트 뒤에 제 1 시퀀스의 프레임의 재생을 억제하는 수단을 구비한 것을 특징으로 하는 데이터 재생장치.
  25. 제 24 항에 있어서,
    상기 출구 포인트는, 프리젠테이션 순서에 반대로 된 스트림 순서면에서, 제 1 편집 포인트 앞 및 I- 또는 P-프레임에 바로 앞에 데이터 스트림의 프레임 경계로서 선택된 것을 특징으로 하는 데이터 재생장치.
  26. 제 24 항 또는 제 25 항에 있어서,
    상기 출구 포인트는, 스트림 데이터와 별도로 저장된 특성 포인트 정보를 사용하여 식별되는 것을 특징으로 하는 데이터 재생장치.
  27. 제 24 항, 제 25 항 또는 제 26 항에 있어서,
    상기 적어도 하나의 기본 스트림은, 비디오 프레임 데이터를 포함하고, 각각 상기 제 1 및 제 2 시퀀스내의 그 이상의 기본 스트림은, 오디오 프레임 데이터를 포함하며, 상기 재생수단은, 기본 스트림내의 프리젠테이션 시간 정보를 사용하고 상기 출구 포인트에서 비디오 프레임의 프리젠테이션 시간보다 늦은 프리젠테이션 시간을 갖는 임의의 오디오 프레임 데이터의 출력을 억제하도록 구성된 것을 특징으로 하는 데이터 재생장치.
  28. 제 23 항 내지 제 27 항 중 어느 한 항에 있어서,
    제 2 시퀀스의 상기 기본 스트림 중 적어도 하나는, 그 시퀀스의 임의의 다른 프레임을 참조하지 않는 다수의 프레임(이후 "I-프레임")이 코드내에 있고, 시퀀스의 하나 그 이상의 프레임을 참조하여 다수의 프레임(이후 "P-프레임")이 각각 코딩되고, 시퀀스의 2개 또는 그 이상의 프레임을 참조하여 나머지 프레임(이후 "B-프레임")이 각각 코딩되는 프레임 기반 데이터를 포함하고, 상기 재생수단은, 상기 제 2 편집 포인트의 위치와 상기 제 2 편집 포인트에 의해 나타낸 근처의 프레임의 코딩 형태를 참조하여 입구 포인트를 식별하여, 상기 입구 포인트 앞에 제 2 시퀀스의 프레임의 재생을 억제하는 수단을 구비한 것을 특징으로 하는 데이터 재생장치.
  29. 제 24 항 내지 제 28 항 중 어느 한 항에 있어서,
    상기 입구 포인트는, 스트림 데이터와 별도로 저장된 특성 포인트 정보를 사용하여 식별되는 것을 특징으로 하는 데이터 재생장치.
  30. 제 24 항 내지 제 29 항 중 어느 한 항에 있어서,
    상기 적어도 하나의 기본 스트림은, 비디오 프레임 데이터를 포함하고, 각각상기 제 1 및 제 2 시퀀스내의 그 이상의 기본 스트림은, 오디오 프레임 데이터를 포함하며, 상기 재생수단은, 기본 스트림내의 프리젠테이션 시간 정보를 사용하고 상기 입구 포인트에서 비디오 프레임의 프리젠테이션 시간보다 빠른 프리젠테이션 시간을 갖는 임의의 오디오 프레임의 재생을 억제하도록 구성된 것을 특징으로 하는 데이터 재생장치.
  31. 제 27 항에 있어서,
    상기 오디오 프레임의 상기 억제는, 그들을 멀티플렉스로부터 제거하기 보다 오히려 오디오 데이터의 패킷내의 코드를 변형하여서 실행되는 것을 특징으로 하는 데이터 재생장치.
  32. 제 31 항에 있어서,
    오디오 데이터는, 제 1 및 제 2 시퀀스로부터 오디오 데이터의 오버랩에 우선하여 오디오 데이터의 이용 가능성의 갭을 증진하도록 억제되는 것을 특징으로 하는 데이터 재생장치.
  33. 제 23 항 내지 제 32 항 중 어느 한 항에 있어서,
    인코딩된 프리젠테이션 시간 값과 프레임 갱신속도에 따라 제 1 및 제 2 시퀀스의 타임-베이스 사이의 오프셋을 계산하는 수단을 구비한 것을 특징으로 하는 데이터 재생장치.
  34. 제 33 항에 있어서,
    상기 재생수단은, 제 1 시퀀스의 출구 포인트와 제 2 시퀀스의 입구 포인트 사이에서 그것의 최초 형태로 상대적인 버퍼 충만을 계산하고, 상기 디코더 사양의 버퍼 제약에 따라 버퍼 오버플로우를 막을 필요가 있을 경우 제 2 시퀀스내로 삽입을 지연하도록 구성된 것을 특징으로 하는 데이터 재생장치.
  35. 제 34 항에 있어서,
    상기 재생수단은, 타임-베이스들 사이에서 반복적으로 그 상대적인 버퍼 충만이 호환성 표준을 만족할 때까지 상기 계산된 오프셋을 증가하여서 상기 지연을 수행하여, 그 증가된 오프셋을 사용하여 그 편집된 시퀀스를 발생하도록 구성된 것을 특징으로 하는 데이터 재생장치.
  36. 제 33 항, 제 34 항 또는 제 35 항에 있어서,
    상기 재생수단은, 제 1 시퀀스의 출구 포인트와 제 2 시퀀스의 입구 포인트 사이에서, 원래의 형태로 상대적인 버퍼 충만을 반복적으로 계산하고, 그 상대적인 버퍼 충만이 호환성 표준을 만족할 때까지 입구 및 출구 포인트 중 적어도 하나를 변형하고, 만약 있다면 그 변형된 입구 및 출구 포인트를 사용하여 편집 시퀀스를 발생하도록 구성된 것을 특징으로 하는 데이터 재생장치.
  37. 제 33 항 내지 제 36 항 중 어느 한 항에 있어서,
    상기 재생수단은, 인코딩된 디코드 타임 스탬프와 타임-베이스들 사이의 그 계산된 오프셋을 사용하여 제 1 및 제 2 시퀀스 데이터의 로딩 시간을 계산하고, 버퍼 언더플로우를 막도록 로딩 타임을 오버랩핑의 순간을 식별하고, 상기 계산이 제 1 시퀀스 데이터의 로딩 완료에 앞서 제 2 시퀀스 데이터에 대한 로딩 시간을 포함하는 경우 상기 오프셋을 변형하도록 더 구성된 것을 특징으로 하는 데이터 재생장치.
  38. 저장된 데이터의 제 1 및 제 2 시퀀스가 저장장치로부터 판독되어, 원하는 편집 시퀀스를 출력하도록 제 1 시퀀스의 제 1 편집 포인트를 제 2 시퀀스의 제 2 편집 포인트에 연결하는 미리 저장된 편집 데이터에 따라 재생되고, 상기 제 1 및 제 2 시퀀스는, 상기 제 1 편집 포인트에서의 상기 제 1 시퀀스의 절단과 상기 제2 편집 포인트에서의 상기 제 2 시퀀스의 삽입이 일반적으로 상기 디코더 사양 이내의 하나 또는 그 이상의 제약을 위반하도록 소정 디코더 사양에 따른 형태로 인코딩 및 다중화된 적어도 2개의 다중화된 기본 스트림을 각각 포함하고, 상기 재생수단은, 출력으로서 상기 편집 시퀀스가 상기 디코더 사양을 따르도록 상기 편집 포인트 근처에서 상기 제 1 및 제 2 시퀀스로부터 선택적으로 데이터를 재생함으로써 상기 기본 스트림의 재코딩 또는 재다중화 없이 동작하는 것을 특징으로 하는 저장 데이터 재생방법.
  39. 청구항 38에 기재된 방법에 의해 생긴 편집 데이터 시퀀스를 재생하는 신호.
KR1020017015347A 2000-03-31 2001-03-23 디지털 비디오 기록물의 데이터 처리 장치 및 방법과, 데이터 처리 방법에 의해 생성되는 기록물을 기록한 컴퓨터가 판독할 수 있는 기록매체와, 데이터 재생장치 및 데이터 재생방법 및, 데이터 재생방법에 의해 편집된 데이터 시퀀스를 재생하는 신호를 기록한 컴퓨터로 판독할 수 있는 기록매체 KR100821575B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GBGB0007868.3A GB0007868D0 (en) 2000-03-31 2000-03-31 Methods and apparatus for editing digital video recordings and recordings made by such methods
GB0007868.3 2000-03-31

Publications (2)

Publication Number Publication Date
KR20020026169A true KR20020026169A (ko) 2002-04-06
KR100821575B1 KR100821575B1 (ko) 2008-04-15

Family

ID=9888873

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020017015347A KR100821575B1 (ko) 2000-03-31 2001-03-23 디지털 비디오 기록물의 데이터 처리 장치 및 방법과, 데이터 처리 방법에 의해 생성되는 기록물을 기록한 컴퓨터가 판독할 수 있는 기록매체와, 데이터 재생장치 및 데이터 재생방법 및, 데이터 재생방법에 의해 편집된 데이터 시퀀스를 재생하는 신호를 기록한 컴퓨터로 판독할 수 있는 기록매체

Country Status (10)

Country Link
US (2) US6952521B2 (ko)
EP (1) EP1275115A1 (ko)
JP (1) JP4837868B2 (ko)
KR (1) KR100821575B1 (ko)
CN (1) CN100431354C (ko)
GB (1) GB0007868D0 (ko)
HU (1) HUP0201823A2 (ko)
MY (1) MY143015A (ko)
TW (1) TW591623B (ko)
WO (1) WO2001075888A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100939718B1 (ko) * 2003-07-21 2010-02-01 엘지전자 주식회사 개인 비디오 녹화 시스템 및 녹화 프로그램 편집 방법
KR100943738B1 (ko) * 2002-07-08 2010-02-23 프랑스 텔레콤 클라이언트 단말에서 멀티미디어 데이터 플로우를 재생하는 방법, 장치 및 시스템
WO2015102462A1 (ko) * 2014-01-06 2015-07-09 에스케이텔레콤 주식회사 다중 영상의 단일 비트 스트림 생성방법 및 생성장치
US9749587B2 (en) 2014-01-06 2017-08-29 Sk Telecom Co., Ltd. Method and apparatus for generating combined video stream for multiple images

Families Citing this family (154)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002520973A (ja) * 1998-07-14 2002-07-09 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ディジタルビデオ情報信号の編集
US6792047B1 (en) * 2000-01-04 2004-09-14 Emc Corporation Real time processing and streaming of spliced encoded MPEG video and associated audio
JP4411499B2 (ja) * 2000-06-14 2010-02-10 ソニー株式会社 情報処理装置および情報処理方法、並びに記録媒体
US6937770B1 (en) 2000-12-28 2005-08-30 Emc Corporation Adaptive bit rate control for rate reduction of MPEG coded video
US7023924B1 (en) 2000-12-28 2006-04-04 Emc Corporation Method of pausing an MPEG coded video stream
JP3815597B2 (ja) * 2001-06-11 2006-08-30 ソニー株式会社 信号処理装置
US6990497B2 (en) * 2001-06-26 2006-01-24 Microsoft Corporation Dynamic streaming media management
US7076478B2 (en) * 2001-06-26 2006-07-11 Microsoft Corporation Wrapper playlists on streaming media services
US6986018B2 (en) * 2001-06-26 2006-01-10 Microsoft Corporation Method and apparatus for selecting cache and proxy policy
US6980594B2 (en) 2001-09-11 2005-12-27 Emc Corporation Generation of MPEG slow motion playout
US6959116B2 (en) 2001-09-18 2005-10-25 Emc Corporation Largest magnitude indices selection for (run, level) encoding of a block coded picture
US6968091B2 (en) * 2001-09-18 2005-11-22 Emc Corporation Insertion of noise for reduction in the number of bits for variable-length coding of (run, level) pairs
JP2003110988A (ja) * 2001-09-27 2003-04-11 Sony Corp デジタル放送受信機及びバックアップ方法
US7231138B1 (en) 2001-11-26 2007-06-12 Nvidia Corporation Method and system for DVD single frame stepping backwards
US7221851B1 (en) 2001-11-26 2007-05-22 Nvidia Corporation Method and system for DVD smooth search transitions
US8958688B2 (en) 2001-11-26 2015-02-17 Nvidia Corporation Method and system for DVD smooth rewind
US9497452B2 (en) * 2002-01-22 2016-11-15 Broadcom Corporation System and method of transmission and reception of video using compressed differential time stamps
US7379653B2 (en) * 2002-02-20 2008-05-27 The Directv Group, Inc. Audio-video synchronization for digital systems
US7263275B2 (en) * 2002-03-01 2007-08-28 Broadcom Corporation System and method of manipulating a system time clock in an audio/video decoding system
WO2003085972A1 (fr) * 2002-04-10 2003-10-16 Sony Corporation Dispositif d'enregistrement de donnees, support de memoire de programme et programme
JP3833571B2 (ja) * 2002-05-28 2006-10-11 富士通株式会社 データ復号器およびデータ復号化方法
JP3770249B2 (ja) * 2002-07-04 2006-04-26 ソニー株式会社 多重化装置及び方法
US7269136B2 (en) * 2002-08-30 2007-09-11 Sun Microsystems, Inc. Methods and apparatus for avoidance of remote display packet buffer overflow
US20040044741A1 (en) * 2002-08-30 2004-03-04 Kelly Declan Patrick Disc specific cookies for web DVD
GB2393069A (en) * 2002-09-11 2004-03-17 Tektronix Int Sales Gmbh Monitoring program map tables of a compressed transport stream
US7894533B2 (en) 2002-09-11 2011-02-22 Tektronix, Inc. Analyzing a transport stream
US20040062516A1 (en) * 2002-09-17 2004-04-01 Canon Kabushiki Kaisha Moving picture experts group phase 2 transport stream data editing method
JP3717880B2 (ja) * 2002-10-01 2005-11-16 パイオニア株式会社 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
KR100571347B1 (ko) * 2002-10-15 2006-04-17 학교법인 한국정보통신학원 사용자 선호도 기반의 멀티미디어 컨텐츠 서비스 시스템과방법 및 그 기록 매체
JP3896949B2 (ja) * 2002-11-08 2007-03-22 日本電気株式会社 ビデオ編集装置及びビデオ編集プログラム
EP1570482A1 (en) * 2002-12-05 2005-09-07 Koninklijke Philips Electronics N.V. Editing of data frames
FR2848372B1 (fr) * 2002-12-09 2005-04-01 Medialive Synchronisation de flux audiovisuels securises
FR2848766B1 (fr) * 2002-12-13 2005-03-11 Thales Sa Procede de commutation de signaux numeriques avant emission, commutateur et signal resultant
CA2511672A1 (en) * 2002-12-24 2004-07-15 Matsushita Electric Industrial Co., Ltd. Recording and reproduction apparatus, recording apparatus, editing apparatus, information recording medium, recording and reproduction method, recording method, and editing method
EP1597899A1 (en) * 2003-02-28 2005-11-23 Matsushita Electric Industrial Co., Ltd. System and method for content history log collection for digital rights management
WO2004082273A1 (ja) * 2003-03-11 2004-09-23 Pioneer Corporation 情報記録装置及び方法、情報記録媒体並びに記録制御用のコンピュータプログラム
EP1606816B1 (en) 2003-03-17 2013-08-21 Koninklijke Philips Electronics N.V. An apparatus for and a method of storing a real time stream of digital information signals
JP2004289295A (ja) * 2003-03-19 2004-10-14 Fujitsu Ltd データ処理システム、データ処理装置及びデータ処理方法
WO2004095836A1 (ja) * 2003-04-23 2004-11-04 Matsushita Electric Industrial Co. Ltd. データ処理装置
JP4902935B2 (ja) * 2003-05-08 2012-03-21 ソニー株式会社 情報処理装置、情報処理方法、プログラム、及び記録媒体
US7606472B2 (en) * 2003-05-30 2009-10-20 Canon Kabushiki Kaisha Video stream data recording apparatus
US9286214B2 (en) * 2003-06-06 2016-03-15 Arris Enterprises, Inc. Content distribution and switching amongst data streams
US9456243B1 (en) * 2003-06-06 2016-09-27 Arris Enterprises, Inc. Methods and apparatus for processing time-based content
JP4096310B2 (ja) * 2003-06-18 2008-06-04 ソニー株式会社 情報作成装置および方法、再生装置および方法、並びにプログラム
CN100477774C (zh) 2003-06-30 2009-04-08 松下电器产业株式会社 数据处理装置及数据处理方法
CN1820502A (zh) * 2003-07-08 2006-08-16 日本先锋公司 信息记录设备和方法及信息发送设备和方法
BRPI0412790A (pt) * 2003-07-21 2006-09-26 Thomson Licensing gravador de vìdeo pessoal que grava através de mudança de canal
GB0320618D0 (en) * 2003-09-03 2003-10-01 Koninkl Philips Electronics Nv Monitoring of a broadcast signal
WO2005038781A1 (en) * 2003-10-16 2005-04-28 Sae Magnetics (H.K.) Ltd. Method and mechanism of the suspension resonance optimization for the hard disk driver
JP3675465B2 (ja) * 2003-10-29 2005-07-27 ソニー株式会社 符号化制御装置および符号化システム
CN101577834B (zh) 2004-04-07 2011-06-15 松下电器产业株式会社 记录可以高速转换的流的信息记录装置和记录方法
WO2005099257A1 (ja) 2004-04-07 2005-10-20 Matsushita Electric Industrial Co., Ltd. 高速変換可能なストリームを記録した情報記録媒体並びにその記録装置及び記録方法
CN101707705B (zh) 2004-04-07 2012-11-07 松下电器产业株式会社 记录可以高速转换的流的信息记录介质,及其记录装置和记录方法
JP4177407B2 (ja) 2004-04-07 2008-11-05 松下電器産業株式会社 情報記録装置及び情報記録方法
JP4177409B2 (ja) 2004-04-07 2008-11-05 松下電器産業株式会社 情報記録装置及び情報記録方法
EP1738587A1 (en) * 2004-04-15 2007-01-03 Koninklijke Philips Electronics N.V. Creating a bridge clip for seamless connection of multimedia sections without requiring recoding
US7512886B1 (en) 2004-04-15 2009-03-31 Magix Ag System and method of automatically aligning video scenes with an audio track
US7471337B2 (en) * 2004-06-09 2008-12-30 Lsi Corporation Method of audio-video synchronization
JP2006164378A (ja) * 2004-12-06 2006-06-22 Toshiba Corp 情報記録媒体、情報記録方法、情報再生方法、情報記録装置、情報再生装置
JP2006211117A (ja) * 2005-01-26 2006-08-10 Sharp Corp コンテンツ保護システム
JP4372031B2 (ja) * 2005-03-10 2009-11-25 株式会社東芝 信号処理装置及び信号処理方法
JP3987541B2 (ja) * 2005-03-24 2007-10-10 株式会社東芝 パケットストリーム受信装置
US8126312B2 (en) * 2005-03-31 2012-02-28 Apple Inc. Use of multiple related timelines
CN100377589C (zh) * 2005-04-07 2008-03-26 北京北大方正电子有限公司 一种视频文件快速生成的方法
JP5096917B2 (ja) * 2005-04-20 2012-12-12 パナソニック株式会社 ストリームデータ記録装置、ストリームデータ再生装置、集積回路、ストリームデータ記録方法、及びストリームデータ再生方法
US20070002852A1 (en) * 2005-06-30 2007-01-04 Nokia Corporation Fixed interleaving length for MPE-FEC
KR101374034B1 (ko) * 2005-07-18 2014-03-12 톰슨 라이센싱 다중 비디오 스트림을 핸들링하는 방법 및 장치
US20070028026A1 (en) * 2005-07-27 2007-02-01 You-Min Yeh Digital multimedia transfer rate controlling
US20070058730A1 (en) * 2005-09-09 2007-03-15 Microsoft Corporation Media stream error correction
JP2007116213A (ja) * 2005-10-17 2007-05-10 Sharp Corp 情報処理装置、情報処理方法、プログラム、および、そのプログラムを記録した記録媒体
US7792144B2 (en) * 2005-11-14 2010-09-07 Broadcom Corporation Processing data packets using navigational hardware assist
JP2007194735A (ja) * 2006-01-17 2007-08-02 Toshiba Corp デジタル情報記録媒体、デジタル情報記録再生装置及びその記録再生方法
KR101158435B1 (ko) * 2006-03-03 2012-06-22 엘지전자 주식회사 이동통신 단말기와 우선순위 정보 데이터를 이용한 방송시스템 및 이를 이용한 방송 방법
WO2007106844A2 (en) 2006-03-14 2007-09-20 Divx, Inc. Federated digital rights management scheme including trusted systems
JP4762019B2 (ja) * 2006-03-24 2011-08-31 京セラ株式会社 放送受信装置
JP4779797B2 (ja) * 2006-05-10 2011-09-28 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
GB2439578B (en) * 2006-06-30 2011-11-09 Data Equation Ltd Data processing
US20080037956A1 (en) * 2006-06-30 2008-02-14 Scientific-Atlanta, Inc. Systems and Methods of Generating Encapsulated MPEG Program Streams
KR20080006441A (ko) * 2006-07-12 2008-01-16 삼성전자주식회사 미디어 데이터 전송 장치 및 방법 및 미디어 데이터 수신장치 및 방법
US8739240B2 (en) 2006-09-12 2014-05-27 At&T Intellectual Property I, L.P. Authoring system for IPTV network
US8155207B2 (en) * 2008-01-09 2012-04-10 Cisco Technology, Inc. Processing and managing pictures at the concatenation of two video streams
US20080115175A1 (en) * 2006-11-13 2008-05-15 Rodriguez Arturo A System and method for signaling characteristics of pictures' interdependencies
US8416859B2 (en) 2006-11-13 2013-04-09 Cisco Technology, Inc. Signalling and extraction in compressed video of pictures belonging to interdependency tiers
US8875199B2 (en) * 2006-11-13 2014-10-28 Cisco Technology, Inc. Indicating picture usefulness for playback optimization
US8565584B2 (en) * 2007-02-02 2013-10-22 Sony Corporation Editing apparatus and editing method
US8379677B2 (en) 2007-04-30 2013-02-19 Vixs Systems, Inc. System for combining a plurality of video streams and method for use therewith
DE602007007587D1 (de) * 2007-05-25 2010-08-19 Psytechnics Ltd Videoqualitätsbestimmung
US8804845B2 (en) 2007-07-31 2014-08-12 Cisco Technology, Inc. Non-enhancing media redundancy coding for mitigating transmission impairments
US8958486B2 (en) 2007-07-31 2015-02-17 Cisco Technology, Inc. Simultaneous processing of media and redundancy streams for mitigating impairments
US8776143B2 (en) * 2007-08-24 2014-07-08 Lg Electronics Inc. Digital broadcasting system and method of processing data in digital broadcasting system
US8331459B2 (en) * 2007-09-26 2012-12-11 Intel Corporation Method and apparatus for smooth digital media playback
EP2213097A2 (en) * 2007-10-16 2010-08-04 Cisco Technology, Inc. Conveyance of concatenation properties and picture orderness in a video stream
US8718388B2 (en) 2007-12-11 2014-05-06 Cisco Technology, Inc. Video processing with tiered interdependencies of pictures
US8824855B2 (en) * 2007-12-13 2014-09-02 Arris Solutions, Inc. Digital program splice visual quality
US8966103B2 (en) * 2007-12-21 2015-02-24 General Instrument Corporation Methods and system for processing time-based content
US8997161B2 (en) 2008-01-02 2015-03-31 Sonic Ip, Inc. Application enhancement tracks
US8565318B2 (en) * 2008-01-29 2013-10-22 Cisco Technology, Inc. Restamping transport streams to avoid vertical rolls
JP4445555B2 (ja) * 2008-02-06 2010-04-07 株式会社東芝 コンテンツ編集装置
JP4475336B2 (ja) * 2008-02-08 2010-06-09 ソニー株式会社 タイムスタンプ付加装置およびタイムスタンプ付加方法、並びにプログラム
US8199811B2 (en) * 2008-02-18 2012-06-12 Lg Electronics Inc. Digital broadcast system and data processing method
US8416858B2 (en) 2008-02-29 2013-04-09 Cisco Technology, Inc. Signalling picture encoding schemes and associated picture properties
US8276074B2 (en) * 2008-05-15 2012-09-25 Apple Inc. User interfaces for editing video clips
WO2009152450A1 (en) 2008-06-12 2009-12-17 Cisco Technology, Inc. Picture interdependencies signals in context of mmco to assist stream manipulation
US8971402B2 (en) 2008-06-17 2015-03-03 Cisco Technology, Inc. Processing of impaired and incomplete multi-latticed video streams
US8699578B2 (en) 2008-06-17 2014-04-15 Cisco Technology, Inc. Methods and systems for processing multi-latticed video streams
US8705631B2 (en) 2008-06-17 2014-04-22 Cisco Technology, Inc. Time-shifted transport of multi-latticed video for resiliency from burst-error effects
US20090323822A1 (en) * 2008-06-25 2009-12-31 Rodriguez Arturo A Support for blocking trick mode operations
RU2502214C2 (ru) 2008-09-30 2013-12-20 Панасоник Корпорэйшн Носитель записи, устройство воспроизведения, системная бис, способ воспроизведения, очки и устройство отображения для трехмерных изображений
ES2546091T3 (es) * 2008-11-12 2015-09-18 Cisco Technology, Inc. Procesamiento de un programa de vídeo que tiene representaciones procesadas plurales de una señal de vídeo única para reconstrucción y emisión
WO2010080911A1 (en) 2009-01-07 2010-07-15 Divx, Inc. Singular, collective and automated creation of a media guide for online content
WO2010096767A1 (en) * 2009-02-20 2010-08-26 Cisco Technology, Inc. Signalling of decodable sub-sequences
US20100218232A1 (en) * 2009-02-25 2010-08-26 Cisco Technology, Inc. Signalling of auxiliary information that assists processing of video according to various formats
US8782261B1 (en) 2009-04-03 2014-07-15 Cisco Technology, Inc. System and method for authorization of segment boundary notifications
JP4993224B2 (ja) * 2009-04-08 2012-08-08 ソニー株式会社 再生装置および再生方法
US8949883B2 (en) * 2009-05-12 2015-02-03 Cisco Technology, Inc. Signalling buffer characteristics for splicing operations of video streams
TW201043032A (en) * 2009-05-27 2010-12-01 Teco Electric & Machinery Co Ltd Method for playing multimedia in a network and computer readable storage medium and computer program product thereof
US8279926B2 (en) 2009-06-18 2012-10-02 Cisco Technology, Inc. Dynamic streaming with latticed representations of video
CA2782825C (en) 2009-12-04 2016-04-26 Divx, Llc Elementary bitstream cryptographic material transport systems and methods
TWI488107B (zh) * 2009-12-09 2015-06-11 Silicon Motion Inc 用來增進快退效能之方法以及相關的電子裝置
CN102130886B (zh) * 2010-01-18 2015-04-01 中国电信股份有限公司 网络视频流媒体系统及传输处理方法、发送端
TWI416074B (zh) * 2010-01-26 2013-11-21 Mitac Int Corp Navigation map processing methods, program products and electronic devices
US20120109447A1 (en) * 2010-11-03 2012-05-03 Broadcom Corporation Vehicle black box
US8914534B2 (en) 2011-01-05 2014-12-16 Sonic Ip, Inc. Systems and methods for adaptive bitrate streaming of media stored in matroska container files using hypertext transfer protocol
US9467708B2 (en) 2011-08-30 2016-10-11 Sonic Ip, Inc. Selection of resolutions for seamless resolution switching of multimedia content
US8964977B2 (en) 2011-09-01 2015-02-24 Sonic Ip, Inc. Systems and methods for saving encoded media streamed using adaptive bitrate streaming
US8909922B2 (en) 2011-09-01 2014-12-09 Sonic Ip, Inc. Systems and methods for playing back alternative streams of protected content protected using common cryptographic information
US9143812B2 (en) 2012-06-29 2015-09-22 Sonic Ip, Inc. Adaptive streaming of multimedia
JP5891975B2 (ja) 2012-07-02 2016-03-23 富士通株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法および動画像復号方法
GB2506399A (en) * 2012-09-28 2014-04-02 Frameblast Ltd Video clip editing system using mobile phone with touch screen
US9813325B2 (en) 2012-12-27 2017-11-07 Comcast Cable Communications, Llc Information stream management
US9191457B2 (en) 2012-12-31 2015-11-17 Sonic Ip, Inc. Systems, methods, and media for controlling delivery of content
US9313510B2 (en) 2012-12-31 2016-04-12 Sonic Ip, Inc. Use of objective quality measures of streamed content to reduce streaming bandwidth
US9906785B2 (en) 2013-03-15 2018-02-27 Sonic Ip, Inc. Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata
US10397292B2 (en) 2013-03-15 2019-08-27 Divx, Llc Systems, methods, and media for delivery of content
US9094737B2 (en) 2013-05-30 2015-07-28 Sonic Ip, Inc. Network video streaming with trick play based on separate trick play files
US9247317B2 (en) * 2013-05-30 2016-01-26 Sonic Ip, Inc. Content streaming with client device trick play index
US9967305B2 (en) 2013-06-28 2018-05-08 Divx, Llc Systems, methods, and media for streaming media content
JP2015023575A (ja) * 2013-07-19 2015-02-02 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 送信方法、受信方法、送信装置及び受信装置
KR101861941B1 (ko) 2014-02-10 2018-07-02 돌비 인터네셔널 에이비 완벽 스플라이싱을 위한 인코딩된 오디오의 전송 스트림에의 삽입
US9866878B2 (en) 2014-04-05 2018-01-09 Sonic Ip, Inc. Systems and methods for encoding and playing back video at different frame rates using enhancement layers
KR101568381B1 (ko) 2014-06-24 2015-11-12 주식회사 더블유코퍼레이션 대체광고 전환에 따라 발생되는 오디오 노이즈를 제거하기 위한 장치 및 방법
CN106162182B (zh) * 2015-03-25 2019-08-30 杭州海康威视数字技术股份有限公司 一种视频编码码流的播放控制方法及系统
WO2017019674A1 (en) * 2015-07-28 2017-02-02 Dolby Laboratories Licensing Corporation Audio discontinuity detection and correction
GB2543080A (en) * 2015-10-08 2017-04-12 Starfish Tech Ltd Digital media splicing system and method
US9654205B1 (en) * 2015-12-08 2017-05-16 Echostar Technologies L.L.C. Systems, methods and apparatus for assembling a transport stream from satellite transponder signals
EP3185564A1 (en) * 2015-12-22 2017-06-28 Harmonic Inc. Video stream splicing of groups of pictures (gop)
US10122781B2 (en) * 2016-01-29 2018-11-06 Roku Inc. Selection of video segments for adaptive streaming
US10057654B2 (en) 2016-01-29 2018-08-21 Roku, Inc. Selection and alignment of video segments for adaptive streaming
US10218755B2 (en) 2016-01-29 2019-02-26 Roku, Inc. Extended selection and alignment of video segments for adaptive streaming
US10498795B2 (en) 2017-02-17 2019-12-03 Divx, Llc Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming
AU2018266806B2 (en) * 2017-05-09 2022-10-13 Echo360, Inc. Methods and apparatus for ordered serial synchronization of multimedia streams upon sensor changes
EP3627831A4 (en) * 2017-05-18 2020-06-03 Sony Corporation INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD, AND INFORMATION PROCESSING PROGRAM
US10531132B2 (en) * 2017-12-28 2020-01-07 Stmicroelectronics International N.V. Methods and techniques for reducing latency in changing channels in a digital video environment
US11161038B2 (en) * 2018-08-06 2021-11-02 Amazon Technologies, Inc. Systems and devices for controlling network applications

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US591788A (en) * 1897-10-12 Henry pennie
CA1174020A (en) * 1982-01-06 1984-09-11 Jobst U. Gellert Injection molding manifold member and method of manufacture
JPH01192298A (ja) * 1988-01-28 1989-08-02 Nec Corp 音声パケット受信方式
JP2969782B2 (ja) 1990-05-09 1999-11-02 ソニー株式会社 符号化データ編集方法及び符号化データ編集装置
KR0121301B1 (ko) * 1992-09-30 1997-11-17 사또오 후미오 편집신호 디코딩 장치
US5696557A (en) * 1994-08-12 1997-12-09 Sony Corporation Video signal editing apparatus
GB2298951B (en) * 1995-03-17 1999-10-27 Olivetti Res Ltd Addition of time information
JP3752694B2 (ja) 1995-04-07 2006-03-08 ソニー株式会社 圧縮映像信号編集装置、編集方法、及び復号化装置
JP3290851B2 (ja) * 1995-05-31 2002-06-10 株式会社東芝 ストリーム多重化装置、ストリーム多重化方法及び記録媒体
US5859660A (en) * 1996-02-29 1999-01-12 Perkins; Michael G. Non-seamless splicing of audio-video transport streams
US5917830A (en) * 1996-10-18 1999-06-29 General Instrument Corporation Splicing compressed packetized digital video streams
US6806909B1 (en) * 1997-03-03 2004-10-19 Koninklijke Philips Electronics N.V. Seamless splicing of MPEG-2 multimedia data streams
WO1999005864A1 (fr) 1997-07-25 1999-02-04 Sony Corporation Dispositif d'edition, procede d'edition, dispositif d'epissage, procede d'epissage, dispositif de codage et procede de codage
US6026506A (en) * 1997-09-26 2000-02-15 International Business Machines Corporation Concealing errors in transport stream data
US6697566B2 (en) * 1997-10-17 2004-02-24 Sony Corporation Encoded signal characteristic point recording apparatus
WO1999031888A1 (en) 1997-12-15 1999-06-24 Matsushita Electric Industrial Co., Ltd. Optical disc and computer-readable storage medium, and recording method and apparatus therefor
JPH11266431A (ja) 1997-12-17 1999-09-28 Tektronix Inc ビデオ編集方法及び装置
HUP0101298A3 (en) 1998-01-22 2003-07-28 Ori Software Dev Ltd Data structure, as well as method for constructing a layered index arranged in blocks, method for constructing an index over the keys of the data records, and method for obtaining a balanced index
JP3666625B2 (ja) 1998-03-20 2005-06-29 パイオニア株式会社 データ記録方法およびデータ記録装置
GB9813831D0 (en) * 1998-06-27 1998-08-26 Philips Electronics Nv Frame-accurate editing of encoded A/V sequences
JP2002520973A (ja) * 1998-07-14 2002-07-09 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ディジタルビデオ情報信号の編集
US6912251B1 (en) * 1998-09-25 2005-06-28 Sarnoff Corporation Frame-accurate seamless splicing of information streams
FR2795272B1 (fr) * 1999-06-18 2001-07-20 Thomson Multimedia Sa Procede de commutation de flux mpeg

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100943738B1 (ko) * 2002-07-08 2010-02-23 프랑스 텔레콤 클라이언트 단말에서 멀티미디어 데이터 플로우를 재생하는 방법, 장치 및 시스템
KR100939718B1 (ko) * 2003-07-21 2010-02-01 엘지전자 주식회사 개인 비디오 녹화 시스템 및 녹화 프로그램 편집 방법
US8498516B2 (en) 2003-07-21 2013-07-30 Lg Electronics Inc. Personal video recorder and control method thereof for combining first and second video streams
WO2015102462A1 (ko) * 2014-01-06 2015-07-09 에스케이텔레콤 주식회사 다중 영상의 단일 비트 스트림 생성방법 및 생성장치
US9749587B2 (en) 2014-01-06 2017-08-29 Sk Telecom Co., Ltd. Method and apparatus for generating combined video stream for multiple images

Also Published As

Publication number Publication date
US6952521B2 (en) 2005-10-04
WO2001075888A1 (en) 2001-10-11
HUP0201823A2 (en) 2002-09-28
US7574102B2 (en) 2009-08-11
US20060093315A1 (en) 2006-05-04
MY143015A (en) 2011-02-14
EP1275115A1 (en) 2003-01-15
GB0007868D0 (en) 2000-05-17
CN100431354C (zh) 2008-11-05
TW591623B (en) 2004-06-11
JP2003529991A (ja) 2003-10-07
KR100821575B1 (ko) 2008-04-15
CN1381056A (zh) 2002-11-20
JP4837868B2 (ja) 2011-12-14
US20010036355A1 (en) 2001-11-01

Similar Documents

Publication Publication Date Title
KR100821575B1 (ko) 디지털 비디오 기록물의 데이터 처리 장치 및 방법과, 데이터 처리 방법에 의해 생성되는 기록물을 기록한 컴퓨터가 판독할 수 있는 기록매체와, 데이터 재생장치 및 데이터 재생방법 및, 데이터 재생방법에 의해 편집된 데이터 시퀀스를 재생하는 신호를 기록한 컴퓨터로 판독할 수 있는 기록매체
JP4970688B2 (ja) デジタルビデオ記録物を作成、再生する方法及び装置と、この方法を用いて作成されたデジタルビデオ記録物
US6584273B1 (en) Frame-accurate editing of encoded A/V sequences
US7321718B2 (en) Method for generating additional information for guaranteeing seamless playback between data streams, recording medium storing the information, and recording editing and/or playback apparatus using the same
US8233780B2 (en) Reproducing apparatus and method, and recording medium
KR101014664B1 (ko) 복수의 데이터 스트림 간의 연속 재생을 보장하는 재생방법 및 그 재생 장치
KR100537394B1 (ko) 기록 방법, 기록 매체 및 기록 장치
KR20040007705A (ko) 데이터 기록 방법, 데이터 편집 방법 및 데이터 복호 방법, 및 그 장치, 및 기록 매체
KR100577327B1 (ko) Ａｖ 데이터 기록 재생 장치 및 방법, 상기 ａｖ 데이터기록 재생 장치 또는 방법으로 기록된 기록 매체, 및데이터 구조체
WO2004086396A1 (en) Reproducing apparatus and method, and recording medium
KR100657262B1 (ko) 데이터열간의 연속 재생을 보장하기 위한 부가 정보를저장하는 기록 매체
MXPA00001917A (en) Frame-accurate editing of encoded a/v sequences
JP2008236161A (ja) 記録装置、映像記録再生装置、その録画ファイル加工方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130403

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20140326

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160329

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20170323

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20180323

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20190325

Year of fee payment: 12