KR20050025328A - 화상 데이터 처리 장치 및 방법 - Google Patents

Abstract

본 발명은, MPEG 방식에 의해 부호화되며, 각각 보조 기록 영역(AUX_V)이 형성되고, I 픽쳐 또는 P 픽쳐를 선두로 하며, 또한 B 픽쳐를 포함하는 데이터 그룹(Pack_V)으로 이루어지는 화상 데이터를 처리하는 화상 데이터 처리 방법이고, 1회째의 연결 녹화 시에, 연결 녹화할 데이터 그룹 전에 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 EditPack_V_h가 붙여진 기록 매체에서, 해당 EditPack_V_h를 분리 제거하고 2회째의 연결 녹화를 행함으로써, 2회째의 연결 녹화 시에, 불필요한 스태핑이나 카피 픽쳐를 제거하여 화질의 열화를 방지한다.

Description

화상 데이터 처리 장치 및 방법{IMAGE DATA PROCESSING DEVICE AND METHOD}

본 발명은, MPEG(Motion Picture Expert Group) 방식에 의해 부호화한 화상 데이터를 기록 매체 상에 기록 처리하는 화상 데이터 처리 장치 및 방법에 관한 것이다.

본 출원은, 일본에서 2002년 7월 8일에 출원된 일본 특허 출원 번호 제2002-199073호를 기초로 하여 우선권을 주장하는 것이며, 이 출원은 참조로서, 본 출원에 원용된다.

종래, 동화상을 고효율로 압축 부호화하는 방법으로서, MPEG2(ISO/IEC13818)로 대표되는 디지털 동화상 부호화 방식이 제안되어 있다. 이 MPEG2 방식에 의한 화상 압축은, 화상 간의 움직임 보상과 DCT(Discrete Cosine Transformation)를 조합한 하이브리드 방식의 변환을 행하고, 이것에 의해 얻어지는 신호에 대하여 양자화나 가변 길이 부호화를 더 실시한다.

MPEG2 방식에서는, 부호화 방식으로서 쌍방향 예측 부호화 방식이 채용되어 있다. 이 쌍방향 예측 부호화 방식에서는, 프레임내 부호화, 프레임간 순방향 예측 부호화 및 쌍방향 예측 부호화의 3 타입의 부호화가 행해지며, 각 부호화 타입에 따른 화상은, 각각 I 픽쳐, P 픽쳐 및 B 픽쳐라 부르고 있다. 또한, I, P, B의 각 픽쳐를 적절하게 조합하여 랜덤 액세스의 단위로 되는 GOP(Group of Pictures)가 구성된다. 덧붙여서 말하면, 각 픽쳐의 발생 부호량은, I 픽쳐가 가장 많고, 다음으로 P 픽쳐, B 픽쳐로 이어지는 것이 일반적이다.

이 MPEG2 방식과 같이, 픽쳐 타입마다 발생 부호량이 상이한 부호화 방법에서, 기록 매체에 기록한 부호화 비트 스트림을, 재생 시에 디코더에서 정확하게 부호화하여 화상을 얻기 위해서는, 디코더에서의 입력 버퍼 내의 데이터 점유량을 인코더에 의해 항상 파악해야 한다.

도 1은, 디코더에서의 입력 버퍼의, 공급된 MPEG 스트림에 대한 데이터 점유량의 추이를 나타내고 있다. 도 1에서, 횡축은 시간(t)을 나타내고 있으며, 공급되는 MPEG 스트림에 포함되는 각 픽쳐의 디코드 타이밍(t101, t102, t103…)이 기록되어 있다. 또한, 종축은 입력 버퍼가 저장하는 데이터 점유량을 나타내고 있다.

입력 버퍼는, MPEG2 방식으로 화상 압축된 MPEG 스트림을 그 비트 레이트에 따라 순차 저장해 간다. 그리고, MPEG 스트림의 공급이 개시된 t100에서부터 VBV 딜레이(vbv_delay) 시간 경과된 t101에서, 디코드 처리를 위해, 최초의 픽쳐가 디코더로부터 방출된다. 이 디코더에 의해 방출되는 픽쳐의 데이터량은, 그 픽쳐의 데이터 사이즈(picture_size)와, 픽쳐 스타트 코드의 데이터 사이즈(picture_start_code)와, 시퀀스 헤더의 데이터 사이즈(sequence_header)와, GOP 헤더의 데이터 사이즈(GOP_header)를 추가한 데이터량(이하, 이미지 사이즈라 함)이다.

덧붙여서 말하면, 입력 버퍼에는 t101 이후에도, MPEG 스트림이 소정의 비트 레이트에 따라 순차적으로 계속 공급된다. t101에서부터 디코드 관리 시간(Decode Time Stamp)의 간격인 ΔDTS 마다 경과해가는 t102, t103,…에서도, 각 픽쳐의 이미지 사이즈분의 데이터량이 디코더에 의해 방출된다. 이러한 입력 버퍼에서는, 공급된 MPEG 스트림의 총 데이터량과, 각 디코드 타이밍에서 방출된 픽쳐의 이미지 사이즈의 총 데이터량 간의 차분이, 입력 버퍼의 버퍼 사이즈보다 커지면 오버 플로우되고, 반대로 작아지면 언더 플로우되게 된다.

이 때문에, MPEG 방식에서는, 디코더에서의 입력 버퍼에 대응하는 가상 버퍼로서, 인코더측에 VBV(video Buffering Verifier) 버퍼를 상정하고, 발생하는 부호량을 제어한다. 인코더에서는, VBV 버퍼에 이상이 생기지 않도록, 바꾸어 말하면 VBV 버퍼를 언더 플로우 혹은 오버 플로우시키지 않도록 각 픽쳐의 발생 부호량을 컨트롤한다.

그런데, 화상 데이터가 이미 녹화되어 있는 자기 테이프 등의 기록 매체 상에서, 그 녹화 종료 위치에서부터 화상 데이터를 새롭게 녹화하는, 소위 연결 녹화를 하는 경우가 있다. 덧붙여서 말하면, 프레임 내만 압축하는 DV(Digital Video) 방식의 VTR(Video Tape Recorder)에서는, 1 프레임을 10개의 트랙으로 나누어 기록하기 때문에, 테이프 주행 중에 재생으로부터 기록으로 전환하여, 녹화할 프레임을 압축한 화상 데이터를 다음 트랙에서부터 기록함으로써 용이하게 연결 녹화할 수 있다.

그러나, 프레임간 압축을 이용하는 MPEG2 방식에서는, 1 프레임의 사이즈가 변동되기 때문에, 기록하는 트랙의 수를 고정할 수 없어서, 용이하게 연결 녹화할 수 없었다.

도 2는, 이러한 종래예에 대하여, 기록 매체의 편집점 전후에서의 MPEG 스트림에 대한 데이터 점유량의 추이예를 나타내고 있다. VBV_delay_0은, 이미 기록 매체 상에 기록되어 있는 화상 데이터의 기록 종료 위치 직전의 VBV 딜레이이고, VBV_delay_2는, 1회째의 연결 녹화를 행한 화상 데이터의 선두에 위치하는 I 픽쳐의 VBV 딜레이이다. 이 도 2에 도시한 바와 같이, VBV_delay_0보다도 VBV_delay_2쪽이 작은 경우에는, 카피 픽쳐 없이 스태핑만 삽입되게 된다. 한편, VBV_delay_0보다도 VBV_delay_2쪽이 큰 경우에는, 카피 픽쳐 및 스태핑이 삽입되게 된다.

그러나, 1회째의 연결 녹화가 행해진 기록 매체의 편집점에서 다른 화상 데이터를 재차 녹화하는, 소위 2회째의 연결 녹화를 행하면 이하의 문제점이 발생한다.

먼저 VBV_delay_0보다도 VBV_delay_2쪽이 작기 때문에 스태핑 바이트만 삽입되는 경우에, 삽입될 스태핑 바이트는, 편집점 직전의 비디오 엘리먼트리 스트림(ES)과 일체로서 디코드된다. 이 때문에, 기록 매체 상에서 스태핑과 비디오 ES 간의 경계가 없어져서, 뒤에서부터는 분리할 수 없다는 문제점이 발생한다.

도 2에서, 1회째의 연결 녹화를 행한 화상 데이터의 I 픽쳐의 선두를 편집점으로 하여, 2회째의 연결 녹화를 행하는 경우에, 2회째의 연결 녹화를 행한 화상 데이터의 선두에 위치하는 I 픽쳐의 VBV 딜레이를 VBV_delay_3으로 하였을 때, VBV_delay_3은, VBV_delay_2보다 크고, 또한 VBV_delay_0보다 작다.

이 때문에, VBV_delay_3과 VBV_delay_0을 비교하여 삽입하는 스태핑 바이트 등의 양을 정하면 충분하므로, VBV_delay_3이 VBV_delay_2보다 크기 때문에, VBV_delay_0과 VBV_delay_2 사이에 이미 삽입되어 있는 스태핑 바이트를 남긴 채로, 또한 카피 픽쳐와 스태핑 바이트를 삽입하게 된다. 이 때문에, 쓸데없는 화면 홀드가 발생한다는 문제점이 있다.

마찬가지로, VBV_delay_0보다도 VBV_delay_2쪽이 크기 때문에 카피 픽쳐 및 스태핑 바이트가 삽입되어 있는 경우에도, 2회째의 연결 녹화 시에, VBV_delay_3과 VBV_delay_0을 비교하여 삽입하는 스태핑 바이트 등의 양을 정하면 충분하므로, VBV_delay_3이 VBV_delay_0보다 작은 경우에는, 카피 픽쳐는 불필요해짐에도 불구하고, VBV_delay_2와 VBV_delay_0의 관계에서 불필요한 카피 픽쳐나 스태핑 바이트를 남긴 뒤에, 또한 추가 스태핑을 삽입하게 된다. 이 때문에, 쓸데없는 화면 홀드가 발생한다.

또한, 2회째의 연결 녹화 시에, 이미 녹화되어 있는 화상 데이터의 보조 데이터를 기록 매체로부터 판독한 VBV_delay_0을, VBV 버퍼에서의 데이터 점유량으로 환산하고, 이것을 인코더의 초기값으로서 설정함으로써, 연결 녹화하는 편집점의 전후를 연속 재생하여도 입력 버퍼를 혼란시키지 않고 디코드할 수 있도록 하는 방법도 제안되어 있다.

그러나, VBV_delay_2와의 관계에서 쓸데없는 스태핑이나 카피 픽쳐가 남겨져 있으면 판독한 VBV_delay_0의 값이 작아져서 인코드 후의 화질이 열화되거나, 쓸데없는 화면 홀드가 발생하게 된다는 문제점이 있다.

〈발명의 개시〉

본 발명의 목적은, 전술한 바와 같은 종래의 화상 데이터 처리 장치 및 방법이 갖는 문제점을 해소할 수 있는 신규의 화상 데이터 처리 장치 및 방법을 제공하는 것에 있다.

본 발명의 다른 목적은, 2회째의 연결 녹화 시에, 불필요한 스태핑이나 카피 픽쳐를 제거하여, 화질의 열화를 방지할 수 있는 화상 데이터 처리 장치 및 방법을 제공하는 것에 있다.

본 발명에 따른 화상 데이터 처리 장치는, MPEG 방식에 의해 부호화되고, 또한 각각 보조 기록 영역(AUX_V)이 형성되며, I 픽쳐 또는 P 픽쳐를 선두로 하고, 또한 B 픽쳐를 포함하는 데이터 그룹(Pack_V)으로 이루어지는 화상 데이터를 처리하는 화상 데이터 처리 장치에서, Pack_V가 이미 기록되어 있는 기록 매체 상의 편집점 상에, 편집되는 데이터 그룹(Pack_V_h)을 기록하고, 또한 복호화 시에 이용되는 VBV(Video Buffering Verifier) 버퍼의 비트 점유량에 따라, 해당 Pack_V_h 앞에, 각각 삽입 보조 기록 영역(EditAUX_V_h)이 형성되고, 전(前) 픽쳐를 반복하여 표시하는 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_h)을 기록 매체 상에 기록하는 기록 수단을 포함하고, 기록 수단은, 기록 매체 상의 편집점에 상기 EditPack_V_h가 기록되어 있는 경우에, 해당 EditPack_V_h와 독립하여, 새롭게 입력된 데이터 그룹(Pack_V_n) 앞에 위치하며, 각각 삽입 보조 기록 영역(EditAUX_V_n)이 형성되고 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_n)을, 편집점에 기초하여 기록하도록 한 것이다.

본 발명에 따른 화상 데이터 처리 방법은, MPEG 방식에 의해 부호화되고, 또한 각각 보조 기록 영역(AUX_V)이 형성되며, I 픽쳐 또는 P 픽쳐를 선두로 하고, 또한 B 픽쳐를 포함하는 데이터 그룹(Pack_V)으로 이루어지는 화상 데이터를 처리하는 화상 데이터 처리 방법에서, 상기 Pack_V가 이미 기록되어 있는 기록 매체 상의 편집점 상에, 편집되는 데이터 그룹(Pack_V-h)을 기록하고, 복호화 시에 이용되는 VBV(Video Buffering Verifier) 버퍼의 비트 점유량에 따라, 해당 Pack_V_h 앞에, 각각 삽입 보조 기록 영역(EditAUX_V_h)이 형성되고, 전 픽쳐를 반복하여 표시하는 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_h)을 기록 매체 상에 기록하는 기록 단계를 가지며, 기록 단계는, 기록 매체 상의 편집점에 상기 EditPack_V_h가 기록되어 있는 경우에, 해당 EditPack_V_h와 독립하여, 새롭게 입력된 데이터 그룹(Pack_V_n) 앞에 위치하며, 각각 삽입 보조 기록 영역(EditAUX_V_n)이 형성되고 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_n)을, 편집점에 기초하여 기록하도록 한 것이다.

본 발명의 또 다른 목적, 본 발명에 의해 얻어지는 구체적인 이점은, 이하에서 도면을 참조하여 설명되는 실시 형태의 설명으로부터 한층 명백해질 것이다.

도 1은 디코더의 입력 버퍼에 공급된 MPEG 스트림에 대한 데이터 점유량의 추이를 나타낸 도면.

도 2는 종래 기술의 문제점을 설명하기 위한 도면.

도 3은 본 발명을 적용한 화상 데이터 처리 장치를 도시하는 블록도.

도 4는 기록 트랙이 형성된 자기 테이프를 도시하는 평면도.

도 5는 자기 테이프에 형성된 헬리컬(Helical) 트랙의 구성을 도시하는 도면.

도 6은 데이터 그룹을 도시하는 도면.

도 7은 화상 데이터 처리 장치에 대하여 마지막에 공급된 데이터 그룹에서의 데이터 점유량의 추이를 나타낸 도면.

도 8은 다음 픽쳐의 vbv_delay_n의 값이 미지인 경우에, 기록 시에 미리 연산하는 예를 설명하기 위한 도면.

도 9는 연결 녹화 시의, ECC 처리부의 ECCBank 메모리의 처리에 대하여 설명하기 위한 도면.

도 10은 인코더에서의 부호량 제어의 흐름을 나타내는 도면.

도 11의 (A) 및 도 11의 (B)는, vbv_delay_n에 기초하여 연산한 vbv_occupancy_f가 설정값을 하회하는 경우에 카피 픽쳐를 계속 삽입하는 예를 설명하기 위한 도면.

도 12는, 다른 전자 기기로부터 입력된 화상 데이터의 데이터 스트림을 연결 녹화하는 경우에, 계승한 vbv_delay_n의 값이 극단적으로 작을 때의 처리에 대하여 설명하기 위한 도면.

도 13은, 기록 END점 직후의 픽쳐 타입이 P 픽쳐인 경우에서의 연결 녹화의 결점에 대하여 설명하기 위한 도면.

도 14는 연산한 카피 픽쳐나 스태핑의 기록 방법에 대하여 설명하기 위한 도면이다.

도 15는, 1회째의 연결 녹화를 행한 데이터 그룹 N1의 선두를 재기록 위치로 하며, 2회째의 연결 녹화를 행하는 경우의, 시각에 대한 VBV 버퍼의 데이터 점유량을 나타낸 도면.

도 16은 스태핑 바이트를 구성하는 ES에 대해서만 PES 헤더를 부가하는 경우에 대하여 설명하기 위한 도면.

도 17은 2회째의 연결 녹화 시에서의 재기록 위치에 대하여 설명하기 위한 도면.

도 18은 카피 픽쳐와 스태핑 바이트 양쪽을 자기 테이프 상에 기록하는 경우에 대하여 설명하기 위한 도면.

〈발명을 실시하기 위한 최량의 형태〉

이하, 본 발명에 따른 화상 데이터 처리 장치 및 방법을 도면을 참조하면서 상세히 설명한다.

본 발명을 적용한 화상 데이터 처리 장치(1)는, 동화상을 고효율로 압축 부호화하는 MPEG2(ISO/IEC13818) 방식에 의해 디지털 동화상 부호화하여 자기 테이프에 기록하는 장치이며, 도 3에 도시한 바와 같이, 외부 입력부(11)와, 픽쳐 사이즈 측정부(12)와, 인코더(13)와, 삽입 처리부(14)와, 보조 데이터 생성부(15)와, 스트림 기록 처리부(16)와, ECC(Error Correction Code) 처리부(17)와, 기록 회로(18)와, 재생 회로(19)와, 보조 데이터 추출부(20)와, 스트림 재생 처리부(21)와, 헤더 추출부(22)와, VBV(Video Buffering Verifier) 딜레이 추출부(23)와, 외부 출력부(24)와, 디코더(25)와, 제어부(26)를 구비하고 있다.

외부 입력부(11)는, 외부에 있는 다른 전자 기기로부터 TS(Transport Stream)로서 전송되는 화상 데이터를 PES(Packetized Elementary Stream)로 분할하고, 이것을 스트림 기록 처리부(16)로 송신한다. 덧붙여서 말하면, 이 외부 입력부(11)에 입력되는 화상 데이터를 구성하는 각 픽쳐의 사이즈는, 픽쳐 사이즈 측정부(12)에 의해 측정된다.

인코더(13)는, VBV 딜레이 추출부(23)로부터 송신되는 VBV(Video Buffering Veriiier) 딜레이에 기초하여, 입력되는 화상 데이터를, 픽쳐 타입, 양자화 단계 등의 부호화 파라미터에 기초하여 부호화를 행한다. 이 인코더(13)는, 이 부호화한 화상 데이터를 스트림 기록 처리부(16)로 송신한다.

삽입 처리부(14)는, 화상 데이터의 부호화 시에, 발생 부호량이 적은 경우에서의 의사 데이터로서, 전 픽쳐를 반복하여 표시하는 카피 픽쳐나 스태핑 바이트를 생성한다. 덧붙여서 말하면, 이 스태핑 바이트는 특별히 의미를 갖지 않는 데이터이므로, 디코더측에서 읽고 버려진다. 이 삽입 처리부(14)는 생성한 카피 픽쳐나 스태핑 바이트를 스트림 기록 처리부(16)로 출력한다.

보조 데이터 생성부(15)는 I 픽쳐 또는 P 픽쳐를 선두로 하여, B 픽쳐를 포함하는 데이터 그룹마다 첨부되는 보조 데이터(AUX)를 스트림 기록 처리부(16)로 출력한다.

스트림 기록 처리부(16)는, 외부 입력부(11) 혹은 인코더(13)로부터 화상 데이터를 취득한다. 또한, 이 스트림 기록 처리부(16)는, 삽입 처리부(14)로부터 카피 픽쳐나 스태핑 바이트가 공급되고, 보조 데이터 생성부(15)로부터 보조 데이터가, 또한 헤더 추출부(22)로부터 각종 헤더가 입력된다. 스트림 기록 처리부(16)는, 화상 데이터에서의 I 픽쳐 혹은 P 픽쳐로부터 시작되는 데이터 그룹 사이에, 보조 데이터나 카피 픽쳐 등을 삽입하여 하나의 데이터 스트림을 형성한다. 이 때, 스트림 기록 처리부(16)는, 생성한 데이터 스트림으로부터 VBV 딜레이 추출부(23)에 의해 VBV 딜레이가 추출되는 경우도 있다. 스트림 기록 처리부(16)는, 이 형성한 데이터 스트림을 ECC 처리부(17)로 송신한다.

ECC 처리부(17)는, 입력된 데이터 스트림에 ECC(Error Correction Code)를 부가하고, 또한 인터리브 처리 등을 실시한다. 이 ECC 처리부(17)는, 도시하지 않은 독자적인 ECCBank 메모리를 가지며, 실제로 자기 테이프(4)에 기록하는 데이터 스트림을 일시 기억시킨다.

기록 회로(18)는, ECC 처리부(17)로부터 입력된 데이터 스트림을 자기 테이프(4)에 기록한다. 이 기록 회로(18)는, 예를 들면 입력된 데이터를 직렬 데이터로 변환한 후에 증폭하고, 회전 드럼(도시 생략)을 통해 회전되는 자기 테이프(4)에, 자기 헤드(도시 생략)를 통해 기록한다.

재생 회로(19)는, 자기 테이프(4) 상에 기록되어 있는 화상 데이터를 재생하고, 또한 후술하는 자기 테이프(4) 상의 보조 기록 영역에 기록되어 있는 보조 데이터를 판독하여, 이것을 ECC 처리부(17)로 송신한다.

스트림 재생 처리부(21)는, 자기 테이프(4)로부터 재생되는 화상 데이터 및 보조 데이터가 재생 회로(19) 및 ECC 처리부(17)를 통해 입력된다. 이 스트림 재생 처리부(21)는, 입력된 화상 데이터를 외부 출력부(24) 혹은 디코더(25)로 출력한다. 이 스트림 재생 처리부(21)에 입력된 보조 데이터에서, PTS(Presentation Time Stamp)나 DTS(Decoding Time Stamp)에 대해서는 헤더 추출부(22)에 의해 추출되고, VBV 딜레이에 대해서는 VBV 딜레이 추출부(23)에 의해 추출된다. 그 밖의 보조 데이터에 대해서는, 보조 데이터 추출부(20)에 의해 추출된다.

외부 출력부(24)는, 스트림 재생 처리부(21)로부터 PES로서 입력되는 화상 데이터를 디코드하여 TS화하고, 다른 전자 기기로 전송한다. 디코더(25)는, 스트림 재생 처리부(21)로부터 PES로서 입력되는 화상 데이터를 픽쳐 타입, 양자화 단계 등의 부호화 파라미터에 기초하여 복호화를 행한다.

덧붙여서, 본 발명에 따른 화상 데이터 처리 장치(1)를 구성하는 회로, 요소는, 제어부(26)에 의한 제어에 기초하여 동작한다.

다음으로, 본 발명을 적용한 화상 데이터 처리 장치(1)에서의 자기 테이프(4)로의 기록 방식에 대하여 설명한다. 또한, 여기서 설명하는 기록 방식은, 일본 특개 제2001-275077호 공보에서 제안되어 있는 방식에 기초한다.

자기 테이프(4)는, 도 4에 도시한 바와 같이, 자기 헤드에 의해 영상 신호 등의 정보가 기록되는 헬리컬 트랙(32)으로 구성된다.

헬리컬 트랙(32)은, 자기 테이프(4)의 길이 방향에 대하여 경사되어 형성되어 있다.

1개의 헬리컬 트랙(32)은, 도 5에 도시한 바와 같이, 123개의 싱크 블록과 18개의 C2 패리티 싱크 블록으로 구성된다. 헬리컬 트랙(32)의 16개를, ECC 처리부(17)에서의 C2 ECC의 인터리브 단위로 한다. ECC 처리부(17)에서는, 이 16개분의 헬리컬 트랙(32)에서의 싱크 블록을 ECC면에 인터리브하여 할당하고, C2 패리티를 생성하여 이것을 C2 패리티 싱크 블록에 기록한다.

1개의 싱크 블록은, 95 바이트의 데이터부에, 1 바이트의 싱크 블록 헤더(SB 헤더)와, 트랙쌍 No.나 싱크 블록 No. 등으로 이루어지는 3 바이트의 ID 부와, 이들을 대상으로 한 C1 패리티의 10 바이트가 첨부되어 있으며, 또한 2 바이트의 아연 패턴을 선두에 붙인 111 바이트로 구성되어 있다.

이 트랙쌍 No.는, - 아지머스, + 아지머스 순으로 인접하는 헬리컬 트랙(32) 간에 동일한 값을 취한다. 이하 이 트랙쌍 No.를 2배하여 + 아지머스 트랙만 1을 더한 No.를 트랙 No.로 한다. 또한, SB 헤더는, 그 싱크 블록에 기록되는 데이터의 종류가 기록되어 있다.

덧붙여서 말하면, MPEG2 방식의 PES 버킷으로서 구성되어 있는 Video 데이터나 Audio 데이터는, 각각 소결 블록으로 분할하여 기록되게 된다. Video 데이터는, 도 6에 도시한 바와 같이, I 픽쳐, B 픽쳐, B 픽쳐의 3 프레임, 혹은 P 픽쳐, B 픽쳐, B 픽쳐의 3 프레임의 PES를 결합하고, 이것에 PTS 시각에 따른 Audio 데이터를 덧붙이며, Audio, Video 순으로 교대로 싱크 블록 상에 기록한다. 이 Audio와 Video의 결합 단위를 이후, Pack이라 한다. I 픽쳐, B 픽쳐, B 픽쳐 순으로 구성되는 3 프레임의 Video 데이터, 혹은 P 픽쳐, B 픽쳐, B 픽쳐 순으로 구성되는 3 프레임의 Video 데이터를 데이터 그룹이라 한다.

덧붙여서, Audio 데이터의 보조 데이터로서 AUX_A를, Video 데이터의 보조 데이터로서 AUX_V의 싱크 블록을 Pack 마다 기록한다.

다음으로, 본 발명을 적용한 화상 데이터 처리 장치(1)의 동작에 대하여 설명한다.

MPEG2 방식을 채용하는 화상 데이터 처리 장치(1)는, 픽쳐 타입마다 발생 부호량이 상이하기 때문에, 자기 테이프(4)에 기록한 데이터 스트림을 재생 시에 디코더(25)에서 정확하게 부호화하여 화상을 얻기 위해서는, 디코더(25)에서의 입력 버퍼 내의 데이터 점유량을 인코더(13)에서 항상 파악해야 한다.

도 7은, 화상 데이터 처리 장치(1)에 대하여 마지막에 공급된 데이터 그룹 L에서의, 디코더(25)의 입력 버퍼의 데이터 점유량의 추이를 나타내고 있다. 이 도 7에서, 횡축은 시각(t)을 나타내고 있으며, 공급되는 데이터 그룹 L을 구성하는 각 픽쳐의 디코드의 타이밍(P, B1, B2)이 기록되어 있다. 또한, 종축은 입력 버퍼가 저장하는 데이터 점유량을 나타내고 있다.

입력 버퍼는, MPEG2 방식으로 압축 부호화된 데이터 스트림을 그 비트 레이트에 따라 순차 저장해간다. P 픽쳐가 공급되는 시각은, t11에서 t12까지이며, 또한 B1 픽쳐가 공급되는 시각은 t12에서부터 t13까지이고, 또한 B2 픽쳐가 공급되는 시각은 t13에서부터 t14까지이다. 또한 디코더(25)는, 디코드 처리를 위해, t21에서 P 픽쳐를 방출한다. 마찬가지로, 디코더(25)는, 디코드 처리를 위해, t22에서 B1 픽쳐를 방출하고, 또한 t23에서 B2 픽쳐를 방출한다.

이 디코더(25)에 의해 방출되는 각 픽쳐의 데이터량은, 픽쳐의 데이터 사이즈(picture_size)와, 픽쳐 스타트 코드의 데이터 사이즈(picture_start_code)와, 시퀀스 헤더의 데이터 사이즈(sequence_header)와, GOP 헤더의 데이터 사이즈(GOP_header)를 합한 데이터량(이하, 이미지 사이즈라 함)이다. 이 데이터 그룹 L의 선두에 위치하는 P 픽쳐의 픽쳐 스타트 코드의 최종 바이트가 공급되고 나서, 디코더(25)에 의해 방출되는 시간(t11∼t21)을 VBV 딜레이(vbv_delay_l)라 한다.

도 7에서, 데이터 그룹 L의 후방에는, 데이터 그룹 L의 다음에 삽입할 픽쳐(이하, 다음 픽쳐라 함)가 나타나 있다. 이 다음 픽쳐의 VBV 딜레이(vbv_delay_n)는, t14에서부터 t15까지의 시간이다. 화상 데이터 처리 장치(1)는, 마지막으로 데이터 그룹 L이 공급되었을 때에, 넉넉하게 인코드함으로써, 이 다음 픽쳐의 vbv_delay_n을 취득할 수 있다.

화상 데이터 처리 장치(1)는, 이와 같이 하여 취득할 수 있는 VBV 딜레이(vbv_delay_l, vbv_delay_n)를 보조 데이터로 하여, 각 데이터 그룹마다 설치된 AUX_V에 기록한다. 도 7 중의 하단에는, 데이터 그룹 L 및 다음 픽쳐에 대하여 설치된 AUX_V의 자기 테이프(4)에서의 기록 위치를 나타내고 있다. 데이터 그룹 L에서의 AUX_V의 기록 위치는, 데이터 그룹 L의 선두에 위치하는 P 픽쳐 앞에 제공되어 있다. 마찬가지로, 다음 픽쳐의 AUX_V의 싱크 블록은, 다음 픽쳐의 기록 위치 전방이며, 또한 데이터 그룹 L의 기록 위치 후방에 제공되어 있다.

화상 데이터 처리 장치(1)는, 데이터 그룹 L의 P 픽쳐에 대하여 취득한 vbv_delay_l을, 데이터 그룹 L에 대하여 설치된 AUX_V에 기록한다. 마찬가지로 다음 픽쳐에 대하여 취득한 vbv_delay_n을, 다음 픽쳐에 대하여 설치된 AUX_V에 기록한다.

이러한 데이터 스트림이 기록된 자기 테이프(4)를 재생함으로써, 각 AUX_V에 기록되어 있는 vbv_delay_l, vbv_delay_n을 판독할 수 있다. 이것에 의해, 화상 데이터 처리 장치(1)는, 화상 데이터가 이미 기록되어 있는 자기 테이프(4)에서, 그 기록 종료 위치에서부터 화상 데이터를 새롭게 기록하는, 소위 연결 녹화를 하는 경우에도, 이미 기록되어 있는 화상 데이터의 정보를 얻을 수 있다. 덧붙여서, 연결 녹화하는 화상 데이터에 대하여, 이와 같이 vbv_delay_l 등을 동시에 기록해두는 화상 데이터를 기초 화상 데이터라 한다.

즉, 이 화상 데이터 처리 장치(1)는, 다음 픽쳐를 연결 녹화하는 화상 데이터로서 상정함으로써, 연결 녹화하는 다음 픽쳐가 가질 vbv_delay_n을 기록 시에 미리 구하여 자기 테이프(4) 상에 기록할 수 있다. 이것에 의해 재생 시에, 자기 테이프(4)로부터 vbv_delay_n을 판독하는 것만으로, VBV 버퍼에서의 데이터 점유량으로 환산하여 인코더의 초기값으로서 설정할 수 있기 때문에, 1 프레임의 사이즈가 변동되는 MPEG2 방식에서도, 각 픽쳐의 발생 부호량을 제어할 수 있어서, 입력 버퍼를 혼란시키지 않고 용이하게 연결 녹화를 행할 수 있다.

덧붙여서, 본 발명에 따른 화상 데이터 처리 장치(1)는, 이 데이터 그룹 L에 대하여, 마지막에 공급된 데이터 그룹인 것을 나타내기 위한 END점 플래그를 AUX_V에 기록하는 것도 가능하다. 이것에 의해 연결 녹화할 때, 이 END점 플래그에 기초하여 화상 데이터가 기록되어 있는 영역을 용이하게 식별할 수 있어서, 기존의 화상 데이터 상에 덮어쓰기하게 되는 문제점을 회피하는 것도 가능하게 된다.

화상 데이터 처리 장치(1)는, 마지막에 공급되는 데이터 그룹 L이나 다음 픽쳐에 한하지 않고, 다른 모든 데이터 그룹마다 선두의 픽쳐의 VBV 딜레이를 식별하여, 이것을 각 데이터 그룹마다 설치된 AUX_V에 기록해도 된다. 다음 픽쳐의 AUX_V에서도 마찬가지로 vbv_delay_n이 기록되어 있기 때문에, 각 픽쳐마다 VBV 딜레이를 AUX_V에 기록함으로써, 기록 매체 상에 설치된 모든 AUX_V의 보조 데이터 종류를 공통화할 수 있다.

또한, 화상 데이터 처리 장치(1)는, 보조 데이터로서, VBV 딜레이 이외에 DTS 등을 이용하여 이것을 AUX_V에 기록하여도 되고, 또한 VBV 딜레이의 대체로서 DTS나 PTS를 이용하여도 되는 것은 물론이다.

다른 전자 기기로부터 입력된 DTS나 PTS를 그대로 AUX_V에 기록하면, 재생 시에, 기록한 DTS나 PTS가 점프하게 되는 경우가 있기 때문에, 통상 이 DTS나 PTS에 오프셋값을 가산하고 나서 AUX_V에 기록한다. 데이터 그룹 L의 AUX_V로부터 취득한 DTS를 DTS0으로 한다. 또한, 연결 녹화하는 다음 픽쳐로부터 취득한 DTS를 DTS2로 한다. 이 때, 오프셋값을 DTS0-DTS2+(카피 픽쳐의 갯수)×(카피 픽쳐의 표시 시간)에 기초하여 연산하고, 이것을 DTS 또는 PTS에 가산하고 나서 기록을 행한다.

부호화된 스트림이나, 다른 전자 기기로부터 입력된 스트림을 도중에 중단하는 경우에는, 전술한 바와 같이, 다음 픽쳐의 vbv_delay_n의 값을 인식할 수 있지만, 다른 전자 기기로부터 공급된 데이터 스트림을 최후의 픽쳐까지 모두 기록하였을 때에는 다음 픽쳐가 존재하지 않는다. 이러한 경우에는, 다음 픽쳐의 vbv_delay_n의 값을 인식할 수 없어서, 기록 시에서 AUX_V 상에 보조 데이터로서 기록할 수 없다. 이 때문에, 다른 전자 기기로부터 공급된 픽쳐를 자기 테이프(4) 상에 기록하는 경우에는, 기록 시에 미리 다음 픽쳐의 vbv_delay_n의 값을 연산하고, 이것을 다음 픽쳐의 AUX_V에 기록해둔다. 이것에 의해, 재생 시에, 이 다음 픽쳐의 vbv_delay_n을 용이하게 판독할 수 있어서, 입력 버퍼를 혼란시키지 않고 용이하게 연결 녹화를 행할 수 있다.

도 8은, 이 다음 픽쳐의 vbv_delay_n의 값이 미지인 경우에, 기록 시에 미리 연산하는 예를 설명하기 위한 도면이다. 화상 데이터 처리 장치(1)에는, 마지막에 공급되며, P 픽쳐, B1 픽쳐, B2 픽쳐 순으로 구성되는 데이터 그룹 L이 공급된다. 이 때, 화상 데이터 처리 장치(1)는 이 마지막에 공급되는 데이터 그룹 L의 다음에 공급될 다음 픽쳐의 vbv_delay_n을, 데이터 그룹 L의 선두에 위치하는 P 픽쳐의 vbv_delay_l과, 해당 데이터 그룹 L의 전송 시간(FT) 및 표시 시간(ET)으로부터, 이하의 수학식 1에 의해 구한다.

여기서, 전송 시간 FT에 대해서는, 데이터 그룹 L을 구성하는 3 프레임을 추출하여 비트 수의 합계(d 비트)를 연산한다. 그리고, 이 d를 비트 레이트(Bitrate)로 나누면 전송에 필요한 시간으로 되고, 여기에 90000을 곱함으로써, VBV 딜레이와 동일한 90㎑의 시간 축에서의 전송 시간(FT)으로 된다. 또한 이 데이터 그룹 L을 구성하는 3 프레임의 표시 간격(ET)은, 프레임 레이트가 29.97㎐인 경우에 3003의 3배로 되고, 이것과 전술한 FT와의 차분이 VBV 딜레이의 변화량으로 된다. 이에 따라, vbv_delay_n은, 또한 이하의 수학식 2에 의해 구할 수 있다.

화상 데이터 처리 장치(1)는, 이와 같이 하여 구한 vbv_delay_n을 다음 픽쳐의 AUX_V에 기록한다. AUX_V에 대하여 VBV 딜레이를 기록하는 경우뿐만 아니라, DTS를 기록하는 경우에서도, 마찬가지의 방법에 의해 다음 픽쳐의 DTS를 미리 구할 수 있다.

이와 같이, 본 발명에 따른 화상 데이터 처리 장치(1)는, 다음 픽쳐의 vbv_delay_n의 값이 미지이더라도, 전술한 계산 수학식 1 혹은 수학식 2에 기초하여 구할 수 있기 때문에, 재생 시에 인코더의 초기값을 얻기 위해 기록 종료 위치 직전에 이미 녹화되어 있는 화상 데이터를 전부 판독하여, 픽쳐 사이즈를 계산할 필요가 없어진다. 이것에 의해 본 발명에 따른 화상 데이터 처리 장치(1)는, 계산 시간을 줄일 수 있어서, REC 조작의 천이 시간을 짧게 하는 것도 가능게 된다.

다음으로, 연결 녹화 시의, ECC 처리부(17)의 ECCBank 메모리의 처리에 대하여 설명한다.

먼저 녹화(REC) 중에, 일시 정지(REC_PAUSE)하고, 재차 녹화(REC)함으로써 연결 녹화하는 경우에 대하여 설명한다. 인코더(13)에 의해 부호화된 데이터 스트림이나, 외부 입력부(11)를 통해 입력된 데이터 스트림을 자기 테이프(4) 상에 기록 중에, REC_PAUSE 조작을 행한 경우, 도 9에 도시한 바와 같이, 마지막에 공급되는 3 프레임의 픽쳐로 이루어지는 데이터 그룹 L을 ECCBank에 기입을 끝마쳤을 때의 싱크 블록을 기록 END점으로 하고, 그 후에 재차 REC 조작을 행함으로써 연결 녹화하는 다음 픽쳐가 포함되는 Pack의 AUX_A와, Audio 데이터의 싱크 블록을 기입한다. 그리고 마지막으로 다음 픽쳐의 vbv_delay_n이나 END점 플래그 등의 보조 데이터를 기록하기 위한 AUX_V의 싱크 블록을 기입한다.

이 도 9에 도시하는 AUX_A에서부터 AUX_V까지가 연결 녹화 시에, 보조 데이터를 판독하여, 연결 녹화하는 데이터 스트림의 기입을 개시하는 에리어이다. 덧붙여서 말하면 해당 에리어가, 이 AUX_A의 싱크 블록을 포함하는 ECCBank에서부터, 그 다음 ECCBank까지 이르는 경우에, 기록 처리를 공통화하기 위해, 다음 픽쳐의 AUX_V에서의 싱크 블록의 다음 싱크 블록 이후를 Null 데이터로 저장한다.

ECC 처리부(17)는, 공급되는 데이터 스트림 모두를 기록하여 기초 화상 데이터를 생성하는 데 필요한 ECCBank를, 싱크 블록 혹은 Null 데이터로 매립한 후, 자기 테이프(4) 상에 기록할 때에 사용하는 기록 전류나, 회전 드럼(도시 생략) 등과 같은 자기 테이프(4)에 데이터 스트림을 기록하기 위한 기구를 정지시킨다. 이것은, 자기 테이프(4)에 기록할 때에, 마지막에 기록할 헬리컬 트랙에 데이터를 기록한 후에 즉 기록 전류를 정지하면, 그 마지막에 기록할 헬리컬 트랙에 에러가 발생할 가능성이 있기 때문에, 여분으로 기록 전류를 흘려두기 위해서이다.

자기 테이프(4)에서의 기초 화상 데이터의 기록 END점에서부터 연결 녹화를 행하는 경우에는, 먼저 자기 테이프(4)를 재생함으로써, 이미 기록되어 있는 기초 화상 데이터의 데이터 스트림을 한번 ECC 처리부(17)에서의 ECCBank에 기입하고, 각 AUX_V로부터 END점 플래그를 찾아낸다. 이러한 END점 플래그가 첨부되어 있는 AUX_V를 포함하는 ECCBank와, 그 다음에 계속되는 ECCBank만을 ECCBank 메모리에 보존해두며, 그 이후의 ECCBank의 메모리로의 기입을 중지하고 다음 픽쳐의 기록으로 구비한다. 이 때, END점 플래그가 존재하는 AUX_V로부터 VBV 딜레이나 DTS 등을 추출해두어도 된다.

다음으로, 자기 테이프(4)의 재생 화상을 보면서, 연결 녹화할 다음 픽쳐의 기록을 개시하는 재기록 위치를 지정하는 경우에 대하여 설명한다. ECCBank에서, 재생 PAUSE 조작 시에 화면 상에 표시되어 있던 화상의 데이터 스트림은, 뒤에서부터 공급되는 화상의 데이터 스트림에 의해 덮어쓰기되어 있는 경우가 많다.

3개의 프레임으로 구성되는 데이터 그룹마다 자기 테이프(4) 상에 기록해가는 본 발명에서는, 재생 화상을 보면서 지정한 다음 픽쳐의 재기록 위치에, I 픽쳐, 혹은 P 픽쳐가 존재하고 있는 경우에는, 해당 I 픽쳐, 혹은 P 픽쳐 직전을 다음 픽쳐의 재기록 위치로 하지만, 한편, 지정한 다음 픽쳐의 재기록 위치에, B 픽쳐가 존재하고 있는 경우에는, 해당 B 픽쳐를 구성하는 데이터 그룹 선두의 I 픽쳐, 혹은 P 픽쳐의 직전을 다음 픽쳐의 재기록 위치로 한다.

ECC 처리부(17)는, 이와 같이 하여 다음 픽쳐의 재기록 위치를, 지정한 기록 위치에 존재하는 픽쳐 타입에 따라 결정하고, 자기 테이프(4)를 결정한 기록 위치에 따라 되감아서 재생하며, 이것을 순차 ECCBank 메모리에 기입해간다. 그 때에 DTS 등을 통해, 결정한 재기록 위치나, 그 재기록 위치 직후에 위치하는 데이터 그룹의 I 픽쳐 혹은 P 픽쳐를 검색하여, 그 Pack 선두의 AUX_A를 포함하는 ECCBank와, 그 다음에 계속되는 ECCBank만을 ECCBank 메모리에 보존해두고, 그 이후의 ECCBank의 ECCbank 메모리에의 기입을 중지하고 다음 픽쳐의 기록으로 구비한다. 이 때도 마찬가지로, END점 플래그가 존재하는 AUX_V에서 VBV 딜레이나 DTS 등을 추출해두어도 된다.

자기 테이프(4)의 재생 화상을 보지 않고, 재기록 위치를 선택하지 않고서 연결 녹화를 행하는 경우에는 자기 테이프(4)를 재생하여 데이터 스트림을 순차 ECCBank 메모리에 기입해간다. 그 때에 재기록 위치를 데이터 그룹 단위로 재생순으로 검색한다. 그리고 임의의 재기록 위치 직후에 위치하는 데이터 그룹의 I 픽쳐 혹은 P 픽쳐의 선두의 AUX_A를 포함하는 ECCBank와, 그 다음에 계속되는 ECCBank만을 ECCBank 메모리에 보존해두고, 그 이후의 ECCBank의 ECCBank 메모리로의 기입을 중지하고 다음 픽쳐의 기록으로 구비한다. 이 때도 마찬가지로, END점 플래그가 존재하는 AUX_V로부터 VBV 딜레이나 DTS 등을 추출해두어도 된다.

덧붙여서, 상술한 바와 같이, ECCBank 메모리에 2개의 ECCBank가 보존되어 있는 경우에, 새롭게 입력되는 데이터 스트림은, 이하와 같이 하여 ECCBank로부터 재기입한다. 즉, 재기록 위치 직전의 싱크 블록 내의 데이터 스트림은 그대로 ECCBank 메모리에 남겨둔다. 그리고, 재기록 위치 이후의 싱크 블록에 새롭게 입력되는 데이터 스트림을 중복 기입하고, ECCBank 메모리 상에서 합성한다. 이 때, 이 새로운 데이터 스트림이 중복 기입하여 합성된 ECCBank 메모리 내의 각 데이터 스트림에 대하여 각각 C2 패리티를 재생성한다.

그리고, 재생할 데이터 스트림의 트랙 No.를 시인하면서 재생을 행하고, ECCBank에 첨부된 트랙 No.와 일치하는 트랙으로부터 연결 녹화를 행하도록 한다. 즉, 재기입하는 전후의 데이터 스트림을 자기 테이프(4) 상에서 연속하여 둠으로써, 연결 녹화를 개시하는 재기록 위치에서 특별한 처리를 실시하지 않고 원활한 재생을 실현할 수 있다.

다음으로, 상술한 바와 같이, 기초 화상 데이터가 형성된 자기 테이프(4)의 재생 시에, AUX_V에 기록되어 있는 다음 픽쳐의 vbv_delay_n을 계승하여 인코더의 초기값으로서 설정하는 방법에 대하여 설명한다.

화상 데이터 처리 장치(1)는, 재생 시에, AUX_V에 기록되어 있는 다음 픽쳐의 vbv_delay_n을 취득하고, 이것을 인코더(13)에서의 VBV 버퍼의 데이터 점유량(vbv_occupancy)으로 환산하며, 이 값을 인코더의 초기값으로서 설정한다. 이 VBV 버퍼는, 디코더(25)에서의 입력 버퍼에 대응하는 가상 버퍼로서 상정함으로써, 각 픽쳐마다 발생하는 부호량을 제어하도록 설치되는 것이다. 이 VBV 버퍼의 vbv_occupancy는 계승한 vbv_delay_n에 기초하여, 이하의 수학식 3에 의해 연산할 수 있다.

그런데, 이 수학식 3에 의해 구해진 vbv_occupancy는 화질에서 최적의 값이 된다고는 할 수 없으며, 언더 플로우나 오버 플로우가 발생하여, 계속적으로 화질을 열화시키는 경우가 있다. 이 때문에, 이 수학식 3에 의해 구해진 vbv_occupancy가 어떠한 값이더라도, VBV 버퍼의 용량에 따라 이것을 최적으로 컨트롤하여, 화질의 열화를 방지할 필요가 있다.

화상 데이터 처리 장치(1)는, 수학식 3에 의해 연산한 vbv_occupancy의 초기값(이하, 이 초기값을 vbv_occupancy_f라 함)으로부터, 서서히 이 vbv_occupancy를 보정함으로써, 최적의 vbv_occupancy의 목표값(이하, 이 목표값을 vbv_occupancy_t라 함)으로 천이시킨다. 구체적으로 설명하면, vbv_occupancy_f와 vbv_occupancy_t의 차분을 구함으로써, vbv_occupancy_t에 수속시키는 위해 필요한 부호 발생 보정량을 구한다. 다음으로, 이 부호 발생 보정량을, vbv_occupancy_t로 천이시키는 데 필요한 GOP의 수(이하, 이 GOP의 수를 number_GOP라 함)로 나눔으로써, 1 GOP당 부호 발생량 보정값을 구한다. 즉, 이 부호 발생량 보정값은, 이하의 수학식 4에 의해 연산할 수 있다.

이와 같이, 화상 데이터 처리 장치(1)는, vbv_occupancy_f로부터 vbv_occupancy_f로 천이시키기 위해 복수의 GOP를 써버리게 된다. 즉, 목표로 하는 vbv_occupancy_t에 복수의 GOP 수(number_GOP)를 곱하여 서서히 보정할 수 있기 때문에, 1 GOP당 보정량을 줄일 수 있어서, 일시적인 화질의 열화를 억제할 수 있다.

도 10은, 이 인코더(13)에서의 부호량 제어 흐름을 나타내고 있으며, 도면 중 화살표 방향은 시간 축을 나타내고 있다.

먼저, 단계 S11에서, 수학식 3으로부터 vbv_delay_n에 기초하여 연산한 vbv_occupancy_f와, vbv_occupancy_t의 차분을 구한다. 다음으로, 단계 S12에서, 이와 같이 구한 차분을 number_GOP로 나누어, 1 GOP당 부호 발생량 보정값을 구한다. 다음으로, 단계 S13에서, 비트 레이트에 의해 제어된 각 GOP에서의 부호의 총가산량에 대하여, 이 부호 발생량 보정값을 감산함으로써 보정한다.

한편, GOP 선두를 제외한 각 화상 데이터는 단계 S21에서, 각 프레임마다 remain_bit_GOP로부터 발생 부호량을 감산한다. 또한 GOP 선두에서는 단계 S22에서, 단계 S21을 거친 각 화상 데이터의 부호량에 대하여, 단계 S13에서 각 GOP 마다 보정된 총가산량이 가산되고, 또한 단계 S23의 1 프레임 단위의 인코드 처리에 기초하는 프레임 내 발생 부호량이 감산된다. 인코더(13)는, 이와 같이 하여 부호량 제어된 remain_bit_GOP를 얻을 수 있다. 이 remain_bit_GOP는 GOP 단위로 부호량을 컨트롤되어 있기 때문에, 계속적으로 화질이 열화되지는 않는다.

이 number_GOP는, 어떠한 값으로 설정하여도 되며, 일정한 값으로 고정해도 되고, vbv_occupancy_t-vbv_occupancy_f의 값에 따라 그 때마다 임의로 설정해도 된다. 만일 number_GOP를 일정한 값으로 고정하면, vbv_occupancy_t-vbv_occupancy_f의 값을 막론하고 각 GOP에 균등하게 할당할 수 있다. 또한, number_GOP를 vbv_occupancy_t-vbv_occupancy_f의 값에 따라 그 때마다 임의로 설정함으로써, 1 GOP당 보정량을 최초로 정하고, 필요한 number_GOP를 뒤에서부터 설정하는 것도 가능하게 된다.

화상 데이터 처리 장치(1)는, 전술한 remain_bit_GOP를 각 픽쳐에 할당한다. 이 때 픽쳐 타입마다의 복잡도에 따라, 할당하는 부호량을 바꾸어도 된다.

예를 들면, I 픽쳐의 복잡도를 나타내는 계수를 Xi, P 픽쳐의 복잡도를 나타내는 계수를 Xp, B 픽쳐의 복잡함을 나타내는 계수를 Xb로 하고, GOP 내에서의 P 픽쳐의 미부호화 갯수를 Np, GOP 내에서의 B 픽쳐의 미부호화 갯수를 Nb로 할 때, I 픽쳐의 할당 계수 Y_i, P 픽쳐의 할당 계수 Y_p, B 픽쳐의 할당 계수 Y_b는 각각 이하의 수학식 5, 수학식 6, 및 수학식 7에 의해 나타내는 것이 가능하다.

(Kp=1.0, Kb=1.4)

여기서 remain_bit_GOP를, 상술한 바와 같이, 구해진 각 픽쳐의 할당 계수 Y_i, Y_p, Y_b에 의해 제산함으로써, 각 픽쳐 타입에 할당하는 부호량을 구할 수 있다. 또한, Xi, Xp, Xb의 각 초기값을 각각 1.39×bitrate, 0.52×bitrate, 0.37×bitrate로 하여도 된다.

다음으로, 계승한 vbv_delay_n에 기초하여 연산한, vbv_occupancy_f의 값이 극단적으로 작은 경우의 처리에 대하여 설명한다.

수학식 3에 의해 연산된 vbv_occupancy_f가 극단적으로 작으면, 수학식 4에 기초하여 vbv_occupancy_t로 천이시키더라도, 이하에 설명하는 이유에 의해 화질이 대폭 열화된다.

즉, 연결 녹화하는 다음 픽쳐의 발생 부호량과의 관계에서, 극단적으로 vbv_occupancy_f가 작으면, 인코드 시에 VBV 버퍼의 언더 플로우가 발생하지 않도록, 다음 픽쳐의 발생 부호량에 제약이 걸려서, 화질이 열화되게 된다. 또한 이러한 경우에, number_GOP를 일정한 값으로 고정하면, vbv_occupancy_t로 천이하기까지의 최초의 수 GOP는, 극단적으로 vbv_occupancy가 낮은 상태이기 때문에, 화질이 현저히 열화되고, 또한 최적의 vbv_occupancy_t로 천이할 때까지 장시간을 소모하기 때문에, 빠른 시기에 화질을 개선할 수 없다. 또한, vbv_occupancy_t로의 천이 시간을 단축하기 위해, 1 GOP당 부호 발생 보정량을 크게 하면, vbv_occupancy_t로 천이할 때까지 기간 동안, 화질이 대폭 열화된다.

이 때문에, 본 발명에 따른 화상 데이터 처리 장치(1)에서는, 이러한 화질의 열화를 억제하도록, 수학식 3에 의해 연산한 vbv_occupancy_f에 대하여, 소정의 설정값을 하회하는 경우에 카피 픽쳐를 삽입함으로써, 대폭적인 화질 열화보다는 오히려 화면의 홀드를 선택할 수 있도록 한다.

도 11의 (A)에 도시한 바와 같이, vbv_delay_n에 기초하여 연산한 vbv_occupancy_f가 설정값을 하회하는 경우에, 도 11의 (B)에 도시한 바와 같이, 카피 픽쳐를 계속 삽입한다. 이것에 의해, VBV 딜레이(vbv_delay_n2)는, t41에서부터 t42의 시간대에 상당하게 되기 때문에 외관상 커져서, 이것에 기초하여 연산된 vbv_occupancy_f2는 설정값을 상회한다. 이것에 의해, 화면이 홀드되는 시간은 증가되지만, 화질의 열화를 억제하는 것이 가능하게 된다.

덧붙여서, 이 카피 픽쳐의 삽입 갯수(N)는, 다음 픽쳐의 vbv_delay_n2에 따라 얻어지는 vbv_occupancy_f2가 설정값 이상으로 되도록 계산하여 결정한다.

먼저, 카피 픽쳐를 N개 삽입하면, 다음 픽쳐가 방출되는 시각 t42가 N개분 지연되기 때문에, vbv_delay_n2는 N개분 길어진다. 한편, 카피 픽쳐 1개의 전송 시간 FT의 N배만큼 다음 픽쳐가 뒤로 어긋나게 되기 때문에, 그 만큼 vbv_delay_n2는 짧아진다.

여기서 카피 픽쳐 1개의 표시 시간을 ET로 하였을 때, vbv_delay_n2는 이하의 수학식 8에 의해 표시된다.

덧붙여서 말하면 카피 픽쳐의 표시 시간 ET는 프레임 주파수가 29.97㎐일 때에 3003으로 되며, 프레임 주파수가 25㎐일 때는 3600으로 된다.

카피 픽쳐의 갯수(N)는, vbv_delay_n2가, vbv_occupancy의 설정값으로부터 수학식 3을 이용하여 연산한 vbv_delay의 설정값(vbv_delay_s) 이상으로 되도록 계산하여 구한다. 즉, 상술한 수학식 8에 기초하여 이하에 나타내는 수학식 9를 도출하는 것이 가능하다.

이 수학식 9를 변형한 이하의 수학식 10에 의해, 카피 픽쳐의 삽입 갯수(N)를 구한다.

본 발명을 적용한 화상 데이터 처리 장치(1)에서는, 이와 같이 연산한 카피 픽쳐를 N개 삽입함으로써 얻어지는 vbv_delay_n2를 취득하고, VBV 버퍼에서의 데이터 점유량으로 환산하여 인코더의 초기값으로 할 수 있다. 이것에 의해, 수학식 3에 의해 연산한 vbv_occupancy_f가 극단적으로 작은 경우에도, 대폭 화질을 열화시키지 않고 vbv_occupancy를 최적으로 컨트롤할 수 있다.

다음으로, 다른 전자 기기로부터 입력된 화상 데이터의 데이터 스트림을 연결 녹화하는 경우에, 계승한 vbv_delay_n의 값이 극단적으로 작을 때의 처리에 대하여 설명한다.

다른 전자 기기로부터 입력된 데이터 스트림을 연결 녹화하는 경우에는, 카피 픽쳐 외에 스태핑 바이트를 삽입함으로써, vbv_occupancy를 컨트롤한다.

도 12에 도시한 바와 같이, vbv_delay_n에 기초하여 연산한 vbv_occupancy_f가 설정값을 하회하는 경우에, t51에서부터 t52까지, 카피 픽쳐를 삽입하고, 또한 스태핑 바이트를 삽입한다.

이 카피 픽쳐의 갯수나 스태핑 바이트의 양은 이하의 방법으로 결정할 수 있다.

먼저, 기록 END점의 직후에 위치하는 다음 픽쳐의 AUX_V로부터 vbv_delay_n을 취득한다. 다음으로, 연결 녹화하는 화상 데이터가 다른 전자 기기로부터 공급되었을 때에, 해당 공급된 화상 데이터의 선두에 위치하는 I 픽쳐의 헤더로부터 VBV 딜레이를 취득하고, 이것을 vbv_delay_n3으로 한다. 또한, 다음 픽쳐의 헤더로부터 400bps 단위로 표시되는 Bitrate를 취득한다.

이 때, 카피 픽쳐의 바이트 수를 B_copy로 하였을 때, 그 전송 시간을 90㎑ 단위로 환산한 T_copy는, 이하의 수학식 11로 나타낼 수 있다.

이 환산 계수는, 90㎑ 단위에서, 이하의 수학식 12에 의해 1800으로 된다.

여기서, 취득한 VBV 딜레이의 차분값 VBVD_TN은 이하의 수학식 13에 의해 정의할 수 있다.

여기서, VBVD_TN≤0일 때, 카피 픽쳐의 갯수(N_copy)를 0으로 하고, 스태핑 바이트의 삽입만 실행한다. 한편, VBVD-TN>O일 때, 이하의 수학식 14에 의해 구한 갯수(N_copy)분으로, 카피 픽쳐를 삽입한다. 덧붙여서 말하면, 이 수학식 14에서는 구하는 N_copy를 정수로 반올림한다.

수학식 14에서 정수로 반올림된 분을 수학식 15, 수학식 16에 의해 구해지는 스태핑 바이트(B_Stuf)에 의해 보충한다.

즉, 본 발명을 적용한 화상 데이터 처리 장치(1)는, 다른 전자 기기로부터 데이터 스트림이 입력된 경우에, 각각 취득한 vbv_delay_n과, vbv_delay_n3에 따라, 카피 픽쳐를 삽입하거나, 혹은 스태핑 바이트를 삽입할 수 있다. 이에 따라, vbv_delay_n3에 대하여, vbv_delay_n이 어떠한 값이더라도, 카피 픽쳐를 삽입하고, 또한 스태핑 바이트를 삽입할 수 있기 때문에, 화질을 거의 열화시키지 않고, 원하는 vbv_occupancy로 컨트롤할 수 있다.

기록 END점 직후의 픽쳐 타입이 P 픽쳐인 경우에, 해당 P 픽쳐로부터, I 픽쳐에서 시작되는 다음 픽쳐를 연결 녹화하는 경우에는 도 13에 도시한 바와 같이, 시퀀스 헤더/GOP 헤더분만큼 레이트가 높아지게 된다. 이 때문에, 시퀀스 헤더/GOP 헤더분에 따른 VBV 딜레이를 보정값으로 하여, 구한 vbv_delay_n으로부터 뺄 필요가 있다.

이 보정값을 계산할 때에는, 정수에 의해 스텝화한다. 이 정수에 의한 스텝화 시에, 단수(端數)가 발생한 경우에는 반올림함으로써, 시퀀스 헤더/GOP 헤더분의 레이트를 낮추도록 한다. 연산한 보정값은, 다음 픽쳐의 vbv_delay_n의 계승 시, 카피 픽쳐나 스태핑량의 계산 시에 이용한다.

다음으로, 연산한 카피 픽쳐나 스태핑의 기록 방법에 대하여 설명한다.

도 14에 도시한 바와 같이, 자기 테이프 상에는 각각 AUX_V가 형성되고, I 픽쳐 또는 P 픽쳐를 선두로 하여, B 픽쳐를 포함하는 데이터 그룹이 이미 기록되어 있다. 덧붙여서 말하면 도 14에 도시하는 예에서는, 기초 화상 데이터의 예로서, 화상 데이터 처리 장치(1)에 대하여 마지막에 공급된 데이터 그룹 L이 나타나 있다.

이 데이터 그룹 L의 기록 END점 이후의 재기록 위치에는, 1회째의 연결 녹화할 다음 픽쳐를 포함하는 데이터 그룹 N1이 기록되게 된다. 이 데이터 그룹 N1에서도 보조 데이터를 기록하기 위한 AUX_V가 형성되어 있다.

또한, 데이터 그룹 L과 데이터 그룹 N1 사이에는, 삽입 보조 기록 영역(EditAUX_V_h)이 형성되고 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_h)이 기록된다. 이 EditPack_V_h는, VBV 버퍼의 비트 점유량에 따라 설치된다.

이 카피 픽쳐나 스태핑 바이트를 하나로 통합한 EditPack_V_h는, 어디까지나 데이터 그룹 L이나 데이터 그룹 N1과 독립한 데이터 그룹으로서 기록한다. 이것에 의해, 상황에 따라 이 EditPack_V_h만을 분리하는 것이 가능하게 된다. EditAUX_V_h에는, 스태핑의 VBV 딜레이에 상당하는 값을 기록한다. 이 때, 데이터 그룹 N1의 AUX_V 기록되어 있는 vbv_de1ay_n을 계승하여, 이 EditAUX_V_h에 기록해도 된다.

이와 같이 1회째의 연결 녹화가 행해진 기록 매체의 재기록 위치에서 다른 화상 데이터를 재차 녹화하는, 소위 2회째의 연결 녹화를 행하는 경우에는, 이 EditPack_V_h를 분리하여 제거한다. 그리고, 도 14에 도시한 바와 같이, 2회째의 연결 녹화를 행하는 데이터 그룹 N2가 기록된다. 이 데이터 그룹 N1에서도 보조 데이터를 기록하기 위한 AUX_V가 형성되어 있다. 또한, 데이터 그룹 L과 데이터 그룹 N2 사이에, 삽입 보조 기록 영역(EditAUX_V_h2)이 형성되고 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_h2)이 기록된다.

이와 같이, 2회째의 연결 녹화 시에, 1회째의 연결 녹화 시에 기록한 EditPack_V_h를 제거함으로써, 이하의 효과를 얻을 수 있다.

도 15는 1회째의 연결 녹화를 행한 데이터 그룹 N1의 선두를 재기록 위치로 하여, 2회째의 연결 녹화를 행하는 경우의, 시각에 대한 VBV 버퍼의 데이터 점유량을 나타내고 있다. 이 도 15에 도시된 바와 같이, 데이터 그룹 N2의 VBV 딜레이(vbv_delay_h2)는, 데이터 그룹 N1의 VBV 딜레이(vbv_delay_h1)보다도 크며, 또한 데이터 그룹 L의 vbv_delay_n보다도 작다. 이 때문에, vbv_delay_h2와 vbv_delay_n을 비교하여, 삽입할 카피 픽쳐의 갯수나 스태핑 바이트의 양을 정하면 충분하므로, 1회째의 연결 녹화 시에 vbv_delay_n과, vbv_delay_h1과의 관계에서, 이미 불필요한 스태핑 바이트 등이 EditPack_V_h를 통해 기록되어 있다.

본 발명을 적용한 화상 데이터 처리 장치(1)에 따르면, 데이터 그룹 N2가 공급될 때까지, 1회째의 연결 녹화에서의 스태핑 바이트 등을 포함하는 EditPack_V_h가 제거되어 있다. 이 때문에, vbv_delay_h1을 무시하고, vbv_delay_h2와 vbv_delay_n 사이에서, 삽입할 스태핑 바이트의 양을 결정할 수 있다. 또한, 불필요한 스태핑 바이트 등이 기록되지 않게 되어, 쓸데없는 화면 홀드의 발생을 억제하는 것도 가능하게 된다.

한편, vbv_delay_n보다도 vbv_delay_h1쪽이 크기 때문에 카피 픽쳐 및 스태핑 바이트가 삽입되는 경우에도, 데이터 그룹 N2가 공급될 때까지, EditPack_V_h가 제거되어 있다. 이 때문에, vbv_delay_h1을 무시하고, vbv_delay_h2와 vbv_delay_n 사이에서, 삽입할 카피 픽쳐의 갯수나 스태핑 바이트의 양을 결정할 수 있다. 또한, 불필요한 카피 픽쳐나 스태핑 바이트 등이 기록되지 않게 되어, 인코드 후의 화질의 열화를 방지하며, 나아가서는 쓸데없는 화면 홀드를 억제할 수 있다.

덧붙여서, EditPack_V_h1이 스태핑 바이트만으로 구성되는 경우에는, 도 16에 도시한 바와 같이, 해당 스태핑 바이트를 구성하는 ES에 대해서만 PES 헤더를 부가한다.

이것에 의해, 스태핑 바이트만을 구성하는 ES를, 다른 ES와 합쳐서 PES 패킷을 구성할 필요가 없어지며, 또한 스태핑의 경계가 명시되게 되기 때문에, 디코드 시에, 해당 PES 헤더가 첨부된 스태핑 바이트를 용이하게 제거할 수 있다.

다음으로, 2회째의 연결 녹화 시에서의 재기록 위치에 대하여 설명한다.

도 17은, t61에서부터 시작되는 vbv_delay_n에 대하여, 카피 픽쳐나 스태핑을 삽입시켜 t62에서부터 시작되는 vbv_delay_h1을 나타내고 있다. 이 때, 2회째의 연결 녹화가 행해지며, 또한 추가 스태핑이 첨부된 vbv_delay_h2는, t62에서부터 추가 스태핑분만큼 지연된 t63에서부터 개시하게 된다.

이 때, vbv_delay_h2와 vbv_delay_n 사이에서, 정확한 추가 스태핑량을 결정하여도, 기록 개시 위치를 t63으로 하면, 2회째의 연결 녹화 시에 제거되는 EditPack_V_h에서의 스태핑 바이트 등의 분만큼, 쓸데없는 화면 홀드가 발생한다. 이 때문에, 본 발명에서는, 2회째의 연결 녹화 시에서의 기록 개시 위치를 vbv_delay_n의 개시 시각인 t61에서부터, 추가 스태핑량 지연시킨 시각 t71로 되도록 제어한다.

즉, 1회째의 연결 녹화 시에서의 스태핑 바이트량이 기록된 EditPack_V_h를 한번 제거하고, vbv_delay_h2와 vbv_delay_n 사이에 새롭게 추가 스태핑량을 계산하며 이 계산한 스태핑량을 다음 픽쳐 전에 삽입한다. 이에 따라 쓸데없는 화면 홀드를 줄일 수 있다.

덧붙여서, AUX_V_h에는, 카피 픽쳐인 것을 식별하기 위한 플래그나, 그 카피 픽쳐의 갯수를 식별하기 위한 플래그를 기록해두어도 된다.

덧붙여서, 카피 픽쳐와 스태핑 바이트 양쪽을 자기 테이프(4) 상에 기록하는 경우에는, 도 18에 도시한 바와 같이, 먼저 카피 픽쳐를 삽입하고, 그 후에 스태핑 바이트를 삽입한다. 이에 따라, 언더 플로우의 발생을 방지할 수 있다.

덧붙여서, 본 발명은 상술한 실시 형태에 한정되는 것은 아니며, 예를 들면, 자기 테이프(4)에 기록하는 경우뿐만 아니라, 다른 자기 디스크를 이용한 다른 기록 매체에도 적용 가능하다. 또한, 상술한 방법은, 방송에서도 적용할 수 있는 것은 물론이다.

상술한 바와 같이, 본 발명에 따른 화상 데이터 처리 장치 및 방법은, 1회째의 연결 녹화 시에 기록한 EditPack_V_h를 분리하여 제거할 수 있기 때문에, 불필요한 스태핑 바이트 등이 기록되지 않게 되어, 쓸데없는 화면 홀드의 발생을 억제하는 것도 가능하게 된다.

Claims (16)

1. MPEG 방식에 의해 부호화되며, 각각 보조 기록 영역(AUX_V)이 형성되고, I 픽쳐 또는 P 픽쳐를 선두로 하며, 또한 B 픽쳐를 포함하는 데이터 그룹(Pack_V)으로 이루어지는 화상 데이터를 처리하는 화상 데이터 처리 장치로서,

   상기 Pack_V가 이미 기록되어 있는 기록 매체 상의 편집점 상에, 편집되는 데이터 그룹(Pack_V_h)을 기록하고, 복호화 시에 이용되는 VBV(Video Buffering Verifier) 버퍼의 비트 점유량에 따라, 상기 Pack_V_h 앞에, 각각 삽입 보조 기록 영역(EditAUX_V_h)이 형성되고, 전(前) 픽쳐를 반복하여 표시하는 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_h)을 기록 매체 상에 기록하는 기록 수단을 포함하고,

   상기 기록 수단은, 상기 기록 매체 상의 편집점에 상기 EditPack_V_h가 기록되어 있는 경우에, 상기 EditPack_V_h와 독립하여, 새롭게 입력된 데이터 그룹(Pack_V_n) 앞에 위치하며, 각각 삽입 보조 기록 영역(EditAUX_V_n)이 형성되고 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_n)을 상기 편집점에 기초하여 기록하는 것을 특징으로 하는 화상 데이터 처리 장치.
2. 제1항에 있어서,

   상기 기록 수단은, 새롭게 입력된 Pack_V_n 앞에 위치하는 EditPack_V_n을 상기 편집점에 기록할 때에 제거하는 것을 특징으로 하는 화상 데이터 처리 장치.
3. 제1항에 있어서,

   상기 AUX_V에 기록되어 있는 VBV 딜레이(VBV_delay)와, 상기 EditAUX_V_n에 기록되어 있는 VBV 딜레이(VBV_delay_n)를 판독하여 비교하는 비교 수단과,

   상기 비교 수단에 의한 비교 결과에 따라, 상기 EditPack_V_n을 구성하는 카피 픽쳐의 갯수를 혹은 스태핑 바이트를 제어하는 제어 수단

   을 구비하는 것을 특징으로 하는 화상 데이터 처리 장치.
4. 제1항에 있어서,

   상기 기록 수단은, 상기 EditPack_V_n을 구성하는 스태핑 바이트에 기초하는 VBV_delay_n을 상기 EditAUX_V_n에 기록하는 것을 특징으로 하는 화상 데이터 처리 장치.
5. 제1항에 있어서,

   상기 기록 수단은, 상기 EditPack_V_h가 스태핑 바이트만으로 구성되는 경우에, 상기 스태핑 바이트에 대하여, PTS와 DTS를 포함하지 않는 PES 헤더를 부가하는 것을 특징으로 하는 화상 데이터 처리 장치.
6. 제1항에 있어서,

   상기 기록 수단은, 상기 기록 매체 상에서 이미 카피 픽쳐가 존재하는 경우에, 상기 카피 픽쳐를 식별하는 플래그를 상기 기록 매체 상에 기록하는 것을 특징으로 하는 화상 데이터 처리 장치.
7. 제6항에 있어서,

   상기 기록 수단은, 상기 카피 픽쳐의 선두를 상기 편집점으로 하는 것을 특징으로 하는 화상 데이터 처리 장치.
8. 제1항에 있어서,

   상기 기록 수단은, EditPack_V_h가 카피 픽쳐 및 스태핑 바이트 양쪽에 구성되어 있는 경우에, 기록 매체 상에 카피 픽쳐를 삽입한 후에 스태핑 바이트를 삽입하고, EditPack_V_n이 카피 픽쳐 및 스태핑 바이트 양쪽에 구성되어 있는 경우에, 기록 매체 상에 카피 픽쳐를 삽입한 후에 스태핑 바이트를 삽입하는 것을 특징으로 하는 화상 데이터 처리 장치.
9. MPEG 방식에 의해 부호화되며, 각각 보조 기록 영역(AUX_V)이 형성되고, I 픽쳐 또는 P 픽쳐를 선두로 하고, 또한 B 픽쳐를 포함하는 데이터 그룹(Pack_V)으로 이루어지는 화상 데이터를 처리하는 화상 데이터 처리 방법으로서,

   상기 Pack_V가 이미 기록되어 있는 기록 매체 상의 편집점 상에, 편집되는 데이터 그룹(Pack_V_h)을 기록하며, 복호화 시에 이용되는 VBV(Video Buffering Verifier) 버퍼의 비트 점유량에 따라, 상기 Pack_V_h 앞에, 각각 삽입 보조 기록 영역(EditAUX_V_h)이 형성되고, 전 픽쳐를 반복하여 표시하는 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_h)을 기록 매체 상에 기록하는 기록 단계를 가지며,

   상기 기록 단계는, 상기 기록 매체 상의 편집점에 상기 EditPack_V_h가 기록되어 있는 경우에, 상기 EditPack_V_h와 독립하여, 새롭게 입력된 데이터 그룹(Pack_V_n) 앞에 위치하며, 각각 삽입 보조 기록 영역(EditAUX_V_n)이 형성되고 카피 픽쳐 및/또는 스태핑 바이트를 포함하는 삽입 데이터 그룹(EditPack_V_n)을 상기 편집점에 기초하여 기록하는 것을 특징으로 하는 화상 데이터 처리 방법.
10. 제9항에 있어서,

    상기 기록 단계에서, 새롭게 입력된 Pack_V_n 앞에 위치하는 EditPack_V_n을, 상기 편집점에 기록할 때에 제거하는 것을 특징으로 하는 화상 데이터 처리 방법.
11. 제9항에 있어서,

    상기 AUX_V에 기록되어 있는 VBV 딜레이(VBV_delay)와, 상기 EditAUX_V_n에 기록되어 있는 VBV 딜레이(VBV_delay_n)를 판독하여 비교하는 비교 단계와,

    상기 비교 수단에 의한 비교 결과에 따라, 상기 EditPack_V_n을 구성하는 카피 픽쳐의 갯수를 혹은 스태핑 바이트를 제어하는 제어 단계

    를 포함하는 것을 특징으로 하는 화상 데이터 처리 방법.
12. 제9항에 있어서,

    상기 제어 단계에서, 상기 EditPack_V_n을 구성하는 스태핑 바이트에 기초하는 VBV_delay_n을 상기 EditAUX_V_n에 기록하는 것을 특징으로 하는 화상 데이터 처리 방법.
13. 제9항에 있어서,

    상기 기록 단계에서, 상기 EditPack_V_h가 스태핑 바이트만으로 구성되는 경우에, 상기 스태핑 바이트에 대하여, PTS와 DTS를 포함하지 않는 PES 헤더를 부가하는 것을 특징으로 하는 화상 데이터 처리 방법.
14. 제9항에 있어서,

    상기 기록 단계에서, 상기 기록 매체 상에서 이미 카피 픽쳐가 존재하는 경우에, 상기 카피 픽쳐를 식별하는 플래그를 상기 기록 매체 상에 기록하는 것을 특징으로 하는 화상 데이터 처리 방법.
15. 제14항에 있어서,

    상기 기록 단계에서, 상기 카피 픽쳐의 선두를 상기 편집점으로 하는 것을 특징으로 하는 화상 데이터 처리 방법.
16. 제9항에 있어서,

    상기 기록 단계에서, EditPack_V_h가 카피 픽쳐 및 스태핑 바이트 양쪽에 구성되어 있는 경우에, 기록 매체 상에 카피 픽쳐를 삽입한 후에 스태핑 바이트를 삽입하며,

    EditPack_V_n이 카피 픽쳐 및 스태핑 바이트 양쪽에 구성되어 있는 경우에, 기록 매체 상에 카피 픽쳐를 삽입한 후에 스태핑 바이트를 삽입하는 것을 특징으로 하는 화상 데이터 처리 방법.