KR19980033397A - 동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체 - Google Patents

동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체 Download PDF

Info

Publication number
KR19980033397A
KR19980033397A KR1019970057469A KR19970057469A KR19980033397A KR 19980033397 A KR19980033397 A KR 19980033397A KR 1019970057469 A KR1019970057469 A KR 1019970057469A KR 19970057469 A KR19970057469 A KR 19970057469A KR 19980033397 A KR19980033397 A KR 19980033397A
Authority
KR
South Korea
Prior art keywords
image
encoding
still
time
data
Prior art date
Application number
KR1019970057469A
Other languages
English (en)
Other versions
KR100257615B1 (ko
Inventor
마츠모토다카오
요네다아키
Original Assignee
모리시타요우이치
마쓰시타덴키산교가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 모리시타요우이치, 마쓰시타덴키산교가부시끼가이샤 filed Critical 모리시타요우이치
Publication of KR19980033397A publication Critical patent/KR19980033397A/ko
Application granted granted Critical
Publication of KR100257615B1 publication Critical patent/KR100257615B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • H04N5/9261—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation involving data reduction
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/3002—Conversion to or from differential modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums

Abstract

본 발명은, 입력 화상을 일정한 프레임 레이트로 캡처할 수 없는 경우에도, 부호화 화상의 프레임 레이트를 일정하게 할 수 있어서, MPEG 등의 일정 프레임 레이트에 있어서의 부호화를 필요로 하는 규격에 준거한, 압축 부호화 데이터를 얻을 수 있는 동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체를 제공하는 것을 목적으로 하는 것이며, 본 발명에 따른 동화상 부호화 방법에서는, 범용 컴퓨터 시스템에 있어서, CPU의 제어에 의해, 주기억을 작업 영역에 이용하여 화상 부호화 처리를 행하는데 있어서, 입력된 동화상을, 화상 캡처 수단이 캡처한 디지탈 화상 데이터를 압축 부호화 처리한 부호화 데이터와, 상기 캡처가 이루어진 시간 정보를 이용하여, 입력 동화상을 구성하는 정지 화상에 근거하여 작성하는 삽입 데이터로부터, 필요한 프레임 레이트를 갖는 부호화 데이터를 얻는다.

Description

동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체
본 발명은, 동화상(moving picture) 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체에 관한 것으로, 특히 동화상을, 캡처에 따른 실시간 처리로 압축 부호화하는 동화상 부호화 방법, 동화상 부호화 장치 및 동화상 부호화 프로그램 기록 매체에 관한 것이다.
본래 아날로그 데이터인 영상(video)이나 음성(audio)을 디지탈화하여, 디지탈 영상 데이터나 음성 데이터를 얻는 기술은, 디지탈 데이터의 기록, 편집, 복제 및 전송 등에 있어서의 취급이 용이하기 때문에, 그 보급과 발전이 현저한 분야로 되고 있다. 디지탈화의 이점중 하나로서, 데이터를 용이하게 압축(compress)할 수 있는 점을 들 수 있고, 특히 기록이나 전송를 위해서는 압축 부호화는 중요한 기술이다. 이러한 압축 부호화 기술에 대해서는, 국제적 규격도 확립되어 있으며, 그 중에서도 MPEG(Moving Picture Experts Group) 규격은, 동화상을 포함하는 영상이나 음성을 취급할 수 있는 일반적인 디지탈 규격으로서 보급되고 있다.
또한, 최근 컴퓨터 및 VLSI 등의 반도체 장치의 고속화, 저 가격화에 따라, 멀티미디어 대응 퍼스콤이라고 불리는 퍼스널 컴퓨터가 저 가격으로 시장에 나와 있으며, 디지탈 음성·화상의 압축 신장 처리가, 가정용·개인용의 저 가격의 PC(Personal Computer)를 이용한 시스템에 있어서도 실현가능한 것으로 되고 있다.
동화상에 대하여, 그 캡처(capture)에 따른 실시간 처리에서의 압축 부호화를 행하여, 얻어진 부호화 데이터를 보존하는 동화상 부호화 장치를, PC를 이용하는 시스템에 있어서 실현하는 종래의 기술에 대하여, 이하에 설명한다. 종래의 기술에 의한, 이러한 동화상 부호화 장치의 일반적인 예를, 제 1예로서 나타내는 것이지만, 이 제 1 예의 동화상 부호화 장치는, 도 13에 도시하는 구성을 갖는 것이다.
동도면에 도시하는 바와 같이 종래의 기술의 제 1 예에 의한 동화상 부호화 장치는, CPU(Central Processing Unit)(301), 주기억(main memory)(302), 버스 브릿지부(303), 화상 캡처부(304), HD(Hard Disk)(305), HD 어댑터부(306), 시스템 버스(system bus)(321), 및 I/O 버스(322)로 구성되며, 화상 캡처부(304)는, A/D 변환부(307)와, 화상 압축 부호화부(308)와, I/O 버스 인터페이스부(309)를 포함하고 있다. 이들은 모두, PC 등의 컴퓨터와, 그 주변기기(peripheral)로 이루어진, 컴퓨터 시스템상에 있어서 실현된다.
CPU(301)는, 명령의 해석과 실행이나, 데이터의 전송(transfer) 제어를 행함으로써, 연산(operation) 처리외의 시스템 전체의 기능을 제어한다. 주기억(302)은, 명령이나 데이터를 일시 기억하는 것이며, 연산 처리외의 처리를 위한 작업 영역으로서 이용된다. 버스 브릿지부(303)는, 상이한 신호로(信號路)인 각 버스간에, 신호 변환 처리를 하는 것에 의해 명령이나 데이터의 전달의 매개의 역할을 행하고, 또한 주기억(302)에 대한 입출력을 제어한다. 화상 캡처부(304)는, 동화상을 텔레비전 신호의 규격으로서 일반적인 NTSC 등에 따른 아날로그 화상 신호로서 입력하여, 디지탈화 및 압축 부호화 처리를 행한다. 화상 캡처부(304)가 갖는 A/D 변환부(307)는 아날로그 화상 신호를 디지탈 화상 데이터로 변환한다. 압축 부호화부(308)는, A/D 변환부(307)로부터의 디지탈 화상 데이터를 일정한 속도로 수신하여, 압축 부호화한다. I/O 버스 인터페이스부(309)는, 화상 압축 부호화(308)로부터 얻어진 화상 압축 데이터를, 주기억(302)으로 전송한다. HD(305)는, 부호화된 동화상 데이터를 보존한다. HD 어댑터부(306)는, I/O 버스에 접속되어 있으며, 주기억(302)상의 데이터를 HD(305)에 전송한다. 시스템 버스(321) 및 I/O 버스(322)는 명령이나 데이터의 전달이 행해지는 신호로이다.
이와 같이 구성된 종래의 기술에 따른 제 1 예의 동화상 부호화 장치에 있어서의 동화상 처리시의 동작을 이하에 설명한다.
입력 화상은, 아날로그 신호로서 해당 동화상 부호화 장치에 입력되어, 화상 캡처부(304)의 A/D 변환부(307)에 의해 일정한 속도로 디지탈 화상 데이터로 변환된다. 동화상 처리에 있어서는, 동화상을 단위 시간 마다의 정지 화상(still picture)의 연속으로서 취급하는 것이며, 이 정지 화상 1장을 프레임 화상이라고 한다. 즉, 1프레임은 1화면(screen)에 상당한다. 또한, 동화상 처리에 있어서의 전송 속도나 처리 속도에 대해서는, 1초당 전송/처리되는 프레임수(프레임 화상수)를 나타내는 프레임 레이트(frame rate)로서 표기되는 것이 일반적이다. 여기서, 상기 A/D 변환의 일정 속도는, 30 fps(프레임/초)인 것으로 한다.
그 후, 화상 압축 부호화부(308)는, A/D 변환부(307)로부터 디지탈 화상 데이터를 수신하여, A/D 변환부(307)가 출력하는 화상의 프레임 레이트와 동일한 프레임 레이트로 압축 부호화를 행한다. 압축 부호화의 규격인 MPEG에서는, 일정 레이트로 처리가 행해질 필요가 있으며, 여기서는 A/D 변환과 압축 부호화를 일정 레이트로 실행함으로써, 규격에 적합한 부호화 데이터를 얻을 수 있도록 도모하는 것이다.
계속해서, I/O 버스 인터페이스부(309)는, 화상 압축 부호화부(308)가 출력하는 화상 압축 데이터를 주기억(302)에 전송한다. 또한, HD 어댑터부(306)는, 주기억(302)에 전송된 상기 화상 압축 데이터를 HD(305)로 전송하여, 압축 부호화의 처리가 이루어진 부호화 데이터가 HD(305)에 기록된다.
종래의 기술의 제 1 예에 의한 동화상 부호화 장치에 있어서는, 이상과 같이 동화상의 처리가 이루어지는 것이지만, 화상 캡처부(304)가 화상 압축 부호화부(308)를 구비하는 것으로서, 이 화상 부호화부(308)가, 많은 화상 압축 처리의 실행에 대응하기 때문에, 대규모의 LSI 등을 필요로 하게 되어, 이러한 동화상 부호화 장치는 일반적으로 고가로 된다. 즉, 제 1 예에 의한 동화상 부호화 장치에서는, 화상 압축 부호화의 처리를 전용 하드웨어에 있어서 실행하는 것이며, 범용 컴퓨터 시스템(general purpose computer system)을 이용하여 실현하기 위해서는, 이러한 화상 압축 부호화의 기능을 갖는 전용 하드웨어를 추가하는 것이 필요해져서, 이로 인해 동화상 부호화 장치의 비용이 상승된다.
따라서, 보다 염가의 동화상 부호화 장치를 제공하기 위해서는, 컴퓨터 확장기기(expansion equipment)로서 시장에 많이 제공되어 있는, 화상 압축 부호화 처리의 기능을 갖지 않는 염가의 화상 캡처 카드 등을 이용하고, 제 1 예에 있어서 화상 캡처부(304)가 갖는 화상 부호화부(308)가 행하는 처리는, 전적으로 CPU 제어에의한 소프트웨어 처리에 있어서 실행하든지, 또는 비교적 처리 능력이 낮은 화상 압축 부호화 LSI 등을 보조적으로 이용함으로써 실행하는 것이 고려된다. 종래의 기술에 의한 장치의 제 2 예로서 도시하는, 이러한 소프트웨어 처리를 실행하는 동화상 부호화 장치는, 도 14에 도시하는 구성의 것으로 된다.
동도면에 도시하는 바와 같이 종래의 기술의 제 2 예에 의한 동화상 부호화 장치는, CPU(401), 주기억(402), 버스 브릿지부(403), 화상 캡처부(404), HD(405), HD 어댑터부(406), 시스템 버스(421) 및 I/O 버스(422)로 구성되며, 화상 캡처부(404)는, A/D 변환부(407)와, I/O 버스 인터페이스부(408)를 포함하고 있다. 제 1 예와 마찬가지로, 모두 PC 등의 컴퓨터와, 그 주변기기로 이루어진, 컴퓨터 시스템상에 있어서 실현되는 것이지만, 비교적 염가의 화상 캡처 카드인 화상 캡처부(404)에 대해서는, 제 1 예와 같이 화상 부호화부(도 13의 (308))를 포함하는 것이 아니라, 즉 화상의 압축 부호화의 기능을 갖지 않는 점이 제 1예에 나타낸 장치와의 상위점이다.
CPU(401)는, 주기억(402)을 작업 영역으로서 이용함으로써, 디지탈 화상 데이터에 대한 압축 부호화 처리를 행한다. 화상 캡처부(404)에 포함되는 A/D 변환부(407)는, 변환 처리에 의해 얻은 디지탈 화상 데이터를 I/O 버스 인터페이스부(408)에 출력한다. 이 밖의 기능은 제 1 예에 나타내는 동화상 부호화 장치와 마찬가지이다.
이와 같이 구성된 종래의 기술에 의한 제 2 예의 동화상 부호화 장치에 있어서의 동화상 처리시의 동작을 이하에 설명한다.
입력 화상은, 제 1 예와 마찬가지로, 아날로그 신호로서 해당 동화상 부호화 장치에 입력되어, 화상 캡처부(404)의 A/D 변환부(407)에 의해, 일정한 속도로 디지탈 화상 데이터로 변환된다. A/D 변환부(407)는 얻어진 디지탈 화상 데이터를 I/O 버스 인터페이스부(408)에 출력하고, I/O 버스 인터페이스부(408)는, 이 디지탈 화상 데이터를 DMA 전송에 의해 주기억(402)에 전송한다. DMA(direct memory access) 전송이란, 주변기기와 주기억, 혹은 주변기기간에, CPU를 거치지 않고, 따라서, CPU의 제어를 필요로 하지 않고서, 직접 데이터를 전송하는 것을 말한다.
주기억(402)상의 디지탈 화상 데이터는, CPU(401)의 제어에 의해 압축 부호화 처리가 이루어져, 얻어진 부호화 데이터도 또, 주기억(402)상에 놓여진다. 그 다음에, HD 어댑터부(406)는 주기억(402)상의 부호화 데이터를 HD(405)에 전송하여, 부호화 데이터는 제 1 예와 마찬가지로 HD(405)에 기록된다.
제 2 예에 의한 동화상 부호화 장치에 있어서는, 상술한 바와 같이, 제 1 예에서는 화상 캡처부(304)의 하드웨어 처리에 따랐던 압축 부호화를, CPU(401)에 의한 제어에 있어서 소프트웨어적으로 실행하여, 컴퓨터 시스템을 동화상 부호화 장치로서 사용하는 경우의 하드웨어적 추가를 염가로 하는 것이다.
이와 같이 하여, 종래의 기술의 제 2 예에 의한 동화상 부호화 장치에서는, 제 1 예와 마찬가지로, 입력되는 동화상을 처리하여 부호화 데이터를 얻을 수 있는 것이지만, 이러한 부호화 장치에 있어서는, 화상 압축 부호화 처리를 위한 처리 시간이 동적으로 변화할 때, 일정한 프레임 레이트로 디지탈화된 입력 화상 데이터를 처리할 수 없는 경우가 있는 문제가 발생할 수 있다.
이는, 예컨대, 상기의 소프트웨어 처리를 멀티태스크 OS(Multitasking Operating System)하에서, 실행하는 경우에 일어날 수 있는 것이다. 즉, 이러한 경우에는, 소프트웨어 처리인 화상 부호화 처리는, 하나의 태스크(작업)로서 다른 태스크와 병행적으로 실행되기 때문에, 필연적으로 다른 태스크의 실행에 의한 영향을 받을 수 있기 때문이다.
예를 들면 제 2 예에 도시한 장치가, 멀티태스크 OS(0perating System)를 OS로서 동작하고 있고, 화상 캡처부(404)로부터 입력 화상을 시간 △t마다 캡처하고, 해당 캡처에 따른 실시간에서의 압축 부호화 처리를 하고자 하는 경우에, 전적으로 해당 화상 부호화 처리만이 실행되고 있는 경우에는, 문제없이 실시간 처리가 이루어졌던 것으로 한다. 그러나, 이러한 처리를 실행하고 있을 때에, 사용자가 동화상 부호화와는 다른 어플리케이션(예를 들면, 워드 프로세서)을 작동시키면, CPU는 워드 프로세서의 처리의 제어도 실행하지 않으면 안되게 된다. 이 때문에, 워드 프로세서 제어에 CPU 시간을 할당하기 때문에, 일단 화상 압축 부호화 처리를 중단해야 한다. 이 중단이 너무 길어지면, 화상 압축 부호화 처리가 시간 간격 △t 이내에서 실행될 수 없기 때문에, 입력 화상을 시간 △t의 간격으로 처리하는 것이 불가능해진다. 그 결과, 상기한 바와 같이 MPEG 등과 같은 일정한 프레임 레이트로 동화상을 압축 부호화하는 것을 요하는 규격에 준한 부호화 데이터, 즉 일정한 프레임 레이트를 갖는 부호화 데이터를 얻고자 하는 경우에서는, 그와 같은 압축 부호화를 할 수 없게 된다는 것이 발생하기 때문에, 이것이 소프트웨어 처리에 있어서의 문제점으로 된다.
이와 같이, 종래의 기술에 의한 동화상 부호화 장치에서는, 제 1 예와 같이 하드웨어 처리에 의한 경우는 전용 하드웨어를 요하기 때문에 비용이 높게 되고, 제 2 예와 같이 범용적인 시스템 구성에 있어서 소프트웨어 처리를 함으로써, 저비용으로 실현하는 경우에는, 멀티태스킹이나, 인터럽트(interrupt) 처리의 영향 등에 의해, 순조롭게 부호화 처리를 할 수 없는 경우에 대처할 수 없는 것이 문제로 된다.
본 발명의 목적은, 상기한 바와 같은 종래의 문제점을 감안하여 이루어진 것으로, 범용적인 컴퓨터 시스템에 있어서, 주로 소프트웨어 처리에 의해 화상 부호화를 실행함으로써, 저렴한 비용으로 실현가능한 것이며, 또한 해당 소프트웨어 처리가 멀티태스크 처리의 영향 등에 의해 일정한 비율로 실행할 수 없는 일이 있는 경우에도, MPEG 등의 규격에 따른, 일정한 프레임 레이트를 갖는 부호화 데이터를 얻는 것이 가능한, 동화상 부호화 방법을 제공하는 것이다.
또한, 본 발명의 목적은 상기한 바와 같은 방법으로 동화상 부호화를 실행하는 동화상 부호화 장치를 제공하는 것이다.
또한, 본 발명의 목적은, 범용적인 컴퓨터 시스템에서 실행함으로써, 상기한 바와 같은 동화상 부호화를 행할 수 있는 동화상 부호화 프로그램을 기록한 프로그램 기록 매체를 제공하는 것이다.
또한, 본 발명의 목적은, 상기한 바와 같은 동화상 부호화 처리를 하는 것이며, 또한, 해당 부호화에 의해 얻어진 부호화 데이터를 재생(playback)하였을 때에 움직임이 매끄러운 동화상을 얻을 수 있도록, 동화상 부호화를 실행하는, 동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체를 제공하는 것이다.
도 1은 본 발명의 실시예 1에 따른 동화상 부호화 장치의 구성을 도시하는 블럭도
도 2는 동실시예에 있어서의 CPU(101)의 동화상 부호화 처리를 제어할 때의 처리 순서를 도시하는 흐름도
도 3은 동실시예에 있어서의 화상 캡처 수단(104)의 처리 순서를 도시하는 흐름도
도 4는 동실시예에 있어서의 HD 어댑터 수단(106)의 처리 순서를 도시하는 흐름도
도 5는 본 발명의 실시예 2에 있어서의 CPU(101)의 동화상 부호화 처리를 제어할 때의 처리 순서를 도시하는 흐름도
도 6은 본 발명의 실시예 3에 의한 동화상 부호화 장치의 구성을 도시하는 블럭도
도 7은 동실시예에 있어서의 CPU(201)의 동화상 부호화 처리를 제어할 때의 처리 순서를 도시하는 흐름도
도 8은 동실시예에 있어서의 화상 캡처 수단(204)의 처리 순서를 도시하는 흐름도
도 9는 동실시예에 있어서의 HD 어댑터 수단(206)의 처리 순서를 도시하는 흐름도
도 10은 동실시예에 있어서의 CPU(201), 화상 캡처 수단(204), 및 HD 어댑터 수단(206)의 처리 내용과 시간과의 대응 예를 도시하는 도면
도 11은 본 발명의 실시예 4에 있어서의 CPU(201)의 동화상 부호화 처리를 제어할 때의 처리 순서를 도시하는 흐름도
도 12는 동실시예에 있어서의 CPU(201), 화상 캡처 수단(204), 및 HD 어댑터 수단(206)의 처리 내용과 시간과의 대응 예를 도시하는 도면
도 13은 종래의 기술(제 1 예)에 따른 동화상 부호화 장치의 구성을 도시하는 블럭도
도 14는 종래의 기술(제 2 예)에 따른 동화상 부호화 장치의 구성을 도시하는 블럭도
도면의 주요 부분에 대한 부호의 설명
101 : CPU 102 : 주기억 장치
103 : 버스 브릿지 수단 104 : 화상 캡처 수단
105 : HD 수단 106 : HD 어댑터 수단
107 : A/D 변환 수단 108 : I/O 인터페이스 수단
121 : 시스템 버스 122 : I/O 버스
상기 목적을 달성하기 위해, 본 발명의 청구항 1에 관한 동화상 부호화 방법은, 입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 단계와, 상기 화상 캡처 단계에 있어서, 상기 동화상에 대한 정지 화상으로서의 캡처 처리가 이루어진 시각 n·△t에 대응하는 시간 정보를 출력하는 시간 정보 생성 단계와, 상기 화상 캡처 단계에 있어서 출력되는 정지 화상 데이터를 순차적으로 캡처하여 부호화 처리를 함과 동시에, 상기 시간 정보 생성 단계에 있어서 출력된 시간 정보를 이용하여, 상기 캡처한 정지 화상 데이터중, 캡처한 시각이 연속하는 2장의 정지 화상간의 시간 간격을 구하여, 해당 구한 시간 간격이 m·△t(단, m은 2이상의 정수)인 경우에, 부호화된 정지 화상의 시간 간격이 일정하게 되도록, 상기 2장의 정지 화상의 부호화 데이터의 사이에 m-1장 이하의 정지 화상에 대응하는 부호화 데이터를 삽입하는 부호화 단계를 실행하는 것이다.
또한, 청구항 2에 관한, 동화상 부호화 방법은, 청구항 1에 기재된 동화상 부호화 방법에 있어서, 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상중, 시간적으로 먼저 캡처한 정지 화상이나, 혹은 뒤에 캡처한 정지 화상중, 어느 한쪽의 정지 화상을 부호화한 데이터를 삽입하는 것이다.
또한, 청구항 3에 관한 동화상 부호화 방법은, 청구항 1에 기재된 동화상 부호화 방법에 있어서, 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상을 부호화한 데이터를 정지 화상 복수매 상당분 조합하여 삽입하는 것이다.
또한, 청구항 4에 관한 동화상 부호화 방법은, 청구항 1에 기재된 동화상 부호화 방법에 있어서, 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 순방향 예측 부호화, 역방향 예측 부호화, 및 쌍방향 예측 부호화중 적어도 1개의 부호화에 의해 생성한, 상기 2장의 정지 화상중 어느 한쪽의 정지 화상과 동일한 화상인 것을 나타내는 부호화 데이터를 삽입하는 것이다.
또한, 청구항 5에 관한 동화상 부호화 방법은, 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 방법에 있어서, 시간 간격 k·△t(단, k는 정수)마다 시각을 통지하는 시각 통지 단계와, 입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 단계와, 상기 화상 캡처 단계에 있어서 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리함과 동시에, 정지 화상 데이터에 대한 캡처의 사이에 상기 시각 통지 단계에 있어서 이루어지는 시각의 통지가 있었던 경우에, 직전에 캡처한 정지 화상의 부호화 데이터의 뒤에 정지 화상의 부호화 데이터를 부가하는 부호화 단계를 실행하는 것이다.
또한, 청구항 6에 관한 동화상 부호화 장치는, 동화상을 입력하고, 부호화 처리를 행하여, 부호화 데이터를 작성하는 동화상 부호화 장치에 있어서, 입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 수단과, 상기 화상 캡처 수단에 의해, 상기 동화상에 대한 정지 화상으로서의 캡처 처리가 이루어진 시각 n·△t에 대응하는 시간 정보를 출력하는 시간 정보 생성 수단과, 상기 화상 캡처 수단에 의해 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리를 함과 동시에, 상기 시간 정보 생성 수단이 출력하는 시간 정보를 이용하여, 상기 캡처한 정지 화상중, 캡처한 시각이 연속하는 2장의 정지 화상 사이의 시간 간격을 구하여, 해당 구한 시간 간격이 m·△t(단, m은 2이상의 정수)인 경우에, 부호화된 정지 화상의 시간 간격이 일정하게 되도록, 상기 2장의 정지 화상의 부호화 데이터 사이에 m-1장 이하의 정지 화상에 대응하는 부호화 데이터를 삽입하는 부호화 수단을 구비한 것이다.
또한, 청구항 7에 관한 동화상 부호화 장치는, 청구항 6에 기재된 동화상 부호화 장치에 있어서, 상기 부호화 수단은, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상중, 시간적으로 먼저 캡처한 정지 화상이나, 혹은 뒤에 캡처한 정지 화상중, 어느 한쪽의 정지 화상을 부호화한 데이터를 삽입하는 것이다.
또한, 청구항 8에 관한 동화상 부호화 장치는, 청구항 6에 기재된 동화상 부호화 장치에 있어서, 상기 부호화 수단은, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상을 부호화한 데이터를, 정지 화상 복수매 상당분 조합하여 삽입하는 것이다.
또한, 청구항 9에 관한 동화상 부호화 장치는, 청구항 6에 기재된 동화상 부호화 장치에 있어서, 상기 부호화 수단은, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 순방향 예측 부호화, 역방향 예측 부호화, 및 쌍방향 예측 부호화중 적어도 1개의 부호화에 의해 생성한, 상기 2장의 정지 화상중 어느 한쪽의 정지 화상과 동일한 화상인 것을 나타내는 부호화 데이터를 삽입하는 것이다.
또한, 청구항 10에 관한 동화상 부호화 장치는, 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 장치에 있어서, 시간 간격 k·△t(단, k는 정수)마다 시각을 통지하는 시각 통지 수단과, 입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 수단과, 상기 화상 캡처 수단에 의해 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리함과 동시에, 정지 화상 데이터에 대한 캡처의 사이에 상기 시각 통지 수단에 의해 시각의 통지가 있었던 경우에, 직전에 캡처한 정지 화상의 부호화 데이터의 뒤에 정지 화상의 부호화 데이터를 부가하는 부호화 수단을 구비한 것이다.
또한, 청구항 11에 관한 동화상 부호화 프로그램 기록 매체는, 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 프로그램을 기록한 기록 매체에 있어서, 입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 단계와, 상기 화상 캡처 단계에 있어서, 상기 동화상에 대한 정지 화상으로서의 캡처 처리가 된 시각 n·△t에 대응하는 시간 정보를 출력하는 시간 정보 생성 단계와, 상기 화상 캡처 단계에 있어서 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리를 함과 동시에, 상기 시간 정보 생성 단계에 있어서 출력된 시간 정보를 이용하여, 상기 캡처한 정지 화상 데이터중, 캡처한 시각이 연속하는 2장의 정지 화상 사이의 시간 간격을 구하여, 해당 구한 시간 간격이 m· △t(단, m은 2이상의 정수)인 경우에, 부호화된 정지 화상의 시간 간격이 일정하게 되도록, 상기 2장의 정지 화상의 부호화 데이터의 사이에 m-1장 이하의 정지 화상에 대응하는 부호화 데이터를 삽입하는 부호화 단계를 실행하는 동화상 부호화 프로그램을 기록한 것이다.
또한, 청구항 12에 관한 동화상 부호화 프로그램 기록 매체는, 청구항 11에 기재된 동화상 부호화 프로그램 기록 매체에 있어서, 상기 기록된 동화상 부호화 프로그램의 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상중, 시간적으로 먼저 캡처한 정지 화상이나, 혹은 뒤에 캡처한 정지 화상중, 어느 한쪽의 정지 화상을 부호화한 데이터를 삽입하는 것이다.
또한, 청구항 13에 관한 동화상 부호화 프로그램 기록 매체는, 청구항 11에 기재된 동화상 부호화 프로그램 기록 매체에 있어서, 상기 기록된 동화상 부호화 프로그램의 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상을 부호화한 데이터를, 정지 화상 복수매 상당분 조합하여 삽입하는 것이다.
또한, 청구항 14에 관한 동화상 부호화 프로그램 기록 매체는, 청구항 11에 기재된 동화상 부호화 프로그램 기록 매체에 있어서, 상기 기록된 동화상 부호화 프로그램의 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 순방향 예측 부호화, 역방향 예측 부호화, 및 쌍방향 예측 부호화중 적어도 1개의 부호화에 의해 생성한, 상기 2장의 정지 화상중 어느 한쪽의 정지 화상과 동일한 화상인 것을 나타내는 부호화 데이터를 삽입하는 것이다.
또한, 청구항 15에 관한 동화상 부호화 프로그램 기록 매체는, 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 프로그램을 기록한 기록 매체에 있어서, 시간 간격 k·△t(단, k는 정수)마다 시각을 통지하는 시각 통지 단계와, 입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 단계와, 상기 화상 캡처 단계에 있어서 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리함과 동시에, 정지 화상 데이터에 대한 캡처의 사이에 상기 시각 통지 단계에 있어서 이루어지는 시각의 통지가 있는 경우에, 직전에 캡처한 정지 화상의 부호화 데이터의 뒤에 정지 화상의 부호화 데이터를 부가하는 부호화 단계를 실행하는 동화상 부호화 프로그램을 기록한 것이다.
(실시예 1)
본 발명의 실시예 1에 따른 동화상 부호화 장치는, 필요한 프레임 레이트를 만족하는 부호화 데이터를 얻을 수 있도록, 부호화 처리를 행하여 취득한 데이터의 사이에, 정지 화상의 부호화 데이터를 삽입하는 것이다.
도 1은, 본 발명의 실시예 1에 따른 동화상 부호화 장치의 구성을 도시하는 블럭도이다. 도면에 도시한 바와 같이, 본 발명의 실시예 1에 따른 동화상 부호화 장치는, CPU(101), 주기억 장치(102), 버스 브릿지 수단(103), 화상 캡처 수단(104), HD(105), HD 어댑터 수단(106), 시스템 버스(121) 및 I/O 버스(122)로 구성되며, 화상 캡처 수단(104)은, A/D 변환 수단(107)과, I/O 버스 인터페이스 수단(108)을 포함하고 있다. 이들은 모두, PC 등의 컴퓨터와, 그 주변기기(peripheral)로 이루어진, 컴퓨터 시스템상에 있어서 실현된다.
CPU(101)는, 명령의 해석과 실행이나, 데이터의 전송 제어를 행함으로써, 연산 처리 이외의 시스템 전체의 기능을 제어한다. 주기억 장치(102)는, 명령이나 데이터를 일시 기억하는 것으로서, 연산 처리 이외의 처리를 위한 작업 영역으로서 이용된다. 버스 브릿지 수단(103)은, 다른 신호로(信號路)인 각 버스의 사이에서, 신호 변환 처리를 행함으로써 명령이나 데이터 전달의 매개 역할을 하고, 또한, 주기억 장치(102)에 관한 입 출력을 제어한다. 화상 캡처 수단(104)은, 텔레비전 신호의 규격으로서 일반적인 NTSC 등에 따른 아날로그 화상 신호를 입력하고, 디지탈화 처리를 행하여, 디지탈 화상 데이터를 출력한다. 화상 캡처 수단(104)이 갖는 A/D 변환 수단(107)은, CPU(101)의 제어에 따라, 입력된 동화상을, 시간 간격을 △t로 하여 이산화된, 특정 시간마다, 정지 화상으로서 캡처하고, 해당 캡처한 아날로그의 화상을 디지탈화해서, 디지탈 정지 화상 데이터를 얻어, 이 디지탈 화상 데이터를 출력한다. I/O 버스 인터페이스 수단(109)은, 디지탈 화상 데이터를, DMA 전송에 의해 주기억 장치(102)의 입력 화상 버퍼 영역(109)으로 전송함과 동시에, 전송 종료시 CPU(101)에 대하여 인터럽트를 통지(notify)한다. HD(105)는, 부호화된 동화상 데이터를 보존한다. HD 어댑터 수단(106)은, I/O 버스에 접속되어 있으며, 주기억 장치(102)상의 데이터를 DMA(Direct Memory Access)기능에 의해, HD(305)로 전송한다. DMA 기능에 대해서는, 종래의 기술에 있어서 설명한 바와 같다. 시스템 버스(121) 및 I/O 버스(122)는 명령이나 데이터의 전달이 행해지는 신호로이다.
본 실시예 1에 있어서, 주기억 장치(102)는, 화상 캡처 수단(104)이 디지탈화 처리하여 전송한 디지탈 화상 데이터를 저장하는 입력 화상 버퍼 영역(109)과, CPU(101)가 화상 캡처 수단(104)으로부터 인터럽트 통지를 받았을 때의 시각을 저장하는 타임 스탬프 영역(110)과, CPU(101)가 입력 화상 버퍼 영역(109)에 저장된 디지탈 화상 데이터를 부호화하여, 얻어진 부호화 데이터를 저장하는 부호화 데이터 영역(111)과, CPU(101)가 입력 화상 버퍼 영역(109)에 저장된 디지탈 화상 데이터를 부호화하여, 얻어진 데이터를 일시적으로 유지하는 워크 영역(112)을 포함하고 있다.
도 2는, CPU(101)에 있어서의, 동화상 부호화 처리를 제어할 때의 처리 순서를 도시하는 흐름도, 도 3은, 동화상 캡처 수단(104)의 처리 순서를 도시하는 흐름도, 도 4는, HD 어댑터 수단(106)의 처리 순서를 도시하는 흐름도이다.
이하에, 상기한 바와 같이 구성되는 본 실시예 1에 따른 동화상 부호화 장치에 있어서의 부호화 처리시의 동작을, 도 1을 참조하면서「A. 전체의 동작」에서 개략적으로 설명하고, 다음에「B. CPU(101)의 동작」,「C. 화상 캡처 수단(104)의 동작」,「D. HD 어댑터 수단(106)의 동작」에서, 각각의 동작을 도 2∼도 4에 따라 설명한다.
A. 전체의 동작
우선, CPU(101)의 제어에 따라, 화상 캡처 수단(104)은 입력 화상의 처리를 개시한다. 화상 캡처 수단(104)에서는, 예컨대 NTSC 화상 신호로서 입력된 아날로그 화상 신호가 A/D 변환 수단(107)에서 아날로그/디지탈 변환되어, 얻어진 디지탈 화상 데이터는 I/O 버스 인터페이스 수단(104)에 의해, 주기억 장치(109)의 입력 화상 버퍼 영역(102)에 저장된다. 그리고, I/O 버스 인터페이스 수단(104)은, CPU(101)에 대하여 인터럽트 통지(notification)를 출력함으로써, 화상 캡처 수단(104)에서 캡처 동작이 있음을 CPU(101)에 전달한다.
CPU(101)는, 상기의 인터럽트 통지를 받았을 때, 입력 버퍼 영역(102)으로부터 디지탈 화상 데이터를 취출하여, 정지 화상에 상당하는 프레임 화상마다 압축 부호화의 처리를 행하고, 프레임 부호화 데이터를 작성하여, 얻어진 프레임 부호화 데이터를 주기억 장치(102)의 부호화 데이터 영역(111)에 저장한다. 그와 동시에, CPU(101)는, 인터럽트 통지를 받은 시각을 주기억 장치(102)의 타임 스탬프 영역(110)에 기입하고, 또한, 동일한 프레임 부호화 데이터를 주기억 장치(102)의 워크 영역(112)에 저장하여, 정지 화상을 삽입할 수 있도록 한다.
다음에 화상 캡처 수단(104)에서 캡처 동작이 실행되어, 디지탈 화상 데이터가 입력 화상 버퍼 영역에 저장되고, CPU(101)에 대하여 인터럽트 통지가 출력되었을 때, CPU(101)는, 해당 인터럽트 통지가 있는 시각과, 주기억 장치(102)의 타임 스탬프 영역(110)에 기록된, 직전의 인터럽트 통지가 있는 시각에 근거하여, 요구되는 프레임 레이트를 만족하는 부호화 데이터를 얻기 위해 필요한, 정지 화상의 삽입 매수를 나타내는, 삽입 데이터수를 구한다. 그리고, CPU(101)는, 워크 영역(112)에 저장된, 직전에 처리한 프레임 부호화 데이터를, 삽입 데이터수에 상당하는 수만큼, 주기억 장치(102)의 부호화 데이터 영역(111)에 기입한 후, 새롭게 부호화 처리를 행하여 작성한 프레임 부호화 데이터를 기입함으로써, 정지 화상을 필요한 수만큼 삽입한 부호화 데이터를 얻을 수 있다.
주기억 장치(102)의 부호화 데이터 영역(111)에 어느 정도 데이터가 저장되었으면, HD 어댑터 수단(206)은, 부호화 데이터를 취출하여, HD(205)에 저장한다. 본 실시예 1에 따른 부호화 장치의 처리에 의해 얻어진 부호화 데이터는, 이렇게 해서 HD(105)에 보존되게 된다.
주기억 장치(102)의, 타임 스탬프 영역(110)과 워크 영역(112)의 저장 내용을 갱신하면서, 동화상의 캡처가 계속되는 동안, 이러한 처리를 반복함으로써, 필요한 프레임 레이트를 갖는 부호화 데이터가 얻어지게 된다.
B. CPU(101)의 동작
도 2에 따라, CPU(101)의 동작을 설명한다. 도 2의 흐름의 단계(1)에 있어서, CPU(101)는, 화상 캡처 수단(104)에 대해 화상의 캡처를 지시한다. 해당 지시에 따라, 화상 캡처 수단(104)은 동작한다. 다음에 단계(2)가 실행되어, I/O 버스 인터페이스 수단(108)으로부터의 인터럽트 통지가 있는지의 여부가 판정된다. 여기서 인터럽트가 없다고 판단된 경우는, 단계(2)가 반복됨으로써, CPU(101)는, I/O 버스 인터페이스 수단(108)으로부터 인터럽트 통지가 있을 때까지 대기하게 된다. 또, 인터럽트 통지는 「C.」에서 설명하는 바와 같이, 화상 캡처 수단(104)의 동작에 있어서의, 도 3의 단계(13)에서 발생하는 것이다.
단계(2)의 판정에 있어서, I/O 버스 인터페이스 수단(108)으로부터 인터럽트 통지가 있다고 판단된 경우, 단계(3)가 실행됨에 따라, CPU(101)는, 그 인터럽트 통지시의 시각 Tb를 타임 스탬프 영역(110)에 기입한다. 그리고 단계(4)가 실행되어, CPU(101)는, 입력 화상 버퍼 영역(109)에 저장된 디지탈 화상 데이터에 대하여 압축 부호화 처리를 행한다. 1장의 정지 화상에 상당하는 프레임 화상이 처리됨으로써 프레임 부호화 데이터가 생성된다. CPU(101)는, 얻어진 프레임 부호화 데이터를 부호화 데이터 영역(111) 및 워크 영역(112)에 기입한다.
이어서 단계(5)에 있어서, CPU(101)는, 화상 캡처 수단(104)에 대해 화상의 캡처를 다시 지시한다. 단계(6)의 실행에 의해, CPU(101)가, I/O 버스 인터페이스 수단(108)으로부터 인터럽트 통지가 있을 때까지 대기하는 것은 단계(2)와 마찬가지이다.
단계(6)의 판정에 있어서, I/O 버스 인터페이스 수단(108)으로부터 인터럽트 통지가 있다고 판단된 경우, 단계(7)가 실행됨에 따라, 삽입 데이터수 n을 연산에 의해 취득한다. 삽입 데이터수 n은, 부호화 데이터의 프레임 레이트를 요구된 값으로 하기 위해서, 즉, 프레임 화상간의 시간 간격을, 설정된 시간 간격 △t로 하기 위해서, 전번에 처리한 프레임 화상과 이번에 처리하는 프레임 화상과의 사이에 삽입해야 하는 정지 화상의 매수이다. CPU(101)는, 이러한 인터럽트 통지가 있었을 때의 시각 Tn 및 타임 스탬프 영역(110)에 기록되어 있는 시각 Tb로부터, 수학식 1을 이용하여, n을 구한다.
n = (Tn-Tb)/△t-1
또, 단계(7)에서, CPU(101)는, 타임 스탬프 영역(110)에 시각 Tn을 기입한다. 여기서, n=2인 것으로 한다.
시각 Tn의 기입 후, 단계(8)가 실행되어, CPU(101)는, 시각 Tb에 캡처된 화상을 부호화한 데이터인 프레임 부호화 데이터를, 워크 영역(112)으로부터 취출하여, 이 프레임 부호화 데이터를 n회 만큼, 주기억 장치(102)의 부호화 영역(111)에 기입한다. 여기서는, n=2이라고 하였기 때문에, 해당 프레임 부호화 데이터가 2회 기입되게 된다.
이어서, 단계(9)에서는, 입력 화상 버퍼 영역(109)에 저장된 프레임 화상의 디지탈 화상 데이터를 부호화하여, 이 새로운 프레임 부호화 데이터를 부호화 영역(111) 및 워크 영역(112)에 각각 1회씩 기입한다. 이것에 의해서, 입력된 2장의 정지 화상에 근거하는 프레임 부호화 데이터의 사이에, n=2장의 정지 화상에 상당하는 부호화 데이터를 삽입하게 된다.
단계(7)∼단계(9)의 실행에 의해서, 주기억 장치(102)의 워크 영역(112)에 저장된 직전에 처리된 프레임 부호화 데이터가 갱신되기 때문에, 단계(10)에서, 시각 Tb를 갱신된 것(Tn→Tb)으로 하고, 다시 화상 캡처 수단(104)에 대하여 화상 캡처의 지시가 나가서, 단계(6)의 판정으로 되돌아가, 단계(6)에서 단계(10)가, 화상의 입력이 있는 동안 반복하여 실행됨에 따라, 부호화 처리는 계속된다.
C. 화상 캡처 수단(104)의 동작
다음에, 도 3에 따라서, 화상 캡처 수단(104)의 동작에 대하여 설명한다. 단계(11)에 있어서, CPU(101)로부터 화상 캡처의 지시가 있는지의 여부가 판정된다. 여기서 지시가 없다고 판단된 경우는, 단계(11)가 반복됨으로써, 화상 캡처 수단(104)은, CPU(101)로부터의 지시가 있을 때까지 대기하게 된다.
그리고, 단계(11)에 있어서, CPU(101)로부터 지시가 있다고 판정되었을 때, 단계(12)가 실행된다. 단계(12)에 있어서, A/D 변환 수단(107)은, 입력 화상을 정지 화상으로서 캡처하고, 디지탈화하여, 얻어진 디지탈 화상 데이터를 I/O 인터페이스 수단(108)에 출력한다.
이어서 단계(13)가 실행되어, 버스 인터페이스 수단(108)은, 디지탈 화상 데이터를 DMA 전송에 의해, 주기억 장치(102)의 입력 버퍼 영역(109)으로 전송하고, 전송이 종료하였으면, CPU(101)에 대하여 인터럽트를 통지한다. CPU(101)에서는, 도 2의 단계(2) 또는 단계(6)에 있어서의 판정에 따라, 이 인터럽트 통지를 받는 것에 의해, 동도면의 단계(3) 또는 단계(7)의 동작을 실행하게 된다.
한편, 화상 캡처 수단(104)에서는, 도 3의 흐름의 단계(11)로 되돌아가, 다시 CPU(101)로부터의 지시가 있을 때까지 대기한다. 그리고, 다음에 CPU(101)로부터 지시가 있어서, 단계(12)가 실행될 때는, 간격을 △t로 하여 이산화된 시각에서의 입력 아날로그 화상 신호가 캡처 동작의 대상으로 된다. 단계(11)∼단계(13)는, 도 2와 마찬가지로, 화상 입력이 있는 동안, 반복하여 실행된다.
D. HD 어댑터 수단(106)의 동작
다음에, 도 4에 따라서, HD 어댑터 수단(106)의 동작에 대하여 설명한다. 단계(21)에 있어서, HD 어댑터 수단(105)에서는, 주기억 장치(102)의 부호화 데이터 영역(111)에, 미리 설정된 만큼의 부호화 데이터가 저장되었는지의 여부가 판정된다. 여기서 저장되어 있지 않다고 판단된 경우는, 단계(21)가 반복됨으로써, HD 어댑터 수단(105)은, 일정량의 부호화 데이터의 저장이 있을 때까지 대기하게 된다.
그리고, 단계(21)에 있어서, 일정량의 부호화 데이터가 저장되었다고 판정되었을 때, 단계(22)가 실행된다. 단계(22)에서는, DMA 전송에 의해서, 주기억 장치(102)의 부호화 데이터 영역(111)에 저장된 부호화 데이터가 HD(105)로 전송되어, HD(105)에 기록된다. 단계(22)로부터 단계(21)로 되돌아가, 단계(21)∼단계(22)가 반복됨에 따라, 주기억 장치(102)의 부호화 데이터 영역(111)에 저장된 부호화 데이터는 순차적으로 HD(105)로 전송되어 기록되게 된다.
도 2∼도 4에 있어서, 처리의 종료에 대해서는 도시하고 있지 않지만, 예컨대, 화상 입력의 종료를 기계적으로 검지하거나 또는 사용자로부터의 지시를 입력함으로써, 하드웨어 인터럽트 등에 따라 대응하여, CPU(101)가 도 2에 도시하는 흐름을 중단하고, 또한 화상 캡처 수단(104) 및 HD 어댑터 수단(105)에서의 도 3 및 도 4의 흐름을 중단하도록 지시함으로써, 해당 동화상 부호화 장치 전체의 처리를 종료할 수 있다.
이상과 같은 처리를 행함으로써, 이 동화상 부호화 장치에는, 종래 기술에 의한 소프트웨어 처리의 문제점에 있어서 설명한 바와 같이, 중단 등이 발생함으로 인해, CPU(101)의 처리에 지체가 발생한 경우에도 대응하는 것이 가능하다. 즉, 화상 캡처 수단(104)이 캡처 처리한 화상 데이터간의 시간 간격이 △t 이상으로 되었으면, CPU(101)에 의한 수학식 1을 이용한 연산 처리에 있어서, 삽입 데이터수 n이 1 이상의 값으로 되기 때문에, CPU(101)은 시간 간격이 너무 크게 된 데이터 사이에 삽입 데이터수 n장의 정지 화상에 상당하는 부호화 데이터를 삽입함으로써, 해당 동화상 부호화 장치의 장치 출력으로서, HD(105)에 기록되는 부호화 데이터가 갖는 프레임 레이트는 일정한 것으로 되도록 하는 것이 가능하다. 또, 삽입되는 데이터에 대해서는, 캡처 처리 및 부호화 처리가 된 2장의 정지 화상중, 시간적으로 먼저 혹은 뒤에 처리된 어느 한쪽의 정지 화상을 부호화한 데이터(프레임 부호화 데이터)가 이용된다.
이와 같이, 본 실시예 1에 따른 동화상 부호화 장치에 의하면, 화상 캡처 수단(104)이, 입력된 동화상의 시각 △t에서의 화상을 정지 화상으로서 캡처하여 출력하고, CPU(101)는 시간 정보 생성 처리에 의해, 화상 캡처 수단(104)이 정지 화상을 캡처한 시각 △t에 대응하는 시간 정보를 출력하며, 상기 시간 정보 생성 처리에 의해 얻은 시간 정보로부터, 캡처한 정지 화상중의 캡처한 시각이 연속하는 2장의 정지 화상간의 시간 간격을 구하여, 이 시간 간격이 △t보다 큰 경우, 이 시간 간격이 △t가 되도록, 상기 2장의 정지 화상의 부호화 데이터 사이에 정지 화상을 부호화한 데이터를 삽입하기 때문에, 처리의 중단 등에 의해서, 순조로운 부호화 처리를 할 수 없게 되는 경우에도, 요구되는 프레임 레이트를 만족하는 부호화 데이터를 얻는 것이 가능하게 된다.
(실시예 2)
본 발명의 실시예 2에 의한 동화상 부호화 장치는, 실시예 1과 마찬가지로, 부호화 데이터의 삽입에 의해, 요구되는 프레임 레이트를 만족하는 부호화 데이터를 얻음과 동시에, 삽입하는 데이터의 작성에 예측 부호화(predictive coding)를 이용함으로써, 재생 화질(playback quality of picture)의 향상을 도모하는 것이다.
본 실시예 2에 의한 동화상 부호화 장치의 구성은, 실시예 1에 의한 것과 마찬가지이므로, 설명에는 도 1을 이용한다. 본 실시예 2에 의한 동화상 부호화 장치에서는, CPU(101)이 예측 부호화의 처리를 행하는 것이다. 일반적으로 동화상 데이터의 압축 부호화에 있어서는, 해당 동화상을 구성하는 정지 화상이 갖는 공간적 상관성, 즉 화면내(intra frame)의 상관성에 기초를 둔 압축 처리가 주체가 되는 것이지만, 근접하는 정지 화상끼리가 갖는 시간적 상관성, 즉 화면간(inter frame)의 상관성에 기초를 둔 압축 처리를 병용함으로써, 고압축율을 실현할 수 있다. 이 시간적 상관성에 근거하는 압축은, 부호화 처리의 대상으로 되는 정지 화상에 대하여, 시간적으로 이전에 재생(regenerate)되어야 할 화상 또는 시간적으로 이후에 재생되어야 할 화상에 기초를 둔 예측 화상(predictive pidture)을 생성하고, 이 예측 화상과, 부호화 처리의 대상이 되는 화상과의 차분(difference)을 취득하여, 그 차분을 부호화 처리함으로써, 해당 화상 자체를 처리한 경우에 비해, 압축율을 향상시키는 것이 가능하게 된다. 단, 예측 화상의 생성 처리를 하는 만큼, CPU의 처리 부담은 커지게 된다. 또, 시간적으로 이전에 재생되어야 할 화상에 근거하는 예측 처리를 순방향(forward) 예측, 시간적으로 이후에 재생되어야 할 화상에 근거하는 예측 처리를 역방향(backward) 예측이라고 칭한다. 또한, 순방향 예측 또는 역방향 예측에 의해서 예측 처리를 하는 경우를 쌍방향(bidirectionally) 예측이라고 칭한다.
또한, 본 실시예 2에 의한 동화상 부호화 장치에서는, CPU(101)에 의한 부호화 처리의 제어 순서가 실시예 1과는 다른 것이다. 도 5는, 본 실시예 2의 CPU(101)에 있어서의, 동화상 부호화 처리를 제어할 때의 처리 순서를 도시하는 흐름도이다. 또, 본 실시예 2에 의한 화상 캡처 수단(104) 및 HD 어댑터 수단(106)의 처리 순서는 실시예 1의 경우와 마찬가지로 되고, 그들을 도시하는 흐름도로서 실시예 1에 사용된 도 3 및 도 4를 이용한다.
이하에, 도 1 및 도 3∼도 5를 참조하여, 본 실시예 2에 의한 동화상 부호화 장치의 화상 캡처에 따른 처리시의 동작을 설명한다.
우선, 도 5에 따라서, CPU(101)의 동작을 설명한다. 단계(41)와 단계(42)는 도 2에 도시하는 실시예 1과 마찬가지로 실행되며, CPU(101)는 화상 캡처 수단(104)에 대하여 지시를 출력한 후, 화상 캡처 수단(104)으로부터 인터럽트가 있을 때까지, 단계(42)의 판단에 있어서 대기한다. 단계(41)의 지시를 받은 화상 캡처 수단(104)의 동작은 도 3의 흐름에서 도시하는 바와 같이 되고, 설명은 실시예 1「C.」와 같으므로, 여기서는 생략한다.
그리고, 화상 캡처 수단(104)에 있어서 캡처 동작이 실행되어, 디지탈 화상 데이터가 주기억 장치(102)의 입력 화상 버퍼 영역(109)에 저장된 후, I/O 버스 인터페이스 수단(108)에서 CPU(101)에 대하여 인터럽트 통지가 이루어지면, CPU(101)에 있어서는, 도 5의 흐름의 단계(43)가 실행된다. 단계(43)는 도 2의 단계(3)와 같이 실행되고, CPU(101)는 그 인터럽트 통지시의 시각 Tb를 주기억 장치(102)의 타임 스탬프 영역(110)에 기입한다.
다음의 단계(44)에 있어서 CPU(101)는 입력 화상 버퍼 영역(109)에 저장된 디지탈 화상 데이터에 대하여 압축 부호화 처리를 행한다. 1장의 정지 화상에 상당하는 프레임 화상이 처리됨으로써 프레임 부호화 데이터가 생성된다. CPU(101)는 얻어진 프레임 부호화 데이터를 부호화 데이터 영역(111)에 기입한다.
단계(45)와 단계(46)은, 다시 도 1의 단계(5) 및 단계(6)과 마찬가지로 실행되고, CPU(101)는 화상 캡처 수단(104)에 대하여 지시를 출력한 후, 화상 캡처 수단(104)으로부터 인터럽트가 있을 때까지, 단계(46)의 판단에 있어서 대기한다. 단계(45)의 지시를 받은 화상 캡처 수단(104)은, 도 3의 동작을 행하며, CPU(101)에 대해 인터럽트 통지가 나오면, CPU(101)에서는 도 5의 흐름의 단계(47)가 실행된다.
단계(47)에서는, 도 2의 단계(7)와 마찬가지로 하여, CPU(101)는 삽입 데이터수 n을 연산에 의해 취득한다. CPU(101)는, 이 인터럽트 통지가 있었을 때의 시각 Tn 및 타임 스탬프 영역(110)에 기록되어 있는 시각 Tb로부터, 상기 수학식 1을 이용하여 n을 구한다. 그리고, CPU(101)는 주기억 장치(102)의 타임 스탬프 영역(110)에 시각 Tn을 기입한다.
다음의 단계(48)와 단계(49)에서는, 삽입하는 부호화 데이터가 시각 Tb에 캡처 처리된 프레임 화상의 디지탈 화상 데이터 또는 시각 Tn에 캡처된 프레임 화상의 디지탈 화상 데이터에 대응하는 프레임 부호화 데이터와 동일한 것으로서 작성된다.
여기서는, 실시예 1과 같이 n=2인 경우에 대하여 설명한다. 이 경우, 단계(48)에서는, 시각 Tb에 캡처 처리된 1장의 정지 화상(프레임 화상)에 대응하는 프레임 부호화 데이터가 작성되고, 또한 단계(49)에서는, 시각 Tn에 캡처된 1장의 정지 화상(프레임 화상)에 대응하는 프레임 부호화 데이터가 작성되어, 합계 2장의 정지 화상(프레임 화상)에 대응하는 프레임 부호화 데이터가 삽입용으로 작성된다.
우선, 단계(48)에 있어서 CPU(101)는, 순방향 예측 부호화에 의해 생성한, 시각 Tb에 캡처된 화상과 같은 화상을 나타내는 정지 화상 1장분의 프레임 부호화 데이터를 부호화 데이터 영역(111)에 기입한다. 다음에, 단계(49)에서 CPU(101)는 역방향 예측 부호화에 의해 생성한, 시각 Tn에 캡처된 화상과 동일한 화상을 나타내는 정지 화상 1장분의 부호화 데이터를 부호화 데이터 영역(111)에 기입한다. 상기한 바와 같이, n과 동등한 2장분의 부호화 데이터를 부호화 데이터 영역(111)에 기입하게 된다.
그리고, 단계(50)에 있어서 CPU(101)는 입력 화상 버퍼 영역(109)에 저장된 디지탈 화상 데이터(시각 Tn분)를 부호화 처리하여, 얻어진 프레임 부호화 데이터를 부호화 데이터 영역(111)에 기입한다.
주기억(102)의 부호화 데이터 영역(111)에 부호화 데이터가 기입된 후, HD 어댑터 수단(106)에 의한 동작은 도 4의 흐름에 따라 실행되고, 설명은 실시예 1「D.」와 같으므로 여기서는 생략한다.
실시예 1과 마찬가지로, 도 5의 흐름에 있어서, 단계(51)로부터 단계(46)로 되돌아감에 따라, 주기억(102)의 타임 스탬프 영역(110)에 기록된 시각 Tb가 갱신된 것(Tn→Tb)으로 하여서, 이상의 동작을 반복하게 된다. 그리고, 단계(46)에서 단계(51)가 화상의 입력이 있는 동안 반복하여 실행됨에 따라, 부호화 처리는 계속된다. 동작의 종료에 대해서는, 실시예 1과 마찬가지로 인터럽트 처리등에 의한 것이 가능하다.
예를 들면, 상기 정지 화상의 시간 간격이, 입력 화상과 입력 화상의 간격이 3·△t만큼 떨어진 경우에는, 상기 시간 간격을 △t으로 하기 때문에, 2장의 화상에 상당하는 부호화 데이터를 삽입한다. 본 실시예 2에 의한 동화상 부호화 처리에 있어서는, 이 때에, 해당 2장중 시간적으로 최초의 한 장을 직전의 입력 화상 데이터로 하고, 시간적으로 후인 1장을, 직후의 입력 화상 데이터를 부호화한 데이터로 한다. 삽입하는 데이터로서 2장 모두 직전의 화상을 부호화한 데이터를 사용하면, 실제로 부호화 데이터를 재생한 경우의 프레임 간격은 3·△t 그대로 이지만, 2장 중 시간적으로 이전의(최초의) 1장을 직전의 입력 화상 데이터로 하고, 시간적으로 이후의 1장을 직후의 입력 화상 데이터를 부호화한 데이터로 함으로써, 부호화 데이터를 재생한 경우의 프레임 간격을 2·△t로 좁힐 수 있어,동화상으로서 재생(playback)한 경우에 화면의 변화가 매끄럽게 된다.
이와 같이, 본 실시예 2에 의한 동화상 부호화 장치에 의하면, 화상 캡처 수단(104)이 입력된 동화상의 시각 △t에서의 화상을 정지 화상으로서 캡처하여 출력하고, CPU(101)는 시간 정보 생성 처리에 의해 화상 캡처 수단(104)이 정지 화상을 캡처한 시각 △t에 대응하는 시간 정보를 출력하며, 상기 시간 정보 생성 처리에 의해 얻은 시간 정보로부터, 캡처한 정지 화상 중 캡처한 시각이 연속하는 2장의 정지 화상간의 시간 간격을 구하여, 이 시간 간격이 △t보다 큰 경우, 이 시간 간격이 △t가 되도록 상기 2장의 정지 화상의 부호화 데이터의 사이에 정지 화상을 부호화한 데이터를 삽입하기 때문에, 처리의 중단 등에 의해서, 순조로운 부호화 처리를 할 수 없게 되는 경우에도, 요구되는 프레임 레이트를 만족하는 부호화 데이터를 얻는 것이 가능하게 된다.
그리고, 상기한 삽입하는 데이터로서는, 예측 부호화에 의해서 생성하는, 직전 또는 직후에 캡처한 정지 화상 중 어느 한쪽의 정지 화상과 동일한 화상임을 나타내는 부호화 데이터를 이용하기 때문에, 해당 동화상 부호화 장치에 있어서의 처리 결과 얻어지는 부호화 데이터를 재생(playback)한 경우의 화면의 변화가 매끄럽게 되어, 재생 화질이 양호한 부호화 데이터를 얻는 것이 가능하게 된다.
또, 본 실시예 2에서는, 순방향 예측과 역방향 예측을 실행하는 것으로서 설명하였지만, 순방향 예측 부호화, 역방향 예측 부호화 및 쌍방향 예측 부호화중 적어도 1개의 부호화에 의해 생성한, 직전 또는 직후에 캡처한 상기 정지 화상 중 어느 한쪽의 것과 동일한 화상에 대응하는 부호화 데이터를 이용함으로써, 부호화 처리를 하는 것이 가능하다.
(실시예 3)
본 발명의 실시예 3에 의한 동화상 부호화 장치는, 처리를 위해 이용하는 시간 정보로서, 화상 캡처 처리가 이루어졌을 때의 타임 스탬프를 기록하여 이용하는 대신에, 타이머 수단에 의한 일정 간격의 인터럽트 통지를 이용하는 것이다.
도 6은 본 발명의 실시예 3에 의한 동화상 부호화 장치의 구성을 도시하는 블럭도이다. 도면에 도시한 바와 같이, 본 발명의 실시예 3에 의한 동화상 부호화 장치는 CPU(201), 주기억 장치(202), 버스 브릿지 수단(203), 화상 캡처 수단(204), HD(205), HD 어댑터 수단(206), 타이머 수단(207), 시스템 버스(221) 및 I/O 버스(222)로 구성되며, 화상 캡처 수단(204)은 A/D 변환 수단(208)과, I/O 버스 인터페이스 수단(109)을 포함하고 있다. 실시예 1 및 2와 마찬가지로, 이들은 모두 PC 등의 컴퓨터와 그 주변기기로 이루어지는 컴퓨터 시스템상에 있어서 실현되지만, 도시한 바와 같이 본 실시예 3에 의한 장치에서는, 실시예 1 또는 2의 장치에 타이머 수단(207)을 추가한 구성이다.
도면에 있어서, CPU(201)는 후술하는 타이머 수단(207)으로부터의 인터럽트 통지를 이용하여 부호화 처리를 실행한다. 주기억 장치(202)는, 도시한 바와 같이, 화상 캡처 수단(204)이 디지탈화 처리하여 전송한 디지탈 화상 데이터를 저장하는 입력 화상 버퍼 영역(210)과, 일정한 프레임 레이트를 유지하기 위해서 부호화해야 할 정지 화상의 매수를 나머지 프레임수로서 유지하는 나머지 프레임수 영역(211)과, CPU(101)가 입력 화상 버퍼 영역(109)에 저장된 디지탈 화상 데이터를 부호화하여 얻어진 부호화 데이터를 저장하는 부호화 데이터 영역(212)을 포함하고 있다. 타이머 수단(207)은, CPU(201)로부터의 지시 후, 시간 간격 △t마다 CPU(201)에 대하여 인터럽트를 통지한다.
버스 브릿지 수단(203), 화상 캡처 수단(204), HD(205), HD 어댑터 수단(206), 시스템 버스(221) 및 I/O 버스(222)에 대해서는, 실시예 1의 참조 부호(103∼106, 221∼222)와 마찬가지이므로, 여기서는 설명을 생략한다.
도 7은 CPU(201)에 있어서의 동화상 부호화 처리를 제어할 때의 처리 순서를 도시하는 흐름도, 도 8은 동화상 캡처 수단(204)의 처리 순서를 도시하는 흐름도, 도 9는 HD 어댑터 수단(206)의 처리 순서를 도시하는 흐름도이다. 도 10은 CPU(201), 화상 캡처 수단(204) 및 HD 어댑터 수단(206)의 처리 내용과 시간과의 대응예를 도시하는 도면이다.
이하에, 상기한 바와 같이 구성되는 본 실시예 3에 의한 동화상 부호화 장치에 있어서의 부호화 처리시의 동작을, 도 6을 참조하면서 「A. CPU(201)의 동작」,「B. 화상 캡처 수단(204)의 동작」,「C. HD 어댑터 수단(206)의 동작」에 있어서, 각각의 동작을 도 7∼도 9에 따라 설명하고, 다음에 도 10을 참조하면서「D. 전체의 동작」에 관해서 설명한다.
A. CPU(201)의 동작
이하에 CPU(201)의 동작을 도 7에 따라 설명한다. 여기서, 본 실시예 3에 있어서의 CPU(201)는 2개의 동작을 별개의 프로세스로서 병행적으로 실행하는 것이며, 도 7에는 CPU(201)의 2개의 처리 순서를 도시하는 흐름도를 도시하고 있다. 이하에 이들을, A-1 및 A-2로 하여 각각을 설명한다.
A-1. CPU(201)의 동작 1
A-1은 타이머 수단(207)과의 관계에 있어서의 CPU(201)의 동작을 CPU(201)의 동작 1로서 나타내는 것이다.
우선, 단계(61)에서 CPU(201)는 주기억 장치(202)의 나머지 프레임수 영역(211)에 나머지 프레임수의 초기값「0」을 기입한다. 계속해서 CPU(201)는 단계(62)에서 타이머 수단(207)을 기동하고, 단계(63)에서 화상 캡처 수단(204)에 대하여 화상의 캡처를 지시한다. 해당 지시에 따라, 화상 캡처 수단(104)이 동작한다. 그 다음에 단계(64)가 실행되어, 타이머 수단(207)으로부터 인터럽트 통지가 있는지 여부가 판정된다. 여기서 인터럽트가 없다고 판단된 경우는, 단계(64)가 반복됨으로써, CPU(201)는 타이머 수단(207)으로부터 인터럽트 통지가 있을 때까지 대기하게 된다.
단계(64)의 판정에 있어서, 타이머 수단(207)으로부터 인터럽트 통지가 있다고 판단된 경우, 단계(65)가 실행됨으로써, CPU(201)는 주기억 장치(202)의 나머지 프레임수에 대한 증분 처리를 행하여, 그 값을 1만 증가시킨다. 그 후 단계(64)로 되돌아가, CPU(201)는 다시 인터럽트 통지에 대한 대기 상태로 되며, 단계(64)에서 단계(65)가 반복하여 실행된다.
A-2. CPU(201)의 동작 2
A-2는 화상 캡처 수단(204)과의 관계에 있어서의 CPU(201)의 동작을 CPU(201)의 동작 2로서 나타내는 것이다. 단계(66)는 도 2의 단계(2) 또는 단계(6)와 마찬가지로 실행되며, CPU(201)는 화상 캡처 수단(104)의 I/O 버스 인터페이스 수단(209)으로부터 인터럽트 통지가 있을 때까지 대기 상태로 된다.
그리고, 단계(66)의 판정에 있어서, I/O 버스 인터페이스 수단(209)으로부터 인터럽트 통지가 있다고 판단된 경우, 단계(67)가 실행되어, CPU(201)는 입력 화상 버퍼 영역(210)에 저장된 디지탈 화상 데이터에 대하여 압축 부호화 처리를 행한다. 1장의 정지 화상에 상당하는 프레임 화상이 처리됨으로써 프레임 부호화 데이터가 생성된다.
다음에 CPU(201)는 주기억 장치(202)의 나머지 프레임 영역(211)으로부터 나머지 프레임수를 취득하여, 상기 프레임 부호화 데이터를 나머지 프레임수 만큼 복제하여, 주기억 장치(202)의 부호화 데이터 영역(212)에 기입한다. 예를 들면, 나머지 프레임수 영역(211)의 값이「2」인 경우에는, 부호화에 의해서 취득한 프레임 부호화 데이터를 2회 계속하여 부호화 데이터 영역(212)에 기입하게 된다.
그 후, 단계(68)에서 CPU(201)는 나머지 프레임수를「0」으로 하여 초기화하고, 단계(69)에서 화상 캡처 수단(204)에 대해 캡처 동작의 지시를 보낸 후, 단계(66)로 되돌아가 인터럽트 대기의 상태로 된다. 이다음 단계(66)로부터 단계(69)가 반복된다.
B. 화상 캡처 수단(204)의 동작
다음에, 도 8에 따라, 화상 캡처 수단(204)의 동작에 대하여 설명한다. 단계(71)는 도 3의 단계(11)와 마찬가지로 실행되며, CPU(201)로부터 화상 캡처의 지시가 있는지의 여부를 판정함으로써, CPU(201)로부터 지시가 있을 때까지 화상 캡처 수단(204)은 대기 상태로 된다.
전술한 바와 같이, 도 7의 흐름의 단계(63) 또는 단계(69)에서, CPU(201)가 캡처 동작의 지시를 출력하였을 때, 도 8의 단계(71)의 판정에 이어서 단계(72)가 실행된다. 단계(72) 및 단계(73)는 도 3의 단계(12)∼단계(13)와 마찬가지로 실행된다. 단, 본 실시예 3에 의한 동화상 부호화 장치에서는, A/D 변환 수단(208)이 정지 화상을 캡처하는 시각은 타이머 수단(207)으로부터 CPU(201)에 대한 인터럽트 통지의 시각과 동기하고 있는 것으로 한다.
C. HD 어댑터 수단(206)의 동작
도 9에 도시하는 HD 어댑터 수단(206)의 동작에 대해서는, 동 도면 단계(81)와 단계(82)가 도 4에 도시하는 단계(21) 및 단계(22)와 마찬가지로 실행되며, 실시예 1의 경우와 마찬가지로, 주기억 장치(202)의 부호화 데이터 영역(212)에 저장된 부호화 데이터는 순차적으로 HD(205)에 전송되어 기록된다.
D. 전체의 동작
다음에, 도 10을 참조하여, CPU(201), 화상 캡처 수단(204), HD 어댑터 수단(206) 각각의, 처리 내용과 시간과의 대응에 대하여 설명한다. 또, 각각의 동작은, △t의 시간 간격으로 도면의 좌측에서 우측을 향해 흐르고 있는 것처럼 도시되어 있는 것이며, 또한, 단계(65), 단계(68) 및 단계(69)의 처리에 대해서는, 설명을 위해, 지극히 짧은 시간으로 완료하는 것으로 한다.
우선, CPU(201)는, A-1(CPU의 동작 1)에 나타낸, 주기억 장치(202)의 나머지 프레임수 영역(211)에 대하여, 나머지 프레임수의 초기값으로서 값「0」을 기입하고, 이어서, 타이머 수단(207)을 기동시킨다(단계(61)∼단계(62)). 이에 따라, 나머지 프레임수에 대한, CPU(201)의 제어에 의한 증분이 개시된다. 또한, 이다음 타이머 수단(207)은, 시간 간격 △t마다 CPU(201)에 대하여 인터럽트를 통지한다.
그리고, CPU(201)는, 이상의 A-1에 나타낸 동작과 병행하여, A-2(CPU의 동작 2)에 나타내는 동작을 실행하는 것으로서, 이 기간 동안(상기의 단계(61)∼단계(62))은, I/O 버스 인터페이스 수단(209)으로부터의 인터럽트를 받을 때까지 대기한다(단계(66)).
계속해서, CPU(201)는 화상 캡처 수단(204)에 대하여 화상 캡처의 지시를 행하고, 그 후 타이머 수단(207)으로부터의 인터럽트 통지를 대기한다(단계(63)∼단계(64)). 한편, 화상 캡처 수단(204)은 CPU(201)로부터의 지시가 있을 때까지 대기 상태를 계속하지만(단계(71)), CPU(201)의 동작의 단계 S63에 해당하는 CPU(201)로부터의 화상 캡처의 지시를 받으면 화상을 캡처해서 CPU(201)에 대해 인터럽트를 통지한 후, CPU(201)로부터 화상 캡처 지시를 기다린다(단계(72)∼단계(73)).
그 후, CPU(201)에 의한 A-1(CPU(201)의 동작 1)의 동작에 대해서는, 타이머 수단(207)으로부터의 인터럽트 통지를 받을 때마다, 나머지 프레임수의 증분과 대기를 반복한다(단계(64)∼단계(65)).
또한, CPU(201)에 의한 A-2(CPU(201)의 동작 2)의 동작에 대해서는, 화상 캡처 수단(204)의 동작의 단계 S73에 해당하는, I/O 버스 인터페이스 수단(209)으로부터 인터럽트를 받으면, 주기억(202)의 입력 화상 버퍼 영역(210)에 저장된 디지탈 화상 데이터를 부호화하고, 부호화 데이터를 영역(212)에 기입하여, 나머지 프레임수를「0」으로 되돌려 초기화한다(단계(67)∼단계(69)).
상기, 일련의 동작과 병행하여, HD 어댑터 수단(206)은, 일정한 부호화 데이터가 부호화 데이터 영역(212)에 저장될 때까지 대기하여, 순차적으로 DMA 전송에 의해 부호화 데이터를 HD(205)에 전송한다(단계(81)∼단계(82)).
즉, 상기 동화상 부호화 장치에 있어서, 타이머 수단(207)은 시간 간격 △t마다 시각을 통지하고, 화상 캡처 수단(204)은 입력된 동화상에 대해 시각 △t에서의 화상을 정지 화상으로서 캡처하여, 디지탈 화상 데이터를 출력한다. 여기서, CPU(201)는 부호화 데이터를 삽입하는 부호화 처리로서, 화상 캡처 수단(204)이 출력하는 정지 화상을 순차적으로 캡처 부호화하고, 또한, 정지 화상을 캡처하고 있는 동안에 상기 타이머 수단(207)이 시각을 통지한 경우, 직전에 캡처한 정지 화상의 부호화 데이터의 뒤에 정지 화상의 부호화 데이터를 삽입한다. 이 때, CPU(201)가 삽입하는 데이터는 직전에 캡처한 정지 화상의 부호화 데이터이다.
이와 같이, 본 실시예 3의 동화상 부호화 장치에 의하면, 타이머 수단(207)을 구비하여, 타이머 수단(207)이 정해진 시간 간격마다 CPU(201)에 대해 인터럽트 통지를 출력하고, 주기억(202)에 나머지 프레임수 영역(211)을 구비하여, 초기값 0으로부터 증분 처리를 행해 얻어지는 나머지 프레임수를 기억하게 함으로써, CPU(201)가 화상 캡처 수단(204)으로부터 일정한 프레임 레이트로 입력 화상을 캡처할 수 없고, 화상 캡처 수단(204)으로부터 입력하는 정지 화상의 시간 간격이 △t 이상으로 된 경우, 타이머 수단(207)이 출력하는 일정 간격의 인터럽트 통지를 이용함으로써, 캡처한 정지 화상 중 캡처한 시각이 연속하는 2장의 정지 화상의 시간 간격을, 캡처할 화상에 타임 코드를 올리는 일 없이 구하고, 상기 2장의 정지 화상의 부호화 데이터의 사이에 상기 2장의 정지 화상을 부호화한 데이터를, 상기나머지 프레임수를 이용하여 얻어지는 상기 시간 간격이 항상 △t로 되도록 하는 수만큼 삽입하도록 하였기 때문에, 요구되는 일정한 프레임 레이트를 갖는 부호화 데이터를 얻는 것이 가능하게 된다.
본 실시예 3에 의한 동화상 부호화 장치에서는, 실시예 1 및 2에 의한 부호화 장치에 비해, 타이머 수단(207)을 추가하는 것을 요하게 되지만, CPU(201)의 제어에 의해 디지탈 화상 데이터의 부호화 처리를 행하는 데에 있어서는, 해당 데이터가 캡처된 시각을 주기억(202)에 기입한다고 하는 동작이 불필요하게 되기 때문에, CPU(201)에 있어서의 부호화 처리의 처리 부담의 경감을 도모할 수 있다. 또한, 주기억(102)에 타임 스탬프 영역(110)과 워크 영역(112)을 설치하는 실시예 1의 경우에 비해, 비교적 작은 영역의 나머지 프레임수 영역(211)을 설치할 뿐이기 때문에, 부호화 처리를 위해 주기억(202)에 있어서 점유하는 영역을 저감하여 장치 자원의 활용을 도모하는 것이 가능하게 된다.
(실시예 4)
본 발명의 실시예 4에 의한 동화상 부호화 장치는, 실시예 3과 마찬가지로 타이머 수단에 의한 시각의 통지를 이용하여 제어를 하는 것이고, 또한, 삽입 데이터의 작성에 예측 부호화를 이용하는 것이다.
본 실시예 4에 의한 동화상 부호화 장치의 구성은 실시예 3에 의한 것과 마찬가지이므로, 설명에는 도 6을 이용한다. 본 실시예 4에 의한 동화상 부호화 장치에서는, CPU(201)에 의한 부호화 처리의 제어의 순서가 실시예 3과는 다른 것이다. 도 11은 본 실시예 4의 CPU(201)에 있어서의, 동화상 부호화 처리를 제어할 때의 처리 순서를 도시하는 흐름도이다. 또한, 도 12은 CPU(201), 화상 캡처 수단(204) 및 HD 어댑터 수단(206)의, 처리 내용과 시간과의 대응예를 도시하는 도면이다.
또, 본 실시예 4에 의한 동화상 부호화 장치에 있어서의, 화상 캡처 수단(204)과 HD 어댑터 수단(206)의 동작은, 도 8 및 도 9의 흐름에 도시하는 실시예 3의 것과 마찬가지이므로, 그 설명은 생략한다.
이하에, 상기한 바와 같이 구성되는 본 실시예 4에 의한 동화상 부호화 장치에 있어서의 부호화 처리시의 동작을, 우선 CPU(201)의 제어의 동작에 대하여「A. CPU(201)의 동작」에 있어서, 도 11에 따라서 설명하고, 다음에 도 12를 참조하면서「B.전체의 동작」에 대하여 설명한다.
A. CPU(201)의 동작
이하에 CPU(201)의 동작을 도 11에 따라서 설명한다. 여기서, 본 실시예 4에 있어서의 CPU(201)는, 실시예 3에 도시한 바와 마찬가지로, 2개의 동작을 별도의 프로세스로서 병행적으로 실행하는 것으로서, 도 11에는 CPU(201)의 2개의 처리 순서를 도시하는 흐름도를 도시하고 있다. 이하에 이들을 A-1 및 A-2로서 각각을 설명한다.
A-1. CPU(201)의 동작 1
A-1은 타이머 수단(207)과의 관계에 있어서의 CPU(201)의 동작을 나타내는 것이다. 본 실시예 4에 있어서도, 실시예 3과 마찬가지로, 단계(91)에 있어서의 초기값 기입, 단계(92)에서의 타이머 수단(207) 기동, 단계(93)에 있어서의 화상 캡처 수단(204)으로의 지시, 단계(94)에 있어서의 인터럽트 통지 대기 및 단계(95)에서의 증분 처리가 실행된다.
A-2. CPU(201)의 동작 2
A-2는 화상 캡처 수단(204)과의 관계에 있어서의 CPU(201)의 동작을 나타내는 것이다. 단계(96)는 도 7의 단계(66)와 마찬가지로 실행되며, CPU(201)는 화상 캡처 수단(104)의 I/O 버스 인터페이스 수단(209)으로부터 인터럽트 통지가 있을 때까지 대기 상태로 된다.
그리고, 단계(96)의 판정에 있어서, I/O 버스 인터페이스 수단(209)으로부터 인터럽트 통지가 있다고 판단된 경우, 단계(97)가 실시예 3의 단계(67)와 마찬가지로 실행되며, CPU(201)는 입력 화상 버퍼 영역(210)에 저장된 디지탈 화상 데이터에 대해 압축 부호화 처리를 행한다. 1장의 정지 화상에 상당하는 프레임 화상이 처리됨으로써 프레임 부호화 데이터가 생성된다.
다음 단계(98)에 있어서 CPU(201)는 나머지 프레임수로부터 1을 감한 수를 삽입 데이터수로 하며, 해당 삽입 데이터수만큼의 매수의 정지 화상에 상당하는 부호화 데이터를 부호화 데이터 영역(212)에 기입한다. 여기서 기입하는 부호화 데이터로서는, 순방향 혹은 쌍방향 예측 부호화에 의해 생성한, 직전에 부호화된 입력 화상과 동일한 화상을 나타내는 부호화 데이터 또는 역방향 혹은 쌍방향 예측 부호화에 의해 생성한, 직후에 부호화되는 데이터와 동일한 화상을 나타내는 부호화 데이터를 이용한다.
예를 들면, 나머지 프레임수 영역(211)의 값이 3인 경우에는, 그 값으로부터 1을 감한 2를 삽입 데이터수로 하여, 2장의 부호화 데이터를 부호화 데이터 영역(212)에 기입한다. 이 때, 예를 들면, 최초의 부호화 데이터로서는, 순방향 예측 부호화에 의해서 얻어지는, 직전에 부호화된 정지 화상과 동일한 화상을 나타내는 부호화 데이터를 이용하고, 2번째 부호화 데이터로서는, 역방향 예측 부호화에 의해서 얻어지는, 직후에 부호화되는 정지 화상과 동일한 화상을 나타내는 부호화 데이터를 이용한다.
그 후, 단계(98)에 있어서 CPU(201)는, 나머지 프레임수를「0」으로 초기화하여, 단계(99)에 있어서, 화상 캡처 수단(204)에 대해 캡처 동작의 지시를 보낸 뒤에 단계(96)로 되돌아가 인터럽트 대기 상태로 된다. 이 다음 단계(96)에서 단계(99)가 반복된다.
B. 전체의 동작
다음에, 도 12를 참조하여, CPU(201), 화상 캡처 수단(204) 및 HD 어댑터 수단(206)의, 처리 내용과 시간과의 대응에 대하여 설명한다. 실시예 3과 마찬가지로, 각각의 동작은, △t의 시간 간격으로 도면의 좌측에서 우측을 향해 흐르는 것처럼 나타나 있는 것이며, 단계 S95, S98, S99, S100의 처리는 설명을 위해 지극히 짧은 시간으로 완료하는 것으로 한다.
우선, CPU(201)는 A-1(CPU의 동작 1)에 나타내는 주기억(202)의 나머지 프레임수 영역(211)에 대하여, 나머지 프레임수의 초기값으로서 값「0」을 기입하고, 이어서, 타이머 수단(207)을 기동시킨다(단계(91)∼단계(92)). 이에 따라, 나머지 프레임수에 대한, CPU(201)의 제어에 의한 증분이 개시된다. 또한, 그 다음, 타이머 수단(207)은, 시간 간격 △t마다 CPU(201)에 대하여 인터럽트를 통지한다.
그리고, CPU(201)는, 이상의 A-1에 나타낸 동작과 병행하여, A-2(CPU의 동작2)에 나타내는 동작을 실행하는 것으로서, 이 기간 동안(상기의 단계(91)∼단계(92)), I/O 버스 인터페이스 수단(209)으로부터 개입을 받을 때까지 대기한다(단계(96)).
계속해서, CPU(201)는 A-1의 동작에 있어서 화상 캡처 수단(204)에 대해 화상 캡처의 지시를 행하고, 그 후 타이머 수단(207)으로부터의 인터럽트 통지를 기다린다(단계(93)∼단계(94)). 한편, 화상 캡처 수단(204)은, CPU(201)로부터의 지시가 있을 때까지 대기 상태를 계속하지만(단계(71)), CPU(201) 동작의 단계 S63에 해당하는 CPU(201)로부터의 화상 캡처의 지시를 받으면 화상을 캡처하여, CPU(201)에 대해 인터럽트를 통지한 후, CPU(201)로부터의 화상 캡처 지시를 기다린다(단계(72)∼단계(73)).
그 후, CPU(201)에 의한 A-1(CPU(201)의 동작 1)의 동작에 대해서는, 타이머 수단(207)으로부터의 인터럽트 통지를 받을 때마다, 나머지 프레임수의 증분과 대기를 반복한다(단계(94)∼단계(95)).
또한, CPU(201)에 의한 A-2(CPU(201)의 동작 2)의 동작에 대해서는, 화상 캡처 수단(204)의 동작의 단계 S73에 해당하는 I/O 버스 인터페이스 수단(209)으로부터의 인터럽트를 받으면, 주기억(202)의 입력 화상 버퍼 영역(210)에 저장된 디지탈 화상 데이터를 부호화하여, 부호화 데이터를 영역(212)에 기입하고, 나머지 프레임수 영역(211)의 값을「0」으로 되돌린다(단계(97)∼단계(99)).
상기, 일련의 동작과 병행하여, HD 어댑터 수단(206)은 일정한 부호화 데이터가 부호화 데이터 영역(212)에 저장될 때까지 대기하여, 순차적으로 DMA 전송에 의해 부호화 데이터를 HD(205)에 전송한다(단계(81)∼단계(82)).
예를 들면, 상기 정지 화상의 시간 간격이 입력 화상과 입력 화상의 간격이 3·△t만큼 떨어져 있는 경우에는, 상기 시간 간격을 △t으로 하기 위해서, 2장의 화상에 상당하는 부호화 데이터를 삽입한다. 본 실시예 4에 의한 동화상 부호화 처리에 있어서는, 이 때에, 해당 2장 중 시간적으로 최초의 한 장을 직전의 입력 화상 데이터로 하고, 시간적으로 다음 1장을 직후의 입력 화상 데이터를 부호화한 데이터로 한다. 삽입하는 데이터로서 2장 모두 직전의 화상을 부호화한 데이터를 이용하면, 실제로 부호화 데이터를 재생한 경우의 프레임의 간격은 3·△t 그대로이지만, 2장 중 시간적으로 이전인(최초의) 1장을 직전의 입력 화상 데이터로 하고, 시간적으로 이후인 1장을 직후의 입력 화상 데이터를 부호화한 데이터로 하는 것으로, 부호화 데이터를 재생한 경우의 프레임 간격을 2·△t로 좁힐 수 있어서, 동화상으로서 재생(playback)한 경우의 화면의 변화가 매끄럽게 된다.
이와 같이, 본 실시예 4에 의한 동화상 부호화 장치에 의하면, 타이머 수단(207)을 구비하여 타이머 수단(207)이 정해진 시간 간격마다 CPU(201)에 대해 인터럽트 통지를 출력하고, 주기억(202)에 나머지 프레임수 영역(211)을 구비하여 초기값 0으로부터 증분 처리를 행해 얻어진 수치를 기억하게 한 것으로, CPU(201)가 화상 캡처 수단(204)으로부터 일정한 프레임 레이트로 입력 화상을 캡처하지 않고, 화상 캡처 수단(204)으로부터 입력하는 정지 화상의 시간 간격이 △t 이상으로 된 경우, 타이머 수단(207)이 출력하는 일정 간격의 인터럽트 통지를 이용함으로써, 캡처한 정지 화상 중 캡처한 시각이 연속하는 2장의 정지 화상의 시간 간격을 캡처하는 화상에 타임 코드를 올리는 일없이 구하여, 상기 2장의 정지 화상의 부호화 데이터의 사이에 상기 2장의 정지 화상을 부호화한 데이터를 상기 시간 간격이 항상 △t로 되는 수만큼 삽입하도록 하였기 때문에, 요구되는 일정한 프레임 레이트를 갖는 부호화 데이터를 얻는 것이 가능하게 된다.
그리고, 상기의 삽입하는 데이터로서는, 예측 부호화에 의해서 생성한, 직전 또는 직후에 캡처한 정지 화상 중 어느 한쪽의 정지 화상과 동일한 화상인 것을 나타내는 부호화 데이터를 이용하기 때문에, 해당 동화상 부호화 장치에 있어서의 처리의 결과 얻어지는 부호화 데이터를 재생(playback)한 경우의 화면의 변화가 매끄럽게 되어, 재생 화질이 양호한 부호화 데이터를 얻는 것이 가능하게 된다.
또, 본 실시예 4에서는, 순방향 예측과 역방향 예측을 실행하는 것으로서 설명하였지만, 순방향 예측 부호화, 역방향 예측 부호화 및 쌍방향 예측 부호화 중 적어도 1개의 부호화에 의해 생성한, 직전 또는 직후에 캡처한 상기 정지 화상 중 어느 한쪽의 것과 동일한 화상에 대응하는 부호화 데이터를 이용하는 것으로서, 부호화 처리를 하는 것이 가능하다.
이상으로 나타낸 실시예 1∼4의 동화상 부호화 장치는, 모두 각각의 동화상 부호화 방법에 대응한 동화상 부호화 프로그램을 퍼스널 컴퓨터 등의 범용 컴퓨터 시스템에 있어서 해당 프로그램을 실행함으로써 실현된다. 동화상 부호화 프로그램은 플로피 디스크나 CD-ROM 등의 기록 매체에 기록하거나 네트워크 또는 데이터 통신 등에 접속하여, 다른 컴퓨터 시스템으로부터의 프로그램에 의해서 실시하는 것도 가능하다.
또, 본 발명은 상기 각 실시예에 한정되는 것이 아니며, 예를 들면, 실시예 1 내지 실시예 4에서는 화상의 부호화 처리를 CPU에서 행하고 있지만, 전용의 하드웨어 등으로 화상의 부호화 처리를 하여도 좋다. 기타, 본 발명의 청구의 범위내에서 많은 설계 변경 및 수정을 가할 수 있는 것이다.
본 발명은, 상기한 바와 같은 종래의 문제점을 감안하여 이루어진 것으로, 범용적인 컴퓨터 시스템에 있어서, 주로 소프트웨어 처리에 의해 화상 부호화를 실행함으로써, 저렴한 비용으로 실현가능한 것이며, 또한 해당 소프트웨어 처리가 멀티태스크 처리의 영향 등에 의해 일정한 비율로 실행할 수 없는 일이 있는 경우에도, MPEG 등의 규격에 따른, 일정한 프레임 레이트를 갖는 부호화 데이터를 얻는 것이 가능한, 동화상 부호화 방법을 제공한다.
또한, 본 발명은 상기한 바와 같은 방법으로 동화상 부호화를 실행하는 동화상 부호화 장치를 제공한다.
또한, 본 발명은, 범용적인 컴퓨터 시스템에서 실행함으로써, 상기한 바와 같은 동화상 부호화를 행할 수 있는 동화상 부호화 프로그램을 기록한 프로그램 기록 매체를 제공한다.
또한, 본 발명은, 상기한 바와 같은 동화상 부호화 처리를 하는 것이며, 또한, 해당 부호화에 의해 얻어진 부호화 데이터를 재생(playback)하였을 때에 움직임이 매끄러운 동화상을 얻을 수 있도록, 동화상 부호화를 실행하는, 동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체를 제공한다.

Claims (15)

  1. 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 방법에 있어서,
    입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 단계와,
    상기 화상 캡처 단계에 있어서, 상기 동화상에 대한 정지 화상으로서의 캡처 처리가 이루어진 시각 n·△t에 대응하는 시간 정보를 출력하는 시간 정보 생성 단계와,
    상기 화상 캡처 단계에 있어서 출력되는 정지 화상 데이터를 순차적으로 캡처하여 부호화 처리를 함과 동시에, 상기 시간 정보 생성 단계에 있어서 출력된 시간 정보를 이용하여, 상기 캡처한 정지 화상 데이터중, 캡처한 시각이 연속하는 2 장의 정지 화상간의 시간 간격을 구하여, 해당 구한 시간 간격이 m·△t(단, m은 2이상의 정수)인 경우에, 부호화된 정지 화상의 시간 간격이 일정하게 되도록, 상기 2장의 정지 화상의 부호화 데이터의 사이에 m-1장 이하의 정지 화상에 대응하는 부호화 데이터를 삽입하는 부호화 단계를 포함하는 것을 특징으로 하는 동화상 부호화 방법.
  2. 제 1 항에 있어서,
    상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상중, 시간적으로 먼저 캡처한 정지 화상이나, 혹은 뒤에 캡처한 정지 화상중, 어느 한쪽의 정지 화상을 부호화한 데이터를 삽입하는 것을 특징으로 하는 동화상 부호화 방법.
  3. 제 1 항에 있어서,
    상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상을 부호화한 데이터를, 정지 화상 복수매 상당분 조합하여 삽입하는 것을 특징으로 하는 동화상 부호화 방법.
  4. 제 1 항에 있어서,
    상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 순방향 예측 부호화, 역방향 예측 부호화, 및 쌍방향 예측 부호화중 적어도 1개의 부호화에 의해 생성한, 상기 2장의 정지 화상중 어느 한쪽의 정지 화상과 동일한 화상인 것을 나타내는 부호화 데이터를 삽입하는 것을 특징으로 하는 동화상 부호화 방법.
  5. 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 방법에 있어서,
    시간 간격 k·△t(단, k는 정수)마다 시각을 통지하는 시각 통지 단계와,
    입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 단계와,
    상기 화상 캡처 단계에 있어서 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리함과 동시에, 정지 화상 데이터에 대한 캡처의 사이에 상기 시각 통지 단계에 있어서 이루어지는 시각의 통지가 있는 경우에, 직전에 캡처한 정지 화상의 부호화 데이터의 뒤에 정지 화상의 부호화 데이터를 부가하는 부호화 단계를 포함하는 것을 특징으로 하는 동화상 부호화 방법.
  6. 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 장치에 있어서,
    입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 수단과,
    상기 화상 캡처 수단에 의해, 상기 동화상에 대한 정지 화상으로서의 캡처 처리가 이루어진 시각 n·△t에 대응하는 시간 정보를 출력하는 시간 정보 생성 수단과,
    상기 화상 캡처 수단에 의해 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리를 함과 동시에, 상기 시간 정보 생성 수단이 출력하는 시간 정보를 이용하여, 상기 캡처한 정지 화상중, 캡처한 시각이 연속하는 2장의 정지 화상 사이의 시간 간격을 구하여, 해당 구한 시간 간격이 m·△t(단, m은 2이상의 정수)인 경우에, 부호화된 정지 화상의 시간 간격이 일정하게 되도록, 상기 2장의 정지 화상의 부호화 데이터의 사이에 m-1장 이하의 정지 화상에 대응하는 부호화 데이터를 삽입하는 부호화 수단을 포함한 것을 특징으로 하는 동화상 부호화 장치.
  7. 제 6 항에 있어서,
    상기 부호화 수단은, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기2장의 정지 화상중, 시간적으로 먼저 캡처한 정지 화상이나, 혹은 뒤에 캡처한 정지 화상중, 어느 한쪽의 정지 화상을 부호화한 데이터를 삽입하는 것을 특징으로 하는 동화상 부호화 장치.
  8. 제 6 항에 있어서,
    상기 부호화 수단은, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기2장의 정지 화상을 부호화한 데이터를, 정지 화상 복수매 상당분 조합하여 삽입하는 것을 특징으로 하는 동화상 부호화 장치.
  9. 제 6 항에 있어서,
    상기 부호화 수단은, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 순방향 예측 부호화, 역방향 예측 부호화, 및 쌍방향 예측 부호화중 적어도 1개의 부호화에 의해 생성한, 상기 2장의 정지 화상중 어느 한쪽의 정지 화상과 동일한 화상인 것을 나타내는 부호화 데이터를 삽입하는 것을 특징으로 하는 동화상 부호화 장치.
  10. 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 장치에 있어서,
    시간 간격 k·△t(단, k는 정수)마다 시각을 통지하는 시각 통지 수단과,
    입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 수단과,
    상기 화상 캡처 수단에 의해 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리함과 동시에, 정지 화상 데이터에 대한 캡처의 사이에 상기 시각 통지 수단에 의해 시각의 통지가 있는 경우에, 직전에 캡처한 정지 화상의 부호화 데이터의 뒤에 정지 화상의 부호화 데이터를 부가하는 부호화 수단을 포함한 것을 특징으로 하는 동화상 부호화 장치.
  11. 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 단계와,
    상기 화상 캡처 단계에 있어서, 상기 동화상에 대한 정지 화상으로서의 캡처 처리가 된 시각 n·△t에 대응하는 시간 정보를 출력하는 시간 정보 생성 단계와,
    상기 화상 캡처 단계에 있어서 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리를 함과 동시에, 상기 시간 정보 생성 단계에 있어서 출력된 시간 정보를 이용하여, 상기 캡처한 정지 화상 데이터중, 캡처한 시각이 연속하는 2장의 정지 화상간의 시간 간격을 구하여, 해당 구한 시간 간격이 m· △t(단, m은 2이상의 정수)인 경우에, 부호화된 정지 화상의 시간 간격이 일정하게 되도록, 상기 2장의 정지 화상의 부호화 데이터의 사이에 m-1장 이하의 정지 화상에 대응하는 부호화 데이터를 삽입하는 부호화 단계를 포함하는 동화상 부호화 프로그램을 기록한 것을 특징으로 하는 동화상 부호화 프로그램 기록 매체.
  12. 제 11 항에 있어서,
    상기 기록된 동화상 부호화 프로그램의 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상중, 시간적으로 먼저 캡처한 정지 화상이나, 혹은 뒤에 캡처한 정지 화상중, 어느 한쪽의 정지 화상을 부호화한 데이터를 삽입하는 것을 특징으로 하는 동화상 부호화 프로그램 기록 매체.
  13. 제 11 항에 있어서,
    상기 기록된 동화상 부호화 프로그램의 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 상기 2장의 정지 화상을 부호화한 데이터를, 정지 화상 복수매 상당분 조합하여 삽입하는 것을 특징으로 하는 동화상 부호화 프로그램 기록 매체.
  14. 제 11 항에 있어서,
    상기 기록된 동화상 부호화 프로그램의 상기 부호화 단계에서는, 상기 2장의 정지 화상의 부호화 데이터의 사이에, 순방향 예측 부호화, 역방향 예측 부호화, 및 쌍방향 예측 부호화중 적어도 1개의 부호화에 의해 생성한, 상기 2장의 정지 화상중 어느 한쪽의 정지 화상과 동일한 화상인 것을 나타내는 부호화 데이터를 삽입하는 것을 특징으로 하는 동화상 부호화 프로그램 기록 매체.
  15. 동화상을 입력하고, 부호화 처리를 하여, 부호화 데이터를 작성하는 동화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    시간 간격 k·△t(단, k는 정수)마다 시각을 통지하는 시각 통지 단계와,
    입력된 동화상에 대하여, 시각 n·△t(단, n은 정수, △t는 시간 간격)에 있어서의 화상을 정지 화상으로서 캡처하여, 정지 화상 데이터로서 출력하는 화상 캡처 단계와,
    상기 화상 캡처 단계에 있어서 출력되는 정지 화상 데이터를, 순차적으로 캡처하여 부호화 처리함과 동시에, 정지 화상 데이터에 대한 캡처의 사이에 상기 시각 통지 단계에 있어서 이루어지는 시각의 통지가 있는 경우에, 직전에 캡처한 정지 화상의 부호화 데이터의 뒤에 정지 화상의 부호화 데이터를 부가하는 부호화 단계를 포함하는 동화상 부호화 프로그램을 기록한 것을 특징으로 하는 동화상 부호화 프로그램 기록 매체.
KR1019970057469A 1996-10-31 1997-10-31 동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체 KR100257615B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP28958096A JPH10136380A (ja) 1996-10-31 1996-10-31 動画像符号化装置、および方法
JP96-289580 1996-10-31

Publications (2)

Publication Number Publication Date
KR19980033397A true KR19980033397A (ko) 1998-07-25
KR100257615B1 KR100257615B1 (ko) 2000-06-01

Family

ID=17745082

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970057469A KR100257615B1 (ko) 1996-10-31 1997-10-31 동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체

Country Status (6)

Country Link
US (1) US6014496A (ko)
EP (1) EP0840515B1 (ko)
JP (1) JPH10136380A (ko)
KR (1) KR100257615B1 (ko)
CN (1) CN1130915C (ko)
DE (1) DE69734186T2 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2764156B1 (fr) * 1997-05-27 1999-11-05 Thomson Broadcast Systems Dispositif de pretraitement pour codage mpeg ii
JP3209210B2 (ja) 1999-02-10 2001-09-17 日本電気株式会社 動画像圧縮方法、動画像圧縮装置及び動画像圧縮プログラムを記憶した記憶媒体
KR100320151B1 (ko) * 1999-12-15 2002-01-17 최광섭 다중 영상신호저장 제어장치
JP4779318B2 (ja) * 2004-07-09 2011-09-28 株式会社島津製作所 分析システム
JP5164610B2 (ja) * 2007-05-02 2013-03-21 キヤノン株式会社 撮像装置及びその制御方法
CN101540902B (zh) * 2008-03-20 2011-02-02 华为技术有限公司 运动矢量的缩放方法和装置、编解码方法和系统

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4680647A (en) * 1983-09-26 1987-07-14 Pioneer Electronic Corporation Method for recording and reproducing video format signal
JP3164647B2 (ja) * 1992-06-03 2001-05-08 株式会社東芝 動画像符号化方法及び装置
US5528238A (en) * 1993-11-24 1996-06-18 Intel Corporation Process, apparatus and system for decoding variable-length encoded signals
US5594660A (en) * 1994-09-30 1997-01-14 Cirrus Logic, Inc. Programmable audio-video synchronization method and apparatus for multimedia systems
EP0721284B1 (en) * 1995-01-09 2000-05-03 Daewoo Electronics Co., Ltd An image processing system using pixel-by-pixel motion estimation and frame decimation
US5724475A (en) * 1995-05-18 1998-03-03 Kirsten; Jeff P. Compressed digital video reload and playback system
US5835149A (en) * 1995-06-06 1998-11-10 Intel Corporation Bit allocation in a coded video sequence

Also Published As

Publication number Publication date
CN1130915C (zh) 2003-12-10
US6014496A (en) 2000-01-11
JPH10136380A (ja) 1998-05-22
DE69734186D1 (de) 2005-10-20
CN1189057A (zh) 1998-07-29
EP0840515A3 (en) 2000-03-22
EP0840515A2 (en) 1998-05-06
DE69734186T2 (de) 2006-06-29
EP0840515B1 (en) 2005-09-14
KR100257615B1 (ko) 2000-06-01

Similar Documents

Publication Publication Date Title
US6091778A (en) Motion video processing circuit for capture, playback and manipulation of digital motion video information on a computer
JP2787599B2 (ja) 画像信号符号化制御方式
US5124790A (en) Signal processing device
US6212208B1 (en) Method for coding and multiplexing multimedia data, apparatus for coding and multiplexing multimedia data, record media containing program for coding and multiplexing multimedia data
US6292878B1 (en) Data recorder and method of access to data recorder
CA2260932C (en) Motion video processing circuit for capture, playback and manipulation of digital motion video information on a computer
US6229576B1 (en) Editing system with router for connection to HDTV circuitry
KR100257615B1 (ko) 동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체
US20020113898A1 (en) Picture processing apparatus and method, and recording medium
US7046251B2 (en) Editing system with router for connection to HDTV circuitry
US6256344B1 (en) Variable bit rate encoder
US6731809B1 (en) Moving picture data compression device
KR20050104455A (ko) 다중 비트율을 지원하는 실시간 동영상 스트림 전송시스템
KR20190101579A (ko) 초고해상도 다채널 영상처리를 위한 재구성 가능한 영상 시스템
JP2737690B2 (ja) 動画像通信方式
JP3045066B2 (ja) 圧縮映像編集装置
JPH10150623A (ja) データ記録再生装置
JP3178347B2 (ja) 映像出力装置
JPH10257499A (ja) 動画像符号化装置および方法
JP2724049B2 (ja) 圧縮動画像再生システム
JPH1175171A (ja) マルチメディアデータ符号化多重化方法、マルチメディアデータ符号化多重化装置、およびマルチメディアデータ符号化多重化プログラム記録媒体
JP2009147602A (ja) 記録再生方法および装置
JPH09289633A (ja) ストリームデータのオンデマンド再生装置
WO2005011271A1 (fr) Procede et appareil d'enregistrement et de traitement d'images numeriques
JPH09224242A (ja) 画像データバス装備画像圧縮伸長機構

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20070223

Year of fee payment: 8

LAPS Lapse due to unpaid annual fee