JPH10136380A - 動画像符号化装置、および方法 - Google Patents

動画像符号化装置、および方法

Info

Publication number
JPH10136380A
JPH10136380A JP28958096A JP28958096A JPH10136380A JP H10136380 A JPH10136380 A JP H10136380A JP 28958096 A JP28958096 A JP 28958096A JP 28958096 A JP28958096 A JP 28958096A JP H10136380 A JPH10136380 A JP H10136380A
Authority
JP
Japan
Prior art keywords
image
time
still
encoding
still images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP28958096A
Other languages
English (en)
Inventor
Takao Matsumoto
孝夫 松本
Aki Yoneda
亜旗 米田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP28958096A priority Critical patent/JPH10136380A/ja
Priority to US08/960,573 priority patent/US6014496A/en
Priority to EP19970118919 priority patent/EP0840515B1/en
Priority to DE1997634186 priority patent/DE69734186T2/de
Priority to KR1019970057469A priority patent/KR100257615B1/ko
Priority to CN97122817A priority patent/CN1130915C/zh
Publication of JPH10136380A publication Critical patent/JPH10136380A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • H04N5/9261Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation involving data reduction
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/3002Conversion to or from differential modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

(57)【要約】 【課題】 入力画像を一定のフレームレートで取り込め
ない場合でも、符号化画像のフレームレートを一定にで
き、MPEG等の一定フレームレートの符号化画像を必
要とする画像符号化方法において、動画像圧縮できる動
画像符号化装置の提供。 【解決手段】 上記装置は、CPU101と、主記憶1
02と、主記憶102の制御を行うとともにシステムバ
ス、I/Oバスのブリッジとして機能するバスブリッジ
手段103と、I/Oバスに接続され、NTSC等で入
力された動画像をキャプチャする画像キャプチャ手段1
04と、符号化された動画像データを保存するHD10
5と、I/Oバスに接続され主記憶102上のデータを
DMAによりHD105に転送するHDアダプタ手段1
06とから構成される。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、動画像をリアルタ
イムで圧縮する動画像符号化装置、および方法に関す
る。
【0002】
【従来の技術】近年のコンピュータおよびVSLI等の
半導体デバイスの高速化・低価格化に伴い、ディジタル
音声・画像の圧縮伸長処理が、低価格のPC(Personal
Computer)等をベースとしたシステムで実現可能となっ
てきている。
【0003】たとえば、現在PCをベースとしてリアル
タイムで動画像を圧縮符号化して保存する動画像符号化
装置の構成としては、図13に示すものが一般的であ
る。
【0004】図13において、301はCPU、302
は主記憶、303はシステムバス、I/Oバス、および
主記憶302とのインタフェースからなるバスブリッジ
部、304は画像キャプチャ部、305は符号化された
動画像データを保存するHD、306は、I/Oバスに
接続され主記憶302上のデータをHD305に転送す
るHDアダプタ部である。
【0005】画像キャプチャ部304は、NTSC等の
アナログ画像信号をディジタル画像データに変換するた
めのA/D変換部307と、A/D変換部307からの
ディジタル画像データを一定のフレームレートで受け取
り、圧縮する画像圧縮符号化部308と、画像圧縮符号
化部308から得られた画像圧縮データを、主記憶30
2へ転送するI/Oバスインタフェース部309とから
構成される。
【0006】上記従来の動画像符号化装置の動作を以下
に説明する。
【0007】入力画像が一定のフレームレート(たとえ
ば、30fps)でA/D変換部307により、ディジ
タル画像データに変換された後、画像圧縮符号化部30
8は、A/D変換部307からディジタル画像データを
受け取り、A/D変換部307が出力する画像のフレー
ムレートと同じフレームレートで圧縮符号化を行う。
【0008】続いて、I/Oバスインタフェース部30
9は、画像圧縮符号化部308が出力する画像圧縮デー
タを、主記憶302に転送する。また、HDアダプタ部
306は、主記憶302に転送された上記画像圧縮デー
タをHD305へ転送する。
【0009】しかしながら、上記の構成では、画像圧縮
符号化部308は、多くの画像圧縮処理をおこなう必要
等が生じるため大規模なLSI等を必要とすること等に
より、一般に高価となる。そこで、より安価な動画像符
号化装置を提供するためには、市場に数多く提供されて
いる安価な画像キャプチャカード等を用い、画像符号化
部として、CPU、もしくは処理能力の低い画像圧縮符
号化LSI等を用いた図14に示すような動画像符号化
装置が考えられる。
【0010】図14において、401はCPU、402
は主記憶、403はシステムバス、I/Oバス、および
主記憶402とのインタフェースからなるバスブリッジ
部であり、404は、画像キャプチャ部であり、405
は符号化された動画像データを保存するHD、406は
I/Oバスに接続され、主記憶402上のデータをHD
405に転送するHDアダプタ部である。
【0011】画像キャプチャ部404は、NTSC等の
アナログ画像信号をディジタル画像データに変換するA
/D変換部407と、A/D変換部407からのディジ
タル画像データを、I/Oバスを通じてDMA転送によ
り主記憶402へ転送するI/Oバスインタフェース部
408とから構成される。
【0012】上記動画像符号化装置の動作を以下に説明
する。
【0013】画像キャプチャ部404は、A/D変換部
407でディジタル化されたディジタル画像データを主
記憶402に転送する。その後、CPU401は、主記
憶402に転送されたディジタル画像データを圧縮符号
化し、主記憶402に再度転送する。また、HDアダプ
タ部406は、主記憶402に転送された上記画像圧縮
データをHD405へ転送する。
【0014】
【発明が解決しようとする課題】しかしながら、図14
に示す装置では、画像圧縮符号化処理のための処理時間
が動的に変化するとき、一定のフレームレートでディジ
タル化された入力画像データを処理しきれない場合があ
るという問題点がある。
【0015】すなわち、たとえば図12で示す装置が、
マルチタスクOS(Operating System)をOSとして動
作しており、画像キャプチャ部404から入力画像を時
間Δt毎に取り込み圧縮符号化する場合に、CPU40
1の画像データ圧縮符号化時に、ユーザが動画像符号化
とは異なるアプリケーション(たとえば、ワードプロセ
ッサ)を作動させると、CPUはワードプロセッサの処
理も行わなくてはならない。このため、いったん画像圧
縮符号化処理を中断する必要がある。このとき、ワード
プロセッサの処理による中断が長すぎると、画像圧縮符
号化処理が時間Δt以内で実行できないため、入力画像
を時間Δtの間隔で処理することが不可能となる。その
結果、たとえばMPEG等のような一定のフレームレー
トで動画像を圧縮符号化する圧縮符号化方法では、動画
像を圧縮符号化できなくなるという問題点が発生する。
【0016】本発明は、上記のような従来の問題点に鑑
みてなされたもので、画像キャプチャ手段からの入力画
像を、一定のフレームレートで処理できない場合であっ
ても、符号化画像のフレームレートを一定にすることが
でき、MPEG等の一定フレームレートの符号化画像を
必要とする画像符号化方法においても動画像圧縮を可能
とする動画像符号化装置、および方法を提供することを
目的とするものである。
【0017】また、動画像として再生した場合の動きの
変化を滑らかにすることのできる動画像符号化装置、お
よび方法を提供することを目的とするものである。
【0018】
【課題を解決するための手段】請求項1の発明にかかる
動画像符号化装置は、入力された動画像の時刻n・Δt
(ただし、nは整数、Δtは時間間隔)における画像を
静止画像としてキャプチャし、出力する画像キャプチャ
手段、この画像キャプチャ手段が、上記動画像を静止画
像としてキャプチャした時刻n・Δtに対応する時間情
報を出力する時間情報生成手段、および上記画像キャプ
チャ手段から出力される静止画像を順次取り込み符号化
するとともに、上記時間情報生成手段より得た時間情報
から、取り込んだ静止画像のうちのキャプチャした時刻
が連続する2枚の静止画像間の時間間隔を求め、この求
めた時間間隔がm・Δt(ただし、mは2以上の整数)
の場合に、符号化された静止画像の時間間隔が一定とな
るように、上記2枚の静止画像の符号化データの間にm
−1枚以下の静止画像に対応する符号化データを挿入す
る符号化手段を含むことを特徴とする。
【0019】請求項2の発明にかかる動画像符号化装置
は、請求項1の動画像符号化装置において、上記符号化
手段は、上記2枚の静止画像の符号化データの間に、上
記2枚の静止画像のうちの、時間的に先にキャプチャし
た、あるいは後にキャプチャした静止画像の、いずれか
一方の静止画像を符号化したデータを挿入するものであ
ることを特徴とする。
【0020】請求項3の発明にかかる動画像符号化装置
は、請求項1の動画像符号化装置において、上記符号化
手段は、上記2枚の静止画像の符号化データの間に、上
記2枚の静止画像の符号化データを複数枚組み合わせて
挿入するものであることを特徴とする。
【0021】請求項4の発明にかかる動画像符号化装置
は、請求項2または請求項3の動画像符号化装置におい
て、上記符号化手段は、上記2枚の静止画像の符号化デ
ータの間に、順方向予測符号化、逆方向予測符号化、お
よび双方向予測符号化のうち少なくとも1つの符号化に
より生成した、上記2枚の静止画像のうちいずれか一方
の静止画像と同じ画像であることを示す符号化データを
挿入することを特徴とする。
【0022】請求項5の発明にかかる動画像符号化装置
は、時間間隔k・Δt(ただし、kは整数)で時刻を通
知するタイマ手段、入力された動画像から時刻n・Δt
(ただし、nは整数)における画像を静止画像としてキ
ャプチャし、出力する画像キャプチャ手段、およびこの
画像キャプチャ手段が出力する静止画像を、順次取り込
み符号化するとともに、静止画像を取り込んでいる間に
上記タイマ手段が時刻を通知した場合に、直前に取り込
んだ静止画像の符号化データの後に静止画像の符号化デ
ータを付加する符号化手段を含むことを特徴とする。
【0023】請求項6の発明にかかる動画像符号化装置
は、請求項5の動画像符号化装置において、上記符号化
手段は、上記静止画像を取り込んでいる間に上記タイマ
手段が時刻を通知した場合に付加する符号化データとし
て、直前に取り込んだ静止画像の符号化データを用いる
ものであることを特徴とする。
【0024】請求項7の発明にかかる動画像符号化装置
は、請求項5の動画像符号化装置において、上記符号化
手段は、上記静止画像を取り込んでいる間に上記タイマ
手段が時刻を通知すると、順方向予測符号化、逆方向予
測符号化、および双方向予測符号化のうち少なくとも1
つの符号化により生成した、直前に取り込んだ、または
直後に取り込む上記静止画像のうちいずれか一方の静止
画像と同じ画像であることを示す符号化データを付加す
るものであることを特徴とする。
【0025】請求項8の発明にかかる動画像符号化方法
は、入力された動画像の時刻n・Δt(ただし、nは整
数、Δtは時間間隔)における画像を静止画像としてキ
ャプチャし、出力する画像キャプチャステップ、この画
像キャプチャステップが、上記動画像を静止画像として
キャプチャした時刻n・Δtに対応する時間情報を出力
する時間情報生成ステップ、および上記画像キャプチャ
ステップから出力される静止画像を順次取り込み符号化
するとともに、上記時間情報生成ステップより得た時間
情報から、取り込んだ静止画像のうちのキャプチャした
時刻が連続する2枚の静止画像間の時間間隔を求め、こ
の求めた時間間隔がm・Δt(ただし、mは2以上の整
数)の場合に、符号化された静止画像の時間間隔が一定
となるように、上記2枚の静止画像の符号化データの間
にm−1枚以下の静止画像に対応する符号化データを挿
入する符号化ステップを含むことを特徴とする。
【0026】請求項9の発明にかかる動画像符号化方法
は、請求項8の動画像符号化方法において、上記符号化
ステップは、上記2枚の静止画像の符号化データの間
に、上記2枚の静止画像のうちの、時間的に先にキャプ
チャした、あるいは後にキャプチャした静止画像の、い
ずれか一方の静止画像を符号化したデータを挿入するも
のであることを特徴とする。
【0027】請求項10の発明にかかる動画像符号化方
法は、請求項8の動画像符号化方法において、上記符号
化ステップは、上記2枚の静止画像の符号化データの間
に、上記2枚の静止画像の符号化データを複数枚組み合
わせて挿入するものであることを特徴とする。
【0028】請求項11の発明にかかる動画像符号化方
法は、請求項9または請求項10の動画像符号化方法に
おいて、上記符号化ステップは、上記2枚の静止画像の
符号化データの間に、順方向予測符号化、逆方向予測符
号化、および双方向予測符号化のうち少なくとも1つの
符号化により生成した、上記2枚の静止画像のうちいず
れか一方の静止画像と同じ画像であることを示す符号化
データを挿入することを特徴とする。
【0029】請求項12の発明にかかる動画像符号化方
法は、時間間隔k・Δt(ただし、kは整数)で時刻を
通知するタイマステップ、入力された動画像から時刻n
・Δt(ただし、nは整数)における画像を静止画像と
してキャプチャし、出力する画像キャプチャステップ、
およびこの画像キャプチャステップが出力する静止画像
を、順次取り込み符号化するとともに、静止画像を取り
込んでいる間に上記タイマステップが時刻を通知した場
合に、直前に取り込んだ静止画像の符号化データの後に
静止画像の符号化データを付加する符号化ステップを含
むことを特徴とする。
【0030】請求項13の発明にかかる動画像符号化方
法は、請求項12の動画像符号化方法において、上記符
号化ステップは、上記静止画像を取り込んでいる間に上
記タイマステップが時刻を通知した場合に付加する符号
化データとして、直前に取り込んだ静止画像の符号化デ
ータを用いるものであることを特徴とする。
【0031】請求項14の発明にかかる動画像符号化方
法は、請求項12の動画像符号化方法において、上記符
号化ステップは、上記静止画像を取り込んでいる間に上
記タイマステップが時刻を通知すると、順方向予測符号
化、逆方向予測符号化、および双方向予測符号化のうち
少なくとも1つの符号化により生成した、直前に取り込
んだ、または直後に取り込む上記静止画像のうちいずれ
か一方の静止画像と同じ画像であることを示す符号化デ
ータを付加するものであることを特徴とする。
【0032】
【発明の実施の形態】
(実施の形態1)以下に、本発明の実施の形態1につい
て図面を参照しながら説明する。
【0033】図1は、本発明の実施の形態1による動画
像符号化装置の電気的構成を示すブロック図である。
【0034】本装置は、CPU101と、主記憶102
と、この主記憶102の制御を行うとともに、システム
バス、I/Oバスのブリッジとして機能するバスブリッ
ジ手段103と、I/Oバスに接続されNTSC等で入
力された動画像をキャプチャする画像キャプチャ手段1
04と、符号化された動画像データを保存するHD10
5と、I/Oバスに接続され主記憶102上のデータを
DMA(Direct Memory Access) によりHD105に転
送するHDアダプタ手段106とから構成される。
【0035】画像キャプチャ手段104は、CPU10
1からの指示に基づき、入力された動画像を、Δtで離
散化された特定の時間に静止画像としてキャプチャした
後に、ディジタル化するA/D変換手段107と、この
A/D変換手段107によりディジタル化されたディジ
タル画像データを、DMA転送により主記憶102の入
力画像バッファ領域109に転送するとともに、転送終
了時にCPU101に対して割り込みを通知するI/O
バスインタフェース手段108とから構成される。
【0036】主記憶102は、画像キャプチャ手段10
4が入力画像を転送して格納する入力画像バッファ領域
109と、CPU101が画像キャプチャ手段104か
らの割り込み時の時刻を格納するタイムスタンプ領域1
10と、CPU101が入力画像バッファ領域109の
静止画像を符号化したデータを格納する符号化データ領
域111と、CPU101が入力画像バッファ領域10
9の静止画像を符号化したデータを一時的に保持するワ
ーク領域112とから構成される。
【0037】以下に、上記動画像符号化装置の動作につ
いて、図2ないし図4を参照しながら説明する。図2
は、CPU101の動作の流れを示すフローチャート、
図3は、動画像キャプチャ手段104の動作の流れを示
すフローチャート、図4は、HDアダプタ手段106の
動作の流れを示すフローチャートである。
【0038】図2を参照して、CPU101の動作を説
明する。
【0039】まず、CPU101は、画像キャプチャ手
段104に対して画像のキャプチャを指示する(ステッ
プS1)。この指示の下、画像キャプチャ手段104
が、動作を行うが、この動作については後述する。
【0040】続いて、CPU101は、I/Oバスイン
タフェース手段108からの割り込み通知があるまで待
機する(ステップS2)。ここで、I/Oバスインタフ
ェース手段108からの割り込み通知があると、CPU
101は、その割り込み通知時の時刻Tbをタイムスタ
ンプ領域110に書き込むとともに(ステップS3)、
入力画像バッファ領域109のデータを符号化し、この
符号化データを符号化データ領域111、およびワーク
領域112に書き込む(ステップS4)。その後、CP
U101は、画像キャプチャ手段104に対して画像の
キャプチャを再度指示し(ステップS5)、CPU10
1は、I/Oバスインタフェース手段108からの割り
込み通知(後述のステップS13に該当する)があるま
で待機する(ステップS6)。CPU101は、この割
り込み通知があったときの時刻Tn、およびタイムスタ
ンプ領域110に書かれている時刻Tbより、下記の式
(1)を用いて、符号化する静止画像の時間間隔をΔt
にするために、前回の入力画像と今回の入力画像との間
に挿入する静止画像の枚数nを求め、タイムスタンプ領
域110に時刻Tnを書き込む(ステップS7)。 n=(Tn−Tb)/△t−1 ・・・・・(1) この時刻Tnの書き込み後、CPU101は、たとえば
n=2の場合には、まず時刻Tbにキャプチャされた画
像を符号化したデータをワーク領域112から取り出
し、この符号化したデータを2回符号化領域111に書
き込み(ステップS8)、入力画像バッファ領域109
のデータを符号化し、この符号化データを符号化領域1
11、およびワーク領域112にそれぞれ1回ずつ書き
込むことで、入力された静止画像の符号化データの間
に、n=2に相当する枚数の静止画像の符号化データを
挿入する(ステップS9)。入力画像データの符号化を
終了するまで、上記時刻Tnを、直前に画像がキャプチ
ャされた時刻Tbとして、上記一連の動作を繰り返す
(ステップS10)。
【0041】次に、図3を参照して、画像キャプチャ手
段104の動作について説明する。
【0042】画像キャプチャ手段104は、上記ステッ
プS1、またはS5に該当するCPU101からの指示
があるまで待機し(ステップS11)、このCPU10
1からの指示があると、A/D変換手段107は、Δt
で離散化された時刻の入力画像を静止画像としてキャプ
チャし、ディジタル化する(ステップS12)。その
際、I/Oバスインタフェース手段108は、A/D変
換手段107がディジタル化した静止画像データを入力
画像バッファ領域109にDMA転送し、転送終了時に
CPU101に対して割り込みをかけ(ステップS1
3)、この画像キャプチャ手段104は、上記ステップ
S5に該当する、CPU101からの画像キャプチャ指
示を待ち、上記一連の動作を繰り返す。
【0043】続いて、図4を参照して、HDアダプタ手
段106の動作について説明する。
【0044】HDアダプタ手段106は、一定の符号化
データが符号化データ領域111に格納されるまで待機
する(ステップS21)。ここで、符号化データが格納
されると、順次DMA転送することにより符号化データ
をHDに転送する(ステップS22)。
【0045】すなわち、上記動画像符号化装置におい
て、画像キャプチャ手段104は、入力された動画像の
時刻Δtにおける画像を静止画像としてキャプチャして
出力し、CPU101は時間情報生成処理により、画像
キャプチャ手段104が静止画像をキャプチャした時刻
Δtに対応する時間情報を出力する。さらに、CPU1
01は符号化データを挿入する符号化処理として、上記
時間情報生成処理により得た時間情報から、取り込んだ
静止画像のうちのキャプチャした時刻が連続する2枚の
静止画像間の時間間隔を求めて、この時間間隔がΔtよ
り大きい場合、この時間間隔がΔtとなるように、上記
2枚の静止画像の符号化データの間に静止画像を符号化
したデータを挿入する。この際にCPU101が挿入す
るデータは、上記2枚の静止画像のうちの時間的に先
に、あるいは後にキャプチャした静止画像のいずれか一
方の静止画像を符号化したデータである。
【0046】以上のように、本実施の形態1の動画像符
号化装置によれば、CPU101が画像キャプチャ手段
104より一定のフレームレートで入力画像を取り込め
ず、画像キャプチャ手段104から入力する静止画像の
時間間隔がΔt以上になった場合、取り込んだ静止画像
のうちキャプチャした時刻が連続する2枚の静止画像間
の時間間隔を求め、上記2枚の静止画像の符号化データ
の間に、上記2枚の静止画像を符号化したデータを、上
記時間間隔がΔtになるような数だけ挿入するようにし
たので、符号化画像のフレームレートを一定にすること
ができる。
【0047】(実施の形態2)以下に、本発明の実施の
形態2について図面を参照しながら説明する。
【0048】なお、本発明の実施の形態2による動画像
符号化装置の電気的構成は、上記実施の形態1と同様で
あり、その説明は省略する。
【0049】以下に、上記動画像符号化装置の動作につ
いて、図3ないし5を参照しながら説明する。図5は、
実施の形態2におけるCPU101の動作の流れを示す
フローチャート、図3は、動画像キャプチャ手段104
の動作の流れを示すフローチャート、図4は、HDアダ
プタ手段106の動作の流れを示すフローチャートであ
る。
【0050】まず、図5を参照して、CPU101の動
作を説明する。
【0051】CPU101は、画像キャプチャ手段10
4に対して画像のキャプチャを指示する(ステップS4
1)。
【0052】なお、ステップS41での指示に対する画
像キャプチャ手段104の動作の流れは、実施の形態1
と同様であるので、その説明は省略する。
【0053】続いて、CPU101は、I/Oバスイン
タフェース手段108からの割り込み通知があるまで待
機する(ステップS42)。ここで、I/Oバスインタ
フェース手段108からの割り込み通知があると、CP
U101は、その割り込み通知時の時刻Tbをタイムス
タンプ領域110に書き込むとともに(ステップS4
3)、入力画像バッファ領域109のデータを符号化
し、この符号化データを符号化データ領域111に書き
込む(ステップS44)。その後、CPU101は、画
像キャプチャ手段104に対して画像のキャプチャを再
度指示し(ステップS45)、I/Oバスインタフェー
ス手段108からの割り込み通知があるまで待機する
(ステップS46)。
【0054】ここで、ステップS45での指示に対する
画像キャプチャ手段104の動作のは、実施の形態1に
おける場合と同様であり、その説明は省略する。
【0055】そして、CPU101に対して割り込み通
知があると、CPU101はそのときの時刻Tn、およ
びタイムスタンプ領域110に書かれている時刻Tbよ
り、上記の式(1)を用いて、符号化する静止画像の時
間間隔をΔtにするために、前回の入力画像と今回の入
力画像との間に挿入する静止画像の枚数nを求め、タイ
ムスタンプ領域110に時刻Tnを書き込む(ステップ
S47)。
【0056】この時刻Tnの書き込み後、CPU101
は、たとえばn=2の場合には、まず、順方向予測符号
化により生成した、時刻Tbにキャプチャされた画像と
同じ画像を示す静止画像1枚分の符号化データを、符号
化データ領域111に書き込む(ステップS48)。次
に、逆方向予測符号化により生成した、時刻Tnにキャ
プチャされた画像と同じ画像を示す静止画像1枚分の符
号化データを、符号化データ領域111に書き込むこと
によって、nに等しい2枚分の符号化データを符号化デ
ータ領域111に書き込む(ステップS49)。その
後、入力画像バッファ領域109のデータを符号化し、
この符号化データを符号化データ領域111に書き込み
(ステップS50)、入力画像データの符号化を終了す
るまで、上記時刻Tnを、直前に画像がキャプチャされ
た時刻Tbとして、上記一連の動作を繰り返す(ステッ
プS51)。
【0057】ここで、HDアダプタ手段106の動作
は、実施の形態1における場合と同様であり、説明は省
略する。
【0058】たとえば、上記静止画像の時間間隔が入力
画像と入力画像の間隔が3・Δtだけ開いた場合には、
上記時間間隔をΔtにするため、2枚の画像に相当する
符号化データを挿入する。この際、2枚のうち時間的に
最初の一枚を直前の入力画像データとし、時間的にのち
の1枚を直後の入力画像データを符号化したデータとす
る。挿入するデータとして2枚とも直前の画像を符号化
したデータを用いれば、実際に符号化データを再生した
場合のフレームの間隔は3・Δtのままであるが、2枚
のうち時間的に最初の一枚を直前の入力画像データと
し、時間的にのちの1枚を直後の入力画像データを符号
化したデータとすることで、符号化データを再生した場
合のフレーム間隔を2・Δtに狭めることができ、動画
像として再生した場合の画面の変化が滑らかになる。
【0059】すなわち、上記動画像符号化装置におい
て、画像キャプチャ手段104は、入力された動画像の
時刻Δtにおける画像を静止画像としてキャプチャして
出力し、CPU101は時間情報生成処理により、画像
キャプチャ手段104により静止画像をキャプチャした
時刻Δtに対応する時間情報を出力する。さらに、CP
U101は符号化データを挿入する符号化処理として、
画像キャプチャ手段104が出力する静止画像を順次取
り込み符号化し、上記時間情報生成処理により得た時間
情報から、取り込んだ静止画像のうちのキャプチャした
時刻が連続する2枚の静止画像間の時間間隔を求めて、
この求めた時間間隔がΔtより大きい場合、上記時間間
隔がΔtとなるように、上記2枚の静止画像の符号化デ
ータの間に静止画像に対応するデータを挿入する。この
際にCPU101が挿入するデータは、順方向予測符号
化、逆方向予測符号化、および双方向予測符号化のうち
少なくとも1つの符号化により生成した、直前、または
直後に取り込んだ上記静止画像のうちいずれか一方の静
止画像と同じ画像であることを示す符号化データであ
る。
【0060】以上のように、本実施の形態2の動画像符
号化装置によれば、CPU101が画像キャプチャ手段
104より一定のフレームレートで入力画像を取り込め
ず、画像キャプチャ手段104から入力される静止画像
の間隔がΔt以上となった場合、取り込んだ静止画像の
うちキャプチャした時刻が連続する2枚の静止画像間の
時間間隔を求め、上記2枚の静止画像の符号化データの
間に、予測符号化によって生成した上記2枚の静止画像
のうちいずれか一方の静止画像を示す符号化データを、
時間間隔がΔtになる数だけ挿入するようにしたので、
符号化画像のフレームレートを一定にすることができ
る。
【0061】また、上記2枚の静止画像を示す符号化デ
ータの間に、上記2枚の静止画像の符号化データを、複
数枚組み合わせて挿入するようにしたので、動画像とし
て再生した場合の画面の変化を滑らかにすることが可能
である。
【0062】(実施の形態3)以下に、本発明の実施の
形態3について図面を参照しながら説明する。
【0063】図6は、本発明の実施の形態3にかかる動
画像符号化装置の電気的構成を示すブロック図である。
【0064】本装置は、CPU201と、主記憶202
と、この主記憶の制御を行うとともに、システムバス、
I/Oバスのブリッジとして機能するバスブリッジ手段
203と、I/Oバスに接続されNTSC等で入力され
た動画像をキャプチャする画像キャプチャ手段204
と、符号化された動画像データを保存するHD205
と、I/Oバスに接続され主記憶202上のデータをD
MAによりHD205に転送するHDアダプタ手段20
6と、CPU201からの指示ののち、時間間隔Δtご
とにCPU201に対して割り込みを通知するタイマ手
段207とから構成される。
【0065】画像キャプチャ手段204は、CPU20
1からの指示に基づき、入力された動画像を、Δtで離
散化された特定の時間に静止画像としてキャプチャした
後にディジタル化するA/D変換手段208と、このA
/D変換手段208によりディジタル化されたディジタ
ル画像データを、DMA転送により主記憶202の入力
画像バッファ領域210に転送するとともに、転送終了
時にCPU201に対して割り込みを通知するI/Oバ
スインタフェース手段209とから構成される。
【0066】主記憶202は、画像キャプチャ手段20
4が入力画像を転送して格納する入力画像バッファ領域
210と、一定のフレームレートを維持するために符号
化すべき静止画像の枚数を保持する残りフレーム数領域
211と、CPU201が入力画像バッファ領域210
の静止画像を符号化したデータを格納する符号化データ
領域212とから構成される。
【0067】以下に、上記動画像符号化装置の動作につ
いて、図7ないし図10を参照して説明する。図7は、
実施の形態3におけるCPU201の動作の流れを示す
フローチャート、図8は、画像キャプチャ手段204の
動作の流れを示すフローチャート、図9は、HDアダプ
タ手段206の動作の流れを示すフローチャート、図1
0は、CPU201,画像キャプチャ手段204,HD
アダプタ手段206の各手段の、処理内容と時間との対
応例を示す図である。
【0068】なお、CPU201は、2つの動作を別の
プロセスとして同時に実行するものであり、図7には、
CPU201の2つの動作の流れを示すフローチャート
を示している。
【0069】まず、図7を参照して、タイマ手段207
との関係におけるCPU201の動作(CPU201の
動作1)について説明する。
【0070】CPU201は、残りフレーム数領域21
1に「0」を書き込む(ステップS61)。続いて、タ
イマ手段207を起動するとともに(ステップS6
2)、画像キャプチャ手段204に対して画像のキャプ
チャを指示する(ステップS63)。この指示の下、画
像キャプチャ手段が動作を開始するが、この動作につい
ては後述する。その後、CPU201は、タイマ手段2
07からの割り込み通知を待ち(ステップS64)、こ
の割り込み通知があると、残りフレーム数領域211の
データをインクリメントし(ステップS65)、これら
一連の動作を繰り返す。
【0071】次に、図7を参照して、画像キャプチャ手
段204との関係におけるCPU201の動作(CPU
201の動作2)について説明する。
【0072】CPU201は、バスインタフェース手段
209からの割り込み通知(後述のステップS73に該
当する)があるまで待機する(ステップS66)。ここ
で、バスインタフェース手段209からの割り込み通知
があると、CPU201は、入力画像バッファ領域21
0のデータを符号化し、この符号化データを残りフーム
数領域211の値だけ複製して、符号化データを符号化
データ領域212に書き込む(ステップS67)。たと
えば、残りフレーム数領域211の値が「2」の場合に
は、符号化したデータを2回続けて符号化データ領域2
12に書き込むことになる。その後、CPU201は、
残りフレーム数領域211の値を「0」にし(ステップ
S68)、入力画像データの符号化を終了するまで、再
び画像キャプチャ手段204に対して画像キャプチャを
指示し(ステップS69)、上記一連の動作を繰り返
す。
【0073】次に、図8を参照して、画像キャプチャ手
段204の動作について説明する。
【0074】画像キャプチャ手段204は、上記ステッ
プS63・S69に該当するCPU201からの指示が
あるまで待機し(ステップS71)、このCPU201
からの指示があると、A/D変換手段208は、Δtで
離散化された時刻の入力画像を静止画像としてキャプチ
ャし、ディジタル化する(ステップS72)。なお、A
/D変換手段208が静止画像をキャプチャする時刻
は、タイマ手段207からCPU201に対する割り込
み通知の時刻と同期しているものとする。その際、I/
Oバスインタフェース手段209は、A/D変換手段2
08がディジタル化した静止画像データを入力画像バッ
ファ領域210にDMA転送し、転送終了時に、CPU
201に対して割り込みをかけ(ステップS73)、こ
れら一連の動作を繰り返す。
【0075】続いて、図9を参照して、HDアダプタ手
段206の動作について説明する。
【0076】HDアダプタ手段206は、一定の符号化
データが符号化データ領域212に格納されるまで待機
する(ステップS81)。ここで、符号化データが格納
されると、順次DMA転送により符号化データをHD2
05に転送する(ステップS82)。
【0077】次に、図10を参照して、CPU201,
画像キャプチャ手段204,HDアダプタ手段206の
各手段の、処理内容と時間との対応について説明する。
【0078】なお、各手段の動作は、Δtの時間間隔で
図の左側から右側に向かって流れているように示され、
ステップS65、S68、S69の処理は、動作を簡単
にするため極めて短い時間で完了するとしている。
【0079】CPU201は、CPUの動作1として、
残りフレーム数領域211に「0」を書き込み、タイマ
手段207を起動させる(ステップS61および6
2)。これに対応して、残りフレーム数領域211は、
その値のインクリメントを開始する。さらに、CPU2
01は、この動作と共に、CPUの動作2として、I/
Oバスインタフェース手段209からの割込を受けるま
で待機している(ステップS66)。
【0080】続いて、CPU201は、画像キャプチャ
手段204に対して画像キャプチャの指示を行い、タイ
マ手段207からの通知を待つ(ステップS63および
S64)。一方、画像キャプチャ手段204は、CPU
201からの指示があるまで待機し(ステップS7
1)、ステップS63に該当するCPU201からの画
像キャプチャの指示を受けると画像をキャプチャし、C
PU201に対して割り込みをかけ、CPU201から
の画像キャプチャ指示を待つ(ステップS72ないしS
73)。
【0081】その後、CPU201は、CPU201の
動作1として、タイマ手段207からの割り込み通知を
受けるごとに、残りフレーム数領域211の値のインク
リメントと、待機とを繰り返す(ステップS64および
65)。
【0082】また、CPU201は、CPU201の動
作2として、ステップS73に該当する、I/Oバスイ
ンタフェース手段209からの割り込みを受けると、入
力画像バッファ領域210のデータを符号化等し、符号
化データ領域212に書き込み、残りフレーム数領域2
11の値を「0」に戻す(ステップS67ないしS6
9)。
【0083】上記、一連の動作に平行して、HDアダプ
タ手段206は、一定の符号化データが符号化データ領
域212に格納されるまで待機し、順次DMA転送によ
り符号化データをHD205に転送する(ステップS8
1およびS82)。
【0084】すなわち、上記動画像符号化装置におい
て、タイマ手段207は、時間間隔Δtで時刻を通知
し、画像キャプチャ手段204は、入力された動画像か
ら時刻Δtにおける画像を静止画像としてキャプチャし
て出力する。ここで、CPU201は符号化データを挿
入する符号化処理として、画像キャプチャ手段204が
出力する静止画像を順次取り込み符号化し、さらに、静
止画像を取り込んでいる間に上記タイマ手段207が時
刻を通知した場合、直前に取り込んだ静止画像の符号化
データの後に静止画像の符号化データを挿入する。この
際に、CPU201が挿入するデータは、直前に取り込
んだ静止画像の符号化データである。
【0085】以上のように、本実施の形態3の動画像符
号化装置によれば、CPU201が画像キャプチャ手段
204より一定のフレームレートで入力画像を取り込め
ず、画像キャプチャ手段204から入力する静止画像の
時間間隔がΔt以上になった場合、タイマ手段207に
より、取り込んだ静止画像のうちキャプチャした時刻が
連続する2枚の静止画像の時間間隔を、キャプチャする
画像にタイムコードを乗せることなく求め、上記2枚の
静止画像の符号化データの間に上記2枚の静止画像を符
号化したデータを、上記時間間隔が常にΔtとなるよう
な数だけ挿入するようにしたので、符号化画像のフレー
ムレートを一定にすることができる。
【0086】(実施の形態4)以下に、実施の形態4に
ついて図面を参照しながら説明する。
【0087】本実施の形態4にかかる動画像符号化装置
の電気的構成は、上記実施の形態3と同様であり、その
説明は省略する。
【0088】以下に、上記動画像符号化装置の動作につ
いて、図11、図12を参照して説明する。図11は、
実施の形態4におけるCPU201の動作の流れを示す
フローチャート、図12は、CPU201,画像キャプ
チャ手段204,HDアダプタ手段206の各手段の、
処理内容と時間との対応例を示す図である。
【0089】なお、CPU201は、2つの動作を別の
プロセスとして同時に実行するものであり、図11に
は、CPU201の2つの動作の流れを示すフローチャ
ートを示している。
【0090】また、画像キャプチャ手段204とHDア
ダプタ手段206の動作は、実施の形態3における場合
と同様であり、その説明は省略する。
【0091】まず、図11を参照して、タイマ手段20
7との関係におけるCPU201の動作(CPU201
の動作1)について説明する。
【0092】CPU201は、残りフレーム数領域21
1に「0」を書き込む(ステップS91)。続いて、タ
イマ手段207を起動するとともに(ステップS9
2)、画像キャプチャ手段204に対して画像のキャプ
チャを指示する(ステップS93)。この指示の下、画
像キャプチャ手段204が動作を開始する。その後、C
PU201は、タイマ手段207からの割り込み通知を
待ち(ステップS94)、この割り込み通知があると、
残りフレーム数領域211のデータをインクリメントし
(ステップS95)、これら一連の動作を繰り返す。
【0093】次に、図11を参照して、画像キャプチャ
手段204との関係におけるCPU201の動作(CP
U201の動作2)について説明する。
【0094】CPU201は、I/Oバスインタフェー
ス手段209からの割り込み通知があるまで待機する
(ステップS96)。ここで、I/Oバスインタフェー
ス手段209からの割り込み通知があると、CPU20
1は、入力画像バッファ領域210のデータを符号化
し、この符号化データを符号化データ領域212に書き
込む(ステップS97)。さらに、CPU201は、残
りフレーム数領域211の値から1を減じた数に等しい
静止画像の枚数に相当する符号化データを符号化データ
領域212に書き込む。ここで書き込む符号化データと
しては、順方向あるいは双方向予測符号化により生成し
た、直前に符号化された入力画像と同じ画像を示す符号
化データ、または逆方向あるいは双方向予測符号化によ
り生成した、直後に符号化されるデータと同じ画像を示
す符号化データを用いる(ステップS98)。
【0095】たとえば、残りフレーム数領域211の値
が3の場合には、その値から1を減じた2枚の符号化デ
ータを符号化データ領域212に書き込む。このとき、
たとえば、最初の符号化データとしては、直前に符号化
された静止画像と同じ画像を示す符号化データに対応し
た順方向予測符号化されたデータを用い、2番目の符号
化データとしては、直後に符号化される静止画像と同じ
画像を示す符号化データに対応した逆方向予測符号化さ
れたデータを用いる。その後、CPU201は、残りフ
レーム数領域211のデータを「0」にする(ステップ
S99)。
【0096】入力画像データの符号化を終了するまで、
CPU201は、再度、画像キャプチャ手段204に画
像のキャプチャを指示し(ステップS100)、上記一
連の動作を繰り返す。
【0097】次に、図12を参照して、CPU201,
画像キャプチャ手段204,HDアダプタ手段206の
各手段の、処理内容と時間との対応について説明する。
【0098】なお、各手段の動作は、Δt の時間間隔で
図の左側から右側へ向かって流れているように示され、
ステップS95、S98、S99、S100の処理は、
動作を簡単にするため極めて短い時間で完了するとして
いる。
【0099】CPU201は、CPUの動作1として、
残りフレーム数領域211に「0」を書き込み、タイマ
手段207を起動させる(ステップS91および9
2)。これに対応して、残りフレーム数領域211は、
その値のインクリメントを開始する。さらに、CPU2
01は、この動作と共に、CPUの動作2として、I/
Oバスインタフェース手段209からの割込を受けるま
で待機している(ステップS96)。
【0100】続いて、CPU201は、画像キャプチャ
手段204に対して画像キャプチャの指示を行い、タイ
マ手段207からの通知を待つ(ステップS93および
S94)。一方、画像キャプチャ手段204は、CPU
201からの指示があるまで待機していて(ステップS
71)、ステップS93に該当するCPU201からの
画像キャプチャの指示を受けると画像をキャプチャし、
CPU201に対して割り込みをかけ、CPU201か
らの画像キャプチャ指示を待つ(ステップS72および
S73)。
【0101】その後、CPU201は、CPU201の
動作1として、タイマ手段207からの割り込み通知を
受けるごとに、残りフレーム数領域211の値のインク
リメントと、待機とを繰り返す(ステップS94および
95)。
【0102】また、CPU201は、CPU201の動
作2として、I/Oバスインタフェース手段209から
の割り込みを受けると(ステップS73に対応する)、
入力画像バッファ領域210のデータを符号化等し、符
号化データ領域212に書き込み、残りフレーム数領域
211の値を「0」に戻す。(ステップS97ないしS
99)。
【0103】上記、一連の動作に平行して、HDアダプ
タ手段206は、一定の符号化データが符号化データ領
域212に格納されるまで待機し、順次DMA転送によ
り符号化データをHD205に転送する(ステップS8
1およびS82)。
【0104】たとえば、本実施の形態にかかる動画像符
号化装置では、上記入力画像と入力画像の間隔が3・Δ
t だけ開いた場合には、2枚の画像に相当する符号化デ
ータを挿入する。この際、2枚のうち時間的に最初の1
枚を直前の入力画像データを符号化したデータとし、時
間的にのちの1枚を直後の入力画像データを符号化した
データとする。ここで、挿入するデータとして、2枚と
も直前の画像を符号化したデータを用いれば、実際に符
号化データを再生した場合のフレームの間隔は3・Δt
のままであるが、2枚のうち時間的に最初の1枚を直前
の入力画像データを符号化したデータとし、時間的にの
ちの1枚を直後の入力画像データを符号化したデータと
することで、符号化データを再生した場合のフレーム間
隔を2・Δtに狭めることができ、動画像として再生し
た場合の画面の変化が滑らかになる。
【0105】すなわち、上記動画像符号化装置におい
て、タイマ手段207は、時間間隔Δtで時刻を通知
し、画像キャプチャ手段204は、入力された動画像か
ら時刻n・Δt(nはステップS97ないし99の処理
時間により決まる整数。)における画像を静止画像とし
てキャプチャして出力する。さらに、CPU201は、
符号化データを挿入する符号化処理して、画像キャプチ
ャ手段204が出力する静止画像を順次取り込み符号化
し、静止画像を取り込んでいる間に上記タイマ手段20
7が時刻を通知した場合、直前に取り込んだ静止画像の
符号化データの後に静止画像の符号化データを付加す
る。この際にCPU201が挿入するデータは、順方向
予測符号化、逆方向予測符号化、および双方向予測符号
化のうち少なくとも1つの符号化により生成した、直
前、または直後に取り込んだ上記静止画像のうちいずれ
か一方の静止画像と同じ画像であることを示す符号化デ
ータである。
【0106】以上のように、本実施の形態4の動画像符
号化装置によれば、CPU201が画像キャプチャ手段
204より一定のフレームレートで入力画像を取り込め
ず、画像キャプチャ手段204から入力される静止画像
の間隔がΔtより大きい場合タイマ手段207によっ
て、取り込んだ静止画像のうちキャプチャした時刻が連
続する2枚の静止画像間の時間間隔を求め、上記2枚の
静止画像の符号化データの間に、予測符号化によって生
成した上記2枚の静止画像のうちいずれか一方の静止画
像を示す符号化データを、時間間隔がΔtになる数だけ
挿入するようにしたので、符号化画像のフレームレート
を一定にすることができる。
【0107】また、符号化データとして、前後の画像と
同じ画像を意味する符号化データを組み合わせて挿入す
るようにしたので、動画像として再生した場合の画面の
変化を滑らかにすることが可能である。
【0108】ここに、上記各実施の形態はプログラムに
よって実現され、このプログラムはフロッピディスク等
の記録媒体に記録し、あるいはネットワークやデータ通
信等に接続し、他のコンピュータシステムからのプログ
ラムによって実施することも可能である。
【0109】なお、本発明は、上記各実施の形態に限定
されるものではなく、たとえば、実施の形態1ないし実
施の形態4では、画像の符号化処理をCPUで行ってい
るが、専用のハードウェア等で画像の符号化処理を行っ
てもよい。
【0110】その他、本発明の請求の範囲内での多くの
設計変更、および修正を加え得ることは勿論である。
【0111】
【発明の効果】以上の説明より明らかなように、請求項
1にかかる符号化装置によれば、入力された動画像の時
刻n・Δt(ただし、nは整数、Δtは時間間隔)にお
ける画像を静止画像としてキャプチャし、この静止画像
をキャプチャした時刻n・Δtに対応する時間情報を生
成し、上記静止画像を順次取り込み符号化するととも
に、上記時間情報から取り込んだ静止画像のうちのキャ
プチャした時刻が連続する2枚の静止画像間の時間間隔
を求め、この求めた時間間隔がm・Δt(ただし、mは
2以上の整数)の場合に、静止画像の時間間隔を一定に
すべく、上記2枚の静止画像の符号化データの間に、m
−1枚以下の静止画像に対応する符号化データを挿入す
るようにしたので、符号化画像のフレームレートを一定
にすることができる。
【0112】請求項2にかかる符号化装置によれば、請
求項1の動画像符号化装置において、上記2枚の静止画
像の符号化データの間に、上記2枚の静止画像のうち
の、時間的に先にキャプチャした、あるいは後にキャプ
チャした静止画像の、いずれか一方の静止画像を符号化
したデータを挿入するようにしたので、符号化画像のフ
レームレートを一定にすることができる。
【0113】請求項3にかかる符号化装置によれば、請
求項1の記載の動画像符号化装置において、上記2枚の
静止画像の符号化データの間に、上記2枚の静止画像の
符号化データを複数枚組み合わせて挿入するようにした
ので、符号化データを再生した場合のフレーム間隔を狭
めることが可能となり、動画像として再生した場合の画
面の変化を滑らかにすることができる。
【0114】請求項4にかかる符号化装置によれば、請
求項2または3の動画符号化装置において、上記2枚の
静止画像の符号化データの間に、順方向予測符号化、逆
方向予測符号化、および双方向予測符号化のうち少なく
とも1つの符号化により生成した、上記2枚の静止画像
のうちいずれか一方の静止画像と同じ画像であることを
示す符号化データを挿入するようにしたので、符号化画
像のフレームレートを一定にすることができる。加え
て、直前もしくは直後の画像を意味する符号化データを
組み合わせて挿入するようにした場合には、符号化デー
タを再生した場合のフレーム間隔を狭めることが可能と
なり、動画像として再生した場合の画面の変化を十分に
滑らかにすることができる。
【0115】請求項5にかかる符号化装置によれば、タ
イマ手段を有するようにしたので、キャプチャする画像
にタイムコードを乗せることなく、時間間隔を求めるこ
とができ、入力された動画像から時刻n・Δt(ただ
し、nは整数) における画像を静止画像としてキャプチ
ャし符号化するとともに、静止画像を取り込んでいる間
にタイマ手段が時刻を通知した場合、直前に取り込んだ
静止画像の符号化データの後に静止画像の符号化データ
を挿入するようにしたので、符号化画像のフレームレー
トを一定にすることができる。
【0116】請求項6にかかる符号化装置によれば、請
求項5の動画像符号化装置において、上記静止画像を取
り込んでいる間に上記タイマ手段が時刻を通知した場合
に付加する符号化データとして、直前に取り込んだ静止
画像の符号化データを用いるようにしたので、符号化画
像のフレームレートを一定にすることができる。
【0117】請求項7にかかる符号化装置によれば、請
求項5の動画像符号化装置において、上記静止画像を取
り込んでいる間に上記タイマ手段が時刻を通知すると、
順方向予測符号化、逆方向予測符号化、および双方向予
測符号化のうち少なくとも1つの符号化により生成し
た、直前、または直後に取り込んだ上記静止画像のうち
いずれか一方の静止画像と同じ画像であることを示す符
号化データを付加するようにしたので、符号化画像のフ
レームレートを一定にすることができる。加えて、直前
もしくは直後の画像を意味する符号化データを組み合わ
せて挿入するようにした場合には、符号化データを再生
した場合のフレーム間隔を狭めることが可能となり、動
画像として再生した場合の画面の変化を十分に滑らかに
することができる。
【0118】請求項8にかかる符号化方法によれば、入
力された動画像の時刻n・Δt(ただし、nは整数、Δ
tは時間間隔)における画像を静止画像としてキャプチ
ャし、この静止画像をキャプチャした時刻n・Δtに対
応する時間情報を出力する時間情報を生成し、上記静止
画像を順次取り込み符号化するとともに、上記時間情報
から取り込んだ静止画像のうちのキャプチャした時刻が
連続する2枚の静止画像間の時間間隔を求め、この求め
た時間間隔がm・Δt(ただし、mは2以上の整数)の
場合に、上記2枚の静止画像の符号化データの間に、静
止画像の時間間隔を一定にすべく、m−1枚以下の静止
画像に対応する符号化データを挿入するようにしたの
で、符号化画像のフレームレートを一定にすることがで
きる。
【0119】請求項9にかかる符号化方法によれば、請
求項8の動画像符号化方法において、上記2枚の静止画
像の符号化データの間に、上記2枚の静止画像のうち
の、時間的に先にキャプチャした、あるいは後にキャプ
チャした静止画像の、いずれか一方の静止画像を符号化
したデータを挿入するようにしたので、符号化画像のフ
レームレートを一定にすることができる。
【0120】請求項10にかかる符号化方法によれば、
請求項8の記載の動画像符号化方法において、上記2枚
の静止画像の符号化データの間に、上記2枚の静止画像
の符号化データを複数枚組み合わせて挿入するようにし
たので、符号化データを再生した場合のフレーム間隔を
狭めることが可能となり、動画像として再生した場合の
画面の変化を滑らかにすることができる。
【0121】請求項11にかかる符号化方法によれば、
請求項9または10の動画符号化方法において、上記2
枚の静止画像の符号化データの間に、順方向予測符号
化、逆方向予測符号化、および双方向予測符号化のうち
少なくとも1つの符号化により生成した、上記2枚の静
止画像のうちいずれか一方の静止画像と同じ画像である
ことを示す符号化データを挿入するようにしたので、符
号化画像のフレームレートを一定にすることができる。
加えて、直前もしくは直後の画像を意味する符号化デー
タを組み合わせて挿入するようにした場合には、符号化
データを再生した場合のフレーム間隔を狭めることが可
能となり、動画像として再生した場合の画面の変化を十
分に滑らかにすることができる。
【0122】請求項12にかかる符号化方法によれば、
タイマステップを有するようにしたので、キャプチャす
る画像にタイムコードを乗せることなく、時間間隔を求
めることができ、入力された動画像から時刻n・Δt
(ただし、nは整数)における画像を静止画像としてキ
ャプチャし符号化するとともに、静止画像を取り込んで
いる間にタイマステップが時刻を通知した場合、直前に
取り込んだ静止画像の符号化データの後に静止画像の符
号化データを挿入するようにしたので、符号化画像のフ
レームレートを一定にすることができる。
【0123】請求項13にかかる符号化方法によれば、
請求項12の動画像符号化方法において、上記静止画像
を取り込んでいる間に上記タイマステップが時刻を通知
した場合に付加する符号化データとして、直前に取り込
んだ静止画像の符号化データを用いるようにしたので、
符号化画像のフレームレートを一定にすることができ
る。
【0124】請求項14にかかる符号化方法によれば、
請求項12の動画像符号化方法において、上記静止画像
を取り込んでいる間に上記タイマステップが時刻を通知
すると、順方向予測符号化、逆方向予測符号化、および
双方向予測符号化のうち少なくとも1つの符号化により
生成した、直前、または直後に取り込んだ上記静止画像
のうちいずれか一方の静止画像と同じ画像であることを
示す符号化データを付加するようにしたので、符号化画
像のフレームレートを一定にすることができる。加え
て、直前もしくは直後の画像を意味する符号化データを
組み合わせて挿入するようにした場合には、符号化デー
タを再生した場合のフレーム間隔を狭めることが可能と
なり、動画像として再生した場合の画面の変化を十分に
滑らかにすることができる。
【図面の簡単な説明】
【図1】本発明の実施の形態1における動画像符号化装
置の電気的構成を示すブロック図である。
【図2】本発明の実施の形態1におけるCPU101の
動作の流れを示すフローチャートである。
【図3】本発明の実施の形態1おける画像キャプチャ手
段104の動作の流れを示すフローチャートである。
【図4】本発明の実施の形態1おけるHDアダプタ手段
106の動作の流れを示すフローチャートである。
【図5】本発明の実施の形態2におけるCPU101の
動作の流れを示すフローチャートである。
【図6】本発明の実施の形態3における動画像符号化装
置の電気的構成を示すブロック図である。
【図7】本発明の実施の形態3におけるCPU201の
動作の流れを示すフローチャートである。
【図8】本発明の実施の形態3おける画像キャプチャ手
段204の動作の流れを示すフローチャートである。
【図9】本発明の実施の形態3おけるHDアダプタ手段
206の動作の流れを示すフローチャートである。
【図10】本発明の実施の形態3における、CPU20
1,画像キャプチャ手段204,HDアダプタ手段20
6の各手段の、処理内容と時間との対応の例を示す図で
ある。
【図11】本発明の実施の形態4におけるCPU201
の動作の流れを示すフローチャートである。
【図12】本発明の実施の形態4における、CPU20
1,画像キャプチャ手段204,HDアダプタ手段20
6の各手段の、処理内容と時間との対応の例を示す図で
ある。
【図13】従来例にかかる動画像符号化装置の電気的構
成を示すブロック図である。
【図14】従来例にかかる動画像符号化装置の電気的構
成を示すブロック図である。
【符号の説明】
101 CPU 102 主記憶 103 バスブリッジ手段 104 画像キャプチャ手段 105 HD 106 HDアダプタ手段 107 A/D変換手段 108 I/Oバスインタフェース手段 109 入力画像バッファ領域 110 タイムスタンプ領域 111 符号化データ領域 112 ワーク領域 201 CPU 202 主記憶 203 バスブリッジ手段 204 画像キャプチャ手段 205 HD 206 HDアダプタ手段 207 タイマ手段 208 A/D変換手段 209 I/Oバスインタフェース手段 210 入力画像バッファ領域 211 残りフレーム数領域 212 符号化データ領域 301 CPU 302 主記憶 303 バスブリッジ部 304 画像キャプチャ部 305 HD 306 HDアダプタ部 307 A/D変換部 308 画像圧縮符号化部 309 I/Oバスインタフェース部 401 CPU 402 主記憶 403 バスブリッジ部 404 画像キャプチャ部 405 HD 406 HDアダプタ部 407 A/D変換部 408 I/Oバスインタフェース部

Claims (14)

    【特許請求の範囲】
  1. 【請求項1】 入力された動画像の時刻n・Δt(ただ
    し、nは整数、Δtは時間間隔)における画像を静止画
    像としてキャプチャし、出力する画像キャプチャ手段、 この画像キャプチャ手段が、上記動画像を静止画像とし
    てキャプチャした時刻n・Δtに対応する時間情報を出
    力する時間情報生成手段、および上記画像キャプチャ手
    段から出力される静止画像を順次取り込み符号化すると
    ともに、上記時間情報生成手段より得た時間情報から、
    取り込んだ静止画像のうちのキャプチャした時刻が連続
    する2枚の静止画像間の時間間隔を求め、この求めた時
    間間隔がm・Δt(ただし、mは2以上の整数)の場合
    に、符号化された静止画像の時間間隔が一定となるよう
    に、上記2枚の静止画像の符号化データの間にm−1枚
    以下の静止画像に対応する符号化データを挿入する符号
    化手段を含むことを特徴とする動画像符号化装置。
  2. 【請求項2】 請求項1に記載の動画像符号化装置にお
    いて、 上記符号化手段は、上記2枚の静止画像の符号化データ
    の間に、上記2枚の静止画像のうちの、時間的に先にキ
    ャプチャした、あるいは後にキャプチャした静止画像
    の、いずれか一方の静止画像を符号化したデータを挿入
    するものであることを特徴とする動画像符号化装置。
  3. 【請求項3】 請求項1に記載の動画像符号化装置にお
    いて、 上記符号化手段は、上記2枚の静止画像の符号化データ
    の間に、上記2枚の静止画像の符号化データを複数枚組
    み合わせて挿入するものであることを特徴とする動画像
    符号化装置。
  4. 【請求項4】 請求項2または請求項3に記載の動画像
    符号化装置において、 上記符号化手段は、上記2枚の静止画像の符号化データ
    の間に、順方向予測符号化、逆方向予測符号化、および
    双方向予測符号化のうち少なくとも1つの符号化により
    生成した、上記2枚の静止画像のうちいずれか一方の静
    止画像と同じ画像であることを示す符号化データを挿入
    することを特徴とする動画像符号化装置。
  5. 【請求項5】 時間間隔k・Δt(ただし、kは整数)
    で時刻を通知するタイマ手段、 入力された動画像から時刻n・Δt(ただし、nは整
    数)における画像を静止画像としてキャプチャし、出力
    する画像キャプチャ手段、およびこの画像キャプチャ手
    段が出力する静止画像を、順次取り込み符号化するとと
    もに、静止画像を取り込んでいる間に上記タイマ手段が
    時刻を通知した場合に、直前に取り込んだ静止画像の符
    号化データの後に静止画像の符号化データを付加する符
    号化手段を含むことを特徴とする動画像符号化装置。
  6. 【請求項6】 請求項5に記載の動画像符号化装置にお
    いて、 上記符号化手段は、上記静止画像を取り込んでいる間に
    上記タイマ手段が時刻を通知した場合に付加する符号化
    データとして、直前に取り込んだ静止画像の符号化デー
    タを用いるものであることを特徴とする動画像符号化装
    置。
  7. 【請求項7】 請求項5に記載の動画像符号化装置にお
    いて、 上記符号化手段は、上記静止画像を取り込んでいる間に
    上記タイマ手段が時刻を通知すると、順方向予測符号
    化、逆方向予測符号化、および双方向予測符号化のうち
    少なくとも1つの符号化により生成した、直前に取り込
    んだ、または直後に取り込む上記静止画像のうちいずれ
    か一方の静止画像と同じ画像であることを示す符号化デ
    ータを付加するものであることを特徴とする動画像符号
    化装置。
  8. 【請求項8】 入力された動画像の時刻n・Δt(ただ
    し、nは整数、Δtは時間間隔)における画像を静止画
    像としてキャプチャし、出力する画像キャプチャステッ
    プ、 この画像キャプチャステップが、上記動画像を静止画像
    としてキャプチャした時刻n・Δtに対応する時間情報
    を出力する時間情報生成ステップ、および上記画像キャ
    プチャステップから出力される静止画像を順次取り込み
    符号化するとともに、上記時間情報生成ステップより得
    た時間情報から、取り込んだ静止画像のうちのキャプチ
    ャした時刻が連続する2枚の静止画像間の時間間隔を求
    め、この求めた時間間隔がm・Δt(ただし、mは2以
    上の整数)の場合に、符号化された静止画像の時間間隔
    が一定となるように、上記2枚の静止画像の符号化デー
    タの間にm−1枚以下の静止画像に対応する符号化デー
    タを挿入する符号化ステップを含むことを特徴とする動
    画像符号化方法。
  9. 【請求項9】 請求項8に記載の動画像符号化方法にお
    いて、 上記符号化ステップは、上記2枚の静止画像の符号化デ
    ータの間に、上記2枚の静止画像のうちの、時間的に先
    にキャプチャした、あるいは後にキャプチャした静止画
    像の、いずれか一方の静止画像を符号化したデータを挿
    入するものであることを特徴とする動画像符号化方法。
  10. 【請求項10】 請求項8に記載の動画像符号化方法に
    おいて、 上記符号化ステップは、上記2枚の静止画像の符号化デ
    ータの間に、上記2枚の静止画像の符号化データを複数
    枚組み合わせて挿入するものであることを特徴とする動
    画像符号化方法。
  11. 【請求項11】 請求項9または請求項10に記載の動
    画像符号化方法において、 上記符号化ステップは、上記2枚の静止画像の符号化デ
    ータの間に、順方向予測符号化、逆方向予測符号化、お
    よび双方向予測符号化のうち少なくとも1つの符号化に
    より生成した、上記2枚の静止画像のうちいずれか一方
    の静止画像と同じ画像であることを示す符号化データを
    挿入することを特徴とする動画像符号化方法。
  12. 【請求項12】 時間間隔k・Δt(ただし、kは整
    数)で時刻を通知するタイマステップ、 入力された動画像から時刻n・Δt(ただし、nは整
    数)における画像を静止画像としてキャプチャし、出力
    する画像キャプチャステップ、およびこの画像キャプチ
    ャステップが出力する静止画像を、順次取り込み符号化
    するとともに、静止画像を取り込んでいる間に上記タイ
    マステップが時刻を通知した場合に、直前に取り込んだ
    静止画像の符号化データの後に静止画像の符号化データ
    を付加する符号化ステップを含むことを特徴とする動画
    像符号化方法。
  13. 【請求項13】 請求項12に記載の動画像符号化方法
    において、 上記符号化ステップは、上記静止画像を取り込んでいる
    間に上記タイマステップが時刻を通知した場合に付加す
    る符号化データとして、直前に取り込んだ静止画像の符
    号化データを用いるものであることを特徴とする動画像
    符号化方法。
  14. 【請求項14】 請求項12に記載の動画像符号化方法
    において、 上記符号化ステップは、上記静止画像を取り込んでいる
    間に上記タイマステップが時刻を通知すると、順方向予
    測符号化、逆方向予測符号化、および双方向予測符号化
    のうち少なくとも1つの符号化により生成した、直前に
    取り込んだ、または直後に取り込む上記静止画像のうち
    いずれか一方の静止画像と同じ画像であることを示す符
    号化データを付加するものであることを特徴とする動画
    像符号化方法。
JP28958096A 1996-10-31 1996-10-31 動画像符号化装置、および方法 Pending JPH10136380A (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP28958096A JPH10136380A (ja) 1996-10-31 1996-10-31 動画像符号化装置、および方法
US08/960,573 US6014496A (en) 1996-10-31 1997-10-29 Moving picture coding method, moving picture coding apparatus and moving picture coding program recording medium
EP19970118919 EP0840515B1 (en) 1996-10-31 1997-10-30 Video data coding method and apparatus
DE1997634186 DE69734186T2 (de) 1996-10-31 1997-10-30 Verfahren und Vorrichtung zur Kodierung von Videodaten
KR1019970057469A KR100257615B1 (ko) 1996-10-31 1997-10-31 동화상 부호화 방법, 동화상 부호화 장치, 및 동화상 부호화 프로그램 기록 매체
CN97122817A CN1130915C (zh) 1996-10-31 1997-10-31 运动图象编码方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP28958096A JPH10136380A (ja) 1996-10-31 1996-10-31 動画像符号化装置、および方法

Publications (1)

Publication Number Publication Date
JPH10136380A true JPH10136380A (ja) 1998-05-22

Family

ID=17745082

Family Applications (1)

Application Number Title Priority Date Filing Date
JP28958096A Pending JPH10136380A (ja) 1996-10-31 1996-10-31 動画像符号化装置、および方法

Country Status (6)

Country Link
US (1) US6014496A (ja)
EP (1) EP0840515B1 (ja)
JP (1) JPH10136380A (ja)
KR (1) KR100257615B1 (ja)
CN (1) CN1130915C (ja)
DE (1) DE69734186T2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100320151B1 (ko) * 1999-12-15 2002-01-17 최광섭 다중 영상신호저장 제어장치
US6600835B1 (en) 1999-02-10 2003-07-29 Nec Corporation Moving-picture compressing technique

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2764156B1 (fr) * 1997-05-27 1999-11-05 Thomson Broadcast Systems Dispositif de pretraitement pour codage mpeg ii
JP4779318B2 (ja) * 2004-07-09 2011-09-28 株式会社島津製作所 分析システム
JP5164610B2 (ja) * 2007-05-02 2013-03-21 キヤノン株式会社 撮像装置及びその制御方法
CN101540902B (zh) * 2008-03-20 2011-02-02 华为技术有限公司 运动矢量的缩放方法和装置、编解码方法和系统

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4680647A (en) * 1983-09-26 1987-07-14 Pioneer Electronic Corporation Method for recording and reproducing video format signal
JP3164647B2 (ja) * 1992-06-03 2001-05-08 株式会社東芝 動画像符号化方法及び装置
US5528238A (en) * 1993-11-24 1996-06-18 Intel Corporation Process, apparatus and system for decoding variable-length encoded signals
US5594660A (en) * 1994-09-30 1997-01-14 Cirrus Logic, Inc. Programmable audio-video synchronization method and apparatus for multimedia systems
EP0721284B1 (en) * 1995-01-09 2000-05-03 Daewoo Electronics Co., Ltd An image processing system using pixel-by-pixel motion estimation and frame decimation
US5724475A (en) * 1995-05-18 1998-03-03 Kirsten; Jeff P. Compressed digital video reload and playback system
US5835149A (en) * 1995-06-06 1998-11-10 Intel Corporation Bit allocation in a coded video sequence

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6600835B1 (en) 1999-02-10 2003-07-29 Nec Corporation Moving-picture compressing technique
KR100320151B1 (ko) * 1999-12-15 2002-01-17 최광섭 다중 영상신호저장 제어장치

Also Published As

Publication number Publication date
DE69734186D1 (de) 2005-10-20
DE69734186T2 (de) 2006-06-29
EP0840515A2 (en) 1998-05-06
EP0840515A3 (en) 2000-03-22
US6014496A (en) 2000-01-11
CN1189057A (zh) 1998-07-29
KR100257615B1 (ko) 2000-06-01
CN1130915C (zh) 2003-12-10
KR19980033397A (ko) 1998-07-25
EP0840515B1 (en) 2005-09-14

Similar Documents

Publication Publication Date Title
US6091778A (en) Motion video processing circuit for capture, playback and manipulation of digital motion video information on a computer
US5589885A (en) Moving picture coding and decoding circuit
TWI249958B (en) Video encoding device, video encoding control method, and computer readable storage medium storing video encoding control program
JPH09237166A (ja) コンピュータシステムおよびこのシステムで使用されるカードデバイスコントローラ並びに動画像エンコーダカード
CA2260932C (en) Motion video processing circuit for capture, playback and manipulation of digital motion video information on a computer
JPH10136380A (ja) 動画像符号化装置、および方法
US20060179180A1 (en) Signal processing apparatus, signal processing system and signal processing method
JP2682402B2 (ja) データ処理装置
JP4423820B2 (ja) 画像処理装置及び方法、並びにプログラム及び記録媒体
JP3410669B2 (ja) 映像音声処理装置
JP3562186B2 (ja) ビデオカード、および、ビデオデータ通信装置
JPH04156194A (ja) 双方向簡易動画通信制御装置
EP1141842A1 (en) Digital media frame
JPS62243075A (ja) 画像デ−タ転送装置
Yamauchi et al. One-chip 15 frame/s mega-pixel real-time image processor
JPH0661949A (ja) 画像音声データ圧縮伸長処理装置
JP2001350461A (ja) 画像処理方法及び装置
JP2000013787A (ja) 画像処理装置
JPH0815299B2 (ja) 画像処理システム
JPS63300363A (ja) イメ−ジ処理方式
JPH06268870A (ja) 画像圧縮伸張回路装置
JPH09224242A (ja) 画像データバス装備画像圧縮伸長機構
JPH11194902A (ja) 画像処理装置およびその方法
JPH0772994A (ja) 画像入出力システム
JPH1185680A (ja) 動画像取り込み装置、この動画像取り込み装置を使用したコンピュ−タシステム、および動画デ−タ利用方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060117

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20060523