JP3444266B2 - リアルタイム録画再生装置 - Google Patents
リアルタイム録画再生装置Info
- Publication number
- JP3444266B2 JP3444266B2 JP2000120495A JP2000120495A JP3444266B2 JP 3444266 B2 JP3444266 B2 JP 3444266B2 JP 2000120495 A JP2000120495 A JP 2000120495A JP 2000120495 A JP2000120495 A JP 2000120495A JP 3444266 B2 JP3444266 B2 JP 3444266B2
- Authority
- JP
- Japan
- Prior art keywords
- frame
- real
- processing module
- recording
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/115—Selection of the code volume for a coding unit prior to coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Description
【０００１】
【発明の属する技術分野】本発明は録画再生装置、特に
画像（又は映像）情報を記録しリアルタイム（即時）で
再生するリアルタイム録画再生装置に関する。
画像（又は映像）情報を記録しリアルタイム（即時）で
再生するリアルタイム録画再生装置に関する。
【０００２】
【従来の技術】テレビジョン（ＴＶ）信号およびビデオ
デッキ等の外部入力信号（画像信号）を、リアルタイム
にデジタル符号化し、記録装置に記録すると共に記録済
みのデジタル符号化された画像信号を任意の時間に伸長
し、タイムシフトして再生するリアルタイム録画再生装
置が提案させ実用化されている。斯かるリアルタイム録
画再生装置奈従来例は、例えば特開平７−３０８５１号
公報の「テレビ放送記録装置」に開示されている。
デッキ等の外部入力信号（画像信号）を、リアルタイム
にデジタル符号化し、記録装置に記録すると共に記録済
みのデジタル符号化された画像信号を任意の時間に伸長
し、タイムシフトして再生するリアルタイム録画再生装
置が提案させ実用化されている。斯かるリアルタイム録
画再生装置奈従来例は、例えば特開平７−３０８５１号
公報の「テレビ放送記録装置」に開示されている。
【０００３】
【発明が解決しようとする課題】斯かる従来のリアルタ
イム録画再生装置を、パーソナルコンピュータ（ＰＣ）
のソフトウエア処理を使用して構成する場合がある。こ
の場合には、他のアプリケーションと並列に動作させた
とき又は他のアプリケーションを起動した瞬間等に、Ｃ
ＰＵ（中央演算処理装置）の性能不足が生じる。その結
果、フルフレームのリアルタイムキャプチャ、リアルタ
イム圧縮およびリアルタイム伸長が行えなくなる。そし
て、圧縮処理におけるフレームデータの欠落および再生
処理の遅延が生じ、タイムシフト再生した際に、画像と
音声の同期ずれが発生するという課題があった。
イム録画再生装置を、パーソナルコンピュータ（ＰＣ）
のソフトウエア処理を使用して構成する場合がある。こ
の場合には、他のアプリケーションと並列に動作させた
とき又は他のアプリケーションを起動した瞬間等に、Ｃ
ＰＵ（中央演算処理装置）の性能不足が生じる。その結
果、フルフレームのリアルタイムキャプチャ、リアルタ
イム圧縮およびリアルタイム伸長が行えなくなる。そし
て、圧縮処理におけるフレームデータの欠落および再生
処理の遅延が生じ、タイムシフト再生した際に、画像と
音声の同期ずれが発生するという課題があった。
【０００４】
【発明の目的】従って、本発明の目的は、従来技術の上
述した課題を解決するリアルタイム録画再生装置を提供
することである。
述した課題を解決するリアルタイム録画再生装置を提供
することである。
【０００５】
【課題を解決するための手段】本発明のリアルタイム録
画再生装置は、アナログ画像信号をアナログ・デジタル
変換器（ＡＤＣ）でデジタルデータに変換して記録装置
に記録すると共に、該記録装置に記録されたデジタルデ
ータを読み出してデジタル・アナログ変換器（ＤＡＣ）
でアナログ信号に変換して出力するリアルタイム録画再
生装置において、前記ＡＤＣの出力を格納するフレーム
メモリと、該フレームメモリの出力を圧縮処理する圧縮
処理モジュールと、前記記録装置から読み出したデジタ
ルデータを伸長処理する伸長処理モジュールと、該伸長
処理モジュールの出力を格納して前記ＤＡＣに出力する
フレームメモリと、前記圧縮処理モジュールを制御する
フレームレート制御部とを備えるとともに、データビッ
トストリームは、フレーム圧縮符号の開始を示すピクチ
ャヘッダ、間引きされたフレームであることを示すユー
ザデータおよび参照フレームと同一フレームであること
を示す符号を含む。
画再生装置は、アナログ画像信号をアナログ・デジタル
変換器（ＡＤＣ）でデジタルデータに変換して記録装置
に記録すると共に、該記録装置に記録されたデジタルデ
ータを読み出してデジタル・アナログ変換器（ＤＡＣ）
でアナログ信号に変換して出力するリアルタイム録画再
生装置において、前記ＡＤＣの出力を格納するフレーム
メモリと、該フレームメモリの出力を圧縮処理する圧縮
処理モジュールと、前記記録装置から読み出したデジタ
ルデータを伸長処理する伸長処理モジュールと、該伸長
処理モジュールの出力を格納して前記ＤＡＣに出力する
フレームメモリと、前記圧縮処理モジュールを制御する
フレームレート制御部とを備えるとともに、データビッ
トストリームは、フレーム圧縮符号の開始を示すピクチ
ャヘッダ、間引きされたフレームであることを示すユー
ザデータおよび参照フレームと同一フレームであること
を示す符号を含む。
【０００６】また、本発明のリアルタイム録画再生装置
の好適実施形態例によると、フレームレート制御モジュ
ールのフレームが一定となるようフレーム補間処理す
る。伸長処理モジュールでフルフレームのリアルタイム
伸長処理ができなくなった場合には、コマ落し処理を行
う。また、圧縮処理モジュールによるフレーム間引き処
理および伸長処理モジュールによるコマ落し処理は、フ
レーム補間したフレームから優先的に行うことにより動
きの多いデジタル圧縮データを生成する。
の好適実施形態例によると、フレームレート制御モジュ
ールのフレームが一定となるようフレーム補間処理す
る。伸長処理モジュールでフルフレームのリアルタイム
伸長処理ができなくなった場合には、コマ落し処理を行
う。また、圧縮処理モジュールによるフレーム間引き処
理および伸長処理モジュールによるコマ落し処理は、フ
レーム補間したフレームから優先的に行うことにより動
きの多いデジタル圧縮データを生成する。
【０００７】
【発明の実施の形態】以下、本発明によるリアルタイム
録画再生装置の好適実施形態例の構成および動作を、添
付図を参照して詳細に説明する。
録画再生装置の好適実施形態例の構成および動作を、添
付図を参照して詳細に説明する。
【０００８】先ず、本発明によるリアルタイム録画再生
装置は、テレビ信号やビデオデッキ等の外部機器の入力
画像信号をリアルタイムにデジタル符号に圧縮して記録
装置に記録すると共に記録装置に記録した圧縮デジタル
データを伸長して、任意の時間にタイムシフトして再生
する装置である。このリアルタイム録画再生装置をパー
ソナルコンピュータ（ＰＣ）のソフトウェア処理を用い
て構成する場合に、中央演算処理装置（ＣＰＵ）の性能
不足により、入力画像信号のデジタル変換時のフレーム
キャプチャ処理や、キャプチャしたフレームデータの圧
縮処理や、圧縮デジタルデータの伸長処理において、フ
ルフレームのリアルタイム処理が行えなくなることがあ
る。このような状況に陥った場合には、キャプチャ処理
のフレーム補間処理や、圧縮処理のフレーム間引き処理
や、伸長処理のフレームコマ落とし処理を行うことによ
り、限られたＣＰＵ負荷の中で、リアルタイム記録と音
声との同期再生を継続して実行すると共に圧縮処理にお
ける間引き処理、伸長処理におけるコマ落とし処理を、
キャプチャ処理で補間されたフレームから優先的に行
う。これにより、動きの多いデジタル圧縮データの生成
およびタイムシフト再生を可能にすることを特徴として
いる。
装置は、テレビ信号やビデオデッキ等の外部機器の入力
画像信号をリアルタイムにデジタル符号に圧縮して記録
装置に記録すると共に記録装置に記録した圧縮デジタル
データを伸長して、任意の時間にタイムシフトして再生
する装置である。このリアルタイム録画再生装置をパー
ソナルコンピュータ（ＰＣ）のソフトウェア処理を用い
て構成する場合に、中央演算処理装置（ＣＰＵ）の性能
不足により、入力画像信号のデジタル変換時のフレーム
キャプチャ処理や、キャプチャしたフレームデータの圧
縮処理や、圧縮デジタルデータの伸長処理において、フ
ルフレームのリアルタイム処理が行えなくなることがあ
る。このような状況に陥った場合には、キャプチャ処理
のフレーム補間処理や、圧縮処理のフレーム間引き処理
や、伸長処理のフレームコマ落とし処理を行うことによ
り、限られたＣＰＵ負荷の中で、リアルタイム記録と音
声との同期再生を継続して実行すると共に圧縮処理にお
ける間引き処理、伸長処理におけるコマ落とし処理を、
キャプチャ処理で補間されたフレームから優先的に行
う。これにより、動きの多いデジタル圧縮データの生成
およびタイムシフト再生を可能にすることを特徴として
いる。
【０００９】図１は、本発明によるリアルタイム録画再
生装置の好適実施形態例の構成を示すブロック図であ
る。映像入力端子１０１からアナログ映像信号が入力さ
れるアナログ・デジタル変換器（ＡＤＣ）１０２、フレ
ームメモリ１０３、圧縮処理モジュール１０４、記録装
置１０５、伸長処理モジュール１０６、フレームメモリ
１０７、デジタル・アナログ変換器（ＤＡＣ）１０８、
再生映像出力端子１０９およびフレームレート制御部１
１０より構成される。
生装置の好適実施形態例の構成を示すブロック図であ
る。映像入力端子１０１からアナログ映像信号が入力さ
れるアナログ・デジタル変換器（ＡＤＣ）１０２、フレ
ームメモリ１０３、圧縮処理モジュール１０４、記録装
置１０５、伸長処理モジュール１０６、フレームメモリ
１０７、デジタル・アナログ変換器（ＤＡＣ）１０８、
再生映像出力端子１０９およびフレームレート制御部１
１０より構成される。
【００１０】図１に示すリアルタイム録画再生装置にお
いて、ＣＰＵの性能不足により、ＡＤＣ１０２によりフ
ルフレームのキャプチャ処理が行えなくなった場合に
は、フレームメモリ１０３から圧縮処理モジュール１０
４へのフレームレートが常に一定になるように、フレー
ムレート制御部１１０においてフレーム補間処理を行
う。また、圧縮処理モジュール１０４において、フルフ
レームのリアルタイム圧縮処理が行えなくなった場合に
は、一部のフレームの圧縮処理を省く間引き処理を行っ
て、規格上のフレームレートは一定のまま、実質的なフ
レームレートを低減させたデジタル圧縮データを生成す
る。また、伸長処理モジュール１０５でフルフレームの
リアルタイム伸長処理が行えなくなった場合には、一部
のフレームの伸長処理を省くコマ落とし処理を行って、
音声データとの同期再生を行う。このようにして、ＣＰ
Ｕの性能不足が生じた場合にも、リアルタイムでのデジ
タル圧縮データの記録を行うと共に音声データと同期し
たタイムシフト再生を可能にしている。
いて、ＣＰＵの性能不足により、ＡＤＣ１０２によりフ
ルフレームのキャプチャ処理が行えなくなった場合に
は、フレームメモリ１０３から圧縮処理モジュール１０
４へのフレームレートが常に一定になるように、フレー
ムレート制御部１１０においてフレーム補間処理を行
う。また、圧縮処理モジュール１０４において、フルフ
レームのリアルタイム圧縮処理が行えなくなった場合に
は、一部のフレームの圧縮処理を省く間引き処理を行っ
て、規格上のフレームレートは一定のまま、実質的なフ
レームレートを低減させたデジタル圧縮データを生成す
る。また、伸長処理モジュール１０５でフルフレームの
リアルタイム伸長処理が行えなくなった場合には、一部
のフレームの伸長処理を省くコマ落とし処理を行って、
音声データとの同期再生を行う。このようにして、ＣＰ
Ｕの性能不足が生じた場合にも、リアルタイムでのデジ
タル圧縮データの記録を行うと共に音声データと同期し
たタイムシフト再生を可能にしている。
【００１１】更に、フレーム補間したフレームから優先
的に、圧縮処理モジュール１０４におけるフレーム間引
き、伸長処理モジュール１０６におけるフレームコマ落
とし処理を行う機能を備える。これにより、動きの多い
デジタル圧縮データの生成およびタイムシフト再生を可
能にしている。
的に、圧縮処理モジュール１０４におけるフレーム間引
き、伸長処理モジュール１０６におけるフレームコマ落
とし処理を行う機能を備える。これにより、動きの多い
デジタル圧縮データの生成およびタイムシフト再生を可
能にしている。
【００１２】図１に示すリアルタイム録画再生装置にお
いて、ＡＤＣ１０２は、入力端子１０１に入力されるア
ナログ形式の外部信号をデジタル形式に変換し且つフレ
ーム単位でキャプチャ処理する。フレームメモリ１０３
は、キャプチャしたフレームデータを格納する。圧縮処
理モジュール１０４は、フレームデータを圧縮処理す
る。記録装置１０５は、圧縮デジタルデータを記録す
る。伸長処理モジュール１０６は、圧縮デジタルデータ
を伸長処理する。フレームメモリ１０７は、伸長された
フレームデータを格納する。ＤＡＣ１０８は、デジタル
形式のフレームデータをアナログ形式に変換する。この
リアルタイム録画再生装置をＰＣのソフトウェア処理を
用いて構成する場合には、圧縮処理モジュール１０４と
伸長処理モジュール１０６が、ＣＰＵによるソフトウェ
ア処理で構成する部分である。また、ＡＤＣ１０２は、
例えばビデオキャプチャカードがこれにあたる。また、
フレームメモリ１０３およびフレームメモリ１０７は、
例えばメインメモリおよびビデオメモリ等の記憶装置が
これにあたる。また、ＤＡＣ１０８は、例えばグラフィ
ックアクセラレータカードがこれにあたる。また、記録
装置１０５は、例えばハードディスクドライブ等の記憶
装置がこれにあたる。
いて、ＡＤＣ１０２は、入力端子１０１に入力されるア
ナログ形式の外部信号をデジタル形式に変換し且つフレ
ーム単位でキャプチャ処理する。フレームメモリ１０３
は、キャプチャしたフレームデータを格納する。圧縮処
理モジュール１０４は、フレームデータを圧縮処理す
る。記録装置１０５は、圧縮デジタルデータを記録す
る。伸長処理モジュール１０６は、圧縮デジタルデータ
を伸長処理する。フレームメモリ１０７は、伸長された
フレームデータを格納する。ＤＡＣ１０８は、デジタル
形式のフレームデータをアナログ形式に変換する。この
リアルタイム録画再生装置をＰＣのソフトウェア処理を
用いて構成する場合には、圧縮処理モジュール１０４と
伸長処理モジュール１０６が、ＣＰＵによるソフトウェ
ア処理で構成する部分である。また、ＡＤＣ１０２は、
例えばビデオキャプチャカードがこれにあたる。また、
フレームメモリ１０３およびフレームメモリ１０７は、
例えばメインメモリおよびビデオメモリ等の記憶装置が
これにあたる。また、ＤＡＣ１０８は、例えばグラフィ
ックアクセラレータカードがこれにあたる。また、記録
装置１０５は、例えばハードディスクドライブ等の記憶
装置がこれにあたる。
【００１３】次に、図１のリアルタイム録画再生装置に
おいて、各構成要素の機能を説明する。ＡＤＣ１０２
は、入力端子１０１から入力されたアナログ形式の外部
入力信号をデジタル形式に変換し且つデジタル形式に変
換された画像データをフレーム単位でキャプチャし、フ
レームメモリ１０３に格納する。圧縮処理モジュール１
０４は、フレームメモリ１０３に格納したフレームデー
タを圧縮して記録装置１０５に記録する。伸長処理モジ
ュール１０６は、記録装置１０５に記録された圧縮デジ
タルデータを任意の時間に伸長処理し、フレームメモリ
１０７に格納する。ＤＡＣ１０８は、フレームメモリ１
０７に格納されたデジタル形式のフレームデータをアナ
ログ形式に変換して出力端子１０９から出力する。
おいて、各構成要素の機能を説明する。ＡＤＣ１０２
は、入力端子１０１から入力されたアナログ形式の外部
入力信号をデジタル形式に変換し且つデジタル形式に変
換された画像データをフレーム単位でキャプチャし、フ
レームメモリ１０３に格納する。圧縮処理モジュール１
０４は、フレームメモリ１０３に格納したフレームデー
タを圧縮して記録装置１０５に記録する。伸長処理モジ
ュール１０６は、記録装置１０５に記録された圧縮デジ
タルデータを任意の時間に伸長処理し、フレームメモリ
１０７に格納する。ＤＡＣ１０８は、フレームメモリ１
０７に格納されたデジタル形式のフレームデータをアナ
ログ形式に変換して出力端子１０９から出力する。
【００１４】ここで、ＣＰＵの性能不足によりフルフレ
ームのリアルタイム処理が行えなくなった場合には、フ
レームレート制御部１１０は、フレームメモリ１０３か
ら圧縮処理モジュール１０４へのフレームレートが常に
一定になるように処理するフレームレート制御１１０を
有している。また、圧縮処理モジュール１０４は、一部
のフレームの圧縮処理を省いて、規格上のフレームレー
トは一定のまま、実質的なフレームレートを低減させる
フレーム間引き機能を有している。また、伸長処理モジ
ュール１０５は、一部のフレームの伸長処理を省いて音
声データとの同期再生を行うフレームコマ落とし機能を
有している。また、圧縮処理モジュール１０４における
フレーム間引き、伸長処理モジュール１０６におけるフ
レームコマ落としは、フレーム補間されたフレームから
優先的に処理する機能をさらに有している。
ームのリアルタイム処理が行えなくなった場合には、フ
レームレート制御部１１０は、フレームメモリ１０３か
ら圧縮処理モジュール１０４へのフレームレートが常に
一定になるように処理するフレームレート制御１１０を
有している。また、圧縮処理モジュール１０４は、一部
のフレームの圧縮処理を省いて、規格上のフレームレー
トは一定のまま、実質的なフレームレートを低減させる
フレーム間引き機能を有している。また、伸長処理モジ
ュール１０５は、一部のフレームの伸長処理を省いて音
声データとの同期再生を行うフレームコマ落とし機能を
有している。また、圧縮処理モジュール１０４における
フレーム間引き、伸長処理モジュール１０６におけるフ
レームコマ落としは、フレーム補間されたフレームから
優先的に処理する機能をさらに有している。
【００１５】次に、図１に示すリアルタイム録画再生装
置の動作を詳細に説明する。図１において、ＣＰＵの性
能不足により、ＡＤＣ１０２でフルフレームのリアルタ
イムキャプチャ処理が行えなくなった場合には、フレー
ムメモリ１０３に格納されるフレームデータは、所々フ
レームがドロップし、不連続に配置されるようになる。
図２は、この場合の様子を示す説明図の一例である。こ
の場合に、（ｎ＋１）フレームと、（ｎ＋４）および
（ｎ＋５）フレームがフレームドロップしている。フレ
ームレート制御部１１０は、ＡＤＣ１０２から、各キャ
プチャフレームの時間情報を取得してフレームドロップ
の判定を行う。そして、ドロップしたフレームのフレー
ム補間処理を行って、圧縮処理モジュール１０４への入
力が常に一定のフレームレートを保つように制御する。
フレームレート制御部１１０は、正常時には各フレーム
のデータが格納されているメモリのポインタを圧縮処理
モジュール１０４に指定する。
置の動作を詳細に説明する。図１において、ＣＰＵの性
能不足により、ＡＤＣ１０２でフルフレームのリアルタ
イムキャプチャ処理が行えなくなった場合には、フレー
ムメモリ１０３に格納されるフレームデータは、所々フ
レームがドロップし、不連続に配置されるようになる。
図２は、この場合の様子を示す説明図の一例である。こ
の場合に、（ｎ＋１）フレームと、（ｎ＋４）および
（ｎ＋５）フレームがフレームドロップしている。フレ
ームレート制御部１１０は、ＡＤＣ１０２から、各キャ
プチャフレームの時間情報を取得してフレームドロップ
の判定を行う。そして、ドロップしたフレームのフレー
ム補間処理を行って、圧縮処理モジュール１０４への入
力が常に一定のフレームレートを保つように制御する。
フレームレート制御部１１０は、正常時には各フレーム
のデータが格納されているメモリのポインタを圧縮処理
モジュール１０４に指定する。
【００１６】しかし、図２に示すようなフレームドロッ
プが発生した場合には、（ｎ＋１）フレームの圧縮を行
うとき、前回圧縮したｎフレームのポインタｐ０を続け
て指定する。同様に、（ｎ＋４）および（ｎ＋５）フレ
ームの圧縮を行う場合には、（ｎ＋３）フレームのポイ
ンタｐ２を２回連続して指定する。このようにして、圧
縮処理モジュール１０４でのフレームレートが常に一定
になるように制御する。また、上述したようなポインタ
を連続して指定する方式ではなく、（ｎ＋２）フレーム
のポインタｐ１を指定する際には、１フレームのドロッ
プが発生したことを、（ｎ＋６）フレームポインタｐ３
を指定する際には、２フレームのドロップが発生したこ
とを、それぞれ別途通知する。そして、実際のフレーム
補間処理は、圧縮処理モジュール１０４に行わせても良
い。
プが発生した場合には、（ｎ＋１）フレームの圧縮を行
うとき、前回圧縮したｎフレームのポインタｐ０を続け
て指定する。同様に、（ｎ＋４）および（ｎ＋５）フレ
ームの圧縮を行う場合には、（ｎ＋３）フレームのポイ
ンタｐ２を２回連続して指定する。このようにして、圧
縮処理モジュール１０４でのフレームレートが常に一定
になるように制御する。また、上述したようなポインタ
を連続して指定する方式ではなく、（ｎ＋２）フレーム
のポインタｐ１を指定する際には、１フレームのドロッ
プが発生したことを、（ｎ＋６）フレームポインタｐ３
を指定する際には、２フレームのドロップが発生したこ
とを、それぞれ別途通知する。そして、実際のフレーム
補間処理は、圧縮処理モジュール１０４に行わせても良
い。
【００１７】図１に示すリアルタイム録画再生装置にお
いて、圧縮処理モジュール１０４は、例えばＭＰＥＧ
（動画像圧縮方式）規格に準拠した圧縮方式で、デジタ
ル圧縮処理を行うモジュールである。圧縮処理モジュー
ル１０４でフルフレームのリアルタイム圧縮処理が行え
なくなった場合には、規格上のフレームレートはＭＰＥ
Ｇ規格で定められた一定のフレームレートを維持したま
ま、一部のフレームの圧縮処理を省いて実質的なフレー
ムレートを低減させるフレーム間引き処理を行う。そし
て、圧縮処理のＣＰＵ負荷を低下させ、リアルタイム処
理を継続させるようにする。ＭＰＥＧ規格では、圧縮フ
レームのフレームタイプとして、参照フレームを必要と
せず、自身が他のフレームの参照フレームとなる「Ｉフ
レーム」と、参照フレームを必要とし、自身も他のフレ
ームの参照フレームとなる「Ｐフレーム」と、参照フレ
ームを必要とし、自身は参照フレームとならない「Ｂフ
レーム」の３種類の「フレームタイプ」が定義されてい
る。フレーム間引き処理は、以上３種類の「フレームタ
イプ」のうち、参照フレームとはならない「Ｂフレー
ム」に対して行うものとする。
いて、圧縮処理モジュール１０４は、例えばＭＰＥＧ
（動画像圧縮方式）規格に準拠した圧縮方式で、デジタ
ル圧縮処理を行うモジュールである。圧縮処理モジュー
ル１０４でフルフレームのリアルタイム圧縮処理が行え
なくなった場合には、規格上のフレームレートはＭＰＥ
Ｇ規格で定められた一定のフレームレートを維持したま
ま、一部のフレームの圧縮処理を省いて実質的なフレー
ムレートを低減させるフレーム間引き処理を行う。そし
て、圧縮処理のＣＰＵ負荷を低下させ、リアルタイム処
理を継続させるようにする。ＭＰＥＧ規格では、圧縮フ
レームのフレームタイプとして、参照フレームを必要と
せず、自身が他のフレームの参照フレームとなる「Ｉフ
レーム」と、参照フレームを必要とし、自身も他のフレ
ームの参照フレームとなる「Ｐフレーム」と、参照フレ
ームを必要とし、自身は参照フレームとならない「Ｂフ
レーム」の３種類の「フレームタイプ」が定義されてい
る。フレーム間引き処理は、以上３種類の「フレームタ
イプ」のうち、参照フレームとはならない「Ｂフレー
ム」に対して行うものとする。
【００１８】次に、図３は、入力フレームのフレーム間
引きの手順を示す説明図である。図３（ａ）は、「入力
フレーム構成」を示す。それぞれ図示するフレームタイ
プＩ＃１、Ｂ＃２、Ｂ＃３、Ｐ＃４、Ｂ＃５、Ｂ＃６、
Ｐ＃７で圧縮を行うものとする。このとき、「圧縮フレ
ーム順序」は、図３（ｂ）に示す如く、Ｂフレーム＃２
および＃３は、先に圧縮したＩフレーム＃１とＰフレー
ム＃４を参照フレームとして使用する。同様に、Ｂフレ
ーム＃５および＃６は、先に圧縮したＰフレーム＃４と
Ｐフレーム＃７を参照フレームとして使用する。
引きの手順を示す説明図である。図３（ａ）は、「入力
フレーム構成」を示す。それぞれ図示するフレームタイ
プＩ＃１、Ｂ＃２、Ｂ＃３、Ｐ＃４、Ｂ＃５、Ｂ＃６、
Ｐ＃７で圧縮を行うものとする。このとき、「圧縮フレ
ーム順序」は、図３（ｂ）に示す如く、Ｂフレーム＃２
および＃３は、先に圧縮したＩフレーム＃１とＰフレー
ム＃４を参照フレームとして使用する。同様に、Ｂフレ
ーム＃５および＃６は、先に圧縮したＰフレーム＃４と
Ｐフレーム＃７を参照フレームとして使用する。
【００１９】ここで、フレーム＃２とフレーム＃６をフ
レーム間引きする場合には、図３（ｃ）の「圧縮ビット
ストリーム」に示す如く、通常圧縮するフレーム＃１、
＃４、＃３、＃７、＃５は、それぞれ先ずフレーム圧縮
符号の開始を意味するピクチャヘッダ８１をビットスト
リームに付加し、その後ピクチャヘッダ以降の符号化処
理を行ってビットストリームに付加する。間引き処理を
行うフレーム＃２および＃６は、フレーム圧縮符号の開
始を意味するピクチャヘッダ８１をビットストリームに
付加するまでは同様に行う。しかし、ピクチャヘッダ８
１以降の符号化処理は行わない。その代わり、参照フレ
ームと同一フレームであることを示す符号８３をビット
ストリームに付加する。このとき、同一フレームとなる
参照フレームは、入力フレーム順で隣接する参照フレー
ムがなり、フレーム＃２は直前のフレーム＃１と、フレ
ーム＃６は直後のフレーム＃７と同一フレームであるこ
とを示す符号８３を付加する。ここで、直前のフレーム
と同一であることを示す符号と、直後のフレームと同一
であることを示す符号は、それぞれ一意に決まるため、
予めメインメモリ等に記憶させておくことにより、全く
符号化処理を行わずに、メモリから読み出した符号を付
加するのみでよい。図３（ｄ）は、圧縮ビットストリー
ムを伸長した「伸長フレーム構成」を示したものであ
り、入力フレームの総フレームを維持したまま、つまり
ＭＰＥＧ規格上のフレームレートを一定に維持したま
ま、実質的なフレームレートが低下していることを示し
ている。
レーム間引きする場合には、図３（ｃ）の「圧縮ビット
ストリーム」に示す如く、通常圧縮するフレーム＃１、
＃４、＃３、＃７、＃５は、それぞれ先ずフレーム圧縮
符号の開始を意味するピクチャヘッダ８１をビットスト
リームに付加し、その後ピクチャヘッダ以降の符号化処
理を行ってビットストリームに付加する。間引き処理を
行うフレーム＃２および＃６は、フレーム圧縮符号の開
始を意味するピクチャヘッダ８１をビットストリームに
付加するまでは同様に行う。しかし、ピクチャヘッダ８
１以降の符号化処理は行わない。その代わり、参照フレ
ームと同一フレームであることを示す符号８３をビット
ストリームに付加する。このとき、同一フレームとなる
参照フレームは、入力フレーム順で隣接する参照フレー
ムがなり、フレーム＃２は直前のフレーム＃１と、フレ
ーム＃６は直後のフレーム＃７と同一フレームであるこ
とを示す符号８３を付加する。ここで、直前のフレーム
と同一であることを示す符号と、直後のフレームと同一
であることを示す符号は、それぞれ一意に決まるため、
予めメインメモリ等に記憶させておくことにより、全く
符号化処理を行わずに、メモリから読み出した符号を付
加するのみでよい。図３（ｄ）は、圧縮ビットストリー
ムを伸長した「伸長フレーム構成」を示したものであ
り、入力フレームの総フレームを維持したまま、つまり
ＭＰＥＧ規格上のフレームレートを一定に維持したま
ま、実質的なフレームレートが低下していることを示し
ている。
【００２０】ここで、フレームレート制御部１１０にお
けるフレーム補間処理と、圧縮処理モジュール１０４に
おけるフレーム間引き処理を、それぞれ独立に行った場
合を、図４を参照して説明する。例えば、図４（ａ）に
示す如きフレーム構成の場合には、フレームレート制御
部１１０において、フレーム＃２および＃５が間引かれ
る。それぞれフレーム＃１、フレーム＃４で補間された
（それぞれフレーム＃１’および＃４’と図示する）状
態で、圧縮処理モジュール１０４に入力されたとき、圧
縮処理モジュール１０４において、図４（ｂ）に示すフ
レーム順序でフレーム＃３および＃６の２フレームを間
引き処理で間引いたとする。この場合には、図４（ｃ）
に示す如く、圧縮ビットストリームを伸長したフレーム
構成となり、動きのあるフレームとしては、フレーム＃
１、＃４および＃７の３フレームのみとなる。
けるフレーム補間処理と、圧縮処理モジュール１０４に
おけるフレーム間引き処理を、それぞれ独立に行った場
合を、図４を参照して説明する。例えば、図４（ａ）に
示す如きフレーム構成の場合には、フレームレート制御
部１１０において、フレーム＃２および＃５が間引かれ
る。それぞれフレーム＃１、フレーム＃４で補間された
（それぞれフレーム＃１’および＃４’と図示する）状
態で、圧縮処理モジュール１０４に入力されたとき、圧
縮処理モジュール１０４において、図４（ｂ）に示すフ
レーム順序でフレーム＃３および＃６の２フレームを間
引き処理で間引いたとする。この場合には、図４（ｃ）
に示す如く、圧縮ビットストリームを伸長したフレーム
構成となり、動きのあるフレームとしては、フレーム＃
１、＃４および＃７の３フレームのみとなる。
【００２１】そこで、圧縮処理モジュール１０４は、フ
レームレート制御部１１０においてフレーム補間処理が
行われたか否かを判別する。そして、図５（ｂ）に示す
如く、フレームレート制御部１１０で補間されたフレー
ムを優先的にフレーム間引き処理を行うようにする。同
じ２フレームの間引き処理を行った場合に、圧縮ビット
ストリームを伸長したときのフレーム構成は、図５
（ｃ）に示す如く、動きのあるフレームとしては、フレ
ーム＃１、＃３、＃４、＃６および＃７の５フレームに
増加する。尚、フレームレート制御部１１０においてフ
レーム補間されたフレームの圧縮フレームタイプが参照
フレームに当った場合には、圧縮処理モジュール１０４
においてフレーム間引き処理を行うことができない。
レームレート制御部１１０においてフレーム補間処理が
行われたか否かを判別する。そして、図５（ｂ）に示す
如く、フレームレート制御部１１０で補間されたフレー
ムを優先的にフレーム間引き処理を行うようにする。同
じ２フレームの間引き処理を行った場合に、圧縮ビット
ストリームを伸長したときのフレーム構成は、図５
（ｃ）に示す如く、動きのあるフレームとしては、フレ
ーム＃１、＃３、＃４、＃６および＃７の５フレームに
増加する。尚、フレームレート制御部１１０においてフ
レーム補間されたフレームの圧縮フレームタイプが参照
フレームに当った場合には、圧縮処理モジュール１０４
においてフレーム間引き処理を行うことができない。
【００２２】このような場合には、入力フレーム順で直
前のＢフレームをフレーム間引きの対象に置き換えて、
フレーム間引きを行うようにする。図６は、この様子を
示したものであり、フレーム補間されたフレーム＃３’
をフレーム補間処理するのではなく、入力フレーム順で
直前のＢフレームであるフレーム＃３をフレーム補間処
理する。
前のＢフレームをフレーム間引きの対象に置き換えて、
フレーム間引きを行うようにする。図６は、この様子を
示したものであり、フレーム補間されたフレーム＃３’
をフレーム補間処理するのではなく、入力フレーム順で
直前のＢフレームであるフレーム＃３をフレーム補間処
理する。
【００２３】図１において、伸長処理モジュール１０６
は、例えばＭＰＥＧ規格に準拠した伸長方式でデジタル
伸長処理を行うモジュールであり、記録装置１０５に記
録された圧縮ビットストリームを任意の時間に読み出し
て伸長処理を行う。伸長したフレームデータは、フレー
ムメモリ１０７に蓄積する。フレームメモリ１０７に蓄
積されたフレームデータは、ＤＡＣ１０８でアナログ変
換し、出力端子１０８を介して外部表示端末に表示す
る。伸長処理モジュール１０６において、フルフレーム
のリアルタイム伸長処理が行えなくなった場合には、音
声との遅延判定を行う。また、遅延状態に陥った場合に
は、圧縮ビットストリームの伸長処理を省くコマ落とし
制御を行う。そして、音声との同期再生を継続するよう
に制御する。コマ落とし制御の基本的な制御方法は、本
発明と同一発明者且つ同一出願人によって提案されてお
り、特開平１０−１３６３０８号公報の「オーディオ・
ビデオ同期再生装置」に開示されているので、ここで詳
細説明は省略する。
は、例えばＭＰＥＧ規格に準拠した伸長方式でデジタル
伸長処理を行うモジュールであり、記録装置１０５に記
録された圧縮ビットストリームを任意の時間に読み出し
て伸長処理を行う。伸長したフレームデータは、フレー
ムメモリ１０７に蓄積する。フレームメモリ１０７に蓄
積されたフレームデータは、ＤＡＣ１０８でアナログ変
換し、出力端子１０８を介して外部表示端末に表示す
る。伸長処理モジュール１０６において、フルフレーム
のリアルタイム伸長処理が行えなくなった場合には、音
声との遅延判定を行う。また、遅延状態に陥った場合に
は、圧縮ビットストリームの伸長処理を省くコマ落とし
制御を行う。そして、音声との同期再生を継続するよう
に制御する。コマ落とし制御の基本的な制御方法は、本
発明と同一発明者且つ同一出願人によって提案されてお
り、特開平１０−１３６３０８号公報の「オーディオ・
ビデオ同期再生装置」に開示されているので、ここで詳
細説明は省略する。
【００２４】ここで、圧縮処理モジュール１０４におけ
るフレーム間引き処理と、伸長処理モジュール１０６に
おけるフレームコマ落とし処理を、それぞれ独立に行っ
た場合について、図７乃至図９を参照して説明する。例
えば、図７（ａ）に示す如く、圧縮処理モジュール１０
４において、フレーム＃３および＃６が間引かれて圧縮
された場合に、伸長処理モジュール１０６において、図
７（ｂ）に示す如く、フレーム＃５および＃８の２フレ
ームをコマ落とし処理したとする。この場合には、再生
される動きのあるフレームとしては、＃１、＃２、＃
４、＃７、＃９および＃１０の６フレームのみとなる。
そこで、圧縮処理モジュール１０４は、図８のビットス
トリームに示す如く、フレーム間引きを行う際に、ピク
チャヘッダ８１および参照フレームと同一フレームであ
ることを示す符号８３の間に、このフレームがフレーム
間引きされたことを明示的に示すユーザデータ８２を付
加する。この処理により、記録装置１０５に記録された
ビットストリームを再生する際に、伸長処理モジュール
１０６が、フレーム間引きされたフレームであることを
明示的に判別できるようにする。
るフレーム間引き処理と、伸長処理モジュール１０６に
おけるフレームコマ落とし処理を、それぞれ独立に行っ
た場合について、図７乃至図９を参照して説明する。例
えば、図７（ａ）に示す如く、圧縮処理モジュール１０
４において、フレーム＃３および＃６が間引かれて圧縮
された場合に、伸長処理モジュール１０６において、図
７（ｂ）に示す如く、フレーム＃５および＃８の２フレ
ームをコマ落とし処理したとする。この場合には、再生
される動きのあるフレームとしては、＃１、＃２、＃
４、＃７、＃９および＃１０の６フレームのみとなる。
そこで、圧縮処理モジュール１０４は、図８のビットス
トリームに示す如く、フレーム間引きを行う際に、ピク
チャヘッダ８１および参照フレームと同一フレームであ
ることを示す符号８３の間に、このフレームがフレーム
間引きされたことを明示的に示すユーザデータ８２を付
加する。この処理により、記録装置１０５に記録された
ビットストリームを再生する際に、伸長処理モジュール
１０６が、フレーム間引きされたフレームであることを
明示的に判別できるようにする。
【００２５】次に、伸長処理モジュール１０６が、記録
装置１０５から読み出した圧縮ビットストリームを伸長
する際に、フレーム圧縮符号の開始を意味するピクチャ
ヘッダ８１の直後に、フレームが間引きされたフレーム
であることを示すユーザデータ８２の有無を判別する。
それがフレーム間引きされたフレームであった場合に
は、優先的に伸長処理を省いてコマ落とし制御を実行す
る。例えば、図９（ａ）の圧縮フレーム順に示す如く、
フレーム＃４’およびフレーム＃７’は、圧縮処理モジ
ュール１０４によりフレーム間引きされたフレームであ
り、ピクチャヘッダ８１に続いて、フレーム間引きされ
たフレームであることを示すユーザデータ８２が付加さ
れている。伸長処理モジュール１０６は、図９（ｂ）の
伸長フレーム構成に示す如く、ピクチャヘッダ８１の伸
長直後に、ユーザデータ８２の有無を判別する。そし
て、ユーザデータ８２が付加されたフレームを優先的に
コマ落とし処理する。その結果、同じ２フレームのコマ
落とし処理を行った場合に、再生される動きのあるフレ
ームとしては、フレーム＃１、＃２、＃４、＃５、＃
７、＃８、＃９および＃１０の８フレームに増加する。
装置１０５から読み出した圧縮ビットストリームを伸長
する際に、フレーム圧縮符号の開始を意味するピクチャ
ヘッダ８１の直後に、フレームが間引きされたフレーム
であることを示すユーザデータ８２の有無を判別する。
それがフレーム間引きされたフレームであった場合に
は、優先的に伸長処理を省いてコマ落とし制御を実行す
る。例えば、図９（ａ）の圧縮フレーム順に示す如く、
フレーム＃４’およびフレーム＃７’は、圧縮処理モジ
ュール１０４によりフレーム間引きされたフレームであ
り、ピクチャヘッダ８１に続いて、フレーム間引きされ
たフレームであることを示すユーザデータ８２が付加さ
れている。伸長処理モジュール１０６は、図９（ｂ）の
伸長フレーム構成に示す如く、ピクチャヘッダ８１の伸
長直後に、ユーザデータ８２の有無を判別する。そし
て、ユーザデータ８２が付加されたフレームを優先的に
コマ落とし処理する。その結果、同じ２フレームのコマ
落とし処理を行った場合に、再生される動きのあるフレ
ームとしては、フレーム＃１、＃２、＃４、＃５、＃
７、＃８、＃９および＃１０の８フレームに増加する。
【００２６】以上、本発明によるリアルタイム録画再生
装置の好適実施形態例の構成および動作を詳細に説明し
た。しかし、この実施形態例は、本発明の単なる例示に
過ぎず、何ら本発明を限定するためのものではないこと
に留意されたい。
装置の好適実施形態例の構成および動作を詳細に説明し
た。しかし、この実施形態例は、本発明の単なる例示に
過ぎず、何ら本発明を限定するためのものではないこと
に留意されたい。
【００２７】
【発明の効果】以上の説明から理解される如く、本発明
のリアルタイム録画再生装置によると、次の如き実用上
顕著な効果を有する。第１に、リアルタイム録画再生装
置をパーソナルコンピュータのソフトウェア処理を用い
て構成する場合に、他のアプリケーションと並列に動作
させた場合および他のアプリケーションを起動した瞬間
等に、ＣＰＵの性能不足が生じ、フルフレームのリアル
タイム記録処理が行えなくなった場合にも、リアルタイ
ムの録画処理を継続して実行することが可能である。そ
の理由は、フルフレームのリアルタイムキャプチャ処理
が行えなくなった場合に、フレームの補間処理を行っ
て、常に一定のフレームレートを維持させるフレームレ
ート制御部を有していると共に一定のフレームレートを
保持したまま、実質的なフレームレートを低減させるフ
レーム間引き機能を有する圧縮処理モジュールを備えて
いるためである。
のリアルタイム録画再生装置によると、次の如き実用上
顕著な効果を有する。第１に、リアルタイム録画再生装
置をパーソナルコンピュータのソフトウェア処理を用い
て構成する場合に、他のアプリケーションと並列に動作
させた場合および他のアプリケーションを起動した瞬間
等に、ＣＰＵの性能不足が生じ、フルフレームのリアル
タイム記録処理が行えなくなった場合にも、リアルタイ
ムの録画処理を継続して実行することが可能である。そ
の理由は、フルフレームのリアルタイムキャプチャ処理
が行えなくなった場合に、フレームの補間処理を行っ
て、常に一定のフレームレートを維持させるフレームレ
ート制御部を有していると共に一定のフレームレートを
保持したまま、実質的なフレームレートを低減させるフ
レーム間引き機能を有する圧縮処理モジュールを備えて
いるためである。
【００２８】第２に、ＣＰＵの性能不足が生じ、フルフ
レームのリアルタイム再生処理が行えなくなった場合に
も、音声との同期を保って、任意の時間にタイムシフト
再生が可能なことである。その理由は、音声との同期再
生を継続するフレームのコマ落とし機能を持った伸長処
理モジュールを有しているためである。
レームのリアルタイム再生処理が行えなくなった場合に
も、音声との同期を保って、任意の時間にタイムシフト
再生が可能なことである。その理由は、音声との同期再
生を継続するフレームのコマ落とし機能を持った伸長処
理モジュールを有しているためである。
【００２９】第３に、ＣＰＵの性能不足が生じ、フルフ
レームのリアルタイム再生処理が行えなくなった場合に
も、動きの多い圧縮データを録画再生することができる
ことである。その理由は、フレーム補間したフレームか
ら優先的に、圧縮処理モジュールにおけるフレーム間引
き処理を、フレーム間引きをしたフレームから優先的
に、伸長処理モジュールにおけるフレームコマ落とし処
理を行う機能をそれぞれ有しているためである。
レームのリアルタイム再生処理が行えなくなった場合に
も、動きの多い圧縮データを録画再生することができる
ことである。その理由は、フレーム補間したフレームか
ら優先的に、圧縮処理モジュールにおけるフレーム間引
き処理を、フレーム間引きをしたフレームから優先的
に、伸長処理モジュールにおけるフレームコマ落とし処
理を行う機能をそれぞれ有しているためである。
【図１】本発明によるリアルタイム録画再生装置の好適
実施形態例の構成を示すブロック図である。
実施形態例の構成を示すブロック図である。
【図２】リアルタイム録画再生装置でフレームドロップ
が生じた場合を示す図である。
が生じた場合を示す図である。
【図３】図１に示すリアルタイム録画再生装置における
入力フレーム間引き動作の説明図である。
入力フレーム間引き動作の説明図である。
【図４】図１に示すリアルタイム録画再生装置における
フレーム補間動作の説明図である。
フレーム補間動作の説明図である。
【図５】図１に示すリアルタイム録画再生装置のフレー
ムレート制御部の動作説明図である。
ムレート制御部の動作説明図である。
【図６】図１に示すリアルタイム録画再生装置のフレー
ムレート制御部の動作説明図である。
ムレート制御部の動作説明図である。
【図７】図１に示すリアルタイム録画再生装置のフレー
ムコマ落し処理を説明する図である。
ムコマ落し処理を説明する図である。
【図８】図１に示すリアルタイム録画再生装置における
ビットストリーム構成図である。
ビットストリーム構成図である。
【図９】図１に示すリアルタイム録画再生装置の動作説
明図である。
明図である。
８１ ピクチャヘッダ
８２ ユーザデータ
８３ 同一を示す符号
１０１ 入力端子
１０２ アナログ・デジタル変換器（ＡＤＣ）
１０３、１０７ フレームメモリ
１０４ 圧縮処理モジュール
１０５ 記録装置
１０６ 伸長処理モジュール
１０８ デジタル・アナログ変換器（ＤＡＣ）
１０９ 出力端子
Claims (4)
- 【請求項１】アナログ画像信号をアナログ・デジタル変
換器（ＡＤＣ）でデジタルデータに変換して記録装置に
記録すると共に、該記録装置に記録されたデジタルデー
タを読み出してデジタル・アナログ変換器（ＤＡＣ）で
アナログ信号に変換して出力するリアルタイム録画再生
装置において、 前記ＡＤＣの出力を格納するフレームメモリと、該フレ
ームメモリの出力を圧縮処理する圧縮処理モジュール
と、前記記録装置から読み出したデジタルデータを伸長
処理する伸長処理モジュールと、該伸長処理モジュール
の出力を格納して前記ＤＡＣに出力するフレームメモリ
と、前記圧縮処理モジュールを制御するフレームレート
制御部とを備えるとともに、データビットストリーム
は、フレーム圧縮符号の開始を示すピクチャヘッダ、間
引きされたフレームであることを示すユーザデータおよ
び参照フレームと同一フレームであることを示す符号を
含むことを特徴とするリアルタイム録画再生装置。 - 【請求項２】前記フレームレート制御部は、前記圧縮処
理モジュールのフレームレートが一定になるようフレー
ム補間処理することを特徴とする請求項１に記載のリア
ルタイム録画再生装置。 - 【請求項３】前記伸長処理モジュールでフルフレームの
リアルタイム伸長処理ができなくなった場合に、コマ落
し処理を行うことを特徴とする請求項１に記載のリアル
タイム録画再生装置。 - 【請求項４】前記圧縮処理モジュールによるフレーム間
引きおよび前記伸長処理モジュールによるフレームコマ
落し処理は、前記フレーム補間したフレームから優先的
に行うことにより動きの多いデジタル圧縮データを生成
することを特徴とする請求項１、２又は３に記載のリア
ルタイム録画再生装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000120495A JP3444266B2 (ja) | 2000-04-21 | 2000-04-21 | リアルタイム録画再生装置 |
| US09/837,190 US7242852B2 (en) | 2000-04-21 | 2001-04-19 | Recording/reproducing system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000120495A JP3444266B2 (ja) | 2000-04-21 | 2000-04-21 | リアルタイム録画再生装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001309303A JP2001309303A (ja) | 2001-11-02 |
| JP3444266B2 true JP3444266B2 (ja) | 2003-09-08 |
Family
ID=18631293
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000120495A Expired - Fee Related JP3444266B2 (ja) | 2000-04-21 | 2000-04-21 | リアルタイム録画再生装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US7242852B2 (ja) |
| JP (1) | JP3444266B2 (ja) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4408537B2 (ja) * | 2000-07-21 | 2010-02-03 | シャープ株式会社 | 情報圧縮記録装置 |
| US7433524B2 (en) | 2003-05-08 | 2008-10-07 | Ricoh Company, Ltd. | Processing system with frame rate and image quality optimized |
| US7583299B2 (en) | 2004-01-14 | 2009-09-01 | Casio Computer Co., Ltd. | Moving image recording apparatus with a stream recording function of a moving image |
| JP4575124B2 (ja) * | 2004-11-29 | 2010-11-04 | オリンパス株式会社 | 画像表示装置 |
| WO2007063819A1 (ja) * | 2005-11-29 | 2007-06-07 | Pioneer Corporation | 記録装置、再生装置、記録方法、記録プログラムおよびコンピュータに読み取り可能な記録媒体 |
| JP4692388B2 (ja) * | 2006-05-24 | 2011-06-01 | ソニー株式会社 | データ処理装置およびデータ処理方法 |
| JP2009050017A (ja) * | 2008-10-15 | 2009-03-05 | Casio Comput Co Ltd | 動画像記録装置及びプログラム |
| CN108737761B (zh) * | 2017-04-21 | 2021-08-10 | 腾讯科技（深圳）有限公司 | 视频录制方法及装置 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5611038A (en) * | 1991-04-17 | 1997-03-11 | Shaw; Venson M. | Audio/video transceiver provided with a device for reconfiguration of incompatibly received or transmitted video and audio information |
| US5966495A (en) * | 1993-05-12 | 1999-10-12 | Canon Kabushiki Kaisha | Recording and reproducing apparatus |
| JPH0730851A (ja) | 1993-07-09 | 1995-01-31 | Fujitsu General Ltd | テレビ放送記録装置 |
| JP3478515B2 (ja) | 1995-02-09 | 2003-12-15 | 松下電器産業株式会社 | データを記録再生する装置および方法 |
| JPH08263600A (ja) * | 1995-03-22 | 1996-10-11 | Toshiba Corp | 携帯可能記憶媒体の発行方法および発行装置 |
| JP3063824B2 (ja) | 1996-10-29 | 2000-07-12 | 日本電気株式会社 | オーディオ・ビデオ同期再生装置 |
| EP0910087B1 (en) * | 1997-10-17 | 2011-11-30 | Sony Corporation | Recording apparatus and method, reproducing apparatus and method, recording/reproducing apparatus and method, recording medium and distribution medium |
| KR100252108B1 (ko) * | 1997-12-20 | 2000-04-15 | 윤종용 | Mpeg 압축부호화 및 복호화기를 채용한 디지털 기록 재생장치 및 그 방법 |
| EP0935385A3 (en) * | 1998-02-04 | 2002-06-19 | Hitachi, Ltd. | Decoder device and receiver using the same |
| JPH11298890A (ja) * | 1998-04-13 | 1999-10-29 | Hitachi Ltd | 画像データの圧縮又は伸張方法とその装置、並びに、それを用いた画像伝送システム及び監視システム |
| US6795592B2 (en) * | 2001-09-13 | 2004-09-21 | Intel Corporation | Architecture for processing fingerprint images |
-
2000
- 2000-04-21 JP JP2000120495A patent/JP3444266B2/ja not_active Expired - Fee Related
-
2001
- 2001-04-19 US US09/837,190 patent/US7242852B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| US20010033740A1 (en) | 2001-10-25 |
| US7242852B2 (en) | 2007-07-10 |
| JP2001309303A (ja) | 2001-11-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4515465B2 (ja) | 動画撮影装置および動画撮影方法、記録媒体に記録された映像信号を再生する動画再生装置および動画再生方法 | |
| JPH10507597A (ja) | マルチメディア・システムのためのプログラマブルなオーディオ−ビデオ同期方法および装置 | |
| JPH10511238A (ja) | 再生システムのための同期方法及び装置 | |
| JP2004072793A (ja) | 映像記録方法及び装置、映像再生方法及び装置、及び記録媒体 | |
| JP2001036844A (ja) | 画質確認装置、画質確認方法及びそのプログラムを記録した記録媒体 | |
| US20020003573A1 (en) | Processing apparatus, image recording apparatus and image reproduction apparatus | |
| US20060257103A1 (en) | Digital video recording apparatus and method thereof | |
| JP5474417B2 (ja) | 動画データ生成装置、動画データ生成システム、動画データ生成方法およびコンピュータープログラム | |
| JP3444266B2 (ja) | リアルタイム録画再生装置 | |
| US6603866B1 (en) | Image recording/reproducing apparatus and its method | |
| US20020114395A1 (en) | System method and apparatus for a motion compensation instruction generator | |
| JP3632028B2 (ja) | 多チャンネル動映像圧縮方法及び装置 | |
| US7236688B2 (en) | Signal processing method and signal processing apparatus | |
| US20040234236A1 (en) | Data recording and reproduction apparatus displaying channels | |
| US6498893B1 (en) | Recording/reproducing apparatus | |
| US20080267597A1 (en) | Image data recording/playback device, system, and method | |
| JP2000278643A (ja) | データ変換装置 | |
| JP2002171466A (ja) | タイムシフト再生システム | |
| KR100896278B1 (ko) | 가정용 방범 기능이 부가된 하드디스크를 이용한 티브이녹화장치 | |
| US5844869A (en) | Optical disk recording and reproducing system capable of eliminating the interruption or overlapping of data | |
| JP4293151B2 (ja) | 映像符号化方法及び映像記録装置 | |
| JP4288442B2 (ja) | 記録再生装置および映像処理方法 | |
| JP3235917B2 (ja) | 画像記録再生装置 | |
| JP2894870B2 (ja) | 画像蓄積装置 | |
| WO2001037561A1 (fr) | Procede de montage par compression pour images video et dispositif de montage d'images video utilisant ce procede de montage par compression ainsi que dispositif de stockage / de lecture |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080627 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090627 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100627 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100627 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110627 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110627 Year of fee payment: 8 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120627 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120627 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120627 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130627 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130627 Year of fee payment: 10 |
|
| LAPS | Cancellation because of no payment of annual fees |