JP2001346216A - 動画像圧縮方法および情報処理装置 - Google Patents
動画像圧縮方法および情報処理装置Info
- Publication number
- JP2001346216A JP2001346216A JP2000168992A JP2000168992A JP2001346216A JP 2001346216 A JP2001346216 A JP 2001346216A JP 2000168992 A JP2000168992 A JP 2000168992A JP 2000168992 A JP2000168992 A JP 2000168992A JP 2001346216 A JP2001346216 A JP 2001346216A
- Authority
- JP
- Japan
- Prior art keywords
- compression
- processing
- moving image
- encoding process
- image signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
Abstract
(57)【要約】
【課題】ソフトウェアによって動画の圧縮符号化を行う
システムにおいて、コマ落ちの発生を極力排除する。 【解決手段】現在のＣＰＵの負荷が比較的高く、目標フ
レームレート６０２の値に対して圧縮符号化処理に遅れ
が生じている場合には、状態変数（Ｘ）６０３の値が増
分される。逆に、現在のＣＰＵ負荷が比較的低く、圧縮
符号化処理に対してより多くのＣＰＵ資源を割り当てる
ことが可能な場合には、状態変数（Ｘ）６０３の値が減
分される。この状態変数（Ｘ）６０３の値に基づき、エ
ンコードモジュール５０２に対して指定すべき符号化オ
プションのパラメタが決定される。これにより、目標フ
レームレートを維持しつつ、現在のＣＰＵ負荷に応じて
圧縮符号化処理の処理内容を最適化することが可能とな
る。
システムにおいて、コマ落ちの発生を極力排除する。 【解決手段】現在のＣＰＵの負荷が比較的高く、目標フ
レームレート６０２の値に対して圧縮符号化処理に遅れ
が生じている場合には、状態変数（Ｘ）６０３の値が増
分される。逆に、現在のＣＰＵ負荷が比較的低く、圧縮
符号化処理に対してより多くのＣＰＵ資源を割り当てる
ことが可能な場合には、状態変数（Ｘ）６０３の値が減
分される。この状態変数（Ｘ）６０３の値に基づき、エ
ンコードモジュール５０２に対して指定すべき符号化オ
プションのパラメタが決定される。これにより、目標フ
レームレートを維持しつつ、現在のＣＰＵ負荷に応じて
圧縮符号化処理の処理内容を最適化することが可能とな
る。
Description
【０００１】
【発明の属する技術分野】本発明は動画像信号の圧縮符
号化を行うための動画像圧縮方法および情報処理装置に
関し、特に滑らかな動画再生を行えるように改善された
動画像圧縮方法および情報処理装置に関する。
号化を行うための動画像圧縮方法および情報処理装置に
関し、特に滑らかな動画再生を行えるように改善された
動画像圧縮方法および情報処理装置に関する。
【０００２】
【従来の技術】近年、コンピュータ技術の発達に伴い、
デジタルビデオプレーヤ、セットトップボックス、デジ
タルＴＶ、デジタルＶＣＲ、パーソナルコンピュータ等
のマルチメディア対応の各種電子機器が開発されてい
る。この種の電子機器では、ＭＰＥＧ２／ＭＰＥＧ４な
どの動画像高能率符号化方式で圧縮符号化された動画デ
ータを復号・再生するためのデコーダのみならず、最近
では、動画データをＭＰＥＧ２／ＭＰＥＧ４などで圧縮
符号化するためのエンコーダも搭載され始めている。
デジタルビデオプレーヤ、セットトップボックス、デジ
タルＴＶ、デジタルＶＣＲ、パーソナルコンピュータ等
のマルチメディア対応の各種電子機器が開発されてい
る。この種の電子機器では、ＭＰＥＧ２／ＭＰＥＧ４な
どの動画像高能率符号化方式で圧縮符号化された動画デ
ータを復号・再生するためのデコーダのみならず、最近
では、動画データをＭＰＥＧ２／ＭＰＥＧ４などで圧縮
符号化するためのエンコーダも搭載され始めている。
【０００３】ＭＰＥＧ２／ＭＰＥＧ４の規格では、動き
ベクトル検出（動き推定ＭＥ：Ｍｏｔｉｏｎ Ｅｓｔｉ
ｍａｔｉｏｎ）による動き補償予測技術が用いられてい
る。動きベクトル検出では、入力フレーム内の注目ブロ
ック毎に参照フレームの中から最も近似するブロックを
探索するというブロック探索処理が行われる。探索され
たブロックと注目ブロックとの空間的なずれ量が動きベ
クトルとして求められる。そして、この動きベクトルを
基に参照フレームから入力フレームの画像が予測され、
その予測画像と入力画像との誤差信号に対して直交変
換、量子化、可変長符号化処理が施される。この動き補
償予測技術により、高能率の圧縮符号化が実現されてい
る。
ベクトル検出（動き推定ＭＥ：Ｍｏｔｉｏｎ Ｅｓｔｉ
ｍａｔｉｏｎ）による動き補償予測技術が用いられてい
る。動きベクトル検出では、入力フレーム内の注目ブロ
ック毎に参照フレームの中から最も近似するブロックを
探索するというブロック探索処理が行われる。探索され
たブロックと注目ブロックとの空間的なずれ量が動きベ
クトルとして求められる。そして、この動きベクトルを
基に参照フレームから入力フレームの画像が予測され、
その予測画像と入力画像との誤差信号に対して直交変
換、量子化、可変長符号化処理が施される。この動き補
償予測技術により、高能率の圧縮符号化が実現されてい
る。
【０００４】
【発明が解決しようとする課題】しかし、動きベクトル
検出のためのブロック探索処理には多くの演算量を必要
とするため、動きベクトル検出に時間がかかり、結果的
に符号化処理の遅れが引き起こされる場合がある。特
に、パーソナルコンピュータなどでソフトウェアエンコ
ードを行う場合には、動きベクトル検出のために大きな
プロセッサ負荷がかかり、結果として圧縮符号化処理
が、入力される動画像のスピードに間に合わなくなる場
合がある。圧縮符号化処理の遅れは、音声と同期して動
画像の圧縮符号化をソフトウェアによって行う場合に特
に顕在化され、音声とのずれや、入力フレームのコマ落
ちなどの問題が生じることになる。この場合、目標フレ
ームレートでの符号化ができなくなるので、その符号化
データを復号・再生するとギクシャクとした画像となっ
てしまう。
検出のためのブロック探索処理には多くの演算量を必要
とするため、動きベクトル検出に時間がかかり、結果的
に符号化処理の遅れが引き起こされる場合がある。特
に、パーソナルコンピュータなどでソフトウェアエンコ
ードを行う場合には、動きベクトル検出のために大きな
プロセッサ負荷がかかり、結果として圧縮符号化処理
が、入力される動画像のスピードに間に合わなくなる場
合がある。圧縮符号化処理の遅れは、音声と同期して動
画像の圧縮符号化をソフトウェアによって行う場合に特
に顕在化され、音声とのずれや、入力フレームのコマ落
ちなどの問題が生じることになる。この場合、目標フレ
ームレートでの符号化ができなくなるので、その符号化
データを復号・再生するとギクシャクとした画像となっ
てしまう。
【０００５】本発明は上述の事情に鑑みてなされたもの
であり、圧縮符号化処理時におけるコマ落ちの発生を極
力排除できるようにし、再生時に滑らかな動画再生を行
うことが可能な動画像圧縮方法および情報処理装置を提
供することを目的とする。
であり、圧縮符号化処理時におけるコマ落ちの発生を極
力排除できるようにし、再生時に滑らかな動画再生を行
うことが可能な動画像圧縮方法および情報処理装置を提
供することを目的とする。
【０００６】
【課題を解決するための手段】上述の課題を解決するた
め、本発明は、動画像信号の圧縮符号化を行うための動
画像圧縮方法であって、動画像信号を入力するステップ
と、入力された動画像信号に対して圧縮符号化処理を施
すステップと、所定のフレームレートが維持されるよう
に、前記圧縮符号化処理の処理状況に基づいて前記圧縮
符号化処理の処理内容を制御する制御ステップとを具備
することを特徴とする。
め、本発明は、動画像信号の圧縮符号化を行うための動
画像圧縮方法であって、動画像信号を入力するステップ
と、入力された動画像信号に対して圧縮符号化処理を施
すステップと、所定のフレームレートが維持されるよう
に、前記圧縮符号化処理の処理状況に基づいて前記圧縮
符号化処理の処理内容を制御する制御ステップとを具備
することを特徴とする。
【０００７】この動画圧縮方法においては、圧縮符号化
処理の処理状況に基づいて圧縮符号化処理の処理内容が
制御され、現在の圧縮符号化処理の処理状況に最適な圧
縮符号化処理を行うことができる。したがって、プロセ
ッサ負荷が大きく、圧縮符号化処理に遅れが生じている
場合には演算処理の少ない圧縮符号化処理に変更するこ
とにより、所定の目標フレームレートを維持することが
可能となる。逆にプロセッサに余裕がある場合には、演
算処理量がより多い高効率の圧縮符号化処理に切り替え
ることにより、圧縮率の向上を図ることができる。
処理の処理状況に基づいて圧縮符号化処理の処理内容が
制御され、現在の圧縮符号化処理の処理状況に最適な圧
縮符号化処理を行うことができる。したがって、プロセ
ッサ負荷が大きく、圧縮符号化処理に遅れが生じている
場合には演算処理の少ない圧縮符号化処理に変更するこ
とにより、所定の目標フレームレートを維持することが
可能となる。逆にプロセッサに余裕がある場合には、演
算処理量がより多い高効率の圧縮符号化処理に切り替え
ることにより、圧縮率の向上を図ることができる。
【０００８】圧縮符号化処理の処理状況については、圧
縮符号化処理に要した処理時間を検出し、その検出した
処理時間と目標とする所定のフレームレートとから判断
することができる。圧縮符号化処理に要する処理時間は
プロセッサの負荷状況によって変わるため、圧縮符号化
処理に要した処理時間を検出することは、プロセッサ負
荷を検出していることになる。
縮符号化処理に要した処理時間を検出し、その検出した
処理時間と目標とする所定のフレームレートとから判断
することができる。圧縮符号化処理に要する処理時間は
プロセッサの負荷状況によって変わるため、圧縮符号化
処理に要した処理時間を検出することは、プロセッサ負
荷を検出していることになる。
【０００９】圧縮符号化処理では動きベクトル検出処理
に多くの時間が費やされるので、圧縮符号化処理で行わ
れる動きベクトル検出処理の処理内容を制御することが
好ましい。具体的には、動きベクトル検出処理で行われ
るブロック探索処理の探索範囲または探索精度を可変制
御することにより、圧縮符号化処理の内容を最適化する
ことが可能となる。
に多くの時間が費やされるので、圧縮符号化処理で行わ
れる動きベクトル検出処理の処理内容を制御することが
好ましい。具体的には、動きベクトル検出処理で行われ
るブロック探索処理の探索範囲または探索精度を可変制
御することにより、圧縮符号化処理の内容を最適化する
ことが可能となる。
【００１０】また、圧縮符号化処理の前に、動画像信号
に対してフィルタ処理を施す場合には、そのフィルタ処
理を現在の圧縮符号化処理の処理状況に基づいて制御し
てもよい。例えばフィルタ処理をスキップさせたり、あ
るいはそのフィルタ処理の種類を変えることにより、容
易に目標とする所定のフレームレートを維持することが
できる。このようなフィルタ処理の制御は、圧縮符号化
処理の制御と組み合わせて利用できることはもちろんで
あるが、どちらか一方のみを制御するようにしても良
い。
に対してフィルタ処理を施す場合には、そのフィルタ処
理を現在の圧縮符号化処理の処理状況に基づいて制御し
てもよい。例えばフィルタ処理をスキップさせたり、あ
るいはそのフィルタ処理の種類を変えることにより、容
易に目標とする所定のフレームレートを維持することが
できる。このようなフィルタ処理の制御は、圧縮符号化
処理の制御と組み合わせて利用できることはもちろんで
あるが、どちらか一方のみを制御するようにしても良
い。
【００１１】
【発明の実施の形態】以下、図面を参照して本発明の実
施形態を説明する。図１には、本発明の第１実施形態に
係る情報処理装置の一例として、パーソナルコンピュー
タを用いた場合の構成が示されている。このパーソナル
コンピュータはノートブックタイプの携帯型のコンピュ
ータシステムであり、ビデオカメラなどから入力された
動画像信号をＭＰＥＧ２／ＭＰＥＧ４等によって圧縮符
号化することができる。
施形態を説明する。図１には、本発明の第１実施形態に
係る情報処理装置の一例として、パーソナルコンピュー
タを用いた場合の構成が示されている。このパーソナル
コンピュータはノートブックタイプの携帯型のコンピュ
ータシステムであり、ビデオカメラなどから入力された
動画像信号をＭＰＥＧ２／ＭＰＥＧ４等によって圧縮符
号化することができる。
【００１２】図１のコンピュータシステムにおいては、
図示のように、ＣＰＵ１１、ホスト−ＰＣＩブリッジ１
２、主メモリ１３、表示コントローラ１４、サウンドコ
ントローラ１５、通信インターフェース１６、Ｉ／Ｏコ
ントーラ１７、ＰＣＩ−ＩＳＡブリッジ１８、カメラ２
０、ハードディスクドライブ（ＨＤＤ）２１、ＤＶＤド
ライブ２２などが設けられている。
図示のように、ＣＰＵ１１、ホスト−ＰＣＩブリッジ１
２、主メモリ１３、表示コントローラ１４、サウンドコ
ントローラ１５、通信インターフェース１６、Ｉ／Ｏコ
ントーラ１７、ＰＣＩ−ＩＳＡブリッジ１８、カメラ２
０、ハードディスクドライブ（ＨＤＤ）２１、ＤＶＤド
ライブ２２などが設けられている。
【００１３】ＣＰＵ１１は本システム全体を制御するた
めのプロセッサであり、主メモリ１３にロードされたオ
ペレーティングシステムや他の各種プログラムを実行す
る。本実施形態においては、動画像信号を圧縮符号化す
るためのプログラムとして、動画圧縮ソフトウェア１０
０が用いられる。この動画圧縮ソフトウェア１００は、
入力動画像信号からＭＰＥＧ２、ＭＰＥＧ４などの各種
圧縮形式のＡＶ（オーディオ・ビデオ）ストリームを生
成することができ、そのＡＶストリームを符号化ファイ
ルとしてストレージに記録することができる。
めのプロセッサであり、主メモリ１３にロードされたオ
ペレーティングシステムや他の各種プログラムを実行す
る。本実施形態においては、動画像信号を圧縮符号化す
るためのプログラムとして、動画圧縮ソフトウェア１０
０が用いられる。この動画圧縮ソフトウェア１００は、
入力動画像信号からＭＰＥＧ２、ＭＰＥＧ４などの各種
圧縮形式のＡＶ（オーディオ・ビデオ）ストリームを生
成することができ、そのＡＶストリームを符号化ファイ
ルとしてストレージに記録することができる。
【００１４】ホスト−ＰＣＩブリッジ１２はＣＰＵバス
１とＰＣＩバス２を接続するバスブリッジであり、ここ
には主メモリ１３を制御するためのメモリコントロール
ロジックも内蔵されている。表示コントローラ１４は本
コンピュータシステムのディスプレイモニタとして使用
されるＬＣＤや外部ＣＲＴディスプレイを制御する。入
力動画像信号を再生しながら圧縮符号化する場合には、
圧縮符号化対象の入力動画像信号が表示コントローラ１
４を通じてディスプレイモニタに表示されると共に、そ
れに同期して圧縮符号化処理が実行される。サウンドコ
ントローラ１５は音源として用いられるものであり、マ
イク１５１およびスピーカ１５２を通じて各種オーディ
オデータの入出力を行う。
１とＰＣＩバス２を接続するバスブリッジであり、ここ
には主メモリ１３を制御するためのメモリコントロール
ロジックも内蔵されている。表示コントローラ１４は本
コンピュータシステムのディスプレイモニタとして使用
されるＬＣＤや外部ＣＲＴディスプレイを制御する。入
力動画像信号を再生しながら圧縮符号化する場合には、
圧縮符号化対象の入力動画像信号が表示コントローラ１
４を通じてディスプレイモニタに表示されると共に、そ
れに同期して圧縮符号化処理が実行される。サウンドコ
ントローラ１５は音源として用いられるものであり、マ
イク１５１およびスピーカ１５２を通じて各種オーディ
オデータの入出力を行う。
【００１５】通信インターフェース１６は、たとえばＵ
ＳＢやＩＥＥＥ１３９４などのシリアルインターフェー
ス規格で外部または内蔵のビデオカメラ２０と通信する
ためのものであり、ビデオカメラ２０から動画像信号を
取り込むことができる。ビデオカメラ２０によって撮影
された動画像信号は、動画圧縮ソフトウェア１００の制
御により、ＭＰＥＧ２、ＭＰＥＧ４などの各種圧縮形式
にリアルタイムに変換した後にＩ／Ｏコントローラ１７
を介してＨＤＤ２１、ＤＶＤドライブ２２、メモリカー
ド２３などの各種記録メディアに記録することができ
る。
ＳＢやＩＥＥＥ１３９４などのシリアルインターフェー
ス規格で外部または内蔵のビデオカメラ２０と通信する
ためのものであり、ビデオカメラ２０から動画像信号を
取り込むことができる。ビデオカメラ２０によって撮影
された動画像信号は、動画圧縮ソフトウェア１００の制
御により、ＭＰＥＧ２、ＭＰＥＧ４などの各種圧縮形式
にリアルタイムに変換した後にＩ／Ｏコントローラ１７
を介してＨＤＤ２１、ＤＶＤドライブ２２、メモリカー
ド２３などの各種記録メディアに記録することができ
る。
【００１６】ＰＣＩ−ＩＳＡブリッジ１８はＰＣＩバス
２とＩＳＡバス３との間を接続するバスブリッジであ
り、ここにはリアルタイムクロック（ＲＴＣ）１８１な
どの各種システムデバイスが内蔵されている。リアルタ
イムクロック（ＲＴＣ）１８１は時計モジュールであ
り、オペレーティングシステムによる時間管理に利用さ
れる。
２とＩＳＡバス３との間を接続するバスブリッジであ
り、ここにはリアルタイムクロック（ＲＴＣ）１８１な
どの各種システムデバイスが内蔵されている。リアルタ
イムクロック（ＲＴＣ）１８１は時計モジュールであ
り、オペレーティングシステムによる時間管理に利用さ
れる。
【００１７】（動画圧縮ソフト）ここで、図２および図
３を参照して、動画圧縮ソフトウェア１００の基本機能
について説明する。
３を参照して、動画圧縮ソフトウェア１００の基本機能
について説明する。
【００１８】動画圧縮ソフトウェア１００は、カメラ２
０およびマイク１５１からそれぞれ入力される動画像信
号および音声信号に対して圧縮符号化処理を施し、それ
によって得たＡＶ符号化ファイルをＨＤＤ２１、ＤＶＤ
ドライブ２２、またはメモリカード２３などの蓄積メデ
ィアに記録することができる。図２には、ＨＤＤ２１に
ＡＶ符号化ファイル記録する場合の様子が示されてい
る。このＡＶ符号化ファイルは、動画像信号と音声信号
をそれぞれデジタル圧縮符号化した後にそれらの符号化
ビットストリームを多重化することによって生成された
ものである。
０およびマイク１５１からそれぞれ入力される動画像信
号および音声信号に対して圧縮符号化処理を施し、それ
によって得たＡＶ符号化ファイルをＨＤＤ２１、ＤＶＤ
ドライブ２２、またはメモリカード２３などの蓄積メデ
ィアに記録することができる。図２には、ＨＤＤ２１に
ＡＶ符号化ファイル記録する場合の様子が示されてい
る。このＡＶ符号化ファイルは、動画像信号と音声信号
をそれぞれデジタル圧縮符号化した後にそれらの符号化
ビットストリームを多重化することによって生成された
ものである。
【００１９】動画圧縮ソフトウェア１００は、図３に示
されているように、アプリケーションプログラム１０１
と圧縮エンジン１０２とから構成されている。アプリケ
ーションプログラム１０１は動画圧縮処理のためのユー
ザインターフェースと圧縮エンジン１０２を制御するた
めのインターフェースとを有しており、ユーザから指定
された動画像信号をキャプチャリングおよび圧縮符号化
するために必要な動作を、圧縮エンジン１０２に対して
指示する。圧縮エンジン１０２は、オペレーティングシ
ステム（ＯＳ）１０３上に実装されたマルチメディア処
理用のプラットホームであり、ファィル入出力処理や動
画／音声読み込みのためのキャプチャリング処理をはじ
めとする、動画・音声圧縮のために必要な処理を行う種
々のプログラムモジュール（フィルタ）群から構成され
ている。これらモジュールはアプリケーションプログラ
ム１０１からの指示により任意に組み合わせて用いるこ
とができる。
されているように、アプリケーションプログラム１０１
と圧縮エンジン１０２とから構成されている。アプリケ
ーションプログラム１０１は動画圧縮処理のためのユー
ザインターフェースと圧縮エンジン１０２を制御するた
めのインターフェースとを有しており、ユーザから指定
された動画像信号をキャプチャリングおよび圧縮符号化
するために必要な動作を、圧縮エンジン１０２に対して
指示する。圧縮エンジン１０２は、オペレーティングシ
ステム（ＯＳ）１０３上に実装されたマルチメディア処
理用のプラットホームであり、ファィル入出力処理や動
画／音声読み込みのためのキャプチャリング処理をはじ
めとする、動画・音声圧縮のために必要な処理を行う種
々のプログラムモジュール（フィルタ）群から構成され
ている。これらモジュールはアプリケーションプログラ
ム１０１からの指示により任意に組み合わせて用いるこ
とができる。
【００２０】（圧縮エンジン）次に、図４を参照して、
圧縮エンジン１０２の機能構成を説明する。圧縮エンジ
ン１０２は、図示のように、マネージャ３０１、カメラ
キャプチャ３０２、オーディオキャプチャ３０３、ビデ
オエンコーダ３０４、オーディオエンコーダ３０５、マ
ルチプレクサ３０６、及びファイルライタ３０７によっ
て実現される。カメラキャプチャ３０２、オーディオキ
ャプチャ３０３、ビデオエンコーダ３０４、オーディオ
エンコーダ３０５、マルチプレクサ３０６、及びファイ
ルライタ３０７の動作は、マネージャ３０１によって管
理される。
圧縮エンジン１０２の機能構成を説明する。圧縮エンジ
ン１０２は、図示のように、マネージャ３０１、カメラ
キャプチャ３０２、オーディオキャプチャ３０３、ビデ
オエンコーダ３０４、オーディオエンコーダ３０５、マ
ルチプレクサ３０６、及びファイルライタ３０７によっ
て実現される。カメラキャプチャ３０２、オーディオキ
ャプチャ３０３、ビデオエンコーダ３０４、オーディオ
エンコーダ３０５、マルチプレクサ３０６、及びファイ
ルライタ３０７の動作は、マネージャ３０１によって管
理される。
【００２１】まず、カメラキャプチャ３０２およびオー
ディオキャプチャ３０３により、圧縮符号化対象の動画
像信号及び音声信号がカメラ２０およびマイク１５１か
らそれぞれ取り込まれる。カメラキャプチャ３０２によ
ってキャプチャリングされた動画像信号はビデオエンコ
ーダ３０４に送られ、そこでキャプチャリングと並行し
てリアルタイムに動画像の圧縮符号化処理が実行され
る。また、オーディオキャプチャ３０３によってキャプ
チャリングされた音声信号はオーディオエンコーダ３０
５に送られ、そこでリアルタイムに音声の圧縮符号化処
理が行われる。
ディオキャプチャ３０３により、圧縮符号化対象の動画
像信号及び音声信号がカメラ２０およびマイク１５１か
らそれぞれ取り込まれる。カメラキャプチャ３０２によ
ってキャプチャリングされた動画像信号はビデオエンコ
ーダ３０４に送られ、そこでキャプチャリングと並行し
てリアルタイムに動画像の圧縮符号化処理が実行され
る。また、オーディオキャプチャ３０３によってキャプ
チャリングされた音声信号はオーディオエンコーダ３０
５に送られ、そこでリアルタイムに音声の圧縮符号化処
理が行われる。
【００２２】動画像の圧縮符号化処理では、動きベクト
ル検出（ＭＥ）が行われる。動きベクトル検出（ＭＥ）
では、入力フレーム内の各注目ブロック毎に参照フレー
ムの中から最も近似するブロックを探索するというブロ
ック探索処理が行われる。探索されたブロックと注目ブ
ロックとの空間的なずれ量が動きベクトルとして求めら
れる。そして、この動きベクトルを基に参照フレームか
ら入力フレームの画像が予測され、その予測画像と入力
画像との誤差信号が求められる。この誤差信号に対して
は、離散コサイン変換（ＤＣＴ）、量子化、および可変
長符号化処理が施され、これによって符号化ビットスト
リームが生成される。また、量子化されたブロックに対
しては逆量子化、逆ＤＣＴが施され、これによりフレー
ム間予測符号化のための参照フレームが生成される。
ル検出（ＭＥ）が行われる。動きベクトル検出（ＭＥ）
では、入力フレーム内の各注目ブロック毎に参照フレー
ムの中から最も近似するブロックを探索するというブロ
ック探索処理が行われる。探索されたブロックと注目ブ
ロックとの空間的なずれ量が動きベクトルとして求めら
れる。そして、この動きベクトルを基に参照フレームか
ら入力フレームの画像が予測され、その予測画像と入力
画像との誤差信号が求められる。この誤差信号に対して
は、離散コサイン変換（ＤＣＴ）、量子化、および可変
長符号化処理が施され、これによって符号化ビットスト
リームが生成される。また、量子化されたブロックに対
しては逆量子化、逆ＤＣＴが施され、これによりフレー
ム間予測符号化のための参照フレームが生成される。
【００２３】ビデオエンコーダ３０４によって得られた
動画像の符号化ビットストリーム、およびオーディオエ
ンコーダ３０５によって得られた音声信号の符号化ビッ
トストリームは、マルチプレクサ３０６に送られ、そこ
で多重化される。この多重化された符号化ビットストリ
ームはファイルライタ３０７に送られ、そこで所定のＡ
Ｖ符号化ファイルの形式に変換された後にＨＤＤ２１等
に書き込まれる。
動画像の符号化ビットストリーム、およびオーディオエ
ンコーダ３０５によって得られた音声信号の符号化ビッ
トストリームは、マルチプレクサ３０６に送られ、そこ
で多重化される。この多重化された符号化ビットストリ
ームはファイルライタ３０７に送られ、そこで所定のＡ
Ｖ符号化ファイルの形式に変換された後にＨＤＤ２１等
に書き込まれる。
【００２４】（ビデオエンコーダ）次に、図５を参照し
て、ビデオエンコーダ３０４の構成を説明する。ビデオ
エンコーダ３０４は、図示のように、入力モジュール５
０１、エンコードモジュール５０２、出力モジュール５
０３、およびコントロールモジュール５０４から構成さ
れている。
て、ビデオエンコーダ３０４の構成を説明する。ビデオ
エンコーダ３０４は、図示のように、入力モジュール５
０１、エンコードモジュール５０２、出力モジュール５
０３、およびコントロールモジュール５０４から構成さ
れている。
【００２５】入力モジュール５０１はカメラキャプチャ
３０２を介して動画像信号を入力する。エンコードモジ
ュール５０２は入力モジュール５０１によって入力され
た動画像信号に対して圧縮符号化処理を施すための機能
モジュールであり、コントロールモジュール５０４の制
御の下に入力フレームに対して圧縮符号化処理を行い、
その圧縮符号化処理の結果をコントロールモジュール５
０４に返す。出力モジュール５０３は、エンコードモジ
ュール５０２によって得られた符号化ビットストリーム
を前述のマルチプレクサ３０６に出力する。
３０２を介して動画像信号を入力する。エンコードモジ
ュール５０２は入力モジュール５０１によって入力され
た動画像信号に対して圧縮符号化処理を施すための機能
モジュールであり、コントロールモジュール５０４の制
御の下に入力フレームに対して圧縮符号化処理を行い、
その圧縮符号化処理の結果をコントロールモジュール５
０４に返す。出力モジュール５０３は、エンコードモジ
ュール５０２によって得られた符号化ビットストリーム
を前述のマルチプレクサ３０６に出力する。
【００２６】コントロールモジュール５０４は、ビデオ
エンコーダ４０４内の各モジュールの動作を制御するた
めのものであり、入力フレーム毎にエンコードモジュー
ル５０２をコールして、その入力フレームに対する圧縮
符号化処理をエンコードモジュール５０２に実行させ
る。このコントロールモジュール５０４には、エンコー
ドモジュール５０２による圧縮符号化処理の処理状況を
管理する機能が設けられており、指定された目標フレー
ムレートが少なくとも維持されるように、エンコードモ
ジュール５０２の圧縮符号化処理の処理状況に基づいて
そのエンコードモジュール５０２に実行させる圧縮符号
化処理の処理内容が最適化される。圧縮符号化処理の処
理内容の制御は、エンコードモジュール５０２をコール
するときににそのエンコードモジュール５０２に渡す符
号化オプションのパラメタを変えることによって行われ
る。
エンコーダ４０４内の各モジュールの動作を制御するた
めのものであり、入力フレーム毎にエンコードモジュー
ル５０２をコールして、その入力フレームに対する圧縮
符号化処理をエンコードモジュール５０２に実行させ
る。このコントロールモジュール５０４には、エンコー
ドモジュール５０２による圧縮符号化処理の処理状況を
管理する機能が設けられており、指定された目標フレー
ムレートが少なくとも維持されるように、エンコードモ
ジュール５０２の圧縮符号化処理の処理状況に基づいて
そのエンコードモジュール５０２に実行させる圧縮符号
化処理の処理内容が最適化される。圧縮符号化処理の処
理内容の制御は、エンコードモジュール５０２をコール
するときににそのエンコードモジュール５０２に渡す符
号化オプションのパラメタを変えることによって行われ
る。
【００２７】コントロールモジュール５０４は、ＣＰＵ
負荷検出モジュール６０１、目標フレームレート６０
２、状態変数（Ｘ）６０３を有している。ＣＰＵ負荷検
出モジュール６０１は、エンコードモジュール５０２が
圧縮符号化処理に要した時間に基づいて現在のＣＰＵ１
１の負荷状況を検出する。すなわち、ＣＰＵ負荷検出モ
ジュール６０１は、エンコードモジュール５０２のコー
ルからリターンまでの経過時間Ｔ（＝圧縮符号化処理の
処理時間）を常に監視しており、その経過時間Ｔと、ア
プリケーションプログラム１０１を通じてユーザにより
指定される目標フレームレート６０２の値とに基づいて
圧縮符号化処理の進捗状況、つまり現在のＣＰＵ１１の
負荷状況を判断する。
負荷検出モジュール６０１、目標フレームレート６０
２、状態変数（Ｘ）６０３を有している。ＣＰＵ負荷検
出モジュール６０１は、エンコードモジュール５０２が
圧縮符号化処理に要した時間に基づいて現在のＣＰＵ１
１の負荷状況を検出する。すなわち、ＣＰＵ負荷検出モ
ジュール６０１は、エンコードモジュール５０２のコー
ルからリターンまでの経過時間Ｔ（＝圧縮符号化処理の
処理時間）を常に監視しており、その経過時間Ｔと、ア
プリケーションプログラム１０１を通じてユーザにより
指定される目標フレームレート６０２の値とに基づいて
圧縮符号化処理の進捗状況、つまり現在のＣＰＵ１１の
負荷状況を判断する。
【００２８】現在のＣＰＵ１１の負荷が比較的高く、目
標フレームレート６０２の値に対して圧縮符号化処理に
遅れが生じている場合には、状態変数（Ｘ）６０３の値
が増分される。逆に、現在のＣＰＵ１１の負荷が比較的
低く、圧縮符号化処理に対してより多くのＣＰＵ資源を
割り当てることが可能な場合には、状態変数（Ｘ）６０
３の値が減分される。この状態変数（Ｘ）６０３の値に
基づき、エンコードモジュール５０２に対して指定すべ
き符号化オプションのパラメタが決定される。
標フレームレート６０２の値に対して圧縮符号化処理に
遅れが生じている場合には、状態変数（Ｘ）６０３の値
が増分される。逆に、現在のＣＰＵ１１の負荷が比較的
低く、圧縮符号化処理に対してより多くのＣＰＵ資源を
割り当てることが可能な場合には、状態変数（Ｘ）６０
３の値が減分される。この状態変数（Ｘ）６０３の値に
基づき、エンコードモジュール５０２に対して指定すべ
き符号化オプションのパラメタが決定される。
【００２９】（画像圧縮制御処理）次に、図６のフロー
チャートを参照して、ビデオエンコーダ３０４によって
行われる動画像圧縮制御の全体の流れについて説明す
る。
チャートを参照して、ビデオエンコーダ３０４によって
行われる動画像圧縮制御の全体の流れについて説明す
る。
【００３０】コントロールモジュール５０４は、エンコ
ードモジュール５０２に入力フレームの圧縮符号化処理
を実行させる前に、まず、処理開始時刻（現在時刻）を
オペレーティングシステム１０３から取得する（ステッ
プＳ２２１）。次いで、コントロールモジュール５０４
は、エンコードモジュール５０２をコールして、現在の
入力フレームに対する圧縮符号化処理を実行させる（ス
テップＳ２２２）。エンコードモジュール５０２による
１フレーム分の圧縮符号化処理が終了すると、エンコー
ドモジュール５０２からコントロールモジュール５０４
に制御が戻される。コントロールモジュール５０４は、
このときの処理終了時刻をオペレーティングシステム１
０３から取得して、処理開始時刻との差をとることによ
って圧縮処理時間（Ｔ）を算出する（ステップＳ２２
３）。
ードモジュール５０２に入力フレームの圧縮符号化処理
を実行させる前に、まず、処理開始時刻（現在時刻）を
オペレーティングシステム１０３から取得する（ステッ
プＳ２２１）。次いで、コントロールモジュール５０４
は、エンコードモジュール５０２をコールして、現在の
入力フレームに対する圧縮符号化処理を実行させる（ス
テップＳ２２２）。エンコードモジュール５０２による
１フレーム分の圧縮符号化処理が終了すると、エンコー
ドモジュール５０２からコントロールモジュール５０４
に制御が戻される。コントロールモジュール５０４は、
このときの処理終了時刻をオペレーティングシステム１
０３から取得して、処理開始時刻との差をとることによ
って圧縮処理時間（Ｔ）を算出する（ステップＳ２２
３）。
【００３１】次いで、コントロールモジュール５０４
は、圧縮処理時間（Ｔ）と目標フレームレート６０２の
値とを比較することによって、圧縮符号化処理の処理状
況を判断する（ステップＳ２２４）。圧縮処理時間
（Ｔ）の値が目標フレームレート６０２で指定されるフ
レーム時間間隔よりも大きい場合、つまり圧縮符号化処
理が遅れている場合には、コントロールモジュール５０
４は、状態変数（Ｘ）６０３の値を＋１更新する（ステ
ップＳ２２５）。一方、圧縮処理時間（Ｔ）の値が目標
フレームレート６０２で指定されるフレーム時間間隔を
下回った場合、つまりＣＰＵ１１に余裕がある場合に
は、コントロールモジュール５０４は、状態変数（Ｘ）
６０３の値を−１更新する（ステップＳ２２５）。圧縮
処理時間（Ｔ）の値が目標フレームレート６０２で指定
されるフレーム時間間隔と等しい場合には、状態変数
（Ｘ）６０３の更新は行われない。
は、圧縮処理時間（Ｔ）と目標フレームレート６０２の
値とを比較することによって、圧縮符号化処理の処理状
況を判断する（ステップＳ２２４）。圧縮処理時間
（Ｔ）の値が目標フレームレート６０２で指定されるフ
レーム時間間隔よりも大きい場合、つまり圧縮符号化処
理が遅れている場合には、コントロールモジュール５０
４は、状態変数（Ｘ）６０３の値を＋１更新する（ステ
ップＳ２２５）。一方、圧縮処理時間（Ｔ）の値が目標
フレームレート６０２で指定されるフレーム時間間隔を
下回った場合、つまりＣＰＵ１１に余裕がある場合に
は、コントロールモジュール５０４は、状態変数（Ｘ）
６０３の値を−１更新する（ステップＳ２２５）。圧縮
処理時間（Ｔ）の値が目標フレームレート６０２で指定
されるフレーム時間間隔と等しい場合には、状態変数
（Ｘ）６０３の更新は行われない。
【００３２】（画像データ圧縮処理）次に、図７のフロ
ーチャートを参照して、エンコードモジュール５０２に
よって行われる圧縮符号化処理の流れについて説明す
る。
ーチャートを参照して、エンコードモジュール５０２に
よって行われる圧縮符号化処理の流れについて説明す
る。
【００３３】まず、入力フレームから圧縮対象のブロッ
クを抽出する処理や、探索対象となる参照フレームを準
備する処理などが探索前処理として実行される（ステッ
プＳ２５１）。次いで、動きベクトル検出処理が開始さ
れるが、この場合、ブロック探索すべき範囲は現在の状
態変数（Ｘ）６０３の値に基づいて可変制御される（ス
テップＳ２５２〜Ｓ２５５）。この様子を図８に示す。
つまり、 １） 状態変数（Ｘ）６０３の値が０よりも大きい場合
には、ＣＰＵ負荷を軽減するために、通常よりも狭い探
索範囲Ｅnがコントロールモジュール５０４によって指
定され、それに基づいてブロック探索処理が行われる ２） 状態変数（Ｘ）６０３の値が０である場合には、
通常の探索範囲Ｅがコントロールモジュール５０４によ
って指定され、それに基づいてブロック探索処理が行わ
れる ３） 状態変数（Ｘ）６０３の値が０よりも小さい場合
には、符号化効率を高めるために、通常よりも広い探索
範囲Ｅwがコントロールモジュール５０４によって指定
され、それに基づいてブロック探索処理が行われる。
クを抽出する処理や、探索対象となる参照フレームを準
備する処理などが探索前処理として実行される（ステッ
プＳ２５１）。次いで、動きベクトル検出処理が開始さ
れるが、この場合、ブロック探索すべき範囲は現在の状
態変数（Ｘ）６０３の値に基づいて可変制御される（ス
テップＳ２５２〜Ｓ２５５）。この様子を図８に示す。
つまり、 １） 状態変数（Ｘ）６０３の値が０よりも大きい場合
には、ＣＰＵ負荷を軽減するために、通常よりも狭い探
索範囲Ｅnがコントロールモジュール５０４によって指
定され、それに基づいてブロック探索処理が行われる ２） 状態変数（Ｘ）６０３の値が０である場合には、
通常の探索範囲Ｅがコントロールモジュール５０４によ
って指定され、それに基づいてブロック探索処理が行わ
れる ３） 状態変数（Ｘ）６０３の値が０よりも小さい場合
には、符号化効率を高めるために、通常よりも広い探索
範囲Ｅwがコントロールモジュール５０４によって指定
され、それに基づいてブロック探索処理が行われる。
【００３４】このようブロック探索によって動きベクト
ルが検出され、そしてその動きベクトルを基に参照フレ
ームから入力フレームの画像が予測され、その予測画像
と入力画像との誤差信号が求められる。そして、この誤
差信号に対して、離散コサイン変換（ＤＣＴ）、量子
化、および可変長符号化処理が施される（ステップＳ２
５６）。
ルが検出され、そしてその動きベクトルを基に参照フレ
ームから入力フレームの画像が予測され、その予測画像
と入力画像との誤差信号が求められる。そして、この誤
差信号に対して、離散コサイン変換（ＤＣＴ）、量子
化、および可変長符号化処理が施される（ステップＳ２
５６）。
【００３５】なお、このような探索範囲の可変制御のみ
ならず、その代わりに、それに加えて、ブロックツリー
探索や、１ラインスキップによる探索などを利用するこ
ともできる。「ブロックツリー探索」では、図９（Ａ）
に示すように、まず、探索範囲内の全ブロックをいくつ
かのグループに分け、入力フレーム内の注目ブロックと
の比較を各グループの代表ブロック（二重丸で示す）に
関してのみ求められる。次いで、最も類似する代表ブロ
ックを含むグループ内の他のブロック（白丸で図示）と
の比較が行われることにより、注目ブロックに最も類似
するブロックが決定される。これにより、比較対象のブ
ロック数を削減でき、処理の軽減を図ることができる。
「１ラインスキップ」は隣接する縦方向の２ラインの画
素同士の高類似性を利用して、図９（Ｂ）に示すよう
に、ブロック間の画素比較を１ライン飛ばしで行うとい
うものである。これにより、比較のための演算処理量を
削減できる。
ならず、その代わりに、それに加えて、ブロックツリー
探索や、１ラインスキップによる探索などを利用するこ
ともできる。「ブロックツリー探索」では、図９（Ａ）
に示すように、まず、探索範囲内の全ブロックをいくつ
かのグループに分け、入力フレーム内の注目ブロックと
の比較を各グループの代表ブロック（二重丸で示す）に
関してのみ求められる。次いで、最も類似する代表ブロ
ックを含むグループ内の他のブロック（白丸で図示）と
の比較が行われることにより、注目ブロックに最も類似
するブロックが決定される。これにより、比較対象のブ
ロック数を削減でき、処理の軽減を図ることができる。
「１ラインスキップ」は隣接する縦方向の２ラインの画
素同士の高類似性を利用して、図９（Ｂ）に示すよう
に、ブロック間の画素比較を１ライン飛ばしで行うとい
うものである。これにより、比較のための演算処理量を
削減できる。
【００３６】例えば、状態変数（Ｘ）６０３の値が１の
場合には、通常よりも狭い探索範囲ＥＮを指定し、状態
変数（Ｘ）６０３の値が２の場合には、通常よりも狭い
探索範囲ＥＮを指定するのに加え、ブロックツリー探索
および１ラインスキップによる探索のいずれか一方を指
定し、さらに状態変数（Ｘ）６０３の値が３の場合に
は、通常よりも狭い探索範囲ＥＮを指定するのに加え、
ブロックツリー探索および１ラインスキップによる探索
の双方を指定することなどにより、遅れ量に応じて演算
処理量を段階的に削減することもできる。
場合には、通常よりも狭い探索範囲ＥＮを指定し、状態
変数（Ｘ）６０３の値が２の場合には、通常よりも狭い
探索範囲ＥＮを指定するのに加え、ブロックツリー探索
および１ラインスキップによる探索のいずれか一方を指
定し、さらに状態変数（Ｘ）６０３の値が３の場合に
は、通常よりも狭い探索範囲ＥＮを指定するのに加え、
ブロックツリー探索および１ラインスキップによる探索
の双方を指定することなどにより、遅れ量に応じて演算
処理量を段階的に削減することもできる。
【００３７】（画像圧縮制御処理＃２）次に、図１０の
フローチャートを参照して、ビデオエンコーダ３０４に
よって行われる動画像圧縮制御の第２の例について説明
する。ここでは、状態変数（Ｘ）６０３は“０”と
“１”の２値によって管理される。
フローチャートを参照して、ビデオエンコーダ３０４に
よって行われる動画像圧縮制御の第２の例について説明
する。ここでは、状態変数（Ｘ）６０３は“０”と
“１”の２値によって管理される。
【００３８】コントロールモジュール５０４は、エンコ
ードモジュール５０２に入力フレームの圧縮符号化処理
を実行させる前に、まず、処理開始時刻（現在時刻）を
オペレーティングシステム１０３から取得する（ステッ
プＳ２３１）。次いで、コントロールモジュール５０４
は、エンコードモジュール５０２をコールして、現在の
入力フレームに対する圧縮符号化処理を実行させる（ス
テップＳ２３２）。エンコードモジュール５０２による
１フレーム分の圧縮符号化処理が終了すると、エンコー
ドモジュール５０２からコントロールモジュール５０４
に制御が戻される。コントロールモジュール５０４は、
このときの処理終了時刻をオペレーティングシステム１
０３から取得して、処理開始時刻との差をとることによ
って圧縮処理時間（Ｔ）を算出する（ステップＳ２３
３）。
ードモジュール５０２に入力フレームの圧縮符号化処理
を実行させる前に、まず、処理開始時刻（現在時刻）を
オペレーティングシステム１０３から取得する（ステッ
プＳ２３１）。次いで、コントロールモジュール５０４
は、エンコードモジュール５０２をコールして、現在の
入力フレームに対する圧縮符号化処理を実行させる（ス
テップＳ２３２）。エンコードモジュール５０２による
１フレーム分の圧縮符号化処理が終了すると、エンコー
ドモジュール５０２からコントロールモジュール５０４
に制御が戻される。コントロールモジュール５０４は、
このときの処理終了時刻をオペレーティングシステム１
０３から取得して、処理開始時刻との差をとることによ
って圧縮処理時間（Ｔ）を算出する（ステップＳ２３
３）。
【００３９】次いで、コントロールモジュール５０４
は、圧縮処理時間（Ｔ）と目標フレームレート６０２の
値とを比較することによって、圧縮符号化処理の処理状
況を判断する（ステップＳ２３４）。圧縮処理時間
（Ｔ）の値が目標フレームレート６０２で指定されるフ
レーム時間間隔よりも大きい場合、つまり圧縮符号化処
理が遅れている場合には、コントロールモジュール５０
４は、状態変数（Ｘ）６０３の値を“１”に設定する
（ステップＳ２３５）。一方、圧縮処理時間（Ｔ）の値
が目標フレームレート６０２で指定されるフレーム時間
間隔と同じ又は下回った場合には、コントロールモジュ
ール５０４は、状態変数（Ｘ）６０３の値を“０”に設
定する（ステップＳ２２５）。
は、圧縮処理時間（Ｔ）と目標フレームレート６０２の
値とを比較することによって、圧縮符号化処理の処理状
況を判断する（ステップＳ２３４）。圧縮処理時間
（Ｔ）の値が目標フレームレート６０２で指定されるフ
レーム時間間隔よりも大きい場合、つまり圧縮符号化処
理が遅れている場合には、コントロールモジュール５０
４は、状態変数（Ｘ）６０３の値を“１”に設定する
（ステップＳ２３５）。一方、圧縮処理時間（Ｔ）の値
が目標フレームレート６０２で指定されるフレーム時間
間隔と同じ又は下回った場合には、コントロールモジュ
ール５０４は、状態変数（Ｘ）６０３の値を“０”に設
定する（ステップＳ２２５）。
【００４０】（画像データ圧縮処理＃２）次に、図１１
のフローチャートを参照して、図１０の状態変数管理に
対応する圧縮符号化処理の制御について説明する。ま
ず、入力フレームから圧縮対象のブロックを抽出する処
理や、探索対象となる参照フレームを準備する処理など
が探索前処理として実行された後、通常のブロック探索
処理が整数画素精度で行われる（ステップＳ２６１）。
次いで、参照フレーム内の各画素間を一対一で直線補間
する処理を伴う０．５画素精度での高精度のブロック探
索（半画素探索）が開始されるが、この場合、半画素探
索の実行はオプションとして指定され、状態変数（Ｘ）
６０３の値に基づいて実行又はスキップされる。
のフローチャートを参照して、図１０の状態変数管理に
対応する圧縮符号化処理の制御について説明する。ま
ず、入力フレームから圧縮対象のブロックを抽出する処
理や、探索対象となる参照フレームを準備する処理など
が探索前処理として実行された後、通常のブロック探索
処理が整数画素精度で行われる（ステップＳ２６１）。
次いで、参照フレーム内の各画素間を一対一で直線補間
する処理を伴う０．５画素精度での高精度のブロック探
索（半画素探索）が開始されるが、この場合、半画素探
索の実行はオプションとして指定され、状態変数（Ｘ）
６０３の値に基づいて実行又はスキップされる。
【００４１】つまり、状態変数（Ｘ）６０３の値が
“０”であれば（ステップＳ２６２のＹＥＳ）、半画素
探索処理が実行され（ステップＳ２６３）、それによっ
て高精度の動きベクトル検出が行われる。一方、状態変
数（Ｘ）６０３の値が“１”であれば（ステップＳ２６
２のＮＯ）、半画素探索処理はスキップされ、整数画素
精度で行われたステップＳ２６１のブロック探索結果に
基づいて動きベクトルが検出される。
“０”であれば（ステップＳ２６２のＹＥＳ）、半画素
探索処理が実行され（ステップＳ２６３）、それによっ
て高精度の動きベクトル検出が行われる。一方、状態変
数（Ｘ）６０３の値が“１”であれば（ステップＳ２６
２のＮＯ）、半画素探索処理はスキップされ、整数画素
精度で行われたステップＳ２６１のブロック探索結果に
基づいて動きベクトルが検出される。
【００４２】そしてこの後、検出された動きベクトルを
基に参照フレームから入力フレームの画像が予測され、
その予測画像と入力画像との誤差信号が求められる。そ
して、この誤差信号に対して、離散コサイン変換（ＤＣ
Ｔ）、量子化、および可変長符号化処理が施される（ス
テップＳ２６４）。
基に参照フレームから入力フレームの画像が予測され、
その予測画像と入力画像との誤差信号が求められる。そ
して、この誤差信号に対して、離散コサイン変換（ＤＣ
Ｔ）、量子化、および可変長符号化処理が施される（ス
テップＳ２６４）。
【００４３】（ビデオエンコーダ＃２）次に、本発明の
第２実施形態について説明する。本第２実施形態は、第
１実施形態に比しビデオエンコーダ３０４の構成だけが
異なっており他の点は第１実施形態と同じである。
第２実施形態について説明する。本第２実施形態は、第
１実施形態に比しビデオエンコーダ３０４の構成だけが
異なっており他の点は第１実施形態と同じである。
【００４４】図１２には、本第２実施形態で用いられる
ビデオエンコーダ３０４の構成が示されている。ビデオ
エンコーダ３０４は、図示のように、入力モジュール７
０１、プレフィルタモジュール７０２、エンコードモジ
ュール７０３、出力モジュール７０４、およびコントロ
ールモジュール７０５から構成されている。
ビデオエンコーダ３０４の構成が示されている。ビデオ
エンコーダ３０４は、図示のように、入力モジュール７
０１、プレフィルタモジュール７０２、エンコードモジ
ュール７０３、出力モジュール７０４、およびコントロ
ールモジュール７０５から構成されている。
【００４５】入力モジュール７０１は図５の入力モジュ
ール５０１に相当するものであり、カメラキャプチャ３
０２によって取り込まれた動画像信号を入力する。プレ
フィルタモジュール７０２は、コントロールモジュール
７０５の制御の下に入力フレームに対してノイズ除去等
の画質改善のために平滑化フィルタ処理（高域カット）
を行い、フィルタ処理後の入力フレームをコントロール
モジュール７０５に返す。フィルタの種類（ＩＩＲフィ
ルタ、ＦＩＲフィルタ）の切り換え、およびフィルタパ
ラメータの設定により、処理速度やフィルタ強度の異な
る様々なフィルタ処理を圧縮符号化対象の入力フレーム
に対して施すことができる。
ール５０１に相当するものであり、カメラキャプチャ３
０２によって取り込まれた動画像信号を入力する。プレ
フィルタモジュール７０２は、コントロールモジュール
７０５の制御の下に入力フレームに対してノイズ除去等
の画質改善のために平滑化フィルタ処理（高域カット）
を行い、フィルタ処理後の入力フレームをコントロール
モジュール７０５に返す。フィルタの種類（ＩＩＲフィ
ルタ、ＦＩＲフィルタ）の切り換え、およびフィルタパ
ラメータの設定により、処理速度やフィルタ強度の異な
る様々なフィルタ処理を圧縮符号化対象の入力フレーム
に対して施すことができる。
【００４６】エンコードモジュール７０３は図５のエン
コードモジュールに相当するものであり、コントロール
モジュール７０５の制御の下に入力フレームに対して圧
縮符号化処理を行い、その圧縮符号化処理の結果をコン
トロールモジュール７０５に返す。出力モジュール７０
４は、図５の出力モジュール５０３に対応するものであ
り、エンコードモジュール７０３によって得られた符号
化ビットストリームを前述のマルチプレクサ３０６に出
力する。
コードモジュールに相当するものであり、コントロール
モジュール７０５の制御の下に入力フレームに対して圧
縮符号化処理を行い、その圧縮符号化処理の結果をコン
トロールモジュール７０５に返す。出力モジュール７０
４は、図５の出力モジュール５０３に対応するものであ
り、エンコードモジュール７０３によって得られた符号
化ビットストリームを前述のマルチプレクサ３０６に出
力する。
【００４７】コントロールモジュール７０５は、図５の
コントロールモジュール５０４に対応するものである。
このコントロールモジュール７０５には、エンコードモ
ジュール７０３による圧縮符号化処理の処理状況を管理
する機能に加え、プレフィルタモジュール７０２による
フィルタ処理の処理状況を管理する機能が設けられてお
り、指定された目標フレームレートが少なくとも維持さ
れるように、フィルタ処理の最適化制御が行われる。
コントロールモジュール５０４に対応するものである。
このコントロールモジュール７０５には、エンコードモ
ジュール７０３による圧縮符号化処理の処理状況を管理
する機能に加え、プレフィルタモジュール７０２による
フィルタ処理の処理状況を管理する機能が設けられてお
り、指定された目標フレームレートが少なくとも維持さ
れるように、フィルタ処理の最適化制御が行われる。
【００４８】コントロールモジュール７０５は、ＣＰＵ
負荷検出モジュール８０１、目標フレームレート８０
２、および２つの状態変数（Ｘ，Ｙ）８０３を有してい
る。ＣＰＵ負荷検出モジュール８０１は、プレフィルタ
モジュール７０２のフィルタ処理に要した時間を検出す
るための処理時間モニタ機能と、エンコードモジュール
７０３の圧縮符号化処理に要した時間を検出するための
処理時間モニタ機能とを有しており、それら処理時間モ
ニタ機能を用いて現在のＣＰＵ１１の負荷状況を検出す
る。すなわち、ＣＰＵ負荷検出モジュール８０１は、プ
レフィルタモジュール７０２のコールからリターンまで
の経過時間ｔ１（＝フィルタ処理の処理時間）と、エン
コードモジュール７０３のコールからリターンまでの経
過時間ｔ２（＝圧縮符号化処理の処理時間）とを常に監
視しており、フィルタ処理および圧縮符号化処理のそれ
ぞれについて個別に処理状況を管理する。フィルタ処理
の処理状況は状態変数Ｙによって管理され、また圧縮符
号化処理の処理状況は第１実施形態と同様の方法により
状態変数Ｘによって管理される。
負荷検出モジュール８０１、目標フレームレート８０
２、および２つの状態変数（Ｘ，Ｙ）８０３を有してい
る。ＣＰＵ負荷検出モジュール８０１は、プレフィルタ
モジュール７０２のフィルタ処理に要した時間を検出す
るための処理時間モニタ機能と、エンコードモジュール
７０３の圧縮符号化処理に要した時間を検出するための
処理時間モニタ機能とを有しており、それら処理時間モ
ニタ機能を用いて現在のＣＰＵ１１の負荷状況を検出す
る。すなわち、ＣＰＵ負荷検出モジュール８０１は、プ
レフィルタモジュール７０２のコールからリターンまで
の経過時間ｔ１（＝フィルタ処理の処理時間）と、エン
コードモジュール７０３のコールからリターンまでの経
過時間ｔ２（＝圧縮符号化処理の処理時間）とを常に監
視しており、フィルタ処理および圧縮符号化処理のそれ
ぞれについて個別に処理状況を管理する。フィルタ処理
の処理状況は状態変数Ｙによって管理され、また圧縮符
号化処理の処理状況は第１実施形態と同様の方法により
状態変数Ｘによって管理される。
【００４９】状態変数Ｙとしては、例えば“０”と
“１”の２値の変数が用いられる。状態変数Ｙ＝“１”
のときは通常通りのフィルタ処理が実行されるが、状態
変数Ｙ＝“０”のときは演算処理量の少ないフィルタ処
理への切り替え、あるいはフィルタ処理のスキップが行
われる。
“１”の２値の変数が用いられる。状態変数Ｙ＝“１”
のときは通常通りのフィルタ処理が実行されるが、状態
変数Ｙ＝“０”のときは演算処理量の少ないフィルタ処
理への切り替え、あるいはフィルタ処理のスキップが行
われる。
【００５０】以下、図１３のフローチャートを参照し
て、図１２のビデオエンコーダ３０４の動作について説
明する。ここでは、状態変数Ｙ＝“０”のときにフィル
タ処理をスキップさせる場合を例示して説明することに
する。
て、図１２のビデオエンコーダ３０４の動作について説
明する。ここでは、状態変数Ｙ＝“０”のときにフィル
タ処理をスキップさせる場合を例示して説明することに
する。
【００５１】まず、コントローラモジュール７０５はま
ず現在の状態変数Ｙを参照し、状態変数Ｙが“０”であ
るか“１”であるかを判断する（ステップＳ３０１）。
状態変数Ｙ＝“０”の場合には、フィルタ処理はスキッ
プされ、エンコードモジュール７０３によるエンコード
処理（ステップＳ３０８）に移行する。一方、状態変数
Ｙ＝“１”の場合には、以下のようなフィルタ処理制御
が実行される。
ず現在の状態変数Ｙを参照し、状態変数Ｙが“０”であ
るか“１”であるかを判断する（ステップＳ３０１）。
状態変数Ｙ＝“０”の場合には、フィルタ処理はスキッ
プされ、エンコードモジュール７０３によるエンコード
処理（ステップＳ３０８）に移行する。一方、状態変数
Ｙ＝“１”の場合には、以下のようなフィルタ処理制御
が実行される。
【００５２】すなわち、コントロールモジュール７０５
は、プレフィルタモジュール７０２に入力フレームのフ
ィルタ処理を実行させる前に、まず、処理開始時刻（現
在時刻）をオペレーティングシステム１０３から取得す
る（ステップＳ３０２）。次いで、コントロールモジュ
ール７０５は、プレフィルタモジュール７０２をコール
して、現在の入力フレームに対するフィルタ処理を実行
させる（ステップＳ３０３）。プレフィルタモジュール
７０２による１フレーム分のフィルタ処理が終了する
と、プレフィルタモジュール７０２からコントロールモ
ジュール７０５に制御が戻される。コントロールモジュ
ール７０５は、このときの処理終了時刻をオペレーティ
ングシステム１０３から取得して、処理開始時刻との差
をとることによってフィルタ処理時間（ｔ１）を算出す
る（ステップＳ３０４）。
は、プレフィルタモジュール７０２に入力フレームのフ
ィルタ処理を実行させる前に、まず、処理開始時刻（現
在時刻）をオペレーティングシステム１０３から取得す
る（ステップＳ３０２）。次いで、コントロールモジュ
ール７０５は、プレフィルタモジュール７０２をコール
して、現在の入力フレームに対するフィルタ処理を実行
させる（ステップＳ３０３）。プレフィルタモジュール
７０２による１フレーム分のフィルタ処理が終了する
と、プレフィルタモジュール７０２からコントロールモ
ジュール７０５に制御が戻される。コントロールモジュ
ール７０５は、このときの処理終了時刻をオペレーティ
ングシステム１０３から取得して、処理開始時刻との差
をとることによってフィルタ処理時間（ｔ１）を算出す
る（ステップＳ３０４）。
【００５３】次いで、コントロールモジュール７０５
は、算出したフィルタ処理時間ｔ１と通常の圧縮符号化
処理時間ｔ２とを考慮することにより、動画圧縮全体に
要する時間Ｔ（＝ｔ１＋ｔ２）が目標フレームレート８
０２のフレーム時間間隔内に収まるか否かを判断する
（ステップＳ３０５）。フレーム時間間隔内に収まる場
合にはコントロールモジュール７０５は状態変数Ｙを
“１”に維持するが（ステップＳ３０６）、もしフィル
タ処理に多くの時間がかかり、動画圧縮全体に要する時
間Ｔ（＝ｔ１＋ｔ２）が目標フレームレート８０２のフ
レーム時間間隔よりも大きくなるような場合には、コン
トロールモジュール７０５は、状態変数Ｙを“０”に設
定する（ステップＳ３０７）。
は、算出したフィルタ処理時間ｔ１と通常の圧縮符号化
処理時間ｔ２とを考慮することにより、動画圧縮全体に
要する時間Ｔ（＝ｔ１＋ｔ２）が目標フレームレート８
０２のフレーム時間間隔内に収まるか否かを判断する
（ステップＳ３０５）。フレーム時間間隔内に収まる場
合にはコントロールモジュール７０５は状態変数Ｙを
“１”に維持するが（ステップＳ３０６）、もしフィル
タ処理に多くの時間がかかり、動画圧縮全体に要する時
間Ｔ（＝ｔ１＋ｔ２）が目標フレームレート８０２のフ
レーム時間間隔よりも大きくなるような場合には、コン
トロールモジュール７０５は、状態変数Ｙを“０”に設
定する（ステップＳ３０７）。
【００５４】続く、エンコードモジュール７０３による
エンコード処理（ステップＳ３０８）では、図６および
図７で説明した処理、あるいは図１０および図１１で説
明した処理が行われ、例えば、実際の圧縮符号化処理時
間ｔ２と、目標フレームレート８０２のフレーム時間間
隔から通常のフィルタ処理時間を差し引いた残りの時間
との大小関係に基づいて、圧縮符号化処理に係わる演算
処理量の制御（状態変数Ｘの更新、状態変数Ｘに基づく
ブロック探索範囲の可変制御）が行われる。
エンコード処理（ステップＳ３０８）では、図６および
図７で説明した処理、あるいは図１０および図１１で説
明した処理が行われ、例えば、実際の圧縮符号化処理時
間ｔ２と、目標フレームレート８０２のフレーム時間間
隔から通常のフィルタ処理時間を差し引いた残りの時間
との大小関係に基づいて、圧縮符号化処理に係わる演算
処理量の制御（状態変数Ｘの更新、状態変数Ｘに基づく
ブロック探索範囲の可変制御）が行われる。
【００５５】この後、コントロールモジュール７０５
は、圧縮符号化処理時間ｔ２に通常のフィルタ処理時間
を加算した値が目標フレームレート８０２のフレーム時
間間隔内に収まるか否かを判断し（ステップＳ３０
９）、収まる場合には状態変数Ｙを“１”に設定し（ス
テップＳ３１０）、収まらない場合には状態変数Ｙを
“０”に設定する（ステップＳ３１１）。
は、圧縮符号化処理時間ｔ２に通常のフィルタ処理時間
を加算した値が目標フレームレート８０２のフレーム時
間間隔内に収まるか否かを判断し（ステップＳ３０
９）、収まる場合には状態変数Ｙを“１”に設定し（ス
テップＳ３１０）、収まらない場合には状態変数Ｙを
“０”に設定する（ステップＳ３１１）。
【００５６】なお、本例ではフィルタ処理の制御と圧縮
符号化処理の制御とを組み合わせて使用する場合を説明
したが、ＣＰＵ負荷に応じて、フィルタ処理と圧縮符号
化処理のいずれか一方の処理内容のみを制御するように
しても良い。この場合の例を図１４に示す。
符号化処理の制御とを組み合わせて使用する場合を説明
したが、ＣＰＵ負荷に応じて、フィルタ処理と圧縮符号
化処理のいずれか一方の処理内容のみを制御するように
しても良い。この場合の例を図１４に示す。
【００５７】まず、動画圧縮全体に要する時間Ｔ（＝ｔ
１＋ｔ２）が目標フレームレート８０２のフレーム時間
間隔内であるか調べられる（ステップＳ４０１）。ＣＰ
Ｕ負荷が大きく、時間Ｔがフレーム時間間隔を上回る場
合には、例えばアプリケーションプログラム１０１を通
じてユーザから指定される入力動画像信号に関する画質
情報等に基づき、ノイズの大きい低画質の画像である
か、ノイズの少ない高画質の画像であるかいなかを判断
する（ステップＳ４０２）。ノイズの大きい低画質の画
像の場合には、フィルタ処理を省くと、圧縮符号化処理
後の画質に大きな影響を及ぼすことになるため、フィル
タ処理については演算量を減らさずに、圧縮符号化処理
の演算処理を低減するための処理のみを行う（ステップ
Ｓ４０３）。一方、ノイズの少ない高画質の画像であれ
ば、フィルタ処理を行わずとも高画質の符号化画像が得
られるので、フィルタ処理の演算量を低減させる処理
（フィルタ処理スキップを含む）のみを行う（ステップ
Ｓ４０４）。
１＋ｔ２）が目標フレームレート８０２のフレーム時間
間隔内であるか調べられる（ステップＳ４０１）。ＣＰ
Ｕ負荷が大きく、時間Ｔがフレーム時間間隔を上回る場
合には、例えばアプリケーションプログラム１０１を通
じてユーザから指定される入力動画像信号に関する画質
情報等に基づき、ノイズの大きい低画質の画像である
か、ノイズの少ない高画質の画像であるかいなかを判断
する（ステップＳ４０２）。ノイズの大きい低画質の画
像の場合には、フィルタ処理を省くと、圧縮符号化処理
後の画質に大きな影響を及ぼすことになるため、フィル
タ処理については演算量を減らさずに、圧縮符号化処理
の演算処理を低減するための処理のみを行う（ステップ
Ｓ４０３）。一方、ノイズの少ない高画質の画像であれ
ば、フィルタ処理を行わずとも高画質の符号化画像が得
られるので、フィルタ処理の演算量を低減させる処理
（フィルタ処理スキップを含む）のみを行う（ステップ
Ｓ４０４）。
【００５８】以上のように、本各実施形態によれば、目
標フレームレートを維持しつつ、ＣＰＵ負荷に応じた圧
縮符号化処理（さらにはフィルタ処理）の最適化制御を
行うことが可能となる。さらに、本各実施形態のソフト
ウェアエンコードの方法は、その手順を含むコンピュー
タプログラムをコンピュータ読み取り可能な記録媒体を
通じて通常のコンピュータに導入するだけで、容易に実
現することができる。また、マイクロプロセッサベース
でエンコードを行うものであれば、コンピュータのみな
らず、例えばデジタルビデオカメラや、他の各種電子機
器に適用しても有効である。
標フレームレートを維持しつつ、ＣＰＵ負荷に応じた圧
縮符号化処理（さらにはフィルタ処理）の最適化制御を
行うことが可能となる。さらに、本各実施形態のソフト
ウェアエンコードの方法は、その手順を含むコンピュー
タプログラムをコンピュータ読み取り可能な記録媒体を
通じて通常のコンピュータに導入するだけで、容易に実
現することができる。また、マイクロプロセッサベース
でエンコードを行うものであれば、コンピュータのみな
らず、例えばデジタルビデオカメラや、他の各種電子機
器に適用しても有効である。
【００５９】また、本発明は、上記各実施形態に限定さ
れるものではなく、実施段階ではその要旨を逸脱しない
範囲で種々に変形することが可能である。更に、上記実
施形態には種々の段階の発明が含まれており、開示され
る複数の構成要件における適宜な組み合わせにより種々
の発明が抽出され得る。例えば、実施形態に示される全
構成要件から幾つかの構成要件が削除されても、発明が
解決しようとする課題の欄で述べた課題が解決でき、発
明の効果の欄で述べられている効果が得られる場合に
は、この構成要件が削除された構成が発明として抽出さ
れ得る。
れるものではなく、実施段階ではその要旨を逸脱しない
範囲で種々に変形することが可能である。更に、上記実
施形態には種々の段階の発明が含まれており、開示され
る複数の構成要件における適宜な組み合わせにより種々
の発明が抽出され得る。例えば、実施形態に示される全
構成要件から幾つかの構成要件が削除されても、発明が
解決しようとする課題の欄で述べた課題が解決でき、発
明の効果の欄で述べられている効果が得られる場合に
は、この構成要件が削除された構成が発明として抽出さ
れ得る。
【００６０】
【発明の効果】以上説明したように、本発明によれば、
圧縮符号化処理時におけるコマ落ちの発生を極力排除で
きるようになり、再生時に滑らかな動画再生を行うこと
が可能となる。
圧縮符号化処理時におけるコマ落ちの発生を極力排除で
きるようになり、再生時に滑らかな動画再生を行うこと
が可能となる。
【図１】本発明の第１実施形態に係るコンピュータシス
テムの構成を示すブロック図。
テムの構成を示すブロック図。
【図２】同第１実施形態で用いられる動画圧縮ソフトの
基本機能を説明するための図。
基本機能を説明するための図。
【図３】同第１実施形態で用いられる動画圧縮ソフトの
構造を示す図。
構造を示す図。
【図４】同第１実施形態で用いられる動画圧縮ソフトの
圧縮エンジン部の機能構成を示す図。
圧縮エンジン部の機能構成を示す図。
【図５】同第１実施形態の圧縮エンジン部に設けられる
ビデオエンコーダの機能構成を示す図。
ビデオエンコーダの機能構成を示す図。
【図６】同第１実施形態における画像圧縮制御処理の手
順の第１の例を示すフローチャート。
順の第１の例を示すフローチャート。
【図７】同第１実施形態における画像データ圧縮処理の
手順の第１の例を示すフローチャート。
手順の第１の例を示すフローチャート。
【図８】同第１実施形態で用いられるブロック探索範囲
可変制御の様子を示す図。
可変制御の様子を示す図。
【図９】同第１実施形態で用いられるブロックツリー探
索およびラインスキップを説明するための図。
索およびラインスキップを説明するための図。
【図１０】同第１実施形態における画像圧縮制御処理の
手順の第２の例を示すフローチャート。
手順の第２の例を示すフローチャート。
【図１１】同第１実施形態における画像データ圧縮処理
の手順の第２の例を示すフローチャート。
の手順の第２の例を示すフローチャート。
【図１２】本発明の第２実施形態で用いられるビデオエ
ンコーダの機能構成を示す図。
ンコーダの機能構成を示す図。
【図１３】図１２のビデオエンコーダの制御処理の手順
を説明するためのフローチャート。
を説明するためのフローチャート。
【図１４】図１２のビデオエンコーダの制御処理の手順
の他の例を説明するためのフローチャート。
の他の例を説明するためのフローチャート。
１１…ＣＰＵ １００…動画圧縮ソフト １０１…動画圧縮用アプリケーションプログラム １０２…圧縮エンジン ３０１…マネージャ ３０２…カメラキャプチャ ３０３…オーディオキャプチャ ３０４…ビデオエンコーダ ３０５…オーディオエンコーダ ３０６…マルチプレクサ ３０７…ファイルライタ ５０１，７０１…入力モジュール ５０２，７０３…エンコードモジュール ５０３，７０４…出力モジュール ５０４，７０５…コントロールモジュール ６０１，８０１…ＣＰＵ負荷検出モジュール ６０２，８０２…目標フレームレート ６０３，８０３…状態変数
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C053 FA20 FA24 FA27 GB07 GB08 GB17 GB38 JA01 KA05 KA24 LA01 LA06 LA14 5C059 KK10 KK22 KK35 MA23 MC11 ME01 NN01 NN28 PP04 SS02 SS13 SS26 TA17 TA62 TA63 TB08 TC00 TC19 UA38 UA39 5J064 AA01 BA01 BA09 BA16 BB03 BB12 BC01 BC16 BC26 BD01
Claims (15)
- 【請求項１】 動画像信号の圧縮符号化を行うための動
画像圧縮方法であって、 動画像信号を入力するステップと、 入力された動画像信号に対して圧縮符号化処理を施すス
テップと、 所定のフレームレートが維持されるように、前記圧縮符
号化処理の処理状況に基づいて前記圧縮符号化処理の処
理内容を制御する制御ステップとを具備することを特徴
とする動画像圧縮方法。 - 【請求項２】 前記制御ステップは、前記圧縮符号化処
理に要した処理時間を検出するステップを含み、検出し
た処理時間と前記所定フレームレートとに基づいて、前
記圧縮符号化処理の処理内容を制御することを特徴とす
る請求項１記載の動画像圧縮方法。 - 【請求項３】 前記制御ステップは、前記圧縮符号化処
理で行われる動きベクトル検出処理の処理内容を制御す
ることを特徴とする請求項１記載の動画像圧縮方法。 - 【請求項４】 前記制御ステップは、前記動きベクトル
検出処理で行われるブロック探索処理の探索範囲または
探索精度を可変制御することを特徴とする請求項３記載
の動画像圧縮方法。 - 【請求項５】 前記入力された動画像信号に対して圧縮
符号化処理を施す前に、前記入力された動画像信号に対
してフィルタ処理を施すステップをさらに具備し、 前記制御ステップは、前記所定のフレームレートが維持
されるように、前記圧縮符号化処理の処理状況に基づい
て前記フィルタ処理を制御するステップを含むことを特
徴とする請求項１記載の動画像圧縮方法。 - 【請求項６】 前記圧縮符号化処理は、その圧縮符号化
処理のためのコンピュータプログラムを情報処理装置の
ＣＰＵに実行させることによって行われるものであり、 前記制御ステップは、前記ＣＰＵの負荷状況を検出する
ステップを含み、前記ＣＰＵの負荷状況に基づいて前記
ＣＰＵに実行させる圧縮符号化処理の処理内容を制御す
ることを特徴とする請求項１記載の動画像圧縮方法。 - 【請求項７】 動画像信号の圧縮符号化を行うための動
画像圧縮方法であって、 動画像信号を入力するステップと、 入力された動画像信号に対してフィルタ処理を施すステ
ップと、 フィルタ処理された動画像信号に対して圧縮符号化処理
を施すステップと、 所定のフレームレートが維持されるように、前記圧縮符
号化処理の処理状況に基づいて前記フィルタ処理および
前記圧縮符号化処理の少なくとも一方を制御する制御ス
テップとを具備することを特徴とする動画像圧縮方法。 - 【請求項８】 動画像信号の圧縮符号化を行うことが可
能な情報処理装置であって、 動画像信号を入力する入力手段と、 前記入力手段によって入力された動画像信号に対して圧
縮符号化処理を施す圧縮処理手段と、 所定のフレームレートが維持されるように、前記圧縮処
理手段に実行させる前記圧縮符号化処理の処理内容を制
御する制御手段とを具備することを特徴とする情報処理
装置。 - 【請求項９】 前記制御手段は、前記圧縮符号化処理に
要した処理時間を検出する手段を含み、その検出した処
理時間と前記所定フレームレートとに基づいて、前記圧
縮符号化処理の処理内容を制御することを特徴とする請
求項８記載の情報処理装置。 - 【請求項１０】 前記制御手段は、前記圧縮符号化処理
で行われる動きベクトル検出処理の処理内容を制御する
ことを特徴とする請求項８記載の情報処理装置。 - 【請求項１１】 前記圧縮符号化処理は、その圧縮符号
化処理のためのコンピュータプログラムを前記情報処理
装置のＣＰＵに実行させることによって行われるもので
あり、 前記制御手段は、前記ＣＰＵの負荷状況を検出する手段
を含み、前記ＣＰＵの負荷状況に基づいて前記ＣＰＵに
実行させる圧縮符号化処理の処理内容を制御することを
特徴とする請求項８記載の情報処理装置。 - 【請求項１２】 前記入力された動画像信号に対して圧
縮符号化処理が施される前に、前記入力された動画像信
号に対してフィルタ処理を施す手段をさらに具備し、 前記制御手段は、前記所定のフレームレートが維持され
るように、前記フィルタ処理を制御する手段を含むこと
を特徴とする請求項８記載の情報処理装置。 - 【請求項１３】 動画像信号の圧縮符号化を行うための
コンピュータプログラムが記録されたコンピュータ読み
取り可能な記録媒体であって、 前記コンピュータプログラムは、 動画像信号を入力するステップと、 入力された動画像信号に対して圧縮符号化処理を施すス
テップと、 所定のフレームレートが維持されるように、前記圧縮符
号化処理の処理内容を制御する制御ステップとを具備す
ることを特徴とする記録媒体。 - 【請求項１４】 前記制御ステップは、前記コンピュー
タプログラムが実行されるコンピュータのＣＰＵの負荷
を検出するステップを含み、前記ＣＰＵの負荷状況に基
づいて前記圧縮符号化処理の処理内容を制御することを
特徴とする請求項１３記載の記録媒体。 - 【請求項１５】 前記コンピュータプログラムは、前記
入力された動画像信号に対して圧縮符号化処理が施され
る前に、前記入力された動画像信号に対してフィルタ処
理を施すステップをさらに具備し、 前記制御ステップは、前記所定のフレームレートが維持
されるように、前記フィルタ処理を制御するステップを
含むことを特徴とする請求項１３記載の記録媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000168992A JP2001346216A (ja) | 2000-06-06 | 2000-06-06 | 動画像圧縮方法および情報処理装置 |
| US09/812,783 US20020118756A1 (en) | 2000-06-06 | 2001-03-15 | Video coding method and data processing device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000168992A JP2001346216A (ja) | 2000-06-06 | 2000-06-06 | 動画像圧縮方法および情報処理装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2001346216A true JP2001346216A (ja) | 2001-12-14 |
Family
ID=18671923
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000168992A Pending JP2001346216A (ja) | 2000-06-06 | 2000-06-06 | 動画像圧縮方法および情報処理装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20020118756A1 (ja) |
| JP (1) | JP2001346216A (ja) |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002152760A (ja) * | 2000-10-11 | 2002-05-24 | Samsung Electronics Co Ltd | ハイブリッド型高速動き推定方法及びその装置 |
| JP2004320667A (ja) * | 2003-04-21 | 2004-11-11 | National Institute Of Information & Communication Technology | 実時間コンテンツ編集方法及びシステム並びにプログラム |
| WO2005025226A1 (ja) * | 2003-09-02 | 2005-03-17 | Sony Corporation | 映像符号化装置、映像符号化制御方法及び映像符号化制御プログラム |
| WO2006033227A1 (ja) * | 2004-09-22 | 2006-03-30 | Matsushita Electric Industrial Co., Ltd. | 画像符号化装置 |
| JP2007124619A (ja) * | 2005-09-30 | 2007-05-17 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラム、情報記録媒体 |
| JP2007208476A (ja) * | 2006-01-31 | 2007-08-16 | Toshiba Corp | 動画像復号装置および動画像復号方法 |
| JP2007251553A (ja) * | 2006-03-15 | 2007-09-27 | Matsushita Electric Ind Co Ltd | リアルタイム処理装置及びその方法 |
| JP2008048065A (ja) * | 2006-08-11 | 2008-02-28 | Toshiba Corp | 動画像符号化装置 |
| JP2008167048A (ja) * | 2006-12-27 | 2008-07-17 | Toshiba Corp | 情報処理装置およびプログラム |
| JP2008203938A (ja) * | 2007-02-16 | 2008-09-04 | Ricoh Co Ltd | 画像撮像装置 |
| JP2009513068A (ja) * | 2005-10-20 | 2009-03-26 | クゥアルコム・インコーポレイテッド | ビデオ・エンコーディングのためのスケーリング可能な動き推定 |
| JP2009124570A (ja) * | 2007-11-16 | 2009-06-04 | Canon Inc | 映像処理装置、映像処理方法、映像処理プログラム及び記憶媒体 |
| JP2009165158A (ja) * | 2009-03-09 | 2009-07-23 | Casio Comput Co Ltd | 動画像記録装置及び電子カメラ装置、動画像記録方法、プログラム |
| JP2014064161A (ja) * | 2012-09-21 | 2014-04-10 | Sony Corp | 画像処理装置、画像処理方法およびプログラム |
Families Citing this family (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040201681A1 (en) * | 2001-06-21 | 2004-10-14 | Jack Chen | Multimedia data file producer combining image and sound information together in data file |
| US7533398B2 (en) * | 2002-07-26 | 2009-05-12 | The Associated Press | Automatic selection of encoding parameters for transmission of media objects |
| JP4141372B2 (ja) * | 2003-11-05 | 2008-08-27 | 富士通株式会社 | 無線通信装置、無線通信方法および無線通信プログラム |
| US7739105B2 (en) * | 2003-06-13 | 2010-06-15 | Vixs Systems, Inc. | System and method for processing audio frames |
| JP4194425B2 (ja) * | 2003-06-18 | 2008-12-10 | キヤノン株式会社 | 画像処理装置及びデータ転送方法 |
| JP4534630B2 (ja) * | 2004-07-01 | 2010-09-01 | ソニー株式会社 | 撮像装置、撮像素子及び撮像装置の制御方法 |
| JP4623650B2 (ja) * | 2005-09-06 | 2011-02-02 | パナソニック株式会社 | 動画像符号化装置，動画像符号化方法 |
| JP4643454B2 (ja) * | 2006-01-10 | 2011-03-02 | 株式会社東芝 | 動画像復号装置及び動画像復号方法 |
| JP4131281B2 (ja) * | 2006-05-09 | 2008-08-13 | ソニー株式会社 | 画像表示装置、信号処理装置、および画像処理方法、並びにコンピュータ・プログラム |
| US9591374B2 (en) | 2010-06-30 | 2017-03-07 | Warner Bros. Entertainment Inc. | Method and apparatus for generating encoded content using dynamically optimized conversion for 3D movies |
| US10326978B2 (en) | 2010-06-30 | 2019-06-18 | Warner Bros. Entertainment Inc. | Method and apparatus for generating virtual or augmented reality presentations with 3D audio positioning |
| JP5812634B2 (ja) * | 2011-03-17 | 2015-11-17 | キヤノン株式会社 | 送信装置及び送信方法、並びにプログラム |
| JP5843631B2 (ja) * | 2012-01-26 | 2016-01-13 | 日本電信電話株式会社 | フレームレート制御方法，フレームレート制御装置およびフレームレート制御プログラム |
| CN103402086B (zh) * | 2013-07-22 | 2017-02-15 | 华为技术有限公司 | 一种用于视频编码系统的性能控制方法及编码器 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3629728B2 (ja) * | 1994-08-31 | 2005-03-16 | ソニー株式会社 | 動画像信号符号化方法、動画像信号符号化装置及び動画像信号記録媒体 |
| JPH08256266A (ja) * | 1995-03-17 | 1996-10-01 | Mitsubishi Electric Corp | 画像符号化方式 |
| US5926226A (en) * | 1996-08-09 | 1999-07-20 | U.S. Robotics Access Corp. | Method for adjusting the quality of a video coder |
| CA2228361C (en) * | 1997-02-28 | 2002-01-29 | Daisaku Komiya | Motion picture converting apparatus |
| US6115420A (en) * | 1997-03-14 | 2000-09-05 | Microsoft Corporation | Digital video signal encoder and encoding method |
| US6434196B1 (en) * | 1998-04-03 | 2002-08-13 | Sarnoff Corporation | Method and apparatus for encoding video information |
| KR100548891B1 (ko) * | 1998-06-15 | 2006-02-02 | 마츠시타 덴끼 산교 가부시키가이샤 | 음성 부호화 장치 및 음성 부호화 방법 |
| US6567117B1 (en) * | 1998-09-09 | 2003-05-20 | Nippon Telegraph And Telephone Corporation | Method for regulating image quality, picture communication equipment using same and recording medium having recorded therein a program for executing the method |
| JP3538055B2 (ja) * | 1999-02-15 | 2004-06-14 | 日本電気株式会社 | 動きベクトル検出装置 |
| JP3324556B2 (ja) * | 1999-04-13 | 2002-09-17 | 日本電気株式会社 | 映像記録方式 |
-
2000
- 2000-06-06 JP JP2000168992A patent/JP2001346216A/ja active Pending
-
2001
- 2001-03-15 US US09/812,783 patent/US20020118756A1/en not_active Abandoned
Cited By (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002152760A (ja) * | 2000-10-11 | 2002-05-24 | Samsung Electronics Co Ltd | ハイブリッド型高速動き推定方法及びその装置 |
| JP2004320667A (ja) * | 2003-04-21 | 2004-11-11 | National Institute Of Information & Communication Technology | 実時間コンテンツ編集方法及びシステム並びにプログラム |
| WO2005025226A1 (ja) * | 2003-09-02 | 2005-03-17 | Sony Corporation | 映像符号化装置、映像符号化制御方法及び映像符号化制御プログラム |
| KR101121613B1 (ko) | 2003-09-02 | 2012-04-16 | 소니 주식회사 | 영상 부호화 장치, 영상 부호화 제어 방법 및 영상 부호화 제어 프로그램을 기록한 컴퓨터로 판독가능한 기록 매체 |
| US8665966B2 (en) | 2003-09-02 | 2014-03-04 | Sony Corporation | Video coding apparatus, method of controlling video coding and program of controlling video coding |
| WO2006033227A1 (ja) * | 2004-09-22 | 2006-03-30 | Matsushita Electric Industrial Co., Ltd. | 画像符号化装置 |
| JPWO2006033227A1 (ja) * | 2004-09-22 | 2008-05-15 | 松下電器産業株式会社 | 画像符号化装置 |
| US8073053B2 (en) | 2004-09-22 | 2011-12-06 | Panasonic Corporation | Image encoding device that encodes an arbitrary number of moving pictures |
| JP4746550B2 (ja) * | 2004-09-22 | 2011-08-10 | パナソニック株式会社 | 画像符号化装置 |
| JP2007124619A (ja) * | 2005-09-30 | 2007-05-17 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラム、情報記録媒体 |
| JP4688165B2 (ja) * | 2005-09-30 | 2011-05-25 | 株式会社リコー | 画像処理装置及び画像処理方法 |
| JP2009513068A (ja) * | 2005-10-20 | 2009-03-26 | クゥアルコム・インコーポレイテッド | ビデオ・エンコーディングのためのスケーリング可能な動き推定 |
| JP2007208476A (ja) * | 2006-01-31 | 2007-08-16 | Toshiba Corp | 動画像復号装置および動画像復号方法 |
| US8599935B2 (en) | 2006-01-31 | 2013-12-03 | Kabushiki Kaisha Toshiba | Moving image decoding apparatus and moving image decoding method |
| JP2007251553A (ja) * | 2006-03-15 | 2007-09-27 | Matsushita Electric Ind Co Ltd | リアルタイム処理装置及びその方法 |
| JP4690966B2 (ja) * | 2006-08-11 | 2011-06-01 | 株式会社東芝 | 動画像符号化装置 |
| US8189667B2 (en) | 2006-08-11 | 2012-05-29 | Kabushiki Kaisha Toshiba | Moving picture encoding apparatus |
| JP2008048065A (ja) * | 2006-08-11 | 2008-02-28 | Toshiba Corp | 動画像符号化装置 |
| US8130839B2 (en) | 2006-12-27 | 2012-03-06 | Kabushiki Kaisha Toshiba | Information processing apparatus with video encoding process control based on detected load |
| JP2008167048A (ja) * | 2006-12-27 | 2008-07-17 | Toshiba Corp | 情報処理装置およびプログラム |
| JP2008203938A (ja) * | 2007-02-16 | 2008-09-04 | Ricoh Co Ltd | 画像撮像装置 |
| JP2009124570A (ja) * | 2007-11-16 | 2009-06-04 | Canon Inc | 映像処理装置、映像処理方法、映像処理プログラム及び記憶媒体 |
| JP4687801B2 (ja) * | 2009-03-09 | 2011-05-25 | カシオ計算機株式会社 | 動画像記録装置及び電子カメラ装置、動画像記録方法、プログラム |
| JP2009165158A (ja) * | 2009-03-09 | 2009-07-23 | Casio Comput Co Ltd | 動画像記録装置及び電子カメラ装置、動画像記録方法、プログラム |
| JP2014064161A (ja) * | 2012-09-21 | 2014-04-10 | Sony Corp | 画像処理装置、画像処理方法およびプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| US20020118756A1 (en) | 2002-08-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2001346216A (ja) | 動画像圧縮方法および情報処理装置 | |
| US8170120B2 (en) | Information processing apparatus and information processing method | |
| JP4230636B2 (ja) | 動画像再生方法および動画像再生装置 | |
| JP5385233B2 (ja) | デジタルビデオ符号化処理における可変精度ピクチャ間タイミング指定方法及び装置 | |
| US8254702B2 (en) | Image compression method and image processing apparatus | |
| JPH08336111A (ja) | ビデオ・オン・デマンドシステムにおける映像再生位置割り出し方式 | |
| JPH1066087A (ja) | シーン変化点検出方法および動画像の編集表示方法 | |
| US20020113898A1 (en) | Picture processing apparatus and method, and recording medium | |
| JP3014031B2 (ja) | 動画圧縮装置 | |
| JP2002238060A (ja) | 画像符号化方法、画像符号化装置、プログラムおよび記録媒体 | |
| US6781637B2 (en) | Image change detecting apparatus and image change detecting method, image encoding apparatus and information recording medium with image change detecting program recorded readable by computer | |
| JP2007325119A (ja) | 画像処理装置及び画像処理方法 | |
| US6438166B2 (en) | Method and a apparatus for controlling a bit rate of picture data, and a storage medium which stores a program for controlling the bit rate | |
| US6885773B2 (en) | Method of detecting a fade change in image information based on intra-field dispersion values and intra-field DC levels | |
| JPH10285542A (ja) | 録画装置および録画方法 | |
| US20040179032A1 (en) | Method of intelligent video stream modification | |
| US20020131503A1 (en) | Moving image compression apparatus, and cut detection data generation method for the apparatus | |
| JP2000069484A (ja) | 動きベクトル算出方法及び動きベクトル算出プログラムを記録した記録媒体 | |
| JP4155063B2 (ja) | 画像符号化装置と画像復号装置および画像符号化方法と画像復号方法 | |
| JP2004179683A (ja) | 画像記録方式 | |
| JP2000023090A (ja) | 圧縮動画像編集装置および記憶媒体 | |
| JP4590337B2 (ja) | 動画像符号化装置及び動画像符号化方法 | |
| JP4293151B2 (ja) | 映像符号化方法及び映像記録装置 | |
| JP2003173179A (ja) | コンピュータ画面符号化装置および復号化装置 | |
| JP5247210B2 (ja) | 動画像符号化装置及び動画像符号化方法 |