JP3579309B2 - 画質調整方法及びその方法を使用した映像通信装置及びその方法を記録した記録媒体 - Google Patents

Description

【０００１】
【発明の属する技術分野】
この発明は、ＧＳＴＮ、ＩＳＤＭ，ＰＨＳ，ＰＤＣなどの通信網を介した映像音声通信ならびに映像ファイリングにおいて使用する、映像符号化における画質調整方法及びその方法を使用した映像通信装置及びその方法をコンピュータで実施するプログラムを記録した記録媒体に関する。
【０００２】
【従来の技術】
例えば、ＩＴＵ−Ｔ、Ｈ．２６３などでは、ＳＱＣＩＦ、ＱＣＩＦ、ＣＩＦ、４ＣＩＦ及び１６ＣＩＦの５つの画像フォーマットが規定されている。テレビ電話、会議システムではこれらの中で、主に図１Ａ，１Ｂ，１Ｃの画像Ｆ１， Ｆ２， Ｆ３で示す画像フォーマットＳＱＣＩＦ， ＱＣＩＦ， ＣＩＦを使用し、映像の送受信を行っている。ＳＱＣＩＦ は１２８×９６画素、ＱＣＩＦは１７６×１４４画素、ＣＩＦは３５２×２８８画素で構成されている。更に、階調を表す１画素あたりのデータ量は、映像品質設定により決定されていた。このため映像品質設定が別途必要で、これにより画像の動きを優先させるのか、精細さを優先させるのかが決められ、結果的に符号化フレームレートが決定されていた。ここで映像品質は動き重視（符号化フレームレートを高く）とすると、１画素あたりのデータ量が低く抑えられ画質は落ちるが、フレームレートは向上する。一方、画質重視（符号化フレームレートを低く）とすると、１画素あたりのデータ量が高くなリ画質は良くなるが、フレームレートは低下する。この様に従来、テレビ電話、会議システムで画質調整を行うユーザインタフエースとしては、送信映像の画像フォーマットと映像品質との両方を組み合わせることが必要であった。
【０００３】
図２に従来のコンピュータ表示画面上で行うユーザインタフェースの一つの例を示す。図２のユーザインタフェース画面Ｄ２０ 上で、ユーザは選択ボタンＤ２２ を押すことで、画像フォーマット又は映像品質を変更できる。ここで、映像品質という用語は一般の利用者に分かりやすくするために用いられたもので、実際は符号化フレームレートを指している。画像フォーマットと映像品質のどちらを変更するかはアクティブサインＤ２１ で表示できるようになっていた。更に画像フォーマットを変更するには、表示「画像フォーマット」に対し選択ボタンＤ２２ でアクティブサインＤ２１ を表示させ、変更ボタンＤ２３ を押すことで、可能となっていた。変更ボタンＤ２３ の押下により、フォーマット表示Ｄ２４ で示される様に、ＣＩＦ， ＱＣＩＦ，ＳＱＣＩＦ などの画像フォーマットに変更を行う。また、同様に映像品質を選択ボタンＤ２２ でアクティフサイン表示させ、変更ボタンＤ２３ を押下することで映像品質（符号化フレームレート）変更可能である。そこで動き重視Ｄ２５ にするか、画質重視にするかは変更ボタンＤ２３ の押下で変更する。
【０００４】
更に、図３にて従来のユーザインタフェースの操作手順を示す。通信が開始され、ステップＳ１において画像フォーマットを変更したいと判定した場合は、ステップＳ２で画像フォーマットの変更を行う。次にステップＳ３において映像品質（符号化フレームレート）の変更をしたいと判定した場合は、ステップＳ４で映像品質（符号化フレームレート）を変更する。次にステップＳ５で、ユーザの望む総合的な映像品質が満足できたと判定されると、次の処理手順に移行できるが、そうでなければ再度ステップＳ１の判定処理に戻る。以上述べたように、画質調整のユーザインタフェースとしては、送信映像の画像フォーマットと映像品質（符号化フレームレート）との両方を組み合わせるというように、二度の操作手順が必要であった。
【０００５】
また、従来、例えば日本国特許出願公開５−３２８３４１号で、テレビ電話の話者が自然な動画を得るための画質設定方法が示されているが、この従来方法では圧縮データ量が所定の値より大きいか小さいかによって、符号化パラメータを変更するものである。これは国際標準機関ＩＴＵ−Ｔ において検討が進められている各種映像符号化方式（Ｈ．２６１、Ｈ．２６２、Ｈ．２６３）で前提としている符号化量制御法に類するものであり、そのままでは、利用者は画質調整する時には、画像フォーマットとフレームレートとの、少なくとも二つのパラメータを変更しなければならなかった。
【０００６】
【発明が解決しようとする課題】
従来方式では以上のように、通信の開始にあたってユーザは映像通信装置のユーザインタフェースにおいて、自分の望む映像の品質と動きを得るために、画像フォーマットと映像品質というように、二つのパラメータに対して操作をしなければならなかった。このため、映像の総合的な画質調整の設定にあたっては図４に表で示すように、画像フォーマットと映像品質の二つのパラメータを組み合わせて値Ｑ１１，Ｑ２１，Ｑ３１，Ｑ１２，Ｑ２２，Ｑ３２ に相当する画質を選択しなくてはならず、二度手間の操作手順が必要であったために、通信の開始時にかなりの時間と手間を要してしまっていた。
【０００７】
この発明の目的は、符号化映像の総合的な画質調整において、画像フォーマットとフレームレートの二つを独立に操作することなく、一つの操作のみにて総合的な画質調整を実現する画質調整方法及びその方法を使用した映像通信装置及びその方法を記録した記録媒体を提供することにある。
【０００８】
【課題を解決するための手段】
この発明の第１の観点による、画質調整パラメータを入力して、映像を符号化する際の符号化パラメータを調整することにより上記映像の画質を調整する画質調整方法は、以下のステップを含む：
（ａ） 予め決めた少なくとも１つの符号化ビットレートに対し画像フォーマットごとに符号化フレームレートの適用範囲を定めた特性情報を予め記憶し、
（ｂ） 画質を指定するパラメータを入力し、
（ｃ） 上記パラメータをキーとして上記特性情報を参照して、画像フォーマットと符号化フレームレートを決定する。
【０００９】
この発明の第２の観点による映像符号化調整方法は、上記方法において画像フォーマットごとに符号化するのに要する符号化所要時間を測定し、上記測定結果を用いて画像フォーマットごとに設定可能な映像フレーム枚数を算出し、上記算出結果及び入力された画質調整パラメータに基づいて画像フォーマット及び符号化フレームレートを決定する。
【００１０】
【発明の実施の形態】
図５にこの発明の映像通信装置に用いられる映像符号化装置１０の原理的構成を示し、図６にその動作処理フロー図を示す。この発明では、画像フォーマットごとにその画像フォーマットに適用可能な符号化ビットレートと、符号化フレームレートを定めた特性情報をパラメータ変換データとして予め記憶部１３に記憶しておく。パラメータ入力部１１は、例えばユーザインタフェース画面を表示する表示部を含む。そのユーザインタフェース画面上で入力を設定するキーボード及び／又はマウスを含む。操作者は、パラメータ入力部１１を使って画質調整パラメータＰｑを入力し（ステップＳ１）、画質調整部１２において、その入力された画質調整パラメータＰｑをキーとして記憶部１３のパラメー夕変換データを参照することによって、符号化フレームレートと画像フォーマットＦｉを決定し（ステップＳ２）、それらを符号化処理部１４に与えて入力映像データＤｐを、それら決定された画像フォーマットＦｉとフレームレートＲｆで符号化して符号化映像データＣｐを出力する（ステップＳ３）。
【００１１】
この発明は、映像情報の通信、蓄積を行う映像通信装置の画像調整において、画像フォーマットと符号化フレームレートを個別に設定するのではなく、これらを一つに統合することで利用者は一つの設定項目のみにて総合的な画質調整が行える様にしたことを最も大きな特徴とするものである。これにより、従来の符号化映像画質調整では、画像フォーマットと符号化フレームレートの二つを独立に操作、調整しなければならなかったのに対し、この発明では、ユーザインタフエースにおいて、画質優先なのか、動きを優先させるのかを一つのパラメータで調整するだけで、最適な画像フォーマットと符号化フレームレートを選択し、総合的な映像の画質調整を短時間に簡単に行うことができる。
【００１２】
以下、この発明の実施の形態について図を用いて詳細に説明する。
図７、図８は、この発明の画質調整法の実施例での設定画面の例である。図９は、この発明にあたってこの発明者らが発見した画像の符号化パラメータと画質の関係をまとめたものである。
図７に示した様に、この発明の実施例では、利用者はユーザインタフェース画面Ｄ２０ 上の画質設定の一つの選択項目「画質」を変更ボタンＤ２３ により例えば品質重視か動き重視に設定するのみで、画像フォーマットと映像品質の双方を調整することができる。これにより、その時点での最適な画像フォーマットで、動きを優先させるのか、画質の精細さを優先させるのかを自動で行うことが可能である。なお、図７の画質設定において選択項目の代わりに、任意の数字を直接指定すると、より細かく希望する映像の画質を瞬時に調整できることは言うまでもない。また、図７では、符号化専用ハードウェア装置をリモコン等で操作する場合の設定画面を示したが、ウィンドウ操作が可能なパソコン等においては、画質調整に図８で示すようなスライダーＤ２６ やプルダウンメニュー（図示せず）等を利用すれば、更に操作性が向上できる。
【００１３】
この発明においては、総合的な画質の優劣と、画像フォーマット及びフレームレートの値との関係を明らかにし、画像フォーマット及びフレームレートの値と画質の優劣の対応表を作成する必要があった。そこで、この発明者は、各種映像符号化データを作成し、綿密な主観評価実験を実施し、各種画像フォーマットの適応範囲は、図９で示す通りであることを発見した。即ち、画像フォーマットＱＣＩＦに最適な領域Ｂ２ は高フレームレート、高ビットレートから低フレームレート、低ビットレートに帯状となっており、その帯状領域Ｂ２ より低ビットレート側領域Ｂ１ がＳＱＣＩＦ に最適な領域であり、帯状領域Ｂ２ より高ビットレート側領域Ｂ３ がＣＩＦ に最適な領域となっている。従って、図９に示すように、この帯状領域Ｂ２ を斜めに切る符号化ビットレートの一定値Ｒｂ を適当に選ぶことにより、符号化フレームレートの大、中、小の区間が決められ、これらの区間に対し最適な画像フォーマットをＳＱＣＩＦ， ＱＣＩＦ， ＣＩＦ と決める。与えられたフレームレートがこれら区間のどれに属するかを判定するだけで、最適な画像フォーマットを決めることができる。
【００１４】
【実施例】
以下に、この発明の第１の実施例を示す。
図１０はこの発明の第１の実施例における変換テーブルの例を示したもので、符号化ビットレートが固定の場合の例である。この例では画質はフレームレートで１〜１３を７段階で変化させることができる。一番動き重視としたい場合は、画像フォーマットＳＱＣＩＦ 、符号化フレームレート１３／ｓｅｃとなり、一番画質重視としたい場合は、画像フォーマットＣＩＦ 、符号化フレームレート１／ｓｅｃとなる。利用者は単に画質として７段階のうちのいづれかを指示するだけで、画像フォーマットや符号化フレームレートは意識せずに、総合的な画質調整ができる。
【００１５】
図１１は、この発明の第１の実施例に関わる映像符号化装置１０の構成例を示したものである。これにより、前述の変換テーブルの意義を更に明確に説明する。
操作者は、本装置の使用開始時に、利用する通信網ならびに伝送速度を設定する。あるいは、これらは装置の製造段階で設定されていてもよい。これにより、符号化ビットレートＲｂ が例えば図９で示したように固定的に設定される。変換テーブルは、図９で決めた固定の符号化ビットレートＲｂ に対応させ、図１０のように画質調整パラメータＰｑから画像フォーマットと符号化フレームレートが７段階で求められるように構成され、記憶部１３に予め記憶しておく。
【００１６】
次に、ＧＵＩ（グラフィカルユーザインタフェース）を構成したパラメータ入力部１１から映像の画質調整パラメータＰｑのみを画質調整部１２に入力することで、画質調整部１２は、画質調整パラメータＰｑをキーとして記憶部１３の変換テーブルを参照して画像フォーマットＦｉと符号化フレームレートＲｆの値を生成することができ、生成した二つの値Ｆｉ， Ｒｆと符号化ビットレートＲｂを映像符号化処理部１４に入力する。この画像フォーマットＦｉと符号化フレームレートＲｆと符号化ビットレートＲｂの値により、映像符号化処理部１４は、入力された映像データＤｐに対し、操作者が所望する画質で映像符号化処理を行い、符号化映像データを出力する。
【００１７】
図１２に、本実施例で利用者が操作する手順を示す。まず、最初に使用する通信網／伝送速度を設定する（ステップＳ１）。本実施例の場合、符号化ビットレートＲｂ は固定であることを前提としているので、この設定が不要な場合が有り得る（製造段階で設定されている場合や、次回以降の通信の場合などである）。次に通信開始後（ステップＳ２）、画質調整パラメータＰｑの設定の入力操作あるいは変更の入力操作を行う（ステップＳ３）。映像の画質が希望するものになったか判定し（ステップＳ４）、なっていなければ操作を終了する。この画質調整パラメータＰｑの入力操作により、映像は希望する最適な画質となっているので、従来方法と比べてよリ迅速かつ的確に画質調整を行うことができる。ステップＳ４で画質が希望するものとなっていなければステップＳ３に戻り、画質調整パラメータＰｑを変更する。
【００１８】
次に、この発明の第２の実施例を示す。第１の実施例では符号化ビットレートを１つの値に固定する場合を示したが、この第２実施例は、図９中にＲｂ１， Ｒｂ２， Ｒｂ３で示すように予め決めた複数の符号化ビットレートが通信の開始時に選択可能とされている。
図１３は、この第２実施例に関わる映像符号化装置１０の構成例を示した図である。また、図１４は、本装置の画質調整部の動作例と共に本実施例での画質調整方法の処理フローを示した図である。図１５は本実施例でのパラメータ変換データの構成例である。
【００１９】
操作者は通信の開始時に、利用する通信網ならびに伝送速度を設定する。これにより、符号化ビットレートＲｂが設定される（ステップＳ１）。あるいは、直に符号化ビットレートＲｂをパラメータ入力部１１から入力してもよい。パラメータ変換データは、図９を基に、符号化ビットレートＲｂ１， Ｒｂ２，．．．ごとに作成された図１５のものを、記憶部１３に予め記憶しておく。次に、パラメータ入力部１１から映像の画質調整パラメータＰｑを画質調整部１２に入力することで（ステップＳ２）、画質調整部１２は、符号化ビットレートＲｂと画質調整パラメータＰｑをキーとして記憶部１３のパラメータ変換データを参照して画像フォーマットＦｉと符号化フレームレートＲｆの値を取得し（ステップＳ３）、取得した二つの値Ｒｆ， Ｐｑと符号化ビットレートＲｂを映像符号化処理部１４に入力する（ステップＳ４）。この画像フォーマットＦｉと符号化フレームレートＲｆと符号化ビットレートＲｂの値により、映像符号化処理部１４は、画像キャプチャーボードや、ディジタルカメラである映像入力部１５から入力された映像データＤｐに対し、操作者が所望する画質で映像符号化処理を行い、符号化映像データＣｐを出力する。
【００２０】
本実施例における利用者が操作する手順は、図１２と同様である。始めに、通信網／通信速度を設定する（ステップＳ１）。次に通信開始後（ステップＳ２）、画質調整パラメータの設定の入力操作あるいは変更の入力操作を行う（ステップＳ３）。映像の画質が希望するものになったか判定し（ステップＳ４）、なったなら操作を終了し、ならなかったらステップＳ３に戻る。画質調整パラメータＰｑの入力操作をした時点で、映像は希望する最適な画質となっているので、従来方法と比べてより迅速かつ的確に画質調整を行うことができる。
【００２１】
次に、この発明の第３の実施例を示す。第２実施例においては、選択したビットレートに対し、予めとり得るフレームレートの数が図１５の例では７つのため、フレームレートの値が例えば１，３，５，．．．．（符号化ビットレートが６４ｋｂｐｓの時）と、予め決めたとびとびの値しかとることができないが、この第３実施例は、符号化フレームレートが連続的に変化／設定可能な場合の例である。
【００２２】
図１６は、第３実施例に関わる映像符号化装置１０の構成例を示した図である。また図１７は、本装置の画質調整部の動作例とともに本実施例での画質調整方法の処理フローを示した図である。更に図１８は、本実施例での符号化フレームレートＲｆと適用可能な画像フォーマットＦｉの関係を示す変換テーブルである。
パラメータ変換テーブルは、図９を基に、図１８に示すように複数の符号化ビットレートＲｂの値に対しそれぞれ符号化フレームレートＲｆの範囲と、その範囲に適した画像フォーマットＦｉが対応するように作成され、記憶部１３に予め記憶される。変換テーブルに示すように、各符号化ビットレートに対し動作可能なフレームレートＲｆの最大範囲が、例えばビットレート３２ｋｂｐｓに対して１〜７フレーム／ｓｅｃ、６４ｋｂｐｓに対して１〜１３フレーム／ｓｅｃと決められており、これらの各フレームレート最大範囲は図９に基づいてそれぞれ画像フォーマットＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦに対し最適となるように３つの領域に分割されている。この実施例では各符号化ビットレートが選択されると、対応するフレームレートＲｆの最大範囲が例えば図８のスライダＤ２６ の最大可動範囲となるように設定される。
【００２３】
操作者は通信の開始時に、利用する通信網ならびに伝送速度を設定する。あるいは、直に符号化ビットレートＲｂをパラメータ入力部１１から入力してもよい。これにより、符号化ビットレートＲｂが設定される（ステップＳ１）。次に、操作者がパラメータ入力部１１から映像の画質調整パラメータＰｑ（図８のスライダＤ２６ の位置）を画質調整部１２に入力することで、画質調整部１２の符号化フレームレート決定部１２ａ は、符号化ビットレートＲｂの値に対応して符号化フレームレートＲｆの最大可変範囲（図８のスライダのレバーＤ２６ で設定可能なフレームレートの範囲）を決定する（ステップＳ３）。操作者（利用者）が設定した画質調整パラメータＰｑの値（図８のスライダのレバーの位置）から符号化フレームレートＲｆを決定する（ステップＳ４）。画質調整部１２の画像フォーマット決定部１２ｂ は、符号化フレームレート決定部１２ａ で決定された符号化フレームレートＲｆと符号化ビットレートＲｂから図１８の変換テーブルに従って画像フォーマットＦｉを決定する（ステップＳ５）。このようにして得られた画像フォーマットＦｉと符号化ビットレートＲｂと符号化フレームレートＲｆを映像符号化処理部１４に入力する（ステップＳ６）。この画像フォーマットＦｉと符号化フレームレ一トＲｆと符号化ビットレートＲｂにより、映像符号化処理部１４は、映像入力部１５から入力された映像データＤｐに対し、操作者が設定した画質調整パラメータに対応する画質で映像符号化処理を行い、符号化映像データＣｐとして出力する。
【００２４】
図９に示した画質の主観評価に基づく３つの画像フォーマットＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦに対する最適領域は互いに直線を境界とするように示されているが、主観評価による実際の実験結果によればこれら３つの領域は境界で互いに重なり合った境界領域を有している。そのため、一定符号化ビットレートにおけるこれら最適領域は図１９に示すようになる。即ち、ＣＩＦ とＱＣＩＦの領域の隣接端縁は互いに重なり、またＱＣＩＦとＳＱＣＩＦ の領域の隣接端縁も互いに重なり合う。従って、この実験結果をそのまま利用すると、同一入力画質調整パラメータに対し、互いに重なり合う境界領域では２つの画像フォーマットが条件を満足していることになる。しかしながら、入力調整パラメータに対し、いずれか１つの画像フォーマットを選択しなければならない。
ところで、前述の図９に示した主観評価に基づく各画像フォーマットの最適領域の調査過程において、次の事実を発見した。上記パラメータ変換データの作成や画像フォーマットの決定にあたり、符号化ビットレートと符号化フレームレートの同じ組み合わせに対して複数の画像フォーマットが適用可能な場合、同一フレームレート、同一符号化ビットレートの条件下では、より大きな画像フォーマットを利用する方が（即ちＳＱＣＩＦよりはＱＣＩＦ、ＱＣＩＦよりはＣＩＦの方が）より高い画質となる。この性質を利用して、図１９で示した重なり合う境界領域では画像フォーマットの大きい方を優先的に選択するように画像フォーマットを決定することができる。図１８の表はこのようにして決められた領域の例を示している。また、符号化フレームレートの範囲に応じて、大きい画像フォーマットを優先するか、小さい画像フォーマットを優先するか決定することも容易に実現できる。
【００２５】
本実施例における利用者が操作する手順は、図１２と同様である。始めに、通信網／通信速度を設定する（ステップＳ１）。次に通信開始後（ステップＳ２）、画質調整パラメータの設定の入力操作あるいは変更の入力操作を行う（ステップＳ３）。映像の画質が希望するものになったか判定し（ステップＳ４）、なったならば操作を終了し、なってなければステップＳ３に戻る。画質調整パラメータの入力操作をした時点で、映像は希望する最適な画質となっているので、従来方法と比べてより迅速かつ的確に画質調整を行うことができる。
【００２６】
上述のステップＳ４において、操作者はＧＵＩ上でスライダレバーＤ２６ を動かして所望の画質を選択するが、その画質の調整は、現在のスライダ位置に対応して決定された符号化フレームレートと画像フォーマットに基づいて符号化された映像信号を復号して表示装置に再生し、その映像をみながら操作者が送信画像の画質を調整するように映像通信装置を構成すればよい。その例を図２０に示す。
【００２７】
図２０に示す映像通信装置１００ は映像符号化装置１０と、多重化部２１と、通信処理部２２と、多重分離部２３と、復号化部２４と、映像出力部２５と、表示装置２６とを有している。映像符号化装置１０は前述したどの実施例のものでもよい。ここでは図１６にした実施例を簡略化して示しており、図１６の記憶部１３は画質調整部１２’ に含まれているものとする。映像符号化装置１０により生成された符号化映像データＣｐ（複数の符号化映像パラメータにより構成されている）は、多重化部２１により多重化され（必要に応じて符号化音声パラメータと共に多重化され）、通信処理部２２により送信データに変換され、回線５０を介して他の映像通信装置３００ に送信される。映像通信装置３００ は映像通信装置１００ と同様に構成されている。映像通信装置３００ が送信した送信データは通信処理部２２で多重化データに変換され、その多重化データは多重分離部２３により符号化映像データＤｐに分離される。符号化映像データは復号化部２４で復号され、映像データとされ、この映像データは映像出力部２５で映像信号Ｓｐに変換され、表示装置２６に表示される。
【００２８】
図２０の映像通信装置において、装置１００ の操作者が、自分の送信する映像の画質をこの発明の映像符号化装置１０において調整する場合、通信処理部２２に与える多重化符号化映像データを破線で示すように多重分離部２３にも与えることにより、送信データを映像通信装置１００ 内の多重分離部、復号化部２４で再生し、映像出力部２５により表示装置２６に表示する。操作者はその表示映像をモニタしながら、画質調整を行うことができる。
【００２９】
あるいは、映像通信装置３００ の操作者が映像通信装置３００ の映像符号化装置１０内の画質調整パラメータ入力部（図示せず）により生成した画質調整パラメータとしてのスライダ位置情報を映像通信装置１００ に送信し、映像通信装置１００ は受信した位置情報を画質調整部１２’ に与えて送信映像の画質（フレームレート及び画像フォーマット）を制御して映像を送信し、映像通信装置３００ の操作者は受信した映像をみながらスライダの位置を調整して送信する位置情報を制御してもよい。
【００３０】
上述の図５、図１１、図１３、図１６で示した実施例の一部もしくは全部を、コンピュータを用いて機能させることができること、あるいは、図６、図１４、図１７で示したフロー図での処理の段階をコンピュータで実行させることができることは言うまでもなく、コンピュータでその機能を実現するためのプログラム、あるいは、コンピュータでその処理の段階を実行させるためのプログラムを、そのコンピュータが読み取り可能な記録媒体、例えば、ＦＤ（フロッピーディスク）や、ＭＯ（磁気光ディスク）， ＲＯＭ、メモリカード、ＣＤ， ＤＶＤ（デジタルビデオディスク）、リムーバブルディスクなどに記録して提供し、配布することが可能である。
【００３１】
ところで、通信システムの最大伝送ビットレートを一定とすれば、映像品質を動き重視（符号化フレームレートを高く）とすると、１画素あたりのデータ量が低く抑えられ画質は落ちるが、フレームレートは向上する。一方、画質重視とすると、１画素あたりのデータ量が大きくなり画質は良くなるが、フレームレートは低下する。この様に従来、テレビ電話、会議システムにおける画質調整法では利用者自らが送信映像の画像フォーマットと映像品質を指定していた。
【００３２】
ここで一般的な映像通信装置では、符号化フレームレートは１から３０フレーム／ｓｅｃまで選択可能であり、ユーザが通信する相手に、より精細な画像を送りたい場合は１フレーム／ｓｅｃに近づけ（従って動きは遅くなる）、逆に、より動きのある画像を送りたい場合は、３０フレーム／ｓｅｃに近づけ（この場合、逆に精細さは無くなる）る。
【００３３】
しかし、実際、映像通信装置に搭載された、映像符号化ソフトウェアで、通信相手に符号化フレームレートの最大値である３０フレーム／ｓｅｃを指定しても、映像通信装置自身の処理能力や、映像をキャプチャするデバイスの処理能力などの限界により抑えられてしまい、実際の符号化フレームレートは、希望とする符号化フレームレートの値に達しない場合や、映像符号化ソフトウエア自身の処理能力の限界により、指定した符号化フレームレートの値を出せない場合がある。例えば、フレームレートを１５フレーム／ｓｅｃとした時に、映像符号化ソフトウェアの処理能力が２０フレーム／ｓｅｃ出せるにも関わらず、映像通信装置の処理能力が、１３フレーム／ｓｅｃであるため、結果として最大１３フレーム／ｓｅｃまでしか実現できない場合や、符号化フレームレートを１５フレーム／ｓｅｃとした時に、映像通信装置の処理能力は２０フレーム／ｓｅｃ出せるにも関わらず、映像符号化ソフトウェアの処理能力が１３フレーム／ｓｅｃであるため、結果として、最高１３フレーム／ｓｅｃしか出せなくなっている場合がある。
【００３４】
そのため、例えば符号化フレームレートの値を順次大きくして、映像を現在の動きよりも速くしようとしても、動きが速くならなかった場合は、既にそのフレームレートの値、もしくはその値より小さいフレームレートで、映像通信装置、または、映像符号化ソフトウェアの限界により、いくら符号化フレームレートの値を大きくしたとしても、それ以上の速い動きを得ることができない状態であったと推定される。また、フレームレートを大きくして動きが速くなったのだが、更にもっと速い動きを得たいと思った場合は、再度フレームレートの設定を大きくし、実際に映像の動きが速くなったか判断を行わなければならなかった。つまりユーザは、映像通信装置で、ＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦといった、画像フォーマットごとに、実際に送信される映像の符号化フレームレートが、どれだけであるかといった事を知るためには、符号化フレームレートの最小値１から順次増加して各フレームレートでそれぞれの画像フォーマットがどれだけの符号化フレームレートを出せるのかといった事を、調べておかなければならない。
【００３５】
また、以上では説明を簡潔にするため、映像通信装置に映像符号化ソフトウェアを搭載させて映像符号化を行う場合について説明記載しているが、この映像通信装置は、専用の装置（ハードウエア）のみを指すものではない。映像通信装置は汎用のパーソナルコンピュータであってもよい。ところが、汎用のパーソナルコンピュータでは、中央演算器ＣＰＵの処理能力は機種によりまちまちである。
【００３６】
そこで同一の映像符号化ソフトウェアを走行させても、異なる映像通信装置（汎用のパーソナルコンピュータも、含む）を使用すると、映像符号化ソフトウェアの処理能力と映像通信装置の処理能力の間に齟齬が発生してしまい、上述と同様の操作が必要であった。
このように映像符号化ソフトウェアは一般にどんな映像通信装置に搭載されるのか分からないため、低速な映像通信装置に搭載された場合でも、その映像通信装置の処理能力を超えた符号化パラメータを指定できてしまう。このため、実際には所望の映像品質を得られないということが生じる。あるいは、映像符号化処理のみで、映像通信装置の演算処理能力を一杯に使ってしまい、同一の映像通信上で同時に処理される他の演算処理が円滑に実行されなくなってしまい、例えば、音声符号化処理を同時に処理させようとすると、音声が時々途切れるなどの支障があるという問題が生じる。
【００３７】
従来の映像符号化方式ではこのように、映像品質（符号化フレームレート）は、それぞれの画像フォーマットごとに、最大で３０フレーム／ｓｅｃまでの値をとることが理論上は可能である。そこで、前述したように、映像符号化ソフトウェアはどれぐらいの処理能力を有する映像通信装置上で走行させるのかが不明であるため、映像符号化ソフトウェアの処理能力と映像通信装置の処理能力との間に齟齬が発生していた。このために、所望の映像品質が得られない。更には、映像通信装置上で走行させている他の演算処理が円滑に実行できなくなってしまうという問題があった。後者については、特に、音声符号化処理と同時に走行させている場合では、処理が間欠的にしか実行できず、音声に途切れが発生するなど、映像音声の同時通信が実行できないという重大な問題がある。
【００３８】
このため、ユーザはある符号化ソフトウェアを使い、ある映像通信装置でどれだけ動きのある画像を送ることが出来るのかといった事を、事前にＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦの画像フォーマットごとに、符号化フレームレートの値を少しづつ大きくして行き、その限界を事前に調べておかなけれぱならなかった。
以下に説明するこの発明の第４実施例は、これらの問題を解決するように前述の実施例を改善したものである。
【００３９】
図２１は、この発明による映像符号化装置の第４実施例を示し、図２２はその動作処理フロー図である。図２１に示すように、映像符号化装置１０は、パラメータ入力部１１と、画質調整部１２と、映像入力部１５と、映像符号化処理部１４と、記憶部１３とを有すると共に、更に符号化時間測定部１７と、符号化フレームレート算出部１８が設けられている。また、画質調整部１２は、映像調整処理メイン部１２Ｍと、映像符号化パラメータ生成部１２ａｂとを有している。
【００４０】
図において、画質調整部１２の映像調整処理メイン部１２Ｍから映像符号化パラメータ生成部１２ａｂヘキャリブレーションの指示を行い、その指示を受けた映像符号化パラメータ生成部１２ａｂは映像符号化処理部１４に対して、ＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦ それぞれの画像フォーマットＦｉと、ある固定の符号化ビットレートＲｂを与えて符号化を行わせる。
【００４１】
その符号化結果を受けて、符号化時間測定部１７では、それぞれの画像フォーマットについて映像符号化にどれだけの所要時間Ｔを要したのか測定を行う（ステップＳ１）。次に、この測定結果から符号化フレームレート算出都１８によりそれぞれの画像フォーマットでどれだけの符号化フレームレートＲｆ＝１／Ｔを出せるのか計算する（ステップＳ２）。計算された結果を、記憶部１３に映像の画質調整パラメータと対応付けて記憶しておく（ステップＳ３）。この算出された符号化フレームレートは、与えられた符号化パラメータ（Ｆｉｎ， Ｒｂ）に対し、とり得る最大のフレームレートを表している。映像符号化パラメータ生成部１２ａｂは、ステップＳ４で操作者により映像調整処理メイン部１２Ｍに入力された所望の画質調整パラメータＰｑと、それに対応して記憶部１３に記憶されている符号化フレームレートＲｆに基づいて、映像の符号化パラメータの調整を行うことで、例えば動き重視を最大にした時に、その映像符号化ソフトウェアと映像通信装置１００ で出せる符号化フレームレートの最大値及び画像フォーマットを決定し（ステップＳ５）、それらの結果を映像符号化処理部１４に与えて符号化を行う。
【００４２】
図２３は図２１の映像符号化装置１０が使用された、図２０の実施例と同様な映像通信装置１００ の構成を示す。ただし、この例では音声信号処理用デバイスとして音声入力部２７及び音声符号化部２８が設けられ、入力音声を符号化し、多重化部２１で符号化映像データと多重化し、通信処理部２２から送出される。キャリブレーション時には、パラメータ入力部１１及び通信処理部２２は動作されず、多重化部２１の出力は多重分離部２３の入力に与えられる。画質調整部１２により指定された符号化ビットレートＲｂと各画像フォーマットとの組を映像符号化処理部１４に与えて、入力映像を所定フレーム数だけ符号化し、その符号化に必要とされた時間を符号化時間測定部１７により測定する。即ち、符号化時間測定部１７は、映像入力部１５による１フレーム分の画像データの取り込み処理と、映像符号化処理部１４によるその画像データの符号化処理と、復号化部２４による符号化映像データの復号処理と、映像出力部２５による復号映像データの表示処理の一連の処理シーケンス（プログラムシーケンス）を所定回数繰り返す（従って、所定フレーム数の映像が順次表示される）のに必要とされた時間を測定する。その測定結果から符号化フレームレート算出部１８により、１フレーム当たりの符号化に要した時間Ｔを求め、更にその逆数１／Ｔ をフレームレートとして求める。
【００４３】
図２４に、記憶部１３に記憶された符号化パラメータと画質調整パラメータの対応付けの一例を示す。映像符号化装置を含む映像通信装置によっては処理能力が異なるため、通信の開始に先立ち、上述のキャリブレーションを行い、ＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦで１秒間に何フレームまで映像符号化をすることができるかを計測する。例えばＣＩＦ で５フレーム分の符号化を行わせ、その符号化に要した時間が、１２５０ｍｓであるならば、１フレームの平均符号化時間は２５０ｍｓ である。そこで、１秒間に符号化できるフレーム枚数は４フレームとなる。ここでＣＩＦ が４フレーム、ＱＣＩＦが１０フレーム、ＳＱＣＩＦ が１３フレームであるならば、ＣＩＦ の最小フレーム枚数１からＳＱＣＩＦ の最大フレーム枚数１３を、画質調整パラメータの段階数（７−１） で均等分割し、そのフレームレートと、それに対応づくフォーマットを映像符号化パラメータとする。この場合の算出方法は（１３−１）／（７−１）＝２となり、ＣＩＦ の最小フレーム枚数１から２段階飛びでいくと、ＣＩＦ のフレームレートは１と３が選択される。続いて、フレームレートが５となるが、ＣＩＦ の最大フレーム枚数が４であるため、ＱＣＩＦのフォーマットを選択する。このように続いて、ＱＣＩＦでのフレームレートは５， ７， ９ と選択されるが、フレームレート１１となった時に、ＱＣＩＦの最大フレーム枚数が１０であるため、次にＳＱＣＩＦ のフォーマットを選択する。そして、ＳＱＣＩＦ ではフレームレート１１、１３を使用することになる。
【００４４】
映像符号ソフトウェアの処理能力の適切な利用を行うため、映像符号化装置１０自身の処理能力の他に、映像キャプチャデバイス１５、音声処理用デバイス２７，２８の処理等に対し、音声途切れを起こさせない等、処理能力の適切な割り当てを実現するため、映像通信装置等の処理能力の影響を受けない非実時間処理の条件下で映像符号化シュミレーションソフトウェアを使用して画質評価を実施し、次の性質を得た。
【００４５】
（１） 同一の符号化フレームレート、同一の符号化ビットレートで、画質評価をした結果、ＣＩＦ が最も評価が高いため、ある符号化フレームレートにおいて、符号化器の処理能力の点で、ＣＩＦ が使用可能であればＣＩＦ を利用し、そうでなければＱＣＩＦを使用し、更にそうでなければＳＱＣＩＦ を利用し、更にそうでなければそのフレームレートは利用対象外とする。
【００４６】
（２） 符号化処理のステップ数は常に同じなので、映像符号化所要時間は、符号化フレームレート及び符号化ビットレートには依存せず一定であり、画像フォーマットＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦそれぞれの１フレーム当たりのビット数に依存する。そのため、符号化所要時間はＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦの順に小さくなる。このため、映像通信装置の多重化部（図１９参照）においてビットレートの制限がないものとした場合、一組の適当な符号化フレームレートＲｆと符号化ビットレートＲｂを与えて符号化所要時間を計測すれば、あらゆる符号化フレームレートと符号化ビットレートに適用できる。
【００４７】
以上の評価結果が得られたが、実際には映像通信装置の処理能力は有限であり、これを考慮に入れた形で実装するためにも、処理能力のキャリブレーションを行い、実利用状態に近い状態で、各画像フォーマットで処理可能な最大符号化フレームレートを求める。キャリブレーションの契機としては、映像符号化装置の初回使用開始時、画像(受信・送信)の有無、キャプチャデバイス（映像入力手段）の登録又は変更・音声（受信・送信）の有無、映像符号化を実行させるためのプログラムと同時に動作する他のソフトウェアの登録又は変更時、ユーザによるマニュアル指示時がある。
【００４８】
キャリブレーションを行うには、まず、ビデオキャプチャ（映像入力部１５）、表示装置２６、音声入力部２７、音声符号化部２８、を設定どおり動作させた状態で、映像符号化を行う。また、多重化部２１の伝送ビットレートを無限大と仮定し、図２３中に示すように多重化部２１の出力を多重分離部２３の入力に与えることにより、ローカルループバックで相手画像として復号化し、表示装置２６に表示させるか、もしくは読み捨てる。映像符号化所要時間は、符号化フレームレート及び符号化ビットレートには依存せず一定であることの評価結果を利用し、各画像フォーマットにおいて、画像キャプチャから映像符号化までを、例えば符号化ビットレート３２ｋｂｐｓ、符号化フレームレート３ｆｐｓ で動作させる。順次各画像フォーマットについて、例えば連続して５フレームずつキャプチヤと符号化を繰り返し行ない、第２フレームから第６フレームまでの計５フレームの所要時間Ｔ（秒）の平均値を求める。各画像フォーマットについて求めたこの逆数１／Ｔ をその画像フォーマットの符号化フレームレートの上限とする。
【００４９】
上述のキャリブレーションにより、画像フォーマットＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦに対する符号化フレームレートの上限Ｒｆｃ， Ｒｆｑ， Ｒｆｓ がそれぞれ決められ、これらを第１実施例の説明で図９に示した適用領域と共に図２５に示す。第１実施例での斜め帯状領域が適用されるのは符号化ビットレートが比較的に低い場合であり、それより高い符号化ビットレートでは、符号化ビットレートの大きさによらず、最適な画像フォーマットの領域は符号化フレームレートの低い方から順にＣＩＦ， ＱＣＩＦ， ＳＱＣＩＦに適した３つの水平な帯状領域Ｈ３， Ｈ２， Ｈ１となる。従って、実際にそれらの結果を利用する場合は、これら斜め帯状領域と、水平帯状領域の組み合わせを使用し、例えば、画像フォーマットＳＱＣＩＦに適した領域は図２５中にハッチングで示してある。画像フォーマットＱＣＩＦ及びＣＩＦの場合も同様の組み合わせで使用する。
【００５０】
図２６は、この発明による映像符号化装置の第６実施例を示し、図２７はこの装置の動作フローを示す。
図２６は、映像符号化を行う演算器の種別と映像入力部の種別を入力することにより、各画像フォーマットごとに設定可能な、映像符号化フレーム枚数を規定する手段を備えた映像符号化装置１０の構成を示している。
【００５１】
まず、この映像符号化装置１０を動作させるにあたって、必ず利用者は、パラメータ入力部１１からこの映像符号化装置１０の演算器（映像符号化装置を構成する例えば図示してないコンピュータのＣＰＵ）の種別を画質調整部１２に入力する。更に、映像入力部１５の種別を画質調整部１２に入力する（ステップＳ２）。画質調整部１２では、入力された演算器の種別と、映像入力部１５の種別を記憶部１３に出力する。記憶部１３には、図２８に示すように演算器の種別と映像入力部１５の種別の組合せごとに映像の画質調整パラメータＰｑに対応する符号化パラメータ（フレームレートと画像フォーマット）を規定したテーブルが予め記憶されており（ステップＳ１）、画質調整部１２から入力された演算器種別と映像入力部１５の種別と画質調整パラメータＰｑの組をもとに、以降参照すべき映像符号化パラメータ（画像フォーマット及び符号化フレームレート）値を読出す（ステップＳ４）。
【００５２】
そこで映像符号化処理を開始する際には、利用者はパラメータ入力部１１により動きを重視したいのかあるいは映像（映像分解機能）を重視したいのかを指定する画質調整パラメータＰｑを画質調整部１２に入力する。画質調整部１２はこの画質調整パラメータＰｑと、先に入力されている演算器と映像入力部の種別をもとに、対応する符号化パラメータ（符号化フレームレートと画像フォーマット）を読出して、映像符号化処理部１４に出力する。これにより、映像入力部１５から入力された映像が、所望の画質で映像符号化処理部１４により符号化されて出力される。
【００５３】
なお、以上では、説明を簡潔にするために、画質調整部１２に対し、演算器の種別及び、映像入力部１５の種別をまずはじめに入力し、次に画質調整パラメータＰｑを入力する場合について示したが、これらについて同時に入力しても構わない。更に、演算器の種別及び、映像入力部１５の種別の入力は、映像符号化処理部１４の動作開始以前であればいつでもよく、例えば、映像符号化ソフトウェアを映像通信装置に搭載する時点（インストール時）に一度だけ入力し、以降その値を画質調整部１２あるいは記憶部１３に保持し続けることで、利用者の手間が省け同様の処理ができることは言うまでもない。更に、以上では利用者が演算器と映像入力部の種別を入力する場合について説明したが、利用者が入力するのではなく、例えば汎用パーソナルコンピュータなどで環境設定情報を参照することなどにより画質調整部１２で映像通信装置の演算器の種別及び映像入力部の種別を判別することで同様に利用者の手間が省け、同じ処理ができることも言うまでもない。
【００５４】
図２８は記憶部１３に記憶された映像入力部の種別と演算器の種別の各組に対し予め決めた画質調整パラメータと画像フォーマット及び符号化フレームレートの関係の一例を示す。なお、同図においては、図を簡潔にするために、映像入力部１５としてビデオキャプチャボード／カードとパラレルポートカメラの種類のみを抽出して他のパラメータ値との関係を示している。これは、パラレルポートカメラを動作させる場合に、演算器の処理が多くなるため他との区別が特に必要であるためでもある。しかし、この発明は、この２種類に限定するものではなく、例えば、ビデオキャプチャボード、ビデオキャプチャカード（ＰＣＭＣＩＡカードなどのこと）、及びパラレルポートカメラのように３種類を抽出したり、更に細かく、映像入力部の機器型番をそのまま指定することで、より正確に符号化パラメータを調整できることは言うまでもない。また「演算器の種別」では、処理能力は「タイプＡ」＜「タイプＢ」＜…とする。
【００５５】
これにより，図２９に示すように，ステップＳ１において、符号化フレームレートを今よりも速くすると、その時点で、映像符号化ソフトウェアと映像通信装置の、処理能力を最大限に使用した状態での符号化フレームレートが自動的に得られることになる。そのため、ユーザは実際に動きが符号化ソフトウエアと装置の処理能力による限界になっているのか、なっていないのかの判断をする必要がなく、またステップＳ２の判断において、動きを最大にしたい場合は、ステップＳ１の設定においてその画質調整パラメータを最大に設定すれば、無条件に映像の動きがソフトウエアと装置による限定の最大になる。
【００５６】
なお、図２１、図２６で示した構成部の機能の一部もしくは全部を、コンピュータを用いて実現することができること、あるいは、図２２、図２７などで示した処理手順をコンピュータで実行することができることは言うまでもなく、コンピュータでその機能を実現するためのプログラム、あるいは、コンピュータでその処理手順を実行するためのプログラムを、そのコンピュータが読み取り可能な記録媒体、例えば、ＦＤ（フロッピーディスク）や、Ｍ０、ＲＯＭ、メモリカード、ＣＤ、ＤＶＤ、リムーバブルディスクなどに記録して提供し、配布することが可能である。
【００５７】
上述した第４及び第５実施例によれば、画像フォーマット毎の映像符号化の処理時間の測定して画質調整パラメータに対応して画像フォーマットとフレームレートの範囲を決定するテータを得ることで、あるいは予め符号化処理する演算器と映像入力部の組み合わせ毎に画質調整パラメータに対応して画像フォーマットとフレームレートの範囲を決定するデータを登録しておくことで、映像通信装置の種別に左右されることなく、カメラなどの映像入出力装置や、スピーカなどのオーディオ入出力装置が接続された映像通信装置で、通信網を介したテレビ電話会議通信や映像の蓄積を行う場合などに、画像フォーマットと符号化フレームレートの最適な符号化パラメータを決定できるようにしたので、音の途切れなどを起こすことなく、映像符号化ソフトウェア等の符号化処理手段を最大限に動作させることができる。
【００５８】
【発明の効果】
以上説明したようにこの発明により、映像情報の通信、蓄積を行う映像通信装置等のユーザインタフェースにおいて、画像フォーマット、符号化フレームレートの選択による映像の画質調整を、一つのパラメータ操作で行わせることにより、画質を優先させるのか、動きを優先させるのかといった、総合的な映像の画質調整を迅速かっ的確に実現可能である。
【００５９】
また、この第４及び第５実施例によれば、カメラなどの映像入出力装置や、スピーカなどのオーディオ入出力装置が接続された映像通信装置で、通信網を介したテレビ電話会議通信や、映像の蓄積を行う場合など、異なった映像通信装置それぞれでの処理能力に合わせて、音声の途切れ等を起こすことなく、映像符号化ソフトウェアを最大限に動作させることが可能となり、画像フォーマットと符号化フレームレートの最適な処理パラメータの設定を行うことが可能となる。
【図面の簡単な説明】
【図１】Ａは画像フォーマットＳＱＣＩＦ を説明するための図、Ｂは画像フォーマットＱＣＩＦを説明するための図、Ｃは画像フォーマットＣＩＦ を説明するための図。
【図２】従来例でのユーザインタフェースによる映像設定画面を例示する図。
【図３】従来例でのユーザインタフェースによる操作手順を説明する図。
【図４】従来例でのユーザインタフェースによる映像の画質について説明する図。
【図５】この発明の原理を説明する構成図。
【図６】この発明の原理を説明する処理フロー図。
【図７】この発明の実施例によるユーザインタフェースの映像設定画面を例示する図である。
【図８】この発明の実施例によるユーザインタフェースの映像設定画面を例示する図。
【図９】この発明の実施例における符号化フレームレートと符号化ビットレート選択時における、画像フォーマットの適用範囲を説明する図。
【図１０】この発明の第１の実施例での変換テーブルの一例を示す図。
【図１１】この発明の第１の実施例に関わる映像符号化装置の構成図。
【図１２】この発明の実施例におけるユーザインタフェースによる操作手順を説明する図。
【図１３】この発明の第２の実施例に関わる映像符号化装置の構成図。
【図１４】この発明の第２の実施例における画質調整部の動作例とともに画質調整方法の例を示す処理フロー図。
【図１５】この発明の第２の実施例におけるパラメータ変換データの構成例を示す図。
【図１６】この発明の第３の実施例に関わる映像符号化装置の構成図。
【図１７】この発明の第３の実施例における画質調整部の動作例とともに画質調整方法の例を示す処理フロー図。
【図１８】この発明の第３の実施例における符号化フレームレートと適用可能な画像フーオーマットの関係を示す図。
【図１９】主観調査に基づく各画像フォーマットに対する最適な符号化フレームレートの領域を示す図。
【図２０】この発明の映像符号化装置を用いた映像通信装置の構成例を示す図。
【図２１】この発明に関わる映像符号化装置の第４の実施例を説明する図。
【図２２】図２１の装置の動作フロー図。
【図２３】図２１の映像符号化装置を使用した映像通信装置の構成を示す図。
【図２４】上記第５の実施例における記憶部での画質調整パラメータの対応付けの例を示す図。
【図２５】各画像フォーマットに対しキャリブレーションにより求めた符号化フレームレートの上限を図９の領域と共に示す図。
【図２６】この発明に関わる映像符号化装置の第６の実施例を説明する図。
【図２７】この発明に関わる映像通信方法の第２の実施例を説明する図。
【図２８】上記第６の実施例における記憶部でのパラメータの対応付けの例を示す図。
【図２９】この発明によるユーザインタフェースによる操作手順を示す図である。

Claims (3)

1. 画質調整パラメータを取得して、映像を符号化する際の符号化パラメータを調整することにより上記映像の画質を調整する画質調整方法であり、以下のステップを含む：
   （ａ）予め決めた少なくとも１つの符号化ビットレートに対し、上記画質調整パラメータの調整範囲と対応づけた符号化フレームレート範囲を分割して、映像符号化処理を行う演算器の種別及び映像入力手段の種別の組み合わせごとに、画像フォーマットごとに符号化フレームレートの適用範囲を定めた変換テーブルを予め記憶し、
   上記映像符号化を実行する装置において、上記装置の環境設定情報から映像符号化を行う演算器の種別及び上記装置に対し符号化されるべき映像を入力する映像入力手段の種別を検出し、
   （ｂ）画質を指定するパラメータを上記画質調整パラメータとして取得し、
   上記画質調整パラメータ及び上記検出結果をもとに、上記変換テーブルを参照して画像フォーマット及び符号化フレームレートを決定する。
2. 請求項１に記載の画質調整方法の各ステップをコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
3. 画質調整パラメータを入力して、映像を符号化する際の符号化パラメータを調整することにより上記映像の画質を調整可能な映像符号化装置を有する映像通信装置であり、上記映像符号化装置は、
   予め決めた少なくとも１つの符号化ビットレートに対し、上記画質調整パラメータの調整範囲と対応付けた符号化フレームレート範囲を分割して、映像符号化処理を実行する演算器の種別及び映像入力手段の種別の組み合わせごとに、上記画像フォーマットごとに符号化フレームレートの適用範囲が定められた変換テーブルを記憶する記憶部と、
   上記映像符号化装置の環境設定情報から映像符号化を行う演算器の種別及び映像入力手段の種別を検出し、画質を指定するパラメータ及び上記検出結果が入力され、上記変換テーブルを参照して画像フォーマット及び符号化フレームレートを決定して出力する画質調整部と、
   上記映像を、画質調整部において決定された上記画像フォーマットと符号化フレームレートに基づいて符号化し、送信すべき符号化映像データを出力する符号化処理部、
   とを含む。

Images