JP2000232368A - 画像・音声符号化装置 - Google Patents

画像・音声符号化装置

Info

Publication number
JP2000232368A
JP2000232368A JP3278999A JP3278999A JP2000232368A JP 2000232368 A JP2000232368 A JP 2000232368A JP 3278999 A JP3278999 A JP 3278999A JP 3278999 A JP3278999 A JP 3278999A JP 2000232368 A JP2000232368 A JP 2000232368A
Authority
JP
Japan
Prior art keywords
code amount
information
image
code
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP3278999A
Other languages
English (en)
Other versions
JP3327240B2 (ja
Inventor
Kiyoshi Ishiyama
清志 石山
Hidenobu Harasaki
秀信 原崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP3278999A priority Critical patent/JP3327240B2/ja
Priority to US09/497,544 priority patent/US6741649B1/en
Publication of JP2000232368A publication Critical patent/JP2000232368A/ja
Application granted granted Critical
Publication of JP3327240B2 publication Critical patent/JP3327240B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G10L19/22—Mode decision, i.e. based on audio signal content versus external parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Mathematical Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Algebra (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Pure & Applied Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

(57)【要約】 【課題】 可変レートの音声符号化方式を活用し、音声
符号と画像信号の符号量配分を適応的に行わせ、音声・
画像全体の品質の向上を実現する。 【解決手段】 音声存在情報２０５と、音声信号特徴情
報２０６と、音質情報２０８と、画質情報１０５と、符
号量配分情報５０１と、回線容量情報６０１とに基づい
て、符号量制御手段４１は、音声符号と画像符号の符号
量配分と音声符号化方式と符号化レートを決定し、これ
に基づき画像信号と音声信号を画像符号化器１１と音声
符号化器２４で符号化を行い、その出力である画像符号
１０２と音声符号２０４を多重化器３１で多重化し、多
重化されたビットストリームをネットワークに送出す
る。

Description

【発明の詳細な説明】
【０００１】
【発明が属する技術分野】本発明は、画像・音声符号化
装置に関し、特に、画像符号と音声符号の符号量配分を
決定して符号化を行う画像・音声符号化装置に関する。
【０００２】
【従来の技術】近年、通信技術は著しく発展しており、
それまでテキストデータ、音声データ、グラフィックス
データが主であった通信データに動画像データが加わ
り、通信のマルチメディア化が急速に進んできた。通信
末端においては、ＩＳＤＮ（サービス総合ディジタル
網）の普及や、ＰＳＴＮ回線（公衆交換電話網）におけ
るモデムの高速化などにより、動画像データを通信し得
るテレビ電話機、テレビ会議システムなどが実現されて
いる。このようなデジタル通信網及びアナログ通信網に
接続されるテレビ電話装置では、画像情報と音声情報を
多重化して送受信する通信機能を有しており、その接続
される通信網に対応する通信手順と、その通信手順に基
づく通信信号に付加して送受信される画像情報と音声情
報の符号化方式に関しては、ＩＴＵ−Ｔ（国際電気通信
連合−電気通信標準化部門）勧告等により、通信網の種
類毎に規定されている。
【０００３】図６６は、ＩＳＤＮや移動体通信網、電話
回線などで使用される従来の画像・音声符号化装置のブ
ロック図である。図６６において、画像・音声符号化装
置は入力される映像信号をＩＴＵ−Ｔ勧告Ｈ．２６１、
Ｈ．２６３などの可変長符号化方式等により符号化し、
画像符号をバッファ２に出力する画像符号化器１と、入
力される音声信号をＡＤ−ＰＣＭ（Adaptive Different
ial PCM)方式、ＣＥＬＰ(Code-Excited Linear Predict
iveCoding)方式等により符号化し、音声符号をバッファ
４に出力する音声符号化器３と、画像符号化器１から出
力される画像符号を一旦蓄積した後、画像符号を多重化
器５に出力するバッファ２と、音声符号化器３から出力
される音声符号を一旦蓄積した後、音声符号を多重化器
５に出力するバッファ４と、バッファ２から出力される
画像符号とバッファ４から出力される音声符号を多重化
し、合成ビットストリームとして図外の伝走路に送出す
る多重化器５により構成されている。画像符号化器１は
バッファ２のデータ蓄積残量を監視しており、このバッ
ファ量情報は、画像符号化器１において実行される符号
化処理中の生成符号量の制御に利用される。
【０００４】図６７は、従来の画像・音声復号装置のブ
ロック図である。図６７において画像・音声復号装置
は、上記図６６の画像・音声符号化装置により伝送され
る合成ビットストリームを分離し、画像符号をバッファ
７に、音声符号をバッファ９に出力する分離器５と、分
離器５から出力される画像符号を一旦蓄積した後、画像
符号を画像復号器８に出力するバッファ７と、バッファ
７から出力される画像符号を復号し、画像信号を出力す
る画像復号化器７と、分離器５から出力される音声符号
を一旦蓄積した後、音声符号を音声復号器１０に出力す
るバッファ９と、バッファ９から入力される音声符号を
復号し、音声信号を出力する音声復号化器１０からな
る。
【０００５】図６６、図６７に示した画像・音声符号化
装置、画像・音声復号装置により符号化、復号されて伝
送路を通って送受信される合成ビットストリームのデー
タ伝送速度は、利用する伝送路のデータ伝送速度により
決定される。
【０００６】また、ＩＳＤＮや電話網を使用する場合、
そのデータ伝送速度は固定値となる。ＩＳＤＮのデータ
伝送速度は、６４ｋｂｉｔ/ｓｅｃ、電話回線における
データ伝送速度は、一般には５６ｋｂｉｔ/ｓｅｃなど
である。
【０００７】それに対して、伝送路としてインターネッ
トやＡＴＭ（非同期転送モード）を考える場合、ある程
度の可変レートでの伝送が可能であるが統計的に固定レ
ートが望ましい。
【０００８】このように伝送路により決定されるデータ
伝送速度に対して、音声情報と画像情報の符号量配分を
適切に行うことが重要な問題となる。
【０００９】このような固定レートの伝送路を使用する
場合、まず音声の符号化レートを固定値で決定し、残り
のレートをビデオに割り当てていた。
【００１０】特開平６−２１６７７９号公報には、この
符号量配分方式に関しての一例が記載されている。この
公報に記載された画像・音声符号化装置の符号量配分方
式は、従来の画像・音声符号化装置に加えて、音声符号
化器から画像符号が蓄積されるバッファに音声の存在情
報を通知することを特徴としている。音声符号化器は、
音声の符号化に加えて、音声信号の有無を判断する役割
を持つ。ここで、音声が存在している場合は、従来の通
信装置と同様な動作を行う。音声が存在していない無音
状態の場合は、通常は音声に配分していた符号量を画像
符号に配分する。これにより無音の音声符号を伝送する
無駄を省くことができ、その分の符号量を画像符号に割
り当てて伝送する画像品質を向上させるというものであ
る。
【００１１】特願平２−２４６４３１号公報において
は、音声情報と映像情報を符号化し多重化して伝送する
方式において、映像データ及び音声データの伝送比率を
音声の有無に応じて割り当てることにより映像画質を向
上させる。この際、音声の有無を検出してこれに対応し
たクロックを生成して映像データと音声データとの多重
化を行い、この音声の有無をビット割当信号として受信
側に伝送することにより、受信側では音声の有無に応じ
たクロックを生成し、分離を行う方式である。
【００１２】特開昭６３−２５２０８３号公報において
は、入力される音声データの入力レベルから音声信号の
有無を常時検出し、その検出出力を音声有無情報として
定められたタイムスロット上に多重化するとともに、音
声有無情報から音声信号が有であれば音声信号と画像信
号に割り当てられたそれぞれのタイムスロット上に音声
データと画像データを多重化し、音声信号が無であれば
音声信号に割り当てられたタイムスロット上にも画像デ
ータを多重化する。
【００１３】これらの公報に記載されている方法はいず
れも、音声信号が無音の場合、無音の音声符号を伝送す
るかわりに音声に割り当てられた符号量を画像符号を割
り当てることにより、無音の音声符号を送る無駄を省
き、その分を画質の向上に使用するというものである。
【００１４】
【発明が解決しようとする課題】しかし、従来の技術で
問題となるのは、第１に、音声信号の符号化方式として
固定長符号化方式のみを考慮している点である。音声符
号化方式が固定長符号化方式の場合は、有音・無音だけ
を考慮して音声の符号量配分を行えば十分であるが、音
声符号化方式が可変長符号化方式の場合には、有音・無
音だけではなく音声符号量の変動を考慮して符号量配分
を行わなければならない。しかし従来例では、その点が
考慮されていない。つまり、音声の可変レート性を十分
に活用されていない。
【００１５】第２の問題点は、音声信号の有音・無音だ
けに基づいて画像と音声の符号量を決定しているため、
音声の品質に関して考慮されていない点である。音声の
符号量が固定の場合を考えると、符号量が固定であって
も音声の種類によって音声の品質が変動する。このた
め、フレーム毎に同じ量の符号量を割り当てると音質に
差が現れる。このような音質の変動に対して考慮がなさ
れていない。
【００１６】第３の問題点は、音声信号の符号化方式と
して複数の符号化方式を考慮していない点である。単一
の音声符号化方式しか考慮していないため、例えば音声
信号として、人間の声が入力されている場合でも音楽が
入力されている場合でも、同じ符号化方式で符号化を行
わなければならない。しかし、人間の声と音楽の特徴は
大きく異なっており、それぞれに適した音声符号化方式
は異なっているため、従来方法では非常に大きな音質の
劣化を招くことがある。
【００１７】第４の問題点は、音声信号の有音・無音だ
けに基づいて画像と音声の符号量を決定しているため、
画像の品質に関して考慮されていない点である。画像の
符号量が固定の場合を考えると、符号量が固定であって
も画像の種類によって画像の品質が変動する。これは一
般に、画像の動きが大きい場合、シーンチェンジが起こ
る場合、フレーム内符号化を行う場合などの時は、画像
の動きがほとんどない場合などに比べて符号量が増加す
るからである。このため、フレーム毎に同じ量の符号量
を割り当てると画質に差が現れる。つまり、音声の有無
のみで画像と音声の符号量を決定しているので、このよ
うな画質の変動に対して考慮がなされていない。
【００１８】第５の問題点は、音声信号の有音・無音だ
けに基づいて画像と音声の符号量を決定しているため、
音声の品質と画像の品質をトータルで制御できないとう
点である。これは、音声と画像の符号量配分は、有音時
と無音時の２パターンしかなく、自由度が少ないためで
ある。そのため、画像優先、音声優先、画像・音声の最
低品質保証などいろいろな基準に基づいて、音声の品質
と画像の品質をトータルで制御することができない。
【００１９】そこで、本発明は、上記画像・音声符号化
装置の課題を可変レートの音声符号化方式を活用し、音
声符号と画像信号の符号量配分を適応的に行うことがで
き、音声・画像全体の品質の向上を実現することを課題
としている。
【００２０】
【課題を解決するための手段】上記の課題を解決するた
めの本発明は、入力された画像信号に対し情報量を圧縮
する画像符号化手段と、前記画像符号化手段から出力さ
れる画像符号を蓄積し情報量を制御するレート制御手段
と、入力された音声信号に対しサンプリング周波数を変
換する周波数変換手段と、前記周波数変換手段から出力
される音声信号に対し情報量を圧縮する音声符号化手段
と、前記画像符号と前記音声符号に符号量配分を行う符
号量制御手段と、前記画像符号と前記音声符号を多重化
する多重化手段とを含む画像・音声符号化装置であっ
て、前記符号量制御手段は、前記画像符号と前記音声符
号の符号量配分を決定し、前記レート制御手段と前記周
波数変換手段と前記音声符号化手段に決定した符号量配
分を通知する。
【００２１】
【発明の実施の形態】以下、図面を参照して本発明の実
施の形態について説明する。
【００２２】図１を参照すると、本発明の第１の実施の
形態は、画像符号化器１１と、バッファ１２と、レート
制御器１４と、サンプリング周波数変換手段２３と、音
声符号化器２４と、バッファ２６と、多重化器３１と、
符号量制御手段４１とを含む。
【００２３】符号量制御手段４１は、音声符号と画像符
号の符号量配分を決定し、サンプリング周波数変換手段
２３にサンプリング周波数情報４０３を、音声符号化器
２４に音声符号量情報４０２を、レート制御器１４に画
像符号量情報４０１を出力する。
【００２４】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【００２５】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【００２６】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【００２７】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号のサンプリング
周波数を変換し、変換した音声信号２０３を音声符号化
器２４に出力する。
【００２８】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【００２９】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【００３０】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
図２を参照すると、本発明の第２の実施の形態は、画像
符号化器１１と、バッファ１２と、レート制御器１４
と、音判別手段２２と、サンプリング周波数変換手段２
３と、音声符号化器２４と、バッファ２６と、多重化器
３１と、符号量制御手段４１とを含む。
【００３１】符号量制御手段４１は、音判別手段２２か
ら出力される音声信号特徴情報２０６に基づき、音声符
号と画像符号の符号量配分を決定し、サンプリング周波
数変換手段２３にサンプリング周波数情報４０３を、音
声符号化器２４に音声符号量情報４０２を、レート制御
器１４に画像符号量情報４０１を出力する。
【００３２】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【００３３】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【００３４】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【００３５】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【００３６】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【００３７】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【００３８】レート制御器１４は、バッファ１２のデー
タ蓄積残量１０３と符号量制御手段４１から出力される
画像符号量情報４０１に基づいて画像符号化器１１が生
成する符号量を決定し、発生符号量情報１０６を画像符
号化器１１に出力する。
【００３９】音判別手段２２は、入力された音声信号よ
り音声信号の特徴を判別し、音信号特徴情報２０６を符
号量制御手段４１に出力する。
【００４０】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【００４１】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【００４２】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【００４３】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【００４４】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【００４５】図３を参照すると、本発明の第３の実施の
形態は、画像符号化器１１と、バッファ１２と、レート
制御器１４と、音検出手段２１と、サンプリング周波数
変換手段２３と、音声符号化器２４と、バッファ２６
と、多重化器３１と、符号量制御手段４１とを含む。
【００４６】符号量制御手段４１は、後述する音検出手
段２１から出力される音信号存在情報２０５に基づき、
音声符号と画像符号の符号量配分を決定し、サンプリン
グ周波数変換手段２３にサンプリング周波数情報４０３
を、音声符号化器２４に音声符号量情報４０２を、レー
ト制御器１４に画像符号量情報４０１を出力する。
【００４７】例えば、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【００４８】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【００４９】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【００５０】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【００５１】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【００５２】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、符号量制御手段４
１に音信号存在情報２０５を出力する。
【００５３】また、入力された音声信号をそのまま音声
信号２０１とし、サンプリング周波数変換手段２３に出
力する。
【００５４】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０１のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【００５５】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【００５６】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【００５７】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【００５８】図４を参照すると、本発明の第４の実施の
形態は、画像符号化器１１と、バッファ１２と、レート
制御器１４と、音検出手段２１と、音判別手段２２と、
サンプリング周波数変換手段２３と、音声符号化器２４
と、バッファ２６と、多重化器３１と、符号量制御手段
４１とを含む。
【００５９】符号量制御手段４１は、音検出手段２１か
ら出力される音声存在情報２０５と音判別手段２２から
出力される音声信号特徴情報２０６に基づき、音声符号
と画像符号の符号量配分を決定し、サンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【００６０】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【００６１】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【００６２】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【００６３】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【００６４】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【００６５】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【００６６】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【００６７】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【００６８】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【００６９】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【００７０】また、入力された音声信号をそのまま音声
信号２０１とし音判定手段２２に出力する。
【００７１】音判別手段２２は、入力された音声信号２
０１より音声信号の特徴を判別し、音信号特徴情報２０
６を符号量制御手段４１に出力する。
【００７２】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【００７３】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【００７４】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【００７５】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【００７６】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【００７７】図５を参照すると、本発明の第５の実施の
形態は、画像符号化器１１と、バッファ１２と、画質判
定手段１３と、レート制御器１４と、サンプリング周波
数変換手段２３と、音声符号化器２４と、バッファ２６
と、多重化器３１と、符号量制御手段４１とを含む。
【００７８】符号量制御手段４１は、画質判定手段１３
から出力される画質情報１０５に基づき音声符号と画像
符号の符号量配分を決定し、サンプリング周波数変換手
段２３にサンプリング周波数情報４０３を、音声符号化
器２４に音声符号量情報４０２を、レート制御器１４に
画像符号量情報４０１を出力する。
【００７９】例えば、画質情報１０５が画質の劣化を示
している場合、音声符号の符号量を減少させ、画像符号
の符号量を増加させることにより画質の劣化を抑制す
る。
【００８０】また、画質が良い状態の場合は、画像符号
の符号量を減少させ、音声符号の符号量を増加させるこ
とにより画質に大きな劣化を起こさずに音質を向上させ
ることができる。
【００８１】これにより画像の品質を一定の品質に保つ
ことができる。
【００８２】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【００８３】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。バッファ１２は、
蓄積していた画像符号を画像符号１０２として多重化器
３１に出力する。
【００８４】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【００８５】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【００８６】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号のサンプリング
周波数を変換し、変換した音声信号２０３を音声符号化
器２４に出力する。
【００８７】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【００８８】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【００８９】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【００９０】図６を参照すると、本発明の第６の実施の
形態は、画像符号化器１１と、バッファ１２と、画質判
定手段１３と、レート制御器１４と、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、バッファ２６と、多重化器３１と、符号量制御
手段４１とを含む。
【００９１】符号量制御手段４１は、画質判定手段１３
から出力される画質情報１０５と音判別手段２２から出
力される音声信号特徴情報２０６に基づき、音声符号と
画像符号の符号量配分を決定し、サンプリング周波数変
換手段２３にサンプリング周波数情報４０３を、音声符
号化器２４に音声符号量情報４０２を、レート制御器１
４に画像符号量情報４０１を出力する。
【００９２】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【００９３】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【００９４】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【００９５】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【００９６】これに加え、画質情報１０５が画質の劣化
を示している場合、音声符号の符号量を減少させ、画像
符号の符号量を増加させることにより画質の劣化を抑制
する。また、画質が良い状態の場合は、画像符号の符号
量を減少させ、音声符号の符号量を増加させることによ
り画質に大きな劣化を起こさずに音質を向上させること
ができる。
【００９７】これにより画像の品質を一定の品質に保つ
ことができる。
【００９８】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【００９９】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。バッファ１２は、
蓄積していた画像符号を画像符号１０２として多重化器
３１に出力する。
【０１００】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０１０１】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０１０２】音判別手段２２は、入力された音声信号よ
り音声信号の特徴を判別し、音信号特徴情報２０６を符
号量制御手段４１に出力する。
【０１０３】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０１０４】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０１０５】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０１０６】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０１０７】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０１０８】図７を参照すると、本発明の第７の実施の
形態は、画像符号化器１１と、バッファ１２と、画質判
定手段１３と、レート制御器１４と、音検出手段２１
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、バッファ２６と、多重化器３１と、符号量制御
手段４１とを含む。
【０１０９】符号量制御手段４１は、後述する音検出手
段２１から出力される音信号存在情報２０５に基づき、
音声符号と画像符号の符号量配分を決定し、サンプリン
グ周波数変換手段２３にサンプリング周波数情報４０３
を、音声符号化器２４に音声符号量情報４０２を、レー
ト制御器１４に画像符号量情報４０１を出力する。
【０１１０】例えば、画質情報１０５が画質の劣化を示
している場合、音声符号の符号量を減少させ、画像符号
の符号量を増加させることにより画質の劣化を抑制す
る。
【０１１１】また、画質が良い状態の場合は、画像符号
の符号量を減少させ、音声符号の符号量を増加させるこ
とにより画質に大きな劣化を起こさずに音質を向上させ
ることができる。
【０１１２】これにより画像の品質を一定の品質に保つ
ことができる。
【０１１３】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０１１４】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０１１５】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、バッファ１２か
ら入力される後述する画像生成符号量情報１０３に応じ
て生成符号量を制御する。
【０１１６】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０１１７】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０１１８】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０１１９】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０１２０】また、入力された音声信号をそのまま音声
信号２０１としサンプリング周波数変換手段２３に出力
する。
【０１２１】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０１のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０１２２】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０１２３】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０１２４】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０１２５】図８を参照すると、本発明の第８の実施の
形態は、画像符号化器１１と、バッファ１２と、画質判
定手段１３と、レート制御器１４と、音検出手段２１
と、音判別手段２２と、サンプリング周波数変換手段２
３と、音声符号化器２４と、バッファ２６と、多重化器
３１と、符号量制御手段４１とを含む。
【０１２６】符号量制御手段４１は、音検出手段２１か
ら出力される音声存在情報２０５と音判別手段２２から
出力される音声信号特徴情報２０６に基づき、音声符号
と画像符号の符号量配分を決定し、サンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０１２７】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０１２８】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０１２９】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０１３０】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０１３１】これに加え、画質情報１０５が画質の劣化
を示している場合、音声符号の符号量を減少させ、画像
符号の符号量を増加させることにより画質の劣化を抑制
する。
【０１３２】また、画質が良い状態の場合は、画像符号
の符号量を減少させ、音声符号の符号量を増加させるこ
とにより画質に大きな劣化を起こさずに音質を向上させ
ることができる。
【０１３３】これにより画像の品質を一定の品質に保つ
ことができる。
【０１３４】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０１３５】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０１３６】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０１３７】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０１３８】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０１３９】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０１４０】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０１４１】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０１４２】また、入力された音声信号をそのまま音声
信号２０１とし音判定手段２２に出力する。
【０１４３】音判別手段２２は、入力された音声信号２
０１より音声信号の特徴を判別し、音信号特徴情報２０
６を符号量制御手段４１に出力する。
【０１４４】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０１４５】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０１４６】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０１４７】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０１４８】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０１４９】図９を参照すると、本発明の第９の実施の
形態は、画像符号化器１１と、バッファ１２と、レート
制御器１４と、サンプリング周波数変換手段２３と、音
声符号化器２４と、音質判定手段２５と、バッファ２６
と、多重化器３１と、符号量制御手段４１とを含む。
【０１５０】符号量制御手段４１は、音質判定手段２５
から出力される音質情報２０８に基づいて、音声符号と
画像符号の符号量配分を決定し、サンプリング周波数変
換手段２３にサンプリング周波数情報４０３を、音声符
号化器２４に音声符号量情報４０２を、レート制御器１
４に画像符号量情報４０１を出力する。
【０１５１】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。
【０１５２】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。これにより音声の品質を一定の品質に保つことがで
きる。
【０１５３】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０１５４】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０１５５】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０１５６】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０１５７】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号のサンプリング
周波数を変換し、変換した音声信号２０３を音声符号化
器２４に出力する。
【０１５８】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０１５９】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０１６０】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０１６１】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０１６２】図１０を参照すると、本発明の第１０の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音判別手段２２と、サンプリング周
波数変換手段２３と、音声符号化器２４と、音質判定手
段２５と、バッファ２６と、多重化器３１と、符号量制
御手段４１とを含む。
【０１６３】符号量制御手段４１は、音判別手段２２か
ら出力される音声信号特徴情報２０６と音質判定手段２
５から出力される音質情報２０８に基づき、音声符号と
画像符号の符号量配分を決定し、サンプリング周波数変
換手段２３にサンプリング周波数情報４０３を、音声符
号化器２４に音声符号量情報４０２を、レート制御器１
４に画像符号量情報４０１を出力する。
【０１６４】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０１６５】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０１６６】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０１６７】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０１６８】これに加え、音質情報２０８が音質の劣化
を示している場合、音声符号の符号量を増加させ、画像
符号の符号量を減少させることにより音質の劣化を抑制
する。
【０１６９】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０１７０】これにより音声の品質を一定の品質に保つ
ことができる。
【０１７１】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０１７２】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０１７３】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０１７４】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０１７５】音判別手段２２は、入力された音声信号よ
り音声信号の特徴を判別し、音信号特徴情報２０６を符
号量制御手段４１に出力する。
【０１７６】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０１７７】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０１７８】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０１７９】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０１８０】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０１８１】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０１８２】図１１を参照すると、本発明の第１１の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、サンプリング周
波数変換手段２３と、音声符号化器２４と、音質判定手
段２５と、バッファ２６と、多重化器３１と、符号量制
御手段４１とを含む。
【０１８３】符号量制御手段４１は、音検出手段２１か
ら出力される音信号存在情報２０５と音質判定手段２５
から出力される音質情報２０８に基づき、音声符号と画
像符号の符号量配分を決定し、サンプリング周波数変換
手段２３にサンプリング周波数情報４０３を、音声符号
化器２４に音声符号量情報４０２を、レート制御器１４
に画像符号量情報４０１を出力する。
【０１８４】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。
【０１８５】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０１８６】これにより音声の品質を一定の品質に保つ
ことができる。
【０１８７】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０１８８】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０１８９】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０１９０】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。バッファ１２は、
蓄積していた画像符号を画像符号１０２として多重化器
３１に出力する。
【０１９１】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０１９２】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、符号量制御手段４
１に音信号存在情報２０５を出力する。
【０１９３】また、入力された音声信号をそのまま音声
信号２０１とし、サンプリング周波数変換手段２３に出
力する。
【０１９４】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０１のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０１９５】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０１９６】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０１９７】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０１９８】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０１９９】図１２を参照すると、本発明の第１２の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、音質判定手段２５と、バッファ２６と、多重化
器３１と、符号量制御手段４１とを含む。
【０２００】符号量制御手段４１は、音検出手段２１か
ら出力される音声存在情報２０５と音判別手段２２から
出力される音声信号特徴情報２０６と音質判定手段２５
から出力される音質情報２０８に基づき、音声符号と画
像符号の符号量配分を決定し、サンプリング周波数変換
手段２３にサンプリング周波数情報４０３を、音声符号
化器２４に音声符号量情報４０２を、レート制御器１４
に画像符号量情報４０１を出力する。
【０２０１】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０２０２】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０２０３】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０２０４】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０２０５】これに加え、音質情報２０８が音質の劣化
を示している場合、音声符号の符号量を増加させ、画像
符号の符号量を減少させることにより音質の劣化を抑制
する。
【０２０６】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０２０７】これにより音声の品質を一定の品質に保つ
ことができる。
【０２０８】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０２０９】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０２１０】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０２１１】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。バッファ１２は、
蓄積していた画像符号を画像符号１０２として多重化器
３１に出力する。
【０２１２】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０２１３】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０２１４】また、入力された音声信号をそのまま音声
信号２０１とし音判定手段２２に出力する。
【０２１５】音判別手段２２は、入力された音声信号２
０１より音声信号の特徴を判別し、音信号特徴情報２０
６を符号量制御手段４１に出力する。
【０２１６】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０２１７】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０２１８】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０２１９】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０２２０】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０２２１】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０２２２】図１３を参照すると、本発明の第１３の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、サンプリング
周波数変換手段２３と、音声符号化器２４と、音質判定
手段２５と、バッファ２６と、多重化器３１と、符号量
制御手段４１とを含む。
【０２２３】符号量制御手段４１は、音質判定手段２５
から出力される音質情報２０８と画質判定手段１３から
出力される画質情報１０５に基づき音声符号と画像符号
の符号量配分を決定し、サンプリング周波数変換手段２
３にサンプリング周波数情報４０３を、音声符号化器２
４に音声符号量情報４０２を、レート制御器１４に画像
符号量情報４０１を出力する。
【０２２４】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。
【０２２５】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０２２６】これにより音声の品質を一定の品質に保つ
ことができる。
【０２２７】画質情報１０５が画質の劣化を示している
場合、音声符号の符号量を減少させ、画像符号の符号量
を増加させることにより画質の劣化を抑制する。
【０２２８】また、画質が良い状態の場合は、画像符号
の符号量を減少させ、音声符号の符号量を増加させるこ
とにより画質に大きな劣化を起こさずに音質を向上させ
ることができる。
【０２２９】これにより画像の品質を一定の品質に保つ
ことができる。
【０２３０】画質情報１０５と音質情報２０８を利用す
ることにより、画像と音声の品質をトータルで制御する
ことが可能となる。
【０２３１】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０２３２】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。バッファ１２は、
蓄積していた画像符号を画像符号１０２として多重化器
３１に出力する。
【０２３３】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０２３４】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０２３５】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号のサンプリング
周波数を変換し、変換した音声信号２０３を音声符号化
器２４に出力する。
【０２３６】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０２３７】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０２３８】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０２３９】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０２４０】図１４を参照すると、本発明の第１４の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音判別手段２
２と、サンプリング周波数変換手段２３と、音声符号化
器２４と、音質判定手段２５と、バッファ２６と、多重
化器３１と、符号量制御手段４１とを含む。
【０２４１】符号量制御手段４１は、音判別手段２２か
ら出力される音声信号特徴情報２０６と音質判定手段２
５から出力される音質情報２０８と画質判定手段１３か
ら出力される画質情報１０５に基づき、音声符号と画像
符号の符号量配分を決定し、サンプリング周波数変換手
段２３にサンプリング周波数情報４０３を、音声符号化
器２４に音声符号量情報４０２を、レート制御器１４に
画像符号量情報４０１を出力する。
【０２４２】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０２４３】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０２４４】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０２４５】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０２４６】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。
【０２４７】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０２４８】画質情報１０５が画質の劣化を示している
場合、音声符号の符号量を減少させ、画像符号の符号量
を増加させることにより画質の劣化を抑制する。
【０２４９】また、画質が良い状態の場合は、画像符号
の符号量を減少させ、音声符号の符号量を増加させるこ
とにより画質に大きな劣化を起こさずに音質を向上させ
ることができる。
【０２５０】画質情報１０５と音質情報２０８を利用す
ることにより、画像と音声の品質をトータルで制御する
ことが可能となる。
【０２５１】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０２５２】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０２５３】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０２５４】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０２５５】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０２５６】音判別手段２２は、入力された音声信号よ
り音声信号の特徴を判別し、音信号特徴情報２０６を符
号量制御手段４１に出力する。
【０２５７】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０２５８】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０２５９】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０２６０】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０２６１】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０２６２】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０２６３】図１５を参照すると、本発明の第１５の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、サンプリング周波数変換手段２３と、音声符号化
器２４と、音質判定手段２５と、バッファ２６と、多重
化器３１と、符号量制御手段４１とを含む。
【０２６４】符号量制御手段４１は、音検出手段２１か
ら出力される音信号存在情報２０５と音質判定手段２５
から出力される音質情報２０８と画質判定手段１３から
出力される画質情報１０５に基づき、音声符号と画像符
号の符号量配分を決定し、サンプリング周波数変換手段
２３にサンプリング周波数情報４０３を、音声符号化器
２４に音声符号量情報４０２を、レート制御器１４に画
像符号量情報４０１を出力する。
【０２６５】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。
【０２６６】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０２６７】これにより音声の品質を一定の品質に保つ
ことができる。
【０２６８】画質情報１０５が画質の劣化を示している
場合、音声符号の符号量を減少させ、画像符号の符号量
を増加させることにより画質の劣化を抑制する。
【０２６９】また、画質が良い状態の場合は、画像符号
の符号量を減少させ、音声符号の符号量を増加させるこ
とにより画質に大きな劣化を起こさずに音質を向上させ
ることができる。
【０２７０】画質情報１０５と音質情報２０８を利用す
ることにより、画像と音声の品質をトータルで制御する
ことが可能となる。
【０２７１】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０２７２】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０２７３】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０２７４】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０２７５】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０２７６】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０２７７】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０２７８】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０２７９】また、入力された音声信号をそのまま音声
信号２０１としサンプリング周波数変換手段２３に出力
する。
【０２８０】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０１のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０２８１】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０２８２】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０２８３】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０２８４】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０２８５】図１６を参照すると、本発明の第１６の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、音判別手段２２と、サンプリング周波数変換手段
２３と、音声符号化器２４と、音質判定手段２５と、バ
ッファ２６と、多重化器３１と、符号量制御手段４１と
を含む。
【０２８６】符号量制御手段４１は、音検出手段２１か
ら出力される音声存在情報２０５と音判別手段２２から
出力される音声信号特徴情報２０６と音質判定手段２５
から出力される音質情報２０８と画質判定手段１３から
出力される画質情報１０５に基づき、音声符号と画像符
号の符号量配分を決定し、サンプリング周波数変換手段
２３にサンプリング周波数情報４０３を、音声符号化器
２４に音声符号量情報４０２を、レート制御器１４に画
像符号量情報４０１を出力する。
【０２８７】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０２８８】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０２８９】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０２９０】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０２９１】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。
【０２９２】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０２９３】これにより音声の品質を一定の品質に保つ
ことができる。
【０２９４】画質情報１０５が画質の劣化を示している
場合、音声符号の符号量を減少させ、画像符号の符号量
を増加させることにより画質の劣化を抑制する。また、
画質が良い状態の場合は、画像符号の符号量を減少さ
せ、音声符号の符号量を増加させることにより画質に大
きな劣化を起こさずに音質を向上させることができる。
画質情報１０５と音質情報２０８を利用することによ
り、画像と音声の品質をトータルで制御することが可能
となる。
【０２９５】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０２９６】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０２９７】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０２９８】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０２９９】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０３００】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０３０１】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０３０２】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０３０３】また、入力された音声信号をそのまま音声
信号２０１とし音判定手段２２に出力する。
【０３０４】音判別手段２２は、入力された音声信号２
０１より音声信号の特徴を判別し、音信号特徴情報２０
６を符号量制御手段４１に出力する。
【０３０５】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０３０６】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０３０７】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０３０８】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０３０９】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０３１０】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０３１１】図１７を参照すると、本発明の第１７の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、サンプリング周波数変換手段２３
と、音声符号化器２４と、バッファ２６と、多重化器３
１と、符号量制御手段４１と、符号量配分情報入力手段
５１を含む。
【０３１２】符号量制御手段４１は、符号量配分情報入
力手段５１から出力される符号量配分情報５０１に基づ
いて、音声符号と画像符号の符号量配分を決定し、サン
プリング周波数変換手段２３にサンプリング周波数情報
４０３を、音声符号化器２４に音声符号量情報４０２
を、レート制御器１４に画像符号量情報４０１を出力す
る。
【０３１３】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０３１４】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０３１５】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０３１６】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０３１７】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０３１８】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号のサンプリング
周波数を変換し、変換した音声信号２０３を音声符号化
器２４に出力する。
【０３１９】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０３２０】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０３２１】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０３２２】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０３２３】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０３２４】図１８を参照すると、本発明の第１８の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音判別手段２２と、サンプリング周
波数変換手段２３と、音声符号化器２４と、バッファ２
６と、多重化器３１と、符号量制御手段４１と、符号量
配分情報入力手段５１を含む。
【０３２５】符号量制御手段４１は、音判別手段２２か
ら出力される音声信号特徴情報２０６符号量配分情報と
入力手段５１から出力される符号量配分情報５０１に基
づき、音声符号と画像符号の符号量配分を決定し、サン
プリング周波数変換手段２３にサンプリング周波数情報
４０３を、音声符号化器２４に音声符号量情報４０２
を、レート制御器１４に画像符号量情報４０１を出力す
る。
【０３２６】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０３２７】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０３２８】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０３２９】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０３３０】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０３３１】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０３３２】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０３３３】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０３３４】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０３３５】音判別手段２２は、入力された音声信号よ
り音声信号の特徴を判別し、音信号特徴情報２０６を符
号量制御手段４１に出力する。
【０３３６】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０３３７】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０３３８】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０３３９】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０３４０】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０３４１】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０３４２】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０３４３】図１９を参照すると、本発明の第１９の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、サンプリング周
波数変換手段２３と、音声符号化器２４と、バッファ２
６と、多重化器３１と、符号量制御手段４１と、符号量
配分情報入力手段５１を含む。符号量制御手段４１は、
後述する音検出手段２１から出力される音信号存在情報
２０５と入力手段５１から出力される符号量配分情報５
０１に基づき、音声符号と画像符号の符号量配分を決定
し、サンプリング周波数変手段２３にサンプリング周波
数情報４０３を、音声符号化器２４に音声符号量情４０
２を、レート制御器１４に画像符号量情報４０１を出力
する。
【０３４４】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０３４５】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０３４６】例えば、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０３４７】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０３４８】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０３４９】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０３５０】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０３５１】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、符号量制御手段４
１に音信号存在情報２０５を出力する。
【０３５２】また、入力された音声信号をそのまま音声
信号２０１とし、サンプリング周波数変換手段２３に出
力する。
【０３５３】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０１のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０３５４】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０３５５】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０３５６】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０３５７】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０３５８】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０３５９】図２０を参照すると、本発明の第２０の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、ッファ２６と、多重化器３１と、符号量制御手
段４１と、符号量配分情報入力手段５１を含む。
【０３６０】符号量制御手段４１は、音検出手段２１か
ら出力される音声存在情報２０５と音判別手段２２から
出力される音声信号特徴情報２０６にと入力手段５１か
ら出力される符号量配分情報５０１基づき、音声符号と
画像符号の符号量配分を決定し、サンプリング周波数変
換手段２３にサンプリング周波数情報４０３を、音声符
号化器２４に音声符号量情報４０２を、レート制御器１
４に画像符号量情報４０１を出力する。
【０３６１】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０３６２】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０３６３】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０３６４】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０３６５】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０３６６】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。ここで、音信
号存在情報２０５が音声信号が無音であることを示して
いる場合、サンプリング周波数変換手段２３と音声符号
化器２４に演算を中止する命令として、サンプリング周
波数情報４０３と音声符号量情報４０２を出力する。
【０３６７】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０３６８】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０３６９】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０３７０】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０３７１】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０３７２】また、入力された音声信号をそのまま音声
信号２０１とし音判定手段２２に出力する。
【０３７３】音判別手段２２は、入力された音声信号２
０１より音声信号の特徴を判別し、音信号特徴情報２０
６を符号量制御手段４１に出力する。
【０３７４】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０３７５】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０３７６】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０３７７】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０３７８】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０３７９】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０３８０】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０３８１】図２１を参照すると、本発明の第２１の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ 、サンプリング
周波数変換手段２３と、音声符号化器２４と、バッファ
２６と、多重化器３１と、符号量制御手段４１と、符号
量配分情報入力手段５１を含む。
【０３８２】符号量制御手段４１は、画質判定手段１３
から出力される画質情報１０５と入力手段５１から出力
される符号量配分情報５０１に基づき音声符号と画像符
号の符号量配分を決定し、サンプリング周波数変換手段
２３にサンプリング周波数情報４０３を、音声符号化器
２４に音声符号量情報４０２を、レート制御器１４に画
像符号量情報４０１を出力する。
【０３８３】例えば、画質情報１０５が画質の劣化を示
している場合、音声符号の符号量を減少させ、画像符号
の符号量を増加させることにより画質の劣化を抑制す
る。
【０３８４】また、画質が良い状態の場合は、画像符号
の符号量を減少させ、音声符号の符号量を増加させるこ
とにより画質に大きな劣化を起こさずに音質を向上させ
ることができる。
【０３８５】これにより画像の品質を一定の品質に保つ
ことができる。
【０３８６】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０３８７】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０３８８】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を御する。
【０３８９】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０３９０】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０３９１】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０３９２】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０３９３】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号のサンプリング
周波数を変換し、変換した音声信号２０３を音声符号化
器２４に出力する。
【０３９４】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０３９５】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０３９６】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０３９７】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０３９８】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０３９９】図２２を参照すると、本発明の第２２の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ 、音判別手段２
２と、サンプリング周波数変換手段２３と、音声符号化
器２４ 、バッファ２６と、多重化器３１と、符号量制
御手段４１と、符号量配分情報入力手段５１を含む。
【０４００】符号量制御手段４１は、画質判定手段１３
から出力される画質情報１０５と音判別手段２２から出
力される音声信号特徴情報２０６と入力手段５１から出
力される符号量配分情報５０１に基づき、音声符号と画
像符号の符号量配分を決定し、サンプリング周波数変換
手段２３にサンプリング周波数情報４０３を、音声符号
化器２４に音声符号量情報４０２を、レート制御器１４
に画像符号量情報４０１を出力する。
【０４０１】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０４０２】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０４０３】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０４０４】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０４０５】これに加え、画質情報１０５が画質の劣化
を示している場合、音声符号の符号量を減少させ、画像
符号の符号量を増加させることにより画質の劣化を抑制
する。また、画質が良い状態の場合は、画像符号の符号
量を減少させ、音声符号の符号量を増加させることによ
り画質に大きな劣化を起こさずに音質を向上させること
ができる。これにより画像の品質を一定の品質に保つこ
とができる。
【０４０６】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０４０７】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０４０８】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０４０９】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。バッファ１２は、
蓄積していた画像符号を画像符号１０２として多重化器
３１に出力する。
【０４１０】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０４１１】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０４１２】音判別手段２２は、入力された音声信号よ
り音声信号の特徴を判別し、音信号特徴情報２０６を符
号量制御手段４１に出力する。
【０４１３】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０４１４】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０４１５】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０４１６】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０４１７】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０４１８】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０４１９】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。図２３を参照すると、本発明の第２３の
実施の形態は、画像符号化器１１と、バッファ１２と、
画質判定手段１３と、レート制御器１４、音検出手段２
１と、サンプリング周波数変換手段２３と、音声符号化
器２４、バッファ２６と、多重化器３１と、符号量制御
手段４１と、符号量配分情報入力手段５１を含む。
【０４２０】符号量制御手段４１は、後述する音検出手
段２１から出力される音信号存在情報２０５と入力手段
５１から出力される符号量配分情報５０１に基づき、音
声符号と画像符号の符号量配分を決定し、サンプリング
周波数変換手段２３にサンプリング周波数情報４０３
を、音声符号化器２４に音声符号量情報４０２を、レー
ト制御器１４に画像符号量情報４０１を出力する。
【０４２１】例えば、画質情報１０５が画質の劣化を示
している場合、音声符号の符号量を減少させ、画像符号
の符号量を増加させることにより画質の劣化を抑制す
る。
【０４２２】また、画質が良い状態の場合は、画像符号
の符号量を減少させ、音声符号の符号量を増加させるこ
とにより画質に大きな劣化を起こさずに音質を向上させ
ることができる。これにより画像の品質を一定の品質に
保つことができる。
【０４２３】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０４２４】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０４２５】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０４２６】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０４２７】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、バッファ１２か
ら入力される後述する画像生成符号量情報１０３に応じ
て生成符号量を制御する。
【０４２８】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０４２９】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０４３０】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０４３１】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０４３２】また、入力された音声信号をそのまま音声
信号２０１としサンプリング周波数変換手段２３に出力
する。
【０４３３】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０１のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０４３４】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０４３５】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０４３６】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０４３７】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０４３８】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０４３９】図２４を参照すると、本発明の第２４の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ 、音検出手段２
１と、音判別手段２２と、サンプリング周波数変換手段
２３と、 音声符号化器２４と、バッファ２６と、多重
化器３１と、符号量制御手段４１と、符号量配分情報入
力手段５１を含む。
【０４４０】符号量制御手段４１は、音検出手段２１か
ら出力される音声存在情報２０５と音判別手段２２から
出力される音声信号特徴情報２０６と入力手段５１から
出力される符号量配分情報５０１に基づき、音声符号と
画像符号の符号量配分を決定し、サンプリング周波数変
換手段２３にサンプリング周波数情報４０３を、音声符
号化器２４に音声符号量情報４０２を、レート制御器１
４に画像符号量情報４０１を出力する。
【０４４１】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０４４２】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０４４３】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０４４４】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０４４５】これに加え、画質情報１０５が画質の劣化
を示している場合、音声符号の符号量を減少させ、画像
符号の符号量を増加させることにより画質の劣化を抑制
する。また、画質が良い状態の場合は、画像符号の符号
量を減少させ、音声符号の符号量を増加させることによ
り画質に大きな劣化を起こさずに音質を向上させること
ができる。これにより画像の品質を一定の品質に保つこ
とができる。
【０４４６】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０４４７】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０４４８】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０４４９】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０４５０】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０４５１】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０４５２】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０４５３】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０４５４】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０４５５】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０４５６】また、入力された音声信号をそのまま音声
信号２０１とし音判定手段２２に出力する。
【０４５７】音判別手段２２は、入力された音声信号２
０１より音声信号の特徴を判別し、音信号特徴情報２０
６を符号量制御手段４１に出力する。
【０４５８】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０４５９】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０４６０】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０４６１】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０４６２】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０４６３】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０４６４】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０４６５】図２５を参照すると、本発明の第２５の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、サンプリング周波数 変換手段２３
と、音声符号化器２４と、音質判定手段２５と、バッフ
ァ２６と、多重化器３１と、符号量制御手段４１と、符
号量配分情報入力手段５１を含む。
【０４６６】符号量制御手段４１は、音質判定手段２５
から出力される音質情報２０８と入力手段５１から出力
される符号量配分情報５０１に基づいて、音声符号と画
像符号の符号量配分を決定し、サンプリング周波数変換
手段２３にサンプリング周波数報４０３を、音声符号化
器２４に音声符号量情報４０２を、レート制御器１４画
像符号量情報４０１を出力する。
【０４６７】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。また、
音質が良い状態の場合は、音声符号の符号量を減少さ
せ、画像符号の符号量を増加させることにより音質に大
きな劣化を起こさずに画質を向上させる。これにより音
声の品質を一定の品質に保つことができる。
【０４６８】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０４６９】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０４７０】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０４７１】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０４７２】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０４７３】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０４７４】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号のサンプリング
周波数を変換し、変換した音声信号２０３を音声符号化
器２４に出力する。
【０４７５】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０４７６】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０４７７】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０４７８】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０４７９】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０４８０】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０４８１】図２６を参照すると、本発明の第２６の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音判別手段２２と、サンプリング周
波数変換手段２３と、音声符号化器２４と、音質判定手
段２５と、バッファ２６と、多重化器３１と、符号量制
御手段４１と、符号量配分情報入力手段５１を含む。
【０４８２】符号量制御手段４１は、音判別手段２２か
ら出力される音声信号特徴情報２０６と音質判定手段２
５から出力される音質情報２０８と入力手段５１から出
力される符号量配分情報５０１に基づき、音声符号と画
像符号の符号量配分を決定し、サンプリング周波数変換
手段２３にサンプリング周波数情報４０３を、音声符号
化器２４に音声符号量情報４０２を、レート制御器１４
に画像符号量情報４０１を出力する。
【０４８３】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０４８４】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０４８５】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０４８６】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０４８７】これに加え、音質情報２０８が音質の劣化
を示している場合、音声符号の符号量を増加させ、画像
符号の符号量を減少させることにより音質の劣化を抑制
する。また、音質が良い状態の場合は、音声符号の符号
量を減少させ、画像符号の符号量を増加させることによ
り音質に大きな劣化を起こさずに画質を向上させる。こ
れにより音声の品質を一定の品質に保つことができる。
【０４８８】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０４８９】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０４９０】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０４９１】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０４９２】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０４９３】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０４９４】音判別手段２２は、入力された音声信号よ
り音声信号の特徴を判別し、音信号特徴情報２０６を符
号量制御手段４１に出力する。また、入力された音声信
号をそのまま音声信号２０２としサンプリング周波数変
換手段２３に出力する。
【０４９５】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０４９６】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０４９７】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０４９８】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０４９９】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０５００】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０５０１】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０５０２】図２７を参照すると、本発明の第２７の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、サンプリング周
波数変換手段２３と、音声符号化器２４と、音質判定手
段２５と、バッファ２６と、多重化器３１と、符号量制
御手段４１と、符号量配分情報入力手段５１を含む。
【０５０３】符号量制御手段４１は、音検出手段２１か
ら出力される音信号存在情報２０５と音質判定手段２５
から出力される音質情報２０８と入力手段５１から出力
される符号量配分情報５０１に基づき、音声符号と画像
符号の符号量配分を決定し、サンプリング周波数変換手
段２３にサンプリング周波数情報４０３を、音声符号化
器２４に音声符号量情報４０２を、レート制御器１４に
画像符号量情報４０１を出力する。
【０５０４】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。
【０５０５】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０５０６】これにより音声の品質を一定の品質に保つ
ことができる。
【０５０７】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０５０８】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０５０９】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０５１０】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０５１１】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０５１２】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０５１３】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０５１４】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０５１５】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、符号量制御手段４
１に音信号存在情報２０５を出力する。
【０５１６】また、入力された音声信号をそのまま音声
信号２０１とし、サンプリング周波数変換手段２３に出
力する。
【０５１７】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０１のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０５１８】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０５１９】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０５２０】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０５２１】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０５２２】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０５２３】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０５２４】図２８を参照すると、本発明の第２８の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、音質判定手段２５と、バッファ２６と、多重化
器３１と、符号量制御手段４１と、符号量配分情報入力
手段５１を含む。
【０５２５】符号量制御手段４１は、音検出手段２１か
ら出力される音声存在情報２０５と音判別手段２２から
出力される音声信号特徴情報２０６と音質判定手段２５
から出力される音質情報２０８にと入力手段５１から出
力される符号量配分情報５０１基づき、音声符号と画像
符号の符号量配分を決定し、サンプリング周波数変換手
段２ にサンプリング周波数情報４０３を、音声符号化
器２４に音声符号量情報４０２を、レート制御器１４に
画像符号量情報４０１を出力する。
【０５２６】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０５２７】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０５２８】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０５２９】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０５３０】これに加え、音質情報２０８が音質の劣化
を示している場合、音声符号の符号量を増加させ、画像
符号の符号量を減少させることにより音質の劣化を抑制
する。また、音質が良い状態の場合は、音声符号の符号
量を減少させ、画像符号の符号量を増加させることによ
り音質に大きな劣化を起こさずに画質を向上させる。こ
れにより音声の品質を一定の品質に保つことができる。
【０５３１】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０５３２】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０５３３】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０５３４】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０５３５】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０５３６】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０５３７】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０５３８】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０５３９】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０５４０】また、入力された音声信号をそのまま音声
信号２０１とし音判定手段２２に出力する。
【０５４１】音判別手段２２は、入力された音声信号２
０１より音声信号の特徴を判別し、音信号特徴情報２０
６を符号量制御手段４１に出力する。
【０５４２】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０５４３】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０５４４】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０５４５】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０５４６】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０５４７】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０５４８】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０５４９】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０５５０】図２９を参照すると、本発明の第２９の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ 、サンプリング
周波数変換手段２３と、音声符号化器２４と、音質判定
手段２５ 、バッファ２６と、多重化器３１と、符号量
制御手段４１と、符号量配分情報入力手段５１を含む。
【０５５１】符号量制御手段４１は、音質判定手段２５
から出力される音質情報２０８と画質判定手段１３から
出力される画質情報１０５と入力手段５１から出力され
る符号量配分情報５０１に基づき、音声符号と画像符号
の符号量配分を決定し、サンプリング周波数変換手段２
３にサンプリング周波数情報４０３を、音声符号化器２
４に音声符号量情報４０２を、レート制御器１４に画像
符号量情報４０１を出力する。
【０５５２】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。また、
音質が良い状態の場合は、音声符号の符号量を減少さ
せ、画像符号の符号量を増加させることにより音質に大
きな劣化を起こさずに画質を向上させる。
【０５５３】画質情報１０５が画質の劣化を示している
場合、音声符号の符号量を減少させ、画像符号の符号量
を増加させることにより画質の劣化を抑制する。また、
画質が良い状態の場合は、画像符号の符号量を減少さ
せ、音声符号の符号量を増加させることにより画質に大
きな劣化を起こさずに音質を向上させることができる。
【０５５４】画質情報１０５と音質情報２０８を利用す
ることにより、画像と音声の品質をトータルで制御する
ことが可能となる。
【０５５５】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０５５６】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０５５７】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０５５８】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０５５９】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０５６０】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０５６１】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０５６２】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号のサンプリング
周波数を変換し、変換した音声信号２０３を音声符号化
器２４に出力する。
【０５６３】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０５６４】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０５６５】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０５６６】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０５６７】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０５６８】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０５６９】図３０を参照すると、本発明の第３０の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ と、音判別手段
２２と、サンプリング周波数変換手段２３と、音声符号
化器２４ と、音質判定手段２５と、バッファ２６と、
多重化器３１と、符号量制御手段４１と、符号量配分情
報入力手段５１を含む。
【０５７０】符号量制御手段４１は、音判別手段２２か
ら出力される音声信号特徴情報２０６と音質判定手段２
５から出力される音質情報２０８と画質判定手段１３か
ら出力される画質情報１０５と入力手段５１から出力さ
れる符号量配分情報５０１に基づき、音声符号と画像符
号の符号量配分を決定し、サンプリング周波数変換手段
２３に ンプリング周波数情報４０３を、音声符号化器
２４に音声符号量情報４０２を、レート制御器１４に画
像符号量情報４０１を出力する。
【０５７１】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０５７２】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０５７３】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０５７４】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０５７５】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。また、
音質が良い状態の場合は、音声符号の符号量を減少さ
せ、画像符号の符号量を増加させることにより音質に大
きな劣化を起こさずに画質を向上させる。画質情報１０
５が画質の劣化を示している場合、音声符号の符号量を
減少させ、画像符号の符号量を増加させることにより画
質の劣化を抑制する。また、画質が良い状態の場合は、
画像符号の符号量を減少させ、音声符号の符号量を増加
させることにより画質に大きな劣化を起こさずに音質を
向上させることができる。画質情報１０５と音質情報２
０８を利用することにより、 画像と音声の品質をトー
タルで制御することが可能となる。
【０５７６】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０５７７】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０５７８】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０５７９】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０５８０】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０５８１】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０５８２】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０５８３】音判別手段２２は、入力された音声信号よ
り音声信号の特徴を判別し、音信号特徴情報２０６を符
号量制御手段４１に出力する。
【０５８４】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０５８５】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０５８６】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０５８７】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０５８８】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０５８９】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０５９０】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０５９１】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０５９２】図３１を参照すると、本発明の第３１の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、サンプリング周波数変換手段２３と、音声符号化
器２４と、音質判定手段２５と、バッファ２６と、多重
化器３１と、符号量制御手段４１と、符号量配分情報入
力手段５１を含む。
【０５９３】符号量制御手段４１は、音検出手段２１か
ら出力される音信号存在情報２０５と音質判定手段２５
から出力される音質情報２０８と画質判定手段１３から
出力される画質情報１０５にと入力手段５１から出力さ
れる符号量配分情報５０１基づき、音声符号と画像符号
の符号量配分を決定し、サンプリング周波数変換手段２
３に ンプリング周波数情報４０３を、音声符号化器２
４に音声符号量情報４０２を、レート制御器１４に画像
符号量情報４０１を出力する。
【０５９４】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。また、
音質が良い状態の場合は、音声符号の符号量を減少さ
せ、画像符号の符号量を増加させることにより音質に大
きな劣化を起こさずに画質を向上させる。これにより音
声の品質を一定の品質に保つことができる。
【０５９５】画質情報１０５が画質の劣化を示している
場合、音声符号の符号量を減少させ、画像符号の符号量
を増加させることにより画質の劣化を抑制する。また、
画質が良い状態の場合は、画像符号の符号量を減少さ
せ、音声符号の符号量増加させることにより画質に大き
な劣化を起こさずに音質を向上させることができる。画
質情報１０５と音質情報２０８を利用することにより、
画像と音声の品質をトータルで制御することが可能とな
る。
【０５９６】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０５９７】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０５９８】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０５９９】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０６００】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０６０１】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０６０２】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０６０３】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０６０４】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０６０５】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０６０６】また、入力された音声信号をそのまま音声
信号２０１としサンプリング周波数変換手段２３に出力
する。
【０６０７】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０１のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０６０８】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０６０９】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０６１０】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０６１１】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０６１２】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０６１３】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０６１４】図３２を参照すると、本発明の第３２の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ と、音検出手段
２１と、音判別手段２２と、サンプリング周波数変換手
段２３と、音声符号化器２４と、音質判定手段２５と、
バッファ２６と、多重化器３１と、符号量制御手段４１
と、符号量配分情報入力手段５１を含む。
【０６１５】符号量制御手段４１は、音検出手段２１か
ら出力される音声存在情報２０５と音判別手段２２から
出力される音声信号特徴情報２０６と音質判定手段２５
から出力される音質情報２０８と画質判定手段１３から
出力される画質情報１０５と入力手段５１から出力され
る符号量配分情報５０１に基づき、音声符号と画像符号
の符量配分を決定し、サンプリング周波数変換手段２３
にサンプリング周波数情報４０３を、音声符号化器２４
に音声符号量情報４０２を、レート制御器１４に画像符
号量情報４０１を出力する。
【０６１６】例えば、音信号特徴情報２０６が音声信号
が人間の音声であることを示している場合、人間の音声
に適した符号化方式、符号化レートを決定する。
【０６１７】また、音声信号が音楽であることを示して
いる場合、音楽に適した符号化方式、符号化レートを決
定する。
【０６１８】符号化方式と符号化レートを決定した後、
サンプリング周波数変換手段２３に必要なサンプリング
周波数情報４０３を、音声符号化器２４に音声符号量情
報４０２を出力する。
【０６１９】つまり、レート制御器１４に画像符号量情
報４０１を出力することにより、音声符号量が増加した
場合には画像符号量を減少させ、音声符号量が減少した
場合には画像符号量を増加させることにより、全体の符
号量が伝送路のデータ伝送速度を超えないように適応的
に符号量の制御を行う。
【０６２０】音質情報２０８が音質の劣化を示している
場合、音声符号の符号量を増加させ、画像符号の符号量
を減少させることにより音質の劣化を抑制する。
【０６２１】また、音質が良い状態の場合は、音声符号
の符号量を減少させ、画像符号の符号量を増加させるこ
とにより音質に大きな劣化を起こさずに画質を向上させ
る。
【０６２２】これにより音声の品質を一定の品質に保つ
ことができる。
【０６２３】画質情報１０５が画質の劣化を示している
場合、音声符号の符号量を減少させ、画像符号の符号量
を増加させることにより画質の劣化を抑制する。また、
画質が良い状態の場合は、画像符号の符号量を減少さ
せ、音声符号の符号量 を増加させることにより画質に
大きな劣化を起こさずに音質を向上させることができ
る。画質情報１０５と音質情報２０８を利用することに
より、画像と音声の品質をトータルで制御することが可
能となる。
【０６２４】符号量配分情報５０１は音声符号と画像符
号の符号量配分を出力する。
【０６２５】符号量制御手段４１はその符号量配分で音
声符号と画像符号を出力するようにサンプリング周波数
変換手段２３にサンプリング周波数情報４０３を、音声
符号化器２４に音声符号量情報４０２を、レート制御器
１４に画像符号量情報４０１を出力する。
【０６２６】ここで、音信号存在情報２０５が音声信号
が無音であることを示している場合、サンプリング周波
数変換手段２３と音声符号化器２４に演算を中止する命
令として、サンプリング周波数情報４０３と音声符号量
情報４０２を出力する。
【０６２７】また、音声符号に割り当てていた符号量を
画像符号に割り当てるようにレート制御器１４に画像符
号量情報４０１を出力する。
【０６２８】画像符号化部１１は、入力される画像信号
を可変長符号化方式に基づいて符号化し、画像符号１０
１をバッファ１２に出力するとともに、レート制御器１
４から出力される後述する発生画像符号量情報１０６に
応じて生成符号量を制御する。
【０６２９】また、符号化されたフレームの画質情報１
０４を画質判定手段１３に出力する。
【０６３０】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０６３１】画質判定手段１３は、画質情報１０４より
画質の変動を計算し、画質情報１０５を符号量制御手段
４１に出力する。
【０６３２】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０６３３】音検出手段２１は、入力された音声信号よ
り音声信号が有音か無音かを検出し、音信号存在情報２
０５を符号量制御手段４１に出力する。
【０６３４】また、入力された音声信号をそのまま音声
信号２０１とし音判定手段２２に出力する。
【０６３５】音判別手段２２は、入力された音声信号２
０１より音声信号の特徴を判別し、音信号特徴情報２０
６を符号量制御手段４１に出力する。
【０６３６】また、入力された音声信号をそのまま音声
信号２０２としサンプリング周波数変換手段２３に出力
する。
【０６３７】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力される音声符号２０２のサンプ
リング周波数を変換し、変換した音声信号２０３を音声
符号化器２４に出力する。
【０６３８】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいて、入力
される音声信号２０３を選択された符号化方式と符号化
レートで符号化し、音声符号２０４をバッファ２６に出
力する。
【０６３９】音質判定手段２５は、音声符号化器２４か
ら出力される音質情報２０７より音質の変動を計算し、
音質情報２０８を符号量制御手段４１に出力する。
【０６４０】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０６４１】多重化器３１は、バッファ１２から出力さ
れる画像符号１０２とバッファ２６から出力される音声
符号２０９を多重化し、一連の合成ビットストリームと
して図外の通信制御回路等を介して伝送路に送出する。
【０６４２】符号量配分情報入力手段５１は、例えばユ
ーザなどの要求を入力とし、希望とする音声符号と画像
符号の符号量配分を指定する。
【０６４３】これにより画像に優先的に多くの符号量を
割り当てたり、音声に多くの符号量を割り当てたりする
ことができる。
【０６４４】図３３を参照すると、本発明の第３３の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、サンプリング周波数変換手段２３
と、音声符号化器２４と、バッファ２６と、多重化器３
１と、符号量制御手段４１と、回線容量監視手段６１
と、回線容量変更手段６２を含む。
【０６４５】符号量制御手段４１以外の動作は、前記第
１の実施の形態の動作と同様である。
【０６４６】符号量制御手段４１は、前記第１の実施の
形態の動作に加えて回線容量監視手段６１より出力され
る回線容量情報６０１を用いて、画像・音声符号化装置
全体の符号量を決定する。
【０６４７】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６４８】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６４９】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６５０】図３４を参照すると、本発明の第３４の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音判別手段２２と、サンプリング周
波数変換手段２３と、音声符号化器２４と、バッファ２
６と、多重化器３１と、符号量制御手段４１と、回線容
量監視手段６１と、回線容量変更手段６２を含む。
【０６５１】符号量制御手段４１以外の動作は、前記第
２の実施の形態の動作と同様である。
【０６５２】符号量制御手段４１は、前記第２の実施の
形態の動作に加えて回線容量監視手段６１より出力され
る回線容量情報６０１を用いて、画像・音声符号化装置
全体の符号量を決定する。
【０６５３】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６５４】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６５５】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６５６】図３５を参照すると、本発明の第３５の実
施の形態は、画像符号化器１１と、バッファ １２と、
レート制御器１４と、音検出手段２１と、サンプリング
周波数変換手段２３と、音声符号化器２４と、バッファ
２６と、多重化器３１と、符号量制御手段４１と、回線
容量監視手段６１と、回線容量変更手段６２を含む。
【０６５７】符号量制御手段４１以外の動作は、前記第
３の実施の形態の動作と同様である。
【０６５８】符号量制御手段４１は、前記第３の実施の
形態の動作に加えて回線容量監視手段６１より出力され
る回線容量情報６０１を用いて、画像・音声符号化装置
全体の符号量を決定する。
【０６５９】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６６０】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６６１】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６６２】図３６を参照すると、本発明の第３６の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、バッファ２６と、多重化器３１と、符号量制御
手段４１と、回線容量監視手段６１と、回線容量変更手
段６２を含む。
【０６６３】符号量制御手段４１以外の動作は、前記第
４の実施の形態の動作と同様である。
【０６６４】符号量制御手段４１は、前記第４の実施の
形態の動作に加えて回線容量監視手段６１より出力され
る回線容量情報６０１を用いて、画像・音声符号化装置
全体の符号量を決定する。
【０６６５】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６６６】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６６７】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６６８】図３７を参照すると、本発明の第３７の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と 、サンプリン
グ周波数変換手段２３と、音声符号化器２４と、バッフ
ァ２６と、多重化器３１と、符号量制御手段４１と、回
線容量監視手段６１と、回線容量変更手段６２を含む。
【０６６９】符号量制御手段４１以外の動作は、前記第
５の実施の形態の動作と同様である。符号量制御手段４
１は、前記第５の実施の形態の動作に加えて回線容量監
視手段６１より出力される回線容量情報６０１を用い
て、画像・音声符号化装置全体の符号量を決定する。
【０６７０】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６７１】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６７２】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６７３】図３８を参照すると、本発明の第３８の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ と、音判別手段
２２と、サンプリング周波数変換手段２３と、音声符号
化器２４と 、バッファ２６と、多重化器３１と、符号
量制御手段４１と、回線容量監視手段６１と、回線容量
変更手段６２を含む。
【０６７４】符号量制御手段４１以外の動作は、前記第
６の実施の形態の動作と同様である。
【０６７５】符号量制御手段４１は、前記第６の実施の
形態の動作に加えて回線容量監視手段６１より出力され
る回線容量情報６０１を用いて、画像・音声符号化装置
全体の符号量を決定する。
【０６７６】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６７７】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６７８】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６７９】図３９を参照すると、本発明の第３９の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ と、音検出手段
２１と、サンプリング周波数変換手段２３と、音声符号
化器２４ と、バッファ２６と、多重化器３１と、符号
量制御手段４１と、回線容量監視手段６１と、回線容量
変更手段６２を含む。
【０６８０】符号量制御手段４１以外の動作は、前記第
７の実施の形態の動作と同様である。
【０６８１】符号量制御手段４１は、前記第７の実施の
形態の動作に加えて回線容量監視手段６１より出力され
る回線容量情報６０１を用いて、画像・音声符号化装置
全体の符号量を決定する。
【０６８２】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６８３】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６８４】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６８５】図４０を参照すると、本発明の第４０の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ と、音検出手段
２１と、音判別手段２２と、サンプリング周波数変換手
段２３と、音声符号化器２４と、バッファ２６と、多重
化器３１と、符号量制御手段４１と、回線容量監視手段
６１と、回線容量変更手段６２を含む。
【０６８６】符号量制御手段４１以外の動作は、前記第
８の実施の形態の動作と同様である。
【０６８７】符号量制御手段４１は、前記第８の実施の
形態の動作に加えて回線容量監視手段６１より出力され
る回線容量情報６０１を用いて、画像・音声符号化装置
全体の符号量を決定する。
【０６８８】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６８９】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６９０】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６９１】図４１を参照すると、本発明の第４１の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、サンプリング周波数変換手段２３
と、音声符号化器２４と、音質判定手段２５と、バッフ
ァ２６と、多重化器３１と、符号量制御手段４１と、回
線容量監視手段６１と、回線容量変更手段６２を含む。
【０６９２】符号量制御手段４１以外の動作は、前記第
９の実施の形態の動作と同様である。
【０６９３】符号量制御手段４１は、前記第９の実施の
形態の動作に加えて回線容量監視手段６１より出力され
る回線容量情報６０１を用いて、画像・音声符号化装置
全体の符号量を決定する。
【０６９４】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０６９５】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０６９６】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０６９７】図４２を参照すると、本発明の第４２の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音判別手段２２と、サンプリング周
波数変換手段２３と、音声符号化器２４と、音質判定手
段２５と、バッファ２６と、多重化器３１と、符号量制
御手段４１と、回線容量監視手段６１と、回線容量変更
手段６２を含む。
【０６９８】符号量制御手段４１以外の動作は、前記第
１０の実施の形態の動作と同様である。
【０６９９】符号量制御手段４１は、前記第１０の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７００】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７０１】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７０２】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７０３】図４３を参照すると、本発明の第４３の実
施の形態は、画像符号化器１１と、バッ ファ１２と、
レート制御器１４と、音検出手段２１と、サンプリング
周波数変換手段２３と、音声符号化器２４と、音質判定
手段２５と、バッファ２６と、多重化器３１と、符号量
制御手段４１と、回線容量監視手段６１と、回線容量変
更手段６２を含む。
【０７０４】符号量制御手段４１以外の動作は、前記第
１１の実施の形態の動作と同様である。
【０７０５】符号量制御手段４１は、前記第１１の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７０６】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７０７】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７０８】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７０９】図４４を参照すると、本発明の第４４の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、音質判定手段２５と、バッファ２６と、多重化
器３１と、符号量制御手段４１と、回線容量監視手段６
１と、回線容量変更手段６２を含む。
【０７１０】符号量制御手段４１以外の動作は、前記第
１２の実施の形態の動作と同様である。符号量制御手段
４１は、前記第１２の実施の形態の動作に加えて回線容
量監視手段６１より出力される回線容量情報６０１を用
いて、画像・音声符号化装置全体の符号量を決定する。
【０７１１】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７１２】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７１３】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７１４】図４５を参照すると、本発明の第４５の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ と、サンプリン
グ周波数変換手段２３と、音声符号化器２４と、音質判
定手段２５と、バッファ２６と、多重化器３１と、符号
量制御手段４１と、回線容量監視手段６１と、回線容量
変更手段６２を含む。
【０７１５】符号量制御手段４１以外の動作は、前記第
１３の実施の形態の動作と同様である。
【０７１６】符号量制御手段４１は、前記第１３の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７１７】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７１８】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７１９】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７２０】図４６を参照すると、本発明の第４６の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音判別手段２
２と、サンプリング周波数変換手段２３と、音声符号化
器２４と、音質判定手段２５と、バッファ２６と、多重
化器３１と、符号量制御手段４１と、回線容量監視手段
６１と、回線容量変更手段６２を含む。
【０７２１】符号量制御手段４１以外の動作は、前記第
１４の実施の形態の動作と同様である。符号量制御手段
４１は、前記第１４の実施の形態の動作に加えて回線容
量監視手段６１より出力される回線容量情報６０１を用
いて、画像・音声符号化装置全体の符号量を決定する。
【０７２２】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７２３】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７２４】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７２５】図４７を参照すると、本発明の第４７の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、サンプリング周波数変換手段２３と、音声符号化
器２４と、音質判定手段２５と、バッファ２６と、多重
化器３１と、符号量制御手段４１と、回線容量監視手段
６１と、回線容量変更手段６２を含む。
【０７２６】符号量制御手段４１以外の動作は、前記第
１５の実施の形態の動作と同様である。
【０７２７】符号量制御手段４１は、前記第１５の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７２８】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７２９】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７３０】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７３１】図４８を参照すると、本発明の第４８の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、音判別手段２２と、サンプリング周波数変換手段
２３と、音声符号化器２４と、音質判定手段２５と、バ
ッファ２６と、多重化器３１と、符号量制御手段４１
と、回線容量監視手段６１と、回線容量変更手段６２を
含む。
【０７３２】符号量制御手段４１以外の動作は、前記第
１６の実施の形態の動作と同様である。
【０７３３】符号量制御手段４１は、前記第１６の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７３４】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７３５】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７３６】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７３７】図４９を参照すると、本発明の第４９の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、サンプリング周波数変換手段２３
と、音声符号化器２４と、バッファ２６と、多重化器３
１と、符号量制御手段４１と、符号量配分情報入力手段
５１と、回線容量監視手段６１と、回線容量変更手段６
２を含む。
【０７３８】符号量制御手段４１以外の動作は、前記第
１７の実施の形態の動作と同様である。符号量制御手段
４１は、前記第１７の実施の形態の動作に加えて回線容
量監視手段６１より出力される回線容量情報６０１を用
いて、画像・音声符号化装置全体の符号量を決定する。
【０７３９】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７４０】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７４１】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７４２】図５０を参照すると、本発明の第５０の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音判別手段２２と、サンプリング周
波数変換手段２３と、音声符号化器２４と、バッファ２
６と、多重化器３１と、符号量制御手段４１と、符号量
配分情報入力手段５１と、回線容量監視手段６１と、回
線容量変更手段６２を含む。
【０７４３】符号量制御手段４１以外の動作は、前記第
１８の実施の形態の動作と同様である。符号量制御手段
４１は、前記第１８の実施の形態の動作に加えて回線容
量監視手段６１より出力される回線容量情報６０１を用
いて、画像・音声符号化装置全体の符号量を決定する。
【０７４４】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７４５】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７４６】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７４７】図５１を参照すると、本発明の第５１の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、サンプリング周
波数変換手段２３と、音声符号化器２４と、バッファ２
６と、多重化器３１と、符号量制御手段４１と、符号量
配分情報入力手段５１と、回線容量監視手段６１と、回
線容量変更手段６２を含む。
【０７４８】符号量制御手段４１以外の動作は、前記第
１９の実施の形態の動作と同様である。符号量制御手段
４１は、前記第１９の実施の形態の動作に加えて回線容
量監視手段６１より出力される回線容量情報６０１を用
いて、画像・音声符号化装置全体の符号量を決定する。
【０７４９】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７５０】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７５１】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７５２】図５２を参照すると、本発明の第５２の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、バッファ２６と、多重化器３１と、符号量制御
手段４１と、符号量配分情報入力手段５１と、回線容量
監視手段６１と、回線容量変更手段６２を含む。
【０７５３】符号量制御手段４１以外の動作は、前記第
２０の実施の形態の動作と同様である。
【０７５４】符号量制御手段４１は、前記第２０の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７５５】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７５６】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７５７】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７５８】図５３を参照すると、本発明の第５３の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、サンプリング
周波数変換手段２３と、音声符号化器２４と、バッファ
２６と、多重化器３１と、符号量制御手段４１と、符号
量配分情報入力手段５１と、回線容量監視手段６１と、
回線容量変更手段６２を含む。
【０７５９】符号量制御手段４１以外の動作は、前記第
２１の実施の形態の動作と同様である。
【０７６０】符号量制御手段４１は、前記第２１の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７６１】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７６２】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７６３】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７６４】図５４を参照すると、本発明の第５４の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、バッファ２６と、多重化器３１と、符号量制御
手段４１と、符号量配分情報入力手段５１と、回線容量
監視手段６１と、回線容量変更手段６２を含む。
【０７６５】符号量制御手段４１以外の動作は、前記第
２２の実施の形態の動作と同様である。
【０７６６】符号量制御手段４１は、前記第２２の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７６７】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７６８】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７６９】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７７０】図５５を参照すると、本発明の第５５の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、サンプリング周波数変換手段２３と、音声符号化
器２４と、バッファ２６と、多重化器３１と、符号量制
御手段４１と、符号量配分情報入力手段５１と、回線容
量監視手段６１と、回線容量変更手段６２を含む。
【０７７１】符号量制御手段４１以外の動作は、前記第
２３の実施の形態の動作と同様である。
【０７７２】符号量制御手段４１は、前記第２３の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７７３】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７７４】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７７５】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７７６】図５６を参照すると、本発明の第５６の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、音判別手段２２と、サンプリング周波数変換手段
２３と、音声符号化器２４と、バッファ２６と、多重化
器３１と、符号量制御手段４１と、符号量配分情報入力
手段５１と、回線容量監視手段６１と、回線容量変更手
段６２を含む。
【０７７７】符号量制御手段４１以外の動作は、前記第
２４の実施の形態の動作と同様である。
【０７７８】符号量制御手段４１は、前記第２４の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７７９】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７８０】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７８１】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７８２】図５７を参照すると、本発明の第５７の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、サンプリング周波数変換手段２３
と、音声符号化器２４と、音質判定手段２５と、バッフ
ァ２６と、多重化器３１と、符号量制御手段４１と、符
号量配分情報入力手段５１と、回線容量監視手段６１
と、回線容量変更手段６２を含む。
【０７８３】符号量制御手段４１以外の動作は、前記第
２５の実施の形態の動作と同様である。
【０７８４】符号量制御手段４１は、前記第２５の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７８５】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７８６】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７８７】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７８８】図５８を参照すると、本発明の第５８の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音判別手段２２と、サンプリング周
波数変換手段２３と、音声符号化器２４と、音質判定手
段２５と、バッファ２６と、多重化器３１と、符号量制
御手段４１と、符号量配分情報入力手段５１と、回線容
量監視手段６１と、回線容量変更手段６２を含む。
【０７８９】符号量制御手段４１以外の動作は、前記第
２６の実施の形態の動作と同様である。
【０７９０】符号量制御手段４１は、前記第２６の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７９１】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７９２】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７９３】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０７９４】図５９を参照すると、本発明の第５９の実
施の形態は、画像符号化器１１と、バッ ファ１２と、
レート制御器１４と、音検出手段２１と、サンプリング
周波数変換手段２３と、音声符号化器２４と、音質判定
手段２５と、バッファ２６と、多重化器３１と、符号量
制御手段４１と、符号量配分情報入力手段５１と、回線
容量監視手段６１と、回線容量変更手段６２を含む。
【０７９５】符号量制御手段４１以外の動作は、前記第
２７の実施の形態の動作と同様である。
【０７９６】符号量制御手段４１は、前記第２７の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０７９７】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０７９８】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０７９９】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０８００】図６０を参照すると、本発明の第６０の実
施の形態は、画像符号化器１１と、バッファ１２と、レ
ート制御器１４と、音検出手段２１と、音判別手段２２
と、サンプリング周波数変換手段２３と、音声符号化器
２４と、音質判定手段２５と、バッファ２６と、多重化
器３１と、符号量制御手段４１と、符号量配分情報入力
手段５１ と、回線容量監視手段６１と、回線容量変更
手段６２を含む。
【０８０１】符号量制御手段４１以外の動作は、前記第
２８の実施の形態の動作と同様である。
【０８０２】符号量制御手段４１は、前記第２８の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０８０３】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０８０４】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０８０５】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０８０６】図６１を参照すると、本発明の第６１の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４ と、サンプリン
グ周波数変換手段２３と、音声符号化器２４と、音質判
定手段２５と、バッファ２６と、多重化器３１と、符号
量制御手段４１と、符号量配分情報入力手段５１と、回
線容量監視手段６１と、回線容量変更手段６２を含む。
【０８０７】符号量制御手段４１以外の動作は、前記第
２９の実施の形態の動作と同様である。
【０８０８】符号量制御手段４１は、前記第２９の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０８０９】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０８１０】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０８１１】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０８１２】図６２を参照すると、本発明の第６２の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音判別手段２
２と、サンプリング周波数変換手段２３と、音声符号化
器２４と、音質判定手段２５と、バッファ２６と、多重
化器３１と、符号量制御手段４１と、符号量配分情報入
力手段５１と、回線容量監視手段６１と、回線容量変更
手段６２を含む。
【０８１３】符号量制御手段４１以外の動作は、前記第
３０の実施の形態の動作と同様である。
【０８１４】符号量制御手段４１は、前記第３０の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０８１５】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０８１６】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０８１７】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０８１８】図６３を参照すると、本発明の第６３の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、サンプリング周波数変換手段２３と、音声符号化
器２４と、音質判定手段２５と、バッファ２６と、多重
化器３１と、符号量制御手段４１と、符号量配分情報入
力手段５１と、回線容量監視手段６１と、回線容量変更
手段６２を含む。
【０８１９】符号量制御手段４１以外の動作は、前記第
３１の実施の形態の動作と同様である。
【０８２０】符号量制御手段４１は、前記第３１の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０８２１】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０８２２】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０８２３】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０８２４】図６４を参照すると、本発明の第６４の実
施の形態は、画像符号化器１１と、バッファ１２と、画
質判定手段１３と、レート制御器１４と、音検出手段２
１と、音判別手段２２と、サンプリング周波数変換手段
２３と、音声符号化器２４と、音質判定手段２５と、バ
ッファ２６と、多重化器３１と、符号量制御手段４１
と、符号量配分情報入力手段５１と、回線容量監視手段
６１と、回線容量変更手段６２を含む。
【０８２５】符号量制御手段４１以外の動作は、前記第
３２の実施の形態の動作と同様である。
【０８２６】符号量制御手段４１は、前記第３２の実施
の形態の動作に加えて回線容量監視手段６１より出力さ
れる回線容量情報６０１を用いて、画像・音声符号化装
置全体の符号量を決定する。
【０８２７】また、伝送路の回線が増やすことができる
状況であれば回線容量変更手段６２に回線容量変更情報
４０４を出力する。
【０８２８】回線容量監視手段６１は、伝送路の回線状
況を監視する。
【０８２９】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて、伝送路の回線容量を変更する。
【０８３０】
【実施例】本発明の第１の実施例を、図６４を参照して
説明する。この実施例は本発明の第６４の実施の形態に
対応するものであり、本発明の画像・音声符号化装置を
適用したテレビ電話装置の一実施例である。
【０８３１】画像符号化器１１としては、ＩＴＵ−Ｔの
動画像符号化勧告であるＨ．２６１、Ｈ．２６３、ＩＳ
Ｏ／ＩＥＣの動画像符号化規格であるＭＰＥＧ４ Ｖｉ
ｓｕａｌなどの画像符号化方式が考えられる。
【０８３２】音声符号化器２４としては、ＩＴＵ−Ｔの
音声符号化勧告であるＧ．７２３．１、ＩＳＯ／ＩＥＣ
の音声・オーディオ符号化規格であるＭＰＥＧ４ Ａｕ
ｄｉｏ、ＡＡＣ（Ａｄｖａｎｃｅｄ Ａｕｄｉｏ Ｃｏ
ｄｉｎｇ）、ＴｗｉｎＶＱなどの音声符号化方式が考え
られ、複数の符号化方式を使用することも可能である。
【０８３３】多重化器３１としては、ＩＴＵ−Ｔのマル
チメディア多重化勧告であるＨ２２１、Ｈ２２３などが
考えられる。
【０８３４】どの画像符号化方式と音声符号化方式を使
用するかは、例えば、ＩＴＵ−Ｔのマルチメディアシス
テム制御勧告であるＨ２４５などを用いて送信側、受信
側に通知することができる。
【０８３５】入力された画像信号は画像符号化器１１
で、発生符号量情報１０６に基づいて符号化される。
【０８３６】画像符号化器１１の出力である画像符号１
０１はバッファ１２に蓄積される。
【０８３７】バッファ１２は、蓄積していた画像符号を
画像符号１０２として多重化器３１に出力する。
【０８３８】画質判定手段１３は、画像符号化器１１よ
り、画質を判定するための情報である画質情報１０４を
受け取り、画質の変動を計算したり、画質の劣化や良化
を判定する。
【０８３９】例えば、判定画質情報１０４として、画像
のＳＮ比などが考えられる。
【０８４０】その結果を画質情報１０５として符号量制
御手段４１に出力する。
【０８４１】レート制御器１４は、バッファ１２から出
力されるデータ蓄積残量１０３と符号量制御手段４１か
ら出力される画像符号量情報４０１に基づいて画像符号
化器１１が生成する符号量を決定し、発生符号量情報１
０６を画像符号化器１１に出力する。
【０８４２】音検出手段２１は入力された音声信号に対
して、音信号存在情報２０５を符号量制御手段４１に出
力する。
【０８４３】例えば、音声信号のパワー、周波数成分な
どをから有音、無音を判別する。
【０８４４】また、音声信号２０１を音判別手段２２に
出力する。
【０８４５】音判別手段２２は入力された音声信号２０
１に対して、音の種類を判別し、音信号特徴情報２０６
を符号量制御手段４１に出力する。
【０８４６】例えば、音楽、特に弦楽器や打楽器の音に
は、基本波成分とその高調波成分が含まれ、さらに一定
時間以上連続するという特徴などを用いて入力された音
声信号が人間の音声か音楽かを判定を行う。
【０８４７】また、音声信号をサンプリング周波数変換
手段２３に出力する。
【０８４８】サンプリング周波数変換手段２３は、符号
量制御手段４１から出力されるサンプリング周波数情報
４０３に基づいて、入力された音声信号２０２のサンプ
リング周波数を変換する。
【０８４９】例えば、入力される音声信号がサンプリン
グ周波数２０ＫＨｚでサンプリングされているとする
と、このサンプリング周波数を音声符号化方式で使用す
るサンプリング周波数（Ｇ７２３．１ ８ＫＨｚ、ＭＰ
ＥＧ４ Ａｕｄｉｏ ８〜２０ＫＨｚなど）に変換す
る。
【０８５０】音声符号化器２４は、符号量制御手段４１
から出力される音声符号量情報４０２に基づいた符号化
方式と符号化レートで音声信号２０３に対して符号化を
行う。出力の音声符号２０４はバッファ２６に出力され
る。
【０８５１】音質判定手段２５は、音声符号化器２４よ
り、音質を判定するための情報である音質情報２０７を
受け取り、音質の変動を計算したり、音質の劣化や良化
を判定する。
【０８５２】例えば、判定画質情報１０４として、音声
信号のＳＮ比、波形ひずみ、スペクトルひずみなどが考
えられる。
【０８５３】その結果を音質情報２０８として符号量制
御手段４１に出力する。
【０８５４】バッファ２６は、蓄積していた音声符号を
音声符号２０９として多重化器３１に出力する。
【０８５５】符号量配分情報入力手段５１には、ユーザ
が画像符号と音声符号に対してどの符号化方式を用いる
か、どのような符号量配分を行うかなどを入力すること
ができる。
【０８５６】符号量配分情報入力手段５１は、入力され
た情報を符号量配分情報５０１として符号量制御手段４
１に出力する。
【０８５７】例えば、音声重視、画像重視、具体的な符
号量配分などを指定する。
【０８５８】回線容量監視手段６１は、伝送路の回線の
状況を監視し、回線容量情報６０１を符号量制御手段４
１に出力する。
【０８５９】例えば、回線容量情報６０１は、回線の種
類、回線容量などが考えられる。
【０８６０】回線容量変更手段６２は、回線容量変更情
報４０４に基づいて回線容量を変更する。
【０８６１】例えば、ＩＳＤＮで６４ｋｂｉｔ／ｓｅｃ
を使用している場合に、回線容量変更情報４０４の内容
に基づいて、回線の容量の変更を行う。
【０８６２】符号量制御手段４１は、画質情報１０５
と、符号量配分情報５０１と、音信号存在情報２０５
と、音信号特徴情報２０６と、音質情報２０８と、回線
容量情報６０１を入力として、画像符号量４０１、音声
符号量情報４０２、サンプリング周波数情報４０３と、
回線容量変更情報４０４を出力とし、音声符号化方式と
符号化レートの決定と、画像符号量と音声符号量の配分
の決定を行う。
【０８６３】画質情報１０５は、画質の変動や画質の劣
化などを通知するので、画質が劣化している場合は、画
像符号量を増加させることにより画質を向上させ、それ
と同時に音声の符号化方式や符号化レートを変更するこ
とにより音声符号量を減少させる。
【０８６４】また、画質が基準値などより良好な場合
は、画像符号量を減少させ、その分の符号量を音声に配
分する。
【０８６５】例えば、ＭＰＥＧ４ Ａｕｄｉｏ（１２ｋ
ｂｉｔ／ｓｅｃ）で音声符号化を行っていて、画質の劣
化が起きている場合、音声符号化をＭＰＥＧ４ Ａｕｄ
ｉｏ（４ｋｂｉｔ／ｓｅｃ）に変更することで画像符号
に多くの符号量を配分することができる。
【０８６６】また、画質の変動に合わせて、ＭＰＥＧ４
Ａｕｄｉｏ（４ｋｂｉｔ／ｓｅｃ〜１２ｋｂｉｔ／ｓ
ｅｃ）と変動させることにより画質の変動を抑えること
もできる。
【０８６７】音質情報２０８は、音質の変動や音質の劣
化などを通知するので、音質が劣化している場合は、音
声符号量を増加させることにより音質を向上させ、画像
符号量を減少させる。
【０８６８】逆に音質が基準値などより良好な場合、音
声符号量を減少させ、画像符号量を増加させる。
【０８６９】例えば、ＭＰＥＧ４ Ａｕｄｉｏ（６ｋｂ
ｉｔ／ｓｅｃ）で音声符号化を行っていて、音質の劣化
が起きている場合、音声符号化をＭＰＥＧ４ Ａｕｄｉ
ｏ（１２ｋｂｉｔ／ｓｅｃ）に変更することで音声符号
に多くの符号量を配分することができる。
【０８７０】画質情報１０５と音質情報２０８を利用す
ることにより、画像と音声の品質をトータルで制御する
ことが可能となる。
【０８７１】音信号特徴情報２０６は音声信号がどのよ
うな種類であるかを通知するので、その音声の種類に適
した音声符号化方式と符号化レートを決定し、通知す
る。
【０８７２】例えば、人間の音声は、ＭＰＥＧ４ Ａｕ
ｄｉｏ（８ｋｂｉｔ／ｓｅｃ）やＧ．７２３．１（６．
３ｋｂｉｔ／ｓｅｃ）、ＭＰＥＧ４ Ａｕｄｉｏ（３２
ｋｂｉｔ／ｓｅｃ）や音楽はＡＡＣ（３２ｋｂｉｔ／ｓ
ｅｃ）などのように音声信号の種類に応じて符号化方式
と符号化レートを変更することができる。
【０８７３】回線容量情報６０１は、伝送路の回線の状
況を通知するので、符号量制御手段４１はその情報に基
づいて、音声画像全体の符号量を決定する。
【０８７４】例えば、回線がＩＳＤＮや電話回線網の場
合、回線容量情報６０１に基づき全体の符号量を決定す
る。
【０８７５】また、回線が何段階か固定レートの回線容
量を持ち、伝送路の使用できる回線容量を変化させるこ
とができる場合、回線容量変更情報４０４を出力して回
線容量を変更する。
【０８７６】例えば、ＩＳＤＮで１本のＢチャンネル
（情報チャンネル）６４ｋｂｉｔ／ｓｅｃで通信を行っ
ていて、画質、音質ともに不十分でさらに回線容量が必
要な状況になった場合には、もう１本のＢチャンネルを
加えて全体で１２８ｋｂｉｔ／ｓｅｃで通信を行うこと
も可能である。
【０８７７】符号量配分情報５０１は、音声の符号化方
式や符号化レート、音声と画像の符号量配分などを通知
するので、符号量制御手段４１はその情報に基づいて、
音声の符号化方式や符号化レートと音声と画像の符号量
配分を通知する。
【０８７８】音信号存在情報２０５は有音、無音を通知
するので、無音である場合は、サンプリング周波数変換
手段２３と音声符号化器２４に演算中止を通知し、今ま
で音声符号に使用していた符号量を画像符号の符号量に
配分する。
【０８７９】図６５は、符号量制御手段４１に入力され
る情報である、画質情報１０５と、音信号存在情報２０
５と、音信号特徴情報２０６と、音質情報２０８と、符
号量配分情報５０１に対する符号量制御手段４１の動作
を説明するためのフローチャートである。
【０８８０】まずＡ１で符号量配分情報５０１に基づい
て分岐を行う。
【０８８１】Ａ１で符号量配分情報５０１が入力されて
いる場合は、Ａ４に進む。
【０８８２】Ａ１で符号量配分情報５０１が入力されて
いない場合は、Ａ２に進む。
【０８８３】Ａ２で音信号存在情報２０５が音声信号が
無音であることを示している場合、Ａ１に戻る。
【０８８４】ここで、画像符号量４０１、音声符号量情
報４０２、サンプリング周波数情報４０３を出力し音声
符号に配分していた符号量を画像符号に配分する。
【０８８５】Ａ２で音信号存在情報２０５が音声信号が
有音であることを示している場合、Ａ３に進む。
【０８８６】Ａ３で音信号特徴情報２０６を読み込み、
Ａ４に進む。
【０８８７】Ａ４では、符号量配分情報５０１が存在し
ている場合は、その情報に基づき画像と音声の符号量配
分、音声符号化方式、音声符号化レートを決定する。
【０８８８】符号量配分情報５０１が入力されていない
場合は、音信号特徴情報２０６より画像と音声の符号量
配分、音声符号化方式、音声符号化レートを決定する。
【０８８９】画像と音声の符号量配分、音声符号化方
式、音声符号化レートを決定した後、画像符号量４０
１、音声符号量情報４０２、サンプリング周波数情報４
０３を出力し音声と画像の符号量配分、音声符号化方
式、符号化レートを通知する。
【０８９０】通知後、Ａ５に進む。Ａ５で画質情報１０
５と音質情報２０８から画質・音質に変動がある場合、
Ａ６に進む。
【０８９１】画質情報１０５と音質情報２０８から画質
・音質に変動がない場合、Ａ７に進む。ここで画像の品
質と音声の品質を考えた場合、同じ符号量を増減すると
音声のほうが画像よりも影響を受けやすい。
【０８９２】これは、一般に音声符号化のほうが符号化
時の符号化レートが低いからである。また、人間の視覚
と聴覚を考えた場合、画像の劣化よりも音声の劣化に対
して敏感であるからである。
【０８９３】そこで、画像の品質と音声の品質を同時に
考える場合、わずかな符号量の変動に対しても品質に影
響が大きい音声を中心に行う。つまり、音声の劣化を起
こさないことを主眼とし、画像と音声の品質を制御す
る。
【０８９４】ここで、画像の品質を中心に考えることも
可能であるが、これは符号量配分情報入力手段を用いて
指定できるため、符号量配分情報５０１が入力されてい
ない場合は、音声を中心に符号量配分を行う。
【０８９５】Ａ６で画質情報１０５と音質情報２０８に
基づいて画像と音声の符号量配分、音声符号化方式、音
声符号化レートを再調整し、画像符号量４０１、音声符
号量情報４０２、サンプリング周波数情報４０３を出力
し音声と画像の符号量配分、音声符号化方式、符号化レ
ートの修正を通知する。
【０８９６】通知後、Ａ７に進む。Ａ８で終了しない場
合、Ａ１に戻る。それ以外の場合、終了する。
【０８９７】
【発明の効果】以上説明した本発明によれば、従来の画
像・音声符号化装置で考慮されていなかった音声可変長
符号化方式を用いることができる。それにより音声と可
変レート性を十分に活用することができる。
【０８９８】又、本発明によれば、音声信号に種類に応
じて、音声信号に適した符号化方式や符号化レートを選
択することができる。
【０８９９】又、本発明によれば、画質の変動に対し
て、音声と画像の符号量を変化させることにより、画像
の品質を一定に保つことができる。
【０９００】又、本発明によれば、音質の変動に対し
て、音声と画像の符号量を変化させることにより、音声
の品質を一定に保つことができる。
【０９０１】又、本発明によれば、画質や音質の変動に
対して、音声と画像の符号量を変化させることにより、
画像と音声の品質をトータルで制御することができる。
【図面の簡単な説明】
【図１】本発明の第１の画像・音声符号化装置の実施の
形態のブロック図
【図２】本発明の第２の画像・音声符号化装置の実施の
形態のブロック図
【図３】本発明の第３の画像・音声符号化装置の実施の
形態のブロック図
【図４】本発明の第４の画像・音声符号化装置の実施の
形態のブロック図
【図５】本発明の第５の画像・音声符号化装置の実施の
形態のブロック図
【図６】本発明の第６の画像・音声符号化装置の実施の
形態のブロック図
【図７】本発明の第７の画像・音声符号化装置の実施の
形態のブロック図
【図８】本発明の第８の画像・音声符号化装置の実施の
形態のブロック図
【図９】本発明の第９の画像・音声符号化装置の実施の
形態のブロック図
【図１０】本発明の第１０の画像・音声符号化装置の実
施の形態のブロック図
【図１１】本発明の第１１の画像・音声符号化装置の実
施の形態のブロック図
【図１２】本発明の第１２の画像・音声符号化装置の実
施の形態のブロック図
【図１３】本発明の第１３の画像・音声符号化装置の実
施の形態のブロック図
【図１４】本発明の第１４の画像・音声符号化装置の実
施の形態のブロック図
【図１５】本発明の第１５の画像・音声符号化装置の実
施の形態のブロック図
【図１６】本発明の第１６の画像・音声符号化装置の実
施の形態のブロック図
【図１７】本発明の第１７の画像・音声符号化装置の実
施の形態のブロック図
【図１８】本発明の第１８の画像・音声符号化装置の実
施の形態のブロック図
【図１９】本発明の第１９の画像・音声符号化装置の実
施の形態のブロック図
【図２０】本発明の第２０の画像・音声符号化装置の実
施の形態のブロック図
【図２１】本発明の第２１の画像・音声符号化装置の実
施の形態のブロック図
【図２２】本発明の第２２の画像・音声符号化装置の実
施の形態のブロック図
【図２３】本発明の第２３の画像・音声符号化装置の実
施の形態のブロック図
【図２４】本発明の第２４の画像・音声符号化装置の実
施の形態のブロック図
【図２５】本発明の第２５の画像・音声符号化装置の実
施の形態のブロック図
【図２６】本発明の第２６の画像・音声符号化装置の実
施の形態のブロック図
【図２７】本発明の第２７の画像・音声符号化装置の実
施の形態のブロック図
【図２８】本発明の第２８の画像・音声符号化装置の実
施の形態のブロック図
【図２９】本発明の第２９の画像・音声符号化装置の実
施の形態のブロック図
【図３０】本発明の第３０の画像・音声符号化装置の実
施の形態のブロック図
【図３１】本発明の第３１の画像・音声符号化装置の実
施の形態のブロック図
【図３２】本発明の第３２の画像・音声符号化装置の実
施の形態のブロック図
【図３３】本発明の第３３の画像・音声符号化装置の実
施の形態のブロック図
【図３４】本発明の第３４の画像・音声符号化装置の実
施の形態のブロック図
【図３５】本発明の第３５の画像・音声符号化装置の実
施の形態のブロック図
【図３６】本発明の第３６の画像・音声符号化装置の実
施の形態のブロック図
【図３７】本発明の第３７の画像・音声符号化装置の実
施の形態のブロック図
【図３８】本発明の第３８の画像・音声符号化装置の実
施の形態のブロック図
【図３９】本発明の第３９の画像・音声符号化装置の実
施の形態のブロック図
【図４０】本発明の第４０の画像・音声符号化装置の実
施の形態のブロック図
【図４１】本発明の第４１の画像・音声符号化装置の実
施の形態のブロック図
【図４２】本発明の第４２の画像・音声符号化装置の実
施の形態のブロック図
【図４３】本発明の第４３の画像・音声符号化装置の実
施の形態のブロック図
【図４４】本発明の第４４の画像・音声符号化装置の実
施の形態のブロック図
【図４５】本発明の第４５の画像・音声符号化装置の実
施の形態のブロック図
【図４６】本発明の第４６の画像・音声符号化装置の実
施の形態のブロック図
【図４７】本発明の第４７の画像・音声符号化装置の実
施の形態のブロック図
【図４８】本発明の第４８の画像・音声符号化装置の実
施の形態のブロック図
【図４９】本発明の第４９の画像・音声符号化装置の実
施の形態のブロック図
【図５０】本発明の第５０の画像・音声符号化装置の実
施の形態のブロック図
【図５１】本発明の第５１の画像・音声符号化装置の実
施の形態のブロック図
【図５２】本発明の第５２の画像・音声符号化装置の実
施の形態のブロック図
【図５３】本発明の第５３の画像・音声符号化装置の実
施の形態のブロック図
【図５４】本発明の第５４の画像・音声符号化装置の実
施の形態のブロック図
【図５５】本発明の第５５の画像・音声符号化装置の実
施の形態のブロック図
【図５６】本発明の第５６の画像・音声符号化装置の実
施の形態のブロック図
【図５７】本発明の第５７の画像・音声符号化装置の実
施の形態のブロック図
【図５８】本発明の第５８の画像・音声符号化装置の実
施の形態のブロック図
【図５９】本発明の第５９の画像・音声符号化装置の実
施の形態のブロック図
【図６０】本発明の第６０の画像・音声符号化装置の実
施の形態のブロック図
【図６１】本発明の第６１の画像・音声符号化装置の実
施の形態のブロック図
【図６２】本発明の第６２の画像・音声符号化装置の実
施の形態のブロック図
【図６３】本発明の第６３の画像・音声符号化装置の実
施の形態のブロック図
【図６４】本発明の第６４の画像・音声符号化装置の実
施の形態のブロック図
【図６５】符号量制御手段の動作の一例を示すフローチ
ャート
【図６６】従来の画像・音声符号化装置のブロック図
【図６７】従来の画像・音声復号装置のブロック図
【符号の説明】
１ 画像符号化器 ２ バッファ ３ 音声符号化器 ４ バッファ ５ 多重化器 ６ 分離器 ７ バッファ ８ 画像復号器 ９ バッファ １０ 音声復号器 １１ 画像符号化器 １２ バッファ １３ 画質判定手段 １４ レート制御器 １０１ 画像符号 １０２ 画像符号 １０３ データ蓄積残量 １０４ 画質情報 １０５ 画質情報 １０６ 発生符号量情報 ２１ 音検出手段 ２２ 音判別手段 ２３ サンプリング周波数変換手段 ２４ 音声符号化器 ２５ 音質判定手段 ２６ バッファ ２０１ 音声信号 ２０２ 音声信号 ２０３ 音声信号 ２０４ 音声符号 ２０５ 音信号存在情報 ２０６ 音声信号特徴情報 ２０７ 音質情報 ２０８ 音質情報 ２０９ 音声符号 ３１ 多重化器 ４１ 符号量制御手段 ４０１ 画像符号量情報 ４０２ 音声符号量情報 ４０３ サンプリング周波数情報 ４０４ 回線容量変更情報 ５１ 符号量配分情報入力手段 ５０１ 符号量配分情報 ６１ 回線容量監視手段 ６２ 回線容量変更手段 ６０１ 回線容量情報
フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 7/24 Ｈ０４Ｌ 11/20 １０２Ａ 7/15 ６３０ Ｈ０４Ｎ 7/13 Ｚ Ｆターム(参考） 5C059 KK34 PP04 RA01 RB02 RC32 RC40 RE03 SS07 SS08 TA60 TA71 TC18 TC21 5C064 AA01 AA02 AB04 AD02 AD08 AD09 AD13 5J064 AA01 AA05 BB10 BB12 BC02 BC14 BD02 5K028 AA01 EE03 EE08 KK01 KK23 LL25 MM12 PP04 PP11 RR03 SS03 SS05 5K030 GA11 HA10 HB01 HB02 HB11 HC04 HC09 KA19 LA07 LC05 MB09

Claims (64)

    【特許請求の範囲】
  1. 【請求項１】 入力された画像信号の情報量を圧縮する
    画像符号化手段と、前記画像符号化手段から出力される
    画像符号を蓄積し情報量を制御するレート制御手段と、
    入力された音声信号のサンプリング周波数を変換する周
    波数変換手段と、前記周波数変換手段から出力される音
    声信号の情報量を圧縮する音声符号化手段と、前記画像
    符号と前記音声符号に符号量配分を行う符号量制御手段
    と、前記画像符号と前記音声符号を多重化する多重化手
    段とを含む画像・音声符号化装置であって、 前記符号量制御手段は、前記画像符号と前記音声符号の
    符号量配分を決定し、前記レート制御手段と前記周波数
    変換手段と前記音声符号化手段とに決定した符号量配分
    を通知することを特徴とする画像・音声符号化装置。
  2. 【請求項２】 入力された音声信号の特徴を判別する音
    判別手段を備え、 前記符号量制御手段は前記音声信号の特徴を新たな入力
    として符号量配分を行うことを特徴とする請求項１記載
    の画像・音声符号化装置。
  3. 【請求項３】 入力された音声信号の有音と無音を判別
    する音検出手段を備え、 前記符号量制御手段は前記音声信号の音声存在情報を新
    たな入力として符号量配分を行うことを特徴とする請求
    項１記載の画像・音声符号化装置。
  4. 【請求項４】 入力された音声信号の有音と無音を判別
    する音検出手段を備え、 前記符号量制御手段は前記音声信号の音声存在情報を新
    たな入力として符号量配分を行うことを特徴とする請求
    項２記載の画像・音声符号化装置。
  5. 【請求項５】 前記画像符号化手段から画質情報を受け
    取り、画質を判定する画質判定手段を備え、 前記符号量制御手段は前記画質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項１記載の
    画像・音声符号化装置。
  6. 【請求項６】 前記画像符号化手段から画質情報を受け
    取り、画質を判定する画質判定手段を備え、 前記符号量制御手段は前記画質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項２記載の
    画像・音声符号化装置。
  7. 【請求項７】 前記画像符号化手段から画質情報を受け
    取り、画質を判定する画質判定手段を備え、 前記符号量制御手段は前記画質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項３記載の
    画像・音声符号化装置。
  8. 【請求項８】 前記画像符号化手段から画質情報を受け
    取り、画質を判定する画質判定手段を備え、 前記符号量制御手段は前記画質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項４記載の
    画像・音声符号化装置。
  9. 【請求項９】 前記音声符号化手段から音質情報を受け
    取り、音質を判定する音質判定手段を備え、 前記符号量制御手段は前記音質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項１記載の
    画像・音声符号化装置。
  10. 【請求項１０】 前記音声符号化手段から音質情報を受
    け取り、音質を判定する音質判定手段を備え、 前記符号量制御手段は前記音質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項２記載の
    画像・音声符号化装置。
  11. 【請求項１１】 前記音声符号化手段から音質情報を受
    け取り、音質を判定する音質判定手段を備え、 前記符号量制御手段は前記音質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項３記載の
    画像・音声符号化装置。
  12. 【請求項１２】 前記音声符号化手段から音質情報を受
    け取り、音質を判定する音質判定手段を備え、 前記符号量制御手段は前記音質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項４記載の
    画像・音声符号化装置。
  13. 【請求項１３】 前記音声符号化手段から音質情報を受
    け取り、音質を判定する音質判定手段を備え、 前記符号量制御手段は前記音質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項５記載の
    画像・音声符号化装置。
  14. 【請求項１４】 前記音声符号化手段から音質情報を受
    け取り、音質を判定する音質判定手段を備え、 前記符号量制御手段は前記音質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項６記載の
    画像・音声符号化装置。
  15. 【請求項１５】 前記音声符号化手段から音質情報を受
    け取り、音質を判定する音質判定手段を備え、 前記符号量制御手段は前記音質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項７記載の
    画像・音声符号化装置。
  16. 【請求項１６】 前記音声符号化手段から音質情報を受
    け取り、音質を判定する音質判定手段を備え、 前記符号量制御手段は前記音質判定手段を新たな入力と
    して符号量配分を行うことを特徴とする請求項８記載の
    画像・音声符号化装置。
  17. 【請求項１７】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項１記載
    の画像・音声符号化装置。
  18. 【請求項１８】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項２記載
    の画像・音声符号化装置。
  19. 【請求項１９】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項３記載
    の画像・音声符号化装置。
  20. 【請求項２０】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項４記載
    の画像・音声符号化装置。
  21. 【請求項２１】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項５記載
    の画像・音声符号化装置。
  22. 【請求項２２】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項６記載
    の画像・音声符号化装置。
  23. 【請求項２３】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項７記載
    の画像・音声符号化装置。
  24. 【請求項２４】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項８記載
    の画像・音声符号化装置。
  25. 【請求項２５】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項９記載
    の画像・音声符号化装置。
  26. 【請求項２６】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項１０記
    載の画像・音声符号化装置。
  27. 【請求項２７】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項１１記
    載の画像・音声符号化装置。
  28. 【請求項２８】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項１２記
    載の画像・音声符号化装置。
  29. 【請求項２９】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項１３記
    載の画像・音声符号化装置。
  30. 【請求項３０】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項１４記
    載の画像・音声符号化装置。
  31. 【請求項３１】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項１５記
    載の画像・音声符号化装置。
  32. 【請求項３２】 前記画像符号と前記音声符号の符号量
    配分情報を入力する符号量配分情報入力手段を備え、 前記符号量制御手段は前記符号量配分情報を新たな入力
    として符号量配分を行うことを特徴とする請求項１６記
    載の画像・音声符号化装置。
  33. 【請求項３３】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１記載の画像・音声符号化装置。
  34. 【請求項３４】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２記載の画像・音声符号化装置。
  35. 【請求項３５】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項３記載の画像・音声符号化装置。
  36. 【請求項３６】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項４記載の画像・音声符号化装置。
  37. 【請求項３７】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項５記載の画像・音声符号化装置。
  38. 【請求項３８】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項６記載の画像・音声符号化装置。
  39. 【請求項３９】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項７記載の画像・音声符号化装置。
  40. 【請求項４０】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項８記載の画像・音声符号化装置。
  41. 【請求項４１】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項９記載の画像・音声符号化装置。
  42. 【請求項４２】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１０記載の画像・音声符号化装
    置。
  43. 【請求項４３】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１１記載の画像・音声符号化装
    置。
  44. 【請求項４４】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１２記載の画像・音声符号化装
    置。
  45. 【請求項４５】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１３記載の画像・音声符号化装
    置。
  46. 【請求項４６】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１４記載の画像・音声符号化装
    置。
  47. 【請求項４７】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１５記載の画像・音声符号化装
    置。
  48. 【請求項４８】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１６記載の画像・音声符号化装
    置。
  49. 【請求項４９】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１７記載の画像・音声符号化装
    置。
  50. 【請求項５０】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１８記載の画像・音声符号化装
    置。
  51. 【請求項５１】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項１９記載の画像・音声符号化装
    置。
  52. 【請求項５２】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２０記載の画像・音声符号化装
    置。
  53. 【請求項５３】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２１記載の画像・音声符号化装
    置。
  54. 【請求項５４】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２２記載の画像・音声符号化装
    置。
  55. 【請求項５５】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２３記載の画像・音声符号化装
    置。
  56. 【請求項５６】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２４記載の画像・音声符号化装
    置。
  57. 【請求項５７】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２５記載の画像・音声符号化装
    置。
  58. 【請求項５８】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２６記載の画像・音声符号化装
    置。
  59. 【請求項５９】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２７記載の画像・音声符号化装
    置。
  60. 【請求項６０】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２８記載の画像・音声符号化装
    置。
  61. 【請求項６１】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項２９記載の画像・音声符号化装
    置。
  62. 【請求項６２】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項３０記載の画像・音声符号化装
    置。
  63. 【請求項６３】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項３１記載の画像・音声符号化装
    置。
  64. 【請求項６４】 回線容量監視手段と回線容量変更手段
    を備え、 前記符号量制御手段は前記回線容量情報を新たな入力と
    して符号量配分を行い、 前記回線容量変更手段に回線容量変更情報を出力するこ
    とを特徴とする請求項３２記載の画像・音声符号化装
    置。
JP3278999A 1999-02-10 1999-02-10 画像・音声符号化装置 Expired - Fee Related JP3327240B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP3278999A JP3327240B2 (ja) 1999-02-10 1999-02-10 画像・音声符号化装置
US09/497,544 US6741649B1 (en) 1999-02-10 2000-02-03 Coding apparatus for audio and picture signals

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3278999A JP3327240B2 (ja) 1999-02-10 1999-02-10 画像・音声符号化装置

Publications (2)

Publication Number Publication Date
JP2000232368A true JP2000232368A (ja) 2000-08-22
JP3327240B2 JP3327240B2 (ja) 2002-09-24

Family

ID=12368630

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3278999A Expired - Fee Related JP3327240B2 (ja) 1999-02-10 1999-02-10 画像・音声符号化装置

Country Status (2)

Country Link
US (1) US6741649B1 (ja)
JP (1) JP3327240B2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006057381A1 (ja) * 2004-11-29 2006-06-01 Sharp Kabushiki Kaisha 帯域割り当て方法、帯域割り当て装置、通信端末、帯域割り当てプログラム及びプログラム記録媒体
JP2007179072A (ja) * 2007-02-23 2007-07-12 Mitsubishi Electric Corp 音響処理装置、音響処理方法、音響処理プログラム、照合処理装置、照合処理方法及び照合処理プログラム
JP2016500852A (ja) * 2012-11-07 2016-01-14 ゼットティーイー コーポレーションＺｔｅ Ｃｏｒｐｏｒａｔｉｏｎ オーディオ多重符号化伝送方法及び対応装置
JP2016091425A (ja) * 2014-11-07 2016-05-23 セイコーエプソン株式会社 画像供給装置、画像供給方法およびプログラム
US9818411B2 (en) 2008-07-14 2017-11-14 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding of integrated speech and audio

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10006245A1 (de) * 2000-02-11 2001-08-30 Siemens Ag Verfahren zum Verbessern der Qualität einer Audioübertragung über ein paketorientiertes Kommunikationsnetz und Kommunikationseinrichtung zur Realisierung des Verfahrens
JP4208533B2 (ja) * 2002-09-19 2009-01-14 キヤノン株式会社 画像処理装置及び画像処理方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63232589A (ja) 1987-03-19 1988-09-28 Fujitsu Ltd 音声・画像の伝送フレ−ム内の帯域可変方式
JPS63252083A (ja) 1987-04-09 1988-10-19 Nec Corp 画像符号化伝送装置
JPH02246431A (ja) 1989-03-18 1990-10-02 Fujitsu Ltd 映像・音声多重化方式
JPH06216779A (ja) 1993-01-13 1994-08-05 Casio Comput Co Ltd 通信装置
JPH07202820A (ja) * 1993-12-28 1995-08-04 Matsushita Electric Ind Co Ltd ビットレート制御システム
US5929921A (en) * 1995-03-16 1999-07-27 Matsushita Electric Industrial Co., Ltd. Video and audio signal multiplex sending apparatus, receiving apparatus and transmitting apparatus
JPH0955935A (ja) * 1995-08-15 1997-02-25 Nippon Steel Corp 画像および音声符号化装置
US5835493A (en) * 1996-01-02 1998-11-10 Divicom, Inc. MPEG transport stream remultiplexer
US6088360A (en) * 1996-05-31 2000-07-11 Broadband Networks Corporation Dynamic rate control technique for video multiplexer
EP0905935A1 (en) * 1997-01-21 1999-03-31 Sony Corporation Coded signal transmission method and device
US6061399A (en) * 1997-05-28 2000-05-09 Sarnoff Corporation Method and apparatus for information stream frame synchronization
JP3407287B2 (ja) * 1997-12-22 2003-05-19 日本電気株式会社 符号化復号システム
JPH11202900A (ja) * 1998-01-13 1999-07-30 Nec Corp 音声データ圧縮方法及びそれを適用した音声データ圧縮システム
JP3802219B2 (ja) * 1998-02-18 2006-07-26 富士通株式会社 音声符号化装置
US6373855B1 (en) * 1998-03-05 2002-04-16 Intel Corporation System and method for using audio performance to control video bandwidth

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006057381A1 (ja) * 2004-11-29 2006-06-01 Sharp Kabushiki Kaisha 帯域割り当て方法、帯域割り当て装置、通信端末、帯域割り当てプログラム及びプログラム記録媒体
JP2007179072A (ja) * 2007-02-23 2007-07-12 Mitsubishi Electric Corp 音響処理装置、音響処理方法、音響処理プログラム、照合処理装置、照合処理方法及び照合処理プログラム
US9818411B2 (en) 2008-07-14 2017-11-14 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding of integrated speech and audio
US10403293B2 (en) 2008-07-14 2019-09-03 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding of integrated speech and audio
US10714103B2 (en) 2008-07-14 2020-07-14 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding of integrated speech and audio
US11705137B2 (en) 2008-07-14 2023-07-18 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding of integrated speech and audio
JP2016500852A (ja) * 2012-11-07 2016-01-14 ゼットティーイー コーポレーションＺｔｅ Ｃｏｒｐｏｒａｔｉｏｎ オーディオ多重符号化伝送方法及び対応装置
JP2016091425A (ja) * 2014-11-07 2016-05-23 セイコーエプソン株式会社 画像供給装置、画像供給方法およびプログラム

Also Published As

Publication number Publication date
JP3327240B2 (ja) 2002-09-24
US6741649B1 (en) 2004-05-25

Similar Documents

Publication Publication Date Title
US6704281B1 (en) Bit-rate control in a multimedia device
US7072366B2 (en) Method for scalable encoding of media streams, a scalable encoder and a terminal
JP3193054B2 (ja) データ／音声／ファクスの優先度を有する改善された統計的なマルチプレクサ
WO1990010993A1 (en) Video/audio multiplex transmission system
US20070263672A1 (en) Adaptive jitter management control in decoder
US6721712B1 (en) Conversion scheme for use between DTX and non-DTX speech coding systems
EP1503369A2 (en) Data embedding device and data extraction device
JP3327240B2 (ja) 画像・音声符号化装置
US7889783B2 (en) Multiple data rate communication system
JPH1049199A (ja) 無音圧縮音声符号化復号化装置
JP3999204B2 (ja) ディジタル回線伝送装置
US7606330B2 (en) Dual-rate single band communication system
WO2000030075A1 (en) Closed-loop variable-rate multimode predictive speech coder
US8260606B2 (en) Method and means for decoding background noise information
JP3004664B2 (ja) 可変レート符号化方法
JP3487158B2 (ja) 音声符号化伝送システム
EP1387351B1 (en) Speech encoding device and method having TFO (Tandem Free Operation) function
JP4579379B2 (ja) 制御装置及び制御方法
JP2002252644A (ja) 音声パケット通信装置及び音声パケット通信方法
JPH06216779A (ja) 通信装置
JP3048405B2 (ja) 音声符号化器の制御方式
JPH08279811A (ja) 音声データ変換装置
JP2543940B2 (ja) 音声交換方式
KR20000003717A (ko) 음성 인식/합성을 이용한 음성 통신 방법 및 그 장치
JPH07212320A (ja) 音声帯域信号パケット化装置

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20070712

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080712

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090712

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100712

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110712

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110712

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120712

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120712

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130712

Year of fee payment: 11

LAPS Cancellation because of no payment of annual fees