JP4392378B2 - 音声符号化選択制御方法 - Google Patents
音声符号化選択制御方法 Download PDFInfo
- Publication number
- JP4392378B2 JP4392378B2 JP2005119891A JP2005119891A JP4392378B2 JP 4392378 B2 JP4392378 B2 JP 4392378B2 JP 2005119891 A JP2005119891 A JP 2005119891A JP 2005119891 A JP2005119891 A JP 2005119891A JP 4392378 B2 JP4392378 B2 JP 4392378B2
- Authority
- JP
- Japan
- Prior art keywords
- packet
- voice
- encoding
- speech
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Detection And Prevention Of Errors In Transmission (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Telephonic Communication Services (AREA)
Description
音声パケット通信における音切れの原因として、二つの要因が考えられる。その一つはネットワークの輻輳を要因とするものと、他の一つは送信端末における処理遅延を要因とするものである。
更に具体的に本発明による音声符号化選択制御方法の特徴とする点は離散音声楽音信号サンプルを入力とし、パケット通信によりディジタル符号を送信する際にある決まった時間間隔の離散音声楽音信号を符号化するために必要な演算量の異なる少なくとも2種類の音声符号化方法を動的に切り替える音声符号化選択制御方法であって、ある決まった時間ごとの音声区間毎に各パケットを区別するためのパケット番号を各送信パケットに割り当てるステップと、音声の符号化データと送信する時刻情報をパケットにより送信するステップと、パケットを受信した時刻情報を記憶するステップと、上記送信時刻情報と上記受信時刻情報からパケット到着ジッタを計算するステップと、受信したパケットのパケット番号からパケットロス率を計算するステップと、上記パケット到着ジッタと上記パケットロス率から、少なくともパケットロス率がある一定の閾値よりも大きく、かつパケット到着ジッタがある一定の閾値よりも小さい場合は演算量が少ない音声符号化方式を選択するステップとを備えることを特徴とする。
更に、本発明による音声符号化選択制御方法では上記演算量が少ない音声符号化方法を選択するステップは、パケットロス率がある一定の閾値よりも大きく、かつパケット到着ジッタがある一定の閾値よりも小さい場合、同時に動作している画像符号化処理を一時停止させるための指令信号を出力するステップを備える。
本発明による音声パケット送信装置をコンピュータで実現する場合、コンピュータには入力信号を演算量が異なる符号化方式で符号化する複数の音声符号化手段を備えた音声符号化部と、着信相手から送られて来る符号化切り替え要求パケットを復号する符号化切り替え要求パケット復号化部と、この符号化切り替え要求パケット復号部で復号した符号化切り替え要求信号により上記複数の音声符号化手段の中の何れかを選択する符号化選択部を構築する。
符号化切り替え要求パケット復号部101は、ネットワークから送信端末の符号化方式を特定するために符号化方式ID情報が格納された符号化切り替え要求パケットを受信し、ヘッダを削除することで符号化方式ID情報を取り出し、取り出した符号化方式ID情報を出力する。
音声符号化部103にはこの実施例では2種類の符号化方式で符号化を実行する音声符号化手段103Aと103Bを設けた場合を示す。いずれの音声符号化手段103A、103Bが選択されたとしても、指定された符号化方式によりフレーム(通常10〜20ms程度)毎に入力音声信号を符号化し、図3に示される形式の符号化列データを出力する。
本実施例では2種類の符号化方式を用いる場合について説明するが、3種類以上の音声符号化方式を用いることも可能である。
音声パケット送信バッファ105は、音声パケットデータを入力とし、通常のIPネットワークにおける実時間音声通信の場合と同様に音声パケットデータをバッファリングし、上記フレームと同じ時間間隔で音声パケットデータを出力する。
音声パケット送出部107は音声パケットデータと時刻データを入力とし、時刻データを送出タイマー値Tsとして音声パケットデータのヘッダに追加し、ネットワークに音声パケットデータを送信する。
図2に本発明による音声パケット受信装置の実施例を示す。図2に示す200は本発明における音声パケット受信装置を示す。本発明による音声パケット受信装置200はタイマー201と、音声パケット受信部202と、音声パケット受信バッファ203と、ジッタ値計算部204と、パケットロス率計算部205と、送信端末符号化方式決定部206と、符号化切り替え要求パケット作成部207と、符号化列データ復号部208と、音声復号化部210とによって構成することができる。
音声パケット受信部202は音声パケットデータと時刻データを入力とし、時刻データを受信タイマー値Trとして音声パケットデータに付加し、音声パケットデータを出力する。
音声パケット受信バッファ203は音声パケットデータを入力とし、パケット番号の順に従い並び替え、格納されている音声パケットの中で最も時間的に早く送信されたパケット番号を持つ音声パケットデータを出力する。本実施例では格納されている音声パケットの中で最も小さいパケット番号を持つ音声パケットデータを出力する。
タイマー記憶部501は音声パケットデータを入力とし、入力された音声パケットデータに記載されている送信タイマー値Tsと受信タイマー値Tr、および内部に記憶された前送信タイマー値Ts’、前受信タイマー値Tr’を出力する。出力後、入力されたTs、Trの値を新たにT’s、T’rとして記憶する。
平均ジッタ計算部504では、ジッタ列を入力とし、以下の(2)式に従って平均ジッタを計算し、平均ジッタの値を出力する。
また、ここではジッタ値計算部204の出力としてジッタ値記憶部503と平均ジッタ計算部504により平均ジッタを計算し、出力する構成について説明しているが、ジッタ計算部502の出力をジッタ値計算部204の出力とする構成としても良い。
パケットロス数記憶部601は音声パケットデータを入力とし、ある一定数の受信パケットに対する累積パケットロス数およびパケット番号を出力する。このパケットロス数記憶部601は直前に処理した音声パケットのパケット番号とパケットロス数の累積数を記憶することができるバッファを有する。音声パケットデータを入力とし、音声パケットデータからパケット番号Npを取り出し、また記憶している直前に処理した音声パケットのパケット番号N’pを取り出し、(3)式からパケットロス数を計算する。
(3)式により計算されたパケットロス数は、記憶しているパケットロス数の累積値(以下累積パケットロス数と記述)Plossに加算され、再び記憶される。また記憶されているN’pの値はNpに置き換わる。パケットロス数の加算がある一定の値M回に達すると、上記累積パケットロス数Plossとパケット番号Npが出力される。例えばM=1000とし、10秒ごとに累積パケットロス数を出力する構成とする事が出来る。
平均パケットロス率計算部602は、累積パケットロス数Plossとパケット番号Npを入力とし、平均パケットロス率を計算し、出力する。直前に処理を行ったパケット番号Nppreを記憶することが可能な記憶領域を有し、以下の式により平均パケットロス率を計算し出力する。
送信端末符号化方式決定部206は入力された平均ジッタと平均パケットロス率から送信端末側の符号化方式を決定し、符号化方式ID情報を出力する。ネットワークの輻輳に伴いパケットロスが発生する場合には、平均ジッタ、パケットロス率ともに大きくなるが、端末の負荷の増大に伴いパケットロスが発生する場合には、パケットロス率は大きくなるが平均ジッタは小さくなることを考慮し、例えば図7又は図8に示すような規則に従って符号化方式IDを決定すると効果的である。
符号化切り替え要求パケット作成部207は、符号化方式ID情報を入力とし、符号化方式ID情報にパケットヘッダを追加することで符号化切り替え要求パケットを作成し、ネットワークに符号化切り替え要求パケットを送信する。
符号化列データ復号部208は音声パケットデータを入力とし、音声パケットデータ中の図3に示される形式の符号化列データから符号化データと符号化方式ID情報を取り出し出力する。
尚、図7に示す規則1は定常時、つまり平均パケットロス率が所定値より小さい状況では、平均ジッタの値に関係なく伝送情報量が少ない符号化方式G.729を用いることを規定する規則であるため、主にパケット伝送線路の伝送容量が小さい動作環境に適用して好適である。
音声パケット送信装置100は図1を用いて説明したのと同様に、符号化切り替え要求パケット復号部101と、符号化選択部102と、音声符号化部103と、音声パケット作成部104と、音声パケット送信バッファ105と、タイマー106と、音声パケット送出部107とによって構成され、図1の実施例と同様に動作する。
符号化切り替え要求パケット復号部101は、ネットワークから送信端末の音声符号化方式を特定するために音声符号化方式ID情報と、送信端末の画像符号化制御部712を切り替えるための画像符号化動作制御情報が記載された符号化切り替え要求パケットを受信し、ヘッダを削除することで音声符号化方式ID情報と画像符号化動作制御情報を取り出し、取り出した音声符号化方式ID情報と画像符号化動作制御情報を出力する。ここで画像符号化動作制御情報は画像符号化の動作/非動作を指示できればなんでもよく、例えば0が動作を指示する情報を、1が非動作を指示する情報として実現することができる。画像符号化制御部712はこの画像符号化動作制御情報により動作/非動作状態に制御される。
画像パケット作成部714では、画像符号化列データを入力とし、パケットヘッダを付加した画像パケットデータを出力する。
画像パケット送信バッファ715は、画像パケットデータを入力とし、通常のIPネットワークにおける実時間画像通信の場合と同様に画像パケットデータをバッファリングし、一定の時間間隔で画像パケットデータを出力する。
図10に本発明による音声パケット受信装置200の第2の実施例を示す。
図10に示す実施例では図2に示した音声パケット受信装置200に画像パケット受信装置800を付加した実施例を示す。
図10に示す音声パケット受信装置200は図2を用いて説明した音声パケット受信装置200と同様にタイマー201と、音声パケット受信部202と、音声パケット受信バッファ203と、ジッタ値計算部204と、パケットロス率計算部205と、送信端末符号化方式決定部206と、符号化切り替え要求パケット作成部207と、符号化列データ復号部208とによって構成され、図2の実施例と同様に動作する。
ここでは送信端末符号化方式決定部206は着信したパケット信号から平均ジッタと平均パケットロス率から、送信端末側の音声符号化方式および画像符号化の動作/非動作を決定し、音声符号化方式ID情報と画像符号化動作制御情報を出力する。遠隔ビデオ会議など音声と画像を同時に符号化し、パケット伝送を行なうシステムの場合、一般的に画像符号化は音声符号化に比べ演算量が多いため、例えば図7に示した送信端末側の符号化選択部102の選択規則1に追加して、図11に示す規則に従って画像符号化動作制御情報を決定することが出来る。ここで、画像符号化制御情報が1の時には画像符号化を一時停止することを表し、また0の時には通常の画像符号化処理を行なうことを表す。
符号化切り替え要求パケット作成部207は、音声符号化ID情報と画像符号化制御情報を入力とし、音声符号化ID情報と画像符号化制御情報のデータにパケットヘッダを追加することで符号化切り替え要求パケットを作成し、ネットワークに符号化切り替え要求パケットを送信する。
画像パケット受信バッファ812は画像パケットデータを入力とし、パケット番号に従い並び替え、格納されている画像パケットの中で最も小さいパケット番号を持つ画像パケットデータを出力する。画像符号化データ復号部813は画像パケットデータを入力とし、画像パケットデータ中の画像符号化データを取り出し出力する。
画像復号化部814は画像符号化データを入力とし、画像データを復号して出力画像信号を出力する。
101 符号化切り替え要求パケット復号部 210 音声復号化部
102 符号化選択部 700 画像パケット送信装置
103 音声符号化部 712 画像符号化制御部
104 音声パケット作成部 713 画像符号化部
105 音声パケット送信バッファ 714 画像パケット作成部
106 タイマー 715 画像パケット送信バッファ
107 音声パケット送出部 717 画像パケット送出部
200 音声パケット受信装置 800 画像パケット受信装置
201 タイマー 811 画像パケット受信部
202 音声パケット受信部 812 画像パケット受信バッファ
203 音声パケット受信バッファ 813 画像符号化データ復号部
204 ジッタ値計算部 814 画像復号化部
205 パケットロス率計算部
206 送信端末符号化方式決定部
207 符号化切り替え要求パケット作成部
Claims (3)
- 離散音声楽音信号サンプルを入力とし、パケット通信によりディジタル符号を送信する際にある決まった時間間隔の離散音声楽音信号を符号化するために必要な演算量の異なる少なくとも2種類の音声符号化方式を動的に切り替える音声符号化選択制御方法であって、
ある決まった時間ごとの音声区間毎に各パケットを区別するためのパケット番号を各送信パケットに割り当てるステップと、
音声の符号化データと送信する時刻情報をパケットにより送信するステップと、
パケットを受信した時刻情報を記憶するステップと、
上記送信時刻情報と上記受信時刻情報からパケット到着ジッタを計算するステップと、
受信したパケットのパケット番号からパケットロス率を計算するステップと、
上記パケット到着ジッタと上記パケットロス率から、少なくともパケットロス率がある一定の閾値よりも大きく、かつパケット到着ジッタがある一定の閾値よりも小さい場合は演算量が少ない音声符号化方式を選択するステップと、
を備えることを特徴とする音声符号化選択制御方法。 - 請求項1記載の音声符号化選択制御方法において、パケットロス率がある一定の閾値よりも大きく、かつパケット到着ジッタがある一定の閾値よりも大きい場合は、伝送情報量が少ない音声符号化方法を選択するステップを備えることを特徴とする音声符号化選択制御方法。
- 請求項1又は2の何れかに記載の音声符号化選択制御方法において、上記演算量が少ない音声符号化方法を選択するステップは、上記パケットロス率がある一定の閾値よりも大きく、かつパケット到着ジッタがある一定の閾値よりも小さい場合、同時に動作している画像符号化処理を一時停止させるための指令信号を出力するステップを備えることを特徴とする音声符号化選択制御方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005119891A JP4392378B2 (ja) | 2005-04-18 | 2005-04-18 | 音声符号化選択制御方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005119891A JP4392378B2 (ja) | 2005-04-18 | 2005-04-18 | 音声符号化選択制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006303702A JP2006303702A (ja) | 2006-11-02 |
JP4392378B2 true JP4392378B2 (ja) | 2009-12-24 |
Family
ID=37471500
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005119891A Expired - Fee Related JP4392378B2 (ja) | 2005-04-18 | 2005-04-18 | 音声符号化選択制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4392378B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2105014B1 (en) * | 2006-12-08 | 2014-08-06 | Telefonaktiebolaget LM Ericsson (publ) | Receiver actions and implementations for efficient media handling |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06284148A (ja) * | 1993-03-30 | 1994-10-07 | Hitachi Ltd | 動画通信制御方法及び通信制御装置 |
JPH09321798A (ja) * | 1996-05-27 | 1997-12-12 | Fuji Electric Co Ltd | 通信速度制御方式 |
JPH11150711A (ja) * | 1997-11-17 | 1999-06-02 | Nec Corp | ビデオ会議データ転送装置 |
JP2002026964A (ja) * | 2000-07-03 | 2002-01-25 | Oki Electric Ind Co Ltd | 音声パケット送信装置、音声パケット受信装置、及びパケット通信システム |
JP2002300274A (ja) * | 2001-03-30 | 2002-10-11 | Fujitsu Ltd | ゲートウェイ装置及び音声データ転送方法 |
-
2005
- 2005-04-18 JP JP2005119891A patent/JP4392378B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2006303702A (ja) | 2006-11-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1756369B (zh) | 在带宽有限网络上的媒体速率变换 | |
CN100456284C (zh) | 用于流媒体的分散高速缓存 | |
US8320391B2 (en) | Acoustic signal packet communication method, transmission method, reception method, and device and program thereof | |
JP4661373B2 (ja) | 特定メディアデータの破棄を制御する送信装置及び送信プログラム | |
JP5339697B2 (ja) | 送信装置、送信方法、及びコンピュータプログラム | |
KR20180031547A (ko) | 서버에서 멀티 비트 레이트 스트림 미디어를 적응적으로 제공하기 위한 방법 및 장치 | |
JP5207895B2 (ja) | 送信装置、受信装置、及び方法、プログラム | |
JPWO2006075390A1 (ja) | 中継方法、中継装置、通信システム及びコンピュータプログラム | |
JP2009049529A (ja) | 通信制御装置、通信制御方法、及びコンピュータプログラム | |
JPWO2005039180A1 (ja) | メディア信号の送信方法と受信方法ならびに送受信方法及び装置 | |
CN102870416A (zh) | 运动图像编码装置以及运动图像解码装置 | |
JP4862262B2 (ja) | Dtmf信号処理方法、処理装置、中継装置、及び通信端末装置 | |
JP2005322995A (ja) | リアルタイム映像転送におけるバッファ制御方法、送信端末、受信端末、映像配信システム、およびプログラム | |
US8649277B2 (en) | Communication apparatus and method | |
KR100601934B1 (ko) | 적응적 스트리밍 장치 및 방법 | |
JP4392378B2 (ja) | 音声符号化選択制御方法 | |
JP4406382B2 (ja) | 音声符号化選択制御方法 | |
JP2003249977A (ja) | データ送出装置、データ受信装置及びデータ伝送装置 | |
JP4714074B2 (ja) | 伝送装置、送信装置及び受信装置 | |
JP4050961B2 (ja) | パケット型音声通信端末 | |
KR101703133B1 (ko) | 실시간 소스-채널 복합부호화 방법 및 그 장치 | |
JP3980592B2 (ja) | 通信装置、符号化列送信装置、符号化列受信装置、これらの装置として機能させるプログラムとこれを記録した記録媒体、および符号列受信復号方法、通信装置の制御方法 | |
JPS6268350A (ja) | 音声パケツト通信方式 | |
KR100744563B1 (ko) | 패킷 단위로 수신된 임베디드 코덱의 비트 스트림 처리장치 및 방법 | |
JP4068540B2 (ja) | 符号化データ伝送装置,符号化データ復号装置,符号化データ伝送方法および符号化データ復号方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20070323 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070810 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090610 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090623 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090730 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090929 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091009 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121016 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121016 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131016 Year of fee payment: 4 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |