JP2004064408A - Transmitting device, receiving device, generating method and processing method for voice over internet protocol packet - Google Patents

Transmitting device, receiving device, generating method and processing method for voice over internet protocol packet Download PDF

Info

Publication number
JP2004064408A
JP2004064408A JP2002219782A JP2002219782A JP2004064408A JP 2004064408 A JP2004064408 A JP 2004064408A JP 2002219782 A JP2002219782 A JP 2002219782A JP 2002219782 A JP2002219782 A JP 2002219782A JP 2004064408 A JP2004064408 A JP 2004064408A
Authority
JP
Japan
Prior art keywords
packet
voip
code
sound signal
encoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002219782A
Other languages
Japanese (ja)
Other versions
JP3797664B2 (en
Inventor
Hiroyuki Sato
佐藤 廣行
Tadashi Saito
斎藤 正
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Communication Technologies Ltd
Original Assignee
Hitachi Communication Technologies Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Communication Technologies Ltd filed Critical Hitachi Communication Technologies Ltd
Priority to JP2002219782A priority Critical patent/JP3797664B2/en
Publication of JP2004064408A publication Critical patent/JP2004064408A/en
Application granted granted Critical
Publication of JP3797664B2 publication Critical patent/JP3797664B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)
  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To prevent PB (pushbutton) sound from inappropriate reproduction at the receiving side because it is changed to a voice packet as a sound signal for transmission despite of being a PB sound signal. <P>SOLUTION: The receiving device comprises a VoIP (Voice over Internet Protocol) disassembling unit 38 for disassembling transmitted VoIP packets to analyze whether the VoIP packets contain PB code packets of encoded PB sound signals, a buffer 41 for temporarily accumulating PB code packets and/or voice packets before decoding, and a packet rewriting unit 42 for rewriting voice packets accumulated in the buffer 41 into PB code packets by a predetermined quantity if it is analyzed that the VoIP packets contain PB code packets. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、PB(Push button)音及び音声をコード化すると共にパケット化してPBコードパケット及び音声パケットを作成し、これらをVoIP(Voiceover IP)パケットとして送信するVoIPパケット送信装置、及びVoIPパケットを受信して、該VoIPパケットを復号化するVoIPパケット受信装置、VoIPパケットの生成方法、及びVoIPパケットの処理方法に関する。
【0002】
【従来の技術】
通信システムとしては、例えば、図6に示すように、IP(Internet Protocol)網1を介して、通信するシステムがある。
【0003】
このシステムでは、IP網1の一方に、ルータ2と、音声を音声パケットに変換等するVoIPゲートウエイ3と、このVoIPゲートウエイ3に接続されているPBX(Private Branch Exchanger)4と、このPBX4に接続されている複数の通常電話機5と、ルータ2に直接接続されているIP電話機10とが設けられている。また、IP網1の他方には、ルータ6と、VoIPゲートウエイ30と、このVoIPゲートウエイ30に接続されているPBX7と、このPBX7に接続されている複数の通常電話機8と、が設けられている。
【0004】
IP電話機10は、図7に示すように、ハンドセット10と、PB(Push button)12と、PB12の操作に応じてPB音信号を発するPB音発生器13と、ハンドセット10及びPB音発生器13からのアナログ信号をディジタル信号に変換するA/D変換器147と、PB音信号を検出するPB検出部15と、ハンドセット11からの音声信号を圧縮・符号化して音声パケットを生成すると共に、PB検出部15でPB音信号が検出されるとPB音信号も圧縮・符号化してPBコードパケットを生成する圧縮・符号化部16と、圧縮・符号化部16からの4つのパケットを一つにまとめてVoIPパケットを生成するIPパケット化部17と、外部から受信したVoIPパケットを分解するIPパケット分解部18と、分解で得られたPBコードパケット及び音声パケットを伸張・復号化する伸張・復号化部19と、外部と通信するためのインタフェース20と、を備えている。
【0005】
また、VoIPゲートウエイ30は、PBX側の端末側インタフェース31と、端末側インタフェース31からのアナログ信号をディジタル信号に変換するA/D変換器32と、PB音信号を検出するPB検出部35と、端末側インタフェースからの音声信号を圧縮・符号化して音声パケットを生成すると共に、PB検出部35でPB音信号が検出されるとPB音信号も圧縮・符号化してPBコードパケットを生成する圧縮・符号化部36と、圧縮・符号化部36からの4つのパケットを一つにまとめてVoIPパケットを生成するIPパケット化部37と、外部から受信したVoIPパケットを分解するIPパケット分解部38と、分解で得られたPBコードパケット及び音声パケットを伸張・復号化する伸張・復号化部39と、外部と通信するためIP網側インタフェース40と、を備えている。
【0006】
仮に、IP電話機10の通話中に、PB12が押されたとすると、PB音発生器13からPB音信号が発せられ、これがディジタル信号に変換された後、圧縮・符号化部16及びPB検出部15に入力する。PB検出部15は、PB音信号を検出すると、圧縮・符号化部16に対して、このPB音信号をPBコードパケットに変換するよう指示を与える。この際、PB検出部15は、所定時間以上のPB音信号を受信して、初めてPB音を検出したことになるため、PB音検出前に圧縮・符号化部16に入力したPB音信号は、音声信号として処理され、つまり音声パケットに変換される。
【0007】
ここで、音声パケットに変換されるPB音信号について、図8を用いて、具体的に説明する。なお、図8において、圧縮・符号化部16での符号化間隔が10msで、VoIPパケットは音声パケット及び/又はPBコードパケットを4つまとめたもので、このVoIPパケットの送出間隔が40msであるとする。また、PB音信号がPB検出部15に入力し初めてから検出するまでの時間が50msであるとする。
【0008】
ここで、圧縮・符号化部16がパケットBをIPパケット化部17に送出したときに、PB音信号がPB検出部15に入力したとする。PB検出部15は、前述したように、PB音信号が入力して始めてから検出するまでに、50msかかるので、PB音信号が入力した以降、圧縮・符号化部16及びPB検出部15に、PB音信号C,D,E,F,G,F,H,…が順次に入力しても、PB検出部15は、信号Hが入力する直前まで、信号C,D,E,F,GがPB音信号であることを検知できない。このため、圧縮・符号化部16は、信号C,D,E,F,GがPB音信号であるにも関わらず、これを音声信号として処理し、これらの信号を音声パケットC,D,E,F,Gに変換してしまう。
【0009】
IPパケット化部17は、前述したように、圧縮・符号化部15でパケット化された4つのパケットをまとめて一つのVoIPパケットにするため、圧縮・符号化部16からのパケットB〜Eを一つのVoIPパケットとして外部へ送信し、パケットF〜Iを一つのVoIPパケットとして外部へ送信する。この過程で、パケットH,Iは、PB音信号が検出された後に、圧縮・符号化部16から出力されたパケットであるが、4つのパケットをまとめる関係上、このパケットH,Iも、その前のパケットF,Gと同様に、音声パケットの束としてまとめられる。つまり、PB検出部にPB音信号が入力し始めてから、7つ分のPB音信号が音声パケットC〜Iとして処理される。
【0010】
以上のIP電話機10に、IP網1及びルータ2,6を介して接続されているVoIPゲートウエイ30では、IP電話機10からのVoIPパケットを受信すると、IPパケット分解部38がVoIPパケットを、音声パケットやPBコードパケットに分解する。なお、図8中、受信側の分解部バッファとは、VoIPゲートウエイ30のパケット分解部38が備えているバッファで、IP網側インタフェース40から送られてくる4つのパケットを有して構成されるVoIPパケットを1つ分溜めておける容量のバッファである。VoIPゲートウエイ30の伸張・復号化部39は、音声パケットを音声信号に変換し、A/D変換器32及び端末側インタフェース31を介して、この音声信号をPBXに送り、PBコードパケットをPB音信号に変換し、A/D変換器32を介して、このPB音信号をPB音発生器33に送る。PB音発生器33は、一定時間分、例えば、50ms分のPB音信号を受け取ると、このPB音信号に応じたPB音を発生して、端末側インタフェース31を介して、このPB音をPBX7へ送信する。PBX7では、仮に、このPB音が通常電話機5の内線番号である場合には、この内線番号に対応した通常電話機5との通話回線を確立する。
【0011】
【発明が解決しようとする課題】
しかしながら、以上のような従来技術では、本来、IP電話機10からPBコードパケットとして送られてくるはずの7つ分(70ms分)のPB音信号が、音声パケット(C〜I)として送られてくるので、VoIPゲートウエイ30のPB音発生部33は、所定時間(50ms)分の音声信号を受信できず、PB音を発しないことがあるという問題点がある。
【0012】
本発明は、このような従来技術の問題点に着目し、PB音信号の漏れによるPB音の未発生を最小限に抑えることができるVoIPパケット受信装置、VoIPパケット送信装置、VoIPパケットの生成方法及びVoIPパケットの処理方法を提供することを目的とする。
【0013】
【課題を解決するための手段】
前記目的を達成するためのVoIP受信装置は、
VoIPパケットを分解して、該VoIPパケット中にPBコードパケットが含まれているか否かを解析するVoIPパケット分解手段と、
前記VoIPパケット分解手段による分解で得られた前記PBコードパケット及び/又は音声パケットを、復号化される前に、一時的に溜めておくバッファと、
前記VoIPパケット分解手段が前記VoIPパケット中に前記PBコードパケットが含まれていると解析すると、前記バッファに溜められた前記音声パケットを、予め定められた数量分だけPBコードパケットに書き換えるパケット書換手段と、
を備えていることを特徴とするものである。
【0014】
また、前記目的を達成するためのVoIPパケット送信装置は、
PB音信号を検出するPB検出手段と、
音声信号を符号化して音声パケットに変換すると共に、前記PB音信号検出手段が前記PB音信号を検出すると、該PB音信号を符号化してPBコードパケットに変換する符号化手段と、
前記PBコードパケット又は前記音声パケットを所定数量まとめてVoIPパケットを生成すると共に、前記PB検出手段から前記PB音信号の検出を受け付けると、該音声パケットが前記所定数量まとまらなくても、該PB音信号の検出を受け付けた時点までにまとまった該音声パケットを前記VoIPパケットとして出力するIPパケット化手段と、
を備えていることを特徴とするものである。
【0015】
ここで、前記IPパケット化手段は、前記PB検出手段から前記PB音信号の検出を受け付けると、前記符号化手段からの前記PBコードパケットのうち、該PB音信号の検出を受け付けた時点から最初の一つのPBコードパケットをVoIPパケットとして出力する、ものであることが好ましい。
【0016】
また、前記目的を達成するための他のVoIPパケット送信装置は、
PB音信号を検出するPB検出手段と、
音声信号を符号化して音声パケットに変換すると共に、前記PB音信号検出手段が前記PB音信号を検出すると、該PB音信号を符号化してPBコードパケットに変換する符号化手段と、
前記PB音信号が前記PB検出部よりも一定時間遅れて前記符号化手段に入力するよう、該符号化手段の前段で該PB音信号を該一定時間溜めておくバッファと、
を備えていることを特徴とするものである。
【0017】
前記目的を達成するためのVoIPパケットの処理方法は、
VoIPパケットを分解して、該VoIPパケット中にPBコードパケットが含まれているか否かを解析するVoIPパケット分解工程と、
前記VoIPパケット分解手段による分解で得られた前記PBコードパケット及び/又は音声パケットを、復号化される前に、一時的にバッファに溜めておくバッファリング工程と、
前記VoIPパケット分解工程で、前記VoIPパケット中に前記PBコードパケットが含まれていると解析されると、前記バッファに溜められた前記音声パケットを、予め定められた数量分だけ前記PBコードパケットに書き換えるパケット書換工程と、
を有することを特徴とするものである。
【0018】
前記目的を達成するためのVoIPパケットの生成方法は、
PB音信号を検出するPB検出工程と、
音声信号を符号化して音声パケットに変換すると共に、前記PB音信号検出工程で前記PB音信号を検出すると、該PB音信号を符号化してPBコードパケットに変換する符号化工程と、
前記PBコードパケット又は前記音声パケットを所定数量まとめてVoIPパケットを生成すると共に、前記PB検出工程での前記PB音信号の検出を受け付けると、該音声パケットが前記所定数量まとまらなくても、該PB音信号の検出を受け付けた時点までにまとまった該音声パケットをVoIPパケットとして出力するIPパケット化工程と、
を有することを特徴とするものである。
【0019】
また、前記目的を達成するための他のVoIPパケットの生成方法は、
PB音信号を検出するPB検出工程と、
音声信号を符号化して音声パケットに変換すると共に、前記PB音信号検出工程で前記PB音信号を検出すると、該PB音信号を符号化してPBコードパケットに変換する符号化工程と、
前記PB音信号が前記PB検出工程よりも一定時間遅れて前記符号化工程に入力するよう、該PB音信号が該符号化工程に入力する前に、該PB音信号を該一定時間バッファに蓄えるバッファリング工程と、
前記符号化工程で得られた前記PBコードパケット又は前記音声パケットを所定数量まとめて、前記VoIPパケットを生成するIPパケット化工程と、
を有することを特徴とするものである。
【0020】
【発明の実施の形態】
以下、本発明に係る通信システムの各種実施形態について、図面を用いて説明する。
【0021】
本実施形態の通信システムは、「従来技術」の欄で図6を用いて説明したように、IP網1の一方に、ルータ2と、音声を音声パケットに変換等するVoIPゲートウエイ3と、このVoIPゲートウエイ3に接続されているPBX4と、このPBX4に接続されている複数の通常電話機5と、ルータ2に直接接続されているIP電話機10aとが設けられている。また、IP網1の他方には、ルータ6と、VoIPゲートウエイ30aと、このVoIPゲートウエイ30aに接続されているPBX7と、このPBX7に接続されている複数の通常電話機8と、が設けられている。
【0022】
IP電話機10aは、図7を用いて説明した従来のIP電話機10と同様、図1に示すように、ハンドセット11と、PB12と、PB12の操作に応じてPB音信号を発するPB音発生器13と、ハンドセット11及びPB音発生器13からのアナログ信号をディジタル信号に変換するA/D変換器14と、PB音信号を検出するPB検出部15aと、ハンドセット11からの音声信号を圧縮・符号化して音声パケットを生成すると共に、PB検出部15aでPB音信号が検出されるとPB音信号も圧縮・符号化してPBコードパケットを生成する圧縮・符号化部16と、圧縮・符号化部16からの4つのパケットを一つにまとめてVoIPパケットを生成するIPパケット化部17aと、外部から受信したVoIPパケットを分解するIPパケット分解部18と、分解で得られたPBコードパケット及び音声パケットを伸張・復号化する伸張・復号化部19と、外部と通信するためのインタフェース20と、を備えている。但し、本実施形態のPB検出部15aは、従来技術のPB検出部15と異なり、PB音信号の検出を圧縮・符号化部16と共に、IPパケット化部17aにも通知する。また、IPパケット化部17aは、PB音信号の検出を受け付けると、圧縮・符号化部16からの音声パケットが4つ集まらなくても、つまり、3つ以下の音声パケットしか集まらなくても、PB音信号の検出を受け付けた時点で蓄えている音声パケットをVoIPパケットとして出力する。
【0023】
本実施形態のIP電話機10aは、図2に示すように、圧縮・符号化部16での符号化間隔が10msである。また、前述したように、VoIPパケットは音声パケット及び/又はPBコードパケットを4つまとめたもので、このVoIPパケットの送出間隔は40msである。また、PB音信号がPB検出部15aに入力し初めてから検出するまでの時間が50msである。
【0024】
また、以上のIP電話機10aにIP網1やルータ2,6を介して接続されているVoIPゲートウエイ30bは、図7を用いて説明した従来のVoIPゲートウエイ30と同様、PBX側の端末側インタフェース31と、端末側インタフェース31からのアナログ信号をディジタル信号に変換するA/D変換器32と、PB音信号を検出するPB検出部35と、端末側インタフェース31からの音声信号を圧縮・符号化して音声パケットを生成すると共に、PB検出部35でPB音信号が検出されるとPB音信号も圧縮・符号化してPBコードパケットを生成する圧縮・符号化部36と、圧縮・符号化部36からの4のパケットを一つにまとめてVoIPパケットを生成するIPパケット化部37と、外部から受信したVoIPパケットを分解するIPパケット分解部38と、分解で得られたPBコードパケット及び音声パケットを伸張・復号化する伸張・復号化部39と、外部と通信するためIP網側インタフェース40と、を備えている。本実施形態のVoIPゲートウエイ30aは、さらに、IPパケット分解部38がVoIPパケットを分解して得られたPBコードパケットや音声パケットを5つ分、言い換えると50ms分蓄える揺らぎ吸収バッファ41と、この揺らぎ吸収バッファ41に蓄えられた音声パケットをPBコードパケットに書き換えるパケット書換部42と、を備えている。なお、ここでは、揺らぎ吸収バッファ41の容量を、PB音信号の検出時間(50ms)に対応させたが、後述するように、PB音信号の検出時間により先漏れする6つのPB音信号に関する音声パケットを蓄えられる容量、つまり60ms分の容量にしてもよい。
【0025】
次に、以上で説明した、VoIPパケット送信装置としてのIP電話機10a、及びVoIPパケット受信装置としてのVoIPゲートウエイ30aの動作について、図2を用いて説明する。
【0026】
仮に、IP電話機10aの通話中であって、圧縮・符号化部16がパケットBをIPパケット化部17aに送出したときに、PB12が押され、PB音信号がPB検出部15aに入力したとする。PB検出部15aは、前述したように、PB音信号が入力して始めてから検出するまでに、50msかかるので、PB音信号が入力した以降、圧縮・符号化部16及びPB検出部15aに、PB音信号C,D,E,F,G,F,H,…が順次に入力しても、PB検出部15aは、信号Hが入力する直前まで、信号C,D,E,F,GがPB音信号であることを検知できない。このため、圧縮・符号化部16は、信号C,D,E,F,GがPB音信号であるにも関わらず、これを音声信号として処理し、これらの信号を音声パケットC,D,E,F,Gに変換してしまう。
【0027】
圧縮・符号化部16は、PB検出部15aからPB音検出の旨を受信すると、その時点以降のPB音信号I,J,…をPBコードパケットに変換して、IPパケット化部17aへ送る。
【0028】
IPパケット化部17aは、前述したように、基本的に、圧縮・符号化部16でパケット化された4つのパケットをまとめて一つのVoIPパケットにするため、圧縮・符号化部16からの音声パケットB〜Eを一つのVoIPパケットとして外部へ送信する。但し、IPパケット化部17aは、PB検出部15aからPB音信号の検出を受け付けると、圧縮・符号化部16からの音声パケットが4つ集まらなくても、PB音信号の検出を受け付けた時点で蓄えている音声パケットをVoIPパケットとして出力する。このため、ここでは、音声パケットB〜Eを一つのVoIPパケットとして外部へ送信した後、PB音検出までに蓄えられた3つの音声パケットF,G,Hを一つのVoIPパケットとして外部へ送信する。そして、圧縮・符号化部16から音声パケットHの後に順次送られてきたPBコードパケットI,J,…が、4つ溜まると、4つのPBコードパケットI〜Lを一つのVoIPパケットとして外部へ送信する。この結果、本実施形態のIP電話機10aは、PB検出部15aにPB音信号が入力し始めてから、6つ分のPB音信号が音声パケットとして処理されるものの、図8に示す従来技術よりも、1つのPBコードパケット(PBコードパケットI)分、早めに、PBコードパケットを受信側へ送ることになる。
【0029】
以上のIP電話機10aに、IP網1及びルータ2,6を介して接続されているVoIPゲートウエイ30aでは、IP電話機10aからのVoIPパケットを受信すると、IPパケット分解部38がVoIPパケットを、音声パケットやPBコードパケットに分解し、順次、揺らぎ吸収バッファ41に送る。IPパケット分解部38は、この分解過程で、VoIPパケット中にPBコードパケットが含まれていることを認識すると、その旨をパケット書換部42に通知する。パケット書換部42は、この通知を受けると、この時点で、揺らぎ吸収バッファに溜められている5つの音声パケットC〜GをPBコードパケットI〜Iに書き換え、さらに、10ms後、書き換えられた一つのPBコードパケットIが揺らぎ吸収バッファ41から伸張・復号化部39に送られ、IPパケット分解部38から揺らぎ吸収バッファ41に送られてきた一つの音声パケットHをPBコードパケットIに書き換える。つまり、IP電話機10aで、先漏れした6つのPB音信号に関する音声パケットC〜HをPBコードパケットに書き換える。
【0030】
伸張・復号化部39は、揺らぎ吸収バッファ41からの音声パケットを音声信号に変換し、A/D変換器32及び端末側インタフェース31を介して、この音声信号をPBX7に送る。また、伸張・復号化部39は、揺らぎ吸収バッファ41からのPBコードパケットをPB音信号に変換し、A/D変換器32を介して、このPB音信号をPB音発生器33に送る。PB音発生器33は、50ms分以上のPB音信号を受け取ると、このPB音信号に応じたPB音を発生して、端末側インタフェース31を介して、このPB音をPBX7へ送信する。PBX7では、仮に、このPB音が通常電話機5の内線番号である場合には、この内線番号に対応した通常電話機5との通話回線を確立する。
【0031】
以上のように、本実施形態では、IP電話機10aで先漏れした6つのPB音信号に関する音声パケットを受信側でPBコードパケットに書き換え、この書き換えられたPBコードパケットとIP電話機10aから送られてきたPBコードパケットとに基づいて、PB音を発生させているので、PB音信号の漏れによるPB音の未発生を防ぐことができる
次に、本発明に係る第2の実施形態としての通信システムについて、図3及び図4を用いて説明する。
【0032】
本実施形態の通信システムは、基本的に第1の実施形態の通信システムと同じであるが、IP電話機10bのIPパケット化部17bの動作と、VoIPゲートウエイ30bのパケット分解部38の下流側に揺らぎ吸収バッファ39がないこととが、第一の実施形態と異なる。
【0033】
本実施形態のIP電話機10bのIPパケット化部17bは、PB検出部15bからPB音信号の検出を受け付けると、第1の実施形態と同様に、圧縮・符号化部16からの音声パケットが4つ集まらなくても、PB音信号の検出を受け付けた時点で蓄えている音声パケットをVoIPパケットとして出力する。さらに、この実施形態におけるIPパケット化部17bは、PB音信号の検出を受け付けた後に圧縮・符号化部16からの送られてきた最初の一つのPBコードパケットのみをVoIPパケットとして出力する。
【0034】
従って、IPパケット化部17bは、図4に示すように、圧縮・符号化部16からの音声パケットB〜Eを一つのVoIPパケットとして外部へ送信し、PB検出部15bからPB音信号の検出を受け付けると、圧縮・符号化部16からの音声パケットが4つ集まらなくても、PB音信号の検出を受け付けた時点で蓄えている音声パケットF,G,Hを一つのVoIPパケットとして外部へ送信する。さらに、PB音信号の検出後に圧縮・符号化部16からの送られてきた最初の一つのPBコードパケットIのみをVoIPパケットとして外部へ送信する。このため、本実施形態では、従来技術のように、4つのPB音コードパケットが集まるまで待たないので、従来技術よりも、4つのPBコードパケット分、早めにPBコードパケットを外部に送ることになる。
【0035】
以上のIP電話機10bに、IP網1及びルータ2,6を介して接続されているVoIPゲートウエイ30bでは、IP電話機10bからのVoIPパケットを受信すると、IPパケット分解部38がVoIPパケットを、音声パケットやPBコードパケットに分解し、順次、伸張・復号化部39に送る。IPパケット分解部39は、この分解過程で、VoIPパケット中にPBコードパケットが含まれていることを認識すると、その旨をパケット書換部42bに通知する。パケット書換部42は、この通知を受けると、この時点で、IPパケット分解部38が備えているバッファに蓄えられている音声パケットをPBコードパケットに書き換える。ここで、IPパケット分解部38は、PBコードパケット又は音声パケットを4つ含んでいるVoIPパケットを受け入れる必要があるため、このIP分解パケット部38のバッファは、少なくとも、PBコードパケット又は音声パケットを4つ以上蓄えることができるものである。このため、IPパケット分解部38は、PBコードパケットIを含むVoIPパケットを受け付けた時点で、このIPパケット分解部38のバッファには、少なくとも3つの音声パケットF,G,Hが蓄えられていることになる。従って、IPパケット分解部38がIPヘッダからPBコードパケットを識別し、パケット書換部42が、IPパケット分解部38からPBコードパケットが含まれている旨の通知を受け付けたときに、IPパケット分解部38のバッファに蓄えられている3つの音声パケットF,G,HをPBコードパケットI,I,Iに書き換える。つまり、IP電話機で、先漏れした6つのPB音信号に関する音声パケットC〜Hのうち、音声パケットF,G,HをPBコードパケットに書き換える。
【0036】
伸張・復号化部39では、第一の実施形態と同様、IPパケット分解部38からの音声パケットを音声信号に変換し、A/D変換器32及び端末側インタフェース31を介して、この音声信号をPBX7に送し、IPパケット分解部38からのPBコードパケットをPB音信号に変換し、A/D変換器32を介して、このPB音信号をPB音発生器33に送る。PB音発生器33は、50ms分以上のPB音信号を受け取ると、このPB音信号に応じたPB音を発生して、端末側インタフェース31を介して、このPB音をPBX7へ送信する。
【0037】
以上のように、本実施形態では、IP電話機10aで先漏れした6つのPB音信号に関する音声パケットのうち、3つの音声パケットをPBコードパケットに書き換え、この書き換えられたPBコードパケットとIP電話機10aから送られてきたPBコードパケットとに基づいて、PB音を発生させているので、PB音信号の漏れによるPB音の未発生を最小限に抑えることができる。さらに、本実施形態では、IPパケット分解部38と伸張・復号化部39との間に、揺らぎ吸収バッファを設けていないので、メモリの有効利用を図ることができる上に、揺らぎ吸収バッファの存在による応答遅延を回避することができる。
【0038】
次に、本発明に係る通信システムの第3の実施形態について、図5を用いて説明する。
【0039】
本実施形態のIP電話機10cは、圧縮・符号化部16の前段に前段バッファ21を設けたもので、その他のIP電話機10cの構成は、第2の実施形態と同様である。
【0040】
前段バッファ21の容量は、第2の実施形態で先漏れしてしまう6つのPB音信号C〜Hを蓄えることができる容量である。PB音発生器13からのPB音信号は、圧縮・符号化部16へはこの前段バッファ21を介して入力し、PB検出部15bへはこの前段バッファ21を介さずに入力する。従って、圧縮・符号化部16には、PB検出部15bよりも、前段バッファ21の容量分だけ、遅れてPB信号が入力する。このため、図2に示すように、PB検出部15bにPB音信号C,D,E,…が入力した時点では、圧縮・符号化部16には、PB音信号C,D,E,…が入力しておらず、PB検出部15bがPB音信号Hを検出した時点で、圧縮・符号化部16にPB音信号C,D,E,…が入力し始めることになる。このため、圧縮・符号化部16にPB音信号C,D,E,…として入力した信号は、こららが入力した時点でPB音信号であることが検出されているので、以上の実施形態と異なり、先漏れすることなく、全てPBコードパケットC,D,E,…に変換される。
【0041】
以上のように、本実施形態では、IP電話機10cにおいて、PB音信号の先漏れがなくなるので、PB音信号の漏れによるPB音の未発生を防ぐことができる。
【0042】
なお、以上の各実施形態では、VoIPパケット送信装置としてIP電話機を例にして説明したが、本発明はこれに限定されるものではなく、PB音信号や音声信号をパケット化し、これらをまとめてVoIPパケットとして外部に送信するものであれば、本発明を如何なるものに適用してもよく、例えば、図6中のVoIPゲートウエイや、このVoIPゲートウエイの機能を備えたPBXに、本発明を適用してもよい。また、以上の各実施形態では、VoIPパケット送信受信としてVoIPゲートウエイを例にして説明したが、これに関しても、PBコードパケットや音声パケットをまとめたVoIPパケットを受信し、これを復号化するものであれば、本発明を如何なるものに適用してもよく、例えば、VoIPゲートウエイの機能を備えたPBXに、本発明を適用してもよい。
【0043】
【発明の効果】
本発明に係るVoIPパケット受信装置によれば、VoIP送信装置で漏れたPB音信号に関する音声パケットをPBコードパケットに書き換え、この書き換えられたPBコードパケットとVoIPパケット受信装置から送られてきたPBコードパケットとに基づいて、PB音を発生させているので、PB音信号の漏れによるPB音の未発生を最小限に抑えることができる。
【0044】
また、本発明に係るVoIPパケット送信装置によれば、符号化手段の前段にPB音信号を一定時間溜めておくバッファを設け、PB音信号が入力してからそれを検知するまでに一定時間かかるPB検出手段よりも、一定時間遅くに、符号化手段にPB音信号が入力するようにしたので、PB検出手段でPB信号を検知した時点以降に、符号化手段にPB音信号が入力するようになり、符号化手段でPB音信号を音声パケットとして処理してしまう、PB音信号の漏れを防ぐことができ、結果として、PB音の未発生を防ぐことができる。
【図面の簡単な説明】
【図1】本発明に係る第1の実施形態における通信システムにおけるIP電話機及びVoIPゲートウエイの機能ブロック図である。
【図2】本発明に係る第1の実施形態におけるパケット送出側及び受信側のパケットの処理内容を示す説明図である。
【図3】本発明に係る第2の実施形態における通信システムにおけるIP電話機及びVoIPゲートウエイの機能ブロック図である。
【図4】本発明に係る第2の実施形態におけるパケット送出側及び受信側のパケットの処理内容を示す説明図である。
【図5】本発明に係る第3の実施形態における通信システムにおけるIP電話機及びVoIPゲートウエイの機能ブロック図である。
【図6】通信システムの系統図である。
【図7】従来の通信システムにおけるIP電話機及びVoIPゲートウエイの機能ブロック図である。
【図8】従来のパケット送出側及び受信側のパケットの処理内容を示す説明図である。
【符号の説明】
1…IP網、10,10a,10b,10c…IP電話機、11…ハンドセット、12…PB、13,33…PB音発生器、15,15a,15b,35…PB検出部、16,36…圧縮・符号化部、17,17a,17b,37…IPパケット化部、18,38…IPパケット分解部、19,39…伸張・復号化部、41…揺らぎ吸収バッファ、42,42b…パケット書換部、30,30a,30b…VoIPゲートウエイ。
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention encodes a PB (Push Button) sound and voice and packetizes them to create a PB code packet and a voice packet, and transmits them as a VoIP (Voiceover IP) packet. The present invention relates to a VoIP packet receiving device that receives and decodes the VoIP packet, a VoIP packet generation method, and a VoIP packet processing method.
[0002]
[Prior art]
As a communication system, for example, as shown in FIG. 6, there is a system that performs communication via an IP (Internet Protocol) network 1.
[0003]
In this system, a router 2, a VoIP gateway 3 for converting voice into voice packets, a PBX (Private Branch Exchanger) 4 connected to the VoIP gateway 3, and a PBX 4 are connected to one side of the IP network 1. A plurality of ordinary telephones 5 and an IP telephone 10 directly connected to the router 2 are provided. On the other side of the IP network 1, a router 6, a VoIP gateway 30, a PBX 7 connected to the VoIP gateway 30, and a plurality of ordinary telephones 8 connected to the PBX 7 are provided. .
[0004]
As shown in FIG. 7, the IP telephone 10 includes a handset 10, a push button (PB) 12, a PB sound generator 13 that emits a PB sound signal in accordance with the operation of the PB 12, a handset 10 and a PB sound generator 13. A / D converter 147 for converting an analog signal from a digital signal into a digital signal, a PB detection unit 15 for detecting a PB sound signal, and a voice packet generated by compressing and encoding a voice signal from the handset 11, When a PB sound signal is detected by the detection unit 15, the PB sound signal is also compressed and coded to generate a PB code packet, and the four packets from the compression and coding unit 16 are combined into one. An IP packetizing unit 17 that collectively generates VoIP packets; an IP packet decomposing unit 18 that decomposes VoIP packets received from the outside; An expansion / decoding unit 19 for expanding / decoding the obtained PB code packet and voice packet and an interface 20 for communicating with the outside are provided.
[0005]
Further, the VoIP gateway 30 includes a terminal interface 31 on the PBX side, an A / D converter 32 for converting an analog signal from the terminal interface 31 into a digital signal, a PB detection unit 35 for detecting a PB sound signal, An audio signal from the terminal side interface is compressed and encoded to generate an audio packet, and when a PB sound signal is detected by the PB detection unit 35, the PB sound signal is also compressed and encoded to generate a PB code packet. An encoding unit 36; an IP packetizing unit 37 that combines the four packets from the compression / encoding unit 36 into one to generate a VoIP packet; and an IP packet decomposing unit 38 that decomposes a VoIP packet received from the outside. A decompression / decoding unit 39 for decompressing / decoding the PB code packet and the voice packet obtained by the decomposition, An IP network-side interface 40 to, and a.
[0006]
Assuming that the PB 12 is pressed during the telephone call of the IP telephone 10, a PB sound signal is generated from the PB sound generator 13, which is converted into a digital signal. To enter. When detecting the PB sound signal, the PB detection unit 15 instructs the compression / encoding unit 16 to convert the PB sound signal into a PB code packet. At this time, since the PB detection unit 15 has detected the PB sound for the first time after receiving the PB sound signal for a predetermined time or more, the PB sound signal input to the compression / coding unit 16 before the PB sound detection is , Are processed as voice signals, that is, converted into voice packets.
[0007]
Here, the PB sound signal converted into the voice packet will be specifically described with reference to FIG. In FIG. 8, the encoding interval in the compression / encoding unit 16 is 10 ms, the VoIP packet is a group of four voice packets and / or PB code packets, and the sending interval of the VoIP packet is 40 ms. And It is also assumed that the time from when the PB sound signal is input to the PB detection unit 15 until detection is 50 ms.
[0008]
Here, it is assumed that a PB sound signal is input to the PB detection unit 15 when the compression / encoding unit 16 sends out the packet B to the IP packetization unit 17. As described above, the PB detection unit 15 takes 50 ms from when the PB sound signal is input to when it is detected, so that after the PB sound signal is input, the compression / coding unit 16 and the PB detection unit 15 Even if the PB sound signals C, D, E, F, G, F, H,... Are sequentially input, the PB detection unit 15 outputs the signals C, D, E, F, G until immediately before the signal H is input. Cannot be detected as a PB sound signal. Therefore, the compression / encoding unit 16 processes the signals C, D, E, F, and G as audio signals even though the signals C, D, E, F, and G are PB audio signals, and converts these signals into audio packets C, D, and E, F, and G are converted.
[0009]
As described above, the IP packetizer 17 converts the packets BE from the compressor / encoder 16 into one VoIP packet in order to combine the four packets packetized by the compressor / encoder 15 into one VoIP packet. The packet is transmitted to the outside as one VoIP packet, and the packets F to I are transmitted to the outside as one VoIP packet. In this process, the packets H and I are packets output from the compression / encoding unit 16 after the detection of the PB sound signal, but since the four packets are combined, the packets H and I are also Like the previous packets F and G, they are collected as a bundle of audio packets. That is, after the PB sound signal starts to be input to the PB detection unit, seven PB sound signals are processed as the audio packets C to I.
[0010]
In the VoIP gateway 30 connected to the IP telephone 10 via the IP network 1 and the routers 2 and 6, when receiving the VoIP packet from the IP telephone 10, the IP packet decomposing unit 38 converts the VoIP packet into a voice packet. And PB code packets. In FIG. 8, the reception-side disassembly buffer is a buffer provided in the packet disassembly unit 38 of the VoIP gateway 30 and includes four packets transmitted from the IP network-side interface 40. This is a buffer having a capacity to store one VoIP packet. The decompression / decoding unit 39 of the VoIP gateway 30 converts the voice packet into a voice signal, sends this voice signal to the PBX via the A / D converter 32 and the terminal side interface 31, and converts the PB code packet into a PB sound. The PB sound signal is sent to a PB sound generator 33 via an A / D converter 32. When the PB sound generator 33 receives a PB sound signal for a fixed time, for example, 50 ms, it generates a PB sound corresponding to the PB sound signal, and outputs the PB sound via the terminal-side interface 31 to the PBX7. Send to In the case of the PBX 7, if the PB tone is the extension number of the ordinary telephone 5, a telephone line with the ordinary telephone 5 corresponding to the extension number is established.
[0011]
[Problems to be solved by the invention]
However, in the above-described conventional technology, seven (70 ms) PB sound signals, which should have been sent from the IP telephone 10 as PB code packets, are sent as voice packets (C to I). Therefore, there is a problem that the PB sound generation unit 33 of the VoIP gateway 30 cannot receive the audio signal for a predetermined time (50 ms) and does not emit the PB sound.
[0012]
The present invention focuses on such a problem of the related art, and a VoIP packet receiving apparatus, a VoIP packet transmitting apparatus, and a VoIP packet generation method capable of minimizing the non-generation of PB sound due to leakage of a PB sound signal. And a method for processing a VoIP packet.
[0013]
[Means for Solving the Problems]
A VoIP receiving apparatus for achieving the above object,
VoIP packet decomposing means for decomposing the VoIP packet and analyzing whether the PB code packet is included in the VoIP packet;
A buffer for temporarily storing the PB code packet and / or the voice packet obtained by the decomposition by the VoIP packet decomposing unit before being decoded;
When the VoIP packet decomposing means analyzes that the PB code packet is included in the VoIP packet, the packet rewriting means rewrites the voice packets stored in the buffer into PB code packets by a predetermined number. When,
It is characterized by having.
[0014]
Further, a VoIP packet transmitting apparatus for achieving the above object,
PB detection means for detecting a PB sound signal;
Encoding means for encoding an audio signal to convert it into an audio packet, and, when the PB sound signal detecting means detects the PB sound signal, encoding the PB sound signal to convert it into a PB code packet;
A predetermined number of the PB code packets or the voice packets are combined to generate a VoIP packet, and when the detection of the PB sound signal is received from the PB detection means, the PB sound is output even if the predetermined number of the voice packets are not collected. IP packetizing means for outputting the voice packets collected up to the point of receiving the signal detection as the VoIP packet;
It is characterized by having.
[0015]
Here, upon receiving the detection of the PB sound signal from the PB detection means, the IP packetizing means firstly receives the detection of the PB sound signal among the PB code packets from the encoding means. It is preferable that one PB code packet is output as a VoIP packet.
[0016]
Further, another VoIP packet transmitting apparatus for achieving the above-mentioned object,
PB detection means for detecting a PB sound signal;
Encoding means for encoding an audio signal to convert it into an audio packet, and, when the PB sound signal detecting means detects the PB sound signal, encoding the PB sound signal to convert it into a PB code packet;
A buffer for storing the PB sound signal at the preceding stage of the encoding means so that the PB sound signal is input to the encoding means with a certain time delay from the PB detection unit,
It is characterized by having.
[0017]
A method for processing a VoIP packet to achieve the above object is as follows.
A VoIP packet decomposing step of decomposing the VoIP packet and analyzing whether the PB code packet is included in the VoIP packet;
A buffering step of temporarily storing the PB code packet and / or the voice packet obtained by the decomposition by the VoIP packet decomposing means in a buffer before being decoded;
In the VoIP packet disassembly step, when it is analyzed that the PB code packet is included in the VoIP packet, the voice packets stored in the buffer are converted into the PB code packet by a predetermined number. A packet rewriting process for rewriting,
Which is characterized by having
[0018]
A method for generating a VoIP packet for achieving the above object is as follows.
A PB detection step of detecting a PB sound signal;
An encoding step of encoding the audio signal to convert it into an audio packet, and, when the PB audio signal is detected in the PB audio signal detecting step, encoding the PB audio signal and converting the PB audio signal into a PB code packet;
A predetermined number of the PB code packets or the voice packets are combined to generate a VoIP packet, and when the detection of the PB sound signal is received in the PB detection step, the PB code signal is output even if the predetermined number of the voice packets are not collected. An IP packetizing step of outputting the collected voice packets as a VoIP packet by the time when the detection of the sound signal is received;
Which is characterized by having
[0019]
Another method of generating a VoIP packet to achieve the above object is as follows.
A PB detection step of detecting a PB sound signal;
An encoding step of encoding the audio signal to convert it into an audio packet, and, when the PB audio signal is detected in the PB audio signal detecting step, encoding the PB audio signal and converting the PB audio signal into a PB code packet;
Before the PB sound signal is input to the encoding step, the PB sound signal is stored in the buffer for a predetermined time so that the PB sound signal is input to the encoding step after a certain time delay from the PB detection step. A buffering process;
An IP packetizing step of collecting the PB code packet or the voice packet obtained in the encoding step by a predetermined number and generating the VoIP packet;
Which is characterized by having
[0020]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, various embodiments of a communication system according to the present invention will be described with reference to the drawings.
[0021]
As described with reference to FIG. 6 in the “Prior Art” section, the communication system according to the present embodiment includes a router 2, a VoIP gateway 3 that converts voice into voice packets, and the like, on one side of the IP network 1. A PBX 4 connected to the VoIP gateway 3, a plurality of ordinary telephones 5 connected to the PBX 4, and an IP telephone 10a directly connected to the router 2 are provided. On the other side of the IP network 1, a router 6, a VoIP gateway 30a, a PBX 7 connected to the VoIP gateway 30a, and a plurality of ordinary telephones 8 connected to the PBX 7 are provided. .
[0022]
As shown in FIG. 1, the IP telephone 10a includes a handset 11, a PB 12, and a PB sound generator 13 that emits a PB sound signal in accordance with the operation of the PB 12, as in the conventional IP telephone 10 described with reference to FIG. An A / D converter 14 for converting an analog signal from the handset 11 and the PB sound generator 13 into a digital signal; a PB detector 15a for detecting the PB sound signal; A PB sound signal is detected by the PB detection unit 15a, and the PB sound signal is also compressed and coded to generate a PB code packet, and a compression / coding unit 16 An IP packetizing unit 17a that combines the four packets from 16 into one to generate a VoIP packet and an I packetizer that decomposes a VoIP packet received from the outside. A packet disassembling unit 18, and a decompression-decoding unit 19 for decompressing and decoding the PB code packet and the audio packet obtained by decomposition, an interface 20 for communicating with the outside. However, unlike the PB detection unit 15 of the related art, the PB detection unit 15a of the present embodiment notifies the detection of the PB sound signal to the IP packetization unit 17a together with the compression / encoding unit 16. When receiving the detection of the PB sound signal, the IP packetizing unit 17a does not collect four voice packets from the compression / coding unit 16, that is, even if only three or less voice packets are collected. The voice packet stored when the detection of the PB sound signal is received is output as a VoIP packet.
[0023]
As shown in FIG. 2, in the IP telephone 10a of the present embodiment, the encoding interval in the compression / encoding unit 16 is 10 ms. Further, as described above, the VoIP packet is a group of four voice packets and / or PB code packets, and the transmission interval of the VoIP packet is 40 ms. Also, the time from the first input of the PB sound signal to the PB detection unit 15a until detection is 50 ms.
[0024]
The VoIP gateway 30b connected to the IP telephone 10a via the IP network 1 and the routers 2 and 6 is similar to the conventional VoIP gateway 30 described with reference to FIG. An A / D converter 32 for converting an analog signal from the terminal-side interface 31 into a digital signal; a PB detection unit 35 for detecting a PB sound signal; A voice packet is generated, and when a PB sound signal is detected by the PB detection unit 35, the PB sound signal is also compressed and coded to generate a PB code packet. And an IP packetizing unit 37 that combines the four packets into one to generate a VoIP packet. An IP packet decomposing unit 38 for decomposing, an expansion / decoding unit 39 for decompressing and decoding PB code packets and voice packets obtained by the decomposition, and an IP network side interface 40 for communicating with the outside. . The VoIP gateway 30a of the present embodiment further includes a fluctuation absorbing buffer 41 that stores five PB code packets and voice packets obtained by the IP packet decomposing unit 38 decomposing the VoIP packet, that is, 50 ms, and this fluctuation. A packet rewriting unit that rewrites voice packets stored in the absorption buffer into PB code packets. Here, the capacity of the fluctuation absorbing buffer 41 is made to correspond to the detection time (50 ms) of the PB sound signal. However, as will be described later, the sound related to the six PB sound signals that leaks earlier due to the detection time of the PB sound signal. The capacity for storing packets, that is, the capacity for 60 ms may be used.
[0025]
Next, the operations of the IP telephone 10a as the VoIP packet transmitting device and the VoIP gateway 30a as the VoIP packet receiving device described above will be described with reference to FIG.
[0026]
Suppose that the PB 12 is pressed and the PB sound signal is input to the PB detection unit 15a when the compression / coding unit 16 sends out the packet B to the IP packetization unit 17a during the call of the IP telephone 10a. I do. As described above, the PB detection unit 15a takes 50 ms from the start of the input of the PB sound signal to the detection thereof. Therefore, after the input of the PB sound signal, the PB sound signal Even if the PB sound signals C, D, E, F, G, F, H,... Are sequentially input, the PB detection unit 15a keeps the signals C, D, E, F, G until immediately before the signal H is input. Cannot be detected as a PB sound signal. Therefore, the compression / encoding unit 16 processes the signals C, D, E, F, and G as audio signals even though the signals C, D, E, F, and G are PB audio signals, and converts these signals into audio packets C, D, and E, F, and G are converted.
[0027]
When the compression / encoding unit 16 receives the PB sound detection from the PB detection unit 15a, it converts the PB sound signals I, J,... After that point into PB code packets, and sends them to the IP packetizing unit 17a. .
[0028]
As described above, the IP packetizing unit 17a basically transmits the voice from the compression / encoding unit 16 in order to combine the four packets packetized by the compression / encoding unit 16 into one VoIP packet. The packets B to E are transmitted to the outside as one VoIP packet. However, when receiving the detection of the PB sound signal from the PB detection unit 15a, the IP packetizing unit 17a receives the detection of the PB sound signal even if four voice packets from the compression / coding unit 16 are not collected. And outputs the voice packet stored as a VoIP packet. Therefore, here, after transmitting the voice packets B to E to the outside as one VoIP packet, the three voice packets F, G, and H stored until the PB sound detection is transmitted to the outside as one VoIP packet. . When four PB code packets I, J,... Sequentially transmitted after the voice packet H from the compression / encoding unit 16 accumulate, the four PB code packets I to L are sent to the outside as one VoIP packet. Send. As a result, in the IP telephone 10a of this embodiment, six PB sound signals are processed as voice packets after the PB sound signal starts to be input to the PB detection unit 15a. The PB code packet (PB code packet I) is sent to the receiving side earlier by one PB code packet.
[0029]
In the VoIP gateway 30a connected to the IP telephone 10a via the IP network 1 and the routers 2 and 6, when receiving the VoIP packet from the IP telephone 10a, the IP packet decomposing unit 38 converts the VoIP packet into a voice packet. And PB code packets, and sequentially send them to the fluctuation absorbing buffer 41. When recognizing that the PB code packet is included in the VoIP packet in this decomposing process, the IP packet decomposing unit 38 notifies the packet rewriting unit 42 of the fact. Upon receiving this notification, the packet rewriting unit 42 rewrites the five voice packets C to G stored in the fluctuation absorbing buffer into PB code packets I to I at this time, and further rewrites the rewritten one after 10 ms. One PB code packet I is sent from the fluctuation absorbing buffer 41 to the decompression / decoding unit 39, and one voice packet H sent from the IP packet decomposing unit 38 to the fluctuation absorbing buffer 41 is rewritten into a PB code packet I. That is, the IP telephone 10a rewrites the voice packets C to H relating to the six leaked PB sound signals into PB code packets.
[0030]
The decompression / decoding unit 39 converts the audio packet from the fluctuation absorbing buffer 41 into an audio signal, and sends this audio signal to the PBX 7 via the A / D converter 32 and the terminal interface 31. The expansion / decoding unit 39 converts the PB code packet from the fluctuation absorbing buffer 41 into a PB sound signal, and sends this PB sound signal to the PB sound generator 33 via the A / D converter 32. When receiving the PB sound signal for 50 ms or more, the PB sound generator 33 generates a PB sound corresponding to the PB sound signal, and transmits the PB sound to the PBX 7 via the terminal-side interface 31. In the case of the PBX 7, if the PB tone is the extension number of the ordinary telephone 5, a telephone line with the ordinary telephone 5 corresponding to the extension number is established.
[0031]
As described above, in the present embodiment, the voice packets related to the six PB sound signals that have leaked earlier in the IP telephone 10a are rewritten into PB code packets on the receiving side, and the rewritten PB code packets and the retransmitted PB code packets are transmitted from the IP telephone 10a. Since the PB sound is generated based on the generated PB code packet, the non-generation of the PB sound due to the leakage of the PB sound signal can be prevented.
Next, a communication system according to a second embodiment of the present invention will be described with reference to FIGS.
[0032]
The communication system of the present embodiment is basically the same as the communication system of the first embodiment, except that the operation of the IP packetizing unit 17b of the IP telephone 10b and the downstream of the packet disassembling unit 38 of the VoIP gateway 30b. The difference from the first embodiment is that the fluctuation absorbing buffer 39 is not provided.
[0033]
When receiving the detection of the PB sound signal from the PB detection unit 15b, the IP packetizing unit 17b of the IP telephone 10b of the present embodiment converts the voice packet from the compression / encoding unit 16 into 4 as in the first embodiment. Even if it does not gather, the voice packet stored at the time when the detection of the PB sound signal is received is output as a VoIP packet. Further, the IP packetizing section 17b in this embodiment outputs only the first one PB code packet sent from the compression / encoding section 16 as a VoIP packet after receiving the detection of the PB sound signal.
[0034]
Accordingly, as shown in FIG. 4, the IP packetizing unit 17b transmits the voice packets BE from the compression / coding unit 16 to the outside as one VoIP packet, and detects the PB sound signal from the PB detecting unit 15b. Then, even if four voice packets from the compression / encoding unit 16 are not collected, the voice packets F, G, and H stored at the time of receiving the detection of the PB sound signal are sent to the outside as one VoIP packet. Send. Further, only the first one PB code packet I sent from the compression / encoding unit 16 after the detection of the PB sound signal is transmitted to the outside as a VoIP packet. For this reason, in this embodiment, since it does not wait until four PB sound code packets gather like the prior art, the PB code packet is sent to the outside earlier by four PB code packets than the prior art. Become.
[0035]
In the VoIP gateway 30b connected to the IP telephone 10b via the IP network 1 and the routers 2 and 6, when receiving the VoIP packet from the IP telephone 10b, the IP packet decomposing unit 38 converts the VoIP packet into a voice packet. Or PB code packets, and sequentially sends them to the decompression / decoding unit 39. When recognizing that the PB code packet is included in the VoIP packet in this decomposing process, the IP packet decomposing unit 39 notifies the packet rewriting unit 42b of the fact. Upon receiving this notification, the packet rewriting unit 42 rewrites the voice packet stored in the buffer provided in the IP packet decomposing unit 38 into a PB code packet at this time. Here, since the IP packet disassembly unit 38 needs to accept a VoIP packet including four PB code packets or four voice packets, the buffer of the IP disassembly packet unit 38 at least stores the PB code packet or the voice packet. Four or more can be stored. Therefore, when the IP packet decomposing unit 38 receives the VoIP packet including the PB code packet I, at least three voice packets F, G, and H are stored in the buffer of the IP packet decomposing unit 38. Will be. Therefore, when the IP packet decomposing unit 38 identifies the PB code packet from the IP header, and the packet rewriting unit 42 receives a notification that the PB code packet is included from the IP packet decomposing unit 38, The three voice packets F, G, and H stored in the buffer of the unit 38 are rewritten to PB code packets I, I, and I. That is, the IP telephone rewrites the voice packets F, G, and H among the voice packets C to H relating to the six leaked PB sound signals to PB code packets.
[0036]
The decompression / decoding section 39 converts the voice packet from the IP packet decomposing section 38 into a voice signal as in the first embodiment, and converts the voice signal via the A / D converter 32 and the terminal-side interface 31. To the PBX 7, converts the PB code packet from the IP packet decomposing unit 38 into a PB sound signal, and sends this PB sound signal to the PB sound generator 33 via the A / D converter 32. When receiving the PB sound signal for 50 ms or more, the PB sound generator 33 generates a PB sound corresponding to the PB sound signal, and transmits the PB sound to the PBX 7 via the terminal-side interface 31.
[0037]
As described above, in the present embodiment, of the six voice packets related to the PB sound signal leaked earlier by the IP telephone 10a, three voice packets are rewritten into PB code packets, and the rewritten PB code packet and the IP telephone 10a are rewritten. Since the PB sound is generated based on the PB code packet transmitted from the PB code packet, it is possible to minimize the non-generation of the PB sound due to the leakage of the PB sound signal. Further, in the present embodiment, since no fluctuation absorbing buffer is provided between the IP packet decomposing unit 38 and the decompression / decoding unit 39, the memory can be effectively used, and the existence of the fluctuation absorbing buffer can be improved. Can be avoided.
[0038]
Next, a third embodiment of the communication system according to the present invention will be described with reference to FIG.
[0039]
The IP telephone 10c of the present embodiment has a pre-stage buffer 21 provided before the compression / encoding unit 16, and the other configuration of the IP telephone 10c is the same as that of the second embodiment.
[0040]
The capacity of the front-stage buffer 21 is a capacity that can store the six PB sound signals C to H that leak earlier in the second embodiment. The PB sound signal from the PB sound generator 13 is input to the compression / encoding unit 16 via the pre-stage buffer 21 and is input to the PB detection unit 15b without passing through the pre-stage buffer 21. Therefore, the PB signal is input to the compression / encoding unit 16 later than the PB detection unit 15 b by the capacity of the preceding buffer 21. For this reason, as shown in FIG. 2, when the PB sound signals C, D, E,... Are input to the PB detection unit 15b, the compression / coding unit 16 outputs the PB sound signals C, D, E,. Are not input, and when the PB detection unit 15b detects the PB sound signal H, the PB sound signals C, D, E,... For this reason, the signals input as the PB sound signals C, D, E,... To the compression / encoding unit 16 are detected as PB sound signals when they are input. Unlike PB code packets, all are converted to PB code packets C, D, E,.
[0041]
As described above, in the present embodiment, since the PB sound signal does not leak earlier in the IP telephone 10c, it is possible to prevent non-generation of the PB sound due to the leakage of the PB sound signal.
[0042]
In each of the above embodiments, an IP telephone has been described as an example of the VoIP packet transmitting apparatus. However, the present invention is not limited to this, and PB sound signals and voice signals are packetized, and these are collectively collected. The present invention may be applied to any device as long as it is transmitted to the outside as a VoIP packet. For example, the present invention is applied to a VoIP gateway shown in FIG. 6 or a PBX having the function of the VoIP gateway. You may. Further, in each of the above embodiments, the VoIP gateway has been described as an example of the VoIP packet transmission / reception. However, the VoIP packet in which the PB code packet and the voice packet are combined is received and decoded. If so, the present invention may be applied to any device. For example, the present invention may be applied to a PBX having a VoIP gateway function.
[0043]
【The invention's effect】
According to the VoIP packet receiving apparatus according to the present invention, the voice packet related to the PB sound signal leaked by the VoIP transmitting apparatus is rewritten into the PB code packet, and the rewritten PB code packet and the PB code transmitted from the VoIP packet receiving apparatus are rewritten. Since the PB sound is generated based on the packet, non-generation of the PB sound due to leakage of the PB sound signal can be minimized.
[0044]
Further, according to the VoIP packet transmitting apparatus according to the present invention, a buffer for storing the PB sound signal for a certain time is provided before the encoding means, and it takes a certain time from the input of the PB sound signal to the detection thereof. Since the PB sound signal is input to the encoding means at a certain time later than the PB detection means, the PB sound signal is input to the encoding means after the PB signal is detected by the PB detection means. Thus, it is possible to prevent the PB sound signal from being leaked, in which the encoding means processes the PB sound signal as a voice packet, and as a result, it is possible to prevent the PB sound from not being generated.
[Brief description of the drawings]
FIG. 1 is a functional block diagram of an IP telephone and a VoIP gateway in a communication system according to a first embodiment of the present invention.
FIG. 2 is an explanatory diagram showing processing contents of a packet on a packet sending side and a packet on a receiving side in the first embodiment according to the present invention.
FIG. 3 is a functional block diagram of an IP telephone and a VoIP gateway in a communication system according to a second embodiment of the present invention.
FIG. 4 is an explanatory diagram showing processing contents of a packet on a packet sending side and a packet on a receiving side in a second embodiment according to the present invention.
FIG. 5 is a functional block diagram of an IP telephone and a VoIP gateway in a communication system according to a third embodiment of the present invention.
FIG. 6 is a system diagram of a communication system.
FIG. 7 is a functional block diagram of an IP telephone and a VoIP gateway in a conventional communication system.
FIG. 8 is an explanatory diagram showing processing contents of a packet on a conventional packet sending side and a packet on a receiving side.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... IP network, 10, 10a, 10b, 10c ... IP telephone, 11 ... Handset, 12 ... PB, 13, 33 ... PB sound generator, 15, 15a, 15b, 35 ... PB detector, 16, 36 ... Compression Encoding units, 17, 17a, 17b, 37: IP packetizing units, 18, 38: IP packet decomposing units, 19, 39: Decompression / decoding units, 41: Fluctuation absorption buffers, 42, 42b: Packet rewriting units , 30, 30a, 30b ... VoIP gateway.

Claims (8)

PB(Push button)音信号を符号化したPBコードパケット、及び/又は音声信号を符号化した音声パケットを含むVoIP(Voice over Internet Protocol)パケットを受信し、該VoIPパケットを分解して、分解した該VoIPパケットを復号化するVoIPパケット受信装置において、
前記VoIPパケットを分解して、該VoIPパケット中に前記PBコードパケットが含まれているか否かを解析するVoIPパケット分解手段と、
前記VoIPパケット分解手段による分解で得られた前記PBコードパケット及び/又は前記音声パケットを、前記復号化される前に、一時的に溜めておくバッファと、
前記VoIPパケット分解手段が前記VoIPパケット中に前記PBコードパケットが含まれていると解析すると、前記バッファに溜められた前記音声パケットを、予め定められた数量分だけPBコードパケットに書き換えるパケット書換手段と、
を備えていることを特徴とするVoIPパケット受信装置。
A VoIP (Voice over Internet Protocol) packet including a PB (Push button) audio signal and a PB code packet obtained by encoding a sound signal and / or an audio signal obtained by encoding an audio signal is received. In a VoIP packet receiving device for decoding the VoIP packet,
VoIP packet decomposing means for decomposing the VoIP packet and analyzing whether or not the PB code packet is included in the VoIP packet;
A buffer for temporarily storing the PB code packet and / or the voice packet obtained by the decomposition by the VoIP packet decomposing means before the decoding;
When the VoIP packet decomposing means analyzes that the PB code packet is included in the VoIP packet, the packet rewriting means rewrites the voice packets stored in the buffer into PB code packets by a predetermined number. When,
A VoIP packet receiving device comprising:
PB(Push button)音信号を符号化したPBコードパケット、又は音声信号を符号化した音声パケットを所定数量まとめてVoIP(Voice over Internet Protocol)パケットを生成し、生成した該VoIPパケットを外部へ送信するVoIPパケット送信装置において、
前記PB音信号を検出するPB検出手段と、
前記音声信号を符号化して前記音声パケットに変換すると共に、前記PB音信号検出手段が前記PB音信号を検出すると、該PB音信号を符号化して前記PBコードパケットに変換する符号化手段と、
前記PBコードパケット又は前記音声パケットを前記所定数量まとめてVoIPパケットを生成すると共に、前記PB検出手段から前記PB音信号の検出を受け付けると、該音声パケットが前記所定数量まとまらなくても、該PB音信号の検出を受け付けた時点までにまとまった該音声パケットを前記VoIPパケットとして出力するIPパケット化手段と、
を備えていることを特徴とするVoIPパケット送信装置。
A VoIP (Voice over Internet Protocol) packet is generated by combining a predetermined number of PB code packets obtained by coding a push button (PB) sound signal or voice packets obtained by coding a voice signal, and the generated VoIP packet is transmitted to the outside. In the VoIP packet transmitting device that performs
PB detection means for detecting the PB sound signal;
Encoding means for encoding the audio signal and converting it to the audio packet, and when the PB sound signal detection means detects the PB sound signal, encoding means for encoding the PB sound signal and converting it to the PB code packet;
The PB code packet or the voice packet is combined with the predetermined number to generate a VoIP packet, and when the detection of the PB sound signal is received from the PB detection unit, the PB code packet is output even if the voice packet does not reach the predetermined number. IP packetizing means for outputting, as the VoIP packet, the voice packets collected up to the time when the detection of the sound signal is received;
A VoIP packet transmitting device comprising:
請求項2に記載のVoIPパケット送信装置において、
前記IPパケット化手段は、前記PB検出手段から前記PB音信号の検出を受け付けると、前記符号化手段からの前記PBコードパケットのうち、該PB音信号の検出を受け付けた時点から最初の一つのPBコードパケットをVoIPパケットとして出力する、
ことを特徴とするVoIPパケット送信装置。
The VoIP packet transmitting device according to claim 2,
Upon receiving the detection of the PB sound signal from the PB detection means, the IP packetizing means may receive the first one of the PB code packets from the encoding means from the time of receiving the detection of the PB sound signal. Outputting the PB code packet as a VoIP packet,
A VoIP packet transmitting device characterized by the above-mentioned.
PB(Push button)音信号を符号化したPBコードパケット、又は音声信号を符号化した音声パケットを含むVoIP(Voice over IP)パケットを生成し、生成した該VoIPパケットを外部へ送信するVoIPパケット送信装置において、
前記PB音信号を検出するPB検出手段と、
前記音声信号を符号化して前記音声パケットに変換すると共に、前記PB音信号検出手段が前記PB音信号を検出すると、該PB音信号を符号化して前記PBコードパケットに変換する符号化手段と、
前記PB音信号が前記PB検出手段よりも一定時間遅れて前記符号化手段に入力するよう、該符号化手段の前段で該PB音信号を該一定時間溜めておくバッファと、
を備えていることを特徴とするVoIPパケット送信装置。
A VoIP packet transmission for generating a PB (Push button) sound signal encoded PB code packet or a VoIP (Voice over IP) packet including an audio signal encoded audio signal, and transmitting the generated VoIP packet to the outside. In the device,
PB detection means for detecting the PB sound signal;
Encoding means for encoding the audio signal and converting it to the audio packet, and when the PB sound signal detection means detects the PB sound signal, encoding means for encoding the PB sound signal and converting it to the PB code packet;
A buffer for storing the PB sound signal in the preceding stage of the encoding means so as to input the PB sound signal to the encoding means with a certain time delay from the PB detection means,
A VoIP packet transmitting device comprising:
PB(Push button)音信号を符号化したPBコードパケット、及び/又は音声信号を符号化した音声パケットを含むVoIP(Voice over Internet Protocol)パケットを受信し、該VoIPパケットを分解して、分解した該VoIPパケットを復号化するVoIPパケットの処理方法において、
前記VoIPパケットを分解して、該VoIPパケット中に前記PBコードパケットが含まれているか否かを解析するVoIPパケット分解工程と、
前記VoIPパケット分解手段による分解で得られた前記PBコードパケット及び/又は前記音声パケットを、前記復号化される前に、一時的にバッファに溜めておくバッファリング工程と、
前記VoIPパケット分解工程で前記VoIPパケット中に前記PBコードパケットが含まれていると解析されると、前記バッファに溜められた前記音声パケットを、予め定められた数量分だけ前記PBコードパケットに書き換えるパケット書換工程と、
を有することを特徴とするVoIPパケットの処理方法。
A VoIP (Voice over Internet Protocol) packet including a PB (Push button) audio signal and a PB code packet obtained by encoding a sound signal and / or an audio signal obtained by encoding an audio signal is received. In a VoIP packet processing method for decoding the VoIP packet,
A VoIP packet decomposing step of decomposing the VoIP packet and analyzing whether or not the PB code packet is included in the VoIP packet;
A buffering step of temporarily storing the PB code packet and / or the voice packet obtained by the decomposition by the VoIP packet decomposing means in a buffer before the decoding;
If it is determined in the VoIP packet disassembly step that the PB code packet is included in the VoIP packet, the voice packets stored in the buffer are rewritten to the PB code packet by a predetermined number. Packet rewriting process,
A method of processing a VoIP packet, comprising:
PB(Push button)音信号を符号化したPBコードパケット、又は音声信号を符号化した音声パケットを所定数量まとめ、該所定数量のPBコードパケット又は該所定数量の音声パケットを含むVoIP(Voice over Internet Protocol)パケットを生成するVoIPパケットの生成方法において、
前記PB音信号を検出するPB検出工程と、
前記音声信号を符号化して前記音声パケットに変換すると共に、前記PB音信号検出工程で前記PB音信号を検出すると、該PB音信号を符号化して前記PBコードパケットに変換する符号化工程と、
前記PBコードパケット又は前記音声パケットを前記所定数量まとめてVoIPパケットを生成すると共に、前記PB検出工程での前記PB音信号の検出を受け付けると、該音声パケットが前記所定数量まとまらなくても、該PB音信号の検出を受け付けた時点までにまとまった該音声パケットをVoIPパケットとして出力するIPパケット化工程と、
を有することを特徴とするVoIPパケットの生成方法。
A predetermined number of PB code packets obtained by encoding a PB (Push Button) sound signal or audio packets obtained by encoding an audio signal are collected, and the predetermined number of PB code packets or the voice over Internet including the predetermined number of audio packets are included. Protocol) for generating a VoIP packet for generating a packet.
A PB detection step of detecting the PB sound signal;
Encoding the audio signal and converting it to the audio packet, and, when the PB audio signal is detected in the PB audio signal detection step, encoding the PB audio signal and converting it to the PB code packet;
The PB code packet or the voice packet is collected by the predetermined number to generate a VoIP packet, and when the detection of the PB sound signal in the PB detection step is received, even if the voice packet does not reach the predetermined number, the An IP packetizing step of outputting the collected voice packets as a VoIP packet by the time the detection of the PB sound signal is received;
A method for generating a VoIP packet, comprising:
請求項6に記載のVoIPパケットの生成方法において、
前記IPパケット化工程では、前記PB検出工程での前記PB音信号の検出を受け付けると、前記符号化工程で得られた前記PBコードパケットのうち、該PB音信号の検出を受け付けた時点から最初の一つのPBコードパケットをVoIPパケットとして出力する、
ことを特徴とするVoIPパケットの生成方法。
The method for generating a VoIP packet according to claim 6,
In the IP packetizing step, when the detection of the PB sound signal in the PB detecting step is received, the PB code signal obtained in the encoding step is first received from the point in time at which the detection of the PB sound signal is received. Output one PB code packet as a VoIP packet,
A method for generating a VoIP packet.
PB(Push button)音信号を符号化したPBコードパケット、又は音声信号を符号化した音声パケットを所定数量まとめ、該所定数量のPBコードパケット又は該所定数量の音声パケットを含むVoIP(Voice over Internet Protocol)パケットを生成するVoIPパケットの生成方法において、
前記PB音信号を検出するPB検出工程と、
前記音声信号を符号化して前記音声パケットに変換すると共に、前記PB音信号検出工程で前記PB音信号を検出すると、該PB音信号を符号化して前記PBコードパケットに変換する符号化工程と、
前記PB音信号が前記PB検出工程よりも一定時間遅れて前記符号化工程に入力するよう、該PB音信号が該符号化工程に入力する前に、該PB音信号を該一定時間バッファに蓄えるバッファリング工程と、
前記符号化工程で得られた前記PBコードパケット又は前記音声パケットを前記所定数量まとめて、前記VoIPパケットを生成するIPパケット化工程と、
を有することを特徴とするVoIPパケットの生成方法。
A predetermined number of PB code packets obtained by encoding a PB (Push Button) sound signal or audio packets obtained by encoding an audio signal are collected, and the predetermined number of PB code packets or the voice over Internet including the predetermined number of audio packets are included. Protocol) for generating a VoIP packet for generating a packet.
A PB detection step of detecting the PB sound signal;
Encoding the audio signal and converting it to the audio packet, and, when the PB audio signal is detected in the PB audio signal detection step, encoding the PB audio signal and converting it to the PB code packet;
Before the PB sound signal is input to the encoding step, the PB sound signal is stored in the buffer for a predetermined time so that the PB sound signal is input to the encoding step after a certain time delay from the PB detection step. A buffering process;
An IP packetizing step of collecting the PB code packet or the voice packet obtained in the encoding step by the predetermined number and generating the VoIP packet;
A method for generating a VoIP packet, comprising:
JP2002219782A 2002-07-29 2002-07-29 VoIP packet transmitting device, VoIP packet receiving device, VoIP packet generation method, and VoIP packet processing method Expired - Fee Related JP3797664B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002219782A JP3797664B2 (en) 2002-07-29 2002-07-29 VoIP packet transmitting device, VoIP packet receiving device, VoIP packet generation method, and VoIP packet processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002219782A JP3797664B2 (en) 2002-07-29 2002-07-29 VoIP packet transmitting device, VoIP packet receiving device, VoIP packet generation method, and VoIP packet processing method

Publications (2)

Publication Number Publication Date
JP2004064408A true JP2004064408A (en) 2004-02-26
JP3797664B2 JP3797664B2 (en) 2006-07-19

Family

ID=31940599

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002219782A Expired - Fee Related JP3797664B2 (en) 2002-07-29 2002-07-29 VoIP packet transmitting device, VoIP packet receiving device, VoIP packet generation method, and VoIP packet processing method

Country Status (1)

Country Link
JP (1) JP3797664B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8311033B2 (en) 2004-04-16 2012-11-13 Nec Infrontia Corporation DTMF tone signal transmission method and DTMF tone signal transmission system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8311033B2 (en) 2004-04-16 2012-11-13 Nec Infrontia Corporation DTMF tone signal transmission method and DTMF tone signal transmission system

Also Published As

Publication number Publication date
JP3797664B2 (en) 2006-07-19

Similar Documents

Publication Publication Date Title
JP3881157B2 (en) Voice processing method and voice processing apparatus
KR20080024094A (en) Internet protocol packet re-transporting method for digital multimedia broadcasting service
CA2483406A1 (en) Code conversion transmission and code conversion reception of audio data
EP1959432A1 (en) Transmission of a digital message interspersed throughout a compressed information signal
US6320958B1 (en) Remote conference system using multicast transmission for performing echo cancellation
JP2002112370A (en) Voip gateway and digital 1 link relay switching method
JP4862262B2 (en) DTMF signal processing method, processing device, relay device, and communication terminal device
JP3797664B2 (en) VoIP packet transmitting device, VoIP packet receiving device, VoIP packet generation method, and VoIP packet processing method
WO2004077766A1 (en) Packet transmission device
KR20150079367A (en) Image data communication method and image data communication device
US20050195803A1 (en) PCM-based data transmission system and voice/data communication switching method
JPH1056480A (en) Multimedia multiplex communication system
CN107404506A (en) A kind of compression of data transfer, decompression method and system
US7894486B2 (en) Method for depacketization of multimedia packet data
JP3311642B2 (en) Voice packet multiplexer with voice relay function
JP3133296B2 (en) Communication device and DTMF transfer method
CN103188403A (en) Voice gateway online monitoring method
JP4400571B2 (en) Coding data processing method and gateway device in connection between different types of communication networks
JP2003023462A (en) Retransmission method for multipoint broadcast communication network
JP4454255B2 (en) Voice / fax communication system, voice / fax receiver, and fluctuation absorbing buffer amount control method
WO2001033809A1 (en) Communication apparatus and communication method
JPH07283757A (en) Sound data communication equipment
JP4667811B2 (en) Voice communication apparatus and voice communication method
JP3954851B2 (en) Receiving apparatus and receiving method
JP2005073057A (en) Digital speech apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040811

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20040811

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060404

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: R3D04

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100428

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100428

Year of fee payment: 4

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100428

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100428

Year of fee payment: 4

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110428

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120428

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120428

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130428

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140428

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees