JP4422941B2 - Sound field adjustment device - Google Patents

Sound field adjustment device Download PDF

Info

Publication number
JP4422941B2
JP4422941B2 JP2002010769A JP2002010769A JP4422941B2 JP 4422941 B2 JP4422941 B2 JP 4422941B2 JP 2002010769 A JP2002010769 A JP 2002010769A JP 2002010769 A JP2002010769 A JP 2002010769A JP 4422941 B2 JP4422941 B2 JP 4422941B2
Authority
JP
Japan
Prior art keywords
music signal
pitch
time axis
sound field
adjusting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2002010769A
Other languages
Japanese (ja)
Other versions
JP2003216154A (en
Inventor
智行 浦野
航平 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kenwood KK
Sharp Corp
Original Assignee
Kenwood KK
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kenwood KK, Sharp Corp filed Critical Kenwood KK
Priority to JP2002010769A priority Critical patent/JP4422941B2/en
Publication of JP2003216154A publication Critical patent/JP2003216154A/en
Application granted granted Critical
Publication of JP4422941B2 publication Critical patent/JP4422941B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Electrophonic Musical Instruments (AREA)
  • Telephone Function (AREA)
  • Stereophonic System (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は音場調整装置に係り、とくに、1系統の音楽信号から広がり感や奥行き感の有る2系統または3系統の音楽信号を作成する音場調整装置に関する。
【0002】
【従来の技術】
携帯電話では、着信時に着信メロディ音を流してユーザに着信を告知する機能が有り、ユーザがキー操作で好みの着信メロディ音楽信号データを作成してメモリに登録しておくこともできる。図7に従来の携帯電話の着信メロディ音再生系の構成図を示す。着信検出回路2で通話着信が検出されると、コントローラ3は、メモリ1から着信メロディ音楽信号データを読み出し、D/A変換器5へ出力してアナログ着信メロディ音楽信号に変換させる。アナログ着信メロディ音楽信号は電力増幅器6で増幅されたあと、スピーカ7で音響再生される。
【0003】
【発明が解決しようとする課題】
しかしながら上記した従来の携帯電話の着信メロディ音再生系では、スピーカ7が1つしかないので、モノラルの着信メロディ音楽信号しか流すことができず、広がり感や奥行き感を表現することはできなかった。しかも、スピーカ7を複数搭載しても、ユーザがキー操作で作成できるのはモノラルの着信メロディ音楽信号データなので、広がり感や奥行き感を表現することは難しかった。
本発明は上記した従来技術の問題に鑑み、1系統の音楽信号から広がり感や奥行き感の有る複数系統の音楽信号を作成可能とした音場調整装置を提供することを、その目的とする。
【0004】
【課題を解決するための手段】
本発明の請求項1では、1系統の音楽信号を系統分割して第1、第2、第3系統音楽信号を作成する系統分割手段と、3系統の音楽信号の内、第2系統音楽信号はピッチを高く(低く)し、第3系統音楽信号はピッチを低く(高く)するピッチ変換手段と、第1系統音楽信号が、第2系統音楽信号及び第3系統音楽信号より時間軸上で相対的に先行するように時間軸調整する時間軸調整手段と、ピッチ変換手段でピッチを変換し、時間軸調整手段で時間軸を調整後の第2系統音楽信号と第1系統音楽信号を加算する第1加算手段と、ピッチ変換手段でピッチを変換し、時間軸調整手段で時間軸を調整後の第3系統音楽信号と第1系統音楽信号を加算する第2加算手段と、を備えたことを特徴としている。
請求項2では、時間軸調整手段は、第2系統音楽信号が第3系統音楽信号より時間軸上で相対的に先行するように時間軸調整するようにしたこと、を特徴としている
求項では、ピッチ変換手段は、半音の20分の1乃至10分の1の範囲で、第2系統音楽信号のピッチを高く(低く)し、第3系統の音楽信号のピッチを低く(高く)するようにしたこと、を特徴としている。
請求項では、第1系統音楽信号、第2系統音楽信号、第3系統音楽信号の間の音量バランスを調整する音量バランス調整手段を設けたこと、を特徴としている。
請求項では、第1系統音楽信号、第2系統音楽信号、第3系統音楽信号の内、少なくとも第2系統音楽信号、第3系統音楽信号に各々残響成分を付加する残響成分付加手段を設けたこと、を特徴としている。
請求項では、系統分割手段の前段で前記1系統の音楽信号に残響成分を付加する残響成分付加手段を設けたこと、を特徴としている。
【0005】
【発明の実施の形態】
次に、本発明の一つの実施の形態を図1を参照して説明する。図1は本発明に係る携帯電話の着信メロディ音再生系の構成を示す構成図である。
1は1系統のモノラルのディジタル着信メロディ音楽信号を記憶したメモリであり、当該ディジタル着信メロディ音楽信号はユーザが携帯電話でキー操作により作成したものであっても、外部から通信により取得したものであっても良い。2は通話着信を検出する着信検出回路、3はマイコン構成のコントローラであり、着信検出回路2で通話着信が検出されると、メモリ1からディジタル着信メロディ音楽信号を読み出し、後述する音場調整回路へ出力し、ディジタル領域で音場調整処理を実行させて3系統の第1乃至第3ディジタル音楽信号を出力させる。4はDSP(ディジタルシグナルプロセッサ)で構成された音場調整回路であり、この内、4aは1系統の音楽信号を3系統の第1、第2、第3ディジタル音楽信号に系統分割する系統分割手段、4bは時間軸調整手段であり、第1、第2、第3ディジタル音楽信号間の時間軸調整をし、第2、第3ディジタル音楽信号より第1ディジタル音楽信号の方が時間軸上で相対的に先行するようにする(合わせて、第2ディジタル音楽信号が第3ディジタル音楽信号より時間軸上で相対的に先行するようにしても良い)。4cは3系統の第1、第2、第3ディジタル音楽信号の音量バランスを調整する音量バランス調整手段、4dは3系統の第1、第2、第3ディジタル音楽信号の内、第2ディジタル音楽信号と第3ディジタル音楽信号に対し、ピッチの変換を行うピッチ変換手段である。
【0006】
系統分割手段4aは、入力ディジタル着信メロディ音楽信号を3つに分岐させて第1、第2、第3ディジタル音楽信号として出力する。時間軸調整手段4bは、遅延部11で第2ディジタル音楽信号を遅延時間τ1 だけ遅延させて出力し、遅延部12で第3ディジタル音楽信号を遅延時間τ2だけ遅延させて出力する。音量バランス調整手段4cは、第2ディジタル音楽信号のレベルを可変する乗算部21、第3ディジタル音楽信号のレベルを可変する乗算部22を有し、乗算部21と22により第2ディジタル音楽信号と第3ディジタル音楽信号に各々1以下の乗算係数a、bを乗じて音量バランス調整を行う。ピッチ変換手段4dは第1ディジタル音楽信号のピッチは変えず、第2ディジタル音楽信号のピッチをピッチ変換部31で変換量P1だけ変え、第3ディジタル音楽信号のピッチをピッチ変換部32で変換量P2だけ変える。P1、P2は、一方がピッチを高くする場合、他方はピッチを低くする値が設定される。P1、P2は好ましくは半音の20分の1乃至10分の1の範囲で設定すると良い。OUT1は第1ディジタル音楽信号出力端子、OUT2は第2ディジタル音楽信号出力端子、OUT3は第3ディジタル音楽信号出力端子である。
【0007】
40は3系統の音楽信号を2系統の音楽信号に変換する系統変換回路であり、この内、41は第1ディジタル音楽信号と第2ディジタル音楽信号を加算してLチャンネルディジタル音楽信号を作成する加算器、42は第1ディジタル音楽信号と第3ディジタル音楽信号を加算してRチャンネルディジタル音楽信号を作成する加算器である。50はディジタル音楽信号をアナログ音楽信号に変換するD/A変換回路であり、この内、51はLチャンネルディジタル音楽信号をD/A変換してLチャンネルアナログ音楽信号を作成するD/A変換器、52はRチャンネルディジタル音楽信号をD/A変換してRチャンネルアナログ音楽信号を作成するD/A変換器である。61はLチャンネルアナログ音楽信号の電力増幅を行う電力増幅器、62はRチャンネルアナログ音楽信号の電力増幅を行う電力増幅器、71は電力増幅器61の出力により駆動されるLチャンネルスピーカ、72は電力増幅器62の出力により駆動されるRチャンネルスピーカである。
【0008】
携帯電話は図2に示す如く、内側に液晶表示パネル80を有する第1筐体81と内側に各種キーを有する第2筐体82とが蝶番部83により開閉(回動)自在に結合されており、この内、第1筐体81の背面側の左右に外部スピーカとしてLチャンネルスピーカ71とRチャンネルスピーカ72が内蔵されている。
【0009】
次に上記した実施の形態の動作を説明する。
コントローラ3は携帯電話の電源オンで音量調整回路4の各部にパラメータ設定する。具体的には、例えば、τ1を150ms、τ2を300ms、aを0.6、bを0.4、P1を半音の10分の1高くする値、P2を半音の10分の1低くする値に設定しておく(なお、これらの値は一例であり、他の組み合わせであっても良い)。
着信検出回路2で通話着信が検出されると、コントローラ3はメモリ1からディジタル着信メロディ音楽信号を読み出し、音場調整回路4へ出力する。音場調整回路4ではまず、ディジタル着信メロディ音楽信号が系統分割手段4aによって3つの系統に分けられて、第1、第2、第3ディジタル音楽信号が作成される。これら3系統の第1、第2、第3ディジタル音楽信号は時間軸調整手段4bにより、時間軸上で150msずつずらされて出力される。そして、音量バランス調整手段4cにより、第2ディジタル音楽信号のレベルが0.6倍され、第3ディジタル音楽信号のレベルが0.4倍される。更に、ピッチ変換手段4dにより、第2ディジタル音楽信号のピッチが半音の10分の1だけ高くされ、第3ディジタル音楽信号のピッチが半音の10分の1だけ低くされる。
【0010】
この結果、第1ディジタル音楽信号はコントローラ3から入力されたディジタル着信メロディ音楽信号のままOUT1から出力され、第1ディジタル音楽信号から150msだけ遅延し、レベルが0.6倍でかつピッチが10分の1だけ高くされた第2ディジタル音楽信号がOUT2から出力され、第1ディジタル音楽信号から300msだけ遅延し、レベルが0.4倍でかつピッチが10分の1だけ低くされた第3ディジタル音楽信号がOUT3から出力される。
【0011】
携帯電話に設置された外部スピーカがLチャンネルスピーカ71とRチャンネルスピーカ72の2つであることから、3系統の第1、第2、第3ディジタル音楽信号が系統変換回路40により2系統に変換される。即ち、第1ディジタル音楽信号と第2ディジタル音楽信号が加算部41で加算されてLチャンネルディジタル音楽信号が作成され、第1ディジタル音楽信号と第3ディジタル音楽信号が加算部42で加算されてRチャンネルディジタル音楽信号が作成される。
【0012】
Lチャンネルディジタル音楽信号はD/A変換回路50のD/A変換器51でLチャンネルアナログ音楽信号に変換され、電力増幅器61で電力増幅されたのちLチャンネルスピーカ71より音響再生される。また、Rチャンネルディジタル音楽信号はD/A変換回路50のD/A変換器52でRチャンネルアナログ音楽信号に変換され、電力増幅器62で電力増幅されたのちRチャンネルスピーカ72より音響再生される。
この結果、Lチャンネルスピーカ71から出力される音響とRチャンネルスピーカ72から出力される音響には、メモリ1に記憶されていた元の着信メロディ音楽信号のほか、元の着信メロディ音楽信号から時間軸方向にずれるとともにピッチもずれた成分(Lチャンネル側は第2音楽信号成分、Rチャンネル側は第3音楽信号成分)も含まれているので、残響感とコーラス感(ディチューン)を発揮できる。加えて、Lチャンネルスピーカ71から出力される音響とRチャンネルスピーカ72から出力される音響とでは、元の着信メロディ音楽信号に加えられた成分の時間軸方向のずれ量が異なり、かつピッチの変えられた方向も異なるので、LチャンネルとRチャンネルの分離感が生じる。従って、着信メロディ音に広がり感と奥行き感が生まれることになる。
【0013】
なお、上記した例ではτ1を150ms、τ2を300msに設定したが、これは一例であり、0<τ1≦500ms、0<τ2≦500msの範囲で、τ1=τ2=250msとしたり、τ1=250ms、τ2=500msとしたり、τ1=300ms、τ2=150msとしたり、τ1=500ms、τ2=250msとするなど、他の値に設定しても良い。好ましくは、0<τ1≦250ms、0<τ2≦500msの範囲内でτ1、τ2を設定するか、または、0<τ1≦500ms、0<τ2≦250msの範囲内でτ1、τ2に設定すると良い。
また、a=0.6、b=0.4に設定したが他の値にしても良く、例えば、τ1<τ2に設定する場合は、1>a>b>0の範囲で、a=0.7、b=0.3に設定したり、a=0.8、b=0.2に設定しても良い。反対に、τ1>τ2に設定する場合は、1>b>a>0の範囲で、a=0.4、b=0.6に設定したり、a=0.3、b=0.7に設定したり、a=0.2、b=0.8に設定したりしても良い。また、τ1=τ2に設定する場合は、1>a>0、1>b>0の範囲で、a=b=0.5に設定したり、a=0.6、b=0.4に設定したり、a=0.4、b=0.6に設定したりしても良い。
更に、P1を半音の10分の1高くする値、P2を半音の10分の1低くする値に設定したが、P1を半音の20分の1高くする値、P2を半音の20分の1低くする値に設定したり、反対に、P1を半音の10分の1低くする値、P2を半音の10分の1高くする値に設定したり、P1を半音の20分の1低くする値、P2を半音の20分の1高くする値に設定したりしても良い。更に、P1を半音の10分の1高くする値、P2を半音の20分の1低くする値に設定したり、P1を半音の20分の1高くする値、P2を半音の10分の1低くする値に設定したり、反対に、P1を半音の10分の1低くする値、P2を半音の20分の1高くする値に設定したり、P1を半音の20分の1低くする値、P2を半音の10分の1高くする値に設定しても良い。要は、P1にピッチを高く(低く)する値を設定したとき、P2にはピッチを低く(高く)する値を設定すれば良く、また、元のピッチから可変する量は半音の10分の1乃至20分の1程度とするのが好ましい。
【0014】
上記した実施の形態によれば、メモリ1に記憶された元となる1系統の着信メロディ音楽信号を音場調整回路4に入力し、系統分割手段4aにより第1、第2、第3音楽信号の3つの系統に系統分割し、時間軸調整手段4bにより、第1音楽信号を第2、第3音楽信号より時間軸上で相対的に先行させ(合わせて、第2音楽信号を第3音楽信号より時間軸上で相対的に先行させても良い)、音量バランス調整手段4cにより各系統間の音量バランスを調整後、更にピッチ変換手段4dにより第2音楽信号のピッチを高く(低く)し、第3音楽信号のピッチを低く(高く)する。そして、第1音楽信号と第2音楽信号を加算してLチャンネル音楽信号としてLチャンネルスピーカ71から音響再生させ、第1音楽信号と第3音楽信号を加算してRチャンネル音楽信号としてRチャンネルスピーカ72から音響再生させたので、Lチャンネルスピーカ71から出力される音響とRチャンネルスピーカ72から出力される音響には、元の着信メロディ音楽信号と、該着信メロディ音楽信号から時間軸方向にずれるとともにピッチもずれた成分が含まれているので、残響感とコーラス感(ディチューン)を発揮でき、加えて、Lチャンネルスピーカ71から出力される音響とRチャンネルスピーカ72から出力される音響とでは、元の着信メロディ音楽信号に加えられた成分のピッチの変化方向(または時間軸方向のずれ量とピッチの変化方向の両方)が異なるので、LチャンネルとRチャンネルの分離感が生じる。従って、着信メロディ音に広がり感と奥行き感が生まれることになる。
【0015】
なお、上記した実施の形態では、音場調整回路4とは別個に設けた系統変換回路40により3系統から2系統への変換を行うようにしたが、音場調整回路4の中でピッチ変換手段4dの後段に系統変換手段を設けて行うようにしても良く、または、D/A変換回路50の後段にアナログ回路構成の系統変換回路を設けて行うようにしても良い。
【0016】
また、携帯電話に搭載された外部スピーカがLチャンネルスピーカ71とRチャンネルスピーカ72の2つのため、音場調整回路4から出力された3系統の第1、第2、第3音楽信号を系統変換回路40により2系統に変換するようにしたが、携帯電話に3つの外部スピーカが搭載されている場合は、系統変換せずに音場調整回路4から出力された第1、第2、第3音楽信号の各々で各外部スピーカを駆動するようにしても良い。
【0017】
具体的には、図3に示す如く、携帯電話にLチャンネルスピーカ71とRチャンネルスピーカ72に加えてC(センタ)チャンネルスピーカ73も搭載されている場合は、図1を図4の如く変え、系統変換回路40を省略し、代わりにD/A変換回路50AにD/A変換器53を追加し、D/A変換器53の出力を電力増幅する電力増幅器63も追加する。そして、音場調整回路4のOUT1から出力された第1ディジタル音楽信号をD/A変換器53に入力してCチャンネルアナログ音楽信号に変換させ、電力増幅器63で電力増幅後、Cチャンネルスピーカ73を駆動させる。また、音場調整回路4のOUT2から出力された第2ディジタル音楽信号をD/A変換器51に入力してLチャンネルアナログ音楽信号に変換させ、電力増幅器61で電力増幅後、Lチャンネルスピーカ71を駆動させ、音場調整回路4のOUT3から出力された第3ディジタル音楽信号をD/A変換器52に入力してRチャンネルアナログ音楽信号に変換させ、電力増幅器62で電力増幅後、Rチャンネルスピーカ72を駆動させるようにする。
【0018】
図3、図4の例によっても、Lチャンネルスピーカ71から出力される音響とRチャンネルスピーカ72から出力される音響には、Cチャンネルスピーカ73から出力される音響に比べて、時間軸方向にずれるとともにピッチもずれた音響が出力されるので、残響感とコーラス感(ディチューン)を発揮でき、加えて、Lチャンネルスピーカ71から出力される音響とRチャンネルスピーカ72から出力される音響とでは、Cチャンネルスピーカ73から出力される音響に比べてピッチの変化方向(または時間軸方向のずれ量とピッチの変化方向の両方)が異なるので、LチャンネルとRチャンネルの分離感が生じる。従って、着信メロディ音に広がり感と奥行き感が生まれることになる。
【0019】
また、図5に示す如く、音場調整回路4Aの例えばピッチ変換手段4dの後段に残響成分付加手段4eを設け、第1乃至第3ディジタル音楽信号の各々に、残響成分を付加するようにしても良い。具体的には第1乃至第3ディジタル音楽信号の各々を残響成分付加部80、81、82に通して残響成分を付加する。残響成分付加部80は例えば図6の如く、第1ディジタル音楽信号に後述する乗算部の出力を加算する加算部90、加算部90の出力を短時間τ(τは例えば、5ms、10msなど)だけ遅延させて外部出力する遅延部91、遅延部91の出力に1より小さい乗算係数cを乗じて加算部90へ出力する乗算部92から構成できる。残響成分付加部81、82も残響成分付加部80と同一構成で良い。
図5の如く、残響成分付加手段4eを追加することで、残響感をより豊かにすることができる。
なお、残響成分付加手段4eをピッチ変換手段4dの後段でなく前段側に設けるようにしたり、または音量バランス調整手段4cの前段に設けるようにしても良い。或いは、残響成分付加手段4eの代わりに、図6に示す残響成分付加部80と同様の残響成分付加部を音場調整回路4の入力側(系統分割手段4aの前段)に1つ設けるようにしても良い。
【0020】
また、上記した実施の形態及び変形例では、携帯電話の着信メロディ音の再生系を例に挙げて説明したが、本発明は何らこれに限定されるものでなく、ホームオーディオ、音響再生機能付パソコン、音響再生機能付携帯情報端末など他の種類の音響関連製品にも同様に適用することができる。
【0021】
【発明の効果】
本発明によれば、1系統の音楽信号から広がり感や奥行き感の有る複数系統の音楽信号を作成可能となる。
【図面の簡単な説明】
【図1】本発明の一つの実施の形態に係る携帯電話の着信メロディ音再生系の構成を示す構成図である。
【図2】携帯電話に搭載された外部スピーカの設置場所の説明図である。
【図3】本発明の変形例に係る携帯電話に搭載された外部スピーカの設置場所の説明図である。
【図4】図1の変形例に係る携帯電話の着信メロディ音再生系の構成を示す構成図である。
【図5】図1の他の変形例に係る音場調整回路の構成を示す構成図である。
【図6】図5中の残響成分付加部の構成を示す構成図である。
【図7】従来の携帯電話の着信メロディ音再生系の構成を示す構成図である。
【符号の説明】
1 メモリ 3 コントローラ
4、4A 音場調整回路 4a 系統分割手段
4b 時間軸調整手段 4c 音量バランス調整手段
4d ピッチ変換手段 4e 残響成分付加手段
11、12、91 遅延部 21、22、92 乗算部
31、32 ピッチ変換部 40 系統変換回路
41、42、90 加算部 50、50A D/A変換回路
51、52、53 D/A変換器 61、62、63 電力増幅器
71 Lチャンネルスピーカ 72 Rチャンネルスピーカ
73 C(センタ)チャンネルスピーカ
80、81、82 残響成分付加部
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a sound field adjusting device, and more particularly, to a sound field adjusting device that creates two or three systems of music signals having a sense of spread and depth from one system of music signals.
[0002]
[Prior art]
The mobile phone has a function of playing an incoming melody sound when a call is received and notifying the user of the incoming call. The user can create a desired incoming melody music signal data by key operation and register it in the memory. FIG. 7 shows a configuration diagram of a ringtone melody sound reproduction system of a conventional mobile phone. When the incoming call detection circuit 2 detects an incoming call, the controller 3 reads the incoming melody music signal data from the memory 1 and outputs it to the D / A converter 5 to convert it into an analog incoming melody music signal. The analog ringing melody music signal is amplified by the power amplifier 6 and then reproduced by the speaker 7.
[0003]
[Problems to be solved by the invention]
However, in the conventional mobile phone ringtone melody playback system described above, since there is only one speaker 7, only a monaural ringtone melody music signal can be played, and a sense of breadth and depth cannot be expressed. . Moreover, even if a plurality of speakers 7 are installed, it is difficult for the user to create a ringtone melody music signal data by key operation, so that it is difficult to express a sense of breadth and depth.
An object of the present invention is to provide a sound field adjustment device that can create a plurality of music signals with a sense of spread and a depth from one music signal in view of the above-described problems of the prior art.
[0004]
[Means for Solving the Problems]
According to the first aspect of the present invention, the system dividing means for systematically dividing the music signal of one system to generate the first, second and third system music signals, and the second system music signal among the three systems of music signals Increases the pitch (lower), the pitch conversion means for lowering (higher) the pitch of the third system music signal, and the first system music signal on the time axis than the second system music signal and the third system music signal. The time axis adjustment means for adjusting the time axis so as to be relatively ahead, the pitch conversion means converts the pitch, and the time axis adjustment means adjusts the time axis to add the second system music signal and the first system music signal And a second addition unit for adding the third system music signal and the first system music signal after the pitch is converted by the pitch conversion unit and the time axis is adjusted by the time axis adjustment unit . It is characterized by that.
According to a second aspect of the present invention, the time axis adjustment means adjusts the time axis so that the second system music signal precedes the third system music signal relatively on the time axis .
In Motomeko 3, pitch conversion means is a 1 in the range of 1 to 10 minutes 20 minutes semitone, the pitch of the second system the music signal raised (lowered), lower the pitch of the music signal of the third system It is characterized by (high).
According to a fourth aspect of the present invention, there is provided a volume balance adjusting means for adjusting a volume balance among the first system music signal, the second system music signal, and the third system music signal.
According to a fifth aspect of the present invention , reverberation component adding means for adding reverberation components to at least the second system music signal and the third system music signal among the first system music signal, the second system music signal, and the third system music signal is provided. It is characterized by that.
According to a sixth aspect of the present invention, reverberation component adding means for adding a reverberation component to the one system of music signals is provided before the system dividing means.
[0005]
DETAILED DESCRIPTION OF THE INVENTION
Next, one embodiment of the present invention will be described with reference to FIG. FIG. 1 is a block diagram showing the structure of a ringtone melody sound reproduction system for a mobile phone according to the present invention.
Reference numeral 1 denotes a memory in which a monophonic digital ringing melody music signal is stored, and the digital ringing melody music signal is obtained by communication from the outside even if the user creates a key operation with a mobile phone. There may be. 2 is an incoming call detection circuit for detecting an incoming call, and 3 is a controller having a microcomputer configuration. When the incoming call detection circuit 2 detects an incoming call, a digital incoming melody music signal is read from the memory 1 and a sound field adjusting circuit to be described later And the sound field adjustment processing is executed in the digital domain to output three systems of first to third digital music signals. Reference numeral 4 denotes a sound field adjusting circuit composed of a DSP (digital signal processor). Among these, 4a is a system division for system-dividing one system of music signals into three systems of first, second and third digital music signals. Means 4b are time axis adjusting means for adjusting the time axis between the first, second and third digital music signals. The first digital music signal is on the time axis more than the second and third digital music signals. (In addition, the second digital music signal may relatively precede the third digital music signal on the time axis). 4c is a volume balance adjusting means for adjusting the volume balance of the first, second and third digital music signals of the three systems, and 4d is the second digital music among the first, second and third digital music signals of the three systems. Pitch conversion means for converting the pitch of the signal and the third digital music signal.
[0006]
The system dividing means 4a branches the input digital incoming melody music signal into three and outputs it as first, second, and third digital music signals. The time axis adjusting means 4b outputs the second digital music signal delayed by the delay time τ1 by the delay unit 11 and outputs the third digital music signal delayed by the delay time τ2 by the delay unit 12. The volume balance adjusting means 4c has a multiplier 21 for changing the level of the second digital music signal and a multiplier 22 for changing the level of the third digital music signal. Volume balance adjustment is performed by multiplying the third digital music signal by multiplication coefficients a and b of 1 or less, respectively. The pitch conversion means 4d does not change the pitch of the first digital music signal, changes the pitch of the second digital music signal by the conversion amount P1 by the pitch conversion unit 31, and converts the pitch of the third digital music signal by the pitch conversion unit 32. Change only P2. As for P1 and P2, when one increases the pitch, the other is set to a value that decreases the pitch. P1 and P2 are preferably set in a range of 1/20 to 1/10 of a semitone. OUT1 is a first digital music signal output terminal, OUT2 is a second digital music signal output terminal, and OUT3 is a third digital music signal output terminal.
[0007]
Reference numeral 40 denotes a system conversion circuit for converting three music signals into two music signals. Among them, 41 adds the first digital music signal and the second digital music signal to create an L channel digital music signal. An adder 42 is an adder for adding the first digital music signal and the third digital music signal to create an R channel digital music signal. Reference numeral 50 denotes a D / A conversion circuit that converts a digital music signal into an analog music signal. Among these, 51 is a D / A converter that creates an L channel analog music signal by D / A converting the L channel digital music signal. , 52 is a D / A converter for creating an R channel analog music signal by D / A converting the R channel digital music signal. 61 is a power amplifier that amplifies the power of the L channel analog music signal, 62 is a power amplifier that amplifies the power of the R channel analog music signal, 71 is an L channel speaker driven by the output of the power amplifier 61, and 72 is a power amplifier 62. R channel speaker driven by the output of
[0008]
As shown in FIG. 2, the mobile phone has a first housing 81 having a liquid crystal display panel 80 on the inside and a second housing 82 having various keys on the inside, which are connected to each other by a hinge 83 so as to be freely opened and closed (turned). Among these, an L channel speaker 71 and an R channel speaker 72 are incorporated as external speakers on the left and right sides of the first casing 81 on the back side.
[0009]
Next, the operation of the above embodiment will be described.
The controller 3 sets parameters in each part of the volume adjustment circuit 4 when the mobile phone is turned on. Specifically, for example, τ1 is 150 ms, τ2 is 300 ms, a is 0.6, b is 0.4, P1 is one tenth higher than a semitone, and P2 is one tenth lower than a semitone. (Note that these values are examples, and other combinations may be used).
When the incoming call detection circuit 2 detects an incoming call, the controller 3 reads the digital incoming melody music signal from the memory 1 and outputs it to the sound field adjustment circuit 4. In the sound field adjustment circuit 4, first, the digital incoming melody music signal is divided into three systems by the system dividing means 4a, and the first, second, and third digital music signals are created. These three systems of the first, second and third digital music signals are shifted by 150 ms on the time axis and output by the time axis adjusting means 4b. Then, the level of the second digital music signal is multiplied by 0.6 and the level of the third digital music signal is multiplied by 0.4 by the volume balance adjusting means 4c. Further, the pitch converting means 4d increases the pitch of the second digital music signal by 1/10 of a semitone and decreases the pitch of the third digital music signal by 1/10 of a semitone.
[0010]
As a result, the first digital music signal is output from OUT1 as the digital ringing melody music signal input from the controller 3, is delayed by 150 ms from the first digital music signal, the level is 0.6 times, and the pitch is 10 minutes. The second digital music signal that is raised by 1 is output from OUT2, delayed by 300 ms from the first digital music signal, the level is 0.4 times, and the pitch is lowered by 1/10. A signal is output from OUT3.
[0011]
Since there are two external speakers installed in the mobile phone, the L channel speaker 71 and the R channel speaker 72, the three first, second and third digital music signals are converted into two by the system conversion circuit 40. Is done. That is, the adder 41 adds the first digital music signal and the second digital music signal to create an L-channel digital music signal, and the adder 42 adds the first digital music signal and the third digital music signal. A channel digital music signal is created.
[0012]
The L channel digital music signal is converted into an L channel analog music signal by the D / A converter 51 of the D / A conversion circuit 50, amplified by the power amplifier 61, and then reproduced by the L channel speaker 71. The R channel digital music signal is converted into an R channel analog music signal by the D / A converter 52 of the D / A conversion circuit 50, amplified by the power amplifier 62, and then reproduced by the R channel speaker 72.
As a result, the sound output from the L channel speaker 71 and the sound output from the R channel speaker 72 include the original incoming melody music signal stored in the memory 1 and the time axis from the original incoming melody music signal. Since a component shifted in the direction and shifted in pitch (the second music signal component on the L channel side and the third music signal component on the R channel side) is also included, reverberation and chorus (detune) can be exhibited. In addition, the sound output from the L channel speaker 71 and the sound output from the R channel speaker 72 differ in the amount of deviation in the time axis direction of the component added to the original ringing melody music signal, and the pitch is changed. Since the directions are also different, there is a feeling of separation between the L channel and the R channel. Therefore, a feeling of spread and a feeling of depth are born in the incoming melody sound.
[0013]
In the above example, τ1 is set to 150 ms and τ2 is set to 300 ms. However, this is an example, and in the range of 0 <τ1 ≦ 500 ms and 0 <τ2 ≦ 500 ms, τ1 = τ2 = 250 ms or τ1 = 250 ms. , Τ2 = 500 ms, τ1 = 300 ms, τ2 = 150 ms, τ1 = 500 ms, τ2 = 250 ms, or other values. Preferably, τ1 and τ2 are set within a range of 0 <τ1 ≦ 250 ms and 0 <τ2 ≦ 500 ms, or τ1 and τ2 are set within a range of 0 <τ1 ≦ 500 ms and 0 <τ2 ≦ 250 ms. .
Further, although a = 0.6 and b = 0.4 are set, other values may be used. For example, when τ1 <τ2 is set, a = 0 in a range of 1>a>b> 0. .7, b = 0.3, or a = 0.8, b = 0.2. On the other hand, when setting τ1> τ2, in the range of 1>b>a> 0, a = 0.4, b = 0.6, a = 0.3, b = 0.7 Or a = 0.2 and b = 0.8. Also, when setting τ1 = τ2, within the range of 1>a> 0, 1>b> 0, a = b = 0.5, or a = 0.6, b = 0.4. It may be set, or a = 0.4 and b = 0.6.
Furthermore, although P1 is set to a value that increases 1/10 of a semitone and P2 is set to a value that decreases 1/10 of a semitone, P1 is set to a value that increases 1/20 of a semitone, and P2 is set to a value of 1/20 of a semitone. A value that lowers, or a value that lowers P1 by one tenth of a semitone, a value that increases P1 by one tenth of a semitone, or a value that lowers P1 by one twenty of a semitone. , P2 may be set to a value that is 1 / 20th of a semitone. Furthermore, P1 is set to a value that increases 1/10 of a semitone, P2 is set to a value that decreases 1/20 of a semitone, P1 is set to a value that increases 1/20 of a semitone, and P2 is set to 1/10 of a semitone. A value that lowers, or a value that lowers P1 by 1/10 of a semitone, a value that increases P2 by 1/20 of a semitone, or a value that decreases P1 by 1/20 of a semitone. , P2 may be set to a value that is one tenth higher than a semitone. In short, when a value for increasing (decreasing) the pitch is set in P1, a value for decreasing (increasing) the pitch may be set in P2, and the amount variable from the original pitch is 10 minutes of a semitone. It is preferably about 1 to 20 times.
[0014]
According to the above-described embodiment, the original incoming melody music signal stored in the memory 1 is input to the sound field adjustment circuit 4 and the first, second, and third music signals are input by the system dividing means 4a. The system is divided into three systems, and the first music signal is made to precede the second and third music signals on the time axis by the time axis adjusting means 4b. It may be relatively preceded on the time axis from the signal), and after adjusting the volume balance between the systems by the volume balance adjusting means 4c, the pitch of the second music signal is further increased (lowered) by the pitch converting means 4d. The pitch of the third music signal is lowered (increased). Then, the first music signal and the second music signal are added together to reproduce sound from the L channel speaker 71 as an L channel music signal, and the first music signal and the third music signal are added together as an R channel music signal. 72, the sound output from the L channel speaker 71 and the sound output from the R channel speaker 72 are shifted in the time axis direction from the original ringing melody music signal and the ringing melody music signal. Since a component with a shifted pitch is included, a reverberation feeling and a chorus feeling (detune) can be exhibited. In addition, with the sound output from the L channel speaker 71 and the sound output from the R channel speaker 72, The direction of change in the pitch of the component added to the original incoming melody music signal (or the amount of deviation in the time axis direction) Since Tsu both changing direction of the switch) are different, separate sense of L and R channels occurs. Therefore, a feeling of spread and a feeling of depth are born in the incoming melody sound.
[0015]
In the embodiment described above, the system conversion circuit 40 provided separately from the sound field adjustment circuit 4 performs conversion from three systems to two systems, but the pitch conversion is performed in the sound field adjustment circuit 4. System conversion means may be provided after the means 4d, or a system conversion circuit having an analog circuit configuration may be provided after the D / A conversion circuit 50.
[0016]
In addition, since there are two external speakers mounted on the mobile phone, the L channel speaker 71 and the R channel speaker 72, the three systems of the first, second, and third music signals output from the sound field adjustment circuit 4 are system-converted. Although the circuit 40 converts the signal into two systems, when the mobile phone has three external speakers, the first, second, and third output from the sound field adjustment circuit 4 without system conversion. Each external speaker may be driven by each music signal.
[0017]
Specifically, as shown in FIG. 3, when the mobile phone is also provided with a C (center) channel speaker 73 in addition to the L channel speaker 71 and the R channel speaker 72, FIG. 1 is changed as shown in FIG. Instead of the system conversion circuit 40, a D / A converter 53 is added to the D / A conversion circuit 50A, and a power amplifier 63 that amplifies the output of the D / A converter 53 is also added. Then, the first digital music signal output from OUT1 of the sound field adjustment circuit 4 is input to the D / A converter 53 to be converted into a C channel analog music signal. After the power amplification by the power amplifier 63, the C channel speaker 73 is obtained. Drive. Also, the second digital music signal output from OUT2 of the sound field adjustment circuit 4 is input to the D / A converter 51 to be converted into an L channel analog music signal. After power amplification by the power amplifier 61, the L channel speaker 71 is converted. And the third digital music signal output from OUT3 of the sound field adjustment circuit 4 is input to the D / A converter 52 to be converted into an R channel analog music signal, amplified by the power amplifier 62, and then the R channel. The speaker 72 is driven.
[0018]
3 and 4, the sound output from the L channel speaker 71 and the sound output from the R channel speaker 72 are shifted in the time axis direction compared to the sound output from the C channel speaker 73. In addition, since the sound with the pitch shifted is output, the reverberation feeling and the chorus feeling (detune) can be exhibited. In addition, the sound output from the L channel speaker 71 and the sound output from the R channel speaker 72 are: Compared with the sound output from the C channel speaker 73, the change direction of the pitch (or both the shift amount in the time axis direction and the change direction of the pitch) is different, so that a sense of separation between the L channel and the R channel occurs. Therefore, a feeling of spread and a feeling of depth are born in the incoming melody sound.
[0019]
Further, as shown in FIG. 5, reverberation component adding means 4e is provided, for example, after the pitch converting means 4d of the sound field adjusting circuit 4A so as to add the reverberation components to each of the first to third digital music signals. Also good. Specifically, each of the first to third digital music signals is passed through reverberation component adding sections 80, 81, and 82 to add a reverberation component. For example, as shown in FIG. 6, the reverberation component adding unit 80 adds an output of a multiplier described later to the first digital music signal, and outputs the output of the adder 90 for a short time τ (τ is 5 ms, 10 ms, etc.). The delay unit 91 can be configured to be delayed and output externally, and the output of the delay unit 91 can be multiplied by a multiplication coefficient c smaller than 1 and output to the adder 90. The reverberation component adding units 81 and 82 may have the same configuration as the reverberation component adding unit 80.
As shown in FIG. 5, the reverberation component adding means 4e can be added to enrich the feeling of reverberation.
It should be noted that the reverberation component adding means 4e may be provided not in the subsequent stage of the pitch converting means 4d but in the previous stage, or in the previous stage of the volume balance adjusting means 4c. Alternatively, instead of the reverberation component addition means 4e, one reverberation component addition section similar to the reverberation component addition section 80 shown in FIG. 6 is provided on the input side of the sound field adjustment circuit 4 (the preceding stage of the system division means 4a). May be.
[0020]
Further, in the above-described embodiment and modification, the description has been given by taking the reproduction system of the ringtone of the mobile phone as an example. However, the present invention is not limited to this, and home audio and sound reproduction functions are provided. The present invention can be similarly applied to other types of sound-related products such as a personal computer and a portable information terminal with a sound reproduction function.
[0021]
【The invention's effect】
According to the present invention, it is possible to create a plurality of music signals having a sense of spread and depth from one music signal.
[Brief description of the drawings]
FIG. 1 is a configuration diagram showing a configuration of a ringtone melody sound reproduction system of a mobile phone according to an embodiment of the present invention.
FIG. 2 is an explanatory diagram of an installation location of an external speaker mounted on a mobile phone.
FIG. 3 is an explanatory diagram of an installation location of an external speaker mounted on a mobile phone according to a modification of the present invention.
4 is a configuration diagram showing a configuration of a ringing melody sound reproduction system of a mobile phone according to a modified example of FIG. 1;
5 is a configuration diagram showing a configuration of a sound field adjusting circuit according to another modification of FIG. 1. FIG.
6 is a configuration diagram showing a configuration of a reverberation component adding unit in FIG. 5. FIG.
FIG. 7 is a configuration diagram showing a configuration of a ringtone melody sound reproduction system of a conventional mobile phone.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Memory 3 Controller 4, 4A Sound field adjustment circuit 4a System division | segmentation means 4b Time axis adjustment means 4c Volume balance adjustment means 4d Pitch conversion means 4e Reverberation component addition means 11, 12, 91 Delay part 21, 22, 92 Multiplication part 31, 32 Pitch converter 40 System converter 41, 42, 90 Adder 50, 50A D / A converter 51, 52, 53 D / A converter 61, 62, 63 Power amplifier 71 L channel speaker 72 R channel speaker 73 C (Center) Channel speakers 80, 81, 82 Reverberation component adding section

Claims (6)

1系統の音楽信号を系統分割して第1、第2、第3系統音楽信号を作成する系統分割手段と、
3系統の音楽信号の内、第2系統音楽信号はピッチを高く(低く)し、第3系統音楽信号はピッチを低く(高く)するピッチ変換手段と、
第1系統音楽信号が、第2系統音楽信号及び第3系統音楽信号より時間軸上で相対的に先行するように時間軸調整する時間軸調整手段と、
ピッチ変換手段でピッチを変換し、時間軸調整手段で時間軸を調整後の第2系統音楽信号と第1系統音楽信号を加算する第1加算手段と、
ピッチ変換手段でピッチを変換し、時間軸調整手段で時間軸を調整後の第3系統音楽信号と第1系統音楽信号を加算する第2加算手段と、
を備えたことを特徴とする音場調整装置。
A system dividing means for system-dividing one music signal to create first, second and third system music signals;
Of the three music signals, pitch conversion means for raising (lowering) the pitch of the second music signal and lowering (higher) the pitch of the third music signal;
Time axis adjusting means for adjusting the time axis so that the first system music signal is relatively ahead of the second system music signal and the third system music signal on the time axis;
First addition means for adding the second system music signal and the first system music signal after converting the pitch by the pitch conversion means and adjusting the time axis by the time axis adjustment means;
Second addition means for adding the third system music signal and the first system music signal after converting the pitch by the pitch conversion means and adjusting the time axis by the time axis adjustment means;
A sound field adjusting device comprising:
時間軸調整手段は、第2系統音楽信号が第3系統音楽信号より時間軸上で相対的に先行するように時間軸調整するようにしたこと、
を特徴とする請求項1記載の音場調整装置。
The time axis adjustment means adjusts the time axis so that the second system music signal precedes the third system music signal relatively on the time axis,
The sound field adjusting device according to claim 1.
ピッチ変換手段は、半音の20分の1乃至10分の1の範囲で、第2系統音楽信号のピッチを高く(低く)し、第3系統の音楽信号のピッチを低く(高く)するようにしたこと、
を特徴とする請求項1または2記載の音場調整装置。
The pitch converting means raises (lowers) the pitch of the second system music signal and lowers (higher) the pitch of the third system music signal within a range of 1/20 to 1/10 of a semitone. What
Sound field adjustment device according to claim 1 or 2 Symbol mounting characterized.
第1系統音楽信号、第2系統音楽信号、第3系統音楽信号の間の音量バランスを調整する音量バランス調整手段を設けたこと、
を特徴とする請求項1または2または3記載の音場調整装置。
Providing a volume balance adjusting means for adjusting a volume balance among the first system music signal, the second system music signal, and the third system music signal;
Sound field adjustment device according to claim 1 or 2 or 3 Symbol mounting characterized.
第1系統音楽信号、第2系統音楽信号、第3系統音楽信号の内、少なくとも第2系統音楽信号、第3系統音楽信号に各々残響成分を付加する残響成分付加手段を設けたこと、
を特徴とする請求項1または2または3または4記載の音場調整装置。
Reverberation component adding means for adding reverberation components to at least the second system music signal and the third system music signal among the first system music signal, the second system music signal, and the third system music signal,
Sound field adjustment device according to claim 1 or 2 or 3 or 4 Symbol mounting characterized.
系統分割手段の前段で前記1系統の音楽信号に残響成分を付加する残響成分付加手段を設けたこと、
を特徴とする請求項1または2または3または4記載の音場調整装置。
Reverberation component adding means for adding a reverberation component to the music signal of the one system in the previous stage of the system dividing means;
Sound field adjustment device according to claim 1 or 2 or 3 or 4 Symbol mounting characterized.
JP2002010769A 2002-01-18 2002-01-18 Sound field adjustment device Expired - Lifetime JP4422941B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002010769A JP4422941B2 (en) 2002-01-18 2002-01-18 Sound field adjustment device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002010769A JP4422941B2 (en) 2002-01-18 2002-01-18 Sound field adjustment device

Publications (2)

Publication Number Publication Date
JP2003216154A JP2003216154A (en) 2003-07-30
JP4422941B2 true JP4422941B2 (en) 2010-03-03

Family

ID=27648410

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002010769A Expired - Lifetime JP4422941B2 (en) 2002-01-18 2002-01-18 Sound field adjustment device

Country Status (1)

Country Link
JP (1) JP4422941B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3990365B2 (en) 2004-02-20 2007-10-10 埼玉日本電気株式会社 Foldable electronics
CN109862503B (en) * 2019-01-30 2021-02-23 北京雷石天地电子技术有限公司 Method and equipment for automatically adjusting loudspeaker delay

Also Published As

Publication number Publication date
JP2003216154A (en) 2003-07-30

Similar Documents

Publication Publication Date Title
KR101373977B1 (en) M-s stereo reproduction at a device
US7103393B2 (en) Sound output system and method of a mobile communication terminal
JP3542955B2 (en) Mobile phone
JPH03219800A (en) Sound effect equipment
KR20070043221A (en) Mobile communication terminal setting up multi-vibration and its operating method
US7463743B2 (en) Electronic driving circuit for directing an audio signal selectively to one of two speakers
JP4422941B2 (en) Sound field adjustment device
JPH06189400A (en) Stereo signal generator
JP4458269B2 (en) Noise cancellation headphones
JPH11196488A (en) Reproduction system and method
KR100705966B1 (en) Echo microphone having play and save function of digital audio signal file
JP2004096573A (en) Folding portable telephone
KR20040058660A (en) Mobile phone for outputting stereo sound
JP5138911B2 (en) Mobile phone
KR100518176B1 (en) A stereo sound mobile phone and a method for implementing stereo sound in the mobile phone
JP2001245399A (en) Ultralow frequency sound compensation system and acoustic device using it
KR100691534B1 (en) Karaoke system having multi-channel amp
JP4308421B2 (en) Music playback device
JP3401926B2 (en) Audio signal playback device
JP2023131544A (en) Acoustic output device, acoustic output method, and program
GB2405767A (en) Mobile phone multi-directional sound porting mechanism
KR101067595B1 (en) Apparatus for compensating low frequency band audio signal based on listenr&#39;s characteristics
JP2008304670A (en) Electronic sound source device
JPS63202200A (en) Audio equipment
JPH08103000A (en) Vocal assist device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040430

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060223

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061116

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070215

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070413

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20071011

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080111

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091207

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121211

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4422941

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121211

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121211

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121211

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131211

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term