JP3666366B2 - Portable terminal device - Google Patents

Portable terminal device Download PDF

Info

Publication number
JP3666366B2
JP3666366B2 JP2000179962A JP2000179962A JP3666366B2 JP 3666366 B2 JP3666366 B2 JP 3666366B2 JP 2000179962 A JP2000179962 A JP 2000179962A JP 2000179962 A JP2000179962 A JP 2000179962A JP 3666366 B2 JP3666366 B2 JP 3666366B2
Authority
JP
Japan
Prior art keywords
information
music
sound
data
format
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000179962A
Other languages
Japanese (ja)
Other versions
JP2001195068A (en
Inventor
剛 二間瀬
靖 鞍掛
健介 井出
成彦 水野
周三 唐川
好成 寺田
豊 長谷川
崇 國井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP2000179962A priority Critical patent/JP3666366B2/en
Priority to TW089114271A priority patent/TW495735B/en
Priority to SG200502225-6A priority patent/SG143970A1/en
Priority to SG200004176A priority patent/SG99867A1/en
Priority to SG200502228A priority patent/SG126779A1/en
Priority to EP00115054A priority patent/EP1073034A3/en
Priority to SG200207492A priority patent/SG116472A1/en
Priority to US09/626,304 priority patent/US6911592B1/en
Priority to CNB001222465A priority patent/CN1268149C/en
Priority to KR1020000043801A priority patent/KR100724918B1/en
Priority to HK01104335A priority patent/HK1033801A1/en
Publication of JP2001195068A publication Critical patent/JP2001195068A/en
Priority to US10/410,796 priority patent/US6967276B2/en
Priority to US10/411,025 priority patent/US7161081B2/en
Priority to US10/411,985 priority patent/US7119268B2/en
Priority to US10/412,131 priority patent/US7514624B2/en
Application granted granted Critical
Publication of JP3666366B2 publication Critical patent/JP3666366B2/en
Priority to KR1020060069241A priority patent/KR100804914B1/en
Priority to KR1020060069239A priority patent/KR100832958B1/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Auxiliary Devices For Music (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Description

【0001】
【発明の属する技術分野】
この発明は、携帯用端末装置、より詳細には、携帯用電話機端末のような携帯用端末装置に内蔵される発音制御装置等に楽曲情報等の諸情報を授与するための装置及びシステムに関する。
【0002】
【従来の技術】
近年の携帯用電話機端末の発展に伴い、着信した時にメロディ音を鳴らせるものがある。このような携帯用電話機端末において再生できるメロディ音は、ブザー音を利用した単音発音の楽曲であった。また、このような楽曲情報は、基地局等よりダウンロードすることができるようになっていた。
【0003】
しかしながら、従来の携帯用電話機端末におけるこの種のメロディ音再生装置では、複数種類の楽音を同時に発音する楽曲を再生することができず、音色や効果等の各種設定を行うこともできなかった。従って、多様な楽曲を再生して楽しむことができなかった。
【0004】
さらに、従来の携帯用電話機端末においては、再生される楽曲に対応して文字(歌詞)を同期的に再生することができるようなものはなかった。
【0005】
【発明が解決しようとする課題】
この発明の目的は、このような事情に鑑み、携帯用端末装置において、FM音源等を利用して複数音を同時に発音させて、着信時のメロディ音や通話中のバックグラウンドミュージック(BGM)音等を鳴らす場合に、楽音情報の音色や効果等の設定、編集、作成等を容易に行うことができ、豊かで多様・多彩な楽曲の再生を実現し、端末装置の処理機能やユーザの好みに適合した楽音を得ることにある。
【0006】
【課題を解決するための手段】
この発明によると(以下、理解の便のため、対応する実施例の参照符号、箇所、用語等を例示的に括弧内に付記する)、他の端末装置(OS)と通信するための通信手段(6)と、種々の情報を表示するための表示手段(5,13)と、演奏情報(IA,IK)を記憶する記憶手段(2,3,KB1)と、この記憶手段に記憶されている演奏情報のパラメータを表示手段に表示させると共に、表示されたパラメータに対して編集を行う編集手段(1,TR5,図22)と、演奏情報に基づく楽音信号を生成する楽音生成手段(8,KB4)と、通信手段が他の端末装置からの着信を受けたことに応じて、楽音生成手段に対し、記憶手段に記憶されている演奏情報のうち着信用に設定された着信演奏情報(着信メロディ曲)に基づく楽音信号の生成を開始させる着信報知手段(1,KR12,KR42)とを具備し、編集手段は、演奏情報の編集を行っている状態で通信手段が他の端末装置からの着信を受けたとき、当該編集中の演奏情報を記憶手段に記憶するか否かの選択を促す表示を表示手段に行わせ、この表示に対するユーザ応答に基づいて当該編集中の演奏情報を記憶手段に記憶させ(ER25〜ER28)、楽音生成手段は、選択を促す表示が表示手段により行われる間、着信演奏情報に基づく楽音信号の生成を行わない(ER28)携帯用端末装置(TS)が提供される。
【0009】
〔発明の作用〕
この発明による携帯用端末装置では、編集手段により、記憶手段に記憶されている演奏情報のパラメータを表示手段に表示させると共に、表示されたパラメータに対して編集を行う(ER22〜ER25)。ここで、演奏情報の編集を行っている状態で通信手段が他の端末装置からの着信を受けた場合には(KR11=YES→KR13・ER25=YES)、当該演奏情報を記憶手段に記憶するか否かの選択を促す表示が行われ、この表示に対するユーザ応答に基づいて当該演奏情報を記憶手段に記憶させる(ER27・ER28)。さらに、他の端末装置からの着信を受けたことに応じて(KR11=YES→KR12〜KR14・KR41=YES)、記憶手段に記憶されている演奏情報のうち着信用に設定された着信演奏情報(着信メロディ曲)に基づく楽音信号の生成を開始させるが(KR42)、編集中の演奏情報を記憶手段に記憶するか否かの選択を促す表示が行われる間は、着信演奏情報に基づく楽音信号の生成を行わないように制御する(ER28)。
【0010】
従って、記憶手段に記憶されている演奏情報の内の編集したいパラメータを表示させ、電話番号入力用テンキーの操作により、パラメータ値を入力して演奏情報の編集を行うことができるだけでなく、編集中に着信があった場合には、ユーザに対して編集中のデータを保存するか否かを問い合わせ、ユーザ指示に応じて同データを保存可能とすることができる。さらに、編集中に着信があっても、ユーザへのデータ保存の問い合わせの間は着信メロディ曲の発音処理に移行されず、突然、着信メロディ音が鳴り始めないようにすることができる。
【0011】
なお、この発明による携帯用端末装置においては、他の端末装置からの着信を受けたことに応じて(KR11=YES→KR13・ER25=YES)、編集手段における編集作業を強制的に終了する(ER26)ことにより、編集中に着信した際に編集モードを終了して通話開始に移行することができる。
【0012】
なお、この発明による携帯用端末装置は、音源方式については、FM音源方式、波形メモリ方式又は物理モデル方式の音源手段を備えることができ、音源回路としては、マイクロプログラムを含むDSPで構成される音源回路又はソフトウエアを含むCPUで構成される音源回路を有することができる。
【0013】
〔別の特徴〕
また、この発明の実施に関する別の特徴により、次の(a)〜(e)のように構成することができる:
(a)フォーマット変換に関する第1の特徴=第1フォーマットの楽曲情報を用いて楽音処理を行う携帯用端末装置及び楽音情報源を有する基地局から成る楽音情報利用システムにおいて、基地局は、第1フォーマットとは異なるフォーマットの楽曲情報を第1フォーマットの楽曲情報にフォーマット変換するフォーマット変換手段を備える楽音情報利用システム、及び、第1フォーマットの楽曲情報を用いて楽音処理を行う携帯用端末装置に対して楽音情報源から楽音情報の配信が可能な基地局であって、第1フォーマットとは異なるフォーマットの楽曲情報を第1フォーマットの楽曲情報にフォーマット変換するフォーマット変換手段を具備するもの。この楽音情報利用システム或いは基地局では、基地局(サーバ)において、第1フォーマットとは異なる他機種用楽曲情報又は汎用楽曲情報から第1フォーマットである自機種用楽曲情報にフォーマット変換することができる。
【0014】
(b)フォーマット変換に関する第2の特徴=所定フォーマットの楽曲情報を用いて楽音処理を行う携帯用端末装置及び楽音情報源を有する基地局から成る楽音情報利用システムにおいて、基地局は、携帯用端末装置からの当該端末装置に関する識別情報を受信する手段と、受信された識別情報に基づいて、楽音情報源から所定フォーマットの楽曲情報を作成する手段を備える楽音情報利用システム、及び、所定フォーマットの楽曲情報を用いて楽音処理を行う携帯用端末装置に対して楽音情報源から楽曲情報の配信が可能な基地局であって、携帯用端末装置からの当該端末装置に関する識別情報を受信する手段と、受信された識別情報に基づいて、楽音情報源から所定フォーマットの楽曲情報を作成する手段とを具備するもの。この楽音情報利用システム或いは基地局では、端末から基地局(サーバ)に対して、端末に関する情報(識別情報)を送信すると、基地局(サーバ)において、当該情報に基づいてフォーマット変換をすることができる。
【0015】
(c)フォーマット変換に関する第3の特徴=所定フォーマットの楽曲情報を用いて楽音処理を行う携帯用端末装置であって、第1フォーマットとは異なるフォーマットの楽曲情報を第1フォーマットの楽曲情報にフォーマット変換するフォーマット変換手段を具備するもの。この携帯用端末装置では、端末装置自体において、第1フォーマットとは異なるフォーマットの他機種用楽曲情報或いは汎用楽曲情報から、第1フォーマットの自機種用楽曲情報にフォーマット変換することができる。
【0016】
(d)試聴に関する特徴=楽音の発音が可能な携帯用端末装置及び楽音情報源を有する基地局から成る楽音情報利用システムにおいて、基地局は、楽音情報源からの情報をストリーミングデータとして送信する手段を備え、携帯用端末装置は、基地局からのストリーミングデータに基づく情報をリアルタイムで再生する手段を備える楽音情報利用システム、及び、楽音の発音が可能な携帯用端末装置に対して楽音情報源から楽音情報の配信が可能な基地局であって、楽音情報源からの情報を携帯用端末装置にストリーミング送信する手段を備えるもの。この楽音情報利用システム及び基地局においては、情報を基地局(サーバ)からストリーミング送信することにより携帯用端末装置側ではリアルタイムで試聴することができる。
【0017】
(e)着脱可能記憶媒体に関する特徴=着脱可能小型記憶媒体の装着が可能な携帯用端末装置であって、着脱可能小型記憶媒体に記憶されている楽曲情報を取り込む手段と、取り込まれた楽曲情報を処理する手段とを具備するもの、及び、着脱可能小型記憶媒体の装着が可能な携帯用端末装置であって、楽曲情報を処理する手段と、処理された楽曲情報を着脱可能小型記憶媒体に書き込む手段とを具備するもの。これらの携帯用端末装置においては、着脱可能小型記憶媒体を装着可能とし、前者端末では、この記録媒体から端末システムに楽曲情報を取り込むことができ、後者端末では、種々の情報源からこの記録媒体に楽曲情報を書き込むことができる。
【0018】
〔種々の特徴〕
なお、この発明に備えられる種々の特徴により、以下の(1)〜(8)のように構成することができる:
(1)楽音の発音が可能な携帯用端末装置に備えられる発音制御装置であって、演奏情報並びに音色及び効果に関する設定情報を取得する情報取得手段と、音色に関する設定情報に基づいて設定される音色が与えられ演奏情報に対応する楽音信号を生成する音源手段と、生成された楽音信号に対して、効果に関する設定情報に基づいて設定される効果を付与する効果付与手段と、効果が付与された楽音信号を出力する出力手段とを具備するもの。
【0019】
(2)楽音の発音が可能な携帯用端末装置に備えられる発音制御装置であって、楽音情報を記憶する記憶手段と、記憶された楽音情報に基づいて、所定の音色をもち所定の効果が付与された楽音信号を生成する楽音生成手段と、携帯用端末装置とは独立して、これらの記憶手段及び楽音生成手段を制御する制御手段とを具備するもの。
【0020】
(3)楽音情報、音声情報及び画像情報を記憶する記憶手段と、記憶された楽音情報に基づいて、楽音情報に含まれる設定情報に対応する所定の音色乃至効果(「乃至」は、双方又は何れか一方つまり“及び/又は”の意味で用いられる。以下、同じ。)が与えられた楽音信号を生成する発音制御装置と、記憶された音声情報及び画像情報に基づいて音声信号及び画像信号を生成する手段とを具備する携帯用端末装置。ここで、記憶手段に記憶される楽音情報は、記憶手段の記憶容量に対応して、汎用楽音情報フォーマットに比べてダウンサイジングされたフォーマットにて記述されている情報とすることができる。
【0021】
(4)楽音の発音が可能な携帯用端末装置及び楽音情報源を有する基地局から成る楽音情報利用システムにおいて、携帯用端末装置から送信される選択情報に応じて、対応する楽音情報を楽音情報源から選択する情報選択手段と、選択された楽音情報について、携帯用端末装置で発音される楽音に与える音色乃至効果を表わす設定情報を付与する設定情報付与手段と、設定情報が付与された楽音情報に基づいて、所定の音色乃至効果が与えられた楽音信号を生成する発音制御装置とを具備する楽音情報利用システム。このシステムは、さらに、選択情報を送信した携帯用端末装置に対して課金作業を行う課金手段を具備することができる。
【0022】
(5)楽音の発音が可能な携帯用端末装置及び楽音情報の作成又は編集が可能な楽音情報処理装置から成る楽音情報利用システムにおいて、作成又は編集された楽音情報を圧縮する情報圧縮手段と、圧縮された楽音情報に基づいて、所定の音色乃至効果が与えられた楽音信号を生成する発音制御装置とを具備するもの。
【0023】
(6)楽音の発音が可能な携帯用端末装置及び楽音情報を記憶している楽音情報源から成る楽音情報利用システムにおいて、楽音情報源に記憶されている楽音情報を携帯用端末装置内に取り込む情報取込み手段と、取り込まれた楽音情報を編集する情報編集手段と、編集された楽音情報に基づいて、所定の音色乃至効果が与えられた楽音信号を生成する発音制御装置とを具備するもの。
【0024】
(7)演奏情報と演奏の進行に対応する歌詞情報とを記憶する記憶手段と、記憶された演奏情報に基づき、楽音信号を順次生成する発音手段と、記憶された歌詞情報に基づき、生成される楽音信号に対応する歌詞表示信号を生成する表示手段とを具備する携帯用端末装置。
【0025】
(8)第1演奏情報、第2演奏情報及び第2演奏情報の演奏進行に対応する歌詞情報を記憶する記憶手段と、第1演奏情報及び第2演奏情報に基づき、それぞれ、第1楽音信号及び第2楽音信号を生成する発音制御装置と、歌詞情報に基づき、第2楽音信号に対応する歌詞表示信号を生成する表示手段と、第2楽音信号の生成に優先して第1楽音信号を生成するよう発音制御装置を制御する制御手段とを具備する携帯用端末装置。
【0026】
上記(1)の構成では、楽音の発音が可能な携帯用端末装置において、音色に関する設定情報に基づいて設定される音色が与えられ演奏情報に対応する楽音信号を生成し、この楽音信号に対して、効果に関する設定情報に基づいて設定される効果を付与するようにした発音制御装置を備えているので、FM音源等を利用して複数音を同時に発音させて、着信時のメロディ音、通話中のBGM音、任意の必要時に楽しむ音楽等を豊かで多彩なものとすることができる。
【0027】
上記(2)の構成では、所定の音色をもち所定の効果が付与された楽音信号を生成するのに、携帯用端末装置とは独立して動作する制御手段(CPU)を用いているので、携帯用端末装置本体の制御に拘束されず、余裕のある楽音信号生成処理を行うことができる。
【0028】
上記(3)の構成では、楽音情報に基づいて、楽音情報に含まれる設定情報に対応する所定の音色乃至効果が与えられた楽音信号を生成すると共に、音声情報及び画像情報に基づいて音声信号及び画像信号を生成するようにしているので、再生される楽音と共に音声や画像を併用して多様な態様で楽しむことができる。また、記憶手段の記憶容量に対応して、汎用楽音情報フォーマットに比べてダウンサイジングされたフォーマットにて記述されている楽音情報を用いて楽音信号を生成するようにしているので、携帯用端末装置のデータ処理機能及び容量の許容最大限の範囲内において、つまり、装置内のメモリを圧迫しないで、良質の楽音を再生することができる。
【0029】
上記(4)の構成では、携帯用端末装置及び楽音情報源を有する基地局(サーバ)により楽音情報利用システムを形成し、携帯用端末装置から送信される選択情報に応じて、対応する楽音情報を楽音情報源から選択し、選択された楽音情報について、携帯用端末装置で発音される楽音に与える音色乃至効果を表わす設定情報を付与し、設定情報が付与された楽音情報に基づいて、所定の音色乃至効果が与えられた楽音信号を生成するようにしている。従って、サーバのデータベースを有効に利用し、より豊かで多彩な楽音を得ることができる。このシステムは、さらに、選択情報を送信した携帯用端末装置に対して課金作業を行うことにより、特定の携帯用端末装置ユーザに対して相応するサービスを提供することができる。
【0030】
上記(5)の構成では、パーソナルコンピュータ端末或いはインテリジェントな電子楽器のような楽音情報処理装置と共に楽音情報を利用し、楽音情報処理装置において、所望の形態の楽音情報を作成又は編集し、携帯用端末装置の処理機能に応じたサイズに圧縮するようにしているので、携帯用端末装置の能力に合った楽音情報の音色や効果等の設定、編集、作成等を容易に行うことができる。
【0031】
上記(6)の構成では、外部記憶媒体や他の電話機端末のような楽音情報源に記憶されている楽音情報を携帯用端末装置内に取り込み、取り込まれた楽音情報を編集するようにしているので、種々の形態の楽音情報を携帯用端末装置の処理能力やそのユーザの好みに適した楽音情報に加工することができる。
【0032】
要するに、これらの構成によれば、携帯用端末装置内の発音制御装置に複数音同時発音可能な音源回路を設け、楽音発音に関する設定情報情報に基づいて音色や効果等を楽音に付与するようにしているので、着信時のメロディや通話中のBGM等として、さらには、ユーザの必要に応じて随時楽しむ音楽として、多彩且つ音感豊かな楽曲を再生することができる。また、楽音情報を含む各種情報は、基地局、パーソナルコンピュータ端末、他の電話機端末、小型記憶媒体等の外部情報源から任意に取り込むことができ、拡張性が高くなるので、広範囲且つ多様な楽曲を着信メロディやBGM等として再生することができる。
【0033】
また、携帯用端末装置に取り込む情報は、楽音発音に関する設定情報を添付したり、端末装置の記憶容量に合うように必要でない情報を削除して情報圧縮したり、自機種つまり端末装置自体で利用可能なフォーマットに変換することにより、端末装置で使用可能な形態に変換することができるので、拡張性を一層高めることができる。さらに、編集手段の採用により、各種設定に関する情報が添付された楽音情報を、情報量のダウンサイジングを図りつつ、容易に取得することができる。
【0034】
上記(7)の構成では、演奏情報と演奏の進行に対応する歌詞情報とを記録しておき、演奏情報に基づいて楽音信号を順次生成すると共に、歌詞情報に基づいて、生成される楽音信号に対応する歌詞表示信号を生成するようにしているので、携帯電話のような携帯用端末装置でカラオケを楽しむことができ、また、暇な時間に歌詞を表示させて、歌詞を覚えるなど、カラオケ練習に有効に利用できる。
【0035】
上記(8)の構成では、第1演奏情報、第2演奏情報及び第2演奏情報の演奏進行に対応する歌詞情報を記憶しておき、第2演奏情報に基づき第2楽音信号を生成し、歌詞情報に基づいて、第2楽音信号に対応する歌詞表示信号を生成してカラオケ再生を可能とすると共に、カラオケ再生に優先して第1演奏情報に基づく第1楽音信号を生成するようにしているので、カラオケ再生から、第1楽音信号による着信メロディ再生に自動切換することができ、しかも、歌詞表示が邪魔になるというようなことがない。
【0036】
【発明の実施の形態】
以下、図面を参照しつつ、この発明の好適な実施例について詳述する。なお、以下の実施例は、単なる一例であって、この発明の精神を逸脱しない範囲で種々の変更が可能である。
【0037】
〔端末システムの概要〕
図1は、この発明の一実施例による発音制御装置が適用される携帯用電話機端末の基本的構成を表わす概略ブロック図である。端末システムTSは、端末システム用中央処理装置(本体CPU)1、端末システム用読出専用メモリ(本体ROM)2、端末システム用ランダムアクセスメモリ(本体RAM)3、検出回路4、表示回路5、送受信回路6、オーディオ制御回路7、発音制御回路8、接続回路9、通信インターフェイス(I/F)10等を備え、これらの装置1〜10は、端末システム用バス(本体BUS)11を介して互いに接続される。
【0038】
この端末システムTSにおいては、端末システム全体を制御する本体CPU1は、所定のプログラムに従って、通話制御、画面制御、発音制御等、種々の制御を行う。本体ROM2には、これらの処理を遂行するために、所定の制御プログラムや制御用データが記憶されている。例えば、楽音に関しては、着信時のメロディや通話中のバックグラウンドミュージック(BGM)等を鳴らすための楽曲情報、演奏情報、設定情報、情報形式変換用の変換テーブル、情報圧縮用の圧縮テーブルをそれぞれ複数記録しており、楽音以外に関しては、所定の音声情報や画像情報等を設定情報として予め記録している。なお、設定情報とは、端末システムTSにおいて着信時、通話中或いは必要に応じた任意の時間に音響の放音又は画像の表示に関する処理を実行する条件として設定される情報をいう。この設定情報には、楽音の音色や効果(DSPを含む)に関する楽音関連の設定情報の外、音声情報、画像情報、音声及び画像の制御情報等がある。
【0039】
本体RAM3は、これらの通話制御、画面制御、発音制御等の処理に際して必要なデータやパラメータ等を記憶するために用いられ、端末システムTSに追加的に導入される或いは端末システムTS内で新規に作成される複数の楽曲情報、演奏情報、設定情報を記憶することができる。
【0040】
検出回路4は、携帯用電話機端末の本体表面に設けられた押しボタンスイッチ等から成る操作子12を備え、操作子12のスイッチ操作状態を検出する。これらのスイッチには、通話時に使用される通話スイッチ、着信メロディのダウンロード要求スイッチ、発音制御回路8(音源/効果回路)の設定スイッチ、各種情報の作成/編集スイッチ等が含まれる。また、表示回路5には表示部13が接続され、表示部13の液晶画面上には、各種通話情報や、発音制御に関係する各種メロディ情報等、各種視認情報を表示することができる。
【0041】
送受信回路6は、通信アンテナを備え、基地局(サーバ局又は中継局ともいう。)を介して他の電話機端末と交信し通話するための回路であり、楽曲情報や設定情報の要求や受取りにも用いられる。一方、オーディオ制御回路7は、通話時の音声信号や、楽音の入出力信号を制御するために設けられた回路であり、マイクロフォン(MIC)14からの入力音声を送受信回路6に送信する音声送信機能や、送受信回路6で受信した通話音声信号を通話用スピーカ15及び外部出力端子16に送出する音声再生機能のほか、発音制御回路8から受信する楽音信号を通話用スピーカ15及び出力端子16に送出するBGM再生機能等を有している。
【0042】
発音制御回路8は、着信メロディ音やBGM音等の楽音信号を制御するための一連の処理を独自に行う回路で、複数音を同時に発音することが可能である。つまり、楽音信号を合成して発音用スピーカ17やオーディオ制御回路7に送信することにより、着信メロディやBGM等の楽音を発音させる機能を有している。発音制御回路8は、また、ディジタル楽音信号を他のディジタル楽音信号利用機器に送信するためのディジタル出力端子18を備えている。なお、発音用スピーカ17は、通話用スピーカ15と兼用にして1つにまとめる構成にすることができる。
【0043】
接続回路9は、可搬式の着脱可能小型記憶媒体19を装着するための回路であり、装着された小型記憶媒体19から楽曲情報を含む各種情報を取り込むことができ、逆に、記憶媒体19に情報を書き込むこともできる。また、通信I/F10は、外部装置とのケーブル接続用端子を備え、この端子に接続される通信ケーブル20を介して、他の電話機端末やパーソナルコンピュータ(PC)端末と交信し、楽曲情報を含む各種情報を、これらの装置から端末システムTSに取り込んだり、端末システムTSからこれらの装置に授与することができる。
【0044】
小型記憶媒体19には、通信ケーブル20及び通信I/F10を介して他の電話機端末やパーソナルコンピュータ端末から受信した楽曲情報や設定情報を記憶したり、送受信回路6を介してサーバ(BS)から受信した楽曲情報や設定情報を記憶しておくことができる。或いは、自携帯用端末装置TSを用いて、自動作曲又は自動編曲した楽曲情報を記憶しておくこともできる。また、記憶した楽曲情報や設定情報を読み出し、着信メロディやBGM等として発音させる。
【0045】
〔発音制御回路(1)〕
図2は、この発明の一実施例による発音制御回路の詳細な構成を表わすブロック図である。この例では、発音制御回路8は、回路内にCPUを備えておらず、携帯用電話機端末(端末システムTS)本体に装備されている本体CPU1により動作制御される。発音制御回路8は、システムBUS11に接続されるバス接続経路を介して、楽曲情報、演奏情報、設定情報やその他情報(再生開始/停止等)を送受信する。
【0046】
制御回路21は、上述のバス接続経路を介して、端末システムTS本体との双方向情報通信を行なうことができる。本体側で予め用意されたり或いは外部から受信された演奏情報や設定情報は、本体ROM2或いは本体RAM3に記録乃至格納されているが、制御回路21により、演奏情報は先入れ先出しメモリ(FIFO)22に記憶し、音色及び効果に関する設定情報は音色/効果RAM23に記憶することができる。この場合、FIFO22及びRAM23に記憶される演奏情報及び設定情報は、1楽曲情報分の全部或いは一部である。
【0047】
制御回路21は、また、本体側より指定された設定音色及び設定効果に基づいて、音色/効果RAM23内の音色設定情報及び効果設定情報(DSPプログラムを含む)を読み出し、音源回路24及び効果回路25における音色及び効果を設定する。制御回路21は、さらに、FIFO22や音色/効果RAM23の記憶許容量の限界を本体に連絡し、本体側からの情報通信の一時停止を要求する機能を有している。
【0048】
FIFO22及び読出回路26は、本体ROM2乃至本体RAM3から受信した演奏情報を、順次、音源回路に送信する演奏情報供給制御装置として機能する。すなわち、FIFO22は、受信した演奏情報を受信順に一時記憶し、読出回路26は、所定時間毎にFIFO22にアクセスし、情報があればそれを順次続み出して音源回路24に出力する。
【0049】
音源回路24は、例えば、FM音源であり、複数音を同時に発音することが可能である。音源回路24は、音色/効果RAM23から受信した音色に関する設定情報に基づき発音すべき音色を設定すると共に、読出回路26から受信した演奏情報に基づき、設定されている音色に対応する楽音信号を順次合成してミキサ(MIX)27に出力する。
【0050】
効果回路25は、音色/効果RAM23から受信した効果に関する設定情報に基づいて、付与すべきリバーブ等の効果を設定する回路であり、設定された効果をMIX27から入力される信号にDSPプログラムに従って付与し、効果を付与した後の信号を再びMIX27に出力する。
【0051】
MIX27には、端末システムTS本体のオーディオ制御回路7との接続経路を介して、通話音がディジタル信号で入力される。MIX27は、音源回路24、効果回路25及びオーディオ制御回路から入力される諸信号を合計する。すなわち、MIX27への入力信号には、
(1)音源回路24からの合成楽音信号SM、
(2)オーディオ制御回路7からの通話音信号ST、
(3)効果回路25からの効果付与後信号SE
の三種類がある。
【0052】
ここで、入力信号SM,STは、MIX27から効果回路25に選択的に出力されて効果が付与されるが、このように効果付与のために出力される信号SM,STは、端末システムTS本体の操作子12中の所定のスイッチを操作することにより選択的に設定される。そして、MIX27は、合成した全信号を、デジタルアナログ変換回路(DAC)28に出力すると共に、デジタル出力端子18を介してディジタル信号で出力することができる。
【0053】
DAC28、振幅制御回路(VOL)29及び増幅回路(AMP)30は、アナログ出力装置を構成する。DAC28から出力されるアナログ楽音信号は、音量がVOL29により調整され、ヘッドフォン端子を介して端末システムTS本体のオーディオ制御回路7に出力され、或いは、AMP30を介して発音用スピーカ17に送信されて楽音として放音される。すなわち、合成された全信号は、VOL29からアナログ信号でオーディオ制御回路7側に出力され、AMP30からもアナログ信号にてスピーカ17に供給され楽音として放音される。
【0054】
〔発音制御回路(2)〕
図3は、この発明の他の実施例による発音制御回路の詳細な構成を表わすブロック図を示す。この例では、発音制御回路8は、回路内に発音制御CPU31を備え、本体CPU1から独立して発音制御回路8の動作を制御することができる。発音制御CPU31、通信回路32、タイマ33、発音制御ROM34、発音制御RAM35、音源回路36、効果回路37、ミキサ回路(MIX)38、振幅制御回路(VOL)39等を備え、これらの装置31〜39は、発音制御回路用バス(発音制御BUS)40を介して互いに接続される。
【0055】
通信回路32は、次の2つの通信機能を有している:
(1)「本体BUS11との間で情報の双方向通信を行う」=本体BUS11及び通信回路32を経由して端末システムTSの外部から受信した楽曲情報、演奏情報、設定情報等を発音制御RAM35に記録する(なお、発音制御ROM34には、発音制御のための各種テーブル等が記録されている。)。また、音色や効果等の選択、パラメータ変更、再生する楽曲情報の選択等に関する各情報(本体操作子の操作情報)を受信する。なお、受信した情報は、発音制御CPU31の動作で解釈され、各情報に合わせた処理、例えば選択された音色に関する設定を音源回路36に対して行う(ROM34或いはRAM35から選択された音色に対応する設定情報を読み出して、音源回路36に出力する)等の処理が実施される。
【0056】
また、本体操作子の操作により、発音制御回路内の発音制御ROM34或いは発音制御RAM35内に記録されている楽曲情報や設定情報のエディットが指示された場合には、ROM34或いはRAM35から、操作に対応する(選択された)情報を読み出し、本体RAM3に送信する(エディット処理は本体RAM3を使用して行われ、エディット処理が終了した時点で、再び発音制御回路内のRAM35に情報が上書きされる)。
【0057】
(2)「オーディオ制御回路7と情報の双方向通信を行う」=発音制御回路8の内部で合成した楽音信号等をオーディオ制御回路7に送信したり、オーディオ制御回路7から受信した通話音信号等の信号を発音制御回路8内で加工したり、また、加工した信号を再びオーディオ制御回路7へ送信したりする等の処理を行う。上述の加工には、例えば、通話音への効果付与処理や通話音声の音高/音色変換処理がある。
【0058】
発音制御CPU31は、端末システムTS本体から独立して、発音制御回路8内の動作を制御し、タイマ33から発生される信号に基づいて、発音制御ROM34や発音制御RAM35内に記憶されている演奏情報を順次読み出すことにより、着信メロディやBGM等の楽音を再生する。発音制御CPU31は、また、発音制御ROM34や発音制御RAM35内の設定情報を発音制御BUS40を介して音源回路36や効果回路37等に送信して再生させ、さらに、楽音の音色や付与効果の設定を制御することもできる。なお、このように楽音の演奏を開始させたり終了させたりする処理は、本体の操作子12を利用した指示操作に基づき起動される。
【0059】
タイマ33は、所定時間毎に信号を発生する。ここで発生される信号に基づいて着信メロディ音やBGM音等の楽音の発音タイミングを制御し、発生楽音の演奏テンポを決定する。このテンポはユーザによる制御が可能である。
【0060】
テンポ制御の仕方はどのようなものでもよい。例えば、設定されたテンポに応じてタイマ33から発生される信号の周期を変更する(即ち、楽曲情報の処理周期を変更する)方法、処理周期(タイマ33からの信号の周期)を一定とし楽曲情報中のタイミングデータの値を設定されたテンポに応じて変更する方法、処理周期(タイマ33からの信号の周期)を一定とし1回の処理において楽曲情報中のタイミングデータの計数の仕方をテンポに応じて変更する方法などがある。なお、ユーザによるテンポの指定は、テンポ絶対値の数値(“120”や“150”等)による指定、テンポ標語(「アレグロ」、「モデラート」等)による指定、基準テンポからの変更〔パーセント(%)や増減値(±)〕の指定、感覚的な用語(「速い」、「遅い」、「中くらい」等)による指定などがある。これらは本体の操作子12を利用して指定される。
【0061】
発音制御ROM34は、着信メロデイ用やBGM用等の所定の楽曲情報、演奏情報、設定情報、情報形式変換用の変換テーブル、情報圧縮用の圧縮テーブルをそれぞれ複数記憶しており、発音制御RAM35は、追加された或いは新規に作成された複数の楽曲情報、演奏情報、設定情報を記憶することができる。
【0062】
音源回路36は、この例では、FM音源であり、複数音の同時発音が可能である。発音制御ROM34や発音制御RAM35から発音制御BUS40を介して送信される音色に関する設定情報に基づいて発音音色を設定する。音源回路36は、また、発音制御CPU31およびタイマ33の制御により、発音制御ROM34や発音制御RAM35から送信される演奏情報に基づいて、設定されている音色に対応する楽音信号を順次合成し、MIX38に出力する。
【0063】
効果回路37は、発音制御ROM34や発音制御RAM35から発音制御BUS40を介して送信される効果に関する設定情報に基づいて、楽音に付与する効果を設定する。効果回路37は、また、MIX38から入力される信号および通信回路32から入力される通話音信号ST等に対して効果を付与し、付与した後の信号SEを再びMIX38に出力する。
【0064】
MIX38は、入力される信号を合計し、デジタルアナログ変換回路(DAC)41及びディジタル出力端子18に出力する。MIX38に入力される信号には、
(1)音源回路36からの合成楽音信号SM、
(2)オーディオ制御回路7からの通話音信号ST、
(3)効果回路37からの効果付与後信号SE
などがある。MIX38は、効果付与のために、入力信号SM,STを選択的に効果回路37に出力し、この出力信号は端末システムTS本体側の操作子12の所定スイッチの操作により設定される。
【0065】
振幅制御回路(VOL)39及び増幅回路(AMP)42はアナログ出力装置を構成し、DAC41から出力されるアナログ楽音信号の音量はVOL39により調整され、音量調整されたアナログ楽音信号は、ヘッドフォン端子からオーディオ制御回路7へ出力されると共に、更に、AMP42を介して発音用スピーカ17に送信される。
【0066】
〔端末システムの使用環境〕
図4は、この発明の一実施例による携帯用電話機端末の使用環境の一例を表わす概念図である。第1環境では、ユーザが使用する携帯用電話機端末(端末システム)TSから送受信回路6を介して基地局(サーバ局)BSに通話を行い、所望の楽曲情報等を選曲しその送信を要求すると、対応する楽曲情報等が基地局BSから送信され、端末システムTS内にダウンロードし、この情報を利用して着信時のメロディ音や通話中のBGM音等を発音させることができる。
【0067】
第2環境においては、端末システムTSは、通信I/F10に接続される通信ケーブル20を介してパーソナルコンピュータ端末PCで作成された楽曲情報等を受信し、これをメロディやBGM等として利用することができる。
【0068】
また、端末システムTSは、第3環境では、接続回路9に装着される小型の外部記録媒体19に記録されている楽曲情報等を記録媒体19から導入し、また、第4環境では、他の電話機端末OSから、基地局BSを経由して電話回線及び送受信回路6を介して、或いは、通信ケーブル20及び通信I/F10を介して、他の電話機端末OSの楽曲情報等を受信し、これらの情報を楽音発音に利用することができる。
【0069】
基地局BS、パーソナルコンピュータ端末PC、外部記憶媒体19又は他の電話機端末OS等の楽曲情報源から、端末システムTSに導入される楽曲情報は、情報源BS,PCやシステムTS内での編集、圧縮、形式変換等によって、使用可能な形態にダウンサイジングされる。
【0070】
例えば、これらの楽曲情報源から端末システムTS内に導入される楽曲情報(演奏情報及び設定情報を含む。)は、自機種に合ったフォーマットの場合もあり別のフォーマットの場合もある。自機種に合ったフォーマットが導入される場合は、予めこのフォーマットで作成されているか、或いは、別のフォーマットからフォーマット変換(形式変換)されたものであり、この形式変換は、基地局BS或いはパーソナルコンピュータ端末PC内にて行われる。また、別のフォーマットが端末システムTSに導入される場合には、端末システムTS内において、別のフォーマットを端末システムTSでのフォーマットに変換する。
【0071】
〔情報フォーマット〕
図5は、この発明の一実施例による携帯用電話機端末における自機種の情報フォーマットの例を示す。この携帯用電話機端末システムTS及びこの端末システムTSと同じフォーマットで情報処理を行う同一機種の他の電話機端末において取扱いが可能な「自機種対応の楽曲情報IA」は、図5に示すように、音色/効果を設定する設定情報SAと楽音演奏用の演奏情報MAとから構成される。各情報SA,MAは、端末システム内メモリ(RAM3)の記憶容量を圧迫せず、しかも、よりよい楽音の発音を実現することができるように、必要最小限の情報のみを記録したものであり、端末システムTS内では、これらの情報に従って発音制御が行われる。以下、このタイプの情報フォーマットを「自機種フォーマットA」という。
【0072】
設定情報SAは、音色に関して、
(1)音色種類を識別するための音色ナンバNA、
(2)音源回路における音色を設定するための詳細な情報(音色パラメータ)DA
を含んでいる。(2)の音色パラメータDAには、アルゴリズムデータAA、周波数パラメータ(Fパラメータ)FA、エンベロープパラメータ(EGパラメータ)EA等がある。
【0073】
アルゴリスムデータAAは、FM音源における複数のオペレータ〔サイン波メモリ+アウトプットレベル演算器+エンベロープ(EG)波形合成器のセット〕の組合せ即ちアルゴリズムを決定するためのパラメータであり、FパラメータFAは、各オペレータ毎の、読出サイン波の周波数を決定するためのパラメータであり、EGパラメータEAは、エンベロープ波形(EG波形)を合成するための複数のレベル値及びレート値を設定するためのパラメータである。
【0074】
また、設定情報SAには、このような音色設定用の情報NA,DA以外に、効果パラメータを設定する情報、効果回路25の内容を決定する効果プログラム(DSPプログラム)、音声情報、画像情報等がある。
【0075】
演奏情報MAは、タイミングデータTM、キーナンバKN、ゲートタイムGT等から成る演奏を行うための情報を演奏順に記録したものであり、複数同時発音可能な演奏情報が記録されている。
【0076】
図6は、他機種の携帯用電話機端末における従来形の情報フォーマットの例を示す。携帯用電話機端末において着信メロディ用情報として用いられている従来タイプの楽曲情報IBは、図6に示すように、記号a,b,c,…からなる記号列で表わされる演奏情報のみであり、設定情報は存在しない。以下、このタイプの情報フォーマットを「従来形フォーマットB」という。
【0077】
他機種の演奏情報IBは、より詳細にいうと、所定の規則に従って、楽曲の演奏順に携帯用電話機端末に装備されているテンキーで入力可能な記号(#、1、2、3、…)を並べたものである。例えば、数字の「1」は“ド”の音高に、数字の「2」は“レ”の音高に、…、相当するものとし、これらの数字の連続数に応じて発音音長を規定する。従って、記号列a,b,c,…により「1−1−2−1−1−…」が表わされる場合、この記号列は、“ド”を4分音符長発音させたのち、“レ”を8分音符長発音させ、その後、再び“ド”を4分音符長発音させる楽音を表わす。
【0078】
図7は、従来より電子楽器等で使用されている汎用の楽音情報フォーマツトの例を示す。従来の電子楽器等では、汎用楽音情報フォーマツト〔“SMF”(Standard MIDI File)フォーマット〕に沿って、図7に示すように、音色/効果を設定するための設定情報SCと楽音演奏用の演奏情報MCとから構成される楽音情報ICが使用されている。以下、このタイプの情報フォーマットを「SMFフォーマットC」という。
【0079】
設定情報SCのうち音色を設定するための情報は、
(1)音色識別情報としての音色ナンバNC、
(2)音色設定用詳細情報(音色パラメータ)DC
から構成されている。
【0080】
(2)の音色設定用詳細情報DCは、図7にも示すように、端末システムTS用の音色パラメータDAとは異なり、情報量が多い。例えば、アルゴリズムデータACやFパラメータFCの外に、発音する音高によってEGのレベルを制御するレートスケールデータRSが記憶されていたり、EGパラメータECについても、その内容がより詳細な情報を含んでおり、図5の自機種フォーマットAにおける設定情報SA中のEGパラメータEAよりも、レベル値及びレート値の数が多い。なお、このような詳細情報DC中の過多情報は、端末システムTSを含むシステム内において、SMFフォーマツトCから自機種フォーマットAに形式変換する際に、端末システムTSにおいては必要不可欠でない情報として、圧縮(削除)されることになる。
【0081】
演奏情報MCは、「デュレーションDR+イベントIV」形式の情報であり、キーオン、キーオフイベントがそれぞれデュレーションデータDRと共に記憶されるので、情報量がやや多くなっている。また、各キーオン毎にベロシティデータが記録されるが、このベロシティデータも自機種フォーマットAへの形式変換の際に圧縮(削除)される。
【0082】
なお、図7の楽曲情報IC及び図5の楽曲情報IAは、1パート構成として記載されているが、これは説明上の都合によるものであり、楽曲情報IC及びIAは複数パート構成であることが通常である。その場合には、全パートに対して設定情報が1つのみ記録されていてもよい。
【0083】
〔基地局との情報授受〕
図8及び図9は、この発明の一実施例による端末システム及び基地局から成る第1システムにおける情報授受関係を表わす機能的ブロック図を示す。この発明では、自端末即ち携帯用電話機端末システムTSは基地局BSから楽曲情報や設定情報を受信するが、これらの情報は、情報要求時に基地局BS側で必要に応じて形式変換され、受信時には端末システムTSにおいて利用可能な情報とされている。
【0084】
まず、端末システムTSは、要求情報送信モジュール(S1)により、送受信回路6を介して基地局(サーバ局)BSに電話をし、所定の指示に従ってサーバ局BSのデータベースDB内の情報に対してダウンロードを要求する。具体的には、例えば、サーバ局BSとの通話中、データベースDBに蓄積されている楽曲情報、演奏情報、設定情報等が自端末システムTSの表示部13に順次表示されるので、操作子12を用いて、これらの情報の何れかに対応する番号をキー入力し、且つ、要求決定操作を行うことによって、要求するダウンロード対象情報を表わす選択情報と自端末システムTSの機種・機番及び端末システムTSの音源回路24に装備されている音源の種類を表わす識別情報をサーバ局BSに送信する。
【0085】
サーバ局BSにおいては、端末システムTSから要求情報が送信されたことに応答して、選択読出モジュール(B1)により、データベースDBから要求情報に対応する楽曲情報等が選択的に読み出され、読み出された演奏情報等のフォーマット種類を判断モジュール(図示省略)により判断する。この判断とは、具体的には、読み出された情報に添付されているフォーマット種類情報(図示を省略しているが、その情報のフォーマット種類を表す情報のことである。)の内容を確認することによりフォーマット種類を判断するか、或いは、フォーマット種類情報が添付されていない場合には、読み出された情報の内容からフォーマット種類を判断する、という処理である。そして、この判断の結果、読み出された情報のフォーマット種類が、自機種フォーマットAの場合は、フォーマット変換(形式変換)が不要なので、直ちに課金モジュール(B2)に手渡される。一方、読み出された演奏情報等が従来形フォーマツトBのように自機種と異なるフォーマットの場合には、設定情報添付モジュール(B3)及び形式変換モジュール(B4)を介して課金モジュール(B2)に手渡される。
【0086】
設定情報添付モジュール(B3)においては、読み出された自機種と異なるフォーマットの演奏情報が、例えば、従来形フォーマットBの情報のように、設定情報をもたないものであれば、設定情報を添付する。この設定情報添付により、設定情報をもたない他機種の演奏情報であっても、端末システムTSにおいて、音源機能を活かして効果的な音色/効果を付与した楽音再生を行うことができるようになる。設定情報添付方法には、
(1)予め決められた設定情報を添付する、
(2)ユーザ選択の設定情報を添付する、
(3)演奏情報に馴染む設定情報を自動検出して添付する
等の方法がある。
【0087】
設定情報が添付された演奏情報は、形式変換モジュール(B4)に手渡され、予め用意されている変換テーブルTBを利用して、自機種フォーマットAへの形式変換が自動的に行われる。この変換テーブルTBは、形式変換前及び形式変換後のフォーマット組合せ毎に用意され、例えば、従来形フォーマットBから自機種フォーマットAへの変換規則を記述しているテーブルであり、演奏情報を別機種フォーマット(B)から自機種フォーマットAに形式変換を行う。
【0088】
なお、他機種のフォーマットには、図9には例示されていないが、従来形フォーマットBの外にSMFフォーマツトC等の場合もあり、例えば、SMFフォーマツトCの情報が読み出された場合は、変換テーブルTB内のSMFフォーマツトCから自機種フォーマットAへの変換規則を用いて形式変換を行う。従って、このような形式変換機能により、要求した情報が他機種(B,C等)のものであっても、自端末システムTSで発音可能な楽曲情報IAに変換され、端末システムTSでの使用を可能にする。
【0089】
また、SMFフォーマットCから自機種フォーマツトAへの変換などの場合には、ここに記載されている形式変換の処理前に、後述する図10の情報圧縮モジュール(P4)と同様の処理により情報圧縮を行うことも可能である。
【0090】
その後、課金モジュール(B2)においては、ダウンロードに対する課金作業が行われる。この作業においては、端末システムTSから送信された識別情報(端末の機種・機番、音源種類)を参照することにより、特定の機種あるいは特定の音源装置(サーバ局等と特定契約が結ばれている機種や音源装置)を装備した端末であることが認識された場合に、課金金額を割り引きするように構成することができる。
【0091】
サーバ局BSは、課金作業の後、情報送信モジュール(B5)により、端末システムTSからの選択情報に対応する自機種フォーマットAの楽曲情報や設定情報をシステムTS側に送信する。
【0092】
これに対して、端末システムTSでは、情報受信モジュール(S2)により、サーバ局BSから送受信回路6を介して楽曲情報や設定情報を受信しダウンロードし、ダウンロードした情報は本体RAM3に記憶される。ここで、要求情報送信モジュール(S1)により要求してから、要求に対応する情報が基地局BSから送信され終わるまでの間、端末システムTSは、通話状態であってもよい。また、要求情報送信後に一旦通話を解除し、その後の通話処理(電子メールや基地局BSからの返信通話)により要求した情報を受信するようにしてもよい。
【0093】
そして、設定モジュール(S3)においては、ユーザの設定操作により、受信した楽曲情報に基づく着信メロディ発音が可能な状態に設定を行う。また、受信した情報は、通話時のBGMや随時の音楽等として再生するように設定することもできる。
【0094】
なお、受信した楽曲情報や設定情報が受信後すぐに着信メロディ音やBGM音として自動設定されてもよいし、受信時に(受信情報を確認する意味を含めて)、受信した情報に対応する楽曲が再生されるように構成するとよい。
【0095】
これまで説明してきたシステムでは、基地局BS側において楽曲情報、演奏情報、設定情報に対する設定情報添付や形式変換(および情報圧縮)を行うように構成しているが、後述する図11における端末システムTSにおける処理のように、端末システムTS側で設定情報添付、形式変換、情報圧縮を行うようにしてもよい。
【0096】
〔パーソナルコンピュータとの情報授受〕
図10は、この発明の一実施例による端末システム及びパーソナルコンピュータから成る第2システムにおける情報授受関係を表わす機能的ブロック図を示す。この発明では、自端末即ち携帯用電話機端末システムTSは、パーソナルコンピュータ端末PC上で作成した楽曲情報や設定情報を受信し、これらの情報を利用することができる。楽曲情報や設定情報は、任意のフォーマットで作成することができる。例えば、操作性が良いという理由のため、従来のSMFフォーマットCに従って作成することができ、このように自機種フォーマットAと異なるフォーマットで楽曲情報や設定情報が作成された場合は、送信時にパーソナルコンピュータ端末PC上で自機種フォーマットAへのフォーマット変換(形式変換)が行われる。
【0097】
パーソナルコンピュータ端末PCにおいて、インストールされている所定のソフトウエアを利用し、選択読出モジュール(P1)により、SMFフォーマットC又は自機種フォーマットAで情報が記録されているコンピュータ端末PC内のデータベースDPから、着信メロディやBGM等として使用したい楽曲情報や設定情報を選択すると、これに応じて、情報編集モジュール(P2)により、選択した楽曲情報や設定情報を編集できるようになる。この編集作業としては、例えば、設定情報内の音色パラメータや効果パラメータを変更又は追加したり、楽曲情報内の演奏情報から着信メロディやBGM等として使用したい部分を選択して切り出したり、選択した楽曲情報を端末システムTS側で発音されるのと同じ設定にて、つまり、圧縮された設定情報に基づく音色や効果等の設定状態における「試し発音」を行う、などがある。
【0098】
なお、パーソナルコンピュータ端末PCのデータベースDPには、SMFフォーマットCや自機種フォーマットAの情報以外に、図6の従来形フォーマットBなどの情報が記録されていてもよく、それらの情報についても上記と同様の情報編集や、図9における設定情報添付、情報圧縮、形式変換ができるように構成することが好ましい。
【0099】
一方、パーソナルコンピュータ端末PC上で楽曲情報を新規に作成する場合は、例えば、コンピュータ端末PC上にインストールされている従来のSMFタイプのシーケンサソフトウエア(楽曲情報作成ソフトウエア)等を用い、新規作成モジュール(P3)により、ユーザの手入力による新規楽曲情報を作成する。ここで作成される新規楽曲情報は、例えば、SMFフォーマットCに従う楽曲情報である。
【0100】
新規作成モジュール(P3)は、また、自動作曲ソフトウエア(装置)を用いて、自動的に新規楽曲情報を作成することもできる。この場台、従来の自動作曲ソフトウエア乃至自動作曲装置を応用し、例えば、従来の自動作曲ソフトウエアで作成された1曲分の楽曲情報から、所望区間の楽曲(さびの部分等)のみを切り出す、複数トラックで構成されている楽曲情報のうち、必要最小限のトラック(メロディトラック、和音トラック等)の情報のみを切り出す、切り出した区間の楽曲情報が繰り返し再生されたときにうまく繋がるように繋がり部(区間先頭及び区間最終位置)を補正する、等々の作業を実行することができる。なお、新規作成モジュール(P3)は、さらに、着信メロディやBGM等に相当する楽曲情報を、直接、自機種フォーマットAで作成することもできる。
【0101】
情報編集モジュール(P2)からの読出乃至編集がなされた情報や新規作成モジュール(P3)で新規に作成された情報のうち、情報フォーマットがSMFフォーマットCのように自機種フォーマットAでない情報については、情報圧縮モジュール(P4)及び形式変換モジュール(P5)により、情報の圧縮及び形式変換が行われる。一方、自機種フォーマットAの情報は、直ちに情報送信モジュール(P6)に手渡される。
【0102】
自機種フォーマットAでない情報は、先ず、端末システムTSに記憶することができるように、情報圧縮モジュール(P4)により、予め用意された圧縮テーブルTEを使用してその内容が圧縮される。この圧縮テーブルTEは、圧縮前及び圧縮後のフォーマット組合せ毎に用意され、所定の情報圧縮規則を記述している。この情報圧縮規則に基づく処理の具体例としては、既に説明したSMFフォーマットC(図7参照)のレートスケールRSやEGパラメータEC中の過多情報のような不要情報を、自機種フォーマットAへの変換時に削減する処理の他に、複数トラック(パート)構成の演奏情報から必要なトラック(メロディトラック及び和音トラックのみ等)の演奏情報を取り出したり、演奏情報中の装飾音を削除したり、演奏情報中のピッチベンドデータを音高データに変更する、等の処理がある。
【0103】
圧縮された情報は、さらに、次の形式変換モジュール(P5)により、図8及び図9の実施例(第1システム)における形式変換モジュール(B4)と同様に、変換テーブルTCを用い、例えば、SMFフォーマツトCから自機種フォーマットAへの形式変換がなされる。
【0104】
元々自機種フォーマットAであるモジュール(P2,P3)からの楽曲情報乃至設定情報、及び、自機種フォーマットAに圧縮・変換されたモジュール(P5)からの楽曲情報乃至設定情報は、情報送信モジュール(P6)により、端末システムTS側に送信され、通信ケーブル20及び通信I/F10を介して端末システムTS内に送り込まれる。
【0105】
これに対して、端末システムTSでは、情報受信モジュール(T1)により、パーソナルコンピュータ端末PC側Sからの楽曲情報や設定情報が受信され本体RAM3内に記憶される。さらに、設定モジュール(T2)において、ユーザの設定操作により、受信した楽曲情報に基づく着信メロディ発音やBGM発音等が可能な状態に設定を行う。
【0106】
この情報受信モジュール(T1)および設定モジュール(T2)の処理は、前述した図8の情報受モジュール(S2)および設定モジュール(S3)の処理と同様である。
【0107】
なお、以上述べた構成ではパーソナルコンピュータ端末PC上で楽曲情報、演奏情報、設定情報の編集を行うようになっているが、これに限らず、後述する図11の情報記録/編集モジュール(U5)と同様の処理により、パーソナルコンピュータ端末PCから受信した情報(編集なしの情報)を端末システムTS側で編集できるようにすることも可能である。
【0108】
また、端末システムTSに記録されている情報を通信ケーブル20を介してパーソナルコンピュータ端末に送信し、パーソナルコンピュータ側において送信された情報を上述した内容に基づき編集するように構成することも可能である。
【0109】
〔記録媒体及び他端末との情報授受〕
図11は、この発明の一実施例による端末システム及び記録媒体乃至他の端末機から成る第3システムにおける情報授受関係を表わす機能的ブロック図を示す。この発明では、自端末即ち携帯用電話機端末システムTSは、外部記憶媒体19や他の同一機種乃至異機種の電話機端末OSa,OSbなどから受信した情報を着信メロディやBGM等に利用することができ、この場合、自端末システムTSにて、情報圧縮、フォーマット変換(形式変換)、情報編集等を行うことができる。
【0110】
また、次に詳細に説明する端末システムTSにおける情報圧縮、フォーマット変換(形式変換)、情報編集等の処理を、他の電話機端末(OSa、OSb)において実施し、自機種フォーマットAの情報を作成した後、作成された情報を端末システムTSで受信するようにすることも可能である。
【0111】
着脱可能な小型外部記憶媒体19に楽曲情報、演奏情報、設定情報等を、自機種フォーマットA或いは他のフォーマット(例えば、フォーマットB,C)で記録しておき、これらの情報が記録された記憶媒体19を自端末システムTSに装着し、所望の情報〔各情報には、その情報が何れのフォーマットで作成されいるかを表わす情報(フォーマット種類情報)が添付されている。〕を、接続回路9を介して自端末システムTS内に読み出す。この読出しに当っては、自端末システムTSの操作子12における所定スイッチを操作することによって、所望情報のみを読み出すことができる。
【0112】
他の電話機端末OSaから送信される情報は、基地局BSを経由し電話回線を介して送受信回路6から自端末システムTS内に取り込まれる。また、別の他の電話機端末OSbから送信される情報は、通信ケーブル20を介して通信I/F10から、自端末システムTS内に取り込まれる。これらの電話機端末OSa,OSbには、自機種フォーマットAと同一のフォーマット情報を使用する同一機種電話機端末である場合と、例えば、従来形フォーマットBやSMFフォーマットCのように、自機種フォーマットAとは異なる他のフォーマット情報を使用する異機種電話機端末である場合とがある。
【0113】
ここで、他の電話機端末(OSa、OSb)からの送信については、自端末システムTSにおける指示操作で他の電話機端末(OSa、OSb)に対して(所望の情報を)送信してほしい旨を連絡する構成と、他の電話機端末(OSa、OSb)における指示操作で自端末システムTSに対して(所望の情報を)受信してほしい旨を連絡する構成とがあり、何れの構成を利用してもよい。
【0114】
他の電話機端末OSa,OSbから情報を送信する場合、送信する各情報には、その情報が何れのフォーマットで作成されているかを表す情報(フォーマット種類情報)が添付されている。なお、受信側端末である自端末システムTSにおいて受信情報をリアルタイムで設定使用すること(即ち、自端末システムTSでの受信後、直ちに設定使用すること)を、情報送信側端末である他の電話機端末OSa,OSb側にて要求することができるように構成してもよい。また、基地局BSを通して情報を送信する場合、基地局BSにおいて情報圧縮や形式変換等(図9や図10における各処理と同様)を行ったのちに受信側端末(自端末)に情報を送信するように構成することもできる。
【0115】
情報受信/読取モジュール(U1)は、上述のように、外部記憶媒体19から楽曲情報、演奏情報、設定情報等を読み出したり、他の電話機端末OSa,OSbから送信される同様の諸情報を取り込むと共に、図9の選択読出モジュール(B1)の動作説明において述べた処理と同様に、読み出し或いは取り込まれた情報のフォーマット種類を判断モジュール(図示省略)により判断する。そして、この判断の結果、読み出された情報或いは受信した情報のうち、従来形フォーマットB或いはSMFフォーマットC等の情報は、設定情報添付モジュール(U2)、情報圧縮モジュール(U3)及び形式変換モジュール(U4)の系列を介して圧縮・変換した後、情報記録/編集モジュール(U5)に手渡し、自機種フォーマットAの情報は、そのまま、情報記録/編集モジュール(U5)に手渡す。
【0116】
設定情報添付モジュール(U2)、情報圧縮モジュール(U3)及び形式変換モジュール(U4)は、基本的に、図8及び図9の実施例(第1システム)並びに図10の実施例(第2システム)における設定情報添付モジュール(B3)、情報圧縮モジュール(P4)及び形式変換モジュール(B4,P5)による設定情報添付、情報圧縮及び形式変換処理と同様の処理を行う。設定情報添付モジュール(U2)による設定情報添付、従来形フォーマットBの情報のように、設定情報が添付されていない情報についてのみ実行される。このような情報圧縮及び形式変換処理は、一旦、全情報を受信して自端末システムTS内のメモリ(本体RAM3)に書き込んだ後実施する方法、受信しながらリアルタイムで圧縮・変換を実行して必要な情報のみをメモリ(本体RAM3)に格納する方法等がある。後者の方法は、メモリ容量の少ない携帯用電話機端末に対して有効である。
【0117】
情報記録/編集モジュール(U5)に手渡された情報は、この情報記録モジュール(U5)において自端末システムの本体RAM3に記録され、その後、操作子12の各種スイッチを利用して編集することができるようになる。この編集作業には、設定情報SA中の各種パラメータ(DA)の追加、削除、値変更などがある。さらに、この情報記録/編集モジュール(U5)により、新規楽曲情報を作成するように構成することもできる。そして、設定モジュール(U6)において、操作子12を用いた設定操作により、受信した楽曲情報等の情報に基づく着信メロディ発音やBGM発音等が可能な状態に設定を行う。
【0118】
〔自端末システムでの自端末処理〕
図12は、この発明の一実施例による端末システムにおける自端末処理フローの一例を示す。この自端末処理は、図8及び図9の実施例(第1システム)、図10の実施例(第2システム)並びに図11の実施例(第3システム)の場合に、自端末システムTSにおいて実行される。先ず、第1ステップTR1において、端末システムTSの電源がオンした時の初期化処理(イニシャライズ)、例えば、所定着信メロディの設定、音源回路24,36及び効果回路25,37への初期パラメータの設定、その他携帯用電話機端末に関する初期化処理を行う。この処理の後、第2〜第6ステップTR2〜TR6の処理ルーチンが順次実行される。
【0119】
第2ステップTR2は送信処理ルーチンであり、このステップでは、通常通話時における各種情報を送信する外、必要に応じて、図8及び図9の実施例(第1システム)の場合は選択情報や識別情報を送信する、図10及び図11の実施例(第1及び第2システム)の場合には、所望情報を要求する要求情報を送信する、などの処理を行う。第3ステップTR3は受信処理ルーチンであり、このステップでは、受信された情報を分析して各種処理を行い、受信情報を着信メロディ曲やBGM曲情報等として選択可能な状態にするなどの処理がその具体例であり、通話要求の受信確認に関する処理などの携帯用電話機端末における通常処理も行われる。このステップでは、図8及び図9の実施例(第1システム)並びに図10の実施例(第2システム)の場合は、受信した情報を本体RAM3に書き込み、図11の実施例(第3システム)の場合には、受信した情報に対して設定情報添付、圧縮及び形式変換の処理を施し、それらの処理を実行した後の情報を本体RAM3に書き込む。
【0120】
第4ステップTR4は選択/設定処理ルーチンであり、このステップでは、操作子12の所定スイッチの操作により、自端未システムTSの本体ROM2内に予め記録されている情報又は本体RAM3内に記憶された受信情報から、着信メロディやBGM等に使用したい情報が選択されたときの処理を行う。この場合、選択された情報中に演奏情報があれば、その演奏情報を着信メロディ曲情報やBGM曲情報等として使用可能となるように読出設定を行う。また、選択された情報中に設定情報があれば、その情報に従った各種の設定が行われ、例えば、音源回路24,36における音色パラメータの設定、効果回路25,37における効果パラメータの設定、効果回路25,37の内容を決定する効果プログラム(DSPプログラム)による効果回路プログラムの変更、音声情報や画像情報に関連する設定等々を行う。
【0121】
また、図8及び図9の実施例(第1システム)の場合は、第4ステップTR4にて、操作子12の所定スイッチの操作により、ダウンロードしたい情報の選択に関する処理を行う。さらに、図11の実施例(第3システム)の場合は、第4ステップTR4にて、操作子12の所定スイッチの操作により、外部記録媒体19からの所望情報の読出指示に関する処理を行う。
【0122】
第5ステップTR5は、エディット処理ルーチンであり、このステップでは、図11の実施例(第3システム)の場合、操作子12の所定スイッチの操作に基づいて情報編集処理乃至新規作成処理を行う。
【0123】
この端末システムTSには自動作曲機能をもたせることができるが、この場合、第6ステップTR6のその他処理ルーチンにおいて、その他処理として、自動作曲機能の動作が実行される。この自動作曲機能としては、例えば、
(1)ユーザがマイク入力したメロディを自動的に演奏(楽曲)情報に変換する機能、
(2)操作子12の所定スイッチの操作により曲の雰囲気等を選択することによって、選択操作の結果に応じた演奏(楽曲)情報を自動生成する機能、
(3)既に作成乃至記憶されている演奏情報に対して、その演奏情報に馴染む和音に関する演奏情報を自動生成する機能
等をあげることができる。
【0124】
また、この端末システムTSにはスタイル再生機能、つまり、複数のスタイル情報や演奏情報を記録しておき、それらを繋ぎあわせて楽曲として再生する機能をもたせることができ、この場合、第6ステップTR6におけるその他処理ルーチンにおいて、スタイル再生機能の動作が実行される。さらに、第6ステップTR6には、音楽ゲーム機能、つまり、自機種のみで行う音楽ゲームや他機種と通信しながら行う音楽ゲームなどを実行する機能をもたせてもよい。
【0125】
第2〜第6ステップTR2〜TR6の処理ルーチンは、次の第7ステップTR7で端末システムTSの電源がオフしたことが検出されない間は(電源がオフにならない限り)繰り返し実行され、電源がオフされたことが検出された場合に、この自端末処理は終了する。
【0126】
〔基地局でのサーバ処理〕
図13は、この発明の一実施例による基地局におけるサーバ処理フローの一例を示す。このサーバ処理は、図8及び図9の実施例(第1システム)並びに図11の実施例(第3システム)の場合に、基地局(サーバ局)BSにおいて実行される。先ず、第1ステップBR1で所定のイニシャライズが行われた後、第2〜第4ステップBR2〜BR4の処理ルーチンが順次実行される。
【0127】
先ず、第2ステップBR2の受信処理ルーチンにおいては、図8及び図9の実施例(第1システム)の場合、次の(1)〜(4)の処理を行う:
(1)端末システムTSからのダウンロード要求の通話に応答する通話処理、
(2)通話応答時に端末システムTSから送信される選択情報及び識別情報を受信する受信処理、
(3)受信した選択情報に従って、端末システムTS側に送信すべき情報を選択的に読み出す選択読出処理(選択読出モジュールB1)、さらに、必要に応じて行われる設定情報添付処理(設定情報添付モジュールB3)及び形式変換処理(形式変換モジュールB4)、
(4)受信した識別情報に従って実施される課金処理(課金モジュールB2)。
【0128】
また、第2ステップBR2の受信処理ルーチンでは、図11の実施例(第3システム)の場合、他の電話機端末OSaから電話回線を介して端末システムTSの送受信回路6に情報を送信する際の経由手段として、両端末OSa,TS間での情報の送受信に関与する経由処理が行われ、この際、必要に応じて形式変換処理が実施される。
【0129】
次の第3ステップBR3の送信処理ルーチンにおいては、図8及び図9の実施例(第1システム)(第1システム)の場合、サーバ局BS内のデータベースDBから読み出され、必要に応じて自機種フォーマットAに形式変換された情報を端末システムTSに送信する処理を行い、送信時には、裸金関連情報等、その他情報を添付することもできる。また、図11の実施例(第3システム)の場合には、端末システムTSから受信した情報を他の電話機端末OSaへ送信するほか、端末システムTSで選択されたサーバ局BSにおけるデータベースDB内の情報を他の電話機端末OSaに送信することもできる。
【0130】
続く第4ステップBR4のその他処理ルーチンにおいては、端末システムTSからの要求に合わせて、楽曲情報、演奏情報、設定情報等の内容の一部のみを送信することもできる。例えば、設定情報中の音色に関する情報のみを送信し、効果に関する情報は送信しないなどの処理を行うことができ、また、情報のストリーミング送信(リアルタイム再生)により、楽曲情報等の「試し聞き」等を行うこともできる。
【0131】
なお、このストリーミング送信については、例えば、楽曲情報を再生し、再生された各イベントをリアルタイムにパケット化し、或いは、時間の近接した複数イベントをそれらの間の時間差情報と共にまとめてパケット化し、サーバBSから端末システムTSへとストリーミング送信する。端末システムTSでは、送信されたパケットを受信し、本体RAM3やFIFO22に一時的に蓄積し、蓄積された楽曲情報に基づいて楽音を再生する。
【0132】
第2〜第4ステップBR2〜BR4の処理ルーチンは、次の第5ステップBR5でサーバ局BSの電源がオフしたことが検出されない間は繰り返し実行され、電源がオフしたことが検出されると、このサーバ処理は終了する。
【0133】
〔パーソナルコンピュータでのPC端末処理〕
図14は、この発明の一実施例によるパーソナルコンピュータにおけるPC端末処理フローの一例を示す。このPC端末処理は、図10の実施例(第2システム)の場合にパーソナルコンピュータ端末PCにおいて実行される。先ず、第1ステップPR1で所定のイニシャライズが行われた後、第2〜第6ステップPR2〜PR6の処理ルーチンが順次実行される。
【0134】
第2ステップPR2の選択処理ルーチンにおいては、SMFフォーマットC又は自機種フォーマットAで情報が記録されているパーソナルコンピュータ端末PC内のデータベースDPから、着信メロディやBGM等として使用したい楽曲情報や設定情報を選択する(選択読出モジュールP1)。
【0135】
第3ステップPR3の新規作成処理ルーチンにおいては、従来タイプのシーケンサソフトウエア、楽曲情報作成ソフトウエア、自動作曲ソフトウエア(装置)等を用いて、SMFフォーマットC又は自機種フォーマットAに従う新規楽曲情報を作成する(新規作成モジュールP3)。
【0136】
第4ステップPR4の編集処理ルーチンでは選択した楽曲情報や設定情報を編集し(編集モジュールP2)、また、第5ステップPR5の送信処理ルーチンでは、情報圧縮処理、形式変換処理及び情報送信処理を含む処理が実行される(情報圧縮、形式変換及び情報送信モジュールP4〜P6)。
【0137】
さらに、第6ステップPR6のその他処理ルーチンにおいては、設定情報SA内にその他情報を添付する。ここで添付されるその他情報の具体例を挙げると、効果回路の内容を決定する効果プログラム(DSPプログラム)、音声情報、画像情報等である。
【0138】
第2〜第6ステップPR2〜PR6の処理ルーチンは、次の第7ステップPR7でパーソナルコンピュータ端末PCの電源がオフしたことが検出されない間は繰り返し実行され、電源がオフしたことが検出されると、このPC端末処理は終了する。
【0139】
〔音声情報及び画像情報の利用例〕
この発明では、既に説明したように、楽音関係以外の設定情報として、音声情報や画像情報が用いられる。例えば、音声情報には、圧縮形式の差によって、WAVE、AIFF、SOUND VQ、MP3等のフォーマットがあるが、これらの形式の音声情報を取り込むことができるように共通フォーマット化を行い、楽音情報による楽音信号の生成と併行して、案内用の音声信号を生成することができる。
【0140】
また、画像情報の利用例としては、端末システムTSの表示部13に、着信時や通話相手に対応するアイコンを表示し、アイコンの動きを楽音の再生に同期するよう制御したり、楽音信号に対応する譜面を順次表示することができる。
【0141】
〔カラオケ機能〕
この発明の一実施例による携帯用端末装置においては、システムをカラオケモードにすると、楽曲演奏と歌詞表示を同期処理して楽曲演奏の進行に従って歌詞の表示状態を順次推移させて行く所謂“カラオケ”の機能を実現することができる。携帯用電話機端末(端末システム)TSに“カラオケ”機能の処理を実行させるには、端末システムTSの操作子12(図1)に含まれるスイッチ類をカラオケモード選択スイッチやカラオケ曲選択スイッチ等に使用する。この場合、これらのスイッチは、カラオケ専用にスイッチを設けるか、或いは、他の機能に使用するスイッチを流用することができる。例えば、カラオケモード選択スイッチを操作する毎にカラオケモードと非カラオケモードに切換え可能とし、カラオケモードを設定したとき、電話番号入力用のテンキーによりカラオケ曲を選択することができるようにする。
【0142】
カラオケモードにおいてはカラオケ用の楽曲情報を用いることが好ましい。カラオケ用の楽曲情報は、演奏情報中に演奏データと歌詞データを含み、他の楽曲情報と共に本体ROM(内部メモリ)に予め記録しておくか、或いは、着脱可能な小型記録媒体19、パーソナルコンピュータ端末PC、他の電話機端末、基地曲BS等の他の外部装置から受信して本体RAM(内部メモリ)に記録することができる。カラオケモードでは、本体CPU1のカラオケ処理機能に基づいて、このように記録された楽曲情報を処理し、楽曲情報中の設定情報及び演奏データを発音制御回路8に送り込んでスピーカ17又はヘッドホンから楽曲演奏出力を放音させる一方、楽曲情報中の歌詞情報に基づいて端末システムTSの表示部13にカラオケ歌詞の表示制御を行う。
【0143】
〔楽曲情報のフォーマット例〕
図15は、携帯用端末装置においてカラオケモードで使用可能な楽曲情報のフォーマット例を示す。自機種フォーマットAに従う1楽曲分のカラオケモードに適用可能な楽曲情報IKは、設定情報SK及び演奏情報MKで構成され、演奏情報MKは演奏データPK及び歌詞データWKから成る。設定情報SKには、既に説明した設定情報SAと同様に、音色ナンバや音色パラメータを含む音色情報CK、効果パラメータや効果プログラムを含む効果情報EKがある。設定情報SKには、その他の情報としてテキストフラグTFがあり、テキストフラグTFは、演奏情報MK内に歌詞データWKが記録されていることを示す情報である。なお、演奏データPK、歌詞データWKとして記録される情報は、1つの楽曲の1区間(例えば、「さび」部分)における情報とすることが好ましい。
【0144】
楽曲の進行を表わす演奏データPKは、内容的には、既に説明した演奏情報MAに相当し、タイミングデータPTや演奏イベントPEを演奏順に記録した情報であり、エンドデータEPで終わる。演奏イベントPEは、キーナンバやゲートタイムを一かたまりとした情報である。また、歌詞データWKは、演奏情報IK内の演奏データ(楽曲)に対応する歌詞を表示するための情報であり、表示タイミングを表わすタイミングデータWTと、表示内容となる歌詞テキストを表すテキストイベントデータWEとが、楽曲の進行順に記録されており、エンドデータEWで終わる。歌詞データWK内のタイミングデータWTは、各テキストイベントWEが楽曲の演奏に同期して表示されるように、演奏データPK内のタイミングデータPTと同期・対応している。
【0145】
このように歌詞データを伴う楽曲情報は、既に説明した楽曲情報IA,IB,ICと同様に、外部から受信したものであってもよい。この楽曲情報を外部から受信する場合、演奏データ(楽曲進行データ)だけではなく、歌詞データについても、これまで説明してきた各実施例と同様に、情報圧縮や形式変換の処理を経て、自機種用歌詞データWKの形式に変換される。従って、受信された楽曲情報は、上述のような自機種フォーマットAに従う楽曲情報IKの形式で記憶される。
【0146】
図16は、この発明の一実施例による端末システムにおける楽曲演奏と歌詞表示の同期処理を表わす機能ブロック図である。種々の楽曲情報は、内部メモリブロックKB1に示すように、予め内部メモリ(本体ROM2)に記録されているか、或いは、外部装置ブロックKB0に示すように、基地局BS、他端末OS、パーソナルコンピュータ端末PC、記憶媒体19等の外部装置から受信し、内部メモリ(本体RAM3)に記録することができる。内部メモリには、楽曲情報が自機種フォーマットAに従う情報記録形式で記録され、楽曲情報を外部装置から受信する場合、受信した楽曲情報は、自機種フォーマットAに従っていないときは、前述したように、自機種フォーマットAの情報記録形式に変換された上、内部メモリに記録される。
【0147】
内部メモリ(KB1)に記録されている種々の楽曲情報から所望の楽曲情報が選択され、選択された楽曲情報は、歌詞データWKを伴っていれば、情報分離ブロックKB2において演奏データPKと歌詞データWKとに分離され、制御指令と共にデータ制御回路ブロックKB3に手渡される。この際、演奏データPKのタイミングデータPTに基づいて演奏イベントPEを発音制御回路8の音源回路〔24,36(図2,3)〕へのルートに送信し、歌詞データWKのタイミングデータWTに基づいてテキストイベントWEを表示回路〔5(図1)〕へのルートに送信する。
【0148】
制御回路ブロックKB3は、情報分離ブロックKB2から手渡された情報の送信を制御指令に従って制御する。すなわち、制御指令が着信メロディ曲の再生を指示しているときは、演奏イベントPEのみを音源回路ブロックKB4に送信し、歌詞表示(カラオケ機能)を指示しているときは、演奏イベントPE及びテキストイベントWE(或いは、テキストイベントWEのみ)を夫々音源回路ブロックKB4及び表示回路ブロックKB5に送信する。そして、音源回路ブロックKB4及び表示回路ブロックKB5は、それぞれ、受信した演奏イベントPE及びテキストイベントWEに基づいて駆動され、楽曲演奏及び歌詞表示を行う。
【0149】
〔受信処理1〕
図17は、この発明の一実施例による端末システムでの受信処理(図12のステップTR3)の一具体例である「受信処理1」のフローチャートであり、この処理により、カラオケモードを含む各種モードで端末システムTSが動作していても、他の装置からの通話要求を受けて着信メロディ曲の再生開始を指示することができる。
【0150】
最初のステップKR11は、通常の携帯電話における通話要求確認処理に相当し、このステップでは、他の端末装置から通話の要求があるか否かを判断する。ここで、通話要求があればステップKR12で通話要求がある旨を表示した後ステップKR13に進み、通話要求がなければこの受信処理1を終了する。ステップKR12における通話要求表示の手法としては、具体的には、表示部13に通話要求アイコンを表示させたり、予め表示されている通話要求アイコンを点滅させる方法を採り、歌詞をながめていたりした時に、突然、着信メロディ音が鳴り始めないように制御する。
【0151】
ステップKR13では、着信メロディ曲の再生状態を表わすRUNフラグに“1”をセットし、次のステップKR14で、現在利用しているデータの読出をリセットして現在のモードを通話開始前に強制的に一旦停止し、着信メロディ曲の読出しをセットする。例えば、現在のモードがカラオケモードであれば、演奏データPK及び歌詞データWKの読出しをリセットして、通話開始前に、現在表示中の歌詞を消去し現在再生中の楽音を消音して現在のモードを強制的に一旦停止する。なお、現在のモードを通話開始前に強制的に終了させるようにしてもよい。一方、着信メロディ曲については、着信メロディ音として選択されている楽曲情報における設定情報に基づいて各部を設定すると共に、データ読出し位置を演奏データ先頭位置にセットする。
【0152】
〔その他処理1〕
図18は、この発明の一実施例による端末システムでのその他処理(図12のステップTR6)の一具体例である「その他処理1」のフローチャートであり、この処理により、通話開始の操作に応答して着信メロディ曲の再生終了を指示することができる。最初のステップKR21は、通常の携帯電話における通話開始処理に相当し、このステップでは、通話を開始する状態であるか否かを判断する。ここで、通話開始状態であればステップKR22に進み、着信メロディ曲の再生状態を表わすRUNフラグに“0”としてこれをリセットし、通話開始状態でなければその他処理1を終了する。
【0153】
〔選択/設定処理1〕
図19は、この発明の一実施例による端末システムでの選択/設定処理(図12のステップTR4)の一具体例である「選択/設定処理1」のフローチャートであり、この処理により、携帯用電話機端末(端末システム)TSの操作子12内のカラオケモード選択スイッチを操作してカラオケモードを起動することができる。この処理によりカラオケモードの起動指示があると、楽曲再生及び歌詞(テキスト)表示が開始される。
【0154】
最初のステップKR31では、カラオケモード選択スイッチの操作によりカラオケモードの設定がなされか否かを判断し、カラオケモード選択スイッチの設定操作がなされたときはステップKR32に進み、そうでないときは直ちにこの選択/設定処理1を終了する。ステップKR32においては、再生する曲を内部ROM内から選択する。この場合、選択した曲の楽曲情報内に歌詞データがなければ、その旨を表示する。また、曲選択が行われなかった場合には、現在、着信メロディ音として設定されている楽曲情報を選択曲として設定する。
【0155】
そして、ステップKR33で、現在利用しているデータの読出をリセットして現在のモードを停止した後、ステップKR34において、カラオケモードに移行していることを表すKARAOKEフラグを反転し、この選択/設定処理1を終了する。このKARAOKEフラグの“1”は「カラオケモード設定中」を表わし、“0”は「カラオケモード解除中」を表わす。
【0156】
なお、ステップKR32において、KARAOKEフラグが“0”でありカラオケモードのセットが可能である場合、カラオケ再生するのに選択した曲の楽曲情報内に歌詞データがない(テキストフラグTFのチェックにより検出)ときは、ステップKR34でKARAOKE“0”→“1”としてカラオケモードで楽曲演奏のみを行うようにするか、或いは、KARAOKEフラグを反転せずカラオケモードに移行しないようにすることができる。
【0157】
〔割込み処理〕
図20は、この発明の一実施例による端末システムにおける割込み処理の一例である「割込み処理2」のフローチャートである。この処理は、自機種携帯用電話機端末(端末システム)TSにおけるメイン処理に対する割込み処理であり、タイマのクロックタイミング毎に起動される。最初のステップKR41では、RUNフラグが“1”であるか否かを判断し、RUN=“1”であればステップKR42に進む。
【0158】
ステップKR42では、演奏データに基づいて、順次、演奏イベントを音源回路〔24,36(図2,図3):KB4(図16)〕に送信し、対応する楽音を発音させる。すなわち、RUN=“1”は、着信メロディ音が再生中であることを表わし、通話要求時や通話要求音発音時に、着信メロディ音として選択されている楽曲情報の演奏データに従った楽曲再生を行う。この場合、楽曲の進行タイミングは、別の割込み処理でカウントされる。なお、着信メロディ音の発音中は、カラオケモードの設定(KARAOKE=“1”)が無視され、表示回路〔5(図1):KB5(図16)〕による歌詞表示が進行しないように自動制御される。
【0159】
一方、ステップKR41でRUN=“0”と判断されるとステップKR43に進み、このステップKR43でKARAOKEフラグが“1”であるか否かを判断し、KARAOKE=“1”であればステップKR44に進み、そうでなければ、この割込み処理2を終了する。
【0160】
ステップKR44では、歌詞データに基づいて、順次、テキストイベントを表示回路(5:KB5)に送信し、対応する楽音を発音させ、ステップKR42に進む。すなわち、RUN=“0”(着信メロディ音非再生)、KARAOKE=“1”は、カラオケモード中であることを表わし、ステップKR44では、選択されているカラオケ楽曲の歌詞データWKに従って歌詞を表示し、ステップKR45では、選択されているカラオケ楽曲の演奏データPKに従っで楽曲を再生する。従って、RUN=“0”、KARAOKE=“1”のときは、両ステップKR44,KR42の処理により、選択されているカラオケ楽曲の演奏データPK及び歌詞データWKに従って楽曲再生及び歌詞表示を同期して行うことができる。
【0161】
つまり、演奏データPKについては、演奏順に記録したタイミングデータPT及び演奏イベントPEを順次読み出して楽曲を再生して行くと共に、歌詞データWKについては、表示順に記録したタイミングデータWT及びテキストイベントデータWEを順次読み出して歌詞表示をして行く。このとき、表示タイミングを表わすタイミングデータWTは、タイミングデータPTと同期・対応しているので、歌詞表示は楽曲の演奏に同期して変化させることができる。歌詞表示は、表示している歌詞部分のうち、楽曲の演奏に対応して現在発声すべき文字或いは発声済みであるべき文字について、輝度を高めたり、下線・ハッチング・白黒反転等の修飾を施すというような強調表示手法を用い、通常のカラオケ装置における文字表示の色替えより簡易にするのが好ましい。
【0162】
〔種々のカラオケ態様〕
なお、カラオケモードにおいては、楽曲を再生しないで歌詞の表示だけを行うことができるようにしてもよい。その場合には、歌詞表示の進行をユーザが任意に操作できるようにすることが好ましい。
【0163】
また、楽曲の1部分のみではなく楽曲全体に対応する歌詞データと演奏データとを演奏情報として記録するようにしてもよい。その場合、着メロディ曲再生時には、楽曲の所定部分(例えば、「さび」部分など)のみを再生させるようにし、カラオケ再生時には、全体を再生させるようにするとよい。
【0164】
また、歌詞データだけについて楽曲全体分を記録するようにしてもよい。その場合には、カラオケ再生モード(「演奏あり」モード)では、演奏データに対応する部分の歌詞のみを順次表示し、歌詞表示だけのモードでは楽曲全体の歌詞をユーザの操作に従って順次、表示部に表示していくようにすればよい。
【0165】
〔エディット機能〕
この発明の一実施例による端末システムにおいては、図11の情報記録/編集モジュール(U5)や図12のエディット処理(TR5)で説明したように、操作子12の各種スイッチを利用して各種情報編集を行うことができる。ここで、このエディット処理の具体例を紹介しよう。
【0166】
エディット処理時に使用されるエディットモード選択スイッチやエディット用の各種スイッチは、端末システムTSの操作子12(図1)に含まれる。この場合、これらのスイッチは、専用スイッチとして別設したり、或いは、他の機能に使用するスイッチを流用することができる。例えば、エディットモード選択スイッチを操作する毎に、エディットモードと非エディットモードを切換え可能とし、エディットモードとしたとき、電話番号入力用テンキーにより、エディットしたい情報の選択或いはエディット時のパラメータ値の設定(別のキーでテンキー入力モードを「情報選択」/「パラメータ設定」に切換える)することができるようにする。
【0167】
〔選択/設定処理2〕
図21は、この発明の一実施例による端末システムでの選択/設定処理(図12のステップTR4)の別の具体例である「選択/設定処理2」のフローチャートである。最初のステップER11では、携帯用電話機端末(端末システム)TSの操作子12のうちのエディットモード選択スイッチの設定操作がなされか否かを判断し、この操作がなされたときはステップER12に進み、操作がないときは直ちにこの選択/設定処理2を終了する。
【0168】
エディットモード選択スイッチは、エディットモードの開始及び終了を指示するための操作スイッチであり、操作する毎にEDITフラグの内容を反転する。ここで、EDITフラグの内容が“1”のときはエディットモード中であることを表わし、“0”のときはエディットモードでないこと(非エディットモード状態)であることを表わす。また、モードは一度に1つのみ設定司能であり、例えば、エディットモード設定操作があったときにカラオケモード中(KARAOKE=“1”)であれば、カラオケモードは強制的に終了される。
【0169】
ステップER12ではEDITフラグを反転し、続いて、ステップER13に進む。ステップER13では、EDITフラグが“0”であるか否かを判断し、EDIT=“0”(非エディットモード状態)であれば、ステップER14に進んで選択した情報に編集内容を上書き保存した上、この選択/設定処理2を終了し、EDIT=“1”(エディットモード中)であれば、ステップER15に進む。ステップER14の処理により、エディットモード終了時には、本体RAM3の一時記憶領域に記憶している編集内容を上書き保存することができる。
【0170】
ステップER15においては、端末システムTSの操作子12内のテンキーの入力モードを「情報選択」側に切り換えて、音色情報、効果情報、演奏データ、歌詞データなどの中から、エディットしたい情報をテンキーで指示することにより、指示された情報が選択される。なお、情報の選択がなかった場合は、着信メロディとして設定されている楽曲の音色情報又は演奏データをエディット情報として設定する。そして、次のステップER16では、選択(又は設定)された情報の一部(例えば、先頭部)を表示部13に表示した後、この選択/設定処理2を終了する。
【0171】
〔エディット処理1〕
図22は、この発明の一実施例による端末システムでのエディット処理(図12のステップTR5)の一具体例である「エディット処理1」のフローチャートである。この処理フローの最初のステップER21では、EDITフラグが“1”であるか否かを判断し、EDIT=“1”(エディットモード中)であればステップKR22に進んで編集したいデータを選択し、一方、EDIT=“0”であれば直ちにこのエディット処理を終了する。
【0172】
ステップER22においては、操作部12のデータ選択スイッチ等を操作して表示部13の表示を順次切り換えていき、パラメータや音符、タイミング等、編集したいデータの値を表示させる。次のステップER23では、実際の編集作業に入り、操作部12の電話番号入力用テンキーの入力モードを「情報選択」から「パラメータ設定」側に切り換えて、テンキー等を操作することにより、新たなパラメータ値を入力したり、或いは、全く新たにデータを追加したり、さらには削除したりする。
【0173】
次に、ステップER24で、編集された内容を本体RAM3の一時記録領域に一時記憶しておき、ステップER25に進む。なお、一時記憶しておいた編集内容については、エディットモードの終了時に、実際のデータへの上書き処理が行われる。しかしながら、エディットモード途中で上書きを行えるようにしてもよい。
【0174】
ステップER25では、着信メロディ曲の再生状態を表わすRUNフラグが“1”であるか否かを判断し、RUN=“1”(着信メロディ曲再生中)であれば、ステップER26でEDITフラグに“0”をセットした上、ステップER26に進み、そうでなければ(RUN=“0”:着信メロディ曲非再生状態)エディット処理1を終了する。ステップER27では、編集内容を上書きするか否かを判断し、上書きをする場合はステップER28に進んで上書きを実行した後エディット処理1を終了する。また、上書きをしない場合には直ちにエディット処理1を終了する。
【0175】
エディットモード中に通話要求があると、エディットモードは強制的に終了されるが、現在までのエディット内容を残すか否かは、ステップER28においてユーザによる選択が可能であり、例えば、上書きするか否かを促す保存可否の表示が表示部13を用いて行われる。この場合、操作部13のYES/NO操作スイッチで保存の可否を選択できるようにすればよい。また、保存可否の表示が行われている間は、着信メロディ曲の発音処理へは移行されないにようにするのが好ましい。
【0176】
受信処理1(図17:ステップKR12)で説明したように、エディットモード時に(他のモードにおいても同様であるが)通話要求があると、通話要求があることを表すアイコンを表示部13の画面上に表示される。このような場合、着信メロディ曲が鳴り始めてもよいが、突然、着信メロディ音がなり始めるとユーザが驚いてしまうので、アイコンを表示させる方が好ましい。
【0177】
なお、エディットモードにおいては、既に記録されている情報の編集以外に、上述と同様の手順を用いて、新規に音色情報、効果情報、歌詞データなどの情報を作成して記録・登録することができる。
【0178】
〔音声作曲機能〕
この発明の一実施例による端末システムにおいては、その他処理(図12:TR6)における自動作曲機能の第1例として挙げたように、端末システムに入力される音声から楽曲情報を作成することができる。ここで、このような音声作曲機能について説明する。図23は、この発明の一実施例による端末システムの音声作曲機能を説明するための機能ブロック図である。この機能ブロック図により示される音声作曲機能を実現する処理は、基本的に、本体CPU1の指示により実行されるが、図3の発音制御CPU31のように発音制御回路8がCPUを装備したものでであれば、発音制御回路側CPUの指示により処理を実行させるようにしてもよい。
【0179】
入力モジュールCA1は、携帯用電話機端末(端末システム)TS(図1)のマイク14(図1)から入力される音(歌声)〔マイク入力音〕を取り込むマイク入力ブロックCA11、及び、送受信回路6を介して受信した通話音(通話相手の歌声)〔通話入力音〕を取り込む通話音入力ブロックCA12から成り、マイク入力音或いは通話入力音をデータソースとして取り込む。
【0180】
データソースとして利用する入力音を選択するための入力切換モジュールCA2は、操作子12の電話番号入力用テンキーを操作することにより、マイク入力音或いは通話入力音の何れをデータソースとして利用するかを設定する。A/D変換モジュールCA3は、オーディオ制御回路7(図1)により、入力モジュールCA1から入力されるデータソース入力音をアナログ形式からデジタル形式に変換する。
【0181】
雑音量設定モジュールCA4は、まず、入力モジュールCA1からのデータソース入力音に含まれる雑音の音量レベルを次の処理により設定する:
(1)例えば、入力待機を促す旨を表示部13に表示し、ユーザに対してマイク音或いは通話音の入力開始を所定時間だけ待機させ、その待機期間(無音期間)の間に入力モジュールへ入力される音を雑音として検出する(検出機能)。
(2)検出された雑音中の最大音量を雑音量(雑音最大レベル)として設定する(設定機能)。
【0182】
このような処理が終了した後は、雑音量設定モジュールCA4により、例えば、入力開始を促す旨を表示部13に表示して、ユーザにマイク音或いは通話音の入力開始を促す。雑音除去モジュールCA5は、A/D変換モジュールCA3によりデジタル形式に変換されたデータソース入力音から、雑音量設定モジュールCA5により設定された雑音最大レベル以下の音情報を削除する。
【0183】
音高検出モジュールCA6は、雑音が削除されたデータソース入力音から音高列を抽出する。この音高列の抽出には、例えば、周波数分析による検出方法を用いる。また、記録する情報容量を削減するために、所定時間以内に複数の音が発生するよう認識された場合には、その複数音のうちの先頭音以外を削除する。具体的には、音長の最低長を所定時間(例えば、8分音符)とし、これより細かい時間で発生する音については削除する。なお、音高群が所定音域に達していないと判定されるような場合、検出された音高列を所定音域まで全体的にトランスポーズするトランスポーズ機能を装備することが好ましい。このようなトランスポーズ機能により、入力される音の音域が低音域であっても、着信メロディとして利用可能な音域に自動変換することができる。
【0184】
データ作成モジュールCA7は、音高検出モジュールCA6で検出された音高列を、自機種フォーマットAに対応する情報に変換し、本体RAM3或いは制御RAM35に記録する。
【0185】
〔自動作曲機能1〕
この発明の一実施例によるシステムにおいては、パーソナルコンピュータ端末PC側の新規作成モジュール(図10:P3)について説明したように、自動作曲機能を実現することができる。図24は、この発明の一実施例による音声作曲機能をブロック化して表わした機能ブロック図である。この機能ブロック図により示される自動作曲機能を実現する処理は、基本的には、パーソナルコンピュータ端末PC(図10:P3)で実行するものとして説明するが、このような自動作曲機能を端末システムTSに搭載するようにしてもよい。
【0186】
手動入力モジュールCB1では、ユーザが従来タイプのシーケンサ装置(シーケンサ機能付きパーソナルコンピュータ)等を利用して楽曲情報を次のような方法で手動で入力(作成)する:
(1)装置に接続された電子楽器を演奏して楽曲情報を入力する方法、
(2)パーソナルコンピュータ端末PCに接続された表示装置に表示される入力用画面を利用して、端末PCに接続されたキーボードやマウスを利用して数値入力等により楽曲情報を作成する方法、
(3)予め用意された部分曲データ(パターンデータ)を繋ぎあわせて1曲分の楽曲情報を作成する方法、
等々。
【0187】
一方、自動作曲モジュールCB2では、先ず、作成したい楽曲の一部データをユーザが入力する。この入力には、例えば、電子楽器を実際に演奏したり、パーソナルコンピュータ端末PCの表示画面を用いるなどの方法がある。なお、パーソナルコンピュータ端末PC内に複数の部分曲データ(パターンデータ)を予め用意しておき、これらの部分曲データの中から、楽曲の一部データを選択するようにしてもよい。このようにして楽曲の一部データを入力した後、既に知られた楽曲自動生成手法を用いて、入力された楽曲の一部データから1曲分の楽曲情報を自動的に生成する。
【0188】
手動入力モジュールCB1又は自動作曲モジュールCB2の何れかにより作成された楽曲情報、或いは、予めパーソナルコンピュータ端末PCに記録されている楽曲情報は、曲解析モジュールCB3に入力される。曲解析モジュールCB3では、入力(作成)された1曲分の楽曲情報をイントロ部、フィルイン部、メイン部、エンディング部等の音楽的な区間に分割するために、楽曲情報の内容を解析する。
【0189】
区間分割モジュールCB4では、曲解析モジュールCB3での解析結果に基づいて、楽曲情報を複数の区間情報に分割し、区間選択モジュールCB5では、分割された複数の区間情報の何れを着信メロディ又はBGMとして利用するかを自動的に選択する。この区間情報の選択については、複数の区間情報を画面に表示し、例えば、区間情報毎に試し聞きができるようにし、ユーザに所望の区間情報を選択させるようにしてもよい。
【0190】
トラック選択モジュールCB6では、選択された区間情報が複数トラック〔パート)構成である場合には、必要最小限のトラック数に絞り込みを行う。この絞り込みには、例えば、類似した音色で演奏されるパートが複数あれば、その内の1つだけ残して、その他のパートに関する情報を削除するなどの方法がある。
【0191】
繰返し部補正モジュールCB7では、トラック選択処理(CB6)までの処理が終了した区間情報に関して、その区間情報を繰り返し再生したときに、その区間における先頭位置の音と最終位置の音とが滑らかに繋がるように、区間先頭位置の音或いは区間最終位置の音(或いは、その近傍の音)を修正・補正する。そして、最後に、情報記録モジュールCB8により、作成された区間情報を、パーソナルコンピュータ端末PCの記録領域(RAM)に記録するとともに、図10の情報圧縮モジュールP4へと出力する。
【0192】
〔楽曲データの自動生成処理(自動作曲処理)〕
この発明の一実施例によるシステムにおいては、TS自端末での「その他処理」(図12:ステップTR6)やPC端末での新規作成(図10:新規作成モジュールP3,図14:ステップPR3)で説明した自動作曲機能を実現するために、端末システムTSやパーソナルコンピュータ端末PC側で楽曲データを自動的に生成することができる。図25は、この発明の一実施例による携帯用端末装置における楽曲データの自動生成方法を概略的に表わす処理フロー図である。この方法では、携帯用端末システムTSにて、雰囲気などのユーザの好みに沿う楽曲データが自動的に生成される。この処理フロー図により示される楽曲データ自動生成処理(自動作曲処理)は、端末システムTSで実行するものとして説明するが、もちろん、パーソナルコンピュータ端末PCにおいて実行するようにしてもよく、また、図24の自動作曲モジュールCB2に適用することができる。
【0193】
図25に示される方法においては、携帯用端末システムTSにてユーザの好みに沿う楽曲データを自動生成するために、楽曲のフィーリング(feeling )毎に複数種類のメロディ生成用データ及びコード進行データを本体ROM2又は本体RAM3に予め記憶しておく。なお、このメロディ生成用データ及びコード進行データは、送受信回路6を介して、サーバ局BSから受信してもよい。或いは、通信インタフェース10を介して外部装置から受信したり、接続回路9を介して着脱可能小型記録媒体19からロードしてもよい。
【0194】
この楽曲データ自動生成処理によれば、ユーザが選択したフィーリングに応じた複数種類の中から(例えば、ランダムに)一組のメロディ生成用データ及びコード進行データが選択され、これらのデータに基づいて、また、ユーザの好みによりデータの修正を行いつつ、メロディが自動的に生成される。このようなメロディ等の楽曲の自動生成については、本件出願人による特許出願(特願平11−019625号)に詳細に記載されているので、ここでは概略的に説明する。
【0195】
楽曲のフィーリングとしては、例えば、「さわやかで」、「やさしくて」、「さみしくて」、「SEXYで」等がある。各フィーリング毎に複数種類のメロディ生成用データ及びコード進行データが対応しており、選択されたフィーリングに対応した複数種類のメロディ生成用データ及び複数種類のコード進行データのうちのいずれかが、それぞれランダムに選択される。なお、各フィーリングに対して1つのメロディ生成用データ及びコード進行データが対応していてもよい。メロディ生成用データは、音符数(多、中、少)、拍子種類、シンコペーションペーションの有無、楽曲の小節数、楽節構成等のデータから成るリズム生成用データと、絶対的な音域幅、所定区間でのどピッチ(音高)の変化幅等のデータから成るピッチ生成用データとにより構成される。各コード進行データには一楽曲(例えば、32小節)分のコード進行を表わすデータが記憶されている。
【0196】
楽曲を自動生成するときには、図25の処理フローの最初のステップCC1において、メロディ生成用データ及びコード進行データを読み出す。このために、例えば、ユーザの操作に応じて、表示部13上に楽曲のフィーリングを言葉及び/又はアイコンを用いて複数種類表示する(図26中欄を参照。なお、図26は、自動作曲に関するパラメータ設定の表示画面例を示す。)。ユーザが操作子12を使って好みのフィーリングを選択すると、選択された一組のメロディ生成用データ及びコード進行データが読み出される。
【0197】
次のステップCC2では、ステップCC1で読み出されたメロディ生成用データに基づきリズムデータが生成される。すなわち、読み出されたメロディ生成用データに含まれるリズム生成用データに基づいて、まず、数小節からなるモチーフ(例えば、楽曲の先頭部分やサビの部分)のリズムデータ(音符の存在位置を規定したデータであり「打点データ」とも言う)が生成され、生成されたモチーフ及び上述した楽節構成データ等から一曲分のリズムデータが生成される。例えば、一曲分のリズム生成方法としては、楽節記号を反映すべく、同一記号の楽節は、対応する楽節と同一のリズムにし、類似記号の楽節は、対応する楽節と、一部(例えば、前半部分)を同一のリズムにする方法がとられる。
【0198】
なお、モチーフリズムデータの生成は、操作子12中の所定のスイッチ(専用のスイッチでもよいし、他の機能と共通利用されるスイッチでもよい)の操作に応じて開始される。モチーフの生成は、典型的には、多数のリズムパターン(打点パターン)を予め記憶しておき、リズム生成用データに適合するリズムパターンを選択することによる。
【0199】
リズム生成用データに適合するリズムパターンに関して、複数の候補があるときは、何れかをランダムに選択すればよい。或いは、上述したフィーリングや別途指定される音楽ジャンルを考慮してリズムパターンを選択してもよい。また、モチーフのリズムデータを自動生成するものに限らず、操作子12を用いて、リズムデータをユーザが直接手入力してもよいし、自動生成したリズムデータをユーザが編集してもよい。或いは、既に述べたように、マイク入力された音声や通話入力された音声から音符列を抽出し、これをリズムデータとして採用してもよい。
【0200】
次に、ステップCC3では、生成されたリズムデータの各打点から重要打点が検出される。ここで、重要打点とは、メロディを構成する全打点のうち音楽的に重要な打点であり、一例として、各小節毎の強拍、即ち、第1、3拍にある打点或いは第1、3拍の近くの打点が重要打点として検出され、その他の打点は非重要打点として検出される。強柏或いはその近傍の打点に限らず、他の条件に従って重要打点を検出してもよい。
【0201】
他方、ステップCC4では、メロディ生成用データとコード進行データに基づいて、まず、数小節からなるモチーフの骨格音が生成され、続いて、このモチーフの骨格音と楽曲構成データ等を参照して一曲分の骨格音が形成される。ここで、モチーフの骨格音としては、コード構成音であって、上述した音域幅、変化幅の範囲に入るピッチを有するものが、ランダムに選択される。なお、ランダムに選択するものに限らず、所定のルールに沿って選択してもよい。
【0202】
次に、ステップCC5において、ステップCC3で検出された重要打点に対して、ステップCC4で生成された骨格音が割り当てられ、続いて、ステップCC6では、重要打点間の非重要打点に対してピッチが割り当てられる。非重要打点には、対応するコード音のアベイラブル・ノート(available notes )のスケール上のピッチがランダムに割り当てられる。ランダムに割り当てるものに限らず、所定のルールに沿って割り当ててもよい。なお、一曲分の骨格音及び非重要打点のピッチを形成する際は、前述のリズムの場合と同様に楽節記号を反映すべく、同一記号楽節は、対応する楽節と同一ピッチにし、類似記号楽節は、対応する楽節と一部(例えば、前半部分)を同一ピッチにすることによって得られる。
【0203】
このようにして生成された楽曲データは、ステップCC7で、別途記憶される音楽ルールに従って、不自然な響きが出ないように自動修正された後、ステップCC8にて本体RAM3に記憶され、この自動作曲処理を終了する。
【0204】
なお、自動生成された重要音及び/又は非重要音のピッチは、操作子12を用いてユーザにより修正することができるようにしてもよい。また、ピッチ修正可能な箇所は、モチーフ部分だけでもよいし、楽曲全体でもよい。さらに、上述の説明では、楽曲全体のリズムデータを生成した後に、楽曲全体のピッチを付与するようにしたが、まず、モチーフのリズムデータを生成した後、モチーフのピッチを付与し、それに続いて、楽曲の後続部分のリズムデータを生成し、後続部分のピッチ付与を行うようにしてもよい。
【0205】
また、上述した楽曲データの自動生成方法においては、メロディのみを生成したが、これに加えて伴奏パートも自動生成するようにしてもよい。例えば、楽曲のスタイル(style )毎に複数の伴奏生成用データ(「スタイルデータ」とも言い、1乃至複数のパー卜について、所定コードタイプに沿って作成された1乃至複数小節分の演奏データである。)を本体ROM2又は本体RAM3に予め記憶しておき、操作子12を用いてユーザが選択した楽曲スタイル或いはランダムに選択した楽曲スタイルに対応した伴奏生成用データを読み出し、コード進行データに基づいて伴奏生成用データに含まれる音高データを該コード進行データにマッチするように修正し、これを1曲分(例えば、32小節分)繰り返すことで伴奏パートを生成する。なお、楽曲のスタイルとしては、「都会的な」、「土くさい」、「トロピカルな」、「ダンサブルな」等がある(図26右欄参照)。
【0206】
〔和音検出処理及び伴奏パート付与処理〕
この発明の一実施例においては、端末システムTSは、自動作曲機能の1つとして説明したように(図12:ステップTR6「その他処理」)、既に作成乃至記憶されている演奏情報に馴染む演奏情報を自動生成する機能をもつことができる。図26は、この発明の一実施例による携帯用端末装置における「楽曲データに馴染む和音(和音進行)を自動的に決定する方法」(和音検出処理)を概略的に説明するフロー図であり、図27は、この発明の一実施例による携帯用端末装置における「メロディデータに馴染む伴奏パートをメロディデータに付与する方法」(伴奏パート付与処理)を概略的に説明するフロー図である。図26の和音検出処理により決定された和音(和音進行)は、図27の伴奏パート付与処理における自動伴奏付けに利用可能である。
【0207】
図26の和音検出処理においては、まず、ステップCD1で、メロディデータを所定のルールに従って区間分割する。ここで、分割される1つの区間は、lつの和音が継続するとみなし得る区間である。また、所定のルールの例としては、1拍や2拍、1小節等の一定区間毎に分割するルールや、メロディデータの並びを分析し、1つの和音区間とみなし得る範囲を検出してその位置で分割するルール等がある。この場合、複数のルールを同時に適用してもよい。
【0208】
続いて、ステップCD2では、分割されたメロディの区間毎に和声音を検出する。和声音の検出は、メロディデータの並びを分析し、各区間内で和声音とみなし得る音を検出することにより行う。さらに、ステップCD3に進み、メロディを分析して調を検出する。例えば、メロディを構成する各音名の出現度合い(単純な各音名の数でもよいし、各音名毎に音長を加算した値でもよい。)と、各調の音階音とのマッチングをとり、最も一致度の高い調をメロディの調として検出する。
【0209】
次に、ステップCD4において、メロディの連続する複数区間毎に、或いは単区間毎に、検出された和声音と検出された調に基づいて、和音又は和音進行とマッチングを取る。具体的には、連続する複数区間(例えば、4区間、3区間、2区間等)についての典型的な和音進行を、調毎に、データベースに記憶しておき、連続する複数区間の検出された和声音と、検出された調における各和音進行の構成音とを比較する。最初に4区間の和音進行と4区間の和声音とを比較し、マッチするものがあればそれに決定し、マッチするものがなければ、区間数を減らして3区間の和音進行と3区間の和声音とを比較し、マッチするものを決定する。3区間についてもマッチするものがなければ、2区間についてマッチングを取り、それでもマッチングするものがなければ、単独の和音構成音と単区間の和声音とを比較し、最もよくマッチする和音に決定する。
【0210】
ステップCD5では、このようなマッチング処理により、最も一致度の高い和音進行又は和音を当該区間のコードに決定し、この和音検出処理を終了する。なお、調毎に和音進行を持つものに限らず、特定の調についてのみ和音進行を持つようにし、調の主音に応じて和音進行の構成音の音名をシフトして、実質的に全調の和音進行を持つようにしてもよい。
【0211】
図27の伴奏パート付与処理において、伴奏パートは、メロディデータに馴染む和音進行と、予め記憶されたスタイルデータ〔伴奏パートの元になる1乃至複数パートの演奏データであって、所定の和音(例えば、Cメジャー)に基づいて作成された1乃至複数小節分の演奏データが、データべースに多数記憶されている。〕に基づいて生成される。メロディデータに馴染む和音進行は、前述のように、メロディから検出する方法、予めメロディデータ中に記憶させておく方法、メロディに対してユーザが指定する方法等によって得ることができる。和音進行を含んだメロディデータは、基地局(サーバ局)BSからをダウンロードしてもよい。
【0212】
この伴奏パート付与処理では、まず、ステップCE1において、多数記憶されている伴奏スタイルデータの中から、何れか1つをユーザにより選択する。各伴奏スタイルデータには、当該伴奏スタイルデータの内容を表わす用語(例えば、ポップスやクラシック等の音楽ジャンルや、「明るい」、「暗い」等の雰囲気を示す用語)が付与されており、これらの用語リストを携帯用端末装置TSの表示部13に表示し、操作子12を用いて何れかを選択することで、何れかの伴奏スタイルデータを選択する。或いは、各伴奏スタイルデータに付与された番号を、操作子12に含まれる数字スイッチを用いて選択してもよい。
【0213】
次に、ステップCE2にて、選択された伴奏スタイルデータをデータベースから読み出し、続くステップCE3で和音進行を取得し、さらに、ステップCE4において、読み出した伴奏スタイルデータに含まれる演奏データの音高を、取得した和音進行に応じて修正し、伴奏パートの演奏データを生成する。演奏データ音高の修正は、和音種類毎に用意された音高変換テーブル(演奏データの音高を和音種類に応じてどれだけ修正するかを規定したテーブルであって、このテーブルに規定された修正量だけ演奏データの音高をシフトさせると、指定された和音種類にマッチした音高が得られるように作成されたもの)を用いて行われる。
【0214】
そして、ステップCE5において、ステップCE4で生成された伴奏パートの演奏データをメロディデータに付与して、複数パートからなるメロディを作成し、この伴奏パート付与処理を終了する。
【0215】
なお、伴奏スタイルデータは、複数のセクションから構成され、セクションの進行を指定できるようにしてもよい。例えば、伴奏スタイルデータのセクションとして、イントロセクション、メインセクション、フィルインセクション、エンディングセクション等があり、メロディデータの進行に従って各セクションの並びやメインセクションの繰返し再生回数をユーザが指定したり、予めセクシヨンの並びやメインセクションの繰返し再生回数がプログラムされたセクション進行データを記憶しておき、これをメロディデータの進行に従って読み出すことで、セクション進行を指定したりしてもよい。このようにすると、変化に富んだ伴奏パートの演奏を得ることができる。
【0216】
〔種々の実施態様〕
携帯用端末装置で使用可能な楽音情報のフォーマットは、自機種フォーマットAに限られるものではない。例えば、図3のような発音制御回路を搭載し、この回路のなかで、従来の電子楽器で使用されている自動演奏機能(シーケンサー)を動作させることにより、SMFフォーマットCの楽曲情報をそのまま再生できるようにすることも可能である。この場合、他の楽音情報源装置(PCなど)から携帯用電話機端末に情報を取り込む際に形式変換をしなくて済む。しかし、圧縮処理は行う方が好ましい。
【0217】
実施例では、音源回路における楽音合成方式としてFM方式を採用しているが、楽音合成方式はこれに限らない。例えば、波形メモリ方式、物理モデル方式、高調波合成方式、フォルマント合成方式、「VCO+VCF+VGA」のアナログシンセサイザ方式等、種々の方式を適用することができ、これらの何れであってもよい。つまり、音源回路の楽音合成方式によって、設定情報として記録される音色に関する各種情報は異なってくるが、基本的には、従来より電子楽器で使用されている各楽音合成方式に対応する多種のパラメータ情報を採用することができる。
【0218】
また、音源回路自体については、専用のハードウエアを用いて音源回路を構成するものに限らず、「DSP+マイクロプログラム」を用いて音源回路を構成するようにしてもよいし、「CPU+ソフトウェア」のプログラムで音源回路を構成するようにしてもよい。
【0219】
さらに、1つの回路を時分割で使用することによって複数の発音チャンネルを形成するようなもでもよいし、1つの発音チャンネルが1つの回路で構成されるような形式のものであってもよい。
【0220】
【発明の効果】
以上説明したように、この発明の携帯用端末装置によれば、演奏情報の変更に関し、記憶手段に記憶されている演奏情報のパラメータを表示手段に表示させて、表示されたパラメータに対して編集を行っている状態において、通信手段が他の端末装置からの着信を受けた場合には、当該演奏情報を記憶手段に記憶するか否かの選択を促す表示が行われ、この表示に対するユーザ応答に基づいて当該演奏情報を記憶手段に記憶させるようにしているので、演奏情報内の編集したいパラメータを表示させパラメータ値を入力することで演奏情報の編集を行うことができるだけでなく、編集中に着信があった場合には、ユーザに対して編集中のデータを保存するか否かを問い合わせ、ユーザ指示に応じて同データを保存可能とすることができる。
【0221】
さらに、他の端末装置からの着信を受けたことに応じて、記憶手段に記憶されている演奏情報に含まれる着信演奏情報(着信メロディ曲)に基づく楽音信号の生成を開始させるが、編集中の演奏情報を記憶手段に記憶するか否かの選択を促す表示が行われる間は、着信演奏情報に基づく楽音信号の生成を行わないように制御するようにしているので、編集中に着信があっても、ユーザへのデータ保存の問い合わせの間は着信メロディ曲の発音処理に移行されず、突然、着信メロディ音が鳴り始めないようにすることができる。
【図面の簡単な説明】
【図1】図1は、この発明の一実施例による発音制御装置が適用される携帯用電話機端末の基本的構成を表わす概略ブロック図である。
【図2】図2は、この発明の一実施例による発音制御回路の詳細な構成を表わすブロック図である。
【図3】図3は、この発明の他の実施例による発音制御回路の詳細な構成を表わすブロック図である。
【図4】図4は、この発明の一実施例による携帯用電話機端末の使用環境の一例を表わす概念図である。
【図5】図5は、この発明の一実施例による携帯用電話機端末における自機種の情報フォーマットの例である。
【図6】図6は、他機種の携帯用電話機端末における他機種の従来形情報フォーマットの例である。
【図7】図7は、従来より電子楽器等で使用されている汎用の楽音情報フォーマツトの例である。
【図8】図8は、この発明の一実施例による携帯用電話機端末及び基地局から成る第1システムにおける情報授受関係を表わす機能的ブロック図の一部である。
【図9】図9は、この発明の一実施例による携帯用電話機端末及び基地局から成る第1システムにおける情報授受関係を表わす機能的ブロック図の他部である。
【図10】図10は、この発明の一実施例による携帯用電話機端末及びパーソナルコンピュータから成る第2システムにおける情報授受関係を表わす機能的ブロック図である。
【図11】図11は、この発明の一実施例による携帯用電話機端末及び記録媒体乃至他の電話機端末から成る第3システムにおける情報授受関係を表わす機能的ブロック図である。
【図12】図12は、この発明の一実施例による携帯用電話機端末での自端末処理例を示すフローチャートである。
【図13】図13は、この発明の一実施例による基地局でのサーバ処理例を示すフローチャートである。
【図14】図14は、この発明の一実施例によるパーソナルコンピュータ端末でのPC端末処理例を示すフローチャートである。
【図15】図15は、この発明の一実施例による携帯用電話機端末のカラオケ機能に適用可能な情報フォーマットの例である。
【図16】図16は、この発明の一実施例による携帯用電話機端末における楽曲演奏と歌詞表示の同期処理を表わす機能ブロック図である。
【図17】図17は、この発明の一実施例による携帯用電話機端末における「受信処理1」のフローチャートである。
【図18】図18は、この発明の一実施例による携帯用電話機端末における「その他処理1」のフローチャートである。
【図19】図19は、この発明の一実施例による携帯用電話機端末における「選択/設定処理1」のフローチャートである。
【図20】図20は、この発明の一実施例による携帯用電話機端末における「割込み処理2」のフローチャートである。
【図21】図21は、この発明の一実施例による携帯用電話機端末における「選択/設定処理2」のフローチャートである。
【図22】図22は、この発明の一実施例による携帯用電話機端末における「エディット処理1」のフローチャートである。
【図23】図23は、この発明の一実施例による携帯用電話機端末システムの「音声作曲機能」を説明するための機能ブロック図である。
【図24】図24は、この発明の一実施例によるパーソナルコンピュータ端末等の「自動作曲機能」を説明するための機能ブロック図である。
【図25】図25は、この発明の一実施例による携帯用電話機端末における楽曲データの自動生成方法を概略的に表わすフローチャートである。
【図26】図26は、この発明の一実施例による携帯用電話機端末における楽曲のフィーリング/スタイルの表示画面例を表わす図である。
【図27】図27は、この発明の一実施例による携帯用電話機端末における楽曲データに馴染む和音を自動的に決定する方法を概略的に表わすフローチャートである。
【図28】図28は、この発明の一実施例による携帯用電話機端末におけるメロディデータに馴染む伴奏パートをメロディパートに付与する方法を概略的に表わすフローチャートである。
【符号の説明】
TS 携帯用電話機端末(端末システム、自機)、
BS 基地局(ベース局)、
PC パーソナルコンピュータ端末、
OS,OSa,OSb 他の電話機端末、
SM 合成楽音信号、
ST 通話音信号、
SE 効果付与後信号。
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a portable terminal device, and more particularly to an apparatus and system for giving various information such as music information to a sound generation control device or the like built in a portable terminal device such as a portable telephone terminal.
[0002]
[Prior art]
With the development of portable telephone terminals in recent years, there is one that can make a melody sound when an incoming call is received. The melody sound that can be reproduced in such a portable telephone terminal is a single-tone pronunciation music using a buzzer sound. Moreover, such music information can be downloaded from a base station or the like.
[0003]
However, this type of melody sound reproducing apparatus in a conventional portable telephone terminal cannot reproduce music that simultaneously produces a plurality of types of musical sounds, and cannot make various settings such as timbres and effects. Therefore, it was impossible to play and enjoy various music.
[0004]
Furthermore, there is no conventional portable telephone terminal that can reproduce characters (lyrics) synchronously corresponding to the music to be reproduced.
[0005]
[Problems to be solved by the invention]
In view of such circumstances, an object of the present invention is to generate a plurality of sounds simultaneously using an FM sound source or the like in a portable terminal device, so that a melody sound at the time of an incoming call or a background music (BGM) sound during a call is obtained. Can be easily set, edited, created, etc., tones, effects, etc. of musical sound information, and it is possible to reproduce rich, diverse and diverse music, and the terminal device processing functions and user preferences It is to obtain a musical sound suitable for the.
[0006]
[Means for Solving the Problems]
According to the present invention (hereinafter, for convenience of understanding, reference numerals, locations, terms, and the like of corresponding embodiments are illustratively added in parentheses), communication means for communicating with other terminal devices (OS) (6), display means (5, 13) for displaying various information, storage means (2, 3, KB1) for storing performance information (IA, IK), and stored in this storage means The performance information parameters are displayed on the display means, the editing means (1, TR5, FIG. 22) for editing the displayed parameters, and the tone generation means (8, 8) for generating a tone signal based on the performance information. KB4), and in response to the communication means receiving an incoming call from another terminal device, the musical tone generation means receives the incoming performance information (incoming call) set for incoming calls out of the performance information stored in the storage means. Music signal based on a melody song) And an incoming call notification means (1, KR12, KR42) for starting the composition, and the editing means edits when the communication means receives an incoming call from another terminal device while editing the performance information. Display that prompts the user to select whether or not to store the performance information in the storage means is performed on the display means, and the performance information being edited is stored in the storage means based on a user response to the display (ER25 to ER28). The musical sound generation means is provided with a portable terminal device (TS) that does not generate a musical sound signal based on the incoming performance information (ER28) while the display means prompts selection.
[0009]
[Effects of the Invention]
In the portable terminal device according to the present invention, the parameter of performance information stored in the storage unit is displayed on the display unit by the editing unit, and the displayed parameter is edited (ER22 to ER25). Here, when the communication means receives an incoming call from another terminal device while editing the performance information (KR11 = YES → KR13 · ER25 = YES), the performance information is stored in the storage means. A display prompting the user to select whether or not is performed, and the performance information is stored in the storage means based on a user response to the display (ER27 / ER28). Furthermore, in response to receiving an incoming call from another terminal device (KR11 = YES → KR12 to KR14 · KR41 = YES), the incoming performance information set for incoming calls out of the performance information stored in the storage means. While the generation of the musical tone signal based on (the incoming melody song) is started (KR42), the musical tone based on the incoming performance information is displayed while the display prompting the user to select whether or not the performance information being edited is stored in the storage means. Control is performed so as not to generate a signal (ER28).
[0010]
Therefore, not only can the performance information stored in the storage means be displayed, but the parameter to be edited can be displayed by operating the telephone number input numeric keypad to edit the performance information. When an incoming call is received, the user is inquired whether or not to save the data being edited, and the data can be saved according to the user instruction. Further, even if an incoming call is received during editing, the process of sound generation of the incoming melody is not performed during the inquiry to save the data to the user, and the incoming melody can be prevented from suddenly starting to sound.
[0011]
In the portable terminal device according to the present invention, in response to receiving an incoming call from another terminal device (KR11 = YES → KR13 · ER25 = YES), the editing operation in the editing means is forcibly terminated ( ER26), when an incoming call is received during editing, the editing mode can be terminated and the call can be started.
[0012]
The portable terminal device according to the present invention can be provided with FM sound source method, waveform memory method or physical model method sound source means as a sound source method, and the sound source circuit is constituted by a DSP including a microprogram. A sound source circuit including a sound source circuit or a CPU including software can be provided.
[0013]
[Other features]
Further, according to another feature relating to the implementation of the present invention, the following (a) to (e) can be configured:
(A) First feature regarding format conversion = In a musical sound information utilization system comprising a portable terminal device that performs musical sound processing using music information in a first format and a base station having a musical sound information source, the base station A music information utilization system including a format conversion means for converting music information of a format different from the format into music information of the first format, and a portable terminal device that performs music processing using the music information of the first format A base station capable of distributing musical sound information from a musical sound information source, comprising a format converting means for converting music information of a format different from the first format into music information of the first format. In this musical sound information utilization system or base station, the base station (server) can convert the format of the music information for other models different from the first format or the general-purpose music information to the music information for the own model that is the first format. .
[0014]
(B) Second feature related to format conversion = In a musical sound information utilization system comprising a portable terminal device that performs musical sound processing using music information in a predetermined format and a base station having a musical sound information source, the base station is a portable terminal. A musical sound information utilization system comprising means for receiving identification information relating to the terminal device from the apparatus, and means for creating music information of a predetermined format from a musical sound information source based on the received identification information, and a music of a predetermined format A base station capable of distributing music information from a musical sound information source to a portable terminal device that performs musical sound processing using information, and means for receiving identification information relating to the terminal device from the portable terminal device; Means for creating music information in a predetermined format from a musical sound information source based on the received identification information. In this musical sound information utilization system or base station, when information (identification information) about a terminal is transmitted from the terminal to the base station (server), the base station (server) may perform format conversion based on the information. it can.
[0015]
(C) Third feature regarding format conversion = a portable terminal device that performs musical tone processing using music information in a predetermined format, and formats music information in a format different from the first format into music information in the first format A format conversion means for conversion is provided. In this portable terminal device, the format of the terminal device itself can be converted from the music information for other models or the general-purpose music information in a format different from the first format into the music information for the own model in the first format.
[0016]
(D) Features relating to trial listening = in a musical sound information utilization system comprising a portable terminal device capable of generating musical sounds and a base station having a musical sound information source, the base station transmits information from the musical sound information source as streaming data The portable terminal device includes a musical sound information utilization system having means for reproducing information based on streaming data from the base station in real time, and a musical sound information source for a portable terminal device capable of generating musical sounds. A base station capable of distributing musical sound information, comprising means for streaming transmission of information from a musical sound information source to a portable terminal device. In this musical sound information utilization system and base station, information can be sampled in real time on the portable terminal device side by streaming transmission of information from the base station (server).
[0017]
(E) Features relating to removable storage medium = portable terminal device to which a removable small storage medium can be attached, means for acquiring music information stored in the removable small storage medium, and acquired music information And a portable terminal device to which a removable small storage medium can be attached, wherein the music information is processed and the processed music information is attached to the removable small storage medium. And means for writing. In these portable terminal devices, it is possible to mount a detachable small storage medium. In the former terminal, music information can be taken from the recording medium into the terminal system. In the latter terminal, the recording medium can be loaded from various information sources. Music information can be written in
[0018]
[Various features]
The following features (1) to (8) can be configured according to various features provided in the present invention:
(1) A sound generation control device provided in a portable terminal device capable of generating a musical sound, which is set based on information acquisition means for acquiring performance information and setting information related to timbres and effects, and setting information related to timbres. Sound source means for generating a tone signal corresponding to performance information provided with a timbre, effect applying means for applying an effect set based on setting information relating to the effect to the generated music signal, and an effect And output means for outputting a musical tone signal.
[0019]
(2) A sound generation control device provided in a portable terminal device capable of generating a musical sound, which has a predetermined tone color and a predetermined effect based on storage means for storing musical sound information and the stored musical sound information. A musical sound generating means for generating a given musical sound signal, and a control means for controlling the storage means and the musical sound generating means independently of the portable terminal device.
[0020]
(3) Storage means for storing musical tone information, audio information, and image information, and a predetermined tone color or effect corresponding to the setting information included in the musical tone information based on the stored musical tone information (“to” is both or A sound generation control device that generates a musical sound signal to which one of them, that is, “and / or” is used. The same applies hereinafter), and a sound signal and an image signal based on the stored sound information and image information. A portable terminal device. Here, the musical tone information stored in the storage means can be information described in a downsized format compared to the general-purpose musical sound information format corresponding to the storage capacity of the storage means.
[0021]
(4) In a musical sound information utilization system comprising a portable terminal device capable of generating musical sounds and a base station having a musical sound information source, the corresponding musical sound information is converted into musical sound information according to selection information transmitted from the portable terminal device. Information selection means for selecting from the source, setting information giving means for giving setting information representing the tone color or effect to be given to the music sound generated by the portable terminal device, and the music sound to which the setting information is given. A musical tone information utilization system comprising a sound generation control device that generates a musical tone signal to which a predetermined tone color or effect is given based on information. The system may further include a charging unit that performs a charging operation for the portable terminal device that has transmitted the selection information.
[0022]
(5) Information compression means for compressing the created or edited musical sound information in the musical sound information using system comprising a portable terminal device capable of generating musical sounds and a musical sound information processing device capable of creating or editing musical sound information; A sound generation control device that generates a musical tone signal to which a predetermined tone color or effect is given based on the compressed musical tone information.
[0023]
(6) In a musical sound information utilization system comprising a portable terminal device capable of generating musical sounds and a musical sound information source storing musical sound information, the musical sound information stored in the musical sound information source is taken into the portable terminal device. An information capturing unit, an information editing unit that edits the captured musical tone information, and a sound generation control device that generates a musical tone signal to which a predetermined tone color or effect is given based on the edited musical tone information.
[0024]
(7) storage means for storing performance information and lyric information corresponding to the progress of the performance; sound generation means for sequentially generating musical sound signals based on the stored performance information; and generated based on the stored lyric information A portable terminal device comprising: display means for generating a lyrics display signal corresponding to a musical sound signal.
[0025]
(8) Storage means for storing lyrics information corresponding to the performance progress of the first performance information, the second performance information, and the second performance information, and the first musical tone signal based on the first performance information and the second performance information, respectively. And a sound generation control device for generating a second musical tone signal, a display means for generating a lyrics display signal corresponding to the second musical tone signal based on the lyrics information, and a first musical tone signal prior to the generation of the second musical tone signal. A portable terminal device comprising control means for controlling the sound generation control device to generate.
[0026]
In the configuration of (1) above, in a portable terminal device capable of generating musical sounds, a musical tone signal corresponding to performance information is generated by being provided with a timbre set based on the timbre setting information, In addition, a sound generation control device is provided that provides an effect set based on setting information related to the effect, so that a plurality of sounds can be generated simultaneously using an FM sound source, etc. The BGM sound inside, the music that you enjoy when you need it can be rich and diverse.
[0027]
In the configuration of (2) above, the control means (CPU) that operates independently from the portable terminal device is used to generate a musical tone signal having a predetermined tone and a predetermined effect. Without being restricted by the control of the portable terminal device main body, it is possible to perform a generous tone signal generation process.
[0028]
In the configuration of the above (3), a tone signal to which a predetermined tone color or effect corresponding to the setting information included in the tone information is generated based on the tone information, and the tone signal is generated based on the tone information and the image information. In addition, since the image signal is generated, it can be enjoyed in various modes by using sounds and images together with the reproduced music. In addition, since the musical tone signal is generated using musical tone information described in a format downsized compared to the general-purpose musical tone information format in correspondence with the storage capacity of the storage means, the portable terminal device It is possible to reproduce high-quality musical sounds within the maximum allowable range of the data processing function and capacity, that is, without squeezing the memory in the apparatus.
[0029]
In the configuration of (4) above, a musical tone information utilization system is formed by a base station (server) having a portable terminal device and a musical tone information source, and corresponding musical tone information is determined according to selection information transmitted from the portable terminal device. Is selected from a musical sound information source, and setting information representing a tone color or an effect given to a musical sound generated by the portable terminal device is assigned to the selected musical sound information, and predetermined information is added based on the musical sound information to which the setting information is given. A musical tone signal to which the timbre or effect is given is generated. Therefore, it is possible to effectively use the database of the server and obtain richer and more diverse musical sounds. Furthermore, this system can provide a corresponding service to a specific portable terminal device user by performing a charging operation on the portable terminal device that has transmitted the selection information.
[0030]
In the configuration (5) above, the musical sound information is used together with the musical sound information processing apparatus such as a personal computer terminal or an intelligent electronic musical instrument, and the musical sound information processing apparatus creates or edits the desired sound information. Since compression is performed to a size corresponding to the processing function of the terminal device, setting, editing, creation, and the like of tone information and effects suitable for the capability of the portable terminal device can be easily performed.
[0031]
In the configuration of (6) above, musical tone information stored in a musical tone information source such as an external storage medium or another telephone terminal is taken into the portable terminal device, and the taken musical tone information is edited. Therefore, various types of musical tone information can be processed into musical tone information suitable for the processing capability of the portable terminal device and the user's preference.
[0032]
In short, according to these configurations, the sound generation control device in the portable terminal device is provided with a sound source circuit capable of simultaneously generating a plurality of sounds, and a tone color, an effect, and the like are given to the tone based on the setting information information related to the tone generation. Therefore, as a melody at the time of an incoming call, BGM during a call, and the like, and as music to be enjoyed at any time according to the user's needs, it is possible to reproduce a variety of musical tunes. In addition, various types of information including musical tone information can be arbitrarily imported from external information sources such as base stations, personal computer terminals, other telephone terminals, and small storage media. Can be reproduced as an incoming melody or BGM.
[0033]
In addition, information to be imported into the portable terminal device is attached with setting information related to tone generation, information unnecessary for the storage capacity of the terminal device is deleted and information is compressed, or used by the own model, that is, the terminal device itself By converting to a format that can be used, it is possible to convert to a form that can be used by the terminal device, so that expandability can be further enhanced. Furthermore, by using the editing means, it is possible to easily acquire the musical sound information to which information relating to various settings is attached while downsizing the information amount.
[0034]
In the configuration of (7), the performance information and the lyric information corresponding to the progress of the performance are recorded, and the musical sound signal is sequentially generated based on the performance information, and the musical sound signal generated based on the lyric information is generated. Karaoke can be enjoyed on a portable terminal device such as a mobile phone, and the lyrics can be displayed in spare time to learn the lyrics. It can be used effectively for practice.
[0035]
In the configuration of (8), the first performance information, the second performance information, and the lyric information corresponding to the performance progress of the second performance information are stored, the second musical sound signal is generated based on the second performance information, Based on the lyric information, a lyric display signal corresponding to the second musical sound signal is generated to enable karaoke reproduction, and the first musical sound signal based on the first performance information is generated in preference to the karaoke reproduction. Therefore, it is possible to automatically switch from the karaoke playback to the ringing melody playback by the first musical tone signal, and the lyrics display is not disturbed.
[0036]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings. The following embodiments are merely examples, and various modifications can be made without departing from the spirit of the present invention.
[0037]
[Overview of terminal system]
FIG. 1 is a schematic block diagram showing a basic configuration of a portable telephone terminal to which a sound generation control device according to one embodiment of the present invention is applied. The terminal system TS includes a terminal system central processing unit (main body CPU) 1, a terminal system read only memory (main body ROM) 2, a terminal system random access memory (main body RAM) 3, a detection circuit 4, a display circuit 5, and transmission / reception. The circuit 6, the audio control circuit 7, the sound generation control circuit 8, the connection circuit 9, the communication interface (I / F) 10, etc. are provided, and these devices 1 to 10 are connected to each other via a terminal system bus (main body BUS) 11. Connected.
[0038]
In the terminal system TS, the main body CPU 1 that controls the entire terminal system performs various controls such as call control, screen control, and sound generation control according to a predetermined program. The main body ROM 2 stores a predetermined control program and control data in order to perform these processes. For example, with respect to musical sounds, music information for playing a melody at incoming, background music (BGM) during a call, etc., performance information, setting information, conversion table for information format conversion, compression table for information compression, respectively A plurality of recordings are made, and predetermined sound information, image information, etc. are recorded in advance as setting information for those other than musical sounds. The setting information refers to information set as a condition for executing processing related to sound emission or image display at the time of an incoming call in the terminal system TS, during a call, or at an arbitrary time as necessary. The setting information includes sound information, image information, sound and image control information, and the like in addition to the sound-related setting information related to the tone color and effects (including DSP) of the sound.
[0039]
The main body RAM 3 is used for storing data and parameters necessary for processing such as call control, screen control, and sound generation control, and is additionally introduced into the terminal system TS or newly in the terminal system TS. A plurality of pieces of music information, performance information, and setting information to be created can be stored.
[0040]
The detection circuit 4 includes an operation element 12 composed of a push button switch or the like provided on the surface of the main body of the portable telephone terminal, and detects a switch operation state of the operation element 12. These switches include a call switch used during a call, a ringing melody download request switch, a setting switch for the tone generation control circuit 8 (sound source / effect circuit), a creation / editing switch for various information, and the like. In addition, a display unit 13 is connected to the display circuit 5, and various visual information such as various call information and various melody information related to sound generation control can be displayed on the liquid crystal screen of the display unit 13.
[0041]
The transmission / reception circuit 6 includes a communication antenna, and is a circuit for communicating with another telephone terminal via a base station (also referred to as a server station or a relay station) to make a call and for requesting and receiving music information and setting information. Is also used. On the other hand, the audio control circuit 7 is a circuit provided for controlling a voice signal at the time of a call and an input / output signal of a musical sound, and a voice transmission for transmitting an input voice from the microphone (MIC) 14 to the transmission / reception circuit 6. In addition to the function and the voice reproduction function for sending the call voice signal received by the transmission / reception circuit 6 to the call speaker 15 and the external output terminal 16, the musical sound signal received from the sound generation control circuit 8 is sent to the call speaker 15 and the output terminal 16. It has a BGM playback function to send out.
[0042]
The sound generation control circuit 8 is a circuit that uniquely performs a series of processes for controlling a musical tone signal such as a ringing melody sound and a BGM sound, and can simultaneously generate a plurality of sounds. That is, it has a function of generating a musical tone such as a ringing melody or BGM by synthesizing a musical tone signal and transmitting it to the sounding speaker 17 or the audio control circuit 7. The sound generation control circuit 8 also includes a digital output terminal 18 for transmitting the digital musical tone signal to other digital musical tone signal using devices. Note that the sound generation speaker 17 may be combined with the telephone speaker 15 so as to be combined into one.
[0043]
The connection circuit 9 is a circuit for mounting a portable detachable small storage medium 19. Various types of information including music information can be taken from the mounted small storage medium 19. Information can also be written. In addition, the communication I / F 10 includes a terminal for connecting a cable to an external device, and communicates with other telephone terminals and personal computer (PC) terminals via the communication cable 20 connected to the terminal, and stores music information. Various kinds of information can be taken into the terminal system TS from these devices, or can be given to these devices from the terminal system TS.
[0044]
The small storage medium 19 stores music information and setting information received from other telephone terminals and personal computer terminals via the communication cable 20 and the communication I / F 10, and from the server (BS) via the transmission / reception circuit 6. The received music information and setting information can be stored. Alternatively, the self-portable terminal device TS can be used to store automatically operated music or automatically arranged music information. Also, the stored music information and setting information are read out and sounded as an incoming melody or BGM.
[0045]
[Sound generation control circuit (1)]
FIG. 2 is a block diagram showing a detailed configuration of a sound generation control circuit according to one embodiment of the present invention. In this example, the sound generation control circuit 8 does not include a CPU in the circuit, and the operation is controlled by the main body CPU 1 provided in the main body of the portable telephone terminal (terminal system TS). The sound generation control circuit 8 transmits and receives music information, performance information, setting information, and other information (such as playback start / stop) via a bus connection path connected to the system BUS11.
[0046]
The control circuit 21 can perform bidirectional information communication with the terminal system TS main body via the bus connection path described above. Performance information or setting information prepared in advance on the main body side or received from the outside is recorded or stored in the main body ROM 2 or main body RAM 3, but the performance information is stored in a first-in first-out memory (FIFO) 22 by the control circuit 21. The setting information regarding the timbre and the effect can be stored in the timbre / effect RAM 23. In this case, the performance information and setting information stored in the FIFO 22 and the RAM 23 are all or part of one piece of music information.
[0047]
The control circuit 21 also reads tone color setting information and effect setting information (including a DSP program) in the tone / effect RAM 23 based on the set tone color and setting effect designated from the main body side, and the tone generator circuit 24 and the effect circuit The timbre and effect at 25 are set. The control circuit 21 further has a function of notifying the main body of the limit of the storage capacity of the FIFO 22 and the timbre / effect RAM 23 and requesting the temporary stop of information communication from the main body side.
[0048]
The FIFO 22 and the reading circuit 26 function as a performance information supply control device that sequentially transmits performance information received from the main body ROM 2 to the main body RAM 3 to the sound source circuit. That is, the FIFO 22 temporarily stores the received performance information in the order of reception, and the reading circuit 26 accesses the FIFO 22 at predetermined time intervals, and if there is information, sequentially continues it and outputs it to the tone generator circuit 24.
[0049]
The sound source circuit 24 is, for example, an FM sound source, and can simultaneously generate a plurality of sounds. The tone generator circuit 24 sets the tone color to be generated based on the setting information related to the tone color received from the tone color / effect RAM 23, and sequentially generates the tone signals corresponding to the set tone color based on the performance information received from the reading circuit 26. Combined and output to the mixer (MIX) 27.
[0050]
The effect circuit 25 is a circuit for setting an effect such as reverb to be applied based on the setting information regarding the effect received from the timbre / effect RAM 23, and assigns the set effect to the signal input from the MIX 27 according to the DSP program. Then, the signal after applying the effect is output to the MIX 27 again.
[0051]
The call sound is input to the MIX 27 as a digital signal through a connection path to the audio control circuit 7 of the terminal system TS body. The MIX 27 sums up signals input from the sound source circuit 24, the effect circuit 25, and the audio control circuit. That is, the input signal to MIX27
(1) The synthesized musical tone signal SM from the tone generator circuit 24,
(2) Call sound signal ST from the audio control circuit 7;
(3) Effect-added signal SE from the effect circuit 25
There are three types.
[0052]
Here, the input signals SM and ST are selectively output from the MIX 27 to the effect circuit 25 to give the effect, but the signals SM and ST output for the effect in this way are the main body of the terminal system TS. This is selectively set by operating a predetermined switch in the operation element 12. The MIX 27 can output all the synthesized signals to the digital-analog conversion circuit (DAC) 28 and also output them as digital signals via the digital output terminal 18.
[0053]
The DAC 28, the amplitude control circuit (VOL) 29, and the amplifier circuit (AMP) 30 constitute an analog output device. The analog musical sound signal output from the DAC 28 is adjusted in volume by the VOL 29 and output to the audio control circuit 7 of the terminal system TS main body via the headphone terminal, or is transmitted to the sound generation speaker 17 via the AMP 30 for musical sound. As sound is emitted. That is, all the synthesized signals are output as analog signals from the VOL 29 to the audio control circuit 7 side, supplied from the AMP 30 to the speakers 17 as analog signals, and emitted as musical sounds.
[0054]
[Sound generation control circuit (2)]
FIG. 3 is a block diagram showing a detailed configuration of a sound generation control circuit according to another embodiment of the present invention. In this example, the sound generation control circuit 8 includes a sound generation control CPU 31 in the circuit, and can control the operation of the sound generation control circuit 8 independently of the main body CPU 1. A sound generation control CPU 31, a communication circuit 32, a timer 33, a sound generation control ROM 34, a sound generation control RAM 35, a sound source circuit 36, an effect circuit 37, a mixer circuit (MIX) 38, an amplitude control circuit (VOL) 39, etc. 39 are connected to each other via a sound generation control circuit bus (sound generation control BUS) 40.
[0055]
The communication circuit 32 has the following two communication functions:
(1) “Perform bi-directional communication of information with the main body BUS11” = Sound control RAM 35 that stores music information, performance information, setting information, etc. received from the outside of the terminal system TS via the main body BUS11 and the communication circuit 32 (Note that the sound generation control ROM 34 stores various tables and the like for sound generation control). In addition, it receives each piece of information (operation information of the main body operator) related to selection of timbre, effect, etc., parameter change, selection of music information to be reproduced, and the like. The received information is interpreted by the operation of the sound generation control CPU 31, and processing corresponding to each information, for example, setting related to the selected tone color is performed on the tone generator circuit 36 (corresponding to the tone color selected from the ROM 34 or the RAM 35). The setting information is read out and output to the tone generator circuit 36).
[0056]
Further, when editing of music information or setting information recorded in the sound generation control ROM 34 or the sound generation control RAM 35 in the sound generation control circuit is instructed by the operation of the main body operator, the operation is handled from the ROM 34 or RAM 35. Information to be selected (selected) is read and transmitted to the main body RAM 3 (the editing process is performed using the main body RAM 3, and when the editing process is completed, the information is again overwritten in the RAM 35 in the sound generation control circuit). .
[0057]
(2) “Perform bidirectional communication of information with the audio control circuit 7” = Send a tone signal or the like synthesized in the sound generation control circuit 8 to the audio control circuit 7 or a call sound signal received from the audio control circuit 7 Are processed in the sound generation control circuit 8, and the processed signal is transmitted to the audio control circuit 7 again. The above processing includes, for example, an effect imparting process for call sounds and a pitch / tone color conversion process for call sounds.
[0058]
The sound generation control CPU 31 controls the operation in the sound generation control circuit 8 independently from the terminal system TS main body, and based on the signal generated from the timer 33, the performance stored in the sound generation control ROM 34 and the sound generation control RAM 35. By sequentially reading the information, a tone such as an incoming melody or BGM is reproduced. The sound generation control CPU 31 also transmits the setting information in the sound generation control ROM 34 and the sound generation control RAM 35 to the sound source circuit 36, the effect circuit 37, etc. via the sound generation control BUS 40 for reproduction, and further sets the tone color of the musical tone and the applied effect. Can also be controlled. It should be noted that the process of starting and ending the musical tone performance is started based on an instruction operation using the operation element 12 of the main body.
[0059]
The timer 33 generates a signal every predetermined time. Based on the signal generated here, the tone generation timing of the musical tone such as the incoming melody tone and BGM tone is controlled to determine the performance tempo of the generated musical tone. This tempo can be controlled by the user.
[0060]
Any method of tempo control may be used. For example, a method of changing the cycle of a signal generated from the timer 33 according to the set tempo (that is, changing the processing cycle of music information), a processing cycle (the cycle of the signal from the timer 33) being constant, A method of changing the value of timing data in the information according to the set tempo, and a processing cycle (cycle of the signal from the timer 33) being constant, and a method of counting the timing data in the music information in one processing. There is a method to change it according to. The tempo specification by the user can be specified by a numerical value of an absolute tempo value (such as “120” or “150”), a specification by a tempo slogan (“Allegro”, “Moderate”, etc.), a change from the reference tempo [percent ( %) And increase / decrease value (±)], specification by sensory terms ("fast", "slow", "medium", etc.). These are specified using the operation element 12 of the main body.
[0061]
The sound generation control ROM 34 stores a plurality of predetermined music information for incoming melody or BGM, performance information, setting information, conversion table for information format conversion, and compression table for information compression. A plurality of newly added or newly created music information, performance information, and setting information can be stored.
[0062]
In this example, the sound source circuit 36 is an FM sound source, and can simultaneously generate a plurality of sounds. The tone color is set based on the setting information related to the tone color transmitted from the tone generation control ROM 34 and the tone generation control RAM 35 via the tone generation control BUS 40. The tone generator circuit 36 sequentially synthesizes tone signals corresponding to the set tone color based on the performance information transmitted from the tone generation control ROM 34 and the tone generation control RAM 35 under the control of the tone generation control CPU 31 and timer 33, and the MIX 38 Output to.
[0063]
The effect circuit 37 sets the effect to be given to the musical sound based on the setting information regarding the effect transmitted from the sound generation control ROM 34 and the sound generation control RAM 35 via the sound generation control BUS 40. The effect circuit 37 also applies an effect to the signal input from the MIX 38, the speech sound signal ST input from the communication circuit 32, and the like, and outputs the applied signal SE to the MIX 38 again.
[0064]
The MIX 38 sums up the input signals and outputs them to the digital-to-analog converter circuit (DAC) 41 and the digital output terminal 18. The signal input to MIX38
(1) The synthesized musical tone signal SM from the tone generator circuit 36,
(2) Call sound signal ST from the audio control circuit 7;
(3) After-effect signal SE from the effect circuit 37
and so on. The MIX 38 selectively outputs the input signals SM and ST to the effect circuit 37 to give the effect, and the output signal is set by operating a predetermined switch of the operation element 12 on the terminal system TS main body side.
[0065]
The amplitude control circuit (VOL) 39 and the amplifier circuit (AMP) 42 constitute an analog output device, the volume of the analog tone signal output from the DAC 41 is adjusted by the VOL 39, and the volume-adjusted analog tone signal is sent from the headphone terminal. In addition to being output to the audio control circuit 7, it is further transmitted to the sound generation speaker 17 via the AMP 42.
[0066]
[Terminal system usage environment]
FIG. 4 is a conceptual diagram showing an example of the usage environment of the portable telephone terminal according to one embodiment of the present invention. In the first environment, when a user makes a call to a base station (server station) BS via a transmission / reception circuit 6 from a portable telephone terminal (terminal system) TS used by a user, selects desired music information and requests transmission thereof. Corresponding music information or the like is transmitted from the base station BS, downloaded into the terminal system TS, and this information can be used to sound a melody sound at the time of incoming call, a BGM sound during a call, or the like.
[0067]
In the second environment, the terminal system TS receives music information or the like created by the personal computer terminal PC via the communication cable 20 connected to the communication I / F 10, and uses this as melody or BGM. Can do.
[0068]
In the third environment, the terminal system TS introduces music information or the like recorded on the small external recording medium 19 attached to the connection circuit 9 from the recording medium 19, and in the fourth environment From the telephone terminal OS, the music information and the like of the other telephone terminal OS are received via the telephone line and the transmission / reception circuit 6 via the base station BS, or via the communication cable 20 and the communication I / F 10. Can be used for musical tone pronunciation.
[0069]
Music information introduced into the terminal system TS from music information sources such as the base station BS, personal computer terminal PC, external storage medium 19 or other telephone terminal OS is edited in the information source BS, PC or system TS. Downsized to usable form by compression, format conversion, etc.
[0070]
For example, the music information (including performance information and setting information) introduced into the terminal system TS from these music information sources may be in a format suitable for the own model or in another format. When a format suitable for the model is introduced, it is created in advance in this format, or is converted from another format (format conversion). This format conversion can be performed by the base station BS or personal It is performed in the computer terminal PC. When another format is introduced into the terminal system TS, the other format is converted into the format in the terminal system TS in the terminal system TS.
[0071]
[Information format]
FIG. 5 shows an example of the information format of the own model in the portable telephone terminal according to one embodiment of the present invention. As shown in FIG. 5, the portable phone terminal system TS and the “music information IA corresponding to its own model” that can be handled in another phone terminal of the same model that performs information processing in the same format as the terminal system TS, It consists of setting information SA for setting tone color / effect and performance information MA for musical tone performance. Each information SA, MA is a record of only the minimum necessary information so that the storage capacity of the memory (RAM 3) in the terminal system is not compressed and a better musical tone can be produced. In the terminal system TS, sound generation control is performed according to these pieces of information. Hereinafter, this type of information format is referred to as “own model format A”.
[0072]
The setting information SA is related to the tone.
(1) Tone number NA for identifying the tone type,
(2) Detailed information (tone parameter) DA for setting the tone in the tone generator circuit
Is included. The timbre parameter DA of (2) includes algorithm data AA, frequency parameter (F parameter) FA, envelope parameter (EG parameter) EA, and the like.
[0073]
The algorithm data AA is a parameter for determining a combination or algorithm of a plurality of operators (sine wave memory + output level calculator + envelope (EG) waveform synthesizer set) in the FM sound source. Each operator is a parameter for determining the frequency of the readout sine wave, and the EG parameter EA is a parameter for setting a plurality of level values and rate values for synthesizing the envelope waveform (EG waveform). .
[0074]
In addition to the tone color setting information NA and DA, the setting information SA includes information for setting effect parameters, an effect program (DSP program) for determining the contents of the effect circuit 25, sound information, image information, and the like. There is.
[0075]
The performance information MA is information in which performance information composed of timing data TM, key number KN, gate time GT, and the like is recorded in the order of performance.
[0076]
FIG. 6 shows an example of a conventional information format in another type of portable telephone terminal. As shown in FIG. 6, the conventional type music information IB used as the incoming melody information in the portable telephone terminal is only performance information represented by a symbol string composed of symbols a, b, c,. There is no setting information. Hereinafter, this type of information format is referred to as “conventional format B”.
[0077]
More specifically, the performance information IB of other models includes symbols (#, 1, 2, 3,...) That can be input with the numeric keypad provided in the portable telephone terminal in the order of musical performance according to a predetermined rule. They are arranged. For example, the number “1” corresponds to the pitch of “do”, the number “2” corresponds to the pitch of “re”, and so on. Stipulate. Therefore, when “1-1-2-1-1-...” Is represented by the symbol strings a, b, c,... Represents a musical sound in which "" is pronounced in eighth note length and then "do" is pronounced in quarter note length again.
[0078]
FIG. 7 shows an example of a general-purpose musical sound information format conventionally used in electronic musical instruments and the like. In a conventional electronic musical instrument or the like, as shown in FIG. 7, in accordance with a general musical tone information format [“SMF” (Standard MIDI File) format], setting information SC for setting tone / effect and performance for musical performance. A musical tone information IC composed of information MC is used. Hereinafter, this type of information format is referred to as “SMF format C”.
[0079]
Of the setting information SC, information for setting the tone is
(1) Tone number NC as tone color identification information,
(2) Detailed information for tone setting (tone parameter) DC
It is composed of
[0080]
Unlike the timbre parameter DA for the terminal system TS, the timbre setting detailed information DC of (2) has a large amount of information as shown in FIG. For example, in addition to the algorithm data AC and F parameter FC, rate scale data RS for controlling the EG level according to the pitch to be generated is stored, and the content of the EG parameter EC also includes more detailed information. The number of level values and rate values is larger than the EG parameter EA in the setting information SA in the own model format A in FIG. Excess information in the detailed information DC is compressed as information that is not essential in the terminal system TS when the format is converted from the SMF format C to the own model format A in the system including the terminal system TS. (Deleted).
[0081]
The performance information MC is information in the “duration DR + event IV” format, and the key-on and key-off events are stored together with the duration data DR, so the amount of information is slightly increased. Also, velocity data is recorded for each key-on, and this velocity data is also compressed (deleted) at the time of format conversion to its own model format A.
[0082]
Note that the music information IC in FIG. 7 and the music information IA in FIG. 5 are described as a one-part configuration, but this is for convenience of explanation, and the music information IC and IA have a multi-part configuration. Is normal. In that case, only one setting information may be recorded for all parts.
[0083]
[Information exchange with base stations]
8 and 9 are functional block diagrams showing information exchange relationships in the first system including the terminal system and the base station according to one embodiment of the present invention. In the present invention, the own terminal, that is, the portable telephone terminal system TS receives music information and setting information from the base station BS, but these information are converted in form as necessary on the base station BS side when the information is requested. Sometimes it is information available in the terminal system TS.
[0084]
First, the terminal system TS makes a call to the base station (server station) BS via the transmission / reception circuit 6 by the request information transmission module (S1), and in response to information in the database DB of the server station BS according to a predetermined instruction. Request a download. Specifically, for example, during a call with the server station BS, music information, performance information, setting information and the like stored in the database DB are sequentially displayed on the display unit 13 of the own terminal system TS. The number corresponding to any of these pieces of information is key-inputted, and the request determination operation is performed to select the selection information representing the requested download target information, the model / machine number of the terminal system TS, and the terminal Identification information indicating the type of sound source installed in the sound source circuit 24 of the system TS is transmitted to the server station BS.
[0085]
In the server station BS, in response to the request information being transmitted from the terminal system TS, the selective reading module (B1) selectively reads out the music information corresponding to the request information from the database DB and reads it. The determination module (not shown) determines the format type of the played performance information and the like. Specifically, this determination is confirmation of the content of the format type information attached to the read information (not shown, but information indicating the format type of the information). In this process, the format type is determined, or if the format type information is not attached, the format type is determined from the content of the read information. As a result of this determination, if the format type of the read information is the own model format A, format conversion (format conversion) is unnecessary, and the information is immediately handed to the billing module (B2). On the other hand, when the read performance information or the like is in a format different from that of the own model as in the conventional format B, it is sent to the billing module (B2) via the setting information attachment module (B3) and the format conversion module (B4). Handed over.
[0086]
In the setting information attachment module (B3), if the read performance information in a format different from that of the own model does not have setting information, such as information in the conventional format B, the setting information is displayed. Attach. By attaching this setting information, even with performance information of other models that do not have the setting information, the terminal system TS can perform tone reproduction with an effective tone / effect utilizing the sound source function. Become. In the setting information attachment method,
(1) Attach predetermined setting information.
(2) Attach user-selected setting information;
(3) Automatically detect setting information that fits into performance information and attach it
There are methods.
[0087]
The performance information to which the setting information is attached is handed to the format conversion module (B4), and format conversion to the own model format A is automatically performed using a conversion table TB prepared in advance. This conversion table TB is prepared for each format combination before format conversion and after format conversion. For example, the conversion table TB is a table describing conversion rules from the conventional format B to the own model format A. Format conversion from format (B) to own model format A is performed.
[0088]
Although the format of other models is not illustrated in FIG. 9, there is a case of SMF format C in addition to the conventional format B. For example, when information of SMF format C is read, The format conversion is performed using the conversion rule from the SMF format C to the own model format A in the conversion table TB. Therefore, even if the requested information is from other models (B, C, etc.), the format conversion function converts the requested information into music information IA that can be generated by the own terminal system TS, and is used in the terminal system TS. Enable.
[0089]
Further, in the case of conversion from SMF format C to own model format A, information compression is performed by the same processing as the information compression module (P4) of FIG. 10 described later before the format conversion processing described here. It is also possible to perform.
[0090]
Thereafter, in the billing module (B2), billing work for download is performed. In this work, a specific contract is concluded with a specific model or a specific sound source device (server station, etc.) by referring to identification information (terminal model / machine number, sound source type) transmitted from the terminal system TS. When it is recognized that the terminal is equipped with a certain model or sound source device), the billing amount can be discounted.
[0091]
After the accounting work, the server station BS transmits the music format information and setting information of its own model format A corresponding to the selection information from the terminal system TS to the system TS side by the information transmission module (B5).
[0092]
On the other hand, in the terminal system TS, the information reception module (S2) receives and downloads music information and setting information from the server station BS via the transmission / reception circuit 6, and the downloaded information is stored in the main body RAM 3. Here, the terminal system TS may be in a call state from when it is requested by the request information transmission module (S1) until the information corresponding to the request is completely transmitted from the base station BS. Alternatively, the call may be temporarily canceled after the request information is transmitted, and the requested information may be received by a subsequent call process (e-mail or reply call from the base station BS).
[0093]
Then, in the setting module (S3), a setting operation is performed so that a ringing melody can be generated based on the received music information by a user's setting operation. The received information can be set to be reproduced as BGM at the time of a call, music at any time, or the like.
[0094]
Note that the received music information or setting information may be automatically set as a ringtone melody sound or BGM sound immediately after reception, or a music corresponding to the received information at the time of reception (including the meaning of confirming the received information). May be configured to be reproduced.
[0095]
The system described so far is configured to perform setting information attachment and format conversion (and information compression) on music information, performance information, and setting information on the base station BS side. As in the processing in TS, setting information attachment, format conversion, and information compression may be performed on the terminal system TS side.
[0096]
[Information exchange with personal computers]
FIG. 10 is a functional block diagram showing the information exchange relationship in the second system including the terminal system and the personal computer according to one embodiment of the present invention. In the present invention, the own terminal, that is, the portable telephone terminal system TS can receive music information and setting information created on the personal computer terminal PC and use these information. The music information and setting information can be created in any format. For example, because it is easy to operate, it can be created according to the conventional SMF format C. When the music information and setting information are created in a format different from the format A of the own model as described above, Format conversion (format conversion) to the own model format A is performed on the terminal PC.
[0097]
In the personal computer terminal PC, using the predetermined software installed, from the database DP in the computer terminal PC in which information is recorded in the SMF format C or the own model format A by the selective reading module (P1), When music information or setting information to be used as an incoming melody or BGM is selected, the information editing module (P2) can edit the selected music information or setting information accordingly. Examples of the editing work include changing or adding a timbre parameter or an effect parameter in the setting information, selecting a part to be used as an incoming melody or BGM, etc. from performance information in the music information, or selecting the selected music For example, “trial sound generation” is performed in the same setting as when the information is sounded on the terminal system TS side, that is, in a setting state such as a timbre and an effect based on the compressed setting information.
[0098]
The database DP of the personal computer terminal PC may record information such as the conventional format B of FIG. 6 in addition to the information of the SMF format C and the own model format A. It is preferable to configure so that the same information editing, setting information attachment, information compression, and format conversion in FIG. 9 can be performed.
[0099]
On the other hand, when newly creating music information on a personal computer terminal PC, for example, using conventional SMF type sequencer software (music information creation software) installed on the computer terminal PC, for example, The module (P3) creates new music information manually input by the user. The new music information created here is music information according to the SMF format C, for example.
[0100]
The new creation module (P3) can also automatically create new music information using automatic music software (apparatus). Applying this platform, conventional automatic music software or automatic music device, for example, from the music information for one music created with the conventional automatic music software, only the music in the desired section (such as rust) Cut out only the information of the minimum necessary track (melody track, chord track, etc.) from the music information composed of multiple tracks so that it can be connected well when the music information of the cut out section is played repeatedly It is possible to perform operations such as correcting the connecting portion (section head and section end position). The new creation module (P3) can also directly create music information corresponding to the incoming melody or BGM in its own model format A.
[0101]
Of the information that has been read or edited from the information editing module (P2) and the information that has been newly created by the new creation module (P3), information that is not in its own model format A, such as SMF format C, Information compression and format conversion are performed by the information compression module (P4) and the format conversion module (P5). On the other hand, the information of the own model format A is immediately handed to the information transmission module (P6).
[0102]
Information that is not in its own model format A is first compressed by the information compression module (P4) using the compression table TE prepared in advance so that it can be stored in the terminal system TS. This compression table TE is prepared for each format combination before compression and after compression, and describes a predetermined information compression rule. As a specific example of processing based on this information compression rule, unnecessary information such as the rate scale RS of the already explained SMF format C (see FIG. 7) and excessive information in the EG parameter EC is converted into its own model format A. In addition to the processing that is sometimes reduced, performance information of necessary tracks (only melody tracks and chord tracks, etc.) is extracted from performance information of multiple tracks (parts), decoration sounds in performance information are deleted, performance information There are processes such as changing the pitch bend data in the middle to pitch data.
[0103]
The compressed information is further converted by the following format conversion module (P5) using the conversion table TC in the same manner as the format conversion module (B4) in the embodiment (first system) of FIGS. Format conversion from the SMF format C to its own model format A is performed.
[0104]
Originally, the music information or setting information from the module (P2, P3) which is the own model format A, and the music information or setting information from the module (P5) compressed and converted into the own model format A are the information transmission module ( By P6), it is transmitted to the terminal system TS side and sent into the terminal system TS via the communication cable 20 and the communication I / F 10.
[0105]
On the other hand, in the terminal system TS, the information receiving module (T1) receives music information and setting information from the personal computer terminal PC side S and stores them in the main body RAM 3. Further, in the setting module (T2), the user performs a setting operation so as to enable ringing melody pronunciation and BGM pronunciation based on the received music information.
[0106]
The processing of the information receiving module (T1) and the setting module (T2) is the same as the processing of the information receiving module (S2) and the setting module (S3) in FIG.
[0107]
In the configuration described above, music information, performance information, and setting information are edited on the personal computer terminal PC. However, the present invention is not limited to this, and the information recording / editing module (U5) in FIG. It is also possible to edit information received from the personal computer terminal PC (information without editing) on the terminal system TS side by the same processing as described above.
[0108]
It is also possible to transmit the information recorded in the terminal system TS to the personal computer terminal via the communication cable 20 and edit the information transmitted on the personal computer side based on the above-described contents. .
[0109]
[Information exchange with recording media and other terminals]
FIG. 11 is a functional block diagram showing an information exchange relationship in the third system including the terminal system and the recording medium or another terminal according to the embodiment of the present invention. In this invention, the own terminal, that is, the portable telephone terminal system TS, can use the information received from the external storage medium 19 and other telephone terminals OSa, OSb of the same model or different models for the incoming melody or BGM. In this case, information compression, format conversion (format conversion), information editing, etc. can be performed in the own terminal system TS.
[0110]
In addition, processing of information compression, format conversion (format conversion), information editing, etc. in the terminal system TS, which will be described in detail below, is performed in other telephone terminals (OSa, OSb) to create information on the own model format A After that, the created information can be received by the terminal system TS.
[0111]
The music information, performance information, setting information, etc. are recorded in the detachable small external storage medium 19 in the own model format A or other formats (for example, formats B and C), and the memory in which these information is recorded. The medium 19 is attached to the own terminal system TS, and desired information [each information is attached with information (format type information) indicating in which format the information is created). ] Is read into the local terminal system TS via the connection circuit 9. In this reading, only desired information can be read by operating a predetermined switch in the operator 12 of the own terminal system TS.
[0112]
Information transmitted from another telephone terminal OSa is taken into the own terminal system TS from the transmission / reception circuit 6 via the telephone line via the base station BS. Information transmitted from another telephone terminal OSb is taken into the own terminal system TS from the communication I / F 10 via the communication cable 20. These telephone terminals OSa and OSb include the same model telephone terminal that uses the same format information as the own model format A, and the own model format A such as the conventional format B and SMF format C. May be a heterogeneous telephone terminal that uses different format information.
[0113]
Here, with respect to transmission from other telephone terminals (OSa, OSb), it is requested that (desired information) be transmitted to other telephone terminals (OSa, OSb) by an instruction operation in the own terminal system TS. There are a configuration for contacting and a configuration for notifying the own terminal system TS of receiving (desired information) by an instruction operation in another telephone terminal (OSa, OSb), which configuration is used. May be.
[0114]
When information is transmitted from other telephone terminals OSa and OSb, information (format type information) indicating in which format the information is created is attached to each information to be transmitted. It should be noted that setting and using the received information in real time (that is, setting and using immediately after reception in the local terminal system TS) in the local terminal system TS that is the receiving side terminal is another telephone that is the information transmitting side terminal. You may comprise so that it can request | require on the terminal OSa and OSb side. In addition, when information is transmitted through the base station BS, the information is transmitted to the receiving terminal (own terminal) after performing information compression, format conversion, and the like (similar to each processing in FIGS. 9 and 10) in the base station BS. It can also be configured to.
[0115]
As described above, the information receiving / reading module (U1) reads music information, performance information, setting information, and the like from the external storage medium 19, and takes in various pieces of similar information transmitted from other telephone terminals OSa and OSb. At the same time, similar to the processing described in the explanation of the operation of the selective reading module (B1) in FIG. 9, the format type of the information read or taken in is determined by a determination module (not shown). As a result of this determination, among the read information or received information, information such as the conventional format B or SMF format C includes the setting information attachment module (U2), the information compression module (U3), and the format conversion module. After compression / conversion via the sequence (U4), it is handed over to the information recording / editing module (U5), and the information of its own model format A is handed over to the information recording / editing module (U5) as it is.
[0116]
The setting information attachment module (U2), the information compression module (U3), and the format conversion module (U4) basically include the embodiment (first system) of FIGS. 8 and 9 and the embodiment (second system) of FIG. The same processing as the setting information attachment, information compression, and format conversion processing by the setting information attachment module (B3), the information compression module (P4), and the format conversion module (B4, P5) in FIG. It is executed only for information to which setting information is not attached, such as setting information attachment by the setting information attachment module (U2) and information of the conventional format B. Such information compression and format conversion processing is performed after all information is received and written in the memory (main body RAM 3) in its own terminal system TS, and compression and conversion are performed in real time while receiving. There is a method of storing only necessary information in a memory (main body RAM 3). The latter method is effective for a portable telephone terminal with a small memory capacity.
[0117]
The information handed over to the information recording / editing module (U5) is recorded in the main body RAM 3 of the terminal system in the information recording module (U5), and can then be edited using various switches of the operator 12. It becomes like this. This editing work includes addition, deletion, and value change of various parameters (DA) in the setting information SA. Further, the information recording / editing module (U5) can be configured to create new music information. Then, in the setting module (U6), a setting operation using the operation element 12 is performed so that a ringing melody pronunciation, a BGM pronunciation, and the like based on information such as the received music information can be performed.
[0118]
[Own terminal processing in the own terminal system]
FIG. 12 shows an example of the own terminal processing flow in the terminal system according to an embodiment of the present invention. This own terminal processing is performed in the own terminal system TS in the case of the embodiment of FIG. 8 and FIG. 9 (first system), the embodiment of FIG. 10 (second system), and the embodiment of FIG. 11 (third system). Executed. First, in the first step TR1, initialization processing (initialization) when the power of the terminal system TS is turned on, for example, setting of a predetermined ringing melody, setting of initial parameters to the sound source circuits 24, 36 and the effect circuits 25, 37 In addition, initialization processing relating to other portable telephone terminals is performed. After this process, the process routines of the second to sixth steps TR2 to TR6 are sequentially executed.
[0119]
The second step TR2 is a transmission processing routine. In this step, in addition to transmitting various information during a normal call, if necessary, in the case of the embodiment (first system) of FIGS. In the case of the embodiment shown in FIGS. 10 and 11 (first and second systems) in which identification information is transmitted, processing such as transmitting request information for requesting desired information is performed. The third step TR3 is a reception processing routine. In this step, the received information is analyzed and various processes are performed to make the received information selectable as ringtone melody music, BGM music information, or the like. This is a specific example, and normal processing in a portable telephone terminal such as processing related to reception confirmation of a call request is also performed. In this step, in the case of the embodiment of FIG. 8 and FIG. 9 (first system) and the embodiment of FIG. 10 (second system), the received information is written in the main body RAM 3, and the embodiment of FIG. ), Setting information attachment, compression, and format conversion are performed on the received information, and the information after the processing is written into the main body RAM 3.
[0120]
The fourth step TR4 is a selection / setting process routine. In this step, information recorded in advance in the main body ROM 2 of the local system TS or stored in the main body RAM 3 by the operation of a predetermined switch of the operation element 12. From the received information, processing is performed when information desired to be used for the incoming melody or BGM is selected. In this case, if there is performance information in the selected information, readout setting is performed so that the performance information can be used as ringing melody music information, BGM music information, or the like. If there is setting information in the selected information, various settings are performed according to the information, for example, setting of timbre parameters in the sound source circuits 24, 36, setting of effect parameters in the effect circuits 25, 37, The effect circuit program is changed by an effect program (DSP program) for determining the contents of the effect circuits 25 and 37, settings related to audio information and image information, and the like are performed.
[0121]
In the case of the embodiment of FIG. 8 and FIG. 9 (first system), processing relating to selection of information to be downloaded is performed by operating a predetermined switch of the operation element 12 in the fourth step TR4. Further, in the case of the embodiment of FIG. 11 (third system), in a fourth step TR4, a process related to an instruction to read desired information from the external recording medium 19 is performed by operating a predetermined switch of the operation element 12.
[0122]
The fifth step TR5 is an edit processing routine. In this step, in the case of the embodiment of FIG. 11 (third system), information editing processing or new creation processing is performed based on the operation of a predetermined switch of the operation element 12.
[0123]
The terminal system TS can be provided with an automatic music composition function. In this case, in the other processing routine of the sixth step TR6, the operation of the automatic music composition function is executed as other processing. As this automatic music function, for example,
(1) A function for automatically converting a melody input by a user into a performance (music) information;
(2) A function of automatically generating performance (music) information corresponding to the result of the selection operation by selecting the atmosphere of the music by operating a predetermined switch of the operation element 12,
(3) A function for automatically generating performance information relating to chords familiar with the performance information for performance information already created or stored
Etc.
[0124]
Further, this terminal system TS can be provided with a style reproduction function, that is, a function of recording a plurality of style information and performance information and connecting them together to reproduce as a music piece. In this case, the sixth step TR6 In the other processing routine of, the operation of the style reproduction function is executed. Further, the sixth step TR6 may be provided with a function for executing a music game function, that is, a music game performed only by the own model or a music game performed while communicating with other models.
[0125]
The processing routine of the second to sixth steps TR2 to TR6 is repeatedly executed (unless the power is turned off) until it is not detected in the next seventh step TR7 that the power of the terminal system TS is turned off. If it is detected that this has been done, the terminal processing ends.
[0126]
[Server processing at base station]
FIG. 13 shows an example of a server processing flow in the base station according to one embodiment of the present invention. This server process is executed in the base station (server station) BS in the case of the embodiment of FIG. 8 and FIG. 9 (first system) and the embodiment of FIG. 11 (third system). First, after predetermined initialization is performed in the first step BR1, processing routines of the second to fourth steps BR2 to BR4 are sequentially executed.
[0127]
First, in the reception processing routine of the second step BR2, in the case of the embodiment (first system) of FIGS. 8 and 9, the following processes (1) to (4) are performed:
(1) Call processing for responding to a download request call from the terminal system TS,
(2) A reception process for receiving selection information and identification information transmitted from the terminal system TS at the time of call response;
(3) A selective reading process (selective reading module B1) for selectively reading information to be transmitted to the terminal system TS according to the received selection information, and a setting information attaching process (setting information attaching module) to be performed as necessary B3) and format conversion processing (format conversion module B4),
(4) Billing processing (billing module B2) performed according to the received identification information.
[0128]
In the reception processing routine of the second step BR2, in the case of the embodiment (third system) of FIG. 11, information is transmitted from another telephone terminal OSa to the transmission / reception circuit 6 of the terminal system TS via the telephone line. As a transit means, a transit process related to transmission / reception of information between both terminals OSa and TS is performed, and at this time, a format conversion process is performed as necessary.
[0129]
In the transmission processing routine of the next third step BR3, in the case of the embodiment (first system) (first system) of FIGS. 8 and 9, it is read from the database DB in the server station BS, and if necessary The information converted into its own model format A is transmitted to the terminal system TS, and at the time of transmission, other information such as bare gold related information can be attached. In the case of the embodiment of FIG. 11 (third system), the information received from the terminal system TS is transmitted to the other telephone terminal OSa, and in the database DB in the server station BS selected by the terminal system TS. Information can also be transmitted to another telephone terminal OSa.
[0130]
In the subsequent other processing routine of the fourth step BR4, only a part of the contents such as music information, performance information, and setting information can be transmitted in accordance with a request from the terminal system TS. For example, it is possible to perform processing such as transmitting only information related to the timbre in the setting information and not transmitting information related to the effect. Also, “trial listening” of music information etc. by streaming transmission of information (real-time playback), etc. Can also be done.
[0131]
For this streaming transmission, for example, the music information is reproduced and each reproduced event is packetized in real time, or a plurality of events that are close in time are packetized together with time difference information between them, and the server BS To the terminal system TS. In the terminal system TS, the transmitted packet is received, temporarily stored in the main body RAM 3 and the FIFO 22, and a musical sound is reproduced based on the stored music information.
[0132]
The processing routine of the second to fourth steps BR2 to BR4 is repeatedly executed while it is not detected in the next fifth step BR5 that the power of the server station BS is turned off. This server process ends.
[0133]
[PC terminal processing on a personal computer]
FIG. 14 shows an example of a PC terminal processing flow in a personal computer according to an embodiment of the present invention. This PC terminal process is executed in the personal computer terminal PC in the case of the embodiment (second system) of FIG. First, after predetermined initialization is performed in the first step PR1, the processing routines of the second to sixth steps PR2 to PR6 are sequentially executed.
[0134]
In the selection processing routine of the second step PR2, music information and setting information to be used as an incoming melody, BGM, etc. are retrieved from the database DP in the personal computer terminal PC in which information is recorded in the SMF format C or the own model format A. Select (selective read module P1).
[0135]
In the new creation processing routine of the third step PR3, new music information according to the SMF format C or the own model format A is used using conventional type sequencer software, music information creation software, automatic music software (device), etc. Create (new creation module P3).
[0136]
In the editing process routine of the fourth step PR4, the selected music information and setting information are edited (editing module P2), and in the transmission processing routine of the fifth step PR5, information compression processing, format conversion processing, and information transmission processing are included. Processing is executed (information compression, format conversion and information transmission modules P4 to P6).
[0137]
Further, in the other processing routine of the sixth step PR6, other information is attached in the setting information SA. Specific examples of other information attached here are an effect program (DSP program) for determining the contents of the effect circuit, audio information, image information, and the like.
[0138]
The processing routine of the second to sixth steps PR2 to PR6 is repeatedly executed while it is not detected that the power of the personal computer terminal PC is turned off in the next seventh step PR7, and when it is detected that the power is turned off. This PC terminal process ends.
[0139]
[Usage example of audio information and image information]
In the present invention, as already described, audio information and image information are used as setting information other than the musical tone related information. For example, audio information includes formats such as WAVE, AIFF, SOUND VQ, MP3, etc. depending on the compression format, but a common format is created so that audio information of these formats can be captured, and the audio information is used. In parallel with the generation of the musical sound signal, a voice signal for guidance can be generated.
[0140]
Further, as examples of using image information, an icon corresponding to the incoming call or the other party is displayed on the display unit 13 of the terminal system TS, and the movement of the icon is controlled to be synchronized with the reproduction of the musical sound, or the musical sound signal is used. The corresponding musical score can be displayed sequentially.
[0141]
[Karaoke function]
In the portable terminal device according to the embodiment of the present invention, when the system is set to the karaoke mode, the music performance and the lyrics display are processed synchronously, and the display state of the lyrics is sequentially changed according to the progress of the music performance. The function can be realized. In order to cause the portable telephone terminal (terminal system) TS to execute the processing of the “karaoke” function, switches included in the operation unit 12 (FIG. 1) of the terminal system TS are used as a karaoke mode selection switch, a karaoke song selection switch, or the like. use. In this case, these switches can be provided exclusively for karaoke or can be used for other functions. For example, each time the karaoke mode selection switch is operated, the karaoke mode and the non-karaoke mode can be switched, and when the karaoke mode is set, a karaoke song can be selected by a numeric keypad for inputting a telephone number.
[0142]
In the karaoke mode, it is preferable to use music information for karaoke. The music information for karaoke includes performance data and lyric data in the performance information, and is recorded in advance in the main body ROM (internal memory) together with other music information, or a removable small recording medium 19, personal computer It can be received from other external devices such as the terminal PC, other telephone terminals, base music BS, and recorded in the main body RAM (internal memory). In the karaoke mode, the music information recorded in this way is processed based on the karaoke processing function of the main body CPU 1, and the setting information and performance data in the music information are sent to the sound generation control circuit 8 to play the music from the speaker 17 or the headphones. While outputting the output, karaoke lyrics display control is performed on the display unit 13 of the terminal system TS based on the lyrics information in the music information.
[0143]
[Example of music information format]
FIG. 15 shows a format example of music information that can be used in the karaoke mode in the portable terminal device. The music information IK applicable to the karaoke mode for one music according to the own model format A is composed of setting information SK and performance information MK, and the performance information MK includes performance data PK and lyrics data WK. The setting information SK includes timbre information CK including a timbre number and a timbre parameter, and effect information EK including an effect parameter and an effect program, like the setting information SA described above. The setting information SK includes a text flag TF as other information, and the text flag TF is information indicating that the lyrics data WK is recorded in the performance information MK. The information recorded as the performance data PK and the lyrics data WK is preferably information in one section (for example, “sabi” portion) of one piece of music.
[0144]
The performance data PK representing the progression of the music corresponds to the performance information MA already described, and is information in which the timing data PT and the performance event PE are recorded in the order of performance, and ends with the end data EP. The performance event PE is information including a key number and a gate time. The lyric data WK is information for displaying lyrics corresponding to the performance data (musical piece) in the performance information IK. The timing data WT indicating the display timing and the text event data indicating the lyric text as display contents. WE is recorded in the order of progress of the music and ends with the end data EW. The timing data WT in the lyrics data WK is synchronized and associated with the timing data PT in the performance data PK so that each text event WE is displayed in synchronization with the performance of the music.
[0145]
As described above, the music information accompanied by the lyrics data may be received from the outside in the same manner as the music information IA, IB, IC described above. When this music information is received from the outside, not only the performance data (music progress data) but also the lyric data is processed through information compression and format conversion in the same manner as in each of the embodiments described so far. It is converted into the format of the lyric data WK. Therefore, the received music information is stored in the format of music information IK according to the own model format A as described above.
[0146]
FIG. 16 is a functional block diagram showing synchronization processing of music performance and lyrics display in the terminal system according to one embodiment of the present invention. Various pieces of music information are recorded in advance in the internal memory (main body ROM2) as shown in the internal memory block KB1, or, as shown in the external device block KB0, the base station BS, other terminals OS, and personal computer terminals. It can be received from an external device such as a PC or storage medium 19 and recorded in the internal memory (main body RAM 3). In the internal memory, music information is recorded in an information recording format according to its own model format A, and when the music information is received from an external device, when the received music information does not conform to its own model format A, as described above, It is converted into the information recording format of its own model format A and recorded in the internal memory.
[0147]
If desired music information is selected from various pieces of music information recorded in the internal memory (KB1). If the selected music information is accompanied by the lyrics data WK, the performance data PK and the lyrics data are stored in the information separation block KB2. It is separated into WK and handed to the data control circuit block KB3 together with the control command. At this time, a performance event PE is transmitted to the route to the tone generator circuit [24, 36 (FIGS. 2 and 3)] of the sound generation control circuit 8 based on the timing data PT of the performance data PK, and the timing data WT of the lyrics data WK is transmitted. Based on this, the text event WE is transmitted to the route to the display circuit [5 (FIG. 1)].
[0148]
The control circuit block KB3 controls transmission of information handed over from the information separation block KB2 according to a control command. That is, when the control command instructs the reproduction of the incoming melody song, only the performance event PE is transmitted to the tone generator circuit block KB4, and when the lyrics display (karaoke function) is indicated, the performance event PE and text Event WE (or text event WE only) is transmitted to sound source circuit block KB4 and display circuit block KB5, respectively. The tone generator circuit block KB4 and the display circuit block KB5 are driven based on the received performance event PE and text event WE, respectively, and perform music performance and lyrics display.
[0149]
[Reception process 1]
FIG. 17 is a flowchart of “reception process 1” which is a specific example of the reception process (step TR3 in FIG. 12) in the terminal system according to the embodiment of the present invention. By this process, various modes including the karaoke mode are shown. Even when the terminal system TS is operating, it is possible to receive a call request from another device and instruct to start playing the incoming melody song.
[0150]
The first step KR11 corresponds to a call request confirmation process in a normal mobile phone, and in this step, it is determined whether or not there is a call request from another terminal device. Here, if there is a call request, it is displayed in step KR12 that there is a call request, and then the process proceeds to step KR13. If there is no call request, this reception process 1 is terminated. Specifically, as a method for displaying the call request in step KR12, when a call request icon is displayed on the display unit 13 or a call request icon that is displayed in advance is blinked, the lyrics are viewed. Control to prevent the incoming melody sound from suddenly starting.
[0151]
In step KR13, “1” is set to the RUN flag indicating the reproduction state of the incoming melody song, and in the next step KR14, the reading of the currently used data is reset and the current mode is forcibly set before the call starts. To stop and set the reading of the incoming melody song. For example, if the current mode is the karaoke mode, the reading of the performance data PK and the lyrics data WK is reset, and the currently displayed lyrics are erased and the currently played music is muted before the call starts. The mode is forcibly stopped. Note that the current mode may be forcibly terminated before the call starts. On the other hand, for the incoming melody music, each part is set based on the setting information in the music information selected as the incoming melody sound, and the data reading position is set at the performance data head position.
[0152]
[Other processing 1]
FIG. 18 is a flowchart of “other processing 1”, which is a specific example of other processing (step TR6 in FIG. 12) in the terminal system according to one embodiment of the present invention. Then, the end of playback of the incoming melody song can be instructed. The first step KR21 corresponds to a call start process in a normal mobile phone. In this step, it is determined whether or not the call is in a state to start. If the call is in the start state, the process proceeds to step KR22, where the RUN flag indicating the reproduction state of the incoming melody song is reset to "0".
[0153]
[Selection / setting process 1]
FIG. 19 is a flowchart of “selection / setting process 1” which is a specific example of the selection / setting process (step TR4 in FIG. 12) in the terminal system according to an embodiment of the present invention. The karaoke mode can be activated by operating the karaoke mode selection switch in the operator 12 of the telephone terminal (terminal system) TS. When there is an instruction to start the karaoke mode by this process, music playback and lyrics (text) display are started.
[0154]
In the first step KR31, it is determined whether or not the karaoke mode selection switch is set by operating the karaoke mode selection switch. If the karaoke mode selection switch is set, the process proceeds to step KR32. Otherwise, this selection is immediately performed. / End the setting process 1. In step KR32, the music to be played back is selected from the internal ROM. In this case, if there is no lyrics data in the music information of the selected music, that effect is displayed. If no music is selected, the music information that is currently set as the incoming melody sound is set as the selected music.
[0155]
In step KR33, the reading of currently used data is reset and the current mode is stopped. Then, in step KR34, the KARAOKE flag indicating that the karaoke mode is shifted is reversed, and this selection / setting is performed. Process 1 is terminated. “1” of the KARAOKE flag represents “Karaoke mode is being set”, and “0” represents “Karaoke mode is being released”.
[0156]
In step KR32, if the KARAOKE flag is “0” and the karaoke mode can be set, there is no lyrics data in the music information of the song selected for karaoke playback (detected by checking the text flag TF). In step KR34, KARAOKE “0” → “1” is set so that only the music performance is performed in the karaoke mode, or the KARAOKE flag is not reversed and the karaoke mode is not shifted.
[0157]
[Interrupt processing]
FIG. 20 is a flowchart of “interrupt processing 2” which is an example of interrupt processing in the terminal system according to one embodiment of the present invention. This process is an interrupt process for the main process in the own model portable telephone terminal (terminal system) TS, and is started at every clock timing of the timer. In the first step KR41, it is determined whether or not the RUN flag is “1”. If RUN = “1”, the process proceeds to step KR42.
[0158]
In step KR42, performance events are sequentially transmitted to the sound source circuit [24, 36 (FIGS. 2, 3): KB4 (FIG. 16)] based on the performance data, and the corresponding musical sound is generated. That is, RUN = “1” indicates that the ringing melody sound is being played back, and the music playback according to the performance data of the music information selected as the ringing melody sound when the call is requested or when the call request sound is generated. Do. In this case, the progress timing of the music is counted by another interrupt process. During the ringing melody sound, the karaoke mode setting (KARAOKE = "1") is ignored and automatic control is performed so that the lyrics display by the display circuit [5 (FIG. 1): KB5 (FIG. 16)] does not proceed. Is done.
[0159]
On the other hand, if RUN = “0” is determined in step KR41, the process proceeds to step KR43. In step KR43, it is determined whether the KARAOKE flag is “1”. If KARAOKE = “1”, the process proceeds to step KR44. If not, the interrupt process 2 is terminated.
[0160]
In step KR44, text events are sequentially transmitted to the display circuit (5: KB5) based on the lyric data, and the corresponding musical sound is generated, and the process proceeds to step KR42. That is, RUN = “0” (ringing melody sound is not played back) and KARAOKE = “1” indicate that the karaoke mode is in effect, and in step KR44, the lyrics are displayed according to the lyrics data WK of the selected karaoke song. In step KR45, the music is reproduced according to the performance data PK of the selected karaoke music. Therefore, when RUN = "0" and KARAOKE = "1", the music playback and lyrics display are synchronized according to the performance data PK and the lyrics data WK of the selected karaoke music by the processing of both steps KR44 and KR42. It can be carried out.
[0161]
That is, for the performance data PK, the timing data PT and performance event PE recorded in the order of performance are sequentially read out to reproduce the music, and for the lyrics data WK, the timing data WT and the text event data WE recorded in the order of display are used. Read out sequentially and display the lyrics. At this time, since the timing data WT indicating the display timing is synchronized with and corresponding to the timing data PT, the lyrics display can be changed in synchronization with the performance of the music. In the lyrics display, the characters to be uttered or the characters that should have been uttered in response to the performance of the music in the displayed lyric part are increased in brightness, or modified such as underlining, hatching, black / white inversion, etc. It is preferable to use a highlighting method such as that described above and to simplify the color change of character display in a normal karaoke apparatus.
[0162]
[Various karaoke modes]
In the karaoke mode, it may be possible to display only the lyrics without playing the music. In that case, it is preferable that the user can arbitrarily operate the progress of the lyrics display.
[0163]
Moreover, you may make it record not only one part of a music but the lyric data and performance data corresponding to the whole music as performance information. In this case, it is preferable that only a predetermined part (for example, “sabi” part) of the music is played when the ringing melody is played, and the whole is played when playing the karaoke.
[0164]
Alternatively, the entire music piece may be recorded only for the lyrics data. In this case, in the karaoke playback mode (“with performance” mode), only the lyrics corresponding to the performance data are sequentially displayed, and in the lyrics display only mode, the lyrics of the entire song are sequentially displayed according to the user's operation. It is only necessary to display on the screen.
[0165]
[Edit function]
In the terminal system according to the embodiment of the present invention, as described in the information recording / editing module (U5) in FIG. 11 and the editing process (TR5) in FIG. Can be edited. Here is a specific example of this editing process.
[0166]
An edit mode selection switch and various switches for editing used in the editing process are included in the operator 12 (FIG. 1) of the terminal system TS. In this case, these switches can be provided separately as dedicated switches, or switches used for other functions can be used. For example, each time the edit mode selection switch is operated, the edit mode and the non-edit mode can be switched. When the edit mode is set, the telephone number input numeric keypad is used to select information to be edited or to set parameter values when editing ( The numeric keypad input mode can be switched to “information selection” / “parameter setting” with another key.
[0167]
[Selection / setting process 2]
FIG. 21 is a flowchart of “selection / setting process 2” which is another specific example of the selection / setting process (step TR4 in FIG. 12) in the terminal system according to the embodiment of the present invention. In the first step ER11, it is determined whether or not the setting operation of the edit mode selection switch among the operators 12 of the portable telephone terminal (terminal system) TS is performed. When this operation is performed, the process proceeds to step ER12. If there is no operation, the selection / setting process 2 is immediately terminated.
[0168]
The edit mode selection switch is an operation switch for instructing the start and end of the edit mode, and inverts the contents of the EDIT flag every time it is operated. Here, when the content of the EDIT flag is “1”, it indicates that the editing mode is in effect, and when it is “0”, it indicates that the editing mode is not set (non-editing mode state). Also, only one mode can be set at a time. For example, if there is an edit mode setting operation and the karaoke mode is active (KARAOKE = “1”), the karaoke mode is forcibly terminated.
[0169]
In step ER12, the EDIT flag is inverted, and then the process proceeds to step ER13. In step ER13, it is determined whether or not the EDIT flag is “0”. If EDIT = “0” (non-edit mode state), the process proceeds to step ER14 to save the edited contents over the selected information. When this selection / setting process 2 is completed and EDIT = "1" (in the edit mode), the process proceeds to step ER15. By the processing of step ER14, the edit content stored in the temporary storage area of the main body RAM 3 can be overwritten and saved when the edit mode ends.
[0170]
In step ER15, the input mode of the numeric keypad in the operator 12 of the terminal system TS is switched to the “information selection” side, and information to be edited is selected with the numeric keypad from among timbre information, effect information, performance data, and lyrics data. By instructing, the instructed information is selected. If no information is selected, the timbre information or performance data of the music set as the incoming melody is set as the edit information. In the next step ER16, a part of the selected (or set) information (for example, the head) is displayed on the display unit 13, and then the selection / setting process 2 is terminated.
[0171]
[Editing process 1]
FIG. 22 is a flowchart of “edit process 1” which is a specific example of the edit process (step TR5 in FIG. 12) in the terminal system according to the embodiment of the present invention. In the first step ER21 of this processing flow, it is determined whether or not the EDIT flag is “1”. If EDIT = “1” (in the edit mode), the process proceeds to step KR22 to select data to be edited. On the other hand, if EDIT = “0”, the editing process is immediately terminated.
[0172]
In step ER22, the data selection switch and the like of the operation unit 12 are operated to sequentially switch the display of the display unit 13 to display the values of data to be edited such as parameters, notes, timings, and the like. In the next step ER23, an actual editing operation is started, and the telephone number input numeric keypad input mode of the operation unit 12 is switched from “information selection” to “parameter setting”, and a new keypad is operated. Enter parameter values, add new data, or even delete data.
[0173]
Next, in step ER24, the edited content is temporarily stored in the temporary recording area of the main body RAM 3, and the process proceeds to step ER25. Note that the edited content temporarily stored is overwritten with actual data at the end of the edit mode. However, overwriting may be performed during the editing mode.
[0174]
In step ER25, it is determined whether or not the RUN flag indicating the reproduction state of the incoming melody song is “1”. If RUN = “1” (reproducing the incoming melody song), the EDIT flag is set to “EDIT” in step ER26. After setting “0”, the process proceeds to step ER26, otherwise (RUN = “0”: ringing melody music non-playback state), the editing process 1 is terminated. In step ER27, it is determined whether or not the edited contents are to be overwritten. When overwriting is performed, the process proceeds to step ER28 to execute overwriting, and then the editing process 1 is terminated. If no overwriting is performed, the editing process 1 is immediately terminated.
[0175]
If there is a call request during the edit mode, the edit mode is forcibly terminated, but whether or not to leave the edit contents up to now can be selected by the user in step ER28, for example whether or not to overwrite. The display unit 13 is used to display whether or not storage is possible. In this case, what is necessary is just to enable selection of the preservation | save permission with the YES / NO operation switch of the operation part 13. FIG. Further, it is preferable not to shift to the sound generation processing of the incoming melody song while the storage permission / inhibition display is being performed.
[0176]
As described in the reception process 1 (FIG. 17: step KR12), when there is a call request in the edit mode (the same applies to other modes), an icon indicating that there is a call request is displayed on the screen of the display unit 13. Displayed above. In such a case, the ringing melody may start to sound, but if the ringing melody suddenly starts, the user will be surprised, so it is preferable to display an icon.
[0177]
In the edit mode, in addition to editing already recorded information, information such as timbre information, effect information, and lyrics data can be newly created and recorded / registered using the same procedure as described above. it can.
[0178]
[Voice composition function]
In the terminal system according to one embodiment of the present invention, music information can be created from the sound input to the terminal system, as given as the first example of the automatic music function in other processing (FIG. 12: TR6). . Here, such a voice composition function will be described. FIG. 23 is a functional block diagram for explaining the voice composition function of the terminal system according to one embodiment of the present invention. The processing for realizing the voice composition function shown in this functional block diagram is basically executed in accordance with an instruction from the main body CPU 1, but the sound generation control circuit 8 is equipped with a CPU like the sound generation control CPU 31 in FIG. If so, the processing may be executed in accordance with an instruction from the sound generation control circuit side CPU.
[0179]
The input module CA1 includes a microphone input block CA11 that captures sound (singing voice) [microphone input sound] input from the microphone 14 (FIG. 1) of the portable telephone terminal (terminal system) TS (FIG. 1), and the transmission / reception circuit 6 A call sound input block CA12 for capturing a call sound (calling voice of the other party of call) [call input sound] received via the microphone, and a microphone input sound or a call input sound are captured as a data source.
[0180]
The input switching module CA2 for selecting the input sound to be used as the data source operates the telephone number input numeric keypad of the operation element 12 to determine which of the microphone input sound and the call input sound is to be used as the data source. Set. The A / D conversion module CA3 converts the data source input sound input from the input module CA1 from an analog format to a digital format by the audio control circuit 7 (FIG. 1).
[0181]
The noise amount setting module CA4 first sets the volume level of noise included in the data source input sound from the input module CA1 by the following process:
(1) For example, the display unit 13 is prompted to wait for input, and the user is allowed to wait for a predetermined time for input of microphone sound or call sound, and to the input module during the standby period (silent period). Input sound is detected as noise (detection function).
(2) The maximum volume in the detected noise is set as a noise amount (noise maximum level) (setting function).
[0182]
After such processing is completed, the noise amount setting module CA4 displays, for example, a message to prompt input start on the display unit 13 and prompts the user to start inputting microphone sound or call sound. The noise removal module CA5 deletes sound information below the maximum noise level set by the noise amount setting module CA5 from the data source input sound converted into the digital format by the A / D conversion module CA3.
[0183]
The pitch detection module CA6 extracts a pitch sequence from the data source input sound from which noise has been deleted. For extraction of the pitch sequence, for example, a detection method by frequency analysis is used. Further, in order to reduce the information capacity to be recorded, when it is recognized that a plurality of sounds are generated within a predetermined time, the first sound other than the first sound is deleted. Specifically, the minimum length of the sound length is set to a predetermined time (for example, an eighth note), and the sound generated at a time shorter than this is deleted. When it is determined that the pitch group has not reached the predetermined pitch range, it is preferable to equip a transpose function for transposing the detected pitch train to the predetermined pitch range as a whole. By such a transpose function, even if the range of the input sound is a low range, it can be automatically converted to a range that can be used as a ringing melody.
[0184]
The data creation module CA7 converts the pitch sequence detected by the pitch detection module CA6 into information corresponding to its own model format A, and records it in the main body RAM 3 or the control RAM 35.
[0185]
[Automatic song function 1]
In the system according to the embodiment of the present invention, as described for the newly created module (FIG. 10: P3) on the personal computer terminal PC side, the automatic music composition function can be realized. FIG. 24 is a functional block diagram showing the voice composition function according to one embodiment of the present invention in a block form. The process for realizing the automatic composition function shown in this functional block diagram is basically described as being executed by the personal computer terminal PC (FIG. 10: P3). You may make it mount in.
[0186]
In the manual input module CB1, a user manually inputs (creates) music information by the following method using a conventional type sequencer device (personal computer with a sequencer function) or the like:
(1) A method of inputting music information by playing an electronic musical instrument connected to the apparatus,
(2) A method of creating music information by numerical input or the like using a keyboard or mouse connected to the terminal PC using an input screen displayed on a display device connected to the personal computer terminal PC;
(3) A method of creating music information for one song by connecting partial song data (pattern data) prepared in advance,
And so on.
[0187]
On the other hand, in the automatic song module CB2, first, the user inputs partial data of a song to be created. This input includes, for example, a method of actually playing an electronic musical instrument or using a display screen of a personal computer terminal PC. A plurality of partial music data (pattern data) may be prepared in advance in the personal computer terminal PC, and partial data of the music may be selected from these partial music data. After the partial music data is input in this way, the music information for one music is automatically generated from the input partial data of the music using the already known automatic music generation method.
[0188]
The music information created by either the manual input module CB1 or the automatic music module CB2 or the music information recorded in advance on the personal computer terminal PC is input to the music analysis module CB3. The song analysis module CB3 analyzes the contents of the song information in order to divide the music information for one song input (created) into musical sections such as an intro part, a fill-in part, a main part, and an ending part.
[0189]
The section division module CB4 divides the music information into a plurality of section information based on the analysis result in the music analysis module CB3, and the section selection module CB5 uses any one of the divided section information as the incoming melody or BGM. Automatically select whether to use. With respect to the selection of the section information, a plurality of section information may be displayed on the screen, for example, so that a trial listening can be performed for each section information, and the user may select desired section information.
[0190]
In the track selection module CB6, when the selected section information has a multiple track [part] configuration, the number of tracks is narrowed down to the minimum necessary number. For example, if there are a plurality of parts to be played with similar timbres, there is a method in which only one of them is left and information on other parts is deleted.
[0191]
In the repeat part correction module CB7, when the section information for which the process up to the track selection process (CB6) has been completed is reproduced repeatedly, the sound at the head position and the sound at the end position in the section are smoothly connected. In this way, the sound at the section start position or the sound at the section end position (or the sound in the vicinity thereof) is corrected and corrected. Finally, the created section information is recorded in the recording area (RAM) of the personal computer terminal PC by the information recording module CB8 and is output to the information compression module P4 in FIG.
[0192]
[Music data automatic generation processing (automatic music processing)]
In the system according to the embodiment of the present invention, “other processing” at the TS terminal itself (FIG. 12: step TR6) or new creation at the PC terminal (FIG. 10: new creation module P3, FIG. 14: step PR3). In order to realize the described automatic music function, music data can be automatically generated on the terminal system TS or personal computer terminal PC side. FIG. 25 is a processing flowchart schematically showing a method for automatically generating music data in the portable terminal device according to the embodiment of the present invention. In this method, music data that matches the user's preference such as the atmosphere is automatically generated in the portable terminal system TS. The music data automatic generation process (automatic music process) shown in this processing flow diagram is described as being executed by the terminal system TS, but of course, it may be executed by the personal computer terminal PC. It can be applied to the automatic music module CB2.
[0193]
In the method shown in FIG. 25, a plurality of types of melody generation data and chord progression data for each feeling of music in order to automatically generate music data in accordance with the user's preference in the portable terminal system TS. Are stored in the main body ROM 2 or the main body RAM 3 in advance. The melody generation data and chord progression data may be received from the server station BS via the transmission / reception circuit 6. Alternatively, it may be received from an external device via the communication interface 10 or loaded from a removable small recording medium 19 via the connection circuit 9.
[0194]
According to this music data automatic generation processing, a set of melody generation data and chord progression data is selected from a plurality of types (for example, randomly) according to the feeling selected by the user, and based on these data In addition, the melody is automatically generated while correcting the data according to the user's preference. Such automatic generation of music such as a melody is described in detail in a patent application (Japanese Patent Application No. 11-019625) filed by the applicant of the present application, and will be briefly described here.
[0195]
Examples of the feeling of music include “freshness”, “easy to be”, “satisfactory”, “with SEXY”, and the like. For each feeling, a plurality of types of melody generation data and chord progression data are supported, and any one of a plurality of types of melody generation data and a plurality of types of chord progression data corresponding to the selected feeling is selected. , Each selected randomly. Note that one melody generation data and chord progression data may correspond to each feeling. The melody generation data includes rhythm generation data consisting of data such as the number of notes (many, medium, and small), time signature type, presence / absence of syncopation paving, the number of measures in the music, and the composition of the passage, the absolute range, and the predetermined interval. And pitch generation data composed of data such as the width of change in the throat pitch (pitch). Each chord progression data stores data representing chord progression for one musical piece (for example, 32 bars).
[0196]
When music is automatically generated, melody generation data and chord progression data are read in the first step CC1 of the processing flow of FIG. For this purpose, for example, according to the user's operation, a plurality of types of music feelings are displayed on the display unit 13 using words and / or icons (see the column in FIG. 26. Note that FIG. An example of a display screen for parameter settings related to composition is shown.) When the user selects a desired feeling using the operation element 12, the selected set of melody generation data and chord progression data is read out.
[0197]
In the next step CC2, rhythm data is generated based on the melody generation data read in step CC1. That is, based on the rhythm generation data included in the read melody generation data, first, the rhythm data (the position of the note is specified) of a motif consisting of several measures (for example, the beginning portion of the music and the chorus portion) is specified. Data, which is also referred to as “spot data”), and rhythm data for one song is generated from the generated motif and the above-described section composition data. For example, as a method of generating a rhythm for one song, in order to reflect a passage symbol, a passage having the same symbol is set to the same rhythm as the corresponding passage, and a passage having a similar symbol includes a part of the corresponding passage (for example, A method is adopted in which the first half part) is set to the same rhythm.
[0198]
The generation of the motif rhythm data is started in response to an operation of a predetermined switch (may be a dedicated switch or a switch shared with other functions) in the operation element 12. The generation of the motif is typically by storing a large number of rhythm patterns (dot patterns) in advance and selecting a rhythm pattern that matches the rhythm generation data.
[0199]
When there are a plurality of candidates for the rhythm pattern that matches the rhythm generation data, any one may be selected at random. Or you may select a rhythm pattern in consideration of the feeling mentioned above and the music genre designated separately. The rhythm data is not limited to automatically generating rhythm data, and the user may directly input rhythm data manually using the operator 12, or the user may edit the automatically generated rhythm data. Alternatively, as already described, a note string may be extracted from the voice input by the microphone or the voice input by the telephone call and used as the rhythm data.
[0200]
Next, in step CC3, an important point is detected from each point of the generated rhythm data. Here, the important point is a musically important point among all the points constituting the melody. As an example, the strong beat for each measure, that is, the first or third beat or the first or third beat The hit points near the beat are detected as important hit points, and the other hit points are detected as non-important hit points. Not only strong hits or hit points in the vicinity thereof, but important hit points may be detected according to other conditions.
[0201]
On the other hand, in step CC4, based on the melody generation data and chord progression data, first, a skeletal sound of a motif consisting of several measures is generated, and then the skeletal sound of this motif and music composition data are referred to. A skeletal sound of the song is formed. Here, as the skeleton sound of the motif, a chord constituent sound having a pitch that falls within the range of the above-described range and change width is randomly selected. In addition, you may select along a predetermined rule, not only what selects at random.
[0202]
Next, in step CC5, the skeletal sound generated in step CC4 is assigned to the important striking point detected in step CC3. Subsequently, in step CC6, the pitch is set for the non-critical striking points between the important striking points. Assigned. Non-critical points are randomly assigned a pitch on the available chord available notes scale. The assignment is not limited to random assignment, but may be assigned according to a predetermined rule. In addition, when forming the pitch of the skeleton sound and non-important striking point for one song, the same symbol passage is set to the same pitch as the corresponding passage, and similar symbols are reflected in the same way as in the case of the rhythm described above. The passage is obtained by making the corresponding pitch and a part (for example, the first half) the same pitch.
[0203]
The music data generated in this way is automatically corrected in step CC7 according to a separately stored music rule so as not to produce an unnatural sound, and then stored in the main body RAM 3 in step CC8. Finish the composition process.
[0204]
Note that the pitch of important sounds and / or non-important sounds that are automatically generated may be corrected by the user using the operation element 12. Further, the portion where the pitch can be corrected may be only the motif portion or the entire music piece. Furthermore, in the above description, after the rhythm data of the entire music is generated, the pitch of the entire music is added. First, after generating the rhythm data of the motif, the pitch of the motif is added, and then The rhythm data of the subsequent part of the music may be generated and the pitch of the subsequent part may be given.
[0205]
In the above-described method for automatically generating music data, only a melody is generated, but an accompaniment part may be automatically generated in addition to this. For example, a plurality of accompaniment generation data (also referred to as “style data”) for each style of music (performance data for one or more bars created along a predetermined chord type for one to a plurality of parcels) Is stored in the main body ROM 2 or the main body RAM 3 in advance, and the accompaniment generation data corresponding to the music style selected by the user or the music style selected at random using the operation element 12 is read out based on the chord progression data. Then, the pitch data included in the accompaniment generation data is modified to match the chord progression data, and this is repeated for one song (for example, 32 bars) to generate an accompaniment part. Note that the style of music includes “urban”, “earthy”, “tropical”, “danceable”, and the like (see the right column of FIG. 26).
[0206]
[Chord detection processing and accompaniment part assignment processing]
In one embodiment of the present invention, the terminal system TS, as described as one of the automatic music functions (FIG. 12: step TR6 “other processing”), performs information that is familiar with already created or stored performance information. Can be automatically generated. FIG. 26 is a flowchart schematically illustrating “a method of automatically determining a chord (advance progression) familiar to music data” (a chord detection process) in the portable terminal device according to the embodiment of the present invention; FIG. 27 is a flow diagram schematically illustrating “a method of assigning accompaniment parts familiar to melody data to melody data” (accompaniment part assignment processing) in the portable terminal device according to one embodiment of the present invention. The chord (chord progression) determined by the chord detection process of FIG. 26 can be used for automatic accompaniment in the accompaniment part giving process of FIG.
[0207]
In the chord detection process of FIG. 26, first, in step CD1, the melody data is divided into sections according to a predetermined rule. Here, one section to be divided is a section that can be considered that one chord continues. Also, as examples of the predetermined rule, a rule that divides into certain sections such as one beat, two beats, one measure, etc., or a sequence of melody data is analyzed to detect a range that can be regarded as one chord section. There are rules to divide by position. In this case, a plurality of rules may be applied simultaneously.
[0208]
Subsequently, in step CD2, a harmony sound is detected for each segment of the divided melody. The harmony sound is detected by analyzing the arrangement of the melody data and detecting a sound that can be regarded as a harmony sound in each section. In step CD3, the melody is analyzed to detect the key. For example, the degree of appearance of each pitch name constituting the melody (a simple number of pitch names or a value obtained by adding the length of each pitch name) and the scale sound of each key are matched. The key with the highest degree of coincidence is detected as the key of the melody.
[0209]
Next, in step CD4, the chord or chord progression is matched on the basis of the detected chord and the detected key for each of a plurality of consecutive melody sections or for each single section. Specifically, typical chord progressions for a plurality of consecutive sections (for example, four sections, three sections, two sections, etc.) are stored in a database for each key, and a plurality of consecutive sections are detected. The chord sound is compared with the constituent sounds of each chord progression in the detected key. First, the chord progression of 4 sections and the chord of 4 sections are compared, and if there is a match, it is determined. Compare the voice and determine what matches. If there is no match for the three sections, matching is performed for the two sections, and if there is still no match, the single chord component sound and the chord sound of the single section are compared to determine the best matching chord. .
[0210]
In step CD5, the chord progression or chord having the highest degree of coincidence is determined as the chord in the section by such matching processing, and the chord detection processing is terminated. It should be noted that not only the key has a chord progression, but only a specific key has a chord progression, and the pitch names of the chord progression components are shifted in accordance with the key tones, so that virtually all You may make it have a chord progression.
[0211]
In the accompaniment part assignment process of FIG. 27, the accompaniment part is a chord progression that is familiar with the melody data and pre-stored style data [one or more parts of performance data that is the basis of the accompaniment part, and a predetermined chord (for example, , C major), a large number of performance data for one or more measures are stored in the database. ] Based on the above. As described above, the chord progression that is familiar to the melody data can be obtained by a method of detecting from the melody, a method of storing in the melody data in advance, a method of designating the melody by the user, and the like. Melody data including chord progressions may be downloaded from a base station (server station) BS.
[0212]
In this accompaniment part giving process, first, in step CE1, any one of the stored accompaniment style data is selected by the user. Each accompaniment style data is provided with terms representing the contents of the accompaniment style data (for example, music genres such as pops and classics, and terms indicating atmospheres such as “bright” and “dark”). A term list is displayed on the display unit 13 of the portable terminal device TS, and any one of the accompaniment style data is selected by selecting one using the operator 12. Alternatively, the number assigned to each accompaniment style data may be selected using a numeric switch included in the operator 12.
[0213]
Next, in step CE2, the selected accompaniment style data is read from the database, and in step CE3, the chord progression is acquired. Further, in step CE4, the pitch of the performance data included in the read accompaniment style data is obtained. Correction is made according to the acquired chord progression, and performance data of the accompaniment part is generated. The correction of the performance data pitch is a pitch conversion table prepared for each chord type (a table that defines how much the pitch of the performance data is to be corrected according to the chord type. If the pitch of the performance data is shifted by the correction amount, the pitch is matched with the specified chord type.
[0214]
In step CE5, the performance data of the accompaniment part generated in step CE4 is added to the melody data to create a melody composed of a plurality of parts, and the accompaniment part adding process is terminated.
[0215]
The accompaniment style data may be composed of a plurality of sections so that the progress of the sections can be specified. For example, there are intro sections, main sections, fill-in sections, ending sections, etc. as accompaniment style data sections. The user can specify the order of each section and the number of repeated playbacks of the main section according to the progress of the melody data. It is also possible to store the section progress data in which the number of repeats of the arrangement and the main section is programmed, and specify the section progress by reading this according to the progress of the melody data. In this way, it is possible to obtain accompaniment part performances rich in change.
[0216]
[Various Embodiments]
The format of the musical sound information that can be used in the portable terminal device is not limited to the own model format A. For example, the sound generation control circuit as shown in FIG. 3 is installed, and the music performance information in SMF format C is reproduced as it is by operating an automatic performance function (sequencer) used in a conventional electronic musical instrument. It is also possible to make it possible. In this case, it is not necessary to convert the format when information is taken from another musical tone information source device (such as a PC) to the portable telephone terminal. However, it is preferable to perform the compression process.
[0217]
In the embodiment, the FM method is adopted as the tone synthesis method in the tone generator circuit, but the tone synthesis method is not limited to this. For example, various methods such as a waveform memory method, a physical model method, a harmonic synthesis method, a formant synthesis method, and an analog synthesizer method of “VCO + VCF + VGA” can be applied. In other words, various information related to the timbre recorded as setting information differs depending on the tone synthesis method of the tone generator circuit, but basically various parameters corresponding to each tone synthesis method used in electronic musical instruments conventionally. Information can be employed.
[0218]
In addition, the tone generator circuit itself is not limited to the configuration of the tone generator circuit using dedicated hardware, but the tone generator circuit may be configured using “DSP + microprogram” or “CPU + software”. The tone generator circuit may be configured by a program.
[0219]
Further, a plurality of tone generation channels may be formed by using one circuit in a time division manner, or a type in which one tone generation channel is constituted by one circuit may be used.
[0220]
【The invention's effect】
As described above, according to the portable terminal device of the present invention, the performance information parameters stored in the storage means are displayed on the display means and the displayed parameters are edited with respect to the change of the performance information. When the communication means receives an incoming call from another terminal device in a state where the performance information is being displayed, a display prompting the user to select whether or not to store the performance information in the storage means is performed, and the user response to this display Since the performance information is stored in the storage means based on the performance information, the performance information can be edited by displaying the parameter to be edited in the performance information and inputting the parameter value. When there is an incoming call, the user can be inquired whether or not to save the data being edited, and the data can be saved according to a user instruction.
[0221]
Further, in response to receiving an incoming call from another terminal device, generation of a musical sound signal based on incoming performance information (incoming melody song) included in the performance information stored in the storage means is started. While the display prompting the user to select whether or not to store the performance information in the storage means is performed, control is performed so as not to generate a tone signal based on the incoming performance information. Even when there is a data storage inquiry to the user, the process does not proceed to the ringing melody music generation process, and the ringing melody can be prevented from suddenly starting to sound.
[Brief description of the drawings]
FIG. 1 is a schematic block diagram showing a basic configuration of a portable telephone terminal to which a sound generation control device according to one embodiment of the present invention is applied.
FIG. 2 is a block diagram showing a detailed configuration of a sound generation control circuit according to one embodiment of the present invention.
FIG. 3 is a block diagram showing a detailed configuration of a sound generation control circuit according to another embodiment of the present invention.
FIG. 4 is a conceptual diagram showing an example of a usage environment of a portable telephone terminal according to an embodiment of the present invention.
FIG. 5 is an example of an information format of its own model in a portable telephone terminal according to an embodiment of the present invention.
FIG. 6 is an example of a conventional information format of another model in a portable telephone terminal of another model.
FIG. 7 is an example of a general-purpose musical sound information format conventionally used in electronic musical instruments and the like.
FIG. 8 is a part of a functional block diagram showing an information transmission / reception relationship in the first system including a portable telephone terminal and a base station according to one embodiment of the present invention.
FIG. 9 is another part of the functional block diagram showing the information exchange relationship in the first system including the portable telephone terminal and the base station according to one embodiment of the present invention.
FIG. 10 is a functional block diagram showing an information exchange relationship in a second system composed of a portable telephone terminal and a personal computer according to one embodiment of the present invention.
FIG. 11 is a functional block diagram showing an information exchange relationship in a third system including a portable telephone terminal and a recording medium or another telephone terminal according to an embodiment of the present invention.
FIG. 12 is a flowchart showing an example of processing of the own terminal at the portable telephone terminal according to one embodiment of the present invention.
FIG. 13 is a flowchart showing an example of server processing in a base station according to an embodiment of the present invention.
FIG. 14 is a flowchart showing an example of PC terminal processing at a personal computer terminal according to one embodiment of the present invention;
FIG. 15 is an example of an information format applicable to the karaoke function of the portable telephone terminal according to one embodiment of the present invention.
FIG. 16 is a functional block diagram showing synchronization processing of music performance and lyrics display in the portable telephone terminal according to one embodiment of the present invention.
FIG. 17 is a flowchart of “reception processing 1” in the portable telephone terminal according to one embodiment of the present invention;
FIG. 18 is a flowchart of “other processing 1” in the portable telephone terminal according to one embodiment of the present invention;
FIG. 19 is a flowchart of “selection / setting process 1” in the portable telephone terminal according to one embodiment of the present invention;
FIG. 20 is a flowchart of “interrupt processing 2” in the portable telephone terminal according to one embodiment of the present invention;
FIG. 21 is a flowchart of “selection / setting process 2” in the portable telephone terminal according to one embodiment of the present invention;
FIG. 22 is a flowchart of “edit processing 1” in the portable telephone terminal according to one embodiment of the present invention;
FIG. 23 is a functional block diagram for explaining the “voice composition function” of the portable telephone terminal system according to one embodiment of the present invention.
FIG. 24 is a functional block diagram for explaining an “automatic music function” of a personal computer terminal or the like according to one embodiment of the present invention.
FIG. 25 is a flowchart schematically showing a method of automatically generating music data in the portable telephone terminal according to one embodiment of the present invention.
FIG. 26 is a diagram showing an example of a music feeling / style display screen in the portable telephone terminal according to the embodiment of the present invention.
FIG. 27 is a flowchart schematically showing a method for automatically determining chords that are familiar to music data in the portable telephone terminal according to one embodiment of the present invention;
FIG. 28 is a flowchart schematically showing a method for assigning accompaniment parts familiar to melody data to the melody part in the portable telephone terminal according to one embodiment of the present invention.
[Explanation of symbols]
TS mobile phone terminal (terminal system, own device),
BS base station (base station),
PC personal computer terminal,
OS, OSa, OSb other telephone terminals,
SM synthesized music signal,
ST Call signal,
SE After-effect signal.

Claims (1)

他の端末装置と通信するための通信手段と、
種々の情報を表示するための表示手段と、
演奏情報を記憶する記憶手段と、
この記憶手段に記憶されている演奏情報のパラメータを上記表示手段に表示させると共に、表示されたパラメータに対して編集を行う編集手段と、
上記演奏情報に基づく楽音信号を生成する楽音生成手段と、
上記通信手段が他の端末装置からの着信を受けたことに応じて、上記楽音生成手段に対し、上記記憶手段に記憶されている演奏情報のうち着信用に設定された着信演奏情報に基づく楽音信号の生成を開始させる着信報知手段と
を具備し、
上記編集手段は、演奏情報の編集を行っている状態で上記通信手段が他の端末装置からの着信を受けたとき、当該編集中の演奏情報を上記記憶手段に記憶するか否かの選択を促す表示を上記表示手段に行わせ、この表示に対するユーザ応答に基づいて当該編集中の演奏情報を上記記憶手段に記憶させ、
上記楽音生成手段は、上記選択を促す表示が上記表示手段により行われる間、上記着信演奏情報に基づく楽音信号の生成を行わない
ことを特徴とする携帯用端末装置。
Communication means for communicating with other terminal devices;
Display means for displaying various information;
Storage means for storing performance information;
Editing means for displaying the parameters of the performance information stored in the storage means on the display means and editing the displayed parameters;
A tone generation means for generating a tone signal based on the performance information;
When the communication means receives an incoming call from another terminal device, a musical sound based on the incoming performance information set for incoming calls out of the performance information stored in the storage means is sent to the musical sound generation means. An incoming call notification means for starting signal generation,
When the communication means receives an incoming call from another terminal device while the performance information is being edited, the editing means selects whether or not to store the performance information being edited in the storage means. The display means prompts the display means, and based on the user response to the display, the performance information being edited is stored in the storage means,
The portable sound device according to claim 1, wherein the musical sound generating means does not generate a musical sound signal based on the incoming call performance information while the display means prompts the selection.
JP2000179962A 1999-07-28 2000-06-15 Portable terminal device Expired - Fee Related JP3666366B2 (en)

Priority Applications (17)

Application Number Priority Date Filing Date Title
JP2000179962A JP3666366B2 (en) 1999-11-04 2000-06-15 Portable terminal device
TW089114271A TW495735B (en) 1999-07-28 2000-07-17 Audio controller and the portable terminal and system using the same
SG200004176A SG99867A1 (en) 1999-07-28 2000-07-26 Portable telephony apparatus with music tone generator
SG200502228A SG126779A1 (en) 1999-07-28 2000-07-26 Portable telephony apparatus with music tone generator
EP00115054A EP1073034A3 (en) 1999-07-28 2000-07-26 Portable telephony apparatus with music tone generator
SG200207492A SG116472A1 (en) 1999-07-28 2000-07-26 Portable telephony apparatus with music tone generator.
US09/626,304 US6911592B1 (en) 1999-07-28 2000-07-26 Portable telephony apparatus with music tone generator
SG200502225-6A SG143970A1 (en) 1999-07-28 2000-07-26 Portable telephony apparatus with music tone generator
CNB001222465A CN1268149C (en) 1999-07-28 2000-07-28 Pronounciation control device and terminal device and system used on carried pronounciation control device
KR1020000043801A KR100724918B1 (en) 1999-07-28 2000-07-28 Musical sound generation control apparatus, control method for the same, and medium
HK01104335A HK1033801A1 (en) 1999-07-28 2001-06-21 A pronunciation control apparatus and a portable terminal device and a system using the same
US10/410,796 US6967276B2 (en) 1999-07-28 2003-04-10 Portable telephony apparatus with music tone generator
US10/411,025 US7161081B2 (en) 1999-07-28 2003-04-10 Portable telephony apparatus with music tone generator
US10/411,985 US7119268B2 (en) 1999-07-28 2003-04-11 Portable telephony apparatus with music tone generator
US10/412,131 US7514624B2 (en) 1999-07-28 2003-04-11 Portable telephony apparatus with music tone generator
KR1020060069241A KR100804914B1 (en) 1999-07-28 2006-07-24 Portable terminal, musical sound generation and words display method, and medium
KR1020060069239A KR100832958B1 (en) 1999-07-28 2006-07-24 Portable terminal

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP11314396 1999-11-04
JP11-314396 1999-11-04
JP2000179962A JP3666366B2 (en) 1999-11-04 2000-06-15 Portable terminal device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2003416450A Division JP2004166290A (en) 1999-11-04 2003-12-15 Mobile terminal equipment

Publications (2)

Publication Number Publication Date
JP2001195068A JP2001195068A (en) 2001-07-19
JP3666366B2 true JP3666366B2 (en) 2005-06-29

Family

ID=26567927

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000179962A Expired - Fee Related JP3666366B2 (en) 1999-07-28 2000-06-15 Portable terminal device

Country Status (1)

Country Link
JP (1) JP3666366B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013059118A (en) * 2012-12-10 2013-03-28 Kyocera Corp Portable terminal

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8170538B2 (en) 1999-12-06 2012-05-01 Solocron Media, Llc Methods and apparatuses for programming user-defined information into electronic devices
US6496692B1 (en) 1999-12-06 2002-12-17 Michael E. Shanahan Methods and apparatuses for programming user-defined information into electronic devices
JP2003078960A (en) * 2001-09-03 2003-03-14 Ntt Power & Building Facilities Inc Mail system by portable terminal
US7223911B2 (en) 2001-10-29 2007-05-29 Yamaha Corporation Portable telephone set with reproducing and composing capability of music
JP3970664B2 (en) * 2002-04-12 2007-09-05 株式会社第一興商 Karaoke device that can receive and play the user's original music from a mobile phone
JP2004153525A (en) 2002-10-30 2004-05-27 Nec Corp Ringer melody storing/reproducing method and system, terminating melody storing server, and cellular phone
JP4823804B2 (en) * 2006-08-09 2011-11-24 株式会社河合楽器製作所 Code name detection device and code name detection program
KR102112738B1 (en) * 2017-12-06 2020-05-19 김기석 Method for displaying lyrics for karaoke device and device for the method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013059118A (en) * 2012-12-10 2013-03-28 Kyocera Corp Portable terminal

Also Published As

Publication number Publication date
JP2001195068A (en) 2001-07-19

Similar Documents

Publication Publication Date Title
KR100832958B1 (en) Portable terminal
JP3666366B2 (en) Portable terminal device
JP2002152329A (en) Portable terminal system
JP4407473B2 (en) Performance method determining device and program
JP3900330B2 (en) Portable terminal device
JPH10268895A (en) Voice signal processing device
KR100731232B1 (en) Musical data editing and reproduction apparatus, and portable information terminal therefor
JP3589122B2 (en) Portable terminal device
JP2002351467A (en) Telephone terminal device
JP2000089774A (en) Karaoke device
JPH11338480A (en) Karaoke (prerecorded backing music) device
JP3637196B2 (en) Music player
JP2004166290A (en) Mobile terminal equipment
JP3933147B2 (en) Pronunciation control device
JP3620467B2 (en) Communication terminal
JP3788280B2 (en) Mobile communication terminal
JP3675361B2 (en) Communication terminal
JP2007189705A (en) Sounding control apparatus
JP3565065B2 (en) Karaoke equipment
JP2001211235A (en) Portable telephone set
KR100862126B1 (en) Portable communication terminal
JPH1195769A (en) Music reproducing device
JPH09230881A (en) Karaoke device
JP2002169550A (en) Musical piece data producing device
JP2003018248A (en) Mobile communication terminal and server service

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20031215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040120

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040318

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050315

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050328

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313532

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090415

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090415

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100415

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110415

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120415

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130415

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140415

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees