JP2005004374A - Portable communication terminal and program - Google Patents

Portable communication terminal and program Download PDF

Info

Publication number
JP2005004374A
JP2005004374A JP2003165493A JP2003165493A JP2005004374A JP 2005004374 A JP2005004374 A JP 2005004374A JP 2003165493 A JP2003165493 A JP 2003165493A JP 2003165493 A JP2003165493 A JP 2003165493A JP 2005004374 A JP2005004374 A JP 2005004374A
Authority
JP
Japan
Prior art keywords
mail
data
music
graphic
message data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003165493A
Other languages
Japanese (ja)
Other versions
JP4173055B2 (en
Inventor
Hoshiko Kobayashi
星子 小林
Takahiro Abe
孝洋 阿部
Miki Shirai
未紀 白井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KENWOOD DESIGN CORP
Kenwood KK
Original Assignee
KENWOOD DESIGN CORP
Kenwood KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KENWOOD DESIGN CORP, Kenwood KK filed Critical KENWOOD DESIGN CORP
Priority to JP2003165493A priority Critical patent/JP4173055B2/en
Publication of JP2005004374A publication Critical patent/JP2005004374A/en
Application granted granted Critical
Publication of JP4173055B2 publication Critical patent/JP4173055B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Electrophonic Musical Instruments (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephone Function (AREA)
  • Information Transfer Between Computers (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To form an emotionally expressive e-mail. <P>SOLUTION: In the portable communication terminal 1a, when a user inputs a mail text through an input part 12, and selects a graphic used for music mail, a control part 11 forms message data in which the inputted mail text is graphic-converted to pattern data of the selected graphic. Transmitting mail data are formed by attaching music data of a sound-converted rhythm music to the formed message data, and transmitted to a designated transmitting destination by a communication part 16. When the music mail is received, the message data of the graphic-converted mail text are displayed on a display part 13, and the music data of the rhythm music attached to the message data are reproduced by a reproduction speaker 17. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、メールを送受信する携帯通信端末及びプログラムに関する。
【0002】
【従来の技術】
従来から、電子メールの送受信を行うことができる携帯電話やPHS(Personal Handy−phone System)、PDA(Personal Digital Assistant)等の携帯通信端末が一般に広く利用されている。
【0003】
このようなメール機能を有する携帯通信端末では、メールの送受信を行うユーザ間におけるコミュニケーション効果を向上させるために電子ペットを介してメールの送受信を行う技術(例えば、特許文献1参照)や、メール文にメロディデータを付加して相手側に送信すると、相手側でメール受信時にメロディデータが再生され、メール送信者を容易に特定することができる技術(例えば、特許文献2参照)が開発されている。
【0004】
このような携帯通信端末を用いて、ユーザはメールを送受信することにより、相手側とのコミュニケーションを図ることができる。従来は、記号や絵文字などを使ってメール文の文章を工夫して作成したり、メロディデータや画像データをメール文に添付して送信することにより、感情表現を行っていた。
【0005】
【特許文献1】
特開2001−276436号公報
【特許公報2】
特開2003−8686号公報
【0006】
【発明が解決しようとする課題】
しかしながら、記号や絵文字を使った感情表現には限界があり、相手に伝えたい感情を表現するには十分ではない。また、メール文にメロディデータや画像データが添付されている場合でも、メール文と画像は別々に表示され、メール文の方は所定のフォントで文章のみが表示されるため、メールの受信者に無機質な印象を与えることとなり、コミュニケーション効果があまり得られない。
【0007】
本発明の課題は、感情表現豊かなメールを作成することができる携帯通信端末を提供することである。
【0008】
【課題を解決するための手段】
請求項1に記載の発明は、携帯通信端末において、
メール文の文字入力を行うための入力手段と、
前記入力手段により入力されたメール文を表示する表示手段と、
メール文のグラフィック変換用のグラフィックパターンデータを複数種記憶するグラフィック記憶手段と、
複数種の音楽データを記憶する音楽記憶手段と、
前記記憶された複数種のグラフィックパターンのうち、メール文の表示に用いるグラフィックパターンを選択するグラフィック選択手段と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択する音楽選択手段と、
前記入力されたメール文を前記選択されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成するメール作成手段と、
前記作成された送信用メールデータを指定された送信先へ送信する通信手段と、
を備えることを特徴とする。
【0009】
請求項2に記載の発明は、携帯通信端末において、
グラフィック変換されたメッセージデータと、当該メッセージデータに添付された音楽データを受信する通信手段と、
前記受信されたメッセージデータを表示する表示手段と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された音楽データを再生する音楽再生手段と、
を備えることを特徴とする。
【0010】
請求項3に記載の発明は、携帯通信端末において、
メール文の文字入力を行うための入力手段と、
メール文のグラフィック変換用のグラフィックパターンデータを複数種記憶するグラフィック記憶手段と、
複数種の音楽データを記憶する音楽記憶手段と、
前記記憶された複数種のグラフィックパターンのうち、メール文の表示に用いるグラフィックパターンを選択するグラフィック選択手段と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択する音楽選択手段と、
前記入力されたメール文を前記選択されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成するメール作成手段と、
前記作成された送信用メールデータを指定された送信先へ送信するとともに、任意の通信相手からメール文がグラフィック変換されたメッセージデータ及びそのメッセージデータに添付された音楽データを受信する通信手段と、
前記グラフィック変換されたメッセージデータを表示する表示手段と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された音楽データを再生する音楽再生手段と、
を備えることを特徴とする。
【0011】
請求項4に記載の発明は、請求項1又は3に記載の携帯通信端末において、
前記選択手段により選択された音楽データの音のテンポを設定する設定手段と、
前記設定されたテンポに音楽データの音のテンポを変換する音変換手段と、を備え、
前記通信手段は、前記設定されたテンポに音変換された音楽データをメッセージデータに添付して送信することを特徴とする。
【0012】
請求項5に記載の発明は、請求項1、3又は4に記載の携帯通信端末において、
前記記憶されたグラフィックパターンデータは、動画データであり、
前記メール作成手段は、前記選択された音楽データの音のリズムに合わせてグラフィックの動きを変化させるメッセージデータを作成することを特徴とする。
【0013】
請求項6に記載の発明は、携帯通信端末において、
メール文の文字入力を行うための入力手段と、
前記入力手段により入力されたメール文を表示する表示手段と、
メール文のグラフィック変換用のグラフィックパターンデータを記憶するグラフィック記憶手段と、
複数種の音楽データを記憶する音楽記憶手段と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択する音楽選択手段と、
前記入力されたメール文を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された複数の音楽データを添付して送信用のメールデータを作成するメール作成手段と、
前記作成された送信用メールデータを指定された送信先へ送信する通信手段と、
を備えることを特徴とする。
【0014】
請求項7に記載の発明は、携帯通信端末において、
グラフィック変換されたメッセージデータと、当該メッセージデータに添付された複数の音楽データを受信する通信手段と、
前記受信されたメッセージデータを表示する表示手段と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された複数の音楽データを重ねて再生する音楽再生手段と、
を備えることを特徴とする。
【0015】
請求項8に記載の発明は、携帯通信端末において、
メール文の文字入力を行うための入力手段と、
メール文のグラフィック変換用のグラフィックパターンデータを記憶するグラフィック記憶手段と、
複数種の音楽データを記憶する音楽記憶手段と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを複数選択する音楽選択手段と、
前記入力されたメール文の文字を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された複数の音楽データを添付して送信用のメールデータを作成するメール作成手段と、
前記作成された送信用メールデータを指定された送信先へ送信するとともに、任意の通信相手からグラフィック変換されたメッセージデータ及び当該メッセージデータに添付された複数の音楽データを受信する通信手段と、
前記グラフィック変換されたメッセージデータを表示する表示手段と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された複数の音楽データを重ねて再生する音楽再生手段と、
を備えることを特徴とする。
【0016】
請求項9に記載の発明は、請求項6又は8に記載の携帯通信端末において、
前記入力手段により入力されたメール文の文字に音階を設定する設定手段と、
前記設定手段によりメール文の文字に設定された音階を元にメロディ音楽の音楽データを作成する音楽作成手段と、を備え、
前記メール作成手段は、前記選択された複数の音楽データとともに前記作成されたメロディ音楽の音楽データをメッセージデータに添付して送信用メールデータを作成することを特徴とする。
【0017】
請求項10に記載の発明は、請求項6、8又は9に記載の携帯通信端末において、
前記グラフィック記憶手段に記憶されたグラフィックパターンデータは、楽譜を模したグラフィックのパターンデータであり、
前記メール作成手段は、前記設定手段により音階が設定されたメール文の文字を音符として前記記憶された楽譜のグラフィックに組み込んだメッセージデータを作成することを特徴とする。
【0018】
請求項11に記載の発明は、請求項8に記載の携帯通信端末において、
前記入力手段は、受信メールに対する返信メール文の文字を入力し、
前記音楽選択手段は、返信メール文の表示時に再生する音楽データを選択し、
前記メール作成手段は、前記返信メール文を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成し、
前記通信手段は、前記作成された送信用メールデータを前記受信メールの送信元へ送信することを特徴とする。
【0019】
請求項12に記載の発明は、請求項11に記載の携帯通信端末において、
前記メール作成手段は、前記選択手段により返信メールの音楽データとして受信メールの音楽データと同一の音楽データを選択された場合、前記受信メールのメール文とともに返信分のメール文をグラフィック変換したメッセージデータを作成し、当該メッセージデータに受信メールと同一の音楽データを添付した送信用メールデータを作成することを特徴とする。
【0020】
請求項13に記載の発明は、請求項11に記載の携帯通信端末において、
前記メール作成手段は、前記選択手段により返信メールの音楽データとして受信メールの音楽データとは異なる音楽データを選択された場合、返信メール文のみをグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して返信分のメールデータを作成し、この返信分のメールデータと前記受信メールのメールデータとを結合して送信用のメールデータを作成することを特徴とする。
【0021】
請求項14に記載の発明は、請求項8に記載の携帯通信端末において、
前記記憶手段は、受信メールの履歴をそのメッセージデータに添付された音楽データの種類毎に記憶し、
前記表示手段は、受信メールの履歴を表示する際には、音楽データの種類毎に受信メールの履歴を表示することを特徴とする。
【0022】
請求項15に記載の発明は、
コンピュータに、
入力手段によりメール文の文字を入力させる機能と、
前記入力手段により入力されたメール文を表示手段に表示させる機能と、
メール文のグラフィック変換用のグラフィックパターンデータを複数種グラフィック記憶手段に記憶させる機能と、
複数種の音楽データを音楽記憶手段に記憶させる機能と、
前記記憶された複数種のグラフィックパターンのうち、メール文の表示に用いるグラフィックパターンを選択させる機能と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択させる機能と、
前記入力されたメール文を前記選択されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成する機能と、
前記作成された送信用メールデータを指定された送信先へ送信させる機能と、
を実現させるためのプログラムであることを特徴とする。
【0023】
請求項16に記載の発明は、
コンピュータに、
グラフィック変換されたメッセージデータと、当該メッセージデータに添付された音楽データを受信させる機能と、
前記受信されたメッセージデータを表示手段に表示させる機能と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された音楽データを再生させる機能と、
を実現させるためのプログラムであることを特徴とする。
【0024】
請求項17に記載の発明は、
コンピュータに、
入力手段によりメール文の文字を入力させる機能と、
メール文のグラフィック変換用のグラフィックパターンデータを複数種グラフィック記憶手段に記憶させる機能と、
複数種の音楽データを音楽記憶手段に記憶させる機能と、
前記記憶された複数種のグラフィックパターンのうち、メール文の表示に用いるグラフィックパターンを選択させる機能と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択させる機能と、
前記入力されたメール文を前記選択されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成する機能と、
前記作成された送信用メールデータを指定された送信先へ送信するとともに、任意の通信相手からメール文がグラフィック変換されたメッセージデータ及びそのメッセージデータに添付された音楽データを受信させる機能と、
前記グラフィック変換されたメッセージデータを表示手段に表示させる機能と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された音楽データを再生させる機能と、
を実現させるためのプログラムであることを特徴とする。
【0025】
請求項18に記載の発明は、
コンピュータに、
入力手段によりメール文の文字を入力させる機能と、
前記入力手段により入力されたメール文を表示手段に表示させる機能と、
メール文のグラフィック変換用のグラフィックパターンデータをグラフィック記憶手段に記憶させる機能と、
複数種の音楽データを音楽記憶手段に記憶させる機能と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択させる機能と、
前記入力されたメール文を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された複数の音楽データを添付して送信用のメールデータを作成する機能と、
前記作成された送信用メールデータを指定された送信先へ送信させる機能と、
を実現させるためのプログラムであることを特徴とする。
【0026】
請求項19に記載の発明は、
コンピュータに、
グラフィック変換されたメッセージデータと、当該メッセージデータに添付された複数の音楽データを受信させる機能と、
前記受信されたメッセージデータを表示手段に表示させる機能と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された複数の音楽データを重ねて再生させる機能と、
を実現させるためのプログラムであることを特徴とする。
【0027】
請求項20に記載の発明は、
コンピュータに、
入力手段によりメール文の文字を入力させる機能と、
メール文のグラフィック変換用のグラフィックパターンデータをグラフィック記憶手段に記憶させる機能と、
複数種の音楽データを音楽記憶手段に記憶させる機能と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを複数選択させる機能と、
前記入力されたメール文の文字を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された複数の音楽データを添付して送信用のメールデータを作成する機能と、
前記作成された送信用メールデータを指定された送信先へ送信するとともに、任意の通信相手からグラフィック変換されたメッセージデータ及び当該メッセージデータに添付された複数の音楽データを受信させる機能と、
前記グラフィック変換されたメッセージデータを表示手段に表示させると、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された複数の音楽データを重ねて再生させる機能と、
を実現させるためのプログラムであることを特徴とする。
【0028】
【発明の実施の形態】
以下、図を参照して本発明の実施の形態を詳細に説明する。
【0029】
〈第1の実施の形態〉
第1の実施の形態では、メール文をグラフィック変換したメッセージデータを作成し、このメッセージデータにリズム音楽の音楽データを添付したミュージックメールデータを作成して指定された送信先へ送信し、ミュージックメールの再生時には、グラフィック変換されたメッセージデータを表示するとともにその表示に合わせてリズム音楽を再生する携帯通信端末の例を説明する。
【0030】
まず、構成を説明する。
図1に、本実施の形態における携帯通信端末1a、1bを含んで構成される通信システム100のシステム構成を示す。図1に示すように、通信システム100は、携帯通信端末1a、1bから構成され、各携帯通信端末1a、1bは、通信ネットワークNを介して相互にデータの送受信が可能に接続されている。なお、図1には2台の携帯通信端末1a、1bが接続された例を示したが、その設置台数は特に限定しない。
【0031】
携帯通信端末1a、1bは、図示しない無線基地局を介して無線通信を行い、互いに会話音声のデータを送受信する。また、図示しないメールサーバを介して電子メール(以下、単にメールという。)のデータをやり取りする。なお、携帯通信端末1a、1bとしては、携帯電話、PHS、PDA等が適用可能である。
【0032】
以下、携帯通信端末1a、1bの構成について説明するが、携帯通信端末1a、1bは、その外観や応用機能は異なっても基本構成は同一であるので、携帯通信端末1aを代表としてその構成説明を行うこととする。
【0033】
図2は、携帯通信端末1aの外観図である。
図2に示すように、携帯通信端末1aは、ディスプレイ部2と、キー入力部3とで構成され、その中央部に設けられた図示しない連結機構により、ディプレイ部2とキー入力部3とが折り畳み可能に構成されている。
【0034】
ディスプレイ部2には、通信相手の音声を出力する受話スピーカ21、各種操作画面を表示するLCD(Liquid Crystal Display)22とが設けられる。
【0035】
また、キー入力部3は、テンキー群31、電源/オフフックキー32、オンフックキー33、アップキーU、ダウンキーD、レフトキーL、ライトキーR、ソフトキーS1、S2、決定キーK、クリアキーCの各キー群が設けられる。各キーの機能については後述する。各キー群の下部には、ユーザの音声を入力するための送話マイク35が設けられている。
【0036】
図3に、携帯通信端末1aの内部構成を示す。
図3に示すように、携帯通信端末1aは、制御部11、入力部12、表示部13、RAM(Random Access Memory)14、ROM(Read Only Memory)15、通信部16、受話スピーカ21、送話マイク35、音再生スピーカ17を備えて構成される。
【0037】
制御部11は、CPU(Central Processing Unit)等からなり、ROM15に格納されるシステムプログラムをRAM14に展開して、当該プログラムとの協働により、携帯通信端末1の各部の動作を統括的に制御し、携帯電話機能を実現する。具体的には、送話時に送話マイク18から入力される受話音声信号を通信部16に出力し、受話時には通信部16から入力された通信相手の送話音声信号を受話スピーカ17に出力する。
【0038】
また、メール送信時には、ROM15に格納されるメール作成処理プログラム(図4参照)との協働により、音楽とグラフィックを組み合わせたメール(以下、このようなメールをミュージックメールという。)の作成を行う。具体的には、入力部12を介してユーザによりメール文が入力され、ミュージックメールに用いるグラフィック選択されると、入力されたメール文を選択されたグラフィックのパターンデータにグラフィック変換したメッセージデータを作成する。このとき、メール文字やグラフィックがリズム音楽に応じて動きを変化させるようなメッセージデータを作成する。
【0039】
また、ユーザによりミュージックメールに適用するリズム音楽が選択され、さらにリズム音楽のテンポ(音の速度)が設定されると、ROM15から選択されたリズム音楽の音楽データを読み出して設定されたテンポにリズム音楽のテンポを変換する。そして、作成されたメッセージデータに音変換されたリズム音楽の音楽データを添付して送信用のメールデータを作成する。すなわち、制御部11によりメール作成手段、音変換手段を実現することができる。
【0040】
また、作成されたミュージックメールのプレビュー時、或いはミュージックメール受信時には、表示部13にメール文がグラフィック変換されたメッセージデータを表示させるとともに、当該メッセージデータに添付されたリズム音楽の音楽データを音再生スピーカ17により再生させる。
【0041】
入力部12は、図2に示したテンキー群31、電源/オフフックキー32、オンフックキー33、アップキーU、ダウンキーD、レフトキーL、ライトキーR、ソフトキーS1、S2、決定キーK及びクリアキーC等から構成され、これら各キーの入力操作に応じた操作信号を制御部11に出力する。すなわち、これらキーによりメール文の文字入力操作、ミュージックメールに適用するグラフィックやリズム音楽を選択操作、リズム音楽のテンポの設定操作等を行うことにより、入力手段、グラフィック選択手段、音楽選択手段及び設定手段を実現することができる。
【0042】
テンキー群31は、電話番号や文字列(ひらがな、カタカナ、英文字、記号文字等)を入力するためのキーであり、電源/オフフックキー32は、携帯通信端末1aの電源のオン/オフと通話終了の指示を入力し、オンフックキー33は、通話開始の指示を入力するためのキーである。
【0043】
また、アップキーU、ダウンキーD、レフトキーL、ライトキーRは、各種操作画面において入力位置の移動等の指示を入力するためのカーソルキーであり、ソフトキーS1、S2は、各操作画面で予め決められたソフト機能が割り当てられているキーである。決定キーKは決定の指示を入力するためのキーであり、クリアキーCは入力指示の取り消しを入力するためのキーである。
【0044】
表示部13は、図2に示したLCD22から構成される表示手段であり、メール作成画面や作成したメールのプレビュー画面、受信メール画面等の各種画面、制御部11による処理結果等の各種表示情報を表示する。
【0045】
RAM14は、制御部11によって実行される各種プログラム及びこれらのプログラムに係るデータを一時的に記憶するワークエリアを形成する。
【0046】
ROM15は、システムプログラムの他、メール作成処理プログラム及び各プログラムで処理されたデータ等を記憶する。また、ROM15は、入力文字(ひらがな)を漢字やカタカナ、絵文字等に変換するための辞書データを格納するメモリ領域、複数種のリズム音楽(単音で周期的に一定の拍子を反復する音楽)の音楽データを格納するメモリ領域、ミュージックメール作成用に準備された各種グラフィック(静止画、動画を含む)のパターンデータを格納するメモリ領域、送受信されたメッセージデータを格納するメモリ領域とを有する。すなわち、ROM15によりグラフィック記憶手段及び音楽記憶手段を実現することができる。
【0047】
なお、各種グラフィックのパターンデータは、グラフィック中にメール文字を当てはめる領域が予め準備されたものであり、メール文のグラフィック変換とは、メール文字を当該グラフィックパターンに当てはめてメール文字をグラフィックの一部とすることをいう。グラフィック変換時には、グラフィックに合わせてメール文字のスタイルを変更することも可能であることとする。
【0048】
通信部16は、無線基地局との間で無線通信信号を送受信するアンテナ16aや、図示しないRF回路、モデム等の通信インターフェイスを備えて構成される通信手段である。受話時には、アンテナ16aを介して受信された受話音声やメールの無線通信信号をRF回路、モデムにより復調して制御部11に出力する。一方、送話時には、制御部11から入力される送話音声やメールのデータをRF回路、モデムにより変調してアンテナ11を介して無線基地局に送信する。
【0049】
受話スピーカ21は、制御部11から入力される受話音声信号を受話音声に変換して出力する。
【0050】
送話マイク35は、ユーザの送話音声を送話音声信号に変換して制御部11に出力する。
【0051】
音再生スピーカ17は、受話スピーカ17とは別体で構成されるスピーカであり、着信した際に着信音を出力したり、ミュージックメールの表示時にリズム音楽データを出力する。すなわち、音再生スピーカ17により、音楽再生手段を実現することができる。
【0052】
次に、本実施の形態における動作を説明する。
本実施の形態では、携帯通信端末1aにおいてメール文をグラフィック変換したメッセージデータにリズム音楽データを添付したミュージックメールを作成して携帯通信端末1bに送信し、携帯通信端末1bにおいて携帯通信端末1aから受信されたミュージックメール文のメッセージデータを表示するとともに、その表示に合わせてリズム音楽データを再生する例を説明する。
【0053】
まず、携帯通信端末1aにより実行されるメール作成処理について、図4に示すフローチャート、図5に示すメール作成画面の画面遷移図を参照して説明する。なお、説明の前提として、メールのテキストデータのみを作成して送信する通常モードとミュージックメールを作成するミュージックメールモードのうち、ミュージックメールモードが選択され、以下に説明するメール作成処理が開始されたこととする。
【0054】
図4に示すメール作成処理では、まず、表示部13にメール文の文字入力を行うためのメール作成画面131(図5(a)参照)が表示される(ステップS1)。図5(a)に示すように、メール作成画面131では、リズム・グラフィック変換エリアa1と、文字入力エリアa2とが表示され、リズム・グラフィック変換エリアa1の上部には、ミュージックメールに設定可能なグラフィック候補a11が表示されるとともに、下部にはリズム音楽候補の候補名a12及びそのリズム音楽に現在設定されているテンポa13が表示される。このメール作成画面131では、リズム・グラフィック変換エリアa1に候補名a12が表示されているリズム音楽が音再生スピーカ17により再生される。
【0055】
以下、メール作成画面131において、ミュージックメールに使用するグラフィック及びリズム音楽を選択する処理について説明するが、メール作成画面131では、各操作キーのうち、レフトキーL及びライトキーRにはグラフィック候補を切り換える機能、ソフトキーS2にはリズム音楽を切り換える機能、アップキーUにはリズム音楽のテンポを速く設定する機能、ダウンキーDにはリズム音楽のテンポを遅く設定する機能が割り当てられていることとする。なお、テンポは、例えばアップキーUを1回押下するとテンポが1レベル早く設定される等、アップキーU又はダウンキーDの押下回数に応じて設定されることとする。
【0056】
メール作成画面131では、まずミュージックメールに使用するグラフィックの選択が行われる(ステップS2)。メール作成画面131では、レフトキーL又はライトキーRの押下操作に応じて、リズム・グラフィック変換エリアa1に表示されるグラフィック候補a11が異なる候補に切り換えられるので、ユーザはレフトキーL又はライトキーRを操作して、グラフィック候補を順次切り換えて表示させ、所望のグラフィック候補が表示されると、決定キーKを押下する。
【0057】
グラフィックが選択されると、次にリズム音楽の選択が行われる(ステップS3)。メール作成画面131では、ソフトキーS2の押下操作に応じて、音再生スピーカ17から出力されるリズム音楽が切り換えられるので、ユーザはリズム音楽を視聴しながらソフトキーS2を操作してリズム音楽候補を切り換えて再生させ、所望の音楽候補が再生されると、決定キーKを押下する。
【0058】
そして、リズム音楽が選択されると、選択されたリズム音楽のテンポの設定が行われる(ステップS4)。ユーザによりアップキーU又はダウンキーDが操作され、テンポが設定されると、設定されたテンポにリズム音楽のテンポが音変換されて音再生スピーカ17により再生される。ユーザは再生されるリズム音楽を試聴してテンポを確認しながら所望のテンポになるまでアップキーU又はダウンキーDの押下操作を続ける。なお、テンポ設定は、メールデータが作成された後でも適宜変更設定可能であるとする。
【0059】
リズム音楽のテンポ設定が終了すると、ユーザにより入力部12を介してメール文の文字入力が行われ(ステップS5)、メール作成画面131の文字入力エリアa2に入力されたメール文が表示される。
【0060】
次いで、メール文の文字入力が終了すると、入力されたメール文字が選択されたグラフィック候補のグラフィックパターンにグラフィック変換されたメッセージデータが作成される(ステップS6)。図5(b)にそのグラフィック変換後のメッセージデータを示す。図5(b)に示すように、例えば花のグラフィックが選択された場合、メール文の文字が花のグラフィックの一部となって表示されるように花のグラフィックパターンに変換される。また、グラフィックが花の大きさが伸縮する動画のパターンデータである場合、リズム音楽のリズムやテンポに応じて花のグラフィックが変化するとともにメール文字もリズム音楽に応じて、例えば花の周りをぐるぐる周回するようにメッセージデータが作成される。
【0061】
メッセージデータが作成されると、この作成されたメッセージデータに、テンポ設定されたリズム音楽の音楽データが添付される。そして、作成されたメッセージデータは表示部13に表示され(図5(b)参照)、その表示に合わせて添付されたリズム音楽が音再生スピーカ17から再生される。
【0062】
ユーザは送信するメール文全体に対してグラフィック及びリズム音楽を選択することもできるし、メール文をいくつかの文節に区切り、区切った文節毎にグラフィック及びリズム音楽を選択することもできる。メール文全体に対してグラフィック及びリズム音楽を選択する場合は、この時点で入力部12を介してメール作成の終了を指示入力し、文節毎にグラフィック及びリズム音楽を選択する場合は、新たにグラフィック及びリズム音楽を選択してメール文の入力を行うことを指示する。
【0063】
携帯通信端末1aでは、さらにメール文の入力が指示されたか否かが判別される(ステップS7)。メール文の入力が指示された場合は(ステップS7;Y)、ステップS2の処理に戻り、新たにグラフィック及びリズム音楽を選択してメール作成が継続される。具体的には、図5(a)に示すメール作成画面131が再表示され、グラフィック候補及びリズム音楽の選択が行われる。そして、新規のメール文が入力されると、選択されたグラフィック候補のグラフィックパターンに新規のメール文がグラフィック変換されたメッセージデータが作成され、図5(c)に示すメール作成画面133が表示される。
【0064】
一方、メール文の入力が指示されず、メール作成の終了が指示された場合(ステップS7;N)、メール作成が一旦終了され、これまでに作成されたメッセージデータのプレビューが実行される(ステップS8)。
【0065】
プレビュー時には、図6に示すようなメール画面134が表示部13に表示される。例えば、「今日は」、「ありがとう」、「楽しかったよ」の文節毎にグラフィック及びリズム音楽が選択された場合、文節毎に異なるグラフィックパターンに変換されたメッセージデータが作成され、選択されたリズム音楽がそのメッセージデータに添付される。そして、作成されたメッセージデータは、図6に示すように、表示軸に従って連続して表示され、各文節のメッセージデータが表示領域に表示されている間は、そのメッセージデータに添付されたリズム音楽の音楽データが音再生スピーカ17から出力される。
【0066】
メール画面134で表示されたメッセージデータのグラフィックが動画である場合は、リズム音楽のリズムやテンポに応じてそのグラフィック及びグラフィックに組み込まれたメール文字の表示位置や大きさが変化する。
【0067】
プレビュー表示後には、「この内容で送信しますか?」等の確認メッセージが表示される。ユーザは、プレビューされたこのメール画面134において、作成したミュージックメールの表示内容及びリズム音楽を確認し、メールの作成内容に満足すれば決定キーKを押下し、内容に不満があればクリアキーCを押下する。
【0068】
携帯通信端末1aでは、決定キーK又はクリアキーCの押下が待機され、プレビューされたミュージックメールの作成内容がユーザにより承認されたか否かが判別される(ステップS9)。クリアキーCが押下され、ミュージックメールの作成内容がユーザにより承認されなかった場合(ステップS9;N)、ステップS2に戻ってグラフィックとリズム音楽の選択からメール作成をやり直す。
【0069】
一方、決定キーKが押下され、ミュージックメールの作成内容がユーザにより承認された場合(ステップS9;Y)、メッセージデータにリズム音楽データが添付された送信用のメールデータが作成される。作成された送信用メールデータは通信部16を介して指定された送信先へ送信され(ステップS10)、本処理を終了する。
【0070】
携帯通信端末1bでは、携帯通信端末1aからミュージックメッセージデータが送信されると、上述したステップS6におけるプレビュー処理と同様の処理が行われる。つまり、図6に示したメール画面が表示部に表示され、グラフィック変換されたメッセージデータが表示されるとともに、そのメッセージデータに添付されていたリズム音楽の音楽データが音再生スピーカから出力される。受信されたミュージックメールに対して返信メールを作成する際には、携帯通信端末1bにおいても上述したメール作成処理が起動され、ミュージックメールを作成することが可能である。
【0071】
以上のように、第1の実施の形態によれば、ミュージックメール送信時には、ユーザの現状の感情に応じてグラフィック、リズム音楽を選択することにより、選択されたグラフィックパターンにメール文がグラフィック変換されたメッセージデータが作成され、当該作成されたメッセージデータに、選択されたリズム音楽の音楽データが添付されて指定された送信先へ送信されるので、ユーザはメール作成画面で選択項目を選択するだけの容易な操作で感情表現豊かなメールを通信相手に送信することができる。
【0072】
また、メッセージデータはメール文字をグラフィックの一部とした動画データであり、リズム音楽のリズムとテンポに協調した動きでグラフィックだけではなくメール文字のスタイルやレイアウトが変化するようなメッセージデータを作成するので、メールを作成するユーザの感情に応じたグラフィックやリズム音楽及びそのテンポを選択することにより、通信相手に伝えたい感情を視覚的及び聴覚的に表現することができる。
【0073】
一方、ミュージックメールを受信した携帯通信端末においても、送信元ユーザにより選択されたグラフィックパターンにグラフィック変換されたメッセージデータが表示されるとともに、その表示に合わせてメッセージデータに添付されたリズム音楽の音楽データが再生されるので、視覚的、聴覚的にメールの送信元ユーザの感情を把握することが容易となる。
【0074】
従って、ミュージックメールをやり取りする両者のコミュニケーション向上を図ることができる。
【0075】
また、ミュージックメールの作成時には、作成したミュージックメールのプレビューが行われるので、作成内容を確認しながらミュージックメールを作成することができ、メール作成の操作性がより向上する。
【0076】
なお、第1の実施の形態における記述内容は、本発明を適用した携帯通信端末1a、1bの好適な一例であり、これに限定されるものではない。
例えば、上述した説明では、ミュージックメールに適用する音楽をリズム音楽としたが、音階が設定されたメロディ音楽であってもよく、その音楽の種類は特に限定しない。
【0077】
その他、第1の実施の形態における携帯通信端末1a、1bの細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【0078】
〈第2の実施の形態〉
第2の実施の形態では、ミュージックメール送信時には、文字に音階を設定しながら入力されたメール文を楽譜を模したグラフィックパターンにグラフィック変換したメッセージデータを作成するとともに、メール文字に設定された音階からメロディ音楽の音楽データを作成し、当該メロディ音楽の音楽データとユーザにより選択された複数種の音楽データをメッセージデータに添付して指定された送信先へ送信し、ミュージックメール受信時にはグラフィック変換されたメッセージデータを表示するとともに、その表示に合わせてメッセージデータに添付されている複数の音楽データを重ねて再生する例を説明する。
【0079】
まず、第2の実施の形態における携帯通信端末の構成について説明するが、第2の実施の形態における通信システムのシステム構成及び携帯通信端末の構成は、第1の実施の形態における通信システム100、携帯通信端末1a、1bの構成と同一であるので、同一の符号を付してその図示を省略し、異なる構成部分についてのみ説明する。
【0080】
すなわち、第2の実施の形態において、通信システム100は、携帯通信端末1a、1bが通信ネットワークNを介して接続され、携帯通信端末1aは、制御部11、入力部12、表示部13、RAM14、ROM15、通信部16、受話スピーカ21、送話マイク35、音再生スピーカ17から構成される。なお、携帯通信端末1bの構成は携帯通信端末1aと同一である。
【0081】
制御部11は、ROM15に格納されるメール作成処理プログラム(図7参照)との協働により、音楽とグラフィックを組み合わミュージックメールの作成を行う。具体的には、入力部12を介してユーザによりミュージックメールのベース音楽、ビート音楽及び作成するメロディ音楽の音源が選択されるとともに、メール文の文字入力が行われて各文字に音階が設定されると、選択された音源で各文字に設定された音階を元にメロディ音楽の音楽データを作成する。
【0082】
また、ROM15から楽譜のグラフィックパターンを読み出し、メール文の文字に設定された音階に応じてメール文字を音符として楽譜のグラフィック上に配置したメッセージデータを作成する。メールの送信時には、作成されたメッセージデータに、選択されたベース音楽、ビート音楽及びメロディ音楽の各音楽データを添付した送信用のメールデータを作成する。すなわち、制御部11によりメール作成手段、音楽作成手段を実現することができる。
【0083】
作成されたミュージックメールのプレビュー時、或いはメール受信時には、楽譜のグラフィックパターンにメール文がグラフィック変換されたメッセージデータを表示部13に表示させ、その表示に合わせてメッセージデータに添付されたベース音楽、ビート音楽、メロディ音楽の各音楽データを音再生スピーカ17に出力し、各音楽データを重ねて再生するよう指示する。
【0084】
ROM15は、第2の実施の形態におけるメール作成処理プログラムを格納する。また、ROM15は、辞書データを格納するメモリ領域の他、ユーザの感情を表現するためのベース音楽(例えば、副旋律となるようなバックグラウンド的な音楽)、ビート音楽(例えば、単音でリズムを打つドラムの音からなる音楽等)の音楽データ、各種音質(例えば、バイオリンの音色、オルゴールの音色等)の音源データを複数格納するメモリ領域、楽譜を模したグラフィックパターンデータを格納するメモリ領域を有する記憶手段である。
【0085】
楽譜のグラフィックパターンは、グリッド状に形成された楽譜のグラフィック上にメール文字を組み込む領域が予め準備されているものであり、メール文のグラフィック変換とは、メール文字を当該楽譜のグラフィックパターンに当てはめてメール文字をグラフィックの一部とすることをいう。グラフィック変換時には、グラフィックに合わせてメール文字のスタイルを変更することとしてもよい。
【0086】
また、ROM15は、送受信されたミュージックメール(メッセージデータ及び音楽データ)を格納するメモリ領域を有している。受信されたミュージックメールは、そのミュージックメールに設定されているベース音楽の種類毎に記憶される。
【0087】
次に、第2の実施の形態における携帯通信端末の動作について説明する。
第2の実施の形態においても、携帯通信端末1aにおいてミュージックメールを作成して携帯通信端末1bに送信し、携帯通信端末1bにおいて携帯通信端末1aから受信されたミュージックメールのメッセージデータを表示するとともにメッセージデータに添付された音楽データを再生する例を説明する。
【0088】
携帯通信端末1aにより実行されるメール作成処理について、図7に示すフローチャート、図8に示すメール作成画面の画面遷移図を参照して説明する。なお、説明の前提として、メールのテキストデータのみを作成して送信する通常モードとミュージックメールを作成するミュージックメールモードのうち、ミュージックメールモードが選択され、以下に説明するメール作成処理が開始されたこととする。
【0089】
図7に示すメール作成処理では、まず表示部13にメール作成画面231(図8(a)参照)が表示され、ミュージックメールのベース音楽の選択が行われる(ステップS101)。図8(a)に示すように、メール作成画面231には、「Exiting」、「Happy」、「Sad」、「Calm」のユーザの感情を表す感情エリアb1〜b4が選択可能に表示される。各感情エリアb1〜b4には、その感情を表現するベース音楽が設定されており、ユーザにより何れかの感情エリアb1〜b4が選択されると、当該選択された感情エリアに応じたベース音楽がROM15から読み出されて音再生スピーカ17から出力される。ユーザは、ベース音楽を試聴しながら現在の感情に合った感情エリアb1〜b4を選択し、決定キーKを押下する。決定キーKが押下されると、選択された感情エリアに応じたベース音楽がミュージックメールのベース音楽として決定される。
【0090】
ベース音楽が決定されると、表示部13にビート音楽及び作成するメロディ音楽の音質を選択するためのメール作成画面232(図8(b)参照)が表示され、まずミュージックメールのビート音楽の選択が行われる(ステップS2)。図8(b)に示すように、メール作成画面232では、画面上部にビート音楽を繰り替えるためのビート変換エリアb5が表示される。ビート変換エリアb5では、現在選択されているビート音楽名が表示され、レフトキーL又はライトキーRの押下操作に応じてビート音楽が異なるビート音楽に切り換えられる。ユーザはレフトキーL又はライトキーRを操作して所望のビート音楽を選択する。
【0091】
ユーザにより何れかのビート音楽が選択されると、当該選択されたビート音楽がROM15から読み出されてステップS1で決定されたベース音楽と合わせて音再生スピーカ17から再生される。ユーザは、ベース音楽及びビート音楽を試聴してその組み合わせを確認しながら所望のビート音楽を選択する。
【0092】
次いで、このメール作成画面232において、ミュージックメールのメロディ音楽の音質が選択される(ステップS103)。各ビート音楽にはそのビート音楽に応じた音質が設定されており、メール画面232のビート変換エリアb5の下部には、選択されたビート音楽に応じた音質が選択可能に表示された音質エリアb6〜b9が表示される。例えば、「Natural」、「Jazz」、「Classic」等の様々なジャンルのビート音楽の中から、「Natural」のビート音楽が選択されると、「Natural」に応じた「wind」、「sun」、「sea」、「ground」の4つの音質エリアb6〜b9が表示される。これらの音質名は、ユーザが音質をイメージしやすい名前で表示されるため音質が選択しやすくなる。
【0093】
ユーザにより何れかの音質エリアb6〜b9が選択され、決定キーKが押下されると、ビート変換エリアb5で選択されているビート音楽がミュージックメールに設定されるビート音楽として、音質エリアb6〜b9により選択された音質がメロディ音楽の音質として決定される。
【0094】
ベース音楽、ビート音楽及びメロディ音楽の音質がそれぞれ選択されると、表示部13にメール文の文字入力を行うための文字入力シートが表示されたメール作成画面233(図8(c)参照)が表示され、メール文の文字入力が行われる(ステップS104)。図8(c)に示すように、メール作成画面233では、決定されたベース音楽名、ビート音楽名及び音質名とともに文字入力シートb10が表示される。文字入力シートb10は、グリッド状に形成されており、1つのグリッドに1文字を入力することが可能な態様に形成されている。また、この文字入力シートb10は、入力された文字に音階を設定するための楽譜シートでもあり、縦のグリッドラインに対して音階が設定されている。
【0095】
ユーザは、このメール作成画面233の文字入力シートb10において、アップキーU、レフトキーL等のカーソルキーを操作して文字を入力するグリッドを指定後、テンキー群31により文字入力を行う。つまり、文字に音階を設定しながらメール文字を入力していく。例えば、図8(d)に示すように、「きょうはありがとととと」のメール文を入力する際に、「きょうは」の各文字はドの音階に、「あ」の文字はラの音階に、「り」の文字はソの音階に、といったように文字のレイアウトや音階を設定しながらメールの文字を順次各グリッドに文字を入力していくことができる。メール文字の入力は、メールが表示された際のビジュアル性を重視して文字のレイアウトを考えながら入力することもできるし、メール表示に再生される音楽性を重視してメロディ構成を考えながら入力することもできる。そして、文字入力が終了すると、ユーザは決定キーKを押下する。
【0096】
次いで、ステップS105では、決定キーKが押下され、文字入力が終了されたか否かが判別される。文字入力が終了していない場合は(ステップS105;N)、ステップS104に戻ってメール文の文字入力が継続される。一方、決定キーが押下され、文字入力が終了した場合は(ステップS105;Y)、選択された音質に応じた音源データがROM15から読み出され、当該音源データを用いて文字入力シートにおいてメール文の各文字に設定された音階を元にメロディ音楽の音楽データが作成される(ステップS106)。さらに、ROM15から楽譜のグラフィックパターンデータが読み出され、この楽譜のグラフィックパターンにメール文の文字が音符として組み込まれた、つまりメール文がグラフィック変換されたメッセージデータが作成される(ステップS107)。
【0097】
メロディ音楽データ及びメッセージデータが作成されると、プレビューが実行される(ステップS108)。プレビュー時には、図9に示すようなメール画面235が表示部13に表示される。メール画面235では、画面上部にベース音楽名、ビート音楽名及びその音源名b11が表示され、画面中央部にはグリッドから構成される楽譜上にメール文の文字が音符として配置されたグラフィックb12が表示される。また、グラフィックの表示に合わせて「Exiting」のベース音楽、「Natural」のビート音楽及び「Sun」の音質のメロディ音楽が音再生スピーカ17から再生される。
【0098】
プレビュー表示後には、「この内容で送信しますか?」等の確認メッセージが表示される。ユーザは、プレビューされたメール画面235において、作成したミュージックメールの表示内容及び音楽を確認し、メールの作成内容に満足すれば決定キーKを押下し、内容に不満があればクリアキーCを押下する。
【0099】
携帯通信端末1aでは、決定キーK又はクリアキーCの押下が待機され、プレビューされたミュージックメールの作成内容がユーザにより承認されたか否かが判別される(ステップS109)。クリアキーCが押下され、ミュージックメールの作成内容がユーザにより承認されなかった場合は(ステップS109;N)、ステップS101に戻って、音楽の設定からやり直す。
【0100】
一方、決定キーKが押下され、ミュージックメールの作成内容がユーザにより承認された場合(ステップS109;Y)、作成されたメッセージデータに、ベース音楽、ビート音楽、メロディ音楽の各音楽データが添付された送信用のメールデータが作成される。作成された送信用メールデータは、通信部16を介して指定された送信先へ送信されて(ステップS110)、本処理を終了する。
【0101】
携帯通信端末1bでは、携帯通信端末1aからミュージックメールが送信されると、上述したステップS108のプレビュー処理と同様な処理が行われる。つまり、図9に示すようなメール画面が表示部に表示され、メール文を含む楽譜のグラフィックが表示されるとともに、そのメール文の表示に合わせてベース音楽、ビート音楽、メロディ音楽の各音楽データが重ねられて音再生スピーカから再生される。
【0102】
受信されたミュージックメールに対して返信のミュージックメールを作成する際には、上述したようなメール作成処理が携帯通信端末1bにおいても起動され、ミュージックメールを作成することができる。このとき、受信メールとは関係なく新規メールで返信する場合には、上述したようにベース音楽、ビート音楽、音源を新たに設定してミュージックメールを作成し、返信先のアドレスを指定して送信する。
【0103】
一方、受信メールを引用して返信メールを作成する場合で、通信相手と同一のベース音楽、ビート音楽、音質を選択する場合には、受信されたメール文に続けて返信分のメール文を入力できる文字入力シートがメール作成画面上に表示され、ユーザにより返信分のメール文が入力されると、受信メール文と返信メール文とがともに楽譜のグラフィックパターンにグラフィック変換されたメッセージデータが作成される。同時に、返信メール文のメロディ音楽が作成され、受信メールのメロディ音楽に続けて返信メール文のメロディ音楽が結合されて作成されたメッセージデータに添付される。プレビュー時には、図10(a)に示すように、通信相手から受信されたメール文に続けて返信分のメール文が楽譜のグラフィックb13上に表示され、受信メール文と返信メール文とで作成されたメロディ音楽が再生される。
【0104】
また、受信メールを引用して返信メールを作成する場合で、受信されたメールとは異なるベース音楽、ビート音楽、音質を選択する際には、新たに選択されたベース音楽、ビート音楽、音質の文字入力シートがメール作成画面上に表示される。ユーザにより返信分のメール文が入力されると、その返信メール文がグラフィック変換されたメッセージデータが作成されるとともに、返信メール文のメロディ音楽が作成され、返信分のメッセージデータに添付されたメールデータが作成される。次いで、受信されたメールデータと今回新たに作成された返信分のメールデータとが結合されて送信用のメールデータが作成される。プレビュー時には、図10(b)に示すように、まず受信メール文が表示され、その音楽データが1小節目として再生された後、2小節目として今回作成された返信メール文の表示に切り替わり、その音楽データが再生される。
【0105】
このように、受信されたミュージックメールを引用して返信メールを作成することにより、一連の音楽とその楽譜ができあがる。
【0106】
また、上記携帯通信端末1a、1bでは、ミュージックメールが受信されると、当該受信されたミュージックメールで設定されているベース音楽の種類から感情が判別され、その感情毎に受信メールの履歴が記憶される。ユーザから受信メール履歴が要求された場合は、図11に示すような履歴画面236が表示され、「Exiting」、「Happy」、「Calm」、「Sad」の各感情エリアc1〜c4が表示される。この感情エリア内で示される円の図形は今までに受信されたミュージックメールの存在を示し、円のサイズ及び位置により受信されたメールのメロディ音楽の音階の範囲を示している。このように感情エリアc1〜c4に受信メールの履歴を表示することにより、相手の感情の経緯を容易に把握することができる。
【0107】
以上のように、第2の実施の形態によれば、ミュージックメール送信時には、現状の感情に合ったベース音楽、ビート音楽を試聴しながら選択し、メール文の文字に音階を設定しながらメール文を入力することで、メール文の再生時にメール文字に設定された音階で作成されたメロディ音楽と、選択されたベース音楽、ビート音楽が重ねられて再生される。また、メール文が表示される際にメール文の文字が音符となって楽譜のグラフィック上に配置されるようなグラフィックパターンにメール文がグラフィック変換されたメッセージデータが作成されるので、ユーザは現状の感情に応じてメール作成画面に表示された選択項目を選択するだけの容易な操作で感情表現豊かなメールを作成することができる。
【0108】
また、ミュージックメールを受信した携帯通信端末においても、楽譜のグラフィック上に音符のように配置されたメール文が表示されるとともに、その表示に合わせて送信元ユーザにより選択されたベース音楽、ビート音楽、メロディ音楽の各音楽データが重ねられて再生されるので、視覚的、聴覚的にメールの送信元ユーザの感情を把握することが容易となる。
【0109】
従って、ミュージックメールをやり取りする両者のコミュニケーション向上を図ることができる。
【0110】
また、ベース音楽、ビート音楽と、重ねる音楽をユーザが選択することができるので、気分に合わせて無作為的に音楽を組み合わせることもできるし、逆に作為的に音楽の調和を考えながら組み合わせることもできる。
【0111】
また、メール文字は、楽譜のグラフィック上に音符として表示されるので、ビジュアル性を重視して文字のレイアウトを考えながら文字入力を行うこともできるし、音楽性を重視して文字入力を行うこともできる。前者の場合は、無作為的なメロディ音楽を作曲することができ、後者の場合は、ユーザの意図に応じたメロディ音楽を作曲することができる。
【0112】
このように、ユーザが任意に音楽データを作成可能としたことにより、ユニークなミュージックメールを作ることができ、ユーザのメール創作意欲を向上させることができる。
【0113】
また、ミュージックメールの作成時には、作成したミュージックメールの表示内容及び音楽をプレビューにより確認しながら、ミュージックメールを作成することができるので、メール作成の操作性がより向上する。
【0114】
また、受信メール文を引用して返信メールを作成する際には、その受信メール文のメロディ音楽に続けて返信メール文のメロディ音楽が加えられるので、ミュージックメールのやり取りを繰り返すことにより、一連の音楽データとその楽譜を作成することができる。このミュージックメールのやり取りにより作成された一連の音楽からお互いの感情の推移を把握しやすくなる。
【0115】
なお、第2の実施の形態における記述内容は、本発明を適用した携帯通信端末1a、1bの好適な一例であり、これに限定されるものではない。
例えば、上述した説明では、重ねる音楽の種類をベース音楽、ビート音楽、メロディ音楽としたが、これに限らず、メロディ音楽1、メロディ音楽2、メロディ音楽3と、全て同じ種類の音楽を重ねることとしてもよいし、その他の種類の音楽を重ねることとしてもよい。また、重ねる音楽の種類の数も3つに限らない。
【0116】
また、上述した説明では、ROM15に楽譜のグラフィックパターンデータを1パターンだけ記憶する構成で説明したが、これに限らず、楽譜のデザインを変えて複数パターンの楽譜のグラフィックパターンを備え、ユーザの好みに応じたグラフィックを選択可能な構成としてもよい。
【0117】
また、グラフィック変換時に、選択された音楽に応じてメール文の文字フォント、サイズ、表示色等の文字スタイルを変更することとしてもよい。例えば、「Happy」のベース音楽が選択された場合には文字色を暖色系の色に変更することにより、よりユーザの感情をアピールすることができる。
【0118】
その他、第2の実施の形態における携帯通信端末1a、1bの細部構成及び細部動作に関しても、本発明の趣旨を逸脱することのない範囲で適宜変更可能である。
【0119】
【発明の効果】
本発明によれば、容易な操作で視覚的、聴覚的に感情表現豊かなメールを作成することができる。
【図面の簡単な説明】
【図1】本発明を適用した第1の実施の形態における携帯通信端末1a、1bとが接続された通信システム100のシステム構成を示す図である。
【図2】携帯通信端末1aの外観を示す図である。
【図3】携帯通信端末1aの内部構成を示す図である。
【図4】第1の実施の形態における携帯通信端末1aにより実行されるメール作成処理を説明するフローチャートである。
【図5】メール作成処理で表示部13に表示されるメール作成画面の画面遷移図である。
【図6】作成されたミュージックメールのプレビュー時に表示されるメール画面である。
【図7】第2の実施の形態における携帯通信端末1aにより実行されるメール作成処理を説明するフローチャートである。
【図8】第2の実施の形態におけるメール作成処理時に表示部13に表示されるメール作成画面の画面遷移図である。
【図9】作成されたミュージックメールのプレビュー時に表示されるメール画面である。
【図10】返信メールのメール画面を示す図である。
【図11】受信されたミュージックメールの受信履歴画面を示す図である。
【符号の説明】
1 携帯通信端末
2 ディプレイ部
21 受話スピーカ
3 キー入力部
31 テンキー群
U アップキー
D ダウンキー
L レフトキー
R ライトキー
K 決定キー
C クリアキー
35 送話マイク
11 制御部
12 入力部
13 表示部
14 RAM
15 ROM
16 通信部
17 音再生スピーカ
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a mobile communication terminal and a program for sending and receiving mail.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, mobile communication terminals such as mobile phones, PHS (Personal Handy-phone System), and PDA (Personal Digital Assistant) that can send and receive electronic mail have been widely used.
[0003]
In a mobile communication terminal having such a mail function, in order to improve the communication effect between users who send and receive mail, a technique for sending and receiving mail via an electronic pet (for example, see Patent Document 1), a mail text When a melody data is added to a message and transmitted to the other party, a technique has been developed that allows the other party to reproduce the melody data when receiving mail and to easily identify the mail sender (see Patent Document 2, for example). .
[0004]
Using such a portable communication terminal, the user can communicate with the other party by sending and receiving mail. Conventionally, emotional expression has been performed by devising and creating e-mail texts using symbols, pictograms, etc., or sending melody data or image data attached to e-mail texts.
[0005]
[Patent Document 1]
JP 2001-276436 A
[Patent Publication 2]
JP 2003-8686 A
[0006]
[Problems to be solved by the invention]
However, there is a limit to the expression of emotions using symbols and pictograms, and it is not enough to express the emotions that you want to convey to the other party. Even if melody data or image data is attached to the mail text, the mail text and image are displayed separately, and only the text is displayed in the specified font for the mail text. It gives an inorganic impression, and the communication effect is not very good.
[0007]
An object of the present invention is to provide a mobile communication terminal capable of creating an e-mail rich in emotional expression.
[0008]
[Means for Solving the Problems]
The invention according to claim 1 is a portable communication terminal,
An input means for inputting characters in the mail text;
Display means for displaying a mail text input by the input means;
Graphic storage means for storing a plurality of graphic pattern data for graphic conversion of mail text;
Music storage means for storing a plurality of types of music data;
Graphic selection means for selecting a graphic pattern used for displaying a mail sentence from the plurality of stored graphic patterns;
Music selection means for selecting music data to be reproduced when displaying a mail sentence among the plurality of types of stored music data;
Creating a message data obtained by graphic conversion of the inputted mail sentence into the selected graphic pattern, and creating a mail data for transmission by attaching the selected music data to the message data;
Communication means for transmitting the created mail data for transmission to a specified destination;
It is characterized by providing.
[0009]
The invention according to claim 2 is a portable communication terminal,
Communication means for receiving graphic-converted message data and music data attached to the message data;
Display means for displaying the received message data;
Music playback means for playing back music data attached to the message data in accordance with the display of the message data;
It is characterized by providing.
[0010]
The invention according to claim 3 is a portable communication terminal,
An input means for inputting characters in the mail text;
Graphic storage means for storing a plurality of graphic pattern data for graphic conversion of mail text;
Music storage means for storing a plurality of types of music data;
Graphic selection means for selecting a graphic pattern used for displaying a mail sentence from the plurality of stored graphic patterns;
Music selection means for selecting music data to be reproduced when displaying a mail sentence among the plurality of types of stored music data;
Creating a message data obtained by graphic conversion of the inputted mail sentence into the selected graphic pattern, and creating a mail data for transmission by attaching the selected music data to the message data;
A communication means for transmitting the created mail data for transmission to a designated destination, and receiving message data in which a mail text is graphic-converted from an arbitrary communication partner and music data attached to the message data;
Display means for displaying the graphic-converted message data;
Music playback means for playing back music data attached to the message data in accordance with the display of the message data;
It is characterized by providing.
[0011]
The invention according to claim 4 is the mobile communication terminal according to claim 1 or 3,
Setting means for setting the tempo of the sound of the music data selected by the selection means;
Sound conversion means for converting the tempo of the sound of the music data to the set tempo,
The communication means is characterized in that the music data whose sound is converted to the set tempo is attached to message data and transmitted.
[0012]
The invention according to claim 5 is the portable communication terminal according to claim 1, 3 or 4,
The stored graphic pattern data is video data,
The mail creating means creates message data that changes a graphic movement in accordance with a sound rhythm of the selected music data.
[0013]
The invention according to claim 6 is a portable communication terminal,
An input means for inputting characters in the mail text;
Display means for displaying a mail text input by the input means;
Graphic storage means for storing graphic pattern data for graphic conversion of mail text;
Music storage means for storing a plurality of types of music data;
Music selection means for selecting music data to be reproduced when displaying a mail sentence among the plurality of types of stored music data;
Mail creating means for creating message data obtained by graphic conversion of the inputted mail text into the stored graphic pattern, and creating mail data for transmission by attaching the plurality of selected music data to the message data When,
Communication means for transmitting the created mail data for transmission to a specified destination;
It is characterized by providing.
[0014]
The invention according to claim 7 is a portable communication terminal,
Communication means for receiving graphic-converted message data and a plurality of music data attached to the message data;
Display means for displaying the received message data;
A music playback means for playing back a plurality of music data attached to the message data according to the display of the message data,
It is characterized by providing.
[0015]
The invention according to claim 8 is a portable communication terminal,
An input means for inputting characters in the mail text;
Graphic storage means for storing graphic pattern data for graphic conversion of mail text;
Music storage means for storing a plurality of types of music data;
Music selection means for selecting a plurality of music data to be reproduced when displaying a mail sentence among the plurality of types of stored music data;
Mail that creates message data obtained by graphic conversion of the characters of the inputted mail text into the stored graphic pattern and attaches the plurality of selected music data to the message data to create mail data for transmission Creating means;
A communication means for transmitting the created mail data for transmission to a specified destination and receiving message data graphic-converted from any communication partner and a plurality of music data attached to the message data;
Display means for displaying the graphic-converted message data;
A music playback means for playing back a plurality of music data attached to the message data according to the display of the message data,
It is characterized by providing.
[0016]
The invention according to claim 9 is the portable communication terminal according to claim 6 or 8,
Setting means for setting a scale for the characters of the mail text input by the input means;
Music creation means for creating music data of melody music based on the scale set in the mail text by the setting means,
The mail creating means creates the mail data for transmission by attaching the music data of the created melody music together with the selected plurality of music data to message data.
[0017]
The invention according to claim 10 is the portable communication terminal according to claim 6, 8 or 9,
The graphic pattern data stored in the graphic storage means is graphic pattern data imitating a musical score,
The mail creating means creates message data in which the text of the mail sentence whose scale is set by the setting means is incorporated into the stored graphic of the musical score as a note.
[0018]
The invention according to claim 11 is the mobile communication terminal according to claim 8,
The input means inputs a reply mail text for the received mail,
The music selection means selects music data to be played back when the reply mail text is displayed,
The mail creating means creates message data obtained by graphic conversion of the reply mail text into the stored graphic pattern, creates mail data for transmission by attaching the selected music data to the message data,
The communication means transmits the created transmission mail data to a transmission source of the received mail.
[0019]
The invention according to claim 12 is the portable communication terminal according to claim 11,
When the selecting means selects the same music data as the music data of the received mail as the music data of the received mail by the selecting means, the message data obtained by graphic conversion of the mail text for the reply together with the mail text of the received mail And sending mail data in which the same music data as the received mail is attached to the message data.
[0020]
The invention according to claim 13 is the mobile communication terminal according to claim 11,
When the selection unit selects music data different from the music data of the received mail as the reply mail music data, the mail creating means creates message data obtained by graphic conversion of only the reply mail text, A reply mail data is created by attaching the selected music data, and a mail data for transmission is created by combining the mail data for the reply and the mail data of the received mail. .
[0021]
The invention according to claim 14 is the mobile communication terminal according to claim 8,
The storage means stores a history of received mail for each type of music data attached to the message data,
When displaying the received mail history, the display means displays the received mail history for each type of music data.
[0022]
The invention according to claim 15 is:
On the computer,
A function to input the text of the mail text by input means;
A function for causing the display means to display the mail text input by the input means;
A function of storing graphic pattern data for graphic conversion of mail text in a plurality of types of graphic storage means;
A function for storing a plurality of types of music data in a music storage means;
A function of selecting a graphic pattern to be used for displaying a mail sentence from the plurality of stored graphic patterns;
A function of selecting music data to be played back at the time of displaying a mail sentence among the plurality of types of stored music data;
A function of creating message data obtained by graphic conversion of the inputted mail text into the selected graphic pattern, and creating mail data for transmission by attaching the selected music data to the message data;
A function of transmitting the created mail data for transmission to a specified destination;
It is a program for realizing.
[0023]
The invention described in claim 16
On the computer,
A function for receiving message data that has undergone graphic conversion and music data attached to the message data;
A function of displaying the received message data on a display means;
A function of playing music data attached to the message data in accordance with the display of the message data;
It is a program for realizing.
[0024]
The invention described in claim 17
On the computer,
A function to input the text of the mail text by input means;
A function of storing graphic pattern data for graphic conversion of mail text in a plurality of types of graphic storage means;
A function for storing a plurality of types of music data in a music storage means;
A function of selecting a graphic pattern to be used for displaying a mail sentence from the plurality of stored graphic patterns;
A function of selecting music data to be played back at the time of displaying a mail sentence among the plurality of types of stored music data;
A function of creating message data obtained by graphic conversion of the inputted mail text into the selected graphic pattern, and creating mail data for transmission by attaching the selected music data to the message data;
A function of transmitting the created mail data for transmission to a specified destination, and receiving message data in which a mail text is graphic-converted from any communication partner and music data attached to the message data;
A function for displaying the graphic-converted message data on a display means;
A function of playing music data attached to the message data in accordance with the display of the message data;
It is a program for realizing.
[0025]
The invention described in claim 18
On the computer,
A function to input the text of the mail text by input means;
A function for causing the display means to display the mail text input by the input means;
A function for storing graphic pattern data for graphic conversion of mail text in graphic storage means;
A function for storing a plurality of types of music data in a music storage means;
A function of selecting music data to be played back at the time of displaying a mail sentence among the plurality of types of stored music data;
A function of creating message data obtained by graphic conversion of the inputted mail text into the stored graphic pattern, and creating mail data for transmission by attaching the plurality of selected music data to the message data;
A function of transmitting the created mail data for transmission to a specified destination;
It is a program for realizing.
[0026]
The invention according to claim 19 is
On the computer,
A function for receiving graphic-converted message data and a plurality of music data attached to the message data;
A function of displaying the received message data on a display means;
In accordance with the display of the message data, a function of reproducing a plurality of music data attached to the message data,
It is a program for realizing.
[0027]
The invention according to claim 20 provides
On the computer,
A function to input the text of the mail text by input means;
A function for storing graphic pattern data for graphic conversion of mail text in graphic storage means;
A function for storing a plurality of types of music data in a music storage means;
A function of selecting a plurality of music data to be played back at the time of displaying a mail sentence among the plurality of types of stored music data;
A function of creating message data obtained by graphic conversion of the characters of the inputted mail text into the stored graphic pattern, and creating mail data for transmission by attaching the plurality of selected music data to the message data When,
A function of transmitting the created mail data for transmission to a specified destination, and receiving a plurality of music data attached to the message data and graphic data converted from any communication partner;
When displaying the graphic-converted message data on the display means,
In accordance with the display of the message data, a function of reproducing a plurality of music data attached to the message data,
It is a program for realizing.
[0028]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[0029]
<First Embodiment>
In the first embodiment, message data obtained by graphic conversion of a mail text is created, music mail data in which rhythm music data is attached to the message data is created and transmitted to a specified destination, and music mail is created. An example of a portable communication terminal that displays graphic-converted message data and reproduces rhythm music in accordance with the display at the time of reproduction will be described.
[0030]
First, the configuration will be described.
FIG. 1 shows a system configuration of a communication system 100 configured to include mobile communication terminals 1a and 1b in the present embodiment. As shown in FIG. 1, the communication system 100 includes mobile communication terminals 1a and 1b, and the mobile communication terminals 1a and 1b are connected to each other via a communication network N so as to be able to transmit and receive data. Although FIG. 1 shows an example in which two portable communication terminals 1a and 1b are connected, the number of installed terminals is not particularly limited.
[0031]
The mobile communication terminals 1a and 1b perform wireless communication via a wireless base station (not shown) and transmit / receive conversation voice data to / from each other. In addition, electronic mail (hereinafter simply referred to as mail) data is exchanged via a mail server (not shown). As the mobile communication terminals 1a and 1b, mobile phones, PHS, PDAs, and the like are applicable.
[0032]
Hereinafter, the configuration of the mobile communication terminals 1a and 1b will be described. Since the basic configurations of the mobile communication terminals 1a and 1b are the same even though their external appearances and application functions are different, the configuration description is given with the mobile communication terminal 1a as a representative. To do.
[0033]
FIG. 2 is an external view of the mobile communication terminal 1a.
As shown in FIG. 2, the mobile communication terminal 1a includes a display unit 2 and a key input unit 3, and a display unit 2 and a key input unit 3 are connected to each other by a coupling mechanism (not shown) provided at the center thereof. Is configured to be foldable.
[0034]
The display unit 2 is provided with a receiving speaker 21 that outputs the voice of the communication partner and an LCD (Liquid Crystal Display) 22 that displays various operation screens.
[0035]
The key input unit 3 includes a numeric key group 31, a power / off hook key 32, an on hook key 33, an up key U, a down key D, a left key L, a right key R, soft keys S1 and S2, an enter key K, and a clear key C. Each key group is provided. The function of each key will be described later. Below each key group, a transmission microphone 35 for inputting the user's voice is provided.
[0036]
FIG. 3 shows the internal configuration of the mobile communication terminal 1a.
As shown in FIG. 3, the mobile communication terminal 1a includes a control unit 11, an input unit 12, a display unit 13, a RAM (Random Access Memory) 14, a ROM (Read Only Memory) 15, a communication unit 16, a receiving speaker 21, a transmission speaker A talk microphone 35 and a sound reproduction speaker 17 are provided.
[0037]
The control unit 11 includes a CPU (Central Processing Unit) and the like, expands a system program stored in the ROM 15 to the RAM 14, and comprehensively controls the operation of each unit of the mobile communication terminal 1 in cooperation with the program. And realize the mobile phone function. Specifically, a reception voice signal input from the transmission microphone 18 during transmission is output to the communication unit 16, and a transmission partner's transmission voice signal input from the communication unit 16 is output to the reception speaker 17 during reception. .
[0038]
At the time of mail transmission, a mail combining music and graphics (hereinafter referred to as a music mail) is created in cooperation with a mail creation processing program (see FIG. 4) stored in the ROM 15. . Specifically, when a mail text is input by the user via the input unit 12 and a graphic to be used for music mail is selected, message data is created by graphic conversion of the input mail text into the selected graphic pattern data. To do. At this time, message data is created such that the mail characters and graphics change the movement according to the rhythm music.
[0039]
When the rhythm music to be applied to the music mail is selected by the user and the rhythm music tempo (sound speed) is set, the music data of the selected rhythm music is read from the ROM 15 and the rhythm is set to the set tempo. Convert music tempo. Then, the mail data for transmission is created by attaching the music data of the rhythm music subjected to sound conversion to the created message data. That is, the control unit 11 can realize a mail creation unit and a sound conversion unit.
[0040]
When the created music mail is previewed or when the music mail is received, the message data in which the mail text is graphic-converted is displayed on the display unit 13 and the music data of the rhythm music attached to the message data is reproduced. Playback is performed by the speaker 17.
[0041]
The input unit 12 includes the keypad group 31, the power / off hook key 32, the on hook key 33, the up key U, the down key D, the left key L, the right key R, the soft keys S1 and S2, the enter key K and the clear shown in FIG. The key C is configured to output an operation signal corresponding to the input operation of each key to the control unit 11. That is, the input means, the graphic selection means, the music selection means, and the setting are performed by performing the character input operation of the mail text, the selection operation of the graphic or rhythm music applied to the music mail, the setting operation of the rhythm music tempo, etc. by these keys. Means can be realized.
[0042]
The ten key group 31 is a key for inputting a telephone number and a character string (Hiragana, Katakana, English characters, symbol characters, etc.), and the power / off hook key 32 is used to turn on / off the power of the mobile communication terminal 1a. An end instruction is input, and the on-hook key 33 is a key for inputting a call start instruction.
[0043]
The up key U, the down key D, the left key L, and the right key R are cursor keys for inputting an instruction to move the input position on various operation screens, and the soft keys S1 and S2 are on each operation screen. It is a key to which a predetermined software function is assigned. The determination key K is a key for inputting a determination instruction, and the clear key C is a key for inputting a cancellation of the input instruction.
[0044]
The display unit 13 is a display unit configured by the LCD 22 illustrated in FIG. 2, and various display information such as a mail creation screen, a preview screen of the created mail, a received mail screen, and a processing result by the control unit 11. Is displayed.
[0045]
The RAM 14 forms a work area for temporarily storing various programs executed by the control unit 11 and data related to these programs.
[0046]
In addition to the system program, the ROM 15 stores a mail creation processing program, data processed by each program, and the like. The ROM 15 also has a memory area for storing dictionary data for converting input characters (Hiragana) into Kanji, Katakana, pictograms, etc., and a plurality of types of rhythm music (music that repeats a fixed time signature with a single sound). It has a memory area for storing music data, a memory area for storing pattern data of various graphics (including still images and moving images) prepared for creating a music mail, and a memory area for storing transmitted / received message data. That is, the ROM 15 can realize a graphic storage means and a music storage means.
[0047]
In addition, the pattern data of various graphics is prepared in advance with an area for applying mail characters in the graphic. Graphic conversion of mail text refers to mail characters that are applied to the graphic pattern and the mail characters are part of the graphic. It means that. At the time of graphic conversion, it is possible to change the style of the mail character according to the graphic.
[0048]
The communication unit 16 is a communication means configured to include a communication interface such as an antenna 16a for transmitting / receiving a wireless communication signal to / from a wireless base station, an RF circuit (not shown), and a modem. At the time of receiving, the received voice or mail wireless communication signal received via the antenna 16a is demodulated by an RF circuit and a modem and output to the control unit 11. On the other hand, during transmission, transmission voice and mail data input from the control unit 11 are modulated by an RF circuit and a modem and transmitted to the radio base station via the antenna 11.
[0049]
The reception speaker 21 converts the reception voice signal input from the control unit 11 into a reception voice and outputs it.
[0050]
The transmission microphone 35 converts the user's transmission voice into a transmission voice signal and outputs it to the control unit 11.
[0051]
The sound reproduction speaker 17 is a speaker configured separately from the reception speaker 17 and outputs a ring tone when receiving a call or outputs rhythm music data when displaying a music mail. That is, a music playback means can be realized by the sound playback speaker 17.
[0052]
Next, the operation in the present embodiment will be described.
In the present embodiment, a music mail in which rhythm music data is attached to message data obtained by graphic conversion of a mail text in the mobile communication terminal 1a is created and transmitted to the mobile communication terminal 1b. An example will be described in which message data of a received music mail text is displayed and rhythm music data is reproduced in accordance with the display.
[0053]
First, the mail creation processing executed by the mobile communication terminal 1a will be described with reference to the flowchart shown in FIG. 4 and the screen transition diagram of the mail creation screen shown in FIG. As a premise for explanation, the music mail mode is selected between the normal mode for creating and sending only the text data of the mail and the music mail mode for creating the music mail, and the mail creation process described below is started. I will do it.
[0054]
In the mail creation process shown in FIG. 4, first, a mail creation screen 131 (see FIG. 5A) for inputting text of a mail text is displayed on the display unit 13 (step S1). As shown in FIG. 5A, in the mail creation screen 131, a rhythm / graphic conversion area a1 and a character input area a2 are displayed, and music mail can be set in the upper part of the rhythm / graphic conversion area a1. A graphic candidate a11 is displayed, and a candidate name a12 of a rhythm music candidate and a tempo a13 currently set for the rhythm music are displayed at the bottom. On the mail creation screen 131, the rhythm music whose candidate name a12 is displayed in the rhythm / graphic conversion area a1 is reproduced by the sound reproduction speaker 17.
[0055]
Hereinafter, processing for selecting graphics and rhythm music to be used for music mail on the mail creation screen 131 will be described. On the mail creation screen 131, graphic candidates are switched to the left key L and the right key R among the operation keys. Functions, a function for switching rhythm music to the soft key S2, a function for setting the tempo of rhythm music faster to the up key U, and a function for setting the tempo of rhythm music to the down key D are assigned. . The tempo is set according to the number of times the up key U or the down key D is pressed, for example, when the up key U is pressed once, the tempo is set one level earlier.
[0056]
On the mail creation screen 131, first, a graphic to be used for the music mail is selected (step S2). In the mail creation screen 131, the graphic candidate a11 displayed in the rhythm / graphic conversion area a1 is switched to a different candidate in accordance with the pressing operation of the left key L or the right key R, so that the user operates the left key L or the right key R. Then, the graphic candidates are sequentially switched and displayed. When a desired graphic candidate is displayed, the determination key K is pressed.
[0057]
When the graphic is selected, rhythm music is next selected (step S3). In the mail creation screen 131, the rhythm music output from the sound reproduction speaker 17 is switched in response to the pressing operation of the soft key S2, so that the user operates the soft key S2 while viewing the rhythm music to select rhythm music candidates. When the desired music candidate is played back by switching, the determination key K is pressed.
[0058]
When rhythm music is selected, the tempo of the selected rhythm music is set (step S4). When the user operates the up key U or the down key D to set the tempo, the tempo of the rhythm music is converted into the set tempo and reproduced by the sound reproduction speaker 17. The user continues to press the up key U or the down key D until the desired tempo is reached while listening to the rhythm music to be reproduced and confirming the tempo. It is assumed that the tempo setting can be appropriately changed even after the mail data is created.
[0059]
When the rhythm music tempo setting is completed, the user inputs characters of the mail text via the input unit 12 (step S5), and the mail text input in the character input area a2 of the mail creation screen 131 is displayed.
[0060]
Next, when the character input of the mail text is completed, message data in which the input mail character is converted into a graphic pattern of the selected graphic candidate is created (step S6). FIG. 5B shows the message data after the graphic conversion. As shown in FIG. 5B, for example, when a flower graphic is selected, the mail text is converted into a flower graphic pattern so that it is displayed as part of the flower graphic. In addition, if the graphic is pattern data of a moving picture whose size of the flower expands and contracts, the graphic of the flower changes according to the rhythm and tempo of the rhythm music, and the mail character also moves around the flower, for example, according to the rhythm music. Message data is created to circulate.
[0061]
When the message data is created, music data of rhythm music set with a tempo is attached to the created message data. The created message data is displayed on the display unit 13 (see FIG. 5B), and the rhythm music attached in accordance with the display is reproduced from the sound reproduction speaker 17.
[0062]
The user can select the graphic and rhythm music for the entire mail sentence to be transmitted, or can divide the mail sentence into several phrases and select the graphic and rhythm music for each of the divided sentences. When selecting graphic and rhythm music for the entire mail sentence, at this point in time, the end of mail creation is input via the input unit 12, and when selecting graphic and rhythm music for each phrase, a new graphic is selected. And instructing the user to select a rhythm music and input a mail sentence.
[0063]
In the mobile communication terminal 1a, it is further determined whether or not an input of a mail text has been instructed (step S7). When the input of the mail text is instructed (step S7; Y), the process returns to step S2, and the mail creation is continued by newly selecting the graphic and rhythm music. Specifically, the mail creation screen 131 shown in FIG. 5A is redisplayed, and graphic candidates and rhythm music are selected. When a new mail text is input, message data in which the new mail text is graphic-converted into the graphic pattern of the selected graphic candidate is created, and a mail creation screen 133 shown in FIG. 5C is displayed. The
[0064]
On the other hand, when the input of the mail text is not instructed and the end of the mail creation is instructed (step S7; N), the mail creation is once finished and the preview of the message data created so far is executed (step S7). S8).
[0065]
During preview, a mail screen 134 as shown in FIG. 6 is displayed on the display unit 13. For example, when graphic and rhythm music is selected for each phrase of "Today", "Thank you", and "I enjoyed it", message data converted into a different graphic pattern is created for each phrase, and the selected rhythm music Is attached to the message data. As shown in FIG. 6, the created message data is continuously displayed according to the display axis, and while the message data of each phrase is displayed in the display area, the rhythm music attached to the message data is displayed. Is output from the sound reproduction speaker 17.
[0066]
When the graphic of the message data displayed on the mail screen 134 is a moving image, the graphic character and the display position and size of the mail character incorporated in the graphic change according to the rhythm and tempo of the rhythm music.
[0067]
After the preview is displayed, a confirmation message such as “Do you want to send with this content?” Is displayed. The user confirms the display contents and rhythm music of the created music mail on the mail screen 134 that has been previewed, and presses the enter key K if satisfied with the contents of the mail, and the clear key C if the contents are not satisfactory. Press.
[0068]
The portable communication terminal 1a waits for the determination key K or the clear key C to be pressed, and it is determined whether or not the content of the previewed music mail creation has been approved by the user (step S9). When the clear key C is pressed and the creation content of the music mail is not approved by the user (step S9; N), the process returns to step S2 to re-create the mail from the selection of graphic and rhythm music.
[0069]
On the other hand, when the determination key K is pressed and the creation content of the music mail is approved by the user (step S9; Y), the mail data for transmission with the rhythm music data attached to the message data is created. The created transmission mail data is transmitted to the designated transmission destination via the communication unit 16 (step S10), and this process ends.
[0070]
In the mobile communication terminal 1b, when the music message data is transmitted from the mobile communication terminal 1a, the same process as the preview process in step S6 described above is performed. That is, the mail screen shown in FIG. 6 is displayed on the display unit, the graphic-converted message data is displayed, and the rhythm music data attached to the message data is output from the sound reproduction speaker. When a reply mail is created for the received music mail, the above-described mail creating process is also activated in the mobile communication terminal 1b, and a music mail can be created.
[0071]
As described above, according to the first embodiment, when a music mail is transmitted, the mail text is converted into a graphic pattern by selecting the graphic and rhythm music according to the current emotion of the user. Message data is created, music data of the selected rhythm music is attached to the created message data and sent to the specified destination, so the user simply selects a selection item on the email creation screen It is possible to send an e-mail rich in emotional expression to the communication partner with an easy operation.
[0072]
In addition, message data is video data that uses mail characters as part of the graphic, and creates message data that changes not only the graphic but also the style and layout of the mail characters in a coordinated manner with the rhythm and tempo of rhythm music. Therefore, by selecting the graphic or rhythm music corresponding to the emotion of the user who creates the mail and the tempo thereof, the emotion desired to be communicated to the communication partner can be expressed visually and audibly.
[0073]
On the other hand, in the mobile communication terminal that has received the music mail, the message data converted into the graphic pattern selected by the transmission source user is displayed, and the rhythm music music attached to the message data in accordance with the display is displayed. Since the data is reproduced, it becomes easy to visually and audibly grasp the emotion of the user who sent the mail.
[0074]
Therefore, it is possible to improve communication between the two who exchange music mail.
[0075]
In addition, since the created music mail is previewed when the music mail is created, the music mail can be created while checking the created contents, and the operability of creating the mail is further improved.
[0076]
Note that the description in the first embodiment is a preferred example of the mobile communication terminals 1a and 1b to which the present invention is applied, and is not limited to this.
For example, in the above description, the music applied to the music mail is rhythm music, but it may be melody music with a scale set, and the type of music is not particularly limited.
[0077]
In addition, the detailed configuration and detailed operation of the mobile communication terminals 1a and 1b in the first embodiment can be changed as appropriate without departing from the spirit of the present invention.
[0078]
<Second Embodiment>
In the second embodiment, at the time of music mail transmission, message data is created by graphic conversion of an inputted mail sentence into a graphic pattern imitating a score while setting a scale for the character, and the scale set for the mail character is set. Melody music data is created from the melody music data and multiple types of music data selected by the user are attached to the message data and sent to the specified destination. An example of displaying the message data and reproducing a plurality of music data attached to the message data in accordance with the display will be described.
[0079]
First, the configuration of the mobile communication terminal in the second embodiment will be described. The system configuration of the communication system and the configuration of the mobile communication terminal in the second embodiment are the same as those of the communication system 100 in the first embodiment. Since it is the same as the configuration of the mobile communication terminals 1a and 1b, the same reference numerals are given and the illustration thereof is omitted, and only different components will be described.
[0080]
That is, in the second embodiment, in the communication system 100, the mobile communication terminals 1a and 1b are connected via the communication network N. The mobile communication terminal 1a includes the control unit 11, the input unit 12, the display unit 13, and the RAM 14. ROM 15, communication unit 16, reception speaker 21, transmission microphone 35, and sound reproduction speaker 17. The configuration of the mobile communication terminal 1b is the same as that of the mobile communication terminal 1a.
[0081]
The control unit 11 creates music mail by combining music and graphics in cooperation with a mail creation processing program (see FIG. 7) stored in the ROM 15. Specifically, the user selects a music mail base music, beat music, and a melody music sound source to be created through the input unit 12, and mail text is input to set a scale for each character. Then, melody music data is created based on the scale set for each character in the selected sound source.
[0082]
The graphic pattern of the musical score is read from the ROM 15, and message data is created by arranging the mail character as a note on the graphic of the musical score in accordance with the scale set for the character of the mail sentence. At the time of mail transmission, mail data for transmission is created by attaching each music data of the selected base music, beat music and melody music to the created message data. In other words, the control unit 11 can realize mail creating means and music creating means.
[0083]
When the created music mail is previewed or received, the message data in which the mail text is converted into a graphic pattern of the score is displayed on the display unit 13, and the base music attached to the message data in accordance with the display is displayed. Each music data of beat music and melody music is output to the sound reproduction speaker 17, and an instruction is given to superimpose and reproduce each music data.
[0084]
The ROM 15 stores the mail creation processing program in the second embodiment. The ROM 15 has a memory area for storing dictionary data, as well as base music for expressing the user's emotions (for example, background music that serves as an auxiliary melody), beat music (for example, rhythm with a single tone). A memory area for storing a plurality of sound source data of music data (for example, music composed of drum drum sounds), various tone qualities (for example, violin tone, music box tone), and a memory area for storing graphic pattern data imitating a score Storage means.
[0085]
The musical score graphic pattern is prepared in advance with an area for embedding mail characters on the score graphic formed in a grid, and the graphic conversion of mail text is to apply mail characters to the graphic pattern of the score. This means that mail characters are part of the graphic. At the time of graphic conversion, the mail character style may be changed in accordance with the graphic.
[0086]
In addition, the ROM 15 has a memory area for storing transmitted / received music mail (message data and music data). The received music mail is stored for each type of base music set in the music mail.
[0087]
Next, the operation of the mobile communication terminal in the second embodiment will be described.
Also in the second embodiment, a music mail is created and transmitted to the mobile communication terminal 1b in the mobile communication terminal 1a, and the message data of the music mail received from the mobile communication terminal 1a is displayed on the mobile communication terminal 1b. An example of reproducing music data attached to message data will be described.
[0088]
The mail creation process executed by the mobile communication terminal 1a will be described with reference to the flowchart shown in FIG. 7 and the screen transition diagram of the mail creation screen shown in FIG. As a premise for explanation, the music mail mode is selected between the normal mode for creating and sending only the text data of the mail and the music mail mode for creating the music mail, and the mail creation process described below is started. I will do it.
[0089]
In the mail creation process shown in FIG. 7, first, a mail creation screen 231 (see FIG. 8A) is displayed on the display unit 13, and the base music of the music mail is selected (step S101). As shown in FIG. 8A, the mail creation screen 231 displays selectable emotion areas b1 to b4 representing the emotions of the users “Exiting”, “Happy”, “Sad”, and “Calm”. . In each of the emotion areas b1 to b4, base music that expresses the emotion is set. When any of the emotion areas b1 to b4 is selected by the user, the base music corresponding to the selected emotion area is displayed. It is read from the ROM 15 and output from the sound reproduction speaker 17. The user selects emotion areas b1 to b4 that match the current emotion while listening to the bass music, and presses the enter key K. When the enter key K is pressed, the base music corresponding to the selected emotion area is determined as the base music of the music mail.
[0090]
When the base music is determined, a mail creation screen 232 (see FIG. 8B) for selecting the sound quality of beat music and the melody music to be created is displayed on the display unit 13. First, the beat music selection of the music mail is selected. Is performed (step S2). As shown in FIG. 8B, on the mail creation screen 232, a beat conversion area b5 for repeating beat music is displayed at the top of the screen. In the beat conversion area b5, the currently selected beat music name is displayed, and the beat music is switched to a different beat music in accordance with the pressing operation of the left key L or the right key R. The user operates the left key L or the right key R to select desired beat music.
[0091]
When any beat music is selected by the user, the selected beat music is read from the ROM 15 and reproduced from the sound reproduction speaker 17 together with the bass music determined in step S1. The user selects the desired beat music while listening to the base music and beat music and confirming the combination.
[0092]
Next, the sound quality of the melody music of the music mail is selected on the mail creation screen 232 (step S103). The sound quality corresponding to the beat music is set for each beat music, and the sound quality area b6 in which the sound quality corresponding to the selected beat music is displayed in the lower part of the beat conversion area b5 of the mail screen 232. ~ B9 are displayed. For example, when “Natural” beat music is selected from beat music of various genres such as “Natural”, “Jazz”, and “Classic”, “wind” and “sun” corresponding to “Natural” are selected. , “Sea”, “ground”, four sound quality areas b6 to b9 are displayed. These sound quality names are displayed with names that make it easy for the user to imagine the sound quality, so that the sound quality can be easily selected.
[0093]
When one of the sound quality areas b6 to b9 is selected by the user and the enter key K is pressed, the beat music selected in the beat conversion area b5 is used as the beat music set in the music mail as the sound quality areas b6 to b9. The sound quality selected by is determined as the sound quality of the melody music.
[0094]
When the sound quality of the base music, beat music, and melody music is selected, an e-mail creation screen 233 (see FIG. 8C) in which a character input sheet for inputting e-mail text is displayed on the display unit 13 is displayed. The message is displayed and the text of the mail text is input (step S104). As shown in FIG. 8C, the mail creation screen 233 displays the character input sheet b10 together with the determined bass music name, beat music name, and sound quality name. The character input sheet b10 is formed in a grid shape, and is formed in such a manner that one character can be input into one grid. The character input sheet b10 is also a score sheet for setting a scale for an inputted character, and a scale is set for a vertical grid line.
[0095]
The user operates the cursor keys such as the up key U and the left key L on the character input sheet b10 of the mail creation screen 233 to specify a grid for inputting characters, and then inputs characters using the numeric keypad 31. In other words, mail characters are input while setting a scale for the characters. For example, as shown in FIG. 8 (d), when inputting an e-mail message of “Today, Thank you, and To”, each character of “Kyoha” is in the scale of “Do”, and the character of “A” is in “La”. While setting the character layout and scale such that the character “ri” is on the scale, the character of the mail can be sequentially input to each grid. You can enter e-mail characters while thinking about the layout of the characters with emphasis on the visual appearance when the e-mail is displayed. You can also When the character input is completed, the user presses the enter key K.
[0096]
Next, in step S105, it is determined whether or not the enter key K has been pressed and character input has been completed. If the character input is not completed (step S105; N), the process returns to step S104 and the character input of the mail text is continued. On the other hand, when the enter key is pressed and the character input is completed (step S105; Y), the sound source data corresponding to the selected sound quality is read from the ROM 15, and the mail text is read on the character input sheet using the sound source data. Music data of melody music is created based on the scale set for each of the characters (step S106). Further, the graphic pattern data of the musical score is read from the ROM 15, and message data in which mail text characters are incorporated as musical notes in the graphic pattern of the musical score, that is, the mail text is converted into graphic data is created (step S107).
[0097]
When the melody music data and the message data are created, a preview is executed (step S108). At the time of preview, a mail screen 235 as shown in FIG. 9 is displayed on the display unit 13. On the mail screen 235, the base music name, beat music name and sound source name b11 are displayed at the top of the screen, and the graphic b12 in which the letters of the mail text are arranged as musical notes on the score composed of a grid at the center of the screen. Is displayed. In addition, “Exiting” base music, “Natural” beat music, and “Sun” melody music are reproduced from the sound reproduction speaker 17 in accordance with the graphic display.
[0098]
After the preview is displayed, a confirmation message such as “Do you want to send with this content?” Is displayed. The user confirms the displayed contents and music of the created music mail on the previewed mail screen 235, and presses the enter key K if satisfied with the mail generated contents, and presses the clear key C if the contents are not satisfactory. To do.
[0099]
The portable communication terminal 1a waits for the determination key K or the clear key C to be pressed, and determines whether or not the previewed music mail creation content has been approved by the user (step S109). When the clear key C is pressed and the content of creation of the music mail is not approved by the user (step S109; N), the process returns to step S101 and starts again from the music setting.
[0100]
On the other hand, when the determination key K is pressed and the content of creation of the music mail is approved by the user (step S109; Y), the music data of the base music, beat music, and melody music is attached to the created message data. E-mail data for sending is created. The created transmission mail data is transmitted to the designated transmission destination via the communication unit 16 (step S110), and this process is terminated.
[0101]
In the mobile communication terminal 1b, when a music mail is transmitted from the mobile communication terminal 1a, processing similar to the preview processing in step S108 described above is performed. That is, a mail screen as shown in FIG. 9 is displayed on the display unit, a graphic of a score including a mail sentence is displayed, and music data of base music, beat music, and melody music is displayed in accordance with the display of the mail sentence. Are superimposed and reproduced from the sound reproduction speaker.
[0102]
When creating a music mail as a reply to the received music mail, the mail creating process as described above is also activated in the mobile communication terminal 1b, and a music mail can be created. At this time, if you want to reply with a new mail regardless of the received mail, create a music mail with the new base music, beat music, and sound source as described above, specify the reply address and send it To do.
[0103]
On the other hand, when creating a reply mail by quoting the received mail and selecting the same base music, beat music, and sound quality as the communication partner, enter the mail text for the reply after the received mail text When a user can input a reply mail text, the message data is created by converting the received mail text and the reply mail text into a graphic pattern of the score. The At the same time, the melody music of the reply mail text is created and attached to the message data created by combining the melody music of the reply mail text after the melody music of the received mail. At the time of preview, as shown in FIG. 10 (a), the mail text for the reply is displayed on the musical score graphic b13 following the mail text received from the communication partner, and is composed of the received mail text and the reply mail text. Melody music is played.
[0104]
In addition, when creating a reply mail by quoting the received mail, when selecting a different base music, beat music, or sound quality from the received mail, the newly selected bass music, beat music, A character input sheet is displayed on the mail composition screen. When the user enters a reply message, the message data is created by converting the reply message graphic, and the melody music of the reply message is created and attached to the reply message data. Data is created. Next, the received mail data and the newly created reply mail data are combined to create mail data for transmission. At the time of preview, as shown in FIG. 10 (b), the received mail text is displayed first, and the music data is reproduced as the first measure, and then the response mail text created this time as the second measure is switched to display. The music data is played back.
[0105]
In this way, by quoting the received music mail and creating a reply mail, a series of music and its score are completed.
[0106]
In addition, when the mobile communication terminals 1a and 1b receive a music mail, emotions are discriminated from the type of base music set in the received music mail, and a history of received mail is stored for each emotion. Is done. When the received mail history is requested by the user, a history screen 236 as shown in FIG. 11 is displayed, and the emotion areas c1 to c4 of “Exiting”, “Happy”, “Calm”, and “Sad” are displayed. The The circle figure shown in the emotion area indicates the presence of music mails received so far, and indicates the range of the scale of the melody music of the received mail according to the size and position of the circle. By displaying the received mail history in the emotion areas c1 to c4 in this way, it is possible to easily grasp the background of the other party's emotion.
[0107]
As described above, according to the second embodiment, when sending a music mail, the user selects and listens to the base music and beat music that matches the current emotion, and sets the scale for the mail text and sets the scale to the mail text. , The melody music created with the scale set in the mail text when the mail text is played, and the selected base music and beat music are superimposed and played. In addition, when the mail text is displayed, message data is created by graphic conversion of the mail text into a graphic pattern in which the text of the mail text is converted into a musical note and placed on the graphic of the score. E-mails rich in emotional expression can be created by simply selecting the selection items displayed on the e-mail creation screen according to the emotions.
[0108]
Also, in the mobile communication terminal that has received the music mail, the mail text arranged like a note is displayed on the graphic of the score, and the base music and beat music selected by the transmission source user in accordance with the display. Since the music data of the melody music are superimposed and reproduced, it becomes easy to visually and audibly grasp the emotion of the user who sent the mail.
[0109]
Therefore, it is possible to improve communication between the two who exchange music mail.
[0110]
Also, since the user can select the music to be overlaid, such as bass music and beat music, it is possible to combine music randomly according to the mood, or conversely, while considering the harmony of music intentionally. You can also.
[0111]
In addition, since mail characters are displayed as musical notes on the score graphic, characters can be input while considering the layout of the characters with an emphasis on visuality, and characters can be input with an emphasis on musicality. You can also. In the former case, random melody music can be composed, and in the latter case, melody music can be composed according to the user's intention.
[0112]
As described above, since the user can arbitrarily create music data, a unique music mail can be created, and the user's willingness to create mail can be improved.
[0113]
In addition, when creating a music mail, the music mail can be created while checking the display contents and music of the created music mail by preview, so that the operability of mail creation is further improved.
[0114]
In addition, when creating a reply mail by quoting the received mail text, the melody music in the reply mail text is added after the melody music in the received mail text. Music data and its score can be created. It becomes easy to grasp each other's emotional transition from a series of music created by exchanging music mail.
[0115]
Note that the description in the second embodiment is a preferred example of the mobile communication terminals 1a and 1b to which the present invention is applied, and is not limited thereto.
For example, in the above description, the types of music to be overlaid are bass music, beat music, and melody music, but this is not limiting, and melody music 1, melody music 2, and melody music 3 are all overlaid with the same type of music. Or other types of music may be layered. Further, the number of types of music to be superimposed is not limited to three.
[0116]
Further, in the above description, the description has been given of the configuration in which only one pattern of the graphic pattern data of the score is stored in the ROM 15. However, the present invention is not limited to this. It is good also as a structure which can select the graphic according to.
[0117]
Further, at the time of graphic conversion, the character style such as the character font, size, display color, etc. of the mail sentence may be changed according to the selected music. For example, when the bass music of “Happy” is selected, the user's emotion can be more appealed by changing the character color to a warm color.
[0118]
In addition, the detailed configuration and detailed operation of the mobile communication terminals 1a and 1b in the second embodiment can be changed as appropriate without departing from the spirit of the present invention.
[0119]
【The invention's effect】
According to the present invention, it is possible to create a mail that is rich in emotional expression visually and audibly with an easy operation.
[Brief description of the drawings]
FIG. 1 is a diagram showing a system configuration of a communication system 100 connected to portable communication terminals 1a and 1b in a first embodiment to which the present invention is applied.
FIG. 2 is a diagram showing an external appearance of a mobile communication terminal 1a.
FIG. 3 is a diagram showing an internal configuration of the mobile communication terminal 1a.
FIG. 4 is a flowchart for explaining mail creation processing executed by the mobile communication terminal 1a in the first embodiment.
FIG. 5 is a screen transition diagram of a mail creation screen displayed on the display unit 13 in a mail creation process.
FIG. 6 is a mail screen displayed when previewing a created music mail.
FIG. 7 is a flowchart for explaining mail creation processing executed by the mobile communication terminal 1a in the second embodiment.
FIG. 8 is a screen transition diagram of a mail creation screen displayed on the display unit 13 during mail creation processing in the second embodiment.
FIG. 9 is a mail screen displayed when a created music mail is previewed.
FIG. 10 is a diagram showing a mail screen for reply mail.
FIG. 11 is a diagram showing a reception history screen of received music mail.
[Explanation of symbols]
1 Mobile communication terminal
2 Display section
21 Telephone speaker
3 Key input part
31 Numeric keys
U Up key
D Down key
L Left key
R light key
K OK key
C Clear key
35 Transmitting microphone
11 Control unit
12 Input section
13 Display section
14 RAM
15 ROM
16 Communication Department
17 sound reproduction speaker

Claims (20)

メール文の文字入力を行うための入力手段と、
前記入力手段により入力されたメール文を表示する表示手段と、
メール文のグラフィック変換用のグラフィックパターンデータを複数種記憶するグラフィック記憶手段と、
複数種の音楽データを記憶する音楽記憶手段と、
前記記憶された複数種のグラフィックパターンのうち、メール文の表示に用いるグラフィックパターンを選択するグラフィック選択手段と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択する音楽選択手段と、
前記入力されたメール文を前記選択されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成するメール作成手段と、
前記作成された送信用メールデータを指定された送信先へ送信する通信手段と、
を備えることを特徴とする携帯通信端末。
An input means for inputting characters in the mail text;
Display means for displaying a mail text input by the input means;
Graphic storage means for storing a plurality of graphic pattern data for graphic conversion of mail text;
Music storage means for storing a plurality of types of music data;
Graphic selection means for selecting a graphic pattern used for displaying a mail sentence from the plurality of stored graphic patterns;
Music selection means for selecting music data to be reproduced when displaying a mail sentence among the plurality of types of stored music data;
Creating a message data obtained by graphic conversion of the inputted mail sentence into the selected graphic pattern, and creating a mail data for transmission by attaching the selected music data to the message data;
Communication means for transmitting the created mail data for transmission to a specified destination;
A mobile communication terminal comprising:
グラフィック変換されたメッセージデータと、当該メッセージデータに添付された音楽データを受信する通信手段と、
前記受信されたメッセージデータを表示する表示手段と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された音楽データを再生する音楽再生手段と、
を備えることを特徴とする携帯通信端末。
Communication means for receiving graphic-converted message data and music data attached to the message data;
Display means for displaying the received message data;
Music playback means for playing back music data attached to the message data in accordance with the display of the message data;
A mobile communication terminal comprising:
メール文の文字入力を行うための入力手段と、
メール文のグラフィック変換用のグラフィックパターンデータを複数種記憶するグラフィック記憶手段と、
複数種の音楽データを記憶する音楽記憶手段と、
前記記憶された複数種のグラフィックパターンのうち、メール文の表示に用いるグラフィックパターンを選択するグラフィック選択手段と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択する音楽選択手段と、
前記入力されたメール文を前記選択されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成するメール作成手段と、
前記作成された送信用メールデータを指定された送信先へ送信するとともに、任意の通信相手からメール文がグラフィック変換されたメッセージデータ及びそのメッセージデータに添付された音楽データを受信する通信手段と、
前記グラフィック変換されたメッセージデータを表示する表示手段と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された音楽データを再生する音楽再生手段と、
を備えることを特徴とする携帯通信端末。
An input means for inputting characters in the mail text;
Graphic storage means for storing a plurality of graphic pattern data for graphic conversion of mail text;
Music storage means for storing a plurality of types of music data;
Graphic selection means for selecting a graphic pattern used for displaying a mail sentence from the plurality of stored graphic patterns;
Music selection means for selecting music data to be reproduced when displaying a mail sentence among the plurality of types of stored music data;
Creating a message data obtained by graphic conversion of the inputted mail sentence into the selected graphic pattern, and creating a mail data for transmission by attaching the selected music data to the message data;
A communication means for transmitting the created mail data for transmission to a designated destination, and receiving message data in which a mail text is graphic-converted from an arbitrary communication partner and music data attached to the message data;
Display means for displaying the graphic-converted message data;
Music playback means for playing back music data attached to the message data in accordance with the display of the message data;
A mobile communication terminal comprising:
前記選択手段により選択された音楽データの音のテンポを設定する設定手段と、
前記設定されたテンポに音楽データの音のテンポを変換する音変換手段と、を備え、
前記通信手段は、前記設定されたテンポに音変換された音楽データをメッセージデータに添付して送信することを特徴とする請求項1又は3に記載の携帯通信端末。
Setting means for setting the tempo of the sound of the music data selected by the selection means;
Sound conversion means for converting the tempo of the sound of the music data to the set tempo,
The mobile communication terminal according to claim 1 or 3, wherein the communication means transmits the music data converted into sound at the set tempo, attached to message data.
前記記憶されたグラフィックパターンデータは、動画データであり、
前記メール作成手段は、前記選択された音楽データの音のリズムに合わせてグラフィックの動きを変化させるメッセージデータを作成することを特徴とする請求項1、3又は4に記載の携帯通信端末。
The stored graphic pattern data is video data,
5. The portable communication terminal according to claim 1, wherein the mail creating means creates message data that changes a graphic movement in accordance with a sound rhythm of the selected music data.
メール文の文字入力を行うための入力手段と、
前記入力手段により入力されたメール文を表示する表示手段と、
メール文のグラフィック変換用のグラフィックパターンデータを記憶するグラフィック記憶手段と、
複数種の音楽データを記憶する音楽記憶手段と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択する音楽選択手段と、
前記入力されたメール文を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された複数の音楽データを添付して送信用のメールデータを作成するメール作成手段と、
前記作成された送信用メールデータを指定された送信先へ送信する通信手段と、
を備えることを特徴とする携帯通信端末。
An input means for inputting characters in the mail text;
Display means for displaying a mail text input by the input means;
Graphic storage means for storing graphic pattern data for graphic conversion of mail text;
Music storage means for storing a plurality of types of music data;
Music selection means for selecting music data to be reproduced when displaying a mail sentence among the plurality of types of stored music data;
Mail creating means for creating message data obtained by graphic conversion of the inputted mail text into the stored graphic pattern, and creating mail data for transmission by attaching the plurality of selected music data to the message data When,
Communication means for transmitting the created mail data for transmission to a specified destination;
A mobile communication terminal comprising:
グラフィック変換されたメッセージデータと、当該メッセージデータに添付された複数の音楽データを受信する通信手段と、
前記受信されたメッセージデータを表示する表示手段と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された複数の音楽データを重ねて再生する音楽再生手段と、
を備えることを特徴とする携帯通信端末。
Communication means for receiving graphic-converted message data and a plurality of music data attached to the message data;
Display means for displaying the received message data;
A music playback means for playing back a plurality of music data attached to the message data according to the display of the message data,
A mobile communication terminal comprising:
メール文の文字入力を行うための入力手段と、
メール文のグラフィック変換用のグラフィックパターンデータを記憶するグラフィック記憶手段と、
複数種の音楽データを記憶する音楽記憶手段と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを複数選択する音楽選択手段と、
前記入力されたメール文の文字を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された複数の音楽データを添付して送信用のメールデータを作成するメール作成手段と、
前記作成された送信用メールデータを指定された送信先へ送信するとともに、任意の通信相手からグラフィック変換されたメッセージデータ及び当該メッセージデータに添付された複数の音楽データを受信する通信手段と、
前記グラフィック変換されたメッセージデータを表示する表示手段と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された複数の音楽データを重ねて再生する音楽再生手段と、
を備えることを特徴とする携帯通信端末。
An input means for inputting characters in the mail text;
Graphic storage means for storing graphic pattern data for graphic conversion of mail text;
Music storage means for storing a plurality of types of music data;
Music selection means for selecting a plurality of music data to be reproduced when displaying a mail sentence among the plurality of types of stored music data;
Mail that creates message data obtained by graphic conversion of the characters of the inputted mail text into the stored graphic pattern and attaches the plurality of selected music data to the message data to create mail data for transmission Creating means;
A communication means for transmitting the created mail data for transmission to a specified destination and receiving message data graphic-converted from any communication partner and a plurality of music data attached to the message data;
Display means for displaying the graphic-converted message data;
A music playback means for playing back a plurality of music data attached to the message data according to the display of the message data,
A mobile communication terminal comprising:
前記入力手段により入力されたメール文の文字に音階を設定する設定手段と、
前記設定手段によりメール文の文字に設定された音階を元にメロディ音楽の音楽データを作成する音楽作成手段と、を備え、
前記メール作成手段は、前記選択された複数の音楽データとともに前記作成されたメロディ音楽の音楽データをメッセージデータに添付して送信用メールデータを作成することを特徴とする請求項6又は8に記載の携帯通信端末。
Setting means for setting a scale for the characters of the mail text input by the input means;
Music creation means for creating music data of melody music based on the scale set in the mail text by the setting means,
9. The mail creating means creates mail data for transmission by attaching the created melody music data together with the plurality of selected music data to message data. Mobile communication terminals.
前記グラフィック記憶手段に記憶されたグラフィックパターンデータは、楽譜を模したグラフィックのパターンデータであり、
前記メール作成手段は、前記設定手段により音階が設定されたメール文の文字を音符として前記記憶された楽譜のグラフィックに組み込んだメッセージデータを作成することを特徴とする請求項6、8又は9に記載の携帯通信端末。
The graphic pattern data stored in the graphic storage means is graphic pattern data imitating a musical score,
The said mail preparation means produces the message data which incorporated the character of the mail sentence to which the scale was set by the said setting means into the graphic of the said stored score as a note. The portable communication terminal as described.
前記入力手段は、受信メールに対する返信メール文の文字を入力し、
前記音楽選択手段は、返信メール文の表示時に再生する音楽データを選択し、
前記メール作成手段は、前記返信メール文を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成し、
前記通信手段は、前記作成された送信用メールデータを前記受信メールの送信元へ送信することを特徴とする請求項8に記載の携帯通信端末。
The input means inputs a reply mail text for the received mail,
The music selection means selects music data to be played back when the reply mail text is displayed,
The mail creating means creates message data obtained by graphic conversion of the reply mail text into the stored graphic pattern, creates mail data for transmission by attaching the selected music data to the message data,
The mobile communication terminal according to claim 8, wherein the communication unit transmits the created transmission mail data to a transmission source of the received mail.
前記メール作成手段は、前記選択手段により返信メールの音楽データとして受信メールの音楽データと同一の音楽データを選択された場合、前記受信メールのメール文とともに返信分のメール文をグラフィック変換したメッセージデータを作成し、当該メッセージデータに受信メールと同一の音楽データを添付した送信用メールデータを作成することを特徴とする請求項11に記載の携帯通信端末。When the selecting means selects the same music data as the music data of the received mail as the music data of the received mail by the selecting means, the message data obtained by graphic conversion of the mail text for the reply together with the mail text of the received mail The mobile communication terminal according to claim 11, wherein the transmission mail data is created by attaching the same music data as the received mail to the message data. 前記メール作成手段は、前記選択手段により返信メールの音楽データとして受信メールの音楽データとは異なる音楽データを選択された場合、返信メール文のみをグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して返信分のメールデータを作成し、この返信分のメールデータと前記受信メールのメールデータとを結合して送信用のメールデータを作成することを特徴とする請求項11に記載の携帯通信端末。When the selection unit selects music data different from the music data of the received mail as the reply mail music data, the mail creating means creates message data obtained by graphic conversion of only the reply mail text, A reply mail data is created by attaching the selected music data, and a mail data for transmission is created by combining the mail data for the reply and the mail data of the received mail. The mobile communication terminal according to claim 11. 前記記憶手段は、受信メールの履歴をそのメッセージデータに添付された音楽データの種類毎に記憶し、
前記表示手段は、受信メールの履歴を表示する際には、音楽データの種類毎に受信メールの履歴を表示することを特徴とする請求項8に記載の携帯通信端末。
The storage means stores a history of received mail for each type of music data attached to the message data,
9. The mobile communication terminal according to claim 8, wherein when displaying the received mail history, the display means displays the received mail history for each type of music data.
コンピュータに、
入力手段によりメール文の文字を入力させる機能と、
前記入力手段により入力されたメール文を表示手段に表示させる機能と、
メール文のグラフィック変換用のグラフィックパターンデータを複数種グラフィック記憶手段に記憶させる機能と、
複数種の音楽データを音楽記憶手段に記憶させる機能と、
前記記憶された複数種のグラフィックパターンのうち、メール文の表示に用いるグラフィックパターンを選択させる機能と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択させる機能と、
前記入力されたメール文を前記選択されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成する機能と、
前記作成された送信用メールデータを指定された送信先へ送信させる機能と、
を実現させるためのプログラム。
On the computer,
A function to input the text of the mail text by input means;
A function for causing the display means to display the mail text input by the input means;
A function of storing graphic pattern data for graphic conversion of mail text in a plurality of types of graphic storage means;
A function for storing a plurality of types of music data in a music storage means;
A function of selecting a graphic pattern to be used for displaying a mail sentence from the plurality of stored graphic patterns;
A function of selecting music data to be played back at the time of displaying a mail sentence among the plurality of types of stored music data;
A function of creating message data obtained by graphic conversion of the inputted mail text into the selected graphic pattern, and creating mail data for transmission by attaching the selected music data to the message data;
A function of transmitting the created mail data for transmission to a specified destination;
A program to realize
コンピュータに、
グラフィック変換されたメッセージデータと、当該メッセージデータに添付された音楽データを受信させる機能と、
前記受信されたメッセージデータを表示手段に表示させる機能と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された音楽データを再生させる機能と、
を実現させるためのプログラム。
On the computer,
A function for receiving message data that has undergone graphic conversion and music data attached to the message data;
A function of displaying the received message data on a display means;
A function of playing music data attached to the message data in accordance with the display of the message data;
A program to realize
コンピュータに、
入力手段によりメール文の文字を入力させる機能と、
メール文のグラフィック変換用のグラフィックパターンデータを複数種グラフィック記憶手段に記憶させる機能と、
複数種の音楽データを音楽記憶手段に記憶させる機能と、
前記記憶された複数種のグラフィックパターンのうち、メール文の表示に用いるグラフィックパターンを選択させる機能と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択させる機能と、
前記入力されたメール文を前記選択されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された音楽データを添付して送信用のメールデータを作成する機能と、
前記作成された送信用メールデータを指定された送信先へ送信するとともに、任意の通信相手からメール文がグラフィック変換されたメッセージデータ及びそのメッセージデータに添付された音楽データを受信させる機能と、
前記グラフィック変換されたメッセージデータを表示手段に表示させる機能と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された音楽データを再生させる機能と、
を実現させるためのプログラム。
On the computer,
A function to input the text of the mail text by input means;
A function of storing graphic pattern data for graphic conversion of mail text in a plurality of types of graphic storage means;
A function for storing a plurality of types of music data in a music storage means;
A function of selecting a graphic pattern to be used for displaying a mail sentence from the plurality of stored graphic patterns;
A function of selecting music data to be played back at the time of displaying a mail sentence among the plurality of types of stored music data;
A function of creating message data obtained by graphic conversion of the inputted mail text into the selected graphic pattern, and creating mail data for transmission by attaching the selected music data to the message data;
A function of transmitting the created mail data for transmission to a specified destination, and receiving message data in which a mail text is graphic-converted from any communication partner and music data attached to the message data;
A function for displaying the graphic-converted message data on a display means;
A function of playing music data attached to the message data in accordance with the display of the message data;
A program to realize
コンピュータに、
入力手段によりメール文の文字を入力させる機能と、
前記入力手段により入力されたメール文を表示手段に表示させる機能と、
メール文のグラフィック変換用のグラフィックパターンデータをグラフィック記憶手段に記憶させる機能と、
複数種の音楽データを音楽記憶手段に記憶させる機能と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを選択させる機能と、
前記入力されたメール文を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された複数の音楽データを添付して送信用のメールデータを作成する機能と、
前記作成された送信用メールデータを指定された送信先へ送信させる機能と、
を実現させるためのプログラム。
On the computer,
A function to input the text of the mail text by input means;
A function for causing the display means to display the mail text input by the input means;
A function for storing graphic pattern data for graphic conversion of mail text in graphic storage means;
A function for storing a plurality of types of music data in a music storage means;
A function of selecting music data to be played back at the time of displaying a mail sentence among the plurality of types of stored music data;
A function of creating message data obtained by graphic conversion of the inputted mail text into the stored graphic pattern, and creating mail data for transmission by attaching the plurality of selected music data to the message data;
A function of transmitting the created mail data for transmission to a specified destination;
A program to realize
コンピュータに、
グラフィック変換されたメッセージデータと、当該メッセージデータに添付された複数の音楽データを受信させる機能と、
前記受信されたメッセージデータを表示手段に表示させる機能と、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された複数の音楽データを重ねて再生させる機能と、
を実現させるためのプログラム。
On the computer,
A function for receiving graphic-converted message data and a plurality of music data attached to the message data;
A function of displaying the received message data on a display means;
In accordance with the display of the message data, a function of reproducing a plurality of music data attached to the message data,
A program to realize
コンピュータに、
入力手段によりメール文の文字を入力させる機能と、
メール文のグラフィック変換用のグラフィックパターンデータをグラフィック記憶手段に記憶させる機能と、
複数種の音楽データを音楽記憶手段に記憶させる機能と、
前記記憶された複数種の音楽データのうち、メール文の表示時に再生する音楽データを複数選択させる機能と、
前記入力されたメール文の文字を前記記憶されたグラフィックパターンにグラフィック変換したメッセージデータを作成し、当該メッセージデータに前記選択された複数の音楽データを添付して送信用のメールデータを作成する機能と、
前記作成された送信用メールデータを指定された送信先へ送信するとともに、任意の通信相手からグラフィック変換されたメッセージデータ及び当該メッセージデータに添付された複数の音楽データを受信させる機能と、
前記グラフィック変換されたメッセージデータを表示手段に表示させると、
前記メッセージデータの表示に合わせて、当該メッセージデータに添付された複数の音楽データを重ねて再生させる機能と、
を実現させるためのプログラム。
On the computer,
A function to input the text of the mail text by input means;
A function for storing graphic pattern data for graphic conversion of mail text in graphic storage means;
A function for storing a plurality of types of music data in a music storage means;
A function of selecting a plurality of music data to be played back at the time of displaying a mail sentence among the plurality of types of stored music data;
A function of creating message data obtained by graphic conversion of the characters of the inputted mail text into the stored graphic pattern, and creating mail data for transmission by attaching the plurality of selected music data to the message data When,
A function of transmitting the created mail data for transmission to a specified destination, and receiving a plurality of music data attached to the message data and graphic data converted from any communication partner;
When displaying the graphic-converted message data on the display means,
In accordance with the display of the message data, a function of reproducing a plurality of music data attached to the message data,
A program to realize
JP2003165493A 2003-06-10 2003-06-10 Mobile communication terminal and program Expired - Fee Related JP4173055B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003165493A JP4173055B2 (en) 2003-06-10 2003-06-10 Mobile communication terminal and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003165493A JP4173055B2 (en) 2003-06-10 2003-06-10 Mobile communication terminal and program

Publications (2)

Publication Number Publication Date
JP2005004374A true JP2005004374A (en) 2005-01-06
JP4173055B2 JP4173055B2 (en) 2008-10-29

Family

ID=34091959

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003165493A Expired - Fee Related JP4173055B2 (en) 2003-06-10 2003-06-10 Mobile communication terminal and program

Country Status (1)

Country Link
JP (1) JP4173055B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010044220A1 (en) * 2008-10-19 2010-04-22 Yoshino Takashi Favorite song selection-type music attachment e-mail system
WO2012169606A1 (en) * 2011-06-10 2012-12-13 Necカシオモバイルコミュニケーションズ株式会社 Portable terminal, control method, and program
WO2013085286A1 (en) * 2011-12-06 2013-06-13 Kim Jeong Ho Method for composing and sending text messages capable of representing tones and rhythms by using a screen with musical staffs and musical notation keypad

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010044220A1 (en) * 2008-10-19 2010-04-22 Yoshino Takashi Favorite song selection-type music attachment e-mail system
WO2012169606A1 (en) * 2011-06-10 2012-12-13 Necカシオモバイルコミュニケーションズ株式会社 Portable terminal, control method, and program
JPWO2012169606A1 (en) * 2011-06-10 2015-02-23 Necカシオモバイルコミュニケーションズ株式会社 Portable terminal, control method and program
WO2013085286A1 (en) * 2011-12-06 2013-06-13 Kim Jeong Ho Method for composing and sending text messages capable of representing tones and rhythms by using a screen with musical staffs and musical notation keypad

Also Published As

Publication number Publication date
JP4173055B2 (en) 2008-10-29

Similar Documents

Publication Publication Date Title
JP4072900B2 (en) Terminal device
JP3936520B2 (en) Information providing system and information storage medium for game
JP4173055B2 (en) Mobile communication terminal and program
JP4173056B2 (en) Mobile communication terminal and program
JP4586063B2 (en) Terminal device
JP2002261884A (en) Mobile communication terminal
JP2003274004A (en) Conversion method from received voice information in mobile terminal to character image information and mobile terminal with function of executing the conversion method
JP2002111804A (en) Mobile telephone equipped with musical sound inputting keyboard and mobile telephone system
JP3729074B2 (en) Communication apparatus and storage medium
JP3694698B2 (en) Music data generation system, music data generation server device
CN100574523C (en) The note transmission method that comprises the self-defined title of transmit leg
JP2001339487A (en) Portable communication terminal device
JP2004193953A (en) Folding type portable telephone set
JP2006033017A (en) Mobile telephone, mobile telephone server, and mobile telephone system
JP4514513B2 (en) Music mail output method, music mail output system, and music output device
JP3406559B2 (en) Mobile terminal, information processing device, method of updating sound source data, and recording medium
JP2005323006A (en) Mobile phone terminal and information distribution system
JP2001237922A (en) Telephone set
JP2002259026A (en) Mobile communication terminal
JP3966465B2 (en) Portable terminal device and voice generation program
KR200332458Y1 (en) Charac-Tone System use of Mobile-Communication device key-buttons and The method
KR200347084Y1 (en) Apparatus for reproducing 1 poly bell sound using MIDI audio source
JP2004005007A (en) E-mail edit device, telephone set, e-mail editing method, telephone number sending method, e-mail editing program, and telephone number sending program
JP4514510B2 (en) Music mail output method, music mail output system, and music providing apparatus
JP4918796B2 (en) Communication terminal equipped with ringtone editing function, e-mail system, e-mail incoming notification method and control program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050826

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20071002

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20071011

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20071002

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20071011

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20080117

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080325

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080526

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080805

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080812

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4173055

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110822

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110822

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120822

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120822

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120822

Year of fee payment: 4

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120822

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130822

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees