JP4954045B2 - 電子メールフォーマット変換装置及びそれを備えた移動通信端末、画像形成装置、電子メールフォーマット変換プログラム、電子メールフォーマット変換方法 - Google Patents

Description

本発明は、電子メールのフォーマットを変換する電子メールフォーマット変換装置及びそれを備えた移動通信端末、画像形成装置、電子メールフォーマット変換プログラム、電子メールフォーマット変換方法に関する。

電子メールを送受信する携帯電話機等の通信機器は電子メールの電子データを内部に保存し、必要な時に出力することができる。これにより、電子データを印刷して過去に送受信された電子メールの記録を残すことができる。電子メールはテキスト文で構成され、一般的に短文であるため一通ずつを順に用紙に印刷すると読みにくくなる。

また、特許文献１には電子メールからメール文と添付されたキャラクタ画像とを合成して１コマの漫画を形成する装置が開示される。形成された漫画の電子データは添付ファイルとして電子メールに添付され、過去のやり取りをわかりやすくすることができる。

特開２００２−２１５５３３号公報 特開２００３−８５５７２号公報 特開２００５−１１７５２７号公報 特開２００５−２２７８１０号公報 「ＴＶＭＬ台本からの漫画自動生成の一検討」 情報処理学会 講演予稿集（２００１年３月公開）

しかしながら、特許文献１に開示される装置によると、各電子メールに対応して１コマの漫画の添付ファイルが作成される。このため、複数の電子メールの記録を残す際に１コマ毎に１ページに印刷されるため、読みにくさを十分解消することができない問題があった。また、電子メール毎に用紙が必要となり、不経済となる問題もあった。

本発明は、複数の電子メールを経済的に読みやすくまとめることのできる電子メールフォーマット変換装置を提供することを目的とする。

上記目的を達成するために、本発明の電子メールフォーマット変換装置は、送受信された電子メールを保存するメール保存部と、電子メールの送信者に関連付けられる送信者画像を保存する画像保存部と、を備え、複数の電子メール内のメール文と各電子メールに関連付けられた前記送信者画像とを合成して時系列に並ぶ複数のコマが１ページ内に配置される漫画を形成し、形成された漫画の電子データを出力することを特徴とする。

この構成によると、メール保存部には送受信された電子メールが保存される。画像保存部にはアドレス帳等に登録されているメンバーに関連する送信者画像や、ユーザ本人に関連する送信者画像が予め記憶される。メール保存部に保存された電子メールに含まれる文は電子メールの送信者に関連付けられた送信者画像と合成して１コマの漫画が形成される。そして、複数の電子メールから複数のコマの漫画が形成され、複数のコマから成る漫画の電子データが出力される。出力された電子データに基づいて漫画の印刷や画面表示等が行われる。

また本発明は、上記構成の電子メールフォーマット変換装置において、送受信された連続する２つ以上の電子メールから漫画の１コマを形成することを特徴とする。この構成によると、送受信された連続する２つ以上の電子メールを用いることにより、漫画の１コマを形成される。

また本発明は、上記構成の電子メールフォーマット変換装置において、漫画の１コマを形成する電子メールを選別することを特徴とする。この構成によると、不要な電子メールを排し、漫画の１コマを形成するために必要な電子メールが選別される。

また本発明は、上記構成の電子メールフォーマット変換装置において、前記送信者画像が前記画像保存部に含まれない場合に、送信者情報に基づいて前記送信者画像を形成することを特徴とする。この構成によると、アドレス帳等に予め登録された送信者画像に関連付けられている送信者画像が画像保存部に保存されていない場合に、性別や年齢等の送信者情報に基づいて送信者に関連した送信者画像が形成される。

また本発明は、上記構成の電子メールフォーマット変換装置において、送信者情報に基づいて通信ネットワークを介して取得した画像によって前記送信者画像を形成したことを特徴とする。この構成によると、送信者情報に基いて、インターネット等の通信ネットワークを介して取得した画像によって、送信者に関連した送信者画像が形成される。

また本発明は、上記構成の電子メールフォーマット変換装置において、電子メールに添付された添付画像を漫画のコマに更に合成したことを特徴とする。この構成によると、電子メールに添付された添付画像が送信者画像を有する漫画のコマに更に合成される。

また本発明は、上記構成の電子メールフォーマット変換装置において、前記添付画像が動画である場合において、動画から変換した静止画を漫画に合成したことを特徴とする。この構成によると、動画から成る添付画像が静止画へと変換され、漫画のコマに合成される。

また本発明は、上記構成の電子メールフォーマット変換装置において、予め特定の語句と関連付けられる語句関連画像を前記画像保存部に保存し、電子メール内のメール文に前記語句を含む場合に前記語句関連画像を漫画の背景にしたことを特徴とする。この構成によると、「東京」等の予め特定の語句に関連付けられる画像が画像保存部に保存され、電子メール内のメール文に特定の語句が含まれるとこの語句に関連する語句関連画像が合成される。

また本発明は、上記構成の電子メールフォーマット変換装置において、ユーザが任意に漫画の画像を修正できることを特徴とする。この構成によると、ユーザは任意に漫画の画像を修正する。

また本発明は、上記構成の電子メールフォーマット変換装置において、電子メール内の経緯度情報に関連する経緯度関連画像を漫画のコマに更に合成することを特徴とする。この構成によると、電子メールに含まれた経緯度情報から取得される地域の画像や施設の画像等の経緯度画像が漫画のコマにさらに合成される。経緯度関連画像は予め画像保存部に保存してもよく、通信ネットワークを介して外部から取得してもよい。

また本発明は、上記構成の電子メールフォーマット変換装置において、前記経緯度関連画像を通信ネットワークにより取得したことを特徴とする。

また本発明は、上記構成の電子メールフォーマット変換装置において、前記電子データの形式はパーソナルコンピュータ、プリンタ、ファクシミリ装置又はコピー装置上のソフトウェアで読み出し可能なファイル形式であることを特徴とする。

また本発明は、上記構成の電子メールフォーマット変換装置において、利用時には課金もしくはユーザの認証を必要とすることを特徴とする。この構成によると、電子メールフォーマット変換装置の起動時に例えば予め登録されたユーザＩＤの入力が求められる。ユーザＩＤの入力によって電話回線やインターネット回線を介してユーザ認証が行われる。

また、電子メールフォーマット変換装置の起動時に例えば移動端末装置の暗証番号の入力が求められる。入力された暗証番号は電話回線等を通じて連絡され、課金して電話料金とともに決済される。クレジットカードのナンバーの入力等によって課金してもよい。

また本発明は、上記構成の電子メールフォーマット変換装置において、上記電子データに広告を挿入することにより、課金が軽減または免除されることを特徴とする。この構成によると、例えば、電子メールのフォーマット変換装置によって形成した電子データを出力する際に広告の有無が検知される。所定の広告が漫画に挿入されていると通信ネットワークを介して電子メールフォーマット変換装置の提供者に連絡され、課金が軽減又は免除される。

また本発明は、上記構成の電子メールフォーマット変換装置において、利用時には前記電子データに前記広告の挿入を必須とすることを特徴とする。この構成によると、例えば、電子メールフォーマット変換装置によって形成した漫画を出力する際に広告の有無がチェックされる。所定の広告が漫画に挿入されていない場合は電子データの出力が制限される。

また本発明は、上記構成の電子メールフォーマット変換装置において、前記広告の内容が電子メール内のメール文、電子メールの添付ファイル、もしくは電子メールのヘッダ情報の少なくとも一つに関連付けられたものであることを特徴とする。

また本発明は、ＧＰＳ衛星からの信号を受信して現在の位置を取得し、前記経緯度関連画像は電子メール内の経緯度情報及び電子メールの受信者の現在位置に関連することを特徴とする。この構成によると、ＧＰＳ（Global Positioning System）衛星からの信号を受信するＧＰＳ受信部によって得られるユーザの現在位置と、経緯度情報による送信者の発信位置に関連した地図等の経緯度関連情報が漫画のコマに合成される。

また本発明の移動通信端末は、上記各構成の電子メールフォーマット変換装置を備えたことを特徴とする。

また本発明の画像形成装置は、上記各構成の電子メールフォーマット変換装置が予め蓄積された電子メールのデータを受け取って前記メール保存部に保存するデータ入力部と、前記電子データを出力して印刷用紙に印刷する印刷部とを有することを特徴とする。この構成によると、データ入力部で電子メール等の電子データを受け取り、電子データを電子メールフォーマット変換装置で漫画の電子データへ形成する。そして、漫画の電子データは印刷部から印刷用紙へ印刷する。

また本発明の電子メールフォーマット変換プログラムは、送受信された複数の電子メール内のメール文と各電子メールの送信者に関連付けられた送信者画像とを合成して時系列に並ぶ複数のコマが１ページ内に配置される漫画を形成し、形成された漫画の電子データを出力することを特徴とする。

また本発明の電子メールフォーマット変換方法は、送受信された電子メールを保存するメール保存部と、電子メールの送信者に関連付けられる送信者画像を保存する画像保存部と、を備え、複数の電子メール内のメール文と各電子メールに関連付けられた前記送信者画像とを合成して時系列に並ぶ複数のコマが１ページ内に配置される漫画を形成し、形成された漫画の電子データを出力することを特徴とする。

本発明によると、複数の電子メール内の文と各電子メールに関連付けられた送信者画像を合成して時系列に並ぶ複数のコマから成る漫画を形成し、形成された漫画の電子データを出力するので、電子メールのやり取りした際の記録を電子データの印刷や画面表示によって、ユーザが視覚的、直感的に分かりやすい形で把握できる。従って、複数の電子メールを経済的で読みやすくまとめることができる。

また本発明によると、送受信された連続する２つ以上の電子メールから漫画の１コマを形成するので、対話形式で漫画の一コマを形成することができる。従って、電子メールをより分かりやすくまとめることができる。さらに、漫画のコマ数を減らすことができる。これにより、保存ファイルの容量を小さくできるとともに、まとめた電子メールを短時間で容易に読むことができる。

また本発明によると、漫画の１コマを形成する電子メールを選別することができるので、ユーザが意図していない電子メールを排することで、電子メールの内容をより分かりやすくすることができ、また保存ファイルの容量を小さくできる。

また本発明によると、送信者画像が画像保存部に含まれない場合に、送信者情報に基づいて送信者画像が形成できるため、送信者画像が電子メールフォーマット変換装置に格納されなくてもよく、電子メールフォーマット変換装置の利便性を向上できる。

また本発明によると、送信者情報に基づいて通信ネットワークを介して取得した画像によって送信者画像が形成できるため、送信者画像が電子メールフォーマット変換装置に格納されなくてもよく、電子メールフォーマット変換装置の利便性を向上できる。

また本発明によると、電子メールに添付された添付画像を漫画のコマに更に合成するので、電子メールの内容をより分かりやすくすることができる。

また本発明によると、電子メールに添付された動画を静止画へ変換するので、添付画像が動画であっても容易に漫画に合成することができる。

また本発明によると、語句関連画像を漫画の背景に合成するので、電子メールの内容をより分りやすくすることができる。

また本発明によると、ユーザが任意に漫画の画像を修正できるので、ユーザが所望の漫画の画像に変更して、電子メールの内容をより分かりやすくすることができる。

また本発明によると、電子メールに含まれた経緯度情報に関連する画像を漫画のコマへと合成するので、電子メールの内容をより分かりやすくができる。

また本発明によると、経緯度情報から関連した情報を通信ネットワークより取得できるので、経緯度情報関連画像が電子メールフォーマット変換装置内に格納する必要がなく、電子メールフォーマット変換装置の利便性を向上できる。

また本発明によると、上記電子データの形式をパーソナルコンピュータ、プリンタ、ファクシミリ装置又はコピー装置上のソフトウェアで読み出し可能になり、当該装置にて容易に閲覧や印刷をすることができる。

また本発明によると、利用時には課金もしくはユーザの認証することで、課金収入を得ることや、ユーザの選別をすることができる。

また本発明によると、漫画の電子データに広告を挿入すると、課金が軽減又は免除されるので、ユーザの負担を軽減して容易に利用することができる。

また本発明によると、利用時に電子データに広告の挿入を必要とするため、広告宣伝効果を得ることができる。

また本発明によると、広告の内容が電子メール内のメール文、電子メールの添付ファイル、もしくは電子メールのヘッダ情報の少なくとも一つに関連付けられたものであるため、当該関連情報を活用した広告宣伝効果を得ることができる。

また本発明によると、経緯度関連画像がＧＰＳ受信部により取得したユーザの現在位置と、経緯度情報による電子メールの送信者の発信位置とに関連するので、両地点間を結ぶ地図上のルート等の画像を漫画に追加して電子メールの内容をより分かりやすくすることができる。

また本発明によると、電子メールフォーマット変換装置が移動通信端末に含まれるため、移動通信端末のメール機能を利用して容易に電子メールフォーマット変換装置を実現できる。

また本発明によると、電子メールフォーマット変換装置が画像形成装置に含まれ、電子メールフォーマット変換装置から出された漫画の電子データを印刷するので、漫画の電子データを印刷して、容易に閲覧することができる。

また本発明によると、電子メールフォーマット変換をプログラムにより実現できる。プログラムには無体物としての流通性があるため、当該プログラムを他の装置で容易に動作できる。そうすると、電子メールのやり取りした際の記録を電子データの印刷や画面表示によって、ユーザが視覚的、直感的に分かりやすい形で把握できる。従って、複数の電子メールを経済的で読みやすくまとめることができる。

また本発明の電子メールフォーマット変換方法を使用すれば、電子メールのやり取りした際の記録を電子データの印刷や画面表示によって、ユーザが視覚的、直感的に分かりやすい形で把握できる。従って、複数の電子メールを経済的で読みやすくまとめることができる。

本発明の実施形態について図面を参照して説明する。

図１は本発明の第１実施形態の電子メールフォーマット変換装置を備えた移動通信端末である携帯電話機１の内部構造を表すブロック図である。携帯電話機１は複数のメールを纏めて漫画の電子データを形成する。

携帯電話機１は、全体を制御する制御部２を有している。制御部２には、メール送受信部３、メール保存部４、画像保存部５、データ通信部６、ＧＰＳ受信部７、電子コンパス部８、表示部９、操作部１０、出力部１５が接続されている。

メール送受信部３は携帯電話機１で作成された電子メールを相手へ送信したり、相手からの電子メールを受信する。

メール保存部４はメール送受信部３で送受信された電子メールを保存する。保存された電子メール内のメール文の例として、図４（ａ）〜（ｆ）や図５がある。メール保存部４の保存方法は携帯電話機１に内蔵のメモリやハードディスクであってもよい。また外部から携帯電話機器１に接続される外部メモリであってもよい。保存データもユーザがよく利用するように便宜を図った保存方法を採用してもよい。例えば、キャッシュ機能を利用してもよい。

画像保存部５は電子メールの送信者に関連付けられる電子データとしての送信者画像を保存する。送信者画像は例えば、図６や図７のように電子メールの送信者としての送信者画像が保存されている。画像保存部５に保存されている送信者画像は、ユーザが独自に設定したアバター等であってもよい。また送信者画像以外にも、一例として図１８（ａ）〜（ｅ）の吹き出しからなる吹き出し画像、図１９（ａ）〜（ｅ）の背景画像、図２０（ａ）〜（ｇ）の送信者画像の表情を表現する表情画像等が保存されている。

また、画像保存部５には語句関連画像が保存されている。例えば、図２２に示すように「東京」や「東京タワー」等の特定の語句に関連付けられる画像が保存されている。図２２に示すように語句関連画像と特定の語句の関連性は、操作部１０により追加、編集が可能である。また、画像保存部５には観光名所や地図等の経緯度関連画像も保存されている。

画像保存部５の保存方法は携帯電話機１内蔵のメモリやハードディスクであってもよい。また外部から携帯電話機器１に接続される外部メモリであってもよい。保存データもユーザがよく利用するように便宜を図った保存方法を採用してもよい。例えば、キャッシュ機能を利用してもよい。メール保存部４と同じ保存方法を使用してもよい。また、画像保存部５に保存される画像は二次元でも三次元の形式であってもよい。画像保存部５の画像はネットワークを介して取得してもよい。

データ通信部６は外部との間でデータの送受信を行い、大量データ通信のための大量データ通信部と少量データ通信のため少量データ通信部とを有する。大量データ通信部のインターフェースは、ＵＳＢ（Universal Serial Bus）等が用いられる。大量データ通信によりパソコンやメモリ等から大量のデータをダウンロードできる。少量データ通信部はインターネットや電話回線等の回線を介してデータ通信する。少量データ通信部は専用回線でも公衆回線でも良く、有線で接続しても無線で接続しても良い。回線としてはパケット通信、回線交換方式、ＰＩＡＦＳ（Personal Handyphone System Internet Access Forum Standard）等を利用することができる。

ＧＰＳ受信部７はＧＰＳ衛星からの信号を受信する。電子コンパス部８は、電子コンパス機能により方角情報を取得する。表示部９は電子メール内のメール文や電子メールの添付ファイル等の画像を表示する。表示部９は静止画や動画も表示する。操作部１０は電子メールの送信等を携帯電話機１の操作を行う。外部の機器を用いて操作部１０を代用してもよい。

出力部１５は制御部２により合成された電子データを出力する。電子データが静止画の場合は、出力部１５によりプリンタ等の機器へそのまま出力される。電子データが動画を含む場合は、出力部１５からプロジェクタ等へ動画情報を保持した形で出力される。

図２および図３は、携帯電話機１の動作を示すフローチャートである。携帯電話機１は、メモリ（不図示）に保存されたプログラムによって、メール送受信部３で送受信された電子メールをまとめて漫画を形成して出力する。即ち、携帯電話機１は電子メールのフォーマットを変換して出力する電子メールフォーマット変換装置を構成する。

ステップＳ１において、ユーザの認証が行われる。ユーザＩＤの入力によって電話回線やインターネット回線を介して認証が行われる。セキュリティを保持するために、通信経路をＳＳＬやＩＰＳＥＣ等の技術によって暗号化してもよい。

ユーザの認証として、パスワード認証、ＩＰアドレス認証、ＬＤＡＰ認証、ダイジェスト認証等いずれでもよい。ステップＳ１によるユーザの認証を省いてもよい。

また、電子メールフォーマット変換装置を利用する際に認証と共に課金してもよい。例えば電子メールフォーマット変換装置の起動時にユーザ認証後、携帯電話機１の暗証番号の入力が求められる。入力された暗証番号は電話回線等を通じて連絡され、課金して電話料金とともに決済される。クレジットカードのナンバーの入力等によって課金してもよい。ユーザの認証によって、ユーザＩＤと暗証番号を関連付けて次回から暗証番号の入力を省略してもよい。

ステップＳ２では漫画の電子データを作成する電子メールの範囲を指定する。メール保存部４には電子メールの一連のやり取りが保存されている。表示部９にはメール保存部４から読み出した電子メールが図４（ａ）〜（ｆ）の各表示画面に示すように表示される。ユーザは表示部９の画面を順に送って確認し、漫画を作成する電子メールの開始位置（例えば、図４（ａ））と終了位置（例えば図４（ｆ））とを操作部１０から指定する。また、電子メールのタイトルや送信日時等からメールの開始位置と終了位置を自動判定してもよい。表示部９に電子メールの内のタイトルやメール文の最初の部分を一覧表示してもよい。

さらにステップＳ２では、漫画の１コマを形成する電子メールを選別する。電子メールの一連のやり取りとして、漫画の電子データを作成する電子メールの範囲を指定する際、その中に電子メールのヘッダ情報等から、広告メールや無関係の第三者からの電子メール等があれば、一連のやり取りと無関係として広告メール等を排除する。選別の一例としては指定した送信者の電子メールアドレスに限ることや、電子メールのIn-reply-toヘッダに記載されたMessage-IDが送信履歴に存在するメールに限り、一連のやり取りに関係があると選別する。

例えば電子メールとして図４（ａ）〜（ｆ）の中の間に「［●●ショップお得情報］
●●●●●が明日まで980円！タイムバーゲン開催中！」という内容の業者からの電子メールのメール文があれば（不図示）、業者の電子メールアドレスは一連の送信者の電子メールアドレスとは関係がないため、該電子メールは漫画の１コマを形成する電子メールではないとして排される。またこのような業者の電子メールのヘッダにはIn-reply-toヘッダに記載されたMessage-IDが送信履歴には存在しないため、該電子メールは排されることになる。電子メールのヘッダとしては、電子メールのFromヘッダ、Message-IDヘッダ、In-Reply-Toヘッダ、Referencesヘッダ等をもとに関連性の有無を推測してもよい。また、選別の判断をユーザに確認を求めてもよい。

ステップＳ３では、範囲指定した電子メールがメール保存部４から読み込まれる。電子メールが読み込まれると、送信日時、タイトル、経緯度情報、メール文、使用しているメール端末機情報、メールアドレス、送信者名、電子メールのヘッダ情報、添付ファイルの有無やファイルサイズ等が特定される。

ステップＳ４では、ステップＳ３で取得したメールアドレス等と予め登録されたアドレス帳が対比される。例えば図２１に示すようなアドレス帳は携帯電話機１に内蔵のメモリやハードディスクに保存されているが、メール保存部４や画像保存部５に保存されてもよい。また、ユーザが操作部１０からアドレス帳の内容を追加や削除等の編集ができる。

ステップＳ５では、メールアドレスの対応した送信者に関連する送信者画像が登録されているか否かが判断される。送信者画像が登録されていない場合はステップＳ６に移行する。送信者画像が登録されている場合は該当する送信者画像が画像保存部５から取得され、ステップＳ７に移行する。図６、図７は送信者画像の一例を示しており、例えば図４（ａ）、（ｂ）の電子メールの送信者にそれぞれ対応している。

ステップＳ６では、所定の生成規則により送信者画像を形成する。画像保存部５にサンプル画像を予め保存し、サンプル画像から生成規則に適合した画像を選択して送信者画像を形成してもよい。生成規則としては、図２１に示すようなアドレス帳の登録情報を活用して、男性であれば男性の画像を生成し、女性であれば女性の画像を生成してもよい。

さらに、趣味、年齢、職業、性格、出身地、職業等によって生成してよい。生成する画像は人物に限られず、風景や犬や猫や魚等の生き物等でもよい。また、電子メールの内タイトルやメール文の文脈等に関連して形成してもよい。通信ネットワークを介して取得した情報によって、送信者画像を形成してもよい。

ステップＳ７では、電子メールに添付された添付ファイルの有無を判断する。添付ファイルがあればステップＳ８へ移行する。添付ファイルがない場合は、ステップＳ１０へ移行する。

ステップＳ８では、電子メールに添付された添付画像が動画であるか否かを判断する。動画である場合はステップＳ９へ移行し、静止画の場合はステップＳ１２へ移行する。

ステップＳ９では、動画を静止画へと変換する。動画の形式の一例として、mpeg形式、RealMediaファイル形式、ASFファイル形式、AVIファイル形式、MOVファイル形式等を用いることができる。また添付ファイルが圧縮されていてもよいし、複数のファイルを１つのファイルとした書庫ファイルであってもよい。

動画を静止画へ変換する一例として、図１１の（ａ）〜（ｃ）のような動画がある場合、図１２のように重ね合わせて一つの静止画として表示してもよい。また、図１３のような動作を示す線によって静止画へ変換してもよい。静止画へ変換する他のアプリケーションやモジュールを使用してもよい。

ステップＳ１０では、特定の語句が電子メール内のメール文に含まれるか判断される。電子メール内のメール文に特定の語句が含まれる場合はステップＳ１１へ移行し、含まれない場合はステップＳ１２へ移行する。

ステップＳ１１では、特定の語句に関連付けられた語句関連画像が取得される。

ステップＳ１２では、電子メールの送受信間隔が所定範囲内か否かを判断する。所定範囲内であればステップＳ１５へ移行し、所定の範囲外であればステップＳ１３へ移行する。

ステップＳ１３では、漫画の１コマの画像を形成する。即ち、ステップＳ５で読み込まれた送信者画像またはステップＳ６で形成された送信者画像と、電子メール内のメール文とが合成される。また、ステップＳ７で取得した添付ファイルまたはステップＳ１１で取得した語句関連画像が漫画のコマに更に追加して合成される。

例えば、図５に示す電子メール内のメール文と図６に示す送信者画像とを合成して図８に示すように漫画の１コマが形成される。この時、コマ枠内の一端に送信者画像が配され、送信者画像と反対側に設けた矩形や円形の吹き出し内にメール文が配される。吹き出しは前述の図１８（ａ）〜（ｅ）に示す吹き出し画像を画像保存部５からランダムに取得して用いられる。

また、図４（ｃ）に示す電子メール内のメール文と図６に示す送信者画像とを合成して図１０のコマ１０２に示すように漫画の１コマが形成される。同様に図４（ｄ）に示す電子メール内のメール文と図７に示す送信者画像とを合成して図１０のコマ１０３に示すように漫画の１コマが形成される。

また、ステップＳ７またはステップＳ９で取得した添付ファイルの静止画が背景として追加して合成される。例えば、図４（ｅ）に示す電子メールの添付ファイルの画像を合成して図１０のコマ１０４に示すように漫画の１コマが形成される。

更に、添付ファイルの画像がない場合はステップＳ１１で取得した語句関連画像が背景として合成される。例えば、図４（ａ）に示す電子メールに含まれる「東京」の語句に関連した東京タワーの画像からなる語句関連画像を合成して図１０のコマ１０１に示すように漫画の１コマが形成される。添付ファイル及び語句関連画像がない場合は、図５に示すような電子メールの背景画像や背景色を用いて図９に示すように漫画のコマの背景を形成してもよい。また、図５に示す電子メールがＨＴＭＬメールである場合、その電子メール内のタグで指定している情報、例えば<BODY bgcolor=”red”>とタグで背景色を赤色と指定していれば、図８及び図９の背景色を赤色としてもよい。

また、予め決められた絵文字に対応する表情画像が漫画のコマに合成される。例えば、図４（ｃ）に示すように電子メールのメール文にハート型の絵文字が含まれると、図２０（ｃ）のハート型の表情画像が取得される。そして、図１０のコマ１０２に示すように送信者画像の目の部分にハート型の表情画像が合成される。また、図４（ｆ）に示すように電子メールのメール文に汗の絵文字が含まれると図２０（ｄ）の表情画像が取得される。そして、図１０のコマ１０４に示すように、送信者画像の額部分に汗の形をした表情画像が合成される。また、絵文字だけでなく所定の記号や語句に表情画像を対応づけてもよい。

また、感情を表す特定の語句を含む画像からなる絵文字に対応して、さらに漫画のコマが合成される。例えば、図４（ｄ）に示す電子メール内のメール文の「ええっ！？」等の感情を表す特定の語句を含む画像からなる絵文字に対応して、図１０のコマ１０３に示すように目立つように背景に合成される。さらに、該絵文字が大きく使用されていたり感嘆符が使用されていたりする等、効果的に使用されている場合は、図１０のコマ１０３に示すように送信者画像が目立つような画像効果が付加される。また、絵文字だけでなく所定の記号や語句に表情画像を対応づけてもよい。

ステップＳ１４では、形成された画像を一時的に保管する。保管する際は他の画像とファイル名が重複しないように該処理が終了するまでにファイル名が一意になる必要がある。例えば、ファイル名に連番を付すようにしてもよい。保存先としては電子メールフォーマット変換装置の内部メモリやハードディスク以外にも、メール保存部４や画像保存部５を使用することができる。

ステップＳ１６では、ステップ２で指定した範囲の最後の電子メールかどうかを判断する。範囲指定した最後のメールの場合は、ステップＳ１７へ移行する。範囲指定した最後のメールではない場合はステップＳ３へ移行する。そしてステップＳ３〜Ｓ１６が繰り返される。

ステップＳ１２の判断で送受信者間隔が所定の範囲内の場合は、ステップ１５で電子メールと送信者画像とが前のコマの画像に合成される。即ち、連続した電子メールの送受信間隔が所定の範囲内にあると、互いに関連性が深いと判断して２つ以上の電子メールから漫画の１コマが形成される。以下、２つの電子メールから漫画の１コマが形成される一例について説明する。

例えば、図４（ａ）に示す電子メール内のメール文と図６に示す送信者画像とを合成した画像に、図４（ｂ）に示す電子メール内のメール文と図７に示す送信者画像とが合成される。これにより、図１０のコマ１０１に示すように２つの電子メールを含む漫画の１コマが形成される。

この時、前の電子メールによる画像のレイアウトを修正し、２つの電子メールによる画像をコマの左右に均等に振り分けて配置する。一般に漫画は右から左へ読まれるため、前の電子メールによる画像を右に配置して後の電子メールによる画像を左に配置するとよい。

同様に、図４（ｅ）に示す電子メール内のメール文と図６に示す送信者画像とを合成した画像に、図４（ｆ）に示す電子メール内のメール文と図７に示す送信者画像とが合成される。これにより、図１０のコマ１０４に示すように２つの電子メールを含む漫画の１コマが形成される。また、例えば図６に示す送信者画像が会話に沿って向きを変更できる場合には、図１０のコマ１０４に示す右側の送信画像のように変更してもよい。

尚、ステップＳ１２において連続した電子メールの送受信者間隔が所定範囲内にあると互いに関連性が深いと判断しているが、他の事項により関連性を判断してもよい。例えば、電子メールのタイトルが同じ語句を含む場合、後の電子メール内のメール文が前の電子メール内のメール文を引用している場合、後の電子メールが前の電子メールの返信メールである場合等に互いに関連性が深いと判断することができる。また、送信者の位置が電子メールのヘッダ等に含まれる場合は両電子メールの送信者の距離が近い場合に互いに関連性が深いと判断してもよい。

尚、ステップＳ１５で合成されたファイルは前のファイルと合わせて１つのファイルとして保管される。ファイル名は前のファイル名を使用して一意性を確保し、合成したフラグをたててもよい。これにより無駄なファイルを無くし、不要なメモリやハードディスクの消費を少なくすることができる。

ステップＳ１７では、ステップＳ３〜ステップＳ１６を繰り返して形成された複数の画像をレイアウトし、図１０に示すように１ページ内に複数のコマを有した漫画が形成される。

ステップＳ１８では、形成された漫画の電子データに広告を挿入する。例えば、メール本文等に含まれた語句に関連する広告、添付ファイル名に関連する広告、電子メールのヘッダ情報によって取得されるサーバやソフトウェアに関連する広告、経緯度情報に関連付けられたエリア付近に存在する商店の広告等が挿入される。また、広告を挿入することで、課金を軽減または免除してもよい。この時、広告挿入を選択できるようにしてもよい。広告を挿入することで宣伝広告効果を得ることができる。

ステップＳ１９では、ステップＳ１７でレイアウトした複数のコマからなる漫画を表示部９からプレビュー表示する。

ステップＳ２０では、ユーザから漫画の画像の修正を行う指示があったか否かを判断する。修正が不要であれば、ステップＳ２４へ移行する。修正が必要であれば、ステップＳ２１へ移行する。

ステップＳ２１では、漫画の画像を修正する。ユーザが表示部９に表示されているプレビューを見て、操作部１０から修正する。修正する例として、図１８（ａ）〜（ｅ）に示す吹き出し画像や図１９（ａ）〜（ｅ）の背景画像を入れ替える。

ステップＳ２２では、ユーザが修正した方法をルール化するか否かを判断する。ルールとして保存する場合はステップＳ２３へ移行し、保存しない場合はステップ２４へ移行する。

ステップＳ２３では、ユーザが修正した方法をルールとして保存する。修正した方法は、ユーザに適したルールとして判断され、次回から自動でこのルールが反映される。例えば、図１８（ｂ）で示すような吹き出し画像を選択すると、当該画像が次回から優先される。

また、フォントサイズの大きさや送信者画像の位置等をＨＴＭＬやＸＭＬのタグ情報を用いて、ルールを指定してもよい。ルールは電子メールフォーマット変換装置のユーザごとに保存することができる。また他のルールも参照し、追加変更も可能である。これにより、ユーザが所望しわかりやすい漫画の画像を生成することができる。

修正ルールの保存先は電子メールフォーマット変換装置の内部メモリやハードディスク以外にも、メール保存部４や画像保存部５を使用することができる。

ステップ２４では、ステップＳ１８又はステップＳ２１で形成された漫画の電子データを出力する。電子データを印刷紙に印刷するため静止画で出力することになる。

電子データの形式は、パーソナルコンピュータ、プリンタ、ファクシミリ装置又はコピー装置上のソフトウェアで読み出し可能なファイル形式であればよい。例えば、PDF形式、HTML形式、XML形式、Microsoft（登録商標） WORD形式、SGML形式、ビットマップファイル形式、JPEG形式、PNG形式、GIF形式、TIFF形式、PSD形式、PS(Post Script)形式、EPS形式、INDD形式、PICT形式、Adobe Illustrator（登録商標）ファイル形式、metafile形式のいずれかに該当すればよく、またこれらに限定されるものではない。これにより各形式に対応するソフトウェアによって容易に閲覧や印刷を行うことができる。

尚、電子メールに含まれた経緯度情報に関連した経緯度関連画像を形成し、漫画のコマの背景画像としてもよい。ユーザが受信した電子メールの送信者の通信機器にＧＰＳ装置が設けられている場合は電子メールのヘッダ、メール本文、もしくは添付ファイルのフォーマットに経緯度情報が含まれる。画像保存部５は経緯度に関連する経緯度関連画像が保存され、送信者の経緯度情報に基づいて経緯度関連画像が取得される。

例えば、図１４に示すような送信者が送信した位置付近の観光名所等の画像を経緯度関連画像として用いてもよい。また、図１５に示すような送信者が送信した位置付近の地図を経緯度関連情報として用いてもよい。

また、ＧＰＳ受信部７によって利用者が電子メールを受信した際の現在位置を取得することができる。これにより、図１６に示すように、送信者が送信した位置付近の地図から成る経緯度画像にユーザの受信した際の位置からルートを表示させてもよい。

さらに、図１７のように電子コンパスで得られる方角情報に基づいてコンパスの画像Ｎを表示し、地図の向きを可変してもよい。これにより地図上のルートを分かりやすくして、電子メールの内容をより分かりやすくすることができる。

また、ユーザが送信した電子メールにも同様にＧＰＳ受信部７で受信した経緯度情報が含まれる。これにより、ユーザが送信した位置の経緯度情報に基づいて経緯度関連画像を取得できる。この時、電子コンパス８で取得された方角を電子メールのヘッダ情報等に含め、ユーザが送信した位置から電子コンパス８で取得された方角にある観光名所等の画像を取得してもよい。

また、送信者の立つ方向を計算し、送信者の背後にある建造物等の画像を取得しても良い。ここで建造物等の画像とは、例えば○○銀行と△△銀行が道路を挟んで建っているとき、送信者が○○銀行に背を向けて立っている場合は○○銀行の画像、○○銀行を向いて立っている場合は向いの側の△△銀行のあるビルの画像が該当する。また、送信者がユーザ（受信者）の逆の場合であってもよい。

尚、経緯度関連画像は通信ネットワークを介して取得してもよい。

本実施形態によると図４（ａ）〜（ｆ）に示す複数の電子メール内のメール文と図６や図７に示す各電子メールに関連付けられた送信者画像とを合成して時系列に並ぶ複数のコマが１ページ内に配置される漫画の電子データを出力するので、電子メールをやり取りした際の記録を電子データの印刷や画面表示によって、ユーザが視覚的、直感的に分かりやすい形で把握できる。

また、図４（ａ）、（ｂ）に示す連続する２つの電子メールから図１０のコマ１０１に示すように漫画の１コマを形成するため、電子メールをより分かりやすくまとめることができる。さらに、漫画のコマ数を減らすことができる。これにより、保存ファイルの容量を小さくできるとともに、まとめた電子メールを短時間で容易に読むことができる。また３つ以上の電子メールから漫画の１コマに形成してもよい。

本実施形態において、動画が添付ファイルに添付されている場合は、漫画の電子データに漫画のコマに対応する漫画のデータを含めてもよい。これにより、テレビ受像機等のディスプレイに漫画の電子データを出力した際に動画として閲覧することができる。さらに、出力装置がブラウザ等で用いられるタグに対応していれば、電子メール内のメール文に含まれるタグを活用して表示させても良い。

次に、図２３は第２実施形態の電子メールフォーマット変換装置を含む画像形成装置を示すブロック図である。図１のブロック図と比較するとメール送受信部３に替えてデータ入力部２２を有し、印刷部２３が設けられている。また、画像形成装置は通常持ち運ばないため、ＧＰＳ受信部７及び電子コンパス部８が省かれている。

データ入力部２２は外部から携帯電話機等に保管された複数の電子メールのデータや画像データの電子データが入力される。電子データの入力方法の一例としては、ＵＳＢメモリやＬＡＮ等のネットワークから入力される。データ入力部２２から入力され電子メールはメール保存部４に保存される。データ入力部２２から入力された画像データは画像保存部５に保存される。

印刷部２３は、出力部１５から出力された電子データを印刷紙へ印刷する。

電子メール等の電子データが受け取られ、メール保存部４に保存される。そして、第１実施形態と同様にメール保存部４に保存された電子データを電子メールフォーマット変換装置で変換して漫画の電子データを形成して、印刷部２３に出力する。漫画の電子データは印刷部２３から印刷用紙へ印刷される。

また、本実施形態によると、第１実施形態と同様の効果がある。また、電子メールの電子データを入力するだけで、印刷用紙に直接電子メール内のメール文を視覚的に、直感的に分かりやすい形で印刷することができる。また、紙に直接印刷されるので機器の故障のため閲覧できなくなることはなく、いつでも容易に閲覧可能となる。出力する際に各コマや１ページ毎に日付を入れることにより、電子メールのメール文を漫画のアルバムのような形で合成可能となり、よりわかりやすい形で閲覧し、保存できる。

第１、第２実施形態において、メールフォーマット変換装置は、移動通信端末としての携帯電話機や画像形成装置に搭載されるが、本発明はこれに限られず、他の装置に搭載してもよい。

本発明によると携帯電話機、ＰＤＡ等の移動携帯端末に利用することができる。また家庭用のプリンタやコピー機、コンビニエンスストア等に設置される複合コピー機、ファクシミリ装置、プロジェクタやテレビ受像機等に利用することができる。

本発明の第１実施形態の電子メールフォーマット変換装置を備えた携帯電話機の構成を表すブロック図 本発明の第１実施形態の携帯電話機の動作を示すフローチャート 本発明の第１実施形態の携帯電話機の動作を示すフローチャート 本発明の第１実施形態の携帯電話機で受信した電子メールのメール文 本発明の第１実施形態の携帯電話機で受信した電子メールのメール文 本発明の第１実施形態の携帯電話機における送信者画像の一例を示す図 本発明の第１実施形態の携帯電話機における送信者画像の一例を示す図 本発明の第１実施形態の携帯電話機を使用した合成画像の一例を示す図 本発明の第１実施形態の携帯電話機を使用した合成画像の一例を示す図 本発明の第１実施形態の携帯電話機を使用した合成画像の一例を示す図 本発明の第１実施形態の携帯電話機で使用する動画の一例を示す図 本発明の第１実施形態の携帯電話機で使用する静止画の一例を示す図 本発明の第１実施形態の携帯電話機で使用する静止画の一例を示す図 本発明の第１実施形態の携帯電話機を使用した合成画像の一例を示す図 本発明の第１実施形態の携帯電話機を使用した合成画像の一例を示す図 本発明の第１実施形態の携帯電話機を使用した合成画像の一例を示す図 本発明の第１実施形態の携帯電話機を使用した合成画像の一例を示す図 本発明の第１実施形態の携帯電話機で使用する吹き出し画像の一例を示す図 本発明の第１実施形態の携帯電話機で使用する背景画像の一例を示す図 本発明の第１実施形態の携帯電話機で使用する表情画像の一例を示す図 本発明の第１実施形態の携帯電話機で使用するアドレス帳の一例を示す図 本発明の第１実施形態の携帯電話機で使用する語句関連画像の関連メニューの一例を示す図 本発明の第２実施形態の電子メールフォーマット変換装置を備えた画像形成装置装置の構成を表すブロック図

符号の説明

１ 携帯電話機
２ 制御部
３ メール送受信部
４ メール保存部
５ 画像保存部
６ データ通信部
７ ＧＰＳ受信部
８ 電子コンパス部
９ 表示部
１０ 操作部
１５ 出力部
２１ 画像形成装置
２２ データ入力部
２３ 印刷部

Claims (13)

1. 送受信された電子メールを保存するメール保存部と、
   電子メールの送信者に関連付けられる送信者画像を保存する画像保存部と、
   を備え、複数の電子メール内のメール文と各電子メールに関連付けられた前記送信者画像とを合成して時系列に並ぶ複数のコマが配置される漫画を形成し、連続した電子メールの送受信間隔が所定の範囲の場合には連続した電子メールの関連性は深いと判断して、2つ以上の電子メールから漫画の1コマを形成し、形成された漫画の電子データを出力することを特徴とする電子メールフォーマット変換装置。
2. 漫画の１コマを形成する電子メールを選別することを特徴とする請求項１に記載の電子メールフォーマット変換装置。
3. 前記送信者画像が前記画像保存部に含まれない場合に、送信者情報に基づいて前記送信者画像を形成することを特徴とする請求項１又は２に記載の電子メールフォーマット変換装置。
4. 電子メールに添付された添付画像を漫画のコマに更に合成したことを特徴とする請求項１〜請求項３のいずれかに記載の電子メールフォーマット変換装置。
5. 予め特定の語句と関連付けられる語句関連画像を前記画像保存部に保存し、電子メール内のメール文に前記語句を含む場合に前記語句関連画像を漫画の背景にしたことを特徴とする請求項１〜請求項４のいずれかに記載の電子メールフォーマット変換装置。
6. ユーザが任意に漫画の画像を修正できることを特徴とする請求項１〜請求項５のいずれかに記載の電子メールフォーマット変換装置。
7. 電子メール内の経緯度情報に関連する経緯度関連画像を漫画のコマに更に合成することを特徴とする請求項１〜請求項３のいずれかに記載の電子メールフォーマット変換装置。
8. 前記電子データの形式はパーソナルコンピュータ、プリンタ、ファクシミリ装置又はコピー装置上のソフトウェアで読み出し可能なファイル形式であることを特徴とする請求項１〜請求項７のいずれかに記載の電子メールフォーマット変換装置。
9. 利用時には課金もしくはユーザの認証を必要とすることを特徴とする請求項１〜請求項８のいずれかに記載の電子メールフォーマット変換装置。
10. 請求項１〜請求項９のいずれかに記載の電子メールフォーマット変換装置を備えたことを特徴とする移動通信端末。
11. 請求項１〜請求項９のいずれかに記載の電子メールフォーマット変換装置が、予め蓄積された電子メールのデータを受け取って前記メール保存部に保存するデータ入力部と、前記電子データを出力して印刷用紙に印刷する印刷部とを有することを特徴とする画像形成装置。
12. 送受信された複数の電子メール内のメール文と各電子メールの送信者に関連付けられた送信者画像とを合成して時系列に並ぶ複数のコマが配置される漫画を形成し、連続した電子メールの送受信間隔が所定の範囲の場合には連続した電子メールの関連性は深いと判断して、2つ以上の電子メールから漫画の1コマを形成し、形成された漫画の電子データを出力することを特徴とする電子メールフォーマット変換プログラム。
13. 送受信された電子メールを保存するメール保存部と、
    電子メールの送信者に関連付けられる送信者画像を保存する画像保存部と、
    を備え、複数の電子メール内のメール文と各電子メールに関連付けられた前記送信者画像とを合成して時系列に並ぶ複数のコマが配置される漫画を形成し、連続した電子メールの送受信間隔が所定の範囲の場合には連続した電子メールの関連性は深いと判断して、2つ以上の電子メールから漫画の1コマを形成し、形成された漫画の電子データを出力することを特徴とする電子メールフォーマット変換方法。