JP4170150B2 - メール中継装置および方法並びにプログラム - Google Patents
メール中継装置および方法並びにプログラム Download PDFInfo
- Publication number
- JP4170150B2 JP4170150B2 JP2003152709A JP2003152709A JP4170150B2 JP 4170150 B2 JP4170150 B2 JP 4170150B2 JP 2003152709 A JP2003152709 A JP 2003152709A JP 2003152709 A JP2003152709 A JP 2003152709A JP 4170150 B2 JP4170150 B2 JP 4170150B2
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- image
- multimedia
- frame
- terminal device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Color Television Systems (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、動画像が添付された電子メールを中継して送信先に送信するメール中継装置および方法並びにメール中継方法をコンピュータに実行させるためのプログラムに関するものである。
【０００２】
【従来の技術】
デジタルカメラやスキャナ等により取得される画像は、ＲＧＢ各色８ビットの合計２４ビットの色すなわち約１６７７万色の色を表現することが可能である。しかしながら、画像を再生する装置によっては、これよりも少ない（例えば２５６色）の色数しか表現できない場合がある。また、ウェブサイトにおいて利用頻度が高いｇｉｆやｐｎｇ等の画像フォーマットが扱うことが可能な色は２５６色である。したがって、デジタルカメラ等により取得された画像を、表現可能な色数が少ない再生装置に表示したり、ｇｉｆやｐｎｇ等の画像フォーマットに変換する場合には、１６７７万色の色数を２５６色に減色する必要がある。
【０００３】
従来よりこのような減色処理は、減色処理を行う画像を２５６色で表現するのに最適な２５６色のパレット色からなるパレットデータを生成し、パレットデータのパレット色の中から、画素毎に変換すべき色を選択して各画素を減色していくことにより行っている。
【０００４】
また、デジタルビデオカメラにより取得された動画像をリアルタイムで減色処理して、静止画像が連続的に切り替わることによる動きのある画像（以下減色動画像とする）を生成する方法が提案されている（特許文献１参照）。この方法は、動画像に含まれる１／６０秒毎に変化するフレームをコマ落ちさせることなくリアルタイムで減色処理するために、各フレーム毎にパレットデータを生成するのではなく、数フレーム毎にパレットデータを生成し、数フレーム単位で１つのパレットデータを用いて減色処理を行う方法である。
【０００５】
一方、カメラ付き携帯電話機等の携帯端末装置の機能の向上は著しく、通信速度の向上とも相まって、動画像を撮影し、撮影した動画像を電子メールに添付して送信したり、動画像コンテンツを配信する動画像配信サーバにアクセスして、所望とする動画像コンテンツをダウンロードして再生可能な携帯端末装置が提案されている。
【０００６】
また、静止画像ではあるが、カメラ付きの携帯端末装置から送信された画像が添付された電子メールに対して、送信先の端末装置の種類に応じて適切な画像処理を施すメール中継装置が提案されている（特許文献２参照）。このようなメール中継装置を用いれば、送信先の携帯端末装置が有する画面サイズ、画面の明るさや色合い等に適した画像となるように画像データに画像処理を施して、画像添付電子メールを送信することができる。
【０００７】
また、携帯端末装置の機種に応じた画像データをウェブサイトの画像サーバに保管しておき、ウェブサイトにアクセスした携帯端末装置の機種を判別し、判別された機種に応じた画像データを携帯端末装置に送信するようにしたシステムも提案されている（特許文献３参照）。
【０００８】
ところで、携帯端末装置の表示画面の高画素化が進み、従来よりも縦横が２倍すなわち画素数で４倍となる表示画面を搭載した携帯端末装置が市場に出回りつつある。このような、携帯端末装置にその表示画面の画素数に見合った画像を用意すれば、従来よりも高精細な画像を表示することができる。
【０００９】
【特許文献１】
特開平１１−２５９６４０号公報
【００１０】
【特許文献２】
特願２００２−２１４２１５号
【００１１】
【特許文献３】
特開２００２−２４４９７１号公報
【００１２】
【発明が解決しようとする課題】
動画像が添付された電子メールを送信した場合、送信先の携帯端末装置が動画像を再生できる機種であれば、その携帯端末装置においては電子メールに添付された動画像を表示することができる。しかしながら、機種によっては動画像を表示できない場合がある。このため、そのような携帯端末装置においては、たとえ機種に応じて適切に画像処理が施された動画像が添付された電子メールが送信されても、動画像を表示することができない。このような場合、動画像を上述したように減色動画像に変換して送信先の携帯端末装置に送信することが考えられる。
【００１３】
ところで、表示画面の高画素化が進んでも、携帯端末装置に搭載される画像表示のためのメモリの容量はコスト等の面から高容量とはなっていないのが現状である。例えば、表示画面の画素数が４倍となってもメモリの容量は２倍にしかなっていない。
【００１４】
一方、ｇｉｆやｐｎｇ等の減色動画像フォーマットは、画像上の一方向すなわち１次元方向についての冗長性を考慮して圧縮処理を行っている。このため、一方向に同じ画素値を有する画素が並んでいる場合には圧縮率を高めることができるが、その一方向に直交する方向については、圧縮率を高めることができないものである。
【００１５】
このため、高画素の表示画面を有する携帯端末装置に動画像に代えて減色動画像フォーマットを有する減色動画像を送信して表示した場合、例えば画素数を４倍としつつも圧縮後の容量を２倍にまでしかできないという制限があるため、画質を低減させたり、表示するフレーム数を低減したり、解像度を低減する等して、減色動画像フォーマットの画像のデータ容量を少なくしなければならない。しかしながら、上記減色動画像フォーマットの画像は表示可能な色数が元々２５６色しかないため、データ容量を少なくすると、携帯端末装置自体は高精細に画像を表示可能であるにも拘わらず、表示される画像は非常に画質が悪いものとなる。
【００１６】
本発明は上記事情に鑑みなされたものであり、動画像を表示できない携帯端末装置に動画像を添付した電子メールが送信されても、その動画像を減色動画像のようにコマ送り表示させつつ高画質に表示できるようにすることを目的とする。
【００１７】
【課題を解決するための手段】
本発明によるメール中継装置は、動画像が添付された電子メールを該電子メールの送信先である送信先端末装置に送信するメール中継装置において、
前記送信先端末装置の機種を判別する機種判別手段と、
該送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合に、前記添付された動画像を該マルチメディア画像に変換する動画像変換手段とを備え、
前記マルチメディア画像を前記動画像に代えて前記送信先端末装置に送信することを特徴とするものである。
【００１８】
「マルチメディアフォーマットのマルチメディア画像」とは、複数のフレームをコマ送り表示させつつ音声と同期させながらインタラクティブに表示可能なフォーマットの画像を意味し、例えばMacromedia社が開発したＦｌａｓｈ（登録商標）を用いることができるがこれに限定されるものではない。また、音声と同期させないフォーマットも「マルチメディアフォーマットのマルチメディア画像」に含めるものとする。
【００１９】
Ｆｌａｓｈとは、音声やベクターグラフィックスのアニメーションを組み合わせたＷｅｂ表示用ベクトル型グラフィックアニメーションであり、ＳＷＦというファイルフォーマットで表現され、ベクトル表現された図形や写真等のグラフィックスアニメーション等を音声と同期させながら表示画面上においてインタラクティブに表示することができる。このようなＦｌａｓｈを用いることにより、複数のフレームがコマ送り表示されるマルチメディア画像を生成することができる。
【００２０】
また、Ｆｌａｓｈは上述したｇｉｆやｐｎｇ等の減色動画像を扱うことが可能であるが、本発明においては、ｇｉｆやｐｎｇフォーマットのように、１次元方向に冗長性を考慮した圧縮形式ではなく、ＪＰＥＧフォーマットのように、２次元方向の冗長性を考慮した圧縮形式にて複数のフレームを圧縮することが好ましい。
【００２１】
「マルチメディア画像を動画像に代えて送信先端末装置に送信する」とは、送信先端末装置が電子メールに添付された動画像をそのまま受信可能なものである場合には、動画像に代えてマルチメディア画像を電子メールに添付して送信すること、および送信先端末装置が電子メールに添付された動画像をそのまま受信することができないものである場合には、マルチメディア画像を一時的に保管しておき保管場所を表す情報（例えばＵＲＬ）を電子メールに添付して送信先端末装置に送信し、送信先端末装置からの指示により保管されたマルチメディア画像を送信先端末装置に送信することの双方を含む。
【００２２】
なお、本発明によるメール中継装置においては、前記動画像変換手段が、前記動画像から複数のフレームをサンプリングするサンプリング手段と、
該複数のフレームを２次元方向に冗長性を考慮した圧縮形式にて圧縮して前記マルチメディア画像を生成するマルチメディア画像生成手段とを備えるものであってもよい。
【００２３】
この場合、マルチメディア画像生成手段は、前記送信先端末装置が有する表示装置の特性に応じて、該表示装置に表示可能なように前記マルチメディア画像を生成する手段であってもよい。
【００２４】
「表示装置の特性」としては、表示装置の解像度、表示装置が扱うことが可能なデータ容量、表示装置の出力色数等を用いることができる。
【００２５】
「表示装置に表示可能なようにマルチメディア画像を生成する」とは、マルチメディア画像に用いるフレーム数、各フレームの表示間隔、表示するサイズ、表示する色数、マルチメディア画像のデータ容量、展開後のデータ容量等が、表示装置の特性と適合し、表示装置側において何ら加工を加えることなく表示可能なようにマルチメディア画像を生成することをいう。
【００２６】
なお、前記マルチメディア画像生成手段は、前記表示装置の特性に応じて前記複数のフレームを拡大縮小するサイズ変更手段と、
前記表示装置が取り扱い可能なデータ容量となるように、前記複数のフレームを前記２次元方向に冗長性を考慮した圧縮形式にて圧縮するフレーム圧縮手段と、
該圧縮された複数のフレームのフォーマットを成形して前記マルチメディア画像を生成するフォーマット成形手段とを備えてなるものであってもよい。
【００２７】
この場合、前記フレーム圧縮手段は、前記生成されたマルチメディア画像が前記表示装置が取り扱い可能なデータ容量とならない場合に、前記フレームの圧縮率の変更および／または前記複数のフレームからのフレームの間引きを、前記マルチメディア画像が前記データ容量となるまで繰り返す手段であってもよい。
【００２８】
また、本発明によるメール中継装置においては、前記送信先端末装置が携帯端末装置であってもよい。
【００２９】
本発明によるメール中継方法は、動画像が添付された電子メールを該電子メールの送信先である送信先端末装置に送信するメール中継方法において、
前記送信先端末装置の機種を判別し、
該送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合に、前記添付された動画像を該マルチメディア画像に変換し、
前記マルチメディア画像を前記動画像に代えて前記送信先端末装置に送信することを特徴とするものである。
【００３０】
なお、本発明によるメール中継方法をコンピュータに実行させるためのプログラムとして提供してもよい。
【００３１】
【発明の効果】
本発明によるメール中継装置および方法によれば、動画像が添付された電子メールの送信先である送信先端末装置の機種が判別され、その送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合には、動画像がマルチメディア画像に変換され、マルチメディア画像が動画像に代えて送信先端末装置に送信される。このため、携帯端末装置が動画像を表示できなくても、マルチメディア画像により電子メールに添付されて送信された動画像を擬似的にかつ高画質に表示することができる。
【００３２】
また、請求項２の発明によれば、動画像から複数のフレームがサンプリングされ、複数のフレームが２次元方向に冗長性を考慮した圧縮形式にて圧縮されてマルチメディアフォーマットのマルチメディア画像が生成される。ここで、動画像からサンプリングされたフレームは、上記減色動画像のフォーマットであるｇｉｆやｐｎｇフォーマットのように１次元方向の冗長性を考慮した圧縮形式ではなく、ＪＰＥＧのように２次元方向の冗長性を考慮した圧縮形式にて圧縮されてマルチメディア画像に含められることとなる。また、２次元方向の冗長性を考慮した圧縮方式の方が１次元方向の冗長性を考慮した圧縮方式よりも、画質を維持しつつデータ容量を低減できるものである。したがって、請求項２の発明によれば、減色動画像と比較してデータ容量を低減しつつも、コマ送り表示される画像を高画質に生成することができ、これにより、高画素の表示画面を有する送信先端末装置の表示装置にコマ送り表示される画像を高画質に表示することができる。
【００３３】
また、送信先端末装置が有する表示装置の特性に応じて、表示装置に表示可能なようにマルチメディア画像を生成することにより、生成されたマルチメディア画像を確実に送信先端末装置の表示装置に表示することができる。
【００３４】
また、送信先端末装置が有する表示装置の特性に応じてフレームを拡大縮小し、表示装置が取り扱い可能なデータ容量となるように複数のフレームを２次元方向に冗長性を考慮した圧縮形式にて圧縮し、圧縮された複数のフレームのフォーマットを成形してマルチメディア画像を生成することにより、表示装置の表示画面のサイズおよび表示装置が扱うことが可能なデータ容量を考慮してマルチメディア画像を生成することができ、これにより、生成されたマルチメディア画像をより確実に送信先端末装置の表示装置に表示することができる。
【００３５】
また、フレームが単一の色のみからなる等単純な画像であるか、細かな被写体を含む等により複雑なものであるかによって、フレームの圧縮後の容量は異なるものとなる。また、圧縮されたフレームの展開後の容量も、単純な画像か複雑な画像かによって異なるものとなる。このため、フレームの複雑さによっては生成されたマルチメディア画像のデータ容量（展開前後の双方を含む）が送信先端末装置の表示装置が取り扱い可能なデータ容量とならない場合がある。したがって、生成されるマルチメディア画像がその表示装置が取り扱い可能なデータ容量とならない場合に、フレームの圧縮率の変更および／または複数のフレームからのフレームを間引くことを表示装置が取り扱い可能なデータ容量となるまで繰り返すことにより、送信先端末装置の表示装置が取り扱い可能なデータ容量のマルチメディア画像を生成することができる。
【００３６】
また、送信先端末装置を携帯端末装置とすることにより、携帯端末装置においてマルチメディア画像を表示することができる。
【００３７】
【発明の実施の形態】
以下図面を参照して本発明の実施形態について説明する。図１は本発明の実施形態によるメール中継装置を適用したメール中継サーバを用いたメールシステムの構成を示す概略ブロック図である。図１に示すように、本実施形態によるメールシステムは、メール中継サーバ１を備え、動画像を撮影可能なカメラ付きの携帯電話機、ＰＨＳ、ＰＤＡ等の携帯端末装置３から送信された、動画像が添付された電子メールをメール中継サーバ１において中継して、電子メールの送信先に送信するものである。
【００３８】
図１に示すように、メール中継サーバ１は、メール受信部１１と、動画像分離部１２と、機種判別部１３と、画像蓄積部１４と、動画像変換部１５と、画像添付部１６と、ＵＲＬ添付部１７と、メール送信部１８と、リクエスト受信部１９と、画像読み出し部２０と、画像送信部２１とを備える。
【００３９】
メール受信部１１は、ある携帯端末装置３が送信した動画像を表す動画像データＭ０が添付された電子メールＥ０を受信する。
【００４０】
動画像分離部１２は、電子メールＥ０から動画像データＭ０を分離して、電子メールＥ０の動画像データＭ０以外の情報からなるメール本体Ｅ１を生成する。なお、メール本体Ｅ１はメール本文と送信者のメールアドレス、送信先のメールアドレス等の各種情報を含むヘッダとからなる。動画像分離部１２はメール本体Ｅ１および動画像データＭ０を機種判別部１３に入力する。
【００４１】
機種判別部１３は、メール本体Ｅ１のヘッダに含まれる送信先の携帯端末装置３のメールアドレスに基づいて、メールアドレスと機種とを対応づけたデータベース１３Ａおよび機種とフォーマットとの関係を表すテーブルを参照して、送信先の携帯端末装置３が動画像を表示可能であるか否かを判定する。また、送信先の携帯端末装置３が、画像が添付された電子メールをそのまま受信可能なものであるか否かも判定する。
【００４２】
図２は機種とフォーマットとの関係を表すテーブルを示す図である。図２に示すように、テーブルＴ１は、携帯端末装置３が携帯電話機である場合の機種毎（Ａ００１，Ａ００２，Ｂ００１等）に、動画像の表示の可否、マルチメディア画像の表示の可否、画面サイズ、表示可能色数、表示可能な減色動画像のコマ数、扱うことが可能なデータ容量（単位ＫＢ）が割り当てられている。
【００４３】
ここで、機種判別部１３の判定結果は下記に示すものとなる。
（１）送信先の携帯端末装置３が動画像を表示可能であり、画像が添付された電子メールをそのまま受信可能である。
【００４４】
（２）送信先の携帯端末装置３が動画像を表示可能ではなく、画像が添付された電子メールをそのまま受信可能である。
【００４５】
（３）送信先の携帯端末装置３が動画像を表示可能であり、画像が添付された電子メールを受信可能でない。
【００４６】
（４）送信先の携帯端末装置３が動画像を表示可能ではなく、画像が添付された電子メールをそのまま受信可能でない。
【００４７】
上記（１）のように判定された場合、機種判別部１３は動画像変換部１５に処理を行わせることなく動画像データＭ０を画像添付部１６に入力する。また、動画像分離部１２はメール本体Ｅ１を画像添付部１６に入力する。
【００４８】
上記（２）のように判定された場合、機種判別部１３は動画像データＭ０を動画像変換部１５に入力し、動画像変換部１５に処理を行わせる。また、動画像分離部１２はメール本体Ｅ１を画像添付部１６に入力する。
【００４９】
上記（３）のように判定された場合、機種判別部１３は動画像変換部１５に処理を行わせることなく動画像データＭ０を画像蓄積部１４に入力する。また、動画像分離部１２はメール本体Ｅ１をＵＲＬ添付部１７に入力する。
【００５０】
上記（４）のように判定された場合、機種判別部１３は動画像データＭ０を動画像変換部１５に入力し、動画像変換部１５に処理を行わせる。また、動画像分離部１２はメール本体Ｅ１をＵＲＬ添付部１７に入力する。
【００５１】
画像蓄積部１４は、動画像データＭ０および動画像変換部１５が生成したマルチメディア画像データＦ１または減色動画像データＲ１を蓄積する。
【００５２】
動画像変換部１５は、送信先の携帯端末装置３が動画像を表示できない機種である場合に、さらに送信先の携帯端末装置３がマルチメディア画像を表示可能であるか否かを判定し、マルチメディア画像を表示可能である場合には、動画像データＭ０をマルチメディア画像データＦ１に変換する。また、マルチメディア画像も表示できない場合には、動画像データＭ０を減色動画像データＲ１に変換する。
【００５３】
図３は動画像変換部１５の詳細な構成を示す概略ブロック図である。図３に示すように、動画像変換部１５は、動画像入力部５１と、復号化部５２と、出力フォーマット決定部５３と、マルチメディア画像生成部５４と、減色動画像生成部５５と、生成画像出力部５６とを備える。
【００５４】
動画像入力部５１は、動画像データＭ０の動画像変換部１５への入力を受け付ける。
【００５５】
復号化部５２は、符号化されている動画像データＭ０を復号化して生動画像データＭ０′を生成する。
【００５６】
出力フォーマット決定部５３は、テーブルＴ１を参照して、送信先の携帯端末装置３がマルチメディア画像を表示可能である場合には、生動画像データＭ０′をマルチメディア画像生成部５４に入力する。また、マルチメディア画像も表示できない場合には、生動画像データＭ０′を減色動画像生成部５５に入力する。
【００５７】
マルチメディア画像生成部５４は、生動画像データＭ０′からマルチメディア画像データＦ１を生成する。図４は、マルチメディア画像生成部５４の詳細な構成を示す概略ブロック図である。図４に示すようにマルチメディア画像生成部５４は、フレーム分離部６１と、符号化制御部６２と、フレームサンプリング部６３と、フレーム内符号化部６４と、フォーマット成形部６５とを備える。
【００５８】
フレーム分離部６１は、生動画像データＭ０′をフレーム単位の画像データ（以下フレームデータＦｒ０とする）に分離する。例えば本実施形態においては１フレームは１／６０秒の動画像を表すものである。
【００５９】
符号化制御部６２は、最終的に得られるマルチメディア画像データＦ１のデータ容量が送信先の携帯端末装置３が有する表示装置が扱うことが可能なデータ容量（以下データ容量Ｋとする）以下となるようにフレームサンプリング部６３およびフレーム内符号化部６４を制御する。なお、データ容量Ｋは圧縮されたマルチメディア画像データＦ１を取り扱うことが可能なデータ容量Ｋ１およびこれを展開した場合データを取り扱うことが可能なデータ容量Ｋ２の双方を含む。
【００６０】
フレームサンプリング部６３は、マルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるように、複数のフレームデータＦｒ０からフレームデータをサンプリングしてサンプリングされたフレームデータＦｒ１を生成する。
【００６１】
フレーム内符号化部６４は、マルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるようにサンプリングされたフレームデータＦｒ１のそれぞれを２次元方向の冗長性を考慮した圧縮方式であるＪＰＥＧ形式にて圧縮して圧縮済みのフレームデータＦｒ２を生成する。さらに、フレーム内符号化部６４は、圧縮済みのフレームデータＦｒ２をフォーマット成形部６５においてフォーマットを成形することにより生成されるマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ１以下となるか否かおよび展開後のマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ２以下となるかを判定する。そしてこの判定が肯定された場合には圧縮済みのフレームデータＦｒ２をフォーマット成形部６５に入力する。一方、この判定が否定された場合には、その旨の情報を符号化制御部６２に送信する。符号化制御部６２はこの旨の情報を受信すると、さらにサンプリングするフレーム数を少なくするようフレームサンプリング部６３を再制御するとともに、圧縮率を高くするようフレーム内符号化部６４を再制御する。
【００６２】
すなわち、フレームが単一の色のみからなる等単純な画像であるか、細かな被写体を含む等により複雑なものであるかによって、圧縮済みのフレームデータＦｒ２のデータ容量は異なるものとなる。また、マルチメディア画像データＦ１の展開後のデータ容量も、単純な画像か複雑な画像かによって異なるものとなる。このため、フレームの複雑さによっては生成されたマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下とならない場合がある。したがって、フォーマット成形部６５において生成されるマルチメディア画像データＦ１がデータ容量Ｋ以下とならない場合に、マルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるように、再度サンプリングおよびフレームデータＦｒ１の符号化を行うようにしたものである。
【００６３】
フォーマット成形部６５は、圧縮済みのフレームデータＦｒ２をＦｌａｓｈフォーマットに成形してマルチメディア画像データＦ１を生成する。具体的には、各フレームデータＦｒ２の表示間隔等、各フレームをコマ送り表示させるために必要な情報をフレームデータＦｒ２に付与しつつ各フレームデータＦｒ２を並べることによりフレームデータＦｒ２のフォーマットを成形してマルチメディア画像データＦ１を生成する。なお、マルチメディア画像データＦ１に音声を付与したい場合には、フォーマット成形部６５において音声データがマルチメディア画像データＦ１に含められる。
【００６４】
図３に戻り、減色動画像生成部５５は、送信先の携帯端末装置３が動画像およびマルチメディア画像を表示できない機種である場合に、動画像データＭ０を減色動画像データＲ１に変換する。図５は減色動画像生成部５５の詳細な構成を示す概略ブロック図である。図５に示すように、減色動画像生成部５５は、フレーム分離部７１と、基準フレーム生成部７２と、パレットデータ生成部７３と、フレームサンプリング部７４と、処理部７５と、フレーム合成部７６と、符号化部７７とを備える。
【００６５】
フレーム分離部７１は、マルチメディア画像生成部５４のフレーム分離部６１と同様に、生動画像データＭ０′をフレーム単位の画像データすなわちフレームデータＦｒ０に分離する。
【００６６】
基準フレーム生成部７２は、フレームデータＦｒ０からパレットデータの生成に用いられる基準フレームデータＢ０を生成する。ここで、基準フレームデータＢ０としては、各フレームを時系列順に並べた場合における先頭のフレームデータＦｒ０を用いるものとする。なお、任意のフレームデータを基準フレームデータＢ０としてもよく、全フレームデータＦｒ０または全フレームデータＦｒ０から選択した複数のフレームデータＦｒ０′を１つの画像データとなるように合成し、この合成したフレームデータを基準フレームデータＢ０として生成してもよい。また、全フレームデータＦｒまたは全フレームデータＦｒ０から選択した複数のフレームデータＦｒ０′を平均することにより基準フレームデータＢ０を生成してもよい。なお、複数のフレームデータＦｒ０′としては、後述するフレームサンプリング部７４がサンプリングしたフレームデータを用いてもよい。
【００６７】
パレットデータ生成部７３は、基準フレームデータＢ０から減色処理に必要な色数のパレットデータＰ０を生成する。具体的にはメディアンカット法等を用いてパレットデータＰ０を生成することができるが、これに限定されるものではない。
【００６８】
ここで、メディアンカット法は、基準フレームデータＢ０を構成するＲＧＢの各色データをＲＧＢの３次元空間にプロットし、３次元空間上の色データが存在する範囲におけるメディアン値を求め、これをパレットデータを構成する１つのパレット色とし、さらにメディアン値により空間を２つに分割して、分割された空間におけるメディアン値を求めることを、パレットデータの色数（例えば２５６色）が得られるまで繰り返すことにより、パレットデータを構成するパレット色を求める方法である。
【００６９】
フレームサンプリング部７４は、フレームデータＦｒ０から減色動画像を構成するフレームデータをサンプリングする。具体的には、図２に示すテーブルＴ１を参照して、送信先の携帯端末装置３が表示することが可能な減色動画像のコマ数の情報を取得し、このコマ数に相当する数のフレームデータをサンプリングする。この際、サンプリングするフレームデータは、動画像データＭ０の再生時間をコマ数により等分した時間におけるフレームデータとすればよい。なお、フレームデータをサンプリングするのみならず、フレーム間において補間を行って新たなフレームデータを生成してもよい。
【００７０】
処理部７５は、フレームサンプリング部７４がサンプリングしたフレームデータＦｒ３に対して、パレットデータＰ０を用いて減色処理を施す。減色処理の方法としては、誤差拡散法等を用いることができる。これにより、減色されたフレームデータＦｒ４が生成される。
【００７１】
フレーム合成部７６は、処理部７５が生成したフレームデータＦｒ４を時系列順に並べて１つのファイルとなるように合成することにより、各フレームの画像が連続的に切り替わって再生される減色生動画像データＲ０を生成する。
【００７２】
符号化部７７は、減色生動画像データＲ０を符号化して減色動画像データＲ１を生成する。この際、送信先の携帯端末装置３が取り扱うことが可能なデータ容量Ｋ以下となるように符号化を行う。なお、減色動画像データＲ１のファイルフォーマットとしては、アニメーションｇｉｆやｐｎｇのアニメーションｇｉｆに対応するフォーマットのｍｎｇを用いることができるが、これに限定されるものではない。
【００７３】
図３に戻り、生成画像出力部５６は、マルチメディア画像生成部５４が生成したマルチメディア画像データＦ１または減色動画像生成部５５が生成した減色動画像データＲ１を画像蓄積部１４または画像添付部１６に出力する。
【００７４】
図１に戻り、画像添付部１６は、送信先の携帯端末装置３が画像が添付された電子メールをそのまま受信可能である場合に、メール本体Ｅ１に動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１を添付して画像が添付された電子メールＥ２を生成する。
【００７５】
ＵＲＬ添付部１７は、送信先の携帯端末装置３が画像が添付された電子メールをそのまま受信可能でない場合に、メール本体Ｅ１に動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１の画像蓄積部１４における蓄積場所のＵＲＬを添付してＵＲＬが添付された電子メールＥ３を生成する。
【００７６】
メール送信部１８は、電子メールＥ２または電子メールＥ３を送信先の携帯端末装置３に携帯電話通信網を介して送信する。
【００７７】
リクエスト受信部１９は、ＵＲＬが添付された電子メールＥ３を受信した携帯端末装置３による画像のダウンロードのリクエストを受信する。なお、携帯端末装置３による動画像配信のリクエストには、動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１の蓄積先のＵＲＬが含まれる。
【００７８】
画像読み出し部２０は、リクエスト受信部１９が受信したリクエストに含まれるＵＲＬを参照して、動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１を画像蓄積部１４から読み出す。
【００７９】
画像送信部２１は、画像読み出し部２０が読み出した動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１を、リクエストを行った携帯端末装置３に携帯電話通信網を介して送信する。
【００８０】
次いで、本実施形態において行われる処理について説明する。図６は、本実施形態において行われる処理を示すフローチャートである。ある携帯端末装置３が送信した動画像データＭ０が添付された電子メールＥ０をメール受信部１１が受信すると処理が開始され、動画像分離部１２が電子メールＥ０から動画像データＭ０を分離する（ステップＳ１）。次いで、機種判別部１３がメール本体Ｅ１のヘッダに含まれる送信先携帯端末装置３のメールアドレスに基づいてデータベース１３Ａを参照して、送信先の携帯端末装置３が上記（１）〜（４）のいずれに該当するかを判定する（ステップＳ２）。
【００８１】
（１）に該当する場合、図７に示すフローチャートに進み、機種判別部１３が動画像データＭ０を、動画像分離部１２がメール本体Ｅ１をそれぞれ画像添付部１６に入力する（ステップＳ３）。画像添付部１６は、動画像データＭ０をメール本体Ｅ１に添付して画像が添付された電子メールＥ２を生成し（ステップＳ４）、メール送信部１８が電子メールＥ２を送信先の携帯端末装置３に送信し（ステップＳ５）、処理を終了する。
【００８２】
電子メールＥ２を受信した携帯端末装置３は動画像を表示可能であることから、電子メールＥ２に添付された動画像データＭ０が表示される。
【００８３】
一方、（２）に該当する場合、図８に示すフローチャートに進み、機種判別部１３が動画像データＭ０を動画像変換部１５に入力し、動画像分離部１２がメール本体Ｅ１を画像添付部１６に入力する（ステップＳ６）。動画像変換部１５は、動画像データＭ０に対して動画像変換処理を行う（ステップＳ７）。
【００８４】
図９は動画像変換処理のフローチャートである。まず、動画像入力部５１が動画像データＭ０の入力を受け付け（ステップＳ２１）、復号化部５２が動画像データＭ０を復号化して生動画像データＭ０′を取得する（ステップＳ２２）。続いて、出力フォーマット決定部５３がテーブルＴ１を参照して、送信先の携帯端末装置３がマルチメディア画像を表示可能であるか否かを判定し（ステップＳ２３）、ステップＳ２３が肯定されるとマルチメディア画像生成部５４が生動画像データＭ０′に対してマルチメディア画像生成処理を施す（ステップＳ２４）。
【００８５】
図１０はマルチメディア画像生成処理のフローチャートである。まず、フレーム分離部６１が生動画像データＭ０′をフレーム単位の画像データであるフレームデータＦｒ０に分離し（ステップＳ３１）、符号化制御部６２が最終的に得られるマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるようにフレームサンプリング部６３およびフレーム内符号化部６４を制御する（ステップＳ３２）。
【００８６】
そして、フレームサンプリング部６３が、フレームデータＦｒ０からマルチメディア画像データＦ１を構成するフレームデータＦｒ１をサンプリングする（ステップＳ３３）。さらに、フレーム内符号化部６４がフレームデータＦｒ１を符号化して圧縮済みのフレームデータＦｒ２を生成する（ステップＳ３４）。続いて、フレーム内符号化部６４が、フォーマット成形部６５においてフレームデータＦｒ２から生成されるマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるか否かを判定する（ステップＳ３５）。ステップＳ３５が否定されると、フレーム内符号化部６４はその情報を符号化制御部６２に入力する。符号化制御部６２は最終的に得られるマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるようにフレームサンプリング部６３およびフレーム内符号化部６４を再制御し（ステップＳ３６）、ステップＳ３３に戻る。フレームサンプリング部６３およびフレーム内符号化部６４は、マルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるまで、ステップＳ３３以降の処理を繰り返す。
【００８７】
ステップＳ３５が肯定されると、フォーマット成形部６５がフレームデータＦｒ２をＦｌａｓｈフォーマットに成形してマルチメディア画像データＦ１を生成し（ステップＳ３７）、マルチメディア画像生成処理を終了する。
【００８８】
図９に戻り、ステップＳ２３が否定されると減色動画像生成部５５が生動画像データＭ０′に対して減色動画像生成処理を施す（ステップＳ２５）。
【００８９】
図１１は、減色動画像生成処理のフローチャートである。まず、フレーム分離部７１が生動画像データＭ０′をフレーム単位の画像データであるフレームデータＦｒ０に分離し（ステップＳ４１）、基準フレーム生成部７２が、フレームデータＦｒ０から基準フレームデータＢ０を生成する（ステップＳ４２）。そして、パレットデータ生成部７３が、基準フレームデータＢ０からパレットデータＰ０を生成する（ステップＳ４３）。
【００９０】
一方、フレームサンプリング部７４が、フレームデータＦｒ０から減色動画像を構成するフレームデータＦｒ３をサンプリングする（ステップＳ４４）。なお、ステップＳ４４の処理を先に行ってもよく、ステップＳ４２，Ｓ４３およびステップＳ４４の処理を並列に行ってもよい。
【００９１】
そして、処理部７５が、フレームサンプリング部７４がサンプリングしたフレームデータＦｒ３に対して、パレットデータＰ０を用いて減色処理を施して減色されたフレームデータＦｒ４を生成する（ステップＳ４５）。次いで、フレーム合成部７６が、処理部７５が生成したフレームデータＦｒ４を時系列順に並べることにより１つのファイルとなるように合成して減色生動画像データＲ０を生成し（ステップＳ４６）、符号化部７７が減色生動画像データＲ０を符号化して減色動画像データＲ１を生成し（ステップＳ４７）、減色処理を終了する。
【００９２】
図８に戻り、画像添付部１６は、マルチメディア画像データＦ１または減色動画像データＲ１をメール本体Ｅ１に添付して画像が添付された電子メールＥ２を生成し（ステップＳ８）、メール送信部１８が電子メールＥ２を送信先の携帯端末装置３に送信し（ステップＳ９）、処理を終了する。
【００９３】
電子メールＥ２を受信した携帯端末装置３は動画像を表示可能ではないため、受信した電子メールＥ２に添付されたマルチメディア画像データＦ１または減色動画像データＲ１に基づいて、動画像データＭ０からサンプリングされたフレームが連続的に切り替わる動きのある画像が表示される。
【００９４】
ここで、マルチメディア画像データＦ１は減色動画像データＲ１と比較して、高画質に画像を再生できることから、マルチメディア画像データＦ１を受信した携帯端末装置３には、動画像データＭ０からサンプリングされたフレームが連続的に切り替わる動きのある高画質の画像が表示される。
【００９５】
（３）に該当する場合、図１２に示すフローチャートに進み、機種判別部１３が動画像データＭ０を画像蓄積部１４に入力し、動画像分離部１２がメール本体Ｅ１をＵＲＬ添付部１７に入力する（ステップＳ１０）。画像蓄積部１４は動画像データＭ０を蓄積する（ステップＳ１１）。ＵＲＬ添付部１７は、動画像データＭ０の蓄積先のＵＲＬをメール本体Ｅ１に添付してＵＲＬが添付された電子メールＥ３を生成し（ステップＳ１２）、メール送信部１８が電子メールＥ３を送信先の携帯端末装置３に送信し（ステップＳ１３）、処理を終了する。
【００９６】
（４）に該当する場合、図１３に示すフローチャートに進み、機種判別部１３が動画像データＭ０を動画像変換部１５に入力し、動画像分離部１２がメール本体Ｅ１をＵＲＬ添付部１７に入力する（ステップＳ１４）。動画像変換部１５は、動画像データＭ０に対して動画像変換処理を行う（ステップＳ１５）。画像蓄積部１４は動画像変換処理により生成されたマルチメディア画像データＦ１または減色動画像データＲ１を蓄積する（ステップＳ１６）。ＵＲＬ添付部１７は、マルチメディア画像データＦ１または減色動画像データＲ１の蓄積先のＵＲＬをメール本体Ｅ１に添付してＵＲＬが添付された電子メールＥ３を生成し（ステップＳ１７）、メール送信部１８が電子メールＥ３を送信先の携帯端末装置３に送信し（ステップＳ１８）、処理を終了する。
【００９７】
上記（３）および（４）の場合において、電子メールＥ３を受信した携帯端末装置３は、動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１のダウンロードのリクエストをメール中継サーバ１に対して行う。
【００９８】
図１４はリクエストが行われた際にメール中継サーバ１において行われる処理を示すフローチャートである。リクエスト受信部１９がダウンロードのリクエストを受信すると処理が開始され、画像読み出し部２０がリクエストに含まれるＵＲＬを参照して画像蓄積部１４から動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１を読み出す（ステップＳ５１）。そして、画像送信部２１が動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１をリクエストを行った携帯端末装置３に送信し（ステップＳ５２）、処理を終了する。
【００９９】
携帯端末装置３においては、動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１が受信される。ここで、携帯端末装置３が動画像を表示可能なものである場合には動画像データＭ０が送信され、動画像が表示される。一方、携帯端末装置３が動画像を表示できないがマルチメディア画像を表示可能なものである場合にはマルチメディア画像データＦ１が送信され、動画像データＭ０からサンプリングされたフレームが連続的に切り替わる動きのある高画質の画像が表示される。
【０１００】
また、携帯端末装置３が動画像およびマルチメディア画像を表示できない場合には減色動画像データＲ１が送信され、減色動画像データＲ１に基づいて、動画像データＭ０からサンプリングされたフレームが連続的に切り替わる動きのある画像が表示される。
【０１０１】
このように、本実施形態においては、動画像が添付された電子メールＥ０の送信先の携帯端末装置３の機種を判別し、その機種が動画像を表示できないものである場合には、電子メールＥ０に添付された動画像データＭ０をマルチメディア画像データＦ１または減色動画像データＲ１に変換して送信するようにしたため、携帯端末装置３が動画像を表示できなくても、マルチメディア画像データＦ１または減色動画像データＲ１により動画像を擬似的に表示することができる。
【０１０２】
とくに、マルチメディア画像データＦ１は、減色動画像データＲ１とは異なり、ＪＰＥＧのように２次元方向の冗長性を考慮した圧縮形式にて圧縮されたフレームデータＦｒ２が含められるため、データ容量を低減しつつも減色動画像データＲ１と比較して、コマ送り表示される画像を高画質に生成することができる。したがって、携帯端末装置３が動画像を表示できず、かつ取り扱うことが可能なデータ容量に制限があっても、マルチメディア画像データＦ１により、動画像を擬似的にかつ高画質に表示することができ、これにより、携帯端末装置３が高画素の表示画面を有する場合にもコマ送り表示される画像を高画質に表示できる。
【０１０３】
また、送信先の携帯端末装置３の特性に応じて動画像データＭ０からマルチメディア画像データＦ１を生成しているため、生成されたマルチメディア画像データＦ１を送信先の携帯端末装置３に確実に表示することができる。
【０１０４】
また、生成されるマルチメディア画像データＦ１がデータ容量Ｋ以下とならない場合には、フレームデータＦｒ１の再度のサンプリングおよびフレームデータＦｒ２の再度の符号化を、生成されるマルチメディア画像データＦ１がデータ容量Ｋ以下となるまで繰り返すようにしたため、携帯端末装置３がの表示装置が取り扱うことが可能なデータ容量Ｋに適合する容量のマルチメディア画像データＦ１を生成することができる。
【０１０５】
また、送信先の携帯端末装置３が動画像もマルチメディア画像も表示できない場合には、動画像データＭ０を減色動画像データＲ１に変換して送信するようにしたため、携帯端末装置３が動画像およびマルチメディア画像を表示できなくても、画質は落ちるものの減色動画像データＲ１により動画像を擬似的に表示することができる。
【０１０６】
また、動画像データＭ０から減色動画像データＲ１を生成する際に、１つのパレットデータＰ０のみを生成しているため、上記特許文献１に記載された方法のように、数フレーム毎にパレットデータを生成する必要がなくなり、これにより、装置の規模を大きくすることなく、動画像データＭ０から減色動画像データＲ１を得ることができる。
【０１０７】
なお、上記実施形態においては、マルチメディア画像としてＦｌａｓｈフォーマットを有するものを用いているが、複数のフレームをコマ送り表示させつつインタラクティブに表示可能なフォーマットであればこれに限定されるものではない。
【０１０８】
また、上記実施形態において、マルチメディア画像データＦ１に動画像データＭ０に含まれる音声を含めることも可能である。
【０１０９】
また、上記実施形態においては、１つのパレットデータＰ０のみを生成して動画像データＭ０から減色動画像データＲ１を生成しているが、上記特許文献１に記載された方法のように、数フレーム毎にパレットデータを生成して動画像データＭ０から減色動画像データＲ１を生成してもよい。また、これらの方法に限らず、動画像データＭ０から減色動画像データＲ１を生成できれば任意の方法を適用することができる。
【０１１０】
また、上記実施形態において、動画像分離部１２において動画像データＭ０が添付された電子メールＥ０を一時的に保管しておき、機種判別部１３が上記（１）のように判定した場合には、動画像データＭ０が添付された電子メールＥ０をそのままメール送信部１８から送信先の携帯端末装置３に送信してもよい。
【０１１１】
なお、上記実施形態において、テーブルＴ１を参照して、送信先の携帯端末装置３の表示画面サイズおよび表示可能色数に適合するように動画像データＭ０のフォーマットを変換してもよい。この場合、マルチメディア画像データＦ１および減色動画像データＲ１は、フォーマット変換済みの動画像データＭ０から生成される。
【０１１２】
また、上記実施形態においては、メール中継サーバ１を、送信先の携帯端末装置３が、画像が添付された電子メールをそのまま受信可能であるか否かに拘わらず電子メールを中継するものとしているが、送信先の携帯端末装置３が画像が添付された電子メールをそのまま受信可能である場合に特化したものとなるようにメール中継サーバ１を構成することも可能である。このように構成したメール中継サーバ（１Ａとする）を図１５に示す。図１５に示すように、メール中継サーバ１Ａは、図１に示すメール中継サーバ１と比較して、画像蓄積部１４、ＵＲＬ添付部１７、リクエスト受信部１９、画像読み出し部２０および画像送信部２１が除かれたものとなる。
【０１１３】
逆に、送信先の携帯端末装置３が画像が添付された電子メールをそのまま受信できない場合に特化したものとなるようにメール中継サーバ１を構成することも可能である。このように構成したメール中継サーバ（１Ｂとする）を図１６に示す。図１６に示すように、メール中継サーバ１Ｂは、図１に示すメール中継サーバ１と比較して、画像添付部１６が除かれたものとなる。
【図面の簡単な説明】
【図１】本発明の実施形態によるメール中継装置を適用したメール中継サーバを用いたメールシステムの構成を示す概略ブロック図
【図２】機種とフォーマットとの関係を表すテーブルを示す図
【図３】動画像変換部の詳細な構成を示す概略ブロック図
【図４】マルチメディア画像生成部の詳細な構成を示す概略ブロック図
【図５】減色動画像生成部の詳細な構成を示す概略ブロック図
【図６】本実施形態において行われる処理を示すフローチャート（その１）
【図７】本実施形態において行われる処理を示すフローチャート（その２）
【図８】本実施形態において行われる処理を示すフローチャート（その３）
【図９】動画像変換処理のフローチャート
【図１０】マルチメディア画像生成処理のフローチャート
【図１１】減色動画像生成処理のフローチャート
【図１２】本実施形態において行われる処理を示すフローチャート（その４）
【図１３】本実施形態において行われる処理を示すフローチャート（その５）
【図１４】リクエストが行われた際にメール中継サーバにおいて行われる処理を示すフローチャート
【図１５】本発明の他の実施形態によるメール中継装置を適用したメール中継サーバを用いたメールシステムの構成を示す概略ブロック図
【図１６】本発明の他の実施形態によるメール中継装置を適用したメール中継サーバを用いたメールシステムの構成を示す概略ブロック図
【符号の説明】
１，１Ａ，１Ｂ メール中継サーバ
３ 携帯端末装置
１１ メール受信部
１２ 動画像分離部
１３ 機種判別部
１４ 画像蓄積部
１５ 動画像変換部
１６ 画像添付部
１７ ＵＲＬ添付部
１８ メール送信部
１９ リクエスト受信部
２０ 画像読み出し部
２１ 画像送信部
５１ 動画像入力部
５２ 復号化部
５３ 出力フォーマット決定部
５４ マルチメディア画像生成部
５５ 減色動画像生成部
５６ 生成画像出力部
６１，７１ フレーム分離部
６２ 符号化制御部
６３，７４ フレームサンプリング部
６４ フレーム内符号化部
６５ フォーマット成形部
７２ 基準フレーム生成部
７３ パレットデータ生成部
７５ 処理部
７６ フレーム合成部
７７ 符号化部
【発明の属する技術分野】
本発明は、動画像が添付された電子メールを中継して送信先に送信するメール中継装置および方法並びにメール中継方法をコンピュータに実行させるためのプログラムに関するものである。
【０００２】
【従来の技術】
デジタルカメラやスキャナ等により取得される画像は、ＲＧＢ各色８ビットの合計２４ビットの色すなわち約１６７７万色の色を表現することが可能である。しかしながら、画像を再生する装置によっては、これよりも少ない（例えば２５６色）の色数しか表現できない場合がある。また、ウェブサイトにおいて利用頻度が高いｇｉｆやｐｎｇ等の画像フォーマットが扱うことが可能な色は２５６色である。したがって、デジタルカメラ等により取得された画像を、表現可能な色数が少ない再生装置に表示したり、ｇｉｆやｐｎｇ等の画像フォーマットに変換する場合には、１６７７万色の色数を２５６色に減色する必要がある。
【０００３】
従来よりこのような減色処理は、減色処理を行う画像を２５６色で表現するのに最適な２５６色のパレット色からなるパレットデータを生成し、パレットデータのパレット色の中から、画素毎に変換すべき色を選択して各画素を減色していくことにより行っている。
【０００４】
また、デジタルビデオカメラにより取得された動画像をリアルタイムで減色処理して、静止画像が連続的に切り替わることによる動きのある画像（以下減色動画像とする）を生成する方法が提案されている（特許文献１参照）。この方法は、動画像に含まれる１／６０秒毎に変化するフレームをコマ落ちさせることなくリアルタイムで減色処理するために、各フレーム毎にパレットデータを生成するのではなく、数フレーム毎にパレットデータを生成し、数フレーム単位で１つのパレットデータを用いて減色処理を行う方法である。
【０００５】
一方、カメラ付き携帯電話機等の携帯端末装置の機能の向上は著しく、通信速度の向上とも相まって、動画像を撮影し、撮影した動画像を電子メールに添付して送信したり、動画像コンテンツを配信する動画像配信サーバにアクセスして、所望とする動画像コンテンツをダウンロードして再生可能な携帯端末装置が提案されている。
【０００６】
また、静止画像ではあるが、カメラ付きの携帯端末装置から送信された画像が添付された電子メールに対して、送信先の端末装置の種類に応じて適切な画像処理を施すメール中継装置が提案されている（特許文献２参照）。このようなメール中継装置を用いれば、送信先の携帯端末装置が有する画面サイズ、画面の明るさや色合い等に適した画像となるように画像データに画像処理を施して、画像添付電子メールを送信することができる。
【０００７】
また、携帯端末装置の機種に応じた画像データをウェブサイトの画像サーバに保管しておき、ウェブサイトにアクセスした携帯端末装置の機種を判別し、判別された機種に応じた画像データを携帯端末装置に送信するようにしたシステムも提案されている（特許文献３参照）。
【０００８】
ところで、携帯端末装置の表示画面の高画素化が進み、従来よりも縦横が２倍すなわち画素数で４倍となる表示画面を搭載した携帯端末装置が市場に出回りつつある。このような、携帯端末装置にその表示画面の画素数に見合った画像を用意すれば、従来よりも高精細な画像を表示することができる。
【０００９】
【特許文献１】
特開平１１−２５９６４０号公報
【００１０】
【特許文献２】
特願２００２−２１４２１５号
【００１１】
【特許文献３】
特開２００２−２４４９７１号公報
【００１２】
【発明が解決しようとする課題】
動画像が添付された電子メールを送信した場合、送信先の携帯端末装置が動画像を再生できる機種であれば、その携帯端末装置においては電子メールに添付された動画像を表示することができる。しかしながら、機種によっては動画像を表示できない場合がある。このため、そのような携帯端末装置においては、たとえ機種に応じて適切に画像処理が施された動画像が添付された電子メールが送信されても、動画像を表示することができない。このような場合、動画像を上述したように減色動画像に変換して送信先の携帯端末装置に送信することが考えられる。
【００１３】
ところで、表示画面の高画素化が進んでも、携帯端末装置に搭載される画像表示のためのメモリの容量はコスト等の面から高容量とはなっていないのが現状である。例えば、表示画面の画素数が４倍となってもメモリの容量は２倍にしかなっていない。
【００１４】
一方、ｇｉｆやｐｎｇ等の減色動画像フォーマットは、画像上の一方向すなわち１次元方向についての冗長性を考慮して圧縮処理を行っている。このため、一方向に同じ画素値を有する画素が並んでいる場合には圧縮率を高めることができるが、その一方向に直交する方向については、圧縮率を高めることができないものである。
【００１５】
このため、高画素の表示画面を有する携帯端末装置に動画像に代えて減色動画像フォーマットを有する減色動画像を送信して表示した場合、例えば画素数を４倍としつつも圧縮後の容量を２倍にまでしかできないという制限があるため、画質を低減させたり、表示するフレーム数を低減したり、解像度を低減する等して、減色動画像フォーマットの画像のデータ容量を少なくしなければならない。しかしながら、上記減色動画像フォーマットの画像は表示可能な色数が元々２５６色しかないため、データ容量を少なくすると、携帯端末装置自体は高精細に画像を表示可能であるにも拘わらず、表示される画像は非常に画質が悪いものとなる。
【００１６】
本発明は上記事情に鑑みなされたものであり、動画像を表示できない携帯端末装置に動画像を添付した電子メールが送信されても、その動画像を減色動画像のようにコマ送り表示させつつ高画質に表示できるようにすることを目的とする。
【００１７】
【課題を解決するための手段】
本発明によるメール中継装置は、動画像が添付された電子メールを該電子メールの送信先である送信先端末装置に送信するメール中継装置において、
前記送信先端末装置の機種を判別する機種判別手段と、
該送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合に、前記添付された動画像を該マルチメディア画像に変換する動画像変換手段とを備え、
前記マルチメディア画像を前記動画像に代えて前記送信先端末装置に送信することを特徴とするものである。
【００１８】
「マルチメディアフォーマットのマルチメディア画像」とは、複数のフレームをコマ送り表示させつつ音声と同期させながらインタラクティブに表示可能なフォーマットの画像を意味し、例えばMacromedia社が開発したＦｌａｓｈ（登録商標）を用いることができるがこれに限定されるものではない。また、音声と同期させないフォーマットも「マルチメディアフォーマットのマルチメディア画像」に含めるものとする。
【００１９】
Ｆｌａｓｈとは、音声やベクターグラフィックスのアニメーションを組み合わせたＷｅｂ表示用ベクトル型グラフィックアニメーションであり、ＳＷＦというファイルフォーマットで表現され、ベクトル表現された図形や写真等のグラフィックスアニメーション等を音声と同期させながら表示画面上においてインタラクティブに表示することができる。このようなＦｌａｓｈを用いることにより、複数のフレームがコマ送り表示されるマルチメディア画像を生成することができる。
【００２０】
また、Ｆｌａｓｈは上述したｇｉｆやｐｎｇ等の減色動画像を扱うことが可能であるが、本発明においては、ｇｉｆやｐｎｇフォーマットのように、１次元方向に冗長性を考慮した圧縮形式ではなく、ＪＰＥＧフォーマットのように、２次元方向の冗長性を考慮した圧縮形式にて複数のフレームを圧縮することが好ましい。
【００２１】
「マルチメディア画像を動画像に代えて送信先端末装置に送信する」とは、送信先端末装置が電子メールに添付された動画像をそのまま受信可能なものである場合には、動画像に代えてマルチメディア画像を電子メールに添付して送信すること、および送信先端末装置が電子メールに添付された動画像をそのまま受信することができないものである場合には、マルチメディア画像を一時的に保管しておき保管場所を表す情報（例えばＵＲＬ）を電子メールに添付して送信先端末装置に送信し、送信先端末装置からの指示により保管されたマルチメディア画像を送信先端末装置に送信することの双方を含む。
【００２２】
なお、本発明によるメール中継装置においては、前記動画像変換手段が、前記動画像から複数のフレームをサンプリングするサンプリング手段と、
該複数のフレームを２次元方向に冗長性を考慮した圧縮形式にて圧縮して前記マルチメディア画像を生成するマルチメディア画像生成手段とを備えるものであってもよい。
【００２３】
この場合、マルチメディア画像生成手段は、前記送信先端末装置が有する表示装置の特性に応じて、該表示装置に表示可能なように前記マルチメディア画像を生成する手段であってもよい。
【００２４】
「表示装置の特性」としては、表示装置の解像度、表示装置が扱うことが可能なデータ容量、表示装置の出力色数等を用いることができる。
【００２５】
「表示装置に表示可能なようにマルチメディア画像を生成する」とは、マルチメディア画像に用いるフレーム数、各フレームの表示間隔、表示するサイズ、表示する色数、マルチメディア画像のデータ容量、展開後のデータ容量等が、表示装置の特性と適合し、表示装置側において何ら加工を加えることなく表示可能なようにマルチメディア画像を生成することをいう。
【００２６】
なお、前記マルチメディア画像生成手段は、前記表示装置の特性に応じて前記複数のフレームを拡大縮小するサイズ変更手段と、
前記表示装置が取り扱い可能なデータ容量となるように、前記複数のフレームを前記２次元方向に冗長性を考慮した圧縮形式にて圧縮するフレーム圧縮手段と、
該圧縮された複数のフレームのフォーマットを成形して前記マルチメディア画像を生成するフォーマット成形手段とを備えてなるものであってもよい。
【００２７】
この場合、前記フレーム圧縮手段は、前記生成されたマルチメディア画像が前記表示装置が取り扱い可能なデータ容量とならない場合に、前記フレームの圧縮率の変更および／または前記複数のフレームからのフレームの間引きを、前記マルチメディア画像が前記データ容量となるまで繰り返す手段であってもよい。
【００２８】
また、本発明によるメール中継装置においては、前記送信先端末装置が携帯端末装置であってもよい。
【００２９】
本発明によるメール中継方法は、動画像が添付された電子メールを該電子メールの送信先である送信先端末装置に送信するメール中継方法において、
前記送信先端末装置の機種を判別し、
該送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合に、前記添付された動画像を該マルチメディア画像に変換し、
前記マルチメディア画像を前記動画像に代えて前記送信先端末装置に送信することを特徴とするものである。
【００３０】
なお、本発明によるメール中継方法をコンピュータに実行させるためのプログラムとして提供してもよい。
【００３１】
【発明の効果】
本発明によるメール中継装置および方法によれば、動画像が添付された電子メールの送信先である送信先端末装置の機種が判別され、その送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合には、動画像がマルチメディア画像に変換され、マルチメディア画像が動画像に代えて送信先端末装置に送信される。このため、携帯端末装置が動画像を表示できなくても、マルチメディア画像により電子メールに添付されて送信された動画像を擬似的にかつ高画質に表示することができる。
【００３２】
また、請求項２の発明によれば、動画像から複数のフレームがサンプリングされ、複数のフレームが２次元方向に冗長性を考慮した圧縮形式にて圧縮されてマルチメディアフォーマットのマルチメディア画像が生成される。ここで、動画像からサンプリングされたフレームは、上記減色動画像のフォーマットであるｇｉｆやｐｎｇフォーマットのように１次元方向の冗長性を考慮した圧縮形式ではなく、ＪＰＥＧのように２次元方向の冗長性を考慮した圧縮形式にて圧縮されてマルチメディア画像に含められることとなる。また、２次元方向の冗長性を考慮した圧縮方式の方が１次元方向の冗長性を考慮した圧縮方式よりも、画質を維持しつつデータ容量を低減できるものである。したがって、請求項２の発明によれば、減色動画像と比較してデータ容量を低減しつつも、コマ送り表示される画像を高画質に生成することができ、これにより、高画素の表示画面を有する送信先端末装置の表示装置にコマ送り表示される画像を高画質に表示することができる。
【００３３】
また、送信先端末装置が有する表示装置の特性に応じて、表示装置に表示可能なようにマルチメディア画像を生成することにより、生成されたマルチメディア画像を確実に送信先端末装置の表示装置に表示することができる。
【００３４】
また、送信先端末装置が有する表示装置の特性に応じてフレームを拡大縮小し、表示装置が取り扱い可能なデータ容量となるように複数のフレームを２次元方向に冗長性を考慮した圧縮形式にて圧縮し、圧縮された複数のフレームのフォーマットを成形してマルチメディア画像を生成することにより、表示装置の表示画面のサイズおよび表示装置が扱うことが可能なデータ容量を考慮してマルチメディア画像を生成することができ、これにより、生成されたマルチメディア画像をより確実に送信先端末装置の表示装置に表示することができる。
【００３５】
また、フレームが単一の色のみからなる等単純な画像であるか、細かな被写体を含む等により複雑なものであるかによって、フレームの圧縮後の容量は異なるものとなる。また、圧縮されたフレームの展開後の容量も、単純な画像か複雑な画像かによって異なるものとなる。このため、フレームの複雑さによっては生成されたマルチメディア画像のデータ容量（展開前後の双方を含む）が送信先端末装置の表示装置が取り扱い可能なデータ容量とならない場合がある。したがって、生成されるマルチメディア画像がその表示装置が取り扱い可能なデータ容量とならない場合に、フレームの圧縮率の変更および／または複数のフレームからのフレームを間引くことを表示装置が取り扱い可能なデータ容量となるまで繰り返すことにより、送信先端末装置の表示装置が取り扱い可能なデータ容量のマルチメディア画像を生成することができる。
【００３６】
また、送信先端末装置を携帯端末装置とすることにより、携帯端末装置においてマルチメディア画像を表示することができる。
【００３７】
【発明の実施の形態】
以下図面を参照して本発明の実施形態について説明する。図１は本発明の実施形態によるメール中継装置を適用したメール中継サーバを用いたメールシステムの構成を示す概略ブロック図である。図１に示すように、本実施形態によるメールシステムは、メール中継サーバ１を備え、動画像を撮影可能なカメラ付きの携帯電話機、ＰＨＳ、ＰＤＡ等の携帯端末装置３から送信された、動画像が添付された電子メールをメール中継サーバ１において中継して、電子メールの送信先に送信するものである。
【００３８】
図１に示すように、メール中継サーバ１は、メール受信部１１と、動画像分離部１２と、機種判別部１３と、画像蓄積部１４と、動画像変換部１５と、画像添付部１６と、ＵＲＬ添付部１７と、メール送信部１８と、リクエスト受信部１９と、画像読み出し部２０と、画像送信部２１とを備える。
【００３９】
メール受信部１１は、ある携帯端末装置３が送信した動画像を表す動画像データＭ０が添付された電子メールＥ０を受信する。
【００４０】
動画像分離部１２は、電子メールＥ０から動画像データＭ０を分離して、電子メールＥ０の動画像データＭ０以外の情報からなるメール本体Ｅ１を生成する。なお、メール本体Ｅ１はメール本文と送信者のメールアドレス、送信先のメールアドレス等の各種情報を含むヘッダとからなる。動画像分離部１２はメール本体Ｅ１および動画像データＭ０を機種判別部１３に入力する。
【００４１】
機種判別部１３は、メール本体Ｅ１のヘッダに含まれる送信先の携帯端末装置３のメールアドレスに基づいて、メールアドレスと機種とを対応づけたデータベース１３Ａおよび機種とフォーマットとの関係を表すテーブルを参照して、送信先の携帯端末装置３が動画像を表示可能であるか否かを判定する。また、送信先の携帯端末装置３が、画像が添付された電子メールをそのまま受信可能なものであるか否かも判定する。
【００４２】
図２は機種とフォーマットとの関係を表すテーブルを示す図である。図２に示すように、テーブルＴ１は、携帯端末装置３が携帯電話機である場合の機種毎（Ａ００１，Ａ００２，Ｂ００１等）に、動画像の表示の可否、マルチメディア画像の表示の可否、画面サイズ、表示可能色数、表示可能な減色動画像のコマ数、扱うことが可能なデータ容量（単位ＫＢ）が割り当てられている。
【００４３】
ここで、機種判別部１３の判定結果は下記に示すものとなる。
（１）送信先の携帯端末装置３が動画像を表示可能であり、画像が添付された電子メールをそのまま受信可能である。
【００４４】
（２）送信先の携帯端末装置３が動画像を表示可能ではなく、画像が添付された電子メールをそのまま受信可能である。
【００４５】
（３）送信先の携帯端末装置３が動画像を表示可能であり、画像が添付された電子メールを受信可能でない。
【００４６】
（４）送信先の携帯端末装置３が動画像を表示可能ではなく、画像が添付された電子メールをそのまま受信可能でない。
【００４７】
上記（１）のように判定された場合、機種判別部１３は動画像変換部１５に処理を行わせることなく動画像データＭ０を画像添付部１６に入力する。また、動画像分離部１２はメール本体Ｅ１を画像添付部１６に入力する。
【００４８】
上記（２）のように判定された場合、機種判別部１３は動画像データＭ０を動画像変換部１５に入力し、動画像変換部１５に処理を行わせる。また、動画像分離部１２はメール本体Ｅ１を画像添付部１６に入力する。
【００４９】
上記（３）のように判定された場合、機種判別部１３は動画像変換部１５に処理を行わせることなく動画像データＭ０を画像蓄積部１４に入力する。また、動画像分離部１２はメール本体Ｅ１をＵＲＬ添付部１７に入力する。
【００５０】
上記（４）のように判定された場合、機種判別部１３は動画像データＭ０を動画像変換部１５に入力し、動画像変換部１５に処理を行わせる。また、動画像分離部１２はメール本体Ｅ１をＵＲＬ添付部１７に入力する。
【００５１】
画像蓄積部１４は、動画像データＭ０および動画像変換部１５が生成したマルチメディア画像データＦ１または減色動画像データＲ１を蓄積する。
【００５２】
動画像変換部１５は、送信先の携帯端末装置３が動画像を表示できない機種である場合に、さらに送信先の携帯端末装置３がマルチメディア画像を表示可能であるか否かを判定し、マルチメディア画像を表示可能である場合には、動画像データＭ０をマルチメディア画像データＦ１に変換する。また、マルチメディア画像も表示できない場合には、動画像データＭ０を減色動画像データＲ１に変換する。
【００５３】
図３は動画像変換部１５の詳細な構成を示す概略ブロック図である。図３に示すように、動画像変換部１５は、動画像入力部５１と、復号化部５２と、出力フォーマット決定部５３と、マルチメディア画像生成部５４と、減色動画像生成部５５と、生成画像出力部５６とを備える。
【００５４】
動画像入力部５１は、動画像データＭ０の動画像変換部１５への入力を受け付ける。
【００５５】
復号化部５２は、符号化されている動画像データＭ０を復号化して生動画像データＭ０′を生成する。
【００５６】
出力フォーマット決定部５３は、テーブルＴ１を参照して、送信先の携帯端末装置３がマルチメディア画像を表示可能である場合には、生動画像データＭ０′をマルチメディア画像生成部５４に入力する。また、マルチメディア画像も表示できない場合には、生動画像データＭ０′を減色動画像生成部５５に入力する。
【００５７】
マルチメディア画像生成部５４は、生動画像データＭ０′からマルチメディア画像データＦ１を生成する。図４は、マルチメディア画像生成部５４の詳細な構成を示す概略ブロック図である。図４に示すようにマルチメディア画像生成部５４は、フレーム分離部６１と、符号化制御部６２と、フレームサンプリング部６３と、フレーム内符号化部６４と、フォーマット成形部６５とを備える。
【００５８】
フレーム分離部６１は、生動画像データＭ０′をフレーム単位の画像データ（以下フレームデータＦｒ０とする）に分離する。例えば本実施形態においては１フレームは１／６０秒の動画像を表すものである。
【００５９】
符号化制御部６２は、最終的に得られるマルチメディア画像データＦ１のデータ容量が送信先の携帯端末装置３が有する表示装置が扱うことが可能なデータ容量（以下データ容量Ｋとする）以下となるようにフレームサンプリング部６３およびフレーム内符号化部６４を制御する。なお、データ容量Ｋは圧縮されたマルチメディア画像データＦ１を取り扱うことが可能なデータ容量Ｋ１およびこれを展開した場合データを取り扱うことが可能なデータ容量Ｋ２の双方を含む。
【００６０】
フレームサンプリング部６３は、マルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるように、複数のフレームデータＦｒ０からフレームデータをサンプリングしてサンプリングされたフレームデータＦｒ１を生成する。
【００６１】
フレーム内符号化部６４は、マルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるようにサンプリングされたフレームデータＦｒ１のそれぞれを２次元方向の冗長性を考慮した圧縮方式であるＪＰＥＧ形式にて圧縮して圧縮済みのフレームデータＦｒ２を生成する。さらに、フレーム内符号化部６４は、圧縮済みのフレームデータＦｒ２をフォーマット成形部６５においてフォーマットを成形することにより生成されるマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ１以下となるか否かおよび展開後のマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ２以下となるかを判定する。そしてこの判定が肯定された場合には圧縮済みのフレームデータＦｒ２をフォーマット成形部６５に入力する。一方、この判定が否定された場合には、その旨の情報を符号化制御部６２に送信する。符号化制御部６２はこの旨の情報を受信すると、さらにサンプリングするフレーム数を少なくするようフレームサンプリング部６３を再制御するとともに、圧縮率を高くするようフレーム内符号化部６４を再制御する。
【００６２】
すなわち、フレームが単一の色のみからなる等単純な画像であるか、細かな被写体を含む等により複雑なものであるかによって、圧縮済みのフレームデータＦｒ２のデータ容量は異なるものとなる。また、マルチメディア画像データＦ１の展開後のデータ容量も、単純な画像か複雑な画像かによって異なるものとなる。このため、フレームの複雑さによっては生成されたマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下とならない場合がある。したがって、フォーマット成形部６５において生成されるマルチメディア画像データＦ１がデータ容量Ｋ以下とならない場合に、マルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるように、再度サンプリングおよびフレームデータＦｒ１の符号化を行うようにしたものである。
【００６３】
フォーマット成形部６５は、圧縮済みのフレームデータＦｒ２をＦｌａｓｈフォーマットに成形してマルチメディア画像データＦ１を生成する。具体的には、各フレームデータＦｒ２の表示間隔等、各フレームをコマ送り表示させるために必要な情報をフレームデータＦｒ２に付与しつつ各フレームデータＦｒ２を並べることによりフレームデータＦｒ２のフォーマットを成形してマルチメディア画像データＦ１を生成する。なお、マルチメディア画像データＦ１に音声を付与したい場合には、フォーマット成形部６５において音声データがマルチメディア画像データＦ１に含められる。
【００６４】
図３に戻り、減色動画像生成部５５は、送信先の携帯端末装置３が動画像およびマルチメディア画像を表示できない機種である場合に、動画像データＭ０を減色動画像データＲ１に変換する。図５は減色動画像生成部５５の詳細な構成を示す概略ブロック図である。図５に示すように、減色動画像生成部５５は、フレーム分離部７１と、基準フレーム生成部７２と、パレットデータ生成部７３と、フレームサンプリング部７４と、処理部７５と、フレーム合成部７６と、符号化部７７とを備える。
【００６５】
フレーム分離部７１は、マルチメディア画像生成部５４のフレーム分離部６１と同様に、生動画像データＭ０′をフレーム単位の画像データすなわちフレームデータＦｒ０に分離する。
【００６６】
基準フレーム生成部７２は、フレームデータＦｒ０からパレットデータの生成に用いられる基準フレームデータＢ０を生成する。ここで、基準フレームデータＢ０としては、各フレームを時系列順に並べた場合における先頭のフレームデータＦｒ０を用いるものとする。なお、任意のフレームデータを基準フレームデータＢ０としてもよく、全フレームデータＦｒ０または全フレームデータＦｒ０から選択した複数のフレームデータＦｒ０′を１つの画像データとなるように合成し、この合成したフレームデータを基準フレームデータＢ０として生成してもよい。また、全フレームデータＦｒまたは全フレームデータＦｒ０から選択した複数のフレームデータＦｒ０′を平均することにより基準フレームデータＢ０を生成してもよい。なお、複数のフレームデータＦｒ０′としては、後述するフレームサンプリング部７４がサンプリングしたフレームデータを用いてもよい。
【００６７】
パレットデータ生成部７３は、基準フレームデータＢ０から減色処理に必要な色数のパレットデータＰ０を生成する。具体的にはメディアンカット法等を用いてパレットデータＰ０を生成することができるが、これに限定されるものではない。
【００６８】
ここで、メディアンカット法は、基準フレームデータＢ０を構成するＲＧＢの各色データをＲＧＢの３次元空間にプロットし、３次元空間上の色データが存在する範囲におけるメディアン値を求め、これをパレットデータを構成する１つのパレット色とし、さらにメディアン値により空間を２つに分割して、分割された空間におけるメディアン値を求めることを、パレットデータの色数（例えば２５６色）が得られるまで繰り返すことにより、パレットデータを構成するパレット色を求める方法である。
【００６９】
フレームサンプリング部７４は、フレームデータＦｒ０から減色動画像を構成するフレームデータをサンプリングする。具体的には、図２に示すテーブルＴ１を参照して、送信先の携帯端末装置３が表示することが可能な減色動画像のコマ数の情報を取得し、このコマ数に相当する数のフレームデータをサンプリングする。この際、サンプリングするフレームデータは、動画像データＭ０の再生時間をコマ数により等分した時間におけるフレームデータとすればよい。なお、フレームデータをサンプリングするのみならず、フレーム間において補間を行って新たなフレームデータを生成してもよい。
【００７０】
処理部７５は、フレームサンプリング部７４がサンプリングしたフレームデータＦｒ３に対して、パレットデータＰ０を用いて減色処理を施す。減色処理の方法としては、誤差拡散法等を用いることができる。これにより、減色されたフレームデータＦｒ４が生成される。
【００７１】
フレーム合成部７６は、処理部７５が生成したフレームデータＦｒ４を時系列順に並べて１つのファイルとなるように合成することにより、各フレームの画像が連続的に切り替わって再生される減色生動画像データＲ０を生成する。
【００７２】
符号化部７７は、減色生動画像データＲ０を符号化して減色動画像データＲ１を生成する。この際、送信先の携帯端末装置３が取り扱うことが可能なデータ容量Ｋ以下となるように符号化を行う。なお、減色動画像データＲ１のファイルフォーマットとしては、アニメーションｇｉｆやｐｎｇのアニメーションｇｉｆに対応するフォーマットのｍｎｇを用いることができるが、これに限定されるものではない。
【００７３】
図３に戻り、生成画像出力部５６は、マルチメディア画像生成部５４が生成したマルチメディア画像データＦ１または減色動画像生成部５５が生成した減色動画像データＲ１を画像蓄積部１４または画像添付部１６に出力する。
【００７４】
図１に戻り、画像添付部１６は、送信先の携帯端末装置３が画像が添付された電子メールをそのまま受信可能である場合に、メール本体Ｅ１に動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１を添付して画像が添付された電子メールＥ２を生成する。
【００７５】
ＵＲＬ添付部１７は、送信先の携帯端末装置３が画像が添付された電子メールをそのまま受信可能でない場合に、メール本体Ｅ１に動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１の画像蓄積部１４における蓄積場所のＵＲＬを添付してＵＲＬが添付された電子メールＥ３を生成する。
【００７６】
メール送信部１８は、電子メールＥ２または電子メールＥ３を送信先の携帯端末装置３に携帯電話通信網を介して送信する。
【００７７】
リクエスト受信部１９は、ＵＲＬが添付された電子メールＥ３を受信した携帯端末装置３による画像のダウンロードのリクエストを受信する。なお、携帯端末装置３による動画像配信のリクエストには、動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１の蓄積先のＵＲＬが含まれる。
【００７８】
画像読み出し部２０は、リクエスト受信部１９が受信したリクエストに含まれるＵＲＬを参照して、動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１を画像蓄積部１４から読み出す。
【００７９】
画像送信部２１は、画像読み出し部２０が読み出した動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１を、リクエストを行った携帯端末装置３に携帯電話通信網を介して送信する。
【００８０】
次いで、本実施形態において行われる処理について説明する。図６は、本実施形態において行われる処理を示すフローチャートである。ある携帯端末装置３が送信した動画像データＭ０が添付された電子メールＥ０をメール受信部１１が受信すると処理が開始され、動画像分離部１２が電子メールＥ０から動画像データＭ０を分離する（ステップＳ１）。次いで、機種判別部１３がメール本体Ｅ１のヘッダに含まれる送信先携帯端末装置３のメールアドレスに基づいてデータベース１３Ａを参照して、送信先の携帯端末装置３が上記（１）〜（４）のいずれに該当するかを判定する（ステップＳ２）。
【００８１】
（１）に該当する場合、図７に示すフローチャートに進み、機種判別部１３が動画像データＭ０を、動画像分離部１２がメール本体Ｅ１をそれぞれ画像添付部１６に入力する（ステップＳ３）。画像添付部１６は、動画像データＭ０をメール本体Ｅ１に添付して画像が添付された電子メールＥ２を生成し（ステップＳ４）、メール送信部１８が電子メールＥ２を送信先の携帯端末装置３に送信し（ステップＳ５）、処理を終了する。
【００８２】
電子メールＥ２を受信した携帯端末装置３は動画像を表示可能であることから、電子メールＥ２に添付された動画像データＭ０が表示される。
【００８３】
一方、（２）に該当する場合、図８に示すフローチャートに進み、機種判別部１３が動画像データＭ０を動画像変換部１５に入力し、動画像分離部１２がメール本体Ｅ１を画像添付部１６に入力する（ステップＳ６）。動画像変換部１５は、動画像データＭ０に対して動画像変換処理を行う（ステップＳ７）。
【００８４】
図９は動画像変換処理のフローチャートである。まず、動画像入力部５１が動画像データＭ０の入力を受け付け（ステップＳ２１）、復号化部５２が動画像データＭ０を復号化して生動画像データＭ０′を取得する（ステップＳ２２）。続いて、出力フォーマット決定部５３がテーブルＴ１を参照して、送信先の携帯端末装置３がマルチメディア画像を表示可能であるか否かを判定し（ステップＳ２３）、ステップＳ２３が肯定されるとマルチメディア画像生成部５４が生動画像データＭ０′に対してマルチメディア画像生成処理を施す（ステップＳ２４）。
【００８５】
図１０はマルチメディア画像生成処理のフローチャートである。まず、フレーム分離部６１が生動画像データＭ０′をフレーム単位の画像データであるフレームデータＦｒ０に分離し（ステップＳ３１）、符号化制御部６２が最終的に得られるマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるようにフレームサンプリング部６３およびフレーム内符号化部６４を制御する（ステップＳ３２）。
【００８６】
そして、フレームサンプリング部６３が、フレームデータＦｒ０からマルチメディア画像データＦ１を構成するフレームデータＦｒ１をサンプリングする（ステップＳ３３）。さらに、フレーム内符号化部６４がフレームデータＦｒ１を符号化して圧縮済みのフレームデータＦｒ２を生成する（ステップＳ３４）。続いて、フレーム内符号化部６４が、フォーマット成形部６５においてフレームデータＦｒ２から生成されるマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるか否かを判定する（ステップＳ３５）。ステップＳ３５が否定されると、フレーム内符号化部６４はその情報を符号化制御部６２に入力する。符号化制御部６２は最終的に得られるマルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるようにフレームサンプリング部６３およびフレーム内符号化部６４を再制御し（ステップＳ３６）、ステップＳ３３に戻る。フレームサンプリング部６３およびフレーム内符号化部６４は、マルチメディア画像データＦ１のデータ容量がデータ容量Ｋ以下となるまで、ステップＳ３３以降の処理を繰り返す。
【００８７】
ステップＳ３５が肯定されると、フォーマット成形部６５がフレームデータＦｒ２をＦｌａｓｈフォーマットに成形してマルチメディア画像データＦ１を生成し（ステップＳ３７）、マルチメディア画像生成処理を終了する。
【００８８】
図９に戻り、ステップＳ２３が否定されると減色動画像生成部５５が生動画像データＭ０′に対して減色動画像生成処理を施す（ステップＳ２５）。
【００８９】
図１１は、減色動画像生成処理のフローチャートである。まず、フレーム分離部７１が生動画像データＭ０′をフレーム単位の画像データであるフレームデータＦｒ０に分離し（ステップＳ４１）、基準フレーム生成部７２が、フレームデータＦｒ０から基準フレームデータＢ０を生成する（ステップＳ４２）。そして、パレットデータ生成部７３が、基準フレームデータＢ０からパレットデータＰ０を生成する（ステップＳ４３）。
【００９０】
一方、フレームサンプリング部７４が、フレームデータＦｒ０から減色動画像を構成するフレームデータＦｒ３をサンプリングする（ステップＳ４４）。なお、ステップＳ４４の処理を先に行ってもよく、ステップＳ４２，Ｓ４３およびステップＳ４４の処理を並列に行ってもよい。
【００９１】
そして、処理部７５が、フレームサンプリング部７４がサンプリングしたフレームデータＦｒ３に対して、パレットデータＰ０を用いて減色処理を施して減色されたフレームデータＦｒ４を生成する（ステップＳ４５）。次いで、フレーム合成部７６が、処理部７５が生成したフレームデータＦｒ４を時系列順に並べることにより１つのファイルとなるように合成して減色生動画像データＲ０を生成し（ステップＳ４６）、符号化部７７が減色生動画像データＲ０を符号化して減色動画像データＲ１を生成し（ステップＳ４７）、減色処理を終了する。
【００９２】
図８に戻り、画像添付部１６は、マルチメディア画像データＦ１または減色動画像データＲ１をメール本体Ｅ１に添付して画像が添付された電子メールＥ２を生成し（ステップＳ８）、メール送信部１８が電子メールＥ２を送信先の携帯端末装置３に送信し（ステップＳ９）、処理を終了する。
【００９３】
電子メールＥ２を受信した携帯端末装置３は動画像を表示可能ではないため、受信した電子メールＥ２に添付されたマルチメディア画像データＦ１または減色動画像データＲ１に基づいて、動画像データＭ０からサンプリングされたフレームが連続的に切り替わる動きのある画像が表示される。
【００９４】
ここで、マルチメディア画像データＦ１は減色動画像データＲ１と比較して、高画質に画像を再生できることから、マルチメディア画像データＦ１を受信した携帯端末装置３には、動画像データＭ０からサンプリングされたフレームが連続的に切り替わる動きのある高画質の画像が表示される。
【００９５】
（３）に該当する場合、図１２に示すフローチャートに進み、機種判別部１３が動画像データＭ０を画像蓄積部１４に入力し、動画像分離部１２がメール本体Ｅ１をＵＲＬ添付部１７に入力する（ステップＳ１０）。画像蓄積部１４は動画像データＭ０を蓄積する（ステップＳ１１）。ＵＲＬ添付部１７は、動画像データＭ０の蓄積先のＵＲＬをメール本体Ｅ１に添付してＵＲＬが添付された電子メールＥ３を生成し（ステップＳ１２）、メール送信部１８が電子メールＥ３を送信先の携帯端末装置３に送信し（ステップＳ１３）、処理を終了する。
【００９６】
（４）に該当する場合、図１３に示すフローチャートに進み、機種判別部１３が動画像データＭ０を動画像変換部１５に入力し、動画像分離部１２がメール本体Ｅ１をＵＲＬ添付部１７に入力する（ステップＳ１４）。動画像変換部１５は、動画像データＭ０に対して動画像変換処理を行う（ステップＳ１５）。画像蓄積部１４は動画像変換処理により生成されたマルチメディア画像データＦ１または減色動画像データＲ１を蓄積する（ステップＳ１６）。ＵＲＬ添付部１７は、マルチメディア画像データＦ１または減色動画像データＲ１の蓄積先のＵＲＬをメール本体Ｅ１に添付してＵＲＬが添付された電子メールＥ３を生成し（ステップＳ１７）、メール送信部１８が電子メールＥ３を送信先の携帯端末装置３に送信し（ステップＳ１８）、処理を終了する。
【００９７】
上記（３）および（４）の場合において、電子メールＥ３を受信した携帯端末装置３は、動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１のダウンロードのリクエストをメール中継サーバ１に対して行う。
【００９８】
図１４はリクエストが行われた際にメール中継サーバ１において行われる処理を示すフローチャートである。リクエスト受信部１９がダウンロードのリクエストを受信すると処理が開始され、画像読み出し部２０がリクエストに含まれるＵＲＬを参照して画像蓄積部１４から動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１を読み出す（ステップＳ５１）。そして、画像送信部２１が動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１をリクエストを行った携帯端末装置３に送信し（ステップＳ５２）、処理を終了する。
【００９９】
携帯端末装置３においては、動画像データＭ０、マルチメディア画像データＦ１または減色動画像データＲ１が受信される。ここで、携帯端末装置３が動画像を表示可能なものである場合には動画像データＭ０が送信され、動画像が表示される。一方、携帯端末装置３が動画像を表示できないがマルチメディア画像を表示可能なものである場合にはマルチメディア画像データＦ１が送信され、動画像データＭ０からサンプリングされたフレームが連続的に切り替わる動きのある高画質の画像が表示される。
【０１００】
また、携帯端末装置３が動画像およびマルチメディア画像を表示できない場合には減色動画像データＲ１が送信され、減色動画像データＲ１に基づいて、動画像データＭ０からサンプリングされたフレームが連続的に切り替わる動きのある画像が表示される。
【０１０１】
このように、本実施形態においては、動画像が添付された電子メールＥ０の送信先の携帯端末装置３の機種を判別し、その機種が動画像を表示できないものである場合には、電子メールＥ０に添付された動画像データＭ０をマルチメディア画像データＦ１または減色動画像データＲ１に変換して送信するようにしたため、携帯端末装置３が動画像を表示できなくても、マルチメディア画像データＦ１または減色動画像データＲ１により動画像を擬似的に表示することができる。
【０１０２】
とくに、マルチメディア画像データＦ１は、減色動画像データＲ１とは異なり、ＪＰＥＧのように２次元方向の冗長性を考慮した圧縮形式にて圧縮されたフレームデータＦｒ２が含められるため、データ容量を低減しつつも減色動画像データＲ１と比較して、コマ送り表示される画像を高画質に生成することができる。したがって、携帯端末装置３が動画像を表示できず、かつ取り扱うことが可能なデータ容量に制限があっても、マルチメディア画像データＦ１により、動画像を擬似的にかつ高画質に表示することができ、これにより、携帯端末装置３が高画素の表示画面を有する場合にもコマ送り表示される画像を高画質に表示できる。
【０１０３】
また、送信先の携帯端末装置３の特性に応じて動画像データＭ０からマルチメディア画像データＦ１を生成しているため、生成されたマルチメディア画像データＦ１を送信先の携帯端末装置３に確実に表示することができる。
【０１０４】
また、生成されるマルチメディア画像データＦ１がデータ容量Ｋ以下とならない場合には、フレームデータＦｒ１の再度のサンプリングおよびフレームデータＦｒ２の再度の符号化を、生成されるマルチメディア画像データＦ１がデータ容量Ｋ以下となるまで繰り返すようにしたため、携帯端末装置３がの表示装置が取り扱うことが可能なデータ容量Ｋに適合する容量のマルチメディア画像データＦ１を生成することができる。
【０１０５】
また、送信先の携帯端末装置３が動画像もマルチメディア画像も表示できない場合には、動画像データＭ０を減色動画像データＲ１に変換して送信するようにしたため、携帯端末装置３が動画像およびマルチメディア画像を表示できなくても、画質は落ちるものの減色動画像データＲ１により動画像を擬似的に表示することができる。
【０１０６】
また、動画像データＭ０から減色動画像データＲ１を生成する際に、１つのパレットデータＰ０のみを生成しているため、上記特許文献１に記載された方法のように、数フレーム毎にパレットデータを生成する必要がなくなり、これにより、装置の規模を大きくすることなく、動画像データＭ０から減色動画像データＲ１を得ることができる。
【０１０７】
なお、上記実施形態においては、マルチメディア画像としてＦｌａｓｈフォーマットを有するものを用いているが、複数のフレームをコマ送り表示させつつインタラクティブに表示可能なフォーマットであればこれに限定されるものではない。
【０１０８】
また、上記実施形態において、マルチメディア画像データＦ１に動画像データＭ０に含まれる音声を含めることも可能である。
【０１０９】
また、上記実施形態においては、１つのパレットデータＰ０のみを生成して動画像データＭ０から減色動画像データＲ１を生成しているが、上記特許文献１に記載された方法のように、数フレーム毎にパレットデータを生成して動画像データＭ０から減色動画像データＲ１を生成してもよい。また、これらの方法に限らず、動画像データＭ０から減色動画像データＲ１を生成できれば任意の方法を適用することができる。
【０１１０】
また、上記実施形態において、動画像分離部１２において動画像データＭ０が添付された電子メールＥ０を一時的に保管しておき、機種判別部１３が上記（１）のように判定した場合には、動画像データＭ０が添付された電子メールＥ０をそのままメール送信部１８から送信先の携帯端末装置３に送信してもよい。
【０１１１】
なお、上記実施形態において、テーブルＴ１を参照して、送信先の携帯端末装置３の表示画面サイズおよび表示可能色数に適合するように動画像データＭ０のフォーマットを変換してもよい。この場合、マルチメディア画像データＦ１および減色動画像データＲ１は、フォーマット変換済みの動画像データＭ０から生成される。
【０１１２】
また、上記実施形態においては、メール中継サーバ１を、送信先の携帯端末装置３が、画像が添付された電子メールをそのまま受信可能であるか否かに拘わらず電子メールを中継するものとしているが、送信先の携帯端末装置３が画像が添付された電子メールをそのまま受信可能である場合に特化したものとなるようにメール中継サーバ１を構成することも可能である。このように構成したメール中継サーバ（１Ａとする）を図１５に示す。図１５に示すように、メール中継サーバ１Ａは、図１に示すメール中継サーバ１と比較して、画像蓄積部１４、ＵＲＬ添付部１７、リクエスト受信部１９、画像読み出し部２０および画像送信部２１が除かれたものとなる。
【０１１３】
逆に、送信先の携帯端末装置３が画像が添付された電子メールをそのまま受信できない場合に特化したものとなるようにメール中継サーバ１を構成することも可能である。このように構成したメール中継サーバ（１Ｂとする）を図１６に示す。図１６に示すように、メール中継サーバ１Ｂは、図１に示すメール中継サーバ１と比較して、画像添付部１６が除かれたものとなる。
【図面の簡単な説明】
【図１】本発明の実施形態によるメール中継装置を適用したメール中継サーバを用いたメールシステムの構成を示す概略ブロック図
【図２】機種とフォーマットとの関係を表すテーブルを示す図
【図３】動画像変換部の詳細な構成を示す概略ブロック図
【図４】マルチメディア画像生成部の詳細な構成を示す概略ブロック図
【図５】減色動画像生成部の詳細な構成を示す概略ブロック図
【図６】本実施形態において行われる処理を示すフローチャート（その１）
【図７】本実施形態において行われる処理を示すフローチャート（その２）
【図８】本実施形態において行われる処理を示すフローチャート（その３）
【図９】動画像変換処理のフローチャート
【図１０】マルチメディア画像生成処理のフローチャート
【図１１】減色動画像生成処理のフローチャート
【図１２】本実施形態において行われる処理を示すフローチャート（その４）
【図１３】本実施形態において行われる処理を示すフローチャート（その５）
【図１４】リクエストが行われた際にメール中継サーバにおいて行われる処理を示すフローチャート
【図１５】本発明の他の実施形態によるメール中継装置を適用したメール中継サーバを用いたメールシステムの構成を示す概略ブロック図
【図１６】本発明の他の実施形態によるメール中継装置を適用したメール中継サーバを用いたメールシステムの構成を示す概略ブロック図
【符号の説明】
１，１Ａ，１Ｂ メール中継サーバ
３ 携帯端末装置
１１ メール受信部
１２ 動画像分離部
１３ 機種判別部
１４ 画像蓄積部
１５ 動画像変換部
１６ 画像添付部
１７ ＵＲＬ添付部
１８ メール送信部
１９ リクエスト受信部
２０ 画像読み出し部
２１ 画像送信部
５１ 動画像入力部
５２ 復号化部
５３ 出力フォーマット決定部
５４ マルチメディア画像生成部
５５ 減色動画像生成部
５６ 生成画像出力部
６１，７１ フレーム分離部
６２ 符号化制御部
６３，７４ フレームサンプリング部
６４ フレーム内符号化部
６５ フォーマット成形部
７２ 基準フレーム生成部
７３ パレットデータ生成部
７５ 処理部
７６ フレーム合成部
７７ 符号化部
Claims (8)
- 動画像が添付された電子メールを該電子メールの送信先である送信先端末装置に送信するメール中継装置において、
前記送信先端末装置の機種を判別する機種判別手段と、
該送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合に、前記添付された動画像を該マルチメディア画像に変換する動画像変換手段と、
前記送信先端末装置の機種が、前記動画像および前記マルチメディア画像を表示できないが減色動画像を表示できる場合に、前記添付された動画像を構成する複数フレームの全部または一部のフレームから基準フレームを生成する基準フレーム生成手段と、該基準フレームから所定数の色の１つのパレットデータを生成するパレットデータ生成手段と、前記複数のフレームから前記減色動画像の生成に使用する複数の減色動画像生成用フレームをサンプリングするフレームサンプリング手段と、前記減色動画像生成用フレームを前記パレットデータにより減色動画像フレームに変換する減色処理手段と、該減色動画像フレームを合成して前記減色動画像を生成するフレーム合成手段とを有する減色動画像変換手段とを備え、
前記マルチメディア画像または前記減色動画像を前記動画像に代えて前記送信先端末装置に送信することを特徴とするメール中継装置。 - 前記動画像変換手段が、前記動画像から複数のフレームをサンプリングするサンプリング手段と、
該複数のフレームを２次元方向に冗長性を考慮した圧縮形式にて圧縮して前記マルチメディア画像を生成するマルチメディア画像生成手段とを備えたことを特徴とする請求項１記載のメール中継装置。 - 前記マルチメディア画像生成手段は、前記送信先端末装置が有する表示装置の特性に応じて、該表示装置に表示可能なように前記マルチメディア画像を生成する手段であることを特徴とする請求項２記載のメール中継装置。
- 前記マルチメディア画像生成手段は、前記表示装置の特性に応じて前記複数のフレームを拡大縮小するサイズ変更手段と、
前記表示装置が取り扱い可能なデータ容量となるように、前記複数のフレームを前記２次元方向に冗長性を考慮した圧縮形式にて圧縮するフレーム圧縮手段と、
該圧縮された複数のフレームのフォーマットを成形して前記マルチメディア画像を生成するフォーマット成形手段とを備えてなることを特徴とする請求項３記載のメール中継装置。 - 前記フレーム圧縮手段は、前記生成されるマルチメディア画像が前記表示装置が取り扱い可能なデータ容量とならない場合に、前記フレームの圧縮率の変更および／または前記複数のフレームからのフレームの間引きを、前記マルチメディア画像が前記データ容量となるまで繰り返す手段であることを特徴とする請求項４記載のメール中継装置。
- 前記送信先端末装置が携帯端末装置であることを特徴とする請求項１から５のいずれか１項記載のメール中継装置。
- 動画像が添付された電子メールを該電子メールの送信先である送信先端末装置に送信するメール中継方法において、
前記送信先端末装置の機種を判別し、
該送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合に、前記添付された動画像を該マルチメディア画像に変換し、
前記送信先端末装置の機種が、前記動画像および前記マルチメディア画像を表示できないが減色動画像を表示できる場合に、前記添付された動画像を構成する複数フレームの全部または一部のフレームから基準フレームを生成し、
該基準フレームから所定数の色の１つのパレットデータを生成し、
前記複数のフレームから前記減色動画像の生成に使用する複数の減色動画像生成用フレームをサンプリングし、
前記減色動画像生成用フレームを前記パレットデータにより減色動画像フレームに変換し、
該減色動画像フレームを合成して前記減色動画像を生成し、
前記マルチメディア画像または前記減色動画像を前記動画像に代えて前記送信先端末装置に送信することを特徴とするメール中継方法。 - 動画像が添付された電子メールを該電子メールの送信先である送信先端末装置に送信するメール中継方法をコンピュータに実行させるためのプログラムにおいて、
前記送信先端末装置の機種を判別する手順と、
該送信先端末装置の機種が、動画像を表示できないがマルチメディアフォーマットのマルチメディア画像を表示できる場合に、前記添付された動画像を該マルチメディア画像に変換する手順と、
前記送信先端末装置の機種が、前記動画像および前記マルチメディア画像を表示できないが減色動画像を表示できる場合に、前記添付された動画像を構成する複数フレームの全部または一部のフレームから基準フレームを生成する手順と、
該基準フレームから所定数の色の１つのパレットデータを生成する手順と、
前記複数のフレームから前記減色動画像の生成に使用する複数の減色動画像生成用フレームをサンプリングする手順と、
前記減色動画像生成用フレームを前記パレットデータにより減色動画像フレームに変換する手順と、
該減色動画像フレームを合成して前記減色動画像を生成する手順と、
前記マルチメディア画像または前記減色動画像を前記動画像に代えて前記送信先端末装置に送信する手順とを有することを特徴とするプログラム。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003152709A JP4170150B2 (ja) | 2003-05-29 | 2003-05-29 | メール中継装置および方法並びにプログラム |
| US10/828,201 US7647428B2 (en) | 2003-05-27 | 2004-04-21 | Method and apparatus for email relay of moving image conversion and transmission, and programs therefor |
| CNB2004100427817A CN1285059C (zh) | 2003-05-27 | 2004-05-27 | 活动图像转换方法和设备、活动图像传输方法和设备、程序 |
| KR1020040037878A KR100632793B1 (ko) | 2003-05-27 | 2004-05-27 | 동화상을 변환하는 방법 및 장치, 동화상을 전송하는 방법 및 장치, 그리고 이들을 위한 프로그램이 기록된 기록매체 |
| EP04253150A EP1496656A1 (en) | 2003-05-27 | 2004-05-27 | Method and apparatus for moving image conversion, method and apparatus for moving image transmission, and programs therefor |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003152709A JP4170150B2 (ja) | 2003-05-29 | 2003-05-29 | メール中継装置および方法並びにプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004356999A JP2004356999A (ja) | 2004-12-16 |
| JP4170150B2 true JP4170150B2 (ja) | 2008-10-22 |
Family
ID=34047854
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003152709A Expired - Lifetime JP4170150B2 (ja) | 2003-05-27 | 2003-05-29 | メール中継装置および方法並びにプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4170150B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4613094B2 (ja) * | 2005-05-13 | 2011-01-12 | パナソニック株式会社 | 通信端末及び通信方法 |
| JP2008071324A (ja) * | 2006-09-11 | 2008-03-27 | Wisdom Web Co Ltd | 計算資源や通信資源が限定された情報端末用コンテンツ配信システム |
-
2003
- 2003-05-29 JP JP2003152709A patent/JP4170150B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004356999A (ja) | 2004-12-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7647428B2 (en) | Method and apparatus for email relay of moving image conversion and transmission, and programs therefor | |
| KR100597458B1 (ko) | 동화상 변환장치 및 방법, 동화상 전송장치 및 방법, 및 그 프로그램이 기록된 기록매체 | |
| KR100501173B1 (ko) | 이동 통신 단말기에서 고해상도 화상을 디스플레이하기위한 방법과 이를 위한 이동 통신 단말기 및 화상 포맷변환 시스템 | |
| KR101167432B1 (ko) | 통신 방법 및 통신 시스템 | |
| US20060039478A1 (en) | Image decoding and reducing apparatus and method | |
| JP2004164098A (ja) | ウェブカメラ | |
| US20050185000A1 (en) | Representative color selection apparatus and method, reduced color image production apparatus and method, and programs | |
| KR20220149574A (ko) | 3차원 비디오의 처리 방법, 장치, 판독 가능 저장매체 및 전자기기 | |
| JP4444623B2 (ja) | 動画像変換装置および方法、動画像配信装置、メール中継装置並びにプログラム | |
| JP2004356998A (ja) | 動画像変換装置および方法、動画像配信装置および方法並びにプログラム | |
| JP5135147B2 (ja) | 動画ファイル送信サーバおよびその動作制御方法 | |
| JP4170150B2 (ja) | メール中継装置および方法並びにプログラム | |
| JP4970912B2 (ja) | 動画分割サーバおよびその制御方法 | |
| EP1263205A1 (en) | Method for providing a terminal with coded still image signals, communications system, network element and module | |
| JP4248934B2 (ja) | メール中継装置および方法並びにプログラム | |
| JP4723796B2 (ja) | 動画像変換装置および方法、動画像配信装置および方法並びにプログラム | |
| KR100655199B1 (ko) | 동화상 서버 및 그 제어방법 | |
| JP2005136567A (ja) | パレットデータ生成装置および方法、画像生成装置および方法、動画像配信装置、メール中継装置並びにプログラム | |
| JP2005045297A (ja) | カメラシステムおよびカメラ装置 | |
| JP4275629B2 (ja) | データ送受信装置、画像処理装置、及び、画像処理方法 | |
| JP2008136057A (ja) | 動画ファイル生成装置およびその制御方法 | |
| JP4112502B2 (ja) | 画像生成装置および方法、画像配信装置、メール中継装置並びにプログラム | |
| JP2003030082A (ja) | 情報処理装置及びデータ通信システム | |
| JP5033564B2 (ja) | 動画データ変換／送信装置およびその動作制御方法 | |
| JP2006067146A (ja) | 画像配信サーバおよび画像添付メール中継サーバならびにそれらの動作制御方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060303 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060303 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061212 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071130 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071211 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080208 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080805 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080806 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110815 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4170150 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110815 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120815 Year of fee payment: 4 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120815 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130815 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: R3D02 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |