JP2003242480A - 画像処理方法およびその方法を利用可能なサーバ - Google Patents

Abstract

(57)【要約】 【課題】 携帯電話ではモーフィングのような複雑な画
像処理ができない。 【解決手段】 ユーザが携帯電話に搭載されたＣＣＤカ
メラで撮影した顔写真の画像データは、電子メールの形
でサーバ１８に送信され、ユーザデータベース５２に登
録される。画像データベース５４には既存の画像、たと
えば歴史上の人物の肖像画のデータがあらかじめ格納さ
れている。モーフィング処理部５６はユーザデータベー
ス５２からユーザの登録画像を読み出し、画像データベ
ース５４からユーザの指定する既存画像を読み出し、２
枚の画像のマッチングをとって、中間画像を生成する。
生成された中間画像は、ユーザの携帯電話に送信されて
画面に表示される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像処理技術に関
する。本発明はとくに、２枚の画像のマッチングにより
中間画像を生成する画像処理方法およびその方法を利用
可能なサーバに関する。

【０００２】

【従来の技術】携帯電話が普及し、ビジネス用途以外
に、友人とのコミュニケーションや家族との連絡に頻繁
に使われるようになってきた。携帯電話は通常の通話の
用途以外に、電子メールのやりとりをしたり、インター
ネットにアクセスして画像や音声を含むコンテンツをダ
ウンロードして利用するなど、データ通信機能を用いた
各種サービスにも利用されている。

【０００３】最近ではＣＣＤカメラを搭載した携帯電話
も安価で販売されるようになり、携帯電話を用いて顔写
真や風景などの写真をとり、電子メールにその画像デー
タを添付してやりとりすることも行われている。画像デ
ータを扱う電子機器として、デジタルカメラやパーソナ
ルコンピュータにならんで、携帯電話やＰＤＡなどの携
帯端末がこれからは重要な位置を占めるようになると思
われる。

【０００４】画像データを用いた一つのアプリケーショ
ンとして、２枚の画像のマッチングをとって、一方の画
像を徐々に変化させて他方の画像に変形するモーフィン
グという技法があり、モーフィングは２枚の画像間の中
間画像を生成したり、２枚の画像の間を連続的に変化す
る中間画像により動画を生成するために用いられてい
る。

【０００５】

【発明が解決しようとする課題】ユーザは遊び感覚で携
帯電話に搭載されたＣＣＤカメラで画像の撮影をするの
が普通であり、ユーザの興味を引く画像アプリケーショ
ンがないと、撮影画像の用途が見いだせず、カメラ付き
携帯電話が普及しなくなる可能性もある。携帯電話に付
加価値をつけて販売の促進を図ろうとするメーカーにと
っては撮影画像を利用した面白味のあるアプリケーショ
ンを提供することが販売戦略上、重要な課題となると思
われる。その意味でモーフィングは遊び感覚で利用で
き、非常に魅力的である。しかしながら、パーソナルコ
ンピュータとは違って、携帯電話は処理性能とメモリ容
量の面で限界があり、携帯電話でモーフィングのような
複雑な画像処理を行うことは難しい。

【０００６】本発明はこうした状況に鑑みてなされたも
のであり、その目的は、画像のマッチングをとって中間
画像を生成することのできる画像処理技術の提供にあ
る。

【０００７】

【課題を解決するための手段】本発明のある態様は画像
処理方法に関する。この方法は、サーバの画像データベ
ースに格納された既存の画像と、ユーザ端末に入力され
た肖像画とのマッチングをとり、ユーザのカスタマイズ
の要請に応じた中間画像を生成して、ユーザ端末に提供
する。

【０００８】「ユーザ端末」は携帯電話もしくはＰＤＡ
やノートパソコンのような携帯端末を含む。ユーザが入
力する「肖像画」は人物の上半身または顔の写真、似顔
絵などを含む。一方、サーバの画像データベースにあら
かじめ格納された既存の画像は、歴史上の人物の肖像画
や写真の他、動物の画像や、アニメーションやＣＧなど
の仮想的な人物や動物などの画像を含む。

【０００９】ユーザ端末に入力された肖像画がサーバに
送信され、サーバにおいてユーザの肖像画とサーバの画
像データベースに格納された既存の画像との間のマッチ
ングがとられ、中間画像が生成され、生成された中間画
像がユーザ端末に送信されてもよい。またユーザ端末が
画像データベースに格納された既存の画像をサーバから
ダウンロードし、ユーザ端末側でユーザの肖像画と既存
の画像とのマッチングがとられて中間画像が生成されて
もよい。

【００１０】「カスタマイズ」とは、２枚の画像のマッ
チングにより中間画像を生成する際に、通常のマッチン
グにより生成される中間画像の変形を指示するものであ
る。中間画像の変形とは、たとえば２枚の画像が男女の
肖像画である場合に、その男女の赤ちゃんの画像を中間
画像として生成するために、中間画像に現れる顔の輪郭
を丸くする、左右の目の間隔を広げるなど、子どもらし
く見えるように変形することである。また２枚の画像が
同一人物の異なる年齢の肖像画である場合に、特定の年
齢の肖像を中間画像として生成されるように２枚の画像
の混合比率を調整したり、２枚の画像を内挿（interpol
ation）する代わりに外挿（extrapolation）するなどの
変形処理をいう。たとえば、１０代の肖像画と２０代の
肖像画を外挿して、４０代の肖像画を中間画像として生
成する。またあらかじめ髪型や服装などのパターンを用
意しておき、自分の将来の肖像に髪型や服装のパターン
を合成してもよい。このような「福笑い」的な使い方
は、子どもが携帯電話やＰＤＡなどの電子機器に慣れる
ための教育的な目的で用いることができる。

【００１１】本発明の別の態様も画像処理方法に関す
る。この方法は、ユーザ端末に入力された肖像画が電子
メールの形態でサーバに送信される工程と、サーバ側で
受信された電子メールのメールアドレスからユーザＩＤ
を判定し、前記電子メールから前記肖像画を抽出して、
ユーザＩＤに対応づけてユーザデータベースに登録する
工程と、前記ユーザデータベースに登録された２枚の肖
像画の指定をユーザから受けつけ、それらの画像のマッ
チングをとって、ユーザのカスタマイズの要請に応じた
中間画像を生成する工程と、生成された中間画像をユー
ザ端末へ送信する工程とを含む。

【００１２】ユーザ端末に入力される画像はユーザ端末
に搭載または接続されたＣＣＤカメラにより撮影された
ものであってもよい。入力された画像は電子メールでサ
ーバに送信されるが、ユーザが画像の登録を指示する操
作を行うと、ユーザ端末に実装された電子メール機能が
自動起動され、内部的に画像を添付した電子メールが生
成されてサーバに自動送信されてもよい。ユーザが手動
で電子メール機能を起動して画像を添付して送信する操
作をする必要がなく、無意識のうちに画像が電子メール
によって送信がなされ、サーバに登録される。また電子
メールのメールアドレスからユーザＩＤが判定されるの
で、画像登録のためにサーバにユーザＩＤとパスワード
を用いてログインするなど面倒な手続きをする必要がな
い。

【００１３】本発明のさらに別の態様はサーバに関す
る。このサーバは、ユーザが入力する画像が添付された
電子メールをユーザ端末から受信する受信部と、前記受
信された電子メールのメールアドレスからユーザＩＤを
判定し、前記電子メールに添付された前記画像に前記ユ
ーザＩＤを関連づけてユーザデータベースに登録する登
録部と、前記ユーザデータベースに登録された２枚の前
記画像の指定をユーザから受けつけ、前記２枚の前記画
像のマッチングをとって、中間画像を生成するモーフィ
ング処理部と、前記生成された中間画像を前記ユーザ端
末に送信する送信部とを含む。

【００１４】本発明のさらに別の態様もサーバに関す
る。このサーバは、既存の画像を格納した画像データベ
ースと、ユーザが入力する画像が添付された電子メール
をユーザ端末から受信する受信部と、前記受信された電
子メールのメールアドレスからユーザＩＤを判定し、前
記電子メールに添付された前記画像に前記ユーザＩＤを
関連づけてユーザデータベースに登録する登録部と、前
記画像データベースに格納された１枚の画像の指定と、
前記ユーザデータベースに登録された１枚の画像の指定
とをユーザから受けつけ、２枚の前記画像のマッチング
をとって、中間画像を生成するモーフィング処理部と、
前記生成された中間画像を前記ユーザ端末に送信する送
信部とを含む。

【００１５】上記のいずれの態様のサーバにおいても、
前記モーフィング処理部は、ユーザからカスタマイズの
要請を受けつけ、前記カスタマイズの要請に応じた前記
中間画像を生成してもよい。前記カスタマイズの要請
は、前記２枚の画像の混合の比率を指定する内容であっ
てもよい。前記モーフィング処理部は、前記２枚の画像
の間に複数の中間画像を挿入した動画を生成してもよ
い。前記中間画像に現れた肖像をもとに発声音を推定し
て音声を合成する音声合成部をさらに含み、前記送信部
は前記中間画像とともに前記合成された音声を前記ユー
ザ端末に送信してもよい。

【００１６】本発明のさらに別の態様はコンピュータプ
ログラムに関する。このプログラムは、撮影された画像
を表示する機能と、前記画像の中心位置を調整する簡易
編集機能と、前記画像のサーバへの登録を指示するユー
ザの操作を契機として電子メール機能を起動して、前記
画像が添付された電子メールを内部的に生成し、前記サ
ーバへ自動送信する機能とをコンピュータに実行させ
る。

【００１７】なお、以上の構成要素の任意の組合せ、本
発明を方法、システム、コンピュータプログラム、記録
媒体などと表現したものもまた、本発明の態様として有
効である。

【００１８】

【発明の実施の形態】図１は、実施の形態に係る画像処
理システムの構成を示す。携帯電話１０は無線通信によ
り基地局１２と通信する。基地局１２はゲートウエイ１
４を介してインターネット１６に接続しており、携帯電
話１０はパケット通信を行い、サーバ１８にアクセスす
ることができる。

【００１９】図２は、携帯電話１０の構成図である。こ
こでは携帯電話１０の通話機能に係る構成を略し、デー
タ通信機能に係る構成を主に示す。撮影部２２は携帯電
話１０に搭載されたＣＣＤカメラ２０により撮影された
画像を取り込み、メモリ２４に記録する。入力部３０
は、テンキーなどによりユーザが入力する指示内容を受
け取り、メモリ２４に保持する。メール部２６は、ユー
ザから指示のあった場合に、撮影された画像をメモリ２
４から読み取り、電子メールを用いてサーバ１８宛に送
信する。通信部４２は基地局１２と無線によるデータ通
信を行う。ブラウザ部２８は、サーバ１８からテキスト
データの他、画像データや音声データを含むＨＴＭＬで
記述されたデータを受け取る。

【００２０】表示部３４は、メモリ２４に記録された画
像を読み出してＬＣＤ３２に表示させる。また表示部３
４はブラウザ部２８が取得したＨＴＭＬデータをＬＣＤ
３２に表示させる。音声処理部３８は、マイク３６に入
力されるユーザの音声を取得する。取得された音声デー
タはブラウザ部２８によりサーバ１８へ送信される。ま
た音声処理部３８は、ブラウザ部２８がサーバ１８から
取得した音声データを処理してスピーカ４０に出力す
る。

【００２１】図３は、サーバ１８の構成図である。この
構成は、ハードウエア的には、コンピュータのＣＰＵを
はじめとする素子で実現でき、ソフトウエア的には画像
処理機能のあるプログラムなどによって実現されるが、
ここではそれらの連携によって実現される機能ブロック
を描いている。したがって、これらの機能ブロックはハ
ードウエア、ソフトウエアの組合せによっていろいろな
形で実現できる。

【００２２】通信部６０は、インターネット１６を介し
て携帯電話１０との間のデータ通信を行う。登録部５０
は、携帯電話１０からユーザＩＤとメールアドレスのデ
ータを受け取り、ユーザＩＤとメールアドレスとを関連
づけた登録データをユーザデータベース５２に格納す
る。また登録部５０は携帯電話１０から電子メールの形
で送信される画像データを受け取り、電子メールのメー
ルアドレスから対応するユーザＩＤを判定し、ユーザＩ
Ｄに関連づけて画像データをユーザデータベース５２に
登録する。ユーザデータベース５２に登録される画像デ
ータは顔写真などの肖像画である。

【００２３】画像データベース５４には既存の画像デー
タがあらかじめ格納されている。既存の画像データは、
歴史上の人物の肖像画や動物などの画像である。モーフ
ィング処理部５６は、ユーザからの指示にもとづいてユ
ーザデータベース５２からユーザの登録した２枚の画像
のマッチングをとり、中間画像を生成する。またモーフ
ィング処理部５６は、ユーザからの指示にもとづいてユ
ーザデータベース５２からユーザの登録した画像を１枚
選択し、画像データベース５４から既存の画像を１枚選
択し、これら２枚の画像のマッチングをとって中間画像
を生成することもできる。モーフィング処理部５６はさ
らにユーザからカスタマイズの要請を受け取り、生成さ
れる中間画像を適宜変形することができる。このカスタ
マイズは、たとえば、中間画像に現れる肖像の髪型や輪
郭の変形、若返りや老化、目を大きくするなど美顔や好
みの顔への変形、光沢やぼかしなどのフィルター処理な
どである。このようにして２枚の画像を合成して得られ
る中間画像はＨＴＭＬのデータ形式で通信部６０を介し
て携帯電話１０へ送信される。

【００２４】音声合成部５８は、モーフィング処理部５
６により生成された中間画像に現れる顔の形や骨格など
から声を推定し、音声データを合成する。合成された音
声データは中間画像とともにＨＴＭＬ形式で携帯電話１
０へ送信される。音声データの合成にあたり、ユーザデ
ータベース５２に登録されたユーザの音声パターンが用
いられてもよく、音声の周波数分析により、ユーザの声
を合成音声に反映することができる。

【００２５】図４は、ユーザデータベース５２に格納さ
れるユーザの登録データを示す。この登録データは、キ
ャリア発行のユーザＩＤ７０と、ユーザのメールアドレ
ス７２と、デフォルト画像７４と、複数の登録画像７６
と、ユーザ音声パターン７８とを含む。ユーザＩＤ７０
はユーザがキャリアに課金登録するときに与えられるＩ
Ｄである。メールアドレス７２は登録部５０によるユー
ザ登録の際に与えられる。デフォルト画像７４もユーザ
登録の際にデフォルトで登録する画像として指定され
る。複数の登録画像７６は、ユーザが携帯電話１０で撮
影した画像が登録されたものである。ユーザ音声パター
ン７８は、ユーザが携帯電話１０に入力する音声データ
であり、合成音声の生成の際に利用される。

【００２６】以上の構成の画像処理システムによる画像
処理の手順を述べる。携帯電話１０には、図８に示すメ
ニュー選択画面が表示される。遊び方８０、ユーザ登録
８２、画像登録８４、画像選択８６、登録画像管理８
８、課金登録９０、および課金登録解除９２の各メニュ
ーがあるが、画像処理の利用に先立ち、ユーザはまずキ
ャリアでの課金登録、サーバ１８でのユーザ登録を行う
必要がある。

【００２７】図５は、課金登録とユーザ登録の手順を示
すシーケンス図である。図８の画面でユーザが課金登録
９０を選択すると、ユーザＩＤの入力を要求される（Ｓ
１０）。ユーザがキャリアから発行されたユーザＩＤを
入力すると、サーバ１８へそのデータが送信される（Ｓ
１２）。サーバ１８において課金登録処理がなされ（Ｓ
１４）、登録完了通知が携帯電話１０へ送信される（Ｓ
１６）。課金登録が完了すると、図８に示すメニュー選
択画面における他のメニューの利用が許可される。

【００２８】次にユーザは、図８の画面においてユーザ
登録８２を選択する（Ｓ１８）。このとき携帯電話１０
には、図９（ａ）のユーザ情報入力画面が表示され、メ
ールアドレスの入力フィールド９４と、確認のため再度
メールアドレスを入力するフィールド９６と、デフォル
トで登録する画像を選択するフィールド９８が表示され
る。デフォルト画像を選択するフィールド９８はプルダ
ウンメニューになっており、あらかじめ定められたデフ
ォルト画像をユーザが選択する。この例では「動物占い
の動物」が選択されている。「送信」ボタン１００を押
すと、図９（ｂ）の入力情報確認画面に切り替わる。こ
の画面でユーザが入力したメールアドレス１０４と、選
択したデフォルト画像１０６をユーザに確認させる。
「確認」ボタン１０８を押すと、ユーザＩＤ、メールア
ドレスおよびデフォルト画像の情報がサーバ１８へ送信
される（Ｓ２０）。

【００２９】サーバ１８では、登録部５０により受信し
たユーザＩＤとメールアドレスとが関連づけられ、図４
に示したユーザ登録データが作成され、ユーザの登録処
理が行われる（Ｓ２２）。サーバ１８から携帯電話１０
へ登録完了通知が送信され（Ｓ２４）、携帯電話１０に
は図９（ｃ）の登録完了画面が表示される。なお、図９
（ａ）〜（ｃ）において「戻る」ボタン１０２を押す
と、それぞれ一つ前の画面に戻り、入力処理などをやり
直すことができる。

【００３０】図６は画像登録の手順を示すシーケンス図
である。携帯電話１０のＣＣＤカメラ２０により被写体
が撮影され、図１０（ａ）のように撮影された画像１０
９がＬＣＤ３２に表示される（Ｓ３０）。「撮り直し」
ボタン１１０を押すと、再度撮影することができ、「Ｏ
Ｋ」ボタン１１２を押すと、図１０（ｂ）の画像登録画
面に切り替わり、登録指示待ちの状態になる（Ｓ３
２）。「こちらへ画像を送ってください」という表示１
１４はＨＴＭＬリンクになっており、これをクリックす
ると撮影された画像１０９の登録処理が開始される（Ｓ
３２のＹ）。登録処理は自動的に行われ、ユーザは登録
のためにユーザＩＤなどを入力する必要がない。画像の
自動登録はメールにより行われる。まず携帯電話１０に
搭載されたメーラーが自動的に起動され（Ｓ３４）、撮
影された画像１０９を添付したメールが作成される（Ｓ
３６）。作成されたメールはサーバ１８宛に送信される
（Ｓ３８）。図１０（ｂ）の「こちらへ画像を送ってく
ださい」という表示１１４のＨＴＭＬリンクにメーラー
の指定、ユーザのメールアドレス、メールの宛先、添付
画像のファイル名を記述しておくことにより、ユーザの
ＨＴＭＬリンクのクリックを契機に、メーラーの起動か
ら画像が添付されたメールの送信までの処理を自動的に
行うことが可能である。

【００３１】サーバ１８は携帯電話１０から画像付きメ
ールを受信し（Ｓ４０）、登録部５０がそのメールのヘ
ッダのＦｒｏｍ行から送信元のメールアドレスを取得
し、ユーザデータベース５２を検索してそのメールアド
レスに対応するユーザＩＤを求める（Ｓ４２）。受信し
たメールから画像を取り出しその画像を、ユーザＩＤに
対応づけてユーザデータベース５２に登録する（Ｓ４
４）。サーバ１８から携帯電話１０へ画像の登録完了通
知が送信される（Ｓ４６）。

【００３２】図７は画像選択の手順を示すシーケンス図
である。図８のメニューから画像選択８６を選択する
と、図１１（ａ）に示す画像選択画面が表示される（Ｓ
５０）。登録された画像の名前のリスト１１８が表示さ
れており、この表示はＨＴＭＬリンクとなっており、い
ずれかの画像の名前をクリックするとその画像が、ユー
ザＩＤとともに画像番号がサーバ１８へ送信される（Ｓ
５２）。サーバ１８は指定された画像をユーザデータベ
ース５２から読み出し（Ｓ５４）、その画像データを携
帯電話１０へ送信する（Ｓ５６）。

【００３３】携帯電話１０には読み出された画像データ
が図１１（ｂ）のように表示される（Ｓ５８）。この画
面でユーザが「戻る」ボタン１０２を押すと、図１１
（ａ）の画面に戻る。ユーザは画像名の左に表示された
チェックボタン１１６をチェックして２枚の画像を選択
する（Ｓ６０）。「合成」ボタン１２０を押すと、ユー
ザＩＤとともに選択された２枚の画像の画像番号がサー
バ１８へ送信される（Ｓ６２）。モーフィング処理部５
６は指定された２枚の画像をユーザデータベース５２か
ら読み出し、２枚の画像データのマッチングをとって中
間画像を合成する（Ｓ６４）。合成された画像データは
携帯電話１０へ送信され、図１１（ｃ）のように合成画
像１２０が表示される。この画面には選択された２枚の
画像の合成比率を入力するフィールド１２２が表示さ
れ、ユーザは２枚の画像の合成比率を調整することがで
きる（Ｓ６８）。同図の例ではユーザは２枚の画像の合
成比率を３０パーセント対７０パーセントに指定してい
る。「合成」ボタン１２４を押すと、この指定された合
成比率がサーバ１８へ送信される（Ｓ７０）。モーフィ
ング処理部５６は、受信された合成比率で２枚の画像の
合成を行い（Ｓ７２）、合成された画像データを携帯電
話１０へ送信する（Ｓ７４）。合成比率を変えた合成画
像が携帯電話１０に表示され、これでよければ（Ｓ７６
のＹ）、終了する（Ｓ７８）。さらに合成比率を調整し
たい場合（Ｓ７６のＮ）、ステップＳ６８に戻る。

【００３４】図１３（ａ）〜（ｃ）は２枚の画像の合成
により中間画像が生成される例を説明する図である。２
枚の画像として図１３（ａ）の男性の顔写真、図１３
（ｂ）の女性の顔写真が与えられると、２枚の画像のマ
ッチングがとられ、中間画像として図１３（ｃ）の子ど
もの画像が生成される。２枚の画像のマッチングとモー
フィングだけでは子どもの画像は得られないが、モーフ
ィング処理部５６は輪郭を丸くしたり、左右の目の間隔
を大きくするなどの変形処理を行い、子どもらしい顔を
生成する。

【００３５】図１４（ａ）〜（ｃ）は２枚の画像から中
間画像が生成される他の例を説明する図である。２枚の
画像として図１４（ａ）はユーザの１０代の顔写真、図
１４（ｂ）はユーザの３０代の顔写真である。この２枚
の画像を外挿することにより、図１４（ｃ）のようにユ
ーザの６０代の顔画像が生成される。このようにユーザ
のカスタマイズの要請により老後の顔画像を生成するこ
とも可能である。

【００３６】さらに図８のメニューから登録画像管理８
８を選択すると、図１２（ａ）の登録画像管理画面が表
示される。一覧表示された画像名のいずれかをクリック
することにより、図１２（ｂ）のように画像がサーバ１
８からダウンロードされて表示される。また画像名の左
に表示されたチェックボタン１１６をチェックして「削
除」ボタン１２６を押すと、チェックした画像の画像番
号がユーザＩＤとともにサーバ１８へ送信され、ユーザ
データベース５２からその画像番号の登録画像が削除さ
れる。

【００３７】以上、本発明をいくつかの実施の形態をも
とに説明した。これらの実施の形態は例示であり、それ
らの各構成要素や各処理プロセスの組合せにいろいろな
変形例が可能なこと、またそうした変形例も本発明の範
囲にあることは当業者に理解されるところである。

【００３８】そのような変形例として、サーバ１８は、
中間画像に現れた肖像をもとに人物像を判断して人物評
価に関する情報を生成する付加情報生成部を含んでもよ
い。中間画像とともに人物評価に関する情報が携帯電話
１０に送信される。人物像の判断とは、将来有望である
とか、宇宙飛行士に向いているなど占いのような内容で
あり、遊び感覚で提供される。

【００３９】携帯電話１０のＣＣＤカメラ２０で撮影さ
れた肖像画のマッチングをとる際、顔の位置が中心より
ずれていると、うまくマッチングがとれないことがあ
る。ミスマッチングを避けるため、撮影された写真を上
下左右に移動して中心位置を調整する簡易編集機能が携
帯電話１０に設けられてもよい。また撮影された画像と
画像データベース５４の既存画像とのサイズが適合しな
い場合、サーバ１８のモーフィング処理部５６は、撮影
された画像のヘッダから画像サイズを読み取り、既存画
像のサイズに合わせるための拡大、縮小の処理をマッチ
ングの前処理として行ってもよい。

【００４０】ユーザ端末がとくにＰＤＡなどの携帯端末
である場合は、ユーザ端末に十分な処理性能を想定する
ことができるので、サーバ１８のモーフィング処理部５
６をユーザ端末側に設け、サーバ１８から合成する画像
をダウンロードして、ユーザ端末において中間画像を生
成してもよい。

【００４１】上記の説明では中間画像が１枚だけ生成さ
れたが、２枚の画像のモーフィングにより連続変化する
複数の中間画像が動画として生成されてもよい。また３
枚以上の画像を合成して中間画像が生成されてもよい。

【００４２】

【発明の効果】本発明によれば、ユーザのカスタマイズ
の要請に応じて画像を合成することができる。

【図面の簡単な説明】

【図１】 実施の形態に係る画像処理システムの構成図
である。

【図２】 図１の携帯電話の構成図である。

【図３】 図１のサーバの構成図である。

【図４】 図３のユーザデータベースに格納されるユー
ザの登録データの説明図である。

【図５】 画像処理システムによる課金登録とユーザ登
録の手順を示すシーケンス図である。

【図６】 画像登録の手順を示すシーケンス図である。

【図７】 画像選択の手順を示すシーケンス図である。

【図８】 図１の携帯電話に表示されるメニュー選択画
面の説明図である。

【図９】 図１の携帯電話に表示されるユーザ情報入力
画面の説明図である。

【図１０】 図１の携帯電話に表示される画像登録画面
の説明図である。

【図１１】 図１の携帯電話に表示される画像選択画面
の説明図である。

【図１２】 図１の携帯電話に表示される登録画像管理
画面の説明図である。

【図１３】 ２枚の画像の合成により中間画像が生成さ
れる例を説明する図である。

【図１４】 ２枚の画像の合成により中間画像が生成さ
れる別の例を説明する図である。

【符号の説明】

１０ 携帯電話、 １２ 基地局、 １４ ゲートウエ
イ、 １６ インターネット、 １８ サーバ、 ２０
ＣＣＤカメラ、 ２２ 撮影部、 ２４ メモリ、
２６ メール部、 ２８ ブラウザ部、 ３０ 入力
部、 ３２ ＬＣＤ、 ３４ 表示部、 ３６ マイ
ク、 ３８ 音声処理部、 ４０ スピーカ、 ４２
通信部、 ５０ 登録部、 ５２ ユーザデータベー
ス、 ５４ 画像データベース、 ５６ モーフィング
処理部、 ５８ 音声合成部、 ６０通信部。

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5B050 BA06 BA12 CA05 CA07 EA06 EA13 EA18 EA19 EA24 FA02 GA08 5B057 CA12 CA16 CB12 CB16 CD11 CE08 DB02 DC32

Claims (9)

【特許請求の範囲】
1. 【請求項１】 サーバの画像データベースに格納された
   既存の画像と、ユーザ端末に入力された肖像画とのマッ
   チングをとり、ユーザのカスタマイズの要請に応じた中
   間画像を生成して、ユーザ端末に提供することを特徴と
   する画像処理方法。
2. 【請求項２】 ユーザ端末に入力された肖像画が電子メ
   ールの形態でサーバに送信される工程と、 サーバ側で受信された電子メールのメールアドレスから
   ユーザＩＤを判定し、前記電子メールから前記肖像画を
   抽出して、ユーザＩＤに対応づけてユーザデータベース
   に登録する工程と、 前記ユーザデータベースに登録された２枚の肖像画の指
   定をユーザから受けつけ、それらの画像のマッチングを
   とって、ユーザのカスタマイズの要請に応じた中間画像
   を生成する工程と、 生成された中間画像をユーザ端末へ送信する工程とを含
   むことを特徴とする画像処理方法。
3. 【請求項３】 ユーザが入力する画像が添付された電子
   メールをユーザ端末から受信する受信部と、 前記受信された電子メールのメールアドレスからユーザ
   ＩＤを判定し、前記電子メールに添付された前記画像に
   前記ユーザＩＤを関連づけてユーザデータベースに登録
   する登録部と、 前記ユーザデータベースに登録された２枚の前記画像の
   指定をユーザから受けつけ、前記２枚の前記画像のマッ
   チングをとって、中間画像を生成するモーフィング処理
   部と、 前記生成された中間画像を前記ユーザ端末に送信する送
   信部とを含むことを特徴とするサーバ。
4. 【請求項４】 既存の画像を格納した画像データベース
   と、 ユーザが入力する画像が添付された電子メールをユーザ
   端末から受信する受信部と、 前記受信された電子メールのメールアドレスからユーザ
   ＩＤを判定し、前記電子メールに添付された前記画像に
   前記ユーザＩＤを関連づけてユーザデータベースに登録
   する登録部と、 前記画像データベースに格納された１枚の画像の指定
   と、前記ユーザデータベースに登録された１枚の画像の
   指定とをユーザから受けつけ、２枚の前記画像のマッチ
   ングをとって、中間画像を生成するモーフィング処理部
   と、 前記生成された中間画像を前記ユーザ端末に送信する送
   信部とを含むことを特徴とするサーバ。
5. 【請求項５】 前記モーフィング処理部は、ユーザから
   カスタマイズの要請を受けつけ、前記カスタマイズの要
   請に応じた前記中間画像を生成することを特徴とする請
   求項３または４に記載のサーバ。
6. 【請求項６】 前記カスタマイズの要請は、前記２枚の
   画像の混合の比率を指定する内容であることを特徴とす
   る請求項５に記載のサーバ。
7. 【請求項７】 前記モーフィング処理部は、前記２枚の
   画像の間に複数の中間画像を挿入した動画を生成するこ
   とを特徴とする請求項３または４に記載のサーバ。
8. 【請求項８】 前記中間画像に現れた肖像をもとに発声
   音を推定して音声を合成する音声合成部をさらに含み、
   前記送信部は前記中間画像とともに前記合成された音声
   を前記ユーザ端末に送信することを特徴とする請求項３
   または４に記載のサーバ。
9. 【請求項９】 撮影された画像を表示する機能と、 前記画像の中心位置を調整する簡易編集機能と、 前記画像のサーバへの登録を指示するユーザの操作を契
   機として電子メール機能を起動して、前記画像が添付さ
   れた電子メールを内部的に生成し、前記サーバへ自動送
   信する機能とをコンピュータに実行させることを特徴と
   するプログラム。