JP4096354B2 - 通信端末及び画像サーバ - Google Patents
通信端末及び画像サーバ Download PDFInfo
- Publication number
- JP4096354B2 JP4096354B2 JP2002139905A JP2002139905A JP4096354B2 JP 4096354 B2 JP4096354 B2 JP 4096354B2 JP 2002139905 A JP2002139905 A JP 2002139905A JP 2002139905 A JP2002139905 A JP 2002139905A JP 4096354 B2 JP4096354 B2 JP 4096354B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- template
- original image
- original
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、通信端末及び画像サーバに係り、特に元画像やテンプレート画像に画質補正処理や合成処理を実施する通信端末及び画像サーバに関する。
【０００２】
【従来の技術】
テンプレートに合う構図の画像が簡単に撮影でき、しかも記録後のテンプレートの変更及び解除が可能な撮像装置が、特開平１１−１６８６８９号の公報に示されている。
【０００３】
また、構図としての線画が描かれたデザインプレートをビューカメラのフォーカシングプレートに手作業で重ねる作業を必要とせず、比較的短時間に印刷用の原画に対応する画像信号を得ることが可能な撮像装置が、特開平６−１１３２０２号の公報に示されている。当該撮像装置では、撮影画像とテンプレート画像との合成を記録前に実施して、記録する画像は撮影画像とテンプレート画像とが合成された画像となっている。また、合成信号に基づく表示手段を備えている。
【０００４】
近年ではインターネット等の通信網の発達により、通信網上に存在する画像サーバにて、画像のアルバムサービス、携帯電話用の画像変換サービス等の画像変換サービスが実施されている。当該画像変換サービスでは、利用者が送信した画像やテンプレート画像と合成処理を実施した合成画像に対して、明るさ補正やノイズ感補正などの画像処理を実施し、これらの観点からより好ましい画像に自動変換するサービスを提供している。
【０００５】
前述の画像サーバ等に於ける画像変換サービスでは、画像サーバに登録された画像がテンプレート合成によって加工された合成画像である場合に、テンプレート部分と主画像部分との間で画質の補正に関する切り分けができない。したがって、主画像部分とテンプレート画像部分とで解像度や階調が異なっているにもかかわらず、主画像部分とテンプレート部分とから構成される合成画像を一つの画像として画像変換を実施している。
【０００６】
【発明が解決しようとする課題】
しかしながら、上記の特開平１１−１６８６８９号の公報に示されている撮像装置及び特開平６−１１３２０２号の公報に示されている撮像装置では、扱うことができる画像ファイルの容量が小さい携帯端末（通信機器）に対して合成画像を送信する際に、元画像とテンプレート画像とを合成した後の合成画像に対して圧縮処理を実施している。
【０００７】
携帯電話用の画像変換サービスでは、通信インフラや携帯電話のメモリ資源の節約のため、一般に画像サーバと携帯端末間で通信する画像のファイル容量に制限が設けられている。更に、携帯端末において受信可能な画像ファイルの圧縮フォーマットとして、ＪＰＥＧ、ＧＩＦ、ＰＮＧ等の圧縮フォーマットが用いられている。したがって、圧縮前の画像の冗長度が低い画像（画素数が多いなど、画像の走査線の高周波成分が多い画像）であるほど、より高い圧縮率をかけて画像の高周波成分を落として画像ファイルの容量を制限以下の容量に圧縮する必要がある。
【０００８】
したがって、合成画像のうち、元画像が冗長度の高い画像であって、合成するテンプレート画像が冗長度の低い細密な画像である場合に、これらを合成した合成画像に対して画像の圧縮処理を実施すると、冗長度の低い部分に合わせて高圧縮の圧縮処理を行わざるを得ず、合成画像に於ける冗長度の高い元画像部分に圧縮歪みや色数の減少が多発するなど、好ましくない画質劣化が生じやすくなる。
【０００９】
また元画像とテンプレート画像とは一般に画像の色調や明るさ、ホワイトバランス、シャープネス等が異なるため、色調等が異なる元画像とテンプレート画像とをそのまま合成しても、ちぐはぐな合成画像ができてしまうという不具合を生じる。
【００１０】
本発明はこのような事情に鑑みてなされたもので、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施して合成画像を得ることが可能な通信端末及び画像サーバを提供することを目的としている。
【００１１】
また本発明は、合成に使用する元画像とテンプレート画像の色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することを可能とし、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能な通信端末及び画像サーバを提供することを目的としている。
【００１２】
【課題を解決するための手段】
本発明は前記目的を達成するために、元画像とその元画像を修飾するテンプレート画像とを合成して表示する通信端末において、元画像が圧縮されて記録された元画像ファイルを取得する手段と、前記元画像に合成するためのテンプレート画像が圧縮されて記録されたテンプレート画像ファイルを取得する手段と、前記元画像ファイル及びテンプレート画像ファイルをそれぞれ伸長する手段と、前記伸長した元画像とテンプレート画像とを合成して合成画像を表示する表示手段と、前記合成に使用した元画像及びテンプレート画像をそれぞれ圧縮する手段と、前記圧縮された元画像が記録された元画像ファイルと前記圧縮されたテンプレート画像が記録されたテンプレート画像ファイルとをそれぞれ関連付けて別々に画像サーバに送信する手段と、を備えたことを特徴としている。
【００１３】
本発明によれば、元画像とその元画像を修飾するテンプレート画像とを合成して表示する通信端末において、元画像が圧縮されて記録された元画像ファイルと、この元画像に合成するためのテンプレート画像が圧縮されて記録されたテンプレート画像ファイルとを取得し、これらの元画像ファイル及びテンプレート画像ファイルをそれぞれ伸長した元画像とテンプレート画像とを合成して合成画像を表示することにより合成画像を確認することができ、一方、この合成画像を送信する場合には、前記合成に使用した元画像及びテンプレート画像をそれぞれ圧縮し、それぞれ圧縮された元画像が記録された元画像ファイルとテンプレート画像が記録されたテンプレート画像ファイルとをそれぞれ関連付けて別々に画像サーバに送信するようにしたため、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施してテンプレート合成画像を得ることが可能となるので、画像サーバとの通信にファイル容量制限があっても、より好ましい画質のテンプレート合成画像の送信が可能となる。
【００１４】
請求項２に係る画像サーバは、請求項１に記載の通信端末から前記元画像ファイル及び前記テンプレート画像ファイルを受信する手段と、前記受信した元画像ファイル及び前記テンプレート画像ファイルをそれぞれ伸長する手段と、前記伸長した元画像に対して自動画質補正処理を施して元画像の画質を補正する元画像画質補正手段と、前記補正した元画像及び前記伸長したテンプレート画像を配信先端末情報に基づいて画素数をリサイズする画素数リサイズ処理手段と、前記リサイズされた元画像及びテンプレート画像をそれぞれ圧縮する手段と、前記圧縮された元画像が記録された元画像ファイルと前記圧縮されたテンプレート画像が記録されたテンプレート画像ファイルとをそれぞれ関連付けて別々に他の通信端末に送信する手段と、を備えたことを特徴としている。
請求項２に係る発明によれば、合成に使用した元画像とテンプレート画像とをそれぞれ別々に関連付けて受信するようにしたので、元画像とテンプレート画像との色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。また、画質補正した元画像及びテンプレート画像を配信先端末情報に基づいて画素数をリサイズするようにしたため、送信するファイル容量を小さくすることができる。
【００１５】
請求項３に係る画像サーバは、請求項１に記載の通信端末から前記元画像ファイル及び前記テンプレート画像ファイルを受信する手段と、前記受信した元画像ファイル及び前記テンプレート画像ファイルをそれぞれ伸長する手段と、前記伸長した元画像に対して自動画質補正処理を施して元画像の画質を補正する元画像画質補正手段と、前記補正した元画像及び前記伸長したテンプレート画像を配信先端末情報に基づいて画素数をリサイズする画素数リサイズ処理手段と、前記リサイズされた元画像とテンプレート画像とを合成して合成画像を生成する画像合成処理手段と、前記生成した合成画像を圧縮する手段と、前記圧縮された合成画像が記録された合成画像ファイルを他の通信端末に送信する手段と、を備えたことを特徴としている。
【００１６】
請求項３に係る発明によれば、画像合成に使用した元画像ファイルとテンプレート画像ファイルとをそれぞれ受信するようにしたため、元画像とテンプレート画像との色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。また、画質補正した元画像及びテンプレート画像を配信先端末情報に基づいて画素数をリサイズし、リサイズされた元画像とテンプレート画像とを合成して合成画像を圧縮して送信するようにしたため、送信するファイル容量を小さくすることができる。
【００２１】
【発明の実施の形態】
以下添付図面に従って、本発明に係る通信端末及び画像サーバの好ましい実施の形態について詳説する。
【００２２】
図１に本発明に係る通信端末及び画像サーバを含む画像処理システムの構成例を示す。
【００２３】
同図に示すように画像処理システムには、利用者が携行するとともにＬＣＤ等の表示手段に元画像とテンプレート画像等を合成した合成画像を表示することが可能な携帯電話４０（画像処理装置の機能を含むものであってもよい）と、合成画像の送信先となる通信機器の一形態である携帯電話４０Ａ（画像処理装置の機能を含むものであってもよい）と、携帯電話４０及び携帯電話４０Ａと無線による通信を行う基地局４２及び４２Ａと、携帯電話４０及び携帯電話４０Ａ用の携帯電話回線４４と、インターネット等の通信網４８と、元画像やテンプレート画像等の画像を記録したり画像を合成したりする利用者のパソコン８０（画像処理装置の機能を含むものであってもよい）と、通信網４８に対して通信の接続を行うことが可能な画像サーバ９０（画像処理装置）とが設けられている。
【００２４】
携帯電話回線４４と通信網４８とは画像サーバ９０等の中継装置を介して通信接続が可能となっており、携帯電話４０及び携帯電話４０Ａは、基地局４２又は基地局４２Ａ、携帯電話回線４４等を経由して、画像サーバ９０又はパソコン８０と元画像やテンプレート画像、合成画像その他の情報の送受信を行うことが可能となっている。
【００２５】
例えば利用者が、携帯電話４０又はパソコン８０を操作して元画像とテンプレート画像とを合成した合成画像を携帯電話４０Ａに送信する旨の指示を入力すると、その合成画像を構成している元画像とテンプレート画像とが画像サーバ９０に送信される。
【００２６】
画像サーバ９０では、必要に応じて元画像やテンプレート画像に対してホワイトバランス調節や階調調節処理、シャープネス処理等の画質の補正処理を実施するとともに、携帯電話４０Ａの画像の再生能力、表示能力、又は携帯電話４０Ａの通信能力等に応じて画素数を減少させるリサイズ処理や、合成処理、画像の圧縮処理を実施して所定のフォーマットに変換する処理を行う。
【００２７】
前記所定のフォーマットに変換された合成画像は、画像サーバ９０から携帯電話回線４４及び基地局４２Ａを介して携帯電話４０Ａに送信される。前記合成画像を受信した携帯電話４０Ａでは、受信した合成画像を表示手段に表示することによって、元画像とテンプレート画像とが合成された合成画像を閲覧することが可能となる。なお、本発明では携帯電話４０Ａが元画像とテンプレート画像とを別々に受信して、携帯電話４０Ａ内部で受信した元画像とテンプレート画像とを合成して合成画像を生成し、前記生成した合成画像を表示手段に表示するようにしてもよい。
【００２８】
図２に、通信機器の一形態である携帯電話４０の信号処理系ブロック図を示す。なお、携帯電話４０Ａも同様の信号処理系ブロックを備えている。
【００２９】
同図に示すように携帯電話４０（画像処理装置）の情報送受信部には、携帯電話回線と無線通信するためのアンテナ４５２、携帯電話回線用の送受信手段４５３（元画像受信手段、テンプレート画像受信手段、送信手段）及びリアルタイムにて送受信する情報を一時的に記憶する送受信バッファ４５４とが設けられている。
【００３０】
画像処理手段４６７（元画像画質補正手段、テンプレート画質補正手段、合成手段）は、送受信手段４５３を介して受信した画像、又は記録手段に記録されている画像に対して、ホワイトバランスの調節、ガンマ補正、シャープネス補正処理を実施したり、画像に対してＪＰＥＧやモーションＪＰＥＧ、ＭＰＥＧ、ＰＮＧ等に代表される手法で圧縮伸長処理を施したり、圧縮フォーマットの変更処理を実施したり、画素数の減少化若しくは増加処理や階調の減少化処理若しくは増加処理、フレームレートの変更処理、又は画素若しくは画像の間引き処理を施したりする画質補正処理を自動で実施することが可能となっている。
【００３１】
また、前述のように画像処理手段４６７が前記元画像画質補正手段、テンプレート画質補正手段、合成手段の機能を実施する代わりに、処理が高速な専用の元画像画質補正手段、テンプレート画質補正手段、合成手段等の画像処理手段を設けることによって、前記各種の画像処理の高速化を図ることも可能である。
【００３２】
また携帯電話４０には、合成画像等の静止画像や動画像、文字その他の各種の情報を表示する表示手段４６８と、情報処理手段の指令に基づいて表示手段４６８に対して表示用の画像信号を出力する表示制御手段４６９と、利用者が入力手段４７４を介して入力した各種情報を読み取って後述する情報処理手段に伝達したり、情報処理手段からの指示に基づいてＬＥＤ等の通知手段に表示指令を出力するＩ／Ｏ４７５とが設けられている。
【００３３】
また、携帯電話４０には、携帯電話４０の全体の制御を行う情報処理手段（ＣＰＵ）４８０（元画像画質補正手段、テンプレート画像画質補正手段、合成手段の機能を備えていてもよい）と、携帯電話の処理に関する各種定数やネットワーク上の通信機器に通信接続する際のダイヤルアップ電話番号、属性情報、ＵＲＬ（Uniform Resource Locators ）、ＩＰ（Internet Protocol ）アドレス、ゲートウェイ情報ＤＮＳ（Domain Name System）等の接続情報、画像、文書、音声その他の情報を記録する書き換え可能な不揮発性メモリ４８２（元画像記録手段、テンプレート画像記録手段）と、情報処理手段４８０を動作させるプログラムや各種定数が記録されているＲＯＭや情報処理手段４８０が処理を実行する際の作業領域となる記憶手段であるＲＡＭとから構成されるメモリ４８４と、時刻を刻むカレンダ時計４９０と、情報処理手段４８０を含む各回路に電源を供給する電源４９１とが設けられている。
【００３４】
また、携帯電話４０には、利用者が電話器として利用する際の受話器となるとともに、送受信手段４５３を介して受信した音声情報等の音声を出力するスピーカ４９５と、情報処理手段４８０等が出力する音声データをアナログの音声信号に変換するとともに増幅してスピーカ４９５に出力するＤ／Ａ変換器４９６と、音声を入力して音声信号に変換するマイク４９７と、マイク４９７から入力した音声信号を増幅するとともに情報処理手段４８０等に送出する音声データに変換するＡ／Ｄ変換器４９８とが設けられている。
【００３５】
また携帯電話４０には、当該携帯電話４０が存在する位置に関する情報を取得するＧＰＳ（Global Positioning System ）等の現在位置確認手段４９３が設けられている。
【００３６】
携帯電話４０内の情報処理手段４８０と、送受信バッファ４５４、表示制御手段４６９、Ｉ／Ｏ４７５、不揮発性メモリ４８２、メモリ４８４、カレンダ時計４９０、Ｄ／Ａ変換器４９６、Ａ／Ｄ変換器４９８等を含む各周辺回路は、バス４９９で接続されており、情報処理手段４８０は各々の周辺回路を制御するとともに高速な情報の送受信を行うことが可能となっている。したがって情報処理手段４８０は、実行する処理プログラムに基づいて各周辺回路を制御することが可能となっている。
【００３７】
なお、上記の説明では通信機器の例として携帯電話４０を用いた例で説明したが、画像の表示手段や記録手段、通信手段、画像の合成手段、画質補正手段等を備えた通信機器であれば、携帯型のパソコン、個人情報端末、電子手帳等の通信機器であってもよい。また、携帯電話４０等の通信機器には、被写体像を撮像する電子カメラが内蔵されていてもよい。
【００３８】
前記送受信手段４５３（元画像受信手段、テンプレート画像受信手段）は、画像サーバ９０等の通信機器から合成に使用する元画像やテンプレート画像を受信することが可能となっている。また、合成に使用する元画像や補正画像、テンプレート画像等は、不揮発性メモリ４８２（元画像記録手段、テンプレート画像記録手段）等の記録手段に記録されているものを情報処理手段４８０が読み出して、合成処理を実施するようにしてもよい。
【００３９】
また表示手段４６８には、受信した元画像若しくは不揮発性メモリ４８２等の記録手段に記録されている元画像若しくは補正画像と、受信したテンプレート画像若しくは記録手段に記録されているテンプレート画像等とを合成した画像を表示することが可能となっている。
【００４０】
また、送受信手段４５３（送信手段）は、前記合成に使用した元画像とテンプレート画像若しくは補正テンプレート画像とを、それぞれ別々に関連付けて画像サーバ９０又は携帯電話４０Ａ等の通信機器に送信することが可能となっている。
【００４１】
図３に、利用者が操作するパソコンの信号処理系ブロック図を示す。
【００４２】
同図に示すようにパソコン８０（画像処理装置）の情報送受信部には、通信回線８６０とルータ、通信網４８を介して他の通信機器（画像サーバ９０、携帯電話４０、携帯電話４０Ａ等）と情報の送受信を行う送受信手段８６５（元画像受信手段、テンプレート画像受信手段、送信手段）が設けられている。
【００４３】
また、パソコン８０には、必要に応じて画像や文字その他の情報を確認のために表示する表示手段８６８と、情報処理手段の指令に基づいて表示手段８６８に対して表示用の画像信号を出力する表示制御手段８６９と、管理者が入力手段８７４を介して入力した各種情報を読み取って後述する情報処理手段に伝達したり、情報処理手段からの指示に基づいてＬＥＤ等の通知手段に表示指令を出力するＩ／Ｏ８７５とが設けられている。
【００４４】
また、パソコン８０には、記録媒体８７７（元画像記録手段、テンプレート画像記録手段）を着脱可能に装着する記録媒体装着部８７８と、記録媒体８７７に対して画像データ等の情報を記録したり読み出したりする記録媒体インターフェース８７９とが設けられている。なお、記録媒体８７７は、磁気記録式の記録媒体、光記録式の記録媒体、半導体記録式の記録媒体その他の記録媒体である。
【００４５】
また、パソコン８０には、パソコン８０の全体の制御を行う情報処理手段（ＣＰＵ）８８０（元画像画質補正手段、テンプレート画像補正手段、合成手段）と、情報処理手段８８０を動作させるプログラムや各種定数が記録されているＲＯＭや情報処理手段８８０が処理を実行する際の作業領域となる記録手段であるＲＡＭとから構成されるメモリ８８１と、パソコン８０の処理に関する各種定数やネットワーク上の自己の属性情報、ＵＲＬ（Uniform Resource Locators ）、アドレス、サイトアドレス、ゲートウェイ情報ＤＮＳ（Domain Name System）等の接続情報、元画像並びにテンプレート画像、その他の各種情報を記録するハードディスク等の記録手段８８６（元画像記録手段、テンプレート画像記録手段）と、時刻を刻むカレンダ時計８９０とが設けられている。
【００４６】
同図に示すように情報処理手段８８０と、表示制御手段８６９、Ｉ／Ｏ８７５、メモリ８８１、記録手段８８６、カレンダ時計８９０等を含む各周辺回路はバス８９９で接続されており、情報処理手段８８０は各々の周辺回路を制御することが可能であるとともに、情報処理手段８８０が実行する処理プログラムに基づいて周辺の各機器を制御することが可能となっている。
【００４７】
前記情報処理手段８８０は、各種の画像に対してホワイトバランスの調節、ガンマ補正、シャープネス補正処理を実施したり、画像に対してＪＰＥＧやモーションＪＰＥＧ、ＭＰＥＧ、ＰＮＧ等に代表される手法で圧縮伸長処理を施したり、圧縮フォーマットの変更処理を実施したり、画素数の減少化若しくは増加処理や階調の減少化処理若しくは増加処理、フレームレートの変更処理、又は画素若しくは画像の間引き処理を施したりする画質補正処理を自動で実施することが可能となっている。
【００４８】
なお、前述のように情報処理手段８８０が前記元画像画質補正手段、テンプレート画質補正手段、合成手段の機能を実施する代わりに、処理が高速な専用の元画像画質補正手段、テンプレート画質補正手段、合成手段等の画像処理手段を設けることによって、前記各種の画像処理の高速化を図ることも可能である。
【００４９】
前記送受信手段８６５（元画像受信手段、テンプレート画像受信手段）は、画像サーバ９０等の通信機器から合成に使用する元画像やテンプレート画像を受信することが可能となっている。また、合成に使用する元画像や補正画像、テンプレート画像は、記録手段８８６又は記録媒体８７７（元画像記録手段、テンプレート画像記録手段）等の記録手段に記録されているものを情報処理手段８８０が読み出して、合成処理を実施するようにしてもよい。
【００５０】
また表示手段８６８には、受信した元画像又は、記録手段８８６若しくは記録媒体８７７等に記録されている元画像若しくは補正画像と、受信したテンプレート画像、又は記録手段８８６若しくは記録媒体８７７等に記録されているテンプレート画像とを合成した画像を表示することが可能となっている。
【００５１】
また、送受信手段８６５（送信手段）は、前記合成に使用した元画像とテンプレート画像若しくは補正テンプレート画像とを、それぞれ別々に関連付けて画像サーバ９０又は携帯電話４０Ａ等の通信機器に送信することが可能となっている。
【００５２】
前記情報処理手段８８０（元画像画質補正手段、テンプレート画質補正手段）は、受信したテンプレート画像若しくは記録手段８８６に記録されているテンプレート画像、又は、受信した元画像若しくは記録手段８８６に記録されている元画像に対して自動画質補正処理を施して、補正テンプレート画像又は補正画像を生成することが可能となっている。
【００５３】
図４に、本発明に係る画像サーバの信号処理系ブロック図を示す。
【００５４】
同図に示す画像サーバ９０（画像処理装置）は、携帯電話４０、携帯電話４０Ａ等の通信機器に、元画像、テンプレート画像、合成画像その他の画像を送信することが可能な画像サーバである。
【００５５】
同図に示すように画像サーバ９０の情報送受信部には、通信回線９６０とルータ、通信網４８を介して他の通信機器（パソコン８０、携帯電話４０、携帯電話４０Ａ又はその他の個人情報端末等の通信機器）と情報の送受信を行う送受信手段９６５（元画像受信手段、テンプレート画像受信手段、送信手段）が設けられている。
【００５６】
また、画像サーバ９０には、静止画又は動画のオリジナル画像データをＪＰＥＧやモーションＪＰＥＧ、ＭＰＥＧ、ＰＮＧ等に代表される手法で圧縮処理を施したり、画素数の減少化処理や階調の減少化処理、フレームレートの変更処理、又は画素若しくは画像の間引き処理を施したり、圧縮した画像データ等を伸張展開処理する画質補正処理を実施して、個々の通信機器の表示手段に表示可能な画像を生成する圧縮伸長手段９６７（元画像画質補正手段、テンプレート画質補正手段）が設けられている。なお、圧縮伸長手段９６７は、既に所定の圧縮フォーマットで圧縮処理されている画像を、別の圧縮フォーマットに変換する画質補正機能を備えていてもよい。
【００５７】
また、画像サーバ９０には、必要に応じて画像や文字その他の情報を確認のために表示する表示手段９６８と、情報処理手段の指令に基づいて表示手段９６８に対して表示用の画像信号を出力する表示制御手段９６９と、管理者が入力手段９７４を介して入力した各種情報を読み取って後述する情報処理手段に伝達したり、情報処理手段からの指示に基づいてＬＥＤ等の通知手段に表示指令を出力するＩ／Ｏ９７５とが設けられている。
【００５８】
また、画像サーバ９０には、画像サーバ９０の全体の制御を行う情報処理手段（ＣＰＵ）９８０（元画像画質補正手段、テンプレート画質補正手段、合成手段の機能を含むものであってもよい）と、情報処理手段９８０を動作させるプログラムや各種定数が記録されているＲＯＭや情報処理手段９８０が処理を実行する際の作業領域となる記録手段であるＲＡＭとから構成されるメモリ９８１と、画像サーバ９０の処理に関する各種定数やネットワーク上の自己の属性情報、ＵＲＬ（Uniform Resource Locators ）、アドレス、サイトアドレス、ゲートウェイ情報ＤＮＳ（Domain Name System）等の接続情報、元画像、テンプレート画像その他の各種情報を記録するハードディスク等の記録手段９８６（元画像記録手段、テンプレート画像記録手段）と、時刻を刻むカレンダ時計９９０とが設けられている。
【００５９】
また画像サーバ９０には、元画像やテンプレート画像、合成画像に対して画素数の減少化処理、若しくは画素数の増加処理、階調の減少化処理若しくは階調の増加処理、フレームレートの変更処理、画像における画素の間引き処理若しくは画像の間引き処理等の画質補正処理を施する画素数リサイズ処理手段９９３（元画像画質補正手段、テンプレート画質補正手段）が設けられている。
【００６０】
また画像サーバ９０には、元画像やテンプレート画像、合成画像に対してホワイトバランスの調節や色相の調節、ガンマ補正、シャープネス補正処理等の画質補正の画像処理を自動で実施する自動画質補正処理手段９９４（元画像画質補正手段、テンプレート画質補正手段）が設けられている。
【００６１】
なお、前述のように圧縮伸長手段９６７が各画像に対して圧縮伸長処理を実施する代わりに、情報処理手段９８０が各画像に対して圧縮伸長処理や圧縮フォーマットの変換処理等の画質補正処理を実施するようにしても、本発明の目的を達成することが可能である。
【００６２】
また、前述のように画素数リサイズ処理手段９９３が画素数の変換処理等を実施する代わりに、情報処理手段９８０が画素数の変換処理等の画質補正処理を実施するようにしても、本発明の目的を達成することが可能である。
【００６３】
また同様に、自動画質補正処理手段９９４がホワイトバランス補正等の画質補正を実施する代わりに、情報処理手段９８０がホワイトバランス補正等の画質補正を実施するようにしても、本発明の目的を達成することが可能である。
【００６４】
同図に示すように情報処理手段９８０と、表示制御手段９６９、Ｉ／Ｏ９７５、メモリ９８１、記録手段９８６、カレンダ時計９９０等を含む各周辺回路はバス９９９で接続されており、情報処理手段９８０は各々の周辺回路を制御することが可能であるとともに、情報処理手段９８０が実行する処理プログラムに基づいて周辺の各機器を制御することが可能となっている。
【００６５】
なお、上記の説明では、携帯電話４０等と画像サーバ９０とパソコン８０とが独立した別の通信機器である実施例で説明したが、本発明はこれに限定されるものではなく、画像サーバ９０とパソコン８０等が単一の画像処理装置にて構成されていても本発明の目的を達成することが可能である。
【００６６】
前記送受信手段９６５（元画像受信手段、テンプレート画像受信手段）は、パソコン８０や携帯電話４０等の通信機器から合成に使用する元画像やテンプレート画像を受信することが可能となっている。また、合成に使用する元画像や補正画像、テンプレート画像は、記録手段９８６（元画像記録手段、テンプレート画像記録手段）等に記録されているものを情報処理手段９８０が読み出して、合成処理を実施するようにしてもよい。
【００６７】
また表示手段９６８には、受信した元画像又は、記録手段９８６等に記録されている元画像若しくは補正画像と、受信したテンプレート画像若しくは、記録手段９８６等に記録されているテンプレート画像とを合成した画像を表示することが可能となっている。
【００６８】
また送受信手段９６５（送信手段）は、前記合成に使用した元画像とテンプレート画像若しくは補正テンプレート画像とを、それぞれ別々に関連付けてパソコン８０又は携帯電話４０Ａ等の通信機器に送信することが可能となっている。
【００６９】
前記圧縮伸長手段９６７、画素数リサイズ処理手段９９３、自動画質補正処理手段９９４、又は情報処理手段９８０（元画像画質補正手段、テンプレート画質補正手段）は、受信したテンプレート画像若しくは記録手段９８６に記録されているテンプレート画像、又は、受信した元画像若しくは記録手段９８６に記録されている元画像に対して自動画質補正処理を施して、補正テンプレート画像又は補正画像を生成することが可能となっている。
【００７０】
図５に、本発明に係る画像処理装置を用いて画像を携帯電話に送信する際の信号処理の流れ図を示す。同図に示す例は、画像サーバ９０から携帯電話４０Ａに対して、圧縮処理を実施した元画像と圧縮処理を実施したテンプレート画像とをそれぞれ別々に関連付けて送信する場合の実施例である。
【００７１】
同図に示すように、利用者Ａさんが自己のパソコン８０（携帯電話４０であってもよい）を操作して、記録手段８８６に記録されている元画像ファイルから元画像を読み出して表示手段８６８に表示する指示を入力する。
【００７２】
次に利用者は、パソコン８０に設けられている入力手段８７４を操作して、画像サーバ９０から前記元画像に対して合成処理を行うのに適したテンプレート画像を取得する旨の指示を入力する。前記指示を取得したパソコン８０の情報処理手段８８０は、送受信手段８６５と通信網４８を介して所定の画像サーバ９０と通信を開始して、画像サーバ９０の記録手段９８６に記録されているテンプレート画像のメニューを取得する。
【００７３】
前記テンプレート画像のメニューをパソコン８０の情報処理手段８８０が送受信手段８６５を介して受信すると、情報処理手段８８０は受信したテンプレート画像のメニューを、表示手段９６８に表示する処理を行う。利用者Ａさんは、表示手段８６８に表示されているテンプレート画像の一覧表示等のメニューを見ながら、所望のテンプレート画像を選択する旨のテンプレート選択指示を入力手段８７４を介して入力する。するとそのテンプレート選択指示の情報は、送受信手段８６５を介して画像サーバ９０に送信される。
【００７４】
前記テンプレート選択指示の情報を画像サーバ９０の情報処理手段９８０が送受信手段９６５を介して取得すると、記録手段９８６に記録されている所定のテンプレート画像ファイルを読み出して、送受信手段９６５を介して利用者Ａさんのパソコン８０に送信する処理を行う。
【００７５】
前記テンプレート画像ファイルは、通信網４８と送受信手段８６５を介してパソコン８０の情報処理手段８８０が取得する。特に通信手段を用いて画像を転送する場合には、ファイルサイズができる限り小さいことが要求されるので、一般に圧縮処理を施された画像ファイルが用いられる。したがって圧縮されたテンプレート画像ファイルを情報処理手段８８０が取得すると、情報処理手段８８０は画像ファイルに含まれるテンプレート画像（主画像部分）を読み出して、そのテンプレート画像に対して所定の伸長処理を施す。
【００７６】
前記伸長処理が終了したテンプレート画像は、ステップＳ１００「テンプレート画像合成処理」（以降Ｓ１００のように省略して記載する）にて、情報処理手段８８０によって元画像と合成する処理が行なわれ、合成画像が生成されて表示手段８６８に表示する処理を行う。なお、合成する元画像は、前述のように記録手段８８６に記録されている画像を読み出してもよいし、画像サーバ９０等の他の通信機器から送受信手段８６５を介して取得してもよい。また、合成するテンプレート画像は、前述のように画像サーバ９０等の他の通信機器から送受信手段８６５を介して取得してもよいし、元画像と同様に記録手段８８６に記録されているテンプレート画像を読み出して取得してもよい。
【００７７】
またこのときに情報処理手段８８０は、自動で又は利用者の指示に基づいて、元画像又はテンプレート画像に対して明るさの補正やホワイトバランスの調節、ガンマ補正、画素数の変更処理、階調の変更処理、シャープネス補正処理その他の画質補正処理を実施して、元画像とテンプレート画像との色合いのバランスや画質の細密さのバランスを調節するようにしてもよい。なお、当該画質の補正処理は、パソコン８０で実施してもよいし、後述するように画像サーバ９０で実施してもよいし、携帯電話４０、携帯電話４０Ａで実施するようにしてもよい。
【００７８】
利用者Ａさんが、表示手段に表示されている合成画像を利用者Ｂさんの携帯電話４０Ａに送信する場合には、携帯電話４０Ａのアドレスを指定して合成画像を送信する旨の指示を入力手段４７４を介して入力する。その送信する旨の情報は、Ｉ／Ｏ４７５を介して情報処理手段４８０に伝達される。前記合成画像の送信の指示を取得した情報処理手段４８０は、表示手段４６８に表示されている合成画像ではなく、その合成に使用した元画像とテンプレート画像と、画像の送信先の通信機器（携帯電話４０Ａ等を特定するメールアドレス、ＩＤ、電話番号、その他の識別情報）をそれぞれ別々に関連付けて画像サーバ９０（他の通信機器）に送受信手段４５３を介して送信する処理を行う。
【００７９】
図６に、画像サーバ９０に送信する元画像ファイルの構成と、元画像を修飾するテンプレート画像のファイル構成を示す。
【００８０】
同図に示すように元画像ファイルには、撮影年月日やホワイトバランス等の各種の撮影情報等が記載されている付属情報記録部分と、３２０×２４０の画素数で構成されている主画像と、見出し用に用いる縮小画像であるサムネイル画像とが記録されている。また付属情報記録部分には、合成するテンプレート画像が存在することを示す合成画像の有無情報と、合成するテンプレート画像のファイル名とが記載されている関連情報記録領域が記載されている。
【００８１】
一方のテンプレート画像ファイルにも、当該テンプレート画像の作成日時や当該テンプレート画像ファイルのファイル名とが記録されている画像情報記録領域と、６４０×４８０の画素数で構成されているテンプレート画像の主画像と、見出し用に用いる縮小画像であるサムネイル画像とが記録されている。また付属情報記録部分には、合成する主画像が存在することを示す合成画像の有無情報と、合成する主画像のファイル名とが記載されている関連情報記録領域が記載されている。このテンプレート画像ファイルには、前記関連情報は記載されていなくても、主画像ファイルの関連情報を参照することによって主画像とテンプレート画像とを合成することが可能である。
【００８２】
同図に示すように、画像サーバ９０に送信する元画像は、リサイズ処理を実施する前の３２０×２４０の画素数を有する主画像であってもよいし、合成画像を送信する先の携帯電話４０Ａの表示手段の表示能力に応じた画素数（例えば１００×１００画素など）にリサイズする処理や、テンプレート画像に合わせたホワイトバランス処理等の画質補正処理を実施した後の画像を送信するようにしてもよい。また、画像サーバ９０に送信するテンプレート画像の主画像に対しても同様に、画質の補正処理を実施してから送信するようにしてもよい。
【００８３】
前記主画像とテンプレート画像の画像ファイルをそれぞれ別々に受信した画像サーバ９０では、Ｓ２００「元画像記録」及びＳ２０２「テンプレート画像記録」にて、受信した元画像ファイルと受信したテンプレート画像ファイルとを一時期記録手段９８６に記録する処理を行う。
【００８４】
元画像とテンプレート画像とを受信すると画像サーバ９０の情報処理手段９８０は、Ｓ２０４「自動画質補正処理」にて、受信した元画像の主画像を自動画質補正処理手段９９４に出力して、主画像に対して自動画質補正処理を実施する。このとき情報処理手段９８０は、テンプレート画像の明るさや色調、シャープネスに関する情報を読み出して自動画質補正処理手段９９４に出力し、元画像に対して画質補正を実施する際の指針とするようにしてもよい。
【００８５】
次に情報処理手段９８０はＳ２０６「配信先端末情報」に進み、画像の送信先として指定されている携帯電話４０Ａに対して、送受信手段９６５と携帯電話回線４４とを介して通信を開始する処理を行う。そして、合成画像の送信先の通信機器である携帯電話４０Ａから、当該携帯電話４０Ａの機種名、表示手段の表示画素数、表示階調、携帯電話４０Ａにて再生可能な画像の圧縮フォーマット、携帯電話４０Ａにて受信可能な最大の画像ファイル容量等の配信先端末情報を取得する処理を行う。なお、当該配信先端末情報は、携帯電話４０Ａから取得する代わりに、元画像やテンプレート画像とともに利用者Ａさんのパソコン８０等から取得するようにしてもよい。
【００８６】
また、記録手段９８６に予め、携帯電話等の携帯端末（通信機器）の機種名と、その携帯端末の表示手段の表示画素数、表示階調、当該携帯端末にて再生可能な画像の圧縮フォーマット、当該携帯端末にて受信可能な最大の画像ファイル容量等の配信先端末情報を関連付けて記録しておき、携帯電話４０Ａやパソコン８０から画像の送信先の携帯端末の機種名を取得した際に、当該取得した携帯端末の機種名に基づいて、記録手段９８６に関連付けて記録されている表示画素数や表示階調等の情報を読み出して、その情報を配信先端末情報としてもよい。
【００８７】
自動画質補正処理手段９９４にて主画像の画質補正処理が終了すると、情報処理手段９８０はＳ２０８「画像リサイズ処理」にて、画質補正が終了した元画像（補正画像）を取得して、前記取得した配信先端末情報とともに画素数リサイズ処理手段９９３に対して出力する。画素数リサイズ処理手段９９３では、情報処理手段９８０から取得した、配信端末情報に含まれる携帯電話４０Ａにて再生可能な画素数や階調に基づいて、元画像を該当する画素数や階調に変換する画質補正処理を行う。Ｓ２０８にて、画像の送信先の表示能力等に合わせた画素数等のリサイズ処理が終了すると、リサイズ処理等が終了した主画像（補正画像）を一時期記録手段９８６等に記録する処理を行う。
【００８８】
画素数リサイズ処理手段９９３にて主画像の画質補正処理が終了すると、情報処理手段９８０が実施する処理はＳ２１０「画像リサイズ処理」に進み、記録手段９８６に記録されているテンプレート画像ファイルを読み出して前記配信端末情報とともに画素数リサイズ処理手段９９３に出力する。画素数リサイズ処理手段９９３では、配信端末情報に含まれる画素数や階調に基づいて、テンプレート画像を該当する画素数や階調に変換する画質補正処理を行う。Ｓ２１０にて画像の送信先の表示能力等に合わせた画素数等のリサイズ処理が終了すると、リサイズ処理等が終了したテンプレート画像を一時期記録手段９８６等に記録する。
【００８９】
次のＳ２１２「圧縮処理」にて情報処理手段９８０は、Ｓ２０８にて画素数リサイズ処理等の画質補正処理を行った元画像と、配信先端末情報に記載されている圧縮フォーマットとファイル容量（圧縮後のファイルサイズ）とを圧縮伸長手段９６７に対して出力する処理を行う。圧縮伸長手段９６７では、情報処理手段９８０から取得した圧縮フォーマットとファイル容量とに基づいて、画素数リサイズ処理等を実施した元画像（補正画像）に対して圧縮処理の画質補正処理を行う。そして、圧縮処理済みの元画像に対して図６に示したような関連情報を付属情報領域に記載した元画像ファイルを生成して、送受信手段９６５を介して携帯電話４０Ａに対して送信する処理を行う。該元画像ファイルは、携帯電話回線４４、基地局４２Ａを介してＢさんの携帯電話４０Ａに送信される。
【００９０】
次のＳ２１４「圧縮処理」にて情報処理手段９８０は、Ｓ２１０にて画素数リサイズ処理等の画質補正処理を行ったテンプレート画像と、配信先端末情報に記載されている圧縮フォーマットとファイル容量（圧縮後のファイルサイズ）とを圧縮伸長手段９６７に対して出力する処理を行う。圧縮伸長手段９６７では、情報処理手段９８０から取得した圧縮フォーマットとファイル容量とに基づいて、テンプレート画像に対して圧縮処理の画質補正処理を行う。そして、圧縮処理済みのテンプレート画像に対して必要に応じて図６に示したような関連情報を付属情報領域に記載したテンプレート画像ファイルを生成して、送受信手段９６５を介して携帯電話４０Ａに対して送信する処理を行う。該テンプレート画像ファイルは、携帯電話回線４４、基地局４２Ａを介してＢさんの携帯電話４０Ａに送信される。
【００９１】
前記テンプレート画像ファイルと元画像ファイルは、携帯電話４０Ａの送受信手段４５３がＳ３００「通信データ入出力」にて受信する。すると、受信したテンプレート画像ファイルと元画像ファイルは送受信手段４５３から不揮発性メモリ４８２等の記録手段に出力される。情報処理手段４８０は、Ｓ３０２「画像処理」にて、元画像ファイルの付属情報領域に記載されている関連情報を読み出して、当該元画像と合成する画像が存在するか否かの判断を行う。合成する画像があると判断した場合には、その関連情報領域に記載されている合成画像ファイル名を読み出す処理を行う。そして、不揮発性メモリ４８２等の記録手段から当該元画像ファイルに記載されている圧縮処理済みの元画像と、テンプレート画像ファイルに記載されている圧縮済みのテンプレート画像を読み出して、画像処理手段４６７に出力する処理を行う。
【００９２】
画像処理手段４６７では、情報処理手段４８０から取得した元画像とテンプレート画像に対して所定の伸長処理を実施する。伸長処理が終了すると、伸長処理後の元画像とテンプレート画像とは不揮発性メモリ４８２等の記録手段に一時記録される。次に情報処理手段４８０は、不揮発性メモリ４８２等の記録手段に記録されている伸長処理後の元画像とテンプレート画像を読み出して、該読み出した元画像の上にテンプレート画像を合成して合成画像を生成する処理を行う。
【００９３】
このようにして合成画像の生成処理が終了すると情報処理手段４８０は、合成した画像を表示可能な画像データ（例えばＹ、Ｃｒ、Ｃｂ等の画像データ）に変換した後に、Ｓ３０４「テンキー、ボタンにて指示入力」及びＳ３０６「情報処理」にて利用者が指示した合成画像の表示指示に基づいて、表示制御手段４６９に出力する処理を行う。
【００９４】
前記画像データを取得した表示制御手段４６９は、取得した画像データを表示手段４６８の表示に適した画像信号に変換する処理を行う。そしてＳ３０８「文字・画像情報表示」にて、表示手段４６８に前記合成画像とその画像の付属情報等が、文字又は図柄にて併せて表示される。
【００９５】
図７に、本発明に係る画像処理装置を用いて画像を携帯電話に送信する際の信号処理の流れ図を示す。同図に示す例は、画像サーバ９０から携帯電話４０Ａに対して、元画像とテンプレート画像とを合成処理したテンプレート合成画像を送信して、携帯電話４０Ａ側で表示処理を行う場合の実施例である。
【００９６】
同図に示すように、Ｓ１００〜Ｓ２１０までの処理は図５に示した実施例と同一の処理であるので、説明を省略する。
【００９７】
Ｓ２２０「画像合成処理」にて画像サーバ９０の情報処理手段９８０は、記録手段９８６に一時記録されている画質補正処理済みの元画像（補正画像）とテンプレート画像とを読み出して、元画像（補正画像）の上にテンプレート画像を合成して合成画像を生成する処理を行う。このようにして得られた合成画像は、配信先端末情報に記載されている画素数や階調を有しているので、配信先端末情報に記載されている圧縮フォーマットにて圧縮処理を行うことによって携帯電話４０Ａに対して送信することが可能となる。
【００９８】
次のＳ２２２「圧縮処理」にて情報処理手段９８０は、Ｓ２２０にて生成した合成画像と、配信先端末情報に記載されている圧縮フォーマットとファイル容量（圧縮後のファイルサイズ）とを圧縮伸長手段９６７に対して出力する処理を行う。圧縮伸長手段９６７では、情報処理手段９８０から取得した圧縮フォーマットとファイル容量とに基づいて、合成画像に対して圧縮処理の画質補正処理を行う。
【００９９】
Ｓ２２０にて合成画像の圧縮処理が終了すると、情報処理手段９８０は圧縮伸長手段９６７から圧縮画像を取得して、当該圧縮画像が記載されているテンプレート合成画像ファイルを生成して、送受信手段９６５を介して携帯電話４０Ａに対して送信する処理を行う。該テンプレート合成画像ファイルは、携帯電話回線４４、基地局４２Ａを介してＢさんの携帯電話４０Ａに送信される。
【０１００】
前記テンプレート合成画像ファイルを、携帯電話４０Ａの送受信手段４５３がＳ３００「通信データ入出力」にて受信すると、受信したテンプレート合成画像ファイルは送受信手段４５３から不揮発性メモリ４８２等の記録手段に一時記録される。情報処理手段４８０は、Ｓ３０３「画像処理」にて、テンプレート合成画像ファイルに記載されている付属情報部分を取り除き、所定の圧縮フォーマットの圧縮済みの合成画像を読み出して、画像処理手段４６７に出力する処理を行う。携帯電話４０Ａは画像サーバ９０から合成処理済のテンプレート合成画像を取得しているので、Ｓ３０３では画像の合成処理は行わずに、圧縮画像の伸長展開処理を実行する。
【０１０１】
画像処理手段４６７では、情報処理手段４８０から取得したテンプレート合成画像に対して所定の伸長処理を実施する。そして、表示可能な画像データ（例えばＹ、Ｃｒ、Ｃｂ等の画像データ）に変換した後に、Ｓ３０４「テンキー、ボタンにて指示入力」及びＳ３０６「情報処理」にて利用者が指示した合成画像の表示指示に基づいて、表示制御手段４６９に出力する処理を行う。
【０１０２】
前記画像データを取得した表示制御手段４６９は、取得した画像データを表示手段４６８の表示に適した画像信号に変換する処理を行う。そしてＳ３０８「文字・画像情報表示」にて、表示手段４６８に前記合成画像とその画像の付属情報等が、文字又は図柄にて併せて表示される。
【０１０３】
【発明の効果】
以上説明したように本発明に係る画像処理装置によれば、元画像とその元画像を修飾するテンプレート画像とを合成して表示する画像処理装置において、他の通信機器から受信又は記録手段から読み出した元画像とテンプレート画像とを合成して表示手段に表示し、前記合成に使用した元画像とテンプレート画像とをそれぞれ別々に関連付けて画像サーバ等の他の通信機器に送信するようにしたので、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施して合成画像を得ることが可能となるので、より好ましい合成画像を携帯端末等で受信し、表示することが可能となる。
【０１０４】
また、合成に使用した元画像とテンプレート画像とをそれぞれ別々に関連付けて画像サーバ等の他の通信機器に送信するようにしたので、元画像とテンプレート画像との色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。
【０１０５】
また、他の発明の形態によれば、元画像とその元画像を修飾するテンプレート画像とを合成して表示又は送信する画像処理装置において、他の通信機器から受信又は記録手段から読み出した元画像に対して自動画質補正処理を施して補正画像を生成し、該補正画像に合成するテンプレート画像を他の通信機器から受信又は記録手段から読み出して、前記補正画像と前記テンプレート画像とを合成して合成画像を生成し、該生成した合成画像を表示する表示手段、又は他の通信機器に送信する送信手段とを備えたので、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施することが可能となるので、より好ましい合成画像を携帯端末等で受信し、表示することが可能となる。
【０１０６】
また、合成に使用した元画像とテンプレート画像とにおける色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。
【０１０７】
また、他の発明の形態によれば、元画像とその元画像を修飾するテンプレート画像とに画質補正を実施する画像処理装置において、他の通信機器から受信又は記録手段から読み出した元画像若しくはテンプレート画像に対して自動画質補正処理を施して、補正画像若しくは補正テンプレート画像を生成し、該補正画像と補正テンプレート画像とをそれぞれ別々に関連付けて他の通信機器に送信するようにしたので、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施して合成画像を得ることが可能となるので、より好ましい合成画像を携帯端末等で受信し、表示することが可能となる。
【０１０８】
また、合成に使用した元画像とテンプレート画像とにおける色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。
【０１０９】
また、元画像にのみ画質補正処理を施し、テンプレート画像には補正を施さないか又は不要な補正を実施しないので、合成したテンプレート合成画像であるにもかかわらず、元画像やテンプレート画像に適切な自動補正が実施され、劣化の少ない合成画像を得ることが可能となる。
【０１１０】
また、画像合成装置と携帯電話等の通信機器との間において、送信可能な画像ファイルに対して容量制限が設けられている場合であっても、圧縮画質の破綻が少ない良好なテンプレート合成画像を送信することが可能となる。
【図面の簡単な説明】
【図１】本発明に係る画像合成装置を含む画像合成システムの構成例を示す図
【図２】携帯電話の信号処理系ブロック図
【図３】パソコンの信号処理系ブロック図
【図４】画像サーバの信号処理系ブロック図
【図５】本発明に係る画像処理装置を用いて画像を携帯電話に送信する際の信号処理の流れ図
【図６】画像サーバに送信する元画像ファイルの構成と、テンプレート画像のファイルの構成を示す図
【図７】本発明に係る画像処理装置を用いて画像を携帯電話に送信する際の信号処理の流れ図
【符号の説明】
４０、４０Ａ…携帯電話、４２、４２Ａ…基地局、４４…携帯電話回線、４８…通信網、８０…パソコン、９０…画像サーバ、４５２…アンテナ、４５３…送受信手段、４５４…送受信バッファ、４６７…画像処理手段、４６８…表示手段、４６９…表示制御手段、４７４…入力手段、４７５…Ｉ／Ｏ、４８０…情報処理手段、４８２…不揮発性メモリ、４８４…メモリ、４９０…カレンダ時計、４９１…電源、４９３…現在位置確認手段、４９５…スピーカ、４９６…Ｄ／Ａ変換器、４９７…マイク、４９８…Ａ／Ｄ変換器、４９９…バス、８６０…通信回線、８６５…送受信手段、８６８…表示手段、８６９…表示制御手段、８７４…入力手段、８７５…Ｉ／Ｏ、８７７…記録媒体、８７８…記録媒体装着部、８７９…記録媒体インターフェース、８８０…情報処理手段、８８１…メモリ、８８６…記録手段、８９０…カレンダ時計、８９９…バス、９６０…通信回線、９６５…送受信手段、９６７…圧縮伸長手段、９６８…表示手段、９６９…表示制御手段、９７４…入力手段、９７５…Ｉ／Ｏ、９８０…情報処理手段、９８１…メモリ、９８６…記録手段、９９０…カレンダ時計、９９３…画素数リサイズ処理手段、９９４…自動画質補正処理手段、９９９…バス
【発明の属する技術分野】
本発明は、通信端末及び画像サーバに係り、特に元画像やテンプレート画像に画質補正処理や合成処理を実施する通信端末及び画像サーバに関する。
【０００２】
【従来の技術】
テンプレートに合う構図の画像が簡単に撮影でき、しかも記録後のテンプレートの変更及び解除が可能な撮像装置が、特開平１１−１６８６８９号の公報に示されている。
【０００３】
また、構図としての線画が描かれたデザインプレートをビューカメラのフォーカシングプレートに手作業で重ねる作業を必要とせず、比較的短時間に印刷用の原画に対応する画像信号を得ることが可能な撮像装置が、特開平６−１１３２０２号の公報に示されている。当該撮像装置では、撮影画像とテンプレート画像との合成を記録前に実施して、記録する画像は撮影画像とテンプレート画像とが合成された画像となっている。また、合成信号に基づく表示手段を備えている。
【０００４】
近年ではインターネット等の通信網の発達により、通信網上に存在する画像サーバにて、画像のアルバムサービス、携帯電話用の画像変換サービス等の画像変換サービスが実施されている。当該画像変換サービスでは、利用者が送信した画像やテンプレート画像と合成処理を実施した合成画像に対して、明るさ補正やノイズ感補正などの画像処理を実施し、これらの観点からより好ましい画像に自動変換するサービスを提供している。
【０００５】
前述の画像サーバ等に於ける画像変換サービスでは、画像サーバに登録された画像がテンプレート合成によって加工された合成画像である場合に、テンプレート部分と主画像部分との間で画質の補正に関する切り分けができない。したがって、主画像部分とテンプレート画像部分とで解像度や階調が異なっているにもかかわらず、主画像部分とテンプレート部分とから構成される合成画像を一つの画像として画像変換を実施している。
【０００６】
【発明が解決しようとする課題】
しかしながら、上記の特開平１１−１６８６８９号の公報に示されている撮像装置及び特開平６−１１３２０２号の公報に示されている撮像装置では、扱うことができる画像ファイルの容量が小さい携帯端末（通信機器）に対して合成画像を送信する際に、元画像とテンプレート画像とを合成した後の合成画像に対して圧縮処理を実施している。
【０００７】
携帯電話用の画像変換サービスでは、通信インフラや携帯電話のメモリ資源の節約のため、一般に画像サーバと携帯端末間で通信する画像のファイル容量に制限が設けられている。更に、携帯端末において受信可能な画像ファイルの圧縮フォーマットとして、ＪＰＥＧ、ＧＩＦ、ＰＮＧ等の圧縮フォーマットが用いられている。したがって、圧縮前の画像の冗長度が低い画像（画素数が多いなど、画像の走査線の高周波成分が多い画像）であるほど、より高い圧縮率をかけて画像の高周波成分を落として画像ファイルの容量を制限以下の容量に圧縮する必要がある。
【０００８】
したがって、合成画像のうち、元画像が冗長度の高い画像であって、合成するテンプレート画像が冗長度の低い細密な画像である場合に、これらを合成した合成画像に対して画像の圧縮処理を実施すると、冗長度の低い部分に合わせて高圧縮の圧縮処理を行わざるを得ず、合成画像に於ける冗長度の高い元画像部分に圧縮歪みや色数の減少が多発するなど、好ましくない画質劣化が生じやすくなる。
【０００９】
また元画像とテンプレート画像とは一般に画像の色調や明るさ、ホワイトバランス、シャープネス等が異なるため、色調等が異なる元画像とテンプレート画像とをそのまま合成しても、ちぐはぐな合成画像ができてしまうという不具合を生じる。
【００１０】
本発明はこのような事情に鑑みてなされたもので、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施して合成画像を得ることが可能な通信端末及び画像サーバを提供することを目的としている。
【００１１】
また本発明は、合成に使用する元画像とテンプレート画像の色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することを可能とし、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能な通信端末及び画像サーバを提供することを目的としている。
【００１２】
【課題を解決するための手段】
本発明は前記目的を達成するために、元画像とその元画像を修飾するテンプレート画像とを合成して表示する通信端末において、元画像が圧縮されて記録された元画像ファイルを取得する手段と、前記元画像に合成するためのテンプレート画像が圧縮されて記録されたテンプレート画像ファイルを取得する手段と、前記元画像ファイル及びテンプレート画像ファイルをそれぞれ伸長する手段と、前記伸長した元画像とテンプレート画像とを合成して合成画像を表示する表示手段と、前記合成に使用した元画像及びテンプレート画像をそれぞれ圧縮する手段と、前記圧縮された元画像が記録された元画像ファイルと前記圧縮されたテンプレート画像が記録されたテンプレート画像ファイルとをそれぞれ関連付けて別々に画像サーバに送信する手段と、を備えたことを特徴としている。
【００１３】
本発明によれば、元画像とその元画像を修飾するテンプレート画像とを合成して表示する通信端末において、元画像が圧縮されて記録された元画像ファイルと、この元画像に合成するためのテンプレート画像が圧縮されて記録されたテンプレート画像ファイルとを取得し、これらの元画像ファイル及びテンプレート画像ファイルをそれぞれ伸長した元画像とテンプレート画像とを合成して合成画像を表示することにより合成画像を確認することができ、一方、この合成画像を送信する場合には、前記合成に使用した元画像及びテンプレート画像をそれぞれ圧縮し、それぞれ圧縮された元画像が記録された元画像ファイルとテンプレート画像が記録されたテンプレート画像ファイルとをそれぞれ関連付けて別々に画像サーバに送信するようにしたため、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施してテンプレート合成画像を得ることが可能となるので、画像サーバとの通信にファイル容量制限があっても、より好ましい画質のテンプレート合成画像の送信が可能となる。
【００１４】
請求項２に係る画像サーバは、請求項１に記載の通信端末から前記元画像ファイル及び前記テンプレート画像ファイルを受信する手段と、前記受信した元画像ファイル及び前記テンプレート画像ファイルをそれぞれ伸長する手段と、前記伸長した元画像に対して自動画質補正処理を施して元画像の画質を補正する元画像画質補正手段と、前記補正した元画像及び前記伸長したテンプレート画像を配信先端末情報に基づいて画素数をリサイズする画素数リサイズ処理手段と、前記リサイズされた元画像及びテンプレート画像をそれぞれ圧縮する手段と、前記圧縮された元画像が記録された元画像ファイルと前記圧縮されたテンプレート画像が記録されたテンプレート画像ファイルとをそれぞれ関連付けて別々に他の通信端末に送信する手段と、を備えたことを特徴としている。
請求項２に係る発明によれば、合成に使用した元画像とテンプレート画像とをそれぞれ別々に関連付けて受信するようにしたので、元画像とテンプレート画像との色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。また、画質補正した元画像及びテンプレート画像を配信先端末情報に基づいて画素数をリサイズするようにしたため、送信するファイル容量を小さくすることができる。
【００１５】
請求項３に係る画像サーバは、請求項１に記載の通信端末から前記元画像ファイル及び前記テンプレート画像ファイルを受信する手段と、前記受信した元画像ファイル及び前記テンプレート画像ファイルをそれぞれ伸長する手段と、前記伸長した元画像に対して自動画質補正処理を施して元画像の画質を補正する元画像画質補正手段と、前記補正した元画像及び前記伸長したテンプレート画像を配信先端末情報に基づいて画素数をリサイズする画素数リサイズ処理手段と、前記リサイズされた元画像とテンプレート画像とを合成して合成画像を生成する画像合成処理手段と、前記生成した合成画像を圧縮する手段と、前記圧縮された合成画像が記録された合成画像ファイルを他の通信端末に送信する手段と、を備えたことを特徴としている。
【００１６】
請求項３に係る発明によれば、画像合成に使用した元画像ファイルとテンプレート画像ファイルとをそれぞれ受信するようにしたため、元画像とテンプレート画像との色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。また、画質補正した元画像及びテンプレート画像を配信先端末情報に基づいて画素数をリサイズし、リサイズされた元画像とテンプレート画像とを合成して合成画像を圧縮して送信するようにしたため、送信するファイル容量を小さくすることができる。
【００２１】
【発明の実施の形態】
以下添付図面に従って、本発明に係る通信端末及び画像サーバの好ましい実施の形態について詳説する。
【００２２】
図１に本発明に係る通信端末及び画像サーバを含む画像処理システムの構成例を示す。
【００２３】
同図に示すように画像処理システムには、利用者が携行するとともにＬＣＤ等の表示手段に元画像とテンプレート画像等を合成した合成画像を表示することが可能な携帯電話４０（画像処理装置の機能を含むものであってもよい）と、合成画像の送信先となる通信機器の一形態である携帯電話４０Ａ（画像処理装置の機能を含むものであってもよい）と、携帯電話４０及び携帯電話４０Ａと無線による通信を行う基地局４２及び４２Ａと、携帯電話４０及び携帯電話４０Ａ用の携帯電話回線４４と、インターネット等の通信網４８と、元画像やテンプレート画像等の画像を記録したり画像を合成したりする利用者のパソコン８０（画像処理装置の機能を含むものであってもよい）と、通信網４８に対して通信の接続を行うことが可能な画像サーバ９０（画像処理装置）とが設けられている。
【００２４】
携帯電話回線４４と通信網４８とは画像サーバ９０等の中継装置を介して通信接続が可能となっており、携帯電話４０及び携帯電話４０Ａは、基地局４２又は基地局４２Ａ、携帯電話回線４４等を経由して、画像サーバ９０又はパソコン８０と元画像やテンプレート画像、合成画像その他の情報の送受信を行うことが可能となっている。
【００２５】
例えば利用者が、携帯電話４０又はパソコン８０を操作して元画像とテンプレート画像とを合成した合成画像を携帯電話４０Ａに送信する旨の指示を入力すると、その合成画像を構成している元画像とテンプレート画像とが画像サーバ９０に送信される。
【００２６】
画像サーバ９０では、必要に応じて元画像やテンプレート画像に対してホワイトバランス調節や階調調節処理、シャープネス処理等の画質の補正処理を実施するとともに、携帯電話４０Ａの画像の再生能力、表示能力、又は携帯電話４０Ａの通信能力等に応じて画素数を減少させるリサイズ処理や、合成処理、画像の圧縮処理を実施して所定のフォーマットに変換する処理を行う。
【００２７】
前記所定のフォーマットに変換された合成画像は、画像サーバ９０から携帯電話回線４４及び基地局４２Ａを介して携帯電話４０Ａに送信される。前記合成画像を受信した携帯電話４０Ａでは、受信した合成画像を表示手段に表示することによって、元画像とテンプレート画像とが合成された合成画像を閲覧することが可能となる。なお、本発明では携帯電話４０Ａが元画像とテンプレート画像とを別々に受信して、携帯電話４０Ａ内部で受信した元画像とテンプレート画像とを合成して合成画像を生成し、前記生成した合成画像を表示手段に表示するようにしてもよい。
【００２８】
図２に、通信機器の一形態である携帯電話４０の信号処理系ブロック図を示す。なお、携帯電話４０Ａも同様の信号処理系ブロックを備えている。
【００２９】
同図に示すように携帯電話４０（画像処理装置）の情報送受信部には、携帯電話回線と無線通信するためのアンテナ４５２、携帯電話回線用の送受信手段４５３（元画像受信手段、テンプレート画像受信手段、送信手段）及びリアルタイムにて送受信する情報を一時的に記憶する送受信バッファ４５４とが設けられている。
【００３０】
画像処理手段４６７（元画像画質補正手段、テンプレート画質補正手段、合成手段）は、送受信手段４５３を介して受信した画像、又は記録手段に記録されている画像に対して、ホワイトバランスの調節、ガンマ補正、シャープネス補正処理を実施したり、画像に対してＪＰＥＧやモーションＪＰＥＧ、ＭＰＥＧ、ＰＮＧ等に代表される手法で圧縮伸長処理を施したり、圧縮フォーマットの変更処理を実施したり、画素数の減少化若しくは増加処理や階調の減少化処理若しくは増加処理、フレームレートの変更処理、又は画素若しくは画像の間引き処理を施したりする画質補正処理を自動で実施することが可能となっている。
【００３１】
また、前述のように画像処理手段４６７が前記元画像画質補正手段、テンプレート画質補正手段、合成手段の機能を実施する代わりに、処理が高速な専用の元画像画質補正手段、テンプレート画質補正手段、合成手段等の画像処理手段を設けることによって、前記各種の画像処理の高速化を図ることも可能である。
【００３２】
また携帯電話４０には、合成画像等の静止画像や動画像、文字その他の各種の情報を表示する表示手段４６８と、情報処理手段の指令に基づいて表示手段４６８に対して表示用の画像信号を出力する表示制御手段４６９と、利用者が入力手段４７４を介して入力した各種情報を読み取って後述する情報処理手段に伝達したり、情報処理手段からの指示に基づいてＬＥＤ等の通知手段に表示指令を出力するＩ／Ｏ４７５とが設けられている。
【００３３】
また、携帯電話４０には、携帯電話４０の全体の制御を行う情報処理手段（ＣＰＵ）４８０（元画像画質補正手段、テンプレート画像画質補正手段、合成手段の機能を備えていてもよい）と、携帯電話の処理に関する各種定数やネットワーク上の通信機器に通信接続する際のダイヤルアップ電話番号、属性情報、ＵＲＬ（Uniform Resource Locators ）、ＩＰ（Internet Protocol ）アドレス、ゲートウェイ情報ＤＮＳ（Domain Name System）等の接続情報、画像、文書、音声その他の情報を記録する書き換え可能な不揮発性メモリ４８２（元画像記録手段、テンプレート画像記録手段）と、情報処理手段４８０を動作させるプログラムや各種定数が記録されているＲＯＭや情報処理手段４８０が処理を実行する際の作業領域となる記憶手段であるＲＡＭとから構成されるメモリ４８４と、時刻を刻むカレンダ時計４９０と、情報処理手段４８０を含む各回路に電源を供給する電源４９１とが設けられている。
【００３４】
また、携帯電話４０には、利用者が電話器として利用する際の受話器となるとともに、送受信手段４５３を介して受信した音声情報等の音声を出力するスピーカ４９５と、情報処理手段４８０等が出力する音声データをアナログの音声信号に変換するとともに増幅してスピーカ４９５に出力するＤ／Ａ変換器４９６と、音声を入力して音声信号に変換するマイク４９７と、マイク４９７から入力した音声信号を増幅するとともに情報処理手段４８０等に送出する音声データに変換するＡ／Ｄ変換器４９８とが設けられている。
【００３５】
また携帯電話４０には、当該携帯電話４０が存在する位置に関する情報を取得するＧＰＳ（Global Positioning System ）等の現在位置確認手段４９３が設けられている。
【００３６】
携帯電話４０内の情報処理手段４８０と、送受信バッファ４５４、表示制御手段４６９、Ｉ／Ｏ４７５、不揮発性メモリ４８２、メモリ４８４、カレンダ時計４９０、Ｄ／Ａ変換器４９６、Ａ／Ｄ変換器４９８等を含む各周辺回路は、バス４９９で接続されており、情報処理手段４８０は各々の周辺回路を制御するとともに高速な情報の送受信を行うことが可能となっている。したがって情報処理手段４８０は、実行する処理プログラムに基づいて各周辺回路を制御することが可能となっている。
【００３７】
なお、上記の説明では通信機器の例として携帯電話４０を用いた例で説明したが、画像の表示手段や記録手段、通信手段、画像の合成手段、画質補正手段等を備えた通信機器であれば、携帯型のパソコン、個人情報端末、電子手帳等の通信機器であってもよい。また、携帯電話４０等の通信機器には、被写体像を撮像する電子カメラが内蔵されていてもよい。
【００３８】
前記送受信手段４５３（元画像受信手段、テンプレート画像受信手段）は、画像サーバ９０等の通信機器から合成に使用する元画像やテンプレート画像を受信することが可能となっている。また、合成に使用する元画像や補正画像、テンプレート画像等は、不揮発性メモリ４８２（元画像記録手段、テンプレート画像記録手段）等の記録手段に記録されているものを情報処理手段４８０が読み出して、合成処理を実施するようにしてもよい。
【００３９】
また表示手段４６８には、受信した元画像若しくは不揮発性メモリ４８２等の記録手段に記録されている元画像若しくは補正画像と、受信したテンプレート画像若しくは記録手段に記録されているテンプレート画像等とを合成した画像を表示することが可能となっている。
【００４０】
また、送受信手段４５３（送信手段）は、前記合成に使用した元画像とテンプレート画像若しくは補正テンプレート画像とを、それぞれ別々に関連付けて画像サーバ９０又は携帯電話４０Ａ等の通信機器に送信することが可能となっている。
【００４１】
図３に、利用者が操作するパソコンの信号処理系ブロック図を示す。
【００４２】
同図に示すようにパソコン８０（画像処理装置）の情報送受信部には、通信回線８６０とルータ、通信網４８を介して他の通信機器（画像サーバ９０、携帯電話４０、携帯電話４０Ａ等）と情報の送受信を行う送受信手段８６５（元画像受信手段、テンプレート画像受信手段、送信手段）が設けられている。
【００４３】
また、パソコン８０には、必要に応じて画像や文字その他の情報を確認のために表示する表示手段８６８と、情報処理手段の指令に基づいて表示手段８６８に対して表示用の画像信号を出力する表示制御手段８６９と、管理者が入力手段８７４を介して入力した各種情報を読み取って後述する情報処理手段に伝達したり、情報処理手段からの指示に基づいてＬＥＤ等の通知手段に表示指令を出力するＩ／Ｏ８７５とが設けられている。
【００４４】
また、パソコン８０には、記録媒体８７７（元画像記録手段、テンプレート画像記録手段）を着脱可能に装着する記録媒体装着部８７８と、記録媒体８７７に対して画像データ等の情報を記録したり読み出したりする記録媒体インターフェース８７９とが設けられている。なお、記録媒体８７７は、磁気記録式の記録媒体、光記録式の記録媒体、半導体記録式の記録媒体その他の記録媒体である。
【００４５】
また、パソコン８０には、パソコン８０の全体の制御を行う情報処理手段（ＣＰＵ）８８０（元画像画質補正手段、テンプレート画像補正手段、合成手段）と、情報処理手段８８０を動作させるプログラムや各種定数が記録されているＲＯＭや情報処理手段８８０が処理を実行する際の作業領域となる記録手段であるＲＡＭとから構成されるメモリ８８１と、パソコン８０の処理に関する各種定数やネットワーク上の自己の属性情報、ＵＲＬ（Uniform Resource Locators ）、アドレス、サイトアドレス、ゲートウェイ情報ＤＮＳ（Domain Name System）等の接続情報、元画像並びにテンプレート画像、その他の各種情報を記録するハードディスク等の記録手段８８６（元画像記録手段、テンプレート画像記録手段）と、時刻を刻むカレンダ時計８９０とが設けられている。
【００４６】
同図に示すように情報処理手段８８０と、表示制御手段８６９、Ｉ／Ｏ８７５、メモリ８８１、記録手段８８６、カレンダ時計８９０等を含む各周辺回路はバス８９９で接続されており、情報処理手段８８０は各々の周辺回路を制御することが可能であるとともに、情報処理手段８８０が実行する処理プログラムに基づいて周辺の各機器を制御することが可能となっている。
【００４７】
前記情報処理手段８８０は、各種の画像に対してホワイトバランスの調節、ガンマ補正、シャープネス補正処理を実施したり、画像に対してＪＰＥＧやモーションＪＰＥＧ、ＭＰＥＧ、ＰＮＧ等に代表される手法で圧縮伸長処理を施したり、圧縮フォーマットの変更処理を実施したり、画素数の減少化若しくは増加処理や階調の減少化処理若しくは増加処理、フレームレートの変更処理、又は画素若しくは画像の間引き処理を施したりする画質補正処理を自動で実施することが可能となっている。
【００４８】
なお、前述のように情報処理手段８８０が前記元画像画質補正手段、テンプレート画質補正手段、合成手段の機能を実施する代わりに、処理が高速な専用の元画像画質補正手段、テンプレート画質補正手段、合成手段等の画像処理手段を設けることによって、前記各種の画像処理の高速化を図ることも可能である。
【００４９】
前記送受信手段８６５（元画像受信手段、テンプレート画像受信手段）は、画像サーバ９０等の通信機器から合成に使用する元画像やテンプレート画像を受信することが可能となっている。また、合成に使用する元画像や補正画像、テンプレート画像は、記録手段８８６又は記録媒体８７７（元画像記録手段、テンプレート画像記録手段）等の記録手段に記録されているものを情報処理手段８８０が読み出して、合成処理を実施するようにしてもよい。
【００５０】
また表示手段８６８には、受信した元画像又は、記録手段８８６若しくは記録媒体８７７等に記録されている元画像若しくは補正画像と、受信したテンプレート画像、又は記録手段８８６若しくは記録媒体８７７等に記録されているテンプレート画像とを合成した画像を表示することが可能となっている。
【００５１】
また、送受信手段８６５（送信手段）は、前記合成に使用した元画像とテンプレート画像若しくは補正テンプレート画像とを、それぞれ別々に関連付けて画像サーバ９０又は携帯電話４０Ａ等の通信機器に送信することが可能となっている。
【００５２】
前記情報処理手段８８０（元画像画質補正手段、テンプレート画質補正手段）は、受信したテンプレート画像若しくは記録手段８８６に記録されているテンプレート画像、又は、受信した元画像若しくは記録手段８８６に記録されている元画像に対して自動画質補正処理を施して、補正テンプレート画像又は補正画像を生成することが可能となっている。
【００５３】
図４に、本発明に係る画像サーバの信号処理系ブロック図を示す。
【００５４】
同図に示す画像サーバ９０（画像処理装置）は、携帯電話４０、携帯電話４０Ａ等の通信機器に、元画像、テンプレート画像、合成画像その他の画像を送信することが可能な画像サーバである。
【００５５】
同図に示すように画像サーバ９０の情報送受信部には、通信回線９６０とルータ、通信網４８を介して他の通信機器（パソコン８０、携帯電話４０、携帯電話４０Ａ又はその他の個人情報端末等の通信機器）と情報の送受信を行う送受信手段９６５（元画像受信手段、テンプレート画像受信手段、送信手段）が設けられている。
【００５６】
また、画像サーバ９０には、静止画又は動画のオリジナル画像データをＪＰＥＧやモーションＪＰＥＧ、ＭＰＥＧ、ＰＮＧ等に代表される手法で圧縮処理を施したり、画素数の減少化処理や階調の減少化処理、フレームレートの変更処理、又は画素若しくは画像の間引き処理を施したり、圧縮した画像データ等を伸張展開処理する画質補正処理を実施して、個々の通信機器の表示手段に表示可能な画像を生成する圧縮伸長手段９６７（元画像画質補正手段、テンプレート画質補正手段）が設けられている。なお、圧縮伸長手段９６７は、既に所定の圧縮フォーマットで圧縮処理されている画像を、別の圧縮フォーマットに変換する画質補正機能を備えていてもよい。
【００５７】
また、画像サーバ９０には、必要に応じて画像や文字その他の情報を確認のために表示する表示手段９６８と、情報処理手段の指令に基づいて表示手段９６８に対して表示用の画像信号を出力する表示制御手段９６９と、管理者が入力手段９７４を介して入力した各種情報を読み取って後述する情報処理手段に伝達したり、情報処理手段からの指示に基づいてＬＥＤ等の通知手段に表示指令を出力するＩ／Ｏ９７５とが設けられている。
【００５８】
また、画像サーバ９０には、画像サーバ９０の全体の制御を行う情報処理手段（ＣＰＵ）９８０（元画像画質補正手段、テンプレート画質補正手段、合成手段の機能を含むものであってもよい）と、情報処理手段９８０を動作させるプログラムや各種定数が記録されているＲＯＭや情報処理手段９８０が処理を実行する際の作業領域となる記録手段であるＲＡＭとから構成されるメモリ９８１と、画像サーバ９０の処理に関する各種定数やネットワーク上の自己の属性情報、ＵＲＬ（Uniform Resource Locators ）、アドレス、サイトアドレス、ゲートウェイ情報ＤＮＳ（Domain Name System）等の接続情報、元画像、テンプレート画像その他の各種情報を記録するハードディスク等の記録手段９８６（元画像記録手段、テンプレート画像記録手段）と、時刻を刻むカレンダ時計９９０とが設けられている。
【００５９】
また画像サーバ９０には、元画像やテンプレート画像、合成画像に対して画素数の減少化処理、若しくは画素数の増加処理、階調の減少化処理若しくは階調の増加処理、フレームレートの変更処理、画像における画素の間引き処理若しくは画像の間引き処理等の画質補正処理を施する画素数リサイズ処理手段９９３（元画像画質補正手段、テンプレート画質補正手段）が設けられている。
【００６０】
また画像サーバ９０には、元画像やテンプレート画像、合成画像に対してホワイトバランスの調節や色相の調節、ガンマ補正、シャープネス補正処理等の画質補正の画像処理を自動で実施する自動画質補正処理手段９９４（元画像画質補正手段、テンプレート画質補正手段）が設けられている。
【００６１】
なお、前述のように圧縮伸長手段９６７が各画像に対して圧縮伸長処理を実施する代わりに、情報処理手段９８０が各画像に対して圧縮伸長処理や圧縮フォーマットの変換処理等の画質補正処理を実施するようにしても、本発明の目的を達成することが可能である。
【００６２】
また、前述のように画素数リサイズ処理手段９９３が画素数の変換処理等を実施する代わりに、情報処理手段９８０が画素数の変換処理等の画質補正処理を実施するようにしても、本発明の目的を達成することが可能である。
【００６３】
また同様に、自動画質補正処理手段９９４がホワイトバランス補正等の画質補正を実施する代わりに、情報処理手段９８０がホワイトバランス補正等の画質補正を実施するようにしても、本発明の目的を達成することが可能である。
【００６４】
同図に示すように情報処理手段９８０と、表示制御手段９６９、Ｉ／Ｏ９７５、メモリ９８１、記録手段９８６、カレンダ時計９９０等を含む各周辺回路はバス９９９で接続されており、情報処理手段９８０は各々の周辺回路を制御することが可能であるとともに、情報処理手段９８０が実行する処理プログラムに基づいて周辺の各機器を制御することが可能となっている。
【００６５】
なお、上記の説明では、携帯電話４０等と画像サーバ９０とパソコン８０とが独立した別の通信機器である実施例で説明したが、本発明はこれに限定されるものではなく、画像サーバ９０とパソコン８０等が単一の画像処理装置にて構成されていても本発明の目的を達成することが可能である。
【００６６】
前記送受信手段９６５（元画像受信手段、テンプレート画像受信手段）は、パソコン８０や携帯電話４０等の通信機器から合成に使用する元画像やテンプレート画像を受信することが可能となっている。また、合成に使用する元画像や補正画像、テンプレート画像は、記録手段９８６（元画像記録手段、テンプレート画像記録手段）等に記録されているものを情報処理手段９８０が読み出して、合成処理を実施するようにしてもよい。
【００６７】
また表示手段９６８には、受信した元画像又は、記録手段９８６等に記録されている元画像若しくは補正画像と、受信したテンプレート画像若しくは、記録手段９８６等に記録されているテンプレート画像とを合成した画像を表示することが可能となっている。
【００６８】
また送受信手段９６５（送信手段）は、前記合成に使用した元画像とテンプレート画像若しくは補正テンプレート画像とを、それぞれ別々に関連付けてパソコン８０又は携帯電話４０Ａ等の通信機器に送信することが可能となっている。
【００６９】
前記圧縮伸長手段９６７、画素数リサイズ処理手段９９３、自動画質補正処理手段９９４、又は情報処理手段９８０（元画像画質補正手段、テンプレート画質補正手段）は、受信したテンプレート画像若しくは記録手段９８６に記録されているテンプレート画像、又は、受信した元画像若しくは記録手段９８６に記録されている元画像に対して自動画質補正処理を施して、補正テンプレート画像又は補正画像を生成することが可能となっている。
【００７０】
図５に、本発明に係る画像処理装置を用いて画像を携帯電話に送信する際の信号処理の流れ図を示す。同図に示す例は、画像サーバ９０から携帯電話４０Ａに対して、圧縮処理を実施した元画像と圧縮処理を実施したテンプレート画像とをそれぞれ別々に関連付けて送信する場合の実施例である。
【００７１】
同図に示すように、利用者Ａさんが自己のパソコン８０（携帯電話４０であってもよい）を操作して、記録手段８８６に記録されている元画像ファイルから元画像を読み出して表示手段８６８に表示する指示を入力する。
【００７２】
次に利用者は、パソコン８０に設けられている入力手段８７４を操作して、画像サーバ９０から前記元画像に対して合成処理を行うのに適したテンプレート画像を取得する旨の指示を入力する。前記指示を取得したパソコン８０の情報処理手段８８０は、送受信手段８６５と通信網４８を介して所定の画像サーバ９０と通信を開始して、画像サーバ９０の記録手段９８６に記録されているテンプレート画像のメニューを取得する。
【００７３】
前記テンプレート画像のメニューをパソコン８０の情報処理手段８８０が送受信手段８６５を介して受信すると、情報処理手段８８０は受信したテンプレート画像のメニューを、表示手段９６８に表示する処理を行う。利用者Ａさんは、表示手段８６８に表示されているテンプレート画像の一覧表示等のメニューを見ながら、所望のテンプレート画像を選択する旨のテンプレート選択指示を入力手段８７４を介して入力する。するとそのテンプレート選択指示の情報は、送受信手段８６５を介して画像サーバ９０に送信される。
【００７４】
前記テンプレート選択指示の情報を画像サーバ９０の情報処理手段９８０が送受信手段９６５を介して取得すると、記録手段９８６に記録されている所定のテンプレート画像ファイルを読み出して、送受信手段９６５を介して利用者Ａさんのパソコン８０に送信する処理を行う。
【００７５】
前記テンプレート画像ファイルは、通信網４８と送受信手段８６５を介してパソコン８０の情報処理手段８８０が取得する。特に通信手段を用いて画像を転送する場合には、ファイルサイズができる限り小さいことが要求されるので、一般に圧縮処理を施された画像ファイルが用いられる。したがって圧縮されたテンプレート画像ファイルを情報処理手段８８０が取得すると、情報処理手段８８０は画像ファイルに含まれるテンプレート画像（主画像部分）を読み出して、そのテンプレート画像に対して所定の伸長処理を施す。
【００７６】
前記伸長処理が終了したテンプレート画像は、ステップＳ１００「テンプレート画像合成処理」（以降Ｓ１００のように省略して記載する）にて、情報処理手段８８０によって元画像と合成する処理が行なわれ、合成画像が生成されて表示手段８６８に表示する処理を行う。なお、合成する元画像は、前述のように記録手段８８６に記録されている画像を読み出してもよいし、画像サーバ９０等の他の通信機器から送受信手段８６５を介して取得してもよい。また、合成するテンプレート画像は、前述のように画像サーバ９０等の他の通信機器から送受信手段８６５を介して取得してもよいし、元画像と同様に記録手段８８６に記録されているテンプレート画像を読み出して取得してもよい。
【００７７】
またこのときに情報処理手段８８０は、自動で又は利用者の指示に基づいて、元画像又はテンプレート画像に対して明るさの補正やホワイトバランスの調節、ガンマ補正、画素数の変更処理、階調の変更処理、シャープネス補正処理その他の画質補正処理を実施して、元画像とテンプレート画像との色合いのバランスや画質の細密さのバランスを調節するようにしてもよい。なお、当該画質の補正処理は、パソコン８０で実施してもよいし、後述するように画像サーバ９０で実施してもよいし、携帯電話４０、携帯電話４０Ａで実施するようにしてもよい。
【００７８】
利用者Ａさんが、表示手段に表示されている合成画像を利用者Ｂさんの携帯電話４０Ａに送信する場合には、携帯電話４０Ａのアドレスを指定して合成画像を送信する旨の指示を入力手段４７４を介して入力する。その送信する旨の情報は、Ｉ／Ｏ４７５を介して情報処理手段４８０に伝達される。前記合成画像の送信の指示を取得した情報処理手段４８０は、表示手段４６８に表示されている合成画像ではなく、その合成に使用した元画像とテンプレート画像と、画像の送信先の通信機器（携帯電話４０Ａ等を特定するメールアドレス、ＩＤ、電話番号、その他の識別情報）をそれぞれ別々に関連付けて画像サーバ９０（他の通信機器）に送受信手段４５３を介して送信する処理を行う。
【００７９】
図６に、画像サーバ９０に送信する元画像ファイルの構成と、元画像を修飾するテンプレート画像のファイル構成を示す。
【００８０】
同図に示すように元画像ファイルには、撮影年月日やホワイトバランス等の各種の撮影情報等が記載されている付属情報記録部分と、３２０×２４０の画素数で構成されている主画像と、見出し用に用いる縮小画像であるサムネイル画像とが記録されている。また付属情報記録部分には、合成するテンプレート画像が存在することを示す合成画像の有無情報と、合成するテンプレート画像のファイル名とが記載されている関連情報記録領域が記載されている。
【００８１】
一方のテンプレート画像ファイルにも、当該テンプレート画像の作成日時や当該テンプレート画像ファイルのファイル名とが記録されている画像情報記録領域と、６４０×４８０の画素数で構成されているテンプレート画像の主画像と、見出し用に用いる縮小画像であるサムネイル画像とが記録されている。また付属情報記録部分には、合成する主画像が存在することを示す合成画像の有無情報と、合成する主画像のファイル名とが記載されている関連情報記録領域が記載されている。このテンプレート画像ファイルには、前記関連情報は記載されていなくても、主画像ファイルの関連情報を参照することによって主画像とテンプレート画像とを合成することが可能である。
【００８２】
同図に示すように、画像サーバ９０に送信する元画像は、リサイズ処理を実施する前の３２０×２４０の画素数を有する主画像であってもよいし、合成画像を送信する先の携帯電話４０Ａの表示手段の表示能力に応じた画素数（例えば１００×１００画素など）にリサイズする処理や、テンプレート画像に合わせたホワイトバランス処理等の画質補正処理を実施した後の画像を送信するようにしてもよい。また、画像サーバ９０に送信するテンプレート画像の主画像に対しても同様に、画質の補正処理を実施してから送信するようにしてもよい。
【００８３】
前記主画像とテンプレート画像の画像ファイルをそれぞれ別々に受信した画像サーバ９０では、Ｓ２００「元画像記録」及びＳ２０２「テンプレート画像記録」にて、受信した元画像ファイルと受信したテンプレート画像ファイルとを一時期記録手段９８６に記録する処理を行う。
【００８４】
元画像とテンプレート画像とを受信すると画像サーバ９０の情報処理手段９８０は、Ｓ２０４「自動画質補正処理」にて、受信した元画像の主画像を自動画質補正処理手段９９４に出力して、主画像に対して自動画質補正処理を実施する。このとき情報処理手段９８０は、テンプレート画像の明るさや色調、シャープネスに関する情報を読み出して自動画質補正処理手段９９４に出力し、元画像に対して画質補正を実施する際の指針とするようにしてもよい。
【００８５】
次に情報処理手段９８０はＳ２０６「配信先端末情報」に進み、画像の送信先として指定されている携帯電話４０Ａに対して、送受信手段９６５と携帯電話回線４４とを介して通信を開始する処理を行う。そして、合成画像の送信先の通信機器である携帯電話４０Ａから、当該携帯電話４０Ａの機種名、表示手段の表示画素数、表示階調、携帯電話４０Ａにて再生可能な画像の圧縮フォーマット、携帯電話４０Ａにて受信可能な最大の画像ファイル容量等の配信先端末情報を取得する処理を行う。なお、当該配信先端末情報は、携帯電話４０Ａから取得する代わりに、元画像やテンプレート画像とともに利用者Ａさんのパソコン８０等から取得するようにしてもよい。
【００８６】
また、記録手段９８６に予め、携帯電話等の携帯端末（通信機器）の機種名と、その携帯端末の表示手段の表示画素数、表示階調、当該携帯端末にて再生可能な画像の圧縮フォーマット、当該携帯端末にて受信可能な最大の画像ファイル容量等の配信先端末情報を関連付けて記録しておき、携帯電話４０Ａやパソコン８０から画像の送信先の携帯端末の機種名を取得した際に、当該取得した携帯端末の機種名に基づいて、記録手段９８６に関連付けて記録されている表示画素数や表示階調等の情報を読み出して、その情報を配信先端末情報としてもよい。
【００８７】
自動画質補正処理手段９９４にて主画像の画質補正処理が終了すると、情報処理手段９８０はＳ２０８「画像リサイズ処理」にて、画質補正が終了した元画像（補正画像）を取得して、前記取得した配信先端末情報とともに画素数リサイズ処理手段９９３に対して出力する。画素数リサイズ処理手段９９３では、情報処理手段９８０から取得した、配信端末情報に含まれる携帯電話４０Ａにて再生可能な画素数や階調に基づいて、元画像を該当する画素数や階調に変換する画質補正処理を行う。Ｓ２０８にて、画像の送信先の表示能力等に合わせた画素数等のリサイズ処理が終了すると、リサイズ処理等が終了した主画像（補正画像）を一時期記録手段９８６等に記録する処理を行う。
【００８８】
画素数リサイズ処理手段９９３にて主画像の画質補正処理が終了すると、情報処理手段９８０が実施する処理はＳ２１０「画像リサイズ処理」に進み、記録手段９８６に記録されているテンプレート画像ファイルを読み出して前記配信端末情報とともに画素数リサイズ処理手段９９３に出力する。画素数リサイズ処理手段９９３では、配信端末情報に含まれる画素数や階調に基づいて、テンプレート画像を該当する画素数や階調に変換する画質補正処理を行う。Ｓ２１０にて画像の送信先の表示能力等に合わせた画素数等のリサイズ処理が終了すると、リサイズ処理等が終了したテンプレート画像を一時期記録手段９８６等に記録する。
【００８９】
次のＳ２１２「圧縮処理」にて情報処理手段９８０は、Ｓ２０８にて画素数リサイズ処理等の画質補正処理を行った元画像と、配信先端末情報に記載されている圧縮フォーマットとファイル容量（圧縮後のファイルサイズ）とを圧縮伸長手段９６７に対して出力する処理を行う。圧縮伸長手段９６７では、情報処理手段９８０から取得した圧縮フォーマットとファイル容量とに基づいて、画素数リサイズ処理等を実施した元画像（補正画像）に対して圧縮処理の画質補正処理を行う。そして、圧縮処理済みの元画像に対して図６に示したような関連情報を付属情報領域に記載した元画像ファイルを生成して、送受信手段９６５を介して携帯電話４０Ａに対して送信する処理を行う。該元画像ファイルは、携帯電話回線４４、基地局４２Ａを介してＢさんの携帯電話４０Ａに送信される。
【００９０】
次のＳ２１４「圧縮処理」にて情報処理手段９８０は、Ｓ２１０にて画素数リサイズ処理等の画質補正処理を行ったテンプレート画像と、配信先端末情報に記載されている圧縮フォーマットとファイル容量（圧縮後のファイルサイズ）とを圧縮伸長手段９６７に対して出力する処理を行う。圧縮伸長手段９６７では、情報処理手段９８０から取得した圧縮フォーマットとファイル容量とに基づいて、テンプレート画像に対して圧縮処理の画質補正処理を行う。そして、圧縮処理済みのテンプレート画像に対して必要に応じて図６に示したような関連情報を付属情報領域に記載したテンプレート画像ファイルを生成して、送受信手段９６５を介して携帯電話４０Ａに対して送信する処理を行う。該テンプレート画像ファイルは、携帯電話回線４４、基地局４２Ａを介してＢさんの携帯電話４０Ａに送信される。
【００９１】
前記テンプレート画像ファイルと元画像ファイルは、携帯電話４０Ａの送受信手段４５３がＳ３００「通信データ入出力」にて受信する。すると、受信したテンプレート画像ファイルと元画像ファイルは送受信手段４５３から不揮発性メモリ４８２等の記録手段に出力される。情報処理手段４８０は、Ｓ３０２「画像処理」にて、元画像ファイルの付属情報領域に記載されている関連情報を読み出して、当該元画像と合成する画像が存在するか否かの判断を行う。合成する画像があると判断した場合には、その関連情報領域に記載されている合成画像ファイル名を読み出す処理を行う。そして、不揮発性メモリ４８２等の記録手段から当該元画像ファイルに記載されている圧縮処理済みの元画像と、テンプレート画像ファイルに記載されている圧縮済みのテンプレート画像を読み出して、画像処理手段４６７に出力する処理を行う。
【００９２】
画像処理手段４６７では、情報処理手段４８０から取得した元画像とテンプレート画像に対して所定の伸長処理を実施する。伸長処理が終了すると、伸長処理後の元画像とテンプレート画像とは不揮発性メモリ４８２等の記録手段に一時記録される。次に情報処理手段４８０は、不揮発性メモリ４８２等の記録手段に記録されている伸長処理後の元画像とテンプレート画像を読み出して、該読み出した元画像の上にテンプレート画像を合成して合成画像を生成する処理を行う。
【００９３】
このようにして合成画像の生成処理が終了すると情報処理手段４８０は、合成した画像を表示可能な画像データ（例えばＹ、Ｃｒ、Ｃｂ等の画像データ）に変換した後に、Ｓ３０４「テンキー、ボタンにて指示入力」及びＳ３０６「情報処理」にて利用者が指示した合成画像の表示指示に基づいて、表示制御手段４６９に出力する処理を行う。
【００９４】
前記画像データを取得した表示制御手段４６９は、取得した画像データを表示手段４６８の表示に適した画像信号に変換する処理を行う。そしてＳ３０８「文字・画像情報表示」にて、表示手段４６８に前記合成画像とその画像の付属情報等が、文字又は図柄にて併せて表示される。
【００９５】
図７に、本発明に係る画像処理装置を用いて画像を携帯電話に送信する際の信号処理の流れ図を示す。同図に示す例は、画像サーバ９０から携帯電話４０Ａに対して、元画像とテンプレート画像とを合成処理したテンプレート合成画像を送信して、携帯電話４０Ａ側で表示処理を行う場合の実施例である。
【００９６】
同図に示すように、Ｓ１００〜Ｓ２１０までの処理は図５に示した実施例と同一の処理であるので、説明を省略する。
【００９７】
Ｓ２２０「画像合成処理」にて画像サーバ９０の情報処理手段９８０は、記録手段９８６に一時記録されている画質補正処理済みの元画像（補正画像）とテンプレート画像とを読み出して、元画像（補正画像）の上にテンプレート画像を合成して合成画像を生成する処理を行う。このようにして得られた合成画像は、配信先端末情報に記載されている画素数や階調を有しているので、配信先端末情報に記載されている圧縮フォーマットにて圧縮処理を行うことによって携帯電話４０Ａに対して送信することが可能となる。
【００９８】
次のＳ２２２「圧縮処理」にて情報処理手段９８０は、Ｓ２２０にて生成した合成画像と、配信先端末情報に記載されている圧縮フォーマットとファイル容量（圧縮後のファイルサイズ）とを圧縮伸長手段９６７に対して出力する処理を行う。圧縮伸長手段９６７では、情報処理手段９８０から取得した圧縮フォーマットとファイル容量とに基づいて、合成画像に対して圧縮処理の画質補正処理を行う。
【００９９】
Ｓ２２０にて合成画像の圧縮処理が終了すると、情報処理手段９８０は圧縮伸長手段９６７から圧縮画像を取得して、当該圧縮画像が記載されているテンプレート合成画像ファイルを生成して、送受信手段９６５を介して携帯電話４０Ａに対して送信する処理を行う。該テンプレート合成画像ファイルは、携帯電話回線４４、基地局４２Ａを介してＢさんの携帯電話４０Ａに送信される。
【０１００】
前記テンプレート合成画像ファイルを、携帯電話４０Ａの送受信手段４５３がＳ３００「通信データ入出力」にて受信すると、受信したテンプレート合成画像ファイルは送受信手段４５３から不揮発性メモリ４８２等の記録手段に一時記録される。情報処理手段４８０は、Ｓ３０３「画像処理」にて、テンプレート合成画像ファイルに記載されている付属情報部分を取り除き、所定の圧縮フォーマットの圧縮済みの合成画像を読み出して、画像処理手段４６７に出力する処理を行う。携帯電話４０Ａは画像サーバ９０から合成処理済のテンプレート合成画像を取得しているので、Ｓ３０３では画像の合成処理は行わずに、圧縮画像の伸長展開処理を実行する。
【０１０１】
画像処理手段４６７では、情報処理手段４８０から取得したテンプレート合成画像に対して所定の伸長処理を実施する。そして、表示可能な画像データ（例えばＹ、Ｃｒ、Ｃｂ等の画像データ）に変換した後に、Ｓ３０４「テンキー、ボタンにて指示入力」及びＳ３０６「情報処理」にて利用者が指示した合成画像の表示指示に基づいて、表示制御手段４６９に出力する処理を行う。
【０１０２】
前記画像データを取得した表示制御手段４６９は、取得した画像データを表示手段４６８の表示に適した画像信号に変換する処理を行う。そしてＳ３０８「文字・画像情報表示」にて、表示手段４６８に前記合成画像とその画像の付属情報等が、文字又は図柄にて併せて表示される。
【０１０３】
【発明の効果】
以上説明したように本発明に係る画像処理装置によれば、元画像とその元画像を修飾するテンプレート画像とを合成して表示する画像処理装置において、他の通信機器から受信又は記録手段から読み出した元画像とテンプレート画像とを合成して表示手段に表示し、前記合成に使用した元画像とテンプレート画像とをそれぞれ別々に関連付けて画像サーバ等の他の通信機器に送信するようにしたので、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施して合成画像を得ることが可能となるので、より好ましい合成画像を携帯端末等で受信し、表示することが可能となる。
【０１０４】
また、合成に使用した元画像とテンプレート画像とをそれぞれ別々に関連付けて画像サーバ等の他の通信機器に送信するようにしたので、元画像とテンプレート画像との色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。
【０１０５】
また、他の発明の形態によれば、元画像とその元画像を修飾するテンプレート画像とを合成して表示又は送信する画像処理装置において、他の通信機器から受信又は記録手段から読み出した元画像に対して自動画質補正処理を施して補正画像を生成し、該補正画像に合成するテンプレート画像を他の通信機器から受信又は記録手段から読み出して、前記補正画像と前記テンプレート画像とを合成して合成画像を生成し、該生成した合成画像を表示する表示手段、又は他の通信機器に送信する送信手段とを備えたので、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施することが可能となるので、より好ましい合成画像を携帯端末等で受信し、表示することが可能となる。
【０１０６】
また、合成に使用した元画像とテンプレート画像とにおける色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。
【０１０７】
また、他の発明の形態によれば、元画像とその元画像を修飾するテンプレート画像とに画質補正を実施する画像処理装置において、他の通信機器から受信又は記録手段から読み出した元画像若しくはテンプレート画像に対して自動画質補正処理を施して、補正画像若しくは補正テンプレート画像を生成し、該補正画像と補正テンプレート画像とをそれぞれ別々に関連付けて他の通信機器に送信するようにしたので、冗長度の高い元画像に冗長度が低く細密なテンプレート画像を合成する場合であっても、冗長度の低いテンプレート画像にのみ高圧縮の圧縮処理を行い、冗長度の高い画像に対しては低圧縮の圧縮処理を実施するというように、別々に画質の補正処理を実施して合成画像を得ることが可能となるので、より好ましい合成画像を携帯端末等で受信し、表示することが可能となる。
【０１０８】
また、合成に使用した元画像とテンプレート画像とにおける色調や明るさ、ホワイトバランス、シャープネス等を独立して調節する画質補正処理を実施することが可能となり、画質破綻が少なく色や明るさのバランスがよい合成画像を得ることが可能となる。
【０１０９】
また、元画像にのみ画質補正処理を施し、テンプレート画像には補正を施さないか又は不要な補正を実施しないので、合成したテンプレート合成画像であるにもかかわらず、元画像やテンプレート画像に適切な自動補正が実施され、劣化の少ない合成画像を得ることが可能となる。
【０１１０】
また、画像合成装置と携帯電話等の通信機器との間において、送信可能な画像ファイルに対して容量制限が設けられている場合であっても、圧縮画質の破綻が少ない良好なテンプレート合成画像を送信することが可能となる。
【図面の簡単な説明】
【図１】本発明に係る画像合成装置を含む画像合成システムの構成例を示す図
【図２】携帯電話の信号処理系ブロック図
【図３】パソコンの信号処理系ブロック図
【図４】画像サーバの信号処理系ブロック図
【図５】本発明に係る画像処理装置を用いて画像を携帯電話に送信する際の信号処理の流れ図
【図６】画像サーバに送信する元画像ファイルの構成と、テンプレート画像のファイルの構成を示す図
【図７】本発明に係る画像処理装置を用いて画像を携帯電話に送信する際の信号処理の流れ図
【符号の説明】
４０、４０Ａ…携帯電話、４２、４２Ａ…基地局、４４…携帯電話回線、４８…通信網、８０…パソコン、９０…画像サーバ、４５２…アンテナ、４５３…送受信手段、４５４…送受信バッファ、４６７…画像処理手段、４６８…表示手段、４６９…表示制御手段、４７４…入力手段、４７５…Ｉ／Ｏ、４８０…情報処理手段、４８２…不揮発性メモリ、４８４…メモリ、４９０…カレンダ時計、４９１…電源、４９３…現在位置確認手段、４９５…スピーカ、４９６…Ｄ／Ａ変換器、４９７…マイク、４９８…Ａ／Ｄ変換器、４９９…バス、８６０…通信回線、８６５…送受信手段、８６８…表示手段、８６９…表示制御手段、８７４…入力手段、８７５…Ｉ／Ｏ、８７７…記録媒体、８７８…記録媒体装着部、８７９…記録媒体インターフェース、８８０…情報処理手段、８８１…メモリ、８８６…記録手段、８９０…カレンダ時計、８９９…バス、９６０…通信回線、９６５…送受信手段、９６７…圧縮伸長手段、９６８…表示手段、９６９…表示制御手段、９７４…入力手段、９７５…Ｉ／Ｏ、９８０…情報処理手段、９８１…メモリ、９８６…記録手段、９９０…カレンダ時計、９９３…画素数リサイズ処理手段、９９４…自動画質補正処理手段、９９９…バス
Claims (3)
- 元画像とその元画像を修飾するテンプレート画像とを合成して表示する通信端末において、
元画像が圧縮されて記録された元画像ファイルを取得する手段と、
前記元画像に合成するためのテンプレート画像が圧縮されて記録されたテンプレート画像ファイルを取得する手段と、
前記元画像ファイル及びテンプレート画像ファイルをそれぞれ伸長する手段と、
前記伸長した元画像とテンプレート画像とを合成して合成画像を表示する表示手段と、
前記合成に使用した元画像及びテンプレート画像をそれぞれ圧縮する手段と、
前記圧縮された元画像が記録された元画像ファイルと前記圧縮されたテンプレート画像が記録されたテンプレート画像ファイルとをそれぞれ関連付けて別々に画像サーバに送信する手段と、
を備えたことを特徴とする通信端末。 - 請求項１に記載の通信端末から前記元画像ファイル及び前記テンプレート画像ファイルを受信する手段と、
前記受信した元画像ファイル及び前記テンプレート画像ファイルをそれぞれ伸長する手段と、
前記伸長した元画像に対して自動画質補正処理を施して元画像の画質を補正する元画像画質補正手段と、
前記補正した元画像及び前記伸長したテンプレート画像を配信先端末情報に基づいて画素数をリサイズする画素数リサイズ処理手段と、
前記リサイズされた元画像及びテンプレート画像をそれぞれ圧縮する手段と、
前記圧縮された元画像が記録された元画像ファイルと前記圧縮されたテンプレート画像が記録されたテンプレート画像ファイルとをそれぞれ関連付けて別々に他の通信端末に送信する手段と、
を備えたことを特徴とする画像サーバ。 - 請求項１に記載の通信端末から前記元画像ファイル及び前記テンプレート画像ファイルを受信する手段と、
前記受信した元画像ファイル及び前記テンプレート画像ファイルをそれぞれ伸長する手段と、
前記伸長した元画像に対して自動画質補正処理を施して元画像の画質を補正する元画像画質補正手段と、
前記補正した元画像及び前記伸長したテンプレート画像を配信先端末情報に基づいて画素数をリサイズする画素数リサイズ処理手段と、
前記リサイズされた元画像とテンプレート画像とを合成して合成画像を生成する画像合成処理手段と、
前記生成した合成画像を圧縮する手段と、
前記圧縮された合成画像が記録された合成画像ファイルを他の通信端末に送信する手段と、
を備えたことを特徴とする画像サーバ。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002139905A JP4096354B2 (ja) | 2002-05-15 | 2002-05-15 | 通信端末及び画像サーバ |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002139905A JP4096354B2 (ja) | 2002-05-15 | 2002-05-15 | 通信端末及び画像サーバ |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003331274A JP2003331274A (ja) | 2003-11-21 |
| JP4096354B2 true JP4096354B2 (ja) | 2008-06-04 |
Family
ID=29700912
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002139905A Expired - Fee Related JP4096354B2 (ja) | 2002-05-15 | 2002-05-15 | 通信端末及び画像サーバ |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4096354B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| AU2011338800B2 (en) * | 2010-12-10 | 2015-04-02 | Vidyo, Inc. | Video stream presentation system and protocol |
| CN114170975B (zh) * | 2021-12-08 | 2023-05-30 | Tcl华星光电技术有限公司 | 显示器亮度调节方法、装置、显示装置及存储介质 |
-
2002
- 2002-05-15 JP JP2002139905A patent/JP4096354B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2003331274A (ja) | 2003-11-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7027084B1 (en) | Image communication system and an apparatus for and a method of processing an image | |
| US6957040B1 (en) | Image communication system | |
| US7289236B2 (en) | Apparatus, program, and method for managing duplicate images based on the image properties | |
| JP4842033B2 (ja) | 携帯端末機の画像表示装置及び方法 | |
| US20050041035A1 (en) | Electronic apparatus having a communication function and an image pickup function, and image display method and program | |
| JP4032210B2 (ja) | 携帯機器、画像送信システム、画像送信方法 | |
| US20020082001A1 (en) | Communication terminal and communication system | |
| JP2001346173A (ja) | 画像データ通信システム及び方法、並びに撮像装置及び画像データ処理方法 | |
| JP4431216B2 (ja) | データ通信システム | |
| JP2006293580A (ja) | 音声付き画像提供システム | |
| JPH1155607A (ja) | 画像処理システム | |
| JP4096354B2 (ja) | 通信端末及び画像サーバ | |
| JP2004032372A (ja) | 画像データ処理方法および携帯端末装置並びにプログラム | |
| KR101143408B1 (ko) | 화상 또는 영상 합성 서비스 제공 시스템 | |
| JP3985192B2 (ja) | 画像作成送信システム、画像作成送信方法、情報端末、及び、画像作成送信プログラム | |
| KR20060030278A (ko) | 이미지 편집 서비스를 제공하는 이동통신 시스템 및 방법 | |
| JP2005117228A (ja) | 画像サーバおよびその制御方法 | |
| JP2001045347A (ja) | データ通信システムおよびそのシステムを構成するディジタル・カメラ | |
| JP3988075B2 (ja) | 画像送信機器 | |
| JP2004120280A (ja) | 画像処理装置 | |
| JP2005184469A (ja) | デジタルスチルカメラ | |
| US20050202820A1 (en) | Standby application providing server | |
| JP2007281766A (ja) | 画像送信装置及びその送信方法 | |
| JP2005260393A (ja) | 撮像装置および記憶制御方法 | |
| JP4735636B2 (ja) | 携帯端末、及び、合成画像表示プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050208 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061208 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071121 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071126 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080125 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080218 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080302 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110321 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110321 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120321 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120321 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130321 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130321 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140321 Year of fee payment: 6 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |