JP3548852B2 - 写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラム - Google Patents

写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラム Download PDF

Info

Publication number
JP3548852B2
JP3548852B2 JP2002011936A JP2002011936A JP3548852B2 JP 3548852 B2 JP3548852 B2 JP 3548852B2 JP 2002011936 A JP2002011936 A JP 2002011936A JP 2002011936 A JP2002011936 A JP 2002011936A JP 3548852 B2 JP3548852 B2 JP 3548852B2
Authority
JP
Japan
Prior art keywords
stamp
image
user
button
pen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2002011936A
Other languages
English (en)
Other versions
JP2003037813A (ja
Inventor
尚仁 志岐
弘毅 今井
宏明 大西
修一 河本
武志 石橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Priority to JP2002011936A priority Critical patent/JP3548852B2/ja
Priority to PCT/JP2002/003519 priority patent/WO2002084993A1/ja
Priority to CNB028079574A priority patent/CN1237777C/zh
Priority to KR10-2003-7013182A priority patent/KR20030083763A/ko
Priority to TW091107096A priority patent/TW552462B/zh
Publication of JP2003037813A publication Critical patent/JP2003037813A/ja
Application granted granted Critical
Publication of JP3548852B2 publication Critical patent/JP3548852B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H04N1/00161Viewing or previewing
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07FCOIN-FREED OR LIKE APPARATUS
    • G07F17/00Coin-freed apparatus for hiring articles; Coin-freed facilities or services
    • G07F17/26Coin-freed apparatus for hiring articles; Coin-freed facilities or services for printing, stamping, franking, typing or teleprinting apparatus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H04N1/00167Processing or editing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H04N1/00185Image output
    • H04N1/00188Printing, e.g. prints or reprints
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3871Composing, repositioning or otherwise geometrically modifying originals the composed originals being of different kinds, e.g. low- and high-resolution originals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/34Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device for coin-freed systems ; Pay systems

Description

【0001】
【発明の属する技術分野】
本発明は、写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラムに関し、特に、例えば、撮影した画像を、娯楽性を持って編集することができるようにした写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラムに関する。
【0002】
【従来の技術】
従来、カメラでユーザを撮影し、これを予め用意されたフレーム画像と合成してシールシートやシール紙などに印刷して提供する、例えば、写真シール自動販売機(プリントクラブ(商標)など)に代表される画像印刷装置が知られている。
【0003】
そして、この画像印刷装置には、ユーザが、撮影された画像上に付属のペンで任意の文字や図形などを編集(いわゆる落書き)することができるようになされているものも存在する。
【0004】
また最近では、撮影された画像上に、より複雑な編集を行うことができるようにするため、画像印刷装置に様々な落書き機能が追加されている。これにより、ユーザは、撮影された画像上に、より複雑な編集を行うことができるようになってきた。
【0005】
【発明が解決しようとする課題】
しかしながら、様々な落書き機能を編集画面に表示させることによって、ユーザの操作が煩雑になる課題があった。
【0006】
従って、ユーザの間では、このような画像印刷装置に対して、様々な落書き機能の追加を期待している反面、複雑な編集作業を簡単な操作で行えるようにすることを望んでいる。
【0007】
本発明はこのような状況に鑑みてなされたものであり、撮影した画像に対して、簡単な操作で、複雑な編集作業を行うことができるようにするものである。
【0008】
【課題を解決するための手段】
本発明の写真シール自動販売機は、撮影空間において、被写体を撮影する撮影手段と、撮影空間とは異なる位置に設けられた編集空間において、撮影手段により撮影された被写体の画像を表示するとともに、ユーザが被写体の画像の編集に利用する入力ツールを選択するためのペンボタン群またはスタンプボタン群の内、ユーザに選択されたいずれか一方を表示し、ユーザがスタンプボタン群を選択し、さらに、その選択により被写体の画像とともに表示されたスタンプボタン群に含まれる所定のボタンを選択した場合、被写体の画像に加えて、描画した絵や文字のスタンプである手作りスタンプの作成のためのスタンプ作成部、並びに、スタンプ作成部において描画された絵や文字を手作りスタンプとして登録するときに選択されるスタンプ登録ボタンを表示するとともに、ペンボタン群をさらに表示する表示手段と、表示手段により表示されているスタンプ登録ボタンが選択された場合、ユーザが、ペンボタン群を用いて入力ツールを選択し、選択した入力ツールを利用して、スタンプ作成部に描画した絵や文字を、手作りスタンプとして登録する登録手段とを備えることを特徴とする。
【0009】
撮影手段は、例えば、いわゆるディジタルカメラなどの撮影装置により構成され、表示手段は、例えば、LCD(Liquid Crystal Display),CRT(Cathode Ray Tube)などにより構成され、登録手段は、例えば、表示プロセッサ、およびタッチパネルにより構成される。
【0010】
登録手段は、所定数以上の手作りスタンプの登録が指令された場合、最古の手作りスタンプを消去するようにすることができる。
【0011】
登録手段により登録された手作りスタンプを携帯可能な記録媒体に記憶する記憶手段をさらに備えるようにすることができる。
【0012】
本発明の画像処理方法は、撮影空間において、被写体を撮影する撮影ステップと、撮影空間とは異なる位置に設けられた編集空間において、撮影ステップの処理により撮影された被写体の画像を表示するように制御するとともに、ユーザが被写体の画像の編集に利用する入力ツールを選択するためのペンボタン群またはスタンプボタン群の内、ユーザに選択されたいずれか一方を表示するように制御し、ユーザがスタンプボタン群を選択し、さらに、その選択により被写体の画像とともに表示されたスタンプボタン群に含まれる所定のボタンを選択した場合、被写体の画像に加えて、描画した絵や文字のスタンプである手作りスタンプの作成のためのスタンプ作成部、並びに、スタンプ作成部において描画された絵や文字を手作りスタンプとして登録するときに選択されるスタンプ登録ボタンを表示するように制御するとともに、ペンボタン群をさらに表示するように制御する表示制御ステップと、表示制御ステップの処理により制御されて表示されているスタンプ登録ボタンが選択された場合、ユーザが、ペンボタン群を用いて入力ツールを選択し、選択した入力ツールを利用して、スタンプ作成部に描画した絵や文字を、手作りスタンプとして登録する登録ステップとを含むことを特徴とする。
【0013】
本発明のプログラムは、撮影空間において、被写体を撮影する撮影ステップと、撮影空間とは異なる位置に設けられた編集空間において、撮影ステップの処理により撮影された被写体の画像を表示するように制御するとともに、ユーザが被写体の画像の編集に利用する入力ツールを選択するためのペンボタン群またはスタンプボタン群の内、ユーザに選択されたいずれか一方を表示するように制御し、ユーザがスタンプボタン群を選択し、さらに、その選択により被写体の画像とともに表示されたスタンプボタン群に含まれる所定のボタンを選択した場合、被写体の画像に加えて、描画した絵や文字のスタンプである手作りスタンプの作成のためのスタンプ作成部、並びに、スタンプ作成部において描画された絵や文字を手作りスタンプとして登録するときに選択されるスタンプ登録ボタンを表示するように制御するとともに、ペンボタン群をさらに表示するように制御する表示制御ステップと、表示制御ステップの処理により制御されて表示されているスタンプ登録ボタンが選択された場合、ユーザが、ペンボタン群を用いて入力ツールを選択し、選択した入力ツールを利用して、スタンプ作成部に描画した絵や文字を、手作りスタンプとして登録する登録ステップとをコンピュータに実行させることを特徴とする。
【0014】
プログラムは、所定の記録媒体に記録されて、例えば、ドライブなどにより読み出され、画像処理装置にインストールされる。記録媒体は、フレキシブルディスクなどよりなる磁気ディスク、 CD−ROM(Compact Disk Read Only Memory) DVD−ROM(Digital Versatile Disk) などよりなる光ディスク、 MD(Mini Disk) (商標)などよりなる光磁気ディスク、または半導体メモリなどより構成される。
【0015】
本発明の写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラムにおいては、撮影空間において、被写体が撮影され、撮影空間とは異なる位置に設けられた編集空間において、撮影された被写体の画像が表示されるとともに、ユーザが被写体の画像の編集に利用する入力ツールを選択するためのペンボタン群またはスタンプボタン群の内、ユーザに選択されたいずれか一方が表示され、ユーザがスタンプボタン群を選択し、さらに、その選択により被写体の画像とともに表示されたスタンプボタン群に含まれる所定のボタンを選択した場合、被写体の画像に加えて、描画した絵や文字のスタンプである手作りスタンプの作成のためのスタンプ作成部、並びに、スタンプ作成部において描画された絵や文字を手作りスタンプとして登録するときに選択されるスタンプ登録ボタンが表示されるとともに、ペンボタン群がさらに表示され、表示されているスタンプ登録ボタンが選択された場合、ユーザが、ペンボタン群を用いて入力ツールを選択し、選択した入力ツールを利用して、スタンプ作成部に描画した絵や文字が、手作りスタンプとして登録される。
【0049】
【発明の実施の形態】
図1は、本発明を適用した、例えば、写真シール自動販売機に代表される画像印刷装置1の構成例を示す斜視図である。
【0050】
画像印刷装置1の筐体11の面11−1の左上方には、硬貨投入口12が設けられており、ユーザが、画像印刷装置1を利用するとき、所定の金額を投入することができるようになされている。また、面11−1の右上方には、撮影案内用スピーカ13が設けられており、ユーザに対して、各種の音声ガイダンスなどを出力し、撮影方法(シール作成の進行方法)を案内するようになされている。
【0051】
面11−1の中央上方にある、所定の角度だけ斜め上方を向いた面11−2には、例えば、CRT(Cathode Ray Tube)やLCD(Liquid Crystal Display)などよりなる撮影用モニタ14が設置されている。撮影用モニタ14は、撮影方法を案内する画面や、後述するように撮影装置31により撮影された被写体の画像を表示する。
【0052】
面11−2の右側には、所定の角度だけ斜め上方を向いた面11−3Rがあり、その面には、操作パネル15が設置されている。操作パネル15は、ユーザにより操作される各種の操作ボタンよりなり、例えば、CCD(Charge Coupled Device)カメラ32のズームを調整するときなどに操作される。操作パネル15には、例えば、撮影用モニタ14に表示される各種の選択項目に対して、その項目を決定するときに操作される「○ボタン」、決定した項目をキャンセルするときに操作される「×ボタン」、撮影用モニタ14に表示されるカーソルなどを移動するときに操作される「+ボタン」、および「−ボタン」などが配置され、そのほか、撮影の開始を指示するときに操作される「撮影スタートボタン」などが適宜配置される。
【0053】
また、面11−2の左右には、設置面(床)に対してほぼ垂直な面11−4L,11−4Rが設けられており、それぞれの面には、照明装置16−1L,16−1Rが配置される。照明装置16−1L,16−1Rは、内部に発光体(フラッシュ)を有しており、ユーザから操作パネル15が操作されることにより、撮影の開始が指示され、CCDカメラ32が取り込む画像を静止画像として記憶するとき(キャプチャするとき)、そのタイミングに合わせて、被写体を照射する。
【0054】
また、筐体11の上面の面11−5L,11−5Rにも、面11−4L,11−4Rと同様に照明装置16−2L,16−2Rがそれぞれ配置されている。照明装置16−2L,16−2Rは、内部に発光体を有しており、照明装置16−1L,16−1Rが被写体を照射するタイミングで、発光体を発光させる。照明装置16−2L,16−2Rから照射された光(フラッシュ)は、フラッシュ反射板17で反射され、被写体を照射する。すなわち、フラッシュ反射板17は、筐体11の正面にいるユーザ(被写体)を照射する方向に傾斜して取り付けられる。
【0055】
筐体11の上方には、左右方向中間部において撮影装置31が設置されている。この撮影装置31の所定の角度だけ斜め下方向を向いた面には、CCDカメラ32、および小型のLCDなどよりなる取り込み画像表示部33が配置されている。CCDカメラ32は、被写体の画像を取り込み、取り込まれた画像(動画像)は、取り込み画像表示部33に表示される。取り込み画像表示部33がCCDカメラ32の近傍に設けられているため、ユーザは、取り込み画像表示部33に表示されている自分の画像を確認しながら、視線をほぼCCDカメラ32に向けた状態で撮影することができる。
【0056】
CCDカメラ32は、CCDカメラ制御部86(図3)の制御の基、ユーザにより選択される「全身」のモードまたは「アップ」のモードに応じて、設置位置が移動され、さらに、「正面」のモードでの撮影時には設置角度がほぼ0度に設定され、「見上げ」のモードでの撮影時には設置角度がほぼ30度に設定される。
【0057】
筐体11の左側面である面11−6には、CRTやLCDなどよりなる編集入力用モニタ18、編集案内用スピーカ19、タッチペン20、およびシール取り出し口21が設けられている。
【0058】
CCDカメラ32で撮影され、編集する画像として選択され、保存された画像は、ユーザが撮影処理を終了した後、編集入力用モニタ18に表示される。編集入力用モニタ18には、タッチパネル97(図3)が積層されており、ユーザは、編集入力用モニタ18に表示されている画像に対して、タッチペン20を操作することにより、編集対象の画像(以下、適宜、編集対象画像と称する)に任意の文字や図形などを書き込む(入力する)ことができる。
【0059】
すなわち、ユーザは、筐体11の正面(面11−1)前方の場所(以下、適宜撮影空間と称する)で自分自身を撮影したのち、面11−6の前方の場所(以下、適宜編集空間と称する)へ移動して、撮影した自分自身の画像を編集する。
【0060】
編集入力用モニタ18は、編集対象画像とともに、様々な編集ツールの選択ボタンなどを表示する。そして、編集入力用モニタ18は、ユーザによりタッチペン20で書き込みがなされたとき、その入力に応じて生成した編集済みの画像を表示する。
【0061】
編集案内用スピーカ19は、ユーザに対して、編集の入力方法を説明するなどの音声ガイダンスを出力する。
【0062】
タッチペン20は、編集入力用モニタ18に積層されるタッチパネル97の位置検出方式(例えば、抵抗膜式、超音波式など)に応じて構成され、画像編集に使用されないとき、同図に示されるように面11−6に設置されている突起部に引っかけられる。
【0063】
シール取り出し口21は、所定の数および所定の大きさの複数のシールからなる、編集済みの画像が印刷されたシールシートを排出する。
【0064】
図2は、図1の画像印刷装置1の配置例を示す図である。
【0065】
筐体11の正面(面11−1)と対向する位置には、所定距離だけ離間して背景パネル51が設置され、ユーザは、筐体11と背景パネル51の間の空間を撮影空間として、自分自身の画像を撮影する。筐体11の上面には、カーテンフレーム41が水平方向に設置されており、カーテンフレーム41には、撮影空間の内部が外部から見えないように、カーテンレール41aを介して、所定長さだけ下方へ伸びるカーテン42が取り付けられている。このカーテン42は、上下方向に長く形成されているが、そのほぼ上半分42aは撮影空間に居るユーザが外部から見えないように非透明とされ、ほぼ下半分42bはユーザが撮影空間に居ることを外部から確認することができるように半透明とされている。
【0066】
また、筐体11の面11−6には、カーテンフレーム61が、編集入力用モニタ18を囲うように設置されており、カーテンフレーム61には、カーテンレール61aを介して、所定長さだけ下方へ伸びるカーテン62が取り付けられている。このカーテン62は、編集入力用モニタ18の前に居るユーザが外部から見えないように、かつ、編集入力用モニタ18に表示されている画像が外部から見えないようになされている。
【0067】
図1および図2に示したように、撮影空間と編集空間とを異なる位置に設けることにより、次に順番待ちをしているユーザがいる場合、そのユーザは、それまで撮影空間で撮影をしていたユーザと入れ替わりに撮影空間に入場し、撮影を開始することができる。そのため、撮影の待ち時間を短縮することができ、それとともに、編集する時間を長く設定することができる。
【0068】
図3は、図1の画像印刷装置1の内部の構成例を示すブロック図である。図1において説明した部分についてはその説明を省略する。
【0069】
CPU(Central Processing Unit)81は、ROM(Read Only Memory)82に記憶されているプログラム、または、プログラム記憶部84からRAM(Random Access Memory)83にロードしたプログラムに従って画像印刷装置1の全体の動作をバス94を介して制御する。RAM83にはまた、CPU81が各種の処理を実行する上において必要なデータなどが適宜記憶される。
【0070】
プログラム記憶部84は、ハードディスクやそのドライブからなり、CPU81が実行する様々なプログラムなどを記憶したり、後述するように、ユーザによって作画された文字や図形(後述する手作りスタンプ)などを記憶する。ドライブ85は、フレキシブルディスクやハードディスクなどの磁気ディスクや、CD−ROM,DVDなどの光ディスクなどの記録媒体に記憶されているプログラムを読み出し、バス94を介してプログラム記憶部84などに供給する。例えば、ドライブ85からは、被写体の画像と合成する新たなフレーム画像、もしくは編集画像(手作りスタンプ)などが供給される。
【0071】
撮影装置31の内部には、上述したCCDカメラ32および取り込み画像表示部33の他に、CCDカメラ制御部86が配置されている。CCDカメラ制御部86は、ユーザが操作パネル15を操作することにより入力したCCDカメラ32の調節要求に応じて、CCDカメラ32のズーム率、および取り込む光量などを制御する。
【0072】
キープ画像記憶部87は、ユーザが撮影し、編集する画像として選択した画像を所定の枚数だけ記憶する。例えば、キープ画像記憶部87は、キープ画像(編集対象画像)を6枚まで記憶する。
【0073】
硬貨処理部88は、硬貨投入口21から投入された硬貨をカウントし、画像の作成代金として予め設定されている所定の金額が投入されたと判定したとき、それをCPU81に通知する。
【0074】
プリンタ89は、シールシートユニット91に予め保存してあるシールシート92を取得し、複数のシールが所定の位置、および大きさに配置されてなるシールシート92に、編集済みの画像を印刷する。プリンタ89により印刷されたシールシート92は、シール取り出し口21に排出され、ユーザに提供される。
【0075】
IDタグリーダライタ90は、シールシートユニット91に付されているIDタグ93に記憶されている識別情報を接触、または非接触により読み出し、CPU81に出力する。CPU81は、IDタグリーダライタ90から供給された識別情報に基づいて、装着されているシールシートユニット91が、画像印刷装置1において利用可能なユニットであるか否かを判定し、利用可能なユニットであると判定したときにのみ、プリンタ89等を動作可能にする。
【0076】
すなわち、CPU81により、画像印刷装置1において利用可能とされるシールシートユニット91の識別情報が管理されている。これにより、画像印刷装置1に対応していない(純正のものでない)シールシートが利用されるのを抑制することができる。また、IDタグ93により、シールシート92の残量等も管理される。なお、シールシートユニットが純正のものであるか否かを、シールシートユニットにプリントされているバーコード、シールシートとセットで利用されるICカードなどにより確認させるようにしてもよいし、あるいは、シールシートユニットの寸法、形状などにより、機械的に装填不可とすることで確認させるようにしてもよい。
【0077】
シールシートユニット91は、画像印刷装置1から着脱可能になっており、内部にシールシート92を装填し、また、IDタグリーダライタ90がIDを読み取り可能な所定の位置に、IDタグ93が付されている。シールシートユニット91に付されているIDタグ93には、個々のシールシートユニット92を識別する識別情報等を管理するIDが書き込まれている。なお、IDタグ93は、シールシート92と一体にし、分離不可とするようにしてもよい。
【0078】
音声出力制御部95は、CPU81からの制御に基づいて撮影案内用スピーカ13を制御し、撮影方法などを説明する各種の音声ガイダンスや、例えば、静止画像を取り込むときのシャッター音などの効果音を出力する。一方、音声出力制御部98は、編集案内用スピーカ19を制御し、編集方法などを説明する各種の音声ガイダンスや、画像に書き込まれるときに発生される効果音などを出力する。このように、撮影案内用スピーカ13と編集案内用スピーカ19には、必要に応じてそれぞれ異なる音声が出力される。
【0079】
表示プロセッサ96は、撮影処理が終了し、ユーザが画像編集を開始するとき、キープ画像記憶部87からバス94を介して転送されてくるキープ画像を内蔵するメモリ96Aに記憶する。そして、表示プロセッサ96は、タッチパネル97において編集入力がされたとき、編集対象画像上における、その入力位置を検出し、編集対象画像に反映させて編集入力用モニタ18に表示させる。なお、図3においては、編集入力用モニタ18とタッチパネル97は別の位置に示されているが、実際には積層して配置されている。
【0080】
次に、上述した画像印刷装置1の撮影処理について説明する。
【0081】
CPU81は、プログラム記憶部84に記憶されている表示制御プログラムをRAM83にロードして実行し、例えば、図4に示されるような、撮影の進行方法などのデモンストレーション画面(以下、デモ画面と称する)を、撮影用モニタ14に表示させる。
【0082】
CPU81は、硬貨処理部88からの出力に基づいて、所定の代金(シールシートの作成代金)が投入されると、撮影モード、カメラアングル、またはズーム調整などの設定画面を撮影用モニタ14に順次表示させるとともに、プログラム記憶部84に記憶されている撮影処理プログラムをRAM83にロードして実行し、取り込み画像表示部33に、CCDカメラ32が撮影している動画像を表示させる。
【0083】
図5は、撮影用モニタ14に表示されるモード選択画面を示す図である。同図に示されるように、モード選択画面には、「撮影モードを+/−ボタンで選択してね」といったメッセージとともに、「お気楽撮影」のモードおよび「カメラフリー撮影」のモードの機能説明が表示されている。ユーザは、このモード選択画面において、操作パネル15の「+ボタン」を操作することにより、「お気楽撮影」のモードを選択することができ、「−ボタン」を操作することにより、「カメラフリー撮影」のモードを選択することができる。
【0084】
例えば、図5に示すモード選択画面において、ユーザにより、操作パネル15の「+ボタン」が操作されると、CPU81は、撮影用モニタ14に、例えば、図6に示されるようなカメラアングル選択画面を表示させる。
【0085】
図6に示すカメラアングル選択画面には、「カメラアングルを+/−ボタンで選択してね」といったメッセージが表示されている。ユーザは、このカメラアングル選択画面において、操作パネル15の「+ボタン」を操作することにより、「アップ(よこなが)」のモードを選択することができ、「−ボタン」を操作することにより、「全身(たてなが)」のモードを選択することができる。
【0086】
図6に示すカメラアングル選択画面において、ユーザにより、操作パネル15の「+ボタン」もしくは「−ボタン」が操作されると、CPU81は、撮影用モニタ14に、例えば、図7に示されるようなカメラアングル選択画面を表示させる。
【0087】
図7に示すカメラアングル選択画面には、「カメラアングルを+/−ボタンで選択してね」といったメッセージが表示されている。ユーザは、このカメラアングル選択画面において、操作パネル15の「+ボタン」を操作することにより、ユーザが顔を若干上方を向いた状態で撮影する「見上げる」のモードを選択することができ、「−ボタン」を操作することにより、ユーザがほぼまっすぐ正面を向いた状態で撮影する「正面」のモードを選択することができる。
【0088】
図7に示すカメラアングル選択画面において、ユーザにより、操作パネル15の「+ボタン」が選択されると、CCDカメラ制御部86の制御の基、CCDカメラ32の設置角度が、ほぼ30度に設定され、「−ボタン」が選択されると、CCDカメラ32の設置角度は、ほぼ0度に設定される。
【0089】
また、図5に示したモード選択画面において、ユーザにより、操作パネル15の「−ボタン」が操作されると、CPU81は、撮影用モニタ14に、図6に示したカメラアングル選択画面を表示させ、さらに、ユーザにより、「+ボタン」もしくは「−ボタン」が操作されると、例えば、図8に示されるようなカメラアングル設定画面を表示させる。
【0090】
図8に示すカメラアングル設定画面には、「カメラアングルを+/−ボタンで自由に設定してね」といったメッセージが表示されている。ユーザは、このカメラアングル選択画面において、操作パネル15の「+ボタン」または「−ボタン」を操作することにより、例えば、0乃至45度の範囲で自由にCCDカメラ32の設置角度を設定することができる。
【0091】
このように、ユーザは、「お気楽撮影」のモードを選択した場合、カメラアングルを選択するだけで、CCDカメラ32の設置角度を設定することができ、「カメラフリー撮影」のモードを選択した場合、CCDカメラ32の設置角度を自由に設定することができる。
【0092】
以上のようにして撮影モードおよびカメラアングルが設定されると、CPU81は、撮影用モニタ14に、例えば、図9に示されるようなズーム調整設定画面を表示させる。
【0093】
図9に示すズーム調整設定画面には、「ズームの調整を+/−ボタンでしてね。用意ができたらスタートボタンを押してね」といったメッセージが表示されている。ユーザは、このズーム調整設定画面において、操作パネル15の「+ボタン」または「−ボタン」を操作することにより、CCDカメラ32のズーム調整を行うことができ、さらに、撮影スタートボタンを操作することによって撮影を開始させることができる。
【0094】
ここで、CCDカメラ32のズーム調整を行った場合、機器特性により(すなわち、レンズの最大絞りが小さくなるので)、撮影される画像全体(背景を含む)が暗くなる。そこで、ズーム値の補正処理を行うことにより、撮影される画像全体の明るさを保つことができる。
【0095】
次に、図10のフローチャートを参照して、ズーム値の補正処理について説明する。なお、撮影条件として、照明などは一定のものとされ、ズーム値Zは、1乃至5の5段階に調整可能であるとし、Z=1は、通常(ズームなし)であるとする。
【0096】
まず、画像印刷装置1が工場出荷される前処理として、ズーム値毎に、白(W)、灰(G)、黒(B)の3枚のパネルが撮影され、取得された撮影画像A1乃至A5として、撮影されたパネルの中心の点(すなわち撮影画面の中心)が定められて輝度値W,G,Bが設定される。これにより、ズーム値Z=1の輝度値は、W(A1),G(A1),B(A1)に設定され、ズーム値Z=2の輝度値は、W(A2),G(A2),B(A2)に設定され、ズーム値Z=3の輝度値は、W(A3),G(A3),B(A3)に設定され、ズーム値Z=4の輝度値は、W(A4),G(A4),B(A4)に設定され、ズーム値Z=5の輝度値は、W(A5),G(A5),B(A5)に設定される。
【0097】
そして、ズーム値2乃至5と最小ズーム値(すなわち、ズーム値Z=1)との輝度値W,G,Bの差分dがそれぞれ算出される。すなわち、ズーム値Z=2と最小ズーム値との差分は、
d1(W1=W(A1)−W(A2),G1=G(A1)−G(A2),B1=B(A1)−B(A2))
に設定され、ズーム値Z=3と最小ズーム値との差分は、
d2(W2=W(A1)−W(A3),G2=G(A1)−G(A3),B2=B(A1)−B(A3))
に設定され、ズーム値Z=4と最小ズーム値との差分は、
d3(W3=W(A1)−W(A4),G3=G(A1)−G(A4),B3=B(A1)−B(A4))
に設定され、ズーム値Z=5と最小ズーム値との差分は、
d4(W4=W(A1)−W(A5),G4=G(A1)−G(A5),B4=B(A1)−B(A5))
に設定される。
【0098】
以上の設定値より、パネル本来の輝度値をW=W(A1),G=G(A1),B=B(A1)に定めて、差分d1=((B,B1),(G,G1),(W,W1))を近似的に結ぶ直線式(1)を算出する。
y1=α1・x+β1 ・・・(1)
【0099】
上記式(1)において、α1,β1は任意の値とされ、算出される値y1は、ズームすることにより暗くなる度合い(明度変位)を示す。同様に、差分d2乃至d4を近似的に結ぶ直線式(2)乃至式(4)をそれぞれ算出する。なお、α2乃至α4、並びに、β2乃至β4は任意の値とされる。
y2=α2・x+β2 ・・・(2)
y3=α3・x+β3 ・・・(3)
y4=α4・x+β4 ・・・(4)
【0100】
このように、ズーム値Z=2乃至5毎に、輝度変位の式(1)乃至式(4)、すなわち輝度調整のための変換パラメータが得られ、これらの変換パラメータをズーム値補正処理プログラムに設定しておく。これにより、所定のズーム値が選択されると、そのズーム値に応じた変換パラメータを用いて、輝度調整の画像処理が施される。
【0101】
ステップS1において、CPU81は、ユーザによって操作パネル15の「+ボタン」もしくは「−ボタン」が操作され、ズーム調整されたか否かを判定し、ズーム調整が行われるまで判定処理を繰り返す。そして、ステップS1において、ズーム調整が行われたと判定された場合、ステップS2に進み、CPU81は、ユーザからの操作入力に基づいて、ズーム値Zを決定する。
【0102】
ステップS3において、CPU81は、ユーザにより撮影が指示されたか、すなわち、撮影スタートボタンが操作されたか否かを判定し、撮影が指示されるまで判定処理を繰り返す。そして、ステップS3において、撮影が指示されたと判定された場合、ステップS4に進み、CPU81は、ユーザからの操作入力(ズーム値)を受けてCCDカメラ制御部86を制御するとともに、操作パネル15からの出力(撮影スタートボタンの出力信号)に基づいて、必要に応じて、撮影用モニタ14にカウントダウンインジケータを表示させる。CPU81は、撮影するタイミングとなったとき、照明装置16−1L,16−1R、および照明装置16−2L,16−2Rを制御してフラッシュを被写体に照射するとともに、その瞬間にCCDカメラ32により取り込まれている画像を、静止画像としてキープ画像記憶部87に一時的に保存させる。
【0103】
ステップS5において、CPU81は、ステップS2の処理で決定されたズーム値Zが最小値(すなわちZ=1)であるか否かを判定し、最小値ではないと判定した場合、ステップS6に進み、プログラム記憶部84に記憶されているズーム値補正処理プログラムをRAM83にロードして実行し、ステップS2の処理で決定されたズーム値に応じて変換パラメータを決定する。例えば、ズーム値Z=2の場合、上記式(1)が変換パラメータに決定される。
【0104】
ステップS7において、CPU81は、ステップS6の処理で決定された変換パラメータを用いて、G輝度、R輝度、およびB輝度を変換(補正)する。ステップS8において、CPU81は、ステップS7の処理で変換された輝度値から補正画像を生成し、キープ画像記憶部87に記憶させ、処理は、終了される。
【0105】
以上の処理により、ズーム調整により撮影される画像全体が暗くなる影響を補正することができる。
【0106】
なお、ズーム値毎に撮影画像をR,G,B成分に分解して、各色成分を、白黒明暗の状態に変換して、上述したような、輝度変位の直線式を算出するようにしてもよい。
【0107】
CPU81は、キープ画像記憶部87に保存された静止画像の確認画面を撮影用モニタ14に表示させる。これにより、例えば、図11に示されるような画像確認画面が表示される。同図に示されるように、画像確認画面には、「これでいいかな?○/×ボタンを押してね。」といったメッセージが表示されており、ユーザは、表示されている画像をキープ画像として保存するか否かを、操作パネル15の「○ボタン」または「×ボタン」を操作することによって選択することができる。
【0108】
CPU81は、操作パネル15からの出力(キープ画像として保存するか否かを選択する出力信号)に基づいて、キープ画像として保存することが指示された場合、一時的に保存されている画像をそのままキープ画像記憶部87に記憶させ、キープ画像として保存することが指示されていない場合、キープ画像記憶部87に一時的に保存されている画像を消去する。また、必要に応じて、ユーザによってキープ画像として記憶された画像の明るさが調整されると、そのレベルの明るさでキープ画像がキープ画像記憶部87に保存される。
【0109】
CPU81は、残り撮影可能枚数が「0枚」となった、またはユーザによって「撮影終了ボタン」が操作されると、シールシートの分割数の選択画面(図示せぬ)を撮影用モニタ14に表示させる。そして、シールシートが選択されたとき、CPU81は、編集処理の案内画面(図示せぬ)を撮影用モニタ14に表示させ、ユーザに対して、編集処理の実行を促す。これにより、ユーザは、編集空間に移動して、キープ画像の編集処理を開始することができる。
【0110】
なお、このとき、CPU81は、表示プロセッサ96の動作状態を確認し、編集空間において編集処理を行っている他のユーザがいるか否か、もしくは、プリンタ89の動作状態を確認し、編集済みの画像をシールシートに印刷している途中であるか否かを判定し、編集処理を行っている他のユーザがいる、もしくは印中であると判定した場合、すなわち、直ちに編集処理を行うことができない場合、ユーザに対して、キープ画像の撮り直しを行わせたり、所定のゲームを行わせたりするようにしてもよい。これにより、ユーザは、キープ画像の撮り直しを行ったり、あるいは、所定のゲームを行ったりすることで、編集処理までの時間を退屈せずに待つことができる。
【0111】
次に、画像印刷装置1の編集処理について詳しく説明する。以下、編集処理を適宜、落書きと称することにする。
【0112】
まず、図12のフローチャートを参照して、編集画面の表示処理について説明する。
【0113】
ユーザの撮影処理が終了すると、ステップS11において、CPU81は、ユーザによって、好みの分割数のシールシートが選択されるまで待機し、シールシートが選択されたと判定した場合、ステップS12において、CPU81は、キープ画像記憶部87に記憶されているキープ画像を表示プロセッサ96に転送させる。ステップS13において、表示プロセッサ96は、キープ画像記憶部87より転送されてきたキープ画像を内蔵メモリ96Aに記憶するとともに、編集入力用モニタ18に、例えば、図13に示されるような初期画面を表示させる。
【0114】
図13に示す初期画面には、「ペン/スタンプ、どちらのボタンを表示する?」といったメッセージを示すダイアログボックス101、「ペン」の入力ツールを表示するときに選択されるペンボタン102、「スタンプ」の入力ツールを表示するときに選択されるスタンプボタン103、および、編集処理を行う時間として予め設定されている制限時間を示す制限時間表示部104が表示されている。
【0115】
ユーザは、図13に示す初期画面において、タッチペン20を用いて、ペンボタン102もしくはスタンプボタン103を選択することにより、「ペン入力モード」もしくは「スタンプ入力モード」のモードで編集処理を行うことができる。
【0116】
そこで、図13に示す初期画面において、ユーザによりタッチペン20が用いられ、ペンボタン102が選択(押下)されると、ステップS14において、CPU81は、ペンボタン102が選択されたか否かを判断し、ペンボタン102が選択されたと判断した場合、ステップS15において、CPU81は、表示プロセッサ96を介して、編集入力用モニタ18に、図14に示されるような「ペン入力モード」の編集画面を表示させる。
【0117】
ステップS14において、CPU81は、ペンボタン102が選択されない(スタンプボタン103が選択された)と判断した場合、ステップS16において、CPU81は、表示プロセッサ96を介して、編集入力用モニタ18に、「スタンプ入力モード」の編集画面を表示させる。なお、「スタンプ入力モード」の編集画面は、図14に示される「ペン入力モード」の編集画面のペンボタン122乃至128をスタンプボタン171乃至177(後述する図30)に代えたものであり、その他は同様なので図示を省略する。
【0118】
図14に示す編集画面には、ユーザにより編集対象画像として選択された画像を表示するための編集対象画像表示部111、内蔵メモリ96Aに保存されているキープ画像をサムネイル表示するための編集対象画像選択部112、スタンプ入力モード」の編集画面に切り替えるときに選択されるモード切替ボタン121、様々な入力ツール(書き込みツール)で落書きするときに選択されるペンボタン122乃至128、落書き範囲を設定するときに選択されるブラシボタン129、落書き範囲の閾値を設定する場合に選択される設定ボタン130乃至134、画像方向を切り替える(いまの場合、画像を縦にする)ときに選択される画像方向切替ボタン135、入力した落書きの一部を消去するときに選択される消しゴムボタン136、入力した落書きをやり直す(取り消す)ときに選択されるやり直しボタン137、何も落書きされていない画像に戻すとき選択されるやり直しボタン138、および、落書き(編集処理)を終了するときに選択される終了ボタン139が配置されている。
【0119】
図14に示す編集画面において、編集対象画像選択部112には、内蔵メモリ96Aに保存されているキープ画像のサムネイルが表示される。また、編集対象画像表示部111には、内蔵メモリ96Aに保存されているキープ画像のうち、最初に保存された画像が表示されており、ユーザは、図14に示す編集画面において、タッチペン20を用いて、編集対象画像選択部112のサムネイルのうちいずれかを選択することにより、編集対象画像表示部111に表示されている画像の表示を編集したい画像の表示に変え、その画像を編集することができる。
【0120】
そこで、ユーザが、タッチペン20を用いて、編集対象画像選択部112のサムネイルのうちいずれかを選択すると、ステップS17において、CPU81は、編集対象画像選択部112のサムネイルが選択されたか否かを判断し、選択されたと判断した場合、ステップS18において、表示プロセッサ96は、ステップS17で選択されたサムネイルの画像を、編集入力用モニタ18の編集対象画像表示部111に表示させる。
【0121】
ユーザが、編集対象画像表示部111に表示されている画像を編集したい場合、編集対象画像選択部112のサムネイルは選択されないので、ステップS17において、編集対象画像選択部112のサムネイルが選択されないと判断され、編集対象画像表示部111に表示されている画像の表示はそのままであり、変わらない。
【0122】
なお、ユーザは、編集対象画像表示部111に表示されている画像の編集中にも、タッチペン20を用いて、編集対象画像選択部112のサムネイルを選択し、編集する画像を変更するようにもできる。
【0123】
次に、ユーザは、上述したように編集対象画像表示部111に表示された所定の画像に対して、好みの落書きを行うために、図14に示す編集画面において、タッチペン20を用いて、ペンボタン122乃至128のいずれかを選択する。
【0124】
例えば、図14に示す編集画面において、ユーザによりタッチペン20が用いられ、「にじみペン」と名前が付されたペンボタン122が選択されると、CPU81は、表示プロセッサ96を介して、編集入力用モニタ18に、例えば、図15に示されるような「にじみペン」に関するパレット151を表示させる。
【0125】
図14に示す編集画面には、「ペンを動かす速さで太くなったり細くなったりするよ!」といったメッセージとともに、所定のテクスチャ(デザイン)もしくは色を選択させるためのパレット151が表示されている。ユーザは、この編集画面において、タッチペン20を用いて、パレット151に表示されている所望のテクスチャもしくは色を選択することができる。
【0126】
CPU81は、ユーザによってパレット151の中から所定のテクスチャもしくは色が選択されると、もしくは、パレット151の下方に配置されている閉じるボタン152が選択されると、このパレット151を閉じて、例えば、図16に示されるような編集画面に切り替える。
【0127】
図16に示す編集画面には、図15に示したパレット151が1行のパレット161に切り替えられるとともに、ペンの太さを選択するときに選択されるペン太さパレット162、および、図15に示したパレット151(全てのテクスチャおよび色)を表示するときに選択される全表示ボタン163が配置される。なお、ペンの太さは、デフォルトで一番細いものが選択されているようにしてもよい。
【0128】
ユーザは、図16に示す編集画面において、タッチペン20を用いて、所望のテクスチャもしくは色をパレット161の中から選択するか、パレット161に所望のテクスチャもしくは色が表示されていないときには、スクロールボタン161L,161R、または全表示ボタン163を操作して所望のテクスチャもしくは色を表示させて選択する。そして、さらにユーザは、所定のペンの太さをペン太さパレット162の中から選択することによって、編集対象画像表示部111に表示されている画像に対して、好みの文字や図形を書き込む(落書きする)ことができる。
【0129】
図17は、各ペンがユーザによって選択された場合に、編集対象画像表示部111に描画される線(文字や図形など)の形状を示す図である。
【0130】
図17(A)は、「にじみペン」と名前が付されたペンボタン122が選択された場合に描画される線の形状を示す図である。
【0131】
図17(B)は、「クレヨンペン」と名前が付されたペンボタン123が選択された場合に描画される線の形状を示す図である。
【0132】
図17(C)は、「ふちどり」と名前が付されたペンボタン124が選択された場合に描画される線の形状を示す図である。
【0133】
図17(D)は、「ふち付マーカ」と名前が付されたペンボタン125が選択された場合に描画される線の形状を示す図である。
【0134】
図17(E)は、「立体ペン」と名前が付されたペンボタン126が選択された場合に描画される線の形状を示す図である。
【0135】
図17(F)は、「ぶよぶよ」と名前が付されたペンボタン127が選択された場合に描画される線の形状を示す図である。
【0136】
図17(G)は、「もこもこ」と名前が付されたペンボタン128が選択された場合に描画される線の形状を示す図である。
【0137】
次に、図18のフローチャートを参照して、「にじみペン」の描画処理について説明する。
【0138】
ステップS21において、CPU81は、ユーザによって、「にじみペン」と名前が付されたペンボタン122が選択されたか否かを判定し、ペンボタン122が選択されるまで判定処理を繰り返す。ステップS21において、ペンボタン122が選択されたと判定された場合、ステップS22に進み、CPU81は、「にじみペン」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。
【0139】
ステップS23において、CPU81は、ユーザにより指定されたペンの太さおよびテクスチャ画像を選択する。そして、CPU81は、図19に示されるように、ユーザにより選択された所定のテクスチャ画像を配置させ、その上に、「にじみペン」用のマスク画像を配置させる。
【0140】
ステップS24において、CPU81は、「にじみペン」の軌跡情報および軌跡領域を初期化し、ステップS25において、ペン先領域の初期設定を行う。ステップS26において、CPU81は、編集入力用モニタ18上のタッチペン20の位置を確認する。
【0141】
ステップS27において、CPU81は、タッチペン20が編集入力用モニタ18上に接触(押圧)しているか否かを判定し、タッチペン20が接触していると判定した場合、ステップS28に進み、タッチペン20が編集入力用モニタ18上を移動したか否かを判定する。
【0142】
ステップS28において、タッチペン20が移動したと判定された場合、ステップS29に進み、CPU81は、タッチペン20の編集入力用モニタ18上の移動量を測定する。ステップS30において、CPU81は、ステップS29の処理で測定されたタッチペン20の移動量に応じてペン先領域を縮小する。
【0143】
ステップS28において、タッチペン20が編集入力用モニタ18上を移動していないと判定された場合、ステップS31に進み、CPU81は、ペン先領域を所定の比率で拡大する。なお、この比率は予め任意に設定されている。
【0144】
ステップS32において、CPU81は、軌跡領域にペン先領域を合成し、さらに、ステップS33において、描画レイヤに軌跡領域を合成した後、ステップS26に戻り、上述した処理を繰り返す。
【0145】
ステップS27において、タッチペン20が編集入力用モニタ18上に接触していない、すなわち、タッチペン20が編集入力用モニタ18から離れたと判定された場合、ステップS34に進み、CPU81は、描画レイヤを確定する。これにより、単位時間当りのタッチペン20の移動量に応じて、ペンをにじませたような線が形成される。
【0146】
ステップS35において、CPU81は、「にじみペン」と名前が付されたペンボタン122を継続して使用するか否か、すなわち、再び、ユーザにより、タッチペン20が編集入力用モニタ18上に接触されたか否かを判定し、ペンボタン122を継続して使用すると判定した場合、ステップS24に戻り、上述したそれ以降の処理を繰り返す。そして、ステップS35において、ペンボタン122を継続して使用しない、すなわち、例えば、ユーザにより他のペンが選択されるか、後述するスタンプが選択されるか、編集作業が終了されるか、もしくは制限時間が経過したと判定された場合、処理は終了される。
【0147】
次に、「クレヨンペン」の描画処理について説明する。
【0148】
CPU81は、ユーザによって、「クレヨンペン」と名前が付されたペンボタン123が選択されると、「クレヨンペン」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。そして、CPU81は、ユーザにより指定されたペンの太さおよびテクスチャ画像を選択し、図20に示されるように、「クレヨンペン」用のマスク画像を配置させる。ユーザが、編集入力用モニタ18上にタッチペン20を押圧しながら移動させると、CPU81は、軌跡領域を描画レイヤに合成する。これにより、ユーザにより選択されたテクスチャもしくは色で、いわゆるクレヨンで描かれたような、かすれたような線が形成される。
【0149】
次に、「ふちどりペン」の描画処理について説明する。
【0150】
CPU81は、ユーザによって、「ふちどり」と名前が付されたペンボタン124が選択されると、「ふちどりペン」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。そして、CPU81は、ユーザにより指定されたペンの太さおよびテクスチャ画像を選択し、図21に示されるように、「ふちどりペン」用のマスク画像を配置させる。ユーザが、編集入力用モニタ18上にタッチペン20を押圧しながら移動させると、CPU81は、ペンの移動領域の中央に、白色(RGB=254:254:254)が塗られ、その周囲に、ユーザにより選択されたテクスチャもしくは色が塗られた軌跡領域を描画レイヤに合成する。これにより、ふちどり線が形成される。なお、ペンの移動領域における座標がRGB=254:254:254(すなわち、白色)の場合には、ふちを付けないようにして塗りつぶされ、線の重なり時に、白色部分が1つの面積になるような画像処理が施される。
【0151】
次に、図22のフローチャートを参照して、「ふち付マーカ」の描画処理について説明する。
【0152】
ステップS51において、CPU81は、ユーザによって、「ふち付マーカ」と名前が付されたペンボタン125が選択されたか否かを判定し、ペンボタン125が選択されるまで判定処理を繰り返す。ステップS51において、ペンボタン125が選択されたと判定されたと判定された場合、ステップS52に進み、CPU81は、「ふち付マーカ」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。
【0153】
ステップS53において、CPU81は、ユーザにより指定されたペンの太さおよびテクスチャ画像を選択する。そして、CPU81は、図23に示されるように、ユーザにより選択された所定のテクスチャ画像を配置させ、その上に、「ふち付マーカ」用のマスク画像を配置させ、さらにその上に、既描画レイヤを配置させる。
【0154】
ステップS54において、CPU81は、「ふち付マーカ」の軌跡情報および軌跡領域を初期化し、ステップS55において、ペン先領域の初期設定を行う。ステップS56において、CPU81は、編集入力用モニタ18上のタッチペン20の位置を確認する。
【0155】
ステップS57において、CPU81は、タッチペン20が編集入力用モニタ18上に接触(押圧)しているか否かを判定し、タッチペン20が接触していると判定した場合、ステップS58に進み、ペン先領域が軌跡領域と交わるか否かを判定する。
【0156】
ステップS58において、ペン先領域が軌跡領域と交わる(例えば、「あ」といった文字のように軌跡領域が交わる)と判定された場合、ステップS59に進み、CPU81は、図24に示されるように、軌跡領域の交わる部分を外側領域A、透明領域B、および中央領域Cの3つの領域に分ける。
【0157】
ステップS60において、CPU81は、透明領域Bに対して中央領域Cを作画(描画)し、ステップS61において、外側領域Aに対して透明領域Bまたは中央領域Cを作画する。なお、中央領域Cに対しては何も作画されない。
【0158】
ステップS58において、ペン先領域が軌跡領域と交わらないと判定された場合、ステップS62に進み、CPU81は、描画レイヤにペン先領域を合成する。ステップS63において、CPU81は、暫定した軌跡情報の画像にペンの移動領域を合成し、ステップS56に戻り、上述した処理を繰り返す。
【0159】
ステップS57において、タッチペン20が編集入力用モニタ18上に接触していない、すなわち、タッチペン20が編集入力用モニタ18から離れたと判定された場合、ステップS64に進み、CPU81は、描画レイヤを確定する。これにより、ペンの移動領域の中央に、ユーザにより選択されたテクスチャもしくは色(すなわち内柄)が塗られ、その周囲に、落書き画像が透けるように透明部分が塗られ、さらにその周囲に、ユーザにより選択されたテクチャもしくは色(すなわち外柄)が塗られて、ふち付き線が形成される。
【0160】
ステップS65において、CPU81は、「ふち付マーカ」と名前が付されたペンボタン125を継続して使用するか否かを判定し、ペンボタン125を継続して使用すると判定した場合、ステップS54に戻り、上述したそれ以降の処理を繰り返す。そして、ステップS65において、ペンボタン125を継続して使用しないと判定された場合、処理は終了される。
【0161】
次に、図25および図26のフローチャートを参照して、「立体ペン」の描画処理について説明する。
【0162】
ステップS81において、CPU81は、ユーザによって、「立体ペン」と名前が付されたペンボタン126が選択されたか否かを判定し、ペンボタン126が選択されるまで判定処理を繰り返す。ステップS81において、ペンボタン126が選択されたと判定された場合、ステップS82に進み、CPU81は、「立体ペン」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行うとともに、ステップS83において、高さ情報の初期化を行う。
【0163】
ステップS84において、CPU81は、ユーザにより選択されたペンのペン先領域高さ情報、テクスチャ(すなわち、立体化される画像)、光源、および視点を選択し、図27に示されるように、ユーザにより選択された所定のテクスチャ画像を配置させ、その上に、「立体ぺン」用のマスク画像を配置させ、さらにその上に、高さレイヤを配置させる。なお、この高さレイヤは、0乃至255の輝度値を持つ画像として作成され、それがペン形状として利用される。
【0164】
ステップS85において、CPU81は、ステップS84の処理で選択されたペン先領域の高さ情報を設定する。ステップS86において、CPU81は、ペンの移動領域の初期設定を行い、ステップS87において、フラグPoffを0に設定する。ステップS88において、CPU81は、編集入力用モニタ18上のタッチペン20の位置を確認し、ステップS89において、タッチペン20が編集入力用モニタ18上に接触(押圧)しているか否かを判定する。
【0165】
ステップS89において、タッチペン20が接触していると判定された場合、ステップS90に進み、CPU81は、フラグPoffを1に設定する。ステップS91において、CPU81は、ペン先領域と高さ情報ファイルとの対応点毎の高さを比較し、ステップS92において、比較結果に基づいて高さ情報ファイルを更新する。ステップS93において、CPU81は、暫定した軌跡情報の画像にペンの移動領域を合成し、ステップS88に戻り、上述したそれ以降の処理を繰り返す。
【0166】
ステップS89において、タッチペン20が編集入力用モニタ18上に接触していない、すなわち、タッチペン20が編集入力用モニタ18から離れたと判定された場合、ステップS94に進み、CPU81は、フラグPoffが1であるか否かを判定し、フラグPoffが1ではないと判定した場合、ステップS88に戻り、上述したそれ以降の処理を繰り返す。
【0167】
ステップS94において、フラグPoffが1であると判定された場合、ステップS95に進み、CPU81は、フラグPoffを0に設定する。ステップS96において、CPU81は、移動領域対応の各点に対する高さを想定した状態で隣接する3点による三角形を作成する。ステップS97において、CPU81は、三角形の各点に対して、構成される三角形の面の法線ベクトルを算出する。
【0168】
ステップS98において、CPU81は、算出された法線ベクトル、光源の位置、および視点情報から輝度を算出する。ステップS99において、CPU81は、移動領域R,G,B値を、輝度を考慮したテクスチャの画像として算出する。ステップS100において、CPU81は、描画レイヤとペンの移動領域を合成した後、ステップS101において、描画レイヤを確定する。これにより、立体感を持った線が形成される。
【0169】
ステップS102において、CPU81は、「立体ペン」と名前が付されたペンボタン126を継続して使用するか否かを判定し、ペンボタン126を継続して使用すると判定した場合、ステップS87に戻り、上述したそれ以降の処理を繰り返す。そして、ステップS102において、ペンボタン126を継続して使用しないと判定された場合、処理は終了される。
【0170】
次に、「ぶよぶよペン」の描画処理について説明する。
【0171】
CPU81は、ユーザによって、「ぶよぶよ」と名前が付されたペンボタン127が選択されると、「ぶよぶよペン」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。そして、CPU81は、ユーザにより指定されたペンの太さおよびテクスチャ画像を選択し、図28に示されるように、「ぶよぶよペン」用のマスク画像を配置させ、その上に、高さレイヤを配置させる。ユーザが、編集入力用モニタ18上にタッチペン20を押圧しながら移動させると、CPU81は、マスク画像の高さおよび太さのサイズを変更し、さらに同じ太さでも位置をずらすようにして、軌跡領域を描画レイヤに合成する。すなわち、アルゴリズムは、「立体ペン」と同じだが、ペンの移動が発生する毎にマスク画像の高さおよび太さのサイズが変更するようになされている。
【0172】
次に、「もこもこペン」の描画処理について説明する。
【0173】
CPU81は、ユーザによって、「もこもこ」と名前が付されたペンボタン128が選択されると、「もこもこペン」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。そして、CPU81は、ユーザにより指定されたペンの太さおよびテクスチャ画像を選択し、図29に示されるように、ユーザにより選択された所定のテクスチャ画像を配置させ、その上に、「もこもこペン」用のマスク画像(明るさを持たせた画像)を配置させる。ユーザが、編集入力用モニタ18上にタッチペン20を押圧しながら移動させると、CPU81は、軌跡領域を描画レイヤに合成する。これにより、擬似立体を表現したような線が形成される。なお、立体ペンが選択された場合よりやわらかな感じを持った線が形成されるが、重ね処理は施されないため、交差部分は分断される。
【0174】
図13に示した初期画面に戻って、ユーザによりタッチペン20が用いられ、スタンプボタン103が選択(押下)されると、もしくは、図14に示した編集画面において、モード切替ボタン121が選択されると、CPU81は、表示プロセッサ96を介して、編集入力用モニタ18に、「スタンプ入力モード」の編集画面(図示せず)を表示させ、さらに、この編集画面において、ユーザにより、「スタンプ」と名前が付されたスタンプボタン172が選択されると、例えば、図30に示されるような「スタンプ」に関するパレット181を表示させる。
【0175】
図30に示す編集画面には、「ノーマルや半透明のスタンプがあるよ!」といったメッセージとともに、所定のデザイン(スタンプ)を選択させるためのパレット181、「ペン入力モード」の編集画面に切り替えるときに選択されるモード切替ボタン171、様々な入力ツール(書き込みツール)で落書きするときに選択されるスタンプボタン172乃至177が表示されている。同図に示されるように、この編集画面の構成は、基本的に、図14に示した編集画面と同様の構成とされ、「スタンプ入力モード」に関わる入力ツールのみが変更されている。ユーザは、この編集画面において、タッチペン20を用いて、パレット181に表示されている所定のデザインを選択することができる。
【0176】
CPU81は、ユーザによってパレット181の中から所定のデザインが選択されると、もしくは、パレット181の下方に配置されている閉じるボタン182が選択されると、このパレット181を閉じて、編集対象画像表示部111を全表示させるとともに、図16に示したような、1行のパレット161、ペンの太さを選択するときに選択されるペン太さパレット162などを表示させる。
【0177】
ユーザは、タッチペン20を用いて、スタンプボタン172乃至177のいずれかを選択することにより、編集対象画像表示部111に表示されている所定の画像に対して、好みのデザインを書き込んだり、もしくは、後述するように、自分で作成したデザイン(スタンプ)を登録することができる。
【0178】
次に、図31のフローチャートを参照して、「ふうせんスタンプ」の描画処理について説明する。
【0179】
ステップS121において、CPU81は、ユーザによって、「ふうせんスタンプ」と名前が付されたスタンプボタン173が選択されたか否かを判定し、スタンプボタン173が選択されるまで判定処理を繰り返す。ステップS121において、スタンプボタン173が選択されたと判定された場合、ステップS122に進み、CPU81は、「ふうせんスタンプ」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。
【0180】
ステップS123において、CPU81は、拡大縮小の比率、スタンプ画像の大きさ、および限定領域から、その限定領域を超えない拡大回数T(例えば、5回)を設定する。
【0181】
ステップS124において、CPU81は、ユーザにより選択されたスタンプのデザイン、およびそのデザインに応じたマスク画像を選択する。ステップS125において、CPU81は、編集入力用モニタ18上のタッチペン20による描画位置を設定する。ステップS126において、CPU81は、ステップS123の処理で選択されたデザインおよびマスク画像を合成する。
【0182】
ステップS127において、CPU81は、描画レイヤ、およびデザインとマスク画像の合成画像をさらに合成する。ステップS128において、CPU81は、ユーザが編集入力用モニタ18上にタッチペン20を押圧しながら静止している時間を計測する、ステップS129において、CPU81は、ステップS128の処理で計測された経過時間による拡大率もしくは縮小率を決定する。
【0183】
ステップS130において、CPU81は、ステップS128の処理で決定された拡大率もしくは縮小率に基づいて、デザインおよびマスク画像の拡大または縮小処理を行う。
【0184】
例えば、押圧している経過時間t、拡大縮小の切り替えが行われる時間(拡大回数)T、および、自然数n(=0,1,2,・・・)であるとして、
2nT≦t≦(2n+1)T
の場合、拡大処理が行われ、
(2n+1)T<t≦2(n+1)
の場合、縮小処理が行われる。
【0185】
すなわち、図32に示されるように、CPU81は、経過時間に応じて、スタンプのサイズを徐々に大きくし、所定の閾値を超えると、スタンプのサイズを徐々に小さくする。
【0186】
ステップS131において、CPU81は、タッチペン20が編集入力用モニタ18上に接触しているか否かを判定し、タッチペン20が接触していると判定した場合、ステップS129に戻り、上述したそれ以降の処理を繰り返す。
【0187】
ステップS131において、タッチペン20が編集入力用モニタ18上に接触していないと判定された場合、ステップS132に進み、CPU81は、描画レイヤを確定し、処理は終了される。
【0188】
次に、「回転スタンプ」の描画処理について説明する。
【0189】
CPU81は、ユーザによって、「回転スタンプ」と名前が付されたスタンプボタン174が選択されると、「回転スタンプ」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。そして、CPU81は、ユーザにより指定されたスタンプのデザインおよびマスク画像を選択し、それらを合成するとともに、さらに描画レイヤおよびデザインとマスク画像の合成画像を合成する。ユーザが、編集入力用モニタ18上にタッチペン20を押圧しながら静止させる時間に応じて、CPU81は、図33に示されるように、スタンプの向きを変化させる。
【0190】
次に、「七色スタンプ」の描画処理について説明する。
【0191】
CPU81は、ユーザによって、「七色スタンプ」と名前が付されたスタンプボタン175が選択されると、「七色スタンプ」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。そして、CPU81は、ユーザにより指定されたスタンプのデザインおよびマスク画像を選択し、それらを合成するとともに、さらに描画レイヤおよびデザインとマスク画像の合成画像を合成する。ユーザが、編集入力用モニタ18上にタッチペン20を押圧しながら移動させると、CPU81は、図34に示されるように、スタンプの向きを変化させるとともに、ペンの軌跡に応じてスタンプの色をランダムに変化させる。
【0192】
例えば、経過時間t1の場合、スタンプの向きが回転されずに(すなわち、0度のままで)デザインが赤色に設定され、経過時間t2の場合、スタンプの向きが−90度回転されるとともにデザインが紫色に設定され、経過時間t3の場合、スタンプの向きが正向きから−180度回転されるとともにデザインが青色に設定され、さらに経過時間t4の場合、スタンプの向きが−270度回転されるとともにデザインが水色に設定される。
【0193】
次に、図35のフローチャートを参照して、「いっぱいスタンプ」の描画処理について説明する。
【0194】
ステップS151において、CPU81は、ユーザによって、「いっぱいスタンプ」と名前が付されたスタンプボタン177が選択されたか否かを判定し、スタンプボタン177が選択されるまで判定処理を繰り返す。ステップS151において、スタンプボタン177が選択されたと判定された場合、ステップS152に進み、CPU81は、「いっぱいスタンプ」に対応する画像処理プログラムをプログラム記憶部84からRAM83にロードして実行し、描画レイヤの初期化を行う。
【0195】
ステップS153において、CPU81は、ペン先を中心とした所定幅の配置領域(正方形)を限定領域として設定する。ステップS154において、CPU81は、ユーザにより選択されたスタンプのデザイン、およびそのデザインに応じたマスク画像を選択する。ステップS155において、CPU81は、編集入力用モニタ18上のタッチペン20による描画位置を設定する。
【0196】
ステップS156において、CPU81は、配置領域の初期設定を行い、ステップS157において、配置領域内のランダムな点、すなわちスタンプの配置位置を決定する。ステップS158において、CPU81は、ステップS154の処理で選択されたデザインおよびマスク画像を合成する。
【0197】
ステップS159において、CPU81は、描画レイヤ、およびデザインとマスク画像の合成画像をさらに合成する。ステップS160において、CPU81は、ユーザが編集入力用モニタ18上にタッチペン20を押圧しながら静止している時間に応じて配置領域を決定する。
【0198】
ステップS161において、CPU81は、限定領域を超えない範囲で、ステップS157の処理で決定された配置位置に、ステップS159の処理で合成されたデザインおよびマスク画像を配置する。すなわち、図36に示されるように、CPU81は、経過時間に応じて、スタンプの数を増加させるとともに、そのスタンプをランダムな位置に配置する。
【0199】
ステップS162において、CPU81は、タッチペン20が編集入力用モニタ18上に接触しているか否かを判定し、タッチペン20が接触していると判定した場合、ステップS157に戻り、上述したそれ以降の処理を繰り返す。
【0200】
ステップS162において、タッチペン20が編集入力用モニタ18上に接触していないと判定された場合、ステップS163に進み、CPU81は、描画レイヤを確定し、処理は終了される。
【0201】
図37は、「手作りスタンプ」と名前が付されたスタンプボタン176が選択された場合に表示される編集画面を示す図である。
【0202】
図37に示す編集画面には、スタンプ作成表示部191が表示され、その表示部内に、ユーザが手作りスタンプを作成(描画)するためのスタンプ作成部192、ユーザによって書き込まれたスタンプを登録するときに選択されるスタンプ登録ボタン193、および、図30に示した編集画面に戻るときに選択される戻るボタン194が表示されている。この編集画面の構成は、基本的に、図14に示した編集画面と同様の構成とされる。
【0203】
ユーザが、例えば、スタンプ作成部192に、所望の絵や文字などを描画し、スタンプ登録ボタン193を選択することにより、いま作成されたスタンプ(以下、適宜、手作りスタンプと称する)を、スタンプボタン172乃至177のいずれか、もしくは全てに登録することができる。なお、ユーザによって描画される絵や文字の他、先に撮影された画像を手作りスタンプとして登録することも可能である。
【0204】
また、所定数以上のスタンプが登録されている場合には、既に登録されているスタンプのうち、最も古いスタンプが削除され、新しい手作りスタンプが登録される。また、ユーザが、手作りスタンプを作成し、登録ボタン193を選択せずに、戻るボタン194を選択した場合には、そのユーザが編集中に限って手作りスタンプを使用することができる。
【0205】
さらに、作成された手作りスタンプのデータを、例えば、ユーザが自ら用意したメモリカードやフレキシブルディスクなどの記録媒体に記録させるようにしてもよい。すなわち、例えば、ユーザが、ドライブ85にメモリカードもしくはフレキシブルディスクなどを装着し、手作りスタンプのデータを記録させるための操作を行うと、CPU81は、ユーザからの操作入力を受けて、ドライブ85に装着されている記録媒体に、手作りスタンプのデータを記録する。勿論、記録媒体に記録されている手作りスタンプのデータを、ドライブ85を介して読み出し、スタンプボタン172乃至177のいずれか、もしくは全てに登録させることも可能である。
【0206】
なお、手作りスタンプは、スタンプボタン172乃至177のいずれかもしくは全てに登録させる他、別途、手作りスタンプパレットを表示させるようにしてもよい。
【0207】
本発明を適用した画像印刷装置1においては、撮影された画像の明るさ(RGBの値)が所定の閾値以上(例えば、白色)の画素を検出して、その範囲にのみ落書きすることができるように設定されている。
【0208】
しかしながら、落書き範囲を正しく検出することができない場合や、検出された落書き範囲以外にもユーザが落書きしたい場合などがある。そこで、必要に応じて、CPU81は、例えば、図14に示した編集画面における編集開始時に、ユーザに対して、「落書きしたい範囲を変更する場合は背景ブラシを選択してね」といったメッセージを表示させ、ブラシボタン129、および、描画範囲を設定するための設定ボタン130乃至135のいずれかを選択させるようにする。
【0209】
そして、ユーザが、「背景ブラシ」と名前が付されたブラシボタン129を選択すると、CPU81は、表示プロセッサを介して編集入力用モニタ18に、例えば、図38に示すような、「ボタンで指定した範囲に塗れるよ!」といったメッセージを表示させ、ユーザに対して、落書き範囲(閾値)の選択を促す。
【0210】
次に、図39のフローチャートを参照して、背景落書き処理について説明する。
【0211】
ステップS181において、CPU81は、ユーザによって背景ブラシボタン129が選択されたか否かを判定し、背景ブラシボタン129が選択されるまで判定処理を繰り返す。そして、ステップS181において、背景ブラシボタン129が選択されたと判定された場合、ステップS182に進み、CPU81は、プログラム記憶部84に記憶されている背景検出プログラムをRAM83にロードして実行し、描画レイヤの初期化を行うとともに、ステップS183において、落書き許可フラグをONに初期化する。
【0212】
ステップS184において、CPU81は、ユーザによって所望の閾値が選択されたか否か、すなわち落書き範囲を設定するための設定ボタン130乃至134のいずれかが選択されたか否かを判定し、所望の閾値が選択されるまで判定処理を繰り返す。ステップS184において、所望の閾値が選択された場合、ステップS185に進み、CPU81は、落書き許可フラグをOFFに初期化する。
【0213】
ステップS186において、CPU81は、撮像データをRGB毎の領域に分解する。ステップS187において、CPU81は、ステップS184の処理で選択された落書き範囲に応じたR,G,B値の閾値もしくは描画許可範囲をそれぞれ取得する。
【0214】
例えば、ステップS184において、「どこでもブラシ」と名前が付された設定ボタン130が選択された場合、全ての領域に対して落書き可能とされるため、R,G,B値の描画許可範囲は、いずれも0乃至255が取得される。
【0215】
また例えば、ステップS184において、「かなり広め」と名前が付された設定ボタン131が選択された場合、Bの値bに対して、B値の閾値はb≧110、R値の描画許可範囲はr∈[b−30,b+5]、G値の描画許可範囲はg∈[b−5,b+10]が取得される。
【0216】
また例えば、ステップS184において、「落書き範囲広め」と名前が付された設定ボタン132が選択された場合、B値の閾値はb≧140、R値の描画許可範囲はr∈[b−30,b+5]、G値の描画許可範囲はg∈[b−5,b+10]が取得される。
【0217】
また例えば、ステップS184において、「背景のみOK」と名前が付された設定ボタン133が選択された場合、B値の閾値はb≧170、R値の描画許可範囲はr∈[b−30,b+5]、G値の描画許可範囲はg∈[b−5,b+10]が取得される。
【0218】
さらにまた例えば、ステップS184において、「落書き範囲狭め」と名前が付された設定ボタン134が選択された場合、B値の閾値はb≧110、R値の描画許可範囲はr∈[b−30,b+5]、G値の描画許可範囲はg∈[b−5,b+10]が取得される。
【0219】
ステップS188において、CPU81は、ステップS187の処理で取得された描画許可範囲と撮像データの各画素のR成分を比較する。ステップS189において、CPU81は、ステップS187の処理で取得された描画許可範囲と撮像データの各画素のG成分を比較する。ステップS190において、CPU81は、ステップS187の処理で取得された閾値と撮像データの各画素のB成分を比較する。
【0220】
ステップS191において、CPU81は、ステップS188乃至190の比較結果に基づいて、B成分が閾値を超え、かつ、R成分およびG成分がそれぞれ描画許可範囲内である領域を検出し、その領域の許可フラグをONに設定する。
【0221】
なお、ステップS184において、「どこでもブラシ」と名前が付された設定ボタン130が選択された場合には、撮像データの全ての領域が検出されることになるため、ステップS188乃至S190の処理を省略するようにしてもよい。この場合、ステップS191において、撮像データの全ての領域の許可フラグがONに設定される。
【0222】
ステップS192において、CPU81は、ユーザによってタッチペン20が用いられ落書きが入力されたか否かを判定し、落書きが入力されるまで判定処理を繰り返す。ステップS192において、落書きが入力されたと判定された場合、ステップS193に進み、CPU81は、落書きフラグがONに設定されている領域のみ、描画レイヤに、テクスチャおよびマスク画像(ペンによる落書き)、もしくはデザインおよびマスク画像(スタンプによる落書き)を合成する。一方、落書きフラグがOFFに設定されている領域には、落書きが許可されないため、ユーザがタッチペン20を用いてその領域に落書きしたとしても、その落書きは実際には表示されない。
【0223】
ステップS194において、CPU81は、修正領域が指定されたか否か、すなわち、ユーザにより、消しゴムボタン136が操作され、落書きされた領域のうち、修正したい所定の領域が指定されたか否かを判定する。
【0224】
ステップS194において、修正領域が指定されたと判定された場合、ステップS195に進み、CPU81は、修正領域に対応する描画レイヤの値を透明化する。これにより、指定された領域の落書きが消去される。
【0225】
ステップS194において、修正領域が指定されていないと判定された場合、ステップS195の処理はスキップされ、ステップS196に進む。ステップS196において、CPU81は、描画レイヤを確定し、ステップS197において、落書きが終了されたか否か、すなわち、制限時間が経過したか、もしくは撮影終了ボタン165が操作されたか否かを判定し、落書きが終了されていないと判定した場合、ステップS192に戻り、上述したそれ以降の処理を繰り返す。ステップS197において、落書きが終了されたと判定された場合、処理は終了される。
【0226】
このように、背景落書き処理は、所定の明るさを持つ領域にのみ落書きが許可され、落書きが許可された領域にユーザが選択したテクスチャもしくはスタンプなどで落書きすることができる。さらに、落書きが許可された領域全てに、一括して、所定のテクスチャを塗ることも可能である。
【0227】
例えば、図38に示した編集画面において、ユーザが、背景ブラシボタン129を選択し、「背景のみOK」と名前が付された設定ボタン133を選択すると、CPU81は、図39を用いて説明した背景落書き処理を実行し、背景のみ(撮影された画像以外の部分)を検出する。そして、ユーザが、所望のテクスチャもしくは色を選択した後でボタン201を選択すると、図40に示されるように、落書き範囲として設定された背景にのみ、一括して、所定のテクスチャが塗られる。
【0228】
なお、編集開始時や落書き範囲選択時に、落書き可能な領域のみ通常に表示させ、落書き不可の領域を薄く表示させたり、もしくは、マスク表示させることにより、不用意に落書きされてしまうことを防止することができる。
【0229】
また、表示プロセッサ96は、編集対象画像として選択された画像を、2つのフレームバッファに記憶させ、入力された編集データを一方のフレームバッファに記憶されている画像に反映させておくことにより、ユーザが誤って落書きした場合にも、やり直しボタン137もしくは138を選択することでその編集を取り消すことができる。そして編集が取り消されたとき、他方のフレームバッファ(編集が反映されていない)に記憶されている画像の対応する部分のデータが、編集データを反映させる画像に反映されて、その編集が取り消される。
【0230】
図41は、上述した画像印刷装置1により作成される印刷媒体(シールシート)92の例を示す図である。
【0231】
図41(A)は、例えば、ユーザにより6分割のシールシートが選択された場合の印刷媒体を示す図である。この例のシールシートには、ユーザによって落書きされた1種類の画像が印刷されている。
【0232】
図41(B)は、例えば、ユーザにより混合分割のシールシートが選択された場合の印刷媒体を示す図である。この例のシールシートには、ユーザによって落書きされた2種類の画像が印刷されている。
【0233】
以上のように、様々な入力ツール(ペンやスタンプなど)を提供することにより、ユーザは、撮影した画像に複雑な書き込みを行うことができ、娯楽性に富んだシールシートを得ることができる。
【0234】
以上において、印刷媒体は、シールシートに限られるものではなく、例えば、所定のサイズの紙や、ポスター用の紙などに印刷するようにしてもよい。また、撮影し編集した画像データを、ユーザが自ら用意したフレキシブルディスクなどの記録媒体に記録させることができるようにしてもよい。なお、そのような印刷媒体や記録媒体の場合も、この画像印刷装置1において利用可能とされる識別情報により管理されている。
【0235】
また、以上においては、撮影空間と編集空間とを異なる位置に設けるようにしたが、勿論、撮影空間と編集空間を兼用させるようにしてもよい。この場合、撮影空間に設置されている撮影用モニタ14を編集入力用モニタとして使用させるようにしてもよいし、もしくは、撮影用モニタ14の近傍に編集入力用モニタを別途配置するようにしてもよい。
【0236】
【発明の効果】
以上のように、本発明によれば、撮影した画像に対して、簡単に、かつ、迅速に、より複雑な編集作業を行うことができ、複数の画像の編集操作が行い易くなる。これにより、ユーザは、娯楽性に富んだシールシートを得ることができる。
【図面の簡単な説明】
【図1】本発明を適用した画像印刷装置の斜視図を示す図である。
【図2】図1の画像印刷装置の配置の例を示す図である。
【図3】図1の画像印刷装置の内部の構成例を示すブロック図である。
【図4】撮影用モニタに表示されるデモ画面を示す図である。
【図5】撮影用モニタに表示される撮影モード選択画面を示す図である。
【図6】撮影用モニタに表示されるカメラアングル選択画面を示す図である。
【図7】撮影用モニタに表示される他の例のカメラアングル選択画面を示す図である。
【図8】撮影用モニタに表示される他の例のカメラアングル選択画面を示す図である。
【図9】撮影用モニタに表示されるズーム調整設定画面を示す図である。
【図10】ズーム値の補正処理を説明するフローチャートである。
【図11】撮影用モニタに表示される画像確認画面を示す図である。
【図12】編集画面の表示処理を説明するフローチャートである。
【図13】編集入力用モニタに表示される初期画面を示す図である。
【図14】編集入力用モニタに表示されるペンモードに関する編集画面を示す図である。
【図15】編集入力用モニタに表示されるにじみペンに関する編集画面を示す図である。
【図16】編集入力用モニタに表示される他の例のにじみペンに関する編集画面を示す図である。
【図17】各ペンの線の形状を示す図である。
【図18】にじみペンの描画処理を説明するフローチャートである。
【図19】にじみペン選択時のマスク画像の配置を示す図である。
【図20】クレヨンペン選択時のマスク画像の配置を示す図である。
【図21】ふちどりペン選択時のマスク画像の配置を示す図である。
【図22】ふち付マーカの描画処理を説明するフローチャートである。
【図23】ふち付マーカ選択時のマスク画像の配置を示す図である。
【図24】ふちつきペンで描画される線が交わる例を説明する図である。
【図25】立体ペンの描画処理を説明するフローチャートである。
【図26】図25に続くフローチャートである。
【図27】立体ペン選択時のマスク画像の配置を示す図である。
【図28】ぶよぶよペン選択時のマスク画像の配置を示す図である。
【図29】もこもこペン選択時のマスク画像の配置を示す図である。
【図30】編集入力用モニタに表示されるスタンプモードに関する編集画面を示す図である。
【図31】ふうせんスタンプの描画処理を説明するフローチャートである。
【図32】ふうせんスタンプを説明する図である。
【図33】回転スタンプを説明する図である。
【図34】七色スタンプを説明する図である。
【図35】いっぱいスタンプの描画処理を説明するフローチャートである。
【図36】いっぱいスタンプを説明する図である。
【図37】編集入力用モニタに表示される手作りスタンプに関する編集画面を示す図である。
【図38】編集入力用モニタに表示される背景ブラシに関する編集画面を示す図である。
【図39】背景落書き処理を説明するフローチャートである。
【図40】編集入力用モニタに表示される背景ブラシに関する編集画面を示す図である。
【図41】本発明を適用した画像印刷装置により作成される印刷媒体の例を示す図である。
【符号の説明】
1 画像印刷装置
13 撮影案内用スピーカ
14 撮影用モニタ
15 操作パネル
18 編集入力用モニタ
19 編集案内用スピーカ
20 タッチペン
21 シール取り出し口
31 撮影装置
32 CCDカメラ
81 CPU
82 ROM
83 RAM
84 プログラム記憶部
85 ドライブ
89 プリンタ
90 ID タグリーダライタ
91 シールシートユニット
92 シールシート
93 IDタグ
96 表示プロセッサ
97 タッチパネル

Claims (5)

  1. ユーザに、撮影させたのち、撮影された画像を編集させ、編集済みの画像が印刷されたシールシートを前記ユーザに提供する写真シール自動販売機において、
    撮影空間において、被写体を撮影する撮影手段と、
    前記撮影空間とは異なる位置に設けられた編集空間において、前記撮影手段により撮影された前記被写体の画像を表示するとともに、前記ユーザが前記被写体の画像の編集に利用する入力ツールを選択するためのペンボタン群またはスタンプボタン群の内、前記ユーザに選択されたいずれか一方を表示し、前記ユーザが前記スタンプボタン群を選択し、さらに、その選択により前記被写体の画像とともに表示された前記スタンプボタン群に含まれる所定のボタンを選択した場合、前記被写体の画像に加えて、描画した絵や文字のスタンプである手作りスタンプの作成のためのスタンプ作成部、並びに、前記スタンプ作成部において描画された絵や文字を前記手作りスタンプとして登録するときに選択されるスタンプ登録ボタンを表示するとともに、前記ペンボタン群をさらに表示する表示手段と、
    前記表示手段により表示されている前記スタンプ登録ボタンが選択された場合、前記ユーザが、前記ペンボタン群を用いて前記入力ツールを選択し、選択した前記入力ツールを利用して、前記スタンプ作成部に描画した絵や文字を、前記手作りスタンプとして登録する登録手段と
    を備えることを特徴とする写真シール自動販売機。
  2. 前記登録手段は、所定数以上の前記手作りスタンプの登録が指令された場合、最古の前記手作りスタンプを消去する
    ことを特徴とする請求項1に記載の写真シール自動販売機。
  3. 前記登録手段により登録された前記手作りスタンプを携帯可能な記録媒体に記憶する記憶手段を
    さらに備えることを特徴とする請求項1または2に記載の写真シール自動販売機。
  4. ユーザに、撮影させたのち、撮影された画像を編集させ、編集済みの画像が印刷されたシールシートを前記ユーザに提供する写真シール自動販売機の画像処理方法において、
    撮影空間において、被写体を撮影する撮影ステップと、
    前記撮影空間とは異なる位置に設けられた編集空間において、前記撮影ステップの処理により撮影された前記被写体の画像を表示するように制御するとともに、前記ユーザが前記被写体の画像の編集に利用する入力ツールを選択するためのペンボタン群またはスタンプボタン群の内、前記ユーザに選択されたいずれか一方を表示するように制御し、前記ユーザが前記スタンプボタン群を選択し、さらに、その選択により前記被写体の画像とともに表示された前記スタンプボタン群に含まれる所定のボタンを選択した場合、前記被写体の画像に加えて、描画した絵や文字のスタンプである手作りスタンプの作成のためのスタンプ作成部、並びに、前記スタンプ作成部において描画された絵や文字を前記手作りスタンプとして登録するときに選択されるスタンプ登録ボタンを表示するように制御するとともに、前記ペンボタン群をさらに表示するように制御する表示制御ステップと、
    前記表示制御ステップの処理により制御されて表示されている前記スタンプ登録ボタンが選択された場合、前記ユーザが、前記ペンボタン群を用いて前記入力ツールを選択し、選択した前記入力ツールを利用して、前記スタンプ作成部に描画した絵や文字を、前記手作りスタンプとして登録する登録ステップと
    を含むことを特徴とする画像処理方法。
  5. ユーザに、撮影させたのち、撮影された画像を編集させ、編集済みの画像が印刷されたシールシートを前記ユーザに提供する写真シール自動販売機を制御するコンピュータに、
    撮影空間において、被写体を撮影する撮影ステップと、
    前記撮影空間とは異なる位置に設けられた編集空間において、前記撮影ステップの処理により撮影された前記被写体の画像を表示するように制御するとともに、前記ユーザが前記被写体の画像の編集に利用する入力ツールを選択するためのペンボタン群またはスタン プボタン群の内、前記ユーザに選択されたいずれか一方を表示するように制御し、前記ユーザが前記スタンプボタン群を選択し、さらに、その選択により前記被写体の画像とともに表示された前記スタンプボタン群に含まれる所定のボタンを選択した場合、前記被写体の画像に加えて、描画した絵や文字のスタンプである手作りスタンプの作成のためのスタンプ作成部、並びに、前記スタンプ作成部において描画された絵や文字を前記手作りスタンプとして登録するときに選択されるスタンプ登録ボタンを表示するように制御するとともに、前記ペンボタン群をさらに表示するように制御する表示制御ステップと、
    前記表示制御ステップの処理により制御されて表示されている前記スタンプ登録ボタンが選択された場合、前記ユーザが、前記ペンボタン群を用いて前記入力ツールを選択し、選択した前記入力ツールを利用して、前記スタンプ作成部に描画した絵や文字を、前記手作りスタンプとして登録する登録ステップと
    を実行させることを特徴とするプログラム。
JP2002011936A 2001-04-09 2002-01-21 写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラム Expired - Lifetime JP3548852B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2002011936A JP3548852B2 (ja) 2001-04-09 2002-01-21 写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラム
PCT/JP2002/003519 WO2002084993A1 (fr) 2001-04-09 2002-04-09 Appareil et procede pour imprimer une image
CNB028079574A CN1237777C (zh) 2001-04-09 2002-04-09 图像打印装置和图像打印方法
KR10-2003-7013182A KR20030083763A (ko) 2001-04-09 2002-04-09 화상 인쇄 장치 및 화상 인쇄 방법
TW091107096A TW552462B (en) 2001-04-09 2002-04-09 Image printer, image printing method, printing media, program and printing media unit

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2001109878 2001-04-09
JP2001-109878 2001-04-09
JP2001-142945 2001-05-14
JP2001142945 2001-05-14
JP2002011936A JP3548852B2 (ja) 2001-04-09 2002-01-21 写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2002012022A Division JP2003219328A (ja) 2002-01-21 2002-01-21 画像印刷装置および方法、印刷媒体、プログラム、並びに印刷媒体ユニット

Publications (2)

Publication Number Publication Date
JP2003037813A JP2003037813A (ja) 2003-02-07
JP3548852B2 true JP3548852B2 (ja) 2004-07-28

Family

ID=27346493

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002011936A Expired - Lifetime JP3548852B2 (ja) 2001-04-09 2002-01-21 写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラム

Country Status (5)

Country Link
JP (1) JP3548852B2 (ja)
KR (1) KR20030083763A (ja)
CN (1) CN1237777C (ja)
TW (1) TW552462B (ja)
WO (1) WO2002084993A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9389485B2 (en) 2014-07-04 2016-07-12 Furyu Corporation Photo booth

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4100195B2 (ja) 2003-02-26 2008-06-11 ソニー株式会社 3次元オブジェクトの表示処理装置、表示処理方法、およびコンピュータプログラム
JP4188768B2 (ja) * 2003-07-18 2008-11-26 株式会社リコー ネットワーク通信装置、プログラムおよび記録媒体
JP2006331039A (ja) * 2005-05-25 2006-12-07 Make Softwear:Kk 写真シール作成装置
JP4553378B2 (ja) * 2005-08-25 2010-09-29 株式会社メイクソフトウェア 画像編集装置、写真シール作成装置、画像編集方法及び画像編集プログラム
JP5030651B2 (ja) * 2007-04-17 2012-09-19 任天堂株式会社 描画処理プログラムおよび描画処理装置
JP2010059021A (ja) * 2008-09-04 2010-03-18 Hoya Corp フツリン酸ガラス、プレス成形用ガラス素材、光学素子ブランク、光学素子それぞれの製造方法
US9454834B2 (en) 2008-09-26 2016-09-27 Nintendo Co., Ltd. Storage medium storing image processing program for implementing controlled image display according to input coordinate, and information processing device
JP5328277B2 (ja) * 2008-09-26 2013-10-30 任天堂株式会社 画像処理プログラムおよび画像処理装置
JP5440374B2 (ja) * 2010-05-14 2014-03-12 富士ゼロックス株式会社 情報処理装置及びプログラム
KR102013239B1 (ko) * 2011-12-23 2019-08-23 삼성전자주식회사 디지털 영상 처리장치, 및 그 제어방법
JP2015215636A (ja) * 2012-09-10 2015-12-03 国立研究開発法人科学技術振興機構 テクスチャ描画支援装置
CN103854296B (zh) * 2012-12-06 2017-10-03 腾讯科技(深圳)有限公司 控制颜料涂色的方法及装置
JP5570633B2 (ja) * 2013-04-16 2014-08-13 任天堂株式会社 画像処理プログラム、画像処理装置、および画像処理方法
JP2016058937A (ja) * 2014-09-11 2016-04-21 辰巳電子工業株式会社 遊戯用画像編集装置、遊戯用画像編集方法およびコンピュータ・プログラム
JP6772505B2 (ja) * 2016-03-25 2020-10-21 ブラザー工業株式会社 プログラム及び端末装置
WO2019088798A1 (ko) * 2017-11-06 2019-05-09 디에스글로벌 (주) 사용자 편집 이미지가 인쇄된 스티커 및 이의 제조 방법
JP7043819B2 (ja) * 2017-12-12 2022-03-30 大日本印刷株式会社 操作表示装置及びプログラム
CN108230116A (zh) * 2018-01-22 2018-06-29 深圳怡化电脑股份有限公司 一种图像定制方法、装置、设备和存储介质
JP7287179B2 (ja) * 2019-08-19 2023-06-06 ブラザー工業株式会社 プログラム
CN113660397A (zh) * 2021-08-12 2021-11-16 广州竭力信息科技有限公司 一种基于现实场景实时展示的光绘互动方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6057777A (ja) * 1983-09-08 1985-04-03 Canon Inc 照明装置と共に用いられる撮像装置
JPH06189308A (ja) * 1992-12-18 1994-07-08 Eastman Kodak Japan Kk 自己写真撮影システム
JPH06208654A (ja) * 1993-01-08 1994-07-26 Hitachi Software Eng Co Ltd ペン入力図形編集システム
JPH10188019A (ja) * 1996-12-19 1998-07-21 Sega Enterp Ltd 画像処理方法及び装置
JP3585357B2 (ja) * 1997-11-19 2004-11-04 シャープ株式会社 情報処理装置及び方法並びに情報処理プログラムを記録した記録媒体
JPH11259630A (ja) * 1998-03-12 1999-09-24 Canon Inc 画像処理装置及び方法並びに記憶媒体
JP2985879B1 (ja) * 1998-06-30 1999-12-06 オムロン株式会社 人物画像処理装置
JP3055836U (ja) * 1998-07-14 1999-01-29 株式会社アトラス 画像プリント供給装置
JP2000131753A (ja) * 1998-10-23 2000-05-12 Konica Corp 証明写真作成装置
JP3062194U (ja) * 1999-03-16 1999-09-28 日立ソフトウエアエンジニアリング株式会社 自動写真撮影装置および印刷用紙
JP3064486U (ja) * 1999-06-02 2000-01-21 船井電機株式会社 映像プリント遊戯装置
JP2001052191A (ja) * 1999-08-17 2001-02-23 Nikon Corp 情報処理装置および情報処理プログラムを記憶した記憶媒体

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9389485B2 (en) 2014-07-04 2016-07-12 Furyu Corporation Photo booth

Also Published As

Publication number Publication date
CN1237777C (zh) 2006-01-18
JP2003037813A (ja) 2003-02-07
KR20030083763A (ko) 2003-10-30
CN1543741A (zh) 2004-11-03
TW552462B (en) 2003-09-11
WO2002084993A1 (fr) 2002-10-24

Similar Documents

Publication Publication Date Title
JP3548852B2 (ja) 写真シール自動販売機および写真シール自動販売機の画像処理方法、並びにプログラム
JP5802911B2 (ja) 写真撮影遊戯機
JP2008054234A (ja) 写真撮影遊戯機
JP4406741B2 (ja) 写真撮影編集方法及び写真撮影編集装置
JP4553378B2 (ja) 画像編集装置、写真シール作成装置、画像編集方法及び画像編集プログラム
JP4126534B2 (ja) 写真シール自動販売機および方法
JP5223349B2 (ja) ステップ、画像撮影装置
JP6085838B2 (ja) 写真撮影遊戯装置、画像生成方法、及び画像生成プログラム
JP5104513B2 (ja) 写真撮影編集方法およびその装置
JP2003219328A (ja) 画像印刷装置および方法、印刷媒体、プログラム、並びに印刷媒体ユニット
JP3196897B1 (ja) 画像印刷装置および方法、印刷媒体作成装置および方法、印刷媒体、並びに記録媒体
JP6245529B2 (ja) 遊戯用撮影装置、遊戯用撮影方法およびプログラム
JP5704205B2 (ja) 画像処理装置、これを用いた写真撮影遊戯装置、画像処理方法、画像処理プログラム、及び写真印刷シート
JP2003241296A (ja) 写真シール自動販売方法とその装置、シール紙ユニット及び写真シールシート
JP2013041273A (ja) 写真撮影遊戯装置
JP2003260820A (ja) 画像印刷装置および方法、印刷媒体、並びにプログラム
JP2004126405A (ja) 写真シール販売機および写真シール印刷方法、写真シール作成装置および方法
JP5223348B2 (ja) 画像撮影装置
JP4265569B2 (ja) 編集機能付き写真撮影装置
JP6978660B2 (ja) 写真撮影遊戯装置、画像表示方法、及び画像表示プログラム
JP2003264760A (ja) 写真シール自動販売機、写真シール作成方法、並びにプログラム
JP3582078B2 (ja) 画像印刷装置および画像印刷方法、並びにプログラム
JP2002330316A (ja) 画像印刷装置および方法、印刷媒体、印刷媒体ユニット、並びに撮影台
JP3552689B2 (ja) 画像印刷装置および方法、印刷媒体、並びにプログラム
JP4639568B2 (ja) 画像印刷装置および方法

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20031001

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20031201

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20031204

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20040220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040331

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 3548852

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090430

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100430

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110430

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110430

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130430

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130430

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140430

Year of fee payment: 10

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term