JP3671258B2 - Image processing device - Google Patents

Image processing device Download PDF

Info

Publication number
JP3671258B2
JP3671258B2 JP12558095A JP12558095A JP3671258B2 JP 3671258 B2 JP3671258 B2 JP 3671258B2 JP 12558095 A JP12558095 A JP 12558095A JP 12558095 A JP12558095 A JP 12558095A JP 3671258 B2 JP3671258 B2 JP 3671258B2
Authority
JP
Japan
Prior art keywords
image
file
data
area
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP12558095A
Other languages
Japanese (ja)
Other versions
JPH08305871A (en
Inventor
邦裕 松原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP12558095A priority Critical patent/JP3671258B2/en
Priority to US08/636,774 priority patent/US5943049A/en
Priority to MYPI96001554A priority patent/MY115012A/en
Priority to EP96106562A priority patent/EP0740271B1/en
Priority to DE69628695T priority patent/DE69628695T2/en
Priority to KR1019960013355A priority patent/KR100246520B1/en
Priority to CN96104886A priority patent/CN1105994C/en
Publication of JPH08305871A publication Critical patent/JPH08305871A/en
Application granted granted Critical
Publication of JP3671258B2 publication Critical patent/JP3671258B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

【0001】
【産業上の利用分野】
この発明は、画像及び文字や記号(文字等)を処理する画像処理装置に関する。
【0002】
【従来の技術】
電子手帳やワープロ等の画像処理装置においては、文字等や画像のデータからなるファイルをディスプレイの画面で編集し、RAM等のメモリの所定の記憶エリアに記録したり、プリンタで印刷したり、メモリに記録されているファイルを呼び出す処理が行われる。ところで、こうした装置ではファイル処理(セーブ、ロード等)の操作をよりやり易くするために、各ファイルのそれぞれに対応するアイコンと称する標識をメニュー画面として表示させることができる。このような装置においては、文字等からなるファイルの名称を入力することなく、画面操作によりファイル処理を行うことができるので操作が容易である。例えば、ファイルをメモリから呼び出す場合には、操作に応じてディスプレイの画面内を移動する選択カーソルによってメニュー画面の複数のアイコンの中のひとつを選択し、そのアイコンに対応する記憶エリアのファイルを呼び出して画面に表示させ、編集や印刷等の処理を行うことができる。
【0003】
【発明が解決しようとする課題】
しかしながら上記従来の画像処理装置においては、メニュー画面に表示されている各アイコンに対応する記憶エリアにファイルが記録されているか、記憶エリアにファイルを記録することが可能か等の記憶エリアの状態を判別することができなかった。このため、ユーザは、ファイルが記録されていない記憶エリアからファイルを呼び出そうとしたり、ファイルを記録することができない記憶エリアにファイルを記録しようとしたりという誤ったアイコン選択をすることがあった。このため、誤った操作をするたびにその都度メニュー画面に切り替えてアイコン選択をやり直さねばならず、煩雑な操作を余儀なくされるという問題があった。また、アイコン選択のミスにより保存すべきファイルが記録されている記憶エリアに他のファイルを記録してしまい、その保存すべきファイルが消去されるというトラブルが発生するという問題もあった。
この発明の目的は、画面に表示された複数の標識のうち、選択された標識に対応する記憶エリアに関する情報を確実に認識させることができる画像処理装置を提供することである。
【0004】
【課題を解決するための手段】
この発明は、複数の記憶エリアのそれぞれにデータを記憶する記憶手段と、前記複数の記憶エリアのそれぞれに対応する複数の標識を表示させる第1の表示制御手段と、この第1の表示制御手段の制御により表示された複数の標識のうち、任意の標識を操作に応じて選択する操作手段と、前記標識表示制御手段の制御により複数の標識が表示された状態で、前記操作手段によって選択された標識に対応する記憶エリアに関する情報とこの情報を強調する画像とを表示させる第2の表示制御手段とを備え、前記画像は、挿絵、図形又はこれらの組み合わせからなり、前記挿絵は、人又は事物の形象或いは前記情報を囲む吹出しを含む囲みマークであることを特徴する。
【0005】
【作用】
この発明によれば、表示された複数の標識のうち、任意の標識が選択された場合には、その選択された標識に対応する記憶エリアに関する情報この情報を強調する画像とを表示するので、文字等のみによる通常の画一的な表示に比べてユーザの注意を強く喚起させ、選択した標識に対応する記憶エリアに関する情報を確実に認識させることができる。
【0006】
【実施例】
以下、図1〜図18を参照してこの発明の一実施例を説明する。
まず、この実施例の構成について説明する。
図1は実施例のシステム構成を示す外観図である。図において、本体1は画像処理機能を有するとともに印刷機能を備えている。ROM(記憶手段)2は本体1に挿脱自在に挿入されるカセットタイプの読み出し専用メモリであり、アプリケーションプログラム(以下、単にプログラムという)や画像処理に用いるパーツ画像データその他の各種データ(これらのデータについては後述する)が記録されている。操作パッド(操作手段)3は本体1に接続され、画像処理その他の制御動作を指示する。この操作パッド3には十字キー4、決定キー5及び解除キー6が設けられている。外部表示装置7は本体1に接続される一般的なテレビ受像機であり、ディスプレイ(表示手段)8及びスピーカ9を備えている。
【0007】
図2は図1のシステム構成のブロック図である。CPU(制御手段)10はROM2及び操作パッド3に接続され、ROM2からプログラム等を読み込むとともに、操作パッド3からの指令に基づいて画像処理その他の制御動作を行う。処理する画像データとしては、例えば人や物の形を示す画像データがある。RAM(記憶手段)11はCPU10に接続され、ROM2から読み込まれたプログラム等を一時的に記録するとともに、画像データ及び画像処理に必要なデータを一時的に記録するワークエリアとして用いられる。ビデオディスプレイプロセッサ(信号出力手段)12はCPU10に接続され、その指示に基づいて表示のための画像信号を外部表示装置7のディスプレイ8に出力する。VRAM13はビデオディスプレイプロセッサ12に接続され、ビデオディスプレイプロセッサ12からの読み出し指令に応じてディスプレイ8の表示位置に対応するドットデータを送出し、ビデオディスプレイプロセッサ12からの書き込み指令に応じてCPU10から出力される画像データを記録する。プリンタ14はCPU10に接続され、RAM11に記録された画像データをCPU10の指令に基づいて印刷する。音源15はCPU10に接続され、CPU10から出力される音声データに応じて、画像処理や表示の際に必要な警告音や音楽のための音声信号を外部表示装置7のスピーカ9に送出する。
【0008】
図3にROM2及びRAM11のエリアマップを示す。
ROM2のパーツ画像データエリア21には、人物の画像やものの画像を構成する複数のパーツ画像データ(以下、単にパーツデータという)が記録されている。例えば、人物を構成する髪、目、鼻、服等の複数のカテゴリのパーツデータの場合、各カテゴリごとに異なる形状のパーツデータが複数記録されており、個々のパーツデータごとにパーツ番号が付されている。すなわち、各パーツ番号はパーツのカテゴリ及び形状を一義的に示す番号となっている。したがって、各カテゴリからそれぞれ1つの形状のパーツデータを選択して組み合わせることにより、異なる複数の人物の画像データを構成し、複数のパーツ番号のデータからなるファイルで画像データに対応させて管理する。
【0009】
この実施例の場合、ROM2のパーツ番号データエリア22には#0〜#3の4個のファイルのデータを記録するエリアがあり、RAM11のパーツ番号データエリア23には、#4〜#15の14個のファイルのデータを記録するエリアがある。RAM11のファイルアドレスデータエリア24には、これら16個のエリアの先頭アドレスが記録される。RAM11のパーツ番号ストックエリア25には、#0〜#15の16個のファイルの中の任意の1つのファイルのパーツ番号データを一時的に記録するようになっている。RAM11の画像データストックエリア26には、パーツ番号ストックエリア25に記録されている各パーツ番号に対応するパーツデータで構成された人物等の画像データを記録する。RAM11のファイル属性データエリア27には、各ファイルの内容を示すデータを記録する。
【0010】
各ファイル属性データエリア27は、図4に示すように、複数のビットのレジスタで構成されている。上位の1ビットが0の場合はユーザがファイルを記録できないパーツ番号データエリア(プリセットエリア)を示し、1の場合はユーザがファイル記録できるパーツ番号データエリア(ユーザエリア)を示している。次の2ビットが0、0の場合はそのエリアに記録されているファイルのパーツ番号データが人の画像データに関するものであることを示し、この2ビットが0、1の場合は記録されているファイルのパーツ番号データがものの画像データに関するものであることを示し、この2ビットが1、0の場合はそのエリアにはファイルが記録されていないことを示している。また、下位4ビットは16のエリアを識別する番号を示している。
なお、CPU内部処理用ワークエリア28には、現在アイコン番号等のデータを記録する。
【0011】
次に、この実施例の動作について説明する。
本体1及び外部表示装置7に電源が投入されるとこのシステムが起動し、CPU10がROM2からプログラムをRAM11に読み込んでこのプログラムを実行する。
図5にメインプログラムのフローチャートを示す。まず、システムの初期化のためのイニシャル処理を行い(ステップS1)、次いで、編集したい画像データに関するファイルを読み出すためのファイル選択処理を行う(ステップS2)。
【0012】
図6にファイル選択処理のプログラムのフローチャートを示す。まず、ディスプレイ8にメニュー画面を表示させるイニシャル処理を行う(ステップS21)。この場合のメニュー画面には、図7に示すように、16個のアイコン(標識)31、いずれかひとつのアイコンを選択するための選択カーソル32が表示される。さらに、ユーザに対する説明文(情報)33、並びに、この説明文33を強調するような特異な挿絵の画像、例えば、説明文33を囲む吹出し(囲みマーク)34及びこの吹出し34を発するピエロの画像35が表示される。この場合、ピエロの画像35は動画であり、左右に動くようになっている。
【0013】
16個のアイコン31の各々には、ファイル属性エリア27のデータに対応して1〜16の番号が表示され、1〜4の番号のアイコンは反転表示されてプリセットエリアのファイルに対応することを示し、5〜16の番号のアイコンは通常の表示でユーザエリアのファイルに対応することを示している。また、ファイルのパーツ番号が人に関するか又はものに関するかによって、黒星マーク又は白星マークが表示され、ファイルが記録されていない空きの場合には?マークが表示されている。
【0014】
このメニュー画面に表示される説明文33、説明用吹出し34及びピエロの画像35のデータはROM2に記録されており、表示されるメニュー画面に応じて表示される内容が変化する。図8(A)に説明文33の例を示す。図7のメニュー画面の場合の説明文33は、「どれを呼び出す?」であり、ユーザに対してアイコン選択を促すメッセージとして表示される。また、吹出し34及びピエロの画像35のデータは、図8(C)に示す吹出しデータ、形象データを読み込むことにより表示処理がなされる。ユーザは、説明文33を強調するように吹出し34及び動画のピエロの画像35が表示されるので、画面に注目して説明文33がアイコン選択を促す情報であると認識し、操作パッド3を操作する。
【0015】
次いで、操作パッド3のキー操作がなされると、図6のステップS22においてキー処理を判定し、操作されたキーが十字キー4である場合には、選択カーソル移動処理を行って操作に応じたアイコンの位置に選択カーソル32を移動させ(ステップS23)、ステップS22のキー処理の判定に移行する。決定キー5が操作された場合には、ファイル属性データエリア27を参照して、選択カーソル32の位置するアイコンに対応するファイルを判定する(ステップS24)。すなわち、パーツ番号データエリア22又は23からファイルの読み出しが可能か否かを判定する。この場合、ユーザは各アイコンのマークによって、ファイルの有無を判断することができるが、ユーザが初心者であったり、ユーザの操作ミスやマークの見落としも考えられるため、選択されたアイコンに対応するファイルについてCPU10が判定する。
【0016】
いま、選択カーソル32が5の番号のアイコンを示している場合には、このアイコンに対応するエリアのファイル判定により、このエリアには何も記録されていないことを判定し、ファイルの読み出しができないので、図8(A)の説明文の中の「そこにはなにもないよ」というデータを読み込んで説明用吹出し表示処理を行う(ステップS25)。したがって、図9に示すように、メニュー画面の説明用吹出し34には、「そこにはなにもないよ」という説明文33が特徴的な吹出し34及び動画のピエロの画像35とともに表示される。ユーザはこの表示に注目して、選択したアイコンに対応するエリアにファイルが記録されているか否かを認識する。この場合は、説明文33が他のアイコンを選択するように促す情報であると認識し、操作パッド3を操作する。
【0017】
ステップS24のファイル判定処理において、選択されたアイコンに対応するファイルの読み出しが可能であることを判定した場合には、図8(A)の説明文の中からファイル判定に応じた説明文33を表示させる説明用吹出し表示処理を行う(ステップS26)。例えば、6の番号のアイコンが選択された場合には、画像データが人であるので、図10に示すように、メニュー画面には、「この人でいい?」という説明文33が特徴的な画像とともに表示される。また、8の番号のアイコンが選択された場合には、画像データがものであるので、図11に示すように、メニュー画面には、「これでいい?」という説明文33が特徴的な画像とともに表示される。ユーザはこの表示に注目して、操作パッド3の決定キー5又は解除キー6を操作することになる。
【0018】
キー操作がされた場合には、そのキー処理を判定し(ステップS27)、解除キー6が操作された場合には説明用吹出し表示処理を行う(ステップS28)。この場合には、図7のメニュー画面となり、「どれを呼び出す?」という説明文33が表示される。決定キー5が操作された場合には、ファイルアドレスデータエリア24の中の選択されたアイコンに対応するエリアの先頭アドレスを参照し、そのアドレスに対応するファイルを読み込んで、そのファイルのパーツ番号をパーツ番号ストックエリア25に記憶するファイルセットを行う(ステップS29)。この場合、パーツ番号ストックエリア25に記憶したファイルのパーツ番号に対応する各カテゴリの複数のパーツデータをパーツデータエリア21から読み込んで、この複数のパーツデータで構成される人物等の画像データを画像データストックエリア26に記録する。したがって、この画像データを画像データストックエリア26から読み出して、ビデオディスプレイプロセッサ12及びVRAM13を介してディスプレイ8に表示する。
【0019】
ファイル選択処理においてファイルが呼び出された場合には、図5のパーツデータ編集処理(ステップS3)に移行する。
図12にパーツデータ編集処理のプログラムのフローチャートを示す。まず、イニシャル処理を行い(ステップS31)、編集処理のためのメニュー画面(図示せず)を表示する。次いで、操作パッド3の選択キー(図示せず)の操作により処理判定を行う(ステップS32)。パーツ変更処理(ステップS33)の場合には、パーツ番号ストックエリア25のパーツ番号を変更する。画像印刷処理(ステップS34)の場合には、画像データストックエリア26に記録されている画像データをプリンタ14に送出して印刷させる。また、ファイル記録処理(ステップS35)の場合には、編集したファイルを記録する。
【0020】
図13にファイル記録処理のプログラムのフローチャートを示す。まず、イニシャル処理を行い(ステップS41)、図14に示すようなメニュー画面を表示させる。この場合、図8(A)の中の「どこに記録する?」という説明文33が特徴的な吹出し34及び動画のピエロの画像35とともに表示される。さらに、アイコン31の上方の位置に警告文36が囲みマーク37とともに表示される。この場合、記録するパーツデータの名称である「********」及び図8(B)に示すROM2の警告データの中の「をきろくするよ」を組み合わせて、「********をきろくするよ」という警告文36が表示される。
ユーザは、特徴的な吹出し34及び動画のピエロの画像35が説明文33及び警告文36とともに表示されるので、画面に注目して説明文33がアイコン選択を促す情報であると認識し、警告文36が記録するパーツ番号が目的のパーツデータに関するものであることを認識し、操作パッド3を操作することになる。
【0021】
キー操作がされた場合には、そのキー処理を判定し(ステップS42)、操作されたキーが十字キー4である場合には、選択カーソル移動処理を行って操作に応じたアイコンの位置に選択カーソル32を移動させ(ステップS43)、ステップS42のキー処理の判定に移行する。決定キー5が操作された場合には、選択カーソル32が示すアイコンに対応するRAM11のファイル属性データエリア27を参照し、記録しようとするパーツ番号データエリア22のエリア判定を行う(ステップS44)。例えば、選択カーソル32が1の番号のアイコンの位置にある場合には、対応するエリアがプリセットエリアであると判定して、説明用吹出し表示処理を行う(ステップS45)。この場合には、図15に示すように、図8(A)の中の「そこにはきろくできないよ」という説明文33が特徴的な画像とともに表示される。ユーザは、特徴的な画像が説明文33及び警告文36とともに表示されるので、画面に注目して選択したアイコンに対応するエリアが記録可能であるか否かを認識する。この場合は、説明文33が記録不可能で他のアイコン選択を促す情報であると認識し、操作パッド3を操作することになる。
【0022】
ステップS44において選択されたアイコンに対応するエリアがユーザエリアであると判定した場合には、そのエリアにすでに別のファイルが記録されているか否かを判定する(ステップS46)。例えば、選択カーソル32が6の番号のアイコンの位置にある場合には、すでに別のファイルが対応するエリアに記録されているため、図16に示すように、記録されている画像データの名称「########」及び図8(B)に示す警告データの中の「が消えちゃうよ」を組み合わせて、「########が消えちゃうよ」という警告文36を囲みマーク37の中に表示させ、また同時に、「これでいい?」という説明文33を特徴的な画像とともに表示させる(ステップS47)。ユーザは、特徴的な画像により画面に注目して警告文36がファイルの消去を確認する情報であると認識し、決定キー5又は解除キー6のいずれかを操作することになる。
一方、選択カーソル32が5の番号のアイコンの位置にある場合には、このアイコン対応するエリアにファイルが記録されていないので、図17に示すように、「これでいい?」という説明文33が特徴的な画像とともに表示される(ステップS48)。この場合、警告文36の内容は図15に示す警告文36の内容と同じであるため新たな警告表示処理は行わない。
【0023】
次いで、キー処理の判定を行い(ステップS49)、解除キー6が操作された場合には、図14に示すメニュー画面を表示する説明用吹出し表示処理を行う(ステップS50)。決定キー5が操作された場合には、パーツ番号ストックエリア25に記録されているパーツ番号を、選択されたアイコンに対応するRAM11のパーツ番号データエリア23のエリア#4に記録する(ステップS51)。次いで、選択されたアイコンのマークが変化する場合には、ファイルアイコン表示処理を行う(ステップS52)。例えば、5の番号のアイコンが選択された場合には、このアイコンのマークを空きを示す?マークから人を示す黒星マークに変更する。そして、図18に示すように、警告文36の表示を消す処理、すなわち図8(B)の表示オフの警告データを読み出す処理を行うとともに、説明用吹出し表示処理を行う(ステップS53)。この場合には、「きろくできたよ」という説明文33が特徴的な画像とともに表示される。
【0024】
このように上記実施例によれば、選択されたアイコンに対応するパーツ番号データエリア22又は23の各エリアに関する説明文33等を表示する際、この説明文33等を強調する特徴的な画像、すなわち吹出し34及びこの吹出し34を発するピエロの画像35とともに表示するので、文字等のみによる画一的な表示に比べてユーザの注意を強く喚起させ、パーツ番号データエリア22又は23のエリアのファイルの情報を確実に認識させることができる。
この場合において、説明文33の表示エリアと特徴的な画像である吹出し34の表示エリアとが重ね合わせて表示されるので、ユーザには、これらが視覚的に一体化されて認識される。したがって、説明文33を見落とすことがない。
【0025】
なお、上記実施例では、説明文33等を強調する特徴的な画像を吹出し34及び挿絵であるピエロの画像35としたが、表示する画像としては他の特徴的な挿絵でもよく、挿絵以外の特徴的な図形であってもよく、挿絵と図形の組み合わせであってもよい。
【0026】
また、上記実施例では、説明文33等を強調する画像を形状に特徴があるようにしたが、アイコン31の色彩と異なる色彩で特徴的な画像を表示してもよい。この場合には説明文33等がより一層強調される。
【0027】
また、上記実施例では、説明文33等を特徴的な画像とともに表示させてユーザの注意を喚起するようにしたが、これと同時にスピーカから説明文33等を音声により報知するようにしてもよい。この場合には、ユーザの注意を視覚的及び聴覚的に喚起することができ、より大きな効果が得られる。
【0028】
また、上記実施例では、本体1に挿入するカセットタイプのROM2にプログラムを記録する構成としたが、ROMを内蔵したワンチップCPUを用いてその内蔵ROMにプログラムを記録する構成にしてもよい。この場合には、装置を小型化することが可能となる。
【0029】
また、上記実施例では、本体1に一般的なテレビ受像機である外部表示装置7を接続するようにしたが、外部表示装置としてはテレビ受像機に限らず、パソコン等の表示装置に接続してもよく、本体1に表示部及びスピーカ並びに操作部を組み込んだ構成にしてもよい。本体1に表示部等を組み込んだ場合には、非常にコンパクトな装置を実現することができる。
【0030】
【発明の効果】
この発明によれば、表示された複数の標識のうち、任意の標識が選択された場合には、その選択された標識に対応する記憶エリアに関する情報この情報を強調する画像とを表示するので、文字等のみによる通常の画一的な表示に比べてユーザの注意を強く喚起させ、選択した標識に対応する記憶エリアの情報を確実に認識させることができる。したがって、操作ミスから生じるトラブルを未然に防止することができる。
【図面の簡単な説明】
【図1】この発明の実施例のシステム構成を示す外観斜視図。
【図2】この発明の実施例のシステム構成を示すブロック図。
【図3】ROM及びRAMのエリアマップを示す図。
【図4】RAMのファイル属性データエリアの構成を示す図。
【図5】この実施例の動作を示すメインプログラムのフローチャート。
【図6】ファイル選択処理のプログラムのフローチャート。
【図7】ファイル選択処理におけるメニュー画面の一例を示す図。
【図8】ROMに記録されているデータの例を示し、(A)は説明文の例、(B)警告文の例、(C)は吹出し等の例を示す図。
【図9】ファイル選択処理におけるメニュー画面の一例を示す図。
【図10】ファイル選択処理におけるメニュー画面の一例を示す図。
【図11】ファイル選択処理におけるメニュー画面の一例を示す図。
【図12】パーツデータ編集処理のプログラムのフローチャート。
【図13】ファイル記録処理のプログラムのフローチャート。
【図14】ファイル記録処理におけるメニュー画面の一例を示す図。
【図15】ファイル記録処理におけるメニュー画面の一例を示す図。
【図16】ファイル記録処理におけるメニュー画面の一例を示す図。
【図17】ファイル記録処理におけるメニュー画面の一例を示す図。
【図18】ファイル記録処理におけるメニュー画面の一例を示す図。
【符号の説明】
2 ROM
3 操作パッド
8 ディスプレイ
10 CPU
11 RAM
12 ビデオディスプレイプロセッサ
[0001]
[Industrial application fields]
The present invention relates to an image processing apparatus that processes images and characters and symbols (characters, etc.).
[0002]
[Prior art]
In an image processing apparatus such as an electronic notebook or word processor, a file composed of characters and image data is edited on a display screen and recorded in a predetermined storage area of a memory such as a RAM, printed by a printer, A process for recalling the file recorded in is performed. By the way, in such a device, in order to make it easier to perform file processing (save, load, etc.) operations, a sign called an icon corresponding to each file can be displayed as a menu screen. In such an apparatus, since file processing can be performed by screen operation without inputting the name of a file composed of characters or the like, the operation is easy. For example, when recalling a file from memory, select one of multiple icons on the menu screen using the selection cursor that moves within the display screen according to the operation, and recall the file in the storage area corresponding to that icon. Can be displayed on the screen, and processing such as editing and printing can be performed.
[0003]
[Problems to be solved by the invention]
However, in the conventional image processing apparatus described above, the state of the storage area such as whether a file is recorded in the storage area corresponding to each icon displayed on the menu screen or whether the file can be recorded in the storage area is indicated. Could not be determined. For this reason, the user sometimes makes an incorrect icon selection such as trying to recall a file from a storage area where no file is recorded, or trying to record a file in a storage area where the file cannot be recorded. . For this reason, each time an incorrect operation is performed, the menu screen must be switched and the icon selection must be performed again, which necessitates a complicated operation. Another problem is that another file is recorded in the storage area in which the file to be saved is recorded due to a mistake in icon selection, and the file to be saved is erased.
An object of the present invention is to provide an image processing apparatus capable of reliably recognizing information relating to a storage area corresponding to a selected sign among a plurality of signs displayed on a screen.
[0004]
[Means for Solving the Problems]
The present invention provides storage means for storing data in each of a plurality of storage areas, first display control means for displaying a plurality of signs corresponding to each of the plurality of storage areas, and the first display control means. The operation means for selecting an arbitrary sign from among the plurality of signs displayed by the control in accordance with the operation, and the plurality of signs displayed by the control of the sign display control means are selected by the operation means. Second display control means for displaying information relating to the storage area corresponding to the sign and an image for emphasizing this information , wherein the image comprises an illustration, a figure, or a combination thereof. It is a surrounding mark including a shape of a thing or a balloon surrounding the information .
[0005]
[Action]
According to the present invention, among the plurality of label appears, if any label is selected, because displaying the emphasizing image this information with information about the storage area corresponding to the selected labeled Therefore, the user's attention can be strongly evoked compared to the normal uniform display using only characters and the like, and information related to the storage area corresponding to the selected sign can be recognized with certainty.
[0006]
【Example】
An embodiment of the present invention will be described below with reference to FIGS.
First, the configuration of this embodiment will be described.
FIG. 1 is an external view showing a system configuration of the embodiment. In the figure, the main body 1 has an image processing function and a printing function. A ROM (storage means) 2 is a cassette-type read-only memory that is removably inserted into the main body 1, and is an application program (hereinafter simply referred to as a program), part image data used for image processing, and other various data (these data). Is described later). An operation pad (operation means) 3 is connected to the main body 1 and instructs image processing and other control operations. The operation pad 3 is provided with a cross key 4, an enter key 5, and a release key 6. The external display device 7 is a general television receiver connected to the main body 1 and includes a display (display means) 8 and a speaker 9.
[0007]
FIG. 2 is a block diagram of the system configuration of FIG. A CPU (control means) 10 is connected to the ROM 2 and the operation pad 3, reads a program from the ROM 2, and performs image processing and other control operations based on commands from the operation pad 3. Examples of image data to be processed include image data indicating the shape of a person or an object. A RAM (storage means) 11 is connected to the CPU 10 and is used as a work area for temporarily recording a program read from the ROM 2 and temporarily recording image data and data necessary for image processing. The video display processor (signal output means) 12 is connected to the CPU 10 and outputs an image signal for display to the display 8 of the external display device 7 based on the instruction. The VRAM 13 is connected to the video display processor 12, sends dot data corresponding to the display position of the display 8 in response to a read command from the video display processor 12, and is output from the CPU 10 in response to a write command from the video display processor 12. Record image data. The printer 14 is connected to the CPU 10 and prints image data recorded in the RAM 11 based on a command from the CPU 10. The sound source 15 is connected to the CPU 10 and sends a warning sound and a sound signal for music necessary for image processing and display to the speaker 9 of the external display device 7 in accordance with the sound data output from the CPU 10.
[0008]
FIG. 3 shows an area map of the ROM 2 and RAM 11.
In the part image data area 21 of the ROM 2, a plurality of parts image data (hereinafter simply referred to as “part data”) constituting an image of a person or an object image are recorded. For example, in the case of parts data of multiple categories such as hair, eyes, nose, clothes, etc. that make up a person, multiple parts of different shapes are recorded for each category, and a part number is assigned to each part data. Has been. That is, each part number is a number that uniquely indicates the category and shape of the part. Therefore, by selecting and combining part data of one shape from each category, image data of a plurality of different persons is configured and managed in correspondence with the image data by a file composed of data of a plurality of part numbers.
[0009]
In the case of this embodiment, the part number data area 22 of the ROM 2 has areas for recording data of four files # 0 to # 3, and the part number data area 23 of the RAM 11 includes # 4 to # 15. There is an area for recording data of 14 files. In the file address data area 24 of the RAM 11, the top addresses of these 16 areas are recorded. In the part number stock area 25 of the RAM 11, the part number data of any one of the 16 files # 0 to # 15 is temporarily recorded. In the image data stock area 26 of the RAM 11, image data such as a person composed of part data corresponding to each part number recorded in the part number stock area 25 is recorded. Data indicating the contents of each file is recorded in the file attribute data area 27 of the RAM 11.
[0010]
As shown in FIG. 4, each file attribute data area 27 is composed of a register of a plurality of bits. When the upper 1 bit is 0, it indicates a part number data area (preset area) where the user cannot record a file, and when it is 1, it indicates a part number data area (user area) where the user can record a file. When the next 2 bits are 0, 0, it indicates that the part number data of the file recorded in the area relates to human image data. When these 2 bits are 0, 1 is recorded. It indicates that the part number data of the file is related to the image data, and when these 2 bits are 1 and 0, it indicates that no file is recorded in that area. The lower 4 bits indicate a number for identifying 16 areas.
Note that data such as the current icon number is recorded in the CPU internal processing work area 28.
[0011]
Next, the operation of this embodiment will be described.
When the main unit 1 and the external display device 7 are powered on, this system is activated, and the CPU 10 reads the program from the ROM 2 into the RAM 11 and executes this program.
FIG. 5 shows a flowchart of the main program. First, initial processing for system initialization is performed (step S1), and then file selection processing for reading a file relating to image data to be edited is performed (step S2).
[0012]
FIG. 6 shows a flowchart of the file selection processing program. First, initial processing for displaying a menu screen on the display 8 is performed (step S21). In the menu screen in this case, as shown in FIG. 7, 16 icons (signs) 31 and a selection cursor 32 for selecting any one of the icons are displayed. Furthermore, the explanatory text (information) 33 for the user, and an image of a specific illustration that emphasizes the explanatory text 33, for example, a balloon (enclosed mark) 34 surrounding the explanatory text 33 and an image of a clown that emits the balloon 34 35 is displayed. In this case, the clown image 35 is a moving image and moves left and right.
[0013]
Each of the 16 icons 31 is displayed with numbers 1 to 16 corresponding to the data in the file attribute area 27, and the icons with numbers 1 to 4 are highlighted to correspond to the files in the preset area. The icons with numbers 5 to 16 indicate that they correspond to files in the user area in a normal display. Also, if a black star mark or a white star mark is displayed depending on whether the file part number is related to a person or something, and the file is not recorded, is it empty? The mark is displayed.
[0014]
The data of the explanatory text 33, the explanation balloon 34 and the clown image 35 displayed on the menu screen are recorded in the ROM 2, and the displayed contents vary depending on the displayed menu screen. FIG. 8A shows an example of the explanatory note 33. The explanatory text 33 in the case of the menu screen of FIG. 7 is “Which call? Further, the data of the balloon 34 and the clown image 35 are subjected to display processing by reading the balloon data and the figure data shown in FIG. Since the balloon 34 and the clown image 35 of the moving image are displayed so as to emphasize the explanatory note 33, the user recognizes that the explanatory note 33 is information for prompting icon selection by paying attention to the screen, and presses the operation pad 3. Manipulate.
[0015]
Next, when the key operation of the operation pad 3 is performed, the key processing is determined in step S22 of FIG. 6, and when the operated key is the cross key 4, the selection cursor movement processing is performed to respond to the operation. The selection cursor 32 is moved to the position of the icon (step S23), and the process proceeds to determination of key processing in step S22. When the enter key 5 is operated, the file corresponding to the icon where the selection cursor 32 is positioned is determined with reference to the file attribute data area 27 (step S24). That is, it is determined whether a file can be read from the part number data area 22 or 23. In this case, the user can determine the presence or absence of a file based on the mark of each icon. However, since the user may be a beginner, or the user may miss an operation or overlook the mark, the file corresponding to the selected icon Is determined by the CPU 10.
[0016]
If the selection cursor 32 indicates an icon with the number 5, the file determination of the area corresponding to this icon determines that nothing is recorded in this area, and the file cannot be read. Therefore, the data “Nothing is there” in the explanatory text in FIG. 8A is read and the explanatory balloon display process is performed (step S25). Therefore, as shown in FIG. 9, the explanation balloon 33 on the menu screen is displayed with an explanatory sentence 33 “There is nothing there” together with a characteristic balloon 34 and a moving picture clown image 35. . The user pays attention to this display and recognizes whether or not a file is recorded in the area corresponding to the selected icon. In this case, the explanatory note 33 is recognized as information for prompting the user to select another icon, and the operation pad 3 is operated.
[0017]
When it is determined in the file determination process in step S24 that the file corresponding to the selected icon can be read, an explanatory sentence 33 corresponding to the file determination is selected from the explanatory text in FIG. The explanation balloon display process to be displayed is performed (step S26). For example, when the number 6 icon is selected, since the image data is a person, as shown in FIG. 10, the menu screen is characterized by an explanatory sentence 33 “Is this person OK?”. Displayed with the image. Further, when the number 8 icon is selected, the image data is the one. Therefore, as shown in FIG. 11, the menu screen has a characteristic image with an explanatory sentence 33 “Is this OK?” It is displayed with. The user pays attention to this display and operates the enter key 5 or the release key 6 of the operation pad 3.
[0018]
When the key operation is performed, the key process is determined (step S27), and when the release key 6 is operated, the explanatory balloon display process is performed (step S28). In this case, the menu screen shown in FIG. 7 is displayed, and an explanatory note 33 “Which call to call?” Is displayed. When the enter key 5 is operated, the head address of the area corresponding to the selected icon in the file address data area 24 is referred to, the file corresponding to the address is read, and the part number of the file is set. A file set to be stored in the part number stock area 25 is performed (step S29). In this case, a plurality of part data of each category corresponding to the part number of the file stored in the part number stock area 25 is read from the part data area 21, and image data such as a person composed of the plurality of part data is imaged. Record in the data stock area 26. Therefore, this image data is read from the image data stock area 26 and displayed on the display 8 via the video display processor 12 and the VRAM 13.
[0019]
When a file is called in the file selection process, the process proceeds to the part data editing process (step S3) in FIG.
FIG. 12 shows a flowchart of a part data editing process program. First, initial processing is performed (step S31), and a menu screen (not shown) for editing processing is displayed. Next, a process determination is performed by operating a selection key (not shown) on the operation pad 3 (step S32). In the case of part change processing (step S33), the part number in the part number stock area 25 is changed. In the case of the image printing process (step S34), the image data recorded in the image data stock area 26 is sent to the printer 14 for printing. In the case of the file recording process (step S35), the edited file is recorded.
[0020]
FIG. 13 shows a flowchart of a file recording process program. First, initial processing is performed (step S41), and a menu screen as shown in FIG. 14 is displayed. In this case, an explanatory note 33 “where to record?” In FIG. 8A is displayed together with a characteristic balloon 34 and a moving picture clown image 35. Further, a warning sentence 36 is displayed together with a surrounding mark 37 at a position above the icon 31. In this case, “*******”, which is the name of the part data to be recorded, and “I'm gonna get it” in the warning data of the ROM 2 shown in FIG. A warning sentence 36 saying “I am going to ****” is displayed.
Since the user displays the characteristic balloon 34 and the moving picture clown image 35 together with the explanatory sentence 33 and the warning sentence 36, the user recognizes that the explanatory sentence 33 is information prompting the user to select an icon by paying attention to the screen. Recognizing that the part number recorded by the sentence 36 relates to the target part data, the operation pad 3 is operated.
[0021]
If a key operation is performed, the key process is determined (step S42). If the operated key is the cross key 4, a selection cursor movement process is performed to select an icon position corresponding to the operation. The cursor 32 is moved (step S43), and the process proceeds to determination of key processing in step S42. When the enter key 5 is operated, the file attribute data area 27 of the RAM 11 corresponding to the icon indicated by the selection cursor 32 is referred to determine the area of the part number data area 22 to be recorded (step S44). For example, when the selection cursor 32 is at the position of the number 1 icon, it is determined that the corresponding area is a preset area, and explanation balloon display processing is performed (step S45). In this case, as shown in FIG. 15, the explanatory note 33 “I can't get there” in FIG. 8A is displayed together with a characteristic image. Since the characteristic image is displayed together with the explanatory sentence 33 and the warning sentence 36, the user recognizes whether the area corresponding to the icon selected by paying attention to the screen can be recorded. In this case, it is recognized that the explanatory note 33 is information that cannot be recorded and prompts other icons to be selected, and the operation pad 3 is operated.
[0022]
If it is determined that the area corresponding to the icon selected in step S44 is a user area, it is determined whether another file is already recorded in the area (step S46). For example, when the selection cursor 32 is at the position of the number 6 icon, since another file has already been recorded in the corresponding area, as shown in FIG. ######## "and the warning data shown in FIG. 8 (B) are combined, and the warning sentence"######## will disappear "36 Is displayed in the surrounding mark 37, and at the same time, an explanatory note 33 "Is this OK?" Is displayed together with a characteristic image (step S47). The user recognizes that the warning sentence 36 is information for confirming the deletion of the file by paying attention to the screen from the characteristic image, and operates either the enter key 5 or the release key 6.
On the other hand, when the selection cursor 32 is at the position of the number 5 icon, no file is recorded in the area corresponding to this icon, so as shown in FIG. Are displayed together with a characteristic image (step S48). In this case, since the content of the warning sentence 36 is the same as the content of the warning sentence 36 shown in FIG. 15, a new warning display process is not performed.
[0023]
Next, the key process is determined (step S49), and when the release key 6 is operated, the explanatory balloon display process for displaying the menu screen shown in FIG. 14 is performed (step S50). When the enter key 5 is operated, the part number recorded in the part number stock area 25 is recorded in the area # 4 of the part number data area 23 of the RAM 11 corresponding to the selected icon (step S51). . Next, when the mark of the selected icon changes, a file icon display process is performed (step S52). For example, when the number 5 icon is selected, the mark of this icon indicates empty? Change from a mark to a black star mark to indicate a person. Then, as shown in FIG. 18, a process for turning off the display of the warning sentence 36, that is, a process for reading the display-off warning data of FIG. 8B and a balloon display process for explanation are performed (step S 53). In this case, an explanatory note 33 “I'm happy” is displayed along with a characteristic image.
[0024]
As described above, according to the above-described embodiment, when the explanatory text 33 or the like regarding each area of the part number data area 22 or 23 corresponding to the selected icon is displayed, a characteristic image that emphasizes the explanatory text 33 or the like, That is, since it is displayed together with the balloon 34 and the clown image 35 that emits the balloon 34, the user's attention is strongly evoked compared to the uniform display only with characters etc., and the file in the area of the part number data area 22 or 23 Information can be recognized with certainty.
In this case, the display area of the explanatory text 33 and the display area of the balloon 34 which is a characteristic image are displayed so as to overlap each other, so that they are visually recognized and integrated by the user. Therefore, the explanatory note 33 is not overlooked.
[0025]
In the above embodiment, the characteristic image that emphasizes the explanatory note 33 and the like is the balloon 34 and the clown image 35 that is an illustration. However, the image to be displayed may be other characteristic illustrations. It may be a characteristic figure or a combination of an illustration and a figure.
[0026]
In the above-described embodiment, the image that emphasizes the explanatory note 33 or the like is characterized by the shape. However, a characteristic image may be displayed with a color different from the color of the icon 31. In this case, the explanatory note 33 and the like are further emphasized.
[0027]
Moreover, in the said Example, although the explanatory note 33 etc. were displayed with the characteristic image and a user's attention was drawn, you may make it alert | report the explanatory note 33 etc. with an audio | voice simultaneously from this. . In this case, the user's attention can be alerted visually and audibly, and a greater effect can be obtained.
[0028]
In the above embodiment, the program is recorded in the cassette-type ROM 2 inserted into the main body 1. However, the program may be recorded in the built-in ROM using a one-chip CPU incorporating the ROM. In this case, the apparatus can be reduced in size.
[0029]
In the above embodiment, the external display device 7 which is a general television receiver is connected to the main body 1. However, the external display device is not limited to the television receiver and is connected to a display device such as a personal computer. Alternatively, the main body 1 may include a display unit, a speaker, and an operation unit. When a display unit or the like is incorporated in the main body 1, a very compact device can be realized.
[0030]
【The invention's effect】
According to the present invention, among the plurality of label appears, if any label is selected, because displaying the emphasizing image this information with information about the storage area corresponding to the selected labeled Thus, the user's attention can be strongly evoked compared to the normal uniform display using only characters and the like, and the information in the storage area corresponding to the selected sign can be surely recognized. Therefore, it is possible to prevent a trouble caused by an operation error.
[Brief description of the drawings]
FIG. 1 is an external perspective view showing a system configuration of an embodiment of the present invention.
FIG. 2 is a block diagram showing a system configuration of an embodiment of the present invention.
FIG. 3 is a diagram showing an area map of ROM and RAM.
FIG. 4 is a diagram showing a configuration of a file attribute data area of a RAM.
FIG. 5 is a main program flowchart showing the operation of this embodiment.
FIG. 6 is a flowchart of a file selection processing program.
FIG. 7 is a diagram showing an example of a menu screen in file selection processing.
8A and 8B show examples of data recorded in a ROM, where FIG. 8A shows an example of an explanatory sentence, FIG. 8B shows an example of a warning sentence, and FIG.
FIG. 9 is a diagram showing an example of a menu screen in file selection processing.
FIG. 10 is a diagram showing an example of a menu screen in file selection processing.
FIG. 11 is a diagram showing an example of a menu screen in file selection processing.
FIG. 12 is a flowchart of a part data editing process program.
FIG. 13 is a flowchart of a file recording process program.
FIG. 14 is a diagram showing an example of a menu screen in file recording processing.
FIG. 15 is a diagram showing an example of a menu screen in file recording processing.
FIG. 16 is a diagram showing an example of a menu screen in file recording processing.
FIG. 17 is a diagram showing an example of a menu screen in file recording processing.
FIG. 18 is a diagram showing an example of a menu screen in file recording processing.
[Explanation of symbols]
2 ROM
3 Operation pad 8 Display 10 CPU
11 RAM
12 Video display processor

Claims (5)

複数の記憶エリアのそれぞれにデータを記憶する記憶手段と、
前記複数の記憶エリアのそれぞれに対応する複数の標識を表示させる第1の表示制御手段と、
この第1の表示制御手段の制御により表示された複数の標識のうち、任意の標識を操作に応じて選択する操作手段と、
前記標識表示制御手段の制御により複数の標識が表示された状態で、前記操作手段によって選択された標識に対応する記憶エリアに関する情報とこの情報を強調する画像とを表示させる第2の表示制御手段とを備え
前記画像は、挿絵、図形又はこれらの組み合わせからなり、前記挿絵は、人又は事物の形象或いは前記情報を囲む吹出しを含む囲みマークであることを特徴する画像処理装置。
Storage means for storing data in each of a plurality of storage areas;
First display control means for displaying a plurality of signs corresponding to each of the plurality of storage areas;
An operation means for selecting an arbitrary sign among a plurality of signs displayed by the control of the first display control means according to an operation;
Second display control means for displaying information related to the storage area corresponding to the sign selected by the operation means and an image emphasizing this information in a state where a plurality of signs are displayed by the control of the sign display control means. equipped with a door,
The image processing apparatus according to claim 1, wherein the image includes an illustration, a figure, or a combination thereof, and the illustration is a surrounding mark including a figure of a person or a thing or a balloon surrounding the information .
前記第2の表示制御手段は、前記情報を表示させるための表示エリアと前記画像を表示させるための表示エリアとを少なくとも一部重ね合わせて表示させることを特徴とする請求項1に記載の画像処理装置。 2. The image according to claim 1, wherein the second display control unit displays a display area for displaying the information and a display area for displaying the image at least partially overlapped with each other. Processing equipment. 前記形象は、動画であることを特徴とする請求項に記載の画像処理装置。The image processing apparatus according to claim 1 , wherein the image is a moving image. 前記画像は、前記標識とは異なる色彩で表示される画像であることを特徴とする請求項に記載の画像処理装置。The image processing apparatus according to claim 1 , wherein the image is an image displayed in a color different from that of the sign. 前記標識、前記情報及び前記画像を表示する表示手段を更に備えたことを特徴とする請求項に記載の画像処理装置。The image processing apparatus according to claim 1 , further comprising display means for displaying the sign , the information, and the image.
JP12558095A 1995-04-27 1995-04-27 Image processing device Expired - Fee Related JP3671258B2 (en)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP12558095A JP3671258B2 (en) 1995-04-27 1995-04-27 Image processing device
US08/636,774 US5943049A (en) 1995-04-27 1996-04-23 Image processor for displayed message, balloon, and character's face
MYPI96001554A MY115012A (en) 1995-04-27 1996-04-24 Image processor for displayed message balloon, and character''s face
DE69628695T DE69628695T2 (en) 1995-04-27 1996-04-25 image processors
EP96106562A EP0740271B1 (en) 1995-04-27 1996-04-25 Image processors
KR1019960013355A KR100246520B1 (en) 1995-04-27 1996-04-27 Image processors
CN96104886A CN1105994C (en) 1995-04-27 1996-04-29 Image processors

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP12558095A JP3671258B2 (en) 1995-04-27 1995-04-27 Image processing device

Publications (2)

Publication Number Publication Date
JPH08305871A JPH08305871A (en) 1996-11-22
JP3671258B2 true JP3671258B2 (en) 2005-07-13

Family

ID=14913708

Family Applications (1)

Application Number Title Priority Date Filing Date
JP12558095A Expired - Fee Related JP3671258B2 (en) 1995-04-27 1995-04-27 Image processing device

Country Status (1)

Country Link
JP (1) JP3671258B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8421782B2 (en) 2008-12-16 2013-04-16 Panasonic Corporation Information displaying apparatus and information displaying method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8421782B2 (en) 2008-12-16 2013-04-16 Panasonic Corporation Information displaying apparatus and information displaying method

Also Published As

Publication number Publication date
JPH08305871A (en) 1996-11-22

Similar Documents

Publication Publication Date Title
TW457458B (en) Image processing method, device and storage medium therefor
GB2273188A (en) Information processing system using icons
JPH01129362A (en) Electronic file device
US7773142B2 (en) Electronic camera with print specifying information
JP3671258B2 (en) Image processing device
JP3777642B2 (en) Menu display device
US5173892A (en) Data processing apparatus with replaceable memory
JPH0713687A (en) Handwriting input device
JPS63244226A (en) Display device
JP3641861B2 (en) Electronic medical record system
JP3016248B2 (en) Document display device
JP3394304B2 (en) Document processing device
JP2723433B2 (en) Document processing device with handwriting input function
JPH0215375A (en) Image information storage device
JPH08305873A (en) Image generating device
JPH0236482A (en) Information recording device
JPS61231661A (en) Information processor
JP2005128975A (en) Input guide device, portable terminal therewith, method of controlling computer therefor, and program
JP3561000B2 (en) Barcode printing method
JPS62293286A (en) Word processor
JPH096899A (en) Processor and method for image processing
JPH079711A (en) Printer
JPH03108057A (en) Document processor
JPH05108630A (en) Word processor
JPS59220824A (en) Document creating device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050322

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050404

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090428

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090428

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100428

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110428

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120428

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120428

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130428

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees