JP3607913B2 - Image display device - Google Patents

Image display device Download PDF

Info

Publication number
JP3607913B2
JP3607913B2 JP09448394A JP9448394A JP3607913B2 JP 3607913 B2 JP3607913 B2 JP 3607913B2 JP 09448394 A JP09448394 A JP 09448394A JP 9448394 A JP9448394 A JP 9448394A JP 3607913 B2 JP3607913 B2 JP 3607913B2
Authority
JP
Japan
Prior art keywords
image
window
displayed
display
original image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP09448394A
Other languages
Japanese (ja)
Other versions
JPH07302322A (en
Inventor
大吾 江塚
清志 畑
孝男 黒田
光男 浅野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Holdings Corp
Original Assignee
Fuji Photo Film Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Photo Film Co Ltd filed Critical Fuji Photo Film Co Ltd
Priority to JP09448394A priority Critical patent/JP3607913B2/en
Publication of JPH07302322A publication Critical patent/JPH07302322A/en
Application granted granted Critical
Publication of JP3607913B2 publication Critical patent/JP3607913B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【産業上の利用分野】
本発明は画像表示装置に係り、特に、指定された原画像中の所定部分を表示枠内に表示する画像表示装置に関する。
【0002】
【従来の技術】
従来より、データとして入力された画像等に対し、オペレータからの指示に従って画像の合成、切り貼り、拡大、縮小等の各種の編集処理を行って、オペレータが所望する任意の画像を作成、プリントすることを可能とした画像処理システムが知られている。この種の画像処理システムはディプレイ等の表示装置を含んで構成されており、作成途中の画像をオペレータが容易に把握できるように、作成途中の画像をディスプレイの表示画面の作成画像表示領域内に常時表示したり、オペレータが各種の指示を容易に行なえるように、入力された画像データの画像をディスプレイの表示画面の前記作成画像表示領域外の作業領域に一時的に表示するように構成されている。
【0003】
上記のような画像処理システムにおいて、入力された画像データが表す画像(以下、原画像という)の一部分を切り出して予め指定された作成画像表示領域のウインドウ内に配置する所謂切り貼り処理は、入力された画像データが表す原画像を表示画面の前記作業領域に表示し、前記切り出す部分の範囲をオペレータに指定させ、オペレータによって指定された部分の画像を前記指定されたウインドウ内に表示すると共に、原画像の表示を消去することにより完了する。
【0004】
【発明が解決しようとする課題】
ところで、上述の切り貼り処理が完了した後に、原画像から切り出された部分の範囲が適切でないとオペレータが判断した等の場合、オペレータは再び切り貼り処理を行って切り出す部分の範囲を指定し直す必要がある。しかしながら、このときには原画像の表示は消去されているので、切り出す部分を原画像上のどの範囲に設定すればよいかが判断しにくく、適切な範囲が切り出される迄オペレータが何度も切り貼り処理を行って、切り出す部分の範囲を指定し直す等の煩雑な作業を行う必要があった。
【0005】
これを解決するためには、原画像を表示画面上の作業領域等に継続して表示することも考えられるが、作業領域は各種の編集処理で使用される表示領域であり、かつディスプレイの表示画面は限られているので、一旦切り貼り処理が完了した後に原画像を継続して表示することは好ましくない。更に原画像を縮小した画像を継続して表示することも考えられるが、表示画面内の表示が煩雑になるという問題も生ずる。
【0006】
本発明は上記事実を考慮して成されたもので、原画像から切り出してウインドウ内に表示すべき範囲の指定を容易に行うことができる画像表示装置を得ることが目的である。
【0007】
【課題を解決するための手段】
上記目的を達成するために本発明に係る画像表示装置は、画像表示範囲の境界を示すウインドウを表示画面に表示するウインドウ表示手段と、原画像を表す画像データを記憶する記憶手段と、原画像中の前記ウインドウ内に表示する範囲を指定するための指定手段と、前記記憶手段に記憶された画像データに基づいて、前記指定手段によって指定された範囲に対応する部分画像を前記ウインドウ内に表示する画像表示手段と、前記ウインドウの表示位置、前記部分画像の前記原画像上での位置及びサイズに基づき、前記原画像のうち前記指定された範囲が前記ウインドウ内に位置するときの前記原画像の位置及びサイズを演算し、前記ウインドウ外に位置する原画像の輪郭を目視可能に表示する輪郭表示手段と、を含んで構成されている。
【0008】
【作用】
本発明では、ウインドウ表示手段により、画像表示範囲の境界を示すウインドウが表示画面に表示される。また、原画像中の前記ウインドウ内に表示する範囲を指定するための指定手段が設けられており、画像表示手段は記憶手段に記憶された画像データに基づいて、指定手段によって指定された範囲に対応する部分画像をウインドウ内に表示する。また輪郭表示手段は、ウインドウの表示位置、部分画像の原画像上での位置及びサイズに基づき、原画像のうち指定された範囲がウインドウ内に位置するときの原画像の位置及びサイズを演算し、ウインドウ外に位置する原画像の輪郭を目視可能に表示する。
【0009】
これにより、原画像の輪郭とウインドウとの相対位置、すなわち現在ウインドウ内に表示されている画像の原画像中における位置をオペレータが容易に認識することができる。従って、オペレータが指示手段を介して表示する範囲を一旦指示することによりウインドウ内に表示された画像が、原画像中の所望の部分の画像でなかった場合に、指定手段を介して指定すべき範囲の原画像上における位置を容易に判断できるので、オペレータは、原画像から切り出して表示すべき範囲の指定を容易に行うことができる。また本発明では原画像の輪郭を表示するので、原画像そのものをウインドウ外に縮小表示したりする場合と比較して表示画面内の表示が簡潔明瞭となる。
なお、上記の画像表示装置においては、前記ウィンドウ表示手段が、前記ウィンドウを表示するための台紙を前記表示画面に表示し、当該表示した台紙上に前記ウィンドウを編集可能に表示するようにしてもよい。この場合、前記ウィンドウが、前記指定手段によって指定された範囲に対応する画像を表示するためのウィンドウ、及び文字データを表示するためのウィンドウを含むようにしてもよい。
また、上記の画像表示装置においては、前記輪郭表示手段が、前記原画像のサイズ、前記指定手段によって指定された範囲の前記原画像上における位置、及び前記ウィンドウ内における画像の表示倍率に基づいて、前記原画像の仮想的な位置及びサイズを判断して前記ウィンドウ外に位置する前記原画像の輪郭を表示するようにしてもよい。
また、上記の画像表示装置においては、前記指定手段が、表示された前記原画像の輪郭の前記ウィンドウに対する位置を指定することにより、前記原画像中の前記ウィンドウ内に表示する範囲を指定するようにしてもよい。
【0010】
【実施例】
以下図面を参照してDTP(デスク・トップ・パブリッシング)を行う画像表示装置に本発明を適用した実施例を詳細に説明する。
【0011】
図1に示すように、この画像表示装置は、装置の制御、演算、各種入出力機器の制御等を行うパソコン(パーソナルコンピュータ)10とこのパソコン10に接続された各種入出力機器とを備えている。パソコン10は、装置の制御、演算等を行うCPU10A、作業エリアを備えた記憶手段としてのRAM10B、入出力機器インタフェース(I/Oポート)10C、表示する画像データ(ビット・マップ・データ)を一時記憶するVRAM12、プログラム等を記憶した図示しないROM、及びこれらを接続するデータバスやコントロールバス等のバスを含んで構成されている。
【0012】
入出力機器インタフェース10Cには、画像入力機器として、写真等の画像を取込むためのフルカラースキャナー16、被写体を撮影して撮影画像を取込むためのデジタルスチルカメラ18、写真の画像データを記録したCDから画像データを取込むためのフォトCD装置20、及び画像データの外部記憶媒体としての光磁気ディスク22が接続されている。この光磁気ディスク22には、編集した画像を記録したり記録されている画像を読出して取込むことができる。
【0013】
またパソコン10には、CRT等で構成されVRAM12に一時記憶された画像データの画像を表示する表示装置としてのモニタ14が接続されている。このモニタ14の画面の上端部には、メニュー項目を表示するメニューバーの表示エリアが設けられている(図4参照)。また、入出力機器インタフェース10Cには、モニタ14に表示されたメニュー項目や画面位置等を指示(または選択)する入力指示器としてのマウス24と、パソコン10への文字データの入力等を行うためのキーボード28とが接続されている。さらに、入出力機器インタフェース10Cには、画像処理によって編集した原稿等をプリントするプリンタ26が接続されている。なお、マウス24は本発明の指示手段に対応している。
【0014】
本実施例の画像表示装置では、画像データ及び文字データの両方を含む全てのデータをドキュメントデータとして扱っているので、まず、ドキュメントデータの詳細構造を図2を参照して説明する。ドキュメントデータは、台紙102、図形枠108、文章枠126の各々を示すデータで構成されている。文章枠126は文字データを表示するためのエリアで、この文章枠126には文字の字体、大きさ、色等を決定する装飾情報である属性を付与することができる。
【0015】
図形枠108は画像を表示するエリアで、取込んだ画像を、図形枠108内に表示するための覗き窓(ウインドウ)として作用する。この図形枠には、枠内に表示された画像の倍率、枠内の画像の背景の透過率等を決定する属性を付与することができる。
【0016】
また、取込んだ画像データ自体も、上記と同じドキュメントデータとして扱うことができる。すなわち、一つの図形枠(第1の図形枠)内に表示された画像(第1の画像)の中に第2の図形枠をネスト(入れ子)構造で挿入し、この第2の図形枠内に第2の画像を表示することが可能である。さらに、第2の画像の中に第3の画像枠をネストして第3の画像を表示し、第3の画像の中に第4の画像枠をネストして第4の画像を表示する、というように図形枠をネストすることが可能である。
【0017】
ネスト構造の複数の図形枠には上下関係があり、下位(入れ子される側)の図形枠の画像と上位(入れ子側)の図形枠の画像とが重なる場合には、下位の画像が上位の画像で遮られて表示される。この図形枠の上下関係は変更可能である。
【0018】
以上のドキュメントデータ、すなわち、台紙102、図形枠108、文章枠126を表すデータ、画像データ、及び文章データは、全体が一つのファイルとして、RAM10Bに記憶され、異なる外部ファイル(例えば、予め画像データが複数記録されたライブラリーファイル等)の参照は行われない。
【0019】
このように本実施例では、台紙102、図形データ、及び図形枠108が各々層(レイア)構造になっている。すなわち、台紙102の上方に、画像が位置し、画像の上にウインドとして作用する図形枠108が位置するような積層構造となっている。これにより、画像編集中には、取込んだ画像データを保持し、図形枠の位置をドラッグによってずらすことにより、今まで図形枠内に表示されていなかった画像や文字を表示させることができる。
【0020】
なお、台紙102は常に全ての図形枠108及び文章枠126の下位に位置し、この台紙102には直接描画することが可能である。
【0021】
次に、画像編集の流れを簡単に説明する。図4に示すように、新規ドキュメントを作成する図示しないドキュメント作成メニューを選択すると、台紙102が画面100上に表示される。次に、マウス24によって画面上端部のメニューバー105の図形編集欄106を選択すると、図形編集が開始される。
【0022】
図5に示すように、台紙102上における基準点107、109にカーソルを位置させてマウス24をクリックすると、それらの基準点107、109を対角線の両端とする矩形の図形枠108が、台紙102上に表示される。次に、フルカラースキャナー16、デジタルスチルカメラ18の何れかの入力メニュー(図示省略)を選択すると、作業用台紙110が表示され、選択されたいずれかの画像入力機器で画像読取が開始され、読み取った原画像111(図5では、コピー機112の画像を含む原画像)が、作業用台紙110内に表示される。
【0023】
この原画像111上には、画像をカットして取込み図形枠108内に表示するための部分画像の範囲を示す取込枠115の表示が可能である。すなわち、図形枠108内に表示する部分画像の対角線の両端である基準点114、116にカーソルを位置させてマウス24をクリックすると、これらの基準点114、116を対角線の両端とする取込枠115が表示される。なお、取込範囲は基準点114、116の位置を変更することにより変更可能である。この取込範囲の指示終了(例えば、マウス24のクリックによる確定指示)と共に、取込枠115内の画像が図形枠108内に表示される。この処理は本発明の画像表示手段に相当する。
【0024】
また、本実施例では一つの台紙102上に図形枠や文章枠を各々複数個生成して、各々の枠について画像編集することができる。図3(A)に示すように1つの画像中に他の画像を合成したい場合には、画面上の一つの図形枠50の内部に他の図形枠52を生成する。これによって、一つの画像の中に他の画像が合成されて表示される。この時、図形枠52内の画像のうち背景を除いた椅子の画像54だけの画像を図形枠50内の画像に合成したい場合には、図形枠52内の椅子の画像54以外の画像を背景として、その背景の透過率が100%であるという属性を付与すれば、図3(B)に示すように図形枠50内には、図形枠50内の画像上に椅子54のみの画像が合成されて、表示される。
【0025】
次に、文字編集について説明する。図6に示すように、マウス24によって画面上端部のメニューバー105の文字編集欄124を選択する。これにより、文字編集が開始される。図形枠122による画像編集の時と同様のマウス操作で文章枠126を指定すると、文字入力ウインドウ128が表示される。文字をキーボードから入力すると、文字入力ウインドウ128上に文字列130が表示され、入力完了の指示(例えば、マウスのクリック)をすると、文字列132が文章枠126に表示される(図7参照)。ここで修正が無い時、編集確定の指示(例えば、マウスのクリック)をすると、文字入力ウインドウ128は消去され、文章枠126の編集が確定される(図8)。
【0026】
次に、一旦原画像から取り込んで図形枠内に表示している画像に対し、原画像からの取込み位置を変更したい場合に行われる画像取込み位置変更処理について、図13のフローチャートを参照して説明する。なお、この処理は、図9に示すように、台紙102の画面左側に予め表示されているコマンドメニュー118中に複数表示されているアイコン(図示省略)のうち、取込み位置変更処理の実行を指示するコマンドに対応するアイコンにカーソル104が対応された後に、マウス24のボタンがクリックされることによって前記アイコンが選択されると実行される。
【0027】
ステップ200では処理対象としての図形枠の指示が済んでいるか否か判定する。処理対象としての図形枠が予め指示されている場合には、ステップ200の判定が肯定されてステップ206へ移行する。一方、ステップ200の判定が否定された場合には、ステップ202で現在台紙102上に表示している何れかの図形枠内のポイントが指示されるまで待機する。なお、図9では説明を簡単にするために、台紙102上に単一の図形枠122のみが表示されている状態を示す。ステップ202の判定が肯定されると、ステップ204で指示されたポイントに対応する図形枠を処理対象の図形枠として記憶してステップ206へ移行する。
【0028】
ステップ206では上記のように処理対象として指示された図形枠122の枠線が指示(クリック)されたか否か判定し、枠線が指示されるまで待機する。ステップ206の判定が肯定されると、ステップ208では、台紙102上における図形枠122の座標、図形枠122内に表示している画像の原画像上における位置及びサイズ(図形枠122のサイズ及び図形枠122内の画像の表示倍率に応じて定まる)に基づいて、台紙102を基準とする原画像の位置及びサイズを演算する。
【0029】
次のステップ210では、上記で演算した原画像の位置及びサイズに基づいて原画像の輪郭を表す枠線124を表示する。なお、この輪郭を表す枠線124の表示については、前記枠線124のどの部分が台紙102の内側でどの部分が外側かを判断し、台紙102の内側の部分は破線で、外側の部分は実線で表示する。次のステップ212では図形枠122と同一サイズの取込み枠120(図11参照)を図形枠122に重ねて表示する。この状態では取込み枠120と図形枠122とが重なっているので、図10では取込み枠120は図示されていない。なお、この処理は本発明の輪郭表示手段に相当する。
【0030】
ステップ214ではマウスのボタンがリリースされたか否か判定する。ステップ214の判定が否定された場合には、ステップ216でマウスの指示ポイント(カーソル104の位置)が移動されたか否か判定する。ステップ216の判定も否定された場合にはステップ214へ戻り、ステップ214又は216の判定が肯定されるまで待機する。マウスの指示ポイントが移動されてステップ216の判定が肯定されると、ステップ218ではマウスの指示ポイントの移動に応じて取込み枠の表示位置を移動し、ステップ220では、輪郭が枠線124として表示されている原画像のうち、表示位置を移動された取込み枠120によって囲まれた範囲に対応する画像を原画像の画像データから取込み、該画像を図形枠122内に表示してステップ214へ戻る。なお、このステップ218、220の処理も本発明の画像表示手段に相当する。
【0031】
一例として、オペレータが図形枠122に表示されている画像に対し原画像上で若干左下側の画像を表示したい時は、図10に示すように図形枠122の枠線の任意のポイントをクリックし、図11に示すように左下方向へドラッグすれば、これに伴って取込み枠120(図11では破線で示す)が左下方向へ移動し、図形枠122には移動した取込み枠120の位置に対応する画像、すなわち今まで表示されていた画像に対して若干左下側の画像が表示される。すなわち、取込み枠120を仮想的なウインドウとみなし、そのウインドウから画像データを覗いたに相当する画像が図形枠122内に表示されることになる。
【0032】
上記により、図形枠122内に表示される画像は、移動された取込み枠120によって囲まれた範囲に対応する画像にリアルタイムで変更されることになる。オペレータは、前記原画像の輪郭を表す枠線124及び取込み枠120の表示位置に基づいて、図形枠122内に表示されている画像の原画像上における位置を容易に判断できると共に、マウスのボタンをオンした状態でカーソル104を移動させながら図形枠122内に表示される画像を参照することにより、図形枠122内に所望の画像を表示させるためにカーソル104をどの方向にどの程度移動させればよいかを容易に判断することができる。従って、原画像から切り出して図形枠122内に表示すべき範囲の指定を容易に行うことができる。
【0033】
オペレータは、図形枠122に所望の画像が表示されている状態でマウスのボタンをリリースする。これにより編集確定が指示されたと判断してステップ214の判定が肯定され、図12に示すように、ステップ22で取込み枠122及び原画像の輪郭の表示を消去し、ステップ224では図形枠122内に表示している画像の原画像上における座標を記憶して処理を終了する。
【0034】
以上のようにして新規ドキュメントの作成が終了すると、マウス24によって画面上端部のメニューバー105から印刷欄134を選択し、台紙102上の確定された文字や図形の情報をプリンタ26へ出力する。プリンタ26は、入力されたデータに基づいて印刷する。これによって、台紙上の編集画面のプリントが得られる。
【0035】
なお、上記ではウインドウとしての図形枠122を固定的に表示し、図形枠122と同サイズの取込み枠120をマウス24によるドラッグに応じて移動させることによって図形枠122内に表示する画像の範囲を変更する場合を例に説明したが、本発明はこれに限定されるものではなく、取込み枠124を表示する代わりに図形枠122の表示位置をマウス24によるドラッグに応じて移動させるようにしてもよい。また、マウス24によるドラッグに応じて原画像の輪郭を表す枠線124の表示位置を移動させるようにしてもよい。更に、図形枠122の表示位置を移動させる際には、編集の確定が指示されたときの図形枠122の表示位置に図形枠122を継続して表示しても、編集の確定が指示されたときに図形枠122内に表示している画像を変更せずに、該画像及び図形枠122を図形枠122の元の表示位置に表示するようにしてもよい。
【0036】
また、上記では指示手段としてマウス24を適用した場合を例に説明したが、本発明はこれに限定されるものではなく、ライトペン、ディジタイザ等の各種のポインティングデバイスを用いることができる。また、指示手段としてキーボード28を用いることも可能である。
【0037】
以上、本発明の実施例について説明したが、上記実施例は特許請求の範囲に記載した技術的項以外に、次に記載したような技術的事項の実施態様を含むものである。
【0038】
(1) 輪郭表示手段は、指定手段によって一旦指定された表示範囲が指定手段によって再び指定される際にのみ原画像の輪郭を表示することを特徴とする請求項1記載の画像表示装置。
【0039】
上記により、オペレータが指示手段を介して一旦指定した所定部分の位置を、オペレータが指示手段を介して再び指定することにより修正する場合にのみ原画像の輪郭が表示されるので、不必要に原画像の輪郭が表示されることがなく、表示画面内の表示が更に簡潔明瞭となる、という効果が得られる。
【0040】
(2) 輪郭表示手段は、原画像のサイズ、指定手段によって指定された範囲の原画像上における位置、及びウインドウ内における画像の表示倍率に基づいて、原画像の仮想的な位置及びサイズを判断してウインドウ外に位置する原画像の輪郭を表示することを特徴とする請求項1記載の画像表示装置。
【0041】
本発明において、ウインドウ内における画像の表示倍率は固定であってもよいが、前記表示倍率を変更可能である場合には、上記のように、画像のウインドウ内における表示倍率を考慮して原画像の仮想的な位置及びサイズを判断することにより、原画像の輪郭を正確に表示できる、という効果が得られる。
【0042】
(3) 輪郭表示手段が原画像の輪郭を表示しているときに、指定手段は輪郭によって表される原画像の位置を基準としてウインドウ内に表示する範囲を表す取込み枠を表示し、画像表示手段は、前記取込み枠が表す範囲に対応する画像をウインドウ内に表示すると共に、前記取込み枠の移動に応じてウインドウ内に表示する画像を変更する請求項1記載の画像表示装置。
【0043】
上記によれば、取込み枠の移動に応じて、ウインドウ内に表示される画像が、所謂リアルタイムで変更されるので、原画像から切り出してウインドウ内に表示すべき範囲の指定をオペレータが更に容易に行うことができる、という効果が得られる。
【0044】
【発明の効果】
以上説明したように本発明は、記憶手段に記憶された画像データに基づいて、指定手段によって指定された範囲に対応する原画像中の部分画像をウインドウ内に表示すると共に、ウインドウの表示位置、部分画像の原画像上での位置及びサイズに基づき、原画像のうち指定された範囲がウインドウ内に位置するときの原画像の位置及びサイズを演算し、ウインドウ外に位置する原画像の輪郭を輪郭表示手段によって目視可能に表示するようにしたので、原画像から切り出してウインドウ内に表示すべき範囲の指定を容易に行うことができる、という優れた効果が得られる。
【図面の簡単な説明】
【図1】本実施例の画像表示装置を示すブロック図である。
【図2】台紙上に表示されるドキュメントの詳細構造を示す模式図である。
【図3】(A)、(B)は一つの台紙上に図形枠複数個生成して各々の枠について画像編集する状態を示す平面図である。
【図4】台紙を画面に表示した状態を示す平面図である。
【図5】台紙上における基準点をマウスで指示したときの画面を示す平面図である。
【図6】文字編集を行なうための文字入力ウインドウが表示された状態を示す平面図である。
【図7】文字列が文章枠に表示された状態を示す平面図である。
【図8】文章枠の編集が確定された状態を示す平面図である。
【図9】図形枠の編集として図形枠内の画像の取込み位置の変更が指示された状態を示す平面図である。
【図10】原画像の輪郭が表示された状態を示す平面図である。
【図11】取込み位置を変更するために取込み枠の表示位置が移動されている状態を示す平面図である。
【図12】編集確定の指示により図形枠の編集が確定された状態を示す平面図である。
【図13】本実施例の作用として、画像取込み位置変更処理の内容を説明するフローチャートである。
【符号の説明】
10 パソコン
24 マウス
120 取込み枠
122 図形枠
124 枠線
[0001]
[Industrial application fields]
The present invention relates to an image display apparatus, and more particularly to an image display apparatus that displays a predetermined portion in a designated original image within a display frame.
[0002]
[Prior art]
Conventionally, an image input as data is subjected to various editing processes such as image composition, cutting and pasting, enlargement and reduction in accordance with instructions from the operator, and an arbitrary image desired by the operator is created and printed. There is known an image processing system that enables this. This type of image processing system is configured to include a display device such as a display, so that the operator can easily grasp the image being created within the created image display area of the display screen of the display. The image of the input image data is temporarily displayed in the work area outside the created image display area of the display screen so that the operator can always display various instructions and easily give various instructions. Has been.
[0003]
In the image processing system as described above, a so-called cut-and-paste process in which a part of an image represented by input image data (hereinafter referred to as an original image) is cut out and placed in a window of a created image display area designated in advance is input. The original image represented by the image data is displayed in the work area of the display screen, the range of the portion to be cut out is designated by the operator, and the image of the portion designated by the operator is displayed in the designated window. It is completed by deleting the image display.
[0004]
[Problems to be solved by the invention]
By the way, when the operator determines that the range of the portion cut out from the original image is not appropriate after the above cut and paste processing is completed, the operator needs to perform the cut and paste processing again to respecify the range of the portion to be cut out. is there. However, since the display of the original image is erased at this time, it is difficult to determine which range on the original image should be set, and the operator repeatedly performs the pasting process until the appropriate range is cut out. Therefore, it is necessary to perform complicated operations such as re-specifying the range of the portion to be cut out.
[0005]
In order to solve this problem, it is conceivable to continuously display the original image in a work area on the display screen. However, the work area is a display area used in various editing processes and is displayed on the display. Since the screen is limited, it is not preferable to continuously display the original image once the cut and paste process is completed. Further, it is conceivable to continuously display an image obtained by reducing the original image, but there is a problem that the display on the display screen becomes complicated.
[0006]
The present invention has been made in consideration of the above facts, and an object of the present invention is to obtain an image display apparatus that can easily specify a range to be cut out from an original image and displayed in a window.
[0007]
[Means for Solving the Problems]
In order to achieve the above object, an image display apparatus according to the present invention includes a window display means for displaying a window indicating the boundary of an image display range on a display screen, a storage means for storing image data representing the original image, and an original image. A designation unit for designating a range to be displayed in the window, and a partial image corresponding to the range designated by the designation unit is displayed in the window based on the image data stored in the storage unit The original image when the specified range of the original image is located in the window based on the image display means to be displayed, the display position of the window, and the position and size of the partial image on the original image calculates the position and size, is configured to include a, a contour display means contour to visibly display the original image located outside the window.
[0008]
[Action]
In the present invention, a window indicating the boundary of the image display range is displayed on the display screen by the window display means. In addition, designation means for designating a range to be displayed in the window in the original image is provided, and the image display means has a range designated by the designation means based on the image data stored in the storage means. The corresponding partial image is displayed in the window. The contour display means calculates the position and size of the original image when the designated range is located in the window based on the display position of the window and the position and size of the partial image on the original image. The outline of the original image located outside the window is displayed so as to be visible.
[0009]
Thereby, the operator can easily recognize the relative position between the contour of the original image and the window, that is, the position in the original image of the image currently displayed in the window. Therefore, when the image displayed in the window is not an image of a desired portion in the original image by once instructing the range to be displayed by the operator via the instruction means, it should be designated via the designation means. Since the position of the range on the original image can be easily determined, the operator can easily specify the range to be cut out from the original image and displayed. Further, since the outline of the original image is displayed in the present invention, the display on the display screen is concise and clear as compared with the case where the original image itself is reduced and displayed outside the window.
In the above image display device, the window display means may display a mount for displaying the window on the display screen, and display the window on the displayed mount in an editable manner. Good. In this case, the window may include a window for displaying an image corresponding to a range designated by the designation unit and a window for displaying character data.
In the image display device, the contour display means is based on the size of the original image, the position of the range specified by the specification means on the original image, and the display magnification of the image in the window. The outline of the original image located outside the window may be displayed by judging the virtual position and size of the original image.
In the above image display device, the designation unit designates a range to be displayed in the window in the original image by designating a position of the contour of the displayed original image with respect to the window. It may be.
[0010]
【Example】
Hereinafter, an embodiment in which the present invention is applied to an image display apparatus that performs DTP (desk top publishing) will be described in detail with reference to the drawings.
[0011]
As shown in FIG. 1, the image display device includes a personal computer 10 for controlling the apparatus, calculating, controlling various input / output devices, and various input / output devices connected to the personal computer 10. Yes. The personal computer 10 temporarily stores a CPU 10A for controlling the apparatus, computing, etc., a RAM 10B as a storage means having a work area, an input / output device interface (I / O port) 10C, and image data (bit map data) to be displayed. A VRAM 12 for storage, a ROM (not shown) for storing programs and the like, and a bus such as a data bus and a control bus for connecting them are configured.
[0012]
In the input / output device interface 10C, as an image input device, a full color scanner 16 for capturing an image such as a photograph, a digital still camera 18 for capturing an image of a subject and capturing a captured image, and image data of the photograph are recorded. A photo CD device 20 for taking image data from a CD and a magneto-optical disk 22 as an external storage medium for the image data are connected. The magneto-optical disk 22 can record an edited image or read out and store the recorded image.
[0013]
The personal computer 10 is connected to a monitor 14 as a display device configured to display an image of image data that is configured by a CRT or the like and temporarily stored in the VRAM 12. A menu bar display area for displaying menu items is provided at the upper end of the screen of the monitor 14 (see FIG. 4). Further, the input / output device interface 10C is used for inputting a character data to the personal computer 10 and a mouse 24 as an input indicator for instructing (or selecting) a menu item or a screen position displayed on the monitor 14. The keyboard 28 is connected. Further, the input / output device interface 10C is connected to a printer 26 for printing a document edited by image processing. The mouse 24 corresponds to the instruction means of the present invention.
[0014]
In the image display apparatus according to the present embodiment, all data including both image data and character data is handled as document data. First, the detailed structure of document data will be described with reference to FIG. The document data is composed of data indicating each of the mount 102, the graphic frame 108, and the text frame 126. The text frame 126 is an area for displaying character data, and an attribute that is decoration information for determining the character font, size, color, and the like can be given to the text frame 126.
[0015]
The graphic frame 108 is an area for displaying an image, and acts as a viewing window for displaying the captured image in the graphic frame 108. Attributes that determine the magnification of the image displayed in the frame, the background transmittance of the image in the frame, and the like can be given to the graphic frame.
[0016]
The captured image data itself can be handled as the same document data as described above. That is, a second graphic frame is inserted in an image (first image) displayed in one graphic frame (first graphic frame) in a nested structure, and the second graphic frame is inserted. It is possible to display the second image. Further, a third image frame is nested in the second image to display the third image, and a fourth image frame is nested in the third image to display the fourth image. It is possible to nest graphic frames.
[0017]
The multiple nested graphic frames have a vertical relationship, and if the lower (nested) graphic frame image and the upper (nested) graphic frame image overlap, the lower image It will be displayed blocked by the image. The top-bottom relationship of this graphic frame can be changed.
[0018]
The above document data, that is, the data representing the mount 102, the graphic frame 108, the text frame 126, the image data, and the text data are stored as a single file in the RAM 10B, and are stored in different external files (for example, image data in advance). Library files etc. in which multiple records are recorded are not referenced.
[0019]
As described above, in this embodiment, the mount 102, the graphic data, and the graphic frame 108 each have a layer (layer) structure. That is, it has a laminated structure in which an image is positioned above the mount 102 and a graphic frame 108 acting as a window is positioned on the image. Thus, during image editing, the captured image data is held, and the position of the graphic frame is shifted by dragging, so that images and characters that have not been displayed in the graphic frame until now can be displayed.
[0020]
Note that the mount 102 is always positioned below all the graphic frames 108 and the text frames 126, and can be directly drawn on the mount 102.
[0021]
Next, the flow of image editing will be briefly described. As shown in FIG. 4, when a document creation menu (not shown) for creating a new document is selected, a mount 102 is displayed on the screen 100. Next, when the figure editing field 106 of the menu bar 105 at the upper end of the screen is selected with the mouse 24, figure editing is started.
[0022]
As shown in FIG. 5, when the cursor 24 is clicked on the reference points 107 and 109 on the mount 102 and the mouse 24 is clicked, a rectangular graphic frame 108 having the reference points 107 and 109 at both ends of the diagonal line is displayed. Displayed above. Next, when one of the input menus (not shown) of the full-color scanner 16 or the digital still camera 18 is selected, a work mount 110 is displayed, and image reading is started by any of the selected image input devices. The original image 111 (the original image including the image of the copier 112 in FIG. 5) is displayed in the work mount 110.
[0023]
On this original image 111, it is possible to display a capture frame 115 indicating the range of a partial image for cutting the image and displaying it in the captured graphic frame 108. That is, when the mouse 24 is clicked by positioning the cursor at the reference points 114 and 116 that are the opposite ends of the diagonal line of the partial image displayed in the graphic frame 108, the capture frame having these reference points 114 and 116 as the opposite ends of the diagonal line. 115 is displayed. Note that the capture range can be changed by changing the positions of the reference points 114 and 116. When the capture range instruction ends (for example, a confirmation instruction by clicking the mouse 24), the image in the capture frame 115 is displayed in the graphic frame 108. This process corresponds to the image display means of the present invention.
[0024]
In the present embodiment, a plurality of graphic frames and sentence frames can be generated on one mount 102, and image editing can be performed for each frame. As shown in FIG. 3A, when another image is to be combined with one image, another graphic frame 52 is generated inside one graphic frame 50 on the screen. Thus, another image is synthesized and displayed in one image. At this time, when it is desired to synthesize the image of only the chair image 54 excluding the background from the image in the graphic frame 52 with the image in the graphic frame 50, an image other than the chair image 54 in the graphic frame 52 is used as the background. If the attribute that the transmittance of the background is 100% is given, an image of only the chair 54 is synthesized on the image in the graphic frame 50 in the graphic frame 50 as shown in FIG. And displayed.
[0025]
Next, character editing will be described. As shown in FIG. 6, the character editing field 124 of the menu bar 105 at the upper end of the screen is selected by the mouse 24. Thereby, character editing is started. When a text frame 126 is designated by a mouse operation similar to that for image editing using the graphic frame 122, a character input window 128 is displayed. When a character is input from the keyboard, a character string 130 is displayed on the character input window 128, and when an input completion instruction (for example, mouse click) is given, a character string 132 is displayed in the sentence frame 126 (see FIG. 7). . When there is no correction here, when an instruction for confirming editing is made (for example, a mouse click), the character input window 128 is deleted and editing of the text frame 126 is confirmed (FIG. 8).
[0026]
Next, an image capture position changing process that is performed when it is desired to change the capture position from the original image with respect to the image once captured from the original image and displayed in the graphic frame will be described with reference to the flowchart of FIG. To do. In this process, as shown in FIG. 9, the execution position change process is instructed from among a plurality of icons (not shown) displayed in the command menu 118 displayed in advance on the left side of the mount 102. This is executed when the icon is selected by clicking the button of the mouse 24 after the cursor 104 corresponds to the icon corresponding to the command to be executed.
[0027]
In step 200, it is determined whether or not an instruction for a graphic frame to be processed has been completed. If the graphic frame to be processed is instructed in advance, the determination at step 200 is affirmed and the routine proceeds to step 206. On the other hand, if the determination in step 200 is negative, the process waits until a point in any graphic frame currently displayed on the mount 102 is designated in step 202. Note that FIG. 9 shows a state in which only a single graphic frame 122 is displayed on the mount 102 for ease of explanation. If the determination in step 202 is affirmed, the graphic frame corresponding to the point instructed in step 204 is stored as a graphic frame to be processed, and the process proceeds to step 206.
[0028]
In step 206, it is determined whether or not the frame line of the graphic frame 122 instructed as the processing target is instructed (clicked) as described above, and waits until the frame line is instructed. If the determination in step 206 is affirmative, in step 208, the coordinates of the graphic frame 122 on the mount 102, the position and size of the image displayed in the graphic frame 122 on the original image (the size and graphic of the graphic frame 122). Based on the display magnification of the image in the frame 122), the position and size of the original image with respect to the mount 102 are calculated.
[0029]
In the next step 210, a frame line 124 representing the outline of the original image is displayed based on the position and size of the original image calculated above. As for the display of the frame line 124 representing the outline, it is determined which part of the frame line 124 is inside the mount 102 and which part is outside, the inside part of the mount 102 is a broken line, and the outside part is Display with solid lines. In the next step 212, the capture frame 120 (see FIG. 11) having the same size as the graphic frame 122 is displayed so as to overlap the graphic frame 122. In this state, since the capture frame 120 and the graphic frame 122 overlap, the capture frame 120 is not shown in FIG. This process corresponds to the contour display means of the present invention.
[0030]
In step 214, it is determined whether or not the mouse button has been released. If the determination in step 214 is negative, it is determined in step 216 whether or not the mouse pointing point (the position of the cursor 104) has been moved. If the determination in step 216 is also negative, the process returns to step 214 and waits until the determination in step 214 or 216 is affirmed. When the mouse instruction point is moved and the determination in step 216 is affirmed, in step 218, the display position of the capture frame is moved in accordance with the movement of the mouse instruction point, and in step 220, the outline is displayed as a frame line 124. Of the original images, the image corresponding to the range surrounded by the capture frame 120 whose display position has been moved is captured from the image data of the original image, the image is displayed in the graphic frame 122, and the process returns to step 214. . The processing in steps 218 and 220 also corresponds to the image display means of the present invention.
[0031]
As an example, when the operator wants to display a slightly lower left image on the original image with respect to the image displayed in the graphic frame 122, click an arbitrary point on the frame line of the graphic frame 122 as shown in FIG. As shown in FIG. 11, when dragging in the lower left direction, the capture frame 120 (indicated by a broken line in FIG. 11) moves in the lower left direction, and the graphic frame 122 corresponds to the position of the moved capture frame 120. A slightly lower left image is displayed with respect to the image to be displayed, that is, the image that has been displayed so far. That is, the capture frame 120 is regarded as a virtual window, and an image corresponding to looking into the image data from the window is displayed in the graphic frame 122.
[0032]
As described above, the image displayed in the graphic frame 122 is changed in real time to an image corresponding to the range surrounded by the moved capture frame 120. The operator can easily determine the position of the image displayed in the graphic frame 122 on the original image on the basis of the display position of the frame line 124 and the capture frame 120 representing the outline of the original image, and the button of the mouse Referring to the image displayed in the graphic frame 122 while moving the cursor 104 with the button turned on, the cursor 104 can be moved in which direction and how much to display the desired image in the graphic frame 122. It is possible to easily determine whether it is appropriate. Therefore, it is possible to easily specify a range to be cut out from the original image and displayed in the graphic frame 122.
[0033]
The operator releases the mouse button while a desired image is displayed in the graphic frame 122. As a result, it is determined that edit confirmation has been instructed, and the determination in step 214 is affirmed. As shown in FIG. 12, the display of the capture frame 122 and the outline of the original image is erased in step 22, and in step 224 The coordinates of the image displayed on the original image are stored, and the process ends.
[0034]
When the creation of a new document is completed as described above, the print field 134 is selected from the menu bar 105 at the upper end of the screen by the mouse 24, and the information on the fixed characters and graphics on the mount 102 is output to the printer 26. The printer 26 prints based on the input data. As a result, a print of the editing screen on the mount is obtained.
[0035]
In the above, the graphic frame 122 as a window is fixedly displayed, and the capture frame 120 having the same size as the graphic frame 122 is moved in accordance with the dragging with the mouse 24 to thereby change the range of the image displayed in the graphic frame 122. Although the case of changing is described as an example, the present invention is not limited to this, and instead of displaying the capture frame 124, the display position of the graphic frame 122 may be moved in accordance with the drag by the mouse 24. Good. Further, the display position of the frame line 124 representing the outline of the original image may be moved according to the dragging with the mouse 24. Further, when the display position of the graphic frame 122 is moved, the confirmation of editing is instructed even if the graphic frame 122 is continuously displayed at the display position of the graphic frame 122 when the confirmation of editing is instructed. Sometimes, the image and the graphic frame 122 may be displayed at the original display position of the graphic frame 122 without changing the image displayed in the graphic frame 122.
[0036]
In the above description, the case where the mouse 24 is used as the instruction unit has been described as an example. However, the present invention is not limited to this, and various pointing devices such as a light pen and a digitizer can be used. It is also possible to use the keyboard 28 as instruction means.
[0037]
Although the embodiments of the present invention have been described above, the above embodiments include embodiments of technical matters as described below in addition to the technical terms described in the claims.
[0038]
(1) The image display device according to claim 1, wherein the contour display means displays the contour of the original image only when the display range once designated by the designation means is designated again by the designation means.
[0039]
As described above, the outline of the original image is displayed only when the position of the predetermined portion once designated by the operator via the instruction means is corrected by the operator again through the instruction means. There is an effect that the outline of the image is not displayed, and the display in the display screen becomes more concise and clear.
[0040]
(2) The contour display means determines the virtual position and size of the original image based on the size of the original image, the position of the range designated by the designation means on the original image, and the display magnification of the image in the window. The image display device according to claim 1, wherein the contour of the original image located outside the window is displayed.
[0041]
In the present invention, the display magnification of the image in the window may be fixed. However, when the display magnification can be changed, the original image is taken into consideration in the display magnification in the window of the image as described above. By determining the virtual position and size, it is possible to accurately display the contour of the original image.
[0042]
(3) When the contour display means displays the contour of the original image, the designation means displays a capture frame representing a range to be displayed in the window with reference to the position of the original image represented by the contour, and the image display 2. The image display apparatus according to claim 1, wherein the means displays an image corresponding to a range represented by the capture frame in the window and changes an image displayed in the window in accordance with the movement of the capture frame.
[0043]
According to the above, since the image displayed in the window is changed in so-called real time according to the movement of the capture frame, the operator can further easily specify the range to be cut out from the original image and displayed in the window. The effect that it can be performed is acquired.
[0044]
【The invention's effect】
As described above, the present invention displays the partial image in the original image corresponding to the range designated by the designation unit in the window based on the image data stored in the storage unit, and the display position of the window, Based on the position and size of the partial image on the original image, the position and size of the original image when the specified range of the original image is located within the window are calculated, and the outline of the original image located outside the window is calculated. Since the contour display means displays the image so as to be visible, an excellent effect can be obtained that the range to be cut out from the original image and displayed in the window can be easily specified.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating an image display apparatus according to an embodiment.
FIG. 2 is a schematic diagram showing a detailed structure of a document displayed on a mount.
FIGS. 3A and 3B are plan views showing a state in which a plurality of graphic frames are generated on one mount and image editing is performed for each frame.
FIG. 4 is a plan view showing a state in which a mount is displayed on the screen.
FIG. 5 is a plan view showing a screen when a reference point on the mount is designated with a mouse.
FIG. 6 is a plan view showing a state in which a character input window for performing character editing is displayed.
FIG. 7 is a plan view showing a state in which a character string is displayed in a sentence frame.
FIG. 8 is a plan view showing a state where editing of a text frame is confirmed.
FIG. 9 is a plan view showing a state where an instruction to change the image capture position in the graphic frame is given as editing of the graphic frame.
FIG. 10 is a plan view showing a state in which an outline of an original image is displayed.
FIG. 11 is a plan view showing a state where the display position of the capture frame is moved to change the capture position.
FIG. 12 is a plan view showing a state in which editing of a graphic frame is confirmed by an instruction to confirm editing.
FIG. 13 is a flowchart illustrating the contents of an image capture position change process as an operation of the present embodiment.
[Explanation of symbols]
10 PC 24 Mouse 120 Capture frame 122 Graphic frame 124 Frame line

Claims (5)

画像表示範囲の境界を示すウインドウを表示画面に表示するウインドウ表示手段と、
原画像を表す画像データを記憶する記憶手段と、
原画像中の前記ウインドウ内に表示する範囲を指定するための指定手段と、
前記記憶手段に記憶された画像データに基づいて、前記指定手段によって指定された範囲に対応する部分画像を前記ウインドウ内に表示する画像表示手段と、
前記ウインドウの表示位置、前記部分画像の前記原画像上での位置及びサイズに基づき、前記原画像のうち前記指定された範囲が前記ウインドウ内に位置するときの前記原画像の位置及びサイズを演算し、前記ウインドウ外に位置する原画像の輪郭を目視可能に表示する輪郭表示手段と、
を含む画像表示装置。
Window display means for displaying a window indicating the boundary of the image display range on the display screen;
Storage means for storing image data representing an original image;
A designation means for designating a range to be displayed in the window in the original image;
Image display means for displaying a partial image corresponding to the range designated by the designation means in the window based on the image data stored in the storage means;
Based on the display position of the window and the position and size of the partial image on the original image, the position and size of the original image when the specified range of the original image is located in the window are calculated. And an outline display means for displaying the outline of the original image located outside the window so as to be visible,
An image display device.
前記ウィンドウ表示手段が、前記ウィンドウを表示するための台紙を前記表示画面に表示し、当該表示した台紙上に前記ウィンドウを編集可能に表示する、
ことを特徴とする請求項1記載の画像表示装置。
The window display means displays a mount for displaying the window on the display screen, and displays the window on the displayed mount in an editable manner.
The image display device according to claim 1.
前記ウィンドウは、前記指定手段によって指定された範囲に対応する画像を表示するためのウィンドウ、及び文字データを表示するためのウィンドウを含む、
ことを特徴とする請求項2記載の画像表示装置。
The window includes a window for displaying an image corresponding to a range specified by the specifying means, and a window for displaying character data.
The image display device according to claim 2.
前記輪郭表示手段が、前記原画像のサイズ、前記指定手段によって指定された範囲の前記原画像上における位置、及び前記ウィンドウ内における画像の表示倍率に基づいて、前記原画像の仮想的な位置及びサイズを判断して前記ウィンドウ外に位置する前記原画像の輪郭を表示する、
ことを特徴とする請求項1乃至請求項3の何れか1項記載の画像表示装置。
Based on the size of the original image, the position of the range specified by the specifying means on the original image, and the display magnification of the image in the window, the contour display means Judging the size and displaying the outline of the original image located outside the window;
The image display device according to claim 1, wherein the image display device is an image display device.
前記指定手段が、表示された前記原画像の輪郭の前記ウィンドウに対する位置を指定することにより、前記原画像中の前記ウィンドウ内に表示する範囲を指定する、
ことを特徴とする請求項1乃至請求項4の何れか1項記載の画像表示装置。
The designating unit designates a range to be displayed in the window in the original image by designating a position of the contour of the displayed original image with respect to the window;
The image display device according to claim 1, wherein the image display device is an image display device.
JP09448394A 1994-05-06 1994-05-06 Image display device Expired - Fee Related JP3607913B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP09448394A JP3607913B2 (en) 1994-05-06 1994-05-06 Image display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP09448394A JP3607913B2 (en) 1994-05-06 1994-05-06 Image display device

Publications (2)

Publication Number Publication Date
JPH07302322A JPH07302322A (en) 1995-11-14
JP3607913B2 true JP3607913B2 (en) 2005-01-05

Family

ID=14111537

Family Applications (1)

Application Number Title Priority Date Filing Date
JP09448394A Expired - Fee Related JP3607913B2 (en) 1994-05-06 1994-05-06 Image display device

Country Status (1)

Country Link
JP (1) JP3607913B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7982809B2 (en) 2004-10-06 2011-07-19 Thomson Licensing Method and apparatus for providing a picture cropping function
JP4873369B2 (en) * 2007-02-05 2012-02-08 住友電気工業株式会社 Image display / processing terminal, system, program, and storage medium

Also Published As

Publication number Publication date
JPH07302322A (en) 1995-11-14

Similar Documents

Publication Publication Date Title
JP4010460B2 (en) Image processing method and image processing apparatus
US7302649B2 (en) Operation method for processing data file
JP3895492B2 (en) Image processing apparatus, image processing method, and computer-readable recording medium storing program for causing computer to execute the method
JP5049515B2 (en) Information processing apparatus, information processing method, and information processing program
JPH06274586A (en) Displaying system
JP2006277056A (en) Information processor and program
US20100174984A1 (en) Document editing apparatus and control method thereof
US6128020A (en) Computer system supporting design operation of three-dimensional object and method therefor
JP3607913B2 (en) Image display device
JP3974105B2 (en) Image processing apparatus, image processing method, and computer-readable recording medium storing program for causing computer to execute the method
JP2001118077A (en) Device and method for preparing document
JP2001125895A (en) Editing device and editing method
JP3175221B2 (en) Document creation device
JP2001273509A (en) Method and device for editing document picture
US7113305B1 (en) Information processing apparatus and information processing method for processing document data having a plurality of objects different in attribution
JP2608300B2 (en) Document processing method
JP3136626B2 (en) Document creation device
EP0984395A2 (en) Program storage medium
JP2808553B2 (en) Image processing device
JP4100842B2 (en) Document creation apparatus and document creation method
JP2003256183A (en) Print order content display method and device therefor
JP2751224B2 (en) Document creation device
JP2000227914A (en) Document edition device
JP3175220B2 (en) Document creation device
JPH07262215A (en) Document display device

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20031226

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20040210

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040409

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20040414

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040518

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20040602

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20040602

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040602

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20040602

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040726

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040907

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071022

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081022

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091022

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091022

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101022

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees