JP2004110719A

JP2004110719A - Image display system and computer program

Info

Publication number: JP2004110719A
Application number: JP2002275813A
Authority: JP
Inventors: Genkei Sai; 崔　元奎; Bera Oka; 岡　ベラ; Yun-Won Yang; 梁　倫　▲ウォン▼; Kosei Chin; 沈　厚　成
Original assignee: CRESYS KK; HUMANDREAM KK
Current assignee: CRESYS KK; HUMANDREAM KK
Priority date: 2002-09-20
Filing date: 2002-09-20
Publication date: 2004-04-08

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image display system enabling a user to intuitively understand an operation method for an enlarged display. <P>SOLUTION: The display system is constituted so as to set an enlarged part smaller than the display area of an enlargement window and satisfying a fixed positional relation with a first magnification image part (first magnification image portion to be enlarged) within the display area. This display system displays, based on the part corresponding to the first magnification image part of second magnification image data loaded to an enlargement display memory, a second magnification image corresponding to the first magnification image part in a form having an extended visual confirmable image dimension within the enlargement window. Further, the display system updates the first magnification image part to be displayed with enlargement according to the movement of the enlargement window. <P>COPYRIGHT: (C)2004,JPO

Description

【０００１】
【発明の属する技術分野】
本発明は画像表示システム及びコンピュータプログラムに関する。
【０００２】
【従来の技術】
近年、パーソナルコンピュータにおける主演算装置（ＣＰＵ）の処理の高速化や記憶装置（ＨＤＤ）大容量化がめざましく、動画像や音楽データ、多機能アプリケーションソフトあるいは高解像度静止画画像などの大容量のデータが扱われるケースが急速に増えている。また、インターネットやパソコン通信など、通信ネットワークのインフラストラクチャ整備及び高速化に伴い、このような大容量のデータを、通信ネットワークを介してオンライン配信したりするサービスも普及しつつある。
【０００３】
近年、こうした画像表示システムにおいては、例えば電子ブックやカタログあるいは電子地図のように、標準倍率の画像に加え、よりデータ量の大きい拡大画像データを用いて、拡大表示機能を実現したものが普及しつつある。従来、こうした画像表示システムにおいて多く使用されている画像拡大機能は、例えば、サムネイル画像と拡大画像とを分離しておき、デフォルトで表示されているサムネイル画像をクリックすると、その拡大画像を画面切り替えにより全体表示するものが、例えばオンラインカタログなどで広く採用されている。また、電子地図などの場合は、地図上にて拡大したい地点を、ポインタにより指定してマウスクリックすると、その地点の周辺が画面切り替えにより拡大表示される、という方式が一般化している。この方式の場合、標準倍率画像がいくつかの区画に分割されており、どの区画がポインタにより指定されているかを判別して、該当する区画に対応する拡大画像を選択的に読み出して表示する。また、多少進んだ拡大方式としては、標準倍率画像上に一定寸法の拡大指定ウィンドウを表示させ、ウィンドウ位置を確定して拡大指示を行なうと、画面切り替えにより、そのウィンドウ内の領域を選択的に拡大表示する方法もある。この場合、拡大指定ウィンドウの設定位置はマウス操作により自由に変更でき、拡大指定ウィンドウの位置をマウスクリック等により確定すると、拡大指定ウィンドウとは別画面にて拡大画像が表示される。
【０００４】
【特許文献１】
特開平８−１０６４６９号公報
【０００５】
【発明が解決しようとする課題】
しかし、サムネイルを用いる方法では、拡大画像を画面切り替えにより全体表示するだけなので、画面上に表示可能な拡大画像のサイズにより、拡大倍率が限定される欠点がある。他方、拡大したい画像位置をポインタにより指定して、その位置指定した部位を選択的に拡大表示する方式では、部分的な拡大画像を表示するだけなので、拡大倍率の制約は少ない。しかし、画面切り替えにより拡大画像を表示するため、拡大表示コマンドを実行した途端に、拡大前倍率の画像（以下、原画像ともいう）が一時的に隠蔽されてしまうことになる。例えば所望の部位の拡大ができなかった場合は、画面切り替えにより、いちいち拡大前倍率の画像に戻って拡大位置を指定しなおさなければならないので非常に面倒であり、原画像と拡大画像部位との位置関係も不明確になりやすく、現在どの部位の画像を拡大して見ているのかを利用者が見失いやすい欠点がある。いずれも、コンピュータの普及により様々な人が使用するコンピュータを使用する機会が増えた今日では、操作が直感的でないことが災いしているともいえ、更なる万人向けの操作、つまり誰もが直感的にわかりやすく使用することが可能となるシステムが求められている所以でもある。
【０００６】
また、一般にコンピュータにより画像の表示を行なう場合、主演算装置（ＣＰＵ）で処理したデータをメモリ（ＲＡＭ等）にロードして出力する際に、解像度の高い拡大用の高倍率画像を一度にロードすると、メモリ領域の大半をデータが占めてしまい、他のプログラム等を圧迫してＣＰＵが正常に作動しなくなる状況に陥りやすい問題点がある。また、拡大画像の切り替えやスクロール処理をスムーズに行なうことが困難とり、ユーザにフラストレーションを与えやすい欠点もある。こうした問題は、通信ネットワークを介して大容量の画像データをやり取りする場合など、データのダウンロードが律速になるとき、特に顕著である。
【０００７】
本発明の課題は、拡大表示の操作方法を直感的に理解することが可能であり、望ましくは、大容量の拡大画像データを表示する際に、コンピュータに処理負担をかけにくく、効率良く大容量の画像データを閲覧できる画像表示システムと、該システムをコンピュータ上にて実現するためのコンピュータプログラムを提供することにある。
【０００８】
【課題を解決するための手段及び作用・効果】
上記の課題を解決するために、本発明の画像表示システムは、
予め定められた画像を第一倍率により表示するための第一倍率画像データを記憶する第一倍率画像データ記憶部と、
画像を第一倍率よりも大きい第二倍率にて表示するために、第一倍率画像データよりも高解像度を有してなり、該第一倍率画像データによる１画像を、これに対応する複数の第二倍率セグメントにて構成した第二倍率画像データを記憶する第二倍率画像データ記憶部と、
画像を表示する表示装置と、
表示装置の画面上に、画像を第一の画像データに基づいて第一倍率画像として表示させる第一倍率画像表示制御手段と、
第一倍率画像の一部を第二倍率画像により拡大表示するために、第一倍率画像の表示領域よりも小さい拡大ウィンドウを、第一倍率画像上にて移動可能に設定する拡大ウィンドウ設定手段と、
第二倍率画像データを拡大出力画像データとしてロードする拡大表示用メモリと、
該拡大ウィンドウが区画する被区画第一倍率画像部分の内部に、該被拡大第一倍率画像部分よりも小さく、かつ、該被区画第一倍率画像部分と一定の位置関係を満たす被拡大第一倍率画像部分を設定し、拡大表示用メモリにロードされた第二倍率画像データの被拡大第一倍率画像部分に対応する部分に基づいて、拡大ウィンドウ内に、被拡大第一倍率画像部分に対応する第二倍率画像を視認画像寸法が拡張された形で表示するとともに、拡大ウィンドウの移動に伴い、拡大表示される被拡大第一倍率画像部分を更新する拡大表示制御手段と、
を備えたことを特徴とする。
【０００９】
また、本発明のコンピュータプログラムは、コンピュータを上記画像表示システムの各手段として機能させるためのものである。なお、該コンピュータプログラムがインストールもしくは実装（ＲＯＭ等にあらかじめ焼き付け）されるコンピュータは、上記システムの各手段を機能的に実現するためのＣＰＵと該ＣＰＵのワークエリアとなるＲＡＭ、さらには画像データ記憶部となるべき記憶装置と、画像表示のための表示装置を備えたものであることが必要である。
【００１０】
上記本発明によると、第一倍率画像上に拡大ウィンドウを設定し、その拡大ウィンドウが区画する被区画第一倍率画像部分の一部のみを、第二倍率画像データを用いて、当該拡大ウィンドウ内に視認画像寸法が拡張された形で表示する（つまり、表示倍率を第一倍率から第二倍率に高めるに際し、拡大ウィンドウ内に表示可能な視野は狭くなる。第一倍率では、この視野は拡大ウィンドウの表示領域よりも小さいが、これを第二倍率にて表示する際に、拡大ウィンドウの表示領域が許す範囲で同じ視野の画像を拡張することができる）。そして、この拡大ウィンドウを第一倍率画像上にて移動可能とし、その移動に伴い、拡大表示される被拡大第一倍率画像部分を更新するようにしたから、拡大ウィンドウをあたかもルーペのように第一倍率画像上に当てがって、所望の部位を直接拡大して見るような感覚で操作ができ、直感的でわかりやすい操作が可能となる。具体的には、拡大ウィンドウ以外の第一倍率画像領域を、拡大ウィンドウ内の第二倍率画像と合成して表示することで、拡大ウィンドウに占有されない第一倍率画像領域が隠蔽されずに、拡大ウィンドウの背景に継続表示されるので、今、第一倍率画像領域のどの部位が拡大されているのかが一目瞭然であり、所望の部位の拡大ができなかった場合も、拡大位置部位の再設定を非常に容易に行なうことができる。
【００１１】
拡大表示制御手段は、被拡大第一倍率画像部分に対応する第二倍率画像を、拡大ウィンドウの表示領域に余白領域が生じないように表示するものとすることができる。これにより、拡大ウィンドウの表示可能領域をより有効に活用でき、拡大表示可能な視野を最大限に広げることができる。この場合、被拡大第一倍率画像部分を、拡大ウィンドウの表示領域に対する寸法比率が、第一倍率画像の第二倍率画像に対する相対倍率比に等しい相似形をなすものとして設定し、被拡大第一倍率画像部分に対応する第二倍率画像を、拡大ウィンドウの表示領域内に、領域の過不足がないように表示することができる。つまり、被拡大第一倍率画像部分の大きさを拡大ウィンドウの大きさに対し、第一倍率画像の第二倍率画像に対する相対倍率比の逆数倍となるように設定し、該被拡大第一倍率画像部分を、第二倍率画像を用いて拡大ウィンドウに丁度はまるように拡大表示することで、拡大ウィンドウの表示可能領域の活用を最も有効に行うことができる。
【００１２】
また、拡大ウィンドウ設定手段は、拡大ウィンドウを、第一倍率画像上にて連続的にドラッグ移動可能に設定するものとすることができる。さらに、拡大表示制御手段は、拡大ウィンドウが第一倍率画像上にてドラッグ移動するに伴い、拡大ウィンドウ内に、第二倍率画像を切れ目なくスクロール表示させるものとすることができる。このようにすると、拡大ウィンドウをルーペに見立てたとき、アナログ的な手操作により該ルーペを第一倍率画像上にて動かすような画像スクロールが可能となり、例えば電子カタログ上の画像でも、商品の詳細を本物のルーペを用いて拡大してみるような、リアルで親しみ深い操作が可能となり、例えば機械操作がどちらかといえば苦手なユーザ（主婦やお年寄りなど）にも取り扱いが容易である。
【００１３】
このような表示のリアリティを高めるには、拡大ウィンドウ（ルーペ）の動きに合わせて、いかにスムーズに拡大画像をスクロールできるかが重要となる。しかし、画面スクロールには、画像メモリにロードされた第二倍率画像データから、表示すべき領域のものを読み出して、表示画面の更新を高速で行なわなければならない。このとき、画像メモリに、全画像分の第二倍率画像データがロードされていれば、ＣＰＵはスクロール表示更新処理に専念できるが、高解像度の第二倍率画像データを全てロードするには膨大なメモリエリアを確保する必要があり、例えばコンピュータプログラムを既存のパーソナルコンピュータやワークステーションにインストールして用いる場合は、そのインストール先となるパーソナルコンピュータやワークステーションに、相当の空メモリを搭載しておく必要があるので、システムの高価格化を余儀なくされる。
【００１４】
そこで、本発明の画像表示システムにおいて拡大表示用メモリは、拡大ウィンドウの表示領域よりも広い画像領域をカバーするメモリ領域を有し、第二倍率画像データの一部のみを、拡大ウィンドウ内に表示すべき第一倍率画像の被拡大部分に対応する第二倍率セグメントと、当該拡大ウィンドウの外に続く表示準備画像データをなす第二倍率セグメントとからなる拡大出力画像データとしてロードするものとすることができる。この場合、拡大表示制御手段は、拡大ウィンドウが第一倍率画像上にてドラッグ移動するに伴い、拡大表示用メモリへのデータロード内容を、第二倍率セグメントの単位で更新するとともに、拡大ウィンドウが、その移動方向において所定の更新限界位置に到達したとき、準備画像データとなるべき新たな第二倍率セグメントを、メモリシフトを行ないつつ拡大ウィンドウの移動方向前方側に補充することにより拡大表示用メモリのデータロード内容を更新し、該補充された第二倍率セグメントを用いて拡大ウィンドウ内に、第二倍率画像を切れ目なくスクロール表示させるものとすることができる。
【００１５】
この構成によると、拡大ウィンドウ内に拡大画像を表示する際に、拡大ウィンドウ内に表示される第二倍率セグメントと、その外に続く表示準備画像データをなす第二倍率セグメントとからなり、第二倍率画像データの一部をなす拡大出力画像データを拡大表示用メモリにロードする。これによって、拡大ウィンドウ内に第二倍率セグメントを用いて拡大画像を表示する際には、全ての第二倍率セグメントを拡大表示用メモリにロードする必要はなく、必要な拡大部分とそのドラッグ移動に必要な第二倍率セグメントだけをロードすれば良いので、消費メモリ量を節約することができる。そして、拡大ウィンドウがドラッグ移動した場合、表示準備画像データにより拡大ウィンドウ内に表示される画像を切れ目なくスクロール表示させることができる。また、拡大ウィンドウが所定の更新限界位置に到達した時には、その移動方向前方の表示準備画像データとなるべき新たな第二倍率画像セグメントを補充することにより拡大表示用メモリのデータロード内容を更新するので、拡大ウィンドウの外側には常に不足なく表示準備画像データが予め存在していることになり、画像データをロードする間をユーザに感じさせることなく、拡大ウィンドウ内に表示される画像を切れ目なくスクロール表示させることができる。これにより、消費メモリ量を節約しつつ、効率良く拡大画像を表示及びスクロールすることが可能となる。
【００１６】
次に、本発明の画像システムは、第一倍率画像データ記憶部と第二倍率画像データ記憶部とがデータサーバ側に設けられ、表示装置が端末側に設けられるとともに、通信ネットワークを介してデータサーバから端末へ第一倍率画像データ及び第二倍率画像データを配信し、端末にてその配信された画像データを用いて表示装置に画像を表示するとともに、
端末側に、拡大表示用メモリにロードすべき第二倍率セグメントをデータサーバから選択的にダウンロードするとともに、拡大ウィンドウが第一倍率画像上にて移動した場合に、拡大ウィンドウ内に補充すべき第二倍率セグメントのみをデータサーバから追加ダウンロードする画像ダウンロード制御手段を設けることができる。
【００１７】
上記構成によると。データサーバ側の画像データ記憶部から通信ネットワークを介して画像データを配信し、端末側の表示装置に拡大表示を行なう際に、その拡大表示に新たに必要な第二倍率画像セグメントのみをデータサーバから選択的にダウンロードするので、ダウンロード時間とその処理負担を大幅に削減することができる。さらに、またデータのダウンロードの間も、拡大ウィンドウの外側には常に不足なく表示準備画像データが予め存在していることになり、ダウンロード処理の影響をユーザに意識させることなく、拡大ウィンドウ内に表示される画像を切れ目なくスクロール表示させることができる。これにより、ユーザは、ダウンロード待ちによる画像途切れなどのフラストレーションから解放され、快適な画像閲覧を楽しむことができる。
【００１８】
また、本発明の画像システムには、画像を第二倍率よりもさらに高倍率となる第三倍率にて表示するために、第二倍率画像データよりもさらに高解像度の第三画像データを記憶する第三画像データ記憶部を設けることができる。この場合、拡大表示制御手段は、拡大ウィンドウ内の第二倍率の画像を、第三画像データに基づいて、表示装置の画面上に第三倍率にてさらに拡大表示可能とするものとして構成することができる。このように、第二倍率画像データよりもさらに高解像度の第三画像データを設け、それを拡大表示に用いることで、ユーザは更なる拡大画像を見ることができる。また、第三倍率による拡大画像を、拡大ウィンドウ内にて第二倍率による画像と切換えて表示可能にすれば、拡大ウィンドウはドラッグ移動が可能で、かつ画像の拡大倍率変換の切換えが可能となるので、所望の部位の拡大画像をさらに随意にズームアップさせて、より詳細な拡大画像を簡単に表示させることができる。
【００１９】
第三画像データは、第二倍率セグメントのそれぞれに対応する複数枚の第三倍率セグメントの組より構成することができ、拡大表示制御手段は、拡大ウィンドウ内の第二倍率の画像上に、さらに拡大表示したい画像領域を指定する拡大領域指定手段を有し、その指定された画像領域に対応する第三倍率セグメントを第三画像データ記憶部から選択的に読み出して、拡大ウィンドウ内に表示させるものとして構成することができる。このように、ある第二倍率セグメントを複数の第三倍率セグメントにより拡大表示するように構成すれば、前述の第一倍率画像を複数の第二倍率セグメントにより拡大表示する場合と同様に、消費メモリ量を節約しつつ、効率良く第三倍率の拡大画像を表示及びスクロールすることが可能となる。この場合、前述の画像ダウンロード制御手段を設ける場合は、拡大ウィンドウ内に表示するべき第三倍率の画像に必要な第三倍率セグメントのみを、データサーバからダウンロードするものとすることができる。これにより、ダウンロード処理の影響をユーザに意識させることなく、拡大ウィンドウ内に第三倍率の拡大画像をスムーズに表示させることができる。
【００２０】
次に、本発明の画像表示システムにおいて、第一倍率画像は、貼り付け画像を含む出版物のページを表示装置の画面上に表示するためのものとすることができ、拡大ウィンドウ設定手段は、当該ページ上にて拡大ウィンドウをドラッグ移動可能に設定するものとすることができる。このように構成することで、紙の出版物をルーペにより拡大して見るごとく、これを電子化した出版物のページを、画像上で拡大表示することができ、紙の出版物の感覚を損ねることなく、そのペーパーレス化が可能となる。なお、ここでいう出版物とは、ページ上に文字又は画像、若しくはその両方が含まれているものという意味であり、本をはじめ、手紙やチラシ、写真などの、一般に紙面上に印刷を施してある形態のもの全てを指し、出版物のページを表示装置の画面上に表示するとは、そのような形態のページを画面上に表示するという意味である。
【００２１】
次に、カタログやパンフレットあるいは本などの出版物には、文字による印刷部分（テキスト部分）のほか、商品写真や挿入図あるいは挿絵など、多くの画像が貼り込まれていることが少なくない。こうした出版物を電子化する際には、テキスト部分と画像部分とを、それぞれテキストデータ及び画像データとに分離し、コンピュータ上にて、ページエリアにテキストデータと画像データとを適宜貼り込むことにより、ページレイアウトを作成することにより行なわれる。こうした手法は、デスクトップパブリッシング（ＤＴＰ）として既に周知のものとなっている。
【００２２】
しかし、このようなＤＴＰにより作成されたページデータは、ページ、画像及びテキストが全て別データとして用意され、合成されたものであるから、これを拡大表示に用いようとすると、ページ拡大、画像拡大及びテキスト拡大の３つのステップの拡大処理と、さらに拡大後の画像とテキストとを拡大後のページ上に改めて貼り付ける処理が必要となる。その結果、能力の低いＣＰＵにおいては拡大処理全体の完了に非常な長時間を要する問題が生ずる。例えば拡大コマンドを実行すると、拡大前のページが一旦完全に姿を消し、しばらくの空白を置いて拡大画像がページ上にゆっくりと再描画され、さらにテキストがさみだれ的に貼り付けされる、というように、一連の表示ステップが目で追跡可能な程度の速さでしか行なわれなくなることも珍しくない。こうした現象はユーザに十分すぎるほどのフラストレーションを与え、荒んだ精神状態をもたらすことにつながる。
【００２３】
こうした不具合を解消するために、第一倍率画像は、貼り付け画像領域と該貼り付け画像領域以外の周囲ページ領域とが一体不可分となったページ画像とすることができる。また、第二倍率画像データは、貼り付け画像領域の区画線とは無関係に定められた分割線により該ページ画像を第二倍率セグメントに等分割したものとすることができ、第一倍率画像をなすページ画像は、対応するページの分割前の第二倍率画像データを、第一倍率となるようにピクセル変換することにより作成されたものとすることができる。つまり、画像、ページあるいはテキストの独立したデータ構造を引きずったものとするのではなく、貼り付け画像領域と該貼り付け画像領域以外の周囲ページ領域とを、初めから一体不可分となったページ画像とする。すなわち、商品写真や挿入図あるいは挿絵などの本来の狭義の画像に、さらに、周囲ページ領域（例えば、ページ余白、文字や罫線あるいは背景画など）とを不可分に一体化させ、ページ全体を１枚の画像データとするのである。こうしたページ画像データは、例えば既にＤＴＰ等で作成したページデータを版下などの形でハードコピー出力し、これをスキャナにより取り込んでビットマップあるいはＪＰＥＧなどの圧縮画像データとすることにより作成できる。また、データ合成形式によるページデータを、コンピュータ上でラスタライジングして、ビットマップあるいはＪＰＥＧなどの単一のページ画像データに変換してもよい。
【００２４】
そして、拡大表示に際しては、倍率レベル毎にこのようなページ画像データ（第一倍率画像データあるいは第二倍率画像データ）を用意しておけばよく、貼り付け画像領域と周囲ページ領域とを個別に拡大する処理や、それらを合成する処理も不要となるので、処理負担を大幅に軽減でき、拡大表示を極めて迅速かつスムーズに行なうことができる。また、第一倍率画像をなすページ画像は、対応するページの分割前の第二倍率画像データを、第一倍率となるようにピクセル変換することにより作成されたものであるので、解像度別に一から画像データを作成する必要がないので経済的である。さらに、第二倍率画像データをなすページ画像データを第二倍率セグメントに区画する際には、貼り付け画像領域の位置を気にすることなく区画線を設定でき、例えば貼り付け画像領域の中を区画線が横切ることがあっても一向に差し支えない。すなわち、貼り付け画像領域を分断するような第二倍率セグメントが存在していても、拡大表示用メモリ内にこれを表示準備画像データとして格納しておくことで、前述の方式により切れ目のないスクロールが問題なく実施可能であるからである。その結果、、ページ画像データに画一的な分割処理を施すだけで第二倍率画像データを簡単に作成できる利点を生ずる。
【００２５】
本発明の画像表示システムでは、第一倍率画像データ記憶部は、ブック形式の出版物の各ページ画像のデータを第一倍率画像データとして記憶するものとすることができる。この場合、第一倍率画像表示制御手段は、出版物の２ページ分の見開きページ画像のデータを、表示装置のページ表示領域に表示するためにロードする現在表示メモリと、見開き２ページの下に隠されたページ画像であって、ページめくりにより現在表示中のページの前又は次に現れる都合４ページ分の見開きページ画像をロードする表示準備メモリと、現在表示中の見開きページ画像をなす一方のページを第一被めくりページとして、該第一被めくりページに対するめくり表示操作を指示するページめくり指示手段と、ページめくりの指示があったとき、現在表示メモリに、表示準備メモリ内の、めくり後の表示に係る見開きページ画像のデータをリロードするとともに、貼り付け画像領域と該貼り付け画像領域以外の周囲ページ領域との区別なく一括して、第一被めくりページのページ画像データをページめくりの進行に伴い、めくり方向においてのみ縮小比率が漸増するように順次変形する一方、該第一被めくりページが隠れた後は、該第一被めくりページの裏面側に存在する第二被めくりページのページ画像データを、めくり方向においてのみ縮小比率が漸減するように順次変形して、一連のページめくりアニメーション用コマ送りページ画像データを作成し、そのページめくりアニメーション用コマ送りページ画像データに基づいて、第一及び第二被めくりページが徐々にめくれる様子を表すページめくりアニメーションを、ページ表示領域に表示するページめくりアニメーション表示制御手段と、を含むものとして構成することができる。
【００２６】
該構成では、ブック形式の出版物のページをめくるアニメーション機能を備えることにより、ユーザは実際にブック形式の出版物を見ている感覚を得られ、また拡大ウィンドウを用いて拡大画像を見ることができれば、ブック形式の出版物をルーペで拡大して見ているような操作感が得られる。また、現在表示中のページの前又は次に現れる都合４ページ分の見開きページの画像データを予め表示準備メモリ内に保持しているので、前後どちらのページめくりの際にも、表示するページ画像データの素早くスムーズな切換えが可能である。さらに、このようなページめくりが可能なブック形式であれば、多数の画像を２ページづつ表示して、効率よく次々とページ画像を閲覧することが可能となる。
【００２７】
また、本発明の画像表示システムにおいては、ページめくりの際に、被めくりページのページ画像データをめくり方向においてのみ縮小比率が漸増又は漸減するように順次変形してページめくりアニメーションを表示する。このようにページ画像をめくり方向においてのみ拡大・縮小する二次元的な処理は、実際の本のページがめくれるようにページめくり方向及びその垂直方向のページ画像の変形を考慮した三次元的な処理と比べて、処理負担が軽く、その上、ユーザが得られるページめくりの視覚的効果は、該三次元的な処理のものと比べて遜色がないものである。そして、ページ画像を貼り付け画像領域と周囲ページ領域とが一体不可分となったものとしておくことで、ページ全体の縮小・拡大をピクセルの間引き等により一括して行なうことができる。その結果、貼り付け画像領域と周囲ページ領域とを、個別に縮小して合成する面倒な画像処理も一切不要となり、ページめくりアニメーション処理の負荷も大幅に軽減できる。
【００２８】
この場合、前述の画像ダウンロード制御手段を設ける場合は、ページめくりの指示があったとき、ページめくり後に見開き表示されるページの前又は次に現れる都合４ページ分のページ画像データのうち、現在表示メモリと表示準備メモリとのいずれにもロードされていないもののみ、データサーバからダウンロードするものとして、画像ダウンロード制御手段を構成することができる。該処理は、ページめくり後に見開き表示されるページの前又は次に現れる都合４ページ分のページ画像データのうち、新たに必要となるものだけを表示準備メモリにロードするので効率的であり、次のページめくりに素早く備えることが可能になる。
【００２９】
拡大ウィンドウは、見開き表示される２つのページ画像にまたがってドラッグ移動可能とすることができる。そして、それら２つのページ画像にまたがるように拡大ウィンドウの位置が設定されているとき、拡大表示用メモリには、拡大ウィンドウの位置に応じて、それら２つのページ画像から必要な第二倍率セグメントが、互いに拡大表示用メモリの領域を補完するようにロードされ、当該ロードされた２つのページ画像に対応する第二倍率セグメントに基づき、拡大ウィンドウ内に２ページにまたがる第二倍率画像を表示するように構成することができる。これにより、拡大ウィンドウには、表示されている見開き２ページのそれぞれに属する第二倍率画像セグメントが結合して表示されるので、ユーザには、本来別のページ画像に属する２枚の第二倍率セグメントが、拡大ウィンドウ内にてあたかも１枚の拡大画像であるかのごとく、連続的に繋がっているように見える。したがってユーザは、表示されている見開き２ページを横断する形で、ルーペに相当する拡大ウィンドウをドラッグ移動させることができる。つまり、手に入れた本（ブック）をルーペで拡大するリアル感を一層向上させることができる。
【００３０】
本発明にて採用する出版物は、例えばカタログブックとすることができ、貼り付け画像領域はカタログブックに掲載された商品の画像領域とすることができる。このようにカタログブック形式にすることにより、ページ画像上には商品の画像領域が形成される。そして、拡大ウィンドウを用いれば、商品毎にそれを拡大して細かなところまで観察できるので、購買の判断を下しやすくなる。また、従来のインターネットショッピングのホームページなどでは、サムネイルをいちいちクリックしないと画像の拡大ができなかった。しかし、本発明を電子的なカタログブックに適用すれば、開いたカタログブックのページ上で拡大ウィンドウ（ルーペ）を自由に移動させながら、その拡大ウィンドウ内に好きな商品を思いのままに拡大表示させることができる。すなわち、電子カタログブックの閲覧を、紙のカタログブックの閲覧とほとんど同感覚で、ルーペによりテンポよく拡大して見ることができる。閲覧に手間や時間がかかれば、ユーザの購買意欲はそれだけでも大きくそがれてしまうが、本発明の採用により、閲覧時の余分なフラストレーションがたまらなくなる。しかも紙のカタログと違って、不要になったカタログが家中に散乱したり蓄積することもなく、古紙廃棄量の削減と紙資源の節約にも大いに寄与する。その結果、ユーザの購買意欲向上と環境資源問題の解決とを一挙に図ることができ、来るべき時代の経済活性化に多大な貢献をもたらすことができる。
【００３１】
この場合、前述のデータサーバを用いる場合は、カタログブックに形成された商品のオンラインショッピングサーバを兼ねるものとすることができる。また、端末の表示装置に表示されるカタログブックのページ画像上には、オンラインショッピング用の付加機能リンクボタンが設定・表示することができる。そして、端末からの該付加機能リンクボタンの操作信号を契機として、データサーバと端末との間でオンラインショッピングのための情報通信を行なうことができる。このようにカタログブックのページ画像上に、オンラインショッピング用の付加機能リンクボタンが設定・表示されていれば、ユーザはカタログブックを閲覧し気に入った商品があれば、電話又は郵送による注文等の面倒な手続を必要とせず、印刷物そのものがなくても、その場で手軽にクリック一つで商品の購入注文することができる。
【００３２】
また、端末の表示装置に表示されるカタログブックのページ画像上に、商品の画像領域と対応付けて立体表示リンクボタンを設定・表示することもできる。この場合、データサーバには、カメラと商品との相対撮影角度を予め定められた方向に変化させながらコマ撮り撮影された画像データの組であり、その撮影角度順に切換え表示の時系列的順序が定められてなる商品立体表示用画像データを記憶しておくことができる。そして、端末において立体表示リンクボタンが操作されるに伴い、データサーバから対応する商品の商品立体表示用画像データを端末にダウンロードし、該端末の表示装置上において同一の画像貼り込み領域内に、商品立体表示用画像データを、時系列的順序に従い自動的に順次切換え表示させることにより、商品の擬似立体画像を表示させるようにすることができる。
【００３３】
上記のように、画像データの組を切換え表示すると、画像切換え相対撮影角度の変化方向に対応して、被写体（カメラ）が回転しているアニメーションが再生され、平面的な画像の切換えを行っているにも拘わらず、被写体の立体的な情報を得ることができる。カタログの場合、興味のある商品を回転させて見ることができるようになり、気になる部分をすべての角度から品定めできるようになる。このような機能は、例えばブックやリーフレット形式の紙カタログでは決して実現できない機能であるといえる。
【００３４】
拡大ウィンドウは、形態及び／又は寸法の異なる複数種類のものを用意しておくことができ、それら複数の拡大ウィンドウから所望のものを選択する拡大ウィンドウ選択手段を設けることができる。このように形態及び／又は寸法の異なる複数種類の拡大ウィンドウを用意することで、例えばページ画像に文字が横書きで書かれているならば横長の拡大ウィンドウを用いて文を読み易くするなど（縦書きの場合は、その逆）、様々な用途に合わせてユーザが複数種類の拡大ウィンドウを使い分けることができる。さらに、拡大ウィンドウの寸法を変更可能に設定する拡大ウィンドウ寸法設定・変更手段を有するように拡大ウィンドウを構成すれば、さらに細かくユーザの用途に合わせた拡大ウィンドウを設定できる。
【００３５】
【発明の実施形態】
以下、本発明の実施の形態を、インターネットを利用して配信される電子カタログブックへの適用を例に取り、添付の図面を参照して説明する。
図１は、本発明の画像表示システム１（以下、単にシステム１ともいう）の全体構成を示すブロック図である。システム１は、インターネット等の通信ネットワーク２、該通信ネットワーク２を介して接続されるＷＥＢサーバ（データサーバ）３、ユーザのパーソナルコンピュータ等にて構成される端末５とを含み、インターネットやイントラネット、パソコン通信網、公衆電話回線網、ＬＡＮ等からなる通信ネットワーク２（本実施形態ではインターネットである）を介してＷＥＢサーバ３から端末５へ、画像データを配信するものである。なお、端末５はパーソナルコンピュータに限らず、ＰＤＡ（Ｐｅｒｓｏｎａｌ　Ｄｉｇｉｔａｌ　Ａｓｓｉｓｔａｎｔ）、携帯電話端末によっても構成可能である。
【００３６】
図２は端末５の構成例であり、Ｉ／Ｏポート１１を備え、これにＣＰＵ１２、ＲＯＭ１３、ＲＡＭ１４、ハードディスクドライブ（ＨＤＤ）、ＣＤ／Ｒドライブ、ＤＶＤドライブ、ＭＯドライブ、フロッピーディスクドライブ（ＦＤＤ）等で構成された、ローカルボリュームをなす固定記憶装置２１、ネットワーク接続のための変復調部（モデム、ルータ、ＬＡＮボードなど）１５、キーボード、マウスその他のポインティングデバイスからなる入力部１６、モニタ１７、プリンタ１８、Ｄ／Ａ変換器１９及びこれにつながれるスピーカ１９等が接続されている。また、ＭＩＤＩデータによる音楽演奏を可能とするＭＩＤＩ音源２２と、圧縮動画及び音声を再生するためのデコーダ（本実施形態では、ＭＰＥＧデコーダ）２３も同様に接続されている。
【００３７】
ＲＡＭ１４は、ＣＰＵ１２のワークエリアとなるもので、ＣＰＵ１２が実行する種々のプログラムの実行メモリと、そのプログラム実行時に使用する種々のデータメモリ（キャッシュメモリを含む）のエリアが形成されている。これらメモリにロードされるプログラムは、前記したローカルボリューム２１にインストールされているものと、ＷＥＢサーバ３からダウンロードされるものとがある。以下、各メモリの意味について説明する。
【００３８】
まず、ＯＳ実行メモリは、端末５のオペレーティングシステムソフトウェア（ＯＳ：本実施形態ではＷｉｎｄｏｗｓ（米国Ｍｉｃｒｏｓｏｆｔ社の商標名；Ｗｉｎｄｏｗｓ９８、　Ｗｉｎｄｏｗｓ２０００等、種々のバージョンが存在する）を使用している）を実行するためのワークメモリである。また、インターネットＷＥＢブラウザ（以下、単にＷＥＢブラウザという）上で動作する種々のプログラムは、公知のプログラミング言語であるＪａｖａ（米国Ｓｕｎ　Ｍｉｃｒｏｓｙｓｔｅｍｓ社の商標名）で記述されることが多いため、そのＪａｖａの動作環境を前記ＯＳ上にて実現するためのＪａｖａ仮想マシンプログラムの実行メモリ（仮想マシン実行メモリ）が形成されている。このＪａｖａ仮想マシンをインストールすることにより、ＯＳ種別など、プラットフォームに依存せず、Ｊａｖａによるプログラムを動作させることができる。
【００３９】
そして、Ｊａｖａ実行メモリは、Ｊａｖａで記述されたプログラムを実行するためのものである。Ｊａｖａのプログラムは、動作上の制限が少ないアプリケーション・クラスにて作成されたものと、より制限的なアプレット・クラスにて作成されたもの（以下、単にアプレットという）との２種類があり、本実施形態では、前記した本発明の画像表示システムを実現するＷＥＢブラウザ（以下、このようなＷＥＢブラウザを画像ビューアという）のプログラムの一部を、このアプレットにより作成する。そして、Ｊａｖａ実行メモリ内には、このアプレットの実行メモリが形成されている。
【００４０】
本発明のように、通信ネットワークを用いた開放性の高いデータ配信形態を利用する場合、その利便性と表裏一体の関係で、コンピュータウィルスのような悪質な動作をするプログラムの被害を受けやすくなるという、セキュリティ上のリスクも高くなる。プログラムを例えば上記Ｊａｖａのアプレットとして記述しておくと、前記Ｊａｖａ仮想マシン上にてこれが実行される場合に、画像ビューアを起動している間においてのみ、端末のワークメモリ内に読み込まれて実行され、かつ、画像ビューアの終了に伴い、ワークメモリから消去されるものとなる。すなわち、該プログラムは、その起動している画像ビューアにおいてのみ有効なプログラムとして極めて制限された動作を行い、画像ビューアを終了するとワークメモリから消去されてしまうので、仮にウィルスのような悪質な動作をするものであっても、ＷＥＢブラウザを終了させることさえできれば、その動作を停止し、かつ消滅させることができるので、より安全な通信ネットワークによるデータ配信が可能となる。
【００４１】
また、Ｊａｖａアプレット等の採用により、画像ビューアに組み込まれたプログラムを、該プログラムの実行中において、端末のローカルボリュームへのアクセス、データサーバ３の利用許可されているディレクトリ以外の場所へのアクセス、及びデータサーバ３側に置かれているファイル書き換えを禁止した状態にて実行させることができる（いわゆる、サンドボックス内での動作）。これにより、アプレットの動作中は、データサーバ３へのアクセス及びファイルの書き換えと、端末に直接つながっている記憶装置２１、つまりローカルボリュームへのデータ読み書きを含めたアクセスが一切禁じられるので、コンピュータウィルス等によるデータ破壊活動を封じることができる。こうしたサンドボックス環境は、前記仮想マシン上で実行されるＪａｖａのセキュリティマネージャ（公知）と称されるモジュールにより実現される。
【００４２】
図２に示すように、上記のアプレットには、具体的には、実行するべきアプレットを特定するアプレット特定データ（アプレット・クラス名）、ＷＥＢサーバ３から画像データをダウンロードしようとする際には、そのＷＥＢサーバ３内の画像データ所在場所を表すアドレス名が記述されたダウンロード制御モジュールが備えられており、画像ビューアの起動中において、データサーバ内の特定領域からのみ画像データのダウンロードが許可されるようになっている。また、データ処理モジュールについては後述する。
【００４３】
また、端末５のＲＡＭ１４内には、インターネット２のホームページを閲覧するための、公知のＷＥＢブラウザソフト（例えば、Ｉｎｔｅｒｎｅｔ　Ｅｘｐｌｏｒｅｒ（Ｍｉｃｒｏｓｏｆｔ社の商標名）あるいはＮｅｔｓｃａｐｅ　Ｎａｖｉｇａｔｏｒ（米国Ｎｅｔｓｃａｐｅ　Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ社の商標名））の実行メモリが形成されている。該実行メモリ内には、ＷＥＢサイト特定データ（例えばＵＲＬアドレス）のメモリ、ＷＥＢサーバ３が提供するホームページに接続するための送受信制御モジュール、ＷＥＢページ（ホームページ）の記述言語であるハイパーテキスト言語、例えばＷＷＷ（Ｗｏｒｌｄ　Ｗｉｄｅ　Ｗｅｂ）のページ記述言語である公知のＨＴＭＬ（Ｈｙｐｅｒ　Ｔｅｘｔ　Ｍａｒｋｕｐ　Ｌａｎｇｕａｇｅ）を記述するＨＴＭＬ文書を解読するためのＨＴＭＬ解読モジュール等、各プログラムの実行エリアが形成され、さらに、受信したＷＥＢページのデータを格納するＷＥＢページ受信メモリ、同じく、表示すべきＷＥＢページの画像データを格納するＷＥＢページ表示メモリ、リンクボタンのクリックにより、リンク先のページにジャンプする制御を行うためのリンク制御モジュール（ＨＴＭＬの体系に組み込まれているものである）の実行エリア、さらに、前記したスピーカ２０による音声出力を司るための音声出力制御プログラムの実行メモリ、受信したＭＰＥＧ音声ストリームなどの音声データ格納メモリ、同じくＭＩＤＩ（Ｍｕｓｉｃａｌ　Ｉｎｓｔｒｕｍｅｎｔ　Ｄｉｇｉｔａｌ　Ｉｎｔｅｒｆａｃｅ）により記述された音楽データ（ＭＩＤＩデータ）を格納するＭＩＤＩデータメモリ（ＭＩＤＩ音源２２によりデジタル音声データに変換される）、及びＭＩＤＩデータの実行により音楽演奏を行なうシーケンサソフトの実行メモリなどが形成されている。なお、本実施形態の画像表示システムのソフトウェア部（画像ビューア）においては、ＷＥＢブラウザ上で画像データをカタログ形式で表示するために、ＷＥＢページはＨＴＭＬ言語により作成されており、そして前述のＪａｖａは、そのＷＥＢブラウザに組み込まれたＪａｖａインタープリタにより実行されるようになっており、Ｊａｖａで記述されたアプレットを実行する際も、一旦ＷＥＢブラウザが立ち上がってから、そのＷＥＢブラウザ上にて実行される形式とされている。ただし、このようなソフトウェア部は端末５側のＣＰＵ１２に処理されることにより役割を果たすものである。
【００４４】
次に、図３は、ＷＥＢサーバ３の構成例であり、Ｉ／Ｏポート４０を備え、これにＣＰＵ４１、ＲＯＭ４２、ＲＡＭ４３、ハードディスクドライブ（ＨＤＤ）等で構成された固定記憶装置４８、ネットワーク接続のための変復調部（モデム、ルータ、ＬＡＮボードなど）４４、入力部４５、モニタ４６、プリンタ４７等が接続されている。記憶装置４８には、インターネット上にアップロードするＷＥＢページのファイルデータ、ここではＪａｖａで記述されたアプレット（アドレスが付与されている）を含むＷＥＢページのファイルデータが格納されている。また、提供される音楽等の各アイテムも、アイテム特定データとなるアドレスを付与して同様に格納されている。さらに、配信される画像データは、画像データベースの形でアドレスを付与して格納されている。
【００４５】
他方、ＲＡＭ４３には、データサーバ側のＯＳ実行メモリ（Ｊａｖａの実行を行なう場合は、端末５と同様にＪａｖａ仮想マシンがインストールされる）、ＷＥＢページをアップロードするためのＷＥＢページ配信プログラムの実行メモリが形成されている。
【００４６】
なお、本実施形態において、端末５のモニタ１７は前記表示装置に該当し、入力部１６は、前記拡大ウィンドウのドラッグ移動の指令手段や、前記ページめくり指示手段等の本発明の画像表示システムに外部から指令を行なう手段に該当する。また、前記第一、第二及び第三画像データ記憶部は、本実施例ではＷＥＢサーバ３（データサーバともいう）側の記憶装置４８に該当するが、端末５側のＨＤＤやＣＤ−Ｒドライブ（の中のＣＤ−ＲＯＭ媒体）等の記憶装置２１であっても構わない。ただし、その場合はＪａｖａで記述されたアプレット（アドレスが付与されている）を含むＷＥＢページのファイルデータも記憶装置２１に記憶され、画像表示システムは、ＷＥＢサーバ３及び通信ネットワーク２を含まず、端末５のみで形成されることを条件とする。このように画像表示システムを端末５単独で形成するには、前記アプレットを含むＷＥＢページのファイルデータを、通信ネットワーク２を介してＷＥＢサーバ３から端末５へダウンロードして記憶装置２１に保持させることによって形成することや、若しくはあらかじめ記憶装置２１またはＲＯＭ１３に保持させておくことによって形成するといった種々の形態が考えられる。
【００４７】
さらに、前記拡大表示メモリ、前記現在表示メモリ及び前記表示準備メモリは、端末５側のＲＡＭ１４中の画像表示メモリに該当する。前記第一倍率画像表示制御手段、前記アニメーション表示制御手段、拡大ウィンドウ設定手段、拡大表示制御手段及び画像ダウンロード制御手段は、本実施形態の画像表示システムのソフトウェア部（：すなわち、画像表示システムの機能実現のための本発明のプログラム）に該当する。詳しくは、ＨＴＭＬで記述されたＷＥＢファイルや、それに組み込まれるＪａｖａで記述されたアプレットや、それらにより起動するＷＥＢブラウザである。該画像ビューアのソフトウェアは、例えばＣＤ−ＲＯＭやＤＶＤなどの記憶媒体に、コンピュータ読み出し可能に記憶された形で供給されする。そして、端末５において、該媒体の読み出し機能を有した読取装置（ＣＤ−ＲＯＭドライブ、あるいはＤＶＤドライブ）により読み取られ、例えばＨＤＤ等の記憶装置２１にインストールされる。なお、該プログラムは、インターネットなどの通信ネットワークを介して、プログラムサーバから端末５にダウンロードすることによりインストールしてもよい。
【００４８】
本実施形態の画像データは、以下のような階層構造を有するものとして構成されている。すなわち、図４（ａ）に示すように、画像データの要部は、１枚の画像を分割した複数枚の基本画像セグメントからなり、各々ピクセルデータの集合にて画像を記述した基本分割画像データＬＶ３（第三倍率セグメント）とされる。該基本分割画像データＬＶ３は、図４（ｂ）に示されるように、基本画像セグメントＬＶ３−１、ＬＶ３−２‥を単位として、ＷＥＢサーバ３の画像データベース（図３）に個別に保存されている。また、基本分割画像データＬＶ３には、図４（ｃ）に示すように、その基本分割画像データＬＶ３から一定比率にてピクセルを減じることで生成された、基本分割画像データＬＶ３よりも低解像度で、かつ分割数の少ない分割画像データＬＶ２（第二倍率セグメント）、及びＬＶ２よりも低解像度で、かつ分割されていない画像データＬＶ１（第一倍率画像）が随伴しており、全体として階層構造画像データが構築されている。
【００４９】
そして、本発明の実施形態では、モニタ１７に表示される第一倍率画像の一部を、それよりも高解像度の第二倍率画像により拡大表示するために、第一倍率画像の表示領域よりも小さい拡大ウィンドウを、第一倍率画像上にて連続的にドラッグ移動可能に設定する。拡大表示方法を説明すると（ここでは、拡大ウィンドウ、被拡大領域及び拡大表示領域との関係についてのみ記述し、詳細な拡大制御については後述する）、図５に示すように、モニタ１７に表示される第一倍率画像を被拡大画像として、その上に拡大ウィンドウと、該拡大ウィンドウ（が区画する被区画第一倍率画像部分）よりも小さい被拡大部分（被拡大第一倍率画像部分）とが設定される（図５（ａ））。拡大ウィンドウの表示領域と被拡大部分とは幾何学的に相似の関係にあり、その相似に等しい倍率にて第一倍率画像の被拡大部分が、第二倍率画像データを用いて拡大ウィンドウの表示領域一杯に拡大表示される。
【００５０】
該拡大ウィンドウは、端末５の入力部１６（ここではマウスか、あるいは他のポインティングデバイス）への操作入力と連動して画面上をドラッグ移動する。また、拡大ウィンドウの表示領域内には、第一倍率画像の被被拡大部分が包含されている（本実施形態では、拡大ウィンドウの表示領域と第一倍率画像の被被拡大部分との幾何学的重心位置が一致するように定めてある）。そして、第一倍率画像上に被拡大部分が設定されると、複数の画像セグメントより構成される第二倍率セグメント上には前記被拡大部分に対応する拡大表示領域が設定され（図５（ｂ））、そしてその拡大表示領域が、第一倍率画像上に設定された拡大ウィンドウ内に拡大画像として表示される（図５（ｃ））。なお、実際にユーザから確認できるのは図５（ｃ）の形態であり、図５（ａ）、（ｂ）は透視図又はイメージ図である。
【００５１】
また、拡大ウィンドウ内には、第二倍率セグメントによる画像から、これよりもさらに高倍率であり、かつ第二倍率セグメントのそれぞれに対応する複数枚のセグメントの組から構成される第三倍率セグメント（ＬＶ３）による画像へ切換えることが可能となっている。この切換えは、マウス等の入力部１６からの指令により行われる。例えば、図１１のように倍率変換ボタンを複数設けて、そこにマウスによりポインタを合わせ、クリックすることにより切換える方法であっても良いし、またボタンを設けなくても任意の位置でマウスをクリックするだけで切換わるようにしても良い。また、拡大倍率を外部入力により所望の値に設定可能なように構成することもできる。このような多段階的若しくは連続的な拡大倍率の設定は、モニタ１７への表示を司るメモリエリア（ビデオＲＡＭ等）内において、拡大画像として表示される倍率（階層）の画像を、入力された拡大倍率設定値に応じて拡大若しくは縮小させて表示する処理を行うことで実現可能である。なおこの場合、被拡大領域及びそれに対応する拡大表示領域の大きさも、設定された拡大倍率値に応じて同時に変更させる。つまり、拡大画像の倍率の画像よりも、拡大倍率を上げたい場合には、被拡大領域及びそれに対応する拡大表示領域を小さくし、一方、拡大倍率を下げたい場合にはその逆の処理を行う。
【００５２】
このような場合、被拡大領域及び拡大表示領域の設定は、図１２（ａ）のように、拡大ウィンドウ内に表示されている第二倍率の画像上に、さらに拡大表示したい画像領域（被拡大領域）を指定することにより、つまり、第二倍率セグメント上で被拡大領域を指定することにより行なうことができる。この場合、第三倍率セグメント上でその指定された画像領域に対応する拡大表示領域が設定され、そしてその拡大表示領域が、第一倍率画像上に設定された拡大ウィンドウ内に、第三倍率による拡大画像として表示される。詳しくは、拡大ウィンドウの表示領域内に領域の過不足なく表示するために、被拡大第２倍率画像部分を、拡大ウィンドウの表示領域に対する寸法が、第２倍率画像の第３倍率画像に対する相対倍率比に等しい相似形をなすものとして設定する。また、別報として、図１２（ｂ）のように、被拡大領域は常に第一倍率画像上に設定して、拡大ウィンドウ内に表示される画像セグメントのレベルのみを切換えるようにすることもできる。この方法によると、常に第一倍率画像上に被拡大領域が設定されるので、拡大表示領域が第二倍率画像から第三倍率画像へ切換わる時に被拡大領域を小さくする必要がある。詳しくは、拡大ウィンドウの表示領域内に領域の過不足なく表示するために、前述の図５と同様に拡大ウィンドウの表示領域と被拡大部分とは幾何学的に相似の関係にあり、その相似に等しい倍率にて第一倍率画像の被拡大部分が、第三倍率画像データを用いて拡大ウィンドウの表示領域一杯に拡大表示される。なお、以上の記述は拡大ウィンドウ内に表示する画像セグメントのレベルを、第二倍率セグメント（ＬＶ２）から第三倍率セグメント（ＬＶ３）に切換える場合についてのものであるが、これは逆の切換えについても成立つものである。
【００５３】
以下に、拡大表示制御について詳細に説明する。拡大表示制御は、アプレットにて記述されたプログラムが司る。そして、この拡大表示に必要な拡大表示用セグメント（第二又は第三倍率セグメント）は、該プログラムにより、ＷＥＢサーバ３から選択的にダウンロードされる。なお、ダウンロードは画像セグメント単位で行なわれる。該プログラムは、ＲＡＭ１４内の画像表示メモリ（の中の拡大表示用メモリ）を利用して次のような形態でダウンロード及び拡大画像表示を行なう。まず、図６（ａ）のように、同じレベルに属する複数のセグメントからなる画像セグメントはアドレスを振られ、画像セグメントアドレス空間を形成している。ここでそれを、仮に第二倍率の画像セグメントによるものとする。実際には第二倍率のセグメントは、図６で示すよりも分割数が少ないが、説明のために分割数を増やしている。また、図６の画像セグメントの集合は後述するブック形式の見開き２ページのそれぞれに属する画像セグメントの集合を意味するものである。拡大表示用メモリは、該画像セグメントアドレス空間において、前述の拡大ウィンドウ内に拡大画像として表示される拡大表示領域よりも広い画像領域をカバーするメモリ領域を有する。具体的には、第一倍率画像に対し拡大ウィンドウを所望の位置にマウスにより位置決めすると、該拡大ウィンドウ内に被拡大部分が設定される。前記プログラムは、拡大ウィンドウ内に表示すべき第一倍率画像の被拡大部分に対応する第二倍率セグメントと、その拡大ウィンドウの外に続く表示準備画像データをなす第二倍率セグメントとからなる第二倍率画像データの一部をなす拡大出力データを、ＷＥＢサーバ３からダウンロードして拡大表示用メモリ内にロードする。こうようにして拡大表示用メモリ空間が、画像セグメントアドレス空間内に形成される。マウスを操作すると拡大ウィンドウは第一倍率画像上をドラッグ移動し、それに伴って拡大表示用メモリ空間内で拡大表示領域も移動する。その際、拡大表示用メモリに保持されている拡大表示用メモリ空間において、拡大表示領域の周囲は、第二倍率セグメントよりなる拡大準備画像データに取り囲まれているので、拡大ウィンドウに表示される拡大画像（第二倍率画像）は、この拡大準備画像データを利用して切れ目なくスクロール表示が可能である。
【００５４】
そして、図６（ｂ）のように、その移動方向においてポインタが更新限界位置に達すると、準備画像データとなるべき新たな第二倍率セグメントを、メモリシフトを行ないつつ拡大ウィンドウの移動方向前方側に補充することにより拡大表示用メモリのデータロード内容を更新する。この補充された第二倍率セグメントにより、拡大表示用メモリが一度にカバーする画像領域を超えて拡大ウィンドウをドラッグ移動させた場合でも、該拡大ウィンドウ内に、第二倍率画像を切れ目なくスクロール表示させることができる。図６の実施形態では、更新限界位置は破線で示すごとく、画像セグメントの外縁よりも内側に一定ピクセル分だけ内側に位置するように（例えば画像セグメントの外縁と拡大表示領域の外縁とが一致するように）設定されている。
【００５５】
具体的には、図６（ｂ）のように、更新限界位置は現在ポインタの位置する画像セグメント（以下、カレントセグメントという）の内側に長方形枠状に設定することができる。そして、該長方形状の拡大表示用メモリを構成する４辺のうち、いずれかの１辺にポインタが達すると、図６（ｃ）のように、ポインタが到達した更新限界位置長方形枠の１辺側にて、カレントセグメントに１セグメントを隔てて隣接する新たな画像セグメントを補充し、拡大表示用メモリを更新する。なお、画像セグメント拡大表示用メモリ内に上記１辺の方向に複数個（図６では３個）の画像セグメントが配列している場合は、カレントセグメントに１セグメントを隔てて隣接する１個の画像セグメントを含む、該方向に配列する複数個の画像セグメントを単位として補充・更新がなされる。他方、更新限界位置長方形枠のポインタが到達したのと反対側の１辺側においては、同数の画像セグメントが拡大表示用メモリより消去され、上記画像セグメントの補充のために、メモリシフトが行なわれる。このメモリシフトに伴い、拡大表示ウィンドウ及び更新限界位置は、シフト後の画像セグメントに追従して拡大表示用メモリ内を移動する。
【００５６】
こうして、拡大ウィンドウ（拡大表示領域）が隣の画像セグメント上に移ったときには、図６（ｄ）のように、すでに移動先の画像セグメントが拡大表示用メモリ空間の中心に位置することになるので、拡大ウィンドウ（拡大表示領域）の外側には常に不足なく表示準備画像データが予め存在していることになり、画像データをダウンロードする間をユーザに感じさせることなく、拡大ウィンドウ内に表示される画像を切れ目なくスクロール表示させることができる。ただし、以上に述べた更新限界位置に達したというのは、更新限界位置をポインタが画像セグメントの中心から外側に向う方向に達するという意味であり、画像セグメントの内側に向かうように達した場合はこれに該当せず、対応する処理はなされない。
【００５７】
なお、拡大ウィンドウ（拡大表示領域）が、画像セグメントアドレス空間において、複数の画像セグメントにまたがっている場合には、拡大ウィンドウの位置に応じて、それらの画像セグメントの拡大ウィンドウに対応する領域を結合することで、あたかも連続した画像のように拡大ウィンドウ内に拡大画像を表示することができる。また、図６の画像セグメントの集合は、後述するブック形式の見開き２ページのページ画像のそれぞれに対応する画像セグメントの集合、つまり、第２倍率画像を構成する画像セグメントの集合である。この場合、画像セグメントアドレス空間において、２つのページ画像は隣り合うもの、詳しくは、左ページ画像に属する画像セグメントのうちの右端のセグメントと、右ページ画像に属する画像セグメントのうちの左端のセグメントとは、画像セグメントアドレス空間において、隣接するセグメントであるので、属するページ画像が異なる複数の画像セグメントにおいても、前述と同様にあたかも連続した画像のように拡大ウィンドウ内に拡大画像を表示することができる。
【００５８】
なお、拡大ウィンドウは、図１９（ａ）に示すように、寸法の異なる複数種類のものを用意したり、図１９（ｂ）に示すように、形態の異なる複数種類のもの（例えば円状のウィンドウと方形のウィンドウ）を用意したりし、その中から所望のものを、例えばマウスによる選択ボタン（前者の場合、拡大ウィンドウサイズ変換ボタン、後者の場合、拡大ウィンドウ形状変換ボタン）のクリック等により、選択できるように構成することができる。さらに、図２０のように拡大ウィンドウサイズ変換入力部を設け、そこに数字を入れるなどして、拡大ウィンドウの寸法をユーザの思いのままに変更可能にすることができる。
【００５９】
図１３は本発明の実施形態の画像ビューアの一例である。該画像ビューアは、ブック形式で構成され、見開きの２ページに、カタログブックの２つのページ画像が左右に並んでいる。画像ビューアの上方には現在のページ数の表示、ページめくりボタン及びズーム選択ボタンが形成されている。また、画像ビューアはページサーチ機能も備えており、所望のページ番号が入力されることにより、現在のページからページジャンプして指定されたページを表示する。ページ画像は、全て同じ大きさで構成され、また前述のように分割前の第三倍率画像からピクセルを減ずることによって得られた、分割されていない第一倍率画像である。そして、図１４（ａ）に示すように、このようなページ画像を、前記拡大ウィンドウを用いて拡大表示して閲覧することができる。
【００６０】
この実施形態では、カタログブックを見開き形式で表示するため、第一倍率画像は、貼り付け画像領域と該貼り付け画像領域以外の周囲ページ領域とが一体不可分となったページ画像とされる。そして、図１３の左ページに概念的に示すように（図面が煩雑化するので、右ページについては表示を省略している）、第二倍率画像データは、貼り付け画像領域の区画線とは無関係に定められた分割線により該ページ画像を第二倍率セグメントに等分割したものとされる。このページ画像は、対応するページに分割前の第二倍率画像データを、第一倍率となるようにピクセル変換することにより（例えば、ピクセルを一定間隔で間引くことにより）作成されたものである。該ページ画像データは、例えば既にＤＴＰ等で作成したページデータを、版下などの形でハードコピー出力したものをスキャナにより取り込んで、静止画データに加工したもの（本実施形態では、ＪＰＥＧによる圧縮静止画データである。なお、ＤＴＰにより作成されたページデータを、コンピュータ上でラスタライジングして、ビットマップあるいはＪＰＥＧなどの単一のページ画像データに変換してもよい。
【００６１】
拡大ウィンドウは、見開き表示される２つのページ画像にまたがってドラッグ移動可能とされ、図１４（ｂ）に示すよう、それら２つのページ画像にまたがるように拡大ウィンドウの位置が設定されているとき、前記拡大表示用メモリには、拡大ウィンドウの位置に応じて、それら２つのページ画像から必要な第二倍率セグメントが、互いに拡大表示用メモリの領域を補完するようにロードされ、ロードされた２つのページ画像に対応する第二倍率セグメントに基づき、拡大ウィンドウ内にまたがる第二倍率画像を表示する。
【００６２】
前記画像ビューアは、複数のページ画像を持つブック形式で構成することができ、そのような場合、画像ビューアに付されている前記ページめくりボタンにより、ページをめくり、次々に画像を閲覧できる。本実施形態では、ページめくり機能を実現するために、画像ビューアは次のような構成を持つ。ＲＡＭ１４内の画像表示メモリ内には、ＷＥＢサーバ３からダウンロードした２ページ分の見開きページ画像のデータを、画像ビューアに表示するための現在表示メモリと、その見開き２ページの下に隠されたページ画像であって、ページめくりにより現在表示中のページの前又は次に現れる都合４ページ分の見開きページ画像をＷＥＢサーバからダウンロードし、保持する表示準備メモリとが形成されている。これにより、前後どちらのページめくりの際にも表示するページ画像データの素早い切換えが可能である。
【００６３】
また、前記ページめくりボタンをクリックすることにより、ページめくりの指示があったときは、現在表示メモリに、表示準備メモリ内の、めくり後の表示に係る見開きページ画像のデータをリロードするとともに、現在表示されている見開きの２ページ（図１５（ａ））のうち、めくられるページのページ画像をページめくりに伴い、めくり方向においてのみ縮小比率が漸増するように順次変形する（図１５（ｂ））一方、そのめくられるページが隠れた後は（図１５（ｃ））、そのめくられるページの裏面側に存在するページのページ画像を、めくり方向においてのみ縮小比率が漸減するように順次変形した後（図１５（ｃ））、次の見開き表示の２ページを表示するような（図１５（ｅ））、一連のページめくりアニメーション用コマ送りページ画像データを作成し、そのページめくりアニメーション用コマ送りページ画像データに基づいて、めくられるページ（表面と裏面）が徐々にめくれる様子を表すアニメーションを表示する。また、このようなページめくりアニメーションの表示と同時に、ページがめくれる音（めくり効果音）を端末５のスピーカ２０から出すようにすれば、ユーザはより臨場感溢れるページめくりを体感することが可能となる。なお、ページめくりは、現在表示ページが表示されて所定の時間が経過したら自動的に行われるような形態も存在し、前述のページめくり指示があった場合にページめくりを行う形態と切換え可能に構成することができる。これにより、閲覧するのにページをめくる手間を省くことができるし、また駅等の人の集まる場所に設置し、短い時間間隔でページめくりを行うことにより次々とページを表示させれば、広告としての効果も得られる。
【００６４】
アニメーション用コマ送りページ画像データは、縮小比率の異なるページ画像のアニメーション用コマの組であり、縮小比率の増加ないし減少の順に、それらのアニメーション用コマを切り替え表示することにより、ページめくりアニメーションの表示が可能である。なお、ページめくりアニメーションは、ページめくり前に見開き表示される２ページと、ページめくり後に見開き表示される２ページとの都合４ページ分のうち、めくり動作に関与しない２ページ分の画像を背景ページ画像として、ページめくりアニメーションを背景ページ画像に合成して表示する。めくりに関与しない、背後のページを、めくり中のページのアニメーション用コマと合成表示することで、よりリアルなページめくり表示が可能である。
【００６５】
また、ページめくりの指示があったときは、ページめくり後に見開き表示されるページの前又は次に現れる都合４ページ分のページ画像データのうち、現在表示メモリと表示準備メモリとのいずれにもロードされていないもののみ、ＷＥＢサーバ３からダウンロードする。
【００６６】
以下、本実施形態の画像表示システムを実現する画像表示制御の処理の流れについて、図７のフローチャートにより説明する。まず、Ｒ１ではブック形式の画像表示ウィンドウが設定され、Ｒ２で見開き表示される２ページの画像データ（計２ページ）を表示メモリ内へ、またＲ３で見開き表示されるページの前又は次に現れる都合４ページ分のページ画像データを表示準備メモリ内へダウンロードするようＷＥＢサーバ３に要求し、画像データをダウンロードし（Ｒ４）、見開きページを表示する（Ｒ５）。そして、Ｒ６で拡大表示指令を受けた場合は後述するＲ７の拡大表示ルーチンへと移る。拡大表示ルーチンが終了した場合、またはＲ６で拡大表示指令を受けなかった場合はＲ８に進む。Ｒ８において、ページめくりを受けた際には、次に表示される見開きページ画像の画像データを表示メモリ内へ移動し、現在表示されている見開きページ画像の画像データを表示準備メモリ内へ移動し、またそれらに該当しないページ、つまり表示準備メモリ内の画像データのうち次に表示される見開きページ画像に指定されなかった画像データ、を表示準備メモリ内から消去する。そしてＲ１１で、次に表示される見開きページの前後の画像ページのうち表示準備メモリ内に存在しないページ画像を表示準備メモリ内に要求し、Ｒ４に戻りダウンロードを行い、Ｒ５で見開きページ画像を表示する。以下、Ｒ４からＲ１１を経て（ただし、Ｒ６でページめくり指令が出された場合）Ｒ４に戻る処理が繰り返されることにより、ページめくり処理が順次進行する。
【００６７】
前記Ｒ６で拡大表示指令を受けた場合にはＲ７に進み、図８の拡大表示ルーチンに移る。まずＲ７１では、前記現在表示されている見開きページ画像上に拡大ウィンドウが設定される。そして、指定されたセグメントレベル（倍率）の画像セグメントにより構成されるセグメントアドレス空間のアドレス情報を読み込み、Ｒ７３及びＲ７４で拡大表示領域に対応する画像セグメント及び表示準備画像データをなす画像セグメントをＷＥＢサーバ３に要求し、Ｒ７５で画像セグメントを拡大表示用メモリへダウンロード、Ｒ７６で拡大ウィンドウ内に拡大画像を表示する。その後、Ｒ７７で入力部１６からの拡大ウィンドウ（ポインタ）のドラッグ移動指令の入力があった場合には、Ｒ７８に移り、後述する拡大ウィンドウの移動処理ルーチンに移る。また、Ｒ７９において、拡大ウィンドウ内に表示する画像セグメントのレベルを変更する指令が入力部１６から入力された場合には、画像セグメントのレベルを変更して（例えば、第二倍率から第三倍率へ）からＲ７２へ戻り、変更先のセグメントレベルのセグメントアドレス情報の読み込み処理を行い、そして、そのセグメントレベルにおいて、Ｒ７２〜７９までの前述と同様の拡大表示処理を行う。
【００６８】
以下、図９に示すＲ７８の拡大ウィンドウの移動処理ルーチンについて説明する。まずＲ７８１において、画像スクロール処理を行なう。これは、拡大ウィンドウのドラッグ移動に伴い、拡大表示用メモリ空間において、その移動方向に拡大表示領域を移動させるものである。そして、ポインタが移動により更新限界位置に到達するまで（つまり、Ｒ７８２でＹｅｓになるまで）、Ｒ７５に戻り（ただし、この場合では、ダウンロードするセグメントがないのでＲ７５は跳ばされることになる）、Ｒ７６で新たな拡大表示領域を拡大ウィンドウ内に表示し、Ｒ７８１の画像スクロール表示に戻るというループを、ポインタが移動している限り継続する。そして、このループを続ける中で、ポインタが更新限界位置に達したときには（すなわち、Ｒ７８２でＹｅｓの場合は）、拡大ウィンドウの移動方向の新たな画像セグメントを補充するように拡大表示用メモリを更新するため（図６に説明）、拡大表示用メモリ空間において拡大ウィンドウ移動方向の後方側の画像セグメントを消去し、新たな画像セグメントをＷＥＢサーバ３に要求する。そして、Ｒ６５に戻り、拡大表示用メモリへ新たな画像セグメントをダウンロードし、前記ループに戻る。こうして、以上のような処理が、拡大ウィンドウが移動しつづける限り、続けられることになる。このメモリの更新処理は、表示画面におけるフレーム切り替え処理のインターバルを利用して行なうと、スクロールの途切れが目立ちにくく、表示品質を高めることができる。
【００６９】
以下、上記システム１を用いた本発明の画像表示システムの処理の流れについて説明する。図１０は、端末５とＷＥＢサーバ３とにおける各処理の流れの一例を、両者の間でのデータのやり取りとともに並列に示したフローチャートである。まず、端末５側ではＷＥＢブラウザを起動してインターネットに接続し（Ｔ１）、指定されたアドレスにより、ＷＥＢサーバ３が提供するＷＥＢページにアクセスする（Ｔ２）。ＷＥＢサーバ３ではこれを受け（Ｓ１）、ＷＥＢファイルを端末５に転送する（Ｓ２）。端末５では、受信したＷＥＢファイルに基づきＷＥＢページが表示され（Ｔ３）、さらに、ＷＥＢページ内に組み込まれたアプレットが自動起動し（Ｔ４）、前述の画像表示制御の処理が開始される。
【００７０】
また、ＷＥＢサーバ３を商品のオンラインショッピングサーバを兼ねるものとし、図１６のように、カタログブック形式で見開き表示されるページ画像上にオンラインショッピング用の付加機能リンクボタンが設定・表示することができる。そして、端末５からの該付加機能リンクボタンの操作信号を契機として、ＷＥＢサーバ３と端末５との間でオンラインショッピングのための情報通信を行なうことができる。例えば、画面上に対応する商品のオンラインショッピング画面を表示し、購入数量や購入者の住所氏名等を入力し、必要に応じてクレジットカード番号等を入力する。この入力内容は、オンライン注文データとしてサーバに送信され、サーバ側ではこの注文内容を確認して、商品配送や課金のための必要な処理を行なう。このようにすることで、端末５を使用するユーザはカタログブックを閲覧し気に入った商品があれば、電話又は郵送による注文等の面倒な手続を必要とせず、その場で手軽に商品の購入注文することができる。
【００７１】
さらに、カメラと商品との相対撮影角度を予め定められた方向に変化させながらコマ撮り撮影された画像データの組であり、その撮影角度順に切換え表示の時系列的順序が定められてなる商品立体表示用画像データと、カタログブックのページ画像上に、商品の画像領域と対応付けて立体表示リンクボタンを表示するようＷＥＢページと、をＷＥＢサーバ３に記憶させておけば、端末５において立体表示リンクボタンが操作されるに伴い、ＷＥＢサーバ３から対応する商品の商品立体表示用画像データを端末５にダウンロードし、端末５の表示装置上において同一の画像貼り込み領域内に、商品立体表示用画像データを、時系列的順序に従い自動的に順次切換え表示させることにより、商品の擬似立体画像を表示させるようにすることができる。
【００７２】
図１７は、その表示例を示すもので、（ａ）、（ｂ）、（ｃ）、（ｄ）の順にカメラの画像が切り替わっている。ここでは、その切換えに使用する複数の画像データが、カメラと被写体との相対撮影角度を予め定められた方向に変化させながらコマ撮り撮影された画像データの組であり、その撮影角度順に切換え表示の時系列的順序が定められている。このような画像データの組を切換え表示すると、画像切換え相対撮影角度の変化方向に対応して、被写体（カメラ）が回転しているアニメーションが再生され、平面的な画像の切換えを行っているにも拘わらず、被写体の立体的な情報を得ることができる。カタログの場合、興味のある商品を回転させて見ることができるようになり、気になる部分をすべての角度から品定めできるようになる。このような機能は、リーフレット形式の紙カタログでは決して実現できない機能であるといえる。
【００７３】
以上のような、商品の擬似立体画像の表示を実現するプログラムの流れを図１８のフローチャートを用いて説明する。まず、Ｒ１では最初のフレーム番号（Ｆ＝１）が設定され、Ｒ２でそのフレーム番号の画像データがダウンロードされて表示される。フレーム切換えの間隔は公知のタイマールーチンにより制御されるので、そのフレームの表示が開始されるとともにタイマーが起動する。そして、Ｒ３でタイムアップすれば、Ｒ４でフレーム番号をインクリメントする。そして、Ｒ５においてインクリメント後のフレーム番号が最大値Ｎを越えていなければＲ６に進み、表示順序の逆転指令を受けていないことを確認してＲ２に戻り、そのインクリメント後のフレーム番号の画像を新たにダウンロードして画像を切換える。以下、Ｒ２〜Ｒ６を経てＲ２に戻る処理が繰り返されることにより、画像の切換え表示が順次進行する。なお、Ｒ５においてインクリメント後のフレーム番号が最大値Ｎを越えていた場合はＲ１に戻り、フレーム番号を１にセットしなおして以下同様の処理となる。これにより、最終のフレームを表示した後は最初のフレームに戻って切換え表示を継続することになる。なお、ダウンロードした画像は端末５のキャッシュメモリに蓄積され、以降はそのキャッシュメモリから読み出されて表示が行なわれるので、新たなダウンロードは行なわれない。
【００７４】
他方、Ｒ６で表示順序の逆転指令を受けた場合はＲ７に進み、フレーム番号のデクリメントを開始する。そして、Ｒ８でフレーム番号が１未満となっていないことを確認し、Ｒ１０でその番号のフレームの画像を表示する。そして、表示時間がタイムアップすればＲ７に戻ってさらにフレーム番号をデクリメントし、以下の処理を繰り返すことで、Ｒ１〜Ｒ６とは逆順で画像が切換え表示される。なお、Ｒ８でフレーム番号が１未満になったときは、フレーム番号を最大値Ｎに戻し、逆順切換え再生を繰り返す。Ｒ１２で再び逆転指令を受けた場合はＲ１に戻り、正順の切換え表示に戻る。
【００７５】
なお、以上の実施の形態では電子カタログブックを例に取り説明を行なったが、本発明の適用対象はこれに限定されるものではなく、電子書籍や電子地図などカタログ以外の分野にも適用できる。さらに、パンフレットやリーフレットなど、特にブック形態以外の出版物についても適用可能である。
【図面の簡単な説明】
【図１】本発明の画像表示システムの全体構造の一例を示すブロック図
【図２】端末の構成例を示すブロック図
【図３】ＷＥＢサーバ（データサーバ）の構成例を示すブロック図
【図４】階層構造画像データの説明図
【図５】拡大表示の説明図
【図６】拡大表示用メモリの更新方法の説明図
【図７】画像表示制御処理の流れを示すフローチャート
【図８】拡大表示処理の流れを示すフローチャート
【図９】拡大ウィンドウの移動処理の流れを示すフローチャート
【図１０】図１のシステムによるデータ配信処理の流れを示すフローチャート
【図１１】拡大率変換ボタンによる拡大率変換例
【図１２】拡大率変換の仕組みの説明図
【図１３】画像表示を行なう画像ビューアの例を示す図
【図１４】画像ビューアにおける拡大表示の例を示す図
【図１５】ページめくりアニメーションの流れを表す図
【図１６】リンクボタンを形成した画像表示例を示す図
【図１７】切換え画像により商品を回転表示する画像ビューアの表示例を示す図
【図１８】回転表示制御の流れを示す図
【図１９】拡大ウィンドウサイズ／形状変換ボタンのついた画像ビューアの例を示す図
【図２０】拡大ウィンドウサイズ変換入力部のついた画像ビューアの例を示す図
【符号の説明】
１　　画像表示システム
２　　インターネット
３　　ＷＥＢサーバ
５　　端末[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an image display system and a computer program.
[0002]
[Prior art]
2. Description of the Related Art In recent years, the speed of processing of a main processing unit (CPU) in a personal computer and the increase in capacity of a storage device (HDD) have been remarkable. The number of cases treated is rapidly increasing. In addition, with the development of infrastructures and speeding up of communication networks such as the Internet and personal computer communication, services for online distribution of such large amounts of data via communication networks are becoming widespread.
[0003]
In recent years, such an image display system that realizes an enlarged display function by using enlarged image data having a larger data amount in addition to a standard magnification image, such as an electronic book, a catalog, or an electronic map, has become widespread. It is getting. Conventionally, an image enlargement function often used in such an image display system is to separate a thumbnail image from an enlarged image, for example, and click a thumbnail image displayed by default to switch the enlarged image by screen switching. What is displayed in its entirety is widely used, for example, in online catalogs. Also, in the case of an electronic map or the like, a method in which a point to be enlarged on a map is designated by a pointer and clicked with a mouse, and the area around the point is enlarged and displayed by screen switching, has become common. In this method, the standard magnification image is divided into several sections, which section is designated by the pointer, and an enlarged image corresponding to the section is selectively read and displayed. Further, as a somewhat advanced enlargement method, an enlargement designation window of a fixed size is displayed on a standard magnification image, and when a window position is determined and an enlargement instruction is issued, an area in the window is selectively switched by screen switching. There is also a method of enlarging the display. In this case, the setting position of the enlargement designation window can be freely changed by a mouse operation, and when the position of the enlargement designation window is determined by mouse click or the like, an enlarged image is displayed on a separate screen from the enlargement designation window.
[0004]
[Patent Document 1]
JP-A-8-106469
[0005]
[Problems to be solved by the invention]
However, in the method using the thumbnail, since the enlarged image is only displayed as a whole by switching the screen, there is a disadvantage that the enlargement magnification is limited by the size of the enlarged image that can be displayed on the screen. On the other hand, in a method in which the position of an image to be enlarged is designated by a pointer and the part whose position is designated is selectively enlarged and displayed, only a partially enlarged image is displayed. However, since the enlarged image is displayed by switching the screen, the image of the magnification before magnification (hereinafter, also referred to as an original image) is temporarily hidden as soon as the enlarged display command is executed. For example, if the desired part cannot be enlarged, it is very troublesome because it is necessary to return to the image of the magnification before enlargement and to specify the enlargement position again by switching the screen, and it is very troublesome. The positional relationship tends to be unclear, and there is a drawback that the user tends to lose track of which part of the image is currently being enlarged and viewed. In any case, the spread of computers has increased the chances of using computers used by various people.In today's world, operations are not intuitive. This is the reason why a system that can be used intuitively and easily can be used.
[0006]
In general, when an image is displayed by a computer, when data processed by a main processing unit (CPU) is loaded into a memory (RAM or the like) and output, a high-magnification image with a high resolution for enlargement is loaded at a time. Then, there is a problem that the data occupies most of the memory area, and it is likely that the CPU will not operate normally due to pressure on other programs and the like. Further, it is difficult to smoothly perform switching of the enlarged image and scroll processing, and there is a disadvantage that the user is easily frustrated. Such a problem is particularly conspicuous when data download is limited, such as when a large amount of image data is exchanged via a communication network.
[0007]
An object of the present invention is to make it possible to intuitively understand an operation method of an enlarged display, and it is desirable to hardly impose a processing load on a computer when displaying large-capacity enlarged image data, and to efficiently perform a large-capacity display. And a computer program for realizing the system on a computer.
[0008]
[Means for Solving the Problems and Functions / Effects]
In order to solve the above problems, the image display system of the present invention,
A first magnification image data storage unit that stores first magnification image data for displaying a predetermined image at a first magnification,
In order to display an image at a second magnification greater than the first magnification, the image has a higher resolution than the first magnification image data, and one image based on the first magnification image data is converted into a plurality of images corresponding to the first magnification image data. A second magnification image data storage unit that stores the second magnification image data configured by the second magnification segment,
A display device for displaying an image,
On the screen of the display device, first magnification image display control means for displaying an image as a first magnification image based on the first image data,
Enlargement window setting means for setting an enlarged window smaller than the display area of the first magnification image to be movable on the first magnification image in order to enlarge and display a part of the first magnification image by the second magnification image; ,
An enlarged display memory for loading the second magnification image data as enlarged output image data,
Inside the first magnified image portion to be partitioned defined by the enlarged window, the first magnified image that is smaller than the first magnified image portion and satisfies a fixed positional relationship with the first magnified image portion to be partitioned. Set the magnification image portion and, based on the portion corresponding to the first magnification image portion of the second magnification image data loaded in the memory for enlarged display, correspond to the first magnification image portion in the magnification window. A second magnification image to be displayed in a form in which the size of the visual recognition image is expanded, and with the movement of the enlargement window, enlarged display control means for updating an enlarged first magnification image portion to be enlarged and displayed;
It is characterized by having.
[0009]
Further, a computer program according to the present invention causes a computer to function as each unit of the image display system. The computer on which the computer program is installed or mounted (pre-burned on a ROM or the like) includes a CPU for functionally realizing the respective units of the system, a RAM serving as a work area of the CPU, and an image data storage. It is necessary to have a storage device to be a unit and a display device for displaying images.
[0010]
According to the present invention, an enlarged window is set on the first magnification image, and only a part of the sectioned first magnification image section defined by the enlarged window is set in the enlarged window using the second magnification image data. (In other words, when the display magnification is increased from the first magnification to the second magnification, the field of view that can be displayed in the enlargement window becomes narrower. At the first magnification, this field of view is enlarged.) Although it is smaller than the display area of the window, when displaying this at the second magnification, the image of the same field of view can be extended within the range permitted by the display area of the enlarged window.) The enlarged window can be moved on the first magnification image, and the enlarged first magnification image portion displayed in an enlarged manner is updated in accordance with the movement, so that the enlarged window is displayed as if it were a loupe. An operation can be performed with a feeling of directly enlarging and viewing a desired portion by applying the image on a one-magnification image, and an intuitive and easy-to-understand operation can be performed. Specifically, the first magnification image area other than the enlargement window is synthesized with the second magnification image in the enlargement window and displayed, so that the first magnification image area not occupied by the enlargement window is not concealed and enlarged. Since it is continuously displayed on the background of the window, it is clear at a glance which part of the first magnification image area has been enlarged, and even if the desired part could not be enlarged, reset the enlarged position part. Can be done very easily.
[0011]
The enlargement display control means may display the second magnification image corresponding to the first magnification image portion to be enlarged so that a blank area does not occur in the display area of the enlargement window. As a result, the displayable area of the enlarged window can be more effectively used, and the field of view that can be enlarged and displayed can be maximized. In this case, the enlarged first magnification image portion is set as having a similar shape in which the dimensional ratio of the enlarged window to the display area is equal to the relative magnification ratio of the first magnification image to the second magnification image. The second magnification image corresponding to the magnification image portion can be displayed in the display region of the enlarged window so that there is no excess or shortage of the region. That is, the size of the enlarged first magnification image portion is set to be the reciprocal multiple of the relative magnification ratio of the first magnification image to the second magnification image with respect to the size of the enlarged window. By using the second magnification image to magnify and display the magnified image portion exactly so as to fit in the magnified window, the displayable area of the magnified window can be most effectively used.
[0012]
Further, the enlargement window setting means may set the enlargement window to be continuously drag-movable on the first magnification image. Further, the enlargement display control means can cause the second magnification image to be scroll-displayed in the enlargement window without interruption as the enlargement window is dragged on the first magnification image. In this way, when the enlarged window is likened to a loupe, it is possible to perform image scrolling such that the loupe is moved on the first magnification image by an analog-like manual operation. Can be operated in a realistic and familiar manner, such as trying to enlarge the image using a real loupe. For example, it is easy to handle even for a user who is not good at machine operation (such as a housewife or an elderly person).
[0013]
In order to enhance the reality of such display, it is important how smoothly the enlarged image can be scrolled in accordance with the movement of the enlarged window (loupe). However, for scrolling the screen, it is necessary to read out the area to be displayed from the second magnification image data loaded in the image memory and update the display screen at high speed. At this time, if the second magnification image data for all the images is loaded in the image memory, the CPU can concentrate on the scroll display update processing. It is necessary to secure a memory area.For example, if a computer program is to be installed on an existing personal computer or workstation, it is necessary to install a considerable amount of empty memory on the personal computer or workstation on which the program is to be installed. Therefore, the price of the system must be increased.
[0014]
Therefore, in the image display system of the present invention, the enlarged display memory has a memory area covering an image area wider than the display area of the enlarged window, and only a part of the second magnification image data is displayed in the enlarged window. It is to be loaded as enlarged output image data including a second magnification segment corresponding to a portion to be enlarged of the first magnification image to be enlarged and a second magnification segment forming display preparation image data that continues outside the enlarged window. Can be. In this case, the enlarged display control means updates the data load contents to the enlarged display memory in units of the second magnification segment as the enlarged window is dragged on the first magnification image, and the enlarged window is displayed. When a predetermined update limit position is reached in the movement direction, a new second magnification segment to be prepared image data is added to the front of the enlargement window in the movement direction of the enlargement window while performing a memory shift. , And the second magnification image can be scroll-displayed seamlessly in the enlarged window using the supplemented second magnification segment.
[0015]
According to this configuration, when the enlarged image is displayed in the enlarged window, the second magnification segment displayed in the enlarged window and the second magnification segment that constitutes display preparation image data following the second magnification segment, The enlarged output image data forming part of the magnification image data is loaded into the enlarged display memory. Thus, when displaying an enlarged image using the second magnification segment in the enlargement window, it is not necessary to load all the second magnification segments into the enlargement display memory. Since only the necessary second magnification segment needs to be loaded, the memory consumption can be reduced. Then, when the enlargement window is dragged, the image displayed in the enlargement window can be scrolled seamlessly by the display preparation image data. When the enlarged window reaches the predetermined update limit position, the data load content of the enlarged display memory is updated by replenishing a new second magnification image segment that is to be the display preparation image data ahead in the moving direction. Therefore, the display preparation image data always exists in advance outside the enlargement window without shortage, and the image displayed in the enlargement window is seamlessly displayed without making the user feel while loading the image data. Scroll display is possible. Thereby, it is possible to efficiently display and scroll the enlarged image while saving the memory consumption.
[0016]
Next, in the image system of the present invention, the first magnification image data storage unit and the second magnification image data storage unit are provided on the data server side, the display device is provided on the terminal side, and the data is transmitted via the communication network. Distributing the first magnification image data and the second magnification image data from the server to the terminal, and displaying an image on a display device using the distributed image data at the terminal,
The terminal side selectively downloads the second magnification segment to be loaded into the enlargement display memory from the data server and, when the enlargement window moves on the first magnification image, adds the second magnification segment to the enlargement window. An image download control means for additionally downloading only the double magnification segment from the data server can be provided.
[0017]
According to the above configuration. When distributing image data from the image data storage unit on the data server side via the communication network and performing enlarged display on the display device on the terminal side, only the second magnification image segment newly required for the enlarged display is transmitted to the data server. The download time and the processing load can be greatly reduced. Furthermore, even during the data download, the display ready image data always exists in advance outside the enlargement window without any shortage, and is displayed in the enlargement window without making the user aware of the influence of the download process. The scrolled image can be displayed without interruption. As a result, the user is free from frustration such as interruption of images due to waiting for download, and can enjoy comfortable image browsing.
[0018]
Further, the image system of the present invention stores third image data having a higher resolution than the second magnification image data in order to display the image at the third magnification which is higher than the second magnification. A third image data storage can be provided. In this case, the enlarged display control means may be configured so that the image of the second magnification in the enlarged window can be further enlargedly displayed on the screen of the display device at the third magnification based on the third image data. Can be. As described above, by providing the third image data having a higher resolution than the second magnification image data and using the third image data for enlarged display, the user can see a further enlarged image. Further, if the enlarged image at the third magnification can be displayed by switching to the image at the second magnification in the enlargement window, the enlargement window can be dragged, and the magnification conversion of the image can be switched. Therefore, it is possible to further arbitrarily zoom up the enlarged image of the desired part, and to easily display a more detailed enlarged image.
[0019]
The third image data can be composed of a set of a plurality of third magnification segments corresponding to each of the second magnification segments, and the enlarged display control means further includes, on the image of the second magnification in the enlarged window, An enlargement area designating unit for designating an image area to be enlarged and displayed, wherein a third magnification segment corresponding to the designated image area is selectively read from the third image data storage unit and displayed in the enlargement window Can be configured as As described above, if a certain second magnification segment is configured to be enlarged and displayed by a plurality of third magnification segments, the consumption memory is stored in the same manner as in the case where the first magnification image is enlarged and displayed by the plurality of second magnification segments. It is possible to efficiently display and scroll the enlarged image of the third magnification while saving the amount. In this case, when the above-mentioned image download control means is provided, only the third magnification segment necessary for the image of the third magnification to be displayed in the enlargement window can be downloaded from the data server. Thereby, the enlarged image of the third magnification can be smoothly displayed in the enlarged window without making the user aware of the influence of the download processing.
[0020]
Next, in the image display system of the present invention, the first magnification image can be used to display a page of the publication including the pasted image on the screen of the display device, and the enlarged window setting unit includes: The enlarged window can be set to be draggable on the page. With this configuration, the page of the electronic publication can be enlarged and displayed on the image as if the paper publication was magnified with a loupe, and the feeling of the paper publication was impaired. Without that, it can be made paperless. Note that a publication here means a page that contains text, images, or both, and is generally printed on paper, such as books, letters, flyers, and photographs. Displaying the page of the publication on the screen of the display device means that the page of such a form is displayed on the screen.
[0021]
Next, in publications such as catalogs, pamphlets, and books, many images, such as product photographs, inset drawings, and illustrations, are often pasted in addition to printed portions (text portions) using characters. When digitizing such publications, the text part and the image part are separated into text data and image data, respectively, and the text data and the image data are appropriately pasted into the page area on a computer. , By creating a page layout. Such an approach is already known as desktop publishing (DTP).
[0022]
However, in the page data created by such DTP, a page, an image, and a text are all prepared as separate data and synthesized, and if this is used for enlarged display, page enlargement and image enlargement are performed. And a three-step enlargement process of text enlargement and a process of pasting the enlarged image and text on the enlarged page again. As a result, there is a problem that it takes a very long time to complete the entire enlargement process in a CPU having a low capacity. For example, when you execute the enlargement command, the page before enlargement disappears completely, the enlarged image is slowly redrawn on the page with some space, and the text is pasted in a weeping manner In addition, it is not uncommon for a series of display steps to be performed only quickly enough to be tracked visually. These phenomena can be overly frustrating to the user, leading to a rough mental state.
[0023]
In order to solve such a problem, the first magnification image can be a page image in which the pasted image region and a surrounding page region other than the pasted image region are integrally inseparable. Further, the second magnification image data can be obtained by equally dividing the page image into the second magnification segment by a dividing line determined independently of the division line of the pasted image area, The page image to be formed can be created by subjecting the second magnification image data before the division of the corresponding page to pixel conversion so as to have the first magnification. In other words, instead of dragging the independent data structure of the image, page or text, the pasted image area and the surrounding page area other than the pasted image area are combined with the page image that became inseparable from the beginning. I do. That is, the original narrowly defined image, such as a product photograph, an inserted diagram, or an illustration, is further inseparably integrated with surrounding page areas (for example, page margins, characters, ruled lines, or a background image), and the entire page is printed as one sheet. Image data. Such page image data can be created by, for example, outputting page data that has already been created by DTP or the like in hard copy in the form of a composition, taking it in with a scanner, and converting it into bitmap or compressed image data such as JPEG. Further, the page data in the data synthesis format may be rasterized on a computer and converted into single page image data such as bitmap or JPEG.
[0024]
Then, at the time of enlarged display, such page image data (first magnification image data or second magnification image data) may be prepared for each magnification level, and the pasted image area and the surrounding page area are individually set. Since there is no need for an enlargement process or a process for synthesizing them, the processing load can be greatly reduced, and the enlarged display can be performed extremely quickly and smoothly. Also, the page image forming the first magnification image is created by performing pixel conversion on the second magnification image data before the division of the corresponding page so as to have the first magnification. It is economical because there is no need to create image data. Further, when the page image data forming the second magnification image data is divided into the second magnification segments, the division line can be set without worrying about the position of the pasted image area. Even if the division line crosses, it does not matter at all. That is, even if there is a second magnification segment that divides the pasted image area, by storing this as the display preparation image data in the enlarged display memory, the seamless scrolling can be performed by the above-described method. Can be implemented without any problem. As a result, there is an advantage that the second magnification image data can be easily created only by performing the uniform division processing on the page image data.
[0025]
In the image display system of the present invention, the first magnification image data storage unit may store data of each page image of the book publication as the first magnification image data. In this case, the first magnification image display control means includes a current display memory for loading the data of the two-page spread page image of the publication in the page display area of the display device, and a two-page spread page below. A display preparation memory for loading a four-page spread page image which is a hidden page image and appears before or next to the currently displayed page by turning a page, and one of the two pages forming the currently displayed double-page spread image A page as a first turning page, a page turning instruction means for instructing a turning display operation on the first turning page, and when a page turning instruction is given, the current display memory stores the page in the display preparation memory after turning. Reloads the data of the double-page spread image related to the display of the pasted image area and the surrounding page area other than the pasted image area. Collectively without exception, while the page image data of the first turning page is sequentially transformed so that the reduction ratio gradually increases only in the turning direction as the page turning progresses, after the first turning page is hidden The page image data of the second turning page existing on the back side of the first turning page is sequentially deformed so that the reduction ratio gradually decreases only in the turning direction, and a series of page turning animation frame feed page images. A page turning animation display control that creates data and displays a page turning animation in the page display area showing a state in which the first and second turning pages are gradually turned based on the frame turning page image data for the page turning animation. And means.
[0026]
In this configuration, by providing an animation function for turning the pages of the book-form publication, the user can feel as if he / she is actually looking at the book-form publication, and can use the enlargement window to view the enlarged image. If possible, you can get a feeling of operation as if you were looking at a book-type publication enlarged with a loupe. In addition, since the image data of the four-page spread, which appears before or next to the currently displayed page, is stored in the display preparation memory in advance, the page image to be displayed can be displayed when turning either the previous or next page. Data can be switched quickly and smoothly. Further, in the case of a book format capable of turning pages as described above, it is possible to display a large number of images every two pages and browse the page images one after another efficiently.
[0027]
Further, in the image display system of the present invention, at the time of page turning, page image data of the page to be turned is sequentially deformed so that the reduction ratio gradually increases or decreases only in the direction of turning, and the page turning animation is displayed. As described above, the two-dimensional processing for enlarging / reducing the page image only in the turning direction is a three-dimensional processing in consideration of the page turning direction and the deformation of the page image in the vertical direction so that the actual book page is turned. The processing load is lighter than that of the three-dimensional processing, and the visual effect of the page turning obtained by the user is not inferior to that of the three-dimensional processing. Then, by setting the page image to be an integral part of the pasted image area and the surrounding page area, the entire page can be reduced / enlarged collectively by thinning pixels or the like. As a result, troublesome image processing for individually reducing and combining the pasted image area and the surrounding page area is not required at all, and the load of the page turning animation processing can be greatly reduced.
[0028]
In this case, in the case where the above-described image download control means is provided, when an instruction to turn the page is given, among the four pages of the page image data that appears before or next to the page that is displayed after the page is turned, the current display The image download control means can be configured so that only the data that has not been loaded into either the memory or the display preparation memory is downloaded from the data server. This processing is efficient because only newly required ones of the four pages of page image data that appear before or next to the two-page spread displayed after the page turning are loaded into the display preparation memory. It is possible to quickly prepare for turning pages.
[0029]
The enlarged window can be dragged across two page images displayed in a double-page spread. When the position of the enlarged window is set so as to extend over the two page images, the required second magnification segment is stored in the enlarged display memory from the two page images according to the position of the enlarged window. Are loaded so as to complement the area of the enlarged display memory, and based on the second magnification segment corresponding to the two loaded page images, a second magnification image spanning two pages is displayed in the enlargement window. Can be configured. As a result, the second magnification image segments belonging to each of the displayed two-page spread pages are combined and displayed in the enlarged window, so that the user can view the two second magnification images originally belonging to different page images. The segments appear to be continuously connected as if they were one enlarged image in the enlarged window. Therefore, the user can drag the enlarged window corresponding to the loupe so as to cross the displayed two-page spread. That is, it is possible to further improve the realism of enlarging a book (book) obtained with a loupe.
[0030]
The publication used in the present invention can be, for example, a catalog book, and the pasted image area can be an image area of a product published in the catalog book. By using the catalog book format in this way, an image area of a product is formed on the page image. If the enlargement window is used, it is possible to magnify it for each product and observe it in detail, so that it is easy to make a purchase decision. In addition, in a conventional Internet shopping homepage or the like, an image cannot be enlarged without clicking each thumbnail. However, if the present invention is applied to an electronic catalog book, the user can freely move the magnifying window (loupe) on the page of the opened catalog book and display the desired product in the magnifying window as desired. Can be done. That is, browsing of the electronic catalog book can be enlarged and viewed at a good tempo with a loupe, almost in the same manner as browsing a paper catalog book. If browsing takes time and effort, the user's willingness to purchase is greatly disturbed by itself, but the adoption of the present invention irresistibly causes extra frustration during browsing. In addition, unlike paper catalogs, unnecessary catalogs are not scattered or accumulated in the house, greatly contributing to the reduction of waste paper waste and the saving of paper resources. As a result, it is possible to improve the user's willingness to purchase and solve environmental resource problems at once, and to make a great contribution to revitalizing the economy in the coming era.
[0031]
In this case, when the above-described data server is used, the data server can also serve as an online shopping server for products formed in the catalog book. An additional function link button for online shopping can be set and displayed on the page image of the catalog book displayed on the display device of the terminal. Then, triggered by an operation signal of the additional function link button from the terminal, information communication for online shopping can be performed between the data server and the terminal. If the additional function link button for online shopping is set and displayed on the page image of the catalog book in this way, the user browses the catalog book and, if there is a favorite product, troubles such as ordering by telephone or mail. It does not require any special procedures, and even without the printed material itself, it is possible to easily order products with a single click on the spot.
[0032]
In addition, a three-dimensional display link button can be set and displayed on the page image of the catalog book displayed on the display device of the terminal in association with the image area of the product. In this case, the data server is a set of image data shot by time-lapse shooting while changing the relative shooting angle between the camera and the product in a predetermined direction. The determined product stereoscopic display image data can be stored. Then, as the stereoscopic display link button is operated on the terminal, the image data for merchandise stereoscopic display of the corresponding merchandise is downloaded to the terminal from the data server, and on the display device of the terminal, in the same image pasting area, By automatically and sequentially switching and displaying the image data for product stereoscopic display in chronological order, a pseudo stereoscopic image of the product can be displayed.
[0033]
As described above, when the set of image data is switched and displayed, an animation in which the subject (camera) is rotated is reproduced in accordance with the change direction of the image switching relative shooting angle, and the two-dimensional image switching is performed. In spite of the fact, it is possible to obtain three-dimensional information of the subject. In the case of a catalog, a product of interest can be rotated and viewed, so that the part of interest can be defined from all angles. Such a function can be said to be a function that cannot be realized by a book or leaflet type paper catalog.
[0034]
A plurality of types of enlargement windows having different forms and / or dimensions can be prepared, and an enlargement window selecting means for selecting a desired one from the plurality of enlargement windows can be provided. By preparing a plurality of types of enlarged windows having different forms and / or dimensions in this way, for example, if characters are written horizontally in a page image, a horizontally long enlarged window is used to make the text easier to read (vertical). In the case of writing, the reverse is true), and the user can selectively use a plurality of types of enlarged windows according to various uses. Furthermore, if the enlargement window is configured to have an enlargement window size setting / change means for setting the size of the enlargement window so as to be changeable, the enlargement window can be set more finely according to the use of the user.
[0035]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to the accompanying drawings, taking an example of application to an electronic catalog book distributed using the Internet.
FIG. 1 is a block diagram showing the overall configuration of an image display system 1 (hereinafter, also simply referred to as system 1) of the present invention. The system 1 includes a communication network 2 such as the Internet, a WEB server (data server) 3 connected via the communication network 2, and a terminal 5 including a user's personal computer and the like, the Internet, an intranet, and a personal computer. The image data is distributed from the WEB server 3 to the terminal 5 via a communication network 2 (in this embodiment, the Internet) including a communication network, a public telephone line network, a LAN, and the like. Note that the terminal 5 is not limited to a personal computer, and can be configured by a PDA (Personal Digital Assistant) or a mobile phone terminal.
[0036]
FIG. 2 shows an example of the configuration of the terminal 5, which includes an I / O port 11, which includes a CPU 12, a ROM 13, a RAM 14, a hard disk drive (HDD), a CD / R drive, a DVD drive, an MO drive, and a floppy disk drive (FDD). And the like, a fixed storage device 21 serving as a local volume, a modem unit (modem, router, LAN board, etc.) 15 for network connection, an input unit 16 including a keyboard, a mouse and other pointing devices, a monitor 17, a printer 18, a D / A converter 19, a speaker 19 connected thereto, and the like. In addition, a MIDI sound source 22 that enables music performance by MIDI data and a decoder (in this embodiment, an MPEG decoder) 23 for reproducing compressed moving images and audio are also connected in the same manner.
[0037]
The RAM 14 serves as a work area for the CPU 12, and has an area for executing memory of various programs executed by the CPU 12 and an area for various data memories (including cache memories) used when executing the programs. The programs loaded into these memories include those installed on the local volume 21 and those downloaded from the WEB server 3. Hereinafter, the meaning of each memory will be described.
[0038]
First, the OS execution memory executes operating system software (OS: Windows (trade name of Microsoft Corporation in the United States; various versions such as Windows 98 and Windows 2000 exist in this embodiment) of the terminal 5) of the terminal 5). Work memory. In addition, since various programs that operate on an Internet WEB browser (hereinafter, simply referred to as a WEB browser) are often described in a known programming language Java (trade name of Sun Microsystems, USA), the Java An execution memory (virtual machine execution memory) of a Java virtual machine program for realizing an operating environment on the OS is formed. By installing the Java virtual machine, a program based on Java can be operated without depending on a platform such as an OS type.
[0039]
The Java execution memory is for executing a program described in Java. There are two types of Java programs, one created with an application class that has less restrictions on operation and the other created with a more restrictive applet class (hereinafter simply referred to as an applet). In the embodiment, a part of a program of a web browser (hereinafter, such a web browser is referred to as an image viewer) for realizing the above-described image display system of the present invention is created by this applet. An execution memory of the applet is formed in the Java execution memory.
[0040]
As in the present invention, when a highly open data distribution form using a communication network is used, a program that performs a malicious operation such as a computer virus is easily damaged due to its convenience and two sides of the same coin. That also increases security risks. If the program is described as a Java applet, for example, when it is executed on the Java virtual machine, the program is read into the work memory of the terminal and executed only while the image viewer is running. When the image viewer ends, the image is deleted from the work memory. That is, the program performs an extremely limited operation as a program effective only in the activated image viewer, and is erased from the work memory when the image viewer is terminated, so that a malicious operation such as a virus may be performed. However, as long as the WEB browser can be terminated, the operation can be stopped and eliminated, so that data can be distributed over a more secure communication network.
[0041]
Also, by using a Java applet or the like, a program embedded in the image viewer can be accessed during execution of the program, by accessing a local volume of the terminal, accessing a location other than a directory permitted to use the data server 3, In addition, it can be executed in a state where rewriting of a file placed on the data server 3 side is prohibited (so-called operation in a sandbox). As a result, during the operation of the applet, access to the data server 3 and rewriting of files and access to the storage device 21 directly connected to the terminal, that is, access to the local volume, including reading and writing of data, are completely prohibited. Etc. can be sealed off. Such a sandbox environment is realized by a module called Java security manager (known) that runs on the virtual machine.
[0042]
As shown in FIG. 2, the applet includes, specifically, applet specifying data (applet class name) for specifying an applet to be executed, and image data from the WEB server 3 when downloading. A download control module in which an address name indicating the location of the image data in the WEB server 3 is provided, and downloading of image data only from a specific area in the data server is permitted during activation of the image viewer. It has become. The data processing module will be described later.
[0043]
Also, in the RAM 14 of the terminal 5, well-known web browser software (for example, Internet Explorer (trade name of Microsoft Corporation) or Netscape Navigator (trade name of Netscape Communications, USA)) for browsing the home page of the Internet 2 is stored in the RAM 14 of the terminal 5. Is formed. In the execution memory, a memory for WEB site specific data (for example, a URL address), a transmission / reception control module for connecting to a homepage provided by the WEB server 3, a hypertext language which is a description language for a WEB page (homepage), for example, An execution area of each program is formed, such as an HTML decoding module for decoding an HTML document describing a well-known HTML (Hyper Text Markup Language), which is a page description language of the WWW (World Wide Web), and furthermore, the received WEB is formed. A web page receiving memory for storing page data, a web page display memory for storing image data of a web page to be displayed, and a control for jumping to a linked page by clicking a link button. An execution area of a link control module (which is incorporated in the HTML system), an execution memory of an audio output control program for controlling audio output by the speaker 20, and audio data such as a received MPEG audio stream. A storage memory, a MIDI data memory for storing music data (MIDI data) described by MIDI (Musical Instrument Digital Interface) (converted to digital audio data by the MIDI sound source 22), and music performance by executing the MIDI data. An execution memory of the sequencer software to be executed is formed. In the software unit (image viewer) of the image display system according to the present embodiment, the WEB page is created in the HTML language in order to display the image data in a catalog format on the WEB browser. Is executed by a Java interpreter incorporated in the web browser. When an applet described in Java is executed, the format executed on the web browser after the web browser is started up once. It has been. However, such a software part plays a role by being processed by the CPU 12 of the terminal 5.
[0044]
Next, FIG. 3 shows an example of the configuration of the WEB server 3, which includes an I / O port 40, a fixed storage device 48 including a CPU 41, a ROM 42, a RAM 43, a hard disk drive (HDD), and a network connection. (A modem, a router, a LAN board, etc.) 44, an input unit 45, a monitor 46, a printer 47, and the like. The storage device 48 stores file data of a web page to be uploaded on the Internet, that is, file data of a web page including an applet (to which an address is assigned) described in Java. Each item such as music to be provided is also stored in the same manner with an address serving as item specifying data. Further, the image data to be distributed is stored with an address given in the form of an image database.
[0045]
On the other hand, the RAM 43 has an OS execution memory on the data server side (in the case of executing Java, a Java virtual machine is installed similarly to the terminal 5), and an execution memory of a web page distribution program for uploading a web page. Is formed.
[0046]
Note that, in the present embodiment, the monitor 17 of the terminal 5 corresponds to the display device, and the input unit 16 is used for an image display system of the present invention such as a command unit for dragging the enlarged window or a page turning command unit. This corresponds to means for issuing a command from outside. In the present embodiment, the first, second, and third image data storage units correspond to the storage device 48 of the WEB server 3 (also referred to as a data server). The storage device 21 may be a storage device 21 (eg, a CD-ROM medium). However, in that case, the file data of the WEB page including the applet (to which the address is given) described in Java is also stored in the storage device 21, and the image display system does not include the WEB server 3 and the communication network 2, It is assumed that the terminal 5 is formed only. In order to form the image display system by the terminal 5 alone, the file data of the WEB page including the applet is downloaded from the WEB server 3 to the terminal 5 via the communication network 2 and stored in the storage device 21. Various forms are conceivable, such as forming by storage in the storage device 21 or the ROM 13 in advance.
[0047]
Further, the enlarged display memory, the current display memory, and the display preparation memory correspond to an image display memory in the RAM 14 of the terminal 5. The first magnification image display control unit, the animation display control unit, the enlarged window setting unit, the enlarged display control unit, and the image download control unit are software units of the image display system of the present embodiment (that is, functions of the image display system). Program of the present invention for realization). More specifically, it is a WEB file described in HTML, an applet described in Java incorporated in the file, and a WEB browser activated by the applet. The software for the image viewer is supplied to a storage medium such as a CD-ROM or a DVD in a form that can be read by a computer. Then, in the terminal 5, the medium is read by a reading device (CD-ROM drive or DVD drive) having a reading function, and is installed in a storage device 21 such as an HDD. The program may be installed by downloading it from the program server to the terminal 5 via a communication network such as the Internet.
[0048]
The image data of this embodiment is configured to have the following hierarchical structure. That is, as shown in FIG. 4A, the main part of the image data is composed of a plurality of basic image segments obtained by dividing one image, and the basic divided image data in which each image is described by a set of pixel data. LV3 (third magnification segment). As shown in FIG. 4B, the basic divided image data LV3 is individually stored in the image database (FIG. 3) of the WEB server 3 in units of the basic image segments LV3-1, LV3-2}. I have. Further, as shown in FIG. 4C, the basic divided image data LV3 has a lower resolution than the basic divided image data LV3 generated by subtracting pixels from the basic divided image data LV3 at a fixed ratio. In addition, the divided image data LV2 (second magnification segment) having a smaller number of divisions and the image data LV1 (first magnification image) having a lower resolution than the LV2 and not being divided are accompanied, and the hierarchical structure image is formed as a whole. Data is being built.
[0049]
In the embodiment of the present invention, a part of the first magnification image displayed on the monitor 17 is enlarged and displayed by the second magnification image having a higher resolution than the first magnification image. The small enlarged window is set so that it can be dragged continuously on the first magnification image. The enlargement display method will be described (here, only the relationship between the enlargement window, the area to be enlarged, and the enlargement display area is described, and detailed enlargement control will be described later). An enlarged window and an enlarged portion (enlarged first magnification image portion) smaller than the enlarged window (partitioned first magnification image portion divided by the enlarged window) are set as the enlarged image. This is set (FIG. 5A). The display area of the enlarged window and the enlarged portion are geometrically similar to each other, and the enlarged portion of the first magnification image is displayed at the magnification equal to the similarity by using the second magnification image data. The display is enlarged to fill the area.
[0050]
The enlarged window is drag-moved on the screen in conjunction with an operation input to the input unit 16 (here, a mouse or another pointing device) of the terminal 5. In the display area of the enlarged window, the enlarged portion of the first magnification image is included (in the present embodiment, the geometrical relationship between the display region of the enlarged window and the enlarged portion of the first magnification image). Target center of gravity is determined to match). When a portion to be enlarged is set on the first magnification image, an enlarged display area corresponding to the portion to be enlarged is set on a second magnification segment composed of a plurality of image segments (see FIG. 5B )), And the enlarged display area is displayed as an enlarged image in an enlargement window set on the first magnification image (FIG. 5C). It should be noted that what can be actually confirmed by the user is the form in FIG. 5C, and FIGS. 5A and 5B are perspective views or image views.
[0051]
Further, in the enlarged window, a third magnification segment (including a set of a plurality of segments each having a higher magnification and corresponding to each of the second magnification segments) from the image of the second magnification segment is displayed. LV3). This switching is performed by a command from the input unit 16 such as a mouse. For example, as shown in FIG. 11, a plurality of magnification conversion buttons may be provided, a pointer may be moved to the pointer by clicking the mouse, and the mouse may be clicked at an arbitrary position without providing the button. The switching may be performed simply by performing the operation. Further, it is also possible to configure so that the enlargement magnification can be set to a desired value by an external input. Such multi-step or continuous setting of the magnification is performed by inputting an image of a magnification (hierarchy) displayed as an enlarged image in a memory area (a video RAM or the like) which controls the display on the monitor 17. This can be realized by performing a process of displaying an image after being enlarged or reduced according to the enlargement magnification setting value. In this case, the size of the area to be enlarged and the size of the enlarged display area corresponding thereto are simultaneously changed according to the set enlargement magnification value. In other words, when it is desired to increase the enlargement magnification from the image of the magnification of the enlarged image, the area to be enlarged and the corresponding enlarged display area are reduced, and when the enlargement magnification is to be decreased, the reverse process is performed. .
[0052]
In such a case, the setting of the area to be enlarged and the enlarged display area is performed, as shown in FIG. 12A, on the image of the second magnification displayed in the enlargement window. Area), that is, by specifying the area to be enlarged on the second magnification segment. In this case, an enlarged display area corresponding to the specified image area is set on the third magnification segment, and the enlarged display area is set in the enlarged window set on the first magnification image by the third magnification. It is displayed as an enlarged image. More specifically, in order to display the second enlarged image portion in the display region of the enlarged window without excess or shortage, the size of the enlarged second magnification image portion with respect to the display region of the enlarged window is set to the relative magnification of the second magnification image to the third magnification image. Set as a similar shape equal to the ratio. As another report, as shown in FIG. 12B, the area to be enlarged can always be set on the first magnification image, and only the level of the image segment displayed in the enlarged window can be switched. . According to this method, since the area to be enlarged is always set on the first magnification image, it is necessary to reduce the area to be enlarged when the enlarged display area is switched from the second magnification image to the third magnification image. More specifically, the display area of the enlarged window and the portion to be enlarged have a geometrically similar relationship, as shown in FIG. The enlarged portion of the first magnification image is enlarged and displayed to fill the display area of the enlargement window using the third magnification image data at a magnification equal to. The above description relates to the case where the level of the image segment displayed in the enlargement window is switched from the second magnification segment (LV2) to the third magnification segment (LV3), but this also applies to the reverse switching. It is something that will come true.
[0053]
Hereinafter, the enlarged display control will be described in detail. The enlarged display control is controlled by a program described in an applet. The segment for enlarged display (second or third magnification segment) required for the enlarged display is selectively downloaded from the WEB server 3 by the program. The download is performed in image segment units. The program uses the image display memory (enlarged display memory therein) in the RAM 14 to perform downloading and enlarged image display in the following manner. First, as shown in FIG. 6A, an image segment composed of a plurality of segments belonging to the same level is assigned an address to form an image segment address space. Here, it is assumed that it is based on the image segment of the second magnification. Actually, the segment of the second magnification has a smaller number of divisions than that shown in FIG. 6, but the number of divisions is increased for explanation. The set of image segments in FIG. 6 means a set of image segments belonging to each of two pages of a book-type spread, which will be described later. The enlarged display memory has a memory area that covers an image area wider than the enlarged display area displayed as the enlarged image in the enlarged window in the image segment address space. Specifically, when the enlargement window is positioned at a desired position with respect to the first magnification image using a mouse, an enlarged portion is set in the enlargement window. The program includes a second magnification segment corresponding to a portion to be enlarged of the first magnification image to be displayed in the enlargement window, and a second magnification segment forming display preparation image data following the enlargement window. The enlarged output data forming a part of the magnification image data is downloaded from the web server 3 and loaded into the enlarged display memory. In this way, an enlarged display memory space is formed in the image segment address space. When the mouse is operated, the enlarged window is dragged on the first magnification image, and the enlarged display area is also moved in the enlarged display memory space. At this time, in the enlargement display memory space held in the enlargement display memory, the periphery of the enlargement display area is surrounded by enlargement preparation image data composed of the second magnification segment. The image (second magnification image) can be scroll-displayed without interruption using the enlarged preparation image data.
[0054]
Then, as shown in FIG. 6B, when the pointer reaches the update limit position in the moving direction, a new second magnification segment to be prepared image data is moved forward in the moving direction of the enlarged window while performing a memory shift. To update the data load contents of the enlarged display memory. Due to the supplemented second magnification segment, even if the enlarged window is dragged and moved beyond the image area covered by the enlarged display memory at one time, the second enlarged image is scrolled seamlessly in the enlarged window. be able to. In the embodiment of FIG. 6, the update limit position is located inside the outer edge of the image segment by a predetermined pixel inside as shown by a broken line (for example, the outer edge of the image segment coincides with the outer edge of the enlarged display area). So) is set.
[0055]
Specifically, as shown in FIG. 6B, the update limit position can be set in a rectangular frame shape inside an image segment where the current pointer is located (hereinafter, referred to as a current segment). When the pointer reaches any one of the four sides constituting the rectangular enlarged display memory, as shown in FIG. 6C, one side of the update limit position rectangular frame at which the pointer has reached On the side, a new image segment adjacent to the current segment with one segment in between is supplemented, and the enlarged display memory is updated. When a plurality of (three in FIG. 6) image segments are arranged in the direction of the one side in the image segment enlarged display memory, one image segment adjacent to the current segment with one segment therebetween. Replenishment / update is performed in units of a plurality of image segments arranged in the direction including the segments. On the other hand, on one side of the side opposite to where the pointer of the update limit position rectangular frame has reached, the same number of image segments are erased from the enlarged display memory, and a memory shift is performed to replenish the image segments. . With this memory shift, the enlarged display window and the update limit position move within the enlarged display memory following the shifted image segment.
[0056]
In this way, when the enlarged window (enlarged display area) is moved to the next image segment, the destination image segment is already located at the center of the enlarged display memory space as shown in FIG. 6D. The display preparation image data always exists beforehand outside the enlarged window (enlarged display area) without any shortage, and is displayed in the enlarged window without making the user feel while downloading the image data. Images can be scrolled without interruption. However, reaching the update limit position described above means that the pointer reaches the update limit position in a direction outward from the center of the image segment, and when reaching the inside of the image segment, This is not the case, and no corresponding processing is performed.
[0057]
If the enlarged window (enlarged display area) extends over a plurality of image segments in the image segment address space, the areas corresponding to the enlarged windows of the image segments are combined according to the position of the enlarged window. By doing so, the enlarged image can be displayed in the enlarged window as if it were a continuous image. The set of image segments in FIG. 6 is a set of image segments corresponding to each of two page spread page images in a book format described later, that is, a set of image segments forming a second magnification image. In this case, in the image segment address space, the two page images are adjacent to each other, specifically, the rightmost segment of the image segments belonging to the left page image and the leftmost segment of the image segments belonging to the right page image. Is an adjacent segment in the image segment address space. Therefore, even in a plurality of image segments to which page images belong to, an enlarged image can be displayed in an enlarged window as if it were a continuous image as described above. .
[0058]
As shown in FIG. 19A, a plurality of types of enlarged windows having different dimensions are prepared, and as shown in FIG. 19B, a plurality of types of windows having different forms (for example, circular Window and a rectangular window), and a desired one is selected by, for example, clicking a selection button with a mouse (an enlarged window size conversion button in the former case, an enlarged window shape conversion button in the latter case), or the like. , Can be selected. Further, as shown in FIG. 20, an enlarged window size conversion input unit is provided, and a number can be entered therein to make it possible to change the size of the enlarged window as desired by the user.
[0059]
FIG. 13 is an example of an image viewer according to the embodiment of the present invention. The image viewer is configured in a book format, and two page images of a catalog book are arranged side by side on two facing pages. Above the image viewer, a current page number display, a page turning button, and a zoom selection button are formed. The image viewer also has a page search function, and when a desired page number is input, a page jump is performed from a current page to display a specified page. The page images are all undivided first magnification images which are all configured in the same size and are obtained by subtracting pixels from the third magnification image before division as described above. Then, as shown in FIG. 14A, such a page image can be browsed by being enlarged and displayed using the enlargement window.
[0060]
In this embodiment, since the catalog book is displayed in a two-page spread format, the first magnification image is a page image in which the pasted image area and the surrounding page areas other than the pasted image area are integrally inseparable. Then, as conceptually shown on the left page in FIG. 13 (the display is omitted on the right page because the drawing is complicated), the second magnification image data is defined as a division line of the pasted image area. It is assumed that the page image is equally divided into the second magnification segments by a division line determined independently. This page image is created by performing pixel conversion on the second magnification image data before division into a corresponding page so as to have the first magnification (for example, by thinning out pixels at regular intervals). The page image data is, for example, page data that has already been created by DTP or the like, which is output as a hard copy in the form of a composition, captured by a scanner, and processed into still image data (in the present embodiment, compression by JPEG). Note that the page data created by DTP may be converted into single page image data such as bitmap or JPEG by rasterizing on a computer.
[0061]
The enlarged window can be dragged across two page images displayed in a double-page spread, and when the position of the enlarged window is set to extend over the two page images as shown in FIG. According to the position of the enlargement window, the required second magnification segment from the two page images is loaded into the enlargement display memory so as to complement each other in the area of the enlargement display memory. Based on the second magnification segment corresponding to the page image, a second magnification image spanning the enlarged window is displayed.
[0062]
The image viewer can be configured in a book format having a plurality of page images. In such a case, the image can be turned one after another by using the page turning button attached to the image viewer. In the present embodiment, the image viewer has the following configuration to realize the page turning function. The image display memory in the RAM 14 includes a current display memory for displaying two pages of spread page image data downloaded from the WEB server 3 on the image viewer, and a page hidden under the two spread pages. A display preparation memory is formed which downloads, from the WEB server, four facing page images, which are images, which are four pages before or next to the currently displayed page by page turning, and holds the images. As a result, it is possible to quickly switch the page image data to be displayed at the time of turning the page forward or backward.
[0063]
Also, when the page turning instruction is given by clicking the page turning button, the data of the facing page image related to the display after turning in the display preparation memory is reloaded into the current display memory, Of the displayed two-page spread pages (FIG. 15A), the page image of the page to be turned is sequentially transformed as the page is turned so that the reduction ratio gradually increases only in the turning direction (FIG. 15B). On the other hand, after the turned page is hidden (FIG. 15C), the page images of the pages existing on the back side of the turned page are sequentially deformed so that the reduction ratio gradually decreases only in the turning direction. Later (FIG. 15C), a series of page-turning animation frames are displayed such that the next two pages of the double-page spread are displayed (FIG. 15E). Ri create a page image data, on the basis of the page turning animation for frame advance page image data, turned by the page (front and back) to display an animation representing gradually turned up state. Further, if the sound of turning the page (turning sound effect) is output from the speaker 20 of the terminal 5 at the same time as the display of the page turning animation, the user can experience a more realistic page turning. Become. Note that there is also a form in which the page turning is automatically performed after a predetermined time has elapsed after the currently displayed page is displayed, and the mode can be switched to a mode in which the page turning is performed when the above-described page turning instruction is given. Can be configured. This saves the hassle of turning pages for browsing, and it can be installed at stations or other places where people gather and turn pages at short intervals to display pages one after another. The effect as is also obtained.
[0064]
Animation frame feed page image data is a set of animation frames for page images with different reduction ratios. By switching and displaying these animation frames in the order of increasing or decreasing reduction ratio, the page turning animation is displayed. Is possible. In addition, the page turning animation is an image of two pages that are not involved in the turning operation among two pages that are displayed before the page turning and two pages that are displayed after the page turning. As an image, a page turning animation is combined with a background page image and displayed. A more realistic page turning display is possible by displaying the background page that is not involved in turning with the frame for animation of the page being turned.
[0065]
Also, when an instruction to turn the page is given, the page image data is loaded into both the current display memory and the display preparation memory, out of the page image data of four pages which appear before or next to the page to be spread after the page is turned. Only those that have not been downloaded are downloaded from the WEB server 3.
[0066]
Hereinafter, the flow of image display control processing for realizing the image display system of the present embodiment will be described with reference to the flowchart of FIG. First, a book format image display window is set in R1, and two pages of image data (two pages in total) displayed in R2 appear in the display memory and appear before or next to the page displayed in R3. It requests the web server 3 to download page image data for four pages into the display preparation memory for convenience, downloads the image data (R4), and displays a facing page (R5). When the enlarged display command is received in R6, the process proceeds to an enlarged display routine of R7 described later. If the enlarged display routine has been completed, or if the enlarged display command has not been received in R6, the process proceeds to R8. In R8, when the page is turned, the image data of the spread page image to be displayed next is moved to the display memory, and the image data of the currently displayed spread page image is moved to the display preparation memory. In addition, pages that do not correspond thereto, that is, image data that is not specified as a spread page image to be displayed next among image data in the display preparation memory are deleted from the display preparation memory. Then, in R11, a page image that does not exist in the display preparation memory among the image pages before and after the next spread page to be displayed is requested in the display preparation memory, download is returned to R4, and the spread page image is displayed in R5. I do. Thereafter, the process of returning from R4 to R4 via R11 (when a page turning command is issued in R6) is repeated, and the page turning process proceeds sequentially.
[0067]
When the enlarged display command is received at R6, the process proceeds to R7, and the routine proceeds to the enlarged display routine of FIG. First, in R71, an enlarged window is set on the currently displayed facing page image. Then, the address information of the segment address space composed of the image segment of the designated segment level (magnification) is read, and the image segment corresponding to the enlarged display area and the image segment forming the display preparation image data are read by the web server at R73 and R74. 3, the image segment is downloaded to the enlarged display memory in R75, and the enlarged image is displayed in the enlarged window in R76. Thereafter, when a drag movement command for the enlarged window (pointer) is input from the input unit 16 in R77, the process proceeds to R78, and the process proceeds to a later-described enlarged window moving process routine. Also, in R79, when a command to change the level of the image segment displayed in the enlarged window is input from the input unit 16, the level of the image segment is changed (for example, from the second magnification to the third magnification). ) To R72 to read the segment address information of the segment level to be changed, and then perform the same enlarged display processing of R72 to R72 at that segment level.
[0068]
The following describes the enlarged window moving processing routine of R78 shown in FIG. First, in R781, an image scroll process is performed. This is to move the enlarged display area in the moving direction in the enlarged display memory space in accordance with the drag movement of the enlarged window. Until the pointer reaches the update limit position due to the movement (that is, until it becomes Yes in R782), the process returns to R75 (however, in this case, R75 is skipped because there is no segment to download). A loop of displaying a new enlarged display area in the enlarged window in R76 and returning to the image scroll display of R781 is continued as long as the pointer is moved. Then, while continuing this loop, when the pointer reaches the update limit position (that is, in the case of Yes in R782), the enlargement display memory is updated so as to supplement a new image segment in the moving direction of the enlargement window. To do so (described in FIG. 6), the image segment on the rear side in the enlarged window moving direction in the enlarged display memory space is deleted, and a new image segment is requested to the WEB server 3. Then, the process returns to R65, downloads a new image segment to the enlarged display memory, and returns to the loop. Thus, the above processing is continued as long as the enlarged window continues to move. When this memory update process is performed using the interval of the frame switching process on the display screen, scroll discontinuity is less noticeable, and display quality can be improved.
[0069]
Hereinafter, the processing flow of the image display system of the present invention using the system 1 will be described. FIG. 10 is a flowchart showing an example of the flow of each process in the terminal 5 and the WEB server 3 in parallel with the exchange of data between the two. First, the terminal 5 activates a web browser to connect to the Internet (T1), and accesses a web page provided by the web server 3 using a designated address (T2). The WEB server 3 receives this (S1) and transfers the WEB file to the terminal 5 (S2). In the terminal 5, the web page is displayed based on the received web file (T3), the applet embedded in the web page is automatically activated (T4), and the above-described image display control process is started.
[0070]
Further, the WEB server 3 also serves as an online shopping server for merchandise, and as shown in FIG. 16, an additional function link button for online shopping can be set and displayed on a page image displayed in a double-page spread in a catalog book format. . Then, triggered by an operation signal of the additional function link button from the terminal 5, information communication for online shopping can be performed between the WEB server 3 and the terminal 5. For example, an online shopping screen for the corresponding product is displayed on the screen, the purchase quantity, the name and address of the purchaser, and the like, and a credit card number and the like are input as necessary. This input content is transmitted to the server as online order data, and the server confirms the order content and performs necessary processing for product delivery and billing. In this way, the user of the terminal 5 browses the catalog book and, if there is a favorite product, does not need troublesome procedures such as ordering by telephone or mail, and can easily purchase the product on the spot. can do.
[0071]
Further, it is a set of image data shot by frame while changing the relative shooting angle between the camera and the product in a predetermined direction. If the image data for display and the WEB page for displaying the three-dimensional display link button in association with the image area of the product on the page image of the catalog book are stored in the WEB server 3, the terminal 5 performs three-dimensional display. With the operation of the link button, the product 3D image data for the corresponding product is downloaded from the WEB server 3 to the terminal 5 and is displayed on the display device of the terminal 5 in the same image pasting area. By automatically switching and displaying the image data according to the chronological order, a pseudo three-dimensional image of the product can be displayed. .
[0072]
FIG. 17 shows a display example in which the images of the camera are switched in the order of (a), (b), (c), and (d). Here, the plurality of image data used for the switching is a set of image data shot by frame while changing the relative shooting angle between the camera and the subject in a predetermined direction, and is switched and displayed in the shooting angle order. Are determined in chronological order. When such a set of image data is switched and displayed, an animation in which the subject (camera) is rotated is reproduced in accordance with the change direction of the image switching relative shooting angle, and the two-dimensional image switching is performed. Nevertheless, three-dimensional information of the subject can be obtained. In the case of a catalog, a product of interest can be rotated and viewed, so that the part of interest can be defined from all angles. Such a function can be said to be a function that cannot be realized by a leaflet-type paper catalog.
[0073]
The flow of a program for realizing the display of a pseudo three-dimensional image of a product as described above will be described with reference to the flowchart in FIG. First, the first frame number (F = 1) is set in R1, and the image data of that frame number is downloaded and displayed in R2. Since the interval of frame switching is controlled by a known timer routine, the display of the frame is started and the timer is started. If the time is up at R3, the frame number is incremented at R4. If the incremented frame number does not exceed the maximum value N in R5, the process proceeds to R6, confirms that the display order reversal command has not been received, returns to R2, and replaces the image of the incremented frame number with a new image. Download and switch images. Thereafter, the process of returning to R2 via R2 to R6 is repeated, so that the switching display of the image sequentially proceeds. If the incremented frame number exceeds the maximum value N in R5, the process returns to R1, the frame number is set to 1, and the same processing is performed. As a result, after displaying the last frame, the display returns to the first frame to continue the switching display. Note that the downloaded image is stored in the cache memory of the terminal 5 and thereafter is read from the cache memory and displayed, so that a new download is not performed.
[0074]
On the other hand, when the display order is reversed in R6, the process proceeds to R7, and the decrement of the frame number is started. Then, it is confirmed at R8 that the frame number is not less than 1, and the image of the frame of that number is displayed at R10. Then, when the display time is up, the process returns to R7, and the frame number is further decremented. By repeating the following processing, the images are switched and displayed in the reverse order of R1 to R6. When the frame number becomes smaller than 1 in R8, the frame number is returned to the maximum value N, and the reverse switching reproduction is repeated. When the reverse rotation command is received again at R12, the process returns to R1 and returns to the forward switching display.
[0075]
Although the above embodiment has been described taking an electronic catalog book as an example, the present invention is not limited to this, and can be applied to fields other than catalogs such as electronic books and electronic maps. . Furthermore, the present invention is also applicable to publications other than book forms, such as pamphlets and leaflets.
[Brief description of the drawings]
FIG. 1 is a block diagram showing an example of the overall structure of an image display system according to the present invention.
FIG. 2 is a block diagram illustrating a configuration example of a terminal.
FIG. 3 is a block diagram illustrating a configuration example of a web server (data server).
FIG. 4 is an explanatory diagram of hierarchical structure image data.
FIG. 5 is an explanatory diagram of an enlarged display.
FIG. 6 is an explanatory diagram of a method of updating an enlarged display memory.
FIG. 7 is a flowchart showing the flow of an image display control process.
FIG. 8 is a flowchart showing the flow of an enlarged display process;
FIG. 9 is a flowchart showing the flow of a process of moving an enlarged window.
FIG. 10 is a flowchart showing the flow of a data distribution process by the system of FIG. 1;
FIG. 11 shows an example of enlargement ratio conversion using an enlargement ratio conversion button.
FIG. 12 is an explanatory diagram of a mechanism of enlargement ratio conversion.
FIG. 13 is a diagram illustrating an example of an image viewer that performs image display.
FIG. 14 is a diagram showing an example of an enlarged display in an image viewer.
FIG. 15 is a diagram showing a flow of a page turning animation.
FIG. 16 is a diagram showing an image display example in which link buttons are formed.
FIG. 17 is a diagram illustrating a display example of an image viewer that rotates and displays a product using a switching image.
FIG. 18 is a diagram showing a flow of rotation display control.
FIG. 19 is a diagram showing an example of an image viewer having an enlarged window size / shape conversion button.
FIG. 20 is a diagram showing an example of an image viewer having an enlarged window size conversion input unit;
[Explanation of symbols]
1 Image display system
2 Internet
3 WEB server
5 terminal

Claims

A first magnification image data storage unit that stores first magnification image data for displaying a predetermined image at a first magnification,
In order to display the image at a second magnification greater than the first magnification, the image has a higher resolution than the first magnification image data, and one image based on the first magnification image data corresponds to this. A second magnification image data storage unit that stores second magnification image data configured by a plurality of second magnification segments,
A display device for displaying the image,
On a screen of the display device, a first magnification image display control means for displaying the image as a first magnification image based on the first image data,
In order to enlarge and display a part of the first magnification image by the second magnification image, an enlargement window that is smaller than a display area of the first magnification image is set to be movable on the first magnification image. Window setting means,
An enlarged display memory for loading the second magnification image data as enlarged output image data,
Inside the first magnified image portion to be partitioned defined by the enlarged window, the first magnified image that is smaller than the first magnified image portion and satisfies a certain positional relationship with the first magnified image portion to be partitioned. A magnification image portion is set, and based on a portion corresponding to the first magnification image portion of the second magnification image data loaded in the enlarged display memory, the first magnification to be enlarged is set in the enlargement window. Enlarged display control means for displaying the second magnification image corresponding to the image portion in a form in which the size of the visible image is expanded, and updating the enlarged first magnification image portion which is enlarged and displayed with the movement of the enlargement window. When,
An image display system comprising:

2. The image display according to claim 1, wherein the enlarged display control unit displays the second magnification image corresponding to the enlarged first magnification image portion so that a blank area does not occur in a display area of the enlarged window. 3. system.

The enlarged display control means is configured to form the enlarged first magnification image portion in a similar shape in which a dimensional ratio of the enlarged window to a display area is equal to a relative magnification ratio of the first magnification image to the second magnification image. 3. The image display system according to claim 2, wherein the second magnification image corresponding to the first magnification image portion to be enlarged is displayed in the display region of the enlarged window without excess or shortage of the region. 4.

The enlargement window setting means sets the enlargement window so as to be continuously draggable on the first magnification image,
4. The enlargement display control means scrolls the second magnification image without interruption in the enlargement window as the enlargement window is dragged on the first magnification image. The image display system according to any one of the preceding claims.

The enlarged display memory has a memory area covering an image area wider than a display area of the enlarged window, and only a part of the second magnification image data is to be displayed in the enlarged window. A second magnification segment corresponding to the portion to be enlarged of the magnification image, and loaded as the enlarged output image data consisting of a second magnification segment that constitutes display preparation image data following the enlargement window,
The enlargement display control means updates the data load content to the enlargement display memory in units of the second magnification segment as the enlargement window drags and moves on the first magnification image, When the enlargement window reaches a predetermined update limit position in the movement direction, a new second magnification segment to be the preparation image data is replenished to the front in the movement direction of the enlargement window while performing a memory shift. 5. The method according to claim 4, wherein the data loading content of the enlarged display memory is updated, and the second magnification image is scroll-displayed seamlessly in the enlarged window using the supplemented second magnification segment. Image display system.

The first magnification image data storage unit and the second magnification image data storage unit are provided on a data server side, the display device is provided on a terminal side, and the data server is connected to the terminal via a communication network. Distributing the first magnification image data and the second magnification image data, and displaying the image on the display device using the distributed image data at the terminal,
On the terminal side, a second magnification segment to be loaded into the enlarged display memory is selectively downloaded from the data server, and when the enlarged window moves on the first magnification image, the enlarged window is displayed. 6. The image display system according to claim 5, further comprising an image download control unit for additionally downloading only the second magnification segment to be refilled from the data server.

In order to display the image at a third magnification that is higher than the second magnification, a third image data storage unit that stores third image data with a higher resolution than the second magnification image data Prepare,
The enlargement display control means enables the image of the second magnification in the enlargement window to be further enlarged and displayed at the third magnification on a screen of the display device based on the third image data. The image display system according to any one of claims 1 to 6.

8. The image display system according to claim 7, wherein the enlarged display control means switches the enlarged image at the third magnification and the image at the second magnification in the enlarged window and displays the image.

The third image data is configured by a set of a plurality of third magnification segments corresponding to each of the second magnification segments,
The enlargement display control means has enlargement area designating means for designating an image area to be further enlarged and displayed on the image of the second magnification in the enlargement window, and a third magnification corresponding to the designated image area. 9. The image display system according to claim 8, wherein a segment is selectively read from the third image data storage unit and displayed in the enlarged window.

The image download control means has a requirement according to claim 6, wherein the image download control means downloads only a third magnification segment necessary for an image of a third magnification to be displayed in the enlargement window from the data server. The image display system according to claim 9.

The first magnification image is for displaying a page of a publication including a pasted image on the screen of the display device, and the enlargement window setting unit drags the enlargement window on the page. The image display system according to any one of claims 1 to 10, wherein the image display system is set to be movable.

The first magnification image is a page image in which a pasted image region and a surrounding page region other than the pasted image region are integrally inseparable, and the second magnification image data is a division line of the pasted image region. The page image is equally divided into the second magnification segment by a dividing line determined independently of
The page image forming the first magnification image is created by performing pixel conversion on the second magnification image data before dividing the corresponding page so as to have the first magnification. Image display system.

The first magnification image data storage unit is to store data of each page image of the publication in book format as the first magnification image data,
A current display memory for loading data of a two-page spread page image of the publication in a page display area of the display device,
A display preparation memory for loading a four-page spread page image which is a page image hidden under the two-page spread and which appears before or next to the currently displayed page by turning pages;
Page turning instruction means for instructing a turning display operation on the first turning page, with one of the pages forming the currently displayed double-page image as the first turning page,
When there is an instruction to turn the page, the current display memory reloads the data of the facing page image related to the display after turning in the display preparation memory, and the pasted image area and the pasted image area The page image data of the first turning page is sequentially transformed so that the reduction ratio gradually increases only in the turning direction as the page turning progresses, without being distinguished from the surrounding page areas other than the first turning page. After the turning page is hidden, the page image data of the second turning page present on the back side of the first turning page is sequentially deformed so that the reduction ratio gradually decreases only in the turning direction, and a series of Creates page-turn animation page-turning page image data and creates a page-turning animation Te, the page turning animation showing the state of turning-up the first and second target page turning gradually, and page turning animation display control means for displaying on the page display region,
The image display system according to claim 11, comprising:

7. The image download control means having the requirement according to claim 6, wherein the image download control means, when instructed to turn the page, displays page image data for four convenient pages which appear before or next to the page which is displayed after the page is turned. 14. The image display system according to claim 13, wherein only the data that is not loaded into any of the current display memory and the display preparation memory is downloaded from the data server.

The zoom window has a requirement according to claim 5, wherein the enlarged window can be dragged across the two spread page images, and the position of the enlarged window is set so as to extend over the two page images. The required second magnification segments from the two page images are loaded into the enlarged display memory so as to complement each other in the enlarged display memory area in accordance with the position of the enlarged window. 15. The image display system according to claim 13, wherein a second magnification image spanning two pages is displayed in the enlarged window based on a second magnification segment corresponding to the two loaded page images.

The image display system according to claim 13, wherein the publication is a catalog book, and the pasted image area is an image area of a product published in the catalog book.

In addition to the requirement according to claim 6, the data server also serves as an online shopping server for products formed in the catalog book,
On the page image of the catalog book displayed on the display device of the terminal, an additional function link button for online shopping is set and displayed,
17. The image display system according to claim 16, wherein information communication for online shopping is performed between the data server and the terminal in response to an operation signal of the additional function link button from the terminal.

With the requirement of claim 6, on the page image of the catalog book displayed on the display device of the terminal, a three-dimensional display link button is set and displayed in association with the image area of the product,
Further, the data server includes a set of image data shot by time-lapse shooting while changing the relative shooting angle of the camera and the product in a predetermined direction, and the time series of the switching display in the shooting angle order. The image data for product stereoscopic display in which is defined is stored,
As the three-dimensional display link button is operated on the terminal, the three-dimensional display image data of the corresponding product is downloaded from the data server to the terminal, and the same image pasting area is displayed on the display device of the terminal. 18. The image display according to claim 16, wherein a pseudo three-dimensional image of the product is displayed by automatically and sequentially switching and displaying the image data for product three-dimensional display according to the chronological order. system.

19. The enlargement window according to claim 1, wherein a plurality of types of enlargement windows having different shapes and / or dimensions are prepared, and enlargement window selecting means for selecting a desired one from the plurality of enlargement windows is provided. The image display system according to the paragraph.

The image display system according to any one of claims 1 to 19, further comprising an enlarged window size setting / changing unit configured to set the size of the enlarged window to be changeable.

A computer program for causing a computer to function as each unit of the image display system according to claim 1.