JP3720425B2

JP3720425B2 - Information processing apparatus and method

Info

Publication number: JP3720425B2
Application number: JP24160895A
Authority: JP
Inventors: 隆八木田
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1995-09-20
Filing date: 1995-09-20
Publication date: 2005-11-30
Anticipated expiration: 2015-09-20
Also published as: JPH0991116A

Description

【０００１】
【発明の属する技術分野】
本発明は、複数ページの情報の参照を実際の本のイメージで行い、多数の情報に容易にアクセスできる情報処理装置及びその方法に関するものである。
【０００２】
【従来の技術】
従来より、ウインドウ形式を用いたグラフィカル・ユーザ・インターフェイス（ＧＵＩ）では、スクロール・バーやダイアログ等によりページを指定して、ブラウズウインドウに表示する情報のページ切り替えを行っていた。
【０００３】
【発明が解決しようとする課題】
しかし、従来のようなスクロール・バーやダイアログ等によりページを指定して、ブラウズウインドウに表示する技術を用いた場合、指定したページしか表示されず、複数の情報を同時に表示できないという欠点があった。
【０００４】
また、ワープロ等のエディターなどで行なっている次ページを参照する操作は、ワープロ等を使い慣れていないユーザにとっては、操作が複雑であるという欠点があった。
【０００５】
【課題を解決するための手段】
上記課題を解決するために、請求項１に記載の情報処理方法は、複数ページからなる画像データのうちの２ページを、ブック形式で見開き表示するページ表示工程と、ユーザが操作する位置座標指示手段によって指示された表示画面上の位置座標に基づいて、前記ページ表示工程で表示された右ページまたは左ページのページめくり処理を実行するページめくり工程とを有し、前記ページめくり工程は、更に、前記位置座標指示手段による指示が開始された際に指示された位置座標が右ページ上であるか左ページ上であるか判断し、その判断の結果、右ページ上であると判断すれば当該右ページをページめくり処理対象ページとし、一方、左ページ上であると判断すれば当該左ページをページめくり処理対象ページとして、前記ページめくり処理を開始するページめくり開始工程と、前記位置座標指示手段による指示がなされているあいだ、前記位置座標指示手段により指示されている位置座標に対して前記ページめくり処理対象ページの端あるいは当該ページめくり処理対象ページの裏側となるページの端を追従させ、且つ、当該指示されている位置座標が前記ページめくり開始工程で位置座標の指示が開始されたときのページと同じページ上にある場合は前記ページめくり処理対象ページの画像を圧縮して表示し、当該指示されている位置座標が前記ページめくり開始工程で位置座標の指示が開始されたときのページと異なるページ上にある場合は前記ページめくり処理対象ページの裏側となるページの画像を圧縮して表示するページめくり途中工程と、前記位置座標指示手段による指示が終了した際に指示されていた位置座標が、右ページ上であるか左ページ上であるか判断し、その判断の結果、左ページ上であると判断すれば前記ページめくり途中工程で当該左ページ上に圧縮して表示されている画像を左ページ上で伸張して表示し、一方、右ページ上であると判断すれば前記ページめくり途中工程で当該右ページ上に圧縮して表示されている画像を右ページ上で伸張して表示するページめくり終了工程とを含むことを特徴とする。
【０００６】
上記課題を解決するために、請求項２に記載の情報処理方法は、請求項１に係る情報処理方法であって、前記ページめくり途中工程では、前記ページめくり処理対象ページの下となるページの画像も表示することを特徴とする。
【０００７】
上記課題を解決するために、請求項３に記載の情報処理方法は、請求項１に係る情報処理方法であって、前記位置座標指示手段は、ポインタであることを特徴とする。
【０００８】
上記課題を解決するために、請求項４に記載の情報処理方法は、請求項１に係る情報処理方法であって、前記位置座標指示手段は、タッチパネルであることを特徴とする。
【０００９】
上記課題を解決するために、請求項５に記載の情報処理方法は、請求項１に係る情報処理方法であって、前記複数ページからなる画像データは、複数ページからなるアイコン画像であることを特徴とする。
上記課題を解決するために、請求項６に記載の情報処理方法は、請求項５に係る情報処理方法であって、更に、ユーザからの指示に応答して、前記ページ表示工程にてブック形式で見開き表示されているアイコン画像のうち、ユーザにより指示されたアイコン画像の元の画像を表示する元画像表示工程を有することを特徴とする。
【００１０】
上記課題を解決するために、請求項７に記載の情報処理装置は、複数ページからなる画像データのうちの２ページを、ブック形式で見開き表示するページ表示手段と、ユーザが操作する位置座標指示手段によって指示された表示画面上の位置座標に基づいて、前記ページ表示手段で表示された右ページまたは左ページのページめくり処理を実行するページめくり手段とを有し、前記ページめくり手段は、更に、前記位置座標指示手段による指示が開始された際に指示された位置座標が右ページ上であるか左ページ上であるか判断し、その判断の結果、右ページ上であると判断すれば当該右ページをページめくり処理対象ページとし、一方、左ページ上であると判断すれば当該左ページをページめくり処理対象ページとして、前記ページめくり処理を開始するページめくり開始手段と、前記位置座標指示手段による指示がなされているあいだ、前記位置座標指示手段により指示されている位置座標に対して前記ページめくり処理対象ページの端あるいは当該ページめくり処理対象ページの裏側となるページの端を追従させ、且つ、当該指示されている位置座標が前記ページめくり開始手段で位置座標の指示が開始されたときのページと同じページ上にある場合は前記ページめくり処理対象ページの画像を圧縮して表示し、当該指示されている位置座標が前記ページめくり開始手段で位置座標の指示が開始されたときのページと異なるページ上にある場合は前記ページめくり処理対象ページの裏側となるページの画像を圧縮して表示するページめくり途中手段と、前記位置座標指示手段による指示が終了した際に指示されていた位置座標が、右ページ上であるか左ページ上であるか判断し、その判断の結果、左ページ上であると判断すれば前記ページめくり途中手段で当該左ページ上に圧縮して表示されている画像を左ページ上で伸張して表示し、一方、右ページ上であると判断すれば前記ページめくり途中手段で当該右ページ上に圧縮して表示されている画像を右ページ上で伸張して表示するページめくり終了手段とを含むことを特徴とする。
【００１１】
【発明の実施の形態】
以下、添付図面を参照して、本発明に係る好適な実施例を詳細に説明する。
【００１２】
図１は、本発明の第１の実施形態に係る情報処理装置の構成を示すブロック図である。
【００１３】
同図中、１はキー入力部であり、オペレータにより操作され各種情報を入力する。２は、表示部であり種々のメッセージや画像を表示する。３はパネル制御部であって、上記キー入力部１及び表示部２を制御する。４はＤＭＡコントローラ（以下「ＤＭＡＣ」という）で、画像データ等のＤＭＡ転送を行っている。５は画像情報出力部であって、後述の画像入出力制御部７を介して出力される画像情報を入力している。７は画像入出力制御部であり、画像情報出力部５、画像情報入力部６とシステムバス１６との間でインターフェイス制御を行うと共に画像情報出力部５、画像情報入力部６を制御する。８は通信部であって、通信回線１７を介して通信を行う。９は通信制御部であって、通信部８を制御する。
【００１４】
１０は、補助記憶部であって、通信部８を介して受信された圧縮画像叉は画像情報入力部６より入力され、後述の圧縮／伸長部１４で圧縮された送信用の画像を記憶するハードディスク等の大容量のメモリを有している。１１はマイクロプロセッサ等のＭＰＵであって、端末装置全体の制御を行い、特に後述のＲＯＭ１２に格納された制御プログラムに従って、各種データ信号や、制御信号を出力して装置全体の制御を行っている。１２はＲＯＭ／ＲＡＭであって、後述の図２、３のフローチャートで示されるような制御プログラム等が格納及び、ＭＰＵ１１のワークエリアとして使用され、種々の制御データが一時保存される。
【００１５】
１３は画像メモリであり、画像情報入力部６より入力されるか、或いは通信部８より受信された画像データを一時的に保存したり、画像情報出力部５に出力する画像データ等を格納している。１４は圧縮／伸長部であって、通信部８を介して送受信される画像情報を圧縮／伸長する圧縮／伸長部である。１５は、画像情報入力部６から読み取った画像や通信回線１７から通信部８を介して受信した画像から文字や記号を認識する文字認識部（以下ＯＣＲと呼ぶ）である。１６はシステムバスである。１８はタッチパネル信号入力部、１９はマウス信号入力部である。
【００１６】
以下、本実施形態におけるＢＯＯＫ型ブラウズ方法について説明する。
【００１７】
図２は、本実施形態に係る方式において、情報を表示する方法に関するフローチャートである。
【００１８】
図２では、ステップＳ２０１においてユーザによりファイルが選択されるとファイルをオープンし、ステップＳ２０２において、１ページに表示できる情報に分割し１ページのページ画像を作成する。ステップＳ２０３においてステップＳ２０２で作成したページ画像をページアイコンのサイズに縮小しアイコン画像を作成する。ステップＳ２０４において、図４の４０１のＢＯＯＫ型アイコンにステップＳ２０３において作成したアイコン画像を、本を開いた状態のように図４の４０１ａの左側のページアイコン領域にページ１のアイコン画像、図４の４０１ｂの右側のページアイコン領域にページ２のアイコン画像を表示する。更にステップＳ２０５において図４の４０３のページ表示画面にステップＳ２０２で作成したページ画像で図４の４０１ａの左側のページアイコン領域に示されるアイコン画像に対応したものを表示する。
【００１９】
図３は、ＢＯＯＫ型アイコンを用いたブラウズ機能に関するフローチャートである。
【００２０】
現在、ＢＯＯＫ型アイコンの左側のページアイコン領域４０１ａにはページ２ｎ−１のアイコン画像、右側のページアイコン領域４０１ｂにはページ２ｎ（ｎ：正の整数）のアイコン画像が表示されていると仮定する。ユーザは、図４の４０１のＢＯＯＫ型アイコンの領域内をクリックすると、ステップＳ３０１において、クリックされた位置を検知する。ステップＳ３０２において、クリックされた位置が図４の４０１ａの左側のページアイコン領域か、図４の４０１ｂの右側のページアイコン領域かを判断する。
【００２１】
クリックされた領域が４０１ｂの右側のページアイコン領域であればステップＳ３０３においてページを進める方向にページをめくる処理を行い、左側には、ページ２ｎ＋１、右側にはページ２（ｎ＋１）（ｎは整数）のアイコン画像を表示する。ステップＳ３０２において、クリックされた領域が図４の４０１ａの左側のページアイコン領域であればステップＳ３０８においてページを戻す方向にページをめくる処理を行い左側には、２（ｎ−１）−１ページ、右側には２（ｎ−１）ページのアイコン画像を表示する。ステップＳ３０３およびステップＳ３０８のページめくり処理が終了したらユーザのオペレーション操作待ち状態になる。ステップＳ３０４において、再び、ＢＯＯＫ型アイコンがクリックされるとステップＳ３０２からの処理を行う。
【００２２】
この待ち状態ステップＳ３０４でユーザが図４の４０２のページ表示ボタンをクリックするとステップＳ３０５において、図４の４０２ａの左側ページ表示ボタン領域であれば、４０１ａの左側のページアイコン領域に表示されているアイコン画像に対応したページ画像を図４の４０３ページウインドウに表示する。また、ステップＳ３０５において、クリックされた領域が図４の４０２ｂの右側ページ表示ボタン領域であれば、４０１ｂの右側のページアイコン領域に表示されているアイコン画像に対応したページ画像を図４の４０３ページウインドウに表示する。
【００２３】
ページ画像をページウインドウに表示した後はユーザ入力待ち状態になり、ステップＳ３０７においてどこがクリックされるか判断し以降の処理を決定する。
【００２４】
４０１のＢＯＯＫ型アイコンがクリックされるとステップＳ３０２からの処理を行う。４０２のページ表示ボタンがクリックされるとステップＳ３０５からの処理を行う。４０４の終了ボタンが選択されるとこのフローチャートの処理を終了する。
【００２５】
次に、ステップＳ３０３の右ページめくり処理について説明する。
【００２６】
まず、図７、図８は図４のＢＯＯＫ型アイコンを拡大した図である。
【００２７】
図６のステップＳ６０１において、図４の４０１に表示されている２ページ（ページ２ｎ−１とページ２ｎとする）（ｎは任意の整数）の次の２ページ（ページ２ｎ＋１とページ２（ｎ＋１）とする）分のアイコン画像のデータを読み込む。ステップＳ６０２において、ページ２ｎのアイコン画像の圧縮を行う。ページアイコンの画像サイズは横をｘＳｉｚｅ、縦をｙＳｉｚｅとし、ページ２ｎのアイコン画像を横方向に圧縮し、縦ｙＳｉｚｅ、横ｋ（ｋ＝ｘＳｉｚｅ−ａ）（ａはｘＳｉｚｅ未満の整数）の圧縮アイコン画像にする。ステップＳ６０３において、ステップＳ６０２で作成されたページ２ｎの圧縮アイコン画像を図４−４０１のＢＯＯＫ型アイコンの領域内の座標（ｘ＋ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｘＳｉｚｅ＋ｋ，ｙ）、座標（ｘ＋ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋ｘＳｉｚｅ＋ｋ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図７の様に表示する。
【００２８】
ステップＳ６０４において、ページ２（ｎ＋１）のアイコン画像の一部を表示する。表示する領域はページ２（ｎ＋１）のアイコン画像の座標（ｋ，０）、座標（ｘＳｉｚｅ，０）、座標（０，ｙＳｉｚｅ）、座標（ｘＳｉｚｅ，ｙＳｉｚｅ）で囲まれた領域の画像を図４−４０１のＢＯＯＫ型アイコンの領域内の座標（ｘ＋ｘＳｉｚｅ＋ｋ，ｙ）、座標（ｘ＋２＊ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｘＳｉｚｅ＋ｋ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋２＊ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図７の様に表示する。
【００２９】
次にステップＳ６０５において、ｋに値（ｋ−ａ）を代入し、ステップＳ６０６においてｋの値が０以下でなければ、ステップＳ６０１からステップＳ６０６までの処理を繰り返す。ステップＳ６０６において、ｋの値が０以下であればステップＳ６０７に処理を移行する。
【００３０】
さらにステップＳ６０７においてページ２ｎ＋１のアイコン画像の圧縮を行う。ページ２ｎ＋１のアイコン画像を横方向に圧縮し、縦ｘＳｉｚｅ、横ｊ（ｊ＝ａ）の圧縮アイコン画像にする。ステップＳ６０８において、ステップＳ６０７で作成されたページ２ｎ＋１の圧縮アイコン画像を図４−４０１のＢＯＯＫ型アイコンの領域内の座標（ｘ＋ｘＳｉｚｅ−ｊ，ｙ）、座標（ｘ＋ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｘＳｉｚｅ−ｊ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図８の様に表示する。ステップＳ６０９において、ページ２ｎ−１のアイコン画像の一部を表示する。表示する領域はページ２ｎ−１のアイコン画像の座標（０，０）、座標（ｘＳｉｚｅ−ｊ，０）、座標（０，ｙＳｉｚｅ）、座標（ｘＳｉｚｅ−ｊ，ｙＳｉｚｅ）で囲まれた領域の画像を図４−４０１のＢＯＯＫ型アイコンの領域内の座標（ｘ，ｙ）、座標（ｘ＋ｘＳｉｚｅ−ｊ，ｙ）、座標（ｘ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋ｘＳｉｚｅ−ｊ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図８の様に表示する。
【００３１】
次にステップＳ６１０において、ｊに値ｊ＋ａを代入し、ステップＳ６１１においてｊの値がｘＳｉｚｅの値を越えなければ、ステップＳ６０７からステップＳ６１１までの処理を繰り返す。ステップＳ６１１においてｊの値がｘＳｉｚｅの値を越えるとページめくりの処理を終了する。また、上記の処理を横方向を逆転させることにより、ステップＳ３０８の左ページめくり処理を行なうことができる。
【００３２】
次に、マウスに追従するページめくりの方式について説明する。
【００３３】
まず、図１０、図１１、図１２、図１３、図１６、図１７は、図４のＢＯＯＫ型アイコンを拡大した図である。
【００３４】
図４のブラウズ画面のＢＯＯＫ型アイコンの領域でマウスがクリックされた場合、ステップＳ１０１においてマウスのボタンダウンの割込みが発生する。ステップＳ１０２において割込みが発生したマウスのボタンダウンのポインタ座標が４０１ａの左側のページアイコン領域にあるか、４０１ｂの右側のページアイコン領域にあるかを判断する。４０１ａの左側のページアイコン領域にポインタ座標があれば、ステップＳ１０３で４０１ａの左側のページアイコン領域のページめくり開始処理を行う。左側のページアイコン領域のページめくり開始処理とは、図１０の左ページで、マウスボタンダウン割り込みが指示された位置までの圧縮された画像を表示する処理である。図１０において、左側のページアイコン領域にはページ２ｎ−１、右側のページアイコン領域にはページ２ｎが表示さていると仮定する。図１０の左側のページアイコン領域にあるマウスポインタのボタンダウンされた座標を（Ｘ０、Ｙ０）とする。
【００３５】
図１４はステップＳ１０３のページめくり開始処理を説明するフローチャートである。
【００３６】
ステップＳ１５１において、ページ２ｎ−１のアイコン画像の圧縮を行う。ページアイコンの画像サイズは横をｘＳｉｚｅ、縦をｙＳｉｚｅとし、ページ２ｎ−１のアイコン画像を横方向に圧縮し、縦ｙＳｉｚｅ、横ｘＳｉｚｅ−ｄ（ｄの初期値はａ）（ａはｘＳｉｚｅ未満の整数）の圧縮アイコン画像にする。ステップＳ１５２において、ステップＳ１５１で作成されたページ２ｎ−１の圧縮アイコン画像を図１１の左側のページアイコン領域の座標（ｘ＋ｄ，ｙ）、座標（ｘ＋ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｄ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１１の様に表示する。以上のステップＳ１５１とステップＳ１５２の処理により、横方向にｄだけ圧縮された画像が、２ｎー１ページに表示される。ステップＳ１５３において、ページ２（ｎ−１）−１のアイコン画像の一部を表示する。表示する領域はページ２（ｎ−１）−１のアイコン画像の座標（０，０）、座標（ｄ，０）、座標（０，ｙＳｉｚｅ）、座標（ｄ，ｙＳｉｚｅ）で囲まれた領域の画像を図１１のＢＯＯＫ型アイコンの領域内の座標（ｘ，ｙ）、座標（ｘ＋ｄ，ｙ）、座標（ｘ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋ｄ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１１の様に表示する。
【００３７】
次にステップＳ１５４において、ｄに値ｄ＋ａを代入し、ステップＳ１５５においてｄの値がＸ０−ｘ以下であれば、ステップＳ１５１からステップＳ１５５までの処理を繰り返す。ステップＳ１５５において、ｄの値がＸ０−ｘ以下でなければこの処理を終了する。これらの処理によりステップＳ１０３の左領域ページめくり開始処理が行なえる。
【００３８】
ステップＳ１０２において割込みが発生したマウスのボタンダウンのポインタ座標が４０１ｂの右側のページアイコン領域にある場合、ステップＳ１０４で４０１ｂの右側のページアイコン領域のページめくり開始処理を行う。図１２の右側のページアイコン領域にあるマウスポインタのボタンダウンされた座標を（Ｘ１０、Ｙ１０）とする。
【００３９】
図１５はステップＳ１０４のページめくり開始処理を説明するフローチャートである。ステップＳ１６１において、ページ２ｎのアイコン画像の圧縮を行う。ページアイコンの画像サイズは横をｘＳｉｚｅ、縦をｙＳｉｚｅとし、ページ２ｎのアイコン画像を横方向に圧縮し、縦ｙＳｉｚｅ、横ｍ（ｍの初期値はｘＳｉｚｅ）の圧縮アイコン画像にする。ステップＳ１６２において、ステップＳ１６１で作成されたページ２ｎの圧縮アイコン画像を図１２の右側のページアイコン領域の座標（ｘ＋ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｘＳｉｚｅ＋ｍ，ｙ）、座標（ｘ＋ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）、座標（ｘ２，ｙ２）即ち、（ｘ＋ｘＳｉｚｅ＋ｍ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１２の様に表示する。以上のステップＳ１６１とステップＳ１６２の処理により、横方向に圧縮された画像が２ｎページに表示される。ステップＳ１６３において、ページ２（ｎ＋１）のアイコン画像の一部を表示する。表示する領域はページ２（ｎ＋１）のアイコン画像の座標（ｍ，０）、座標（ｘＳｉｚｅ，０）、座標（ｍ，ｙＳｉｚｅ）、座標（ｘＳｉｚｅ，ｙＳｉｚｅ）で囲まれた領域の画像を図１２のＢＯＯＫ型アイコンの領域内の座標（ｘ＋ｘＳｉｚｅ＋ｍ，ｙ）、座標（ｘ＋２＊ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｘＳｉｚｅ＋ｍ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋２＊ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１２の様に表示する。次にステップＳ１６４において、ｍに値ｍ−ａを代入し、ステップＳ１６５においてｍの値がＸ１０−ｘ未満であれば、ステップＳ１６１からステップＳ１６５までの処理を繰り返す。ステップＳ１６５において、ｍの値がＸ１０−（ｘ＋ｘＳｉｚｅ）以上であればこの処理を終了する。これらの処理によりステップＳ１０４の右領域ページめくり開始処理が行なえる。
【００４０】
次に、マウスダウンの割込み後、ユーザーが本のページの端を持ってページをめくる様にマウスポインタを移動させ、ページをマウスポインタに追従させる処理について説明する。
【００４１】
ステップＳ１０５において、マウスムーブの割込みを受け付けるとステップＳ１０６に移行し、１つ前のマウスムーブの割込み、もしくはマウスダウンの割込みのポインタ座標と今回受け付けたマウスムーブの割込みのポインタ座標が同じ領域（右側のページアイコン領域どうし、もしくは左側のページアイコン領域どうし）でなければ、ステップＳ１１０へ処理を移行する。ここでは、左側のページアイコン領域から右側のページアイコン領域へマウスポインタが移動する場合について説明する。
【００４２】
図１６において、左側のページアイコン領域の最後のマウスムーブ割込みのポインタ座標を（Ｘ２０、Ｙ２０）、右側のページアイコン領域にマウスが移動して初めてのマウスムーブ割り込みのポインタ座標を（Ｘ２１、Ｙ２１）とする。ステップＳ１１０では、ポインタ座標が（Ｘ２０、Ｙ２０）の時のページめくり状態から右側のページアイコン領域と左側のページアイコン領域との境界までのページめくり処理を行なう。即ち、２ｎー１ページに表示されている画像を消去する処理を行っている。
【００４３】
さらに、ステップＳ１１１において、右側のページアイコン領域と左側のページアイコン領域との境界からポインタ座標（Ｘ２１、Ｙ２１）におけるページめくり状態めでのページめくり処理を行なう。これらの処理の後は、ステップＳ１０５へ進む。
【００４４】
ステップＳ１１２においてマウスアップの割込みが発生したらステップＳ１１３へ処理を移行する。ステップＳ１０６において、１つ前のマウスムーブの割込み、もしくはマウスダウンの割込みのポインタ座標と今回受け付けたマウスムーブの割込みのポインタ座標が同じ領域（右側のページアイコン領域どうし、もしくは左側のページアイコン領域どうし）であれば、ステップＳ１０７へ処理を移行する。ステップＳ１０７において、マウスムーブ割込みのポインタ座標が左側のページアイコン領域にあるか、左側のページアイコン領域に有るかを判断する。マウスムーブポインタが左側のページアイコン領域にあった場合は、ステップＳ１０８へ移動し以下の処理を行なう。
【００４５】
図１４はステップＳ１０８のページめくり開始処理を説明するフローチャートである。
【００４６】
ステップＳ１５１において、ページ２ｎ−１のアイコン画像の圧縮を行う。ページアイコンの画像サイズは横をｘＳｉｚｅ、縦をｙＳｉｚｅとし、ページ２ｎ−１のアイコン画像を横方向に圧縮し、縦ｙＳｉｚｅ、横ｘＳｉｚｅ−ｄ（ｄの初期値はａ）（ａはｘＳｉｚｅ未満の整数）の圧縮アイコン画像にする。ステップＳ１５２において、ステップＳ１５１で作成されたページ２ｎ−１の圧縮アイコン画像を図１１の左側のページアイコン領域の座標（ｘ＋ｄ，ｙ）、座標（ｘ＋ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｄ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１１の様に表示する。以上のステップＳ１５１とステップＳ１５２の処理により、横方向にｄだけ圧縮された画像が、２ｎー１ページに表示される。
【００４７】
ステップＳ１５３において、ページ２（ｎ−１）−１のアイコン画像の一部を表示する。表示する領域はページ２（ｎ−１）−１のアイコン画像の座標（０，０）、座標（ｄ，０）、座標（０，ｙＳｉｚｅ）、座標（ｄ，ｙＳｉｚｅ）で囲まれた領域の画像を図１１のＢＯＯＫ型アイコンの領域内の座標（ｘ，ｙ）、座標（ｘ＋ｄ，ｙ）、座標（ｘ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋ｄ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１１の様に表示する。
【００４８】
次にステップＳ１５４において、ｄに値ｄ＋ａを代入し、ステップＳ１５５においてｄの値がＸ０−ｘ以下であれば、ステップＳ１５１からステップＳ１５５までの処理を繰り返す。ステップＳ１５５において、ｄの値がＸ０−ｘ以下でなければこの処理を終了する。これらの処理によりステップＳ１０８のページめくり開始処理が行なえる。
【００４９】
ステップＳ１０７において、マウスムーブポインタが右側のページアイコン領域にあった場合は、ステップＳ１０９へ移動し以下の処理を行なう。図１５はステップＳ１０９のページめくり開始処理を説明するフローチャートである。
【００５０】
ステップＳ１６１において、ページ２ｎのアイコン画像の圧縮を行う。ページアイコンの画像サイズは横をｘＳｉｚｅ、縦をｙＳｉｚｅとし、ページ２ｎのアイコン画像を横方向に圧縮し、縦ｙＳｉｚｅ、横ｍ（ｍの初期値はｘＳｉｚｅ）の圧縮アイコン画像にする。ステップＳ１６２において、ステップＳ１６１で作成されたページ２ｎの圧縮アイコン画像を図１２の右側のページアイコン領域の座標（ｘ＋ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｘＳｉｚｅ＋ｍ，ｙ）、座標（ｘ＋ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）、座標（ｘ２，ｙ２）即ち（ｘ＋ｘＳｉｚｅ＋ｍ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１２の様に表示する。以上のステップＳ１６１とステップＳ１６２の処理により、横方向に圧縮された画像が２ｎページに表示される。ステップＳ１６３において、ページ２（ｎ＋１）のアイコン画像の一部を表示する。表示する領域はページ２（ｎ＋１）のアイコン画像の座標（ｍ，０）、座標（ｘＳｉｚｅ，０）、座標（ｍ，ｙＳｉｚｅ）、座標（ｘＳｉｚｅ，ｙＳｉｚｅ）で囲まれた領域の画像を図１２のＢＯＯＫ型アイコンの領域内の座標（ｘ＋ｘＳｉｚｅ＋ｍ，ｙ）、座標（ｘ＋２＊ｘＳｉｚｅ，ｙ）、座標（ｘ＋ｘＳｉｚｅ＋ｍ，ｙ＋ｙＳｉｚｅ）、座標（ｘ＋２＊ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１２の様に表示する。
【００５１】
次にステップＳ１６４において、ｍに値ｍ−ａを代入し、ステップＳ１６５においてｍの値がＸ１０−ｘ未満であれば、ステップＳ１６１からステップＳ１６５までの処理を繰り返す。ステップＳ１６５において、ｍの値がＸ１０−（ｘ＋ｘＳｉｚｅ）以上であればこの処理を終了する。これらの処理によりステップＳ１０９のページめくり開始処理が行なえる。
【００５２】
次に、ステップＳ１１２では、次に入ってきたマウスの割り込みがマウスムーブの割込みか、マウスアップの割込みかを判断する。マウスムーブであれば、図９のフローチャートの様にステップＳ１０６へ進む。ステップＳ１１２において、マウスの割込みがマウスアップの割込みであれば、ステップＳ１１３へ処理を移行する。ステップＳ１１３において、マウスムーブの割込みのポインタ座標が右側のページアイコン領域にあるか、左側のページアイコン領域に有るかを判断する。ポインタ座標が左側のページアイコン領域にあればステップＳ１１５へ進む。
【００５３】
図１７は、マウスアップのポインタ座標が（Ｘ３１、Ｙ３１）の時の状態を表わす図で、図１８は一回分のページめくりの後処理を表わす、フローチャートである。
【００５４】
ステップＳ１９１において、縦ｙＳｉｚｅ、横ｘＳｉｚｅのページ２ｎ−１のアイコン画像を縦ｙＳｉｚｅ、横Ｘ３１−ａ＊ｉ（ｉは整数、初期値１）の画像サイズに圧縮する。ステップＳ１９２においてページ２ｎ−１のアイコン画像を座標（Ｘ３１−ａ＊ｉ）、（ｘ＋ｘＳｉｚｅ，ｙ）（ｘ３１−ａ＊ｉ，ｙ＋ｙＳｉｚｅ）、（ｘ＋ｘＳｉｚｅ，ｙ＋ｙＳｉｚｅ）で囲まれた矩形領域に表示する。更に、ステップＳ１９３においてページ２（ｎ−１）−１の画像の一部を表示する。表示する領域はページ２（ｎ−１）−１のアイコン画像の座標（０，０）、座標（Ｘ３１−ａ＊ｉ−ｘ，０）、座標（０，ｙＳｉｚｅ）、座標（Ｘ３１−ａ＊ｉ−ｘ，ｙＳｉｚｅ）で囲まれた領域の画像を図１７のＢＯＯＫ型アイコンの領域内の座標（ｘ，ｙ）、座標（Ｘ３１−ａ＊ｉ，ｙ）、座標（ｘ，ｙ＋ｙＳｉｚｅ）、座標（Ｘ３１−ａ＊ｉ，ｙ＋ｙＳｉｚｅ）で区切られた矩形領域に図１７の様に表示する。ステップＳ１９４において、ステップＳ１９１の整数ｉ（初期値１）にｉ＋１を代入する。Ｃ言語で表すとｉ＋１；とステップＳ１９４に表される。更にステップＳ１９５において、Ｘ３１−ａ＊ｉの値がｘの値以上であればステップＳ１９１に処理を移行する。ステップＳ１９５において、Ｘ３１−ａ＊ｉの値がｘの値未満であれば処理を終了する。
【００５５】
このフローチャートはステップＳ１１５の処理を表わす。ステップＳ１１３で、ポインタ座標が右側のページアイコン領域にあればステップＳ１１４に進み同様な処理を行いページめくりの後処理を行なう。
【００５６】
以上のような処理を行なうことによりマウスポインタに追従するページめくり処理を行なうことが可能である。
【００５７】
上記の実施形態の処理をマウスで行なっていたが、タッチパネルや、リモートマウスにも上記実施形態の処理で対応することが可能である。即ち、図１９に示すように、タッチパネルに指をタッチし、指を移動させ、指をタッチパネルから離す操作が、夫々マウスのボタンダウン割り込み、マウスムーブ割り込み、マウスアップの操作に対応している。以上のようにページをマウスポインタ或は指に追従させることにより、ページのアイコンを２ページから４ページ分まで簡易に参照できる。
【００５８】
また、本発明は、複数の機器から構成されるシステムに適用しても、１つの機器からなる装置に適用しても良い。また、本発明はシステム或は装置にプログラムを供給することによって実施される場合にも適用されることは言うまでもない。この場合、本発明に係るプログラムを格納した記憶媒体が、本発明を構成することになる。そして、該記憶媒体からプログラムをシステム或は装置に読み出すことによって、そのシステム或は装置が、予め定められた仕方で動作する。
【００５９】
【発明の効果】
以上説明したように、本発明によれば、ＢＯＯＫ型アイコン、ページ表示画面を用いることにより、情報の一覧性を向上できる。
【００６０】
また、ワープロ等のエディターなどで行なっている次ページを参照する非効率な処理を省き、見た目に本をめくるという簡易なオペレーションで情報の参照が行なえ、ＯＡ機器に不慣れなユーザにも容易に扱える。
【００６１】
また、ＢＯＯＫ型アイコンにて、ページをマウスポインタに追従させることにより、ページのアイコンを２ページから４ページ分まで簡易に参照できる。
【００６２】
また、右側、または左側のページアイコン領域をクリックするだけで、ページ表示画面において右側ページ、左側ページのページ切り替えが容易に行なえる。更に、マルチメディア等の情報検索で失われた、データの一覧性を、ＢＯＯＫ型アイコンを用いることにより取り戻すことができ、何かおもしろい情報がないかと拾い読みをすることが可能になる。
【図面の簡単な説明】
【図１】本発明の実施の形態に係る情報処理装置の構成を示すブロック図である。
【図２】本発明の実施の形態に係る情報の表示に関するフローチャートである。
【図３】ＢＯＯＫ型アイコンを用いたブラウズ機能に関するフローチャートである。
【図４】本発明のブラウズ画面を示す図である。
【図５】ページ表示ボタンを示す図である。
【図６】ページめくりの処理を示すフローチャートである。
【図７】ＢＯＯＫ型アイコンを拡大した図である。
【図８】ＢＯＯＫ型アイコンを拡大した図である。
【図９】マウスに追従するページめくりの処理を説明するフローチャートである。
【図１０】ＢＯＯＫ型アイコンを拡大した図である。
【図１１】ＢＯＯＫ型アイコンを拡大した図である。
【図１２】ＢＯＯＫ型アイコンを拡大した図である。
【図１３】ＢＯＯＫ型アイコンを拡大した図である。
【図１４】ページめくり開始処理を説明するフローチャートである。
【図１５】ページめくり開始処理を説明するフローチャートである。
【図１６】ＢＯＯＫ型アイコンを拡大した図である。
【図１７】ＢＯＯＫ型アイコンを拡大した図である。
【図１８】ページめくりの後処理を説明するフローチャートである。
【図１９】指に追従するページめくりの処理を説明するフローチャートである。
【符号の説明】
１キー入力部
２表示部
３パネル制御部
４ＤＭＡＣ
５画像情報出力部
６画像情報入力部
７画像入出力制御部
８通信部
９通信制御部
１０補助記憶部
１１ＭＰＵ
１２ＲＯＭ／ＲＡＭ
１３画像メモリ
１４圧縮／伸長部
１５文字認識部
１６システムバス
１７通信回線
１８タッチパネル入力部
１９マウス入力部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an information processing apparatus and method for referring to information on a plurality of pages using an actual book image and easily accessing a large amount of information.
[0002]
[Prior art]
Conventionally, in a graphical user interface (GUI) using a window format, a page is designated by a scroll bar, a dialog or the like, and the page of information displayed in the browse window is switched.
[0003]
[Problems to be solved by the invention]
However, when using the conventional technology that designates a page with a scroll bar or dialog and displays it in the browse window, only the designated page is displayed, and a plurality of information cannot be displayed simultaneously. .
[0004]
Further, the operation of referring to the next page performed by an editor such as a word processor has a drawback that the operation is complicated for a user who is not familiar with the word processor.
[0005]
[Means for Solving the Problems]
In order to solve the above-described problem, an information processing method according to claim 1 includes a page display step of displaying two pages of image data including a plurality of pages in a book format, and a position coordinate instruction operated by a user. A page turning process for executing a page turning process for the right page or the left page displayed in the page display process based on the position coordinates on the display screen instructed by the means, and the page turning process further includes , It is determined whether the position coordinates indicated when the instruction by the position coordinate instruction means is started is on the right page or the left page, and if it is determined that the position coordinates are on the right page, On the other hand, if the right page is the page turning process target page and if it is determined to be on the left page, the left page is set as the page turning process target page. A page turning start step for starting the processing, and an instruction of the page turning process target page or the page turning with respect to the position coordinates instructed by the position coordinate instructing means during the instruction by the position coordinate instructing means. When the edge of the page that is the back side of the page to be processed is made to follow, and the indicated position coordinate is on the same page as the page when the instruction of the position coordinate is started in the page turning start step, When the image of the page turning process target page is compressed and displayed, and the indicated position coordinate is on a page different from the page when the position coordinate instruction is started in the page turning start step, the page turning is performed. A page turning intermediate step of compressing and displaying an image of a page on the back side of the processing target page, and the position coordinate indicating means; It is determined whether the position coordinates indicated when the instruction is finished is on the right page or on the left page, and if it is determined that the position coordinates are on the left page as a result of the determination, The compressed image displayed on the left page is expanded and displayed on the left page. On the other hand, if it is determined that the image is on the right page, the image is compressed and displayed on the right page in the middle of turning the page. And a page turning end step for expanding and displaying the displayed image on the right page.
[0006]
In order to solve the above-described problem, an information processing method according to claim 2 is the information processing method according to claim 1, wherein, in the page turning middle step, a page under the page turning processing target page is displayed. An image is also displayed.
[0007]
In order to solve the above problem, an information processing method according to claim 3 is the information processing method according to claim 1, wherein the position coordinate instruction means is a pointer.
[0008]
In order to solve the above problem, an information processing method according to claim 4 is the information processing method according to claim 1, wherein the position coordinate instruction means is a touch panel.
[0009]
In order to solve the above-described problem, an information processing method according to claim 5 is the information processing method according to claim 1, wherein the image data including a plurality of pages is an icon image including a plurality of pages. Features.
In order to solve the above-described problem, an information processing method according to claim 6 is the information processing method according to claim 5, and further, in response to an instruction from a user, a book format in the page display step. The original image display step of displaying the original image of the icon image instructed by the user among the icon images displayed in a spread manner.
[0010]
In order to solve the above problem, the information processing apparatus according to claim 7 is a page display means for displaying two pages of image data consisting of a plurality of pages in a book format, and a position coordinate instruction operated by a user. Page turning means for executing a page turning process for the right page or the left page displayed by the page display means based on the position coordinates on the display screen instructed by the means, and the page turning means further includes , It is determined whether the position coordinates indicated when the instruction by the position coordinate instruction means is started is on the right page or the left page, and if it is determined that the position coordinates are on the right page, On the other hand, if the right page is the page turning process target page and if it is determined to be on the left page, the left page is set as the page turning process target page. While the page turning start means for starting the operation and the position coordinate indicating means are instructed, the end of the page turning processing target page or the page turning with respect to the position coordinates indicated by the position coordinate indicating means When the edge of the page which is the back side of the page to be processed is made to follow, and the indicated position coordinate is on the same page as the page when the instruction of the position coordinate is started by the page turning start means, When an image of the page turning processing target page is compressed and displayed, and the indicated position coordinate is on a page different from the page when the position turning instruction is started by the page turning start means, the page turning is performed. A page turning intermediate means for compressing and displaying an image of a page on the back side of the processing target page, and the position coordinate indicating means; It is determined whether the position coordinates indicated when the instruction is finished is on the right page or the left page, and if it is determined that the position coordinate is on the left page, the above-mentioned means for turning the page is used. The compressed image displayed on the left page is expanded and displayed on the left page. On the other hand, if it is determined that the image is on the right page, it is compressed and displayed on the right page by the means for turning the page. And a page turning end means for expanding and displaying the displayed image on the right page.
[0011]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.
[0012]
FIG. 1 is a block diagram showing the configuration of the information processing apparatus according to the first embodiment of the present invention.
[0013]
In the figure, reference numeral 1 denotes a key input unit which is operated by an operator to input various information. Reference numeral 2 denotes a display unit that displays various messages and images. A panel control unit 3 controls the key input unit 1 and the display unit 2. A DMA controller (hereinafter referred to as “DMAC”) 4 performs DMA transfer of image data and the like. An image information output unit 5 inputs image information output via an image input / output control unit 7 described later. An image input / output control unit 7 controls the interface between the image information output unit 5, the image information input unit 6 and the system bus 16 and controls the image information output unit 5 and the image information input unit 6. A communication unit 8 performs communication via the communication line 17. A communication control unit 9 controls the communication unit 8.
[0014]
Reference numeral 10 denotes an auxiliary storage unit that stores a compressed image received via the communication unit 8 or an image information input unit 6 and compressed by a compression / decompression unit 14 described later. It has a large-capacity memory such as a hard disk. Reference numeral 11 denotes an MPU, such as a microprocessor, which controls the entire terminal device, and outputs various data signals and control signals according to a control program stored in the ROM 12, which will be described later, to control the entire device. . A ROM / RAM 12 stores a control program and the like as shown in flowcharts of FIGS. 2 and 3 described later, and is used as a work area for the MPU 11 to temporarily store various control data.
[0015]
An image memory 13 temporarily stores image data input from the image information input unit 6 or received from the communication unit 8 and stores image data to be output to the image information output unit 5. ing. A compression / decompression unit 14 is a compression / decompression unit that compresses / decompresses image information transmitted / received via the communication unit 8. A character recognition unit 15 (hereinafter referred to as OCR) recognizes characters and symbols from an image read from the image information input unit 6 and an image received from the communication line 17 via the communication unit 8. Reference numeral 16 denotes a system bus. Reference numeral 18 denotes a touch panel signal input unit, and 19 denotes a mouse signal input unit.
[0016]
Hereinafter, the BOOK type browsing method in the present embodiment will be described.
[0017]
FIG. 2 is a flowchart regarding a method for displaying information in the method according to the present embodiment.
[0018]
In FIG. 2, when a file is selected by the user in step S201, the file is opened. In step S202, the file is divided into information that can be displayed on one page, and a page image of one page is created. In step S203, the page image created in step S202 is reduced to the size of the page icon to create an icon image. In step S204, the icon image created in step S203 is displayed on the BOOT type icon 401 in FIG. 4, the icon image of page 1 is displayed in the page icon area on the left side of 401a in FIG. The icon image of page 2 is displayed in the page icon area on the right side of 401b. In step S205, the page image created in step S202 corresponding to the icon image shown in the left page icon area 401a in FIG. 4 is displayed on the page display screen 403 in FIG.
[0019]
FIG. 3 is a flowchart relating to a browsing function using a BOOK type icon.
[0020]
It is assumed that an icon image of page 2n-1 is currently displayed in the page icon area 401a on the left side of the BOOK type icon, and an icon image of page 2n (n: a positive integer) is displayed in the page icon area 401b on the right side. . When the user clicks in the area of the BOOK type icon 401 in FIG. 4, the clicked position is detected in step S301. In step S302, it is determined whether the clicked position is the page icon region on the left side of 401a in FIG. 4 or the page icon region on the right side in 401b in FIG.
[0021]
If the clicked area is the page icon area on the right side of 401b, page turning processing is performed in step S303, page 2n + 1 on the left side and page 2 (n + 1) on the right side (n is an integer). The icon image of is displayed. In step S302, if the clicked area is the page icon area on the left side of 401a in FIG. 4, a process of turning the page in the direction of returning the page is performed in step S308, and 2 (n-1) -1 pages on the left side. On the right side, icon images of 2 (n-1) pages are displayed. When the page turning process in step S303 and step S308 is completed, the process waits for a user operation. In step S304, when the BOOK type icon is clicked again, the processing from step S302 is performed.
[0022]
When the user clicks the page display button 402 in FIG. 4 in this waiting state step S304, if it is the left page display button area 402a in FIG. 4 in step S305, the icon displayed in the page icon area on the left side 401a. A page image corresponding to the image is displayed in the page 403 window of FIG. In step S305, if the clicked area is the right page display button area 402b in FIG. 4, the page image corresponding to the icon image displayed in the right page icon area 401b is displayed on page 403 in FIG. Display in window.
[0023]
After the page image is displayed on the page window, it waits for user input, and in step S307, it is determined where to click and the subsequent processing is determined.
[0024]
When the BOX type icon 401 is clicked, the processing from step S302 is performed. When the page display button 402 is clicked, the processing from step S305 is performed. When the end button 404 is selected, the process of this flowchart is ended.
[0025]
Next, the right page turning process in step S303 will be described.
[0026]
7 and 8 are enlarged views of the BOOK type icon of FIG.
[0027]
In step S601 of FIG. 6, the next two pages (page 2n + 1 and page 2 (n + 1)) of the two pages (page 2n-1 and page 2n) (n is an arbitrary integer) displayed in 401 of FIG. )) Of the icon image data. In step S602, the icon image of page 2n is compressed. The image size of the page icon is xSize in the horizontal direction and ySize in the vertical direction, and the icon image of the page 2n is compressed in the horizontal direction. Make an image. In step S603, the compressed icon image of page 2n created in step S602 is converted into coordinates (x + xSize, y), coordinates (x + xSize + k, y), coordinates (x + xSize, y + ySize) in the area of the BOOT type icon in FIG. Displayed in a rectangular area delimited by coordinates (x + xSize + k, y + ySize) as shown in FIG.
[0028]
In step S604, a part of the icon image of page 2 (n + 1) is displayed. The area to be displayed is an image of an area surrounded by the coordinates (k, 0), coordinates (xSize, 0), coordinates (0, ySize), and coordinates (xSize, ySize) of the icon image of page 2 (n + 1). In FIG. 7, a rectangular area divided by coordinates (x + xSize + k, y), coordinates (x + 2 * xSize, y), coordinates (x + xSize + k, y + ySize), and coordinates (x + 2 * xSize, y + ySize) in the area of the BOX-type icon of −401. Is displayed.
[0029]
Next, in step S605, a value (ka) is substituted for k. If the value of k is not 0 or less in step S606, the processing from step S601 to step S606 is repeated. If the value of k is 0 or less in step S606, the process proceeds to step S607.
[0030]
In step S607, the icon image of page 2n + 1 is compressed. The icon image of page 2n + 1 is compressed in the horizontal direction to form a compressed icon image of vertical xSize and horizontal j (j = a). In step S608, the compressed icon image of page 2n + 1 created in step S607 is converted into coordinates (x + xSize-j, y), coordinates (x + xSize, y), coordinates (x + xSize-j) in the area of the BOOK type icon in FIG. , Y + ySize) and coordinates (x + xSize, y + ySize) are displayed as shown in FIG. In step S609, a part of the icon image of page 2n-1 is displayed. The area to be displayed is an image of an area surrounded by the coordinates (0, 0), coordinates (xSize-j, 0), coordinates (0, ySize), and coordinates (xSize-j, ySize) of the icon image of page 2n-1. Is a rectangular area delimited by coordinates (x, y), coordinates (x + xSize-j, y), coordinates (x, y + ySize), and coordinates (x + xSize-j, y + ySize) in the area of the BOOK type icon in FIG. Is displayed as shown in FIG.
[0031]
Next, in step S610, the value j + a is substituted for j, and if the value of j does not exceed the value of xSize in step S611, the processing from step S607 to step S611 is repeated. If the value of j exceeds the value of xSize in step S611, the page turning process is terminated. Further, the left page turning process in step S308 can be performed by reversing the above process in the horizontal direction.
[0032]
Next, a page turning method that follows the mouse will be described.
[0033]
First, FIGS. 10, 11, 12, 13, 16, and 17 are enlarged views of the BOOK type icon of FIG.
[0034]
When the mouse is clicked in the BOOK-type icon area of the browse screen in FIG. 4, a mouse button down interrupt is generated in step S101. In step S102, it is determined whether the mouse button down pointer coordinate where the interrupt occurred is in the page icon area on the left side of 401a or the page icon area on the right side of 401b. If there is a pointer coordinate in the page icon area on the left side of 401a, page turning start processing of the page icon area on the left side of 401a is performed in step S103. The page turning start process of the page icon area on the left is a process of displaying a compressed image up to a position where a mouse button down interrupt is instructed on the left page of FIG. In FIG. 10, it is assumed that page 2n-1 is displayed in the left page icon area, and page 2n is displayed in the right page icon area. Assume that the button-down coordinates of the mouse pointer in the page icon area on the left side of FIG. 10 are (X0, Y0).
[0035]
FIG. 14 is a flowchart for explaining the page turning start process in step S103.
[0036]
In step S151, the icon image of page 2n-1 is compressed. The image size of the page icon is xSize in the horizontal direction and ySize in the vertical direction. The icon image of the page 2n-1 is compressed in the horizontal direction, and the vertical ySize and horizontal xSize-d (the initial value of d is a) (a is less than xSize) Integer) compression icon image. In step S152, the compressed icon image of the page 2n-1 created in step S151 is converted into the coordinates (x + d, y), coordinates (x + xSize, y), coordinates (x + d, y + ySize), coordinates of the page icon area on the left side of FIG. Displayed in a rectangular area partitioned by (x + xSize, y + ySize) as shown in FIG. As a result of the processing in steps S151 and S152 described above, an image compressed by d in the horizontal direction is displayed on the 2n-1 page. In step S153, a part of the icon image of page 2 (n-1) -1 is displayed. The area to be displayed is an area surrounded by the coordinates (0, 0), coordinates (d, 0), coordinates (0, ySize), and coordinates (d, ySize) of the icon image of page 2 (n-1) -1. As shown in FIG. 11, the image is displayed in a rectangular area divided by coordinates (x, y), coordinates (x + d, y), coordinates (x, y + ySize), and coordinates (x + d, y + ySize) in the area of the BOOT type icon in FIG. To display.
[0037]
Next, in step S154, the value d + a is substituted for d, and if the value of d is less than or equal to X0−x in step S155, the processing from step S151 to step S155 is repeated. In step S155, if the value of d is not less than or equal to X0−x, this process ends. By these processes, the left area page turning start process in step S103 can be performed.
[0038]
If the mouse button down pointer coordinate where the interrupt occurred in step S102 is in the page icon area on the right side of 401b, page turning start processing of the page icon area on the right side of 401b is performed in step S104. Assume that the coordinates of the mouse pointer in the page icon area on the right side of FIG. 12 are (X10, Y10).
[0039]
FIG. 15 is a flowchart for explaining the page turning start process in step S104. In step S161, the icon image of page 2n is compressed. The image size of the page icon is xSize in the horizontal direction and ySize in the vertical direction, and the icon image of the page 2n is compressed in the horizontal direction to be a compressed icon image of vertical ySize and horizontal m (m is an initial value of xSize). In step S162, the compressed icon image of page 2n created in step S161 is converted into the coordinates (x + xSize, y), coordinates (x + xSize + m, y), coordinates (x + xSize, y + ySize), coordinates (x2) of the page icon area on the right side of FIG. , Y2), that is, displayed in a rectangular area partitioned by (x + xSize + m, y + ySize) as shown in FIG. The image compressed in the horizontal direction is displayed on the 2n page by the processes in steps S161 and S162. In step S163, a part of the icon image of page 2 (n + 1) is displayed. The area to be displayed is an image of an area surrounded by the coordinates (m, 0), coordinates (xSize, 0), coordinates (m, ySize), and coordinates (xSize, ySize) of the icon image of page 2 (n + 1). FIG. 12 shows a rectangular area divided by coordinates (x + xSize + m, y), coordinates (x + 2 * xSize, y), coordinates (x + xSize + m, y + ySize), and coordinates (x + 2 * xSize, y + ySize) in the area of the BOOT-type icon. To display. Next, in step S164, the value m-a is substituted for m, and if the value of m is less than X10-x in step S165, the processing from step S161 to step S165 is repeated. In step S165, if the value of m is equal to or greater than X10− (x + xSize), this process ends. With these processes, the right area page turning start process in step S104 can be performed.
[0040]
Next, a process of moving the mouse pointer so that the user turns the page by holding the edge of the book page after the mouse-down interruption and causing the page to follow the mouse pointer will be described.
[0041]
In step S105, when a mouse move interrupt is accepted, the process proceeds to step S106, where the pointer coordinates of the previous mouse move interrupt or mouse down interrupt and the currently accepted mouse move interrupt are the same area (right side). If it is not between the page icon areas or the page icon areas on the left side, the process proceeds to step S110. Here, a case where the mouse pointer moves from the left page icon area to the right page icon area will be described.
[0042]
In FIG. 16, the pointer coordinates of the last mouse move interrupt in the left page icon area are (X20, Y20), and the pointer coordinates of the first mouse move interrupt are moved to the right page icon area (X21, Y21). And In step S110, a page turning process from the page turning state when the pointer coordinates are (X20, Y20) to the boundary between the right page icon area and the left page icon area is performed. That is, a process of deleting the image displayed on the 2n-1 page is performed.
[0043]
Further, in step S111, a page turning process is performed in the page turning state at the pointer coordinates (X21, Y21) from the boundary between the right page icon area and the left page icon area. After these processes, the process proceeds to step S105.
[0044]
If a mouse up interrupt occurs in step S112, the process proceeds to step S113. In step S106, the pointer coordinates of the previous mouse move interrupt or mouse down interrupt and the currently accepted mouse move interrupt pointer coordinates are the same area (right page icon areas or left page icon areas). ), The process proceeds to step S107. In step S107, it is determined whether the pointer coordinate of the mouse move interrupt is in the left page icon area or the left page icon area. If the mouse move pointer is in the page icon area on the left side, the process moves to step S108 and the following processing is performed.
[0045]
FIG. 14 is a flowchart for explaining the page turning start process in step S108.
[0046]
In step S151, the icon image of page 2n-1 is compressed. The image size of the page icon is xSize in the horizontal direction and ySize in the vertical direction. The icon image of the page 2n-1 is compressed in the horizontal direction, and the vertical ySize and horizontal xSize-d (the initial value of d is a) (a is less than xSize Integer) compression icon image. In step S152, the compressed icon image of page 2n-1 created in step S151 is converted to the coordinates (x + d, y), coordinates (x + xSize, y), coordinates (x + d, y + ySize), coordinates of the page icon area on the left side of FIG. Displayed in a rectangular area partitioned by (x + xSize, y + ySize) as shown in FIG. As a result of the processing in steps S151 and S152 described above, an image compressed by d in the horizontal direction is displayed on the 2n-1 page.
[0047]
In step S153, a part of the icon image of page 2 (n-1) -1 is displayed. The area to be displayed is an area surrounded by the coordinates (0, 0), coordinates (d, 0), coordinates (0, ySize), and coordinates (d, ySize) of the icon image of page 2 (n-1) -1. As shown in FIG. 11, the image is displayed in a rectangular area divided by coordinates (x, y), coordinates (x + d, y), coordinates (x, y + ySize), and coordinates (x + d, y + ySize) in the area of the BOOT type icon in FIG. To display.
[0048]
Next, in step S154, the value d + a is substituted for d, and if the value of d is less than or equal to X0−x in step S155, the processing from step S151 to step S155 is repeated. In step S155, if the value of d is not less than or equal to X0−x, this process ends. With these processes, the page turning start process in step S108 can be performed.
[0049]
If the mouse move pointer is in the page icon area on the right side in step S107, the process moves to step S109 and the following processing is performed. FIG. 15 is a flowchart for explaining the page turning start process in step S109.
[0050]
In step S161, the icon image of page 2n is compressed. The image size of the page icon is xSize in the horizontal direction and ySize in the vertical direction, and the icon image of the page 2n is compressed in the horizontal direction to be a compressed icon image of vertical ySize and horizontal m (m is an initial value of xSize). In step S162, the compressed icon image of page 2n created in step S161 is converted into the coordinates (x + xSize, y), coordinates (x + xSize + m, y), coordinates (x + xSize, y + ySize), coordinates (x2) of the page icon area on the right side of FIG. , Y2), that is, displayed in a rectangular area partitioned by (x + xSize + m, y + ySize) as shown in FIG. The image compressed in the horizontal direction is displayed on the 2n page by the processes in steps S161 and S162. In step S163, a part of the icon image of page 2 (n + 1) is displayed. The area to be displayed is an image of an area surrounded by the coordinates (m, 0), coordinates (xSize, 0), coordinates (m, ySize), and coordinates (xSize, ySize) of the icon image of page 2 (n + 1). FIG. 12 shows a rectangular area divided by coordinates (x + xSize + m, y), coordinates (x + 2 * xSize, y), coordinates (x + xSize + m, y + ySize), and coordinates (x + 2 * xSize, y + ySize) in the area of the BOOT-type icon. To display.
[0051]
Next, in step S164, the value m-a is substituted for m, and if the value of m is less than X10-x in step S165, the processing from step S161 to step S165 is repeated. In step S165, if the value of m is equal to or greater than X10− (x + xSize), this process ends. With these processes, the page turning start process in step S109 can be performed.
[0052]
Next, in step S112, it is determined whether the next incoming mouse interrupt is a mouse move interrupt or a mouse up interrupt. If it is a mouse move, the process proceeds to step S106 as in the flowchart of FIG. In step S112, if the mouse interrupt is a mouse up interrupt, the process proceeds to step S113. In step S113, it is determined whether the pointer coordinate of the mouse move interrupt is in the right page icon area or the left page icon area. If the pointer coordinates are in the left page icon area, the process proceeds to step S115.
[0053]
FIG. 17 is a diagram showing a state when the mouse-up pointer coordinates are (X31, Y31), and FIG. 18 is a flowchart showing post-processing for one page turning.
[0054]
In step S191, the icon image of page 2n-1 of vertical ySize and horizontal xSize is compressed to an image size of vertical ySize and horizontal X31-a * i (i is an integer, initial value 1). In step S192, the icon image of page 2n-1 is displayed in a rectangular area surrounded by coordinates (X31-a * i), (x + xSize, y) (x31-a * i, y + ySize), and (x + xSize, y + ySize). In step S193, a part of the image of page 2 (n-1) -1 is displayed. The display area includes the coordinates (0, 0), coordinates (X31-a * i-x, 0), coordinates (0, ySize), and coordinates (X31-a *) of the icon image of page 2 (n-1) -1. The image of the area surrounded by (i-x, ySize) is represented by coordinates (x, y), coordinates (X31-a * i, y), coordinates (x, y + ySize), coordinates in the BOOK type icon area of FIG. Displayed in a rectangular area partitioned by (X31-a * i, y + ySize) as shown in FIG. In step S194, i + 1 is substituted into the integer i (initial value 1) in step S191. Expressed in C language, i + 1; is expressed in step S194. In step S195, if the value of X31-a * i is equal to or greater than the value of x, the process proceeds to step S191. In step S195, if the value of X31-a * i is less than the value of x, the process ends.
[0055]
This flowchart represents the process of step S115. In step S113, the pointer coordinates are right If it is in the page icon area on the side, the process proceeds to step S114 and the same process is performed to perform a page turning post-process.
[0056]
By performing the processing as described above, it is possible to perform page turning processing that follows the mouse pointer.
[0057]
Although the processing of the above embodiment is performed by the mouse, it is possible to deal with the touch panel and the remote mouse by the processing of the above embodiment. That is, as shown in FIG. 19, the operations of touching the touch panel with a finger, moving the finger, and releasing the finger from the touch panel correspond to mouse button down interrupt, mouse move interrupt, and mouse up operations, respectively. By making the page follow the mouse pointer or finger as described above, the page icons can be easily referred to from 2 pages to 4 pages.
[0058]
In addition, the present invention may be applied to a system composed of a plurality of devices or an apparatus composed of a single device. Needless to say, the present invention is also applied to a case where the present invention is implemented by supplying a program to a system or apparatus. In this case, the storage medium storing the program according to the present invention constitutes the present invention. Then, by reading the program from the storage medium to the system or apparatus, the system or apparatus operates in a predetermined manner.
[0059]
【The invention's effect】
As described above, according to the present invention, it is possible to improve the listability of information by using a BOOT type icon and a page display screen.
[0060]
In addition, it eliminates the inefficient process of referring to the next page in an editor such as a word processor, and allows information to be referred to by a simple operation of flipping the book, making it easy for users unfamiliar with OA equipment. .
[0061]
Further, by making the page follow the mouse pointer with a BOOK type icon, the page icon can be easily referred to from 2 pages to 4 pages.
[0062]
Further, the page can be easily switched between the right page and the left page on the page display screen simply by clicking the page icon area on the right side or the left side. Furthermore, the listability of data lost in information retrieval such as multimedia can be recovered by using a BOOK-type icon, and it is possible to browse for interesting information.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of an information processing apparatus according to an embodiment of the present invention.
FIG. 2 is a flowchart relating to display of information according to the embodiment of the present invention.
FIG. 3 is a flowchart related to a browsing function using a BOOK-type icon.
FIG. 4 is a diagram showing a browse screen according to the present invention.
FIG. 5 is a diagram illustrating a page display button.
FIG. 6 is a flowchart illustrating a page turning process.
FIG. 7 is an enlarged view of a BOOK-type icon.
FIG. 8 is an enlarged view of a BOOK-type icon.
FIG. 9 is a flowchart for explaining a page turning process of following a mouse.
FIG. 10 is an enlarged view of a BOOK-type icon.
FIG. 11 is an enlarged view of a BOOK-type icon.
FIG. 12 is an enlarged view of a BOOK-type icon.
FIG. 13 is an enlarged view of a BOOK type icon.
FIG. 14 is a flowchart illustrating a page turning start process.
FIG. 15 is a flowchart illustrating page turning start processing.
FIG. 16 is an enlarged view of a BOOK-type icon.
FIG. 17 is an enlarged view of a BOOK-type icon.
FIG. 18 is a flowchart illustrating post-page turning post-processing.
FIG. 19 is a flowchart illustrating a page turning process of following a finger.
[Explanation of symbols]
1 Key input part
2 display section
3 Panel controller
4 DMAC
5 Image information output section
6 Image information input section
7 Image input / output controller
8 Communication Department
9 Communication control unit
10 Auxiliary storage
11 MPU
12 ROM / RAM
13 Image memory
14 Compression / decompression unit
15 Character recognition part
16 System bus
17 Communication line
18 Touch panel input section
19 Mouse input section

Claims

A page display step of displaying two pages of the image data composed of a plurality of pages in a book format,
A page turning step for executing a page turning process of the right page or the left page displayed in the page display step based on the position coordinates on the display screen designated by the position coordinate instruction means operated by the user ,
The page turning process further includes:
When the instruction by the position coordinate instruction means is started, it is determined whether the specified position coordinate is on the right page or the left page, and if it is determined that the position coordinate is on the right page, the right A page turning process target page; on the other hand, if it is determined that the page is on the left page, the page turning process is started by setting the left page as the page turning process target page; and
While being instructed by the position coordinate instruction means, the end of the page turning process target page or the end of the page that is the back side of the page turning process target page with respect to the position coordinates indicated by the position coordinate instruction means And if the indicated position coordinate is on the same page as the page where the position coordinate instruction is started in the page turning start step, the image of the page turning process target page is compressed. And when the position coordinates instructed are on a page different from the page at which the position coordinates instruction is started in the page turning start step, the image of the page that is the back side of the page turning processing target page A page turning process to compress and display
It is determined whether the position coordinates specified when the instruction by the position coordinate instruction means is ended is on the right page or the left page, and if it is determined that the position coordinates are on the left page, the position coordinates An image that is compressed and displayed on the left page in the middle of page turning is displayed expanded on the left page. On the other hand, if it is determined that it is on the right page, it is displayed on the right page in the middle of page turning. And a page turning end step for expanding and displaying the image displayed after being compressed on the right page .

The information processing method according to claim 1, wherein an image of a page below the page turning processing target page is also displayed in the page turning intermediate step.

It said position coordinate pointing means, information processing method according to claim 1, characterized in that a pointer.

It said position coordinate pointing means, information processing method according to claim 1, characterized in that a touch panel.

The information processing method according to claim 1, wherein the image data including a plurality of pages is an icon image including a plurality of pages.

Further, in response to an instruction from the user, an original image display step of displaying an original image of the icon image instructed by the user among the icon images displayed in book format in the page display step. The information processing method according to claim 5 .

Page display means for displaying two pages of image data consisting of a plurality of pages in a book format;
Page turning means for executing page turning processing of the right page or the left page displayed by the page display means based on the position coordinates on the display screen designated by the position coordinate instruction means operated by the user ;
The page turning means further includes:
When the instruction by the position coordinate instruction means is started, it is determined whether the specified position coordinate is on the right page or the left page, and if it is determined that the position coordinate is on the right page, the right A page turning process target page; on the other hand, if it is determined that the page is on the left page, the page turning process is started by using the left page as the page turning process target page;
While being instructed by the position coordinate instruction means , the end of the page turning process target page or the end of the page that is the back side of the page turning process target page with respect to the position coordinates indicated by the position coordinate instruction means , And if the indicated position coordinate is on the same page as the page when the position turning instruction is started by the page turning start means, the image of the page turning processing target page is compressed. If the indicated position coordinates are on a page different from the page at which the position turning instruction is started by the page turning start means, the image of the page that is the back side of the page turning processing target page A means of turning pages to compress and display
It is determined whether the position coordinates specified when the instruction by the position coordinate instruction means is ended is on the right page or the left page, and if it is determined that the position coordinates are on the left page, the position coordinates An image that is compressed and displayed on the left page by the page turning middle means is expanded and displayed on the left page. On the other hand, if it is determined that the image is on the right page, the page turning middle means on the right page. And a page turning end means for expanding and displaying the image displayed after being compressed on the right page .