JP2008102613A - 検索結果表示装置及び方法、並びプログラム - Google Patents

Abstract

【課題】 従来の電子会議システムでの検索では、描画オブジェクト情報を指定し検索することは可能であるが、オブジェクトを検索し検索されたページを表示するのみであり、検索結果表示画面からはそれまでの会議の流れや描画に至った経緯などが把握しづらいという課題があった。検索結果は似たようなページが複数表示される場合が多く、目的のページや会議を取得することが困難である。そのため検索結果表示画面上で会議状態の把握やページ遷移を容易に行えることが望ましい。
【解決手段】 電子会議システムにおける検索結果の表示において、検索したページの再現時の会議状態の把握を簡単に行うことができ、再現した会議画面状態からの画面遷移を容易に行うことの出来るユーザインタフェースを実現した検索結果表示装置及び方法、並びプログラムを提供する。
【選択図】 図４

Description

本発明は、電子会議システムにおける検索結果の表示において、検索したページの再現時の会議状態の把握を簡単に行うことができ、再現した会議画面状態からの画面遷移を容易に行うことの出来るユーザインタフェースを実現した検索結果表示装置・方法並びプログラムに関する。

近年、コンピュータシステムを利用した電子会議システムが普及してきている。特に大画面表示装置を利用した電子会議システムなどでは、大画面表示装置を会議参加者の共有表示装置として利用している。また単なる表示装置としての用途の他に電子ホワイトボード等、電子描画装置としての使われ方も増えてきている。このような電子会議システムは、１台のPCに大画面表示装置を接続し、会議参加者が画面に表示された情報を共有、編集する形態のものである。共有画面への入力端末としては有線又は無線のマウス、キーボード、タブレット、画面上で直接座標入力が可能なデジタイザ等が使用されている。また、これら電子会議システムをネットワークに接続し、遠隔での電子会議を可能にしたシステムもある。

電子ホワイトボードへ描画を行った場合に、会議中に描画操作情報等の会議情報を記録しておき、後に参照・検索可能な会議システムも見られるようになってきている。また、会議情報をサーバに記憶させることで遠隔からの参照、検索も可能となる。

ある検索キーを検索条件とし、ホワイトボードページ、あるいはホワイトボードページを複数含む会議を検索したい場合は、検索キーに文字列や図形種を指定し、検索を実行し、該検索キーを含むページを検索結果として表示することが可能である。また、検索キーとして文字列や図形種だけでなく、描画者や描画オブジェクトの付加情報を用いた詳細な検索も可能である。

特開平９−６２６７６号公報に開示された「文書作成装置及び表示制御方法」では、複数人で描画した際に注釈・添削などの編集情報を記憶し、表示する際に一人による一貫した編集情報のみを任意選択的に表示し、所望の編集者のみの編集情報のみを得ることができるという提案がなされている。

また、特開２００４−１５１８９８号公報に開示された「表示制御方法、情報表示処理システム、プログラム」では、注釈などのアノテーションの描画時に詳細な付加情報（例えば色、形状、および線種など）を記録し、これらを利用して詳細な検索が可能となる提案がなされている。
特開平９−６２６７６号公報 特開２００４−１５１８９８号公報

電子ホワイトボードを利用した会議の進め方として、描画オブジェクトの生成、編集、削除といった手順の繰り返しにより会議の成果としてホワイトボードのページが生成される。しかし作成されたページでは、結論は分かるが至った経緯や理由が分かりにくいという問題がある。

従来の電子会議システムでの検索では、描画オブジェクト情報を指定し検索することは可能であるが、オブジェクトを検索し検索されたページを表示するのみであり、検索結果表示画面からはそれまでの会議の流れや描画に至った経緯などが把握しづらいという課題があった。検索結果は似たようなページが複数表示される場合が多く、目的のページや会議を取得することが困難である。そのため検索結果表示画面上で会議状態の把握やページ遷移を容易に行えることが望ましい。

本発明は上記のような問題点を鑑みてなされたもので、電子会議システムにおける検索結果の表示において、検索したページの再現時の会議状態の把握を簡単に行うことができ、再現した会議画面状態からの画面遷移を容易に行うことの出来るユーザインタフェースを実現した検索結果表示装置及び方法、並びプログラムを提供することを目的とする。

上記の目的を達成するために、請求項１に記載の検索結果表示装置は、ページへオブジェクトの描画を行う電子会議システムにおいて、
描画オブジェクトの描画履歴情報を格納する描画履歴情報格納手段と、
検索キーとなる描画情報を指定し描画履歴情報から該当する描画オブジェクトを含むページ状態を検索する検索手段と、
前記検索されたページ状態を再現し表示する検索結果表示手段と、
前記検索結果表示手段は、各検索結果ページに対しオブジェクト描画履歴の再生操作を前記描画履歴情報に基づき行うための画面遷移操作手段と、
を備えることを特徴とする。

請求項２に記載の検索結果表示装置は、請求項1に係る検索結果表示装置において、
前記画面遷移操作手段は、画面遷移の単位を一オブジェクト操作単位で行うことを特徴とする。

請求項３に記載の検索結果表示装置は、請求項1乃至２のいずれか一項に係る検索結果表示装置において、
前記描画履歴情報格納手段は、描画オブジェクトの描画ユーザのパラメータを持ち、
前記画面遷移操作手段は、画面遷移の移動単位を描画ユーザ単位とすることを特徴とする。

請求項４に記載の検索結果表示装置は、請求項1乃至３のいずれか一項に係る検索結果表示装置において、
前記画面遷移操作手段は、画面遷移の移動単位を描画オブジェクトグループ単位で行うことを特徴とする。

請求項５に記載の検索結果表示装置は、請求項４に係る検索結果表示装置において、
前記描画履歴情報格納手段は、所定時間内に描画された描画オブジェクト又は一定近傍内に描画されたオブジェクトを描画オブジェクトグループとして格納することを特徴とする。

請求項６に記載の検索結果表示装置は、請求項1乃至５のいずれか一項に係る検索結果表示装置において、
前記検索結果表示手段に表示するページは、検索キーとして指定したオブジェクトが消去される直前のページ状態とすることを特徴とする。

請求項７に記載の検索結果表示装置は、請求項1乃至６のいずれか一項に係る検索結果表示装置において、
前記画面遷移操作手段は、画面遷移の移動可能範囲を、検索したオブジェクトが生成されてから削除されるまでとすることを特徴とする。

請求項８に記載の検索結果表示装置は、請求項1乃至７のいずれか一項に係る検索結果表示装置において、
前記検索結果表示手段は、画面遷移の移動単位を選択するための移動単位選択手段を備えることを特徴とする。

請求項９に記載の検索結果表示方法は、ページへオブジェクトの描画を行う電子会議システムにおいて、
描画オブジェクトの描画履歴情報を格納する描画履歴情報格納工程と、
検索キーとなる描画情報を指定し描画履歴情報から該当する描画オブジェクトを含むページ状態を検索する検索工程と、
前記検索されたページ状態を再現し表示する検索結果表示工程と、
前記検索結果表示工程は、各検索結果ページに対しオブジェクト描画履歴の再生操作を前記描画履歴情報に基づき行うための画面遷移操作工程と、
を備えることを特徴とする。

請求項１０に記載の検索結果表示方法は、請求項９に係る検索結果表示方法において、
前記画面遷移操作工程は、画面遷移の単位を一オブジェクト操作単位で行うことを特徴とする。

請求項１１に記載の検索結果表示方法は、請求項９乃至１０のいずれか一項に係る検索結果表示方法において、
前記描画履歴情報格納工程は、描画オブジェクトの描画ユーザのパラメータを持ち、
前記画面遷移操作工程は、画面遷移の移動単位を描画ユーザ単位とすることを特徴とする。

請求項１２に記載の検索結果表示方法は、請求項９乃至１１のいずれか一項に係る検索結果表示方法において、
前記画面遷移操作工程は、画面遷移の移動単位を描画オブジェクトグループ単位で行うことを特徴とする。

請求項１３に記載の検索結果表示方法は、請求項１２に係る検索結果表示方法において、
前記描画履歴情報格納工程は、所定時間内に描画された描画オブジェクト又は一定近傍内に描画されたオブジェクトを描画オブジェクトグループとして格納することを特徴とする。

請求項１４に記載の検索結果表示方法は、請求項９乃至１３のいずれか一項に係る検索結果表示方法において、
前記検索結果表示工程に表示するページは、検索キーとして指定したオブジェクトが消去される直前のページ状態とすることを特徴とする。

請求項１５に記載の検索結果表示方法は、請求項９乃至１４のいずれか一項に係る検索結果表示方法において、
前記画面遷移操作工程は、画面遷移の移動可能範囲を、検索したオブジェクトが生成されてから削除されるまでとすることを特徴とする。

請求項１６に記載の検索結果表示方法は、請求項９乃至１５のいずれか一項に係る検索結果表示方法において、
前記検索結果表示工程は、画面遷移の移動単位を選択するための移動単位選択工程を備えることを特徴とする。

請求項１７に記載の検索結果表示プログラムは、ページへオブジェクトの描画を行う電子会議システムにおいて、
描画オブジェクトの描画履歴情報を格納する描画履歴情報格納ステップと、
検索キーとなる描画情報を指定し描画履歴情報から該当する描画オブジェクトを含むページ状態を検索する検索ステップと、
前記検索されたページ状態を再現し表示する検索結果表示ステップと、
前記検索結果表示ステップは、各検索結果ページに対しオブジェクト描画履歴の再生操作を前記描画履歴情報に基づき行うための画面遷移操作ステップと、
を備えることを特徴とする。

請求項１８に記載の検索結果表示プログラムは、請求項１７に係る検索結果表示プログラムにおいて、
前記画面遷移操作ステップは、画面遷移の単位を一オブジェクト操作単位で行うことを特徴とする。

請求項１９に記載の検索結果表示プログラムは、請求項１７乃至１８のいずれか一項に係る検索結果表示プログラムにおいて、
前記描画履歴情報格納ステップは、描画オブジェクトの描画ユーザのパラメータを持ち、
前記画面遷移操作ステップは、画面遷移の移動単位を描画ユーザ単位とすることを特徴とする。

請求項２０に記載の検索結果表示プログラムは、請求項１７乃至１９のいずれか一項に係る検索結果表示プログラムにおいて、
前記画面遷移操作ステップは、画面遷移の移動単位を描画オブジェクトグループ単位で行うことを特徴とする。

請求項２１に記載の検索結果表示プログラムは、請求項２０に係る検索結果表示プログラムにおいて、
前記描画履歴情報格納ステップは、所定時間内に描画された描画オブジェクト又は一定近傍内に描画されたオブジェクトを描画オブジェクトグループとして格納することを特徴とする。

請求項２２に記載の検索結果表示プログラムは、請求項１７乃至２１のいずれか一項に係る検索結果表示プログラムにおいて、
前記検索結果表示ステップに表示するページは、検索キーとして指定したオブジェクトが消去される直前のページ状態とすることを特徴とする。

請求項２３に記載の検索結果表示プログラムは、請求項１７乃至２２のいずれか一項に係る検索結果表示プログラムにおいて、
前記画面遷移操作ステップは、画面遷移の移動可能範囲を、検索したオブジェクトが生成されてから削除されるまでとすることを特徴とする。

請求項２４に記載の検索結果表示プログラムは、請求項１７乃至２３のいずれか一項に係る検索結果表示プログラムにおいて、
前記検索結果表示ステップは、画面遷移の移動単位を選択するための移動単位選択ステップを備えることを特徴とする。

以上説明したとおり、本発明によれば、電子会議システムにおける検索結果の表示において、検索したページの再現時の会議状態の把握を簡単に行うことができ、再現した会議画面状態からの画面遷移を検索結果表示状態のまま簡単な操作で可能にし、目的の検索結果の取得を容易に行うことの出来るユーザインタフェースを実現した検索結果表示装置及び方法、並びプログラムを提供することが出来る。

（実施例１）
以下、本発明の実施例について図面を参照して詳細に説明する。

図１は本発明を適用した検索結果表示装置の全体構成の一実施例を示したブロック図である。

図１において、検索結果表示装置は、検索結果表示処理部１０１と、表示装置１１０と、入力装置１２０と、入力装置１０９で構成される。

検索結果表示処理部１０１は、入力部１０２と、制御部１０３と、描画制御部１０４と、描画履歴情報格納部１０５と、検索制御部１０６と、検索結果表示制御部１０７と、映像出力部１０８から構成される。

表示装置１１０は、表示部１１１と、入力部１１２と、出力部１１３から構成される。

入力装置１２０は、表示装置１１０に対し描画を行う為のペン型のポインティングデバイスである光学式デジタイザ等の入力装置である。

このデジタイザは検出した座標情報を出力するためのファームウエアを備えている。

入力装置１０９は、検索結果処理装置１０１へテキスト入力を行う為のキーボードである。

入力部１１２は、入力装置１２０から入力された自由曲線や図形等のオブジェクトを構成する入力座標列を受け取る。出力部１１３は、入力された座標を検索結果処理装置１０１へ出力する。表示部１１１は、検索結果処理装置１０１から出力された情報の表示を行う為のディスプレイである。

１０２は入力部であり、入力装置１２０からの座標入力や入力装置１０９からのテキスト入力を受け付ける。

制御部１０３は検索結果処理装置１０１の各種制御を行う。

描画制御部１０４は、デジタイザやキーボードから入力された情報から描画オブジェクトの生成、編集、削除、電子ホワイトボードのページ操作、表示制御など、描画に関する処理を行う。

描画履歴情報格納部１０５は、FlashメモリやRAM等の不揮発性メモリやHDD等の外部記憶装置から成り、描画制御部で行ったオブジェクトの生成、編集、削除、ページ操作、描画ユーザ、といった処理やオブジェクト付加情報の履歴の記録を行う。

検索制御部１０６は、指定検索条件から該当するオブジェクトの検索を行う。

検索結果表示制御部１０７は、検索されたオブジェクトからページ状態の再現と表示、また、検索結果のページの画面遷移制御を行う。

映像出力部１０８は、ディスプレイへ電子ホワイトボードや検索等の画面の出力を行う。

図２は、表示装置１１０へ出力されるホワイトボード画面の一例を示した図である。

図２において、２０１はホワイトボードの描画面であり、ここにデジタイザで記入することにより自由曲線や手書き図形を描画することができる。また図示しない描画種選択メニュー等で描画図形種を表示し円や矩形、直線などを選択し描画できる。２０２はホワイトボード描画面２０１へキーボード等から描画されたテキストオブジェクトである。２０３は描画種で円が選択されデジタイザで描画された円オブジェクトである。２０４は、描画面をページ単位で切り替え可能なユーザインタフェースであり、現在のページとページ送り・戻しのボタンが表示されている。なお、本実施例ではホワイトボード画面は背景色白に描画オブジェクトを描画する形式であるが、背景色を透明とし、他のアプリケーションの前面にホワイトボードを重ねて表示し他のアプリケーションへのアノテーション（注釈）用として描画するようにしてもよい。但しこの場合描画履歴情報格納部に記憶される情報は後述する図３の項目に加え背景画像を保存するようにし、検索後の再生時に該背景画像上に描画オブジェクトを表示させ会議の画面状態の再現させるのが望ましい。

図３は、図２に対応した描画履歴情報格納部に記憶される情報の一例を示した図である。

記録する項目としては、操作時刻、オブジェクトID、ページ番号、データ主、描画データ、描画ユーザである。操作時刻はオブジェクトが生成・削除・移動といった操作のあった時刻である。オブジェクトIDは、操作対象となったオブジェクトを一意に識別するためのIDである。ページ番号は、オブジェクトが描画されているページ番号である。操作種別は、生成、削除、移動、色の変更、大きさの変更などの操作の種類を表す。データ種は、描画されたオブジェクトデータの種類を表しており、テキスト、円、直線、矩形、自由曲線等である。描画データは、各オブジェクトの描画に必要なデータであり、テキストであればテキストデータ及び表示する位置と大きさ、色、フォント、自由曲線データであれば座標列、色、線種等である。描画ユーザは、オブジェクトを操作したユーザを示している。図３では、ホワイトボードの1ページ目にまずテキストオブジェクト(オブジェクトID=0000〜0003)が描画され、次にテキストオブジェクトの一部（オブジェクトID=0002、文字データ="予算"）が削除され、続いて図２のページ右下の図形オブジェクト(オブジェクトID0004〜0006)が描画されたことが分かる。

図４は、オブジェクト検索時の検索条件と検索結果の初期画面表示の一例を示した図である。

図４において、画面左は検索条件を入力する領域である。画面右は、検索条件を指定し検索後の検索結果を表示する領域である。図４では、検索オブジェクトとして“テキスト”、検索キーとして文字列“予算”、描画ユーザは“指定しない”、検索場所は“local”、の条件で検索し、検索結果として該当した１件が、ページ状態が再現された状態で表示されている。検索されたページは図２及び図３で示したページである。

４０１は検索されたページを縮小表示で再現したものである。検索キー“予算”に対し検索される図３のオブジェクトID0002は、ページ最終保存状態では削除されている。そのため一般の検索結果表示ではページ最終保存状態を表示するため検索キーオブジェクトがないページを表示する場合があった。本実施例では操作手順を全て記録しておくことにより会議中に削除されてしまった描画オブジェクトの検索が可能となる。

また、ページ表示４０１では、検索された描画オブジェクトが削除される直前のページ状態を表示している。そのためページ表示４０１ではオブジェクトID0002の削除後に描画された図形は表示されていない。

スライダ４０２は、ページ表示４０１の画面の遷移が可能である。初期表示は４０１の状態であるが、スライダ４０２を右にドラッグすることによりページ表示４０１の画面を操作単位で先に進めることが出来る。本図では右に1単位スライダ４０２をドラッグすることでまず予算の文字の表示が消える。さらに右に1単位ドラッグで円オブジェクト(オブジェクトID0004)が表示される。スライダ４０２を左端までドラッグでページ４０１は何も描画されていない状態、右端までドラッグでページ４０１は最終保存状態の表示となる。

移動単位選択リストボックス４０３はスライダ４０２の移動単位の選択を行う。図４では描画操作が選択状態となっているため、遷移単位は一オブジェクト操作単位となり、上述した遷移となる。他の選択可能項目として、描画ユーザ、描画グループ、操作種別、単位時間、単位がある。

リストボックス４０３にて操作種別選択時は、スライダ４０２の移動単位が操作種別単位となるため、操作種別が同一である操作は一単位で画面遷移する。図３では項目“生成”が同一操作種別であるためスライダ４０２の一単位の移動でオブジェクトID0000からID0003までの表示又は非表示が行われる。

リストボックス４０３にて単位時間選択時は、スライダ４０２の移動単位が単位時間単位となる。任意の時間を単位時間として指定可能であり、スライダ４０２の一単位の移動で指定した任意時間中のオブジェクト操作が反映された画面が再現表示される。

リストボックス４０３にて描画ユーザ選択時は、スライダ４０２の移動単位が描画ユーザ単位となるため、連続して同一ユーザ操作があった場合は一単位で画面遷移する。

リストボックス４０３にて描画グループ選択時は、スライダ４０２の移動単位が描画グループ時間単位となるため、同一のグループに属する描画オブジェクトはスライダの一単位の移動で同時に表示又は非表示が行われる。描画グループの設定方法は、手動設定と自動設定がある。手動設定は、ユーザが複数のオブジェクト描画後に複数の描画オブジェクトを指定しグループ化するものである。自動設定の例としては、ホワイトボードへの描画が一定時間内に行われた一つ以上のオブジェクトは同一グループとするというものである。もう一つの自動設定の例としては、ホワイトボードへ描画されたオブジェクトが一定距離内である一つ以上のオブジェクトは同一グループとするというものである。

これらの設定の利点としては、連続して図形描画し複合図形を描画する場合や、自由曲線描画モードで手書き文字を入力する場合に、時間あるいは距離が近接した描画であれば同一グループのオブジェクトとなるため移動、編集、削除といった編集操作及び検索結果表示の操作をグループ単位で行うことが出来、扱いやすいといった点が挙げられる。

図５は本実施の形態１における描画履歴情報格納時の処理手順を示したフローチャートである。

ステップＳ５０１では、描画面に描画操作があるまで待機する。描画操作が検出された場合はステップＳ５０２へ進む。

ステップＳ５０２では、ステップＳ５０１で描画操作を検出した場合に、オブジェクト生成や削除、移動といった描画操作に応じて描画制御部で処理し、処理結果をディスプレイに表示する。

ステップＳ５０３では、描画操作情報を描画履歴情報格納部へ記録し、再びステップＳ５０１で描画を待機する。

図６は本実施の形態１における検索結果表示の処理手順を示したフローチャートである。

ステップＳ６０１では、検索条件の設定入力を受け付ける。ユーザは検索条件指定を図４左側に図示した各種検索条件の項目へ入力する。

ステップＳ６０２で検索ボタンが押下されたら、ステップＳ６０３にて上記検索条件で描画履歴情報格納部から検索処理を行い検索条件に該当するオブジェクトを取得する。

ステップＳ６０４ではステップS６０３で得られたオブジェクトと各種関連する付加情報よりオブジェクト描画時の画面のページ状態を生成する。

ステップS６０５ではステップＳ６０４で生成したページ状態を図４に例示したように検索結果表示画面へ表示する。

ステップＳ６０６では検索結果表示画面にてスライダの移動による画面遷移要求を待機する。

ステップＳ６０７では画面遷移要求があった場合に要求された遷移後のページ状態を描画履歴情報格納部から再取得しページ状態を再現し表示を更新する。

ステップＳ６０８で、遷移条件変更があった場合に、ステップＳ６０９で遷移条件を変更し、ステップＳ６０６へ戻る。

ステップＳ６０８で遷移条件変更もない場合はステップＳ６０１へ戻る。

なお、本実施の形態１では、上述した表示装置１１０は液晶プロジェクタであっても大画面の液晶パネルやＰＤＰ（Plasma Display Panel）であってもよい。また、表示装置１１０と検索結果表示処理部１０１は別体としたが検索結果表示処理部１０１として一体であってもよい。描画制御部１０４、検索制御部１０６と、検索結果表示制御部１０７と、映像出力部１０８は周辺機器や拡張カードから成るが、デバイスドライバ等のソフトウエアであってもよい。入力装置１２０はデジタイザであるが、座標入力方法は表示装置１１０と一体となったタッチパネル方式であってもよい。また検索結果表示制御部はスライダとしているが、スクロールバー、トラックバー、スピンボタン等、同様の操作が可能なものであれば何でもよい。

本発明は、上述した実施の形態の機能を実現するソフトウエアのプログラムを、コンピュータ又はＣＰＵに供給し、そのコンピュータ又はＣＰＵが該供給されたプログラムを読み出して実行することによっても本発明の目的が達成されることは云うまでもない。

この場合、上記プログラムは、該プログラムを記録した記憶媒体から直接、又はインターネット、商用ネットワーク、若しくはローカルエリアネットワーク等に接続される不図示の他のコンピュータやデータベース等からダウンロードすることにより供給される。

また、上記プログラムは、上述した実施の形態の機能をコンピュータで実現することができればよく、その形態は、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給されるスクリプトデータ等の形態を備えるものでもよい。

更にまた、上述した実施の形態の機能を実現するソフトウエアのプログラムを記録した記憶媒体をコンピュータに供給し、そのコンピュータ又はＣＰＵが記憶媒体に格納されたプログラムを読み出し実行することによっても、本発明の目的が達成されることはいうまでもない。

上述した実施の形態では、プログラムはＲＯＭに格納されているが、これに限定する必要はなく、プログラムを供給する記憶媒体としては、例えば、ＲＡＭ、ＮＶ−ＲＡＭ、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−ＲＷ、ＤＶＤ（ＤＶＤ−ＲＯＭ、ＤＶＤ−Ｒ、DVD-RW、DVD-RAM）、磁気テープ、不揮発性のメモリカード、他のＲＯＭ等の上記プログラムを記憶できるものであればよい。

以上のように第１の実施の形態によれば、
検索結果初期表示画面は検索された描画オブジェクトが削除される直前のページ状態を表示し、スライダで画面遷移を検索結果表示状態のまま簡単な操作で可能にすることで、検索した時点のページ状態と会議の進行状況を容易に把握し、また目的の検索結果の取得を容易に行うことが出来る。

（実施例２）
以下、本発明の実施例について図面を参照して詳細に説明する。

図７は本発明を適用した検索結果表示装置の全体構成の一実施例を示した図である。

図７において、７０１は電子ホワイトボード等の描画及び表示装置であり、インターネットなどのネットワーク７０７と接続されている。

７０２は電子ホワイトボード７０１に対し描画を行う為のペン型のポインティングデバイスである光学式デジタイザ等の入力装置である。

７０３及び７０４は、７０１及び７０２と同様の構成でネットワーク７０７に接続された電子ホワイトボード及びデジタイザである。

７０５は、会議サーバであり、各地点の電子ホワイトボードから受信した描画履歴情報の格納を行う。また、検索結果表示装置からの検索要求に従って検索処理を行い、検索結果返信処理を行う。

７０６は、検索条件の指定や検索結果の表示等を行う検索結果表示装置であり、インターネットなどのネットワーク７０７と接続されている。

図８は本発明を適用した検索結果表示装置の全体構成の一実施例を示したブロック図である。

図８において、８１０及び８００は描画及び表示を行う電子ホワイトボードであり、ネットワーク８４０と接続されている。

８１４は入力部であり光学式デジタイザやキーボード等の入力装置である。

８１３は制御部であり、電子ホワイトボード８１０の各種制御を行う。

８１２は描画制御部であり、デジタイザやキーボードから入力された情報から描画オブジェクトの生成、編集、削除、電子ホワイトボードのページ操作、表示制御など、描画に関する処理を行う。

８１１は通信インタフェースであり、会議サーバ８２０と描画オブジェクトデータ等の会議データの通信を行う。

８００は電子ホワイトボードであり、電子ホワイトボード８１０と同等の構成である。

８２０は会議サーバであり、通信インタフェース８２５を介してネットワーク８４０と接続されている。

８２１は描画履歴情報格納部であり、HDD等の外部記憶装置から成り、ネットワーク８４０を介して電子ホワイトボードからオブジェクトの生成、編集、削除、ページ操作、描画ユーザ、といった処理やオブジェクト付加情報の履歴を受信し記録する。

８２２は検索制御部であり、受信した検索条件から該当するオブジェクトの検索を行う。

８２３は制御部であり、会議サーバ８２０の各種制御を行う。

８２４は文字認識部であり、必要に応じて描画履歴情報格納部に記憶されている自由曲線ストロークデータから、文字区切りを決定する文字切り、行間を決定する行切り、文字の傾斜角を取得し傾斜角修正する傾斜補正といった文字認識処理を行い、認識結果文字を出力する。

８２５は通信インタフェースであり、電子ホワイトボード８１０、８００と検索結果表示装置８３０と通信を行う。

８３０は検索結果表示装置であり、通信インタフェース８３１を介してネットワーク８４０と接続されている。

８３１は通信インタフェースであり、会議サーバ８２０へ検索要求や検索結果の送受信を行う。

８３２は描画遷移操作部であり、検索結果画面から画面遷移操作を行う。

８３３は制御部であり、検索結果表示装置の各種制御を行う。

８３４は検索結果表示部であり、検索条件の指定や検索結果の表示、画面遷移操作ユーザインタフェース等の表示を行う。

８４０はインターネットなどのネットワークである。

図９は、電子ホワイトボード８１０へ表示されるホワイトボード画面の一例を示した図である。

図９において、９０１はホワイトボードの描画面であり、ここにデジタイザで記入することにより自由曲線や手書き図形を描画することができる。また図示しない描画種選択メニュー等で描画図形種を表示し円や矩形、直線などを選択し描画できる。

９０２はホワイトボード描画面９０１へデジタイザから描画された複数の自由曲線オブジェクトである。９０３は同様に描画された自由曲線オブジェクトである。９０４は、描画面をページ単位で切り替え可能なユーザインタフェースであり、現在のページとページ送り・戻しのボタンが表示されている。

図１０は、本実施の形態におけるオブジェクト検索時の検索条件と検索結果の初期画面表示の一例を示した図である。

図１０において、画面左は検索条件を入力する領域である。画面右は、検索条件を指定し検索後の検索結果を表示する領域である。図１０では、検索オブジェクトとして“自由曲線”、検索キーとして文字列“予算”、描画ユーザは“指定しない”、検索場所は“指定しない”、の条件で検索し、検索結果として該当した４件が、ページ状態が再現された状態で表示されている。検索場所を指定していないため、ネットワーク上の会議サーバ８２０からも検索されるようになる。

１００１は検索されたページを縮小表示で再現したものである。検索条件として自由曲線に検索キー“予算”を指定している。そのため会議サーバで自由曲線を文字認識処理し、候補文字列中に“予算”を含む自由曲線オブジェクトを検索結果として出力する。このように自由曲線を文字認識処理し検索対象とすることで、デジタイザによりユーザが文字として描画した自由曲線であっても検索することが可能となる。

１００２もページ表示１００１と同様に自由曲線で描画された文字が検索されページが再現されている。この場合、自由曲線１００３は斜めに描画されているが、会議サーバに傾斜補正処理を組み込み、そのご文字認識処理を行わせることで傾斜をもって描画された自由曲線による文字であっても検索することが可能となる。

移動単位選択リストボックス１００５はスライダ４０２の移動単位の選択を行う。図１０では描画操作が選択状態となっている。

スライダ１００４はページ表示１００１又は１００２の画面遷移が可能である。動作詳細は実施の形態1に記載の動作と同様であり、移動単位選択リストボックス１００５の設定に基づきスライダ１００４のドラッグによりページ遷移が可能である。

図１１は本実施の形態２における描画履歴情報格納時の電子ホワイトボードの処理手順を示したフローチャートである。

ステップＳ１１０１では、描画面に描画操作があるまで待機する。描画操作が検出された場合はステップＳ１１０２へ進む。

ステップＳ１１０２では、ステップＳ１１０１で描画操作を検出した場合に、オブジェクト生成や削除、移動といった描画操作に応じて描画制御部で処理し、処理結果をディスプレイに表示する。

ステップＳ１１０３では、描画操作情報を会議サーバへ送信し、再びステップＳ１１０１で描画を待機する。

図１２は本実施の形態２における会議サーバの検索要求受信時の処理手順を示したフローチャートである。

ステップＳ１２０１では、会議サーバは各検索結果表示装置からの検索要求を待機している。検索要求を受信したならばステップＳ１２０２へ進む。

ステップＳ１２０２では受信した検索条件を解析する。

ステップＳ１２０３で、検索条件中に自由曲線のテキスト検索要求があるかどうかの判断を行う。

自由曲線のテキスト検索要求があった場合はステップＳ１２０４に進み、自由曲線の文字認識処理を行う。

ステップＳ１２０５では、解析した検索条件に基づき検索処理を行う。

ステップＳ１２０６では、検索されたオブジェクトを含むページ再現表示に必要なデータを検索要求元へ返信する。

図１３は本実施の形態２における検索結果表示装置の検索時の処理手順を示したフローチャートである。

ステップＳ１３０１において、検索条件の設定入力を受け付ける。ユーザは検索条件指定を図１０左側に図示した各種検索条件の項目へ入力する。

ステップＳ１３０２で検索ボタン押下を確認後、ステップＳ１３０３で上記検索条件を会議サーバへ送信する。

ステップＳ１３０４では、図１２のフローチャートで図示したように会議サーバで検索処理が行われる。

ステップＳ１３０５では、会議サーバから送信された検索結果を受信する。

ステップＳ１３０６では、ステップＳ１３０５で受信した検索オブジェクトと各種関連する付加情報によりオブジェクト描画時の画面のページ状態を生成する。

ステップＳ１３０７では、ステップＳ１３０６で生成したページ状態を図１０に例示したように検索結果表示画面へ表示する。

ステップＳ１３０８では、検索結果表示画面にてスライダの移動による画面遷移要求を待機する。

ステップＳ１３０９では、画面遷移要求があった場合に要求された遷移後のページ状態を会議サーバから再取得しページ状態を再現し表示を更新する。ここでは画面遷移要求があった場合に会議サーバへページ状態を再取得しにいく構成としているが、ステップＳ１３０５で検索結果受信時に同時に全てのページ遷移状態の再現に必要なオブジェクトデータ及び付加情報データを受信するようにしてもよい。

また、ステップＳ１３０８において、スライダ１００４による画面遷移の移動可能範囲を、検索したオブジェクトが生成されてから削除されるまでとしてもよい。このようにすることで検索するオブジェクトの生成から消去までの期間が分かりやすくなるとともにサーバからの送信データ量を削減しサーバの付加を削減できる。

ステップＳ１３１０では、遷移条件変更があった場合に、ステップＳ１３１１で遷移条件を変更し、ステップＳ１３０８へ戻る。ステップS１３１０で遷移条件変更もない場合はステップＳ１３０１へ戻る。

以上述べたように第２の実施の形態によれば、
検索結果表示画面はスライダで画面遷移を検索結果表示状態のまま簡単な操作で可能にすることで、会議の進行状況を容易に把握し、目的の検索結果の取得を容易に行うことが出来る。また自由曲線の文字認識処理と組み合わせることで手書き文字の検索と画面遷移の再現を容易に行うことが出来る。

検索結果表示装置の全体構成の一実施例を示したブロック図である。 ホワイトボード画面の一例を示した図である。 描画履歴情報格納部に記憶される情報の一例を示した図である。 検索条件と検索結果の初期画面表示の一例を示した図である。 描画履歴情報格納時の処理手順を示したフローチャートである。 検索結果表示の処理手順を示したフローチャートである。 検索結果表示装置の全体構成の一実施例を示した図である。 検索結果表示装置の全体構成の一実施例を示したブロック図である。 ホワイトボード画面の一例を示した図である。 検索条件と検索結果の初期画面表示の一例を示した図である。 描画履歴情報格納時の電子ホワイトボードの処理手順を示したフローチャートである。 会議サーバの検索要求受信時の処理手順を示したフローチャートである。 検索結果表示装置の検索時の処理手順を示したフローチャートである。

符号の説明

１０１ 検索結果表示処理部
１０２ 入力部
１０３ 制御部
１０４ 描画制御部
１０５ 描画履歴情報格納部
１０６ 検索制御部
１０７ 検索結果表示制御部
１０８ 映像出力部
１０９ 入力装置
１１０ 表示装置
１１１ 表示部
１１２ 入力部
１１３ 出力部
１２０ 入力装置
７０１、７０３ 電子ホワイトボード
７０２、７０４ デジタイザ
７０３ 電子ホワイトボード
７０６ 検索結果表示装置
７０７ ネットワーク
８００、８１１ 電子ホワイトボード
８１２ 描画制御部
８１３ 制御部
８１４ 入力部
８２０ 会議サーバ
８２１ 描画履歴情報格納部
８２２ 検索制御部
８２３ 制御部
８２４ 文字認識部
８２５ 通信インタフェース
８３０ 検索結果表示装置
８３１ 通信インタフェース
８３２ 描画遷移操作部
８３３ 制御部
８３４ 検索結果表示部
８４０ ネットワーク

Claims (24)

1. ページへオブジェクトの描画を行う電子会議システムにおいて、
   描画オブジェクトの描画履歴情報を格納する描画履歴情報格納手段と、
   検索キーとなる描画情報を指定し描画履歴情報から該当する描画オブジェクトを含むページ状態を検索する検索手段と、
   前記検索されたページ状態を再現し表示する検索結果表示手段と、
   前記検索結果表示手段は、各検索結果ページに対しオブジェクト描画履歴の再生操作を前記描画履歴情報に基づき行うための画面遷移操作手段と、
   を備えることを特徴とする検索結果表示装置。
2. 前記画面遷移操作手段は、画面遷移の単位を一オブジェクト操作単位で行うことを特徴とする前記請求項1に記載の検索結果表示装置。
3. 前記描画履歴情報格納手段は、描画オブジェクトの描画ユーザのパラメータを持ち、
   前記画面遷移操作手段は、画面遷移の移動単位を描画ユーザ単位とすることを特徴とする前記請求項１乃至２のいずれか一項に記載の検索結果表示装置。
4. 前記画面遷移操作手段は、画面遷移の移動単位を描画オブジェクトグループ単位で行うことを特徴とする前記請求項１乃至３のいずれか一項に記載の検索結果表示装置。
5. 前記描画履歴情報格納手段は、所定時間内に描画された描画オブジェクト又は一定近傍内に描画されたオブジェクトを描画オブジェクトグループとして格納することを特徴とする前記請求項４に記載の検索結果表示装置。
6. 前記検索結果表示手段に表示するページは、検索キーとして指定したオブジェクトが消去される直前のページ状態とすることを特徴とする前記請求項１乃至５のいずれか一項に記載の検索結果表示装置。
7. 前記画面遷移操作手段は、画面遷移の移動可能範囲を、検索したオブジェクトが生成されてから削除されるまでとすることを特徴とする前記請求項１乃至６のいずれか一項に記載の検索結果表示装置。
8. 前記検索結果表示手段は、画面遷移の移動単位を選択するための移動単位選択手段を備えることを特徴とする前記請求項１乃至７のいずれか一項に記載の検索結果表示装置。
9. ページへオブジェクトの描画を行う電子会議システムにおいて、
   描画オブジェクトの描画履歴情報を格納する描画履歴情報格納工程と、
   検索キーとなる描画情報を指定し描画履歴情報から該当する描画オブジェクトを含むページ状態を検索する検索工程と、
   前記検索されたページ状態を再現し表示する検索結果表示工程と、
   前記検索結果表示工程は、各検索結果ページに対しオブジェクト描画履歴の再生操作を前記描画履歴情報に基づき行うための画面遷移操作工程と、
   を備えることを特徴とする検索結果表示方法。
10. 前記画面遷移操作工程は、画面遷移の単位を一オブジェクト操作単位で行うことを特徴とする前記請求項９に記載の検索結果表示方法。
11. 前記描画履歴情報格納工程は、描画オブジェクトの描画ユーザのパラメータを持ち、
    前記画面遷移操作工程は、画面遷移の移動単位を描画ユーザ単位とすることを特徴とする前記請求項９乃至１０のいずれか一項に記載の検索結果表示方法。
12. 前記画面遷移操作工程は、画面遷移の移動単位を描画オブジェクトグループ単位で行うことを特徴とする前記請求項９乃至１１のいずれか一項に記載の検索結果表示方法。
13. 前記描画履歴情報格納工程は、所定時間内に描画された描画オブジェクト又は一定近傍内に描画されたオブジェクトを描画オブジェクトグループとして格納することを特徴とする前記請求項１２に記載の検索結果表示方法。
14. 前記検索結果表示工程に表示するページは、検索キーとして指定したオブジェクトが消去される直前のページ状態とすることを特徴とする前記請求項９乃至１３のいずれか一項に記載の検索結果表示方法。
15. 前記画面遷移操作工程は、画面遷移の移動可能範囲を、検索したオブジェクトが生成されてから削除されるまでとすることを特徴とする前記請求項９乃至１４のいずれか一項に記載の検索結果表示方法。
16. 前記検索結果表示工程は、画面遷移の移動単位を選択するための移動単位選択工程を備えることを特徴とする前記請求項９乃至１５のいずれか一項に記載の検索結果表示方法。
17. ページへオブジェクトの描画を行う電子会議システムにおいて、
    描画オブジェクトの描画履歴情報を格納する描画履歴情報格納ステップと、
    検索キーとなる描画情報を指定し描画履歴情報から該当する描画オブジェクトを含むページ状態を検索する検索ステップと、
    前記検索されたページ状態を再現し表示する検索結果表示ステップと、
    前記検索結果表示ステップは、各検索結果ページに対しオブジェクト描画履歴の再生操作を前記描画履歴情報に基づき行うための画面遷移操作ステップと、
    を備えることを特徴とする検索結果表示プログラム。
18. 前記画面遷移操作ステップは、画面遷移の単位を一オブジェクト操作単位で行うことを特徴とする前記請求項１７に記載の検索結果表示プログラム。
19. 前記描画履歴情報格納ステップは、描画オブジェクトの描画ユーザのパラメータを持ち、
    前記画面遷移操作ステップは、画面遷移の移動単位を描画ユーザ単位とすることを特徴とする前記請求項１７乃至１８のいずれか一項に記載の検索結果表示プログラム。
20. 前記画面遷移操作ステップは、画面遷移の移動単位を描画オブジェクトグループ単位で行うことを特徴とする前記請求項１７乃至１９のいずれか一項に記載の検索結果表示プログラム。
21. 前記描画履歴情報格納ステップは、所定時間内に描画された描画オブジェクト又は一定近傍内に描画されたオブジェクトを描画オブジェクトグループとして格納することを特徴とする前記請求項２０に記載の検索結果表示プログラム。
22. 前記検索結果表示ステップに表示するページは、検索キーとして指定したオブジェクトが消去される直前のページ状態とすることを特徴とする前記請求項１７乃至２１のいずれか一項に記載の検索結果表示プログラム。
23. 前記画面遷移操作ステップは、画面遷移の移動可能範囲を、検索したオブジェクトが生成されてから削除されるまでとすることを特徴とする前記請求項１７乃至２２のいずれか一項に記載の検索結果表示プログラム。
24. 前記検索結果表示ステップは、画面遷移の移動単位を選択するための移動単位選択ステップを備えることを特徴とする前記請求項１７乃至２３のいずれか一項に記載の検索結果表示プログラム。

Images