WO2007142256A1 - オブジェクト表示処理装置、オブジェクト表示処理方法、およびオブジェクト表示処理用プログラム - Google Patents

Abstract

コンピュータ２０では、表示画面３１上の複数のアイコン１０から抽出される一対のアイコン１０のすべてについて画面上における距離ｄが算出されると共に（ステップＳ１１０）、算出された距離ｄに基づいて表示画面３１上で空間的にまとめられているアイコン１０が１つのグループとしてグループ化され（ステップＳ１２０）、アイコン１０のグループへの帰属を示すグループ識別表示としてのバブル１１と共にアイコン１０が表示画面３１上に表示される（ステップＳ１５０）。これにより、コンピュータ２０では、表示画面３１上でアイコン１０の空間的なまとまりを構築すれば、複数のアイコン１０をグループ化すると共にグループ化されたアイコン１０へのグループ処理を実行することが可能となる。

Description

明 細 書

オブジェクト表示処理装置、オブジェクト表示処理方法、およびオブジェク ト表示処理用プログラム

技術分野

[0001] 本発明は、画面上に複数のオブジェクトを表示させると共に前記オブジェクトに対 する操作に応じた処理を実行するオブジェクト表示処理装置、オブジェクト表示処理 方法、およびオブジェクト表示処理用プログラムに関する。

背景技術

[0002] 一般に、グラフィカルユーザインターフェース（GUI)を実装したオペレーティングシ ステム等においては、階層的なフォルダ構造を構築すると共にフォルダ内にオブジェ タトとしてのアイコンを保管することにより多数のファイルが分類'整理される。このよう なフォルダ構造は、ある程度確定的かつ永続的なファイルの分類には適したもので はあるが、明示的なフォルダの作成と当該フォルダへのファイル（アイコン）の格納操 作とを要求するものであることから、相互の関係が比較的曖昧なファイルの分類ゃ頻 繁に再分類されるようなファイルの管理には必ずしも有用なものとはならない。このた め、 Manderらは、デスクトップ上でのファイル管理手法として、フォルダの代替としてフ アイルを積み重ねた ' Pile，（書類の山）を作成することにより多数のファイルを分類 ·整 理する 'Pile' Metaphorを提案して 、る（非特許文献 1参照。 )。

非特許文献 1 : R. Mander, G. Salomon, and Y. Y. Wong. A 'Pile' Metaphor forSuppo rting Casual Organization of Information. In Proceedings of the SIGCHI conference on Human factors in computing systems, pp. 13—23, 1994.

発明の開示

[0003] しかしながら、上記' Pile ' Metaphorにおいては、画面上でファイル同士が完全に重 なり合ってしまい、しかも' Pile'の中身である個々のファイルの操作に特定の動作が 要求されることから 'Pile'自体が実質的に独自のフォルダを構成することとなり、結局 のところファイルの分類'整理の省力化や利便性の改善はさほど図られていない。そ の一方で、従来から、相互に関連性を有する複数のアイコンを画面上で互いに近接 させたり重ね合わせたりすることにより空間的にまとめて配置し、それら複数のアイコ ンのまとまりを見た目上 1つのグループとして表す手法も広く活用されている。このよう な手法は、単にアイコンを移動させるだけで明示的なグループィ匕操作なしにグルー プを表現し得る点で手軽かつ有用なものではある。しかしながら、これらのアイコンは システムによってグループとして認識されて 、るものではな 、から、グループを一括し て操作することは不可能である。また、数多くのアイコンが重なり合っていると個々の アイコンに対するアクセスや操作が極めて面倒なものとなってしまう。

[0004] そこで、本発明によるオブジェクト表示処理装置、オブジェクト表示処理方法、およ びオブジェクト表示処理用プログラムは、画面上の複数のオブジェクトを簡単に効率 よく分類'管理可能とすることを目的の 1つとする。また、本発明によるオブジェクト表 示処理装置、オブジェクト表示処理方法、およびオブジェクト表示処理用プログラム は、画面上に表示されるオブジェ外を分類、管理する際の操作性を向上させること を目的の 1つとする。

[0005] 本発明による本発明のオブジェクト表示処理装置、オブジェクト表示処理方法、お よびオブジェクト表示処理用プログラムは、上述の目的の少なくとも一部を達成する ために以下の手段を採って 、る。

[0006] 本発明によるオブジェクト表示処理装置は、

画面上に複数のオブジェクトを表示させると共に前記オブジェクトに対する操作に 応じた処理を実行するオブジェクト表示処理装置であって、

前記複数のオブジェクトから一対のオブジェクトを抽出して該一対のオブジェクト間 の前記画面上における距離を算出する距離算出手段と、

前記算出された距離に基づいて前記画面上で空間的にまとめられているオブジェ タトを 1つのグループとしてグループ化するグループ化手段と、

前記オブジェクトの前記グループへの帰属を示すグループ識別表示と共に前記ォ ブジェクトを前記画面上に表示させる表示手段と、

前記画面上で前記グループに対する所定の操作がなされたときに、該操作に応じ た前記グループに対する処理であるグループ処理を実行するグループ処理手段と、 を備えるものである。 [0007] このオブジェクト表示処理装置では、複数のオブジェクトから抽出された一対のォブ ジヱタト間の画面上における距離が算出されると共に算出された距離に基づいて画 面上で空間的にまとめられているオブジェクトが 1つのグループとしてグループ化され 、オブジェクトのグループへの帰属を示すグループ識別表示と共にオブジェクトが画 面上に表示される。そして、画面上でグループに対する所定の操作がなされたときに は、該操作に応じたグループに対する処理であるグループ処理が実行される。これ により、画面上でオブジェクトの空間的なまとまりを構築すれば、複数のオブジェクト をグループ化すると共にグループ化されたオブジェクトへのグループ処理を実行する ことが可能となる。従って、このオブジェクト表示処理装置によれば、画面上の複数の オブジェ外を簡単に効率よく分類'管理することができる。

[0008] また、前記距離算出手段は、前記複数のオブジェクトから抽出される一対のォブジ ェタトのすべてについて前記距離を算出するものであってもよぐ前記グループィ匕手 段は、前記算出された距離が所定の閾値以下である一対のオブジェクト同士をダル ープ化するものであってもよい。これにより、画面上のオブジェクトを空間的なまとまり 具合に応じてグループィ匕することが可能となる。

[0009] また、前記グループ化手段は、グループィ匕されて ヽな 、一対のオブジェクト間の距 離が第 1の閾値以下である場合に該グループィ匕されていない一対のオブジェクト同 士をグループ化すると共に、既にグループィ匕されている一対のオブジェクト間の距離 が前記第 1の閾値よりも大き 、第 2の閾値以下である場合に該グループィ匕されて!、る 一対のオブジェクト同士のグループ化を維持するものであってもよい。これにより、そ れまでにグループィ匕されて 、な 、オブジェクト同士を比較的グループィ匕し難くすると 共に、ー且構築されたグループのグループ化を解除し難くすることが可能となる。従 つて、意図しないオブジェクトのグループ化やグループ化の解除を抑制しながら、画 面上にオブジェクトを自在に配置できるようになるので、画面上に表示されるオブジェ タトを分類、管理する際の操作性や利便性を向上させることが可能となる。

[0010] 更に、前記グループ化手段は、前記画面上における前記オブジェクトの位置関係 が変更されたときに前記オブジェクトのグループィ匕を実行するものであってもよ 、。こ の場合には、画面上で何れかのオブジェクトやグループが移動されたり、新たなォブ ジェタトが作成されたりして画面上におけるオブジェクトの位置関係が変更されると、 オブジェクトのグループ化が実行されることになる。従って、あるオブジェクトあるいは グループ付近に新たなオブジェクトが追加されたり、画面上で何れかのオブジェクト あるいはグループを他のオブジェクトあるいはグループに接近させたりすれば、それ らのオブジェクト等を自動的にグループィ匕することが可能となる。また、あるグループ 力 何れかのオブジェクトを画面上で引き離せば、当該何れかのオブジェクトのダル 一プ化を解除することができるので、オブジェクトの再分類も簡単に効率よく実行可 能となる。

[0011] また、本発明によるオブジェクト表示処理装置は、前記グループィ匕手段によるダル ープ化と前記表示手段による表示処理と前記グループ処理手段によるグループ処 理とが有効とされるグループモードの選択および該選択の解除を可能とするグルー プモード設定手段を更に備えてもよい。これにより、グループモードの任意の選択が 可能となり、複数のグループの構築あるいはグループ化の解除等をワンアクションで 実行することも可能となる。

[0012] 更に、本発明によるオブジェクト表示処理装置は、前記複数のオブジェクトの前記 画面上における位置を取得するオブジェクト位置取得手段と、前記取得された前記 オブジェクトの各々

、て前記グループの前記画面上に おける範囲であるグループ範囲を設定するグループ範囲設定手段とを更に備えても よぐ前記表示手段は、前記設定されたグループ範囲を前記グループ識別表示とし て前記オブジェクトと共に前記画面上に表示させるものであってもよい。これにより、 画面上におけるオブジェクトの空間的なまとまり具合に応じてグループ範囲がより適 正に設定された上でグループ識別表示として画面上に表示されるので、 1つのダル ープとそれに帰属するオブジェクトとを画面上で容易に識別させることが可能となる。

[0013] また、前記グループ範囲設定手段は、前記取得された前記オブジェクトの各々の 位置と前記オブジェクトの各々に付与された仮想的なポテンシャル場とに基づくポテ ンシャルを前記複数のオブジェクトに対応した領域について算出するポテンシャル算 出手段と、前記算出されたポテンシャルが所定の閾値以上となる領域を囲む境界を 前記グループ範囲として設定する境界設定手段とを含むものであってもよ 、。このよ うに、各オブジェクトに仮想的なポテンシャル場を付与し、各オブジェクトの位置とポ テンシャル場とに基づくポテンシャルを複数のオブジェクトに対応した領域 (画面領域 )について算出した場合、オブジェ外の密度が高い領域、すなわち、画面上で空間 的にまとめられているオブジェクト群の周辺ほどポテンシャルの算出値が大きくなる。 従って、算出したポテンシャルが所定の閾値以上となる領域を囲む境界をグループ 範囲とすれば、オブジェクトのグループへの帰属を示すグループ識別表示を画面上 におけるオブジェクトの空間的なまとまり具合に応じてより適正に設定して画面上に 表示させることが可能となる。そして、上述のようにして算出されるポテンシャルに基 づく境界をグループ識別表示として画面上に表示させれば、画面上でオブジェクト等 が移動されると、その移動に応じてグループ識別表示が伸縮するように画面上に表 示されることになるので、グループィ匕ゃグループ化の解除がなされた否かを視覚的 にわ力りやすく提示することが可能となる。

[0014] 更に、前記ポテンシャル場は、前記オブジェクトの所定の基準位置におけるポテン シャルを最大とし、該基準位置力 径方向に離れるほどポテンシャルを小さく規定す る濃度関数として定められもよい。このように、各オブジェクトに付与するポテンシャル 場として、いわゆるメタボールを 2次元に応用した濃度関数を用いれば、いわゆるマ 一チングスクェア法を利用することにより、画面上におけるオブジェクトの空間的なま とまり具合に応じて、グループ識別表示としての境界をより適正に設定することが可 能となる。

[0015] また、前記グループ化手段は、前記画面に対して設定された複数のグリッドの少な くとも前記オブジェクトの各々に対応したグリッドごとに前記ポテンシャルを算出するも のであってもよい。

[0016] 更に、前記ポテンシャル算出手段は、前記画面上での前記オブジェクトのまとまり 具合に応じた前記ポテンシャル場の減衰を伴って前記ポテンシャルを算出するもの であってもよい。これにより、画面上で空間的にまとめられたオブジェクトの各々のポ テンシャル場同士が重なり合ったとしても、そのようなポテンシャル場の重なり合いに 起因してポテンシャルが上記閾値以上となる領域すなわち上述の境界が拡大してし まうことを抑制することができる。従って、グループ範囲としての境界すなわちグルー プ識別表示が画面上に不必要に拡大して表示されることを抑制して、無駄な画面ス ペースの消費を回避することが可能となる。

[0017] この場合、前記オブジェクトごとに該オブジェクトの所定の基準位置の前記表示画 面上における位置のポテンシャルである基準ポテンシャルを算出した上で、前記ォ ブジェクトごとの前記基準ポテンシャルに基づく前記ポテンシャル場の減衰を伴って 前記ポテンシャルを算出するものであってもよい。すなわち、オブジェクトの基準位置 の表示画面上における位置のポテンシャルである基準ポテンシャルは、オブジェクト 同士のまとまり具合に応じたポテンシャル場同士の重なりの度合に依存して定まる。 従って、オブジェクトごとに基準ポテンシャルに基づ 、てポテンシャル場を減衰させ れば、ポテンシャル場同士の重なりの度合に応じてより適正にオブジェクトのポテンシ ャル場を減衰させることができるので、グループ範囲としての境界すなわちグループ 識別表示を画面上にコンパクトに表示させることが可能となる。

[0018] また、前記ポテンシャル算出手段は、何れかのオブジェクトに対応した領域のポテ ンシャルを算出する際に、当該何れかのオブジェクトと同一のグループに帰属してい な！、オブジェクトの前記ポテンシャル場に負の重みを付与するものであってもよ 、。こ のように、ポテンシャルの算出に際して、あるオブジェクトと同一のグループに帰属し て ヽな 、オブジェクトのポテンシャル場によるポテンシャルを負の重みに応じて減算 すれば、画面上におけるオブジェクトの位置関係の変更に伴い、上述のようにして算 出されるポテンシャルに基づく境界に基づくグループ識別表示同士が画面上で接近 したときに、両者を互いに反発し合うように表示させることができる。これにより、それま でにグループィ匕されて 、な 、オブジェクト同士が比較的グループィ匕され難 、様子を 視覚的に提示することが可能となる。

[0019] 更に、本発明によるオブジェクト表示処理装置において、前記グループ処理手段 は、前記画面上に前記グループに帰属する複数のオブジェクトの少なくとも一部が互 いに重なり合うように表示されて 1、るときに、所定の拡張要求操作に応じて前記ォブ ジェタト同士の重なりが概ね解消されるように前記グループに帰属する前記複数のォ ブジェクトを再表示させるものであってもよい。これにより、 1つのグループに帰属する 複数のオブジェクトの少なくとも一部が互いに重なり合うように表示されて!、ても、拡 張要求操作を実行すれば、その重なりが概ね解消され、当該グループに帰属する複 数のオブジェクトの各々に対するアクセスや操作を簡単に実行可能となるので、画面 上に表示されるオブジェ外を分類、管理する際の操作性を向上させることができる。 なお、ここでいう"重なりが「概ね解消」される"とは、オブジェクト同士の重なりが完全 に解消されることに加えて、少なくとも下側のオブジェクトに対するアクセスが可能な 程度に重なりが解消されることを含む。

[0020] この場合、前記グループ処理手段は、前記グループに帰属する複数のオブジェクト の中から一対のオブジェクトを抽出するオブジェクト対抽出手段と、前記抽出された 一対のオブジェクトにおける重なりを解消するための該一対のオブジェクト間の相対 位置関係を導出する相対位置関係導出手段と、前記導出された相対位置関係と所 定の位置制約とに基づいて前記抽出された一対のオブジェクトの前記重なりの解消 後における前記画面上の目標位置を設定する目標位置設定手段とを含むものであ つてもよい。これにより、重なり解消前のオブジェクトの相対的な位置関係を概ね維持 すると共にグループの表示範囲を不必要に拡張することを抑制しながら、オブジェク ト同士の重なりが解消されるように当該グループに帰属する複数のオブジェクトを再 表示させることが可能となる。

[0021] また、前記目標位置設定手段は、前記目標位置を自由変数とし、該目標位置に基 づく前記一対のオブジェ外の相対位置関係と、前記設定された相対位置関係との 間における残差の二乗の総和を表すエネルギ関数を最小二乗法で最小化して前記 目標位置を設定するものであってもよ 、。

[0022] 更に、本発明によるオブジェクト表示処理装置にぉ 、て、前記グループ処理手段 は、前記画面上で前記グループを分断するストロークの入力操作がなされたときに、 前記入力されたストロークに基づいて前記グループを新たな複数のグループに分割 するものであってもよい。これにより、画面上におけるオブジェクトの空間的なまとまり 具合に応じて構築された 1つのグループを再度複数のグループに簡単に分割するこ とが可能となる。また、グループィ匕を意図されていないオブジェクトを含むグループが 構築された場合には、グループィ匕が意図されたオブジェクトとそうではな ヽォブジェク トとを切り分けるようにストロークを入力すれば、本来意図されたグループを簡単に構 築することが可能となる。従って、このようなグループ処理手段を備えたオブジェクト 表示処理装置では、画面上に表示されるオブジェ外を分類、管理する際の利便性 を向上させることが可能となる。なお、ここでいう「新たな複数のグループ」は、単一の オブジェクトのみを含むものであってもよ 、。

[0023] この場合、前記グループ処理手段は、前記グループに帰属するオブジェクトのうち 、前記ストロークよりも一側に位置するオブジェクトを新たな 1つのグループとしてダル ープ化し、前記入力されたストロークよりも他側に位置するオブジェクトを新たな 1つ のグループとしてグループ化するものであってもよい。また、オブジェクト表示処理装 置力 前記複数のオブジェクトの前記画面上における位置と前記オブジェクトの各々 に付与された仮想的なポテンシャル場とに基づくポテンシャルを前記複数のオブジェ タトに対応した領域について算出するポテンシャル算出手段と、前記算出されたポテ ンシャルが所定の閾値以上となる領域を囲む境界を設定する境界設定手段とを更に 備える場合、前記グループ処理手段は、前記境界と前記ストロークとに基づいて形成 される 2つのノレープごとに、該ノレープ内のオブジェクトを 1つのグノレープとしてグノレー プ化するものであってもよ 、。

[0024] 更に、本発明によるオブジェクト表示処理装置は、前記グループに帰属する何れか のオブジェクトに対する所定の操作がなされたときに、該操作に応じた前記何れかの オブジェクトに対する処理である個別処理を実行する個別処理手段を更に備えても よい。

[0025] そして、本発明によるオブジェクト表示処理装置におけるオブジェクトは、前記画面 上に表示されるアイコンであってもよい。すなわち、本発明によるオブジェクト表示処 理装置は、デスクトップ等に表示させるアイコンを分類'管理する装置として構成され ると極めて有用である。

[0026] 本発明によるオブジェクト表示処理方法は、

画面上に複数のオブジェクトを表示させると共に前記オブジェクトに対する操作に 応じた処理を実行するためのオブジェクト表示処理方法であって、

(a)複数のオブジェクトから一対のオブジェクトを抽出して該一対のオブジェクト間の 前記画面上における距離を算出するステップと、 (b)ステップ (a)で算出された距離に基づいて前記画面上で空間的にまとめられてい るオブジェクトを 1つのグループとしてグループ化するステップと、

(c)前記オブジェクトの前記グループへの帰属を示すグループ識別表示と共に前記 オブジェクトを前記画面上に表示させるステップと、

(d)前記画面上で前記グループに対する所定の操作がなされたときに、該操作に応 じた前記グループに対する処理であるグループ処理を実行するステップと、 を含むものである。

[0027] このオブジェクト表示処理方法によれば、画面上でオブジェクトの空間的なまとまり を構築すれば、複数のオブジェクトをグループィ匕すると共にグループィ匕されたォブジ ェタトへのグループ処理を実行することが可能となるので、画面上の複数のオブジェ タトを簡単に効率よく分類'管理することができる。

[0028] また、本発明によるオブジェクト表示処理方法にぉ 、て、ステップ (a)では、前記複 数のオブジェクトから抽出される一対のオブジェクトのすべてについて前記距離を算 出し、ステップ (b)では、前記算出された距離が所定の閾値以下である一対のォブジ ェクト同士をグループ化してもよい。

[0029] 更に、本発明によるオブジェクト表示処理方法にぉ 、て、ステップ (b)では、グルー プ化されていない一対のオブジェクト間の距離が第 1の閾値以下である場合に該グ ループ化されていない一対のオブジェクト同士をグループ化すると共に、既にグルー プ化されている一対のオブジェ外間の距離が前記第 1の閾値よりも大きい第 2の閾 値以下である場合に該グループィ匕されている一対のオブジェクト同士のグループィ匕 を維持してもよい。

[0030] また、本発明によるオブジェクト表示処理方法は、（e)前記複数のオブジェクトの前 記画面上における位置を取得するステップと、 (f)ステップ (e)で取得された前記ォブ ジェタトの各々の位置と所定の制約とに基づいて前記グループの前記画面上におけ る範囲であるグループ範囲を設定するステップとを更に含んでもよぐステップ (c)で は、ステップ (f)で設定されたグループ範囲を前記グループ識別表示として前記ォブ ジェタトと共に前記画面上に表示させてもょ 、。

[0031] 更に、本発明によるオブジェクト表示処理方法にぉ 、て、ステップ (f)では、ステップ (e)で取得された前記オブジェクトの各々の位置と前記オブジェクトの各々に付与さ れた仮想的なポテンシャル場とに基づくポテンシャルを前記複数のオブジェクトに対 応した領域について算出し、前記算出したポテンシャルが所定の閾値以上となる領 域を囲む境界を前記グループ範囲として設定してもよい。

[0032] また、本発明によるオブジェクト表示処理方法にぉ 、て、ステップ (d)では、前記画 面上に前記グループに帰属する複数のオブジェクトの少なくとも一部が互いに重なり 合うように表示されているときに、所定の拡張要求操作に応じて前記オブジェクト同 士の重なりが概ね解消されるように前記グループに帰属する前記複数のオブジェクト を再表示させてもよい。

[0033] 更に、本発明によるオブジェクト表示処理方法にお!、て、ステップ（d)では、前記画 面上で前記グループを分断するストロークの入力操作がなされたときに、前記入力さ れたストロークに基づ ヽて前記グループを新たな複数のグループに分割してもよ!/、。

[0034] そして、本発明によるオブジェクト表示処理方法にぉ 、て、前記オブジェクトは、前 記画面上に表示されるアイコンであってもよい。

[0035] 本発明によるオブジェクト表示処理用プログラムは、

複数のオブジェクトを画面上に表示させると共に前記オブジェクトに対する操作に 応じた処理を実行するオブジェクト表示処理装置としてコンピュータを機能させるォ ブジェクト表示処理用プログラムであって、

複数のオブジェクトから一対のオブジェクトを抽出して該一対のオブジェクト間の前 記画面上における距離を算出する距離算出モジュールと、

前記算出された距離に基づいて前記画面上で空間的にまとめられているオブジェ タトを 1つのグループとしてグループ化するグループ化モジュールと、

前記オブジェクトの前記グループへの帰属を示すグループ識別表示と共に前記ォ ブジェクトを前記画面上に表示させる表示モジュールと、

前記画面上で前記グループに対する所定の操作がなされたときに、該操作に応じ た前記グループに対する処理であるグループ処理を実行するグループ処理モジュ 一ノレと、

を備えるものである。 [0036] このオブジェクト表示処理用プログラムがインストールされたコンピュータは、上述の 本発明によるオブジェクト表示処理装置として機能することから、このオブジェクト表 示処理用プログラムを用いれば、画面上の複数のオブジェクトを簡単に効率よく分類 '管理することが可能となる。このオブジェクト表示処理プログラムは、例えばコンビュ ータにインストールされる既存のオペレーティングシステムにプラグインを追加するこ とにより実現されるものであってもよい。

図面の簡単な説明

[0037] [図 1]本発明の一実施例に係るオブジェクト表示処理装置であるコンピュータ 20の概 略構成図である。

[図 2]実施例のコンピュータ 20に接続された表示装置 30の表示画面 31上に表示さ れるデスクトップの一例を示す説明図である。

[図 3]グループモードが選択されたときに実施例のコンピュータ 20に接続された表示 装置 30の表示画面 31上に表示されるデスクトップの一例を示す説明図である。

[図 4]実施例のコンピュータ 20において実行されるグループィ匕表示処理の一例を示 すフローチャートである。

[図 5]図 4のステップ S120におけるグループ化処理の一例を示すフローチャートであ る。

[図 6A]実施例のコンピュータ 20において各アイコン 10に付与されるポテンシャル場 を例示する説明図である。

[図 6B]各アイコン 10の座標と各アイコン 10に付与されたポテンシャル場とに基づくポ テンシャルにより規定されるバブル境界 bbを示す説明図である。

[図 7]図 4のステップ S 130におけるポテンシャル算出処理の一例を示すフローチヤ一 トである。

[図 8]バブル境界 bbを設定する際に用いられるルックアップテーブルを例示する説明 図である。

[図 9]表示画面 31上でアイコン 10を移動させたときの表示画面 31の表示状態を例示 する説明図である。

[図 10]表示画面 31上でアイコン 10を移動させたときの表示画面 31の表示状態を例 示する説明図である。

[図 11A]表示画面 31上で 、わゆるべリーピッキングを実行した場合の表示画面 31の 表示状態を例示する説明図である。

[図 11B]表示画面 31上で 、わゆるべリーピッキングを実行した場合の表示画面 31の 表示状態を例示する説明図である。

[図 11C]表示画面 31上でいわゆるベリーピッキングを実行した場合の表示画面 31の 表示状態を例示する説明図である。

[図 11D]表示画面 31上でいわゆるベリーピッキングを実行した場合の表示画面 31の 表示状態を例示する説明図である。

[図 12A]複数のアイコン 10が重ね合わされたときのバブル 11の表示状態を例示する 説明図である。

[図 12B]複数のアイコン 10が重ね合わされたときのバブル 11の表示状態を例示する 説明図である。

[図 13]グループ化されたアイコン 10を取り囲むバブル 11のバブル境界 bbを例示す る説明図である。

[図 14]表示画面 31上でアイコン 10を移動させたときの表示画面 31の表示状態を例 示する説明図である。

[図 15A]実施例のコンピュータ 20におけるグループ処理の一つである拡張表示処理 を説明するための説明図である。

[図 15B]実施例のコンピュータ 20におけるグループ処理の一つである拡張表示処理 を説明するための説明図である。

[図 16]実施例のコンピュータ 20において実行される拡張表示処理の一例を示すフロ 一チャートである。

圆 17]ドロネ一三角形分割処理を説明するための説明図である。

圆 18A]アイコン 10同士が重ならないようにする理想相対位置関係を導出する手順 を示す説明図である。

圆 18B]アイコン 10同士が重ならないようにする理想相対位置関係を導出する手順 を示す説明図である。 [図 19]理想相対位置関係を求めるためのプログラムのソースコードの一例を示す説 明図である。

[図 20]実施例のコンピュータ 20において実行されるグループ分割処理の一例を示す フローチャートである。

[図 21A]実施例のコンピュータ 20において実行されるグループ分割処理を説明する ための説明図である。

[図 21B]実施例のコンピュータ 20において実行されるグループ分割処理を説明する ための説明図である。

[図 21C]実施例のコンピュータ 20において実行されるグループ分割処理を説明する ための説明図である。

[図 22]本発明の変形例としての 2次元チャットシステムの表示画面を例示する説明図 である。

発明を実施するための最良の形態

[0038] 次に、実施例を参照しながら本発明を実施するための最良の形態について説明す る。

[0039] 図 1は、本発明の一実施例に係るオブジェクト表示処理装置としてのコンピュータ 2 0の概略構成図である。同図に示すように、実施例のコンピュータ 20は、図示しない CPU, ROM, RAM,グラフィックプロセッサ (GPU)、システムバス、各種インターフ エース、記憶装置 (ハードディスクドライブ）、外部記憶装置等を含む汎用のコンビュ ータとして構成されており、液晶ディスプレイ等の表示装置 30や、入力装置としての キーボード 40やマウス 50等と接続されて使用される。また、コンピュータ 20には、グ ラフイカルユーザインターフェース (GUI)を実装すると共に装置全体を統括的に制 御するオペレーティングシステムがインストールされており、当該オペレーティングシ ステムには、本発明によるオブジェクト表示処理用プログラムが予めまたはプラグイン の追カ卩により組み込まれている。オブジェクト表示処理用プログラムは、デスクトップ やデスクトップ上のウィンドウに表示されるオブジェクトとしてのアイコンの自動グルー プ化ゃグループィヒされたアイコンに対する一括的な処理であるグループ処理等を実 現することにより、アイコンの分類 ·管理を簡単に効率よく実行可能とするものである。 [0040] そして、コンピュータ 20には、 CPUや ROM, RAM, GPU、各種インターフェース 、記憶装置といったハードウェアと、インストールされたオペレーティングシステムを始 めとするアプリケーションプログラムとの一方または双方の協働により、画像処理部 21 と、画像データ記憶部 22と、グループ化演算部 23と、ポテンシャル算出部 24と、バ ブル境界設定部 25と、個別処理部 26と、グループ処理部 27とが機能ブロックとして 構築されている。画像処理部 21は、様々なタスクに関連した画像処理を実行し、画 像データ記憶部 22は、生成された各種画像データ等を記憶する。また、グループ化 演算部 23は、アイコンの自動グループィ匕のための演算処理を実行して表示画面 31 上で空間的にまとめられているアイコンをグループィ匕する。更に、ポテンシャル算出 部 24は、アイコンの表示画面 31上における位置 (座標）と各アイコンに付与された仮 想的なポテンシャル場とに基づくポテンシャルを算出し、バブル境界設定部 25は、ポ テンシャル算出部 24により算出されたポテンシャルに基づいてグループィ匕されたァ イコン（グループ）の範囲であるグループ範囲としてのバブル境界を設定する。そして 、個別処理部 26は、グループィ匕されている力否かに拘わらず、マウス 50を介して何 れカ 1つのアイコンに対して何らかの操作が実行された際に、当該操作に応じた処理 である個別処理を実行し、グループ処理部 27は、グループ化されたアイコンに対す る特定のグループ処理を実行する。グループ処理部 27により実行されるグループ処 理には、グループィ匕されたアイコンをアイコン同士の重なりが解消されるように拡張し て再表示させる拡張表示処理や、グループ化されたアイコンを更に複数のグループ に分割するグループ分割処理等が含まれる。このため、グループ処理部 27は、拡張 表示処理を実行する拡張表示処理部 28やグループ分割処理を実行するグループ 分割処理部 29等を含む。

[0041] 図 2は、上述のコンピュータ 20に接続された表示装置 30の表示画面 31上に表示さ れるデスクトップの一例を示す説明図である。同図は、表示装置 30に通常表示され るデスクトップを例示するものであり、当該通常時におけるデスクトップ上には、基本 的に既存のコンピュータに接続された表示装置の表示画面に表示されるデスクトップ と同様に、プログラムやフォルダ、各種ファイル等を示すアイコン 10がユーザの意図 に従って配列される。ここで、実施例のコンピュータ 20では、このような通常時のデス クトップ上でマウス 50を右クリックすると、図 2に示すように、オペレーティングシステム により提供されるデスクトップメニュー DMが表示される。デスクトップメニュー DMは、 基本的には、既存のものと同様のメニュー項目を含むものである力 実施例のデスク トップメニュー DMには、一般的なメニュー項目に加えて、上述のグループ化演算部 23やグループ処理部 27の機能を有効にするための"グループモード"なるメニュー 項目が用意されている。そして、ユーザが図 2に示すように"グループモード"を選択（ チェック)すると、デスクトップ上で互いに近接されたり、重ね合わされたりして空間的 にまとめられているアイコン 10同士が所定のグループ化条件の成立に伴ってグルー プ化され、図 3に示すようなグループモード選択時のデスクトップが瞬時に表示される

[0042] グループモード選択時のデスクトップには、通常時と同一の配列 (位置関係）を保つ たままで通常時に表示されていたアイコン 10がそのまま表示される力 それにカ卩えて 、各アイコン 10の周囲に薄色のバブル 11が表示される。図 3からわ力るように、他の アイコン 10からある程度距離を隔てて配置されているアイコン 10 (例えば、図 3にお ける「DATA」、「memo」といったファイル）の周囲には、アイコン 10の基準位置（実施 例ではアイコン 10の画像中心）を中心とする概ね円形のバルブ 11が表示される。一 方、互いに近接したり、重なり合つたりしてグループィ匕されたアイコン 10 (例えば、ファ ィル「abstract」と「figure」、ある 、はフォルダ「0825」とファイル「bubble」、「004」、「007 」等）の周囲には、グループに帰属する全アイコン 10を取り囲むようにバブル 11が表 示される。すなわち、ノ ブル 11は、アイコン 10のグループへの帰属やグループ範囲 を示すグループ識別表示として機能する。

[0043] また、グループモードのもとでは、グループ化されているアイコン 10の周囲のパブ ル 11を左クリックによりドラッグすれば、グループィ匕されたアイコン 10を一体的に移動 させることができる。更に、グループ化されているアイコン 10の周囲のバブル 11を右 クリックすれば、図 3に示すように、オペレーティングシステムにより提供されるグルー プメニュー GMが表示される。グループメニュー GMは、グループ化されているアイコ ン 10に対する一括的な処理であるグループ処理の選択を可能とするものであり、グ ループ全体の"切り取り"、グループ全体の"コピー"、グループ全体の"貼り付け"、… 、 "グループ化解除"、グループをフォルダ化するための"フォルダの作成"、グループ に帰属するアイコン 10の少なくとも一部が重なり合つている場合にアイコン 10同士の 重なりが解消されるようにアイコン 10を再表示させるための"拡張表示"といったダル ープ処理に対応した複数のメニュー項目を含む。このようなグループメニュー GMの 中から所望のグループ処理を選択すれば、上述のグループ処理部 27等によりダル ープ化されたアイコン 10がー括して処理されることになる。

[0044] もちろん、グループモードのもとでも、グループ化されているか否かに拘わらず、マ ウス 50を介して何れ力 1つのアイコン 10に対して何らかの操作が実行された際に、当 該操作に応じた処理が上述の個別処理部 26により実行される。例えば「0825」なる フォルダをダブルクリックすれば、表示画面 31上には図 3に示すようにフォルダの中 身を示す新たなウィンドウが表示される。この際、グループモードのもとでは、新たに 表示されたウィンドウにおいても、図 3に示すように、アイコン 10の周囲にはバブル 11 が表示され、当該ウィンドウ内にグループ化されたアイコン 10 (グループ）が存在すれ ば、グループに帰属するすべてのアイコン 10を取り囲むバブル 11が表示される。ま た、何れか 1つのアイコン 10上で右クリックすれば、当該アイコン 10に対する個別処 理の選択を可能とする図示しない個別メニューが表示される。

[0045] 更に、グループモードのもとでは、表示画面 31上で何れかのアイコン 10または何 れかのグループの位置が変更されたときにもアイコン 10のグループ化が実行される。 すなわち、グループモードのもとでは、表示画面 31上で何れ力 1つのアイコン 10また は何れかのグループを他の何れかのアイコン 10またはグループに近接させれば、そ れらのアイコン 10をグループ化することができる。また、表示画面 31上で、あるダル ープから何れかのアイコン 10を引き離せば、当該何れかのアイコン 10のグループ化 を解除することもできる。この際、バブル 11は、移動されるアイコン 10等の位置に応じ て変形し、バブル 11の境界は、グループィ匕やその解除に応じて変化する。従って、 バブル 11は、グループ化の可否を視覚的に認識するための手力かりとなる連結領域 としての役割をも果たすことになる。

[0046] 次に、実施例のコンピュータ 20における上述のようなアイコン 10のグループ化を実 現するための処理であるグループィ匕表示処理について説明する。また、グループィ匕 表示処理の説明に引き続いて、グループ処理部 27により実行されるグループ処理の 代表例として拡張表示処理およびグループ分割処理について説明する。

[0047] 〔グループ化表示処理〕

図 4は、実施例のコンピュータ 20にお 、て実行されるグループィ匕表示処理の一例 を示すフローチャートである。このグループ化表示処理は、通常時のデスクトップ上 でデスクトップメニュー DMから"グループモード"が選択されたときや、グループモー ドのもとで新たなアイコン 10が作成されたときに 1サイクル実行され、グループモード のもとで何れかのアイコン 10またはグループを表示画面 31上で移動させる移動操作 力 Sなされたときに当該移動操作の開始力 完了までの間に繰り返し実行されるもので ある。

[0048] 図 4のグループ化表示処理の開始に際して、コンピュータ 20のグループ化演算部 23は、表示画面 31上に表示されている全アイコン 10の画像中心の表示画面 31に おける位置、すなわち表示画面 31の座標系（例えばピクセル単位の座標系）に基づ く全アイコン 10の画像中心の座標を取得する (ステップ S 100)。次いで、表示画面 3 1上に表示されている全アイコン 10における一対のアイコン 10の組み合わせを抽出 し、抽出した一対のアイコン 10のすべてについて、ステップ S100にて取得した各ァ イコン 10の座標に基づいて画像中心間の距離 dを算出する (ステップ S110)。そして 、得られた一対のアイコン 10間における距離 dに基づいて、表示画面 31上で空間的 にまとめられているアイコン 10を 1つのグループとするグループ化を実行する（ステツ プ S120)。

[0049] 力かるステップ S120のグループ化処理について図 5を参照しながら具体的に説明 する。図 5のグループィ匕処理の開始に際して、グループィ匕演算部 23は、予め定めら れた最初の一対のアイコン 10に対応した距離 dを取得した上で (ステップ S200)、取 得した距離 dに対応する一対のアイコン 10同士が既にグループ化されている力否か を判定する（ステップ S210)。そして、当該一対のアイコン 10同士がグループ化され ていない場合には、一対のアイコン 10をグループィ匕する際の判定基準となる閾値 dr efを第 1の値 dreflに設定する（ステップ S220)。また、対象となる一対のアイコン 10 同士が既にグループィ匕されている場合には、判定基準としての閾値 drefを第 1の値 d reflよりも大きい第 2の値 dref2に設定する（ステップ S220)。続いて、ステップ S220 または S 230にて設定した閾値 drefとステップ S 200にて取得した距離 dとを比較し（ ステップ S240)、距離 dが閾値 dref以下であれば、対象となる一対のアイコン 10同士 をグループ化する一方 (ステップ S250)、距離 dが閾値 drefを上回っていれば、対象 となる一対のアイコン 10同士のグループ化を解除（グループ化されていない状態を 維持）する（ステップ S260)。その後、一対のアイコン 10すべてについての処理が完 了した力否かを判定し (ステップ S270)、処理が完了していなければ、予め定められ た順番に従って残りの一対のアイコン 10についてステップ S200〜S250または S26 0の処理を繰り返し実行し、ステップ S270にて肯定判断がなされた段階で本処理を 終了させる。これにより、ステップ S 120のグループィ匕処理が実行されれば、ステップ S240における判定基準を満たすアイコン 10同士、すなわち表示画面 31上で空間 的にまとめられているアイコン 10が順次グループ化されていくことになる。なお、ここ でいうグループ化とは、上述のグループメニュー GMに含まれる"切り取り"、 "コピー，， 、 "貼り付け"といったグループ処理に関し、ステップ S 240における判定基準を満た すアイコン 10同士を 1つのアイコンと見なされるように互いに関連付けすることを意味 する。

上述のようなグループ化処理の後、グループィ匕演算部 23に取り込まれた全アイコ ン 10の座標がポテンシャル算出部 24に与えられ、ポテンシャル算出部 24は、各アイ コン 10の座標と各アイコン 10に対して付与されている仮想的なポテンシャル場とを用 いて、表示画面 31に対して設定された複数のポテンシャルグリッドの各アイコン 10に 対応したグリッドごとに各アイコン 10の座標と各アイコン 10のポテンシャル場とに基づ くポテンシャルを算出する (ステップ S 130)。ここで、実施例では、各アイコン 10に付 与される仮想的なポテンシャル場として、図 6Aに示すような、いわゆるメタボールを 2 次元に応用した濃度関数が用いられている。すなわち、各ポテンシャル場は、アイコ ン 10の基準位置である画像中心（ある 、は画像重心）におけるポテンシャルを最大 値 Pmax ( > 1 )とし、画像中心から径方向に離れるにつれて所定の法則に従つてポ テンシャルを小さく規定するものである。そして、実施例では、アイコン 10の画像中心 力もの距離が各アイコン 10の画像に概ね外接する円よりも多少大きい円の半径 rOと なる箇所のポテンシャルを値 1とし、画像中心力もの距離が値 rlとなる箇所のポテン シャルを値 0としている。また、複数のポテンシャルグリッドは、例えば所定数のピクセ ル間隔で等間隔に並設されたものであり、表示画面 31の座標系と対応関係を有して いる。このように各アイコン 10に仮想的なポテンシャル場を付与し、各アイコン 10の 画像中心の座標 (位置）とポテンシャル場とに基づくポテンシャルを各アイコン 10に 対応したポテンシャルグリッドについて算出した場合、図 6Aに示すように、ポテンシャ ル場の重なりにより、アイコン 10の密度が高い領域、すなわち画面上で空間的にまと められているアイコン 10の周辺に対応したポテンシャルグリッドほどポテンシャルが大 きくなる。従って、表示画面 31上でまとめられているアイコン 10は、算出したポテンシ ャルがある閾値 Pref以上となるポテンシャルグリッドに基づく領域に含まれることにな り、図 6Bに示すように、この領域に対しては、それを囲む閉じた境界であるバブル境 界 bbを設定することができる。ステップ S 130の処理は、このようなバブル境界 bbの設 定を目的として、各アイコン 10に対応したポテンシャルグリッドごとにポテンシャルを 算出するものである。

[0051] 力かるステップ S130のポテンシャル算出処理について図 7を参照しながら具体的 に説明する。図 7のポテンシャル算出処理の開始に際して、ポテンシャル算出部 24 は、まず、ステップ S100にて取得された各アイコン 10の座標とステップ S120のグル ープ化処理の結果とに基づいて表示画面 31上におけるポテンシャル算出エリア PA (図 2参照。）を設定する (ステップ S 300)。ポテンシャル算出エリア PAは、図 2からわ かるように、ステップ S120にて規定されたグループの数と、ステップ S120にてグル ープ化されな力つた単一のアイコン 10の数との合計の数だけ設定される。そして、グ ループ化されなかった単一のアイコン 10に関しては、当該アイコン 10の画像中心の 座標と、当該アイコン 10のポテンシャル場の外延となる画像中心を中心とした半径 rl の円の外接四角形とに基づいてポテンシャル算出エリア PAが設定される。また、グ ループ化されたアイコン 10に関しては、当該グループに帰属する各アイコン 10の画 像中心の座標と上記外接四角形とに基づいて、互いに重なり合った外接四角形群 の外周の内側領域がポテンシャル算出エリア PAとして設定される。

[0052] こうして、表示画面 31におけるすべてのポテンシャル算出エリア PAを設定したなら ば、予め定められた最初のポテンシャル算出エリア PA (グループ）に含まれる全アイ コン 10 (アイコン 10が 1個であることもある。）の画像中心（基準位置）の表示画面 31 上における座標のポテンシャルである基準ポテンシャル Pcを算出する (ステップ S31 0)。かかるステップ S310では、基準ポテンシャル Pcは、あるアイコン 10の画像中心 の座標について当該アイコン 10のポテンシャル場によるポテンシャル（Pmax)と他の すべてのアイコン 10の画像中心との距離に基づくポテンシャルとをカ卩算したものであ り、対象となるポテンシャル算出エリア PAの全アイコン 10について算出される。この ように算出される基準ポテンシャル Pcは、画像中心間の距離が値 rl未満となる状態 で複数のアイコン 10 (ポテンシャル場）が表示画面 31上で互いに重なり合っていると きに、画像中心間の距離が小さくなればなるほど大きな値 (値 Pmax以上の値）となる 。そして、対象となるポテンシャル算出エリア PAの全アイコン 10について基準ポテン シャル Pcを算出したならば、当該ポテンシャル算出エリア PA内のアイコン 10ごとに、 1つのアイコン 10のポテンシャル場によるポテンシャルの最大値 Pmaxを算出された 基準ポテンシャル Pcで除する計算を行ってポテンシャル場を減衰させるための減衰 係数 ζを設定する (ステップ S320)。

続、て、対象となるポテンシャル算出エリア PAに対応した複数のポテンシャルダリ ッドの各々について、当該ポテンシャル算出エリア PA (グループ）内の全アイコン 10 の座標およびポテンシャル場に基づくポテンシャルを算出する (ステップ S330)。力 力るステップ S330では、対象となるポテンシャル算出エリア PAに対応した 1つのポ テンシャルグリッドにおけるポテンシャル力 当該 1つのポテンシャルグリッドと当該ェ リア PA内の全アイコン 10の画像中心との距離に基づいて濃度関数としてのポテンシ ャル場力も得られる値を加算することにより求められる力 この際、各アイコン 10のポ テンシャル場によるポテンシャルには、ステップ S320にて設定された減衰係数 ζが 乗じられる。すなわち、ステップ S330の処理に際しては、対象となるポテンシャル算 出エリア ΡΑ内の全アイコン 10のポテンシャル場がステップ S320に設定された減衰 係数 ζに基づいて減衰される。次いで、ステップ S330にて算出された各ポテンシャ ルグリッドのポテンシャルから、対象となるポテンシャル算出エリア ΡΑ外の（グループ に帰属して ヽな 、）全アイコン 10の座標およびポテンシャル場に基づくポテンシャル を減算する (ステップ S340)。すなわち、ステップ S340では、対象となるポテンシャ ル算出エリア PA外、すなわち当該エリア PA内のアイコン 10とは同一のグループに 帰属していないアイコン 10のポテンシャル場に負の重み wが付与され、ステップ S33 0にて算出された各ポテンシャルグリッドのポテンシャル力も対象となるポテンシャル 算出エリア PA外の各アイコン 10のポテンシャル場によるポテンシャルに負の重み w を乗じた値が減算される。実施例では、カゝかる負の重み wを例えば値一 0. 4としてい る。また、ステップ S340においても、ステップ S330と同様に、当該エリア PA外の各 アイコン 10のポテンシャル場によるポテンシャルには、ステップ S320にて設定された 減衰係数 ζが乗じられる。その後、ステップ S300にて設定されたすベてのポテンシ ャル算出エリア ΡΑについての処理が完了した力否かを判定し (ステップ S350)、処 理が完了していなければ、予め定められた順番に従って残りのポテンシャル算出エリ ァ ΡΑについてステップ S310〜S340の処理を繰り返し実行し、ステップ S350にて 肯定判断がなされた段階で本処理を終了させる。

このようにしてポテンシャル算出部 24により算出された各ポテンシャルグリッドのポ テンシャルは、上述のバブル境界 bbの設定に供されるべぐバブル境界設定部 25に 与えられ、バブル境界設定部 25は、ポテンシャル算出部 24からの各ポテンシャルグ リツドのポテンシャルに基づ 、て上述のバブル 11の境界たるバブル境界 bb (図 6B参 照。）を設定する (ステップ S 140)。この場合、バブル境界設定部 25は、いわゆるマ 一チングキューブ法を 2次元に応用したマーチングスクェア法を用いて、算出された 各ポテンシャルグリッドのポテンシャルと所定の閾値 Prefとの比較を行うことにより、上 述のバブル 11の境界たるバブル境界 bbを設定する。このように各ポテンシャルグリツ ドのポテンシャルと閾値 Prefとを比較した場合、何れ力 1つのポテンシャルグリッドの ポテンシャルが閾値 Pref以上となったのに対して、当該何れか 1つのポテンシャルグ リツドに隣接するポテンシャルグリッドのポテンシャルが閾値 Pref未満となった場合に は、これら 2つのポテンシャルグリッド間には、マーチングキューブ法における等値面 に相当する境界が存在していることになる。これを踏まえて、実施例では、 4つのポテ ンシャルグリッド間におけるポテンシャルの算出値と閾値 Prefとの比較結果に対応し た境界を図 8に例示するようにパターン化したルックアップテーブルが画像データ記 憶部 22に記憶されており（ただし、図 8において黒い丸印はポテンシャルが閾値 Pref 以上となるポテンシャルグリッドを示し、白い丸印はポテンシャルが閾値 Pref未満とな るポテンシャルグリッドを示す。）、ステップ S140において、バブル境界設定部 25は、 当該ルックアップテーブルを参照しながら各ポテンシャルグリッドのポテンシャル値と 所定の閾値 Prefとの比較結果に基づ 、て表示画面 31に表示させるバブル 11のバ ブル境界 bbの座標を設定する。これにより、表示画面 31上の全アイコン 10に関して 、グループ化されるべきアイコン 10の表示画面 31上における範囲（グループ範囲）で あるバブル境界 bbをより高速に設定することが可能となる。なお、図 3等に示すように 、他のアイコン 10からある程度距離を隔てて配置されて!、るアイコン 10に関しては、 閾値 Prefが値 1であれば、バブル境界 bbは、画像中心を中心とした半径 rOの円とし て設定される。こうして表示画面 31上のすべてのアイコン 10に関するバブル境界 bb が設定されると、画像処理部 21は、必要なデータを画像データ記憶部 22から読み 出し、ステップ S100にて入力された座標に基づいて各アイコン 10を表示させると共 に、ステップ S140にて設定されたバブル境界 bbの座標に基づいて各アイコン 10に 対応したバブル 11を表示させ (ステップ S150)、本処理をー且終了させる。

[0055] このように、実施例のコンピュータ 20では、通常時のデスクトップ上でデスクトップメ ニュー DMから"グループモード"が選択されると、上述のグループ化表示処理が実 行されるので、複数のグループの構築あるいはグループ化の解除をワンアクションで 実行することが可能となる。また、 "グループモード"が選択されている状態で、何れ かのアイコン 10やグループが表示画面 31上で移動されたり、表示画面 31上で新た なアイコン 10が作成されたりして表示画面 31上におけるアイコン 10の位置関係が変 更されると、アイコン 10の作成直後あるいは移動操作の開始力も完了まで上述のグ ループ化表示処理が実行されるので、それにより、変更後のアイコン 10の位置関係 に応じたグループを構築することが可能となる。

[0056] ここで、図 9から図 14を参照しながら、表示画面 31の表示状態を例にとって、上述 のグループィ匕表示処理について具体的に説明する。なお、以後、各図面において 説明をわ力りやすくするためにバブル境界 bbを実線で明瞭に示すこととする。図 9お よび図 10は、表示画面 31上でアイコン 10を移動させたときの表示画面 31の表示状 態を例示する説明図である。図 9の（a)に示すように、何れか 1つのアイコン 10 (ある いはその周囲のバブル 11)をドラッグして他のグループ化されて!/、るアイコン 10 (グ ループ）に接近させると、ドラッグされたアイコン 10と当該グループ化されたアイコン 1 0の何れかとの距離 dが閾値 dref ( = drefl)以下となった時点で (ステップ S120, S2 40)、ドラッグされたアイコン 10と当該他のグループ化されているアイコン 10とがダル ープ化される（ステップ S 120, S250)。そして、このようなグループ化がなされたとき には、ドラッグされたアイコン 10と当該他のグループ化されているアイコン 10とが十分 に接近し合っており、ポテンシャル場同士の接合 (重なり合い）に起因して、これらの アイコン 10はポテンシャルが閾値 Pref以上となる領域に含まれるようになる。これに 伴い、ステップ S 130にて算出されたポテンシャルに基づいてドラッグされたアイコン 1 0と当該何れかのグループに帰属するアイコン 10とを取り囲むバブル境界 bbが設定 され (ステップ S 140)、それまで図 9の（b)に示すように別々に表示されていた単一の アイコン 10のバブル 11とグループ化されて!/、るアイコン 10を取り囲むバブル 11とが 、ステップ S150にてあた力も互いに結合されたかのように一体に表示される（図 9の（ c)参照。 ) oそして、ドラッグされたアイコン 10が表示画面 31上で停止すると、図 9の（ d)に示すように、グループ化されたすべてのアイコン 10の位置 (座標）に基づくパブ ル 11が表示される。このように、実施例のコンピュータ 20では、表示画面 31上で何 れかのアイコン 10あるいはグループを他のアイコン 10あるいはグループに接近させ れば、それらのアイコン 10等を自動的にグループィ匕すると共にグループ範囲を示す バブル 11を表示画面 31上に表示させることが可能となる。

一方、実施例のコンピュータ 20では、グループ化されている複数のアイコン 10のう ち、所望のアイコン 10を例えばキーボード 40のシフトキーを押しながらドラッグすると 、図 10の（a)のように、当該所望のアイコン 10をグループ化されている他のアイコン 1 0から引き離すように移動させることができる。そして、そのアイコン 10を移動させてい くと、グループ化されているアイコン 10を取り囲むバルブ 11は、ポテンシャル場同士 の重なり合いが減少することに起因して徐々に引き延ばされるように変形していき（図 10の（b)参照。）、ドラッグされたアイコン 10と他のアイコン 10の何れかとの距離 dが 閾値 dref ( = dref2)を上回った時点でドラッグされたアイコン 10と当該他のアイコン 1 0とのグループ化が解除される（ステップ SI 20, S260)。また、このようなグループ解 除がなされたときには、両者は表示画面 31上で十分に離間し合っており、ポテンシャ ル場同士の分離 (重なり合いの解消）に起因して、ステップ S130にて算出されたポテ ンシャルに基づいてドラッグされたアイコン 10を取り囲むバブル境界 bbと当該グルー プに帰属する他のアイコン 10を取り囲むバブル境界 bbとが設定されるので (ステップ S140)、図 10の（c)に示すように、ドラッグされたアイコン 10を取り囲むバブル 11と、 残された他のアイコン 10を取り囲むバブル 11とが分離して表示される（ステップ S 15 0)。そして、ドラッグされたアイコン 10が表示画面 31上で停止すると、図 10の（d)に 示すように、グループから引き離されたアイコン 10の周囲にそれを取り囲む概ね円形 のバブル 11が表示されると共に、グループ化されたままのアイコン 10の周囲には、そ れらを取り囲むバブル 11が表示される。このように、実施例のコンピュータ 20では、 あるグループ力も何れかのアイコン 10を表示画面 31上で引き離せば、当該何れか のアイコン 10のグループ化を解除することができるので、アイコン 10の再分類も簡単 に効率よく実行可能となる。

更に、実施例のコンピュータ 20では、グループモードのもとで表示画面 31上にお V、てアイコン 10 (グループ）を移動させれば、上述のグループ化表示処理が実行され るので、図 11A、図 11B、図 11Cおよび図 1 IDに示すように、何れかのアイコン 10あ るいはグループをドラッグし、順次他のアイコン 10またはグループ上でリリースするこ とを繰り返して 、けば、リリースがなされるたびに新たなグループが構築されて 、るこ とになるので、いわゆるベリーピッキングを簡単に効率よく実行することもできる。これ により、表示画面 31上に分散して配置されている多数のアイコン 10を極めて効率よく 分類 ·管理することが可能となる。なお、図 11A〜図 11Dにおいて、ノ、ツチングが施 されているアイコン 10は、他のグループ上でリリースされたアイコン 10を示す。また、 ユーザが表示画面 31にお!/、てドラッグした何れかのアイコン 10またはグループを他 のアイコン 10またはグループ上でリリースするケースとしては、ドラッグしたアイコン 10 等と他のアイコン 10等とのグループィ匕を望むケース（グループ化）と、ドラッグしたアイ コン 10等をフォルダである他のアイコン 10または他のグループのフォルダにドロップ するケース（ドラッグアンドドロップ）とが含まれる。このため、実施例のコンピュータ 20 では、これらのグループィ匕とドラッグアンドドロップとの何れか実行されたかを識別で きるように、ドラッグアンドドロップが実行された際には、ドロップ先のフォルダあるいは 当該フォルダを含むグループのバブル 11のバブル境界 bbを一時的に濃色で表示 するようにしている。

また、実施例のコンピュータ 20では、表示画面 31上でのアイコン 10のまとまり具合 に応じたポテンシャル場の減衰を伴ってポテンシャルグリッドのポテンシャルが算出さ れるので (ステップ S320, S330および S340)、空間的にまとめられたアイコン 10の 各々のポテンシャル場同士が重なり合ったとしても、図 12Aおよび図 12Bに示すよう に、そのようなポテンシャル場の重なり合いに起因してポテンシャルが閾値 Pref以上 となる領域すなわちバブル境界 bbが拡大してしまうことを抑制することができる。すな わち、複数のアイコン 10が表示画面 31上で互いに重なり合つている場合、画像中心 間の距離が小さくなればなるほど、当該複数のアイコン 10のポテンシャル場同士の 重なり合いが大きくなる。そして、ポテンシャル場同士の重なり合いが大きくなればな るほど、重なり合ったポテンシャル場に対応したグリッドのポテンシャルが大きくなり、 図 12Aおよび図 12Bの上段に示すように、アイコン 10を取り囲むバブル 11のバブル 境界 bbが拡大されてしまう。これに対して、表示画面 31上のアイコン 10ごとに、基準 位置たる画像中心の表示画面 31上における座標のポテンシャルである基準ポテン シャル Pcを算出した上で (ステップ S310)、アイコン 10ごとに 1つのポテンシャル場に よるポテンシャルの最大値 Pmaxを基準ポテンシャル Pcで除して得られる減衰係数 ζ (ステップ S320)を用いて各アイコン 10のポテンシャル場によるポテンシャルを減 衰させながら対象となるポテンシャルグリッドのポテンシャルを算出すれば (ステップ S 330, S340)、図 12Aおよび図 12Bの下段に示すように、より適正に各アイコン 10の ポテンシャル場を減衰させてグループ範囲としてのバブル境界 bbを表示画面 31上 にコンパクトに表示させることが可能となる。すなわち、各アイコン 10の画像中心の座 標における基準ポテンシャル Pcは、表示画面 31上におけるアイコン 10のまとまり具 合に応じたポテンシャル場同士の重なりの度合に依存して定まるものであるから、基 準ポテンシャル Pcに基づく減衰係数 ζを用いてアイコン 10ごとにポテンシャル場に よるポテンシャルを減衰させれば、複数のポテンシャル場が重なり合って 、る領域に 対応したポテンシャルグリッドのポテンシャルをポテンシャル場同士の重なりの度合に 応じて減少させることが可能となり、それにより、バブル境界 bbの拡大を抑制すること ができる。

[0060] カロえて、実施例のコンピュータ 20では、設定されたポテンシャル算出エリア PAに対 応したグリッドのポテンシャルを算出する際に、ポテンシャル算出エリア PA内のアイコ ン 10と同一のグループに帰属していないアイコン 10のポテンシャル場に負の重み w が付与され、ステップ S330にて算出された各ポテンシャルグリッドの同一グループに 帰属する各アイコン 10の座標およびポテンシャル場に基づくポテンシャルから、対象 となるポテンシャル算出エリア PA外の（グループに帰属して!/ヽな 、）全アイコン 10の 座標およびポテンシャル場に基づくポテンシャルが減算される (ステップ S340)。これ により、グループ化されたアイコン 10を取り囲むバブル 11のバブル境界 bbは、図 13 に示すように、当該バブル 11内のアイコン 10と同一のグループに帰属して!/、な!/、周 囲のアイコン 10により押されて内側に凹んでいるかのように表示されることになる。そ して、このように対象となるポテンシャル算出エリア PAに対応したポテンシャルグリツ ドのポテンシャルを算出する際に、あるアイコン 10と同一のグループに帰属していな いアイコン 10のポテンシャル場によるポテンシャルを負の重み wに応じて減算すれば 、図 14に示すような表示画面 31におけるアイコン 10の位置関係の変更に伴い、ノ ブル 11 (バブル境界 bb)同士が表示画面 31上で接近したときに（図 14の（b)参照。） 、両者を互いに反発し合うように表示させることが可能となる。

[0061] 以上説明したように、実施例のコンピュータ 20では、表示画面 31上の複数のアイコ ン 10から抽出される一対のアイコン 10のすべてについて表示画面 31上における距 離 dが算出されると共に (ステップ S 110)、算出された距離 dに基づいて表示画面 31 上で空間的にまとめられているアイコン 10が 1つのグループとしてグループ化され (ス テツプ S120)、アイコン 10のグループへの帰属を示すグループ識別表示としてのバ ブル 11と共にアイコン 10が表示画面 31上に表示される（ステップ S150)。すなわち 、コンピュータ 20では、複数のアイコン 10から抽出される一対のアイコン 10のすベて について画像中心間の距離 dが算出され、算出された距離 dが閾値 dref (第 1の値 dr eflまたは第 2の値 dref 2)以下である一対のアイコン 10同士がグループ化されてい く（ステップ S240〜S260)。これ〖こより、コンピュータ 20では、表示画面 31上でアイ コン 10の空間的なまとまりを構築すれば、まとまり具合に応じて複数のアイコン 10を グループィ匕することができる。そして、実施例のコンピュータ 20では、表示画面 31上 でマウス 50を介した移動操作やグループメニュー GMを介したメニュー選択といった グループに対する操作がなされたときには、当該操作に応じたグループに対する処 理であるグループ処理が実行される。また、グループに帰属する何れかのアイコン 10 に対して何らかの操作が実行された際に、当該操作に応じた処理が実行される。従 つて、実施例のコンピュータ 20によれば、表示画面 31上の複数のアイコン 10を簡単 に効率よく分類'管理すると共に、分類されたアイコン 10を簡単かつ効率よく再分類 したり、管理したりすることが可能となる。

[0062] また、ステップ S 120のグループ化処理に際しては、それまでにグループ化されて いない一対のアイコン 10間の距離 dが第 1の値 drefl以下である場合に当該グルー プ化されていない一対のアイコン 10同士がグループ化され、既にグループ化されて いる一対のアイコン 10間の距離 dが第 1の閾値 dreflよりも大きい第 2の閾値 dref 2以 下である場合に当該グループ化されている一対のアイコン 10同士のグループ化が 維持されることになる。これにより、表示画面 31上におけるアイコン 10の位置関係が 変更されたときに、それまでにグループ化されていないアイコン 10同士を比較的ダル ープ化し難くすると共に、ー且構築されたグループのグループィ匕を解除し難くするこ とが可能となる。従って、意図しないアイコン 10のグループ化やグループ化の解除を 抑制しながら、表示画面 31上にアイコン 10を自在に配置できるようになるので、表示 画面 31上に表示されるアイコン 10を分類、管理する際の操作性や利便性を向上さ せることが可能となる。

[0063] 更に、実施例のコンピュータ 20では、複数のアイコン 10の表示画面 31上における 座標 (位置）が取得され (ステップ S 100)、取得されたアイコン 10の座標と所定の制 約としての上述のポテンシャル算出処理 (ステップ S 130)の結果とに基づ 、て表示 画面 31上におけるグループの範囲であるバブル境界 bbが設定された後（ステップ S 140)、設定されたバブル境界 bb (グループ範囲）がグループ識別表示としてアイコ ン 10と共に表示画面 31上に表示される（ステップ S150)。このように、各アイコン 10 に仮想的なポテンシャル場を付与し、各アイコン 10の座標 (位置）とポテンシャル場と に基づくポテンシャルを各アイコン 10に対応したポテンシャルグリッドごとに算出し、 算出したポテンシャルが所定の閾値 Pref以上となる領域を囲むバブル境界 bbを設 定すれば、グループ範囲としてのバブル境界 bbを表示画面 31上におけるアイコン 1 0の空間的なまとまり具合に応じてより適正に設定することができる。また、このような ポテンシャル算出処理 (ステップ S 130)およびバブル境界 bbの設定 (ステップ S 140 )をグループ化処理 (ステップ S 120)と分離することにより、演算負荷を軽減すること も可能となる。

[0064] また、各アイコン 10に付与するポテンシャル場として、いわゆるメタボールを 2次元 に応用した濃度関数を用いれば、いわゆるマーチングスクェア法を利用することによ り、表示画面 31上におけるアイコン 10の空間的なまとまり具合に応じて、グループ識 別表示としてのバブル境界 bbをより適正に設定することが可能となる。そして、このよ うなポテンシャル場を利用したポテンシャルの算出に際し、表示画面 31上でのアイコ ン 10のまとまり具合を示す各アイコン 10の画像中心の座標における基準ポテンシャ ル Pcに基づいて各アイコン 10のポテンシャル場を減衰させれば、空間的にまとめら れたアイコン 10の各々のポテンシャル場同士が重なり合ったとしても、そのようなポテ ンシャル場の重なり合いに起因してポテンシャルが閾値 Pref以上となる領域を囲む バブル境界 bbが拡大してしまうことを抑制することができる。これにより、グループ範 囲としてのバブル境界 bbを表示画面 31上にコンパクトに表示させることができるので 、バブル境界 bbが表示画面 31上に不必要に拡大して表示されることを抑制して無 駄な画面スペースの消費を回避することが可能となる。

[0065] 更に、設定されたバブル境界 bbをグループ識別表示として表示画面 31上に表示さ せれば、 1つのグループとそれに帰属するアイコン 10とを表示画面 31上で容易に識 別させることが可能となる。また、ステップ S140にて設定されるバブル境界 bbは、上 述のようにして算出されるポテンシャルに基づくものであるので、表示画面 31上でァ イコン 10やグループが移動されると、その移動に応じてバブル 11が伸縮するように 表示されることになり、グループィ匕ゃグループ化の解除がなされた否かを視覚的にわ 力りやすく提示することが可能となる。カロえて、ポテンシャルの算出に際して、あるアイ コン 10と同一のグループに帰属していないアイコン 10のポテンシャル場に負の重み wを付与してポテンシャルを負の重み wに応じて減算すれば、表示画面 31上でパブ ル境界 bb同士が接近したときに、両者を互いに反発し合うように表示させることがで きる。これにより、それまでにグループ化されていないアイコン 10同士が比較的ダル ープ化され難い様子を視覚的に提示することが可能となる。ただし、グループ識別表 示は、必ずしもバブル境界 bbに基づくものである必要はなぐバブル 11の代わりに、 アイコン 10のグループへの帰属を示すグループ識別表示としてグループ化されたァ イコン 10に何らかのマークを表示させてもよぐグループ化されたアイコン 10の色を 変化させてグループ識別表示としてもよい。また、通常時には、グループ識別表示と してのバブル 11を表示画面 31上に表示させず、表示画面 31上でマウスカーソルが 空間的にまとめられているアイコン 10のバブル境界 bbの内側に置かれたときに、ノ ブル 11ある!/、はバブル境界 bbを表示させるようにしてもよ!/、。

[0066] なお、実施例では、ステップ S 120のグループ化処理後にポテンシャル算出処理（ ステップ S130)を実行し、ポテンシャル算出処理の結果に基づいてバブル境界 bbを 設定しているため（ステップ S140)、場合によっては、ステップ S120にて定められた 1つのグループに対して複数のバブル境界 bbが設定されてしまうおそれもないとはい えない。従って、 1つのグループに対して複数のバブル境界 bbが設定された場合に は、ステップ S 140の処理の後に、各ポテンシャルグリッドのポテンシャルと比較される 閾値 Prefの値を小さくする力 あるいは当該 1つのグループに帰属するアイコン 10の ポテンシャル場を強めてバブル境界 bbを再設定する後処理を実行してもよ ヽ。また、 ステップ S 120にて定められた 1つのグループに対してステップ S 140にて複数のバ ブル境界 bbが設定された場合には、ステップ S 140の後に、設定されたバブル境界 b bの内側に位置するアイコン 10を 1つのグループとして再グループ化する後処理を実 行してちょい。

[0067] 〔拡張表示処理〕

続 、て、実施例のコンピュータ 20のグループ処理部 27によるグループ処理の一つ である拡張表示処理について説明する。拡張表示処理は、図 15Aに示すように、表 示画面 31上に同一のグループに帰属する複数のアイコン 10の少なくとも一部が互 いに重なり合うように表示されて 、るときに、ユーザによる拡張要求操作に応じてアイ コン 10同士の重なりが解消されるように当該グループに帰属する複数のアイコン 10 を再表示させる処理である（図 15B参照。；)。実施例では、上述のグループメニュー G Mから"拡張表示"を選択すること、図 15Aに示すようにグループィ匕されたアイコン 10 の周囲のバブル 11上に所定時間だけマウスカーソルを置くこと、グループ化された アイコン 10の周囲のバブル 11をダブルクリックすること等がユーザにより実行可能な 拡張要求操作として規定されている。そして、このような拡張要求操作が実行されると 、主としてグループ処理部 27の拡張表示処理部 28により図 16に示す拡張表示処理 が実行される。

[0068] 図 16の拡張表示処理の開始に際して、拡張表示処理部 28は、まず拡張要求操作 を受けたグループ（以下、適宜「対象グループ」という）に帰属する全アイコン 10の画 像中心の表示画面 31における座標を取得した上で (ステップ S400)、取得した各ァ イコン 10の座標を入力点群とした周知のドロネ一三角形分割処理を実行する (ステツ プ S410)。このようなドロネ一三角形分割処理を実行することにより、図 17に示すよう に、画像中心同士がドロネ一辺で結ばれた一対のアイコン 10を対象グループに帰属 する全アイコン 10における 2個のアイコン 10の組み合わせとして抽出することができ る。続いて、抽出した一対のアイコン 10のすべてに関し、ステップ S400にて取得した 各アイコン 10の画像中心の座標や予め記憶されて 、る各アイコン 10の画像外周の 画像中心からの距離等に基づいてアイコン 10同士が重ならないようにする理想相対 位置関係を導出する (ステップ S420)。実施例において、ステップ S420では、図 18 Aや図 18Bに例示するように一対のアイコン 10同士が重なり合つている場合、当該 一対のアイコン 10を両者に対応したドロネ一辺（図 18 Aおよび図 18Bにおける破線 参照。 )と平行に離間させて両者の画像外周間の最短距離が所定値 Gminとなるとき の両者間における相対位置ベクトルを理想相対位置関係として導出する。また、一 対のアイコン 10同士が重なり合つていない場合には、理想相対位置関係としての相 対位置ベクトルをゼロベクトルとして設定する。図 19に、このような理想相対位置関係 を求めるためのプログラムのソースコードの一例を示す。

[0069] こうして抽出した一対のアイコン 10のすべてについて理想相対位置関係としての相 対位置ベクトルを導出したならば、対象グループに帰属する全アイコン 10の新たな 目標座標すなわち拡張表示時における画像中心の座標を自由変数とし、かかる目 標座標に基づく一対のアイコン 10の相対位置関係とステップ S420にて設定された 理想相対位置関係との間における残差の二乗の総和を表す次式（1)のようなエネル ギ関数を抽出した一対のアイコン 10のすべてについて作成する（ステップ S430)。そ して、これらのエネルギ関数を最小二乗法で最小化し (ステップ S440)、各エネルギ 関数の最小二乗解を当該エネルギ関数に対応した各アイコン 10の目標座標として 設定する（ステップ S450)。ここで、式（1)において、 Viおよび Vjは、互いに対をなす アイコン 10の各々の位置ベクトルを示し、 dVijは、ステップ S420にて設定された当 該一対のアイコン 10における理想相対位置関係としての相対位置ベクトルである。ま た、実施例におけるステップ S430の処理は、拡張要求操作直前の対象グループに おける全アイコン 10の画像中心に基づいて得られる対象グループの表示画面 31上 における重心が不変 (移動しない)であるものとして、上記各エネルギ関数を自由変 数で偏微分して得られる連立 1次方程式を解くものとされる。

[0070] ∑ i,j{ I Vi - Vj - dVij |2 }…（ 1)

[0071] 次いで、ステップ S450にて設定された対象グループに帰属する全アイコン 10の目 標座標はポテンシャル算出部 24に与えられ、ポテンシャル算出部 24は、対象グルー プの各アイコン 10の目標座標と各アイコン 10に対して付与されているポテンシャル 場とを用いて、表示画面 31上で対象グループを必要十分に囲む領域に対応した複 数のポテンシャルグリッドの各々におけるポテンシャルを算出する（ステップ S460)。 ここで、対象グループを必要十分に囲む領域は、上述のポテンシャル算出エリア PA と同様に、例えば、各アイコン 10に付与されているポテンシャル場の外延となる画像 中心を中心とした半径 rlの円の外接四角形と対象グループに帰属する全アイコン 1 0のステップ S450にて設定された目標座標とに基づいて設定され得るものである。ス テツプ S460にて算出された各ポテンシャルグリッドのポテンシャルは、バブル境界設 定部 25に与えられ、バブル境界設定部 25は、上述のマーチングスクェア法を用い て各ポテンシャルグリッドのポテンシャルと所定の閾値 Prefとの比較を行うことにより、 ステップ S450にて設定された対象グループに帰属する全アイコン 10の目標座標に 対応したバブル境界 bbを設定する (ステップ S470)。そして、画像処理部 21は、必 要なデータを画像データ記憶部 22から読み出し、ステップ S450にて設定された目 標座標に基づいて対象グループの各アイコン 10を表示させると共に、ステップ S470 にて設定されたバブル境界 bbの座標に基づいて各アイコン 10に対応したバブル 11 を表示させ (ステップ S480)、本処理を終了させる。

[0072] 以上説明したように、実施例のコンピュータ 20では、表示画面 31上で 1つのグルー プに帰属する複数のアイコン 10の少なくとも一部が互いに重なり合うように表示され ていても、拡張要求操作を実行すれば、当該グループに帰属する複数のアイコン 10 の各々に対するアクセスや操作を簡単に実行可能となる。例えば、図 15Aのアイコン 10xのように、同じグループに帰属する他のアイコン 10によって覆い隠されたアイコ ン 10が存在していても、拡張要求操作を実行することにより、図 15Bに示すようにァ イコン 10同士の重なりが解消されるように当該グループに帰属する複数のアイコン 1 0が瞬時に拡張して再表示され (ステップ S480)、それにより、それまでマウスカーソ ルを置き難 、状態にあったアイコン 10xに対するアクセスや操作を極めて容易に実 行可能となる。従って、実施例のコンピュータ 20では、表示画面 31上に表示されるァ イコン 10を分類、管理する際の操作性を向上させることができる。

[0073] また、実施例のコンピュータ 20では、上述のように、対象グループに帰属する複数 のアイコン 10の中力 一対のアイコン 10を抽出し (ステップ S410)、抽出した一対の アイコン 10のすべてについて重なりを解消するための当該一対のアイコン 10間の相 対位置関係を導出する共に (ステップ S420)、例えば対象グループの重心を固定す るという位置制約のもとで、導出した相対位置関係と再表示 (拡張表示)時における 目標座標に基づく一対のアイコン 10の相対位置関係との間における残差の二乗の 総和を表すエネルギ関数を最小二乗法で最小化して各アイコン 10の目標座標を設 定している（ステップ S440, S450)。これにより、重なり解消前の対象グループにお けるアイコン 10の相対的な位置関係を概ね維持すると共に対象グループの表示範 囲たるバブル 11を不必要に拡張することを抑制しながら、アイコン 10同士の重なりが 解消されるように対象グループに帰属する複数のアイコン 10を再表示させることが可 能となる。なお、力かる拡張表示処理に関しても、ステップ S470にて対象グループに 対して複数のバブル境界 bbが設定されてしまうおそれもな 、とは 、えな 、ので、対象 グループに対して複数のバブル境界 bbが設定された場合には、各ポテンシャルダリ ッドのポテンシャルと比較される閾値 Prefの値を小さくする力、あるいは対象グルー プに帰属するアイコン 10のポテンシャル場を強めてバブル境界 bbを再設定する後 処理を実行してもよい。もちろん、最初から対象グループに対して複数のバブル境界 bbが設定されないように、予めステップ S460にて対象グループに帰属するアイコン 1 0のポテンシャル場を強めてもよぐある!/、はステップ S470にて各ポテンシャルグリツ ドのポテンシャルと比較される閾値 Prefの値を小さくしてもよい。

[0074] また、上述のステップ S400〜S440の処理を 1サイクル実行すれば、基本的に各ァ イコン 10へのアクセスが可能な程度に対象グループを拡張表示することができるもの と考えられる力 対象グループにおけるアイコン 10の空間的なまとまり具合によって は、アイコン 10の重なりを完全に解消し得ないことも想定される。従って、ステップ S4 00〜S440の処理を複数サイクル（例えば 10サイクル）実行した後に、ステップ S450 にて対象グループの全アイコン 10の目標座標を設定してもよい。このようにステップ S 400〜S440の処理を複数サイクルだけ繰り返す際には、前サイクルのステップ S45 0にて設定された目標座標を次サイクルのステップ S400における各アイコンの画像 中心の座標として用いればよい。更に、ステップ S440の処理に際しては、対象ダル ープの重心を固定するという位置制約の代わりに、ユーザによりクリックされたアイコ ン 10の画像中心やクリックされた位置を固定するという位置制約を用いてもよい。ま た、対象グループが表示画面 31の縁の比較的近くにあるときには、表示画面 31の 縁やコーナに最も近いアイコン 10の画像中心等を固定するという位置制約を用いて ちょい。

[0075] そして、実施例では、ステップ S480の再表示後に所定の条件が成立すると、表示 画面 31上には、対象グループに帰属するアイコン 10が拡張要求操作前の元の位置 に表示され、対象グループのバブル 11も拡張要求操作前の元のグループ範囲を示 すものとして表示される。この場合、拡張表示を元に戻すための条件としては、ステツ プ S480における再表示後に所定時間が経過すること、ステップ S480における再表 示後に対象グループに帰属する何れかのアイコン 10に対して何らかの操作がなされ ること、対象グループのバブル 11からマウスカーソルが離れること、対象グループの バブル 11外で何らかの操作がなされること等が挙げられる。また、ステップ S480の 再表示後に例えばマウスカーソルが拡張表示された対象グループのアイコン 10ゃバ ブル 11上になお置かれたままである場合には、そのまま拡張表示を維持してもよい。

[0076] 〔グループ分割処理〕

引き続き、実施例のコンピュータ 20のグループ処理部 27によるグループ処理の一 つであるグループ分割処理について説明する。図 20は、主としてグループ処理部 2 7のグループ分割処理部 29により実行されるグループ分割処理の一例を示すフロー チャートである。実施例のコンピュータ 20では、デスクトップメニュー DMから"グルー プモード"が選択されている状態で、例えばマウス 50を左クリックして表示画面 31で 移動させると、表示画面 31上に任意のストロークを入力することができる。そして、図 20のグループ分割処理は、図 21Aに示すような状態で、図 21Bに示すように、ユー ザにより入力されたストローク Sによって表示画面 31上の複数のアイコン 10を囲むバ ブル 11すなわち何れかのグループのバブル 11が分断されたときに開始される。

[0077] 図 20のグループ分割処理の開始に際して、グループ分割処理部 29は、まず、スト ローク Sにより分断されたバブル 11により囲まれている全アイコン 10の画像中心の座 標と、当該バブルのバブル境界 bbの座標と、入力されたストローク Sの座標とを取得 する（ステップ S500)。次いで、取得したバブル境界 bbの座標とストローク Sの座標と に基づいて図 21Bに示すような 2つの閉じたループ LI, L2を作成する（S510)。こ のような 2つのループ L1および L2を作成したならば、ステップ S500にて取得した各 アイコン 10の座標等を用いて、アイコン 10ごとにループ LI, L2のうちの何れの内側 に位置する力否かを判定し、判定結果に基づ 、てアイコン 10のグループィ匕を実行す る（ステップ S520)。ここでいうグループ化は、 1つのループ L1または L2内に位置す るすべてのアイコン 10を上述のグループメニュー GMに含まれる"切り取り"、 "コピー "、 "貼り付け"といったグループ処理に関して 1つのアイコンと見なされるように互いに 関連付けすることを意味する。このようにしてストローク Sにより分断されたバブル 11に より囲まれているアイコン 10の再グループ化を実行したならば、上述のポテンシャル 算出部 24により、ステップ S510にて設定されたループ L1を必要十分に囲む表示画 面 31上の領域に対応した複数のポテンシャルグリッドと、ステップ S510にて設定さ れたループ L2を必要十分に囲む表示画面 31上の領域に対応した複数のポテンシ ャルグリッドとのポテンシャルが算出される（ステップ S530)。この場合、ループ L1に 対応した複数のポテンシャルグリッドについては、ループ L1内に位置するアイコン 10 のみのポテンシャル場によるポテンシャルが算出され、ループ L2に対応した複数の ポテンシャルグリッドについては、ループ L2内に位置するアイコン 10のみのポテンシ ャル場によるポテンシャルが算出される。また、ループ LI, L2を必要十分に囲む領 域も、各アイコン 10に付与されているポテンシャル場の外延となる画像中心を中心と した半径 rlの円の外接四角形とループ L1または L2内に位置するアイコン 10の画像 中心の座標とに基づいて設定され得るものである。こうしてステップ S530にて算出さ れた各ポテンシャルグリッドのポテンシャルは、バブル境界設定部 25に与えられ、ノ ブル境界設定部 25は、上述のマーチングスクェア法を用いて各ポテンシャルグリッド のポテンシャルと所定の閾値 Prefとの比較を行うことにより、ループ L 1内に位置する アイコン 10に対応したバブル境界 bbと、ループ L2内に位置するアイコン 10に対応し たバブル境界 bbとの座標を設定する (ステップ S 540)。そして、画像処理部 21は、 必要なデータを画像データ記憶部 22から読み出し、ステップ S500に取得された座 標に基づいて各アイコン 10を表示させると共に、ステップ S540にて設定されたパブ ル境界 bbの座標に基づ!/、て各ループ LI, L2に対応したバブル 11を表示させ (ステ ップ S550)、本処理を終了させる。

以上説明したように、実施例のコンピュータ 20では、表示画面 31上で複数のアイコ ン 10を取り囲むバブル 11すなわちグループを分断するストローク Sの入力操作がな されたときに、当該バブル 11のバブル境界 bbとストローク Sとに基づいて形成される 2 つのループ LI, L2ごとに、ループ LI, L2内のオブジェクトが 1つのグループとしてグ ループ化される。すなわち、コンピュータ 20では、何れかのバブル 11を分断するスト ローク Sが入力されると、図 21Bおよび図 21Cに示すように、当該ストローク Sよりも一 側（図中左側）に位置するアイコン 10が新たな 1つのグループとしてグループィ匕され 、入力されたストローク Sよりも他側に位置するアイコン 10が新たな 1つのグループと してグループ化される。これにより、表示画面 31上におけるアイコン 10の空間的なま とまり具合に応じて構築された 1つのグループを再度複数のグループに簡単に分割 することが可能となる。また、グループ化を意図されていないアイコン 10を含むダル ープが構築された場合には、グループィ匕が意図されたアイコン 10とそうではないアイ コン 10とを切り分けるようにストローク Sを入力すれば、本来意図されたグループを簡 単に構築することが可能となる。従って、このようなグループ分割処理が実行され得る コンピュータ 20では、表示画面 31上に表示されるアイコン 10を分類、管理する際の 利便性を向上させることが可能となる。

[0079] なお、ストローク Sの入力の仕方によっては、バブル境界 bbとストローク Sとにより形 成される 2つのループ LI, L2の何れかまたは双方にアイコン 10が 1つのみ含まれる こともあり得るので、ここでいう「新たな複数のグループ」は、単一のアイコン 10のみが 帰属するものを含むことになる。そして、表示画面 31上におけるアイコン 10の空間的 なまとまり具合によっては、図 21Cに示すように、ステップ S540にて設定されるルー プ L1に対応したバブル境界 bbとループ L2に対応したバブル境界 bbとが交差し、そ れにより表示画面 31上でループ L1に対応したバブル境界 bbとループ L2に対応し たバブル境界 bbとが重なり合うこともあり得る。ただし、このようにバブル境界 bb同士 が重なり合っても、その後、ユーザにより双方のバブル 11 (グループ）は表示画面 31 上で互いに離間されると想定されることから、実用上何ら不都合はないと考えられる。

[0080] また、このようなストローク Sに基づくグループ分割処理に関連した他のグループ処 理の一例としては、次のようなグループの一括削除が挙げられる。すなわち、複数の アイコン 10を取り囲むバブル 11 (グループ）を完全に分断しないストローク、つまり複 数のアイコン 10を取り囲むバブル 11のバブル境界 bbと 1点（1箇所）のみで交差する ストローク Sが入力された場合には、当該バブル 11に対応したグループを一括して削 除するようにしてちょい。

[0081] 以上、実施例を用いて本発明の実施の形態について説明したが、本発明は上記 実施例に何ら限定されるものではなぐ本発明の要旨を逸脱しない範囲内において 、様々な変更をなし得ることはいうまでもない。

[0082] 例えば、本発明は、コンピュータ 20に接続された表示装置 30の表示画面 31上に おけるアイコン 10の分類'管理に適用される代わりに、チャットシステムや BBSにおけ るテキストボックスの管理や、ウェブページのブックマーク管理、音楽再生装置のプレ イリスト管理に適用されてもよい。図 22に本発明が適用された 2次元チャットシステム の表示画面を例示する。図 22の 2次元チャットシステムにおいてチャットを行う際、ュ 一ザは、既存のメッセージに対する自己のメッセージをオブジェクトとしてのテキストボ ックス 1 OTに書き込んだ後、当該既存にメッセージが書き込まれたテキストボックス 10 Tの周辺に配置する。これにより、それぞれ共通のテーマに関連した既存のテキスト ボックス 1 OTと新たなテキストボックス 1 OTとが図 22に示すようにグループ化されると 共にグループ化されたテキストボックス 10Tの周囲にはグループ識別表示としてのバ ブル 11が表示されることになる。また、この 2次元チャットシステムでは、テキストボック ス 10T同士の重なり合いにより隠されてしまっているテキストボックス 10Tが存在して いても、所定の拡張要求操作を実行すれば、グループ全体を拡張表示させて、それ まで隠されて 、たテキストボックス 10Tに書き込まれて 、るメッセージを読むことが可 能となる。更に、この 2次元チャットシステムにおいても、表示画面上で上述のストロー ク Sを入力することにより、テキストボックス 10Tの再グループィ匕等を実行することがで きる。

産業上の利用可能性

本発明は、情報処理分野において有用である。

Claims

請求の範囲

[1] 画面上に複数のオブジェクトを表示させると共に前記オブジェクトに対する操作に 応じた処理を実行するオブジェクト表示処理装置であって、

前記複数のオブジェクトから一対のオブジェクトを抽出して該一対のオブジェクト間 の前記画面上における距離を算出する距離算出手段と、

前記算出された距離に基づいて前記画面上で空間的にまとめられているオブジェ タトを 1つのグループとしてグループ化するグループ化手段と、

前記オブジェクトの前記グループへの帰属を示すグループ識別表示と共に前記ォ ブジェクトを前記画面上に表示させる表示手段と、

前記画面上で前記グループに対する所定の操作がなされたときに、該操作に応じ た前記グループに対する処理であるグループ処理を実行するグループ処理手段と、 を備えるオブジェクト表示処理装置。

[2] 前記距離算出手段は、前記複数のオブジェクトから抽出される一対のオブジェクト のすべてについて前記距離を算出し、前記グループ化手段は、前記算出された距 離が所定の閾値以下である一対のオブジェクト同士をグループィヒする請求項 1に記 載のオブジェクト表示処理装置。

[3] 前記グループ化手段は、グループィ匕されて ヽな 、一対のオブジェクト間の距離が 第 1の閾値以下である場合に該グループ化されていない一対のオブジェクト同士を グループィ匕すると共に、既にグループィ匕されている一対のオブジェクト間の距離が前 記第 1の閾値よりも大きい第 2の閾値以下である場合に該グループ化されている一対 のオブジェクト同士のグループィヒを維持する請求項 1に記載のオブジェクト表示処理 装置。

[4] 前記グループ化手段は、前記画面上における前記オブジェクトの位置関係が変更 されたときに前記オブジェクトのグループィ匕を実行する請求項 1に記載のオブジェクト 表示処理装置。

[5] 前記グループィ匕手段によるグループ化と前記表示手段による表示処理と前記ダル ープ処理手段によるグループ処理とが有効とされるグループモードの選択および該 選択の解除を可能とするグループモード設定手段を更に備える請求項 1に記載のォ ブジェクト表示処理装置。

[6] 請求項 1に記載のオブジェクト表示処理装置にぉ 、て、

前記複数のオブジェクトの前記画面上における位置を取得するオブジェクト位置取 得手段と、

前記取得された前記オブジェクトの各々の位置と所定の制約とに基づ!、て前記グ ループの前記画面上における範囲であるグループ範囲を設定するグループ範囲設 定手段と、

を更に備え、

前記表示手段は、前記設定されたグループ範囲を前記グループ識別表示として前 記オブジェクトと共に前記画面上に表示させるオブジェクト表示処理装置。

[7] 請求項 6に記載のオブジェクト表示処理装置にお 、て、

前記グループ範囲設定手段は、

前記取得された前記オブジェクトの各々の位置と前記オブジェクトの各々に付与さ れた仮想的なポテンシャル場とに基づくポテンシャルを前記複数のオブジェクトに対 応した領域について算出するポテンシャル算出手段と、

前記算出されたポテンシャルが所定の閾値以上となる領域を囲む境界を前記ダル ープ範囲として設定する境界設定手段と、

を含むオブジェクト表示処理装置。

[8] 前記ポテンシャル場は、前記オブジェクトの所定の基準位置におけるポテンシャル を最大とし、該基準位置力 径方向に離れるほどポテンシャルを小さく規定する濃度 関数として定められている請求項 7に記載のオブジェクト表示処理装置。

[9] 前記ポテンシャル算出手段は、前記画面に対して設定された複数のグリッドの少な くとも前記オブジェクトの各々に対応したグリッドごとに前記ポテンシャルを算出する 請求項 7に記載のオブジェクト表示処理装置。

[10] 前記ポテンシャル算出手段は、前記画面上における前記オブジェクトのまとまり具 合に応じた前記ポテンシャル場の減衰を伴って前記ポテンシャルを算出する請求項

7に記載のオブジェクト表示処理装置。

[11] 前記ポテンシャル算出手段は、前記オブジェクトごとに該オブジェクトの所定の基準 位置の前記表示画面上における位置のポテンシャルである基準ポテンシャルを算出 した上で、前記オブジェクトごとの前記基準ポテンシャルに基づく前記ポテンシャル 場の減衰を伴って前記ポテンシャルを算出する請求項 7の何れかに記載のオブジェ タト表示処理装置。

[12] 前記ポテンシャル算出手段は、何れかのオブジェクトに対応した領域のポテンシャ ルを算出する際に、当該何れかのオブジェクトと同一のグループに帰属していないォ ブジエタトの前記ポテンシャル場に負の重みを付与する請求項 7に記載のオブジェク ト表示処理装置。

[13] 前記グループ処理手段は、前記画面上に前記グループに帰属する複数のォブジ タトの少なくとも一部が互いに重なり合うように表示されて 、るときに、所定の拡張要 求操作に応じて前記オブジェクト同士の重なりが概ね解消されるように前記グループ に帰属する前記複数のオブジェクトを再表示させる請求項 1に記載のオブジェクト表 示処理装置。

[14] 請求項 13に記載のオブジェクト表示処理装置において、

前記グループ処理手段は、

前記グループに帰属する複数のオブジェクトの中から一対のオブジェクトを抽出す るオブジェクト対抽出手段と、

前記抽出された一対のオブジェクトにおける重なりを解消するための該一対のォブ ジ 外間の相対位置関係を導出する相対位置関係導出手段と、

前記導出された相対位置関係と所定の位置制約とに基づいて前記抽出された一 対のオブジェクトの前記重なりの解消後における前記画面上の目標位置を設定する 目標位置設定手段と、

を含むオブジェクト表示処理装置。

[15] 前記目標位置設定手段は、前記目標位置を自由変数とし、該目標位置に基づく前 記一対のオブジェクトの相対位置関係と、前記設定された相対位置関係との間にお ける残差の二乗の総和を表すエネルギ関数を最小二乗法で最小化して前記目標位 置を設定する請求項 14に記載のオブジェクト表示処理装置。

[16] 前記グループ処理手段は、前記画面上で前記グループを分断するストロークの入 力操作がなされたときに、前記入力されたストロークに基づ 、て前記グループを新た な複数のグループに分割する請求項 1に記載のオブジェクト表示処理装置。

[17] 前記グループ処理手段は、前記グループに帰属するオブジェクトのうち、前記スト口 ークよりも一側に位置するオブジェクトを新たな 1つのグループとしてグループィ匕し、 前記入力されたストロークよりも他側に位置するオブジェクトを新たな 1つのグループ としてグループィ匕する請求項 16に記載のオブジェクト表示処理装置。

[18] 請求項 16に記載のオブジェクト表示処理装置において、

前記複数のオブジェクトの前記画面上における位置と前記オブジェクトの各々に付 与された仮想的なポテンシャル場とに基づくポテンシャルを前記複数のオブジェクト に対応した領域について算出するポテンシャル算出手段と、

前記算出されたポテンシャルが所定の閾値以上となる領域を囲む境界を設定する 境界設定手段とを更に備え、

前記グループ処理手段は、前記境界と前記ストロークとに基づ!ヽて形成される 2つ のノレープごとに、該ノレープ内のオブジェクトを 1つのグノレープとしてグノレープ化する オブジェクト表示処理装置。

[19] 前記グループに帰属する何れかのオブジェクトに対する所定の操作がなされたとき に、該操作に応じた前記何れかのオブジェクトに対する処理である個別処理を実行 する個別処理手段を更に備える請求項 1に記載のオブジェクト表示処理装置。

[20] 前記オブジェクトは、前記画面上に表示されるアイコンである請求項 1に記載のォ ブジェクト表示処理装置。

[21] 画面上に複数のオブジェクトを表示させると共に前記オブジェクトに対する操作に 応じた処理を実行するためのオブジェクト表示処理方法であって、

(a)複数のオブジェクトから一対のオブジェクトを抽出して該一対のオブジェクト間の 前記画面上における距離を算出するステップと、

(b)ステップ (a)で算出された距離に基づいて前記画面上で空間的にまとめられてい るオブジェクトを 1つのグループとしてグループ化するステップと、

(c)前記オブジェクトの前記グループへの帰属を示すグループ識別表示と共に前記 オブジェクトを前記画面上に表示させるステップと、 (d)前記画面上で前記グループに対する所定の操作がなされたときに、該操作に応 じた前記グループに対する処理であるグループ処理を実行するステップと、

を含むオブジェクト表示処理方法。

[22] 請求項 21に記載のオブジェクト表示処理方法にぉ 、て、

ステップ (a)では、前記複数のオブジェクトから抽出される一対のオブジェクトのす ベてについて前記距離を算出し、ステップ (b)では、前記算出された距離が所定の 閾値以下である一対のオブジェクト同士をグループィヒするオブジェクト表示処理方法

[23] 請求項 21に記載のオブジェクト表示処理方法にぉ 、て、

ステップ (b)では、グループ化されて ヽな 、一対のオブジェクト間の距離が第 1の閾 値以下である場合に該グループィ匕されて 、な 、一対のオブジェクト同士をグループ 化すると共に、既にグループ化されている一対のオブジェクト間の距離が前記第 1の 閾値よりも大きい第 2の閾値以下である場合に該グループィ匕されている一対のォブ ジェタト同士のグループィ匕を維持するオブジェクト表示処理方法。

[24] 請求項 21に記載のオブジェクト表示処理方法にぉ 、て、

(e)前記複数のオブジェクトの前記画面上における位置を取得するステップと、

(f)ステップ (e)で取得された前記オブジェクトの各々の位置と所定の制約とに基づ いて前記グループの前記画面上における範囲であるグループ範囲を設定するステツ プと、

を更に含み、

ステップ (c)では、ステップ (f)で設定されたグループ範囲を前記グループ識別表 示として前記オブジェクトと共に前記画面上に表示させるオブジェクト表示処理方法

[25] 請求項 24に記載のオブジェクト表示処理方法にぉ 、て、

ステップ (f)では、ステップ (e)で取得された前記オブジェクトの各々の位置と前記 オブジェクトの各々に付与された仮想的なポテンシャル場とに基づくポテンシャルを 前記複数のオブジェクトに対応した領域にっ 、て算出し、前記算出したポテンシャル が所定の閾値以上となる領域を囲む境界を前記グループ範囲として設定する表示 処理方法。

[26] 請求項 21に記載のオブジェクト表示処理方法にぉ 、て、

ステップ（d)では、前記画面上に前記グループに帰属する複数のオブジェクトの少 なくとも一部が互いに重なり合うように表示されているときに、所定の拡張要求操作に 応じて前記オブジェクト同士の重なりが概ね解消されるように前記グループに帰属す る前記複数のオブジェクトを再表示させるオブジェクト表示処理方法。

[27] 請求項 21に記載のオブジェクト表示処理方法にぉ 、て、

ステップ (d)では、前記画面上で前記グループを分断するストロークの入力操作が なされたときに、前記入力されたストロークに基づ 、て前記グループを新たな複数の グループに分割するオブジェクト表示処理方法。

[28] 前記オブジェクトは、前記画面上に表示されるアイコンである請求項 21に記載のォ ブジェクト表示処理方法。

[29] 画面上に複数のオブジェクトを表示させると共に前記オブジェクトに対する操作に 応じた処理を実行するオブジェクト表示処理装置としてコンピュータを機能させるォ ブジェクト表示処理用プログラムであって、

複数のオブジェクトから一対のオブジェクトを抽出して該一対のオブジェクト間の前 記画面上における距離を算出する距離算出モジュールと、

前記算出された距離に基づいて前記画面上で空間的にまとめられているオブジェ タトを 1つのグループとしてグループ化するグループ化モジュールと、

前記オブジェクトの前記グループへの帰属を示すグループ識別表示と共に前記ォ ブジェクトを前記画面上に表示させる表示モジュールと、

前記画面上で前記グループに対する所定の操作がなされたときに、該操作に応じ た前記グループに対する処理であるグループ処理を実行するグループ処理モジュ 一ノレと、

を備えるオブジェクト表示処理用プログラム。