JP2006195970A - データのタイムラインベースの視覚化のためのアーキテクチャおよびエンジン - Google Patents

データのタイムラインベースの視覚化のためのアーキテクチャおよびエンジン Download PDF

Info

Publication number
JP2006195970A
JP2006195970A JP2005358008A JP2005358008A JP2006195970A JP 2006195970 A JP2006195970 A JP 2006195970A JP 2005358008 A JP2005358008 A JP 2005358008A JP 2005358008 A JP2005358008 A JP 2005358008A JP 2006195970 A JP2006195970 A JP 2006195970A
Authority
JP
Japan
Prior art keywords
objects
band
time
user
component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005358008A
Other languages
English (en)
Other versions
JP4936719B2 (ja
Inventor
Shane F Williams
エフ.ウィリアムズ シェーン
Steven J Ball
ジェイ.ボール スティーブン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2006195970A publication Critical patent/JP2006195970A/ja
Application granted granted Critical
Publication of JP4936719B2 publication Critical patent/JP4936719B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26Visual data mining; Browsing structured data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S715/00Data processing: presentation processing of document, operator interface processing, and screen saver display processing
    • Y10S715/961Operator interface with visual structure or function dictated by intended use
    • Y10S715/965Operator interface with visual structure or function dictated by intended use for process control and configuration
    • Y10S715/966Computer process, e.g. operation of computer
    • Y10S715/968Computer process, e.g. operation of computer interface for database querying and retrieval

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)

Abstract

【課題】ユニークなタイムラインベースナビゲーションツールを使用することによって、様々なデータオブジェクトの管理およびナビゲーションを実施する、ユニークなシステムおよび方法を提供すること。
【解決手段】オブジェクトの少なくとも1つのサブセットをデータストアから少なくとも1つのバンドへ、少なくとも部分的には各オブジェクトの時間パラメータに基づいて編成して、オブジェクトを、時間ベースの方法における少なくとも1人のユーザによるビューのために使用可能にする視覚化コンポーネントと、1つまたは複数のオブジェクトを、少なくとも1つのバンド内に編成されるように表示する表示コンポーネントとを設ける。
【選択図】図1

Description

本発明は、一般にデータ内をナビゲートして表示することに関し、特に、ユニークなタイムラインベースのパラメータまたはツールを使用して維持および編成されたデータオブジェクトの視覚化および動的操作、ならびにそのデータオブジェクトとの対話に関する。
現在のコンピューティング環境では、ユーザにとって使用可能な表示、ブラウジング、およびファイル編成技術は制限されている。例えば、既存のアプリケーションは主として、様々なタイプのファイルを編成および表示するためのツリー構造フォルダフォーマットを採用している。フォルダ、サブフォルダおよびファイルの間のいくつかの関係を表示することはできるが、このような関係は範囲が制限され、主として明示的ユーザ入力によって決まる。例えば、ファイルを、ユーザによって示されたようなそれらの共通フォルダまたはサブフォルダに従って関係付けることができる。
さらに、複数のフォルダまたはサブフォルダ内の複数のファイルの間の表示またはナビゲートは問題がある可能性があり、画面スペースの制約によりほぼ実行不可能である可能性がある。したがって、複数のアクティブドキュメントの間のユーザ対話は、現在の実務下では実現可能ではない。全体的に、従来のファイルおよびフォルダ編成方法は単に、個々のファイルの異なるビューを提供し、それにより、ファイル、ドキュメントなどの処理および/または管理のためにより多くのユーザ時間およびリソースを必要とする。
以下は、本発明のいくつかの態様の基本的理解を提供するために、本発明の簡単な要約を提示する。この要約は、本発明の広範な外観ではない。これは本発明の重要/重大な要素を識別するように、または、本発明の範囲を線引きするように意図されない。その唯一の目的は、本発明のいくつかの概念を簡単な形態で、以下に提示されるより詳細な説明の前置きとして提示することである。
本発明は、ユニークなユーザインターフェースの使用を通じて、データのナビゲートおよび管理を実施するシステムおよび/または方法に関する。具体的には、データ(個別にオブジェクトと称する)を、1つまたは複数の定義可能カテゴリまたはバンドにおいて表現することができる。各バンド内で、または、複数のバンドにわたって、ズーム深度および使用可能な画面スペースに応じて、オブジェクトをズーム深度の範囲で、個別に、または関係付けられたクラスタにおいて表示することができる。しかし、従来の技術とは異なり、オブジェクトを、各オブジェクトに固有または特定である時間ベースのパラメータに従って配列することができる。加えて、オブジェクトのブラウジングを、部分的にはタイムラインベースナビゲーションツールを使用することによって実施することができる。したがって、ユーザは、1つのバンド内で、または、複数のバンドにわたって、様々なオブジェクトの間の多数の可能な関係をより容易に理解し、抽出することができる。ユーザはしばしば、オブジェクトと時間の間の無意味な関連付けを作成する。よって、ユーザがオブジェクトを時間要素に基づいて、ならびに主題によって表示および編成することを可能にすることによって、より豊富で有意味なユーザエクスペリエンスを有することができる。
本発明の一態様によれば、オブジェクトを表示する間に、複数のオペレーションを、オブジェクトのタイプ(例えば、写真、ドキュメント、ウェブページ、スキャンされたドキュメント、メッセージなど)にかかわらず、1つまたは複数のオブジェクトにおいて実行することができる。特に、オブジェクトをサムネールとして表示することができ、したがって、多数のオブジェクトのコンテンツをユーザにとって可視にすることができる。多数の異なるタイプのサムネールを使用することができる。1つの手法は、ASCIIサムネールを含む。ASCIIサムネールは本質的に、より大きいオブジェクトにおいて表示されたテキストの本質を定義する、テキストベースの要約である。他の可能なタイプのサムネールには、実際のオブジェクトのプロキシを表現する、イメージ、オーディオ、ビデオ、または他のメディアサムネールが含まれる。ASCII(または他のいずれかのタイプの)サムネールをまた、サムネールのために使用可能なスペースに適合することができるだけの量のテキストのみを示すように、スケールすることもできる。テキストは、所与の表示スペースに対して意味を最大化するように、インテリジェントにスケールすることができる。
各オブジェクトの可視コンテンツの量は、現在のズーム深度によって決まる可能性がある。例えば、ユーザがオブジェクトのバンドまたはグループにズームインする場合、各オブジェクトまたはグループのより多くのコンテンツをより容易に見ることができる。ユーザがズームアウトする場合、オブジェクトの比較的抽象的なビューおよびより少ない詳細が可視である。また、ユーザは本質的にコンテンツのレイヤをいずれかの期間にわたってピールバックすることができ、そのように行うことにおいて、高密度のオブジェクトを別々にピールしてより詳細に表示することができ、主として、様々なズームボタンまたはズームコントロールをポインティングデバイス上またはディスプレイ上で使用することによって行う。
実際のオブジェクトを表現することに加えて、オブジェクトのサムネールをオペレーション可能またはアクション可能にして、ユーザがサムネールをクリックしてオブジェクトのコンテンツに直接アクセスすること、および/または、オブジェクトのコンテンツを修正することができるようにすることもできる。したがって、コンテンツへの変更を行い、または保存するために、コンテンツをコントロールする別のアプリケーション(例えば、電子メールプログラム、ワードプロセッシングプログラムなど)を開くか、またはアクセスする必要はない。例えば、サムネールがウェブページを指示する場合、ユーザは単にサムネールをクリックし、特定のページにアクセスすることができる。サムネールをまた動的にすることもでき、それにより、実際のオブジェクトのコンテンツが変更になる場合、サムネールも変更になる。
オブジェクトが複数のバンドの間で導入、移動またはコピーされる場合、各バンドによるメタデータを、特定のオブジェクトにアノテーション付けすることができる。明示的および暗示的メタデータをオブジェクトに、ユーザプリファレンスに応じて素早くアノテーション付けすることができる。例えば、ユーザはタイトルまたは名前をオブジェクトに提供することができ(例えば、明示的メタデータ)、または、システムは、ある形態の人工知能を使用して、関係付けられたオブジェクトを発見し、これらの関係付けられたオブジェクトのために適切なメタデータを入力することができる(例えば、暗示的メタデータ)。オブジェクト、または、オブジェクトのクラスタに、テキスト、ペン、音声または他のオーディオを含む、異なるタイプのメタデータによりアノテーション付けすることができる。
本発明のもう1つの態様によれば、1つまたは複数のオブジェクトを、それに対してユーザがアクセスを有することができるいずれかの数の他のアプリケーションにおいて使用するために選択し、および/または、別のウィンドウ内で表示することができる。例えば、1つまたは複数のオブジェクトを、修正のために、または、ハイパー表示など異なるタイプの表示のために、選択することができる。ハイパー表示は、ユーザが、関心のある特定のオブジェクトに集中するために、比較的多数のオブジェクト中を非常に迅速な方法でロールすることを可能にすることができる。実際には、例えば、ユーザは、このハイパービュー技術を使用して、わずか10または10000もの数のオブジェクトを表示することができる場合がある。ユーザはまた、関心のあるオブジェクト、または、ハイパービューの特定のポイントに容易にフラグを立て、またはマークを付けて、後の時間にオブジェクトの特定のサブセット上に焦点を当てることができる場合もある。
前述のように、オブジェクトは、時間ベースナビゲーションツールに従って、バンド内で編成される。例えば、複数のバンドを、スタック構成内など、画面のy軸に沿って作成することができる。バンドをまた、時間ベースナビゲーションツールに対して配列して、ブロギング環境を実施することもでき、この環境では、ユーザのフィードバックまたはコメントはオブジェクトを表現することができ、したがって、適切な時間にバンドに直接入力することができる。
一般に、使用可能なバンドのすべてまたは少なくとも1つのサブセットのうち、少なくともあるコンテンツを、画面上に同時に表示することができる。例えば、コンテンツは認識可能なオブジェクトまたはサムネールでない場合があるが、その代わりに、いくつかのオブジェクトがインジケータの場所に存在することをユーザに通知するためのインジケータである場合がある。しかし、画面スペースにより、すべての所望のバンドが一度に可視となることが可能でない場合、ユーザは単にそれらのバンド中を(例えば、垂直に)スクロールして、バンドが画面の底部から落ちる場合、そのバンドが画面の最上部に再び現れることができるようにすることができる。バンドをまた、ユーザプリファレンスによって決定されるように、バンドが最後にアクセスされた時期または時間に基づいて画面から除去することもできる。
各バンドを、名前、および/または、その中に含まれるかもしくはユーザによって識別されたオブジェクトに関連付けられたメタデータから抽出される、1つまたは複数のプロパティ(例えば、メタデータ)によって定義することができる。一般的なツリー構造ビューと同様に、バンドを縮小または展開することができる。しかし、完全に縮小される場合、各バンドのコンテンツについてのある情報をなお、別の軸(例えば、x軸)を使用することによって得ることができる。これは部分的には、いずれかのバンドにおいて維持されたオブジェクトの存在および/または密度を監視および追跡することによって実施される。ユーザに対して、このデータを各バンドにおける正弦曲線として表現することができ、それにより、振幅および/または色の不透明さは、特定の時間または期間(例えば、年、月、週、日、時間など)に位置するオブジェクトの相対数またはオブジェクトの相対サイズを指示することができる。代替として、非正弦形状はオブジェクト密度を表現することができる。例えば、数学的に生成されてもされなくてもよい三角形、楕円形曲線およびアイコンを使用することができる。したがって、バンドが縮小または閉じられる場合でも、ユーザはなお、密度インジケータを時間パラメータと組み合わせて利用することによって、情報をそれらのバンドから抽象または抽出することができる。
本発明のもう1つの態様によれば、特にオブジェクトが互いに密接に関係付けられる場合、オブジェクトをクラスタリングすることができる。しかし、それらの潜在的に大きいサイズのため(例えば、クラスタ内のオブジェクトの数に関して)、クラスタ可視性はズーム深度に応じて妨げられる場合がある。このシナリオに対処するため、ユーザまたはシステムはクラスタから、そのクラスタを最もよく代表する1つのオブジェクトをインテリジェントに選択して、そのクラスタを表現することができる。他のオブジェクトを代表オブジェクトの「背後」で発見し、例えば、マウスオーバーおよびロールオペレーションの使用を通じてロールすることができる。より重要なオブジェクトのクラスタに特定のラベルを与えることができ、このラベルは、ズーム深度にかかわらず、画面上にあり、バンド内で可視のままとなることができる。単にこのラベルをクリックすることによって、クラスタを視覚化し、さらに詳細な表示のためにズームインすることができる。より重要でないクラスタにもまたラベルを付けることができるが、それらの割り当てられた重要性のレベルはより低くなり、したがって、より高い重要性の値およびそれらの各ラベルを有するクラスタが上に重なる場合がある。
ユーザの個人的タイムライン(例えば、休暇、仕事のイベント、旅行など)にわたる様々な時間での比較的高いオブジェクト密度により、いかなるズーム深度のオブジェクトの可視性も問題になる可能性がある。したがって、オブジェクトの可視性を最適化するために、ユーザはオブジェクトおよび/またはオブジェクトのクラスタを優先順位付けすることができる。例えば、より低い重要性の値を有するオブジェクトまたはオブジェクトのクラスタの存在を、アイコン(例えば、ドロップダウン矢印)または他のグラフィックによって指示して、その特定の時間で縮小されたオブジェクトの数を例示することができる。より高い重要性の値を有するオブジェクトは、適切なズーム深度に達する場合、即時にユーザにとって可視にすることができる。重なり合うオブジェクトまたはクラスタラベルを、少々透過的にすることもできる。部分的に互いに重なり合うオブジェクトおよび/またはラベルの、またはそれらの間のある程度の透過性を可能にすることは、ユーザにとって特に有益である。潜在的に重要な情報をユーザから隠すのではなく、この情報はなおユーザにとって使用可能である。
上述の本発明の様々な態様は、様々なオブジェクトタイプをサポートすることができ、これらのオブジェクトタイプには、それに限定されないが、電子メール、音楽、ドキュメント、写真、ビデオ、テレビおよび/またはケーブル番組、コンピューティングアプリケーション、スキャンインされたドキュメント、ウェブページまたはURL、ハイパーリンク、音声メッセージ、連絡先、住所情報、地図、領収書、取引記録、銀行取引記録、および/または、他のいかなるタイプのデータもが含まれる。複数の期間にわたるバンド内などのバンドのナビゲーション、または、オブジェクト、バンドもしくは時間フレームのズームインおよびアウトを、部分的には様々なオーディオコマンド、視線追跡、またはポインティングデバイスを使用することによって、実施することができる。加えて、例えば、より関心の低い周囲のオブジェクトがスケールダウンしてx軸に沿って画面の端に移動することを可能にすることによって、ズーミングを介した、より大きい関心のあるオブジェクトの表示を、さらに最適化することができる。画面上のナビゲーションボタンもまた、1つの特定のバンド内、または、同時に複数のバンドにわたる所望のコンテンツの視覚化を支援することができる。
前述および関連の目的の達成に向かって、本発明のある例示的態様を、以下の説明および添付の図面に関連して本明細書で説明する。これらの態様はしかし、本発明の原理を使用することができる様々な方法の少数を示し、本発明は、このようなすべての態様およびそれらの等価物を含むように意図される。本発明の他の利点および新規の特徴は、図面と共に考慮される場合、以下の本発明の詳細な説明から明らかになることが可能である。
本発明をここで図面を参照して説明し、図面において、類似の参照番号は全体にわたって類似の要素を指すために使用される。以下の説明では、説明のために、本発明の十分な理解を提供するために、多数の特定の詳細を示す。しかし、本発明をこれらの特定の詳細なしに実施することができることは明らかであろう。他の場合では、本発明の説明を実施するために、周知の構造およびデバイスをブロック図の形態で示す。
本出願で使用される場合、「コンポーネント」および「システム」という語(用語)はコンピュータ関連エンティティを指すように意図され、このエンティティは、ハードウェア、ハードウェアおよびソフトウェアの組合せ、ソフトウェア、または実行中のソフトウェアのいずれでもよい。例えば、コンポーネントは、それに限定されないが、プロセッサ上で実行するプロセス、プロセッサ、オブジェクト、実行可能ファイル、実行のスレッド、プログラムおよびコンピュータであってもよい。例示として、サーバ上で実行するアプリケーションおよびサーバの両方がコンポーネントである可能性がある。1つまたは複数のコンポーネントはプロセスおよび/または実行のスレッド内に存在することができ、コンポーネントは1つのコンピュータ上でローカライズされるか、および/または2つ以上のコンピュータの間で分散される場合がある。
一般に、本発明は様々な推論スキームおよび/または技術を、オブジェクトが1つまたは複数のバンドに導入される場合のオブジェクトのアノテーション付けに関連して組み込むことができる。加えて、部分的には、類似のメタデータ、類似のイメージ(例えば、画像認識技術を介する)、類似の顔(例えば、顔認識技術を介する)、類似の手書き文字(例えば、手書き文字認識を介する)、類似のテキスト(例えば、光学式文字認識を介する)、類似のウォーターマーク、および/または、類似の音声パターン(例えば、音声フィンガープリント、音声−テキストおよび/または音声−音楽スコア認識アルゴリズムを介する)のうちいずれか1つに基づいて、関係付けられたオブジェクトをグループ化もしくは発見することに関連して、様々な推論スキームを適用または使用することができる。上記のリストは網羅的ではなく、他の類似を考慮することができることを理解されたい。
本明細書で使用される場合、「推論」という語は一般に、イベントおよび/またはデータを介してキャプチャされたような観察のセットから、システム、環境および/またはユーザの状態について判断または推論するプロセスを指す。推論を使用して、特定のコンテキストまたはアクションを識別することができ、または例えば、推論は複数の状態にわたる確率分布を生成することができる。推論は確率的である場合があり、すなわち、データおよびイベントの考慮に基づいた、関心のある複数の状態にわたる確率分布の計算である場合がある。推論はまた、イベントおよび/またはデータのセットからより高いレベルのイベントを構成するために使用される技術を指す場合もある。このような推論は結果として、イベントが時間的に密接に近接して相関されるかどうかにかかわらず、また、イベントおよびデータが1つのイベントおよびデータソースから来るか、複数のイベントおよびデータソースから来るかにかかわらず、観察されたイベントおよび/または格納されたイベントデータのセットからの、新しいイベントまたはアクションの構築となる。
ここで図1を参照すると、本発明の一態様による様々なタイプのオブジェクト(データ)のナビゲーションおよび管理を実施する、ユニークおよび強力なシステム100の全体的ブロック図がある。システム100には視覚化コンポーネント110が含まれ、視覚化コンポーネント110は、データストア120内で維持されたオブジェクトに対してアクセスおよび/または検索を行うことができ、少なくとも部分的にはユーザ定義プロパティまたはそれに関連付けられたメタデータに基づいて、主題および時間によって、視覚的にこれらのオブジェクトを配列することができる。視覚化コンポーネント110は、オブジェクトのプロパティまたはメタデータの間の類似性または共通性に従って、オブジェクトをいかなる数のバンドにも編成することができる。例えば、各バンドは特定の主題(例えば、家族、家、旅行など)を表現することができる。
各バンド内で、視覚化コンポーネント110は、1つまたは複数のオブジェクトを各バンド内で、時間ベースのパラメータに従って編成または位置決めすることができる。時間ベースのパラメータは、オブジェクトの作成日、または、オブジェクト内で表現されたイベントが発生した日付/時間に対応することができる。例えば、7月4日の島々への旅行の写真を1つのバンド(例えば、旅行と命名される)にグループ化し、2004年7月3〜5日という旅行の日付の辺りにローカライズすることができる。同様に、数カ月後に感謝祭の休暇にかけて行われたユーザの旅行を、ほぼ11月の日付の辺りにローカライズすることができる。
バンドをそれらの対応するオブジェクトと共に、ユーザによってディスプレイ130上で表示および/または操作することができる。後述のように、各バンド内に含まれたオブジェクトを様々な方法で表現して、ユーザが各バンド内のそれらの存在を承知する状態にしておくことができ、同時にまたユーザの関心のあるオブジェクトの可視性を最適化することもできる。
システム100にはまたブラウジングコンポーネント140も含まれる場合があり、ブラウジングコンポーネント140は、ユーザがオブジェクトのバンド内をより容易にブラウズして、いずれか1つのバンド内で、または複数のバンドにわたって、複数のオブジェクトの間の追加の関係または関連付けを確立または発見することを可能にする。ブラウジングコンポーネントの結果生じる、いかなるこのような関連付けもまた、ユーザによって決定されるように、様々な方法でディスプレイ130上に表示することができる。
ここで図2を参照すると、本発明の一態様による、オブジェクトのナビゲーションおよび管理の新規な手法を実施するシステム200のブロック図が例示される。システム200には視覚化コンポーネント210が含まれ、視覚化コンポーネント210は、1つまたは複数のオブジェクトなど、ユーザベースの入力を受信して、時間ベースナビゲーションコンポーネント220を介してそれらの入力をブラウズすることができるようになる前に、それらの入力を管理および処理する。
具体的には、視覚化コンポーネント210には、アノテーションコンポーネント230など、複数のサブコンポーネントが含まれる可能性がある。アノテーションコンポーネント230は、バンドまたはオブジェクトのグループに新たに導入されたいかなるオブジェクトにも、バンドまたはグループに関連付けられたメタデータ、ならびに明示的ユーザ入力に基づいて、アノテーション付けすることができる。一般に、アノテーションを、ユーザまたはマシンにより適用された、オブジェクトへの修正にすることができ、この修正はさらにオブジェクトに、元のオブジェクトの知的、物理的、または感情的価値を高める、意味、コンテキスト、豊富さ、または詳細を与える。例えば、ユーザは、オブジェクトに名前またはタイトルを与えることによって、または、時間または日付をオブジェクトに割り当てることによって、オブジェクトに具体的にアノテーション付けすることができる。アノテーションをまた、オブジェクトまたはバンドに関係するユーザコメントの形態にすることもできる。バンドにアノテーション付けされたコメントまたは他の情報をまた、そのバンド内に位置する各オブジェクトまたはオブジェクトのグループに、自動的にアノテーション付けすることもできる。
また、視覚化コンポーネント210に含まれる物は、関連付けコンポーネント240である。関連付けコンポーネントはオブジェクトを類似のメタデータに、または、例えば、バンド内の類似のメタデータの最低しきい値に関連付けることができる。結果として、このような関係付けられたオブジェクトを、特定のバンドによって、そのバンド内でより密接に関係付けられたオブジェクトのクラスタとして識別することができる。関連付けをまた複数のバンドにわたって実行して、異なるバンド内に格納された、関係付けられたオブジェクトを発見することもできる。
時間ベースナビゲーションコンポーネント220は、時間パラメータに従って、ディスプレイ250におけるユーザに対するオブジェクトの視覚化をさらに実施することができる。具体的には、時間ベースナビゲーションコンポーネント220は、ユーザが、複数年、1年、月、週、日、時間、10年、および/または、他の有用な時分割など、いずれかの時間パラメータに従って、いずれか1つのバンド内で、または同時に複数のバンドにわたって、複数のオブジェクト内をナビゲートすることを可能にする。したがって、可視のタイムラインにわたっていずれかの特定のバンド内を単にジェスチャーすること(ポインティングデバイスの使用、スクローリングメカニズム、または他のジェスチャースクローリングメカニズムなどによる)によって、ユーザは容易および迅速にオブジェクトを、ユーザの生活で起こったように表示することができる。例えば、ユーザがシステム200を使用して、自分の生活のイベントのジャーナルまたは日記を、10年前に開始してこれから10年後に終了する20年間にわたって維持しようとしたことを想像されたい。ユーザは、すでに取られたかまたは予定されたいずれかの休暇についての写真、旅行プラン、地図および観光地、家族全員の写真、医者のレセプトおよび検査結果などのペット情報、家全体の情報、歌、記録、キャプチャされたオーディオクリップ、連絡先情報、住所、GPS座標、ドキュメントなどを含めることを望む場合がある。情報のタイプは実際には際限がない。
写真、レセプト、または、他のいずれかのタイプのドキュメントなどのオブジェクトがユーザによって追加される場合、これらのオブジェクトにアノテーション付けし、適切なバンドに関連付けることができる。言うまでもなく、「ペット」、「休暇」、「家族」、「友人」、「仕事」、「家庭」、「学校」、「趣味」、「音楽」、「プロジェクト」など、それに応じてバンドに命名して、主題を適切に識別することができる。
以下のいくつかの図は、バンドへのオブジェクトの編成、および、時間パラメータに基づいたそれらのナビゲーションに関する、さらなる詳細を提供する。例えば、図3および4は、いずれかのバンドへのオブジェクトの追加を概略的に表現する。図3では、ユーザが、このナビゲート可能なスペースで管理することを望む複数のオブジェクト300を有すると仮定する。オブジェクト300はバンド選択コンポーネント310と対話し、バンド選択コンポーネント310は、どのバンドに各オブジェクト300を入れるべきかを、オブジェクト自体、および、それに関連付けられたいずれかのメタデータに基づいて決定することができる。バンド選択プロセスは、人工知能(例えば、アルゴリズム、推論スキームなど)を使用して自動の方法で暗示的に、または、明示的ユーザ入力によって手動的に行われることが可能である。その後、時間ベースナビゲーションコンポーネント320を使用して、いずれかの所望のバンド内のオブジェクトをあちこちに動かして、そのコンテンツを所望の日付または時間の範囲で表示することができる。
新しいバンドを作成し、削除し、画面スペース上の異なるロケーションに移動させ、あるバンドが互いに隣接して(例えば、アルファベット順、作成日または修正日による日時順など)現れるように、それらのバンドをドラッグすることによって再順序付けすることができることを理解されたい。同様に、例えば、ドラッグすることによって、または、他の適切なコマンドもしくはオプションを使用して所望のオペレーションを実行することによって、オブジェクトをユーザの意志で異なるバンドに容易に移動またはコピーすることができる。
図4は、図3の動作の結果を明示する。見るとわかるように、時間パラメータ400(例えば、月および年参照)は時間ベースナビゲーションバー410上に指示されている。加えて、オブジェクトはそれらの各バンドに関連付けられており、バンドに沿ってそれらの各日付で位置決めされている。以下の図5で後述するように、バンドおよびその中のオブジェクトを、ユーザプリファレンスに応じて多数のズームレベルまたは深度で表示することができる。したがって、図4に示すように、本明細書で示すオブジェクトはユーザにとって可視であってもなくてもよい。
ここで図5を見ると、本発明の一態様による、ユニークなユーザインターフェースを使用してオブジェクト管理およびナビゲーションをさらに実施するシステム500のブロック図がある。システム500は、上記の図2のシステム200に類似している。しかし、加えて、視覚化コンポーネント510にはまた、ズーミングコンポーネント520およびオブジェクト密度追跡コンポーネント530もが含まれ、各々は、バンドコンテンツおよび/またはその中の特定のオブジェクトの見やすさを支援する。
ズーミングコンポーネントは二重の機能性を有することができる。一態様では、ズーミングコンポーネント520は、x軸に沿ったズーミングを実施することができる。具体的には、ズーミングコンポーネント520は、x軸パラメータ(例えば、時間)のズームインまたはアウトを様々なズーム深度で、ホィール使用可能マウスでマウスホィールを使用することなどによって行うことができる。例えば、下方への動きは、画面上で見えるより大きい範囲の時間、および、したがって、各バンドまたはオブジェクトのより少ない可視の詳細までズームアウトする。同じく、ホィールの上方への動きは、より特定の時間フレームにズーム(例えば、イン)し、したがって、その時間フレーム内の1つまたは複数のバンドまたはオブジェクトのより詳細なビューが可能となる。ズーミングをまた、ツールバーに含まれる可能性のあるナビゲーションボタン(例えば、D−日付、W−週、M−月、Y−年、3年など)によって、または、各バンド上に位置する「−」および「+」インジケータによって、実施することもできる(以下の図17〜19参照)。
もう1つの実施態様では、ズーミングコンポーネント520は、y軸に沿ったズーミングを実施することができる。具体的には、ズーミングコンポーネント520は、バンドのズームインまたはアウトを行って、本質的にバンドを展開または縮小することができる。例えば、バンドを垂直方向に開いて、その中のいずれかのオブジェクトを表示することは、バンドの下半分でクリックして下方にドラッグすること、または、バンドの上半分で上方にドラッグすることによって実施することができる。したがって、バンドの上方または下方部分のいずれかを圧縮されたままに保持して、バンドの2つの部分のうち他方(例えば、上方または下方)を表示する場合、より多くの画面スペースを提供することが可能である。上方および下方部分を同時に展開するには、上方および下方部分を定義する時間バーを、上方への動きによりグラブすることができる。両方の部分を同時に閉じるには、時間バーを、(ポインティングデバイスを使用して)下方への動きによりグラブすることができる。
さらに、特に一方のバンド(バンドA)を表示する場合、ユーザがフォーカスにより、またはドラッグすることによってバンドAをサイズ変更する場合、他方のバンドのy軸方向を自動的に減らすことができる。一般に、バンドがますます幅広く開かれるにつれて、対応するオブジェクトはより大きくなることができ、各オブジェクトのより詳細を見ることができるようになる。画面スペースに限りがあるので、他のいかなるバンドもより圧縮されるようになり、あるバンドの展開のために場所をあけることができる。代替として、または加えて、現在のズーム設定を記憶するために割り当てられたファンクションキーまたは自動ズームキーを呼び出すことによって、すべてのバンドを同じ幅に割り当てることができる。貴重な画面スペースをさらに節約するために、いずれかのこのようなバンドが使用中でない場合、デスクトップスペースの作成を実施するために、バンドをまた自動的に隠すように、または、一時的に画面から消えるようにすることもできる。
いずれかの表示画面におけるシステム500のスペース利用およびアーキテクチャレイアウトにさらなる状況を提供するため、図6は各軸の例示的表現を明示する。例えば、バンドをy軸に沿って配列することができ、それにより、いずれか1つの時間に示された各バンドの量は、バンドのいずれかの特定のズーム深度、および、ユーザが画面上で表示することを望むバンドの数が与えられると、合計の使用可能画面スペースによって決まることが可能となる。ズーム深度をz軸上で表現することができ、これは、特定のバンドまたはバンド内の時間でズームする場合、関心のあるオブジェクトは拡大し、関心のない周囲のオブジェクトは、拡大されたオブジェクトと比較して、サイズが小さくなるように見えることが可能であるからである。さらに、いくつかのオブジェクトはユーザにとってより重要である(例えば、可視性に関してより高い重要性の値が与えられる)可能性がある。したがって、バンド内のオブジェクトを全体的に表示する場合、いくつかのオブジェクトを、少なくとも部分的にはより重要でないオブジェクトの前に現れるようにレンダリングすることができる。
バンド内を様々な詳細のレベルでナビゲートする場合、システム500またはユーザは、どのコンテンツを表示するかを、1つまたは複数の選択アルゴリズムを使用して決定することができる。選択アルゴリズムの1つのバージョンは、以下、すなわち、各バンドがいくつかの固定ノードを有するツリータイプ構造で構成されることが可能であることに依拠する。ツリーは、すべてのノードがポピュレートされる、またはされなければならないとは限らないという、希薄な意味である可能性がある。ツリーを上下に移動させることも可能である。
ツリーの上方の各ノードはその下のノードの要約を含み、これは、ユーザがバンドのズームアウトを行う場合、ズーミングコンポーネントは例えば、下の各ノードを処理する必要なしに、これらのノードをあるレベルでウォークスルーすることができるという意味である。すなわち、下の各ノードを処理する、より時間のかかるタスクを全体として実行するのではなく、各ノードのサマリーに依拠することができる。各ノードのための設定しきい値が超えられる場合、ズーミングコンポーネントは、超えられたしきい値が下のノードに属するか上のノードに属するかに応じて、ノードの上方または下方に移動することができる。さらに、各サマリーは重要性のレベルを指示することができ、プロパティのセットを含むことができる。重要性を、明示的に入力されたプロパティに基づかせることができ、または部分的にはヒューリスティックベースのプロパティによるようにすることができる。例えば、検出されたクリックの数は、ノード内の特定のアイテムについての重要性を増すことができる。また、サマリーを、ユーザまたはシステムパラメータによって決定されるように、動的または静的にすることができる。
システム500が使用されるアプリケーションに応じて、軸を変更することができる。例えば、ブロギング環境では、時間パラメータをy軸に沿って表現することができ、アノテーションをユーザによって、特定の時間または日付で作成することができ、これらのすべてを前述のようにスケーラブル、ブラウズ可能、および/またはズーム可能にすることができる。
再度図5を参照すると、オブジェクト密度追跡コンポーネント530は、固有のピークを画面上の各バンドに提供する。具体的には、バンドが少なくとも部分的に圧縮され、個々のオブジェクトがもはや可視でないようになる場合、ユーザはなおそれらのバンドから、特定の時間に、または特定の期間にわたって位置したオブジェクトの相対量など、情報を抽出することができる。加えて、ユーザは、オブジェクトがバンド内のいずれかの所与の時間で利用中である相対サイズまたはストレージ消費量を決定することができる場合がある。これらの属性の両方を、部分的にはオブジェクト密度追跡コンポーネント530によって実施することができる。オブジェクト密度追跡コンポーネントは本質的に、以下のうち少なくとも1つ、すなわち、バンド全体に位置するオブジェクトの数、または、バンド内の各オブジェクトの相対サイズを測定する。測定値を各バンドにおける典型的な正弦曲線に変換することによって、ユーザは迅速に各バンドの状態を査定することができる。
例えば、図7は、いずれかの特定の時間のオブジェクト密度をバンド毎に指示することができる、相対高さおよび/または色強度を概略的に明示する。図のように、追跡コンポーネント700は、各オブジェクトの時間のロケーションまたは位置をバンド710毎に追跡する。時間ベースナビゲーションバー720は画面上でバンド710と平行に配置されて残り、参照の容易で正確なフレームを提供することができる。バンドが画面上にある場合、正弦曲線730(または、ある他の関数により導出された形状)の高さに基づいて、オブジェクトのある量が、x軸パラメータに応じて、年、月、日、時間または週の特定の時間で存在することを、ユーザは容易に確かめることができる。結果として、ユーザは、アクティビティレベルを、特定の時間またはそれらの存続の期間中などに、迅速に査定することができる。また、各バンド内に含まれたコンテンツは本質的に、ユーザがバンド設定を修正しない限り、決してビューから消えない。すなわち、あるコンテキストを、バンドのいかなるズーム深度で見ることもできる。
図8〜10に移ると、開くまたは展開オペレーションが、少なくとも1つのバンドに関して明示される。図8で開始すると、スタック内に(例えば、ユーザインターフェースのy軸に沿って)配列された複数の定義可能バンド810の図800が例示される。バンドのスタックの上を越えて、時間軸820を見つけることができる。時間軸820は各バンド内、ならびに、複数のバンドの間のナビゲーションを実施する。このシナリオでは、時間軸は、バンドを月の基準で表示するように設定される。図8に示すように、バンド810が圧縮される場合、このようにバンドのいずれかに含まれた個々のオブジェクトはユーザにとって可視でない場合がある。
図9では、ユーザはバンド900にズームインするか、またはこれを開き、結果として、2つのオブジェクト910が現在可視である。アンカ920は、オブジェクトが時間軸820に沿って位置する日付への参照を提供する。画面上の他のバンド930は、バンド900の展開の結果として、より小さくされる。
図10では、ユーザはバンド900を拡張し続けており、バンド1000がその結果生じる。見るとわかるように、バンド1000の高さは実質的および必然的に増しており、オブジェクト1010(例えば、図9の910)のサイズまたは寸法もまた増している。よって、オブジェクト1010に関するより詳細をユーザによって表示することができるが、詳細の増大は、現在の期間(例えば、2004年9月〜2005年5月)内のバンド内の他のオブジェクトの数によって決まる可能性がある。加えて、より高密度に詰め込まれたオブジェクトはアンフォールドして画面上に現れることができる。バンド展開に応答したオブジェクトの移動により、および、追加のオブジェクトの潜在的露呈により、アンカ1020の位置が変化して、スペース消費量の変化を補償することができる。
図8〜10で起こるイベントは、図11〜14で表現された画面キャプチャイメージによって、よりよく視覚化することができる。これらの画面キャプチャイメージは、上述のシステムおよび技術を使用する例示的ユーザインターフェースを表現する。図11では、複数のバンド1100はスタック内に配列される。バンドは命名され、異なるバンドを互いに容易に区別するために様々な色で現れる。スタックの上を越えて、時間ベースナビゲーションバー1110が位置する。
バンド1100は圧縮された状態で現れるが、時間パラメータ(例えば、年:1999〜2003)による各バンド内のオブジェクトの密度および/または存在は、適切な正弦曲線によって表現される。例えば、曲線がより透過的であるほど、より少数のオブジェクトがそこに位置することを指示することができる。同様に、より不透明な曲線は、特定の時間/日付の期間でバンド内のより高密度にポピュレートされたエリアを指示することができる。
代替として、または加えて、曲線の高さは、バンドのセクションがどれほど高密度にポピュレートされるかを指示することができる。例えば、比較的より短い曲線はより少数のオブジェクトを指示することができ、比較的より高い曲線はより多数のオブジェクトを指示することができる。最後に、各バンドの上方1120および下方1130の部分を、各バンドをx軸に沿って分割するバー1140によって定義されると見なすことができる。このバー1140は、時間参照としての機能を果たすことによって、または、ナビゲーションバー1110の時間状態をミラーリングすることなどによって、時間ベースナビゲーションバー1110の機能性をミラーリングすることができる。このバーをまた、バンドを展開または圧縮するために使用することもできる。すなわち、バーが上方への動きにおいてグラブされる場合、バンドの上方および下方部分が展開する。バーが下方への動きによりグラブされる場合、その逆が起こる。
図11から、図12〜14は、「写真」と呼ばれるバンドの「開く」シーケンスを明示する。図12では、比較的サイズが小さい複数のオブジェクトはここで、バンドの上方および下方部分の両方で可視である。バンドにおける正弦曲線は、ビューから徐々に減少しつつある。
図13では、バンドが「開く」または「拡張する」ことを続けるにつれて、さらにより多くのオブジェクトを見ることができる。各オブジェクトに与えられた名前またはタイトルを見ることができるが、これらをオフにして、バンド内で使用可能な画面スペースを増し、オブジェクト可視性を最適化することができる。正弦曲線はビューから減少し続ける。
図14では、写真バンドは完全に開かれる。1999年1月より前、または2003年1月より後のオブジェクトを表示するには、ユーザは、ポインティングデバイス(例えば、マウス)を使用することなどによってバンドをグラブし、バンドを右または左に移動させて他の年または月にナビゲートすることができる。このバンドの展開されたビューでは、バンドバー1400は、時間ベースナビゲーションバー1410上で指示された月をミラーリングする。加えて、バンドバー1400には、可視オブジェクトが実際に時間において(時間行(1410)に沿って)「存在」するところを指示するための、相対日でのマーカーが含まれる。画面上の他のバンドはさらに圧縮されて、写真バンドの展開のために場所があけられている。
図15は、写真バンドのズームインを明示する。ズームインは、ホィール使用可能マウスを使用する場合、マウスのホィール上昇をモニタリングすることによって実施することができる。バンド上でズームインして特定のオブジェクトまたはオブジェクトのセットを特定の日付/時間で表示することもまた、部分的には、バー1500をバンド内で選択および/またはクリックすることによって、実施することができる。この例示的画面イメージでは、バー1500は時間ベースナビゲーションバー1510よりも多くの時間詳細を反映する。
ここで図16を見ると、本発明の一態様によるオブジェクト管理システム1600のブロック図が例示される。システム1600を、図1および5でそれぞれ上述したようなシステム100または500と共に使用することができる。具体的には、オブジェクト管理システム1600は、オブジェクトの編成および可視性をそれらの各バンド内で実施することができる。一般に、オブジェクト管理システム1600は1つまたは複数のオブジェクト1610を受信することができ、様々なコンポーネントを介して、アノテーション付きおよび/またはクラスタ化オブジェクトを生じることができる。結果として、オブジェクトを容易にブラウズおよび/または探し出すことができる。
オブジェクト管理システム1600には、識別コンポーネント1630および認識コンポーネント1640をその中に有する、アノテーションコンポーネント1620が含まれる。アノテーションコンポーネント1620は、識別コンポーネント1630によって識別されたようなそれらの名前またはプロパティに従って、オブジェクトにアノテーション付けすることができる。加えて、アノテーションコンポーネント1620は、認識コンポーネント1640を使用することによって、いずれかの認識された特性に従ってオブジェクトにアノテーション付けすることができる。例えば、アノテーションを受けるオブジェクトがユーザの姉Maryの写真であると想像されたい。明示的ユーザ入力を必要とすることなく、認識コンポーネント1640は、顔またはパターン認識サブコンポーネント(図示せず)を使用して、写真における人物をMaryとして正確に識別し、それに応じて写真オブジェクトにアノテーション付けすることができる。認識コンポーネント1640はまた、光学式文字認識および音声認識を使用することもできる。
密接に関係付けられた複数のオブジェクトを共に、クラスタリングコンポーネント1650によってクラスタリングすることができる。クラスタリングコンポーネント1650をまた使用して、オブジェクトの1つを、クラスタを最もよく代表するオブジェクトとして識別することもできる。したがって、画面またはバンドスペースが制限または限られる場合、代表オブジェクトを使用して、クラスタをユーザに識別することができる。代替として、クラスタのオブジェクトに関連付けられたメタデータを解析することができ、クラスタを説明するために最も関連のある、または代表的なメタデータを使用して、クラスタを識別することができる。例えば、オブジェクトのクラスタに、クラスタタグ付けコンポーネント1660によってラベルを与えることができる。クラスタラベルは、バンドが圧縮される場合でも、可視および判読可能のままであることができる。クラスタを表示するか、またはクラスタにズームインして、その中のオブジェクトを見るために、ユーザはラベルを少なくとも1回クリックすることができる。
人工知能コンポーネント1670をオブジェクト管理システム1600に関連して使用して、自動的に、および場合によってはより効率的に、オブジェクトへのアノテーション付け、および/または、密接に関係付けられたオブジェクトのクラスタリングを行うことができる。オブジェクトの堪能なアノテーションおよびクラスタリングは、複数のバンド内、および、複数のバンドにわたる複数のオブジェクトのブラウジングおよび位置指定を支援することができる。
以下の図17〜20は、システム1600のオペレーションをさらに例示する。図17では、複数のクラスタラベル1700を、時間におけるそれらの発生に従って、バンド内で見ることができる。個々のオブジェクトに類似して、オブジェクトのクラスタにプライオリティまたは異なるレベルの重要性をユーザによって割り当てることができる。したがって、より重要なクラスタのラベルが重なり合い、比較的近い距離に位置する他のより重要でないクラスタのビューを部分的に覆い隠すように見える可能性がある。例として、クラスタラベル1710は推定上、ユーザにとって、クラスタラベル1730よりも重要であるクラスタラベル1720よりも高い重要性を有する。クラスタラベルならびにバンド内のオブジェクトの間の必要な重なり合いを可能にすることは、より重要でないオブジェクトまたはクラスタが完全にビューから消えることを可能にするのではなく、より多くの情報をユーザに提供することを実施する。
ここで、ユーザがクラスタ1740(RAMROD2003というラベル付き)内のオブジェクトを表示することを望むと仮定する。これを実施するため、ユーザはラベル1740をクリックすることができる。これにより、各サイクリングバンド1750が開いてクラスタ1740内のオブジェクトを可視にするようになる。図18の画面イメージは最終結果を例示し、すなわち、クラスタ1740内のオブジェクト1800が可視であり(例えば、タイトル、日付などの重要なメタデータと共に)、画面上の他のバンド1810は、バンドの間の画面スペース割り当ての変化により実質的に圧縮されている。
特定のクラスタ内のいくつかのオブジェクトをユーザによって圧縮することができる。よって、クラスタが開かれる場合、これらの少数のオブジェクトは閉じられたままとなる可能性があるが、それらの存在はアイコン1820によって指示されるように忘れられない。アイコン1820は、この領域内のs個のオブジェクト(例えば、s=1)が、例えばそれに割り当てられた重要性レベルにより、現在のズームレベルが与えられるとスペースの制約のために表示されることが不可能だったことを指示する。
ユーザがクラスタ1740からズームアウトする場合、クラスタ1740の周囲に位置する追加のオブジェクトは、図19に示すように表示される可能性がある。バンドの右側のナビゲーションボタンは、バンドをその最小の高さまで素早く圧縮すること(「x」)、または、展開(「−」)もしくは圧縮(「+」)の量を徐々に減らすことを実施することができることにも留意されたい。
最後に、図20では、オブジェクトまたはクラスタラベルの重なり合いおよび透過性の概念を再度例示する。画面イメージにおいて(例えば、2000および2010で)見ることができるように、クラスタラベルおよび/またはオブジェクトが互いに重なり合うように設定することができるが、そうすることにおいて、透過性のレベルを採用し、背後のオブジェクトに関連する情報が完全に失われないか、またはユーザから隠されないようにすることができる。したがって、数百または数千ものオブジェクトを1つのバンド内で管理する場合、パースペクティブ、インサイトおよび/または関連性は、より重要であると見なされたオブジェクトによって完全に損なわれるのではない。すなわち、ユーザは、自分のオブジェクトのより完全なピクチャ、ならびに、それらの関係および互いとの関連付けを保持することができる。
ここで図21を参照すると、上述(図1、2および5)のシステム100、200および/または500に関連して使用することができる、ナビゲーションおよび選択システム2100のブロック図が例示される。システム2100を利用して、1つまたは複数のバンド内に位置する、関心のあるオブジェクトのナビゲートおよび表示を実施することができる。システム2100には、ユーザが1つまたは複数のバンド内の複数のオブジェクト内をナビゲートすることを可能にする、時間ベースナビゲーションコンポーネント2110が含まれる。オブジェクトは時間パラメータに関連付けられ、したがって、ユーザが所望の時間パラメータを選択する場合、それに対応する異なるオブジェクトを見るかまたは表示することができる。具体的には、オブジェクト選択コンポーネント2120を使用して、1つまたは複数のオブジェクトをより綿密な表示のために選択することができる。表示するためのオブジェクトの選択を、所望の時間パラメータ(例えば、特定の週または日)に基づくようにすることができ、または、現在可視のオブジェクトによって決定することができる。
複数のオブジェクトがより詳細な表示のために、または別のアプリケーションまたはオペレーションで使用するために選択される場合、マルチオブジェクトビューア2130は、選択されたオブジェクトを、ディスプレイ2140上で表示するために、所望の方法で(例えば、日付による日時順で)配列することができる。1つまたは複数の表示パラメータ2150を設定または調整して、ディスプレイ上のオブジェクトの外観をカスタマイズすることができる。例えば、オブジェクトの色調および表示サイズを修正することができ、タイトルをオンまたはオフにすることができ、オブジェクトを表示する速度を調整することができ、一度に表示するためのオブジェクトの数を変更することなどができる。
上述のように、より綿密な表示のためのオブジェクトの選択を、部分的にはいくつかの異なる選択技術によって実施することができる。例えば、図22は、オブジェクトをクリックすることによって実行することができる、あるオブジェクトの選択を明示する。拡大されたオブジェクト2200を、拡張ウィンドウ2210の有無にかかわらず表示することができ、拡張ウィンドウ2210は「関連アイテム」ならびに「他の要素」、およびナビゲーション矢印を表示する。オブジェクト2200自体は、そのタイトル、オブジェクトのストレージロケーション(例えば、パス名)、サイズおよび/または解決など、選択メタデータを表示することができる。
代替として、オブジェクトの選択は、時間フレームをバンド内またはバンドのスタックの上の時間ベースナビゲーションバーに沿って選択することによって、行われることが可能である。図23は、バンド2300内のいくつかのオブジェクトを例示し、バンド2300は展開されており、バンドは時間軸2310(例えば、時間ベースナビゲーションバー)に沿ってズームインされている。オブジェクトビューア2320もまたユーザによって開かれているが、この時点では空のままである。
次の図24では、ユーザは期間2400をバンド2420内の時間バー2410上で選択している。この選択の上で、この期間2400内に入るオブジェクトは2430で強調表示され、オブジェクトビューアのオブジェクトリスト2440の部分に現れる。オブジェクトビューア表示ウィンドウ2450は、選択されたオブジェクトのみを、オブジェクトリスト2440内で順序付けされたように表示する。しかし、この順序は、どのフィールドが優先されるかに応じて変わる可能性がある。例えば、オブジェクトリストを、タイトルによって、または日付によって、または重要性レベルによって順序付けすることができる。他の順序付けオプションもまた使用可能にすることができる。選択されたオブジェクトを表示ウィンドウ2450内で、調整可能な速度で「再生」することができる。
図25は、オブジェクトビューア表示ウィンドウ2520内の別の表示のために、期間2500を時間ベースナビゲーションバー2510に沿って選択することによって、オブジェクトの選択を行うこともできることを明示する。
図26および27は、図25で選択されたオブジェクトの表示のわずかな変形形態を表す。図26では、タイムラインヘッダ2600における範囲の選択が行われる。デフォルトで、タイムラインヘッダ2600を時間範囲ズーミングツールにすることができる。実際には、例えば、ユーザは、マウスをタイムライン上でドラッグすることによって時間範囲を選択し、マウスボタンがリリースされる場合、ビューが、ラインの開始および終了時間によって測定された時間範囲に変わる。CTRL(または他の割り当てられた)キーがこのオペレーション中に押し下げられる場合、すべての現在可視のバンドにおける選択された時間範囲内のすべてのオブジェクトが選択される。このアクションは次いで、2700に示すようにオブジェクトが別のウィンドウ内で表示される結果となる場合がある。このビヘイビアは、所与の時間範囲内のすべてのオブジェクトへのアクセスが、どの特定のバンド内でそれらのオブジェクトが参照されるかにかかわらず、表示されることを可能にする。
図27では、オブジェクト2710のレイアウトを望むように変更して、一度表示されたオブジェクトの数を修正することができる。ウィンドウ2700内のスペースが制限されており、オブジェクト2710のすべてが一度に表示されるので、最も関連のあるデータのみをオブジェクト毎に示すことができる。ユーザまたはシステムは、表示スペースが制限される場合、何が最も関連のあるデータとして適格であるかを決定し、様々な種類のメタデータを重要性に関してランク付けすることができる。
ここで図28を見ると、関連付けられたオブジェクトを発見すること、および、時間ベースユーザインターフェースを使用したこれらのオブジェクトの表示および管理を実施する、システム2800のブロック図が例示される。システム2800は、上記の図1のシステム100(または、図2の200、図5の500)に類似している。しかし、システム2800には発見コンポーネント2810が含まれ、発見コンポーネント2810は、提供された発見語に従ってオブジェクトをアノテーション付きデータストア2820から探し出し、次いでこれらのオブジェクトを、新しく完全に操作可能なバンド内で表示する。具体的には、発見コンポーネントは、データストア内に格納されたオブジェクトのメタデータを調べ、発見語にマッチするメタデータを有するオブジェクトを抽出する。図29および30には、発見オペレーションを明示する画面イメージが含まれる。
図29から開始すると、例示的発見ウィンドウ2900が表示される。ウィンドウ2900で見るとわかるように、ユーザは、発見語に加えて、少なくとも1つの他の発見パラメータを選択して、自分の所望の結果を得ることができる。図30は、画面上に導入された、「検索結果」という名前の新しいバンド3000を示す。発見コンポーネントによって発見されたオブジェクトはバンド内で、それに関連付けられた時間パラメータに従って配列される。バンドのいずれかおよびそれらの各オブジェクトのように、このバンドおよび/またはそのオブジェクトもまた、修正、保存(より説明的な名前と共に)、移動、削除および/または操作が、ユーザによって望まれるように、いかなる他の方法においても可能である。さらに、バンド内のオブジェクトは、それと共にそれらのオブジェクトを関連付けるか、または維持することができる他のバンド内で割り当てられたプロパティと同じプロパティを保持する。例えば、可視性プロパティは実施のままである。したがって、いくつかのオブジェクト3010を、検索結果バンド内でさえ圧縮することができる。最後に、発見語に関係する追加のメタデータを、例えば、発見オペレーションの一部である結果として、各オブジェクトにアノテーション付けすることができる。
図31に進むと、少なくとも図1のシステム100に(また、図2の200、図5の500にも)類似しているが、フィルタコンポーネント3110が組み込まれているシステム3100のブロック図が例示される。フィルタコンポーネント3110は、望まれないオブジェクトまたはバンドを現在画面上にあるビューから除去することができる。例えば、バンドの高密度にポピュレートされた領域内で、ユーザは写真およびウェブページリンクよりもドキュメントを見ることのみに関心を有する場合がある。代替として、または加えて、ユーザは、食品、パーティまたは車など、ある主題に関係するオブジェクトのみを見ることを望む場合がある。いずれの場合も、フィルタコンポーネント3110は、望まれないオブジェクトをフィルタリングして取り除いて、望まれたオブジェクトのみをユーザにとって可視にしておく。各バンドはそれ自体の「パーソナル」フィルタを、図32に示すようなバンドに特有のキーワードと共に有することができる。全体として、フィルタの使用はバンドおよび/またはオブジェクトのブラウジングエクスペリエンスを大幅に向上させ、ユーザのエクスペリエンスまたは自分のオブジェクトとの対話をより有意味にすることができる。
図32は、バンドをまた、古典的な「ツリービュー」編成3200に隣接して表示された代替ユーザインターフェースにして、同時の二重ビューをオブジェクトのグループに提供することもできることを、さらに明示する。オブジェクトを、アルファベット順にツリーコントロール(それらのストレージ階層を表現する)内で配列された状態で見ることができ、このツリーコントロールの隣に時間ベースの「バンド」レイアウトがある。具体的には、各バンドは少なくとも部分的には時間パラメータに従って編成されるが、より従来のツリービュー構造で視覚化することができるある階層編成をも維持する。例えば、バンド名は1次ノードを表現することができ、1次ノードから下に枝分かれするいかなる数のサブノードをもポピュレートすることができる。したがって、ユーザはオブジェクトをバンド内で、および、複数のバンドにわたって、例えば、時間および/または重要性に基づいた関連付けおよび関係に従って表示することができ、いかなる時間にも、その代わりにフォルダ−サブフォルダビュー内で編成された同じオブジェクトを表示することもでき、各フォルダまたはサブフォルダ内で維持されたオブジェクトには実質的により少ないコンテキストが与えられる。
図33は、従来のツリー構造3300から、図1〜32で上述したような、より動的な、よりインタラクティブな、より情報的な時間ベースバンド構造3310への強力な変換の概略的表現を提供する。この概略的表現は、いずれかの特定のフォルダ3320内に含まれたオブジェクトが、このフォルダが開かれない限り、ビューから本質的に隠されるという事実を強調する。しかし、フォルダを開くことによって、このフォルダが他のフォルダに対してどこに位置するかなど、フォルダの周囲のコンテキストは失われる。また、ツリー構造はフォルダまたはサブフォルダ、および/または、内部に含まれたオブジェクトの間の関係を伝達することはできない。
それに反して、時間ベースバンド構造はメジャーノードを別々のバンド内に定義し、そのメジャーバンド(例えば、写真)内に含まれたいかなるオブジェクトも、「サブフォルダ」(例えば、ペット)内の場合でさえ、その中に含まれた他のオブジェクトに関して表示することができる。時間ベースバンド構造3310では、オブジェクトを時間パラメータによって、ならびに、同じバンド(例えば、クラスタ)内の他のオブジェクトとのそれらの密接な関係に基づいて、編成することができる。各バンド内のオブジェクトの関係または関連付けを認識することができるだけでなく、複数のバンドにわたるオブジェクトの関連付けもまた理解または発見することができる。残念ながら、従来のツリー構造だけで、このような有意味な情報を提供することはできない。したがって、ツリービューをバンドビューと同時に表示して、同じオブジェクトの「ピクチャ」を2つの異なるパースペクティブから提供することができる。ビューの一方におけるいかなる編集または変更も、他方のビューで即時に可視にすることができる。両方の同時(または、並んだ)ビューはまた、オブジェクトコンテキストを、関係付けられたオブジェクトに対して、またはタイムラインに沿って調べる間に、実際のストレージパスを視覚化するためにも有用である可能性がある。代替として、これらのビューを一方と他方の間でトグルすることができ、これは特に、一方のビューが他方のビューよりも好まれるか、または、両方が同時にユーザによって必要とされるのではない場合である。
留意すべき少数の他の特性には、バンドをユーザのプリファレンスに従ってカラーでカスタマイズすることができるという事実が含まれる。例えば、図34で表された例示的ユーザインターフェースの画面イメージは、以前の画面イメージの多数において以前に示された配色とは大変異なる配色を示す。
各バンド内および各オブジェクトで、メニューを画面上で立ち上げるか、またはポップアップすることができ、メニューはユーザに、オブジェクトまたはバンドに対して取るべきいくつかの異なるオプションまたはアクションを、そのメニューがどこでアクセスされたか(例えば、オブジェクトの上で、またはバンドスペースの上で)に応じて提供する。図35は、複数のオプションおよびアクションを有する例示的ポップアップメニュー3500を示す。このリストは網羅的ではなく、他のオプションまたはアクションもまた含まれる場合があることを理解されたい。
本発明による様々な方法をここで一連の動作を介して説明し、本発明は動作の順序によって限定されず、これはいくつかの動作が、本発明によれば、本明細書に示し、説明された動作とは異なる順序で、および/または、他の動作と同時に起こる可能性があるからであることを理解されたい。例えば、ある方法を代替として、状態図においてなど、一連の相互に関係する状態またはイベントとして表現することができることは、当業者には理解されよう。また、例示の動作のすべてが、本発明による方法を実施するために必要とされるとは限らない場合がある。
ここで図36を参照すると、少なくとも部分的には時間パラメータに基づいた複数のオブジェクトの間の管理およびナビゲートを実施する、例示的プロセス3600の流れ図がある。これらのオブジェクトを定義可能バンドに、例えば主題に基づいて編成することができる。画面上でユーザに表示されるようなオブジェクトを、対応するファイルまたはドキュメントのASCIIサムネールにすることができることを想起されたい。これらのサムネールを動作可能および動的にすることができ、したがって、オブジェクトの状態が修正またはアップデートにより変化する場合、サムネールは変化することができる。
加えて、ユーザは各ファイルのコンテンツを、サムネールを選択および/またはクリックすることによって、修正することができる。すなわち、ユーザはテキストまたはコメントをファイルに直接アノテーション付けまたは追加することができ、実際に別のアプリケーションを開いてそれを行う必要はない。例えば、ワードプロセッシングプログラムを開き、次いでそこからドキュメントにアクセスすることなく、ワードプロセッシングドキュメントをアップデートすることができる。むしろ、ユーザは単にカーソルをドキュメント上の関連のある行またはフィールドに移動させ、新しいデータをドキュメントに入力することを開始することができる。さらに、いかなる修正を保存することもでき、いくつかの異なるアプリケーションとバンドの間でジャンプする必要性が軽減される。このように、ファイル、ドキュメント、写真、ウェブページなどの管理および表示によるユーザの効率および全体のエクスペリエンスを、大幅に向上させることができる。
プロセス3600は、3610で、1つまたは複数のバンドを関連のあるオブジェクトによりポピュレートすることを含む。これらのオブジェクトには、ドキュメント、レポート、ピクチャ、ショー/プログラム、サウンドまたはオーディオ、ウェブページ、ハイパーリンク、音楽などのようなアイテムが含まれる可能性がある。3620で、オブジェクトを各バンド内で、各オブジェクトに関連付けられた日付または時刻など、時間パラメータに基づいて編成することができる。各オブジェクトについての時間パラメータを、オブジェクトのメタデータから抽出するか、またはユーザによって明示的に入力することができる。
3630で、オブジェクトおよび/またはバンドを、時間ベースナビゲーションバーを使用してブラウズすることができる。時間ベースナビゲーションバーは、時間のどの範囲が現在画面上で表示されているかを実施する。ユーザは、ナビゲーションバーに沿ってポインティングデバイスを使用してスクロールして、例えば、クリック、ホールドおよびスクロールすることによって、異なる時間範囲にナビゲートすることができる。加えて、ユーザは関連のある方向に(例えば、右側または左側へ)いずれかのバンド上でポインティングデバイスを移動させることによって、異なる時間範囲にナビゲートすることができる。時間範囲が画面上で変化する場合、バンドのビューもそのように変化して、現在の時間範囲に合わせる。想像できるように、バンドの内外、および、タイムラインナビゲーションバーに沿った様々な期間を通じた移動は、むしろ流動的であり、実際には楽である。
ここで図37を参照すると、いずれかの数のバンドにカテゴリ化されたオブジェクトの管理およびナビゲーションを実施する、例示的プロセス3700の流れ図が例示される。いずれかの期間にわたって得られた、または収集されたファイル、写真および他のドキュメントなどのオブジェクト(例えば、プロフェッショナルまたはパーソナルオブジェクト)を管理する場合、各オブジェクトに関連付けられたメタデータは、オブジェクトのソート、オブジェクトの発見、オブジェクトのグループ化、および/または、オブジェクトの間の関連付けの発見など、効率を高めるために重要となる可能性がある。したがって、プロセス3700によれば、3710で、オブジェクトがその中に位置するバンドの名前、時間パラメータ(例えば、時刻および/または日付)、および他のユーザ入力などのメタデータにより、オブジェクトにアノテーション付けすることができる。例えば、ユーザはオブジェクトの特定の主題を識別し、それに応じてオブジェクトにアノテーション付けすることができる。いずれか1つのオブジェクトは複数のバンド内に位置することができ、したがって、1つのバンド内のオブジェクトまたはそのメタデータに行われた修正またはアップデートを、オブジェクトが別のバンド内で表示される場合に反映させることもできる。要約すれば、1つのオブジェクトの複数のコピーは本質的に互いにリンクされる。アノテーションを、テキスト、ペンまたは音声を介して作成することができる。
加えて、3720で、重要性の値またはレベルをオブジェクト毎に設定することができる。画面スペースが制限され、オブジェクトがバンドの高密度にポピュレートされた領域内にある場合、重要性レベルを、オブジェクトの可視性の程度を指示するために使用されるメタデータの別の形態にすることができる。例えば、バンド内で表示可能なスペースが、おそらくは現在のズームレベルまたは部分的にのみ展開されたバンドのために、数十または数百のオブジェクトにより輻輳されることを想像されたい。使用可能な表示スペースが制限されるので、より重要なオブジェクトを選択し、したがってユーザにとって可視にすることができる。より重要でないと見なされたオブジェクトを圧縮することができるが、ビューから完全に隠されるのではない。アイコンまたはシンボルを使用して、Q個のオブジェクト(例えば、1または5など)がバンド内で関連のある時間または日付で存在することを指示することができる。これらの圧縮されたオブジェクトを表示するために、ユーザは単に、オブジェクトを示すために十分なスペースが使用可能になるまで(例えば、オブジェクトの重要性に基づいて)さらにズームインすることができ、または、アイコンを直接クリックすることができる。
いくつかの場合、いくつかのオブジェクトは密接に関係している可能性があるので、ユーザはこれらをバンド内でサブグループにクラスタリングすることを望む可能性がある。このプロセスをまた、自動化されるが高性能の方法で、人工知能および/またはいずれかの数の推論スキームを使用して、これを行うように設定することもできる。よって、3730で、密接に関係付けられたオブジェクトをクラスタリングし、オプショナルでラベル付けすることができる。各クラスタにも、重要性のレベルまたは値を割り当てることができる。バンドが圧縮され、別個のオブジェクトを見ることができない場合でも、クラスタにより、クラスタラベルは可視のままであることが可能である。複数のラベル付きクラスタを、近いかまたは同じ時間で発見することができることは実現可能であるので、より高い優先順位を有するラベルまたはクラスタは、より低い優先順位を有するラベルまたはクラスタの上に重なることができる。クラスタラベルはまた、透過的な方法で他のオブジェクトの上に重なり、オブジェクトおよびラベルの少なくとも一部がなお認識可能および認められるようにすることもできる。最後に、3740で、時間ベースナビゲーションバー(例えば、タイムラインツール)を使用することによって、オブジェクトおよび/またはバンドをもう一度ブラウズすることができる。
ここで図38を見ると、本発明の一態様による、例示的バンドナビゲーションプロセス3800の流れ図が示される。バンドナビゲーションプロセス3800は、バンドを開く(展開する)または閉じる(圧縮する)ようなオペレーションを含む。3810で、ポインティングデバイスを使用して、ユーザは時間バーをバンド内で上方への動きによりグラブして、バンド全体(例えば、上方および下方)を開くことができる。代替として、3820で、ユーザはバンドの上方部分のみを開くことを望む場合がある。そのようにするため、ユーザは上方部分のエリアをクリックして上にドラッグすることができる。下方部分(バーの下)はそのままで、影響を受けないままである。
他方では、ユーザは、バンドの下方部分のみを開くことを望む場合がある。したがって、3830で、下方部分のいずれかのエリアをクリックして下にドラッグすることによって、下方部分を展開することができる。この場合も、上方部分はそのままで、影響を受けないままである。3840で、あるユーザは、ディスプレイ上に位置する他のナビゲーションボタンまたはツールを使用して、バンドを展開もしくは圧縮し、またはそうでない場合はナビゲートすることを望む場合がある(3840)。
バンドをそれらのロケーションに固定して、ユーザがバンド内をスクロールする(例えば、垂直にスクロールして、異なるバンドがバンドのスタックの最上部に現れる可能性がある)場合、バンドが影響を受けないようにすることもできる。代替として、しかし、ユーザはバンドを、おそらくは他のいずれかのバンドから離れて、ディスプレイ上の異なるロケーションに移動させることを望む場合がある。これは部分的には、バンドをクリックし、ホールドし、次いでその所望のロケーションにドラッグまたはスロー(ジェスチャー)すること(3850)、および/または、新しいウィンドウを作成してバンドを表示およびナビゲートすることによって、実施することができる。
ここで図39を参照すると、本発明の一態様による、例示的オブジェクト選択およびナビゲーションプロセス3900の流れ図が示される。プロセス3900は、バンド内で維持されたオブジェクトのナビゲートおよび管理を実施するために使用するべき様々な技術を含む。3910で、バンドを展開して、少なくとも1つのオブジェクトを露呈し、可視にすることができる。オブジェクトのクラスタが圧縮され、ラベルのみが可視である場合、ユーザはラベルをクリックして、ズームインアクションをクラスタ上で実施することができる(3920)。
ある時間に、ユーザは、関心のある1つまたは複数のオブジェクトをはるかにより詳細に表示すること、または、他のオペレーションをオブジェクトにおいて実行することを望む場合がある。1つまたは複数のオブジェクトを選択するために、ユーザは所望のオブジェクトを強調表示し、次いで、オブジェクトの周囲の強調表示されたボックスをクリックすることができる。結果として、選択されたオブジェクトを別のウィンドウ内で表示することができる。別のウィンドウ内に現れるオブジェクトはまた、特定のオブジェクトに関係付けられた他のオブジェクト、ならびに、各選択されたオブジェクトに関連付けられた最も関連のあるメタデータ(例えば、名前、ファイルサイズ、パス名など)など、追加の情報を表示することもできる。ユーザにはまた、選択されたオブジェクトをムービーまたはスライドショーとして表示するためのオプションも与えることができ、ショーの速度をユーザによって調節することができる。
図に示されないが、他のナビゲーション技術を使用して、オブジェクト、特にユーザにとって関心のあるオブジェクトの可視性を向上または最適化することができる。例えば、各バンドは少なくとも1つのフィルタを使用することができる。決定されたセットのキーワードまたはメタデータ語を使用することによって、ユーザは、例えば、オブジェクトのタイプによって、またはオブジェクトの主題によって、ビューからオブジェクトをフィルタリングして除くことができる。これは、関心のあるオブジェクトを表示するために使用可能なスペースを増し、バンド内の輻輳またはバンドの雑然としたビューを軽減することができる。ある場合には、関心のあるオブジェクトはいくつかのバンドの間で分散または離散される場合がある。ユーザはこれらのオブジェクトを、発見コマンドを利用することによって探し出すことができる。対応する結果を新しいバンド内で視覚化することができる。このバンドは、他のいかなるバンドとも同様に、保存、移動および/または削除することができる。
ここで図40を見ると、本発明の一態様による、オブジェクトおよび/またはバンドに関連して使用することができる、例示的時間ベースナビゲーションプロセス4000の流れ図が例示される。プロセス400は、4010で、時間ベースナビゲーションバーのために、その中でバンドおよびオブジェクトを表示するための時間パラメータ(例えば、年間、年、月、週、日、時など)を選択することを含む。バーのロケーションは変わる場合があるが、1つのスキームでは、バーはバンドのスタックの上に位置し、「時間の開始」(例えば、人の誕生、または他の重要な開始点)で開始し、次いで、ほぼ無限に将来に継続することができる。したがって、オブジェクトを、現在からさかのぼる、ならびに、将来の時間範囲で発見することができる。また、あるレベルの有意味なコンテキストは、オブジェクトの時期または発生の時間にかかわらず、バンド内のオブジェクトの保持の間中に維持される。他のオブジェクトまたはデータ管理システムまたは技術は、この豊富なナビゲート可能環境をサポートすることができず、またはサポートしない。
時間パラメータが選択された後、ユーザは、1つまたは複数のバンドを展開または圧縮し、ナビゲーションバーを左側または右側へ移動させて、異なる時間範囲およびそれらの時間範囲内に入る異なるオブジェクトを表示することによって、バンド内のオブジェクトを表示およびブラウズすることができる(4020)。最後に、時間範囲の間で(例えば、年から月へ、または年から週へ)ズームするために、ユーザは以下のうち少なくとも1つを実行することができ、すなわち、ホィール使用可能マウスを使用することであって、マウスホィールを上に移動させて特定の時間範囲にズームインし、もしくは下に移動させて、ズームアウトして画面上でより大きい時間範囲を見ることができること、または、ユーザが、画面上に位置する様々なズームナビゲーションボタンを使用して特定のビューを選択すること(例えば、時、日、週、月、年、または年間ビュー)である(4030)。
本発明の様々な態様についての追加の状況を提供するために、図41および以下の考察は、本発明の様々な態様を実施することができる適切なオペレーティング環境4110の簡単な全体的説明を提供するように意図される。本発明を一般に、プログラムモジュールなど、1つまたは複数のコンピュータまたは他のデバイスによって実行されるコンピュータ実行可能命令との関連で説明するが、本発明をまた、他のプログラムモジュールと組み合わせて、および/または、ハードウェアおよびソフトウェアの組合せとして実施することもできることは、当業者には理解されよう。
しかし、一般に、プログラムモジュールには、ルーチン、プログラム、オブジェクト、コンポーネント、データ構造などが含まれ、これらは特定のタスクを実行するか、または特定のデータ型を実装する。オペレーティング環境4110は適切なオペレーティング環境の一実施例でしかなく、本発明の使用または機能性の範囲についてのいかなる限定をも示唆するように意図されない。本発明と共に使用するために適切である可能性のある他の周知のコンピュータシステム、環境、および/または構成には、それに限定されないが、パーソナルコンピュータ、ハンドヘルドまたはラップトップデバイス、マルチプロセッサシステム、マイクロプロセッサベースシステム、プログラマブルコンシューマエレクトロニクス、ネットワークPC、ミニコンピュータ、メインフレームコンピュータ、上記のシステムまたはデバイスを含む分散コンピューティング環境などが含まれる。
図41を参照すると、本発明の様々な態様を実施するための例示的環境4110は、コンピュータ4112を含む。コンピュータ4112は、処理装置4114、システムメモリ4116、およびシステムバス4118を含む。システムバス4118は、それに限定されないが、システムメモリ4116を含むシステムコンポーネントを処理装置4114に結合する。処理装置4114は様々な使用可能なプロセッサのいずれにすることもできる。デュアルマイクロプロセッサおよび他のマルチプロセッサアーキテクチャもまた、処理装置4114として使用することができる。
システムバス4118を、いくつかのタイプのバス構造のいずれにすることもでき、これらのバス構造には、いずれかの様々な使用可能なバスアーキテクチャを使用するメモリバスまたはメモリコントローラ、周辺バスまたは外部バス、および/または、ローカルバスが含まれ、これらのバスアーキテクチャには、それに限定されないが、11ビットバス、業界標準アーキテクチャ(ISA)、マイクロチャネルアーキテクチャ(MCA)、拡張ISA(EISA)、Intelligent Drive Electronics(IDE)、VESAローカルバス(VLB)、Peripheral Component Interconnect(PCI)、ユニバーサルシリアルバス(USB)、Advanced Graphics Port(AGP)、Personal Computer Memory Card International Associationバス(PCMCIA)、および、Small Computer Systems Interface(SCSI)が含まれる。
システムメモリ4116は、揮発性メモリ4120および不揮発性メモリ4122を含む。基本入出力システム(BIOS)は、起動中など、コンピュータ4112内の複数の要素の間で情報を転送するための基本ルーチンを含み、不揮発性メモリ4122に格納される。例示として、限定ではなく、不揮発性メモリ4122には、読み取り専用メモリ(ROM)、プログラマブルROM(PROM)、電気的プログラマブルROM(EPROM)、電気的消去可能ROM(EEPROM)、またはフラッシュメモリが含まれる可能性がある。揮発性メモリ4120には、外部キャッシュメモリの機能を果たすランダムアクセスメモリ(RAM)が含まれる。例示として、限定ではなく、RAMは、シンクロナスRAM(SRAM)、ダイナミックRAM(DRAM)、シンクロナスDRAM(SDRAM)、ダブルデータレートSDRAM(DDR SDRAM)、拡張SDRAM(ESDRAM)、シンクリンクDRAM(SLDRAM)、および、direct Rambus RAM(DRRAM)など、多数の形態で使用可能である。
コンピュータ4112はまた、リムーバブル/非リムーバブル、揮発性/不揮発性のコンピュータストレージメディアをも含む。図41は、例えば、ディスクストレージ4124を例示する。ディスクストレージ4124には、それに限定されないが、磁気ディスクドライブ、フロッピー(登録商標)ディスクドライブ、テープドライブ、Jazドライブ、Zipドライブ、LS−100ドライブ、フラッシュメモリカード、またはメモリスティックが含まれる。加えて、ディスクストレージ4124はストレージメディアを他のストレージメディアとは別々に、または、他のストレージメディアと組み合わせて含むことができ、他のストレージメディアには、それに限定されないが、コンパクトディスクROMデバイス(CD−ROM)、書き込み可能CDドライブ(CD−Rドライブ)、再書きこみ可能CDドライブ(CD−RWドライブ)、またはデジタル多用途ディスクROMドライブ(DVD−ROM)など、光ディスクドライブが含まれる。ディスクストレージデバイス4124をシステムバス4118に接続することを実施するために、インターフェース4126など、リムーバブルまたは非リムーバブルインターフェースが通常は使用される。
図41は、ユーザと、適切なオペレーティング環境4110で説明された基本コンピュータリソースの間の、仲介の機能を果たすソフトウェアを説明することを理解されたい。このようなソフトウェアにはオペレーティングシステム4128が含まれる。オペレーティングシステム4128はディスクストレージ4124上に格納することができ、コンピュータシステム4112のリソースをコントロールおよび割り振るように動作する。システムアプリケーション4130は、オペレーティングシステム4128による、システムメモリ4116内またはディスクストレージ4124上のいずれかに格納されたプログラムモジュール4132およびプログラムデータ4134を通じたリソースの管理を利用する。本発明を様々なオペレーティングシステムまたはオペレーティングシステムの組合せと共に実施することができることを理解されたい。
ユーザはコマンドまたは情報をコンピュータ4112へ、入力デバイス4136を通じて入力する。入力デバイス4136には、それに限定されないが、マウスなどのポインティングデバイス、トラックボール、スタイラス、タッチパッド、キーボード、マイクロフォン、ジョイスティック、ゲームパッド、衛星放送受信アンテナ、スキャナ、TVチューナ、デジタルカメラ、デジタルビデオカメラ、ウェブカメラなどが含まれる。これらおよび他の入力デバイスは処理装置4114へ、システムバス4118を通じて、インターフェースポート4138を介して接続する。インターフェースポート4138には、例えば、シリアルポート、パラレルポート、ゲームポート、ユニバーサルシリアルバス(USB)が含まれる。出力デバイス4140は、入力デバイス4136と同じタイプのポートのいくつかを使用する。したがって、例えば、USBポートを使用して入力をコンピュータ4112に提供し、情報をコンピュータ4112から出力デバイス4140に出力することができる。出力アダプタ4142は、他の出力デバイス4140の中でも、特殊なアダプタを必要とするモニタ、スピーカおよびプリンタのようないくつかの出力デバイス4140があることを例示するために提供される。出力アダプタ4142には、例示として、限定ではなく、出力デバイス4140とシステムバス4118の間の接続の手段を提供するビデオおよびサウンドカードが含まれる。リモートコンピュータ4144など、他のデバイスおよび/またはデバイスのシステムは、入力および出力機能を提供することに留意されたい。
コンピュータ4112はネットワーク環境において、リモートコンピュータ4144など、1つまたは複数のリモートコンピュータへの論理接続を使用して動作することができる。リモートコンピュータ4144は、パーソナルコンピュータ、サーバ、ルータ、ネットワークPC、ワークステーション、マイクロプロセッサベースの機器、ピアデバイスまたは他の共通ネットワークノードなどにすることができ、通常は、コンピュータ4112に関連して上述した要素の多数またはすべてを含む。簡潔にするため、メモリストレージデバイス4146のみがリモートコンピュータ4144と共に例示される。リモートコンピュータ4144はコンピュータ4112に、ネットワークインターフェース4148を通じて論理的に接続され、次いで通信接続4150を介して物理的に接続される。ネットワークインターフェース4148は、ローカルエリアネットワーク(LAN)およびワイドエリアネットワーク(WAN)など、通信ネットワークを包含する。LAN技術には、ファイバー分散データインターフェース(FDDI)、Copper Distributed Data Interface(CDDI)、イーサネット(登録商標)/IEEE1102.3、トークンリング/IEEE1102.5などが含まれる。WAN技術には、それに限定されないが、point−to−pointリンク、総合デジタルサービス通信網(ISDN)およびその変形形態のような回線交換網、パケット交換網、およびデジタル加入者線(DSL)が含まれる。
通信接続4150は、ネットワークインターフェース4148をバス4118に接続するために使用されたハードウェア/ソフトウェアを指す。通信接続4150を例示的に明確にするためにコンピュータ4112の内部に図示するが、コンピュータ4112の外部にすることもできる。ネットワークインターフェース4148への接続のために必要なハードウェア/ソフトウェアには、例示のためにのみ、通常の電話グレードモデム、ケーブルモデムおよびDSLモデムを含むモデム、ISDNアダプタ、およびイーサネット(登録商標)カードなど、内部および外部技術が含まれる。
上述された物には本発明の実施例が含まれる。言うまでもなく、本発明を説明するためのコンポーネントまたは方法のあらゆる考えられる組合せを説明することは可能ではないが、本発明の多数のさらなる組合せおよび置換が可能であることは、当業者には理解されよう。したがって、本発明は、付属の特許請求の範囲の精神および範囲内に入るこのようなすべての変更、修正および変形形態を包含するように意図される。さらに、「含む」という語が詳細な説明または特許請求の範囲において使用される範囲で、このような語は、「備える」という用語が、特許請求の範囲内の前後を接続させる語として使用される場合に解釈される場合の「備える」に類似した形で、包含的であるように意図される。
本発明の一態様によるオブジェクト管理およびナビゲーションシステムのブロック図である。 本発明のもう1つの態様によるオブジェクト管理およびナビゲーションシステムのブロック図である。 本発明のさらにもう1つの態様による、例示的オブジェクト管理およびナビゲーションシステムにおけるオブジェクトの編成を例示するブロック図である。 本発明のなおさらにもう1つの態様による、図3からの結果として生じるオブジェクトの編成を明示するブロック図である。 本発明の一態様によるオブジェクト管理およびナビゲーションシステムのブロック図である。 本発明の一態様によるx、yおよびz軸の例示的定義を例示する図である。 本発明の一態様による、図5からのオブジェクト密度追跡コンポーネントのオペレーションを明示するブロック図である。 本発明の一態様による、少なくとも1つのバンドを開くことを示す概略図である。 本発明の一態様による、少なくとも1つのバンドを開くことを示す概略図である。 本発明の一態様による、少なくとも1つのバンドを開くことを示す概略図である。 本発明の一態様による、少なくとも1つのバンドを開くことに含まれたシーケンスを例示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、少なくとも1つのバンドを開くことに含まれたシーケンスを例示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、少なくとも1つのバンドを開くことに含まれたシーケンスを例示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、少なくとも1つのバンドを開くことに含まれたシーケンスを例示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、バンドのズームインを例示する例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、図1、2および5のオブジェクトナビゲーションおよび管理システムに関連して使用することができる、オブジェクト管理システムのブロック図である。 本発明の一態様による、比較的圧縮されるバンドにおける複数のクラスタラベルを示す、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、クラスタラベルをクリックすること、および次いでそのビューからズームアウトすることを明示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、クラスタラベルをクリックすること、および次いでそのビューからズームアウトすることを明示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、オブジェクトおよび/またはクラスタラベルの透過性および重なり合いを例示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、オブジェクト選択、および、選択されたオブジェクトの表示を実施する、オブジェクトナビゲーションおよび管理システムのブロック図である。 本発明の一態様による様々なオブジェクト選択技術を明示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による様々なオブジェクト選択技術を明示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による様々なオブジェクト選択技術を明示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による様々なオブジェクト選択技術を明示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による様々なオブジェクト選択技術を明示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による様々なオブジェクト選択技術を明示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、オブジェクトの発見、および、発見されたオブジェクトの表示を実施する、オブジェクトナビゲーションおよび管理システムのブロック図である。 本発明の一態様による発見オペレーションを例示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による発見オペレーションを例示する、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様によるオブジェクトのフィルタリングを実施する、オブジェクトナビゲーションおよび管理システムのブロック図である。 本発明の一態様によるフィルタメニューおよびバンド編成を示す、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、従来のツリー構造からユニークな時間ベースバンド構造への変換を明示する概略図である。 本発明の一態様による代替配色を示す例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、いかなるオブジェクトまたはバンドレベルでも使用可能なポップアップメニューを示す、例示的ユーザインターフェースの画面イメージの図である。 本発明の一態様による、時間ベースバンド構造内に配列された複数のオブジェクトのナビゲートおよび管理を実施する、例示的方法を例示する流れ図である。 本発明の一態様による、オブジェクトのアノテーション付けおよびクラスタリングを実施する、例示的方法を例示する流れ図である。 本発明の一態様によるバンドナビゲーションを実施する例示的方法を例示する流れ図である。 本発明の一態様によるバンドナビゲーションを実施する例示的方法を例示する流れ図である。 本発明の一態様による、オブジェクトおよびバンドの時間ベースナビゲーションを実施する、例示的方法を例示する流れ図である。 本発明の様々な態様を実施するための例示的環境を例示する図である。
符号の説明
4114 処理装置
4116 システムメモリ
4118 バス
4120 揮発性
4122 不揮発性
4124 ディスクストレージ
4126 インターフェース
4128 オペレーティングシステム
4130 アプリケーション
4132 モジュール
4134 データ
4136 入力デバイス
4138 インターフェースポート
4140 出力デバイス
4142 出力アダプタ
4144 リモートコンピュータ
4146 メモリストレージ
4148 ネットワークインターフェース
4150 通信接続

Claims (20)

  1. データの視覚化を実行するシステムであって、
    1つまたは複数のオブジェクトを備えるデータストアと、
    前記オブジェクトの少なくとも1つのサブセットを前記データストアから少なくとも1つのバンドへ、少なくとも部分的には各オブジェクトの時間パラメータに基づいて編成して、前記オブジェクトを、時間ベースの方法における少なくとも1人のユーザによるビューのために使用可能にする視覚化コンポーネントと、
    前記1つまたは複数のオブジェクトを、前記少なくとも1つのバンド内に編成されるように表示する表示コンポーネントと
    を備えることを特徴とするシステム。
  2. 前記1つまたは複数のオブジェクトに、メタデータによりアノテーション付けするアノテーションコンポーネントをさらに備え、前記メタデータは、時間パラメータ、オブジェクト名、オブジェクトのパス名、オブジェクトのサイズ、および、前記オブジェクトのコンテンツに関係する情報を備えることを特徴とする請求項1に記載のシステム。
  3. 前記時間ベースの方法において、複数のバンドまたはオブジェクトのうち少なくとも1つの間のナビゲートを実施する、時間ベースナビゲーションコントロールをさらに備えることを特徴とする請求項1に記載のシステム。
  4. 表示上で前記ユーザにとっていずれか1つの時間で可視である詳細の量を調整する、ズーミングコンポーネントをさらに備えることを特徴とする請求項1に記載のシステム。
  5. 前記ズーミングコンポーネントは、前記ユーザにとって前記表示上で可視である前記詳細の量を容易に調整するための、1つまたは複数の時間ベースズームナビゲーションコントロールを備えることを特徴とする請求項4に記載のシステム。
  6. 前記ズーミングコンポーネントは、一度に少なくとも1つのバンドの展開または圧縮のうち少なくとも1つを実行することを特徴とする請求項4に記載のシステム。
  7. 各バンド内でいずれか1つの時間パラメータで編成された前記オブジェクトに関連付けられた少なくとも1つのパラメータを測定し、パラメータインジケータを前記ユーザに前記表示上で視覚化する、パラメータ追跡コンポーネントをさらに備え、前記パラメータは、サイズ、密度およびストレージロケーションを備えることを特徴とする請求項1に記載のシステム。
  8. 前記パラメータ追跡コンポーネントは、各バンド内でいずれか1つの時間パラメータで編成されたオブジェクトの数を測定し、密度インジケータを前記ユーザに各バンド内で表示する、オブジェクト密度追跡コンポーネントであることを特徴とする請求項7に記載のシステム。
  9. 前記表示上で可視のデータにわたって、その上に示された複数のバンドを介して、少なくとも1つのズームナビゲーションコントロール、少なくとも1つのバンドナビゲーションコントロール、および、少なくとも1つの時間ベースナビゲーションコントロールのうち少なくとも1つを使用することによって、前記ユーザをナビゲートするブラウジングコンポーネントをさらに備えることを特徴とする請求項1に記載のシステム。
  10. 1つまたは複数のオブジェクトを前記バンド内のビューから、部分的には1つまたは複数のフィルタ語に基づいて除去する、フィルタリングコンポーネントをさらに備えることを特徴とする請求項1に記載のシステム。
  11. 前記1つまたは複数のフィルタ語は、少なくとも部分的には、前記バンドのオブジェクトに関連付けられたメタデータに基づいて選択されることを特徴とする請求項10に記載のシステム。
  12. オブジェクト管理および視覚化の方法であって、
    少なくとも1つのデータストアを複数のオブジェクトによりポピュレートするステップと、
    前記オブジェクトの少なくとも1つのサブセットを少なくとも1つのバンドへ、少なくとも部分的には各オブジェクトの時間パラメータに基づいて編成して、前記オブジェクトを、少なくとも時間ベースの方法におけるユーザによるビューのために使用可能にすることを実施するステップと、
    1つまたは複数のオブジェクトを、前記少なくとも1つのバンド内に編成されるように表示するステップと
    を備えることを特徴とする方法。
  13. 前記オブジェクトの少なくとも1つのサブセットに、メタデータによりアノテーション付けするステップをさらに備えることを特徴とする請求項12に記載の方法。
  14. 前記時間ベースの方法において、複数のバンドまたはオブジェクトのうち少なくとも1つの間でナビゲートするステップをさらに備えることを特徴とする請求項12に記載の方法。
  15. それにおいてさらなるアクションを実行するための少なくとも1つのオブジェクトを選択するステップをさらに備えることを特徴とする請求項12に記載の方法。
  16. オブジェクトまたはバンドのうち少なくとも1つのズームインまたはズームアウトのうち少なくとも1つを行って、前記ユーザにとって可視である詳細の量を変更するステップをさらに備えることを特徴とする請求項12に記載の方法。
  17. 各バンド内でいずれか1つの時間パラメータで編成されたオブジェクトの少なくとも相対数を測定して、前記オブジェクトに関連付けられた少なくとも1つのパラメータ値を視覚化するステップをさらに備え、前記少なくとも1つのパラメータ値は、前記オブジェクトの密度、サイズおよびストレージロケーションのうち少なくとも1つを備えることを特徴とする請求項12に記載の方法。
  18. 前記オブジェクトのすべてが一度にビュー内にあるとは限らない場合、どのオブジェクトをいずれかのバンド内で次に表示するべきかを決定するステップをさらに備えることを特徴とする請求項12に記載の方法。
  19. どのオブジェクトを次に表示するべきかを決定するステップは、少なくとも部分的には、前記オブジェクトが表示面までどの程度近いかに基づき、「近い」はオブジェクトの重要性のレベルの機能であることを特徴とする請求項18に記載の方法。
  20. オブジェクト管理および視覚化のシステムであって、
    少なくとも1つのデータストアを複数のオブジェクトによりポピュレートする手段と、
    前記オブジェクトの少なくとも1つのサブセットを少なくとも1つのバンドへ、少なくとも部分的には各オブジェクトの時間パラメータに基づいて編成して、前記オブジェクトを、少なくとも時間ベースの方法におけるユーザによるビューのために使用可能にすることを実施する手段と、
    1つまたは複数のオブジェクトを、前記少なくとも1つ内に編成されるように表示する手段と、
    前記時間ベースの方法において、複数のバンドまたはオブジェクトのうち少なくとも1つの間でナビゲートする手段と、
    オブジェクトまたはバンドのうち少なくとも1つのズームインまたはズームアウトのうち少なくとも1つを行って、前記ユーザにとって可視である詳細の量を変更する手段と、
    各バンド内でいずれか1つの時間パラメータで編成されたオブジェクトの少なくとも相対数を測定して、前記オブジェクトに関連付けられた少なくとも1つのパラメータ値を視覚化する手段と
    を備え、前記少なくとも1つのパラメータ値は、前記オブジェクトの密度、サイズおよびストレージロケーションのうち少なくとも1つを備えることを特徴とするシステム。
JP2005358008A 2005-01-12 2005-12-12 データのタイムラインベースの視覚化のためのアーキテクチャおよびエンジン Active JP4936719B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/034,432 2005-01-12
US11/034,432 US7788592B2 (en) 2005-01-12 2005-01-12 Architecture and engine for time line based visualization of data

Publications (2)

Publication Number Publication Date
JP2006195970A true JP2006195970A (ja) 2006-07-27
JP4936719B2 JP4936719B2 (ja) 2012-05-23

Family

ID=36217041

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005358008A Active JP4936719B2 (ja) 2005-01-12 2005-12-12 データのタイムラインベースの視覚化のためのアーキテクチャおよびエンジン

Country Status (5)

Country Link
US (1) US7788592B2 (ja)
EP (1) EP1681639B1 (ja)
JP (1) JP4936719B2 (ja)
KR (1) KR101169093B1 (ja)
CN (1) CN1804839B (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008050649A1 (fr) * 2006-10-23 2008-05-02 Nec Corporation Système, procédé et programme de récapitulation de contenu
JP2009282607A (ja) * 2008-05-20 2009-12-03 Ricoh Co Ltd 画像閲覧装置およびプログラム
JP2012194673A (ja) * 2011-03-15 2012-10-11 Canon Inc 情報処理装置およびその制御方法およびプログラム
US8319997B2 (en) 2007-12-21 2012-11-27 Canon Kabushiki Kaisha Information processing apparatus to display information about progress of print processing, information processing method, and storage medium
JP2013524346A (ja) * 2010-03-30 2013-06-17 マイクロソフト コーポレーション 視覚的なエンターテインメントタイムライン
JP2014500558A (ja) * 2010-12-06 2014-01-09 ネットフリックス・インコーポレイテッド 遠隔制御部のためのユーザーインターフェース
CN103716452A (zh) * 2012-09-28 2014-04-09 富士施乐株式会社 显示控制设备和方法以及图像显示设备
JP2014532217A (ja) * 2011-09-21 2014-12-04 フェイスブック,インク. タイムラインインタフェースを介したソーシャルネットワーキングシステムのユーザ情報の表示
US10908765B1 (en) 2011-09-21 2021-02-02 Facebook, Inc. Displaying dynamic user interface elements in a social networking system
JP2021532472A (ja) * 2018-07-31 2021-11-25 マーベル アジア ピーティーイー、リミテッド 複数のオブジェクトタイプのためのメタデータ生成

Families Citing this family (172)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8316306B2 (en) 2001-10-15 2012-11-20 Maya-Systems Inc. Method and system for sequentially navigating axes of elements
US20060156237A1 (en) * 2005-01-12 2006-07-13 Microsoft Corporation Time line based user interface for visualization of data
US7788592B2 (en) 2005-01-12 2010-08-31 Microsoft Corporation Architecture and engine for time line based visualization of data
US7716194B2 (en) * 2005-01-12 2010-05-11 Microsoft Corporation File management system employing time line based representation of data
US7479970B2 (en) * 2005-01-12 2009-01-20 Microsoft Corporation Systems and methods that facilitate process monitoring, navigation, and parameter-based magnification
US20060190171A1 (en) * 2005-02-24 2006-08-24 John Cross GPS device and method for layered display of elements
JP4881034B2 (ja) * 2005-02-28 2012-02-22 富士フイルム株式会社 電子アルバム編集システム、電子アルバム編集方法、及び電子アルバム編集プログラム
US7714876B1 (en) * 2005-03-10 2010-05-11 Hewlett-Packard Development Company, L.P. Method and system for creating visualizations
US8527874B2 (en) * 2005-08-03 2013-09-03 Apple Inc. System and method of grouping search results using information representations
US7539673B2 (en) * 2005-08-03 2009-05-26 Novell, Inc. System and method of re-ordering search results based on prior user actions
US7707146B2 (en) * 2005-08-03 2010-04-27 Novell, Inc. System and method of searching for providing clue-based context searching
US7707284B2 (en) 2005-08-03 2010-04-27 Novell, Inc. System and method of searching for classifying user activity performed on a computer system
US8201073B2 (en) * 2005-08-15 2012-06-12 Disney Enterprises, Inc. System and method for automating the creation of customized multimedia content
US7721208B2 (en) * 2005-10-07 2010-05-18 Apple Inc. Multi-media center for computing systems
US7966577B2 (en) 2005-10-11 2011-06-21 Apple Inc. Multimedia control center
KR100725411B1 (ko) * 2006-02-06 2007-06-07 삼성전자주식회사 컨텐츠 검색을 위한 사용자 인터페이스, 사용자 인터페이스제공 방법, 및 컨텐츠 검색 장치
JP4933129B2 (ja) * 2006-04-04 2012-05-16 クラリオン株式会社 情報端末および簡略−詳細情報の表示方法
US20070271263A1 (en) * 2006-05-19 2007-11-22 Matchware A/S Displaying Data
US8869037B2 (en) 2006-06-22 2014-10-21 Linkedin Corporation Event visualization
US7831928B1 (en) * 2006-06-22 2010-11-09 Digg, Inc. Content visualization
US20080034004A1 (en) * 2006-08-04 2008-02-07 Pavel Cisler System for electronic backup
US20080126442A1 (en) * 2006-08-04 2008-05-29 Pavel Cisler Architecture for back up and/or recovery of electronic data
US9009115B2 (en) 2006-08-04 2015-04-14 Apple Inc. Restoring electronic information
US20080034019A1 (en) * 2006-08-04 2008-02-07 Pavel Cisler System for multi-device electronic backup
US7856424B2 (en) 2006-08-04 2010-12-21 Apple Inc. User interface for backup management
US8370853B2 (en) 2006-08-04 2013-02-05 Apple Inc. Event notification management
US8311988B2 (en) * 2006-08-04 2012-11-13 Apple Inc. Consistent back up of electronic information
US7853566B2 (en) * 2006-08-04 2010-12-14 Apple Inc. Navigation of electronic backups
US7860839B2 (en) 2006-08-04 2010-12-28 Apple Inc. Application-based backup-restore of electronic information
US8166415B2 (en) * 2006-08-04 2012-04-24 Apple Inc. User interface for backup management
US20080111826A1 (en) * 2006-11-14 2008-05-15 Microsoft Corporation Displaying resources using multiple visualization dimensions
US8381130B2 (en) * 2006-11-29 2013-02-19 Yahoo! Inc. Method and user interface tool for navigation through grid of scheduled items
US8544040B2 (en) 2006-12-29 2013-09-24 Google Inc. System and method for displaying multimedia events scheduling information
US8205230B2 (en) 2006-12-29 2012-06-19 Google Inc. System and method for displaying and searching multimedia events scheduling information
US20080163048A1 (en) * 2006-12-29 2008-07-03 Gossweiler Iii Richard Carl System and method for displaying multimedia events scheduling information and Corresponding search results
JP4552943B2 (ja) * 2007-01-19 2010-09-29 ソニー株式会社 年表提供方法、年表提供装置および年表提供プログラム
US8019155B2 (en) * 2007-03-26 2011-09-13 Eastman Kodak Company Digital object information via category-based histograms
US20080263449A1 (en) * 2007-04-20 2008-10-23 Microsoft Corporation Automated maintenance of pooled media content
US8799952B2 (en) * 2007-04-24 2014-08-05 Google Inc. Virtual channels
US8972875B2 (en) * 2007-04-24 2015-03-03 Google Inc. Relevance bar for content listings
US8826123B2 (en) 2007-05-25 2014-09-02 9224-5489 Quebec Inc. Timescale for presenting information
WO2008146736A1 (ja) * 2007-05-29 2008-12-04 Tokyo Electron Limited データ表示装置、データ表示方法、プログラム
US8099392B2 (en) 2007-06-08 2012-01-17 Apple Inc. Electronic backup of applications
US8745523B2 (en) 2007-06-08 2014-06-03 Apple Inc. Deletion in electronic backups
US8468136B2 (en) * 2007-06-08 2013-06-18 Apple Inc. Efficient data backup
US8307004B2 (en) 2007-06-08 2012-11-06 Apple Inc. Manipulating electronic backups
US8429425B2 (en) * 2007-06-08 2013-04-23 Apple Inc. Electronic backup and restoration of encrypted data
US8010900B2 (en) * 2007-06-08 2011-08-30 Apple Inc. User interface for electronic backup
US8725965B2 (en) * 2007-06-08 2014-05-13 Apple Inc. System setup for electronic backup
US20080307017A1 (en) 2007-06-08 2008-12-11 Apple Inc. Searching and Restoring of Backups
US8201096B2 (en) 2007-06-09 2012-06-12 Apple Inc. Browsing or searching user interfaces and other aspects
US8185839B2 (en) 2007-06-09 2012-05-22 Apple Inc. Browsing or searching user interfaces and other aspects
US8549441B2 (en) 2007-06-15 2013-10-01 Microsoft Corporation Presenting and navigating content having varying properties
CA2601154C (en) 2007-07-07 2016-09-13 Mathieu Audet Method and system for distinguising elements of information along a plurality of axes on a basis of a commonality
US20090043646A1 (en) * 2007-08-06 2009-02-12 International Business Machines Corporation System and Method for the Automated Capture and Clustering of User Activities
US9084025B1 (en) 2007-08-06 2015-07-14 Google Inc. System and method for displaying both multimedia events search results and internet search results
US8601392B2 (en) * 2007-08-22 2013-12-03 9224-5489 Quebec Inc. Timeline for presenting information
JP5149724B2 (ja) * 2007-09-07 2013-02-20 キヤノン株式会社 画像管理装置及びその制御方法、記憶媒体
US8191005B2 (en) * 2007-09-27 2012-05-29 Rockwell Automation Technologies, Inc. Dynamically generating visualizations in industrial automation environment as a function of context and state information
US8677262B2 (en) * 2007-09-27 2014-03-18 Rockwell Automation Technologies, Inc. Presentation of industrial automation data as a function of relevance to user
US20090094188A1 (en) * 2007-10-03 2009-04-09 Edward Covannon Facilitating identification of an object recorded in digital content records
US8347231B2 (en) * 2007-10-08 2013-01-01 At&T Intellectual Property I, L.P. Methods, systems, and computer program products for displaying tag words for selection by users engaged in social tagging of content
JP2009117973A (ja) * 2007-11-02 2009-05-28 Fujifilm Corp 再生装置および再生方法
JP5123690B2 (ja) * 2008-02-27 2013-01-23 キヤノン株式会社 画面データ処理装置、画面データ処理方法、及びコンピュータプログラム
US8739050B2 (en) 2008-03-07 2014-05-27 9224-5489 Quebec Inc. Documents discrimination system and method thereof
US9400597B2 (en) * 2008-07-23 2016-07-26 Microsoft Technology Licensing, Llc Presenting dynamic grids
US8751921B2 (en) * 2008-07-24 2014-06-10 Microsoft Corporation Presenting annotations in hierarchical manner
JP4636141B2 (ja) * 2008-08-28 2011-02-23 ソニー株式会社 情報処理装置および方法、並びにプログラム
US8607155B2 (en) 2008-09-12 2013-12-10 9224-5489 Quebec Inc. Method of managing groups of arrays of documents
KR101521218B1 (ko) * 2008-11-04 2015-05-18 엘지전자 주식회사 휴대단말기, 및 휴대단말기의 3축 정보 제어방법
US8176096B2 (en) * 2008-12-18 2012-05-08 Microsoft Corporation Data visualization interactivity architecture
JP5419486B2 (ja) * 2009-02-10 2014-02-19 キヤノン株式会社 データ処理装置、データ処理方法、およびプログラム
US8555169B2 (en) * 2009-04-30 2013-10-08 Apple Inc. Media clip auditioning used to evaluate uncommitted media content
US8881013B2 (en) * 2009-04-30 2014-11-04 Apple Inc. Tool for tracking versions of media sections in a composite presentation
US8769421B2 (en) * 2009-04-30 2014-07-01 Apple Inc. Graphical user interface for a media-editing application with a segmented timeline
US8359537B2 (en) * 2009-04-30 2013-01-22 Apple Inc. Tool for navigating a composite presentation
US9564173B2 (en) * 2009-04-30 2017-02-07 Apple Inc. Media editing application for auditioning different types of media clips
US8522144B2 (en) * 2009-04-30 2013-08-27 Apple Inc. Media editing application with candidate clip management
US8856655B2 (en) * 2009-05-01 2014-10-07 Apple Inc. Media editing application with capability to focus on graphical composite elements in a media compositing area
US8612858B2 (en) * 2009-05-01 2013-12-17 Apple Inc. Condensing graphical representations of media clips in a composite display area of a media-editing application
US9466050B2 (en) * 2009-05-22 2016-10-11 EVDense Holding Company, Inc. System and method for interactive visual representation of items along a timeline
KR20110000054A (ko) * 2009-06-26 2011-01-03 삼성전자주식회사 라이프로그 기반의 랜드마크를 출력하는 장치 및 방법
US8423088B2 (en) * 2009-07-22 2013-04-16 Microsoft Corporation Aggregated, interactive communication timeline
JP5617207B2 (ja) * 2009-08-31 2014-11-05 ソニー株式会社 ユーザへのコンテンツ推薦方法、ユーザへのコンテンツ推薦システム及びコンピュータ読取可能な記録媒体
CN102426841A (zh) * 2009-10-31 2012-04-25 华为技术有限公司 定位播放视频的装置、方法及系统
KR101631912B1 (ko) * 2009-11-03 2016-06-20 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
EP2354974A1 (en) * 2010-02-09 2011-08-10 ExB Asset Management GmbH Association of information entities along a time line
US8331760B2 (en) * 2010-06-02 2012-12-11 Microsoft Corporation Adaptive video zoom
US20110307815A1 (en) * 2010-06-11 2011-12-15 Mygobs Oy User Interface and Method for Collecting Preference Data Graphically
US8484569B2 (en) * 2010-06-30 2013-07-09 International Business Machines Corporation Saving and restoring collaborative applications in context
EP2402867B1 (en) 2010-07-02 2018-08-22 Accenture Global Services Limited A computer-implemented method, a computer program product and a computer system for image processing
US20120030550A1 (en) * 2010-07-28 2012-02-02 Chin Ai Method for editing multimedia
US8634662B2 (en) 2010-08-25 2014-01-21 Apple Inc. Detecting recurring events in consumer image collections
US20120113120A1 (en) * 2010-11-05 2012-05-10 Nokia Corporation Method and apparatus for generating a visual representation of information
JP2012128662A (ja) * 2010-12-15 2012-07-05 Samsung Electronics Co Ltd 表示制御装置、プログラムおよび表示制御方法
US9881257B2 (en) * 2010-12-29 2018-01-30 Tickr, Inc. Multi-dimensional visualization of temporal information
US8943026B2 (en) 2011-01-14 2015-01-27 Apple Inc. Visual representation of a local backup
US8984029B2 (en) 2011-01-14 2015-03-17 Apple Inc. File system management
US9122374B2 (en) 2011-02-01 2015-09-01 9224-5489 Quebec Inc. Expandable and collapsible arrays of documents
US9824159B2 (en) 2011-03-17 2017-11-21 Red Hat, Inc. Assigning labels to desktop items
US9588644B2 (en) 2011-03-17 2017-03-07 Red Hat, Inc. Time-based organization of desktop items
US9286299B2 (en) 2011-03-17 2016-03-15 Red Hat, Inc. Backup of data items
US8533594B2 (en) * 2011-04-19 2013-09-10 Autodesk, Inc. Hierarchical display and navigation of document revision histories
US8533593B2 (en) * 2011-04-19 2013-09-10 Autodesk, Inc Hierarchical display and navigation of document revision histories
US8533595B2 (en) * 2011-04-19 2013-09-10 Autodesk, Inc Hierarchical display and navigation of document revision histories
US8874525B2 (en) 2011-04-19 2014-10-28 Autodesk, Inc. Hierarchical display and navigation of document revision histories
US8701002B2 (en) * 2011-04-19 2014-04-15 Autodesk, Inc. Hierarchical display and navigation of document revision histories
EP2707810A1 (en) * 2011-05-10 2014-03-19 Thomson Licensing Technique for synchronized content sharing
US20120297324A1 (en) * 2011-05-18 2012-11-22 Microsoft Corporation Navigation Control Availability
US9317390B2 (en) * 2011-06-03 2016-04-19 Microsoft Technology Licensing, Llc Collecting, aggregating, and presenting activity data
US10289657B2 (en) 2011-09-25 2019-05-14 9224-5489 Quebec Inc. Method of retrieving information elements on an undisplayed portion of an axis of information elements
US9792955B2 (en) 2011-11-14 2017-10-17 Apple Inc. Automatic generation of multi-camera media clips
US8515953B2 (en) * 2011-11-29 2013-08-20 Microsoft Corporation Temporal visualization of query results
CN102572599A (zh) * 2012-03-01 2012-07-11 盛乐信息技术(上海)有限公司 音视频显示方法及系统
KR101386514B1 (ko) * 2012-05-10 2014-04-17 서울대학교산학협력단 전자의료정보 관리시스템
US9519693B2 (en) 2012-06-11 2016-12-13 9224-5489 Quebec Inc. Method and apparatus for displaying data element axes
US9646080B2 (en) 2012-06-12 2017-05-09 9224-5489 Quebec Inc. Multi-functions axis-based interface
US10165067B2 (en) * 2012-06-29 2018-12-25 Nuvi, Llc Systems and methods for visualization of electronic social network content
US9110558B2 (en) * 2012-08-03 2015-08-18 National Instruments Corporation Physics based graphical program editor
CN102867529B (zh) * 2012-09-05 2015-07-15 杭州天视智能系统有限公司 多媒体视频时间轴的展现方法、装置、播放方法及播放器
CN103699541B (zh) * 2012-09-28 2018-01-19 伊姆西公司 用于提高分类精度的交互式可视数据挖掘
US9265458B2 (en) 2012-12-04 2016-02-23 Sync-Think, Inc. Application of smooth pursuit cognitive testing paradigms to clinical drug development
US20140289603A1 (en) * 2013-02-04 2014-09-25 Sudhee Nagabhushan Subrahmanya Annotating and linking media content data
US9070227B2 (en) * 2013-03-04 2015-06-30 Microsoft Technology Licensing, Llc Particle based visualizations of abstract information
US9380976B2 (en) 2013-03-11 2016-07-05 Sync-Think, Inc. Optical neuroinformatics
USD770480S1 (en) * 2013-06-19 2016-11-01 Advanced Digital Broadcast S.A. Display screen with graphical user interface
USD754708S1 (en) * 2013-06-19 2016-04-26 Advanced Digital Broadcast S.A. Display screen with graphical user interface
USD770483S1 (en) * 2013-06-19 2016-11-01 Advanced Digital Broadcast S.A. Display screen with graphical user interface
WO2015054342A1 (en) 2013-10-09 2015-04-16 Mindset Systems Method of and system for automatic compilation of crowdsourced digital media productions
CN104731463B (zh) * 2013-12-19 2019-04-12 腾讯科技(深圳)有限公司 一种定位图片列表中图片的方法和装置
US9778817B2 (en) 2013-12-31 2017-10-03 Findo, Inc. Tagging of images based on social network tags or comments
US9697203B2 (en) 2014-02-03 2017-07-04 World Software Corporation System and method for interactive visual representation of metadata within a networked heterogeneous workflow environment
US9483162B2 (en) * 2014-02-20 2016-11-01 Palantir Technologies Inc. Relationship visualizations
JP2015194848A (ja) * 2014-03-31 2015-11-05 ブラザー工業株式会社 表示プログラムおよび表示装置
US9728055B2 (en) * 2014-04-11 2017-08-08 Vivint, Inc. Chronological activity monitoring and review
CN103914230B (zh) * 2014-04-18 2018-02-23 广州猎豹网络科技有限公司 一种带时间导航的图片显示的方法及装置
US10089346B2 (en) 2014-04-25 2018-10-02 Dropbox, Inc. Techniques for collapsing views of content items in a graphical user interface
US9891794B2 (en) 2014-04-25 2018-02-13 Dropbox, Inc. Browsing and selecting content items based on user gestures
US9548894B2 (en) * 2014-06-06 2017-01-17 Yokogawa Electric Corporation Proximity based cross-screen experience App framework for use between an industrial automation console server and smart mobile devices
US10642471B2 (en) * 2014-06-25 2020-05-05 Oracle International Corporation Dual timeline
US20150378561A1 (en) * 2014-06-30 2015-12-31 Genesys Telecommunications Laboratories, Inc. System and method for recording agent interactions
US10394851B2 (en) * 2014-08-07 2019-08-27 Cortical.Io Ag Methods and systems for mapping data items to sparse distributed representations
KR101559838B1 (ko) 2014-11-19 2015-10-13 엔쓰리엔 주식회사 4d 데이터를 시각화하기 위한 시각화 방법 및 시스템, 및 통합 데이터 파일 생성 방법 및 장치
KR101968908B1 (ko) 2015-01-22 2019-04-15 한국전자통신연구원 시각지식 제공 장치 및 방법
US9842150B2 (en) * 2015-03-05 2017-12-12 M-Files Oy Method, an apparatus, a computer system and a computer program product for defining visibility of objects in metadata-based file arrangement in mobile environment
WO2016171874A1 (en) * 2015-04-22 2016-10-27 Google Inc. Providing user-interactive graphical timelines
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
JP6147825B2 (ja) * 2015-09-29 2017-06-14 株式会社東芝 電子機器および方法
US9823818B1 (en) * 2015-12-29 2017-11-21 Palantir Technologies Inc. Systems and interactive user interfaces for automatic generation of temporal representation of data objects
US20170357672A1 (en) 2016-06-12 2017-12-14 Apple Inc. Relating digital assets using notable moments
DK201670609A1 (en) 2016-06-12 2018-01-02 Apple Inc User interfaces for retrieving contextually relevant media content
AU2017100670C4 (en) 2016-06-12 2019-11-21 Apple Inc. User interfaces for retrieving contextually relevant media content
WO2018052269A1 (en) * 2016-09-19 2018-03-22 Samsung Electronics Co., Ltd. Method of displaying images in a multi-dimensional mode based on personalized topics
JP6698216B2 (ja) 2016-09-23 2020-05-27 アップル インコーポレイテッドApple Inc. アバターの作成及び編集に関する米国特許商標局への特許出願
US20180137667A1 (en) 2016-11-14 2018-05-17 Oracle International Corporation Graph Visualization Tools With Summary Visualization For Very Large Labeled Graphs
US10585575B2 (en) * 2017-05-31 2020-03-10 Oracle International Corporation Visualizing UI tool for graph construction and exploration with alternative action timelines
US10671266B2 (en) 2017-06-05 2020-06-02 9224-5489 Quebec Inc. Method and apparatus of aligning information element axes
CN109542430B (zh) * 2017-09-22 2022-04-05 阿里巴巴集团控股有限公司 用于实现界面交互效果的方法、装置及电子设备
EP3459713A1 (en) * 2017-09-26 2019-03-27 Siemens Aktiengesellschaft Method for computer-aided processing of quality information of an object and a respective assistance apparatus
US10788972B2 (en) 2017-10-02 2020-09-29 Fisher-Rosemount Systems, Inc. Systems and methods for automatically populating a display area with historized process parameters
US11386342B2 (en) * 2018-04-20 2022-07-12 H2O.Ai Inc. Model interpretation
US11922283B2 (en) 2018-04-20 2024-03-05 H2O.Ai Inc. Model interpretation
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
US11086935B2 (en) 2018-05-07 2021-08-10 Apple Inc. Smart updates from historical database changes
US11243996B2 (en) 2018-05-07 2022-02-08 Apple Inc. Digital asset search user interface
US10846343B2 (en) 2018-09-11 2020-11-24 Apple Inc. Techniques for disambiguating clustered location identifiers
US10803135B2 (en) 2018-09-11 2020-10-13 Apple Inc. Techniques for disambiguating clustered occurrence identifiers
KR102239225B1 (ko) * 2019-09-05 2021-04-12 주식회사 알마덴디자인리서치 워드 클라우드의 시각화를 위한 장치 및 방법
TWI714480B (zh) * 2020-03-19 2020-12-21 索爾智慧機械有限公司 拉帽安裝工具測試儀器之數據顯示方法
US11657556B2 (en) * 2021-08-31 2023-05-23 Paul J. Hultgren Scrolling with damped oscillation
US11921812B2 (en) * 2022-05-19 2024-03-05 Dropbox, Inc. Content creative web browser

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004328265A (ja) * 2003-04-23 2004-11-18 Sony Corp 表示方法及び表示装置

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1991006057A1 (en) 1989-10-20 1991-05-02 Hitachi, Ltd. Image display/processing method of formatted document and apparatus therefor
US5499330A (en) * 1993-09-17 1996-03-12 Digital Equipment Corp. Document display system for organizing and displaying documents as screen objects organized along strand paths
US6983227B1 (en) 1995-01-17 2006-01-03 Intertech Ventures, Ltd. Virtual models of complex systems
US6360234B2 (en) 1997-08-14 2002-03-19 Virage, Inc. Video cataloger system with synchronized encoders
US6301579B1 (en) 1998-10-20 2001-10-09 Silicon Graphics, Inc. Method, system, and computer program product for visualizing a data structure
US6268853B1 (en) * 1999-09-30 2001-07-31 Rockwell Technologies, L.L.C. Data structure for use in enterprise controls
US7415662B2 (en) * 2000-01-31 2008-08-19 Adobe Systems Incorporated Digital media management apparatus and methods
US7054508B2 (en) 2000-08-03 2006-05-30 Canon Kabushiki Kaisha Data editing apparatus and method
JP2002082745A (ja) 2000-09-07 2002-03-22 Sony Corp 情報処理装置及び方法、並びにプログラム格納媒体
US6950989B2 (en) * 2000-12-20 2005-09-27 Eastman Kodak Company Timeline-based graphical user interface for efficient image database browsing and retrieval
US7020848B2 (en) 2000-12-20 2006-03-28 Eastman Kodak Company Comprehensive, multi-dimensional graphical user interface using picture metadata for navigating and retrieving pictures in a picture database
US7197531B2 (en) 2000-12-29 2007-03-27 Fotomedia Technologies, Llc Meta-application architecture for integrating photo-service websites for browser-enabled devices
US6996782B2 (en) * 2001-05-23 2006-02-07 Eastman Kodak Company Using digital objects organized according to a histogram timeline
US7627860B2 (en) 2001-08-14 2009-12-01 National Instruments Corporation Graphically deployment of a program with automatic conversion of program type
US20040205479A1 (en) 2001-10-30 2004-10-14 Seaman Mark D. System and method for creating a multimedia presentation
US20030117428A1 (en) 2001-12-20 2003-06-26 Koninklijke Philips Electronics N.V. Visual summary of audio-visual program features
JP4143956B2 (ja) 2002-02-14 2008-09-03 富士フイルム株式会社 画像表示装置及び画像管理プログラム
US7003737B2 (en) * 2002-04-19 2006-02-21 Fuji Xerox Co., Ltd. Method for interactive browsing and visualization of documents in real space and time
US20040153445A1 (en) 2003-02-04 2004-08-05 Horvitz Eric J. Systems and methods for constructing and using models of memorability in computing and communications applications
JP2005038414A (ja) 2003-06-30 2005-02-10 Fuji Photo Film Co Ltd ファイル管理プログラム、ファイル管理方法、ファイル管理装置、撮像装置及び記録媒体
US7818689B2 (en) * 2003-09-29 2010-10-19 Olympus Corporation Information managing method, information managing apparatus, information managing program and storage medium
US7313574B2 (en) 2003-10-02 2007-12-25 Nokia Corporation Method for clustering and querying media items
US7334195B2 (en) * 2003-10-14 2008-02-19 Microsoft Corporation System and process for presenting search results in a histogram/cluster format
US6990637B2 (en) 2003-10-23 2006-01-24 Microsoft Corporation Graphical user interface for 3-dimensional view of a data collection based on an attribute of the data
US7109848B2 (en) 2003-11-17 2006-09-19 Nokia Corporation Applications and methods for providing a reminder or an alert to a digital media capture device
US20050105374A1 (en) * 2003-11-17 2005-05-19 Nokia Corporation Media diary application for use with digital device
US20050187943A1 (en) 2004-02-09 2005-08-25 Nokia Corporation Representation of media items in a media file management application for use with a digital device
US7437005B2 (en) * 2004-02-17 2008-10-14 Microsoft Corporation Rapid visual sorting of digital files and data
US7730012B2 (en) * 2004-06-25 2010-06-01 Apple Inc. Methods and systems for managing data
US7788592B2 (en) 2005-01-12 2010-08-31 Microsoft Corporation Architecture and engine for time line based visualization of data
US7421449B2 (en) 2005-01-12 2008-09-02 Microsoft Corporation Systems and methods for managing a life journal
US20060156237A1 (en) 2005-01-12 2006-07-13 Microsoft Corporation Time line based user interface for visualization of data
US7716194B2 (en) 2005-01-12 2010-05-11 Microsoft Corporation File management system employing time line based representation of data

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004328265A (ja) * 2003-04-23 2004-11-18 Sony Corp 表示方法及び表示装置

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008050649A1 (fr) * 2006-10-23 2008-05-02 Nec Corporation Système, procédé et programme de récapitulation de contenu
US8319997B2 (en) 2007-12-21 2012-11-27 Canon Kabushiki Kaisha Information processing apparatus to display information about progress of print processing, information processing method, and storage medium
JP2009282607A (ja) * 2008-05-20 2009-12-03 Ricoh Co Ltd 画像閲覧装置およびプログラム
JP2013524346A (ja) * 2010-03-30 2013-06-17 マイクロソフト コーポレーション 視覚的なエンターテインメントタイムライン
JP2014500558A (ja) * 2010-12-06 2014-01-09 ネットフリックス・インコーポレイテッド 遠隔制御部のためのユーザーインターフェース
US8963847B2 (en) 2010-12-06 2015-02-24 Netflix, Inc. User interface for a remote control device
JP2012194673A (ja) * 2011-03-15 2012-10-11 Canon Inc 情報処理装置およびその制御方法およびプログラム
JP2014532217A (ja) * 2011-09-21 2014-12-04 フェイスブック,インク. タイムラインインタフェースを介したソーシャルネットワーキングシステムのユーザ情報の表示
US9946430B2 (en) 2011-09-21 2018-04-17 Facebook, Inc. Displaying social networking system user information via a timeline interface
US10908765B1 (en) 2011-09-21 2021-02-02 Facebook, Inc. Displaying dynamic user interface elements in a social networking system
JP2014071762A (ja) * 2012-09-28 2014-04-21 Fuji Xerox Co Ltd 表示制御装置、画像表示装置、およびプログラム
CN103716452A (zh) * 2012-09-28 2014-04-09 富士施乐株式会社 显示控制设备和方法以及图像显示设备
US9524537B2 (en) 2012-09-28 2016-12-20 Fuji Xerox Co., Ltd. Display control apparatus and method, image display apparatus, and non-transitory computer readable medium for controlling a displayed image
JP2021532472A (ja) * 2018-07-31 2021-11-25 マーベル アジア ピーティーイー、リミテッド 複数のオブジェクトタイプのためのメタデータ生成
US11734363B2 (en) 2018-07-31 2023-08-22 Marvell Asia Pte, Ltd. Storage edge controller with a metadata computational engine
US11748418B2 (en) 2018-07-31 2023-09-05 Marvell Asia Pte, Ltd. Storage aggregator controller with metadata computation control
JP7419621B2 (ja) 2018-07-31 2024-01-23 マーベル アジア ピーティーイー、リミテッド 複数のオブジェクトタイプのためのメタデータ生成

Also Published As

Publication number Publication date
EP1681639A2 (en) 2006-07-19
EP1681639B1 (en) 2013-09-11
JP4936719B2 (ja) 2012-05-23
EP1681639A3 (en) 2006-10-04
US20060156246A1 (en) 2006-07-13
US7788592B2 (en) 2010-08-31
CN1804839A (zh) 2006-07-19
CN1804839B (zh) 2011-03-09
KR20060082391A (ko) 2006-07-18
KR101169093B1 (ko) 2012-07-26

Similar Documents

Publication Publication Date Title
JP4936719B2 (ja) データのタイムラインベースの視覚化のためのアーキテクチャおよびエンジン
JP4828220B2 (ja) データのタイムラインベース表現を使用するファイル管理システム
US7421449B2 (en) Systems and methods for managing a life journal
US20060156237A1 (en) Time line based user interface for visualization of data
US10146843B2 (en) System, method and computer program for creating and manipulating data structures using an interactive graphical interface
Shneiderman et al. Direct annotation: A drag-and-drop strategy for labeling photos
KR101083533B1 (ko) 쉘 브라우저 내에서의 메타데이터의 사용자 변경을 위한시스템 및 방법
US9690831B2 (en) Computer-implemented system and method for visual search construction, document triage, and coverage tracking
TWI363295B (en) File system shell
US6279014B1 (en) Method and system for organizing documents based upon annotations in context
JP4701124B2 (ja) 情報処理装置、情報処理方法
US20050080770A1 (en) System and process for presenting search results in a tree format
US20020032696A1 (en) Intuitive hierarchical time-series data display method and system
JP2005276178A (ja) デジタルファイルおよびデータのための高速可視的ソート
US20080313158A1 (en) Database file management system, integration module and browsing interface of database file management system, database file management method
Brazil et al. Audio information browsing with the sonic browser
Kang et al. Exploring personal media: A spatial interface supporting user-defined semantic regions
US20070055928A1 (en) User workflow lists to organize multimedia files
Pinzón et al. Designing interactions in event-based unified management of personal multimedia information
Ghaly Thoughtmarks: Re-thinking Bookmarks & the Personal Information Space

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20081128

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110513

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110815

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110902

RD13 Notification of appointment of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7433

Effective date: 20111116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20111116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120104

RD13 Notification of appointment of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7433

Effective date: 20120105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120105

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20120126

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120214

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120221

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150302

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4936719

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250