JP2005202483A - 情報処理装置および方法、並びにプログラム - Google Patents

Abstract

【課題】直感的な操作で、異なるカテゴリの複数のコンテンツを１つのデータにまとめることができるようにするとともに、その１つのデータから、それにまとめられているそれぞれのコンテンツを容易に参照することができるようにする。
【解決手段】メモ作成領域２１１には、スタイラスを用いて手書きの文字や記号を入力することが可能とされる。また、メモ作成領域２１１には、サムネイル表示領域２４１に一覧表示されているサムネイル画像を貼り付けることも可能とされる。メモに貼り付けたサムネイル画像２５３がスタイラスでタップされたとき、サムネイル画像２５３により表される静止画コンテンツの再生が開始される。本発明は、PDA、携帯電話機などの携帯型の情報処理装置に適用することができる。
【選択図】図１０

Description

本発明は、情報処理装置および方法、並びにプログラムに関し、特に、直感的な操作で、異なるカテゴリの複数のコンテンツを１つのデータにまとめることができるようにすると共に、その１つのデータから、それにまとめられているそれぞれのコンテンツを容易に参照することができるようにする情報処理装置および方法、並びにプログラムに関する。

近年、ディジタルカメラや、撮影機能が搭載された携帯電話機の普及に伴い、パーソナルコンピュータを用いて、それらの機器で撮影した画像をテキストデータなどの他のコンテンツに貼り付けることにより資料などを作成することが一般的に行われている。これにより、その作成者は、テキストデータの内容を視覚的にも表現することができる。

また、あるコンテンツに他のコンテンツを関連付けて１つのコンテンツを作成するものとしては、音楽コンテンツをテキストデータに関連付けておき（音楽コンテンツのリンク先をテキストデータに埋め込んでおき）、そのテキストデータを画面上に表示させた状態から、直接、音楽コンテンツの再生を開始させることのできる１つのテキストデータを作成することなども行われている。

ところで、静止画、動画、音楽などの各種のカテゴリのコンテンツを関連付けることにより、それらのコンテンツを容易に扱うことができるようにする技術として特許文献１に開示されているようなものがある。
特開２００１−２０９６５８号公報

しかしながら、あるコンテンツに他のコンテンツを関連付けるためには、その、他のコンテンツを格納するフォルダなどを指定し、指定したフォルダから関連付ける対象のコンテンツを選択する必要があり、操作が煩雑であるという課題があった。

例えば、作成中のテキストデータに静止画を貼り付ける場合、テキストデータを作成するウインドウとは別のウインドウに、静止画が格納されたフォルダの内容を表示させ、そのフォルダから、貼り付け対象となる静止画を選択する必要がある。

本発明はこのような状況に鑑みてなされたものであり、直感的な操作で、異なるカテゴリの複数のコンテンツを１つのデータにまとめることができるようにするとともに、その１つのデータから、それにまとめられているそれぞれのコンテンツを容易に参照することができるようにするものである。

本発明の情報処理装置は、コンテンツの内容を表す画像であって、選択されることでコンテンツの再生が開始される画像の貼り付け先となる領域の表示を制御する第１の表示制御手段と、画像の一覧の表示指示がされたとき、画像の一覧を表示させる第２の表示制御手段とを備え、第１の表示制御手段による制御により、画像の貼り付け先となる領域には、その領域で作成されるデータのカテゴリに応じて、異なる数の階層から構成される１つの画面が表示されることを特徴とする。

第２の表示制御手段は、表示指示があるまで画像の貼り付け先となる領域の一部を形成していた領域に、画像の一覧を表示させるようにすることができる。

第２の表示制御手段は、画像の貼り付け先となる領域で作成されるデータのカテゴリに応じて、または、ユーザからの指示に応じて、画像を表示するコンテンツのカテゴリの数を切り替えるようにすることができる。

本発明の情報処理方法は、コンテンツの内容を表す画像であって、選択されることでコンテンツの再生が開始される画像の貼り付け先となる領域に、領域で作成されるデータのカテゴリに応じて、異なる数の階層から構成される１つの画面を表示させる第１の表示制御ステップと、画像の一覧の表示指示がされたとき、画像の一覧を表示させる第２の表示制御ステップとを含むことを特徴とする。

本発明のプログラムは、コンテンツの内容を表す画像であって、選択されることでコンテンツの再生が開始される画像の貼り付け先となる領域の表示を制御する第１の表示制御ステップと、画像の一覧の表示指示がされたとき、画像の一覧を表示させる第２の表示制御ステップとを含み、第１の表示制御ステップの処理による制御により、画像の貼り付け先となる領域には、その領域で作成されるデータのカテゴリに応じて、異なる数の階層から構成される１つの画面が表示されることを特徴とする。

本発明の情報処理装置および方法、並びにプログラムにおいては、コンテンツの内容を表す画像であって、選択されることでコンテンツの再生が開始される画像の貼り付け先となる領域の表示が制御され、画像の一覧の表示指示がされたとき、画像の一覧が表示される。このとき、画像の貼り付け先となる領域には、その領域で作成されるデータのカテゴリに応じて、異なる数の階層から構成される１つの画面が表示される。

本発明によれば、コンテンツの内容を表す画像の一覧を、貼り付け先のデータと同時に表示させることができる。

また、本発明によれば、貼り付け対象となるデータに対して、直感的な操作でコンテンツの内容を表す画像を貼り付けることができる。

さらに、本発明によれば、コンテンツの内容を表す画像が貼り付けられたデータから、そのコンテンツを容易に参照することができる。

以下に本発明の実施の形態を説明するが、本明細書に記載の発明と、発明の実施の形態との対応関係を例示すると、次のようになる。この記載は、請求項に記載されている発明をサポートする実施の形態が本明細書に記載されていることを確認するためのものである。従って、発明の実施の形態中には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。

さらに、この記載は、本明細書に記載されている発明の全てを意味するものではない。換言すれば、この記載は、本明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により追加される発明の存在を否定するものではない。

請求項１に記載の情報処理装置（例えば、図１のPDA１）は、コンテンツ（例えば、静止画、動画、音声、音楽、PIM情報、貼り付け先が予定表である場合のメモのデータベース）の内容を表す画像（サムネイル画像）であって、選択されることでコンテンツの再生（静止画、メモのプレビュー、動画、音声の再生）が開始される前記画像の貼り付け先となる領域の表示を制御する第１の表示制御手段（例えば、図２２のデータベース表示制御手段４０２）と、前記画像の一覧の表示指示がされたとき、前記画像の一覧を表示させる第２の表示制御手段（例えば、図２２のサムネイル画像表示制御部４１３）とを備え、前記第１の表示制御手段による制御により、前記画像の貼り付け先となる前記領域には、前記領域で作成されるデータ（例えば、メモ、予定表）のカテゴリに応じて、異なる数の階層（例えば、図１２Ｂ乃至Ｄ、図１９Ｂ乃至Ｅの階層）から構成される１つの画面（例えば、図１２Ａ、図１９Ａの画面）が表示されることを特徴とする。

請求項２に記載の第２の表示制御手段は、前記表示指示があるまで前記画像の貼り付け先となる前記領域の一部を形成していた領域（例えば、図９のサムネイル表示領域２４１）に、前記画像の一覧を表示させることを特徴とする。

請求項３に記載の情報処理装置の第２の表示制御手段は、前記画像の貼り付け先となる前記領域で作成されるデータのカテゴリに応じて、または、ユーザからの指示に応じて、前記画像を表示するコンテンツのカテゴリの数を切り替える（例えば、予定表のデータベースの作成中は、予め作成したメモをコンテンツとして表示し、メモのデータベースの作成中は、予め作成したメモをコンテンツとして表示しない）ことを特徴とする。

請求項４に記載の情報処理方法は、コンテンツ（例えば、静止画、動画、音声、音楽、PIM情報、貼り付け先が予定表である場合のメモのデータベース）の内容を表す画像（サムネイル画像）であって、選択されることでコンテンツの再生が開始される前記画像の貼り付け先となる領域に、前記領域で作成されるデータ（例えば、メモ、予定表）のカテゴリに応じて、異なる数の階層（例えば、図１２Ｂ乃至Ｄ、図１９Ｂ乃至Ｅの階層）から構成される１つの画面（例えば、図１２Ａ、図１９Ａの画面）を表示させる第１の表示制御ステップ（例えば、図２３のステップＳ２）と、前記画像の一覧を表示することが指示されたとき、その指示があるまで前記画像の貼り付け先となる領域の一部を形成していた領域に、前記画像の一覧を表示させる第２の表示制御ステップ（例えば、図２４のステップＳ２３）とを含むことを特徴とする。

請求項５に記載のプログラムにおいても、各ステップが対応する実施の形態（但し一例）は、請求項３に記載の情報処理方法と同様である。

以下、本発明の実施の形態について図を参照して説明する。

本発明を適用したPDA(Personal Digital Assistants)１の外観を図１乃至図４に示す。図１および図２はPDA１の本体正面側の外観を示す斜視図であり、図３および図４は本体背面側の外観を示す斜視図である。

PDA１は、図２に示される中央のヒンジ部１２を境に、表示部１１と本体部１３とに分けられており、ヒンジ部１２を介して折り畳み可能に形成されている（折り畳んだ状態を図１に示す）。

図２に示されるように、表示部１１の面１１−１のほぼ全面には、LCD（Liquid Crystal Display）２８、および、LCD２８の上に積層された透明なタッチパネル３６が設けられている。すなわち、ユーザが、指先や図１のスタイラス２の先端をLCD２８上の任意の位置に接触させると、その座標がタッチパネル３６により検出され、検出された座標に対応する所定の処理が行われる。

ヒンジ部１２には、CCD（Charge Coupled Device）等よりなるカメラ部２１が設けられている。

PDA１を折り畳んだときに面１１−１（表示部１１）に対向する面となる本体部１３の上面１３−１には、PDA１にインストールされている、例えば、スケジュール管理用のプログラム、電話帳管理用のプログラム等のアプリケーションプログラムのそれぞれを表すシンボルが印刷されたボタン３２が設けられている。ユーザによりボタン３２が押下されたとき、それに対応するアプリケーションプログラムが起動される。

また、上面１３−１のボタン３２が配置されている領域の中央部には、LCD２８に表示されている画面を上下方向にスクロールさせるためのスクロールボタン３３が設けられている。さらに、上面１３−１のボタン３２、スクロールボタン３３の下方には、文字、記号、数字等を入力するためのキーボード３４が設けられている。

本体部１３の右側面１３−２には、不揮発性半導体メモリの一種であるメモリースティック（商標）（以下、MSと記述する）３を装着可能なMSスロット４１が設けられている（図１）。なお、MSスロット４１には、例えば、Bluetooth（商標）による通信機能拡張モジュールなどの、MS３と同じ形状の機能拡張モジュールを装着させることも可能である。

図３に示されるように、本体部１３の左側面１３−３には、本体部１３に電力を供給するリチウムイオン電池などからなるリムーバブルメインバッテリ１６２（図５）を着脱するときに開閉するバッテリ蓋２６が設けられている。また、左側面１３−３には、押下および回転自在なジョグダイヤル２５が当該側面から僅かに突出した状態で設けられている。

本体部１３の背面１３−４には、不揮発性半導体メモリの一種であるコンパクトフラッシュ（登録商標）（以下、CFと記述する）４を装着可能なCFスロット４２が設けられている。CFスロット４２は、図４に示すように、CF４を装着するときには当該背面からポップアップするようになされている。なお、CFスロット４２には、例えば、PHS(Personal Handy Phone)による通信機能拡張モジュールなどの、CF４と同じ形状の機能拡張モジュールを装着させることも可能である。

本体部１３の下端面１３−５（図２）には、リムーバブルメインバッテリ１６２に対して充電を行うクレードル９１（図５）等の付属機器を接続するためのコネクタ６７が設けられている。

図５は、以上のような外観構成を有するPDA１の内部の構成例について示すブロック図である。

CPU(Central Processing Unit)１３１は、ROM(Read Only Memory)１３２に記憶されているプログラム、または記憶部１３９からRAM(Random Access Memory)１３３にロードされたアプリケーションプログラムに従って各種の処理を実行する。RAM１３３にはまた、CPU１３１が各種の処理を実行する上において必要なデータなども適宜記憶される。

CPU１３１、ROM１３２、およびRAM１３３は、CPUインタフェース１３５を介して相互に接続されている。CPUインタフェース１３５には、LCD２８に対する画面の表示を制御する表示制御部１３６も接続されている。

表示制御部１３６には、カメラ部２１、LCD２８の他、VRAM１３８も接続されている。表示制御部１３６は、CPU１３１による制御に基づいて、カメラ部２１により撮像された画像をVRAM１３８に記憶させ、そのVRAM１３８に記憶させている画像や、他のメモリ（MS３、CF４、RAM１３３、記憶部１３９）に記憶されている画像をLCD２８に表示させる。VRAM１３８には、カメラ部２１により撮像された画像の他、LCD２８に表示させる画像も記憶される。

また、CPUインタフェース１３５には、ジョグダイヤル２５、ボタン３２、スクロールボタン３３、およびキーボード３４等からなる入力部１３７、タッチパネル３６、赤外線通信ポート６２、MSスロット４１およびCFスロット４２に相当するスロットI/F６４、リムーバブルメインバッテリ１６２およびバックアップバッテリ１６３を充電させるとともに、他の外部装置１５２との通信の中継装置となるクレードル９１等が接続されるコネクタ６７、並びに、マイクロフォン１４２で集音された音声をディジタルデータに変換する音声処理部１４１が接続されている。

なお、タッチパネル３６により検出された座標を表す情報は、CPUインタフェース１３５を介してCPU１３１に供給される。

さらに、CPUインタフェース１３５には、EEPROM(Electrically Erasable and Programmable Read Only Memory)またはハードディスクなどより構成される記憶部１３９が接続される。記憶部１３９は、PDA１に対して着脱可能な記憶媒体であるMS３やCF４とは異なり、PDA１が内蔵するメモリである。

CPUインタフェース１３５には、Bluetooth等の規格に準拠した無線通信を行う無線通信部１４６、および、FeliCa（商標）のようなICカードに対して非接触でデータを読み書きする非接触ICカードインタフェース（I/F）１４７が接続されている。

外部装置１５２に適宜装着される磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどから読み出されたアプリケーションプログラムは、赤外線ポート６２を介して行われる赤外線通信、無線通信部１４６を介して行われる無線通信、または、クレードル９１を介して行われる有線の通信等により、必要に応じてPDA１に対して供給され、記憶部１３９にインストールされる。または、スロットI/F６４に適宜装着されるMS３やCF４から読み出されたアプリケーションプログラムも、必要に応じて記憶部１３９にインストールされる。

CPUインタフェース１３５には、表示部１１が本体部１３に対して閉じた状態の場合、オン状態となり、表示部１１が本体部１３に対して開いた状態の場合、オフ状態となるLCD開閉スイッチ１４４、および、表示部１１が所定の角度以上回動された場合にオン状態となるLCD回転スイッチ１４５が設けられている。

また、CPUインタフェース１３５には、リムーバブルメインバッテリ１６２が装着されるメインバッテリ装着部１６１、およびリムーバブルメインバッテリ１６２が取り外されたときの予備電源となる、充電式ボタン電池等から成るバックアップバッテリ１６３が接続されている。

図６は、LCD２８に表示されるメイン画面の例を示す図である。

PDA１を用いて行われる各種の操作は、基本的には、このメイン画面から開始される。メイン画面は、標準表示領域２０１、シルク領域２０２、およびステータス領域２０３からなる。

標準表示領域２０１には、アプリケーションプログラム（ソフトウエア）が実行されているときには、その実行中のアプリケーションプログラムの画面が表示される。また、アプリケーションプログラムが実行されていないときには、図６に示されるように、インストールされているアプリケーションプログラムのそれぞれに対応するアプリケーションアイコン２０４が表示される（ただし、厳密には、このときにおいても、アプリケーションプログラムが全く実行されていないわけではなく、アプリケーションアイコン２０４を表示し、ユーザに選択させるためのアプリケーションプログラムが実行されている）。

図６においては、アプリケーションアイコン２０４として、メモを作成するアプリケーションを実行するときにタップ（スタイラス２の先端でLCD２８の表面が押下）されるメモ帳アイコン２０４Ａ、予定を管理するアプリケーションを実行するときにタップされる予定表アイコン２０４Ｂが表示されている。

シルク領域２０２には、実行中のシルクプラグインに対応するユーザインタフェース（ユーザによる入力用の領域）が表示される。なお、実行されるアプリケーションによっては、シルク領域２０２の表示が消え、標準表示領域２０１とシルク領域２０２の全体に１つの画面が表示されることもある。

ステータス領域２０３には、例えば、バッテリ容量、MSスロット４１に対するMS３の装着の有無や、CFスロット４２に対するCF４の装着の有無、音量設定等の、PDA１の状態を示すステータスアイコン２０５や時刻等が表示される。

図７は、図６のメモ帳アイコン２０４Ａがタップされたときに表示される画面の例を示す図である。

図７に示されるメモの作成画面は、メモ帳アイコン２０４Ａがタップされたときに起動される、メモの作成を管理するソフトウエア（後述するデータベース処理ソフトウエア）によって表示される。

メモの作成画面は、ステータス領域２０３の他に、メモ作成領域２１１、メモを作成するためのツールを選択するときに操作される各種のボタンが表示されるツールボタン領域２１２から構成される。

ユーザは、スタイラス２の先端をメモ作成領域２１１に当て、その状態のままスタイラス２を移動させることで、任意の文字や記号などをメモ作成領域２１１に入力することができる。例えば、図８の曲線の画像２３１は、スタイラス２の先端が移動した軌跡を表し、このように、ユーザは、スタイラス２を用いてメモ作成領域２１１にメモをとることができる。

また、ユーザは、後に詳述するように、スタイラス２で文字や記号を入力するだけでなく、カメラ部２１で撮影した静止画や動画、或いは、録音した音声などの各種のコンテンツを表す画像を貼り付けることによってもメモを作成することができる（メモにコンテンツを関連付けることができる）。

図７のツールボタン領域２１２には、メモに貼り付けるコンテンツの一覧を表示させるときや、既に表示しているコンテンツの一覧を閉じるときに操作（タップ）される一覧表示ボタン２２１、メモ作成領域２１１に手書きの文字などを入力するときに操作されるペンボタン２２２が用意される。ユーザによりペンボタン２２２が操作されたとき、ペンモードが設定される。そのペンモードが設定されている間は、図８に示されるような手書きの入力をメモ作成領域２１１に対して行うことが可能となる。

また、ツールボタン領域２１２には、メモ作成領域２１１に一度入力した文字などを消すときに操作される消しゴムボタン２２３の他、各種のツールを選択するときに操作されるボタンも表示される。

図９は、図８の状態（コンテンツの一覧が表示されていない状態）で一覧表示ボタン２２１がタップされたときに表示される画面の例を示す図である。

一覧表示ボタン２２１がタップされたとき、図９に示されるように、ツールボタン領域２１２とステータス領域２０３の間の、それまでメモ作成領域２１１の一部を形成していた領域を含む領域であるサムネイル表示領域２４１が形成され、そこに、メモ作成領域２１１を利用して作成しているメモに貼り付けることができるコンテンツ（コンテンツの内容を表すサムネイル画像）の一覧が表示される。

サムネイル表示領域２４１に表示されるサムネイル画像は、コンテンツ本体のデータから生成されるものである。例えば、静止画コンテンツのサムネイル画像は、コンテンツ本体の静止画が縮小されることで生成され、動画コンテンツのサムネイル画像は、連続する画像の中から選択される、例えば、先頭の１フレーム（MPEG(Moving Picture Experts Group)方式で圧縮された動画コンテンツの場合、最初のＩ(Intra)ピクチャ）の画像が縮小されることで生成される。なお、音声コンテンツのサムネイル画像には、吹き出しの画像が用いられる。

図９の例においては、左から、「MOV000…」のファイル名が設定された動画コンテンツを表すサムネイル画像２５１、「031030…」のファイル名が設定された音声コンテンツを表すサムネイル画像２５２、「DSC0001」のファイル名が設定された静止画（風景画）コンテンツを表すサムネイル画像２５３、「DSC0002」のファイル名が設定された静止画（人物画）コンテンツを表すサムネイル画像２５４が表示されている。

これらのサムネイル画像で表されるコンテンツは、PDA１の内部のメモリである記憶部１３９やPDA１に装着されているMS３などに、その本体のデータが記憶されている。

例えば、図９の点線矢印で示されるように、左から３番目の静止画コンテンツのサムネイル画像２５３にスタイラス２を押し当て、その状態のままメモ作成領域２１１上の位置Ｐ１まで移動させ、そこで、スタイラス２の先端をLCD２８の表面から離すことで（ドラッグアンドドロップすることで）、ユーザは、サムネイル画像２５３を位置Ｐ１に貼り付けることができる。

図１０は、位置Ｐ１にサムネイル画像２５３が貼り付けられた状態の画面の例を示す図である。ユーザは、このように、一覧表示されるものの中からドラッグアンドドロップすることで、作成中のメモに、静止画などの各種のカテゴリのコンテンツのサムネイル画像を貼り付けることができる。なお、ユーザは、ペンモードが設定されている状態で、位置Ｐ１に貼り付けたサムネイル画像２５３をメモ作成領域２１１上の他の位置にさらに移動させることもできる。

例えば、ユーザは、「〜に行ったときの写真」などの手書きの文字をメモ作成領域２１１に入力しておき、そのメモに写真（静止画コンテンツ）のサムネイル画像を貼り付けておくことで、PDA１内にある写真を容易に分類することができる。この操作は、フォルダを新規に作成し、そこに写真などのコンテンツを格納することによって分類する場合に較べて直感的な操作であり、外出先などで、僅かな時間に気軽に操作するというPDA１の性質上、好ましい。

また、ユーザは、メモに貼り付けたサムネイル画像をタップすることで、そのサムネイル画像により内容が表されるコンテンツの再生を開始させることができる。

図１１は、図１０のサムネイル画像２５３をタップして、サムネイル画像２５３により内容が表される静止画コンテンツを再生（プレビュー）させたときの画面の例を示す図である。

サムネイル画像２５３がタップされたとき、静止画コンテンツのビューワ機能を有するソフトウエア（後述するコンテンツ処理ソフトウエア）が起動し、サムネイル画像２５３により内容が表される静止画コンテンツの本体のデータに基づいて、ステータス領域２０３以外の領域全体を用いて画像の表示が行われる。これにより、ユーザは、静止画コンテンツの詳細を容易に確認することができる。

なお、メモに貼り付けた動画コンテンツのサムネイル画像２５１をタップした場合も同様に、動画コンテンツの再生が行われ、図１１に示されるようなステータス領域２０３以外の領域を用いて画像が表示される。また、メモに貼り付けた音声コンテンツのサムネイル画像２５２をタップした場合、その音声コンテンツの再生が行われる。

図１２Ａ乃至Ｄは、以上のようにして作成されるメモの表示の階層構造について示す図である。

図１２Ａは、図１０のメモ作成領域２１１（上方に表示される数字と文字（「Unfiled」）を除く部分）に表示されている画面を示す図である。

図１２Ａの画面は複数の層から構成され、その複数の層のうちの最下層には、図１２Ｂに示されるような無地の層（図７のメモ作成領域２１１のように、何も入力されていない層）が配置される。

図１２Ｂの無地の層の上には、スタイラス２で入力された手書きの曲線の画像２３１を表示する層が配置され、その上（図１２Ａの画面を構成する最上層）には、サムネイル画像２５３を表示する層が配置される。サムネイル画像を表示する層は、複数のサムネイル画像がメモに貼り付けられた場合、貼り付けられた数だけ仮想的に配置される。

このように、メモの作成を管理するソフトウエアによりメモ作成領域２１１に表示される画面は、図１２Ｂ乃至Ｄの３つの層から構成される。この層の数は、後述する、予定表の作成を管理するソフトウエアによりメモ作成領域２１１に対応する領域に表示される画面を構成する層の数と異なる。

ここで、サムネイル表示領域２４１の表示の詳細について説明する。

図１３Ａは、図９のサムネイル表示領域２４１のみを示す図である。

サムネイル表示領域２４１の右上には、サムネイル画像表示部２７１に表示するサムネイル画像を、それが表すコンテンツのカテゴリに応じてフィルタリングするカテゴリ選択ボタン２６１乃至２６４が表示されている。

すなわち、一覧表示ボタン２２１を操作したとき、サムネイル画像表示部２７１には、メモ作成領域２１１で作成中のメモに貼り付けることができる全てのカテゴリのコンテンツのサムネイル画像が表示されるが、ユーザは、カテゴリ選択ボタン２６１乃至２６４を操作することで、サムネイル画像表示部２７１に表示されるサムネイル画像を制限することができる。

例えば、カメラの絵が付されたカテゴリ選択ボタン２６１が操作されたとき、サムネイル画像表示部２７１に表示されるサムネイル画像の中から、静止画コンテンツのサムネイル画像が除かれ（表示が消え）、フィルムの絵が付されたカテゴリ選択ボタン２６２が操作されたとき、動画コンテンツのサムネイル画像が除かれる。

また、ペンと紙の絵（メモ）が付されたカテゴリ選択ボタン２６３が操作されたとき、サムネイル画像表示部２７１に表示されるサムネイル画像の中から、メモのコンテンツを表すサムネイル画像が除かれる。

なお、PDA１においては、メモの作成中（メモの作成を管理するソフトウエアの実行中）は、その作成中のメモに、予め作成しておいた他のメモをコンテンツとして貼り付けることはできないこととされている。従って、メモの作成中は、サムネイル画像表示部２７１にメモのサムネイル画像が表示されないことから、カテゴリ選択ボタン２６３は操作不能とされる。

後述する予定表の作成を管理するソフトウエアの実行中は、作成中の予定表に、予め作成しておいたメモをコンテンツとして貼り付けることが可能とされ、カテゴリ選択ボタン２６３が操作された場合、サムネイル画像表示部２７１に表示されるサムネイル画像の中から、メモのサムネイル画像が除かれる。

カテゴリ選択ボタン２６３の右隣には、吹き出しの絵が付されたカテゴリ選択ボタン２６４が用意されている。カテゴリ選択ボタン２６４が操作されたとき、サムネイル画像表示部２７１に表示されるサムネイル画像の中から、音声コンテンツのサムネイル画像が除かれる。

図１３Ｂは、静止画、動画、音声のそれぞれのカテゴリのコンテンツのサムネイル画像が表示されている図１３Ａの状態から、カテゴリ選択ボタン２６２（動画コンテンツのサムネイル画像の表示を消すボタン）とカテゴリ選択ボタン２６４（音声コンテンツのサムネイル画像の表示を消すボタン）が操作された状態の表示を示す図である。

図１３Ｂに示されるように、サムネイル画像表示部２７１に表示するサムネイル画像の中から、動画と音声のコンテンツを表すサムネイル画像がフィルタリングによりカットされ、その表示が消される。

このように、サムネイル画像表示部２７１に表示させるサムネイル画像に、カテゴリに基づくフィルタリングをかけることができるため、ユーザは、貼り付けようとするコンテンツのサムネイル画像を迅速に探すことができる。

例えば、ある静止画コンテンツをメモに貼り付けようとしている場合、図１３Ｂに示されるように他のカテゴリのコンテンツのサムネイル画像を除いてから探すことで、ユーザは、貼り付けようとする静止画コンテンツのサムネイル画像を迅速に探すことができる。

以上のようにしてサムネイル画像表示部２７１に表示されるサムネイル画像からも、メモに貼り付けたサムネイル画像から、そのサムネイル画像により表されるコンテンツを再生させることができるのと同様に、コンテンツの再生を開始させることが可能とされる。

例えば、図１３Ａに示されるように、静止画コンテンツのサムネイル画像２５３がカーソル２８１で選択されている状態でさらにタップされた場合、図１１を参照して説明したように、その静止画コンテンツがLCD２８に拡大表示される。すなわち、ビューワ機能を提供するソフトウエアが実行され、静止画コンテンツの表示が行われる。

サムネイル画像表示部２７１の下には、サムネイル画像表示部２７１に表示させるサムネイル画像の範囲を切り替えるときに水平方向に操作されるスクロールバー２７２が表示され、その下には、カーソル２８１で選択されているコンテンツの名前等を表示するコンテンツ情報表示部２７３が表示される。

なお、図１３Ａにおいて、動画コンテンツのサムネイル画像２５１上に表示されているMS３の外観を表す画像２５１Ａは、その動画コンテンツが外部のメモリであるMS３に記憶されているものであることを表している。また、フィルムの絵を表す画像２５１Ｂは、それが付されているサムネイル画像２５１が動画コンテンツのものであることを表している（静止画コンテンツのサムネイル画像と区別できるようになっている）。

図１４は、図６の予定表アイコン２０４Ｂがタップされたときに表示される画面の例を示す図である。図１４において、図７と同じ部分には同一の符号を付している。

予定表アイコン２０４Ｂがタップされたとき、予定表の作成を管理するソフトウエアが起動し、図１４に示されるような予定表の作成画面が表示される。

予定表の作成画面は、ステータス領域２０３の他に、所定の間隔で時刻が表示される予定入力領域３０１、予定入力領域３０１の表示形式（週単位、月単位による表示形式）を変更するときに操作されるボタンなどが用意される表示切替領域３０２、予定表を作成するためのツールを選択するときに操作されるボタンが用意されるツールボタン領域３０３から構成される。

ツールボタン領域３０３には、予定表に貼り付けるコンテンツのサムネイル画像の一覧を表示させるときに操作される一覧表示ボタン２２１、予定入力領域３０１に手書きの文字や記号などを入力するときに操作されるペンボタン２２２、一度入力した手書きの文字などを消すときに操作される消しゴムボタン２２３などの、図７のツールボタン領域２１２に用意されるものと同じボタンが用意される。

また、ツールボタン領域３０３には、これらのボタンの他、予定入力領域３０１に入力した予定の１つの項目を選択し、その選択した項目を移動したり、内容を変更する手モードを選択するときに操作される手ボタン３１１が表示される。この手ボタン３１１は、上述したメモの作成時には用意されないボタンである。

図１５は、図１４の画面に対して、ある予定が入力された状態の画面の例を示す図である。

予定入力領域３０１の９時（９：００）の欄に入力された予定３２１（「会議」の文字が入力されている予定）は、例えば、ユーザにより手ボタン３１１が操作され、手モードが設定されてから入力されたものである。９時の時間帯が、予定を入力する時間帯としてスタイラス２で選択された場合、画面の下方には図６のシルク領域２０２が表示されるため、ユーザは、その領域を用いて予定を入力する（「会議」の文字を入力する）。

なお、一覧表示ボタン２２１の右隣にあるボタンは、予定を新規に作成するときに操作されるボタンであり、このボタンが操作された場合も、手モードが設定された状態で時間帯が指定されたときと同様に、新たな予定を入力することが可能とされる。

図１６は、図１５の状態の画面に対して、「重要！」の手書き文字と、予定３２１を指す矢印の画像からなる画像３３１が入力された状態の画面を示す図である。

ペンボタン２２２を操作し、ペンモードを設定することによって、ユーザは、予定入力領域３０１に手書きの文字などを入力することができる。

このように、予定表を作成する場合でも、ユーザは、所定の時間帯に予定の項目を入力するだけでなく、上述したメモを作成する場合と同様に手書きの文字を入力することができる。

図１７は、図１６の状態（サムネイル画像の一覧が表示されていない状態）において、一覧表示ボタン２２１がタップされたときに表示される画面の例を示す図である。

一覧表示ボタン２２１がタップされたとき、図１７に示されるように、ツールボタン領域３０３とステータス領域２０３の間の、それまで予定表入力領域３０１の一部を形成していた領域を含む領域であるサムネイル表示領域２４１が形成され、そこに、予定入力領域３０１に貼り付けることができるコンテンツのサムネイル画像の一覧が表示される。

例えば、音声コンテンツのサムネイル画像３５２をスタイラス２で選択し、図１７の点線矢印で示されるように、その状態のまま予定入力領域３０１上の位置Ｐ２まで移動させ、スタイラス２の先端をLCD２８の表面から離すことで、ユーザは、サムネイル画像３５２を位置Ｐ２に貼り付けることができる。

図１８は、位置Ｐ２に音声コンテンツのサムネイル画像３５２が貼り付けられた状態の画面の例を示す図である。

ユーザは、このように、一覧表示されるものの中からドラッグアンドドロップすることで、予定表に、各種のカテゴリのコンテンツのサムネイル画像を貼り付けることができる（予定表にコンテンツを関連付けることができる）。

以上のようにしてサムネイル画像を予定表に貼り付けることができるため、ユーザは、例えば、９時からの会議（図１８の予定３２１の「会議」）が終了したとき、そのときに録音しておいた音声コンテンツのサムネイル画像３５１を予定３２１の周りに貼り付けておくことで、後から、その会議で録音した音声コンテンツを容易に探すことができる。

そのサムネイル画像の貼り付けも、サムネイル表示領域２４１に表示されるものの中からドラッグアンドドロップするだけの非常に直感的な操作である。

また、予定表に貼り付けたサムネイル画像３５１をタップすることで、そのサムネイル画像３５１により表される音声コンテンツの再生を開始させることができるため、ユーザは、会議で録音した音声を予定表から容易に再生させることができる。

なお、図１７、図１８において、サムネイル画像３５３，３５４は、予め作成しておいたメモのサムネイル画像である。上述したように、予定表の作成時には、予め作成しておいたメモをコンテンツとして予定表に関連付けることができるため、メモのサムネイル画像もサムネイル表示領域２４１に表示される。

図１９Ａ乃至Ｅは、以上のようにして作成される予定表の階層構造について示す図である。

図１９Ａは、図１８の予定入力領域３０１（図１８の上方に表示される年月日と曜日（Ｓ，Ｍ，Ｔ，Ｗ，Ｔ，Ｆ，Ｓ）を除く部分）に表示される画面を示す図である。

図１９Ａの画面も複数の層から構成され、そのうちの最下層には、図１９Ｂに示されるような時間帯を表示する層（図１４の予定入力領域３０１のように、何の予定も入力されていない予定表の層）が配置される。

図１９Ｂの層の上には、図１９Ｃに示されるように、ユーザにより入力された予定３２１（図１９Ｂの９時の時間帯に入力された予定）を表示する層が配置され、その上には、図１９Ｄに示されるように、スタイラス２で入力された手書きの「重要！」の文字と、予定３２１を指す矢印の画像３３１を表示させる層が配置される。

図１９Ｅに示されるように、図１９Ａの画面の最上層には、サムネイル画像３５２を表示させる層が配置される。

このように、予定表の作成を管理するソフトウエアにより予定入力領域３０１に表示される画面は、図１９Ｂ乃至Ｅの４つの層から構成される。この層の数（４層）は、上述した、メモの作成を管理するソフトウエアにより表示される画面を構成する層の数（３層）と異なる。

すなわち、サムネイル表示領域２４１に表示されるサムネイル画像の貼り付け先は、サムネイル画像の一覧と同時に表示される画面を用いて作成されるデータのカテゴリにより異なり、複数あるといえる。

次に、以上のような画面表示を実現するソフトウエア構成について説明する。

なお、以下において、メモの作成を管理するソフトウエアにより作成される１つのメモのファイルや、予定表の作成を管理するソフトウエアにより作成される１つの予定表のファイルをデータベースともいう。従って、コンテンツの貼り付け先や手書きの文字の入力先はデータベースとなる。

図２０は、PDA１に用意されるソフトウエアの例を示すブロック図である。

これらのソフトウエアは、内蔵のメモリである記憶部１３９（図５）などに記憶されている。PDA１には、複数のデータベース処理ソフトウエアからなるデータベース処理ソフトウエア群３６１、複数のコンテンツ処理ソフトウエアからなるコンテンツ処理ソフトウエア群３６２、サムネイル表示ソフトウエア３６３が用意されている。

データベース処理ソフトウエア群３６１は、メモのデータベースの作成を管理するメモデータベース処理ソフトウエア３７１−１と、予定表のデータベースの作成を管理する予定表データベース処理ソフトウエア３７１−２から構成される。以下、メモデータベース処理ソフトウエア３７１−１と予定表データベース処理ソフトウエア３７１−２を個々に区別する必要がない場合、まとめてデータベース処理ソフトウエア３７１という。

なお、図２０においては、データベース処理ソフトウエアは２つしか用意されていないが、実際には、図６の画面にアプリケーションアイコン２０４が用意されているソフトウエアであって、データベースの作成に関するソフトウエア毎にデータベース処理ソフトウエアが用意される。

データベース処理ソフトウエア３７１は、データベースの作成機能をユーザに提供し、例えば、スタイラス２による手書き文字の入力や、サムネイル画像の貼り付けを受け付け、データベースを作成する。

データベース処理ソフトウエア３７１は、データベース毎に、図２１に示されるようなデータベースの構成を表すデータベース構成情報を用いてその作成を管理する。

図２１の例においては、データベースに貼り付けられたサムネイル画像により表されるコンテンツ等の種類、サムネイル画像のリンク先（コンテンツ本体のデータの記憶場所）、サムネイル画像が貼り付けられたデータベース上の位置を表す座標、コンテンツに関するその他の情報がデータベース構成情報により表されている。

サムネイル画像が貼り付けられたり、手書き文字が入力される毎に、これらの情報がデータベース構成情報に登録される。図２１の例においては、データベース構成情報の２段目に、あるデータベースに入力された手書き文字のリンク先はリンク情報＃１であり、入力位置は座標（ｘ₁，ｙ₁）であることが登録されている。また、手書き文字の幅Ｗ₁、高さｈ₁とともに、その他の情報として、手書き文字の色、ペンの太さ等が登録されている。

同様に、同じデータベースに貼り付けられた動画コンテンツ、静止画コンテンツ、テキスト、音声コンテンツのそれぞれのサムネイル画像のリンク情報、位置、幅、高さ、その他の情報も登録されている。なお、図２１においてデータベースに入力されたものとして示されている「テキスト」は、例えば、予定表のデータベースに入力された予定である。また、データベース構成情報に登録される「座標」は、例えば、サムネイル画像の左上隅の座標である。

図２０の説明に戻り、データベース処理ソフトウエア３７１により管理されているデータベース３９１にはコンテンツ＃１乃至＃３が関連付けられている（コンテンツ＃１乃至＃３のそれぞれのサムネイル画像がデータベース３９１に貼り付けられている）。

すなわち、この場合、データベース処理ソフトウエア３７１は、データベース構成情報を用いて、データベース３９１に関連付けられているコンテンツ＃１乃至＃３のコンテンツの種類、サムネイル画像のリンク情報、貼り付け位置、その他の情報を管理している。

データベース処理ソフトウエア３７１は、データベース３９１に貼り付けられたサムネイル画像がタップされ、コンテンツの再生が指示されたとき、コンテンツ処理ソフトウエア群３６２を構成するコンテンツ処理ソフトウエアのいずれかにコンテンツの再生を要求する。

また、データベース処理ソフトウエア３７１は、ユーザにより一覧表示ボタン２２１が操作され、作成中のデータベース３９１に貼り付けるサムネイル画像の一覧の表示が指示されたとき、そのことをサムネイル表示ソフトウエア３６３に通知し、サムネイル画像の一覧を表示させる。

コンテンツ処理ソフトウエア群３６２は、静止画コンテンツの再生（プレビュー）を管理する静止画コンテンツ処理ソフトウエア３８１−１、動画コンテンツの再生を管理する動画コンテンツ処理ソフトウエア３８１−２、音声コンテンツの再生を管理する音声コンテンツ処理ソフトウエア３８１−３、コンテンツとして用意されているメモの再生（プレビュー）を管理するメモコンテンツ処理ソフトウエア３８１−４から構成される。以下、静止画コンテンツ処理ソフトウエア３８１−１乃至メモコンテンツ処理ソフトウエア３８１−４を個々に区別する必要がない場合、まとめてコンテンツ処理ソフトウエア３８１という。

コンテンツ処理ソフトウエア３８１は、記憶部１３９やMS３に記憶されている全てのコンテンツ３９２を管理しており、コンテンツのビューワの機能を提供する。データベース処理ソフトウエア３７１から静止画コンテンツの再生が要求されたとき、静止画コンテンツ処理ソフトウエア３８１−１により静止画コンテンツの再生が行われ、動画コンテンツの再生が要求されたとき、動画コンテンツ処理ソフトウエア３８１−２により動画コンテンツの再生が行われる。また、音声コンテンツの再生が要求されたとき、音声コンテンツ処理ソフトウエア３８１−３により音声コンテンツの再生が行われ、メモの再生が要求されたとき、メモコンテンツ処理ソフトウエア３８１−４によりメモの再生が行われる。

なお、メモの再生は、それを作成したデータベース処理ソフトウエア３７１（メモデータベース処理ソフトウエア３７１−１）により行われるようにしてもよい。

上述したように、ユーザは、サムネイル表示領域２４１に一覧表示されているサムネイル画像をタップすることによってもコンテンツを再生させることができる。サムネイル表示領域２４１に表示されているサムネイル画像がタップされたとき、サムネイル表示ソフトウエア３６３からそのことが通知され、再生が指示されたコンテンツのカテゴリに応じて、コンテンツ処理ソフトウエア３８１によりコンテンツの再生が行われる。

サムネイル表示ソフトウエア３６３は、データベース処理ソフトウエア３７１からサムネイル画像の一覧の表示が要求されたとき、コンテンツ３９２を参照して、それぞれのコンテンツを表すサムネイル画像を生成し、サムネイル画像をサムネイル表示領域２４１に一覧表示させる。また、サムネイル表示ソフトウエア３６３は、サムネイル画像として一覧表示させるコンテンツのカテゴリを制限することが要求されたとき（カテゴリ選択ボタン２６１乃至２６４のいずれかが操作されたとき）、その要求に応じてサムネイル画像の表示を更新させる。

さらに、サムネイル表示ソフトウエア３６３は、サムネイル表示領域２４１に表示されているサムネイル画像がタップされたとき、コンテンツの再生をコンテンツ処理ソフトウエア３８１に要求する。

図２２は、図２０の各ソフトウエアが実行されることで実現されるPDA１の機能構成例を示すブロック図である。

データベース処理ソフトウエア３７１により実現されるデータベース構成情報管理部４０１は、タッチパネル３６において検出されるユーザからの入力に基づいて、図２１に示されるようなデータベース構成情報を管理し、必要に応じてデータベース構成情報をデータベース表示制御部４０２に提供する。

また、データベース構成情報管理部４０１は、データベースに貼り付けられているサムネイル画像がタップされ、コンテンツの再生が指示されたことをタッチパネル３６からの出力に基づいて検出した場合、それを再生要求部４０３に通知する。

データベース表示制御部４０２は、データベース構成情報管理部４０１から提供される情報に従って、図７のメモ作成領域２１１や図１４の予定入力領域３０１の表示を制御する。

例えば、データベース表示制御部４０２は、データベース構成情報管理部４０１から図２１のデータベース構成情報が提供されたとき、手書き文字（２段目に登録されている情報）を、その他の情報で表される色、太さで、座標（ｘ１，ｙ１）で表される位置に表示させるとともに、他のコンテンツについても、サムネイル画像等をデータベース上の所定の位置に、所定の大きさで表示させる。サムネイル画像の大きさを表す情報は、例えば、図２１のその他の情報として記述されている。

再生要求部４０３は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ処理ソフトウエア３８１−１により実現される静止画コンテンツ再生部４２１−１に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ処理ソフトウエア３８１−２により実現される動画コンテンツ再生部４２１−２に動画コンテンツの再生を要求する。

また、再生要求部４０３は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ処理ソフトウエア３８１−３により実現される音声コンテンツ再生部４２１−３に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ処理ソフトウエア３８１−４により実現されるメモコンテンツ再生部４２１−４にメモの再生を要求する。

表示要求部４０４は、一覧表示ボタン２２１に対するユーザの操作を検出し、サムネイル画像の一覧を表示することが指示された場合、それをサムネイル表示ソフトウエア３６３により実現される検索部４１１に要求し、一方、サムネイル画像の一覧を閉じることが指示された場合、それをサムネイル画像表示制御部４１３に要求する。

サムネイル表示ソフトウエア３６３により実現される検索部４１１は、静止画コンテンツの検索を行う静止画コンテンツ検索部４１１−１、動画コンテンツの検索を行う動画コンテンツ検索部４１１−２、音声コンテンツの検索を行う音楽コンテンツ検索部４１１−３、メモの検索を行うメモコンテンツ検索部４１１−４から構成される。このように、PDA１には、コンテンツの検索を行う機能部がコンテンツのカテゴリ毎に用意される。

静止画コンテンツ検索部４１１−１乃至メモコンテンツ検索部４１１−４のそれぞれは、サムネイル画像の一覧を表示することがデータベース処理ソフトウエア３７１の表示要求部４０４から要求されることに応じてコンテンツの検索を行い、検索結果をサムネイル画像生成部４１２に出力する。静止画コンテンツ検索部４１１−１乃至メモコンテンツ検索部４１１−４によるコンテンツの検索は、PDA１にMS３やCF４が装着されている場合には、MS３、CF４、および記憶部１３９を対象として行われ、MS３やCF４が装着されていない場合には、記憶部１３９のみを対象として行われる。

サムネイル画像生成部４１２は、検索部４１１（静止画コンテンツ検索部４１１−１乃至メモコンテンツ検索部４１１−４）から供給される検索結果に基づいて、各コンテンツのサムネイル画像を生成する。上述したように、例えば、静止画コンテンツのサムネイル画像として、静止画を縮小した画像を生成し、動画コンテンツのサムネイル画像として、先頭の１フレームの画像を縮小した画像を生成する。サムネイル画像生成部４１２により生成されたサムネイル画像はサムネイル画像表示制御部４１３に出力される。

なお、サムネイル画像を生成するサムネイル画像生成部４１２は、コンテンツ処理ソフトウエア３８１により実現されるようにしてもよい。この場合、検索部４１１によるコンテンツの検索結果がコンテンツ処理ソフトウエア３８１のサムネイル画像生成部４１２に通知され、その通知に応じて、サムネイル画像が生成される。生成されたサムネイル画像は、サムネイル表示ソフトウエア３６３のサムネイル画像表示制御部４１３に供給され、LCD２８に表示される。

サムネイル画像表示制御部４１３は、サムネイル画像生成部４１２から供給されるサムネイル画像をサムネイル表示領域２４１に一覧表示させる。また、サムネイル画像表示制御部４１３は、タッチパネル３６からの出力に基づいて、カテゴリ選択ボタン２６１乃至２６４のいずれかが操作されたことを検出した場合、操作されたボタンに対応するカテゴリのコンテンツのサムネイル画像を除くように一覧の表示を更新する。

さらに、サムネイル画像表示制御部４１３は、タッチパネル３６からの出力に基づいて、サムネイル表示領域２４１に表示させているサムネイル画像がタップされ、コンテンツを再生することがユーザから指示された場合、そのことを再生要求部４１４に通知する。

再生要求部４１４は、データベース処理ソフトウエア３７１の再生要求部４０３と同様に、再生が指示されたコンテンツのカテゴリに応じて、静止画コンテンツ再生部４２１−１乃至メモコンテンツ再生部４２１−４のいずれかにコンテンツの再生を要求する。

次に、PDA１の動作についてフローチャートを参照して説明する。

始めに、図２３のフローチャートを参照して、データ処理ソフトウエア３７１により実行されるデータベース作成処理について説明する。

ステップＳ１において、データベース構成情報管理部４０１は、タッチパネル３６からの出力に基づいて、例えば、手書き文字の入力やサムネイル画像の貼り付けなどの、ユーザによる入力があったか否かを判定する。

ステップＳ１において、ユーザによる入力があったと判定した場合、ステップＳ２に進み、データベース構成情報管理部４０１は、その入力に応じて、自分自身が管理するデータベース構成情報を更新する。また、ステップＳ２においては、データベース構成情報管理部４０１によるデータベース構成情報の更新に伴い、その更新が、データベース表示制御部４０２によりデータベースの表示に反映される。

これにより、例えば、曲線の手書き文字がユーザにより入力された場合、この手書き文字の入力された位置を表す座標や、色、ペンの太さがデータベース構成情報に登録される。また、新たに登録された情報がデータベースの表示に反映され、図８に示されるような画像２３１がLCD２８に表示される。

ステップＳ１において、ユーザからの入力がないと判定された場合、ステップＳ２の処理はスキップされる。

ステップＳ３において、表示要求部４０４は、サムネイル画像の一覧を表示済みであるか否かを判定し、まだ表示していないと判定した場合、ステップＳ４に進む。

ステップＳ４において、表示要求部４０４は、サムネイル画像の一覧の表示が指示されたか否かをタッチパネル３６からの出力に基づいて判定する。

一覧表示ボタン２２１が操作されたため、ステップＳ４において、サムネイル画像の一覧の表示が指示されたと判定した場合、表示要求部４０４は、ステップＳ５に進み、サムネイル画像の一覧の表示をサムネイル表示ソフトウエア３６３（検索部４１１）に要求する。

この要求に応じて、サムネイル表示ソフトウエア３６３においては、サムネイル画像の一覧の表示が行われる。サムネイル表示ソフトウエア３６３による処理の詳細については図２４のフローチャートを参照して後述する。

ステップＳ６において、データベース構成情報管理部４０１は、データベースに対するサムネイル画像の貼り付けが、サムネイル表示ソフトウエア３６３のサムネイル画像表示制御部４１３から通知されたか否かを判定する。サムネイル表示領域２４１に表示されたサムネイル画像の一覧から選択されたサムネイル画像が、ドラッグアンドドロップにより例えばメモ作成領域２１１に貼り付けられたとき、そのことがサムネイル画像表示制御部４１３から通知されてくる（図２４のステップＳ３１）。

データベース構成情報管理部４０１は、ステップＳ６において、データベースに対するサムネイル画像の貼り付けが通知されてきたと判定した場合、ステップＳ７に進み、データベース構成情報を更新する。このときも、そのデータベース構成情報の更新がデータベース表示制御部４０２によりデータベースの表示に反映される。

これにより、例えば、図９に示されるように、サムネイル画像２５３がサムネイル表示領域２４１からドラッグアンドドロップにより位置Ｐ１に貼り付けられたとき、そのサムネイル画像２５３により表されるコンテンツ本体のデータの記録場所を表すリンク情報や、位置Ｐ１の座標等がデータベース構成情報に登録され、表示に反映される（図１０）。

ステップＳ４において、サムネイル画像の一覧の表示が指示されていないと判定された場合、ステップＳ５乃至Ｓ７の処理はスキップされる。また、ステップＳ６において、サムネイル画像の貼り付けが通知されていないと判定された場合、ステップＳ７の処理はスキップされる。

一方、ステップＳ３において、表示要求部４０４は、サムネイル画像の一覧を表示済みであると判定した場合、ステップＳ８に進み、表示しているサムネイル画像の一覧を閉じることが指示されたか否かを判定する。サムネイル画像の一覧が表示されているときに一覧表示ボタン２２１を操作することによって、ユーザは、サムネイル画像の一覧を閉じることができる。

ステップＳ８において、表示要求部４０４は、表示しているサムネイル画像の一覧を閉じることが指示されていないと判定した場合、ステップＳ６に進み、それ以降の処理を実行する。

表示要求部４０４は、ステップＳ８において、一覧を閉じることが指示されたと判定した場合、ステップＳ９に進み、サムネイル画像の一覧を閉じることをサムネイル表示ソフトウエア３６３のサムネイル画像表示制御部４１３に要求する。この要求に応じて、サムネイル表示ソフトウエア３６３によってサムネイル画像の一覧の表示が消される。その後、処理はステップＳ１０に進む。

ステップＳ１０において、データベース構成情報管理部４０１は、データベースに貼り付けたコンテンツの再生がユーザから指示されたか否かを判定し、データベースに貼り付けたサムネイル画像がタップされたことから、そのサムネイル画像により表されるコンテンツの再生が指示されたと判定した場合、そのことを再生要求部４０３に通知する。

再生要求部４０３は、ステップＳ１１において、コンテンツの再生をコンテンツ処理ソフトウエア３８１に対して要求する。再生要求部４０３は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ再生部４２１−１に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ再生部４２１−２に動画コンテンツの再生を要求する。また、再生要求部４０３は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ再生部４２１−３に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ再生部４２１−４にメモの再生を要求する。

データベース構成情報管理部４０１は、ステップＳ１２において、データベースの作成を終了するか否かを判定し、終了しないと判定した場合、ステップＳ１に戻り、それ以降の処理を繰り返し実行する。

一方、ステップＳ１２において、データベース構成情報管理部４０１は、例えば、図６のメインの画面に戻ることが指示されたため、データベースの作成を終了させると判定した場合、作成中のデータベースに関するデータベース構成情報を記憶部１３９などに保存し、処理を終了させる。

次に、図２４のフローチャートを参照して、サムネイル表示ソフトウエア３６３により実行されるサムネイル画像の表示制御処理について説明する。

この処理は、データベース処理ソフトウエア３７１の表示要求部４０４からの要求（図２３のステップＳ５）があったときに開始される。

ステップＳ２１において、検索部４１１は、記憶部１３９やMS３などに記憶されているコンテンツを対象として、データベースに貼り付けることのできる全てのカテゴリのコンテンツの検索を行う。

具体的には、静止画コンテンツ検索部４１１−１により静止画コンテンツの検索が行われ、動画コンテンツ検索部４１１−２により動画コンテンツの検索が行される。また、音声コンテンツ検索部４１１−３により音声コンテンツの検索が行われ、メモコンテンツ検索部４１１−４によりメモコンテンツの検索が行われる。静止画コンテンツ検索部４１１−１至メモコンテンツ検索部４１１−４によるそれぞれの検索結果は、サムネイル画像生成部４１２に出力される。

サムネイル画像生成部４１２は、ステップＳ２２において、それぞれのカテゴリのコンテンツのサムネイル画像を生成し、生成したサムネイル画像をサムネイル画像表示制御部４１３に出力する。上述したように、サムネイル画像生成部４１２がコンテンツ処理ソフトウエア３８１により実現される場合、ステップＳ２１での検索結果がサムネイル画像生成部４１２に通知され、サムネイル画像が生成される。

ステップＳ２３において、サムネイル画像表示制御部４１３は、サムネイル画像の一覧を表示させる。これにより、図９に示されるように、サムネイル表示領域２４１がLCD２８上に形成され、そこに、サムネイル画像の一覧が表示される。

ステップＳ２４において、サムネイル画像表示制御部４１３は、タッチパネル３６からの出力に基づいて、サムネイル画像のカテゴリの選択が行われたか否かを判定し、カテゴリ選択ボタン２６１乃至２６４のいずれかが操作され、カテゴリの選択が行われたと判定した場合、ステップＳ２５に進む。

ステップＳ２５において、サムネイル画像表示制御部４１３は、ユーザによる入力に応じてサムネイル画像の表示を更新させる。サムネイル画像表示制御部４１３は、例えば、カテゴリ選択ボタン２６１が操作されたとき、既に表示させているサムネイル画像の中から、静止画コンテンツのサムネイル画像を除くことで表示を更新し、カテゴリ選択ボタン２６２が操作されたとき、動画コンテンツのサムネイル画像を除くことで表示を更新する。カテゴリ選択ボタン２６３，２６４が操作されたときも同様に、メモ、音声コンテンツのサムネイル画像が除かれることで表示が更新される。

ステップＳ２４において、カテゴリの選択が行われていないと判定された場合、ステップＳ２５の処理はスキップされる。

ステップＳ２６において、サムネイル画像表示制御部４１３は、タッチパネル３６からの出力に基づいて、サムネイル表示領域２４１にサムネイル画像を表示させているコンテンツの再生が指示されたか否かを判定する。

サムネイル画像がタップされたことから、ステップＳ２６において、そのサムネイル画像により表されるコンテンツの再生が指示されたと判定した場合、サムネイル画像表示制御部４１３は、そのことを再生要求部４１４に通知する。

再生要求部４１４は、ステップＳ２７において、コンテンツの再生をコンテンツ処理ソフトウエア３８１に対して要求する。再生要求部４１４は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ再生部４２１−１に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ再生部４２１−２に動画コンテンツの再生を要求する。また、再生要求部４１４は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ再生部４２１−３に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ再生部４２１−４にメモの再生を要求する。

ステップＳ２６において、コンテンツの再生が指示されていないと判定された場合、ステップＳ２７の処理はスキップされる。

ステップＳ２８において、サムネイル画像表示制御部４１３は、サムネイル表示領域２４１に表示させているサムネイル画像の上にスタイラス２の先端が押し当てられたか否かを判定し、押し当てられたと判定した場合、ステップＳ２９に進み、スタイラス２の移動に連動してサムネイル画像の表示位置を移動させる。

ステップＳ３０において、サムネイル画像表示制御部４１３は、サムネイル画像に対するスタイラス２の先端の押し当てが終わったか否か、すなわち、スタイラス２の先端がLCD２８の表面から離されたか否かを判定し、スタイラス２の先端がLCD２８の表面から離されていないと判定した場合、ステップＳ２９に戻り、表示位置の移動を繰り返す。

一方、ステップＳ３０において、サムネイル画像表示制御部４１３は、LCD２８の表面からスタイラス２の先端が離され、作成中のデータベースの上にサムネイル画像が移動されたと判定した場合、ステップＳ３１に進み、データベース処理ソフトウエア３７１のデータベース構成情報管理部４０１に対して、サムネイル画像の貼り付けを要求する。

このとき、サムネイル画像の移動先の位置を表す情報や、そのサムネイル画像のリンク情報などの各種の情報がサムネイル画像表示制御部４１３からデータベース構成情報管理部４０１に通知される。

このようなサムネイル画像の貼り付けの通知が行われた後、または、ステップＳ２８において、サムネイル画像に対してスタイラス２の先端が押し当てられていないと判定された場合、処理はステップＳ３２に進む。

ステップＳ３２において、サムネイル画像表示制御部４１３は、サムネイル画像の一覧を閉じること要求されたか否かを判定し、要求されていないと判定した場合、ステップＳ２６に戻り、それ以降の処理を繰り返す。

また、サムネイル画像表示制御部４１３は、ステップＳ３２において、サムネイル画像の一覧を閉じることが要求されたと判定した場合、一覧を閉じ、処理を終了させる。この要求は、データベース処理ソフトウエア３７１の表示要求部４０４から通知されるものである（図２３のステップＳ９）。

次に、図２５のフローチャートを参照して、コンテンツ処理ソフトウエア３８１により実行されるコンテンツの再生処理について説明する。

例えば、この処理が静止画コンテンツ処理ソフトウエア３８１−１により実行される場合、静止画コンテンツ再生部４２１−１は、ステップＳ４１において、静止画コンテンツの再生（プレビュー）が要求されたか否かを判定し、要求されたと判定するまで待機する。

データベースに貼り付けられた静止画コンテンツのサムネイル画像がタップされたとき、または、サムネイル表示領域２４１に表示されている静止画コンテンツのサムネイル画像がタップされたとき、データベース処理ソフトウエア３７１の再生要求部４０３、サムネイル表示ソフトウエア３６３の再生要求部４１４からそれぞれ静止画コンテンツの再生が要求されてくる（図２３のステップＳ１１、図２４のステップＳ２７）。再生要求部４０３、再生要求部４１４からの要求には、コンテンツ本体の記憶位置を表す情報等も含まれる。

なお、サムネイル画像がタップされたときにすぐにコンテンツの再生が開始されるのではなく、サムネイル画像がタップされたとき、タップされたコンテンツに対してユーザが選択可能な操作の内容を表すメニューが表示され、そのメニューからある操作が選択されてからコンテンツの再生が開始されるようにしてもよい。サムネイル画像がタップされたときに表示されるメニューには、例えば、コンテンツの再生／はがす／拡大／縮小／削除等が、ユーザが選択可能な操作として用意される。

静止画コンテンツ再生部４２１−１は、ステップＳ４１において、静止画コンテンツの再生が要求されたと判定した場合、ステップＳ４２に進み、再生要求部４０３、再生要求部４１４からの要求に含まれる情報に基づいてコンテンツ本体のデータを取得し、その再生を開始する。

これにより、LCD２８上には、例えば、図１１に示されるような静止画のプレビューが表示される。静止画コンテンツ再生部４２１−１は、以上の処理を繰り返し、静止画コンテンツの再生を行う。

同様の処理が動画コンテンツ再生部４２１−２、音声コンテンツ再生部４２１−３、メモコンテンツ再生部４２１−４によりそれぞれのカテゴリのコンテンツに対して行われる。

以上においては、データベースに貼り付けるコンテンツは、静止画、動画、音声、メモ（予定表の作成時）のコンテンツであるとしたが、貼り付け可能なコンテンツは、これらのものに限られない。例えば、図６のアプリケーションアイコン２０４や、予め用意されている貼り付け用の画像（例えば、星形の画像）など、各種の情報をコンテンツとして貼り付けることができるようにしてもよい。例えば、アプリケーションアイコン２０４をメモに貼り付けておき、それを用いることで、表示させているメモからソフトウエアを直接起動させることができる。

また、予定表に登録した１つの予定の項目や、アドレス帳に登録した１つのアドレス情報などのいわゆるPIM(Personal Information Manager)情報を、コンテンツとしてデータベースに貼り付けることができるようにしてもよい。

さらに、以上においては、上述したようなデータベースに対するコンテンツの貼り付けは、PDA１において行われるとしたが、この他、携帯電話機やノートブック型のパーソナルコンピュータなど、各種の機器において行われるようにしてもよい。

上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウエアにより実行させることもできる。

一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば、汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。

この記録媒体は、図５に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されているMS３やCF４などよりなるパッケージメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM１３２や記憶部１３９などで構成される。

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

本体部に対して表示部を閉じた状態のPDAの外観の例を示す斜視図である。 本体部に対して表示部を開いた状態のPDAの外観の例を示す斜視図である。 PDAの背面側の外観の例を示す斜視図である。 PDAの背面側の他の外観の例を示す斜視図である。 PDAの内部構成の例を示すブロック図である。 メイン画面の例を示す図である。 メモの作成画面の例を示す図である。 メモの作成画面の他の例を示す図である。 メモの作成画面のさらに他の例を示す図である。 メモの作成画面の例を示す図である。 コンテンツの表示画面の例を示す図である。 図１０の画面を構成する階層の例を示す図である。 図９のサムネイル表示領域の詳細を示す図である。 予定表の作成画面の例を示す図である。 予定表の作成画面の他の例を示す図である。 予定表の作成画面のさらに他の例を示す図である。 予定表の作成画面の例を示す図である。 予定表の作成画面の例を示す図である。 図１７の画面を構成する階層の例を示す図である。 PDAに用意されるソフトウエア構成の例を示すブロック図である。 データベース構成情報の例を示す図である。 機能構成例を示すブロック図である。 データベース処理ソフトウエアのデータベース作成処理について説明するフローチャートである。 サムネイル表示ソフトウエアの表示制御処理について説明するフローチャートである。 コンテンツ処理ソフトウエアの再生処理について説明するフローチャートである。

符号の説明

１ PDA， ２ スタイラス， ３６１ データベース処理ソフトウエア群， ３６２ コンテンツ処理ソフトウエア群， ３６３ サムネイル表示ソフトウエア， ４０１ データベース構成情報管理部， ４０２ データベース表示制御部， ４０３ 再生要求部， ４０４ 表示要求部， ４１１ 検索部， ４１２ サムネイル画像生成部， ４１３ サムネイル画像表示制御部， ４１４ 再生要求部

Claims (5)

1. コンテンツの内容を表す画像であって、選択されることでコンテンツの再生が開始される前記画像の貼り付け先となる領域の表示を制御する第１の表示制御手段と、
   前記画像の一覧の表示指示がされたとき、前記画像の一覧を表示させる第２の表示制御手段と
   を備え、
   前記第１の表示制御手段による制御により、前記画像の貼り付け先となる前記領域には、前記領域で作成されるデータのカテゴリに応じて、異なる数の階層から構成される１つの画面が表示される
   ことを特徴とする情報処理装置。
2. 前記第２の表示制御手段は、前記表示指示があるまで前記画像の貼り付け先となる前記領域の一部を形成していた領域に、前記画像の一覧を表示させる
   ことを特徴とする請求項１に記載の情報処理装置。
3. 前記第２の表示制御手段は、前記画像の貼り付け先となる前記領域で作成されるデータのカテゴリに応じて、または、ユーザからの指示に応じて、前記画像を表示するコンテンツのカテゴリの数を切り替える
   ことを特徴とする請求項１に記載の情報処理装置。
4. コンテンツの内容を表す画像であって、選択されることでコンテンツの再生が開始される前記画像の貼り付け先となる領域に、前記領域で作成されるデータのカテゴリに応じて、異なる数の階層から構成される１つの画面を表示させる第１の表示制御ステップと、
   前記画像の一覧の表示指示がされたとき、前記画像の一覧を表示させる第２の表示制御ステップと
   を含むことを特徴とする情報処理方法。
5. コンテンツの内容を表す画像であって、選択されることでコンテンツの再生が開始される前記画像の貼り付け先となる領域の表示を制御する第１の表示制御ステップと、
   前記画像の一覧の表示指示がされたとき、前記画像の一覧を表示させる第２の表示制御ステップと
   を含み、
   前記第１の表示制御ステップの処理による制御により、前記画像の貼り付け先となる前記領域には、前記領域で作成されるデータのカテゴリに応じて、異なる数の階層から構成される１つの画面が表示される
   ことを特徴とするコンピュータが読み取り可能なプログラム。

Images