JP4419056B2 - Information processing apparatus and method, and program - Google Patents

Information processing apparatus and method, and program Download PDF

Info

Publication number
JP4419056B2
JP4419056B2 JP2004005425A JP2004005425A JP4419056B2 JP 4419056 B2 JP4419056 B2 JP 4419056B2 JP 2004005425 A JP2004005425 A JP 2004005425A JP 2004005425 A JP2004005425 A JP 2004005425A JP 4419056 B2 JP4419056 B2 JP 4419056B2
Authority
JP
Japan
Prior art keywords
content
displayed
image
thumbnail
thumbnail image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004005425A
Other languages
Japanese (ja)
Other versions
JP2005202482A (en
Inventor
幸司 小林
晃一 佐藤
真 田渕
晋 伊地知
一 吉増
かおり 橿本
隆司 竹之内
弘之 増田
佳代子 山崎
綾子 天野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2004005425A priority Critical patent/JP4419056B2/en
Publication of JP2005202482A publication Critical patent/JP2005202482A/en
Application granted granted Critical
Publication of JP4419056B2 publication Critical patent/JP4419056B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Description

本発明は、情報処理装置および方法、並びにプログラムに関し、特に、直感的な操作で、異なるカテゴリの複数のコンテンツを1つのデータにまとめることができるようにすると共に、その1つのデータから、それにまとめられているそれぞれのコンテンツを容易に参照することができるようにする情報処理装置および方法、並びにプログラムに関する。   The present invention relates to an information processing apparatus and method, and a program, and in particular, enables a plurality of contents of different categories to be combined into one data by intuitive operation, and from the one data to the data. The present invention relates to an information processing apparatus and method, and a program that make it possible to easily refer to each of the contents.

近年、ディジタルカメラや、撮影機能が搭載された携帯電話機の普及に伴い、パーソナルコンピュータを用いて、それらの機器で撮影した画像をテキストデータなどの他のコンテンツに貼り付けることにより資料などを作成することが一般的に行われている。これにより、その作成者は、テキストデータの内容を視覚的にも表現することができる。   In recent years, with the spread of digital cameras and mobile phones equipped with shooting functions, materials are created by pasting images taken with these devices to other contents such as text data using personal computers. It is generally done. As a result, the creator can visually express the contents of the text data.

また、あるコンテンツに他のコンテンツを関連付けて1つのコンテンツを作成するものとしては、音楽コンテンツをテキストデータに関連付けておき(音楽コンテンツのリンク先をテキストデータに埋め込んでおき)、そのテキストデータを画面上に表示させた状態から、直接、音楽コンテンツの再生を開始させることのできる1つのテキストデータを作成することなども行われている。   In addition, as for creating one content by associating another content with a certain content, the music content is associated with the text data (the link destination of the music content is embedded in the text data), and the text data is displayed on the screen. One text data that can directly start playback of music content is created from the state displayed above.

ところで、静止画、動画、音楽などの各種のカテゴリのコンテンツを関連付けることにより、それらのコンテンツを容易に扱うことができるようにする技術として特許文献1に開示されているようなものがある。
特開2001−209658号公報
By the way, there is a technique disclosed in Japanese Patent Application Laid-Open No. 2004-151820 as a technique that allows contents of various categories such as still images, moving images, and music to be associated with each other so as to be easily handled.
JP 2001-209658 A

しかしながら、あるコンテンツに他のコンテンツを関連付けるためには、その、他のコンテンツを格納するフォルダなどを指定し、指定したフォルダから関連付ける対象のコンテンツを選択する必要があり、操作が煩雑であるという課題があった。   However, in order to associate other contents with a certain content, it is necessary to specify a folder or the like for storing the other content, and select a target content to be associated from the designated folder, which is complicated. was there.

例えば、作成中のテキストデータに静止画を貼り付ける場合、テキストデータを作成するウインドウとは別のウインドウに、静止画が格納されたフォルダの内容を表示させ、そのフォルダから、貼り付け対象となる静止画を選択する必要がある。   For example, when pasting a still image to text data being created, the contents of the folder in which the still image is stored are displayed in a window different from the window in which the text data is created, and the target is pasted from that folder. It is necessary to select a still image.

本発明はこのような状況に鑑みてなされたものであり、直感的な操作で、異なるカテゴリの複数のコンテンツを1つのデータにまとめることができるようにするとともに、その1つのデータから、それにまとめられているそれぞれのコンテンツを容易に参照することができるようにするものである。   The present invention has been made in view of such a situation, and enables a plurality of contents of different categories to be combined into one data by an intuitive operation. This makes it possible to easily refer to each of the contents.

また、あるコンテンツを表示させている状態から、その表示中のコンテンツに関連する、他のコンテンツを容易に表示させることができるようにするものである。   In addition, other contents related to the content being displayed can be easily displayed from a state in which a certain content is being displayed.

本発明の情報処理装置は、画像コンテンツを記憶する記憶手段と、前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成する生成手段と、手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、前記生成手段により生成されたサムネイル画像の一覧を表示させる表示制御手段と、前記表示制御手段により表示された前記サムネイル画像が、前記作成領域に表示されている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付ける関連付け手段とを備え、前記表示制御手段は、前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させる。  The information processing apparatus according to the present invention includes a storage unit that stores image content, a generation unit that generates a thumbnail image based on the image content stored in the storage unit, a creation area of handwritten data, and a list of images. Display control means for displaying handwritten data in the creation area of the screen provided with a display area according to an input by a user, and displaying a list of thumbnail images generated by the generation means in the display area; and the display control Each time the thumbnail image displayed by the means is pasted on the handwritten data displayed in the creation area by a drag-and-drop operation, the identification information of the image content from which the thumbnail image is created is pasted. By creating table information describing the identification information of the handwritten data, Association means for associating the handwritten data and the display control means, wherein the display control means displays a plurality of the thumbnail images pasted on the handwritten data and overlaid on the handwritten data. When the first thumbnail image is selected from the images, the first image content that is the generation source of the first thumbnail image is displayed in place of the handwritten data, and the operation is performed when related content is displayed. When the button is operated, the thumbnail image of the other image content associated with the handwritten data is horizontally displayed in the area where the part of the first image content is displayed. Among the thumbnail images of the other image content displayed side by side and displayed side by side When the second thumbnail image is selected, the display of the thumbnail image of the other image content is erased, and the second image content from which the selected second thumbnail image is generated is used as the first image. Each time the button pointing to the right direction or the button pointing to the left direction is operated, the button pointing to the right direction and the button pointing to the left direction are displayed side by side. Are displayed sequentially.

本発明の情報処理方法またはプログラムは、画像コンテンツを記憶手段に記憶し、前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成し、手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、生成したサムネイル画像の一覧を表示させ、表示させた前記サムネイル画像が、前記作成領域に表示させている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付け、前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させるステップを含む。  An information processing method or program according to the present invention stores image content in a storage unit, generates a thumbnail image based on the image content stored in the storage unit, and displays a handwritten data creation area and a list of images. Handwritten data is displayed in response to user input in the creation area of the screen where the area is provided, a list of generated thumbnail images is displayed in the display area, and the displayed thumbnail image is displayed in the creation area Each time the handwritten data is pasted to the handwritten data by a drag-and-drop operation, table information describing the identification information of the image content from which the thumbnail image is generated and the identification information of the handwritten data is created. By associating the image content with the handwritten data, When the first thumbnail image is selected from the plurality of thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed, the generation source of the first thumbnail image The first image content is displayed in place of the handwritten data, and a button operated when displaying the related content is displayed. When the button is operated, a part of the first image content is displayed. In the thumbnail image of the other image content displayed side by side in the region where the thumbnail images of the other image content associated with the handwritten data are displayed side by side. When the second thumbnail image is selected, the display of the thumbnail image of the other image content is erased, The selected second image content from which the second thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right and a button pointing to the left are displayed side by side, and the right Each time the button indicating the direction or the button indicating the left direction is operated, the step of sequentially displaying the other image contents is included.

本発明においては、画像コンテンツが記憶手段に記憶され、前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像が生成される。また、手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータが表示され、前記表示領域に、生成されたサムネイル画像の一覧が表示され、表示された前記サムネイル画像が、前記作成領域に表示されている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータが関連付けられる。前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像が表示されている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツが前記手書きデータに替えて表示されるとともに、関連するコンテンツを表示するときに操作されるボタンが表示され、前記ボタンが操作された場合、前記第1の画像コンテンツの一部が表示されていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像が横方向に並べて表示される。横方向に並べて表示された前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示が消され、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツが前記第1の画像コンテンツに替えて表示されるとともに、右方向を指すボタンと左方向を指すボタンが並べて表示され、前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツが順次表示される。  In the present invention, image content is stored in the storage means, and a thumbnail image is generated based on the image content stored in the storage means. In addition, handwritten data is displayed in response to a user input in the creation area of the screen where a handwritten data creation area and an image list display area are provided, and a list of generated thumbnail images is displayed in the display area. Each time the displayed thumbnail image is pasted to the handwritten data displayed in the creation area by a drag-and-drop operation, the identification information of the image content from which the thumbnail image is pasted and the identification information By creating table information describing identification information of handwritten data, the image content and the handwritten data are associated with each other. When a first thumbnail image is selected from the plurality of thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed over the handwritten data, the first thumbnail image is selected. The first image content from which the thumbnail image is generated is displayed in place of the handwritten data, and a button operated when displaying related content is displayed. When the button is operated, the first image content is displayed. The thumbnail images of other image contents associated with the handwritten data are displayed side by side in an area where a part of the image content is displayed. When the second thumbnail image is selected from the thumbnail images of the other image content displayed side by side in the horizontal direction, the display of the thumbnail image of the other image content is erased and the selected first image is displayed. The second image content from which the thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right and a button pointing to the left are displayed side by side, and the button pointing to the right Each time the button pointing in the left direction is operated, the other image contents are sequentially displayed.

本発明によれば、貼り付け対象となるデータに対して、直感的な操作でコンテンツの内容を表す画像を貼り付けることができる。   According to the present invention, it is possible to paste an image representing the contents of content to data to be pasted by an intuitive operation.

また、本発明によれば、コンテンツの内容を表す画像が貼り付けられたデータから、そのコンテンツを容易に参照することができる。   Further, according to the present invention, it is possible to easily refer to the content from the data to which the image representing the content is pasted.

さらに、本発明によれば、画面の表示を、あるコンテンツを表示している状態から、その表示中のコンテンツに関連する他のコンテンツを表示する状態に、容易に切り替えることができる。   Furthermore, according to the present invention, the screen display can be easily switched from a state in which a certain content is displayed to a state in which another content related to the content being displayed is displayed.

本発明によれば、画面の表示を、あるコンテンツを表示している状態から、その表示中のコンテンツが関連付けられているデータを表示する状態に、容易に切り替えることができる。   According to the present invention, the screen display can be easily switched from a state in which a certain content is displayed to a state in which data associated with the displayed content is displayed.

以下、本発明の実施の形態について図を参照して説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

本発明を適用したPDA(Personal Digital Assistants)1の外観を図1乃至図4に示す。図1および図2はPDA1の本体正面側の外観を示す斜視図であり、図3および図4は本体背面側の外観を示す斜視図である。   The external appearance of a PDA (Personal Digital Assistants) 1 to which the present invention is applied is shown in FIGS. 1 and 2 are perspective views showing the appearance of the front side of the main body of the PDA 1, and FIGS. 3 and 4 are perspective views showing the appearance of the back side of the main body.

PDA1は、図2に示される中央のヒンジ部12を境に、表示部11と本体部13とに分けられており、ヒンジ部12を介して折り畳み可能に形成されている(折り畳んだ状態を図1に示す)。   The PDA 1 is divided into a display portion 11 and a main body portion 13 with a central hinge portion 12 shown in FIG. 2 as a boundary, and is formed to be foldable via the hinge portion 12 (the folded state is illustrated). 1).

図2に示されるように、表示部11の面11−1のほぼ全面には、LCD(Liquid Crystal Display)28、および、LCD28の上に積層された透明なタッチパネル36が設けられている。すなわち、ユーザが、指先や図1のスタイラス2の先端をLCD28上の任意の位置に接触させると、その座標がタッチパネル36により検出され、検出された座標に対応する所定の処理が行われる。   As shown in FIG. 2, an LCD (Liquid Crystal Display) 28 and a transparent touch panel 36 stacked on the LCD 28 are provided on almost the entire surface 11-1 of the display unit 11. That is, when the user touches the fingertip or the tip of the stylus 2 in FIG. 1 with an arbitrary position on the LCD 28, the coordinates are detected by the touch panel 36, and predetermined processing corresponding to the detected coordinates is performed.

ヒンジ部12には、CCD(Charge Coupled Device)等よりなるカメラ部21が設けられている。   The hinge portion 12 is provided with a camera portion 21 made of a CCD (Charge Coupled Device) or the like.

PDA1を折り畳んだときに面11−1(表示部11)に対向する面となる本体部13の上面13−1には、PDA1にインストールされている、例えば、スケジュール管理用のプログラム、電話帳管理用のプログラム等のアプリケーションプログラムのそれぞれを表すシンボルが印刷されたボタン32が設けられている。ユーザによりボタン32が押下されたとき、それに対応するアプリケーションプログラムが起動される。   On the upper surface 13-1 of the main body 13 that faces the surface 11-1 (display unit 11) when the PDA 1 is folded, for example, a program for schedule management, telephone book management installed in the PDA 1 A button 32 on which a symbol representing each application program such as a program for printing is printed is provided. When the user presses the button 32, the corresponding application program is activated.

また、上面13−1のボタン32が配置されている領域の中央部には、LCD28に表示されている画面を上下方向にスクロールさせるためのスクロールボタン33が設けられている。さらに、上面13−1のボタン32、スクロールボタン33の下方には、文字、記号、数字等を入力するためのキーボード34が設けられている。   In addition, a scroll button 33 for scrolling the screen displayed on the LCD 28 in the vertical direction is provided at the center of the area where the button 32 on the upper surface 13-1 is arranged. Further, a keyboard 34 for inputting characters, symbols, numbers and the like is provided below the button 32 and the scroll button 33 on the upper surface 13-1.

本体部13の右側面13−2には、不揮発性半導体メモリの一種であるメモリースティック(商標)(以下、MSと記述する)3を装着可能なMSスロット41が設けられている(図1)。なお、MSスロット41には、例えば、Bluetooth(商標)による通信機能拡張モジュールなどの、MS3と同じ形状の機能拡張モジュールを装着させることも可能である。   The right side surface 13-2 of the main body 13 is provided with an MS slot 41 into which a Memory Stick (trademark) (hereinafter referred to as MS) 3, which is a kind of nonvolatile semiconductor memory, can be mounted (FIG. 1). The MS slot 41 can be mounted with a function expansion module having the same shape as that of the MS 3 such as a communication function expansion module based on Bluetooth (trademark).

図3に示されるように、本体部13の左側面13−3には、本体部13に電力を供給するリチウムイオン電池などからなるリムーバブルメインバッテリ162(図5)を着脱するときに開閉するバッテリ蓋26が設けられている。また、左側面13−3には、押下および回転自在なジョグダイヤル25が当該側面から僅かに突出した状態で設けられている。   As shown in FIG. 3, a battery that opens and closes when a removable main battery 162 (FIG. 5) made of a lithium ion battery or the like that supplies power to the main body 13 is attached to or detached from the left side surface 13-3 of the main body 13. A lid 26 is provided. A jog dial 25 that can be pressed and rotated is provided on the left side surface 13-3 so as to slightly protrude from the side surface.

本体部13の背面13−4には、不揮発性半導体メモリの一種であるコンパクトフラッシュ(登録商標)(以下、CFと記述する)4を装着可能なCFスロット42が設けられている。CFスロット42は、図4に示すように、CF4を装着するときには当該背面からポップアップするようになされている。なお、CFスロット42には、例えば、PHS(Personal Handy Phone)による通信機能拡張モジュールなどの、CF4と同じ形状の機能拡張モジュールを装着させることも可能である。   A CF slot 42 into which a CompactFlash (registered trademark) (hereinafter referred to as CF) 4, which is a kind of nonvolatile semiconductor memory, can be mounted is provided on the back surface 13-4 of the main body 13. As shown in FIG. 4, the CF slot 42 pops up from the back when the CF 4 is mounted. The CF slot 42 can be mounted with a function expansion module having the same shape as the CF 4 such as a communication function expansion module using PHS (Personal Handy Phone).

本体部13の下端面13−5(図2)には、リムーバブルメインバッテリ162に対して充電を行うクレードル91(図5)等の付属機器を接続するためのコネクタ67が設けられている。   A connector 67 for connecting an accessory device such as a cradle 91 (FIG. 5) for charging the removable main battery 162 is provided on the lower end surface 13-5 (FIG. 2) of the main body 13.

図5は、以上のような外観構成を有するPDA1の内部の構成例について示すブロック図である。   FIG. 5 is a block diagram illustrating an internal configuration example of the PDA 1 having the above-described external configuration.

CPU(Central Processing Unit)131は、ROM(Read Only Memory)132に記憶されているプログラム、または記憶部139からRAM(Random Access Memory)133にロードされたアプリケーションプログラムに従って各種の処理を実行する。RAM133にはまた、CPU131が各種の処理を実行する上において必要なデータなども適宜記憶される。   A CPU (Central Processing Unit) 131 executes various processes according to a program stored in a ROM (Read Only Memory) 132 or an application program loaded from a storage unit 139 to a RAM (Random Access Memory) 133. The RAM 133 also appropriately stores data necessary for the CPU 131 to execute various processes.

CPU131、ROM132、およびRAM133は、CPUインタフェース135を介して相互に接続されている。CPUインタフェース135には、LCD28に対する画面の表示を制御する表示制御部136も接続されている。   The CPU 131, the ROM 132, and the RAM 133 are connected to each other via the CPU interface 135. The CPU interface 135 is also connected to a display control unit 136 that controls screen display on the LCD 28.

表示制御部136には、カメラ部21、LCD28の他、VRAM138も接続されている。表示制御部136は、CPU131による制御に基づいて、カメラ部21により撮像された画像をVRAM138に記憶させ、そのVRAM138に記憶させている画像や、他のメモリ(MS3、CF4、RAM133、記憶部139)に記憶されている画像をLCD28に表示させる。VRAM138には、カメラ部21により撮像された画像の他、LCD28に表示させる画像も記憶される。   In addition to the camera unit 21 and the LCD 28, a VRAM 138 is also connected to the display control unit 136. The display control unit 136 stores the image captured by the camera unit 21 in the VRAM 138 based on the control by the CPU 131, the image stored in the VRAM 138, and other memories (MS 3, CF 4, RAM 133, storage unit 139. The image stored in () is displayed on the LCD 28. The VRAM 138 stores an image to be displayed on the LCD 28 in addition to an image captured by the camera unit 21.

また、CPUインタフェース135には、ジョグダイヤル25、ボタン32、スクロールボタン33、およびキーボード34等からなる入力部137、タッチパネル36、赤外線通信ポート62、MSスロット41およびCFスロット42に相当するスロットI/F64、リムーバブルメインバッテリ162およびバックアップバッテリ163を充電させるとともに、他の外部装置152との通信の中継装置となるクレードル91等が接続されるコネクタ67、並びに、マイクロフォン142で集音された音声をディジタルデータに変換する音声処理部141が接続されている。   The CPU interface 135 includes an input unit 137 including a jog dial 25, buttons 32, scroll buttons 33, and a keyboard 34, a touch panel 36, an infrared communication port 62, an MS slot 41, and a slot I / F 64 corresponding to the CF slot 42. In addition, the removable main battery 162 and the backup battery 163 are charged, and the connector 67 to which the cradle 91 serving as a relay device for communication with the other external device 152 is connected, and the voice collected by the microphone 142 are converted into digital data. An audio processing unit 141 for converting to is connected.

なお、タッチパネル36により検出された座標を表す情報は、CPUインタフェース135を介してCPU131に供給される。   Information representing coordinates detected by the touch panel 36 is supplied to the CPU 131 via the CPU interface 135.

さらに、CPUインタフェース135には、EEPROM(Electrically Erasable and Programmable Read Only Memory)またはハードディスクなどより構成される記憶部139が接続される。記憶部139は、PDA1に対して着脱可能な記憶媒体であるMS3やCF4とは異なり、PDA1が内蔵するメモリである。   Further, the CPU interface 135 is connected to a storage unit 139 composed of an EEPROM (Electrically Erasable and Programmable Read Only Memory) or a hard disk. The storage unit 139 is a memory built in the PDA 1, unlike the MS 3 and the CF 4 which are storage media that can be attached to and detached from the PDA 1.

CPUインタフェース135には、Bluetooth等の規格に準拠した無線通信を行う無線通信部146、および、FeliCa(商標)のようなICカードに対して非接触でデータを読み書きする非接触ICカードインタフェース(I/F)147が接続されている。   The CPU interface 135 includes a wireless communication unit 146 that performs wireless communication in accordance with a standard such as Bluetooth, and a non-contact IC card interface (I that reads and writes data without contact with an IC card such as FeliCa (trademark)). / F) 147 is connected.

外部装置152に適宜装着される磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどから読み出されたアプリケーションプログラムは、赤外線ポート62を介して行われる赤外線通信、無線通信部146を介して行われる無線通信、または、クレードル91を介して行われる有線の通信等により、必要に応じてPDA1に対して供給され、記憶部139にインストールされる。または、スロットI/F64に適宜装着されるMS3やCF4から読み出されたアプリケーションプログラムも、必要に応じて記憶部139にインストールされる。   An application program read from a magnetic disk, an optical disk, a magneto-optical disk, a semiconductor memory, or the like that is appropriately mounted on the external device 152 is performed via an infrared communication performed via the infrared port 62 and a wireless communication unit 146. It is supplied to the PDA 1 as necessary by wireless communication or wired communication performed via the cradle 91 and installed in the storage unit 139. Alternatively, an application program read from the MS 3 or CF 4 that is appropriately installed in the slot I / F 64 is also installed in the storage unit 139 as necessary.

CPUインタフェース135には、表示部11が本体部13に対して閉じた状態の場合、オン状態となり、表示部11が本体部13に対して開いた状態の場合、オフ状態となるLCD開閉スイッチ144、および、表示部11が所定の角度以上回動された場合にオン状態となるLCD回転スイッチ145が設けられている。   The CPU interface 135 is an LCD open / close switch 144 that is turned on when the display unit 11 is closed with respect to the main body unit 13 and is turned off when the display unit 11 is open with respect to the main body unit 13. In addition, an LCD rotation switch 145 that is turned on when the display unit 11 is rotated by a predetermined angle or more is provided.

また、CPUインタフェース135には、リムーバブルメインバッテリ162が装着されるメインバッテリ装着部161、およびリムーバブルメインバッテリ162が取り外されたときの予備電源となる、充電式ボタン電池等から成るバックアップバッテリ163が接続されている。   Connected to the CPU interface 135 are a main battery mounting portion 161 to which the removable main battery 162 is mounted, and a backup battery 163 composed of a rechargeable button battery or the like as a backup power source when the removable main battery 162 is removed. Has been.

図6は、LCD28に表示されるメイン画面の例を示す図である。   FIG. 6 is a diagram illustrating an example of a main screen displayed on the LCD 28.

PDA1を用いて行われる各種の操作は、基本的には、このメイン画面から開始される。メイン画面は、標準表示領域201、シルク領域202、およびステータス領域203からなる。   Various operations performed using the PDA 1 are basically started from this main screen. The main screen includes a standard display area 201, a silk area 202, and a status area 203.

標準表示領域201には、アプリケーションプログラム(ソフトウエア)が実行されているときには、その実行中のアプリケーションプログラムの画面が表示される。また、アプリケーションプログラムが実行されていないときには、図6に示されるように、インストールされているアプリケーションプログラムのそれぞれに対応するアプリケーションアイコン204が表示される(ただし、厳密には、このときにおいても、アプリケーションプログラムが全く実行されていないわけではなく、アプリケーションアイコン204を表示し、ユーザに選択させるためのアプリケーションプログラムが実行されている)。   In the standard display area 201, when an application program (software) is being executed, a screen of the application program being executed is displayed. When the application program is not executed, application icons 204 corresponding to each of the installed application programs are displayed as shown in FIG. 6 (however, strictly speaking, the application icon 204 is also displayed at this time. The program is not executed at all, and an application program for displaying the application icon 204 and allowing the user to select is executed).

図6においては、アプリケーションアイコン204として、メモを作成するアプリケーションを実行するときにタップ(スタイラス2の先端でLCD28の表面が押下)されるメモ帳アイコン204A、予定を管理するアプリケーションを実行するときにタップされる予定表アイコン204Bが表示されている。   In FIG. 6, as an application icon 204, a notepad icon 204 </ b> A that is tapped when the application for creating a memo is executed (the surface of the LCD 28 is pressed at the tip of the stylus 2). A schedule icon 204B to be tapped is displayed.

シルク領域202には、実行中のシルクプラグインに対応するユーザインタフェース(ユーザによる入力用の領域)が表示される。なお、実行されるアプリケーションによっては、シルク領域202の表示が消え、標準表示領域201とシルク領域202の全体に1つの画面が表示されることもある。   In the silk area 202, a user interface (area for user input) corresponding to the silk plug-in being executed is displayed. Depending on the application to be executed, the display of the silk area 202 may disappear, and one screen may be displayed on the entire standard display area 201 and the silk area 202.

ステータス領域203には、例えば、バッテリ容量、MSスロット41に対するMS3の装着の有無や、CFスロット42に対するCF4の装着の有無、音量設定等の、PDA1の状態を示すステータスアイコン205や時刻等が表示される。   In the status area 203, for example, a status icon 205 indicating the state of the PDA 1 such as the battery capacity, the presence / absence of the MS3 in the MS slot 41, the presence / absence of the CF4 in the CF slot 42, and the volume setting are displayed. Is done.

図7は、図6のメモ帳アイコン204Aがタップされたときに表示される画面の例を示す図である。   FIG. 7 is a diagram showing an example of a screen displayed when the memo pad icon 204A in FIG. 6 is tapped.

図7に示されるメモの作成画面は、メモ帳アイコン204Aがタップされたときに起動される、メモの作成を管理するソフトウエア(後述するデータベース処理ソフトウエア)によって表示される。   The memo creation screen shown in FIG. 7 is displayed by software (database processing software described later) that manages the creation of memos, which is activated when the memo pad icon 204A is tapped.

メモの作成画面は、ステータス領域203の他に、メモ作成領域211、メモを作成するためのツールを選択するときに操作される各種のボタンが表示されるツールボタン領域212から構成される。   In addition to the status area 203, the memo creation screen includes a memo creation area 211 and a tool button area 212 in which various buttons operated when selecting a tool for creating a memo are displayed.

ユーザは、スタイラス2の先端をメモ作成領域211に当て、その状態のままスタイラス2を移動させることで、任意の文字や記号などをメモ作成領域211に入力することができる。例えば、図8の曲線の画像231は、スタイラス2の先端が移動した軌跡を表し、このように、ユーザは、スタイラス2を用いてメモ作成領域211にメモをとることができる。   The user can input arbitrary characters, symbols, and the like to the memo creation area 211 by moving the stylus 2 while keeping the tip of the stylus 2 against the memo creation area 211. For example, the curved image 231 in FIG. 8 represents a trajectory of the movement of the tip of the stylus 2, and thus the user can take a memo in the memo creation area 211 using the stylus 2.

また、ユーザは、後に詳述するように、スタイラス2で文字や記号を入力するだけでなく、カメラ部21で撮影した静止画や動画、或いは、録音した音声などの各種のコンテンツを表す画像を貼り付けることによってもメモを作成することができる(メモにコンテンツを関連付けることができる)。   Further, as will be described in detail later, the user not only inputs characters and symbols with the stylus 2 but also displays images representing various contents such as still images and moving images taken with the camera unit 21 or recorded audio. You can also create a note by pasting it (you can associate content with the note).

図7のツールボタン領域212には、メモに貼り付けるコンテンツの一覧を表示させるときや、既に表示しているコンテンツの一覧を閉じるときに操作(タップ)される一覧表示ボタン221、メモ作成領域211に手書きの文字などを入力するときに操作されるペンボタン222が用意される。ユーザによりペンボタン222が操作されたとき、ペンモードが設定される。そのペンモードが設定されている間は、図8に示されるような手書きの入力をメモ作成領域211に対して行うことが可能となる。   In the tool button area 212 of FIG. 7, a list display button 221 that is operated (tapped) when displaying a list of contents to be pasted on a memo or closing a list of contents already displayed, a memo creation area 211 A pen button 222 to be operated when inputting handwritten characters or the like is prepared. When the pen button 222 is operated by the user, the pen mode is set. While the pen mode is set, handwritten input as shown in FIG. 8 can be performed on the memo creation area 211.

また、ツールボタン領域212には、メモ作成領域211に一度入力した文字などを消すときに操作される消しゴムボタン223の他、各種のツールを選択するときに操作されるボタンも表示される。   The tool button area 212 also displays buttons operated when selecting various tools, in addition to an eraser button 223 operated when erasing characters once entered in the memo creating area 211.

図9は、図8の状態(コンテンツの一覧が表示されていない状態)で一覧表示ボタン221がタップされたときに表示される画面の例を示す図である。   FIG. 9 is a diagram illustrating an example of a screen displayed when the list display button 221 is tapped in the state of FIG. 8 (a state where the content list is not displayed).

一覧表示ボタン221がタップされたとき、図9に示されるように、ツールボタン領域212とステータス領域203の間の、それまでメモ作成領域211の一部を形成していた領域を含む領域であるサムネイル表示領域241が形成され、そこに、メモ作成領域211を利用して作成しているメモに貼り付けることができるコンテンツ(コンテンツの内容を表すサムネイル画像)の一覧が表示される。   When the list display button 221 is tapped, as shown in FIG. 9, it is an area including an area between the tool button area 212 and the status area 203 that has previously formed a part of the memo creation area 211. A thumbnail display area 241 is formed, and a list of contents (thumbnail images representing the contents) that can be pasted on a memo created using the memo creation area 211 is displayed.

サムネイル表示領域241に表示されるサムネイル画像は、コンテンツ本体のデータから生成されるものである。例えば、静止画コンテンツのサムネイル画像は、コンテンツ本体の静止画が縮小されることで生成され、動画コンテンツのサムネイル画像は、連続する画像の中から選択される、例えば、先頭の1フレーム(MPEG(Moving Picture Experts Group)方式で圧縮された動画コンテンツの場合、最初のI(Intra)ピクチャ)の画像が縮小されることで生成される。なお、音声コンテンツのサムネイル画像には、吹き出しの画像が用いられる。   The thumbnail image displayed in the thumbnail display area 241 is generated from the data of the content body. For example, the thumbnail image of the still image content is generated by reducing the still image of the content body, and the thumbnail image of the moving image content is selected from continuous images. For example, the first frame (MPEG ( In the case of moving image content compressed by the Moving Picture Experts Group) method, the image is generated by reducing the first I (Intra) picture. Note that a balloon image is used as the thumbnail image of the audio content.

図9の例においては、左から、「MOV000…」のファイル名が設定された動画コンテンツを表すサムネイル画像251、「031030…」のファイル名が設定された音声コンテンツを表すサムネイル画像252、「DSC0001」のファイル名が設定された静止画(風景画)コンテンツを表すサムネイル画像253、「DSC0002」のファイル名が設定された静止画(人物画)コンテンツを表すサムネイル画像254が表示されている。   In the example of FIG. 9, from the left, a thumbnail image 251 representing a moving image content set with a file name “MOV000...”, A thumbnail image 252 representing an audio content set with a file name “031030. A thumbnail image 253 representing a still image (landscape image) content set with a file name “” and a thumbnail image 254 representing a still image (person image) content set with a file name “DSC0002” are displayed.

これらのサムネイル画像で表されるコンテンツは、PDA1の内部のメモリである記憶部139やPDA1に装着されているMS3などに、その本体のデータが記憶されている。   The contents represented by these thumbnail images are stored in the storage unit 139 which is the internal memory of the PDA 1 or in the MS 3 mounted on the PDA 1.

例えば、図9の点線矢印で示されるように、左から3番目の静止画コンテンツのサムネイル画像253にスタイラス2を押し当て、その状態のままメモ作成領域211上の位置P1まで移動させ、そこで、スタイラス2の先端をLCD28の表面から離すことで(ドラッグアンドドロップすることで)、ユーザは、サムネイル画像253を位置P1に貼り付けることができる。   For example, as indicated by the dotted arrow in FIG. 9, the stylus 2 is pressed against the thumbnail image 253 of the third still image content from the left, and moved to the position P1 on the memo creation area 211 in that state, By separating the tip of the stylus 2 from the surface of the LCD 28 (by dragging and dropping), the user can paste the thumbnail image 253 at the position P1.

図10は、位置P1にサムネイル画像253が貼り付けられた状態の画面の例を示す図である。ユーザは、このように、一覧表示されるものの中からドラッグアンドドロップすることで、作成中のメモに、静止画などの各種のカテゴリのコンテンツのサムネイル画像を貼り付けることができる。なお、ユーザは、ペンモードが設定されている状態で、位置P1に貼り付けたサムネイル画像253をメモ作成領域211上の他の位置にさらに移動させることもできる。   FIG. 10 is a diagram illustrating an example of a screen in a state where the thumbnail image 253 is pasted at the position P1. In this way, the user can paste thumbnail images of various categories of contents such as still images into the memo being created by dragging and dropping from the list displayed. Note that the user can further move the thumbnail image 253 pasted at the position P1 to another position on the memo creation area 211 in a state where the pen mode is set.

例えば、ユーザは、「〜に行ったときの写真」などの手書きの文字をメモ作成領域211に入力しておき、そのメモに写真(静止画コンテンツ)のサムネイル画像を貼り付けておくことで、PDA1内にある写真を容易に分類することができる。この操作は、フォルダを新規に作成し、そこに写真などのコンテンツを格納することによって分類する場合に較べて直感的な操作であり、外出先などで、僅かな時間に気軽に操作するというPDA1の性質上、好ましい。   For example, the user inputs handwritten characters such as “photo taken when” in the memo creation area 211 and pastes a thumbnail image of a photo (still image content) in the memo. Photos in the PDA 1 can be easily classified. This operation is more intuitive than creating a new folder and storing it by storing content such as photos, and it is a PDA1 that can be easily operated in a short time while away from home. From the nature of

また、ユーザは、メモに貼り付けたサムネイル画像をタップすることで、そのサムネイル画像により内容が表されるコンテンツの再生を開始させることができる。   Further, the user can start playback of the content represented by the thumbnail image by tapping the thumbnail image pasted on the memo.

図11は、図10のサムネイル画像253をタップして、サムネイル画像253により内容が表される静止画コンテンツを再生(プレビュー)させたときの画面の例を示す図である。   FIG. 11 is a diagram illustrating an example of a screen when the thumbnail image 253 in FIG. 10 is tapped to reproduce (preview) the still image content represented by the thumbnail image 253.

サムネイル画像253がタップされたとき、静止画コンテンツのビューワ機能を有するソフトウエア(後述するコンテンツ処理ソフトウエア)が起動し、サムネイル画像253により内容が表される静止画コンテンツの本体のデータに基づいて、ステータス領域203以外の領域全体を用いて画像の表示が行われる。これにより、ユーザは、静止画コンテンツの詳細を容易に確認することができる。   When the thumbnail image 253 is tapped, software having a still image content viewer function (content processing software to be described later) is activated, and based on the data of the still image content main body represented by the thumbnail image 253 The image is displayed using the entire area other than the status area 203. Thereby, the user can easily confirm the details of the still image content.

なお、メモに貼り付けた動画コンテンツのサムネイル画像251をタップした場合も同様に、動画コンテンツの再生が行われ、図11に示されるようなステータス領域203以外の領域を用いて画像が表示される。また、メモに貼り付けた音声コンテンツのサムネイル画像252をタップした場合、その音声コンテンツの再生が行われる。   Note that when the thumbnail image 251 of the moving image content pasted on the memo is tapped, the moving image content is similarly reproduced, and the image is displayed using an area other than the status area 203 as shown in FIG. . When the thumbnail image 252 of the audio content pasted on the memo is tapped, the audio content is played back.

図12A乃至Dは、以上のようにして作成されるメモの表示の階層構造について示す図である。   12A to 12D are diagrams showing the hierarchical structure of the display of memos created as described above.

図12Aは、図10のメモ作成領域211(上方に表示される数字と文字(「Unfiled」)を除く部分)に表示されている画面を示す図である。   FIG. 12A is a diagram showing a screen displayed in the memo creation area 211 of FIG. 10 (a portion excluding the numbers and characters (“Unfiled”) displayed above).

図12Aの画面は複数の層から構成され、その複数の層のうちの最下層には、図12Bに示されるような無地の層(図7のメモ作成領域211のように、何も入力されていない層)が配置される。   The screen of FIG. 12A is composed of a plurality of layers, and nothing is input to the bottom layer of the plurality of layers as shown in FIG. 12B (a blank layer as in the memo creation area 211 of FIG. 7). Not layer) is placed.

図12Bの無地の層の上には、スタイラス2で入力された手書きの曲線の画像231を表示する層が配置され、その上(図12Aの画面を構成する最上層)には、サムネイル画像253を表示する層が配置される。サムネイル画像を表示する層は、複数のサムネイル画像がメモに貼り付けられた場合、貼り付けられた数だけ仮想的に配置される。   A layer for displaying the image 231 of the handwritten curve input by the stylus 2 is arranged on the plain layer in FIG. 12B, and a thumbnail image 253 is disposed on the layer (the uppermost layer constituting the screen in FIG. 12A). Is displayed. When a plurality of thumbnail images are pasted on a memo, the layers for displaying the thumbnail images are virtually arranged in the number pasted.

このように、メモの作成を管理するソフトウエアによりメモ作成領域211に表示される画面は、図12B乃至Dの3つの層から構成される。この層の数は、後述する、予定表の作成を管理するソフトウエアによりメモ作成領域211に対応する領域に表示される画面を構成する層の数と異なる。   As described above, the screen displayed in the memo creation area 211 by the software for managing the creation of the memo is composed of three layers shown in FIGS. 12B to 12D. The number of layers is different from the number of layers constituting a screen displayed in an area corresponding to the memo creation area 211 by software for managing creation of a schedule, which will be described later.

ここで、サムネイル表示領域241の表示の詳細について説明する。   Here, details of the display of the thumbnail display area 241 will be described.

図13Aは、図9のサムネイル表示領域241のみを示す図である。   FIG. 13A is a diagram showing only the thumbnail display area 241 of FIG.

サムネイル表示領域241の右上には、サムネイル画像表示部271に表示するサムネイル画像を、それが表すコンテンツのカテゴリに応じてフィルタリングするカテゴリ選択ボタン261乃至264が表示されている。   On the upper right of the thumbnail display area 241, category selection buttons 261 to 264 for filtering the thumbnail image displayed on the thumbnail image display unit 271 according to the category of the content represented by the thumbnail image are displayed.

すなわち、一覧表示ボタン221を操作したとき、サムネイル画像表示部271には、メモ作成領域211で作成中のメモに貼り付けることができる全てのカテゴリのコンテンツのサムネイル画像が表示されるが、ユーザは、カテゴリ選択ボタン261乃至264を操作することで、サムネイル画像表示部271に表示されるサムネイル画像を制限することができる。   That is, when the list display button 221 is operated, thumbnail images of all categories of content that can be pasted on a memo being created in the memo creation area 211 are displayed on the thumbnail image display unit 271. By operating the category selection buttons 261 to 264, the thumbnail images displayed on the thumbnail image display unit 271 can be limited.

例えば、カメラの絵が付されたカテゴリ選択ボタン261が操作されたとき、サムネイル画像表示部271に表示されるサムネイル画像の中から、静止画コンテンツのサムネイル画像が除かれ(表示が消え)、フィルムの絵が付されたカテゴリ選択ボタン262が操作されたとき、動画コンテンツのサムネイル画像が除かれる。   For example, when the category selection button 261 with a camera picture is operated, the thumbnail image of the still image content is removed from the thumbnail images displayed on the thumbnail image display unit 271 (the display disappears), and the film is displayed. When the category selection button 262 with the picture is operated, the thumbnail image of the moving image content is removed.

また、ペンと紙の絵(メモ)が付されたカテゴリ選択ボタン263が操作されたとき、サムネイル画像表示部271に表示されるサムネイル画像の中から、メモのコンテンツを表すサムネイル画像が除かれる。   Also, when the category selection button 263 with a pen and paper picture (memo) is operated, the thumbnail image representing the content of the memo is removed from the thumbnail images displayed on the thumbnail image display unit 271.

なお、PDA1においては、メモの作成中(メモの作成を管理するソフトウエアの実行中)は、その作成中のメモに、予め作成しておいた他のメモをコンテンツとして貼り付けることはできないこととされている。従って、メモの作成中は、サムネイル画像表示部271にメモのサムネイル画像が表示されないことから、カテゴリ選択ボタン263は操作不能とされる。   In PDA1, during the creation of a memo (while the software that manages the creation of the memo is being executed), other pre-created memos cannot be pasted as content in the memo being created. It is said that. Therefore, while the memo is being created, the thumbnail image of the memo is not displayed on the thumbnail image display unit 271, so that the category selection button 263 cannot be operated.

後述する予定表の作成を管理するソフトウエアの実行中は、作成中の予定表に、予め作成しておいたメモをコンテンツとして貼り付けることが可能とされ、カテゴリ選択ボタン263が操作された場合、サムネイル画像表示部271に表示されるサムネイル画像の中から、メモのサムネイル画像が除かれる。   When software for managing the creation of a schedule to be described later is being executed, it is possible to paste a previously created memo as content in the schedule being created and the category selection button 263 is operated Then, the thumbnail image of the memo is removed from the thumbnail images displayed on the thumbnail image display unit 271.

カテゴリ選択ボタン263の右隣には、吹き出しの絵が付されたカテゴリ選択ボタン264が用意されている。カテゴリ選択ボタン264が操作されたとき、サムネイル画像表示部271に表示されるサムネイル画像の中から、音声コンテンツのサムネイル画像が除かれる。   On the right side of the category selection button 263, a category selection button 264 with a balloon picture is prepared. When the category selection button 264 is operated, the thumbnail image of the audio content is removed from the thumbnail images displayed on the thumbnail image display unit 271.

図13Bは、静止画、動画、音声のそれぞれのカテゴリのコンテンツのサムネイル画像が表示されている図13Aの状態から、カテゴリ選択ボタン262(動画コンテンツのサムネイル画像の表示を消すボタン)とカテゴリ選択ボタン264(音声コンテンツのサムネイル画像の表示を消すボタン)が操作された状態の表示を示す図である。   FIG. 13B shows a category selection button 262 (button for deleting the display of thumbnail images of moving image contents) and a category selection button from the state of FIG. 13A in which thumbnail images of content categories of still images, moving images, and audio are displayed. FIG. 26 is a diagram illustrating a display in a state where H.264 (a button for deleting the display of a thumbnail image of audio content) is operated.

図13Bに示されるように、サムネイル画像表示部271に表示するサムネイル画像の中から、動画と音声のコンテンツを表すサムネイル画像がフィルタリングによりカットされ、その表示が消される。   As shown in FIG. 13B, among the thumbnail images displayed on the thumbnail image display unit 271, thumbnail images representing moving image and audio content are cut by filtering, and the display is erased.

このように、サムネイル画像表示部271に表示させるサムネイル画像に、カテゴリに基づくフィルタリングをかけることができるため、ユーザは、貼り付けようとするコンテンツのサムネイル画像を迅速に探すことができる。   In this way, the thumbnail image displayed on the thumbnail image display unit 271 can be filtered based on the category, so that the user can quickly find the thumbnail image of the content to be pasted.

例えば、ある静止画コンテンツをメモに貼り付けようとしている場合、図13Bに示されるように他のカテゴリのコンテンツのサムネイル画像を除いてから探すことで、ユーザは、貼り付けようとする静止画コンテンツのサムネイル画像を迅速に探すことができる。   For example, when a certain still image content is to be pasted on a memo, the user can search for a still image content to be pasted by searching after removing thumbnail images of content in other categories as shown in FIG. 13B. Can quickly find thumbnail images.

以上のようにしてサムネイル画像表示部271に表示されるサムネイル画像からも、メモに貼り付けたサムネイル画像から、そのサムネイル画像により表されるコンテンツを再生させることができるのと同様に、コンテンツの再生を開始させることが可能とされる。   In the same manner as described above, the content represented by the thumbnail image can be reproduced from the thumbnail image displayed on the thumbnail image display unit 271 from the thumbnail image pasted on the memo. Can be started.

例えば、図13Aに示されるように、静止画コンテンツのサムネイル画像253がカーソル281で選択されている状態でさらにタップされた場合、図11を参照して説明したように、その静止画コンテンツがLCD28に拡大表示される。すなわち、ビューワ機能を提供するソフトウエアが実行され、静止画コンテンツの表示が行われる。   For example, as shown in FIG. 13A, when the thumbnail image 253 of the still image content is further tapped with the cursor 281 selected, the still image content is displayed on the LCD 28 as described with reference to FIG. Is displayed enlarged. That is, software that provides a viewer function is executed, and still image content is displayed.

サムネイル画像表示部271の下には、サムネイル画像表示部271に表示させるサムネイル画像の範囲を切り替えるときに水平方向に操作されるスクロールバー272が表示され、その下には、カーソル281で選択されているコンテンツの名前等を表示するコンテンツ情報表示部273が表示される。   A scroll bar 272 that is operated in the horizontal direction when switching the range of thumbnail images to be displayed on the thumbnail image display unit 271 is displayed below the thumbnail image display unit 271, and below that is selected by the cursor 281. A content information display unit 273 that displays the name of the content that is being displayed is displayed.

なお、図13Aにおいて、動画コンテンツのサムネイル画像251上に表示されているMS3の外観を表す画像251Aは、その動画コンテンツが外部のメモリであるMS3に記憶されているものであることを表している。また、フィルムの絵を表す画像251Bは、それが付されているサムネイル画像251が動画コンテンツのものであることを表している(静止画コンテンツのサムネイル画像と区別できるようになっている)。   In FIG. 13A, an image 251A representing the appearance of the MS3 displayed on the thumbnail image 251 of the moving image content indicates that the moving image content is stored in the external memory MS3. . Further, an image 251B representing a picture of a film represents that the thumbnail image 251 to which the image is attached is of a moving image content (can be distinguished from a thumbnail image of still image content).

図14は、図6の予定表アイコン204Bがタップされたときに表示される画面の例を示す図である。図14において、図7と同じ部分には同一の符号を付している。   FIG. 14 is a diagram illustrating an example of a screen displayed when the schedule icon 204B in FIG. 6 is tapped. 14, the same parts as those in FIG. 7 are denoted by the same reference numerals.

予定表アイコン204Bがタップされたとき、予定表の作成を管理するソフトウエアが起動し、図14に示されるような予定表の作成画面が表示される。   When the schedule icon 204B is tapped, software for managing the creation of the schedule is activated, and a schedule creation screen as shown in FIG. 14 is displayed.

予定表の作成画面は、ステータス領域203の他に、所定の間隔で時刻が表示される予定入力領域301、予定入力領域301の表示形式(週単位、月単位による表示形式)を変更するときに操作されるボタンなどが用意される表示切替領域302、予定表を作成するためのツールを選択するときに操作されるボタンが用意されるツールボタン領域303から構成される。   In addition to the status area 203, the schedule creation screen displays the schedule input area 301 in which time is displayed at predetermined intervals, and the display format of the schedule input area 301 (display format in units of weeks and months). A display switching area 302 where buttons to be operated and the like are prepared, and a tool button area 303 where buttons to be operated when selecting a tool for creating a schedule are prepared.

ツールボタン領域303には、予定表に貼り付けるコンテンツのサムネイル画像の一覧を表示させるときに操作される一覧表示ボタン221、予定入力領域301に手書きの文字や記号などを入力するときに操作されるペンボタン222、一度入力した手書きの文字などを消すときに操作される消しゴムボタン223などの、図7のツールボタン領域212に用意されるものと同じボタンが用意される。   The tool button area 303 is operated when a list display button 221 operated when displaying a list of thumbnail images of contents to be pasted on the schedule, and is operated when handwritten characters or symbols are input in the schedule input area 301. The same buttons as those prepared in the tool button area 212 of FIG. 7 such as the pen button 222 and the eraser button 223 operated when erasing a handwritten character once inputted are prepared.

また、ツールボタン領域303には、これらのボタンの他、予定入力領域301に入力した予定の1つの項目を選択し、その選択した項目を移動したり、内容を変更する手モードを選択するときに操作される手ボタン311が表示される。この手ボタン311は、上述したメモの作成時には用意されないボタンである。   In addition to these buttons, the tool button area 303 selects one item scheduled in the schedule input area 301 and moves the selected item or selects a hand mode for changing the contents. A hand button 311 to be operated is displayed. This hand button 311 is a button that is not prepared when creating the memo described above.

図15は、図14の画面に対して、ある予定が入力された状態の画面の例を示す図である。   FIG. 15 is a diagram illustrating an example of a screen in a state where a certain schedule is input with respect to the screen of FIG.

予定入力領域301の9時(9:00)の欄に入力された予定321(「会議」の文字が入力されている予定)は、例えば、ユーザにより手ボタン311が操作され、手モードが設定されてから入力されたものである。9時の時間帯が、予定を入力する時間帯としてスタイラス2で選択された場合、画面の下方には図6のシルク領域202が表示されるため、ユーザは、その領域を用いて予定を入力する(「会議」の文字を入力する)。   For the schedule 321 (schedule in which “conference” is input) entered in the 9 o'clock (9:00) field of the schedule input area 301, for example, the hand button 311 is operated by the user, and the hand mode is set. It is input after being done. When the 9 o'clock time zone is selected by the stylus 2 as a time zone for inputting the schedule, the silk area 202 of FIG. 6 is displayed at the bottom of the screen, and the user inputs the schedule using that area. Yes (enter “Meeting”).

なお、一覧表示ボタン221の右隣にあるボタンは、予定を新規に作成するときに操作されるボタンであり、このボタンが操作された場合も、手モードが設定された状態で時間帯が指定されたときと同様に、新たな予定を入力することが可能とされる。   The button to the right of the list display button 221 is a button that is operated when creating a new schedule. Even when this button is operated, the time zone is specified with the hand mode set. It is possible to input a new schedule in the same manner as when the new schedule is made.

図16は、図15の状態の画面に対して、「重要!」の手書き文字と、予定321を指す矢印の画像からなる画像331が入力された状態の画面を示す図である。   FIG. 16 is a diagram illustrating a screen in a state where an image 331 including a handwritten character “important!” And an arrow image pointing to the schedule 321 is input to the screen in the state in FIG. 15.

ペンボタン222を操作し、ペンモードを設定することによって、ユーザは、予定入力領域301に手書きの文字などを入力することができる。   By operating the pen button 222 and setting the pen mode, the user can input handwritten characters or the like in the schedule input area 301.

このように、予定表を作成する場合でも、ユーザは、所定の時間帯に予定の項目を入力するだけでなく、上述したメモを作成する場合と同様に手書きの文字を入力することができる。   In this way, even when creating a schedule, the user can input handwritten characters in the same manner as when creating a memo, as well as inputting scheduled items during a predetermined time period.

図17は、図16の状態(サムネイル画像の一覧が表示されていない状態)において、一覧表示ボタン221がタップされたときに表示される画面の例を示す図である。   FIG. 17 is a diagram illustrating an example of a screen displayed when the list display button 221 is tapped in the state of FIG. 16 (a state where the list of thumbnail images is not displayed).

一覧表示ボタン221がタップされたとき、図17に示されるように、ツールボタン領域303とステータス領域203の間の、それまで予定表入力領域301の一部を形成していた領域を含む領域であるサムネイル表示領域241が形成され、そこに、予定入力領域301に貼り付けることができるコンテンツのサムネイル画像の一覧が表示される。   When the list display button 221 is tapped, as shown in FIG. 17, an area between the tool button area 303 and the status area 203 including an area that has previously formed a part of the schedule input area 301. A thumbnail display area 241 is formed, and a list of thumbnail images of contents that can be pasted in the schedule input area 301 is displayed there.

例えば、音声コンテンツのサムネイル画像352をスタイラス2で選択し、図17の点線矢印で示されるように、その状態のまま予定入力領域301上の位置P2まで移動させ、スタイラス2の先端をLCD28の表面から離すことで、ユーザは、サムネイル画像352を位置P2に貼り付けることができる。   For example, the thumbnail image 352 of the audio content is selected with the stylus 2 and moved to the position P2 on the scheduled input area 301 as it is, as indicated by the dotted arrow in FIG. By moving away from, the user can paste the thumbnail image 352 at the position P2.

図18は、位置P2に音声コンテンツのサムネイル画像352が貼り付けられた状態の画面の例を示す図である。   FIG. 18 is a diagram illustrating an example of a screen in a state where the thumbnail image 352 of the audio content is pasted at the position P2.

ユーザは、このように、一覧表示されるものの中からドラッグアンドドロップすることで、予定表に、各種のカテゴリのコンテンツのサムネイル画像を貼り付けることができる(予定表にコンテンツを関連付けることができる)。   Thus, the user can paste thumbnail images of various categories of content on the schedule by dragging and dropping from the list displayed (contents can be associated with the schedule). .

以上のようにしてサムネイル画像を予定表に貼り付けることができるため、ユーザは、例えば、9時からの会議(図18の予定321の「会議」)が終了したとき、そのときに録音しておいた音声コンテンツのサムネイル画像351を予定321の周りに貼り付けておくことで、後から、その会議で録音した音声コンテンツを容易に探すことができる。   Since the thumbnail image can be pasted on the schedule as described above, for example, when the meeting from 9 o'clock (“meeting” of the schedule 321 in FIG. 18) ends, the user records it at that time. By pasting the thumbnail image 351 of the audio content that has been placed around the schedule 321, it is possible to easily find the audio content recorded at the meeting later.

そのサムネイル画像の貼り付けも、サムネイル表示領域241に表示されるものの中からドラッグアンドドロップするだけの非常に直感的な操作である。   The pasting of the thumbnail image is also a very intuitive operation by simply dragging and dropping from those displayed in the thumbnail display area 241.

また、予定表に貼り付けたサムネイル画像351をタップすることで、そのサムネイル画像351により表される音声コンテンツの再生を開始させることができるため、ユーザは、会議で録音した音声を予定表から容易に再生させることができる。   Further, by tapping the thumbnail image 351 pasted on the schedule, it is possible to start playback of the audio content represented by the thumbnail image 351, so that the user can easily record the audio recorded at the conference from the schedule. Can be played.

なお、図17、図18において、サムネイル画像353,354は、予め作成しておいたメモのサムネイル画像である。上述したように、予定表の作成時には、予め作成しておいたメモをコンテンツとして予定表に関連付けることができるため、メモのサムネイル画像もサムネイル表示領域241に表示される。   In FIGS. 17 and 18, thumbnail images 353 and 354 are memo thumbnail images created in advance. As described above, when a schedule is created, a memo created in advance can be associated as a content with the schedule, so that a thumbnail image of the memo is also displayed in the thumbnail display area 241.

図19A乃至Eは、以上のようにして作成される予定表の階層構造について示す図である。   19A to 19E are diagrams showing the hierarchical structure of the schedule table created as described above.

図19Aは、図18の予定入力領域301(図18の上方に表示される年月日と曜日(S,M,T,W,T,F,S)を除く部分)に表示される画面を示す図である。   FIG. 19A shows a screen displayed in the scheduled input area 301 of FIG. 18 (the part excluding the year, month, day, and day of the week (S, M, T, W, T, F, S) displayed at the top of FIG. 18). FIG.

図19Aの画面も複数の層から構成され、そのうちの最下層には、図19Bに示されるような時間帯を表示する層(図14の予定入力領域301のように、何の予定も入力されていない予定表の層)が配置される。   The screen in FIG. 19A is also composed of a plurality of layers, and in the lowermost layer, a layer for displaying a time zone as shown in FIG. 19B (any schedule is input as in the schedule input area 301 in FIG. 14). Not the calendar layer).

図19Bの層の上には、図19Cに示されるように、ユーザにより入力された予定321(図19Bの9時の時間帯に入力された予定)を表示する層が配置され、その上には、図19Dに示されるように、スタイラス2で入力された手書きの「重要!」の文字と、予定321を指す矢印の画像331を表示させる層が配置される。   On the layer in FIG. 19B, as shown in FIG. 19C, a layer for displaying the schedule 321 input by the user (schedule input in the 9 o'clock time zone in FIG. 19B) is arranged. As shown in FIG. 19D, a layer for displaying the handwritten “important!” Character input by the stylus 2 and an arrow image 331 indicating the schedule 321 is arranged.

図19Eに示されるように、図19Aの画面の最上層には、サムネイル画像352を表示させる層が配置される。   As shown in FIG. 19E, a layer for displaying the thumbnail image 352 is arranged at the top layer of the screen in FIG. 19A.

このように、予定表の作成を管理するソフトウエアにより予定入力領域301に表示される画面は、図19B乃至Eの4つの層から構成される。この層の数(4層)は、上述した、メモの作成を管理するソフトウエアにより表示される画面を構成する層の数(3層)と異なる。   As described above, the screen displayed in the schedule input area 301 by the software for managing the creation of the schedule is composed of four layers shown in FIGS. 19B to 19E. The number of layers (four layers) is different from the number of layers (three layers) constituting the screen displayed by the software for managing creation of a memo described above.

すなわち、サムネイル表示領域241に表示されるサムネイル画像の貼り付け先は、サムネイル画像の一覧と同時に表示される画面を用いて作成されるデータのカテゴリにより異なり、複数あるといえる。   That is, the paste destination of the thumbnail image displayed in the thumbnail display area 241 differs depending on the category of data created using the screen displayed simultaneously with the list of thumbnail images, and can be said to be plural.

次に、以上のような画面表示を実現するソフトウエア構成について説明する。   Next, a software configuration for realizing the above screen display will be described.

なお、以下において、メモの作成を管理するソフトウエアにより作成される1つのメモのファイルや、予定表の作成を管理するソフトウエアにより作成される1つの予定表のファイルをデータベースともいう。従って、コンテンツの貼り付け先や手書きの文字の入力先はデータベースとなる。   In the following, one memo file created by software for managing creation of a memo and one schedule file created by software for managing creation of a schedule are also referred to as a database. Therefore, the content paste destination and handwritten character input destination are the database.

図20は、PDA1に用意されるソフトウエアの例を示すブロック図である。   FIG. 20 is a block diagram illustrating an example of software prepared in the PDA 1.

これらのソフトウエアは、内蔵のメモリである記憶部139(図5)などに記憶されている。PDA1には、複数のデータベース処理ソフトウエアからなるデータベース処理ソフトウエア群361、複数のコンテンツ処理ソフトウエアからなるコンテンツ処理ソフトウエア群362、サムネイル表示ソフトウエア363が用意されている。   These software are stored in a storage unit 139 (FIG. 5) which is a built-in memory. The PDA 1 is provided with a database processing software group 361 composed of a plurality of database processing softwares, a content processing software group 362 composed of a plurality of content processing softwares, and a thumbnail display software 363.

データベース処理ソフトウエア群361は、メモのデータベースの作成を管理するメモデータベース処理ソフトウエア371−1と、予定表のデータベースの作成を管理する予定表データベース処理ソフトウエア371−2から構成される。以下、メモデータベース処理ソフトウエア371−1と予定表データベース処理ソフトウエア371−2を個々に区別する必要がない場合、まとめてデータベース処理ソフトウエア371という。   The database processing software group 361 includes memo database processing software 371-1 for managing creation of a memo database and schedule table database processing software 371-2 for managing creation of a schedule database. Hereinafter, when it is not necessary to individually distinguish the memo database processing software 371-1 and the schedule table database processing software 371-2, they are collectively referred to as the database processing software 371.

なお、図20においては、データベース処理ソフトウエアは2つしか用意されていないが、実際には、図6の画面にアプリケーションアイコン204が用意されているソフトウエアであって、データベースの作成に関するソフトウエア毎にデータベース処理ソフトウエアが用意される。   In FIG. 20, only two pieces of database processing software are prepared. However, in actuality, the application icon 204 is prepared on the screen of FIG. Database processing software is prepared for each.

データベース処理ソフトウエア371は、データベースの作成機能をユーザに提供し、例えば、スタイラス2による手書き文字の入力や、サムネイル画像の貼り付けを受け付け、データベースを作成する。   The database processing software 371 provides a database creation function to the user, and accepts input of handwritten characters by the stylus 2 and pasting of thumbnail images, for example, and creates a database.

データベース処理ソフトウエア371は、データベース毎に、図21に示されるようなデータベースの構成を表すデータベース構成情報を用いてその作成を管理する。   The database processing software 371 manages the creation of each database using database configuration information representing the configuration of the database as shown in FIG.

図21の例においては、データベースに貼り付けられたサムネイル画像により表されるコンテンツ等の種類、サムネイル画像のリンク先(コンテンツ本体のデータの記憶場所)、サムネイル画像が貼り付けられたデータベース上の位置を表す座標、コンテンツに関するその他の情報がデータベース構成情報により表されている。   In the example of FIG. 21, the type of content or the like represented by the thumbnail image pasted in the database, the link destination of the thumbnail image (the storage location of the content main body data), and the position on the database where the thumbnail image is pasted Coordinates representing information and other information related to the contents are represented by database configuration information.

サムネイル画像が貼り付けられたり、手書き文字が入力される毎に、これらの情報がデータベース構成情報に登録される。図21の例においては、データベース構成情報の2段目に、あるデータベースに入力された手書き文字のリンク先はリンク情報#1であり、入力位置は座標(x1,y1)であることが登録されている。また、手書き文字の幅W1、高さh1とともに、その他の情報として、手書き文字の色、ペンの太さ等が登録されている。 Each time a thumbnail image is pasted or a handwritten character is input, these pieces of information are registered in the database configuration information. In the example of FIG. 21, in the second stage of the database configuration information, the link destination of the handwritten character input to a certain database is the link information # 1, and the input position is the coordinates (x 1 , y 1 ). It is registered. In addition to the width W 1 and the height h 1 of the handwritten character, the color of the handwritten character, the thickness of the pen, and the like are registered as other information.

同様に、同じデータベースに貼り付けられた動画コンテンツ、静止画コンテンツ、テキスト、音声コンテンツのそれぞれのサムネイル画像のリンク情報、位置、幅、高さ、その他の情報も登録されている。なお、図21においてデータベースに入力されたものとして示されている「テキスト」は、例えば、予定表のデータベースに入力された予定である。また、データベース構成情報に登録される「座標」は、例えば、サムネイル画像の左上隅の座標である。   Similarly, link information, position, width, height, and other information of thumbnail images of moving image content, still image content, text, and audio content pasted in the same database are also registered. The “text” shown as being input to the database in FIG. 21 is, for example, a schedule input to the schedule database. The “coordinates” registered in the database configuration information is, for example, the coordinates of the upper left corner of the thumbnail image.

図20の説明に戻り、データベース処理ソフトウエア371により管理されているデータベース391にはコンテンツ#1乃至#3が関連付けられている(コンテンツ#1乃至#3のそれぞれのサムネイル画像がデータベース391に貼り付けられている)。   Returning to the description of FIG. 20, contents # 1 to # 3 are associated with the database 391 managed by the database processing software 371 (the thumbnail images of the contents # 1 to # 3 are pasted to the database 391). Is).

すなわち、この場合、データベース処理ソフトウエア371は、データベース構成情報を用いて、データベース391に関連付けられているコンテンツ#1乃至#3のコンテンツの種類、サムネイル画像のリンク情報、貼り付け位置、その他の情報を管理している。   That is, in this case, the database processing software 371 uses the database configuration information to determine the content type of the content # 1 to # 3 associated with the database 391, the link information of the thumbnail image, the pasting position, and other information. Is managing.

データベース処理ソフトウエア371は、データベース391に貼り付けられたサムネイル画像がタップされ、コンテンツの再生が指示されたとき、コンテンツ処理ソフトウエア群362を構成するコンテンツ処理ソフトウエアのいずれかにコンテンツの再生を要求する。   When the thumbnail image pasted on the database 391 is tapped and the reproduction of the content is instructed, the database processing software 371 reproduces the content to one of the content processing software constituting the content processing software group 362. Request.

また、データベース処理ソフトウエア371は、ユーザにより一覧表示ボタン221が操作され、作成中のデータベース391に貼り付けるサムネイル画像の一覧の表示が指示されたとき、そのことをサムネイル表示ソフトウエア363に通知し、サムネイル画像の一覧を表示させる。   In addition, when the list display button 221 is operated by the user and the display of a list of thumbnail images to be pasted to the database 391 being created is instructed, the database processing software 371 notifies the thumbnail display software 363 of that. , Display a list of thumbnail images.

コンテンツ処理ソフトウエア群362は、静止画コンテンツの再生(プレビュー)を管理する静止画コンテンツ処理ソフトウエア381−1、動画コンテンツの再生を管理する動画コンテンツ処理ソフトウエア381−2、音声コンテンツの再生を管理する音声コンテンツ処理ソフトウエア381−3、コンテンツとして用意されているメモの再生(プレビュー)を管理するメモコンテンツ処理ソフトウエア381−4から構成される。以下、静止画コンテンツ処理ソフトウエア381−1乃至メモコンテンツ処理ソフトウエア381−4を個々に区別する必要がない場合、まとめてコンテンツ処理ソフトウエア381という。   The content processing software group 362 includes still image content processing software 381-1 that manages reproduction (preview) of still image content, moving image content processing software 381-2 that manages reproduction of moving image content, and reproduction of audio content. Audio content processing software 381-3 to be managed and memo content processing software 381-4 to manage reproduction (preview) of a memo prepared as content. Hereinafter, when it is not necessary to individually distinguish the still image content processing software 381-1 to the memo content processing software 381-4, they are collectively referred to as content processing software 381.

コンテンツ処理ソフトウエア381は、記憶部139やMS3に記憶されている全てのコンテンツ392を管理しており、コンテンツのビューワの機能を提供する。データベース処理ソフトウエア371から静止画コンテンツの再生が要求されたとき、静止画コンテンツ処理ソフトウエア381−1により静止画コンテンツの再生が行われ、動画コンテンツの再生が要求されたとき、動画コンテンツ処理ソフトウエア381−2により動画コンテンツの再生が行われる。また、音声コンテンツの再生が要求されたとき、音声コンテンツ処理ソフトウエア381−3により音声コンテンツの再生が行われ、メモの再生が要求されたとき、メモコンテンツ処理ソフトウエア381−4によりメモの再生が行われる。   The content processing software 381 manages all the content 392 stored in the storage unit 139 and the MS 3 and provides a content viewer function. When the reproduction of the still image content is requested from the database processing software 371, the still image content is reproduced by the still image content processing software 381-1. When the reproduction of the moving image content is requested, the moving image content processing software The moving image content is reproduced by the wear 381-2. When the reproduction of the audio content is requested, the audio content is reproduced by the audio content processing software 381-3. When the reproduction of the memo is requested, the reproduction of the memo is performed by the memo content processing software 381-4. Is done.

なお、メモの再生は、それを作成したデータベース処理ソフトウエア371(メモデータベース処理ソフトウエア371−1)により行われるようにしてもよい。   Note that the memo may be reproduced by the database processing software 371 (memo database processing software 371-1) that created the memo.

上述したように、ユーザは、サムネイル表示領域241に一覧表示されているサムネイル画像をタップすることによってもコンテンツを再生させることができる。サムネイル表示領域241に表示されているサムネイル画像がタップされたとき、サムネイル表示ソフトウエア363からそのことが通知され、再生が指示されたコンテンツのカテゴリに応じて、コンテンツ処理ソフトウエア381によりコンテンツの再生が行われる。   As described above, the user can also play back the content by tapping the thumbnail images displayed in the thumbnail display area 241 as a list. When a thumbnail image displayed in the thumbnail display area 241 is tapped, the content is notified from the thumbnail display software 363, and the content is played back by the content processing software 381 in accordance with the content category instructed to be played back. Is done.

サムネイル表示ソフトウエア363は、データベース処理ソフトウエア371からサムネイル画像の一覧の表示が要求されたとき、コンテンツ392を参照して、それぞれのコンテンツを表すサムネイル画像を生成し、サムネイル画像をサムネイル表示領域241に一覧表示させる。また、サムネイル表示ソフトウエア363は、サムネイル画像として一覧表示させるコンテンツのカテゴリを制限することが要求されたとき(カテゴリ選択ボタン261乃至264のいずれかが操作されたとき)、その要求に応じてサムネイル画像の表示を更新させる。   When the thumbnail display software 363 requests display of a list of thumbnail images from the database processing software 371, the thumbnail display software 363 refers to the content 392, generates thumbnail images representing the respective contents, and displays the thumbnail images in the thumbnail display area 241. To display a list. When the thumbnail display software 363 is requested to limit the category of content to be displayed as a list of thumbnail images (when one of the category selection buttons 261 to 264 is operated), the thumbnail display software 363 responds to the request with the thumbnail. Update the image display.

さらに、サムネイル表示ソフトウエア363は、サムネイル表示領域241に表示されているサムネイル画像がタップされたとき、コンテンツの再生をコンテンツ処理ソフトウエア381に要求する。   Furthermore, when the thumbnail image displayed in the thumbnail display area 241 is tapped, the thumbnail display software 363 requests the content processing software 381 to reproduce the content.

図22は、図20の各ソフトウエアが実行されることで実現されるPDA1の機能構成例を示すブロック図である。   FIG. 22 is a block diagram illustrating an example of a functional configuration of the PDA 1 realized by executing the software illustrated in FIG.

データベース処理ソフトウエア371により実現されるデータベース構成情報管理部401は、タッチパネル36において検出されるユーザからの入力に基づいて、図21に示されるようなデータベース構成情報を管理し、必要に応じてデータベース構成情報をデータベース表示制御部402に提供する。   The database configuration information management unit 401 realized by the database processing software 371 manages the database configuration information as shown in FIG. 21 based on the input from the user detected on the touch panel 36, and the database as necessary. The configuration information is provided to the database display control unit 402.

また、データベース構成情報管理部401は、データベースに貼り付けられているサムネイル画像がタップされ、コンテンツの再生が指示されたことをタッチパネル36からの出力に基づいて検出した場合、それを再生要求部403に通知する。   In addition, when the thumbnail image pasted in the database is tapped and the reproduction of the content is instructed based on the output from the touch panel 36, the database configuration information management unit 401 detects this, based on the output from the touch panel 36. Notify

データベース表示制御部402は、データベース構成情報管理部401から提供される情報に従って、図7のメモ作成領域211や図14の予定入力領域301の表示を制御する。   The database display control unit 402 controls the display of the memo creation area 211 in FIG. 7 and the scheduled input area 301 in FIG. 14 according to the information provided from the database configuration information management unit 401.

例えば、データベース表示制御部402は、データベース構成情報管理部401から図21のデータベース構成情報が提供されたとき、手書き文字(2段目に登録されている情報)を、その他の情報で表される色、太さで、座標(x1,y1)で表される位置に表示させるとともに、他のコンテンツについても、サムネイル画像等をデータベース上の所定の位置に、所定の大きさで表示させる。サムネイル画像の大きさを表す情報は、例えば、図21のその他の情報として記述されている。   For example, when the database configuration information management unit 401 provides the database configuration information of FIG. 21, the database display control unit 402 represents handwritten characters (information registered in the second row) with other information. In addition to displaying the color and thickness at a position represented by coordinates (x1, y1), thumbnail images and the like are also displayed at a predetermined size on the database at a predetermined size for other contents. The information indicating the size of the thumbnail image is described as, for example, other information in FIG.

再生要求部403は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ処理ソフトウエア381−1により実現される静止画コンテンツ再生部421−1に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ処理ソフトウエア381−2により実現される動画コンテンツ再生部421−2に動画コンテンツの再生を要求する。   When the thumbnail image of the still image content is tapped, the reproduction request unit 403 requests the still image content reproduction unit 421-1 realized by the still image content processing software 381-1 to reproduce the still image content, and When the thumbnail image of the content is tapped, the moving image content reproduction unit 421-2 realized by the moving image content processing software 381-2 is requested to reproduce the moving image content.

また、再生要求部403は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ処理ソフトウエア381−3により実現される音声コンテンツ再生部421−3に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ処理ソフトウエア381−4により実現されるメモコンテンツ再生部421−4にメモの再生を要求する。   Further, when the thumbnail image of the audio content is tapped, the reproduction request unit 403 requests the audio content reproduction unit 421-3 realized by the audio content processing software 381-3 to reproduce the audio content, and the thumbnail of the memo. When the image is tapped, the memo content playback unit 421-4 realized by the memo content processing software 381-4 is requested to play back the memo.

表示要求部404は、一覧表示ボタン221に対するユーザの操作を検出し、サムネイル画像の一覧を表示することが指示された場合、それをサムネイル表示ソフトウエア363により実現される検索部411に要求し、一方、サムネイル画像の一覧を閉じることが指示された場合、それをサムネイル画像表示制御部413に要求する。   When the display request unit 404 detects a user operation on the list display button 221 and is instructed to display a list of thumbnail images, the display request unit 404 requests the search unit 411 realized by the thumbnail display software 363, On the other hand, when it is instructed to close the list of thumbnail images, the thumbnail image display control unit 413 is requested to do so.

サムネイル表示ソフトウエア363により実現される検索部411は、静止画コンテンツの検索を行う静止画コンテンツ検索部411−1、動画コンテンツの検索を行う動画コンテンツ検索部411−2、音声コンテンツの検索を行う音楽コンテンツ検索部411−3、メモの検索を行うメモコンテンツ検索部411−4から構成される。このように、PDA1には、コンテンツの検索を行う機能部がコンテンツのカテゴリ毎に用意される。   The search unit 411 realized by the thumbnail display software 363 includes a still image content search unit 411-1 that searches for still image content, a moving image content search unit 411-2 that searches for moving image content, and a search for audio content. A music content search unit 411-3 and a memo content search unit 411-4 for searching for memos are included. As described above, the PDA 1 is provided with a function unit for searching for content for each category of content.

静止画コンテンツ検索部411−1乃至メモコンテンツ検索部411−4のそれぞれは、サムネイル画像の一覧を表示することがデータベース処理ソフトウエア371の表示要求部404から要求されることに応じてコンテンツの検索を行い、検索結果をサムネイル画像生成部412に出力する。静止画コンテンツ検索部411−1乃至メモコンテンツ検索部411−4によるコンテンツの検索は、PDA1にMS3やCF4が装着されている場合には、MS3、CF4、および記憶部139を対象として行われ、MS3やCF4が装着されていない場合には、記憶部139のみを対象として行われる。   Each of the still image content search unit 411-1 to the memo content search unit 411-4 searches for content in response to a request from the display request unit 404 of the database processing software 371 to display a list of thumbnail images. And the search result is output to the thumbnail image generation unit 412. The content search by the still image content search unit 411-1 to the memo content search unit 411-4 is performed on the MS3, CF4, and the storage unit 139 when the PDA 1 is equipped with the MS3 or CF4. When the MS 3 or the CF 4 is not attached, only the storage unit 139 is performed.

サムネイル画像生成部412は、検索部411(静止画コンテンツ検索部411−1乃至メモコンテンツ検索部411−4)から供給される検索結果に基づいて、各コンテンツのサムネイル画像を生成する。上述したように、例えば、静止画コンテンツのサムネイル画像として、静止画を縮小した画像を生成し、動画コンテンツのサムネイル画像として、先頭の1フレームの画像を縮小した画像を生成する。サムネイル画像生成部412により生成されたサムネイル画像はサムネイル画像表示制御部413に出力される。   The thumbnail image generation unit 412 generates a thumbnail image of each content based on the search result supplied from the search unit 411 (still image content search unit 411-1 to memo content search unit 411-4). As described above, for example, an image obtained by reducing a still image is generated as a thumbnail image of still image content, and an image obtained by reducing the image of the first frame is generated as a thumbnail image of moving image content. The thumbnail image generated by the thumbnail image generation unit 412 is output to the thumbnail image display control unit 413.

なお、サムネイル画像を生成するサムネイル画像生成部412は、コンテンツ処理ソフトウエア381により実現されるようにしてもよい。この場合、検索部411によるコンテンツの検索結果がコンテンツ処理ソフトウエア381のサムネイル画像生成部412に通知され、その通知に応じて、サムネイル画像が生成される。生成されたサムネイル画像は、サムネイル表示ソフトウエア363のサムネイル画像表示制御部413に供給され、LCD28に表示される。   Note that the thumbnail image generation unit 412 that generates the thumbnail image may be realized by the content processing software 381. In this case, the search result of the content by the search unit 411 is notified to the thumbnail image generation unit 412 of the content processing software 381, and a thumbnail image is generated in response to the notification. The generated thumbnail image is supplied to the thumbnail image display control unit 413 of the thumbnail display software 363 and displayed on the LCD 28.

サムネイル画像表示制御部413は、サムネイル画像生成部412から供給されるサムネイル画像をサムネイル表示領域241に一覧表示させる。また、サムネイル画像表示制御部413は、タッチパネル36からの出力に基づいて、カテゴリ選択ボタン261乃至264のいずれかが操作されたことを検出した場合、操作されたボタンに対応するカテゴリのコンテンツのサムネイル画像を除くように一覧の表示を更新する。   The thumbnail image display control unit 413 displays a list of thumbnail images supplied from the thumbnail image generation unit 412 in the thumbnail display area 241. When the thumbnail image display control unit 413 detects that any of the category selection buttons 261 to 264 is operated based on the output from the touch panel 36, the thumbnail of the content of the category corresponding to the operated button. Update the list display to exclude images.

さらに、サムネイル画像表示制御部413は、タッチパネル36からの出力に基づいて、サムネイル表示領域241に表示させているサムネイル画像がタップされ、コンテンツを再生することがユーザから指示された場合、そのことを再生要求部414に通知する。   Further, the thumbnail image display control unit 413 taps the thumbnail image displayed in the thumbnail display area 241 based on the output from the touch panel 36, and when the user gives an instruction to reproduce the content, The reproduction request unit 414 is notified.

再生要求部414は、データベース処理ソフトウエア371の再生要求部403と同様に、再生が指示されたコンテンツのカテゴリに応じて、静止画コンテンツ再生部421−1乃至メモコンテンツ再生部421−4のいずれかにコンテンツの再生を要求する。   Similar to the playback request unit 403 of the database processing software 371, the playback request unit 414 selects one of the still image content playback unit 421-1 to the memo content playback unit 421-4 according to the category of the content for which playback has been instructed. Requests to play content.

次に、PDA1の動作についてフローチャートを参照して説明する。   Next, the operation of the PDA 1 will be described with reference to a flowchart.

始めに、図23のフローチャートを参照して、データ処理ソフトウエア371により実行されるデータベース作成処理について説明する。   First, the database creation process executed by the data processing software 371 will be described with reference to the flowchart of FIG.

ステップS1において、データベース構成情報管理部401は、タッチパネル36からの出力に基づいて、例えば、手書き文字の入力やサムネイル画像の貼り付けなどの、ユーザによる入力があったか否かを判定する。   In step S <b> 1, the database configuration information management unit 401 determines, based on the output from the touch panel 36, whether there is an input by the user, such as input of handwritten characters or pasting of a thumbnail image.

ステップS1において、ユーザによる入力があったと判定した場合、ステップS2に進み、データベース構成情報管理部401は、その入力に応じて、自分自身が管理するデータベース構成情報を更新する。また、ステップS2においては、データベース構成情報管理部401によるデータベース構成情報の更新に伴い、その更新が、データベース表示制御部402によりデータベースの表示に反映される。   If it is determined in step S1 that there is an input by the user, the process proceeds to step S2, and the database configuration information management unit 401 updates the database configuration information managed by itself according to the input. In step S <b> 2, with the update of the database configuration information by the database configuration information management unit 401, the update is reflected in the database display by the database display control unit 402.

これにより、例えば、曲線の手書き文字がユーザにより入力された場合、この手書き文字の入力された位置を表す座標や、色、ペンの太さがデータベース構成情報に登録される。また、新たに登録された情報がデータベースの表示に反映され、図8に示されるような画像231がLCD28に表示される。   Thus, for example, when a curved handwritten character is input by the user, the coordinates, color, and pen thickness representing the input position of the handwritten character are registered in the database configuration information. Also, the newly registered information is reflected in the database display, and an image 231 as shown in FIG. 8 is displayed on the LCD 28.

ステップS1において、ユーザからの入力がないと判定された場合、ステップS2の処理はスキップされる。   If it is determined in step S1 that there is no input from the user, the process in step S2 is skipped.

ステップS3において、表示要求部404は、サムネイル画像の一覧を表示済みであるか否かを判定し、まだ表示していないと判定した場合、ステップS4に進む。   In step S3, the display request unit 404 determines whether a list of thumbnail images has been displayed. If it is determined that the thumbnail image list has not yet been displayed, the process proceeds to step S4.

ステップS4において、表示要求部404は、サムネイル画像の一覧の表示が指示されたか否かをタッチパネル36からの出力に基づいて判定する。   In step S <b> 4, the display request unit 404 determines whether or not an instruction to display a list of thumbnail images has been given based on the output from the touch panel 36.

一覧表示ボタン221が操作されたため、ステップS4において、サムネイル画像の一覧の表示が指示されたと判定した場合、表示要求部404は、ステップS5に進み、サムネイル画像の一覧の表示をサムネイル表示ソフトウエア363(検索部411)に要求する。   If it is determined in step S4 that display of a list of thumbnail images has been instructed because the list display button 221 has been operated, the display request unit 404 proceeds to step S5 to display the list of thumbnail images in the thumbnail display software 363. Request to (search unit 411).

この要求に応じて、サムネイル表示ソフトウエア363においては、サムネイル画像の一覧の表示が行われる。サムネイル表示ソフトウエア363による処理の詳細については図24のフローチャートを参照して後述する。   In response to this request, the thumbnail display software 363 displays a list of thumbnail images. Details of the processing by the thumbnail display software 363 will be described later with reference to the flowchart of FIG.

ステップS6において、データベース構成情報管理部401は、データベースに対するサムネイル画像の貼り付けが、サムネイル表示ソフトウエア363のサムネイル画像表示制御部413から通知されたか否かを判定する。サムネイル表示領域241に表示されたサムネイル画像の一覧から選択されたサムネイル画像が、ドラッグアンドドロップにより例えばメモ作成領域211に貼り付けられたとき、そのことがサムネイル画像表示制御部413から通知されてくる(図24のステップS31)。   In step S <b> 6, the database configuration information management unit 401 determines whether the thumbnail image pasting to the database is notified from the thumbnail image display control unit 413 of the thumbnail display software 363. When a thumbnail image selected from the list of thumbnail images displayed in the thumbnail display area 241 is pasted in, for example, the memo creation area 211 by drag and drop, the thumbnail image display control unit 413 notifies that fact. (Step S31 in FIG. 24).

データベース構成情報管理部401は、ステップS6において、データベースに対するサムネイル画像の貼り付けが通知されてきたと判定した場合、ステップS7に進み、データベース構成情報を更新する。このときも、そのデータベース構成情報の更新がデータベース表示制御部402によりデータベースの表示に反映される。   If the database configuration information management unit 401 determines in step S6 that a thumbnail image has been pasted to the database, the database configuration information management unit 401 proceeds to step S7 and updates the database configuration information. Also at this time, the update of the database configuration information is reflected on the database display by the database display control unit 402.

これにより、例えば、図9に示されるように、サムネイル画像253がサムネイル表示領域241からドラッグアンドドロップにより位置P1に貼り付けられたとき、そのサムネイル画像253により表されるコンテンツ本体のデータの記録場所を表すリンク情報や、位置P1の座標等がデータベース構成情報に登録され、表示に反映される(図10)。   Thus, for example, as shown in FIG. 9, when the thumbnail image 253 is pasted from the thumbnail display area 241 to the position P1 by drag and drop, the data recording location of the content main body represented by the thumbnail image 253 is recorded. The link information indicating, the coordinates of the position P1, and the like are registered in the database configuration information and reflected in the display (FIG. 10).

ステップS4において、サムネイル画像の一覧の表示が指示されていないと判定された場合、ステップS5乃至S7の処理はスキップされる。また、ステップS6において、サムネイル画像の貼り付けが通知されていないと判定された場合、ステップS7の処理はスキップされる。   If it is determined in step S4 that display of a list of thumbnail images is not instructed, the processes in steps S5 to S7 are skipped. If it is determined in step S6 that the thumbnail image is not pasted, the process in step S7 is skipped.

一方、ステップS3において、表示要求部404は、サムネイル画像の一覧を表示済みであると判定した場合、ステップS8に進み、表示しているサムネイル画像の一覧を閉じることが指示されたか否かを判定する。サムネイル画像の一覧が表示されているときに一覧表示ボタン221を操作することによって、ユーザは、サムネイル画像の一覧を閉じることができる。   On the other hand, if it is determined in step S3 that the list of thumbnail images has been displayed, the display request unit 404 proceeds to step S8 and determines whether or not an instruction to close the list of displayed thumbnail images has been issued. To do. By operating the list display button 221 when the list of thumbnail images is displayed, the user can close the list of thumbnail images.

ステップS8において、表示要求部404は、表示しているサムネイル画像の一覧を閉じることが指示されていないと判定した場合、ステップS6に進み、それ以降の処理を実行する。   In step S8, if the display request unit 404 determines that it is not instructed to close the list of thumbnail images being displayed, the process proceeds to step S6 and executes the subsequent processing.

表示要求部404は、ステップS8において、一覧を閉じることが指示されたと判定した場合、ステップS9に進み、サムネイル画像の一覧を閉じることをサムネイル表示ソフトウエア363のサムネイル画像表示制御部413に要求する。この要求に応じて、サムネイル表示ソフトウエア363によってサムネイル画像の一覧の表示が消される。その後、処理はステップS10に進む。   If the display request unit 404 determines in step S8 that an instruction to close the list has been given, the process proceeds to step S9 and requests the thumbnail image display control unit 413 of the thumbnail display software 363 to close the list of thumbnail images. . In response to this request, the thumbnail display software 363 erases the list of thumbnail images. Thereafter, the process proceeds to step S10.

ステップS10において、データベース構成情報管理部401は、データベースに貼り付けたコンテンツの再生がユーザから指示されたか否かを判定し、データベースに貼り付けたサムネイル画像がタップされたことから、そのサムネイル画像により表されるコンテンツの再生が指示されたと判定した場合、そのことを再生要求部403に通知する。   In step S10, the database configuration information management unit 401 determines whether or not the user has instructed the reproduction of the content pasted in the database, and the thumbnail image pasted in the database has been tapped. If it is determined that the reproduction of the represented content has been instructed, the reproduction request unit 403 is notified of this.

再生要求部403は、ステップS11において、コンテンツの再生をコンテンツ処理ソフトウエア381に対して要求する。再生要求部403は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ再生部421−1に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ再生部421−2に動画コンテンツの再生を要求する。また、再生要求部403は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ再生部421−3に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ再生部421−4にメモの再生を要求する。   In step S11, the reproduction request unit 403 requests the content processing software 381 to reproduce the content. When the thumbnail image of the still image content is tapped, the reproduction request unit 403 requests the still image content reproduction unit 421-1 to reproduce the still image content. When the thumbnail image of the moving image content is tapped, the reproduction request unit 403 reproduces the moving image content. Requests playback of moving image content to the unit 421-2. When the thumbnail image of the audio content is tapped, the reproduction request unit 403 requests the audio content reproduction unit 421-3 to reproduce the audio content. When the thumbnail image of the memo is tapped, the reproduction request unit 403 -4 requests the playback of a memo.

データベース構成情報管理部401は、ステップS12において、データベースの作成を終了するか否かを判定し、終了しないと判定した場合、ステップS1に戻り、それ以降の処理を繰り返し実行する。   In step S12, the database configuration information management unit 401 determines whether or not to end the creation of the database. If it is determined not to end the process, the database configuration information management unit 401 returns to step S1 and repeats the subsequent processing.

一方、ステップS12において、データベース構成情報管理部401は、例えば、図6のメインの画面に戻ることが指示されたため、データベースの作成を終了させると判定した場合、作成中のデータベースに関するデータベース構成情報を記憶部139などに保存し、処理を終了させる。   On the other hand, in step S12, the database configuration information management unit 401 is instructed to return to the main screen in FIG. 6, for example. The data is stored in the storage unit 139 and the process is terminated.

次に、図24のフローチャートを参照して、サムネイル表示ソフトウエア363により実行されるサムネイル画像の表示制御処理について説明する。   Next, a thumbnail image display control process executed by the thumbnail display software 363 will be described with reference to a flowchart of FIG.

この処理は、データベース処理ソフトウエア371の表示要求部404からの要求(図23のステップS5)があったときに開始される。   This process is started when there is a request from the display request unit 404 of the database processing software 371 (step S5 in FIG. 23).

ステップS21において、検索部411は、記憶部139やMS3などに記憶されているコンテンツを対象として、データベースに貼り付けることのできる全てのカテゴリのコンテンツの検索を行う。   In step S <b> 21, the search unit 411 searches for content in all categories that can be pasted to the database, with content stored in the storage unit 139, MS 3, or the like as a target.

具体的には、静止画コンテンツ検索部411−1により静止画コンテンツの検索が行われ、動画コンテンツ検索部411−2により動画コンテンツの検索が行される。また、音声コンテンツ検索部411−3により音声コンテンツの検索が行われ、メモコンテンツ検索部411−4によりメモコンテンツの検索が行われる。静止画コンテンツ検索部411−1至メモコンテンツ検索部411−4によるそれぞれの検索結果は、サムネイル画像生成部412に出力される。   Specifically, the still image content search unit 411-1 searches for still image content, and the moving image content search unit 411-2 searches for moving image content. The audio content search unit 411-3 searches for audio content, and the memo content search unit 411-4 searches for memo content. The respective search results by the still image content search unit 411-1 to the memo content search unit 411-4 are output to the thumbnail image generation unit 412.

サムネイル画像生成部412は、ステップS22において、それぞれのカテゴリのコンテンツのサムネイル画像を生成し、生成したサムネイル画像をサムネイル画像表示制御部413に出力する。上述したように、サムネイル画像生成部412がコンテンツ処理ソフトウエア381により実現される場合、ステップS21での検索結果がサムネイル画像生成部412に通知され、サムネイル画像が生成される。   In step S <b> 22, the thumbnail image generation unit 412 generates thumbnail images of the contents of the respective categories, and outputs the generated thumbnail images to the thumbnail image display control unit 413. As described above, when the thumbnail image generation unit 412 is realized by the content processing software 381, the search result in step S21 is notified to the thumbnail image generation unit 412 and a thumbnail image is generated.

ステップS23において、サムネイル画像表示制御部413は、サムネイル画像の一覧を表示させる。これにより、図9に示されるように、サムネイル表示領域241がLCD28上に形成され、そこに、サムネイル画像の一覧が表示される。   In step S23, the thumbnail image display control unit 413 displays a list of thumbnail images. Thereby, as shown in FIG. 9, a thumbnail display area 241 is formed on the LCD 28, and a list of thumbnail images is displayed there.

ステップS24において、サムネイル画像表示制御部413は、タッチパネル36からの出力に基づいて、サムネイル画像のカテゴリの選択が行われたか否かを判定し、カテゴリ選択ボタン261乃至264のいずれかが操作され、カテゴリの選択が行われたと判定した場合、ステップS25に進む。   In step S24, the thumbnail image display control unit 413 determines whether a thumbnail image category has been selected based on the output from the touch panel 36, and any of the category selection buttons 261 to 264 is operated. If it is determined that the category has been selected, the process proceeds to step S25.

ステップS25において、サムネイル画像表示制御部413は、ユーザによる入力に応じてサムネイル画像の表示を更新させる。サムネイル画像表示制御部413は、例えば、カテゴリ選択ボタン261が操作されたとき、既に表示させているサムネイル画像の中から、静止画コンテンツのサムネイル画像を除くことで表示を更新し、カテゴリ選択ボタン262が操作されたとき、動画コンテンツのサムネイル画像を除くことで表示を更新する。カテゴリ選択ボタン263,264が操作されたときも同様に、メモ、音声コンテンツのサムネイル画像が除かれることで表示が更新される。   In step S <b> 25, the thumbnail image display control unit 413 updates the display of the thumbnail image according to the input by the user. For example, when the category selection button 261 is operated, the thumbnail image display control unit 413 updates the display by removing the thumbnail image of the still image content from the already displayed thumbnail images, and the category selection button 262. When is operated, the display is updated by removing the thumbnail image of the video content. Similarly, when the category selection buttons 263 and 264 are operated, the display is updated by removing the thumbnail images of the memo and the audio content.

ステップS24において、カテゴリの選択が行われていないと判定された場合、ステップS25の処理はスキップされる。   If it is determined in step S24 that no category has been selected, the process in step S25 is skipped.

ステップS26において、サムネイル画像表示制御部413は、タッチパネル36からの出力に基づいて、サムネイル表示領域241にサムネイル画像を表示させているコンテンツの再生が指示されたか否かを判定する。   In step S <b> 26, the thumbnail image display control unit 413 determines, based on the output from the touch panel 36, whether or not the reproduction of the content displaying the thumbnail image in the thumbnail display area 241 has been instructed.

サムネイル画像がタップされたことから、ステップS26において、そのサムネイル画像により表されるコンテンツの再生が指示されたと判定した場合、サムネイル画像表示制御部413は、そのことを再生要求部414に通知する。   If the thumbnail image has been tapped, if it is determined in step S26 that reproduction of the content represented by the thumbnail image has been instructed, the thumbnail image display control unit 413 notifies the reproduction request unit 414 of this.

再生要求部414は、ステップS27において、コンテンツの再生をコンテンツ処理ソフトウエア381に対して要求する。再生要求部414は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ再生部421−1に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ再生部421−2に動画コンテンツの再生を要求する。また、再生要求部414は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ再生部421−3に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ再生部421−4にメモの再生を要求する。   In step S27, the reproduction request unit 414 requests the content processing software 381 to reproduce the content. When the thumbnail image of the still image content is tapped, the reproduction request unit 414 requests the still image content reproduction unit 421-1 to reproduce the still image content. When the thumbnail image of the moving image content is tapped, the reproduction request unit 414 reproduces the moving image content. Requests playback of moving image content to the unit 421-2. When the thumbnail image of the audio content is tapped, the reproduction request unit 414 requests the audio content reproduction unit 421-3 to reproduce the audio content. When the thumbnail image of the memo is tapped, the reproduction request unit 414 -4 requests the playback of a memo.

ステップS26において、コンテンツの再生が指示されていないと判定された場合、ステップS27の処理はスキップされる。   If it is determined in step S26 that content reproduction has not been instructed, the process of step S27 is skipped.

ステップS28において、サムネイル画像表示制御部413は、サムネイル表示領域241に表示させているサムネイル画像の上にスタイラス2の先端が押し当てられたか否かを判定し、押し当てられたと判定した場合、ステップS29に進み、スタイラス2の移動に連動してサムネイル画像の表示位置を移動させる。   In step S28, the thumbnail image display control unit 413 determines whether or not the tip of the stylus 2 is pressed on the thumbnail image displayed in the thumbnail display area 241. In S29, the display position of the thumbnail image is moved in conjunction with the movement of the stylus 2.

ステップS30において、サムネイル画像表示制御部413は、サムネイル画像に対するスタイラス2の先端の押し当てが終わったか否か、すなわち、スタイラス2の先端がLCD28の表面から離されたか否かを判定し、スタイラス2の先端がLCD28の表面から離されていないと判定した場合、ステップS29に戻り、表示位置の移動を繰り返す。   In step S30, the thumbnail image display control unit 413 determines whether or not the tip of the stylus 2 has been pressed against the thumbnail image, that is, whether or not the tip of the stylus 2 has been separated from the surface of the LCD 28, and the stylus 2 If it is determined that the tip of the display is not separated from the surface of the LCD 28, the process returns to step S29, and the movement of the display position is repeated.

一方、ステップS30において、サムネイル画像表示制御部413は、LCD28の表面からスタイラス2の先端が離され、作成中のデータベースの上にサムネイル画像が移動されたと判定した場合、ステップS31に進み、データベース処理ソフトウエア371のデータベース構成情報管理部401に対して、サムネイル画像の貼り付けを要求する。   On the other hand, if the thumbnail image display control unit 413 determines in step S30 that the tip of the stylus 2 has been moved away from the surface of the LCD 28 and the thumbnail image has been moved onto the database being created, the process proceeds to step S31, where database processing is performed. It requests the database configuration information management unit 401 of the software 371 to paste a thumbnail image.

このとき、サムネイル画像の移動先の位置を表す情報や、そのサムネイル画像のリンク情報などの各種の情報がサムネイル画像表示制御部413からデータベース構成情報管理部401に通知される。   At this time, the thumbnail image display control unit 413 notifies the database configuration information management unit 401 of various information such as information indicating the position of the thumbnail image destination and link information of the thumbnail image.

このようなサムネイル画像の貼り付けの通知が行われた後、または、ステップS28において、サムネイル画像に対してスタイラス2の先端が押し当てられていないと判定された場合、処理はステップS32に進む。   After such a thumbnail image pasting notification has been made, or when it is determined in step S28 that the tip of the stylus 2 is not pressed against the thumbnail image, the process proceeds to step S32.

ステップS32において、サムネイル画像表示制御部413は、サムネイル画像の一覧を閉じること要求されたか否かを判定し、要求されていないと判定した場合、ステップS26に戻り、それ以降の処理を繰り返す。   In step S32, the thumbnail image display control unit 413 determines whether or not it is requested to close the list of thumbnail images. If it is determined that the thumbnail image list is not requested, the process returns to step S26 and repeats the subsequent processing.

また、サムネイル画像表示制御部413は、ステップS32において、サムネイル画像の一覧を閉じることが要求されたと判定した場合、一覧を閉じ、処理を終了させる。この要求は、データベース処理ソフトウエア371の表示要求部404から通知されるものである(図23のステップS9)。   If the thumbnail image display control unit 413 determines in step S32 that it is requested to close the list of thumbnail images, the thumbnail image display control unit 413 closes the list and ends the processing. This request is notified from the display request unit 404 of the database processing software 371 (step S9 in FIG. 23).

次に、図25のフローチャートを参照して、コンテンツ処理ソフトウエア381により実行されるコンテンツの再生処理について説明する。   Next, content reproduction processing executed by the content processing software 381 will be described with reference to the flowchart of FIG.

例えば、この処理が静止画コンテンツ処理ソフトウエア381−1により実行される場合、静止画コンテンツ再生部421−1は、ステップS41において、静止画コンテンツの再生(プレビュー)が要求されたか否かを判定し、要求されたと判定するまで待機する。   For example, when this process is executed by the still image content processing software 381-1, the still image content reproduction unit 421-1 determines whether reproduction (preview) of the still image content is requested in step S41. And wait until it is determined that it has been requested.

データベースに貼り付けられた静止画コンテンツのサムネイル画像がタップされたとき、または、サムネイル表示領域241に表示されている静止画コンテンツのサムネイル画像がタップされたとき、データベース処理ソフトウエア371の再生要求部403、サムネイル表示ソフトウエア363の再生要求部414からそれぞれ静止画コンテンツの再生が要求されてくる(図23のステップS11、図24のステップS27)。再生要求部403、再生要求部414からの要求には、コンテンツ本体の記憶位置を表す情報等も含まれる。   When the thumbnail image of the still image content pasted in the database is tapped, or when the thumbnail image of the still image content displayed in the thumbnail display area 241 is tapped, the playback request unit of the database processing software 371 403, the playback request unit 414 of the thumbnail display software 363 requests the playback of the still image content (step S11 in FIG. 23 and step S27 in FIG. 24). The request from the reproduction request unit 403 and the reproduction request unit 414 includes information indicating the storage position of the content body.

なお、サムネイル画像がタップされたときにすぐにコンテンツの再生が開始されるのではなく、サムネイル画像がタップされたとき、タップされたコンテンツに対してユーザが選択可能な操作の内容を表すメニューが表示され、そのメニューからある操作が選択されてからコンテンツの再生が開始されるようにしてもよい。サムネイル画像がタップされたときに表示されるメニューには、例えば、コンテンツの再生/はがす/拡大/縮小/削除等が、ユーザが選択可能な操作として用意される。   When a thumbnail image is tapped, content playback does not start immediately, but when the thumbnail image is tapped, there is a menu indicating the contents of operations that can be selected by the user for the tapped content. The content may be displayed after the operation is displayed and a certain operation is selected from the menu. In the menu displayed when the thumbnail image is tapped, for example, playback / peel / enlargement / reduction / deletion of the content is prepared as an operation that can be selected by the user.

静止画コンテンツ再生部421−1は、ステップS41において、静止画コンテンツの再生が要求されたと判定した場合、ステップS42に進み、再生要求部403、再生要求部414からの要求に含まれる情報に基づいてコンテンツ本体のデータを取得し、その再生を開始する。   If the still image content reproduction unit 421-1 determines in step S41 that reproduction of the still image content has been requested, the process proceeds to step S42 and is based on information included in the requests from the reproduction request unit 403 and the reproduction request unit 414. The data of the content body is acquired and the playback is started.

これにより、LCD28上には、例えば、図11に示されるような静止画のプレビューが表示される。静止画コンテンツ再生部421−1は、以上の処理を繰り返し、静止画コンテンツの再生を行う。   Thereby, a preview of a still image as shown in FIG. 11 is displayed on the LCD 28, for example. The still image content reproduction unit 421-1 repeats the above processing to reproduce the still image content.

同様の処理が動画コンテンツ再生部421−2、音声コンテンツ再生部421−3、メモコンテンツ再生部421−4によりそれぞれのカテゴリのコンテンツに対して行われる。   Similar processing is performed on the content of each category by the moving image content playback unit 421-2, the audio content playback unit 421-3, and the memo content playback unit 421-4.

以上においては、データベースに貼り付けたサムネイル画像をタップすることで、それにより表されるコンテンツの再生を開始させることができるとしたが、そのようなコンテンツを容易に参照するための方法としては、次のようなものもある。   In the above, by tapping the thumbnail image pasted on the database, the reproduction of the content represented thereby can be started. As a method for easily referring to such content, Some are as follows:

図26は、データベースの例を示す図である。   FIG. 26 is a diagram illustrating an example of a database.

図26に示されるデータベースであるメモは、図10のメモ作成領域211に示されるメモに対して、サムネイル画像401乃至404がさらに貼り付けられたものである。なお、図26において、図10のコンテンツ表示領域241は表示されていない。図10と同じ部分には同一の符号を付してあり、重複する説明は適宜省略する。   The memo, which is the database shown in FIG. 26, is obtained by further pasting thumbnail images 401 to 404 on the memo shown in the memo creation area 211 of FIG. In FIG. 26, the content display area 241 in FIG. 10 is not displayed. The same parts as those in FIG. 10 are denoted by the same reference numerals, and redundant description will be omitted as appropriate.

図26のメモに貼り付けられているサムネイル画像のうち、サムネイル画像401,402は、静止画コンテンツのサムネイル画像である。また、サムネイル画像403は、音声コンテンツのサムネイル画像であり、サムネイル画像404は、動画コンテンツのサムネイル画像である。サムネイル画像401,402,404により表されるコンテンツのデータは、それぞれMS3に記憶されている(それぞれのサムネイル画像の右下にMS3の外観の絵が付されている)。   Of the thumbnail images pasted on the memo in FIG. 26, thumbnail images 401 and 402 are thumbnail images of still image content. A thumbnail image 403 is a thumbnail image of audio content, and a thumbnail image 404 is a thumbnail image of moving image content. Content data represented by the thumbnail images 401, 402, and 404 is stored in the MS 3 (a picture of the appearance of the MS 3 is attached to the lower right of each thumbnail image).

このようなメモが予め作成されており、そのデータベース構成情報がデータベース処理ソフトウエア371により管理されているものとする。   It is assumed that such a memo is created in advance and the database configuration information is managed by the database processing software 371.

図27は、図26のサムネイル画像253により表される静止画コンテンツのプレビュー画面を示す図である。   FIG. 27 is a diagram showing a still image content preview screen represented by the thumbnail image 253 of FIG.

図27の画面は、例えば、図26のサムネイル画像253がタップされたときに表示されるものであってもよいし、図6のメイン画面から静止画のビューワ機能を有するソフトウエアが起動され、そのソフトウエアにより表示されるものであってもよい。   27 may be displayed, for example, when the thumbnail image 253 of FIG. 26 is tapped, or software having a still image viewer function is activated from the main screen of FIG. It may be displayed by the software.

図27において、ステータス領域203の上に形成されるボタン表示領域412の左端には、コンテンツ表示領域411に表示されているコンテンツに関連するコンテンツの一覧を表示するときに操作される関連コンテンツ表示ボタン421が用意されている。   In FIG. 27, a related content display button operated when displaying a list of contents related to the content displayed in the content display area 411 at the left end of the button display area 412 formed on the status area 203. 421 is prepared.

ここで、「コンテンツ表示領域411に表示されているコンテンツに関連するコンテンツ」とは、コンテンツ表示領域411に表示されているコンテンツのサムネイル画像が貼り付けられているデータベースと同じデータベースに、そのサムネイル画像が貼り付けられているコンテンツをいう。   Here, “content related to the content displayed in the content display area 411” means that the thumbnail image is stored in the same database as the database in which the thumbnail image of the content displayed in the content display area 411 is pasted. The content that is pasted.

従って、図26のデータベースが予め作成されている場合、図27のコンテンツ表示領域411に表示されているコンテンツ(図26のサムネイル画像253により表されるコンテンツ)に関連するコンテンツは、サムネイル画像401,402により表される静止画コンテンツ、サムネイル画像403により表される音声コンテンツ、サムネイル画像404により表される動画コンテンツとなる。   Therefore, when the database in FIG. 26 is created in advance, the content related to the content (content represented by the thumbnail image 253 in FIG. 26) displayed in the content display area 411 in FIG. The still image content represented by 402, the audio content represented by the thumbnail image 403, and the moving image content represented by the thumbnail image 404.

以下、適宜、あるコンテンツに関連するコンテンツ(同じデータベースにサムネイル画像が貼り付けられているコンテンツ)を関連コンテンツという。   Hereinafter, content related to a certain content (content in which a thumbnail image is pasted in the same database) will be referred to as related content.

図28は、図27の画面において、関連コンテンツ表示ボタン421が操作されたときに表示される画面の例を示す図である。   FIG. 28 is a diagram showing an example of a screen displayed when the related content display button 421 is operated on the screen of FIG.

図28に示されるように、例えば、ステータス領域203とコンテンツ表示領域411の間にサムネイル表示領域431が形成され、そこに、関連コンテンツのサムネイル画像の一覧が表示される。   As shown in FIG. 28, for example, a thumbnail display area 431 is formed between the status area 203 and the content display area 411, and a list of thumbnail images of related content is displayed there.

すなわち、図27のコンテンツ表示領域411に表示されている静止画コンテンツの関連コンテンツは、サムネイル画像401乃至404により表されるコンテンツであるから、サムネイル表示領域431には、それらのコンテンツのサムネイル画像401乃至404が一覧表示される。   That is, since the related content of the still image content displayed in the content display area 411 in FIG. 27 is content represented by the thumbnail images 401 to 404, the thumbnail image 401 of those contents is displayed in the thumbnail display area 431. Through 404 are displayed in a list.

ユーザは、一覧表示されているサムネイル画像をタップすることで、タップしたサムネイル画像により表されるコンテンツをコンテンツ表示領域411に表示させることができる。   The user can display the content represented by the tapped thumbnail image in the content display area 411 by tapping the thumbnail image displayed in the list.

サムネイル表示領域431のサムネイル画像401乃至404の上下には、サムネイル表示領域431に表示するサムネイル画像の範囲を切り替えるときに水平方向に操作されるスクロールバーが用意されている。図27のコンテンツ表示領域411に表示されている静止画コンテンツの関連コンテンツがさらに複数ある場合、ユーザは、このスクロールバーを利用することで、図28に示されるもの以外の関連コンテンツのサムネイル画像を表示させることができる。   Above and below the thumbnail images 401 to 404 in the thumbnail display area 431, scroll bars that are operated in the horizontal direction when switching the range of thumbnail images displayed in the thumbnail display area 431 are prepared. When there are a plurality of related contents of the still image contents displayed in the content display area 411 in FIG. 27, the user can use the scroll bar to display thumbnail images of related contents other than those shown in FIG. Can be displayed.

なお、関連コンテンツのサムネイル画像の一覧を表示させるための操作は、関連コンテンツ表示ボタン421を操作することに限られるものではなく、どのような操作であってもよい。   Note that the operation for displaying a list of thumbnail images of related content is not limited to operating the related content display button 421, and may be any operation.

図29は、図28の画面に一覧表示されている関連コンテンツのサムネイル画像のうち、サムネイル画像401がタップされたときに表示される画面の例を示す図である。   FIG. 29 is a diagram illustrating an example of a screen displayed when the thumbnail image 401 is tapped among the thumbnail images of the related content displayed as a list on the screen of FIG.

サムネイル画像401がタップされたとき、静止画のビューワ機能を有するソフトウエア(コンテンツ処理ソフトウエア)により、サムネイル画像401により表される静止画コンテンツがコンテンツ表示領域411に表示される。   When the thumbnail image 401 is tapped, the still image content represented by the thumbnail image 401 is displayed in the content display area 411 by software (content processing software) having a still image viewer function.

図29のボタン表示領域412には、ボタン441,442が表示されており、ユーザは、ボタン441またはボタン442を操作する毎に、そのとき表示させている関連コンテンツの次の関連コンテンツを順次表示させることができる。   29, buttons 441 and 442 are displayed. Each time the user operates the button 441 or the button 442, the related content next to the related content displayed at that time is sequentially displayed. Can be made.

同じデータベースにサムネイル画像が貼り付けられたコンテンツは、何らかの関係があって1つのデータベースにまとめられたものであるから、このように、関連コンテンツのサムネイル画像が表示されることで、ユーザは、関連のあるコンテンツを容易に選択することができ、作業などを効率的に行うことができる。   Since the contents with the thumbnail images pasted in the same database have some relationship and are collected in one database, the thumbnail images of the related contents are displayed in this way, so that the user can Content can be easily selected and work can be performed efficiently.

なお、図28のサムネイル画像の中から、サムネイル画像403がタップされた場合、サムネイル画像403により表される音声コンテンツの再生が開始され(このときコンテンツ表示領域411には所定の画面が表示される)、サムネイル画像404がタップされた場合、サムネイル画像404により表される動画コンテンツの表示がコンテンツ表示領域411において開始される。   When the thumbnail image 403 is tapped from the thumbnail images in FIG. 28, reproduction of the audio content represented by the thumbnail image 403 is started (at this time, a predetermined screen is displayed in the content display area 411). ) When the thumbnail image 404 is tapped, the display of the moving image content represented by the thumbnail image 404 is started in the content display area 411.

以上においては、あるコンテンツを表示させている状態から、それに関連する他のコンテンツを表示させる場合について説明したが、所定の操作で、あるコンテンツを表示させている状態から、そのコンテンツのサムネイル画像が貼り付けられているデータベースを表示させることができるようにしてもよい。   In the above description, the case where another content related to the content is displayed from the state where a certain content is displayed has been described. However, the thumbnail image of the content is displayed from the state where the certain content is displayed by a predetermined operation. The pasted database may be displayed.

図30は、そのような、あるコンテンツの表示からデータベースの表示への表示の切り替えについて示す図である。   FIG. 30 is a diagram illustrating such display switching from the display of certain content to the display of the database.

例えば、図27の画面がLCD28に表示されている状態で所定の操作が行われたとき、LCD28の表示は、図30の白抜き矢印の先に示されるように、それまでLCD28(コンテンツ表示領域411)に表示されていたコンテンツのサムネイル画像が貼り付けられているデータベースの画面(図26の画面)に切り替えられる。   For example, when a predetermined operation is performed in a state where the screen of FIG. 27 is displayed on the LCD 28, the display on the LCD 28 is the LCD 28 (content display area) until then, as indicated by the tip of the white arrow in FIG. 411) is switched to the database screen (screen in FIG. 26) to which the thumbnail image of the content displayed is pasted.

これにより、ユーザは、あるコンテンツを表示させている状態から、そのコンテンツのサムネイル画像が貼り付けられているデータベース(表示中のコンテンツが関連付けられているデータベース)を容易に表示させることができる。   As a result, the user can easily display a database in which a thumbnail image of the content is pasted (a database associated with the displayed content) from a state in which the content is displayed.

なお、1つのコンテンツが、複数のデータベースに関連付けられている場合、あるボタンを操作することで、1つのコンテンツが関連付けられている複数のデータベースのサムネイル画像の一覧が表示され、その中から1つのデータベースが選択されたときに、あるコンテンツが表示されている状態から、そのコンテンツが関連付けられているデータベースに表示が切り替えられるようにしてもよい。   In addition, when one content is associated with a plurality of databases, a list of thumbnail images of a plurality of databases associated with one content is displayed by operating a certain button. When a database is selected, the display may be switched from a state where a certain content is displayed to a database associated with the content.

次に、図26乃至図30に示されるような画面表示を実現するソフトウエア構成について説明する。   Next, a software configuration for realizing screen display as shown in FIGS. 26 to 30 will be described.

図31は、PDA1に用意されるソフトウエアの例を示すブロック図である。   FIG. 31 is a block diagram illustrating an example of software prepared in the PDA 1.

図31に示されるソフトウエアの構成は、コンテンツ関連付けテーブル記憶部451が設けられている点を除いて図20の構成と同じである。   The configuration of software shown in FIG. 31 is the same as the configuration of FIG. 20 except that a content association table storage unit 451 is provided.

図31のデータベース処理ソフトウエア371(メモデータベース処理ソフトウエア371−1、予定表データベース処理ソフトウエア371−2)は、作成中のデータベースにサムネイル画像が貼り付けられ、コンテンツが関連付けられたとき、そのコンテンツに関する情報が記述されたコンテンツ関連付けテーブルをコンテンツ関連付けテーブル記憶部451に記憶させる。   The database processing software 371 (memo database processing software 371-1, schedule database processing software 371-2) shown in FIG. 31 is displayed when a thumbnail image is pasted on the database being created and the contents are associated. The content association table storage unit 451 stores a content association table in which information about content is described.

図32は、コンテンツ関連付けテーブル記憶部451に記憶されるコンテンツ関連付けテーブルの例を示す図である。   FIG. 32 is a diagram illustrating an example of a content association table stored in the content association table storage unit 451.

図32に示されるように、コンテンツ関連付けテーブルには、例えば、コンテンツ関連付けテーブルの識別情報であるindex、コンテンツ関連付けテーブルのデータ量を表すレコード長、データベースに関連付けられたコンテンツの識別情報であるコンテンツを示すラベル(以下、適宜、コンテンツラベルという)、コンテンツが関連付けられたデータベースの識別情報であるデータベースを示すラベル(以下、適宜、データベースラベルという)、コンテンツが関連付けられたデータベースを管理するデータベース処理ソフトウエアの識別情報であるデータベース処理ソフトウエアを示すラベル(以下、適宜、ソフトウエアラベルという)が記述される。   As shown in FIG. 32, the content association table includes, for example, an index that is identification information of the content association table, a record length that represents the data amount of the content association table, and content that is identification information of the content associated with the database. Database processing software for managing a label indicating a database (hereinafter referred to as a content label), a label indicating a database which is identification information of a database associated with the content (hereinafter referred to as a database label as appropriate), and a database associated with the content A label indicating database processing software (hereinafter referred to as a software label as appropriate) is described.

データベースラベルとソフトウエアラベルは、1つのコンテンツ関連付けテーブルに複数記述されるようにしてもよい。   A plurality of database labels and software labels may be described in one content association table.

図32の各情報が記述されるコンテンツ関連付けテーブルは、データベースにサムネイル画像が貼り付けられた1つのコンテンツ毎に作成され、コンテンツ関連付けテーブル記憶部451に登録される。   The content association table in which each piece of information in FIG. 32 is described is created for each content in which a thumbnail image is pasted in the database, and is registered in the content association table storage unit 451.

図31の説明に戻り、コンテンツ処理ソフトウエア381(静止画コンテンツ処理ソフトウエア381−1、動画コンテンツ処理ソフトウエア381−2、音声コンテンツ処理ソフトウエア381−3、メモコンテンツ処理ソフトウエア381−4)は、表示させているコンテンツに関連するコンテンツのサムネイル画像を表示することがユーザにより要求された場合(関連コンテンツ表示ボタン421が操作された場合)、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルを参照することによって関連コンテンツを選択し、関連コンテンツのサムネイル画像をサムネイル表示領域431に表示させる。   Returning to the description of FIG. 31, content processing software 381 (still image content processing software 381-1, moving image content processing software 381-2, audio content processing software 381-3, memo content processing software 381-4). Is a content stored in the content association table storage unit 451 when the user requests to display a thumbnail image of content related to the displayed content (when the related content display button 421 is operated). The related content is selected by referring to the association table, and a thumbnail image of the related content is displayed in the thumbnail display area 431.

また、コンテンツ処理ソフトウエア381は、関連コンテンツの再生が要求されたとき、その要求に応じてコンテンツの再生(静止画コンテンツ、メモコンテンツのプレビュー、音声コンテンツ、動画コンテンツの再生)を開始する。   In addition, when the content processing software 381 is requested to play back related content, the content processing software 381 starts playback of content (playback of still image content, memo content preview, audio content, and moving image content) in response to the request.

さらに、コンテンツの表示から、そのコンテンツが関連付けられているデータベースの表示にLCD28の表示を切り替えることが要求された場合(図30の表示の切り替えが要求された場合)も同様に、コンテンツ処理ソフトウエア381は、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルを参照し、表示の切り替えを行う。   Further, when it is requested to switch the display of the LCD 28 to the display of the database associated with the content from the display of the content (when the switching of the display in FIG. 30 is requested), the content processing software 381 refers to the content association table stored in the content association table storage unit 451 and switches the display.

それぞれのソフトウエアにより実行される処理についてはフローチャートを参照して後述する。   The processing executed by each software will be described later with reference to a flowchart.

図33は、図31の各ソフトウエアにより実現されるPDA1の機能構成例を示すブロック図である。   FIG. 33 is a block diagram showing an example of a functional configuration of the PDA 1 realized by the software shown in FIG.

図33においては、データベース処理ソフトウエア371とコンテンツ処理ソフトウエア381により実現される機能構成のみを示している。また、図22と同じ構成には同一の符号を付してあり、重複する説明については適宜省略する。   FIG. 33 shows only the functional configuration realized by the database processing software 371 and the content processing software 381. Also, the same components as those in FIG. 22 are denoted by the same reference numerals, and repeated description will be omitted as appropriate.

データベース処理ソフトウエア371のテーブル管理部461は、ユーザがサムネイル画像をデータベースに貼り付けたときに行われるデータベース構成情報管理部401からの通知に応じて、図32の各情報が記述されるコンテンツ関連付けテーブルを作成し、それをコンテンツ関連付けテーブル記憶部451に記憶させる。   The table management unit 461 of the database processing software 371 performs content association in which each piece of information in FIG. 32 is described in response to a notification from the database configuration information management unit 401 performed when the user pastes a thumbnail image into the database. A table is created and stored in the content association table storage unit 451.

すなわち、ユーザがサムネイル画像をデータベースに貼り付けたとき、タッチパネル36からの出力に基づいて、そのことがデータベース構成情報管理部401により検出され、サムネイル画像に関する各種の情報がデータベース構成情報(図21)として登録される。このとき、データベース構成情報管理部401からテーブル管理部461に対して、サムネイル画像がデータベースに貼り付けられたこと(データベースにコンテンツが関連付けられたこと)が通知される。データベース構成情報管理部401からテーブル管理部461に対する通知には、図32の各情報を記述するためのコンテンツやデータベースに関する情報が含まれる。   That is, when the user pastes a thumbnail image into the database, this is detected by the database configuration information management unit 401 based on the output from the touch panel 36, and various information regarding the thumbnail image is stored in the database configuration information (FIG. 21). Registered as At this time, the database configuration information management unit 401 notifies the table management unit 461 that the thumbnail image has been pasted into the database (the content is associated with the database). The notification from the database configuration information management unit 401 to the table management unit 461 includes information for describing each piece of information in FIG. 32 and information on the database.

コンテンツ処理ソフトウエア381の再生制御部471は、静止画コンテンツ再生部421−1乃至メモコンテンツ再生部421−4を制御し、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルに記述されている情報に基づいて、図26乃至図30を参照して説明したようなコンテンツの表示を行う。   The reproduction control unit 471 of the content processing software 381 controls the still image content reproduction unit 421-1 to the memo content reproduction unit 421-4 and is described in the content association table stored in the content association table storage unit 451. Based on the information, the contents as described with reference to FIGS. 26 to 30 are displayed.

ここで、以上のような表示の切り替えを行うためのPDA1の動作についてフローチャートを参照して説明する。   Here, the operation of the PDA 1 for switching the display as described above will be described with reference to a flowchart.

始めに、図34のフローチャートを参照して、コンテンツ関連付けテーブルをコンテンツ関連付けテーブル記憶部451に登録する(記憶させる)データベース処理ソフトウエア371の処理について説明する。   First, processing of the database processing software 371 that registers (stores) the content association table in the content association table storage unit 451 will be described with reference to the flowchart of FIG.

この処理は、データベース処理ソフトウエア371が起動している間、所定の周期で繰り返し行われる。   This process is repeated at a predetermined cycle while the database processing software 371 is running.

ステップS101において、データベース処理ソフトウエア371のテーブル管理部461は、データベース構成情報管理部401からの出力に基づいて、データベースにコンテンツが関連付けられたか否かを判定し、関連付けられていないと判定した場合、処理を終了させる。   In step S101, the table management unit 461 of the database processing software 371 determines whether or not the content is associated with the database based on the output from the database configuration information management unit 401, and determines that the content is not associated The process is terminated.

また、テーブル管理部461は、サムネイル画像が作成中のデータベースに貼り付けられたことがデータベース構成情報管理部401から通知されてきたため、ステップS101において、データベースにコンテンツが関連付けられたと判定した場合、ステップS102に進む。   If the table management unit 461 has received notification from the database configuration information management unit 401 that the thumbnail image has been pasted into the database being created, the table management unit 461 determines that the content is associated with the database in step S101. Proceed to S102.

ステップS102において、テーブル管理部461は、index、レコード長、コンテンツラベル、データベースラベル、ソフトウエアラベルの図32の各情報をコンテンツ関連付けテーブルに記述し、コンテンツ関連付けテーブルをコンテンツ関連付けテーブル記憶部451に登録する。   In step S102, the table management unit 461 describes each information of FIG. 32 of index, record length, content label, database label, and software label in the content association table, and registers the content association table in the content association table storage unit 451. To do.

その後、処理は終了される。以上のような処理が繰り返されることで、コンテンツ関連付けテーブル記憶部451には、それぞれのデータベースに関連付けられたコンテンツ毎のコンテンツ関連付けテーブルが記憶されることになる。   Thereafter, the process is terminated. By repeating the above processing, the content association table storage unit 451 stores the content association table for each content associated with each database.

次に、図35のフローチャートを参照して、コンテンツを表示している状態から、その表示中のコンテンツに関連する関連コンテンツを表示するように表示を切り替えるコンテンツ処理ソフトウエア381の処理について説明する。   Next, processing of the content processing software 381 that switches the display so as to display related content related to the content being displayed from the state in which the content is displayed will be described with reference to the flowchart of FIG.

ステップS111において、コンテンツ処理ソフトウエア381の再生制御部471は、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルの総数をnumの値として設定する。コンテンツ関連付けテーブルの総数は、全てのデータベースに関連付けられている全てのコンテンツの数に相当する。   In step S111, the playback control unit 471 of the content processing software 381 sets the total number of content association tables stored in the content association table storage unit 451 as the value of num. The total number of content association tables corresponds to the number of all contents associated with all databases.

ステップS112において、再生制御部471は、0の値がindexとして設定されたコンテンツ関連付けテーブルを注目するテーブル(以下、適宜、注目テーブルという)とする。   In step S112, the reproduction control unit 471 sets a content association table in which a value of 0 is set as an index as a table of interest (hereinafter, referred to as an attention table as appropriate).

再生制御部471は、ステップS113において、numの値がindexの値より大きいか否かを判定し、大きくない(小さいまたは等しい)と判定した場合、処理を終了させる。numの値がindexの値と等しい場合、それは、コンテンツ関連付けテーブル記憶部451に登録されている全てのコンテンツ関連付けテーブルを注目テーブルとして、後述する処理が既に行われたことを表す。   In step S113, the reproduction control unit 471 determines whether or not the value of num is larger than the value of index. If it is determined that the value is not larger (smaller or equal), the reproduction control unit 471 ends the processing. When the value of num is equal to the value of index, this indicates that all the content association tables registered in the content association table storage unit 451 are used as the attention table and the processing described later has already been performed.

また、ステップS113において、再生制御部471は、まだ注目テーブルとしていないコンテンツ関連付けテーブルがあるため、numの値がindexの値より大きいと判定した場合、ステップS114に進む。   In step S113, since there is a content association table that has not yet been set as the attention table, the reproduction control unit 471 proceeds to step S114 when determining that the value of num is larger than the value of index.

ステップS114において、再生制御部471は、label_of_tableの値として、注目テーブルに記述されているコンテンツラベルを設定する。また、再生制御部471は、ステップS115において、label_of_contentsの値として、表示中のコンテンツのコンテンツラベルを設定する。表示中のコンテンツのコンテンツラベルは、例えば、表示開始時に再生制御部471により取得される。   In step S114, the reproduction control unit 471 sets the content label described in the attention table as the value of label_of_table. In step S115, the reproduction control unit 471 sets the content label of the content being displayed as the value of label_of_contents. The content label of the content being displayed is acquired by the playback control unit 471 at the start of display, for example.

ステップS116において、再生制御部471は、ステップS114で設定したlabel_of_tableの値と、ステップS115で設定したlabel_of_contentsの値が等しいか否かを判定し、それらの値が等しくない(異なる)と判定した場合、ステップS117に進む。label_of_tableの値とlabel_of_contentsの値が等しくない場合、それは、注目テーブルが、表示中のコンテンツのコンテンツ関連付けテーブルではないことを表す。   In step S116, the playback control unit 471 determines whether the value of label_of_table set in step S114 is equal to the value of label_of_contents set in step S115, and determines that these values are not equal (different) The process proceeds to step S117. When the value of label_of_table is not equal to the value of label_of_contents, it indicates that the attention table is not a content association table of the content being displayed.

ステップS117において、再生制御部471は、indexの値を1だけインクリメントし、ステップS113に戻り、それ以降の処理を繰り返す。これにより、注目テーブルが切り替わり、それ以降の処理が行われることになる。   In step S117, the playback control unit 471 increments the index value by 1, returns to step S113, and repeats the subsequent processing. As a result, the attention table is switched, and the subsequent processing is performed.

一方、注目テーブルが表示中のコンテンツのコンテンツ関連付けテーブルあるため、ステップS116において、label_of_tableの値とlabel_of_contentsの値が等しいと判定した場合、再生制御部471は、ステップS118に進み、label_of_databaseの値として、表示中のコンテンツのデータベースラベルを設定する。   On the other hand, since the table of interest is the content association table of the content being displayed, if it is determined in step S116 that the value of label_of_table is equal to the value of label_of_contents, the playback control unit 471 proceeds to step S118 and sets the value of label_of_database as Set the database label of the content being displayed.

すなわち、label_of_tableの値とlabel_of_contentsの値が等しい場合、表示中のコンテンツのコンテンツ関連付けテーブルが注目テーブルとして検出されたことになり、再生制御部471は、検出されたコンテンツ関連付けテーブルに記述されている情報に基づいて、表示中のコンテンツが関連付けられているデータベースの識別情報を表すデータベースラベルを、label_of_databaseの値として設定することが可能になる。   That is, when the value of label_of_table is equal to the value of label_of_contents, the content association table for the content being displayed has been detected as the attention table, and the playback control unit 471 has information described in the detected content association table. Based on the above, it is possible to set the database label representing the identification information of the database associated with the content being displayed as the value of label_of_database.

ステップS119において、再生制御部471は、表示中のコンテンツに関連する関連コンテンツの総数を取得する。   In step S119, the reproduction control unit 471 acquires the total number of related contents related to the content being displayed.

例えば、それぞれのデータベースに関するデータベース構成情報が記憶部139の所定の領域に記憶されている場合、再生制御部471は、ステップS118でlabel_of_databaseの値として設定したデータベースラベルで識別されるデータベースのデータベース構成情報を参照し、関連付けられている他のコンテンツの総数を取得する。図21を参照して説明したように、データベース構成情報には、1つのデータベースに関連付けられている全てのコンテンツに関する情報が記述されている。   For example, when the database configuration information regarding each database is stored in a predetermined area of the storage unit 139, the playback control unit 471 determines the database configuration information of the database identified by the database label set as the value of label_of_database in step S118. To obtain the total number of other associated content. As described with reference to FIG. 21, the database configuration information describes information regarding all contents associated with one database.

なお、ステップS118でlabel_of_databaseの値として設定したデータベースラベルで識別されるデータベースに関連付けられている他のコンテンツの総数は、ステップ119でいう表示中のコンテンツに関連する関連コンテンツの総数である。   The total number of other contents associated with the database identified by the database label set as the value of label_of_database in step S118 is the total number of related contents related to the content being displayed in step 119.

例えば、図27の画面が表示されている状態においては、図27の画面に表示されているコンテンツの関連付けの対象である図26のデータベースのデータベース構成情報が参照され、関連コンテンツの総数として「4」が設定される。   For example, in the state where the screen of FIG. 27 is displayed, the database configuration information of the database of FIG. 26 that is the target of content association displayed on the screen of FIG. 27 is referred to, and the total number of related content is “4”. Is set.

図28に示されるように関連コンテンツのサムネイル画像を表示する場合、再生制御部471は、データベース構成情報に基づいて関連コンテンツを認識し、サムネイル画像を生成して一覧表示させる。サムネイル画像の生成と表示は、再生制御部471からの要求に応じてサムネイル表示ソフトウエア363により行われるようにしてもよい。   When displaying thumbnail images of related content as shown in FIG. 28, the playback control unit 471 recognizes the related content based on the database configuration information, generates thumbnail images, and displays them as a list. The generation and display of thumbnail images may be performed by the thumbnail display software 363 in response to a request from the playback control unit 471.

ステップS120において、再生制御部471は、num_of_contentsの値として、ステップS119で取得した関連コンテンツの総数を設定し、ステップS121に進む。   In step S120, the playback control unit 471 sets the total number of related contents acquired in step S119 as the value of num_of_contents, and proceeds to step S121.

再生制御部471は、ステップS121において、例えば、図28のサムネイル画像がタップされることに応じて、タップされたサムネイル画像により表されるコンテンツを注目する関連コンテンツとし、その注目する関連コンテンツを表すcontents_indexの値として0を設定する。   In step S121, for example, when the thumbnail image in FIG. 28 is tapped, the reproduction control unit 471 sets the content represented by the tapped thumbnail image as the relevant content to be noticed, and represents the relevant content to be noticed. Set 0 as the value of contents_index.

ステップS122において、再生制御部471は、ステップS120で設定したnum_of_contentsの値が、ステップS121で設定したcontents_indexの値より大きいか否かを判定し、大きいと判定した場合、ステップS123に進む。   In step S122, the playback control unit 471 determines whether or not the value of num_of_contents set in step S120 is larger than the value of contents_index set in step S121.

再生制御部471は、ステップS123において、注目している関連コンテンツのカテゴリに応じて、静止画コンテンツ再生部421−1乃至メモコンテンツ再生部421−4のいずれかを制御し、注目している関連コンテンツを表示(再生)させる。   In step S123, the playback control unit 471 controls one of the still image content playback unit 421-1 to the memo content playback unit 421-4 according to the category of the related content of interest, and Display (play) content.

例えば、図28のサムネイル表示領域431から、サムネイル画像401がタップされた場合、サムネイル画像401により表されるコンテンツ(注目している関連コンテンツ)が、静止画コンテンツ再生部421−1によりコンテンツ表示領域411に表示され、図29の画面に切り替わる。   For example, when the thumbnail image 401 is tapped from the thumbnail display area 431 of FIG. 28, the content (related content of interest) represented by the thumbnail image 401 is displayed in the content display area by the still image content playback unit 421-1. 411 to switch to the screen of FIG.

例えば、図29のボタン442が操作されたとき、ステップS124において、再生制御部471は、contents_indexの値を1だけインクリメントし、そのとき注目している関連コンテンツの次の関連コンテンツを、新たに注目する関連コンテンツとする。その後、ステップS122に戻り、それ以降の処理が繰り返される。   For example, when the button 442 in FIG. 29 is operated, in step S124, the playback control unit 471 increments the value of contents_index by 1, and newly focuses on the related content next to the related content of interest at that time. Related content. Thereafter, the process returns to step S122, and the subsequent processing is repeated.

以上の処理により、例えば、図26に示されるように、サムネイル画像253により表されるコンテンツの関連コンテンツとして4つのコンテンツ(サムネイル画像401乃至404により表されるコンテンツ)がある場合、ボタン442が操作される毎に、それらの4つの関連コンテンツが順次再生される。   With the above processing, for example, as shown in FIG. 26, when there are four contents (contents represented by thumbnail images 401 to 404) as related contents of the content represented by the thumbnail image 253, the button 442 is operated. Each time, the four related contents are sequentially reproduced.

ステップS122において、num_of_contentsの値がcontents_indexの値より大きくない(等しい)と判定された場合、処理は終了される。   If it is determined in step S122 that the value of num_of_contents is not greater than (equal to) the value of contents_index, the process ends.

次に、図36のフローチャートを参照して、コンテンツを表示している状態から、その表示中のコンテンツが関連付けられているデータベースを表示するように表示を切り替えるコンテンツ処理ソフトウエア381の処理(図30に示されるように表示を切り替える処理)について説明する。   Next, referring to the flowchart of FIG. 36, the processing of the content processing software 381 that switches the display so as to display the database associated with the displayed content from the state where the content is displayed (FIG. 30). The process of switching the display as shown in FIG.

図36のステップS131乃至S137の処理は、図35のステップS111乃至S117の処理と同様である。   The processes in steps S131 to S137 in FIG. 36 are the same as the processes in steps S111 to S117 in FIG.

すなわち、ステップS131において、コンテンツ関連付けテーブルの総数がnumの値として設定され、ステップS132に進み、indexの値として0が設定されたコンテンツ関連付けテーブルが注目テーブルとされる。また、ステップS133において、numがindexの値より大きいと判定された場合、ステップS134,S135において、それぞれ、label_of_tableの値とlabel_of_contentsの値が設定される。   That is, in step S131, the total number of content association tables is set as the value of num, and the process proceeds to step S132, and the content association table in which 0 is set as the value of index is set as the attention table. If it is determined in step S133 that num is greater than the value of index, the values of label_of_table and label_of_contents are set in steps S134 and S135, respectively.

ステップS136において、label_of_tableの値とlabel_of_contentsの値が等しいと判定された場合(注目テーブルが表示中のコンテンツのコンテンツ関連付けテーブルである場合)、ステップS138に進む。   If it is determined in step S136 that the value of label_of_table is equal to the value of label_of_contents (when the attention table is a content association table for the content being displayed), the process proceeds to step S138.

ステップS138において、再生制御部471は、label_of_databaseの値として、表示中のコンテンツのデータベースラベルを設定する。このとき、表示中のコンテンツのコンテンツ関連付けテーブルが検出されていることから、再生制御部471は、コンテンツ関連付けテーブル(注目テーブル)に記述されている情報に基づいて、表示中のコンテンツが関連付けられているデータベースのデータベースラベルをlabel_of_databaseの値として設定することが可能である。   In step S138, the playback control unit 471 sets the database label of the content being displayed as the value of label_of_database. At this time, since the content association table of the content being displayed is detected, the playback control unit 471 associates the content being displayed based on the information described in the content association table (attention table). The database label of the existing database can be set as the value of label_of_database.

ステップS139において、再生制御部471は、label_DB_appの値として、注目テーブルに記述されているソフトウエアラベルを設定する。   In step S139, the reproduction control unit 471 sets the software label described in the attention table as the value of label_DB_app.

ステップS140において、再生制御部471は、ステップS139で設定したlabel_DB_appで識別されるデータベース処理ソフトウエア371に対して、label_of_databaseを通知し、その値で識別されるデータベースの表示を要求する。この要求に応じて、データベース処理ソフトウエア371によりデータベースの表示が行われる。   In step S140, the reproduction control unit 471 notifies label_of_database to the database processing software 371 identified by label_DB_app set in step S139, and requests display of the database identified by the value. In response to this request, the database processing software 371 displays the database.

次に、図37のフローチャートを参照して、図36の処理に対応してデータベース処理ソフトウエア371により行われるデータベース表示処理について説明する。   Next, the database display process performed by the database processing software 371 corresponding to the process of FIG. 36 will be described with reference to the flowchart of FIG.

ステップS151において、データベース構成情報管理部401は、コンテンツ処理ソフトウエア381の再生制御部471から、データベースの表示が要求されたか否かを判定し、要求されたと判定するまで待機する。   In step S151, the database configuration information management unit 401 determines whether display of the database is requested from the reproduction control unit 471 of the content processing software 381, and waits until it is determined that the request is made.

データベース構成情報管理部401は、ステップS151において、再生制御部471からの要求があったと判定した場合、ステップS152に進み、その要求とともに再生制御部471から通知されてくるlabel_of_databaseに基づいて、表示するデータベースを識別し、その表示をデータベース表示制御部402に行わせる。label_of_databaseに基づくデータベースの識別は、例えば、データベース構成情報管理部401からテーブル管理部461に対する問い合わせが行われてなされるものであってもよい。   If the database configuration information management unit 401 determines in step S151 that there is a request from the reproduction control unit 471, the database configuration information management unit 401 proceeds to step S152 and displays based on the label_of_database notified from the reproduction control unit 471 along with the request. The database is identified, and the database display control unit 402 displays the database. The database identification based on label_of_database may be made, for example, by making an inquiry from the database configuration information management unit 401 to the table management unit 461.

図36および図37の一連の処理により、例えば、図30に示されるように、コンテンツが表示されている状態から、そのコンテンツが関連付けられているデータベースを表示させるようにLCD28の表示の切り替えが行われる。   36 and 37, for example, as shown in FIG. 30, the display of the LCD 28 is switched from the state where the content is displayed so that the database associated with the content is displayed. Is called.

以上のように、コンテンツ関連付けテーブルを参照するようにしため、コンテンツ処理ソフトウエア381(再生制御部471)は、図30に示されるように、表示の切り替え対象となるデータベースを容易に、かつ迅速に識別することができる。   As described above, in order to refer to the content association table, the content processing software 381 (reproduction control unit 471) can easily and quickly select a database to be switched as shown in FIG. Can be identified.

例えば、コンテンツ関連付けテーブルを参照しない場合、図38Aに示されるように、コンテンツ処理ソフトウエア381は、表示中のコンテンツであるコンテンツ#1が関連付けられているデータベースを、PDA1内にあるデータベース(図38AおよびBにおいては、データベース#1乃至#7が示されている)のデータベース構成情報をそれぞれ参照することで識別する必要があるのに対し、図38Bに示されるようしてコンテンツ関連付けテーブルを参照する場合、コンテンツ#1が関連付けられているデータベースを、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルに基づいて容易に識別することができる。また、識別したコンテンツ関連付けテーブルのラベルをデータベース処理ソフトウエア371に通知することで、容易にデータベースの表示を要求することができる。   For example, when the content association table is not referred to, as shown in FIG. 38A, the content processing software 381 selects a database associated with the content # 1 that is the content being displayed as a database in the PDA 1 (FIG. 38A). In B and B, it is necessary to identify each by referring to the database configuration information of databases # 1 to # 7), while referring to the content association table as shown in FIG. 38B In this case, the database associated with the content # 1 can be easily identified based on the content association table stored in the content association table storage unit 451. Further, by notifying the database processing software 371 of the label of the identified content association table, display of the database can be easily requested.

以上においては、データベースに貼り付けるコンテンツは、静止画、動画、音声、メモ(予定表の作成時)のコンテンツであるとしたが、貼り付け可能なコンテンツは、これらのものに限られない。例えば、図6のアプリケーションアイコン204や、予め用意されている貼り付け用の画像(例えば、星形の画像)など、各種の情報をコンテンツとして貼り付けることができるようにしてもよい。例えば、アプリケーションアイコン204をメモに貼り付けておき、それを用いることで、表示させているメモからソフトウエアを直接起動させることができる。   In the above, the content pasted on the database is the content of a still image, a moving image, sound, and a memo (when creating a schedule), but the content that can be pasted is not limited to these. For example, various kinds of information such as the application icon 204 of FIG. 6 and a pasting image (for example, a star image) prepared in advance may be pasted as content. For example, the application icon 204 can be pasted on a memo and the software can be directly activated from the displayed memo by using it.

また、予定表に登録した1つの予定の項目や、アドレス帳に登録した1つのアドレス情報などのいわゆるPIM(Personal Information Manager)情報を、コンテンツとしてデータベースに貼り付けることができるようにしてもよい。   Further, so-called PIM (Personal Information Manager) information such as one schedule item registered in the schedule table and one address information registered in the address book may be pasted into the database as content.

さらに、以上においては、上述したようなデータベースに対するコンテンツの貼り付けは、PDA1において行われるとしたが、この他、携帯電話機やノートブック型のパーソナルコンピュータなど、各種の機器において行われるようにしてもよい。   Further, in the above, the pasting of the content to the database as described above is performed in the PDA 1, but in addition, it may be performed in various devices such as a mobile phone and a notebook personal computer. Good.

上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウエアにより実行させることもできる。   The series of processes described above can be executed by hardware, but can also be executed by software.

一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば、汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。   When a series of processing is executed by software, a program constituting the software executes various functions by installing a computer incorporated in dedicated hardware or various programs. For example, it is installed in a general-purpose personal computer from a network or a recording medium.

この記録媒体は、図5に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されているMS3やCF4などよりなるパッケージメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM132や記憶部139などで構成される。   As shown in FIG. 5, this recording medium is composed only of a package medium made up of MS3, CF4, etc. on which a program is recorded, which is distributed to provide a program to the user, separately from the apparatus main body. Instead, it is configured by a ROM 132, a storage unit 139, and the like that are provided to the user in a state of being preinstalled in the apparatus main body and in which a program is recorded.

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。   In the present specification, the step of describing the program recorded in the recording medium is not limited to the processing performed in time series according to the described order, but is not necessarily performed in time series, either in parallel or individually. The process to be executed is also included.

本体部に対して表示部を閉じた状態のPDAの外観の例を示す斜視図である。It is a perspective view which shows the example of the external appearance of PDA of the state which closed the display part with respect to the main-body part. 本体部に対して表示部を開いた状態のPDAの外観の例を示す斜視図である。It is a perspective view which shows the example of the external appearance of PDA of the state which opened the display part with respect to the main-body part. PDAの背面側の外観の例を示す斜視図である。It is a perspective view which shows the example of the external appearance of the back side of PDA. PDAの背面側の他の外観の例を示す斜視図である。It is a perspective view which shows the example of the other external appearance of the back side of PDA. PDAの内部構成の例を示すブロック図である。It is a block diagram which shows the example of an internal structure of PDA. メイン画面の例を示す図である。It is a figure which shows the example of a main screen. メモの作成画面の例を示す図である。It is a figure which shows the example of the creation screen of a memo. メモの作成画面の他の例を示す図である。It is a figure which shows the other example of the creation screen of a memo. メモの作成画面のさらに他の例を示す図である。It is a figure which shows the further another example of the creation screen of a memo. メモの作成画面の例を示す図である。It is a figure which shows the example of the creation screen of a memo. コンテンツの表示画面の例を示す図である。It is a figure which shows the example of the display screen of a content. 図10の画面を構成する階層の例を示す図である。It is a figure which shows the example of the hierarchy which comprises the screen of FIG. 図9のサムネイル表示領域の詳細を示す図である。It is a figure which shows the detail of the thumbnail display area of FIG. 予定表の作成画面の例を示す図である。It is a figure which shows the example of the preparation screen of a schedule. 予定表の作成画面の他の例を示す図である。It is a figure which shows the other example of the preparation screen of a schedule. 予定表の作成画面のさらに他の例を示す図である。It is a figure which shows the further another example of the preparation screen of a schedule. 予定表の作成画面の例を示す図である。It is a figure which shows the example of the preparation screen of a schedule. 予定表の作成画面の例を示す図である。It is a figure which shows the example of the preparation screen of a schedule. 図17の画面を構成する階層の例を示す図である。It is a figure which shows the example of the hierarchy which comprises the screen of FIG. PDAに用意されるソフトウエア構成の例を示すブロック図である。It is a block diagram which shows the example of the software structure prepared for PDA. データベース構成情報の例を示す図である。It is a figure which shows the example of database structure information. 機能構成例を示すブロック図である。It is a block diagram which shows an example of a function structure. データベース処理ソフトウエアのデータベース作成処理について説明するフローチャートである。It is a flowchart explaining the database creation process of database processing software. サムネイル表示ソフトウエアの表示制御処理について説明するフローチャートである。It is a flowchart explaining the display control processing of thumbnail display software. コンテンツ処理ソフトウエアの再生処理について説明するフローチャートである。It is a flowchart explaining the reproduction | regeneration processing of content processing software. メモの作成画面の例を示す図である。It is a figure which shows the example of the creation screen of a memo. コンテンツの表示画面の例を示す図であるIt is a figure which shows the example of the display screen of a content コンテンツの他の表示画面の例を示す図であるIt is a figure which shows the example of the other display screen of content. コンテンツのさらに他の表示画面の例を示す図であるIt is a figure which shows the example of the other display screen of a content. 表示の切り替えについて示す図である。It is a figure shown about switching of a display. PDAに用意されるソフトウエア構成の他の例を示すブロック図である。FIG. 10 is a block diagram showing another example of a software configuration prepared in the PDA. コンテンツ関連付けテーブルの例を示す図である。It is a figure which shows the example of a content correlation table. 他の機能構成例を示すブロック図である。It is a block diagram which shows the other function structural example. データベース処理ソフトウエアの登録処理について説明するフローチャートである。It is a flowchart explaining the registration process of database processing software. コンテンツ処理ソフトウエアの関連コンテンツ表示制御処理について説明するフローチャートである。It is a flowchart explaining the related content display control processing of content processing software. コンテンツ処理ソフトウエアのデータベース表示制御処理について説明するフローチャートである。It is a flowchart explaining the database display control processing of content processing software. データベース処理ソフトウエアのデータベース表示処理について説明するフローチャートである。It is a flowchart explaining the database display process of database processing software. 図32の構成により実現される効果について説明する図である。It is a figure explaining the effect implement | achieved by the structure of FIG.

符号の説明Explanation of symbols

1 PDA, 2 スタイラス, 361 データベース処理ソフトウエア群, 362 コンテンツ処理ソフトウエア群, 363 サムネイル表示ソフトウエア, 401 データベース構成情報管理部, 402 データベース表示制御部, 403 再生要求部, 404 表示要求部, 411 検索部, 412 サムネイル画像生成部, 413 サムネイル画像表示制御部, 414 再生要求部, 451 コンテンツ関連付けテーブル記憶部, 461 テーブル管理部, 471 再生制御部   1 PDA, 2 stylus, 361 database processing software group, 362 content processing software group, 363 thumbnail display software, 401 database configuration information management unit, 402 database display control unit, 403 playback request unit, 404 display request unit, 411 Search unit, 412 thumbnail image generation unit, 413 thumbnail image display control unit, 414 playback request unit, 451 content association table storage unit, 461 table management unit, 471 playback control unit

Claims (3)

画像コンテンツを記憶する記憶手段と、  Storage means for storing image content;
前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成する生成手段と、  Generating means for generating a thumbnail image based on the image content stored in the storage means;
手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、前記生成手段により生成されたサムネイル画像の一覧を表示させる表示制御手段と、  Handwritten data is displayed in response to a user input in the creation area of a screen provided with a handwritten data creation area and an image list display area, and a list of thumbnail images generated by the generation means is displayed in the display area. Display control means for displaying;
前記表示制御手段により表示された前記サムネイル画像が、前記作成領域に表示されている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付ける関連付け手段と  Each time the thumbnail image displayed by the display control unit is pasted to the handwritten data displayed in the creation area by a drag-and-drop operation, the image content from which the thumbnail image is created is pasted. Association means for associating the image content with the handwritten data by creating table information describing the identification information and the identification information of the handwritten data;
を備え、  With
前記表示制御手段は、  The display control means includes
前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、  When a first thumbnail image is selected from a plurality of the thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed over the handwritten data, the first thumbnail image is selected. The first image content that is the source of the thumbnail image is displayed in place of the handwritten data, and a button that is operated when displaying the related content is displayed.
前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、  When the button is operated, the thumbnail images of other image contents associated with the handwritten data are displayed side by side in an area where a part of the first image content is displayed,
横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、  When the second thumbnail image is selected from the thumbnail images of the other image contents displayed side by side in the horizontal direction, the display of the thumbnail image of the other image content is erased, and the selected second image is displayed. The second image content from which the thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right direction and a button pointing to the left direction are displayed side by side.
前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させる  Each time the button pointing to the right direction or the button pointing to the left direction is operated, the other image contents are sequentially displayed.
情報処理装置。  Information processing device.
画像コンテンツを記憶手段に記憶し、  Store image content in storage means;
前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成し、  Generating a thumbnail image based on the image content stored in the storage means;
手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、生成したサムネイル画像の一覧を表示させ、  Handwritten data is displayed in accordance with the input by the user in the creation area of the screen where the creation area of the handwritten data and the display area of the image list are provided, and the list of generated thumbnail images is displayed in the display area,
表示させた前記サムネイル画像が、前記作成領域に表示させている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付け、  Each time the displayed thumbnail image is pasted to the handwritten data displayed in the creation area by a drag-and-drop operation, the identification information of the image content from which the thumbnail image was created and the handwriting By associating image content with the handwritten data by creating table information describing data identification information,
前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、  When a first thumbnail image is selected from a plurality of the thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed over the handwritten data, the first thumbnail image is selected. The first image content that is the source of the thumbnail image is displayed in place of the handwritten data, and a button that is operated when displaying the related content is displayed.
前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、  When the button is operated, the thumbnail images of other image contents associated with the handwritten data are displayed side by side in an area where a part of the first image content is displayed,
横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、  When the second thumbnail image is selected from the thumbnail images of the other image content displayed side by side in the horizontal direction, the thumbnail image of the other image content is turned off and the selected second image is displayed. The second image content from which the thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right direction and a button pointing to the left direction are displayed side by side.
前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させる  Each time the button pointing to the right direction or the button pointing to the left direction is operated, the other image contents are sequentially displayed.
ステップを含む情報処理方法。  An information processing method including steps.
画像コンテンツを記憶手段に記憶し、  Store image content in storage means;
前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成し、  Generating a thumbnail image based on the image content stored in the storage means;
手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、生成したサムネイル画像の一覧を表示させ、  The handwritten data is displayed in accordance with the input by the user in the creation area of the screen where the creation area of the handwritten data and the display area of the list of images is provided, and the list of generated thumbnail images is displayed in the display area,
表示させた前記サムネイル画像が、前記作成領域に表示させている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付け、  Each time the displayed thumbnail image is pasted to the handwritten data displayed in the creation area by a drag-and-drop operation, the identification information of the image content from which the thumbnail image was created and the handwriting By associating the image content with the handwritten data by creating table information describing the identification information of the data,
前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、  When a first thumbnail image is selected from a plurality of the thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed over the handwritten data, the first thumbnail image is selected. The first image content that is the source of the thumbnail image is displayed in place of the handwritten data, and a button that is operated when displaying related content is displayed,
前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、  When the button is operated, the thumbnail images of other image contents associated with the handwritten data are displayed side by side in an area where a part of the first image content is displayed,
横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、  When the second thumbnail image is selected from the thumbnail images of the other image content displayed side by side in the horizontal direction, the thumbnail image of the other image content is turned off and the selected second image is displayed. The second image content from which the thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right direction and a button pointing to the left direction are displayed side by side.
前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させる  Each time the button pointing to the right direction or the button pointing to the left direction is operated, the other image contents are sequentially displayed.
ステップを含む処理をコンピュータに実行させるプログラム。  A program that causes a computer to execute processing including steps.
JP2004005425A 2004-01-13 2004-01-13 Information processing apparatus and method, and program Expired - Fee Related JP4419056B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004005425A JP4419056B2 (en) 2004-01-13 2004-01-13 Information processing apparatus and method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004005425A JP4419056B2 (en) 2004-01-13 2004-01-13 Information processing apparatus and method, and program

Publications (2)

Publication Number Publication Date
JP2005202482A JP2005202482A (en) 2005-07-28
JP4419056B2 true JP4419056B2 (en) 2010-02-24

Family

ID=34819758

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004005425A Expired - Fee Related JP4419056B2 (en) 2004-01-13 2004-01-13 Information processing apparatus and method, and program

Country Status (1)

Country Link
JP (1) JP4419056B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8081165B2 (en) 2005-08-30 2011-12-20 Jesterrad, Inc. Multi-functional navigational device and method
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US7956849B2 (en) 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
KR101673918B1 (en) 2010-02-11 2016-11-09 삼성전자주식회사 Method and apparatus for providing plural informations in a portable terminal
JP2013175105A (en) * 2012-02-27 2013-09-05 Cyberdyne Inc Display data processing system
JP5905417B2 (en) 2013-07-29 2016-04-20 京セラ株式会社 Mobile terminal and display control method
JP5942978B2 (en) 2013-12-26 2016-06-29 ソニー株式会社 Information processing apparatus, information processing method, and program

Also Published As

Publication number Publication date
JP2005202482A (en) 2005-07-28

Similar Documents

Publication Publication Date Title
JP2005202483A (en) Information processor, information processing method and program
CN101512473B (en) Media player with imaged based browsing
EP2360569B1 (en) Method and apparatus for providing informations of multiple applications
JP4217051B2 (en) Information processing apparatus, object selection method, and object selection program
JP6314975B2 (en) Display control apparatus, display control method, and display control program
JP2015510641A (en) Tablet with user interface
JP2013545178A (en) Screen display method and apparatus for portable terminal
JP4419060B2 (en) Information processing apparatus and method, and program
JP2005228088A (en) Information processor and method, and program
US20180121084A1 (en) Information display device
JP4419056B2 (en) Information processing apparatus and method, and program
JP2002157275A (en) Picture display device and storage medium
JP4586397B2 (en) Information processing apparatus and method, and program
JP4565317B2 (en) Information processing apparatus and method, and program
JP4419057B2 (en) Information processing apparatus and method, and program
JP4292473B2 (en) Information processing apparatus and method, and program
JP2005202454A (en) Information processor and method, and program
JP4683322B2 (en) Image display control apparatus and image display control program
JP2005202455A (en) Information processor and method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061110

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081216

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090210

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091105

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091118

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121211

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121211

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees