JP4419056B2 - Information processing apparatus and method, and program - Google Patents
Information processing apparatus and method, and program Download PDFInfo
- Publication number
- JP4419056B2 JP4419056B2 JP2004005425A JP2004005425A JP4419056B2 JP 4419056 B2 JP4419056 B2 JP 4419056B2 JP 2004005425 A JP2004005425 A JP 2004005425A JP 2004005425 A JP2004005425 A JP 2004005425A JP 4419056 B2 JP4419056 B2 JP 4419056B2
- Authority
- JP
- Japan
- Prior art keywords
- content
- displayed
- image
- thumbnail
- thumbnail image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Description
本発明は、情報処理装置および方法、並びにプログラムに関し、特に、直感的な操作で、異なるカテゴリの複数のコンテンツを1つのデータにまとめることができるようにすると共に、その1つのデータから、それにまとめられているそれぞれのコンテンツを容易に参照することができるようにする情報処理装置および方法、並びにプログラムに関する。 The present invention relates to an information processing apparatus and method, and a program, and in particular, enables a plurality of contents of different categories to be combined into one data by intuitive operation, and from the one data to the data. The present invention relates to an information processing apparatus and method, and a program that make it possible to easily refer to each of the contents.
近年、ディジタルカメラや、撮影機能が搭載された携帯電話機の普及に伴い、パーソナルコンピュータを用いて、それらの機器で撮影した画像をテキストデータなどの他のコンテンツに貼り付けることにより資料などを作成することが一般的に行われている。これにより、その作成者は、テキストデータの内容を視覚的にも表現することができる。 In recent years, with the spread of digital cameras and mobile phones equipped with shooting functions, materials are created by pasting images taken with these devices to other contents such as text data using personal computers. It is generally done. As a result, the creator can visually express the contents of the text data.
また、あるコンテンツに他のコンテンツを関連付けて1つのコンテンツを作成するものとしては、音楽コンテンツをテキストデータに関連付けておき(音楽コンテンツのリンク先をテキストデータに埋め込んでおき)、そのテキストデータを画面上に表示させた状態から、直接、音楽コンテンツの再生を開始させることのできる1つのテキストデータを作成することなども行われている。 In addition, as for creating one content by associating another content with a certain content, the music content is associated with the text data (the link destination of the music content is embedded in the text data), and the text data is displayed on the screen. One text data that can directly start playback of music content is created from the state displayed above.
ところで、静止画、動画、音楽などの各種のカテゴリのコンテンツを関連付けることにより、それらのコンテンツを容易に扱うことができるようにする技術として特許文献1に開示されているようなものがある。
しかしながら、あるコンテンツに他のコンテンツを関連付けるためには、その、他のコンテンツを格納するフォルダなどを指定し、指定したフォルダから関連付ける対象のコンテンツを選択する必要があり、操作が煩雑であるという課題があった。 However, in order to associate other contents with a certain content, it is necessary to specify a folder or the like for storing the other content, and select a target content to be associated from the designated folder, which is complicated. was there.
例えば、作成中のテキストデータに静止画を貼り付ける場合、テキストデータを作成するウインドウとは別のウインドウに、静止画が格納されたフォルダの内容を表示させ、そのフォルダから、貼り付け対象となる静止画を選択する必要がある。 For example, when pasting a still image to text data being created, the contents of the folder in which the still image is stored are displayed in a window different from the window in which the text data is created, and the target is pasted from that folder. It is necessary to select a still image.
本発明はこのような状況に鑑みてなされたものであり、直感的な操作で、異なるカテゴリの複数のコンテンツを1つのデータにまとめることができるようにするとともに、その1つのデータから、それにまとめられているそれぞれのコンテンツを容易に参照することができるようにするものである。 The present invention has been made in view of such a situation, and enables a plurality of contents of different categories to be combined into one data by an intuitive operation. This makes it possible to easily refer to each of the contents.
また、あるコンテンツを表示させている状態から、その表示中のコンテンツに関連する、他のコンテンツを容易に表示させることができるようにするものである。 In addition, other contents related to the content being displayed can be easily displayed from a state in which a certain content is being displayed.
本発明の情報処理装置は、画像コンテンツを記憶する記憶手段と、前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成する生成手段と、手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、前記生成手段により生成されたサムネイル画像の一覧を表示させる表示制御手段と、前記表示制御手段により表示された前記サムネイル画像が、前記作成領域に表示されている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付ける関連付け手段とを備え、前記表示制御手段は、前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させる。 The information processing apparatus according to the present invention includes a storage unit that stores image content, a generation unit that generates a thumbnail image based on the image content stored in the storage unit, a creation area of handwritten data, and a list of images. Display control means for displaying handwritten data in the creation area of the screen provided with a display area according to an input by a user, and displaying a list of thumbnail images generated by the generation means in the display area; and the display control Each time the thumbnail image displayed by the means is pasted on the handwritten data displayed in the creation area by a drag-and-drop operation, the identification information of the image content from which the thumbnail image is created is pasted. By creating table information describing the identification information of the handwritten data, Association means for associating the handwritten data and the display control means, wherein the display control means displays a plurality of the thumbnail images pasted on the handwritten data and overlaid on the handwritten data. When the first thumbnail image is selected from the images, the first image content that is the generation source of the first thumbnail image is displayed in place of the handwritten data, and the operation is performed when related content is displayed. When the button is operated, the thumbnail image of the other image content associated with the handwritten data is horizontally displayed in the area where the part of the first image content is displayed. Among the thumbnail images of the other image content displayed side by side and displayed side by side When the second thumbnail image is selected, the display of the thumbnail image of the other image content is erased, and the second image content from which the selected second thumbnail image is generated is used as the first image. Each time the button pointing to the right direction or the button pointing to the left direction is operated, the button pointing to the right direction and the button pointing to the left direction are displayed side by side. Are displayed sequentially.
本発明の情報処理方法またはプログラムは、画像コンテンツを記憶手段に記憶し、前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成し、手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、生成したサムネイル画像の一覧を表示させ、表示させた前記サムネイル画像が、前記作成領域に表示させている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付け、前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させるステップを含む。 An information processing method or program according to the present invention stores image content in a storage unit, generates a thumbnail image based on the image content stored in the storage unit, and displays a handwritten data creation area and a list of images. Handwritten data is displayed in response to user input in the creation area of the screen where the area is provided, a list of generated thumbnail images is displayed in the display area, and the displayed thumbnail image is displayed in the creation area Each time the handwritten data is pasted to the handwritten data by a drag-and-drop operation, table information describing the identification information of the image content from which the thumbnail image is generated and the identification information of the handwritten data is created. By associating the image content with the handwritten data, When the first thumbnail image is selected from the plurality of thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed, the generation source of the first thumbnail image The first image content is displayed in place of the handwritten data, and a button operated when displaying the related content is displayed. When the button is operated, a part of the first image content is displayed. In the thumbnail image of the other image content displayed side by side in the region where the thumbnail images of the other image content associated with the handwritten data are displayed side by side. When the second thumbnail image is selected, the display of the thumbnail image of the other image content is erased, The selected second image content from which the second thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right and a button pointing to the left are displayed side by side, and the right Each time the button indicating the direction or the button indicating the left direction is operated, the step of sequentially displaying the other image contents is included.
本発明においては、画像コンテンツが記憶手段に記憶され、前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像が生成される。また、手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータが表示され、前記表示領域に、生成されたサムネイル画像の一覧が表示され、表示された前記サムネイル画像が、前記作成領域に表示されている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータが関連付けられる。前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像が表示されている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツが前記手書きデータに替えて表示されるとともに、関連するコンテンツを表示するときに操作されるボタンが表示され、前記ボタンが操作された場合、前記第1の画像コンテンツの一部が表示されていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像が横方向に並べて表示される。横方向に並べて表示された前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示が消され、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツが前記第1の画像コンテンツに替えて表示されるとともに、右方向を指すボタンと左方向を指すボタンが並べて表示され、前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツが順次表示される。 In the present invention, image content is stored in the storage means, and a thumbnail image is generated based on the image content stored in the storage means. In addition, handwritten data is displayed in response to a user input in the creation area of the screen where a handwritten data creation area and an image list display area are provided, and a list of generated thumbnail images is displayed in the display area. Each time the displayed thumbnail image is pasted to the handwritten data displayed in the creation area by a drag-and-drop operation, the identification information of the image content from which the thumbnail image is pasted and the identification information By creating table information describing identification information of handwritten data, the image content and the handwritten data are associated with each other. When a first thumbnail image is selected from the plurality of thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed over the handwritten data, the first thumbnail image is selected. The first image content from which the thumbnail image is generated is displayed in place of the handwritten data, and a button operated when displaying related content is displayed. When the button is operated, the first image content is displayed. The thumbnail images of other image contents associated with the handwritten data are displayed side by side in an area where a part of the image content is displayed. When the second thumbnail image is selected from the thumbnail images of the other image content displayed side by side in the horizontal direction, the display of the thumbnail image of the other image content is erased and the selected first image is displayed. The second image content from which the thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right and a button pointing to the left are displayed side by side, and the button pointing to the right Each time the button pointing in the left direction is operated, the other image contents are sequentially displayed.
本発明によれば、貼り付け対象となるデータに対して、直感的な操作でコンテンツの内容を表す画像を貼り付けることができる。 According to the present invention, it is possible to paste an image representing the contents of content to data to be pasted by an intuitive operation.
また、本発明によれば、コンテンツの内容を表す画像が貼り付けられたデータから、そのコンテンツを容易に参照することができる。 Further, according to the present invention, it is possible to easily refer to the content from the data to which the image representing the content is pasted.
さらに、本発明によれば、画面の表示を、あるコンテンツを表示している状態から、その表示中のコンテンツに関連する他のコンテンツを表示する状態に、容易に切り替えることができる。 Furthermore, according to the present invention, the screen display can be easily switched from a state in which a certain content is displayed to a state in which another content related to the content being displayed is displayed.
本発明によれば、画面の表示を、あるコンテンツを表示している状態から、その表示中のコンテンツが関連付けられているデータを表示する状態に、容易に切り替えることができる。 According to the present invention, the screen display can be easily switched from a state in which a certain content is displayed to a state in which data associated with the displayed content is displayed.
以下、本発明の実施の形態について図を参照して説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
本発明を適用したPDA(Personal Digital Assistants)1の外観を図1乃至図4に示す。図1および図2はPDA1の本体正面側の外観を示す斜視図であり、図3および図4は本体背面側の外観を示す斜視図である。
The external appearance of a PDA (Personal Digital Assistants) 1 to which the present invention is applied is shown in FIGS. 1 and 2 are perspective views showing the appearance of the front side of the main body of the
PDA1は、図2に示される中央のヒンジ部12を境に、表示部11と本体部13とに分けられており、ヒンジ部12を介して折り畳み可能に形成されている(折り畳んだ状態を図1に示す)。
The
図2に示されるように、表示部11の面11−1のほぼ全面には、LCD(Liquid Crystal Display)28、および、LCD28の上に積層された透明なタッチパネル36が設けられている。すなわち、ユーザが、指先や図1のスタイラス2の先端をLCD28上の任意の位置に接触させると、その座標がタッチパネル36により検出され、検出された座標に対応する所定の処理が行われる。
As shown in FIG. 2, an LCD (Liquid Crystal Display) 28 and a
ヒンジ部12には、CCD(Charge Coupled Device)等よりなるカメラ部21が設けられている。
The
PDA1を折り畳んだときに面11−1(表示部11)に対向する面となる本体部13の上面13−1には、PDA1にインストールされている、例えば、スケジュール管理用のプログラム、電話帳管理用のプログラム等のアプリケーションプログラムのそれぞれを表すシンボルが印刷されたボタン32が設けられている。ユーザによりボタン32が押下されたとき、それに対応するアプリケーションプログラムが起動される。
On the upper surface 13-1 of the
また、上面13−1のボタン32が配置されている領域の中央部には、LCD28に表示されている画面を上下方向にスクロールさせるためのスクロールボタン33が設けられている。さらに、上面13−1のボタン32、スクロールボタン33の下方には、文字、記号、数字等を入力するためのキーボード34が設けられている。
In addition, a
本体部13の右側面13−2には、不揮発性半導体メモリの一種であるメモリースティック(商標)(以下、MSと記述する)3を装着可能なMSスロット41が設けられている(図1)。なお、MSスロット41には、例えば、Bluetooth(商標)による通信機能拡張モジュールなどの、MS3と同じ形状の機能拡張モジュールを装着させることも可能である。
The right side surface 13-2 of the
図3に示されるように、本体部13の左側面13−3には、本体部13に電力を供給するリチウムイオン電池などからなるリムーバブルメインバッテリ162(図5)を着脱するときに開閉するバッテリ蓋26が設けられている。また、左側面13−3には、押下および回転自在なジョグダイヤル25が当該側面から僅かに突出した状態で設けられている。
As shown in FIG. 3, a battery that opens and closes when a removable main battery 162 (FIG. 5) made of a lithium ion battery or the like that supplies power to the
本体部13の背面13−4には、不揮発性半導体メモリの一種であるコンパクトフラッシュ(登録商標)(以下、CFと記述する)4を装着可能なCFスロット42が設けられている。CFスロット42は、図4に示すように、CF4を装着するときには当該背面からポップアップするようになされている。なお、CFスロット42には、例えば、PHS(Personal Handy Phone)による通信機能拡張モジュールなどの、CF4と同じ形状の機能拡張モジュールを装着させることも可能である。
A
本体部13の下端面13−5(図2)には、リムーバブルメインバッテリ162に対して充電を行うクレードル91(図5)等の付属機器を接続するためのコネクタ67が設けられている。
A
図5は、以上のような外観構成を有するPDA1の内部の構成例について示すブロック図である。
FIG. 5 is a block diagram illustrating an internal configuration example of the
CPU(Central Processing Unit)131は、ROM(Read Only Memory)132に記憶されているプログラム、または記憶部139からRAM(Random Access Memory)133にロードされたアプリケーションプログラムに従って各種の処理を実行する。RAM133にはまた、CPU131が各種の処理を実行する上において必要なデータなども適宜記憶される。
A CPU (Central Processing Unit) 131 executes various processes according to a program stored in a ROM (Read Only Memory) 132 or an application program loaded from a
CPU131、ROM132、およびRAM133は、CPUインタフェース135を介して相互に接続されている。CPUインタフェース135には、LCD28に対する画面の表示を制御する表示制御部136も接続されている。
The
表示制御部136には、カメラ部21、LCD28の他、VRAM138も接続されている。表示制御部136は、CPU131による制御に基づいて、カメラ部21により撮像された画像をVRAM138に記憶させ、そのVRAM138に記憶させている画像や、他のメモリ(MS3、CF4、RAM133、記憶部139)に記憶されている画像をLCD28に表示させる。VRAM138には、カメラ部21により撮像された画像の他、LCD28に表示させる画像も記憶される。
In addition to the
また、CPUインタフェース135には、ジョグダイヤル25、ボタン32、スクロールボタン33、およびキーボード34等からなる入力部137、タッチパネル36、赤外線通信ポート62、MSスロット41およびCFスロット42に相当するスロットI/F64、リムーバブルメインバッテリ162およびバックアップバッテリ163を充電させるとともに、他の外部装置152との通信の中継装置となるクレードル91等が接続されるコネクタ67、並びに、マイクロフォン142で集音された音声をディジタルデータに変換する音声処理部141が接続されている。
The
なお、タッチパネル36により検出された座標を表す情報は、CPUインタフェース135を介してCPU131に供給される。
Information representing coordinates detected by the
さらに、CPUインタフェース135には、EEPROM(Electrically Erasable and Programmable Read Only Memory)またはハードディスクなどより構成される記憶部139が接続される。記憶部139は、PDA1に対して着脱可能な記憶媒体であるMS3やCF4とは異なり、PDA1が内蔵するメモリである。
Further, the
CPUインタフェース135には、Bluetooth等の規格に準拠した無線通信を行う無線通信部146、および、FeliCa(商標)のようなICカードに対して非接触でデータを読み書きする非接触ICカードインタフェース(I/F)147が接続されている。
The
外部装置152に適宜装着される磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどから読み出されたアプリケーションプログラムは、赤外線ポート62を介して行われる赤外線通信、無線通信部146を介して行われる無線通信、または、クレードル91を介して行われる有線の通信等により、必要に応じてPDA1に対して供給され、記憶部139にインストールされる。または、スロットI/F64に適宜装着されるMS3やCF4から読み出されたアプリケーションプログラムも、必要に応じて記憶部139にインストールされる。
An application program read from a magnetic disk, an optical disk, a magneto-optical disk, a semiconductor memory, or the like that is appropriately mounted on the external device 152 is performed via an infrared communication performed via the
CPUインタフェース135には、表示部11が本体部13に対して閉じた状態の場合、オン状態となり、表示部11が本体部13に対して開いた状態の場合、オフ状態となるLCD開閉スイッチ144、および、表示部11が所定の角度以上回動された場合にオン状態となるLCD回転スイッチ145が設けられている。
The
また、CPUインタフェース135には、リムーバブルメインバッテリ162が装着されるメインバッテリ装着部161、およびリムーバブルメインバッテリ162が取り外されたときの予備電源となる、充電式ボタン電池等から成るバックアップバッテリ163が接続されている。
Connected to the
図6は、LCD28に表示されるメイン画面の例を示す図である。
FIG. 6 is a diagram illustrating an example of a main screen displayed on the
PDA1を用いて行われる各種の操作は、基本的には、このメイン画面から開始される。メイン画面は、標準表示領域201、シルク領域202、およびステータス領域203からなる。
Various operations performed using the
標準表示領域201には、アプリケーションプログラム(ソフトウエア)が実行されているときには、その実行中のアプリケーションプログラムの画面が表示される。また、アプリケーションプログラムが実行されていないときには、図6に示されるように、インストールされているアプリケーションプログラムのそれぞれに対応するアプリケーションアイコン204が表示される(ただし、厳密には、このときにおいても、アプリケーションプログラムが全く実行されていないわけではなく、アプリケーションアイコン204を表示し、ユーザに選択させるためのアプリケーションプログラムが実行されている)。
In the
図6においては、アプリケーションアイコン204として、メモを作成するアプリケーションを実行するときにタップ(スタイラス2の先端でLCD28の表面が押下)されるメモ帳アイコン204A、予定を管理するアプリケーションを実行するときにタップされる予定表アイコン204Bが表示されている。
In FIG. 6, as an application icon 204, a notepad icon 204 </ b> A that is tapped when the application for creating a memo is executed (the surface of the
シルク領域202には、実行中のシルクプラグインに対応するユーザインタフェース(ユーザによる入力用の領域)が表示される。なお、実行されるアプリケーションによっては、シルク領域202の表示が消え、標準表示領域201とシルク領域202の全体に1つの画面が表示されることもある。
In the silk area 202, a user interface (area for user input) corresponding to the silk plug-in being executed is displayed. Depending on the application to be executed, the display of the silk area 202 may disappear, and one screen may be displayed on the entire
ステータス領域203には、例えば、バッテリ容量、MSスロット41に対するMS3の装着の有無や、CFスロット42に対するCF4の装着の有無、音量設定等の、PDA1の状態を示すステータスアイコン205や時刻等が表示される。
In the
図7は、図6のメモ帳アイコン204Aがタップされたときに表示される画面の例を示す図である。
FIG. 7 is a diagram showing an example of a screen displayed when the
図7に示されるメモの作成画面は、メモ帳アイコン204Aがタップされたときに起動される、メモの作成を管理するソフトウエア(後述するデータベース処理ソフトウエア)によって表示される。
The memo creation screen shown in FIG. 7 is displayed by software (database processing software described later) that manages the creation of memos, which is activated when the
メモの作成画面は、ステータス領域203の他に、メモ作成領域211、メモを作成するためのツールを選択するときに操作される各種のボタンが表示されるツールボタン領域212から構成される。
In addition to the
ユーザは、スタイラス2の先端をメモ作成領域211に当て、その状態のままスタイラス2を移動させることで、任意の文字や記号などをメモ作成領域211に入力することができる。例えば、図8の曲線の画像231は、スタイラス2の先端が移動した軌跡を表し、このように、ユーザは、スタイラス2を用いてメモ作成領域211にメモをとることができる。
The user can input arbitrary characters, symbols, and the like to the
また、ユーザは、後に詳述するように、スタイラス2で文字や記号を入力するだけでなく、カメラ部21で撮影した静止画や動画、或いは、録音した音声などの各種のコンテンツを表す画像を貼り付けることによってもメモを作成することができる(メモにコンテンツを関連付けることができる)。
Further, as will be described in detail later, the user not only inputs characters and symbols with the
図7のツールボタン領域212には、メモに貼り付けるコンテンツの一覧を表示させるときや、既に表示しているコンテンツの一覧を閉じるときに操作(タップ)される一覧表示ボタン221、メモ作成領域211に手書きの文字などを入力するときに操作されるペンボタン222が用意される。ユーザによりペンボタン222が操作されたとき、ペンモードが設定される。そのペンモードが設定されている間は、図8に示されるような手書きの入力をメモ作成領域211に対して行うことが可能となる。
In the
また、ツールボタン領域212には、メモ作成領域211に一度入力した文字などを消すときに操作される消しゴムボタン223の他、各種のツールを選択するときに操作されるボタンも表示される。
The
図9は、図8の状態(コンテンツの一覧が表示されていない状態)で一覧表示ボタン221がタップされたときに表示される画面の例を示す図である。
FIG. 9 is a diagram illustrating an example of a screen displayed when the
一覧表示ボタン221がタップされたとき、図9に示されるように、ツールボタン領域212とステータス領域203の間の、それまでメモ作成領域211の一部を形成していた領域を含む領域であるサムネイル表示領域241が形成され、そこに、メモ作成領域211を利用して作成しているメモに貼り付けることができるコンテンツ(コンテンツの内容を表すサムネイル画像)の一覧が表示される。
When the
サムネイル表示領域241に表示されるサムネイル画像は、コンテンツ本体のデータから生成されるものである。例えば、静止画コンテンツのサムネイル画像は、コンテンツ本体の静止画が縮小されることで生成され、動画コンテンツのサムネイル画像は、連続する画像の中から選択される、例えば、先頭の1フレーム(MPEG(Moving Picture Experts Group)方式で圧縮された動画コンテンツの場合、最初のI(Intra)ピクチャ)の画像が縮小されることで生成される。なお、音声コンテンツのサムネイル画像には、吹き出しの画像が用いられる。
The thumbnail image displayed in the
図9の例においては、左から、「MOV000…」のファイル名が設定された動画コンテンツを表すサムネイル画像251、「031030…」のファイル名が設定された音声コンテンツを表すサムネイル画像252、「DSC0001」のファイル名が設定された静止画(風景画)コンテンツを表すサムネイル画像253、「DSC0002」のファイル名が設定された静止画(人物画)コンテンツを表すサムネイル画像254が表示されている。
In the example of FIG. 9, from the left, a
これらのサムネイル画像で表されるコンテンツは、PDA1の内部のメモリである記憶部139やPDA1に装着されているMS3などに、その本体のデータが記憶されている。
The contents represented by these thumbnail images are stored in the
例えば、図9の点線矢印で示されるように、左から3番目の静止画コンテンツのサムネイル画像253にスタイラス2を押し当て、その状態のままメモ作成領域211上の位置P1まで移動させ、そこで、スタイラス2の先端をLCD28の表面から離すことで(ドラッグアンドドロップすることで)、ユーザは、サムネイル画像253を位置P1に貼り付けることができる。
For example, as indicated by the dotted arrow in FIG. 9, the
図10は、位置P1にサムネイル画像253が貼り付けられた状態の画面の例を示す図である。ユーザは、このように、一覧表示されるものの中からドラッグアンドドロップすることで、作成中のメモに、静止画などの各種のカテゴリのコンテンツのサムネイル画像を貼り付けることができる。なお、ユーザは、ペンモードが設定されている状態で、位置P1に貼り付けたサムネイル画像253をメモ作成領域211上の他の位置にさらに移動させることもできる。
FIG. 10 is a diagram illustrating an example of a screen in a state where the
例えば、ユーザは、「〜に行ったときの写真」などの手書きの文字をメモ作成領域211に入力しておき、そのメモに写真(静止画コンテンツ)のサムネイル画像を貼り付けておくことで、PDA1内にある写真を容易に分類することができる。この操作は、フォルダを新規に作成し、そこに写真などのコンテンツを格納することによって分類する場合に較べて直感的な操作であり、外出先などで、僅かな時間に気軽に操作するというPDA1の性質上、好ましい。
For example, the user inputs handwritten characters such as “photo taken when” in the
また、ユーザは、メモに貼り付けたサムネイル画像をタップすることで、そのサムネイル画像により内容が表されるコンテンツの再生を開始させることができる。 Further, the user can start playback of the content represented by the thumbnail image by tapping the thumbnail image pasted on the memo.
図11は、図10のサムネイル画像253をタップして、サムネイル画像253により内容が表される静止画コンテンツを再生(プレビュー)させたときの画面の例を示す図である。
FIG. 11 is a diagram illustrating an example of a screen when the
サムネイル画像253がタップされたとき、静止画コンテンツのビューワ機能を有するソフトウエア(後述するコンテンツ処理ソフトウエア)が起動し、サムネイル画像253により内容が表される静止画コンテンツの本体のデータに基づいて、ステータス領域203以外の領域全体を用いて画像の表示が行われる。これにより、ユーザは、静止画コンテンツの詳細を容易に確認することができる。
When the
なお、メモに貼り付けた動画コンテンツのサムネイル画像251をタップした場合も同様に、動画コンテンツの再生が行われ、図11に示されるようなステータス領域203以外の領域を用いて画像が表示される。また、メモに貼り付けた音声コンテンツのサムネイル画像252をタップした場合、その音声コンテンツの再生が行われる。
Note that when the
図12A乃至Dは、以上のようにして作成されるメモの表示の階層構造について示す図である。 12A to 12D are diagrams showing the hierarchical structure of the display of memos created as described above.
図12Aは、図10のメモ作成領域211(上方に表示される数字と文字(「Unfiled」)を除く部分)に表示されている画面を示す図である。
FIG. 12A is a diagram showing a screen displayed in the
図12Aの画面は複数の層から構成され、その複数の層のうちの最下層には、図12Bに示されるような無地の層(図7のメモ作成領域211のように、何も入力されていない層)が配置される。
The screen of FIG. 12A is composed of a plurality of layers, and nothing is input to the bottom layer of the plurality of layers as shown in FIG. 12B (a blank layer as in the
図12Bの無地の層の上には、スタイラス2で入力された手書きの曲線の画像231を表示する層が配置され、その上(図12Aの画面を構成する最上層)には、サムネイル画像253を表示する層が配置される。サムネイル画像を表示する層は、複数のサムネイル画像がメモに貼り付けられた場合、貼り付けられた数だけ仮想的に配置される。
A layer for displaying the
このように、メモの作成を管理するソフトウエアによりメモ作成領域211に表示される画面は、図12B乃至Dの3つの層から構成される。この層の数は、後述する、予定表の作成を管理するソフトウエアによりメモ作成領域211に対応する領域に表示される画面を構成する層の数と異なる。
As described above, the screen displayed in the
ここで、サムネイル表示領域241の表示の詳細について説明する。
Here, details of the display of the
図13Aは、図9のサムネイル表示領域241のみを示す図である。
FIG. 13A is a diagram showing only the
サムネイル表示領域241の右上には、サムネイル画像表示部271に表示するサムネイル画像を、それが表すコンテンツのカテゴリに応じてフィルタリングするカテゴリ選択ボタン261乃至264が表示されている。
On the upper right of the
すなわち、一覧表示ボタン221を操作したとき、サムネイル画像表示部271には、メモ作成領域211で作成中のメモに貼り付けることができる全てのカテゴリのコンテンツのサムネイル画像が表示されるが、ユーザは、カテゴリ選択ボタン261乃至264を操作することで、サムネイル画像表示部271に表示されるサムネイル画像を制限することができる。
That is, when the
例えば、カメラの絵が付されたカテゴリ選択ボタン261が操作されたとき、サムネイル画像表示部271に表示されるサムネイル画像の中から、静止画コンテンツのサムネイル画像が除かれ(表示が消え)、フィルムの絵が付されたカテゴリ選択ボタン262が操作されたとき、動画コンテンツのサムネイル画像が除かれる。
For example, when the
また、ペンと紙の絵(メモ)が付されたカテゴリ選択ボタン263が操作されたとき、サムネイル画像表示部271に表示されるサムネイル画像の中から、メモのコンテンツを表すサムネイル画像が除かれる。
Also, when the
なお、PDA1においては、メモの作成中(メモの作成を管理するソフトウエアの実行中)は、その作成中のメモに、予め作成しておいた他のメモをコンテンツとして貼り付けることはできないこととされている。従って、メモの作成中は、サムネイル画像表示部271にメモのサムネイル画像が表示されないことから、カテゴリ選択ボタン263は操作不能とされる。
In PDA1, during the creation of a memo (while the software that manages the creation of the memo is being executed), other pre-created memos cannot be pasted as content in the memo being created. It is said that. Therefore, while the memo is being created, the thumbnail image of the memo is not displayed on the thumbnail
後述する予定表の作成を管理するソフトウエアの実行中は、作成中の予定表に、予め作成しておいたメモをコンテンツとして貼り付けることが可能とされ、カテゴリ選択ボタン263が操作された場合、サムネイル画像表示部271に表示されるサムネイル画像の中から、メモのサムネイル画像が除かれる。
When software for managing the creation of a schedule to be described later is being executed, it is possible to paste a previously created memo as content in the schedule being created and the
カテゴリ選択ボタン263の右隣には、吹き出しの絵が付されたカテゴリ選択ボタン264が用意されている。カテゴリ選択ボタン264が操作されたとき、サムネイル画像表示部271に表示されるサムネイル画像の中から、音声コンテンツのサムネイル画像が除かれる。
On the right side of the
図13Bは、静止画、動画、音声のそれぞれのカテゴリのコンテンツのサムネイル画像が表示されている図13Aの状態から、カテゴリ選択ボタン262(動画コンテンツのサムネイル画像の表示を消すボタン)とカテゴリ選択ボタン264(音声コンテンツのサムネイル画像の表示を消すボタン)が操作された状態の表示を示す図である。 FIG. 13B shows a category selection button 262 (button for deleting the display of thumbnail images of moving image contents) and a category selection button from the state of FIG. 13A in which thumbnail images of content categories of still images, moving images, and audio are displayed. FIG. 26 is a diagram illustrating a display in a state where H.264 (a button for deleting the display of a thumbnail image of audio content) is operated.
図13Bに示されるように、サムネイル画像表示部271に表示するサムネイル画像の中から、動画と音声のコンテンツを表すサムネイル画像がフィルタリングによりカットされ、その表示が消される。
As shown in FIG. 13B, among the thumbnail images displayed on the thumbnail
このように、サムネイル画像表示部271に表示させるサムネイル画像に、カテゴリに基づくフィルタリングをかけることができるため、ユーザは、貼り付けようとするコンテンツのサムネイル画像を迅速に探すことができる。
In this way, the thumbnail image displayed on the thumbnail
例えば、ある静止画コンテンツをメモに貼り付けようとしている場合、図13Bに示されるように他のカテゴリのコンテンツのサムネイル画像を除いてから探すことで、ユーザは、貼り付けようとする静止画コンテンツのサムネイル画像を迅速に探すことができる。 For example, when a certain still image content is to be pasted on a memo, the user can search for a still image content to be pasted by searching after removing thumbnail images of content in other categories as shown in FIG. 13B. Can quickly find thumbnail images.
以上のようにしてサムネイル画像表示部271に表示されるサムネイル画像からも、メモに貼り付けたサムネイル画像から、そのサムネイル画像により表されるコンテンツを再生させることができるのと同様に、コンテンツの再生を開始させることが可能とされる。
In the same manner as described above, the content represented by the thumbnail image can be reproduced from the thumbnail image displayed on the thumbnail
例えば、図13Aに示されるように、静止画コンテンツのサムネイル画像253がカーソル281で選択されている状態でさらにタップされた場合、図11を参照して説明したように、その静止画コンテンツがLCD28に拡大表示される。すなわち、ビューワ機能を提供するソフトウエアが実行され、静止画コンテンツの表示が行われる。
For example, as shown in FIG. 13A, when the
サムネイル画像表示部271の下には、サムネイル画像表示部271に表示させるサムネイル画像の範囲を切り替えるときに水平方向に操作されるスクロールバー272が表示され、その下には、カーソル281で選択されているコンテンツの名前等を表示するコンテンツ情報表示部273が表示される。
A
なお、図13Aにおいて、動画コンテンツのサムネイル画像251上に表示されているMS3の外観を表す画像251Aは、その動画コンテンツが外部のメモリであるMS3に記憶されているものであることを表している。また、フィルムの絵を表す画像251Bは、それが付されているサムネイル画像251が動画コンテンツのものであることを表している(静止画コンテンツのサムネイル画像と区別できるようになっている)。
In FIG. 13A, an
図14は、図6の予定表アイコン204Bがタップされたときに表示される画面の例を示す図である。図14において、図7と同じ部分には同一の符号を付している。
FIG. 14 is a diagram illustrating an example of a screen displayed when the
予定表アイコン204Bがタップされたとき、予定表の作成を管理するソフトウエアが起動し、図14に示されるような予定表の作成画面が表示される。
When the
予定表の作成画面は、ステータス領域203の他に、所定の間隔で時刻が表示される予定入力領域301、予定入力領域301の表示形式(週単位、月単位による表示形式)を変更するときに操作されるボタンなどが用意される表示切替領域302、予定表を作成するためのツールを選択するときに操作されるボタンが用意されるツールボタン領域303から構成される。
In addition to the
ツールボタン領域303には、予定表に貼り付けるコンテンツのサムネイル画像の一覧を表示させるときに操作される一覧表示ボタン221、予定入力領域301に手書きの文字や記号などを入力するときに操作されるペンボタン222、一度入力した手書きの文字などを消すときに操作される消しゴムボタン223などの、図7のツールボタン領域212に用意されるものと同じボタンが用意される。
The
また、ツールボタン領域303には、これらのボタンの他、予定入力領域301に入力した予定の1つの項目を選択し、その選択した項目を移動したり、内容を変更する手モードを選択するときに操作される手ボタン311が表示される。この手ボタン311は、上述したメモの作成時には用意されないボタンである。
In addition to these buttons, the
図15は、図14の画面に対して、ある予定が入力された状態の画面の例を示す図である。 FIG. 15 is a diagram illustrating an example of a screen in a state where a certain schedule is input with respect to the screen of FIG.
予定入力領域301の9時(9:00)の欄に入力された予定321(「会議」の文字が入力されている予定)は、例えば、ユーザにより手ボタン311が操作され、手モードが設定されてから入力されたものである。9時の時間帯が、予定を入力する時間帯としてスタイラス2で選択された場合、画面の下方には図6のシルク領域202が表示されるため、ユーザは、その領域を用いて予定を入力する(「会議」の文字を入力する)。
For the schedule 321 (schedule in which “conference” is input) entered in the 9 o'clock (9:00) field of the
なお、一覧表示ボタン221の右隣にあるボタンは、予定を新規に作成するときに操作されるボタンであり、このボタンが操作された場合も、手モードが設定された状態で時間帯が指定されたときと同様に、新たな予定を入力することが可能とされる。
The button to the right of the
図16は、図15の状態の画面に対して、「重要!」の手書き文字と、予定321を指す矢印の画像からなる画像331が入力された状態の画面を示す図である。
FIG. 16 is a diagram illustrating a screen in a state where an
ペンボタン222を操作し、ペンモードを設定することによって、ユーザは、予定入力領域301に手書きの文字などを入力することができる。
By operating the
このように、予定表を作成する場合でも、ユーザは、所定の時間帯に予定の項目を入力するだけでなく、上述したメモを作成する場合と同様に手書きの文字を入力することができる。 In this way, even when creating a schedule, the user can input handwritten characters in the same manner as when creating a memo, as well as inputting scheduled items during a predetermined time period.
図17は、図16の状態(サムネイル画像の一覧が表示されていない状態)において、一覧表示ボタン221がタップされたときに表示される画面の例を示す図である。
FIG. 17 is a diagram illustrating an example of a screen displayed when the
一覧表示ボタン221がタップされたとき、図17に示されるように、ツールボタン領域303とステータス領域203の間の、それまで予定表入力領域301の一部を形成していた領域を含む領域であるサムネイル表示領域241が形成され、そこに、予定入力領域301に貼り付けることができるコンテンツのサムネイル画像の一覧が表示される。
When the
例えば、音声コンテンツのサムネイル画像352をスタイラス2で選択し、図17の点線矢印で示されるように、その状態のまま予定入力領域301上の位置P2まで移動させ、スタイラス2の先端をLCD28の表面から離すことで、ユーザは、サムネイル画像352を位置P2に貼り付けることができる。
For example, the
図18は、位置P2に音声コンテンツのサムネイル画像352が貼り付けられた状態の画面の例を示す図である。
FIG. 18 is a diagram illustrating an example of a screen in a state where the
ユーザは、このように、一覧表示されるものの中からドラッグアンドドロップすることで、予定表に、各種のカテゴリのコンテンツのサムネイル画像を貼り付けることができる(予定表にコンテンツを関連付けることができる)。 Thus, the user can paste thumbnail images of various categories of content on the schedule by dragging and dropping from the list displayed (contents can be associated with the schedule). .
以上のようにしてサムネイル画像を予定表に貼り付けることができるため、ユーザは、例えば、9時からの会議(図18の予定321の「会議」)が終了したとき、そのときに録音しておいた音声コンテンツのサムネイル画像351を予定321の周りに貼り付けておくことで、後から、その会議で録音した音声コンテンツを容易に探すことができる。
Since the thumbnail image can be pasted on the schedule as described above, for example, when the meeting from 9 o'clock (“meeting” of the
そのサムネイル画像の貼り付けも、サムネイル表示領域241に表示されるものの中からドラッグアンドドロップするだけの非常に直感的な操作である。
The pasting of the thumbnail image is also a very intuitive operation by simply dragging and dropping from those displayed in the
また、予定表に貼り付けたサムネイル画像351をタップすることで、そのサムネイル画像351により表される音声コンテンツの再生を開始させることができるため、ユーザは、会議で録音した音声を予定表から容易に再生させることができる。
Further, by tapping the
なお、図17、図18において、サムネイル画像353,354は、予め作成しておいたメモのサムネイル画像である。上述したように、予定表の作成時には、予め作成しておいたメモをコンテンツとして予定表に関連付けることができるため、メモのサムネイル画像もサムネイル表示領域241に表示される。
In FIGS. 17 and 18,
図19A乃至Eは、以上のようにして作成される予定表の階層構造について示す図である。 19A to 19E are diagrams showing the hierarchical structure of the schedule table created as described above.
図19Aは、図18の予定入力領域301(図18の上方に表示される年月日と曜日(S,M,T,W,T,F,S)を除く部分)に表示される画面を示す図である。
FIG. 19A shows a screen displayed in the scheduled
図19Aの画面も複数の層から構成され、そのうちの最下層には、図19Bに示されるような時間帯を表示する層(図14の予定入力領域301のように、何の予定も入力されていない予定表の層)が配置される。
The screen in FIG. 19A is also composed of a plurality of layers, and in the lowermost layer, a layer for displaying a time zone as shown in FIG. 19B (any schedule is input as in the
図19Bの層の上には、図19Cに示されるように、ユーザにより入力された予定321(図19Bの9時の時間帯に入力された予定)を表示する層が配置され、その上には、図19Dに示されるように、スタイラス2で入力された手書きの「重要!」の文字と、予定321を指す矢印の画像331を表示させる層が配置される。
On the layer in FIG. 19B, as shown in FIG. 19C, a layer for displaying the
図19Eに示されるように、図19Aの画面の最上層には、サムネイル画像352を表示させる層が配置される。
As shown in FIG. 19E, a layer for displaying the
このように、予定表の作成を管理するソフトウエアにより予定入力領域301に表示される画面は、図19B乃至Eの4つの層から構成される。この層の数(4層)は、上述した、メモの作成を管理するソフトウエアにより表示される画面を構成する層の数(3層)と異なる。
As described above, the screen displayed in the
すなわち、サムネイル表示領域241に表示されるサムネイル画像の貼り付け先は、サムネイル画像の一覧と同時に表示される画面を用いて作成されるデータのカテゴリにより異なり、複数あるといえる。
That is, the paste destination of the thumbnail image displayed in the
次に、以上のような画面表示を実現するソフトウエア構成について説明する。 Next, a software configuration for realizing the above screen display will be described.
なお、以下において、メモの作成を管理するソフトウエアにより作成される1つのメモのファイルや、予定表の作成を管理するソフトウエアにより作成される1つの予定表のファイルをデータベースともいう。従って、コンテンツの貼り付け先や手書きの文字の入力先はデータベースとなる。 In the following, one memo file created by software for managing creation of a memo and one schedule file created by software for managing creation of a schedule are also referred to as a database. Therefore, the content paste destination and handwritten character input destination are the database.
図20は、PDA1に用意されるソフトウエアの例を示すブロック図である。
FIG. 20 is a block diagram illustrating an example of software prepared in the
これらのソフトウエアは、内蔵のメモリである記憶部139(図5)などに記憶されている。PDA1には、複数のデータベース処理ソフトウエアからなるデータベース処理ソフトウエア群361、複数のコンテンツ処理ソフトウエアからなるコンテンツ処理ソフトウエア群362、サムネイル表示ソフトウエア363が用意されている。
These software are stored in a storage unit 139 (FIG. 5) which is a built-in memory. The
データベース処理ソフトウエア群361は、メモのデータベースの作成を管理するメモデータベース処理ソフトウエア371−1と、予定表のデータベースの作成を管理する予定表データベース処理ソフトウエア371−2から構成される。以下、メモデータベース処理ソフトウエア371−1と予定表データベース処理ソフトウエア371−2を個々に区別する必要がない場合、まとめてデータベース処理ソフトウエア371という。
The database
なお、図20においては、データベース処理ソフトウエアは2つしか用意されていないが、実際には、図6の画面にアプリケーションアイコン204が用意されているソフトウエアであって、データベースの作成に関するソフトウエア毎にデータベース処理ソフトウエアが用意される。 In FIG. 20, only two pieces of database processing software are prepared. However, in actuality, the application icon 204 is prepared on the screen of FIG. Database processing software is prepared for each.
データベース処理ソフトウエア371は、データベースの作成機能をユーザに提供し、例えば、スタイラス2による手書き文字の入力や、サムネイル画像の貼り付けを受け付け、データベースを作成する。
The
データベース処理ソフトウエア371は、データベース毎に、図21に示されるようなデータベースの構成を表すデータベース構成情報を用いてその作成を管理する。
The
図21の例においては、データベースに貼り付けられたサムネイル画像により表されるコンテンツ等の種類、サムネイル画像のリンク先(コンテンツ本体のデータの記憶場所)、サムネイル画像が貼り付けられたデータベース上の位置を表す座標、コンテンツに関するその他の情報がデータベース構成情報により表されている。 In the example of FIG. 21, the type of content or the like represented by the thumbnail image pasted in the database, the link destination of the thumbnail image (the storage location of the content main body data), and the position on the database where the thumbnail image is pasted Coordinates representing information and other information related to the contents are represented by database configuration information.
サムネイル画像が貼り付けられたり、手書き文字が入力される毎に、これらの情報がデータベース構成情報に登録される。図21の例においては、データベース構成情報の2段目に、あるデータベースに入力された手書き文字のリンク先はリンク情報#1であり、入力位置は座標(x1,y1)であることが登録されている。また、手書き文字の幅W1、高さh1とともに、その他の情報として、手書き文字の色、ペンの太さ等が登録されている。
Each time a thumbnail image is pasted or a handwritten character is input, these pieces of information are registered in the database configuration information. In the example of FIG. 21, in the second stage of the database configuration information, the link destination of the handwritten character input to a certain database is the
同様に、同じデータベースに貼り付けられた動画コンテンツ、静止画コンテンツ、テキスト、音声コンテンツのそれぞれのサムネイル画像のリンク情報、位置、幅、高さ、その他の情報も登録されている。なお、図21においてデータベースに入力されたものとして示されている「テキスト」は、例えば、予定表のデータベースに入力された予定である。また、データベース構成情報に登録される「座標」は、例えば、サムネイル画像の左上隅の座標である。 Similarly, link information, position, width, height, and other information of thumbnail images of moving image content, still image content, text, and audio content pasted in the same database are also registered. The “text” shown as being input to the database in FIG. 21 is, for example, a schedule input to the schedule database. The “coordinates” registered in the database configuration information is, for example, the coordinates of the upper left corner of the thumbnail image.
図20の説明に戻り、データベース処理ソフトウエア371により管理されているデータベース391にはコンテンツ#1乃至#3が関連付けられている(コンテンツ#1乃至#3のそれぞれのサムネイル画像がデータベース391に貼り付けられている)。
Returning to the description of FIG. 20,
すなわち、この場合、データベース処理ソフトウエア371は、データベース構成情報を用いて、データベース391に関連付けられているコンテンツ#1乃至#3のコンテンツの種類、サムネイル画像のリンク情報、貼り付け位置、その他の情報を管理している。
That is, in this case, the
データベース処理ソフトウエア371は、データベース391に貼り付けられたサムネイル画像がタップされ、コンテンツの再生が指示されたとき、コンテンツ処理ソフトウエア群362を構成するコンテンツ処理ソフトウエアのいずれかにコンテンツの再生を要求する。
When the thumbnail image pasted on the
また、データベース処理ソフトウエア371は、ユーザにより一覧表示ボタン221が操作され、作成中のデータベース391に貼り付けるサムネイル画像の一覧の表示が指示されたとき、そのことをサムネイル表示ソフトウエア363に通知し、サムネイル画像の一覧を表示させる。
In addition, when the
コンテンツ処理ソフトウエア群362は、静止画コンテンツの再生(プレビュー)を管理する静止画コンテンツ処理ソフトウエア381−1、動画コンテンツの再生を管理する動画コンテンツ処理ソフトウエア381−2、音声コンテンツの再生を管理する音声コンテンツ処理ソフトウエア381−3、コンテンツとして用意されているメモの再生(プレビュー)を管理するメモコンテンツ処理ソフトウエア381−4から構成される。以下、静止画コンテンツ処理ソフトウエア381−1乃至メモコンテンツ処理ソフトウエア381−4を個々に区別する必要がない場合、まとめてコンテンツ処理ソフトウエア381という。
The content
コンテンツ処理ソフトウエア381は、記憶部139やMS3に記憶されている全てのコンテンツ392を管理しており、コンテンツのビューワの機能を提供する。データベース処理ソフトウエア371から静止画コンテンツの再生が要求されたとき、静止画コンテンツ処理ソフトウエア381−1により静止画コンテンツの再生が行われ、動画コンテンツの再生が要求されたとき、動画コンテンツ処理ソフトウエア381−2により動画コンテンツの再生が行われる。また、音声コンテンツの再生が要求されたとき、音声コンテンツ処理ソフトウエア381−3により音声コンテンツの再生が行われ、メモの再生が要求されたとき、メモコンテンツ処理ソフトウエア381−4によりメモの再生が行われる。
The
なお、メモの再生は、それを作成したデータベース処理ソフトウエア371(メモデータベース処理ソフトウエア371−1)により行われるようにしてもよい。 Note that the memo may be reproduced by the database processing software 371 (memo database processing software 371-1) that created the memo.
上述したように、ユーザは、サムネイル表示領域241に一覧表示されているサムネイル画像をタップすることによってもコンテンツを再生させることができる。サムネイル表示領域241に表示されているサムネイル画像がタップされたとき、サムネイル表示ソフトウエア363からそのことが通知され、再生が指示されたコンテンツのカテゴリに応じて、コンテンツ処理ソフトウエア381によりコンテンツの再生が行われる。
As described above, the user can also play back the content by tapping the thumbnail images displayed in the
サムネイル表示ソフトウエア363は、データベース処理ソフトウエア371からサムネイル画像の一覧の表示が要求されたとき、コンテンツ392を参照して、それぞれのコンテンツを表すサムネイル画像を生成し、サムネイル画像をサムネイル表示領域241に一覧表示させる。また、サムネイル表示ソフトウエア363は、サムネイル画像として一覧表示させるコンテンツのカテゴリを制限することが要求されたとき(カテゴリ選択ボタン261乃至264のいずれかが操作されたとき)、その要求に応じてサムネイル画像の表示を更新させる。
When the
さらに、サムネイル表示ソフトウエア363は、サムネイル表示領域241に表示されているサムネイル画像がタップされたとき、コンテンツの再生をコンテンツ処理ソフトウエア381に要求する。
Furthermore, when the thumbnail image displayed in the
図22は、図20の各ソフトウエアが実行されることで実現されるPDA1の機能構成例を示すブロック図である。
FIG. 22 is a block diagram illustrating an example of a functional configuration of the
データベース処理ソフトウエア371により実現されるデータベース構成情報管理部401は、タッチパネル36において検出されるユーザからの入力に基づいて、図21に示されるようなデータベース構成情報を管理し、必要に応じてデータベース構成情報をデータベース表示制御部402に提供する。
The database configuration
また、データベース構成情報管理部401は、データベースに貼り付けられているサムネイル画像がタップされ、コンテンツの再生が指示されたことをタッチパネル36からの出力に基づいて検出した場合、それを再生要求部403に通知する。
In addition, when the thumbnail image pasted in the database is tapped and the reproduction of the content is instructed based on the output from the
データベース表示制御部402は、データベース構成情報管理部401から提供される情報に従って、図7のメモ作成領域211や図14の予定入力領域301の表示を制御する。
The database
例えば、データベース表示制御部402は、データベース構成情報管理部401から図21のデータベース構成情報が提供されたとき、手書き文字(2段目に登録されている情報)を、その他の情報で表される色、太さで、座標(x1,y1)で表される位置に表示させるとともに、他のコンテンツについても、サムネイル画像等をデータベース上の所定の位置に、所定の大きさで表示させる。サムネイル画像の大きさを表す情報は、例えば、図21のその他の情報として記述されている。
For example, when the database configuration
再生要求部403は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ処理ソフトウエア381−1により実現される静止画コンテンツ再生部421−1に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ処理ソフトウエア381−2により実現される動画コンテンツ再生部421−2に動画コンテンツの再生を要求する。
When the thumbnail image of the still image content is tapped, the
また、再生要求部403は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ処理ソフトウエア381−3により実現される音声コンテンツ再生部421−3に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ処理ソフトウエア381−4により実現されるメモコンテンツ再生部421−4にメモの再生を要求する。
Further, when the thumbnail image of the audio content is tapped, the
表示要求部404は、一覧表示ボタン221に対するユーザの操作を検出し、サムネイル画像の一覧を表示することが指示された場合、それをサムネイル表示ソフトウエア363により実現される検索部411に要求し、一方、サムネイル画像の一覧を閉じることが指示された場合、それをサムネイル画像表示制御部413に要求する。
When the
サムネイル表示ソフトウエア363により実現される検索部411は、静止画コンテンツの検索を行う静止画コンテンツ検索部411−1、動画コンテンツの検索を行う動画コンテンツ検索部411−2、音声コンテンツの検索を行う音楽コンテンツ検索部411−3、メモの検索を行うメモコンテンツ検索部411−4から構成される。このように、PDA1には、コンテンツの検索を行う機能部がコンテンツのカテゴリ毎に用意される。
The
静止画コンテンツ検索部411−1乃至メモコンテンツ検索部411−4のそれぞれは、サムネイル画像の一覧を表示することがデータベース処理ソフトウエア371の表示要求部404から要求されることに応じてコンテンツの検索を行い、検索結果をサムネイル画像生成部412に出力する。静止画コンテンツ検索部411−1乃至メモコンテンツ検索部411−4によるコンテンツの検索は、PDA1にMS3やCF4が装着されている場合には、MS3、CF4、および記憶部139を対象として行われ、MS3やCF4が装着されていない場合には、記憶部139のみを対象として行われる。
Each of the still image content search unit 411-1 to the memo content search unit 411-4 searches for content in response to a request from the
サムネイル画像生成部412は、検索部411(静止画コンテンツ検索部411−1乃至メモコンテンツ検索部411−4)から供給される検索結果に基づいて、各コンテンツのサムネイル画像を生成する。上述したように、例えば、静止画コンテンツのサムネイル画像として、静止画を縮小した画像を生成し、動画コンテンツのサムネイル画像として、先頭の1フレームの画像を縮小した画像を生成する。サムネイル画像生成部412により生成されたサムネイル画像はサムネイル画像表示制御部413に出力される。
The thumbnail
なお、サムネイル画像を生成するサムネイル画像生成部412は、コンテンツ処理ソフトウエア381により実現されるようにしてもよい。この場合、検索部411によるコンテンツの検索結果がコンテンツ処理ソフトウエア381のサムネイル画像生成部412に通知され、その通知に応じて、サムネイル画像が生成される。生成されたサムネイル画像は、サムネイル表示ソフトウエア363のサムネイル画像表示制御部413に供給され、LCD28に表示される。
Note that the thumbnail
サムネイル画像表示制御部413は、サムネイル画像生成部412から供給されるサムネイル画像をサムネイル表示領域241に一覧表示させる。また、サムネイル画像表示制御部413は、タッチパネル36からの出力に基づいて、カテゴリ選択ボタン261乃至264のいずれかが操作されたことを検出した場合、操作されたボタンに対応するカテゴリのコンテンツのサムネイル画像を除くように一覧の表示を更新する。
The thumbnail image
さらに、サムネイル画像表示制御部413は、タッチパネル36からの出力に基づいて、サムネイル表示領域241に表示させているサムネイル画像がタップされ、コンテンツを再生することがユーザから指示された場合、そのことを再生要求部414に通知する。
Further, the thumbnail image
再生要求部414は、データベース処理ソフトウエア371の再生要求部403と同様に、再生が指示されたコンテンツのカテゴリに応じて、静止画コンテンツ再生部421−1乃至メモコンテンツ再生部421−4のいずれかにコンテンツの再生を要求する。
Similar to the
次に、PDA1の動作についてフローチャートを参照して説明する。
Next, the operation of the
始めに、図23のフローチャートを参照して、データ処理ソフトウエア371により実行されるデータベース作成処理について説明する。
First, the database creation process executed by the
ステップS1において、データベース構成情報管理部401は、タッチパネル36からの出力に基づいて、例えば、手書き文字の入力やサムネイル画像の貼り付けなどの、ユーザによる入力があったか否かを判定する。
In step S <b> 1, the database configuration
ステップS1において、ユーザによる入力があったと判定した場合、ステップS2に進み、データベース構成情報管理部401は、その入力に応じて、自分自身が管理するデータベース構成情報を更新する。また、ステップS2においては、データベース構成情報管理部401によるデータベース構成情報の更新に伴い、その更新が、データベース表示制御部402によりデータベースの表示に反映される。
If it is determined in step S1 that there is an input by the user, the process proceeds to step S2, and the database configuration
これにより、例えば、曲線の手書き文字がユーザにより入力された場合、この手書き文字の入力された位置を表す座標や、色、ペンの太さがデータベース構成情報に登録される。また、新たに登録された情報がデータベースの表示に反映され、図8に示されるような画像231がLCD28に表示される。
Thus, for example, when a curved handwritten character is input by the user, the coordinates, color, and pen thickness representing the input position of the handwritten character are registered in the database configuration information. Also, the newly registered information is reflected in the database display, and an
ステップS1において、ユーザからの入力がないと判定された場合、ステップS2の処理はスキップされる。 If it is determined in step S1 that there is no input from the user, the process in step S2 is skipped.
ステップS3において、表示要求部404は、サムネイル画像の一覧を表示済みであるか否かを判定し、まだ表示していないと判定した場合、ステップS4に進む。
In step S3, the
ステップS4において、表示要求部404は、サムネイル画像の一覧の表示が指示されたか否かをタッチパネル36からの出力に基づいて判定する。
In step S <b> 4, the
一覧表示ボタン221が操作されたため、ステップS4において、サムネイル画像の一覧の表示が指示されたと判定した場合、表示要求部404は、ステップS5に進み、サムネイル画像の一覧の表示をサムネイル表示ソフトウエア363(検索部411)に要求する。
If it is determined in step S4 that display of a list of thumbnail images has been instructed because the
この要求に応じて、サムネイル表示ソフトウエア363においては、サムネイル画像の一覧の表示が行われる。サムネイル表示ソフトウエア363による処理の詳細については図24のフローチャートを参照して後述する。
In response to this request, the
ステップS6において、データベース構成情報管理部401は、データベースに対するサムネイル画像の貼り付けが、サムネイル表示ソフトウエア363のサムネイル画像表示制御部413から通知されたか否かを判定する。サムネイル表示領域241に表示されたサムネイル画像の一覧から選択されたサムネイル画像が、ドラッグアンドドロップにより例えばメモ作成領域211に貼り付けられたとき、そのことがサムネイル画像表示制御部413から通知されてくる(図24のステップS31)。
In step S <b> 6, the database configuration
データベース構成情報管理部401は、ステップS6において、データベースに対するサムネイル画像の貼り付けが通知されてきたと判定した場合、ステップS7に進み、データベース構成情報を更新する。このときも、そのデータベース構成情報の更新がデータベース表示制御部402によりデータベースの表示に反映される。
If the database configuration
これにより、例えば、図9に示されるように、サムネイル画像253がサムネイル表示領域241からドラッグアンドドロップにより位置P1に貼り付けられたとき、そのサムネイル画像253により表されるコンテンツ本体のデータの記録場所を表すリンク情報や、位置P1の座標等がデータベース構成情報に登録され、表示に反映される(図10)。
Thus, for example, as shown in FIG. 9, when the
ステップS4において、サムネイル画像の一覧の表示が指示されていないと判定された場合、ステップS5乃至S7の処理はスキップされる。また、ステップS6において、サムネイル画像の貼り付けが通知されていないと判定された場合、ステップS7の処理はスキップされる。 If it is determined in step S4 that display of a list of thumbnail images is not instructed, the processes in steps S5 to S7 are skipped. If it is determined in step S6 that the thumbnail image is not pasted, the process in step S7 is skipped.
一方、ステップS3において、表示要求部404は、サムネイル画像の一覧を表示済みであると判定した場合、ステップS8に進み、表示しているサムネイル画像の一覧を閉じることが指示されたか否かを判定する。サムネイル画像の一覧が表示されているときに一覧表示ボタン221を操作することによって、ユーザは、サムネイル画像の一覧を閉じることができる。
On the other hand, if it is determined in step S3 that the list of thumbnail images has been displayed, the
ステップS8において、表示要求部404は、表示しているサムネイル画像の一覧を閉じることが指示されていないと判定した場合、ステップS6に進み、それ以降の処理を実行する。
In step S8, if the
表示要求部404は、ステップS8において、一覧を閉じることが指示されたと判定した場合、ステップS9に進み、サムネイル画像の一覧を閉じることをサムネイル表示ソフトウエア363のサムネイル画像表示制御部413に要求する。この要求に応じて、サムネイル表示ソフトウエア363によってサムネイル画像の一覧の表示が消される。その後、処理はステップS10に進む。
If the
ステップS10において、データベース構成情報管理部401は、データベースに貼り付けたコンテンツの再生がユーザから指示されたか否かを判定し、データベースに貼り付けたサムネイル画像がタップされたことから、そのサムネイル画像により表されるコンテンツの再生が指示されたと判定した場合、そのことを再生要求部403に通知する。
In step S10, the database configuration
再生要求部403は、ステップS11において、コンテンツの再生をコンテンツ処理ソフトウエア381に対して要求する。再生要求部403は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ再生部421−1に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ再生部421−2に動画コンテンツの再生を要求する。また、再生要求部403は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ再生部421−3に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ再生部421−4にメモの再生を要求する。
In step S11, the
データベース構成情報管理部401は、ステップS12において、データベースの作成を終了するか否かを判定し、終了しないと判定した場合、ステップS1に戻り、それ以降の処理を繰り返し実行する。
In step S12, the database configuration
一方、ステップS12において、データベース構成情報管理部401は、例えば、図6のメインの画面に戻ることが指示されたため、データベースの作成を終了させると判定した場合、作成中のデータベースに関するデータベース構成情報を記憶部139などに保存し、処理を終了させる。
On the other hand, in step S12, the database configuration
次に、図24のフローチャートを参照して、サムネイル表示ソフトウエア363により実行されるサムネイル画像の表示制御処理について説明する。
Next, a thumbnail image display control process executed by the
この処理は、データベース処理ソフトウエア371の表示要求部404からの要求(図23のステップS5)があったときに開始される。
This process is started when there is a request from the
ステップS21において、検索部411は、記憶部139やMS3などに記憶されているコンテンツを対象として、データベースに貼り付けることのできる全てのカテゴリのコンテンツの検索を行う。
In step S <b> 21, the
具体的には、静止画コンテンツ検索部411−1により静止画コンテンツの検索が行われ、動画コンテンツ検索部411−2により動画コンテンツの検索が行される。また、音声コンテンツ検索部411−3により音声コンテンツの検索が行われ、メモコンテンツ検索部411−4によりメモコンテンツの検索が行われる。静止画コンテンツ検索部411−1至メモコンテンツ検索部411−4によるそれぞれの検索結果は、サムネイル画像生成部412に出力される。
Specifically, the still image content search unit 411-1 searches for still image content, and the moving image content search unit 411-2 searches for moving image content. The audio content search unit 411-3 searches for audio content, and the memo content search unit 411-4 searches for memo content. The respective search results by the still image content search unit 411-1 to the memo content search unit 411-4 are output to the thumbnail
サムネイル画像生成部412は、ステップS22において、それぞれのカテゴリのコンテンツのサムネイル画像を生成し、生成したサムネイル画像をサムネイル画像表示制御部413に出力する。上述したように、サムネイル画像生成部412がコンテンツ処理ソフトウエア381により実現される場合、ステップS21での検索結果がサムネイル画像生成部412に通知され、サムネイル画像が生成される。
In step S <b> 22, the thumbnail
ステップS23において、サムネイル画像表示制御部413は、サムネイル画像の一覧を表示させる。これにより、図9に示されるように、サムネイル表示領域241がLCD28上に形成され、そこに、サムネイル画像の一覧が表示される。
In step S23, the thumbnail image
ステップS24において、サムネイル画像表示制御部413は、タッチパネル36からの出力に基づいて、サムネイル画像のカテゴリの選択が行われたか否かを判定し、カテゴリ選択ボタン261乃至264のいずれかが操作され、カテゴリの選択が行われたと判定した場合、ステップS25に進む。
In step S24, the thumbnail image
ステップS25において、サムネイル画像表示制御部413は、ユーザによる入力に応じてサムネイル画像の表示を更新させる。サムネイル画像表示制御部413は、例えば、カテゴリ選択ボタン261が操作されたとき、既に表示させているサムネイル画像の中から、静止画コンテンツのサムネイル画像を除くことで表示を更新し、カテゴリ選択ボタン262が操作されたとき、動画コンテンツのサムネイル画像を除くことで表示を更新する。カテゴリ選択ボタン263,264が操作されたときも同様に、メモ、音声コンテンツのサムネイル画像が除かれることで表示が更新される。
In step S <b> 25, the thumbnail image
ステップS24において、カテゴリの選択が行われていないと判定された場合、ステップS25の処理はスキップされる。 If it is determined in step S24 that no category has been selected, the process in step S25 is skipped.
ステップS26において、サムネイル画像表示制御部413は、タッチパネル36からの出力に基づいて、サムネイル表示領域241にサムネイル画像を表示させているコンテンツの再生が指示されたか否かを判定する。
In step S <b> 26, the thumbnail image
サムネイル画像がタップされたことから、ステップS26において、そのサムネイル画像により表されるコンテンツの再生が指示されたと判定した場合、サムネイル画像表示制御部413は、そのことを再生要求部414に通知する。
If the thumbnail image has been tapped, if it is determined in step S26 that reproduction of the content represented by the thumbnail image has been instructed, the thumbnail image
再生要求部414は、ステップS27において、コンテンツの再生をコンテンツ処理ソフトウエア381に対して要求する。再生要求部414は、静止画コンテンツのサムネイル画像がタップされた場合、静止画コンテンツ再生部421−1に静止画コンテンツの再生を要求し、動画コンテンツのサムネイル画像がタップされた場合、動画コンテンツ再生部421−2に動画コンテンツの再生を要求する。また、再生要求部414は、音声コンテンツのサムネイル画像がタップされた場合、音声コンテンツ再生部421−3に音声コンテンツの再生を要求し、メモのサムネイル画像がタップされた場合、メモコンテンツ再生部421−4にメモの再生を要求する。
In step S27, the
ステップS26において、コンテンツの再生が指示されていないと判定された場合、ステップS27の処理はスキップされる。 If it is determined in step S26 that content reproduction has not been instructed, the process of step S27 is skipped.
ステップS28において、サムネイル画像表示制御部413は、サムネイル表示領域241に表示させているサムネイル画像の上にスタイラス2の先端が押し当てられたか否かを判定し、押し当てられたと判定した場合、ステップS29に進み、スタイラス2の移動に連動してサムネイル画像の表示位置を移動させる。
In step S28, the thumbnail image
ステップS30において、サムネイル画像表示制御部413は、サムネイル画像に対するスタイラス2の先端の押し当てが終わったか否か、すなわち、スタイラス2の先端がLCD28の表面から離されたか否かを判定し、スタイラス2の先端がLCD28の表面から離されていないと判定した場合、ステップS29に戻り、表示位置の移動を繰り返す。
In step S30, the thumbnail image
一方、ステップS30において、サムネイル画像表示制御部413は、LCD28の表面からスタイラス2の先端が離され、作成中のデータベースの上にサムネイル画像が移動されたと判定した場合、ステップS31に進み、データベース処理ソフトウエア371のデータベース構成情報管理部401に対して、サムネイル画像の貼り付けを要求する。
On the other hand, if the thumbnail image
このとき、サムネイル画像の移動先の位置を表す情報や、そのサムネイル画像のリンク情報などの各種の情報がサムネイル画像表示制御部413からデータベース構成情報管理部401に通知される。
At this time, the thumbnail image
このようなサムネイル画像の貼り付けの通知が行われた後、または、ステップS28において、サムネイル画像に対してスタイラス2の先端が押し当てられていないと判定された場合、処理はステップS32に進む。
After such a thumbnail image pasting notification has been made, or when it is determined in step S28 that the tip of the
ステップS32において、サムネイル画像表示制御部413は、サムネイル画像の一覧を閉じること要求されたか否かを判定し、要求されていないと判定した場合、ステップS26に戻り、それ以降の処理を繰り返す。
In step S32, the thumbnail image
また、サムネイル画像表示制御部413は、ステップS32において、サムネイル画像の一覧を閉じることが要求されたと判定した場合、一覧を閉じ、処理を終了させる。この要求は、データベース処理ソフトウエア371の表示要求部404から通知されるものである(図23のステップS9)。
If the thumbnail image
次に、図25のフローチャートを参照して、コンテンツ処理ソフトウエア381により実行されるコンテンツの再生処理について説明する。
Next, content reproduction processing executed by the
例えば、この処理が静止画コンテンツ処理ソフトウエア381−1により実行される場合、静止画コンテンツ再生部421−1は、ステップS41において、静止画コンテンツの再生(プレビュー)が要求されたか否かを判定し、要求されたと判定するまで待機する。 For example, when this process is executed by the still image content processing software 381-1, the still image content reproduction unit 421-1 determines whether reproduction (preview) of the still image content is requested in step S41. And wait until it is determined that it has been requested.
データベースに貼り付けられた静止画コンテンツのサムネイル画像がタップされたとき、または、サムネイル表示領域241に表示されている静止画コンテンツのサムネイル画像がタップされたとき、データベース処理ソフトウエア371の再生要求部403、サムネイル表示ソフトウエア363の再生要求部414からそれぞれ静止画コンテンツの再生が要求されてくる(図23のステップS11、図24のステップS27)。再生要求部403、再生要求部414からの要求には、コンテンツ本体の記憶位置を表す情報等も含まれる。
When the thumbnail image of the still image content pasted in the database is tapped, or when the thumbnail image of the still image content displayed in the
なお、サムネイル画像がタップされたときにすぐにコンテンツの再生が開始されるのではなく、サムネイル画像がタップされたとき、タップされたコンテンツに対してユーザが選択可能な操作の内容を表すメニューが表示され、そのメニューからある操作が選択されてからコンテンツの再生が開始されるようにしてもよい。サムネイル画像がタップされたときに表示されるメニューには、例えば、コンテンツの再生/はがす/拡大/縮小/削除等が、ユーザが選択可能な操作として用意される。 When a thumbnail image is tapped, content playback does not start immediately, but when the thumbnail image is tapped, there is a menu indicating the contents of operations that can be selected by the user for the tapped content. The content may be displayed after the operation is displayed and a certain operation is selected from the menu. In the menu displayed when the thumbnail image is tapped, for example, playback / peel / enlargement / reduction / deletion of the content is prepared as an operation that can be selected by the user.
静止画コンテンツ再生部421−1は、ステップS41において、静止画コンテンツの再生が要求されたと判定した場合、ステップS42に進み、再生要求部403、再生要求部414からの要求に含まれる情報に基づいてコンテンツ本体のデータを取得し、その再生を開始する。
If the still image content reproduction unit 421-1 determines in step S41 that reproduction of the still image content has been requested, the process proceeds to step S42 and is based on information included in the requests from the
これにより、LCD28上には、例えば、図11に示されるような静止画のプレビューが表示される。静止画コンテンツ再生部421−1は、以上の処理を繰り返し、静止画コンテンツの再生を行う。
Thereby, a preview of a still image as shown in FIG. 11 is displayed on the
同様の処理が動画コンテンツ再生部421−2、音声コンテンツ再生部421−3、メモコンテンツ再生部421−4によりそれぞれのカテゴリのコンテンツに対して行われる。 Similar processing is performed on the content of each category by the moving image content playback unit 421-2, the audio content playback unit 421-3, and the memo content playback unit 421-4.
以上においては、データベースに貼り付けたサムネイル画像をタップすることで、それにより表されるコンテンツの再生を開始させることができるとしたが、そのようなコンテンツを容易に参照するための方法としては、次のようなものもある。 In the above, by tapping the thumbnail image pasted on the database, the reproduction of the content represented thereby can be started. As a method for easily referring to such content, Some are as follows:
図26は、データベースの例を示す図である。 FIG. 26 is a diagram illustrating an example of a database.
図26に示されるデータベースであるメモは、図10のメモ作成領域211に示されるメモに対して、サムネイル画像401乃至404がさらに貼り付けられたものである。なお、図26において、図10のコンテンツ表示領域241は表示されていない。図10と同じ部分には同一の符号を付してあり、重複する説明は適宜省略する。
The memo, which is the database shown in FIG. 26, is obtained by further
図26のメモに貼り付けられているサムネイル画像のうち、サムネイル画像401,402は、静止画コンテンツのサムネイル画像である。また、サムネイル画像403は、音声コンテンツのサムネイル画像であり、サムネイル画像404は、動画コンテンツのサムネイル画像である。サムネイル画像401,402,404により表されるコンテンツのデータは、それぞれMS3に記憶されている(それぞれのサムネイル画像の右下にMS3の外観の絵が付されている)。
Of the thumbnail images pasted on the memo in FIG. 26,
このようなメモが予め作成されており、そのデータベース構成情報がデータベース処理ソフトウエア371により管理されているものとする。
It is assumed that such a memo is created in advance and the database configuration information is managed by the
図27は、図26のサムネイル画像253により表される静止画コンテンツのプレビュー画面を示す図である。
FIG. 27 is a diagram showing a still image content preview screen represented by the
図27の画面は、例えば、図26のサムネイル画像253がタップされたときに表示されるものであってもよいし、図6のメイン画面から静止画のビューワ機能を有するソフトウエアが起動され、そのソフトウエアにより表示されるものであってもよい。
27 may be displayed, for example, when the
図27において、ステータス領域203の上に形成されるボタン表示領域412の左端には、コンテンツ表示領域411に表示されているコンテンツに関連するコンテンツの一覧を表示するときに操作される関連コンテンツ表示ボタン421が用意されている。
In FIG. 27, a related content display button operated when displaying a list of contents related to the content displayed in the
ここで、「コンテンツ表示領域411に表示されているコンテンツに関連するコンテンツ」とは、コンテンツ表示領域411に表示されているコンテンツのサムネイル画像が貼り付けられているデータベースと同じデータベースに、そのサムネイル画像が貼り付けられているコンテンツをいう。
Here, “content related to the content displayed in the
従って、図26のデータベースが予め作成されている場合、図27のコンテンツ表示領域411に表示されているコンテンツ(図26のサムネイル画像253により表されるコンテンツ)に関連するコンテンツは、サムネイル画像401,402により表される静止画コンテンツ、サムネイル画像403により表される音声コンテンツ、サムネイル画像404により表される動画コンテンツとなる。
Therefore, when the database in FIG. 26 is created in advance, the content related to the content (content represented by the
以下、適宜、あるコンテンツに関連するコンテンツ(同じデータベースにサムネイル画像が貼り付けられているコンテンツ)を関連コンテンツという。 Hereinafter, content related to a certain content (content in which a thumbnail image is pasted in the same database) will be referred to as related content.
図28は、図27の画面において、関連コンテンツ表示ボタン421が操作されたときに表示される画面の例を示す図である。 FIG. 28 is a diagram showing an example of a screen displayed when the related content display button 421 is operated on the screen of FIG.
図28に示されるように、例えば、ステータス領域203とコンテンツ表示領域411の間にサムネイル表示領域431が形成され、そこに、関連コンテンツのサムネイル画像の一覧が表示される。
As shown in FIG. 28, for example, a
すなわち、図27のコンテンツ表示領域411に表示されている静止画コンテンツの関連コンテンツは、サムネイル画像401乃至404により表されるコンテンツであるから、サムネイル表示領域431には、それらのコンテンツのサムネイル画像401乃至404が一覧表示される。
That is, since the related content of the still image content displayed in the
ユーザは、一覧表示されているサムネイル画像をタップすることで、タップしたサムネイル画像により表されるコンテンツをコンテンツ表示領域411に表示させることができる。
The user can display the content represented by the tapped thumbnail image in the
サムネイル表示領域431のサムネイル画像401乃至404の上下には、サムネイル表示領域431に表示するサムネイル画像の範囲を切り替えるときに水平方向に操作されるスクロールバーが用意されている。図27のコンテンツ表示領域411に表示されている静止画コンテンツの関連コンテンツがさらに複数ある場合、ユーザは、このスクロールバーを利用することで、図28に示されるもの以外の関連コンテンツのサムネイル画像を表示させることができる。
Above and below the
なお、関連コンテンツのサムネイル画像の一覧を表示させるための操作は、関連コンテンツ表示ボタン421を操作することに限られるものではなく、どのような操作であってもよい。 Note that the operation for displaying a list of thumbnail images of related content is not limited to operating the related content display button 421, and may be any operation.
図29は、図28の画面に一覧表示されている関連コンテンツのサムネイル画像のうち、サムネイル画像401がタップされたときに表示される画面の例を示す図である。
FIG. 29 is a diagram illustrating an example of a screen displayed when the
サムネイル画像401がタップされたとき、静止画のビューワ機能を有するソフトウエア(コンテンツ処理ソフトウエア)により、サムネイル画像401により表される静止画コンテンツがコンテンツ表示領域411に表示される。
When the
図29のボタン表示領域412には、ボタン441,442が表示されており、ユーザは、ボタン441またはボタン442を操作する毎に、そのとき表示させている関連コンテンツの次の関連コンテンツを順次表示させることができる。
29,
同じデータベースにサムネイル画像が貼り付けられたコンテンツは、何らかの関係があって1つのデータベースにまとめられたものであるから、このように、関連コンテンツのサムネイル画像が表示されることで、ユーザは、関連のあるコンテンツを容易に選択することができ、作業などを効率的に行うことができる。 Since the contents with the thumbnail images pasted in the same database have some relationship and are collected in one database, the thumbnail images of the related contents are displayed in this way, so that the user can Content can be easily selected and work can be performed efficiently.
なお、図28のサムネイル画像の中から、サムネイル画像403がタップされた場合、サムネイル画像403により表される音声コンテンツの再生が開始され(このときコンテンツ表示領域411には所定の画面が表示される)、サムネイル画像404がタップされた場合、サムネイル画像404により表される動画コンテンツの表示がコンテンツ表示領域411において開始される。
When the
以上においては、あるコンテンツを表示させている状態から、それに関連する他のコンテンツを表示させる場合について説明したが、所定の操作で、あるコンテンツを表示させている状態から、そのコンテンツのサムネイル画像が貼り付けられているデータベースを表示させることができるようにしてもよい。 In the above description, the case where another content related to the content is displayed from the state where a certain content is displayed has been described. However, the thumbnail image of the content is displayed from the state where the certain content is displayed by a predetermined operation. The pasted database may be displayed.
図30は、そのような、あるコンテンツの表示からデータベースの表示への表示の切り替えについて示す図である。 FIG. 30 is a diagram illustrating such display switching from the display of certain content to the display of the database.
例えば、図27の画面がLCD28に表示されている状態で所定の操作が行われたとき、LCD28の表示は、図30の白抜き矢印の先に示されるように、それまでLCD28(コンテンツ表示領域411)に表示されていたコンテンツのサムネイル画像が貼り付けられているデータベースの画面(図26の画面)に切り替えられる。
For example, when a predetermined operation is performed in a state where the screen of FIG. 27 is displayed on the
これにより、ユーザは、あるコンテンツを表示させている状態から、そのコンテンツのサムネイル画像が貼り付けられているデータベース(表示中のコンテンツが関連付けられているデータベース)を容易に表示させることができる。 As a result, the user can easily display a database in which a thumbnail image of the content is pasted (a database associated with the displayed content) from a state in which the content is displayed.
なお、1つのコンテンツが、複数のデータベースに関連付けられている場合、あるボタンを操作することで、1つのコンテンツが関連付けられている複数のデータベースのサムネイル画像の一覧が表示され、その中から1つのデータベースが選択されたときに、あるコンテンツが表示されている状態から、そのコンテンツが関連付けられているデータベースに表示が切り替えられるようにしてもよい。 In addition, when one content is associated with a plurality of databases, a list of thumbnail images of a plurality of databases associated with one content is displayed by operating a certain button. When a database is selected, the display may be switched from a state where a certain content is displayed to a database associated with the content.
次に、図26乃至図30に示されるような画面表示を実現するソフトウエア構成について説明する。 Next, a software configuration for realizing screen display as shown in FIGS. 26 to 30 will be described.
図31は、PDA1に用意されるソフトウエアの例を示すブロック図である。
FIG. 31 is a block diagram illustrating an example of software prepared in the
図31に示されるソフトウエアの構成は、コンテンツ関連付けテーブル記憶部451が設けられている点を除いて図20の構成と同じである。
The configuration of software shown in FIG. 31 is the same as the configuration of FIG. 20 except that a content association
図31のデータベース処理ソフトウエア371(メモデータベース処理ソフトウエア371−1、予定表データベース処理ソフトウエア371−2)は、作成中のデータベースにサムネイル画像が貼り付けられ、コンテンツが関連付けられたとき、そのコンテンツに関する情報が記述されたコンテンツ関連付けテーブルをコンテンツ関連付けテーブル記憶部451に記憶させる。
The database processing software 371 (memo database processing software 371-1, schedule database processing software 371-2) shown in FIG. 31 is displayed when a thumbnail image is pasted on the database being created and the contents are associated. The content association
図32は、コンテンツ関連付けテーブル記憶部451に記憶されるコンテンツ関連付けテーブルの例を示す図である。
FIG. 32 is a diagram illustrating an example of a content association table stored in the content association
図32に示されるように、コンテンツ関連付けテーブルには、例えば、コンテンツ関連付けテーブルの識別情報であるindex、コンテンツ関連付けテーブルのデータ量を表すレコード長、データベースに関連付けられたコンテンツの識別情報であるコンテンツを示すラベル(以下、適宜、コンテンツラベルという)、コンテンツが関連付けられたデータベースの識別情報であるデータベースを示すラベル(以下、適宜、データベースラベルという)、コンテンツが関連付けられたデータベースを管理するデータベース処理ソフトウエアの識別情報であるデータベース処理ソフトウエアを示すラベル(以下、適宜、ソフトウエアラベルという)が記述される。 As shown in FIG. 32, the content association table includes, for example, an index that is identification information of the content association table, a record length that represents the data amount of the content association table, and content that is identification information of the content associated with the database. Database processing software for managing a label indicating a database (hereinafter referred to as a content label), a label indicating a database which is identification information of a database associated with the content (hereinafter referred to as a database label as appropriate), and a database associated with the content A label indicating database processing software (hereinafter referred to as a software label as appropriate) is described.
データベースラベルとソフトウエアラベルは、1つのコンテンツ関連付けテーブルに複数記述されるようにしてもよい。 A plurality of database labels and software labels may be described in one content association table.
図32の各情報が記述されるコンテンツ関連付けテーブルは、データベースにサムネイル画像が貼り付けられた1つのコンテンツ毎に作成され、コンテンツ関連付けテーブル記憶部451に登録される。
The content association table in which each piece of information in FIG. 32 is described is created for each content in which a thumbnail image is pasted in the database, and is registered in the content association
図31の説明に戻り、コンテンツ処理ソフトウエア381(静止画コンテンツ処理ソフトウエア381−1、動画コンテンツ処理ソフトウエア381−2、音声コンテンツ処理ソフトウエア381−3、メモコンテンツ処理ソフトウエア381−4)は、表示させているコンテンツに関連するコンテンツのサムネイル画像を表示することがユーザにより要求された場合(関連コンテンツ表示ボタン421が操作された場合)、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルを参照することによって関連コンテンツを選択し、関連コンテンツのサムネイル画像をサムネイル表示領域431に表示させる。
Returning to the description of FIG. 31, content processing software 381 (still image content processing software 381-1, moving image content processing software 381-2, audio content processing software 381-3, memo content processing software 381-4). Is a content stored in the content association
また、コンテンツ処理ソフトウエア381は、関連コンテンツの再生が要求されたとき、その要求に応じてコンテンツの再生(静止画コンテンツ、メモコンテンツのプレビュー、音声コンテンツ、動画コンテンツの再生)を開始する。
In addition, when the
さらに、コンテンツの表示から、そのコンテンツが関連付けられているデータベースの表示にLCD28の表示を切り替えることが要求された場合(図30の表示の切り替えが要求された場合)も同様に、コンテンツ処理ソフトウエア381は、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルを参照し、表示の切り替えを行う。
Further, when it is requested to switch the display of the
それぞれのソフトウエアにより実行される処理についてはフローチャートを参照して後述する。 The processing executed by each software will be described later with reference to a flowchart.
図33は、図31の各ソフトウエアにより実現されるPDA1の機能構成例を示すブロック図である。
FIG. 33 is a block diagram showing an example of a functional configuration of the
図33においては、データベース処理ソフトウエア371とコンテンツ処理ソフトウエア381により実現される機能構成のみを示している。また、図22と同じ構成には同一の符号を付してあり、重複する説明については適宜省略する。
FIG. 33 shows only the functional configuration realized by the
データベース処理ソフトウエア371のテーブル管理部461は、ユーザがサムネイル画像をデータベースに貼り付けたときに行われるデータベース構成情報管理部401からの通知に応じて、図32の各情報が記述されるコンテンツ関連付けテーブルを作成し、それをコンテンツ関連付けテーブル記憶部451に記憶させる。
The
すなわち、ユーザがサムネイル画像をデータベースに貼り付けたとき、タッチパネル36からの出力に基づいて、そのことがデータベース構成情報管理部401により検出され、サムネイル画像に関する各種の情報がデータベース構成情報(図21)として登録される。このとき、データベース構成情報管理部401からテーブル管理部461に対して、サムネイル画像がデータベースに貼り付けられたこと(データベースにコンテンツが関連付けられたこと)が通知される。データベース構成情報管理部401からテーブル管理部461に対する通知には、図32の各情報を記述するためのコンテンツやデータベースに関する情報が含まれる。
That is, when the user pastes a thumbnail image into the database, this is detected by the database configuration
コンテンツ処理ソフトウエア381の再生制御部471は、静止画コンテンツ再生部421−1乃至メモコンテンツ再生部421−4を制御し、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルに記述されている情報に基づいて、図26乃至図30を参照して説明したようなコンテンツの表示を行う。
The
ここで、以上のような表示の切り替えを行うためのPDA1の動作についてフローチャートを参照して説明する。
Here, the operation of the
始めに、図34のフローチャートを参照して、コンテンツ関連付けテーブルをコンテンツ関連付けテーブル記憶部451に登録する(記憶させる)データベース処理ソフトウエア371の処理について説明する。
First, processing of the
この処理は、データベース処理ソフトウエア371が起動している間、所定の周期で繰り返し行われる。
This process is repeated at a predetermined cycle while the
ステップS101において、データベース処理ソフトウエア371のテーブル管理部461は、データベース構成情報管理部401からの出力に基づいて、データベースにコンテンツが関連付けられたか否かを判定し、関連付けられていないと判定した場合、処理を終了させる。
In step S101, the
また、テーブル管理部461は、サムネイル画像が作成中のデータベースに貼り付けられたことがデータベース構成情報管理部401から通知されてきたため、ステップS101において、データベースにコンテンツが関連付けられたと判定した場合、ステップS102に進む。
If the
ステップS102において、テーブル管理部461は、index、レコード長、コンテンツラベル、データベースラベル、ソフトウエアラベルの図32の各情報をコンテンツ関連付けテーブルに記述し、コンテンツ関連付けテーブルをコンテンツ関連付けテーブル記憶部451に登録する。
In step S102, the
その後、処理は終了される。以上のような処理が繰り返されることで、コンテンツ関連付けテーブル記憶部451には、それぞれのデータベースに関連付けられたコンテンツ毎のコンテンツ関連付けテーブルが記憶されることになる。
Thereafter, the process is terminated. By repeating the above processing, the content association
次に、図35のフローチャートを参照して、コンテンツを表示している状態から、その表示中のコンテンツに関連する関連コンテンツを表示するように表示を切り替えるコンテンツ処理ソフトウエア381の処理について説明する。
Next, processing of the
ステップS111において、コンテンツ処理ソフトウエア381の再生制御部471は、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルの総数をnumの値として設定する。コンテンツ関連付けテーブルの総数は、全てのデータベースに関連付けられている全てのコンテンツの数に相当する。
In step S111, the
ステップS112において、再生制御部471は、0の値がindexとして設定されたコンテンツ関連付けテーブルを注目するテーブル(以下、適宜、注目テーブルという)とする。
In step S112, the
再生制御部471は、ステップS113において、numの値がindexの値より大きいか否かを判定し、大きくない(小さいまたは等しい)と判定した場合、処理を終了させる。numの値がindexの値と等しい場合、それは、コンテンツ関連付けテーブル記憶部451に登録されている全てのコンテンツ関連付けテーブルを注目テーブルとして、後述する処理が既に行われたことを表す。
In step S113, the
また、ステップS113において、再生制御部471は、まだ注目テーブルとしていないコンテンツ関連付けテーブルがあるため、numの値がindexの値より大きいと判定した場合、ステップS114に進む。
In step S113, since there is a content association table that has not yet been set as the attention table, the
ステップS114において、再生制御部471は、label_of_tableの値として、注目テーブルに記述されているコンテンツラベルを設定する。また、再生制御部471は、ステップS115において、label_of_contentsの値として、表示中のコンテンツのコンテンツラベルを設定する。表示中のコンテンツのコンテンツラベルは、例えば、表示開始時に再生制御部471により取得される。
In step S114, the
ステップS116において、再生制御部471は、ステップS114で設定したlabel_of_tableの値と、ステップS115で設定したlabel_of_contentsの値が等しいか否かを判定し、それらの値が等しくない(異なる)と判定した場合、ステップS117に進む。label_of_tableの値とlabel_of_contentsの値が等しくない場合、それは、注目テーブルが、表示中のコンテンツのコンテンツ関連付けテーブルではないことを表す。
In step S116, the
ステップS117において、再生制御部471は、indexの値を1だけインクリメントし、ステップS113に戻り、それ以降の処理を繰り返す。これにより、注目テーブルが切り替わり、それ以降の処理が行われることになる。
In step S117, the
一方、注目テーブルが表示中のコンテンツのコンテンツ関連付けテーブルあるため、ステップS116において、label_of_tableの値とlabel_of_contentsの値が等しいと判定した場合、再生制御部471は、ステップS118に進み、label_of_databaseの値として、表示中のコンテンツのデータベースラベルを設定する。
On the other hand, since the table of interest is the content association table of the content being displayed, if it is determined in step S116 that the value of label_of_table is equal to the value of label_of_contents, the
すなわち、label_of_tableの値とlabel_of_contentsの値が等しい場合、表示中のコンテンツのコンテンツ関連付けテーブルが注目テーブルとして検出されたことになり、再生制御部471は、検出されたコンテンツ関連付けテーブルに記述されている情報に基づいて、表示中のコンテンツが関連付けられているデータベースの識別情報を表すデータベースラベルを、label_of_databaseの値として設定することが可能になる。
That is, when the value of label_of_table is equal to the value of label_of_contents, the content association table for the content being displayed has been detected as the attention table, and the
ステップS119において、再生制御部471は、表示中のコンテンツに関連する関連コンテンツの総数を取得する。
In step S119, the
例えば、それぞれのデータベースに関するデータベース構成情報が記憶部139の所定の領域に記憶されている場合、再生制御部471は、ステップS118でlabel_of_databaseの値として設定したデータベースラベルで識別されるデータベースのデータベース構成情報を参照し、関連付けられている他のコンテンツの総数を取得する。図21を参照して説明したように、データベース構成情報には、1つのデータベースに関連付けられている全てのコンテンツに関する情報が記述されている。
For example, when the database configuration information regarding each database is stored in a predetermined area of the
なお、ステップS118でlabel_of_databaseの値として設定したデータベースラベルで識別されるデータベースに関連付けられている他のコンテンツの総数は、ステップ119でいう表示中のコンテンツに関連する関連コンテンツの総数である。
The total number of other contents associated with the database identified by the database label set as the value of label_of_database in step S118 is the total number of related contents related to the content being displayed in
例えば、図27の画面が表示されている状態においては、図27の画面に表示されているコンテンツの関連付けの対象である図26のデータベースのデータベース構成情報が参照され、関連コンテンツの総数として「4」が設定される。 For example, in the state where the screen of FIG. 27 is displayed, the database configuration information of the database of FIG. 26 that is the target of content association displayed on the screen of FIG. 27 is referred to, and the total number of related content is “4”. Is set.
図28に示されるように関連コンテンツのサムネイル画像を表示する場合、再生制御部471は、データベース構成情報に基づいて関連コンテンツを認識し、サムネイル画像を生成して一覧表示させる。サムネイル画像の生成と表示は、再生制御部471からの要求に応じてサムネイル表示ソフトウエア363により行われるようにしてもよい。
When displaying thumbnail images of related content as shown in FIG. 28, the
ステップS120において、再生制御部471は、num_of_contentsの値として、ステップS119で取得した関連コンテンツの総数を設定し、ステップS121に進む。
In step S120, the
再生制御部471は、ステップS121において、例えば、図28のサムネイル画像がタップされることに応じて、タップされたサムネイル画像により表されるコンテンツを注目する関連コンテンツとし、その注目する関連コンテンツを表すcontents_indexの値として0を設定する。
In step S121, for example, when the thumbnail image in FIG. 28 is tapped, the
ステップS122において、再生制御部471は、ステップS120で設定したnum_of_contentsの値が、ステップS121で設定したcontents_indexの値より大きいか否かを判定し、大きいと判定した場合、ステップS123に進む。
In step S122, the
再生制御部471は、ステップS123において、注目している関連コンテンツのカテゴリに応じて、静止画コンテンツ再生部421−1乃至メモコンテンツ再生部421−4のいずれかを制御し、注目している関連コンテンツを表示(再生)させる。
In step S123, the
例えば、図28のサムネイル表示領域431から、サムネイル画像401がタップされた場合、サムネイル画像401により表されるコンテンツ(注目している関連コンテンツ)が、静止画コンテンツ再生部421−1によりコンテンツ表示領域411に表示され、図29の画面に切り替わる。
For example, when the
例えば、図29のボタン442が操作されたとき、ステップS124において、再生制御部471は、contents_indexの値を1だけインクリメントし、そのとき注目している関連コンテンツの次の関連コンテンツを、新たに注目する関連コンテンツとする。その後、ステップS122に戻り、それ以降の処理が繰り返される。
For example, when the
以上の処理により、例えば、図26に示されるように、サムネイル画像253により表されるコンテンツの関連コンテンツとして4つのコンテンツ(サムネイル画像401乃至404により表されるコンテンツ)がある場合、ボタン442が操作される毎に、それらの4つの関連コンテンツが順次再生される。
With the above processing, for example, as shown in FIG. 26, when there are four contents (contents represented by
ステップS122において、num_of_contentsの値がcontents_indexの値より大きくない(等しい)と判定された場合、処理は終了される。 If it is determined in step S122 that the value of num_of_contents is not greater than (equal to) the value of contents_index, the process ends.
次に、図36のフローチャートを参照して、コンテンツを表示している状態から、その表示中のコンテンツが関連付けられているデータベースを表示するように表示を切り替えるコンテンツ処理ソフトウエア381の処理(図30に示されるように表示を切り替える処理)について説明する。
Next, referring to the flowchart of FIG. 36, the processing of the
図36のステップS131乃至S137の処理は、図35のステップS111乃至S117の処理と同様である。 The processes in steps S131 to S137 in FIG. 36 are the same as the processes in steps S111 to S117 in FIG.
すなわち、ステップS131において、コンテンツ関連付けテーブルの総数がnumの値として設定され、ステップS132に進み、indexの値として0が設定されたコンテンツ関連付けテーブルが注目テーブルとされる。また、ステップS133において、numがindexの値より大きいと判定された場合、ステップS134,S135において、それぞれ、label_of_tableの値とlabel_of_contentsの値が設定される。 That is, in step S131, the total number of content association tables is set as the value of num, and the process proceeds to step S132, and the content association table in which 0 is set as the value of index is set as the attention table. If it is determined in step S133 that num is greater than the value of index, the values of label_of_table and label_of_contents are set in steps S134 and S135, respectively.
ステップS136において、label_of_tableの値とlabel_of_contentsの値が等しいと判定された場合(注目テーブルが表示中のコンテンツのコンテンツ関連付けテーブルである場合)、ステップS138に進む。 If it is determined in step S136 that the value of label_of_table is equal to the value of label_of_contents (when the attention table is a content association table for the content being displayed), the process proceeds to step S138.
ステップS138において、再生制御部471は、label_of_databaseの値として、表示中のコンテンツのデータベースラベルを設定する。このとき、表示中のコンテンツのコンテンツ関連付けテーブルが検出されていることから、再生制御部471は、コンテンツ関連付けテーブル(注目テーブル)に記述されている情報に基づいて、表示中のコンテンツが関連付けられているデータベースのデータベースラベルをlabel_of_databaseの値として設定することが可能である。
In step S138, the
ステップS139において、再生制御部471は、label_DB_appの値として、注目テーブルに記述されているソフトウエアラベルを設定する。
In step S139, the
ステップS140において、再生制御部471は、ステップS139で設定したlabel_DB_appで識別されるデータベース処理ソフトウエア371に対して、label_of_databaseを通知し、その値で識別されるデータベースの表示を要求する。この要求に応じて、データベース処理ソフトウエア371によりデータベースの表示が行われる。
In step S140, the
次に、図37のフローチャートを参照して、図36の処理に対応してデータベース処理ソフトウエア371により行われるデータベース表示処理について説明する。
Next, the database display process performed by the
ステップS151において、データベース構成情報管理部401は、コンテンツ処理ソフトウエア381の再生制御部471から、データベースの表示が要求されたか否かを判定し、要求されたと判定するまで待機する。
In step S151, the database configuration
データベース構成情報管理部401は、ステップS151において、再生制御部471からの要求があったと判定した場合、ステップS152に進み、その要求とともに再生制御部471から通知されてくるlabel_of_databaseに基づいて、表示するデータベースを識別し、その表示をデータベース表示制御部402に行わせる。label_of_databaseに基づくデータベースの識別は、例えば、データベース構成情報管理部401からテーブル管理部461に対する問い合わせが行われてなされるものであってもよい。
If the database configuration
図36および図37の一連の処理により、例えば、図30に示されるように、コンテンツが表示されている状態から、そのコンテンツが関連付けられているデータベースを表示させるようにLCD28の表示の切り替えが行われる。
36 and 37, for example, as shown in FIG. 30, the display of the
以上のように、コンテンツ関連付けテーブルを参照するようにしため、コンテンツ処理ソフトウエア381(再生制御部471)は、図30に示されるように、表示の切り替え対象となるデータベースを容易に、かつ迅速に識別することができる。 As described above, in order to refer to the content association table, the content processing software 381 (reproduction control unit 471) can easily and quickly select a database to be switched as shown in FIG. Can be identified.
例えば、コンテンツ関連付けテーブルを参照しない場合、図38Aに示されるように、コンテンツ処理ソフトウエア381は、表示中のコンテンツであるコンテンツ#1が関連付けられているデータベースを、PDA1内にあるデータベース(図38AおよびBにおいては、データベース#1乃至#7が示されている)のデータベース構成情報をそれぞれ参照することで識別する必要があるのに対し、図38Bに示されるようしてコンテンツ関連付けテーブルを参照する場合、コンテンツ#1が関連付けられているデータベースを、コンテンツ関連付けテーブル記憶部451に記憶されているコンテンツ関連付けテーブルに基づいて容易に識別することができる。また、識別したコンテンツ関連付けテーブルのラベルをデータベース処理ソフトウエア371に通知することで、容易にデータベースの表示を要求することができる。
For example, when the content association table is not referred to, as shown in FIG. 38A, the
以上においては、データベースに貼り付けるコンテンツは、静止画、動画、音声、メモ(予定表の作成時)のコンテンツであるとしたが、貼り付け可能なコンテンツは、これらのものに限られない。例えば、図6のアプリケーションアイコン204や、予め用意されている貼り付け用の画像(例えば、星形の画像)など、各種の情報をコンテンツとして貼り付けることができるようにしてもよい。例えば、アプリケーションアイコン204をメモに貼り付けておき、それを用いることで、表示させているメモからソフトウエアを直接起動させることができる。 In the above, the content pasted on the database is the content of a still image, a moving image, sound, and a memo (when creating a schedule), but the content that can be pasted is not limited to these. For example, various kinds of information such as the application icon 204 of FIG. 6 and a pasting image (for example, a star image) prepared in advance may be pasted as content. For example, the application icon 204 can be pasted on a memo and the software can be directly activated from the displayed memo by using it.
また、予定表に登録した1つの予定の項目や、アドレス帳に登録した1つのアドレス情報などのいわゆるPIM(Personal Information Manager)情報を、コンテンツとしてデータベースに貼り付けることができるようにしてもよい。 Further, so-called PIM (Personal Information Manager) information such as one schedule item registered in the schedule table and one address information registered in the address book may be pasted into the database as content.
さらに、以上においては、上述したようなデータベースに対するコンテンツの貼り付けは、PDA1において行われるとしたが、この他、携帯電話機やノートブック型のパーソナルコンピュータなど、各種の機器において行われるようにしてもよい。
Further, in the above, the pasting of the content to the database as described above is performed in the
上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウエアにより実行させることもできる。 The series of processes described above can be executed by hardware, but can also be executed by software.
一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば、汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。 When a series of processing is executed by software, a program constituting the software executes various functions by installing a computer incorporated in dedicated hardware or various programs. For example, it is installed in a general-purpose personal computer from a network or a recording medium.
この記録媒体は、図5に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されているMS3やCF4などよりなるパッケージメディアにより構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM132や記憶部139などで構成される。
As shown in FIG. 5, this recording medium is composed only of a package medium made up of MS3, CF4, etc. on which a program is recorded, which is distributed to provide a program to the user, separately from the apparatus main body. Instead, it is configured by a
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。 In the present specification, the step of describing the program recorded in the recording medium is not limited to the processing performed in time series according to the described order, but is not necessarily performed in time series, either in parallel or individually. The process to be executed is also included.
1 PDA, 2 スタイラス, 361 データベース処理ソフトウエア群, 362 コンテンツ処理ソフトウエア群, 363 サムネイル表示ソフトウエア, 401 データベース構成情報管理部, 402 データベース表示制御部, 403 再生要求部, 404 表示要求部, 411 検索部, 412 サムネイル画像生成部, 413 サムネイル画像表示制御部, 414 再生要求部, 451 コンテンツ関連付けテーブル記憶部, 461 テーブル管理部, 471 再生制御部 1 PDA, 2 stylus, 361 database processing software group, 362 content processing software group, 363 thumbnail display software, 401 database configuration information management unit, 402 database display control unit, 403 playback request unit, 404 display request unit, 411 Search unit, 412 thumbnail image generation unit, 413 thumbnail image display control unit, 414 playback request unit, 451 content association table storage unit, 461 table management unit, 471 playback control unit
Claims (3)
前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成する生成手段と、 Generating means for generating a thumbnail image based on the image content stored in the storage means;
手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、前記生成手段により生成されたサムネイル画像の一覧を表示させる表示制御手段と、 Handwritten data is displayed in response to a user input in the creation area of a screen provided with a handwritten data creation area and an image list display area, and a list of thumbnail images generated by the generation means is displayed in the display area. Display control means for displaying;
前記表示制御手段により表示された前記サムネイル画像が、前記作成領域に表示されている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付ける関連付け手段と Each time the thumbnail image displayed by the display control unit is pasted to the handwritten data displayed in the creation area by a drag-and-drop operation, the image content from which the thumbnail image is created is pasted. Association means for associating the image content with the handwritten data by creating table information describing the identification information and the identification information of the handwritten data;
を備え、 With
前記表示制御手段は、 The display control means includes
前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、 When a first thumbnail image is selected from a plurality of the thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed over the handwritten data, the first thumbnail image is selected. The first image content that is the source of the thumbnail image is displayed in place of the handwritten data, and a button that is operated when displaying the related content is displayed.
前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、 When the button is operated, the thumbnail images of other image contents associated with the handwritten data are displayed side by side in an area where a part of the first image content is displayed,
横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、 When the second thumbnail image is selected from the thumbnail images of the other image contents displayed side by side in the horizontal direction, the display of the thumbnail image of the other image content is erased, and the selected second image is displayed. The second image content from which the thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right direction and a button pointing to the left direction are displayed side by side.
前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させる Each time the button pointing to the right direction or the button pointing to the left direction is operated, the other image contents are sequentially displayed.
情報処理装置。 Information processing device.
前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成し、 Generating a thumbnail image based on the image content stored in the storage means;
手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、生成したサムネイル画像の一覧を表示させ、 Handwritten data is displayed in accordance with the input by the user in the creation area of the screen where the creation area of the handwritten data and the display area of the image list are provided, and the list of generated thumbnail images is displayed in the display area,
表示させた前記サムネイル画像が、前記作成領域に表示させている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付け、 Each time the displayed thumbnail image is pasted to the handwritten data displayed in the creation area by a drag-and-drop operation, the identification information of the image content from which the thumbnail image was created and the handwriting By associating image content with the handwritten data by creating table information describing data identification information,
前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、 When a first thumbnail image is selected from a plurality of the thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed over the handwritten data, the first thumbnail image is selected. The first image content that is the source of the thumbnail image is displayed in place of the handwritten data, and a button that is operated when displaying the related content is displayed.
前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、 When the button is operated, the thumbnail images of other image contents associated with the handwritten data are displayed side by side in an area where a part of the first image content is displayed,
横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、 When the second thumbnail image is selected from the thumbnail images of the other image content displayed side by side in the horizontal direction, the thumbnail image of the other image content is turned off and the selected second image is displayed. The second image content from which the thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right direction and a button pointing to the left direction are displayed side by side.
前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させる Each time the button pointing to the right direction or the button pointing to the left direction is operated, the other image contents are sequentially displayed.
ステップを含む情報処理方法。 An information processing method including steps.
前記記憶手段に記憶されている画像コンテンツを元にしてサムネイル画像を生成し、 Generating a thumbnail image based on the image content stored in the storage means;
手書きデータの作成領域と画像の一覧の表示領域が設けられる画面の前記作成領域にユーザによる入力に応じて手書きデータを表示させ、前記表示領域に、生成したサムネイル画像の一覧を表示させ、 The handwritten data is displayed in accordance with the input by the user in the creation area of the screen where the creation area of the handwritten data and the display area of the list of images is provided, and the list of generated thumbnail images is displayed in the display area,
表示させた前記サムネイル画像が、前記作成領域に表示させている前記手書きデータにドラッグアンドドロップ操作によって貼り付けられる毎に、貼り付けられた前記サムネイル画像の生成元の画像コンテンツの識別情報と前記手書きデータの識別情報を記述したテーブル情報を作成することによって、画像コンテンツと前記手書きデータを関連付け、 Each time the displayed thumbnail image is pasted to the handwritten data displayed in the creation area by a drag-and-drop operation, the identification information of the image content from which the thumbnail image was created and the handwriting By associating the image content with the handwritten data by creating table information describing the identification information of the data,
前記手書きデータに重ねて、前記手書きデータに貼り付けられた複数の前記サムネイル画像を表示させている状態で複数の前記サムネイル画像の中から第1のサムネイル画像が選択された場合、前記第1のサムネイル画像の生成元の第1の画像コンテンツを前記手書きデータに替えて表示させるとともに、関連するコンテンツを表示するときに操作されるボタンを表示させ、 When a first thumbnail image is selected from a plurality of the thumbnail images in a state where the plurality of thumbnail images pasted on the handwritten data are displayed over the handwritten data, the first thumbnail image is selected. The first image content that is the source of the thumbnail image is displayed in place of the handwritten data, and a button that is operated when displaying related content is displayed,
前記ボタンが操作された場合、前記第1の画像コンテンツの一部を表示させていた領域に、前記手書きデータに関連付けられている他の画像コンテンツの前記サムネイル画像を横方向に並べて表示させ、 When the button is operated, the thumbnail images of other image contents associated with the handwritten data are displayed side by side in an area where a part of the first image content is displayed,
横方向に並べて表示させた前記他の画像コンテンツの前記サムネイル画像の中から第2のサムネイル画像が選択された場合、前記他の画像コンテンツの前記サムネイル画像の表示を消し、選択された前記第2のサムネイル画像の生成元の第2の画像コンテンツを前記第1の画像コンテンツに替えて表示させるとともに、右方向を指すボタンと左方向を指すボタンを並べて表示させ、 When the second thumbnail image is selected from the thumbnail images of the other image content displayed side by side in the horizontal direction, the thumbnail image of the other image content is turned off and the selected second image is displayed. The second image content from which the thumbnail image is generated is displayed in place of the first image content, and a button pointing to the right direction and a button pointing to the left direction are displayed side by side.
前記右方向を指すボタン、または前記左方向を指すボタンが操作される毎に、前記他の画像コンテンツを順次表示させる Each time the button pointing to the right direction or the button pointing to the left direction is operated, the other image contents are sequentially displayed.
ステップを含む処理をコンピュータに実行させるプログラム。 A program that causes a computer to execute processing including steps.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004005425A JP4419056B2 (en) | 2004-01-13 | 2004-01-13 | Information processing apparatus and method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004005425A JP4419056B2 (en) | 2004-01-13 | 2004-01-13 | Information processing apparatus and method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005202482A JP2005202482A (en) | 2005-07-28 |
JP4419056B2 true JP4419056B2 (en) | 2010-02-24 |
Family
ID=34819758
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004005425A Expired - Fee Related JP4419056B2 (en) | 2004-01-13 | 2004-01-13 | Information processing apparatus and method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4419056B2 (en) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8081165B2 (en) | 2005-08-30 | 2011-12-20 | Jesterrad, Inc. | Multi-functional navigational device and method |
US7864163B2 (en) | 2006-09-06 | 2011-01-04 | Apple Inc. | Portable electronic device, method, and graphical user interface for displaying structured electronic documents |
US7956849B2 (en) | 2006-09-06 | 2011-06-07 | Apple Inc. | Video manager for portable multifunction device |
KR101673918B1 (en) | 2010-02-11 | 2016-11-09 | 삼성전자주식회사 | Method and apparatus for providing plural informations in a portable terminal |
JP2013175105A (en) * | 2012-02-27 | 2013-09-05 | Cyberdyne Inc | Display data processing system |
JP5905417B2 (en) | 2013-07-29 | 2016-04-20 | 京セラ株式会社 | Mobile terminal and display control method |
JP5942978B2 (en) | 2013-12-26 | 2016-06-29 | ソニー株式会社 | Information processing apparatus, information processing method, and program |
-
2004
- 2004-01-13 JP JP2004005425A patent/JP4419056B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2005202482A (en) | 2005-07-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2005202483A (en) | Information processor, information processing method and program | |
CN101512473B (en) | Media player with imaged based browsing | |
EP2360569B1 (en) | Method and apparatus for providing informations of multiple applications | |
JP4217051B2 (en) | Information processing apparatus, object selection method, and object selection program | |
JP6314975B2 (en) | Display control apparatus, display control method, and display control program | |
JP2015510641A (en) | Tablet with user interface | |
JP2013545178A (en) | Screen display method and apparatus for portable terminal | |
JP4419060B2 (en) | Information processing apparatus and method, and program | |
JP2005228088A (en) | Information processor and method, and program | |
US20180121084A1 (en) | Information display device | |
JP4419056B2 (en) | Information processing apparatus and method, and program | |
JP2002157275A (en) | Picture display device and storage medium | |
JP4586397B2 (en) | Information processing apparatus and method, and program | |
JP4565317B2 (en) | Information processing apparatus and method, and program | |
JP4419057B2 (en) | Information processing apparatus and method, and program | |
JP4292473B2 (en) | Information processing apparatus and method, and program | |
JP2005202454A (en) | Information processor and method, and program | |
JP4683322B2 (en) | Image display control apparatus and image display control program | |
JP2005202455A (en) | Information processor and method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061110 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081205 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081216 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091105 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091118 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121211 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121211 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |