JP2001318940A - マルチメディア情報検索方法及びマルチメディア情報検索用グラフィックユーザインターフェース装置 - Google Patents

Abstract

(57)【要約】 【課題】 携帯型の情報記録媒体中に記録された所望の
マルチメディア情報を簡単に素早く検索し、且つ操作が
容易なマルチメディア情報検索用グラフィックユーザイ
ンターフェース装置を提供する。 【解決手段】 異なる複数の情報記録媒体に記録された
複数のマルチメディア情報の中から所望のマルチメディ
ア画像情報を検索し再生するマルチメディア情報検索用
グラフィックユーザインターフェース装置において、前
記記録された複数のマルチメディア画像情報を圧縮する
ための圧縮手段と、該圧縮されたマルチメディア画像情
報を所定の数だけ集合してページ画像情報として生成す
るページ画像情報生成手段と、前記ページ画像情報を表
示する表示手段と、該表示されたページ画像情報の中か
ら所望のマルチメディア画像情報を選択する選択操作手
段と、前記情報記録媒体を表示画面上に視覚化する為の
情報記録媒体表示子と、該情報記録媒体の記憶領域を表
示画面上に視覚化する為の記憶領域表示子と、窓枠によ
り前記表示手段により表示されたページ画像情報の先頭
画像を囲む窓枠表示子とを具備する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、マルチメディア情
報検索方法及びマルチメディア情報検索用グラフィック
ユーザインターフェース装置に関する。詳しくは、情報
記録媒体に記録されているマルチメディア情報を視覚表
示して簡易に検索する為のマルチメディア情報検索方法
及びマルチメディア情報検索用グラフィックユーザイン
ターフェース装置に関する。

【０００２】

【従来の技術】従来、マルチメディア情報の検索用グラ
フィックユーザインターフェースといえば、ＨＴＭＬ
（Ｈｉｐｅｒ Ｔｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａ
ｇｅ）やＸＭＬ（Ｅｘｔｅｎｓｉｂｌｅ Ｍａｒｋｕｐ
Ｌａｎｇｕａｇｅ）を使用したＷｅｂブラウザが知ら
れている。このＷｅｂブラウザはＷＷＷ（Ｗｏｒｌｄ
Ｗｉｄｅ Ｗｅｂ）サーバ等の巨大なデータベースをア
クセスして所望のマルチメディア情報を検索獲得するた
めのものである。

【０００３】

【発明が解決しようとする課題】しかしながら、Ｗｅｂ
ブラウザは、もともと巨大なＷＷＷサーバにアクセス
し、随時マルチメディア情報を検索するように作成され
ている為、ＰＣカードやメモリカード、或いはＣＤ−Ｒ
等の携帯型の情報記録媒体に記録されたマルチメディア
情報を検索する際に、所定数のマルチメディア情報をま
とめた、例えば、ページ画像情報のように一覧表示され
た画面の中から所望のマルチメディア画像情報を抽出す
るような機能は持っていない。又、様々なＷＷＷサーバ
にアクセスする必要から汎用性を持たせるように設計さ
れているのでユーザ自身がそれぞれに適するように各種
設定を行わなければならず、操作方法も覚えにくいので
携帯型情報記録媒体からマルチメディア情報を検索、抽
出するのに適していないという問題がある。

【０００４】従って、携帯型の情報記録媒体中に記録さ
れた所望のマルチメディア情報を簡単に素早く検索し、
且つ操作が容易なマルチメディア情報検索用グラフィッ
クユーザインターフェース装置を提供することに解決し
なければならない課題を有する。

【０００５】

【課題を解決するための手段】前記課題を解決するた
め、本発明に係るマルチメディア情報検索方法及びマル
チメディア情報検索用グラフィックユーザインターフェ
ース装置は次のような構成にすることである。

【０００６】（１）異なる複数の情報記録媒体に記録さ
れている複数のマルチメディア情報の中から所望のマル
チメディア画像情報を検索し再生するマルチメディア情
報検索方法であって、前記マルチメディア画像情報を圧
縮し、該圧縮されたマルチメディア画像情報を所定の数
だけ集合してページ画像情報として生成して表示し、前
記異なる複数の情報記録媒体を表示画面上に視覚化する
為の情報記録媒体表示子と、前記異なる複数の情報記録
媒体の記憶領域を表示画面上に視覚化する為の記憶領域
表示子と、前記表示されたページ画像情報の先頭画像を
窓枠により囲む窓枠表示子とを表示させ、前記表示され
たページ画像情報の中から所望のマルチメディア画像情
報を選択するようにしたことを特徴とするマルチメディ
ア情報検索方法。 （２）前記マルチメディア画像情報の圧縮は、前記異な
る複数の情報記録媒体に記録されたマルチメディア画像
情報の画像要素を間引いて圧縮することである（１）に
記載のマルチメディア情報検索方法。 （３）前記マルチメディア情報が音声情報である場合
は、該音声情報と関連づけられた情報記録媒体の記憶領
域にあるマルチメディア画像情報を検索して音声情報と
共に再生することを特徴とする（１）に記載のマルチメ
ディア情報検索方法。 （４）前記マルチメディア画像情報は、音声情報の属性
を示す文字情報を含んでいることを特徴とする（３）に
記載のマルチメディア情報検索方法。 （５）前記マルチメディア画像情報の選択は、前記表示
されたページ画像情報中のマルチメディア画像情報を飛
び飛びに指定選択することである（１）に記載のマルチ
メディア情報検索方法。 （６）前記情報記録媒体表示子、記録領域表示子及び窓
枠表示子の指示は、前記表示画面上に表示された各表示
子を外部操作子により連続に指示することである（１）
に記載のマルチメディア情報検索方法。 （７）前記情報記録媒体表示子は、前記情報記録媒体に
記録されたマルチメディア情報の容量を表示画面上に視
覚表示できるようにしたことを特徴とする（１）に記載
のマルチメディア情報検索方法。 （８）前記情報記録媒体表示子は、選択された時に表示
形状を変えることを特徴とする（１）に記載のマルチメ
ディア情報検索方法。 （９）前記圧縮する手法と、前記ページ画像情報を生成
する手法と、前記選択操作する手法と、前記画面上への
表示とがプログラムとして構成され、該プログラムが所
定の記録媒体に記録されていることを特徴とする（１）
に記載のマルチメディア情報検索方法。

【０００７】（１０）異なる複数の情報記録媒体に記録
された複数のマルチメディア情報の中から所望のマルチ
メディア画像情報を検索し再生するマルチメディア情報
検索用グラフィックユーザインターフェース装置であっ
て、前記マルチメディア画像情報を圧縮するための圧縮
手段と、該圧縮されたマルチメディア画像情報を所定の
数だけ集合してページ画像情報として生成するページ画
像情報生成手段と、前記ページ画像情報を表示すること
ができる表示手段と、該表示されたページ画像情報の中
から所望のマルチメディア画像情報を選択する選択操作
手段と、前記異なる複数の情報記録媒体を表示画面上に
視覚化する為の情報記録媒体表示子と、該異なる複数の
情報記録媒体の記憶領域を表示画面上に視覚化する為の
記憶領域表示子と、前記表示されたページ画像情報の先
頭画像を窓枠により囲む窓枠表示子とを具備することを
特徴とするマルチメディア情報検索用グラフィックユー
ザインターフェース装置。 （１１）前記圧縮手段は、前記異なる複数の情報記録媒
体に記録されたマルチメディア画像情報の画像要素を間
引いて圧縮することを特徴とする（１０）に記載のマル
チメディア情報検索用グラフィックユーザインターフェ
ース装置。 （１２）前記マルチメディア情報が音声情報である場合
は、該音声情報と関連づけられた情報記録媒体の記憶領
域にあるマルチメディア画像情報を検索して音声情報と
共に再生することを特徴とする（１０）に記載のマルチ
メディア情報検索用グラフィックユーザインターフェー
ス装置。 （１３）前記マルチメディア画像情報は、音声情報の属
性を示す文字情報を含んでいることを特徴とする（１
２）に記載のマルチメディア情報検索用グラフィックユ
ーザインターフェース装置。 （１４）前記マルチメディア画像情報の選択は、前記表
示手段により表示されたページ画像情報中のマルチメデ
ィア画像情報を飛び飛びに指定選択することを特徴とす
る（１０）に記載のマルチメディア情報検索用グラフィ
ックユーザインターフェース装置。 （１５）前記情報記録媒体表示子、記録領域表示子及び
窓枠表示子の指示は、前記表示画面上に表示された各表
示子を外部操作子により連続に指示することである（１
０）に記載のマルチメディア情報検索用グラフィックユ
ーザインターフェース装置。 （１６）前記情報記録媒体表示子は、前記情報記録媒体
に記録されたマルチメディア情報の容量を表示画面上に
視覚表示できるようにしたことを特徴とする（１０）に
記載のマルチメディア情報検索用グラフィックユーザイ
ンターフェース装置。 （１７）前記情報記録媒体表示子は、前記選択操作手段
により選択された時に表示形状を変えることを特徴とす
る（１０）に記載のマルチメディア情報検索用グラフィ
ックユーザインターフェース装置。 （１８）前記圧縮手段と、前記ページ画像情報生成手段
と、前記選択操作手段と、前記表示手段とがプログラム
として構成され、該プログラムが所定の記録媒体に記録
されていることを特徴とする（１０）に記載のマルチメ
ディア情報検索用グラフィックユーザインターフェース
装置。

【０００８】

【発明の実施の形態】次に、本願発明に係るマルチメデ
ィア情報検索方法及びグラフィックユーザインターフェ
ース装置の実施の形態について図面を参照して説明す
る。

【０００９】最初に、本発明のマルチメディア情報検索
用グラフィックユーザインターフェース装置を分かり易
くする為にＧＵＩ（グラフィックユーザインターフェー
ス）の概略について説明する。

【００１０】ＧＵＩのプログラムはコンパイラとリンカ
により予め実行可能なオブジェクトランゲージに変換さ
れて、例えば、コンピュータのディスク等の記録媒体に
格納されいる（以下、単にプログラムと記す時は実行形
式のプログラムを云う）。そして、実行時にはディスク
から読み出されてＲＡＭ（ランダムアクセスメモリ）等
の高速処理メモリに格納され、ＣＰＵ（中央演算装置）
がこのプログラムを参照して情報制御し、表示装置にア
プリケーション画像を表示する。

【００１１】図６は、ＧＵＩを実現するための概略図で
あり、メモリである物理デバイス２００と、ＧＵＩ３０
０と、外部操作子４００とから構成されている。ＧＵＩ
３００は、ＧＤＩ（グラフィックデバイスインターフェ
ース）３０１と、デバイスハンドラ３０２と、対話マネ
ージャ３０３と、アプリケーション３０４と、表示演算
部３０５とから構成されている。

【００１２】物理デバイス２００は、例えば、アプリケ
ーションに従った画面を生成し、表示装置に表示させる
為のビデオメモリである。

【００１３】ＧＤＩ３０１は、アプリケーションに従っ
た画面を生成するのに必要な画像コンポーネント（例え
ば、ボタン画像、スクロールバー、窓枠、デジタルカメ
ラから入力された画像等を表示装置に生成するのに必要
なプログラム）である論理デバイスと、この論理デバイ
スが記録されているメモリ領域とを関連付けるインター
フェースであり、メモリ領域にはマウス等が物理的に存
在するデバイスと、表示装置の画面上のボタン画像のよ
うに表示されているだけで実在しない仮想デバイスと呼
ばれる論理デバイスの両方のデバイスが関連付けられ
る。この画像コンポーネントは、画面上の位置が指定さ
れると、物理デバイス２００（ビデオメモリ）上に画像
データ（ビットマップデータ）として形成される。又、
ビデオメモリのアドレスと、表示装置の画面上のボタン
との位置が関連付けられているので、如何なるボタンが
外部操作子４００にクリックされたのかをデバイスハン
ドラ３０２に伝える。

【００１４】デバイスハンドラ３０２は、外部操作子４
００によって発生する入力イベントにより如何なる論理
デバイスが指定されたかを検知し、該当する論理デバイ
スを獲得し、対話マネージャ３０３に送る。

【００１５】対話マネージャ３０３は、デバイスハンド
ラ３０２が獲得した論理デバイスの情報をアプリケーシ
ョン３０４に問い合わせる。

【００１６】アプリケーション３０４は、ＧＵＩの使用
目的に従って作成された画面表示用のプログラムであ
り、表示装置に表示されるアプリケーション画像と、外
部操作子４００の入力イベントに対する動作手順が詳細
に決められており、対話マネージャ３０３から送られて
くる情報に対して応答アプリケーション画像の構成を決
定し、これを表示演算部３０５に送る。

【００１７】表示演算部３０５は、アプリケーション３
０４からの指示による応答アプリケーション画像の表示
方法を演算して決める。例えば、イベント入力前に生成
されていた画像要素の中で変化しなかったものは、その
まま表示することとし、位置変化した画像要素は演算に
より表示位置を特定し、新しい論理デバイスが必要であ
れば、メモリ領域からその論理デバイスを読み出し、前
述した物理デバイス（ビデオメモリ）２００上に応答ア
プリケーション画像として形成するようにＧＤＩ３０１
に指示する。

【００１８】外部操作子４００は、マウスやリモコン
（リモートコントローラ）等の物理的なデバイスであ
り、表示装置に表示された論理デバイスの画像であるボ
タン等をクリックすると入力イベントが発生すると共
に、画面上の如何なるボタンがクリックされかをデバイ
スハンドラ３０２を介してＧＵＩ３００に通知する。

【００１９】このような構成によるＧＵＩ装置は、表示
されている画像情報の全てを論理デバイスとして扱い、
マウス等の外部操作子４００でキーを押すなどの物理現
象が発生すると、これを入力イベントとして捉えてデバ
イスハンドラ３０２が画面に表示されている論理デバイ
スが指定されたことを検知する。これを対話マネージャ
３０３に送り、検知された論理デバイスの情報をアプリ
ケーション３０４に問い合わせ、アプリケーション３０
４がこの入力イベントに対する応答アプリケーション画
像等の構成を決定して表示演算部３０５に伝え、表示演
算部３０５は、応答アプリケーション画像の表示方法を
演算して決める。そして、メモリ領域から該当する論理
デバイスを読み出し、前述した物理デバイス２００、即
ち、ビデオメモリ上に応答アプリケーション画像として
形成するようにＧＤＩ３０１に指示し、ＧＤＩ３０１に
より物理デバイス２００（ビデオメモリ）上に応答アプ
リケーションが画像データとして生成され、これを表示
装置に読み出して表示する。

【００２０】以上、ＧＵＩについての概略説明したが、
上述したＧＵＩを構成するあらゆる要素は一括してオブ
ジェクトと呼ばれ、それぞれの識別子を所有している。
ソフトウェア記述言語で書かれたクラスに相当するもの
がこのオブジェクト（インスタンス）に対応している。

【００２１】以上の説明を参考にして本発明のマルチメ
ディア情報検索用グラフィックユーザインターフェース
装置（以下、ＭＭ情報検索ＧＵＩ装置と云う）について
図を参照しながら説明する。

【００２２】図１に示すＭＭ情報検索ＧＵＩ装置は、情
報記録媒体入力部１０と、外部操作子入力部２０と、メ
モリ部３０と、情報制御部４０と、記憶部５０と、マル
チメディア再生部（ＭＭ再生部）６０とからなり、各部
を接続する共通の通信路７０によってデータ（情報）の
入出力を行う。

【００２３】情報記録媒体入力部１０は、メモリカード
入力部１１、ＰＣカード入力部１２、ＣＤ−ＲＯＭ入力
部１３を備え、それぞれのメモリカード、ＰＣカード、
ＣＤ−ＲＯＭ等の携帯型の情報記録媒体を挿入し、これ
ら情報記録媒体に記録されたマルチメディア情報を情報
制御部４０に従い通信路７０に供給する。

【００２４】外部操作子入力部２０には、例えばジョイ
スティック、キーボード、マウス、リモコン（リモート
コントローラ）等が接続され、これらの操作により発生
した入力イベントを通信路７０に供給する。

【００２５】メモリ部３０は、ＭＭ情報検索ＧＵＩ装置
のシステム起動データを格納したＲＯＭや情報制御部４
０の指示に従って各部からの情報を高速制御処理する為
のＲＡＭから構成される。

【００２６】情報制御部４０は、情報記録媒体入力部１
０やメモリ部３０、記憶部５０からの情報の読み出しや
通信路７０のデータ制御、各部への情報処理の指示など
装置全体の制御を行う。

【００２７】記憶部５０は、プログラムである情報検索
用ＡＰ５１と、ＭＭ情報検索用ＡＰ５１以外のＧＵＩプ
ログラム５２と、アプリケーション画像生成に必要な論
理デバイス５３と、システム制御情報５４とが格納され
ている。ＭＭ情報検索用ＡＰ５１は、情報記録媒体入力
部１０から出力されたマルチメディア画像情報の画像要
素を間引きして圧縮する為の圧縮タスク５１ａと、この
圧縮されたマルチメディア画像情報を所定の数だけ集め
てページ画像情報を生成して記憶、格納するページ画像
情報生成タスク５１ｂと、外部操作子入力部２０からの
イベント入力に従って情報記録媒体、ページ画像情報、
ページ画像情報中の所望のマルチメディア情報を選択指
定する操作選択タスク５１ｃとからなる。

【００２８】ＭＭ再生部６０は、ＧＵＩ用の画像データ
（ビットマップデータ）や音声情報を格納するためのＲ
ＡＭ６１と、ＲＡＭ６１の画像データを表示する表示画
面６２を有する。

【００２９】このような構成のＭＭ情報検索用ＧＵＩ装
置により、マルチメディア情報を検索する時の動作につ
いて図３を参照して説明する。

【００３０】図３は、図１に示すＭＭ再生部６０の表示
画面６２に表示されるマルチメディア情報検索用グラフ
ィックユーザインターフェースの第１の実施の形態を示
したものである。

【００３１】図３（ａ）には、上段に情報記録媒体を選
択する為の記録媒体選択表示部１００と、中段に情報記
録媒体に記録されたマルチメディア画像情報を表示する
ページ画像表示部１１０と、下段に現在の選択状態や日
付、記録数等の各種情報をメッセージとして表示するメ
ッセージ表示部１２０と、右端に情報記録媒体に記録さ
れたマルチメディア情報を飛び飛びに選択する為のジャ
ンプバー１３０が表示されると共に、これらの表示され
ている画像情報（論理デバイス）を指定するための外部
操作子であるリモコン（リモートコントローラ）に連動
した矢印１４０が表示される。

【００３２】矢印１４０を操作するリモコンは、図２に
示すような矢印を上下左右方向に移動させるシフトボタ
ン８０と、矢印により指定した画像情報（論理デバイ
ス）を決定する決定ボタン８１を備える。

【００３３】このようなＭＭ情報検索用ＧＵＩ装置によ
り情報記録媒体の中の所望の画像を選択するときの概要
を図１を参照して図４のフロチャートを用いて説明す
る。

【００３４】まず、図１に示すＭＭ再生部６０の表示画
面６２に表示された情報記録媒体であるメモリカード、
ＰＣカード、ＣＤ−Ｒの表示子を外部操作子入力部２０
に接続されたリモコンの操作より選択指定する。この時
選択された情報記録媒体、例えばメモリカードであれ
ば、メモリカードに対応した表示子が水平方向に拡大さ
れる（ＳＴ１０）。

【００３５】選択された情報記録媒体であるメモリカー
ドからマルチメディア画像が再生読み出しされて、情報
制御部４０に従い圧縮タスク５１ａやページ画像情報生
成タスク５１ｃにより処理されたページ画像情報が生成
され、ＭＭ再生部６０に表示される（ＳＴ２０）。

【００３６】このページ画像情報中に所望の画像がある
ならば、外部操作子を用いてページ画像情報中の所望画
像を選択し、リモコン（外部操作子）で選択を決定する
と所望の画像が拡大表示される（ＳＴ３０、ＳＴ８０、
ＳＴ９０）。

【００３７】もし、所望の画像がなければ、リモコン
（外部操作子）を用いてジャンプバーを選択する（ＳＴ
４０）。

【００３８】ジャンプバー中の選択された位置に応じた
新たなページ画像情報が生成されてＭＭ再生部６０に表
示されると共に、窓枠のオブジェクトが表示され、この
窓枠中に該当ページ画像情報中の先頭画像が生成される
（ＳＴ５０）。

【００３９】窓枠中に表示された先頭画像を目安にし
て、表示されているページ画像情報中から所望の画像を
検索する（ＳＴ６０）。

【００４０】所望の画像がある場合は、外部操作子を用
いてページ画像情報中の所望画像を選択し、外部操作子
で選択を決定すると所望の画像が拡大表示される（ＳＴ
７０、ＳＴ８０、ＳＴ９０）。

【００４１】もし、所望の画像がない場合は、改めて別
の情報記録媒体を選択して、再び所望の画像の検索を始
める。（ＳＴ７０、ＳＴ１０）。

【００４２】所望の画像が拡大表示された状態から、別
の画像を探す場合は、外部操作子の決定ボタンを押す等
してリセットすると、ジャンプバー中の選択された位置
に応じた新たなページ画像情報が生成されてＭＭ再生部
６０に表示されるので、改めて所望の画像の検索を行う
（ＳＴ１００、ＳＴ５０）。

【００４３】次に、ＭＭ情報検索用ＧＵＩ装置により情
報記録媒体の中の所望の画像を選択する時の装置内の各
部の動作を図１を参照して図３を用いて説明する。

【００４４】ＭＭ情報検索用ＧＵＩ装置は、図３（ａ）
に表示されている画像情報の全てを論理デバイスとして
扱っており、図３（ｂ）のように表示画面に表示された
矢印１４０を外部操作子（物理デバイス）であるリモコ
ンのシフトボタン８０（図２参照）を操作してメモリー
カードの表示子１０１を指定し、リモコンの決定ボタン
８１によりこの指定を決定すると、メモリーカードの表
示子１０１（論理デバイス）がクリックされたことをデ
バイスハンドラが検知し、リモコンの決定ボタン８１を
押したという物理現象を入力イベントとして捉え、表示
子１０１に対応する物理デバイス２００が指定されたこ
とを検知する（図６参照）。

【００４５】シフトボタン８０の押す方向に矢印１４０
を移動させたり、決定ボタン８１を押してデバイスハン
ドラが対応する論理デバイスを検知した時、ＭＭ再生部
６０の表示画面６１における矢印１４０の移動のタイミ
ングと、ＭＭ再生部６０のＲＡＭ６１における画像デー
タ（ビットマップデータ）の読み出しタイミングと、マ
ウス（外部操作子）のイベント入力タイミングはシステ
ム制御情報５４の有する時間管理機能により管理され、
情報制御部４０により処理される。

【００４６】メモリカードの表示子１０１が矢印１４０
により決定されると、情報制御部４０の指示により記憶
部５０の当該処理に必要なプログラムがメモリ部３０の
ＲＡＭに読み出されて処理され、記憶部５０の選択操作
タスク５１ｃがメモリカードの表示子１０１の画像の水
平方向の長さを拡大表示してメモリカードが選択された
ことをユーザに表示する。

【００４７】次に、情報制御部４０はメモリカード入力
部１１に挿入されたメモリカードから格納されているマ
ルチメディア画像情報を読み出す。この場合は、記憶さ
れているマルチメディア画像情報を所定数（図３では１
６個）に分割して１つの単位として、この単位毎にマル
チメディア画像を読み出す。この時、ＭＭ情報検索用Ａ
Ｐ５１は、表示速度を速くするために圧縮タスク５１ａ
により読み出されたマルチメディア画像情報の水平及び
垂直方向の画素を間引き、ページ画像情報生成タスク５
１ｂでこの画素が間引かれた画像によるページ画像を生
成し、ＭＭ再生部６０の表示画面６２のページ画像表示
部１１０に表示する。

【００４８】このページ画像表示の処理は高速処理が要
求されるので、情報制御部４０の指示によりメモリ部３
０のＲＡＭやＭＭ再生部のＲＡＭ６１等の高速メモリを
用いて行う。尚、ページ画像情報表示部１１０に表示さ
れた個々の画像は論理デバイスとして識別子が与えら
れ、前述したＧＵＩの概要で説明したＧＤＩ（図８参
照）によりＲＡＭ等の物理デバイス２００の記憶領域に
対応づけられる。

【００４９】続いて、図３（ｃ）に示すように、ページ
画像情報部１１０に表示された１６個の画像の中で、所
望の画像Ａが矢印１４０により指定された場合、画像Ａ
の論理デバイス（対応付けられた記憶領域の格納箇所）
とメモリカード内に格納されているマルチメディア画像
情報とを関連付けた情報は前述の圧縮タスクの５１ａの
処理時にメモリ部３０のＲＡＭ内に格納されるので、情
報制御部４０がこの情報を処理してメモリカード入力部
１１に画像Ａのアドレスを通知し、メモリカード内から
当該マルチメディア画像情報、即ち画像Ａに対応する画
素が間引きされて圧縮される前のオリジナルの画像がＭ
Ｍ再生部６０の表示画面６２全体に表示される。

【００５０】ここで所望のマルチメディア画像情報が見
つからない場合には、図３（ｄ）に示すように、リモコ
ン（外部操作子）により矢印１４０を移動して、ジャン
プバー１３０を指定する。この時、ジャンプバー１３０
には指定されている部分を示す円形ボタン１３１の画像
が表示されると共に、窓枠１５０が表示される。この窓
枠１５０には当該ページ画像情報中の先頭画像Ｂが表示
される。これらのジャンプバー１３０、円形ボタン１３
１、窓枠１５０もそれぞれの識別子を持った論理デバイ
スである。

【００５１】ジャンプバー１３０に沿ってこの円形ボタ
ン１３１をリモコン（外部操作子）のシフトボタン８０
により上下移動すると、図３（ｅ）のようにこの円形ボ
タン１３１の位置に対応するメモリカード中のマルチメ
ディア画像を間引き圧縮して生成されたページ画像情報
が表示され、窓枠１５０内に対応する先頭の画像Ｃが表
示される。これらの動作は、ＭＭ情報検索用ＡＰ５１の
圧縮タスク５１ａやページ画像情報生成タスク５１ｂや
選択操作用タスク５１ｃを用いて情報制御部４０により
処理される。

【００５２】尚、メモリカードの表示子１０１にメモリ
カードから未だ読み出されていないマルチメディア画像
情報の残量がどのくらいあるかを表示する為に、残量表
示用の新たな論理デバイスを表示して、残量を通常のボ
タンの色とは違う色により表示したり、メモリの残量を
メモリカードの選択ボタンに間隔を置いて配置された円
形ボタンの色を変えて表示させても良い。

【００５３】そして、図３（ｆ）に示すように前述同様
に表示されたページ画像情報の中から所望の画像Ｄをリ
モコン（外部操作子）により指定して、決定ボタン８１
を押すと、画像Ｄのオリジナル画像がメモリカードから
読み出されてＭＭ再生部６０の表示画面６２全体に表示
される。

【００５４】尚、図３（ａ）〜（ｆ）において、メッセ
ージ表示部１８０には、現在選択中のマルチメディア情
報の日付や情報記録媒体中のマルチメディア情報の数等
の各種メッセージが表示される。

【００５５】又、このマルチメディア情報は画像に限っ
たものではなく、音声情報も検索再生することができ
る。例えば、音声情報を予め用意した音楽の題名や歌手
の写真、風景等の画像を使用して、音声情報と関連付け
てメモリカードに記憶しすれば、前述と同様の方法で検
索できるので、所望の音楽用画像が指定されたときに、
関連づけられている音声情報をメモリカードから読み出
してＭＭ再生部６０で音楽を再生出力できる。

【００５６】次に、第２の実施の形態を図２を参照し
て、図５に示すＭＭ情報検索用ＧＵＩ装置の表示画面を
参照して説明する。装置構成は図１と同様であり、表示
画面の表示形態や各部の動作も第１の実施の形態で説明
したものと同じであるのでその説明は省略する。

【００５７】図５（ａ）に示す表示画面には、上段に情
報記録媒体を選択する為の記録媒体選択表示部１６０
と、中段に情報記録媒体に記録されたマルチメディア画
像情報を表示するページ画像表示部１７０と、下段にメ
ッセージ表示部１８０と、右端にジャンプバー１９０が
表示される。

【００５８】例えば、記録媒体選択表示部１２０で情報
記録媒体を選択する時は、リモコン（図２参照）の左右
方向のシフトボタン８０により水平方向に指定点を移動
させると、表示子１６１→１６２→１６３の順に選択さ
れ、各表示子１６１、１６２、１６３の表示色が変化し
て選択したことが判別される。そして、決定ボタン８１
によって、例えばメモリーカードを選択すると、表示子
１６１の水平方向の長さを拡大表示してメモリカードが
選択されたことをユーザに表示する（図５（ｂ）参
照）。

【００５９】次に、指定点がページ画像表示部１７０に
移動して同様にリモコンの左右方向のシフトボタン８０
により、垂直又は水平方向に移動させるとページ画像表
示部の現在指定している画像の隣接する画像が順次選択
され、画面の表示状態が変化して選択したことが判る。
ここで所望の画像Ｅを選択して決定ボタン８１を押すと
メモリカードに記録されている間引きして圧縮される前
のオリジナルの画像Ｅが読み出されて表示画面全体に表
示される（図５（ｃ）参照）。

【００６０】所望の画像がない場合は、引き続いて指定
点をジャンプバー１９０に移動させ、このジャンプバー
１９０に間隔をおいて表示される円形ボタン１９１がリ
モコンのシフトボタン８０によって上下移動させるとそ
の表示状態を変化させて記憶媒体内のマルチメディア画
像情報を所定の分割数に従い飛び飛びに選択していく
（図５（ｅ））。

【００６１】そして、リモコンにより所望の画像Ｈを選
択して決定ボタン８１を押すとメモリカードから間引さ
れて圧縮される前のオリジナルの画像Ｅが読み出されて
表示画面全体に表示される（図５（ｆ））。このように
画面上に表示されている論理デバイスが選択指定される
と、色や輝度が代わることにより選択されたことが判別
できる。

【００６２】

【発明の効果】以上説明したように、最初に目次となる
ようなページ画像情報が表示され、更にジャンプバーを
選択することで情報記録媒体中に記録されている所定の
先頭画像が窓枠に表示される。従って、日付別やジャン
ル別に記録されているようなマルチメディア情報の場合
は、この先頭画像を見るだけで所望の画像を容易に判断
することができるので検索も容易になる。

【００６３】又、情報記録媒体の種類の選択、ページ画
像の選択、所望の画像の選択という順に選択を行うので
少ないステップで所望のマルチメディア情報を再生でき
るので操作性も良い。更に、表示されるページ画像は、
画素が間引かれて圧縮されているので表示が速く、情報
記録媒体中の読み出していないマルチメディア情報の残
量も表示できるので視認性も良いという利点がある。

【図面の簡単な説明】

【図１】本発明に係るマルチメディア情報検索用グラフ
ィックユーザインターフェース装置の概略構成図であ
る。

【図２】本発明に係るマルチメディア情報検索用グラフ
ィックユーザインターフェース装置の外部操作子である
リモコンのシフトボタン及び決定ボタンの拡大図であ
る。

【図３】本発明に係るマルチメディア情報検索用グラフ
ィックユーザインターフェース装置の第１の実施の形態
の表示画面でマルチメディア情報を検索する時の説明図
である。

【図４】本発明のマルチメディア情報検索用グラフィッ
クユーザインターフェース装置の表示画面に表示される
論理デバイスを選択した時の表示状態の表すフローチャ
ートである。

【図５】本発明に係るマルチメディア情報検索用グラフ
ィックユーザインターフェース装置の第２の実施の形態
の表示画面でマルチメディア情報を検索する時の説明図
である。

【図６】ＧＵＩ（グラフィックユーザインターフェー
ス）の機能を説明するためのブロック図である。

【符号の説明】

１０；情報記録媒体入力部、２０；外部操作子入力部、
３０；メモリ部、４０；情報制御部、５０；記憶部、５
１；ＭＭ情報検索用ＡＰ、５１ａ；圧縮タスク、５１
ｂ；ページ画像情報生成タスク、５１ｃ；選択操作タス
ク、５２；ＧＵＩプログラム、５３；論理デバイス、５
４；システム制御部、６０；ＭＭ再生部、６１；ＲＡ
Ｍ、６２；表示画面、７０；通信路、８０；シフトボタ
ン、８１；決定ボタン、１００；記録媒体選択表示部、
１０１；表示子、１０２；表示子、１０３；表示子、１
１０；ページ画像情報部、１２０；メッセージ表示部、
１３０；ジャンプバー、１３１；円形ボタン、１４０；
矢印、１５０；窓枠、１６０；記録媒体選択表示部、１
６１；表示子、１６２；表示子、１６３；表示子、１７
０；ページ画像情報部、１８０；メッセージ表示部、１
９０；ジャンプバー、１９１；円形ボタンボタン、１９
５；窓枠、２００；物理デバイス、３００；ＧＵＩ、３
０１；ＧＤＩ、３０２；デバイスハンドラ、３０３；対
話マネージャ、３０４；アプリケーション、３０５；表
示演算部、４００；外部操作子

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｇ０６Ｆ 3/00 ６５４ Ｇ０６Ｆ 3/00 ６５４Ｃ ６５４Ｄ (72)発明者 吉岡 圭一 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5B075 MM02 MM21 ND16 ND18 PQ02 5E501 AA04 BA03 BA05 CA04 CC06

Claims (18)

【特許請求の範囲】
1. 【請求項１】 異なる複数の情報記録媒体に記録されて
   いる複数のマルチメディア情報の中から所望のマルチメ
   ディア画像情報を検索し再生するマルチメディア情報検
   索方法であって、前記マルチメディア画像情報を圧縮
   し、該圧縮されたマルチメディア画像情報を所定の数だ
   け集合してページ画像情報として生成して表示し、前記
   異なる複数の情報記録媒体を表示画面上に視覚化する為
   の情報記録媒体表示子と、前記異なる複数の情報記録媒
   体の記憶領域を表示画面上に視覚化する為の記憶領域表
   示子と、前記表示されたページ画像情報の先頭画像を窓
   枠により囲む窓枠表示子とを表示させ、前記表示された
   ページ画像情報の中から所望のマルチメディア画像情報
   を選択するようにしたことを特徴とするマルチメディア
   情報検索方法。
2. 【請求項２】 前記マルチメディア画像情報の圧縮は、
   前記異なる複数の情報記録媒体に記録されたマルチメデ
   ィア画像情報の画像要素を間引いて圧縮することである
   請求項１に記載のマルチメディア情報検索方法。
3. 【請求項３】 前記マルチメディア情報が音声情報であ
   る場合は、該音声情報と関連づけられた情報記録媒体の
   記憶領域にあるマルチメディア画像情報を検索して音声
   情報と共に再生することを特徴とする請求項１に記載の
   マルチメディア情報検索方法。
4. 【請求項４】 前記マルチメディア画像情報は、音声情
   報の属性を示す文字情報を含んでいることを特徴とする
   請求項３に記載のマルチメディア情報検索方法。
5. 【請求項５】 前記マルチメディア画像情報の選択は、
   前記表示されたページ画像情報中のマルチメディア画像
   情報を飛び飛びに指定選択することである請求項１に記
   載のマルチメディア情報検索方法。
6. 【請求項６】 前記情報記録媒体表示子、記録領域表示
   子及び窓枠表示子の指示は、前記表示画面上に表示され
   た各表示子を外部操作子により連続に指示することであ
   る請求項１に記載のマルチメディア情報検索方法。
7. 【請求項７】 前記情報記録媒体表示子は、前記情報記
   録媒体に記録されたマルチメディア情報の容量を表示画
   面上に視覚表示できるようにしたことを特徴とする請求
   項１に記載のマルチメディア情報検索方法。
8. 【請求項８】 前記情報記録媒体表示子は、選択された
   時に表示形状を変えることを特徴とする請求項１に記載
   のマルチメディア情報検索方法。
9. 【請求項９】 前記圧縮する手法と、前記ページ画像情
   報を生成する手法と、前記選択操作する手法と、前記画
   面上への表示とがプログラムとして構成され、該プログ
   ラムが所定の記録媒体に記録されていることを特徴とす
   る請求項１に記載のマルチメディア情報検索方法。
10. 【請求項１０】 異なる複数の情報記録媒体に記録され
    た複数のマルチメディア情報の中から所望のマルチメデ
    ィア画像情報を検索し再生するマルチメディア情報検索
    用グラフィックユーザインターフェース装置であって、
    前記マルチメディア画像情報を圧縮するための圧縮手段
    と、該圧縮されたマルチメディア画像情報を所定の数だ
    け集合してページ画像情報として生成するページ画像情
    報生成手段と、前記ページ画像情報を表示することがで
    きる表示手段と、該表示されたページ画像情報の中から
    所望のマルチメディア画像情報を選択する選択操作手段
    と、前記異なる複数の情報記録媒体を表示画面上に視覚
    化する為の情報記録媒体表示子と、該異なる複数の情報
    記録媒体の記憶領域を表示画面上に視覚化する為の記憶
    領域表示子と、前記表示されたページ画像情報の先頭画
    像を窓枠により囲む窓枠表示子とを具備することを特徴
    とするマルチメディア情報検索用グラフィックユーザイ
    ンターフェース装置。
11. 【請求項１１】 前記圧縮手段は、前記異なる複数の情
    報記録媒体に記録されたマルチメディア画像情報の画像
    要素を間引いて圧縮することを特徴とする請求項１０に
    記載のマルチメディア情報検索用グラフィックユーザイ
    ンターフェース装置。
12. 【請求項１２】 前記マルチメディア情報が音声情報で
    ある場合は、該音声情報と関連づけられた情報記録媒体
    の記憶領域にあるマルチメディア画像情報を検索して音
    声情報と共に再生することを特徴とする請求項１０に記
    載のマルチメディア情報検索用グラフィックユーザイン
    ターフェース装置。
13. 【請求項１３】 前記マルチメディア画像情報は、音声
    情報の属性を示す文字情報を含んでいることを特徴とす
    る請求項１２に記載のマルチメディア情報検索用グラフ
    ィックユーザインターフェース装置。
14. 【請求項１４】 前記マルチメディア画像情報の選択
    は、前記表示手段により表示されたページ画像情報中の
    マルチメディア画像情報を飛び飛びに指定選択すること
    を特徴とする請求項１０に記載のマルチメディア情報検
    索用グラフィックユーザインターフェース装置。
15. 【請求項１５】 前記情報記録媒体表示子、記録領域表
    示子及び窓枠表示子の指示は、前記表示画面上に表示さ
    れた各表示子を外部操作子により連続に指示することで
    ある請求項１０に記載のマルチメディア情報検索用グラ
    フィックユーザインターフェース装置。
16. 【請求項１６】 前記情報記録媒体表示子は、前記情報
    記録媒体に記録されたマルチメディア情報の容量を表示
    画面上に視覚表示で０きるようにしたことを特徴とする
    請求項１０に記載のマルチメディア情報検索用グラフィ
    ックユーザインターフェース装置。
17. 【請求項１７】 前記情報記録媒体表示子は、前記選択
    操作手段により選択された時に表示形状を変えることを
    特徴とする請求項１０に記載のマルチメディア情報検索
    用グラフィックユーザインターフェース装置。
18. 【請求項１８】 前記圧縮手段と、前記ページ画像情報
    生成手段と、前記選択操作手段と、前記表示手段とがプ
    ログラムとして構成され、該プログラムが所定の記録媒
    体に記録されていることを特徴とする請求項１０に記載
    のマルチメディア情報検索用グラフィックユーザインタ
    ーフェース装置。