JPH0836519A - 情報処理方法及び装置 - Google Patents

Abstract

(57)【要約】 【目的】マルチメディアデータの再生処理のための制御
プログラムをデータファイルに付加することにより、再
生側の装置に当該マルチメディアデータに対応する再生
プログラムが無くてもそれらの再生を可能とする。 【構成】マルチメディア文書ファイル６において、マル
チメディア文書制御コアプログラム８は、マルチメディ
ア文書中の各マルチメディアデータの配置や属性等を示
すマルチメディア文書構造データ７に基づいて当該マル
チメディア文書の構造を解析し、マルチメディアデータ
制御用ライブラリサブセット９内のライブラリをリンク
してマルチメディアデータ群１０に格納された各種マル
チメディアデータを再生するための制御プログラムであ
る。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は文字，静止画，音声，動
画等、のデータを組み込んだデータファイルの生成、編
集、もしくは再生を行う情報処理方法及び装置に関す
る。

【０００２】

【従来の技術】近年、パーソナルコンピュータやワーク
ステーション、およびネットワークの急速な進歩によっ
て、従来は紙という媒体によって配布していた文書を、
磁気記録媒体や、光記録媒体、ネットワークを介して配
布し、コンピュータによって閲覧するような形態の文書
が普及しつつある。

【０００３】このような形態の文書では、文字，静止画
のみならず、動画や音声も扱えるため、表現力が飛躍的
に向上する。このようなコンピュータ上で閲覧すること
を前提とし、文字，静止画，音声，動画等を含む文書を
マルチメディア文書と称する。又、このマルチメディア
文書に組み込まれるデータをマルチメディアデータと称
する。

【０００４】従来、このようなマルチメディア文書を編
集する手法としては、ワードプロセッサ等、従来の文字
と静止画を扱う編集手段の機能を拡張し、動画データや
音声データ等のマルチメディアデータを扱えるようにし
ただけのものが主流となっている。

【０００５】

【発明が解決しようとする課題】しかしながら、上述の
従来の文書編集手段では以下のような問題があった。

【０００６】（１）マルチメディア文書を再生する際、
編集に用いたコンピュータでは再生できても他のコンピ
ュータでは再生できない場合がある。

【０００７】特に動画や音声等のデータ形式は、これら
のデータが最近になってコンピュータで扱われるように
なったこと、これらのデータを圧縮する技術が発展途上
にあること、等の理由から様々なデータ形式が次々に登
場する傾向にある。そのため、近年のＯＳ（オペレーテ
ィングシステム）ではマイクロソフト社のＭＳ−ウィン
ドウズ３．１（商標）のように、動画や音声の再生につ
いてはＯＳ側で再生手段を提供するようにし、しかも、
様々なフォーマットのデータ形式に対する再生手段をラ
イブラリとして追加できる手段を備えている。

【０００８】例えば、動画をワードプロセッサで作成中
の文書内に貼り付ける場合、ワードプロセッサは動画の
データが占有する矩形領域を提供するだけで、動画の再
生に関しては関与しない。この場合、文書の作成中は動
画のデータ形式を意識することなく文書を編集できるた
め問題が無い。しかしながら、その文書を他のコンピュ
ータで再生しようとする場合、文書中に埋めこんだデー
タ形式に対応する再生手段（ライブラリ）が再生に用い
るコンピュータに導入されていないと、当該動画像をま
ったく再生できないという問題が発生していた。また、
どの形式のデータに対する再生手段（ライブラリ）が導
入されているかを判断するためには高度な専門知識が必
要であり、マルチメディア文書の普及を阻害する要因に
もなっていた。

【０００９】（２）特定の記憶容量以内に文書を納める
のが困難である。動画や音声のデータは一般的に容量が
大きい。例えばフロッピーディスクにデータを納める場
合は、文書を編集してから、ファイル管理プログラムに
よりファイル容量を確認する。そして、データ容量がフ
ロッピーディスクの容量を越えていた場合、フロッピー
ディスクの容量に当該データを納めるために、数回にわ
たって試行錯誤で最編集を行う必要があり、非常に面倒
であった。

【００１０】（３）マルチメディア文書の再生時におい
て、動画や音声は記憶媒体からの読み出し速度が低い
と、動きがぎこちなくなったり音声がどきれとぎれにな
ってしまう。

【００１１】本発明は上記の問題に鑑みてなされたもの
であり、マルチメディア文書等のデータファイルに組み
込まれたマルチメディアデータの再生処理のための制御
プログラムを当該データファイルに付加することによ
り、再生側の装置に当該マルチメディアデータに対応す
る再生プログラムが無くてもそれらの再生を可能とする
情報処理方法及び装置を提供することを目的とする。

【００１２】又、本発明の他の目的は、データファイル
の編集中に、当該データファイルの格納時のデータ容量
（再生内容そのもののデータと該データを再生するため
に必要な制御プログラムのためのデータの容量）に基づ
く情報を表示することを可能とし、所定の容量にデータ
を納める編集を容易とする情報処理方法及び装置を提供
することにある。

【００１３】又、本発明の他の目的は、データファイル
の編集中に、当該データファイルの格納時のデータ容量
が予め設定した容量以下となるようにデータ量を削減す
るための処理を容易に実行することが可能な情報処理方
法及び装置を提供することにある。

【００１４】又、本発明の他の目的は、データファイル
の再生時に、高速にデータを読み出すことのできる記憶
媒体にマルチメディア文書のデータを格納し、該記憶媒
体よりデータを読み出して当該記憶媒体の再生を実行す
ることにより、高品位な再生を可能とする情報処理方法
及び装置を提供することにある。

【００１５】

【課題を解決するための手段】及び

【作用】上記の目的を達成するための本発明の情報処理
装置は以下の構成を備える。即ち、１つ又は複数の再生
形態のデータを含むデータファイルを生成する情報処理
装置であって、再生すべき内容を示す内容データをデー
タファイルに格納する格納手段と、前記内容データを再
生処理するための制御プログラムを前記データファイル
に付加する付加手段とを備える。

【００１６】上記の構成によれば、生成されたファイル
データには、内容データの再生時に必要な制御プログラ
ムが含まれるので、例えば再生側のコンピュータに再生
しようとする内容データに対応する再生プログラムが無
くても、当外内容データの再生が可能となる。

【００１７】又、上記の他の目的を達成する本発明の他
の構成の情報処理装置は、１つ又は複数の再生形態のデ
ータを含むデータファイルを編集する情報処理装置であ
って、再生すべき内容を示す内容データをデータファイ
ルに組み込む組込手段と、前記組込手段により組み込ま
れた全ての内容データと、各内容データを再生するため
の制御プログラムとの合計のデータ容量値である総容量
値を獲得し、これを表示する表示手段と、前記データフ
ァイルに組み込まれた内容データのいずれかを選択して
編集する編集手段と、前記編集手段による編集作業後の
総容量値を獲得して、この総容量値で前記表示手段によ
る表示を更新する更新手段とを備える。

【００１８】上記の構成によれば、データファイルの編
集中に、各内容データ及び内容データを再生するための
制御プログラムの総容量値が獲得され、これが表示され
る。更に、編集作業後には、再度総容量値が獲得され、
表示が更新される。従って、当該データファイルの格納
時のデータ容量を所定の容量に納める編集が容易とな
る。

【００１９】又、上記の構成において、好ましくは、前
記編集手段による編集の対象となっている内容データの
データ容量を表示する内容データ容量表示手段を更に備
える。編集中の内容データの容量が把握でき、データ容
量を調整するための編集作業がより容易となるからであ
る。

【００２０】又、上記の構成において、好ましくは、所
望のデータ容量値を設定する設定手段を更に備え、前記
編集手段は、前記データファイルに組み込まれた内容デ
ータのうち圧縮処理が可能なものを自動的に選択し、前
記総容量値が前記設定手段で設定されたデータ容量値に
納まるように、選択された内容データに対して圧縮処理
を施す。総容量値を容易に所望のデータ容量に納めるこ
とが可能となるからである。

【００２１】又、上記の目的を達成する本発明の情報処
理装置は１つ又は複数の再生形態を有する内容データと
これらを再生する制御プログラムを含むデータファイル
を再生する情報処理装置であって、前記データファイル
に含まれる制御プログラムを起動する起動手段と、起動
された前記制御プログラムにより前記データファイルに
含まれている内容データを再生する再生手段とを備える
ことを特徴とする。

【００２２】上記の構成によれば、データファイルに格
納されている制御プログラムにより当該データファイル
に含まれる内容データの再生処理が行われるので、再生
側の装置が内容データを再生するための制御プログラム
を有していなくても、正しく再生処理を行える。

【００２３】更に、上記の目的を達成するための本発明
の情報処理装置は、１つ又は複数の再生形態のデータを
含むデータファイルを再生する情報処理装置であって、
前記データファイルに含まれる制御プログラムを起動す
る起動手段と、起動された前記制御プログラムによる内
容データの再生時に、当該再生処理が要求する要求アク
セススピードで、処理の対象となる内容データにアクセ
スできるかを判定する判定手段と、前記判定手段によ
り、前記要求アクセススピードに対して前記内容データ
へのアクセススピードが不足すると判定された場合、前
記要求アクセススピードを満足する記憶媒体に当該内容
データを格納する格納手段と、前記制御プログラムによ
り、前記前記格納手段より前記内容データを読み出して
これを再生する再生手段とを備える。

【００２４】上記の構成によれば、データファイルに含
まれる内容データを再生するに際して、当該内容データ
を格納する記憶媒体が、再生処理により要求される要求
アクセススピードを満足しない場合、該要求アクセスス
ピードを満足する他の記憶媒体に内容データの格納を行
い、再生処理においては該記憶媒体より内容データが読
み出される。

【００２５】又、好ましくは、上記の構成において、前
記データファイルの再生に先立って、該データファイル
を所定の記憶媒体へ複写する複写手段を更に備え、前記
複写手段は、前記データファイルの内容データを再生す
るに際して不足する制御プログラムを追加的に複写す
る。

【００２６】

【実施例】以下に添付の図面を参照して本発明の好適な
実施例を説明する。

【００２７】図１は、マルチメディア文書の編集および
再生に用いる本実施例の文書編集・再生装置のハードウ
ェア構成を示した図である。尚、図１のような構成は、
専用機として構成することも可能であるし、パーソナル
コンピュータやワークステーションおよび周辺機器を用
いて構成することもできる。

【００２８】図１において、１０１はＣＰＵであり、各
種のデータ処理を行う。１０２は主メモリであり、ＣＰ
Ｕ１０１が処理するデータの一時的記憶に用いる。１０
３はＲＯＭであり、読み出し専用のプログラムやデータ
を記憶する。１０４はデータバスであり、ＣＰＵ１０１
と周辺装置とのデータの通信路である。

【００２９】１０５はデータを画面に表示させるための
表示制御部、１０６は表示制御部より送られた画面表示
データを記憶するＶＲＡＭ、１０７はＶＲＡＭ１０６に
記憶されたデータをアナログデータに変換するＤＡ変換
部、１０８は画面表示データを表示するディスプレイで
ある。以上の、表示制御部１０５、ＶＲＡＭ１０６、Ｄ
Ａ変換部１０７、ディスプレイ１０８により表示部が構
成される。

【００３０】１１０はデータを恒久的、もしくは一時的
に記憶するためのハードディスクメモリ、１０９はハー
ドディスクメモリ１１０をデータバス１０４に接続する
ためのハードディスクインタフェースである。１１２は
メモリカードであり、ハードディスクメモリ１１０と同
様にデータを恒久的、もしくは一時的に記憶する。１１
１はメモリカード１１２をデータバス１０４に接続する
ためのメモリカードインタフェース部である。１１４は
イーサネット（Ｅｔｈｅｒ Ｎｅｔ）等のネットワーク
であり、１１３はネットワーク１１４をデータバス１０
４に接続するためのネットワークインタフェース部であ
る。

【００３１】１１６はフロッピーディスク装置であり、
データを恒久的、もしくは一時的に記憶する。１１５は
フロッピーディスクインターフェース部であり、フロッ
ピーディスク装置１１６をデータバス１０４に接続す
る。又、１１８はキーボードであり、１１７はキーボー
ド１１８をＣＰＵ１０１に接続するためのキーボードイ
ンタフェース部である。更に、１２０はマウス、１１９
はマウス１２０をＣＰＵ１０１に接続するためのマウス
インタフェース部である。１２２は音声データを入力す
るためのマイク、１２３は音声データを再生するための
スピーカである。１２１はマイク１２２，スピーカ１２
３をデータバス１０４に接続するためのサウンドインタ
フェース部である。

【００３２】図２は本実施例のマルチメディア文書処理
のためのソフトウェア構成を示す図である。図２におい
て、１はマルチメディア文書編集および再生システムプ
ログラムの全体を示す。

【００３３】２００はＯＳ（オペレーティングシステ
ム）である。マルチメディア再生コアプログラム２０１
とマルチメディアデータ制御用ライブラリサブセット２
０２は、ＯＳ２００がマルチメディアのデータを再生す
るために追加されたソフトウェアである。マルチメディ
アデータ制御用ライブラリサブセット２０２には、例え
ば動画データや音声データ等を再生するための制御プロ
グラム（ライブラリ）が格納されている。又、マルチメ
ディア再生コアプログラム２０１は、指定されたデータ
を再生するのに必要なライブラリをマルチメディアデー
タ制御用ライブラリサブセット２０２より選択して追加
的にリンクし、当該データの再生処理を実行する。この
ようなライブラリのリンク手法を一般に動的なリンクと
称する。

【００３４】このようなマルチメディア機能によって拡
張されたＯＳの元で、例えばワードプロセッサで作成さ
れた文書に動画データが埋めこまれた場合の閲覧時の動
作を説明する。このようなマルチメディア文書の閲覧時
において、文書の閲覧者が動画データの再生を指示する
と、まずマルチメディアデータ再生コアプログラム２０
１が起動される。マルチメディアデータ再生コアプログ
ラム２０１は、マルチメディア制御用ライブラリサブセ
ット２０２の中から、再生を指示された動画データの再
生に必要なプログラムを動的にリンクし、該動画データ
の再生を行う。従って、ワードプロセッサ自体に動画デ
ータの再生機能がなくても動画データの再生を行うこと
ができるようになっている。

【００３５】２はマルチメディア文書編集ソフトウェア
群であり、マルチメディアデータを含む文書の編集を行
うマルチメディア文書編集プログラム３、マルチメディ
ア文書の構造を解析し、閲覧制御を行うマルチメディア
文書制御コアプログラム４、マルチメディア文書中で扱
うデータを加工したり再生したりする際に必要となる種
々のマルチメディアデータ用の制御ライブラリを集めた
マルチメディアデータ制御用ライブラリ群５から構成さ
れる。

【００３６】１１はマルチメディア素材データ群であ
り、第１テキストデータ１２から第ｉテキストデータ１
３までのｉ個の文字データ群、第１動画データ１６から
第ｊ動画データ１７までのｊ個の動画データ群、第１静
止画データ２０から第ｋ静止画データ２１までのｋ個の
静止画データ群、第１音声データ１４から第Ｌ音声デー
タ１５までのＬ個の音声データ群、第１イラストデータ
（線画データ）１８から第ｍイラストデータ１９までの
ｍ個のイラストデータ群から構成されている。これらの
素材データはマルチメディア文書の編集者が種々の手法
で収集或は生成したデータであり、様々なデータフォー
マットを含んでいる場合が多い。

【００３７】６は編集者がマルチメディア文書編集プロ
グラム３によって作成したマルチメディア文書ファイル
である。マルチメディア文書ファイル６において、マル
チメディア文書構造データ７はマルチメディア文書中の
各マルチメディアデータ（マルチメディアデータ群１０
に格納された）の配置や属性等を示すデータである。
又、マルチメディア文書制御コアプログラム８は、マル
チメディア文書構造データ７に基づいて当該マルチメデ
ィア文書の構造を解析し、その表示・再生制御を行う
（通常はマルチメディア文書制御コアプログラム４がそ
のままコピーされる）。

【００３８】マルチメディアデータ制御用ライブラリサ
ブセット９は、当該マルチメディア文書に埋めこんだデ
ータの再生に必要なライブラリを格納する。尚、これら
のライブラリは、マルチメディアデータ制御用ライブラ
リ群５から選択されたものである。マルチメディアデー
タ群１０は、マルチメディア素材データ群１１から文書
に埋めこむために選択され編集・加工されたデータであ
る。このように、本実施例のマルチメディア文書ファイ
ル６は、マルチメディアデータを再生するためのライブ
ラリと、これをリンクするマルチメディア文書制御コア
プログラム８を含むので、再生装置側に、マルチメディ
アデータを再生するためのプログラムが無くても、再生
処理を行うことが可能となる。尚、再生処理時の動作に
ついては後述する。

【００３９】図３はマルチメディア文書編集プログラム
３の構成を示した図である。図３において、３０はマル
チメディア文書編集プログラム制御部であり、マルチメ
ディア文書編集プログラム３の全体の動作を制御する。

【００４０】３１はマルチメディア文書読み込み部であ
り、ハードディスクメモリ１１０などに記憶された編集
済みのマルチメディア文書ファイル６を読み込む。３２
はマルチメディアデータ読み込み部であり、マルチメデ
ィア素材データ群１１から文書中に埋めこみたいデータ
を読み込む。

【００４１】３３はマルチメディアデータ属性解析部で
あり、読み込んだデータがマルチメディア文書データで
あればマルチメディア文書構造データ７を解析して、そ
の結果をマルチメディア文書編集情報記憶部３４に記憶
する。又、読み込んだデータがマルチメディア素材デー
タであれば、ヘッダ情報等の解析によってマルチメディ
アデータの属性情報を得て、これをマルチメディア文書
編集情報記憶部３４に記憶する。尚、マルチメディアデ
ータ属性解析部３３は、本実施例ではマルチメディア制
御コアプログラム４に含まれている。従って、該機能を
用いるときは、マルチメディア文書編集プログラム制御
部３０がマルチメディア制御コアプログラム４に該処理
を行うよう指令する。

【００４２】以上のようにして読み込まれたマルチメデ
ィア文書に含まれていたマルチメディア素材データと、
直接読み込まれたマルチメディア素材データはマルチメ
ディアデータ一時記憶部２０３に記憶される。

【００４３】マルチメディア文書編集情報記憶部３４に
は以下の情報が記憶されている。即ち、マルチメディア
文書の背景の色や絵柄を示すマルチメディア文書バック
グランド情報３５、マルチメディア文書に埋めこんだマ
ルチメディア素材データの再生や加工に必要なライブラ
リの一覧を示すマルチメディアデータ制御ライブラリテ
ーブル３６、第１ページマルチメディア文書属性情報３
８から第ｑページマルチメディア文書属性情報４８まで
のｑページのマルチメディア文書属性情報である。

【００４４】更に、１ページ分のマルチメディア文書属
性情報は、第１マルチメディアデータ属性情報３８から
第ｎマルチメディアデータ属性情報４５までのｎ個のマ
ルチメディアデータ属性情報と、関連データの表示やペ
ージ送り等文書を制御するための情報である第１マルチ
メディア文書制御情報４６から第ｐマルチメディア文書
制御情報４７までのｐ個のマルチメディア文書制御情報
で構成される。

【００４５】更に１つのマルチメディアデータ属性情報
は、マルチメディアデータの識別をするためのデータＩ
Ｄ４０、当該マルチメディアデータのフォーマット（画
像、音声等）を指定するデータ種別４１、マルチメディ
アデータの表示位置と大きさを示す表示位置矩形情報４
２、マルチメディアデータの表示方法等の手続きを示す
データ制御手続き４３、関連データのＩＤを示す関連デ
ータＩＤ４４、マルチメディアデータのマルチメディア
文書データファイル６内での位置と大きさを示すファイ
ル内位置情報３７から構成される。

【００４６】５０はマルチメディア文書表示部であり、
マルチメディア文書編集情報記憶部３４の情報を基にし
てディスプレイ１０８にマルチメディア文書を表示す
る。尚、マルチメディア文書表示部５０は実際にはマル
チメディア制御コアプログラム４に含まれるため、該機
能を用いるときはマルチメディア文書編集プログラム制
御部３０がマルチメディア制御プログラム４に該処理を
行うよう司令する。

【００４７】又、マルチメディア文書制御コアプログラ
ム４は、マルチメディアデータ属性情報３９内のデータ
種別４１に対応したライブラリをマルチメディア制御ラ
イブラリテーブル３６から決定し、マルチメディアデー
タ制御用ライブラリ群５から必要なライブラリを選択
し、これを動的にリンクすることでマルチメディアデー
タの表示若しくは再生を行う。

【００４８】マルチメディアデータ属性変更部４９はマ
ウス１２０やキーボード１１８の指示によってマルチメ
ディア文書編集情報記憶部３４の情報に変更を加え、変
更結果をマルチメディア文書表示部５０を介してディス
プレイ１０８の表示に反映させる。尚、マルチメディア
データ属性変更部４９は実際にはマルチメディア制御コ
アプログラム４に含まれるため、該機能を用いるときは
マルチメディア文書編集プログラム制御部３０がマルチ
メディア制御コアプログラム４に該処理を行うよう司令
する。

【００４９】この属性変更処理において、マルチメディ
ア文書制御コアプログラム４は、マルチメディアデータ
属性情報３９中のデータ種別４１に対応するライブラリ
をマルチメディアデータ制御ライブラリテーブル３６か
ら決定し、マルチメディア制御用ライブラリ群５から必
要なライブラリを選択し、これを動的にリンクすること
でマルチメディアデータの属性の変更を行う。

【００５０】５１はデータ容量算出部であり、マルチメ
ディア文書編集情報記憶３４の情報からマルチメディア
文書のデータ容量を算出し、この算出結果をデータ容量
表示部５２に出力する。マルチメディア文書のデータ容
量には、マルチメディア文書構造データ７（即ちマルチ
メディア文書編集情報記憶部３４の内容をファイル化し
た際の容量）と、マルチメディア文書制御コアプログラ
ム８のファイル容量と、マルチメディア文書中に用いた
マルチメディアデータ群１０のファイル容量とマルチメ
ディア群１０のデータを表示再生するために必要なマル
チメディア制御用ライブラリ群５のサブセットであるマ
ルチメディアデータ再生用ライブラリサブセット９のフ
ァイル容量が含まれる。

【００５１】また、データ容量算出部５１は、編集作業
中にマウス１２０やキーボード１１８の指示によって編
集対象として選択しているマルチメディアデータの容量
をマルチメディアデータ属性変更部４９から得て、デー
タ容量表示部５２に出力することも可能である。

【００５２】データ容量表示部５２は、表示画面上の所
定の箇所に、上述のデータ容量を表示する。５３はデー
タ容量制御部であり、編集者によってあらかじめ指示さ
れた所定の容量値と比較し、編集中のマルチメディア文
書のデータ容量が該容量値を上回った場合は警告を表示
する。また、データ容量制御部５３は、編集者の指示に
よって、マルチメディア文書が該容量を下回るようにマ
ルチメディアデータを圧縮する機能も有する。データ圧
縮が指示された場合、データ容量制限部５３はマルチメ
ディア文書制御コアプログラム４に対してデータの圧縮
を指示する。

【００５３】データの圧縮が指示されると、マルチメデ
ィア文書制御コアプログラム４はマルチメディアデータ
制御用ライブラリ群５から、編集中のマルチメディア文
書に含まれるマルチメディアデータのデータ圧縮に必要
なライブラリを動的にリンクし、マルチメディアデータ
の圧縮を行う。圧縮されたマルチメディアデータは再び
マルチメディアデータ一時記憶部２０３に記憶される。
尚、非可逆な圧縮により画質が劣化するので、必要に応
じて圧縮前の状態に戻せるように、マルチメディアデー
タ一時記憶部２０３には圧縮前のデータも保持される。
５４はマルチメディア文書書き込み部であり、編集結果
をマルチメディア文書ファイル６に書き込む。

【００５４】図４はマルチメディア文書制御コアプログ
ラム４および８の構成を示す図である。マルチメディア
文書制御コアプログラム４には、上述のマルチメディア
データ属性解析部３３、マルチメディア文書表示部５
０、マルチメディアデータ属性変更部４９が含まれてい
る。更に、マルチメディア文書制御コアプログラム４
は、マルチメディア文書構造データアドレス記憶部７
３、一時記憶媒体検索部７３６、マルチメディアデータ
コピー部７３９から構成され、一時記憶媒体検索部７３
６は記憶媒体読み書き速度測定部７３８、閾値設定部７
３９から構成される。これらの構成の機能については後
述する。

【００５５】図５はマルチメディアデータ制御用ライブ
ラリ群５の構成を示す図である。マルチメディアデータ
制御ライブラリ群５には、各種のデータフォーマットを
制御するための制御ライブラリが格納されている。例え
ば、図５では、第１静止画フォーマット制御用ライブラ
リ６０からｒ静止画フォーマット制御用ライブラリ６１
までのｒ個の静止画フォーマットの静止画データを制御
するライブラリ群と、第１動画フォーマット制御用ライ
ブラリ６２から第ｓ動画フォーマット表示部６３までの
ｓ個の動画フォーマットの動画を制御するライブラリ群
と、第１音声フォーマット制御ライブラリ６４から第ｔ
音声フォーマット制御ライブラリ６５までのｔ個の音声
フォーマットの音声を制御するライブラリ群と、第１イ
ラストフォーマット制御用ライブラリ６６から第ｕイラ
ストフォーマット制御用ライブラリ６７までのｕ個のイ
ラストフォーマットのイラストを制御するライブラリか
ら構成される。

【００５６】図６は、１つのマルチメディアデータ制御
ライブラリの構成を示した図である。６８はマルチメデ
ィアデータ制御ライブラリ全体を示す。マルチメディア
データ制御用ライブラリ６８は、マルチメディアデータ
の表示を行うマルチメディアデータ表示部６９、動画や
音声データの場合に所定のシークエンスで再生を行うマ
ルチメディアデータ再生部７０、データを圧縮してファ
イルに格納する際に用いるマルチメディアデータ圧縮部
７１、ファイルから圧縮されたデータを伸長して取り出
す際のマルチメディア伸張部７２等のデータ部を備えて
いる。

【００５７】以下に本実施例のマルチメディア文書編集
装置の動作を、表示画面を表す図面を参照して説明す
る。

【００５８】図７はマルチメディア文書編集プログラム
３においてマルチメディア文書のファイル容量が所定の
容量を越えた場合に警告表示させるための設定を行う際
の画面表示例を示している。

【００５９】図７において、８０はマルチメディア文書
編集プログラム３のウィンドウである。８１はマウス１
２０によって画面の特定箇所を指示するためのマウスカ
ーソルである。マウス１２０はボタンを備えており、該
ボタンを利用者が押して放す動作を一時的にクリックす
ると称し、所定間隔以内に２回クリックする動作をダブ
ルクリックすると称する。また、特定位置を指示し、そ
こでマウスのボタンを押さえたままマウスを移動させる
動作をドラッグするという。

【００６０】８２は主としてファイルの操作に関連した
コマンドを含むファイルメニュー、８３は主として特定
のデータに対する編集走査に関連したコマンドを内蔵し
た編集メニュー、８４は主として設定に関連したコマン
ドを含む設定メニューである。マウスカーソル８１で設
定メニュー８４をクリックすると、設定ダイアログボッ
クス８５が表示される。８６はデータ容量制限値入力フ
ィールドであり、直接キーボード１１８からマルチメデ
ィア文書のデータ容量の所望の制限値を入力することが
できる。

【００６１】８７はデータ容量計算オプション設定ボタ
ン領域である。ボタン８８とボタン８９はどちらか一方
しか選択できないようになっており、ボタン８８を選択
するとデータ容量はマルチメディアコアプログラム８と
マルチメディアデータ再生用ライブラリサブセット９の
容量を含んで計算されるが、ボタン８８を選択するとマ
ルチメディアコアプログラム８とマルチメディアデータ
再生用ライブラリサブセット９の容量を含まずに計算さ
れる。９０は了承ボタンであり了承ボタン９０をクリッ
クすると設定が有効になり、設定ダイアログ８５はとな
る。

【００６２】図８はマルチメディア文書編集プログラム
３によってマルチメディア文書を新規作成する際の画面
表示例を示した図である。図８においてファイルメニュ
ー９２をクリックするとファイル関連のコマンドの項目
の一覧が表示される。９１は新規作成メニュー項目であ
り、図８は新規作成メニュー項目９１を選択した後の画
面を表わしている。このため、、名称が未設定（Ｕｎｔ
ｉｔｌｅｄ）のマルチメディア文書編集ウィンドウ２０
４が表示されている。ここで、マルチメディア文書ウィ
ンドウ２０４内は、デフォルトの背景色で塗り潰されて
おり、該背景情報はマルチメディア文書バックグランド
情報３５に記憶されている。

【００６３】９２はマルチメディア文書読み込みメニュ
ー項目である。９３は、編集中のマルチメディア文書に
含ませたいマルチメディア素材データをマルチメディア
データ群１０から選択するためのマルチメディアデータ
読み込みメニュー項目である。９４は図６の説明で設定
したデータ容量の設定値以内に収まるようにマルチメデ
ィア素材データを圧縮するための圧縮メニュー項目であ
る。９５は編集したマルチメディア文書を名前を変えて
ファイルに保存するためのメニュー項目である。９６は
編集したマルチメディア文書を同一のファイル名で保存
する保存メニュー項目である。９７はプログラムを終了
するための終了メニュー項目である。

【００６４】９８は、データ容量算出部５１によて算出
された当該マルチメディア文書のデータ容量の合計値を
表示するトータルデータ容量表示である。新規作成時に
はマルチメディアデータ群１０とマルチメディアデータ
再生用ライブラリサブセット９は空なのでマルチメディ
ア文書制御コアプログラム８とマルチメディア文書構造
データ７の合計容量のみが表示される。尚、このデータ
容量表示は、前述の如くデータ容量表示部５２によって
実行される。

【００６５】図９は読み込むマルチメディア素材データ
を指定する際の表示画面例である。１３０は読み込みマ
ルチメディアデータ選択ダイアログボックスである。こ
のダイアログボックス１３０は、図８においてマルチメ
ディアデータ読み込みメニュー項目をクリックすること
で表示される。

【００６６】マルチメディアデータ選択ダイアログボッ
クス１３０において、１３１はディスクドライブを指定
するディスクドライブ指定リスト、１３２はディレクト
リを指定するディレクトリ指定リスト、１３３はマルチ
メディアデータのフォーマットを指定するフォーマット
指定リスト、１３４はファイル名を指定するファイル名
指定リストである。ファイル名指定リスト１３４で所望
のファイルが指定されると、指定されたファイル名がフ
ァイル名入力フィールド１３５に表示される。この状態
で読み込みボタン１３６をクリックすると、マルチメデ
ィアデータ選択ダイアログ１３０は非表示となり、指定
マルチメディア素材データファイルがマルチメディア素
材データ読み込み部３２によって読み込まれる。

【００６７】指定されたマルチメディア素材データの読
み込み時には、図３で説明したように、マルチメディア
データ属性解析部３３がマルチメディアデータの属性を
ヘッダ情報等から解析しマルチメディア文書編集情報記
憶部３４に記憶する。その際、マルチメディアデータ属
性情報解析部３３が、一意に１つのマルチメディア文書
内のマルチメディア素材データを特定できるような識別
番号を与え、この識別番号はデータＩＤ４０に格納され
る。

【００６８】また、マルチメディアデータ制御ライブラ
リテーブル３６には、読み込んだデータの表示や編集に
必要なマルチメディアデータ制御ライブラリ名がエント
リ番号とともに記憶される。データ制御手続き４３に
は、読み込んだマルチメディアデータの表示や編集に必
要なライブラリの一覧と、それらのライブラリが含まれ
るマルチメディアデータ制御ライブラリのマルチメディ
ア制御ライブラリテーブル３６内でのエントリ番号が記
憶される。

【００６９】以上のような操作により、指定されたマル
チメディア素材データが当該マルチメディア文書に組み
込まれ、図１０のように表示される。尚、図１０では静
止画が読み込まれ、表示されている例が示されている。
次に、図１０及び図１１を用いて、表示されたデータの
位置や領域の大きさの変更方法を説明する。

【００７０】図１０はマルチメディアデータ属性変更部
４９が、読み込んだマルチメディア素材データの表示範
囲の変更をする際に、マルチメディア文書表示部５０を
介して表示する表示画面例を示している。１４０は読み
込んだ静止画データである。１４１は静止画データの外
枠である。静止画データ１４０上の任意の点をクリック
すると外枠１４１は太線表示になり、静止画データ１４
０が編集対象として選択されていることが示される。そ
の時点で、選択されたデータすなわち静止画データ１４
０のデータ容量がデータ容量算出部５１によって算出さ
れ、データ容量表示部５２によって選択データ容量表示
領域９９に表示される。

【００７１】マウスカーソル８１は静止画データの外枠
１４１の上にくると図示の如く両端矢印の形状となり、
その状態のままドラッグすることで枠１４１の大きさを
変更することができる。このとき、外枠１４１の大きさ
が変更される度にデータ容量算出部５１はデータ容量を
計算し、選択データ容量表示領域９９に表示する。そし
て、外枠１４１に囲まれた部分のデータが最終的にマル
チメディア文書のデータとして保存される。また、トー
タルデータ容量表示領域９８には、以上のようにして決
定された大きさの静止画データ１４０のデータ容量と、
該静止画データ１４０の表示に必要なマルチメディアデ
ータ制御ライブラリサブセット９の容量が加算されて、
表示される。

【００７２】図１１はマルチメディアデータ属性変更部
４９が、読み込んだマルチメディア素材データの表示位
置の変更をする際に、マルチメディア文書表示部５０を
介して表示される表示画面例を示している。ここで静止
画データ１４０の表示範囲は図８にて説明した操作によ
ってその領域が縮小され、選択データ容量表示９９の値
も図１０より小さな値となっている。

【００７３】さて、マウスカーソル８１の形状は枠１４
１の内側では図１１のような形状に変化する。この状態
でドラッグ操作することで静止画データ１４０の表示位
置を変更することができる。静止画データ１４０の表示
位置と表示範囲を示す座標Ｐ１（ｘ１，ｙ１）とＰ２
（ｘ２，ｙ２）はマルチメディアデータ属性変更部４９
によって逐次静止画データ１４０の表示位置矩形情報４
２に反映される。

【００７４】次に、図１２及び図１３を用いて文字を入
力する場合を説明する。図１２と図１３は、マルチメデ
ィアデータ属性変更部４９が、文字の入力時にマルチメ
ディア文書表示部５０を介して表示する表示画面例を示
している。

【００７５】図１２において、１４２は文字入力ツール
アイコンである。この文字入力ツールアイコン１４２を
クリックすると、マウスカーソルが図１３に示したよう
な形状となり、マルチメディア文書ウィンドウ２４への
文字列の入力が可能になる。図１３では文字列１４４が
キーボード１１８より入力された状態を表わしている。
その際、静止画データ１４０は自動的に非選択状態にな
り、外枠１４１は細線になる。文字列１４４等のように
マルチメディアデータが直接入力された場合は、マルチ
メディアデータ属性変更部４９によってマルチメディア
データ属性情報が新規に作成される。例えば、当該文字
列のデータが第ｎ番目に組み込まれたマルチメディアデ
ータであれば、第ｎマルチメディアデータ属性情報４５
が新規に作成されることになる。

【００７６】図１４はさらに動画データ１４５を読み込
んだ際の表示画面例である。ここでトータルのデータ容
量がデータ容量の設定値を越えたことを検知しデータ容
量制御部５３は警告表示としてトータルデータ容量表示
領域９８の表示を反転表示する等して変化させる。本例
では、動画データ１４５のデータ容量は１．０ＭＢであ
り、この動画データ１４５を再生するためのライブラリ
等のデータ容量が０．２ＭＢとなっている。そしてこれ
らのデータ容量が図１３の時点の総データ容量０．４Ｍ
Ｂに加えられて、１．６ＭＢとなっている。

【００７７】図１５はデータ容量の設定値以下にデータ
容量を削減するためにデータ圧縮を行わせるための操作
を示している。図１５のように圧縮メニュー項目９４を
クリックするとデータ容量制御部５３は圧縮可能なデー
タを第１マルチメディアデータ属性情報３８に代表され
るすべてのマルチメディアデータ属性情報から検索し、
マルチメディア文書制御コアプログラム４に対し該当マ
ルチメディアデータを圧縮するよう指示する。マルチメ
ディア文書制御コアプログラム４はマルチメディア制御
ライブラリテーブル３６から必要なマルチメディアデー
タ制御ライブラリを検索する。そして、検索されたマル
チメディアデータ制御ライブラリ（６８）を動的にリン
クすることでデータ圧縮部７１を取得し、マルチメディ
ア文書のデータ容量がデータ容量の設定値以下になるよ
う該当圧縮データを圧縮する。圧縮されたデータはマル
チメディアデータ一時記憶部２０３に記憶されるが、圧
縮前のデータもそのままマルチメディアデータ一時記憶
部２０３に保存される。

【００７８】図１６はデータ圧縮中の表示を示す図であ
り、圧縮中であることを示す圧縮進捗表示１４６が表示
される。

【００７９】図１７は圧縮後の表示画面を示した図であ
る。圧縮の結果トータルのデータ容量がトータルデータ
容量表示９８に示されるように、設定値以下になったた
めデータ容量制御部５３は警告のための表示（反転表示
等）を解消する。圧縮され、マルチメディアデータ一時
記憶部２０３に記憶されたデータは、マルチメディア制
御用ライブラリ群５に含まれる対応するマルチメディア
データ制御用ライブラリ６８のデータ伸長部７２によっ
て伸長され、マルチメディアデータ表示部６９によって
表示される。１４７は静止画データ１４０を過度に圧縮
したために生じるブロック歪みである。

【００８０】図１８はデータが圧縮された状態から圧縮
される前の状態に復元するための操作を示す図である。
編集メニュー８３をクリックすると、編集を施したマル
チメディア文書を１つ前のステップの状態に戻すための
復元メニュー項目１４８、選択したデータを削除しＯＳ
が提供する一般にクリップボードと呼ばれる共有データ
領域に移動するための切り取りメニュー項目１４９、選
択したデータをクリップボードに複製するための複製メ
ニュー項目１５０、クリップボード領域のデータをマル
チメディア文書に読み込むための張り付けメニュー項目
１５１、選択したデータを削除するための削除メニュー
項目１５２が表示される。ここで、復元メニュー項目１
４８をクリックすると、マルチメディアデータ一時記憶
部２０３に記憶された圧縮前のデータに復元される。

【００８１】図１９は復元後の画面表示である。ブロッ
ク歪み１４７は解消されるが、データ容量も元に戻るた
め、トータルデータ容量表示領域９８の表示が再び反転
表示になる。

【００８２】図２０〜図２３は動画データから不要な領
域を削除するための編集手順を説明する図である。図２
０において、１５４は動画データ１４５を逆転再生する
ための逆転再生ボタン、１５６は再生を止め、画像を静
止させる停止ボタン、１５７は動画データを再生するた
めの再生ボタン、１５８は動画データ中の再生開始位置
を指定する再生位置指定スライドバーである。

【００８３】まず、再生位置指定スライドバー１５８を
マウスカーソルでドラッグすることによって不要な領域
の最初の画面を指定する。次に、キーボード１１８の所
定のキー（例としてはシフトキー）を押しながら再生位
置指定スライドバー１５８を不要な領域の最後の画面が
あらわれるまでドラッグする。この時点で画面表示は図
２１のようになり、動画データ中、不要な領域として選
択したデータ範囲を示す選択データ範囲表示１５９が識
別可能に表示されるとともに、選択した範囲のデータ容
量をデータ容量算出部５１が算出し、選択データ容量表
示９９に表示する。

【００８４】次に、図２２のような編集メニュー８３か
ら削除メニュー項目１５２をクリックすると、選択した
不要なデータ領域が動画データ１４５から削除される。
そして、図２３の如く削除された領域の１フレーム前の
データが動画データ１４５の表示領域に表示される。ま
た、トータルデータ容量が設定容量以下になったためト
ータルデータ容量表示９８の反転状態が解除される。

【００８５】以上のように編集されたマルチメディア文
書は、マルチメディア文書書き込み部５４によってマル
チメディア文書ファイル６として保存される。ここで、
マルチメディア文書編集情報記憶部３４に記憶されたマ
ルチメディア文書の構造を示すデータはマルチメディア
文書構造データ７に保存される。マルチメディア文書制
御コアプログラム４のマルチメディア文書構造データア
ドレス記憶部７３にはマルチメディア文書構造データ７
へのオフセット（マルチメディア文書構造データ７を別
ファイルとする場合はファイル名）が記録される。その
後に、マルチメディア文書制御コアプログラム８として
マルチメディア文書ファイル６に保存される。

【００８６】続いて、マルチメディアデータ制御ライブ
ラリ群５からマルチメディア文書の再生に必要なライブ
ラリがマルチメディアデータ制御ライブラリテーブル３
６の内容に基づいて選択され、マルチメディアデータ再
生用ライブラリサブセット９に書き込まれる。そして、
マルチメディアデータ一時記憶部２０３から最終的に用
いられる加工済みのマルチメディアデータがマルチメデ
ィアデータ群１０に書き込まれる。

【００８７】図２４は、本実施例のデータ容量表示手順
を表すフローチャートである。まず、ステップＳ５０１
で、背景用データ（マルチメディア文書バックグランド
情報３４に基づいて算出される）、マルチメディアデー
タ、文書制御コアプログラムの容量をデータ容量算出部
５１により算出し、そのトータル容量をトータルデータ
容量表示領域９８に表示する。ステップＳ５０２では、
組み込むべきマルチメディア素材データを指定すること
により、データの組込みを行う（図８、図９）。そし
て、ステップＳ５０３において、ステップＳ５０２で組
み込まれたデータのデータ容量を表示する。また、ここ
で、現在トータルデータ容量表示領域９８に表示されて
いるデータ容量に、新たに組み込まれたデータのデータ
容量を加算する。

【００８８】次に、ステップＳ５０４において、組み込
まれたデータに対して新たな制御用ライブラリが必要か
否かを判断する。新たにライブラリが必要であればステ
ップＳ５０５へ進み、組み込むべきライブラリの容量を
現在までのデータのトータル容量に加算し、これをトー
タル容量として表示する。一方、ステップＳ５０２で組
み込まれたデータが、既に組み込まれたライブラリで表
示・再生可能なものであれば、そのままステップＳ５０
６へ進む。

【００８９】ステップＳ５０６において、現在のトータ
ルデータ容量が予め設定したデータ量を越えている場合
はステップＳ５０７へ進み、トータルデータ容量表示領
域９８の表示を変化させて、警告を行う。一方、トータ
ルデータ容量が予め設定したデータ量を越えていなけれ
ば、ステップＳ５０８へ進み、通常通りにトータルデー
タ容量を表示する。

【００９０】又、図２５は、本実施例の編集処理におけ
るデータ量変更時のデータ容量表示手順を説明するフロ
ーチャートである。本処理は、上述したような、表示領
域の大きさの変更（図１０、図１１）、圧縮処理（図１
５〜図１７）、動画データの部分的な削除（図２０〜図
２３）等、データ容量が変化する編集処理を行った際
の、データ容量表示手順を表わしている。

【００９１】まず、ステップＳ５０９において、編集対
象とする組込みデータを指定する。そしてステップＳ５
１０において、選択されている組込みデータの容量を選
択データ容量表示領域９９に表示する。ステップＳ５１
１において、指定した組込みデータの編集を行う。本例
においては、組込みデータのデータ量が変化する編集操
作として、上述の「表示領域の大きさの変更」、「圧縮
処理」、「動画データの部分的削除」等がある。

【００９２】ステップＳ５１２では、ステップＳ５１１
において編集された組込みデータのデータ容量を再度計
算し、選択データ容量表示領域９９に表示する。又、こ
のデータ容量の変化によってトータルのデータ容量も変
化するので、トータルデータ容量を再度計算してトータ
ルデータ容量表示領域９８に表示する。

【００９３】ステップＳ５１３では、ステップＳ５１２
で新たに算出されたトータルデータ容量が予め設定した
値を越えているか否かを判定し、越えていればステップ
Ｓ５１４で警告表示を行う。又、トータルデータ容量が
予め設定された値を越えていなければステップＳ５１５
へ進み、警告表示を解除する。

【００９４】以上のようにして、マルチメディア文書の
生成、ファイルへの保存が実行される。次に、上述のよ
うにして保存されたマルチメディア文書ファイルの再生
について説明する。

【００９５】再生時には、まず、マルチメディア文書フ
ァイル中のマルチメディア文書制御コアプログラム８が
起動される。そして、マルチメディア文書構造データア
ドレス記憶部７３に記憶された情報よりマルチメディア
文書構造データ７を読み込む。マルチメディア属性解析
部３３が文書構造データ７に含まれる属性情報を解析
し、この解析結果に基づいてマルチメディア文書表示部
５０が表示に必要なライブラリをマルチメディアデータ
再生用ライブラリサブセット９から動的にリンクすると
ともに、マルチメディアデータをマルチメディアデータ
群１０からデータを読み出して、マルチメディア文書を
表示する。

【００９６】図２６は、マルチメディア文書を再生側コ
ンピュータ上に保存する前の状態を示す図であり、３０
０は第１マルチメディア文書データを示す。又、３０１
は第１マルチメディア文書データ３００に含まれる第１
マルチメディア文書制御コアプログラム、３０２はマル
チメディアデータ制御用ライブラリサブセットである。
更に、３０３は第１マルチメディア文書データ３００に
含まれるマルチメディアデータ群であり、第１マルチメ
ディア文書データ３００では例として第１静止画フォー
マットデータ３０４のみを含む。したがって第１マルチ
メディア文書データ３００に含まれるマルチメディアデ
ータ制御用ライブラリサブセット３０２は第１静止画フ
ォーマット表示部６０のみを含んでいる。

【００９７】又、図２６の再生側コンピュータのデータ
保存領域のディレクトリにおいて、３０５は再生側のコ
ンピュータに指定されるマルチメディアデータ制御ライ
ブラリ用ディレクトリであり、マルチメディアデータ制
御ライブラリを保存する。そして、３０６は再生側のコ
ンピュータに指定されるマルチメディアデータ用ディレ
クトリである。これらのディレクトリは特定のディレク
トリに固定する必要はないが、説明を簡単にするために
設定するものである。ただしマルチメディアデータ制御
ライブラリ用ディレクトリ３０５はマルチメディア文書
制御コアプログラムから検索可能なパス上にあることが
必要である。

【００９８】図２７は第１マルチメディア文書データ３
００を再生側コンピュータに保存する際のデータのコピ
ー動作を説明する図である。マルチメディア文書制御コ
アプログラム８に含まれるマルチメディアデータコピー
部７３９は、マルチメディア文書制御コアプログラム８
と第１静止画フォーマット表示部６０が検索パス上に存
在しないことを検出し、マルチメディアデータ制御ライ
ブラリ用ディレクトリ３０５にマルチメディア文書制御
コアプログラム８と第１静止画フォーマット表示部６０
をコピーする。また、マルチメディアデータコピー部７
３９は、第１マルチメディア文書データ３００の第１マ
ルチメディア文書構造データ３０１と第１静止画フォー
マットデータ３０４をマルチメディアデータ用ディレク
トリ３０６にコピーする。

【００９９】図２８と図２９は第１マルチメディア文書
データ３００を保存したコンピュータにさらに第２マル
チメディア文書データ３０７を保存する際のコピー動作
を説明する図であり、図２８はその保存前、図２９はそ
の保存後の状態を示している。図２８において、３０７
は第２マルチメディア文書データを示す。第２マルチメ
ディア文書データ３０７において、３０８は第２マルチ
メディア文書構造データ、３０９はマルチメディアデー
タ制御用ライブラリサブセットである。又、６０は第１
静止画フォーマット表示部、３１０は第３動画フォーマ
ット表示部、３１１は第４音声フォーマット再生部であ
る。３１２は第２マルチメディア文書データ３０７に含
まれるマルチメディアデータ群であり、３１３は第１静
止画フォーマットデータ、３１４は第３動画フォーマッ
トデータ、３１５は第４音声フォーマットデータであ
る。

【０１００】マルチメディアデータコピー部７３９は検
索パス上にマルチメディア文書制御コアプログラム８と
第１静止画フォーマット表示部３１０が存在することを
検出する。従って、この場合は、第２マルチメディア文
書データ３０７に含まれるマルチメディアデータの再生
に不足する第３動画フォーマット表示部３１０と第４音
声フォーマット再生部３１１のみをマルチメディア文書
データとしてマルチメディアデータ制御ライブラリ用デ
ィレクトリ３０５にコピーする。又、マルチメディアデ
ータディレクトリ３０６へは、第２マルチメディア文書
構造データ３０８と第１静止画フォーマットデータ３１
３と第３動画フォーマットデータ３１４と第４音声フォ
ーマットデータ３１５をコピーする。

【０１０１】以上の動作をフローチャートを用いて更に
説明する。図３０は、以上説明したマルチメディアデー
タの保存動作を示すフローチャートである。

【０１０２】ステップＳ７０１において、マルチメディ
ア文書制御コアプログラム８のコピー部７３９は、マル
チメディア文書制御コアプログラムが検索パス上に存在
するかどうか探索する。この結果、存在しなければ、ス
テップＳ７０９へ進み、マルチメディア制御コアプログ
ラムを検索パス上の所定のディレクトリにコピーし、ス
テップＳ７０２へ進む。一方、マルチメディア制御コア
プログラム８が既に存在すればそのままステップＳ７０
２に進む。

【０１０３】ステップＳ７０２では、マルチメディア文
書ファイルのマルチメディアデータ制御用ライブラリサ
ブセット９にあって、検索パス上に存在しないライブラ
リがあるかどうかを判定する。このようなライブラリが
あればステップＳ７１０へ進み、不足しているライブラ
リを検索パス上の所定のディレクトリにコピーし、ステ
ップＳ７０３へ進む。一方、マルチメディアデータ制御
用ライブラリサブセット９の全てのライブラリが検索パ
ス上に存在する場合はそのままステップＳ７０３へ進
む。

【０１０４】ステップＳ７０３では、マルチメディア文
書構造データ７およびマルチメディアデータ群１０の各
データを指定ディレクトリにコピーする。このようにし
て、マルチメディア文書ファイルの再生側装置への保存
動作を終了する。

【０１０５】次に、マルチメディア文書データの再生処
理について説明する。図３１は本実施例におけるマルチ
メディア文書データの再生処理を説明するフローチャー
トである。

【０１０６】まず、ステップＳ７１１でマルチメディア
文書の表示が指示されるとマルチメディア文書制御コア
プログラム８が起動する。ステップＳ７１５においてマ
ルチメディア文書制御コアプログラム８は、マルチメデ
ィアデータ属性解析部３３によって、文書に含まれるマ
ルチメディアデータの属性を解析し、当該マルチメディ
ア文書データに含まれているデータのうち、最も高い読
み出し速度を要求するデータの再生に要求される最低限
の読み出し速度を閾値記憶部７３９に設定する。例えば
動画データあればデータ圧縮率とフレームからコマ落ち
が発生しない最低限の読み出し速度を決定し、これを閾
値記憶部７３９に設定する。尚、該閾値は、マルチメデ
ィア文書の作成時に予め設定しておいてもよい。

【０１０７】ステップＳ７１２において、マルチメディ
ア文書制御コアプログラム８は、記憶媒体読み書き速度
測定部７３７を用いて、現在データが記憶されている記
録媒体の読みだし速度を測定する。記録媒体の読み書き
の速度の測定は、例えば所定の長さのデータの読み書き
を行い、その所要時間を測定することによって実現でき
る。

【０１０８】ステップＳ７１３において、マルチメディ
ア制御コアプログラム８の比較部７３８は、閾値記憶部
７３９に記憶されている読み出し速度と、記録媒体読み
書き速度測定部７３７によって測定された速度とを比較
する。測定された速度が閾値以上であればステップＳ７
１４に進み、必要なライブラリを動的にリンクする。そ
して、ステップＳ７１６においてマルチメディアデータ
を読み込み、ステップＳ７１７においてマルチメディア
文書データを表示する。

【０１０９】一方、ステップＳ７１３において、測定さ
れた読み書き速度が閾値以下であった場合は、ステップ
Ｓ７１８に進む。ステップＳ７１８において、マルチメ
ディア文書制御コアプログラム８は、一時記憶媒体検索
部７３６を用いてマルチメディアデータを再生するため
の一時記憶媒体として最適な記憶媒体を検索する。尚、
ステップＳ７１８における適切な記憶媒体の検索の手順
は、図３２を参照して後述する。

【０１１０】次にステップＳ７１９で図３３に示すよう
なダイアログボックス６００を表示し、利用者の判断を
仰ぐ。図３３は再生条件を選択するダイアログボックス
６００の表示例を示す図である。図３３において、６０
０はダイアログボックスを示す。６０１は一時記憶媒体
にデータをコピーしてからマルチメディア文書をコピー
してから再生するためのオプションを設定するためのラ
ジオボタン、６０２は高速媒体にコピーせず、画質や音
質が悪くても現状の記録媒体からそのまま再生するため
のオプションを設定するためのラジオボタンである。６
０３はオプションの選択を確定する際の承認ボタンであ
る。

【０１１１】ステップＳ７２１において、「コピーして
表示」を選択しなかった場合（即ち、ダイアログボック
ス６００のラジオボタン６０２を選択した場合）は、ス
テップＳ７１４、Ｓ７１６、Ｓ７１７が実行され、あら
かじめデータが記憶された記録媒体からの再生が行われ
る。

【０１１２】一方、コピーして表示を選択した場合は、
ステップＳ７２１よりステップＳ７２２へ進み、マルチ
メディアデータをステップＳ７１８で検索された一時記
憶媒体に一時ファイルとしてコピーする。そして、ステ
ップＳ７２３で、必要なライブラリを動的にリンクす
る。ステップＳ７２５では、一時記憶媒体に複写された
一時ファイルからマルチメディアデータが読み込まれ、
ステップＳ７２６でマルチメディア文書が表示される。
そして、ステップＳ７２７では、一時記憶媒体で作られ
た一時ファイルが消去される。

【０１１３】尚、ステップＳ７２２では、全てのマルチ
メディアデータをコピーせず、高速な読み出し速度が要
求されるデータのみを自動的に選択して、コピーするよ
うにすれば、再生が開始されるまでの時間を短くするこ
とができる。

【０１１４】次に、上述のステップＳ７１８における、
一時記憶媒体の検索手順を説明する。図３２は図３１の
ステップＳ７１８の一時記憶用媒体検索の動作を示すフ
ローチャートである。

【０１１５】ステップＳ７２８で一時記憶媒体の検索が
開始されるとステップＳ７２９で一時記憶媒体検索部７
３６は使用可能なすべての記憶媒体の空き容量を検出す
る。そして、ステップＳ７３０で、マルチメディアデー
タの格納に必要な空き容量が確保できる媒体を抽出す
る。ステップＳ７３１で記憶媒体読み書き測定部７３８
によって、抽出された媒体の読み出し速度を測定し、ス
テップＳ７３２によって読みだし速度が閾値記憶部７３
９に記憶されている速度（閾値）以上の記憶媒体を抽出
する。

【０１１６】次にステップＳ７３３において、記憶媒体
読み書き速度測定部７３７を用いて、ステップＳ７３２
で抽出された各記憶媒体の書き込み速度を測定する。そ
して、ステップＳ７３４において、書き込み速度が最も
高い記憶媒体をマルチメディアデータ再生時の一時ファ
イル作成用の媒体に選択する。

【０１１７】以上のように、記憶媒体の空き容量とアク
セススピードに基づいて、適切な記憶媒体を選択するこ
とにより、高品位な再生を保証することができる。

【０１１８】以上説明したように、本実施例のマルチメ
ディア文書編集・再生装置によれば、編集した文書が含
むマルチメディアデータの再生・表示に必要なライブラ
リがライブラリ群から選択され、文書ファイルに自動的
に付加される。このため、再生側のコンピュータに当該
マルチメディアデータのフォーマットに対応するライブ
ラリがなくても表示・再生が可能となる。

【０１１９】また、本実施例によれば、マルチメディア
文書中にあらわれるフォーマットのマルチメディアデー
タの表示再生に必要なライブラリを選択して付加するの
で、ファイル容量の増大を防ぐ効果もある。

【０１２０】更に、本実施例によれば、マルチメディア
文書の編集中に、組み込まれたデータ及び該データを再
生するのに必要なライブラリ等の容量に関する情報を表
示するので、編集中のデータの容量を容易に把握でき
る。更に、編集中において、予め設定したデータ容量を
越えた場合は警告を表示し、該設定した容量以下となる
ようデータを編集する手段を備えたので、文書のデータ
容量を所定のデータ容量に納まるように編集する作業が
効率化される。

【０１２１】更に、文書に含まれるマルチメディアデー
タのうち最も高い読みだし速度が記憶媒体に要求される
データの再生に必要な読み出し速度と、マルチメディア
データが記録されている読み出し速度を再生時に比較
し、充分な再生性能が選られないと判定された場合は、
利用可能なすべての記録媒体から再生時におけるマルチ
メディアデータの一時記憶媒体として最適な媒体を検索
し、該一時記憶媒体に一時ファイルとしてマルチメディ
アデータをコピーした後に再生することで、常に最善の
再生画質及び音質を得ることが可能となる。

【０１２２】さらにマルチメディア文書を保存する際に
は、マルチメディア文書の再生に必要なライブラリの有
無を検索し、不足するライブラリを自動的に追加保存す
ることで、保存作業に要する時間を節約できる。

【０１２３】尚、本発明は、複数の機器から構成される
システムに適用しても１つの機器からなる装置に適用し
ても良い。また、本発明はシステム或いは装置に本発明
により規定される処理を実行させるプログラムを供給す
ることによって達成される場合にも適用できることはい
うまでもない。

【０１２４】

【発明の効果】以上説明したように、本発明によれば、
マルチメディア文書等のデータファイルに組み込まれた
マルチメディアデータの再生処理のための制御プログラ
ムを当該データファイルに付加することにより、再生側
の装置に当該マルチメディアデータに対応する再生プロ
グラムが無くてもそれらの再生が可能となる。

【０１２５】又、本発明の他の構成によれば、データフ
ァイルの編集中に、当該データファイルの格納時のデー
タ容量（再生内容そのもののデータと該データを再生す
るために必要な制御プログラムのためのデータの容量）
に基づく情報を表示することが可能となり、所定の容量
にデータを納める編集が容易となる。

【０１２６】更に、本発明の他の構成によれば、データ
ファイルの編集中に、当該データファイルの格納時のデ
ータ容量が予め設定した容量以下となるようにデータ量
を削減するための編集処理を容易に実行できる。

【０１２７】又、本発明の他の構成によれば、データフ
ァイルの再生時に、高速にデータを読み出すことのでき
る記憶媒体に当該データファイルの内容データを格納
し、該記憶媒体よりデータを読み出して当該記憶媒体の
再生を実行することにより、高品位な再生が可能とな
る。

【０１２８】

【図面の簡単な説明】

【図１】本実施例の文書編集・再生装置のハードウェア
構成を示した図である。

【図２】本実施例のマルチメディア文書処理のためのソ
フトウェア構成を示す図である。

【図３】マルチメディア文書編集プログラムの構成を示
した図である。

【図４】マルチメディア文書制御コアプログラムの構成
を示す図である。

【図５】マルチメディアデータ制御用ライブラリ群の構
成を示す図である。

【図６】一つのマルチメディアデータ制御ライブラリの
構成を示した図である。

【図７】マルチメディア文書のファイル容量が所定の容
量を越えた場合に警告表示させるための設定を行う際の
画面表示例を示している。

【図８】マルチメディア文書編集プログラムによってマ
ルチメディア文書を新規作成する際の画面表示例を示し
た図である。

【図９】読み込むべきマルチメディア素材データを指定
する際の表示画面例である。

【図１０】読み込んだマルチメディア素材データの表示
範囲を変更をする際の表示画面例を示す図である。

【図１１】読み込んだマルチメディア素材データの表示
位置の変更をする際の表示画面例を示す図である。

【図１２】文字の入力時における表示画面例を示す図で
ある。

【図１３】文字の入力時における表示画面例を示す図で
ある。

【図１４】動画データを読み込んだ際の表示画面例を示
す図である。

【図１５】データ圧縮を行わせるための操作時の表示画
面例を示す図である。

【図１６】データ圧縮処理中の表示を示す図である。

【図１７】データ圧縮後の表示を示した図である。

【図１８】データを圧縮された状態から圧縮される前の
状態に復元するための操作時の画面表示例を示す図であ
る。

【図１９】圧縮されたデータを圧縮される前の状態に復
元する操作による復元後の画面表示例を示す図である。

【図２０】動画データから不要な領域を削除するための
編集手順を説明する図である。

【図２１】動画データから不要な領域を削除するための
編集手順を説明する図である。

【図２２】動画データから不要な領域を削除するための
編集手順を説明する図である。

【図２３】動画データから不要な領域を削除するための
編集手順を説明する図である。

【図２４】本実施例のデータ容量表示手順を表すフロー
チャートである。

【図２５】本実施例の編集処理におけるデータ量変更時
のデータ容量表示手順を説明するフローチャートであ
る。

【図２６】マルチメディア文書を再生側コンピュータ上
に保存する前の状態を示す図である。

【図２７】第１マルチメディア文書データを再生側コン
ピュータに保存する際のデータのコピー動作を説明する
図である。

【図２８】第２マルチメディア文書データを保存する際
のコピー動作を説明する図である。

【図２９】第２マルチメディア文書データを保存する際
のコピー動作を説明する図である。

【図３０】マルチメディアデータの保存動作を示すフロ
ーチャートである。

【図３１】本実施例におけるマルチメディア文書データ
の再生処理を説明するフローチャートである。

【図３２】一時記憶用媒体検索の動作を示すフローチャ
ートである。

【図３３】再生条件を選択するダイアログボックスの表
示例を示す図である。

【符号の説明】

１ マルチメディア文書編集システム ２ マルチメディア文書編集ソフトウエア群 ３ マルチメディア文書編集プログラム ４、８ マルチメディア文書制御コアプログラム ５ マルチメディアデータ制御用ライブラリ ６ マルチメディア文書ファイル ７ マルチメディア文書構造データ ９ マルチメディアデータ制御用ライブラリサブセット １０ マルチメディアデータ群 １１ マルチメディア素材データ群

フロントページの続き (51)Int.Cl.⁶ 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｇ１１Ｂ 27/00 Ｅ 9463−5Ｄ Ｈ０４Ｎ 5/7826 7/24 Ｈ０４Ｎ 7/13 Ｚ 9463−5Ｄ Ｇ１１Ｂ 27/00 Ｅ

Claims (19)

【特許請求の範囲】
1. 【請求項１】 １つ又は複数の再生形態のデータを含む
   データファイルを生成する情報処理装置であって、 再生すべき内容を示す内容データをデータファイルに格
   納する格納手段と、 前記内容データを再生処理するための制御プログラムを
   前記データファイルに付加する付加手段とを備えること
   を特徴とする情報処理装置。
2. 【請求項２】 前記内容データは、文字データ、動画デ
   ータ、音声データ、及びイラストデータのいずれかであ
   ることを特徴とする請求項１に記載の情報処理装置。
3. 【請求項３】 前記制御プログラムは、前記内容データ
   の再生形態に対応した再生処理を行うためのライブラリ
   を有し、各ライブラリをリンクして実行することにより
   各内容データの再生を実現することを特徴とする請求項
   １に記載の情報処理装置。
4. 【請求項４】 １つ又は複数の再生形態のデータを含む
   データファイルを編集する情報処理装置であって、 再生すべき内容を示す内容データをデータファイルに組
   み込む組込手段と、 前記組込手段により組み込まれた全ての内容データと、
   各内容データを再生するための制御プログラムとの合計
   のデータ容量値である総容量値を獲得し、これを表示す
   る表示手段と、 前記データファイルに組み込まれた内容データのいずれ
   かを選択して編集する編集手段と、 前記編集手段による編集作業後の総容量値を獲得して、
   この総容量値で前記表示手段による表示を更新する更新
   手段とを備えることを特徴とする情報処理装置。
5. 【請求項５】 前記編集手段による編集の対象となって
   いる内容データのデータ容量を表示する内容データ容量
   表示手段を更に備えることを特徴とする請求項４に記載
   の情報処理装置。
6. 【請求項６】 前記データファイルに組み込まれた内容
   データのうちの所望のものについてそのデータ容量を表
   示する選択表示手段を更に備えることを特徴とする請求
   項４に記載の情報処理装置。
7. 【請求項７】 所望のデータ容量値を設定する設定手段
   と、 前記表示手段もしくは再表示手段において獲得された総
   容量値が前記設定手段で設定されたデータ容量値を上回
   る場合、使用者にその旨を告知する告知手段とを更に備
   えることを特徴とする請求項４に記載の情報処理装置。
8. 【請求項８】 前記編集手段における編集作業は、選択
   された内容データの表示領域の大きさの変更であること
   を特徴とする請求項４に記載の情報処理装置。
9. 【請求項９】 前記編集手段における編集作業は、選択
   された内容データの圧縮であることを特徴とする請求項
   ４に記載の情報処理装置。
10. 【請求項１０】 前記編集手段における編集作業は、選
    択された動画データの所望の範囲を削除するものである
    ことを特徴とする請求項４に記載の情報処理装置。
11. 【請求項１１】 所望のデータ容量値を設定する設定手
    段を更に備え、 前記編集手段は、前記データファイルに組み込まれた内
    容データのうち圧縮処理が可能なものを自動的に選択
    し、前記総容量値が前記設定手段で設定されたデータ容
    量値に納まるように、選択された内容データに対して圧
    縮処理を施すことを特徴とする請求項４に記載の情報処
    理装置。
12. 【請求項１２】 １つ又は複数の再生形態の内容データ
    とこれらを再生する制御プログラムを含むデータファイ
    ルを再生する情報処理装置であって、 前記データファイルに含まれる制御プログラムを起動す
    る起動手段と、 起動された前記制御プログラムにより前記データファイ
    ルに含まれている内容データを再生する再生手段とを備
    えることを特徴とする情報処理装置。
13. 【請求項１３】 １つ又は複数の再生形態のデータを含
    むデータファイルを再生する情報処理装置であって、 前記データファイルに含まれる制御プログラムを起動す
    る起動手段と、 起動された前記制御プログラムによる内容データの再生
    時に、当該再生処理が要求する要求アクセススピード
    で、処理の対象となる内容データにアクセスできるかを
    判定する判定手段と、 前記判定手段により、前記要求アクセススピードに対し
    て前記内容データへのアクセススピードが不足すると判
    定された場合、前記要求アクセススピードを満足する記
    憶媒体に当該内容データを格納する格納手段と、 前記制御プログラムにより、前記前記格納手段より前記
    内容データを読み出してこれを再生する再生手段とを備
    えることを特徴とする情報処理装置。
14. 【請求項１４】 前記格納手段は、 前記判定手段により前記要求アクセススピードに対して
    内容データへのアクセススピードが不足すると判定され
    た場合に、前記要求アクセススピードを満足し、該内容
    データを格納できる空き容量を有する記憶媒体を抽出
    し、 前記抽出された記憶媒体のうち、書込み速度が最大の記
    憶媒体に前記内容データを格納することを特徴とする請
    求項１３に記載の情報処理装置。
15. 【請求項１５】 前記データファイルの再生に先立っ
    て、該データファイルを所定の記憶媒体へ複写する複写
    手段を更に備え、 前記複写手段は、前記データファイルの内容データを再
    生するに際して不足する制御プログラムを追加的に複写
    することを特徴とする請求項１２または１４に記載の情
    報処理装置。
16. 【請求項１６】 １つ又は複数の再生形態のデータを含
    むデータファイルを生成する情報処理方法であって、 再生すべき内容を示す内容データをデータファイルに格
    納する格納工程と、 前記内容データを再生処理するための制御プログラムを
    前記データファイルに付加する付加工程とを備えること
    を特徴とする情報処理方法。
17. 【請求項１７】 １つ又は複数の再生形態のデータを含
    むデータファイルを編集する情報処理方法であって、 再生すべき内容を示す内容データをデータファイルに組
    み込む組込工程と、 前記組込工程により組み込まれた全ての内容データと、
    各内容データを再生するための制御プログラムとの合計
    のデータ容量値である総容量値を獲得し、これを表示す
    る表示工程と、 前記データファイルに組み込まれた内容データのいずれ
    かを選択して編集する編集工程と、 前記編集工程による編集作業後の総容量値を獲得して、
    この総容量値で前記表示工程による表示を更新する更新
    工程とを備えることを特徴とする情報処理方法。
18. 【請求項１８】 １つ又は複数の再生形態のデータを含
    むデータファイルを再生する情報処理方法であって、 前記データファイルに含まれる制御プログラムを起動す
    る起動工程と、 起動された前記制御プログラムにより前記データファイ
    ルに含まれている内容データを再生する再生工程とを備
    えることを特徴とする情報処理方法。
19. 【請求項１９】 １つ又は複数の再生形態のデータを含
    むデータファイルを再生する情報処理方法であって、 前記データファイルに含まれる制御プログラムを起動す
    る起動工程と、 起動された前記制御プログラムによる内容データの再生
    時に、当該再生処理が要求する要求アクセススピード
    で、処理の対象となる内容データにアクセスできるかを
    判定する判定工程と、 前記判定工程により、前記要求アクセススピードに対し
    て前記内容データへのアクセススピードが不足すると判
    定された場合、前記要求アクセススピードを満足する記
    憶媒体に当該内容データを格納する格納工程と、 前記制御プログラムにより、前記前記格納工程より前記
    内容データを読み出してこれを再生する再生工程とを備
    えることを特徴とする情報処理方法。