JP3486235B2 - 合体型画像ファイルを利用した分岐方法およびシステム，ならびに分岐画面作成方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【技術分野】この発明は対話型画像表示における合体型
画像ファイルを利用した分岐方法およびシステム，なら
びに分岐画面作成方法に関する。

【０００２】

【背景技術】光ディスク，光磁気ディスク，磁気ディス
ク等の記録媒体に画像データをあらかじめ格納してお
き，これらの画像データによって表わされる画像を表示
装置に表示するときに，ユーザが表示画面を見ながら次
に表示させるべき画面を選択できる，いわゆる対話型パ
ッケージ・メディアが開発されつつある。電子化された
写真集，百科辞典などである。

【０００３】たとえば，電子化された山の写真集を考え
てみる。この写真集（記録媒体）には，日本を含む全世
界の著名な山岳の写真を表わす画像データが格納されて
いる。これらの山岳写真は，日本の山と世界の山に大き
く分類される。世界の山はさらに，中国の山，ヨーロッ
パの山，アメリカの山，アフリカの山等に分類される。
日本の山も，北海道の山，東北の山，関東の山等に分類
されるかも知れない。

【０００４】いずれにしてもユーザは最初のメニュー画
面で日本の山と世界の山のいずれかを選択することにな
る。このメニュー画面には，少なくとも「日本の山」と
いう文字画像と「世界の山」という文字画像が表示され
よう。好ましくは背景画があった方が良い。この場合に
は，１つの背景画と２つの文字画像とが合成されること
により得られる画像が表示される。

【０００５】したがって，このようなメニュー画面を作
成するときには，１つの背景画（静止画）を表わす画像
データ・ファイルと，２つの文字画像を表わす２つの文
字画像データ・ファイルをそれぞれ別個に用意し，これ
らを合成する必要がある。たとえば，背景画に文字画像
を貼り付け，この合成された画像を表わす画像データを
記録媒体に格納しておく必要がある。

【０００６】また，メニュー画面は表示されたメニュー
の中から一つの項目をユーザに選択させるものであるか
ら，マウス等のポインティング・ディバイスが用いられ
ることを前提とすると，表示画面上に，「日本の山」，
「世界の山」という文字の表示位置と関連させて，選択
領域をあらかじめ設定する必要がある。

【０００７】

【発明の開示】上述したメニュー画面のように，次に表
示すべき画像を選択させるための画面を分岐画面とい
い，分岐画面の表示や選択に応じた次の画面の表示を分
岐方法ということにする。

【０００８】この発明は分岐画面の作成を容易化するた
めの新しい仕組みを提供するものである。

【０００９】この発明は上記の仕組みによって作成され
た分岐画面を用いた分岐方法およびシステムを提供する
ものである。

【００１０】この発明はさらに，音楽やナレーション等
を表わす音データもまた，画像データと同じように取扱
えるようにするものである。

【００１１】この発明による分岐画面作成方法は，複数
の画像データとこれらの画像データの合成に関するデー
タとを含む合体型画像ファイルを含む画像ファイルをそ
れらの識別情報と関連づけて格納した第１の記録媒体を
用い，第１の記録媒体から使用する合体型画像ファイル
を選択し，選択した合体型画像ファイルにおける所定の
画像データによって表わされる画像を囲む選択領域を設
定し，設定した選択領域が指定されたときに次に表示す
べき画像ファイルを第１の記録媒体において選択し，選
択した合体型画像ファイルの識別符号，設定した選択領
域を表わすデータ，および選択した次に表示すべき画像
ファイルへのリンク情報を記述した分岐テーブルを作成
して第２の記録媒体に格納するものである。第１の記録
媒体と第２の記録媒体とは同じものであってもよい。

【００１２】選択領域の設定は自動的にも手動でも行う
ことができる。

【００１３】選択領域を自動的に行なわせる場合には，
所定の画像データによって表わされる画像のエッジを抽
出し，抽出したエッジの最小位置座標と最大位置座標
を，選択領域を表わすデータとすればよい。

【００１４】所定の画像よりも少し広い範囲にわたって
選択領域を設定する場合には，最小位置座標から所定値
を減算して得られる座標と，最大位置座標に所定値を加
算して得られる座標とを，選択領域を表わすデータとす
ればよい。

【００１５】一般には合体型画像は背景画と２つ以上の
文字画像とから構成されよう。そして，文字画像に選択
領域が設定されよう。

【００１６】分岐テーブルを作成することにより分岐画
面を生成できるので，その作成が容易である。選択領域
も自動的に設定可能である。

【００１７】好ましい実施態様では，音データの音ファ
イルをそれらの識別情報と関連づけて格納した第３の記
録媒体を用い，第３の記録媒体から使用する音ファイル
を選択し，設定した選択領域が指定されたときに次に出
力すべき音ファイルを第３の記録媒体において選択し，
選択した音ファイルの識別符号，および選択した次に表
示すべき音ファイルへのリンク情報を記述した分岐ファ
イルを作成して第２の記録媒体に格納する。第３の記録
媒体は第１および第２の記録媒体と同じものであっても
よい。

【００１８】これにより，音楽やナレーション等の音デ
ータを画像データと同じように取扱うことができ，分岐
画面（メニュー画面）においてそれに関連する音の発生
も可能となる。

【００１９】次に表示すべき画像ファイルおよび音ファ
イルとして，またはこれに代えて，他の情報またはデー
タへのリンク情報を分岐テーブルに記述することができ
る。

【００２０】一実施態様においては，画像ファイルの識
別符号を含む画像キャストおよび音ファイルの識別符号
を含む音キャストを格納した第２の記録媒体において，
次に表示すべき画像ファイルおよび音ファイルとして，
それらの識別符号を含む画像キャストおよび音キャスト
を選択し，これらの画像キャストおよび音キャストへの
リンク情報を分岐テーブルに記述する。

【００２１】他の実施態様においては，出力されるべき
順序に画像ファイルの識別情報と音ファイルの識別情報
とを配列したスクリプト・ファイルを格納した第２の記
録媒体において，次に表示すべき画像ファイルに代え
て，スクリプト・ファイルを選択し，このスクリプト・
ファイルへのリンク情報を分岐ファイルに記述する。

【００２２】さらに他の実施態様においては，次に表示
すべき画像ファイルに代えて，第２の記録媒体から別の
分岐テーブルを選択し，この分岐テーブルへのリンク情
報を分岐ファイルに記述する。

【００２３】この発明は，このようにして作成された分
岐画面（分岐テーブル）を用いた分岐方法を提供してい
る。

【００２４】この発明による合体型画像ファイルを利用
した分岐方法は，合体型画像ファイルを含む画像ファイ
ルをそれらの識別情報と関連づけてあらかじめ第１の記
録媒体に格納しておき，合体型画像ファイルには，複数
の画像データと，これらの画像データの合成に関するデ
ータとを含ませておき，表示すべき合体型画像ファイル
の識別情報と，表示された合体型画像における少なくと
も２つの選択領域を表わすデータと，これらの選択領域
についての指定入力に応じて次に表示すべき画像ファイ
ルへのリンク情報とを含む分岐テーブルをあらかじめ第
２の記録媒体に格納しておき，分岐テーブルの指定に応
答して，その分岐テーブルに記述された識別情報によっ
てアクセスされる第１の記録媒体の合体型画像ファイル
に規定された複数の画像を合成して表示し，表示された
合体型画像においてその選択領域の指定入力があったと
きに，分岐テーブルに記述されたリンク情報にしたがっ
て次に表示すべき画像ファイルを第１の記録媒体におい
てアクセスするものである。

【００２５】分岐画面に加えて，これに関連する音楽，
ナレーション等の音の生成も可能である。

【００２６】すなわち，音を生成するこの発明による方
法は，音を発生させる音データを含む音ファイルをそれ
らの識別情報と関連づけてあらかじめ第３の記録媒体に
格納しておき，分岐テーブルには出力させるべき音ファ
イルの識別情報と，次に出力すべき音ファイルへのリン
ク情報とを記述しておき，分岐テーブルの指定に応答し
て合体型画像データの表示とともに，分岐テーブルに記
述された識別情報によってアクセスされる第３の記録媒
体の音ファイルに格納された音データによって表わされ
る音を発生し，選択領域の指定入力があったときに，分
岐テーブルに記述されたリンク情報にしたがって次に出
力すべき音ファイルを第３の記録媒体においてアクセス
するものである。

【００２７】上述したスクリプト・ファイルまたは分岐
テーブルへのリンク情報にしたがって，次の画像や音を
発生させるようにすることもできる。

【００２８】選択領域の指定はマウス等のポインティン
グ・ディバイスのみならずキーボード等によって選択領
域を表わす符号を入力することによっても達成できる。

【００２９】この発明はまた，上記の分岐方法を実現す
る分岐システムも提供している。

【００３０】この発明の他の特徴は実施例の説明におい
て明らかになるであろう。

【００３１】

【実施例】図１は分岐画像データの作成を含むマルチメ
ディア・データ作成のために用いられるシステムの全体
的構成を示している。マルチメディア・データとはこの
実施例では原則的に画像データと音データとを含むもの
として用いられるが，画像データのみを含む用語として
用いられるのを排除するものではない。

【００３２】図１のシステムはまた，マルチメディア・
プレゼンテーション・システム（たとえば，上述した写
真集等の再生システム）としても用いられる。この場合
には後述する管理用記録媒体，画像用記録媒体および音
用記録媒体が１つの記録媒体で実現されよう。したがっ
て，３台のディスク・ドライバ15，21および31の機能は
１台のディスク・ドライバによって実現され，このシス
テムは１台のディスク・ドライバを備えれば充分という
ことになる。

【００３３】マルチメディア・データ作成においても，
上述した３種類の記録媒体は１つの記録媒体で兼用で
き，ディスク・ドライバも１台で足りる。

【００３４】以下の実施例の説明では，管理用記録媒体
に格納されるデータ，画像用記録媒体に格納される画像
データおよび音用記録媒体に格納される音データの混同
を避けるために，また説明をより分りやすくするため
に，図１に示すシステムが用いられる。

【００３５】コンピュータ・システム10はマルチメディ
ア・データ作成（ならびにマルチメディア・プレゼンテ
ーション）専用のものでもよいし，汎用のコンピュータ
・システムをマルチメディア・データ作成用（ならびに
マルチメディア・プレゼンテーション用）にプログラム
したものでもよい。

【００３６】コンピュータ・システム10はＣＰＵ11，メ
モリ12，入力装置13，および表示装置14を備えている。
メモリ12は半導体メモリ，フロッピィ・ディスク，ハー
ド・ディスク等を含み，ＣＰＵ11の実行するプログラム
を格納したり，ワーク・エリアとして用いられる。入力
装置13はキーボード，マウス等を含み，ＣＰＵ11にコマ
ンド，データ等を与えるものである。表示装置14はたと
えばＣＲＴ表示装置，液晶表示装置等により実現され
る。キーボード，マウス等は表示装置14上において後述
する選択領域を指定するためにも用いられる。

【００３７】コンピュータ・システム10にはＳＣＳＩ
（Small Computer System Interface）バスを介して，
ディスク・ドライバ15，画像システムおよび音システム
が接続されている。

【００３８】ディスク・ドライバ15はディスク状記録媒
体（光ディスク，光磁気ディスク，磁気ディスク等）に
データを書込む，およびこの記録媒体からデータを読出
すものである。ディスク・ドライバ15によって読み書き
される記録媒体を，他の記録媒体と区別するために管理
用記録媒体ということにする。管理用記録媒体には後に
詳述する分岐テーブル，スクリプト・ファイル，画像キ
ャスト，音キャスト等が記録される，または記録されて
いる。

【００３９】画像システムはディスク・ドライバ21，画
像再生装置22，および表示装置23を含む。ディスク・ド
ライバ21によって読み書きされるディスク状記録媒体を
画像用記録媒体ということにする。画像用記録媒体には
後述する合体型画像ファイル，画像ファイル（一画面分
の画像を表わす画像データ（データ圧縮または符号化さ
れた画像データ，文字画像データを含む）を画像ファイ
ルといい，画像ファイルまたは合体型画像ファイルの集
まりをアルバムということにする）等がアクセス可能に
記録される，または記録されている。

【００４０】画像再生装置22はディスク・ドライバ21に
よって画像用記録媒体から読出された画像データまたは
コンピュータ・システム10から与えられた画像データに
よって表わされる画像を表示装置23に表示する処理を行
うものであり，ＶＲＡＭ，Ｄ／Ａ変換回路，画像処理回
路，表示制御回路等を含む。

【００４１】表示装置23はＣＲＴ表示装置または液晶表
示装置（ビデオプロジェクタの一部として用いられるも
のを含む）により実現される。マルチメディア・プレゼ
ンテーション・システムには，コンピュータ・システム
10の表示装置14またはこの表示装置23の少なくともいず
れか一方が設けられればよい。

【００４２】音システムは，ディスク・ドライバ31，音
再生装置32およびスピーカ33が含まれる。ディスク・ド
ライバ31によって読み書きされるディスク状記録媒体を
音用記録媒体ということにする。音用記録媒体は音を表
わすディジタル・データ（ＡＤＰＣＭ；Adaptive Diffe
rential Pulse Code Modulation されたものを含む）を
記録するものである。一曲の音楽，一つのまとまりのあ
るナレーション等，一単位の音データを音ファイルとい
う。

【００４３】音再生装置32は音用記録媒体から読出され
た音データを音信号に変換してスピーカ33を駆動するも
のであり，ＡＤＰＣＭ復号化回路，Ｄ／Ａ変換回路等を
含む。

【００４４】音用記録媒体はＭＩＤＩ（Musical Instru
ment Digital Interface）データを一部または全部に格
納したものでもよい。この場合には音再生装置32は電子
楽器を含むものとなる。

【００４５】画像ファイルと音ファイルとを一つの記録
媒体に格納するようにしてもよい。この場合にはドライ
バ21と31は一台のドライバで兼用される。高速のディス
ク・ドライバは画像ファイルと音ファイルとを時分割で
読出すことができ，これらの読出されたデータに基づい
て画像の表示と音の発生（出力）とを同時に行うことが
できる。さらに，画像用記録媒体と画像用記録媒体と音
用記録媒体とが同一の記録媒体であってもよい。この場
合には，ドライバ15とドライバ21とドライバ31は一台の
ドライバで兼用される。これらの３種類の記録媒体のう
ちの少なくとも任意の２つが同一の記録媒体であっても
よい。

【００４６】ディスク状記録媒体に代えて，画像ファイ
ルや音ファイルを記録するために半導体メモリやテープ
状記録媒体（光テープ，磁気テープ等）を用いることが
できる。

【００４７】マルチメディア・データ作成システム（ま
たはマルチメディア・プレゼンテーション・システム）
には，画像データの入力装置，音データの入力装置等を
接続してもよい。画像データ入力装置はたとえば，入力
する映像信号をＡ／Ｄ変換し，データ圧縮する装置など
が含まれよう。音データの入力装置にはマイク，Ａ／Ｄ
変換回路，バッファ・メモリ，ＡＤＰＣＭ符号化回路等
が含まれよう。

【００４８】図２は上述したマルチメディア・プレゼン
テーション・システムの表示装置14に表示される一連の
画面の例と，その画面を生じさせるデータと，分岐の様
子とを示すものである。これは上述した山の写真集を例
とするものである。

【００４９】まずメニュー画面(1) が表示される。メニ
ュー画面(1) は背景画（自然画）と，２つの文字画面
「１．日本の山」，「２．世界の山」とから構成され
る。このメニュー画面(1) およびこれに関連する音は分
岐テーブル(1) ，画像キャスト(1) および音キャスト
(1) によって生成される。分岐テーブル，画像キャスト
および音キャストの詳細については後述する。画像キャ
スト(1) は上記メニュー画面(1) を生じさせる。音キャ
スト(1) はメニュー画面(1) が表示されているときに，
バックグランド・ミュージック（ＢＧＭ）やナレーショ
ン（たとえば，選択操作の案内）をスピーカ33から発生
させる。分岐テーブル(1) によってこれらの画像キャス
ト(1) および音キャスト(1) が指定される。

【００５０】分岐テーブル(1) にはまた，メニュー画面
(1) に表示された文字画像「１．日本の山」および
「２．世界の山」の選択領域を定めるデータが含まれて
いるとともに，選択領域が指定されたときに，指定され
た選択領域に応じて次に出力すべき画像および音を表わ
すデータ（図２に示す例では，スクリプト・ファイル
(1)とメニュー画面(2) ）が含まれている。

【００５１】入力装置13のキーボードまたはマウスによ
って「１．日本の山」が指定されると，スクリプト・フ
ァイル(1) に記述された画像キャストおよび音キャスト
にしたがって，一連の画像（旭岳，雄阿寒岳，…，霧島
山）が表示されるとともに，これらの山の説明のナレー
ションまたはＢＧＭが流れる。スクリプト・ファイル
(1) には，画像キャスト(2) 〜(j+1) および音キャスト
(2) 〜(i) が記述されている（詳細は後述する）。

【００５２】画像の表示および音の発生のシーケンスを
スクリプス・ファイルに記述せずに（スクリプス・ファ
イルを設けることなく），画像キャストや音キャストに
次に出力すべき画像を表わす画像キャストまたは音を表
わす音キャストを指定するデータを格納しておいてもよ
い。

【００５３】一連の画像と音の出力が終ると，メニュー
画面(1) または他のメニュー画面が表示される。

【００５４】「２．世界の山」が指定されると，分岐テ
ーブル(2) にしたがって下位の階層のメニュー画面(2)
が表示されるとともに，それに関連するナレーションま
たはＢＧＭが流れる。分岐テーブル(2) には画像キャス
ト(k) と音キャスト(k) が含まれている。画像キャスト
(k) の記述にしたがって，背景画像と，４つの文字画像
「１．中国の山」，「２．ヨーロッパの山」，「３．ア
メリカの山」，および「４．アフリカの山」が表示され
る。音キャスト(k) にしたがって，このメニュー画面
(2) に関連するナレーション（音声によるメニュー選択
の案内等），ＢＧＭ等が流れる。

【００５５】４つの文字画像のいずれかの選択領域が入
力装置13によって指定されると，この指定に応じて，分
岐テーブル(2) の分岐情報にしたがって，次の画像表示
および音の発生が行なわれることになる。

【００５６】上述したメニュー画面(1) およびメニュー
画面(2) （ならびに旭岳等の画像および文字）は画像キ
ャストによって指定される合体型画像ファイルに格納さ
れた画像データに基づいて表示される。

【００５７】合体型画像ファイルについて説明してお
く。図３に示す背景画（自然画，絵）と図４および図５
に示す文字画像とを用いて，図６に示すような合成画像
（メニュー画面(1) ）を作成する合体型画像ファイルに
ついて説明する。合体型画像ファイルには，基本的には
自然画を表わす画像データと，文字画像を表わす画像デ
ータと，これらの画像データを合成するのに必要な情報
（データ）とが含まれる。合体型画像ファイルには合成
後の画像を表わす画像データは含まれない。

【００５８】図７は合体型画像ファイルの構成の一例を
示している。合体型画像ファイルは，ヘッダ，情報領
域，パス領域，および画像データ領域から構成されてい
る。

【００５９】画像データ領域には，図３に示す自然画を
表わす画像データと，図４および図５に示す文字画像を
表わす画像データとが格納される。

【００６０】図３に示す自然画を表わす画像データには
３種類あり，それは検索用縮小画像データＡ１と，標準
画像データＡ２と，ハイビジョン用画像データＡ３とで
ある。

【００６１】縮小画像データＡ１は標準画像データＡ２
を間引き処理，平均化処理等により縮小（たとえば１／
64）することにより作成されたもので，主に検索処理に
用いられる。すなわち，検索処理時には，多数の合体型
画像ファイルから縮小画像データがそれぞれ読出され，
これらの縮小画像データによって表わされる縮小画像が
マルチ画面を構成するように表示画面に表示される。

【００６２】標準画像データＡ２はテレビジョン画面に
表示するのに適した解像度をもつ画像データである。マ
ルチメディア・プレゼンテーション・システムで画像表
示のために用いられる画像データは，基本的には，この
標準画像データＡ２である。もちろん，他の画像データ
Ａ１，Ａ３もマルチメディア・プレゼンテーションに用
いることができる。

【００６３】ハイビジョン用画像データＡ３は高解像度
（たとえば標準画像データの４倍）のもので，ハイビジ
ョン表示またはプリント用に用いられる。さらに高解像
度（たとえば，ハイビジョン用の４倍の解像度をもつも
の，より大きなプリント画を得るため）の画像データを
合体型画像ファイルに含ませることができる。自然画を
表わす画像データの種類数は任意である。

【００６４】図４および図５に示す文字をそれぞれ表わ
す文字画像データＢおよびＣは一種類のみ用意されてい
る。これらの文字画像データＢおよびＣは少くとも文字
の領域分だけあればよく，一画面分は必ずしも必要な
い。文字画像データについても，解像度の異なるものを
複数種類用意してもよい。

【００６５】さらに異なる絵や文字を表わす画像データ
を合体型画像ファイルに設けてもよいのはいうまでもな
い。合体型画像ファイルは２種類以上の画像を合成する
ものであるからである。カラー画像のみならず，白黒画
像のデータを用意しておいてもよい。

【００６６】パス領域には，上述した各画像データＡ
１，Ａ２，Ａ３，ＢおよびＣをアクセスするためのデー
タ（パスまたはオフセット，その他のアドレスに関連す
るデータ）がそれぞれ記憶される。

【００６７】ヘッダには合体型画像ファイルであること
を示すコード，この合体型画像ファイルが属するアルバ
ムの名称（名），合体型画像ファイルの名称（名）等が
格納される。

【００６８】情報領域には，バージョン番号，圧縮方
式，画像回転情報，テーブル，作成年月日等が記述され
る。

【００６９】バージョン番号はバージョンを識別するた
めのVersion 1.2 とかVersion 3.5とかの番号である。

【００７０】圧縮方式は画像データ領域の画像データが
データ圧縮されている場合に，その方式（たとえばＪＰ
ＥＧ方式等）を示すものであり，これは主に自然画につ
いて適用される。

【００７１】画像回転情報は画像データ領域の画像デー
タ（時に自然画の）を表示したときに，観察者に正しく
見せるためには反時計回りに何度回転して表示すればよ
いかを示すものである。たとえば，この情報には０度，
90度，180 度，270 度などがある。

【００７２】テーブルは，画像データ領域に格納した画
像データの種類と解像度を示すものである。たとえば，
カラー（24ビット）自然画（縮小１／64，標準１／１，
ハイビジョン４／１），文字（８ビット），画像（標準
１／１）というデータが，テーブルの形で一定の配列で
記述されている。この配列は，パス領域に記述したパス
・データの順序と一致している。

【００７３】作成年月日はこの合体型画像ファイルを作
成した年月日である。

【００７４】画像用記録媒体にはこのような合体型画像
ファイルが複数個格納される。この合体型画像ファイル
の作成は，図１に示すシステムを用いて行なうことがで
きる。必要な画像データとその情報とを作成して図７に
示すような形式で記録媒体に格納すればよい。

【００７５】画像用記録媒体には合体型画像ファイル以
外の画像ファイルも格納される。この画像ファイルに
も，そのアルバム名，ファイル名を含むヘッダ，図７の
情報領域に示されるような情報，パスおよび画像データ
が格納される。一つの絵または文字画像について，複数
種類の解像度をもつ画像データを格納しておくとよい。

【００７６】音用記録媒体に格納される音ファイルもま
た，アルバム名，ファイル名を含むヘッダ，再生等のた
めに必要な情報，および音データを含むように構成され
る。もっとも，アルバム名，ファイル名，情報はディレ
クトリに格納してもよい。

【００７７】図８はメニュー画面(1) の選択領域の例を
示している。２つの文字画像「１．日本の山」および
「２．世界の山」を囲む領域がそれらの選択領域Ｓ１お
よびＳ２である。

【００７８】選択領域Ｓ１およびＳ２はともに矩形の領
域である。画面の左上の角をＸＹ座標軸の原点として
（Ｘ軸は水平（横）方向に右に向ってとられ，Ｙ軸は垂
直（縦）方向に下に向ってとられる），選択領域Ｓ１は
その左上の角の座標（Ｘ１min，Ｙ１min ）と右下の角
の座標（Ｘ１max ，Ｙ１max ）とによって定められる。
同じように，選択領域Ｓ２は２つの座標（Ｘ２min ，Ｙ
２min ）および（Ｘ２max ，Ｙ２max ）によって規定さ
れる。

【００７９】このような選択領域はＣＰＵ11によって自
動的に設定される。文字画像「１．日本の山」を例にと
る。

【００８０】指定された合体型画像ファイルに含まれる
文字画像データが読出されメモリ12に格納される。この
文字画像データは一般に白黒画像データ（輝度データ）
またはＲ，Ｇ，Ｂカラー画像データによって構成されて
いる。文字画像データが圧縮画像データの場合には伸張
処理されたのちメモリ12に格納される。

【００８１】文字画像は白色の背景に描かれている。一
画素が８ビットで表わされているとすると，白色の背景
の輝度データ，Ｒ，Ｇ，ＢデータともＦＦ（16進数）で
表わされる。したがって，この白色背景（データＦＦ）
以外の部分を抽出すれば，抽出された画像データは文字
画像を表わす画素上のものである。データＦＦに近い値
のスレッショールド・レベルを用いてこの抽出処理を行
ってもよい。これは一種のエッジ抽出処理である。

【００８２】抽出された画像データに対応する画素のＸ
座標の最小値，最大値をそれぞれｘ１min ，ｘ１max と
し，Ｙ座標の最小値，最大値をそれぞれｙ１min ，ｙ１
maxとする。Ｘ座標の最小値ｘ１min とＹ座標の最小値
ｙ１min との組によって表わされる座標（ｘ１min ，ｙ
１min ）を左上の角とし，Ｘ座標の最大値ｘ１max とＹ
座標の最大値ｙ１max との組によって表わされる座標
（ｘ１max ，ｙ１max ）を右下の角とする矩形は，図９
に示すように，文字画像を囲むものとなる。

【数１】 （Ｘ１min ，Ｙ１min ）＝（ｘ１min ，ｙ１min ） （Ｘ１max ，Ｙ１max ）＝（ｘ１max ，ｙ１max ） とすれば，文字画像「１．日本の山」の選択領域を表わ
すデータが得られる。

【００８３】文字画像が占める領域よりも少し広い範囲
を選択領域とする場合には，図10に示すように，適当な
値（適当な数の画素分の長さ）をそれぞれΔ１，Δ２，
Δ３，Δ４として，

【数２】（Ｘ１min ，Ｙ１min ）＝（ｘ１min −Δ１，
ｙ１min −Δ３） （Ｘ１max ，Ｙ１max ）＝（ｘ１max ＋Δ２，ｙ１max
＋Δ４） とすればよい。Δ１＝Δ２，Δ３＝Δ４としてもよい
し，Δ１＝Δ２＝Δ３＝Δ４とすることもできる。

【００８４】文字画像が図11に示すように白抜き文字を
表わす場合には，白の部分を抽出するか，または黒以外
の部分を抽出すればよい。後者の抽出処理においては，
背景を表わすＢおよびＧの画像データをそれぞれ００と
しておき，これらの画像データにおいて００以外の部分
を抽出すればよい。

【００８５】図12に示すように，文字の輝度にグラデー
ションがかかっている場合には，文字の輪郭を黒で表現
した文字データをあらかじめ作成しておけばよい。

【００８６】図13は画像キャスト（Image Cast）の構造
の一例を示している。画像キャストは，ヘッダ，アルバ
ム名，（合体型）画像ファイル名，合体情報，遷移時
間，表示時間，画像出現効果，画像出現効果時間，画像
の解像度，位置情報，拡大倍率等を含む。

【００８７】ヘッダは画像キャストであること，および
その画像キャストの識別符号（画像キャスト番号）を示
すものである。

【００８８】アルバム名および（合体型）画像ファイル
名は，再生すべき画像ファイル（合体型画像ファイルま
たはそれ以外の画像ファイル）を示すものである。

【００８９】合体情報は合体型画像ファイルが指示され
ていた場合に用いられるもので，合体型画像ファイルに
含まれる複数の画像データのうちのどれを用いるのかと
いう情報（合体させる画像の種類）と，合成（合体）方
法とを含む。合体させるべき画像の種類に関する情報に
は，合体させるか，させないかの情報も含まれる。合体
させる場合には合体させるべき画像データが明示される
（この例では，合体させるべき画像データは画像の解像
度によって指示されている）。合体させない場合には，
どの画像（自然画，文字画像）を用いるかが記述され
る。合体方法にはＯＲ，ＡＮＤ，ＮＯＲ等がある。

【００９０】遷移時間および表示時間については後述す
る。

【００９１】画像出現効果は，画像の表示を開始すると
きに，いきなり全画面を表示するのか（全画面を瞬間的
に切替えるのか），両開きのドア（またはカーテン）を
開けるような態様で次の画像を表示するのか，右から左
に掃引しながら次の画像を表示するか，上から下に掃引
しながら画像を表示しはじめるのか，中心から徐々に表
示領域を拡大しながら絵を出現させるのかというような
画面効果を選択するものである。画像出現効果時間は，
画像の一部の出現開始から全部が出現するまでの時間で
ある。

【００９２】画像の解像度は上述したように表示すべき
画像（自然画）の解像度を示し，図５の例では１／64，
１／１，４／１のいずれかが選択される。この解像度の
指定により，結果的に画像データが選択される。

【００９３】位置情報は，表示すべき画像の表示画面上
における位置を表わす。例えば，表示すべき画像の中心
のＸ，Ｙ座標で表現される。

【００９４】拡大倍率（縮小倍率も含む）は表示する画
像を拡大または縮小するときの倍率を表わす。

【００９５】図14は音キャスト（Audio Cast）の構造の
一例を示している。音キャストにはヘッダ，アルバム
名，音ファイル名，トラック番号，属性，遷移時間，ス
タート・ポインタおよびストップ・ポインタ等が含まれ
る。

【００９６】ヘッダは音キャストであること，および音
キャストの識別符号（音キャスト番号）を示すものであ
る。

【００９７】アルバム名およびファイル名は再生すべき
音ファイルを同定するものである。トラック番号は，再
生すべき音ファイルが存在する音用記録媒体上のトラッ
ク番号を示す。ファイル名によってトラック番号が一義
的に定まる場合にはトラック番号は必ずしも必要ない。

【００９８】属性は音の性質等，たとえばモノ／ステレ
オの別，チャネル数を示す。

【００９９】遷移時間については後に説明する

【０１００】音については音ファイル内のすべての音が
再生されるとは限らない。たとえば一曲（一つの音のフ
ァイル）の中の特定の部分（これをクリップという）の
みを再生することが要求されることがある。スタート・
ポインタおよびストップ・ポインタは，再生すべきクリ
ップの開始位置および終了位置を，音ファイルにおける
最初の音の位置を基準として，時間で表現するものであ
る。

【０１０１】図15はスクリプト・ファイルの記述にした
がって発生する画像（静止画）と音のシーケンスの一例
を示している。

【０１０２】まず導入音楽(2) （音）がスピーカ33から
流れ，この音楽(2) が流れている間に表示装置23に画像
(2) が表示される。画像(2) が表示されている間に，導
入音楽(2) がナレーション(3) （音）に切替わる。ナレ
ーション(3) が終った後に，一時的に音の発生が止む。
この間に，画像(2) から画像(3) に切替わり，続いてナ
レーション(4) が流れる。この例では，画像と音とが同
時に出力されることがある。

【０１０３】ある音の出力または画像の表示が開始され
た時点から，次の音の出力または画像の表示が開始され
るまでの時間を，この例において，遷移時間という。一
つの画像が表示されている時間を表示時間という。

【０１０４】図16は発生する画像（静止画）と音のシー
ケンスの他の例を示している。このシーケンスでは，音
と画像は同時には発生しない。ある一時点では音または
画像のいずれか一方が再生されているか，またはいずれ
も再生されていない。

【０１０５】このシーケンスの例では，ある音の出力の
停止または画像の表示終了の時点から，次の音の出力の
開始または画像の表示開始までの時間を遷移時間と定義
している。一つの画像が表示されている時間が表示時間
である。破線で示すように，画像についてはある画像の
表示開始から次の画像の表示開始までを遷移時間とする
こともできる。さらに，開始（第１番目の音の発生また
は画像表示）の時点からの時間（開始時間）（これも遷
移時間という）を，上述した遷移時間に代えて定義して
もよい。

【０１０６】このような再生すべき１つの画像または一
つづきの音は上述した画像キャストまたは音キャストに
よって記述され，それらの再生の順序はスクリプト・フ
ァイルに記述される。

【０１０７】スクリプト・ファイルの一例が図17に示さ
れている。このスクリプト・ファイルは図15に示すシー
ケンスを表わしたものである。スクリプト・ファイルに
はスクリプト・ファイルであること，およびその識別符
号（スクリプト・ファイル番号）が記述される。PLAYは
再生命令を，Audio Castは音キャストを，Image Castは
画像キャストをそれぞれ表わしている。PLAY Audio Cas
t (2) が一つの命令文（ステートメント）であり，これ
は音キャスト(2) を再生せよということを意味してい
る。これらの命令文は再生すべき順番に記述される。し
たがって，音(2)，画像(2) ，音(3) ，画像(3) ，音(4)
の順番に再生される。これは図15のシーケンスと同じ
である。スクリプト・ファイルにおいて，命令PLAYはそ
の記述を省略することができる。画像キャストや音キャ
ストに記述されている遷移時間，表示時間をスクリプト
・ファイルに記述してもよい。

【０１０８】スクリプト・ファイルの最後には，このス
クリプト・ファイルにしたがう一連の画像と音の発生が
終了した後に出力すべきメニュー画面を指定するため
に，そのメニュー画面を出力させる分岐テーブル（Bran
ch Table (1)）の識別符号が記述されている。

【０１０９】図15および図16に示す画像と音のシーケン
スにおいて，表示時間や遷移時間を設けずに，マウスか
らクリック信号またはキーボードのネキスト・キーから
の信号の入力に応答して，次の画像および音に切換える
ことにより，画像と音とを順次出力させるようにするこ
ともできる。

【０１１０】また，スクリプト・ファイルを設けない構
成とすることもできる。この場合には，画像キャストお
よび音キャストに，次に出力させるべき画像を示す画像
キャストもしくは音を示す音キャストまたは分岐テーブ
ルへのパス（それらの識別符号，アドレス，オフセット
等）（リンク情報）を記述しておけばよい。

【０１１１】図18は分岐テーブルの一例を示している。
上述したように分岐テーブルはメニュー画面およびそれ
に関連する音を発生させるものである。

【０１１２】ヘッダは分岐テーブルであること，および
その識別符号（分岐テーブル番号）を示すものである。

【０１１３】分岐の数はこの分岐テーブルにしたがって
表示されるメニュー画面に表示される選択可能な項目
（上述の「１．日本の山」や「２．世界の山」）の数で
ある。メニュー画面(1) の場合には分岐の数は２であ
る。

【０１１４】分岐へのパスは，選択項目が指定されたと
きに，その指定にしたがって次に出力すべき画像を示す
画像キャスト，音を示す音キャスト，一連の画像と音を
示すスクリプト・ファイル，またはメニュー画面を示す
分岐テーブルへのパス（これらの画像キャスト，音キャ
スト，スクリプト・ファイル，分岐テーブルの識別符
号，アドレス，オフセット等）である。

【０１１５】選択項目は２通りのやり方で指定される。
その一は，キーボード中のテンキーを用いて指定するも
のである。テンキー＃１（または＃２）で指定される分
岐へのパスはこの場合に用いられる。その二は上述した
選択領域をポインティング・ディバイスで指定すること
である。この場合には，分岐＃１（または＃２）へのパ
スが参照される。もちろん，テンキー＃１で指定される
分岐へのパスと分岐＃１へのパスとは同じパスを表わし
ている。

【０１１６】他のキーで指定される処理へのパスは，た
とえばキーボード上のForward キー，Reverse キー，St
opキー等が押されたときに，進むべき表示処理等に関す
るデータまたはパスを記述するものである。たとえばRe
verse キー入力があったときには，前回に出力された画
像および音を示す画像キャスト，音キャスト，スクリプ
ト・ファイルまたは分岐テーブルが，このデータまたは
パスにしたがって参照されることになる。

【０１１７】画像キャスト番号および音キャスト番号
は，この分岐テーブルにしたがうメニュー画面において
表示する画像を表わす画像キャストおよびメニュー画面
表示にともなって発生させるべき音を表わす音キャスト
を指定するものである。

【０１１８】選択領域＃１を表わすデータは上述した座
標（Ｘ１min ，Ｙ１min ），（Ｘ１max ，Ｙ１max ）で
あり，選択領域＃２を表わすデータは座標（Ｘ２min ，
Ｙ２min ），（Ｘ２max ，Ｙ２max ）である。

【０１１９】上述した画像キャスト，音キャスト，スク
リプト・ファイルおよび分岐テーブルは，図19に示すよ
うに，管理用記録媒体に格納される，または格納されて
いる。これらの画像キャスト，音キャスト，スクリプト
・ファイルおよび分岐テーブルの配列の順序は任意であ
る。

【０１２０】画像キャストの作成処理について説明して
おく。この処理は，画像のおおまかな選択と，画像キャ
スト・データの詳細の指定とに分けることができる。

【０１２１】画像のおおまかな選択では，画像用記録媒
体に格納されている画像ファイル（合体型画像ファイル
を含む）のうち所望のものが選択される。このとき，上
述した検索用画像データが有効に用いられよう。選択し
た画像ファイルによって表わされる画像が表示装置14ま
たは23に表示される（データ伸張，画像合成が行われ
る）。オペレータは表示された画像をみて，最終的に選
択するかどうかを決定する。最終的に選択された画像フ
ァイルのプログラム名およびファイル名はメモリ12のワ
ーク・エリアに格納される。

【０１２２】必要な画像ファイルの選択が終了すると，
選択された各画像ファイルについて画像キャストが作成
される。画像キャストに必要な合体情報，遷移時間，表
示時間，画像出現効果とその時間，位置情報，拡大倍率
等が順次入力される。作成された画像キャストはワーク
・エリアに保存される。必要なすべての画像キャストの
作成が終了すると，これらの画像キャストは管理用記録
媒体に格納される。

【０１２３】音キャストの作成もほぼ同じ手順で行なわ
れる。まず音ファイルの選択が行なわれる。音用記録媒
体において音ファイルが指定され，音が再生される。再
生された音を聞いてオペレータは最終的に選択するかど
うかを決定する。決定された音ファイルのアルバム名お
よびファイル名がワーク・エリアに保存される。

【０１２４】音キャストの詳細データのうちで入力が必
要なものは遷移時間，スタート・ポインタおよびストッ
プ・ポインタである。選択した音ファイルが再生され
る。スタート・ポインタとしたい音が出力された時点
で，その時点を指定する入力が入力装置13から与えられ
ると，ＣＰＵ11はそのときの時間が音再生装置32に問合
わせる。音再生装置32から返答された時間がスタート・
ポインタとなる。同じようにストップ・ポインタが設定
される。最後に遷移時間が入力される。

【０１２５】スクリプト・ファイルは既に作成したキャ
ストを再生の順番で入力することにより作成される。

【０１２６】一旦作成されたスクリプト・ファイルおよ
びキャストは上述した手順で再生される。オペレータは
再生されたマルチメディアを観賞しながら，必要な部分
を修正する。各メディアについての情報は画像キャス
ト，音キャストに，全体の流れはスクリプト・ファイル
にそれぞれ記述されているので，これらを個々に修正す
れば足り，修正作業が容易である。

【０１２７】図20は分岐テーブルの作成処理手順を示し
ている。分岐テーブルの作成はＣＰＵ11の制御の下でメ
モリ12上で行なわれる。この処理は大別すると，使用す
るキャストの設定（ステップ41），キーに対応する分岐
パス等の設定（ステップ42），選択領域の設定（ステッ
プ43〜49），およびメモリ12において作成された分岐テ
ーブルを管理用記録媒体に格納する処理（ステップ50）
からなる。これらの処理は表示されるメニュー画面にお
いて選択される（ステップ40）。

【０１２８】使用するキャストの設定では，既に作成さ
れている画像キャストおよび音キャストが選択される，
または使用に適した画像キャストおよび音キャストが新
たに作成されて設定される。

【０１２９】分岐パス等の設定では，分岐の数，テンキ
ーで指定される分岐へのパス，その他の処理へのパスが
設定される。

【０１３０】選択領域の設定には自動モードと手動モー
ドとがある。いずれにしても，処理の対象となるメニュ
ー画面が選択され，その画面が表示装置14（または23）
に表示される（ステップ43）。

【０１３１】自動モードが選択された場合には，ＣＰＵ
11は上述したように，メニュー画面を構成する文字画像
データ上において，文字のエッジを抽出し，文字画像を
囲む領域を示す２点の座標を算出する（ステップ45）。
算出された座標によって指定される領域が表示装置14
（または23）に表示される（ステップ46）。オペレータ
が表示された領域の確認入力を与えれば（ステップ4
7），選択領域を示すデータがメモリ12に格納される。
オペレータは必要に応じて選択領域を修正することもで
きる。

【０１３２】手動モードが選択された場合には，オペレ
ータがキーボードやマウスを用いて表示画面上に選択領
域を設定する（ステップ48）。

【０１３３】この後，設定された選択領域が指定された
ときの分岐へのパスが設定される（ステップ49）。

【０１３４】複数の選択領域について上述の操作，処理
が繰返されることになる。

【０１３５】このようにしてメモリ12上に作成された分
岐テーブルは最後に管理用記録媒体に格納される（ステ
ップ50）。

【０１３６】図21は分岐テーブルにしたがうメニュー画
面の表示およびこれに関連する音の再生の処理手順を示
している。この処理はＣＰＵ11によって制御される。

【０１３７】メイン・プログラムによって指定された，
または先に読出したスクリプト・ファイル等によって指
定された分岐テーブルが管理用記録媒体から読出され，
メモリ12のワーク・エリアに格納される（ステップ5
1）。

【０１３８】読出された分岐テーブルに記述されている
画像キャストおよび音キャストが同様に管理用記録媒体
から読出されワークエリアに格納される（ステップ5
2）。分岐テーブルに記述されている画像キャストまた
は音キャストが管理用記録媒体に存在しなければエラー
ということになる（ステップ53，54）。画像キャストに
記述されている画像ファイルが画像用記録媒体に，音キ
ャストに記述されている音ファイルが音用記録媒体に格
納されているかどうかもチェックされる。

【０１３９】画像キャストの記述にしたがって合体型画
像ファイが画像用記録媒体から読出され，合体型画像フ
ァイルにしたがう合成画像がメニュー画面として表示装
置23に表示される（ステップ55）。同様に，音キャスト
の記述にしたがって音用記録媒体から音ファイルが読出
され，音（ＢＧＭ，ナレーション等）がスピーカ33から
出力される（ステップ56）。

【０１４０】入力装置13におけるキーボードからのキー
入力による選択項目の，またはマウス等による選択領域
の指定があると（ステップ57，58），指定された選択項
目（選択領域）に対応する分岐へのパスを示すデータに
したがって次に出力すべき画像および音を表わす画像キ
ャスト，音キャスト，スクリプト・ファイルまたは分岐
テーブルが読出され，次の画像表示，音発生に進むこと
になる（ステップ59）。

【０１４１】画像キャスト処理（ステップ55）の詳細が
図22に示されている。まず画像合成処理が行なわれる
（ステップ61）。画像キャストに含まれているアルバム
名およびファイル名を用いて画像用記録媒体がアクセス
され，該当する画像ファイルが読出され，ワーク・エリ
アに格納される。合体型画像ファイルの場合には，解像
度情報により指定された一または複数の画像データが読
出される。読出された画像データが，データ圧縮されて
いる場合には伸張処理が行なわれる。画像ファイル（合
体型画像ファイル）に記述されている画像回転情報にし
たがって，必要に応じて，ワーク・エリア内の画像デー
タが回転される。画像キャストに記述されている拡大，
縮小倍率にしたがって，必要に応じて，画像データの拡
大，または縮小処理が行なわれる。さらに必要ならば画
像キャスト内の位置情報にしたがって画像データの位置
決め，切り出し等が行なわれる。ワーク・エリアに作成
された画像データは画像再生装置22のＶＲＡＭに転送さ
れて格納される。合体型画像データの場合にはＶＲＡＭ
上で２つ以上の画像データの合成が行なわれる。

【０１４２】合成画像出力処理および表示命令処理が行
なわれる（ステップ62）。表示命令とともに画像出現効
果および効果時間がＣＰＵ11から画像再生装置22に与え
られ，ＶＲＡＭ上の画像データによって表わされる画像
が，指示された効果を伴って表示装置23に表示されるこ
とになる。

【０１４３】メニュー画面においては画像はキーによる
選択項目の指定または選択領域のマウス等による指定
（ステップ57，58）があるまで表示され続ける。したが
って，メニュー画面においては遷移時間，表示時間に関
するデータは必ずしも必要ない。

【０１４４】この後，キー入力または選択領域の指定に
対処するためにこれらに対応する割込を設定する（ステ
ップ63，64）。

【０１４５】音キャスト処理（ステップ56）において
は，音キャストに含まれるスタート・ポインタおよびス
トップ・ポインタ（時間で表現されている）が，それぞ
れ音用記録媒体上の物理アドレスに変換される。音キャ
ストに記述されたデータおよびこれらの物理アドレスを
含む再生指令が音再生装置32に与えられる。これに応答
して音再生装置32は音用記録媒体から指定された音ファ
イルの中の指定されたクリップを再生し，スピーカ33か
ら音を出すことになる。選択項目のキー入力または選択
領域の指定があるまでの間に，指定された１クリップ分
の音の再生が終了してしまった場合には，必要に応じて
同じ音の発生を繰返すようにしてもよい。

【０１４６】図23から図25はスクリプト・ファイルにし
たがって画像と音を再生する処理の手順を示している。
この処理は主にコンピュータ・システム10におけるＣＰ
Ｕ11によって実行される。またこの処理は，図15に示す
遷移時間の定義にしたがうものである。

【０１４７】上述した分岐テーブルにおける処理におい
て，分岐へのパスとして特定のスクリプト・ファイルが
指定されると，ＣＰＵ11はディスク・ドライバ15を起動
して，管理用記録媒体から，指定されたスクリプト・フ
ァイルを読出してメモリ12のワーク・エリアに格納する
（ステップ61）。

【０１４８】読出したスクリプト・ファイルに列挙され
ているすべてのキャスト（画像キャストおよび音キャス
ト）が同様に管理用記録媒体から読出されてワーク・エ
リアに記憶される（ステップ62）。ＣＰＵ11はスクリプ
ト・ファイルにリストされているすべてのキャストが存
在するかどうかをチェックする（ステップ63）。

【０１４９】ＣＰＵ11はさらに，ディスク・ドライバ21
および31を起動して，先に読出したキャストに記述され
ているすべての画像ファイルおよび音ファイルが画像用
記録媒体および音用記録媒体に記録されているかどうか
をチェックする（ステップ64〜65）。一般に一つのキャ
ストには一つのファイルが記述されているからステップ
65の処理は必ずしも必要ない。

【０１５０】スクリプト・ファイルに記述されたキャス
トが一つでも管理用記録媒体内に存在しなければ，また
はキャストに記述されたファイルが画像用または音用記
録媒体内に一つでも存在しなければエラーということに
なる。

【０１５１】エラーがなければ，読出されたワーク・エ
リアに格納されたスクリプト・ファイルおよびキャスト
にしたがって再生動作が行なわれていく。

【０１５２】スクリプト・ファイル内の現在再生してい
るキャストを指示するためにキャスト・カウンタが設け
られている。このキャスト・カウンタに１が設定される
（ステップ67）。

【０１５３】キャスト・カウンタによって指示されるキ
ャストが解読され，それが画像キャストか音キャストか
が判断される（ステップ71）。画像キャストの場合には
図24に示す処理に進み，音キャストの場合には図25に示
す処理に進む。

【０１５４】図24において，画像キャストの場合には，
上述したもの（図22，ステップ61）と同じ画像合成処理
が行なわれる。

【０１５５】好ましくは画像再生装置22には２個のＶＲ
ＡＭが設けられている。１個は現在表示されている画像
用であり，もう１個は次に表示すべき画像用である。こ
のような場合には，ワーク・エリアの画像データが画像
再生装置22のＶＲＡＭに転送されて格納される。合体型
画像データの場合にはＶＲＡＭ上で２つ以上の画像デー
タの合成が行なわれる（以上ステップ72）。

【０１５６】第１番目のキャストの場合には（ステップ
73でYES ），画像の合成処理ののち，ただちに（ステッ
プ74〜78をスキップ）合成画像出力処理，表示命令処理
に移る（ステップ79）。表示命令とともに画像出現効果
および効果時間が画像再生装置22に与えられ，ＶＲＡＭ
上の画像データによって表わされる画像が，指示された
効果を伴って表示装置23に表示されることになる。

【０１５７】この実施例では，現在のキャストを再生し
ている間に，次の画像キャストのための画像合成処理が
行なわれる。遷移時間および表示時間を計時するために
それぞれのタイマが設けられている。現在のキャストの
再生を開始するときに遷移時間タイマに遷移時間が設定
される（ステップ82）。現在のキャストが画像キャスト
の場合にはその表示時間が表示時間タイマに設定される
（ステップ81）。

【０１５８】キャスト・カウンタが１以外の場合には
（ステップ73でNO），遷移時間タイマがタイム・アップ
するのを待って（タイマ割込み）（ステップ78），合成
画像出力および表示命令処理に進むことになる（ステッ
プ79）。

【０１５９】この後，キャスト・カウンタに＋１され
（ステップ80），表示時間カウンタおよび遷移時間カウ
ンタにそれぞれ今回の画像キャスト内の表示時間および
遷移時間がセットされる（ステップ81，82）。この後，
ステップ70に戻って，次のキャストについての準備が開
始される。

【０１６０】遷移時間タイマのタイム・アップの待時間
の間に，表示時間タイマがタイム・アップしたときには
（タイマ割込があったときには）画像再生装置22に消去
指令が与えられるので（ステップ76，77），表示装置23
に表示されていた画像が消える。ステップ79の処理によ
り次の画像がただちに表示されるときには，画像が切替
えられたように見えることになる。

【０１６１】現在のキャストが音キャストで，音再生装
置32から，指示されたクリップの再生が終了した旨の通
知が届いたときには，ＣＰＵ11はその旨を認識する（ス
テップ74，75）。

【０１６２】画像再生装置22に１個のＶＲＡＭしかない
場合には，ステップ72におけるＶＲＡＭ上での画像合成
（または書込み）処理は，ステップ79で行なわれるであ
ろう。

【０１６３】音キャストの場合には，音キャストに含ま
れるスタート・ポインタおよびストップ・ポインタが，
それぞれ音用記録媒体上の物理アドレスに変換される
（ステップ83）。この後，遷移タイマのタイム・アップ
を待って（ステップ78），音キャストに記述されたデー
タおよび上記物理アドレスを含む再生指令が音再生装置
32に与えられる（ステップ84）。これに応答して，音再
生装置32は音用記録媒体から指令された音ファイルの中
の指示されたクリップを再生し，スピーカ33から音を出
力することになる。他の処理は図24に示すものと同じで
あり，同一ステップに同一符号を付し重複説明を避け
る。図25の処理では表示時間の設定処理は無い。

【０１６４】スクリプト・ファイルに記述されたすべて
のキャストについての処理が終り，最後に記述された分
岐テーブルが読出されると（ステップ68でYES ），最後
の画像キャストについての表示時間タイマのタイム・ア
ップを待って，または音キャストの場合には音再生装置
からの音再生終了報告を待って，上記分岐テーブルにし
たがう処理に移ることになる（ステップ69）。

【０１６５】図26および図27は図16に定義された遷移時
間にしたがう処理を示しており，図24および図25にそれ
ぞれ対応するものである。図23はこの例でもそのまま使
用される。

【０１６６】図26において，図24に示すステップ72の画
像合成処理とステップ79の合成画像出力，表示命令処理
が連続的に行なわれ（ステップ79），画像キャストによ
って指示される画像が表示装置23に表示される。この
後，キャスト・カウンタがインクレメントされ（ステッ
プ80），表示時間タイマに表示時間がセットされる（ス
テップ81）。

【０１６７】表示時間タイマがタイム・アップするのを
待って（ステップ76），画像消去指令を出力するととも
に（ステップ77），遷移時間タイマに遷移時間がセット
される（ステップ82）。

【０１６８】遷移時間タイマがタイム・アップすると
（ステップ78），次のキャストについての処理に進む
（ステップ70）。

【０１６９】遷移時間が零の場合にはステップ82，78は
スキップされる。

【０１７０】図16に破線で示す遷移時間が定義されてい
る場合には，ステップ81の表示時間のセットとともに，
遷移時間のセット（ステップ82）が行なわれる。

【０１７１】図27の音キャストについての処理において
も同じように，ステップ92において，図25のステップ83
と84の処理が行なわれる。これにより音の再生が行なわ
れる。この後，キャスト・カウンタがインクレメントさ
れる（ステップ80）。

【０１７２】音再生装置32から指示されたクリップの再
生が終了した旨の通知が届いたのちに（ステップ74），
遷移時間がセットされる（ステップ82）。遷移時間タイ
マがタイム・アップしたのちに（ステップ78），次のキ
ャストの処理に進む（ステップ70）。

【０１７３】スクリプト・ファイルに関する処理の開始
時点から各キャストにしたがう画像表示または音の発生
までの時間（開始時間）が遷移時間として定義されてい
る場合には，全キャストから遷移時間を読出してその順
番に並べておき（タイム・テーブル），上記開始時点か
らスタートしたタイマの計時時間と各遷移時間を比較
し，両時間が一致したときに各キャストにしたがう音の
発生または画像表示を行なうようにすることになる（こ
のとき音の発生または画像表示のための前処理に要する
時間を考慮して，少し早目に前処理を行なっておくとよ
い）。

【０１７４】上述したように遷移時間や表示時間の管理
は必ずしも必要ない。キーボードまたはマウスから次の
出力を促す入力がユーザによって与えられたことに応答
して，次の画像および音の出力を開始するようにするこ
とができる。スクリプト・ファイルを設けずに，画像キ
ャストおよび音キャストに，次に出力すべきキャスト
（または分岐テーブル）へのパスを記述しておいてもよ
い。

【図面の簡単な説明】

【図１】マルチメディア・データ作成システムを示すブ
ロック図である。

【図２】マルチメディア・プレゼンテーション・システ
ムに表示される分岐画面を含む一連の画面を示す。

【図３】合成前の自然画を示す。

【図４】合成前の文字画像を示す。

【図５】合成前の文字画像を示す。

【図６】合成画像を示す。

【図７】合体型画像ファイルの構造例を示す。

【図８】メニュー画面における選択領域を示す。

【図９】選択領域の作成例を示す。

【図１０】選択領域の作成例を示す。

【図１１】文字画像の他の例を示す。

【図１２】文字画像の他の例を示す。

【図１３】画像キャストの構造例を示す。

【図１４】音キャストの構造例を示す。

【図１５】スクリプト・ファイルにしたがって発生する
画像および音のシーケンスの例を示す。

【図１６】スクリプト・ファイルにしたがって発生する
画像および音のシーケンスの他の例を示す。

【図１７】スクリプト・ファイルの例を示す。

【図１８】分岐テーブルの例を示す。

【図１９】管理用記録媒体の内容を示す。

【図２０】分岐テーブル作成処理手順を示すフロー・チ
ャートである。

【図２１】分岐テーブルにしたがう再生処理手順を示す
フロー・チャートである。

【図２２】画像キャスト処理を示すフロー・チャートで
ある。

【図２３】スクリプト・ファイルにしたがう再生処理手
順の一例を示すフロー・チャートである。

【図２４】スクリプト・ファイルにしたがう再生処理手
順の一例を示すフロー・チャートである。

【図２５】スクリプト・ファイルにしたがう再生処理手
順の一例を示すフロー・チャートである。

【図２６】スクリプト・ファイルにしたがう再生処理手
順の他の例を示すフロー・チャートである。

【図２７】スクリプト・ファイルにしたがう再生処理手
順の他の例を示すフロー・チャートである。

【符号の説明】

10 コンピュータ・システム 11 ＣＰＵ 15，21，31 ディスク・ドライバ 22 画像再生装置 23 表示装置 32 音再生装置 33 スピーカ

フロントページの続き (56)参考文献 特開 昭63−170779（ＪＰ，Ａ) 特開 平３−77174（ＪＰ，Ａ) 特開 平５−81294（ＪＰ，Ａ) 特開 平４−62670（ＪＰ，Ａ) 特開 平１−123369（ＪＰ，Ａ) 特開 平６−4390（ＪＰ，Ａ) 特開 平１−136227（ＪＰ，Ａ) 特開 平４−333970（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) G06T 1/00 G06F 12/00 G06T 3/00 G06T 11/80 ＣＳＤＢ（日本国特許庁)

Claims (25)

(57)【特許請求の範囲】
1. 【請求項１】 合体型画像ファイルを含む画像ファイル
   をそれらの識別情報と関連づけてあらかじめ第１の記録
   媒体に格納しておき， 合体型画像ファイルには，複数の画像データと，これら
   の画像データの合成に関するデータとを含ませておき， 表示すべき合体型画像ファイルの識別情報と，表示され
   た合体型画像における少なくとも２つの選択領域を表わ
   すデータと，これらの選択領域についての指定入力に応
   じて次に表示すべき画像ファイルへのリンク情報とを含
   む分岐テーブルをあらかじめ第２の記録媒体に格納して
   おき， 分岐テーブルの指定に応答して，その分岐テーブルに記
   述された識別情報によってアクセスされる第１の記録媒
   体の合体型画像ファイルに規定された複数の画像を合成
   して合体型画像を表示し， 表示された合体型画像においてその選択領域の指定入力
   があったときに，分岐テーブルに記述されたリンク情報
   にしたがって次に表示すべき画像ファイルを第１の記録
   媒体においてアクセスする， 合体型画像ファイルを利用した分岐方法。
2. 【請求項２】 音を発生させる音データを含む音ファイ
   ルをそれらの識別情報と関連づけてあらかじめ第３の記
   録媒体に格納しておき， 分岐テーブルには出力させるべき音ファイルの識別情報
   と，次に出力すべき音ファイルへのリンク情報とを記述
   しておき， 分岐テーブルの指定に応答して合体型画像データの表示
   とともに，分岐テーブルに記述された識別情報によって
   アクセスされる第３の記録媒体の音ファイルに格納され
   た音データによって表わされる音を発生し， 選択領域の指定入力があったときに，分岐テーブルに記
   述されたリンク情報にしたがって次に出力すべき音ファ
   イルを第３の記録媒体においてアクセスする，請求項１
   に記載の合体型画像ファイルを利用した分岐方法。
3. 【請求項３】 出力されるべき順序に画像ファイルの識
   別情報と音ファイルの識別情報とを配列したスクリプト
   ・ファイルを第２の記録媒体にあらかじめ格納してお
   き， 分岐テーブルにリンク情報としてスクリプト・ファイル
   へのリンク情報を記述しておく， 請求項１または２に記載の合体型画像ファイルを利用し
   た分岐方法。
4. 【請求項４】 スクリプト・ファイルをアクセスして得
   られる画像ファイルの識別情報と音ファイルの識別情報
   とにしたがって，スクリプト・ファイルに記述された順
   序で第１の記録媒体および第３の記録媒体においてそれ
   ぞれ画像ファイルおよび音ファイルをアクセスし，読出
   した画像ファイルの画像データによって表わされる画像
   を表示し，読出した音ファイルの音データによって表わ
   される音を発生させる，請求項３に記載の合体型画像フ
   ァイルを利用した分岐方法。
5. 【請求項５】 分岐テーブルにリンク情報として他の分
   岐テーブルへのリンク情報を記述しておく，請求項１ま
   たは２に記載の合体型画像ファイルを利用した分岐方
   法。
6. 【請求項６】 選択領域の指定入力が，画面上の選択領
   域を指定するポインティング・ディバイスと，選択領域
   の符号を指定するキー入力装置との両方から可能であ
   る，請求項１から５のいずれか一項に記載の合体型画像
   ファイルを利用した分岐方法。
7. 【請求項７】 合体型画像ファイルに，背景画を表わす
   画像データと，少なくとも２つの文字画像を表わす画像
   データとを含ませておき，少なくとも２つの選択領域を
   上記文字画像を囲むように設定しておく，請求項１から
   ６のいずれか一項に記載の合体型画像ファイルを利用し
   た分岐方法。
8. 【請求項８】 第１の記録媒体，第２の記録媒体および
   第３の記録媒体が同一の記録媒体である，請求項１から
   ６のいずれか一項に記載の合体型画像ファイルを利用し
   た分岐方法。
9. 【請求項９】 第１の記録媒体，第２の記録媒体および
   第３の記録媒体のうちの少なくとも２つが同一の記録媒
   体である，請求項１から６のいずれか一項に記載の合体
   型画像ファイルを利用した分岐方法。
10. 【請求項１０】 複数の画像データとこれらの画像デー
    タの合成に関するデータとを含む合体型画像ファイルを
    含む画像ファイルを，それらの識別情報と関連づけてあ
    らかじめ格納した第１の記録媒体から，指示された合体
    型画像ファイルを読出す第１の読取装置， 表示すべき合体型画像ファイルの識別情報と，表示され
    た合体型画像における少なくとも２つの選択領域を表わ
    すデータと，これらの選択領域についての指定入力に応
    じて次に表示すべき画像ファイルへのリンク情報とを含
    む分岐テーブルをあらかじめ格納した第２の記録媒体か
    ら，指示された分岐テーブルを読出す第２の読取装置， 分岐テーブルの指定に応答して指定された分岐テーブル
    を第２の記録媒体から読出し，読出した分岐テーブルに
    記述された識別情報にしたがって第１の記録媒体から合
    体型画像ファイルを読出し，読出した合体型画像ファイ
    ルに規定された複数の画像を合成して合体型画像を表示
    装置に表示する第１の制御手段， 表示された合体型画像においてその選択領域を指定する
    指定入力手段，ならびに 指定入力装置から選択領域の指定入力があったときに，
    分岐テーブルに記述されたリンク情報にしたがって次に
    表示すべき画像ファイルを第１の記録媒体から読出すよ
    うに制御する第２の制御手段， を備えた合体型画像ファイルを利用した分岐システム。
11. 【請求項１１】 音を発生させる音データを含む音ファ
    イルをそれらの識別情報と関連づけてあらかじめ格納し
    た第３の記録媒体から，指示された音ファイルを読出す
    第３の読取装置を備え， 分岐テーブルには出力させるべき音ファイルの識別情報
    と，次に出力すべき音ファイルへのリンク情報とが記述
    されており， 第１の制御手段は，読出した分岐テーブルに記述された
    識別情報にしたがって第３の記録媒体から音ファイルを
    読出し，読出した音ファイルの音データによって表わさ
    れる音をスピーカから発生させ， 第２の制御手段は，分岐テーブルに記述されたリンク情
    報にしたがって次に出力すべき音ファイルを第３の記録
    媒体から読出すように制御する， 請求項10に記載の合体型画像ファイルを利用した分岐シ
    ステム。
12. 【請求項１２】 指定入力装置が選択領域をカーソルに
    より指し示すマウスである，請求項10または11に記載の
    合体型画像ファイルを利用した分岐システム。
13. 【請求項１３】 指定入力装置が選択領域を表わす符号
    を入力するキーボードである，請求項10または11に記載
    の合体型画像ファイルを利用した分岐システム。
14. 【請求項１４】 第１の記録媒体と第２の記録媒体と第
    ３の記録媒体が同一の記録媒体であり，第１の読取装置
    と第２の読取装置と第３の読取装置が同一の読取装置で
    ある，請求項11に記載の合体型画像ファイルを利用した
    分岐システム。
15. 【請求項１５】 第１の記録媒体と第２の記録媒体と第
    ３の記録媒体の少なくとも２つが同一の記録媒体であ
    り，第１の読取装置と第２の読取装置と第３の読取装置
    の少なくとも２つが同一の読取装置である，請求項11に
    記載の合体型画像ファイルを利用した分岐システム。
16. 【請求項１６】 複数の画像データとこれらの画像デー
    タの合成に関するデータとを含む合体型画像ファイルを
    含む画像ファイルをそれらの識別情報と関連づけて格納
    した第１の記録媒体を用い， 第１の記録媒体から使用する合体型画像ファイルを選択
    し， 選択した合体型画像ファイルにおける複数の画像データ
    のうち，所定の画像データによって表わされる画像を囲
    む選択領域を設定し， 設定した選択領域が指定されたときに次に表示すべき画
    像ファイルを第１の記録媒体において選択し， 選択した合体型画像ファイルの識別符号，設定した選択
    領域を表わすデータ，および選択した次に表示すべき画
    像ファイルへのリンク情報を記述した分岐テーブルを作
    成して第２の記録媒体に格納する， 分岐画面作成方法。
17. 【請求項１７】 所定の画像データによって表わされる
    画像のエッジを抽出し， 抽出したエッジの最小位置座標と最大位置座標を，選択
    領域を表わすデータとする， 請求項16に記載の分岐画面作成方法。
18. 【請求項１８】 最小位置座標から所定値を減算して得
    られる座標と，最大位置座標に所定値を加算して得られ
    る座標とを，選択領域を表わすデータとする，請求項17
    に記載の分岐画面作成方法。
19. 【請求項１９】 音データの音ファイルをそれらの識別
    情報と関連づけて格納した第３の記録媒体を用い， 第３の記録媒体から使用する音ファイルを選択し， 設定した選択領域が指定されたときに次に出力すべき音
    ファイルを第３の記録媒体において選択し， 選択した音ファイルの識別符号，および選択した次に表
    示すべき音ファイルへのリンク情報を記述した分岐ファ
    イルを作成して第２の記録媒体に格納する， 請求項16から18のいずれか一項に記載の分岐画面作成方
    法。
20. 【請求項２０】 画像ファイルの識別符号を含む画像キ
    ャストおよび音ファイルの識別符号を含む音キャストを
    格納した第２の記録媒体において，次に表示すべき画像
    ファイルおよび音ファイルとして，それらの識別符号を
    含む画像キャストおよび音キャストを選択し，これらの
    画像キャストおよび音キャストへのリンク情報を分岐テ
    ーブルに記述する，請求項19に記載の分岐画面作成方
    法。
21. 【請求項２１】 出力されるべき順序に画像ファイルの
    識別情報と音ファイルの識別情報とを配列したスクリプ
    ト・ファイルを格納した第２の記録媒体において，次に
    表示すべき画像ファイルに代えて，スクリプト・ファイ
    ルを選択し，このスクリプト・ファイルへのリンク情報
    を分岐ファイルに記述する，請求項16に記載の分岐画面
    作成方法。
22. 【請求項２２】 次に表示すべき画像ファイルに代え
    て，第２の記録媒体から別の分岐テーブルを選択し，こ
    の分岐テーブルへのリンク情報を分岐ファイルに記述す
    る，請求項16に記載の分岐画面作成方法。
23. 【請求項２３】 第１の記録媒体と第２の記録媒体とが
    同一の記録媒体である，請求項16に記載の分岐画面作成
    方法。
24. 【請求項２４】 第１の記録媒体と第２の記録媒体と第
    ３の記録媒体とが同一の記録媒体である，請求項19に記
    載の分岐画面作成方法。
25. 【請求項２５】 所定の画像データが文字画像を表わす
    データである，請求項16に記載の分岐画面作成方法。