JPH03128586A - 画像のデジタル・データと画像に関連する音響のデジタル・データとの記録，再生方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〈産業上の利用分野〉 本発明は画像のデジタル・データと画像に関連する音響
のデジタル・データとの記録、再生方式（従来の技術） 画像とそれに付随する音声や音楽その他の音などの画像
に関連する音響とを組として記録再生することは、例え
ば有声映画フィルム、ＶＴＲなどにおいて広く行われて
おり、また、近年になって高品質な信号の伝送、記録再
生のために信号をデジタル・データとして伝送、記録再
生することも試みられるようになった。

（発明が解決しようとする課題） ところで１画像とそれに関連する音響とを組のデジタル
・データとして記録し再生しようとする場合には、音響
信号の標本化符号化に当って使用されるべき標本化周波
数として、既存の各種のデジタル伝送、記録再生方式等
において標準化されている標本化周波数が使用されるこ
とが多く、それにより画像信号の各フレーム期間におけ
る音響信号の標本数が整数にならないことも生じる。

例えば、ＮＴＳＣ方式として知られているカラーテレビ
ジョンの標準方式のカラー画像信号のデジタル・データ
と、組にして記録再生する音響信号のデジタル・データ
が、音響信号の標本化符号化に当って使用されるべき標
本化周波数として以前から標準化されている幾つかの標
本化周波数の内から、例えば４８ＫＨ２の周波数値の標
本化周波数を採用して標本化され量子化されたとした場
合を考えると、この場合に前記した標準方式のカラーテ
レビジョン方式におけるフレーム周波数は概略２９．９
７Ｈｚであるから１画像信号の各フレーム毎の音響信号
の標本数が、１６０１．６（＝４８０００／２９．９７
）のように整数ではなくなる。

そのために、デジタルＶＴＲ（Ｄｉ−ＶＴＲ）４：おい
ては１画像信号の５フレ一ム期間を単位として各フレー
ム中の音響信号の標本化数が第１６図中に示されている
ように、画像データの第１番目の１フレ一ム期間ＶＦ５
ｎに対応する音響データの第１番目の１フレ一ム期間Ａ
Ｆ５ｎは標本数が１６００とされ、また１画像データの
第２番目〜第５番目の各１フレ一ム期間Ｖ　Ｆ５ｎ＋１
−Ｖ　Ｆ５ｎ＋４に対応する音響データの第２番目〜第
５番目の各ｌフレーム期間Ａ　Ｆ　５ｎ＋ｌ”　Ａ　Ｆ
　５ｎ◆４の標本数を１６０２としている。

また、例えば、ＰＡＬ方式として知られているカラーテ
レビジョンの標準方式のカラー画像信号のデジタル・デ
ータと、組にして記録再生する音響信号のデジタル・デ
ータが、音響信号の標本化符号化に当って使用されるべ
き標本化周波数として以前から標準化されている幾つか
の標本化周波数の内から、例えば、４８ＫＨｚの周波数
値の標本化周波数を採用して標本化され量子化されたと
した場合を考えると、この場合に前記した標準方式のカ
ラーテレビジョン方式におけるフレーム周波数は２５　
Ｈｚであるから１画像信号の各フレーム毎の音響信号の
標本数は１９２０（＝４８０００／２５　）のように整
数となるから、デジタルＶＴＲ（Ｄｉ−ＶＴＲ）におい
ては１画像信号の各フレーム中の音響信号の標本化数が
第１７図中に示されているように１画像データの各１フ
レ一ム期間ＶＦｎ、ＶＦｎ＋１．Ｖｎ◆２・・・と対応
する音響データの各１フレ一ム期間Ａｎ、ＡＦｎ＋１　
＠　Ａ　ｎ　”　２・・・ｎにおける標本数がすべて１
９２０とされる。

例として挙げたＤｉ−ＶＴＲでは、記録再生の対象にさ
れている画像信号と音響信号との双方の信号は、それぞ
れ標本化量子化して得たデジタル・データを、それに高
能率符号化することなく記録媒体に記録し再生するよう
にしているが、デジタル・データの記録再生に際しては
画像のデジタル・データの何れについても、それぞれ所
定のデータ量毎にまとめて高能率符号化を行うことが考
えられる。

第１８図は４フレ一ム期間の画像データを単位にして画
像データに対する高能率符号化を行うようにした場合の
例であり、４フレ一ム期間における第１番目の１フレ一
ム期間についてはフレーム内符号化を行い、また第２番
目から第４番目の各ｌフレーム期間についてはフレーム
間符号化を行うようにして、データ量の圧縮を図ってい
る。

また、音響信号の高能率符号化としては直交変換を用い
て行うことが一例として考えられるが、特に直交変換を
高速に行うために高速フーリエ変換技術を適用して２の
ｎ乗個のサンプルを符号化する手法が一般的である。第
１９図は音響信号を２のｎ乗個ずつのサンプルを処理単
位として区切る例として、例えば５１２個のサンプルを
処理単位として高能率符号化が行われる場合を例示して
いる。

第２０図は直交変換による高能率符号化方式の一例構成
を示すブロック図であり、高能率符号化の対象にされて
いるデジタル・データが記憶されているメモリから読出
されたデジタル・データは窓関数処理（第２１図参照）
された各１ブロツクのデジタル・データＡ　ｂ　ｎ　ｅ
　Ａ　ｂ　ｎ　＋　１・・・となされて直交変換器にお
いて直交変換されてから量子化器により量子化されて記
録用のデジタル・データとされる。

そして、前記のように記録、再生の対象にされるデジタ
ル・データが高能率符号化されたものの場合には、先に
ＤＩ−ＶＴＲを例にして説明したような問題、すなわち
、１フレーム当りの標本数の問題だけでなく、画像の複
数のサンプルと対応するデジタル・データ群と、音響の
複数のサンプルと対応するデジタル・データ群とにおけ
る区切りの整合がとれなくなることが大きな問題になる
。

（１ｍ！題を解決するための手段） 本発明は画像のデジタル・データと画像に関連する音響
のデジタル・データとについて１画像のデジタル・デー
タを画像の複数のサンプルと対応するデジタル・データ
Ｂ！ｖＦ　ｍ　（ただし、ｍはｌ。

２．３・・・）とし、また、音響のデジタル・データを
音響の複数のサンプルと対応するデジタル・データ群Ａ
Ｆｎ（ただし、ｎはｌ、２．３・）として、前記の各デ
ジタル・データ群ＶＦｍ、ＡＦｎのデジタル・データ列
を記録媒体に記録するときに、互に最も関連するデジタ
ル・データ群ＶＦｉ、ＡＦｊ毎にそれぞれ組とするとと
もに、前記したデジタル・データ群の各組における少な
くとも一方のデジタル・データ群に、それぞれの組毎の
デジタル・データ群間の時間的な関係を示すデジタル・
データを付加しておき、再生時には前記したデジタル・
データ群間の時間的な関係を示すデジタル・データに基
づいて画像とそれに関連する音響との再生出力について
時間軸上の制御を行うようにした画像のデジタル・デー
タと画像に関連する音響のデジタル・データとの記録、
再生方式、及び画像のデジタル・データと画像に関連す
る音響のデジタル・データとについて、画像のデジタル
・データを画像の複数のサンプルと対応するデジタル・
データ群ＶＦｍ（ただし１ｍは１，２．３−）とし。

また、音響のデジタル・データを音響の複数のサンプル
と対応するデジタル・データ群ＡＦｎ（ただし、ｎは１
，２．３・・・）として、前記の各デジタル・データ群
ＶＦｍのデジタル・データ列と前記の各デジタル・デー
タ群ＡＦｎのデジタル・データ列との内の少なくとも一
方を記録媒体に記録するときに、前記したデジタル・デ
ータ群■Ｆｍ、ＡＦｎにおける基準にされるデジタル・
データ群ＶＦｌ、ＡＰＩの時間位置を基準とする相対的
な時刻情報のデータと各デジタル・データ群毎の時間長
のデータとの少なくとも一方のデータも併せて記録する
ようにした画像のデジタル・データと画像に関連する音
響のデジタル・データとの記録方式を提供する。

（作用） 画像のデジタル・データと画像に関連する音響のデジタ
ル・データとについて１画像のデジタル・データを画像
の複数のサンプルと対応するデジタル・データ群ＶＦｍ
（ただし１ｍは１，２．３・　）とし、また、音響のデ
ジタル・データを音響の複数のサンプルと対応するデジ
タル・データ群ＡＦｎ（ただし、ｎは１，２．３・・・
）として、前記した画像の複数のサンプルと対応するデ
ジタル・データｕ−３Ｊ　Ｆ　ｍと、音響の複数のサン
プルと対応するデジタル・データ群ＡＦｎとにおける互
に最も関連するデジタル・データ群ＶＦｉ、ＡＦｊをそ
れぞれ組とするとともに、前記したデジタル・データ群
の各組における少なくとも一方のデジタル・データ群に
、それぞれの組毎のデジタル・データ、群間の時間的な
関係を示すデジタル・データを付加した状態にして１画
像の複数のサンプルと対応するデジタル・データ群ＶＦ
ｍと、音響の複数のサンプルと対応するデジタル・デー
タ群ＡＦｎとを記録媒体に記録する。

前記の画像の複数のサンプルと対応するデジタル・デー
タ群Ｖ　Ｆ　ｍと、音響の複数のサンプルと対応するデ
ジタル・データ群ＡＦｎとが記録されている記録媒体か
らのデジタル・データの再生時には前記したデジタル・
データ群間の時間的な関係を示すデジタル・デ゛−夕に
基づいて画像の再生出力と、前記した画像と関連する音
響の再生出力との時間軸上の相対関係が適正なものとな
るように再生動作を制御する。

また１画像のデジタル・データと画像に関連する音響の
デジタル・データとについて、画像のデジタル・データ
を画像の複数のサンプルと対応するデジタル・データ群
ＶＦｍ（ただし、ｍは１゜２．３・・・）とし、また、
音響のデジタル・データを音響の複数のサンプルと対応
するデジタル・データ群ＡＦｎ（ただし、ｎは１，２，
３・・・）として。

前記の各デジタル・データ群ＶＦｍのデジタル・データ
列と前記の各デジタル・データ群Ａ　Ｆ　ｎのデジタル
・データ列との内の少なくとも一方を記録媒体に記録す
るときに、前記したデジタル・データ群ＶＦｍ、ＡＦｎ
における基準にされるデジタル・データ群ＶＦＩ、ＡＦ
Ｌの時間位置を基準とする相対的な時刻情報のデータと
各デジタル・データ群毎の時間長のデータとの少なくと
も一方のデータも付加データとして併せて記録しておき
。

再生時に前記した付加データを用いて画像のデジタル・
データと音響のデジタル・データとが時間的に正しい対
応関係で再生されるようにする。

それで１本発明の画像のデジタル・データと画像に関連
する音響のデジタル・データとの記録。

再生方式では、デジタル・データ群ＶＦｍ、ＡＦｎの各
組における少なくとも一方のデジタル・データ群に付加
されているそれぞれの組毎のデジタル・データ群間の時
間的な関係を示すデジタル・データや、デジタル・デー
タ群ＶＦｍ、ＡＦｎにおける基準にされるデジタル・デ
ータ群ＶＦＩ、ＡＦＬの時間位置を基準にされる相対的
な時刻情報のデータと各デジタル・データ群毎の時間長
のデータとの少なくとも一方のデータによる付加データ
が再生時に用いられることにより、画像や音響の局所的
な変化によって符号化の処理単位長が変化しても、デジ
タル・データ群ＶＦｍ、ＡＦｎから再生された画像と音
響との時間々係を常に適正なものにできる。

（実施例） 以下、添付図面を参照して本発明の画像のデジタル・デ
ータと画像に関連する音響のデジタル・データとの記録
、再生方式の具体的な内容について詳細に説明する。

第１図乃至第４図と第６図、第９図、第１２図。

第１３図及び第１５乃至第１９図ならびに第２１図はデ
ジタル・データの配置の説明図、第５図。

第７図と第８図及び第１０図と第１１図ならびに第１４
図と第２０図はそれぞれ信号処理手段の一部の構成例を
示すブロック図である。

第１図は本発明の画像のデジタル・データと画像に関連
する音響のデジタル・データとの記録。

再生方式における画像のデジタル・データと画像に関連
する音響のデジタル・データとの対応関係の概略を説明
するための図である。

第１図の（ａ）は時間軸上で引続く画像信号（映像信号
）■の順次の１フレ一ム期間１，２，３・・・を所定の
フレーム数（実施例においては所定のフレーム数を４と
している）の期間毎に区切って。

時間軸上で引続く画像信号Ｖが順次の４フレ一ム期間を
単位とする画像処理ブロックに分割されている状態を例
示した図である。なお、前記の１画像処理ブロックの構
成に用いられるフレーム数は。

画像信号に適用される高能率符号化の種類、その他の諸
条件に応じて定められる。

次に、第１図の（ｂ）は、第１図の（ａ）に示されてい
る各４フレーム毎の画像信号（各１画像処理ブロック毎
の画像信号）の複数のサンプルと対応する各デジタル・
データ群ＶＦＩ、ＶＦ２・・・（一般的には１ｍを１．
２．３・・・とじて、Ｖ　Ｆ　ｍのように表現される）
を示しているものであるが１図示の例では、各４フレー
ム毎の画像信号（各１画像処理ブロック毎の画像信号〉
の複数のサンプルと対応する各デジタル・データ群ＶＦ
Ｉ、ＶＦ２・・・のそれぞれの時間長が画像信号の４フ
レ一ム期間と一致している場合が示されている（この点
は実施例の説明に使用されている各図についても同様で
ある）。

さらに第１図の（Ｃ）′は、第１図の（ａ）に示されて
いる画像信号に関連する音響信号Ａのデジタル・データ
について、前記した各４フレーム毎の画像信号（各１画
像処理ブロック毎の画像信号）に最も関連している音響
の複数のサンプルと対応するデジタル・データのブロッ
クを各１群のデジタル・データ群ＡＦＬ、ＡＦ２・（一
般的には、ｎ＆１゜２．３・・・とじて、ＡＦｎのよう
に表現される）とすることを例示しているものであるが
、音響信号の各１群のデジタル・データ群ＡＦＩ、ＡＦ
２・・・のそれぞれの時間長と、各４フレーム毎の画像
信号（各１画像処理ブロック毎の画像信号）の複数のサ
ンプルと対応する各デジタル・データ群ＶＦＩ。

ＶＦ２・・・のそれぞれの時間長とは既述したような理
由によって一致しないことが多く、そのために第１図の
（Ｑ）では音響信号の各１群のデジタル・データ群ＡＦ
Ｌ、ＡＦ２・・・のそれぞれにオフセットが付された状
態のものになされている。

なお、第１図の（ｃ）に例示されている音響信号の各１
群のデジタル・データ群ＡＦＩ、ＡＦ２・・・は、時間
軸上で連続している音響信号を所定の標本化周期で標本
化、符号化して得たデジタル・データが窓関数処理され
てから直交変換された後に符号化された５１２個（５１
２サンプル）ずつの各１ブロツクのデジタル・データが
、隣接するブロック間で６４サンプルの重複期間（オー
バーラツプ期間）を有する状態のものとして、それぞれ
所定のブロック数のデジタル・データにより構成されて
いる場合を示しているが、この点は第２図以降の音響信
号の各１群のデジタル・データ群ＡＦＬ。

ＡＦ２・・・についても同じである。

第２図は例えばＮＴＳＣ方式として知られているカラー
テレビジョンの標準方式のカラー画像信号のデジタル・
データと、組にして記録再生する音響信号のデジタル・
データが、音響信号の標本化符号化に当って使用される
べき標本化周波数として以前から標準化されている幾つ
かの標本化周波数の内から、４８ＫＨｚの周波数値の標
本化周波数を採用して標本化され量子化されたとした場
合を例として、第１図（及び第２図）の（ａ）に示され
ている４フレームの画像信号（１画像処理ブロック毎の
Ｉｉｉ倣信分信号についての複数のサンプルと対応する
第１図（及び第２図）の（ｂ）に示されているデジタル
・データ群ＶＦｍと、第１図（及び第２図）の（ａ）に
示されている画像信号Ｖに関連する音響信号Ａのデジタ
ル・データについて、前記した各４フレーム毎の画像信
号（各１画像処理ブロック毎の画像信号）に最も関連し
ている音響の複数のサンプルと対応する第１図（及び第
２図）の（ｃ）のデジタル・データ群Ａ　Ｆ　ｎとの関
係及びオフセットとについて１画像信号のデジタル・デ
ータ群ＶＦＩと音響信号のデジタル・データ群ＡＰＩと
を代表例にして具体的に説明するための図である。

今、前記した標準方式のカラーテレビジョン方式におけ
るフレーム周波数が概略２９．９７Ｈｚであり、また、
音響信号の標本化に用いられる標本化信号の周波数が４
８ＫＨｚであるとした場合には１画像信号のｌフレーム
毎の音響信号の標本数は１６０１．６（！４８０００／
２９．９７）となるから、１画像処理ブロック（４フレ
一ム期間）毎の音響信号の標本数は４Ｘ１６０１．６＝
６４０６．４となる。

そして、音響信号のデジタル・データ群ＡＦｎは１時間
軸上で連続している音響信号を所定の標本化周期で標本
化、符号化して得たデジタル・データが窓関数処理され
てから直交変換された後に符号化された５１２個（５１
２サンプル）ずつの各１ブロツクのデジタル・データが
、隣接するブロック間で６４サンプルの重複期間（オー
バーラツプ期間）を有している状態のもので構成されて
いたとすると、前記した１画像処理ブロック（４フレ一
ム期間）当りの音響信号によるデジタル・データのブロ
ック数は１４．３というように端数がついたものになる
。

第２図の（ｃ）と第２図の（ｄ）との間に記載されてい
る数値の内で、６４０６．６の数値は既述した１画像処
理ブロック（４フレ一ム期間）毎の音響信号の標本数〈
サンプル数）であり、また、６７８４の数値は音響信号
によるデジタル・データのブロックが第１番目のものの
始めの部分から第１５番目のものの終りの部分までを１
群とした場合の・・１群中のサンプル数を示し、さらに
６７２０の数値は音響信号によるデジタル・データのブ
ロックが第１番目のものの始めの部分から第１５番目の
ものの終りから６４サンプル前までの部分を１群−とし
た場合の１群中のサンプル数を示している。

そして、第２図は１画像処理ブロック（４フレ一ム期間
）と対応して設定された音響信号によるデジタル・デー
タ群ＡＰＩが、デジタル・データの第■番目のブロック
の始めの部分から第１５番目のブロックの終りから６４
サンプル前までのサンプル数が６７２０の１群の音響信
号によるデジタル・データ群とされている場合の例であ
る。

第３図は第２図に示した画像信号のデジタル・データ群
ＶＦＩや音響信号のデジタル・データ群ＡＦ１に後続し
ている画像信号のデジタル・データ群Ｖ　Ｆ２．　’Ｖ
　Ｆ３や音響信号のデジタル・データ群ＡＦＩ、ＡＦ２
．ＡＦ３の具体的な内容を例示したものであり、第３図
においてローマ数字■を付してまとめである第３図の（
ａ）、（ｂ）、（ｃ）の部分は、既述した第２図の（ｂ
）〜（ｄ）の部分と同一の内容を示している部分であり
、また、第３図においてローマ数字用を付してまとめで
ある第３図の（ｄ）、（ｅ）、（ｆ）の部分における第
３図の（ｄ）の部分は、画像信号のデジタル・データ群
ＶＦＩに後続する画像信号のデジタル・データ群ＶＦ２
を示しており、また第３図の（ｆ）の部分は音響信号の
デジタル・データ群ＡＰＩに後続する音声信号のデジタ
ル・データ群ＡＦ２を示し、さらに第３図の（ｅ）の部
分は、音響信号のデジタル・データ群ＡＰＩに後続する
音声信号のデジタル・データ群ＡＦ２のデータの内容、
すなわち音響信号によるデジタル・データのブロックが
第１６番目のものの始めの部分から第２９番目のものの
終りから６４サンプル前までの６２７２サンプルによる
１４ブロツクを示している。

なお、第３図の（ｅ）と（ｆ）との間に記載されている
数値６２７２（＋６４）における括弧内の＋６４の数値
は、音声信号のデジタル・データ群ＡＦ２の音響信号に
よるデジタル・データのブロックの第１６番目のものの
始めの部分から第２９番目のものの終りまでのサンプル
数は６２７２＋６４である、ということを意味している
。他の図中における括弧内の＋６４の数値も同様な意味
合いで使用されるものとして記載されている。

次に、第３図においてローマ数字■を付してまとめであ
る第３図の（ｇ）、（ｈ）、（ｉ）の部分における第３
図の（ｇ）の部分は１画像信号のデジタル・データ群Ｖ
Ｆ２に後続する画像信号のデジタル・データ群ＶＦ３を
示しており、また第３図の（ｉ）の部分は音響信号のデ
ジタル・データ群ＡＦ２に後続する音声信号のデジタル
・データ群ＡＦ３を示し、さらに第３図の（ｈ）の部分
は、音響信号のデジタル・データ群ＡＦ２に後続する音
声信号のデジタル・データ群ＡＦ３のデータの内容、す
なわち音響信号によるデジタル・データのブロックが第
３０番目のものの始めの部分から第４３番目のものの終
りから６４サンプル前までの６２７２サンプルによる１
４ブロツクを示している。

第３図においては画像信号のデジタル・データ群ＶＦＩ
〜ＶＦ３までと音響信号のデジタル・データ群ＶＦＩ−
ＶＦ３までとの具体的な内容だけを例示したが、画像信
号のデジタル・データ群ＶＦ４以降のものと音響信号の
デジタル・データ群ＶＦ４以降のものとの対応関係も順
次に前記の場合と同様にして定められるべきことは容易
に理解できるところである。

第３図の（ｅ）に示されている３　１３．６の数値と、
第３図の（ｈ）に示されている１７９．２の数値とはそ
れぞれ前記した第１図中にオフセットと表示しである部
分に対応しているオフセット値であって、音響信号のデ
ジタル・データ群ＡＦ２の頭の部分は画像信号のデジタ
ル・データ群ＶＦ２の頭の部分から第３図の（、）に示
されている３１３．６のサンプル数に相当する時間だけ
ずらされており、また、音響信号のデジタル・データ群
ＡＦ３の頭の部分は画像信号のデジタル・データ群ＶＦ
３の頭の部分から第３図の（ｈ）に示されている１　７
９．２のサンプル数に相当する時間だけずらされている
。

そして、前記した第３図の（ｅ）に示されている３　１
３．６のオフセット値は、第３図の（ｂ）、（０）に示
されている音響信号のデジタル・データ群ＡＦ１の一部
が、第３図の（ａ）に示されている画像信号のデジタル
・データ群ＶＦＩの終りの部分からはみ出している部分
に含まれているサンプル数であり、また、前記した第３
図の（ｈ）に示されている１　７９．２のオフセット値
は、第３１１の（ｅ）。

（ｆ）に示されている音響信号のデジタル・データ群Ａ
Ｆ２の一部が、第３図の（ｄ）に示されている画像信号
のデジタル・データ群ＶＦ２の終りの部分からはみ出し
ている部分のサンプル数である。

それで、第３図中のローマ数値のｔ、ｎ、ｍで示されて
いる各部分における互に対応する部分を順次に接続する
と、順次の画像信号のデジタル・データ群ＶＦＩ、ＶＦ
２．ＶＦ３・・・と順次の音響信号のデジタル・データ
群ＡＦＬ、ＡＦ２．ＡＦ３・・・とは、時間軸上で第１
図に例示されているような配列状態になされることは明
らかである。

ところで、順次の画像信号のデジタル・データ群ＶＦＩ
、ＶＦ２．ＶＦ３・・・と順次の音響信号のデジタル・
データ群ＡＦＬ、ＡＦ２．ＡＦ３・・・とが第１図に示
されている状態の対応関係にある場合に。

再生動作が画像信号のデジタル・データ群の先頭の部分
と音響信号のデジタル・データ群の先頭の部分とが一致
している関係にある画像信号のデジタル・データ群ＶＦ
ｍと音響信号のデジタル・データ群ＡＦｎとの先頭の部
分から開始された場合。

例えば第１図中に示されている画像信号のデジタル・デ
ータ群ＶＦＩと音響信号のデジタル・データ群ＡＰＩと
の初めの部分から再生動作が開始されたような場合には
再生上で何の支障も生じることがない。

しかし１画像信号のデジタル・データ群の先頭の部分と
音響信号のデジタル・データ群の先頭の部分とがずれて
いる関係にある画像信号のデジタル・データ群ＶＦｍと
音響信号のデジタル・データ群Ａ　Ｆ　ｎとの先頭の部
分から開始された場合、例えば第１図中に示されている
画像信号のデジタル・データ群ＶＦ２と音響信号のデジ
タル・データ群ＡＦ２との初めの部分から再生動作が開
始されたような場合には再生された画像信号と再生され
た音響信号との間には、常に前記したオフセットに対応
する時間ずれが生じている状態で再生動作が行われるこ
とになるという不都合が生じてしまうことになる。

そこで１本発明の画像のデジタル・データと画像に関連
する音響のデジタル・データとの記録。

再生方式においては、画像のデジタル・データと画像に
関連する音響のデジタル・データとについて、画像のデ
ジタル・データを画像の複数のサンプルと対応するデジ
タル・データ群ＶＦｍ（ただし、ｍは１．２．３・・・
）とし、また、音響のデジタル・データを音響の複数の
サンプルと対応するデジタル・データ群ＡＦｎ（ただし
、ｎは１，２゜３・・・）として、前記した画像の複数
のサンプルと対応するデジタル・データ群ＶＦｍと、音
響の複数のサンプルと対応するデジタル・データ群ＡＦ
ｎとにおける互に最も関連するデジタル・データ群Ｖ　
Ｆ　ｚ　ｅ　Ａ　Ｆ　ｊをそれぞれ組とするとともに、
前記したデジタル・データ群の各組における少なくとも
一方のデジタル・データ群に、それぞれの組毎のデジタ
ル・データ群間の時間的な関係を示すデジタル・データ
を付加した状態にして、ｗ像の複数のサンプルと対応す
るデジタル・データ群Ｖ　Ｆ　ｍと、音響の複数のサン
プルと対応するデジタル・データ群ＡＦｎとを記録媒体
に記録して、前記の画像の複数のサンプルと対応するデ
ジタル・データ群ＶＦｍと、音響の複数のサンプルと対
応するデジタル・データ群Ａ　Ｆ　ｎとが記録されてい
る記録媒体からのデジタル・データの再生時には前記し
たデジタル・データ群間の時間的な関係を示すデジタル
・データに基づいて画像の再生出力と、前記した画像と
関連する音響の再生出力との時間軸上の相対関係が適正
なものとなるように再生動作を制御するようにしたり１
画像のデジタル・データと画像に関連する音響のデジタ
ル・データとについて、画像のデジタル・データを画像
の複、数のサンプルと対応するデジタル・データ群ＶＦ
ｍ（ただし１ｍは１，２．３・・・）とし、また、音響
のデジタル・データを音響の複数のサンプルと対応する
デジタル・データ群Ａ　Ｆ　ｎ　（ただし、ｎは１．２
．３・・・）として、前記の各デジタル・データ群Ｖ　
Ｆ　ｍのデジタル・データ列と前記の各デジタル・デー
タ群ＡＦｎのデジタル・データ列との内の少なくとも一
方を記録媒体に記録するときに。

前記したデジタル・データ群ＶＦｍ、ＡＦｎにおける基
準にされるデジタル・データ群ＶＦＩ、ＡＰＩの時間位
置を基準とする相対的な時刻情報のデータと各デジタル
・データ群毎の時間長のデータとの少なくとも一方のデ
ータも付加データとして併せて記録しておき、再生時に
前記した付加データを用いて画像のデジタル・データと
音響のデジタル・データとが時間的に正しい対応関係で
再生されるようにしたりすることにより、デジタル・デ
ータ群Ｖ　Ｆ　ｍ　ｅ　Ａ　Ｆ　ｎの各組における少な
くとも一方のデジタル・データ群に付加されているそれ
ぞれの組毎のデジタル・データ群間の時間的な関係を示
すデジタル・データや、デジタル・データ群ＶＦｍ、Ａ
Ｆｎにおける基準にされるデジタル・データ群ＶＦＩ、
ＡＰＩの時間位置を基準にされる相対的な時刻情報のデ
ータと各デジタル・データ群毎の時間長のデーターとの
少なくとも一方のデータによる付加データを再生時に用
いて１画像や音響の局所的な変化によって符号化の処理
単位長が変化しても、デジタル・データ群ＶＦｍ、ＡＦ
ｎから再生された画像と音響との時間関係を常に適正な
ものにできるようにしたのである。

第４図及び第６図は前記した第３図を参照して既述した
ようにして構成された画像信号のデジタル・データ群Ｖ
Ｆｍと音響信号のデジタル・データ群Ａ　Ｆ　ｎとを用
いて構成させた記録用のデータ配列を例示したものであ
り、第４図及び第６図において８１．　Ｓ２・・・はセ
グメント同期信号、Ｔ１゜Ｔ２・・・は画像信号のデジ
タル・データ群ＡＦｍと、それと組となる音響信号のデ
ジタル・データ群ＶＦｎとにおける少なくとも一方のデ
ジタル・データ群に付加されるべき、それぞれの組毎の
デジタル・データ群間の時間的な関係を示すデジタル・
データ、または１画像信号のデジタル・データ群ＶＦｍ
と音響信号のデジタル・データ群ＡＦｎにお′ける基準
にされるデジタル・データ群ＶＦＩ、ＡＰＩの時間位置
を基準とする相対的な時刻情報のデータと各デジタル・
データ群毎の時間長のデータとの少なくとも一方のデー
タ、などのような時間情報の付加データである。

前記した時間情報の付加データとしては、例えば前記し
たオフセット値が使用できることは明らかである。なお
、第３図を参照して例示したオフセット値は、３１３．
６，１７９．２のように小数点以下の数値を有するもの
であったが、１サンプル程度の時間差（２０，８μＳ）
における信号の変化は微小なので、実用上においては前
記のオフセット値における小数点以下を切捨てて３１３
．１７９のような数値を時間情報の付加データとして使
用してもよい。

第４図中におけるＳｌ’、８２’・・・は前記した時間
情報ＴＩ、　Ｔ２・・・のための同期信号、Ｓｌ”、　
８２”・・・は音響信号のデジタル・データ群Ａ　Ｆ　
ｎの同期信号である。第４図示の記録用のデータ配列と
第６図示の記録用のデータ配列との違いは、第６図示の
記録用のデータ配列では同期信号としてセグメント同期
信号Ｓｔ、　８２・・・だけが使用されているのに対し
て、第４図示のデータ配列では同期信号としてセグメン
ト同期信号８１．　Ｓ２・・・の他に１時間情報ＴＩ、
　Ｔ２・・・のための同期信号８１’、Ｓ２’・・・や
音響信号のデジタル・データ群ＡＦｎの同期信号８１”
、８２”・・・をも設けである点である。

なお、第４図及び第５図示の記録用のデータ配列におい
ては１時間情報の付加データを音響信号のデジタル・デ
ータ群ＡＦｎに前置させであるが。

時間情報の付加データは画像信号のデジタル・データ群
ＶＦｍに前置させて設けたり、あるいは音響信号のデジ
タル・データ群Ａ　Ｆ　ｎと画像信号のデジタル・デー
タ群ＶＦｍとの双方に前置させて設けるようにしてもよ
い。

記録用のデータ配列が第４図に示されるものである場合
には、再生側の構成態様が例えば第５図に示されるよう
なものとなり、また、記録用のデータ配列が第６図に示
されるものである場合には。

再生側の構成態様が例えば、後述されている第７図に示
されるようなものとなる。

第１１図は前記した記録用のデータ配列を構成させる回
路配置の一例を示す（ただし、この第１１図では画像信
号を標本化量子化して得た画像信号のデジタル・データ
群ＡＦｍと、前記した画像信号と関連する音響信号を標
本化量子化して得た前記の画像信号のデジタル・データ
群ＡＦｍと組となる音響信号のデジタル・データ群ＶＦ
ｎとを時間軸上に順次に配列するようにした構成部分だ
けを示しており、第４図や第６図に示されている記録用
のデータにおける時間情報の付加データＴや各種の同期
信号などを付加するための構成部分についての図示は省
略している）、また、第１２図は第１１図示の回路配置
の動作を説明するためのタイミングチャートである。

第１１図において１は画像信号の入力端子、２は音響信
号の入力端子、３は画像信号のエンコーダ、４はフレー
ムカウンタ、５は音響信号のエンコーダ、６，９．１２
はマルチプレクサ、７は分周器、８はＤ型フリップフロ
ップ、１０．１１はメモリである。

入力端子１に供給された画像信号は画像信号のエンコー
ダ３において標本化量子化符号化されて順次に第１２図
の（ａ）に示されているように、１画像処理ブロック毎
の画像信号のデジタル・データ群（画像データのセグメ
ント）ＶＰ２ｎ、　ＶＦ２ｎ◆１・・・となされてマル
チプレクサ６に与えられる。また１画像信号のエンコー
ダ３からはフレーム周期の信号がフレームカウンタ４に
与えられ、フレームカウンタ４からは第１２図の（ｂ）
に示す信号ＣＫＶ４が分周器７と音響信号のエンコーダ
５とに供給される。

前記の分局器７からは第１２図の（ｃ）に示すような画
像データのセグメント信号ＧＶＩが出力され、この画像
データのセグメント信号Ｇｖｌはマルチプレクサ６に切
換信号として供給されるとともに、Ｄ型フリップフロッ
プ８のデータ端子にも供給する。

また、入力端子２に供給された音響信号は音響信号のエ
ンコーダ５において標本化量子化符号化されて順次に第
１２図の（ｆ）に示されているように音響信号のデジタ
ル・データ群（音響データのセグメント）Ａ　Ｆ２ｎ、
　Ａ　Ｆ２ｎ＋１・・・となされてマルチプレクサ９に
供給される。

音響信号のエンコーダ５からは第１２図の（ｄ）に示さ
れているようなブロック信号ＣＫＡＩが出力されて、前
記したＤ型フリップフロップ８にクロック信号として供
給される。ブロック信号ＣＫＡｌは既述した音響信号に
よるデジタル・データのブロック（第３図を参照して説
明した例においては１ブロツクは５１２−６４＝４４８
サンプル）毎に出力される信号である。

それで第１１図示の回路配置では、画像信号のエンコー
ダ３から時間軸上に直列的に出力される１画像処理ブロ
ック毎の画像信号のデジタル・データ群（画像データの
セグメント）Ｖ　Ｆ２ｎ、　Ｖ　Ｆ２ｎ◆１・・・を、
マルチプレクサ６が第１２図の（ｃ）に示されている画
像データのセグメント信号ＧＶＩによって１画像データ
のセグメントを順次交互にメモリ１０とメモリ１１とに
供給する。

また、音響信号のエンコーダ５から時間軸上に直列的に
出力される音響信号のデジタル・データ群（音響データ
のセグメント）　Ａ　Ｆ　２ｎ、　Ａ　Ｆ　２ｎ＋１・
・・は、マルチプレクサ９が第１２図の（ａ）に示され
ているＤ型フリップアロツブの出力信号ＧＡＩによって
、音響データのセグメントを順次交互にメモリ１０とメ
モリ１１とに供給する。

すなわち、メモリ１０．１１に記憶される画像信号のデ
ジタル・データ群（画像データのセグメント）ＶＦ２ｎ
、　ＶＦ２ｎ＋１・・・と音響信号のデジタル・データ
群（音響データのセグメント）ＡＦ２ｎ、ＡＦ２ｎ◆１
・・・とは、第１１図中のメモリ１０．１１中に例示し
であるように、メモリ１０に画像信号のデジタル・デー
タ群（画像データのセグメント）ＶＦ２ｎと音響信号の
デジタル・データ群（音響データのセグメント）ＡＦ２
ｎとが記憶されたときは、メモリ１１にと画像信号のデ
ジタル・データ群（画像データのセグメント）ＶＦ２ｎ
＋１と音響信号のデジタル・データ群（音響データのセ
グメント）ＡＦ２ｎ◆１とが記憶されるというように、
Ｉｉ像信号のデジタル・データ群（画像データのセグメ
ント）とそれと組になる音響信号のデジタル・データ群
（音響データのセグメント）とが、２つのメモリ１０゜
１１に順次交互に記憶されるのである。

前記のようにしてメモリ１０．１１に記憶される画像信
号のデジタル・データ群（画像データのセグメント）と
それと組になる音響信号のデジタル・データ群（音響デ
ータのセグメント）とは、第１２図の（ａ）、（ｆ）に
示されるような対応関係のもの、すなわち、第１図、第
３図に示されるように所定のオフセットが付されている
状態のものになされている。

前記したメモリ１０．１１では、それの一方のものが書
込み動作を行っている際には他方のものが読出し動作を
行うというように、書込み動作と読出し動作とが順次交
互に行われる。

そして、前記したメモリ１０．１１から読出された画像
信号のデジタル・データ群（画像データのセグメント）
とそれと組になる音響信号のデジタル・データ群（音響
データのセグメント）とには、それに時間情報の付加デ
ータＴや、各種の同期信号などが図示されていない構成
部分で付加されて、マルチプレクサ１２を介して出力さ
れることにより第４図あるいは第６図に示されるような
記録用データ配列の信号となされる。

記録用のデータが第３図示のようなものの場合における
オフセット値の最大値は５１１となるから、この場合の
時間情報の付加データＴには９ビツト必要である。また
、オフセット値は必らずしも正値でなくともよく、オフ
セット値を＋２５５〜−２５６としてもよい（この場合
にも必要なビット数は９ビツトとなる）。

第１３図は音響信号の各ブロックｎ、ｎ＋１゜ｎ＋２・
・・と、前記した音響信号の各ブロックｎ。

ｎ＋１．ｎ＋２・・・について符号化を行って得た符号
化データとの時間軸上での関係を示す図である。

第１３図中のＣＫＡＩは第１１図において記述した第１
２図の（ｄ）に示されているブロック信号ＣＫＡＩであ
る。

第１４図は画像信号のデジタル・データ群（画像データ
のセグメント）とそれと組になる音響信号のデジタル・
データ群（音響データのセグメント）に付加されるべき
時間情報の付加データＴとして、既述のオフセット値が
用いられる場合のオフセット値の算出回路の一例構成を
示すブロック図である。

第１４図において４６は例えば画像信号のエンコーダ３
から供給されるフレーム周期の信号の入力端子、４９は
フレームカウンタであり、フレームカウンタ４からは第
１５図の（ｂ）（第１２図の（ｂ））に示す信号ＣＫＶ
４が出力されて、オフセットカウンタ５０にリセット信
号として供給されるとともに、セットリセットフリップ
フロップ５１にセット信号として供給される。

前記したオフセットカウンタ５０には入力端子４７から
標本化周期（４８ＫＨ２）のクロック信号ＣＫｆ　ｓ（
第１５図の（ｂ））が与えられていて、前記したオフセ
ットカウンタ５０は、前記した第１５図の（ｂ）に示す
信号ＣＫＶ４によってリセットされた後に、標本化周期
のクロック信号ＣＫｆｓを計数してレジスタ５２に与え
る。

第１５図の（ａ）は前記したオフセットカウンタ５０の
計数値の変化状態を示している。前記した信号ＣＫＶ４
がセット信号として供給されているセットリセットフリ
ップフロップ５１のＱ出力が与えられているアンド回路
５３は、前記したセットリセットフリップフロップ５１
のＱ出力が与えられた時点以後に初めて入力端子４８か
ら第１５図の（ｅ）に示されているブロッククロツタ信
号ＣＫＡ２が供給された時点にレジスタ５３に信号を与
えるとともに、その信号により前記したセットリセット
フリップフロップ５１をリセットする。

それにより、前記したレジスタ５２からは前記した信号
ＣＫＶ４の時点、すなわち、画像信号のデジタル・デー
タ群（画像データのセグメント）の頭の部分から音響信
号のデジタル・データ群（音響データのセグメント）中
の最初に呪われたブロッククロック信号ＣＫＡ２の出現
の時点までにオフセットカウンタ５０が計数した計数値
をオフセット値（第１５図の（ｆ））として出力する。

このオフセット値は前記した時間情報の付加データＴと
して用いられうろことはいうまでもない。

第５図は、記録用のデータ配列が第４図に例示されてい
る場合の再生側の一部構成を示すブロック図であり、ま
た、第７！！Ｉは記録用のデータ配列が第６図に例示さ
れている場合の再生側の一部構成を示すブロック図であ
る。

まず、第５図示の回路配置において、入力端子１３に供
給された第４図示のような入力データは。

データ分離回路１５によっ、て画像信号のデジタル・デ
ータ群（画像データのセグメント）と、音響信号のデジ
タル・データ群（音響データのセグメント）と１時間情
報の付加データＴとに分離されて、画像信号のデジタル
・データ群は画像データのデコーダ１７によって復号さ
れＤＡ変換された後にモニタ受像機１８に供給されて画
像として再現される。

また、音響信号のデジタル・データ群（音響データのセ
グメント）は音響データのデコーダ１９に供給されるが
、この音響データのデコーダ１９には連続再生検出回路
１６から連続再生スタート信号（第９図の（ｂ））が供
給されるとともに、オフセットメモリ２１から時間情報
が供給されている。

すなわち、連続再生検出回路１６は再生装置における再
生動作の開始時に発生されて入力端子１４に供給される
連続再生スタート信号（第９図の（ｂ））を検出して、
それを音響データのデコーダ１９に与え、またデータ分
離回路１．５で分離された時間情報の付加データＴが供
給されたオフセットメモリ２１ではオフセット値を記憶
し、それを音響データのデコーダ１９に与えている。

音響データのデコーダ１９では、連続再生中の場合には
オフセット値を無効とした状態で音響データの処理を行
い、また、連続再生の状態でない場合にはオフセット値
だけの時間だけ音響が遅れて生じるような音響データの
処理動作を行って、音響と画像との時間軸上でのずれが
補正された状態とした上で、音響データを復号し、ＤＡ
変換した後に音響信号再生袋ｆ［２０によって音響信号
をスピーカから音響として放音する。

次に、第７図示の回路配置において、入力端子２２に供
給された第６図示のような入力データは、切換制御口ｖ
＆２４によって切換制御されているマルチプレクサ２３
によって画像信号のデジタル・データ群（画像データの
セグメント〉が画像データのデコーダ２５に与えられ、
また、音響信号のデジタル・データ群（音響データのセ
グメント）が音響データのデコーダ２７に与えられ、さ
らに時間情報の付加データＴが時間情報の付加データの
デコーダ２６に供給される。

前記した切換制御回路２４は前記した画像データのデコ
ーダ２５と音響データのデコーダ２７と。

時間情報の付加データのデコーダ２６によって検出され
たそれぞれの同期信号が供給されることにより、所定の
切換動作を行うことができる。

画像信号のデジタル・データ群は画像データのデコーダ
１７によって復号されＤＡ変換された後に画像信号をモ
ニタ受像機に供給し、また、音響信号のデジタル・デー
タ＃（音響データのセグメント）は音響データのデコー
ダ２７において９時間情報の付加データのデコーダ２６
から供給されている時間情報と連続再生検出回路１６か
ら供給されている連続再生スタート信号（第９図の（ｂ
））とによって、連続再生中の場合にはオフセット値を
無効とした状態で音響データの処理を行い、また、連続
再生の状態でない場合にはオフセット値だけの時間だけ
音響が遅れて生じるような音響データの処理動作を行っ
て、音響と画像との時間軸上でのずれが補正された状態
とした上で、音響データを復号し、ＤＡ変換した後に再
生信号を音響信号再生装置に供給する。

第８図は前記した音響データのデコーダ２７における一
部の構成の具体的な回路配置、を示すブロック図であり
、第８図において２８は音響復号データの入力端子、２
９は標本化周期の信号の入力端子、３０は時間情報の入
力端子、３１は連続再生スタート検出信号の入力端子、
３２は復号データのメモリ、３３はレジスタ、３４はデ
ジタル・アナログ変換器、３５はメモリ・リード・カウ
ンタ、３６はアンド回路、３７はタイマ・カウンタ、３
８はオフセット・メモリ、３９はオア回路である。

第８図において入力端子３０に供給された時間情報はオ
フセット・メモリ３８に記憶されて、オフセット・メモ
リ３８に記憶されたオフセット値は、タイ÷・カウンタ
３７をプリセットする。

タイマ・カウンタ３７は入力端子２９に供給されている
標本化周期の信号（４８ＫＨｚのクロック）を計数して
おり、その計数値がプリセットされていた数値に達した
ときに出力パルスをオア回路３９を介してアンド回路３
６に供給する。

アンド回路３６には前記した標本化周期の信号（４８Ｋ
Ｈｚのクロック）も供給されているから。

アンド回路３６からは前記したタイマ・カウンタ３７か
らの出力パルスとその時点における標本化周期の信号と
によってメモリ・リード・カウンタ３５の動作を開始さ
せる。それにより復号データメモリ３２からは音響信号
の復号データが順次に読出されてレジスタ３３を介して
デジタル・アナログ変換器３４に供給される。デジタル
・アナログ変換器３４ではそれに供給された音響信号の
復号データをデジタル・アナログ変換したアナログ信号
の音響信号を出力する。

第８図における上記の動作は１例えば第９図の（ａ）に
示されている＃（Ｎ＋１）番目の音響信号のデジタル・
データ群（音響データのセグメント）と対応して第９図
の（ｂ）に示されている連続再生スタート信号がローレ
ベルの状態からハイレベルの状態に変化して、＃（Ｎ＋
１）番目の音響信号のデジタル・データ群（音響データ
のセグメント）から再生動作が行われるようになされた
場合についてのものであり、この場合には音響の再生開
始のタイミングは画像の再生開始のタイミングに比べて
、既述したオフセット値に対応する時間だけ遅れて開始
されるようになされるのである。

前記した＃（Ｎ＋１）番目の音響信号のデジタル・デー
タ群（音響データのセグメント）に後続する＃（Ｎ＋２
）番目以降の音響信号のデジタル・データ　。

群（音響データのセグメント）の再生動作が、前記した
＃（Ｎ＋１）番目の音響信号のデジタル・データ群（音
響データのセグメント）の再生動作に引続いて行われる
場合には、第８図中のオア回路３９に供給されている第
９図の（ｂ）に示されている連続再生スタート信号がハ
イレベルの状態にあるために、前記したタイマ・カウン
タ３７の出力信、号は動作には寄与することがない、す
なわち、＃（Ｎ＋２）番目以降の音響信号のデジタル・
データ群（音響データのセグメント）に付加されている
時間情報は無効にされて使用されることがない。

前記した第８図示の回路配置は記録用のデータにおける
オフセット値が１例えば第３図に示されている例のよう
にすべて正値だけの場合について使用されるのであるが
、正負のオフセット値がある場合には第１０図に例示さ
れているような回路配置を用いればよく、第１０図にお
いて４０はデータ・ロード信号の入力端子、４１は時間
情報の入力端子、４２は復号データメモリ、４３はメモ
リ・リード・カウンタ、４４はインバータ、４５はオフ
セット・メモリであり、オフセット・メモリ４５にプリ
セットされたオフセット値をインバータ４４によって極
性反転してメモリ・リード・カウンタ４３に与えるよう
にする。

なお、予め極性の反転されたオフセット値をオフセット
・メモリ４５にプリセットしておけばインバータ４４は
不要である。

（発明の効果） 以上、詳細に説明したところから明らかなように本発明
の画像のデジタル・データと画像に関連する音響のデジ
タル・データとの記録、再生方式においては、画像のデ
ジタル・データと画像に関連する音響のデジタル・デー
タとについて、画像のデジタル・データを画像の複数の
サンプルと対応するデジタル・データ群ＶＦｍ（ただし
、ｍは１．２．３・・・）とし、また、音響のデジタル
・データを音響の複数のサンプルと対応するデジタル・
データ群ＡＦｎ（ただし、ｎはｌ、２．３・）として、
前記した画像の複数のサンプルと対応するデジタル・デ
ータ群Ｖ　Ｆ　ｍと、音響の複数のサンプルと対応する
デジタル・データ群ＡＦｎとにおける互に最も関連する
デジタル・データ群ＶＦｉ。

ＡＦｊをそれぞれ組とするとともに、前記したデジタル
・データ群の各組における少なくとも一方のデジタル・
データ群に、それぞれの組毎のデジタル・データ群間の
時間的な関係を示すデジタル・データを付加した状態に
して、画像の複数のサンプルと対応するデジタル・デー
タ群ＶＦｍと、音響の複数のサンプルと対応するデジタ
ル・データ群ＡＦｎとを記録媒体に記録して、前記の画
像の複数のサンプルと対応するデジタル・データ群ＶＦ
ｍと、音響の複数のサンプルと対応するデジタ・ル・デ
ータ群ＡＦｎとが記録されている記録媒体からのデジタ
ル・データの再生時には前記したデジタル・データ群間
の時間的な関係を示すデジタル・データに基づいて画像
の再生出力と、前記した画像と関連する音響の再生出力
との時間軸上の相対関係が適正なものとなるように再生
動作を制御するようにしたり、画像のデジタル・データ
と画像に関連する音響のデジタル・データとについて、
画像のデジタル・データを画像の複数のサンプルと対応
するデジタル・データ群Ｖ　Ｆ　ｍ　（ただし、ｍは１
，２．３・・・）とし、また、音響のデジタル・データ
を音響の複数のサンプルと対応するデジタル・データ群
ＡＦｎ（ただし、ｎは１，２゜３・・・）として、前記
の各デジタル・データ群ＶＦｍのデジタル・データ列と
前記の各デジタル・データ群ＡＦｎのデジタル・データ
列との内の少なくとも一方を記録媒体に記録するときに
、前記したデジタル・データ群ＶＦｍ、ＡＦｎにおける
基準にされるデジタル・データ群ＶＦＩ、ＡＦＬの時間
位置を基準とする相対的な時刻情報のデータと各デジタ
ル・データ群毎の時間長のデータとの少なくとも一方の
データも付加データとして併せて記録しておき、再生時
に前記した付加データを用いて画像のデジタル・データ
と音響のデジタル・データとが時間的に正しい対応関係
で再生されるようにしたりすることにより、デジタル・
データ群ＶＦｍ、ＡＦｎの各組における少なくとも一方
のデジタル・データ群に付加されているそれぞれの組毎
のデジタル・データ群間の時間的な関係を示すデジタル
・データや、デジタル・データ群ＶＦｍ、ＡＦｎにおけ
る基準にされるデジタル・データ群ＶＦＩ、ＡＦＬの時
間位置を基準にされる相対的な時刻情報のデータと各デ
ジタル・データ群毎の時間長のデータとの少なくとも一
方のデータによる付加データを再生時に用いて１画像や
音響の局所的な変化によって符号化の処理単位長が変化
しても、デジタル・データ群ＶＦｍ、ＡＦｎから再生さ
れた画像と音響との時間関係を常に適正なものにできる
ようにしたのであり、本発明によれば、画像信号のデジ
タル・データ群の先頭の部分と音響信号のデジタル・デ
ータ群の先頭の部分とがずれている関係にある画像信号
のデジタル・データ群ＶＦｍと音響信号のデジタル・デ
ータ群ＡＦｎとの先頭の部分から開始された場合、例え
ば第１図中に示されている画像信号のデジタル・データ
群ＶＦ２と音響信号のデジタル・データ群ＡＦ２との初
めの部−分から再生動作が開始されたような場合でも再
生された画像信号と再生された音響信号との間で、常に
前記したオフセットに対応する時間ずれが生じている状
態で再生動作が行われることになるという不都合が生じ
るということはなく１本発明により既述した従来の問題
点は良好に解決できる。

【図面の簡単な説明】

第１図乃至第４図と第６図、第９図、 第１２図、 第１３図及び第１５乃至第１９図ならびに第２１図はデ
ジタル・データの配置の説明図、第５図。 第７図と第８図及び第１０図と第１１図ならびに第１４
図と第２０図はそれぞれ信号処理手段の一部の構成例を
示すブロック図である。 １・・・画像信号の入力端子、２・・・音響信号の入力
端子、３・・・画像信号のエンコーダ、４・・・フレー
ムカウンタ、５・・・音響信号のエンコーダ、６，９．
１２・・・マルチプレクサ、７・・・分周器、８・・・
Ｄ型フリップフロップ、１０．１１・・・メモリ、１４
．２２・・・入力端子、１５・・・データ分離回路、１
６・・・連続再生検出回路、１７．２５・・・画像デー
タのデコーダ、１８・・・モニタ受像機、１９．２７・
・・音響データのデコーダ、２０・・・音響信号再生装
置、２■・・・オフセットメモリ、２３・・・マルチプ
レクサ、２４・・・切換制御回路、２６・・・時間情報
の付加データのデコーダ、２８・・・音響復号データの
入力端子、２９・・・標本化周期の信号の入力端子、３
０・・・時間情報の入力端子、３１・・・連続再生スタ
ート検出信号の入力端子、３２・・・復号データのメモ
リ、３３・・・レジスタ、３４・・・デジタル・アナロ
グ変換器、３５・・・メモリ・リード・カウンタ、３６
・・・アンド回路、３７・・・タイマ・カウンタ、３８
・・・オフセット・メモリ、３９・・・オア回路、４６
．４８・・・入力端子。 ４９・・・フレームカウンタ、５０・・・オフセットカ
ウンタ、４７・・・入力端子、５２・・・レジスタ、５
１・・・セットリセットフリップフロップ、５３・・・
アンド回路、５２・・・レジスタ。

Claims (1)

1. 【特許請求の範囲】 １、画像のデジタル・データと画像に関連する音響のデ
   ジタル・データとについて、画像のデジタル・データを
   画像の複数のサンプルと対応するデジタル・データ群Ｖ
   Ｆｍ（ただし、ｍは１、２、３・・・）とし、また、音
   響のデジタル・データを音響の複数のサンプルと対応す
   るデジタル・データ群ＡＦｎ（ただし、ｎは１、２、３
   ・・・）として、前記の各デジタル・データ群ＶＦｍ、
   ＡＦｎのデジタル・データ列を記録媒体に記録するとき
   に、互に最も関連するデジタル・データ群ＶＦｉ、ＡＦ
   ｊ毎にそれぞれ組とするとともに、前記したデジタル・
   データ群の各組における少なくとも一方のデジタル・デ
   ータ群に、それぞれの組毎のデジタル・データ群間の時
   間的な関係を示すデジタル・データを付加しておき、再
   生時には前記したデジタル・データ群間の時間的な関係
   を示すデジタル・データに基づいて画像とそれに関連す
   る音響との再生出力について時間軸上の制御を行うよう
   にした画像のデジタル・データと画像に関連する音響の
   デジタル・データとの記録、再生方式 ２、画像のデジタル・データと画像に関連する音響のデ
   ジタル・データとについて、画像のデジタル・データを
   画像の複数のサンプルと対応するデジタル・データ群Ｖ
   Ｆｍ（ただし、ｍは１、２、３・・・）とし、また、音
   響のデジタル・データを音響の複数のサンプルと対応す
   るデジタル・データ群ＡＦｎ（ただし、ｎは１、２、３
   ・・・）として、前記の各デジタル・データ群ＶＦｍの
   デジタル・データ列と前記の各デジタル・データ群ＡＦ
   ｎのデジタル・データ列との内の少なくとも一方を記録
   媒体に記録するときに、前記したデジタル・データ群Ｖ
   Ｆｍ、ＡＦｎにおける基準にされるデジタル・データ群
   ＶＦ１、ＡＦ１の時間位置を基準とする相対的な時刻情
   報のデータと各デジタル・データ群毎の時間長のデータ
   との少なくとも一方のデータも併せて記録するようにし
   た画像のデジタル・データと画像に関連する音響のデジ
   タル・データとの記録方式