WO1997034416A1

WO1997034416A1 - Video numerique comprimee et procede et dispositif d'ajustement d'espace entre trames audio et de montage

Info

Publication number: WO1997034416A1
Application number: PCT/JP1997/000764
Authority: WO
Inventors: Masato Otsuka; Ryozo Inada
Original assignee: Daikin Industries, Ltd.
Priority date: 1996-03-12
Filing date: 1997-03-11
Publication date: 1997-09-18
Also published as: EP0888006A1; JP3094898B2; KR19990087744A; JPH09247613A; EP0888006A4

Description

明細書

デジタル圧縮ビデオ、オーディオフレームギヤップ調整編集方法およびその装置技術分野

この発明はデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集方法およびその装置に関し、さらに詳細にいえば、デジタル圧縮ビデオフレームと、デジタル圧縮オーディオフレームとを有し、かつ再生同期をとるべく再生時間データが与えられている 1 のデジタル圧縮データの再生の途中から他のデジタル圧縮データの再生を行うべくデジタル圧縮データを編集する方法およびその装置に関する。背景技術

従来から、デジタル圧縮ビデオフレームと、デジタル圧縮オーディオフレームとを有し、かつ再生同期をとるべく再生時間データが与えられている 1 のデジタル圧縮データの再生の途中から他のデジタル圧縮デ一タの再生を行うべくデジタル圧縮データを編集するに当っては、ユーザにより指定された再生分岐接続点を基準として、 1 のデジタル圧縮データと他のデジタル圧縮データとを分岐接続するようにしている。

したがって、再生分岐接続点までは 1のデジタル圧縮デ一タを伸長して再生することができ、再生分岐接続点以降は他のデジタル圧縮データを伸長して再生することができ、この結果、ユーザの意図する再生分岐接続点を境界として 1 のデジタル圧縮データと他のデジタル圧縮データとを順次再生することができる。しかし、 M P E Gのように、再生時間（再生タイムスタンプであり、以下、 P T S と略称する）データによって再生同期をとるようにしてデジタル圧縮データの場合には、ビデオデータとオーディォデータとのフレーム単位が互いに異なっているので、例えば、ビデオの P T Sデータに合せて再生を行うと、オーディオデータの接続点の P T Sデータに不連続が発生し、オーディオデータの再生にポーズが生じてしまう。逆に、オーディオの P T Sデータに合せて再生を行うと、ビデオデータの接続点の P T Sデータに不連続が発生し、ビデオデータの再生にポーズが生じてしまう。

この結果、再生分岐接続点近傍において何れかのデータの再生にポーズが生じることに起因して編集後の画質および/または音質が著しく劣 ί匕してしまう。発明の開示

この発明は上記の問題点に鑑みてなされたものであり、ユーザが再生分岐接続点を指定した場合に、ビデオ再生、オーディオ再生のポーズ時間を極小化することができるデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集方法およびその装置を提供することを目的としている。請求項 1 のデジタル圧縮ビデオ、ォ一ディオフレームギャップ調整編集方法は、再生分岐接続点が指定されたことに応答して、再生分岐接続点における再生時間データのずれを極小にすべく編集接続点時間を算出し、算出された編集接続点時間に基づいて再生分岐接続点を設定する方法である。

請求項 2のデジタル圧縮ビデオ、オーディオフレームギャップ調整編集方法は、編集点を確認させるために、指定された再生分岐接続点におけるフレームデータと設定された再生分岐接続点におけるフレームデータとを表示する方法である。請求項 3のデジタル圧縮ビデオ、オーディォフレームギヤップ調整編集装置は、再生分岐接続点が指定されたことに応答して、再生分岐接続点における再生時間データのずれを極小にすべく編集接続点時間を算出する編集接続点時間算出手段と、算出された編集接続点時間に基づいて再生分岐接続点を設定し、設定された再生分岐接続点に基づいてデジタル圧縮ビデオフレームと、デジタル圧縮ォ一ディオフレームとを同期編集する同期編集手段とを含んでいる。

請求項 1 のデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集方法であれば、デジタル圧縮ビデオフレームと、デジタル圧縮オーディォフレームとを有し、かつ再生同期をとるべく再生時間データが与えられている 1 のデジタル圧縮データの再生の途中から他のデジタル圧縮データの再生を行うべくデジタル圧縮データを編集するに当つて、再生分岐接続点が指定されたことに応答して、再生分岐接続点における再生時間データのずれを極小にすべく編集接続点時間を算出し、算出された編集接続点時間に基づいて再生分岐接続点を設定するのであるから、指定された再生分岐接続点をそのまま採用して編集した場合にビデオ再生およびまたはオーディォ再生に到底無視し得ないポーズが生じるような場合であっても、再生時間データのずれを極小にすべく再生分岐接続点を設定するのであるから、ビデオ再生、オーディオ再生のポーズ時間を極小化することができ、編集による画質、音質の低下（ポーズに起因する品質の低下）を大幅に抑制することができる。

請求項 2 のデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集方法であれば、編集点を確認させるために、指定された再生分岐接続点におけるフレームデータと設定された再生分岐接続点におけるフレームデータとを表示するのであるから、編集後のデジタル圧縮データの全体を再生することなく早期に再生状態を確認することができ、確認処理を含む編集所要時間を大幅に短縮することができ、ひいては編集コストを大幅に低减することができるほか、請求項 1 と同様の作用を達成することができる。

請求項 3のデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集装置であれば、デジタル圧縮ビデオフレームと、デジタル圧縮オーディォフレームとを有し、かつ再生同期をとるべく再生時間データが与えられている 1 のデジタル圧縮デ一タの再生の途中から他のデジタル圧縮データの再生を行うべくデジタル圧縮データを編集するに当って、再生分岐接続点が指定されたことに応答して、編集接続点時間算出手段によつて、再生分岐接続点における再生時間データのずれを極小にすべく編集接続点時間を算出し、同期編集手段によって、算出された編集接続点時間に基づいて再生分岐接続点を設定し、設定された再生分岐接続点に基づいてデジタル圧縮ビデオフレームと、デジタル圧縮オーディオフレ一ムとを同期編集することができる。したがって、指定された再生分岐接続点をそのまま採用して編集した場合にビデオ再生およびノまたはォ一ディォ再生に到底無視し得ないポーズが生じるような場合であっても、再生時間データのずれを極小にすべく再生分岐接続点を設定することにより、ビデオ再生、オーディオ再生のポーズ時間を極小化することができ、編集による画質、音質の低下（ポーズに起因する品質の低下）を大幅に抑制することができる。図面の簡単な説明

第 1 図は、この発明のデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集方法の一実施態様を説明するフローチャートである。

第 2図は、分岐前のデジタル圧縮データを示す概略図である。

第 3図は、分岐後のデジタル圧縮データを示す概略図である。第 4図は、デジタル圧縮データを分岐させるベく編集した状態を示す概略図である。

第 5図は、フレームギヤップ調整の前後のビデオイメージアイコン表示を概略的に示す図である。

第 6図は、この発明のデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集装置の一実施態様を示すプロック図である。発明を実施するための最良の形態

以下、添付図面によってこの発明の実施の態様を詳細に説明する。第 1図はこの発明のデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集方法の一実施態様を説明するフローチャートである。

ステップ S P 1 においてユーザ時間（ユーザが設定する再生分岐接続点時間） t i m e — Vが設定されるまで待ち、ステップ S P 2において、ュ一ザ時間 t i m e — Vに最も近く、かつ小さいオーディオフレームの終了時間 t i m e — Aおよび t i m e —Vと t i m e — Aとの差から分岐先のビデオフレームの開始時刻とオーディオフレームの開始時刻との差 e x t — A— t i m e を減算した時間（以下、時間差と称する） g a P を求め、ステップ S P 3において時間差 g a pをユーザに提示する。そして、ステップ S P 4において、ユーザ時間 t i m e — Vを用いて再生分岐接続のための編集を行うか否かを尋ねる。すなわち、この問いかけに対するユーザの応答を判定する。

ここで、ユーザ時間 t i m e— Vを用いて再生分岐接続のための編集を行うのではないと判定された場合には、ステップ S P 5においてュ一ザに時間差の許容範囲 g a p — r a n g e を尋ねる。すなわち、この問いかけに対するユーザの応答を許容範囲 g a p - r a n g e として取り込む。次いで、ステップ S P 6 においてビデオフレームの個数 n u m - V - A Uを 1 つ減らして時間差 g a p を計算し（もちろん、ビデオフレームの個数 n u m— V— AUが減少することに伴なつてユーザ時間 t i m e — Vも変更される）、ステップ S P 7において、ビデオフレームの個数 n u m— V— AUが 0以下か否かを判定し、 0以下であると判定された場合には、ステップ S P 8 において、指定された許容範囲 g a p— r _a n g e では条件を満たさないことを提示し、そのままステップ S P 5の処理を行う。

前記ステップ S P 7においてビデオフレームの個数 n u m - V - A U が 0 よりも大きレ、と判定された場合には、ステップ S P 9において、ステツプ S P 6で計算された時間差 g a pが許容範囲 g a p - r a n g e 以下であるか否かを判定する。そして、時間差 g a pが許容範囲 g a p - r a n g e以下であると判定された場合には、ステップ S P 1 0において許容範囲内の時間差 g a pを満たすュ一ザ時間 t i m e _ Vでのビデォイメージアイコン表示を行い、そのままステップ S P 4の判定を行ラ o

前記ステップ S P 4においてユーザ時間 t i m e — Vを用いて再生分岐接続のための編集を行うと判定された場合には、ステップ S P 1 1 においてユーザ時間 t i m e — Vおよび時間差 g a pを用いて再生分岐接続のための編集を行い、そのまま一連の処理を終了する。

したがって、指定されたユーザ時間 t i m e _ Vに基づいて算出され ' た時間差 g a p をユーザに提示し、ユーザが所望の許容範囲 g a p — r a n g e を設定したことに応答して、時間差 g a pが許容範囲 g a p - r a n g e以内になるように（極小になるように）ユーザ時間 t i m e — Vを設定することができる。この結果、編集後のデジタル圧縮データを再生する場合において再生分岐接続点におけるオーディォ再生のポーズ時間を許容範囲 g a p - r a n g e以内にすることができる。

第 2図に示すデジタル圧縮データと第 3図に示すデジタル圧縮データとを再生分岐接続する場合を例にとってさらに詳細に説明する。なお、第 2図のデジタル圧縮データが分岐前に対応し、第 3図のデジタル圧縮データが分岐後に対応している。

ここで、ビデオデータに対応するユーザ時間 t i m e — Vが第 2図に示すように指定された場合には、オーディオフレームの終了時間 t i m e — Aが第 2図に示すとおりになる。そして、分岐後のデジタル圧縮デ一タが第 3図に示すとおりであり、再生開始ビデオフレームの再生開始時刻と再生開始オーディオフレームの再生開始時刻との差が e X t 一 A 一 t i m e である。したがって、ユーザ時間 t i m e — Vでビデオデ一タを分岐させるようにした場合には、第 4図に示すように、時間差 g a pが t i m e— Vから t i m e — Aと e x t — A— t i m e とを减算した値が時間差 g a pになる。

また、ビデオフレームの時間 V— AU— t i m e とオーディオフレームの時間 A— A U— t i m e とは互いに異なっているのであるから、時間差 g a pが大きい場合には、ビデオフレームの数を滅少させることによりユーザ時間 _t i m e — Vを V— AU— t i m eずつ滅少させれば、時間差 g a pを減少させることができる。すなわち、ビデオフレームの数を減少させるべき数を選択することにより、時間差 g a p を極小にすることができる。

なお、前記の一連の処理において、第 5図に示すように、当初に指定されたュ一ザ時間 t i m e — Vにおけるビデオのフレームイメージと、最終的に設定されたユーザ時間 t i m e— Vにおけるビデオのフレームイメージとを可視的に表示することによって、再生分岐接続点の確認を容易にすることができる。また、この場合には、編集後のデジタル圧縮データの全体を再生することなく早期に再生状態を確認することができ、確認処理を含む編集所要時間を大幅に短縮することができ、ひいては編集コストを大幅に低減することができる。

第 6図はこの発明のデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集装置の一実施態様を示すプロック図である。

この装置は、デジタル圧縮されたビデオデータおよびオーディオデータからなるデジタル圧縮データを読み込む読み込み部 1 と、読み込まれたデジタル圧縮デ一タおよび第 1入力部 3により設定されたユーザ時間 (ユーザが設定する再生分岐接続点時間） _t i _{m e} — Vに基づいて時間差（ユーザ時間 t i m e — Vに最も近く、かつ小さいオーディオフレームの終了時間 t i m e — Aおよび t i m e — Vと t i m e — Aとの差力ら分岐先のビデオフレームの開始時刻とォ一ディオフレームの開始時刻との差 e X t — A— t i m e を减算した時間） g a p を算出し、さらに、第 2入力部 4により入力された時間差 g a pの許容範囲 g a p - r a n g e をも入力として、ビデオフレームの個数 n u m— V— AUを 1 つずつ減らして許容範囲 g a p - r a n g e よりも小さい時間差 g a pを算出する時間差算出部 2 と、当初の時間差 g a pおよび許容範囲 g a p — r a n g e よりも小さい時間差 g a p と、前記読み込まれたデジタル圧縮データを入力として再生分岐接続点を可視的に表示する表示部 5 と、許容範囲 g a p— r a n g e よりも小さい時間差 g a pに基づいて、デジタル圧縮されたビデオデータおよびオーディォデータからなるデジタル圧縮データを同期編集する同期編集部 6 とを有している。したがつて、この実施態様の場合にも、第 1 図のフローチャートと同様の作用を達成し、編集後のデジタル圧縮データを再生する場合において再生分岐接続点におけるオーディォ再生のポーズ時間を許容範囲 g a p — r a n g e以内にすることができる。なお、以上の実施態様においては、デジタル圧縮されたビデオデータの P T Sデータを基準としてオーディオデータの時間差を許容範囲よりも小さくする場合について説明しているが、デジタル圧縮されたオーディォデータの P T Sデータを基準としてビデオデータの時間差を許容範囲よりも小さくすることが可能である。後者の場合には、残像現象と相俟つて再生品質を高めることができる。また、許容範囲をユーザの指定に任せる代わりに予め許容範囲を設定しておくことも可能である。さらに、許容範囲を全く設定せず、時間差が最小になるようにユーザ時間を設定することも可能である。産業.上の利用可能性

以上のようにこの発明のデジタル圧縮ビデオ、オーディオフレームギャップ調整編集方法およびその装置は、再生分岐接続点が指定されたことに応答して、再生分岐接続点における再生時間データのずれを極小にすべく編集接続点時間を算出し、算出された編集接続点時間に基づいて再生分岐接続点を設定することにより、ユーザが再生分岐接続点を指定した場合に、ビデオ再生、オーディオ再生のポーズ時間を極小化することができ、デジタル圧縮ビデオ、オーディオデータの編集装置に好適に適用できる。

Claims

請求の範囲

1 . デジタル圧縮ビデオフレームと、デジタル圧縮ォ一ディオフレ一ムとを有し、かつ再生同期をとるべく再生時間データが与えられている 1 のデジタル圧縮データの再生の途中から他のデジタル圧縮データの再生を行うべくデジタル圧縮データを編集する方法であって、

再生分岐接続点が指定されたことに応答して、再生分岐接続点における再生時間データのずれを極小にすべく編集接続点時間を算出し、算出された編集接続点時間に基づいて再生分岐接続点を設定することを特徴とするデジタル圧縮ビデオ、オーディオフレームギャップ調整編集方法。

2 . 編集点を確認させるために、指定された再生分岐接続点におけるフレームデータと設定された再生分岐接続点におけるフレームデータとを表示する請求項 1 に記載のデジタル圧縮ビデオ、オーディオフレームギヤップ調整編集方法。

3 . デジタル圧縮ビデオフレームと、デジタル圧縮オーディオフレ

—ムとを有し、かつ再生同期をとるべく再生時間データが与えられている 1のデジタル圧縮データの再生の途中から他のデジタル圧縮データの再生を行うべくデジタル圧縮データを編集する装置であって、

再生分岐接続点が指定されたことに応答して、再生分岐接続点における再生時間データのずれを極小にすべく編集接続点時間を算出する編集接続点時間算出手段（ 2 ) と、算出された編集接続点時間に基づいて再生分岐接続点を設定し、設定された再生分岐接続点に基づいてデジタル圧縮ビデオフレームと、デジタル圧縮オーディオフレームとを同期編集する同期編集手段（ 2 ) ( 6 ) とを含むことを特徴とするデジタル圧縮ビデオ、オーディオフレームギャップ調整編集装置。