JP2000295566A - Method and system for editing and reproducing multimedia data and medium for recording multimedia data - Google Patents

Method and system for editing and reproducing multimedia data and medium for recording multimedia data

Info

Publication number
JP2000295566A
JP2000295566A JP11099078A JP9907899A JP2000295566A JP 2000295566 A JP2000295566 A JP 2000295566A JP 11099078 A JP11099078 A JP 11099078A JP 9907899 A JP9907899 A JP 9907899A JP 2000295566 A JP2000295566 A JP 2000295566A
Authority
JP
Japan
Prior art keywords
data
visual effect
original
editing
original data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP11099078A
Other languages
Japanese (ja)
Inventor
Masao Funamoto
昌男 船本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Hitachi Keiyo Engineering Co Ltd
Original Assignee
Hitachi Ltd
Hitachi Keiyo Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd, Hitachi Keiyo Engineering Co Ltd filed Critical Hitachi Ltd
Priority to JP11099078A priority Critical patent/JP2000295566A/en
Publication of JP2000295566A publication Critical patent/JP2000295566A/en
Pending legal-status Critical Current

Links

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

PROBLEM TO BE SOLVED: To obtain a method and a system for editing and reproducing multimedia data by which no deterioration is caused in a moving picture and original moving picture data can be reproduced even when compressed moving picture data are edited and the edit time can be decreased and to obtain a recording medium for the multimedia data. SOLUTION: A recording medium records original data 1A, visual effect data 1B providing a visual effect synchronously with the reproduction of the original data, and reproduction information 19 instructing composite of the data 1A, 1B. The visual effect data 1B are composited with the original data 1A expanded according to the reproduction information 19 recorded on the recording medium and the composited data are displayed so as to provide a visual effect to an irreversibly compressed moving picture without deteriorating its quality.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、コンピュータ上で
扱える動画データを画像品質を劣化することなく編集及
び再生することができるマルチメディアデータの編集再
生方法、マルチメディアデータ編集再生システム及びマ
ルチメディアデータ記録媒体に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a multimedia data editing / playback method, a multimedia data editing / playback system, and a multimedia data capable of editing and playing moving picture data that can be handled on a computer without deteriorating image quality. It relates to a recording medium.

【0002】[0002]

【従来の技術】近年のコンピュータシステムにおいて
は、自然色を再現した動画データを含むマルチメディア
データを取り扱う場合、非圧縮状態ではデータサイズが
膨大となるため圧縮が行われている。現在ビデオCDな
どに使用され広く普及しているMPEG(Moving Picture Ex
perts Group) による動画圧縮は、その圧縮率が高いも
のの、伸張後に完全なオリジナル状態を再現できない非
可逆圧縮方式であることが知られている。尚、本明細書
で述べる動画データには、画像のみならず音声等も含ま
れるものとする。
2. Description of the Related Art In recent computer systems, when handling multimedia data including moving image data in which natural colors are reproduced, the data size is enormous in an uncompressed state, so that compression is performed. At present, MPEG (Moving Picture Ex
It is known that moving image compression by Perts Group) is an irreversible compression method that cannot reproduce a complete original state after decompression, although the compression ratio is high. Note that the moving image data described in this specification includes not only images but also sounds and the like.

【0003】この非可逆圧縮方式は、元来最終的なデー
タ形式として蓄積性の高いCD−ROMなどの記録媒体
に使用され、再び加工が行われることはあまりなかった
が、近年のパーソナルコンピュータの処理速度の向上や
大容量記憶装置の普及などの要因により、手軽にこれら
動画データの二次利用ができるようになり、圧縮された
データを再編集する要求がでてきた。
The irreversible compression method was originally used as a final data format for a recording medium such as a CD-ROM having a high storage capacity, and was rarely processed again. Due to factors such as an increase in processing speed and the spread of large-capacity storage devices, secondary use of these moving image data has become easy, and there has been a demand for re-editing compressed data.

【0004】従来技術によって圧縮されたデータに視覚
効果を付加する編集作業は、まず、MPEGのように高度な
圧縮が施されたデータ形式では圧縮されたままの形での
画像処理が行えないため、圧縮データを伸張して非圧縮
状態の多数の静止画から成る画像データに戻し、文字テ
ロップ挿入などの視覚効果を加える場合、この伸張され
た画像データの対象となる静止画像に文字データを合成
し、合成後の静止画像を再び元の動画の一部として取り
込むために再び圧縮処理を施すことが行われている。
[0004] In the editing work for adding a visual effect to data compressed by the conventional technique, first, image processing in a compressed form cannot be performed in a highly-compressed data format such as MPEG. When the compressed data is decompressed and returned to uncompressed image data consisting of a large number of still images, and a visual effect such as insertion of a character telop is added, the character data is combined with the still image that is the target of the decompressed image data. Then, compression processing is performed again in order to capture the combined still image again as a part of the original moving image.

【0005】前述の動画データは、一般的に1秒間に3
0枚の静止画をもっている。例えば3秒間の動画に撮影
日などの文字を加える場合には、30枚×3秒で合計9
0枚の静止画像が圧縮された動画データから伸張により
取り出され、文字合成などの画像処理が行われる。画像
処理が施された90枚の静止画は、再び動画データに戻
すため一枚一枚再圧縮処理が行われ、1つの動画データ
に再構成される。尚、前述のMPEG技術が記載された文献
としては、例えば株式会社アスキーが1997年に発行
した「最新MPEG教科書」が挙げられる。
[0005] Generally, the above-mentioned moving image data is transmitted at a rate of 3 per second.
It has zero still images. For example, when adding a character such as a shooting date to a three-second moving image, 30 images × 3 seconds and 9 characters in total
Zero still images are extracted from the compressed moving image data by decompression, and image processing such as character synthesis is performed. The 90 still images subjected to the image processing are recompressed one by one in order to return to the moving image data again, and are reconstructed into one moving image data. As a document describing the above-mentioned MPEG technology, for example, “Latest MPEG Textbook” issued by ASCII Corporation in 1997 is cited.

【0006】[0006]

【発明が解決しようとする課題】前述の従来技術による
圧縮した動画データの編集作業は、非可逆圧縮された動
画データを編集する際、圧縮データを非圧縮状態のデー
タに戻しても、オリジナルの情報量全てを再現できず、
画像が劣化してしまう特性がある。従って従来技術は、
編集作業が劣化した状態の画像に対して行われ、再び圧
縮を行った後に再び別の視覚効果を入れる必要が出てく
ると、今度はさらに劣化した状態の画像が伸長により取
り出され、視覚効果が加えられることになる。
The editing of compressed moving image data according to the prior art described above involves editing the irreversibly compressed moving image data, even if the compressed data is returned to the non-compressed state. Unable to reproduce all information,
There is a characteristic that an image is deteriorated. Therefore, the prior art is
When the editing work is performed on the degraded image, and it is necessary to add another visual effect after compression again, the degraded image is extracted by decompression, and the visual effect Will be added.

【0007】このように従来の編集方式では、画像処理
のための伸長・画像処理・再圧縮が繰り返し行われる
と、そのたびに画像の劣化が起こり、画像の品質の面で
おもわしくなく、劣化がひどい場合は編集回数が限られ
ると言う不具合を招いていた。
[0007] As described above, in the conventional editing method, when decompression, image processing, and recompression for image processing are repeatedly performed, the image is degraded each time, which is unfavorable in terms of image quality. If it is bad, there is a problem that the number of edits is limited.

【0008】また従来の編集方法は、視覚効果の画像を
合成してから再圧縮するため、後になってから視覚効果
の部分のみを取り除き、オリジナルの動画データを再現
することは不可能と言う不具合もあった。
Further, in the conventional editing method, since a visual effect image is synthesized and then recompressed, it is impossible to remove only the visual effect part later and reproduce the original moving image data. There was also.

【0009】更に従来の編集方法は、編集のために動画
を構成する静止画を一枚毎に伸長・合成・再圧縮するた
め、数秒の視覚効果を加える編集を行う場合でも、編集
時間が非常に長くかかると言う不具合があった。
Furthermore, the conventional editing method expands, synthesizes, and recompresses still images constituting a moving image one by one for editing. Therefore, even when performing an editing to add a visual effect of several seconds, the editing time is very long. There was a problem that it took a long time.

【0010】本発明の目的は、前記従来技術による不具
合を除去することであり、圧縮された動画データを編集
した際にも画像劣化が起きず、オリジナルの動画データ
を再現することができ、更に編集時間を短縮するこがで
きるマルチメディアデータの編集再生方法とマルチメデ
ィアデータ編集再生システムとマルチメディアデータ記
録媒体を提供することである。
[0010] An object of the present invention is to eliminate the above-mentioned disadvantages of the prior art, and it is possible to reproduce the original moving image data without causing image deterioration even when the compressed moving image data is edited. An object of the present invention is to provide a multimedia data editing / playback method, a multimedia data editing / playback system, and a multimedia data recording medium capable of shortening the editing time.

【0011】[0011]

【課題を解決するための手段】前記目的を達成するため
に本発明は、非可逆圧縮されたオリジナルデータに視覚
効果を与える視覚効果データを合成して表示装置に表示
するマルチメディアデータの編集再生方法において、オ
リジナルデータと該オリジナルデータの再生に同期して
視覚効果を与える視覚効果データと前記オリジナルデー
タ及び視覚効果データの合成を指示する再生情報とを個
別に記録媒体に記録し、該記録媒体に記録した再生情報
に従って伸張したオリジナルデータに視覚効果データを
合成して表示装置に表示することを第1の特徴とする。
SUMMARY OF THE INVENTION In order to achieve the above object, the present invention relates to editing and reproducing multimedia data for displaying on a display device by synthesizing visual effect data for giving a visual effect to irreversibly compressed original data. The method further comprises: separately recording, on a recording medium, original data, visual effect data for providing a visual effect in synchronization with the reproduction of the original data, and reproduction information for instructing synthesis of the original data and the visual effect data. The first feature is that the visual effect data is combined with the original data expanded in accordance with the reproduction information recorded on the display device and displayed on the display device.

【0012】本発明は、前記特徴によるマルチメディア
データの編集再生方法において、前記オリジナルデータ
及び視覚効果データが複数の静止画から成る動画データ
を含み、前記オリジナルデータの静止画に時間的に同期
した視覚効を持つ複数の静止画からなる視覚効果データ
を作成し、前記オリジナルデータ及び再生情報と共に記
録媒体に記録することを第2の特徴とする。
According to the present invention, in the method for editing and reproducing multimedia data according to the above feature, the original data and the visual effect data include moving image data composed of a plurality of still images, and are temporally synchronized with the still images of the original data. A second feature is that visual effect data including a plurality of still images having visual effects is created and recorded on a recording medium together with the original data and the reproduction information.

【0013】また本発明は、非可逆圧縮されたオリジナ
ルデータに視覚効果を与える視覚効果データを合成して
表示装置に表示するマルチメディアデータの編集再生シ
ステムにおいて、オリジナルデータと該オリジナルデー
タの再生に同期して視覚効果を与える視覚効果データと
前記オリジナルデータ及び視覚効果データの合成を指示
する再生情報とを個別に記録媒体に記録する編集手段
と、該編集手段により編集された記録媒体に記録した再
生情報に従って伸張したオリジナルデータに視覚効果デ
ータを合成して表示装置に表示する再生部とを備えるこ
とを第3の特徴とする。
The present invention also relates to a multimedia data editing / playback system for synthesizing visual effect data for giving a visual effect to irreversibly compressed original data and displaying the synthesized data on a display device. Editing means for individually recording, on a recording medium, visual effect data for providing a visual effect in synchronism with reproduction information for instructing the synthesis of the original data and the visual effect data, and recording on the recording medium edited by the editing means A third feature is that a reproduction unit is provided which combines the visual effect data with the original data expanded according to the reproduction information and displays the synthesized data on a display device.

【0014】本発明は、前記特徴によるマルチメディア
データの編集再生システムにおいて、前記オリジナルデ
ータ及び視覚効果データが複数の静止画から成る動画デ
ータを含み、前記編集手段が、前記オリジナルデータの
静止画に時間的に同期した視覚効果を持つ複数の静止画
からなる視覚効果データを作成し、前記オリジナルデー
タ及び再生情報と共に記録媒体に記録することを第4の
特徴とする。
According to the present invention, in the multimedia data editing / playback system according to the above aspect, the original data and the visual effect data include moving image data including a plurality of still images, and the editing means converts the original data into a still image. A fourth feature is that visual effect data composed of a plurality of still images having visual effects synchronized in time is created and recorded on a recording medium together with the original data and the reproduction information.

【0015】更に本発明による記録媒体は、オリジナル
データと該オリジナルデータの再生に同期して視覚効果
を与える視覚効果データと前記オリジナルデータ及び視
覚効果データの合成を指示する再生情報とを個別に記録
したことを特徴とする。
Further, the recording medium according to the present invention separately records original data, visual effect data for giving a visual effect in synchronization with the reproduction of the original data, and reproduction information for instructing synthesis of the original data and the visual effect data. It is characterized by having done.

【0016】[0016]

【発明の実施の形態】以下,本発明の一実施形態による
マルチメディアデータの編集再生方法、マルチメディア
データ編集再生システム及びマルチメディアデータ記録
媒体を図面を参照して詳細に説明する。図1は、本実施
形態によるマルチメディアデータの編集再生方法が適用
されるマルチメディアデータ編集再生システムを説明す
るための図であり、図2及び図3は本実施形態によるマ
ルチメディアデータ記録媒体に記録されるマルチメディ
アデータのデータ形式を示す図である。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a multimedia data editing / playback method, a multimedia data editing / playback system and a multimedia data recording medium according to an embodiment of the present invention will be described in detail with reference to the drawings. FIG. 1 is a diagram for explaining a multimedia data editing / playback system to which the multimedia data editing / playback method according to the present embodiment is applied, and FIGS. 2 and 3 show a multimedia data recording medium according to the present embodiment. FIG. 3 is a diagram illustrating a data format of multimedia data to be recorded.

【0017】図1に示すマルチメディアデータ編集再生
システムは、データ編集者10から提供される映画等の
オリジナルデータ及び該オリジナルデータに字幕等の視
覚効果データとを編集する編集プログラム部11と、該
編集プログラム部11によりオリジナルデータに視覚効
果を合成して再生するためのデータを記録した記録媒体
のデータ部12と、このデータ部12を再生してオリジ
ナルデータに視覚効果を合成して再生し、利用者14
に、例えば字幕付きの映画を提供する再生プログラム部
13と、表示装置(図示せず)とから構成される。
The multimedia data editing and reproducing system shown in FIG. 1 comprises an editing program unit 11 for editing original data such as a movie provided by a data editor 10 and visual effect data such as subtitles on the original data. A data section 12 of a recording medium on which data for synthesizing and reproducing a visual effect with the original data is recorded by the editing program section 11; and the data section 12 is reproduced to synthesize and reproduce the visual effect with the original data. User 14
And a display program (not shown) for providing, for example, a movie with subtitles.

【0018】前記編集プログラム11は、例えば映画等
のオリジナルデータを選択するためのオリジナルデータ
選択部17と、このオリジナルデータに合成する視覚効
果データ、例えば字幕等の視覚効果データを編集するた
めの視覚効果編集部15と、該視覚効果編集部15によ
り編集したデータを圧縮するエンコーダ16と、前記オ
リジナルデータと視覚効果データを合成して再生するた
めの再生情報19を生成する再生情報生成部18とから
構成されている。
The editing program 11 includes an original data selection unit 17 for selecting original data such as a movie, and a visual effect data to be synthesized with the original data, for example, a visual effect for editing visual effect data such as subtitles. An effect editing unit 15; an encoder 16 for compressing the data edited by the visual effect editing unit 15; and a reproduction information generating unit 18 for generating reproduction information 19 for synthesizing and reproducing the original data and the visual effect data. It is composed of

【0019】記録媒体に記録する記憶するデータ部12
は、再生情報生成部18により生成した再生情報19
と、前記オリジナルデータ選択部17により選択したオ
リジナルデータ1Aと、前記エンコーダ16により圧縮
した視覚効果データを格納する視覚効果データ1B及び
1Cとから構成されている。
Data part 12 to be recorded and recorded on a recording medium
Is the reproduction information 19 generated by the reproduction information generation unit 18.
And original effect data 1A selected by the original data selecting section 17 and visual effect data 1B and 1C for storing visual effect data compressed by the encoder 16.

【0020】前記再生プログラム部13は、前記再生情
報19を解析して前記オリジナルデータ1A及び視覚効
果データ1B/1Cの伸張を指示する再生情報解析部1
Dと、前記伸張を行うデコーダ1Eと、データ利用者1
4から指示された再生情報を入力するための再生情報入
力部1Gと、前記デコーダ1Eにより伸張されたオリジ
ナルデータ及び視覚効果データを合成して標示する合成
表示部1Fとから構成される。
The reproduction program section 13 analyzes the reproduction information 19 and instructs the expansion of the original data 1A and the visual effect data 1B / 1C.
D, a decoder 1E for performing the decompression, and a data user 1
4 includes a reproduction information input unit 1G for inputting reproduction information specified by the instruction unit 4, and a synthesis display unit 1F for synthesizing and displaying the original data and the visual effect data expanded by the decoder 1E.

【0021】この様に構成されたマルチメディアデータ
編集再生システムは、データ提供者10が編集プログラ
ム部11を用い、オリジナルデータ選択部15によりオ
リジナルデータ、例えば任意の映画を選択すると共に視
覚効果編集部15により視覚効果データ、例えば字幕デ
ータの編集を行ってエンコーダ16により圧縮し、更に
前記オリジナルデータと視覚効果データとを合成して再
生するめたの再生情報19とを再生情報生成部18によ
り生成する。
In the multimedia data editing / playback system configured as described above, the data provider 10 selects the original data, for example, an arbitrary movie by the original data selecting unit 15 using the editing program unit 11 and the visual effect editing unit. The visual information data, for example, the subtitle data is edited by 15 and compressed by the encoder 16, and further, the reproduction information generation unit 18 generates the reproduction information 19 for synthesizing and reproducing the original data and the visual effect data. .

【0022】次にデータ提供者10は、CD−ROM等
の記録媒体のデータ部12に、前記再生情報19とオリ
ジナルデータ1Aと視覚効果データ1B及び1Cとして
格納し、この記録媒体をデータ利用者14に提供する。
前記視覚効果データは、本実施形態の場合、例えば言語
の異なる2種類のもの(視覚効果データ1C及び1D)
を格納することができる。
Next, the data provider 10 stores the reproduction information 19, the original data 1A, and the visual effect data 1B and 1C in the data section 12 of a recording medium such as a CD-ROM, and stores this recording medium in the data user. 14 to provide.
In the case of the present embodiment, the visual effect data is, for example, two types in different languages (visual effect data 1C and 1D).
Can be stored.

【0023】この様に本実施形態による記録媒体は、前
述の再生情報19とオリジナルデータ1Aと視覚効果デ
ータ1B及び1Cとを含むデータ部12が記憶される。
この記録媒体としては、FD、MO、CD−ROM、C
D−Rその他のものが考えられる。
As described above, in the recording medium according to the present embodiment, the data section 12 including the reproduction information 19, the original data 1A, and the visual effect data 1B and 1C is stored.
As this recording medium, FD, MO, CD-ROM, C
DR and others are conceivable.

【0024】この記録媒体を受け取ったデータ利用者1
4は、再生プログラム部13を用い、前記記録媒体のデ
ータ部12の再生を行う。この再生は、まず利用者14
が再生情報入力部1Gに再生するオリジナルデータ、例
えば任意の映画のタイトルを入力することにより、再生
情報解析部1Dが再生情報19を解析し、デコーダ1E
に指定されたオリジナルデータ及び視覚効果データの伸
張を指示する。
Data user 1 receiving this recording medium
4 reproduces the data section 12 of the recording medium by using the reproduction program section 13. This reproduction is performed first by the user 14
Inputs the original data to be reproduced, for example, the title of an arbitrary movie into the reproduction information input section 1G, the reproduction information analysis section 1D analyzes the reproduction information 19, and the decoder 1E
Instructs expansion of the original data and the visual effect data specified in.

【0025】このデコーダ1Eは、オリジナル及び視覚
効果の各動画データの同期をとるために、各データから
選ばれる時間情報を元に、同じ時間に表示されるべき静
止画をそれぞれ伸張して合成表示部1Fに渡し、合成表
示部1Fは渡された静止画を合成して図示しない表示装
置に表示する。例えば利用者が指定した映画のオリジナ
ルデータに視覚効果データの指定言語の字幕を合成して
表示する様に動作する。
This decoder 1E decompresses still images to be displayed at the same time based on time information selected from each data in order to synchronize the moving image data of the original and the visual effect, and synthesizes and displays them. The combined display unit 1F combines the received still images and displays them on a display device (not shown). For example, an operation is performed in which original data of a movie specified by a user is combined with captions in a specified language of visual effect data and displayed.

【0026】前記データ部12に含まれるオリジナルデ
ータ及び視覚効果データは、それぞれ独立した動画デー
タであり、各動画データは複数の静止画データの連続体
から構成され、単独で再生することができる。これらの
データは独立した動画データではあるが、「オリジナル
動画」と「視覚効果用動画」という関係を持ち、それぞ
れ先頭から同時に再生することで、同じ時間軸をもった
一つの動画データとして再生が可能である。簡単な例を
上げれば、外国語の映画データと、その映画に後から加
えられる母国語の字幕データのような関係である。映画
データは映画そのものの画像及び音声を独立して再生で
き、また字幕を担当する動画の字幕データも独立して再
生することができ、これはオリジナルの映画のタイミン
グで字幕のみが表示される動画データとなる。本発明で
はこのような字幕用の動画データを視覚効果用の動画デ
ータと考え、本編の映画データとは別に格納する。
The original data and the visual effect data included in the data section 12 are independent moving image data, and each moving image data is composed of a continuum of a plurality of still image data and can be reproduced independently. Although these data are independent video data, they have a relationship of "original video" and "video for visual effect". By playing them simultaneously from the beginning, they can be played back as one video data with the same time axis. It is possible. To give a simple example, there is a relationship such as movie data in a foreign language and subtitle data in a native language added later to the movie. Movie data can independently play the image and sound of the movie itself, and can also independently play the subtitle data of the movie that is responsible for subtitles, which is a movie in which only subtitles are displayed at the timing of the original movie Data. In the present invention, such subtitle moving image data is considered as moving image data for visual effects, and is stored separately from the main movie data.

【0027】また前述の視覚効果データとしては、字幕
のような単純な文字テロップの他にも、架空の登場人物
を合成したり、記号を合成したり、ある部分の色を別の
色に見えるように合成したりと、さまざまな効果があ
る。またこれらの視覚効果データは視覚効果データに複
数同時に持たせることもできる。
As the above-mentioned visual effect data, in addition to simple character telops such as subtitles, imaginary characters are synthesized, symbols are synthesized, and the color of a certain part is seen as a different color. There are various effects when combined. Further, a plurality of such visual effect data can be simultaneously provided in the visual effect data.

【0028】更に単独または複数のデータとして存在し
ている視覚効果データは、データ提供者や利用者の判断
により任意に組み合わせが決められ、再生時にオリジナ
ルデータと組み合わされる。また、視覚効果データがフ
ァイル中に存在していても、必ずしも合成する必要はな
く、任意にその効果を外し、視覚効果のないオリジナル
データの再生もできる。また再生中であっても、任意の
タイミングで視覚効果を合成する場合、合成しない場
合、あるいは合成する視覚効果データの組み合わせを動
的に切り替えることができる。
Further, the visual effect data existing as single or plural data can be arbitrarily combined according to the judgment of the data provider or the user, and combined with the original data at the time of reproduction. Further, even if the visual effect data exists in the file, it is not always necessary to combine them, and the effect can be arbitrarily removed, and the original data without the visual effect can be reproduced. Further, even during the reproduction, when the visual effects are combined at an arbitrary timing, when the visual effects are not combined, or the combination of the visual effect data to be combined can be dynamically switched.

【0029】次に前記データ部12の構成を図2及び図
3を参照して詳細に説明する。図2は前記図1に示した
データ部の詳細を説明するための図であり、図3は他の
実施形態によるデータ部の詳細を説明するための図であ
る。
Next, the structure of the data section 12 will be described in detail with reference to FIGS. FIG. 2 is a diagram for explaining the details of the data unit shown in FIG. 1, and FIG. 3 is a diagram for explaining the details of the data unit according to another embodiment.

【0030】まず、前記データ部12を形成するファイ
ル1A1は、図2に示す如く、再生情報19とオリジナ
ルデータ1Aと二つの視覚効果データ1B及び1Cとか
ら構成され、前記再生情報19は、符号1A0で示す如
く、当該データ部19に含まれる動画数(オリジナルデ
ータ1A+視覚効果データ1B+視覚効果データ1C)
が3、各データの先頭アドレスが0バイト目、100バ
イト目、200バイト目であること、並びにオリジナル
データ19と視覚効果データ1Bとを組み合わすことを
指示する組み合わせ情報を格納している。
First, as shown in FIG. 2, the file 1A1 forming the data section 12 is composed of reproduction information 19, original data 1A, and two visual effect data 1B and 1C. As indicated by 1A0, the number of moving images included in the data section 19 (original data 1A + visual effect data 1B + visual effect data 1C)
3, the combination information indicating that the start address of each data is the 0th byte, the 100th byte, and the 200th byte, and that the original data 19 and the visual effect data 1B are combined.

【0031】このデータ部は、図2に示した1つのデー
タ部のファイルに限られるものではなく、例えば図3に
示す如く、再生情報19、オリジナルデータ1A、視覚
効果データ1B、視覚効果データ1Cとを各々ファイル
1B1、1B3、1B5、1B7として別個のファイル
として構成し、前記再生情報19が、符号1B0で示す
如く、当該データ部19に含まれる動画数(オリジナル
データ1A+視覚効果データ1B+視覚効果データ1
C)が3、各データのデータ名がoriginal.m
pg、effrctA.mpg、effrctB.mp
gであること、並びにオリジナルデータ1Aと視覚効果
データ1Bとを組み合わすことを指示する組み合わせ情
報を格納する様に構成しても良い。
This data part is not limited to the file of one data part shown in FIG. 2, but for example, as shown in FIG. 3, reproduction information 19, original data 1A, visual effect data 1B, visual effect data 1C And the files 1B1, 1B3, 1B5, and 1B7 as separate files, and the reproduction information 19 contains the number of moving images (original data 1A + visual effect data 1B + visual effect) included in the data portion 19, as indicated by reference numeral 1B0. Data 1
C) is 3, and the data name of each data is original. m
pg, effectA. mpg, effrctB. mp
g, and may store combination information indicating that the original data 1A and the visual effect data 1B are combined.

【0032】図4は、前述のオリジナルデータ1Aに含
まれる動画データと、視覚効果データ1Bに含まれる画
像データがどのような表示結果を示すのかを概念図で表
したものである。
FIG. 4 is a conceptual diagram showing what display results are shown by the moving image data included in the original data 1A and the image data included in the visual effect data 1B.

【0033】図中、符号21は、オリジナルデータ1A
に含まれる複数の静止画データから構成される動画デー
タを示し、符号22は視覚効果データ1Bに含まれるテ
ロップを構成する複数の静止画データを示し、符号20
は、これら動画データ21及び視覚効果用の動画データ
22とから成るデータ部を示し、符号24は前記データ
を合成後の再生結果を示し、符号23は前記合成処理の
ステップを示すものである。前記動画データ21を具体
的に説明すると、このデータ21は人物が動いている状
態を連続して表した複数の静止画データを表し、視覚効
果用の動画データ22は、撮影日である「1月2日」と
いう文字テロップと、丸いボールが移動する様子を視覚
効果として付加するように作成された視覚効果の静止画
データを表している。即ち、ボールが画面左端から投げ
入れられて、放物線を描きながら右端に飛んでいく様子
を示し、文字テロップは、画面下を右から左に流れるよ
うに、各コマごとに表示する位置を少しづつずらしなが
ら動く視覚効果を表している。
In the figure, reference numeral 21 denotes the original data 1A.
, A plurality of still image data included in the visual effect data 1B, and a reference numeral 22 denotes a plurality of still image data included in the telop included in the visual effect data 1B.
Indicates a data portion composed of the moving image data 21 and the moving image data 22 for visual effects, reference numeral 24 indicates a reproduction result after the data is synthesized, and reference numeral 23 indicates a step of the synthesizing process. The moving image data 21 will be specifically described. The data 21 represents a plurality of still image data continuously representing a state in which a person is moving, and the moving image data 22 for the visual effect has a shooting date “1”. The text telop “month 2” and the still image data of the visual effect created so as to add the moving state of the round ball as a visual effect. In other words, the ball is thrown from the left edge of the screen and flew to the right while drawing a parabola, and the character telop is slightly shifted from the display position for each frame so that it flows from right to left at the bottom of the screen. It represents a moving visual effect.

【0034】さて、本実施形態による動画データ21及
び22の合成は、合成処理ステップ23が、左端のコマ
より同時に伸長が開始され、データ部20内の動画デー
タ21の人が動く静止画一枚(1コマ)ごとにボールが
動き且つテロップが移動する動画データ22の静止画を
一枚(1コマ)ごと図示の如く合成・再生することによ
り、再生結果24に示すように「人」と「ボール」と
「文字テロップ」が左端のコマから順番に表示されてい
き、人を中心にして、「ボール」は頭上を飛んでいき、
画面下には撮影日が「文字テロップ」として流れていく
視覚効果が得られる。この時、この動画を見ている利用
者にとっては、あたかも一つの動画データが再生された
かのように視覚効果が加えられて再生されていくことに
なる。
In the synthesis of the moving image data 21 and 22 according to the present embodiment, in the synthesizing step 23, decompression is started simultaneously from the leftmost frame, and a single moving image of the moving image data 21 in the data section 20 is moved. The still image of the moving image data 22 in which the ball moves and the telop moves for each (one frame) is synthesized and reproduced for each frame (one frame) as shown in the figure, so that the “people” and “ The "ball" and "character telop" are displayed in order from the leftmost frame, and the "ball" flies overhead, centering on the person,
At the bottom of the screen, a visual effect is obtained in which the shooting date flows as a “character telop”. At this time, for the user who is watching the moving image, the visual effect is added and the reproduction is performed as if one moving image data was reproduced.

【0035】尚、図4における動画データ21及び22
の各コマは、動画データを単純化して左端のコマから右
端のコマへと時系列に表示されるべき5コマとして描い
ており、実際の動画データがこのように格納されている
わけではない。一般的な動画データでは、このようなコ
マが数分の動画データの場合でも何千コマも含まれ、ま
た圧縮のため単純なコマとしてはすぐには表示できない
形で格納されている。
The moving image data 21 and 22 in FIG.
In each frame, the moving image data is simplified and drawn as five frames to be displayed in chronological order from the leftmost frame to the rightmost frame, and actual moving image data is not stored in this manner. In general moving image data, even if such frames are moving image data for several minutes, thousands of frames are included, and are stored in a form that cannot be displayed immediately as a simple frame due to compression.

【0036】図5は、図4で説明した視覚効果データを
ボールデータ32と文字テロップデータ33の2つに分
けて格納した例である。つまり、オリジナルデータ31
の他に、視覚効果用のデータが複数含む例である。視覚
効果データのボールデータ32と文字テロップデータ3
3とを別々のデータとして取り扱い、図4の場合のよう
に、オリジナルデータに「ボールが飛びつつ、撮影日が
テロップされる」視覚効果として同時に加えられる必要
はない。
FIG. 5 shows an example in which the visual effect data described with reference to FIG. 4 is divided into two pieces, ball data 32 and character telop data 33, and stored. That is, the original data 31
In addition to the above, an example in which a plurality of data for visual effects are included. Ball data 32 and character telop data 3 of visual effect data
3 are treated as separate data, and need not be simultaneously added to the original data as a visual effect of “the ball flies and the shooting date is tickered” as in FIG.

【0037】このような各データの組み合わせは合成処
理のステップ34により決定される。この結果、再生す
る動画は図4の場合と同様に、すべての視覚効果を合成
した合成結果35の他に、ボールデータのみ合成した合
成結果36、文字テロップのみを合成した合成結果37
など、さまざまな視覚効果を加えた動画の再生を行うこ
とができる。
The combination of such data is determined in step 34 of the synthesizing process. As a result, as in the case of FIG. 4, the moving image to be reproduced has a combined result 35 obtained by combining all visual effects, a combined result 36 obtained by combining only ball data, and a combined result 37 obtained by combining only character telops.
You can play videos with various visual effects.

【0038】先の外国語映画と母国語の字幕の例を挙げ
れば、字幕データとしてさまざまな国の字幕を用意して
おき、データ提供者あるいは利用者の判断で、好きな字
幕を選択して表示することができる。前述の実施形態に
おいては、日付及びボールのテロップを付加する字幕デ
ータという視覚効果を達成するものであるが、本発明は
前記視覚効果データが字幕以外の目的で、もっと多くの
視覚効果データを提供することもできる。この合成する
組み合わせを変えるだけで、さまざまな視覚効果を演出
でき、またたとえ視覚効果データが多く含まれていよう
とも、合成する組み合わせを一つも行わないことで瞬時
にオリジナルデータのみ再生することができる。
As an example of the above-mentioned subtitles in a foreign language movie and a native language, subtitles of various countries are prepared as subtitle data, and a favorite subtitle can be selected at the discretion of the data provider or user. Can be displayed. In the above embodiment, the visual effect of subtitle data to which a date and a ball telop is added is achieved. However, the present invention provides more visual effect data for the purpose other than the subtitle. You can also. Various visual effects can be produced simply by changing the combination to be combined, and even if a lot of visual effect data is included, only the original data can be instantly reproduced by not performing any combination to be combined .

【0039】図6は前述の視覚効果データ1Bを作成す
るための処理の流れ図である。本処理は、まず、利用者
がオリジナルとなる圧縮された動画データを選択し(ス
テップ40)、選択された動画データと利用者の指定し
た位置の静止画とをデコードして表示し(ステップ4
1)、利用者が当該表示された静止画を参照しながら視
覚効果を加えて視覚効果データを作成する(ステップ4
2)。
FIG. 6 is a flowchart of a process for creating the above-described visual effect data 1B. In this processing, first, the user selects original compressed moving image data (step 40), and decodes and displays the selected moving image data and a still image at a position designated by the user (step 4).
1) The user creates a visual effect data by adding a visual effect while referring to the displayed still image (step 4).
2).

【0040】この視覚効果データ17を作成する際、オ
リジナルの動画データは参照されるのみであり、オリジ
ナルのデータ自身に視覚効果の合成や再圧縮処理などは
一切行わない。また、オリジナルの動画を表示するのは
視覚効果を加える画像位置や時間的なタイミングを測り
やすくするためであり、あらかじめ効果を加えたい画像
位置や時間が決まっていればオリジナル動画を選択して
表示する必要もない。
When the visual effect data 17 is generated, only the original moving image data is referred to, and no visual effect synthesis or recompression processing is performed on the original data itself. Also, displaying the original video is to make it easier to measure the position and time of the image to which the visual effect is applied, and if the image position and time to add the effect are determined in advance, select and display the original video You don't have to.

【0041】また編集の過程で作成される視覚効果用の
データは、独立したデータとして作成されるが、編集中
は動画データとして圧縮されている必要はなく、また完
全な動画である必要もない。これにより編集の段階での
動画データの圧縮や編集の繰り返しによる再圧縮を防ぐ
ことができる。
The visual effect data created in the editing process is created as independent data. However, it is not necessary that the data is compressed as moving image data during editing, and it is not necessary to be a complete moving image. . This makes it possible to prevent moving image data from being compressed at the editing stage and re-compression due to repeated editing.

【0042】任意位置でのオリジナル画像の参照、およ
び視覚効果データの作成は、ステップ43の利用者の選
択により終了するまで順次繰り返される。視覚効果デー
タの作成が終了したら、ステップ44において視覚効果
用のデータをエンコード(圧縮)し、独立した視覚効果
用のデータを作成する。
The reference of the original image at an arbitrary position and the creation of the visual effect data are sequentially repeated until the selection is completed by the user in step 43. When the creation of the visual effect data is completed, in step 44, the data for the visual effect is encoded (compressed) to create independent data for the visual effect.

【0043】前記ステップ42において1つの視覚効果
データに複数の効果を含ませる場合、例えば図6の如く
「ボール移動」と「文字テロップ」を1つの動画データ
22で作成する場合は、ステップ41〜43の処理を繰
り返して視覚効果データを作成する。また、複数の視覚
効果を別々に合成したい場合、例えば図5の如く「ボー
ル移動」と「文字テロップ」を視覚効果データ32、3
3のように別々に持たせて最終的な表示結果を選択でき
るようにする場合は、ステップ40〜44の処理を繰り
返し、それぞれの効果を持った視覚効果用のデータを別
々に作成する。
When a plurality of effects are included in one visual effect data in step 42, for example, as shown in FIG. 6, when "ball movement" and "character telop" are created by one moving image data 22, steps 41 to 41 The process of step 43 is repeated to create visual effect data. When it is desired to separately combine a plurality of visual effects, for example, as shown in FIG.
In the case where the final display result can be selected by giving them separately as in step 3, the processing of steps 40 to 44 is repeated, and data for visual effects having the respective effects are separately created.

【0044】図7は、オリジナルの動画データと、図6
に示す処理で作成された複数の視覚効果用の動画データ
を選択・デコード・合成・再生するためのプログラムを
表す処理の流れ図である。本処理は、まずユーザがオリ
ジナルの動画データの選択(ステップ50)、及び合成
する視覚効果用の動画データを選択(ステップ51)
し、この視覚効果用の動画データの選択が終了であるか
どうかを判定する(ステップ52)。本ステップ52に
おいて終了でないなら再び視覚効果用のデータが選択さ
れ、終了であれば、図2におけるデータ部12に含まれ
るデータが決定する。最終的な表示結果を選択できるよ
うにするためには、この視覚効果用のデータを複数選択
しておけばよい。
FIG. 7 shows the original moving image data and FIG.
7 is a flowchart of a process representing a program for selecting, decoding, synthesizing, and reproducing a plurality of moving image data for visual effects created in the process shown in FIG. In this processing, the user first selects original moving image data (step 50) and selects moving image data for visual effects to be combined (step 51).
Then, it is determined whether or not the selection of the moving image data for the visual effect has been completed (step 52). If it is not completed in this step 52, the data for the visual effect is selected again, and if it is completed, the data included in the data section 12 in FIG. 2 is determined. In order to be able to select a final display result, a plurality of data for this visual effect may be selected.

【0045】次に選択されたファイルのどれを組み合わ
すかの設定、即ち、動画データのファイルに、どの視覚
効果用のデータのファイルを合成するか設定(ステップ
53)して再生情報を作成し(ステップ54)、次いで
選択されたデータ及び再生情報をマージして図2におけ
るファイル1A1を作成する(ステップ55)。
Next, the setting of which of the selected files is to be combined, that is, the setting of which visual effect data file is to be combined with the moving image data file (step 53), to create reproduction information (step 53). (Step 54) Then, the selected data and reproduction information are merged to create the file 1A1 in FIG. 2 (Step 55).

【0046】次に図2に示したファイル1A1を実行し
てオリジナル動画データを視覚効果を付加しつつ再生す
るための処理の流れを図8を参照して説明する。
Next, the flow of a process for executing the file 1A1 shown in FIG. 2 and reproducing the original moving image data while adding a visual effect will be described with reference to FIG.

【0047】本処理は、まず図1の再生情報19がファ
イル中に含まれる動画データの個数をチェックし(ステ
ップ60)、含まれる動画データがオリジナルデータの
みかどうかを判定し(ステップ61)、もしオリジナル
データのみであれば従来の動画データと同様な処理を行
う(ステップ62)。この処理は、オリジナルデータを
伸張し(ステップ62)、この伸張した動画データを表
示し(ステップ63)、ステップ64の判断により、デ
ータが終了するまで伸張・表示が繰り返され再生処理が
行われる。
In this processing, the reproduction information 19 shown in FIG. 1 first checks the number of moving image data included in the file (step 60), and determines whether the included moving image data is only original data (step 61). If only the original data, the same processing as the conventional moving image data is performed (step 62). In this process, the original data is expanded (step 62), and the expanded moving image data is displayed (step 63). According to the judgment in step 64, the expansion / display is repeated until the data ends, and the reproduction process is performed.

【0048】ステップ61においてファイル中に含まれ
る動画データがオリジナルのみでないことが判定された
場合、合成するオリジナルと視覚効果の動画データの組
み合わせをチェックし(ステップ65)、次いでオリジ
ナル動画データの伸張を行い(ステップ66)、すぐに
視覚効果データの伸張を行う(ステップ67)。次いで
本処理は、ステップ65でチェックした組み合わせ分の
データが伸張できたかどうかをチェックし(ステップ6
8)、不十分であればステップ67に戻って次の視覚効
果データNが伸張される。前記ステップ68において組
み合わせ分全てのデータの伸張の終了を判定した場合、
次にオリジナルデータと視覚効果用データの合成を行
い、合成を行った画像データ(静止画=1コマ)を表示
し(ステップ6A)、ステップ6Bによる動画データの
終了を判定するまで前記ステップ65〜6Aを繰り返す
ことにより組み合わせのチェック・オリジナルデータの
伸張と視覚効果データの伸張と伸張された静止画の合成
と合成データの表示の処理を繰り返すして多数の静止画
の連続表示による視覚効果が付加された動画の表示を行
う。また本処理においては、ステップ65において合成
データの組み合わせを適時チェックしているため、動画
データの再生中においても必要な画像効果用のデータの
組み合わせを動的に変更することができる。
If it is determined in step 61 that the moving image data included in the file is not only the original, the combination of the original to be synthesized and the moving image data of the visual effect is checked (step 65), and then the expansion of the original moving image data is performed. Then, the visual effect data is immediately expanded (step 67). Next, the present process checks whether the data for the combination checked in step 65 has been expanded (step 6).
8) If not, the flow returns to step 67 to expand the next visual effect data N. If it is determined in step 68 that the expansion of all data for the combination has been completed,
Next, the original data and the visual effect data are combined, the combined image data (still image = 1 frame) is displayed (step 6A), and the above steps 65 to 65 are performed until the end of the moving image data is determined in step 6B. 6A is repeated to check the combination. Decompression of original data, expansion of visual effect data, synthesis of expanded still images, and display of synthesized data are repeated to add visual effects by continuous display of many still images. The displayed moving image is displayed. Also, in this processing, the combination of the combined data is checked as needed in step 65, so that the required combination of image effect data can be dynamically changed even during the reproduction of the moving image data.

【0049】この様に本実施形態によるマルチメディア
データの編集再生方法及びシステムは、オリジナルの圧
縮データ自身には手を加えず、視覚効果の画像を別に構
成するようにし、圧縮されたデータが再生のために伸長
された直後にこれら視覚効果用の画像を合成し、同時に
再生も行うようにするため、編集段階の画像処理に伴う
伸長、再圧縮の処理がなくなり、画像の劣化や、再圧縮
にかかる時間を節約できるようになる。また、視覚効果
用のデータが別に用意されるため、不必要になった場合
に簡単に視覚効果を取り除き、オリジナルデータのみを
得ることが出来る。
As described above, the method and system for editing and reproducing multimedia data according to the present embodiment do not modify the original compressed data itself, and separately construct a visual effect image so that the compressed data can be reproduced. These visual effect images are combined immediately after being expanded for playback, and are also played back at the same time.Therefore, the expansion and recompression processes that accompany the image processing in the editing stage are eliminated, resulting in image deterioration and recompression. Will save you time. Further, since the data for the visual effect is separately prepared, the visual effect can be easily removed when it becomes unnecessary, and only the original data can be obtained.

【0050】更に視覚効果データはオリジナルデータと
同じ形式で格納するため、オリジナルデータを伸張・再
生するためのプログラムを、そのまま画像効果用のデー
タ処理にも流用できる。このことはオリジナルデータと
同様に、視覚効果用のデータも単独で時間軸にそった再
生が出来ることを意味する。これにより、先頭から10
秒後に3秒間の文字データが合成されている場合でも、
再生プログラムが単純にオリジナルデータと視覚効果用
のデータを先頭から順番に伸長、表示していけば、10
秒後には視覚効果が実現できる。つまり「10秒後から
3秒間、文字合成する」といった同期情報と、この同期
情報をみてオリジナルの再生に合わせて画像処理を行う
ための特別なプログラムを用意する必要はない。いまま
では同時に再生された動画が別々の表示領域に再生され
ていたのを、単純に同じ表示領域に合成しながら再生す
るプログラムがあればよい。
Further, since the visual effect data is stored in the same format as the original data, the program for expanding / reproducing the original data can be directly used for the data processing for the image effect. This means that, like the original data, the visual effect data can be independently reproduced along the time axis. As a result, 10
Even if character data for 3 seconds is synthesized after 2 seconds,
If the playback program simply expands and displays the original data and the data for visual effects in order from the beginning, 10
After a second, a visual effect can be realized. That is, there is no need to prepare synchronization information such as "combine characters for 10 seconds after 3 seconds" and a special program for performing image processing in accordance with the reproduction of the original based on the synchronization information. What is necessary is just to have a program that reproduces moving images that are simultaneously reproduced in different display areas while simply synthesizing them in the same display area.

【0051】更に本発明による記録媒体は、オリジナル
の圧縮した動画データ自身には手を加えずに視覚効果の
画像を別に構成するようにしたため、オリジナルの動画
データを初期の状態に保つことができる。
Further, in the recording medium according to the present invention, since the image of the visual effect is formed separately without modifying the original compressed moving image data itself, the original moving image data can be kept in the initial state. .

【0052】[0052]

【発明の効果】以上説明したように本発明によるマルチ
メディアデータの編集再生方法及びシステムによれば、
オリジナルデータと該オリジナルデータの再生に同期し
て視覚効果を与える視覚効果データと前記オリジナルデ
ータ及び視覚効果データの合成を指示する再生情報とを
個別に記録媒体に記録し、該記録媒体に記録した再生情
報に従って伸張したオリジナルデータに視覚効果データ
を合成して表示装置に表示することにより、非可逆圧縮
動画をその画質を劣化させることなく、視覚効果を付加
することができる。また、再圧縮処理がなくなるので編
集のためにかかる時間を短縮できる。
As described above, according to the method and system for editing and reproducing multimedia data according to the present invention,
The original data and the visual effect data for giving a visual effect in synchronization with the reproduction of the original data and the reproduction information for instructing the synthesis of the original data and the visual effect data were individually recorded on a recording medium, and were recorded on the recording medium. By combining the visual data with the original data expanded in accordance with the reproduction information and displaying the data on the display device, a visual effect can be added to the irreversibly compressed moving image without deteriorating its image quality. Further, since the recompression process is eliminated, the time required for editing can be reduced.

【0053】更に本発明による記録媒体は、オリジナル
データと、該オリジナルデータの再生に同期して視覚効
果を与える視覚効果データと、前記オリジナルデータ及
び視覚効果データの合成を指示する再生情報とを個別に
記録したことにより、オリジナルの圧縮した動画データ
自身には手を加えずに視覚効果の画像を別に構成するよ
うにしたため、オリジナルの動画データを初期の状態に
保つことができる。
Further, the recording medium according to the present invention separately includes original data, visual effect data for providing a visual effect in synchronization with the reproduction of the original data, and reproduction information for instructing the combination of the original data and the visual effect data. The original moving image data can be kept in the initial state because the image of the visual effect is separately formed without modifying the original compressed moving image data itself.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施形態によるマルチメディアデー
タの編集再生方法を適用した編集再生システムの概略構
成を示す図。
FIG. 1 is a diagram showing a schematic configuration of an editing / playback system to which a multimedia data editing / playback method according to an embodiment of the present invention is applied.

【図2】本発明による記録媒体に記録されるデータ形式
の一実施形態を示す図。
FIG. 2 is a diagram showing an embodiment of a data format recorded on a recording medium according to the present invention.

【図3】本発明による記録媒体に記録されるデータ形式
の他の実施形態を示す図。
FIG. 3 is a diagram showing another embodiment of a data format recorded on a recording medium according to the present invention.

【図4】本発明によるマルチメディアデータの編集再生
方法により再生されるオリジナルデータと視覚効果デー
タの表示結果を説明するための概念図。
FIG. 4 is a conceptual diagram for explaining a display result of original data and visual effect data reproduced by the method of editing and reproducing multimedia data according to the present invention.

【図5】本発明によるマルチメディアデータの編集再生
方法により再生されるオリジナルデータと視覚効果デー
タの他の例による表示結果を説明するための概念図。
FIG. 5 is a conceptual diagram for explaining a display result based on another example of original data and visual effect data reproduced by the method for editing and reproducing multimedia data according to the present invention.

【図6】本発明によるマルチメディアデータの編集再生
方法により視覚効果データを作成するプログラムの処理
概要を示す流れ図。
FIG. 6 is a flowchart showing an outline of processing of a program for creating visual effect data by a multimedia data editing / playback method according to the present invention.

【図7】本発明によるマルチメディアデータの編集再生
方法により図2に示したデータ形式のファイルを作成す
るプログラムの処理概要を示す流れ図。
FIG. 7 is a flowchart showing an outline of processing of a program for creating a file of the data format shown in FIG. 2 by a multimedia data editing / playback method according to the present invention;

【図8】本発明によるマルチメディアデータの編集再生
方法により図2に示したファイルを実行し、含まれる動
画データを処理し再生するプログラムの処理概要を示す
流れ図。
FIG. 8 is a flowchart showing a processing outline of a program for executing the file shown in FIG. 2 and processing and reproducing moving image data included in the file shown in FIG. 2 by a multimedia data editing / reproduction method according to the present invention;

【符号の説明】[Explanation of symbols]

10:データ提供者、11:編集プログラム部、12:
データ部、13再生プログラム部、14:データ利用
者、15:視覚効果編集部、16:エンコーダ、17:
オリジナルデータ選択部、18:再生情報生成部、1
9:再生情報、1A:オリジナルデータ、1B:視覚効
果データ、1C:視覚効果データ、1D:再生情報解析
部、1E:デコーダ、1G:再生情報入力部、1F:合
成表示部、1A1:ファイル、20:データ部、21:
オリジナルデータ部、22:視覚効果データ部、23:
プログラム部、24:再生結果。
10: data provider, 11: editing program section, 12:
Data section, 13 playback program section, 14: data user, 15: visual effect editing section, 16: encoder, 17:
Original data selector, 18: playback information generator, 1
9: reproduction information, 1A: original data, 1B: visual effect data, 1C: visual effect data, 1D: reproduction information analysis unit, 1E: decoder, 1G: reproduction information input unit, 1F: composite display unit, 1A1: file, 20: Data part, 21:
Original data part, 22: visual effect data part, 23:
Program part, 24: reproduction result.

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C053 FA07 FA14 FA23 GB05 GB21 HA40 JA30 5D044 AB07 CC09 FG21 GK07 GK12 HL09 HL11 HL14 5D110 BB20 CA16 CA18 CA46 CB06 CD15 CM06 FA02  ──────────────────────────────────────────────────続 き Continued on the front page F term (reference) 5C053 FA07 FA14 FA23 GB05 GB21 HA40 JA30 5D044 AB07 CC09 FG21 GK07 GK12 HL09 HL11 HL14 5D110 BB20 CA16 CA18 CA46 CB06 CD15 CM06 FA02

Claims (5)

【特許請求の範囲】[Claims] 【請求項1】 非可逆圧縮されたオリジナルデータに視
覚効果を与える視覚効果データを合成して表示装置に表
示するマルチメディアデータの編集再生方法であって、
オリジナルデータと該オリジナルデータの再生に同期し
て視覚効果を与える視覚効果データと前記オリジナルデ
ータ及び視覚効果データの合成を指示する再生情報とを
個別に記録媒体に記録し、該記録媒体に記録した再生情
報に従って伸張したオリジナルデータに視覚効果データ
を合成して表示装置に表示することを特徴とするマルチ
メディアデータの編集再生方法。
1. A multimedia data editing / playback method for synthesizing visual effect data for giving a visual effect to lossy-compressed original data and displaying the synthesized data on a display device,
The original data and the visual effect data for giving a visual effect in synchronization with the reproduction of the original data and the reproduction information for instructing the synthesis of the original data and the visual effect data were individually recorded on a recording medium, and were recorded on the recording medium. A method for editing and reproducing multimedia data, comprising combining visual effect data with original data decompressed in accordance with reproduction information and displaying the result on a display device.
【請求項2】 前記オリジナルデータ及び視覚効果デー
タが複数の静止画から成る動画データを含み、前記オリ
ジナルデータの静止画に時間的に同期した視覚効を持つ
複数の静止画からなる視覚効果データを作成し、前記オ
リジナルデータ及び再生情報と共に記録媒体に記録する
ことを特徴とする請求項1記載のマルチメディアデータ
の編集再生方法。
2. The method according to claim 1, wherein the original data and the visual effect data include moving image data including a plurality of still images, and the visual effect data including a plurality of still images having a visual effect temporally synchronized with the still image of the original data. 2. The method of editing and reproducing multimedia data according to claim 1, wherein the method is created and recorded on a recording medium together with the original data and reproduction information.
【請求項3】 非可逆圧縮されたオリジナルデータに視
覚効果を与える視覚効果データを合成して表示装置に表
示するマルチメディアデータの編集再生システムにおい
て、オリジナルデータと該オリジナルデータの再生に同
期して視覚効果を与える視覚効果データと前記オリジナ
ルデータ及び視覚効果データの合成を指示する再生情報
とを個別に記録媒体に記録する編集手段と、該編集手段
により編集された記録媒体に記録した再生情報に従って
伸張したオリジナルデータに視覚効果データを合成して
表示装置に表示する再生部とを備えることを特徴とする
マルチメディアデータの編集再生システム。
3. A multimedia data editing / playback system for synthesizing visual effect data that gives a visual effect to irreversibly compressed original data and displaying the combined data on a display device, in synchronization with the reproduction of the original data and the original data. Editing means for individually recording, on a recording medium, visual effect data for providing a visual effect and reproduction information for instructing synthesis of the original data and the visual effect data, and reproduction information recorded on the recording medium edited by the editing means. A playback unit for combining visual effect data with the expanded original data and displaying the combined data on a display device.
【請求項4】 前記オリジナルデータ及び視覚効果デー
タが複数の静止画から成る動画データを含み、前記編集
手段が、前記オリジナルデータの静止画に時間的に同期
した視覚効果を持つ複数の静止画からなる視覚効果デー
タを作成し、前記オリジナルデータ及び再生情報と共に
記録媒体に記録することを特徴とする請求項2記載のマ
ルチメディアデータの編集再生システム。
4. The original data and the visual effect data include moving image data composed of a plurality of still images, and the editing means is configured to convert a plurality of still images having a visual effect temporally synchronized with the still image of the original data. 3. The multimedia data editing and reproducing system according to claim 2, wherein the visual effect data is created and recorded together with the original data and reproduction information on a recording medium.
【請求項5】 オリジナルデータと、該オリジナルデー
タの再生に同期して視覚効果を与える視覚効果データ
と、前記オリジナルデータ及び視覚効果データの合成を
指示する再生情報とを個別に記録したことを特徴とする
記録媒体。
5. The method according to claim 1, wherein the original data, the visual effect data for providing a visual effect in synchronization with the reproduction of the original data, and the reproduction information for instructing the combination of the original data and the visual effect data are individually recorded. Recording medium.
JP11099078A 1999-04-06 1999-04-06 Method and system for editing and reproducing multimedia data and medium for recording multimedia data Pending JP2000295566A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP11099078A JP2000295566A (en) 1999-04-06 1999-04-06 Method and system for editing and reproducing multimedia data and medium for recording multimedia data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP11099078A JP2000295566A (en) 1999-04-06 1999-04-06 Method and system for editing and reproducing multimedia data and medium for recording multimedia data

Publications (1)

Publication Number Publication Date
JP2000295566A true JP2000295566A (en) 2000-10-20

Family

ID=14237894

Family Applications (1)

Application Number Title Priority Date Filing Date
JP11099078A Pending JP2000295566A (en) 1999-04-06 1999-04-06 Method and system for editing and reproducing multimedia data and medium for recording multimedia data

Country Status (1)

Country Link
JP (1) JP2000295566A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005027133A1 (en) * 2003-09-09 2005-03-24 Sony Corporation File recording device, file reproducing device, file recording method, program of file recording method, recording medium containing therein program of file recording method, file reproducing method, program of file reproducing method, and recording medium containing therein program of file reproducing method
US7711241B2 (en) 2002-11-25 2010-05-04 Panasonic Corporation Short film generation/reproduction apparatus and method thereof

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7711241B2 (en) 2002-11-25 2010-05-04 Panasonic Corporation Short film generation/reproduction apparatus and method thereof
WO2005027133A1 (en) * 2003-09-09 2005-03-24 Sony Corporation File recording device, file reproducing device, file recording method, program of file recording method, recording medium containing therein program of file recording method, file reproducing method, program of file reproducing method, and recording medium containing therein program of file reproducing method
US7702220B2 (en) 2003-09-09 2010-04-20 Sony Corporation File recording device, file reproduction device, file recording method, program of file recording method, recording medium containing therein program of file recording method, file reproducing method, program of file reproducing method, and recording medium containing therein program of file reproducing method

Similar Documents

Publication Publication Date Title
JP2010154545A (en) Reproduction device for reproducing data stored in information storage medium with multi-language supporting subtitle data using text data and download font recorded therein, and data recording and/or reproducing device
JPH04117686A (en) Moving image editing device
US6618058B1 (en) Editing device and editing method
JP4823688B2 (en) Information storage medium in which subtitle data for multilingual support using text data and downloaded fonts is recorded, and apparatus therefor
JP3325809B2 (en) Video production method and apparatus and recording medium recording this method
JP2002374494A (en) Generation system and retrieving method for video contents file
US20080219636A1 (en) Authoring Audiovisual Content
JP2004201100A (en) Additional information inserting device and its method
JP2000295566A (en) Method and system for editing and reproducing multimedia data and medium for recording multimedia data
JP2002142188A (en) Method and device for compiling dynamic image
JPH10276388A (en) Device, method for processing and reproducing image and recording medium
JP4127205B2 (en) Image recording device
JP3496866B2 (en) Manga-type video editing method and apparatus, and recording medium recording the editing method
JP7267568B2 (en) Video/audio synthesis method
JP4280688B2 (en) Movie processing apparatus and movie processing method
JP4128466B2 (en) Content display device
JPH1021029A (en) Telop display device
KR101980414B1 (en) Method and System for Extensible Video Rendering
KR102523814B1 (en) Electronic apparatus that outputs subtitle on screen where video is played based on voice recognition and operating method thereof
JP3985775B2 (en) Edited image display control device, edited image display control method and program
JP3926432B2 (en) Karaoke equipment
JP2003037807A (en) Video editing software and editing method
JP2001339691A (en) Multimedia contents reproducing system and its method
JPH11308567A (en) Layout video image edit method with page display function, its system and recording medium recording its program
JP4769168B2 (en) Non-linear editing apparatus and non-linear editing method

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20041007

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041019

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20050301