JP2004180287A - Edit image display control apparatus, edit image display control method and program - Google Patents

Edit image display control apparatus, edit image display control method and program Download PDF

Info

Publication number
JP2004180287A
JP2004180287A JP2003381146A JP2003381146A JP2004180287A JP 2004180287 A JP2004180287 A JP 2004180287A JP 2003381146 A JP2003381146 A JP 2003381146A JP 2003381146 A JP2003381146 A JP 2003381146A JP 2004180287 A JP2004180287 A JP 2004180287A
Authority
JP
Japan
Prior art keywords
display
material data
image
frame rate
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003381146A
Other languages
Japanese (ja)
Other versions
JP3985775B2 (en
Inventor
Junichi Ogikubo
純一 荻窪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2003381146A priority Critical patent/JP3985775B2/en
Publication of JP2004180287A publication Critical patent/JP2004180287A/en
Application granted granted Critical
Publication of JP3985775B2 publication Critical patent/JP3985775B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To easily perform editing processing using a material generated at a reference frame rate and a material obtained by varying the frame rate. <P>SOLUTION: When an image based on material data is displayed on a material management browser, a story board and a time line, a display image is controlled so that material data combined with rate information as associated information can be distinguished from material data not combined with frame rate information. When the frame rate data are combined as the associated information, a speed range available for reproduction which has been decided on the frame rate information is displayed. A console indication in variable speeds for varying the reproduction speed within the reproduction speed display and the speed range available for reproduction is provided, and the reproduced image is displayed on material image representation at set reproduction speed. <P>COPYRIGHT: (C)2004,JPO

Description

この発明は、編集画像表示制御装置と編集画像表示制御方法およびプログラムに関する。詳しくは、素材データにフレームレート情報が付属情報として連結されているか否かを検出して、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御するものである。   The present invention relates to an edited image display control device, an edited image display control method, and a program. Specifically, it is detected whether or not the frame rate information is linked to the material data as additional information, and the material data with the frame rate information connected as additional information and the frame rate information are not linked as additional information The state of the display image for editing is controlled so that the material data is identified and displayed.

従来、放送や通信網を介した配信あるいは記録媒体としての流通等で用いる画像あるいは画像音声のコンテンツ生成では、制作者の意図する効果を出すため、30フレーム/秒などの基準フレームレートで生成したコンテンツだけでなく、動きの速度を変えたコンテンツも用いられている。   Conventionally, in the generation of images or video / audio contents used for distribution via a broadcast or a communication network or distribution as a recording medium, the contents are generated at a reference frame rate such as 30 frames / second in order to produce an effect intended by a creator. Not only content, but also content with different movement speeds is used.

この動きの速度を変えたコンテンツの生成では、例えば基準フレームレートに対してフレームレートを高く設定してコンテンツを生成し、このコンテンツを基準フレームレートで再生することにより、実際よりも動きを遅く表現したコンテンツを生成する。また、基準フレームレートに対してフレームレートを低く設定してコンテンツを生成し、このコンテンツを基準フレームレートで再生することにより、動きを実際より速く表現したコンテンツを生成する。さらに、設定するフレームレートや再生時のフレームレートを調整することで、動きの速度を自由に可変できる。   In the generation of the content in which the movement speed is changed, for example, the content is generated by setting the frame rate higher than the reference frame rate, and the content is reproduced at the reference frame rate, so that the motion is expressed slower than actual. Generated content. In addition, content is generated by setting the frame rate lower than the reference frame rate, and the content is reproduced at the reference frame rate, thereby generating content that expresses the movement faster than it actually is. Further, by adjusting the set frame rate or the frame rate at the time of reproduction, the speed of the movement can be freely varied.

このような動きの速度を変えたコンテンツと、基準フレームレートで生成したコンテンツとを用いて編集処理を行うことで、制作者の意図する効果が得られるコンテンツの生成が行われている。   By performing the editing process using the content whose movement speed has been changed and the content generated at the reference frame rate, the content that produces the effect intended by the creator is generated.

また、フレームレートを可変したコンテンツを生成できるように、時間軸の伸張や圧縮を行うことができるビデオカメラが、例えば特許文献1で示されている。   Also, a video camera capable of expanding and compressing a time axis so as to generate content with a variable frame rate is disclosed in, for example, Patent Document 1.

特開平11-177930号公報JP-A-11-177930

ところで、上述のように基準フレームレートで生成したコンテンツと動きの速度を変えたコンテンツとを素材として用いることにより編集処理を行う場合、単にコンテンツの画像を表示するだけでは、各コンテンツがどのようなフレームレートで生成されているかを編集時に容易に識別することができない。また、動きの速度を変えたコンテンツに対して速度の変更処理を行う場合、画質の低下を招くことなく容易に速度変更を行うことができるか否かの識別も行うことができない。例えば設定されたフレームレート(以下「設定フレームレート」という)が基準フレームレートに対して10倍とされた場合、この設定フレームレートで生成されたコンテンツを基準フレームレートで再生すると、動きを1/10倍速として表現したコンテンツとなる。ここで、動きを1/5倍速として表現したいときには、設定フレームレートが基準フレームレートに対して10倍であることから、1フレーム毎に間引きを行うことで、画質を劣化させることなく簡単に速度変更を行うことができると識別できる。しかし、表示された画像だけでは、画質を劣化させることなく簡単に速度変更を行うことができるか否かを識別することができない。   By the way, when the editing process is performed by using the content generated at the reference frame rate and the content whose moving speed is changed as a material as described above, simply displaying the image of the content is not enough for each content. It cannot be easily identified at the time of editing whether or not the frame rate is generated. Further, in the case of performing the speed changing process on the content whose moving speed has been changed, it is not possible to easily determine whether or not the speed can be changed without lowering the image quality. For example, if the set frame rate (hereinafter, referred to as “set frame rate”) is set to 10 times the reference frame rate, when the content generated at the set frame rate is reproduced at the reference frame rate, the motion is reduced by 1 / The content is expressed as 10 times speed. Here, when it is desired to express the motion as 1/5 times speed, since the set frame rate is 10 times higher than the reference frame rate, by thinning out every frame, the speed can be easily reduced without deteriorating the image quality. Identify that changes can be made. However, it is not possible to identify whether or not the speed can be easily changed without deteriorating the image quality only by the displayed image.

そこで、この発明では、基準フレームレートで生成した素材とフレームレート
を可変した素材とを用いて容易に編集処理を行うことができるように編集表示画像の状態を制御する編集画像表示制御装置と編集画像表示制御方法およびプログラムを提供するものである。
Therefore, according to the present invention, there is provided an edit image display control device for controlling the state of an edit display image so that an edit process can be easily performed using a material generated at a reference frame rate and a material having a variable frame rate. An image display control method and a program are provided.

この発明に係る編集画像表示制御装置は、素材データにフレームレート情報が付属情報として連結されているか否かを検出する検出手段と、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御する制御手段とを有するものである。   An editing image display control device according to the present invention includes: a detecting unit configured to detect whether or not frame rate information is connected to material data as additional information; material data to which frame rate information is connected as additional information; Control means for controlling the state of the display image for editing so that the rate information is identified and displayed as the material data not connected as the attached information.

また、この発明に係る編集画像表示制御方法は、素材データにフレームレート情報が付属情報として連結されているか否かを検出する検出ステップと、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御する表示制御ステップとを有するものである。   Further, the edited image display control method according to the present invention includes a detecting step of detecting whether or not frame rate information is connected to the material data as additional information; and a material data to which the frame rate information is connected as additional information. And a display control step of controlling the state of the display image for editing so that the frame rate information is identified and displayed with the material data that is not linked as additional information.

さらに、この発明に係るプログラムは、素材データにフレームレート情報が付属情報として連結されているか否かを検出するするステップと、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御するステップをコンピュータに実行させるものである。   Further, the program according to the present invention includes a step of detecting whether or not frame rate information is linked to the material data as additional information; a step of detecting whether the frame rate information is linked as additional information; Is to cause the computer to execute a step of controlling the state of the display image for editing so that the material data that is not linked is identified and displayed as additional information.

この発明においては、素材データを取り込み、取り込んだ素材データを用いて編集処理が行われるとき、素材データにフレームレート情報が付属情報として連結されているか否かが検出されて、素材データにフレームレート情報が連結されている素材データと、フレームレート情報が連結されていない素材データを識別可能に表示される。例えば、素材データの一覧を示す素材管理表示において、付属情報が連結されている素材データと付属情報が連結されていない素材データとが識別可能に表示される。また、素材データを再生順に並べてコンテンツの生成を行う再生順序表示において、付属情報が連結されている素材データと付属情報が連結されていない素材データとが識別可能に表示される。さらに、時間軸に沿って素材データを貼り付けてコンテンツの生成を行う再生時間順表示において、付属情報が連結されている素材データと付属情報が連結されていない素材データとが識別可能に表示される。   In the present invention, when material data is fetched and editing processing is performed using the fetched material data, it is detected whether or not frame rate information is linked to the material data as additional information, and the frame rate is added to the material data. Material data to which information is linked and material data to which frame rate information is not linked are displayed so as to be identifiable. For example, in a material management display showing a list of material data, material data having attached information and material data having no attached information are displayed in a distinguishable manner. Also, in the reproduction order display in which the content data is arranged in the reproduction order to generate the content, the material data to which the attached information is linked and the material data to which the attached information is not linked are displayed so as to be identifiable. Furthermore, in the playback time order display in which material data is pasted along the time axis to generate content, material data with attached information and material data without attached information are displayed in a distinguishable manner. You.

また、付属情報に基づき素材データの再生可能速度範囲が決定されて、決定した再生可能速度範囲が表示される。この再生可能速度範囲は、素材データの一覧を示す素材管理表示や素材データを再生順に並べてコンテンツの生成を行う再生順序表示および素材データの再生画像表示において表示される。再生可能速度範囲の表示内には再生速度を示す位置表示が設けられる。   Further, the reproducible speed range of the material data is determined based on the attached information, and the determined reproducible speed range is displayed. This reproducible speed range is displayed in a material management display showing a list of material data, a reproduction order display in which material data is arranged in reproduction order, and a reproduction image display of material data. In the display of the reproducible speed range, a position display indicating the replay speed is provided.

さらに、時間軸に沿って素材データを貼り付けてコンテンツの生成を行う再生時間順表示において、素材データの表示幅が再生速度に基づいて算出した再生時間に応じて可変して表示される。また、再生時間順表示における素材データの表示幅を可変する操作が行われたときには、操作に応じて位置表示の表示位置を連動させて移動されるとともに、位置表示の表示位置を可変する操作が行われたときには、操作に応じて再生時間順表示における素材データの表示幅が可変される。   Furthermore, in the playback time order display in which the content is generated by pasting the material data along the time axis, the display width of the material data is variably displayed according to the playback time calculated based on the playback speed. In addition, when an operation of changing the display width of the material data in the playback time order display is performed, the display position of the position display is moved in conjunction with the operation, and an operation of changing the display position of the position display is performed. When performed, the display width of the material data in the playback time order display is changed according to the operation.

この発明によれば、素材データを取り込み、取り込んだ素材データを用いて編集処理が行われるとき、素材データにフレームレート情報が付属情報として連結されているか否かが検出されて、素材データにフレームレート情報が連結されている素材データと、フレームレート情報が連結されていない素材データを識別可能に表示される。このため、素材データのフレームレート情報を利用したスロー再生が可能なシーンを簡単に見つけることができる。   According to the present invention, when material data is fetched and editing processing is performed using the fetched material data, it is detected whether or not frame rate information is linked to the material data as additional information, and a frame is added to the material data. The material data to which the rate information is linked and the material data to which the frame rate information is not linked are displayed so as to be identifiable. For this reason, it is possible to easily find a scene capable of slow reproduction using the frame rate information of the material data.

また、付属情報に基づき素材データの再生可能速度範囲が決定されて、決定した再生可能速度範囲が表示されるので、ノイズレスで再生可能な再生速度を容易に設定できる。また、時間軸に沿って素材データを貼り付けてコンテンツの生成を行う再生時間順表示において、素材データの表示幅が再生速度に基づいて算出した再生時間に応じて可変して表示されるので、時間軸の伸び縮みを、視覚的に把握できる。さらに再生時間順表示における素材データの表示幅を可変する操作が行われたときには、操作に応じて再生可能速度範囲の表示における再生速度の位置表示が連動して移動されるとともに、位置表示を可変する操作が行われたときには、操作に応じて再生時間順表示における素材データの表示幅が可変されるので、再生速度と時間軸の伸び縮みの関係も容易に把握できる。   In addition, since the reproducible speed range of the material data is determined based on the attached information and the determined reproducible speed range is displayed, the reproducible reproducible speed without noise can be easily set. Also, in the playback time order display in which material data is pasted along the time axis and content is generated, since the display width of the material data is variably displayed according to the playback time calculated based on the playback speed, The expansion and contraction of the time axis can be visually grasped. Further, when an operation for changing the display width of the material data in the playback time order display is performed, the position display of the playback speed in the display of the playable speed range is moved in conjunction with the operation, and the position display is changed. When the operation is performed, the display width of the material data in the reproduction time order display is changed according to the operation, so that the relationship between the reproduction speed and the expansion / contraction of the time axis can be easily grasped.

以下、この発明の実施の形態について説明する。図1は、画像および/または音声コンテンツのコンテンツ編集システムの全体構成の一例を示している。撮像装置10はフレームレートが可変設定された映像データを生成して、この映像データのフレームレートを示すフレームレート情報が含まれた付属情報を映像データに連結して素材データDTmとして、編集画像表示制御を行う編集装置30に供給する。また、音声入力装置20が撮像装置10に設けられているときには音声データを生成して、付属情報と共に素材データDTmとして編集装置30に供給する。なお、素材データDTmは、撮像装置10だけでなく他の機器から供給されるものとしても良い。なお、ここで言う連結とは、映像データとフレームレート情報を含む付属情報が、互いにリンクされている状態であれば良い。例えば、互いに別の記録媒体に記録されていたり、別の伝送路で伝送されたものであっても、付属情報に対応するフレーム番号が含まれている等していれば、後で互いの対応が付けることができる。本実施の形態では、このような場合も含めて、連結しているとする。   Hereinafter, embodiments of the present invention will be described. FIG. 1 shows an example of the entire configuration of a content editing system for image and / or audio content. The imaging device 10 generates video data with a variably set frame rate, connects the attached information including frame rate information indicating the frame rate of the video data to the video data, and displays the edited image as material data DTm. It is supplied to the editing device 30 that performs control. Further, when the audio input device 20 is provided in the imaging device 10, the audio data is generated and supplied to the editing device 30 as the material data DTm together with the accompanying information. The material data DTm may be supplied not only from the imaging device 10 but also from other devices. It should be noted that the connection here may be any state as long as the video data and the additional information including the frame rate information are linked to each other. For example, even if they are recorded on different recording media or transmitted on different transmission paths, if the frame numbers corresponding to the attached information are included, etc. Can be attached. In the present embodiment, it is assumed that the connection is made including such a case.

編集装置30は、供給された素材データDTmを用いて編集処理を行い、コンテンツデータDCを生成して出力する。なお、編集装置30は、編集に関した映像信号Svmを生成して編集画像表示装置40に供給する。これにより、ユーザは、編集画像表示装置40での表示画像によって画像の編集経過や編集結果等の確認を行うことができる。同様に、編集装置30は、編集に関した音声信号Samを生成して編集音声出力装置41に供給する。これにより、ユーザは、編集音声出力装置41から出力される音声によって音声の編集経過や編集結果等の確認を行うことができる。   The editing device 30 performs an editing process using the supplied material data DTm to generate and output content data DC. The editing device 30 generates a video signal Svm relating to editing and supplies the video signal Svm to the edited image display device 40. Thereby, the user can confirm the editing progress and the editing result of the image on the display image on the edited image display device 40. Similarly, the editing device 30 generates an audio signal Sam related to editing and supplies the generated audio signal Sam to the edited audio output device 41. Thereby, the user can confirm the editing progress of the audio, the editing result, and the like by the audio output from the edited audio output device 41.

図2は、撮像装置10の構成例を示している。撮像レンズ系11を通して入射された光は、撮像部12に入射されて、撮像部12に設けられている例えばCCD(Charge Coupled Device)等の撮像素子の撮像面上に被写体画像が結像される。撮像素子は、光電変換によって被写体画像の撮像電荷を生成する。また、後述するタイミングジェネレータ142からの駆動信号CRに基づいて、生成した撮像電荷の読み出しを行い、駆動信号CRに応じたフレームレートの撮像信号Spを生成して信号処理部13のカメラ処理回路131に供給する。   FIG. 2 shows a configuration example of the imaging device 10. The light incident through the imaging lens system 11 is incident on the imaging unit 12, and a subject image is formed on an imaging surface of an imaging element such as a CCD (Charge Coupled Device) provided in the imaging unit 12. . The imaging element generates an imaging charge of a subject image by photoelectric conversion. Further, based on a driving signal CR from a timing generator 142 described later, the generated imaging charge is read out, an imaging signal Sp having a frame rate corresponding to the driving signal CR is generated, and a camera processing circuit 131 of the signal processing unit 13 is generated. To supply.

カメラ処理回路131は、タイミングジェネレータ142から供給されたタイミング信号CTに基づき、撮像信号Spと同期したタイミングで種々の信号処理を行う。例えば、相関二重サンプリング等を行うことで撮像信号Spからノイズ成分を除去する処理、ノイズ除去された撮像信号Spをディジタルの映像データに変換する処理、映像データのクランプ処理、シェーディング補正や撮像素子の欠陥補正、γ処理や輪郭補償およびニー(knee)補正等を行う。また、制御部14の撮像制御回路141から供給された動作制御信号CSに基づいた処理条件等で種々の信号処理を行う。このように、カメラ処理回路131で種々の信号処理を行って得られた映像データDVは、出力部15に供給される。   The camera processing circuit 131 performs various signal processing at a timing synchronized with the imaging signal Sp based on the timing signal CT supplied from the timing generator 142. For example, a process of removing noise components from the imaging signal Sp by performing correlated double sampling, a process of converting the imaging signal Sp from which noise has been removed into digital video data, a clamping process of video data, a shading correction, an imaging device Correction, gamma processing, contour compensation and knee correction. In addition, various signal processes are performed under processing conditions based on the operation control signal CS supplied from the imaging control circuit 141 of the control unit 14. As described above, the video data DV obtained by performing various kinds of signal processing by the camera processing circuit 131 is supplied to the output unit 15.

制御部14のタイミングジェネレータ142は、撮像制御回路141からの動作制御信号CSに応じた駆動信号CRを生成して撮像部12に供給することにより、撮像部12における撮像電荷の読み出し周期を可変して、撮像信号Spのフレームレートを、ユーザインタフェース部16からの操作信号PSaに基づいた設定フレームレートFRsに制御する。例えばNTSC方式ではフレーム周波数59.94Hzや29.97Hz、PAL方式ではフレーム周波数50Hzや25Hzを基準フレームレートFRrのフレーム周波数として、設定フレームレートFRsを基準フレームレートFRrのk(kは正数に限らない正の値)倍とする操作が行われたときには、撮像信号Spのフレームレートが基準フレームレートFRrのk倍となるように制御する。なお、例えば、CCD等の撮像素子の各画素から転送部へ各画素に蓄積された撮像電荷を移動させるための読み出しパルス(センサーゲートパルス)の周期を変更する等することで、撮像電荷の読み出し周期が可変され、フレームレートが可変される。また、この際に、CDR(Common Data Rate)方式を採用しても良い。CDR方式を用いると、有効なフレームレートは可変するが、CCDから出力される信号のフレームレートは不変とすることができ、カメラ処理回路131等の処理レートを一定とすることができる。このCDR方式に関しては、PCT出願、出願番号PCT/JP03/0051、2003/01/22出願に開示されている。   The timing generator 142 of the control unit 14 generates a drive signal CR according to the operation control signal CS from the imaging control circuit 141 and supplies the driving signal CR to the imaging unit 12, thereby changing the readout cycle of the imaging charge in the imaging unit 12. Then, the frame rate of the imaging signal Sp is controlled to the set frame rate FRs based on the operation signal PSa from the user interface unit 16. For example, in the NTSC system, the frame frequency is 59.94 Hz or 29.97 Hz, in the PAL system, the frame frequency is 50 Hz or 25 Hz as the frame frequency of the reference frame rate FRr, and the set frame rate FRs is k (k is limited to a positive number) of the reference frame rate FRr. When an operation of multiplying by (no positive value) is performed, control is performed so that the frame rate of the imaging signal Sp becomes k times the reference frame rate FRr. Note that, for example, by changing the period of a read pulse (sensor gate pulse) for moving the imaging charge accumulated in each pixel from each pixel of the imaging device such as a CCD to the transfer unit, the imaging charge is read. The cycle is varied, and the frame rate is varied. At this time, a CDR (Common Data Rate) method may be adopted. When the CDR method is used, the effective frame rate is variable, but the frame rate of the signal output from the CCD can be unchanged, and the processing rate of the camera processing circuit 131 and the like can be constant. This CDR system is disclosed in PCT application, application number PCT / JP03 / 0051, and application on January 22, 2003.

また、タイミングジェネレータ142は、駆動信号CRに同期したタイミング信号CTを生成してカメラ処理回路131や音声処理回路132に供給する。さらに、タイミングジェネレータ142は、映像データDVのフレームレートである設定フレームレートFRsをフレームレート情報として、このフレームレート情報を含む付属情報DMを生成して、出力部15に供給する。   Further, the timing generator 142 generates a timing signal CT synchronized with the drive signal CR and supplies the timing signal CT to the camera processing circuit 131 and the audio processing circuit 132. Further, the timing generator 142 uses the set frame rate FRs, which is the frame rate of the video data DV, as frame rate information, generates additional information DM including the frame rate information, and supplies the information DM to the output unit 15.

制御部14の撮像制御回路141には、ユーザインタフェース部16が接続されている。ユーザインタフェース部16は、撮像装置10での動作切換操作やフレームレート可変操作が行われたとき、これらの操作に応じた操作信号PSaを生成して撮像制御回路141に供給する。また、ユーザインタフェース部16は、図示しないリモートコマンダ等の外部機器から操作信号PSaが供給されたとき、この操作信号PSaを撮像制御回路141に供給する。   The user interface unit 16 is connected to the imaging control circuit 141 of the control unit 14. When an operation switching operation or a variable frame rate operation is performed on the imaging device 10, the user interface unit 16 generates an operation signal PSa corresponding to the operation and supplies the operation signal PSa to the imaging control circuit 141. Further, when an operation signal PSa is supplied from an external device such as a remote commander (not shown), the user interface unit 16 supplies the operation signal PSa to the imaging control circuit 141.

撮像制御回路141は、ユーザインタフェース部16からの操作信号PSaに基づき、撮像装置10の動作が操作信号PSaに応じた動作となるように、動作制御信号CSを生成してカメラ処理回路131やタイミングジェネレータ142に供給する。   The imaging control circuit 141 generates an operation control signal CS based on the operation signal PSa from the user interface unit 16 so that the operation of the imaging device 10 becomes an operation corresponding to the operation signal PSa, Supply to generator 142.

音声処理回路132には、音声入力装置20からアナログの音声信号Sinが供給される。音声処理回路132は、タイミングジェネレータ142から供給されたタイミング信号CTに基づいて音声信号Sinのサンプリング処理を行い、ディジタルの音声データDAを生成して出力部15に供給する。   The audio processing circuit 132 is supplied with an analog audio signal Sin from the audio input device 20. The audio processing circuit 132 performs sampling processing of the audio signal Sin based on the timing signal CT supplied from the timing generator 142, generates digital audio data DA, and supplies the digital audio data DA to the output unit 15.

出力部15は、映像データDVや音声データDAに対して付属情報DMを連結させて素材データDTmを生成して編集装置30に供給する。なお、素材データDTmあるいは素材データDTmに基づいて生成した記録信号を記録媒体に記録すれば、記録媒体に記録されている素材データDTmあるいは素材データDTmを編集装置30で再生することにより、記録媒体を介して素材データDTmを編集装置30に供給できる。   The output unit 15 generates the material data DTm by connecting the attached information DM to the video data DV and the audio data DA, and supplies the material data DTm to the editing device 30. If the material data DTm or the recording signal generated based on the material data DTm is recorded on the recording medium, the material data DTm or the material data DTm recorded on the recording medium is reproduced by the editing device 30 so that the recording medium is reproduced. , The material data DTm can be supplied to the editing device 30.

ここで、映像データDVや音声データDAに対して付属情報DMを連結させる方法の一例として、映像データDVや音声データDAを圧縮してデータストリームとして素材データDTmを生成するときには画像のデータストリーム中に付属情報DMを挿入、あるいはデータストリームのヘッダ中に付属情報DMを挿入することが考えられる。   Here, as an example of a method of connecting the additional information DM to the video data DV and the audio data DA, when the video data DV and the audio data DA are compressed to generate the material data DTm as a data stream, the data The additional information DM may be inserted into the header of the data stream, or the additional information DM may be inserted into the header of the data stream.

また、非圧縮の映像データや音声データを伝送するためにSMPTE(Society of Motion Picture and Television Engineers)259M「Television - 10-Bit 4:2:2 Component and 4fsc Composite Digital Signals - Serial Digital Interface」として規格化されているSDIフォーマットや、圧縮された映像データや音声データを伝送するためにSMPTE305M「Television - Serial Data Transport Interface (SDTI)」として規格化されているSDTIフォーマット、SDTIフォーマットを更に限定しているSMPTE326M「Television - SDTI Content Package Format (SDTI-CP)」として規格化されたSDTI−CPフォーマットを用いる場合、付属情報DMをSMPTE330M「Television - Unique Material Identifier (UMID)」として規格化されているUMIDのデータとして、各フォーマットの信号に挿入することが考えられる。なお、映像データDVや音声データDAに対して付属情報DMを連結する方法はこれに限られず種々の方法が考えられる。   Also, to transmit uncompressed video data and audio data, it is standardized as SMPTE (Society of Motion Picture and Television Engineers) 259M "Television-10-Bit 4: 2: 2 Component and 4fsc Composite Digital Signals-Serial Digital Interface". The SDTI format and the SDTI format standardized as SMPTE305M “Television-Serial Data Transport Interface (SDTI)” for transmitting compressed video data and audio data are further limited. When using the SDTI-CP format standardized as SMPTE 326M “Television-SDTI Content Package Format (SDTI-CP)”, the auxiliary information DM is a UMID standardized as SMPTE 330M “Television-Unique Material Identifier (UMID)”. Data can be inserted into each format signal. Erareru. The method of connecting the attached information DM to the video data DV and the audio data DA is not limited to this, and various methods can be considered.

ところで、上述の撮像装置10は、設定フレームレートFRsの撮像信号Spを得ることができるように、撮像部12における撮像電荷の読み出し周期を可変した。しかし、撮像部12における撮像電荷の読み出し周期を可変しなくとも、設定フレームレートFRsの撮像信号Spを得ることができる。すなわち、設定フレームレートFRsよりも高いフレームレートであり、フレームレートが一定である映像データDVaを生成して、この映像データDVaから設定フレームレートFRs分だけ映像データを抽出することで、設定フレームレートFRsの映像データDVを生成できる。この場合の構成を図3に示す。なお、図3において、図2と対応する部分については同一符号を付し詳細な説明は省略する。   By the way, the above-described imaging apparatus 10 varies the readout cycle of the imaging charge in the imaging unit 12 so that the imaging signal Sp of the set frame rate FRs can be obtained. However, the imaging signal Sp at the set frame rate FRs can be obtained without changing the readout cycle of the imaging charge in the imaging unit 12. That is, video data DVa having a higher frame rate than the set frame rate FRs and having a constant frame rate is generated, and video data is extracted from the video data DVa by the set frame rate FRs, whereby the set frame rate is obtained. Video data DV of FRs can be generated. FIG. 3 shows the configuration in this case. Note that, in FIG. 3, portions corresponding to those in FIG. 2 are denoted by the same reference numerals, and detailed description is omitted.

制御部18のタイミングジェネレータ182は、ユーザインタフェース部16を介して設定される設定フレームレートFRsの最高値に応じた駆動信号CRaを生成して撮像部12に供給する。撮像部12は、駆動信号CRaに基づいて撮像信号の生成を行い、フレームレートが基準フレームレートFRrよりも高い固定フレームレートFRqの撮像信号Spaを生成して信号処理部17のカメラ処理回路131に供給する。例えば、設定フレームレートFRsが基準フレームレートFRrのn(nは自然数)倍まで変更可能であるとき、基準フレームレートFRrのn倍のフレームレートである撮像信号Spaを生成して、カメラ処理回路131に供給する。即ち、撮像部12は、ユーザインタフェース部16を介して設定される設定フレームレートFRsに影響されることなく、固定のフレームレートである撮像信号Spaを生成する。   The timing generator 182 of the control unit 18 generates a drive signal CRa corresponding to the maximum value of the set frame rate FRs set via the user interface unit 16 and supplies the drive signal CRa to the imaging unit 12. The imaging unit 12 generates an imaging signal based on the drive signal CRa, generates an imaging signal Spa having a fixed frame rate FRq whose frame rate is higher than the reference frame rate FRr, and sends the imaging signal Spa to the camera processing circuit 131 of the signal processing unit 17. Supply. For example, when the set frame rate FRs can be changed up to n times (n is a natural number) times the reference frame rate FRr, the camera processing circuit 131 generates an image signal Spa having a frame rate n times the reference frame rate FRr. To supply. That is, the imaging unit 12 generates the imaging signal Spa having a fixed frame rate without being affected by the set frame rate FRs set via the user interface unit 16.

また、タイミングジェネレータ182は、駆動信号CRaに同期したタイミング信号CTaを生成して信号処理部17のカメラ処理回路131や音声処理回路132および有効フレーム信号生成回路183に供給する。   Further, the timing generator 182 generates a timing signal CTa synchronized with the drive signal CRa and supplies the timing signal CTa to the camera processing circuit 131, the audio processing circuit 132, and the effective frame signal generation circuit 183 of the signal processing unit 17.

カメラ処理回路131は、撮像信号Spaに基づいて生成した固定フレームレートFRqの映像データDVaを有効データ選別回路171に供給する。音声処理回路132は、一定周波数のタイミング信号CTaに基づいたサンプリングを行って生成した音声データDAaを有効データ選別回路171に供給する。   The camera processing circuit 131 supplies the effective data selection circuit 171 with the video data DVa having the fixed frame rate FRq generated based on the imaging signal Spa. The audio processing circuit 132 supplies the valid data selection circuit 171 with audio data DAa generated by performing sampling based on the constant frequency timing signal CTa.

撮像制御回路181は、ユーザインタフェース部16からの操作信号PSaに基づき、設定フレームレートFRsを示す設定情報信号CFを生成して有効フレーム信号生成回路183に供給する。   The imaging control circuit 181 generates a setting information signal CF indicating the setting frame rate FRs based on the operation signal PSa from the user interface unit 16 and supplies the setting information signal CF to the effective frame signal generation circuit 183.

有効フレーム信号生成回路183は、映像データDVaの一定値であるフレームレートFRqと設定情報信号CFによって示された設定フレームレートFRsとの比に基づき、映像データDVaからフレーム単位でデータ抽出を行って設定フレームレートFRsの映像データDVを生成するための抽出制御信号CCを生成する。さらに、有効フレーム信号生成回路183は、この抽出制御信号CCをタイミング信号CTaに同期して有効データ選別回路171に供給する。例えば、映像データDVaのフレームレートFRqが基準フレームレートFRrのn倍であり、設定フレームレートFRsが基準フレームレートFRrの(n/2)倍であるとき、映像データDVaから1フレーム置きにフレーム単位でデータ抽出を行う抽出制御信号CCを生成して、タイミング信号CTaに同期して有効データ選別回路171に供給する。また、有効フレーム信号生成回路183は、設定情報信号CFに基づき設定フレームレートFRsをフレームレート情報として有する付属情報DMを生成して出力部15に供給する。   The effective frame signal generation circuit 183 extracts data from the video data DVa on a frame basis based on the ratio between the frame rate FRq, which is a constant value of the video data DVa, and the set frame rate FRs indicated by the setting information signal CF. An extraction control signal CC for generating video data DV of the set frame rate FRs is generated. Further, the valid frame signal generation circuit 183 supplies the extraction control signal CC to the valid data selection circuit 171 in synchronization with the timing signal CTa. For example, when the frame rate FRq of the video data DVa is n times the reference frame rate FRr and the set frame rate FRs is (n / 2) times the reference frame rate FRr, every other frame from the video data DVa becomes a frame unit. Generates an extraction control signal CC for performing data extraction, and supplies it to the valid data selection circuit 171 in synchronization with the timing signal CTa. Further, the valid frame signal generation circuit 183 generates auxiliary information DM having the set frame rate FRs as frame rate information based on the setting information signal CF, and supplies the attached information DM to the output unit 15.

有効データ選別回路171は、抽出制御信号CCによって示されたフレームの映像データDVaおよび音声データDAaを抽出して映像データDVおよび音声データDAとして出力部15に供給する。また、図示せずも、有効フレーム信号生成回路183から有効データ選別回路171に対して設定フレームレートFRsをフレームレート情報として有する付属情報DMを供給し、有効データ選別回路171で、設定フレームレートFRsと音声データDAaを生成したときのフレームレートとの比に応じて音声データDAaの間引きを行うものとしても良い。例えば、音声データDAaを生成したときのフレームレートFRqが基準フレームレートFRrのn倍であり、設定フレームレートFRsが基準フレームレートFRrの(n/2)倍であるとき、音声データDAaに対して1サンプル置きに間引きを行う。この場合、フレーム単位で音声データを間引く場合よりも間引き間隔を小さくできるので、音声データDAに基づく音声を良好な音質とすることができる。   The valid data selection circuit 171 extracts the video data DVa and the audio data DAa of the frame indicated by the extraction control signal CC and supplies them to the output unit 15 as the video data DV and the audio data DA. Although not shown, the effective frame signal generation circuit 183 supplies the auxiliary information DM having the set frame rate FRs as frame rate information to the effective data selection circuit 171, and the effective data selection circuit 171 outputs the set frame rate FRs. The audio data DAa may be thinned out according to the ratio between the audio data DAa and the frame rate when the audio data DAa is generated. For example, when the frame rate FRq when the audio data DAa is generated is n times the reference frame rate FRr and the set frame rate FRs is (n / 2) times the reference frame rate FRr, the audio data DAa Thinning out every other sample. In this case, since the thinning interval can be made smaller than in the case where the audio data is thinned in frame units, the sound based on the audio data DA can have good sound quality.

このように、映像データDVaのフレーム周波数を一定とすることで、撮像部12や信号処理部17のカメラ処理回路131での動作周波数を可変する必要がなくなり、撮像部12やカメラ処理回路131の構成を簡単にできる。また、映像データDVaからフレーム単位でデータ抽出を行うだけで設定フレームレートFRsの映像データDVを生成できるので、所望の設定フレームレートFRsの映像データDVを映像データDVaから容易に生成できる。   As described above, by making the frame frequency of the video data DVa constant, it is not necessary to change the operation frequency of the imaging unit 12 or the signal processing unit 17 in the camera processing circuit 131. The configuration can be simplified. Further, since the video data DV of the set frame rate FRs can be generated simply by performing data extraction on a frame basis from the video data DVa, the video data DV of the desired set frame rate FRs can be easily generated from the video data DVa.

また、撮像装置に画像メモリや加算器および除算器を設けるものとして、映像データを所定(predetermined)フレーム分毎に加算して映像データDVを生成するようにしても良い。この場合には、撮像信号Spのフレームレート可変範囲を狭くできる。すなわち、nフレーム分の撮像信号Spを加算して信号レベルを(1/n)倍すれば、撮像信号Spのフレームレートを(1/n)倍としなくとも、フレームレートを(1/n)倍とした信号を得ることが可能となる。   Further, the image data, the adder, and the divider may be provided in the imaging apparatus, and the video data may be added for each predetermined frame to generate the video data DV. In this case, the variable range of the frame rate of the imaging signal Sp can be narrowed. That is, if the image signal Sp for n frames is added and the signal level is multiplied by (1 / n), the frame rate of the image signal Sp can be increased to (1 / n) without increasing the frame rate of (1 / n). A doubled signal can be obtained.

図4および図5は、撮像装置10,10aで生成される映像データDVと付属情報DMの関係を説明するための図である。図4Aに示すように設定フレームレートFRsを例えば基準フレームレートFRrの1倍あるいは2倍とすると、図4Bに示す映像データDV(図では映像データDVに基づいたフレーム画像を示している)に対して、設定フレームレートFRsを示す図4Cのフレームレート情報DM-FRsを含んだ付属情報DMが連結される。なお、図4Dは、時間経過とフレーム画像の関係を示したものである。また、フレームレート情報DM-FRsは、設定フレームレートFRsを示すだけでなく、基準フレームレートFRrに対する設定フレームレートFRsの倍率を示すものとしても良い。図4Cおよび以下の図で示すフレームレート情報DM-FRsでは倍率を記している。   4 and 5 are diagrams for explaining the relationship between the video data DV generated by the imaging devices 10 and 10a and the attached information DM. Assuming that the set frame rate FRs is, for example, one or two times the reference frame rate FRr as shown in FIG. 4A, the video data DV shown in FIG. 4B (the frame image based on the video data DV is shown in FIG. 4B) Then, the additional information DM including the frame rate information DM-FRs of FIG. 4C indicating the set frame rate FRs is connected. FIG. 4D shows the relationship between the passage of time and the frame image. Further, the frame rate information DM-FRs may indicate not only the set frame rate FRs but also a magnification of the set frame rate FRs with respect to the reference frame rate FRr. The magnification is shown in the frame rate information DM-FRs shown in FIG. 4C and the following figures.

図5Aに示すように設定フレームレートFRsを例えば基準フレームレートFRrの1倍あるいは1/2倍とすると、図5Bに示す映像データDV(図では映像データDVに基づいたフレーム画像を示している)に対して、設定フレームレートFRsを示す図5Cのフレームレート情報DM-FRsを含んだ付属情報DMが連結される。図5Dは、時間経過とフレーム画像の関係を示したものである。   As shown in FIG. 5A, when the set frame rate FRs is, for example, one time or half the reference frame rate FRr, video data DV shown in FIG. 5B (a frame image based on the video data DV is shown in the figure). Is connected to the additional information DM including the frame rate information DM-FRs of FIG. 5C indicating the set frame rate FRs. FIG. 5D shows the relationship between the passage of time and the frame image.

次に、編集装置30について説明する。図6は、編集装置30の構成を示している。編集装置30に供給された素材データDTmは、検出手段である素材取込部31の情報検出回路311に供給される。情報検出回路311は、素材データDTmから付属情報DMを検出する。この検出した付属情報DMをデータベース化処理回路312に供給する。また、素材データDTmに含まれている映像データDVと音声データDAをデータベース化処理回路312に供給する。   Next, the editing device 30 will be described. FIG. 6 shows the configuration of the editing device 30. The material data DTm supplied to the editing device 30 is supplied to an information detection circuit 311 of the material capturing unit 31 which is a detecting means. The information detection circuit 311 detects the attached information DM from the material data DTm. The detected attached information DM is supplied to the database processing circuit 312. Further, the video data DV and the audio data DA included in the material data DTm are supplied to the database processing circuit 312.

データベース化処理回路312は、映像データDVと音声データDAと情報検出回路311で検出した付属情報DMとを関係付けて編集処理部32のデータ記憶装置321に記憶させる。また、データベース化処理回路312は、データ記憶装置321に記憶した付属情報DMや、この付属情報DMに関係付けられている映像データDVや音声データDAに基づいて、容易に素材データの内容を確認可能とするデータベース情報DBを生成して編集制御部33に供給する。例えば、データベース情報DBは、素材データの内容を識別可能とする情報(例えばサムネイル)、素材データの時間長、設定フレームレートFRs、データ記憶装置321における記憶位置等の情報から構成されるものである。   The database processing circuit 312 stores the video data DV, the audio data DA, and the attached information DM detected by the information detection circuit 311 in the data storage device 321 of the editing processing unit 32 in association with each other. Further, the database processing circuit 312 easily confirms the content of the material data based on the additional information DM stored in the data storage device 321 and the video data DV and the audio data DA related to the additional information DM. A possible database information DB is generated and supplied to the editing control unit 33. For example, the database information DB is configured from information (for example, thumbnails) that enables the content of the material data to be identified, information such as a time length of the material data, a set frame rate FRs, and a storage position in the data storage device 321. .

編集制御部33は、GUI(Graphical User Interface)環境で編集処理を可能とするための映像データDVgや、データベース情報の内容を表示するための映像データDViを生成して映像出力信号生成回路351に供給する。映像出力信号生成回路351は、供給された映像データDVg,DViに基づき映像信号Svmを生成して編集画像表示装置40に出力する。このように、映像信号Svmを編集画像表示装置40に供給することで、どのような素材データが記憶されているか等を編集画像表示装置40の画面上に表示できる。この映像信号Svmは、編集用の表示画像となる。   The editing control unit 33 generates video data DVg for enabling editing in a GUI (Graphical User Interface) environment and video data DVi for displaying the contents of database information, and sends the video data DVi to the video output signal generation circuit 351. Supply. The video output signal generation circuit 351 generates a video signal Svm based on the supplied video data DVg and DVi, and outputs the video signal Svm to the edited image display device 40. In this manner, by supplying the video signal Svm to the edited image display device 40, what kind of material data is stored can be displayed on the screen of the edited image display device 40. This video signal Svm becomes a display image for editing.

また、編集制御部33は、ポストプロダクション処理の制御を行う。すなわち、編集制御部33に接続されているユーザインタフェース部34から、GUI環境での表示を利用した操作信号PSeが供給されて、操作信号PSeによっていずれかの素材データを選択することが示されたときには、この操作信号PSeに応じた読出制御信号RCを生成して編集処理部32の書込読出処理回路322に供給する。また、操作信号PSeが読み出した素材データの加工や結合等の編集操作に関するものであるときには、操作信号PSeに応じた編集制御信号ETを生成して編集処理部32の信号編集回路323に供給する。さらに、素材データの編集が終了してコンテンツデータが完成されたとき、操作信号PSeがコンテンツデータをデータ記憶装置321に記憶する操作を示しているときには、操作信号PSeに応じた書込制御信号WCを生成して、書込読出処理回路322に供給する。また、操作信号PSeがコンテンツデータの出力を示しているときには、操作信号PSeに応じた出力制御信号RPを生成して書込読出処理回路322に供給する。操作信号PSeがコンテンツデータの再生速度範囲を規定するものであるときには、操作信号PSeに応じた速度範囲設定信号LPを生成して信号編集回路323に供給する。   The editing control unit 33 controls post-production processing. That is, the operation signal PSe using the display in the GUI environment is supplied from the user interface unit 34 connected to the editing control unit 33, and it is indicated that any material data is selected by the operation signal PSe. In some cases, a read control signal RC corresponding to the operation signal PSe is generated and supplied to the write / read processing circuit 322 of the edit processing unit 32. When the operation signal PSe relates to an editing operation such as processing or combining of the read material data, an editing control signal ET corresponding to the operation signal PSe is generated and supplied to the signal editing circuit 323 of the editing processing unit 32. . Further, when the editing of the material data is completed and the content data is completed, and when the operation signal PSe indicates an operation of storing the content data in the data storage device 321, a write control signal WC corresponding to the operation signal PSe is generated. Is generated and supplied to the write / read processing circuit 322. When the operation signal PSe indicates the output of content data, an output control signal RP corresponding to the operation signal PSe is generated and supplied to the write / read processing circuit 322. When the operation signal PSe specifies the reproduction speed range of the content data, the control unit 322 generates a speed range setting signal LP corresponding to the operation signal PSe and supplies the signal to the signal editing circuit 323.

書込読出処理回路322は、読出制御信号RCに基づき、要求された素材データをデータ記憶装置321から読み出して信号編集回路323に供給する。また、書込制御信号WCに基づき、完成されたコンテンツデータDCをデータ記憶装置321に記憶させる。また、出力制御信号RPに基づき、要求されたコンテンツデータDCをデータ記憶装置321から読み出して出力する。   The write / read processing circuit 322 reads the requested material data from the data storage device 321 and supplies the read material data to the signal editing circuit 323 based on the read control signal RC. Further, based on the write control signal WC, the completed content data DC is stored in the data storage device 321. Also, based on the output control signal RP, the requested content data DC is read from the data storage device 321 and output.

信号編集回路323は、データ記憶装置321から読み出した素材データに含まれている映像データDVや音声データDAを用いて、画像や音声の加工や結合および削除等の編集処理を編集制御信号ETに基づいて行う。ここで、信号編集回路323は、編集前や編集中あるいは編集後の映像データDVeを映像出力信号生成回路351に供給し、編集前や編集中あるいは編集後の音声データDAeを音声出力信号生成回路352に供給する。また、信号編集回路323は、編集処理によって映像データDVや音声データDAのフレームレートを変更したとき、付属情報DMも編集後の映像データや音声データに合わせて変更する。さらに編集後の映像データDVや音声データDAおよび編集後の映像データDVや音声データDAに対応する付属情報DMcを連結させてコンテンツデータDCを生成する。また、速度範囲設定信号LPが供給されたときには、この速度範囲設定信号LPに基づいてコンテンツデータDCの再生速度範囲を示す速度範囲情報も付属情報DMcとして連結させる。さらに、ユーザインタフェース部34からコンテンツのタイトルやコンテンツの推奨再生速度が入力されたときには、これらの情報も付属情報DMcとして連結させる。また、編集処理によってコンテンツデータの再生時間長情報が得られているときには、この情報も付属情報DMcとして連結させるものとしても良い。さらに、コンテンツデータの再生可能な最高速度が入力されたときには、この最高速度も付属情報DMcとして連結させる。   The signal editing circuit 323 uses the video data DV and the audio data DA included in the material data read from the data storage device 321 to perform editing processing such as processing, combining, and deletion of images and audio on the editing control signal ET. Perform based on. Here, the signal editing circuit 323 supplies the video data DVe before, during or after editing to the video output signal generating circuit 351 and converts the audio data DAe before, during or after editing into the audio output signal generating circuit. 352. Further, when the frame rate of the video data DV or the audio data DA is changed by the editing processing, the signal editing circuit 323 also changes the attached information DM in accordance with the edited video data or audio data. Further, the content data DC is generated by connecting the edited video data DV and audio data DA and the attached information DMc corresponding to the edited video data DV and audio data DA. When the speed range setting signal LP is supplied, the speed range information indicating the reproduction speed range of the content data DC is also linked as the accessory information DMc based on the speed range setting signal LP. Further, when the title of the content and the recommended reproduction speed of the content are input from the user interface unit 34, such information is also linked as the additional information DMc. Further, when the reproduction time length information of the content data is obtained by the editing process, this information may be connected as the additional information DMc. Further, when the maximum reproducible speed of the content data is input, this maximum speed is also linked as the additional information DMc.

編集出力信号生成部35の映像出力信号生成回路351は、上述したように、編集制御部33から供給された映像データDVg,DViに基づき映像信号Svmを生成して編集画像表示装置40に供給する。このためGUI環境で素材データに関する情報を表示できる。さらに、信号編集回路323から供給された映像データDVeに基づき映像信号Svmを生成することで、編集前や編集中あるいは編集後の画像を編集画像表示装置40の画面上で確認できる。   The video output signal generation circuit 351 of the edit output signal generation unit 35 generates the video signal Svm based on the video data DVg and DVi supplied from the edit control unit 33 and supplies the video signal Svm to the edited image display device 40, as described above. . Therefore, information on the material data can be displayed in the GUI environment. Furthermore, by generating the video signal Svm based on the video data DVe supplied from the signal editing circuit 323, the image before editing, during editing, or after editing can be confirmed on the screen of the edited image display device 40.

音声出力信号生成回路352は、信号編集回路323から供給された音声データDAeを、アナログの音声信号Samに変換するとともに所望の信号レベルとして、例えばスピーカやヘッドホンを用いて構成された編集音声出力装置41に供給する。このため、編集前や編集中あるいは編集後の音声を編集音声出力装置41から出力される音声によって確認できる。   The audio output signal generation circuit 352 converts the audio data DAe supplied from the signal editing circuit 323 into an analog audio signal Sam, and outputs a desired signal level as an edited audio output device configured using, for example, a speaker or headphones. 41. Therefore, the sound before editing, during editing, or after editing can be confirmed by the sound output from the editing sound output device 41.

このように、編集装置30で素材データDTmを用いたポストプロダクション処理を行いコンテンツデータDCが完成すると、この完成したコンテンツデータDCを出力する。   As described above, when the content data DC is completed by performing the post-production processing using the material data DTm in the editing device 30, the completed content data DC is output.

次に、編集装置30の動作について説明する。図7は、編集画像表示装置40に表示する編集操作のためのGUI画面を示している。GUI画面では、素材データの一覧を示す素材管理表示である素材管理ブラウザ401が左上に設けられており、左下には素材データを再生順に並べてコンテンツの生成を行う再生順序表示であるストーリーボード402が設けられている。画面中央には、編集前や編集後の素材データの画像を表示する再生画像表示であるモニタービューワー403、中央下側には、時間軸に沿って素材データを貼り付けてコンテンツの生成を行う再生時間順表示であるタイムライン404が設けられている。また、モニタービューワー403とタイムライン404との間には、動作コントロール部405が設けられている。なお、素材管理ブラウザ401、ストーリーボード402、モニタービューワー403、タイムライン404、動作コントロール部405の配置や形状は例示的なものであり、限定的なものでないことは勿論である。   Next, the operation of the editing device 30 will be described. FIG. 7 shows a GUI screen for editing operation displayed on the edited image display device 40. On the GUI screen, a material management browser 401 which is a material management display showing a list of material data is provided at the upper left, and a storyboard 402 which is a reproduction order display for arranging the material data in the reproduction order and generating contents is provided at the lower left. Is provided. In the center of the screen is a monitor viewer 403 which is a playback image display for displaying the image of the material data before and after editing, and in the lower part of the center is a playback for pasting the material data along the time axis to generate the content. A timeline 404 that is displayed in chronological order is provided. An operation control unit 405 is provided between the monitor viewer 403 and the timeline 404. The arrangement and shape of the material management browser 401, the storyboard 402, the monitor viewer 403, the timeline 404, and the operation control unit 405 are merely examples and are not limited.

素材管理ブラウザ401は、データ記憶装置321に記憶している素材データの一覧を示すものであり、記憶している素材データのタイトルや長さおよび内容を示すスタンプ画(サムネイル画)、ノイズレスで自然な再生画像を得ることができる再生可能速度範囲等を素材毎に表示する。   The material management browser 401 displays a list of material data stored in the data storage device 321, and includes a stamp image (thumbnail image) indicating the title, length, and content of the stored material data, and a noiseless and natural image. For example, a reproducible speed range in which a proper reproduced image can be obtained is displayed for each material.

ストーリーボード402は、コンテンツ生成の作業を行う場所であり、素材データを再生順に並べることでコンテンツの生成を行う。また、再生可能速度範囲の表示も行う。モニタービューワー403では、素材データに基づく画像を表示するだけでなく、再生可能速度範囲を示す可変速度バー表示や再生可能速度範囲での再生速度の位置表示を行う。   The storyboard 402 is a place where content generation is performed, and generates content by arranging material data in the order of reproduction. Also, the display of the reproducible speed range is performed. The monitor viewer 403 not only displays an image based on the material data, but also displays a variable speed bar indicating a reproducible speed range and a position of the replay speed in the reproducible speed range.

タイムライン404は、時間軸に沿って素材データを貼りつけていくことでコンテンツ生成の作業をより詳細に行うための場所である。また、再生速度に基づいて算出した再生時間に応じて素材データの表示幅を可変する。動作コントロール部405では、素材データやタイムライン404上につなげたコンテンツの再生を行うための操作キー表示を行う。   The timeline 404 is a place for performing content generation work in more detail by pasting material data along the time axis. Further, the display width of the material data is varied according to the reproduction time calculated based on the reproduction speed. The operation control unit 405 displays operation keys for playing back material data and content connected on the timeline 404.

ここで、表示したGUIの画像とユーザインタフェース部34からの操作信号PSeに基づいて、ドラッグ&ドロップ操作や動作コントロール部405のキー操作等が行われたと編集制御部33で判別したときには、操作に応じて編集装置30の動作を制御する。   Here, based on the displayed GUI image and the operation signal PSe from the user interface unit 34, when the edit control unit 33 determines that the drag and drop operation, the key operation of the operation control unit 405, and the like are performed, the operation is performed. The operation of the editing device 30 is controlled accordingly.

図8は、編集動作時の表示制御の一例を示すフローチャートである。ステップST11では、素材データの処理要求がなされたか否かを識別する。ここで処理要求がなされていないときにはステップST11に戻り、処理要求がなされたときにはステップST12に進む。   FIG. 8 is a flowchart illustrating an example of display control during an editing operation. In step ST11, it is determined whether or not a processing request for material data has been made. If no processing request has been made, the process returns to step ST11. If a processing request has been made, the process proceeds to step ST12.

ステップST12では、編集する素材データから設定フレームレートFRsを示すフレームレート情報DM-FRsが得られているか否かを識別する。ここで、データベース情報DBを参照して、素材データからフレームレート情報DM-FRsが得られていないときにはステップST13に進み、素材データが1倍速のデータであるとした表示制御を行う。また、素材データからフレームレート情報DM-FRsが得られているときにはステップST14に進む。   In step ST12, it is determined whether or not frame rate information DM-FRs indicating the set frame rate FRs has been obtained from the material data to be edited. Here, with reference to the database information DB, when the frame rate information DM-FRs is not obtained from the material data, the process proceeds to step ST13, and the display control is performed on the assumption that the material data is 1 × speed data. When the frame rate information DM-FRs is obtained from the material data, the process proceeds to step ST14.

ステップST14では、フレームレート情報DM-FRsで示された設定フレームレートFRsに基づいて再生可能速度を設定する。この再生可能速度の設定では、一定のフレーム間隔で間引きを行うものとしたりフレーム繰り返しを行うことでノイズレスで自然な再生画像を得ることができるように、再生可能速度を設定する。例えば、基準フレームレートFRrに対する設定フレームレートFRsの倍数が1よりも大きいとき、この倍数の約数で1以外の値を求めて、求めた約数の逆数を算出することで再生可能速度を設定できる。すなわち、設定フレームレートFRsが基準フレームレートの10倍であるとき、1以外の約数は「2,5,10」となり、この約数の逆数「1/10,1/5,1/2」となる。この約数の逆数を選択することで1倍速未満の再生可能速度を設定できる。また、1倍速以上の再生可能速度は自然数倍とすることで、各再生速度において行う間引き間隔を等しくできる。なお、再生可能速度の上限は、例えば素材データの内容を容易に把握できる速度に制限する。   In step ST14, the reproducible speed is set based on the set frame rate FRs indicated by the frame rate information DM-FRs. In the setting of the reproducible speed, the reproducible speed is set so that a thinned-out natural reproduced image can be obtained by performing thinning-out at a fixed frame interval or performing frame repetition. For example, when the multiple of the set frame rate FRs with respect to the reference frame rate FRr is larger than 1, a value other than 1 is obtained by a divisor of this multiple, and the reproducible number of the obtained divisor is calculated to set the reproducible speed. it can. That is, when the set frame rate FRs is ten times the reference frame rate, divisors other than 1 are "2, 5, 10", and the reciprocal of this divisor "1/10, 1/5, 1/2" It becomes. By selecting the reciprocal of this divisor, a reproducible speed lower than 1 × speed can be set. Further, by setting the reproducible speed equal to or higher than 1 × speed to a natural number multiple, the thinning intervals performed at each reproduction speed can be made equal. The upper limit of the reproducible speed is limited to, for example, a speed at which the contents of the material data can be easily grasped.

基準フレームレートFRrに対する設定フレームレートFRsの倍数が1よりも小さいときには、この倍数の逆数を求めて逆数の1以外の約数あるいは逆数の整数倍の値を算出することで再生可能速度を設定できる。すなわち、設定フレームレートFRsが基準フレームレートの(1/6)倍であるとき、逆数の1以外の約数は「2,3,6」となり、逆数の整数倍は「6,12,18,・・・」となる。この逆数の1以外の約数や逆数の整数倍の値を再生可能速度とすれば、各再生速度において行う間引き間隔あるいは繰り返し回数を等しくできる。また、設定フレームレートFRsの倍数が1よりも小さいときに再生速度を(1/FRs)倍速以下としても、再生画像はフレーム画像を必要な回数繰り返したものとなるため、再生可能速度の下限を1倍速としても良い。   When the multiple of the set frame rate FRs with respect to the reference frame rate FRr is smaller than 1, the reproducible speed can be set by obtaining the reciprocal of the multiple and calculating a divisor other than 1 or an integral multiple of the reciprocal. . That is, when the set frame rate FRs is (1 /) times the reference frame rate, the divisor other than 1 is “2, 3, 6”, and the integral multiple of the reciprocal is “6, 12, 18, ... ". If the reproducible speed is a divisor other than 1 or an integral multiple of the reciprocal, the thinning interval or the number of repetitions performed at each reproduction speed can be made equal. Further, even when the reproduction speed is set to be equal to or less than (1 / FRs) times when the multiple of the set frame rate FRs is smaller than 1, since the reproduced image is obtained by repeating the frame image a required number of times, the lower limit of the reproducible speed is set. It may be 1x speed.

ステップST15では、フレームレート情報DM-FRsに応じた表示制御、すなわち設定フレームレートFRsを示すフレームレート情報DM-FRsが付属情報DMとして連結されている素材データであることを識別可能とする表示や、設定フレームレートFRsに基づいて設定した再生可能速度範囲の表示を行う。例えば、素材管理ブラウザ401やストーリーボード402では、設定フレームレートFRsの情報が連結されている素材データであることを容易に識別可能とするため、スタンプ画401a,402aの画枠の形状や色等を、設定フレームレートFRsの情報が連結されていない素材とは異なるものとする。また、素材に関する情報を表示する情報表示領域401b,402bが設けられているときには、この領域にステップST14で設定した再生可能速度範囲を表示する。例えば、図7および後述する図9では、設定フレームレートFRsの情報が連結されている素材データであるとき、画枠の幅を広くして表示するとともに、再生可能速度範囲が「×0.1〜×2.0」の場合を示している。   In step ST15, display control in accordance with the frame rate information DM-FRs, that is, a display that allows the frame rate information DM-FRs indicating the set frame rate FRs to be identified as material data linked as attached information DM, , The display of the reproducible speed range set based on the set frame rate FRs. For example, in the material management browser 401 and the storyboard 402, the shape and color of the stamp frames 401a and 402a can be easily identified so that the data of the set frame rate FRs can be easily identified as linked material data. Is different from the material to which the information of the set frame rate FRs is not connected. When information display areas 401b and 402b for displaying information related to the material are provided, the reproducible speed range set in step ST14 is displayed in this area. For example, in FIG. 7 and FIG. 9 described later, when the information of the set frame rate FRs is linked material data, the image frame is displayed with a wider width and the reproducible speed range is set to “× 0.1 ~ × 2.0 ".

タイムライン404の表示も素材管理ブラウザ401やストーリーボード402と同様に、設定フレームレートFRsを示すフレームレート情報DM-FRsが付属情報DMとして連結されている素材データであることを容易に識別可能とする。例えばフレーム画像表示領域404aの画枠の形状や色を設定フレームレートFRsのフレームレート情報DM-FRsが連結されていない素材とは異なるものとする。さらに、タイムライン404では、設定フレームレートFRsに応じて、フレーム画像表示領域404aを時間軸方向である水平方向に調整する。例えば、設定フレームレートFRsが基準フレームレートFRrよりも大きいときには、単位時間あたりのフレーム画像数が多くなる。このため、フレーム画像表示領域404aの表示幅は広くする。また、設定フレームレートFRsが基準フレームレートFRrよりも小さいときには、単位時間あたりのフレーム画像数が少なくなる。このため、フレーム画像表示領域404aは狭くする。また、モニタービューワー403には、素材データに基づいた素材画像表示403aを設けるだけでなく、再生速度表示403bや設定した再生可能速度範囲に対応する速度可変コンソール表示403cを設けて、再生画像や再生速度および再生可能速度範囲の表示を行う。また、速度可変コンソール表示403cの太線で示すカーソル位置によって、制御できる方向も識別可能とされる。   Similarly to the material management browser 401 and the storyboard 402, the display of the timeline 404 makes it possible to easily identify that the frame rate information DM-FRs indicating the set frame rate FRs is the material data linked as the additional information DM. I do. For example, it is assumed that the shape and color of the image frame of the frame image display area 404a are different from the material to which the frame rate information DM-FRs of the set frame rate FRs is not connected. Further, in the timeline 404, the frame image display area 404a is adjusted in the horizontal direction, which is the time axis direction, according to the set frame rate FRs. For example, when the set frame rate FRs is higher than the reference frame rate FRr, the number of frame images per unit time increases. For this reason, the display width of the frame image display area 404a is increased. When the set frame rate FRs is smaller than the reference frame rate FRr, the number of frame images per unit time decreases. Therefore, the frame image display area 404a is narrowed. The monitor viewer 403 not only has a material image display 403a based on the material data, but also has a reproduction speed display 403b and a variable speed console display 403c corresponding to a set reproducible speed range to provide reproduction image and reproduction. The speed and the reproducible speed range are displayed. Also, the controllable direction can be identified by the cursor position indicated by the thick line on the speed variable console display 403c.

ステップST16では、ユーザインタフェース部34を介して再生速度が指示されたか否かを識別する。ここで、タイムライン404におけるフレーム画像表示領域404aの表示幅を変更する操作がなされたとき、あるいはモニタービューワー403に表示された速度可変コンソール表示403cのカーソル位置が移動されたときにはステップST17に進む。また、再生速度の指示されていないときにはステップST16に戻る。   In step ST16, it is determined whether or not the reproduction speed has been instructed via the user interface unit. Here, when an operation for changing the display width of the frame image display area 404a on the timeline 404 is performed, or when the cursor position of the variable speed console display 403c displayed on the monitor viewer 403 is moved, the process proceeds to step ST17. When the reproduction speed is not instructed, the process returns to step ST16.

ステップST17では、指示された再生速度を識別して、識別した再生速度を表示する。例えばタイムライン404におけるフレーム画像表示領域404aの表示幅を変更する操作がなされたときには、操作方向に応じて再生速度をステップST14で設定された再生可能速度から順次選択して、操作終了時の速度を再生速度とする。また、モニタービューワー403に表示された速度可変コンソール表示403cのカーソル位置が移動されたときには、ステップST14で設定された再生可能速度からカーソル位置に応じた速度を選択して再生速度とする。   In step ST17, the designated playback speed is identified, and the identified playback speed is displayed. For example, when an operation for changing the display width of the frame image display area 404a on the timeline 404 is performed, the reproduction speed is sequentially selected from the reproducible speeds set in step ST14 according to the operation direction, and the speed at the end of the operation. Is the playback speed. When the cursor position of the variable speed console display 403c displayed on the monitor viewer 403 has been moved, a speed corresponding to the cursor position is selected from the reproducible speeds set in step ST14, and is set as the reproduction speed.

再生速度が識別されたときには、モニタービューワー403の再生速度表示403bを指示された再生速度とする。また、速度可変コンソール表示403cのカーソル位置とフレーム画像表示領域404aの表示幅とを連動させて、フレーム画像表示領域404aの表示幅を変更する操作によって再生速度が指示されたときには、速度可変コンソール表示403cのカーソル位置を指示された再生速度と対応する位置に移動することで、再生速度を表示するとともに、速度可変コンソール表示403cのカーソル位置を変更する操作によって再生速度が指示されたときには、フレーム画像表示領域404aの表示幅を対応する再生速度に応じた幅に変更する。このように、速度可変コンソール表示403cのカーソル位置とフレーム画像表示領域404aの表示幅とを連動させることによって、いずれを利用しても正しく再生速度を可変させることができる。   When the reproduction speed is identified, the reproduction speed display 403b of the monitor viewer 403 is set to the specified reproduction speed. When the reproduction speed is instructed by changing the display width of the frame image display area 404a by linking the cursor position of the variable speed console display 403c and the display width of the frame image display area 404a, the variable speed console display By moving the cursor position of 403c to the position corresponding to the instructed playback speed, the playback speed is displayed. When the playback speed is instructed by the operation of changing the cursor position of the variable speed console display 403c, the frame image is displayed. The display width of the display area 404a is changed to a width corresponding to the corresponding reproduction speed. As described above, by interlocking the cursor position of the variable speed console display 403c with the display width of the frame image display area 404a, it is possible to correctly change the reproduction speed no matter which one is used.

ステップST18では、指示された再生速度から、この指示された再生速度で素材データを再生したときの再生時間を算出する。例えば上述したように設定フレームレートFRsが基準フレームレートの10倍であるとき、再生可能なスロー速度は「1/10,1/5,1/2」の何れかの倍速となる。ここで、素材の再生時間が1倍速のときに30秒である場合、1/10倍速再生のときの再生時間は300秒、1/5倍速ならば150秒等となる。このように1倍速のときの再生時間に再生時の倍速数の逆数を乗算することで再生時間を算出できる。   In step ST18, a reproduction time when the material data is reproduced at the instructed reproduction speed is calculated from the instructed reproduction speed. For example, as described above, when the set frame rate FRs is 10 times the reference frame rate, the reproducible slow speed is any one of "1/10, 1/5, 1/2". Here, when the reproduction time of the material is 30 seconds at 1 × speed, the reproduction time at 1/10 × speed is 300 seconds, and at 1/5 × speed, it is 150 seconds and the like. As described above, the reproduction time can be calculated by multiplying the reproduction time at 1 × speed by the reciprocal of the double speed number during reproduction.

ステップST19では、再生時間に応じた表示制御を行う。例えば、タイムライン404でのフレーム画像表示領域404aの表示幅をステップST18で算出した再生時間に応じて可変してステップST16に戻る。また、素材データの再生動作中は、モニタービューワー403の素材画像表示403aとして、指示された再生速度で素材データを再生したときの再生画像を表示する。   In step ST19, display control according to the reproduction time is performed. For example, the display width of the frame image display area 404a on the timeline 404 is changed according to the reproduction time calculated in step ST18, and the process returns to step ST16. Further, during the operation of reproducing the material data, the reproduction image when the material data is reproduced at the instructed reproduction speed is displayed as the material image display 403a of the monitor viewer 403.

なお、素材データにおける一部のシーンの再生時間を変える場合には、この一部のシーンを分割して、分割したシーンに対して上述の処理を行うことで、再生時間を可変させることができる。   When the playback time of some scenes in the material data is changed, the playback time can be varied by dividing the scene and performing the above-described processing on the divided scenes. .

図9は、例えば設定フレームレートFRsが基準フレームレートFRrの10倍であることを示すフレームレート情報DM-FRsが連結された素材データを用いるときの、編集操作画面を示している。図9Aは再生速度が1倍速、図9Bは(1/10)倍速、図9Cは2倍速のときのGUI画面であり、設定フレームレートFRsの情報が連結されている素材データは、例えばストーリーボード402やタイムライン404で、設定フレームレートFRsを示すフレームレート情報DM-FRsが連結されていない素材データと異なる画枠表示が行われる。   FIG. 9 shows an editing operation screen when material data to which frame rate information DM-FRs indicating that the set frame rate FRs is ten times the reference frame rate FRr is used, for example. 9A is a GUI screen when the playback speed is 1 ×, FIG. 9B is a GUI screen at (1/10) × speed, and FIG. 9C is a GUI screen when the playback speed is 2 ×. The material data to which the information of the set frame rate FRs is linked is, for example, a storyboard. In the 402 and the timeline 404, an image frame different from that of the material data to which the frame rate information DM-FRs indicating the set frame rate FRs is not connected is displayed.

ここで、選択した素材データの再生時には、フレームレート情報DM-FRsに基づいて設定フレームレートFRsを識別して、再生速度FPと設定フレームレートFRsを乗算して識別値FDを算出して、この識別値FDに基づいて再生処理条件を決定する。例えば、上述の図9Aの画面表示で示すように再生速度が1倍速とされているとともに、設定フレームレートFRsが基準フレームレートFRrに対して10倍速とされているとき、識別値FDは「10×1=10」となる。なお、図10Aは、設定フレームレートFRsが基準フレームレートFRrに対して10倍速とされているときの映像データDVに基づく画像を示している。また図10Bはフレーム画像の設定フレームレートFRsを示すフレームレート情報DM-FRs、図10Cは絶対フレーム番号ANをそれぞれ示している。   Here, when the selected material data is reproduced, the set frame rate FRs is identified based on the frame rate information DM-FRs, and the reproduction value FP is multiplied by the set frame rate FRs to calculate an identification value FD. The reproduction processing condition is determined based on the identification value FD. For example, as shown in the above-described screen display of FIG. 9A, when the reproduction speed is 1 × and the set frame rate FRs is 10 × with respect to the reference frame rate FRr, the identification value FD is “10”. × 1 = 10 ”. FIG. 10A shows an image based on the video data DV when the set frame rate FRs is set to be 10 times faster than the reference frame rate FRr. 10B shows frame rate information DM-FRs indicating a set frame rate FRs of a frame image, and FIG. 10C shows an absolute frame number AN.

識別値FDが「FD=10」であるときには、図10D,図10Eに示すように、「FD=10」フレーム目毎すなわち映像データDVを9フレーム分飛ばしながら用いて映像信号Svmを生成することで、この映像信号Svmに基づき1倍速の再生画像をモニタービューワー403に表示できる。なお、図10Dは表示される画像の絶対フレーム番号AN、図10Eは映像信号Svmによってモニタービューワー403の素材画像表示403aに表示されるフレーム画像を示している。   When the identification value FD is “FD = 10”, as shown in FIGS. 10D and 10E, the video signal Svm is generated using every “FD = 10” frame, that is, while skipping the video data DV by 9 frames. Thus, a 1 × speed reproduced image can be displayed on the monitor viewer 403 based on the video signal Svm. FIG. 10D shows the absolute frame number AN of the displayed image, and FIG. 10E shows the frame image displayed on the material image display 403a of the monitor viewer 403 by the video signal Svm.

次に、タイムライン404におけるフレーム画像表示領域404aの表示幅を矢印A方向に広げる操作や、速度可変コンソール表示403cのカーソル位置を矢印B方向に移動する操作が行われると、再生速度を遅くする操作がなされたものと処理する。ここで、例えば(1/10)倍速に設定されたときには図9Bに示すように、モニタービューワー403の再生速度表示403bを(1/10)倍速に変更する。また、速度可変コンソール表示403cのカーソル位置を(1/10)倍速の位置とする。さらに再生時間が長くなることから、フレーム画像表示領域404aの表示幅を広くする。   Next, when an operation of expanding the display width of the frame image display area 404a on the timeline 404 in the direction of arrow A or an operation of moving the cursor position of the speed-variable console display 403c in the direction of arrow B is performed, the playback speed is reduced. Treat it as an operation. Here, for example, when the speed is set to (1/10) speed, the reproduction speed display 403b of the monitor viewer 403 is changed to (1/10) speed as shown in FIG. 9B. The cursor position on the speed-variable console display 403c is set to a position at (1/10) times the speed. Since the reproduction time is further increased, the display width of the frame image display area 404a is increased.

図9Bの画面表示で示すように再生速度が(1/10)倍速での再生では、識別値FDが「10×(1/10)=1」となる。識別値FDが「FD=1」であるときには、「FD=1」フレーム目毎すなわち映像データDVを毎フレーム用いて映像信号Svmを生成することで、図10Aに示す(1/10)倍速の再生画像をモニタービューワー403の素材画像表示403aに表示できる。   As shown in the screen display of FIG. 9B, when the reproduction speed is (1/10) times the reproduction speed, the identification value FD is “10 × (1/10) = 1”. When the identification value FD is “FD = 1”, the video signal Svm is generated for each “FD = 1” frame, that is, using the video data DV for each frame, so that the (1/10) × speed shown in FIG. The reproduced image can be displayed on the material image display 403a of the monitor viewer 403.

また、タイムライン404におけるフレーム画像表示領域404aの表示幅を矢印B方向に縮める操作や、速度可変コンソール表示403cのカーソル位置を矢印A方向に移動する操作が行われると、再生速度を速くする操作がなされたものと処理する。ここで、例えば2倍速に設定されたときには図9Cに示すように、モニタービューワー403の再生速度表示403bを2倍速に変更する。また、速度可変コンソール表示403cのカーソル位置を2倍速の位置とする。さらに再生時間が短くなることから、フレーム画像表示領域404aの表示幅を狭くする。   Further, when an operation of reducing the display width of the frame image display area 404a on the timeline 404 in the direction of arrow B or an operation of moving the cursor position of the speed-variable console display 403c in the direction of arrow A is performed, an operation of increasing the playback speed is performed. Treat it as having been done. Here, for example, when the double speed is set, the reproduction speed display 403b of the monitor viewer 403 is changed to the double speed as shown in FIG. 9C. The cursor position on the variable speed console display 403c is set to a double speed position. Since the reproduction time is further shortened, the display width of the frame image display area 404a is reduced.

図9Cの画面表示で示すように再生速度が2倍速での再生では、識別値FDが「10×2=20」となる。識別値FDが「FD=20」であるときには、図10F,図10Gに示すように、「FD=20」フレーム目毎すなわち映像データDVを19フレーム分飛ばしながら用いて映像信号Svmを生成することで、この映像信号Svmに基づき2倍速の再生画像をモニタービューワー403の素材画像表示403aに表示できる。なお、図10Fは表示される画像の絶対フレーム番号AN、図10Gは映像信号Svmによってモニタービューワー403の素材画像表示403aに表示されるフレーム画像を示している。   As shown in the screen display of FIG. 9C, in the case of the reproduction at the double speed, the identification value FD is “10 × 2 = 20”. When the identification value FD is “FD = 20”, as shown in FIGS. 10F and 10G, the video signal Svm is generated using every “FD = 20” frame, that is, using the video data DV skipping 19 frames. Thus, a double-speed playback image can be displayed on the material image display 403a of the monitor viewer 403 based on the video signal Svm. FIG. 10F shows the absolute frame number AN of the displayed image, and FIG. 10G shows the frame image displayed on the material image display 403a of the monitor viewer 403 by the video signal Svm.

このように、フレームレート情報DM-FRsと再生速度に基づきフレーム単位で間引きを行うことにより、ノイズレスのスロー再生を容易に実現できる。なお、再生速度の可変操作は、再生動作中も可能とすることで、簡単に所望の再生速度での再生画像を確認することができる。   In this manner, by performing thinning-out on a frame basis based on the frame rate information DM-FRs and the playback speed, noiseless slow playback can be easily realized. In addition, by enabling the variable operation of the reproduction speed even during the reproduction operation, the reproduced image at the desired reproduction speed can be easily confirmed.

また、再生速度と表示幅が関係付けられて表示されることから、再生速度と時間軸の伸び縮みの関係を容易に把握することが可能となり、編集操作を容易に行うことができる。なお、フレーム画像表示領域404aには、表示幅の変更が可能な方向すなわち再生速度を可変できる方向を示す表示、例えば破線で示す矢印表示を設けるものとすれば、再生速度の変更可能方向を容易に識別することが可能となる。   Further, since the reproduction speed and the display width are displayed in association with each other, the relation between the reproduction speed and the expansion / contraction of the time axis can be easily grasped, and the editing operation can be easily performed. If the frame image display area 404a is provided with a display indicating a direction in which the display width can be changed, that is, a direction in which the reproduction speed can be changed, for example, an arrow display indicated by a broken line, the direction in which the reproduction speed can be changed can be easily set. Can be identified.

図11は、図8に示す表示制御を行い、例えば図9のように表示される編集画面を用いた編集処理動作を示すフローチャートである。ステップST21では、素材データの取り込みを行い、取り込んだ素材データをデータ記憶装置321に記憶させるとともに、データベース情報DBを生成させる。   FIG. 11 is a flowchart showing the editing processing operation using the editing screen displayed as shown in FIG. 9 by performing the display control shown in FIG. In step ST21, material data is fetched, the fetched material data is stored in the data storage device 321, and a database information DB is generated.

ステップST22では、取り込んだ素材データの内容を、データベース情報DBを利用して表示する。この素材データの内容表示は、例えば取り込まれている素材データのスタンプ画や情報を素材管理ブラウザ401に表示させることで行う。また、素材管理ブラウザ401に表示されている素材データのいずれかが選択されたときには、選択された素材データの画像をモニタービューワー403に表示する。さらにモニタービューワー403とタイムライン404の間に設けられている動作コントロール部405で再生制御キー表示が操作されたときには、キー操作に応じて素材データの再生や停止、変速再生等を行い、再生画像をモニタービューワー403に表示する。   In step ST22, the content of the acquired material data is displayed using the database information DB. The content display of the material data is performed by, for example, displaying the stamp image and information of the captured material data on the material management browser 401. When any of the material data displayed on the material management browser 401 is selected, an image of the selected material data is displayed on the monitor viewer 403. Further, when the playback control key display is operated by the operation control unit 405 provided between the monitor viewer 403 and the timeline 404, the playback, stop, variable-speed playback, etc. of the material data are performed according to the key operation, and the playback image is displayed. Is displayed on the monitor viewer 403.

ステップST23では素材データの選択が行われたか否かを判別する。ここで、素材データの選択が行われていないときにはステップST23に戻り、素材データの選択が行われたときにはステップST24に進む。例えば素材管理ブラウザ401からタイムライン404にドラッグ&ドロップされたときには素材データが選択されたものとしてステップST24に進む。   In step ST23, it is determined whether or not material data has been selected. Here, when the material data is not selected, the process returns to step ST23, and when the material data is selected, the process proceeds to step ST24. For example, when the data is dragged and dropped from the material management browser 401 to the timeline 404, it is determined that the material data has been selected, and the process proceeds to step ST24.

ステップST24では、選択された素材データに基づくフレーム画像をタイムライン404のフレーム画像表示領域404aに時間順に並べて表示する。   In step ST24, frame images based on the selected material data are displayed in the frame image display area 404a of the timeline 404 in a time sequence.

ステップST25では、タイムライン404に表示されたフレーム画像に対する切り取りや貼り付けあるいは並べ換え等の編集操作に応じて素材データを加工して、所望の映像データや音声データを生成してコンテンツデータとする。また、映像データや音声データに設定フレームレート等を示す付属情報DMcを連結させコンテンツデータとする。   In step ST25, material data is processed in accordance with an editing operation such as cutting, pasting, or rearranging of the frame images displayed on the timeline 404, and desired video data and audio data are generated as content data. In addition, video data and audio data are linked with attached information DMc indicating a set frame rate and the like to form content data.

ステップST26では、コンテンツデータの完成処理を行い、ステップST25で生成したコンテンツデータに対して、素材データのつなぎ部分の処理や演出効果の追加あるいは追加する画像や音声の合成等の処理を行う。ステップST27では、コンテンツデータの出力処理を行う。すなわち、完成されたコンテンツデータを放送用の番組データとして番組送出装置に供給する。あるいは配信用コンテンツデータとしてコンテンツ送出装置に供給する。また、完成されたコンテンツデータにコンテンツ再生メニューリストや再生メニューに応じた特殊再生等を行うための情報等を付加する等のオーサリングを行い、オーサリングの完了したデータを記録媒体に記録させる。   In step ST26, the content data is completed, and the content data generated in step ST25 is subjected to processing such as processing of a connection portion of material data, addition of a rendering effect, or synthesis of an image or sound to be added. In step ST27, output processing of content data is performed. That is, the completed content data is supplied to the program transmission device as broadcast program data. Alternatively, it is supplied to the content transmission device as distribution content data. Authoring such as adding information for performing special reproduction or the like according to the content reproduction menu list or the reproduction menu to the completed content data is performed, and the authored data is recorded on a recording medium.

ところで、上述の編集装置30の編集処理は、コンピュータを用いてソフトウェア処理によっても実現できる。このソフトウェアでコンテンツ編集を行う場合の構成を図12に示す。   By the way, the editing process of the above-described editing device 30 can also be realized by software processing using a computer. FIG. 12 shows a configuration in a case where content editing is performed by this software.

コンピュータは、図12に示すようにCPU(Central Processing Unit)381を内蔵しており、このCPU381にはバス390を介してROM382,RAM383,記憶容量が大容量であるハード・ディスク・ドライブ等を用いて構成したデータ蓄積部384,入出力インタフェース385が接続されている。さらに、入出力インタフェース385には信号入力部391や信号出力部392、記録媒体ドライブ393が接続されている。   The computer has a built-in CPU (Central Processing Unit) 381 as shown in FIG. 12, and this CPU 381 uses a ROM 382, a RAM 383, a hard disk drive or the like having a large storage capacity via a bus 390. The data storage unit 384 and the input / output interface 385 are connected. Further, a signal input unit 391, a signal output unit 392, and a recording medium drive 393 are connected to the input / output interface 385.

CPU381は、ROM382やRAM383あるいはデータ蓄積部384に記憶されているプログラムを実行して、上述の図8や図11に示す編集処理を行う。信号入力部391に入力された素材データは、入出力インタフェース385とバス390を介してデータ蓄積部384に記憶させる。また、データ蓄積部384に記憶されている素材データから、編集に用いる素材データを読み出して編集処理を行い完成されたコンテンツデータを再度データ蓄積部384に記憶させる。このデータ蓄積部384に記憶されている完成されたコンテンツデータを読み出して信号出力部392を介して出力する。   The CPU 381 executes a program stored in the ROM 382, the RAM 383, or the data storage unit 384 to perform the above-described editing processing illustrated in FIGS. The material data input to the signal input unit 391 is stored in the data storage unit 384 via the input / output interface 385 and the bus 390. Further, from the material data stored in the data storage unit 384, the material data used for editing is read out, edited, and the completed content data is stored in the data storage unit 384 again. The completed content data stored in the data storage unit 384 is read out and output via the signal output unit 392.

なお、編集処理を行うプログラムは、予めROM382やデータ蓄積部384に記憶させておくものとしたり、記録媒体ドライブ393によって、コンテンツ送出処理のプログラムを記録媒体に記録しあるいは記録媒体に記録されているプログラムを読み出して実行するものとしても良い。さらに、有線あるいは無線の伝送路を介してプログラムを伝送し、受信したプログラムをコンピュータで実行するものとしても良い。   The program for performing the editing process is stored in the ROM 382 or the data storage unit 384 in advance, or the program for the content transmission process is recorded on the recording medium by the recording medium drive 393 or is recorded on the recording medium. The program may be read and executed. Further, the program may be transmitted via a wired or wireless transmission path, and the received program may be executed by a computer.

このように、上述の実施の形態によれば、フレームレート情報が付属情報として連結されている素材データと連結されていない素材データが識別可能に表示されるので、素材データのフレームレート情報を利用したスロー再生が可能なシーンを簡単に見つけることができる。また、付属情報に基づいて、再生可能速度範囲が表示されるので、この範囲内の速度を設定して可変速再生を行うことで効果的な映像表現を簡単に行うことができる。   As described above, according to the above-described embodiment, the frame rate information is displayed so that the frame rate information and the unlinked source data are connected as the accessory information so that the frame rate information of the source data can be used. You can easily find a scene that allows slow playback. Further, since a reproducible speed range is displayed based on the attached information, an effective video expression can be easily performed by setting a speed within this range and performing variable speed reproduction.

また、編集装置30は、素材データのフレームレートを低下させることなくコンテンツデータを生成すれば、素材データが有効に活用されて再生速度の可変範囲が広いコンテンツを提供できる。   In addition, if the editing device 30 generates content data without lowering the frame rate of the material data, the editing device 30 can effectively utilize the material data and provide content having a wide range of variable reproduction speed.

以上のように、本発明にかかる編集画像表示制御装置と編集画像表示制御方法およびプログラムは、画像の素材データを用いて編集を行う場合に有用であり、フレームレートが可変されている素材データを用いる場合に好適である。   As described above, the edited image display control device, the edited image display control method, and the program according to the present invention are useful when editing using the material data of an image, It is suitable when used.

コンテンツ編集システムの全体構成を示す図である。FIG. 1 is a diagram illustrating an overall configuration of a content editing system. 撮像装置の構成を示す図である。FIG. 2 is a diagram illustrating a configuration of an imaging device. 撮像装置の他の構成を示す図である。FIG. 11 is a diagram illustrating another configuration of the imaging device. 映像データの付属情報の関係(その1)を示す図である。FIG. 9 is a diagram showing a relationship (part 1) of additional information of video data. 映像データと付属情報の関係(その2)を示す図である。It is a figure which shows the relationship (2) of video data and attached information. 編集装置の構成を示す図である。FIG. 2 is a diagram illustrating a configuration of an editing device. 編集操作のためのGUI画面を示す図である。FIG. 11 is a diagram illustrating a GUI screen for an editing operation. 編集動作時の表示制御を示すフローチャートである。9 is a flowchart illustrating display control during an editing operation. 編集操作時のGUI画面を示す図である。FIG. 14 is a diagram illustrating a GUI screen at the time of an editing operation. 画像再生動作を示す図である。It is a figure showing an image reproduction operation. 編集処理動作を示すフローチャートである。It is a flowchart which shows an edit processing operation. ソフトウェアでコンテンツ編集を行う場合の構成を示す図である。FIG. 3 is a diagram illustrating a configuration in a case where content editing is performed by software.

符号の説明Explanation of reference numerals

10,10a・・・撮像装置、12・・・撮像部、13,17・・・信号処理部、14,18・・・制御部、15・・・出力部、16,34・・・ユーザインタフェース部、20・・・音声入力装置、30・・・編集装置、31・・・素材取込部、32・・・編集処理部、33・・・信号編集部、35・・・編集出力信号生成部、40・・・編集画像表示装置、41・・・編集音声出力装置、131・・・カメラ処理回路、132・・・音声処理回路、141,181・・・撮像制御回路、142,182・・・タイミングジェネレータ、171・・・有効データ選別回路、183・・・有効フレーム信号生成回路、311・・・情報検出回路、312・・・データベース化処理回路、321・・・データ記憶装置、322・・・書込読出処理回路、323・・・信号編集回路、351・・・映像出力信号生成回路、352・・・音声出力信号生成回路、384・・・データ蓄積部、391・・・信号入力部、392・・・信号出力部、401・・・素材管理ブラウザ、402・・・ストーリーボード、403・・・モニタービューワー、404・・・タイムライン、405・・・動作コントロール部
10, 10a: imaging device, 12: imaging unit, 13, 17: signal processing unit, 14, 18: control unit, 15: output unit, 16, 34: user interface Unit, 20: voice input device, 30: editing device, 31: material capturing unit, 32: editing processing unit, 33: signal editing unit, 35: editing output signal generation Unit, 40: edited image display device, 41: edited audio output device, 131: camera processing circuit, 132: audio processing circuit, 141, 181: imaging control circuit, 142, 182 ..Timing generator, 171 ... effective data selection circuit, 183 ... effective frame signal generation circuit, 311 ... information detection circuit, 312 ... database processing circuit, 321 ... data storage device, 322 ... Write / read processing Circuit, 323: Signal editing circuit, 351: Video output signal generation circuit, 352: Audio output signal generation circuit, 384: Data storage unit, 391: Signal input unit, 392 ... Signal output unit, 401: Material management browser, 402: Storyboard, 403: Monitor viewer, 404: Timeline, 405: Operation control unit

Claims (25)

素材データにフレームレート情報が付属情報として連結されているか否かを検出する検出手段と、
前記フレームレート情報が付属情報として連結されている素材データと、前記フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御する制御手段とを有する
ことを特徴とする編集画像表示制御装置。
Detection means for detecting whether or not frame rate information is linked to the material data as additional information;
The state of a display image for editing is controlled so that material data in which the frame rate information is linked as accessory information and material data in which the frame rate information is not linked as accessory information are identified and displayed. An editing image display control device, comprising:
前記制御手段は、前記素材データの一覧を示す素材管理表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるように、前記表示画像の状態を制御する
ことを特徴とする請求項1記載の編集画像表示制御装置。
The control means, in a material management display showing a list of the material data, so that the material data to which the attached information is linked and the material data to which the attached information is not linked are displayed in a distinguishable manner. The edited image display control device according to claim 1, wherein a state of the display image is controlled.
前記制御手段は、前記素材データを再生順に並べてコンテンツの生成を行うための再生順序表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるように、前記表示画像の状態を制御する
ことを特徴とする請求項1記載の編集画像表示制御装置。
The control means is capable of identifying material data to which the attached information is linked and material data to which the attached information is not linked, in a playback order display for generating the content by arranging the material data in the order of playback. 2. The edited image display control device according to claim 1, wherein the state of the display image is controlled so as to be displayed.
前記制御手段は、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるように、前記表示画像の状態を制御する
ことを特徴とする請求項1記載の編集画像表示制御装置。
The control means may be configured such that, in a playback time order display for pasting the material data along a time axis and generating a content, the material data to which the additional information is connected and the material to which the additional information is not connected. 2. The edited image display control device according to claim 1, wherein the state of the display image is controlled so that the data and the data are identifiably displayed.
前記制御手段は、前記付属情報に基づき前記素材データの再生可能速度範囲を決定し、前記決定した再生可能速度範囲が表示されるように、前記表示画像の状態を制御することを特徴とする請求項1記載の編集画像表示制御装置。   The control means determines a reproducible speed range of the material data based on the attached information, and controls a state of the display image so that the determined reproducible speed range is displayed. Item 2. The edited image display control device according to Item 1. 前記制御手段は、前記素材データの一覧を示す素材管理表示において、前記決定した再生可能速度範囲が表示されるように、前記表示画像の状態を制御する
ことを特徴とする請求項5記載の編集画像表示制御装置。
6. The editing apparatus according to claim 5, wherein the control unit controls a state of the display image so that the determined reproducible speed range is displayed in a material management display showing a list of the material data. Image display control device.
前記制御手段は、前記素材データを再生順に並べてコンテンツの生成を行うための再生順序表示において、前記決定した再生可能速度範囲が表示されるよう、前記表示画像の状態を制御する
ことを特徴とする請求項5記載の編集画像表示制御装置。
The control means controls a state of the display image so that the determined reproducible speed range is displayed in a reproduction order display for arranging the material data in a reproduction order and generating a content. The edited image display control device according to claim 5.
前記制御手段は、前記素材データの再生画像表示において、前記決定した再生可能速度範囲が表示されるように、前記表示画像の状態を制御する
ことを特徴とする請求項5記載の編集画像表示制御装置。
6. The edited image display control according to claim 5, wherein the control unit controls the state of the display image such that the determined reproducible speed range is displayed in displaying the reproduced image of the material data. apparatus.
前記再生可能速度範囲の表示内に再生速度を示す位置表示が含まれる
ことを特徴とする請求項8記載の編集画像表示制御装置。
9. The edited image display control device according to claim 8, wherein a position display indicating a reproduction speed is included in the display of the reproducible speed range.
前記制御手段は、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記素材データの表示幅が、再生速度に基づいて算出された再生時間に応じて可変して表示されるように、前記表示画像の状態を制御することを特徴とする請求項5記載の編集画像表示制御装置。   The control unit may control the display width of the material data according to the playback time calculated based on the playback speed in the playback time order display for generating the content by pasting the material data along a time axis. 6. The edited image display control device according to claim 5, wherein the state of the display image is controlled so as to be variably displayed. 前記制御手段は、前記素材データの再生画像表示において、前記決定した再生可能速度範囲が表示され、該再生可能速度範囲の表示内に再生速度を示す位置表示が設けられ、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記素材データの表示幅が再生速度に基づいて算出された再生時間に応じて可変して表示され、前記再生時間順表示における素材データの表示幅を可変する操作に応じて前記位置表示の表示位置が連動されて移動され、前記位置表示の表示位置を可変する操作に応じて前記再生時間順表示における素材データの表示幅が可変されるように、前記表示画像の状態を制御する
ことを特徴とする請求項5記載の編集画像表示制御装置。
The control means displays the determined reproducible speed range in the reproduced image display of the material data, and a position display indicating the replay speed is provided in the display of the reproducible speed range, and the position is indicated along a time axis. In the playback time order display for generating the content by pasting the material data, the display width of the material data is variably displayed according to the playback time calculated based on the playback speed, and the display in the playback time order is performed. The display position of the position display is moved in conjunction with the operation of changing the display width of the material data in the above, and the display width of the material data in the playback time order display is changed according to the operation of changing the display position of the position display 6. The edited image display control device according to claim 5, wherein the state of the display image is controlled so that is changed.
前記制御手段は、前記再生可能速度可変範囲内の再生速度で素材データの再生動作が指示されたとき、前記指示された速度で再生された前記素材データが表示されるように、前記表示画像の状態を制御する
ことを特徴とする請求項5記載の編集画像表示制御装置。
The control means, when a reproduction operation of the material data is instructed at a reproduction speed within the reproducible speed variable range, so that the material data reproduced at the instructed speed is displayed, 6. The edited image display control device according to claim 5, wherein the state is controlled.
素材データにフレームレート情報が付属情報として連結されているか否かを検出する検出ステップと、
前記フレームレート情報が付属情報として連結されている素材データと、前記フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御する表示制御ステップとを有する
ことを特徴とする編集画像表示制御方法。
A detection step of detecting whether or not frame rate information is linked to the material data as additional information;
The state of a display image for editing is controlled so that material data in which the frame rate information is linked as accessory information and material data in which the frame rate information is not linked as accessory information are identified and displayed. And a display control step for controlling the edited image display.
前記表示制御ステップでは、前記素材データの一覧を示す素材管理表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項13記載の編集画像表示制御方法。
In the display control step, in the material management display showing the list of the material data, the display is performed such that the material data to which the additional information is connected and the material data to which the additional information is not connected are identifiably displayed. 14. The method according to claim 13, wherein the state of the image is controlled.
前記表示制御ステップでは、前記素材データを再生順に並べてコンテンツの生成を行うための再生順序表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項13記載の編集画像表示制御方法。
In the display control step, in the reproduction order display for generating the contents by arranging the material data in the reproduction order, it is possible to identify the material data to which the additional information is connected and the material data to which the additional information is not connected. 14. The method according to claim 13, wherein a state of the display image is controlled so as to be displayed on the display.
前記表示制御ステップでは、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項13記載の編集画像表示制御方法。
In the display control step, in the playback time display for pasting the material data along the time axis to generate the content, the material data to which the additional information is connected and the additional information are not connected. 14. The edited image display control method according to claim 13, wherein the state of the display image is controlled so that the material data is displayed in a distinguishable manner.
前記表示制御ステップでは、前記付属情報に基づき前記素材データの再生可能速度範囲が決定され、該決定された再生可能速度範囲が表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項13記載の編集画像表示制御方法。
In the display control step, a reproducible speed range of the material data is determined based on the attached information, and a state of the display image is controlled such that the determined reproducible speed range is displayed. 14. The edited image display control method according to claim 13.
前記表示制御ステップでは、前記素材データの一覧を示す素材管理表示において、前記決定された再生可能速度範囲が表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項17記載の編集画像表示制御方法。
18. The display control step, wherein a state of the display image is controlled such that the determined reproducible speed range is displayed in a material management display showing a list of the material data. Editing image display control method.
前記表示制御ステップでは、前記素材データを再生順に並べてコンテンツの生成を行う再生順序表示において、前記決定された再生可能速度範囲が表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項17記載の編集画像表示制御方法。
In the display control step, a state of the display image is controlled such that the determined reproducible speed range is displayed in a reproduction order display in which the material data is arranged in reproduction order to generate a content. The method for controlling the display of an edited image according to claim 17.
前記表示制御ステップでは、前記素材データの再生画像表示において、前記決定された再生可能速度範囲が表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項17記載の編集画像表示制御方法。
18. The edited image display according to claim 17, wherein, in the display control step, in the display of the reproduced image of the material data, the state of the display image is controlled so that the determined reproducible speed range is displayed. Control method.
前記再生可能速度範囲の表示内に再生速度を示す位置表示が含まれる
ことを特徴とする請求項20記載の編集画像表示制御方法。
21. The edited image display control method according to claim 20, wherein a position display indicating a reproduction speed is included in the display of the reproducible speed range.
前記表示制御ステップでは、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記素材データの表示幅が再生速度に基づいて算出した再生時間に応じて可変されて表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項17記載の編集画像表示制御方法。
In the display control step, in a playback time order display for pasting the material data along a time axis and generating a content, a display width of the material data is determined according to a playback time calculated based on a playback speed. 18. The edited image display control method according to claim 17, wherein a state of the display image is controlled so as to be variably displayed.
前記表示制御ステップでは、前記素材データの再生画像表示において、前記決定した再生可能速度範囲が表示され、該再生可能速度範囲の表示内に再生速度を示す位置表示が設けられ、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記素材データの表示幅が再生速度に基づいて算出した再生時間に応じて可変して表示され、前記再生時間順表示における素材データの表示幅を可変する操作に応じて前記位置表示の表示位置が連動されて移動され、前記位置表示の表示位置を可変する操作に応じて前記再生時間順表示における素材データの表示幅が可変されるよう、前記表示画像の状態が制御される
ことを特徴とする請求項17記載の編集画像表示制御方法。
In the display control step, in the playback image display of the material data, the determined reproducible speed range is displayed, and a position display indicating the replay speed is provided in the display of the reproducible speed range, and along the time axis. In the playback time order display for generating the content by pasting the material data, the display width of the material data is variably displayed according to the playback time calculated based on the playback speed, and the playback time order display is performed. The display position of the position display is moved in conjunction with the operation of changing the display width of the material data in the above, and the display width of the material data in the playback time order display is changed according to the operation of changing the display position of the position display 18. The edited image display control method according to claim 17, wherein the state of the display image is controlled so that the value is changed.
前記表示制御ステップでは、前記再生可能速度範囲内の再生速度で素材データの再生動作が指示されたとき、前記指示された速度で再生された前記素材データが表示されるよう前記表示画像の状態が制御される
ことを特徴とする請求項17記載の編集画像表示制御方法。
In the display control step, when a reproduction operation of material data is instructed at a reproduction speed within the reproducible speed range, the state of the display image is changed so that the material data reproduced at the instructed speed is displayed. The method according to claim 17, wherein the method is controlled.
素材データにフレームレート情報が付属情報として連結されているか否かを検出するするステップと、
前記フレームレート情報が付属情報として連結されている素材データと、前記フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御するステップをコンピュータに実行させるプログラム。
Detecting whether frame rate information is linked to the material data as additional information,
The state of a display image for editing is controlled so that material data in which the frame rate information is linked as additional information and material data in which the frame rate information is not linked as additional information are identified and displayed. A program that causes a computer to execute the steps to be performed.
JP2003381146A 2002-11-15 2003-11-11 Edited image display control device, edited image display control method and program Expired - Fee Related JP3985775B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003381146A JP3985775B2 (en) 2002-11-15 2003-11-11 Edited image display control device, edited image display control method and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002332650 2002-11-15
JP2003381146A JP3985775B2 (en) 2002-11-15 2003-11-11 Edited image display control device, edited image display control method and program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2007107405A Division JP2007267396A (en) 2002-11-15 2007-04-16 Apparatus and method for data processing, and program

Publications (2)

Publication Number Publication Date
JP2004180287A true JP2004180287A (en) 2004-06-24
JP3985775B2 JP3985775B2 (en) 2007-10-03

Family

ID=32716253

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003381146A Expired - Fee Related JP3985775B2 (en) 2002-11-15 2003-11-11 Edited image display control device, edited image display control method and program

Country Status (1)

Country Link
JP (1) JP3985775B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008035280A (en) * 2006-07-28 2008-02-14 Sanyo Electric Co Ltd Image decoding method, and image display method
JP2012244227A (en) * 2011-05-16 2012-12-10 Canon Inc Image reproduction apparatus, control method of the same, and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008035280A (en) * 2006-07-28 2008-02-14 Sanyo Electric Co Ltd Image decoding method, and image display method
JP2012244227A (en) * 2011-05-16 2012-12-10 Canon Inc Image reproduction apparatus, control method of the same, and program

Also Published As

Publication number Publication date
JP3985775B2 (en) 2007-10-03

Similar Documents

Publication Publication Date Title
JP4727342B2 (en) Image processing apparatus, image processing method, image processing program, and program storage medium
US8223210B2 (en) Apparatus and method for transmission, apparatus and method for production, program, and recording medium
WO2011049766A2 (en) System and method for real-time synchronization of a video resource and different audio resources
EP2034484B1 (en) Method and apparatus for controlling editing image display
JP2004180290A (en) Apparatus and method of transmission, apparatus and method of reproduction, program and recording medium
JP3951778B2 (en) Video content editing support system, imaging device, editor terminal device, recording medium, program, video content editing support method
US7557838B2 (en) Imaging method and imaging apparatus
JP4140518B2 (en) Information processing apparatus and method, and program
JP2008178090A (en) Video processing apparatus
JPH11215458A (en) Image recorder and its method, image reproducing device and its method, image recording and reproducing device and its method, and recording medium for these
JP3985775B2 (en) Edited image display control device, edited image display control method and program
JPH10276388A (en) Device, method for processing and reproducing image and recording medium
AU2021325471B2 (en) Information processing device, information processing program, and recording medium
JP3925487B2 (en) Imaging apparatus and imaging method
JP4973935B2 (en) Information processing apparatus, information processing method, program, and recording medium
JP2006311430A (en) Device and system for displaying image
JP2007267396A (en) Apparatus and method for data processing, and program
JPH1051734A (en) Dynamic image compiling device/method
JP4191911B2 (en) Video / audio signal switching device
JP4769168B2 (en) Non-linear editing apparatus and non-linear editing method
JP2007221535A (en) Data processing apparatus, system thereof, method thereof, program thereof, and recording medium for recording the program
JP4626629B2 (en) Data processing apparatus, data processing method, program, and recording medium
JP4378870B2 (en) Material editing apparatus and method for multimedia contents
JP4101258B2 (en) Image editing method, image editing apparatus, and medium storing program for causing computer to execute image editing processing operation
JP2004363719A (en) Apparatus, method, and program for reproducing voice attached video signal

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040421

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060510

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070416

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070619

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070702

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100720

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100720

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110720

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110720

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120720

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120720

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130720

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees