JP2011077668A - Moving picture generation device, computer program and storage medium - Google Patents

Moving picture generation device, computer program and storage medium Download PDF

Info

Publication number
JP2011077668A
JP2011077668A JP2009224933A JP2009224933A JP2011077668A JP 2011077668 A JP2011077668 A JP 2011077668A JP 2009224933 A JP2009224933 A JP 2009224933A JP 2009224933 A JP2009224933 A JP 2009224933A JP 2011077668 A JP2011077668 A JP 2011077668A
Authority
JP
Japan
Prior art keywords
track
video
moving image
music
arranging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009224933A
Other languages
Japanese (ja)
Inventor
Masanori Katsuta
雅則 勝田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kawai Musical Instrument Manufacturing Co Ltd
Original Assignee
Kawai Musical Instrument Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kawai Musical Instrument Manufacturing Co Ltd filed Critical Kawai Musical Instrument Manufacturing Co Ltd
Priority to JP2009224933A priority Critical patent/JP2011077668A/en
Publication of JP2011077668A publication Critical patent/JP2011077668A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To achieve a wide variety of stage effects rich in change without preparing many types of video effects. <P>SOLUTION: The wide variety of stage effects are applied on photograph materials by displaying a moving picture generation screen independently having a track for arranging data of musical piece materials, a track for arranging the photograph materials, and a video effect track for performing video effects on the photograph materials, on a display along a time line and adding the video effects arranged in the video effect track to the photograph materials. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は動画作成装置、コンピュータプログラム及び記憶媒体に関し、特に、エフェクト等の処理を静止画に施して動画を簡単に作成することができるようにする技術に関する。   The present invention relates to a moving image creating apparatus, a computer program, and a storage medium, and more particularly, to a technique for easily creating a moving image by performing processing such as effects on a still image.

近年、パーソナルコンピュータ等には、ユーザーが撮影した静止画や動画を、ユーザー自身で編集したり、フォトアルバム(電子アルバム)を作成したりする機能を搭載するものがある。   In recent years, some personal computers and the like are equipped with a function for editing a still image or a moving image taken by a user by himself or creating a photo album (electronic album).

例えば、特許文献1では、ユーザーがハードディスク等に記憶されている画像を指定すると、指定された画像に所定の編集処理(エフェクト処理)を施し、予め用意された音楽(BGM)に合わせて画像が順次表示されるコンテンツを作成する画像編集処理が開示されている。この画像編集処理は、画像に施す編集処理がランダムに決定されるため、同一の画像を指定しても、異なるコンテンツを作成することができるという特徴を有するものである。   For example, in Patent Document 1, when a user designates an image stored in a hard disk or the like, a predetermined editing process (effect process) is performed on the designated image, and the image is matched with music (BGM) prepared in advance. An image editing process for creating sequentially displayed contents is disclosed. This image editing process has a feature that different contents can be created even if the same image is designated because the editing process to be performed on the image is determined at random.

また、特許文献2では、ユーザーが予め用意されている楽曲を選択するとともに、再生対象とする静止画が格納されたフォトアルバムを選択することにより、楽曲の雰囲気に合わせたエフェクトが施された静止画を、曲とともに順次表示するスライドショーコンテンツ(プレイリスト)を作成する技術が開示されている。   Further, in Patent Document 2, a user selects a song prepared in advance and selects a photo album in which a still image to be played is stored. A technique for creating a slide show content (play list) that sequentially displays images together with music is disclosed.

特開2001−285784号公報JP 2001-285784 A 特開2006−86621号公報JP 2006-86621 A

従来技術では、タイムライン上に静止画素材およびそれに付加する映像効果を配置するためのエフェクトトラック(映像効果トラック)と、音楽素材を配置するためのBGMトラックのみにより静止画と音楽とを組み合わせたスライドショーを作成していた。   In the prior art, still images and music are combined using only an effect track (video effect track) for arranging still image material and video effects to be added on the timeline and a BGM track for arranging music material. I was creating a slideshow.

そして、従来技術では、写真(静止画)自体を演出するためのズーム、パンニング、色変更などの「エフェクト」と、クロスフェード、ワイプなど時系列上隣接する静止画間を演出するための「トランジション」とを複数用意しておき、各静止画に「エフェクト」を選択して割り当て、静止画間に「トランジション」を選択して割り当てることで、スライドショーを演出できるようにしていた。   In the prior art, “effects” such as zoom, panning, and color change to produce a photo (still image) itself, and “transitions” to produce a chronologically adjacent still image such as crossfade and wipe. ”Are prepared, and an“ effect ”is selected and assigned to each still image, and a“ transition ”is selected and assigned between the still images so that a slide show can be produced.

しかし、このような方法では、バラエティに富んだスライドショーを作成できるようにするためには、色々な種類の「エフェクト」や「トランジション」を用意しておく必要があるので、膨大な数のデータが必要であった。また、「エフェクト」や「トランジション」の数が膨大になるので、音楽に映像を同期させるためのタイミング合わせの作業が非常に面倒であり、音楽に同期した映像効果を、自由自在でしかも容易に編集することは不可能であった。
本発明は前述の問題点に鑑み、映像効果の種類をたくさん用意することなく、変化に富んだ多彩な演出効果を実現ができるようにすることを第1の目的とする。
さらに、音楽に映像を同期させるための面倒なタイミング合わせの作業をすることなく、だれでも簡単に音楽に同期した映像の動画を自由に作成できるようにすることを第2の目的とする。
However, with such a method, it is necessary to prepare various types of “effects” and “transitions” in order to be able to create a wide variety of slide shows. It was necessary. In addition, since the number of “effects” and “transitions” becomes enormous, the work of timing adjustment to synchronize video with music is very troublesome, and video effects synchronized with music can be freely and easily performed. It was impossible to edit.
In view of the above-described problems, a first object of the present invention is to realize a variety of presentation effects rich in change without preparing many types of video effects.
It is a second object of the present invention to make it possible for anyone to easily create a moving image of a video synchronized with music without performing troublesome timing adjustment for synchronizing the video with music.

本発明の動画作成装置は、複数の画像を用いて動画を作成する動画作成装置であって、タイムラインに沿って、楽曲素材のデータを配置するトラックと、写真素材を配置するトラックと、前記写真素材に映像効果を施すための映像効果トラックとを独立して有する動画作成画面をディスプレイに表示し、前記映像効果トラックに配置された映像効果を、前記写真素材に対して加えることにより、多彩な演出効果を前記写真素材に施すことができるようにしたことを特徴とする。
また、本発明の動画作成装置の他の特徴とするところは、音楽素材を配置するための楽曲トラック、静止画素材を配置するための写真トラック、及び前記静止画素材に付加する映像効果を配置するための映像効果トラックが複数設けられている動画作成画面をディスプレイに表示する動画作成画面表示手段と、前記動画作成画面に入力される情報を前記楽曲トラック、写真トラック、及び映像効果トラックに配置する情報入力手段と、前記情報入力手段により入力された情報に基いて、前記静止画素材に映像効果を付加して動画を作成する動画作成手段と、前記動画作成手段により作成された動画を再生する動画再生手段とを有することを特徴とする。
The moving picture creating apparatus of the present invention is a moving picture creating apparatus that creates a moving picture using a plurality of images, along a timeline, a track for arranging music material data, a track for arranging photo material, A video creation screen having an independent video effect track for applying a video effect to the photo material is displayed on the display, and the video effect arranged on the video effect track is added to the photo material, thereby providing a variety of The present invention is characterized in that various effects can be applied to the photographic material.
Further, another feature of the moving image creating apparatus of the present invention is that a music track for arranging music material, a photo track for arranging still image material, and a video effect added to the still image material are arranged. A video creation screen display means for displaying a video creation screen provided with a plurality of video effect tracks on the display, and information input to the video creation screen is arranged in the music track, photo track, and video effect track Based on the information input by the information input means, moving picture creating means for creating a moving picture by adding a video effect to the still image material, and reproducing the moving picture created by the moving picture creating means And moving image reproducing means.

本発明のコンピュータプログラムは、複数の画像を用いて動画を作成する処理をコンピュータに実行させるコンピュータプログラムであって、タイムラインに沿って、楽曲素材のデータを配置するトラックと、写真素材を配置するトラックと、前記写真素材に映像効果を施すための映像効果トラックとを独立して有する動画作成画面をディスプレイに表示し、前記映像効果トラックに配置された映像効果を、前記写真素材に対して加えることにより、多彩な演出効果を前記写真素材に施す処理をコンピュータに実行させることを特徴とする。
また、本発明のコンピュータプログラムの他の特徴とするところは、音楽素材を配置するための楽曲トラックと、静止画素材を配置するための写真トラック、及び前記静止画素材に付加する映像効果を配置するための映像効果トラックが複数設けられている動画作成画面をディスプレイに表示する動画作成画面表示工程と、前記動画作成画面に入力される情報を前記楽曲トラック、写真トラック、及び映像効果トラックに配置する情報入力工程と、前記情報入力工程により入力された情報に基いて、前記静止画素材に映像効果を付加して動画を作成する動画作成工程と、前記動画作成工程により作成された動画を再生する動画再生工程とをコンピュータに実行させることを特徴とする。
The computer program of the present invention is a computer program that causes a computer to execute a process of creating a moving image using a plurality of images, and arranges tracks for arranging music material data and photographic materials along a timeline. A video creation screen having a track and a video effect track for applying a video effect to the photographic material is displayed on the display, and the video effect arranged on the video effect track is added to the photographic material. In this manner, the computer is caused to execute processing for applying various effects to the photographic material.
Another feature of the computer program of the present invention is that a music track for arranging music material, a photo track for arranging still image material, and a video effect added to the still image material are arranged. A video creation screen display step for displaying a video creation screen provided with a plurality of video effect tracks for display on the display, and information input to the video creation screen is arranged in the music track, photo track, and video effect track An information input step, a video creation step for creating a video by adding a video effect to the still image material based on the information input in the information input step, and a playback of the video created by the video creation step The moving image reproduction process is performed by a computer.

本発明によれば、独立した映像効果トラックを掛け合わせることにより、莫大なパターンの映像効果を生み出すことが可能となるので、映像効果の種類をたくさん用意することなく、変化に富んだ多彩な演出効果を実現することができる。
また、本発明の他の特徴によれば、音楽同期タイミングをまったく意識することなく、簡単な操作により誰でも容易に音楽に同期したムービーを作成できる。
According to the present invention, by combining independent video effect tracks, it is possible to create a huge pattern of video effects, so a wide variety of effects can be produced without preparing many types of video effects. The effect can be realized.
In addition, according to another feature of the present invention, anyone can easily create a movie synchronized with music by a simple operation without being aware of music synchronization timing at all.

本発明の実施形態を示し、動画作成方法を実行する動画作成装置の構成例を説明するブロック図である。1 is a block diagram illustrating an example of the configuration of a moving image creation apparatus that executes an image creation method according to an embodiment of the present invention. 動画作成手順の一例を示すフローチャートである。It is a flowchart which shows an example of a moving image preparation procedure. 動画作成及び動画編集を行う画面の一例を示す図である。It is a figure which shows an example of the screen which performs animation creation and animation editing. 「楽曲タブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state as which "music tab" was selected. 「写真タブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state where the "photo tab" was selected. 「切り替えタブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state where the "switching tab" was selected. 「フォーカスタブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state in which the "focus tab" was selected. 「カメラタブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state in which "Camera tab" was selected. 「照明タブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state where the "lighting tab" was selected. 「背景タブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state where the "background tab" was selected. 「テキストタブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state where the "text tab" was selected. 「スクリーンタブ」が選択された状態の一例を示す図である。It is a figure which shows an example in the state where the "screen tab" was selected. 動画作成の具体例を説明する図である。It is a figure explaining the specific example of animation creation. 静止画に映像効果が施されて動画が生成される様子を説明する図である。It is a figure explaining a mode that a video effect is given to a still picture and a animation is generated.

図1は、本実施形態の動画作成方法を実行する動画作成装置の構成例を説明するブロック図である。
図1に示すように、本実施形態の動画作成装置100において行われる動画作成プログラム(コンピュータプログラム)により実行する一連の処理は、CPU101、102、及びRAM103よりなるコンピュータシステムにより制御されて実行される。
FIG. 1 is a block diagram illustrating a configuration example of a moving image creating apparatus that executes the moving image creating method of the present embodiment.
As shown in FIG. 1, a series of processing executed by a moving image generating program (computer program) performed in the moving image generating apparatus 100 of the present embodiment is controlled and executed by a computer system including CPUs 101 and 102 and a RAM 103. .

動画作成装置100において、CPU(Central Processing Unit)101、ROM(Read Only Memory)102、RAM(Random Access Memory)103は、バス104により相互に接続されている。   In the moving image creating apparatus 100, a central processing unit (CPU) 101, a read only memory (ROM) 102, and a random access memory (RAM) 103 are connected to each other via a bus 104.

バス104には、さらに、入出力インタフェース105が接続されている。入出力インタフェース105には、入力部106、出力部107、ハードディスクや不揮発性のメモリなどよりなる記憶部108、ネットワークインタフェースなどよりなる通信部109、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア111を駆動するドライブ110が接続されている。   An input / output interface 105 is further connected to the bus 104. The input / output interface 105 includes an input unit 106, an output unit 107, a storage unit 108 including a hard disk or a nonvolatile memory, a communication unit 109 including a network interface, a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory. A drive 110 for driving the removable media 111 is connected.

また、入力部106には、キーボード112、マウス113、マイクロホン114などが接続されている。また、出力部107には、ディスプレイ115、スピーカ116などが接続されている。   In addition, a keyboard 112, a mouse 113, a microphone 114, and the like are connected to the input unit 106. In addition, a display 115, a speaker 116, and the like are connected to the output unit 107.

以上のように構成される動画作成装置100では、CPU101が、例えば、記憶部108に記憶されている動画作成プログラムを、入出力インタフェース105及びバス104を介して、RAM103にロードして実行することにより、動画作成処理が行われる。   In the moving image creating apparatus 100 configured as described above, the CPU 101 loads, for example, the moving image creating program stored in the storage unit 108 to the RAM 103 via the input / output interface 105 and the bus 104 and executes the program. Thus, the moving image creation process is performed.

本実施形態の動画作成装置100において、CPU101が実行する動画作成プログラムは、例えば、磁気ディスク(フレキシブルディスクを含む)、光ディスク(CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)等)、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア111に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供される。   In the moving image creating apparatus 100 of this embodiment, the moving image creating program executed by the CPU 101 is, for example, a magnetic disk (including a flexible disk), an optical disk (CD-ROM (Compact Disc-Read Only Memory), DVD (Digital Versatile Disc)). Etc.), recorded on a removable medium 111 which is a package medium composed of a magneto-optical disk or a semiconductor memory, or provided via a wired or wireless transmission medium such as a local area network, the Internet, or digital satellite broadcasting. .

具体的には、リムーバブルメディア111をドライブ110に装着することにより、入出力インタフェース105を介して、記憶部108にインストールすることができる。また、有線または無線の伝送媒体を介して送信される動画作成プログラムを通信部109で受信して、記憶部108にインストールすることができる。その他、動画作成プログラムは、ROM102や記憶部108に、あらかじめインストールしておくことができる。   Specifically, the removable medium 111 can be installed in the storage unit 108 via the input / output interface 105 by attaching the removable medium 111 to the drive 110. In addition, a moving image creation program transmitted via a wired or wireless transmission medium can be received by the communication unit 109 and installed in the storage unit 108. In addition, the moving image creation program can be installed in the ROM 102 or the storage unit 108 in advance.

なお、動画作成装置100が実行する動画作成プログラムは、本明細書で説明する順序に沿って時系列に処理が行われる動画作成プログラムであってもよいし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われる動画作成プログラムであってもよい。   Note that the movie creation program executed by the movie creation device 100 may be a movie creation program that is processed in time series according to the order described in this specification, or in parallel or called. It may be a moving image creation program in which processing is performed at a necessary timing.

前述した動画作成処理をソフトウェアにより実行する場合、一連の処理を1つのアプリケーション動画作成プログラムで実現してもよいし、機能的に分割した複数のアプリケーションプログラムで実現してもよい。   When the above-described moving image creation processing is executed by software, a series of processing may be realized by a single application moving image creation program, or may be realized by a plurality of functionally divided application programs.

次に、図2のフローチャートを参照しながら本実施形態の動画作成処理手順の一例を説明する。
処理が開始されると、ステップS21において動画作成画面をディスプレイ115に表示する動画作成画面表示処理が行われる。本実施形態の動画作成方法において用いる動画作成画面には、図3に示すように、音楽素材を配置するための楽曲トラックと、写真素材(静止画素材)を配置するための写真トラック、及び静止画素材に付加する映像効果を配置するためのエフェクトトラック(映像効果トラック)が複数設けられていて、これらのトラックを独立して操作することができる。
Next, an example of the moving image creation processing procedure of the present embodiment will be described with reference to the flowchart of FIG.
When the process is started, a moving image creation screen display process for displaying the moving image creation screen on the display 115 is performed in step S21. As shown in FIG. 3, the movie creation screen used in the movie creation method of the present embodiment has a music track for arranging music material, a photo track for arranging photo material (still image material), and a still image. A plurality of effect tracks (video effect tracks) for arranging video effects to be added to the image material are provided, and these tracks can be operated independently.

さらに、映像効果トラックは、「区間トラック」と「瞬間トラック」とで構成される。「区間トラック」上に配置された映像オブジェクトによる映像効果処理は、タイムライン上に配置された次の映像オブジェクト位置まで継続される。一方、「瞬間トラック」上に配置された映像オブジェクトによる映像効果処理は、配置タイミングを中心とした前後の短い時間のみ行われる。   Further, the video effect track is composed of “section track” and “instant track”. The video effect processing by the video object arranged on the “section track” is continued until the next video object position arranged on the timeline. On the other hand, the video effect processing by the video object arranged on the “instant track” is performed only for a short time before and after the arrangement timing.

図3に示したように、本実施形態においては、エフェクトトラックとして、切り替えトラック、フレームトラック、フォーカストラック、カメラトラック、照明トラック、背景トラック、テキストトラック、イラストトラック、スクリーントラック等が設けられている。また、映像トラックごとに、さらに区間映像トラックと瞬間映像トラックを設けている。さらに、それぞれの映像トラックに対応して、複数の映像スタイルが用意されており、さらに各スタイルには複数のパターンの映像オブジェクトが用意され、それぞれの映像オブジェクト毎に映像効果のレベル設定ができる。   As shown in FIG. 3, in this embodiment, a switching track, a frame track, a focus track, a camera track, a lighting track, a background track, a text track, an illustration track, a screen track, and the like are provided as effect tracks. . Each video track is further provided with a section video track and an instantaneous video track. Furthermore, a plurality of video styles are prepared corresponding to each video track, and a video object having a plurality of patterns is prepared for each style, and a video effect level can be set for each video object.

また、これらのトラックに対応するタブが複数設けられていて、入力するトラックに対応するタブをクリックすることにより、所望の素材を選択することができるように構成されている。図3の例では、「フレームタブ」が選択されていて、選択画面には「矩形」、「手書き風」、「額縁」、「ガラス」、「スタンプ」・・・等が選択可能に表示されている。フレームの「映像効果」は、写真を表示する形状、例えば、4角形やハート形などの形状に表示するためのデータである。   A plurality of tabs corresponding to these tracks are provided, and a desired material can be selected by clicking on the tab corresponding to the input track. In the example of FIG. 3, “Frame tab” is selected, and “Rectangle”, “Handwriting style”, “Frame”, “Glass”, “Stamp”, etc. are displayed on the selection screen in a selectable manner. ing. The “image effect” of the frame is data for displaying a photograph in a shape such as a square shape or a heart shape.

図4は、「楽曲タブ」が選択された状態の一例を示している。この例では、「その1」〜「その3」の楽曲が表示されていて、「その3」が選択されている様子を示している。
図5は、「写真タブ」が選択された状態の一例を示していて、「写真A」「写真B」「写真C」「写真D」・・・等の写真が選択可能に表示されている。
FIG. 4 shows an example of a state where the “music tab” is selected. In this example, “part 1” to “part 3” are displayed, and “part 3” is selected.
FIG. 5 shows an example of a state in which the “photo tab” is selected, and photos such as “photo A”, “photo B”, “photo C”, “photo D”,. .

図6は、「切り替えタブ」が選択された状態の一例を示している。切り替えの「映像効果」は、各写真をどのようにモーションさせながら切り替え表示をするかを決めるためのデータである。この例では、スタイル名のウインドに「ツイスト」、「リバース」、「インサイドキューブ」等の映像効果が選択可能に表示されている。また、パターン名のウインドに「ノーマル」、「左旋回」、「右旋回」等が選択可能に表示されている。更に、効果レベルを、小〜大の間で自由に選択するためのスライダーが表示されている。   FIG. 6 shows an example of a state where the “switching tab” is selected. The “video effect” of switching is data for determining how to switch and display each photo while moving it. In this example, video effects such as “twist”, “reverse”, and “inside cube” are displayed in a selectable window in the style name. In addition, “Normal”, “Left turn”, “Right turn” and the like are displayed in the window of the pattern name so as to be selectable. Furthermore, a slider for freely selecting the effect level from small to large is displayed.

効果レベルは、例えば「左旋回」というパターンの映像オブジェクトであれば、効果レベルの値が小さいほどゆっくり旋回し、大きいほどはやく旋回するようにしてもよいし、効果レベルの値が小さいほど小さい角度で旋回し、大きいほど大きい角度で旋回するようにしてもよい。つまり、効果レベルとは、同じパターンの映像オブジェクトであっても、微妙な映像の違いを表現するためのさじ加減を調整するために用意されているものである。上記例に限らず、同じようなパターンの映像効果についてその映像表現の違いを調整するようなものであれば何でもよい。なお、本項の「切り替え」についての効果レベルだけでなく、次項以降の効果レベルについても同様である。   For example, if the effect level is a video object having a pattern of “turn left”, the effect level may be turned slowly as the value of the effect level is small, and may be turned quickly as the value of the effect level is small. You may make it turn at a large angle, so that it turns. In other words, the effect level is prepared for adjusting the level of adjustment for expressing subtle differences in video even for video objects having the same pattern. The present invention is not limited to the above example, and any video adjustment can be used as long as it adjusts the difference in the video expression for the video effect having the same pattern. This applies not only to the effect level for “switching” in this section, but also to the effect levels for the next and subsequent sections.

図7は、「フォーカスタブ」が選択された状態の一例を示している。フォーカスの映像効果は、表示する写真に焦点を合わせる等の効果を施すためのものである。この例では、スタイル名のウインドに「ズーム」、「パンニング」、「ジャンプ」、「不安定」等の映像効果が選択可能に表示されている。また、パターン名のウインドに「横方向」、「縦方向」、「斜め方向」等が選択可能に表示されている。更に、効果レベルを、小〜大の間で自由に選択するためのスライダーが表示されている。   FIG. 7 shows an example of a state where the “focus tab” is selected. The focus video effect is for applying an effect such as focusing on a photograph to be displayed. In this example, video effects such as “zoom”, “panning”, “jump”, and “unstable” are displayed in a style name window in a selectable manner. In the pattern name window, “horizontal direction”, “vertical direction”, “oblique direction”, and the like are displayed so as to be selectable. Furthermore, a slider for freely selecting the effect level from small to large is displayed.

図8は、「カメラタブ」が選択された状態の一例を示している。この例では、スタイル名のウインドに「ズーム」、「パンニング」、「不安定」、「ビートズーム」、「ビートパンニング」等が選択可能に表示されている。また、パターン名のウインドに「ズームイン(等速)」、「ズームイン(加速)」、「ズームイン(減速)」、「ズームアウト(等速)」等が選択可能に表示されている。更に、効果レベルを、小〜大の間で自由に選択するためのスライダーが表示されている。   FIG. 8 shows an example of a state where the “camera tab” is selected. In this example, “Zoom”, “Panning”, “Unstable”, “Beat zoom”, “Beat panning”, and the like are displayed in the style name window. Further, “Zoom In (Constant Speed)”, “Zoom In (Acceleration)”, “Zoom In (Deceleration)”, “Zoom Out (Constant Speed)”, etc. are displayed in the pattern name window. Furthermore, a slider for freely selecting the effect level from small to large is displayed.

図9は、「照明タブ」が選択された状態の一例を示している。この例では、スタイル名のウインドに「パンニング」、「回転」、「トーチ」、「ビートズーム」、「ビートパンニング」等が選択可能に表示されている。また、パターン名のウインドに「時計回り(ノーマル)」、「反時計回り(ノーマル)」、「時計回り(リバース)」、「反時計回り(リバース)」等が選択可能に表示されている。更に、効果レベルを、小〜大の間で自由に選択するためのスライダーが表示されている。また、色を選択するためのボタンも表示されている。   FIG. 9 shows an example of a state where the “lighting tab” is selected. In this example, “panning”, “rotation”, “torch”, “beat zoom”, “beat panning”, and the like are displayed in the style name window. In addition, “clockwise (normal)”, “counterclockwise (normal)”, “clockwise (reverse)”, “counterclockwise (reverse)”, and the like are displayed in a pattern name window. Furthermore, a slider for freely selecting the effect level from small to large is displayed. A button for selecting a color is also displayed.

図10は、「背景タブ」が選択された状態の一例を示している。「背景」の映像効果は、表示している写真の背景を任意に選択できるようにするためのデータである。この例では、スタイル名のウインドに「カラー」、「ノイズ」、「移動」、「不安定」、「星」等が選択可能に表示されている。また、パターン名のウインドに「縦方向のみ」、「横方向のみ」、「全方向」等が選択可能に表示されている。また、利用写真を選択するウインドが設けられていて、「フォーカス写真」、「前の写真」、「次の写真」、「ランダム」の選択項目のうち、「フォーカス写真」が選択された状態で表示されている。更に、効果レベルを、小〜大の間で自由に選択するためのスライダーが表示されている。   FIG. 10 shows an example of a state where the “background tab” is selected. The video effect of “background” is data for allowing the background of the displayed photo to be arbitrarily selected. In this example, “color”, “noise”, “move”, “unstable”, “star”, and the like are displayed in the window of the style name. In the pattern name window, “vertical direction only”, “horizontal direction only”, “omni direction”, and the like are displayed in a selectable manner. In addition, there is a window for selecting the photo to be used, and the “focus photo” is selected from the selection items of “focus photo”, “previous photo”, “next photo”, and “random”. It is displayed. Furthermore, a slider for freely selecting the effect level from small to large is displayed.

図11は、「テキストタブ」が選択された状態の一例を示している。「テキスト」は、表示中の写真に重ねて表示するテキストに対する効果データである。この例では、スタイル名のウインドに「なし」、「ノーマル」、「ズーム」、「伸張」、「スピン」等が選択可能に表示されている。また、パターン名のウインドに「全文字」、「1文字」、「全文字」等が選択可能に表示されている。更に、効果レベルを、小〜大の間で自由に選択するためのスライダーが表示されている。また、「編集」ボタンをクリックすると、テキストの文字列やフォントの種類、色、テキスト表示位置等を設定するためのウインドが開くようになっている。   FIG. 11 shows an example of a state where the “text tab” is selected. “Text” is effect data for text to be displayed overlaid on the photo being displayed. In this example, “None”, “Normal”, “Zoom”, “Stretch”, “Spin”, and the like are displayed in the window of the style name. In addition, “all characters”, “one character”, “all characters”, and the like are displayed in a pattern name window so as to be selectable. Furthermore, a slider for freely selecting the effect level from small to large is displayed. When the “edit” button is clicked, a window for setting a text string, font type, color, text display position, and the like is opened.

図12は、「スクリーンタブ」が選択された状態の一例を示している。「スクリーン」はムービー全体に対する映像効果であり、画面全体を暗くしたり、ぼかしたりするデータである。この例では、スタイル名のウインドに「ノーマル」、「フェードイン」、「フェードアウト」、「ブライト」、「カラー」等が選択可能に表示されている。また、パターン名のウインドに「固定」が選択可能に表示されている。更に、効果レベルを、小〜大の間で自由に選択するためのスライダーが表示されている。   FIG. 12 shows an example of a state where the “screen tab” is selected. “Screen” is a video effect for the entire movie, and is data that darkens or blurs the entire screen. In this example, “normal”, “fade in”, “fade out”, “bright”, “color”, and the like are displayed in the style name window. In addition, “Fixed” is displayed in the window of the pattern name so that it can be selected. Furthermore, a slider for freely selecting the effect level from small to large is displayed.

本実施形態においては、フレームトラック〜テキストトラックにおいては、複数のエフェクトトラックを設けた例を示している(図3の例では2列)。
すなわち、フレームトラックの上段には、「タイム0:02」に「矩形、ラウンド大」、「タイム0:14」に「額縁、リアル」、「タイム0:28」に「矩形、ラウンド大」、「タイム0:30」に「ユーザー、回転型」の「映像効果」が配置されている。また、下段には、「タイム0:33」に「手書き風、矩形」の「映像効果」が配置されている。
In the present embodiment, an example in which a plurality of effect tracks are provided in the frame track to the text track is shown (two rows in the example of FIG. 3).
That is, in the upper part of the frame track, “Rectangle, Round Large” at “Time 0:02”, “Frame, Real” at “Time 0:14”, “Rectangle, Round Large” at “Time 0:28”, “User effect, rotation type” “video effect” is arranged at “time 0:30”. In the lower row, “image effect” of “handwriting style, rectangle” is arranged at “time 0:33”.

フォーカストラックの上段には、「タイム0:02」に「ノーマル、矩形」、「タイム0:25」に「ジャンプ」の「映像効果」が配置されている。また、背景トラックの上段には、「タイム0:02」に「カラー」、「タイム0:17」に「ノイズ、周期変化」、「タイム0:30」に「カラー、選択カラー」の「映像効果」が配置されている。また、下段には、「タイム0:21」に「ノイズ、周期変化」、「タイム0:37」に「ノイズ、周期変化」の「映像効果」が配置されている。   In the upper part of the focus track, “normal, rectangular” at “time 0:02” and “image effect” of “jump” at “time 0:25” are arranged. In the upper part of the background track, “color” at “time 0:02”, “noise, period change” at “time 0:17”, “color, selected color” at “time 0:30” "Effect" is arranged. In the lower row, “noise, cycle change” at “time 0:21” and “video effect” of “noise, cycle change” at “time 0:37” are arranged.

前述したような、「動画作成画面」に対して、ユーザーがマウス113を操作することにより動画作成処理が実行される。すなわち、ステップS22においては、ユーザーにより楽曲選択が終了したか否かが判断される。この判断の結果、楽曲選択が終了していない場合には待機状態となる。また、ステップS22の判断の結果、楽曲選択が終了した場合にはステップS23に進む。本実施形態においては、図4を参照しながら説明したように、「その3」が選択されているので、ステップS22からステップS23に進む。   The moving image creation process is executed by the user operating the mouse 113 on the “moving image creation screen” as described above. That is, in step S22, it is determined whether or not the music selection has been completed by the user. If the result of this determination is that music selection has not been completed, a standby state is entered. As a result of the determination in step S22, if the music selection is completed, the process proceeds to step S23. In the present embodiment, as described with reference to FIG. 4, since “No. 3” is selected, the process proceeds from step S22 to step S23.

ステップS23においては、写真選択が終了したか否かが判断される。この判断の結果、写真選択が終了していない場合には待機状態となる。また、ステップS23の判断の結果、写真選択が終了して写真トラックに写真が配置された場合にはステップS24に進む。
ステップS24においては、ステップS23で写真トラックに配置された画像に所定の編集処理(エフェクト処理)を施すために、切り替えトラック〜スクリーントラックのそれぞれに、図4〜図12を参照しながら説明した「映像効果」が入力されるのを待機する。そして、各エフェクトトラックに「映像効果」が入力されたら、ステップS25に進む。前述したS22〜S24の各工程が情報入力工程となる。
In step S23, it is determined whether or not photo selection has been completed. If the result of this determination is that photo selection has not been completed, a standby state is entered. If the result of determination in step S23 is that photo selection has been completed and a photo has been placed on the photo track, the process proceeds to step S24.
In step S24, in order to perform a predetermined editing process (effect process) on the image arranged in the photo track in step S23, each of the switching track to the screen track has been described with reference to FIGS. It waits for the “image effect” to be input. When “video effect” is input to each effect track, the process proceeds to step S25. Each process of S22-S24 mentioned above becomes an information input process.

ステップS25においては、ステップS22〜ステップS24の各工程において、動画作成画面に入力された情報に基いて動画作成処理が行われる。本実施形態における動画作成処理は、写真トラックに配置された各画像に対して「映像効果」に従った処理を個々に実行する。これにより、1つの「静止画」に対して複数の映像処理を施すことが可能となり、従来のように、映像効果処理が行われた動画素材を大量に用意することなく、変化に富んだ多彩な演出効果を施した動画から生成することができる。動画作成処理が終了したら、次に、ステップS26に進む。   In step S25, in each process of step S22 to step S24, a moving image creation process is performed based on information input on the moving image creation screen. In the moving image creation process in the present embodiment, a process according to the “video effect” is individually executed for each image arranged on the photo track. This makes it possible to perform multiple video processings on a single “still image”, and a variety of video images that have undergone video effects processing, as in the past, without being prepared in large quantities. It can be generated from a moving image with various effects. When the moving image creation process ends, the process proceeds to step S26.

ステップS26においては、S25で作成した動画の再生処理が行われる。この動画再生処理が行われている期間中は、予め設定されている所定のタイミングでステップS27に進み、ユーザー(操作者)により動画再生処理の中断操作が行われるか否かを判断する。この判断の結果、ユーザーにより中断操作が行われた場合には、動画再生中であってもステップS22に戻り、ステップS22〜ステップS24の動画作成工程により作成された動画を編集可能な画面を表示する制御が行われる。これにより、ステップS22〜ステップS24において所望の効果を追加したり、変更したりする編集処理を行うことが可能となる。そして、編集結果に基いて、ステップS25において動画作成処理が行われる(この場合、動画編集処理となる)。これにより、動画作成結果を確認しながら編集作業を自由に行うことができる。また、ステップS27の判断の結果、ユーザーによる中断操作が行われなかった場合にはステップS28に進む。   In step S26, the moving image created in S25 is played back. During the period in which the moving image reproduction process is performed, the process proceeds to step S27 at a predetermined timing set in advance, and it is determined whether or not the user (operator) performs an interruption operation of the moving image reproduction process. As a result of this determination, if the user performs an interruption operation, the process returns to step S22 even when the moving image is being reproduced, and a screen on which the moving image created by the moving image creating process of steps S22 to S24 can be edited is displayed. Control is performed. Thereby, it is possible to perform an editing process in which a desired effect is added or changed in steps S22 to S24. Then, based on the editing result, a moving image creation process is performed in step S25 (in this case, the moving image editing process is performed). Thereby, editing work can be freely performed while confirming the moving image creation result. If the result of determination in step S27 is that no interruption operation has been performed by the user, processing proceeds to step S28.

ステップS28においては、動画再生処理が終了したか否かを判断する。この判断の結果、動画再生処理が終了していない場合にはステップS22に戻る。この場合、ユーザーによる中断操作が行われていないので、ステップS22〜ステップS25はスルーとなり、ステップS26の動画再生処理が続行する。また、ステップS28の判断の結果、動画再生処理が終了した場合にはエンド処理となる。   In step S28, it is determined whether or not the moving image playback process has ended. If the result of this determination is that the moving image playback process has not ended, processing returns to step S22. In this case, since no interruption operation is performed by the user, Steps S22 to S25 are “through”, and the moving image reproduction process of Step S26 continues. If the result of determination in step S28 is that the moving image playback process has ended, the end process is entered.

本実施形態においては、前述のようにして動画作成を行うことにより、映像効果処理が行われた動画素材を大量に用意することなく、変化に富んだ多彩な演出効果を施した動画を生成することができる。   In the present embodiment, by creating a moving image as described above, it is possible to generate a moving image with a variety of presentation effects without preparing a large amount of moving image material that has undergone video effect processing. be able to.

次に、図13及び図14を参照しながら、動画作成の具体例を説明する。
図13に示すように、この例では、切り替えトラックには「タイム0:02」に「折り紙」の「映像効果」が配置されている。また、フレームトラックには「タイム0:02」に「矩形、ラウンド大」の「映像効果」が配置されている。また、フォーカストラックには、「タイム0:02」に「ノーマル、固定」の「映像効果」が配置されている。また、カメラトラックには、「タイム0:02」に「ノーマル、固定」の「映像効果」が配置されている。また、背景トラックには「タイム0:02」に「カラー」の「映像効果」が配置されている。
Next, a specific example of moving image creation will be described with reference to FIGS. 13 and 14.
As shown in FIG. 13, in this example, “video effect” of “origami” is arranged at “time 0:02” in the switching track. In addition, “rectangular, large round” “video effect” is arranged at “time 0:02” in the frame track. In addition, “normal, fixed” “video effect” is arranged at “time 0:02” in the focus track. In the camera track, “normal, fixed” “video effect” is arranged at “time 0:02”. In the background track, “color effect” of “color” is arranged at “time 0:02”.

写真トラックに配置されている各写真は、図13中において台形で示したように、フェードイン〜全表示〜フェードアウトによりディスプレイ115に表示される。具体的に説明すると、写真1は、「タイム0:02」においてフェードインを開始する。そして、「タイム0:03」よりも少し前にフェードインを終了して全表示となる。その後、「タイム0:05」付近でフェードアウトを開始し、「タイム0:05」〜「タイム0:06」の中央付近でフェードアウトを終了する。   Each photo arranged on the photo track is displayed on the display 115 by fading in, displaying all, and fading out as shown by a trapezoid in FIG. More specifically, Photo 1 starts to fade in at “time 0:02”. Then, the fade-in is finished slightly before “time 0:03”, and all displays are made. Thereafter, the fade-out starts near “time 0:05”, and the fade-out ends near the center of “time 0:05” to “time 0:06”.

また、写真2は、写真1がフェードアウトを開始した「タイム0:05」付近でフェードインを開始する。そして、写真1がフェードアウトを終了した時刻にフェードインを終了して全表示となる。したがって、写真1がフェードアウトを開始してからフェードアウトを終了するまでの期間は、写真1と写真2とがディスプレイ115にオーバーラップして表示される。   For Photo 2, the fade-in starts near “time 0:05” when Photo 1 starts to fade out. Then, the fade-in is completed at the time when the photograph 1 has finished the fade-out, and all the images are displayed. Therefore, during the period from the start of fade-out of photo 1 to the end of fade-out, photo 1 and photo 2 are displayed on display 115 so as to overlap.

各エフェクトトラックに、前述のような「映像効果」が配置されることにより写真トラックに配置されている写真は、図14(1)〜(8)に示すように処理されて動画作成が行われる。すなわち、図14(1)に示すように、切り替え効果「折り紙」により、写真1がフェードインしてくる。   By arranging the “video effects” as described above on each effect track, the photos arranged on the photo track are processed as shown in FIGS. 14 (1) to (8) to create a moving image. . That is, as shown in FIG. 14A, the photograph 1 fades in due to the switching effect “origami”.

図14(2)〜(6)は、フェードインした写真1に「折り紙」の切り替え効果が施されて、小さく折り畳まれていた写真1が徐々に開いて、写真1の全体が表示される様子を示している。このように、折り畳まれていた写真1が徐々に開いていく様子をタイムラインに沿って表示することにより動画生成が行われる。   FIGS. 14 (2) to (6) show that the faded-in photo 1 is subjected to the “folding paper” switching effect, so that the small folded photo 1 gradually opens and the entire photo 1 is displayed. Is shown. In this way, a moving image is generated by displaying a state in which the folded photograph 1 gradually opens along the timeline.

本発明における動画生成の手法としては、3次元座標を持つポリゴンデータに写真画像テクスチャを貼り付けてアニメーションさせ、それに照明効果や色調変更などの画像処理を施し、カメラワーク的な座標変換を行った上で2次元座標に投影した画像を生成するなど、ごく一般的に行われている周知の技術を応用することができる。   As a method of generating a moving image in the present invention, a photographic image texture is pasted and animated on polygon data having three-dimensional coordinates, and image processing such as lighting effect and color tone change is performed thereon, and camerawork-like coordinate conversion is performed. It is possible to apply well-known techniques such as generating an image projected onto two-dimensional coordinates above.

図14(7)は、写真1がフェードアウトするとともに、写真2がフェードインする様子を示している。図14(8)は、ファードインした写真2に「折り紙」の切り替え効果が施されて、写真2が徐々に開いていく様子を示している。   FIG. 14 (7) shows a state in which the photograph 1 fades out and the photograph 2 fades in. FIG. 14 (8) shows a state in which the photograph 2 is gradually opened by applying the “folding paper” switching effect to the photograph 2 that has been faded in.

前述したように、本実施形態においては、夫々の効果毎に、複数の「スタイル」データ、及び複数「パターン」データを有しているので、写真に付与可能な効果は、「スタイル」×「パターン」の数だけ得ることができる。したがって、映像効果の種類をたくさん所持することなく莫大な種類で変化に富んだ演出効果を実現することができる。   As described above, in the present embodiment, each effect has a plurality of “style” data and a plurality of “pattern” data. Therefore, the effect that can be given to the photograph is “style” × “ The number of “patterns” can be obtained. Therefore, it is possible to realize a vast variety of production effects without possessing many types of video effects.

(第2の実施形態)
本実施形態においては、楽曲素材に対応した音楽同期情報(楽曲同期情報)を有する。この同期情報は、楽曲を周波数分析する周知の手法等により得られたビートタイミングや音圧レベルなどの特徴検出情報であるが、ユーザー自身が楽曲全体あるいは楽曲の一部を聴きながらタップするなどの手入力によって得られる情報であってもよい。音楽同期情報は、図3及び図13において、ムービーの時間情報のタイミングとは別に、楽曲トラック上に貼り付けられている楽曲に対応する音楽同期情報のタイミングで縦方向に示されている情報である。
(Second Embodiment)
In the present embodiment, music synchronization information (music synchronization information) corresponding to the music material is included. This synchronization information is feature detection information such as beat timing and sound pressure level obtained by a well-known method for frequency analysis of music, but the user himself taps while listening to the whole music or a part of the music. It may be information obtained by manual input. The music synchronization information is information shown in the vertical direction at the timing of the music synchronization information corresponding to the music pasted on the music track, separately from the timing of the time information of the movie in FIGS. is there.

本実施形態のように、音楽同期情報を有することにより、タイムライン上の楽曲トラックに配置された楽曲素材とそれに対応する同期情報とにより、それ以外のトラックに後から入力されるオブジェクトは、楽曲に対応した楽曲同期情報に基づいて、同期時刻に対応するマークを、前記動画作成画面に自動的に配置して表示することが可能になる。   As in this embodiment, by having the music synchronization information, the object that is input later to the other tracks by the music material arranged on the music track on the timeline and the corresponding synchronization information is the music The mark corresponding to the synchronization time can be automatically arranged and displayed on the moving image creation screen based on the music synchronization information corresponding to.

また、同期グリッドをオンオフするモードを設け、グリッドオンのときは最寄りの同期タイミングに自動配置され、グリッドオフのときはポインティングデバイス等で指示したタイミングに自動配置されるようにすることができる。配置後のタイムライン上の写真素材のフェードイン、フェードアウト時刻の変更や映像オブジェクトの切り替えタイミング時刻の変更等の編集もこれに準じる。   In addition, a mode for turning on / off the synchronization grid is provided, and when the grid is on, it is automatically arranged at the nearest synchronization timing, and when the grid is off, it can be automatically arranged at the timing designated by the pointing device or the like. This also applies to editing, such as changing the fade-in and fade-out times of the photo material on the timeline after placement and changing the switching timing time of the video object.

グリッドオンのときは、グリッド位置をタイムライン上に判別できるように表示する。前記の「フレーム」、「フォーカス」、「カメラ」、「照明」、「背景」、「テキスト」、「スクリーン」の各映像効果は、写真(静止画)、テキスト、イラスト等の映像素材を利用して、前記の同期情報に基づいてリアルタイムに映像処理を行うことで、楽曲に同期したムービーを作成して再生することができる。   When the grid is on, the grid position is displayed so that it can be identified on the timeline. The above-mentioned video effects such as “frame”, “focus”, “camera”, “lighting”, “background”, “text”, “screen” use video materials such as photographs (still images), text, illustrations, etc. Then, by performing video processing in real time based on the synchronization information, a movie synchronized with the music can be created and reproduced.

映像が楽曲に同期するのは、ある映像スタイルから次の映像スタイルへ切り替わるタイミングのみではない。
例えば、「フォーカス」や「照明」などの映像効果スタイルの中には、「ビートパンニング」という映像スタイルが用意されているが、このスタイルに属する映像オブジェクトを映像トラックに配置した場合、楽曲の同期情報に対応するビート位置に合わせてパンニングするような映像処理を行うようにする。
It is not only the timing at which the video is synchronized with the music but at the time of switching from one video style to the next.
For example, in the video effect styles such as “Focus” and “Lighting”, there is a video style called “beat panning”. If a video object belonging to this style is placed on the video track, the music is synchronized. Image processing such as panning in accordance with the beat position corresponding to the information is performed.

また、「フレーム」や「テキスト」、「カメラ」などの映像効果スタイルの中には、「ビートズーム」という映像スタイルが用意されているが、それに属する映像オブジェクトを映像トラックに配置した場合、ビートに合わせてズームするような映像処理を行うようにする。   In addition, some video effect styles such as “frame”, “text”, and “camera” have a “beat zoom” video style. Video processing that zooms in time with is performed.

これに限らず、各映像トラックに対応した映像スタイルには、同期情報に同期する映像処理に関連するものを含んでおり、これらの映像スタイルの映像オブジェクトを配置した場合には、次の映像スタイル時刻までの間に、周期的あるいは瞬間的な映像表現などの映像処理を行うようにする。
さらに、本実施例にはないが、「イラスト」という映像トラックを用意して、選択したイラスト素材を、選択した映像スタイルに対応した映像処理を行うようにしてもよい。
Not limited to this, the video styles corresponding to each video track include those related to video processing synchronized with the synchronization information. When video objects of these video styles are arranged, the next video style Video processing such as periodic or instantaneous video expression is performed until the time.
Further, although not in the present embodiment, a video track “illustration” may be prepared, and video processing corresponding to the selected video style may be performed on the selected illustration material.

ムービー編集中に、編集途中のムービーデータを再生しながら、選択した映像オブジェクトの入力操作を行うと、ムービー再生ポインタに対応した位置に、前記グリッドモードに応じて自動的に配置される。   If an input operation for the selected video object is performed while the movie data being edited is being reproduced during movie editing, the movie data is automatically arranged at a position corresponding to the movie playback pointer according to the grid mode.

(本発明の他の実施形態)
前述した実施形態の機能を実現するべく各プログラムコードを動作させるように、前記各種デバイスと接続された装置あるいはシステム内のコンピュータに対し、前記実施形態の機能を実現するためのソフトウェアのプログラムコードを供給し、そのシステムあるいは装置のコンピュータ(CPUあるいはMPU)に格納されたコンピュータプログラムに従って前記各種デバイスを動作させることによって実施したものも、本発明の範疇に含まれる。
(Other embodiments of the present invention)
A program code of software for realizing the functions of the embodiment is provided to an apparatus connected to the various devices or a computer in the system so that each program code is operated to realize the functions of the embodiment. What is implemented by operating the various devices according to a computer program supplied and stored in a computer (CPU or MPU) of the system or apparatus is also included in the scope of the present invention.

また、この場合、前記ソフトウェアのプログラムコード自体が前述した実施形態の機能(各手段)を実現することになり、そのプログラムコード自体、およびそのプログラムコードをコンピュータに供給するための手段、例えば、かかるプログラムコードを格納した記憶媒体は本発明を構成する。かかるプログラムコードを記録する記憶媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。   In this case, the program code of the software itself realizes the functions (each unit) of the above-described embodiment, and the program code itself and means for supplying the program code to a computer, for example, A storage medium storing the program code constitutes the present invention. As a storage medium for recording the program code, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a magnetic tape, a nonvolatile memory card, a ROM, or the like can be used.

また、コンピュータが供給されたプログラムコードを実行することにより、前述の実施形態の機能が実現されるだけでなく、そのプログラムコードがコンピュータにおいて稼働しているOS(オペレーティングシステム)あるいは他のアプリケーションソフト等と共同して前述の実施形態の機能が実現される場合にもかかるプログラムコードは本発明の実施形態に含まれる。   Further, by executing the program code supplied by the computer, not only the functions of the above-described embodiments are realized, but also the OS (operating system) or other application software in which the program code is running on the computer, etc. The program code is also included in the embodiment of the present invention even when the functions of the above-described embodiment are realized in cooperation with the above.

さらに、コンピュータ読み取り可能な記憶媒体から供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合にも本発明に含まれる。   Further, after the program code supplied from the computer-readable storage medium is stored in the memory of the function expansion board of the computer or the function expansion unit connected to the computer, the function expansion board is based on the instruction of the program code. The present invention also includes the case where the CPU or the like provided in the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing.

S21 動画作成画面表示工程、S22 楽曲選択工程、S23 写真選択工程、S24 映像効果入力工程、S25 動画作成工程、S26 動画再生工程、S27 編集操作受付工程、S28 終了判断工程 S21 video creation screen display process, S22 music selection process, S23 photo selection process, S24 video effect input process, S25 video creation process, S26 video playback process, S27 editing operation acceptance process, S28 end determination process

Claims (15)

複数の画像を用いて動画を作成する動画作成装置であって、
タイムラインに沿って、楽曲素材のデータを配置するトラックと、写真素材を配置するトラックと、前記写真素材に映像効果を施すための映像効果トラックとを独立して有する動画作成画面をディスプレイに表示し、前記映像効果トラックに配置された映像効果を、前記写真素材に対して加えることにより、多彩な演出効果を前記写真素材に施すことができるようにしたことを特徴とする動画作成装置。
A video creation device that creates a video using a plurality of images,
Displayed on the display is a video creation screen that independently has a track for arranging music material data, a track for arranging photo material, and a video effect track for applying a video effect to the photo material along the timeline. In addition, a moving picture creating apparatus characterized in that a variety of effects can be applied to the photographic material by adding a video effect arranged on the video effect track to the photographic material.
前記映像効果トラックとして、切り替えトラック、フレームトラック、フォーカストラック、カメラトラック、照明トラック、背景トラック、テキストトラック、イラストトラック、スクリーントラックのうち、いずれか2つ以上のトラックを設けたことを特徴とする請求項1に記載の動画作成装置。   As the video effect track, any two or more of a switching track, a frame track, a focus track, a camera track, a lighting track, a background track, a text track, an illustration track, and a screen track are provided. The moving image creating apparatus according to claim 1. 前記映像効果トラックごとに、さらに区間映像トラックと瞬間映像トラックを設けたことを特徴とする請求項2に記載の動画作成装置。   3. The moving image creating apparatus according to claim 2, further comprising a section video track and an instantaneous video track for each video effect track. 前記楽曲素材に対応した音楽同期情報を有し、前記タイムライン上の楽曲トラックに配置された楽曲素材の位置に対応して、それ以外のトラックに入力あるいは編集を行うオブジェクトを前記音楽同期情報に基づいて自動的に配置することを特徴とする請求項1乃至3の何れか1項に記載の動画作成装置。   An object that has music synchronization information corresponding to the music material and that inputs or edits to other tracks corresponding to the position of the music material arranged on the music track on the timeline is used as the music synchronization information. The moving image creating apparatus according to claim 1, wherein the moving image creating apparatus automatically arranges the moving image based on the moving image. 前記タイムライン上に配置された楽曲に対応した楽曲同期情報に基づいて、同期時刻に対応するマークを、前記動画作成画面に表示することを特徴とする請求項1乃至4の何れか1項に記載の動画作成装置。   The mark corresponding to the synchronization time is displayed on the moving image creation screen based on the music synchronization information corresponding to the music arranged on the timeline. The video creation device described. 音楽素材を配置するための楽曲トラック、静止画素材を配置するための写真トラック、及び前記静止画素材に付加する映像効果を配置するための映像効果トラックが複数設けられている動画作成画面をディスプレイに表示する動画作成画面表示手段と、
前記動画作成画面に入力される情報を前記楽曲トラック、写真トラック、及び映像効果トラックに配置する情報入力手段と、
前記情報入力手段により入力された情報に基いて、前記静止画素材に映像効果を付加して動画を作成する動画作成手段と、
前記動画作成手段により作成された動画を再生する動画再生手段とを有することを特徴とする動画作成装置。
Displays a movie creation screen with a plurality of music tracks for arranging music material, a photo track for arranging still image material, and a plurality of video effect tracks for arranging video effects to be added to the still image material Video creation screen display means to be displayed on
Information input means for arranging information input to the video creation screen on the music track, photo track, and video effect track;
Based on the information input by the information input means, a moving image creating means for creating a moving image by adding a video effect to the still image material;
A moving image creating apparatus comprising: a moving image reproducing unit that reproduces the moving image created by the moving image creating unit.
前記動画再生手段により再生されている動画を操作者の指示に従って中断し、前記動画作成手段により作成された動画を編集可能な画面を表示するように変更する制御手段を有することを特徴とする請求項6に記載の動画作成装置。   And a control unit configured to interrupt the moving image being reproduced by the moving image reproducing unit in accordance with an instruction from an operator and to display a screen on which the moving image created by the moving image creating unit can be edited. Item 7. The moving image creating device according to Item 6. 複数の画像を用いて動画を作成する処理をコンピュータに実行させるコンピュータプログラムであって、
タイムラインに沿って、楽曲素材のデータを配置するトラックと、写真素材を配置するトラックと、前記写真素材に映像効果を施すための映像効果トラックとを独立して有する動画作成画面をディスプレイに表示し、前記映像効果トラックに配置された映像効果を、前記写真素材に対して加えることにより、多彩な演出効果を前記写真素材に施す処理をコンピュータに実行させることを特徴とするコンピュータプログラム。
A computer program that causes a computer to execute a process of creating a moving image using a plurality of images,
Displayed on the display is a video creation screen that independently has a track for arranging music material data, a track for arranging photo material, and a video effect track for applying a video effect to the photo material along the timeline. A computer program for causing a computer to execute various effects on the photographic material by adding a video effect arranged on the video effect track to the photographic material.
前記映像効果トラックとして、切り替えトラック、フレームトラック、フォーカストラック、カメラトラック、照明トラック、背景トラック、テキストトラック、イラストトラック、スクリーントラックのうち、いずれか2つ以上のトラックを設けたことを特徴とする請求項8に記載のコンピュータプログラム。   As the video effect track, any two or more of a switching track, a frame track, a focus track, a camera track, a lighting track, a background track, a text track, an illustration track, and a screen track are provided. The computer program according to claim 8. 前記映像効果トラックごとに、さらに区間映像トラックと瞬間映像トラックを設けたことを特徴とする請求項9に記載のコンピュータプログラム。   10. The computer program according to claim 9, further comprising a section video track and an instantaneous video track for each video effect track. 前記楽曲素材に対応した音楽同期情報を有し、前記タイムライン上の楽曲トラックに配置された楽曲素材の位置に対応して、それ以外のトラックに入力あるいは編集を行うオブジェクトを前記音楽同期情報に基づいて自動的に配置することを特徴とする請求項8乃至10の何れか1項に記載のコンピュータプログラム。   An object that has music synchronization information corresponding to the music material and that inputs or edits to other tracks corresponding to the position of the music material arranged on the music track on the timeline is used as the music synchronization information. 11. The computer program according to claim 8, wherein the computer program is automatically arranged based on the computer program. 前記タイムライン上に配置された楽曲に対応した楽曲同期情報に基づいて、同期時刻に対応するマークを、前記動画作成画面に表示することを特徴とする請求項8乃至11の何れか1項に記載のコンピュータプログラム。   The mark corresponding to the synchronization time is displayed on the moving image creation screen based on the music synchronization information corresponding to the music arranged on the timeline. The computer program described. 音楽素材を配置するための楽曲トラックと、静止画素材を配置するための写真トラック、及び前記静止画素材に付加する映像効果を配置するための映像効果トラックが複数設けられている動画作成画面をディスプレイに表示する動画作成画面表示工程と、
前記動画作成画面に入力される情報を前記楽曲トラック、写真トラック、及び映像効果トラックに配置する情報入力工程と、
前記情報入力工程により入力された情報に基いて、前記静止画素材に映像効果を付加して動画を作成する動画作成工程と、
前記動画作成工程により作成された動画を再生する動画再生工程とをコンピュータに実行させることを特徴とするコンピュータプログラム。
A movie creation screen provided with a plurality of music track for arranging music material, a photo track for arranging still image material, and a plurality of video effect tracks for arranging video effects to be added to the still image material The video creation screen display process to be displayed on the display,
An information input step for arranging information input to the video creation screen on the music track, photo track, and video effect track;
Based on the information input by the information input step, a moving image creating step of creating a moving image by adding a video effect to the still image material,
A computer program for causing a computer to execute a moving image reproduction step of reproducing the moving image generated by the moving image generation step.
前記動画再生工程により再生されている動画を操作者の指示に従って中断し、前記動画作成工程により作成された動画を編集可能な画面を表示するように変更する制御工程を有することを特徴とする請求項13に記載のコンピュータプログラム。   A control step of interrupting the moving image being played back by the moving image playing step according to an instruction from an operator and changing the moving image created by the moving image creating step to display a screen that can be edited is provided. Item 14. The computer program according to Item 13. 請求項8〜14の何れか1項に記載のコンピュータプログラムを記憶したことを特徴とするコンピュータ読み取り可能な記憶媒体。   A computer-readable storage medium storing the computer program according to any one of claims 8 to 14.
JP2009224933A 2009-09-29 2009-09-29 Moving picture generation device, computer program and storage medium Pending JP2011077668A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009224933A JP2011077668A (en) 2009-09-29 2009-09-29 Moving picture generation device, computer program and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009224933A JP2011077668A (en) 2009-09-29 2009-09-29 Moving picture generation device, computer program and storage medium

Publications (1)

Publication Number Publication Date
JP2011077668A true JP2011077668A (en) 2011-04-14

Family

ID=44021216

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009224933A Pending JP2011077668A (en) 2009-09-29 2009-09-29 Moving picture generation device, computer program and storage medium

Country Status (1)

Country Link
JP (1) JP2011077668A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023125132A1 (en) * 2021-12-30 2023-07-06 北京字跳网络技术有限公司 Special effect image processing method and apparatus, and electronic device and storage medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11289512A (en) * 1998-04-03 1999-10-19 Sony Corp Editing list preparing device
JP2000149502A (en) * 1998-11-10 2000-05-30 Sony Corp Edit data-forming apparatus
JP2001111950A (en) * 1999-10-06 2001-04-20 Nippon Hoso Kyokai <Nhk> Video image edit method and device
JP2004015436A (en) * 2002-06-06 2004-01-15 Sony Corp Program, record medium, methodology, and instrument for video image content creation
JP2006033505A (en) * 2004-07-16 2006-02-02 Canon Inc Device and method for information reproduction, and computer program

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11289512A (en) * 1998-04-03 1999-10-19 Sony Corp Editing list preparing device
JP2000149502A (en) * 1998-11-10 2000-05-30 Sony Corp Edit data-forming apparatus
JP2001111950A (en) * 1999-10-06 2001-04-20 Nippon Hoso Kyokai <Nhk> Video image edit method and device
JP2004015436A (en) * 2002-06-06 2004-01-15 Sony Corp Program, record medium, methodology, and instrument for video image content creation
JP2006033505A (en) * 2004-07-16 2006-02-02 Canon Inc Device and method for information reproduction, and computer program

Non-Patent Citations (8)

* Cited by examiner, † Cited by third party
Title
CSNB200500395001; 電報児タムラ: After Effects マスター 初版 第1版, 20041214, 株式会社ボーンデジタル 石橋 俊雄 *
CSND200800454010; 永山 昌克: '徹底比較 Perfect Comparison' PCfan 第15巻 第16号 第15巻, (株)毎日コミュニケーションズ *
CSND200900624007; '初音ミク 2ND ANIVERSARY' DTM MAGAZINE 第16巻 第12号 第16巻, 20090910, 株式会社寺島情報企画 *
CSNG200900017013; 飯塚 太郎 Taro IIZUKA: '人間の知覚特性を考慮した音と映像の特徴検出および調和の許容時間を考慮したマッチング Detection and ma' 映像情報メディア学会技術報告 Vol.32 No.56 ITE Technical Report 第32巻, (社)映像情報メディア学会 The Institute of Image *
JPN6013029467; 飯塚 太郎 Taro IIZUKA: '人間の知覚特性を考慮した音と映像の特徴検出および調和の許容時間を考慮したマッチング Detection and ma' 映像情報メディア学会技術報告 Vol.32 No.56 ITE Technical Report 第32巻, (社)映像情報メディア学会 The Institute of Image *
JPN6013029468; 永山 昌克: '徹底比較 Perfect Comparison' PCfan 第15巻 第16号 第15巻, (株)毎日コミュニケーションズ *
JPN6013054006; 電報児タムラ: After Effects マスター 初版 第1版, 20041214, 株式会社ボーンデジタル 石橋 俊雄 *
JPN6014015195; '初音ミク 2ND ANIVERSARY' DTM MAGAZINE 第16巻 第12号 第16巻, 20090910, 株式会社寺島情報企画 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023125132A1 (en) * 2021-12-30 2023-07-06 北京字跳网络技术有限公司 Special effect image processing method and apparatus, and electronic device and storage medium

Similar Documents

Publication Publication Date Title
JP4461149B2 (en) Creation of a new music video by intercutting image data provided by the user into an existing music video
JP2010057145A (en) Electronic device, and method and program for changing moving image data section
US11915342B2 (en) Systems and methods for creating a 2D film from immersive content
JP2008123672A5 (en)
JP2008123672A (en) Editing system
JP5110706B2 (en) Picture book image reproduction apparatus, picture book image reproduction method, picture book image reproduction program, and recording medium
KR20070098362A (en) Apparatus and method for synthesizing a background music to a moving image
JP5551403B2 (en) Movie creating apparatus, computer program, and storage medium
JP5044503B2 (en) Effect image playback device, effect image playback method, effect image playback program, and recording medium
JP2011077668A (en) Moving picture generation device, computer program and storage medium
JP5490480B2 (en) Movie creating apparatus, computer program, and storage medium
JP5607332B2 (en) Movie playback apparatus and computer program
JP2005136485A (en) Edit apparatus
JP3507767B2 (en) Multimedia content reproduction system and multimedia content reproduction method
JP3841815B2 (en) How to edit video data
TWI677240B (en) System for using multimedia symbols to present storyboard and method thereof
JP2000083194A (en) Method for editing video data
TWI225368B (en) Method for generating and playing image passing-field animation special-efficacy
JP4068915B2 (en) Video data editing apparatus and editing method
Costello Non-Linear Editing
Wood Sony Vegas Pro 11 Beginner's Guide
JP2006108943A (en) Edit apparatus, and edit method and program
WO2020222721A1 (en) Digital video editing and playback method
JP4018928B2 (en) Program production method
JP2009271787A (en) Performance image creation device, performance image creation method, performance image creation program and recording medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120720

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130610

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130625

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130808

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131105

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131226

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140415