JP6150320B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

Description

本技術は、情報処理装置、情報処理方法、およびプログラムに関し、特に、複数の編集効果をより簡単に設定することができるようにした情報処理装置、情報処理方法、およびプログラムに関する。

いわゆるスマートフォンなどの普及に伴い、カメラ機能を搭載した携帯端末を用いて動画を撮影する人が増えてきた。

携帯端末で撮影した動画を動画編集用のソフトウェアがインストールされたパーソナルコンピュータなどの機器に取り込み、カット編集を行ったり、各種の編集効果（エフェクト）を付けたりして動画の編集を行うことも一般的に行われるようになってきている。

特開２００９−１４１８９５号公報

編集効果を付ける操作の流れは、通常、編集効果の種類を予め用意されたものの中から選択し、選択した編集効果を付ける区間を編集の対象となる動画を見ながら探して指定する、といった流れになる。

複数の編集効果を組み合わせて用いる場合、編集効果の種類の選択と、編集効果を付ける区間の指定を繰り返す必要があり、操作に手間がかかる。

また、複数の編集効果を組み合わせて用いることで相乗効果を発揮させ、より効果的な演出が可能になるとしても、特に編集の初心者にとってはそのようなことに気付くことすら難しい。その結果、編集効果の種類が充実していても、十分に利用されていないことが多い。

本技術はこのような状況に鑑みてなされたものであり、複数の編集効果をより簡単に設定することができるようにするものである。

本技術の一側面の情報処理装置は、編集の対象となる画像の再生が開始される前に、編集効果が適用される時間と前記編集効果の種類の選択画面を表示させる表示制御部と、前記画像の再生を制御する制御部と、前記画像の再生区間のうち、前記画像の再生中に指示があったときの再生位置から、前記選択画面を用いて複数種類の時間の中から予め選択された所定の時間だけ後の位置までの区間を編集区間とし、前記編集区間の前記画像に組み合わせて適用する、前記選択画面を用いて選択された複数の編集効果を表す情報と前記編集区間を表す情報を含む編集情報を、前記指示がある毎に生成する生成部とを備える。

前記制御部には、前記編集情報が生成された前記画像を再生する場合、前記編集情報に基づいて、複数の前記編集効果を組み合わせて前記編集区間の前記画像に適用させることができる。

前記生成部には、前記編集区間の前記画像に適用する前記編集効果として１つの前記編集効果が選択された場合、１つの前記編集効果を表す情報と前記編集区間を表す情報を含む前記編集情報を生成させることができる。

前記表示制御部には、前記編集効果が適用される区間を表すアイコンを前記編集区間の開始位置に配置したタイムラインを表示させることができる。

前記表示制御部には、複数の前記編集効果が適用される区間を表すアイコンと、１つの前記編集効果が適用される区間を表すアイコンとしてそれぞれ異なるアイコンを表示させることができる。

前記表示制御部には、複数の前記編集効果が適用される前記編集区間に対応する前記タイムラインの区間と、１つの前記編集効果が適用される前記編集区間に対応する前記タイムラインの区間を異なる色で表示させることができる。

前記編集情報を前記画像とは別に記録させて管理する管理部をさらに設けることができる。

前記管理部には、ユーザにより選択された前記編集効果の情報を前記編集情報から削除させることができる。

前記管理部には、ユーザにより選択された前記編集効果の内容を変更し、変更後の内容を表す前記編集効果の情報を前記編集情報に記録させることができる。

本技術の一側面においては、編集の対象となる画像の再生が開始される前に、編集効果が適用される時間と前記編集効果の種類の選択画面が表示され、前記画像が再生され、前記画像の再生区間のうち、前記画像の再生中に指示があったときの再生位置から、前記選択画面を用いて複数種類の時間の中から予め選択された所定の時間だけ後の位置までの区間が編集区間とされ、前記編集区間の前記画像に組み合わせて適用する、前記選択画面を用いて選択された複数の前記編集効果を表す情報と前記編集区間を表す情報を含む編集情報が、前記指示がある毎に生成される。

本技術によれば、複数の編集効果をより簡単に設定することができる。

本技術の一実施形態に係る情報処理装置の外観を示す図である。 編集画面の例を示す図である。 編集画面の例を示す図である。 編集画面の例を示す図である。 アイコンの切り替わりの例を示す図である。 編集画面の例を示す図である。 編集画面の例を示す図である。 編集画面の例を示す図である。 編集画面の例を示す図である。 編集画面の例を示す図である。 情報処理装置のハードウェア構成例を示すブロック図である。 情報処理装置の機能構成例を示すブロック図である。 編集データの例を示す図である。 図１２の制御部の構成例を示すブロック図である。 情報処理装置の編集処理について説明するフローチャートである。 情報処理装置の再生処理について説明するフローチャートである。

＜情報処理装置の外観＞
図１は、本技術の一実施形態に係る情報処理装置の外観を示す図である。

情報処理装置１には十字ボタンなどの各種のボタンが設けられたコントローラ２が接続される。ユーザはコントローラ２を用いて情報処理装置１を操作する。

情報処理装置１には、HDMI(High Definition Multimedia Interface)ケーブルなどのケーブル３を介して、LCD(Liquid Crystal Display)などのディスプレイを有する表示装置４が接続される。情報処理装置１から出力されたデータに基づいて、各種の画面が表示装置４のディスプレイに表示される。

情報処理装置１には、デジタルカメラやカメラ機能付きの携帯電話機などの携帯端末を用いて撮影された画像を編集するソフトウェアである画像編集ソフトウェアが用意される。携帯端末から情報処理装置１に対しては、メモリカードやUSB(Universal Serial Bus)メモリなどの記録媒体を介して、または、情報処理装置１と携帯端末の間で行われる有線や無線の通信を介して、画像が取り込まれる。

情報処理装置１においては、動画や、複数の静止画から構成され、複数の静止画をスライドショー再生するコンテンツなどの画像を対象として編集が行われる。

情報処理装置１による画像の編集は、画像データ自体を加工せずに、編集効果の内容を表すアクションタグの情報を含む編集データをユーザの選択に応じて生成し、画像データと対応付けて管理することによって行われる。例えば編集対象になった画像毎に編集データが生成され、１つの編集データに、ユーザにより選択され、対象となった画像に対して設定されたそれぞれのアクションタグの情報が記録される。後述するように、アクションタグの情報には、ユーザにより選択された編集効果の内容を表す情報と、編集効果を適用する区間である編集区間を表す情報が含まれる。

編集済みの画像の再生時、編集データが読み出され、編集データに含まれるアクションタグの情報により表される編集効果をリアルタイムで適用しながら画像の再生が行われる。

＜編集画面の表示例＞
［編集メニュー］
図２は、画像編集ソフトウェアによって表示装置４のディスプレイに表示される編集画面の例を示す図である。図２の編集画面は、例えば、画像編集ソフトウェアが起動し、編集対象とする画像が選択されたときに表示される。

編集画面の左側には編集メニュー１１が表示される。編集メニュー１１は、縦方向に並ぶアイコン３１乃至３５、領域４１、領域４２から構成される。

アイコン３１は、編集対象画像の再生を表し、アイコン３２は、マルチアクションタグの記録を表す。アイコン３３は、字幕アクションタグの記録を表し、アイコン３４は、特殊再生アクションタグの記録を表す。アイコン３５は、効果音アクションタグの記録を表す。図２の編集メニュー１１からは、アクションタグの編集を選択することも可能とされる。

マルチアクションタグは、複数の編集効果の組み合わせを指定するアクションタグである。字幕アクションタグは、編集対象画像に字幕を挿入することを指定するアクションタグである。特殊再生アクションタグは、リピート再生、スロー再生などの、編集対象画像の特殊再生を指定するアクションタグである。効果音アクションタグは、編集対象画像の表示に併せて出力する効果音を指定するアクションタグである。

図２の例においては、カーソル２１によって選択されているアイコン３１が他のアイコンより若干大きく表示されている。アイコン３１の右側の領域４１には機能名が表示され、領域４１の下の領域４２には操作の説明が表示される。アイコン３１が選択されている状態でコントローラ２の決定ボタンが押されたとき、編集対象画像の再生が開始される。

編集メニュー１１の右側には、編集対象画像の表示領域である画像表示領域１２が形成される。編集対象画像の再生が開始されたとき、画像表示領域１２には、編集対象画像を構成する各フレームが表示される。

編集画面の下方には、編集対象画像の再生区間を表すタイムラインの表示領域であるタイムライン領域１３が形成される。タイムラインはバー５１と現在の再生位置を表すポインタ５２から構成される。

図２の例においては編集対象画像の再生が開始されていないから、ポインタ５２は編集対象画像の先頭の位置を示している。タイムラインの左側には再生位置を表す「0:00:00」が表示され、右側には、先頭の時刻である「0:00:00」を基準とした終了時刻（編集対象画像の再生時間）を表す「0:00:07」が表示されている。

タイムライン領域１３の下のメッセージ領域１４には操作に関する各種のメッセージが表示される。

ボタン説明領域１５には、コントローラ２のボタンに割り当てられた操作に関する情報が表示される。図２の例においては、編集画像再生、カーソル移動、決定、戻るの各操作がコントローラ２の所定のボタンに割り当てられている。

編集画像再生は、編集対象画像の再生を開始させるときに用いられる操作である。

カーソル移動は、カーソル２１によって選択される項目を切り換えるときに用いられる操作である。カーソル移動には例えばコントローラ２の十字ボタンが割り当てられる。図２の編集画面において十字ボタンの上ボタンが１回押されたとき、編集メニュー１１を構成するアイコン全体が下方向にずれ、編集メニュー１１の状態は、それまで選択されていたアイコンの１つ上のアイコンがカーソル２１によって選択された状態になる。一方、下ボタンが１回押されたとき、編集メニュー１１を構成するアイコン全体が上方向にずれ、編集メニュー１１の状態は、それまで選択されていたアイコンの１つ下のアイコンがカーソル２１によって選択された状態になる。

図３は、図２の状態でコントローラ２の下ボタンが１回押されたときの編集画面の例を示す図である。図３の編集画面においてはマルチアクションタグの記録を表すアイコン３２がカーソル２１によって選択されている。アイコン３２が選択されることに応じて、領域４１と領域４２の表示も切り換えられる。図３のアイコン３５の下に表示されるアイコン３６が、アクションタグの編集を表すアイコンである。

決定は、カーソル２１によって選択されている項目を決定するときに用いられる操作である。戻るは、直前の画面表示に戻るときに用いられる操作である。

ユーザは、編集メニュー１１から、編集対象画像の再生、マルチアクションタグの記録、字幕アクションタグの記録、特殊再生アクションタグの記録、効果音アクションタグの記録、アクションタグの編集のうちのいずれかの機能を選択することができる。

［マルチアクションタグの記録］
図４は、図３の状態で決定ボタンが押されたときに表示される編集画面の例を示す図である。図２、図３の説明と重複する説明については適宜省略する。

編集メニュー１１（図２、図３）が表示されていた位置には、アクションタグの設定メニュー６１が表示される。設定メニュー６１には、アイコン８１乃至８４が縦方向に並べて表示される。

アイコン８１は、リピート演出を表す。リピート演出は、対象の区間を繰り返して２回再生する演出である。１回目の再生は通常の速度で行われ、２回目の再生は、通常の速度より遅い速度で行われる（スロー再生が行われる）。また、１回目の再生が終わり、２回目の再生を開始する前に、ビデオテープを巻き戻すような効果音が出力される。すなわち、リピート演出は、１回目の再生を通常の速度で行い、２回目の再生をスロー再生で行う繰り返し再生の編集効果と、２回目の再生を開始する前に効果音を付ける編集効果の２つの編集効果を組み合わせて適用する演出である。

アイコン８２は、スロー演出（寄り）を表す。スロー演出（寄り）は、対象の区間をスロー再生しながら、フレームの中心に向かってズームイン表示を行う演出である。スロー演出（寄り）は、スロー再生の編集効果と、ズームインの編集効果の２つの編集効果を組み合わせて適用する演出である。

アイコン８３は、スロー演出（引き）を表す。スロー演出（引き）は、対象の区間をスロー再生しながら、フレームの中心からズームアウト表示を行う演出である。スロー演出（引き）は、スロー再生の編集効果と、ズームアウトの編集効果の２つの編集効果を組み合わせて適用する演出である。

アイコン８４は、加速演出を表す。加速検出は、対象の区間を早送り再生し、かつ、早送り再生中に、加速していることを表す効果音を出力する演出である。加速演出は、早送り再生の編集効果と、効果音を出力する編集効果の２つの編集効果を組み合わせて適用する演出である。

リピート演出、スロー演出（寄り）、スロー演出（引き）、加速演出の他に、設定メニュー６１からは、無音演出を選択することも可能とされる。無音演出は、対象の再生をスロー再生し、かつ、スロー再生中に、消音する演出である。無音演出は、スロー再生の編集効果と、消音の編集効果の２つの編集効果を組み合わせて適用する演出である。

図４の例においては、リピート演出がカーソル７１によって選択され、アイコン８１が他のアイコンより若干大きく表示されている。アイコン８１の右隣には、リピート演出を適用する区間の長さを表すアイコン８５が表示されている。

「１」の数字を含むアイコン８５は、編集効果が適用される時間である効果時間が１秒であることを表す。ユーザは、コントローラ２の右ボタンを１回押すことによってカーソル７１を移動させてアイコン８５を選択した状態とし、その状態で上ボタンまたは下ボタンを押すことによって、リピート演出の効果時間を選択することができる。

図５は、アイコン８５の表示の切り替えの例を示す図である。「１」の数字を含むアイコン８５が表示されている状態で下ボタンを１回押したとき、矢印Ａ１の先に示すように、アイコン８５は「５」の数字を含むアイコンに切り替わる。「５」の数字を含むアイコン８５は、効果時間が５秒であることを表す。

また、「５」の数字を含むアイコン８５が表示されている状態で下ボタンを１回押したとき、矢印Ａ２の先に示すように、アイコン８５は「１０」の数字を含むアイコンに切り替わる。「１０」の数字を含むアイコン８５は、効果時間が１０秒であることを表す。

効果時間が１０秒であることを表すアイコン８５が表示されている状態で上ボタンを１回押したとき、矢印Ａ３の先に示すように、アイコン８５は効果時間が５秒であることを表すアイコンに戻る。また、効果時間が５秒であることを表すアイコン８５が表示されている状態で上ボタンを１回押したとき、矢印Ａ４の先に示すように、アイコン８５は効果時間が１秒であることを表すアイコンに戻る。

図４の説明に戻り、アイコン８５の下には、選択中のアクションタグが、編集効果の種類がリピート演出、効果時間が１秒であるマルチアクションタグであることの説明が表示されている。

ボタン説明領域１５には、カーソル移動、決定、戻るの各操作がコントローラ２の所定のボタンに割り当てられていることを表す情報が表示される。決定に割り当てられたボタンである決定ボタンが１回押されたとき、設定メニュー６１に表示されている内容が確定され、編集対象画像の再生が開始される。

図６は、図４の状態で決定ボタンが押されたときの編集画面の例を示す図である。

図６の編集画面のタイムライン領域１３には、現在の再生位置が先頭から１秒後の位置であることを示すタイムラインが表示されている。タイムラインの左側には「0:00:01」が表示され、タイムラインを構成するバー５１全体のうち、再生済みの区間と再生が行われていない区間はそれぞれ異なる色で表示されている。図６の編集画面は、編集対象画像の再生が開始されてから１秒後の表示を示している。

編集対象画像の再生が開始されたとき、編集画面の状態は、設定メニュー６１を用いて内容を選択したマルチアクションタグの記録位置を指定する状態になる。情報処理装置１においては、編集効果の内容の選択が編集対象画像の再生開始前に行われ、編集効果を適用する区間を指定することが、編集対象画像の再生中に行われることになる。

図６の編集画面には、設定メニュー６１（図４）が表示されていた位置に吹き出し１０１が表示される。吹き出し１０１の中に、設定メニュー６１で選択したマルチアクションタグの内容がアイコン８１とともに表示され、その下に、アクションタグの記録の操作が所定のボタンに割り当てられていることの説明が表示される。

ボタン説明領域１５には、コマ戻し／送り、再生操作、一時停止、戻る、編集メニュー、タグを記録の各操作がコントローラ２の所定のボタンに割り当てられていることを表す情報が表示される。

コマ戻し／送りは、編集対象画像の再生をコマ戻し再生またはコマ送り再生に切り換えるときに用いられる操作である。再生操作は、再生位置を移動させるときに用いられる操作である。一時停止は、編集対象画像の再生を一時停止するときに用いられる操作である。戻るは、直前の画面表示に戻るときに用いられる操作である。編集メニューは、編集メニュー１１が表示される図３の編集画面に戻るときに用いられる操作である。

タグを記録は、現在の再生位置にアクションタグを記録するときに用いられる操作である。図６の例の場合、タグを記録の操作に割り当てられたボタンであるタグ記録ボタンが１回押されたとき、そのときの再生位置にマルチアクションタグが記録されることになる。

図７は、図６の状態においてタグ記録ボタンが１回押されたときの編集画面の例を示す図である。

タグ記録ボタンが１回押されたとき、そのときの再生位置であるタイムラインの先頭から１秒後の位置には、マルチアクションタグの記録位置を示すアイコン１１１が表示される。また、情報処理装置１においては、編集対象画像の先頭から１秒後の位置に、編集効果の種類をリピート演出、効果時間を１秒とするマルチアクションタグが設定されたことを表す情報が生成され、編集データに記録される。

効果時間として１秒が選択されているから、リピート演出が適用される区間は、先頭から１秒後の位置を開始位置とし、２秒後の位置を終了位置とする区間となる。タイムライン上においては、編集区間の開始位置にアクションタグの記録位置を示すアイコンが配置されることになる。

アイコン１１１として、編集メニュー１１に表示されるアイコン３２（図２）と同じ画像が用いられる。また、タイムラインを構成するバー５１全体のうち、編集区間は、再生済みの区間と再生が行われていない区間の色と異なる色で表示される。

タグ記録ボタンが押され、マルチアクションタグを記録した後も、編集対象画像の再生は続けられる。ユーザは、タグ記録ボタンを続けて押すことによって、アイコン１１１の表示位置より後の位置にもマルチアクションタグを記録することができる。

このように、ユーザは、編集対象画像の再生中にタグ記録ボタンを押すといった簡単な操作で、編集対象画像の再生開始前に内容を選択していたマルチアクションタグを設定することができる。マルチアクションタグは２つの編集効果の組み合わせを示すものであるから、ユーザは、編集対象画像に含まれるシーンを、簡単に、より効果的に演出することが可能となる。

［単体のアクションタグの記録］
字幕アクションタグ、特殊再生アクションタグ、および効果音アクションタグである単体のアクションタグの記録も、マルチアクションタグの記録に用いられるインタフェースと同様のインタフェースを用いて行われる。

図８は、単体のアクションタグの記録が編集メニュー１１から選択されたときに表示される編集画面の例を示す図である。

ここでは、単体のアクションタグとして効果音アクションタグを記録する場合について説明するが、他の単体のアクションタグの記録も同様の操作によって行われる。図２の編集メニュー１１からアイコン３５が選択された状態で決定ボタンが押されたとき、図８の編集画面が表示される。

編集メニュー１１が表示されていた位置には設定メニュー６１が表示される。設定メニュー６１には、アイコン１２１乃至１２４が縦方向に並べて表示される。

アイコン１２１は、笑い声の効果音を表し、アイコン１２２は、拍手の音の効果音を表す。アイコン１２３は、ゲームで使われる音の効果音を表し、アイコン１２４は、楽器の音の効果音を表す。

図８の例においては、笑い声の効果音がカーソル７１によって選択され、アイコン１２１が他のアイコンより若干大きく表示されている。アイコン１２１の右隣には効果時間を表すアイコン１２５が表示されている。図５を参照して説明した操作と同様に、上ボタンまたは下ボタンを押すことによって、ユーザはアイコン１２５の表示を切り替え、効果時間を選択することができる。

アイコン１２５の下には、選択中のアクションタグが、人・自然系に分類される笑い声の効果音アクションタグであることの説明が表示されている。

このように、ユーザは、設定メニュー６１を用いることによって、単体のアクションタグとして編集対象画像に適用する編集効果の種類と効果時間を選択することができる。

設定メニュー６１を用いて効果音アクションタグの設定を行い、決定ボタンを押したとき、編集対象画像の再生が開始される。ユーザは、図７を参照して説明したように、編集対象画像の再生中にタグ記録ボタンを押すことによって、そのときの再生位置にアクションタグを記録することができる。

なお、タイムライン領域１３のタイムライン上には、マルチアクションタグの記録位置を表すアイコン１３１が表示されている。ユーザは、編集対象画像を繰り返し再生することによって、マルチアクションタグを既に記録した画像に対してさらに単体のアクションタグを記録することができる。

図９は、効果音アクションタグの記録が指示されてから所定の時間が経過した後の編集画面の例を示す図である。

図９の例においては、アイコン１３１が配置されているマルチアクションタグの記録位置より前の位置に効果音アクションタグが記録され、効果音アクションタグの記録位置を表すアイコン１４１がタイムライン上に表示されている。アイコン１４１として、編集メニュー１１に表示されるアイコン３５（図２）と同じ画像が用いられる。アクションタグの種類毎に異なるアイコンがタイムライン上に表示されるため、ユーザは、各位置に記録したアクションタグの種類を容易に認識することができる。

［アクションタグの編集］
上述したように、図２の編集メニュー１１からは、アクションタグの編集を選択することが可能とされる。

図１０は、図３の編集メニュー１１においてアイコン３６が選択され、決定ボタンが押されることによってアクションタグの編集が選択されたときの編集画面の例を示す図である。編集メニュー１１が表示されていた位置には、アクションタグの編集を行うための操作に関する説明を含むウインドウ１５１が表示される。

タイムライン領域１３のタイムライン上には、アクションタグの記録位置を示すアイコン１６１乃至１６７が表示されている。アイコン１６１はマルチアクションタグの記録位置を示し、アイコン１６２は字幕アクションタグの記録位置を示す。図１０の例においては、アイコン１６２が選択された状態になっており、他のアイコンより若干大きく表示されている。

アイコン１６３乃至１６６は効果音アクションタグの記録位置を示し、アイコン１６７は特殊再生アクションタグの記録位置を示す。例えば、タイムラインを構成するバー５１のうち、マルチアクションタグの記録位置を開始位置とする編集区間と、字幕アクションタグの記録位置を開始位置とする編集区間と、特殊再生アクションタグの記録位置を開始位置とする編集区間とがそれぞれ異なる色で表示されるようにしてもよい。

ユーザは、コントローラ２の左ボタンまたは右ボタンを押すことによって、選択するアイコンを切り換えることができる。また、ユーザは、決定ボタンを押してアイコンの選択を確定させ、さらに削除ボタンを押すことによって、選択したアイコンのアクションタグを削除することができる。アイコンが選択され、決定ボタンが押されたとき、アクションタグの削除や内容の変更などの各種の操作がそれぞれコントローラ２の所定のボタンに割り当てられる。

また、所定のアクションタグが選択され、アクションタグの内容の変更が指示された場合、編集画面の表示が切り替わり、例えばウインドウ１５１に代えて設定メニューが表示される。

設定メニューには、アクションタグに設定する編集効果の種類や効果時間の変更を行うときに選択されるアイコンが表示される。ユーザは、設定メニュー上に表示されるカーソルを移動させるなどして所定のアイコンを選択することによって、アクションタグに設定する編集効果の種類を変更したり、効果時間を変更したりすることができる。

以上のようなインタフェースを用いてアクションタグの記録等を行う情報処理装置１の動作についてはフローチャートを参照して後述する。

＜情報処理装置の構成＞
図１１は、情報処理装置１のハードウェアの構成例を示すブロック図である。

CPU(Central Processing Unit)２０１、ROM(Read Only Memory)２０２、RAM(Random Access Memory)２０３は、バス２０４により相互に接続される。バス２０４には、さらに、入出力インタフェース２０５が接続される。入出力インタフェース２０５には、入力部２０６、出力部２０７、記憶部２０８、通信部２０９、およびドライブ２１０が接続される。

入力部２０６は、コントローラ２からの信号を受信し、CPU２０１に出力する。出力部２０７は、画像編集ソフトウェアの画面のデータをケーブル３を介して表示装置４に出力し、表示装置４のディスプレイの表示を制御する。記憶部２０８は、ハードディスクやフラッシュメモリなどよりなり、情報処理装置１に取り込まれた画像ファイルを記憶する。記憶部２０８に記憶された画像ファイルは画像編集ソフトウェアにより適宜読み出される。

通信部２０９は、ネットワークを介して接続された装置や、有線または無線の通信を介して接続された携帯端末との間でデータの送受信を行う。通信部２０９は、外部の機器から送信されてきた画像ファイルを記憶部２０８に出力し、記憶させる。ドライブ２１０は、情報処理装置１に装着された光ディスクやUSBメモリなどのリムーバブルメディア２１１を駆動させ、リムーバブルメディア２１１に記憶された画像ファイルを読み出す。ドライブ２１０は、リムーバブルメディア２１１から読み出した画像ファイルを記憶部２０８に出力し、記憶させる。

図１２は、情報処理装置１の機能構成例を示すブロック図である。図１２に示す機能部のうちの少なくとも一部は、図１１のCPU２０１により画像編集ソフトウェアが実行されることによって実現される。

画像記憶部２３１は、動画や、静止画のスライドショーのコンテンツなどの画像を記憶する。画像記憶部２３１に記憶されている画像には、適宜、音声データが付加される。

編集データ記憶部２３２は、編集データ生成部２３７により生成された編集データを記憶する。編集データにはアクションタグの情報が含まれる。編集データ記憶部２３２に記憶されている編集データは、編集済みの画像の再生時に制御部２３６により読み出される。このように、編集データは、編集が行われた画像のデータと別の記憶部に記憶され、管理される。

効果音記憶部２３３は、効果音のデータを記憶する。画像記憶部２３１、編集データ記憶部２３２、および効果音記憶部２３３は図１１の記憶部２０８に形成される。

再生部２３４は、画像記憶部２３１に記憶されている画像を読み出してデコードし、デコードによって得られた画像データを制御部２３６に出力する。制御部２３６に出力される画像データは、画像出力部２３８が表示装置４に出力可能な形式に変換されたデータである。再生部２３４による画像の再生は、編集画面が表示されている場合において編集対象画像の再生が指示されたとき、または、編集済みの画像の再生が指示されたときに行われる。画像に音声データが付加されている場合、再生部２３４は、音声データをもデコードし、デコードによって得られた音声データを制御部２３６に出力する。

操作検出部２３５は、入力部２０６から供給された信号に基づいてコントローラ２に対するユーザの操作を検出し、ユーザの操作の内容を表す信号を制御部２３６に出力する。

制御部２３６は、上述した編集画面の表示、編集画面に対するユーザの操作に応じた編集データの生成等の、情報処理装置１の全体の動作を制御する。

編集データ生成部２３７は、制御部２３６の制御に従って、編集対象画像毎に編集データを生成する。

図１３は、編集データに含まれる情報の例を示す図である。

図１３に示すように、編集データには、画像ID、アクションタグの種類、編集効果の種類、効果時間、および記録位置のそれぞれの情報が記録される。例えば画像IDを除く、アクションタグの種類、編集効果の種類、効果時間、および記録位置の情報は、アクションタグ毎に編集データに記録される。

画像IDは、編集対象画像の識別情報である。アクションタグの種類の情報は、マルチアクションタグ、字幕アクションタグ、特殊再生アクションタグ、効果音アクションタグのうちのいずれのアクションタグであるのかを表す情報である。編集効果の種類の情報は、設定メニュー６１を用いて選択された編集効果の種類を表す情報である。効果時間の情報は、設定メニュー６１を用いて選択された編集効果の時間を表す情報である。記録位置の情報は、アクションタグの記録が指示された編集対象画像のタイムライン上の位置を表す情報である。効果時間の情報と記録位置の情報により、編集区間の位置と長さが表される。

図１２の編集データ生成部２３７は、このような情報を含む編集データを生成し、編集データ記憶部２３２に記憶させる。

画像出力部２３８は、制御部２３６から供給された編集画面のデータや画像を出力部２０７を制御して表示装置４に出力し、表示させる。

音声出力部２３９は、制御部２３６から供給された音声データや効果音のデータを出力部２０７を制御して表示装置４に出力し、表示装置４に設けられるスピーカから出力させる。

図１４は、図１２の制御部２３６の構成例を示すブロック図である。制御部２３６は、編集データ管理部２５１と出力制御部２５２から構成される。

編集データ管理部２５１は、画像の編集時、編集画面に対するユーザの操作の内容を表す情報を編集データ生成部２３７に出力し、上述したような編集データの生成を行わせる。

また、編集データ管理部２５１は、編集データが生成された後、編集データ記憶部２３２に記憶されている編集データを管理する。例えば、アクションタグの編集として、所定のアクションタグの削除が指示された場合、編集データ管理部２５１は、削除が指示されたアクションタグの情報を編集データから削除する。また、所定のアクションタグの内容の変更が指示された場合、編集データ管理部２５１は、変更後の内容が記録された編集データを編集データ記憶部２３２に記憶させる。

出力制御部２５２は、編集画面のデータを画像出力部２３８に出力し、表示装置４に編集画面を表示させる。

また、出力制御部２５２は、編集対象画像の再生を制御する。例えば、出力制御部２５２は、画像の編集時、ユーザにより再生が指示されることに応じて、編集対象画像の再生を再生部２３４に行わせ、再生部２３４から供給された各フレームのデータを画像出力部２３８に出力して、編集画面の画像表示領域１２に表示させる。

出力制御部２５２は、編集済みの画像の再生時、再生が指示された画像の再生を再生部２３４に行わせるとともに、再生が指示された画像のIDを含む編集データを編集データ記憶部２３２から読み出す。また、出力制御部２５２は、画像のタイムライン上のどの位置にどのような内容の編集効果が設定されているのかを、編集データ記憶部２３２から読み出した編集データに記録されている各アクションタグの情報に基づいて特定する。

出力制御部２５２は、現在の再生位置が編集区間内の位置である場合、再生部２３４から供給された画像に編集効果を適用し、編集効果が適用された画像のデータを画像出力部２３８に出力して表示装置４に表示させる。

また、出力制御部２５２は、現在の再生位置に効果音を用いた編集効果が設定されている場合、効果音のデータを効果音記憶部２３３から読み出して再生する。出力制御部２５２は、効果音のデータを再生して得られた音声データを音声出力部２３９に出力し、編集効果が施された画像の表示に合わせて表示装置４のスピーカから出力させる。

＜情報処理装置の動作＞
ここで、以上のような構成を有する情報処理装置１の動作について説明する。

はじめに、図１５のフローチャートを参照して情報処理装置１の編集処理について説明する。図１５の処理は、例えば図４に示す編集画面においてアクションタグに関する選択が行われ、編集対象画像の再生が指示されたときに開始される。

ステップＳ１において、再生部２３４は編集対象画像を再生する。再生が行われた編集対象画像の画像データは制御部２３６の出力制御部２５２に供給され、編集画面の画像表示領域１２に表示される。

ステップＳ２において、編集データ管理部２５１は、アクションタグの記録が指示されたか否かを判定する。

アクションタグの記録が指示されたとステップＳ２において判定された場合、ステップＳ３において、編集データ生成部２３７は、アクションタグの情報を記録した編集データを生成する。その後、ステップＳ１に戻り、編集対象画像の再生が続けられる。

一方、ステップＳ２においてアクションタグの記録が指示されていないと判定された場合、ステップＳ４において、出力制御部２５２は、編集対象画像を最後まで再生したか否かを判定する。

編集対象画像を最後まで再生していないとステップＳ４において判定した場合、出力制御部２５２は、ステップＳ１に戻り、編集対象画像の再生を続ける。

ステップＳ４において編集対象画像を最後まで再生したと判定された場合、ステップＳ５において、編集データ生成部２３７は、アクションタグの情報が記録された編集データを編集データ記憶部２３２に記憶させ、処理を終了させる。

次に、図１６のフローチャートを参照して、編集済みの画像を再生する情報処理装置１の処理について説明する。

図１６の処理は、編集済みの画像の再生が指示されたときに開始される。編集済みの画像の再生は、例えば編集画面においてアクションタグをさらに記録するとき、または、編集済みの画像のリストから所定の画像が選択された後に行われる。

ステップＳ２１において、制御部２３６の出力制御部２５２は、再生が指示された画像のIDを含む編集データを編集データ記憶部２３２から読み出す。

ステップＳ２２において、再生部２３４は、編集済みの画像の再生を開始する。再生が行われることによって得られた各フレームの画像データは出力制御部２５２に供給される。

ステップＳ２３において、出力制御部２５２は、次のフレームがあるか否かを判定する。

次のフレームがあるとステップＳ２３において判定した場合、ステップＳ２４において、出力制御部２５２は、次のフレームが編集区間に含まれるか否かを、編集データ記憶部２３２から読み出した編集データに基づいて判定する。ここでの判定は、編集データに含まれるそれぞれのアクションタグの効果時間の情報と記録位置の情報に基づいて編集区間を特定し、特定した編集区間に次のフレームが含まれるか否かを判定するようにして行われる。

次のフレームが編集区間に含まれるとステップＳ２４において判定した場合、ステップＳ２５において、出力制御部２５２は、次のフレームに効果音を付けるか否かを判定する。例えば、効果音を用いたマルチアクションタグや効果音アクションタグの情報が編集データに記録されている場合、編集データに含まれる効果時間の情報と記録位置の情報により、効果音を付けるタイミングが特定される。また、編集データに含まれる編集効果の種類の情報により、笑い声や拍手等の、効果音の種類が特定される。

次のフレームに効果音を付けるとステップＳ２５において判定した場合、ステップＳ２６において、出力制御部２５２は、効果音のデータを効果音記憶部２３３から読み出して再生する。再生することによって得られた効果音のデータは音声出力部２３９に出力され、次のフレームの出力に併せて表示装置４のスピーカから出力される。次のフレームに効果音を付けないとステップＳ２５において判定された場合、ステップＳ２６の処理はスキップされる。

ステップＳ２７において、出力制御部２５２は、次のフレームを対象として特殊再生を行うか否かを判定する。例えば、スロー再生等の特殊再生の編集効果を用いたマルチアクションタグの情報が編集データに記録されている場合、編集データに含まれる効果時間の情報と記録位置の情報により、特殊再生の編集効果を適用するタイミングが特定される。また、編集データに含まれる編集効果の種類の情報により、組み合わせて適用する特殊再生の編集効果の種類が特定される。

次のフレームを対象として特殊再生を行うとステップＳ２７において判定した場合、ステップＳ２８において、出力制御部２５２は、再生部２３４により再生された次のフレームの画像データに特殊再生の編集効果を適用する。特殊再生の編集効果が適用された画像データは画像出力部２３８を介して表示装置４に供給され、画像の表示に用いられる。

一方、次のフレームを対象として特殊再生を行わないとステップＳ２７において判定した場合、ステップＳ２９において、出力制御部２５２は次のフレームの通常再生を行う。再生部２３４により再生された画像はそのまま画像出力部２３８を介して表示装置４に供給され、画像の表示に用いられる。

ステップＳ２８において特殊再生が行われた後、ステップＳ２９において通常再生が行われた後、または、ステップＳ２４において、次のフレームが編集区間に含まれないと判定された場合、ステップＳ２３に戻り、以上の処理が繰り返し行われる。

最後のフレームまで再生が終わったことから、次のフレームがないとステップＳ２３において判定された場合、処理は終了される。

以上の処理により、ユーザは、複数の編集効果の組み合わせを指定するマルチアクションタグを用いて、簡単に、より効果的な演出を画像に施すことができる。また、ユーザは、編集対象画像の種類が動画であっても静止画のスライドショーコンテンツであっても、同じインタフェースを用いて編集を行うことができる。

＜変形例＞
マルチアクションタグを用いて組み合わせて適用することができる編集効果の数が２つであるものとしたが、３つ以上の編集効果の組み合わせをマルチアクションタグによって指定することができるようにしてもよい。

また、画像に適用される編集効果の組み合わせをマルチアクションタグによって指定することができるものとしたが、音声データに適用される編集効果の組み合わせをマルチアクションタグによって指定することができるようにしてもよい。

上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、汎用のパーソナルコンピュータなどにインストールされる。

インストールされるプログラムは、光ディスク（CD-ROM(Compact Disc-Read Only Memory)，DVD(Digital Versatile Disc)等）や半導体メモリなどよりなる図１１に示されるリムーバブルメディア２１１に記録して提供される。また、ローカルエリアネットワーク、インターネット、デジタル放送といった、有線または無線の伝送媒体を介して提供されるようにしてもよい。プログラムは、ROM２０２や記憶部２０８に、あらかじめインストールしておくことができる。

なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。

本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。

例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。

また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。

さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。

１ 情報処理装置， ２ コントローラ， ３ ケーブル， ４ 表示装置， ２３１ 画像記憶部， ２３２ 編集データ記憶部， ２３３ 効果音記憶部， ２３４ 再生部， ２３５ 操作検出部， ２３６ 制御部， ２３７ 編集データ生成部， ２３８ 画像出力部， ２３９ 音声出力部， ２５１ 編集データ管理部， ２５２ 出力制御部

Claims (11)

1. 編集の対象となる画像の再生が開始される前に、編集効果が適用される時間と前記編集効果の種類の選択画面を表示させる表示制御部と、
   前記画像の再生を制御する制御部と、
   前記画像の再生区間のうち、前記画像の再生中に指示があったときの再生位置から、前記選択画面を用いて複数種類の時間の中から予め選択された所定の時間だけ後の位置までの区間を編集区間とし、前記編集区間の前記画像に組み合わせて適用する、前記選択画面を用いて選択された複数の前記編集効果を表す情報と前記編集区間を表す情報を含む編集情報を、前記指示がある毎に生成する生成部と
   を備える情報処理装置。
2. 前記制御部は、前記編集情報が生成された前記画像を再生する場合、前記編集情報に基づいて、複数の前記編集効果を組み合わせて前記編集区間の前記画像に適用する
   請求項１に記載の情報処理装置。
3. 前記生成部は、前記編集区間の前記画像に適用する前記編集効果として１つの前記編集効果が選択された場合、１つの前記編集効果を表す情報と前記編集区間を表す情報を含む前記編集情報を生成する
   請求項１または２に記載の情報処理装置。
4. 前記表示制御部は、前記編集効果が適用される区間を表すアイコンを前記編集区間の開始位置に配置したタイムラインを表示させる
   請求項１乃至３のいずれかに記載の情報処理装置。
5. 前記表示制御部は、複数の前記編集効果が適用される区間を表すアイコンと、１つの前記編集効果が適用される区間を表すアイコンとしてそれぞれ異なるアイコンを表示させる
   請求項４に記載の情報処理装置。
6. 前記表示制御部は、複数の前記編集効果が適用される前記編集区間に対応する前記タイムラインの区間と、１つの前記編集効果が適用される前記編集区間に対応する前記タイムラインの区間を異なる色で表示させる
   請求項４または５に記載の情報処理装置。
7. 前記編集情報を前記画像とは別に記録させて管理する管理部をさらに備える
   請求項１乃至６のいずれかに記載の情報処理装置。
8. 前記管理部は、ユーザにより選択された前記編集効果の情報を前記編集情報から削除する
   請求項７に記載の情報処理装置。
9. 前記管理部は、ユーザにより選択された前記編集効果の内容を変更し、変更後の内容を表す前記編集効果の情報を前記編集情報に記録する
   請求項７または８に記載の情報処理装置。
10. 編集の対象となる画像の再生が開始される前に、編集効果が適用される時間と前記編集効果の種類の選択画面を表示させ、
    前記画像を再生し、
    前記画像の再生区間のうち、前記画像の再生中に指示があったときの再生位置から、前記選択画面を用いて複数種類の時間の中から予め選択された所定の時間だけ後の位置までの区間を編集区間とし、前記編集区間の前記画像に組み合わせて適用する、前記選択画面を用いて選択された複数の前記編集効果を表す情報と前記編集区間を表す情報を含む編集情報を、前記指示がある毎に生成する
    ステップを含む情報処理方法。
11. 編集の対象となる画像の再生が開始される前に、編集効果が適用される時間と前記編集効果の種類の選択画面を表示させ、
    前記画像を再生し、
    前記画像の再生区間のうち、前記画像の再生中に指示があったときの再生位置から、前記選択画面を用いて複数種類の時間の中から予め選択された所定の時間だけ後の位置までの区間を編集区間とし、前記編集区間の前記画像に組み合わせて適用する、前記選択画面を用いて選択された複数の前記編集効果を表す情報と前記編集区間を表す情報を含む編集情報を、前記指示がある毎に生成する
    ステップを含む処理をコンピュータに実行させるプログラム。

Images