JP6454238B2 - 映像編集装置、映像編集方法及び映像編集プログラム - Google Patents

Description

本発明は、複数の撮像装置によって撮像した映像の編集を行う映像編集装置、映像編集方法及び映像編集プログラムに関する。

従来から、被写体を取り囲むように多視点カメラを配置し、撮影した映像をカメラの並びに沿って切り替えることで、動きのある被写体をあたかもカメラが回り込んだような映像（以下、回り込み映像という）を出力する映像編集方法が知られている（例えば、非特許文献１参照）。本システムでは、被写体が、適正に画面中央にくるように補正され、回り込み映像を出力する。

図１１は、従来の多視点カメラシステムの構成を示す図である。図１１に示すように、被写体３０１とオブジェクト３０７を撮影する視点１カメラ３０２〜視点５カメラ３０６が設けられている。５台の視点１カメラ３０２〜視点５カメラ３０６が出力する時刻同期された映像を映像編集装置によって編集することにより、回り込み映像等の出力映像を得ることができる。

図１２は、回り込み映像の一例を示す図である。図１２に示すように、５台の視点１カメラ３０２〜視点５カメラ３０６が出力する視点１カメラの映像４０１、視点２カメラの映像４０２、視点３カメラの映像４０３、視点１カメラの映像４０４、視点１カメラの映像４０５を時刻に基づいて順に切り替えることにより、被写体３０１をあたかもカメラが回り込んだような映像を得ることができる。

一方、映像の中の見たいところを見るため、パノラマ映像の一部を拡大して視聴するシステムが知られている（例えば、非特許文献２参照）。このシステムは、注目位置修正と拡大縮小による一連の映像処理を可能としている。

また、複数視点の映像の中から特徴となる複数の被写体などを自動認識して位置情報や大きさ情報を取得する技術が一般的にあることが知られている（例えば、非特許文献３参照）。

本発明では、編集者が注目させたい被写体を選ぶため、注目位置情報と拡縮パラメータ入力することで、注目させたい被写体を指定する。

「多視点ロボットカメラシステムを用いた映像表現手法」、池谷健佑他、ＮＨＫ、２０１２年映像情報メディア学会年次大会講演予稿集、Ｖｏｌ．２０１２ Ｐａｇｅ．２１−１ 「見たいところが自由に選べるインタラクティブ・パノラマ映像配信技術」、ビジネスコミュニケーション，Ｖｏｌ．４８，Ｎｏ．４，Ｐａｇｅ．４１−４３，（２０１１．０４．０１） 「選手領域の抽出と追跡によるサッカーの自由視点映像生成」、三功浩嗣他、映像情報メディア学会誌、Ｖｏｌ．６８，Ｎｏ．３，Ｐａｇｅ．１２５−１３４，２０１４

前述したように、非特許文献１に記載の技術においては、角度９０°に９台のカメラ設置を行い、多視点のカメラ映像を使うことで、広い範囲をフォローして記録もれがないことを目指し、被写体に位置を合わせ回り込み映像を出力するものである。多数のカメラ設置や映像ファイル作成できる環境では、被写体に位置を合わせ回り込み映像を出力することが容易である。

しかしながら、場所によってはカメラを多く設置できない場合や、汎用の編集装置の入力インタフェースも物理的な定数量があることを鑑み、少ない数のカメラによって回り込み映像をファイル出力を行う必要があるという課題がある（課題１という）。

また、少ない数のカメラによってある被写体に対し角度９０°に５台以下のカメラを配置した場合において、回り込み映像を出力した場合、各カメラと背景の距離の違いが大きいため、背景の動き変化や映像雑音が大きくなる。したがって、視聴者が被写体を見やすくなる映像処理が必要になるという課題がある（課題２という）。

また、撮影者と違う観点の表現を行いたい編集者が視聴者に見せたい箇所である対象オブジェクトを拡大して注目（視線）を持っていき回り込み連続性をもった１シーン映像生成をできない課題がある（課題３という）。すなわち、ある被写体に対し角度９０°に５台以下のカメラを配置した場合において、対象オブジェクトを拡大して回り込み映像を出力した場合、各カメラと他の背景の距離の違いが大きいため、他の背景の動き変化や映像雑音が大きくなる。したがって、視聴者が対象オブジェクトを見やすくなる映像処理が必要となる課題がある（課題３という）。

次に、前述した課題１と課題２について図面を参照して詳しく説明する。図１３は、従来の多視点カメラシステムの課題を示す説明図である。図１３に示すように、従来の多視点カメラシステムにあっては、表示枠５０１に、被写体３０１と背景であるオブジェクト３０７が表示されている場合に、視聴者が背景であるオブジェクト３０７が気になる場合があり視聴者の注意（視線）５０４が背景であるオブジェクト３０７に行く（図１３（ａ））。そして、回り込み映像を表示した場合、表示枠５０６には、動きが大きくなるオブジェクト３０７と動きの小さい被写体３０７が表示されることになる（図１３（ｂ））。このように、回り込み映像の表示が始まると動き変化や、映像雑音が大きい背景に視聴者の注意（視線）５０９が行きやすくなり、視聴者が見づらい再生になってしまうという課題がある。そのため視聴者が見やすくなる映像処理が必要となる。

次に、前述した課題１と課題３について詳しく説明する。少ない数のカメラの映像から回り込み映像ファイル出力した場合、図１３（ｂ）に示すように、表示枠５０６には、動きが大きくなるオブジェクト３０７と動きの小さい被写体３０７が表示されることになる。従来の多視点カメラシステムにおいて、所望の対象オブジェクトを拡大して回り込み連続性をもった１シーン映像生成をできない課題がある。他の背景の動き変化や映像雑音が大きいため、視聴者が見づらくなってしまうため、視聴者が見やすくなる映像処理が必要となる。

本発明は、このような事情に鑑みてなされたもので、多視点カメラシステムを使用して生成した回り込み映像を見やすくすることができる映像編集装置、映像編集方法及び映像編集プログラムを提供することを目的とする。

本発明の一態様は、被写体を取り囲むよう配置された多視点のカメラによって撮影された映像を前記カメラの並びに沿って切り替えることで、あたかも前記カメラが前記被写体を回り込んだときに得られる映像である回り込み映像を出力する映像編集装置であって、前記カメラで撮影した前記映像に映っている前記被写体を拡大することにより、前記映像に映っている背景部分を隠した映像を出力する被写体拡大映像出力手段と、前記被写体拡大映像出力手段から出力した前記映像を用いて、前記回り込み映像を生成して出力する回り込み映像生成手段とを備える映像編集装置である。

本発明の一態様は、被写体を取り囲むよう配置された多視点のカメラによって撮影された映像を前記カメラの並びに沿って切り替えることで、あたかも前記カメラが前記被写体を回り込んだときに得られる映像である回り込み映像を出力する映像編集装置であって、前記カメラで撮影した前記映像に映っている注目位置を拡大することにより、前記映像に映っている注目位置部分以外を隠した映像を出力する注目位置拡大映像出力手段と、前記注目位置拡大映像出力手段から出力した前記映像を用いて、前記回り込み映像を生成して出力する回り込み映像生成手段とを備える映像編集装置である。

本発明の一態様は、被写体を取り囲むよう配置された多視点のカメラによって撮影された映像を前記カメラの並びに沿って切り替えることで、あたかも前記カメラが前記被写体を回り込んだときに得られる映像である回り込み映像を出力する映像編集装置が行う映像編集方法であって、前記カメラで撮影した前記映像に映っている前記被写体を拡大することにより、前記映像に映っている背景部分を隠した映像を出力する被写体拡大映像出力ステップと、前記被写体拡大映像出力ステップにより出力した前記映像を用いて、前記回り込み映像を生成して出力する回り込み映像生成ステップとを有する映像編集方法である。

本発明の一態様は、被写体を取り囲むよう配置された多視点のカメラによって撮影された映像を前記カメラの並びに沿って切り替えることで、あたかも前記カメラが前記被写体を回り込んだときに得られる映像である回り込み映像を出力する映像編集装置が行う映像編集方法であって、前記カメラで撮影した前記映像に映っている注目位置を拡大することにより、前記映像に映っている注目位置部分以外を隠した映像を出力する注目位置拡大映像出力ステップと、前記注目位置拡大映像出力ステップにより出力した前記映像を用いて、前記回り込み映像を生成して出力する回り込み映像生成ステップとを有する映像編集方法である。

本発明の一態様は、コンピュータを、前記映像編集装置として機能させるための映像編集プログラムである。

本発明によれば、多視点カメラシステムを使用して生成した回り込み映像を視聴者が見やすいように編集することができるという効果が得られる。

本発明の第１実施形態の構成を示すブロック図である。 拡大映像を生成することにより、注目させたくない背景であるオブジェクトを隠す動作を示す説明図である。 図１に示す被写体拡縮映像生成部１０２の入出力を示す図である。 図１に示す被写体回り込み映像生成部１０３の入出力を示す図である。 連続映像コンテンツ生成部１０４が出力する全体映像を生成する動作を示す説明図である。 本発明の第２実施形態の構成を示すブロック図である。 拡大映像を生成することにより、注目させたい背景であるオブジェクトに視線を誘導する動作を示す説明図である。 図６に示す注目位置拡縮映像生成部２０２の入出力を示す図である。 図１に示す注目位置回り込み映像生成部２０３の入出力を示す図である 連続映像コンテンツ生成部２０４が出力する全体映像を生成する動作を示す説明図である。 従来の多視点カメラシステムの構成を示す図である。 回り込み映像の一例を示す図である。 従来の多視点カメラシステムの課題を示す説明図である。

＜第１実施形態＞
以下、図面を参照して、本発明の第１実施形態による映像編集装置を説明する。図１は同実施形態の構成を示すブロック図である。この図において、符号１０１は、被写体映像編集装置であり、コンピュータ装置によって構成する。符号１０２は、被写体を拡大または縮小した映像を生成して出力する被写体拡縮映像生成部である。符号１０３は、被写体の回り込み映像を生成して出力する被写体回り込み映像生成部である。符号１０４は、連続映像のコンテンツを生成して出力する連続映像コンテンツ生成部である。

被写体拡縮映像生成部１０２は、被写体を中心に時刻同期して撮影された複数の視点映像（時間０〜Ｔ秒）を入力する。入力する映像は、カメラで撮影した映像を直接入力してもよいし、カメラで撮影した映像を一度所定のフォーマットのファイル化したものでもよい。ここでは、４台の多視点カメラで撮影した映像を入力するものとする。また、被写体拡縮映像生成部１０２は、外部から拡縮パラメータｐを入力する。ただし、拡縮パラメータｐの入力は省略可能である。拡縮パラメータｐが省略された場合は、予め決められた拡縮パラメータｐを用いる。

被写体拡縮映像生成部１０２は、各視点映像（時間０〜Ｔ秒）と、拡縮パラメータｐから、初視点の拡大映像（時間０〜Ｔ／２秒）と終視点の拡大画面からの縮小映像（時間Ｔ／２〜Ｔ秒）を、連続映像コンテンツ生成部１０４に送り、各視点拡大画像（時刻Ｔ／２）の画像を被写体回り込み映像生成部１０３に送る。

被写体回り込み映像生成部１０３は、外部から時間パラメータＴｐを入力する。時間パラメータＴｐが省略された場合は、予め決められた時間パラメータＴｐを用いる。そして、被写体回り込み映像生成部１０３は、各視点拡大画像（時刻Ｔ／２）の画像と時間パラメータＴｐから、初視点から終視点の拡大画像の時間に依存した中間画像生成と、順序化して映像生成を行い、初視点から終視点までの拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）を連続映像コンテンツ生成部１０４に送る。

連続映像コンテンツ生成部１０４は、初視点の拡大映像（時間０〜Ｔ／２秒）と終視点の拡大画面からの縮小映像（時間Ｔ／２〜Ｔ秒）と初視点から終視点までの拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）から、出力映像コンテンツを生成して出力する。連続映像は、初視点の拡大映像（時間０〜Ｔ／２秒）と初視点から終視点までの拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）と終視点の拡大画面からの縮小映像（時間Ｔ／２＋Ｔｐ〜Ｔ＋Ｔｐ秒）を順番に接続したものである。なお、各視点のｐ値、Ｔ値、Ｔｐ値は同値である。

次に、図２を参照して、第１実施形態による拡大映像を生成することにより、注目させたくない背景であるオブジェクトを隠す動作を説明する。図２は、拡大映像を生成することにより、注目させたくない背景であるオブジェクトを隠す動作を示す説明図である。図２に示すように、被写体３０１と背景であるオブジェクト３０７の画像に対し拡大表示するように表示枠６０３から新たな表示枠６０５へ変更し、視聴者の注意（視線）６０４を被写体３０１に誘導し、注目させたくないオブジェクト３０７を隠す。このように拡大状態で回り込み映像中は中間画像生成と順序化して映像生成を行う処理を施す。動き変化や映像雑音が小さい被写体を回り込みさせた映像を表示することで、視聴者が被写体の１連続映像が見やすいように映像処理を施す。

次に、図２に示す処理の詳細を説明する。図３は、図１に示す被写体拡縮映像生成部１０２の入出力を示す図である。図３（１）は入力映像、図３（２）は出力映像、図３（３）はパラメータ値関数を示している。被写体拡縮映像生成部１０２は、図３（１）に示す各視点映像（時間０〜Ｔ秒）を入力する。入力する各視点映像の座標は、Ｘ軸左は−Ｘ／２、Ｘ軸右はＸ／２、Ｘ軸中心は０、Ｙ軸上は−Ｙ／２、Ｙ軸下はＹ／２、Ｙ軸中心は０となる。表示枠８０１には被写体３０１と背景であるオブジェクト３０７が表示されている。このとき、各視点映像のパラメータは、左上ＸＹ軸＝−Ｘ／２，−Ｙ／２と、右下ＸＹ軸＝Ｘ／２，Ｙ／２と、映像時間Ｔとなる。

そして、被写体拡縮映像生成部１０２は、初視点の拡大映像（時間０〜Ｔ／２秒）、終視点の拡大画面からの縮小映像（時間Ｔ／２〜Ｔ秒）を出力する。表示枠８１０は、左上ＸＹ軸と右下ＸＹ軸で表されている。この状態から表示枠８１０で被写体３０１が拡大され表示される。パラメータ値ｐ（ｔ）は、図３（３）に示すように変化する。すなわち、図３に示す表示枠８１０の状態（拡縮パラメータが１）から新たな表示枠８１１の状態となり（拡縮パラメータがｐ）、再び表示枠８１０の状態（拡縮パラメータが１）となる。

この時の出力ファイルは以下の通りである。図３（２）出力ファイル映像について、拡縮パラメータが１〜ｐへ変化するときの初視点の拡大映像（時間０〜Ｔ／２秒）は、切り取り映像左上ＸＹ軸＝−Ｘ／（２×ｐ（ｔ）），−Ｙ／（２×ｐ（ｔ））と、切り取り映像右下ＸＹ軸＝Ｘ／（２×ｐ（ｔ）），Ｙ／（２×ｐ（ｔ））である。これは、例えばカメラ台数４台の場合、初視点１台目のカメラのみ拡大映像とする場合である。

また、拡縮パラメータがｐ〜１へ変化するときの終視点の拡大画面からの縮小映像（時間Ｔ／２〜Ｔ秒）は、切り取り映像左上ＸＹ軸＝−Ｘ／（２×ｐ（ｔ）），−Ｙ／（２×ｐ（ｔ））と、切り取り映像右下ＸＹ軸＝Ｘ／（２×ｐ（ｔ）），Ｙ／（２×ｐ（ｔ））である。これは、例えばカメラ台数４台の場合、終視点４台目のカメラのみ拡大画面からの縮小映像とする場合である。

また、拡縮パラメータがｐときの各視点拡大画像（時刻Ｔ／２）の画像は、切り取り画像左上ＸＹ軸＝−Ｘ／（２×ｐ），−Ｙ／（２×ｐ）と、切り取り画像右下ＸＹ軸＝Ｘ／（２×ｐ），Ｙ／（２×ｐ）である。これは、例えばカメラ台数４台の場合、各視点１と２と３と４台目のカメラから拡大画像（時刻Ｔ／２）の画像を作成する場合である。

図３（３）において、横軸は時刻、縦軸はパラメータ値ｐを表しており、時刻０〜時刻Ｔ／２〜時刻Ｔのときのパラメータ値ｐの変化を示している。拡縮パラメータｐは、時刻０のとき１、時刻Ｔ／２のときｐ、時刻Ｔのとき１である。パラメータ値ｐ（ｔ）は、１拡縮パラメータｐで求まる関数値の条件は以下である。

時刻ｔ＝＜Ｔ／２のとき、パラメータ値ｐ（ｔ）＝ｐ×ｔ／（Ｔ／２）である。Ｔ／２＝＜時刻ｔ＝＜Ｔのとき、パラメータ値ｐ（ｔ）＝２ｐ−ｐ×ｔ／（Ｔ／２）である。そして、時刻ｔ＝Ｔ／２のとき、パラメータ値ｐ（ｔ）＝ｐである。

図４は、図１に示す被写体回り込み映像生成部１０３の入出力を示す図である。図４（１）、（２）は入力画像、図４（３）は出力画像、図４（４）は関数を示している。図４（１）の入力画像は、ｎ視点拡大画像で被写体拡縮映像生成部１０２の出力に相当する。図４（２）の入力画像は、ｎ＋１視点拡大画像で被写体拡縮映像生成部１０２の出力に相当する。図４（３）の出力画像は時間に依存して出力される図４（１）、（２）合成画像を示している。

図４（４）の関数は、画像のパラメータを示しており、横軸が時刻ｔであり、時刻Ｔ／２＋（ｎ−１）×ｔｐ／（カメラ台数−１））から時刻Ｔ／２＋ｎ×ｔｐ／（カメラ台数−１））を示している。右側縦軸はｎ＋１視点画像パラメータ（時刻ｔ）であり、値の範囲は０〜１である。左側縦軸はｎ視点画像パラメータ（時刻ｔ）であり、値の範囲は１〜０である。ｎ番目とｎ＋１番目の画像生成の条件は、時刻Ｔ／２＋（ｎ−１）×ｔｐ／（カメラ台数−１））＜ｔ＜Ｔ／２＋ｎ×ｔｐ／（カメラ台数−１））であり、ｎの最大値はカメラ台数−１である。

時間パラメータＴｐは短すぎても長すぎても連続回り込みに見えなくなるため適切に設定する必要がある。ここではカメラ台数が４台であるものとして説明する。時間パラメータＴｐを３等分し、等分された区間を順に区間１〜区間３とすると、以下のようになる。
区間１：Ｔ／２＜ｔ＜Ｔ／２＋ｔｐ／３と、区間２：Ｔ／２＋ｔｐ／３＜ｔ＜Ｔ／２＋ｔｐ×２／３と、区間３：Ｔ／２＋ｔｐ×２／３＜ｔ＜Ｔ／２＋ｔｐである。

次に、入力画像について説明する。図４（１）に示すｎ視点拡大画像（時刻Ｔ／２）の画像は、切り取り画像左上ＸＹ軸＝−Ｘ／（２×ｐ），−Ｙ／（２×ｐ）と、切り取り画像右下ＸＹ軸＝Ｘ／（２×ｐ），Ｙ／（２×ｐ）である。

また、図４（２）に示すｎ＋１視点拡大画像（時刻Ｔ／２）の画像は、切り取り画像左上ＸＹ軸＝−Ｘ／（２×ｐ），−Ｙ／（２×ｐ）と、切り取り画像右下ＸＹ軸＝Ｘ／（２×ｐ），Ｙ／（２×ｐ）である。これは、例えばカメラ台数４台の場合、各視点１と２と３と４台目のカメラから視点拡大画像 時刻Ｔ／２の画像を使う場合である。入力画像は、１台目と２台目、２台目と３台目、３台目と４台目の組み合わせがある。

次に、出力画像について説明する。図４（３）に示す出力画像は、ブレンド画像情報ＲＧＢ（時刻ｔ）＝ｎ視点画像情報ＲＧＢ×（１−ｎ＋１視点画像パラメータ（時刻ｔ））＋（ｎ＋１視点画像情報ＲＧＢ×（ｎ＋１視点画像パラメータ（時刻ｔ）））である。ここでは、カメラ４台で説明する。隣りあうカメラの組み合わせは３となり、時間パラメータＴｐを３等分し、等分された区間を順に区間１〜区間３とする。区間１はカメラ１とカメラ２による合成とする。区間２はカメラ２とカメラ３による合成とする。区間３：カメラ３とカメラ４による合成とする。

出力される映像は、ブレンド画像情報ＲＧＢ（時刻ｔ）（図４（３）に示す出力画像）を順序化して生成する。初視点から終視点までの拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）とする。このとき、区間１は、カメラ１とカメラ２による合成、区間２は、カメラ２とカメラ３による合成、区間３は、カメラ３とカメラ４による合成をつなげて、時間Ｔｐの映像を１つ作る。

図５は、連続映像コンテンツ生成部１０４が出力する全体映像を生成する動作を示す説明図である。図５において、横軸は、時間であり、時刻０〜時刻Ｔ／２〜時刻Ｔ／２＋Ｔｐ〜時刻Ｔ＋Ｔｐを示している。縦軸は、拡縮パラメータｐであり、１〜ｐの範囲を示している。

連続した全体映像は、初視点の拡大映像（拡縮パラメータが１〜ｐに変化する間）、終視点の拡大画面からの縮小映像（拡縮パラメータがｐ〜１に変化する間）、初視点から終視点までの拡大回り込み映像（拡縮パラメータが１の間）からなる。パラメータ値ｐ（ｔ）は、拡縮パラメータｐで求まる。

連続映像コンテンツ生成部１０４の入力は以下の通りである。拡縮パラメータが１〜ｐに変化する間に相当する初視点の拡大映像（例えばカメラ台数４台の場合、初視点１台目のカメラのみ拡大映像）と、拡縮パラメータがｐ〜１に変化する間に相当する終視点の拡大画面からの縮小映像（例えばカメラ台数４台の場合、終視点４台目のカメラのみ拡大画面からの縮小映像）と、拡縮パラメータが１の間に相当する初視点から終視点までの拡大回り込み映像である。

連続映像コンテンツ生成部１０４の出力は以下の通りである。出力される連続した映像は、拡縮パラメータが１〜ｐに変化する間に相当する初視点の拡大映像（時間０〜Ｔ／２秒）と、拡縮パラメータが１の間に相当する初視点から終視点までの拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）と、拡縮パラメータがｐ〜１に変化する間に相当する終視点の拡大画面からの縮小映像（時間Ｔ／２＋Ｔｐ〜Ｔ＋Ｔｐ秒）を結合した１つの映像である。

＜第２実施形態＞
次に、本発明の第２実施形態による映像編集装置を説明する。図６は同実施形態の構成を示すブロック図である。この図において、符号２０１は、注目位置映像編集装置であり、コンピュータ装置によって構成する。符号２０２は、注目位置を拡大または縮小した映像を生成して出力する注目位置拡縮映像生成部である。符号２０３は、注目位置の回り込み映像を生成して出力する注目位置回り込み映像生成部である。符号２０４は、連続映像のコンテンツを生成して出力する連続映像コンテンツ生成部である。図６に示す構成は、図１に示す構成と同様であり、図１に示す被写体映像編集装置１０１では、処理する対象が被写体であるのに対して、図６に示す注目位置映像編集装置２０１では、処理する対象が注目位置である点が異なる。

注目位置拡縮映像生成部２０２は、被写体を中心に時刻同期して撮影された複数の視点映像（時間０〜Ｔ秒）を入力する。入力する映像は、カメラで撮影した映像を直接入力してもよいし、カメラで撮影した映像を一度所定のフォーマットのファイル化したものでもよい。ここでは、４台の多視点カメラで撮影した映像を入力するものとする。また、注目位置拡縮映像生成部２０２は、外部から拡縮パラメータｐと各画像注目位置情報ＸＳ，ＹＳとを入力する。ただし、拡縮パラメータｐの入力は省略可能である。拡縮パラメータｐが省略された場合は、予め決められた拡縮パラメータｐを用いる。

注目位置拡縮映像生成部２０２は、各視点映像（時間０〜Ｔ秒）と、拡縮パラメータｐと、各画像の注目位置情報ＸＳ，ＹＳから、初視点の注目位置の拡大映像（時間０〜Ｔ／２秒）と終視点の注目位置の拡大からの全体映像（時間Ｔ／２〜Ｔ秒）を連続映像コンテンツ生成部２０４に送り、各視点の注目位置の拡大画像（時刻Ｔ／２）の画像を注目位置回り込み映像生成部２０３に送る。

注目位置回り込み映像生成部２０３は、外部から時間パラメータＴｐを入力する。時間パラメータＴｐが省略された場合は、予め決められた時間パラメータＴｐを用いる。注目位置回り込み映像生成部２０３は、各視点の注目位置の拡大画像（時刻Ｔ／２）の画像と時間パラメータＴｐから、初視点から終視点の拡大画像の時間に依存した中間画像生成と順序化して映像生成を行い、初視点から終視点の注目位置の拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）を連続映像コンテンツ生成部２０４に送る。

連続映像コンテンツ生成部２０４は、初視点の注目位置の拡大映像（時間０〜Ｔ／２秒）と終視点の注目位置の拡大からの全体映像（時間Ｔ／２〜Ｔ秒）と初視点から終視点までの注目位置の拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒 から、出力映像コンテンツを生成して出力する。連続映像は、初視点の注目位置の拡大映像（時間０〜Ｔ／２秒）と初視点から終視点までの注目位置の拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）と終視点の注目位置の拡大からの全体映像（時間Ｔ／２＋Ｔｐ〜Ｔ＋Ｔｐ秒）を順番に接続したものである。なお、各視点のＴ値、Ｔｐ値は同値である。

次に、図７を参照して、第２実施形態による拡大映像を生成することにより、注目させたい背景であるオブジェクトに視線を誘導する動作を説明する。図７は、拡大映像を生成することにより、注目させたい背景であるオブジェクトに視線を誘導する動作を示す説明図である。図７に示すように、被写体３０１と背景であるオブジェクト３０７の画像に対し、拡大表示するように表示枠７０６から新たな表示枠７０８へ変更し、視聴者の注意（視線）７０７をオブジェクト３０７へ誘導し、注目させたくない部分（ここでは、被写体３０１）を隠す。これにより、編集者が注目させたいオブジェクト３０７に視線を誘導することができる。このように拡大状態で回り込み映像中は中間画像生成と順序化して映像生成を行い処理を施す。動き変化や映像雑音が小さいオブジェクトを回り込み映像を表示することで、視聴者がオブジェクトの１連続映像が見やすいように映像処理を施す。

次に、図７に示す処理の詳細を説明する。図８は、図６に示す注目位置拡縮映像生成部２０２の入出力を示す図である。図８（１）は入力映像、図８（２）は出力映像、図８（３）パラメータ値関数を示している。図８（１）は、入力映像である各視点映像（時間０〜Ｔ秒）を示している。図８（１）において、表示枠１１０１は、映像で表示される部分であり表示部分の外は表示されない。表示枠１１０１の中だけ表示されるコンテンツが新たに作成できることを示している。図８（２）は、初視点の注目位置の拡大映像（時間０〜Ｔ／２秒）、終視点の注目位置の拡大からの全体映像（時間Ｔ／２〜Ｔ秒）、各視点の注目位置の拡大画像（時刻Ｔ／２）の画像を示している。

図８（１）の表示枠１１０１おいては、Ｘ軸左は−Ｘ／２、Ｘ軸右はＸ／２、Ｘ軸中心０、Ｙ軸上は−Ｙ／２、Ｙ軸下はＹ／２、Ｙ軸中心は０となる。この表示枠１１０１に被写体３０１と背景であるオブジェクト３０７が表示されている。このとき、各視点映像のパラメータは、左上ＸＹ軸＝−Ｘ／２，−Ｙ／２と右下ＸＹ軸＝Ｘ／２，Ｙ／２と映像時間Ｔ、Ｘ軸注目位置情報ＸＳｎ、Ｙ軸注目位置情報ＹＳｎ、ｎ視点番号となる。例えばカメラ台数４台の場合、初視点１台目は、Ｘ軸注目位置情報ＸＳ１、Ｙ軸注目位置情報ＹＳ１である。また、終視点４台目は、Ｘ軸注目位置情報ＸＳ４、Ｙ軸注目位置情報ＹＳ４である。

図８（２）において、表示枠１１１０は、Ｘ軸注目位置情報とＹ軸注目位置情報と拡縮パラメータｐから算出される。表示枠１１１０は拡大表示を行うことにより、表示枠１１１１となることによってオブジェクト３０７が拡大され表示されることになる。パラメータ値ｐ（ｔ）とＸＳｎ（ｔ）とＹＳｎ（ｔ）は図８（３）で求めることができる。

この時の出力ファイルは以下の通りである。図８（２）出力ファイル映像について、拡縮パラメータが１〜ｐへ変化するときの初視点の注目位置の拡大映像（時間０〜Ｔ／２秒）は、切り取り画像左上ＸＹ軸＝−Ｘ／（２×ｐ（ｔ））−ＸＳ１（ｔ），−Ｙ／（２×ｐ（ｔ））−ＹＳ１（ｔ）と、切り取り画像右下ＸＹ軸＝Ｘ／（２×ｐ（ｔ））−ＸＳ１（ｔ），Ｙ／（２×ｐ（ｔ））−ＹＳ１（ｔ）である。これは、例えばカメラ台数４台の場合、初視点１台目のカメラのみＸ軸注目位置とＹ軸注目位置の拡大映像とする場合である。

また、拡縮パラメータがｐ〜１へ変化するときの終視点の注目位置の拡大からの全体映像（時間Ｔ／２〜Ｔ秒）は、切り取り画像左上ＸＹ軸＝−Ｘ／（２×ｐ（ｔ））−ＸＳ４（ｔ），−Ｙ／（２×ｐ（ｔ））−ＹＳ４（ｔ）と、切り取り画像右下ＸＹ軸＝Ｘ／（２×ｐ（ｔ））−ＸＳ４（ｔ），Ｙ／（２×ｐ（ｔ））−ＹＳ４（ｔ）である。これは、例えばカメラ台数４台の場合、終視点４台目のカメラのみＸ軸注目位置とＹ軸注目位置の拡大画面からの縮小映像とする場合である。

また、拡縮パラメータがｐのときの２１０各視点の注目位置の拡大画像（時刻Ｔ／２）の画像は、切り取り画像左上ＸＹ軸＝−Ｘ／（２×ｐ）−ＸＳｎ，−Ｙ／（２×ｐ）−Ｙｓｎと、切り取り画像右下ＸＹ軸＝Ｘ／（２×ｐ）−ＸＳｎ，Ｙ／（２×ｐ）−Ｙｓｎである。これは、例えばカメラ台数４台の場合、各視点１と２と３と４台目のカメラから時刻Ｔ／２でＸ軸注目位置とＹ軸注目位置の拡大画像である。ここでｎは視点番号である。

図８（３）において、横軸が時刻であり、時刻０〜時刻Ｔ／２〜時刻Ｔを表している。また、左側縦軸がパラメータ値ｐ（ｔ）であり、１〜ｐを表している。また、右側縦軸が注目位置情報ＸＳｎ（ｔ）及びＹＳｎ（ｔ）であり、０〜ＸＳｎ値及びＹＳｎ値を表しておる。なお、ｎは視点番号である。

関数の条件として、拡縮パラメータｐ（ｔ）が１〜ｐまで変化する場合において、時刻ｔ＝＜Ｔ／２のとき、ｐ（ｔ）＝ｐ×ｔ／（Ｔ／２）と、Ｘｓｎ（ｔ）＝ＸＳｎ×ｔ／（Ｔ／２）と、Ｙｓｎ（ｔ）＝ＹＳｎ×ｔ／（Ｔ／２）である。

また、拡縮パラメータＰ（ｔ）がｐ〜１まで変化する場合において、Ｔ／２＜時刻ｔ＝＜Ｔのとき、ｐ（ｔ）＝２ｐ−ｐ×ｔ／（Ｔ／２）と、Ｘｓｎ（ｔ）＝２ＸＳｎ−ＸＳｎ×ｔ／（Ｔ／２）と、ｙｓｎ（ｔ）＝２ＹＳｎ−ＹＳｎ×ｔ／（Ｔ／２）である。

また、拡縮パラメータがｐの場合において、時刻ｔ＝Ｔ／２のとき、パラメータ値ｐ（ｔ）＝ｐと、Ｘｓｎ（ｔ）＝ ＸＳｎと、ｙｓｎ（ｔ）＝ＹＳｎである。

図９は、図６に示す注目位置回り込み映像生成部２０３の入出力を示す図である。図９（１）、（２）は入力画像、図９（３）は出力画像、図９（４）は関数を示している。図９（１）の入力画像は、ｎ視点の注目位置の拡大画像に該当し、図９（２）の入力画像は、ｎ＋１視点の注目位置の拡大画像に該当する。図９（３）の出力画像は時間に依存して出力される画像であり、図９（１）と図９（２）の画像を合成した画像である。

図９（４）の関数は、画像のパラメータを示しており、横軸が時刻ｔで、時刻Ｔ／２＋（ｎ−１）×ｔｐ／（カメラ台数−１））から時刻Ｔ／２＋ｎ×ｔｐ／（カメラ台数−１））を範囲を示している。右側縦軸は、ｎ＋１視点画像パラメータ（時刻ｔ）であり、０から１の範囲を示している。また、左側縦軸は、ｎ視点画像パラメータ（時刻ｔ）であり、１から０の範囲を示している。ｎ番目とｎ＋１番目の画像生成の条件は、時刻Ｔ／２＋（ｎ−１）×ｔｐ／（カメラ台数−１））＜ｔ＜Ｔ／２＋ｎ×ｔｐ／（カメラ台数−１））であり、図９（４）のｎの最大値はカメラ台数−１である。時間パラメータＴｐは短すぎても長すぎても連続回り込みに見えなくなるため適切に設定する必要がある。

ここで、カメラ４台で説明する。時間パラメータＴｐを３等分し、等分された区間を順に区間１〜区間３とすると以下のようになる。区間１：Ｔ／２＜ｔ＜Ｔ／２＋ｔｐ／３と、区間２：Ｔ／２＋ｔｐ／３＜ｔ＜Ｔ／２＋ｔｐ×２／３と、区間３：Ｔ／２＋ｔｐ×２／３＜ｔ＜Ｔ／２＋ｔｐである。

次に、入力画像について説明する。図９（１）に示すｎ視点の注目位置の拡大画像（時刻Ｔ／２）の画像は、切り取り画像左上ＸＹ軸＝−Ｘ／（２×ｐ）−ＸＳｎ，−Ｙ／（２×ｐ）−Ｙｓｎと、切り取り画像右下ＸＹ軸＝Ｘ／（２×ｐ）−ＸＳｎ，Ｙ／（２×ｐ）−Ｙｓｎである。

また、図９（２）ｎ＋１視点の注目位置の拡大画像（時刻Ｔ／２）の画像は、切り取り画像左上ＸＹ軸＝−Ｘ／（２×ｐ）−ＸＳｎ＋１，−Ｙ／（２×ｐ）−Ｙｓｎ＋１と、切り取り画像右下ＸＹ軸＝Ｘ／（２×ｐ）−ＸＳｎ＋１，Ｙ／（２×ｐ）−Ｙｓｎ＋１である。これは、例えばカメラ台数４台の場合、各視点１と２と３と４台目のカメラから視点拡大画像 時刻Ｔ／２の画像を使う場合である。入力画像は、１台目と２台目、２台目と３台目、３台目と４台目の組み合わせがある。

次に、出力画像について説明する。図９（３）に示す出力画像は、ブレンド画像情報ＲＧＢ（時刻ｔ）＝ｎ視点の注目位置の拡大画像情報ＲＧＢ×（１−ｎ＋１視点画像パラメータ（時刻ｔ））＋（ｎ＋１視点の注目位置の拡大画像情報ＲＧＢ×（ｎ＋１視点画像パラメータ（時刻ｔ）））である。ここでは、カメラ４台で説明する。隣りあうカメラの組み合わせは３となり、時間パラメータＴｐを３等分し、等分された区間を順に区間１〜区間３とする。区間１はカメラ１とカメラ２による合成とする。区間２はカメラ２とカメラ３による合成とする。区間３はカメラ３とカメラ４による合成とする。

出力される映像は、ブレンド画像情報ＲＧＢ（時刻ｔ）（図９（３）に示す出力画像）を順序化して映像生成する。初視点から終視点までの注目位置の拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）とする。このとき、区間１は、カメラ１とカメラ２による合成、区間２はカメラ２とカメラ３による合成、区間３はカメラ３とカメラ４による合成をつなげて、時間Ｔｐの映像を１つ作る。

図１０は、連続映像コンテンツ生成部２０４が出力する全体映像を生成する動作を示す説明図である。図１０において、横軸は、時間であり、時刻０〜時刻Ｔ／２〜時刻Ｔ／２＋Ｔｐ〜時刻Ｔ＋Ｔｐを示している。縦軸は、拡縮パラメータｐであり、１〜ｐの範囲を示している。

連続映像コンテンツ生成部２０４の入力は以下の通りである。拡縮パラメータが１〜ｐに変化する間に相当する初視点の注目位置の拡大映像（例えばカメラ台数４台の場合、初視点１台目のカメラのみ拡大映像）と、拡縮パラメータがｐ〜１に変化する間に相当する終視点の注目位置の拡大からの全体映像（例えばカメラ台数４台の場合、終視点４台目のカメラのみ拡大画面からの縮小映像）と、拡縮パラメータが１の間に相当する初視点から終視点までの注目位置の拡大回り込み映像である。

連続映像コンテンツ生成部２０４の出力は以下の通りである。出力される連続映像は、以下である。拡縮パラメータが１〜ｐに変化する間に相当する初視点の注目位置の拡大映像（時間０〜Ｔ／２秒）と、拡縮パラメータが１の間に相当する初視点から終視点までの注目位置の拡大回り込み映像（時間Ｔ／２〜Ｔ／２＋Ｔｐ秒）と、拡縮パラメータがｐ〜１に変化する間に相当する終視点の注目位置の拡大からの全体映像（時間Ｔ／２＋Ｔｐ〜Ｔ＋Ｔｐ秒）を結合した１つの映像である。

前述した説明においては、場所や会場においてカメラを多く設置できない場合や、汎用の編集装置の入力インタフェースも物理的な定数量に限られることを鑑み、被写体に対し９０°に５台以下の少ないカメラ配置やファイル入力例を説明した。ただし、被写体に対し３６０°全体に覆うカメラ配置数やファイル入力数が増やすことが可能である設置条件や大型機器使用の場合においても同様の方法を適用することが可能である。

また、カメラ配置を横に並べて配置している例を説明したが、縦に並べて配置する場合や、被写体の真下や真上に配置するような下側や上側からの配置であっても同様の方法を適用することが可能となる。

また、全天周をとれる３６０°カメラ入力から縦横表示する映像に変換できる場合にも、同様の方法が適用可能である。

以上説明したように、被写体を中心に時刻同期して撮影する複数のカメラの映像を入力し、被写体の回り込み映像を出力する映像編集装置において、撮影された映像コンテンツの被写体をより拡大して回り込み連続性をもった映像作成や他のオブジェクトを拡大して回り込み連続性をもった映像の自動生成を行うことができる。

特に、広い範囲をフォローして記録もれがないことを目指し、被写体に位置を合わせ、少ない数のカメラや少ない数の映像ファイル（課題１）から回り込み映像を出力する際に、各カメラと背景の距離の違いが大きいため動き変化や、映像雑音が大きく、視聴者が見づらくなってしまうこと（課題２）を解決することができる。また、撮影者と違う観点の表現を行いたい編集者が対象オブジェクトを拡大して回り込み連続性をもった映像作成を行う際にも、各カメラと他の背景の距離の違いが大きいため動き変化や、映像雑音が大きく、視聴者が見づらくなってしまうこと（課題３）を解決することができる。

この構成によれば、被写体をより拡大するために、拡縮パラメータ、時間パラメータを入力し、拡縮パラメータから初視点の拡大映像生成と終視点の拡大からの縮小映像生成と各視点の拡大画像を生成し、初視点から終視点の拡大画像の時間に依存した中間画像生成と順序化して映像生成を行い、中心の被写体を拡大し、各視点の拡大の連続性のある１シーン映像を生成し、さらに被写体を縮小し、被写体の連続性のある１シーン映像を自動生成して出力することを実現することで、動き変化や映像雑音が大きい背景を隠し、動き変化や映像雑音が小さい被写体の回り込み映像を表示することで、連続性のある１シーン映像を見やすくすることができる。

また、撮影者が被写体を中心に時刻同期して撮影された少ない数の映像ファイルを入力するとともに、他のオブジェクトを拡大するため、拡縮パラメータ、時間パラメータ、新たに各画像注目位置情報を入力し、各画像注目位置情報と拡縮パラメータから初視点の拡大映像生成と、各画像注目位置情報と拡縮パラメータから終視点の拡大からの縮小映像生成と、各画像注目位置情報と拡縮パラメータから各視点の拡大画像を生成し、初視点から終視点の拡大画像の時間に依存した中間画像生成と順序化して映像生成を行い、他のオブジェクト中心に拡大し、各視点の拡大の連続性のある１シーン映像を生成し、さらにオブジェクトを縮小し、オブジェクトの連続性のある１シーン映像を生成して出力するを実現することで、対象オブジェクトへの注目位置修正し拡大回り込み映像表示を行い、動き変化や、映像雑音が大きい他の背景を隠し、動き変化や映像雑音が小さい対象オブジェクトを拡大回り込み表示することで連続性のある１シーン映像を見やすくすることができる。

また、被写体に対し角度９０°に５台以下設置で、広い範囲をフォローして記録もれがないことを目指した映像に対して、一連の映像処理を施し、各カメラと背景の距離の違いが大きいため動き変化や、映像雑音が大きい背景を隠し、動き変化や、映像雑音が小さい被写体の回り込み映像を表示することで、視聴者が見やすくすることができる。

また、編集者の意図により、対象オブジェクトに注意（視線）を持っていくことを狙い注目位置修正と拡縮による一連の映像処理を施し、少ない映像ファイル数である実施例として被写体に対し角度９０°に５台以下で、広い範囲をフォローして記録もれがないことを目指した映像に対して、各カメラと他の背景の距離の違いが大きいため動き変化や、映像雑音が大きい他の背景を隠し、動き変化や映像雑音が小さいオブジェクトを回り込みさせた映像を表示することで、視聴者が見やすくすることができる。

前述した実施形態における被写体映像編集装置１０１、注目位置映像編集装置２０１の全部または一部をコンピュータで実現するようにしてもよい。その場合、この機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現してもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでもよい。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよく、ＰＬＤ（Programmable Logic Device）やＦＰＧＡ（Field Programmable Gate Array）等のハードウェアを用いて実現されるものであってもよい。

以上、図面を参照して本発明の実施の形態を説明してきたが、上記実施の形態は本発明の例示に過ぎず、本発明が上記実施の形態に限定されるものではないことは明らかである。したがって、本発明の技術思想及び範囲を逸脱しない範囲で構成要素の追加、省略、置換、その他の変更を行ってもよい。

多視点カメラシステムを使用して生成した回り込み映像を視聴者が見やすいように編集することが不可欠な用途に適用できる。

１０１・・・被写体映像編集装置、１０２・・・被写体拡縮映像生成部、１０３・・・被写体回り込み映像生成部、１０４・・・連続映像コンテンツ生成部、２０１・・・注目位置映像編集装置、２０２・・・注目位置拡縮映像生成部、１０３・・・注目位置回り込み映像生成部、１０４・・・連続映像コンテンツ生成部

Claims (5)

1. 被写体を取り囲むよう配置された多視点のカメラによって撮影された映像を前記カメラの並びに沿って切り替えることで、あたかも前記カメラが前記被写体を回り込んだときに得られる映像である回り込み映像を出力する映像編集装置であって、
   拡縮パラメータを１から所定値まで変化させて、多視点の前記カメラのうちの初視点の前記カメラで撮影した前記映像に映っている前記被写体を拡大した前記初視点の拡大映像を出力する第一の被写体拡大映像出力手段と、
   前記拡縮パラメータを前記所定値から１まで変化させて、多視点の前記カメラのうちの終視点の前記カメラで撮影した前記映像に映っている前記被写体の前記終視点の拡大画面からの縮小映像を出力する第二の被写体拡大映像出力手段と、
   前記拡縮パラメータが前記所定値のとき、前記カメラで撮影した前記映像に映っている前記被写体を拡大した各視点拡大画像を出力する第三の被写体拡大映像出力手段と、
   前記各視点拡大画像を用いて、前記初視点から前記終視点までの拡大された前記回り込み映像を生成して出力する回り込み映像生成手段と、
   前記初視点の拡大映像、拡大された前記回り込み映像、および前記終視点の拡大画面からの縮小映像から、連続映像コンテンツを生成するコンテンツ生成手段と
   を備え、
   前記回り込み映像生成手段は、与えられた時間パラメータによって時間区間を等分し、等分されたそれぞれの前記時間区間において、隣り合う前記カメラによって撮影された前記映像を合成することにより前記回り込み映像を生成する、
   映像編集装置。
2. 被写体を取り囲むよう配置された多視点のカメラによって撮影された映像を前記カメラの並びに沿って切り替えることで、あたかも前記カメラが前記被写体を回り込んだときに得られる映像である回り込み映像を出力する映像編集装置であって、
   拡縮パラメータを１から所定値まで変化させて、多視点の前記カメラのうちの初視点の前記カメラで撮影した前記映像に映っている注目位置を拡大した前記初視点の拡大映像を出力する第一の注目位置拡大映像出力手段と、
   前記拡縮パラメータを前記所定値から１まで変化させて、多視点の前記カメラのうちの終視点の前記カメラで撮影した前記映像に映っている前記注目位置の前記終視点の拡大画面からの縮小映像を出力する第二の注目位置拡大映像出力手段と、
   前記拡縮パラメータが前記所定値のとき、前記カメラで撮影した前記映像に映っている前記注目位置を拡大した各視点拡大画像を出力する第三の注目位置拡大映像出力手段と、
   前記各視点拡大画像を用いて、前記初視点から前記終視点までの拡大された前記回り込み映像を生成して出力する回り込み映像生成手段と、
   前記初視点の拡大映像、拡大された前記回り込み映像、および前記終視点の拡大画面からの縮小映像から、連続映像コンテンツを生成するコンテンツ生成手段と
   を備え、
   前記回り込み映像生成手段は、与えられた時間パラメータによって時間区間を等分し、等分されたそれぞれの前記時間区間において、隣り合う前記カメラによって撮影された前記映像を合成することにより前記回り込み映像を生成する、
   映像編集装置。
3. 被写体を取り囲むよう配置された多視点のカメラによって撮影された映像を前記カメラの並びに沿って切り替えることで、あたかも前記カメラが前記被写体を回り込んだときに得られる映像である回り込み映像を出力する映像編集装置が行う映像編集方法であって、
   拡縮パラメータを１から所定値まで変化させて、多視点の前記カメラのうちの初視点の前記カメラで撮影した前記映像に映っている前記被写体を拡大した前記初視点の拡大映像を出力する第一の被写体拡大映像出力ステップと、
   前記拡縮パラメータを前記所定値から１まで変化させて、多視点の前記カメラのうちの終視点の前記カメラで撮影した前記映像に映っている前記被写体の前記終視点の拡大画面からの縮小映像を出力する第二の被写体拡大映像出力ステップと、
   前記拡縮パラメータが前記所定値のとき、前記カメラで撮影した前記映像に映っている前記被写体を拡大した各視点拡大画像を出力する第三の被写体拡大映像出力ステップと、
   前記各視点拡大画像を用いて、前記初視点から前記終視点までの拡大された前記回り込み映像を生成して出力する回り込み映像生成ステップと、
   前記初視点の拡大映像、拡大された前記回り込み映像、および前記終視点の拡大画面からの縮小映像から、連続映像コンテンツを生成するコンテンツ生成ステップと
   を有し、
   前記回り込み映像生成ステップでは、与えられた時間パラメータによって時間区間を等分し、等分されたそれぞれの前記時間区間において、隣り合う前記カメラによって撮影された前記映像を合成することにより前記回り込み映像を生成する、
   映像編集方法。
4. 被写体を取り囲むよう配置された多視点のカメラによって撮影された映像を前記カメラの並びに沿って切り替えることで、あたかも前記カメラが前記被写体を回り込んだときに得られる映像である回り込み映像を出力する映像編集装置が行う映像編集方法であって、
   拡縮パラメータを１から所定値まで変化させて、多視点の前記カメラのうちの初視点の前記カメラで撮影した前記映像に映っている注目位置を拡大した前記初視点の拡大映像を出力する第一の注目位置拡大映像出力ステップと、
   前記拡縮パラメータを前記所定値から１まで変化させて、多視点の前記カメラのうちの終視点の前記カメラで撮影した前記映像に映っている前記注目位置の前記終視点の拡大画面からの縮小映像を出力する第二の注目位置拡大映像出力ステップと、
   前記拡縮パラメータが前記所定値のとき、前記カメラで撮影した前記映像に映っている前記注目位置を拡大した各視点拡大画像を出力する第三の注目位置拡大映像出力ステップと、
   前記各視点拡大画像を用いて、前記初視点から前記終視点までの拡大された前記回り込み映像を生成して出力する回り込み映像生成ステップと、
   前記初視点の拡大映像、拡大された前記回り込み映像、および前記終視点の拡大画面からの縮小映像から、連続映像コンテンツを生成するコンテンツ生成ステップと
   を有し、
   前記回り込み映像生成ステップでは、与えられた時間パラメータによって時間区間を等分し、等分されたそれぞれの前記時間区間において、隣り合う前記カメラによって撮影された前記映像を合成することにより前記回り込み映像を生成する、
   映像編集方法。
5. コンピュータを、請求項１または２に記載の映像編集装置として機能させるための映像編集プログラム。

Images