JP6551734B2 - 動画像作成システム、動画像作成方法及び動画像作成プログラム - Google Patents

Description

本発明は、動画像を作成する動画像作成システム、動画像作成方法及び動画像作成プログラムに関する。

画角が最終出力時のアスペクト比よりも広いパノラマ動画像を編集して動画像を作成する動画像作成システムが知られている。例えば、特許文献１に、この種の動画像作成システムの具体的構成が記載されている。

特許文献１に記載の動画像作成システムでは、複数の単位画像よりなる全体画像の中から追尾対象の被写体がユーザによって選択されると、選択された被写体が写る単位画像の撮影方向が識別され、識別された撮影方向上にある単位画像がサーバから読み出される。次いで、読み出された単位画像の輝度レベルと次の時刻の全体画像の輝度レベルに基づき、次の時刻で追尾対象が写る単位画像の撮影方向が識別され、識別された撮影方向上にある単位画像がサーバから読み出される。これを繰り返すことにより、被写体を追尾した（被写体に合わせて視点を移動させた）動画像が作成される。

特開２００４−２４１８３４号公報

このように、特許文献１に記載の動画像作成システムで作成される動画像は、追尾対象の被写体に合わせて視点を単純に移動させただけのものである。ユーザによっては、このような視点を単純に移動させただけの動画像に不満を持つことが考えられる。

本発明は上記の事情に鑑みてなされたものであり、その目的とするところは、被写体を追尾する動画像をより適切な視点で作成することが可能な動画像作成システムを提供することである。

本発明の一実施形態に係る動画像作成システムは、パノラマ動画像の中から追尾対象となる被写体を選択する選択手段と、選択された被写体に合わせてパノラマ動画像内の視点が移動する動画像を該パノラマ動画像から切り出す切り出し手段と、切り出された動画像の視点を被写体に応じて補正する補正手段とを備える。

また、本発明の一実施形態において、補正手段は、切り出し手段により切り出された動画像内に写る被写体の大きさに応じて該動画像の視点を補正する構成としてもよい。

また、本発明の一実施形態において、補正手段は、少なくとも、パノラマ動画像の撮影時の撮影装置の姿勢情報に基づき、切り出し手段により切り出された動画像の視点を補正する構成としてもよい。

また、本発明の一実施形態において、補正手段は、切り出し手段により切り出された動画像内に写る被写体の大きさが所定の大きさを超える場合に、該動画像内における被写体の移動方向を推定し、推定される移動方向と姿勢情報に基づいて角度を算出し、切り出し手段により切り出された動画像内において被写体の移動方向が一定方向となるように、該動画像の視点を、算出された角度を打ち消す方向に回転させることによって補正する構成としてもよい。

また、本発明の一実施形態において、補正手段は、パノラマ動画像の画角が所定値未満である場合に、該動画像内における被写体の移動方向を推定し、推定される移動方向と姿勢情報に基づいて角度を算出し、切り出し手段により切り出された動画像内において被写体の移動方向が一定方向となるように、該動画像の視点を、算出された角度を打ち消す方向に回転させることによって補正する構成としてもよい。

また、本発明の一実施形態において、切り出し手段は、選択手段により選択された被写体を、パノラマ動画像を構成する各パノラマ画像の中からパターン認識によって認識する構成としてもよい。

また、本発明の一実施形態において、補正手段は、姿勢情報とパターン認識によって認識された被写体に基づき、切り出し手段により切り出された動画像の視点を補正する構成としてもよい。

また、本発明の一実施形態に係る動画作成方法は、コンピュータに実行させる方法であり、パノラマ動画像の中から追尾対象となる被写体を選択するステップと、選択された被写体に合わせてパノラマ動画像内の視点が移動する動画像を該パノラマ動画像から切り出すステップと、切り出された動画像の視点を被写体に応じて補正するステップとを含む。

また、本発明の一実施形態に係る動画像作成プログラムは、上記の動画像作成方法をコンピュータに実行させるためのプログラムである。

本発明の一実施形態によれば、被写体を追尾する動画像をより適切な視点で作成することが可能な動画像作成システム、動画像作成方法及び動画像作成プログラムが提供される。

本発明の一実施形態に係る編集システムの概略構成を示す図である。 本発明の一実施形態に係る編集システムに備えられる撮影装置の模式的な外観図である。 本発明の一実施形態において撮影装置を使用したときの状況を例示する図である。 本発明の一実施形態において撮影装置により撮影された画像を説明する図である。 本発明の一実施形態において編集装置により作成された全天球パノラマ動画像を例示する図である。 本発明の一実施形態において編集装置にて実行される動画像作成処理のフローチャートを示す図である。 図６の処理ステップＳ１７又はＳ１８にて実行されるターゲット追尾画像の具体的な補正例を説明するための図である。 図６の処理ステップＳ１７又はＳ１８にて実行されるターゲット追尾画像の具体的な補正例を説明するための図である。

以下、本発明の一実施形態に係る編集システムについて図面を参照しながら説明する。

［編集システム１の構成］
図１は、本発明の一実施形態に係る編集システム１０の概略構成を示す図である。図１に示されるように、編集システム１０は、編集装置１２、撮影装置１４、表示装置１６及び操作部１８を備えている。編集装置１２、撮影装置１４、表示装置１６及び操作部１８は、ネットワーク等の無線又は有線の通信部を介して通信可能に接続されている。

通信部には、例えば、短距離無線技術、移動通信システムによる無線通信網、及びインターネット等が用いられる。短距離無線技術は、Bluetooth（登録商標）等が挙げられる。移動通信システムによる無線通信網には、３Ｇ（3rd generation）や、ＷｉＭＡＸ（Worldwide Interoperability for Microwave Access）等が挙げられる。

編集装置１２は、素材の編集処理を実行するコンピュータである。編集対象の素材には、例えば全天球パノラマ動画像やパノラマ動画像（全天球パノラマ動画像以外）が挙げられる。

撮影装置１４は、全天球パノラマ動画像を撮影する装置である。全天球パノラマ動画像とは、全天球の範囲の撮影によって得られるパノラマ動画像である。パノラマ動画像とは、画角が最終出力する表示装置のアスペクト比よりも広い動画像である。撮影装置１４には、ジャイロセンサが搭載されている。撮影装置１４は、撮影処理時、ジャイロセンサを用いて撮影装置１４の姿勢情報を採取する。採取された姿勢情報は、撮影された動画像や静止画像のファイルにメタ情報として記録される。

表示装置１６は、画像を表示する一般的な表示装置であり、例示的には、液晶ディスプレイや有機ＥＬディスプレイである。表示装置１６には、全天球パノラマ動画像の作成や編集を行うためのメイン画面が表示される。ユーザは、メイン画面に表示された各種画面を介して、全天球パノラマ動画像の作成指示や編集指示を行うことができる。

操作部１８は、ユーザから各種操作指示を受け付けるインタフェースである。図１に示されるように、操作部１８は、キーボード１８Ａ、マウス１８Ｂ、ＵＩ部１８Ｃを備えている。

ＵＩ部１８Ｃは、ユーザからの操作入力を受け付けると共に各種画像を表示するタッチパネル機能を備えた装置である。ＵＩ部１８Ｃには、例えば、スマートフォン、タブレット端末、ノート型パソコン、デスクトップ型パソコン、ＰＤＡ（Personal Digital Assistant）等の、タッチパネル機能を備えた情報処理端末が採用される。

図２は、撮影装置１４の模式的な外観図である。図２（Ａ）は、撮影装置１４の側面図であり、図２（Ｂ）は、図２（Ａ）とは反対側の、撮影装置１４の側面図であり、図２（Ｃ）は、撮影装置１４の平面図である。

撮影装置１４は、全天球パノラマ動画像を撮影可能な装置である。ここで、パノラマ動画像とは、画角が最終出力時のアスペクト比よりも広い動画像であり、全天球パノラマ動画像とは、４πラジアンの立体角内の像を得て、全天球の範囲の撮影によって得られるパノラマ動画像である。

図２に示されるように、撮影装置１４の上部には、正面側（一方の面側）にレンズ２０Ａ及び背面側（他方の面側）にレンズ２０Ｂが設けられている。レンズ２０Ａ及び２０Ｂは、１８０度以上の画角を有する広角レンズである。各レンズ２０Ａ、２０Ｂを介して導かれた被写体像は、各々の撮像素子にて撮像される。撮像素子としては、例えばＣＣＤ（Charge Coupled Device）イメージセンサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサが挙げられる。撮影装置１４の正面側には、レリーズボタン等の操作部１４Ｃが設けられている。

図３は、撮影装置１４の使用状況を例示する図である。図３に示されるように、撮影装置１４は、ユーザが手に持ってユーザの周囲の被写体を撮影するために用いられる。この場合、ユーザの周囲の被写体が各々の撮像素子によって撮像されて、２つの半球画像が得られ、４πラジアンの立体角内の像が得られる。

図４は、撮影装置１４により撮影された画像の説明図である。図４（Ａ）は、レンズ２０Ａを介して撮影された半球画像（前側）を示し、図４（Ｂ）は、レンズ２０Ｂを介して撮影された半球画像（後側）を示し、図４（Ｃ）は、メルカトル図法により表された画像（以下、「メルカトル画像」と記す。）を示す。

レンズ２０Ａは、広角レンズの一つである魚眼レンズである。そのため、レンズ２０Ａを介して撮影された画像は、図４（Ａ）に示されるように、湾曲した半球画像（前側）となる。また、レンズ２０Ｂも同様に魚眼レンズである。従って、レンズ２０Ｂを介して撮影された画像は、図４（Ｂ）に示されるように、湾曲した半球画像（後側）となる。撮影装置１４において半球画像（前側）と半球画像（後側）とが合成されると、メルカトル画像が作成される（図４（Ｃ）参照）。連続的に撮影されたメルカトル画像が連なるとメルカトル動画像としての全天球パノラマ動画像となる。

撮影装置１４にて作成されたメルカトル動画像は、撮影装置１４から編集装置１２へ送信される。編集装置１２は、撮影装置１４より順次受信したメルカトル画像をＯｐｅｎＧＬ（Open Graphics Library）を利用することにより、全天球パノラマ動画像として表示装置１６やＵＩ部１８Ｃ等に表示する。図５は、全天球パノラマ動画像を例示する図である。

なお、本実施形態において例示される編集システムのより詳細な説明は、例えば特開２０１４−１６５７６４号公報にて参照することができる。

［動画像作成処理］
次に、全天球パノラマ動画像を編集して動画像を作成する動画像作成処理について説明する。図６は、編集装置１２にて実行される動画像作成処理のフローチャートを示す。図６に示される動画像作成処理は、全天球パノラマ動画像の再生指示操作が行われると、その実行が開始される。

［図６のＳ１１（再生画像の表示）］
本処理ステップＳ１１では、全天球パノラマ動画像から任意視点の再生画像が切り出され、切り出された任意視点の再生画像が表示装置１６やＵＩ部１８Ｃに順次表示される。なお、任意視点の再生画像とは、全天球パノラマ動画像をなすフレーム（全天球パノラマ画像）の少なくとも一部を含む画像である。

［図６のＳ１２（ターゲットの選択判定）］
本処理ステップＳ１２では、表示装置１６やＵＩ部１８Ｃに表示された再生画像から追尾対象となる被写体（ターゲット）が選択されたか否かが判定される。なお、ターゲットの選択は、例えば、キーボード１８Ａに対するキー操作やマウス１８Ｂに対するクリック操作、ＵＩ部１８Ｃに対するタッチ操作等を通じて行うことができる。また、ターゲットの選択は、例えば編集システム１０によって自動的に行われるようにしてもよい。例えば編集システム１０に予め登録された人物が全天球パノラマ動画像に写る場合、編集システム１０にてパターン認識が行われて、該人物がターゲットとして選択される。

［図６のＳ１３（ターゲットのパターン認識）］
本処理ステップＳ１３は、処理ステップＳ１２（ターゲットの選択判定）にてターゲットが選択されたと判定された場合（Ｓ１２：ＹＥＳ）に実行される。本処理ステップＳ１３では、全天球パノラマ動画像をなすフレーム（全天球パノラマ画像）から、再生画像の遷移に合わせてターゲットのパターン認識が行われる。パターン認識は、例えば、選択操作時のターゲットをテンプレートとしたテンプレートマッチングを用いて行われる。また、ターゲットが人物の場合に限られるが、顔認識技術を用いてパターン認識が行われてもよい。

［図６のＳ１４（ターゲット追尾画像の切り出し）］
本処理ステップＳ１４では、再生画像から、パターン認識によって認識されたターゲットを追尾する画像（ターゲット追尾画像）が切り出される。なお、ターゲット追尾画像の切り出しサイズは、例えばユーザによって適宜設定することができる。

［図６のＳ１５（ターゲットの判別）］
本処理ステップＳ１５では、処理ステップＳ１４（ターゲット追尾画像の切り出し）にて切り出されたターゲット追尾画像内に写るターゲットの判別が行われる。一例として、ターゲットが人物であるか人物以外であるかが判別される。

［図６のＳ１６（ターゲットの大きさ判定）］
本処理ステップＳ１６では、処理ステップＳ１４（ターゲット追尾画像の切り出し）にて切り出されたターゲット追尾画像内に写るターゲットの大きさが所定の大きさを超えるか否か、より詳細には、ターゲット追尾画像全体に対してターゲットが占める表示の割合が所定の割合を超えるか否かが判定される。

［図６のＳ１７（ターゲット追尾画像の補正）］
本処理ステップＳ１７は、処理ステップＳ１６（ターゲットの大きさ判定）にてターゲット追尾画像内に写るターゲットの大きさが所定の大きさを超えないと判定された場合（Ｓ１６：ＮＯ）に実行される。例示的には、全天球パノラマ動画像から切り出された任意視点の再生画像が所定の基準倍率からズームアウトされた場合や、全天球パノラマ動画像が広角撮影されたものである場合、ターゲット追尾画像の切り出しサイズが大きめのサイズに設定されている場合等は、ターゲット追尾画像内に写るターゲットの大きさが所定の大きさを超えないことが多い。これらの例示から、ターゲット追尾画像内に写るターゲットの大きさが所定の大きさを超えない場合とは、ユーザがターゲットだけでなくその周囲の背景等も含めて鑑賞したい場合であると考えられる。

そこで、本処理ステップＳ１７では、処理ステップＳ１４（ターゲット追尾画像の切り出し）にて切り出されたターゲット追尾画像に対し、ターゲットだけでなくその周囲の背景等も含めて鑑賞するのに適した補正が施される。具体的には、全天球パノラマ動画像ファイルにメタ情報として記録された姿勢情報に基づいて、ターゲット追尾画像の視点が水平補正される。ここで、水平補正とは、全天球パノラマ動画像（及びこれに含まれるターゲット追尾画像）が恰も水平姿勢（レンズ２０Ａ、２０Ｂの各光軸が水平方向を向くときの撮影装置１４の姿勢）で撮影されたものとなるように、撮影時に撮影装置１４が水平姿勢から傾くことによって生じる全天球パノラマ動画像やターゲット追尾画像の歪み・傾きを無くす画像補正である。

図７、図８を用いて、本処理ステップＳ１７にて実行されるターゲット追尾画像の具体的な補正例を２例説明する。

・補正例１
図７（ａ）及び図７（ｂ）を用いて補正例１を説明する。図７（ａ）は、撮影装置１４を水平姿勢に大凡保ちながら撮影したときに得られる全天球パノラマ動画像の一例を平面に展開して示す図である。図７（ａ）に示される全天球パノラマ動画像は、撮影装置１４の周囲を移動するターゲットＴ_１（人物）を撮影したものとなっている。補正例１では、全天球パノラマ動画像から切り出された任意視点の再生画像が所定の基準倍率からズームアウトされており、ターゲット追尾画像は、ズームアウトされた再生画像から切り出されている。補正例１では、ズームアウトされた各再生画像から切り出されるターゲット追尾画像のうち、３つのターゲット追尾画像Ｇ１_ＺＯ、Ｇ２_ＺＯ、Ｇ３_ＺＯをサンプルとして示す。

補正例１では、全天球パノラマ動画像から切り出された任意視点の再生画像が所定の基準倍率からズームアウトされたことにより、ターゲット追尾画像Ｇ１_ＺＯ〜Ｇ３_ＺＯ内に写るターゲットＴ_１の大きさが所定の大きさに満たない。この場合、ターゲット追尾画像Ｇ１_ＺＯ〜Ｇ３_ＺＯは、視点の水平補正だけが施される。これにより、ターゲット追尾画像Ｇ１_ＺＯ〜Ｇ３_ＺＯは、図７（ｂ）に示されるように、水平姿勢での撮影視点が担保されると共にターゲット及びその周囲の背景等が含まれた、より適切な視点の追尾画像となる。

・補正例２
図８（ａ）及び図８（ｂ）を用いて補正例２を説明する。図８（ａ）は、撮影装置１４を水平姿勢に大凡保ちながら撮影したときに得られる全天球パノラマ動画像の一例を平面に展開して示す図である。図８（ａ）に示される全天球パノラマ動画像は、ターゲットＴ_２（飛行機）を撮影したものとなっている。補正例２においても、全天球パノラマ動画像から切り出された任意視点の再生画像が所定の基準倍率からズームアウトされており、ターゲット追尾画像は、ズームアウトされた再生画像から切り出されている。補正例２では、ズームアウトされた各再生画像から切り出されるターゲット追尾画像のうち、３つのターゲット追尾画像Ｇ４_ＺＯ、Ｇ５_ＺＯ、Ｇ６_ＺＯをサンプルとして示す。

補正例２では、全天球パノラマ動画像から切り出された任意視点の再生画像が所定の基準倍率からズームアウトされたことにより、ターゲット追尾画像Ｇ４_ＺＯ〜Ｇ６_ＺＯ内に写るターゲットＴ_２の大きさが所定の大きさに満たない。この場合、ターゲット追尾画像Ｇ４_ＺＯ〜Ｇ６_ＺＯは、視点の水平補正だけが施される。これにより、ターゲット追尾画像Ｇ４_ＺＯ〜Ｇ６_ＺＯは、図８（ｂ）に示されるように、水平姿勢での撮影視点が担保されると共にターゲット及びその周囲の背景等が含まれることにより、飛行機がどのように飛行しているかが把握し易い、より適切な視点の追尾画像となる。

［図６のＳ１８（ターゲット追尾画像の補正）］
本処理ステップＳ１８は、処理ステップＳ１６（ターゲットの大きさ判定）にてターゲット追尾画像内に写るターゲットの大きさが所定の大きさを超えると判定された場合（Ｓ１６：ＹＥＳ）に実行される。例示的には、全天球パノラマ動画像から切り出された任意視点の再生画像が所定の基準倍率からズームインされた場合や、全天球パノラマ動画像が望遠撮影されたものである場合、ターゲット追尾画像の切り出しサイズが小さめのサイズに設定されている場合等は、ターゲット追尾画像内に写るターゲットの大きさが所定の大きさを超えることが多い。これらの例示から、ターゲット追尾画像内に写るターゲットの大きさが所定の大きさを超える場合とは、ユーザがターゲットのみを注視して追尾したい場合であると考えられる。

そこで、本処理ステップＳ１８では、処理ステップＳ１４（ターゲット追尾画像の切り出し）にて切り出されたターゲット追尾画像に対し、ターゲットのみを注視して追尾するのに適した補正であって、処理ステップＳ１５（ターゲットの判別）の判別結果に応じた補正が施される。

図７及び図８を用いて、本処理ステップＳ１８にて実行されるターゲット追尾画像の具体的な補正例を２例説明する。

・補正例３
図７（ａ）及び図７（ｃ）を用いて補正例３を説明する。補正例３では、図７（ａ）に示される全天球パノラマ動画像から切り出された任意視点の再生画像がズームインされており、ターゲット追尾画像は、ズームインされた再生画像から切り出されている。補正例３では、ズームインされた各再生画像から切り出されるターゲット追尾画像のうち、３つのターゲット追尾画像Ｇ１_ＺＩ、Ｇ２_ＺＩ、Ｇ３_ＺＩをサンプルとして示す。

補正例３では、全天球パノラマ動画像から切り出された任意視点の再生画像が所定の基準倍率からズームインされたことにより、ターゲット追尾画像Ｇ１_ＺＩ〜Ｇ３_ＺＩ内に写るターゲットＴ_１の大きさが所定の大きさを超えている。ここで、ターゲットＴ_１は、処理ステップＳ１５（ターゲットの判別）にて人物に判別されている。一般に、人物の移動は水平移動が中心である。そこで、本実施形態では、ターゲットが人物である場合、その移動は水平移動であるものとみなす。この場合、ターゲット追尾画像Ｇ１_ＺＩ〜Ｇ３_ＺＩは、視点の水平補正だけが施される。これにより、ターゲット追尾画像Ｇ１_ＺＩ〜Ｇ３_ＺＩは、図７（ｃ）に示されるように、ターゲットＴ_１の移動方向が一定方向（水平方向）を保つものとなり、ターゲットＴ_１のみを注視して追尾するのに適したものとなる。

・補正例４
図８（ａ）及び図８（ｃ）を用いて補正例４を説明する。補正例４では、図８（ａ）に示される全天球パノラマ動画像から切り出された任意視点の再生画像がズームインされており、ターゲット追尾画像は、ズームインされた再生画像から切り出されている。補正例４では、ズームインされた各再生画像から切り出されるターゲット追尾画像のうち、３つのターゲット追尾画像Ｇ４_ＺＩ、Ｇ５_ＺＩ、Ｇ６_ＺＩをサンプルとして示す。

補正例４では、全天球パノラマ動画像から切り出された任意視点の再生画像が所定の基準倍率からズームインされたことにより、ターゲット追尾画像Ｇ４_ＺＩ〜Ｇ６_ＺＩ内に写るターゲットＴ_２の大きさが所定の大きさを超えている。ここで、ターゲットＴ_２は飛行機であるから、処理ステップＳ１５（ターゲットの判別）にて人物以外と判別されている。ターゲットＴ_２が人物以外である場合、その移動が水平移動であるとみなすことは難しい。

そこで、補正例４では、ターゲットＴ_２の移動方向が推定される。ターゲットＴ_２の移動方向は、例えば、オプティカルフロー等によって求められた、全天球パノラマ動画像をなすフレーム間の動きベクトルから推定される。次いで、推定された移動方向と全天球パノラマ動画像ファイルにメタ情報として記録された姿勢情報に基づいて角度が算出される。算出される角度は、ターゲット追尾画像内においてターゲットＴ_２の向き（移動方向）が水平方向となす角度である。ターゲット追尾画像Ｇ４_ＺＩ〜Ｇ６_ＺＩは、この角度を打ち消す方向に視点が回転されることによって補正される。これにより、ターゲット追尾画像Ｇ４_ＺＩ〜Ｇ６_ＺＩは、図８（ｃ）に示されるように、ターゲットＴ_２の移動方向が一定方向（水平方向）を保つものとなり、ターゲットＴ_２のみを注視して追尾するのに適したものとなる。

［図６のＳ１９（ターゲット追尾画像の表示）］
本処理ステップＳ１９では、処理ステップＳ１７（ターゲット追尾画像の補正）又は処理ステップＳ１８（ターゲット追尾画像の補正）にて補正されたターゲット追尾画像が表示装置１６やＵＩ部１８Ｃに表示される。次いで、図６に示される動画像作成処理は、処理ステップＳ１３（ターゲットのパターン認識）に戻る。例えばターゲットの変更操作や追尾停止操作等が行われない限り、処理ステップＳ１３〜Ｓ１７及びＳ１９又は処理ステップＳ１３〜Ｓ１６、Ｓ１８及びＳ１９のループが実行される。ループが実行されることにより、ターゲットを追尾する動画像が表示装置１６やＵＩ部１８Ｃに表示される。

以上が本発明の例示的な実施形態の説明である。本発明の実施形態は、上記に説明したものに限定されず、本発明の技術的思想の範囲において様々な変形が可能である。例えば明細書中に例示的に明示される実施形態等又は自明な実施形態等を適宜組み合わせた内容も本発明の実施形態に含まれる。

上記の実施形態では、図６の処理ステップＳ１６（ターゲットの大きさ判定）において、ターゲット追尾画像内に写るターゲットの大きさが所定の大きさを超えるか否かが判定されているが、これに代えて、別の実施形態では、全天球パノラマ動画像の画角が所定値未満（望遠側）であるか否かが判定されてもよい。

１０ 編集システム
１２ 編集装置
１４ 撮影装置
１６ 表示装置
１８ 操作部

Claims (8)

1. パノラマ動画像の中から追尾対象となる被写体を選択する選択手段と、
   選択された被写体に合わせて前記パノラマ動画像内の視点が移動する動画像を該パノラマ動画像から切り出す切り出し手段と、
   切り出された動画像の視点を前記被写体に応じて補正する補正手段と、
   を備え、
   前記補正手段は、
   前記切り出し手段により切り出された動画像内に写る前記被写体の大きさが所定の大きさを超えるか否かによって該動画像の視点を補正する、
   動画像作成システム。
2. 前記補正手段は、
   少なくとも、前記パノラマ動画像の撮影時の撮影装置の姿勢情報に基づき、前記切り出し手段により切り出された動画像の視点を補正する、
   請求項１に記載の動画像作成システム。
3. 前記補正手段は、
   前記切り出し手段により切り出された動画像内に写る前記被写体の大きさが所定の大きさを超える場合に、該動画像内における被写体の移動方向を推定し、
   推定される移動方向が水平方向となす角度を算出し、
   前記切り出し手段により切り出された動画像内において前記被写体の移動方向が一定方向となるように、該動画像の視点を、算出された角度を打ち消す方向に回転させることによって補正する、
   請求項２に記載の動画像作成システム。
4. 前記補正手段は、
   前記パノラマ動画像の画角が所定値未満である場合に、該動画像内における被写体の移動方向を推定し、
   推定される移動方向が水平方向となす角度を算出し、
   前記切り出し手段により切り出された動画像内において前記被写体の移動方向が一定方向となるように、該動画像の視点を、算出された角度を打ち消す方向に回転させることによって補正する、
   請求項２に記載の動画像作成システム。
5. 前記切り出し手段は、
   前記選択手段により選択された被写体を、前記パノラマ動画像を構成する各パノラマ画像の中からパターン認識によって認識する、
   請求項１から請求項４の何れか一項に記載の動画像作成システム。
6. 前記補正手段は、
   前記姿勢情報と前記パターン認識によって認識された被写体に基づき、前記切り出し手段により切り出された動画像の視点を補正する、
   請求項２から請求項４の何れか一項を引用する、請求項５に記載の動画像作成システム。
7. コンピュータに実行させる動画作成方法であって、
   パノラマ動画像の中から追尾対象となる被写体を選択するステップと、
   選択された被写体に合わせて前記パノラマ動画像内の視点が移動する動画像を該パノラマ動画像から切り出すステップと、
   切り出された動画像の視点を前記被写体に応じて補正するステップと、
   を含み、
   前記補正するステップにて、
   前記切り出すステップで切り出された動画像内に写る前記被写体の大きさが所定の大きさを超えるか否かによって該動画像の視点を補正する、
   動画像作成方法。
8. 請求項７に記載の動画像作成方法をコンピュータに実行させるための動画像作成プログラム。

Images