JP6181363B2 - 画像処理装置、画像処理方法、動画作成方法、動画作成システム及びプログラム - Google Patents

Description

本発明は、画像処理装置、画像処理方法、動画作成方法、動画作成システム及びプログラムに関する。

ビデオカメラなどの動画記録装置により撮影対象物である被写体を撮影することにより、被写体が動いているように表示することが可能な動画データが取得できる。ここで、宝石類などのように被写体が小さい場合、所望の被写界深度よりも浅い被写界深度により撮影されることがある。これに対し、レンズの絞りを絞り込むことにより、被写界深度を深くすることができるが、レンズを絞り込むことにより撮像素子による受光量が減り、画像が暗くなる。

デジタルカメラなどのような静止画記録装置では、シャッター速度を遅く（露光時間を長く）することにより、画像が暗く撮影されるのを防ぐことができるが、動画記録装置では、例えば１秒間に２４枚乃至６０枚のフレームを用いることがフレームレートにより決められており、シャッター速度を自由に変更することが許されないため、被写体の周辺の照明を強くすることにより対応する必要がある。

ところが、照明を強くして動画記憶装置により被写体を撮影する場合、被写体が所望の品質で撮影されないことがある。例えば、宝石類に強い光を照射して動画記録装置により動画を撮影すると明るすぎることによって白とびが発生する。また、明るさが足りない場合には、黒つぶれが発生する。このように、動画記録装置により動画を撮影すると、宝石のカットや色の変化などが所望の撮影品質で表現できないという問題がある。

一方、特許文献１では、静止画を部分的に切り出す範囲を定めたトリミング枠を、前記静止画上で設定された移動経路に基づいて移動させ、前記トリミング枠が移動するごとに切り出される複数の画像を使用してフォトムービーを作成するフォトムービー作成装置において、前記静止画から人物の被写体の顔を検出し、その位置を特定する顔位置特定手段と、顔の検出された人数が複数であるときに各人物の顔の位置を経由する曲線を作成し、前記トリミング枠の中心を前記曲線に沿って移動させるための移動経路を算出する移動経路算出手段とを備えたことを特徴とするフォトムービー作成装置について開示している。

また、特許文献２では、３Ｄターンテーブルと自動映像形式変換を備えた映像キャプチャ装置間の撮影実行を同期させるためのコンピュータ制御システムについて開示している。

特開２００６−３０４０９０号公報 米国特許出願公開第２００７／０１７２２１６号明細書

本発明は、上述した背景からなされたものであって、所望の撮影品質で撮影された対象物を表示しつつ、対象物が動くように表示することができるデータを生成する画像処理装置、画像処理方法、動画作成方法、動画作成システム及びプログラムを提供することを目的とする。

［画像処理装置］
本発明は、開始位置から予め定められた任意の回転位置まで移動するように回転軸上に配置された被写体を複数の回転移動位置で停止させて、固定されたカメラにより撮影した静止画を取得する静止画取得手段と、前記静止画取得手段により取得した被写体を含む複数の静止画それぞれの一部を部分画像として抽出する抽出手段と、前記抽出手段により抽出した部分画像に基づく動画用のフレーム画像を出力する画像出力手段と、前記画像出力手段により出力されたそれぞれ異なる静止画を有する複数の動画用のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成する動画生成手段と、を有し、前記抽出手段は、画像領域が異なる部分画像をそれぞれ抽出する画像処理装置である。

好適には、前記抽出手段は、部分画像における被写体の位置が異なるように、複数の静止画からそれぞれ部分画像を抽出する。

好適には、前記抽出手段は、画像領域を指定する関数を用いて、部分画像が抽出されるごとに各部分画像の画像領域が順次、前記関数に応じて移動するよう抽出する。

好適には、前記抽出手段は、画像領域の大きさが異なるように、複数の静止画からそれぞれ部分画像を抽出し、前記画像出力手段は、前記抽出手段により抽出された部分画像を、動画用のフレーム画像の大きさとして予め定められた大きさの部分画像に変換して出力する。

［画像処理方法］
また、本発明は、開始位置から予め定められた任意の回転位置まで移動するように回転軸上に配置された被写体を複数の回転移動位置で停止させて、固定されたカメラにより撮影した静止画を取得し、取得した被写体を含む複数の静止画それぞれの一部を画像領域が異なる部分画像として抽出し、抽出した部分画像をフレーム画像として出力し、出力されたそれぞれ異なる静止画を有する複数のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成する画像処理方法である。

［動画作成方法］
また、本発明は、動画作成方法である。
好適には、前記カメラにより、複数のフレーム画像を結合して生成する動画のフレームレートの逆数よりも長いシャッター速度で前記被写体を撮影する。

［動画作成システム］
また、本発明は、被写体を撮影する固定されたカメラと、開始位置から予め定められた任意の回転位置まで移動するように回転軸上に配置された被写体を回転移動させる移動手段と、前記移動手段により移動する複数の回転移動位置で停止させて前記カメラにより撮影した静止画を取得する静止画取得手段と、前記静止画取得手段により取得した被写体を含む複数の静止画それぞれの一部を画像領域が異なる部分画像として抽出する抽出手段と、前記抽出手段により抽出した部分画像に基づく動画用のフレーム画像を出力する画像出力手段と、前記画像出力手段により出力されたそれぞれ異なる静止画を有する複数の動画用のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成する動画生成手段とを有する動画作成システムである。

好適には、前記移動手段による被写体の移動を制御する移動制御手段をさらに有する。

好適には、被写体の複数の移動位置における前記カメラによる撮影を制御するカメラ制御手段をさらに有する。

好適には、前記カメラ制御手段は、前記移動手段による回転移動が停止したのと同期して前記カメラで被写体を撮影するように制御する。

［プログラム］
また、本発明は、開始位置から予め定められた任意の回転位置まで移動するように被写体を回転軸上に配置した被写体を複数の回転移動位置で停止させて、固定されたカメラにより撮影した静止画を取得するステップと、取得した被写体を含む複数の静止画それぞれの一部を画像領域が異なる部分画像として抽出するステップと、抽出した部分画像に基づく動画用のフレーム画像を出力するステップと、出力されたそれぞれ異なる静止画を有する複数の動画用のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成するステップとをコンピュータに実行させるプログラムである。

本発明によれば、所望の撮影品質で撮影された被写体を表示しつつ、被写体が回転しながら動くように表示することができるデータを生成する画像処理装置、画像処理方法、動画作成方法、動画作成システム及びプログラムを提供することができる。

本発明の実施形態にかかる動画作成システム２を示す模式図である。 ターンテーブル８の構成を示す模式図である。 動画作成システム２による被写体１４の撮影における機材の配置の一例を示す模式図であり、（ａ）は、動画作成システム２の正面図を示し、（ｂ）は、左側面図を示す。 画像処理装置１２のハードウェア構成を示す模式図である。 プログラムが実行されることにより実現される画像処理装置１２の機能構成を示すブロック図である。 静止画からの部分画像の抽出について説明する模式図であり、（ａ）は、各静止画から抽出される画像領域に変動がない場合の抽出の一例を示し、（ｂ）は、各静止画から抽出される画像領域が変動する場合の抽出の一例を示す。 動画作成システム２の動作のうち、静止画の撮影処理から動画用のフレーム画像の出力処理までの流れを示す一例を示すフローチャートである。 図７で示したステップ１０６の画像処理の動作の一例を示すフローチャートである。 動画生成部７０により生成される動画の一例について示す模式図であり、（ａ）は、８枚の静止画９０それぞれから８枚の部分画像９２を抽出する様子を示しており、（ｂ）は、８枚の部分画像９２から生成された動画用フレーム画像それぞれについて順に並べて示している。

以下、本発明の実施形態について図面を参照して詳細に説明する。なお、以下の説明において、被写体とは、撮影の対象物をいう。
図１は、本発明の実施形態にかかる動画作成システム２を示す模式図である。動画作成システム２は、カメラ４、カメラ制御部６、ターンテーブル８、移動制御部１０及び画像処理装置１２を有している。

カメラ４は、少なくとも静止画を撮影するカメラであり、カメラ制御部６の制御により、被写体１４の静止画を撮影する。ここで、カメラ４は、少なくとも静止画を撮影するカメラであればよく、静止画の撮影機能のほかに動画撮影機能を備えていてもよい。また、カメラ４は、例えば、民生用の光学的映像記録装置又は光学的画像記録装置であってもよいし、工業用の光学的映像記録装置又は光学的画像記録装置であってもよい。カメラ４は、移動する被写体１４を複数の移動位置で撮影する。本実施形態では、カメラ４は、ターンテーブル８により回転移動する被写体１４について、複数の回転位置で撮影する。なお、カメラ４は、例えば、ＪＰＥＧ形式のデジタルデータの静止画として被写体１４を撮影する。また、被写体１４としては、例えば、指輪、宝石類などの宝飾品が挙げられるが、これに限られない。

ここで、カメラ４は、カメラ制御部６の制御による一連の撮影において、同じ撮影条件で撮影する。このため、一連の撮影において、例えば、シャッター速度、絞り、ピントの位置、撮影領域などについては、同じである。なお、カメラ４のシャッター速度としては、例えば、後述する動画生成部７０により生成される動画のフレームレートＦ［fps］(Frames Per Second）の逆数で表される時間である１／Ｆ[秒]よりも長い時間を設定することもできる。

カメラ制御部６は、後述する画像処理装置１２による制御に基づき、カメラ４の撮影タイミングを制御する。なお、カメラ制御部６は、画像処理装置１２において動作するソフトウェアとして実現されてもよいし、画像処理装置１２とは異なる装置として設けられてもよい。例えば、カメラ制御部６は、画像処理装置１２から通知された制御信号をカメラ４の制御用の信号へと変換し、変換した信号をカメラ４に送信することによりカメラ４を制御する。具体的には、カメラ制御部６は、ターンテーブル８の回転移動が停止したのと同期して、被写体１４を撮影するよう撮影タイミングを制御する。また、カメラ制御部６は、画像処理装置１２とは異なる装置として設けられている場合、カメラ４により撮影された静止画を画像処理装置１２へ出力する。

ターンテーブル８は、動画作成システム２において、被写体１４を移動させる移動手段を構成しており、具体的には、被写体１４を回転移動させる。なお、本実施形態では、ターンテーブル８により移動手段を構成しているが、回転移動に限らず、１次元、２次元又は３次元の移動を行うよう移動手段を構成してもよい。

図２は、ターンテーブル８の構成を示す模式図である。
ターンテーブル８は、図２に示されるように、例えば、モータ２０と、シャフト２２と、ベルト２４と、回転盤であるテーブル２６とを有している。ターンテーブル８は、モータ２０が回転することにより、ベルト２４を介してモータ２０と接続されているシャフト２２が回転し、シャフト２２に取り付けられたテーブル２６が回転するよう構成されている。

例えば、ターンテーブル８は、図２に示すようにテーブル２６上に被写体１４を載せて被写体１４を回転移動させてもよいし、テーブル２６上に取り付けられた吊り具により被写体１４を吊って被写体１４を回転移動させてもよい。なお、本実施形態では、被写体１４は、テーブル２６の回転にともない一つの座標位置で回転するよう設けられるものとするが、テーブル２６の回転にともない円運動を行うよう設けられてもよい。なお、被写体１４が一つの座標位置で回転するとは、テーブル２６の回転にともない、テーブル２６の回転軸上の座標位置において被写体１４の向きが変化し、被写体１４の座標位置が移動しないことをいう。

移動制御部１０は、後述する画像処理装置１２による制御に基づき、被写体１４の移動を制御する。本実施形態では、移動制御部１０は、ターンテーブル８の回転移動を制御する。具体的には、移動制御部１０は、ターンテーブル８の回転と停止を繰り返すよう制御する。例えば、移動制御部１０は、画像処理装置１２から通知された制御信号をターンテーブル８の制御用の信号へと変換し、変換した信号をターンテーブル８に送信することによりターンテーブル８を制御する。なお、上述のカメラ制御部６は、ターンテーブル８が停止するごとに、被写体１４を撮影するようカメラ４を制御している。なお、移動制御部１０は、画像処理装置１２とは異なる装置として設けられてもよいし、画像処理装置１２において動作するソフトウェアとして実現されてもよい。

画像処理装置１２は、カメラ４により撮影された静止画に対し、後述する画像処理を行う装置であり、例えば、汎用コンピュータにより構成されている。なお、画像処理装置１２の詳細については、後述する。

次に、動画作成システム２による被写体１４の撮影に用いる機材の配置について説明する。
図３は、動画作成システム２による被写体１４の撮影における機材の配置の一例を示す模式図であり、図３（ａ）は、動画作成システム２の正面図を示し、図３（ｂ）は、左側面図を示している。なお、図３に示した例では、ターンテーブル８は、ターンテーブル８の上下方向の位置を変更する昇降機３０の上に設置されており、昇降機３０が昇降することによりターンテーブル８に設けられた被写体１４の高さが変更されるよう構成されている。

図３（ａ）及び図３（ｂ）に示されるように、カメラ４は、フレーム３２上に設けられた、１次アーム３４及び２次アーム３６からなるアーム３８により支持されており、カメラ４のレンズ３９は、ターンテーブル８の回転軸上の予め定められた位置に向けられている。ここで、１次アーム３４は、２次アーム３６の上下方向の位置を可変に、２次アーム３６を支持している。また、１次アーム３４は、カメラ４のレンズ３９が上記の予め定められた位置に向く状態を維持しつつ、１次アーム３４の下端を中心にして回転（例えば、０度から９０度の回転）するよう構成されている。

使用者は、２次アーム３６の上下方向の位置及び１次アーム３４の角度を任意に設定し、さらに、昇降機３０の高さの変更により被写体１４の上下方向の位置を任意に調整し、カメラ４による被写体１４の撮影の構図を定める。

次に、画像処理装置１２の詳細について説明する。
図４は、画像処理装置１２のハードウェア構成を示す模式図である。

図４に示すように、画像処理装置１２は、ＣＰＵ４０及びメモリ４２などを含む本体４４、入力装置４６、出力装置４８、記憶装置５０及び記憶媒体５２から構成される。つまり、画像処理装置１２は、コンピュータとしての構成部分を有している。また、画像処理装置１２は、カメラ制御部６又は移動制御部１０が画像処理装置１２とは異なる装置として設けられている場合には、カメラ制御部６又は移動制御部１０と接続されている。

ＣＰＵ４０は、メモリ４２に記憶されたプログラムに基づく処理を実行する。記憶装置５０は、内蔵ＨＤＤなどであり、記憶媒体５２は、ＣＤ、ＤＶＤ、Ｂｌｕ−ｒａｙ Ｄｉｓｃ及び外付けＨＤＤなどである。ここで、外付けＨＤＤは、直接接続されるＨＤＤのほか、ネットワーク上のＨＤＤ（ネットワークドライブ）であってもよい。なお、ＣＰＵ４０は、記憶装置５０又は記憶媒体５２に記憶されたプログラムを実行してもよい。

入力装置４６は、キーボード、マウス及びジョイスティックなどであり、出力装置４８は、ディスプレイなどの表示装置である。出力装置４８は、後述する動画用フレーム画像の表示出力、動画の表示出力などを行なう。また、例えば、使用者は、出力装置４８による表示により、動画作成システム２におけるＧＵＩの操作を行う。また、使用者は、例えば、出力装置４８による表示により、カメラ４によって撮影された画像を確認する。

図５は、プログラムが実行されることにより実現される画像処理装置１２の機能構成を示すブロック図である。なお、図５に示される構成の一部又は全ては、ＡＳＩＣ，ＦＰＧＡなどのハードウェアにより実現されてもよい。

図５に示すように、画像処理装置１２は、設定部６０、制御部６２、静止画取得部６４、抽出部６６、画像出力部６８及び動画生成部７０を有する。

設定部６０は、動画作成システム２の処理条件を設定する。例えば、設定部６０は、ターンテーブルの移動量（回転角度）、撮影画像枚数、抽出部６６で抽出する画像領域の座標及び大きさ、画像出力部６８が出力する出力画像サイズ、動画生成部７０で生成する動画のフレームレートなどについて設定する。なお、設定部６０は、例えば、入力装置４６により入力された設定情報に基づいて、設定を行う。

制御部６２は、設定部６０により設定された処理条件にしたがってカメラ４及びターンテーブル８を制御するための制御信号をカメラ制御部６及び移動制御部１０に出力する。制御部６２は、設定部６０により設定されたターンテーブルの移動量（回転角度）及び撮影画像枚数から算出される１撮影あたりの移動量（回転角度）を制御信号として移動制御部１０に通知し、カメラ４による撮影ごとに、この１撮影あたりの移動量だけ移動（回転）するよう制御する。また、制御部６２は、ターンテーブル８の移動が停止するごとにカメラ４による撮影を１回行うようカメラ制御部６に制御信号を通知する。

また、制御部６２は、設定部６０により設定された処理条件にしたがって、抽出部６６及び画像出力部６８を制御する。例えば、制御部６２は、抽出部６６に対し、いずれの画像領域を抽出すべきであるかについて制御し、画像出力部６８に対し、いずれの画像サイズで出力すべきであるかについて制御する。

静止画取得部６４は、カメラ４により撮影された静止画を取得する。本実施形態では、静止画取得部６４は、カメラ制御部６を介して静止画を取得するが、カメラ４から直接取得してもよい。ここで、静止画取得部６４は、ターンテーブル８の回転ごとにカメラ４に撮影される各静止画を取得する。

抽出部６６は、静止画取得部６４が取得した被写体１４を含む複数の静止画それぞれの一部を部分画像として抽出する。具体的には、抽出部６６は、静止画取得部６４が取得した複数の静止画ごとに、取得された静止画の全画像領域のうち制御部６２により指定された画像領域を部分画像として抽出する。

ここで、抽出部６６は、静止画取得部６４が取得した複数の静止画から、それぞれの画像領域が異なる複数の部分画像を抽出してもよい。例えば、抽出部６６は、部分画像における被写体１４の位置が異なるように、複数の静止画からそれぞれ部分画像を抽出してもよい。また、抽出部６６は、静止画取得部６４が取得した複数の静止画から、それぞれの画像領域の大きさが異なるように、部分画像を抽出してもよい。なお、抽出部６６による画像の抽出についての詳細は、後述する。

画像出力部６８は、抽出部６６により抽出した部分画像に基づく動画用のフレーム画像を出力する。本実施形態では、画像出力部６８は、抽出部６６により抽出した部分画像について、部分画像の大きさが予め定められた大きさ（出力画像サイズ）である場合には抽出した部分画像を出力し、部分画像の大きさが出力画像サイズではない場合には、抽出した部分画像を出力画像サイズの部分画像へと変換して出力する。なお、本実施形態では、予め定められた大きさ（出力画像サイズ）は、設定部６０により設定され、制御部６２から通知された画像サイズである。画像出力部６８は、例えば、バイキュービック法などの画像補間を行い、出力画像サイズへと、部分画像を拡大又は縮小する。また、画像出力部６８は、出力する画像に順次、連番をふり、出力する各画像データに順番についての情報を付加する。なお、順序についての情報の付加として、例えば、画像データのファイル名を連番になるようにしてもよい。

なお、本実施形態では、画像出力部６８は、動画用のフレーム画像として動画生成部７０に出力するが、画像出力部６８は、記憶装置５０、記憶媒体５２又は画像処理装置１２と通信可能に接続した他の装置などに出力してもよい。

動画生成部７０は、画像出力部６８から出力された画像である複数の動画用のフレーム画像を、フレーム画像ごとに付加された順序についての情報にしたがって、予め定められたフレームレート（例えば、２４〜６０［fps］のうちいずれかのフレームレート）で結合し、これらの動画用のフレーム画像から構成される動画を生成する。なお、フレームレートについては、入力装置４６により入力された設定情報に基づいて、設定部６０により設定されてもよい。なお、生成された動画については、出力装置４８に出力してもよいし、記憶装置５０、記憶媒体５２又は画像処理装置１２と通信可能に接続した他の装置などに出力してもよい。

次に、抽出部６６による部分画像の抽出について説明する。
図６は、静止画からの部分画像の抽出について説明する模式図であり、図６（ａ）は、各静止画から抽出される画像領域に変動がない場合の抽出（以下、領域固定抽出という。）の一例を示し、図６（ｂ）は、各静止画から抽出される画像領域が変動する場合の抽出（以下、領域変動抽出という。）の一例を示す。

なお、図６で示した例では、カメラ４により撮影された静止画８０の大きさは、横幅が５，１８４ピクセル、縦幅が３，４５６ピクセルであるものとする。また、ここでは、静止画から部分画像を抽出し、画像出力部６８は、横幅が１，９２０ピクセル、縦幅が１，０８０ピクセルの動画用フレーム画像として出力するものとして説明する。この場合、フルハイビジョン画質の動画用フレーム画像が出力され、動画生成部７０によりフルハイビジョン画質の動画が生成される。

なお、一般的に、静止画記録装置では、動画記録装置に用いられる撮像素子よりも高密度、高解像度、又は高画素数の撮像素子が使用されており、このため、静止画記録装置の撮影領域は動画記録装置の撮影領域よりも広く、静止画記録装置により撮影された静止画から動画用のフレーム画像を切り出すことができる。

図６（ａ）を参照して、領域固定抽出について説明する。領域固定抽出を行う場合には、例えば、抽出する部分画像８２の画像領域が、画像領域の左上の座標（ｘ，ｙ）、画像領域の幅ｗ及び画像領域の高さｈが設定されることにより指定され、抽出部６６は、静止画取得部６４が取得した各静止画から、この画像領域を切り出して抽出する。なお、画像領域の左上の座標、幅及び高さについては、設定部６０により任意に設定される。

図６（ｂ）を参照して、領域変動抽出について説明する。領域変動抽出を行う場合にも、抽出する部分画像の画像領域が指定されることにより、抽出部６６は、静止画取得部６４が取得した各静止画から、静止画ごとに指定された画像領域をそれぞれ切り出して抽出する。本実施形態では、静止画取得部６４により取得される一連の静止画のうち、最初の静止画から抽出する部分画像８４の画像領域と最後の静止画から抽出する部分画像８６の画像領域について、左上の座標、幅及び高さが設定部６０により設定される。

静止画取得部６４により取得される一連の静止画のうち、最初の静止画及び最後の静止画を除く中間の静止画について、抽出部６６は、制御部６２により算出された画像領域の抽出を行う。

制御部６２は、例えば、次のように画像領域を指定する。なお、ここでは、最初の静止画から抽出する部分画像８４の画像領域について、左上の座標を（ｘ０，ｙ０）、画像領域の幅をｗ０、画像領域の高さをｈ０と設定され、最後の静止画から抽出する部分画像８６の画像領域について、左上の座標を（ｘ１，ｙ１）、画像領域の幅をｗ１、画像領域の高さをｈ１と設定されたものとする。また、ここでは、ｎ（２以上の整数）枚の静止画からそれぞれ部分画像を抽出し、ｎ枚の動画用フレーム画像を生成するものとして説明する。なお、このｎは、撮影枚数であり、設定部６０により設定される。

制御部６２は、例えば、ｉ（ただし、ｉ＝１，２，・・・，ｎ）番目の部分画像の画像領域の左上の座標（ｘ［ｉ］，ｙ［ｉ］）、幅ｗ［ｉ］、高さｈ［ｉ］について、次の関数により算出する。
ｘ［ｉ］＝ｘ０＋（ｉ−１）×（ｘ１−ｘ０）／（ｎ−１）
ｙ［ｉ］＝ｙ０＋（ｉ−１）×（ｙ１−ｙ０）／（ｎ−１）
ｗ［ｉ］＝ｗ０＋（ｉ−１）×（ｗ１−ｗ０）／（ｎ−１）
ｈ［ｉ］＝ｈ０＋（ｉ−１）×（ｈ１−ｈ０）／（ｎ−１）

抽出部６６は、静止画取得部６４が取得した各静止画から、以上の関数式により算出された画像領域を抽出し、画像出力部６８は、抽出部６６により抽出された画像の大きさを出力画像サイズ（ここでは、横幅が１，９２０ピクセル、縦幅が１，０８０ピクセル）に変換して出力する。

なお、上記の関数式によれば、１番目の部分画像からｎ番目の部分画像へと直線的（線形）に移動するよう２番目からｎ−１番目の部分画像が抽出されることとなるが、上記の関数式によらず、他の関数により画像領域を定めてもよい。例えば、１番目の部分画像からｎ番目の部分画像へと線形に移動する場合にサイン関数を用いると、移動の最初付近と最後付近で、中間における移動量に比べて、移動距離が小さくなるよう構成できる。また、１番目の部分画像からｎ番目の部分画像への移動を、非線形（円運動、高次関数）にしてもよい。このように、移動の軌跡を関数により指定して、関数に応じた線形又は非線形の移動を行うよう構成してもよい。

次に、動画作成システム２の動作について説明する。
図７は、動画作成システム２の動作のうち、静止画の撮影処理から動画用のフレーム画像の出力処理までの流れの一例を示すフローチャートである。図７のようにしてフレーム画像が出力されると、出力された各フレーム画像に基づいて、動画生成部７０が動画を作成する。

ステップ１００（Ｓ１００）において、設定部６０が処理条件として、静止画の撮影枚数（フレーム数）ｎと、抽出する画像領域の設定を行う。領域固定抽出の場合、設定部６０により、各静止画に共通して適用される画像領域の座標と大きさ（幅及び高さ）とが設定される。一方、領域変動抽出の場合、設定部６０により、１番目の静止画から抽出する画像領域の座標、大きさ（幅及び高さ）及びｎ番目の静止画から抽出する座標、大きさ（幅及び高さ）が設定される。また、設定部６０は、画像出力部６８が出力する画像の大きさである出力画像サイズ、及びｎ枚の撮影の間にターンテーブル８が移動する移動量ｍを設定する。

ステップ１０２（Ｓ１０２）において、カメラ４がカメラ制御部６の制御により被写体１４を撮影する。

ステップ１０４（Ｓ１０４）において、静止画取得部６４がステップ１０２により撮影された静止画を取得する。

ステップ１０６（Ｓ１０６）において、画像処理装置１２による画像処理がなされる。なお、ステップ１０６の詳細については、後述する。

ステップ１０８（Ｓ１０８）において、制御部６２は、指定されたフレーム数ｎ分の撮影が終えたか否かを判定し、ｎ枚分の撮影が終えていない場合には、ステップ１１０へ移行し、ｎ枚分の撮影が終了した場合には、ステップ１１４へ移行する。

ステップ１１０（Ｓ１１０）において、移動制御部１０は、ステップ１００で設定された移動量ｍに基づいて、ターンテーブル８を移動（回転）させる。例えば、ｍ／ｎにより定める角度だけターンテーブル８を回転させる。なお、移動制御部１０は、ｎ枚の各撮影において等量の移動量で移動するよう制御してもよいし、撮影ごとの移動量が異なるよう制御してもよい。

ステップ１１２（Ｓ１１２）において、移動制御部１０は、ターンテーブル８の移動を停止させ、ステップ１０２へ戻る。ステップ１０２では、カメラ制御部６は、カメラ４が新たな移動位置において被写体１４を撮影するよう制御する。

一方、ステップ１１４（Ｓ１１４）では、移動制御部１０は、ターンテーブル８を１枚目の撮影時の位置に戻すよう制御する。ここで、以上により撮影された静止画のうち、いずれかの静止画について再撮影を行う場合には、ステップ１１４により初回撮影時の位置に戻されたターンテーブル８を、再撮影対象の位置に移動させ、再撮影を行う。

例えば、以上のフローチャートにより繰り返される撮影の間、使用者は、随時、撮影された静止画又は静止画から抽出された部分画像を確認し、再撮影対象の静止画が発見された場合には、動画作成システム２は、使用者の指示にしたがい再撮影対象が何枚目の静止画であるかを記憶する。その後、ｎ枚の静止画の撮影が終了後、ステップ１１４により初期位置に戻されたターンテーブル８について、再撮影対象の静止画の撮影位置に再び移動させ、再撮影を行うよう構成してもよい。

次に、図７で示したステップ１０６の画像処理の動作について説明する。
図８は、図７で示したステップ１０６の画像処理の動作の一例を示すフローチャートである。

ステップ２００（Ｓ２００）において、制御部６２は、上述のステップ１００において設定部６０により設定された出力画像サイズを取得する。

ステップ２０２（Ｓ２０２）において、制御部６２は、領域固定抽出が設定されているか、領域変動抽出が設定されているか判定し、領域固定抽出を行う場合には、ステップ２０４へ移行し、領域変動抽出を行う場合には、ステップ２０６へと移行する。

ステップ２０４（Ｓ２０４）において、制御部６２は、ステップ１００において設定された画像領域の座標と大きさを取得し、抽出部６６に抽出対象の画像領域を通知する。

一方、領域変動抽出の場合、ステップ２０６（Ｓ２０６）において、制御部６２は、ステップ１００において設定された、最初の静止画から抽出する画像領域の座標及び大きさと、最後の静止画から抽出する画像領域の座標及び大きさと、撮影枚数ｎを取得し、ステップ２０８へ移行する。

ステップ２０８（Ｓ２０８）では、ステップ２０６により取得された情報に基づいて、例えば、上述の算出式により、当該静止画から抽出すべき画像領域の座標及び大きさを算出し、抽出部６６に通知する。

ステップ２１０（Ｓ２１０）では、ステップ２０４又はステップ２０８において、制御部６２から通知された画像領域の座標及び大きさに基づいて、静止画から当該画像領域の部分画像を抽出する。

ステップ２１２（Ｓ２１２）では、画像出力部６８が、ステップ２１０により抽出された部分画像について、ステップ１００で設定された出力画像サイズへとリサイズする変換を行い、画像の順序についての情報を付加し、記憶装置５０又は記憶媒体５２により記憶させる。

図９は、動画生成部７０により生成される動画の一例について示す模式図であり、図９（ａ）は、８枚の静止画９０それぞれから８枚の部分画像９２を抽出する様子を示す図であり、図９（ｂ）は、８枚の部分画像９２から生成された動画用フレーム画像それぞれについて順に並べて示した図である。

図９に示した例では、指輪を被写体にして、ターンテーブル８上の各回転位置で８枚の静止画を撮影し、各静止画から領域変動抽出により部分画像を抽出している。具体的には、最初の静止画から最後の静止画にかけて、徐々に、画像領域の大きさが縮小しつつ、かつ、画像領域の位置が右から左へと移動するよう抽出している。このように、抽出した各部分画像について、最後の静止画から抽出した部分画像の大きさにリサイズし、動画用のフレーム画像としたものが図９（ｂ）に示されている。

図９（ｂ）に示されるように、これらの動画用のフレーム画像から、指輪が徐々に拡大されつつ、左から右へと移動する所望の撮影品質の動画が作成される。

以上説明した実施形態では、動画作成システム２として、画像出力部６８から出力された部分画像群から動画を生成するまでの処理を行うシステムについて説明したが、例えば、動画用フレーム画像作成システムとして画像出力部６８による出力までの処理を行うシステムとして構築し、動画生成部７０については、動画用フレーム画像作成システムとは異なる他のソフトウェア又はハードウェアにより実現されてもよい。

また、以上説明した実施形態では、画像出力部６８から出力された部分画像群から動画を生成する例を説明したが、フレームレートとしては、２４〜６０[fps]に限らず、これ以上のフレームレートでも、これ以下のフレームレートであってもよい。さらに、次のフレーム画像への切り替えまでの間隔が一定ではなくてもよいし、自動に切り替わらなくてもよい。具体的には、例えば、画像出力部６８から出力されるフレーム画像について、使用者の操作によりフレーム画像が順次表示されるよう構成してもよい。このような構成として、例えば、使用者による、次のフレーム画像への切り替えを指示する操作を契機に、次のフレーム画像が表示されるよう構成し、使用者が操作を繰り返すことにより、順次、フレーム画像が表示されるよう構成してもよい。なお、次のフレーム画像への切り替えを指示する操作としては、フレーム画像を表示するタッチパネルに対する使用者の操作であってもよい。

２ ：動画作成システム
４ ：カメラ
６ ：カメラ制御部
８ ：ターンテーブル
１０ ：移動制御部
１２ ：画像処理装置
１４ ：被写体
３０ ：昇降機
６０ ：設定部
６２ ：制御部
６４ ：静止画取得部
６６ ：抽出部
６８ ：画像出力部
７０ ：動画生成部

Claims (12)

1. 開始位置から予め定められた任意の回転位置まで移動するように回転軸上に配置された被写体を複数の回転移動位置で停止させて、固定されたカメラにより撮影した静止画を取得する静止画取得手段と、
   前記静止画取得手段により取得した被写体を含む複数の静止画それぞれの一部を部分画像として抽出する抽出手段と、
   前記抽出手段により抽出した部分画像に基づく動画用のフレーム画像を出力する画像出力手段と、
   前記画像出力手段により出力されたそれぞれ異なる静止画を有する複数の動画用のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成する動画生成手段と、を有し、
   前記抽出手段は、画像領域が異なる部分画像をそれぞれ抽出する
   画像処理装置。
2. 前記抽出手段は、部分画像における被写体の位置が異なるように、複数の静止画からそれぞれ部分画像を抽出する
   請求項１記載の画像処理装置。
3. 前記抽出手段は、画像領域を指定する関数を用いて、部分画像が抽出されるごとに各部分画像の画像領域が順次、前記関数に応じて移動するよう抽出する
   請求項２記載の画像処理装置。
4. 前記抽出手段は、画像領域の大きさが異なるように、複数の静止画からそれぞれ部分画像を抽出し、
   前記画像出力手段は、前記抽出手段により抽出された部分画像を、動画用のフレーム画像の大きさとして予め定められた大きさの部分画像に変換して出力する
   請求項１乃至３いずれか記載の画像処理装置。
5. 開始位置から予め定められた任意の回転位置まで移動するように回転軸上に配置された被写体を複数の回転移動位置で停止させて、固定されたカメラにより撮影した静止画を取得し、
   取得した被写体を含む複数の静止画それぞれの一部を画像領域が異なる部分画像として抽出し、
   抽出した部分画像をフレーム画像として出力し、
   出力されたそれぞれ異なる静止画を有する複数のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成する
   画像処理方法。
6. 被写体を開始位置から予め定められた任意の回転位置まで移動するように被写体を回転軸上に配置して複数の回転移動位置に移動し、
   複数の回転移動位置で被写体を停止させて、固定されたカメラにより撮影し、
   撮影した静止画を取得し、
   取得した被写体を含む複数の静止画それぞれの一部を画像領域が異なる部分画像として抽出し、
   抽出した画像をフレーム画像として出力し、出力されたそれぞれ異なる静止画を有する複数のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成する
   動画作成方法。
7. 前記カメラにより、複数のフレーム画像を結合して生成する動画のフレームレートの逆数よりも長いシャッター速度で前記被写体を撮影する
   請求項６記載の動画作成方法。
8. 被写体を撮影する固定されたカメラと、
   開始位置から予め定められた任意の回転位置まで移動するように回転軸上に配置された被写体を回転移動させる移動手段と、
   前記移動手段により移動する複数の回転移動位置で停止させて前記カメラにより撮影した静止画を取得する静止画取得手段と、
   前記静止画取得手段により取得した被写体を含む複数の静止画それぞれの一部を画像領域が異なる部分画像として抽出する抽出手段と、
   前記抽出手段により抽出した部分画像に基づく動画用のフレーム画像を出力する画像出力手段と、
   前記画像出力手段により出力されたそれぞれ異なる静止画を有する複数の動画用のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成する動画生成手段と
   を有する動画作成システム。
9. 前記移動手段による被写体の移動を制御する移動制御手段
   をさらに有する請求項８記載の動画作成システム。
10. 被写体の複数の移動位置における前記カメラによる撮影を制御するカメラ制御手段
    をさらに有する請求項８又は９記載の動画作成システム。
11. 前記カメラ制御手段は、前記移動手段による回転移動が停止したのと同期して前記カメラで被写体を撮影するように制御する
    請求項１０記載の動画作成システム。
12. 開始位置から予め定められた任意の回転位置まで回転移動するように被写体を回転軸上に配置した被写体を複数の回転移動位置で停止させて、固定されたカメラにより撮影した静止画を取得するステップと、
    取得した被写体を含む複数の静止画それぞれの一部を画像領域が異なる部分画像として抽出するステップと、
    抽出した部分画像に基づく動画用のフレーム画像を出力するステップと、
    出力されたそれぞれ異なる静止画を有する複数の動画用のフレーム画像を２４〜６０［fps］のうちいずれかのフレームレートで結合して動画を生成するステップと
    をコンピュータに実行させるプログラム。

Images