JP2014082731A - 動画像データ処理装置及び動画像データ処理方法 - Google Patents

Abstract

【課題】異なるフレームレートで生成された動画像データを、簡易に所定のフレームレート及び再生速度で再生する。
【解決手段】動画像データ入力部２０６に、第１フレームレートで生成された第１動画像データ、及び第２フレームレートで生成された第２動画像データが入力される。入力フレームレート特定部３０３は、入力された各動画像データから、第１及び第２フレームレートを特定する。出力フレームレート特定部３０４は、各動画像データを出力する出力フレームレートを特定し、再生速度特定部３０５は各動画像データに対して同一の再生速度を特定する。フレームレート変換部３０６が、第１フレームレート・再生速度・出力フレームレートに基づいて第１動画像データの、第２フレームレート・再生速度・出力フレームレートに基づいて第２動画像データのフレームレートを変更し、動画像データ出力部２０６が変更された各動画像データを出力する。
【選択図】図１

Description

本発明は動画像データ処理装置及び動画像データ処理方法に関し、より詳細には、様々なフレームレートで生成された動画像データを、所定のフレームレート及び再生速度で簡易に再生することを可能とする動画像データ処理装置及び動画像データ処理方法に関する。

近年、撮像データ毎に異なるフレームレートを使用して、各種風景や被写体の撮像をユーザが行うことが、業務用の撮像装置だけでなく家庭用の撮像装置においても一般化している。異なるフレームレートを用いた撮像の例を挙げると次の通りである。

旅行やユーザの家族の誕生日会における風景等の撮像では、３０ｆｐｓ（Frames Per Second）や６０ｆｐｓといった一般的なフレームレートが使用される。それに対し、被写体の動きが速い場合でも滑らかにその被写体の動きを認識できる撮像データをユーザが得たい場合、例えばスポーツシーン等を撮像する場合は、３００ｆｐｓや６００ｆｐｓといった高いフレームレートが使用される。また、長時間かけて微妙に変化していく被写体をユーザが撮像する場合、例えば植物の生育風景を撮像する場合は、１／２０ｆｐｓや１／８０ｆｐｓといった低いフレームレートが使用される。

なお、ここでいう１／２０ｆｐｓや１／８０ｆｐｓといった１／Ｎｆｐｓ（Ｎは１以上の整数）のフレームレートは、Ｎ秒間毎に、所定の瞬間を捉えた１枚の静止画に係るフレームが都度生成されるレートを意味している。従って、例えば１／２０ｆｐｓでは、２０秒間毎に訪れる特定の瞬間の風景・被写体が撮像されたフレームが都度生成されていくことになる。

このように、撮像時において様々なフレームレートで生成された撮像データは、鑑賞時にはその目的に応じて様々なフレームレート及び再生速度で再生可能となることが望ましい。また再生装置によっては、６０ｆｐｓだけといったように、そもそも限られたフレームレートでしか撮像データを再生できないものもある。

例えば、スポーツシーンを撮像して生成された、６００ｆｐｓの１０分間の撮像データは、被写体画像の滑らかな動きの鑑賞を目的とする場合は、６００ｆｐｓで１０分間かけて再生されることが望ましいだろう。一方でスローモーションで再生して被写体画像の微細な点の確認を目的とする場合は、より低いフレームレートで（例えば、６０ｆｐｓ）、より遅い再生速度で（例えば、全撮像データの再生を１００分間で行う再生速度）で再生されることが望ましいだろう。

また、そもそもユーザが鑑賞時に使用する表示装置が、限られたフレームレート（例えば、６０ｆｐｓ）だけに対応している場合は、フレーム間引きや補完の処理が施された上で（例えば、全フレームが１／１０となるように間引き）、開始から終了までの再生時間が、もともとの撮像データと同じ１０分間となるようにして、同じ再生速度での再生が可能であることも望ましいだろう。加えて、この場合でも、再生速度をより早くしたり遅くしたりすることができることも望ましいだろう。

通常より低いフレームレートで生成された動画像データについても同様である。
撮像時に１２ｆｐｓのフレームレートで生成された撮像データは、鑑賞時は、より高いフレームレートで再生されることで、撮像時間よりも短い時間で被写体の変化を鑑賞することに通常は用いられるだろう。一方で、ある変化の段階を詳細に確認する場合や、ある変化の段階に編集作業を施す場合等は、その鑑賞よりも遅い速度での再生が望まれるだろう。

様々なフレームレートによって撮像データ、つまり動画像データを生成することが一般化しつつある反面、それらの動画像データを所望のフレームレートや再生速度でユーザが再生する環境については改善の余地が多い。例えば、異なるフレームレートで生成された複数の撮像データを順次・連続して再生することをユーザが望んだとしても、各撮像データ毎に、再生に用いるフレームレートや再生速度が適宜設定されなければならないという環境にいるユーザは多い。また、前述した通りそもそもユーザの有するディスプレイ装置が３０ｆｐｓや６０ｆｐｓといった限られたフレームレートしか再生できないこともある。

前述のような状況を鑑み、異なるフレームレートで撮像データ（動画像データ）を生成するとともに、異なるフレームレートで生成された複数の動画像データをより簡便にユーザが再生するための撮像装置や再生装置が開発されている。例えば特許文献１には、撮影者の意図したスローモーションあるいはクイックモーションの速度での再生を簡易な操作で実現することが出来る動画撮影装置及び動画再生装置が記載されている。

この特許文献１に記載の動画撮影装置は、動画撮影するときの単位時間あたりのフレーム数を示す記録フレームレートと、動画撮影したフレームのうち動画再生対象である有効フレームの単位時間あたりのフレーム数を示す有効フレームレートと、その有効フレームを再生するときの単位時間辺りのフレーム数である再生フレームレートとを、それぞれ任意に設定するフレームレート設定部を有する。そして記録フレームレート、有効フレームレート、及び再生フレームレートのそれぞれが関連付けられて記録媒体に記録される。動画再生装置等がこれらの情報を再生時に参照することで、ユーザは撮影者が意図したスローモーションあるいはクイックモーションの再生や、それらの再生速度を変更した場合の滑らかな再生を行うことが可能となっている。

特開２００８−２８８９３４号公報

しかし上記特許文献１に記載の撮影装置では、撮像データの生成時に、記録フレームレート、再生フレームレート、及び有効フレームレートの設定と記録が行われている。従って、再生時のフレームレートを、撮像時に設定した３種類とは異なるものに変更したいとユーザが望んでも、これらの何れかのフレームレートでしか撮像データを再生することが出来ないという問題を有していることが推察される。再生速度についても同様である。

そして、異なるフレームレートからなる複数の撮像データが順次・連続して再生される際に、それらの再生に用いるフレームレートや再生速度を所定のものにしたいユーザが望んだ場合は、ユーザは再生時を想定して撮像時のフレームレートを設定しなければならないという問題を有することも推察される。加えて、そもそも撮像時に、記録フレームレート、再生フレームレート、及び有効フレームレートの３種類のフレームレートを想定し設定することはユーザにとって煩雑であり、撮像装置の処理にも負担となるという問題も推察される。

そこで本発明は、異なるフレームレートで生成された動画像データを、所定のフレームレート及び再生速度で簡易に再生することを可能とする動画像データ処理装置及び動画像データ処理方法を提供することを目的とする。

上述した課題を解決するため本発明は、第１フレームレートで生成された第１動画像データ、及びその第１フレームレートとは異なる第２フレームレートで生成された第２動画像データが入力される動画像データ入力部（２０６、２１１、又は２１３）と、前記動画像データ入力部に入力された前記第１動画像データの第１フレームレート、及び前記第２動画像データの第２フレームレートを特定する入力フレームレート特定部（３０３）と、前記動画像データ入力部（２０６、２１１、又は２１３）に入力された前記第１動画像データと前記第２動画像データの出力フレームレートを特定する出力フレームレート特定部（３０４）と、前記第１動画像データ及び前記第２動画像データに対して同一の再生速度を特定する再生速度特定部（３０５）と、前記第１フレームレート、前記出力フレームレート、及び前記差再生速度に基づいて、前記第１動画像データのフレームレートを変更し、前記第２フレームレート、前記出力フレームレート、及び前記再生速度に基づいて、前記第２動画像データのフレームレートを変更するフレームレート変換部（３０６）と、前記フレームレート変換部（３０６）がフレームレートを変換した前記第１動画像データ及び前記第２動画像データを出力する動画像データ出力部（２０６、２１１、又は２１３）とを有することを特徴とする動画像データ処理装置（１）を提供する。
上記動画像データ処理装置（１）は、前記再生速度を指定する入力を受付ける操作部（２０９）をさらに備え、前記再生速度特定部（３０５）は、前記操作部（２０９）に受付けられた入力に基づいて、前記再生速度を特定してもよい。
また本発明は、第１フレームレートで生成された第１動画像データ、及びその第１フレームレートとは異なる第２フレームレートで生成された第２動画像データが入力されるステップと、入力された前記第１動画像データの第１フレームレート、及び前記第２動画像データの第２フレームレートが特定されるステップと、入力された前記第１動画像データと前記第２動画像データの出力フレームレートが特定されるステップと、前記第１動画像データ及び前記第２動画像データに対して同一の再生速度が特定されるステップと、前記第１フレームレート、前記出力フレームレート、及び前記差再生速度に基づいて、前記第１動画像データのフレームレートが変更され、前記第２フレームレート、前記出力フレームレート、及び前記再生速度に基づいて、前記第２動画像データのフレームレートが変更されるステップと、フレームレートが変換された前記第１動画像データ及び前記第２動画像データが出力されるステップとを有する動画像データ処理方法を提供する。

本発明に係る動画像データ処理装置及び動画像データ処理方法によれば、異なるフレームレートで生成された動画像データを、簡易に所定のフレームレート及び再生速度で再生することが可能となる。

撮像装置１の概略的な内部構成を示すブロック図である。 撮像装置１の外観を示す外観図である。 撮像装置１による撮像処理を説明するためのフローチャートである。 撮像モード及び撮像フレームレートを選択する画面の一例を示す図である。 撮像装置１が撮像中にモニタに表示することができる画像の模式図である。 撮像装置による動画像データの再生処理を説明するためのフローチャートである。 ユーザに出力フレームレートの選択を促す画像の表示を模式的に示した図である。 ユーザに再生速度の選択を促す画像の表示を模式的に示した図である。 出力された動画像データの表示態様を説明するための模式図である。 低フレームレート、高速再生を選択するときの表示の一例を示した図である。 通常フレームレート、等速再生を選択するときの表示の一例を示した図である。 高フレームレート、低速再生を選択するときの表示の一例を示した図である。

以下に図面を参照しながら、本発明に係る動画像データ処理装置及び動画像データ処理方法の好適な実施形態を説明する。かかる実施形態に示す具体的な数値等は、発明の理解を容易とするための例示にすぎず、特に断る場合を除き、本発明を限定するものではない。なお本明細書及び図面において、実質的に同一の機能・構成を有する要素については、同一の符号を付することにより重複説明を省略し、また本発明に直接関係のない要素は図示を省略する。

（撮像装置１の全体構成及び外観）
まず、本実施形態に係る撮像装置１の構成及び外観について、図１及び図２を参照して説明する。図１は撮像装置１の概略的な内部構成を示すブロック図である。図２は撮像装置１の外観を示す外観図である。図２（ａ）は、撮像装置１を前方から見た斜視図を示している。図２（ｂ）は、撮像装置１を後方から見た斜視図を示している。なお、撮像装置１は動画像の撮像、及び静止画像の撮像を行うことができる。

中央制御部３００は、ＣＰＵ（Central Processing Unit）、各種プログラムが格納されたＲＯＭ（Read Only Memory）、及びワークエリアとしてのＲＡＭ（Random
Access Memory）等を含む半導体集積回路により構成される。この中央制御部３００は、後述する撮像処理つまり動画像データの生成処理、及び動画像データの再生処理を統括的に制御する。また中央制御部３００は、様々な設定をユーザが行うためのメニュー画像等の各種画像の表示処理、各種データの生成・記録処理、及び撮像部１００の制御処理といった、その他の各種処理も統括的に制御する。これらの制御に関する指示はバス２００を介して後述する各部に送られる。

撮像装置１は、ズームレンズ１０１、絞り１０２、フォーカスレンズ１０３、及び撮像素子１０４で構成される撮像部１００を備える。ズームレンズ１０１は図示しないズームアクチュエータによって光軸ＬＡに沿って移動する。同様に、フォーカスレンズ１０３は、図示しないフォーカスアクチュエータによって光軸ＬＡに沿って移動する。絞り１０２は、図示しない絞りアクチュエータに駆動されて露光調整を行う。撮像素子１０４は、ＣＭＯＳ（Complementary
Metal Oxide Semiconductor）又はＣＣＤ（Charge Coupled Device）等からなる。撮像部１００の外観は図２に示した通りである。

ズームレンズ１０１、絞り１０２、及びフォーカスレンズ１０３を通過した光は、撮像素子１０４によって光電変換されアナログ画像信号となる。アナログ画像信号処理部１０５が、このアナログ画像信号を増幅等する。そして画像Ａ／Ｄ変換部１０６が、その増幅された信号をデジタル画像データに変換する。

画像入力コントローラ１０７は、画像Ａ／Ｄ変換部１０６から出力されたデジタル画像データを撮像データとして取り込んで、バス２００を介してメインメモリ２０１に格納する。

このときＡ／Ｄ変換部１０６から出力されたデジタル画像データは、デジタル信号処理部１０８によって所定の信号処理を施され輝度信号と色差信号とからなる撮像データに変換される。デジタル信号処理部１０８はまた、オフセット処理、ホワイトバランス調整処理、ガンマ補正処理、ＲＧＢ補完処理、ノイズ低減処理、輪郭補正処理、色調補正処理、光源種別判定処理等の各種デジタル処理を行う。

マイク１０９は撮像時の周囲の音声を周音し、アナログ音声信号を生成する。アナログ音声信号処理部１１０がそのアナログ音声信号を増幅する。そして音声Ａ／Ｄ変換部１１１が、その増幅された信号をデジタル音声データに変換する。音声入力コントローラ１１２は、音声Ａ／Ｄ変換部１１１から出力されたデジタル音声データを撮像データと併せてメインメモリ２０１に格納する。

圧縮・伸長処理部２０２は、メインメモリ２０１に格納された各種データに所定の圧縮処理を施し、圧縮データを生成する。また圧縮・伸長処理部２０２は、中央制御部３００からの指令に従い、カード型記録媒体２１２等に格納された圧縮データに所定形式の伸張処理を施し、非圧縮データを生成する。なお、本実施の形態の撮像装置１では、静止画像に対してはＪＰＥＧ規格に準拠した圧縮方式が、動画像に対してはＭＰＥＧ２規格、ＡＶＣ／Ｈ．２６４規格、又はＭｏｔｉｏｎ ＪＰＥＧ規格等に準拠した圧縮方式が採用される。

多重化部２０３は、デジタル画像データ及びデジタル音声データをはじめとした各種データを多重化してストリームデータを生成する。

音声・画像処理部２０４は、メインメモリ２０１から読み出された上述のデジタル画像データに所定の画像処理を施したり、モニタ２０７に表示される画像に係る画像データを別途生成したりする。例えば、音声・画像処理部２０４は、後述する＜撮像モード＞の選択をユーザに促す画像をはじめとして、撮像装置１の設定に関する各種メニュー画像に係る画像データを生成する。また音声・画像処理部２０４は、カード型記録媒体２１２等に記録された撮像データについて、サムネイル画像とともに、その数や内容等をユーザに提示する画像に係る画像データを生成する。生成されたこれらの画像データは入出力Ｉ／Ｆ２０６を介してモニタ２０７等に出力される。

ＶＲＡＭ２０５は、表示用の画像データの一時記憶領域として使用される。またメインメモリ２０１は、各種画像データの一時記憶領域として使用されるとともに、中央制御部１００の演算作業領域としても使用される。

モニタ２０７、スピーカ２０８、操作部２０９、及び入出力端子２１０は入出力Ｉ／Ｆ２０６に接続されている。以下に、各部について説明する。

モニタ２０７は、例えば液晶ディスプレイや有機ＥＬ（Electroluminescence）ディスプレイから構成されている。モニタ２０７は、メインメモリ２０１に一時記憶される撮像データをいわゆるスルー画像として表示したり、カード型記録媒体２１２等に記録された画像データを表示したりする。スピーカ２０８は、カード型記録媒体２１２等に記録された画像データに付随する音声等を出力する。

操作部２０９は、図２の外観図に示したようなレリーズボタン２０９ａ、ボタン２０９ｂ及び２０９ｃ、ダイヤル２０９ｄ及び２０９ｅ、図示しない操作キー、十字キー、レバー、又はモニタ２０７上に重畳されたタッチパネル等から構成される。操作部２０９は、撮像の開始・終了をはじめとした、ユーザの撮像装置１への各種の操作入力、又は設定に関する入力等を受け付ける。詳細は後述するが、撮像装置１では、ユーザは、操作部２０９である、ボタン２０９ｂ及びダイヤル２０９ｄを使用して、撮像時及び再生時に、動画像データのフレームレート等を変更・設定することができる。

入出力端子２１０は、図示しない外部機器、例えばテレビをはじめとしたディスプレイ装置やＰＣ（Personal Computer）等との接続に使用される。この入出力端子２１０を介して、各種のデータが撮像装置１と外部機器との間で入出力される。入出力端子３０７は、例えばＨＤＭＩ（High-Definition
Multimedia Interface）（登録商標）端子やＵＳＢ（Universal Serial Bus）端子等から構成される。

メインメモリ２０１に記録された撮像データをはじめとした各種データは、カードＩ／Ｆ２１１を介してカード型記録媒体２１２に出力され、このカード型記録媒体に記録される。カード型記録媒体２１２としては、撮像装置１に着脱可能なＳＤ（Secure
Digital）メモリカード等が使用される。なお、カード型記録媒体２１２の替りに、ＤＶＤ、ＢＤ（Blu-ray
Disc）（登録商標）、若しくはフラッシュメモリ等の他の記録媒体を使用してもよい。また撮像装置１は、これらの記録媒体の代わりに、又はこれらの記録媒体と併用する、各種メモリを内蔵する等の構成としてもよい。

無線モジュール２１４は、無線Ｉ／Ｆ２１３を介して外部機器との間で各種データを無線ネットワーク通信により送受信する。この無線ネットワーク通信には、例えばＩＥＥＥ８０２．１１シリーズを利用した方式が利用される。

中央制御部３００は、上記各部を統括的に制御するとともに、撮像フレームレート決定部３０１、撮像フレームレート情報生成部３０２、入力フレームレート特定部３０３、出力フレームレート特定部３０４、再生速度特定部３０５、及びフレームレート変換部３０６としても機能する。以下に各部について説明する。

撮像フレームレート決定部３０１は、動画像の撮像、つまり撮像装置１による撮像データの取得・生成をユーザが行うときのフレームレート（以下、単に撮像フレームレートと言う。）を決定する。以下では撮像データを、動画像データと記載することもある。

ユーザは例えば、＜通常撮像モード＞として６０ｆｐｓ、＜ハイスピード撮像モード＞として１８０ｆｐｓ、３００ｆｐｓ、又は６００ｆｐｓ、そして＜タイムラプス撮像モード＞として１／１０ｆｐｓ、１／２０ｆｐｓ、又は１／８０ｆｐｓの、計７種類のフレームレートの中から動画像データのフレームレートを選択する。図２（ａ）に示したボタン２０９ｂが押下されると、モニタ２０７が、これらのフレームレートに係る選択肢を提示する画像を表示する。ユーザは、同じく図２（ａ）に示したダイヤル２０９ｄを回転させて、この画像に含まれるカーソル画像を移動させ、所望のフレームレートを選択して設定する。

ユーザによって所望のフレームレートが選択されると、撮像フレームレート決定部３０１は、その選択されたフレームレートを撮像フレームレートとして決定する。例えば、ユーザが６００ｆｐｓのフレームレートを選択すると、その選択された６００ｆｐｓにて以降の撮像データが取得・生成される。

撮像装置１では、ダイヤル２０９ｄを回転させるだけで、ユーザが簡単にフレームレートを変更させることができる。これにより、ユーザが、あるフレームレートで撮像データが生成された後、ダイヤル２０９ｄの操作により別のフレームレートへと迅速に設定を切り替え、別の動画像データを生成することが可能となる。従って、ある撮像データの終了時点と、次の撮像データの開始時点、つまり複数の撮像データの撮像間隔を短くしても、異なるフレームレートの撮像データを生成することが可能となる。

撮像フレームレート情報生成部３０２は、撮像フレームレート決定部３０１が決定した撮像フレームレートを示す情報（以下、単に撮像フレームレート情報と言う。）を生成する。生成された撮像フレームレート情報は、取得・生成された撮像データと関連付けられる。撮像フレームレート情報をメタデータとしてＸＭＬ形式等のファイル形式で生成し、撮像データを紐付けて記録する方法、又は生成された撮像フレームレート情報を、多重化部２０３が生成するデータストリームの所定の領域、例えばヘッダ領域に埋め込む方法等によって、この関連付けが行われることが考えられる。

入力フレームレート特定部３０３は、入出力Ｉ／Ｆ２０６、カードＩ／Ｆ２１１、又は無線Ｉ／Ｆ２１３から入力された動画像データのフレームレート（以下、単に入力フレームレートという。）を特定する。入力される動画像データとしては、撮像装置１が生成した撮像データ、及び撮像装置１ではない外部機器が生成した動画像データの双方が想定される。

また、入力フレームレートの特定方法としては、上述した撮像フレームレート情報に基づいて行われる方法、入力された動画像データを解析することで行われる方法等が考えられる。すなわち、撮像フレームレート情報又はそれに類する情報が、所定のデータ領域に記載されている場合、又はメタデータとして存在する場合は、それらに基づいて入力フレームレートが特定される。一方で、撮像フレームレート情報又はそれに類する情報が存在しない場合は、メインメモリ２０１に一時記憶された動画像データのフレーム構成の解析により入力フレームレートが特定される。

出力フレームレート特定部３０４は、入出力Ｉ／Ｆ２０６、カードＩ／Ｆ２１１又は無線Ｉ／Ｆ２１３から動画像データを出力する際の、その出力される動画像データのフレームレート（以下、単に出力フレームレートと言う。）を特定する。この出力フレームレートの特定の方法としては、ユーザの選択に基づく方法、及び出力先の外部機器の設定に基づく方法等が考えられる。

まず、ユーザの選択に基づく出力フレームレートの特定方法について説明する。撮像装置１は、中央制御部３００のＲＯＭに記録された設定・情報に基づき、６０ｆｐｓ、６００ｆｐｓ、３００ｆｐｓ、１８０ｆｐｓ、１／１０ｆｐｓ、１／２０ｆｐｓ、及び１／８０ｆｐｓの７つのフレームレートで動画像データを出力することができる。モニタ２０７がこれら７つの選択肢を提示する画像を表示し、ユーザが操作部２０９を用いて所望のフレームレートを選択する。出力フレームレート特定部３０４は、選択されたフレームレートを出力フレームレートとして特定する。

ユーザは、上述した撮像フレームレートの選択・設定と同様に、図２（ａ）に示したボタン２０９ｂとダイヤル２０９ｄとを使用して、出力フレームレートを選択・設定することができる。つまり、図２（ａ）に示したボタン２０９ｂが押下されると、モニタ２０７が、これらのフレームレートに係る選択肢を提示する画像を表示する。ユーザは、同じく図２（ａ）に示したダイヤル２０９ｄを回転させて、この画像に含まれるカーソル画像を移動させ、所望のフレームレートを選択して設定する。

次に、動画像データの出力先となる外部機器の設定に基づく出力フレームレートの特定方法について説明する。出力フレームレート特定部３０４は、入出力Ｉ／Ｆ２０６又は無線Ｉ／Ｆ２１３を介して外部機器側で設定された動画像データの再生に係るフレームレートの情報を取得し、その取得された情報に基づいて出力フレームレートを特定することもできる。

さらに、出力先となる外部機器のフレームレートが限られている場合、例えば６０ｆｐｓのみに限られている場合等は、接続された外部機器の型番の情報を取得し、その情報に基づいて出力フレームレートを特定することもできる。この場合は、取得された型番の情報と、予め中央制御部３００のＲＯＭに記録された型番と再生可能なフレームレートとの対応情報とに基づいて出力フレームレートを特定する。

再生速度特定部３０５は、出力される動画像データの再生速度を特定する。再生速度は、撮像が開始時点ｔ１から終了時点ｔ２までの間の時間Ｔだけ行われて、生成された撮像データを、同じく時間Ｔだけかけて開始から終了まで再生される場合の再生速度を通常再生速度とし、この通常再生速度に対する相対速度で規定される。すなわち通常再生速度と同じ再生速度の場合を等速とし、この通常再生速度よりも速く再生する場合を高速、遅く再生する場合を低速とする。

ユーザは、図２（ａ）に示したボタン２０９ｂ及びダイヤル２０９ｄを使用して、再生速度を選択・設定することができる。すなわちユーザが、２０９ｄを押下すると、モニタ２０７に再生速度を選択するための画像が表示される。ユーザは、ダイヤル２０９ｄを回転させて、この画像に含まれるカーソル画像を移動させ、所望の再生速度を選択して設定する。再生速度特定部３０５は、この設定から、出力される動画像データの再生速度を特定する。また例えば、等速再生のみといったように、予め定められた再生速度（例えば、等速のみ）が用いられてもよい。この場合は、再生速度特定部３０５は、この予め定められた再生速度を、出力される動画像データの再生速度として特定する。

フレームレート変換部３０６は、特定された出力フレームレート及び再生速度に基づいて、入力された動画像データのフレームレートを変換する。このフレームレートの変換は、前述の例で述べた間引きのほかにも補間等の既知の手法に基づいて行われる。出力フレームレート及び再生時間に基づくフレームレートの変換の処理の詳細は後に記載した（撮像装置１による動画像データの再生処理）の中で説明する。

撮像装置１を以上のような構成とすることで、異なるフレームレートで生成された動画像データを、所定のフレームレート及び再生速度で簡易に再生することが可能となる。

（撮像装置１による撮像処理）
次に、本実施形態に係る撮像装置１による撮像処理（方法）、つまり動画像データの生成処理（方法）について説明する。図３は、撮像装置１による撮像処理を説明するためのフローチャートである。

ユーザは撮像を開始するにあたり、まず撮像モードを決定し、各撮像モードに応じた撮像フレームレートの中から任意の撮像フレームレートを選択する（ステップＳ１０１）。撮像装置１は、撮像モードとして＜通常撮像モード＞、＜ハイスピード撮像モード＞、及び＜タイムラプス撮像モード＞の３つのモードを有している。

＜通常撮像モード＞は、ユーザの日常風景、誕生日会等のイベント、又は旅行といった一般的な撮像シーンにおいて最も頻繁に使用されることを想定した撮像モードである。この撮像モードでは６０ｆｐｓにて撮像データが生成される。＜ハイスピード撮像モード＞は、スポーツシーンをはじめとして、被写体の動きが速い場合でも滑らかに再生される動画像データをユーザが得たい場合に使用されることを想定した撮像モードである。この撮像モードでは、６００ｆｐｓ、３００ｆｐｓ、及び１８０ｆｐｓの３種類の撮像フレームレートの中から、ユーザが所望の撮像フレームレートを選択することができる。＜タイムラプス撮像モード＞は、植物の生育状況や雲の動き等、長時間にわたって微小な変化をする対象をユーザが撮像する際に使用されることを想定した撮像モードである。この撮像モードでは、１／１０ｆｐｓ、１／２０ｆｐｓ、又は１／８０ｆｐｓの３種類の撮像フレームレートの中から、ユーザが所望の撮像フレームレートを選択することができる。

撮像モードを選択する旨の指示が操作部２０９であるボタン２０９ｂを介して入力されると、音声・画像処理部２０４は、図４（ａ）に示したような撮像モードの選択をユーザに促す画像Ｇ４１に係る画像データを生成する。そしてモニタ２０７が、その画像Ｇ４１を表示する。この選択を促す画像Ｇ４１は、＜通常撮像モード＞の選択画像Ｇ４１Ａ、＜ハイスピード撮像モード＞の選択Ｇ４１Ｂ、及び＜タイムラプス撮像モード＞の選択画像Ｇ４１Ｃから構成される。

ユーザが、ダイヤル２０９ｄを回動させて、不図示のカーソル画像を選択画像Ｇ４１Ａに合わせると、＜通常撮像モード＞が選択される。そして撮像フレームレート決定部３０１は撮像フレームレートを６０ｆｐｓに決定する。

ユーザが、ダイヤル２０９ｄを回動させて、不図示のカーソル画像を選択画像Ｇ４１Ｂに合わせると、＜ハイスピード撮像モード＞が選択される。そして、音声・画像処理部２０４は図４（ｂ）に示したような撮像フレームレートの選択を促す画像Ｇ４２を生成する。そしてモニタ２０７がこの画像Ｇ４２を表示する。この選択を促す画像Ｇ４２は、６００ｆｐｓの選択画像Ｇ４２Ａ、３００ｆｐｓの選択画像Ｇ４２Ｂ、及び１８０ｆｐｓの選択画像Ｇ４２Ｃからなる。

ユーザは、ダイヤル２０９ｄを回動させて、選択画像Ｇ４２Ａ、Ｇ４２Ｂ、又はＧ４２Ｃの何れかに、不図示のカーソル画像をあわせ＜ハイスピード撮像モード＞のフレームレートを選択する。撮像フレームレート決定部３０１は、選択されたフレームレートを撮像フレームレートとして決定する。

図４（ａ）に戻り、ユーザが、ダイヤル２０９ｄを回動させて、不図示のカーソル画像を選択画像Ｇ４１Ｃに合わせると、＜タイムラプス撮像モード＞が選択される。そして、音声・画像処理部２０４は、図４（ｃ）に示したような撮像フレームレートの選択を促す画像Ｇ４３を生成する。そしてモニタ２０７がこの画像Ｇ４３を表示する。この選択を促す画像Ｇ４３は、６００ｆｐｓの選択画像Ｇ４３Ａ、３００ｆｐｓの選択画像Ｇ４３Ｂ、及び１８０ｆｐｓの選択画像Ｇ４３Ｃからなる。

ユーザは、ダイヤル２０９ｄを回動させて、選択画像Ｇ４３Ａ、Ｇ４３Ｂ、又はＧ４３Ｃの何れかに、不図示のカーソル画像をあわせ＜タイムラプス撮像モード＞のフレームレートを選択する。撮像フレームレート決定部３０１は、選択されたフレームレートを撮像フレームレートとして決定する。

上記では＜通常撮像モード＞、＜ハイスピード撮像モード＞、及び＜タイムラプス撮像モード＞の各撮像モードを選択する画像を経てから、各撮像フレームレートの選択が行われる場合を例示したが、撮像フレームレートの選択方法はこれに限られない。例えば、各撮像モードの選択画像を示さずに、フレームレートの選択画像のみが、ダイヤル２０９ｄの操作に応じて変更・選択されるようにしてもよい。

図３に戻り、上記のようにして撮像モードが設定され、撮像フレームレートが選択されると（ステップＳ１０１でＹＥＳ）、中央制御部３００は、ＲＯＭに予め記録されている情報に基づき撮像フレームレートを変更する（ステップＳ１０２）。ユーザが撮像モードの設定を行わなかった場合（ステップＳ１０１でＮＯ）、撮像フレームレートは変更されることなく、前回使用された撮像フレームレート、又は電源投入時に予め設定されることになる撮像フレームレートがそのまま使用される。

中央制御部３００が、上記のようにして撮像フレームレートの変更等を行うと、撮像フレームレート決定部３０１は、以降の撮像に係る撮像データのフレームレートとして、その変更等がなされた撮像フレームレートを決定する（ステップＳ１０３）。

ユーザが操作部２０９の録画ボタンを押下して録画（撮像）を開始すると（ステップＳ１０４でＹＥＳ）、まず、生成されることになる撮像データの撮像フレームレート情報が生成される（ステップＳ１０５）。そして、撮像フレームレートに基づいて順次フレームが生成され、撮像データが生成される（ステップＳ１０６）。

このときモニタ２０７は、生成された撮像データに係るスルー画像を表示する。このスルー画像には、ユーザが選択した撮像モード及び撮像フレームレートを示す画像が、それぞれ重畳される。図５は表示されるスルー画像の例を模式的に示した図である。

音声・画像処理部２０４は、ステップＳ１０１の撮像モードの設定処理において、ユーザが行った選択に係る入力情報に基づいて、選択された撮像モードを示す画像Ｇ５２に係る画像データを生成する。また、撮像フレームレート情報に基づいて、撮像フレームレートを示す画像Ｇ５３に係る画像データを生成する。

ユーザが操作部２０９の録画ボタンを離して録画を終了すると（ステップＳ１０７でＹＥＳ）、生成された撮像データ及び撮像フレームレート情報がそれぞれ関連付けられてカード型記録媒体２１２に記録される（ステップＳ１０８）。ユーザが録画ボタンを押下し続け録画を終了しない限り（ステップＳ１０７でＮＯ）、撮像データの生成が継続される。

以上のように、撮像装置１では、ユーザが録画ボタンを押下する毎に撮像データを生成する。そして生成された撮像データは、撮像フレームレート情報とともにカード型記録媒体２１２に記録される。記録される撮像データ毎に撮像フレームレートを変更・設定することができるため、ユーザはフレームレートの異なる複数の撮像データを得ることができる。

（撮像装置１による動画像データの再生処理）
続いて本実施形態に係る撮像装置１による動画像データの再生処理（方法）について説明する。図６は、撮像装置による動画像データの再生処理を説明するためのフローチャートである。

撮像装置１が動画像データを再生するにあたり、まず出力フレームレート特定部３０４が、再生のために出力される動画像データの出力フレームレートを特定する（ステップＳ２０１）。上述の通り、この出力フレームデータの特定の方法としては、ユーザの選択に基づく方法、及び出力先の外部機器の設定に基づく方法等が考えられる。

ユーザの選択に基づいて出力フレームレートが特定される場合、音声・画像処理部２０４がユーザに選択を促す画像に係る画像データを生成する。そして、この選択を促す画像がモニタ２０７に表示される。図７は、ユーザに出力フレームレートの選択を促す画像の表示を模式的に示したものである。

出力フレームレートを選択する旨の指示が操作部２０９を介して入力されると、音声・画像処理部２０４は、図７（ａ）に示したような出力フレームレートの選択をユーザに促す画像Ｇ７１に係る画像データを生成する。そしてモニタ２０７がこの画像Ｇ７１を表示する。この選択を促す画像Ｇ７１は、６００ｆｐｓの選択画像Ｇ７１Ａ、３００ｆｐｓの選択画像Ｇ７１Ｂ、１８０ｆｐｓの選択画像Ｇ７１Ｃ、６０ｆｐｓの選択画像Ｇ７１Ｄ、及び他の選択画像を表示する画像への遷移を促す画像Ｂ７１Ｅからなる。

ユーザが、ダイヤル２０９ｄを回動させて、不図示のカーソル画像を、画像Ｇ７１Ａ、Ｇ７１Ｂ、Ｇ７１Ｃ、又はＧ７１Ｄの何れかの選択画像に合わせると、各選択画像に対応したフレームレートが選択される。出力フレームレート特定部３０４は、この選択されたフレームレートを出力フレームレートとして特定する。

ユーザが、ダイヤル２０９ｄを回動させて、不図示のカーソル画像を、他の選択画像を表示する画像への遷移を促す画像Ｂ７１Ｅに合わせると、音声・画像処理部２０４が、出力フレームレートの選択をユーザに促す画像Ｇ７２に係る画像データを生成する。そしてモニタ２０７がこの画像Ｇ７２を表示する。この選択を促す画像Ｇ７２は、１／１０ｆｐｓの選択画像Ｇ７２Ａ、１／２０ｆｐｓの選択画像Ｇ７２Ｂ、１／８０ｆｐｓｆｐｓの選択画像Ｇ７２Ｃ、及び他の選択画像を表示する画像への遷移（画像Ｇ７１への戻り）を促す画像Ｂ７２Ｄからなる。

ユーザが、ダイヤル２０９ｄを回動させて、不図示のカーソル画像を、画像Ｇ７２Ａ、Ｇ７２Ｂ、又はＧ７２Ｃの何れかの選択画像に合わせると、各選択画像に対応したフレームレートが選択される。出力フレームレート特定部３０４は、この選択されたフレームレートを出力フレームレートとして特定する。なお、ユーザが、ダイヤル２０９ｄを回動させて、不図示のカーソル画像を、他の選択画像を表示する画像への遷移を促す画像Ｇ７２Ｄに合わせると、表示される画像はＧ７１に戻る。

次に出力先の外部機器の設定に基づいて出力フレームレートが特定される場合について説明する。入出力Ｉ／Ｆ２０６及び入出力端子２１０、又は無線Ｉ／Ｆ２１３及び無線モジュール２１４を介して接続されたディスプレイ装置等の外部機器に、入力された動画像データを、ユーザが出力する場合もある。この様な場合に、そのディスプレイ装置に対して、再生される動画像データのフレームレートを設定する、又はディスプレイ装置等が予め限られたフレームレートでしか動画像を再生できないといったことが想定される。

接続されたディスプレイ装置等の外部機器に対して、再生する動画像データのフレームレートをユーザが設定している場合は、出力フレームレート特定部３０４は、入出力Ｉ／Ｆ２０６又は無線Ｉ／Ｆ２１３を介して外部機器側で設定された動画像データの再生に係るフレームレートの情報を取得する。そしてその取得された情報に基づいて、出力フレームレート特定部３０４が出力フレームレートを特定する。

ディスプレイ装置等が予め限られたフレームレートでしか動画像を再生できない場合は、接続された外部機器の型番の情報を、出力フレームレート特定部３０４が取得する。そして、その情報に基づいて出力フレームレート特定部３０４が出力フレームレートを特定する。

図６に戻り、ステップＳ２０１で出力フレームレート特定部３０４が出力フレームレートを特定すると、再生速度特定部３０５が、出力される動画像データの再生速度を決定する（ステップＳ２０２）。

撮像装置１は、入力された動画像データを、通常再生速度に対して、高速、等速、又は低速と様々な速度で再生するための出力をすることができる。以下では、説明及び理解の容易のため、高速の場合を等速の２倍速、及び低速の場合を等速の１／２倍速として説明する。なお、これらの数値は例示であり、かつ低速及び高速のそれぞれに複数種類の倍速を適用可能なことは言うまでもない。

再生速度は、撮像が開始時点ｔ１から終了時点ｔ２までの間の時間Ｔだけ行われて、生成された撮像データを、同じく時間Ｔだけかけて開始から終了まで再生される場合の再生速度を通常再生速度とし、この通常再生速度に対する相対速度で規定される。すなわち、開始時点から終了時点まで１０分間かけて生成された撮像データを、同じく１０分間かけて再生する速度が、等速である。

これに対して、開始時点から終了時点まで１０分間かけて生成された撮像データを、５分間かけて再生する速度が高速である。なお、この場合は後述するフレームレート変換部３０６により撮像データの総フレーム数が１／２となるよう間引き処理が行われる。そして例えば、３０ｆｐｓのフレームレートに変換された動画像データが、６０ｆｐｓの出力フレームレートで５分間かけて出力・再生される。

また、開始時点から終了時点まで１０分間かけて生成された撮像データを、２０分間かけて再生する速度が低速フレームレート変換部により撮像データの総フレーム数が２倍となるように補間される。そして例えば、１２０ｆｐｓのフレームレートに変換された動画像データが、６０ｆｐｓの出力フレームレートで２０分間かけて出力・再生される。

再生速度特定部３０５は、高速、等速、又は低速に関するユーザの選択に基づいて、再生速度を特定することができる。出力される動画像データの再生速度を選択する旨の指示が操作部２０９を介して入力されると、音声・画像処理部２０４は、図８に示したような再生速度の選択をユーザに促す画像Ｇ８１を生成する。そしてモニタ２０７がその画像Ｇ８１を表示する。この選択を促す画像Ｇ４１は、＜高速再生＞の選択画像Ｇ８１Ａ、＜等速再生＞の選択画像Ｇ８１Ｂ、及び＜低速再生＞の選択画像Ｇ８１Ｃから構成される。

ユーザが、ダイヤル２０９ｄを回動させて、選択画像Ｇ８１Ａに不図示のカーソル画像をあわせると、＜高速再生＞が選択される。そして再生速度特定部３０５は、等速に対して２倍の速度を再生速度として特定する。同様に、選択画像Ｇ８１Ｂに不図示のカーソル画像があわせられると、等速に対して１倍の速度が、選択画像Ｇ８１Ｃに不図示のカーソル画像があわせられると、等速に対して１／２倍の速度が、それぞれ再生速度特定部３０５により再生速度として特定される。

再生速度特定部３０５は、上記ユーザの選択による何倍速かの指定によらず、予め定められた特定の倍速を、再生速度特定部３０５が再生速度として特定することもできる。

図６に戻り、ステップＳ２０２で再生速度が特定され、ユーザが操作部２０９を介して動画像データの出力を指示すると（ステップＳ２０３でＹＥＳ）、動画像データが入力される（ステップＳ２０４）。動画像データは、入出力Ｉ／Ｆ２０６、カードＩ／Ｆ２１１、又は無線Ｉ／Ｆ２１３を介して入力される。

入力される動画像データについて、ユーザは所望の一つの動画像データのみを指定することも、複数の動画像データの入力を指定することもできる。以下では複数の動画像データの入力が指定された場合について説明する。なお、複数の動画像データを入力する方法としては、例えばユーザが所定のディレクトリを指定し、そのディレクトリに含まれる全ての動画像データを入力する方法や、複数の動画像データからなる予め作成されたプレイリストを指定する方法等が考えられる。

ステップＳ２０４で複数の動画像データのうち、第１番目の動画像データが入力されると、入力フレームレート特定部３０３が、その１番目に入力された動画像データのフレームレートを特定する（ステップＳ２０５）。この入力フレームレートの特定方法としては、撮像フレームレート情報に基づいて行われる方法、入力される動画像データを解析することで行われる方法等が考えられる。

すなわち、撮像フレームレート情報又はそれに類する情報が、所定のデータ領域に記載されている場合、又はメタデータとして存在する場合は、それらに基づいて入力フレームレートが特定される。一方で、撮像フレームレート情報又はそれに類する情報が存在しない場合は、動画像データのフレーム構成の解析により入力フレームレートが特定される。

ステップＳ２０５で入力フレームレートが特定されると、特定された入力フレームレート、ステップＳ２０１で特定された出力フレームレート、及びステップＳ２０２で特定された再生速度に基づいて、フレームレート変換部３０６がフレームレートを変更する（ステップＳ２０６）。フレームレート変換部３０６は、既知の間引き又は補間の手法により、入力された動画像データの全フレーム数を変更することで出力される動画像データのフレームレートを変更する。

ここで、特定された入力フレームレートをＦｉｎ、出力フレームレートをＦｏｕｔ、等速に対する再生速度の倍率をＭとすると、入力された動画像データの全フレーム数の変更倍率×は、以下の式（１）に示した関係となる。
×＝Ｆｏｕｔ／Ｍ＊Ｆｉｎ・・・（１）

従って、例えばステップＳ２０１で出力フレームレートが６０ｆｐｓ、及びステップＳ２０２で再生速度が等速と特定されており、ステップＳ２０４で入力された第１番目の動画像データの入力フレームレートが６００ｆｐｓと特定された場合、フレームレート変換部３０６は出力する動画像データのフレーム総数を、入力された動画像データのフレーム総数の１／１０倍とする。

ステップＳ２０７でフレームレートを変更された動画像データは、入出力Ｉ／Ｆ２０６、カードＩ／Ｆ２１１、又は無線Ｉ／Ｆ２１３から出力される（ステップＳ２０７）。

これにより例えば、ユーザが動画像データを再生する際のフレームレートを６０ｆｐｓと設定していた場合に、６００ｆｐｓで生成された１０分間の動画像データが入力されたとしても、その動画像データが１０分間で適切に出力され再生されることが可能となる。

すなわちフレームレート変換部３０６は、入力フレームレート、出力フレームレート、及び再生速度に基づいて、入力された撮像データのフレームレートを変更するため、ユーザは自分の再生環境に適したフレームレートで、かつ意図した再生速度で動画像の再生を楽しむことができる。

第１番目の動画像データの出力が完了され、ユーザが動画像データの出力を停止しなかった場合（ステップＳ２０８でＮＯ）、第２番目の動画像データが入力される（ステップＳ２０４；Ｎ＝２）。そして、第２番目の動画像データの入力フレームレートが特定される（ステップＳ２０５；Ｎ＝２）。そして、ステップＳ２０１で特定された出力フレームレート、ステップＳ２０２で特定された再生速度（ここでは等速）、及び特定された第２番目の動画像データの入力フレームレートに基づいて、フレームレート変換部３０６がフレームレートを変換する（ステップＳ２０７）。

ここで例えば、第２番目の動画像データの入力フレームレートが３００ｆｐｓと特定された場合、フレームレート変換部３０６は、上述の式（１）に基づき、全フレーム数が１／５倍となるようにフレームレートを変更する。そして、変更されたフレームレートで第２番目の動画像データが等速再生となるように出力される（ステップＳ２０７；Ｎ＝２）。

以上のように、フレームレート変換部は異なるフレームレート（上述の例では、第１番目の動画像データが６００ｆｐｓで第２番目の動画像データが３００ｆｐｓ）で生成された動画像データが順次・連続再生される場合に、所定の出力フレームレート、及び第１番目と第２番目の動画像データが同一の再生速度となるように、各動画像データのフレームレートを変換することができる。

以降、ユーザが動画像データの出力を停止しない、又は指定された複数の動画像データの出力が完了していない場合は（ステップＳ２０８でＮＯ）、ステップＳ２０４からステップＳ２０７までの処理が繰り返される。ユーザが操作部２０９を介して動画像データの出力を停止すると（ステップＳ２０８でＹＥＳ）、撮像装置１による動画像データの再生処理は完了する。

以上の通り撮像装置１によれば、ユーザは異なるフレームレートで生成された動画像が複数混在して記録されている媒体等から、それらの動画像データを順に再生する場合でも、それぞれの動画像データ毎にフレームレート及び再生速度を調整せずとも、容易に各動画像データの出力フレームレート、及び各動画像データで同一のものとなるように再生速度を、適切に調整して再生することができる。

なお撮像装置１では、Ｎ番目の動画像の再生の途中、又はＮ＋１番目の動画像の再生に切り換わる際に、都度ユーザが再生速度を変更することもできる。この場合、操作部２０９のダイヤル２０９ｄが回動される毎に予め定められた倍率だけより高速にするなどの変更方法が考えられる。

この場合は、操作部２０９のダイヤル２０９ｄが回動される毎に、中央制御部３００が、再生速度の倍率を変更する情報を生成する。そして再生速度特定部３０５が、その生成された情報、特定されている出力フレームレート、及び現在の再生速度に基づいて、新たな再生速度を特定する。

（出力された動画像データの表示態様）
次に上述した（撮像装置１による動画像データの再生処理）にて出力され再生される動画像データの表示について説明する。図９は、出力された動画像データの表示態様を説明するための模式図である。

上述した通り、本発明に係る撮像装置１によれば、異なるフレームレートで生成された複数の動画像それぞれについて、フレームレートが変換されて出力されることになる。またその際、予め設定された再生速度に基づいてフレームの間引きや補間が行われることになる。

そこで撮像装置１の音声・画像処理部２０４は、これらの情報をユーザに提示するための画像データを生成することができる。生成された画像データは係る画像をモニタ２０７や外部のディスプレイ装置に表示される。

すなわち、入力フレームレート特定部３０３が特定した入力フレームレートに基づいて、音声・画像処理部２０４が、入力フレームレートをユーザに提示する画像データを生成する。図９の模式図では、入力フレームレートが６００ｆｐｓであった場合を例にあげ、入力フレームレートを提示する画像Ｇ９１を示している。

また、再生速度特定部３０５が特定した再生速度に基づいて、音声・画像処理部２０４が、特定された再生速度をユーザに提示する画像データを生成する。図９の模式図では、等速再生に対して２倍速の高速再生として再生速度が特定された場合を例にあげ、その再生速度を示す画像Ｇ９２を示している。

そして、出力フレームレート特定部が特定した出力フレームレートに基づいて、音声・画像処理部２０４が、特定された出力フレームレートをユーザに提示する画像データを生成する。図９の模式図では、６０ｆｐｓが出力フレームレートとして特定された場合を例にあげ、その出力フレームレートを示す画像Ｇ９３を示している。

以上のように、本発明に係る撮像装置１によれば、入力された動画像データ毎に、入力フレームレート、再生速度、及び出力フレームレートの各種情報を、ユーザが視覚的に認識することができる。

なお再生速度や各種フレームレートは、上述のようにモニタ等への画像表示によらず、他の手段によって、ユーザに認識されてもよい。例えば、撮像装置１にＬＥＤ光源を設け、等速再生の場合はそのＬＥＤ光源は点灯せず、高速再生の場合は短い間隔で点灯を繰り返し、低速再生の場合は高速再生の場合よりも長い間隔で点灯を繰り返すといった手段によってもよい。

（変形例）
無線ネットワーク通信を介してデータを送受信する場合は、ネットワークの通信帯域が変化し、その変化に応じて通信可能なデータ量が変化することがある。以下では、撮像装置１が無線Ｉ／Ｆ２１３及び無線モジュール２１４を介して、外部機器に動画像データを出力する場合の処理について、上記実施形態の変形例を説明する。

本変形例は、上述した実施形態と比べ、図６のフローチャートのＳ２０１における出力フレームレートの特定に係る処理が異なり、その他の処理は原則同じである。従って、出力フレームレート特定部３０４による出力フレームレートの特定について説明し、他の処理の説明は省略する。

撮像装置１は、カード型記録媒体２１２に記録された動画像データや、入出力端子２１０を介して入力された動画像データについて、入力フレームレート、再生速度、及び出力フレームレートに基づいてフレームレートを変換して、その変換された動画像データを、無線モジュール２１４を介して外部機器に出力することができる。外部機器としては、同じく無線ネットワーク通信に対応し、表示モニタを備えた機器、例えばタブレットＰＣやスマートフォン等が想定される。

ここで出力フレームレート特定部３０４が、出力フレームレートを特定するに際し、上述した外部機器とのネットワーク通信における帯域に基づいて、出力フレームレートを特定することができる。この場合、出力フレームレート特定部３０４は、メインメモリ２０１に一時記憶されている送信対象である動画像データが、１秒あたりに何フレーム送信されているかの計測をする。そして、その計測結果に基づいて、毎秒何フレームが送信されているか、つまりフレームの送信速度を算出する。

そして出力フレームレート特定部３０４は、算出されたフレームの送信速度を、出力フレームレートとして特定する。出力フレームレート特定部３０４は、予めさだめられたタイミング毎に、フレームレートの送信速度に基づく出力フレームレートの特定を行う。

以上の通り本実施の形態によれば、無線ネットワーク通信の通信帯域が変化する等して、撮像装置１が送信することができるデータ量が変化した場合であっても、都度の送信速度に基づいて出力フレームレートが特定される。したがって、送信される動画像データのフレーム枚数が変化した場合でも、外部機器はユーザが所望した再生速度で動画像データを再生することができる。

以下、図１０〜図１２を用いて、他のダイヤル２０９ｄの操作に応じた撮像フレームレート、及び再生速度の設定方法、モニタ２０７への表示方法に基づいた実施形態について説明する。
図１０〜図１２は、撮像時の撮像フレームレートの選択時に表示される選択画面、及び再生時の再生速度の選択時に表示される選択画面の一例を示したものである。

本実施形態では、＜通常撮像モード＞、＜ハイスピード撮像モード＞、そして＜タイムラプス撮像モード＞を別個のモードとして選択するのではなく、撮像時には通常撮影時の撮像フレームレート（６０ｆｐｓ）を基準にして、また、再生時には等速再生時の再生速度（１ｘ）を基準にして選択する。これによって、各モードが全く別個のモードとして存在するのではなく、撮像フレームレート、及び再生時の再生速度によって連続的に撮像及び再生を制御できるようになる。

撮像フレームレート、及び再生速度による撮像、及び再生方法の選択の具体的な動作を、図１０〜図１２を用いて具体的に説明する。
まず、撮像時を例に説明する。本実施形態では、撮像フレームレートを最小から最大まで連続的に任意の撮像フレームレートに設定することができる。また、撮像フレームレートは、１／８０ｆｐｓ、１／４０ｆｐｓ、１／２０ｆｐｓ、１／１０ｆｐｓ、１／５ｆｐｓ、１／２ｆｐｓ、１ｆｐｓ、６０ｆｐｓ、１２０ｆｐｓ、２４０ｆｐｓ、３００ｆｐｓ、４２０ｆｐｓ、６００ｆｐｓ、のように表示を行った撮像フレームレートで段階的に選択できるようにしてもよい。

撮像フレームレートを選択する際にダイヤル２０９ｄを回転させることによって連続的に任意の撮像フレームレートに、または表示を行った撮像フレームレートで段階的に選択できる。ここで、撮像フレームレートが選択された状態でボタン２０９ｂを押下することで撮像時の撮像フレームレートを決定できる。
この操作によって、図３のステップＳ１０１のモード設定を行うことなく、ステップＳ１０２の撮像フレームレートの変更とステップＳ１０３テップ撮像フレームレートの決定を行うことができる。

モニタ２０７への表示は、画面内に始点と終点を配置して表示し、始点から終点まで撮像フレームレートが低いレートから高いレートへ円環状に配列している。図１０〜図１２では左奥に低いレート、右奥に高いレートを表示している。例えば、始点を最小撮像フレームレート（例えば１／８０ｆｐｓ）、終点を最大撮像フレームレート（例えば６００ｆｐｓ）として表示し、円環状の手前側に表示されている最小撮像フレームレートと最大撮像フレームレートの間の数値がハイライトされるなど視認しやすいように表示させる。

ダイヤル２０９ｄを左回りに回転させると、撮像フレームレートが配列された円環状配列を回転させたかのように、ダイヤル２０９ｄに同期して左回りに撮像フレームレートの数値の表示が円環上を回転する。同様にダイヤルを右回りに回転させると、円環状配列も右回りに回転する。このとき、円環状の手前側に表示される撮像フレームレートが選択している撮像フレームレートとなる。
図１０〜図１２で説明すると、図１１の６０ｆｐｓを選択している状態からダイヤル２０９ｄを左回りに回転させると図１０に切り替わり（例えば１／８０ｆｐｓ）、図１１の状態からダイヤル２０９ｄを右回りに回転させると図１２に切り替わる（例えば６００ｆｐｓ）。
これによって、ダイヤル２０９ｄを回転させる動作と、モニタ２０７上に表示される撮像フレームレートの数値の回転が同期しているので、選択する撮像フレームレートを感覚的に認識できる。また、撮像モードを選択してから撮像フレームレートを選択するよりも速く設定することができる。

次に、再生時を例に説明する。本実施形態では、再生速度を速い再生速度から遅い再生速度まで連続的に任意の再生速度に設定することができる。ここで再生速度は、撮像フレームレートに対応した再生速度である。また、再生速度は、撮像フレームレートのように表示を行った再生速度で段階的に選択できるようにしてもよい。再生速度を選択する際にダイヤル２０９ｄを回転させることによって連続的に、または段階的に選択できる。
この動作は図６におけるステップ２０２の再生速度の特定に対応する。

モニタ２０７への表示は、画面内に始点と終点を配置して表示し、始点から終点まで速い再生速度から遅い再生速度へ円環状に配列している。例えば、始点を速い再生速度（例えば１／８０ｆｐｓのときの再生性速度）、終点を遅い再生速度（例えば６００ｆｐｓの時の再生速度）を表示し、円環状の手前側に表示されている速い再生速度と遅い再生速度の間の数値がハイライトされるなど視認しやすいように表示させる。

ダイヤル２０９ｄを左回りに回転させると、再生速度が配列された円環状配列を回転させたかのように、ダイヤル２０９ｄに同期して左回りに再生速度の数値の表示が円環上を回転する。同様にダイヤルを右回りに回転させると、円環状配列も右回りに回転する。このとき、円環状の手前側に表示される再生速度が選択している再生速度となる。
これによって、ダイヤル２０７を回転させる動作と、モニタ２０７上を再生速度の数値が回転する表示が同期しているので、選択する再生速度を感覚的に認識できる。

ここで、撮像フレームレートと再生速度を同時に表示させてもよい。例えば、撮像フレームレートと、撮像フレームレートに対応した再生速度を表示させてもよい。１／６０ｆｐｓに対応して通常再生に対して６００倍の再生速度を示す６００×を、６０ｆｐｓに対応して１×を、６００ｆｐｓに対応して１／１０×などを、それぞれ表示させてもよい。

このとき、撮像フレームレートを選択する場合には撮像フレームレートを、再生速度を選択する場合には再生速度を、それぞれ目立つように表示してもよい。
また、６０ｆｐｓよりも低いフレームレートに対してはタイムラプス撮像モードであること、６０ｆｐｓに対しては通常撮像モードであること、６０ｆｐｓよりも高いフレームレートに対しては高速度撮像モードであることを表示してもよい。
これによって、撮像時に再生時の再生速度を想定しながら選択することができ、再生時には撮像時のフレームレートを想定しながら選択することができる。これにより、ユーザの撮影意図が反映されやすくなる。

上述の実施形態及び変形例にて説明した通り、本発明によれば、様々なフレームレートで生成された動画像データを、簡易に任意のフレームレート及び再生速度で再生することが可能となる。なお、本発明は、撮像装置１のように撮像部による撮像を介して動画像データを生成する電子機器に限らず、動画像の入出力が可能な機器であれば実現可能である。

１ 撮像装置、１００ 撮像部、１０１ ズームレンズ、１０２ 絞り、１０３ フォーカスレンズ、１０４ 撮像素子、１０５ アナログ画像信号処理部、１０６ 画像Ａ／Ｄ変換部、１０７ 画像入力コントローラ、１０８ デジタル信号処理部、１０９ マイク、１１０ アナログ音声信号処理部、１１１ 音声Ａ／Ｄ変換部、１１２ 音声入力コントローラ
２００ バス、２０１ メインメモリ、２０２ 圧縮・伸長処理部、２０３ 多重化部、２０４ 音声・画像処理部、２０５ ＶＲＡＭ、２０６ 入出力Ｉ／Ｆ、２０７ モニタ、２０８ スピーカ、２０９ 操作部、２１０ 入出力端子、２１１ カードＩ／Ｆ、２１２ カード型記録媒体、２１３ 無線Ｉ／Ｆ、２１４ 無線モジュール
３００ 中央制御部、３０１ 撮像フレームレート決定部、３０２ 撮像フレームレート情報生成部、３０３ 入力フレームレート特定部、３０４ 出力フレームレート特定部、３０５ 再生速度特定部、３０６ フレームレート変換部

Claims (4)

1. 第１フレームレートで生成された第１動画像データ、及びその第１フレームレートとは異なる第２フレームレートで生成された第２動画像データが入力される動画像データ入力部と、
   前記動画像データ入力部に入力された前記第１動画像データの第１フレームレート、及び前記第２動画像データの第２フレームレートを特定する入力フレームレート特定部と、
   前記動画像データ入力部に入力された前記第１動画像データと前記第２動画像データの出力フレームレートを特定する出力フレームレート特定部と、
   前記第１動画像データ及び前記第２動画像データに対して同一の再生速度を特定する再生速度特定部と、
   前記第１フレームレート、前記出力フレームレート、及び前記再生速度に基づいて、前記第１動画像データのフレームレートを変更し、前記第２フレームレート、前記出力フレームレート、及び前記再生速度に基づいて、前記第２動画像データのフレームレートを変更するフレームレート変換部と、
   前記フレームレート変換部がフレームレートを変換した前記第１動画像データ及び前記第２動画像データを出力する動画像データ出力部と
   を有することを特徴とする動画像データ処理装置。
2. 前記再生速度を指定する入力を受付ける操作部をさらに備え、
   前記再生速度特定部は、前記操作部に受付けられた入力に基づいて、前記再生速度を特定することを特徴とする請求項１に記載の動画像データ処理装置。
3. 表示部をさらに備え、
   前記操作部は前記入力を連続的に受け付け、前記動画像データ出力部は前記第１のフレームレート、または前記第２のフレームレート、または前記再生速度を円環状に配列して前記表示部に表示させ、
   前記操作部の入力に応じて、前記表示部に前記円環状に回動させて表示し、前記第１のフレームレート、または前記第２のフレームレート、または前記再生速度を特定するようにしたことを特徴とする請求項１または２に記載の動画像データ処理装置。
4. 第１フレームレートで生成された第１動画像データ、及びその第１フレームレートとは異なる第２フレームレートで生成された第２動画像データが入力されるステップと、
   入力された前記第１動画像データの第１フレームレート、及び前記第２動画像データの第２フレームレートが特定されるステップと、
   入力された前記第１動画像データと前記第２動画像データの出力フレームレートが特定されるステップと、
   前記第１動画像データ及び前記第２動画像データに対して同一の再生速度が特定されるステップと、
   前記第１フレームレート、前記出力フレームレート、及び前記差再生速度に基づいて、前記第１動画像データのフレームレートが変更され、前記第２フレームレート、前記出力フレームレート、及び前記再生速度に基づいて、前記第２動画像データのフレームレートが変更されるステップと、
   フレームレートが変換された前記第１動画像データ及び前記第２動画像データが出力されるステップと
   を有する動画像データ処理方法。