JP2015186063A - ワイヤレスリモコンシステム及び、撮像装置、リモート操作装置 - Google Patents

Abstract

【課題】撮影時における、無線通信手段の消費電力を低減させることができ、且つ静止画撮影のタイミングを逃さないワイヤレス撮影システムを提供する。
【解決手段】動画撮影時は、撮像素子より読み出した画像情報を揮発性メモリに一次記憶させ、無線通信手段による送受信タイミングを長く設定する。パケット受信時に発生した通信遅延時間分、一次記憶されている画像情報をさかのぼって、実際にリモート操作装置が操作された時間情報の静止画画像を生成する。
【選択図】 図１

Description

本発明は、ワイヤレスで撮像命令を受信し撮像する撮像装置、撮像方法及びプログラムと、撮像装置に撮像命令を送信するリモート操作装置に関する。

従来、撮像装置を離れた場所からリモート撮影を行う場合、通信手段として赤外線通信が主として使われていた。その場合、撮像装置には、赤外線受光部を搭載し、リモート操作装置には、赤外発光部を搭載する構成が取られていた。

この構成では、リモート操作装置の赤外線発行を、撮像装置の受光部が感知することで撮影動作を行うことが可能である。

しかしながら、赤外線には指向性があるため、撮像装置の受光部をリモート操作装置からの発光を感知できるように、撮像装置を設置する必要があり、撮影の自由度が限られてしまっていた。 一方、近年、スマートフォンに代表される携帯端末には、無線ＬＡＮやＢｌｕｅｔｏｏｔｈといったワイヤレス通信機能が搭載されている。これら通信方式は、赤外線とは異なり、アンテナを用いた指向性のないワイヤレス通信を行うことができる。また、パケット通信を用いて双方向の情報をやり取りできることも特徴である。

このような背景において、リモート操作装置からの撮像命令を、従来の赤外線に対し、より身近になった無線ＬＡＮやＢｌｕｅｔｏｏｔｈ(登録商標）、Ｚｉｇｂｅｅ(登録商標）といったパケット通信を用いた双方向ワイヤレス通信で実現することが期待されている。このような考えから、特許文献１では、パケット通信を用いたワイヤレス撮影システムに関する提案がなされている。

特開２０１２−１６８３２１号公報

しかしながら、パケット通信手段は、赤外線通信手段に比べ、消費電力が大きい点が課題として挙げられる。

そこで、本発明では、パケット通信手段の消費電力を下げる手段として、撮像装置の撮影モードに注目する。撮像装置を静止画撮影モードで使用する場合は、送信器側からの撮像命令に対するレスポンスを高める為に、受信器側は常に受信状態にあり、いつでも送信器側からの撮像命令を受信できる状態にあることが望ましい。一方、動画撮影時は、撮像データは、撮像装置内の揮発性メモリに一旦格納されている。その為、送信器側からの撮像命令が遅延したとしても、揮発性メモリ内に格納されている撮像データをさかのぼって使用することが可能である。

そこで、本発明では、撮像装置の撮影モードという条件によって、パケット通信手段の送受信タイミングを切り替えることを特徴とし、静止画撮影時に対して、動画撮影時は、通信遅延時間分さかのぼって撮像データを生成することが可能であることから、パケット送受信タイミングを長くすることで、パケット通信手段による消費電力を下げる手段を提案する。

本発明は、撮像装置とリモート操作装置とから構成されるワイヤレスリモコンシステムにおいて、撮像装置（１０１）は、リモート操作装置とデータをやり取りする通信手段（１０３）と、通信手段により受信した制御命令に従って、撮像装置を制御する制御手段（１０２）と、制御命令に含まれる時間情報から、制御遅延時間を検出する遅延時間検出手段と、被写体を撮像しながら、所定の間隔で静止画データを生成する撮影手段と、前記撮像手段により、生成された静止画データを一次記憶する記憶手段（１１９）と、リモート操作装置からの指示に従い一次記憶してある静止画データを記録媒体に記録する手段（１２０）と、前記通信手段の受信待機期間と受信非待機期間とを任意の期間で設定する設定手段（２１０）と、前記通信手段を用いて、設定した期間をリモート操作装置に通知する通知手段（１２１）とを有し、リモート操作装置は、撮像装置とデータをやり取りする通信手段（２０３）と、操作者からの操作を検出する検出手段（２０６、２０７、２０８）と、検出手段に応じた制御命令を生成する生成手段（２０２）と、制御命令にリモート操作装置内の時間情報を付加する時間情報付加手段（２１２）と、前記制御命令を撮像装置に通知する通知手段（２０３）と、撮像装置から通知された受信待機期間に合わせて、リモート操作装置の送信期間を設定する設定手段（２１０）と、を有し、撮像装置は、受信非待機期間を長く設定した場合に発生する、操作者の操作から撮像装置が制御命令を受信するまでの遅延時間を、前記検出手段により検出し、前記記憶手段に一次記憶されている静止画データの中から、検出時間分さかのぼった静止画データを記録媒体に記録することを特徴とする。

本発明によれば、撮影時における無線通信手段の消費電力を低減させることができ、且つ静止画撮影のタイミングを逃さないワイヤレス撮影システムを提供できる。

本発明の構成図 撮像装置のブロック図 リモート操作装置のブロック図 リモート操作装置の表示内容 第１の実施形態における撮像装置の動作フロー図 第１の実施形態におけるリモート操作装置の動作フロー図 第１の実施形態における撮像装置、リモート操作装置のタイミングチャート図 第２の実施形態における撮像装置の動作フロー図 第２の実施形態における撮像装置、リモート操作装置のタイミングチャート図

＜第１の実施形態＞
本実施例における第１の形態を以下、図を用いて説明する。図１は、本発明におけるリモート撮影システムの構成を説明する図である。

リモート撮影システムは、撮像装置（１０１）と、リモート操作装置（２０１）とから構成される。ここで、撮像装置（１０１）に関する説明を図２を用いて述べる。

撮像装置（１０１）には、メイン制御ＣＰＵ（１０２）が搭載されている。メイン制御ＣＰＵは、電源回路（１０５）より電源が投入されることで動作する。電源がＯＮされるとメイン制御ＣＰＵ（１０２）は、不揮発性メモリ（１１８）に予め格納されたプログラムに従って、撮像装置（１０１）における全体の動作を制御する。被写体像からの光線Ｌ（１０６）は、撮影レンズ（１０７）及び絞り（１０８）を介して撮像素子（１１０）上のフォトダイオードに光信号として蓄積される。

撮像制御部（１１４）は、撮像素子（１１０）から光信号を読み出すタイミングのクロック制御を行う。撮像制御部（１１４）により、撮像素子（１１０）からの読み出し動作が実行されると、撮像素子（１１０）上のフォトダイオードに蓄積された光信号は、光電変換され、アナログ出力信号として、Ａ／Ｄ変換器（１１５）に出力される。

Ａ／Ｄ変換器（１１５）は撮像素子（１１０）から受信したアナログ出力信号をデジタル出力信号に変換し、メイン制御ＣＰＵ（１０２）に出力する。メイン制御ＣＰＵ（１０２）には、画像処理回路が含まれており、入力されたデジタル信号に対して輪郭補正、ガンマ補正、ホワイトバランス補正等の画像処理を行い、揮発性メモリ（１１９）に出力する。

このように撮像制御部（１１４）、Ａ／Ｄ変換器（１１５）、及びメイン制御ＣＰＵ（１０２）は画像処理手段として機能する。

また、メイン制御ＣＰＵ（１０２）は、ファイル生成機能を有しており、上述した画像処理を行い生成した画像信号を、ＪＰＥＧフォーマットやＭＯＶフォーマット等の所定のファイル形式に変換し、圧縮処理を行い画像データを生成する。さらに、メイン制御ＣＰＵ（１０２）は記録手段も有しており、ファイル生成機能により生成された画像データを記録媒体（１２０）へ記録する。

測光センサ（１１１）は、撮影レンズ（１０７）を介して得られる光の量を計測する装置であり、メイン制御ＣＰＵ（１０２）は、測光センサ（１１１）より計測された光の量を基に、適正な露出量を決定する。露出量が決定されると、メイン制御ＣＰＵ（１０２）は、撮像素子（１１０）のセンサ感度（ＩＳＯ感度）の制御を撮像制御部（１１４）を介して行う。また、絞り（１０８）による撮影レンズ（１０７）の絞り制御、及びシャッター装置（１０９）による撮像素子（１１０）に光を供給するためにシャッターを解放する時間制御をシャッター駆動装置（１１３）を介して行う。

測距センサ（１１１）は、測距点に対応したＣＣＤやＣＭＯＳ等のセンサで構成され、被写体までの距離に応じた測距点ずれ信号をメイン制御ＣＰＵ（１０２）へ出力する。

操作系スイッチ群（１１６）は、撮像装置の電源ボタン、シャッター動作を実施するレリーズボタン、無線転送機能の有効、無効及び、無線接続相手となるリモート操作装置（２０１）の識別番号情報を設定するなど、撮像装置（１０１）を操作する為のスイッチ群のことである。

表示回路（１１７）は、カラー液晶から構成され、メイン制御ＣＰＵ（１０２）が表示手段として機能することにより撮像装置（１０１）内の情報が表示される。表示内容は、不揮発性メモリ（１３１）に記録された画像データや、撮影データに関する情報、撮像装置（１０１）が接続しているリモート操作装置（２０１）の情報といった、撮像装置（１０１）の詳細な各種設定状態等がある。

無線通信回路（１０３）は、リモート操作装置と無線通信を行うための回路である。本実施例では、無線通信回路に関しては、本実施例ではＢｌｕｅｔｏｏｔｈ４．０を想定している。Ｂｌｕｅｔｏｏｔｈ４．０以外でも、撮像装置（１０１）とリモート操作装置（２０１）との間でパケット通信を実現できれば、本実施例は成り立つ。そのことから、本発明において、他のパケット通信手段（無線ＬＡＮ、Ｂｌｕｔｏｏｔｈ２．０や、８０２．１５．４に代表されるＺｉｇｂｅｅ）を用いても良いものとする。以降、本実施例では、無線通信手段にＢｌｕｅｔｏｏｔｈ４．０を使用した場合について、説明を行う。

リモート操作装置（２０１）から送信される変調された無線信号をアンテナ（１０４）を介して受信し、無線通信回路で復調したデジタルデータをメイン制御ＣＰＵ（１０２）に通知する。通知する内容に応じて、メイン制御ＣＰＵ（１０２）は所定の動作を実行する。例えば、リモート操作装置から撮影命令が転送されたとすると、撮像装置（１０１）は、アンテナ（１０４）を介して、受信した命令を無線通信回路（１０３）で復調して、メイン制御ＣＰＵ（１０２）へ通知する。メイン制御ＣＰＵ（１０２）は、受信したデータが撮影命令だと判断し、シャッター駆動装置（１１３）を駆動させ、撮影動作を実行することができることになる。

また、撮像装置（１０１）は、リモート操作装置（２０１）に対して、データを転送することも可能である。その場合は、メイン制御ＣＰＵ（１０２）から通知されたデジタル信号を、無線通信回路（１０３）内で変調し、アンテナ（１０４）を介してリモート操作装置（２０１）へ送信することになる。

ここで、撮像装置（１０１）とリモート操作装置（２０１）間の通信インターフェース（１２１）に関して述べる。本実施例では、撮像装置（１０１）とリモート操作装置（２０１）間で、やり取りするデータは少量のものを想定している。その為、無線通信回路（１０３）とメイン制御ＣＰＵ（１０２）との通信インターフェースは、高速な通信ではなく、一般的なＳＰＩやＵＡＲＴといった通信インターフェースを想定している。上記以外のインターフェースでも、本実施例は成り立つ為、インターフェース（１２１）に関しては、以降においても言及しないものとする。

通信インターフェース（１２１）を介して、メイン制御ＣＰＵ（１０２）は、無線通信回路（１０３）に対して、データのやり取りだけではなく、無線通信のタイミング制御をコントロールすることも可能である。制御タイミングとは、無線通信の送受信タイミングのことである。

パケット通信を用いる通信手段では、送信側と受信側の送受信タイミングが合致しないと、パケット通信が成り立たないという特徴がある。本実施例に置き換えてみると、撮影命令を受信する側の撮像装置（１０１）の受信タイミングが重要になってくる。

しかしながら、常に撮像装置（１０１）の無線通信回路（１０３）を受信状態にすると、無線通信回路（１０３）が消費する電力により、撮像装置（１０１）の電池の消耗を早めてしまうことになる。そのような課題を解決するために、本発明では、撮影モードによって、無線通信回路（１０３）の送受信タイミングを切り替える手段を提案する。その際に、メイン制御ＣＰＵ（１０２）は、無線通信回路（１０３）に対して、無線通信のタイミング制御をコントロールできる構成が重要となって来る。

次に、無線通信回路の電源構成について述べる。本実施例では、無線通信回路へは、電源回路（１０５）から常に電源を供給される形態を取っている。これは、撮像装置（１０１）が省電力の観点から、所定時間撮影動作が発生しない状態が続くと、メイン制御ＣＰＵ（１０２）への電力を遮断し、省電力モードへ遷移した場合でも、無線通信回路を起動した状態に保つことを目的としている。

従来、撮像装置（１０１）が省電力モードへ遷移した場合、撮像装置（１０１）を再度、撮影可能状態にする為には、撮像装置（１０１）の操作系スイッチ群（１１６）を推す必要があった。その為、リモート撮影システムにおいては、撮像装置（１０１）を省電力モードへ遷移させないか、もしくは、撮影を中断し、離れた場所にいる撮影者が、撮像装置（１０１）を操作して、省電力モードを解除する必要があった。

そのような煩雑な作業を避ける為に、撮像装置（１０１）が省電力モード時においても、リモート操作装置（２０１）からの撮影命令が発生した場合、無線通信回路から電源回路に対し、メイン制御ＣＰＵ（１０２）への電源供給を開始できるようにするためである。そうすることにより、撮影者は、リモート撮影時において、撮像装置（１０１）の電源状態を気にすることなく、撮像装置（１０１）から離れた場所で、リモート撮影を行うことが可能となる。

次に、リモート操作装置（２０１）に関する説明を図３を用いて述べる。リモート操作装置（２０１）には、メイン制御ＣＰＵ（２０２）が搭載されている。メイン制御ＣＰＵは、電源回路（２０５）より電源が投入されることで動作する。電源がＯＮされるとメイン制御ＣＰＵ（２０２）は、不揮発性メモリ（２１１）に予め格納されたプログラムに従って、リモート操作装置（２０１）における全体の動作を制御する。リモート操作装置には、レリーズボタン（２０７）や、動画記録ボタン（２０８）、選択ボタン（２０６）を示している。

無線通信回路（２０３）は、図２にて説明したようにメイン制御ＣＰＵ（２０２）から通知される命令を変調して、アンテナ（２０４）を介して、撮像装置（１０１）へ送信する際に使われる回路である。そうすることで、レリーズボタン（２０７）により、撮影者からのリモート撮影命令が通知されると、メイン制御ＣＰＵ（２０２）は、無線通信回路に対して、撮像装置（１０１）へ撮影命令を通知することが可能となる。

リモート操作装置（２０１）には、表示回路（２０９）も備えてある。この表示回路を用いることで、図４（ａ）記載のように、リモート操作装置の電池残量や、電波状態を状態を表示する他に、撮像装置（１０１）の撮影パラメータを表示することも可能となる。

撮像装置（１０１）の撮影パラメータ表示は、以下の手順で実現できる。リモート操作装置（２０１）を操作している撮影者により、選択ボタン（２０６）から、撮影像装置（１０１）のパラメータ取得要求が発生したとする。その時、リモート操作装置は、上述した撮影命令と同じ仕組みで、パラメータ取得命令をメイン制御ＣＰＵ（２０２）からの命令を無線通信回路を介して、撮像装置（１０１）へ送信する。

撮像装置（１０１）は、受信した命令を判断し、シャッタースピードや、絞り値、ＩＳＯ感度といった撮影パラメータを、撮像装置（１０１）側の無線通信回路（１０３）を介して、リモート操作装置（２０１）へ送信する。リモート操作装置は、アンテナ（２０４）にて受信した変調信号を無線通信回路（２０３）にて復調し、メイン制御ＣＰＵ（２０２）へ通知し、メイン制御ＣＰＵ（２０２）は、通知された情報を揮発性メモリ（２０９）へ一次記憶する。その結果を、表示部へ送ることで、表示部に撮像装置（１０１）の撮影パラメータを表示することが可能となる。 ここまで述べてきた双方向通信の仕組みを使えば、リモート操作装置（２０１）からは、表示された撮像装置（１０１）の撮影パラメータを確認した上で、撮像装置（１０１）の撮影パラメータ変更を実行することも可能である。

このように、リモート撮影システムにおいて、パケット通信を利用することにより、リモート操作装置（２０１）を利用している撮影者にとって、有益な情報をリモート操作装置（２０１）に表示し、変更することができるようになる。これは、従来の赤外線通信では出来なかったことであり、大幅にリモート撮影の使い勝手を向上させることになる。

図４（ｂ）記載の図は、撮像装置（１０１）が動画撮影時において、撮像装置（１０１）の情報を表示している一例である。

リモート操作装置（２０１）の動画記録ボタン（２０８）が押されることにより、撮像装置（１０１）は、動画記録を開始する。撮像装置は、動画記録開始後、生成する動画ファイル名をリモート操作装置に返信し、動画記録経過時間を適宜、リモート操作装置に通知する。動画記録時間の表示に関しては、通信回路による電力消費を削減する為に、適宜撮像装置（１０１）から通知するのではなく、リモート操作装置（２０１）側で、カウントした結果を表示することも考えられる。その場合、リモート操作装置（２０１）で、記録時間をカウントし始めるタイミングは、撮像装置からファイル名が通知されたタイミングでも良いし、動画記録開始ボタン（２０８）が押されたタイミングでも良いものとする。ただし、どちらの場合も、通信タイムラグにより、撮像装置側とリモート操作装置側の動画記録経過時間が、異なる可能性があるので、撮像装置（１０１）側は、時刻補正の為の通信を数回実施するものとする。

また、動画記録終了時は、同様にリモート操作装置（２０１）の動画記録ボタン（２０７）を推すことにより、撮像装置（１０１）へ無線転送を行い動画記録を終了させる。

ここまでで、本提案によるリモート撮影システムの構成及び、撮像装置、リモート操作装置について説明してきた。

次に、本実施例におけるリモート撮影システムの動作フローに関して、図５を用いて撮像装置側を説明し、図６を用いてリモート操作装置側を説明する。撮像装置（１０１）は、ステップＳ５０１で、無線接続を開始し、リモート操作機器（２０１）との接続を完了する。接続完了後、撮像装置（１０１）は、ステップＳ５０２にて、リモート操作機器（２０１）からいつでもレリーズコマンドが無線通信されてきても受信できるようにする為、ここでは、送受信タイミングをＢｌｕｅｔｏｏｔｈ規格で規定されている最短の期間になるように通知する。通知と合わせて、撮像装置（１０１）は、無線通信回路（１０３）を通知した送受信タイミングで制御するよう通信インターフェース（１２１）を用いて、無線通信回路へ設定を行う。

送受信タイミングを短く設定した後は、リモート操作装置（２０１）との実時間のずれを調整するステップを踏む（ステップＳ５０４）。ここでは、撮像装置（１０１）から、リモート操作装置（２０１）に対して、実時間取得要求を送信する。その要求に対して、リモート操作装置（２０１）が、ＲＴＣ（２１２）にて取得した実時間を応答することで、各装置の実時間のズレ、つまりＲＴＣのズレを検出する手段を行う。その他、装置間で時間情報をやりとりする手段は、複数考えられる。しかし、時間情報をやり取りする手段に関しては、本発明に係る範囲ではないので、手段においては限定は行わないものとする。

ステップＳ５０５に遷移すると、ステップ５２８にて所定時間の間に受信パケット状態が発生するか判断しながら、リモート操作装置（２０１）からのパケットを受信待ちを行う。実際に、ステップＳ５２８で確認している所定時間は、Ｂｌｕｅｔｏｏｔｈ規格でのリンク確立期間となっている。つまり、所定時間内にＢｌｕｅｔｏｏｔｈ接続機器からのレスポンスが発生しなければ、接続機器が何かしらの原因で、ネットワークから切断したと判断するということである。その結果、ステップＳ５２９では、タイムアウト処理を行う、ステップＳ５３０で撮像装置（１０１）の無線手段をＯＦＦにするステップをとる。

一方、リモート操作装置（２０１）からのパケットを受信すると、以下のフローでパケットに含まれている制御命令の判断処理を行う。制御命令の判断は、ここでは、静止画撮影命令、動画撮影命令、無線切断通知命令、生存確認命令のことを示している。

最初に、最初にステップＳ５０６で、受信パケットが静止画撮影命令であるかを判断する。静止画撮影命令であれば、ステップＳ５０７へ遷移して、シャッター駆動装置（１１３）を動作させて、撮影動作を実行する。そして生成された静止画画像を、ステップＳ５０７で記録媒体（１２０）へ記録するものとする。この静止画撮影動作が完了すると、再度ステップＳ５０５へ戻り、パケットを受信待ち状態になる。

受信パケットが、静止画撮影命令の場合は、ステップＳ５０６へ遷移して、ステップＳ５０７で静止画を撮影し、ステップＳ５０８で静止画記録を行う。これら一連の撮影処理が完了すると、再度ステップＳ５０５へ遷移してリモート操作装置からの制御命令パケットを受信待ち状態となる。

次に、受信パケットが動画撮影命令かを判断する（ステップＳ５０９）。動画撮影命令でなければ、ステップＳ５２０で、無線切断通知命令を受信したかを判断する。無線切断通知命令であれば、ステップＳ５２１にて無線手段をＯＦＦにする。受信パケットが、無線切断通知命令でもなければ、リモート操作装置（２０１）からの生存確認通知であると理解する。生存確認通知とは、上述したように、Ｂｌｕｅｔｏｏｔｈ規格でのリンク確立を維持するために必要な通信のことである。このパケットは、生存確認パケットなので、制御命令に関する規定は特に行わなくても良いものとする。つまり、何かしらのパケットを接続機器である、リモート操作装置（２０１）から受信することで、Ｂｌｕｅｔｏｏｔｈのリンクを維持を継続するという意味である。そして、ステップＳ５０５へ再度戻るというフローをとる。

最後に、ステップＳ５０５で受信したパケットが、動画撮影命令であった場合を説明する。動画撮影命令の場合は、ステップＳ５１０へ遷移して、動画撮影を開始する。この時、撮像装置は動画撮影中にも静止画撮影命令が発生することが考えられる為、動画撮影時に、撮像素子（１１０）から読み出した画像データは、Ａ／Ｄ変換器（１１５）を介してデジタルデータに変換した後、揮発性メモリ（１１９）へ一次記憶する（ステップＳ５１１）。

次に、ステップＳ５１２では、無線通信の送受信タイミングを長くする通知をリモート操作装置（２０１）へ通知する。

ここで、送受信タイミングを長くするイメージを図７を用いて説明する。図７記載の７０１、７０２は、送受信期間の開始タイミングを示している。この開始タイミングの間隔が、送受信タイミングのことである。

また、送受信間隔が短い状態が、図７記載のＴ＿Ｉｎｔｅｒｖａｌ１（７０７）であり、送受信タイミングを長くしたインターバル期間が、Ｔ＿Ｉｎｔｅｒｖａｌ２（７０８）を示している。短い間隔のＴ＿Ｉｎｔｅｒｖａｌ１（７０７）では、本実施例では、静止画撮影時に用いる送受信タイミングとしている。これは、送受信タイミング間隔が短いことから、静止画撮影時におけるレリーズタイムラグを減らすことを目的としている。その状態から、ステップＳ５０９で、動画撮影モードに切り替わると、ステップＳ５１２で、送受信タイミング送受を長くする。つまり、Ｔ＿Ｉｎｔｅｒｖａｌ１（７０７）から、Ｔ＿Ｉｎｔｅｒｖａｌ２（７０８）へと変更することを意味している。その後、長くした送受信タイミング（７０７）で、リモート操作装置（２０１）からのパケットを受信待ち状態となる（ステップＳ５１３）。

この時、パケットを受信すると、最初に動画撮影中に発生した静止画撮影命令で有るかを判断する（ステップＳ５１４）。ステップＳ５１４では、ステップＳ５０５同様に、ステップＳ５３１にて所定時間の間に受信パケット状態が発生するか判断しながら、リモート操作装置（２０１）からのパケットを受信待ちを行う。ステップＳ５３１での所定時間とは、ステップＳ５２８と同様にＢｌｕｅｔｏｏｔｈ規格でのリンク確立期間となっている。所定時間内にＢｌｕｅｔｏｏｔｈ接続機器からのレスポンスが発生しなければ、接続機器が何かしらの原因で、ネットワークから切断したと判断し、ステップＳ５３２で、タイムアウト処理を行い、ステップＳ５３３で撮像装置（１０１）の無線手段をＯＦＦにするステップをとる。

リモート操作装置（２０１）からのパケットを受信すると、以下のフローでパケットに含まれている制御命令の判断処理を行う。制御命令の判断は、ここでは、動画撮影中の静止画撮影命令、動画撮影停止命令、無線切断通知命令、生存確認命令のことを示しており、ステップＳ５１４、Ｓ５２３、Ｓ５２５、Ｓ５２７でそれぞれ判断を行っている。ステップＳ５２５にて、無線切断通知命令を受信したことを判断すると、ステップＳ５２６にて無線手段をＯＦＦにする。ステップＳ５２７で、受信パケットが、リモート操作装置（２０１）からの生存確認通知であると理解すと、リンク確立の維持を継続し、ステップＳ５１３に戻って再度パケット受信待ち状態に遷移する。

ステップＳ５１４にて、動画撮影中に静止画撮影命令を受信した場合、撮像装置（１０１）は、受信パケットからリモート操作装置がパケット情報に付加した時間情報を取得する。最初に、パケット情報内に含まれている、リモート操作装置（２０１）がパケットを送信した時間Ｔ２（７１２）を取得する（ステップＳ５１５）。

次に、ステップＳ５１６にて、パケット情報に含まれている、リモート操作装置（２０１）が、操作者の操作を受け付けた時間Ｔ１（７１０）を取得する。この状態で、撮像装置（１０１）は、実際に操作者が撮影動作を行った時間（７０５）と、リモート操作装置（２０１）が、命令を発行した時間情報を取得することが可能となっている。そうすることにより、ステップＳ５１８にて時間情報７０５と時間情報７０６の差分から、リモート操作装置内での時間遅延Ｔ４（７１４）を算出することができる。

また、本実施例では、撮像装置（１０１）内のＲＴＣ（１２１）と、リモート操作装置（２０１）内のＲＴＣ（２１２）による実時間のずれＴ３（７１３）も考慮している。このズレに関しては、ステップＳ５０４にて、すでに取得済みの値である。

以上のフローにより取得したＴ４、Ｔ２、Ｔ３の時間情報を使うことで、撮像装置（１０１）が撮像命令を受信した時間から、実際に操作者リモート操作装置（２０１）でレリーズ動作を行った時間を算出することが可能となった。

また、ステップＳ５２３にて動画撮影停止命令を受信すると、撮像装置（１０１）は、ステップＳ５２４で動画記録を停止する。この時も、上述した静止画撮影命令と同様に、動画記録を停止するタイミングを、操作者が操作した時間までさかのぼり停止することが可能となる。

動画記録を終了すると、撮像装置（１０１）は、いつでも静止画撮影命令を受信できるように、送受信タイミングを、再度短い設定にするために、ステップＳ５０２以降のフローをとる。つまり、動画記録時に設定していた長い送受信タイミングＴ＿Ｉｎｔｅｒｖａｌ２（７０８）から、Ｔ＿Ｉｎｔｅｒｖａｌ１（７０７）へと再設定することを意味している。

この算出時間を用いて、ステップＳ５１８にて、撮像装置（１０１）は、揮発性メモリ（１１９）上にある撮像データを算出時間分、遡って静止画画像を生成するものとする。つまり、操作者が撮影動作を行ったタイミングの静止画画像を生成するということである。そして、ステップＳ５１９にて、生成した静止画画像を記録媒体（１２０）へ記録する。これらの処理を取ることにより、静止画撮影モード時は、撮影タイミングを逃さないように、無線手段によるレスポンスを優先されため、送受信間隔を短く設定する。

一方、動画撮影モード時は、撮影データが揮発性メモリ（１１３）に一次記憶されている為、時間をさかのぼって静止画画像を生成することができる。そのため、無線手段によるレスポンスを優先せず、送受信間隔を長くして、消費電力を抑えることを優先する実施形態について述べてきた。この手段により、動画撮影時において無線通信手段による消費電力を下げる効果を得ることができる。

ステップＳ５１１にて、揮発性メモリに一次記憶するデータ量に関しては、送受信間隔と合わせてもよいものとする。例えば、送受信間隔を１秒に設定した場合は、一次記憶する画像情報は、１秒分ので良いという意味である。１秒経過した後、操作者がリモート操作装置を操作した場合は、その制御命令は、１秒後の発生する次の送受信タイミングで送信されることになるからである。また、単純に、大容量の不揮発性メモリを搭載し、可能な限り画像情報を一次記憶する手段をとってもよいものとする。

次に、リモート操作装置（２０１）の処理を図６を用いて説明する。リモート操作装置（２０１）は、ステップＳ６０１で、無線接続を開始し、リモート操作機器（１０１）との接続を完了する。接続完了後、ステップＳ６０２にて、撮像装置（１０１）から送受信タイミングの変更通知を受け付け、ステップＳ６０３で通知された送受信タイミングを設定する。そうすることで、以降、撮像装置（１０１）との通信は、通知された送受信タイミングで行うことになる。ここでの送受信タイミングは、図７記載のＴ＿Ｉｎｔｅｒｖａｌ１（７０７）を示している。つまり、最初、リモート操作装置（２０１）と撮像装置（１０１）が接続した状態では、いつでも静止画撮影命令を送信できるように、送受信間隔は最短の時間設定になっていることを示している。

次に、リモート操作装置（２０１）内のＲＴＣ（２１２）から取得した時間情報を撮像装置（１０１）へ通知する（ステップＳ６０４）。そうすることにより、撮像装置（１０１）側では、撮像装置とリモート操作装置のＲＴＣのズレを算出することが可能となる。このまでの処理が完了すると、リモート操作装置（２０１）は、操作者からのボタン操作を待ちうけつつ、撮像装置（１０１）からのパケットを待ちうける状態になる。この時、操作者からの操作が発生せず、受信パケットも発生しない場合、リモート操作装置（２０１）は、Ｂｌｕｅｔｏｏｔｈ規格のリンクを維持するために生存確認パケットを撮像装置（１０１）へ送信する（ステップＳ６４４）。 Ｂｌｕｅｔｔｏｏｔｈのリンクを維持するために、生存確認パケットを送信しなければならない生存確認期間は、ステップＳ６０１で接続完了時に、撮像装置（１０１）から通知される。ステップＳ６４４、６４５の動作は、操作者からの操作が発生しない場合でも、リモート操作装置（２０１）内のメイン制御ＣＰＵ（２０２）が、時間を管理して、自動的に生存確認時間内にを生存確認パケットを送信することを示している。

また、操作者から操作ボタンが操作されると、ボタン操作がレリーズボタン操作（２０８、ステップＳ６０６）、動画記録ボタン操作（２０７、ステップＳ６１２）、パラメータ設定ボタン操作（２０６、ステップＳ６２６）であるかを判断する。レリーズボタン操作であれば、ステップＳ６０７へ遷移して、撮像装置（１０１）が動画記録中であるか判断する。この判断は、既に、リモート操作装置から動画記録ボタンが押されている状態であるかを判断するものでも良いし、撮像装置から、撮影状態を取得して判断するものであってもよい。

ステップＳ６０７の判断結果から、動画記録中でないと判断されれば、動画記録開始命令を生成し（ステップＳ６０８）、ステップＳ６０３にて設定された送受信タイミングに合わせてパケットを送信する（ステップＳ６０９）。

一方、動画撮影中であると判断されると、ステップＳ６１０にて操作者がレリーズボタンを操作した時間Ｔ１（７１０）をパケット情報に加味する。そして、ステップＳ６１１にて、パケット情報に、実際パケットを送信する時間を加味する。そして、そのパケットをステップＳ６１１で撮像装置（１０１）へ送信する。この時、パケット情報に、実際にパケット転送する時間情報Ｔ２（７１２）を加味しても良いものとする。そうすることにより、ユーザ操作が発生した時間、パケット送信を開始しした時間から、リモート操作装置内での、ソフトウェアによる遅延を撮像装置（１０１）側で算出することが可能になる為である。

次に、ステップＳ６１２にて、動画記録ボタンが押されたと判断された場合について説明する。この場合も、まず撮像装置が、動画記録中であるかを判断するステップをとる。判断する手段は、上述したように既にリモート操作装置で行われた操作に従って判断するか、撮像装置から撮影状態を取得することで判断しても良い。撮像装置が動画記録中でないと判断すると、ステップＳ６１４にて、動画記録を開始させる制御命令を生成する。そして、ステップＳ６１８で制御パケットを転送し、表示回路（２０９）に動画記録中である旨を表示する。

一方、動画記録中であれば、ステップＳ６１７へ遷移する。ここでは、既に動画記録中に動画記録ボタンが押されたので、操作者は、動画停止する動作を行ったと判断して、動画記録終了パケットを生成する。そして、ステップＳ６１８でパケットを送信し、ステップＳ６１９で表示回路から動画記録中の旨を消すフローをとるものとする。これらフローの後には、撮像装置（１０１）からの送受信タイミング変更通知を受信するフローを取る。

まず、撮像装置（１０１）からのパケットを受信すると（ステップＳ６４０）、受信パケットが、送受信タイミング変更通知であるかを確認する（ステップＳ６４１）。タイミング変更通知であると、ステップＳ６４２で以降の通信による送受信タイミングを通知されたタイミングに変更する。ここでの送受信タイミングは、図７記載のＴ＿Ｉｎｔｅｒｖａｌ１（７０７）もしくは、Ｔ＿Ｉｎｔｅｒｖａｌ２（７０８）へ変更されることを意味している。具体的には、リモート操作装置（２０１）と撮像装置（１０１）は、接続時にはステップＳ６０３にて、送受信間隔は図７記載のＴ＿Ｉｎｔｅｒｖａｌ１（７０７）になっている。これは、いつでも静止画撮影を行えるようにすることを目的としている。

ステップＳ６１４にて動画記録開始のフローを取るときは、撮像装置（１０１）は、ステップＳ５０９にて、動画撮影状態になっている。この時、撮像装置（１０１）は、ステップＳ５１２にて、送受信間隔をＴ＿Ｉｎｔｅｒｖａｌ２（７０８）に変更する通知を送信してくる。このパケットをステップＳ６４１で判断し、ステップＳ６４２にて送受信間隔をＴ＿Ｉｎｔｅｒｖａｌ１（７０７）から、Ｔ＿Ｉｎｔｅｒｖａｌ２（７０８）へ変更することを意味している。

一方、ステップＳ６１７にて動画記録終了のフローを取るときは、撮像装置（１０１）は、ステップＳ５２４にて動画記録が終了することになる。この時は、ステップＳ５０２にて撮像装置（１０１）から通知される短い設定の送受信タイミングをステップＳ６４１で判断し、ステップＳ６４２で設定し直す。つまり、この時、ステップＳ６４１では、反対に送受信タイミングを、Ｔ＿Ｉｎｔｅｒｖａｌ２（７０８）からＴ＿Ｉｎｔｅｒｖａｌ１（７０７）に変更することを意味している。それ以外のパケットを受信した場合は、パケットを破棄するフローをとることとする。本実施例では、パケットを破棄する処理をとっているが、将来的に、ステップＳ６４３のタイミングでリモート操作装置（２０１）に処理を行わせることがあれば、ソフトウェアを変更することにより、所定の処理を行わせても良いものとする。

最後に、パラメータ取得ボタン（２０６）が操作された時について述べる。パラメータとは、撮像装置（１０１）の撮影情報を示している。パラメータ取得ボタンが押されたと判断すると、最初に、ステップＳ６２０でパラメータが既に取得済みであるかを判断する。パラメータ未取得状態であれば、ステップＳ６２１へ遷移して、パラメータを取得するフローをとる。ステップＳ６２１ではパラメータ取得パケットを生成し、ステップＳ６２２でパケットを送信する。そして、ステップＳ６２３で撮像装置（１０１）からのパラメータを受信し、受信した結果をステップＳ６２４で表示部に表示する。

一方、パラメータが既に取得状態であれば、操作者は、撮像装置（１０１）のパラメータ変更を行いたいと判断し、操作者が設定したパラメータ設定値を取得する（ステップＳ６２５）。そして、操作者が設定したパラメータ設定値をパケット転送する。以上が、リモートコントローラ装置に制御に関するフローである。

以上説明を述べてきた、撮像装置（１０１）とリモートコントローラ（２０１）を用いることで、動画撮影時は、無線通信手段による消費電力を低減させることが可能となる。且つ、動画撮影中に、操作者がリモートで静止画を生成したいタイミングを逃さず静止画を生成することが可能となるという効果を実現することが可能となる。

また、本実実施例は、動画撮影中の静止画撮影に関して述べてきた。本実施例の変形として、撮像装置が静止画撮影中に省電力モードに入った時にも、送受信間隔を長く設定することで、無線通信手段による消費電力を抑えた状態で、撮像装置とリモート操作装置のリンクを維持することが可能となる。このように撮像装置が省電力モードに入った場合に、無線手段によるリンク維持を継続することができるという点も、本発明の効果であると考える。

＜第２の実施形態＞
本実施例における第２の形態を以下、図を用いて説明する。以下、既に実施例１にて説明済みの記号に関しては、省略する。

第１の実施例においては、送受信タイミングを撮像素子の動作と関係なく設定していた。しかしながら、無線手段が動作することにより撮像素子にノイズを発生してしまうことも考えられる。具体的には、アンテナから放射される無線放射ノイズや、通信手段が送受信動作を行った際の電流変動による電源ノイズといったことを想定している。

一方、撮像素子からの読み出しタイミングでは、実際に画素情報を読み出している期間（９０２）と、撮像素子の走査回路をリセット及び動作しているブランキング期間（９０１）の２種類がある。撮像素子として、画像への影響が出てしまうのは、画素情報を読み出している期間（９０２）である。この期間を避けて、Ｔ＿Ｉｎｔｅｒｖａｌ＿２（７０８）を設定する送受信タイミングの設定手段を提案する。

実際の撮像素子（１０１）の動作フローを図８を持ちて説明する。動画撮影モード時が、リモート操作装置（２０１）により設定されるとステップＳ５１１にて、撮像素子より読み出した画像情報を、揮発性メモリに一次記憶する。

次に、ステップＳ８０１にて撮像素子を動作させている撮像素子読み出しレートを算出する。具体的には、３０ｆｐｓ（ｆｒａｍ ｐｅｒ ｓｅｃｏｎｄ）、６０ｆｐｓなどを検出し、その時のブランキング期間を検出するということである。算出したブランキング期間を、実際にステップＳ８０２にて、無線送受信タイミングとして、リモート操作装置（２０１）へ通知することとする。以降のステップは、第１の実施例と同様である。

このように、撮像素子からの画素情報を読み出していない期間で、無線通信手段の送受信タイミングを設定することにより、無線通信手段の低消費電力化且つ、画像情報へのノイズを低減することが可能となるという効果がある。

１０１ 撮像装置
２０１ リモート操作装置

Claims (4)

1. 撮像装置とリモート操作装置とから構成されるワイヤレスリモコンシステムにおいて、
   撮像装置（１０１）は、
   リモート操作装置とデータをやり取りする通信手段（１０３）と、
   通信手段により受信した制御命令に従って、撮像装置を制御する制御手段（１０２）と、
   制御命令に含まれる時間情報から、制御遅延時間を検出する遅延時間検出手段と、
   被写体を撮像しながら、所定の間隔で静止画データを生成する撮影手段と、
   前記撮像手段により、生成された静止画データを一次記憶する記憶手段（１１９）と、
   リモート操作装置からの指示に従い一次記憶してある静止画データを記録媒体に記録する手段（１２０）と、
   前記通信手段の受信待機期間と受信非待機期間とを任意の期間で設定する設定手段（２１０）と、
   前記通信手段を用いて、設定した期間をリモート操作装置に通知する通知手段（１２１）と、を有し、
   リモート操作装置は、
   撮像装置とデータをやり取りする通信手段（２０３）と、
   操作者からの操作を検出する検出手段（２０６、２０７、２０８）と、
   検出手段に応じた制御命令を生成する生成手段（２０２）と、
   制御命令にリモート操作装置内の時間情報を付加する時間情報付加手段（２１２）と、
   前記制御命令を撮像装置に通知する通知手段（２０３）と、
   撮像装置から通知された受信待機期間に合わせて、リモート操作装置の送信期間を設定する設定手段（２１０）と、を有し
   撮像装置は、受信非待機期間を長く設定した場合に発生する、操作者の操作から撮像装置が制御命令を受信するまでの遅延時間を、前記検出手段により検出し、前記記憶手段に一次記憶されている静止画データの中から、検出時間分さかのぼった静止画データを記録媒体に記録することを特徴とするワイヤレスリモコンシステム。
2. 前記時間情報付加手段は、操作者からの操作が発生した時間（７１０）と制御命令を送信する時間（７１２）とを前記制御命令に含めることを特徴とする請求項１に記載のワイヤレスリモコンシステム。
3. 前記遅延時間検出手段は、受信した制御命令から、実際にユーザ操作が行われた時間（７１０）と、実際に制御命令が送信された時間（７１４）から遅延時間を算出することを特徴とする請求項１に記載のワイヤレスリモコンシステム。
4. 前記撮像装置は、撮像素子より画素情報を読み出している期間を通信手段の受信非待機期間とし、画素情報を読み出していないブランキング期間を受信期間と設定することを特徴とする請求項１に記載のワイヤレスリモコンシステム。