JP2018006996A - Communication device, imaging device, control method of those, program, and storage medium - Google Patents
Communication device, imaging device, control method of those, program, and storage medium Download PDFInfo
- Publication number
- JP2018006996A JP2018006996A JP2016131028A JP2016131028A JP2018006996A JP 2018006996 A JP2018006996 A JP 2018006996A JP 2016131028 A JP2016131028 A JP 2016131028A JP 2016131028 A JP2016131028 A JP 2016131028A JP 2018006996 A JP2018006996 A JP 2018006996A
- Authority
- JP
- Japan
- Prior art keywords
- image
- tilt
- inclination
- imaging device
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Camera Bodies And Camera Details Or Accessories (AREA)
- Adjustment Of Camera Lenses (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
- Controls And Circuits For Display Device (AREA)
- Details Of Cameras Including Film Mechanisms (AREA)
Abstract
Description
本発明は、通信装置と撮像装置が無線通信を行う技術に関する。 The present invention relates to a technology in which a communication device and an imaging device perform wireless communication.
近年、携帯電話やその一種であるスマートフォンとデジタルカメラをWi−Fiなどで無線接続して、デジタルカメラをスマートフォンで遠隔制御して撮影を行ったり、デジタルカメラで撮影された画像を取り込むことが可能となっている。また、デジタルカメラをスマートフォンで遠隔制御して撮影を行うユースケースとしては、例えば、デジタルカメラを三脚などに固定して行う、観光地での記念撮影や集合写真の撮影が挙げられる。このようなユースケースではデジタルカメラが三脚に正しい姿勢(例えば、正位置(水平状態))で固定されていない場合であっても、撮影画像は適切な向き(水平状態)に補正されていることが望ましい。このようなユースケースに対して、記念撮影において容易に水平補正が施された画像を撮影する技術(特許文献1)や遠隔地においてデジタルカメラの傾き情報を確認する技術が知られている(特許文献2)。 In recent years, it is possible to wirelessly connect a mobile phone or a smartphone of its kind to a digital camera via Wi-Fi, etc., remotely control the digital camera with a smartphone, and capture images taken with the digital camera It has become. In addition, examples of use cases in which a digital camera is remotely controlled by a smartphone to take a picture include taking a commemorative photo at a tourist spot or taking a group photo by fixing the digital camera to a tripod or the like. In such a use case, even if the digital camera is not fixed to the tripod in the correct posture (for example, the normal position (horizontal state)), the captured image is corrected to the appropriate orientation (horizontal state). Is desirable. For such a use case, a technique for easily capturing an image that has been subjected to horizontal correction in commemorative photography (Patent Document 1) and a technique for confirming the tilt information of a digital camera in a remote place are known (patent). Reference 2).
上述したユースケースでは、デジタルカメラから送信されるライブビュー画像をスマートフォンで確認することが可能である。しかしながら、例えばデジタルカメラを三脚に固定してスマートフォンによる遠隔操作で撮影を行う際にデジタルカメラから送信されるライブビュー画像が傾いている場合には、デジタルカメラの姿勢を修正しない限り、画像を適切な向き(水平状態)に補正することはできない。 In the use case described above, a live view image transmitted from a digital camera can be confirmed on a smartphone. However, for example, if the live view image sent from the digital camera is tilted when the digital camera is fixed on a tripod and shot by remote control using a smartphone, the image will be displayed properly unless the posture of the digital camera is corrected. It cannot be corrected to the correct orientation (horizontal state).
また、例えば観光地で記念撮影を行う際にユーザが三脚を持ち合わせていない場合には、デジタルカメラを適当な場所に置いて撮影を行うことも考えられるが、デジタルカメラの姿勢を置く場所で調整することは極めて難しい。 Also, for example, when taking a commemorative photo at a tourist spot, if the user does not have a tripod, the digital camera may be placed in a suitable location, but the digital camera may be placed in an appropriate position. It is extremely difficult to do.
このように、撮像装置を遠隔操作により制御する際に、撮像装置が適切な姿勢で設置されていない場合に正しい向きの撮影画像を得ることは困難であった。 As described above, when the imaging apparatus is controlled by remote operation, it is difficult to obtain a captured image in the correct orientation when the imaging apparatus is not installed in an appropriate posture.
本発明は、上記課題に鑑みてなされ、その目的は、撮像装置を遠隔操作により制御する際に、撮像装置が適切な姿勢で設置されていない場合であっても、撮影画像を正しい向きに補正できる技術を実現することである。 The present invention has been made in view of the above problems, and its purpose is to correct a captured image in a correct orientation even when the imaging device is not installed in an appropriate posture when the imaging device is controlled by remote control. It is to realize the technology that can.
上記課題を解決し、目的を達成するために、本発明の通信装置は、撮像装置を遠隔から制御する通信装置であって、前記撮像装置と通信可能に接続する接続手段と、前記接続手段を介して前記撮像装置から取得した画像を表示する表示手段と、前記表示手段に画像が表示されているときに前記通信装置の姿勢情報を取得する取得手段と、前記通信装置の姿勢情報に基づいて前記撮像装置から取得した画像の傾きを補正する傾き補正手段と、を有する。 In order to solve the above-described problems and achieve the object, a communication device of the present invention is a communication device that remotely controls an imaging device, and includes a connection unit that is communicably connected to the imaging device, and the connection unit. Based on the attitude information of the communication device, the display means for displaying the image acquired from the imaging device via the display, the acquisition means for acquiring the posture information of the communication device when the image is displayed on the display means Inclination correction means for correcting the inclination of the image acquired from the imaging apparatus.
また、本発明の撮像装置は、通信装置により遠隔から制御される撮像装置であって、前記通信装置と通信可能に接続する接続手段と、前記撮像装置において撮影された画像と、当該画像を撮影したときの前記撮像装置の姿勢情報を取得する取得手段と、前記姿勢情報に基づいて前記撮影された画像の傾きを補正する傾き補正手段と、前記傾きが補正された画像を前記通信装置に送信する送信手段と、を有する。 The imaging device of the present invention is an imaging device that is remotely controlled by a communication device, and is connected to the communication device so as to be communicable, an image taken by the imaging device, and the image taken An acquisition unit that acquires posture information of the imaging device at the time, an inclination correction unit that corrects an inclination of the captured image based on the posture information, and an image with the inclination corrected transmitted to the communication device Transmitting means.
本発明によれば、撮像装置を遠隔操作により制御する際に、撮像装置が適切な姿勢で設置されていない場合であっても、撮影画像を正しい向きに補正することができる。 According to the present invention, when the imaging device is controlled by remote operation, the captured image can be corrected in the correct orientation even when the imaging device is not installed in an appropriate posture.
以下に、本発明を実施するための形態について詳細に説明する。尚、以下に説明する実施の形態は、本発明を実現するための一例であり、本発明が適用される装置の構成や各種条件によって適宜修正または変更されるべきものであり、本発明は以下の実施の形態に限定されるものではない。また、後述する各実施形態の一部を適宜組み合わせて構成してもよい。 Hereinafter, embodiments for carrying out the present invention will be described in detail. The embodiment described below is an example for realizing the present invention, and should be appropriately modified or changed according to the configuration and various conditions of the apparatus to which the present invention is applied. It is not limited to the embodiment. Moreover, you may comprise combining suitably one part of each embodiment mentioned later.
[実施形態1]本実施形態は、通信装置の一例として携帯電話の一種であるスマートフォン200と、撮像装置の一例としてのデジタルカメラ100とが通信可能に接続されてデジタルカメラ100を遠隔操作により制御するリモートカメラシステムの例を説明する。なお、本実施形態の通信装置はスマートフォン200に限らず、無線機能付きのデジタルカメラ、携帯型のメディアプレーヤやいわゆるタブレットデバイス、パーソナルコンピュータ、携帯型機器としてのメディアプレーヤやタブレット、パーソナルコンピュータなどを含むあらゆる種類の移動体無線通信機器に適用が可能である。また、本実施形態の撮像装置はデジタルカメラに限らず、例えば、タブレットデバイス、メディアプレーヤ、監視カメラ、医療機器などであってもよい。また、本実施形態の撮像装置は、レンズ交換式の一眼レフデジタルカメラやコンパクトデジタルカメラに限らない。
[Embodiment 1] In this embodiment, a
<デジタルカメラ100の構成>図1を参照して、本発明に係る実施形態のデジタルカメラ100の構成および機能の概略について説明する。
<Configuration of
図1において、撮影レンズ102はズームレンズ、フォーカスレンズを含むレンズ群である。シャッター103は絞り機能を備える。撮像部104は光学像を電気信号に変換するCCDやCMOS等で構成される撮像素子である。A/D変換器105は、撮像部104から出力されるアナログ信号をデジタル信号に変換する。バリア101は、デジタルカメラ100の、撮影レンズ102を含む撮像系を覆うことにより、撮影レンズ102、シャッター103、撮像部104を含む撮像系の汚れや破損を防止する。
In FIG. 1, a photographing
画像処理部111は、A/D変換器105からのデータ、又は、メモリ制御部108からのデータに対し所定の画素補間、縮小といったリサイズ処理や色変換処理を行う。また、画像処理部111では、撮像した画像データを用いて所定の演算処理が行われ、得られた演算結果に基づいてシステム制御部121が露光制御、測距制御を行う。これにより、TTL(スルー・ザ・レンズ)方式のAF(オートフォーカス)処理、AE(自動露出)処理、EF(フラッシュプリ発光)処理が行われる。画像処理部111ではさらに、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてTTL方式のAWB(オートホワイトバランス)処理も行っている。
The
A/D変換器105からの出力データは、画像処理部111及びメモリ制御部108を介して、或いは、メモリ制御部108を介してメモリ109に直接書き込まれる。メモリ109は、撮像部104によって得られ、A/D変換器105によりデジタルデータに変換された画像データを格納する。メモリ109は、所定枚数の静止画や所定時間の動画および音声を格納するのに十分な記憶容量を備えている。
Output data from the A /
不揮発性メモリ124は、電気的に消去・記録可能なメモリであり、例えばEEPROM等が用いられる。不揮発性メモリ124には、システム制御部121の動作用の定数、プログラム等が記憶される。ここでいう、プログラムとは、本実施形態にて後述する各種フローチャートを実行するためのプログラムのことである。
The
システム制御部121は、デジタルカメラ100全体を制御する。前述した不揮発性メモリ124に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。システムメモリ123は、RAMが用いられる。システムメモリ123には、システム制御部121の動作用の定数、変数、不揮発性メモリ124から読み出したプログラム等を展開する。
The
システムタイマー122は各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。
The
モード切替スイッチ115、第1シャッタースイッチ119、第2シャッタースイッチ120、操作部113はシステム制御部121に各種の動作指示を入力するための操作手段である。
A
モード切替スイッチ115は、システム制御部121の動作モードを静止画撮影モード、動画記録モード等のいずれかに切り替える。静止画撮影モードに含まれるモードとして、オート撮影モード、オートシーン判別モード、マニュアルモード、撮影シーン別の撮影設定となる各種シーンモード、プログラムAEモード、カスタムモード等がある。モード切替スイッチ115で、静止画撮影モードに含まれるこれらのモードのいずれかに直接切り替えられる。あるいは、モード切替スイッチ115で静止画撮影モードに一旦切り替えた後に、静止画撮影モードに含まれるこれらのモードのいずれかに、他の操作部材を用いて切り替えるようにしてもよい。同様に、動画記録モードにも複数のモードが含まれていてもよい。
The
第1シャッタースイッチ119は、デジタルカメラ100に設けられたシャッターボタン114の操作途中、いわゆる半押し(撮像準備指示)でオンとなり、第1シャッタースイッチ信号SW1を発生する。第1シャッタースイッチ信号SW1により、AF処理、AE処理、AWB処理、EF処理等の動作を開始する。
The
第2シャッタースイッチ120は、シャッターボタン114の操作完了、いわゆる全押し(撮像指示)でオンとなり、第2シャッタースイッチ信号SW2を発生する。システム制御部121は、第2シャッタースイッチ信号SW2により、撮像部104からの信号読み出しから記録媒体128に画像データを書き込むまでの一連の撮影処理の動作を開始する。
The
電源制御部117は、電池検出回路、DC−DCコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部117は、その検出結果及びシステム制御部121の指示に基づいてDC−DCコンバータを制御し、必要な電圧を必要な期間、記録媒体128を含む各部へ供給する。
The
電源部118は、アルカリ電池やリチウム電池等の一次電池やNiCd電池やNiMH電池、リチウムイオン電池等の二次電池、ACアダプタ等からなる。記録媒体I/F127は、メモリーカードやハードディスク等の記録媒体128とのインターフェースである。記録媒体128は、撮影された画像を記録するためのメモリーカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。
The
通信I/F110は、インターネット等のネットワーク112に接続された外部機器と各種データの送受信を行うインターフェースである。一例として、無線LANやBluetooth(登録商標)や近距離無線通信(Near Field Communication:NFC)などの無線インターフェースが用いられる。また、USBなどの有線インターフェースを用いてもよい。通信I/F110はネットワーク112を介して、撮像部104で撮像された画像(ライブビュー画像を含む)や記録媒体128に記録された画像ファイルを外部機器に送信でき、また、外部機器から各種コマンドその他の情報を受信できる。本実施形態では、スマートフォン200との通信を通信I/F110を介して行うものとする。
The communication I /
音声出力部125は、スピーカを備え、セルフタイマーのカウントダウン音やシャッターの開閉に合わせたシャッター音その他の操作音、動画再生時の動画の音声などを発音する。
The
発光部126は、LED(発光ダイオード)などを備える。発光部126は、所定の発光/非発光のパターンによって被写体にデジタルカメラ100の動作状態(例えば、セルフタイマーのカウントダウン中や撮影の開始/終了など)を通知したり、被写体を照明するために閃光するストロボ機能を備える。発光部126は被写体側から視認できるようにカメラ前面(被写体側、撮像面側)に配置されている。 The light emitting unit 126 includes an LED (light emitting diode) and the like. The light emitting unit 126 notifies the subject of the operation state of the digital camera 100 (for example, during the self-timer countdown or the start / end of shooting) according to a predetermined light emission / non-light emission pattern, or flashes to illuminate the subject. Equipped with a strobe function. The light emitting unit 126 is arranged on the front surface of the camera (subject side, imaging surface side) so as to be visible from the subject side.
なお、ハードウェアの構成は図1に示すものに限定されず、例えば1つのハードウェアが通信制御、撮影制御、画像処理制御等を行い、デジタルカメラ100の各手段として機能してもよい。また、複数のハードウェアが協働して1つの手段として機能してもよい。
The hardware configuration is not limited to that shown in FIG. 1. For example, one piece of hardware may perform communication control, shooting control, image processing control, and the like and function as each unit of the
<スマートフォン200の構成>次に、図2を参照して、本発明に係る実施形態のスマートフォン200の構成および機能の概略について説明する。
<Configuration of
本実施形態のスマートフォン200は、上述したデジタルカメラ100と略同様の構成および機能を備えている。よって、図2では、デジタルカメラ100と同様の構成要素については3桁目の符号を2(200番台)とし、デジタルカメラ100と異なる点を中心に説明を行う。
The
本実施形態のスマートフォン200は、所定のアプリケーションをインストールすることで、種々の機能を実行することができるものとする。スマートフォン用のアプリケーションの中には市販のデジタルカメラを遠隔制御できる機能を提供するものがあり、本実施形態もこのようなカメラアプリケーションを用いる。なお、カメラアプリケーションはスマートフォン200の出荷時点で予めインストールされていてもよいし、スマートフォン200を購入したユーザの操作によりインストールされてもよい。詳細は後述する。
The
本実施形態のスマートフォン200は、マイクなどの音声入力部229を備え、音声出力部225および音声入力部229を介して他の通信機器のユーザと会話することが可能となる。通信I/F210は、図1の通信I/F110に対応するものであり、デジタルカメラ100との通信を行う。
The
また、スマートフォン200には、表示部207側の被写体を撮影するフロントカメラモジュール231と、表示部207の反対側の被写体を撮影するリアカメラモジュール234が内蔵されている。フロントカメラモジュール231およびリアカメラモジュール234はいずれも、上述したデジタルカメラ100と同様に、撮影レンズ、シャッター、撮像部、A/D変換器を有する。表示部207とは反対側の筐体面に取り付けられたフロントカメラモジュール231は、主として風景や他人などの撮影に用いられる。これに対し、表示部207と同じ面に取り付けられたリアカメラモジュール234は、主にスマートフォン200のユーザを撮影するために用いられる。なお、上記各カメラモジュールは必ずしも1つでなくともよい。特に、表示部207と同じ面にさらにリアカメラモジュールを取り付けてもよい。
The
傾き検出部230は、重力方向または重力方向と直交する水平方向に対するスマートフォン200の傾き角θを傾き情報として検出する。傾き検出部230としては、加速度センサ、ジャイロセンサ、重力センサ、回転ベクトルセンサ等を用いることができる。
The
システム制御部221は傾き補正処理部221aを有しており、この傾き補正処理部221aは、傾き検出部230により検出された傾き情報に基づいて、後述するデジタルカメラ100から取得した撮影画像の傾きを補正する傾き補正処理を実行する。
The
操作部213の各操作部材は、表示部207に表示される種々の機能アイコンを選択操作することなどにより、シーンごとに適宜機能が割り当てられ、各種機能ボタンとして作用する。機能ボタンとしては、例えば終了ボタン、戻るボタン、画像送りボタン、ジャンプボタン、絞込みボタン、属性変更ボタン等がある。例えば、メニューボタンが押されると各種の設定可能なメニュー画面が表示部207に表示される。ユーザは、表示部207に表示されたメニュー画面を用いて直感的に各種設定を行うことができる。
Each operation member of the
不揮発性メモリ224には、システム制御部221の動作用の定数、プログラム、アプリケーション等が記憶される。また、不揮発性メモリ224には、デジタルカメラ100と通信するためのプログラムが格納され、アプリケーションとしてインストールされているものとする(以下、リモートカメラアプリケーション)。リモートカメラアプリケーションは、一般的にデジタルカメラ100の提供元がデジタルカメラ100に合わせて作成し、インターネットなどを介して配信することが多い。なお、本実施形態のスマートフォン200によるカメラ制御は、リモートカメラアプリケーションにより提供されるプログラムを読み込むことにより実現される。なお、リモートカメラアプリケーションはスマートフォン200にインストールされたOSの基本的な機能を利用するためのプログラムを有しているものとする。したがって、本実施形態のカメラ制御は、スマートフォン200のOSが一部の処理を担う場合もある。なお、リモートカメラアプリケーションの機能を、スマートフォン200のOS自身が有していてもよい。
The
操作部213は、表示部207に対する接触を検知可能なタッチパネルを含み、ユーザが表示部207上に表示された画面を直接的に操作可能であるかのようなGUIを構成することができる。システム制御部221は、ユーザがタッチパネルにタッチしたことを検知し、タッチ位置に応じた処理を実行する。タッチパネルは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式等、様々な方式のタッチパネルのうちいずれの方式のものを用いてもよい。
The
システム制御部221は、タッチパネルへの以下の操作を検出できる。タッチパネルを指やペンで触れたこと(以下、タッチダウン)。タッチパネルを指やペンで触れている状態であること(以下、タッチオン)。タッチパネルを指やペンで触れたまま移動していること(以下、スライド)。タッチパネルへ触れていた指やペンを離したこと(以下、タッチアップ)。タッチパネルに何も触れていない状態(以下、タッチオフ)。これらの操作や、タッチパネル上に指やペンが触れている位置座標はシステム制御部221に通知され、システム制御部221は通知された情報に基づいてタッチパネル上にどのような操作が行われたかを判定する。タッチダウンされてからスライドを行わずに所定時間内にタッチアップをしたとき、タップが行われたこととする。タップは一瞬だけタッチパネルをタッチする操作であり、項目の指定やボタンの押下など、マウスでいうクリックと同等の操作として用いられることが多い。タッチパネル上をタッチダウンから一定のスライドを経てタッチアップをしたとき、ストロークを描いたこととする。素早くストロークを描く操作をフリックと呼ぶ。フリックは、タッチパネル上に指を触れたままある程度の距離だけ素早く動かして、そのまま離すといった操作であり、言い換えればタッチパネル上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でスライドしたことが検出され、そのままタッチアップが検出されるとフリックが行われたと判定できる。また、所定距離以上を、所定速度未満でスライドしたことが検出された場合はドラッグが行われたと判定するものとする。
The
<接続処理>次に、図3を参照して、デジタルカメラ100とスマートフォン200との接続処理について説明する。本実施形態では、IEEE802.11の無線LAN規格に従った接続形態として、デジタルカメラ100が簡易APとして動作し、スマートフォン200がデジタルカメラ100が形成したネットワークに参加することが可能な場合について説明する。
<Connection Process> Next, a connection process between the
図3(a)はデジタルカメラ100の動作、図3(b)はスマートフォン200の動作をそれぞれ示している。なお、図3の処理は、デジタルカメラ100およびスマートフォン200において、不揮発性メモリ124、224に記録されたプログラムを、システムメモリ123、223に読み出してシステム制御部121、221が実行することにより実現する。
3A shows the operation of the
デジタルカメラ100は、ユーザから操作部113を介して外部機器との通信接続の開始が指示されると、ステップS301にてネットワークを構築する。
When the
ステップS302では、ステップS301で構築したネットワークに対してUPnP(Universal Plug and Play)などのディスカバリー手続きを利用してネットワーク上のカメラデバイスとしてサービスをコントロールポイントにアドバタイズする。 In step S302, a service as a camera device on the network is advertised to the control point using a discovery procedure such as UPnP (Universal Plug and Play) for the network constructed in step S301.
スマートフォン200では、ステップS351において、デジタルカメラ100がステップS301で構築したネットワークを、ユーザが操作部213を介して選択することでネットワークに参加する。ネットワークに参加できたならば後述するリモートカメラアプリケーションを起動してカメラ検出処理を行う。リモートカメラアプリケーションはステップS352においてディスカバリーを利用してステップS302でアドバタイズされたカメラデバイスを検出する。
In the
ステップS353でカメラデバイスが見つかったならば、見つかったカメラデバイスを特定できるデバイス固有情報を表示部207に表示してステップS354にてユーザに対して、接続要求されたカメラであるかの確認と接続の承認を促す。ステップS354で接続が承認されたならばステップS355でデジタルカメラ100に対して接続要求が送信される。
If a camera device is found in step S353, device-specific information that can identify the found camera device is displayed on the
デジタルカメラ100では、ステップS303でスマートフォン200からの接続要求を受けるまでステップS302の処理を行い、ステップS304で接続要求をしてきたスマートフォン200の固有情報を確認する。また、ステップS305で接続が承認されたならばステップS306で接続要求に応答してステップS307で接続を確立する。
In the
スマートフォン200では、ステップS306でのデジタルカメラ100からの応答を受けてステップS356で接続成功を検出しステップS357の通信状態となる。
The
このようにスマートフォン200でのステップS354およびデジタルカメラ100でのステップS305において、双方で接続する相手の固有の情報を表示してユーザが承認する手続きをペアリングと呼ぶ。一度、ペアリングが成立すると、デジタルカメラ100やスマートフォン200ではアクセスポイントの設定や接続相手のスマートフォン200のIDやMACアドレスなど、個体を識別できる接続設定情報を記憶し、外部機器接続設定として登録する。再接続についてはユーザに確認することなく認証は自動的に行われるようになる。
In this way, in step S354 on the
<リモートカメラアプリケーションの説明>次に、図4を参照して、本実施形態のスマートフォン200で実行されるリモートカメラアプリケーションについて説明する。
<Description of Remote Camera Application> Next, with reference to FIG. 4, a remote camera application executed on the
図4は、リモートカメラアプリケーションが起動され、デジタルカメラ100とスマートフォン200との通信を確立した後、表示部207に表示されるカメラ制御画面400である。
FIG. 4 is a
カメラ制御画面400は、リモートカメラアプリケーションが起動され、図3で説明した手順でデジタルカメラ100とスマートフォン200との通信が確立された後に表示部207に表示されるGUIである。カメラ制御画面400には、デジタルカメラ100から受信したライブビュー画像や再生画像を表示するための画像表示領域401が設けられている。また、カメラ制御画面400における画像表示領域401の周辺には、各種の操作部がアイコン402〜409として表示され、ユーザは所望のアイコンにタッチすることで各種機能の実行を指示できる。
The
撮影開始ボタン402は、これをタップすることにより画像表示領域401に現在表示されている画像に対して、撮影モードに応じた処理、例えば、動画の記録の開始や停止、または静止画の撮影指示を行うことができる。さらに、静止画モードにおいて、長押しをした場合は、連写撮影などを行う処理が実行される。また、撮影開始時に、システム制御部221は、音声出力部225を介してシャッター音を出力する。
A
パラメータ変更ボタン403は、これをタップすることにより撮影モードや撮影パラメータの設定変更を行うことができる。撮影モードは、例えば、プログラムモードやシャッタースピード優先、絞り優先、マニュアルモードなどであり、撮影パラメータは、例えば、シャッタースピード値、絞り値、ISO感度値、露出補正値などである。現在のカメラの撮影パラメータは、ライブビュー画像に重畳表示するなどしてユーザに設定値が視認できるように表示される。また、パラメータ変更ボタン403は、デジタルカメラ100の撮影モードを、動画、静止画、スクエア、パノラマといった撮影モードに切り替えることができる。画像確認ボタン404には、撮影開始ボタン402がタップされた後、デジタルカメラ100で撮影または記録された画像のサムネイルが順次更新されて表示される。また、画像確認ボタン404をタップすることにより、デジタルカメラ100で過去に撮影または記録された画像をユーザが閲覧できるように画像表示領域401に表示する再生モード画面に切り替わる。また、画像確認ボタン404をタップすることにより、画像表示領域401に再生される画像を、スマートフォン200に取り込むことができる。
By tapping the
ライブビューオン/オフボタン405は、これをタップすることによりデジタルカメラ100をライブビューモードに設定し、ライブビュー画像の表示を停止または開始(再開)することができる。ライブビューモードでは、デジタルカメ100はライブビュー画像をスマートフォン200に送信し、スマートフォン200はデジタルカメラ100から受信したライブビュー画像の逐次表示を行う。ライブビューモードをオフすることでデジタルカメラ100の消費電力を節約したり温度上昇を抑えることができる。縦/横ロックボタン406は、傾き検出部230により検出されたスマートフォン200の傾き情報に応じてカメラ制御画面400のレイアウトを縦型/横型に自動で切り替える機能をロックすることができる。パラメータ表示オン/オフボタン407は、これをタップすることにより画像表示領域401に重畳表示される撮影パラメータの表示を停止または開始することができる。終了ボタン408は、これをタップすることにより遠隔制御モードを終了し、他のモードに遷移することができる。リフォーカスボタン409は、これをタップすることによりライブビュー画像に重畳表示されているフォーカス枠410に囲まれている被写体に対してフォーカスを合わせることができる。また、フォーカス枠410をドラックすることによりフォーカス位置を移動することができる。このようなユーザインターフェースにより、デジタルカメラ100から受信したライブビュー画像を確認しながら遠隔操作により撮影を行うことができる。
By tapping this on the live view on / off
<傾き補正>次に、図5を参照して、本実施形態のスマートフォン200がデジタルカメラ100で撮影された画像に対して実行する傾き補正処理について説明する。
<Inclination Correction> Next, with reference to FIG. 5, an inclination correction process executed by the
図5(a)に示すように、ユーザが画像表示領域401のライブビュー画像を見て傾き補正が必要と判断した場合、パラメータ変更ボタン403をタップすることにより傾き補正機能をオンすることができる。傾き補正機能がオンされると、システム制御部221は、傾き検出部230により検出されたスマートフォン200の傾き情報に応じてライブビュー画像に傾き補正処理を実行する。具体的には、画像表示領域401に表示されたライブビュー画像にトリミング枠501を重ねて表示する。トリミング枠501は、スマートフォン200(つまり、表示中のライブビュー画像)の傾きに関わらず常に水平方向に表示され、スマートフォン200を傾けるとライブビュー画像に対するトリミング枠501の位置がリアルタイムで更新される。
As shown in FIG. 5A, when the user determines that tilt correction is necessary by looking at the live view image in the
また、システム制御部221は、画像表示領域401の周辺のパラメータ表示オン/オフボタン407に隣接して新たにトリミング枠ロックボタン502を表示する。トリミング枠ロックボタン502は、これをタップすることにより現在のトリミング枠501をロックすることができる。ユーザは、スマートフォン200を傾けながら、トリミング枠501の位置がライブビュー画像に対して所望の位置関係となったところでトリミング枠ロックボタン502をタップすればよい。この場合、例えば、図5の例では、ライブビュー画像中の被写体の向きがトリミング枠501に対して水平/垂直になり、被写体の傾きがなくなるようにユーザがスマートフォン200を傾け、所望の位置でロックすればよい。
In addition, the
ロック状態になると、その時点での傾き検出部230により検出されたスマートフォン200の傾き情報が記憶され、システム制御部221は、この傾き情報に基づいてライブビュー画像の傾きを補正するための傾き補正量を決定する。この状態でユーザはシャッターチャンスを待ち、撮影開始ボタン402をタップすることで撮影処理が実行される。このときに、スマートフォン200は撮影画像の傾き補正に適用する傾き補正量をシステムメモリ223に記憶しておく。
When the lock state is set, the tilt information of the
撮影画像が生成されると画像確認ボタン404にサムネイルが表示される。画像確認ボタン404がタップされると、デジタルカメラ100から撮影画像をスマートフォン200に取り込む。スマートフォン200は、デジタルカメラ100から取り込んだ撮影画像に対して画像撮影時に記憶した傾き補正量に基づく傾き補正処理を実行し、画像のプレビューを行い、傾き補正後の画像データを保存する。
When the captured image is generated, a thumbnail is displayed on the
この傾き補正処理は、スマートフォン200のシステム制御部221に搭載された傾き補正処理部221aによる行われる。傾き補正処理部221aでは、傾き補正量に基づき撮影画像にデジタル回転処理を行う。デジタル回転処理は、トリミング処理によりトリミング枠501に沿って画像を切り取る処理である。
This inclination correction processing is performed by the inclination
このようにして、デジタルカメラ100の姿勢を変更しなくとも、スマートフォン200に保存する画像データに対して傾き補正を適用することが可能となる。これにより、ユーザは、スマートフォン200に保存した画像データをそのままクラウドなどに利用できるのでワークフローを短縮できる。
In this way, it is possible to apply tilt correction to image data stored in the
<傾き補正処理後の画像表示>
図5(b)は、スマートフォン200のカメラ制御画面400に傾き補正後の画像が表示されている様子を示している。
<Image display after tilt correction processing>
FIG. 5B shows a state in which an image after tilt correction is displayed on the
図5(b)に示すように、傾き補正後の画像に対して水平/垂直の格子状のグリッド線551を重ねて表示することで、ユーザが傾き補正後の被写体の向きを確認しやすくなる。なお、スマートフォン200を傾けて画像の傾きを調整する際に、上記トリミング枠501に代えてグリッド線551を用いてもよい。
As shown in FIG. 5B, by displaying the horizontal / vertical grid-
[実施形態2]次に、実施形態2について説明する。 [Second Embodiment] Next, a second embodiment will be described.
本実施形態は、デジタルカメラ100に傾き検出部601を搭載し、デジタルカメラ100がライブビュー画像と共に、傾き検出部601で検出された画像撮影時のデジタルカメラ100の傾き情報(図7で後述するカメラ傾き情報712)を送信する。また、スマートフォン200のカメラ制御画面400においてライブビュー画像に対してデジタルカメラ100の傾きがなくなるように調整する。このように調整を行った後、スマートフォン200で撮影画像の傾き補正処理を行う。
In the present embodiment, the
図6(a)は、本実施形態のデジタルカメラ100の構成を示すブロック図である。以下では、図1と同様の構成には同一の符号を付して説明を省略し、異なる点を中心に説明を行う。
FIG. 6A is a block diagram illustrating a configuration of the
本実施形態のデジタルカメラ100は傾き検出部601を有している。傾き検出部601は、重力方向または水平方向に対するデジタルカメラ100の傾き角θを傾き情報として検出する。
The
本実施形態のデジタルカメラ100は、図6(b)に示すように、傾き検出部601により検出されたカメラの傾き情報に基づいて、表示部107に表示されているライブビュー画像に重ねて水準器情報611および水平位置表示612が表示される。これにより、ユーザは、水準器情報611および水平位置表示612を見ながら、ライブビュー画像の傾きを容易に調整することができる。
As shown in FIG. 6B, the
<傾き補正処理>次に、図7を参照して、本実施形態のスマートフォン200がデジタルカメラ100の傾き情報を用いて撮影画像の傾き補正を行う場合のスマートフォン200のカメラ制御画面400について説明する。
<Tilt Correction Processing> Next, with reference to FIG. 7, the
図7は、本実施形態のスマートフォン200に表示されるカメラ制御画面400を示し、図1と同様の構成には同一の符号を付して説明を省略し、異なる点を中心に説明を行う。
FIG. 7 shows a
図7(a)に示すように、ユーザがパラメータ変更ボタン403をタップして傾き補正機能がオンされると、画像表示領域401に水準器表示710が表示される。システム制御部221は、傾き検出部230により検出されたスマートフォン200の傾き情報に応じてライブビュー画像に重ねて水平表示711を表示する。水平表示711は、スマートフォン200の姿勢に対して重力方向と直交する水平方向を示す。また、システム制御部221は、水平表示711が重ねて表示されたライブブビュー画像にカメラ傾き情報712を重ねて表示する。カメラ傾き情報712は、デジタルカメラ100からライブビュー画像と共に取得したデジタルカメラ100の傾き情報に対応する。本実施形態の傾き補正処理は、ユーザが図7(b)に示すように第1の指標としての水平表示711と第2の指標としてのカメラ傾き情報の差分がなくなるように、水平表示711とカメラ傾き情報表示712が同一線上に重なるようにスマートフォン200を傾けてロックすればよい。なお、水平表示711とカメラ傾き情報表示712が同一線上に重なった場合には線の色が変化したり、音が出るようにしてもよい。
As shown in FIG. 7A, when the user taps the
ロック状態になった後の処理は、実施形態1の図4および図5(a)で説明した通りである。なお、本実施形態では、傾き補正機能をオートモードに設定可能である。傾き補正機能をオートモードに設定すると、デジタルカメラ100からライブビュー画像と共に取得したカメラ傾き情報712に基づいて自動的にロック状態に移行し、傾き補正量が決定される。これにより、ユーザは傾き補正を意識することなく常に傾きが補正された撮影画像をスマートフォン200に保存することができる。
The processing after the locked state is as described in FIGS. 4 and 5A of the first embodiment. In the present embodiment, the tilt correction function can be set to the auto mode. When the tilt correction function is set to the auto mode, the camera automatically shifts to the lock state based on the
[実施形態3]次に、実施形態3について説明する。 [Third Embodiment] Next, a third embodiment will be described.
上記実施形態1、2では、スマートフォン200がデジタルカメラ800で撮影された画像に対して傾き補正処理を行っていたが、この場合、デジタルカメラ800に保存されるオリジナル画像は傾き補正が適用されていない画像となってしまう。そこで、本実施形態では、デジタルカメラ800が撮影画像に対して傾き補正処理を行うものである。
In the first and second embodiments, the
図8は、本実施形態のデジタルカメラ800の構成を示すブロック図である。以下では、図1と同様の構成には同一の符号を付して説明を省略し、異なる点を中心に説明を行う。なお、スマートフォン200の構成は実施形態1の図2と同様であるが、本実施形態では、デジタルカメラ800から傾き補正済みの画像データを取得することができるので、スマートフォン200は必ずしも傾き補正機能を有していなくてもよい。
FIG. 8 is a block diagram showing the configuration of the
本実施形態のデジタルカメラ800は、撮像部104をロール方向に回転駆動する撮像センサ駆動部801、撮像センサ駆動部801を制御する駆動制御部802、撮像装置800に加わる加速度を検出する加速度センサ803、傾き/ブレ検出部804を有する。
The
加速度センサ803は、例えば3軸の加速度センサであり、カメラに加わる重力加速度や、カメラに加わる振れの加速度成分などを検出する。傾き/振れ検出部804は、加速度センサ803によってカメラに加わる加速度のうち重力加速度を検出し、カメラの傾き情報を判定する。本実施形態では、カメラの傾き姿勢情報として、少なくとも重力方向に対する撮像光学系の光軸回り方向(ロール方向)の回転角度を含むものとする。その他、カメラの傾き情報に、例えば水準器に利用するためにあおり方向(ピッチ方向)を含んでもよい。
The
また、傾き/振れ検出部804は、加速度センサ803が重力加速度とは異なる加速度(例えば、カメラに加わる振れの加速度成分)を検出したときに、カメラに加わる外的な加速度として検出する。
Further, when the
システム制御部121は、振れ補正制御部805と傾き補正制御部806を備える。傾き補正制御部805は、傾き/振れ検出部804により検出されたカメラの傾き情報に基づいて、撮像センサ駆動制御部802により撮像部104を回転するための制御量(傾き補正量)を演算する。撮像センサ駆動制御部802は、撮像部104が重力方向と直交する水平方向に対する傾き角を検出し、この傾き角を補正するための制御量を演算する。
さらに、傾き補正制御部806は、傾き/振れ検出部804により検出されたカメラの傾き情報と、撮像センサ駆動制御部802により検出された撮像部104の傾き状態とを比較し、差異がある場合は撮像センサ駆動制御部802により演算された制御量で撮像センサ駆動部801を駆動して撮像部104をロール方向に(光軸に対して直交する面内で)回転して傾き補正を行う。
The
Further, the tilt
次に、図9を参照して、本実施形態のデジタルカメラ800による傾き補正処理について説明する。
Next, tilt correction processing by the
図9(a)は、デジタルカメラ800の姿勢がロール方向にθ°傾いている状態を示している。この状態で撮影を行うと、図9(b)のような傾いた画像が撮影される。ここで、撮像センサ駆動部801により撮像部104をロール方向にθ°回転させることにより、図9(c)に示すようにデジタルカメラ800の姿勢が傾いた状態であっても撮影画像およびライブビュー画像に傾き補正を実行して傾きのない画像を生成することができる。なお、傾き補正を実施した撮影画像に、傾き補正済みであることを示す情報や傾き補正量(回転角θ°)の情報などの付加情報を記録してもよい。
FIG. 9A shows a state in which the posture of the
<デジタル回転処理>
撮像部104を回転駆動することで撮影画像の傾きを補正する場合、撮像センサ駆動制御部802が撮像部104を回転可能な範囲には限りがあり、撮像部104の可動範囲を超えてしまう場合には傾き補正が行えなくなる。そこで、その他の傾き補正方法として画像処理部111において撮影画像にデジタル回転処理を実行して傾きを補正することができる。ただし、デジタル回転処理による傾き補正を実施する場合には撮影画像の解像度が低下してしまうおそれがある。また、撮影画像をトリミングする必要があるため画像の視野角が小さくなってしまう場合がある。図9(d)はデジタル回転処理を適用した撮影画像を例示している。図9(b)の傾いた撮影画像を、デジタル回転処理により傾き角θだけ回転することで傾き補正を行うことができるが、撮影画像データについて図9(d)の領域901をトリミング処理により切り取る必要がある。トリミング処理を行う戸画像データのサイズが小さくなってしまうため、画像サイズを同等にしたい場合にはデジタル拡大処理を実行する必要があるが、これらのデジタル画像処理により画像劣化が発生したり、画像の視野角が小さくなってしまう。
<Digital rotation processing>
When the tilt of the captured image is corrected by rotating the
なお、加速度センサ803が搭載されていないカメラの場合には、図9(b)のように傾いた撮影画像に対して画像解析を行って撮影画像から傾き角θを求め、傾き補正を適用することも可能である。
Note that in the case of a camera not equipped with the
本実施形態によれば、デジタルカメラ800において撮影画像に対して傾き補正を実行し、傾き補正済みの撮影画像をスマートフォン200に送信することで、デジタルカメラ800に保存されるオリジナル画像にもスマートフォン200に保存される画像にも傾き補正を適用することができる。
According to the present embodiment, by performing tilt correction on a captured image in the
なお、本実施形態のデジタルカメラ800は、スマートフォン200から傾き補正量や傾き情報を受けて、デジタルカメラ800が傾き補正処理を行うことも可能である。このように構成することによって、デジタルカメラ800を移動せずに、意図的に傾けたような画像を遠隔操作により撮影することができる。すなわち、三脚に固定したデジタルカメラ800が傾いていたとしもスマートフォン200による遠隔制御での画像撮影時に傾き補正を自由に行うことが可能となり、同時にカメラに保存される撮影画像にも傾き補正を適用することができる。
Note that the
以下に、図10を参照して、デジタルカメラ800がスマートフォン200から取得した傾き補正量や傾き情報に基づいて撮影画像の傾きを補正する処理について説明する。
Hereinafter, with reference to FIG. 10, a process for correcting the tilt of the captured image based on the tilt correction amount and tilt information acquired by the
図10は、本実施形態の遠隔制御による画像撮影時のスマートフォン200における動作(a)およびデジタルカメラ800における動作(b)を示している。
FIG. 10 shows an operation (a) in the
まず、図10(a)を参照して、スマートフォン200の処理を説明する。
First, the process of the
なお、図10(a)の処理は、スマートフォン200のリモートカメラアプリケーションが起動され、デジタルカメラ800がスマートフォン200により遠隔制御が可能となると開始される。
10A is started when the remote camera application of the
ステップS1001では、システム制御部221は、ライブビューオン/オフボタン405がタップされ、デジタルカメラ800に対してライブビュー開始要求を行う。
In step S <b> 1001, the
ステップS1002では、システム制御部221は、デジタルカメラ800に対してライブビュー画像取得要求を送信する。
In step S <b> 1002, the
ステップS1003では、システム制御部221は、リモートカメラアプリケーションのカメラ制御画面400の画像表示領域401にライブビュー画像を表示する。ここで、画像表示領域401にライブビュー画像に重ねてトリミング枠501やグリッド線551、水準器表示710、水平表示711およびカメラ傾き情報表示712を表示することで、ユーザにおいてスマートフォン200での傾き調整に係る操作が容易となる。
In step S1003, the
ステップS1004では、システム制御部221は、ユーザがパラメータ変更ボタン403をタップして傾き補正機能がオンされたか否かを判定する。そして、傾き補正機能がオンされた場合は、ステップS1006に進み、傾き補正機能がオンされていない場合はステップS1005に進む。
In step S1004, the
ステップS1005では、システム制御部221は、デジタルカメラ800に対して傾き補正機能がオフであることを通知する。
In step S1005, the
ステップS1006では、システム制御部221は、トリミング枠ロックボタン502がタップされたか否かを判定し、トリミング枠ロックボタン502がタップされた場合はステップS1007に進み、タップされにない場合はステップS1008に進む。
In step S1006, the
ステップS1007では、システム制御部221は、システムメモリ223に記憶した傾き補正量をデジタルカメラ800に対して通知する。
In step S1007, the
ステップS1008では、システム制御部221は、傾き検出部230により検出されたスマートフォン200の傾き情報をデジタルカメラ800に対して通知する。なお、この通知がデジタルカメラ100に対して傾き補正を実行する要求となり、デジタルカメラ100はこの傾き補正要求をトリガーとして傾き補正処理を実行する。
In step S <b> 1008, the
ステップS1009では、システム制御部221は、撮影開始ボタン402がタップされたか否かを判定し、タップされた場合はステップS1010に進み、タップされない場合はステップS1012に進む。
In step S1009, the
ステップS1010、S1011では、システム制御部221は、デジタルカメラ800に対して撮影コマンドを通知し、デジタルカメラ800から画像生成通知を受けて撮影画像をデジタルカメラ800から受信するとともに記録媒体228などに保存する。
In steps S1010 and S1011, the
ステップS1012では、システム制御部221は、ライブビューオン/オフボタン405が再度タップされたか否かを判定し、タップされた場合はステップS1013に進み、タップされない場合はステップS1002に進む。
In step S1012, the
ステップS1013では、システム制御部221は、ライブビュー画像の表示を停止し、デジタルカメラ800に対してライブビュー終了要求を行う。
In step S <b> 1013, the
次に、図10(b)を参照して、スマートフォン200により遠隔制御されるデジタルカメラ800の処理について説明する。
Next, processing of the
ステップS1051では、システム制御部121は、ライブビューモードに設定されたか否かを判定し、ライブビューモードに設定された場合はステップS1052に進み、設定されない場合はステップS1058に進む。スマートフォン200は、ステップS1002でデジタルカメラ800に対してライブビュー画像取得要求を行うことで、デジタルカメラ800をライブビューモードに設定することができる。
In step S1051, the
ステップS1052では、システム制御部121は、撮像部104から撮像画像を読み出し、メモリ109に保持する。
In step S <b> 1052, the
ステップS1053では、システム制御部121は、傾き補正機能がオンであるか否かを判定し、オンの場合はステップS1054に進み、オフの場合はステップS1055に進む。傾き補正機能は、デジタルカメラ800で設定できるほか、スマートフォン200からはステップS1007やS1008により設定可能である。
In step S1053, the
ステップS1054では、システム制御部121は、傾き検出部601により検出されたデジタルカメラ800の傾き情報を用いて、撮像部104を回転駆動または画像処理部111によりステップS1052で取得した画像データに傾き補正処理を実行する。あるいは、システム制御部121は、ステップS1007でスマートフォン200から受信した傾き情報と傾き検出部601により検出されたデジタルカメラ800の傾き情報を用いてステップS1052で取得した画像データに対して傾き補正処理を実行する。なお、この場合、スマートフォン200側から受信した傾き補正要求を優先する。
In step S <b> 1054, the
ステップS1055では、システム制御部121は、ライブビュー画像データをメモリ109に保持するとともに、表示部107にライブビュー画像を表示するが、ステップS1054で傾き補正を行っている場合には傾き補正後の画像が表示される。
In step S1055, the
ステップS1056では、システム制御部121は、ステップS1003のライブビュー画像取得要求を受信しているか否かを判定し、受信している場合はステップS1057に進み、受信していない場合はステップS1058に進む。
In step S1056, the
ステップS1057では、システム制御部121は、ステップS1055でメモリ109に保持し、表示部107に表示したライブビュー画像と同等の画像データをスマートフォン200に送信する。
In step S1057, the
ステップS1058では、システム制御部121は、ステップS1010の撮影コマンドを受信したか否かを判定し、受信している場合はステップS1059に進み、受信していない場合はステップS1063に進む。なお、撮影コマンドを受信する代わりに、第2シャッタースイッチ120の第2シャッタースイッチ信号SW2に基づいて撮影処理を実行してもよい。
In step S1058, the
ステップS1059では、システム制御部121は、撮影コマンドを受信した時点でライブビュー表示されている画像データを記録媒体128に記録する撮影処理を実行する。
In step S <b> 1059, the
ステップS1060では、システム制御部121は、ステップS1053と同様に、傾き補正機能がオンであるか否かを判定し、オンの場合はステップS1061に進み、オフの場合はステップS1062に進む。傾き補正機能は、デジタルカメラ側で設定できるほか、スマートフォン200側からはステップS1007やS1008により設定可能である。
In step S1060, similarly to step S1053, the
ステップS1061では、システム制御部121は、ステップS1054と同様に、傾き検出部601により検出されたデジタルカメラ800の傾き情報を用いて、撮像部104を回転駆動または画像処理部111によりステップS1052で取得した画像データに傾き補正処理を実行する。あるいは、システム制御部121は、ステップS1007でスマートフォン200から受信した傾き情報と傾き検出部601により検出されたデジタルカメラ800の傾き情報を用いてステップS1052で取得した画像データに傾き補正処理を実行する。なお、この場合、スマートフォン200側から受信した傾き補正要求を優先する。傾き補正後のデータは記録媒体128に記録される。
In step S1061, similarly to step S1054, the
ステップS1062では、システム制御部121は、スマートフォン200に対して撮影画像が生成されたことを通知する。そして、ステップS1012で、スマートフォン200から画像データの取得要求を受けた場合、撮影画像を必要に応じてリサイズ処理など行ってスマートフォン200に送信する。
In step S1062, the
ステップS1063では、システム制御部121は、ステップS1013でスマートフォン200からライブビュー終了要求を受けるまで、ステップS1051からの処理を繰り返し行う。
In step S1063, the
以上のように、本実施形態のデジタルカメラ800によれば、スマートフォン200から傾き補正量や傾き情報を受信して傾き補正を実施することにより、デジタルカメラ800を移動せずに、意図的に傾けたような画像をリモート撮影することができる。このように、三脚に固定したデジタルカメラ800が傾いていたとしもスマートフォン200による遠隔制御での画像撮影時に傾き補正を自由に行うことが可能となり、同時にカメラに保存される撮影画像にも傾き補正を適用することができる。
As described above, according to the
[実施形態4]次に、実施形態4について説明する。 [Fourth Embodiment] Next, a fourth embodiment will be described.
本実施形態のデジタルカメラ800は、スマートフォン200による遠隔制御時に、自動的にライブビュー画像や撮影画像に対して傾き補正を適用するオートモードに設定可能である。撮影画像の制作意図によっては、意識的に傾けて撮影する場合もあるために、傾き補正機能についてはユーザが有効/無効に設定できるようになっている。オートモードの設定状態は、不揮発性メモリ124に記憶される。
The
傾き補正機能をオートモードに設定すると、デジタルカメラ800は、自動的に傾き補正済みのライブビュー画像や撮影画像をスマートフォン200に送信する。また、スマートフォン200は、デジタルカメラ800から送信されるライブビュー画像に対して自動的にロック状態を判定してデジタルカメラ800で傾き補正を行うための傾き補正量を送信するこれにより、ユーザは傾き補正を意識することなく常に傾きが補正された撮影画像をデジタルカメラ100、800やスマートフォン200に保存することができる。
When the tilt correction function is set to the auto mode, the
しかしながら、デジタルカメラ800の加速度センサ803、傾き/振れ検出部804および撮像センサ駆動制御部802は傾き補正だけでなく手ぶれ補正にも利用される。振れ補正制御部805は、傾き/振れ検出部804により検出されるカメラに加わる振れの加速度成分を打ち消す方向および移動量を算出し、撮像センサ駆動制御部802および撮像センサ駆動部801により撮像部104の回転制御を行う。手ぶれ補正と傾き補正機能がいずれも有効に設定されていた場合、それぞれの補正効果は若干劣ることとなるために、通常のユースケースに鑑みて出荷時のデフォルトの設定では手ぶれ補正を有効とし、傾き補正機能は無効になっている。
However, the
そこで、本実施形態では、スマートフォン200による遠隔制御時は、デジタルカメラ800の傾き補正機能の設定を自動的に有効に変更し、遠隔制御が終了した後(接続切断した後)に傾き補正機能の設定を自動的に元の無効設定に戻すように構成されている。
Therefore, in the present embodiment, during remote control by the
<リモートカメラアプリケーションの説明>次に、図11を参照して、本実施形態のスマートフォン200で実行されるリモートカメラアプリケーションについて説明する。
<Description of Remote Camera Application> Next, with reference to FIG. 11, a remote camera application executed on the
図11は、リモートカメラアプリケーションが起動され、デジタルカメラ800とスマートフォン200が接続された後、表示部207に表示されるカメラ制御画面400である。
FIG. 11 shows a
図11のカメラ制御画面400において、図4の画面と異なるのは、設定変更ボタン1101である。設定変更ボタン1101は、傾き補正機能が自動で有効に設定されないように、デジタルカメラ800の傾き補正機能の有効/無効をスマートフォン200のカメラ制御画面400においてユーザがマニュアルで切り替えることができる。その他の画面構成は、図4と同様である。
In the
<傾き補正機能の設定変更処理>次に、図12を参照して、本実施形態のデジタルカメラ800において傾き補正機能を自動的に設定変更する処理について説明する。
<Inclination Correction Function Setting Change Process> Next, a process for automatically changing the inclination correction function setting in the
本実施形態のデジタルカメラ800は、図3の手順によりスマートフォン200との接続が確立されると、傾き補正機能の設定が自動的に有効に切り替わる。
In the
図12の処理は、スマートフォン200のリモートカメラアプリケーションが起動され、デジタルカメラ800がスマートフォン200により遠隔制御が可能となると開始される。
The process in FIG. 12 is started when the remote camera application of the
ステップS1201で、図3の手順によりデジタルカメラ800とスマートフォン200の接続が確立されると、ステップS1202に進む。
In step S1201, when the connection between the
ステップS1202では、システム制御部121は、現在の傾き補正機能の有効/無効の設定値を不揮発性メモリ124に記憶し、システムメモリ123の設定値を退避させる。なお、スマートフォン200による遠隔制御では、デジタルカメラ800を三脚に固定するユースケースが多く、手ぶれ補正が必要ない場合も多いので傾き補正機能を有効に設定すると同時に手ぶれ補正を無効に設定してもよい。その場合は、ステップS602において手振れ補正に関する設定値も同時に不揮発性メモリ124に記憶し、システムメモリ123の設定値を退避させる。
In step S <b> 1202, the
ステップS1203では、システム制御部121は、傾き補正機能を有効に設定する。ここで、必要に応じて手振れ補正機能を無効に設定する。この設定変更は一時的なものであるので、必ずしも不揮発性メモリ124の設定値を変更する必要はない。
In step S1203, the
ステップS1204では、システム制御部121は、スマートフォン200による遠隔制御による撮影が実行される。この場合、傾き補正機能が有効になっているので、スマートフォン200の表示部207に表示されるカメラ制御画面400の画像表示領域401のライブビュー画像も傾き補正が適用されたものが表示される。また、撮影処理が行われると、デジタルカメラ800に保存される撮影画像はもちろんであるが、スマートフォン200に送信される撮影画像も傾き補正が適用されたものとなる。なお、撮影画像はユーザが意図的に傾き補正機能を有効に設定して撮影された画像ではないので撮影画像に対して傾き補正が適用されていることを付加情報として撮影画像に記録してもよい。ユーザが意図的に傾いている画像を撮影したい場合には、図11に示した設定変更ボタン1101をタップすることにより、デジタルカメラ800に対して傾き補正機能の設定変更要求が送信され、傾き補正機能を任意に有効/無効に設定することができる。
In step S <b> 1204, the
その後、ステップS1205では、スマートフォン200から切断要求を受けて接続が切断されるまで、ステップS1204の遠隔制御を継続し、接続が切断されると、ステップS1206に進む。なお、遠隔制御における撮影指示はスマートフォン200の撮影開始ボタン402のタップのみとは限らない。デジタルカメラ800の物理的なシャッターボタン114の操作によっても撮影は実施され、傾き補正済みの画像がスマートフォン200に送信されるようにしてもよい。
Thereafter, in step S1205, the remote control in step S1204 is continued until the connection is disconnected upon receiving a disconnection request from the
ステップS1206では、システム制御部121は、ステップS1202でシステムメモリ123から退避した設定値を元の値に戻し、処理を終了する。
In step S1206, the
上述した実施形態によれば、撮影者が意識することなく三脚を使用した記念写真などの撮影において画像が傾いてしまうといった失敗を防止することができる。また、遠隔制御による撮影終了後に設定値を元に戻す操作が必要ないので、操作の手間を省き、従来と変わらない撮影が可能となる。 According to the above-described embodiment, it is possible to prevent a failure in which an image is inclined in photographing a commemorative photo using a tripod without the photographer being conscious. Further, since there is no need to return the setting value to the original value after the remote control shooting is completed, it is possible to save the operation and to perform shooting that is the same as in the past.
[その他の実施形態]
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
[Other Embodiments]
The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in the computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.
100、800…デジタルカメラ、107…表示部、110…通信I/F、111…画像処理部、121…システム制御部、601…傾き検出部、200…スマートフォン、207…表示部、210…通信I/F、221…システム制御部、230…傾き検出部
DESCRIPTION OF
Claims (26)
前記撮像装置と通信可能に接続する接続手段と、
前記接続手段を介して前記撮像装置から取得した画像を表示する表示手段と、
前記表示手段に画像が表示されているときに前記通信装置の姿勢情報を取得する取得手段と、
前記通信装置の姿勢情報に基づいて前記撮像装置から取得した画像の傾きを補正する傾き補正手段と、を有することを特徴とする通信装置。 A communication device for remotely controlling an imaging device,
Connection means for connecting to the imaging device in a communicable manner;
Display means for displaying an image acquired from the imaging device via the connection means;
Obtaining means for obtaining posture information of the communication device when an image is displayed on the display means;
A communication apparatus comprising: an inclination correction unit that corrects an inclination of an image acquired from the imaging apparatus based on attitude information of the communication apparatus.
前記傾き補正手段は、前記傾き情報に基づいて前記撮像装置から取得した画像の傾きを補正することを特徴とする請求項1に記載の通信装置。 The acquisition unit detects inclination information indicating an inclination of the communication device with respect to a gravitational direction,
The communication apparatus according to claim 1, wherein the inclination correction unit corrects an inclination of an image acquired from the imaging apparatus based on the inclination information.
前記傾き補正手段は、前記画像に対してロックされたトリミング枠に合わせて画像を切り取るトリミング処理を行い、
前記表示手段は、前記傾きが補正された画像を表示することを特徴とする請求項3に記載の通信装置。 A lock unit for locking the position of the trimming frame with respect to the image displayed on the display unit;
The tilt correction means performs a trimming process for cutting out an image in accordance with a trimming frame locked to the image,
The communication apparatus according to claim 3, wherein the display unit displays an image with the tilt corrected.
前記取得手段は、前記撮像装置から、当該撮像装置において撮影された画像と共に、当該画像の撮影時の前記撮像装置の傾き情報を取得し、
前記傾き補正手段は、前記画像の傾きを補正するための傾き補正量を決定することを特徴とする請求項1ないし7のいずれか1項に記載の通信装置。 The imaging apparatus has an inclination detection means for detecting inclination information indicating an inclination of the imaging apparatus with respect to the direction of gravity at the time of image capturing,
The acquisition means acquires the tilt information of the imaging device at the time of shooting the image together with the image shot by the imaging device from the imaging device,
The communication apparatus according to claim 1, wherein the inclination correction unit determines an inclination correction amount for correcting the inclination of the image.
前記傾き補正手段は、前記第1の指標と前記第2の指標との差分に基づいて前記傾き補正量を決定することを特徴とする請求項8に記載の通信装置。 The display means displays on the display means a first index indicating tilt information of the imaging device at the time of capturing the image and a second index indicating current tilt information of the communication device. Displayed on top of
The communication apparatus according to claim 8, wherein the inclination correction unit determines the inclination correction amount based on a difference between the first index and the second index.
前記通信装置と通信可能に接続する接続手段と、
前記撮像装置において撮影された画像と、当該画像を撮影したときの前記撮像装置の姿勢情報を取得する取得手段と、
前記姿勢情報に基づいて前記撮影された画像の傾きを補正する傾き補正手段と、
前記傾きが補正された画像を前記通信装置に送信する送信手段と、を有することを特徴とする撮像装置。 An imaging device controlled remotely by a communication device,
A connection means for connecting to the communication device in a communicable manner;
An image captured by the imaging device; and acquisition means for acquiring posture information of the imaging device when the image is captured;
Tilt correction means for correcting the tilt of the captured image based on the posture information;
An image pickup apparatus comprising: a transmission unit that transmits the image with the tilt corrected to the communication apparatus.
前記傾き補正手段は、前記通信装置から受信した前記傾き補正量または前記通信装置の傾き情報に基づいて前記撮影された画像の傾きを補正することを特徴とする請求項10に記載の撮像装置。 A receiving means for receiving from the communication device an inclination correction amount for correcting an inclination of the image or inclination information indicating an inclination of the communication device with respect to a gravitational direction;
The imaging apparatus according to claim 10, wherein the tilt correction unit corrects the tilt of the photographed image based on the tilt correction amount received from the communication apparatus or tilt information of the communication apparatus.
前記傾き補正手段は、撮像部を光軸まわりに回転させる駆動手段を有し、
前記駆動手段は、前記撮像装置の傾き情報に基づいて前記撮像装置の傾きがなくなるように前記撮像部を回転駆動することを特徴とする請求項10ないし13のいずれか1項に記載の撮像装置。 The acquisition means detects inclination information indicating an inclination of the imaging device with respect to the direction of gravity,
The tilt correction means has a drive means for rotating the imaging unit around the optical axis,
The imaging device according to claim 10, wherein the driving unit rotationally drives the imaging unit based on tilt information of the imaging device so that the tilt of the imaging device is eliminated. .
前記傾き補正手段は、前記撮影された画像を回転させる画像処理手段を有し、
前記画像処理手段は、前記撮像装置の傾き情報に基づいて前記画像の傾きがなくなるように画像を切り取るトリミング処理を行うことを特徴とする請求項10ないし13のいずれか1項に記載の撮像装置。 The acquisition means detects inclination information indicating an inclination of the imaging device with respect to the direction of gravity,
The tilt correction means includes image processing means for rotating the photographed image,
The imaging apparatus according to any one of claims 10 to 13, wherein the image processing means performs a trimming process of cutting out an image so that the inclination of the image is eliminated based on inclination information of the imaging apparatus. .
前記撮像装置の振れを補正する振れ補正手段と、
前記通信装置と前記撮像装置とが前記接続手段により接続されている場合には、前記振れ補正手段による振れ補正機能を無効に設定する設定手段と、を更に有することを特徴とする請求項16ないし18のいずれか1項に記載の撮像装置。 Shake detection means for detecting shake of the imaging device;
Shake correction means for correcting shake of the imaging apparatus;
17. The apparatus according to claim 16, further comprising setting means for invalidating a shake correction function by the shake correction means when the communication device and the imaging device are connected by the connection means. The imaging device according to any one of 18.
前記撮像装置と通信可能に接続するステップと、
前記撮像装置から取得した画像を表示するステップと、
前記画像が表示されているときに前記通信装置の姿勢情報を取得するステップと、
前記通信装置の姿勢情報に基づいて前記撮像装置から取得した画像の傾きを補正するステップと、を有することを特徴とする通信装置の制御方法。 A control method of a communication device for remotely controlling an imaging device,
Connecting to the imaging device in a communicable manner;
Displaying an image acquired from the imaging device;
Obtaining posture information of the communication device when the image is displayed;
Correcting the inclination of the image acquired from the imaging device based on the attitude information of the communication device.
前記通信装置と通信可能に接続するステップと、
前記撮像装置において撮影された画像と、当該画像を撮影したときの前記撮像装置の姿勢情報を取得するステップと、
前記姿勢情報に基づいて前記撮影された画像の傾きを補正するステップと、
前記傾きが補正された画像を前記通信装置に送信するステップと、を有することを特徴とする撮像装置の制御方法。 A method for controlling an imaging device that is remotely controlled by a communication device,
Connecting to the communication device in a communicable manner;
Acquiring an image captured by the imaging device, and posture information of the imaging device when the image is captured;
Correcting the tilt of the captured image based on the posture information;
And a step of transmitting the image with the tilt corrected to the communication device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016131028A JP2018006996A (en) | 2016-06-30 | 2016-06-30 | Communication device, imaging device, control method of those, program, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016131028A JP2018006996A (en) | 2016-06-30 | 2016-06-30 | Communication device, imaging device, control method of those, program, and storage medium |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2018006996A true JP2018006996A (en) | 2018-01-11 |
Family
ID=60948197
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016131028A Pending JP2018006996A (en) | 2016-06-30 | 2016-06-30 | Communication device, imaging device, control method of those, program, and storage medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2018006996A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113014796A (en) * | 2019-12-20 | 2021-06-22 | 佳能株式会社 | Image processing apparatus, image capturing apparatus, image processing method, and storage medium |
JP7501559B2 (en) | 2022-03-17 | 2024-06-18 | 株式会社リコー | Display terminal, display method, communication system, communication method, and program |
-
2016
- 2016-06-30 JP JP2016131028A patent/JP2018006996A/en active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113014796A (en) * | 2019-12-20 | 2021-06-22 | 佳能株式会社 | Image processing apparatus, image capturing apparatus, image processing method, and storage medium |
CN113014796B (en) * | 2019-12-20 | 2023-11-03 | 佳能株式会社 | Image processing apparatus, image capturing apparatus, image processing method, and storage medium |
JP7501559B2 (en) | 2022-03-17 | 2024-06-18 | 株式会社リコー | Display terminal, display method, communication system, communication method, and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6765956B2 (en) | Imaging control device and its control method | |
JP5820181B2 (en) | Imaging system and control method thereof, display control apparatus and control method thereof, program, and storage medium | |
US9635235B2 (en) | Communication apparatus and control method thereof | |
US10397482B2 (en) | Imaging control apparatus and method for controlling the same | |
JP6598589B2 (en) | Imaging apparatus and control method thereof | |
JP7258482B2 (en) | Electronics | |
CN111385470B (en) | Electronic device, control method of electronic device, and computer-readable medium | |
JP7094815B2 (en) | Display control device, control method of display control device, program, storage medium | |
JP2019054378A (en) | Imaging apparatus and control method thereof, and program | |
JP2017011579A (en) | Imaging device, control method for the same, program and storage medium | |
KR20200028298A (en) | Display control apparatus, imaging apparatus, control method, and computer readable medium | |
JP2018006996A (en) | Communication device, imaging device, control method of those, program, and storage medium | |
JP2021170066A (en) | Display control apparatus and method, program, and storage medium | |
US9232133B2 (en) | Image capturing apparatus for prioritizing shooting parameter settings and control method thereof | |
JP6312423B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
JP6410778B2 (en) | Imaging apparatus and control method thereof | |
JP6393296B2 (en) | IMAGING DEVICE AND ITS CONTROL METHOD, IMAGING CONTROL DEVICE, PROGRAM, AND STORAGE MEDIUM | |
JP6641156B2 (en) | Communication device, control method therefor, program, and storage medium | |
WO2023007904A1 (en) | Electronic device, electronic device control method, program, and storage medium | |
JP6460785B2 (en) | Electronic device and control method of electronic device | |
JP2017038280A (en) | Communication device, imaging device, and control method thereof, system, and program | |
JP2020167457A (en) | Image processing device, image processing method, and program | |
JP2024037370A (en) | Imaging apparatus, control method of imaging apparatus and program | |
JP2023161441A (en) | Information processing device and control method and program therefor | |
JP2014212405A (en) | Imaging apparatus, control method, program, and storage medium |