JP2018006996A - Communication device, imaging device, control method of those, program, and storage medium - Google Patents

Communication device, imaging device, control method of those, program, and storage medium Download PDF

Info

Publication number
JP2018006996A
JP2018006996A JP2016131028A JP2016131028A JP2018006996A JP 2018006996 A JP2018006996 A JP 2018006996A JP 2016131028 A JP2016131028 A JP 2016131028A JP 2016131028 A JP2016131028 A JP 2016131028A JP 2018006996 A JP2018006996 A JP 2018006996A
Authority
JP
Japan
Prior art keywords
image
tilt
inclination
imaging device
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016131028A
Other languages
Japanese (ja)
Inventor
木村 雅彦
Masahiko Kimura
雅彦 木村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2016131028A priority Critical patent/JP2018006996A/en
Publication of JP2018006996A publication Critical patent/JP2018006996A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Details Of Cameras Including Film Mechanisms (AREA)
  • Camera Bodies And Camera Details Or Accessories (AREA)
  • Adjustment Of Camera Lenses (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a technique that can correct an imaged image in a correct direction even if an imaging device is not installed in a proper posture when the imaging device is controlled by remote operation.SOLUTION: A communication device for controlling an imaging device from a remote place includes: connection means for communicatively connecting with the imaging device; display means for displaying an image obtained from the imaging device via the connection means; acquisition means for acquiring posture information on the communication device when the image is being displayed on the display means; and tilt correction means for correcting a tilt of the image obtained from the imaging device on the basis of the posture information on the communication device.SELECTED DRAWING: Figure 5

Description

本発明は、通信装置と撮像装置が無線通信を行う技術に関する。   The present invention relates to a technology in which a communication device and an imaging device perform wireless communication.

近年、携帯電話やその一種であるスマートフォンとデジタルカメラをWi−Fiなどで無線接続して、デジタルカメラをスマートフォンで遠隔制御して撮影を行ったり、デジタルカメラで撮影された画像を取り込むことが可能となっている。また、デジタルカメラをスマートフォンで遠隔制御して撮影を行うユースケースとしては、例えば、デジタルカメラを三脚などに固定して行う、観光地での記念撮影や集合写真の撮影が挙げられる。このようなユースケースではデジタルカメラが三脚に正しい姿勢(例えば、正位置(水平状態))で固定されていない場合であっても、撮影画像は適切な向き(水平状態)に補正されていることが望ましい。このようなユースケースに対して、記念撮影において容易に水平補正が施された画像を撮影する技術(特許文献1)や遠隔地においてデジタルカメラの傾き情報を確認する技術が知られている(特許文献2)。   In recent years, it is possible to wirelessly connect a mobile phone or a smartphone of its kind to a digital camera via Wi-Fi, etc., remotely control the digital camera with a smartphone, and capture images taken with the digital camera It has become. In addition, examples of use cases in which a digital camera is remotely controlled by a smartphone to take a picture include taking a commemorative photo at a tourist spot or taking a group photo by fixing the digital camera to a tripod or the like. In such a use case, even if the digital camera is not fixed to the tripod in the correct posture (for example, the normal position (horizontal state)), the captured image is corrected to the appropriate orientation (horizontal state). Is desirable. For such a use case, a technique for easily capturing an image that has been subjected to horizontal correction in commemorative photography (Patent Document 1) and a technique for confirming the tilt information of a digital camera in a remote place are known (patent). Reference 2).

特開2009−139606号公報JP 2009-139606 A 特開2013−030122号公報JP 2013-030122 A

上述したユースケースでは、デジタルカメラから送信されるライブビュー画像をスマートフォンで確認することが可能である。しかしながら、例えばデジタルカメラを三脚に固定してスマートフォンによる遠隔操作で撮影を行う際にデジタルカメラから送信されるライブビュー画像が傾いている場合には、デジタルカメラの姿勢を修正しない限り、画像を適切な向き(水平状態)に補正することはできない。   In the use case described above, a live view image transmitted from a digital camera can be confirmed on a smartphone. However, for example, if the live view image sent from the digital camera is tilted when the digital camera is fixed on a tripod and shot by remote control using a smartphone, the image will be displayed properly unless the posture of the digital camera is corrected. It cannot be corrected to the correct orientation (horizontal state).

また、例えば観光地で記念撮影を行う際にユーザが三脚を持ち合わせていない場合には、デジタルカメラを適当な場所に置いて撮影を行うことも考えられるが、デジタルカメラの姿勢を置く場所で調整することは極めて難しい。   Also, for example, when taking a commemorative photo at a tourist spot, if the user does not have a tripod, the digital camera may be placed in a suitable location, but the digital camera may be placed in an appropriate position. It is extremely difficult to do.

このように、撮像装置を遠隔操作により制御する際に、撮像装置が適切な姿勢で設置されていない場合に正しい向きの撮影画像を得ることは困難であった。   As described above, when the imaging apparatus is controlled by remote operation, it is difficult to obtain a captured image in the correct orientation when the imaging apparatus is not installed in an appropriate posture.

本発明は、上記課題に鑑みてなされ、その目的は、撮像装置を遠隔操作により制御する際に、撮像装置が適切な姿勢で設置されていない場合であっても、撮影画像を正しい向きに補正できる技術を実現することである。   The present invention has been made in view of the above problems, and its purpose is to correct a captured image in a correct orientation even when the imaging device is not installed in an appropriate posture when the imaging device is controlled by remote control. It is to realize the technology that can.

上記課題を解決し、目的を達成するために、本発明の通信装置は、撮像装置を遠隔から制御する通信装置であって、前記撮像装置と通信可能に接続する接続手段と、前記接続手段を介して前記撮像装置から取得した画像を表示する表示手段と、前記表示手段に画像が表示されているときに前記通信装置の姿勢情報を取得する取得手段と、前記通信装置の姿勢情報に基づいて前記撮像装置から取得した画像の傾きを補正する傾き補正手段と、を有する。   In order to solve the above-described problems and achieve the object, a communication device of the present invention is a communication device that remotely controls an imaging device, and includes a connection unit that is communicably connected to the imaging device, and the connection unit. Based on the attitude information of the communication device, the display means for displaying the image acquired from the imaging device via the display, the acquisition means for acquiring the posture information of the communication device when the image is displayed on the display means Inclination correction means for correcting the inclination of the image acquired from the imaging apparatus.

また、本発明の撮像装置は、通信装置により遠隔から制御される撮像装置であって、前記通信装置と通信可能に接続する接続手段と、前記撮像装置において撮影された画像と、当該画像を撮影したときの前記撮像装置の姿勢情報を取得する取得手段と、前記姿勢情報に基づいて前記撮影された画像の傾きを補正する傾き補正手段と、前記傾きが補正された画像を前記通信装置に送信する送信手段と、を有する。   The imaging device of the present invention is an imaging device that is remotely controlled by a communication device, and is connected to the communication device so as to be communicable, an image taken by the imaging device, and the image taken An acquisition unit that acquires posture information of the imaging device at the time, an inclination correction unit that corrects an inclination of the captured image based on the posture information, and an image with the inclination corrected transmitted to the communication device Transmitting means.

本発明によれば、撮像装置を遠隔操作により制御する際に、撮像装置が適切な姿勢で設置されていない場合であっても、撮影画像を正しい向きに補正することができる。   According to the present invention, when the imaging device is controlled by remote operation, the captured image can be corrected in the correct orientation even when the imaging device is not installed in an appropriate posture.

実施形態1のデジタルカメラの構成を示すブロック図。1 is a block diagram illustrating a configuration of a digital camera according to a first embodiment. 本実施形態のスマートフォンの構成を示すブロック図。The block diagram which shows the structure of the smart phone of this embodiment. 本実施形態のデジタルカメラとスマートフォンの接続処理を示すフローチャート。The flowchart which shows the connection process of the digital camera of this embodiment, and a smart phone. 実施形態1のスマートフォンのリモートカメラアプリケーション画面を例示する図。The figure which illustrates the remote camera application screen of the smart phone of Embodiment 1. 実施形態1の傾き補正処理を行う際のリモートカメラアプリケーション画面を例示する図。FIG. 3 is a diagram illustrating a remote camera application screen when performing tilt correction processing according to the first embodiment. 実施形態2のデジタルカメラの構成を示すブロック図(a)およびデジタルカメラが傾いている状態を示す図(b)。The block diagram (a) which shows the structure of the digital camera of Embodiment 2, and the figure (b) which show the state which the digital camera inclines. 実施形態2の傾き補正処理を行う際のリモートカメラアプリケーション画面を例示する図。The figure which illustrates the remote camera application screen at the time of performing the inclination correction process of Embodiment 2. 実施形態3のデジタルカメラの構成を示すブロック図。FIG. 9 is a block diagram illustrating a configuration of a digital camera according to a third embodiment. 実施形態3のデジタルカメラによる傾き補正処理を説明する図。FIG. 10 is a diagram for explaining tilt correction processing by the digital camera of the third embodiment. 実施形態3のデジタルカメラによる傾き補正処理を行う際のスマートフォンとデジタルカメラの処理を示すフローチャート。10 is a flowchart illustrating processing of a smartphone and a digital camera when performing tilt correction processing by the digital camera of Embodiment 3. 実施形態4の傾き補正処理を行う際のリモートカメラアプリケーション画面を例示する図。The figure which illustrates the remote camera application screen at the time of performing the inclination correction process of Embodiment 4. 実施形態4の傾き補正機能の設定変更処理を示すフローチャート。10 is a flowchart illustrating setting change processing of an inclination correction function according to the fourth embodiment.

以下に、本発明を実施するための形態について詳細に説明する。尚、以下に説明する実施の形態は、本発明を実現するための一例であり、本発明が適用される装置の構成や各種条件によって適宜修正または変更されるべきものであり、本発明は以下の実施の形態に限定されるものではない。また、後述する各実施形態の一部を適宜組み合わせて構成してもよい。   Hereinafter, embodiments for carrying out the present invention will be described in detail. The embodiment described below is an example for realizing the present invention, and should be appropriately modified or changed according to the configuration and various conditions of the apparatus to which the present invention is applied. It is not limited to the embodiment. Moreover, you may comprise combining suitably one part of each embodiment mentioned later.

[実施形態1]本実施形態は、通信装置の一例として携帯電話の一種であるスマートフォン200と、撮像装置の一例としてのデジタルカメラ100とが通信可能に接続されてデジタルカメラ100を遠隔操作により制御するリモートカメラシステムの例を説明する。なお、本実施形態の通信装置はスマートフォン200に限らず、無線機能付きのデジタルカメラ、携帯型のメディアプレーヤやいわゆるタブレットデバイス、パーソナルコンピュータ、携帯型機器としてのメディアプレーヤやタブレット、パーソナルコンピュータなどを含むあらゆる種類の移動体無線通信機器に適用が可能である。また、本実施形態の撮像装置はデジタルカメラに限らず、例えば、タブレットデバイス、メディアプレーヤ、監視カメラ、医療機器などであってもよい。また、本実施形態の撮像装置は、レンズ交換式の一眼レフデジタルカメラやコンパクトデジタルカメラに限らない。   [Embodiment 1] In this embodiment, a smartphone 200, which is a type of mobile phone, as an example of a communication device, and a digital camera 100, which is an example of an imaging device, are communicably connected, and the digital camera 100 is controlled by remote control. An example of a remote camera system will be described. The communication apparatus according to the present embodiment is not limited to the smartphone 200 but includes a digital camera with a wireless function, a portable media player or a so-called tablet device, a personal computer, a media player or tablet as a portable device, a personal computer, and the like. The present invention can be applied to all types of mobile radio communication devices. Further, the imaging apparatus according to the present embodiment is not limited to a digital camera, and may be a tablet device, a media player, a monitoring camera, a medical device, or the like. Further, the imaging apparatus of the present embodiment is not limited to a lens interchangeable single-lens reflex digital camera or a compact digital camera.

<デジタルカメラ100の構成>図1を参照して、本発明に係る実施形態のデジタルカメラ100の構成および機能の概略について説明する。   <Configuration of Digital Camera 100> The configuration and functions of the digital camera 100 according to the embodiment of the present invention will be outlined with reference to FIG.

図1において、撮影レンズ102はズームレンズ、フォーカスレンズを含むレンズ群である。シャッター103は絞り機能を備える。撮像部104は光学像を電気信号に変換するCCDやCMOS等で構成される撮像素子である。A/D変換器105は、撮像部104から出力されるアナログ信号をデジタル信号に変換する。バリア101は、デジタルカメラ100の、撮影レンズ102を含む撮像系を覆うことにより、撮影レンズ102、シャッター103、撮像部104を含む撮像系の汚れや破損を防止する。   In FIG. 1, a photographing lens 102 is a lens group including a zoom lens and a focus lens. The shutter 103 has an aperture function. The imaging unit 104 is an imaging device configured by a CCD, a CMOS, or the like that converts an optical image into an electrical signal. The A / D converter 105 converts the analog signal output from the imaging unit 104 into a digital signal. The barrier 101 covers the imaging system including the imaging lens 102 of the digital camera 100, thereby preventing the imaging system including the imaging lens 102, the shutter 103, and the imaging unit 104 from becoming dirty or damaged.

画像処理部111は、A/D変換器105からのデータ、又は、メモリ制御部108からのデータに対し所定の画素補間、縮小といったリサイズ処理や色変換処理を行う。また、画像処理部111では、撮像した画像データを用いて所定の演算処理が行われ、得られた演算結果に基づいてシステム制御部121が露光制御、測距制御を行う。これにより、TTL(スルー・ザ・レンズ)方式のAF(オートフォーカス)処理、AE(自動露出)処理、EF(フラッシュプリ発光)処理が行われる。画像処理部111ではさらに、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてTTL方式のAWB(オートホワイトバランス)処理も行っている。   The image processing unit 111 performs resizing processing and color conversion processing such as predetermined pixel interpolation and reduction on the data from the A / D converter 105 or the data from the memory control unit 108. The image processing unit 111 performs predetermined calculation processing using the captured image data, and the system control unit 121 performs exposure control and distance measurement control based on the obtained calculation result. Thereby, AF (autofocus) processing, AE (automatic exposure) processing, and EF (flash pre-emission) processing of the TTL (through-the-lens) method are performed. The image processing unit 111 further performs predetermined calculation processing using the captured image data, and also performs TTL AWB (auto white balance) processing based on the obtained calculation result.

A/D変換器105からの出力データは、画像処理部111及びメモリ制御部108を介して、或いは、メモリ制御部108を介してメモリ109に直接書き込まれる。メモリ109は、撮像部104によって得られ、A/D変換器105によりデジタルデータに変換された画像データを格納する。メモリ109は、所定枚数の静止画や所定時間の動画および音声を格納するのに十分な記憶容量を備えている。   Output data from the A / D converter 105 is directly written into the memory 109 via the image processing unit 111 and the memory control unit 108 or via the memory control unit 108. The memory 109 stores image data obtained by the imaging unit 104 and converted into digital data by the A / D converter 105. The memory 109 has a storage capacity sufficient to store a predetermined number of still images and a predetermined time of moving images and audio.

不揮発性メモリ124は、電気的に消去・記録可能なメモリであり、例えばEEPROM等が用いられる。不揮発性メモリ124には、システム制御部121の動作用の定数、プログラム等が記憶される。ここでいう、プログラムとは、本実施形態にて後述する各種フローチャートを実行するためのプログラムのことである。   The nonvolatile memory 124 is an electrically erasable / recordable memory, and for example, an EEPROM or the like is used. The nonvolatile memory 124 stores constants, programs, and the like for the operation of the system control unit 121. Here, the program is a program for executing various flowcharts described later in the present embodiment.

システム制御部121は、デジタルカメラ100全体を制御する。前述した不揮発性メモリ124に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。システムメモリ123は、RAMが用いられる。システムメモリ123には、システム制御部121の動作用の定数、変数、不揮発性メモリ124から読み出したプログラム等を展開する。   The system control unit 121 controls the entire digital camera 100. By executing the program recorded in the non-volatile memory 124 described above, each process of this embodiment to be described later is realized. The system memory 123 is a RAM. In the system memory 123, constants and variables for operation of the system control unit 121, programs read from the nonvolatile memory 124, and the like are expanded.

システムタイマー122は各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。   The system timer 122 is a time measuring unit that measures the time used for various controls and the time of a built-in clock.

モード切替スイッチ115、第1シャッタースイッチ119、第2シャッタースイッチ120、操作部113はシステム制御部121に各種の動作指示を入力するための操作手段である。   A mode switch 115, a first shutter switch 119, a second shutter switch 120, and an operation unit 113 are operation means for inputting various operation instructions to the system control unit 121.

モード切替スイッチ115は、システム制御部121の動作モードを静止画撮影モード、動画記録モード等のいずれかに切り替える。静止画撮影モードに含まれるモードとして、オート撮影モード、オートシーン判別モード、マニュアルモード、撮影シーン別の撮影設定となる各種シーンモード、プログラムAEモード、カスタムモード等がある。モード切替スイッチ115で、静止画撮影モードに含まれるこれらのモードのいずれかに直接切り替えられる。あるいは、モード切替スイッチ115で静止画撮影モードに一旦切り替えた後に、静止画撮影モードに含まれるこれらのモードのいずれかに、他の操作部材を用いて切り替えるようにしてもよい。同様に、動画記録モードにも複数のモードが含まれていてもよい。   The mode switch 115 switches the operation mode of the system control unit 121 to either a still image shooting mode or a moving image recording mode. Modes included in the still image shooting mode include an auto shooting mode, an auto scene discrimination mode, a manual mode, various scene modes for shooting settings for each shooting scene, a program AE mode, a custom mode, and the like. The mode changeover switch 115 can be directly switched to one of these modes included in the still image shooting mode. Alternatively, after switching to the still image shooting mode once with the mode switching switch 115, it may be switched to any of these modes included in the still image shooting mode using another operation member. Similarly, the moving image recording mode may include a plurality of modes.

第1シャッタースイッチ119は、デジタルカメラ100に設けられたシャッターボタン114の操作途中、いわゆる半押し(撮像準備指示)でオンとなり、第1シャッタースイッチ信号SW1を発生する。第1シャッタースイッチ信号SW1により、AF処理、AE処理、AWB処理、EF処理等の動作を開始する。   The first shutter switch 119 is turned on when the shutter button 114 provided in the digital camera 100 is being operated, so-called half-press (imaging preparation instruction), and generates a first shutter switch signal SW1. In response to the first shutter switch signal SW1, operations such as AF processing, AE processing, AWB processing, and EF processing are started.

第2シャッタースイッチ120は、シャッターボタン114の操作完了、いわゆる全押し(撮像指示)でオンとなり、第2シャッタースイッチ信号SW2を発生する。システム制御部121は、第2シャッタースイッチ信号SW2により、撮像部104からの信号読み出しから記録媒体128に画像データを書き込むまでの一連の撮影処理の動作を開始する。   The second shutter switch 120 is turned on when the operation of the shutter button 114 is completed, that is, when it is fully pressed (imaging instruction), and generates a second shutter switch signal SW2. In response to the second shutter switch signal SW2, the system control unit 121 starts a series of shooting processing operations from reading a signal from the imaging unit 104 to writing image data into the recording medium 128.

電源制御部117は、電池検出回路、DC−DCコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部117は、その検出結果及びシステム制御部121の指示に基づいてDC−DCコンバータを制御し、必要な電圧を必要な期間、記録媒体128を含む各部へ供給する。   The power control unit 117 includes a battery detection circuit, a DC-DC converter, a switch circuit that switches a block to be energized, and the like, and detects whether or not a battery is attached, the type of battery, and the remaining battery level. Further, the power control unit 117 controls the DC-DC converter based on the detection result and an instruction from the system control unit 121, and supplies a necessary voltage to each unit including the recording medium 128 for a necessary period.

電源部118は、アルカリ電池やリチウム電池等の一次電池やNiCd電池やNiMH電池、リチウムイオン電池等の二次電池、ACアダプタ等からなる。記録媒体I/F127は、メモリーカードやハードディスク等の記録媒体128とのインターフェースである。記録媒体128は、撮影された画像を記録するためのメモリーカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。   The power supply unit 118 includes a primary battery such as an alkaline battery or a lithium battery, a secondary battery such as a NiCd battery, a NiMH battery, or a lithium ion battery, an AC adapter, or the like. The recording medium I / F 127 is an interface with a recording medium 128 such as a memory card or a hard disk. The recording medium 128 is a recording medium such as a memory card for recording a captured image, and includes a semiconductor memory, a magnetic disk, or the like.

通信I/F110は、インターネット等のネットワーク112に接続された外部機器と各種データの送受信を行うインターフェースである。一例として、無線LANやBluetooth(登録商標)や近距離無線通信(Near Field Communication:NFC)などの無線インターフェースが用いられる。また、USBなどの有線インターフェースを用いてもよい。通信I/F110はネットワーク112を介して、撮像部104で撮像された画像(ライブビュー画像を含む)や記録媒体128に記録された画像ファイルを外部機器に送信でき、また、外部機器から各種コマンドその他の情報を受信できる。本実施形態では、スマートフォン200との通信を通信I/F110を介して行うものとする。   The communication I / F 110 is an interface that transmits and receives various data to and from an external device connected to a network 112 such as the Internet. As an example, a wireless interface such as a wireless LAN, Bluetooth (registered trademark), or near field communication (NFC) is used. Also, a wired interface such as USB may be used. The communication I / F 110 can transmit an image captured by the imaging unit 104 (including a live view image) and an image file recorded on the recording medium 128 to an external device via the network 112, and various commands from the external device. Other information can be received. In the present embodiment, communication with the smartphone 200 is performed via the communication I / F 110.

音声出力部125は、スピーカを備え、セルフタイマーのカウントダウン音やシャッターの開閉に合わせたシャッター音その他の操作音、動画再生時の動画の音声などを発音する。   The audio output unit 125 includes a speaker and generates a countdown sound of a self-timer, a shutter sound in accordance with the opening / closing of the shutter, other operation sounds, a moving image sound during moving image reproduction, and the like.

発光部126は、LED(発光ダイオード)などを備える。発光部126は、所定の発光/非発光のパターンによって被写体にデジタルカメラ100の動作状態(例えば、セルフタイマーのカウントダウン中や撮影の開始/終了など)を通知したり、被写体を照明するために閃光するストロボ機能を備える。発光部126は被写体側から視認できるようにカメラ前面(被写体側、撮像面側)に配置されている。   The light emitting unit 126 includes an LED (light emitting diode) and the like. The light emitting unit 126 notifies the subject of the operation state of the digital camera 100 (for example, during the self-timer countdown or the start / end of shooting) according to a predetermined light emission / non-light emission pattern, or flashes to illuminate the subject. Equipped with a strobe function. The light emitting unit 126 is arranged on the front surface of the camera (subject side, imaging surface side) so as to be visible from the subject side.

なお、ハードウェアの構成は図1に示すものに限定されず、例えば1つのハードウェアが通信制御、撮影制御、画像処理制御等を行い、デジタルカメラ100の各手段として機能してもよい。また、複数のハードウェアが協働して1つの手段として機能してもよい。   The hardware configuration is not limited to that shown in FIG. 1. For example, one piece of hardware may perform communication control, shooting control, image processing control, and the like and function as each unit of the digital camera 100. A plurality of hardware may function as one means in cooperation.

<スマートフォン200の構成>次に、図2を参照して、本発明に係る実施形態のスマートフォン200の構成および機能の概略について説明する。   <Configuration of Smartphone 200> Next, the configuration and functions of the smartphone 200 according to the embodiment of the present invention will be outlined with reference to FIG.

本実施形態のスマートフォン200は、上述したデジタルカメラ100と略同様の構成および機能を備えている。よって、図2では、デジタルカメラ100と同様の構成要素については3桁目の符号を2(200番台)とし、デジタルカメラ100と異なる点を中心に説明を行う。   The smartphone 200 of the present embodiment has substantially the same configuration and function as the digital camera 100 described above. Therefore, in FIG. 2, components similar to those of the digital camera 100 are described with the third digit code being set to 2 (in the 200s) and focusing on differences from the digital camera 100.

本実施形態のスマートフォン200は、所定のアプリケーションをインストールすることで、種々の機能を実行することができるものとする。スマートフォン用のアプリケーションの中には市販のデジタルカメラを遠隔制御できる機能を提供するものがあり、本実施形態もこのようなカメラアプリケーションを用いる。なお、カメラアプリケーションはスマートフォン200の出荷時点で予めインストールされていてもよいし、スマートフォン200を購入したユーザの操作によりインストールされてもよい。詳細は後述する。   The smartphone 200 according to the present embodiment can execute various functions by installing a predetermined application. Some smartphone applications provide a function for remotely controlling a commercially available digital camera, and this embodiment also uses such a camera application. The camera application may be installed in advance at the time of shipment of the smartphone 200, or may be installed by an operation of a user who purchased the smartphone 200. Details will be described later.

本実施形態のスマートフォン200は、マイクなどの音声入力部229を備え、音声出力部225および音声入力部229を介して他の通信機器のユーザと会話することが可能となる。通信I/F210は、図1の通信I/F110に対応するものであり、デジタルカメラ100との通信を行う。   The smartphone 200 according to this embodiment includes a voice input unit 229 such as a microphone, and can talk with a user of another communication device via the voice output unit 225 and the voice input unit 229. The communication I / F 210 corresponds to the communication I / F 110 in FIG. 1 and performs communication with the digital camera 100.

また、スマートフォン200には、表示部207側の被写体を撮影するフロントカメラモジュール231と、表示部207の反対側の被写体を撮影するリアカメラモジュール234が内蔵されている。フロントカメラモジュール231およびリアカメラモジュール234はいずれも、上述したデジタルカメラ100と同様に、撮影レンズ、シャッター、撮像部、A/D変換器を有する。表示部207とは反対側の筐体面に取り付けられたフロントカメラモジュール231は、主として風景や他人などの撮影に用いられる。これに対し、表示部207と同じ面に取り付けられたリアカメラモジュール234は、主にスマートフォン200のユーザを撮影するために用いられる。なお、上記各カメラモジュールは必ずしも1つでなくともよい。特に、表示部207と同じ面にさらにリアカメラモジュールを取り付けてもよい。   The smartphone 200 also includes a front camera module 231 that captures a subject on the display unit 207 side and a rear camera module 234 that captures a subject on the opposite side of the display unit 207. Each of the front camera module 231 and the rear camera module 234 includes a photographing lens, a shutter, an imaging unit, and an A / D converter, as in the digital camera 100 described above. The front camera module 231 attached to the housing surface opposite to the display unit 207 is mainly used for photographing landscapes and other people. On the other hand, the rear camera module 234 attached to the same surface as the display unit 207 is mainly used for photographing the user of the smartphone 200. Note that the number of each camera module is not necessarily one. In particular, a rear camera module may be further attached to the same surface as the display unit 207.

傾き検出部230は、重力方向または重力方向と直交する水平方向に対するスマートフォン200の傾き角θを傾き情報として検出する。傾き検出部230としては、加速度センサ、ジャイロセンサ、重力センサ、回転ベクトルセンサ等を用いることができる。   The inclination detection unit 230 detects the inclination angle θ of the smartphone 200 with respect to the gravity direction or a horizontal direction orthogonal to the gravity direction as inclination information. As the inclination detection unit 230, an acceleration sensor, a gyro sensor, a gravity sensor, a rotation vector sensor, or the like can be used.

システム制御部221は傾き補正処理部221aを有しており、この傾き補正処理部221aは、傾き検出部230により検出された傾き情報に基づいて、後述するデジタルカメラ100から取得した撮影画像の傾きを補正する傾き補正処理を実行する。   The system control unit 221 includes an inclination correction processing unit 221a. The inclination correction processing unit 221a is based on the inclination information detected by the inclination detection unit 230, and the inclination of a captured image acquired from the digital camera 100 described later. An inclination correction process is performed to correct.

操作部213の各操作部材は、表示部207に表示される種々の機能アイコンを選択操作することなどにより、シーンごとに適宜機能が割り当てられ、各種機能ボタンとして作用する。機能ボタンとしては、例えば終了ボタン、戻るボタン、画像送りボタン、ジャンプボタン、絞込みボタン、属性変更ボタン等がある。例えば、メニューボタンが押されると各種の設定可能なメニュー画面が表示部207に表示される。ユーザは、表示部207に表示されたメニュー画面を用いて直感的に各種設定を行うことができる。   Each operation member of the operation unit 213 is appropriately assigned a function for each scene by selecting and operating various function icons displayed on the display unit 207, and functions as various function buttons. Examples of the function buttons include an end button, a return button, an image advance button, a jump button, a narrowing button, and an attribute change button. For example, when the menu button is pressed, various setting menu screens are displayed on the display unit 207. The user can make various settings intuitively using the menu screen displayed on the display unit 207.

不揮発性メモリ224には、システム制御部221の動作用の定数、プログラム、アプリケーション等が記憶される。また、不揮発性メモリ224には、デジタルカメラ100と通信するためのプログラムが格納され、アプリケーションとしてインストールされているものとする(以下、リモートカメラアプリケーション)。リモートカメラアプリケーションは、一般的にデジタルカメラ100の提供元がデジタルカメラ100に合わせて作成し、インターネットなどを介して配信することが多い。なお、本実施形態のスマートフォン200によるカメラ制御は、リモートカメラアプリケーションにより提供されるプログラムを読み込むことにより実現される。なお、リモートカメラアプリケーションはスマートフォン200にインストールされたOSの基本的な機能を利用するためのプログラムを有しているものとする。したがって、本実施形態のカメラ制御は、スマートフォン200のOSが一部の処理を担う場合もある。なお、リモートカメラアプリケーションの機能を、スマートフォン200のOS自身が有していてもよい。   The nonvolatile memory 224 stores operation constants, programs, applications, and the like for the system control unit 221. The nonvolatile memory 224 stores a program for communicating with the digital camera 100 and is installed as an application (hereinafter referred to as a remote camera application). In many cases, the remote camera application is generally created by the provider of the digital camera 100 according to the digital camera 100 and distributed via the Internet or the like. Note that camera control by the smartphone 200 of the present embodiment is realized by reading a program provided by a remote camera application. It is assumed that the remote camera application has a program for using the basic functions of the OS installed in the smartphone 200. Therefore, the camera control of this embodiment may be partly processed by the OS of the smartphone 200. Note that the OS of the smartphone 200 may have the function of the remote camera application.

操作部213は、表示部207に対する接触を検知可能なタッチパネルを含み、ユーザが表示部207上に表示された画面を直接的に操作可能であるかのようなGUIを構成することができる。システム制御部221は、ユーザがタッチパネルにタッチしたことを検知し、タッチ位置に応じた処理を実行する。タッチパネルは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式等、様々な方式のタッチパネルのうちいずれの方式のものを用いてもよい。   The operation unit 213 includes a touch panel that can detect contact with the display unit 207, and can configure a GUI as if the user can directly operate the screen displayed on the display unit 207. The system control unit 221 detects that the user has touched the touch panel, and executes processing according to the touch position. The touch panel may be any of various types of touch panels such as a resistive film type, a capacitance type, a surface acoustic wave type, an infrared type, an electromagnetic induction type, an image recognition type, and an optical sensor type. .

システム制御部221は、タッチパネルへの以下の操作を検出できる。タッチパネルを指やペンで触れたこと(以下、タッチダウン)。タッチパネルを指やペンで触れている状態であること(以下、タッチオン)。タッチパネルを指やペンで触れたまま移動していること(以下、スライド)。タッチパネルへ触れていた指やペンを離したこと(以下、タッチアップ)。タッチパネルに何も触れていない状態(以下、タッチオフ)。これらの操作や、タッチパネル上に指やペンが触れている位置座標はシステム制御部221に通知され、システム制御部221は通知された情報に基づいてタッチパネル上にどのような操作が行われたかを判定する。タッチダウンされてからスライドを行わずに所定時間内にタッチアップをしたとき、タップが行われたこととする。タップは一瞬だけタッチパネルをタッチする操作であり、項目の指定やボタンの押下など、マウスでいうクリックと同等の操作として用いられることが多い。タッチパネル上をタッチダウンから一定のスライドを経てタッチアップをしたとき、ストロークを描いたこととする。素早くストロークを描く操作をフリックと呼ぶ。フリックは、タッチパネル上に指を触れたままある程度の距離だけ素早く動かして、そのまま離すといった操作であり、言い換えればタッチパネル上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でスライドしたことが検出され、そのままタッチアップが検出されるとフリックが行われたと判定できる。また、所定距離以上を、所定速度未満でスライドしたことが検出された場合はドラッグが行われたと判定するものとする。   The system control unit 221 can detect the following operations on the touch panel. Touching the touch panel with a finger or pen (hereinafter touchdown). The touch panel is touched with a finger or pen (hereinafter, touch-on). The touch panel is moved while touching it with a finger or pen (hereinafter referred to as slide). The finger or pen that was touching the touch panel is released (hereinafter referred to as touch-up). A state where nothing touches the touch panel (hereinafter, touch-off). The system control unit 221 is notified of these operations and the position coordinates where the finger or pen touches the touch panel, and the system control unit 221 determines what operation has been performed on the touch panel based on the notified information. judge. It is assumed that when a touch-up is performed within a predetermined time without performing a slide after being touched down, a tap is performed. A tap is an operation of touching the touch panel for a moment, and is often used as an operation equivalent to a click with a mouse, such as specifying an item or pressing a button. It is assumed that a stroke is drawn when a touch-up is made after a certain slide from the touch-down on the touch panel. The operation of drawing a stroke quickly is called a flick. A flick is an operation of quickly moving a certain distance while touching a finger on the touch panel and then releasing it, in other words, an operation of quickly tracing a finger on the touch panel. If it is detected that the user has slid a predetermined distance or more at a predetermined speed or more and a touch-up is detected as it is, it can be determined that a flick has been performed. In addition, when it is detected that the user has slid a predetermined distance or more at a speed lower than a predetermined speed, it is determined that the drag has been performed.

<接続処理>次に、図3を参照して、デジタルカメラ100とスマートフォン200との接続処理について説明する。本実施形態では、IEEE802.11の無線LAN規格に従った接続形態として、デジタルカメラ100が簡易APとして動作し、スマートフォン200がデジタルカメラ100が形成したネットワークに参加することが可能な場合について説明する。   <Connection Process> Next, a connection process between the digital camera 100 and the smartphone 200 will be described with reference to FIG. In the present embodiment, a case where the digital camera 100 operates as a simple AP and the smartphone 200 can participate in a network formed by the digital camera 100 will be described as a connection form according to the IEEE802.11 wireless LAN standard. .

図3(a)はデジタルカメラ100の動作、図3(b)はスマートフォン200の動作をそれぞれ示している。なお、図3の処理は、デジタルカメラ100およびスマートフォン200において、不揮発性メモリ124、224に記録されたプログラムを、システムメモリ123、223に読み出してシステム制御部121、221が実行することにより実現する。   3A shows the operation of the digital camera 100, and FIG. 3B shows the operation of the smartphone 200. 3 is realized by reading the programs recorded in the nonvolatile memories 124 and 224 to the system memories 123 and 223 and executing them by the system control units 121 and 221 in the digital camera 100 and the smartphone 200. .

デジタルカメラ100は、ユーザから操作部113を介して外部機器との通信接続の開始が指示されると、ステップS301にてネットワークを構築する。   When the digital camera 100 is instructed by the user to start communication connection with an external device via the operation unit 113, the digital camera 100 constructs a network in step S301.

ステップS302では、ステップS301で構築したネットワークに対してUPnP(Universal Plug and Play)などのディスカバリー手続きを利用してネットワーク上のカメラデバイスとしてサービスをコントロールポイントにアドバタイズする。   In step S302, a service as a camera device on the network is advertised to the control point using a discovery procedure such as UPnP (Universal Plug and Play) for the network constructed in step S301.

スマートフォン200では、ステップS351において、デジタルカメラ100がステップS301で構築したネットワークを、ユーザが操作部213を介して選択することでネットワークに参加する。ネットワークに参加できたならば後述するリモートカメラアプリケーションを起動してカメラ検出処理を行う。リモートカメラアプリケーションはステップS352においてディスカバリーを利用してステップS302でアドバタイズされたカメラデバイスを検出する。   In the smartphone 200, in step S <b> 351, the user selects the network constructed by the digital camera 100 in step S <b> 301 through the operation unit 213 and participates in the network. If the user can join the network, a remote camera application described later is activated to perform camera detection processing. In step S352, the remote camera application uses discovery to detect the camera device advertised in step S302.

ステップS353でカメラデバイスが見つかったならば、見つかったカメラデバイスを特定できるデバイス固有情報を表示部207に表示してステップS354にてユーザに対して、接続要求されたカメラであるかの確認と接続の承認を促す。ステップS354で接続が承認されたならばステップS355でデジタルカメラ100に対して接続要求が送信される。   If a camera device is found in step S353, device-specific information that can identify the found camera device is displayed on the display unit 207, and in step S354, the user confirms whether or not the camera is requested to connect. Encourage approval of. If the connection is approved in step S354, a connection request is transmitted to the digital camera 100 in step S355.

デジタルカメラ100では、ステップS303でスマートフォン200からの接続要求を受けるまでステップS302の処理を行い、ステップS304で接続要求をしてきたスマートフォン200の固有情報を確認する。また、ステップS305で接続が承認されたならばステップS306で接続要求に応答してステップS307で接続を確立する。   In the digital camera 100, the process of step S302 is performed until a connection request from the smartphone 200 is received in step S303, and the unique information of the smartphone 200 that has requested the connection in step S304 is confirmed. If the connection is approved in step S305, the connection is established in step S307 in response to the connection request in step S306.

スマートフォン200では、ステップS306でのデジタルカメラ100からの応答を受けてステップS356で接続成功を検出しステップS357の通信状態となる。   The smartphone 200 receives the response from the digital camera 100 in step S306, detects a successful connection in step S356, and enters the communication state in step S357.

このようにスマートフォン200でのステップS354およびデジタルカメラ100でのステップS305において、双方で接続する相手の固有の情報を表示してユーザが承認する手続きをペアリングと呼ぶ。一度、ペアリングが成立すると、デジタルカメラ100やスマートフォン200ではアクセスポイントの設定や接続相手のスマートフォン200のIDやMACアドレスなど、個体を識別できる接続設定情報を記憶し、外部機器接続設定として登録する。再接続についてはユーザに確認することなく認証は自動的に行われるようになる。   In this way, in step S354 on the smartphone 200 and in step S305 on the digital camera 100, the procedure for displaying the specific information of the other party to be connected and approving the user is called pairing. Once pairing is established, the digital camera 100 and the smartphone 200 store connection setting information for identifying the individual, such as the access point setting and the ID and MAC address of the connection partner smartphone 200, and register them as external device connection settings. . For reconnection, authentication is automatically performed without confirmation from the user.

<リモートカメラアプリケーションの説明>次に、図4を参照して、本実施形態のスマートフォン200で実行されるリモートカメラアプリケーションについて説明する。   <Description of Remote Camera Application> Next, with reference to FIG. 4, a remote camera application executed on the smartphone 200 of this embodiment will be described.

図4は、リモートカメラアプリケーションが起動され、デジタルカメラ100とスマートフォン200との通信を確立した後、表示部207に表示されるカメラ制御画面400である。   FIG. 4 is a camera control screen 400 displayed on the display unit 207 after the remote camera application is activated and communication between the digital camera 100 and the smartphone 200 is established.

カメラ制御画面400は、リモートカメラアプリケーションが起動され、図3で説明した手順でデジタルカメラ100とスマートフォン200との通信が確立された後に表示部207に表示されるGUIである。カメラ制御画面400には、デジタルカメラ100から受信したライブビュー画像や再生画像を表示するための画像表示領域401が設けられている。また、カメラ制御画面400における画像表示領域401の周辺には、各種の操作部がアイコン402〜409として表示され、ユーザは所望のアイコンにタッチすることで各種機能の実行を指示できる。   The camera control screen 400 is a GUI displayed on the display unit 207 after the remote camera application is activated and communication between the digital camera 100 and the smartphone 200 is established by the procedure described with reference to FIG. The camera control screen 400 is provided with an image display area 401 for displaying live view images and playback images received from the digital camera 100. Various operation units are displayed as icons 402 to 409 around the image display area 401 on the camera control screen 400, and the user can instruct execution of various functions by touching desired icons.

撮影開始ボタン402は、これをタップすることにより画像表示領域401に現在表示されている画像に対して、撮影モードに応じた処理、例えば、動画の記録の開始や停止、または静止画の撮影指示を行うことができる。さらに、静止画モードにおいて、長押しをした場合は、連写撮影などを行う処理が実行される。また、撮影開始時に、システム制御部221は、音声出力部225を介してシャッター音を出力する。   A shooting start button 402 is tapped to process an image currently displayed in the image display area 401 according to the shooting mode, for example, start or stop of moving image recording, or still image shooting instruction. It can be performed. Furthermore, in the still image mode, when a long press is performed, processing for performing continuous shooting or the like is executed. At the start of shooting, the system control unit 221 outputs a shutter sound via the audio output unit 225.

パラメータ変更ボタン403は、これをタップすることにより撮影モードや撮影パラメータの設定変更を行うことができる。撮影モードは、例えば、プログラムモードやシャッタースピード優先、絞り優先、マニュアルモードなどであり、撮影パラメータは、例えば、シャッタースピード値、絞り値、ISO感度値、露出補正値などである。現在のカメラの撮影パラメータは、ライブビュー画像に重畳表示するなどしてユーザに設定値が視認できるように表示される。また、パラメータ変更ボタン403は、デジタルカメラ100の撮影モードを、動画、静止画、スクエア、パノラマといった撮影モードに切り替えることができる。画像確認ボタン404には、撮影開始ボタン402がタップされた後、デジタルカメラ100で撮影または記録された画像のサムネイルが順次更新されて表示される。また、画像確認ボタン404をタップすることにより、デジタルカメラ100で過去に撮影または記録された画像をユーザが閲覧できるように画像表示領域401に表示する再生モード画面に切り替わる。また、画像確認ボタン404をタップすることにより、画像表示領域401に再生される画像を、スマートフォン200に取り込むことができる。   By tapping the parameter change button 403, the setting of the shooting mode and shooting parameters can be changed. The shooting mode is, for example, a program mode, shutter speed priority, aperture priority, manual mode, and the like, and the shooting parameters are, for example, a shutter speed value, an aperture value, an ISO sensitivity value, an exposure correction value, and the like. The shooting parameters of the current camera are displayed so that the set value can be visually recognized by the user, for example, superimposed on the live view image. The parameter change button 403 can switch the shooting mode of the digital camera 100 to a shooting mode such as moving image, still image, square, panorama. In the image confirmation button 404, after the shooting start button 402 is tapped, thumbnails of images shot or recorded by the digital camera 100 are sequentially updated and displayed. Further, by tapping the image confirmation button 404, the screen is switched to a reproduction mode screen that is displayed in the image display area 401 so that the user can browse images captured or recorded in the past with the digital camera 100. In addition, by tapping the image confirmation button 404, an image reproduced in the image display area 401 can be taken into the smartphone 200.

ライブビューオン/オフボタン405は、これをタップすることによりデジタルカメラ100をライブビューモードに設定し、ライブビュー画像の表示を停止または開始(再開)することができる。ライブビューモードでは、デジタルカメ100はライブビュー画像をスマートフォン200に送信し、スマートフォン200はデジタルカメラ100から受信したライブビュー画像の逐次表示を行う。ライブビューモードをオフすることでデジタルカメラ100の消費電力を節約したり温度上昇を抑えることができる。縦/横ロックボタン406は、傾き検出部230により検出されたスマートフォン200の傾き情報に応じてカメラ制御画面400のレイアウトを縦型/横型に自動で切り替える機能をロックすることができる。パラメータ表示オン/オフボタン407は、これをタップすることにより画像表示領域401に重畳表示される撮影パラメータの表示を停止または開始することができる。終了ボタン408は、これをタップすることにより遠隔制御モードを終了し、他のモードに遷移することができる。リフォーカスボタン409は、これをタップすることによりライブビュー画像に重畳表示されているフォーカス枠410に囲まれている被写体に対してフォーカスを合わせることができる。また、フォーカス枠410をドラックすることによりフォーカス位置を移動することができる。このようなユーザインターフェースにより、デジタルカメラ100から受信したライブビュー画像を確認しながら遠隔操作により撮影を行うことができる。   By tapping this on the live view on / off button 405, the digital camera 100 can be set to the live view mode, and the display of the live view image can be stopped or started (restarted). In the live view mode, the digital turtle 100 transmits a live view image to the smartphone 200, and the smartphone 200 sequentially displays the live view image received from the digital camera 100. By turning off the live view mode, the power consumption of the digital camera 100 can be saved and the temperature rise can be suppressed. The vertical / horizontal lock button 406 can lock the function of automatically switching the layout of the camera control screen 400 to vertical / horizontal according to the tilt information of the smartphone 200 detected by the tilt detection unit 230. The parameter display on / off button 407 can be tapped to stop or start the display of the shooting parameter displayed superimposed on the image display area 401. The end button 408 can be tapped to end the remote control mode and transition to another mode. The refocus button 409 can be focused on the subject surrounded by the focus frame 410 superimposed on the live view image by tapping this button. Further, the focus position can be moved by dragging the focus frame 410. With such a user interface, it is possible to perform photographing by remote operation while confirming the live view image received from the digital camera 100.

<傾き補正>次に、図5を参照して、本実施形態のスマートフォン200がデジタルカメラ100で撮影された画像に対して実行する傾き補正処理について説明する。   <Inclination Correction> Next, with reference to FIG. 5, an inclination correction process executed by the smartphone 200 of this embodiment on an image photographed by the digital camera 100 will be described.

図5(a)に示すように、ユーザが画像表示領域401のライブビュー画像を見て傾き補正が必要と判断した場合、パラメータ変更ボタン403をタップすることにより傾き補正機能をオンすることができる。傾き補正機能がオンされると、システム制御部221は、傾き検出部230により検出されたスマートフォン200の傾き情報に応じてライブビュー画像に傾き補正処理を実行する。具体的には、画像表示領域401に表示されたライブビュー画像にトリミング枠501を重ねて表示する。トリミング枠501は、スマートフォン200(つまり、表示中のライブビュー画像)の傾きに関わらず常に水平方向に表示され、スマートフォン200を傾けるとライブビュー画像に対するトリミング枠501の位置がリアルタイムで更新される。   As shown in FIG. 5A, when the user determines that tilt correction is necessary by looking at the live view image in the image display area 401, the tilt correction function can be turned on by tapping the parameter change button 403. . When the tilt correction function is turned on, the system control unit 221 executes tilt correction processing on the live view image according to the tilt information of the smartphone 200 detected by the tilt detection unit 230. Specifically, the trimming frame 501 is displayed so as to overlap the live view image displayed in the image display area 401. The trimming frame 501 is always displayed in the horizontal direction regardless of the tilt of the smartphone 200 (that is, the live view image being displayed), and when the smartphone 200 is tilted, the position of the trimming frame 501 with respect to the live view image is updated in real time.

また、システム制御部221は、画像表示領域401の周辺のパラメータ表示オン/オフボタン407に隣接して新たにトリミング枠ロックボタン502を表示する。トリミング枠ロックボタン502は、これをタップすることにより現在のトリミング枠501をロックすることができる。ユーザは、スマートフォン200を傾けながら、トリミング枠501の位置がライブビュー画像に対して所望の位置関係となったところでトリミング枠ロックボタン502をタップすればよい。この場合、例えば、図5の例では、ライブビュー画像中の被写体の向きがトリミング枠501に対して水平/垂直になり、被写体の傾きがなくなるようにユーザがスマートフォン200を傾け、所望の位置でロックすればよい。   In addition, the system control unit 221 displays a new trimming frame lock button 502 adjacent to the parameter display on / off button 407 around the image display area 401. The trimming frame lock button 502 can lock the current trimming frame 501 by tapping this button. The user may tap the trimming frame lock button 502 when the position of the trimming frame 501 becomes a desired positional relationship with respect to the live view image while tilting the smartphone 200. In this case, for example, in the example of FIG. 5, the orientation of the subject in the live view image is horizontal / vertical with respect to the trimming frame 501, and the user tilts the smartphone 200 so that the subject is not tilted. Lock it.

ロック状態になると、その時点での傾き検出部230により検出されたスマートフォン200の傾き情報が記憶され、システム制御部221は、この傾き情報に基づいてライブビュー画像の傾きを補正するための傾き補正量を決定する。この状態でユーザはシャッターチャンスを待ち、撮影開始ボタン402をタップすることで撮影処理が実行される。このときに、スマートフォン200は撮影画像の傾き補正に適用する傾き補正量をシステムメモリ223に記憶しておく。   When the lock state is set, the tilt information of the smartphone 200 detected by the tilt detection unit 230 at that time is stored, and the system control unit 221 corrects the tilt of the live view image based on the tilt information. Determine the amount. In this state, the user waits for a photo opportunity and taps the shooting start button 402 to execute shooting processing. At this time, the smartphone 200 stores the tilt correction amount to be applied to the tilt correction of the captured image in the system memory 223.

撮影画像が生成されると画像確認ボタン404にサムネイルが表示される。画像確認ボタン404がタップされると、デジタルカメラ100から撮影画像をスマートフォン200に取り込む。スマートフォン200は、デジタルカメラ100から取り込んだ撮影画像に対して画像撮影時に記憶した傾き補正量に基づく傾き補正処理を実行し、画像のプレビューを行い、傾き補正後の画像データを保存する。   When the captured image is generated, a thumbnail is displayed on the image confirmation button 404. When the image confirmation button 404 is tapped, a captured image is taken from the digital camera 100 into the smartphone 200. The smartphone 200 executes tilt correction processing based on the tilt correction amount stored at the time of image shooting on the captured image captured from the digital camera 100, previews the image, and stores the image data after tilt correction.

この傾き補正処理は、スマートフォン200のシステム制御部221に搭載された傾き補正処理部221aによる行われる。傾き補正処理部221aでは、傾き補正量に基づき撮影画像にデジタル回転処理を行う。デジタル回転処理は、トリミング処理によりトリミング枠501に沿って画像を切り取る処理である。   This inclination correction processing is performed by the inclination correction processing unit 221a mounted on the system control unit 221 of the smartphone 200. The tilt correction processing unit 221a performs digital rotation processing on the captured image based on the tilt correction amount. The digital rotation process is a process of cutting an image along the trimming frame 501 by the trimming process.

このようにして、デジタルカメラ100の姿勢を変更しなくとも、スマートフォン200に保存する画像データに対して傾き補正を適用することが可能となる。これにより、ユーザは、スマートフォン200に保存した画像データをそのままクラウドなどに利用できるのでワークフローを短縮できる。   In this way, it is possible to apply tilt correction to image data stored in the smartphone 200 without changing the attitude of the digital camera 100. Accordingly, the user can use the image data stored in the smartphone 200 as it is in the cloud or the like, so that the workflow can be shortened.

<傾き補正処理後の画像表示>
図5(b)は、スマートフォン200のカメラ制御画面400に傾き補正後の画像が表示されている様子を示している。
<Image display after tilt correction processing>
FIG. 5B shows a state in which an image after tilt correction is displayed on the camera control screen 400 of the smartphone 200.

図5(b)に示すように、傾き補正後の画像に対して水平/垂直の格子状のグリッド線551を重ねて表示することで、ユーザが傾き補正後の被写体の向きを確認しやすくなる。なお、スマートフォン200を傾けて画像の傾きを調整する際に、上記トリミング枠501に代えてグリッド線551を用いてもよい。   As shown in FIG. 5B, by displaying the horizontal / vertical grid-like grid lines 551 on the image after tilt correction, the user can easily confirm the orientation of the subject after tilt correction. . Note that grid lines 551 may be used instead of the trimming frame 501 when the smartphone 200 is tilted to adjust the tilt of the image.

[実施形態2]次に、実施形態2について説明する。   [Second Embodiment] Next, a second embodiment will be described.

本実施形態は、デジタルカメラ100に傾き検出部601を搭載し、デジタルカメラ100がライブビュー画像と共に、傾き検出部601で検出された画像撮影時のデジタルカメラ100の傾き情報(図7で後述するカメラ傾き情報712)を送信する。また、スマートフォン200のカメラ制御画面400においてライブビュー画像に対してデジタルカメラ100の傾きがなくなるように調整する。このように調整を行った後、スマートフォン200で撮影画像の傾き補正処理を行う。   In the present embodiment, the tilt detection unit 601 is mounted on the digital camera 100, and the tilt information of the digital camera 100 when the digital camera 100 detects the image detected by the tilt detection unit 601 together with the live view image (described later in FIG. 7). Camera tilt information 712) is transmitted. Further, the camera control screen 400 of the smartphone 200 is adjusted so that the digital camera 100 is not inclined with respect to the live view image. After making the adjustment in this way, the smartphone 200 performs a tilt correction process of the captured image.

図6(a)は、本実施形態のデジタルカメラ100の構成を示すブロック図である。以下では、図1と同様の構成には同一の符号を付して説明を省略し、異なる点を中心に説明を行う。   FIG. 6A is a block diagram illustrating a configuration of the digital camera 100 of the present embodiment. In the following, the same components as those in FIG. 1 are denoted by the same reference numerals, description thereof will be omitted, and different points will be mainly described.

本実施形態のデジタルカメラ100は傾き検出部601を有している。傾き検出部601は、重力方向または水平方向に対するデジタルカメラ100の傾き角θを傾き情報として検出する。   The digital camera 100 according to the present embodiment includes an inclination detection unit 601. The tilt detection unit 601 detects the tilt angle θ of the digital camera 100 with respect to the gravity direction or the horizontal direction as tilt information.

本実施形態のデジタルカメラ100は、図6(b)に示すように、傾き検出部601により検出されたカメラの傾き情報に基づいて、表示部107に表示されているライブビュー画像に重ねて水準器情報611および水平位置表示612が表示される。これにより、ユーザは、水準器情報611および水平位置表示612を見ながら、ライブビュー画像の傾きを容易に調整することができる。   As shown in FIG. 6B, the digital camera 100 according to the present embodiment is superimposed on the live view image displayed on the display unit 107 based on the camera tilt information detected by the tilt detection unit 601. Instrument information 611 and horizontal position display 612 are displayed. Accordingly, the user can easily adjust the inclination of the live view image while viewing the level information 611 and the horizontal position display 612.

<傾き補正処理>次に、図7を参照して、本実施形態のスマートフォン200がデジタルカメラ100の傾き情報を用いて撮影画像の傾き補正を行う場合のスマートフォン200のカメラ制御画面400について説明する。   <Tilt Correction Processing> Next, with reference to FIG. 7, the camera control screen 400 of the smartphone 200 when the smartphone 200 of the present embodiment performs tilt correction of the captured image using the tilt information of the digital camera 100 will be described. .

図7は、本実施形態のスマートフォン200に表示されるカメラ制御画面400を示し、図1と同様の構成には同一の符号を付して説明を省略し、異なる点を中心に説明を行う。   FIG. 7 shows a camera control screen 400 displayed on the smartphone 200 of the present embodiment. The same components as those in FIG. 1 are denoted by the same reference numerals, description thereof is omitted, and different points are mainly described.

図7(a)に示すように、ユーザがパラメータ変更ボタン403をタップして傾き補正機能がオンされると、画像表示領域401に水準器表示710が表示される。システム制御部221は、傾き検出部230により検出されたスマートフォン200の傾き情報に応じてライブビュー画像に重ねて水平表示711を表示する。水平表示711は、スマートフォン200の姿勢に対して重力方向と直交する水平方向を示す。また、システム制御部221は、水平表示711が重ねて表示されたライブブビュー画像にカメラ傾き情報712を重ねて表示する。カメラ傾き情報712は、デジタルカメラ100からライブビュー画像と共に取得したデジタルカメラ100の傾き情報に対応する。本実施形態の傾き補正処理は、ユーザが図7(b)に示すように第1の指標としての水平表示711と第2の指標としてのカメラ傾き情報の差分がなくなるように、水平表示711とカメラ傾き情報表示712が同一線上に重なるようにスマートフォン200を傾けてロックすればよい。なお、水平表示711とカメラ傾き情報表示712が同一線上に重なった場合には線の色が変化したり、音が出るようにしてもよい。   As shown in FIG. 7A, when the user taps the parameter change button 403 and the tilt correction function is turned on, a level display 710 is displayed in the image display area 401. The system control unit 221 displays a horizontal display 711 on the live view image in accordance with the tilt information of the smartphone 200 detected by the tilt detection unit 230. The horizontal display 711 indicates a horizontal direction orthogonal to the direction of gravity with respect to the posture of the smartphone 200. In addition, the system control unit 221 displays the camera tilt information 712 in a superimposed manner on the live view image in which the horizontal display 711 is superimposed. The camera tilt information 712 corresponds to the tilt information of the digital camera 100 acquired together with the live view image from the digital camera 100. As shown in FIG. 7B, the tilt correction process of the present embodiment is performed so that the difference between the horizontal display 711 as the first index and the camera tilt information as the second index disappears. The smartphone 200 may be tilted and locked so that the camera tilt information display 712 overlaps the same line. When the horizontal display 711 and the camera tilt information display 712 are overlapped on the same line, the line color may change or a sound may be emitted.

ロック状態になった後の処理は、実施形態1の図4および図5(a)で説明した通りである。なお、本実施形態では、傾き補正機能をオートモードに設定可能である。傾き補正機能をオートモードに設定すると、デジタルカメラ100からライブビュー画像と共に取得したカメラ傾き情報712に基づいて自動的にロック状態に移行し、傾き補正量が決定される。これにより、ユーザは傾き補正を意識することなく常に傾きが補正された撮影画像をスマートフォン200に保存することができる。   The processing after the locked state is as described in FIGS. 4 and 5A of the first embodiment. In the present embodiment, the tilt correction function can be set to the auto mode. When the tilt correction function is set to the auto mode, the camera automatically shifts to the lock state based on the camera tilt information 712 acquired from the digital camera 100 together with the live view image, and the tilt correction amount is determined. Thereby, the user can save the captured image whose inclination is always corrected in the smartphone 200 without being aware of the inclination correction.

[実施形態3]次に、実施形態3について説明する。   [Third Embodiment] Next, a third embodiment will be described.

上記実施形態1、2では、スマートフォン200がデジタルカメラ800で撮影された画像に対して傾き補正処理を行っていたが、この場合、デジタルカメラ800に保存されるオリジナル画像は傾き補正が適用されていない画像となってしまう。そこで、本実施形態では、デジタルカメラ800が撮影画像に対して傾き補正処理を行うものである。   In the first and second embodiments, the smartphone 200 performs the tilt correction process on the image captured by the digital camera 800. In this case, the tilt correction is applied to the original image stored in the digital camera 800. End up with no image. Therefore, in this embodiment, the digital camera 800 performs tilt correction processing on the captured image.

図8は、本実施形態のデジタルカメラ800の構成を示すブロック図である。以下では、図1と同様の構成には同一の符号を付して説明を省略し、異なる点を中心に説明を行う。なお、スマートフォン200の構成は実施形態1の図2と同様であるが、本実施形態では、デジタルカメラ800から傾き補正済みの画像データを取得することができるので、スマートフォン200は必ずしも傾き補正機能を有していなくてもよい。   FIG. 8 is a block diagram showing the configuration of the digital camera 800 of this embodiment. In the following, the same components as those in FIG. 1 are denoted by the same reference numerals, description thereof will be omitted, and different points will be mainly described. The configuration of the smartphone 200 is the same as that in FIG. 2 of the first embodiment. However, in the present embodiment, since the image data after tilt correction can be acquired from the digital camera 800, the smartphone 200 does not necessarily have the tilt correction function. It may not have.

本実施形態のデジタルカメラ800は、撮像部104をロール方向に回転駆動する撮像センサ駆動部801、撮像センサ駆動部801を制御する駆動制御部802、撮像装置800に加わる加速度を検出する加速度センサ803、傾き/ブレ検出部804を有する。   The digital camera 800 of this embodiment includes an image sensor driving unit 801 that rotationally drives the image capturing unit 104 in the roll direction, a drive control unit 802 that controls the image sensor driving unit 801, and an acceleration sensor 803 that detects acceleration applied to the image capturing apparatus 800. , An inclination / blur detection unit 804 is provided.

加速度センサ803は、例えば3軸の加速度センサであり、カメラに加わる重力加速度や、カメラに加わる振れの加速度成分などを検出する。傾き/振れ検出部804は、加速度センサ803によってカメラに加わる加速度のうち重力加速度を検出し、カメラの傾き情報を判定する。本実施形態では、カメラの傾き姿勢情報として、少なくとも重力方向に対する撮像光学系の光軸回り方向(ロール方向)の回転角度を含むものとする。その他、カメラの傾き情報に、例えば水準器に利用するためにあおり方向(ピッチ方向)を含んでもよい。   The acceleration sensor 803 is, for example, a triaxial acceleration sensor, and detects gravitational acceleration applied to the camera, an acceleration component of shake applied to the camera, and the like. The tilt / shake detection unit 804 detects gravitational acceleration among the accelerations applied to the camera by the acceleration sensor 803, and determines camera tilt information. In the present embodiment, the tilt attitude information of the camera includes at least a rotation angle in the direction around the optical axis (roll direction) of the imaging optical system with respect to the direction of gravity. In addition, the tilt information (pitch direction) may be included in the tilt information of the camera for use in, for example, a level.

また、傾き/振れ検出部804は、加速度センサ803が重力加速度とは異なる加速度(例えば、カメラに加わる振れの加速度成分)を検出したときに、カメラに加わる外的な加速度として検出する。   Further, when the acceleration sensor 803 detects an acceleration (for example, an acceleration component of shake applied to the camera) different from the gravitational acceleration, the tilt / shake detection unit 804 detects the external acceleration applied to the camera.

システム制御部121は、振れ補正制御部805と傾き補正制御部806を備える。傾き補正制御部805は、傾き/振れ検出部804により検出されたカメラの傾き情報に基づいて、撮像センサ駆動制御部802により撮像部104を回転するための制御量(傾き補正量)を演算する。撮像センサ駆動制御部802は、撮像部104が重力方向と直交する水平方向に対する傾き角を検出し、この傾き角を補正するための制御量を演算する。
さらに、傾き補正制御部806は、傾き/振れ検出部804により検出されたカメラの傾き情報と、撮像センサ駆動制御部802により検出された撮像部104の傾き状態とを比較し、差異がある場合は撮像センサ駆動制御部802により演算された制御量で撮像センサ駆動部801を駆動して撮像部104をロール方向に(光軸に対して直交する面内で)回転して傾き補正を行う。
The system control unit 121 includes a shake correction control unit 805 and an inclination correction control unit 806. The tilt correction control unit 805 calculates a control amount (tilt correction amount) for rotating the imaging unit 104 by the imaging sensor drive control unit 802 based on the camera tilt information detected by the tilt / shake detection unit 804. . The imaging sensor drive control unit 802 detects an inclination angle with respect to a horizontal direction orthogonal to the gravitational direction, and calculates a control amount for correcting the inclination angle.
Further, the tilt correction control unit 806 compares the tilt information of the camera detected by the tilt / shake detection unit 804 with the tilt state of the imaging unit 104 detected by the imaging sensor drive control unit 802, and there is a difference. Drives the image sensor driving unit 801 with the control amount calculated by the image sensor driving control unit 802, rotates the image capturing unit 104 in the roll direction (in a plane orthogonal to the optical axis), and performs tilt correction.

次に、図9を参照して、本実施形態のデジタルカメラ800による傾き補正処理について説明する。   Next, tilt correction processing by the digital camera 800 of the present embodiment will be described with reference to FIG.

図9(a)は、デジタルカメラ800の姿勢がロール方向にθ°傾いている状態を示している。この状態で撮影を行うと、図9(b)のような傾いた画像が撮影される。ここで、撮像センサ駆動部801により撮像部104をロール方向にθ°回転させることにより、図9(c)に示すようにデジタルカメラ800の姿勢が傾いた状態であっても撮影画像およびライブビュー画像に傾き補正を実行して傾きのない画像を生成することができる。なお、傾き補正を実施した撮影画像に、傾き補正済みであることを示す情報や傾き補正量(回転角θ°)の情報などの付加情報を記録してもよい。   FIG. 9A shows a state in which the posture of the digital camera 800 is inclined by θ ° in the roll direction. When photographing is performed in this state, an inclined image as shown in FIG. 9B is photographed. Here, by rotating the imaging unit 104 by θ ° in the roll direction by the imaging sensor driving unit 801, the captured image and the live view are displayed even when the digital camera 800 is tilted as shown in FIG. 9C. An image without inclination can be generated by performing inclination correction on the image. Note that additional information such as information indicating that the inclination has been corrected and information on the amount of inclination correction (rotation angle θ °) may be recorded in the captured image on which the inclination correction has been performed.

<デジタル回転処理>
撮像部104を回転駆動することで撮影画像の傾きを補正する場合、撮像センサ駆動制御部802が撮像部104を回転可能な範囲には限りがあり、撮像部104の可動範囲を超えてしまう場合には傾き補正が行えなくなる。そこで、その他の傾き補正方法として画像処理部111において撮影画像にデジタル回転処理を実行して傾きを補正することができる。ただし、デジタル回転処理による傾き補正を実施する場合には撮影画像の解像度が低下してしまうおそれがある。また、撮影画像をトリミングする必要があるため画像の視野角が小さくなってしまう場合がある。図9(d)はデジタル回転処理を適用した撮影画像を例示している。図9(b)の傾いた撮影画像を、デジタル回転処理により傾き角θだけ回転することで傾き補正を行うことができるが、撮影画像データについて図9(d)の領域901をトリミング処理により切り取る必要がある。トリミング処理を行う戸画像データのサイズが小さくなってしまうため、画像サイズを同等にしたい場合にはデジタル拡大処理を実行する必要があるが、これらのデジタル画像処理により画像劣化が発生したり、画像の視野角が小さくなってしまう。
<Digital rotation processing>
When the tilt of the captured image is corrected by rotating the imaging unit 104, the range in which the imaging sensor drive control unit 802 can rotate the imaging unit 104 is limited and exceeds the movable range of the imaging unit 104. The tilt correction cannot be performed. Therefore, as another tilt correction method, the image processing unit 111 can execute digital rotation processing on the captured image to correct the tilt. However, when tilt correction is performed by digital rotation processing, the resolution of the captured image may be reduced. In addition, since the captured image needs to be trimmed, the viewing angle of the image may be reduced. FIG. 9D illustrates a captured image to which digital rotation processing is applied. The tilted image shown in FIG. 9B can be tilt-corrected by rotating the tilted image by the tilt angle θ by digital rotation processing, but the region 901 in FIG. 9D is cut out from the captured image data by trimming processing. There is a need. Since the size of the door image data to be trimmed is reduced, it is necessary to execute digital enlargement processing when it is desired to make the image sizes equal. However, these digital image processing may cause image degradation, Will reduce the viewing angle.

なお、加速度センサ803が搭載されていないカメラの場合には、図9(b)のように傾いた撮影画像に対して画像解析を行って撮影画像から傾き角θを求め、傾き補正を適用することも可能である。   Note that in the case of a camera not equipped with the acceleration sensor 803, image analysis is performed on the tilted captured image as shown in FIG. 9B to determine the tilt angle θ from the captured image, and tilt correction is applied. It is also possible.

本実施形態によれば、デジタルカメラ800において撮影画像に対して傾き補正を実行し、傾き補正済みの撮影画像をスマートフォン200に送信することで、デジタルカメラ800に保存されるオリジナル画像にもスマートフォン200に保存される画像にも傾き補正を適用することができる。   According to the present embodiment, by performing tilt correction on a captured image in the digital camera 800 and transmitting the tilt-corrected captured image to the smartphone 200, the original image stored in the digital camera 800 is also displayed on the smartphone 200. Tilt correction can also be applied to images stored in.

なお、本実施形態のデジタルカメラ800は、スマートフォン200から傾き補正量や傾き情報を受けて、デジタルカメラ800が傾き補正処理を行うことも可能である。このように構成することによって、デジタルカメラ800を移動せずに、意図的に傾けたような画像を遠隔操作により撮影することができる。すなわち、三脚に固定したデジタルカメラ800が傾いていたとしもスマートフォン200による遠隔制御での画像撮影時に傾き補正を自由に行うことが可能となり、同時にカメラに保存される撮影画像にも傾き補正を適用することができる。   Note that the digital camera 800 of this embodiment can receive the tilt correction amount and tilt information from the smartphone 200, and the digital camera 800 can perform tilt correction processing. With this configuration, an image that is intentionally tilted can be taken by remote control without moving the digital camera 800. That is, even if the digital camera 800 fixed on the tripod is tilted, tilt correction can be freely performed when the smartphone 200 remotely captures images, and at the same time, tilt correction can be applied to captured images stored in the camera. can do.

以下に、図10を参照して、デジタルカメラ800がスマートフォン200から取得した傾き補正量や傾き情報に基づいて撮影画像の傾きを補正する処理について説明する。   Hereinafter, with reference to FIG. 10, a process for correcting the tilt of the captured image based on the tilt correction amount and tilt information acquired by the digital camera 800 from the smartphone 200 will be described.

図10は、本実施形態の遠隔制御による画像撮影時のスマートフォン200における動作(a)およびデジタルカメラ800における動作(b)を示している。   FIG. 10 shows an operation (a) in the smartphone 200 and an operation (b) in the digital camera 800 at the time of image capturing by remote control according to the present embodiment.

まず、図10(a)を参照して、スマートフォン200の処理を説明する。   First, the process of the smartphone 200 will be described with reference to FIG.

なお、図10(a)の処理は、スマートフォン200のリモートカメラアプリケーションが起動され、デジタルカメラ800がスマートフォン200により遠隔制御が可能となると開始される。   10A is started when the remote camera application of the smartphone 200 is activated and the digital camera 800 can be remotely controlled by the smartphone 200.

ステップS1001では、システム制御部221は、ライブビューオン/オフボタン405がタップされ、デジタルカメラ800に対してライブビュー開始要求を行う。   In step S <b> 1001, the system control unit 221 makes a live view start request to the digital camera 800 by tapping the live view on / off button 405.

ステップS1002では、システム制御部221は、デジタルカメラ800に対してライブビュー画像取得要求を送信する。   In step S <b> 1002, the system control unit 221 transmits a live view image acquisition request to the digital camera 800.

ステップS1003では、システム制御部221は、リモートカメラアプリケーションのカメラ制御画面400の画像表示領域401にライブビュー画像を表示する。ここで、画像表示領域401にライブビュー画像に重ねてトリミング枠501やグリッド線551、水準器表示710、水平表示711およびカメラ傾き情報表示712を表示することで、ユーザにおいてスマートフォン200での傾き調整に係る操作が容易となる。   In step S1003, the system control unit 221 displays the live view image in the image display area 401 of the camera control screen 400 of the remote camera application. Here, the trimming frame 501, the grid line 551, the level display 710, the horizontal display 711, and the camera tilt information display 712 are displayed on the live view image in the image display area 401, so that the user can adjust the tilt on the smartphone 200. The operation related to the above becomes easy.

ステップS1004では、システム制御部221は、ユーザがパラメータ変更ボタン403をタップして傾き補正機能がオンされたか否かを判定する。そして、傾き補正機能がオンされた場合は、ステップS1006に進み、傾き補正機能がオンされていない場合はステップS1005に進む。   In step S1004, the system control unit 221 determines whether or not the tilt correction function is turned on by the user tapping the parameter change button 403. If the tilt correction function is turned on, the process proceeds to step S1006. If the tilt correction function is not turned on, the process proceeds to step S1005.

ステップS1005では、システム制御部221は、デジタルカメラ800に対して傾き補正機能がオフであることを通知する。   In step S1005, the system control unit 221 notifies the digital camera 800 that the tilt correction function is off.

ステップS1006では、システム制御部221は、トリミング枠ロックボタン502がタップされたか否かを判定し、トリミング枠ロックボタン502がタップされた場合はステップS1007に進み、タップされにない場合はステップS1008に進む。   In step S1006, the system control unit 221 determines whether or not the trimming frame lock button 502 has been tapped. If the trimming frame lock button 502 has been tapped, the process proceeds to step S1007. If not tapped, the system control unit 221 proceeds to step S1008. move on.

ステップS1007では、システム制御部221は、システムメモリ223に記憶した傾き補正量をデジタルカメラ800に対して通知する。   In step S1007, the system control unit 221 notifies the digital camera 800 of the tilt correction amount stored in the system memory 223.

ステップS1008では、システム制御部221は、傾き検出部230により検出されたスマートフォン200の傾き情報をデジタルカメラ800に対して通知する。なお、この通知がデジタルカメラ100に対して傾き補正を実行する要求となり、デジタルカメラ100はこの傾き補正要求をトリガーとして傾き補正処理を実行する。   In step S <b> 1008, the system control unit 221 notifies the digital camera 800 of the tilt information of the smartphone 200 detected by the tilt detection unit 230. This notification is a request to execute tilt correction to the digital camera 100, and the digital camera 100 executes tilt correction processing using this tilt correction request as a trigger.

ステップS1009では、システム制御部221は、撮影開始ボタン402がタップされたか否かを判定し、タップされた場合はステップS1010に進み、タップされない場合はステップS1012に進む。   In step S1009, the system control unit 221 determines whether or not the shooting start button 402 has been tapped. If tapped, the process proceeds to step S1010. If not tapped, the process proceeds to step S1012.

ステップS1010、S1011では、システム制御部221は、デジタルカメラ800に対して撮影コマンドを通知し、デジタルカメラ800から画像生成通知を受けて撮影画像をデジタルカメラ800から受信するとともに記録媒体228などに保存する。   In steps S1010 and S1011, the system control unit 221 notifies the digital camera 800 of a shooting command, receives an image generation notification from the digital camera 800, receives the shot image from the digital camera 800, and saves it in the recording medium 228 or the like. To do.

ステップS1012では、システム制御部221は、ライブビューオン/オフボタン405が再度タップされたか否かを判定し、タップされた場合はステップS1013に進み、タップされない場合はステップS1002に進む。   In step S1012, the system control unit 221 determines whether or not the live view on / off button 405 has been tapped again. If tapped, the system control unit 221 proceeds to step S1013. If not tapped, the system control unit 221 proceeds to step S1002.

ステップS1013では、システム制御部221は、ライブビュー画像の表示を停止し、デジタルカメラ800に対してライブビュー終了要求を行う。   In step S <b> 1013, the system control unit 221 stops displaying the live view image and makes a live view end request to the digital camera 800.

次に、図10(b)を参照して、スマートフォン200により遠隔制御されるデジタルカメラ800の処理について説明する。   Next, processing of the digital camera 800 that is remotely controlled by the smartphone 200 will be described with reference to FIG.

ステップS1051では、システム制御部121は、ライブビューモードに設定されたか否かを判定し、ライブビューモードに設定された場合はステップS1052に進み、設定されない場合はステップS1058に進む。スマートフォン200は、ステップS1002でデジタルカメラ800に対してライブビュー画像取得要求を行うことで、デジタルカメラ800をライブビューモードに設定することができる。   In step S1051, the system control unit 121 determines whether or not the live view mode is set. If the live view mode is set, the system control unit 121 proceeds to step S1052, and if not set, the process proceeds to step S1058. The smartphone 200 can set the digital camera 800 to the live view mode by making a live view image acquisition request to the digital camera 800 in step S1002.

ステップS1052では、システム制御部121は、撮像部104から撮像画像を読み出し、メモリ109に保持する。   In step S <b> 1052, the system control unit 121 reads a captured image from the imaging unit 104 and stores the captured image in the memory 109.

ステップS1053では、システム制御部121は、傾き補正機能がオンであるか否かを判定し、オンの場合はステップS1054に進み、オフの場合はステップS1055に進む。傾き補正機能は、デジタルカメラ800で設定できるほか、スマートフォン200からはステップS1007やS1008により設定可能である。   In step S1053, the system control unit 121 determines whether or not the tilt correction function is on. If it is on, the system control unit 121 proceeds to step S1054, and if it is off, the system control unit 121 proceeds to step S1055. The tilt correction function can be set by the digital camera 800 and can be set from the smartphone 200 by steps S1007 and S1008.

ステップS1054では、システム制御部121は、傾き検出部601により検出されたデジタルカメラ800の傾き情報を用いて、撮像部104を回転駆動または画像処理部111によりステップS1052で取得した画像データに傾き補正処理を実行する。あるいは、システム制御部121は、ステップS1007でスマートフォン200から受信した傾き情報と傾き検出部601により検出されたデジタルカメラ800の傾き情報を用いてステップS1052で取得した画像データに対して傾き補正処理を実行する。なお、この場合、スマートフォン200側から受信した傾き補正要求を優先する。   In step S <b> 1054, the system control unit 121 uses the tilt information of the digital camera 800 detected by the tilt detection unit 601 to rotate the imaging unit 104 or correct the tilt to the image data acquired in step S <b> 1052 by the image processing unit 111. Execute the process. Alternatively, the system control unit 121 performs tilt correction processing on the image data acquired in step S1052 using the tilt information received from the smartphone 200 in step S1007 and the tilt information of the digital camera 800 detected by the tilt detection unit 601. Run. In this case, priority is given to the tilt correction request received from the smartphone 200 side.

ステップS1055では、システム制御部121は、ライブビュー画像データをメモリ109に保持するとともに、表示部107にライブビュー画像を表示するが、ステップS1054で傾き補正を行っている場合には傾き補正後の画像が表示される。   In step S1055, the system control unit 121 holds the live view image data in the memory 109 and displays the live view image on the display unit 107. If the tilt correction is performed in step S1054, the system control unit 121 performs the tilt correction. An image is displayed.

ステップS1056では、システム制御部121は、ステップS1003のライブビュー画像取得要求を受信しているか否かを判定し、受信している場合はステップS1057に進み、受信していない場合はステップS1058に進む。   In step S1056, the system control unit 121 determines whether or not the live view image acquisition request in step S1003 has been received. If received, the process proceeds to step S1057. If not received, the process proceeds to step S1058. .

ステップS1057では、システム制御部121は、ステップS1055でメモリ109に保持し、表示部107に表示したライブビュー画像と同等の画像データをスマートフォン200に送信する。   In step S1057, the system control unit 121 transmits image data equivalent to the live view image stored in the memory 109 and displayed on the display unit 107 to the smartphone 200 in step S1055.

ステップS1058では、システム制御部121は、ステップS1010の撮影コマンドを受信したか否かを判定し、受信している場合はステップS1059に進み、受信していない場合はステップS1063に進む。なお、撮影コマンドを受信する代わりに、第2シャッタースイッチ120の第2シャッタースイッチ信号SW2に基づいて撮影処理を実行してもよい。   In step S1058, the system control unit 121 determines whether or not the shooting command in step S1010 has been received. If it has been received, the process proceeds to step S1059. If not, the process proceeds to step S1063. Instead of receiving the shooting command, the shooting process may be executed based on the second shutter switch signal SW2 of the second shutter switch 120.

ステップS1059では、システム制御部121は、撮影コマンドを受信した時点でライブビュー表示されている画像データを記録媒体128に記録する撮影処理を実行する。   In step S <b> 1059, the system control unit 121 executes a shooting process of recording the image data displayed in live view on the recording medium 128 when the shooting command is received.

ステップS1060では、システム制御部121は、ステップS1053と同様に、傾き補正機能がオンであるか否かを判定し、オンの場合はステップS1061に進み、オフの場合はステップS1062に進む。傾き補正機能は、デジタルカメラ側で設定できるほか、スマートフォン200側からはステップS1007やS1008により設定可能である。   In step S1060, similarly to step S1053, the system control unit 121 determines whether or not the tilt correction function is on. If it is on, the system control unit 121 proceeds to step S1061, and if it is off, the system control unit 121 proceeds to step S1062. The tilt correction function can be set on the digital camera side and can be set from the smartphone 200 side in steps S1007 and S1008.

ステップS1061では、システム制御部121は、ステップS1054と同様に、傾き検出部601により検出されたデジタルカメラ800の傾き情報を用いて、撮像部104を回転駆動または画像処理部111によりステップS1052で取得した画像データに傾き補正処理を実行する。あるいは、システム制御部121は、ステップS1007でスマートフォン200から受信した傾き情報と傾き検出部601により検出されたデジタルカメラ800の傾き情報を用いてステップS1052で取得した画像データに傾き補正処理を実行する。なお、この場合、スマートフォン200側から受信した傾き補正要求を優先する。傾き補正後のデータは記録媒体128に記録される。   In step S1061, similarly to step S1054, the system control unit 121 uses the tilt information of the digital camera 800 detected by the tilt detection unit 601 to rotate the imaging unit 104 or acquire the image processing unit 111 in step S1052. A tilt correction process is executed on the image data. Alternatively, the system control unit 121 executes tilt correction processing on the image data acquired in step S1052 using the tilt information received from the smartphone 200 in step S1007 and the tilt information of the digital camera 800 detected by the tilt detection unit 601. . In this case, priority is given to the tilt correction request received from the smartphone 200 side. The data after tilt correction is recorded on the recording medium 128.

ステップS1062では、システム制御部121は、スマートフォン200に対して撮影画像が生成されたことを通知する。そして、ステップS1012で、スマートフォン200から画像データの取得要求を受けた場合、撮影画像を必要に応じてリサイズ処理など行ってスマートフォン200に送信する。   In step S1062, the system control unit 121 notifies the smartphone 200 that a captured image has been generated. In step S1012, when an image data acquisition request is received from the smartphone 200, the captured image is transmitted to the smartphone 200 by performing a resizing process or the like as necessary.

ステップS1063では、システム制御部121は、ステップS1013でスマートフォン200からライブビュー終了要求を受けるまで、ステップS1051からの処理を繰り返し行う。   In step S1063, the system control unit 121 repeatedly performs the processing from step S1051 until receiving a live view end request from the smartphone 200 in step S1013.

以上のように、本実施形態のデジタルカメラ800によれば、スマートフォン200から傾き補正量や傾き情報を受信して傾き補正を実施することにより、デジタルカメラ800を移動せずに、意図的に傾けたような画像をリモート撮影することができる。このように、三脚に固定したデジタルカメラ800が傾いていたとしもスマートフォン200による遠隔制御での画像撮影時に傾き補正を自由に行うことが可能となり、同時にカメラに保存される撮影画像にも傾き補正を適用することができる。   As described above, according to the digital camera 800 of the present embodiment, the digital camera 800 is intentionally tilted without moving by receiving the tilt correction amount and tilt information from the smartphone 200 and performing tilt correction. Images can be taken remotely. In this way, even when the digital camera 800 fixed on the tripod is tilted, tilt correction can be freely performed when the smartphone 200 remotely captures an image, and at the same time, the tilt correction is also performed on a captured image stored in the camera. Can be applied.

[実施形態4]次に、実施形態4について説明する。   [Fourth Embodiment] Next, a fourth embodiment will be described.

本実施形態のデジタルカメラ800は、スマートフォン200による遠隔制御時に、自動的にライブビュー画像や撮影画像に対して傾き補正を適用するオートモードに設定可能である。撮影画像の制作意図によっては、意識的に傾けて撮影する場合もあるために、傾き補正機能についてはユーザが有効/無効に設定できるようになっている。オートモードの設定状態は、不揮発性メモリ124に記憶される。   The digital camera 800 of this embodiment can be set to an auto mode that automatically applies tilt correction to a live view image or a captured image during remote control by the smartphone 200. Depending on the intention of producing the photographed image, there is a case where the photograph is intentionally tilted, so that the tilt correction function can be set valid / invalid by the user. The setting state of the auto mode is stored in the nonvolatile memory 124.

傾き補正機能をオートモードに設定すると、デジタルカメラ800は、自動的に傾き補正済みのライブビュー画像や撮影画像をスマートフォン200に送信する。また、スマートフォン200は、デジタルカメラ800から送信されるライブビュー画像に対して自動的にロック状態を判定してデジタルカメラ800で傾き補正を行うための傾き補正量を送信するこれにより、ユーザは傾き補正を意識することなく常に傾きが補正された撮影画像をデジタルカメラ100、800やスマートフォン200に保存することができる。   When the tilt correction function is set to the auto mode, the digital camera 800 automatically transmits a live view image and a captured image that have been tilt corrected to the smartphone 200. In addition, the smartphone 200 automatically determines a lock state with respect to the live view image transmitted from the digital camera 800, and transmits an inclination correction amount for performing the inclination correction by the digital camera 800. Accordingly, the user can A captured image whose inclination is always corrected without being aware of correction can be stored in the digital cameras 100 and 800 and the smartphone 200.

しかしながら、デジタルカメラ800の加速度センサ803、傾き/振れ検出部804および撮像センサ駆動制御部802は傾き補正だけでなく手ぶれ補正にも利用される。振れ補正制御部805は、傾き/振れ検出部804により検出されるカメラに加わる振れの加速度成分を打ち消す方向および移動量を算出し、撮像センサ駆動制御部802および撮像センサ駆動部801により撮像部104の回転制御を行う。手ぶれ補正と傾き補正機能がいずれも有効に設定されていた場合、それぞれの補正効果は若干劣ることとなるために、通常のユースケースに鑑みて出荷時のデフォルトの設定では手ぶれ補正を有効とし、傾き補正機能は無効になっている。   However, the acceleration sensor 803, the tilt / shake detection unit 804, and the image sensor drive control unit 802 of the digital camera 800 are used not only for tilt correction but also for camera shake correction. The shake correction control unit 805 calculates a direction and an amount of movement to cancel the acceleration component of shake applied to the camera detected by the tilt / shake detection unit 804, and the image sensor 104 by the image sensor drive control unit 802 and the image sensor drive unit 801. Rotation control is performed. If both the image stabilization and tilt correction functions are enabled, the correction effects will be slightly inferior, so in view of normal use cases, the image stabilization will be enabled in the factory default settings. The tilt correction function is disabled.

そこで、本実施形態では、スマートフォン200による遠隔制御時は、デジタルカメラ800の傾き補正機能の設定を自動的に有効に変更し、遠隔制御が終了した後(接続切断した後)に傾き補正機能の設定を自動的に元の無効設定に戻すように構成されている。   Therefore, in the present embodiment, during remote control by the smartphone 200, the setting of the tilt correction function of the digital camera 800 is automatically changed to valid and the tilt correction function is set after the remote control is finished (after disconnection). The configuration is configured to automatically revert to the original invalid setting.

<リモートカメラアプリケーションの説明>次に、図11を参照して、本実施形態のスマートフォン200で実行されるリモートカメラアプリケーションについて説明する。   <Description of Remote Camera Application> Next, with reference to FIG. 11, a remote camera application executed on the smartphone 200 of this embodiment will be described.

図11は、リモートカメラアプリケーションが起動され、デジタルカメラ800とスマートフォン200が接続された後、表示部207に表示されるカメラ制御画面400である。   FIG. 11 shows a camera control screen 400 displayed on the display unit 207 after the remote camera application is activated and the digital camera 800 and the smartphone 200 are connected.

図11のカメラ制御画面400において、図4の画面と異なるのは、設定変更ボタン1101である。設定変更ボタン1101は、傾き補正機能が自動で有効に設定されないように、デジタルカメラ800の傾き補正機能の有効/無効をスマートフォン200のカメラ制御画面400においてユーザがマニュアルで切り替えることができる。その他の画面構成は、図4と同様である。   In the camera control screen 400 of FIG. 11, a setting change button 1101 is different from the screen of FIG. The setting change button 1101 can be manually switched by the user on the camera control screen 400 of the smartphone 200 to enable / disable the tilt correction function of the digital camera 800 so that the tilt correction function is not automatically enabled. Other screen configurations are the same as those in FIG.

<傾き補正機能の設定変更処理>次に、図12を参照して、本実施形態のデジタルカメラ800において傾き補正機能を自動的に設定変更する処理について説明する。   <Inclination Correction Function Setting Change Process> Next, a process for automatically changing the inclination correction function setting in the digital camera 800 of this embodiment will be described with reference to FIG.

本実施形態のデジタルカメラ800は、図3の手順によりスマートフォン200との接続が確立されると、傾き補正機能の設定が自動的に有効に切り替わる。   In the digital camera 800 of this embodiment, when the connection with the smartphone 200 is established by the procedure of FIG. 3, the setting of the tilt correction function is automatically switched to be effective.

図12の処理は、スマートフォン200のリモートカメラアプリケーションが起動され、デジタルカメラ800がスマートフォン200により遠隔制御が可能となると開始される。   The process in FIG. 12 is started when the remote camera application of the smartphone 200 is activated and the digital camera 800 can be remotely controlled by the smartphone 200.

ステップS1201で、図3の手順によりデジタルカメラ800とスマートフォン200の接続が確立されると、ステップS1202に進む。   In step S1201, when the connection between the digital camera 800 and the smartphone 200 is established by the procedure of FIG. 3, the process proceeds to step S1202.

ステップS1202では、システム制御部121は、現在の傾き補正機能の有効/無効の設定値を不揮発性メモリ124に記憶し、システムメモリ123の設定値を退避させる。なお、スマートフォン200による遠隔制御では、デジタルカメラ800を三脚に固定するユースケースが多く、手ぶれ補正が必要ない場合も多いので傾き補正機能を有効に設定すると同時に手ぶれ補正を無効に設定してもよい。その場合は、ステップS602において手振れ補正に関する設定値も同時に不揮発性メモリ124に記憶し、システムメモリ123の設定値を退避させる。   In step S <b> 1202, the system control unit 121 stores the current valid / invalid setting value of the tilt correction function in the nonvolatile memory 124 and saves the set value in the system memory 123. In remote control using the smartphone 200, there are many use cases in which the digital camera 800 is fixed to a tripod, and there are many cases in which camera shake correction is not necessary. Therefore, the camera shake correction may be set to be disabled at the same time as the tilt correction function is enabled. . In that case, in step S602, the setting value related to camera shake correction is also stored in the nonvolatile memory 124, and the setting value in the system memory 123 is saved.

ステップS1203では、システム制御部121は、傾き補正機能を有効に設定する。ここで、必要に応じて手振れ補正機能を無効に設定する。この設定変更は一時的なものであるので、必ずしも不揮発性メモリ124の設定値を変更する必要はない。   In step S1203, the system control unit 121 sets the tilt correction function to be valid. Here, the camera shake correction function is disabled as necessary. Since this setting change is temporary, it is not always necessary to change the setting value of the nonvolatile memory 124.

ステップS1204では、システム制御部121は、スマートフォン200による遠隔制御による撮影が実行される。この場合、傾き補正機能が有効になっているので、スマートフォン200の表示部207に表示されるカメラ制御画面400の画像表示領域401のライブビュー画像も傾き補正が適用されたものが表示される。また、撮影処理が行われると、デジタルカメラ800に保存される撮影画像はもちろんであるが、スマートフォン200に送信される撮影画像も傾き補正が適用されたものとなる。なお、撮影画像はユーザが意図的に傾き補正機能を有効に設定して撮影された画像ではないので撮影画像に対して傾き補正が適用されていることを付加情報として撮影画像に記録してもよい。ユーザが意図的に傾いている画像を撮影したい場合には、図11に示した設定変更ボタン1101をタップすることにより、デジタルカメラ800に対して傾き補正機能の設定変更要求が送信され、傾き補正機能を任意に有効/無効に設定することができる。   In step S <b> 1204, the system control unit 121 performs shooting by remote control using the smartphone 200. In this case, since the tilt correction function is enabled, the live view image in the image display area 401 of the camera control screen 400 displayed on the display unit 207 of the smartphone 200 is also displayed with tilt correction applied. Further, when the shooting process is performed, not only the shot image stored in the digital camera 800 but also the shot image transmitted to the smartphone 200 is the one to which the tilt correction is applied. Note that the captured image is not an image that is intentionally set by the user to enable the tilt correction function, so that it is recorded in the captured image as additional information that tilt correction is applied to the captured image. Good. When the user wants to capture an image that is intentionally tilted, a setting change request for the tilt correction function is transmitted to the digital camera 800 by tapping the setting change button 1101 shown in FIG. The function can be arbitrarily enabled / disabled.

その後、ステップS1205では、スマートフォン200から切断要求を受けて接続が切断されるまで、ステップS1204の遠隔制御を継続し、接続が切断されると、ステップS1206に進む。なお、遠隔制御における撮影指示はスマートフォン200の撮影開始ボタン402のタップのみとは限らない。デジタルカメラ800の物理的なシャッターボタン114の操作によっても撮影は実施され、傾き補正済みの画像がスマートフォン200に送信されるようにしてもよい。   Thereafter, in step S1205, the remote control in step S1204 is continued until the connection is disconnected upon receiving a disconnection request from the smartphone 200. When the connection is disconnected, the process proceeds to step S1206. Note that the shooting instruction in the remote control is not limited to the tap of the shooting start button 402 of the smartphone 200. Photographing may also be performed by operating the physical shutter button 114 of the digital camera 800, and an image whose inclination has been corrected may be transmitted to the smartphone 200.

ステップS1206では、システム制御部121は、ステップS1202でシステムメモリ123から退避した設定値を元の値に戻し、処理を終了する。   In step S1206, the system control unit 121 returns the setting value saved from the system memory 123 in step S1202 to the original value, and ends the process.

上述した実施形態によれば、撮影者が意識することなく三脚を使用した記念写真などの撮影において画像が傾いてしまうといった失敗を防止することができる。また、遠隔制御による撮影終了後に設定値を元に戻す操作が必要ないので、操作の手間を省き、従来と変わらない撮影が可能となる。   According to the above-described embodiment, it is possible to prevent a failure in which an image is inclined in photographing a commemorative photo using a tripod without the photographer being conscious. Further, since there is no need to return the setting value to the original value after the remote control shooting is completed, it is possible to save the operation and to perform shooting that is the same as in the past.

[その他の実施形態]
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
[Other Embodiments]
The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in the computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

100、800…デジタルカメラ、107…表示部、110…通信I/F、111…画像処理部、121…システム制御部、601…傾き検出部、200…スマートフォン、207…表示部、210…通信I/F、221…システム制御部、230…傾き検出部 DESCRIPTION OF SYMBOLS 100, 800 ... Digital camera, 107 ... Display part, 110 ... Communication I / F, 111 ... Image processing part, 121 ... System control part, 601 ... Tilt detection part, 200 ... Smartphone, 207 ... Display part, 210 ... Communication I / F, 221 ... system control unit, 230 ... tilt detection unit

Claims (26)

撮像装置を遠隔から制御する通信装置であって、
前記撮像装置と通信可能に接続する接続手段と、
前記接続手段を介して前記撮像装置から取得した画像を表示する表示手段と、
前記表示手段に画像が表示されているときに前記通信装置の姿勢情報を取得する取得手段と、
前記通信装置の姿勢情報に基づいて前記撮像装置から取得した画像の傾きを補正する傾き補正手段と、を有することを特徴とする通信装置。
A communication device for remotely controlling an imaging device,
Connection means for connecting to the imaging device in a communicable manner;
Display means for displaying an image acquired from the imaging device via the connection means;
Obtaining means for obtaining posture information of the communication device when an image is displayed on the display means;
A communication apparatus comprising: an inclination correction unit that corrects an inclination of an image acquired from the imaging apparatus based on attitude information of the communication apparatus.
前記取得手段は、前記通信装置の重力方向に対する傾きを示す傾き情報を検出し、
前記傾き補正手段は、前記傾き情報に基づいて前記撮像装置から取得した画像の傾きを補正することを特徴とする請求項1に記載の通信装置。
The acquisition unit detects inclination information indicating an inclination of the communication device with respect to a gravitational direction,
The communication apparatus according to claim 1, wherein the inclination correction unit corrects an inclination of an image acquired from the imaging apparatus based on the inclination information.
前記表示手段は、前記通信装置の傾き情報に基づいて、前記表示手段に表示されている画像に重ねてトリミング枠を表示することを特徴とする請求項2に記載の通信装置。   The communication device according to claim 2, wherein the display unit displays a trimming frame on the image displayed on the display unit based on inclination information of the communication device. 前記表示手段に表示されている画像に対する前記トリミング枠の位置をロックするロック手段を更に有し、
前記傾き補正手段は、前記画像に対してロックされたトリミング枠に合わせて画像を切り取るトリミング処理を行い、
前記表示手段は、前記傾きが補正された画像を表示することを特徴とする請求項3に記載の通信装置。
A lock unit for locking the position of the trimming frame with respect to the image displayed on the display unit;
The tilt correction means performs a trimming process for cutting out an image in accordance with a trimming frame locked to the image,
The communication apparatus according to claim 3, wherein the display unit displays an image with the tilt corrected.
前記表示手段は、前記傾きが補正された画像に重ねて格子状のグリッド線を表示することを特徴とする請求項4に記載の通信装置。   The communication apparatus according to claim 4, wherein the display unit displays a grid line in a grid pattern so as to be superimposed on the image whose tilt is corrected. 前記傾きが補正された画像データと共に、当該画像データの傾き補正に用いられた傾き情報を付加して記憶する記憶手段を更に有することを特徴とする請求項2ないし5のいずれか1項に記載の通信装置。   6. The apparatus according to claim 2, further comprising storage means for adding and storing the tilt information used for correcting the tilt of the image data together with the tilt-corrected image data. Communication equipment. 前記接続手段により接続された前記撮像装置を遠隔操作により制御する制御手段を更に有することを特徴とする請求項1ないし6のいずれか1項に記載の通信装置。   The communication apparatus according to claim 1, further comprising a control unit that controls the imaging device connected by the connection unit by remote operation. 前記撮像装置は、画像撮影時の当該撮像装置の重力方向に対する傾きを示す傾き情報を検出する傾き検出手段を有し、
前記取得手段は、前記撮像装置から、当該撮像装置において撮影された画像と共に、当該画像の撮影時の前記撮像装置の傾き情報を取得し、
前記傾き補正手段は、前記画像の傾きを補正するための傾き補正量を決定することを特徴とする請求項1ないし7のいずれか1項に記載の通信装置。
The imaging apparatus has an inclination detection means for detecting inclination information indicating an inclination of the imaging apparatus with respect to the direction of gravity at the time of image capturing,
The acquisition means acquires the tilt information of the imaging device at the time of shooting the image together with the image shot by the imaging device from the imaging device,
The communication apparatus according to claim 1, wherein the inclination correction unit determines an inclination correction amount for correcting the inclination of the image.
前記表示手段は、前記画像の撮影時の前記撮像装置の傾き情報を示す第1の指標と前記通信装置の現在の傾き情報を示す第2の指標とを、前記表示手段に表示されている画像に重ねて表示し、
前記傾き補正手段は、前記第1の指標と前記第2の指標との差分に基づいて前記傾き補正量を決定することを特徴とする請求項8に記載の通信装置。
The display means displays on the display means a first index indicating tilt information of the imaging device at the time of capturing the image and a second index indicating current tilt information of the communication device. Displayed on top of
The communication apparatus according to claim 8, wherein the inclination correction unit determines the inclination correction amount based on a difference between the first index and the second index.
通信装置により遠隔から制御される撮像装置であって、
前記通信装置と通信可能に接続する接続手段と、
前記撮像装置において撮影された画像と、当該画像を撮影したときの前記撮像装置の姿勢情報を取得する取得手段と、
前記姿勢情報に基づいて前記撮影された画像の傾きを補正する傾き補正手段と、
前記傾きが補正された画像を前記通信装置に送信する送信手段と、を有することを特徴とする撮像装置。
An imaging device controlled remotely by a communication device,
A connection means for connecting to the communication device in a communicable manner;
An image captured by the imaging device; and acquisition means for acquiring posture information of the imaging device when the image is captured;
Tilt correction means for correcting the tilt of the captured image based on the posture information;
An image pickup apparatus comprising: a transmission unit that transmits the image with the tilt corrected to the communication apparatus.
前記通信装置から前記画像の傾きを補正するための傾き補正量または前記通信装置の重力方向に対する傾きを示す傾き情報を受信する受信手段を更に有し、
前記傾き補正手段は、前記通信装置から受信した前記傾き補正量または前記通信装置の傾き情報に基づいて前記撮影された画像の傾きを補正することを特徴とする請求項10に記載の撮像装置。
A receiving means for receiving from the communication device an inclination correction amount for correcting an inclination of the image or inclination information indicating an inclination of the communication device with respect to a gravitational direction;
The imaging apparatus according to claim 10, wherein the tilt correction unit corrects the tilt of the photographed image based on the tilt correction amount received from the communication apparatus or tilt information of the communication apparatus.
前記傾き補正手段は、前記通信装置から前記傾き補正量または前記通信装置の傾き情報を受信したことをトリガーとして前記画像の傾き補正処理を実行することを特徴とする請求項11に記載の撮像装置。   The imaging apparatus according to claim 11, wherein the inclination correction unit executes the inclination correction process of the image triggered by reception of the inclination correction amount or the inclination information of the communication apparatus from the communication apparatus. . 前記傾きが補正された画像データと共に、当該画像データの傾き補正に用いられた前記傾き補正量または前記通信装置の傾き情報を付加して記憶する記憶手段を更に有することを特徴とする請求項12に記載の撮像装置。   13. The image processing apparatus according to claim 12, further comprising storage means for adding and storing the tilt correction amount used for tilt correction of the image data or tilt information of the communication device together with the image data whose tilt is corrected. The imaging device described in 1. 前記取得手段は、前記撮像装置の重力方向に対する傾きを示す傾き情報を検出し、
前記傾き補正手段は、撮像部を光軸まわりに回転させる駆動手段を有し、
前記駆動手段は、前記撮像装置の傾き情報に基づいて前記撮像装置の傾きがなくなるように前記撮像部を回転駆動することを特徴とする請求項10ないし13のいずれか1項に記載の撮像装置。
The acquisition means detects inclination information indicating an inclination of the imaging device with respect to the direction of gravity,
The tilt correction means has a drive means for rotating the imaging unit around the optical axis,
The imaging device according to claim 10, wherein the driving unit rotationally drives the imaging unit based on tilt information of the imaging device so that the tilt of the imaging device is eliminated. .
前記取得手段は、前記撮像装置の重力方向に対する傾きを示す傾き情報を検出し、
前記傾き補正手段は、前記撮影された画像を回転させる画像処理手段を有し、
前記画像処理手段は、前記撮像装置の傾き情報に基づいて前記画像の傾きがなくなるように画像を切り取るトリミング処理を行うことを特徴とする請求項10ないし13のいずれか1項に記載の撮像装置。
The acquisition means detects inclination information indicating an inclination of the imaging device with respect to the direction of gravity,
The tilt correction means includes image processing means for rotating the photographed image,
The imaging apparatus according to any one of claims 10 to 13, wherein the image processing means performs a trimming process of cutting out an image so that the inclination of the image is eliminated based on inclination information of the imaging apparatus. .
前記接続手段を介して前記通信装置と接続されると、前記傾き補正手段による傾き補正機能を有効に設定する設定手段を更に有することを特徴とする請求項10ないし15のいずれか1項に記載の撮像装置。   16. The apparatus according to claim 10, further comprising setting means for effectively setting an inclination correction function by the inclination correction means when connected to the communication device via the connection means. Imaging device. 前記設定手段は、前記接続が切断されると、前記傾き補正手段による傾き補正機能を無効に設定することを特徴とする請求項16に記載の撮像装置。   The imaging apparatus according to claim 16, wherein the setting unit sets the tilt correction function by the tilt correction unit to be invalid when the connection is disconnected. 前記接続手段を介して前記通信装置と接続されても前記傾き補正機能を有効に設定しないように制御する設定変更手段を更に有することを特徴とする請求項16に記載の撮像装置。   The imaging apparatus according to claim 16, further comprising setting changing means for controlling the tilt correction function not to be set effectively even when connected to the communication apparatus via the connection means. 前記撮像装置の振れを検出する振れ検出手段と、
前記撮像装置の振れを補正する振れ補正手段と、
前記通信装置と前記撮像装置とが前記接続手段により接続されている場合には、前記振れ補正手段による振れ補正機能を無効に設定する設定手段と、を更に有することを特徴とする請求項16ないし18のいずれか1項に記載の撮像装置。
Shake detection means for detecting shake of the imaging device;
Shake correction means for correcting shake of the imaging apparatus;
17. The apparatus according to claim 16, further comprising setting means for invalidating a shake correction function by the shake correction means when the communication device and the imaging device are connected by the connection means. The imaging device according to any one of 18.
前記撮像装置は、デフォルトで前記振れ補正機能が有効に設定され、前記傾き補正機能が無効に設定されることを特徴とする請求項19に記載の撮像装置。   The image pickup apparatus according to claim 19, wherein the shake correction function is enabled by default and the tilt correction function is disabled by default. 撮像装置を遠隔から制御する通信装置の制御方法であって、
前記撮像装置と通信可能に接続するステップと、
前記撮像装置から取得した画像を表示するステップと、
前記画像が表示されているときに前記通信装置の姿勢情報を取得するステップと、
前記通信装置の姿勢情報に基づいて前記撮像装置から取得した画像の傾きを補正するステップと、を有することを特徴とする通信装置の制御方法。
A control method of a communication device for remotely controlling an imaging device,
Connecting to the imaging device in a communicable manner;
Displaying an image acquired from the imaging device;
Obtaining posture information of the communication device when the image is displayed;
Correcting the inclination of the image acquired from the imaging device based on the attitude information of the communication device.
通信装置により遠隔から制御される撮像装置の制御方法であって、
前記通信装置と通信可能に接続するステップと、
前記撮像装置において撮影された画像と、当該画像を撮影したときの前記撮像装置の姿勢情報を取得するステップと、
前記姿勢情報に基づいて前記撮影された画像の傾きを補正するステップと、
前記傾きが補正された画像を前記通信装置に送信するステップと、を有することを特徴とする撮像装置の制御方法。
A method for controlling an imaging device that is remotely controlled by a communication device,
Connecting to the communication device in a communicable manner;
Acquiring an image captured by the imaging device, and posture information of the imaging device when the image is captured;
Correcting the tilt of the captured image based on the posture information;
And a step of transmitting the image with the tilt corrected to the communication device.
コンピュータを、請求項1乃至9のいずれか1項に記載の通信装置の各手段として機能させるための、コンピュータによる実行が可能なプログラム。   A computer-executable program for causing a computer to function as each unit of the communication device according to any one of claims 1 to 9. コンピュータを請求項1乃至9のいずれか1項に記載の通信装置の各手段として機能させるためのプログラムを記憶したコンピュータによる読み取りが可能な記憶媒体。   A computer-readable storage medium storing a program for causing a computer to function as each unit of the communication apparatus according to any one of claims 1 to 9. コンピュータを、請求項10乃至20のいずれか1項に記載の撮像装置の各手段として機能させるための、コンピュータによる実行が可能なプログラム。   A computer-executable program for causing a computer to function as each unit of the imaging apparatus according to any one of claims 10 to 20. コンピュータを請求項10乃至20のいずれか1項に記載の撮像装置の各手段として機能させるためのプログラムを記憶したコンピュータによる読み取りが可能な記憶媒体。   A computer-readable storage medium storing a program for causing a computer to function as each unit of the imaging apparatus according to any one of claims 10 to 20.
JP2016131028A 2016-06-30 2016-06-30 Communication device, imaging device, control method of those, program, and storage medium Pending JP2018006996A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016131028A JP2018006996A (en) 2016-06-30 2016-06-30 Communication device, imaging device, control method of those, program, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016131028A JP2018006996A (en) 2016-06-30 2016-06-30 Communication device, imaging device, control method of those, program, and storage medium

Publications (1)

Publication Number Publication Date
JP2018006996A true JP2018006996A (en) 2018-01-11

Family

ID=60948197

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016131028A Pending JP2018006996A (en) 2016-06-30 2016-06-30 Communication device, imaging device, control method of those, program, and storage medium

Country Status (1)

Country Link
JP (1) JP2018006996A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113014796A (en) * 2019-12-20 2021-06-22 佳能株式会社 Image processing apparatus, image capturing apparatus, image processing method, and storage medium
JP7501559B2 (en) 2022-03-17 2024-06-18 株式会社リコー Display terminal, display method, communication system, communication method, and program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113014796A (en) * 2019-12-20 2021-06-22 佳能株式会社 Image processing apparatus, image capturing apparatus, image processing method, and storage medium
CN113014796B (en) * 2019-12-20 2023-11-03 佳能株式会社 Image processing apparatus, image capturing apparatus, image processing method, and storage medium
JP7501559B2 (en) 2022-03-17 2024-06-18 株式会社リコー Display terminal, display method, communication system, communication method, and program

Similar Documents

Publication Publication Date Title
JP6765956B2 (en) Imaging control device and its control method
JP5820181B2 (en) Imaging system and control method thereof, display control apparatus and control method thereof, program, and storage medium
US9635235B2 (en) Communication apparatus and control method thereof
US10397482B2 (en) Imaging control apparatus and method for controlling the same
JP6598589B2 (en) Imaging apparatus and control method thereof
JP7258482B2 (en) Electronics
CN111385470B (en) Electronic device, control method of electronic device, and computer-readable medium
JP7094815B2 (en) Display control device, control method of display control device, program, storage medium
JP2019054378A (en) Imaging apparatus and control method thereof, and program
JP2017011579A (en) Imaging device, control method for the same, program and storage medium
KR20200028298A (en) Display control apparatus, imaging apparatus, control method, and computer readable medium
JP2018006996A (en) Communication device, imaging device, control method of those, program, and storage medium
US9232133B2 (en) Image capturing apparatus for prioritizing shooting parameter settings and control method thereof
JP6312423B2 (en) IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
JP6410778B2 (en) Imaging apparatus and control method thereof
JP2021170066A (en) Display control apparatus and method, program, and storage medium
JP6393296B2 (en) IMAGING DEVICE AND ITS CONTROL METHOD, IMAGING CONTROL DEVICE, PROGRAM, AND STORAGE MEDIUM
JP6641156B2 (en) Communication device, control method therefor, program, and storage medium
WO2023007904A1 (en) Electronic device, electronic device control method, program, and storage medium
JP6460785B2 (en) Electronic device and control method of electronic device
JP2024037370A (en) Imaging apparatus, control method of imaging apparatus and program
JP2020167457A (en) Image processing device, image processing method, and program
JP2023161441A (en) Information processing device and control method and program therefor
JP2014212405A (en) Imaging apparatus, control method, program, and storage medium
JP2018129669A (en) Imaging device, control method of imaging device, and program