JP2023125345A - 電子機器、その制御方法およびプログラム - Google Patents

Abstract

【課題】被写体と、重畳させる撮像画像とが重複しないようにすることを目的とする。
【解決手段】本発明は、複数のレンズを有する電子機器であって、複数のレンズのうち第１のレンズを介して撮影された第１の撮像画像を取得する第１の取得手段と、前記第１のレンズとは異なる第２のレンズを介して撮影された第２の撮像画像を取得する第２の取得手段と、前記第２の撮像画像を前記第１の撮像画像に重畳させた合成画像を生成する第１の生成手段と、前記第１の撮像画像から被写体を検出する検出手段と、前記第１の生成手段により生成された合成画像において、前記検出手段により検出された被写体の領域が前記第２の撮像画像が重畳されている領域と重複する場合に、前記第１の撮像画像よりも広角に撮影された第３の撮像画像を取得する第３の取得手段と、前記第２の撮像画像を前記第３の撮像画像に重畳させた合成画像を生成する第２の生成手段と、を有する。
【選択図】図７

Description

本発明は、電子機器、その制御方法、プログラムおよび記録媒体に関するものである。

複数の撮像画像のうち一つの撮像画像を他の撮像画像へ重畳させて合成し出力するような撮影手法（ピクチャインピクチャ、以降ＰＩＰともいう）がある。ＰＩＰでの撮影は、静止画撮影のみならず、動画やライブの映像配信、Ｗｅｂ会議の映像表示、テレビ映像等、種々の場面で使用される。

近年では、複眼を持つスマートフォンの開発が進み、多くは広角や標準や望遠など異なる画角のレンズを持つカメラが搭載されている。その中でスマートフォンのカメラ機能として、複眼での撮像画像をＰＩＰで表示・記録する機能を持つものも存在する。
スマートフォンを始めとする電子機器を使用してＰＩＰでの撮影・表示を行う際、撮像画像上の被写体と、重畳させる撮像画像の表示（以降、ＰＩＰウィンドウともいう）とが重複して視認性が落ちてしまう場合がある。

特許文献１には、被写体を検出し、被写体がＰＩＰウィンドウの方向に向かっていれば、ＰＩＰウィンドウの位置を移動させる画像表示装置が開示されている。

特許文献２には、撮影者が操作ボタンを押すとカメラに映す被写体の見切れや移動に伴って自動でレンズの倍率を変更し、被写体が画角内に映るように制御する撮像装置が開示されている。

特開２００９－１８８８００号公報 特開２０１５－４３５５７号公報

しかしながら、特許文献１では、ＰＩＰウィンドウを移動した先でも被写体と重複したままになってしまうことがある。例えば、レンズ倍率を高くして被写体を大きく映す場合には、ＰＩＰウィンドウを移動させても被写体と重複する可能性は高く、被写体の視認性の悪さを低減させることは難しい。

特許文献２では、被写体の動きによって画角変更し、被写体を画角内に映すことはできるが、ＰＩＰウィンドウのようなカメラ内の表示物に対しては考慮されていない。そのためカメラ内の表示物と重複しても回避することは難しい。更に、特許文献２では撮影者がカメラ操作を意識しなければならない。例えば、撮影者が配信番組の司会進行と、配信に使用するカメラやスマートフォンの操作を兼ねて行う場合がある。撮影者は逐一被写体とＰＩＰウィンドウとの映りを確認し、被写体とＰＩＰウィンドウが重複すれば、動画の記録や配信を中断してカメラの画角や位置を変更する必要がある。そのため、撮影者は撮影・配信（配信番組なら司会進行など）に集中できない。

本発明は、被写体と、重畳させる撮像画像とが重複しないようにすることを目的とする。

本発明は、複数のレンズを有する電子機器であって、複数のレンズのうち第１のレンズを介して撮影された第１の撮像画像を取得する第１の取得手段と、前記第１のレンズとは異なる第２のレンズを介して撮影された第２の撮像画像を取得する第２の取得手段と、前記第２の撮像画像を前記第１の撮像画像に重畳させた合成画像を生成する第１の生成手段と、前記第１の撮像画像から被写体を検出する検出手段と、前記第１の生成手段により生成された合成画像において、前記検出手段により検出された被写体の領域が前記第２の撮像画像が重畳されている領域と重複する場合に、前記第１の撮像画像よりも広角に撮影された第３の撮像画像を取得する第３の取得手段と、前記第２の撮像画像を前記第３の撮像画像に重畳させた合成画像を生成する第２の生成手段と、を有することを特徴とする。

本発明によれば、被写体と、重畳させる撮像画像とが重複しないようにすることができる。

スマートフォンの外観図である。 スマートフォンの構成を示すブロック図である。 解決しようとする課題を説明するための図である。 本実施形態の制御処理を示すフローチャートである。 本実施形態の被写体検出・表示変更処理を示すフローチャートである。 動画撮影・記録の画面と、画像表示設定画面を示す図である。 被写体とＰＩＰウィンドウの表示領域の関係を示す図である。

以下、図面を参照して本発明の好適な実施形態を説明する。本実施形態では、電子機器としてスマートフォンを例にして説明する。
図１はスマートフォン１００の外観図である。図１（ａ）はスマートフォン１００の前面図であり、図１（ｂ）はスマートフォン１００の背面図である。
スマートフォン１００は、ディスプレイ１０５、アウトカメラ１１４、インカメラ１１５を有する。
ディスプレイ１０５は画像や各種情報を表示する、スマートフォン前面に設けられた表示部である。スマートフォン１００は、アウトカメラ１１４、もしくは、インカメラ１１５で撮影したライブビュー画像（ＬＶ画像）をディスプレイ１０５に表示することが可能である。アウトカメラ１１４は、望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃを含む。インカメラ１１５は、標準インカメラ１１５ａ、超広角インカメラ１１５ｂを含む。

スマートフォン１００は操作部１０６を有する。操作部１０６には、タッチパネル１０６ａ、電源ボタン１０６ｂ、音量プラスボタン１０６ｃ、音量マイナスボタン１０６ｄ、ホームボタン１０６ｅ等を含む。
タッチパネル１０６ａはタッチ操作部材であり、ディスプレイ１０５の表示面（操作面）に対するタッチ操作を検出することができる。電源ボタン１０６ｂは操作部材であり、ディスプレイ１０５の点灯／消灯を切替えることができる。ある程度の時間、例えば３秒間、電源ボタン１０６ｂの押下を継続（長押し）するとスマートフォン１００の電源のＯＮ／ＯＦＦを切替えることができる。音量プラスボタン１０６ｃ、音量マイナスボタン１０６ｄは後述する音声出力部１１２から出力する音量のボリュームをコントロールする音量ボタンである。音量プラスボタン１０６ｃを押下すると音量が大きくなり、音量マイナスボタン１０６ｄを押下すると音量が小さくなる。また、カメラ使用時の撮影待機状態においては、音量プラスボタン１０６ｃや音量マイナスボタン１０６ｄを押下することで撮影を指示するシャッターボタンとしても機能する。電源ボタン１０６ｂと音量マイナスボタン１０６ｄを同時に押下したり、音量マイナスボタン１０６ｄを素早く数回押下したりした場合に、特定の機能を実行するように、ユーザが任意に設定することもできる。

ホームボタン１０６ｅはディスプレイ１０５にスマートフォン１００の起動画面であるホーム画面を表示させるための操作ボタンである。スマートフォン１００において様々なアプリケーションを起動し、使用していた場合に、ホームボタン１０６ｅを押下することで、起動している様々なアプリケーションを一時的に閉じて、ホーム画面を表示することができる。なお、ホームボタン１０６ｅは物理的に押下可能なボタンを想定しているが、物理ボタンではなくディスプレイ１０５に表示された同様に機能を持った、タッチ可能なボタンでもよい。

また、スマートフォン１００は音声出力端子１１２ａ、スピーカ１１２ｂを有する。
音声出力端子１１２ａはイヤホンジャックであり、イヤホンや外部スピーカ等に音声を出力する端子である。スピーカ１１２ｂは音声を出す本体内蔵のスピーカである。音声出力端子１１２ａに音声を出力する端子、例えばイヤホンコードを装着していない場合に、スマートフォン１００において音声が出力されるような場合には、スピーカ１１２ｂから音声が出力される。

図２はスマートフォン１００の構成の一例を示すブロック図である。なお、図２では、図１と同一の構成に同一の符号を付している。
スマートフォン１００は、内部バス１５０に対してＣＰＵ１０１、メモリ１０２、不揮発性メモリ１０３、アウトカメラ画像処理部１０４、ディスプレイ１０５、操作部１０６、記録媒体Ｉ／Ｆ１０７、外部Ｉ／Ｆ１０９および通信Ｉ／Ｆ１１０が接続されている。また、スマートフォン１００は、内部バス１５０に対して音声出力部１１２、姿勢検出部１１３、アウトカメラ１１４、インカメラ１１５、インカメラ画像処理部１１６も接続されている。内部バス１５０に接続される各部は、内部バス１５０を介して互いにデータのやりとりを行うことができる。

ＣＰＵ１０１は、スマートフォン１００の全体を制御する制御部であり、少なくとも１つのプロセッサーまたは回路からなる。メモリ１０２は、例えばＲＡＭ（半導体素子を利用した揮発性のメモリ等）からなる。ＣＰＵ１０１は、例えば不揮発性メモリ１０３に格納されるプログラムに従い、メモリ１０２をワークメモリとして用いて、スマートフォン１００の各部を制御する。不揮発性メモリ１０３には、画像データや音声データ、その他のデータ、ＣＰＵ１０１が動作するための各種プログラム等が格納される。不揮発性メモリ１０３は例えばフラッシュメモリやＲＯＭ等で構成される。

アウトカメラ画像処理部１０４は、ＣＰＵ１０１の制御に基づいて、アウトカメラ１１４で撮影した画像に対して各種画像処理や被写体認識処理を施す。望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃのそれぞれに望遠カメラ画像処理部１０４ａ、標準カメラ画像処理部１０４ｂ、超広角カメラ画像処理部１０４ｃがある。各画像処理部が、それぞれのカメラが撮影した画像に対して処理を施す。なお、本実施形態では３つのアウトカメラの１つ１つが画像処理部を持つように構成されているが、必ずしも全てが個別である必要はなく、何れか２つのカメラが１つの画像処理部を共有してもよく、３つのカメラが画像処理部を共有してもよい。同様に、インカメラ画像処理部１１６はインカメラ１１５で撮影された画像に対して各種画像処理や被写体認識処理を施す。各画像処理部は、不揮発性メモリ１０３や記録媒体１０８に格納された画像、外部Ｉ／Ｆ１０９を介して取得した映像信号、通信Ｉ／Ｆ１１０を介して取得した画像等に対して各種画像処理を施すこともできる。各画像処理部が行う画像処理には、Ａ／Ｄ変換処理、Ｄ／Ａ変換処理、画像データの符号化処理、圧縮処理、デコード処理、拡大／縮小処理（リサイズ）、ノイズ低減処理、色変換処理等が含まれる。各画像処理部は、特定の画像処理を施すための専用の回路ブロックで構成してもよい。アウトカメラ画像処理部１０４は、１つの処理ブロックに統合され、それぞれのカメラによる画像を並列処理や時分割処理によって一手に担う構成であってもよい。また、画像処理の種別によっては各画像処理部を用いずにＣＰＵ１０１がプログラムに従って画像処理を施すことも可能である。

ディスプレイ１０５は、ＣＰＵ１０１の制御に基づいて、画像やＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を構成するＧＵＩ画面などを表示する。ＣＰＵ１０１は、プログラムに従い表示制御信号を生成し、ディスプレイ１０５に表示するための映像信号を生成してディスプレイ１０５に出力するようにスマートフォン１００の各部を制御する。ディスプレイ１０５は出力された映像信号に基づいて映像を表示する。なお、スマートフォン１００自体が備える構成としてはディスプレイ１０５に表示させるための映像信号を出力するためのインタフェースまでとし、ディスプレイ１０５は外付けのモニタ（テレビ等）で構成してもよい。

操作部１０６は、キーボード等の文字情報入力デバイス、マウスやタッチパネルといったポインティングデバイス、ボタン、ダイヤル、ジョイスティック、タッチセンサ、タッチパッド等を含む、ユーザ操作を受け付けるための入力デバイスである。なお、タッチパネルは、ディスプレイ１０５に重ね合わせて平面的に構成され、接触された位置に応じた座標情報が出力されるようにした入力デバイスである。操作部１０６には、上述した、タッチパネル１０６ａ、電源ボタン１０６ｂ、音量プラスボタン１０６ｃ、音量マイナスボタン１０６ｄ、ホームボタン１０６ｅが含まれる。

記録媒体Ｉ／Ｆ１０７は、メモリーカード、ＣＤ、ＤＶＤといった記録媒体１０８が装着可能であり、ＣＰＵ１０１の制御に基づき、装着された記録媒体１０８からのデータの読み出しや、当該記録媒体１０８に対するデータの書き込みを行う。記録媒体１０８は、スマートフォン１００内に組み込まれた内蔵ストレージでもよい。外部Ｉ／Ｆ１０９は、外部機器と有線ケーブルや無線によって接続し、映像信号や音声信号の入出力を行うためのインタフェースである。通信Ｉ／Ｆ１１０は、外部機器やインターネット１１１等と通信して、ファイルやコマンド等の各種データの送受信を行うためのインタフェースである。

音声出力部１１２は、動画や音楽データの音声、操作音、着信音、各種通知音等を出力する。音声出力部１１２には、イヤホン等を接続する音声出力端子１１２ａ、スピーカ１１２ｂが含まれるが、無線通信等で音声出力を行ってもよい。
姿勢検出部１１３は、重力方向に対するスマートフォン１００の姿勢や、ヨー、ロール、ピッチの各軸に対する姿勢の傾きを検出する。姿勢検出部１１３で検出された姿勢に基づいて、スマートフォン１００が横に保持されているか、縦に保持されているか、上に向けられたか、下に向けられたか、斜めの姿勢になったか等を判別可能である。姿勢検出部１１３としては、加速度センサ、ジャイロセンサ、地磁気センサ、方位センサ、高度センサ等のうち少なくとも１つを用いることができ、複数を組み合わせて用いることも可能である。

アウトカメラ１１４はスマートフォン１００の筐体において、ディスプレイ１０５とは反対の側の面に配置されたカメラである。望遠カメラ１１４ａの焦点距離は標準カメラ１１４ｂの焦点距離よりも長く、標準カメラ１１４ｂよりも、より望遠側を撮影することができる。超広角カメラ１１４ｃの焦点距離は、標準カメラ１１４ｂの焦点距離よりも短く、標準カメラ１１４ｂよりも、より広角に撮影できる。すなわち、望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃの順に焦点距離が短くなり、それに伴い画角も広くなる。本実施形態では、望遠カメラ１１４ａは予め決められた倍率に光学的に等倍される機構のレンズを想定しているが、ユーザによって倍率を可変できるような機構としてもよい。インカメラ１１５は、スマートフォン１００の筐体においてディスプレイ１０５と同じ面に配置されたカメラである。超広角インカメラ１１５ｂの焦点距離は、標準インカメラ１１５ａの焦点距離よりも短く、標準インカメラ１１５ａよりも、より広角に撮影できる。

望遠カメラ１１４ａ、標準カメラ１１４ｂ、超広角カメラ１１４ｃは３つ同時に撮影動作を行うことができる。なお、必ずしも３つ全てのカメラが同時に撮影動作する必要はなく、３つのうち何れか２つのカメラを動作するようにしてもよく、１つのカメラが単独で撮影動作してもよい。アウトカメラ１１４およびインカメラ１１５で撮影したＬＶ画像は、何れもディスプレイ１０５上に表示することができる。タッチパネル１０６ａの操作によって、どのカメラで撮影した画像をディスプレイ１０５上で表示するかを選択することができる。すなわち、望遠カメラ１１４ａを選択すれば、標準カメラ１１４ｂよりもより拡大された画像をディスプレイ１０５に表示することができる。標準カメラ１１４ｂを選択すれば、望遠カメラ１１４ａよりも広角で、超広角カメラ１１４ｃよりも拡大された画像を表示することができる。超広角カメラ１１４ｃを選択すれば、望遠カメラ１１４ａと標準カメラ１１４ｂの両方よりも広角の画像を表示することができる。もしくは、アウトカメラ１１４とインカメラ１１５の何れかを利用するかによって、眼前の光景を撮影するか、撮影者自身を自分撮り撮影するかを選択することができる。

なお、操作部１０６には、タッチパネル１０６ａが含まれる。ＣＰＵ１０１はタッチパネル１０６ａへの以下の操作、あるいは状態を検出できる。
・タッチパネル１０６ａにタッチしていなかった指やペンが新たにタッチパネル１０６ａにタッチしたこと、すなわち、タッチの開始（以下、タッチダウン（Ｔｏｕｃｈ－Ｄｏｗｎ）と称する。）。
・タッチパネル１０６ａを指やペンがタッチしている状態であること（以下、タッチオン（Ｔｏｕｃｈ－Ｏｎ）と称する）。
・指やペンがタッチパネル１０６ａをタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ－Ｍｏｖｅ）と称する）。
・タッチパネル１０６ａへタッチしていた指やペンがタッチパネル１０６ａから離れたこと、すなわち、タッチの終了（以下、タッチアップ（Ｔｏｕｃｈ－Ｕｐ）と称する）。
・タッチパネル１０６ａに何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ－Ｏｆｆ）と称する）。

タッチダウンが検出されると、同時にタッチオンも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出された場合も、同時にタッチオンが検出される。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていた全ての指やペンがタッチアップしたことが検出されると、タッチオフが検出される。
これらの操作・状態や、タッチパネル１０６ａ上に指やペンがタッチしている位置座標は内部バスを通じてＣＰＵ１０１に通知される。ＣＰＵ１０１は通知された情報に基づいてタッチパネル１０６ａ上にどのような操作（タッチ操作）が行なわれたかを判定する。タッチムーブについてはタッチパネル１０６ａ上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル１０６ａ上の垂直成分・水平成分毎に判定できる。所定距離以上をタッチムーブしたことが検出された場合はスライド操作が行なわれたと判定するものとする。タッチパネル１０６ａ上に指をタッチしたままある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックと呼ぶ。フリックは、言い換えればタッチパネル１０６ａ上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行なわれたと判定できる（スライド操作に続いてフリックがあったものと判定できる）。更に、複数箇所（例えば２点）を同時にタッチして、互いのタッチ位置を近づけるタッチ操作をピンチイン、互いのタッチ位置を遠ざけるタッチ操作をピンチアウトと称する。ピンチアウトとピンチインを総称してピンチ操作（あるいは単にピンチ）と称する。タッチパネル１０６ａは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式等、様々な方式のタッチパネルのうち何れの方式のものを用いてもよい。タッチパネルに対する接触があったことでタッチがあったと検出する方式や、タッチパネルに対する指やペンの接近があったことでタッチがあったと検出する方式があるが、何れの方式であってもよい。

本実施形態では、スマートフォン１００における動画撮影・配信時における被写体とＰＩＰウィンドウの表示処理、および、画角変更処理について説明する。

図３は、本実施形態において解決しようとする課題を説明するための図である。
図３（ａ）は、撮影者３０１が、動画記録または動画配信を行う一例として、スマートフォン１００の望遠カメラ１１４ａを使用して被写体３０２を撮影しつつ、一方で標準インカメラ１１５ａを使用して撮影者３０１の顔の表情を撮影する状態を示している。撮影者３０１は、望遠カメラ１１４ａで取得したＬＶ画像に、標準インカメラ１１５ａで取得したＬＶ画像を重畳させるＰＩＰでの撮影を行うことを想定している。
なお、ＰＩＰでの撮影では、望遠カメラ１１４ａと標準インカメラ１１５ａの組み合わせに限らず、アウトカメラ１１４、インカメラ１１５のいかなる組み合わせでもよい。

図３（ｂ）は、図３（ａ）で説明した撮影によってスマートフォン１００のディスプレイ１０５に表示された画像を示す図である。望遠カメラ１１４ａで取得したＬＶ画像３０３に重畳して、標準インカメラ１１５ａで取得したＬＶ画像３０４をディスプレイ１０５にＰＩＰウィンドウで表示している。図３（ｂ）では、ＬＶ画像３０３内にある被写体３０２と、ＬＶ画像３０４とが一部で重複しており、被写体３０２全体が見えていない。したがって、撮影者３０１は被写体３０２全体の映りを確認することができない。そのため撮影者３０１は、スマートフォン１００自体、もしくは操作部１０６を自身で操作して重複しないようにする必要がある。

図３（ｃ）は、図３（ｂ）で生じた被写体３０２とＬＶ画像３０４との重複を回避するために、重畳させるＬＶ画像３０４を移動させる操作を示す図である。撮影者３０１は指３０５でスマートフォン１００のタッチパネル１０６ａを操作し、ＬＶ画像３０４を別の位置３０６に移動させる。しかしながら、被写体３０２の領域が大きい場合には、別の位置３０６にＬＶ画像３０４を移動させても被写体３０２とＬＶ画像３０４とが重複することがある。また、撮影者３０１は、自身の撮影・配信を中断し、スマートフォン１００の操作部１０６を操作して被写体３０２とＬＶ画像３０４との重複を回避させる必要があり、撮影・配信に集中できない。

以下、被写体とＰＩＰウィンドウとの重複を自動で抑制させる実施形態について説明する。図４は、本実施形態における制御処理を示すフローチャートである。図４のフローチャートは、ＣＰＵ１０１が不揮発性メモリ１０３に格納されたプログラムを実行することにより実現される。また、図４のフローチャートは、スマートフォン１００をカメラ機能に遷移させることにより開始される。

Ｓ４０１では、ＣＰＵ１０１は、アウトカメラ１１４、インカメラ１１５、アウトカメラ画像処理部１０４、インカメラ画像処理部１１６の駆動を開始し、カメラの撮影待機状態に遷移する。
Ｓ４０２では、ＣＰＵ１０１は、第１のレンズを介して取得したＬＶ画像を、ディスプレイ１０５に表示する。本実施形態では、第１のレンズを介して取得したＬＶ画像が、望遠カメラ１１４ａで撮影されたＬＶ画像である。ただし、表示するＬＶ画像は、標準カメラ１１４ｂ、超広角カメラ１１４ｃ、標準インカメラ１１５ａ、超広角インカメラ１１５ｂで取得したものであってもよい。また、ディスプレイ１０５に表示したいアウトカメラ１１４、インカメラ１１５それぞれのＬＶ画像を、撮影者がディスプレイ１０５に表示された候補から操作部１０６を操作して選択できるようにしてもよい。

Ｓ４０３では、ＣＰＵ１０１は、ディスプレイ１０５に主画像として使用しているカメラの情報をメモリ１０２に保持する。ここで、主画像とは、現在ディスプレイ１０５の全体にＬＶ画像として表示している画像であって、第１の撮像画像として重畳される側の画像のことである。本実施形態では、メモリ１０２に望遠カメラ１１４ａ（第１レンズ）を使用しているという情報が保持される。

Ｓ４０４では、ＣＰＵ１０１は、操作部１０６から動画記録開始の入力を受けたか否かを判定する。入力を受けた場合にはＳ４０５に進み、そうではない場合にはＳ４１０に進む。
Ｓ４０５では、ＣＰＵ１０１は、動画記録を開始する処理を実行してＳ５００へ進む。なお、動画記録を開始する処理には、動画ファイルの新規生成、開始時刻の記録、記録媒体１０８への記録開始処理等の少なくとも１つ以上が含まれる。

Ｓ５００では、ＣＰＵ１０１は、被写体検出・表示変更処理を実行する。この処理は、図５のフローチャートを用いて後述する。

Ｓ４０６では、ＣＰＵ１０１は、動画記録中であるか否かを判定する。動画記録中である場合にはＳ４０７に進み、そうではない場合には動画配信中であると判定してＳ４１２へ進む。

Ｓ４０７では、ＣＰＵ１０１は、アウトカメラ１１４、インカメラ１１５で取得したＬＶ画像や合成画像を動画フレームとして記録媒体Ｉ／Ｆ１０７を通じて記録媒体１０８へ書き込む。ここでは、撮影者は合成画像を記録するか、ＬＶ画像を別々で記録するかを選択できるものとする。すなわち、後述するように第２の撮像画像を、第１の撮像画像に重畳させた合成画像をディスプレイ１０５へ表示する場合に、合成画像を一つの動画ファイルで記録するか、第１の撮像画像と第２の撮像画像とを別々の動画ファイルで記録するかを選択できる。ＣＰＵ１０１は、撮影者の選択に応じた記録形式でＬＶ画像や合成画像を記録する。なお、ＣＰＵ１０１は、第１の撮像画像と第２の撮像画像とを別々の動画ファイルで記録する場合には、次のような記録処理を実行する。すなわち、ＣＰＵ１０１は、後述するように第２の撮像画像を、第３の撮像画像に重畳させた合成画像をディスプレイ１０５へ表示する場合であっても、第１の撮像画像と第２の撮像画像とを継続して別々の動画ファイルで記録するものとする。

Ｓ４０８では、ＣＰＵ１０１は、動画記録終了または動画配信終了の入力を受けたか否かを判定する。入力を受けた場合にはＳ４０９へ進み、そうではない場合にはＳ４１３へ進む。

Ｓ４０９では、ＣＰＵ１０１は、動画記録処理または動画配信処理を停止する。なお、ＣＰＵ１０１は、通信Ｉ／Ｆ１１０を介したインターネット１１１への送信を停止することにより、動画配信処理を停止する。

Ｓ４１０では、ＣＰＵ１０１は、操作部１０６から動画配信開始の入力を受けたか否かを判定する。入力を受けた場合にはＳ４１１に進み、そうではない場合にはＳ４０２に戻る。なお、Ｓ４０４およびＳ４１０において、動画記録開始および動画配信開始の何れの入力を受けていない場合には、ＣＰＵ１０１は、Ｓ４０２に戻り撮影待機状態を継続してもよく、静止画の撮影と判定して静止画を撮影する処理を実行してもよい。

Ｓ４１１では、ＣＰＵ１０１は、動画配信を開始する処理を実行する。なお、動画配信を開始する処理には、通信Ｉ／Ｆ１１０を介したインターネット１１１との接続、動画ファイル送信先サーバの決定、動画ファイル送信先サーバとの認証等の少なくとも１つ以上が含まれる。また、ＣＰＵ１０１は、動画配信を開始する処理と共に、合成画像を動画フレームとして記録媒体Ｉ／Ｆ１０７を通じて記録媒体１０８へ書き込むことができる。このとき、ＣＰＵ１０１は、合成画像を一つの動画ファイルで記録する。

Ｓ４１２では、ＣＰＵ１０１は、アウトカメラ１１４、インカメラ１１５で取得したＬＶ画像や合成画像を動画フレームとして、通信Ｉ／Ｆ１１０を介してインターネット１１１へ送信する。

Ｓ４１３では、ＣＰＵ１０１は、主画像取得に使用しているカメラが第１のレンズではない第３のレンズであるか否かを判定する。第３のレンズである場合には後述する図５のＳ５０５に進み、そうではない場合にはＳ４０５、Ｓ４１１を実行した直後のＳ５００に戻る。
Ｓ４１４では、ＣＰＵ１０１は、操作部１０６からカメラ機能を終了する操作が行われたか否かを判定する。終了する操作が行われた場合にはアウトカメラ１１４、インカメラ１１５、アウトカメラ画像処理部１０４、インカメラ画像処理部１１６の駆動を停止してカメラ機能を終了する。そうではない場合にはＳ４０２に戻る。

図５は、上述したＳ５００における被写体検出・表示変更処理を示すフローチャートである。
Ｓ５０１では、ＣＰＵ１０１は、第１のレンズを介して撮影されたＬＶ画像を第１の撮像画像として取得する。本実施形態では、第１のレンズを介して撮影されたＬＶ画像は、望遠カメラ１１４ａで撮影されたＬＶ画像である。
Ｓ５０２では、ＣＰＵ１０１は、第２のレンズを介して撮影されたＬＶ画像を第２の撮像画像として取得する。本実施形態では、第２のレンズを介して撮影されたＬＶ画像は、標準インカメラ１１５ａで撮影されたＬＶ画像である。
なお、第１のレンズおよび第２のレンズは、アウトカメラ１１４、インカメラ１１５のいかなる組み合わせであってもよい。

Ｓ５０３では、ＣＰＵ１０１は、第２の撮像画像を、第１の撮像画像に領域Ｓｏの大きさで重畳させ、ＰＩＰ形式でディスプレイ１０５へ表示する。本実施形態では、ＣＰＵ１０１は、望遠カメラ画像処理部１０４ａおよび標準インカメラ画像処理部１１６ａを制御することにより第２の撮像画像を、第１の撮像画像に合成した合成画像を生成する。

Ｓ５０４では、ＣＰＵ１０１は、第２の撮像画像を重畳させる領域Ｓｏの大きさ、位置座標（ｘｏ，ｙｏ）、幅Ｗｏ、高さＨｏを計算して、メモリ１０２に保持する。
なお、Ｓ５０３、Ｓ５０４の処理は、動画記録開始前または動画配信開始前のいずれかのタイミングで実行してもよい。

Ｓ５０５では、ＣＰＵ１０１は、アウトカメラ画像処理部１０４またはインカメラ画像処理部１１６を制御することにより、第１の撮像画像に被写体が映っているかの被写体検出処理を実行する。本実施形態では、ＣＰＵ１０１は、望遠カメラ画像処理部１０４ａを制御することにより望遠カメラ１１４ａで取得したＬＶ画像に基づいて、被写体検出処理を実行する。
Ｓ５０６では、ＣＰＵ１０１は、被写体検出処理を実行した結果に基づいて、被写体を検出したか否かを判定する。被写体を検出した場合にはＳ５０７へ進み、そうではない場合にはＳ５００の処理を終了する。

Ｓ５０７では、ＣＰＵ１０１は、アウトカメラ画像処理部１０４またはインカメラ画像処理部１１６を制御することにより、第１の撮像画像に映っている被写体の検出領域Ｓの大きさ、位置座標（ｘ，ｙ）、幅Ｗ、高さＨを計算して、メモリ１０２に保持する。本実施形態では、ＣＰＵ１０１は、望遠カメラ画像処理部１０４ａを制御することにより、望遠カメラ１１４ａで取得したＬＶ画像における被写体の検出領域Ｓを計算する。また、後述するように、主画像取得レンズを第３のレンズ（本実施形態では標準カメラ１１４ｂもしくは超広角カメラ１１４ｃ）に変更した場合には、被写体の検出領域Ｓ’が、位置座標（ｘ’，ｙ’）、幅Ｗ’、高さＨ’に変化する。すなわち、本実施形態では、図４のＳ４１３からＳ５０５、Ｓ５０６、Ｓ５０７に進んだ場合には、ＣＰＵ１０１は標準カメラ画像処理部１０４ｂまたは超広角カメラ画像処理部１０４ｃを制御することにより、被写体の検出領域Ｓ’を計算する。

Ｓ５０８では、ＣＰＵ１０１は第２の撮像画像を重畳させる領域Ｓｏと被写体の検出領域Ｓとが重複しているか否かを判定する。重複している場合にはＳ５０９へ進み、そうではない場合にはＳ５００の処理を終了する。
なお、領域Ｓｏと被写体の検出領域Ｓとが重複した場合にすぐにＳ５０８へ進む場合に限られず、以下のような閾値と比較するような処理であってもよい。

第１として、重複する面積と閾値とを比較する処理である。具体的には、ＣＰＵ１０１は、第２の撮像画像を重畳させる領域Ｓｏと被写体の検出領域Ｓとが重複している面積が所定の第１の閾値以上であるか否かを判定する。所定の第１の閾値以上である場合にはＳ５０９へ進み、そうではない場合にはＳ５００の処理を終了する。
第２として、重複する時間と閾値とを比較する処理である。具体的には、ＣＰＵ１０１は、第２の撮像画像を重畳させる領域Ｓｏと被写体の検出領域Ｓとが重複している時間が所定の第２の閾値以上であるか否かを判定する。所定の第２の閾値以上である場合にはＳ５０９へ進み、そうではない場合にはＳ５００の処理を終了する。

Ｓ５０９では、ＣＰＵ１０１は、広角側のレンズのカメラに切替えが可能であるか否かを判定する。具体的には、ＣＰＵ１０１は、現在、第１の撮像画像として取得しているカメラと同一面に設けられた複数のカメラのうち、第１の撮像画像として取得しているカメラよりも広角側のレンズのカメラに切替えが可能であるか否かを判定する。例えば、現在、望遠カメラ１１４ａを使用して第１の撮像画像を取得している場合には、広角側のレンズのカメラとして、標準カメラ１１４ｂまたは超広角カメラ１１４ｃに切替えが可能であるために、広角側のレンズのカメラに切替えが可能であると判定される。一方、現在、超広角カメラ１１４ｃを使用して第１の撮像画像を取得している場合には、超広角カメラ１１４ｃよりも広角側のレンズのカメラはないため、広角側のレンズのカメラに切替えが可能ではないと判定される。なお、ここでは、第１の撮像画像がアウトカメラ１１４により撮影された画像である場合について説明したが、第１の撮像画像がインカメラ１１５により撮影された画像であっても同様に、判定することができる。
広角側のレンズのカメラに切替え可能である場合にはＳ５１０へ進み、そうではない場合にはＳ５１３へ進む。

Ｓ５１０では、ＣＰＵ１０１は、ディスプレイ１０５に主画像として使用しているカメラの情報を切替え可能として判定した、広角側のレンズのカメラの情報に変更してメモリ１０２に保持する。本実施形態では、メモリ１０２に標準カメラ１１４ｂ（第３レンズ）を使用している情報に変更して保持される。

Ｓ５１１では、ＣＰＵ１０１は、第３のレンズを介して撮影されたＬＶ画像を第３の撮像画像として取得する。本実施形態では、第３のレンズを介して撮影されたＬＶ画像は、標準カメラ１１４ｂで撮影されたＬＶ画像である。

Ｓ５１２では、ＣＰＵ１０１は、第２の撮像画像を、第３の撮像画像に領域Ｓｏの大きさで重畳させ、ＰＩＰ形式でディスプレイ１０５へ表示する。本実施形態では、ＣＰＵ１０１は、標準カメラ画像処理部１０４ｂおよび標準インカメラ画像処理部１１６ａを制御することにより第２の撮像画像を、第３の撮像画像に合成した合成画像を生成する。
なお、本実施形態では、Ｓ５０９～Ｓ５１２の一連の処理で、第３のレンズを介して撮影されたＬＶ画像が標準カメラ１１４ｂで撮影されたＬＶ画像である場合について説明した。しかしながら、超広角カメラ１１４ｃに切替え可能である場合、標準カメラ１１４ｂを経由せず超広角カメラ１１４ｃに切替えてＬＶ画像を取得してもよい。

Ｓ５１３では、ＣＰＵ１０１は、第１の撮像画像の切り取り領域の変更、つまり電子ズームによって画角を広角側に変更可能であるか否かを判定する。変更可能である場合にはＳ５１４へ進み、そうではない場合にはＳ５１６へ進む。
Ｓ５１４では、ＣＰＵ１０１は、第１の撮像画像の切り取り領域を変更、つまり電子ズーム処理を行う。本実施形態では、ＣＰＵ１０１は、望遠カメラ画像処理部１０４ａを制御して、望遠カメラ１１４ａで取得したＬＶ画像の切り取り領域の変更処理を実行する。

Ｓ５１５では、ＣＰＵ１０１は、第２の撮像画像を、切り取り領域が変更された後の第１の撮像画像に領域Ｓｏの大きさで重畳させ、ＰＩＰ形式でディスプレイ１０５へ表示する。
Ｓ５１６では、ＣＰＵ１０１は、第２の撮像画像を、第１の撮像画像に対して重畳させる位置を変更する。このとき、ＣＰＵ１０１は、第２の撮像画像を、第１の撮像画像における４隅のうち何れか一つの隅に位置を変更する。なお、ＣＰＵ１０１は、第２の撮像画像の位置を変更する処理に限られず、第２の撮像画像をディスプレイ１０５から消去して（表示せず）、第１の撮像画像または第３の撮像画像の少なくとも１つをディスプレイ１０５に表示してもよい。

図６は、本実施形態における、スマートフォンでの動画撮影・記録の画面と、画像表示設定画面を示す図である。
図６（ａ）は、スマートフォン１００のカメラ機能を撮影者が操作部１０６を用いて選択し、撮影待機状態になった際の画面例を示す図である。
ディスプレイ１０５に表示されたアイコン６０１～６０８を、タッチパネル１０６ａを用いてタッチダウンすることで、各設定や機能を発動することができる。アイコン６０１をタッチダウンすると、ＬＶ画像を取得しディスプレイ１０５に表示するために使用するアウトカメラ１１４とインカメラ１１５を切替えることができる。

アイコン６０２～６０４は、撮影機能を表している。「写真」文字アイコン６０２のタッチダウンで静止画撮影機能、「ビデオ」文字アイコン６０３のタッチダウンで動画撮影機能、「ＬＩＶＥ」文字アイコン６０４のタッチダウンで、インターネット１１１への動画配信機能を起動する。倍率アイコン６０５は、現在の倍率を表しており、タッチダウンすると現在使用しているアウトカメラ１１４またはインカメラ１１５の倍率を切替えることができる。倍率をある閾値以上に上げると望遠カメラ１１４ａに切替わり、ある閾値以下まで下げると超広角カメラ１１４ｃに切替わるようにしてもよい。インカメラでも同様に、倍率をある閾値以下まで下げると、超広角インカメラ１１５ｂに切替わるようにしてもよい。また、倍率アイコン６０５をタッチダウンしなくても、タッチパネル１０６ａ上を指でピンチインすると広角側に、ピンチアウトすると望遠側に倍率を切替わるようにしてもよい。

アイコン６０６はカメラの設定機能を表しており、タッチダウンすると、動画記録方式や動画配信先等の設定を行う画面に遷移する。アイコン６０７のタッチダウンで、画面表示形式を設定できる。詳細は図６（ｂ）で後述する。アイコン６０８をタッチダウンすると、静止画撮影機能なら静止画を撮影して画像を保存し、動画撮影機能なら動画の記録を開始・停止し、動画配信機能なら動画配信の開始・停止を行うことができる。
なお、これらの操作は、タッチパネル１０６ａに限らず、操作部１０６の少なくとも１つで行えるようにしてもよい。

図６（ｂ）は、アイコン６０７のタッチダウンで遷移する画面表示形式の設定画面を示す図である。選択肢６０９は各ＬＶ画像の表示形式を表しており、撮影者は撮影時に表示したい形式に対応する選択肢６０９をタッチダウンすることで選択できる。例えば、選択肢６０９ａは、ＰＩＰでの撮影に望遠カメラ１１４ａと標準インカメラ１１５ａを使用して表示することを表している。選択肢６０９ａを選択すると、望遠カメラ１１４ａおよび標準インカメラ１１５ａでＬＶ画像を取得し、標準インカメラ１１５ａで取得したＬＶ画像を重畳させてＰＩＰウィンドウ形式で表示する。なお、選択肢６０９については、画面表示と動画記録画像・動画配信画像と連動して設定できるようにしてもよく、画面表示はＰＩＰで動画記録画像・動画配信画像は望遠カメラ１１４ａのＬＶ画像のみといったように別々に設定できるようにしてもよい。

選択肢６０９においても、図で示す組み合わせのみならず、例えばアウトカメラ１１４を２つ用いたり、インカメラ１１５で取得したＬＶ画像上にアウトカメラ１１４で取得したＬＶ画像を重畳させたりするような組み合わせがあってもよい。

図７は、本実施形態における、被写体とＰＩＰウィンドウの表示領域の関係を示す図である。図７（ａ）は、ディスプレイ１０５に望遠カメラ１１４ａで取得したＬＶ画像７０１を表示した一例を示す図である。
標準インカメラ１１５ａで取得したＬＶ画像を、ＬＶ画像７０１に太線で示す領域Ｓｏ（図７の７０２）の大きさで重畳させるために、座標（ｘｏ，ｙｏ）、幅Ｗｏ、高さＨｏが計算される。
一方、点線で示す被写体の検出領域Ｓ（図７の７０３）は、Ｓ５０５～Ｓ５０７で、望遠カメラ画像処理部１０４ａによって被写体が検出され、被写体の大きさが計算されたものである。

図７（ａ）では一例として、被写体の位置座標（ｘ，ｙ）を左上として計算しているが、被写体の検出領域Ｓ（図７の７０３）内であれば、位置座標はいかなる位置であってもよい。また、被写体の検出領域Ｓ（図７の７０３）を四角の矩形として大きさを計算するために幅Ｗ、高さＨを計算するが、領域の矩形はこれに限定せず、被写体の大きさを計算できるものであればいかなる方法であってもよい。
ここでは、ＬＶ画像７０１上に標準インカメラ１１５ａで取得したＬＶ画像を領域Ｓｏ（図７の７０２）で重畳、つまりＰＩＰウィンドウ形式で表示した際、領域Ｓｏの一部と被写体の検出領域Ｓの一部とが重複領域７０４で重複している。

図７（ｂ）のＬＶ画像７０５は、ＣＰＵ１０１がＳ５０８で重複していることを判定し、望遠カメラ１１４ａから標準カメラ１１４ｂ、または超広角カメラ１１４ｃに切り替えて取得したものである。なお、ＬＶ画像７０５は、望遠カメラ１１４ａで取得したＬＶ画像を電子ズーム処理したものであってもよい。アウトカメラ１１４の切り替え、もしくは電子ズーム処理によって画角が変わるため、被写体の検出領域Ｓ（図７の７０６）は図７（ａ）の被写体の検出領域Ｓ（図７の７０３）よりも小さくなる。
ＬＶ画像７０５の取得のために、被写体の位置座標（ｘ’，ｙ’）、幅Ｗ’、高さＨ’が再計算される。ＣＰＵ１０１は、アウトカメラ１１４の切り替え、もしくは電子ズーム処理によって、図７（ａ）の重複領域７０４がなくなるまで、Ｓ５０８～Ｓ５１６の処理を実行する。なお、一度、重複領域７０４がなくなるように処理した後、再度、重複領域７０４が現れた場合は、再度Ｓ５０８～Ｓ５１６の処理を実行してもよい。

このように、本実施形態によれば、ＣＰＵ１０１は被写体と、重畳させる撮像画像（ＰＩＰウィンドウ）とが図７（ａ）のように重複した場合に、広角側のアウトカメラまたはインカメラに切替えることで画角を変更する。そして、被写体とＰＩＰウィンドウとが重複しないように表示することで、被写体全体が映るため被写体の視認性を向上させることができる。また、撮影者は行いたい撮影や配信の進行を中断して操作部１０６で画角を操作する必要もないため、行いたい撮影や配信の進行に集中できる。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記録媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

なお、ＣＰＵ１０１が行うものとして説明した上述の各種制御は１つのハードウェアが行ってもよいし、複数のハードウェア（例えば、複数のプロセッサーや回路）が処理を分担することで、装置全体の制御を行ってもよい。

本発明は、電子機器がスマートフォンである場合を例にして説明したが、この例に限定されず複数のレンズを有する電子機器であれば適用可能である。すなわち、本発明はパーソナルコンピュータやＰＤＡ、デジタルカメラや携帯型の画像ビューワ、デジタルフォトフレーム、音楽プレーヤ、ゲーム機、電子ブックリーダ等に適用可能である。

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明は特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。

１００：スマートフォン（電子機器） １０１：ＣＰＵ １０５：ディスプレイ １１４：アウトカメラ １１４ａ：望遠カメラ １１４ｂ：標準カメラ １１４ｃ：超広角カメラ １１５：インカメラ １１５ａ：標準インカメラ １１５ｂ：超広角インカメラ

Claims (14)

1. 複数のレンズを有する電子機器であって、
   複数のレンズのうち第１のレンズを介して撮影された第１の撮像画像を取得する第１の取得手段と、
   前記第１のレンズとは異なる第２のレンズを介して撮影された第２の撮像画像を取得する第２の取得手段と、
   前記第２の撮像画像を前記第１の撮像画像に重畳させた合成画像を生成する第１の生成手段と、
   前記第１の撮像画像から被写体を検出する検出手段と、
   前記第１の生成手段により生成された合成画像において、前記検出手段により検出された被写体の領域が前記第２の撮像画像が重畳されている領域と重複する場合に、前記第１の撮像画像よりも広角に撮影された第３の撮像画像を取得する第３の取得手段と、
   前記第２の撮像画像を前記第３の撮像画像に重畳させた合成画像を生成する第２の生成手段と、を有することを特徴とする電子機器。
2. 前記第３の取得手段は、
   前記第１のレンズとは異なる第３のレンズを介して撮影された前記第３の撮像画像を取得することを特徴とする請求項１に記載の電子機器。
3. 前記第１のレンズおよび前記第３のレンズは、該電子機器の第１の面に設けられ、
   前記第２のレンズは、前記第１の面とは異なる第２の面に設けられることを特徴とする請求項１または２に記載の電子機器。
4. 前記第３の取得手段は、
   前記第１の撮像画像の一部を切り出すことにより前記第３の撮像画像を取得することを特徴とする請求項１に記載の電子機器。
5. 画像を記録媒体に記録する記録手段を有し、
   前記記録手段は、
   前記第２の撮像画像を前記第１の撮像画像に重畳させた合成画像が生成されているか、前記第２の撮像画像を前記第３の撮像画像に重畳させた合成画像が生成されているかに関わらず、前記第１の撮像画像を記録することを特徴とする請求項１ないし４の何れか１項に記載の電子機器。
6. 画像を外部へ出力する出力手段を有し、
   前記出力手段は、
   前記第１の生成手段または前記第２の生成手段により生成された合成画像をネットワークを介して出力することを特徴とする請求項１ないし４の何れか１項に記載の電子機器。
7. 画像を記録媒体に記録する記録手段を有し、
   前記記録手段は、
   前記第１の生成手段または前記第２の生成手段により生成された合成画像を記録することを特徴とする請求項６に記載の電子機器。
8. 前記第３の取得手段は、
   前記被写体の領域と、前記第２の撮像画像が重畳されている領域との重複する面積が所定の第１の閾値以上である場合に、前記第３の撮像画像を取得することを特徴とする請求項１ないし７の何れか１項に記載の電子機器。
9. 前記第３の取得手段は、
   前記被写体の領域と、前記第２の撮像画像が重畳されている領域との重複する時間が所定の第２の閾値以上である場合に、前記第３の撮像画像を取得することを特徴とする請求項１ないし７の何れか１項に記載の電子機器。
10. 前記第３の取得手段により前記第３の撮像画像を取得できない場合に、前記第２の撮像画像が重畳されている領域を移動させて表示する制御手段を有することを特徴とする請求項１ないし９の何れか１項に記載の電子機器。
11. 前記第３の取得手段により前記第３の撮像画像を取得できない場合に、前記第１の撮像画像または前記第３の撮像画像のみを表示する制御手段を有することを特徴とする請求項１ないし９の何れか１項に記載の電子機器。
12. 複数のレンズを有する電子機器の制御方法であって、
    複数のレンズのうち第１のレンズを介して撮影された第１の撮像画像を取得する第１の取得ステップと、
    前記第１のレンズとは異なる第２のレンズを介して撮影された第２の撮像画像を取得する第２の取得ステップと、
    前記第２の撮像画像を前記第１の撮像画像に重畳させた合成画像を生成する第１の生成ステップと、
    前記第１の撮像画像から被写体を検出する検出ステップと、
    前記第１の生成ステップにより生成された合成画像において、前記検出ステップにより検出された被写体の領域が前記第２の撮像画像が重畳されている領域と重複する場合に、前記第１の撮像画像よりも広角に撮影された第３の撮像画像を取得する第３の取得ステップと、
    前記第２の撮像画像を前記第３の撮像画像に重畳させた合成画像を生成する第２の生成ステップと、を有することを特徴とする電子機器の制御方法。
13. コンピュータを、請求項１ないし１１の何れか１項に記載された電子機器の各手段として機能させるためのプログラム。
14. コンピュータを、請求項１ないし１１の何れか１項に記載された電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記録媒体。

Images