JP2022082127A - 撮像システム及び表示装置とその制御方法 - Google Patents

Abstract

【課題】被写体をフレーム内に収める作業と撮像画像の確認作業を容易に行うことができる撮像システムを提供する。【解決手段】スマートフォン１００とスマートグラス１１０を備える撮像システムにおいて、スマートフォン１００はライブビュー画像を生成してスマートグラス１１０へ送信すると共にスマートフォン１００での操作情報を送信する。スマートグラス１１０の画像生成部５０２は、受信したライブビュー画像に基づいて表示部４０２が表示する表示画像を生成し、表示制御部５０３が表示画像を表示部４０２に表示させる。画像生成部５０２は、スマートフォン１００から受信した操作情報に応じて、生成する表示画像の透明度、サイズ、表示位置の少なくとも１つを変更する。【選択図】図７

Description

本発明は、撮像システム及び表示装置とその制御方法に関し、特に頭部装着型の表示装置を装着したユーザが、表示装置を通して実風景を視認すると共に撮像装置により取得される撮像画像を視認することが可能な撮像システムに関する。

目線よりも高い位置にカメラを構えて撮像を行うハイアングル撮影では、動きの速い被写体を撮像することが容易ではない。その理由の１つは、カメラに備えられたバリアングル式の表示部に表示されるライブビュー画像をユーザ（撮影者）が見る視線と、被写体をユーザが見る視線とが離れていることである。つまり、ユーザはライブビュー画像と被写体を同じ視線上で一緒に確認することができず、その結果、被写体をフレーム内に収める作業が難しくなってしまう。

この問題を解決する１つの手法として、近年普及が進んでいる仮想現実グラス（以下では「ＡＲグラス」という）を活用する手法が考えられる。例えば、ＡＲグラスの表示部にカメラのライブビュー画像を表示させ、被写体を見る視線と同じ軸線上でライブビュー画像を確認しながらカメラでの撮像を行うことができるようにする手法が考えられる。

ＡＲグラスへのライブビュー画像の表示手法には、例えば、特許文献１に記載されているような、透過型ディスプレイに付加情報を重畳して表示する技術を適用することができる。例えば、透過型ディスプレイとしてのＡＲグラスに半透明化させたライブビュー画像を表示する。これにより、ユーザは、実風景の被写体をライブビュー画像に透かして見ることが可能になることで、実風景での被写体とライブビュー画像内の被写体とを同一視線上で確認することができる。

特開２０１５－９１０５５号公報

しかしながら、ライブビュー画像を半透明化させてＡＲグラスに表示する際に、ライブビュー画像の透明度が高いと、ユーザにとってはライブビュー画像と実風景画像の区別が容易でなくなる事態が想定される。この場合、例えば、フレーム（撮像画角）の外郭がわかり難くなってフレームに被写体が意図したように収まっているか等、問題なく撮像することができているか否かを判断が難しくなる。一方、ライブビュー画像の透明度が低いと、ライブビュー画像の背後に位置する実風景が隠れてしまう。この場合には、結果的に被写体を実風景では視認することが容易でなくなるため、被写体をフレーム内に収める作業が難しくなる事態が生じてしまうことが想定される。

本発明は、被写体をフレーム内に収める作業と撮像画像の確認作業を容易に行うことができる撮像システムを提供することを目的とする。

本発明に係る撮像システムは、撮像装置と頭部装着型の表示装置を有する撮像システムであって、前記撮像装置は、ライブビュー画像を生成する第１の画像生成手段と、前記ライブビュー画像を前記表示装置へ送信する画像送信手段と、撮像処理を操作する操作手段と、前記操作手段による操作の操作情報を送信する情報送信手段と、を備え、前記表示装置は、表示部と、前記撮像装置から前記ライブビュー画像と前記操作情報を受信する受信手段と、前記受信手段が受信したライブビュー画像に基づいて前記表示部が表示する表示画像を生成する第２の画像生成手段と、前記第２の画像生成手段が生成した表示画像を前記表示部に表示させる表示制御手段と、を備え、前記第２の画像生成手段は、前記受信手段が受信した操作情報に応じて前記表示部に表示する表示画像を変更することを特徴とする。

本発明によれば、被写体をフレーム内に収める作業と撮像画像の確認作業を容易に行うことができる撮像システムを実現することができる。

実施形態に係る撮像システムの概略構成を示す図である。 撮像システムを構成するスマートフォンの正面図及び背面図である。 スマートフォンの機能ブロックを説明する図である。 撮像システムを構成するスマートグラスの外観を示す斜視図である。 スマートグラスの機能ブロックを説明する図である。 スマートフォンが行う第１実施形態に係る撮像処理のフローチャートである。 スマートグラスが行う第１実施形態に係る撮像処理のフローチャートである。 第１実施形態に係る撮像処理の際にスマートグラスに表示される画像の例を示す図である。 スマートグラスが行う第２実施形態に係る撮像処理のフローチャートである。 第２実施形態に係る撮像処理の際にスマートグラスに表示される画像の例を示す図である。

以下、本発明の実施形態について、添付図面を参照して詳細に説明する。

図１は、本発明の実施形態に係る撮像システムの概略構成を示す図である。撮像システムは、スマートフォン１００とスマートグラス１１０を有し、スマートフォン１００とスマートグラス１１０が無線通信経路１２０を通じて双方向に通信可能に接続されることにより構成されている。

スマートフォン１００は、撮像装置の一例である。撮像システムを構成する撮像装置は、スマートフォン１００に限られず、デジタルカメラやビデオカメラ、撮像機能を搭載した無人航空機（ドローン）等の撮像機能を有する別の装置であってもよい。また、スマートグラス１１０は、頭部装着型表示装置の一例である。撮像システムを構成する頭部装着型表示装置は、スマートグラス１１０のような眼鏡型に限られず、頭部全体に被るヘルメット型の形状の表示装置等の、眼鏡型の形状以外の画像表示機能を有する表示装置であってもよい。

無線通信経路１２０は、スマートフォン１００とスマートグラス１１０との間で通信を行うための通信経路である。無線通信経路１２０における無線通信は、Ｂｌｕｅｔｏｏｔｈ（登録商標）による直接通信や、アクセスポイント装置（不図示）を介した無線ＬＡＮ通信等を用いることができる。本実施形態に係る撮像システムにおいて、スマートフォン１００からスマートグラス１１０へ送信される情報には、スマートフォン１００で撮像された画像（撮影画像）や撮像中のライブビュー画像等の画像情報がある。また、スマートフォン１００からスマートグラス１１０へ送信される情報としては、スマートフォン１００で撮像操作を行った際の操作情報（画像データの記憶指示や撮影の準備指示（ピント調整指示、露出調整指示、ホワイトバランス調整指示等））が挙げられる。なお、本実施形態での説明では、スマートフォン１００からスマートグラス１１０へ送信される画像を、撮影画像かライブビュー画像かを区別しない場合に、撮像画像と称呼する。

次に、スマートフォン１００の構成について説明する。図２（ａ）はスマートフォン１００の正面図であり、図２（ｂ）はスマートフォン１００の背面図である。スマートフォン１００は、ハウジング２００を有する。ハウジング２００は、正面側のフロントフェイス２０１、背面側のバックフェイス２０２、及び、フロントフェイス２０１とバックフェイス２０２とを接続するサイドフェイス２０３から構成される。

フロントフェイス２０１には、タッチスクリーンディスプレイ２１０、ボタン２２１、照度センサ２３１、近接センサ２３２、レシーバ２３３、マイク２３４及びインカメラ２４２が設けられている。バックフェイス２０２には、スピーカ２４１及びアウトカメラ２４３が設けられている。サイドフェイス２０３には、ボタン２２２，２２３，２２４及びコネクタ２４４が設けられている。

タッチスクリーンディスプレイ２１０は、ディスプレイ２１０Ａ及びタッチスクリーン２１０Ｂから構成される。ディスプレイ２１０Ａ及びタッチスクリーン２１０Ｂのそれぞれの形状は、本実施形態では略長方形状であるが、これに限定されるものではなく、例えば、正方形や円形等のどのような形状も取り得る。また、ディスプレイ２１０Ａとタッチスクリーン２１０Ｂは、タッチスクリーンディスプレイ２１０では重ねて配置されているが、これに限られず、例えば、並べて配置されてもよいし離して配置されていてもよい。更に、ディスプレイ２１０Ａとタッチスクリーン２１０Ｂは、それらの表面と直交する方向から見た場合に、実質的に全領域で重なるように配置されているが、ディスプレイ２１０Ａとタッチスクリーン２１０Ｂの重ね方はこれに限定されない。例えば、ディスプレイ２１０Ａとタッチスクリーン２１０Ｂは、一部で重ならないように配置されてもよい。

ディスプレイ２１０Ａは、液晶ディスプレイ、有機ＥＬディスプレイ又は無機ＥＬディスプレイ等の表示デバイスである。ディスプレイ２１０Ａには、文字や画像、記号、図形等が表示される。タッチスクリーン２１０Ｂは、タッチスクリーン２１０Ｂに対する指やペン、スタイラスペン等（以下「接触オブジェクト」という）の接触を検出し、その際に接触オブジェクトの接触位置を検出する。タッチスクリーン２１０Ｂへの接触オブジェクトの接触の有無及び接触位置の検出には、静電容量方式抵抗膜方式、表面弾性波方式（超音波方式）、赤外線方式、電磁誘導方式及び荷重検出方式等の周知の方式から選択された任意の方式を用いることができる。以下の説明では、便宜上、ユーザはタッチスクリーン２１０Ｂに対して自身の指を接触させて、スマートフォン１００の各種の操作を行うものとする。

図３は、スマートフォン１００の機能ブロックを説明する図である。スマートフォン１００は、図２に示したように、タッチスクリーンディスプレイ２１０、照度センサ２３１、近接センサ２３２、レシーバ２３３、マイク２３４、スピーカ２４１、インカメラ２４２、アウトカメラ２４３及びコネクタ２４４を備える。また、スマートフォン１００は、コントローラ３００、ストレージ３１０、ボタン３２０、通信ユニット３４１、加速度センサ３３１、方位センサ３３２及びジャイロスコープ３３３を備える。なお、図３のブロック図に示されるスマートフォン１００の構成要素について、図２を参照して説明済みのものについては、ここでの説明を省略する。

コントローラ３００は、スマートフォン１００に対する操作（以下「ジェスチャ」という）を検出する。具体的には、コントローラ３００は、タッチスクリーン２１０Ｂと協働して、タッチスクリーン２１０Ｂ（タッチスクリーンディスプレイ２１０）に対するジェスチャを検出する。ボタン３２０は、図２に示したボタン２２１～２２４を含む。スマートフォン１００のユーザは、ボタン３２０を操作することにより、ボタン３２０に割り当てられた各種の命令（コマンド）をコントローラ３００へ指示することができる。コントローラ３００は、ボタン３２０と協働して、ボタン３２０に対する操作を検出する。ボタン３２０に対する操作には、クリック、ダブルクリック、トリプルクリック、プッシュ及びマルチプッシュ等があるが、これらに限定されない。ボタン２２１は、例えば、ホームボタンである。ボタン２２２は、例えば、スマートフォン１００のパワーオン／オフボタンである。ボタン２２３，２２４は、例えば、音量ボタンである。

照度センサ２３１は、スマートフォン１００の周囲光の照度（光の強さ、明るさ又は輝度）を検出する。照度センサ２３１により検出された周囲光の照度は、例えば、ディスプレイ２１０Ａの輝度の調整に用いられる。近接センサ２３２は、スマートフォン１００に近隣する物体の存在を、磁界の変化又は超音波の反射波の帰還時間の変化等に基づいて、非接触で検出する。例えば、近接センサ２３２は、タッチスクリーンディスプレイ２１０がユーザの顔に近付けられたことを検出する。なお、照度センサ２３１と近接センサ２３２は、１つのセンサとして構成されてもよい。また、照度センサ２３１は、スマートフォン１００に近隣する物体の存在を検出すること、つまり、照度センサ２３１を近接センサとしても用いること、も可能である。

通信ユニット３４１は、各種の無線通信規格に準拠して、無線通信経路１２０を通じて外部機器との無線通信を行う。スマートグラス１１０は、スマートフォン１００の通信ユニット３４１と無線通信を行う外部機器の１つである。本実施形態では、後述するように、通信ユニット３４１は、スマートフォン１００で生成されるライブビュー画像とスマートフォン１００での操作情報をスマートグラス１１０へ送信する画像送信手段及び情報送信手段として機能する。

通信ユニット３４１によってサポートされる通信方式には、３Ｇ、４Ｇ，５Ｇ等のセルラーフォンの通信規格があり、代表的な通信規格として、ＬＴＥやＷ－ＣＤＭＡ、ＣＤＭＡ２０００、ＰＤＣ、ＰＨＳ等が挙げられる。また、別の無線通信規格として、ＷｉＭＡＸ（登録商標）、ＩＥＥＥ８０２．１１、ＩｒＤＡ、ＮＦＣ等が挙げられる。通信ユニット３４１は、上述した通信規格の１つ又は複数をサポートしてもよい。

レシーバ２３３とスピーカ２４１は、コントローラ３００から送信される音信号を音として出力する音声出力手段である。レシーバ２３３は、例えば、通話時に相手の声を出力する。スピーカ２４１は、着信音や音楽等を出力する。レシーバ２３３とスピーカ２４１の一方が他方の機能を兼ねた構成としてもよい。マイク２３４は、利用者の音声や環境音（スマートフォン１００の周囲の音）等を音信号へ変換してコントローラ３００へ送信するための音声入力部である。

ストレージ３１０は、プログラム及びデータを記憶する記憶部である。ストレージ３１０は、コントローラ３００の処理結果を一時的に記憶する作業領域としても利用される。ストレージ３１０は、半導体記憶媒体や磁気記憶媒体等の任意の非一過的な記憶媒体を含んでいてもよいし、複数類の記憶媒体を含んでいてもよい。また、ストレージ３１０は、メモリカードや光ディスク、光磁気ディスク等の可搬性のある記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでいてもよい。更に、ストレージ３１０はＲＡＭ等の一時的な記憶領域として利用される記憶装置を含んでいてもよい。

ストレージ３１０に記憶されるプログラムには、フォアグランド又はバックグランドで実行されるアプリケーションと、アプリケーションの動作を支援する制御プログラムとが含まれる。アプリケーションは、例えば、ディスプレイ２１０Ａに画像等を表示させ、タッチスクリーン２１０Ｂを介して検出されるジェスチャに応じた処理をコントローラ３００に実行させる。制御プログラムは、例えば、ＯＳである。

アプリケーション及び制御プログラムは、通信ユニット３４１による無線通信又は非一過的な記憶媒体を介してストレージ３１０にインストールされてもよい。また、アプリケーション及び制御プログラムの全部又は一部は、ストレージ３１０に含まれる読取装置で読取可能な非一過的な記憶媒体に記憶されていてもよし、コネクタ２４４に接続される読取装置が読取可能な非一過的な記憶媒体に記憶されていてもよい。非一過的な記憶媒体としては、例えば、光ディスクや光磁気ディスク、磁気記憶媒体、メモリカード、ソリッドステート記憶媒体が挙げられるが、これらに限定されるものではない。ストレージ３１０は、例えば、制御プログラム３１１、顔認識プログラム３１２、コンタクトデータ３１３及び設定データ３１４を記憶する。

制御プログラム３１１は、スマートフォン１００を稼働させるための各種制御に関する機能を提供する。制御プログラム３１１は、例えば、通信ユニット３４１、レシーバ２３３及びマイク２３４等を制御することによって通話（電話機能）を実現させる。制御プログラム３１１が提供する機能には、タッチスクリーン２１０Ｂを介して検出されたジェスチャに応じて、ディスプレイ２１０Ａに表示されている情報を変更する制御を行う機能等が含まれる。なお、制御プログラム３１１が提供する機能は、音質調整プログラム及び電話アプリケーション等の他のプログラムが提供する機能と組み合わせて利用されることがある。

顔認識プログラム３１２は、インカメラ２４２とアウトカメラ２４３により撮像されるライブビュー画像に含まれる顔画像を抽出する機能や、抽出した顔画像から顔を認識する機能等を提供する。顔認識プログラム３１２は、例えば、撮像された人物が所有者であるかを識別するために用いられる。顔認識プログラム３１２の顔認識機能は、例えば、抽出された顔画像が示す顔の特徴と、登録されている所有者の顔の特徴とのパターンマッチングを行うことにより実現される。撮像された画像に複数の顔画像が含まれる場合、顔認識機能は、所有者とは異なる人物の顔画像を含んでいるか否かを判別する機能を含む。

コンタクトデータ３１３は、スマートフォン１００の利用者が他の人物と連絡を取るための情報や緊急時の所定登録先の情報を含む。所定登録先の情報は、例えば、メールアドレスや電話番号等を含む。なお、コンタクトデータ３１３には、画像データ、住所、勤務先、生年月日等の各種の個人情報が含まれていてもよい。設定データ３１４は、スマートフォン１００の動作に関する各種の設定に関する情報を含む。

コントローラ３００は、例えば、ＣＰＵやＳｏＣ、ＭＣＵ、ＦＰＧＡ等の演算処理装置であるが、これらに限定されるものではなく、また、複数の演算処理装置を含んでいてもよい。コントローラ３００は、スマートフォン１００の動作を統括的に制御して各種の機能を実現する。具体的には、コントローラ３００は、ストレージ３１０に記憶されたデータを必要に応じて参照しながら、ストレージ３１０に記憶されているプログラムに含まれる命令を実行し、データ及び命令に応じて所定の機能部を制御して動作させる。ここで、機能部は、例えば、ディスプレイ２１０Ａ、通信ユニット３４１、レシーバ２３３及びスピーカ２４１を含むが、これらに限定されるものではない。

また、コントローラ３００は、適宜、検出部の検出結果に応じて制御を変更する。検出部には、タッチスクリーン２１０Ｂ、ボタン３２０、照度センサ２３１、近接センサ２３２、マイク２３４、インカメラ２４２、アウトカメラ２４３、加速度センサ３３１、方位センサ３３２及びジャイロスコープ３３３が含まれるが、これらに限定されない。コントローラ３００は、例えば、制御プログラム３１１を実行することにより、タッチスクリーン２１０Ｂを介して検出されたジェスチャに応じて、ディスプレイ２１０Ａに表示されている情報を変更する等の制御も行う。

インカメラ２４２は、フロントフェイス２０１に面している物体を撮像するカメラである。アウトカメラ２４３は、バックフェイス２０２に面している物体を撮像するカメラである。コネクタ２４４は、外部装置を接続するための端子であり、例えば、ＵＳＢ端子やイヤホンマイクコネクタ等の汎用的な端子であってもよいし、Ｄｏｃｋコネクタ等の専用端子であってもよい。コネクタ２４４に接続される外部装置としては、外部ストレージやスピーカ、通信装置が挙げられるが、これらに限定されるものではない。

加速度センサ３３１は、スマートフォン１００に作用する加速度の向きと大きさを検出する。方位センサ３３２は、地磁気の向きを検出する。ジャイロスコープ３３３は、スマートフォン１００の角度及び角速度を検出する。加速度センサ３３１、方位センサ３３２及びジャイロスコープ３３３の検出結果は、スマートフォン１００の位置及び姿勢の変化を検出するために、組み合わせて利用される。

次に、スマートグラス１１０の構成について説明する。図４は、スマートグラス１１０の外観斜視図である。スマートグラス１１０は、フレーム４０１、右表示部４０２Ｒ、左表示部４０２Ｌ、右画像生成ユニット４０３Ｒ、左画像生成ユニット４０３Ｌ及び無線通信部４１０を備える。なお、以下の説明では、右表示部４０２Ｒと左表示部４０２Ｌとを合わせて「表示部４０２」と称呼し、右画像生成ユニット４０３Ｒと左画像生成ユニット４０３Ｌとを合わせて「画像生成ユニット４０３」と称呼する。また、スマートグラス１１０についての「上下左右」は、ユーザがスマートグラス１１０を装着した状態の、ユーザにとっての上下左右であるとする。よって、ユーザがスマートグラス１１０を装着すると、右表示部４０２Ｒはユーザの右目の眼前に、左表示部４０２Ｌはユーザの左目の眼前にそれぞれ位置するようになる。

スマートグラス１１０は、眼鏡型のヘッドマウントディスプレイ（ＨＭＤ）として構成されている。つまり、スマートグラス１１０は、ユーザが表示部４０２に表示された画像（以下「表示画像」という）を視認すると同時に外景を直接視認することができる光学透過型ＨＭＤとして構成されている。

フレーム４０１は、眼鏡のレンズに相当する部分である表示部４０２の縁を支持する部分と、眼鏡のテンプルに相当する部分を含む。なお、スマートグラス１１０では、右画像生成ユニット４０３Ｒと左画像生成ユニット４０３Ｌも、フレーム４０１の一部を構成している。

表示部４０２は、フレーム４０１に支持されてユーザの眼前に配置されており、画像生成ユニット４０３によって生成された画像を表示する。表示部４０２は、透明な材料で形成されており、表示画像が表示されていない状態ではユーザの視界を遮らない。なお、表示部４０２の透明度は、後述する表示画像の表示制御での効果が得られる範囲で、例えばサングラスのように意図的に透明度を下げる等して、任意の透明度に設定することができる。ユーザがスマートグラス１１０を装着した状態で、右表示部４０２Ｒはユーザの右眼の眼前に配置され、左表示部４０２Ｌはユーザの左眼の眼前に配置される。なお、表示部４０２は、ユーザの両眼の眼前に配置される一体型のディスプレイであってもよい。

また、表示部４０２は、眼鏡のレンズに相当する部分ではなく、眼鏡のテンプルに相当する部分に配置されていてもよい。その場合、眼鏡のレンズに相当する部分には、ハーフミラー等が配置される。さらに、本実施形態のようなディスプレイの像をユーザの眼の網膜に結像するタイプの表示部ではなく、網膜を走査することにより網膜に像を描画するタイプの表示部であってもよい。

画像生成ユニット４０３は、フレーム４０１に支持され、表示部４０２に表示される画像を生成して表示部４０２に供給し、表示部４０２に表示させる。画像生成ユニット４０３は、無線通信部４１０を介してスマートフォン１００と通信可能に接続され、スマートフォン１００によって撮像された画像を取得する。なお、右画像生成ユニット４０３Ｒは、右表示部４０２Ｒに表示される画像を生成して右表示部４０２Ｒに供給し、左画像生成ユニット４０３Ｌは、左表示部４０２Ｌに表示される画像を生成して左表示部４０２Ｌに供給する。なお、画像生成ユニット４０３は、本実施形態のように左右（２つ）に分ける必要はなく、一体的に構成されて配置されていてもよい。

無線通信部４１０は、スマートフォン１００に対する電波の送出を行うアンテナ（右画像生成ユニット４０３Ｒの上面からの突出部）を含み、スマートフォン１００で撮像された画像や各種の操作情報等のデータを受信する。なお、無線通信部４１０のアンテナは、フレーム４０１又は画像生成ユニット４０３に内蔵されて配置されていてもよい。

図５は、スマートグラス１１０の機能ブロックを説明する図である。画像生成ユニット４０３は、画像取得部５０１、画像生成部５０２及び表示制御部５０３を有する。画像取得部５０１、画像生成部５０２及び表示制御部５０３は互いにデータの授受可能に接続されており、表示制御部５０３は表示部４０２（右表示部４０２Ｒ、左表示部４０２Ｌ）に接続されている。

なお、画像生成ユニット４０３は、ＣＰＵ、ＲＯＭ、ＲＡＭ等で構成されており、ＣＰＵがＲＯＭに記憶されている所定のプログラムを実行することにより、画像取得部５０１、画像生成部５０２及び表示制御部５０３の各機能が実現される。つまり、スマートグラス１１０では、画像生成ユニット４０３がスマートグラス１１０での全体的な制御を行うコントローラの役割を担う。

画像取得部５０１は、表示部４０２に表示される表示画像の元となる画像（元画像データ）を無線通信部４１０から取得する。元画像は、スマートフォン１００のアプリケーションによって生成された画像や他の機器から取得した画像である。元画像には、例えば、スマートフォン１００によって撮像された撮像画像に基づいて生成された表示情報が含まれる。

画像生成部５０２は、元画像から表示画像を生成する。表示画像は、表示画像が表示部４０２に表示された際に画像が表示されない領域である非表示領域と、表示画像が表示部４０２に表示された際に画像が表示される領域である表示領域とを含む。画像生成部５０２は、元画像に画像マスクを含むマスクレイヤーを重畳させることによって、画像マスクに相当する元画像の領域を非表示領域とし、画像マスクに相当しない元画像の領域を表示領域とすることができる。

画像生成部５０２はまた、元画像に対して画像加工処理を行うことができる。画像加工処理としては、元画像の透明度を変更する処理や、元画像の画像サイズを変更する処理等が挙げられるが、これらに限られない。透明度の変更処理には、元画像の明度や輝度レベルを変更する処理や、背景が透かして表示されるように特定の画素を間引く処理等の既知の透明度変更処理を用いることができる。画像生成部５０２は、生成した表示画像を表示制御部５０３に供給する。

表示制御部５０３は、表示画像を表示部４０２に供給し、表示させる。表示部４０２は透過型ディスプレイであるので、表示画像において画像マスクに相当する非表示領域には画像は表示されず、よって、ユーザは非表示領域を通じて外界を直接視認することができる。一方、表示領域には元画像が含まれるため、ユーザは元画像に含まれる表示情報を視認することができる。つまり、ユーザは、非表示領域を介して外界を視認すると同時に、表示部４０２に表示される表示情報を確認することができる。

＜第１実施形態＞
次に、撮像システムでの第１実施形態に係る撮像処理フローについて説明する。図６は、撮像システムによる撮像時にスマートフォン１００が行う第１実施形態に係る処理のフローチャートである。図７は、撮像システムによる撮像時にスマートグラス１１０が行う第１実施形態に係る処理のフローチャートである。

図６のフローチャートにＳ番号で示す各処理（ステップ）は、コントローラ３００がストレージ３１０に格納された所定のプログラムを実行して、スマートフォン１００の各部の動作を統括的に制御することにより実現される。また、図７のフローチャートにＳ番号で示す各処理は、画像生成ユニット４０３により実行される。つまり、画像生成ユニット４０３において、ＣＰＵがＲＯＭに格納された所定のプログラムを実行して、スマートグラス１１０の各部の動作を統括的に制御することにより実現される。

なお、図６及び図７のフローチャートは、静止画の撮像処理、動画の撮像処理、及び、静止画と動画の両方の撮像処理の流れを表している。また、図６及び図７のフローチャートは、スマートフォン１００とスマートグラス１１０との間のペアリング処理が完了して、スマートフォン１００側又はスマートグラス１１０側から撮像処理の開始指示が行われた後の処理について示されている。

先ず、スマートフォン１００での処理（図６）について説明する。Ｓ６０１でコントローラ３００は、インカメラ２４２又はアウトカメラ２４３により被写体となる物体や人物等の撮像画像（映像）を取得し、撮像中のライブビュー画像を生成する。Ｓ６０２でコントローラは、生成したライブビュー画像を通信ユニット３４１を介してスマートグラス１１０へ送信する。なお、Ｓ６０２の処理によりスマートフォン１００からスマートグラス１１０へ送信されたライブビュー画像は、スマートグラス１１０でのＳ７０３の処理の判定基準となる。

その後、Ｓ６０３でコントローラ３００は、タッチスクリーンディスプレイ２１０（タッチスクリーン２１０Ｂ）に対するタッチ操作があったか否かを判定する。なお、ここでのタッチ操作は、具体的には、ピントを合わせる被写体に対するタッチオン操作である。コントローラ３００は、タッチ操作があったと判定した場合（Ｓ６０３でＹＥＳ）、処理をＳ６０４へ進め、タッチ操作はないと判定した場合（Ｓ６０３でＮＯ）、処理をＳ６０６へ進める。

なお、ライブビュー画像を取得する際には、スマートフォン１００が備えるオートフォーカス機能により、コントローラ３００が判断した主被写体に対してピントを合わせる処理が連続して行われる。Ｓ６０３でのタッチ操作は、主被写体に対するものである場合もあれば、主被写体ではない別の被写体に対するものである場合もある。

Ｓ６０４でコントローラ３００は、タッチ操作があったタッチスクリーンディスプレイ２１０の位置に表示されている被写体に対してピント調整を行う。ピント調整は、コントローラ３００が、使用中のカメラ（インカメラ２４２又はアウトカメラ２４３）のレンズの絞りや焦点距離等を調整して、被写界深度を調整する等の既知の制御を行うことによって行われる。Ｓ６０５でコントローラ３００は、Ｓ６０４でのピント調整が行われたことを示す操作情報をスマートグラス１１０へ送信する。なお、Ｓ６０５の処理によってスマートグラス１１０へ送信された操作情報は、スマートグラス１１０においてＳ７０４及びそれ以降の処理に必要に応じて用いられる。

Ｓ６０６でコントローラ３００は、記録指示ボタンが押下されたか否かを判定する。ここでは、記録指示ボタンの機能はボタン２２１に割り当てられているものとする。なお、Ｓ６０３からＳ６０６へ直接に処理が進められる場合とは、ピント調整を行わずに被写体に対するインカメラ２４２又はアウトカメラ２４３の位置や向きを調整して、被写体をフレーム内に収める作業が引き続き行われる場合である。コントローラ３００は、記録指示ボタンが押下されたと判定した場合（Ｓ６０６でＹＥＳ）、処理をＳ６０７へ進め、記録指示ボタンは押下されていないと判定した場合（Ｓ６０６でＮＯ）、処理をＳ６０９へ進める。

Ｓ６０７でコントローラ３００は、スマートフォン１００へ送信しているライブビュー画像の記憶処理を行う。ライブビュー画像の記憶処理は、スマートフォン１００へ送信中のライブビュー画像データをストレージ３１０のデータ記憶領域に格納することにより行われる。静止画を記憶する場合には、ボタン２２１が押下されたタイミングのフレーム画像のみが記憶される。動画を記憶する場合には、記録指示ボタンが押下されたタイミングから撮像終了指示の操作が行われるタイミングまでの期間のフレーム画像が記憶される。

Ｓ６０８でコントローラ３００は、Ｓ６０７で記憶した撮影画像をスマートグラス１１０へ送信する。なお、Ｓ６０８の処理によってスマートグラス１１０へ送信された撮影画像は、スマートグラス１１０においてＳ７０４及びそれ以降の処理に用いられる。

Ｓ６０９でコントローラ３００は、撮像終了指示を受け付けたか否かを判定する。撮像処理の終了指示は、例えば、スマートフォン１００のボタン３２０が押下されるか、又は、タッチスクリーンディスプレイ２１０に表示されるボタン画面にタッチする等の操作によって行われるが、これらに限られない。コントローラ３００は、撮像終了指示を受け付けていないと判定した場合（Ｓ６０９でＮＯ）、処理をＳ６０１へ戻す。つまり、引き続き、被写体に対するインカメラ２４２又はアウトカメラ２４３の位置や向きを調整して、被写体をフレーム内に収める作業が続けられる。一方、コントローラ３００は、撮像終了指示を受け付けたと判定した場合（Ｓ６０９でＹＥＳ）、処理をＳ６１０へ進める。

Ｓ６１０でコントローラ３００は、撮像終了の操作が行われたことを示す操作情報をスマートグラス１１０へ送信し、その後、本処理を終了させる。なお、Ｓ６１０の処理によってスマートグラス１１０へ送信された操作情報は、スマートグラス１１０においてＳ７０９の処理に用いられる。

次に、スマートグラス１１０での処理（図７）について説明する。Ｓ７０１で画像生成ユニット４０３は、スマートフォン１００からライブビュー画像を受信することが可能な状態で待機する。Ｓ７０２で画像生成ユニット４０３は、スマートフォン１００からライブビュー画像を受信したか否かを判定する。画像生成ユニット４０３は、ライブビュー画像を受信していないと判定した場合（Ｓ７０２でＮＯ）、処理をＳ７０１へ戻し、ライブビュー画像を受信したと判定した場合（Ｓ７０２でＹＥＳ）、処理をＳ７０３へ進める。

Ｓ７０３で画像生成ユニット４０３は、スマートフォン１００からピント調整の操作情報を受信したか否かを判定する。画像生成ユニット４０３は、ピント調整の操作情報を受信したと判定した場合（Ｓ７０３でＹＥＳ）、処理をＳ７０４へ進め、ピント調整の操作情報を受信していないと判定した場合（Ｓ７０３でＮＯ）、処理をＳ７０５へ進める。

Ｓ７０４とＳ７０５では、受信したライブビュー画像の透明度を変更する処理が行われる。具体的には、Ｓ７０４で画像生成ユニット４０３は、画像生成部５０２として機能し、ライブビュー画像の透明度が低くなるように透明度を変更し、その後、処理をＳ７０６へ進める。一方、Ｓ７０５で画像生成ユニット４０３は、画像生成部５０２として機能し、ライブビュー画像の透明度が高くなるように透明度を変更し、その後、処理をＳ７０６へ進める。

なお、透明度が低いライブビュー画像が表示部４０２に表示されている場合、ユーザは、ライブビュー画像が表示されている領域では実風景を視認することが難しくなる。つまり、透明度の低いライブビュー画像が表示されている領域は実風景の視認を妨げる。一方、透明度が高いライブビュー画像が表示部４０２に表示された場合、ユーザは、ライブビュー画像が表示されている領域を通して、実風景も視認することが可能になる。つまり、ユーザは、実風景にライブビュー画像が重なった状態を視認することが可能になる。

Ｓ７０６で画像生成ユニット４０３は、表示制御部５０３として機能し、Ｓ７０４又はＳ７０５にて透明度の変更が行われたライブビュー画像を表示部４０２に表示する。表示部４０２においてライブビュー画像は、図８を参照して後述するように、右表示部４０２Ｒと左表示部４０２Ｌに跨がるように、表示部４０２の中央付近に表示される。

Ｓ７０７で画像生成ユニット４０３は、スマートフォン１００において記憶された撮影画像をスマートフォン１００から受信したか否かを判定する。画像生成ユニット４０３は、記憶された撮影画像を受信したと判定した場合（Ｓ７０７でＹＥＳ）、処理をＳ７０８へ進め、記憶された撮影画像を受信していないと判定した場合（Ｓ７０７でＮＯ）、処理をＳ７０９へ進める。

Ｓ７０８で画像生成ユニット４０３は、スマートフォン１００において記憶された撮影画像を表示部４０２に表示する。Ｓ７０９で画像生成ユニット４０３は、スマートフォン１００から撮影終了の操作情報を受信したか否かを判定する。画像生成ユニット４０３は、撮影終了の操作情報を受信したと判定した場合（Ｓ７０９でＹＥＳ）、本処理を終了させて、表示部４０２へのライブビュー画像や撮影画像の表示を終了する。一方、画像生成ユニット４０３は、撮影終了の操作情報を受信していないと判定した場合（Ｓ７０９でＮＯ）、処理をＳ７０１へ戻し、表示部４０２へのライブビュー画像等の表示を続ける。

次に、図６及び図７のフローチャートに従う処理実行中のスマートフォン１００及びスマートグラス１１０での画像表示例について説明する。

図８（ａ）は、スマートフォン１００のタッチスクリーンディスプレイ２１０にＳ６０３でのタッチ操作が行われていない場合（Ｓ７０３での判定が‘ＮＯ’）のスマートグラス１１０における画像表示例を示す図である。図８（ｂ）は、スマートフォン１００のタッチスクリーンディスプレイ２１０にＳ６０３でのタッチ操作が行われた場合（Ｓ７０３での判定が‘ＹＥＳ’）のスマートグラス１１０における画像表示例を示す図である。なお、前述したように、Ｓ６０３でのタッチ操作は、ライブビュー画像内の被写体に対するピント調整を行うためのタッチ操作である。

図８（ａ）に示すライブビュー表示画像８００は、スマートフォン１００で撮像されて表示部４０２に表示されるライブビュー画像の表示画像である。図８（ａ）では、特定の被写体に対するピント調整操作が行われていない（オートフォーカス機能によるピント合わせは行われている）。そのため、Ｓ７０５の処理によって透明度が高くなるように処理が施されたライブビュー表示画像８００が表示部４０２に表示されている。この場合、ユーザは表示部４０２の全領域において実風景を視認することができる。つまり、ユーザは、ライブビュー表示画像８００が表示されている領域では、ライブビュー表示画像８００を透かして実風景を視認することができる。

図８（ａ）には、スマートフォン１００で撮像されている被写体の周囲のオブジェクト（人や物）としての第１のオブジェクト８０１Ａを、ユーザがライブビュー表示画像８００を透かして実風景内に視認することが可能な状態が模式的に示されている。ユーザは、ライブビュー表示画像８００と第１のオブジェクト８０１Ａの両方を同時に視認することができる。これにより、ユーザは、動く被写体の周囲の状況を見ながらフレーム内に所望の被写体（オブジェクト）を収めるためのスマートフォン１００の作業を容易に行うことができる。

ユーザは、スマートグラス１１０の表示部４０２に表示されたライブビュー表示画像８００を確認して、記録対象の被写体がフレーム内に収まっていると判断した場合に、スマートフォン１００を操作して記録対象の被写体に対するピント調整操作を行う。具体的には、Ｓ６０３での処理について説明したように、ユーザはタッチスクリーンディスプレイ２１０において記録対象の被写体が表示されている位置にタッチオン操作を行う。

ユーザは、ピント調整を行った後のライブビュー表示画像８００を画像として記録するか否かの確認を行う。その際、透明度の高いライブビュー表示画像８００が表示されたままであると、ライブビュー表示画像８００の背後に位置する第１のオブジェクト８０１Ａが透けて見えてしまう。その結果、第１のオブジェクト８０１Ａが実風景のものかライブビュー表示画像８００のものかを区別することが容易でなくなり、記録対象の被写体を間違えてしまう可能性が生じる。例えば、第１のオブジェクト８０１Ａと第２のオブジェクト８０１Ｂのどちらが記録対象であるかの区別が容易でなくなるおそれがある。

そこで、スマートグラス１１０は、被写体に対するピント調整結果としてスマートフォン１００からピント調整の操作情報を受信すると、Ｓ７０４にてライブビュー表示画像８００を透明度が低くなるように変更したライブビュー表示画像８１０を生成する。こうして、図８（ｂ）に示すように、透明度が低くなるように処理が施されたライブビュー表示画像８１０が表示部４０２に表示される。ライブビュー表示画像８１０では、表示部４０２においてライブビュー表示画像８１０が表示されている領域では、ほぼライブビュー表示画像８１０のみが表示され、実風景を確認することが容易でなくなる。よって、ユーザは、記録対象の被写体の周囲のオブジェクトの影響を受けずにライブビュー表示画像８１０のみを確認することができるため、フレーム内での記録対象の被写体についての記録前の最終確認作業を容易に行うことができる。

ユーザは、スマートグラス１１０の表示部４０２に表示されたライブビュー表示画像８１０を確認した結果として、被写体像を静止画又は動画として記録すると判断した場合、スマートフォン１００に対して撮影画像を記録するための操作（Ｓ６０７）を行う。具体的には、前述したように、ユーザはボタン２２１を押下する。なお、記録開始を指示する機能は、ボタン２１１に限られず、その他のボタン２２２～２２４に割り当てられていてもよい。また、タッチスクリーンディスプレイ２１０に表示させた操作アイコンに対するタッチオンがあった場合に記録が開始されるように構成されていてもよい。

撮影画像が記憶されると、前述したように、Ｓ６０８の処理によって撮影画像がスマートグラス１１０へ送信され、Ｓ７０８の処理によって表示部４０２に撮影画像が表示される。その際、撮影画像は、ライブビュー表示画像８００，８１０が表示される領域に表示されるようにしてもよいし、これとは異なる領域に表示するようにしても構わない。また、動画を記録する場合には、ユーザは記録の開始タイミング、終了タイミング、及び、記録中か否かの判断ができれば十分である。そのため、記録した撮影画像の送信（Ｓ６０８）を行わずに、Ｓ７０８において撮影画像の記録中であることを示すマークを表示部４０２に表示するのみとしても構わない。

以上の通り、第１実施形態では、撮像システムは、スマートグラス１１０に表示するライブビュー画像の透明度を、ピント調整操作前は透明度を高くし、ピント調整操作後は透明度を低くするように制御される。これにより、動く被写体をフレーム内に収める作業と、ピント調整後で記憶前の撮影画像の最終確認の作業とを容易に行うことが可能になる。このような撮像システムを用いた撮像手法は、スマートフォン１００に表示されるライブビュー画像をユーザが見る視線と、被写体をユーザが見る視線とが離れているハイアングル撮影等の撮影シーンで特に有用である。

＜第２実施形態＞
次に、撮像システムでの第２実施形態に係る撮像処理フローについて説明する。第１実施形態では、スマートグラス１１０の表示部４０２に表示するライブビュー画像の透明度をピント調整操作の前後で変更するよう制御した。これに対して第２実施形態では、スマートグラス１１０の表示部４０２に表示するライブビュー画像の大きさと表示位置をピント調整操作の前後で変更するよう制御する。なお、第２実施形態での制御において、スマートフォン１００で実行される制御は、第１実施形態でのスマートフォン１００で実行される制御（図６）と同じであるため、説明を省略する。

図９は、撮像システムで撮像処理を行う際にスマートグラス１１０が行う処理のフローチャートである。図９のフローチャートにＳ番号で示す各処理は、スマートグラス１１０の画像生成ユニット４０３が所定のプログラムを実行して、スマートグラス１１０の各部の動作を統括的に制御することにより実現される。

Ｓ９０１～Ｓ９０３の処理は、第１実施形態でのＳ７０１～７０３の処理と同じであるため、ここでの説明を省略する。Ｓ９０４とＳ９０５では、画像生成ユニット４０３は、受信したライブビュー画像の表示サイズと表示位置を変更する処理を行う。具体的には、Ｓ９０４で画像生成ユニット４０３は、画像生成部５０２として機能して、小さい表示サイズのライブビュー画像の生成し、生成したライブビュー画像の表示位置を表示部４０２の端部（左端又は右端）に設定する。一方、Ｓ９０５で画像生成ユニット４０３は、画像生成部５０２として機能して、Ｓ９０４で生成されるライブビュー画像よりも表示サイズの大きなライブビュー画像を生成し、生成したライブビュー画像の表示位置を表示部４０２の中央に設定する。表示位置を表示部４０２の中央に設定することにより、ライブビュー画像の表示位置がユーザの視野の中央に近付くことになる。

なお、「小さい表示サイズ」の詳細については後述する。また、Ｓ９０４とＳ９０５でそれぞれ生成されるライブビュー画像は、Ｓ７０５の処理に準じて、透明度を低くして生成される。

Ｓ９０６で画像生成ユニット４０３は、Ｓ９０４又はＳ９０５での設定に従って、ライブビュー画像を表示部４０２に表示する。Ｓ９０７～Ｓ９０９の処理は、第１実施形態でのＳ７０６～７０９の処理と同じであるため、ここでの説明を省略する。

次に、図６及び図９のフローチャートに従う処理実行中のスマートグラス１１０での画像表示例について説明する。図１０（ａ）は、スマートフォン１００のタッチスクリーンディスプレイ２１０にＳ６０３でのタッチ操作が行われていない場合（Ｓ９０３での判定が‘ＮＯ’）のスマートグラス１１０での画像表示例を示す図である。図１０（ｂ）は、スマートフォン１００のタッチスクリーンディスプレイ２１０にＳ６０３でのタッチ操作が行われた場合（Ｓ９０３での判定が‘ＹＥＳ’）のスマートグラス１１０での画像表示例を示す図である。なお、前述したように、Ｓ６０３でのタッチ操作は、ライブビュー画像内の記録対象の被写体に対するピント調整を行うためのタッチ操作である。

図１０（ａ）に示すように、ピント調整操作前には、表示部４０２の端にサイズの小さいライブビュー表示画像１０００が表示される。ライブビュー表示画像１０００の縦方向サイズは、例えば、表示部４０２の高さ幅の１／２以下、望ましくは１／３以下とすることが望ましい。一方で、ライブビュー表示画像１０００内の被写体を容易に確認することができるように、ライブビュー表示画像１０００の縦方向サイズは、表示部４０２の高さ幅の１／４以上とすることが望ましい。ライブビュー表示画像１０００の横方向サイズは、スマートフォン１００での撮像画像のアスペクト比に準じて調整される。

第２実施形態では、ピント調整操作前のライブビュー表示画像１０００は、表示サイズが小さく、且つ、表示部４０２の端に表示される。そのため、ユーザは、第１のオブジェクト８０１Ａを含む実風景全体を、ライブビュー表示画像１０００に遮られることなく視認することができる。なお、ライブビュー表示画像１０００の表示サイズを小さく設定することにより、表示画像を明確に視認することが可能になる。こうして、ライブビュー表示画像１０００と第１のオブジェクト８０１Ａと第２のオブジェクト８０１Ｂを含む実風景とを確認することができるため、動く被写体の周囲の状況を見ながらフレーム内に被写体を収める作業を容易に行うことが可能になる。

図１０（ｂ）に示すピント調整操作後のライブビュー表示画像１０１０は、図８（ｂ）中のライブビュー表示画像８１０と、表示サイズ、表示位置及び透明度において、同等である。つまり、透明度の低いライブビュー表示画像１０１０が、ライブビュー表示画像１０００よりも大きな表示サイズで、表示部４０２の中央付近に表示される。よって、表示部４０２におけるライブビュー表示画像１０１０の表示領域では、実風景はライブビュー表示画像１０１０に隠れて実質的に見えなくなる。これにより、ライブビュー表示画像１０１０の背後にある第１のオブジェクト８０１Ａの影響を受けずに、ライブビュー表示画像１０１０のみを確認することができるため、フレーム内の記録対象の被写体の記録前の最終確認作業を容易に行うことができる。

以上説明したように、第２の実施形態によれば、スマートグラス１１０に表示するライブビュー画像のサイズと位置について、ピント調整の操作前は小さく且つ端に表示し、ピント調整の操作後は大きく且つ中央付近に表示するように制御する。これにより、動く被写体をフレーム内に収める作業と、ピント調整後の記憶前の撮影画像の最終確認の作業が、行い易くなる。

以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。更に、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。

例えば、上記実施形態では、撮像装置としてスマートフォンを取り上げたが、撮像装置はこれに限られず、デジタルスチルカメラやデジタルビデオカメラ（以下「デジタルカメラ」という）であってもよい。デジタルカメラの場合には、例えば、ピント調整等の撮影準備指示に関する操作はレリーズボタンの半押し操作に、記録等の撮影指示に関する操作はレリーズボタンの全押し操作に置き換える構成としても構わない。一方、スマートフォン１００のタッチスクリーンディスプレイ２１０に相当するディスプレイがデジタルカメラに設けられている場合には、デジタルカメラをスマートフォン１００と同様に取り扱うことができる。ライブビュー画像に限らず、デジタルカメラでの撮像条件（絞り値、ＩＳＯ値、シャッタ速度等の情報を、スマートグラス１１０の表示部４０２において実風景及び表示画像の視認を妨げない領域に表示するように構成してもよい。

また、上記実施形態では、スマートグラスで表示されるライブビュー画像等の撮像画像の表示形態（透明度、表示位置、表示サイズ）の変更のトリガーとなる操作の一例として、ピント調整指示を取り上げた。しかし、そのトリガーとなる操作は、ピント調整指示に限られず、その他の撮影の準備指示や画像データの記憶指示であってもよい。

さらに、上記実施形態では、撮像画像の表示形態をスマートグラス側の画像生成ユニットで変更するシステムを一例として取り上げた。しかし、撮像画像の表示形態をスマートフォン側の画像生成ユニットで変更する構成としてもよい。その構成を採用した場合、スマートフォンからスマートグラスへ操作情報を送信しなくてもよい。

本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００ スマートフォン
１１０ スマートグラス
３００ コントローラ
３４１ 通信ユニット
４０２ 表示部
４０３ 画像生成ユニット
４１０ 無線通信部
５０１ 画像取得部
５０２ 画像生成部
５０３ 表示制御部

Claims (13)

1. 撮像装置と頭部装着型の表示装置を有する撮像システムであって、
   前記撮像装置は、
   ライブビュー画像を生成する第１の画像生成手段と、
   前記ライブビュー画像を前記表示装置へ送信する画像送信手段と、
   撮像処理を操作する操作手段と、
   前記操作手段による操作の操作情報を送信する情報送信手段と、を備え、
   前記表示装置は、
   表示部と、
   前記撮像装置から前記ライブビュー画像と前記操作情報を受信する受信手段と、
   前記受信手段が受信したライブビュー画像に基づいて前記表示部が表示する表示画像を生成する第２の画像生成手段と、
   前記第２の画像生成手段が生成した表示画像を前記表示部に表示させる表示制御手段と、を備え、
   前記第２の画像生成手段は、前記受信手段が受信した操作情報に応じて前記表示部に表示する表示画像を変更することを特徴とする撮像システム。
2. 前記第２の画像生成手段は、前記操作情報に応じて前記表示画像の透明度を変更することを特徴とする請求項１に記載の撮像システム。
3. 前記第２の画像生成手段は、前記操作情報に応じて前記表示画像の表示位置を変更することを特徴とする請求項１又は２に記載の撮像システム。
4. 前記第２の画像生成手段は、前記操作情報に応じて前記表示画像の表示サイズを変更することを特徴とする請求項１乃至３のいずれか１項に記載の撮像システム。
5. 前記第２の画像生成手段は、前記操作情報に応じて前記表示画像の透明度を低くすることを特徴とする請求項２に記載の撮像システム。
6. 前記第２の画像生成手段は、前記操作情報に応じて前記表示画像の表示位置をユーザの視野の中央に近づけることを特徴とする請求項３に記載の撮像システム。
7. 前記第２の画像生成手段は、前記操作情報に応じて前記表示画像の表示サイズを大きくすることを特徴とする請求項４に記載の撮像システム。
8. 前記第２の画像生成手段は、前記操作情報に応じて前記表示画像に含まれているライブビュー画像の透明度、表示位置、又は表示サイズを変更することを特徴とする請求項２乃至７のいずれか１項に記載の撮像システム。
9. 前記操作手段による操作は、撮影の準備指示に関する操作を含むことを特徴とする請求項１乃至８のいずれか１項に記載の撮像システム。
10. 前記操作手段による操作は、画像の記憶指示に関する操作を含むことを特徴とする請求項１乃至８のいずれかに記載の撮像システム。
11. 撮像装置と頭部装着型の表示装置とを有する撮像システムであって、
    前記撮像装置は、
    撮像画像を生成する第１の画像生成手段と、
    前記撮像画像を前記表示装置へ送信する画像送信手段と、を有し、
    前記表示装置は、
    前記撮像装置から前記撮像画像を受信する受信手段と、
    前記受信手段が受信した前記撮像画像をユーザの眼に表示する表示手段と、を有し、
    前記表示手段は、前記撮像装置による撮影の準備指示または前記撮像装置による画像の記憶指示をユーザが入力した場合、ユーザの眼に表示する前記撮像画像の透明度を低下させることを特徴とする撮像システム。
12. 頭部装着型の表示装置であって、
    表示部と、
    外部の撮像装置から前記撮像装置で撮像中のライブビュー画像と前記撮像装置での操作情報を受信する受信手段と、
    前記受信手段が受信したライブビュー画像に基づいて前記表示部が表示する表示画像を生成する画像生成手段と、
    前記画像生成手段が生成した表示画像を前記表示部に表示させる表示制御手段と、を備え、
    前記画像生成手段は、前記操作情報に応じて前記表示部に表示する表示画像を変更することを特徴とする表示装置。
13. 頭部装着型の表示装置の制御方法であって、
    外部の撮像装置から前記撮像装置で撮像中のライブビュー画像と前記撮像装置での操作情報を受信する受信ステップと、
    前記受信ステップで受信したライブビュー画像に基づいて表示部が表示する表示画像を生成する画像生成ステップと、
    前記画像生成ステップで生成した表示画像を前記表示部に表示させる表示ステップと、を有し、
    前記画像生成ステップでは、前記操作情報に応じて前記表示部に表示する表示画像を変更することを特徴とする表示装置の制御方法。
    

Images