JP2015162822A - Electronic apparatus, imaging apparatus, and communication apparatus - Google Patents
Electronic apparatus, imaging apparatus, and communication apparatus Download PDFInfo
- Publication number
- JP2015162822A JP2015162822A JP2014037377A JP2014037377A JP2015162822A JP 2015162822 A JP2015162822 A JP 2015162822A JP 2014037377 A JP2014037377 A JP 2014037377A JP 2014037377 A JP2014037377 A JP 2014037377A JP 2015162822 A JP2015162822 A JP 2015162822A
- Authority
- JP
- Japan
- Prior art keywords
- user
- unit
- imaging
- information
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、電子機器、撮像装置及び通信装置に関する。 The present invention relates to an electronic device, an imaging device, and a communication device.
従来より、各種の携帯端末が提案されており、最近では顔の近傍に装着する携帯端末も提案されている（例えば、特許文献１参照）。 Conventionally, various portable terminals have been proposed, and recently, a portable terminal to be worn near the face has also been proposed (see, for example, Patent Document 1).
しかしながら、従来においては、顔の近傍に装着する端末とその他の機器との連携についてはほとんど考慮されていなかった。 However, conventionally, little consideration has been given to cooperation between a terminal worn near the face and other devices.
本発明は上記の課題に鑑みてなされたものであり、ユーザの使い勝手の向上に寄与することが可能な電子機器、撮像装置及び通信装置を提供することを目的とする。 The present invention has been made in view of the above problems, and an object thereof is to provide an electronic device, an imaging device, and a communication device that can contribute to improvement of user-friendliness.
本発明の電子機器（１０）は、外部機器（２０）が撮像した画像をユーザの目の近傍に表示可能な表示部（１０２）と、前記ユーザの視線を検出する視線検出部（１０８）と、前記視線検出部の検出結果に応じた情報を前記外部機器に送信する送信部（１１１，１１０）と、を備えている。 The electronic device (10) of the present invention includes a display unit (102) that can display an image captured by the external device (20) in the vicinity of the user's eyes, and a line-of-sight detection unit (108) that detects the user's line of sight. And a transmission unit (111, 110) for transmitting information according to the detection result of the visual line detection unit to the external device.
この場合において、前記送信部は、前記外部機器の焦点検出に関する情報を送信することとしてもよい。 In this case, the transmission unit may transmit information related to focus detection of the external device.
本発明の電子機器は、外部機器（２０）が撮像した画像をユーザの目の近傍に表示可能な表示部（１０２）と、前記ユーザの特定の動作を検出する検出部（１１１，１０７）と、前記検出部が前記ユーザの特定の動作を検出したタイミングに応じた情報を前記外部機器に送信する送信部（１１１，１１０）と、を備えている。 The electronic device of the present invention includes a display unit (102) that can display an image captured by the external device (20) in the vicinity of the user's eyes, and a detection unit (111, 107) that detects the specific operation of the user. And a transmission unit (111, 110) that transmits information according to the timing at which the detection unit detects a specific operation of the user to the external device.
この場合において、前記送信部は、前記外部機器が画像を撮像する姿勢を特定するための情報を送信することとしてもよい。また、前記検出部は、前記ユーザの目の特定の動作を検出することとしてもよい。 In this case, the transmission unit may transmit information for specifying a posture in which the external device captures an image. The detection unit may detect a specific action of the user's eyes.
本発明の電子機器は、外部機器（２０）の撮像領域の情報を入力する第１入力部（１１１）と、ユーザの視線に関する情報を入力する第２入力部（１１１）と、前記外部機器の撮像領域の情報と、前記ユーザの視線に関する情報とを前記ユーザの目の近傍に表示する表示部（１０２）と、を備えている。 The electronic device according to the present invention includes a first input unit (111) for inputting information about an imaging region of the external device (20), a second input unit (111) for inputting information relating to the user's line of sight, and the external device. A display unit (102) for displaying information on an imaging region and information on the user's line of sight in the vicinity of the user's eyes;
この場合において、前記外部機器の撮像領域の情報と、前記ユーザの視線に関する情報とに基づいて、前記外部機器を制御する情報を前記外部機器に送信する送信部（１１１，１１０）を備えていてもよい。また、前記表示部は、前記外部機器が撮像した画像に前記外部機器の撮像領域の情報と、前記ユーザの視線に関する情報とを合成した画像を表示することとしてもよい。 In this case, a transmission unit (111, 110) is provided that transmits information for controlling the external device to the external device based on information on the imaging area of the external device and information on the line of sight of the user. Also good. The display unit may display an image obtained by combining information on an imaging area of the external device and information on the user's line of sight with an image captured by the external device.
また、電子機器は、前記ユーザを認証する認証部（１０９）を備えていてもよい。この場合、前記外部機器の認証結果と、前記認証部の認証結果とが一致した場合に、前記外部機器との通信を許可する制御部（１１１）を備えていてもよい。また、前記表示部は、前記外部機器の認証結果に関する表示を行うこととしてもよい。 The electronic device may include an authentication unit (109) that authenticates the user. In this case, when the authentication result of the said external apparatus and the authentication result of the said authentication part correspond, you may provide the control part (111) which permits communication with the said external apparatus. In addition, the display unit may display information related to the authentication result of the external device.
本発明の撮像装置（２０）は、本発明の電子機器と通信する通信部（２０７）と、ユーザを認証する認証部（２１０）と、画像を撮像する撮像部（２０１）と、を備えている。 The imaging device (20) of the present invention includes a communication unit (207) that communicates with the electronic device of the present invention, an authentication unit (210) that authenticates a user, and an imaging unit (201) that captures an image. Yes.
この場合において、前記認証部の認証結果と、前記電子機器の認証部の認証結果とが一致した場合に、前記通信部による通信を許可する制御部（２１１）を備えていてもよい。 In this case, a control unit (211) that permits communication by the communication unit when the authentication result of the authentication unit matches the authentication result of the authentication unit of the electronic device may be provided.
本発明の撮像装置は、本発明の電子機器と通信する通信部（２０７）と、画像を撮像する撮像部（２０１）と、を備え、前記撮像部は、前記電子機器の前記送信部から送信された情報に基づいた処理を実行する。 The imaging device of the present invention includes a communication unit (207) that communicates with the electronic device of the present invention, and an imaging unit (201) that captures an image, and the imaging unit transmits from the transmission unit of the electronic device. The processing based on the information that has been performed is executed.
本発明の通信装置（３０）は、本発明の電子機器のユーザの認証結果を入力する第１認証結果入力部（３２、３４）と、撮像装置（２０）のユーザの認証結果を入力する第２認証結果入力部（３２、３４）と、前記第１認証結果入力部が入力した認証結果と、前記第２認証結果入力部が入力した認証結果とが一致した場合に、前記電子機器と前記撮像装置との間の通信を許可する制御部（３４）と、を備えている。 The communication device (30) of the present invention includes a first authentication result input unit (32, 34) for inputting a user authentication result of the electronic device of the present invention and a user authentication result of the imaging device (20). When the authentication result input by the second authentication result input unit (32, 34), the authentication result input by the first authentication result input unit, and the authentication result input by the second authentication result input unit coincide, And a control unit (34) that permits communication with the imaging device.
本発明の通信装置（３０）は、電子機器から前記ユーザの視線に関する情報を入力する第１情報入力部（３２、３４）と、撮像装置の撮像領域の情報を入力する第２情報入力部（３２、３４）と、前記撮像装置の撮像領域の情報と、前記ユーザの視線に関する情報とを比較する比較部（３４）と、を備えている。 The communication device (30) of the present invention includes a first information input unit (32, 34) for inputting information on the user's line of sight from an electronic device, and a second information input unit (32) for inputting information on an imaging region of the imaging device. 32, 34) and a comparison unit (34) for comparing information on the imaging region of the imaging device with information on the line of sight of the user.
なお、本発明をわかりやすく説明するために、上記においては一実施形態を表す図面の符号に対応つけて説明したが、本発明は、これに限定されるものではなく、後述の実施形態の構成を適宜改良しても良く、また、少なくとも一部を他の構成物に代替させても良い。更に、その配置について特に限定のない構成要件は、実施形態で開示した配置に限らず、その機能を達成できる位置に配置することができる。 In addition, in order to explain the present invention in an easy-to-understand manner, the above description has been made in association with the reference numerals of the drawings representing one embodiment. However, the present invention is not limited to this, and the configuration of an embodiment described later May be modified as appropriate, or at least a part thereof may be replaced with another component. Further, the configuration requirements that are not particularly limited with respect to the arrangement are not limited to the arrangement disclosed in the embodiment, and can be arranged at a position where the function can be achieved.
本発明の電子機器、撮像装置及び通信装置は、ユーザの使い勝手の向上に寄与することができるという効果を奏する。 The electronic device, the imaging device, and the communication device according to the present invention have an effect of being able to contribute to improvement of user convenience.
《第１の実施形態》
以下、第１の実施形態について、図１〜図１１に基づいて、詳細に説明する。図１には、第１の実施形態に係る撮像システム１００の構成がブロック図にて示されている。
<< First Embodiment >>
Hereinafter, the first embodiment will be described in detail with reference to FIGS. FIG. 1 is a block diagram showing the configuration of the
図１に示すように、撮像システム１００は、装着装置１０と、撮像装置２０と、を備える（利用する）。
As illustrated in FIG. 1, the
（装着装置１０）
装着装置１０は、ユーザが身体（顔）に装着する端末であり、一例として、眼鏡型の形状を有する。装着装置１０は、図１に示すように、撮像部１０１と、表示部１０２と、操作部１０３と、マイク１０４と、スピーカ１０５と、方位センサ１０６と、瞳撮像部１０７と、視線検出部１０８と、人物認証部１０９と、通信部１１０と、制御部１１１と、記憶部１１２と、を備える。なお、図２には、装着装置１０が斜視図にて示されている。図２に示すように、装着装置１０は、眼鏡型のフレーム１２０を備えている。なお、図１において図示され、図２において図示されていない装着装置１０の構成は、フレーム１２０の内部や、フレーム１２０の一部に設けられているものとする。
(Mounting device 10)
The wearing
撮像部１０１は、レンズ、撮像素子、画像処理部などを備え、静止画や動画を撮像するものである。撮像部１０１は、図２に示すようにフレーム１２０の端部近傍（ユーザの右目近傍）に設けられている。このため、ユーザが装着装置１０を装着した状態では、ユーザが向いている（見ている）方向の画像を撮像することができる。
The
表示部１０２は、フレーム１２０内部又はフレーム１２０近傍に設けられたプロジェクタと、プロジェクタからの投影像をユーザの目に導くためのプリズムとを有する。表示部１０２は、制御部１１１の制御の下、各種情報を表示する。なお、表示部１０２の表示可能範囲は、一例として、図８に示すような範囲（ユーザの実視界の右上の範囲）であるものとする。
The
操作部１０３は、フレーム１２０に設けられたタッチパッドであり、ユーザの指の動きを検知して、ユーザからの操作を受け付け、受け付けた操作情報を制御部１１１に送信する。なお、撮像部１０１、表示部１０２、操作部１０３などについては、例えば米国公開特許２０１３／００４４０４２号にもその詳細が開示されている。
The
マイク１０４は、フレーム１２０に設けられ、ユーザが発した音声を収集する。マイク１０４が収集した音声は、不図示の音声認識部により音声認識され、音声認識結果は、制御部１１１に送信される。制御部１１１は、音声認識結果に基づく処理（例えば、コマンドの実行処理など）を実行する。なお、制御部１１１が音声認識を実行してもよい。
The
スピーカ１０５は、例えば、フレーム１２０に設けられ、制御部１１１の制御の下、音声を出力する音声出力装置である。なお、スピーカ１０５としては、イヤホンやヘッドホンのほか、指向性があり、主に装着装置１０を装着するユーザの耳に向けて音声情報を提供することが可能なスピーカなどを採用することができる。
The
方位センサ１０６は、たとえば地磁気に基づいて、装着装置１０が向いている方向を検出する。本実施形態では、方位センサ１０６は、装着装置１０の撮像部１０１が向いている方向（撮像方向）、すなわち、装着装置１０を装着したユーザが向いている（見ている）方向を検出し、制御部１１１に出力する。
The
瞳撮像部１０７は、図２に示すように、装着装置１０を装着するユーザの右目近傍の位置に設けられ、制御部１１１の制御の下、ユーザの右目の瞳を撮像する。瞳撮像部１０７で撮像された画像は、制御部１１１に送信され、後述する虹彩認証や視線検出に用いられる。なお、瞳撮像部１０７は、ユーザの左目の瞳を撮像してもよい。
As shown in FIG. 2, the
視線検出部１０８は、瞳撮像部１０７で撮像された画像に基づいて、装着装置１０を装着したユーザの視線方向を検出する。なお、視線検出は、例えば、赤外線照射部と、赤外線受光部と、を有する装置を用いて行うこととしてもよい。この場合、赤外線照射部から眼球に対して赤外線を照射し、眼球にて反射した赤外線を赤外線受光部において受光した受光結果に基づいて、ユーザの視線方向を検出する。
The line-of-
人物認証部１０９は、瞳撮像部１０７で撮像された画像に基づいて、虹彩認証を行う。具体的には、人物認証部１０９は、ユーザの虹彩の画像とユーザの情報（ユーザＩＤ）とを関連付けて保持する虹彩認証ＤＢ（記憶部１１２に格納されている）と、撮像された虹彩の画像とを用いて認証を行う。なお、虹彩認証は、例えば特許第５３６０９３１号に開示されている。
The
通信部１１０は、他の機器と無線通信（携帯電話回線や無線ＬＡＮ（Local Area Network）等を用いた通信）や近接通信（例えば、例えばＢｌｕｅｔｏｏｔｈ（登録商標）、ＲＦＩＤ(Radio Frequency Identification)、ＴｒａｎｓｆｅｒＪｅｔ（登録商標））などを行う。本第１の実施形態では、通信部１１０は、撮像装置２０との間で近接通信を行うものとする。なお、通信部１１０は、ユーザ（人体）を介して通信する人体通信を行ってもよい。この場合、フレーム１２０のユーザと接触する部分に人体通信用の電極を配置すればよい。なお、人体通信には、人体に微弱な電流を流して、その電流を変調して情報を伝達する電流方式や、人体の表面に誘起する電界を変調して情報を伝達する電界方式などがあり、いずれの方式を用いることも可能である。
The
制御部１１１は、装着装置１０全体を統括的に制御する。制御部１１１は、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）等を備える。制御部１１１が実行する処理の詳細については後述する。
The
記憶部１１２は、例えば、フラッシュメモリ等の不揮発性の半導体メモリであり、撮像部１０１が撮像した画像データや、表示部１０２に表示する表示データ、人物認証部１０９が利用する虹彩認証ＤＢなどを記憶する。
The
（撮像装置２０）
撮像装置２０は、例えば、カメラや、撮像機能を有する携帯電話、スマートフォン、タブレット型端末などである。本実施形態では、撮像装置２０は、カメラであるものとして説明を行う。なお、図３（ａ）には、撮像装置２０の正面図が、図３（ｂ）には、撮像装置２０の背面図が示されている。撮像装置２０は、一眼レフカメラ、ミラーレスカメラ、およびコンパクトカメラのいずれであってもよいが、本実施形態では、図３（ａ）及び図３（ｂ）に示すように、コンパクトカメラであるものとする。
(Imaging device 20)
The
撮像装置２０は、図１及び図３（ａ）、図３（ｂ）に示すように、撮像部２０１、表示部２０２、操作部２０３、マイク２０４、スピーカ２０５、記憶部２０６、通信部２０７、方位センサ２０８、指紋センサ２０９、人物認証部２１０、レンズ駆動部２１２、焦点検出部２１３、及び制御部２１１を備える。
As shown in FIGS. 1, 3A, and 3B, the
撮像部２０１は、レンズ、撮像素子、画像処理部などを備え、静止画や動画を撮像するものである。
The
表示部２０２は、例えば、ＬＣＤ（Liquid Crystal Display）であり、撮像部２０１のレンズと反対側の面に設けられる。表示部２０２は、撮像装置２０に対する各種の設定情報や、撮像装置２０を操作するための操作メニュー、アイコンなどを表示する。また、表示部２０２は、撮像部２０１が撮像するライブビュー画像（スルー画像）や、後述する記憶部２０６に記録されている静止画像や動画像を表示する。
The
操作部２０３は、ユーザから撮像装置２０に対する操作を受け付ける操作部材であって、図３（ａ）、図３（ｂ）に示す、レリーズスイッチ２０３Ａ、動画撮像スイッチ２０３Ｂ、メニュースイッチ２０３Ｃ、十字スイッチ（マルチセレクター）２０３Ｄ、削除スイッチ２０３Ｅ、及びズームレバー２０３Ｆ等を含む（図３（ａ），図３（ｂ）参照）。レリーズスイッチ２０３Ａは、上面に設けられており、例えば、静止画像の撮像を指示する場合にユーザによって操作される（押される）。動画撮像スイッチ２０３Ｂは、動画の撮像を指示する場合にユーザによって操作される（押される）。メニュースイッチ２０３Ｃは、表示部２０２に、撮像条件を設定するための操作メニュー等を表示させる場合にユーザによって操作される。十字スイッチ２０３Ｄは、中央部のＯＫスイッチと、周辺部の上下左右のスイッチとを有し、ユーザは、表示部２０２に表示された操作メニューから、十字スイッチ２０３Ｄを操作することによってあるメニューを選択し、撮像条件の設定を行う。削除スイッチ２０３Ｅは、撮像装置２０が撮像した画像を再生する再生モードにある場合に、十字スイッチ２０３Ｄの操作により選択された画像を削除するためのスイッチである。ズームレバー２０３Ｆは、ズーム位置を変更するためのレバーであり、ユーザが、ズームレバー２０３Ｆを動かすと撮像部２０１内のレンズを駆動して、ズーム位置を変更する。
The
なお、操作部２０３は、表示部２０２上に設けられ、又は表示部２０２内に組み込まれたタッチパネルを備えていてもよい。この場合、タッチパネルは、表示部２０２の表面に対するユーザの接触操作を検出し、種々の情報入力を受け付ける。すなわち、ユーザは、表示部２０２に表示された操作メニューやアイコンに触れる動作を行うことで、撮像装置２０を操作することができる。
The
マイク２０４は、表示部２０２の反対側の面に設けられ、静止画や動画を撮影したときの音声を入力する音声入力装置である。スピーカ２０５は、静止画のデータや動画のデータに関連付けられている音声データに基づいて音声を出力する音声出力装置である。スピーカ２０５は、例えば、表示部２０２と同一の面に設けられる。
The
記憶部２０６は、例えば、撮像装置２０に着脱可能な記憶媒体であるＳＤカードに接続するコネクタを有し、ＳＤカードに静止画のデータや動画のデータを記憶させる。また、記憶部２０６は、内部メモリを有し、該内部メモリに後述する指紋認証ＤＢを格納する。
The
通信部２０７は、他の機器と無線通信（携帯電話回線や無線ＬＡＮ（Local Area Network）等を用いた通信）や近接通信を行う。本実施形態では、通信部２０７は、装着装置１０との間で近接通信を行うものとする。なお、通信部２０７は、他の機器との間で人体通信を行うこととしてもよい。
The
方位センサ２０８は、たとえば地磁気に基づいて、撮像部２０１が向いている方向を検出し、検出結果を制御部２１１に出力する。
The
指紋センサ２０９は、図３（ａ）、図３（ｂ）に示すように、ユーザが撮像を行う際に指が触れるレリーズスイッチ２０３Ａや動画撮像スイッチ２０３Ｂの表面に設けられる。指紋センサ２０９は、ユーザの指紋を検出し、検出結果を制御部２１１に送信する。
As shown in FIGS. 3A and 3B, the
人物認証部２１０は、指紋情報とユーザの情報（ユーザＩＤ）とを関連付けて記憶する指紋認証ＤＢ（記憶部２０６に記憶されている）と、指紋センサ２０９による検出結果とを用いて、ユーザ認証を行う。人物認証部２１０による認証結果は、制御部２１１に送信される。
The
レンズ駆動部２１２は、例えばモータやアクチュエータ等を備え、フォーカシングを行うために撮像部２０１に含まれるレンズ（フォーカスレンズ）を駆動する。レンズ駆動部２１２は、制御部２１１により駆動制御される。
The
焦点検出部２１３は、撮像部２０１に含まれる撮像素子から出力される画像信号のコントラスト値に基づいて合焦判定を行う。焦点検出部２１３の判定結果は、制御部２１１に送信される。制御部２１１は、例えば、図１０に示す１１箇所の矩形エリアの少なくとも１つを焦点検出する位置として決定し、決定した矩形エリアに対応する画像信号のコントラスト値に基づいて、オートフォーカスを実行する。なお、焦点検出部２１３は、コントラスト検出方式に限らず、位相差検出方式などのその他の方式を用いることとしてもよい。
The
制御部２１１は、撮像装置２０全体を統括的に制御する。制御部２１１は、ＣＰＵ、ＲＡＭ、ＲＯＭ等を備える。
The
（撮像システム１００の処理）
次に、図４〜図６のフローチャートに沿って、その他図面を適宜参照しつつ、本第１の実施形態における撮像システム１００の処理について詳細に説明する。
(Processing of imaging system 100)
Next, processing of the
図４は、装着装置１０において実行される準備処理を示すフローチャートであり、図５は、撮像装置２０において実行される準備処理を示すフローチャートである。図４、図５の準備処理は、装着装置１０を装着したユーザによって撮像装置２０が保持された場合に、連携撮影モードを実行するための通信を開始する処理である。
FIG. 4 is a flowchart showing a preparation process executed in the mounting
（装着装置１０による準備処理）
まず、装着装置１０による準備処理について、図４のフローチャートに沿って説明する。図４の処理では、装着装置１０の制御部１１１は、ステップＳ１０において、装着装置１０がユーザによって装着されたか否かを判断する。なお、制御部１１１は、ユーザによって装着装置１０が装着されたか否かを、例えば、フレーム１２０の内側に設けられた接触センサの検出結果から判断することとすればよい。ユーザが装着装置１０を装着すると、制御部１１１は、ステップＳ１２に移行する。
(Preparation processing by the mounting device 10)
First, the preparation process by the mounting
ステップＳ１２に移行すると、制御部１１１は、瞳撮像部１０７に指示を出してユーザの瞳の画像を撮像し、撮像した画像から虹彩の画像を取得する。次いで、ステップＳ１４では、制御部１１１は、人物認証部１０９に指示を出し、虹彩の画像を用いた認証を行わせ、該認証の結果、虹彩の画像が虹彩認証ＤＢに含まれていたか否かを判断する。なお、虹彩認証ＤＢは、前述したように記憶部１１２に格納されている、虹彩の画像とユーザの情報（ユーザＩＤ）とを関連付けて記憶するデータベースである。このステップＳ１４の判断が否定された場合には、ステップＳ１６に移行し、肯定された場合には、ステップＳ１８に移行する。
In step S12, the
ステップＳ１６に移行した場合、すなわち、虹彩の画像が虹彩認証ＤＢに含まれていなかった場合には、制御部１１１は、新規のユーザＩＤを発行し、虹彩の画像を虹彩認証ＤＢに登録する。その後は、制御部１１１は、ステップＳ２０に移行する。なお、新規のユーザＩＤは、ランダムに選択された英数字の組み合わせであるものとする。
When the process proceeds to step S16, that is, when the iris image is not included in the iris authentication DB, the
一方、ステップＳ１８に移行すると、制御部１１１は、虹彩認証ＤＢから装着装置１０を装着しているユーザのユーザＩＤを取得する。その後は、制御部１１１は、ステップＳ２０に移行する。
On the other hand, if it transfers to step S18, the
ステップＳ１６又はＳ１８を経て、ステップＳ２０に移行すると、制御部１１１は、撮像装置２０からユーザＩＤを要求されるまで待機する。そして、撮像装置２０からユーザＩＤを要求されたタイミングで、ステップＳ２２に移行し、制御部１１１は、通信部１１０を介して、ユーザＩＤを撮像装置２０に送信する。
When the process proceeds to step S20 through step S16 or S18, the
（撮像装置２０による準備処理）
次に、撮像装置２０による準備処理について、図５のフローチャートに沿って説明する。図５の処理では、撮像装置２０の制御部２１１は、ステップＳ１１０において、指紋読み取り可能となるまで待機する。この場合、制御部２１１は、ユーザの指が指紋センサ２０９に触れるまで待機し、触れられた段階で、ステップＳ１１２に移行する。
(Preparation processing by the imaging device 20)
Next, the preparation process by the
ステップＳ１１２に移行すると、制御部２１１は、指紋センサ２０９を用いた指紋読み取りを実行する。次いで、ステップＳ１１４では、制御部２１１は、人物認証部２１０に指示を出し、指紋読み取り結果（指紋情報）が指紋認証ＤＢに含まれていたか否かを判断する。なお、ステップＳ１１４で用いる指紋認証ＤＢは、前述したように記憶部２０６に格納されている、指紋情報とユーザの情報（ユーザＩＤ）とを関連付けて記憶するデータベースである。このステップＳ１１４の判断が否定された場合には、ステップＳ１１６に移行し、肯定された場合には、ステップＳ１１８に移行する。
In step S112, the
ステップＳ１１６に移行した場合、すなわち、指紋情報が指紋認証ＤＢに含まれていなかった場合には、制御部２１１は、仮のユーザＩＤを発行し、指紋情報を指紋認証ＤＢに登録する。なお、仮のユーザＩＤは、ランダムに選択された英数字の組み合わせであり、前述した図４のステップＳ１６で発行されるユーザＩＤとは異なるものである。その後は、制御部２１１は、ステップＳ１２０に移行する。
When the process proceeds to step S116, that is, when the fingerprint information is not included in the fingerprint authentication DB, the
一方、ステップＳ１１８に移行すると、制御部２１１は、指紋認証ＤＢから撮像装置２０を装着しているユーザのユーザＩＤを取得する。その後は、制御部２１１は、ステップＳ１２０に移行する。
On the other hand, when the process proceeds to step S118, the
ステップＳ１１６又はＳ１１８を経て、ステップＳ１２０に移行すると、制御部２１１は、通信部２０７を介した近接通信により、装着装置１０（制御部１１１）に対して図４のステップＳ１６又はステップＳ１８で取得されたユーザＩＤの送信を要求する。
When the process proceeds to step S120 via step S116 or S118, the
次いで、ステップＳ１２２では、制御部２１１は、装着装置１０からユーザＩＤを受信するまで待機する。この場合、装着装置１０において図４のステップＳ２２が実行されたタイミングで、ステップＳ１２４に移行する。ステップＳ１２４に移行すると、制御部２１１は、装着装置１０から受信したユーザＩＤと、ステップＳ１１６又はステップＳ１１８で受信したユーザＩＤとが一致するか否かを判断する。このステップＳ１２４の判断が肯定された場合、すなわち、装着装置１０を装着し、撮像装置２０を保持しているユーザが、登録されたユーザである場合には、ステップＳ１２６に移行する。ステップＳ１２６では、制御部２１１は、装着装置１０との連携撮影モードを実行するための通信を開始する。なお、ステップＳ１２６では、制御部２１１は、通信が開始された旨を表示部２０２に表示してもよい。また、ステップＳ１２６では、制御部２１１は、制御部１１１を介して、通信が開始された旨を表示部１０２に表示してもよい。ステップＳ１２６の後は、図５の全処理を終了する。
Next, in step S <b> 122, the
これに対し、ステップＳ１２４の判断が否定された場合、すなわち、ユーザＩＤが一致しなかった場合には、制御部２１１は、ステップＳ１２８に移行する。ステップＳ１２８に移行すると、制御部２１１は、装着装置１０から受信したのは図４のステップＳ１６で取得した新規のユーザＩＤであるか否かを判断する。ここでの判断が否定された場合、すなわち、装着装置１０を装着しているユーザと撮像装置２０とが異なる場合には、装着装置１０との連携撮影モードを実行するための通信ができないとして、制御部２１１は、ステップ１３０において、表示部２０２にその旨のメッセージを表示する。なお、ステップＳ１３０では、制御部２１１は、制御部１１１を介して、メッセージを表示部１０２に表示してもよい。一方、ステップＳ１２８の判断が肯定された場合、すなわち、受信したユーザＩＤが図４のステップＳ１６で取得した新規のユーザＩＤであった場合には、制御部２１１は、ステップＳ１３２に移行し、ステップＳ１１６で発行された仮のユーザＩＤを新規のユーザＩＤで書き換えるとともに、連携撮影モードを実行するための通信を開始する。なお、ステップＳ１３２では、制御部２１１は、新規のユーザＩＤが設定された旨や通信が開始された旨を表示部２０２（及び／又は表示部１０２）に表示してもよい。ステップＳ１３０又はＳ１３２の処理が行われた後は、図５の全処理を終了する。
On the other hand, if the determination in step S124 is negative, that is, if the user IDs do not match, the
以上のように、図４、図５の処理が行われることで、正規のユーザが装着装置１０を装着し、撮像装置２０を保持した場合に、連携撮影モードを実行するための通信が開始されることになる。また、新規のユーザが装着装置１０を装着し、撮像装置２０を保持した場合にも、新規のユーザＩＤを発行した後、連携撮影モードを実行するための通信が開始されることになる。
As described above, by performing the processes of FIGS. 4 and 5, when a legitimate user wears the mounting
なお、装着装置１０と撮像装置２０とが人体通信する場合には、図４、図５の処理を省略し、装着装置１０と撮像装置２０との間の人体通信が成立し、虹彩認証又は指紋認証に成功した段階で、連携撮影モードを実行するための通信を開始するようにしてもよい。なお、本実施形態では、図４、図５の処理に代えて、装着装置１０と、撮像装置２０との間でＮＦＣ（Near field communication：近距離無線通信）を用いたペアリングや人体通信を用いたペアリングを行った段階で、連携撮影モードを実行するための通信を開始するようにしてもよい。
Note that when the mounting
（連携撮影処理）
次に、図６のフローチャートに沿って、本第１の実施形態の撮像システム１００による連携撮影処理について説明する。なお、図６の処理の前提として、図４、図５の処理が実行されたことで、連携撮影モードを実行するための通信が開始されているものとする。また、ユーザによる操作部１０３又は２０３への入力により、装着装置１０と撮像装置２０とが連携撮影モードに設定されているものとする。そして、ユーザは、一例として、図７に示すように、撮像装置２０を身体の前で構えているものとする。
(Cooperative shooting process)
Next, a cooperative shooting process performed by the
図６の処理では、まず、撮像装置２０の制御部２１１が、ステップＳ１４０において、ライブビュー画像の送信を開始する。その後は、ステップＳ１４２において、ユーザによってレリーズスイッチ２０３Ａが半押しされるまで待機する。
In the process of FIG. 6, first, the
一方、装着装置１０では、制御部１１１は、ステップＳ４０において、ライブビュー画像を受信するまで待機する。したがって、撮像装置２０側においてステップＳ１４０の処理が行われたタイミングで、制御部１１１は、ステップＳ４２に移行する。
On the other hand, in the mounting
ステップＳ４２に移行すると、制御部１１１は、表示部１０２上にライブビュー画像を表示する。図８は、ユーザの実視界と、表示部１０２の表示可能範囲内に表示されているライブビュー画像の、ユーザによる見え方を示している。図８に示すように、ユーザの実視界の右上にライブビュー画像が表示される。
In step S <b> 42, the
次いで、ステップＳ４４では、制御部１１１は、視線検出部１０８を介して、ユーザの視線検出を行う。この場合、視線検出部１０８は、ユーザが図８のライブビュー画像のどの位置を注視しているかを検出する。なお、ここでは、図９に示す円の領域をユーザが注視していたため、該円の領域をユーザが注視していた領域として検出する。
Next, in step S <b> 44, the
次いで、ステップＳ４６では、制御部１１１は、撮像装置２０側から半押し情報を受信したか否かを判断するが、ここでの判断が否定された場合には、ステップＳ４４に戻り、再度ユーザの視線検出を行う。一方、ステップＳ４６の判断が肯定された場合には、ステップＳ４８に移行する。
Next, in step S46, the
ところで、撮像装置２０側では、ステップＳ１４０の後、ステップＳ１４２において、制御部２１１は、ユーザによりレリーズスイッチが半押しされるまで待機しているので、ユーザによりレリーズスイッチが半押しされると、ステップＳ１４４に移行する。
By the way, on the side of the
ステップＳ１４４に移行すると、制御部２１１は、半押しがされたことを示す半押し情報を装着装置１０の制御部１１１に対して送信する。このようにして、ステップＳ１４４の処理が行われると、装着装置１０側では、ステップＳ４６の判断が肯定されるので、制御部１１１はステップＳ４８に移行する。ステップＳ４８に移行すると、制御部１１１は、ライブビュー画像のうちユーザが注視している箇所の情報を送信する。ここでは、制御部１１１は、図９の円の領域の位置情報（ライブビュー画像内での座標情報）を撮像装置２０の制御部２１１に対して送信する。なお、制御部１１１は、ステップＳ４８の後は、ステップＳ４４に戻る。
When the process proceeds to step S144, the
一方、撮像装置２０側では、ステップＳ１４４の後、ステップＳ１４６において、ユーザが注視している箇所の情報を受信するまで待機しているので、装着装置１０においてステップＳ４８の処理が行われたタイミングで、制御部２１１はステップＳ１４８に移行する。
On the other hand, on the
ステップＳ１４８に移行すると、制御部２１１は、レンズ駆動部２１２及び焦点検出部２１３を制御して、ユーザが注視している箇所の情報に基づいて、合焦動作を行う。この場合、制御部２１１は、注視している箇所を示す円の領域に基づいて、撮像画像のどの位置にフォーカスをあわせるかを決定する。撮像部１０１に含まれる撮像素子においては、図１０に示すように、複数（１１箇所）の焦点検出を行う矩形エリアが設定されているものとする。図１０において、制御部２１１は、例えば、注視している箇所（破線円の領域）と重なる範囲が最も大きい矩形エリア（図１０において太線にて示す領域）をフォーカスを合わせる位置として決定する。なお、これに限らず、例えば、注視している箇所（円の領域）と重なる全ての矩形エリアをフォーカスを合わせる位置として決定したり、注視している箇所の中心（円の領域の中心）が含まれる矩形エリアをフォーカスを合わせる位置として決定することもできる。制御部２１１は、レンズ駆動部２１２を介してフォーカスレンズを駆動し、決定した矩形エリアに対応する画像信号のコントラスト値に基づいて、オートフォーカスを実行する。
In step S148, the
なお、制御部２１１は、決定した矩形エリアの情報（ライブビュー画像内における合焦箇所の座標情報）を装着装置１０の制御部１１１に送信してもよい。この場合、制御部１１１は、図１１に示すように、受信した矩形エリアの情報（合焦箇所）をライブビュー画像に重ねて表示部１０２に表示してもよい。このようにすることで、ユーザは、フォーカスを合わせる位置を確認した上で、画像を撮像することができるようになる。なお、図９のユーザの注視箇所の表示と図１１の矩形エリア（フォーカスを合わせる位置）の表示においては、表示色などの表示形態を異ならせてもよい。
Note that the
次いで、ステップＳ１５０では、制御部２１１は、ユーザによってレリーズスイッチ２０３Ａが全押しされたか否かを判断する。ここでの判断が肯定された場合には、ステップＳ１５４において、制御部２１１は、撮像部２０１を用いた撮像動作を実行する。これにより、ユーザが注視していた箇所にフォーカスが合った状態で画像を撮像することができる。その後は、ステップＳ１４２に戻る。
Next, in step S150, the
一方、ステップＳ１５０の判断が否定された場合には、ステップＳ１５２に移行し、制御部２１１は、レリーズスイッチ２０３Ａの半押しが解除されたか否かを判断する。ここでの判断が否定された場合、すなわち、レリーズスイッチ２０３Ａの半押しが維持されている場合には、ステップＳ１５０に戻るが、肯定された場合、すなわち、半押しが解除された場合には、ステップＳ１４２に戻る。
On the other hand, if the determination in step S150 is negative, the process proceeds to step S152, and the
その後は、連携撮影モードが解除されるまで、装着装置１０の制御部１１１は、ステップＳ４４〜Ｓ４８の処理・判断を繰り返し、撮像装置２０の制御部２１１は、ステップＳ１４２〜Ｓ１５４の処理・判断を繰り返す。
Thereafter, the
以上、詳細に説明したように、本第１の実施形態によると、表示部１０２は、撮像装置２０が撮像したライブビュー画像をユーザの目の近傍に表示し、視線検出部１０８は、ライブビュー画像を表示したときのユーザの視線を検出する。そして、制御部１１１は、通信部１１０を介して視線検出部１０８の検出結果に応じた情報（ユーザが注視している箇所の情報）を撮像装置２０に送信する。これにより、撮像装置２０では、ユーザが注視している箇所の情報に基づいた合焦動作を行うことで、ユーザが注視している箇所にフォーカスを合わせた状態で画像を撮像することが可能となる。
As described above in detail, according to the first embodiment, the
また、本第１の実施形態の撮像装置２０は、装着装置１０から送信されてきたユーザの視線の情報に基づいて撮像を行うことで、ユーザが所望する画像を撮像することができる。
In addition, the
また、本第１の実施形態では、装着装置１０は、ユーザを認証する人物認証部１０９を備えており、撮像装置２０の制御部２１１は、撮像装置２０の人物認証部２１０の認証結果と、人物認証部１０９の認証結果が一致した場合に、連携撮影モードを実行するための通信を開始する。これにより、適切なユーザが装着装置１０を装着し、撮像装置２０を保持した場合に、連携撮影モードを実行することが可能となる。
In the first embodiment, the mounting
また、本第１の実施形態では、通信ができない場合に、表示部１０２又は２０２に、通信不可のメッセージを表示する（Ｓ１３０）ので、ユーザは、表示部１０２又は２０２を参照することで、連携撮影モードを実行できないことを認識することが可能となる。
In the first embodiment, when communication is not possible, a message indicating that communication is not possible is displayed on the
また、本第１の実施形態では、ライブビュー画像が装着装置１０の表示部１０２に表示されるので、撮像装置２０に表示部２０２を設けなくてもよくなる。これにより、撮像装置２０の製造コストや部品点数の削減、使用電力の低減などを図ることが可能となる。
In the first embodiment, since the live view image is displayed on the
なお、上記第１の実施形態では、図５のステップＳ１２４〜Ｓ１３２の処理・判断（装着装置１０の認証結果と撮像装置２０の認証結果の照合処理）を撮像装置２０の制御部２１１が実行する場合について説明したが、これに限らず、装着装置１０の制御部１１１が実行することとしてもよい。
In the first embodiment, the
（変形例（その１））
ここで、上記第１の実施形態の変形例（その１）について、図１２〜図１４に基づいて、説明する。本変形例（その１）においては、撮像装置２０の制御部２１１は、画像認識技術を用いて、ライブビュー画像内の主要被写体を検出する。例えば、図１２に示すように、ユーザの実視界に犬が存在しており、装着装置１０の表示部１０２の表示可能範囲にライブビュー画像として犬の画像が表示されていたとする（図６のＳ４２）。この場合、制御部２１１は、画像認識技術を用いて、ライブビュー画像の中から犬の顔の範囲を検出しておく。
(Modification (Part 1))
Here, the modification (the 1) of the said 1st Embodiment is demonstrated based on FIGS. 12-14. In the present modification (No. 1), the
そして、ユーザがレリーズスイッチを半押しし（図６のステップＳ１４２：肯定）、装着装置１０の制御部１１１が、ライブビュー画像のうち、ユーザが注視している箇所の情報（座標情報）を撮像装置２０の制御部２１１に送信すると（図６のＳ４８）、制御部２１１は、ユーザが注視している箇所が犬の顔の範囲内であるか否かを判断する。ここで、図１３（ａ）に示すようにユーザが注視している箇所が犬（主要被写体）の顔の範囲内になかった場合には、ライブビュー画像を変更せずに、第１の実施形態と同様、制御部２１１は、合焦動作（図６のＳ１４８）や撮像動作（図６のＳ１４８）を実行する。
Then, the user presses the release switch halfway (step S142 in FIG. 6: affirmative), and the
一方、図１３（ｂ）に示すように、ユーザが注視している箇所が犬（主要被写体）の顔の範囲内にあった場合には、制御部２１１は、犬の顔を含む所定大きさ範囲をライブビュー画像から切り出し、装着装置１０の制御部１１１に対して送信する。すなわち、制御部２１１は、犬の顔の拡大画像を制御部１１１に送信する。制御部１１１は、図１４（ａ）に示すように、表示部１０２に表示するライブビュー画像を拡大画像に切り替え、再度、視線検出を実行する。この場合、拡大画像上で視線検出を行うため、ユーザの視線が犬の目に向けられているのか、鼻に向けられているのかなどを細かく検出することができる。したがって、撮像装置２０の制御部２１１は、ユーザの好みに合わせて、適切なフォーカス合わせを行うことが可能となる。
On the other hand, as shown in FIG. 13B, when the portion being watched by the user is within the face range of the dog (main subject), the
制御部２１１は、フォーカス合わせを行ったタイミングで、図１４（ｂ）に示すようなライブビュー画像を再度装着装置１０の制御部１１１に送信する。この場合、制御部１１１は、表示部１０２の表示を図１４（ａ）から図１４（ｂ）に切り替える。これにより、ユーザは、撮像装置２０の撮像範囲（構図）及び合焦箇所を確認したうえで、撮像を行うことが可能となる。
The
なお、上記変形例（その１）では、ライブビュー画像として、最初に図１２に示す画像を表示する場合について説明したが、これに限らず、最初から図１４（ａ）に示す画像を表示するようにしてもよい。 In the modification (part 1), the case where the image shown in FIG. 12 is first displayed as the live view image has been described. However, the present invention is not limited to this, and the image shown in FIG. You may do it.
なお、ライブビュー画像から犬（主要被写体）の顔を含む所定大きさ範囲を切り出す処理は、ライブビュー画像を受信した装着装置１０の制御部１１１が行うこととしてもよい。
The process of cutting out a predetermined size range including the face of the dog (main subject) from the live view image may be performed by the
（変形例（その２））
次に、上記第１の実施形態の変形例（その２）について図１５に基づいて説明する。本変形例（その２）では、ライブビュー画像内に主要被写体が複数含まれている場合について説明する。
(Modification (Part 2))
Next, a modification (No. 2) of the first embodiment will be described with reference to FIG. In this modification (part 2), a case where a plurality of main subjects are included in the live view image will be described.
本変形例（その２）においては、撮像装置２０の制御部２１１は、画像認識技術を用いて、ライブビュー画像内の複数の主要被写体を検出する。例えば、図１５（ａ）に示すように、ユーザの実視界に犬及び猫が存在しており、装着装置１０の表示部１０２の表示可能範囲にライブビュー画像として犬及び猫の画像が表示されていたとする（図６のＳ４２）。この場合、制御部２１１は、画像認識技術を用いて、ライブビュー画像の中から犬の顔の範囲及び猫の顔の範囲を検出する。
In the second modification (part 2), the
そして、ユーザがレリーズスイッチを半押した場合には、撮像装置２０の制御部２１１は、犬の顔を含む所定大きさ範囲及び猫の顔を含む所定大きさ範囲をライブビュー画像から切り出し、装着装置１０の制御部１１１に対して送信する。制御部１１１は、図１５（ｂ）に示すように、表示部１０２に表示するライブビュー画像を犬の顔部分の画像及び猫の顔部分の画像に切り替え、視線検出部１０８を介して視線検出し、視線検出結果を制御部２１１に送信する。この場合、制御部２１１は、ユーザの視線が犬の目に向けられているのか、犬の鼻に向けられているのか、猫の目に向けられているのか、猫の鼻に向けられているのか、等を細かく検出することができる。したがって、撮像装置２０の制御部２１１は、ユーザの好みに合わせて、適切なフォーカス合わせを行うことが可能となる。
When the user presses the release switch halfway, the
制御部２１１は、フォーカス合わせを行ったタイミングで、図１５（ａ）に示すようなライブビュー画像を再度装着装置１０の制御部１１１に送信する。この場合、制御部１１１は、表示部１０２の表示を図１５（ｂ）から図１５（ａ）に切り替える。これにより、ユーザは、撮像装置２０の撮像範囲（構図）を確認したうえで、撮像を行うことが可能となる。
The
なお、上記変形例（その２）においても、図１５（ａ）のライブビュー画像上でユーザの視線検出を行い、ユーザの視線が、主要被写体（犬や猫の顔）に向いている場合に、図１５（ｂ）に示すような表示を行うようにしてもよい。 Note that, in the second modification as well, when the user's line of sight is detected on the live view image of FIG. 15A and the user's line of sight faces the main subject (the face of a dog or cat). The display as shown in FIG. 15B may be performed.
なお、上記第１の実施形態及び変形例では、装着装置１０と撮像装置２０が直接通信する場合について説明したが、これに限らず、図１６に示すように、装着装置１０と撮像装置２０は、サーバ３０を介して通信することとしてもよい。サーバ３０は、制御部３４と通信部３２とを有する。図１６のようにサーバ３０を利用する場合には、例えば、図５のステップＳ１２４〜Ｓ１３２の処理・判断（装着装置１０の認証結果と撮像装置２０の認証結果の照合処理）などをサーバ３０の制御部３４が行うこととしてもよい。この場合、制御部３４は、通信部３２を介して各装置の認証結果を取得するようにすればよい。また、図１６のようにサーバ３０を利用する場合には、例えば、図６の処理において、ユーザが注視している箇所に基づいてフォーカス合わせを行う位置を決定する処理などをサーバ３０の制御部３４が行うこととしてもよい。
In the first embodiment and the modification, the case where the mounting
なお、上記第１の実施形態では、装着装置１０における人物認証においては、虹彩情報（虹彩の画像）を用いる場合について説明したが、これに限らず、その他の生体情報（例えば、網膜情報など）を用いることとしてもよい。なお、撮像装置２０における人物認証においては、指紋情報を用いる場合について説明したが、これに限らず、その他の生体情報（静脈パターン）などを用いることとしてもよい。
In the first embodiment, the case where the iris information (iris image) is used in the person authentication in the mounting
《第２の実施形態》
次に、第２の実施形態について、図１７〜図２３に基づいて、詳細に説明する。本第２の実施形態では、装着装置１０が、図２に代えて、図１７に示すような構成を有している。装着装置１０を装着したユーザは、図１８に示す表示可能範囲において、表示部１０２が投影した画像を視認できるとともに、外界像をシースルーで視認することができるようになっている。表示部１０２は、プロジェクタ、及びプロジェクタからの投影像をユーザの目に導くためのプリズムを有する。
<< Second Embodiment >>
Next, a second embodiment will be described in detail with reference to FIGS. In the second embodiment, the mounting
なお、本第２の実施形態では、表示部１０２の表示可能範囲（図１８の矩形範囲）は、一例として、３５ｍｍ判換算で焦点距離８５ｍｍのレンズが装着された撮像装置で撮像可能な範囲であるものとする。なお、本第２の実施形態の装着装置と同様の構成については、例えば、特開２０１３−２００５５３号公報に開示されている。
In the second embodiment, the displayable range (rectangular range in FIG. 18) of the
その他の装着装置１０の構成及び、撮像装置２０の構成等については、上述した第１の実施形態と同様となっている。
Other configurations of the mounting
次に、図１９のフローチャートに沿って、その他図面を適宜参照しつつ、本第２の実施形態における連携撮影モードでの装着装置１０及び撮像装置２０の処理について、詳細に説明する。なお、図１９のフローチャートでは、図６の処理と異なる処理を太線枠にて示している。以下においては、図６の処理と異なる処理を中心に説明する。なお、本第２の実施形態においても、ユーザは、一例として、図７に示すように、撮像装置２０を身体の前で構えているものとする。
Next, processing of the mounting
本第２の実施形態の連携撮影処理（図１９）では、まず、撮像装置２０の制御部２１１が、ライブビュー画像の送信を開始すると（ステップＳ１４０）、装着装置１０の制御部１１１は、ステップＳ４３Ａにおいて、撮像装置２０の撮影範囲を特定する。具体的には、制御部１１１は、装着装置１０の撮像部１０１で撮像されている画像と、ライブビュー画像とを比較し、撮像装置２０の撮影範囲がユーザの実視界のどの範囲に相当するのかを特定する。
In the cooperative shooting process (FIG. 19) of the second embodiment, first, when the
次いで、ステップＳ４３Ｂでは、制御部１１１は、撮像装置２０の撮影範囲を表示部１０２上に表示することが可能か否かを判断する。例えば、図２０に示すように、表示可能範囲内に撮像装置２０の撮影範囲が含まれる場合（撮影範囲が、例えば３５ｍｍ判換算で焦点距離１００ｍｍのレンズが装着された撮像装置で撮影可能な範囲である場合）には、表示部１０２に撮像装置２０の撮影範囲を表示できるので、ステップＳ４３Ｂの判断は肯定される。一方、図２１（ａ）に示すように、表示可能範囲内に撮像装置２０の撮影範囲が含まれない場合（撮影範囲が、例えば３５ｍｍ判換算で焦点距離５０ｍｍのレンズが装着された撮像装置で撮影可能な範囲である場合）には、ステップＳ４３Ｂの判断は否定される。なお、撮像装置２０の撮影範囲の一部が表示可能範囲から外れる場合にも、ステップＳ４３Ｂの判断は否定される。
Next, in step S43B, the
ステップＳ４３Ｂの判断が肯定され、ステップＳ４３Ｃに移行すると、制御部１１１は、撮像装置２０の撮影範囲が所定大きさよりも小さいか否かを判断する。なお、所定大きさとは、例えば、面積にして、表示部１０２の表示可能範囲の半分又は１／３程度の大きさであるものとする。ここでの判断が否定された場合、すなわち、撮像装置２０の撮影範囲が所定大きさ以上である場合には、ステップＳ４３Ｄに移行し、制御部１１１は、撮像装置２０の撮影範囲を表示部１０２上に表示する。例えば、表示部１０２の表示可能範囲内には、図２０に示すように、撮像装置２０の撮影範囲が表示される。
When the determination in step S43B is affirmed and the process proceeds to step S43C, the
次いで、ステップＳ４４では、制御部１１１は、視線検出部１０８を介して、ユーザの視線検出を行う。この場合、視線検出部１０８は、ユーザが図２０の撮像装置２０の撮影範囲内のどの位置を注視しているかを検出する。なお、ここでは、図２０に示す円の領域をユーザが注視していたため、該円の領域をユーザが注視していた箇所として検出する。そして、次のステップＳ４６では、制御部１１１は、撮像装置２０側から半押し情報を受信したか否かを判断するが、ここでの判断が否定された場合には、ステップＳ４３Ｂに戻る。
Next, in step S <b> 44, the
一方、図２１（ａ）に示すように、撮像装置２０の撮影範囲を表示できず、ステップＳ４３Ｂの判断が否定された場合には、ステップＳ４３Ｅに移行する。ステップＳ４３Ｅでは、制御部１１１は、図２１（ｂ）に示すようにライブビュー画像を表示部１０２上に表示する。そして、ステップＳ４４では、制御部１１１は、視線検出部１０８を介して、ユーザの視線検出を行う。この場合、視線検出部１０８は、ユーザが図２１（ｂ）のライブビュー画像のどの位置を注視しているかを検出する。なお、ここでは、図２１（ｂ）に示す円の領域をユーザが注視していたため、該円の領域をユーザが注視していた箇所として検出する。
On the other hand, as shown to Fig.21 (a), when the imaging | photography range of the
また、図２２（ａ）に示すように、撮像装置２０の撮影範囲が所定大きさよりも小さく、ステップＳ４３Ｃの判断が肯定された場合にも、制御部１１１は、ステップＳ４３Ｅに移行する。ステップＳ４３Ｅでは、制御部１１１は、図２２（ｂ）に示すようにライブビュー画像を表示部１０２上に表示する。この場合、ライブビュー画像が拡大表示された状態となる。そして、ステップＳ４４では、制御部１１１は、視線検出部１０８を介して、ユーザの視線検出を行う。この場合、視線検出部１０８は、ユーザが図２２（ｂ）のライブビュー画像のどの位置を注視しているかを検出する。なお、ここでは、図２２（ｂ）に示す円の領域をユーザが注視していたため、該円の領域をユーザが注視していた箇所として検出する。
In addition, as illustrated in FIG. 22A, also when the shooting range of the
図１９のその他の処理は、第１の実施形態（図６）と同様となっている。 Other processes in FIG. 19 are the same as those in the first embodiment (FIG. 6).
以上、詳細に説明したように、本第２の実施形態によると、図１７に示すような装着装置１０を用いた場合でも、第１の実施形態と同様の効果を得ることができる。また、本第２の実施形態では、撮像装置２０の撮影範囲を見やすく表示することができるため、ユーザは、撮影範囲を容易に認識することができる。また、ライブビュー画像を大きく表示することで、視線検出の精度を向上することも可能である。
As described above in detail, according to the second embodiment, even when the mounting
なお、上記第２の実施形態では、図２２（ａ）のように撮像装置２０の撮影範囲が所定大きさよりも小さい場合に、図２２（ｂ）に示すようにライブビュー画像を表示部１０２上に拡大表示する場合について説明したが、これに限られるものではない。例えば、図２２（ａ）のように、撮像装置２０の撮影範囲を表示部１０２上に表示するようにしてもよい。
In the second embodiment, when the shooting range of the
なお、上記第１、第２の実施形態では、装着装置１０に表示部１０２が設けられている場合について説明したが、これに限らず、例えば、表示部１０２に代えて、コンタクトレンズ型の表示装置をユーザが装着するようにしてもよい。この場合、表示装置の表示範囲は、ユーザの実視野をほぼカバーすることができるので、図２３に示すように、撮像装置２０の撮影範囲が広い場合（撮影範囲が、例えば３５ｍｍ判換算で焦点距離２１ｍｍのレンズが装着された撮像装置で撮影可能な範囲である場合）でも、撮像装置２０の撮影範囲を表示することが可能となる。なお、図２３の場合でも、撮像装置２０の撮影範囲が所定大きさよりも小さい場合には、図２２（ａ）と同様、ライブビュー画像を拡大表示し、視線検出を行うようにしてもよい。
In the first and second embodiments, the case where the
なお、上記第１、第２の実施形態では、例えば、装着装置１０の撮像部１０１により撮像された画像を表示部１０２に表示し、表示部１０２に表示された画像のうちユーザがどの位置を注視したかを検出することとしてよい。
In the first and second embodiments, for example, an image captured by the
なお、上記第１、第２の実施形態の装着装置１０において、表示部１０２を右目及び左目に対応して２つ設け、一方に撮像装置２０のライブビュー画像、他方に装着装置１０の撮像部１０１で撮像された画像を表示させることとしてもよい。そして、視線検出（Ｓ４４）の際には、ユーザがいずれか一方の目で（片目をつぶった状態で）画像のどの位置を注視したかを検出するようにしてもよい。
In the mounting
なお、上記第２の実施形態では、撮像装置２０のライブビュー画像を装着装置１０に送信し、装着装置１０がライブビュー画像に基づいて撮像装置２０の撮影範囲を特定し、表示する場合について説明したが、これに限られるものではない。例えば、撮像装置２０の焦点距離の情報を装着装置１０に送信し、装着装置１０が受信した焦点距離の情報に基づいて撮像装置２０の撮影範囲を特定し、表示することとしてもよい。
In the second embodiment, the case where the live view image of the
≪第３の実施形態≫
次に、第３の実施形態に係る撮像システムについて、図２４〜図２６に基づいて説明する。なお、本第３の実施形態の撮像システムの構成は、第１，２の実施形態（図１）と同様であるので、説明は省略するものとする。
<< Third Embodiment >>
Next, an imaging system according to a third embodiment will be described with reference to FIGS. Note that the configuration of the imaging system of the third embodiment is the same as that of the first and second embodiments (FIG. 1), and the description thereof will be omitted.
（連携撮影処理）
以下、本第３の実施形態の撮像システムにより実行される連携撮影処理について、図２４のフローチャートに沿って説明する。なお、本実施形態では、第２の実施形態と同様の装着装置１０を装着したユーザは、図２５（ａ）に示すように、身体の前で撮像装置２０を構えた状態で、図２５（ｂ）に示すように撮像装置２０の姿勢（撮像方向）を変更するものとする。なお、図２４の処理が行われる前提として、図４、図５の準備処理が行われ、装着装置１０と撮像装置２０との間における連携撮影モードを実行するための通信が開始されているものとする。なお、表示部１０２に代えて、コンタクトレンズ型の表示装置をユーザが装着することとしてもよい。
(Cooperative shooting process)
Hereinafter, the cooperative shooting process executed by the imaging system of the third embodiment will be described with reference to the flowchart of FIG. In this embodiment, a user wearing the same mounting
図２４の処理では、撮像装置２０の制御部２１１は、ステップＳ１６０において、ユーザから連携撮影モードの設定要求があるまで待機する。同様に、装着装置１０の制御部１１１は、ステップＳ６０において、ユーザから連携撮影モードの設定要求があるまで待機する。この場合、ユーザから連携撮影モードの設定要求が操作部１０３や２０３から入力されると、ステップＳ１６２及びＳ６２に移行する。
In the process of FIG. 24, the
ステップＳ１６２では、制御部２１１は、装着装置１０の制御部１１１に対するライブビュー画像の送信を開始する。一方、装着装置１０では、制御部１１１は、ステップＳ６２において撮像装置２０側からライブビュー画像を受信するまで待機しているので、撮像装置２０側においてステップＳ１６２が実行されたタイミングで、ステップＳ６４に移行する。
In step S <b> 162, the
ステップＳ６４に移行すると、制御部１１１は、表示部１０２にライブビュー画像の表示を開始し、次のステップＳ６６において、連携撮影モード開始メッセージを表示部１０２に表示する。なお、ステップＳ６４とステップＳ６６の順番は逆であってもよい。ここで、連携撮影モード開始メッセージを見たユーザは、図２５（ｂ）に示すように、撮像装置２０の撮像方向を変更する動作（往復動作）を開始するものとする。なお、ライブビュー画像は、撮像装置２０側から送信され続けるため、ユーザが撮像装置２０の撮像方向を変更している間も、表示部１０２のライブビュー画像は更新され続ける。図２６（ａ）、図２６（ｂ）には、ユーザが撮像方向を変更している間に表示部１０２に表示されるライブビュー画像の一例が示されている。
In step S64, the
次いで、ステップＳ６８では、制御部１１１は、ユーザによる所定の動作を検出するまで待機する。ここでの所定の動作とは、ユーザが撮像を実行すべきと判断した場合に行う予め定めた動作であり、例えば、所定回数のまばたきなどであるものとする。ユーザは、ライブビュー画像を見て、撮像したい構図になったタイミング（例えば、図２６（ｂ）に示すような構図になったタイミング）で、所定回数のまばたきを実行するものとする。
Next, in step S68, the
制御部１１１は、瞳撮像部１０７の撮像画像からユーザが所定回数まばたきをしたことを検出した場合に、ステップＳ７０に移行する。そして、ステップＳ７０では、制御部１１１は、通信部１１０を介して、撮像装置２０の制御部２１１に対して撮像指示を送信する。以上により、制御部１１１による図２４の処理は終了する。
When the
一方、撮像装置２０においては、ステップＳ１６２の後、ステップＳ１６４において、装着装置１０側から撮像指示を受信するまで待機している。したがって、装着装置１０側において前述したステップＳ７０の処理が実行されたタイミングで、制御部２１１は、ステップＳ１６６に移行する。
On the other hand, in step S162, the
ステップＳ１６６に移行すると、制御部２１１は、撮像指示を受信したタイミングにおける撮像装置２０の撮像方向を、方位センサ２０８から取得する。次いで、ステップＳ１６８では、方位センサ２０８から検出結果（撮像方向）を取得し、現在の撮像方向がステップＳ１６６で撮像した撮像方向となるまで待機する。なお、ステップＳ１６６とステップＳ１６８の間の時間が短い場合には、ステップＳ１６６の直後にステップＳ１６８の判断は肯定されるが、ステップＳ１６６とステップＳ１６８の間の時間が長い、又はユーザが撮像装置２０を動かす速度が速い場合には、ステップＳ１６６の後、撮像装置２０の撮像方向がステップＳ１６６で取得した撮像方向と再度一致した段階で、ステップＳ１６８の判断は肯定されることになる。
In step S166, the
ステップＳ１６８の判断が肯定された場合、ステップＳ１７０に移行し、制御部２１１は、撮像部２０１に指示を出し、画像を撮像する。これにより、撮像部２０１は、図２６（ｂ）のようなユーザが撮像したい画像を撮像することができる。以上により、制御部２１１による図２４の全処理が終了する。
When determination of step S168 is affirmed, it transfers to step S170 and the
その後は、制御部１１１，２１１は、図２４の処理を繰り返してもよいし、連携撮影モードが解除されるまで、ステップＳ６４以降及びステップＳ１６４以降の処理を繰り返してもよい。
Thereafter, the
以上、詳細に説明したように、本第３の実施形態によると、表示部１０２が、撮像装置２０の撮像部２０１が撮像したライブビュー画像をユーザの目の近傍に表示し、制御部１１１は、瞳撮像部１０７の撮像結果に基づいて、ユーザの特定の動作（例えば所定回数のまばたき）を検出する。そして、制御部１１１は、通信部１１０を介して、ユーザの特定の動作を検出したタイミングに応じた情報（撮像指示）を撮像装置２０に対して送信する。これにより、本実施形態では、ユーザがライブビュー画像を見て適切な撮像方向であると判断した場合に、特定の動作を行うことで、制御部１１１から撮像装置２０に対して撮像指示が送信されるので、撮像装置２０においては、適切な撮像方向の画像を撮像することが可能となる。これにより、ユーザは、撮像装置２０の表示部２０２を見ながらレリーズスイッチ２０３Ａを押すという動作を行わなくても、適切な撮像方向の画像撮像することができるため、表示部２０２を見づらい場合や、レリーズスイッチ２０３Ａを押しづらい場合などにおいて、撮像装置２０の使い勝手を向上することができる。
As described above in detail, according to the third embodiment, the
また、本第３の実施形態の撮像装置２０は、装着装置１０から送信されてきたユーザの特定の動作を検出したタイミングに応じた情報に基づいて撮像を行うことで、ユーザが所望する画像を撮像することができる。
In addition, the
また、本第３の実施形態においては、撮像装置２０に表示部２０２を設けなくてもよくなるため、撮像装置２０の製造コストや部品点数の削減、使用電力の低減などを図ることが可能となる。
In the third embodiment, the
なお、上記第３の実施形態では、制御部１１１は、撮像装置２０の撮像方向を変化させるユーザの所定の動作を検出した場合に、撮像指示を制御部２１１に対して送信する場合について説明したが、これに限られるものではない。例えば、制御部１１１は、撮像装置２０の撮像倍率をテレとワイドとの間で変化させているユーザが所定の動作を行ったことを検出した場合に、撮像指示を制御部２１１に対して送信するようにしてもよい。これにより、ユーザが表示部１０２においてライブビュー画像を見ながら、適切な撮像倍率になったと判断したときに所定の動作を行うことで、撮像装置２０では、適切な撮像倍率での撮像が行われることになる。
In the third embodiment, the case where the
なお、上記第３の実施形態では、制御部１１１は、ユーザの所定の動作として、所定回数のまばたきを検出する場合について説明したが、これに限らず、その他の目の動作を検出するようにしてもよい。その他の目の動作としては、瞳孔の変化等を採用することができる。また、制御部１１１は、目以外の動作（例えば、操作部１０３に対する入力動作）を検出してもよい。
In the third embodiment, the
なお、上記第３の実施形態では、ユーザが撮像装置２０の撮像方向を変更する場合について説明したが、これに限られるものではない。例えば、図２７に示すように、撮像装置２０を保持し、撮像装置２０の撮像方向を所定角度範囲で変更可能な駆動機構４２を有する保持装置４０（三脚や雲台など）を用いてもよい。この場合、ユーザが撮像装置２０から離れた位置にいても、ユーザは、撮像装置２０が所望の撮像方向を撮像したときに所定の動作を行うことで、所望の撮像方向の画像を簡易に撮像することが可能となる。
In the third embodiment, the case where the user changes the imaging direction of the
なお、本第３の実施形態においても、第１の実施形態と同様、図１６のようなサーバ３０を含む構成を採用してもよい。この場合、図２４の処理の一部をサーバ３０の制御部３４が行ってもよい。
Also in the third embodiment, a configuration including the
≪第４の実施形態≫
次に、第４の実施形態に係る撮像システムについて、図２８〜図３０に基づいて説明する。なお、本第４の実施形態の撮像システムの構成は、第１の実施形態（図１）と同様であるので、説明は省略するものとする。
<< Fourth Embodiment >>
Next, an imaging system according to a fourth embodiment will be described with reference to FIGS. Note that the configuration of the imaging system of the fourth embodiment is the same as that of the first embodiment (FIG. 1), and the description thereof will be omitted.
（連携撮影処理）
以下、本第４の実施形態の撮像システムにより実行される連携撮影処理について、図２８のフローチャートに沿って説明する。なお、本実施形態では、装着装置１０を装着したユーザは、図７のように、身体の前で撮像装置２０を構えるものとする。ただし、本第４の実施形態では、表示部１０２の表示可能範囲は、図２３で説明したのと同様、ユーザの実視野の範囲とほぼ同一の範囲であるものとする。なお、表示部１０２に代えて、コンタクトレンズ型の表示装置をユーザが装着することとしてもよい。なお、図２８の処理が行われる前提として、図４、図５の準備処理が行われ、装着装置１０と撮像装置２０との間における連携撮影モードを実行するための通信が開始されているものとする。
(Cooperative shooting process)
Hereinafter, the cooperative shooting process executed by the imaging system of the fourth embodiment will be described with reference to the flowchart of FIG. In the present embodiment, it is assumed that the user wearing the mounting
図２８の処理では、撮像装置２０の制御部２１１は、ステップＳ１８０において、ユーザから連携撮影モードの設定要求があるまで待機する。同様に、装着装置１０の制御部１１１は、ステップＳ８０において、ユーザから連携撮影モードの設定要求があるまで待機する。この場合、ユーザから連携撮影モードの設定要求が操作部１０３や２０３に入力されると、ステップＳ１８２及びＳ８２に移行する。
In the process of FIG. 28, the
装着装置１０では、ステップＳ８２において、制御部１１１は、撮影したい範囲の中心を見るよう表示部１０２上にメッセージを表示する。例えば、表示部１０２には、“撮影したい箇所を一定時間注視してください”などのメッセージを表示する。次いで、ステップＳ８４では、制御部１１１は、瞳撮像部１０７の画像に基づいてユーザの視線が定まるまで待機する。ユーザの視線が定まると、ステップＳ８６に移行し、制御部１１１は、瞳撮像部１０７、視線検出部１０８を介してユーザの視線検出を行う。
In the mounting
次いで、ステップＳ８８では、制御部１１１は、ステップＳ８６の視線検出結果に基づいて、ユーザが撮影したい範囲の中心を表示部１０２に表示する。具体的には、図２９（ａ）に示すように、ユーザが撮影したい範囲の中心を十字印で表示する。なお、十字印は、ユーザが見ている風景の上に重なるように（重畳して）表示される。ここで、ユーザが顔を動かすと、風景と十字印との位置関係がズレてしまう。したがって、制御部１１１は、方位センサ１０６の検出結果からユーザの顔が所定以上動いたことを検出した場合には、ステップＳ８２からやり直すようにしてもよい。
Next, in step S88, the
次いで、ステップＳ９０では、制御部１１１は、撮像装置２０に撮像可能範囲の送信を要求する。
Next, in step S90, the
一方、撮像装置２０では、ステップＳ１８０が肯定された後、制御部２１１は、撮像可能範囲の送信要求が撮像装置２０からあるまで（ステップＳ１８２が肯定されるまで）、あるいは撮像指示が撮像装置２０から送信されてくるまで（ステップＳ１８６が肯定されるまで）待機している。したがって、装着装置１０側においてステップＳ９０の処理が行われたタイミングで、ステップＳ１８２の判断が肯定され、ステップＳ１８４に移行する。
On the other hand, in step S <b> 180 in the
ステップＳ１８４に移行すると、制御部２１１は、撮像部２０１の撮像可能範囲を送信する。具体的には、撮像部２０１によって撮像されているライブビュー画像を装着装置１０の制御部１１１に送信する。
In step S184, the
ところで、装着装置１０側では、ステップＳ９０の後、ステップＳ９２において、撮像可能範囲を受信するまで待機している。したがって、撮像装置２０側においてステップＳ１８４の処理が実行されたタイミングで、制御部１１１は、ステップＳ９４に移行する。
By the way, on the mounting
ステップＳ９４に移行すると、制御部１１１は、撮像可能範囲を表示する。具体的には、制御部１１１は、撮像部１０１で撮像されている画像（視野画像）を取得し、該画像と、ステップＳ９２で受信した撮像可能範囲（ライブビュー画像）とを比較することで、撮像可能範囲がユーザの視界のどの範囲に相当するかを算出する。そして、制御部１１１は、算出した範囲の枠を、撮像可能範囲として表示部１０２に表示する。この場合、表示部１０２には、図２９（ｂ）に示すように、ステップＳ８８で表示された撮影したい範囲の中心（十字印）と、撮像可能範囲を示す枠と、撮像可能範囲の中心（×印）とがユーザが見ている風景の上に重なるように（重畳して）表示される。
In step S94, the
ユーザは、表示部１０２の表示（図２９（ｂ）の表示）を見ることで、撮影したい範囲の中心（十字印）と撮像可能範囲の中心（×印）とを合わせるように、撮像装置２０の撮像方向を変更することができる。 The user looks at the display on the display unit 102 (the display in FIG. 29B), so that the center (cross mark) of the range to be photographed matches the center (× mark) of the imageable range. The imaging direction can be changed.
ステップＳ９４の後は、制御部１１１は、ステップＳ９６に移行し、撮影可能範囲と撮影したい範囲の中心とが一致したか、すなわち十字印と×印とが一致したか否かを判断する。ここでの判断が否定された場合には、ステップ９０に戻り、ステップＳ９６の判断が肯定されるまで、ステップＳ９０〜Ｓ９６の処理・判断を繰り返す。このステップＳ９０〜Ｓ９６の繰り返しの間、ユーザが撮像装置２０の撮像方向を変更すれば、表示部１０２上で撮像可能範囲が移動する。また、ユーザが撮像装置２０の撮像倍率を変更すれば、表示部１０２上で撮像可能範囲の大きさが変更される。
After step S94, the
そして、ユーザによる撮像装置２０の撮像方向の変更により、図３０（ａ）に示すように、撮像可能範囲の中心と撮影したい範囲の中心とが一致した場合には、ステップＳ９６の判断が肯定され、制御部１１１は、ステップＳ９８に移行する。ステップＳ９８に移行すると、制御部１１１は、撮像指示を撮像装置２０の制御部２１１に対して送信し、図２８の全処理を終了する。
If the user changes the imaging direction of the
一方、撮像装置２０では、装着装置１０の制御部１１１から撮像指示を受信すると、ステップＳ１８６の判断が肯定されて、ステップＳ１８８に移行する。そして、ステップＳ１８８では、制御部１１１は、撮像部１０１を用いて撮像を実行する。これにより、撮像部１０１では、図３０（ｂ）に示すような、ユーザが撮影したい範囲の画像を撮像することが可能である。
On the other hand, when the
なお、図２８の処理では、撮影したい範囲と撮像可能範囲とが一致した場合に撮像が行われる場合について説明したが、これに限らず、制御部２１１は、ユーザが所定の動作を行った場合、例えばレリーズスイッチ２０３Ａを押した場合や、操作部１０３に対して操作を行った場合、所定回数まばたきをした場合などにおいて撮像を行うこととしてもよい。
In the processing of FIG. 28, the case where imaging is performed when the range to be captured and the imageable range match is described. However, the present invention is not limited thereto, and the
以上詳細に説明したように、本第４の実施形態によると、制御部１１１は、撮像装置の撮像領域の情報（撮像可能範囲）と、ユーザの視線に関する情報（撮影したい範囲）を取得し、表示部１０２を介して取得した情報をユーザの目の近傍に表示する。これにより、ユーザは、撮像可能範囲や撮影したい範囲を確認し、必要に応じて撮像装置２０の撮像方向を変更等した後に、撮像装置２０を用いた撮像を行うことが可能となる。これにより、ユーザは、表示部２０２を見づらい状況などにおいても、ユーザが所望する画像を簡易に撮像することが可能である。
As described above in detail, according to the fourth embodiment, the
また、本第４の実施形態の撮像装置２０は、装着装置１０から送信されてきた撮像指示に基づいて撮像を行うことで、ユーザが所望する画像を撮像することができる。
Further, the
また、本第４の実施形態においては、撮像装置２０に表示部２０２を設けなくてもよくなるため、撮像装置２０の製造コストや部品点数の削減、使用電力の低減などを図ることが可能となる。
In the fourth embodiment, the
また、本第４の実施形態では、制御部１１１は、撮像装置２０の撮像領域の情報と、ユーザの視線に関する情報とに基づいて、すなわち、撮像可能範囲と、撮影したい範囲とが一致した場合に、撮像装置２０を制御する情報を通信部１１０を介して撮像装置２０に送信する。これにより、ユーザはレリーズボタンを押すなどの操作を行わなくても、ユーザが所望する画像を撮像することが可能となる。
Further, in the fourth embodiment, the
なお、上記第４の実施形態では、表示部１０２に、撮影したい範囲の中心、撮像可能範囲の枠及び中心を表示する場合について説明したが、これに限られるものではない。例えば、撮影したい範囲の中心、撮像可能範囲の枠及び中心を装着装置１０の撮像部１０１が撮像した画像に付加（合成）した画像を、表示部１０２に表示するようにしてもよい。このようにしても、上記第４の実施形態と同様の効果を得ることができる。
In the fourth embodiment, the case where the center of the range to be photographed and the frame and center of the imageable range are displayed on the
なお、上記第４の実施形態では、制御部１１１は、表示部１０２上に、ユーザが撮像装置２０を動かす方向や動かす量を矢印（ベクトル）等により表示してもよい。これにより、ユーザは、直感的に撮像装置２０の撮像方向を調整することが可能となる。
In the fourth embodiment, the
なお、上記第４の実施形態では、ユーザが撮像装置２０の撮像方向を変更する場合について説明したが、これに限られるものではない。例えば、図２７に示すような、撮像装置２０を保持し、撮像装置２０の撮像方向を所定角度範囲で変更可能な駆動機構４２を有する保持装置４０（三脚や雲台など）を用いてもよい。この場合、保持装置４０は、図２９（ｂ）の撮影したい範囲の中心と撮像可能範囲の中心とが一致するように、撮像装置２０の撮像方向を駆動機構４２を用いて変更し、撮像を行うようにすればよい。これにより、自動的にユーザの所望する画像を撮像することが可能となる。
In the fourth embodiment, the case where the user changes the imaging direction of the
なお、上記第４の実施形態においても、第１の実施形態と同様、図１６のようなサーバ３０を含む構成を採用してもよい。この場合、図２８の処理の一部をサーバ３０の制御部３４が行ってもよい。また、サーバ３０の制御部３４は、装着装置１０からユーザが撮影したい範囲を取得するとともに、撮像装置２０から撮像可能範囲を取得し、これらの範囲を比較して、比較結果を装着装置１０や撮像装置２０、上述した保持装置に出力するようにしてもよい。
Also in the fourth embodiment, a configuration including the
なお、上記各実施形態では、撮像装置２０が操作部２０３を有する場合について説明したが、これに限らず、特に第３、第４の実施形態では、操作部２０３がなくてもよい。
In each of the above embodiments, the case where the
また、上記各実施形態では、風景を撮影する場合について説明したが、これに限らず、例えば、人物と会話しながら、会話している間に人物を撮影するのに用いてもよい。この場合、撮像装置２０を顔の前で構えなくても撮像ができるため、会話している人物の自然な表情を撮像することが可能となる。
In each of the above embodiments, the case where a landscape is photographed has been described. However, the present invention is not limited to this. For example, the present invention may be used to photograph a person while talking with the person. In this case, since the image can be taken without holding the
なお、装着装置１０の一部機能（撮像部１０１や表示部１０２、瞳撮像部１０７など）をフレーム１２０に設け、他の機能をスマートフォンや携帯電話、腕時計型の端末などに持たせるようにしてもよい。
It should be noted that some functions (such as the
なお、上記の処理機能は、コンピュータによって実現することができる。その場合、処理装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体（ただし、搬送波は除く）に記録しておくことができる。 The above processing functions can be realized by a computer. In that case, a program describing the processing contents of the functions that the processing apparatus should have is provided. By executing the program on a computer, the above processing functions are realized on the computer. The program describing the processing contents can be recorded on a computer-readable recording medium (except for a carrier wave).
プログラムを流通させる場合には、例えば、そのプログラムが記録されたＤＶＤ（Digital Versatile Disc）、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）などの可搬型記録媒体の形態で販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。 When the program is distributed, for example, it is sold in the form of a portable recording medium such as a DVD (Digital Versatile Disc) or a CD-ROM (Compact Disc Read Only Memory) on which the program is recorded. It is also possible to store the program in a storage device of a server computer and transfer the program from the server computer to another computer via a network.
プログラムを実行するコンピュータは、例えば、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。 The computer that executes the program stores, for example, the program recorded on the portable recording medium or the program transferred from the server computer in its own storage device. Then, the computer reads the program from its own storage device and executes processing according to the program. The computer can also read the program directly from the portable recording medium and execute processing according to the program. Further, each time the program is transferred from the server computer, the computer can sequentially execute processing according to the received program.
上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。 The above-described embodiment is an example of a preferred embodiment of the present invention. However, the present invention is not limited to this, and various modifications can be made without departing from the scope of the present invention.
１０ 装着装置
２０ 撮像装置
３０ サーバ
３２ 通信部
３４ 制御部
１０２ 表示部
１０７ 瞳撮像部
１０８ 視線検出部
１０９ 人物認証部
１１０ 通信部
１１１ 制御部
２０１ 撮像部
２０７ 通信部
２１０ 人物認証部
２１１ 制御部
DESCRIPTION OF
Claims (16)
前記ユーザの視線を検出する視線検出部と、
前記視線検出部の検出結果に応じた情報を前記外部機器に送信する送信部と、を備えたことを特徴とする電子機器。 A display unit capable of displaying an image captured by an external device in the vicinity of the user's eyes;
A line-of-sight detection unit for detecting the line of sight of the user;
An electronic apparatus comprising: a transmission unit that transmits information according to a detection result of the line-of-sight detection unit to the external device.
前記ユーザの特定の動作を検出する検出部と、
前記検出部が前記ユーザの特定の動作を検出したタイミングに応じた情報を前記外部機器に送信する送信部と、を備えたことを特徴とする電子機器。 A display unit capable of displaying an image captured by an external device in the vicinity of the user's eyes;
A detection unit for detecting a specific operation of the user;
An electronic apparatus comprising: a transmission unit configured to transmit information according to a timing at which the detection unit detects a specific operation of the user to the external device.
ユーザの視線に関する情報を入力する第２入力部と、
前記外部機器の撮像領域の情報と、前記ユーザの視線に関する情報とを前記ユーザの目の近傍に表示する表示部と、を備えたことを特徴とする電子機器。 A first input unit for inputting information of an imaging region of the external device;
A second input unit for inputting information relating to the user's line of sight;
An electronic apparatus comprising: a display unit that displays information on an imaging area of the external device and information on the user's line of sight in the vicinity of the user's eyes.
ユーザを認証する認証部と、
画像を撮像する撮像部と、を備えたことを特徴とする撮像装置。 A communication unit that communicates with the electronic device according to any one of claims 1 to 11,
An authentication unit for authenticating the user;
An imaging apparatus comprising: an imaging unit that captures an image.
画像を撮像する撮像部と、を備え、
前記撮像部は、前記電子機器の前記送信部から送信された情報に基づいた処理を実行することを特徴とする撮像装置。 A communication unit that communicates with the electronic device according to any one of claims 1, 3, and 7,
An imaging unit that captures an image,
The imaging apparatus performs processing based on information transmitted from the transmission unit of the electronic device.
撮像装置のユーザの認証結果を入力する第２認証結果入力部と、
前記第１認証結果入力部が入力した認証結果と、前記第２認証結果入力部が入力した認証結果とが一致した場合に、前記電子機器と前記撮像装置との間の通信を許可する制御部と、を備えたことを特徴とする通信装置。 The 1st authentication result input part which inputs the authentication result of the user of the electronic device as described in any one of Claims 1-11,
A second authentication result input unit for inputting an authentication result of the user of the imaging apparatus;
A control unit that permits communication between the electronic device and the imaging device when the authentication result input by the first authentication result input unit matches the authentication result input by the second authentication result input unit. And a communication device.
撮像装置の撮像領域の情報を入力する第２情報入力部と、
前記撮像装置の撮像領域の情報と、前記ユーザの視線に関する情報とを比較する比較部と、を備えたことを特徴とする通信装置。
A first information input unit that inputs information about the user's line of sight from the electronic device according to claim 6;
A second information input unit for inputting information of an imaging region of the imaging device;
A communication apparatus comprising: a comparison unit that compares information on an imaging region of the imaging apparatus and information on the line of sight of the user.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014037377A JP2015162822A (en) | 2014-02-27 | 2014-02-27 | Electronic apparatus, imaging apparatus, and communication apparatus |
| PCT/JP2015/051133 WO2015108161A1 (en) | 2014-01-17 | 2015-01-16 | Electronic apparatus, image pickup apparatus, and communication apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014037377A JP2015162822A (en) | 2014-02-27 | 2014-02-27 | Electronic apparatus, imaging apparatus, and communication apparatus |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2015162822A true JP2015162822A (en) | 2015-09-07 |
Family
ID=54185640
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014037377A Pending JP2015162822A (en) | 2014-01-17 | 2014-02-27 | Electronic apparatus, imaging apparatus, and communication apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2015162822A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019133280A (en) * | 2018-01-29 | 2019-08-08 | 株式会社リコー | Information processing system, information processing method and program |
| US10664991B2 (en) | 2016-07-20 | 2020-05-26 | Fujifilm Corporation | Attention position recognizing apparatus, image pickup apparatus, display apparatus, attention position recognizing method and program |
| JP2021029011A (en) * | 2019-08-09 | 2021-02-25 | キヤノン株式会社 | Imaging control device, control method of the imaging control device, program, and storage medium |
-
2014
- 2014-02-27 JP JP2014037377A patent/JP2015162822A/en active Pending
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10664991B2 (en) | 2016-07-20 | 2020-05-26 | Fujifilm Corporation | Attention position recognizing apparatus, image pickup apparatus, display apparatus, attention position recognizing method and program |
| JP2019133280A (en) * | 2018-01-29 | 2019-08-08 | 株式会社リコー | Information processing system, information processing method and program |
| JP7052382B2 (en) | 2018-01-29 | 2022-04-12 | 株式会社リコー | Information processing system, information processing method, and program |
| JP2021029011A (en) * | 2019-08-09 | 2021-02-25 | キヤノン株式会社 | Imaging control device, control method of the imaging control device, program, and storage medium |
| JP7286469B2 (en) | 2019-08-09 | 2023-06-05 | キヤノン株式会社 | IMAGING CONTROL DEVICE, CONTROL METHOD OF IMAGING CONTROL DEVICE, PROGRAM, STORAGE MEDIUM |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102494698B1 (en) | Method and apparatus for changing focus of camera | |
| KR20150133056A (en) | Mobile terminal and control method for the mobile terminal | |
| KR101595957B1 (en) | Mobile terminal and controlling system | |
| KR20170035237A (en) | Mobile terminal and method for controlling the same | |
| KR20160006053A (en) | Wearable glass-type device and control method of the wearable glass-type device | |
| KR20190008610A (en) | Mobile terminal and Control Method for the Same | |
| KR20180023310A (en) | Mobile terminal and method for controlling the same | |
| KR20150087606A (en) | Mobile terminal and method for controlling the same | |
| KR102240639B1 (en) | Glass type terminal and control method thereof | |
| KR102181208B1 (en) | Mobile terminal and control method for the mobile terminal | |
| JP2014138275A (en) | Imaging apparatus, remote operation terminal, camera system, method and program for controlling the imaging apparatus, and method and program for controlling the remote operation terminal | |
| KR20180040409A (en) | Mobile terminal and method for controlling the same | |
| KR102154528B1 (en) | Mobile terminal and method for controlling the same | |
| KR20160017463A (en) | Mobile terminal and method for controlling the same | |
| KR20160125674A (en) | Mobile terminal and method for controlling the same | |
| KR20180028701A (en) | Portable camera and method for controlling the same | |
| JP2015162822A (en) | Electronic apparatus, imaging apparatus, and communication apparatus | |
| KR20180020734A (en) | Mobile terminal and method for controlling the same | |
| CN113364945A (en) | Electronic apparatus, control method, and computer-readable medium | |
| KR20160070529A (en) | Wearable device | |
| KR20170082228A (en) | Mobile terminal and method for controlling the same | |
| US11442244B2 (en) | Imaging device | |
| KR20150084485A (en) | Mobile terminal and controlling method thereof | |
| JP2015136030A (en) | Imaging apparatus and electronic apparatus | |
| KR20170085358A (en) | Mobile terminal and control method for the mobile terminal |