JP2021029011A - Imaging control device, control method of the imaging control device, program, and storage medium - Google Patents

Imaging control device, control method of the imaging control device, program, and storage medium Download PDF

Info

Publication number
JP2021029011A
JP2021029011A JP2019147417A JP2019147417A JP2021029011A JP 2021029011 A JP2021029011 A JP 2021029011A JP 2019147417 A JP2019147417 A JP 2019147417A JP 2019147417 A JP2019147417 A JP 2019147417A JP 2021029011 A JP2021029011 A JP 2021029011A
Authority
JP
Japan
Prior art keywords
line
sight
control device
state
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019147417A
Other languages
Japanese (ja)
Other versions
JP2021029011A5 (en
JP7286469B2 (en
Inventor
翔平 細田
Shohei Hosoda
翔平 細田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2019147417A priority Critical patent/JP7286469B2/en
Publication of JP2021029011A publication Critical patent/JP2021029011A/en
Publication of JP2021029011A5 publication Critical patent/JP2021029011A5/ja
Application granted granted Critical
Publication of JP7286469B2 publication Critical patent/JP7286469B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Details Of Cameras Including Film Mechanisms (AREA)
  • Camera Bodies And Camera Details Or Accessories (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Focusing (AREA)
  • Viewfinders (AREA)

Abstract

To perform a photographing at an appropriate timing by using a sight line input without operation by a contact of a user.SOLUTION: An imaging control device includes: reception means of receiving a sight line input by a sight line of a user who looks display means which can view a subject to be image d by imaging means; and controlling means of setting it to a first state in accordance with satisfaction of a condition at a sight line position corresponding to that a gaze to a specific position of the display means exists in a first period, not performing photographing by the imaging means in accordance with the satisfaction of the specific condition in which a user can intendedly establish without being contacted to the imaging control device by the user if it is not in the first state, and performing the photographing by the imaging means in accordance with the satisfaction of the specific condition if it is in the first state.SELECTED DRAWING: Figure 3

Description

本発明は、撮像制御装置、撮像制御装置の制御方法、プログラム、記憶媒体に関する。 The present invention relates to an image pickup control device, a control method of the image pickup control device, a program, and a storage medium.

従来、撮影画面における撮影者の視線位置を検出し、検出された視線位置に基づいて合焦や露光動作を行う撮像装置が知られている。例えば、特許文献1では、合焦検出後の所定期間内に、焦点検出領域に対応する位置に注視があった場合、露光動作を開始する技術が開示されている。 Conventionally, there is known an imaging device that detects the line-of-sight position of a photographer on a shooting screen and performs focusing and exposure operations based on the detected line-of-sight position. For example, Patent Document 1 discloses a technique for starting an exposure operation when a gaze is made at a position corresponding to a focus detection region within a predetermined period after focusing detection.

特開平5−100148号公報Japanese Unexamined Patent Publication No. 5-100148

ここで、撮像装置(撮像制御装置)の所定のボタンに撮影者が触れることによって撮影が行われる場合は、撮影者と撮像装置との接触によって合焦の位置や被写体の位置が意図した位置からずれてしまう恐れがある。これに対して、特許文献1に記載の技術では、撮影者が撮像装置に触れずに撮影を行う場合には、注視位置に対応する位置に合焦をして、さらに当該合焦位置に注視があった場合に露光をすることができる。しかしながら、この技術では、撮影者が意図せずに任意の一点を見つめていることに応じて、合焦と露光とが連続的に実行されてしまう可能性がある。このため、撮影者が意図しないタイミングで撮影が行われてしまう可能性がある。 Here, when shooting is performed by the photographer touching a predetermined button of the image pickup device (imaging control device), the focus position or the subject position is from the intended position due to the contact between the photographer and the image pickup device. There is a risk of misalignment. On the other hand, in the technique described in Patent Document 1, when the photographer takes a picture without touching the image pickup device, the photographer focuses on the position corresponding to the gaze position and further gazes at the focus position. If there is, it can be exposed. However, with this technique, focusing and exposure may be performed continuously in response to the photographer unintentionally staring at an arbitrary point. Therefore, there is a possibility that the photographer may shoot at an unintended timing.

そこで、本発明は、ユーザーの接触による操作をすることなく、視線入力を用いて適切なタイミングで撮影することができることを目的とする。 Therefore, an object of the present invention is to be able to take a picture at an appropriate timing by using a line-of-sight input without performing an operation by contact with a user.

本発明の1つの態様は、
撮像制御装置であって、
撮像手段で撮像される被写体像を視認可能な表示手段を見るユーザーの視線による視線入力を受け付ける受付手段と、
前記表示手段の特定の位置への注視が第1の期間にわたってあったことに対応する視線位置の条件が満たされたことに応じて第1の状態に設定し、
前記第1の状態でなければ、前記撮像制御装置に対してユーザーが接触することなくユーザーが意図的に成立させることのできる特定条件が満たされたことに応じた前記撮像手段による撮影は行わず、
前記第1の状態であれば、前記特定条件が満たされたことに応じて前記撮像手段による撮影を行うように制御する制御手段と
を有することを特徴とする撮像制御装置である。
One aspect of the present invention is
It is an imaging control device
A reception means that accepts line-of-sight input from the user's line of sight looking at a display means that can visually view a subject image captured by the image-taking means,
The first state is set according to the condition of the line-of-sight position corresponding to the gaze at the specific position of the display means over the first period.
Unless it is in the first state, the image pickup means does not take a picture when a specific condition that the user can intentionally establish without contacting the image pickup control device is satisfied. ,
In the first state, the image pickup control device is characterized by having a control means for controlling shooting by the image pickup means according to the satisfaction of the specific condition.

本発明によれば、ユーザーの接触による操作をすることなく、視線入力を用いて適切なタイミングで撮影することができる。 According to the present invention, it is possible to take an image at an appropriate timing by using the line-of-sight input without performing an operation by contact with the user.

実施形態1に係るデジタルカメラの外観図である。It is an external view of the digital camera which concerns on Embodiment 1. FIG. 実施形態1に係るデジタルカメラのブロック図である。It is a block diagram of the digital camera which concerns on Embodiment 1. FIG. 実施形態1に係るデジタルカメラの撮影動作を示すフローチャートである。It is a flowchart which shows the photographing operation of the digital camera which concerns on Embodiment 1. 実施形態1に係るEVFの表示を示す図である。It is a figure which shows the display of the EVF which concerns on Embodiment 1. 実施形態2に係るデジタルカメラの撮影動作を示すフローチャートである。It is a flowchart which shows the photographing operation of the digital camera which concerns on Embodiment 2. 実施形態3,4に係るEVFの表示を示す図である。It is a figure which shows the display of the EVF which concerns on Embodiments 3 and 4. 実施形態3に係るデジタルカメラの撮影動作を示すフローチャートである。It is a flowchart which shows the shooting operation of the digital camera which concerns on Embodiment 3. 実施形態4に係るデジタルカメラの撮影動作を示すフローチャートである。It is a flowchart which shows the photographing operation of the digital camera which concerns on Embodiment 4.

[実施形態1]
<デジタルカメラ100の外観図>
以下、図面を参照して本発明の好適な実施形態を説明する。図1(a),1(b)に、本発明を適用可能な装置の一例としてのデジタルカメラ100の外観図を示す。図1(a)はデジタルカメラ100の前面斜視図であり、図1(b)はデジタルカメラ100の背面斜視図である。
[Embodiment 1]
<External view of digital camera 100>
Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings. 1 (a) and 1 (b) show an external view of a digital camera 100 as an example of a device to which the present invention can be applied. FIG. 1A is a front perspective view of the digital camera 100, and FIG. 1B is a rear perspective view of the digital camera 100.

表示部28は、デジタルカメラ100の背面に設けられた表示部(表示デバイス)であり、画像や各種情報を表示する。タッチパネル70aは、表示部28の表示面(タッチ操作面)に対するタッチ操作を検出することができる。ファインダー外表示部43は、デジタルカメラ100の上面に設けられた表示部であり、シャッター速度や絞りをはじめとするデジタルカメラ100の様々な設定値を表示する。シャッターボタン61は撮影指示を行うための操作部材である。モード切替スイッチ60は、各種モードを切り替えるための操作部材である。端子カバー40は、デジタルカメラ100を外部機器に接続するコネクタ(不図示)を保護するカバーである。 The display unit 28 is a display unit (display device) provided on the back surface of the digital camera 100, and displays images and various information. The touch panel 70a can detect a touch operation on the display surface (touch operation surface) of the display unit 28. The outside viewfinder display unit 43 is a display unit provided on the upper surface of the digital camera 100, and displays various set values of the digital camera 100 such as a shutter speed and an aperture. The shutter button 61 is an operating member for giving a shooting instruction. The mode changeover switch 60 is an operation member for switching various modes. The terminal cover 40 is a cover that protects a connector (not shown) that connects the digital camera 100 to an external device.

メイン電子ダイヤル71は回転操作部材であり、メイン電子ダイヤル71を回すことで、シャッター速度や絞りなどの設定値の変更等が行える。電源スイッチ72は、デジタルカメラ100の電源のONとOFFを切り替える操作部材である。サブ電子ダイヤル73は回転操作部材であり、サブ電子ダイヤル73を回すことで、選択枠(カーソル)の移動や画像送りなどが行える。4方向キー74は、上、下、左、右部分をそれぞれ押し込み可能に構成され、4方向キー74の押した部分に応じた処理が可能である。SETボタン75は、押しボタンであり、主に選択項目の決定などに用いられる。 The main electronic dial 71 is a rotation operation member, and by turning the main electronic dial 71, setting values such as a shutter speed and an aperture can be changed. The power switch 72 is an operating member that switches the power of the digital camera 100 on and off. The sub electronic dial 73 is a rotation operation member, and by turning the sub electronic dial 73, the selection frame (cursor) can be moved, an image can be fed, and the like. The four-direction key 74 is configured so that the up, down, left, and right portions can be pushed in, respectively, and processing can be performed according to the pressed portion of the four-way key 74. The SET button 75 is a push button and is mainly used for determining a selection item or the like.

動画ボタン76は、動画撮影(記録)の開始や停止の指示に用いられる。AEロックボタン77は押しボタンであり、撮影待機状態でAEロックボタン77を押下することにより、露出状態を固定することができる。拡大ボタン78は、撮影モードのライブビュー表示(LV表示)において拡大モードのONとOFFを切り替えるための操作ボタンである。拡大モードをONとしてからメイン電子ダイヤル71を操作することにより、ライブビュー画像(LV画像)の拡大や縮小を行える。再生モードにおいては、拡大ボタン78は、再生画像を拡大したり、その拡大率を増加させるたりするための操作ボタンとして機能する。再生ボタン79は、撮影モードと再生モードとを切り替えるための操作ボタンである。撮影モード中に再生ボタン79を押下することで再生モードに遷移し、記録媒体200(後述)に記録された画像のうち最新の画像を表示部28に表示させることができる。メニューボタン81はメニュー画面を表示させる指示操作を行うために用いられる押しボタンであり、メニューボタン81が押されると各種の設定が可能なメニュー画面が表示部28に表示される。ユーザーは、表示部28に表示されたメニュー画面と、4方向キー74やSETボタン75とを用いて直感的に各種設定を行うことができる。 The moving image button 76 is used to instruct the start and stop of moving image shooting (recording). The AE lock button 77 is a push button, and the exposure state can be fixed by pressing the AE lock button 77 in the shooting standby state. The enlargement button 78 is an operation button for switching ON / OFF of the enlargement mode in the live view display (LV display) of the shooting mode. By operating the main electronic dial 71 after turning on the enlargement mode, the live view image (LV image) can be enlarged or reduced. In the reproduction mode, the enlargement button 78 functions as an operation button for enlarging the reproduced image and increasing the enlargement ratio thereof. The playback button 79 is an operation button for switching between the shooting mode and the playback mode. By pressing the playback button 79 during the shooting mode, the playback mode can be entered, and the latest image among the images recorded on the recording medium 200 (described later) can be displayed on the display unit 28. The menu button 81 is a push button used for performing an instruction operation for displaying the menu screen, and when the menu button 81 is pressed, a menu screen on which various settings can be made is displayed on the display unit 28. The user can intuitively make various settings by using the menu screen displayed on the display unit 28 and the four-direction key 74 and the SET button 75.

通信端子10は、デジタルカメラ100がレンズユニット150(後述;着脱可能)側と通信を行うための通信端子である。接眼部16は、接眼ファインダー(覗き込み型のフ
ァインダー)の接眼部であり、ユーザーは、接眼部16を介してEVF29(後述)の内部の表示デバイス(以下、単にEVF29と称する)に表示された映像を視認することができる。接眼検知部57は、接眼部16にユーザー(撮影者)が接眼しているか否かを検知する接眼検知センサーである。蓋202は、記録媒体200(後述)を格納するスロットの蓋である。グリップ部90は、ユーザーがデジタルカメラ100を構える際に右手で握りやすい形状とした保持部である。グリップ部90を右手の小指、薬指、中指で握ってデジタルカメラ100を保持した状態で、右手の人差指で操作可能な位置にシャッターボタン61とメイン電子ダイヤル71が配置されている。また、同じ状態で、右手の親指で操作可能な位置に、サブ電子ダイヤル73が配置されている。サムレスト部91(親指待機位置)は、デジタルカメラ100の背面側の、どの操作部材も操作しない状態でグリップ部90を握った右手の親指を置きやすい箇所に設けられたグリップ部材である。サムレスト部91は、保持力(グリップ感)を高めるためのラバー部材などで構成される。
The communication terminal 10 is a communication terminal for the digital camera 100 to communicate with the lens unit 150 (described later; detachable) side. The eyepiece 16 is an eyepiece of an eyepiece finder (a look-through type finder), and a user can use the eyepiece 16 to display an internal display device (hereinafter, simply referred to as EVF29) of the EVF29 (described later). The displayed image can be visually recognized. The eyepiece detection unit 57 is an eyepiece detection sensor that detects whether or not the user (photographer) is in contact with the eyepiece unit 16. The lid 202 is a lid of a slot for storing the recording medium 200 (described later). The grip portion 90 is a holding portion having a shape that makes it easy for the user to hold the digital camera 100 with his / her right hand. The shutter button 61 and the main electronic dial 71 are arranged at positions that can be operated by the index finger of the right hand while holding the digital camera 100 by holding the grip portion 90 with the little finger, ring finger, and middle finger of the right hand. Further, in the same state, the sub electronic dial 73 is arranged at a position where it can be operated with the thumb of the right hand. The thumb rest portion 91 (thumb standby position) is a grip member provided on the back side of the digital camera 100 at a position where the thumb of the right hand holding the grip portion 90 can be easily placed without operating any operating member. The thumb rest portion 91 is composed of a rubber member or the like for increasing the holding force (grip feeling).

<デジタルカメラ100の構成ブロック図>
図2は、デジタルカメラ100の構成例を示すブロック図である。レンズユニット150は、交換可能な撮影レンズを搭載するレンズユニットである。レンズ103は通常、複数枚のレンズから構成されるが、図2では簡略して一枚のレンズのみで示している。通信端子6は、レンズユニット150がデジタルカメラ100側と通信を行うための通信端子であり、通信端子10は、デジタルカメラ100がレンズユニット150側と通信を行うための通信端子である。レンズユニット150は、これら通信端子6,10を介してシステム制御部50と通信する。そして、レンズユニット150は、内部のレンズシステム制御回路4によって絞り駆動回路2を介して絞り1の制御を行う。また、レンズユニット150は、レンズシステム制御回路4によってAF駆動回路3を介してレンズ103を変位させることで焦点を合わせる。
<Structure block diagram of digital camera 100>
FIG. 2 is a block diagram showing a configuration example of the digital camera 100. The lens unit 150 is a lens unit equipped with an interchangeable photographing lens. The lens 103 is usually composed of a plurality of lenses, but in FIG. 2, it is simply shown by only one lens. The communication terminal 6 is a communication terminal for the lens unit 150 to communicate with the digital camera 100 side, and the communication terminal 10 is a communication terminal for the digital camera 100 to communicate with the lens unit 150 side. The lens unit 150 communicates with the system control unit 50 via these communication terminals 6 and 10. Then, the lens unit 150 controls the diaphragm 1 via the diaphragm drive circuit 2 by the internal lens system control circuit 4. Further, the lens unit 150 is focused by the lens system control circuit 4 by displacing the lens 103 via the AF drive circuit 3.

シャッター101は、システム制御部50の制御で撮像部22の露光時間を自由に制御できるフォーカルプレーンシャッターである。 The shutter 101 is a focal plane shutter that can freely control the exposure time of the imaging unit 22 under the control of the system control unit 50.

撮像部22は、光学像を電気信号に変換するCCDやCMOS素子等で構成される撮像素子である。撮像部22は、システム制御部50にデフォーカス量情報を出力する撮像面位相差センサーを有していてもよい。 The image pickup unit 22 is an image pickup device composed of a CCD, a CMOS element, or the like that converts an optical image into an electric signal. The imaging unit 22 may have an imaging surface phase difference sensor that outputs defocus amount information to the system control unit 50.

画像処理部24は、A/D変換器23からのデータ、又は、メモリ制御部15からのデータに対し所定の処理(画素補間、縮小といったリサイズ処理、色変換処理、等)を行う。また、画像処理部24は、撮像した画像データを用いて所定の演算処理を行い、システム制御部50は、画像処理部24により得られた演算結果に基づいて露光制御や測距制御を行う。これにより,TTL(スルー・ザ・レンズ)方式のAF(オートフォーカス)処理、AE(自動露出)処理、EF(フラッシュプリ発光)処理、等が行われる。画像処理部24は更に、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてTTL方式のAWB(オートホワイトバランス)処理を行う。 The image processing unit 24 performs predetermined processing (resizing processing such as pixel interpolation and reduction, color conversion processing, etc.) on the data from the A / D converter 23 or the data from the memory control unit 15. Further, the image processing unit 24 performs a predetermined calculation process using the captured image data, and the system control unit 50 performs exposure control and distance measurement control based on the calculation result obtained by the image processing unit 24. As a result, TTL (through-the-lens) AF (autofocus) processing, AE (autoexposure) processing, EF (flash pre-flash) processing, and the like are performed. The image processing unit 24 further performs a predetermined calculation process using the captured image data, and performs a TTL-type AWB (auto white balance) process based on the obtained calculation result.

メモリ制御部15は、A/D変換器23、画像処理部24、メモリ32間のデータの送受信を制御する。A/D変換器23からの出力データは、画像処理部24及びメモリ制御部15を介してメモリ32に書き込まれる。あるいは、A/D変換器23からの出力データは、画像処理部24を介さずにメモリ制御部15を介してメモリ32に書き込まれる。メモリ32は、撮像部22によって得られA/D変換器23によりデジタルデータに変換された画像データや、表示部28やEVF29に表示するための画像データを格納する。メモリ32は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。 The memory control unit 15 controls the transmission / reception of data between the A / D converter 23, the image processing unit 24, and the memory 32. The output data from the A / D converter 23 is written to the memory 32 via the image processing unit 24 and the memory control unit 15. Alternatively, the output data from the A / D converter 23 is written to the memory 32 via the memory control unit 15 without going through the image processing unit 24. The memory 32 stores the image data obtained by the image pickup unit 22 and converted into digital data by the A / D converter 23, and the image data to be displayed on the display unit 28 and the EVF 29. The memory 32 has a storage capacity sufficient to store a predetermined number of still images, moving images for a predetermined time, and audio.

また、メモリ32は画像表示用のメモリ(ビデオメモリ)を兼ねている。メモリ32に書き込まれた表示用の画像データはメモリ制御部15を介して表示部28やEVF29により表示される。表示部28とEVF29のそれぞれは、LCDや有機EL等の表示器上で、メモリ制御部15からの信号に応じた表示を行う。A/D変換器23によってA/D変換されメモリ32に蓄積されたデータを表示部28またはEVF29に逐次転送して表示することで、ライブビュー表示(LV)が行える。以下、ライブビュー表示で表示される画像をライブビュー画像(LV画像)と称する。 Further, the memory 32 also serves as a memory (video memory) for displaying an image. The image data for display written in the memory 32 is displayed by the display unit 28 and the EVF 29 via the memory control unit 15. Each of the display unit 28 and the EVF 29 displays on a display such as an LCD or an organic EL according to a signal from the memory control unit 15. Live view display (LV) can be performed by sequentially transferring and displaying the data that has been A / D converted by the A / D converter 23 and stored in the memory 32 to the display unit 28 or the EVF 29. Hereinafter, the image displayed in the live view display is referred to as a live view image (LV image).

視線検出部160は、接眼部16におけるユーザーの視線を検出する。視線検出部160は、ダイクロイックミラー162、結像レンズ163、視線検知センサー164、視線検出回路165、赤外発光ダイオード166により構成される。なお、視線の検出に応じて、システム制御部50が所定の処理を実行することも可能であるため、視線検出部160は、操作部70の一部であるともいえる。 The line-of-sight detection unit 160 detects the user's line of sight in the eyepiece 16. The line-of-sight detection unit 160 includes a dichroic mirror 162, an imaging lens 163, a line-of-sight detection sensor 164, a line-of-sight detection circuit 165, and an infrared light emitting diode 166. It can be said that the line-of-sight detection unit 160 is a part of the operation unit 70 because the system control unit 50 can execute a predetermined process in response to the line-of-sight detection.

赤外発光ダイオード166は、ファインダー画面内におけるユーザーの視線位置を検出するための発光素子であり、ユーザーの眼球(目)161に赤外光を照射する。赤外発光ダイオード166から発した赤外光は眼球(目)161で反射し、その赤外反射光はダイクロイックミラー162に到達する。ダイクロイックミラー162は、赤外光だけを反射して、可視光を透過させる。光路が変更された赤外反射光は、結像レンズ163を介して視線検知センサー164の撮像面に結像する。結像レンズ163は、視線検知光学系を構成する光学部材である。視線検知センサー164は、CCD型イメージセンサ等の撮像デバイスから構成される。 The infrared light emitting diode 166 is a light emitting element for detecting the position of the user's line of sight in the finder screen, and irradiates the user's eyeball (eye) 161 with infrared light. The infrared light emitted from the infrared light emitting diode 166 is reflected by the eyeball (eye) 161 and the infrared reflected light reaches the dichroic mirror 162. The dichroic mirror 162 reflects only infrared light and transmits visible light. The infrared reflected light whose optical path has been changed is imaged on the imaging surface of the line-of-sight detection sensor 164 via the imaging lens 163. The imaging lens 163 is an optical member that constitutes a line-of-sight detection optical system. The line-of-sight detection sensor 164 is composed of an imaging device such as a CCD type image sensor.

視線検知センサー164は、入射された赤外反射光を電気信号に光電変換して視線検出回路165へ出力する。視線検出回路165は、視線検知センサー164の出力信号に基づき、ユーザーの眼球(目)161の動きからユーザーの視線位置を検出し、検出情報をシステム制御部50に出力する。 The line-of-sight detection sensor 164 photoelectrically converts the incident infrared reflected light into an electric signal and outputs it to the line-of-sight detection circuit 165. The line-of-sight detection circuit 165 detects the user's line-of-sight position from the movement of the user's eyeball (eye) 161 based on the output signal of the line-of-sight detection sensor 164, and outputs the detection information to the system control unit 50.

視線入力設定部167は、視線検出回路165(視線検出部160)による視線検出の有効または無効を設定する。または、視線入力設定部167は、システム制御部50の視線入力による処理の有効または無効を設定する。例えば、このような有効/無効の設定は、メニュー設定にて、操作部70に対する操作によってユーザーが任意に設定できる。 The line-of-sight input setting unit 167 sets whether to enable or disable the line-of-sight detection by the line-of-sight detection circuit 165 (line-of-sight detection unit 160). Alternatively, the line-of-sight input setting unit 167 sets whether to enable or disable the process by the line-of-sight input of the system control unit 50. For example, such a valid / invalid setting can be arbitrarily set by the user by operating the operation unit 70 in the menu setting.

視線検出回路165から受け取った検出情報に基づいて、システム制御部50は、ユーザーの視線がある領域に固定されている期間が所定の閾値を越えた場合に、その領域を注視していると判定する。従って、当該領域は、注視が行われた位置である注視位置(注視領域)であるといえる。なお、「視線がある領域に固定されている」とは、例えば、所定の期間経過するまでの間、視線の動きの平均位置が当該領域内にあり、かつ、ばらつき(分散)が所定値よりも少ないことである。なお、所定の閾値は、システム制御部50により任意に変更可能である。 Based on the detection information received from the line-of-sight detection circuit 165, the system control unit 50 determines that the user's line of sight is gazing at a certain area when the period fixed to the area exceeds a predetermined threshold value. To do. Therefore, it can be said that the region is the gaze position (gaze region) where the gaze is performed. In addition, "fixed in a region with a line of sight" means, for example, that the average position of the movement of the line of sight is within the region and the variation (dispersion) is greater than the predetermined value until a predetermined period elapses. Is also small. The predetermined threshold value can be arbitrarily changed by the system control unit 50.

ファインダー外表示部43には、ファインダー外表示部駆動回路44を介して、シャッター速度や絞りをはじめとするカメラの様々な設定値が表示される。 The outside viewfinder display unit 43 displays various settings of the camera, such as the shutter speed and the aperture, via the outside viewfinder display unit drive circuit 44.

不揮発性メモリ56は、電気的に消去・記録可能なメモリであり、例えば、FLash−ROM等である。不揮発性メモリ56には、システム制御部50の動作用の定数、プログラム等が記録される。ここでいうプログラムとは、本実施形態にて後述する各種フローチャートを実行するためのプログラムのことである。 The non-volatile memory 56 is a memory that can be electrically erased and recorded, and is, for example, a FLash-ROM or the like. The non-volatile memory 56 records constants, programs, and the like for the operation of the system control unit 50. The program referred to here is a program for executing various flowcharts described later in this embodiment.

システム制御部50は、少なくとも1つのプロセッサーまたは回路からなる制御部であ
り、デジタルカメラ100全体を制御する。システム制御部50は、前述した不揮発性メモリ56に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。システムメモリ52は例えばRAMであり、システム制御部50は、システム制御部50の動作用の定数、変数、不揮発性メモリ56から読み出したプログラム等をシステムメモリ52に展開する。また、システム制御部50は、メモリ32、表示部28等を制御することにより表示制御も行う。
The system control unit 50 is a control unit including at least one processor or circuit, and controls the entire digital camera 100. The system control unit 50 realizes each process of the present embodiment described later by executing the program recorded in the non-volatile memory 56 described above. The system memory 52 is, for example, a RAM, and the system control unit 50 expands the operating constants, variables, programs read from the non-volatile memory 56, and the like of the system control unit 50 into the system memory 52. The system control unit 50 also controls the display by controlling the memory 32, the display unit 28, and the like.

システムタイマー53は、各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。 The system timer 53 is a time measuring unit that measures the time used for various controls and the time of the built-in clock.

電源制御部80は、電池検出回路、DC−DCコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出などを行う。また、電源制御部80は、その検出結果及びシステム制御部50の指示に基づいてDC−DCコンバータを制御し、必要な電圧を必要な期間、記録媒体200を含む各部へ供給する。電源部30は、アルカリ電池やリチウム電池等の一次電池やNiCd電池やNiMH電池、Li電池等の二次電池、ACアダプター等からなる。 The power supply control unit 80 is composed of a battery detection circuit, a DC-DC converter, a switch circuit for switching a block to be energized, and the like, and detects whether or not a battery is installed, the type of battery, and the remaining battery level. Further, the power supply control unit 80 controls the DC-DC converter based on the detection result and the instruction of the system control unit 50, and supplies a necessary voltage to each unit including the recording medium 200 for a necessary period. The power supply unit 30 includes a primary battery such as an alkaline battery or a lithium battery, a secondary battery such as a NiCd battery, a NiMH battery, or a Li battery, an AC adapter, or the like.

記録媒体I/F18は、メモリカードやハードディスク等の記録媒体200とのインターフェースである。記録媒体200は、撮影された画像を記録するためのメモリカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。 The recording medium I / F18 is an interface with a recording medium 200 such as a memory card or a hard disk. The recording medium 200 is a recording medium such as a memory card for recording a captured image, and is composed of a semiconductor memory, a magnetic disk, or the like.

通信部54は、無線または有線ケーブルによって接続された外部機器との間で、映像信号や音声信号の送受信を行う。通信部54は無線LAN(Local Area Network)やインターネットとも接続可能である。また、通信部54は、Bluetooth(登録商標)やBluetooth Low Energyでも外部機器と通信可能である。通信部54は撮像部22で撮像した画像(LV画像を含む)や、記録媒体200に記録された画像を送信可能であり、外部機器から画像データやその他の各種情報を受信することができる。 The communication unit 54 transmits and receives video signals and audio signals to and from an external device connected by a wireless or wired cable. The communication unit 54 can also be connected to a wireless LAN (Local Area Network) and the Internet. The communication unit 54 can also communicate with an external device using Bluetooth (registered trademark) or Bluetooth Low Energy. The communication unit 54 can transmit an image (including an LV image) captured by the image pickup unit 22 and an image recorded on the recording medium 200, and can receive image data and various other information from an external device.

姿勢検知部55は、重力方向に対するデジタルカメラ100の姿勢を検知する。姿勢検知部55で検知された姿勢に基づいて、撮像部22で撮影された画像が、デジタルカメラ100を横に構えて撮影された画像であるか、縦に構えて撮影された画像であるかを判別可能である。システム制御部50は、姿勢検知部55で検知された姿勢に応じた向き情報を撮像部22で撮像された画像の画像ファイルに付加したり、画像を回転して記録したりすることが可能である。姿勢検知部55としては、加速度センサーやジャイロセンサーなどを用いることができる。姿勢検知部55である加速度センサーやジャイロセンサーを用いて、デジタルカメラ100の動き(パン、チルト、持ち上げ、静止しているか否か等)を検知することも可能である。 The posture detection unit 55 detects the posture of the digital camera 100 with respect to the direction of gravity. Whether the image taken by the imaging unit 22 based on the posture detected by the posture detecting unit 55 is an image taken by holding the digital camera 100 horizontally or an image taken by holding the digital camera 100 vertically. Can be determined. The system control unit 50 can add orientation information according to the posture detected by the posture detection unit 55 to the image file of the image captured by the image pickup unit 22, or can rotate and record the image. is there. As the posture detection unit 55, an acceleration sensor, a gyro sensor, or the like can be used. It is also possible to detect the movement (pan, tilt, lift, whether or not it is stationary, etc.) of the digital camera 100 by using the acceleration sensor or the gyro sensor which is the posture detection unit 55.

接眼検知部57は、接眼ファインダー17(接眼式の電子ビューファインダー。以後、単に「ファインダー」と記載する)の接眼部16に対する目(物体)161の接近(接眼)および離脱(離眼)を検知する(接近検知)、接眼検知センサーである。システム制御部50は、接眼検知部57で検知された状態に応じて、表示部28とEVF29の表示(表示状態)/非表示(非表示状態)を切り替える。より具体的には、少なくとも撮影待機状態で、かつ、表示先の切替が自動切替である場合において、非接眼中は表示先を表示部28として表示をオンとし、EVF29は非表示とする。また、接眼中は表示先をEVF29として表示をオンとし、表示部28は非表示とする。接眼検知部57としては、例えば赤外線近接センサーを用いることができ、EVF29を内蔵するファインダー17の接眼部16への何らかの物体の接近を検知することができる。物体が接近した場合は、接眼検知部57の投光部(図示せず)から投光した赤外線が物体で反射して赤外線近接センサ
ーの受光部(図示せず)で受光される。受光された赤外線の量によって、物体が接眼部16からどの距離まで近づいているか(接眼距離)も判別することができる。このように、接眼検知部57は、接眼部16への物体の近接距離を検知する接眼検知を行う。非接眼状態(非接近状態)から、接眼部16に対して所定距離以内に近づく物体が検出された場合に、接眼されたと検出するものとする。接眼状態(接近状態)から、接近を検知していた物体が所定距離以上離れた場合に、離眼されたと検出するものとする。接眼を検出する閾値と、離眼を検出する閾値は例えばヒステリシスを設けるなどして異なっていてもよい。また、接眼を検出した後は、離眼を検出するまでは接眼状態であるものとする。離眼を検出した後は、接眼を検出するまでは非接眼状態であるものとする。なお、赤外線近接センサーは一例であって、接眼検知部57には、接眼とみなせる目や物体の接近を検知できるものであれば他のセンサーを採用してもよい。
The eyepiece detection unit 57 determines the approach (eyepiece) and detachment (eyepiece) of the eye (object) 161 to the eyepiece 16 of the eyepiece finder 17 (an eyepiece type electronic viewfinder; hereinafter simply referred to as a “finder”). It is an eyepiece detection sensor that detects (approach detection). The system control unit 50 switches the display (display state) / non-display (non-display state) of the display unit 28 and the EVF 29 according to the state detected by the eyepiece detection unit 57. More specifically, at least in the shooting standby state and when the display destination is automatically switched, the display destination is set to the display unit 28 and the display is turned on and the EVF 29 is hidden during non-eye contact. Further, during eye contact, the display destination is set to EVF29, the display is turned on, and the display unit 28 is hidden. As the eyepiece detection unit 57, for example, an infrared proximity sensor can be used, and it is possible to detect the approach of some object to the eyepiece unit 16 of the finder 17 having the EVF 29 built-in. When an object approaches, the infrared rays projected from the light projecting unit (not shown) of the eyepiece detection unit 57 are reflected by the object and received by the light receiving unit (not shown) of the infrared proximity sensor. From the amount of infrared rays received, it is possible to determine how close the object is to the eyepiece 16 (eyepiece distance). In this way, the eyepiece detection unit 57 performs eyepiece detection that detects the close distance of the object to the eyepiece unit 16. When an object approaching the eyepiece portion 16 within a predetermined distance is detected from the non-eyepiece state (non-approaching state), it is assumed that the eyepiece is detected. When the object that has detected the approach is separated by a predetermined distance or more from the eyepiece state (approaching state), it is assumed that the eye has been removed. The threshold value for detecting the eyepiece and the threshold value for detecting the eyepiece may be different, for example, by providing hysteresis. In addition, after the eyepiece is detected, the eyepiece is assumed to be in the eyepiece state until the eyepiece is detected. After the eyepiece is detected, it is assumed that the eyepiece is not in the eyepiece state until the eyepiece is detected. The infrared proximity sensor is an example, and another sensor may be used for the eyepiece detection unit 57 as long as it can detect the approach of an eye or an object that can be regarded as an eyepiece.

システム制御部50は、視線検出回路165から受け取った検出情報を用いることや、接眼検知部57を制御することによって、接眼部16への以下の操作、あるいは状態を検出できる。
・接眼部16へ向けられていなかった視線が新たに接眼部16へ向けられたこと。すなわち、視線入力の開始。
・接眼部16へ視線入力している状態であること。
・接眼部16へ注視している状態であること。
・接眼部16へ向けられていた視線を外したこと。すなわち、視線入力の終了。
・接眼部16へ何も視線入力していない状態。
The system control unit 50 can detect the following operations or states on the eyepiece unit 16 by using the detection information received from the line-of-sight detection circuit 165 or by controlling the eyepiece detection unit 57.
-The line of sight that was not directed to the eyepiece 16 was newly directed to the eyepiece 16. That is, the start of line-of-sight input.
-The line of sight is input to the eyepiece 16.
-The state of gazing at the eyepiece 16.
-The line of sight that was directed at the eyepiece 16 was removed. That is, the end of line-of-sight input.
-A state in which no line of sight is input to the eyepiece 16.

これらの操作・状態や、接眼部16に視線が向いている位置(方向)は内部バスを通じてシステム制御部50に通知され、システム制御部50は、通知された情報に基づいて接眼部16上にどのような操作(視線操作)が行なわれたかを判定する。 These operations / states and the position (direction) in which the line of sight is directed to the eyepiece 16 are notified to the system control unit 50 through the internal bus, and the system control unit 50 notifies the eyepiece 16 based on the notified information. It is determined what kind of operation (line-of-sight operation) has been performed on the top.

操作部70は、ユーザーからの操作(ユーザー操作)を受け付ける入力部であり、システム制御部50に各種の動作指示を入力するために使用される。図2に示すように、操作部70は、モード切替スイッチ60、シャッターボタン61、電源スイッチ72、タッチパネル70a、音声入力部58、等を含む。また、操作部70は、その他の操作部材70bとして、メイン電子ダイヤル71、サブ電子ダイヤル73、4方向キー74、SETボタン75、動画ボタン76、AEロックボタン77、拡大ボタン78、再生ボタン79、メニューボタン81、等を含む。 The operation unit 70 is an input unit that receives an operation (user operation) from the user, and is used to input various operation instructions to the system control unit 50. As shown in FIG. 2, the operation unit 70 includes a mode changeover switch 60, a shutter button 61, a power switch 72, a touch panel 70a, a voice input unit 58, and the like. Further, as other operation members 70b, the operation unit 70 includes a main electronic dial 71, a sub electronic dial 73, a four-way key 74, a SET button 75, a moving image button 76, an AE lock button 77, an enlargement button 78, and a play button 79. Includes menu button 81, etc.

モード切替スイッチ60は、システム制御部50の動作モードを静止画撮影モード、動画撮影モード、再生モード等のいずれかに切り替える。静止画撮影モードに含まれるモードとして、オート撮影モード、オートシーン判別モード、マニュアルモード、絞り優先モード(Avモード)、シャッター速度優先モード(Tvモード)、プログラムAEモード(Pモード)がある。また、撮影シーン別の撮影設定となる各種シーンモード、カスタムモード等がある。モード切替スイッチ60により、ユーザーは、これらのモードのいずれかに直接切り替えることができる。あるいは、モード切替スイッチ60で撮影モードの一覧画面に一旦切り替えた後に、表示された複数のモードのいずれかに、他の操作部材を用いて選択的に切り替えるようにしてもよい。同様に、動画撮影モードにも複数のモードが含まれていてもよい。 The mode changeover switch 60 switches the operation mode of the system control unit 50 to any one of a still image shooting mode, a moving image shooting mode, a playback mode, and the like. The modes included in the still image shooting mode include an auto shooting mode, an auto scene discrimination mode, a manual mode, an aperture priority mode (Av mode), a shutter speed priority mode (Tv mode), and a program AE mode (P mode). In addition, there are various scene modes, custom modes, etc. that are shooting settings for each shooting scene. The mode selector switch 60 allows the user to switch directly to any of these modes. Alternatively, the mode changeover switch 60 may be used to once switch to the shooting mode list screen, and then selectively switch to any of the displayed plurality of modes by using another operation member. Similarly, the moving image shooting mode may include a plurality of modes.

シャッターボタン61は、第1シャッタースイッチ62と第2シャッタースイッチ64を備える。第1シャッタースイッチ62は、シャッターボタン61の操作途中、いわゆる半押し(撮影準備指示)でONとなり第1シャッタースイッチ信号SW1を発生する。システム制御部50は、第1シャッタースイッチ信号SW1により、AF(オートフォーカス)処理、AE(自動露出)処理、AWB(オートホワイトバランス)処理、EF(フラ
ッシュプリ発光)処理等の撮影準備動作を開始する。第2シャッタースイッチ64は、シャッターボタン61の操作完了、いわゆる全押し(撮影指示)でONとなり、第2シャッタースイッチ信号SW2を発生する。システム制御部50は、第2シャッタースイッチ信号SW2により、撮像部22からの信号読み出しから、撮像された画像を画像ファイルとして記録媒体200に書き込むまでの、一連の撮影処理の動作を開始する。
The shutter button 61 includes a first shutter switch 62 and a second shutter switch 64. The first shutter switch 62 is turned on by a so-called half-press (shooting preparation instruction) during the operation of the shutter button 61, and the first shutter switch signal SW1 is generated. The system control unit 50 starts shooting preparation operations such as AF (autofocus) processing, AE (autofocus) processing, AWB (auto white balance) processing, and EF (flash pre-flash) processing by the first shutter switch signal SW1. To do. The second shutter switch 64 is turned on when the operation of the shutter button 61 is completed, so-called full pressing (shooting instruction), and the second shutter switch signal SW2 is generated. The system control unit 50 starts a series of shooting processes from reading the signal from the image pickup unit 22 to writing the captured image as an image file on the recording medium 200 by the second shutter switch signal SW2.

音声入力部58は、内蔵されたマイクまたは音声入力端子を介して接続された音声入力装置から音声を取得(検知;音声検知)して、取得したシステム制御部50に送信する。システム制御部50は、入力された音声信号を必要に応じて選択し、アナログデジタル変換を行い、レベルの適正化処理、特定周波数の低減処理等をして音声信号を生成する。 The voice input unit 58 acquires (detects; voice detection) voice from a voice input device connected via a built-in microphone or a voice input terminal, and transmits the voice to the acquired system control unit 50. The system control unit 50 selects the input audio signal as necessary, performs analog-to-digital conversion, performs level optimization processing, specific frequency reduction processing, and the like to generate an audio signal.

タッチパネル70aと表示部28とは一体的に構成することができる。例えば、タッチパネル70aは、光の透過率が表示部28の表示を妨げないように構成され、表示部28の表示面の上層に取り付けられる。そして、タッチパネル70aにおける入力座標と、表示部28の表示面上の表示座標とを対応付ける。これにより、あたかもユーザーが表示部28上に表示された画面を直接的に操作可能であるかのようなGUI(グラフィカルユーザーインターフェース)を提供できる。システム制御部50は、タッチパネル70aへの以下の操作、あるいは状態を検出できる。 The touch panel 70a and the display unit 28 can be integrally configured. For example, the touch panel 70a is configured so that the light transmittance does not interfere with the display of the display unit 28, and is attached to the upper layer of the display surface of the display unit 28. Then, the input coordinates on the touch panel 70a are associated with the display coordinates on the display surface of the display unit 28. As a result, it is possible to provide a GUI (graphical user interface) as if the user can directly operate the screen displayed on the display unit 28. The system control unit 50 can detect the following operations or states on the touch panel 70a.

・タッチパネル70aにタッチしていなかった指やペンが新たにタッチパネル70aにタッチしたこと、すなわちタッチの開始(以下、タッチダウン(Touch−Down)と称する)。
・タッチパネル70aを指やペンでタッチしている状態(以下、タッチオン(Touch−On)と称する)。
・指やペンがタッチパネル70aをタッチしたまま移動していること(以下、タッチムーブ(Touch−Move)と称する)。
・タッチパネル70aへタッチしていた指やペンがタッチパネル70aから離れた(リリースされた)こと、すなわちタッチの終了(以下、タッチアップ(Touch−Up)と称する)。
・タッチパネル70aに何もタッチしていない状態(以下、タッチオフ(Touch−Off)と称する)。
-A finger or pen that has not touched the touch panel 70a newly touches the touch panel 70a, that is, the start of touch (hereinafter, referred to as touch-down).
-A state in which the touch panel 70a is touched with a finger or a pen (hereinafter, referred to as touch-on).
-The finger or pen is moving while touching the touch panel 70a (hereinafter, referred to as touch move (Touch-Move)).
-The finger or pen touching the touch panel 70a is separated (released) from the touch panel 70a, that is, the end of the touch (hereinafter referred to as touch-up).
-A state in which nothing is touched on the touch panel 70a (hereinafter, referred to as touch-off).

タッチダウンが検出されると、同時にタッチオンも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出された場合も、同時にタッチオンが検出される。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていた全ての指やペンがタッチアップしたことが検出された後は、タッチオフとなる。 When touchdown is detected, touch-on is also detected at the same time. After a touchdown, touch-on usually continues to be detected unless touch-up is detected. When a touch move is detected, a touch-on is detected at the same time. Even if touch-on is detected, touch move is not detected unless the touch position is moved. After it is detected that all the fingers and pens that have been touched are touched up, the touch is turned off.

これらの操作・状態や、タッチパネル70a上に指やペンがタッチしている位置座標は内部バスを通じてシステム制御部50に通知される。そして、システム制御部50は通知された情報に基づいてタッチパネル70a上にどのような操作(タッチ操作)が行なわれたかを判定する。タッチムーブについてはタッチパネル70a上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル70a上の垂直成分・水平成分毎に判定できる。所定距離以上をタッチムーブしたことが検出された場合はスライド操作が行なわれたと判定するものとする。タッチパネル70a上に指をタッチしたままある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックと呼ぶ。フリックは、言い換えればタッチパネル70a上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行なわれたと判定できる(スライド操作に続いてフリックがあったものと判定できる)。更に、複数箇所(例えば2点)を共にタッチして(マルチタ
ッチして)、互いのタッチ位置を近づけるタッチ操作をピンチイン、互いのタッチ位置を遠ざけるタッチ操作をピンチアウトと称する。ピンチアウトとピンチインを総称してピンチ操作(あるいは単にピンチ)と称する。タッチパネル70aは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサー方式等、様々な方式のタッチパネルのうちいずれの方式のものであってもよい。タッチパネルに対する接触があったことでタッチがあったと検出する方式や、タッチパネルに対する指やペンの接近があったことでタッチがあったと検出する方式があるが、いずれの方式でもよい。
These operations / states and the position coordinates of the finger or pen touching the touch panel 70a are notified to the system control unit 50 via the internal bus. Then, the system control unit 50 determines what kind of operation (touch operation) has been performed on the touch panel 70a based on the notified information. Regarding the touch move, the moving direction of the finger or pen moving on the touch panel 70a can also be determined for each vertical component and horizontal component on the touch panel 70a based on the change in the position coordinates. If it is detected that the touch move is performed over a predetermined distance, it is determined that the slide operation has been performed. An operation of quickly moving a finger on the touch panel 70a by a certain distance and then releasing the finger is called a flick. In other words, flicking is an operation of quickly tracing the touch panel 70a as if flicking it with a finger. It can be determined that a flick has been performed when it is detected that the touch move is performed at a predetermined speed or more over a predetermined distance and the touch-up is detected as it is (it can be determined that there was a flick following the slide operation). Further, a touch operation in which a plurality of points (for example, two points) are touched together (multi-touch) to bring the touch positions closer to each other is called pinch-in, and a touch operation to move the touch positions away from each other is called pinch-out. Pinch out and pinch in are collectively called pinch operation (or simply pinch). The touch panel 70a may be any of various types of touch panels such as a resistive film method, a capacitance method, a surface acoustic wave method, an infrared method, an electromagnetic induction method, an image recognition method, and an optical sensor method. Good. There are a method of detecting that there is a touch due to contact with the touch panel and a method of detecting that there is a touch due to the approach of a finger or a pen to the touch panel, but any method may be used.

<撮影装置の撮影動作>
以下、図3および図4を参照して、実施形態1に係るデジタルカメラ100(撮像装置)の撮影動作について説明する。
<Shooting operation of the shooting device>
Hereinafter, the photographing operation of the digital camera 100 (imaging apparatus) according to the first embodiment will be described with reference to FIGS. 3 and 4.

図3は、実施形態1に係るデジタルカメラ100の撮影動作を示すフローチャートである。図3のフローチャートにおける各処理は、システム制御部50が、不揮発性メモリ56に格納されたプログラムをシステムメモリ52に展開して実行し、各機能ブロックを制御することにより実現される。 FIG. 3 is a flowchart showing a shooting operation of the digital camera 100 according to the first embodiment. Each process in the flowchart of FIG. 3 is realized by the system control unit 50 expanding the program stored in the non-volatile memory 56 into the system memory 52 and executing the program to control each functional block.

また、以下では、図3のフローチャートの処理について、図4(a)〜(e)が示すEVF29(Electronic View Finder)の表示を用いて説明する。有効表示領域400は、EVF29において画像を表示することができる領域である。焦点検出領域401〜409は、AF動作の対象となり得る領域である。焦点検出領域401〜409のうちのいずれかが選択されると、選択された焦点検出領域の位置に対してAF駆動回路3によってAF動作が行われる。 Further, in the following, the processing of the flowchart of FIG. 3 will be described using the display of the EVF29 (Electronic View Finder) shown in FIGS. 4A to 4E. The effective display area 400 is an area in which an image can be displayed on the EVF 29. The focus detection areas 401 to 409 are areas that can be the target of AF operation. When any one of the focus detection regions 401 to 409 is selected, the AF drive circuit 3 performs the AF operation with respect to the position of the selected focus detection region.

位置指標420は、視線検出部160が検出した(受け付けた)撮影者(ユーザー)の視線位置を示す。なお、位置指標420は、EVF29に表示されてもよく、表示されなくてもよい。主被写体430は、本実施形態での撮影の主たる被写体であり、副被写体440は、主被写体430とともに撮影される被写体である。このように、本実施形態では、EVF29は、撮像部22で撮像される被写体像を視認可能な表示部である。本実施形態では、撮影シーンとして水族館等で行われるイルカショーのジャンプシーンを例にとって説明する。以下では、撮影者は予め、天井から吊り下げられたボール(副被写体440)に焦点を合わせておき、イルカ(主被写体430)が副被写体440に接触する瞬間を狙って撮影するものとする。 The position index 420 indicates the line-of-sight position of the photographer (user) detected (accepted) by the line-of-sight detection unit 160. The position index 420 may or may not be displayed on the EVF 29. The main subject 430 is the main subject photographed in the present embodiment, and the sub-subject 440 is a subject photographed together with the main subject 430. As described above, in the present embodiment, the EVF 29 is a display unit capable of visually recognizing the subject image imaged by the imaging unit 22. In the present embodiment, a jump scene of a dolphin show performed in an aquarium or the like as a shooting scene will be described as an example. In the following, it is assumed that the photographer focuses on the ball (sub-subject 440) suspended from the ceiling in advance, and aims at the moment when the dolphin (main subject 430) comes into contact with the sub-subject 440.

撮影指示アイコン460は、当該アイコンが表示された位置を撮影者が注視したことに応じて、撮影者からの撮影指示を受け付け可能な状態である撮影指示待ち状態に遷移させるための表示アイテムである。 The shooting instruction icon 460 is a display item for transitioning to a shooting instruction waiting state in which a shooting instruction from the photographer can be accepted according to the photographer's gaze at the position where the icon is displayed. ..

なお、本フローチャートの処理は、撮影者が接眼部16に接眼したことをシステム制御部50が検知すると開始され、EVF29に図4(a)が示すような表示がされる。 The process of this flowchart is started when the system control unit 50 detects that the photographer has touched the eyepiece unit 16, and the EVF 29 is displayed as shown in FIG. 4A.

S301では、システム制御部50は、視線検出部160を制御して、EVF29の表示に対する撮影者の視線位置を検出する。システム制御部50は、視線位置に応じて、焦点検出領域401〜409のうち1点を選択する。 In S301, the system control unit 50 controls the line-of-sight detection unit 160 to detect the line-of-sight position of the photographer with respect to the display of the EVF 29. The system control unit 50 selects one of the focus detection areas 401 to 409 according to the line-of-sight position.

例えば、図4(b)に示すように、図4(a)の状態から、撮影者の視線位置を示す位置指標420が移動した場合を想定する。具体的には、撮影者の視線移動に従い、位置指標420は焦点検出領域405から矢印450の方向に移動し、焦点検出領域402にて停止している。この場合には、S301では、システム制御部50は、焦点検出領域40
2を選択する。
For example, as shown in FIG. 4 (b), it is assumed that the position index 420 indicating the line-of-sight position of the photographer has moved from the state of FIG. 4 (a). Specifically, the position index 420 moves from the focus detection area 405 in the direction of the arrow 450 according to the movement of the line of sight of the photographer, and stops at the focus detection area 402. In this case, in S301, the system control unit 50 determines the focus detection region 40.
Select 2.

S302では、システム制御部50は、焦点検出領域401〜409のうち選択されている1点への所定時間TH1を超える注視があったか否かを判定する。システム制御部50は、視線検出回路165から受け取った検出情報に基づいて、撮影者の視線がある領域に固定されている期間が所定の閾値を越えた場合に、その領域を注視していると判定する。従って、当該領域は、注視が行われた位置である注視位置(注視領域)であるといえる。なお、「視線がある領域に固定されている」とは、例えば、所定の期間経過するまでの間、視線の動きの平均位置が当該領域内にあり、かつ、ばらつき(分散)が所定値よりも少ないことである。なお、所定の閾値は、S302においては所定時間TH1である。TH1を超える注視があった場合にはS303へ遷移する。TH1を超える注視がない場合はS301に戻り、システム制御部50は、視線位置の検出を継続する。 In S302, the system control unit 50 determines whether or not one of the focus detection areas 401 to 409 has been gazed at for a predetermined time of more than TH1. Based on the detection information received from the line-of-sight detection circuit 165, the system control unit 50 is gazing at the area when the period in which the photographer's line of sight is fixed in a certain area exceeds a predetermined threshold value. judge. Therefore, it can be said that the region is the gaze position (gaze region) where the gaze is performed. In addition, "fixed in a region with a line of sight" means, for example, that the average position of the movement of the line of sight is within the region and the variation (dispersion) is greater than the predetermined value until a predetermined period elapses. Is also small. The predetermined threshold value is TH1 for a predetermined time in S302. If there is a gaze exceeding TH1, the transition to S303 occurs. If there is no gaze exceeding TH1, the system returns to S301, and the system control unit 50 continues to detect the line-of-sight position.

S303では、システム制御部50は、AF駆動回路3を制御して、S302で選択された焦点検出領域に対してAF動作を行う。より詳細には、システム制御部50は、S302にてTH1を超える期間の注視のあった位置の被写体に合焦するようにAF動作を行う。システム制御部50は、AF動作が完了して合焦すると、図4(c)に示すように撮影指示アイコン460をEVF29に表示する。また、このとき、システム制御部50は、システムタイマー53による計測を開始する。なお、本実施形態では、AF動作後に撮影指示アイコン460を表示する構成としているが、撮影指示アイコン460は、本フローチャートの処理の開始時点において予め表示されている構成であってもよい。なお、撮影指示アイコン460が予め表示されている構成であれば、本フローチャートの開始時点において撮影指示アイコン460に対する注視による撮影指示待ち状態への遷移が無効であり、S303のAF動作後に当該遷移が有効にされてもよい。また、撮影指示アイコン460が予め表示されている構成であれば、例えば、前回のAFの位置や初期位置に対してシステム制御部50がAF動作を実施した後の状態で、本フローチャートの処理がS304から開始されてもよい。つまり、S301〜S303の処理が行われなくてもよい。 In S303, the system control unit 50 controls the AF drive circuit 3 to perform the AF operation on the focus detection region selected in S302. More specifically, the system control unit 50 performs an AF operation in S302 so as to focus on the subject at the position where the gaze has been performed for a period exceeding TH1. When the AF operation is completed and the system is in focus, the system control unit 50 displays the shooting instruction icon 460 on the EVF 29 as shown in FIG. 4 (c). At this time, the system control unit 50 starts the measurement by the system timer 53. In the present embodiment, the shooting instruction icon 460 is displayed after the AF operation, but the shooting instruction icon 460 may be configured to be displayed in advance at the start of the processing of this flowchart. If the shooting instruction icon 460 is displayed in advance, the transition to the shooting instruction waiting state by gazing at the shooting instruction icon 460 is invalid at the start of this flowchart, and the transition occurs after the AF operation of S303. May be enabled. Further, if the shooting instruction icon 460 is displayed in advance, for example, the processing of this flowchart is performed in a state after the system control unit 50 performs the AF operation with respect to the previous AF position or initial position. It may start from S304. That is, the processes of S301 to S303 may not be performed.

S304では、システム制御部50は、EVF29における所定位置(本実施形態では撮影指示アイコン460)への注視があったか否かを判定する。なお、本実施形態では、撮影指示アイコン460に撮影者の視点位置があると、図4(d)に示すように、撮影指示アイコン460と位置指標420とが重複するように表示される。所定時間TH2に達する期間の注視があった場合はS306へ遷移する。注視時間が所定時間TH2を超えていない場合はS305に遷移する。なお、所定時間TH2は、所定時間TH1よりも小さい値である。 In S304, the system control unit 50 determines whether or not there is a gaze at a predetermined position (shooting instruction icon 460 in the present embodiment) in the EVF 29. In the present embodiment, when the shooting instruction icon 460 has the viewpoint position of the photographer, the shooting instruction icon 460 and the position index 420 are displayed so as to overlap as shown in FIG. 4D. If there is a gaze during the period when the predetermined time TH2 is reached, the transition to S306 occurs. If the gaze time does not exceed TH2 for a predetermined time, the process transitions to S305. The predetermined time TH2 is a value smaller than the predetermined time TH1.

S305では、システム制御部50は、S303において計測を開始したシステムタイマー53の計測時間が所定時間TH3経過しているか否かを判定する。所定位置への注視時間がTH2を越える前に、計測時間が所定時間TH3を経過した場合には、S301に戻る。所定時間TH3が経過していない場合には、S304に戻り、注視時間の判定の処理が継続する。所定時間TH3は所定時間TH2よりも長い時間であり、例えば10秒である。所定時間TH3は、いわゆる測光を行って自動露出による露出設定値が決定され、決定された露出設定値が維持される期間である測光タイマーと同程度の時間である。なお。所定時間TH3を超えても所定位置へのTH2を超える注視がなかった場合(S305Yesの場合)には、システム制御部50は、撮影指示アイコン460をいったん非表示にする。 In S305, the system control unit 50 determines whether or not the measurement time of the system timer 53 that started the measurement in S303 has elapsed TH3 for a predetermined time. If the measurement time elapses after the predetermined time TH3 before the gaze time to the predetermined position exceeds TH2, the process returns to S301. If the predetermined time TH3 has not elapsed, the process returns to S304 and the process of determining the gaze time continues. The predetermined time TH3 is a longer time than the predetermined time TH2, for example, 10 seconds. The predetermined time TH3 is about the same time as the photometric timer, which is a period in which the exposure set value by automatic exposure is determined by performing so-called photometry and the determined exposure set value is maintained. In addition. If there is no gaze exceeding TH2 to a predetermined position even after exceeding TH3 for a predetermined time (in the case of S305Yes), the system control unit 50 temporarily hides the shooting instruction icon 460.

S306では、システム制御部50は、デジタルカメラ100を撮影指示待ち状態に設定する。撮影指示待ち状態とは、撮影者からの撮影指示を受け付け可能な状態であり、前述した第1シャッタースイッチ信号SW1が発生したときと同じ状態を示す。このように
、システム制御部50は、所定位置(撮影指示アイコン460)に対する注視時間が所定時間TH2を超えたと判定すると、デジタルカメラ100を撮影指示待ち状態に設定する。なお、このとき、システム制御部50は、デジタルカメラ100が撮影指示待ち状態に設定されたことを撮影者に対して通知してもよい。例えば、システム制御部50は、EVF29に対して撮影指示待ち状態であることを示すメッセージや表示アイテムを表示してもよく、撮影指示待ち状態であることを音声によって撮影者に通知してもよい。このような通知によって、撮影指示待ち状態であることを撮影者が確実に把握できるため、撮影者は、より意図的に撮影指示を行うことが可能になる。
In S306, the system control unit 50 sets the digital camera 100 in the shooting instruction waiting state. The shooting instruction waiting state is a state in which a shooting instruction from the photographer can be accepted, and indicates the same state as when the above-mentioned first shutter switch signal SW1 is generated. In this way, when the system control unit 50 determines that the gaze time for the predetermined position (shooting instruction icon 460) exceeds the predetermined time TH2, the system control unit 50 sets the digital camera 100 in the shooting instruction waiting state. At this time, the system control unit 50 may notify the photographer that the digital camera 100 has been set to the shooting instruction waiting state. For example, the system control unit 50 may display a message or a display item indicating that the EVF 29 is in the shooting instruction waiting state, or may notify the photographer of the shooting instruction waiting state by voice. .. By such a notification, the photographer can surely grasp that the shooting instruction is waiting, so that the photographer can more intentionally give the shooting instruction.

S307では、システム制御部50は、撮影者による所定のキャンセル動作(キャンセル操作)があったか否かを判定する。所定のキャンセル動作があった場合にはS301に戻る。所定のキャンセル動作がない場合には、S308に遷移する。なお、所定のキャンセル動作があった場合には、システム制御部50は、撮影指示待ち状態を解除する。また、所定のキャンセル動作(撮影指示待ち状態の解除の条件)の例を以下に示す。
・EVF29の有効表示領域外へ視線(視線位置)を移動させる。
・所定位置(撮影指示アイコン460)から所定の距離以上遠くへ(長く)、視線を移動させる。
・所定の領域(不図示のキャンセル用アイコン等)へ視線を移動させる。
・所定位置(撮影指示アイコン460)から所定の値以上の速度で、所定の距離以上遠くへ(長く)、視線を移動させる。
In S307, the system control unit 50 determines whether or not a predetermined cancel operation (cancel operation) has been performed by the photographer. If there is a predetermined cancel operation, the process returns to S301. If there is no predetermined cancel operation, the process proceeds to S308. When a predetermined canceling operation is performed, the system control unit 50 cancels the shooting instruction waiting state. Further, an example of a predetermined canceling operation (condition for canceling the shooting instruction waiting state) is shown below.
-Move the line of sight (line of sight position) out of the effective display area of EVF29.
-Move the line of sight farther (longer) than a predetermined distance from a predetermined position (shooting instruction icon 460).
-Move the line of sight to a predetermined area (such as a cancellation icon (not shown)).
-Move the line of sight from a predetermined position (shooting instruction icon 460) to a distance (longer) than a predetermined distance at a speed equal to or higher than a predetermined value.

S308では、システム制御部50は、視線検出部160を制御して、EVF29における撮影者の視線が途切れたか否かを判定する。視線が途切れた場合にはS309へ遷移する。視線が途切れていない場合には、S306に戻る。この視線の途切れは、撮影者による撮影指示に相当するため、撮影者は、例えば、図4(e)に示すように、副被写体440の位置に主被写体430が移動したタイミングで視線を途切れされる。 In S308, the system control unit 50 controls the line-of-sight detection unit 160 to determine whether or not the line-of-sight of the photographer in the EVF 29 is interrupted. When the line of sight is interrupted, the transition to S309 occurs. If the line of sight is not interrupted, the process returns to S306. Since this interruption of the line of sight corresponds to a shooting instruction by the photographer, the photographer is interrupted at the timing when the main subject 430 moves to the position of the sub-subject 440, for example, as shown in FIG. 4 (e). To.

視線が途切れたか否かの判定において、撮影者がファインダー17から離眼した場合や、意図的でない瞬き、眼鏡の反射具合による誤検知などによって撮影者が撮影の意図なく視線が途切れたと判定され、撮影されてしまうことを防止することが好適である。このために、撮影者が意図的に視線を途切れさせたのか否かがわかる条件によって判定するとよい。例えば、撮影者が撮影トリガーとして意図的に目つむりをした場合に撮影を行い、意図的でない瞬きは撮影のトリガーとしないようにするため、特定条件を満たす目つむりがあった場合のみS308でYesと判定する。特定条件は例えば以下の条件Aと条件Bの双方が満たされるという条件である。
・条件A:目を開いている状態から目をつぶっている状態に変化し、目をつぶっている状態が第1の時間(例えば300msec)以上継続し、第2の時間(例えば2秒)が経過する前に再び目が開かれて視線を検知する。
・条件B:条件Aが1回満たされる(1回の目つむり)。あるいは、条件Aが満たされてから第3の時間(例えば1秒)以内に再び条件Aが満たされる(すなわち2回連続の目つむり)。
In determining whether or not the line of sight is interrupted, it is determined that the photographer has unintentionally interrupted the line of sight due to an unintentional blink, false detection due to the reflection of the glasses, etc. It is preferable to prevent the photograph from being photographed. For this reason, it is preferable to make a judgment based on a condition that allows the photographer to know whether or not the line of sight is intentionally interrupted. For example, in order to take a picture when the photographer intentionally closes his eyes as a shooting trigger and not to trigger an unintentional blink, Yes in S308 only when there is a blinding that satisfies a specific condition. Is determined. The specific condition is, for example, a condition that both the following condition A and condition B are satisfied.
-Condition A: The state of opening the eyes changes to the state of closing the eyes, the state of closing the eyes continues for the first time (for example, 300 msec) or more, and the second time (for example, 2 seconds) continues. Before the elapse, the eyes are opened again to detect the line of sight.
-Condition B: Condition A is satisfied once (one eye-opening). Alternatively, the condition A is satisfied again within a third time (for example, 1 second) after the condition A is satisfied (that is, two consecutive eye closures).

なお、上記は特定条件の例であって、撮影者による意図的な目つむり動作を判定できる条件であれば他の条件でもよい。なお、特定条件は、目つむり動作があったという条件に限らず、撮影者が接触することなく意図的に成立させることのできる条件であればよい。なお、特定条件は、デジタルカメラ100に接触することなく意図的に成立させることのできれば、必ずしも接触していない場合にのみ成立する条件である必要はなく、接触している場合にも成立する条件であってもよい。また、特性条件は、音声入力部58が所定の音声を検知したという条件を含んでいてもよい。 The above is an example of a specific condition, and other conditions may be used as long as the condition can determine the intentional closing motion of the photographer. The specific condition is not limited to the condition that the eye-opening motion is performed, and may be a condition that can be intentionally satisfied without the photographer coming into contact with the photographer. It should be noted that the specific condition does not necessarily have to be a condition that is satisfied only when the digital camera 100 is not in contact with the digital camera 100 as long as it can be intentionally satisfied without contacting the digital camera 100. It may be. Further, the characteristic condition may include a condition that the voice input unit 58 has detected a predetermined voice.

S309では、システム制御部50は、撮影処理を実行する。撮影動作とは、前述した第2シャッタースイッチ信号SW2が発生した時に行われる動作と同じ動作を示す。すなわち、システム制御部50は、撮像部22での撮影を行い、画像ファイルとして記録媒体200に記録する。図3のフローチャートの処理によれば、デジタルカメラ100は撮影指示待ち状態以外の状態で視線が途切れても撮影動作を行わないため、撮影者が意図していない場面で撮影されてしまうことを防止できる。なお、AF動作はすでに完了して合焦しているため、AFすることなく即座に撮影することができ、撮影者が意図したタイミングでの決定的瞬間を撮影することができる。 In S309, the system control unit 50 executes a shooting process. The shooting operation is the same as the operation performed when the second shutter switch signal SW2 described above is generated. That is, the system control unit 50 takes a picture with the image pickup unit 22 and records it as an image file on the recording medium 200. According to the processing of the flowchart of FIG. 3, since the digital camera 100 does not perform the shooting operation even if the line of sight is interrupted in a state other than the state of waiting for a shooting instruction, it is possible to prevent the photographer from shooting in an unintended scene. it can. Since the AF operation has already been completed and the subject is in focus, it is possible to shoot immediately without AF, and it is possible to shoot a decisive moment at a timing intended by the photographer.

なお、本実施形態では、撮影者は、デジタルカメラ100に触れることなく、撮影指示待ち状態への遷移および撮影を実行することができる。従って、AFの位置や撮影した画像における被写体の位置のずれを抑制することができる。また、例えば、撮影者が荷物を持っていて、撮影に手を使うことができない状況においても撮影者は撮影を実行することができる。 In the present embodiment, the photographer can execute the transition to the shooting instruction waiting state and the shooting without touching the digital camera 100. Therefore, it is possible to suppress the deviation of the AF position and the position of the subject in the captured image. Further, for example, the photographer can perform the shooting even in a situation where the photographer has luggage and cannot use his / her hand for shooting.

また、撮影指示アイコン460に対する注視があったことを条件とすることで、撮影指示待ち状態へ遷移させることを、より撮影者の意図的なものにすることができる。本実施形態では、撮影指示アイコン460に注視された場合にのみ撮影指示待ち状態に遷移している。このため、撮影指示待ち状態でなければ、ウインクしたつもりではないまばたき(無意識におこなう周期性まばたきと、目に光が差し込んだときにおこなう反射性まばたき)によって撮影されてしまう可能性がない。また、撮影指示待ち状態に遷移するための条件と、撮影を実行するための条件とを異なる条件にしている。このことによって、撮影者は2つの動作が求められるため、撮影者の意図に反して撮影が実行されることを抑制することができる。従って、撮影者の意図的でない撮影が起こる可能性を、より低減できる。 Further, the transition to the shooting instruction waiting state can be made more intentional by the photographer on the condition that the shooting instruction icon 460 is watched. In the present embodiment, the state of waiting for a shooting instruction is entered only when the shooting instruction icon 460 is watched. For this reason, unless the user is in a state of waiting for a shooting instruction, there is no possibility that the photograph will be taken by blinking that is not intended to wink (a periodic blinking that is performed unconsciously and a reflective blinking that is performed when light enters the eye). In addition, the conditions for transitioning to the shooting instruction waiting state and the conditions for executing shooting are set to different conditions. As a result, the photographer is required to perform two actions, so that it is possible to prevent the photographer from performing shooting against the intention of the photographer. Therefore, the possibility of unintentional shooting by the photographer can be further reduced.

なお、必ずしも所定位置への注視によってデジタルカメラ100が撮影指示待ち状態に遷移する必要はなく、例えば、AF動作が完了すると、撮影指示待ち状態に遷移してもよい。つまり、S303の処理が終了すると、S306に遷移してもよい。これによれば、所定位置への注視によって撮影指示待ち状態に遷移する場合に比べて、撮影者は早期に撮影を実施することができる。 It should be noted that the digital camera 100 does not necessarily have to transition to the shooting instruction waiting state by gazing at a predetermined position. For example, when the AF operation is completed, the digital camera 100 may transition to the shooting instruction waiting state. That is, when the processing of S303 is completed, the transition to S306 may be performed. According to this, the photographer can perform shooting at an earlier stage than in the case of transitioning to the shooting instruction waiting state by gazing at a predetermined position.

以上、実施形態1によれば、撮影者の接触による操作をすることなく、視線入力を用いて撮影者が任意のタイミングで撮影することができる。 As described above, according to the first embodiment, the photographer can take a picture at an arbitrary timing by using the line-of-sight input without performing the operation by the contact of the photographer.

[実施形態2]
以下、図5を参照して、実施形態2に係るデジタルカメラ100の撮影動作について説明する。実施形態1では、所定位置への注視があった後に、撮影者の視線が途切れたことを撮影条件としたが、本実施形態では、所定位置への注視があったことを撮影条件とする。
[Embodiment 2]
Hereinafter, the shooting operation of the digital camera 100 according to the second embodiment will be described with reference to FIG. In the first embodiment, the shooting condition is that the line of sight of the photographer is interrupted after the gaze at the predetermined position, but in the present embodiment, the gaze at the predetermined position is the shooting condition.

図5は、実施形態2に係るフローチャートである。図5のフローチャートにおける各処理は、システム制御部50が、不揮発性メモリ56に格納されたプログラムをシステムメモリ52に展開して実行し、各機能ブロックを制御することにより実現される。 FIG. 5 is a flowchart according to the second embodiment. Each process in the flowchart of FIG. 5 is realized by the system control unit 50 expanding the program stored in the non-volatile memory 56 into the system memory 52 and executing the program to control each functional block.

S501〜S503では、システム制御部50は、S301〜S303と同じ処理を実行する。 In S501 to S503, the system control unit 50 executes the same processing as in S301 to S303.

S504では、システム制御部50は、所定位置(撮影指示アイコン460)への注視時間を計測する。注視時間が所定時間TH2を超えたらS505へ遷移する。注視時間が所定時間TH2を超えていない場合はS506に遷移する。なお、TH2はTH1よりも
小さい値とする。
S505では、システム制御部50は、撮影処理を実行する。
In S504, the system control unit 50 measures the gaze time to a predetermined position (shooting instruction icon 460). When the gaze time exceeds TH2 for a predetermined time, the transition to S505 occurs. If the gaze time does not exceed TH2 for a predetermined time, the process transitions to S506. In addition, TH2 is set to a value smaller than TH1.
In S505, the system control unit 50 executes a shooting process.

S506では、システム制御部50は、S503にて計測を開始したシステムタイマー53の計測時間を確認する。所定位置への注視時間がTH2を越える前に、計測時間が所定時間TH3経過した場合には、S501に戻る。所定時間経過していない場合には、S504に戻り、所定位置への注視時間の計測が継続する。 In S506, the system control unit 50 confirms the measurement time of the system timer 53 that started the measurement in S503. If the measurement time elapses for the predetermined time TH3 before the gaze time for the predetermined position exceeds TH2, the process returns to S501. If the predetermined time has not elapsed, the process returns to S504 and the measurement of the gaze time at the predetermined position continues.

以上、実施形態2によっても、視線入力を用いて撮影者が任意のタイミングで撮影することを可能にするデジタルカメラ(撮像装置、撮像制御装置)を提供することができる。本実施形態では、実施形態1よりも処理工程が少ないため実現が容易であり、また、実施形態1よりも撮影に要する時間を短縮することができる。 As described above, also according to the second embodiment, it is possible to provide a digital camera (imaging device, imaging control device) that enables the photographer to take a picture at an arbitrary timing by using the line-of-sight input. In the present embodiment, since the number of processing steps is smaller than that in the first embodiment, it is easy to realize, and the time required for photographing can be shortened as compared with the first embodiment.

[実施形態3]
以下、図6および図7を参照して、実施形態3に係るデジタルカメラ100の撮影動作について説明する。実施形態3では、デジタルカメラ100は、撮影指示待ち状態に設定(遷移)するためのアイコンを2種類表示して、いずれのアイコンが注視されたかに応じて、撮影の動作を変更する。
[Embodiment 3]
Hereinafter, the shooting operation of the digital camera 100 according to the third embodiment will be described with reference to FIGS. 6 and 7. In the third embodiment, the digital camera 100 displays two types of icons for setting (transitioning) to the shooting instruction waiting state, and changes the shooting operation according to which icon is watched.

図6は、実施形態3および後述する実施形態4に係るEVF29の表示を示す図である。実施形態3,4においては、AF動作(後述のS703,S803)が完了すると、図4(c)ではなく、図6に示すような表示がされる。図6では、実施形態1と同様に、有効表示領域400、焦点検出領域401〜409がEVF29に表示されている。また、EVF29には、撮影指示アイコン460として、第一のアイコン661、第二のアイコン662が表示される。従って、撮影指示アイコン460が、第一のアイコン661および第二のアイコン662を含んでいるともいえる。 FIG. 6 is a diagram showing a display of EVF 29 according to the third embodiment and the fourth embodiment described later. In the third and fourth embodiments, when the AF operation (S703 and S803 described later) is completed, the display as shown in FIG. 6 is displayed instead of the display shown in FIG. 4 (c). In FIG. 6, the effective display area 400 and the focus detection areas 401 to 409 are displayed on the EVF 29 as in the first embodiment. Further, the EVF 29 displays the first icon 661 and the second icon 662 as the shooting instruction icon 460. Therefore, it can be said that the shooting instruction icon 460 includes the first icon 661 and the second icon 662.

図7は、実施形態3に係るデジタルカメラ100の撮影動作を示すフローチャートである。図7のフローチャートにおける各処理は、システム制御部50が、不揮発性メモリ56に格納されたプログラムをシステムメモリ52に展開して実行し、各機能ブロックを制御することにより実現される。 FIG. 7 is a flowchart showing a shooting operation of the digital camera 100 according to the third embodiment. Each process in the flowchart of FIG. 7 is realized by the system control unit 50 expanding the program stored in the non-volatile memory 56 into the system memory 52 and executing the program to control each functional block.

S701〜S703では、システム制御部50は、実施形態1のS301〜S303と同じ処理を実行する。なお、本実施形態では、S703において、システム制御部50は、AF動作を行うと、図6に示すように、撮影指示アイコン460として、第一のアイコン661および第二のアイコン662をEVF29に表示する。 In S701 to S703, the system control unit 50 executes the same processing as in S301 to S303 of the first embodiment. In the present embodiment, when the system control unit 50 performs the AF operation in S703, as shown in FIG. 6, the first icon 661 and the second icon 662 are displayed on the EVF 29 as the shooting instruction icon 460. To do.

S704では、システム制御部50は、第一の所定位置(図6中の第一のアイコン661)への注視時間を計測する。注視時間が所定時間TH2を超えたらS705へ遷移する。注視時間が所定時間TH2を超えていない場合はS709に遷移する。なお、TH2はTH1よりも小さい値とする。 In S704, the system control unit 50 measures the gaze time to the first predetermined position (first icon 661 in FIG. 6). When the gaze time exceeds TH2 for a predetermined time, the transition to S705 occurs. If the gaze time does not exceed TH2 for a predetermined time, the transition to S709 occurs. In addition, TH2 is set to a value smaller than TH1.

S705では、システム制御部50は、デジタルカメラ100を撮影指示待ち状態に設定する。
S706では、システム制御部50は、撮影者による所定のキャンセル動作があったか否かを判定する。所定のキャンセル動作があった場合にはS701に戻る。所定のキャンセル動作がない場合には、S707に遷移する。
In S705, the system control unit 50 sets the digital camera 100 in the shooting instruction waiting state.
In S706, the system control unit 50 determines whether or not a predetermined canceling operation has been performed by the photographer. If there is a predetermined cancel operation, the process returns to S701. If there is no predetermined cancel operation, the process proceeds to S707.

S707では、システム制御部50は、視線検出部160を制御して、EVF29における撮影者の視線が途切れたか否かを判定する。視線が途切れた場合にはS708へ遷移
する。視線が途切れていない場合には、S705に戻る。
S708では、システム制御部50は、撮影処理を実行し画像一枚分の撮影をして、撮影した画像を記録する。この処理では、後述するS714のような、連続撮影を停止する所定の操作が無くても、撮影は停止する。なお、1枚分の撮影にかかわらず、ブラケット撮影のような予め1組の撮影の回数(枚数)が決まっている1組分の撮影を行ってもよい。例えば、適正露出よりも1段分露出オーバー側の設定での撮影、1段分露出アンダー側の設定での撮影、適正露出での撮影の3枚一組を行う露出ブラケット撮影を1組分(すなわち3回の撮影)を行ってもよい。
In S707, the system control unit 50 controls the line-of-sight detection unit 160 to determine whether or not the line-of-sight of the photographer in the EVF 29 is interrupted. When the line of sight is interrupted, the transition to S708 occurs. If the line of sight is not interrupted, the process returns to S705.
In S708, the system control unit 50 executes a shooting process, shoots one image, and records the shot image. In this process, shooting is stopped even if there is no predetermined operation for stopping continuous shooting as in S714 described later. Regardless of the number of shots taken for one shot, one set may be taken, such as bracket shooting, in which the number of shots (number of shots) of one set is predetermined. For example, one set of exposure bracket shooting (shooting with the setting of one step overexposure side than the proper exposure, shooting with the setting of one step underexposure side, and shooting with the proper exposure). That is, three times of shooting) may be performed.

S709では、システム制御部50は、第二の所定位置(図6における第二のアイコン662)への注視時間を計測する。注視時間が所定時間TH2を超えたらS710へ遷移する。注視時間が所定時間TH2を超えていない場合はS715に遷移する。 In S709, the system control unit 50 measures the gaze time to the second predetermined position (second icon 662 in FIG. 6). When the gaze time exceeds TH2 for a predetermined time, the transition to S710 occurs. If the gaze time does not exceed TH2 for a predetermined time, the transition to S715 occurs.

S710では、システム制御部50は、デジタルカメラ100を撮影指示待ち状態に設定する。
S711およびS712では、システム制御部50は、S706およびS707と同様の処理を行う。なお、S711において、所定のキャンセル動作があった場合にはS701に戻り、所定のキャンセル動作がない場合にはS712に遷移する。S712において、視線が途切れた場合にはS713に遷移して、視線が途切れていない場合にはS710に戻る。
S713では、システム制御部50は、撮影処理を実行する。
In S710, the system control unit 50 sets the digital camera 100 in the shooting instruction waiting state.
In S711 and S712, the system control unit 50 performs the same processing as in S706 and S707. In S711, if there is a predetermined cancel operation, the process returns to S701, and if there is no predetermined cancel operation, the process proceeds to S712. In S712, when the line of sight is interrupted, the transition to S713 is performed, and when the line of sight is not interrupted, the process returns to S710.
In S713, the system control unit 50 executes a shooting process.

S714では、システム制御部50は、撮影者が所定の操作をしたか否かを判定する。所定の操作があった場合には撮影を終了する。所定の操作がない限り、システム制御部50は連続して画像複数枚分の撮影を行い(すなわち、連写撮影(連続撮影)を行い)、撮影した画像を記録する。言い換えれば、所定の操作があるまで撮影を繰り返す。以下に所定の操作(停止操作)の例を示す。
・所定の領域(不図示のキャンセル用アイコン等)へ視線を移動させる。
・操作部70に含まれるいずれかの操作部に対して撮影者が入力を実行する。
・音声入力部58に対して、撮影者が所定の音声を入力する。
In S714, the system control unit 50 determines whether or not the photographer has performed a predetermined operation. Shooting ends when a predetermined operation is performed. Unless there is a predetermined operation, the system control unit 50 continuously shoots a plurality of images (that is, performs continuous shooting (continuous shooting)) and records the shot images. In other words, shooting is repeated until a predetermined operation is performed. An example of a predetermined operation (stop operation) is shown below.
-Move the line of sight to a predetermined area (such as a cancellation icon (not shown)).
-The photographer executes input to any of the operation units included in the operation unit 70.
-The photographer inputs a predetermined voice to the voice input unit 58.

S715では、システム制御部50は、S703にて計測を開始したシステムタイマー53の計測時間が所定時間TH3経過している否かを判定する。所定時間TH3経過した場合には、S701に戻る。所定時間TH3経過していない場合には、S704に戻る。 In S715, the system control unit 50 determines whether or not the measurement time of the system timer 53 that started the measurement in S703 has elapsed TH3 for a predetermined time. When the predetermined time TH3 has elapsed, the process returns to S701. If TH3 has not elapsed for the predetermined time, the process returns to S704.

なお、S708での撮影は、画像1枚分の撮影に限られず、例えば、2枚や3枚分などの所定枚数分の撮影や、予め定められた時間における動画の撮影が実行されてもよい。つまり、S708では、撮影者からの撮影の終了指示がなくても、撮影が終了するような撮影方式であれば任意の撮影方式であってよい。また、S713での撮影は、連続して画像複数枚分の撮影することに限らず、例えば、所定の操作がない限り動画の撮影が実行されてもよい。つまり、S713での撮影では、撮影者からの撮影の終了指示があると撮影が終了するような撮影方式であれば任意の撮影方式であってよい。 The shooting in S708 is not limited to the shooting of one image, and for example, shooting of a predetermined number of images such as two or three images, or shooting of a moving image at a predetermined time may be executed. .. That is, in S708, any shooting method may be used as long as the shooting method ends even if the photographer does not give an instruction to end the shooting. Further, the shooting in S713 is not limited to the continuous shooting of a plurality of images, and for example, the shooting of a moving image may be executed unless a predetermined operation is performed. That is, in the shooting in S713, any shooting method may be used as long as the shooting method ends when the photographer gives an instruction to end the shooting.

以上、実施形態3によれば、視線入力を用いて撮影者が好適な撮影方式を選択し、任意のタイミングで撮影することを可能にしたデジタルカメラ(撮像装置、撮像制御装置)を提供することができる。 As described above, according to the third embodiment, the present invention provides a digital camera (imaging device, imaging control device) that enables a photographer to select a suitable photographing method by using a line-of-sight input and photograph at an arbitrary timing. Can be done.

[実施形態4]
以下、図8を参照して、実施形態4に係るデジタルカメラ100の撮影動作について説明する。
[Embodiment 4]
Hereinafter, the shooting operation of the digital camera 100 according to the fourth embodiment will be described with reference to FIG.

図8は、実施形態4に係るフローチャートである。図8のフローチャートにおける各処理は、システム制御部50が、不揮発性メモリ56に格納されたプログラムをシステムメモリ52に展開して実行し、各機能ブロックを制御することにより実現される。 FIG. 8 is a flowchart according to the fourth embodiment. Each process in the flowchart of FIG. 8 is realized by the system control unit 50 expanding the program stored in the non-volatile memory 56 into the system memory 52 and executing the program to control each functional block.

S801〜S803では、システム制御部50は、S301〜S303と同じ処理を実行する。なお、本実施形態では、S803の処理が終了すると、撮影者による撮影指示が可能になるため、システム制御部50は、デジタルカメラ100を撮影指示待ち状態に設定しているといえる。 In S801 to S803, the system control unit 50 executes the same processing as in S301 to S303. In the present embodiment, when the processing of S803 is completed, the photographer can give a shooting instruction. Therefore, it can be said that the system control unit 50 sets the digital camera 100 in the shooting instruction waiting state.

S804では、システム制御部50は、第一の所定位置(図6中の第一のアイコン661)への注視時間を計測する。注視時間が所定時間TH2を超えたらS805へ遷移する。注視時間が所定時間TH2を超えていない場合はS806に遷移する。なお、TH2はTH1よりも小さい値とする。 In S804, the system control unit 50 measures the gaze time to the first predetermined position (first icon 661 in FIG. 6). When the gaze time exceeds TH2 for a predetermined time, the transition to S805 occurs. If the gaze time does not exceed TH2 for a predetermined time, the transition to S806 occurs. In addition, TH2 is set to a value smaller than TH1.

S805では、システム制御部50は、撮影処理を実行し1回撮影して、撮影した1枚の画像を記録する。なお、S805では、撮影者からの撮影の終了指示がなくても、撮影が終了するような撮影方式であれば任意の撮影方式であってもよい。 In S805, the system control unit 50 executes a shooting process, shoots once, and records one shot image. In S805, any shooting method may be used as long as the shooting method ends even if the photographer does not give an instruction to end the shooting.

S806では、システム制御部50は、第二の所定位置(図6中の第二のアイコン662)への注視時間を計測する。注視時間が所定時間TH2を超えたらS807へ遷移する。注視時間が所定時間TH2を超えていない場合はS809に遷移する。
S807では、システム制御部50は、撮影処理を実行する。なお、S807の撮影では、撮影者からの撮影の終了指示があると撮影が終了するような撮影方式であれば任意の撮影方式であってもよい。
In S806, the system control unit 50 measures the gaze time to the second predetermined position (second icon 662 in FIG. 6). When the gaze time exceeds TH2 for a predetermined time, the transition to S807 occurs. If the gaze time does not exceed TH2 for a predetermined time, the transition to S809 occurs.
In S807, the system control unit 50 executes a shooting process. In the shooting of S807, any shooting method may be used as long as the shooting method ends when the photographer gives an instruction to end the shooting.

S808では、システム制御部50は、EVF29における撮影者の視線が途切れたか否かを判定する。システム制御部50は、視線が途切れた場合には撮影を終了する。従って、撮影者の視線が途切れない限り、システム制御部50は連続して撮影し、撮影した複数枚の画像を記録する。 In S808, the system control unit 50 determines whether or not the line of sight of the photographer in the EVF 29 is interrupted. The system control unit 50 ends shooting when the line of sight is interrupted. Therefore, as long as the line of sight of the photographer is not interrupted, the system control unit 50 continuously shoots and records a plurality of shot images.

S809では、システム制御部50は、S803にて計測を開始したシステムタイマー53の計測時間が所定時間TH3を経過したか否かを判定する。所定時間TH3が経過した場合には、S801に戻る。所定時間TH3が経過していない場合には、S804に戻る。なお、本実施形態では、S801に戻ると、再度のAF動作必要になるため、システム制御部50は、所定時間TH3が経過した場合には、撮影指示待ち状態を解除しているといえる。 In S809, the system control unit 50 determines whether or not the measurement time of the system timer 53 that started the measurement in S803 has passed the predetermined time TH3. When the predetermined time TH3 has elapsed, the process returns to S801. If TH3 has not passed for a predetermined time, the process returns to S804. In the present embodiment, when returning to S801, the AF operation needs to be performed again. Therefore, it can be said that the system control unit 50 releases the shooting instruction waiting state when TH3 elapses for a predetermined time.

以上、実施形態4によれば、視線入力を用いて撮影者が好適な撮影方式を選択し、任意のタイミングで撮影することを可能にしたデジタルカメラ(撮像装置、撮像制御装置)を提供することができる。 As described above, according to the fourth embodiment, the present invention provides a digital camera (imaging device, imaging control device) that enables a photographer to select a suitable photographing method by using a line-of-sight input and photograph at an arbitrary timing. Can be done.

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、焦点検出領域は9点に限らず、任意の数であってよい。また、視線検出が可能な構成であれば、接眼ファインダーに限定されない。 Although the preferred embodiments of the present invention have been described above, the present invention is not limited to these embodiments, and various modifications and modifications can be made within the scope of the gist thereof. For example, the focus detection area is not limited to 9 points and may be any number. Further, the configuration is not limited to the eyepiece finder as long as it can detect the line of sight.

また、各実施形態では、ファインダー17内(電子ビューファインダー内)のEVF29への撮影者(ユーザー)の視線入力によって、システム制御部50は撮影のための処理を行っていたが、これには限られない。例えば、背面液晶である表示部28や、デジタル
カメラ100とは異なる機器の表示部に図4(a)〜(e)に示すような表示がされて、これらの表示部に対する撮影者の視線入力によってシステム制御部50は撮影のための処理を行ってもよい。また、EVF29の代わりに、デジタルカメラ100の光学ファインダ内で被写体像である光学像とともに視認される表示部が用いられてもよい。
Further, in each embodiment, the system control unit 50 performs processing for shooting by inputting the line of sight of the photographer (user) to the EVF 29 in the finder 17 (in the electronic viewfinder), but this is limited to this. I can't. For example, the display unit 28, which is the rear liquid crystal, or the display unit of a device different from the digital camera 100 is displayed as shown in FIGS. 4 (a) to 4 (e), and the photographer's line of sight input to these display units. The system control unit 50 may perform processing for photographing. Further, instead of the EVF 29, a display unit that is visually recognized together with the optical image that is the subject image in the optical finder of the digital camera 100 may be used.

なお、システム制御部50が行うものとして説明した上述の各種制御は1つのハードウェアが行ってもよいし、複数のハードウェア(例えば、複数のプロセッサーや回路)が処理を分担することで、装置全体の制御を行ってもよい。 It should be noted that the above-mentioned various controls described as those performed by the system control unit 50 may be performed by one hardware, or a plurality of hardware (for example, a plurality of processors and circuits) share the processing to be a device. The whole control may be performed.

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。さらに、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。 Further, although the present invention has been described in detail based on the preferred embodiment thereof, the present invention is not limited to these specific embodiments, and various embodiments within the scope of the gist of the present invention are also included in the present invention. included. Furthermore, each of the above-described embodiments is merely an embodiment of the present invention, and each embodiment can be combined as appropriate.

また、上述した実施形態においては、本発明をデジタルカメラに適用した場合を例にして説明したが、これはこの例に限定されず、撮像部を有する撮像装置を制御可能であり、視線入力を受付可能な撮像制御装置であれば適用可能である。すなわち、本発明はパーソナルコンピュータやPDA、携帯電話端末や携帯型の画像ビューワ、ディスプレイを備えるプリンタ装置、デジタルフォトフレーム、音楽プレーヤー、ゲーム機、電子ブックリーダーなどに適用可能である。 Further, in the above-described embodiment, the case where the present invention is applied to a digital camera has been described as an example, but this is not limited to this example, and an imaging device having an imaging unit can be controlled and a line-of-sight input can be performed. It is applicable as long as it is an acceptable imaging control device. That is, the present invention is applicable to personal computers, PDAs, mobile phone terminals, portable image viewers, printer devices equipped with displays, digital photo frames, music players, game machines, electronic book readers, and the like.

また、撮像装置本体に限らず、有線または無線通信を介して撮像装置(ネットワークカメラを含む)と通信し、撮像装置を遠隔で制御する制御装置にも本発明を適用可能である。撮像装置を遠隔で制御する装置としては、例えば、スマートフォンやタブレットPC、デスクトップPCなどの装置がある。制御装置側で行われた操作や制御装置側で行われた処理に基づいて、制御装置側から撮像装置に各種動作や設定を行わせるコマンドを通知することにより、撮像装置を遠隔から制御可能である。また、撮像装置で撮影したライブビュー画像を有線または無線通信を介して受信して制御装置側で表示できるようにしてもよい。 Further, the present invention can be applied not only to the image pickup device main body but also to a control device that communicates with an image pickup device (including a network camera) via wired or wireless communication and remotely controls the image pickup device. As a device for remotely controlling the image pickup device, for example, there are devices such as smartphones, tablet PCs, and desktop PCs. The image pickup device can be controlled remotely by notifying the image pickup device of commands for performing various operations and settings from the control device side based on the operations performed on the control device side and the processes performed on the control device side. is there. Further, the live view image taken by the imaging device may be received via wired or wireless communication and displayed on the control device side.

なお、上記の各実施形態の各機能部は、個別のハードウェアであってもよいし、そうでなくてもよい。2つ以上の機能部の機能が、共通のハードウェアによって実現されてもよい。1つの機能部の複数の機能のそれぞれが、個別のハードウェアによって実現されてもよい。1つの機能部の2つ以上の機能が、共通のハードウェアによって実現されてもよい。また、各機能部は、ASIC、FPGA、DSPなどのハードウェアによって実現されてもよいし、そうでなくてもよい。例えば、装置が、プロセッサと、制御プログラムが格納されたメモリ(記憶媒体)とを有していてもよい。そして、装置が有する少なくとも一部の機能部の機能が、プロセッサがメモリから制御プログラムを読み出して実行することにより実現されてもよい。 It should be noted that each functional unit of each of the above embodiments may or may not be individual hardware. The functions of two or more functional units may be realized by common hardware. Each of the plurality of functions of one functional unit may be realized by individual hardware. Two or more functions of one functional unit may be realized by common hardware. Further, each functional unit may or may not be realized by hardware such as ASIC, FPGA, and DSP. For example, the device may have a processor and a memory (storage medium) in which a control program is stored. Then, the function of at least a part of the functional parts of the device may be realized by the processor reading the control program from the memory and executing it.

(その他の実施形態)
本発明は、上記の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
(Other embodiments)
The present invention supplies a program that realizes one or more functions of the above embodiments to a system or device via a network or storage medium, and one or more processors in the computer of the system or device reads and executes the program. It can also be realized by the processing to be performed. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

100:デジタルカメラ、50:システム制御部、160:視線検出部 100: Digital camera, 50: System control unit, 160: Line-of-sight detection unit

Claims (23)

撮像制御装置であって、
撮像手段で撮像される被写体像を視認可能な表示手段を見るユーザーの視線による視線入力を受け付ける受付手段と、
前記表示手段の特定の位置への注視が第1の期間にわたってあったことに対応する視線位置の条件が満たされたことに応じて第1の状態に設定し、
前記第1の状態でなければ、前記撮像制御装置に対してユーザーが接触することなくユーザーが意図的に成立させることのできる特定条件が満たされたことに応じた前記撮像手段による撮影は行わず、
前記第1の状態であれば、前記特定条件が満たされたことに応じて前記撮像手段による撮影を行うように制御する制御手段と
を有することを特徴とする撮像制御装置。
It is an imaging control device
A reception means that accepts line-of-sight input from the user's line of sight looking at a display means that can visually view a subject image captured by the image-taking means,
The first state is set according to the condition of the line-of-sight position corresponding to the gaze at the specific position of the display means over the first period.
Unless it is in the first state, the image pickup means does not take a picture when a specific condition that the user can intentionally establish without contacting the image pickup control device is satisfied. ,
The image pickup control device, characterized in that, in the first state, the image pickup control means includes a control means for controlling the image pickup by the image pickup means according to the satisfaction of the specific condition.
撮像制御装置であって、
撮像手段で撮像される被写体像を視認可能な表示手段を見るユーザーの視線による視線入力を受け付ける受付手段と、
前記表示手段の第1の位置と第2の位置とを含む特定の位置への注視が第1の期間にわたってあったことに対応する視線位置の条件が満たされたことに応じて第1の状態に設定し、
前記第1の位置への注視によって前記第1の状態に設定されている場合には、前記撮像制御装置に対してユーザーが接触することなくユーザーが意図的に成立させることのできる特定条件が満たされたことに応じて前記撮像手段による第1の撮影を行い、ユーザーからの停止操作が無くとも前記第1の撮影を終了するように制御し、
前記第2の位置への注視によって前記第1の状態に設定されている場合には、前記特定条件が満たされたことに応じて前記撮像手段による繰り返し撮影である第2の撮影を行い、ユーザーからの前記停止操作があったことに応じて前記第2の撮影を終了するように制御する制御手段と
を有することを特徴とする撮像制御装置。
It is an imaging control device
A reception means that accepts line-of-sight input from the user's line of sight looking at a display means that can visually view a subject image captured by the image-taking means,
A first state depending on the condition of the line-of-sight position corresponding to the fact that the gaze to a specific position including the first position and the second position of the display means has been performed for the first period. Set to
When the first state is set by gazing at the first position, a specific condition that the user can intentionally establish without the user touching the image pickup control device is satisfied. The first shooting is performed by the imaging means according to the fact that the first shooting is performed, and the first shooting is controlled so as to end even if there is no stop operation from the user.
When the first state is set by gazing at the second position, the user performs a second shooting, which is repeated shooting by the imaging means, in response to the satisfaction of the specific condition. An imaging control device comprising: a control means for controlling to end the second shooting in response to the stop operation from the above.
前記特定条件は、ユーザーの視線による視線入力が途切れることを含む
ことを特徴とする請求項1または2に記載の撮像制御装置。
The imaging control device according to claim 1 or 2, wherein the specific condition includes interruption of line-of-sight input by the user's line of sight.
前記特定条件は、ユーザーの意図的な目つむりを判定する条件である
ことを特徴とする請求項3に記載の撮像制御装置。
The imaging control device according to claim 3, wherein the specific condition is a condition for determining an intentional blindness of the user.
音声検知手段をさらに有し、
前記特定条件は、前記音声検知手段が所定の音声を検知したことを含む
ことを特徴とする請求項1乃至4のいずれか1項に記載の撮像制御装置。
It also has voice detection means
The imaging control device according to any one of claims 1 to 4, wherein the specific condition includes that the voice detecting means has detected a predetermined voice.
撮像手段で撮像される被写体像を視認可能な表示手段を見るユーザーの視線による視線入力を受け付ける受付手段と、
前記表示手段の特定の位置への注視が第1の期間にわたってあったことに対応する視線位置の条件が満たされたことに応じて第1の状態に設定し、
前記第1の状態であれば、前記表示手段に表示された表示アイテムへの注視が第2の期間にわたってあったことに応じて前記撮像手段による撮影を行うように制御する制御手段と
を有することを特徴とする撮像制御装置。
A reception means that accepts line-of-sight input from the user's line of sight looking at a display means that can visually view a subject image captured by the image-taking means,
The first state is set according to the condition of the line-of-sight position corresponding to the gaze at the specific position of the display means over the first period.
In the first state, the display means has a control means for controlling the imaging means to take a picture according to the fact that the display item displayed on the display means has been gazed at for the second period. An imaging control device characterized by.
前記制御手段は、前記第1の状態から、ユーザーの視線による視線入力によって前記第
1の状態の解除が可能である
ことを特徴とする請求項1乃至6のいずれか1項に記載の撮像制御装置。
The imaging control according to any one of claims 1 to 6, wherein the control means can release the first state from the first state by inputting a line of sight from the user's line of sight. apparatus.
前記制御手段は、前記第1の状態において、前記表示手段の有効表示領域の外へユーザーの視線位置が移動した場合に、前記第1の状態を解除するように制御する
ことを特徴とする請求項7に記載の撮像制御装置。
The claim is characterized in that, in the first state, when the line-of-sight position of the user moves out of the effective display area of the display means, the control means is controlled to release the first state. Item 7. The imaging control device according to item 7.
前記制御手段は、前記第1の状態において、所定の位置にユーザーの視線位置が移動した場合に、前記第1の状態を解除するように制御する
ことを特徴とする請求項7または8に記載の撮像制御装置。
The control means according to claim 7 or 8, wherein the control means controls to release the first state when the line-of-sight position of the user moves to a predetermined position in the first state. Imaging control device.
前記制御手段は、前記第1の状態において、前記特定の位置から所定の距離以上遠くへユーザーの視線位置が移動した場合に、前記第1の状態を解除するように制御する
ことを特徴とする請求項7乃至9のいずれか1項に記載の撮像制御装置。
The control means is characterized in that, in the first state, when the line-of-sight position of the user moves farther than a predetermined distance from the specific position, the first state is released. The imaging control device according to any one of claims 7 to 9.
前記制御手段は、前記第1の状態において、所定の値以上の速度で、前記特定の位置から前記所定の距離以上遠くへユーザーの視線位置が移動した場合に、前記第1の状態を解除するように制御する
ことを特徴とする請求項10に記載の撮像制御装置。
In the first state, the control means releases the first state when the line-of-sight position of the user moves from the specific position to a distance of the predetermined distance or more at a speed equal to or higher than a predetermined value. The imaging control device according to claim 10, wherein the image control device is controlled in such a manner.
前記特定の位置とは、前記第1の状態に遷移させるための表示アイテムに対応する位置である
ことを特徴とする請求項1乃至11のいずれか1項に記載の撮像制御装置。
The imaging control device according to any one of claims 1 to 11, wherein the specific position is a position corresponding to a display item for transitioning to the first state.
前記制御手段は、前記表示手段への所定の期間の注視があると、当該注視のあった位置に基づく位置の被写体に合焦するようにオートフォーカスを行い、前記表示アイテムを前記表示手段に表示するように制御する
ことを特徴とする請求項12に記載の撮像制御装置。
When the control means gazes at the display means for a predetermined period of time, the control means autofocuses the subject at a position based on the gaze position, and displays the display item on the display means. The imaging control device according to claim 12, wherein the imaging control device is controlled so as to perform the same.
前記制御手段は、前記特定の位置への前記第1の期間の注視があると、当該注視のあった位置に基づく位置の被写体に合焦するようにオートフォーカスを行い、前記第1の状態に設定するように制御する
ことを特徴とする請求項1乃至12のいずれか1項に記載の撮像制御装置。
When the control means gazes at the specific position during the first period, the control means autofocuses the subject at a position based on the gaze position to bring the subject into the first state. The imaging control device according to any one of claims 1 to 12, wherein the imaging control device is controlled so as to be set.
前記表示手段は、前記撮像手段で撮像される被写体像を含むライブビュー画像を表示する
ことを特徴とする請求項1乃至14のいずれか1項に記載の撮像制御装置。
The imaging control device according to any one of claims 1 to 14, wherein the display means displays a live view image including a subject image captured by the imaging means.
前記表示手段は、撮像装置の接眼式の電子ビューファインダー内の表示デバイスである
ことを特徴とする請求項1乃至15のいずれか1項に記載の撮像制御装置。
The image pickup control device according to any one of claims 1 to 15, wherein the display means is a display device in an eyepiece type electronic viewfinder of the image pickup device.
前記表示手段は、ファインダーとは異なる撮像装置に備えられた表示デバイス、または、前記撮像装置とは異なる機器の表示デバイスである
ことを特徴とする請求項1乃至15のいずれか1項に記載の撮像制御装置。
The display means according to any one of claims 1 to 15, wherein the display means is a display device provided in an image pickup device different from the finder, or a display device of a device different from the image pickup device. Imaging control device.
前記表示手段は、撮像装置の光学ファインダ内で前記被写体像である光学像とともに視認される表示デバイスである
ことを特徴とする請求項1乃至14のいずれか1項に記載の撮像制御装置。
The imaging control device according to any one of claims 1 to 14, wherein the display means is a display device that is visually recognized together with an optical image that is a subject image in the optical finder of the imaging device.
撮像制御装置が実行する撮像制御方法であって、
撮像手段で撮像される被写体像を視認可能な表示手段を見るユーザーの視線による視線入力を受け付ける受付ステップと、
前記表示手段の特定の位置への注視が第1の期間にわたってあったことに対応する視線位置の条件が満たされたことに応じて第1の状態に設定し、
前記第1の状態でなければ、前記撮像制御装置に対してユーザーが接触することなくユーザーが意図的に成立させることのできる特定条件が満たされたことに応じた前記撮像手段による撮影は行わず、
前記第1の状態であれば、前記特定条件が満たされたことに応じて前記撮像手段による撮影を行うように制御する制御ステップと
を有することを特徴とする撮像制御方法。
This is an imaging control method executed by the imaging control device.
A reception step that accepts line-of-sight input from the user's line of sight looking at a display means that can visually view the subject image captured by the image-taking means,
The first state is set according to the condition of the line-of-sight position corresponding to the gaze at the specific position of the display means over the first period.
Unless it is in the first state, the image pickup means does not take a picture when a specific condition that the user can intentionally establish without contacting the image pickup control device is satisfied. ,
The first state, the imaging control method is characterized by having a control step for controlling the imaging by the imaging means when the specific condition is satisfied.
撮像制御装置が実行する撮像制御方法であって、
撮像手段で撮像される被写体像を視認可能な表示手段を見るユーザーの視線による視線入力を受け付ける受付ステップと、
前記表示手段の第1の位置と第2の位置とを含む特定の位置への注視が第1の期間にわたってあったことに対応する視線位置の条件が満たされたことに応じて第1の状態に設定し、
前記第1の位置への注視によって前記第1の状態に設定されている場合には、前記撮像制御装置に対してユーザーが接触することなくユーザーが意図的に成立させることのできる特定条件が満たされたことに応じて前記撮像手段による第1の撮影を行い、ユーザーからの停止操作が無くとも前記第1の撮影を終了するように制御し、
前記第2の位置への注視によって前記第1の状態に設定されている場合には、前記特定条件が満たされたことに応じて前記撮像手段による繰り返し撮影である第2の撮影を行い、ユーザーからの前記停止操作があったことに応じて前記第2の撮影を終了するように制御する制御ステップと
を有することを特徴とする撮像制御方法。
This is an imaging control method executed by the imaging control device.
A reception step that accepts line-of-sight input from the user's line of sight looking at a display means that can visually view the subject image captured by the image-taking means,
A first state depending on the condition of the line-of-sight position corresponding to the fact that the gaze to a specific position including the first position and the second position of the display means has been performed for the first period. Set to
When the first state is set by gazing at the first position, a specific condition that the user can intentionally establish without the user touching the image pickup control device is satisfied. The first shooting is performed by the imaging means according to the fact that the first shooting is performed, and the first shooting is controlled so as to end even if there is no stop operation from the user.
When the first state is set by gazing at the second position, the user performs a second shooting, which is a repetitive shooting by the imaging means, in response to the satisfaction of the specific condition. An imaging control method comprising: a control step for controlling to end the second shooting in response to the stop operation from the above.
撮像手段で撮像される被写体像を視認可能な表示手段を見るユーザーの視線による視線入力を受け付ける受付ステップと、
前記表示手段の特定の位置への注視が第1の期間にわたってあったことに対応する視線位置の条件が満たされたことに応じて第1の状態に設定し、
前記第1の状態であれば、前記表示手段に表示された表示アイテムへの注視が第2の期間にわたってあったことに応じて前記撮像手段による撮影を行うように制御する制御ステップと
を有することを特徴とする撮像制御方法。
A reception step that accepts line-of-sight input from the user's line of sight looking at a display means that can visually view the subject image captured by the image-taking means,
The first state is set according to the condition of the line-of-sight position corresponding to the gaze at the specific position of the display means over the first period.
In the first state, the display means has a control step for controlling the imaging means to take a picture according to the fact that the display item displayed on the display means has been gazed at for the second period. An imaging control method characterized by.
コンピュータを、請求項1乃至18のいずれか1項に記載された撮像制御装置の各手段として機能させるためのプログラム。 A program for causing a computer to function as each means of the imaging control device according to any one of claims 1 to 18. コンピュータを、請求項1乃至18のいずれか1項に記載された撮像制御装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。 A computer-readable storage medium containing a program for causing the computer to function as each means of the imaging control device according to any one of claims 1 to 18.
JP2019147417A 2019-08-09 2019-08-09 IMAGING CONTROL DEVICE, CONTROL METHOD OF IMAGING CONTROL DEVICE, PROGRAM, STORAGE MEDIUM Active JP7286469B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019147417A JP7286469B2 (en) 2019-08-09 2019-08-09 IMAGING CONTROL DEVICE, CONTROL METHOD OF IMAGING CONTROL DEVICE, PROGRAM, STORAGE MEDIUM

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019147417A JP7286469B2 (en) 2019-08-09 2019-08-09 IMAGING CONTROL DEVICE, CONTROL METHOD OF IMAGING CONTROL DEVICE, PROGRAM, STORAGE MEDIUM

Publications (3)

Publication Number Publication Date
JP2021029011A true JP2021029011A (en) 2021-02-25
JP2021029011A5 JP2021029011A5 (en) 2022-08-04
JP7286469B2 JP7286469B2 (en) 2023-06-05

Family

ID=74667483

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019147417A Active JP7286469B2 (en) 2019-08-09 2019-08-09 IMAGING CONTROL DEVICE, CONTROL METHOD OF IMAGING CONTROL DEVICE, PROGRAM, STORAGE MEDIUM

Country Status (1)

Country Link
JP (1) JP7286469B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015026102A (en) * 2013-07-24 2015-02-05 シャープ株式会社 Electronic apparatus
JP2015162822A (en) * 2014-02-27 2015-09-07 株式会社ニコン Electronic apparatus, imaging apparatus, and communication apparatus
JP2018006914A (en) * 2016-06-29 2018-01-11 フォーブ インコーポレーテッド External imaging system, external imaging method, external imaging program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015026102A (en) * 2013-07-24 2015-02-05 シャープ株式会社 Electronic apparatus
JP2015162822A (en) * 2014-02-27 2015-09-07 株式会社ニコン Electronic apparatus, imaging apparatus, and communication apparatus
JP2018006914A (en) * 2016-06-29 2018-01-11 フォーブ インコーポレーテッド External imaging system, external imaging method, external imaging program

Also Published As

Publication number Publication date
JP7286469B2 (en) 2023-06-05

Similar Documents

Publication Publication Date Title
CN112104809B (en) Electronic device, control method of electronic device, and storage medium
US11385711B2 (en) Image capturing control apparatus and control method therefor
US11233941B2 (en) Electronic device that receives line of sight input, method of controlling electronic device, and non-transitory computer readable medium
US11240419B2 (en) Electronic device that can execute function in accordance with line of sight of user, method of controlling electronic device, and non-transitory computer readable medium
US20240259674A1 (en) Electronic apparatus enabling easy recognition of continuous shooting timing, method of controlling electronic apparatus, and storage medium
JP7433810B2 (en) Electronic devices, control methods for electronic devices, programs and storage media
JP2022068749A (en) Electronic apparatus, control method thereof, program, and recording medium
JP2021156950A (en) Image-capturing controller and method for controlling the same
US20230018866A1 (en) Electronic device that displays a plurality of display items on a display and method for controlling electronic device
US11442244B2 (en) Imaging device
JP7431567B2 (en) Electronic devices and their control methods, programs, and storage media
JP7336266B2 (en) ELECTRONIC DEVICE, CONTROL METHOD FOR ELECTRONIC DEVICE, PROGRAM, STORAGE MEDIUM
JP7286469B2 (en) IMAGING CONTROL DEVICE, CONTROL METHOD OF IMAGING CONTROL DEVICE, PROGRAM, STORAGE MEDIUM
JP2021097356A (en) Imaging control device
JP2021012238A (en) Electronic apparatus and method for controlling the same, program, and recording medium
JP7450408B2 (en) Electronic devices, their control methods, programs and storage media
US20230291995A1 (en) Electronic apparatus, method for controlling electronic apparatus, and storage medium
WO2023007904A1 (en) Electronic device, electronic device control method, program, and storage medium
JP2021082188A (en) Electronic apparatus, control method of electronic apparatus, program, and storage medium
JP2022172840A (en) Electronic apparatus, method for controlling electronic apparatus, program, and storage medium
JP2021018634A (en) Electronic equipment and method of controlling the same
JP2022095306A (en) Display control device and method for controlling the same
JP2022067578A (en) Imaging apparatus and method for controlling the same and program and recording medium
JP2024079943A (en) Electronic device, control method for the same, program, and storage medium
JP2022095264A (en) Display control device and method for controlling the same

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220727

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220727

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230327

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230425

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230524

R151 Written notification of patent or utility model registration

Ref document number: 7286469

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151