CN116648668A - 电子设备、其控制方法、程序和存储介质 - Google Patents
电子设备、其控制方法、程序和存储介质 Download PDFInfo
- Publication number
- CN116648668A CN116648668A CN202180084927.6A CN202180084927A CN116648668A CN 116648668 A CN116648668 A CN 116648668A CN 202180084927 A CN202180084927 A CN 202180084927A CN 116648668 A CN116648668 A CN 116648668A
- Authority
- CN
- China
- Prior art keywords
- display
- orientation
- electronic device
- line
- sight
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 93
- 238000003860 storage Methods 0.000 title claims description 7
- 238000001514 detection method Methods 0.000 claims abstract description 76
- 230000000694 effects Effects 0.000 claims description 5
- 238000003384 imaging method Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 description 117
- 230000008569 process Effects 0.000 description 80
- 238000012905 input function Methods 0.000 description 65
- 210000001508 eye Anatomy 0.000 description 56
- 230000006870 function Effects 0.000 description 37
- 238000010586 diagram Methods 0.000 description 28
- 210000003811 finger Anatomy 0.000 description 18
- 238000004891 communication Methods 0.000 description 14
- 238000003825 pressing Methods 0.000 description 14
- 230000004048 modification Effects 0.000 description 9
- 238000012986 modification Methods 0.000 description 9
- 210000005252 bulbus oculi Anatomy 0.000 description 8
- 230000008859 change Effects 0.000 description 8
- 230000005484 gravity Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 7
- 230000009467 reduction Effects 0.000 description 7
- 230000004044 response Effects 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 5
- 238000004898 kneading Methods 0.000 description 5
- 238000000926 separation method Methods 0.000 description 5
- 230000007704 transition Effects 0.000 description 5
- 230000004397 blinking Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 210000004087 cornea Anatomy 0.000 description 3
- 238000009432 framing Methods 0.000 description 3
- 238000002360 preparation method Methods 0.000 description 3
- 238000001028 reflection method Methods 0.000 description 3
- 210000000744 eyelid Anatomy 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 210000003813 thumb Anatomy 0.000 description 2
- WHXSMMKQMYFTQS-UHFFFAOYSA-N Lithium Chemical compound [Li] WHXSMMKQMYFTQS-UHFFFAOYSA-N 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 229910005580 NiCd Inorganic materials 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 229910052744 lithium Inorganic materials 0.000 description 1
- 210000004932 little finger Anatomy 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- 229920001690 polydopamine Polymers 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/02—Viewfinders
- G03B13/06—Viewfinders with lenses with or without reflectors
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/02—Bodies
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/18—Signals indicating condition of a camera member or suitability of light
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/18—Signals indicating condition of a camera member or suitability of light
- G03B17/20—Signals indicating condition of a camera member or suitability of light visible in viewfinder
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/634—Warning indications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/65—Control of camera operation in relation to power supply
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B17/00—Systems with reflecting surfaces, with or without refracting elements
- G02B17/02—Catoptric systems, e.g. image erecting and reversing system
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Studio Devices (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
- User Interface Of Digital Computer (AREA)
- Exposure Control For Cameras (AREA)
- Viewfinders (AREA)
- Details Of Cameras Including Film Mechanisms (AREA)
- Camera Bodies And Camera Details Or Accessories (AREA)
Abstract
提供一种电子设备,其包括:设置部,其设置与电子设备的控制有关的、无论电子设备的取向如何都可执行的预定功能;取向检测部,其检测所述电子设备的取向;以及控制部,其进行控制,使得在所述取向检测部检测到所述电子设备的第一取向的情况下,在显示部上进行第一显示,该第一显示根据所述预定功能的设置状态来促使设置所述预定功能,所述第一显示包括用于指示通过用户操作来设置所述预定功能的显示项,以及在取向检测部检测到电子设备的与第一取向不同的第二取向的情况下,不进行第一显示。
Description
技术领域
本发明涉及电子设备、其控制方法、程序和存储介质,该电子设备可以在其壳体的各种取向中使用并且可以根据电子设备的取向和设置来控制显示。
背景技术
已知一种数码相机,其被构造为检测使用数码相机拍摄图像的用户的视线,并检测用户正在观看的取景器中的位置(区域),从而控制诸如自动聚焦调整的摄像功能。专利文献1公开了:在基于用户的视线的方向设置校准数据以使用户的眼球旋转角度与注视点匹配时,进行设置使得校准数据与光学设备的姿势(取向)相关联。
引文列表
专利文献
专利文献1:日本特开平第07-255676号
发明内容
技术问题
然而,在专利文献1中公开的技术中,当在数码相机中使用用户的视线输入时,用户不能识别出以下事实:如果未设置校准数据,则在用户正在观看的位置与检测到的视线位置之间出现差异(discrepancy)(这导致视线检测精度的降低)。即使当给出显示以提示用户进行设置时,取决于数码相机的取向,也存在显示使用户烦恼的可能性。用户可能不会识别出,不管视线输入是否在数码相机中被使用,或者不管是否正在进行拍摄图像的操作,可能期望进行控制诸如智能手机的设备的功能的设置。取决于设备的取向,提示用户进行这样的设置的显示可能是令人讨厌的。
鉴于上述情况,本发明的目的是在适当的定时提供提示用户设置与控制电子设备有关的功能的显示。
解决问题的方案
为了解决上述问题,本发明提供一种电子设备,其包括:设置部,其被构造为设置与电子设备的控制相关并且无论所述电子设备的取向如何都能够进行的预定功能;取向检测部,其被构造为检测电子设备的取向;以及控制部,被构造为进行控制,使得在取向检测部检测到电子设备处于第一取向的情况下,根据所述预定功能的设置状态在显示部上给出第一显示,以提示设置所述预定功能,其中所述第一显示包括用于指示通过用户操作来设置所述预定功能的显示项,并且在取向检测部检测到电子设备处于与第一取向不同的第二取向的情况下,不给出第一显示。
发明的有益效果
根据本发明,可以在适当的定时提供提示用户设置与控制电子设备有关的功能的显示。
附图说明
[图1A]示出了根据实施例的相机的外部视图。
[图1B]示出了根据实施例的相机的外部视图。
[图2]是示出根据实施例的构造的功能框图。
[图3]是示出数码相机的控制处理的流程图的图。
[图4]是示出数码相机中的校准模式处理中的控制处理的流程图的图。
[图5]是示出在图像拍摄模式处理中关于数码相机100的取向和显示引导的控制处理的流程图的图。
[图6A]示出了根据实施例的用于设置与视线有关的功能的菜单画面。
[图6B]示出了根据实施例的用于设置与视线有关的功能的菜单画面。
[图7A]是示出根据实施例的校准模式处理中的显示的示例的图。
[图7B]是示出根据实施例的校准模式处理中的显示的示例的图。
[图7C]是示出根据实施例的校准模式处理中的显示的示例的图。
[图7D]是示出根据实施例的校准模式处理中的显示的示例的图。
[图7E]是示出根据实施例的校准模式处理中的显示的示例的图。
[图7F]是示出根据实施例的校准模式处理中的显示的示例的图。
[图7G]是示出根据实施例的校准模式处理中的显示的示例的图。
[图8A]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图8B]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图8C]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图8D]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图8E]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图8F]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图8G]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图8H]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图8I]是示出数码相机100的取向的显示和引导的显示的示例的图。
[图9A]是示出将根据实施例的显示控制应用于智能手机的变型例的图。
[图9B]是示出将根据实施例的显示控制应用于智能手机的变型例的图。
[图9C]是示出将根据实施例的显示控制应用于智能手机的变型例的图。
[图9D]是示出将根据实施例的显示控制应用于智能手机的变型例的图。
[图9E]是示出将根据实施例的显示控制应用于智能手机的变型例的图。
[图9F]是示出将根据实施例的显示控制应用于智能手机的变型例的图。
具体实施方式
<数码相机的外部视图100>
下面参照附图描述本发明的实施例。
图1A和图1B各自示出了作为根据本发明的装置的示例的数码相机100的外部视图。图1A示出了数码相机100的倾斜前视图,而图1B示出了数码相机100的倾斜后视图。在图1A和图1B中,显示单元28是布设在相机的背面并且被构造为显示图像和各种信息的显示单元。触摸面板70a是可触摸操作的操作构件,并且可以检测在显示单元28的显示表面(操作表面)上的触摸操作。取景器外显示单元43是位于相机的取景器外部的显示单元,并且被构造为显示快门速度、光圈值和各种其他相机设置。
快门按钮61是用于发出图像拍摄指令的操作构件。模式选择开关60是用于在各种模式之间切换的操作构件。端子盖40是保护连接数码相机100和外部设备的连接电缆的连接器(未示出)的盖。主电子拨盘71是包括在操作单元70中的旋转操作构件。通过转动主电子拨盘71,可以改变快门速度、光圈值和其他设置值。电源开关72是用于接通/断开数码相机100的电源的操作构件。副电子拨盘73是包括在操作单元70中的旋转操作构件,并且能够移动选择框、使图像框前进/后退等。十字键74包括在操作单元70中,并且是具有允许在四个方向上按压的按压按钮的操作构件。根据十字键74被按压的方向,进行不同的操作。设置按钮75是包括在操作单元70中的按压按钮,并且主要用于对选择项进行选择。动画(movie)按钮76用于开始和停止拍摄(记录)运动图像。AF-开启(AF-ON)按钮77被包括在操作单元70中并且用于开始AF操作。AF操作主要在快门按钮61被按下时开始,但是当AF-开启按钮被按下时也发出开始AF操作的指令。在数码相机100可以被设置为使得当按下快门按钮61时不进行AF操作的情况下,AF开始指令和图像拍摄指令可以被分离。通过在按下AE锁定按钮78之后按下快门按钮61,可以在锁定AF位置的同时拍摄图像,并且还可以在不能进行AF操作的情形下拍摄图像。AF-开启按钮77包括在操作单元70中。当在图像拍摄待机状态(其中没有进行用于拍摄图像的准备并且等待开始在图像拍摄模式下使用摄像单元22拍摄图像)下按下AF-开启按钮77时,曝光条件被锁定。也就是说,可以使用由用户锁定的曝光值来拍摄图像。回放按钮79是包括在操作单元70中的操作按钮,并且用于在图像拍摄模式与回放模式之间切换。当在图像拍摄模式下按下回放按钮79时,操作模式改变为回放模式,在回放模式中,允许在显示单元28上显示记录介质200中记录的图像当中的最新图像。当按下操作单元70中包括的菜单按钮81时,在显示单元28上显示菜单画面,并且可以进行各种设置。多控制器65是如下的操作构件,其包括可在八个方向上操作的方向开关和可被按压的按压按钮。可以根据多控制器65倾斜的方向进行各种操作。用户可以使用十字键74、设置按钮75和多控制器65,在显示器28上显示的菜单画面上直观地进行各种设置。视线确定按钮82是作为包括在操作单元70中的操作构件的按压按钮,并且用于基于视线指针的位置指示选择被摄体或取消对被摄体的选择,这将在后面描述。视线确定按钮位于这样的位置,通过用右手的拇指保持握持部90来操作视线确定按钮,即使当用户正在观看取景器时(当用户的眼睛与目镜16接触时)也允许用户容易地操作视线确定按钮。
操作单元70是用作用于接受来自用户的操作的输入单元的各种操作构件的集合。操作单元70包括按压按钮、旋转拨盘、触摸传感器等。操作单元70至少包括以下:快门按钮61、触摸面板70a、主电子拨盘71、电源开关72、副电子拨盘73、十字键74、设置按钮75、动画按钮76、AF-开启按钮77、AE锁定按钮78、回放按钮79、菜单按钮81、视线确定按钮82、多控制器65、过滤器(filter)按钮84和取景辅助(framing assist)按钮。至于将在下面描述的用于将AF框移动到视线所指向的位置的视线确定功能,可以在数码相机100上安装用于其的专用按钮,或者可以将视线确定功能分配给还具有另一功能的操作构件。可以被分配视线确定功能的操作构件的示例包括:AF-开启按钮77、AE锁定按钮78、多控制器65中的按压按钮、过滤器按钮84和取景辅助按钮。AF-开启按钮77、AE锁定按钮78和多控制器65被定位成使得用户可以在操作快门按钮61的同时用他/她的右手食指操作它们而不干扰图像拍摄操作。更具体地,当用户用右手抓握握持部90时,上述操作构件位于与被摄体相反的一侧(即,快门按钮所在的一侧)、数码相机100的背面的中心位置上方,并且位于EVF 29的右侧(握持部90的一侧)。它们的位置不限于数码相机100的背面,只要用户可以在操作快门按钮61的同时操作它们即可。例如,过滤器按钮84、取景辅助按钮或类似的操作构件可以布设在前侧上(在被摄体侧上),或者一些操作构件可以配设在镜头单元150上。在这种情况下,操作构件的位置不限于如上所述的数码相机100的背面,而是操作构件可以布设在任何位置,只要它们可以由用户操作快门按钮61的右手的食指或其他手指操作即可。具有其他功能的操作构件(用户可以将视线确定功能分配给所述操作构件)的示例包括:即使在正在操作快门按钮61的同时操作按钮也不会引起从图像拍摄模式的转换的按钮、不干扰当操作快门按钮61时进行的图像拍摄功能的功能按钮。视线确定功能可以被分配给可以被按下并且可以被分配各种功能的按钮。用于上述目的的操作构件不限于按压按钮,而是可以使用可旋转的操作环、可向左或向右操作的操作杆等。或者,检测按压力的触摸面板70a可以被构造为使得当用强压力按压该触摸面板70a时,进行上述功能。
通信终端10是用于数码相机100与下面描述的镜头单元150(可移除)通信的通信终端。目镜16是目镜取景器(窥视型取景器(view-in viewfinder))的目镜。用户可以通过目镜16观看显示在EVF(电子取景器)29(用作取景器内显示单元)上的图像。眼睛接触检测单元57是检测正在拍摄图像的用户的眼睛是否与目镜16接触的眼睛接触检测传感器。盖子(lid)202是放置记录介质200的槽的盖子。握持部90是被成形为当用户保持数码相机100时易于用右手握持的保持部。快门按钮61和主电子拨盘71位于如下的位置,在该位置允许其在通过用右手的小指、无名指和中指握持握持部90来保持数码相机的同时用右手的食指操作它们。在该状态下,副电子拨盘73位于可以用右手的拇指操作的位置。
图2是示出根据本实施例的数码相机100的构造的示例的框图。在图2中,镜头单元150是包括可更换摄像镜头的镜头单元。镜头103通常包括多个镜头,但是为了简单起见,这里示出为仅包括一个镜头。通信端子6是用于镜头单元150与数码相机100进行通信的通信端子。镜头单元150经由该通信端子6和上述通信端子10与系统控制单元50通信,并且内部镜头系统控制电路4经由光圈驱动电路2控制光圈1。然后,镜头103经由AF驱动电路3移动以调整焦点。
快门101是如下的焦平面快门,其能够在系统控制单元50的控制下自由地控制摄像单元22的曝光时间。
摄像单元22是包括被构造为将光学图像转换为电信号的CCD设备、CMOS设备等的摄像设备。A/D转换器23用于将从摄像单元22输出的模拟信号转换为数字信号。
图像处理单元对从A/D转换器23或存储器控制单元15(如下所述)提供的数据进行预定像素插值处理、诸如缩小处理的调整大小处理、颜色转换处理等。此外,图像处理单元24对拍摄的图像数据进行预定计算处理。系统控制单元50基于图像处理单元24进行的计算处理的结果来进行曝光控制和测距控制。更具体地,使用TTL(通过镜头)方法进行AF(自动聚焦)处理、AE(自动曝光)处理和EF(闪光灯的预发射)处理。图像处理单元24还对拍摄的图像数据进行预定计算处理,并且基于所获得的计算结果使用TTL方法进行AWB(自动白色平衡)处理。
存储器控制单元15控制A/D转换器23、图像处理单元24和存储器32之间的数据传输。来自A/D转换器23的输出数据经由图像处理单元24和存储器控制单元15或者直接经由存储器控制单元15写入存储器32。存储器32存储由摄像单元22获取并由A/D转换器23转换成数字数据的图像数据以及用于在显示单元28和EVF 29上显示的图像数据。存储器32具有足够的存储容量以存储预定数量的静止图像或预定长度的运动图像和声音。
存储器32还用作用于显示图像的存储器(视频存储器)。写入存储器32的显示用图像数据经由存储器控制部15由显示单元28或EVF 29显示。显示单元28和EVF 29根据来自存储器控制单元15的信号在诸如LCD或OLED的显示设备上显示图像。通过将由A/D转换器23进行A/D转换并存储在存储器32中的数据顺序地传输到显示单元28或EVF 29并显示该数据,可以进行实时取景显示(LV显示)。以下,将通过实时取景处理显示的图像称为实时取景图像(LV图像)。
红外发光二极管166是用于检测取景器中的画面上的用户视线的发光元件,并且向用户的眼球(眼睛)161发射红外光。从红外发光二极管166发射的红外光被眼球(眼睛)161反射,并且反射的红外光到达分色镜162。分色镜162仅反射红外光并透射可见光。光路被改变的反射红外光经由摄像镜头163在视线检测传感器164的摄像表面上形成图像。摄像镜头163是构成视线检测光学系统的光学部件。视线检测传感器164包括诸如CCD型图像传感器的摄像设备。
视线检测传感器164将入射的反射红外光光电转换为电信号,并将所得电信号输出到视线检测电路165。视线检测电路165包括至少一个处理器,并且被构造为基于来自视线检测传感器164的输出信号,根据用户的眼球(眼睛)161的图像或运动检测用户的视线,并且将检测信息输出到系统控制单元50。因此,分色镜162、摄像镜头163、视线检测传感器164、红外发光二极管166和视线检测电路165形成视线检测块160。视线检测块160是接受视线输入的接受部之一。
在本发明中,由视线检测块160使用角膜反射方法来检测视线。在角膜反射法中,基于从红外发光二极管166发射的反射红外光与眼球(眼睛)161的瞳孔之间的位置关系,更具体地,基于角膜上的反射光与眼球(眼睛)161的瞳孔之间的位置关系,来检测用户眼睛的运动,并且检测用户眼睛的方向(视线)。存在用于检测视线的各种其他方法,诸如称为巩膜反射法的方法,其使用黑眼球与眼白之间的光的反射率的差异。可以使用其他视线检测方法,只要它们能够检测视线即可。
经由取景器外显示单元驱动电路44在取景器外显示单元43上显示包括快门速度和光圈值的各种相机设置。
非易失性存储器56是诸如闪速ROM的电可擦除和可重写的存储器。非易失性存储器56存储用于系统控制单元50的操作的常数、程序等。程序是指用于执行根据本实施例的以下描述的各种流程图的程序。
系统控制单元50包括电路或至少一个处理器,并且控制整个数码相机100。通过执行存储在上述非易失性存储器56中的程序,实现以下描述的根据本实施例的各处理。例如,RAM被用作系统存储器52,并且用于系统控制单元50的操作的常数、变量和程序被从非易失性存储器56读取并被加载到系统存储器52中。系统控制单元50还通过控制存储器32、显示单元28等来进行显示控制。
系统定时器53是如下的时间测量单元,其测量各种控制中的时间并测量内置时钟的时间。
模式选择开关60是包括在操作单元70中的操作构件,并且在静止图像拍摄模式、运动图像拍摄模式等之间切换系统控制单元50的操作模式。包括在静止图像拍摄模式中的模式是自动图像拍摄模式、自动场景确定模式、手动模式、光圈优先模式(Av模式)、快门速度优先模式(Tv模式)和程序AE模式(P模式)。还有在各种场景的图像拍摄设置中可用的各种场景模式和自定义模式。模式选择开关60允许用户直接切换到这些模式之一。或者,在使用模式选择开关60切换到图像拍摄模式的列表的画面一次之后,用户可以选择所显示的多个模式中的一个,并且可以使用另一操作构件切换到所选择的模式。类似地,运动图像拍摄模式可以包括多个模式。
在配设在数码相机100上的快门按钮61的操作中间接通第一快门开关62,即,当半按下快门按钮61(以发出准备拍摄图像的指令)时,接通第一快门开关62。当接通第一快门开关62时,生成第一快门开关信号SW1。第一快门开关信号SW1使得开始诸如AF(自动聚焦)处理、AE(自动曝光)处理、AWB(自动白色平衡)处理和EF(闪光预发射)处理的图像拍摄准备操作。
当快门按钮61被完全按下到所谓的完全按下位置(以发出图像拍摄指令)时,接通第二快门开关64,并且生成第二快门开关信号SW2。响应于第二快门开关信号SW2,系统控制单元50开始从摄像单元22读取信号到将拍摄的图像作为图像文件写入记录介质200的一系列图像拍摄处理。当第二快门开关保持接通时,数码相机100以根据预定容许连续图像拍摄速度的速度进行连续图像拍摄操作(连续拍摄)。
电源控制单元80包括电池检测电路、DC-DC转换器、切换要被供电的块的切换电路等,并且检测是否安装电池、电池的类型和剩余电池电量。电源控制单元80基于检测结果和来自系统控制单元50的指令来控制DC-DC转换器,并且在所需的时间段内向包括记录介质200的各个部提供所需的电压。电源单元30包括诸如碱性或锂电池的一次电池、诸如NiCd、NiMH或Li电池的二次电池以及AC适配器。
记录介质I/F 18是与诸如存储卡、硬盘等的记录介质200的接口。记录介质200是用于记录拍摄的图像的诸如存储卡等的记录介质,并且记录介质200可以例如由半导体存储器、磁盘等实现。
通信单元54经由无线或有线电缆连接发送/接收视频信号和/或音频信号。通信单元54还可以连接到无线LAN(局域网)和因特网。通信单元54还可以经由蓝牙(注册商标)或蓝牙低电力消耗与外部设备通信。通信单元54可以发送由摄像单元22拍摄的图像(包括实时取景图像)和记录在记录介质200中的图像,并且可以从外部设备接收图像和各种信息。
姿势检测单元55检测数码相机100相对于重力方向的姿势(取向)。基于姿势检测单元55检测到的姿势,可以确定摄像单元22拍摄的图像是由水平还是垂直保持的数码相机100拍摄的图像。系统控制单元50可以将与姿势检测单元55检测到的姿势相对应的取向信息添加到由摄像单元22拍摄的图像的图像文件,或者可以旋转图像并记录所得到的旋转图像。加速度传感器、陀螺仪传感器等可以用作姿势检测单元55。还可以通过用作姿势检测部55的加速度传感器或陀螺仪传感器来检测数码相机100的移动(例如,摇摄、倾斜、提升、是否静止等)。
眼睛接触检测单元57是被构造为检测眼睛(对象)161朝向/离开取景器的目镜16的接近(眼睛接触)和离开(眼睛分离)的眼睛接触检测传感器。系统控制单元50根据由眼睛接触检测单元57检测出的状态,将显示单元28和EVF 29在显示开启状态和显示关闭状态之间切换。更具体地,至少在数码相机100处于用于拍摄图像的待机模式时,并且在由摄像单元22拍摄的实时取景图像的显示目的地的切换设置处于自动切换模式时,显示单元28被指定为显示目的地,并且在眼睛不接触目镜的同时,显示单元28被接通并且EVF 29被断开。当眼睛与目镜接触时,EVF 29被设置为显示目的地设备,并且EVF 29被接通并且显示单元28被断开。例如,红外接近传感器可以用作眼睛接触检测单元57,以检测接近包括EVF 29的取景器的目镜16的任何对象。当对象接近时,从眼睛接触检测单元57的投影部分(未示出)投影的红外光由对象反射,并且反射的红外光被红外接近传感器的光接收部分(未示出)接收。基于接收到的红外光的量,可以确定对象离目镜16有多近(即,可以检测眼睛距离)。如上所述,眼睛接触检测单元57进行眼睛接触检测处理以检测接近目镜16的对象的距离。在本实施例中,假设由与红外发光二极管166和视线检测传感器164不同的设备来实现眼睛接触检测单元57的光投影部分和光接收部分。然而,红外发光二极管166也可以用作眼睛接触检测单元57的光投影部分。视线检测传感器164也可以用作光接收部分。在目镜上没有任何东西的状态(即,没有任何东西接近目镜)下,如果在预定距离范围内检测到接近目镜的对象,则确定目镜处于眼睛接触状态。当处于眼睛接触状态(眼睛接近状态)的对象移动离开大于或等于预定距离的量时,确定对象已经离开。用于检测眼睛接触状态的阈值和用于检测眼睛分离状态的阈值可以不同。这可以例如通过提供滞后(hysteresis)来实现。假设在检测到眼睛接触之后,维持眼睛接触状态直到检测到眼睛分离。还假设在检测到眼睛分离之后,维持眼睛分离状态直到检测到眼睛接触。红外接近传感器的使用仅仅是示例,并且可以采用其他传感器作为眼睛接触检测单元57,只要能够检测接近目镜的眼睛或对象即可。
系统控制单元50能够基于来自视线检测块160的输出来检测以下操作或状态。
·视线检测块160检测到眼睛与目镜16接触的用户的视线的状态,即,存在视线输入的状态。
·视线检测块160检测到眼睛与目镜16接触的用户的视线并且用户正在注视某处的状态(稍后描述)。
·在视线检测块160检测到用户的视线之后,视线消失并且不再被检测到的状态,即,视线输入完成的状态。
·视线检测块160没有检测到眼睛与目镜16接触的用户的视线的状态,即,没有检测到通过视线的输入的状态。
用户正在注视的上述状态是指如下的状态:由视线检测块160基于检测到的视线来识别EVF 29上的位置(视线位置),并且确定所识别的视线位置在预定时间内没有改变超过预定移动范围。
完成视线输入的状态可以在用户的眼睛从目镜16移开时发生,或者在眼睛保持与目镜16接触的同时用户的眼睑闭合并且因此不能检测到用户的眼睛161时发生。
校准是使用视线检测块160检测用户的视线的校准步骤,并且进行校准以实现对用户的视线所指向的视线位置的更准确确定。在不进行校准的情况下,视线检测块160可以检测用户的视线并且确定由视线指向的视线位置。然而,包括眼睑等的人眼整体结构因人而异。因此,取决于用户,可能难以确定视线所指向的视线位置。通过进行校准,可以获取作为数码相机100的用户特有的视线信息的视线数据。通过根据所获取的用户特定视线数据计算校准值,可以更准确地确定由用户给出的视线指向的视线位置。在假设以各种取向进行视线检测的情况下,如在根据本实施例的数码相机100的情况下,存在如下的可能性:数码相机100的EVF 29与眼睛161之间的位置关系可能改变,即,视线检测块160与眼睛161之间的相对位置关系可能改变。为了处理这种情况,期望针对数码相机100处于垂直取向和水平取向的两种情况进行校准。通过使用在各取向中给出的校准值来计算视线位置,可以最小化用户观看到的位置与检测到的视线位置之间的差异。在本实施例中,如果数码相机100已经在水平取向或垂直取向上被校准(已经获取CAL数据),则可以使用所获取的CAL数据(下面描述)以相当高的精度检测视线。
在校准中,在不同位置处显示多个注视点,并且当用户注视各注视点时获取视线数据。累积视线数据,并且根据多个视线数据计算校准值。由于多个注视点被显示在不同的位置处,因此可以针对眼球的各种角度获取视线数据。通过将计算出的校准值设置为校准(CAL)数据,可以进行更准确的视线输入,而不需要用户在每次使用视线输入时进行校准。注意,在本实施例中,根据所获取的视线数据计算的校准值和数码相机100的取向彼此相关联,并且被存储并设置为CAL数据。
在本实施例中,在校准模式中显示总共五个注视点。逐一显示五个注视点,当获取到第一注视点处的视线数据时,隐藏第一注视点,显示第二注视点,以此类推。当获取到所有视线数据并计算出校准值时,校准完成。
触摸面板70a和显示单元28可以被一体地构造。例如,触摸面板70a布设在显示单元28的显示表面的顶部,使得触摸面板70a具有足够高的透光率,从而不干扰显示单元28的显示。触摸面板70a上的输入坐标和显示单元28的显示画面上的显示坐标彼此相关联。这使得可以提供可以操作的显示对象(图形用户界面),就好像用户可以直接操作显示在显示单元28上的显示画面一样。系统控制单元50可以检测以下描述的触摸面板70a上的操作或状态。
·未触摸触摸面板70a的手指或笔新触摸了触摸面板70a。这被称为触摸的开始(在下文中被称为触摸着陆(touch-down))。
·触摸面板70a正被手指或笔触摸(以下称为“触摸中(touch-on)”)。·在保持手指或笔触摸触摸面板70a的同时,手指或笔在触摸面板70a上移动(以下称为“触摸移动(touch-move)”)。
·释放触摸触摸面板70a的手指或笔。这被称为触摸结束(在下文中被称为触摸抬起(touch-up))。
·没有任何东西触摸触摸面板70a的状态(以下称为“无触摸(touch-off)”)。
当检测到触摸着陆时,也同时检测到触摸中。在检测到触摸着陆之后,通常持续检测触摸中,除非检测到触摸抬起。当检测到触摸中时,检测到触摸移动。即使当检测到触摸中时,如果触摸位置不改变,则不会检测到触摸移动。在检测到触摸触摸面板的所有手指和笔已经触摸抬起之后,检测到无触摸。
这些操作/状态以及手指或笔在触摸面板70a上触摸的位置坐标经由内部总线被通知给系统控制单元50。系统控制单元50基于所通知的信息来确定在触摸面板70a上进行什么类型的操作(触摸操作)。对于触摸移动,也可以基于位置坐标的变化,针对触摸面板70a上的各垂直和水平移动分量来确定在触摸面板70a上移动的手指或笔的移动方向。如果检测到比预定距离更长或相等的距离的触摸移动,则确定已经进行了滑动操作。轻拂(flick)是手指在触摸面板上触摸、在保持手指在触摸面板上触摸的同时快速移动一定距离、然后释放的操作。换句话说,轻拂是在触摸面板70a上的快速手指轻拂操作。当检测到比预定距离更长或相等的距离并且以大于或等于预定值的速度的触摸移动,然后检测到触摸抬起时,确定已经进行了轻拂(确定在滑动操作之后已经进行了轻拂)。捏合(pinch-in)是这样的操作,其中多个点(例如,两个点)被同时触摸,并且它们的触摸位置被移动得更靠近。捏放(pinch-out)是它们的触摸位置移动分开的操作。捏放和捏合统称为捏操作(或简称为捏)。触摸面板70a可以是诸如电阻式、电容式、表面声波式、红外式、电磁感应式、图像识别式和光学传感器式的各种类型的触摸面板中的任何一种。根据类型,通过与触摸面板接触或者通过手指或笔接近触摸面板来检测触摸,并且可以使用任一方法。
数码相机100可以包括音频输入单元(未示出),该音频输入单元被构造为经由内置麦克风或经由音频输入端子连接到音频输入单元的音频输入设备来检测音频输入信号,并将音频输入发送到系统控制单元50。在这种情况下,系统控制单元50根据需要选择输入的音频信号,对输入的音频信号进行模数转换、电平优化处理、特定频率分量减少处理等,从而生成音频信号。
图6A和图6B各自示出了所显示的关于视线的设置菜单画面的示例。当用户在图6A中的设置项601中选择“详细视线功能设置”时,画面改变为图6B中所示的画面(其是在比图6A所示的设置菜单画面的级别低的级别处的画面)。图6B示出了所显示的用于视线功能的详细设置的菜单画面的示例。用于视线功能的详细设置的菜单画面包括作为选择选项(菜单项)的设置项602至606。通过在设置项602中在针对视线输入功能的“启用”/“禁用”之间切换,可以切换是否检测用户的视线,即,是否启用视线检测块160。也就是说,通过在设置项602中针对视线输入功能在“启用”/“禁用”之间切换,设置是否接受用户使用视线的视线输入操作。
设置项603用于设置是否在视线位置处显示视线指针。如果设置为“启用”,则用户可以通过所显示的视线指针来可视地识别由视线检测块160根据用户的眼睛正在观看的方向检测到的视线位置。在本实施例中,视线指针被显示为诸如图8B中所示的指针805的指示符。显示以视线位置为中心的小圆圈,并在其周围显示较大的圆圈。在图8B中,指针805的较小圆圈的内部被填充,并且较大圆圈的框被填充。各填充区域是半透明的,使得即使填充区域与被摄体或LV图像的AF框重叠,被摄体也不会被完全隐藏。小圆圈边界和大圆圈边界之间的区域不被填充,使得LV图像的可见性不受影响。当在设置项602中禁用视线输入功能时,不管视线指针显示被设置为启用还是禁用,都不显示指针805。
设置项604用于设置是否当第一快门开关(SW1)62被接通时,即当快门按钮61被半按下时,确定视线位置(即,进行视线确定操作)。当设置为“启用”时,视线位置被确定为处于当快门按钮61被用户半按下时由视线检测块160检测到的位置。当设置为“禁用”时,当快门按钮61被半按下时,不确定视线位置。
当设置项604被设置为“启用”时,视线位置不是在按下视线确定按钮82时确定的,而是在通过按下快门按钮61而接通第一快门开关62时确定的。例如,让我们考虑当用户在通过按下功能按钮确定视线位置之后半按下快门按钮61时的情况,当半按下快门按钮61时的视线位置不同于由功能按钮确定的视线位置。在这种情况下,如果设置项604被设置为“启用”,则存在这样的可能:在快门按钮61被半按下的时间点确定视线位置。也就是说,存在这样的可能:对位于与半按下快门按钮61之前指定的位置不同的视线位置处的被摄体进行AF操作,这导致较差的可操作性。如果设置项604被设置为“禁用”,则可以避免这种不便。
当用户选择设置项605时,操作模式切换到校准(CAL)模式,并且开始校准以获取用户的视线数据。在下面参考图4描述CAL模式处理。对在设置项606中指定的校准登记号进行校准。当校准完成时,CAL数据被设置并与登记号相关联地存储。在设置项606中指定的登记号是用于在多条CAL数据中进行分类和登记数据的编号。即使当一个用户使用数码相机100的视线输入功能时,如果针对用户用裸眼使用相机或用户佩戴眼镜(隐形眼镜)的各情况分别获取并设置CAL数据,则可以实现视线输入的更高精度。当数码相机100由多个用户而不是由特定的一个用户使用时,如果针对各用户单独地获取并设置CAL数据,则可以实现视线位置的更高精度。因此,在本实施例中,可以在数码相机100中登记登记号为1至5的五条CAL数据。如果用户从未进行校准,则不在任何登记号中设置并存储CAL数据。如上所述,CAL数据与数码相机100的取向相关联地存储。注意,可以在例如登记号“1”中设置并存储与水平取向和垂直取向中的各个相关联的CAL数据,但是不对与水平取向相关联的CAL数据和与垂直取向相关联的CAL数据分别分配不同的登记号。在图6B中,启用视线输入功能,启用视线指针显示,并且禁用SW1的视线确定功能。即,检测用户的视线位置,并且在EVF 29上的LV图像上显示指针。响应于视线确定的操作,AF框移动到视线位置并且执行AF。然而,AF框不移动到当按下SW1时的视线位置。
对于各个登记号,在设置菜单画面上显示是否已登记和设置CAL数据。在图6B中,项606b指示没有针对由项606a指示的登记号“1”设置CAL数据。如果已经设置了CAL数据,则在项606b中显示圆圈,而当没有设置CAL数据时显示十字标记。然而,这仅仅是示例。如上所述,可以为各个登记号设置两条数据,其中一条数据与数码相机100的垂直取向相关联,而另一条数据与水平取向相关联。仅当没有为数码相机100的水平取向或垂直取向设置CAL数据时,才显示十字标记。代替如在上述示例中使用图标来针对水平取向显示设置状态,可以分别使用图标来针对水平取向和垂直取向显示设置状态。CAL数据的设置状态可以不显示在项606中,但是当显示从设置项606切换到子设置项时,可以显示详细的设置状态。
图3示出当数码相机100被启动时(当其电源被接通时)开始的控制处理的流程图。由系统控制单元50通过将存储在非易失性存储器56中的程序加载到系统存储器52中并执行它来实现该控制处理。
在S301中,系统控制单元50确定操作模式是否是图像拍摄模式。在当前模式是图像拍摄模式的情况下,处理进行到S302,否则,处理进行到S303。
在S302中,系统控制单元50进行图像拍摄模式处理。稍后参考图5描述图像拍摄模式处理。
在S303中,系统控制单元50确定模式是否是菜单模式。如果模式是菜单模式,则处理进行到S304,否则,处理进行到S305。
在S304中,系统控制单元50确定用户是否已经在设置菜单画面上指示进行校准。在已经发出进行校准的指令的情况下,处理进行到S306,否则,处理进行到S307。更具体地,例如,当在图6所示的设置菜单画面上选择图6B中的设置项608时,确定发出了进行校准的指令。
在S305中,系统控制单元50进行其他处理。其他处理例如是指用于回放拍摄图像的控制处理,诸如回放模式中的处理。
在S306中,系统控制单元50进行校准(CAL)模式处理。下文将参照图4描述CAL模式处理。
在S307中,系统控制单元50进行除CAL模式处理之外的菜单模式处理。除CAL模式处理之外的菜单模式处理是指:当选择设置项(不包括设置项605)中的图6A或图6B中的设置菜单画面上所示的设置项之外的设置项时或当选择图6A或图6B中所示的设置项之外的设置项时进行的处理。
在S308中,系统控制单元50确定处理是否已经完成。在处理已经完成的情况下,结束图3所示的控制流程图,否则,处理返回到S301。处理的结束例如是指关闭数码相机100的电源。
图4是在图3的S306中描述的CAL模式处理的控制流程图。当在图3的S304中确定为“是”时,即当确定已经发出进行CAL模式处理的指令时,开始该处理。在图7A至图7G中示出在CAL模式处理中显示在EVF 29上的信息的示例。
在S401中,系统控制单元50显示校准开始画面。在图7A中示出在EVF 29上显示的校准开始画面的示例。在图7A中,显示引导701,以提供关于如何以更高准确度获得用户的视线数据的校准或建议的提示。当包括在选择项702中的M-Fn按钮(在图1A和图1B中未示出)被用户按下时,画面改变为用于获取用户视线数据的画面(诸如图7B至图7F中所示的画面)。
在S402中,系统控制单元50获取数码相机100的取向。更具体地,使用姿势检测单元55获取在S401中按下EVF 29上显示的选择项702时数码相机100相对于重力方向的取向,并将其存储在非易失性存储器56中。在该步骤中获取的数码相机100的取向被设置(存储)为CAL数据,使得其与下面描述的用户的视线数据相关联。在该步骤中,确定数码相机100相对于重力方向是水平取向还是垂直取向。然而,这仅仅是示例。可以根据目镜16和/或握持部90相对于重力方向的取向获取并存储相机的更详细的取向。
在S403中,系统控制单元50显示注视点并获取用户的视线数据。在本实施例中,如图7B至图7F所示,在EVF 29上的不同位置处逐一显示总共五个注视点,并且获取用户的视线数据。即使在EVF 29上顺序显示总共五个注视点的处理期间数码相机100的取向改变的情况下,也与获取第一视线数据时获得的数码相机100的取向相关联地存储视线数据。作为具体示例,考虑在获取前三个注视点处的视线数据期间数码相机100的取向维持水平,但是在获取第四个注视点处的视线数据时用户将取向改变为垂直取向的情况。在这种情况下,尽管在获取第四个和随后的注视点处的视线数据时数码相机100的取向是垂直的,但是与在S402中获取的相机取向相关联地存储视线数据。
在S404中,系统控制单元50确定是否完成了对所有五个注视点的用户视线数据的获取。在数据的获取完成的情况下,该处理继续进行到S405。然而,在没有完成对所有五个注视点的数据的获取的情况下,该处理进行到S411。注意,视线数据的获取的完成被定义为图7B至图7F所示的所有五个注视点的视线数据的获取的完成。
在S405中,系统控制单元50确定在S402中获取的数码相机100的取向。在数码相机100水平取向的情况下,处理进入S406。然而,在取向是垂直的情况下,处理进入S407。可以将在CAL模式处理中获取的视线数据设置为与数码相机100的取向相对应的CAL数据。这取决于位于目镜16中的视线检测块160与用户的眼睛161之间的相对位置关系。当数码相机100从水平取向改变为垂直取向时,视线检测块160与眼睛161之间的相对位置关系也改变。这引起由视线检测块160检测到的来自眼睛161的反射红外光的获取数据的改变。因此,在针对数码相机100的水平取向设置CAL数据而不针对垂直取向设置CAL的情况下,如果用户试图在垂直取向使用视线输入功能,则存在如下可能性:在用户正在观看的位置与计算出的注视位置之间出现差异。为了更准确地计算视线位置,期望针对数码相机100处于水平取向和垂直取向的两种情况获取并设置CAL数据。
在S406中,系统控制单元50将数码相机100的取向(在该步骤中为水平)和所获取的CAL数据存储在非易失性存储器56中,使得取向和CAL数据彼此相关联。其结果是,例如,在图6B的显示项606a中指定的登记号的水平CAL数据被设置。在没有针对相同登记号在垂直取向上进行校准的情况下,垂直取向上的CAL数据未被设置。注意,在针对数码相机100的水平取向和垂直取向中的至少一个取向设置CAL数据的情况下,在图6B中的显示项606a中所示的登记号处,CAL被设置。也就是说,在针对数码相机100的水平取向和垂直取向中的至少一个取向设置CAL数据的情况下,圆圈(〇)被分配给显示项606b。在图6B中,在数码相机100的水平取向或垂直取向上都没有设置CAL数据,因此十字标记(X)被分配给显示项606b。
在S407中,系统控制单元50将数码相机100的取向(在该步骤中为垂直)和所获取的CAL数据以取向和CAL数据彼此相关联的方式存储在非易失性存储器56中。
在S408中,系统控制单元50显示校准结束画面。显示的校准结束画面的示例如图7G所示。通过在各种条件和环境下多次进行校准,能够根据多条CAL数据检测更准确的视线位置。如以上在S405中所述,当在数码相机100处于水平取向和垂直取向的两种情况下进行CAL模式处理时,CAL数据可以更精确。由于这些原因,诸如“如果在各种图像拍摄条件(在环境亮度、相机取向方面)下进行校准,则可以实现视线检测的更高精度。您想开始校准吗?”的引导705可以显示在EVF 29上,以提示用户在不同的条件下从开始就进行CAL模式处理。
在S409中,系统控制单元50确定是否已经发出结束校准的指令。在已经发出结束校准的指示的情况下,处理进行到S410。然而,在发出继续校准的指令的情况下,处理返回到S401。当从图7G所示的S406中显示的结束画面选择选择项705a时,发出结束校准的指令。当选择了选择项705b时,发出继续校准的指令。在这种情况下,从开始就进行CAL模式中的控制处理。在这种情形下,如果数码相机100的取向改变,则在改变的取向中获取视线数据,并且与该取向相关联地设置CAL数据。例如,在针对登记号“1”的水平相机取向进行CAL之后,如果然后针对垂直相机取向进行CAL,则两个数据集(包括在水平取向上获得的一个数据集和在垂直取向上获得的一个数据集)被存储在登记号“1”中。
在S410中,系统控制单元50确定模式是否是在进行图4所示的CAL模式处理之前的菜单模式。如果是菜单模式,则处理进入S307。然而,如果不是菜单模式,即,在响应于按下在后面描述的图5的S515中显示的快捷按钮804a而开始CAL模式处理的情况下,处理进入S302。
如果S404中的确定为“否”,则在S411中,系统控制单元50确定是否发出取消CAL模式处理的指令。如果发出了取消指令,则处理进行到S412,否则,处理返回到S403。当进行诸如按下回放按钮79、按下快门按钮61或按下菜单按钮81的模式切换操作时,可以发出取消指令。
在S412中,系统控制单元50丢弃所获取的视线数据(不将其存储为CAL数据)。在这种情况下,S404中的确定为“否”,即,尚未针对所有五个注视点获取视线数据。在本实施例中,在尚未针对所有五个注视点获取视线数据的情况下,确定不能保证CAL数据的高精度,因此不将该数据登记为CAL数据。在该步骤中,不仅丢弃视线数据,而且丢弃在S402中获得的相机取向。在S412中丢弃视线数据之后,CAL模式处理结束(并且处理流程返回到图3所示的S308)。
图5是在图3的S302中描述的图像拍摄模式处理的控制流程图。当在图3的S301中确定为“是”时,即,当确定当前模式是图像拍摄模式时,开始该处理。
在S500中,系统控制单元50在EVF 29上显示由摄像单元22拍摄的实时取景图像、与当前图像拍摄模式、图像质量等相关的设置,以及诸如快门速度、ISO感光度等的图像拍摄参数。图8A和图8D中示出了显示信息的示例。在图8A所示的示例中,数码相机100处于水平取向,而在图8D所示的示例中,数码相机100处于垂直取向。在EVF 29上显示LV 801、图像拍摄信息802和AF框806。
在S501中,系统控制单元50重置切换标志(使得切换标志=0)。切换标志是与在启用和禁用在图6A和图6B中的设置项602中指定的视线输入功能之间的切换相关联的标志,并且被存储在系统存储器52中。在本实施例中,当在数码相机100的电源接通之后用户将视线输入功能从“禁用”切换到“启用”时,切换标志被设置为使得切换标志=1。在用户将视线输入功能从“启用”切换到“禁用”的情况下,或者在电源接通之后视线输入功能维持在“禁用”或“启用”而不切换的情况下,切换标志=0。
在S502中,系统控制单元50参照系统存储器52,并且确定视线输入功能是否被启用(根据在设置项602中指定的设置)。如果启用,则处理进行到S503,否则,处理进行到S523。
在S503中,系统控制单元50确定是否启用在图6B中的设置项603中指定的视线指针显示设置。如果启用,则处理进行到S504,而如果禁用,则处理进行到S505。
在S504中,系统控制单元50在用户的视线位置处显示视线指针,该视线位置由视线检测块160检测并考虑CAL数据来计算(如果用户从未进行过CAL模式处理,则不考虑CAL数据)。视线指针以叠加在显示在EVF 29上的LV图像上的方式被显示。如上所述,视线指针以与图8B中的指针805相同的方式显示。
在S505中,系统控制单元50确定是否已经针对当前CAL登记号进行了CAL模式处理。如果已经进行了CAL模式处理,则处理进行到S506,而如果没有进行CAL模式处理,则处理进行到S512。在该步骤中,如果无论数码相机100的取向如何,对于当前登记号已经进行了至少一次CAL模式处理,则确定已经进行了CAL模式处理。如图6B中的显示项606a所示,当前登记号显示在设置菜单画面上或EVF 29上,或者当启用视线输入功能时在图像拍摄模式下,当前登记号显示在EVF 29上或取景器外显示单元43上。
在S506中,系统控制单元50确定数码相机100的壳体的取向。如果壳体水平取向,则处理进行到S507,而如果壳体垂直取向,则处理进行到S508。可以由姿势检测单元55检测数码相机100的壳体的取向。当数码相机100相对于重力方向水平时,即,在本实施例中,当目镜16垂直于重力方向时,数码相机100被确定为水平取向。在该确定中,不考虑目镜16相对于重力方向取向的方向。当数码相机100是垂直的,即,在本实施例中,当目镜16沿着重力方向并且握持部90位于重力方向的上方或下方时,确定数码相机100垂直取向。
在S507中,系统控制单元50确定是否已经在相机的水平取向上设置了CAL数据。在已经在相机的水平取向上设置了CAL数据的情况下,处理进行到S509。然而,在尚未在水平取向上设置CAL数据的情况下,处理进行到S512。在本示例中,在S506中确定数码相机100的当前取向是水平的。也就是说,在该步骤中确定为“是”的情况下,可以使用已经设置的CAL数据来精确地检测视线。另一方面,在该步骤中确定为“否”的情况下,存在如下的可能性:当用户以水平取向保持数码相机100时,除非执行校准,否则在与用户正在观看的位置不同的位置处显示视线位置。也就是说,存在如下的可能性:在用户看到的位置与检测到的视线位置之间存在差异,这使得用户感觉难以使用视线输入功能。
在S508中,系统控制单元50确定是否已经在相机的垂直取向上设置了CAL数据。在已经在相机的垂直取向上设置了CAL数据的情况下,处理进行到S509,而在尚未在相机的垂直取向上设置CAL数据的情况下,处理进行到S512。可以通过以与S507中针对水平取向的确定相同的方式进行针对垂直取向的确定来实现该步骤中的确定。
在S509中,系统控制单元50参照系统存储器52,确定切换标志是否=1。如果切换标志=1,则处理进行到S511,否则(如果切换标志=0),则处理进行到S510。如S501中所述,切换标志=1指示在数码相机100的电源被接通之后视线输入功能从“禁用”切换到“启用”。
在S510中,系统控制单元50在EVF 29上显示图标803。图8G示出了在这种情况下显示的信息的示例。S509中确定为“否”指示:在数码相机100的电源被接通之后视线输入功能的设置没有改变,即,当数码相机100的电源被接通时视线输入功能被启用。在本实施例中,每当视线输入功能的设置在“启用”和“禁用”之间切换时,显示引导814/824,而不管相机取向或CAL数据设置如何,因此可以假设用户可能知道视线输入功能是启用还是禁用。因此,假设仅显示图标803就足够了,因此仅显示图标803用于通知。
在S511中,系统控制单元50在EVF 29上显示表示眼睛形状的图标803以指示视线输入功能被启用,并且显示文本信息“视线输入:启用”(引导814)。在这种情形下显示的画面示例如图8B和图8E所示。S509中确定为“是”指示:视线输入功能被切换到“启用”。因此,引导814以允许用户更容易识别出的方式通知用户视线输入功能已经从“禁用”切换到“启用”。在本实施例中,在即使在数码相机100的电源被接通之后(once after)视线输入功能从禁用切换到启用的情况下,切换标志被设置为1(切换标志=1),但是这仅仅是示例而非限制。例如,仅当在开始图5所示的图像拍摄模式处理之后视线输入功能从“禁用”切换到“启用”时,切换标志被设置为1。在这种情况下,当用户改变模式使得“启用视线输入功能”→“画面改变为设置菜单画面(菜单模式操作)”→“模式改变为图像拍摄模式”时,不向该用户提供通过引导814的通知(尽管显示图标803)。也就是说,不重复显示引导814,并且这使得对于知道视线输入功能已经被切换到“启用”的用户来说不那么麻烦。
在S510或S511中显示图标803或引导814之后,处理进行到S518。
由于S505中的确定为“否”,所以系统控制单元50在S512中点亮图标803,使得图标803闪烁。这使得用户更容易在视觉上识别出尚未设置CAL数据。
在S513中,与S509类似,系统控制单元50确定切换标志是否=1。如果切换标志=1,则处理进入S514,否则(切换标志=0),处理进入S522。
在S514中,如在S506中那样,系统控制单元50确定数码相机100的取向。如果是水平的,则处理进行到S515,而如果是垂直的,则处理进行到S517。
在S515中,系统控制单元50显示叠加在EVF 29上显示的LV图像上的引导804。更具体地,显示指示视线输入功能被启用的文本信息(引导804c)和关于校准的效果的描述(引导804d)。此外,还显示提示进行到CAL模式处理的文本信息(引导804e)和允许容易地进行到CAL模式处理的项(快捷按钮804a和804b)。图8C示出在这种情形下显示的信息的示例。稍后描述所显示的信息的细节。S505中确定为“否”和S513中确定为“是”指示:用户从未使用过视线输入功能。因此,用户可能不知道最好执行CAL并在特定登记号中设置CAL数据以使用视线输入功能。因此,显示消息804以通知用户:可以通过首先进行CAL然后使用视线输入功能来实现视线输入功能的更高精度。当用户试图在图像拍摄模式下使用视线输入功能来拍摄图像时,切换到设置菜单画面并进行CAL模式处理对于用户可能是麻烦的。为了处理上述情形,显示快捷按钮(快捷按钮804a)以允许容易地转换到CAL模式处理。通过选择快捷按钮804b,用户可以在不再次进行CAL的情况下进行到下一操作。由于当启用视线输入功能时电力被消耗,即,当视线检测块160的操作消耗电力时,所以如果用户不知道视线输入功能被启用,则电力将与用户的意图相反地被消耗,从而导致电池电力的减少。因此,除了图标803之外,还以叠加在LV图像上的方式显示引导804,使得用户可以更清楚地识别出视线输入功能被启用。引导804包括引导804c、804d和804e以及快捷按钮804a、804b。在本实施例中,当相机水平取向时显示引导804。或者,也可以仅显示引导804c至804e而不显示快捷按钮804a、804b。
在S516中,系统控制单元50确定是否从S515中描述的快捷按钮804a和804b中选择了快捷按钮804a,即,是否给出了进行到CAL模式处理的指令。如果已经给出了进行到CAL模式处理的指令,则处理进行到图3中的S306。(其中要进行CAL模式处理)。在没有给出指令的情况下,即,当选择快捷按钮804b时,处理进行到S518。
在S517中,系统控制单元50显示叠加在EVF 29上显示的LV图像上的引导814。在该步骤中,与S515不同,仅显示“视线输入功能:启用”(引导814),而不显示引导804d和804e以及快捷按钮804a和804b(图8F)。注意,根据用户的视线确定操作或经过预定时间段,可以不进行该步骤中的显示。
在S518中,系统控制单元50确定从显示引导804(在S515中显示)或引导814(在S517中显示)起是否已经经过了预定时间。如果已经经过了预定时间,则处理进行到S519,否则,处理进行到S521。
在S519中,系统控制单元50确定是否进行视线确定操作。如果进行视线确定操作,则处理进行到S520。如果不进行视线确定操作,则处理返回到S518。
在S520中,系统控制单元50隐藏S515中显示的引导804或S517中显示的引导814。图标803未被隐藏。这是因为图标803被显示在小的区域内,因此当拍摄图像时,将图标803与其他图像拍摄信息一起显示不太可能打扰用户。通过继续在EVF 29上显示图标803,用户总是能够从视觉上识别出视线输入功能是被启用还是被禁用。另一方面,由于如图8A至图8I所示,引导804c至804e以及快捷按钮804a和804b被叠加显示在LV图像上,因此它们的持续显示将降低LV图像的可见性。
在S521中,与S520类似,系统控制单元50隐藏S515中显示的引导804或S517中显示的引导814。
在S522中,系统控制单元50确定视线输入功能是否已经从启用切换到禁用。如果是,则处理进行到S523,否则,处理进行到S527。
在S523中,系统控制单元50将切换标志设置为0,并将其存储在系统存储器52中。
在S524中,系统控制单元50隐藏EVF 29上显示的图标803,在EVF29上显示引导824“视线输入功能:禁用”,并通知用户视线输入功能已被禁用。在图8I中示出了在这种情形中EVF 29上的显示的示例。图8I示出当数码相机100水平取向时的显示的示例,而当数码相机100垂直取向时的显示类似。如S518中所述,当在EVF 29上显示引导824之后经过预定时间时,隐藏在该步骤中显示的引导824。如果在经过预定时间之前进行确定视线位置的操作,则隐藏引导824,并且处理进行到S527。
当在S502中确定为“否”时,系统控制单元50在S525中确定视线输入功能是否已经从禁用切换到启用。如果已经切换,则处理进行到S526,否则,处理进行到S527。
在S526中,系统控制单元50将切换标志设置为1,并将其存储在系统存储器52中。然后,处理返回到S503。
在S527中,与S519类似,系统控制单元50确定是否进行确定视线位置的操作。如果进行视线确定操作,则处理进行到S528,否则,处理进行到S532。
在S528中,与S502类似,系统控制单元50确定视线输入功能是否被设置为启用。如果启用,则处理进行到S529,而如果不启用,则处理进行到S532。
在S529中,系统控制单元50确定是否检测到视线。在视线检测块160检测到用户的视线的情况下,确定检测到视线,并且处理进行到S530。如果没有检测到视线,则处理进行到S532。
在S530中,系统控制单元50确定是否检测到注视。如果检测到注视,则处理进行到S531,否则,处理进行到S532。
在S531中,系统控制单元50将AF框移动到与在S527中确定视线位置时由视线检测块160检测/计算的EVF 29上的用户视线位置相对应的位置,并且系统控制单元50进行AF操作。图8H示出了在这种情形下的显示的示例。当用户在指示用户的视线所指向的位置的指针805处于图8G中所示的位置的状态下进行视线确定操作时,AF框806被移动到指针805的位置(用户的视线位置),并且进行AF操作。
在S532中,系统控制单元50确定第一快门开关62是否接通。如果接通,则处理进行到S533,否则,处理进行到S541。第一快门开关62接通的状态是指如上所述快门按钮61被半按下的状态。也就是说,可以假设用户将要拍摄图像。
在S533中,系统控制单元50参照非易失性存储器56,并且确定通过SW1确定视线位置的功能(在图6B中的设置项604)是否被设置为“启用”。如果“启用”,则处理进行到S534,而如果“禁用”,则处理进行到S535。
在S534中,系统控制单元50将AF框移动到与在S532中第一快门开关被接通时由视线检测块160检测/计算的EVF 29上的用户视线位置相对应的位置,并且系统控制单元50进行AF操作。
在S535中,系统控制单元50确定聚焦模式是否被设置为AF模式。如果设置了AF模式,则处理进入S536,否则(如果设置了MF模式),则处理进入S538。在设置菜单画面上或使用配设在镜头单元150外部的开关等来进行AF模式和MF模式之间的切换。
在S536中,系统控制单元50基于显示AF框的位置来进行AF处理。
在S537中,系统控制单元50进行操作以准备诸如AE和AWB的其他图像拍摄操作。
在S538中,系统控制单元50确定第二快门开关64是否接通。如果第二快门开关64接通,即,如果快门按钮61被完全按下,则处理进行到S539,否则处理进行到S540。在本实施例中,假设当快门按钮61被完全按下时发出图像拍摄指令,但是例如当触摸显示在触摸面板70a上的图标时,也可以发出图像拍摄指令。
在S539中,系统控制单元50进行直到将拍摄的图像作为图像文件存储在记录介质200上的图像拍摄操作的一系列步骤。
在S540中,系统控制单元50确定第一快门开关62是否保持在接通状态。如果是,则处理进行到S534,否则,处理进行到S541。
在S541中,系统控制单元50确定图像拍摄模式是否已经结束。当图像拍摄模式结束时,图4A中的控制流程图结束,并且处理返回到图3中的步骤S308。如果图像拍摄模式尚未结束,则处理返回到S502。图像拍摄模式的结束是指:例如通过关闭数码相机100的电源或按下菜单按钮81来切换到设置菜单画面。
当在S529中确定检测到用户的视线时,AF框可以移动到与检测到的视线相对应的位置,并且可以在不进行S530中的关于注视的确定的情况下进行AF操作。也就是说,可以跳过S530,并且处理可以从S529进行到S531。
图8A至图8I示出了在图像拍摄模式处理中根据数码相机100的取向和登记号的CAL数据的设置,在EVF 29上给出的显示的示例。
图8A是当数码相机100水平取向并且视线输入功能被禁用时EVF 29上的显示的示例。在EVF 29上显示LV 801,并且参照非易失性存储器56,并且图像拍摄信息802和AF框806与LV一起显示。
图8B示出了如下的状态:数码相机100水平取向、视线输入功能被启用、视线指针显示被启用并且在当前登记号中已经登记用于水平取向的CAL。当数码相机100在数码相机100的电源被接通之后视线输入功能已经被启用的状态下进入图像拍摄待机模式时,给出诸如图8B中所示的显示。除了图8A中所示的显示之外,显示图标803和引导814以指示启用视线输入功能。
图8C示出了当数码相机100水平取向、视线输入功能被启用、视线指针显示被启用并且在当前登记号中未设置水平取向的CAL时给出的显示的示例。除了显示在EVF 29上的LV 801、图像拍摄信息802、指针805和AF框806之外,图标803被显示为使得其闪烁。然后,显示“视线输入功能:启用”(引导804c)时,并且显示校准的效果的描述(引导804d)。此外,显示提示切换到CAL模式处理的文本信息(引导804e)以及用于容易地切换和提示切换到CAL模式处理的快捷按钮804a和804b。在图8C所示的状态下,用户尚未进行水平取向的CAL。因此,给出更视觉可识别的通知以提示用户进行校准并登记CAL数据。注意,引导804具有比稍后参考图8F描述的引导814更大的显示区域和/或更大数量的语句(更大数量的字符)。当数码相机100水平取向时,存在如下的可能性:用户第一次尝试使用视线输入功能,或者用户正保持数码相机100并且无意中启用视线输入功能。用户可以保持数码相机100而不打算立即开始拍摄图像,但是用户可以进行各种设置以准备拍摄图像。在这种情况下,即使图8C中所示的大区域引导804叠加在LV图像上显示,用户不太可能感到烦恼。此外,闪烁图标803与引导804一起显示使得用户不太可能忽略CAL尚未被设置的事实,并且使得更容易切换到CAL模式处理。尽管在图8C中引导804c至804e的语句各自由虚线包围,这仅是为了便于说明,并且虚线实际上并不与语句一起显示。
图8D示出当数码相机100垂直取向并且视线输入功能被禁用时EVF 29上的显示的示例。在EVF 29上显示LV 801,并且参照非易失性存储器56,并且图像拍摄信息802和AF框806与LV一起显示。尽管显示的示例大致类似于图8A中所示的示例,但是不同之处在于数码相机100垂直取向,因此显示的布局根据EVF 29的显示区域而改变。
图8E示出了如下的状态:数码相机100垂直取向、视线输入功能被启用、视线指针显示被启用并且在当前登记号中已经登记垂直取向的CAL。当数码相机100在数码相机100的电源被接通之后视线输入功能已经被启用的状态下进入图像拍摄待机模式时,给出诸如图8E中所示的显示。除了图8D中所示的显示之外,显示图标803和引导814以指示启用视线输入功能。
图8F示出了当数码相机100垂直取向、视线输入功能被启用、视线指针显示被启用并且在当前登记号中未设置垂直取向的CAL时的显示的示例。除了显示在EVF 29上的LV801、图像拍摄信息802、指针805和AF框806之外,还显示闪烁图标803和“视线输入功能:启用”(引导814)。在图8F所示的状态中,用户尚未进行垂直取向的校准。然而,由于数码相机100垂直取向,因此与数码相机100水平取向时相比,用户更可能检查整个图像的构图或等待快门机会。图8F所示的引导804具有比图8C所示的引导804更小的显示区域/更少的文本(更少的字符)。虽然引导显示区域小,但是图标803的闪烁让用户知道尚未设置CAL数据。这使得用户更容易看到实时取景图像,并且不太可能错过快门释放机会。
图8G示出了如下的状态:数码相机100水平取向、视线输入功能被启用、视线指针显示被启用并且在当前登记号中已经登记水平取向的CAL。当数码相机100在数码相机100的电源被接通之后视线输入功能已经被启用的状态下进入图像拍摄待机模式时,给出诸如图8G中所示的显示。当数码相机100处于垂直取向并且已经以当前CAL登记号在垂直取向登记CAL时,进行相同的显示。
图8H示出在数码相机100水平取向、视线输入功能被启用并且视线指针显示被启用的状态下,当用户进行用于确定用户注视的视线位置的操作时,EVF 29上的显示的示例。代替指针805,显示基于指针805的位置设置的AF框806。通过响应于确定视线位置的操作而暂时隐藏指针805,LV图像中的AF框和被摄体变得更容易看到。当经过预定时间或当第二快门开关64关闭时,再次显示暂时隐藏的指针805。
图8I示出了如下的状态:数码相机100水平取向、视线输入功能被禁用并且在当前登记号中已经登记垂直取向的CAL。更具体地,这是当通过用户操作将视线输入功能从启用切换到禁用时的状态。响应于从图8H所示的状态禁用视线输入功能,隐藏图标803并且显示引导824。所显示的引导允许用户在视觉上识别出视线输入功能已经被禁用。例如,因为已经过去了预定时间段,因此,即使在隐藏引导824之后也不显示图标803,因此用户可以识别出视线输入功能当前被禁用。
尽管图标803被点亮或闪烁以指示是否已经进行校准,但是这仅仅是作为示例而非限制。或者,取决于是否已经进行校准,可以改变图标的颜色,或者可以以不同的形式显示图标。图标803被假设为眼睛的形状,但这仅是示例性的而非限制。
如上所述,在本实施例中,根据数码相机100的取向适当地改变显示。当数码相机100处于水平取向并且未设置CAL数据时,如果视线输入功能被启用,则如下给出显示(引导803)以叠加在实时取景图像上。显示指示尚未设置CAL数据的图标(图标803)、指示启用视线输入功能的信息(引导804c),以及提示切换到CAL模式处理的文本信息(引导804d)。此外,显示容易转变到CAL模式处理和用于提示进行CAL模式处理的显示(引导804e),以及容易转变到CAL模式处理的项(快捷按钮804a和804b)。这些显示可以提示用户进行校准和设置CAL数据,并在不打扰用户的情况下转变到CAL模式处理。在数码相机100垂直取向并且未设置CAL数据的状态下,当视线输入功能被启用时,仅显示指示未设置CAL数据的图标和视线输入功能被启用的指示。当数码相机100处于水平取向时,存在如下的可能性:用户正在进行设置相机以拍摄图像的处理等,并且用户不一定以立即拍摄图像的意图保持数码相机100。另一方面,当数码相机100处于垂直取向时,用户可能在拍摄图像之前对图像进行构图,或者可能正在等待拍摄图像的机会。在这种情况下,如果提示用户进行校准的显示被叠加在实时取景图像上,则用户可能被显示的引导分散注意力,并且甚至可能错过快门释放机会。因此,当数码相机100处于垂直取向时,显示应当在用户可以感知的情况下尽可能小,并且不应当干扰拍摄图像。通过以上述方式进行控制,可以在适当的定时提供显示以提示用户设置与电子设备的控制有关的功能。
上面已经描述了根据本实施例依据视线输入功能的数码相机的校准是否被设置(根据设置状态)来进行的显示的控制,但是这仅是示例性的,并且不限于校准的设置状态。对于被设计为以各种取向使用的电子设备,如果允许用户设置与电子设备的控制相关的功能,则本申请可以应用于根据电子设备的功能的设置和取向来改变用于通知用户的显示的内容的技术。也就是说,当电子设备处于用户应该在关注显示的当前内容的同时使用电子设备的取向时,被显示以通知用户的引导被限制到所需的最小限度。当允许以各种方式使用电子设备时,在用户正在使用电子设备而不关注当前显示内容的情况下,给出显示以提示改变设置。通过以上述方式进行控制,可以根据电子设备的取向在适当的定时给出提示进行设置的显示,而不会打扰用户。作为变型例,下面描述对作为移动终端的智能手机的应用。
(变型例)
图9A至图9F示出当本发明应用于诸如智能手机的移动终端时给出的显示的示例。
图9A是示出智能手机950的构造的示例的框图。CPU 941、存储器932、非易失性存储器956、图像处理单元924、显示器900、记录介质I/F918、姿势检测单元955、通信I/F 939、系统定时器953、操作单元970和摄像单元922连接到内部总线150。连接到内部总线150的各单元能够经由内部总线150彼此交换数据。
存储器932例如是RAM(使用半导体元件的易失性存储器)等。CPU 941使用作为工作存储器的存储器932,根据例如存储在非易失性存储器956中的程序来控制智能手机950的各部分。非易失性存储器956存储图像数据、音频数据、供CPU 941操作的各种程序以及其他数据。例如使用硬盘(HD)或ROM来实现非易失性存储器956。
在CPU 941的控制下,图像处理单元924对存储在非易失性存储器956或记录介质919中的图像数据、经由通信I/F 939获取的图像数据、拍摄的图像等进行各种操作。图像处理单元924进行的图像处理包括A/D转换处理、D/A转换处理、图像数据编码、压缩、解码、放大/缩小(调整大小)、降噪和颜色转换处理。可以使用用于进行特定图像处理的专用电路块来实现图像处理单元924。根据图像处理的类型,CPU 941可以根据程序进行图像处理而不使用图像处理单元924。
显示器900在CPU 941的控制下显示:图像、显示GUI的GUI(图形用户界面)画面等。CPU 941根据程序生成显示控制信号,并且控制智能手机950的各部分以生成用于在显示器900上显示的视频信号,并且将生成的视频信号输出到显示器900。显示器900基于输出视频信号显示图像。
操作单元970是用于接受用户操作的输入设备,包括诸如键盘的字符信息输入设备、诸如鼠标、触摸面板等的定点设备、按钮、拨号盘、操纵杆、触摸传感器、触摸板等。触摸面板是如下的输入设备,其被构造为以平面形式覆盖在显示器900上,以使得根据触摸位置输出坐标信息。
记录介质I/F 918被构造为使得诸如存储卡、CD、DVD等的记录介质919被允许插入记录介质I/F 918中,以在CPU 941的控制下从插入的记录介质919读取数据或向插入的记录介质919写入数据。通信I/F 939是用于与外部设备、因特网940等通信以发送/接收诸如文件、命令等的各种数据的接口。系统定时器953是测量用于各种控制的时间和内置时钟的时间的定时器。
摄像单元922是如下的相机单元,其包括使用将光学图像转换为电信号的CCD设备、CMOS设备等实现的摄像设备(图像传感器)。摄像单元922包括:包括变焦镜头和聚焦镜头的镜头组(摄像镜头)、具有光圈功能的快门、摄像设备、被构造为将从摄像设备输出的模拟信号转换为数字信号的A/D转换器以及覆盖摄像系统以防止污染和损坏的屏障。图像处理单元924对由摄像单元922获取的数据进行预定像素插值、诸如缩小的尺寸调整处理、颜色转换处理等。CPU 941基于由图像处理单元924获得的计算结果来进行曝光控制、测距控制和AWB(自动白平衡)处理。在显示器900上显示由摄像单元922拍摄并由图像处理单元924图像处理的显示图像数据。由摄像单元922拍摄、由A/D转换器进行一次A/D转换并存储在存储器102中的数字信号由D/A转换器转换为模拟信号,并顺序地发送到显示器900,并在其上显示为实时取景图像(称为实时取景显示)。当相机处于用于拍摄静止图像的待机模式时、处于用于拍摄运动图像的待机模式时或者当正在记录运动图像时,可以显示实时取景,使得基本上实时地显示拍摄的被摄体图像。CPU 941响应于基于在操作单元970上进行的用户操作而发出的图像拍摄准备指令,控制摄像单元922和图像处理单元924以开始诸如AF(自动聚焦)处理、AE(自动曝光)处理、AWB处理等的操作。响应于图像拍摄指令,CPU 941进行控制以开始一系列图像拍摄处理(实际图像拍摄处理),所述一系列图像拍摄处理包括:曝光处理、从摄像设备读取信号、由图像处理单元924处理拍摄的图像以生成图像文件以及将其记录在记录介质919中。可以通过用户对操作单元970的操作来给出图像拍摄指令。摄像单元922能够拍摄静止图像和运动图像。
姿势检测单元955检测智能手机950相对于重力方向的姿势(取向)。基于由姿势检测单元955检测到的姿势,可以确定由摄像单元22拍摄的图像是由水平保持的智能手机950拍摄的图像还是由垂直保持的智能手机950拍摄的图像。CPU 941可以将与姿势检测单元955检测到的姿势相对应的取向信息添加到由摄像单元22拍摄的图像的图像文件,或者可以旋转图像并记录所得到的旋转图像。加速度传感器、陀螺仪传感器等可以用作姿势检测单元955。
图9B至图9E示出了当智能手机950处于特定取向并且向省电模式的自动切换关闭时,显示单元900上出现的显示的示例。
图9F示出了与省电模式相关的设置菜单画面,该设置菜单画面用于在智能手机950的电池的剩余电量低时将各种设置共同改变为允许降低电力消耗的设置。当选择设置项911的选择项911a时,从选择时起将电力模式改变为省电模式(智能手机950的设置被共同改变为可以降低电力消耗的设置)。当选择选择项911b时,维持当前设置而不进入省电模式。注意,当选择选择项911a时,无论剩余电池电量如何,从选择时起模式被改变为省电模式。设置项912设置当智能手机950的剩余电池电量等于或少于预定水平(例如20%)时是否自动进入省电模式。在选择选择项912a的情况下,当剩余电池电量等于或少于特定水平时,自动切换到省电模式,而不向用户给出诸如引导显示的任何通知。在选择了选择项912b的情况下,当电池电量等于或少于特定水平时,根据智能手机950的取向显示诸如引导的通知。在图9F中,省电模式被设置为关闭,并且自动省电模式被设置为关闭。当省电模式为开启时,无论自动省电模式的设置如何,都会切换到省电模式(省电模式和自动省电模式是排他性的)。当省电模式为关闭且自动省电模式为开启时,当剩余电池电量达到特定水平时,模式自动切换到省电模式。
图9B示出了当智能手机950垂直取向、省电模式为关闭并且剩余电池电量大于20%时,出现在显示单元900上的显示的示例。在显示单元900上显示:显示器900、指示剩余电池电量的图标902和时间。因为省电模式为关闭并且剩余电池电量大于20%(在该示例中为21%),所以图标902以绿色显示为正常显示。在显示器900上显示图像904和诸如图像904的标题和注释的信息。
图9C示出了当智能手机950垂直取向、自动省电模式为关闭并且剩余电池电量等于或少于20%时,出现在显示单元900上的显示的示例。在该示例中,由于剩余电池电量是20%,所以图标902以红色显示以指示剩余电池电量低的警告。在本实施例中,当剩余电池电量达到20%时,显示引导903。引导903包括当剩余电池电量低时切换到省电模式的效果的显示(引导903c)、提示设置省电模式的显示(引导903d)、省电模式的设置项903a和903b。如果选择了选择项903a,则模式被切换到省电模式(开启省电模式)。在选择了选择项903b的情况下,维持当前设置而不进入省电模式。图标902提供指示剩余电池电量等于或少于预定水平的简单警告,并且引导903提示进入省电模式。
如图9B和图9C所示,在大多数情况下,智能手机950是垂直使用的,并且用户可能在没有任何特定意图的情况下使用智能手机。因此,通过在大的显示区域中显示大量的信息(诸如,引导903)来通知用户剩余电池电量低是更加用户友好的。当剩余电池电量等于或少于20%时,如果用户在维持当前设置和通信设置的同时继续使用智能手机950,则智能手机950的剩余电池电量将在短时间内达到0(耗尽),并且将变得无法使用智能手机950。由于智能手机可以通过切换到省电模式而不是继续以其当前设置使用它来使用更长的时间段,因此显示引导903和选择项903a以提示进入省电模式。通过使得能够通过选择项903a和903b而不转换到设置菜单画面来改变省电模式的设置内容,用户可以容易地改变模式而不会感到不便。当模式被切换到省电模式时,图标902显示为黄色以指示该模式是省电模式。这指示与图9B中的正常图标和图9D中的低电池电量图标都不同的状态(模式)。引导903c和903d的各个语句由虚线包围,但是这是为了便于说明,并且虚线实际上不与语句一起显示。
图9D示出了当智能手机950水平取向、省电模式为关闭并且剩余电池电量大于20%时,出现在显示单元900上的显示的示例。在显示单元900上显示图像904、图标902和时间。由于省电模式为关闭且剩余电池电量大于20%(在此示例中为85%),因此图标902以正常视图显示。
图9E示出了当智能手机950水平取向、自动省电模式为关闭并且剩余电池电量等于或少于20%时,出现在显示单元900上的显示的示例。在这种情况下,由于剩余电池电量为19%,所以图标902以红色显示。当智能手机950以水平取向使用时,即使剩余电池电量等于或少于20%,也不会在诸如图9C中的引导903中所示的区域的大区域中给出显示,但是图标902以闪烁的方式或以不同的颜色显示。由于用户用双手抓握智能手机950,因此用户可能正集中于显示单元900上显示的视频图像904或网站。通过仅用图标902通知用户而不显示诸如图9C所示的引导903,可以避免降低视频图像904的可视性,从而防止用户受到干扰。此外,可以观看到低电池电量和显示在显示单元900上的视频图像904。
图标902的显示颜色改变为红色以指示剩余电池电量已经等于或少于特定水平(20%),但是通知方法不限于此。图标902可以闪烁,或者可以在显示单元900的显示区域的最外部分中显示框并使框闪烁。剩余电池电量的阈值被设置为20%,但是阈值不限于此。可以允许用户在设置菜单画面上将阈值设置为任意值。
上述技术可以应用于除了观看视频图像904的情况之外的情形。例如,其可以应用于使用智能手机950上配设的相机(摄像单元922)拍摄静止图像或运动图像的情形。更具体地,用户在以垂直取向保持智能手机950的同时启动相机,并不总是意图尝试拍摄图像。相反,用户可以改变与拍摄图像相关的设置或者可以选择图像拍摄模式(例如,全景模式、肖像模式、延时模式等)。在这些情况下,显示叠加在实时取景图像上的指示以提示切换到低功耗模式不太可能打扰用户或使用户错过快门释放机会。另一方面,当在水平取向上保持智能手机950的同时启动相机时,用户可能正在对图像进行构图或等待按下快门按钮的机会。在这样的情况下,显示切换到低电力消耗模式的提示可能导致用户感到烦恼或错过快门释放机会。由于这些原因,当智能手机950处于垂直取向时,给出提示用户进行设置的显示,但是当智能手机950处于水平取向时不给出该显示。
也就是说,当智能手机处于第一取向时,不给出提示设置与智能手机的控制相关的功能的显示,而当智能手机处于第二取向时,给出提示进行功能的设置的显示。这允许根据电子设备(智能手机)的取向在适当的定时给出显示以提示进行设置,而不会打扰用户。
以上假设由系统控制单元50进行的各种控制可以由单个硬件进行,或者可以由多个硬件(例如,多个处理器或电路)通过共享处理来进行以控制整个装置。
在上述实施例中,已经对本发明被应用于数码相机或智能手机的示例给出了说明,但是这仅是示例而非限制。例如,本发明也可以应用于以下情况。如果电子设备允许进行与电子设备的控制相关的功能的设置,并且电子设备可以在电子设备的壳体的各种取向下使用,则本发明可应用于该电子设备。也就是说,本发明可应用于平板PC、PDA、便携式电话终端、便携式图像查看器等。本发明还可应用于数码相框、音乐播放器、游戏机、电子书读取器、平板终端、智能手机、具有显示器的家用电器设备、车载设备等。
(其它实施例)
本发明还可以通过执行下面描述的处理来实现。也就是说,用于实现上述实施例的一个或多个功能的软件(程序)经由网络或各种类型的存储介质被提供给系统或装置,并且程序代码由系统或装置的计算机(CPU、MPU等)读取并执行。在这种情况下,程序和存储该程序的存储介质构成本发明。
本发明不限于上述实施例,在不脱离本发明的精神和范围的情况下,可以进行各种改变和变型。因此,为了公开本发明的范围,附上了权利要求书。
本申请要求于2020年12月17日提交的日本专利申请第2020-209579号的优先权,其全部内容通过引用并入本文。
Claims (18)
1.一种电子设备,其包括:
设置部,其被构造为设置与电子设备的控制有关并且无论电子设备的取向如何都能进行的预定功能;
取向检测部,其被构造为检测所述电子设备的取向;以及
控制部,其被构造为进行控制,使得在所述取向检测部检测到所述电子设备处于第一取向的情况下,根据所述预定功能的设置状态,在显示部上给出第一显示,以提示设置所述预定功能,其中,所述第一显示包括用于指示通过用户操作来设置所述预定功能的显示项,以及
在取向检测部检测到电子设备处于与第一取向不同的第二取向的情况下,不给出第一显示。
2.根据权利要求1所述的电子设备,其中,所述第一显示包括指示设置所述预定功能的效果的显示。
3.根据权利要求1或2所述的电子设备,其中,在所述电子设备处于所述第二取向的情况下,所述控制部进行控制,使得在所述显示部上显示指示关于所述预定功能的警告的第二显示。
4.根据权利要求3所述的电子设备,其中,所述第二显示是图标显示。
5.根据权利要求3或4所述的电子设备,其中,所述第一显示具有比所述第二显示更大的显示区域。
6.根据权利要求1至5中任一项所述的电子设备,所述电子设备还包括摄像部,
其中,所述控制部进行控制,使得在所述显示部上显示由所述摄像部拍摄的实时取景图像,并且以使得所述第一显示被叠加在所述实时取景图像上的方式显示所述第一显示。
7.根据权利要求1至6中任一项所述的电子设备,所述电子设备还包括:被构造为接受用户的视线输入的接受部,
其中,所述预定功能的设置是对所述视线输入的校准。
8.根据权利要求7所述的电子设备,所述电子设备还包括:
取景器,以及
取景器内显示部,
其中,所述控制部在所述取景器内显示部上显示所述第一显示,并且所述接受部接受来自观看所述取景器的用户的视线输入。
9.根据权利要求1至8中任一项所述的电子设备,其中,所述控制部进行控制,使得在所述电子设备相对于重力方向水平取向的情况下,所述电子设备被确定为处于所述第一取向,而在所述电子设备相对于所述重力方向垂直取向的情况下,所述电子设备被确定为处于所述第二取向。
10.根据权利要求1至8中任一项所述的电子设备,其中,所述第一取向相对于所述重力方向是垂直的,并且所述第二取向相对于所述重力方向是水平的。
11.根据权利要求1至10中任一项所述的电子设备,其中,在使用所述用户的视线输入来控制所述电子设备被设置为禁用的情况下,所述控制部进行控制,使得即使当所述电子设备处于所述第一取向时也不进行所述第一显示。
12.根据权利要求1至11中任一项所述的电子设备,其中,
所述设置部能够分别针对所述电子设备的所述第一取向和所述第二取向设置所述预定功能,并且
在已经在所述第一取向或所述第二取向中进行所述预定功能的设置的情况下,所述控制部进行控制,使得无论所述电子设备是处于所述第一取向还是所述第二取向,都不进行所述第一显示和所述第二显示。
13.根据权利要求1至12中任一项所述的电子设备,其中,所述电子设备是数码相机、智能手机和平板电脑中的至少一者。
14.根据权利要求1至13中任一项所述的电子设备,其中,所述预定功能是降低所述电子设备的电力消耗的功能,并且所述第一显示是提示启用所述降低电力消耗的功能的显示。
15.根据权利要求14所述的电子设备,其中,所述控制部进行控制,使得在所述第一取向上,所述电子设备的剩余电池电量降低到预定水平以下的情况下,进行所述第一显示。
16.一种电子设备的控制方法,所述控制方法包括:
设置与所述电子设备的控制相关并且无论所述电子设备的取向如何都能够进行的预定功能;
检测所述电子设备的取向;以及
进行控制,使得在所述取向的检测指示所述电子设备处于第一取向的情况下,根据所述预定功能的设置状态,在显示部上给出第一显示,以提示设置所述预定功能,其中,所述第一显示包括用于指示通过用户操作来设置所述预定功能的显示项,以及
在所述取向检测中检测到电子设备处于与第一取向不同的第二取向的情况下,不给出第一显示。
17.一种程序,其用于使计算机用作根据权利要求1至15中任一项所述的电子设备的各个部。
18.一种计算机可读存储介质,其存储程序,所述程序用于使计算机用作根据权利要求1至15中任一项所述的电子设备的各个部。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020209579A JP2022096462A (ja) | 2020-12-17 | 2020-12-17 | 電子機器及びその制御方法及びプログラム及び記録媒体 |
JP2020-209579 | 2020-12-17 | ||
PCT/JP2021/046055 WO2022131252A1 (ja) | 2020-12-17 | 2021-12-14 | 電子機器及びその制御方法及びプログラム及び記録媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116648668A true CN116648668A (zh) | 2023-08-25 |
Family
ID=82059194
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180084927.6A Pending CN116648668A (zh) | 2020-12-17 | 2021-12-14 | 电子设备、其控制方法、程序和存储介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230328354A1 (zh) |
JP (1) | JP2022096462A (zh) |
CN (1) | CN116648668A (zh) |
WO (1) | WO2022131252A1 (zh) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05333259A (ja) * | 1992-06-02 | 1993-12-17 | Canon Inc | 視線検出手段を有した光学装置 |
JP2006333238A (ja) * | 2005-05-27 | 2006-12-07 | Matsushita Electric Ind Co Ltd | 音声信号処理装置 |
JP6324278B2 (ja) * | 2014-09-12 | 2018-05-16 | キヤノン株式会社 | 撮像装置、画像処理装置およびその制御方法 |
JP6755716B2 (ja) * | 2016-06-01 | 2020-09-16 | キヤノン株式会社 | 表示制御装置およびその制御方法 |
-
2020
- 2020-12-17 JP JP2020209579A patent/JP2022096462A/ja active Pending
-
2021
- 2021-12-14 WO PCT/JP2021/046055 patent/WO2022131252A1/ja active Application Filing
- 2021-12-14 CN CN202180084927.6A patent/CN116648668A/zh active Pending
-
2023
- 2023-06-14 US US18/334,993 patent/US20230328354A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2022131252A1 (ja) | 2022-06-23 |
US20230328354A1 (en) | 2023-10-12 |
JP2022096462A (ja) | 2022-06-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7321786B2 (ja) | 電子機器およびその制御方法 | |
CN112714247B (zh) | 摄像设备和摄像设备的控制方法 | |
US11910081B2 (en) | Electronic apparatus, method for controlling the same, and storage medium | |
US11600277B2 (en) | Voice input apparatus, control method thereof, and storage medium for executing processing corresponding to voice instruction | |
CN112104809B (zh) | 电子装置、电子装置的控制方法及存储介质 | |
JP7467071B2 (ja) | 電子機器、電子機器の制御方法、プログラム、記憶媒体 | |
CN112015266A (zh) | 电子设备、电子设备的控制方法及计算机可读存储介质 | |
JP7346375B2 (ja) | 電子機器及びその制御方法及びプログラム及び記録媒体 | |
CN113364945A (zh) | 电子装置、控制方法和计算机可读介质 | |
JP2022018244A (ja) | 電子機器およびその制御方法 | |
JP2021152597A (ja) | 撮像装置およびその制御方法、プログラム並びに記憶媒体 | |
US20230018866A1 (en) | Electronic device that displays a plurality of display items on a display and method for controlling electronic device | |
US11526208B2 (en) | Electronic device and method for controlling electronic device | |
JP2021184123A (ja) | 電子機器、電子機器の制御方法、プログラム | |
US20230328354A1 (en) | Electronic device, control method therefor, program, and storage medium | |
JP7451255B2 (ja) | 電子機器及びその制御方法 | |
JP2023160103A (ja) | 電子機器 | |
JP2022172840A (ja) | 電子機器、電子機器の制御方法、プログラム、及び記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |