具体实施方式
以下,依照附图使用应用了本发明的照相机对优选实施方式进行说明。将本发明应用到单反照相机的例子作为第1实施例,图1示出其框图。
【第1实施方式】
10是摄影装置、例如照相机,20是摄影镜头(更换镜头),经由从照相机机身向镜头通信操作信号等的通信部5、和设置于镜头侧的与照相机主体(机身)的通信部22进行通信,能够通过控制部21和驱动部24a、24b,控制摄影镜头26的变焦控制用的各透镜组位置和对焦控制用的透镜组位置,与各种构图、被摄体对应地进行摄影。
用由各种编码器类构成的位置判定部25a、25b判定构成镜头26的各透镜组的位置。在判定上述位置判定结果的同时,经由驱动部24a、24b将这些镜头驱动控制到由镜头内控制部21决定的位置处。此外,镜头20不仅能够通过操作部件23的操作对焦,还能够改变变焦位置和光圈。该操作部23在是设置成能够绕镜头镜筒转动的环状部件的情况下,能够进行还利用旋转方向的控制,例如如果是光圈,则能够用右旋进行打开方向的操作,用左旋进行关闭方向的操作,能够在支撑着镜头(装置整体)的状态下进行直观的操作。
光圈与对焦和变焦同样,通过位置判定部判定基于驱动部的控制结果,但省略图示。主体侧控制部1也能够经由通信部22判定这些结果。该照相机也可以安装图示的20以外的更换镜头,用户能够更换变焦镜头的倍率、焦距和明度FNo等不同的更换镜头来享受各种摄影。还可以假定不是变焦镜头的更换镜头的情况。当然还能够在镜头更换式的照相机以外的镜头一体型的照相机中应用本发明。
由此,根据状况、并且依照摄影者的操作切换变焦、光圈和焦点这样的部位的控制等也包含在摄影参数的变更中。此外,能够从标准的曝光量起变更曝光量,例如在打开或关闭光圈进行曝光时能够进行曝光校正,能够得到比通常亮或暗的图像。
另一方面,在照相机主体侧,存在开关等用户能够进行各种操作的操作部6。在摄影装置中重要的是摄影时的操作,因此在可用右手的食指、大拇指进行操作的位置优先配置静态图像摄影用的释放按钮、动态图像摄影用的释放按钮。
能够利用这些按钮进行摄影操作,并且还能够利用其他的开关和拨盘等,进行上述曝光校正、快门速度和感光度设定、焦点位置的变更等摄影参数变更。此外,触摸面板也能够辅助用于这种操作。
照相机10还具有将从更换镜头进入的像转换为电信号的摄像部2,在显示摄像结果的部分(目镜显示部30和背面面板的显示部8等)上显示图像,并且在摄影时将图像记录到记录部4中。由微型计算机等构成的控制部1进行这一系列的控制,但是在该集成电路中,还形成有可进行上述显示和记录所需的图像处理的信号处理电路。
此外,存在使用来自摄像部2的图像信号检测被摄体的面部的面部检测部3,根据这种重要图像部位的对比度和相位差信号检测焦点的偏差,或切换曝光量等的调整量来进行摄影控制。
目镜显示部能够用专用的光学系统放大小型的液晶面板或有机EL面板等的显示图像进行目视观察,能够以窥入取景器的形式进行观察,因此能够不受到外部光的影响来确认图像,并且能够结合用户的视度,利用该光学系统的视度调整进行良好的观察。
另外,能够由参数控制部1b对这些调整量进行切换控制。为了使用户能够在观察目镜显示部30或背面面板等的显示部8的同时进行摄影,组装到控制部中的信号处理部1进行处理,以将摄像结果显示到由液晶或EL面板等构成的显示部8。如果在该显示部8上形成触摸面板8b,并在显示部上触摸所显示的被摄体像,则能够取得与其位置对应的图像的信息。
这是对与所触摸的部分相当的部分的图像特征进行了分析,或者检测距离信息。
并且控制部1利用操作判定部6(上述静态图像用释放按钮和动态图像用释放按钮)和触摸面板8b判定用户的摄影指示操作,利用信号处理部压缩摄影图像并记录到记录部4中。此时,为了能够结合摄影日期时刻信息进行记录整理,具有时钟9。此外,当然能够利用目镜显示部30或背面面板的显示部8确认图像通过参数变更的操作而发生了怎样的变化。
在操作时,可以在显示部8和目镜显示部30上进行辅助显示,但显示控制部1d将辅助显示合成显示到被摄体像上。
并且,具有用于收集摄影时的声音、或者收集摄影者进行指示的声音的麦克风8,声音判定部1e利用未图示的声音数据库分析摄影者的声音指示,并切换照相机操作。
摄影者的声音指示是指变更摄影图像的效果的指示,只要说出“背景模糊”和“亮度变更”这样的语言,或者同样意思的语言,则能够对图像赋予这种效果。即,在闪速ROM等记录部4中准备用于根据指示声音检索照相机的摄影参数的数据库,依照用户说出的语言,确定要通过参数控制部1b变更的摄影参数。在本发明中,该摄影者的声音指示在利用目镜显示部时特别有效。这是因为,摄影者的口部接近麦克风,因此即使用不会对周围造成困扰的小声的操作也能够进行没有错误动作的声音判定。尤其是,在利用目镜显示部进行拍摄的情况下,不会受外部光的影响,能确实地确认构图,还防止手抖,在不错过快门时机的照相机的握持方式时,不用另外换手拿照相机,一边进行迅速的设定变更,一边享受符合期望的摄影。
为了用这种结构的照相机以符合期望的效果拍摄符合摄影者的期望的被摄体,在本发明中,采取图2所示的操作方法。在如图2(a)的场景那样被摄体到处活动的情况下,摄影者11如果仅看着摄影装置(照相机)10的画面,则在被摄体12到了视场角之外时,不清楚将照相机朝向哪个方向,因此大多不观察目镜显示部30,而是以观察背面显示部8和被摄体两方的形式进行摄影。该情况下,想记录运动,因此优选为动态图像摄影,该情况下,大多还同时记录声音。在这种场景下,可以不忙于将被摄体包括到摄影视场角内,不进行频繁的摄影参数的变更。
另一方面,在如图2(b)那样的摄影者11一边观察目镜显示部30一边拍摄被摄体12的情况下,是想不受到外部光的影响,确认变更摄影参数时的摄影图像的变化,因此优选简单且直观地切换摄影参数。
此时,如图2(c)所示,鼻子处于目镜显示部30的下方Yen的距离(存在个人差异但成人约为4cm)、眼睛的横向Xen处(同样约为3cm),因此在背面显示部8上设置有触摸面板的情况下,目镜检测部1c能够通过判定鼻子是否触碰该位置,来判定用户是否观看目镜显示部。由于存在个人差异,因此可以切换控制该Xen、Yen。此处,假定用右眼观看的情况进行了说明,但是也可以假定用左眼观看的情况,来决定触碰位置。
在图2(b)那样的利用目镜显示部的摄影时,如果右眼接触图3(a)那样的背面布局的照相机10的目镜显示部30,则鼻子接触背面面板8的8n的部分(在图2中说明的以目镜部30为基准的横向Xen、纵向Yen的部分)。即使不接触,只要是静电电容式或光学式的触摸面板,则能够判定鼻子接近其附近。该8n的区域可以不是点,而包含了眼睛与鼻子的位置的个人差异,具有与鼻头的面积相当的大约2cm的扩展区。此外,该照相机(摄影装置)10在镜头部上设置了环状操作部23,能够通过用左手握持该部件来支撑照相机,能够朝左右旋转来直观地进行向正和负方向的数值变更。
此外,在照相机10的主体上部(该情况下,以如图3(b)那样能够进行横长的画面摄影的情况为基准来表现为上下),在摄影者可用右手的食指进行操作的位置处设置静态图像摄影用的释放开关6a,在背面可用右手的大拇指进行操作的位置处设置动态图像摄影用的开关6b。
并且,在右眼接触目镜部30时口部接近的部分配置了麦克风13,由此能够从口部清楚收集接近的声音。在麦克风位于风的声音和操作照相机的声音难以变为噪声的位置处时,能够通过许可声音识别功能,消除错误动作,进行迅速的切换。如果下了这种功夫,则能够进行小声的操作,操作者(用户)不会感到不好意思,并且即使在安静的场所也不会对周围造成困扰。
因此,在通过目镜检测部1c检测到目镜观察状态的情况下,如图3(b)那样,在目镜显示部的图像上重叠显示出能够进行声音识别。看到该显示,用户认识到能够进行利用声音的操作。此时,用户例如在拍摄使背景模糊的图像时,如果发出“背景模糊”这样的命令,则照相机的声音判定部1e能够检测到该命令,进行依照用户意图的摄影参数变更。摄影参数控制部1b依照该检测结果,实施变更光圈、快门速度和焦点这些参数的程序。
此处,通过目镜观察检测开始声音识别,但除目镜观察检测以外,也可以利用开关的操作等开始声音识别。
此处,发出“背景模糊”的指示,焦深由于光圈的控制而变化,因此图3(c)图示了通过光圈的效果变更背景的例子。用户在旋转了摄影镜头部的环状部件23时,摄影参数控制部1b基于该旋转的方向和量执行光圈控制,摄影者能够一边目视其效果一边进行摄影。目镜显示部具有视度调整用的光学系统或机构,能够消除外部光的影响,确认清楚要拍摄的图像。可以图3(c)那样,在显示部内进行条状的指示器显示。
由此,用户能够判断怎样和对环旋转多少量可返回到最初,并判断界限值与当前值的关系等。能够在手和手指不从摄影镜头和释放操作部离开的状态下操作各种摄影参数,因此能够不错过快门时机并且也没有手抖地进行摄影。
此外,在图2(a)那样的动态图像摄影场景下,该麦克风可以兼用作用于记录用户发出的声音的麦克风。此外,可以如图3(d)那样,在目镜显示部8上显示能够识别、判定怎样的声音指示。由此,明确示出了照相机可判定的声音模式,因此能够进行可靠性更高的功能选择。
由此,在该实施例中,能够提供在稳定保持照相机并采取了快门时机对策或抖动对策的状态下,没有错误动作地轻快地进行声音操作的照相机。
由此,图4示出进行用户发出的声音的判定,其结果,能够变更通过声音判定部1e选择的参数(光圈、快门速度和焦点等)的照相机(摄影装置)的主流程的例子。
图4将照相机的控制部1依照预先确定的程序执行的控制表现为流程图。是如下的照相机的主流程的例子:在根据声音判定结果决定了待控制的参数时,参数控制部1b能够通过摄影镜头的环状部的操作设为该摄影参数的数值。该主流程如下:例如在步骤S101中判定通过电源开关等进行的电源的操作,如果电源开关接通,则在S102、S111中进行是摄影模式还是再现模式的判定。
如果电源开关断开,则仅使检测该电源开关的电路动作,而断开其他电子电路以成为节能模式(待机模式)。
如果通过触摸面板或开关的切换而设定为摄影模式,则在S103中进行实时取景图像显示。这是在显示部上实时显示由摄像部得到的被摄体像信号,用户能够一边观看该信号一边确认摄影时机、构图和摄影参数变更的效果。
S104是目镜检测部1c进行的后述的用户的目镜观看判定的子例程(参照图5),S105是参数数值变更的子例程(参照图6)。能够通过这些子例程进行在图3中说明的摄影前的参数切换(项目和数值)控制。如果一边在显示部上确认效果一边操作静态图像释放开关6a或动态图像摄影用开关6b,则S106分支到“是”,在S107中能够进行依照这样进行切换的结果的摄影。
此处,关于动态图像摄影时的动态图像结束的操作,省略详细说明。在S106的步骤中开始摄影,如果在S106的时刻判定到开关6b的操作,则可以结束摄影,结束动态图像(包含声音)记录。在没有进行摄影的情况下,从实时取景图像显示等起重复流程,因此如果是摄影模式,则能够在任意的时刻进行参数变更和摄影。
此外,当切换到再现模式时,从S102分支到S111,进行所拍摄的图像的再现(S112)。在想鉴赏其他图像的情况下,如果用户仍然操作触摸面板或开关,则在S113中进行判定,在S115中进行图像的切换。此外,在既不是摄影模式也不是再现模式的情况下,分支到S114,变为向外部发送摄影图像的图像通信模式。
图5示出用于具体说明图4的S104示出的目镜观看判定的流程的流程例子。该流程判定用户在图2的(a)或(b)的哪一个状态下进行了摄影。如图3(a)所示,在触碰了设置于背面显示部8上的触摸面板8b的任意一处的情况下,在S202中判定触碰位置,在判定为其是8n的部分的触碰时,在S204中判定为用目镜观看。此时,可以在目镜显示部30中接通显示用的电源。由此,还能够期待节能效果。
在该目镜观看判定时,认为是用户的面部无限接近照相机的状况,是发出声音的口部接近照相机的麦克风位置的状况,因此在S204中,可以如图3(b)那样,在目镜显示部上显示出能够进行声音识别。如果进行这种显示,则用户能够判断出能够进行声音操作,能够安心地享受声音操作。在该状态下,能够用麦克风13可靠捕捉操作用的指示声音,认为即使用小声的操作,声音信号也较大,能够进行噪声相对较少的声音判定。由此,本发明能够提供即使用不对周围造成困扰的小声的操作也可以进行没有错误动作的声音判定的摄影装置。能够如图2那样利用目镜显示部没有外部光的影响地确实地确认构图,还防止手抖,在不错过快门时机的照相机的握持方式时,不用另外换手拿照相机,从而享受符合期望的摄影。
此外,在鼻子前端接触图3(a)的8n以外的部分的情况下,此时,在检测到了照相机主体的操作部(静态图像释放按钮的半按下等)或镜头操作部23的操作等的情况下,可以在S203中进行检测,且能够进行声音判定。
这是判定用户想进行一些操作的情况,并许可声音判定的步骤。在以上的说明中,在检测到目镜观看状态的情况下,通过目镜显示部显示出能够进行声音识别,但是也可以在检测到目镜观看状态的情况下,不通过目镜显示部显示出能够进行声音识别。在不满足上述条件的情况下,防止声音判定用的电路消耗电流,不在声音判定部1e的部位接通电源,由此即使用户发出声音,声音判定部1e也不会对该声音进行声音识别。
此外,如果该部位起动,则不能避免由于与摄影指示同样的声音而引起错误动作。在本发明中,能够尽可能消除这种错误动作,进行可靠性高的声音操作。
此外,即使在S201中没有检测到触碰,也判定来自麦克风13的声音,在声音是人的呼吸模式的情况下,认为是用户将面部紧贴到摄影装置(照相机)10的主体的情况,可以分支到S204,判定为用目镜观看。
该情况下,认为用户的声音操作时的声音能够得到比较良好的S/N比,从而许可声音判定。在除此以外的情况下,此处在S212中设为没有判定到目镜观看,不进行声音识别和声音判定,从而防止错误动作。通过下这种功夫,驱使可靠性高的声音判定,能够不错过快门时机地用各种操作进行有效的摄影,能够提供可专心于摄影的照相机。
当然也可以进行此处说明的以外的目镜观看判定。在该实施例中,目镜观看状态是检测到面部接近、发出声音的口部接近麦克风(照相机)的情况,并确保检测精度的状态,因此也可以利用接近传感器等。
图6是在图4的步骤S105中执行的参数数值变更的流程图的例子。
如图3(b)那样,在进行了能够进行声音判定的显示的状态,或者如图3(d)那样,用图标或文字将可利用声音选择的参数候选显示在目镜显示部上的状态下,当利用声音进行了选择时,在步骤S231、S233、S235、S237中分支到“是”。
如图3(c)那样,依照该选择项目将所选择的摄影参数显示在目镜显示部上,因此能够通过环操作,切换焦点位置(S232)、曝光校正量(S234)、光圈值(S236)和变焦(S238)等。
此时,优选在声音判定时判定的声音为用户容易知道的语言,但是由于在数据库中与功能关联起来了,因此照相机的微型计算机能够判定待控制的功能是哪一个。
因此,在想变更画面亮度的情况下说出“亮度”时,能够进行曝光校正。当然,根据用户,理解了基于功能的效果,因此能够进行功能自身的声音判定。摄影参数除此以外还有多个,但是此处省略说明。此外,示出了调整数值的例子,但是还能够是切换模式那样的应用。
可以在背面显示部8或目镜显示部30等显示部上显示可手动选择的项目、例如用于确定之前的操作的确定按钮等,并手动选择该项目。这是因为,如果一直利用声音直到最终选择,有时会不稳定,因此用手动选择确定等操作。
图7示出了应用这种发明的数字照相机10的外观。
在更换镜头20的周围设置有环状的操作部件23,如果转动该操作部件23来切换参数,则能够在稳定握持照相机的同时迅速进行操作。
在主体上部设置有静态图像释放开关6a,如果在静态图像摄影时按下,则能够进行静态图像摄影。该开关大多为二级结构,在按下中途另一开关接通,进行自动对焦等。
如果利用该另一开关、或环状操作部23等,则能够进行图5的S203的判定等。在背面上设置了显示部8和动态图像摄影开关6b。
在稳定保持照相机的情况下,右手的食指放在开关6a上,如果握持设置于镜头部20的环23则稳定且不会错过快门时机,因此优选能够不用操作另外配置的模式设定用的6d、6e、6f等即可变更模式和摄影参数。
在本发明中,能够在不进行这些开关操作的情况下根据用户发出的声音指示变更参数,因此能够不错过快门时机并且也没有手抖地进行符合用户期望的摄影。
此外,6c是电源用的开关,是在图4的S101中判定的电源开关。此外,作为本发明的特征的接收声音指示的声音的麦克风配置在照相机的背面。能够通过将麦克风配置在照相机的背面,来去除各种噪音,正确地收集面向照相机的背面的用户发出的声音。配置麦克风的部位是照相机背面的任意部位。可以在照相机背面的多个部位分别配置麦克风。期望将麦克风配置在如下位置:在用户观看目镜显示部30的状态下,容易收集用户从口部发出的声音的位置,即背面的13a或13b那样的位置。也可以是图3(a)的13的位置。该麦克风在拍摄动态图像时,可以兼用于收集并记录摄影者的话语。在对这种声音进行再现时,用扬声器14进行再现。如果一边再现声音一边进行动态图像再现,则能够更生动地再现摄影时的气氛。
此外,当然可以准备多个麦克风8,除了收集摄影者的声音以外,还立体收录被摄体一方的声音。此外,可以用混在被摄体一方的声音中的环境音(噪声)消除在摄影者的声音中所取入的环境音(噪声),并进一步收集消除了噪声的摄影者发出的良好的声音。
【第2实施方式】
图8是示出本发明的摄像装置的第2实施方式的照相机的概略结构的框图。
在图8中,本发明的第2实施方式的照相机10构成为具有信号处理和控制部11、摄像部12、运动判定部13、面部检测部14、前方声音收录部15、后方声音收录部16、声音处理部18、记录部20、操作判定部22、显示部23、时钟部24和通信部25。
上述信号处理和控制部11对从上述摄像部12输出的摄影图像进行图像处理,并且控制该照相机10整体的动作序列。并且,信号处理和控制部11具有文本合成部11a,该文本合成部11a用于将从后述的声音模式记录部20a读出的文本合成到摄影图像上并进行显示。
上述摄像部12由未图示的摄影用的镜头、摄像元件以及其驱动和读取电路等构成,是用于拍摄作为未图示的对象物的被摄体从而得到摄影图像的摄影单元。运动判定部13根据处于照相机的画面内的被摄体的比例、距离和摄影时的视场角等判定被摄体的运动。面部检测部14用于通过公知的面部图像识别处理等,检测被摄像部取入的图像中的面部图像。
前方声音收录部15对来自与由上述摄像部12得到的图像对应的方向即前方的声音进行收集,由麦克风等构成。此外,后方声音收录部16收集摄影者的声音,由麦克风等构成。上述前方声音收录部15和后方声音收录部16也可以由同一麦克风构成,根据声音判别声音的主人。此外,这些前方声音收录部15和后方声音收录部16构成为声音取得部。
声音处理部18用于对从这些麦克风得到的声音进行处理并文本化,能够与摄影图像一起显示。因此,声音处理部18构成为具有模式判定部(关键词判定部)18a,该模式判定部18a具备如下功能:将记录在后述的声音模式记录部20a内的声音模式与由前方声音收录部15、后方声音收录部16收录的声音进行比较,判定一致度。
记录部20是用于记录摄影图像等的记录单元。该记录部20除了具有记录摄影图像的功能以外,还具有记录声音模式的信息的声音模式记录部20a、和记录被摄体的行动模式等的行动模式数据库(DB)20b等。
操作判定部22用于判定是否存在用户在进行摄影操作时操作的释放开关等的操作。在由该操作判定部22检测到照相机10的操作时,通过信号处理和控制部11对它们进行控制,并将从这些模块取得的图像和文本等记录到记录部20内。
显示部23具有由液晶等构成的显示面板,因此显示上述摄影图像,或者能够看到拍摄的结果。此外,在该显示部23上,在摄影前也显示由摄像部12得到的图像,能够进行构图和摄影时机的确认等。
并且,时钟部24用于使摄影时刻与摄影图像关联起来。通信部25设置成用于使摄影位置与摄影图像关联起来存储。能够通过通信部25将这种图像和附带的信息输出到外部。通信部25在无线时假定了红外通信或无线LAN等,在有线时假定了USB等。
图9示出了这种照相机10的使用例及其效果的图像。
如图9所示,在作为摄影者40的母亲拍摄作为被摄体41的孩子的相片的情况下,大多一边发出“停下”等声音一边进行摄影。但是,应该不使用过多词汇的语言,通常仅说“停下”、“看这边”或者称呼名字。因此,照相机10只要能够检测这类语言所包含的关键词即可。
此外,具体将后述,但是此时如果利用摄影者的声音提取关键词,将文本合成到图像中进行显示并记录,则能够将此时的状态拍入到图像中。
此外,在被摄体41是孩子的情况下,认为其针对摄影者40说出的语言,不一定采取期待的行动。在图9所示的例子的情况下,对于“停下”这样的语言,期待的行动是“停下”,但是还考虑对于该语言还不停下而运动的情况。
在这种情况下,如果被摄体41的状态从“移动”的状态变化为“停止”的状态下,则判定为对“停下”这样的语言做出反应而变为期待的行动的“停下”状态。因此,照相机10能够检测摄影者对被摄体说出语言时的状态和说出语言后的状态,并判定两者是否与预定的状态变化一致即可。由此,如果仅在上述状态变化一致时进行快门释放操作,则能够拍摄摄影者期待的被摄体。
如上所述,在被摄体是较小的孩子那样,难以理解摄影者的意图的情况下,摄影者大多一边向被摄体发出声音一边进行摄影。本发明的目的在于:在这种状况下,如果照相机判定为被摄体按照摄影者的意图行动,则开始摄影。
处于这种状况下的朝被摄体呼唤的语言有限,不需要具有如通常的字典那样的大范围的数据库,也不需要具有详细的声音识别的功能。
因此,此处,作为摄影者朝被摄体呼唤的代表性语言(关键词),可用“停下”、“过来”、“看这边”、“笑一下”或者“茄子”、“摆姿势”、“靠近”的呼叫等覆盖相当大的范围。将这些语言预先记录到记录部20内的声音模式记录部20a中。
此外,这些关键词不仅限于该语言,例如可以包含“○○人停下”或“大家笑一下”这样的关键词以外的语言。
此外,成为上述关键词的语言例如像图10的声音所包含的关键词与动作的对照表所示,参照为被摄体的动作和被摄体的面部状态。
例如,在关键词为“停下”的情况下,如果被摄体的动作从“有”变为“无”则符合该关键词。该情况下没有面部的变化。此外,在关键词为“看这边”的情况下,被摄体的动作从“有”变为“无”,并且面部的状态从“无(没有拍到面部)”的状态变为“有(拍到了面部)”的状态。将这些动作的变化模式等记录到记录部20内的行动数据库20b中。
并且,在本发明的各实施方式中,作为用于摄影的设备,使用数字照相机进行了说明,但是作为照相机,可以是数字单反照相机和袖珍数字照相机,可以是摄像机、电影摄影机这样的动态图像用的照相机,并且当然可以是内置在便携电话、便携信息终端PDA(Personal Digital Assistants:个人数字助理)等中的照相机。
本发明不直接限定为上述各实施方式,在实施阶段能够在不脱离其主旨的范围内对结构要素进行变形并具体化。此外,能够通过上述各实施方式公开的多个结构要素的适当组合形成各种发明。例如,可以删除实施方式所示的全部结构要素中的几个结构要素。并且,可适当组合不同实施方式的结构要素。
另外,关于权利要求、说明书和附图中的动作流程,虽然为了方便而使用了“首先”、“接着”等来进行说明,但不是指必须按该顺序进行实施。此外,对于构成这些动作流程的各步骤,当然还能够适当省略不影响发明本质的部分。