CN103698962A - 照相装置 - Google Patents
照相装置 Download PDFInfo
- Publication number
- CN103698962A CN103698962A CN201310651930.9A CN201310651930A CN103698962A CN 103698962 A CN103698962 A CN 103698962A CN 201310651930 A CN201310651930 A CN 201310651930A CN 103698962 A CN103698962 A CN 103698962A
- Authority
- CN
- China
- Prior art keywords
- vertical
- moveable platform
- amount
- key
- cpu21
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种照相装置,包括:可移动平台,其具有通过拍摄镜头捕捉光学图像的成像器,并且在与所述拍摄镜头的光轴垂直的xy平面上相对于所述拍摄镜头可移动;操作单元,其被配置为设置所述可移动平台在所述xy平面上的移动量;以及控制器,其根据使用所述操作单元设置的所述移动量来执行所述可移动平台的受控运动;所述操作单元显示与所述可移动平台和所述可移动平台的移动范围之间的位置关系相关的第三信息。
Description
本申请是申请号为200910260637.3,申请日为2009年12月18日,发明名称为“照相装置”的中国专利申请的分案申请。
技术领域
本发明涉及一种照相装置,特别涉及一种通过移动包括成像器的可移动平台来调节图像合成(picture-composition)的照相装置。
背景技术
如美国专利No.6,556,783所示,提出了一种在与照相装置的光轴垂直的一个方向上保持和移动照相装置的移动装置。可以使用移动装置来调节图像合成。
但是,该移动装置必须移动照相装置的所有部件。因此放大了用于调节图像合成的设备,例如移动装置。此外,也难以执行图像合成的精密调节。
发明内容
因此,本发明的目的是提供一种无需移动照相装置即可执行图像合成的照相装置。
根据本发明,提供一种照相装置,包括:可移动平台,其具有通过拍摄镜头捕捉光学图像的成像器,并且在与所述拍摄镜头的光轴垂直的xy平面上相对于所述拍摄镜头可移动;操作单元,其被配置为设置所述可移动平台在所述xy平面上的移动量;以及控制器,其根据使用所述操作单元设置的所述移动量来执行所述可移动平台的受控运动;所述操作单元显示与所述可移动平台和所述可移动平台的移动范围之间的位置关系相关的第三信息。
附图说明
参考附图,由下面的描述,将能更好地理解本发明的目的和优点,其中:
图1是从后方观察到的照相装置的实施例的透视图;
图2是当照相装置保持在第一水平定向时照相装置的前视图;
图3是当照相装置保持在第二水平定向时照相装置的前视图;
图4是当照相装置保持在第一竖直定向时照相装置的前视图;
图5是当照相装置保持在第二竖直定向时照相装置的前视图;
图6是照相装置的电路结构图;
图7是图像合成调节键的结构图;
图8是包括执行图像合成调节之前所显示的第一信息和所显示的第二信息的预览图像(through image);
图9是包括执行图像合成调节之后所显示的第一信息和所显示的第二信息的预览图像;
图10是当不能根据转动量α执行可移动平台的转动时所显示的第一信息(第一警告);
图11是当不能根据水平移动量H执行可移动平台的水平位移时所显示的第一信息(第二警告);
图12是当不能根据垂直移动量V执行可移动平台的垂直位移时所显示的第一信息(第三警告);
图13是在根据Kθ倾斜照相装置并且转动量α为0的条件下所显示的第二信息;
图14是在根据Kθ倾斜照相装置并且根据转动量α(α≠-Kθ)转动可移动平台的条件下所显示的第二信息;
图15是在根据Kθ倾斜照相装置并且根据转动量α(α=-Kθ)转动可移动平台的条件下所显示的第二信息;
图16显示了图像合成调节所涉及的计算;
图17是照相装置的前视图,Kθ是从前方观察当照相装置沿逆时针方向转动(倾斜)时与第一水平定向形成的夹角;
图18是照相装置的前视图,Kθ是从前方观察当照相装置沿逆时针方向转动(倾斜)时与第一竖直定向形成的夹角;
图19是照相装置的前视图,Kθ是从前方观察当照相装置沿逆时针方向转动(倾斜)时与第二水平定向形成的夹角;
图20是照相装置的前视图,Kθ是从前方观察当照相装置沿逆时针方向转动(倾斜)时与第二竖直定向形成的夹角;
图21是可移动平台的结构图;
图22显示了根据转动量α,水平驱动点DPx在x方向的移动量、以及第一垂直驱动点DPyl和第二垂直驱动点DPyr在y方向的移动量;
图23显示了根据转动量α和水平移动量H的第一水平移动量Tsx和第二水平移动量Ksx;
图24显示了根据转动量α和竖直移动量V的第一竖直移动量Tsy和第二竖直移动量Ksy;
图25是显示照相装置的主要操作的流程图;
图26是显示第一计时器中断过程的细节的流程图;
图27是显示照相机倾斜角度计算的细节的流程图;
图28是显示第二计时器中断过程的细节的流程图;
图29和30是显示位置S(Sx,Syl,Syr)的计算细节的流程图的不同部分;
图31显示了包括使用指示条(指示器)的第二信息的预览图像;
图32是在设有转动调节控制盘部件(rotation dial member)16g、右向转动背光灯16h、以及左向转动背光灯16i的情况下的图像合成调节键的结构图;以及
图33是在设有转动调节控制盘部件16g、右向转动警告灯16j、以及左向转动警告灯16k的情况下的图像合成调节键的结构图。
具体实施方式
下面参考附图所示的实施例描述本发明。在本实施例中,照相装置1是数码相机。照相装置1的照相机镜头(即拍摄镜头)67具有光轴LL。
通过实施例中的定向方式来定义x方向、y方向和z方向(见图1)。x方向是与光轴LL垂直的方向。y方向是与光轴LL和x方向均垂直的方向。z方向是与光轴LL平行并与x方向和y方向垂直的方向。
重力方向与x方向、y方向以及z方向之间的关系根据照相装置1的定向而变化。
例如,当照相装置1被保持在第一水平定向时,换言之,当照相装置1被保持水平且照相装置1的上表面朝上时(见图2),x方向和z方向垂直于重力方向,且y方向平行于重力方向。
当照相装置1被保持在第二水平定向时,换言之,当照相装置1被保持水平且照相装置1的下表面朝上时(见图3),x方向和z方向垂直于重力方向,且y方向平行于重力方向。
当照相装置1被保持在第一竖直定向时,换言之,当照相装置1被保持竖直且照相装置1的一个侧表面朝上时(见图4),x方向平行于重力方向,且y方向和z方向垂直于重力方向。
当照相装置1被保持在第二竖直定向时,换言之,当照相装置1被保持竖直且照相装置1的另一个侧表面朝上时(见图5),x方向平行于重力方向,且y方向和z方向垂直于重力方向。
当照相装置1的前表面朝向重力方向时,x方向和y方向垂直于重力方向,且z方向平行于重力方向。照相装置1的前表面是与照相机镜头67相连的一侧。
照相装置1的成像部件包括PON按钮11、PON开关11a、快门释放按钮13、用于曝光操作的快门释放开关13a、图像合成调节ON/OFF按钮14、图像合成调节ON/OFF开关14a、图像合成调节键16、诸如LCD监视器等等的显示器17、光学取景器18、DSP19、CPU21、AE(自动曝光)单元23、AF(自动对焦)单元24、图像合成调节单元30中的成像单元39a、以及照相机镜头67(见图1、2、6和7)。
图像合成调节键16包括向右方向键16a、向左方向键16b、向上方向键16c、向下方向键16d、右向转动键16e、以及左向转动键16f。
PON按钮11、图像合成调节ON/OFF按钮14、图像合成调节键16、以及显示器17设置在照相装置1的后表面上。
通过PON按钮11的状态来确定PON开关11a处于ON状态还是OFF状态。照相装置1的ON/OFF状态对应于PON开关11a的ON/OFF状态。
成像单元39a通过照相机镜头67捕捉对象图像作为光学图像,捕捉到的图像被显示在显示器17上。可通过光学取景器18来光学地观察对象图像。
当快门释放按钮13被操作者完全按下时,快门释放开关13a改变成ON状态,从而通过成像单元39a(成像装置)执行成像操作,以及存储捕捉到的图像。
指示快门释放开关13a处于ON状态或者是OFF状态的信息作为1位的数字信号被输入到CPU21的端口P13。
向右方向键16连接到CPU21的端口P21。当在图像合成调节模式下按下向右方向键16a时,从后方观察,可移动平台30a在向左方向上移动,以在向右方向上移动图像合成;换言之,与移动前相比进一步向右侧捕捉照相对象(水平移动量H:正向)。
向左方向键16b连接到CPU21的端口P22。当在图像合成调节模式下按下向左方向键16b时,从后方观察,可移动平台30a在向右方向上移动,以在向左方向上移动图像合成;换言之,与移动前相比进一步向左侧捕捉照相对象(水平移动量H:负向)。
向上方向键16c连接到CPU21的端口P23。当在图像合成调节模式下按下向上方向键16c时,可移动平台30a在向下方向上移动,以在向上方向上移动图像合成;换言之,与移动前相比进一步向上方捕捉照相对象(竖直移动量V:正向)。
向下方向键16d连接到CPU21的端口P24。当在图像合成调节模式下按下向下方向键16d时,可移动平台30a在向上方向上移动,以在向下方向上移动图像合成;换言之,与移动前相比进一步向下方捕捉照相对象(竖直移动量V:负向)。
右向转动键16e连接到CPU21的端口P25。当在图像合成调节模式下按下右向转动键16e时,从后方观察,可移动平台30a沿右旋方向(顺时针方向)转动,以沿右旋方向转动图像合成;换言之,与运动前相比进一步向右旋侧捕捉照相像对象(转动量α:正向)。
左向转动键16f连接到CPU21的端口P26。当在图像合成调节模式下按下左向转动键16f时,从后方观察,可移动平台30a沿左旋方向(逆时针方向)转动,以沿左旋方向转动图像合成;换言之,与运动前相比进一步向左旋侧捕捉照相对象(转动量α:负向)。
在向右方向键16a、向左方向键16b、向上方向键16c、向下方向键16d、右向转动键16e、以及左向转动键16f的相对侧设有背光灯。
为了进行稍后描述的警告,相应键的背光灯发出警告光,从而照亮设置在发光背光灯上的键的至少一部分;换言之,设置在背光灯上方的键的至少一部分透射背光灯所发出的光。
因此,向右方向键16a、向左方向键16b、向上方向键16c、向下方向键16d、右向转动键16e、以及左向转动键16f中的每一个具有透射从相应的背光灯所发出的光的半透明(translucent)部件。
显示器17连接到CPU21的用于输入和输出信号的端口P6。
显示器17在与图像合成调节相关的预览图像上显示第一信息IN1和第二信息IN2(见图8和9)。
所显示的第一信息IN1指示可移动平台30a和可移动平台30a的移动范围之间的位置关系。
当可移动平台30a与显示可移动平台30a的移动范围的轮廓的边框接触时,在所显示的第一信息IN1中清晰地指示该接触状态。
所显示的第二信息IN2指示照相装置1的倾斜状态以及可移动平台30a的转动状态。
具体而言,所显示的第一信息IN1由第一边框F1和第二边框F2组成。第一边框F1示意性地显示了可移动平台30a的轮廓。第二边框F2示意性地显示了可移动平台30a的移动范围。
当可根据转动量α转动可移动平台30a时,在第一边框F1的矩形的两条边平行于第二边框F2的矩形的两条边且第一边框F1设置在第二边框F2的中心的条件下,在预览图像上显示第一边框F1和第二边框F2(见图8和9)。
当不能根据转动量α转动可移动平台30a时,在下述条件下:第一边框F1被倾斜、第一边框F1被突出显示、第一边框F1的矩形的至少一个角与第二边框F2接触、第二边框F2的矩形的四条边的至少其中之一也被突出显示,在预览图像上显示第一边框F1和第二边框F2(见图10)。
当不能根据水平移动量H水平移动可移动平台30a时,在第二边框F2的矩形的与y方向平行的两条边的至少其中之一被突出显示的条件下,在预览图像上显示第一边框F1和第二边框F2(见图11)。
当不能根据竖直移动量V竖直移动可移动平台30a时,在第二边框F2的矩形的与x方向平行的两条边的至少其中之一被突出显示的条件下,在预览图像上显示第一边框F1和第二边框F2(见图12)。
也就是说,CPU21确定可移动平台30a是否处于不能根据水平移动量H等在xy平面上移动或转动的不可移动的状态。当CPU21确定可移动平台30a处于不可移动的状态或不可转动的状态时,在不可移动的状态被突出显示的条件下,显示器17显示第一信息IN1。
在实施例中,通过在可移动和可转动的状态的指示不同于不可移动状态和不可转动状态的指示的条件下在所显示的第一信息IN1中指示第一边框F1和第二边框F2,可以容易地理解可移动平台30a和可移动平台30a的移动范围之间的关系,特别是可以容易地理解可移动平台30a是否可移动/可转动。
特别地,使用第一边框F1来执行与不可转动的状态相关的第一警告。另一方面,使用第二边框F2来执行与在水平方向上不可移动的状态相关的第二警告和与在竖直方向上不可移动的状态相关的第三警告两者。因此,可以容易地理解警告的类别。
所显示的第二信息IN2由照相机图标IC11、成像器图标IC12、水平轴HX、竖直轴VX、第一方向轴AX、以及可移动平台倾斜轴LVX组成。
水平轴HX平行于水平线(换言之,水平轴HX垂直于重力方向)。
竖直轴VX平行于重力方向。
第一方向轴AX是所显示的第二信息IN2中的平行于x方向的直线。
可移动平台倾斜轴LVX平行于成像器39a1的成像表面的矩形的两条边。
在根据相对于垂直于重力方向的水平面测量的照相装置1的倾斜状态(第二倾斜状态)(照相机倾斜角度Kθ)绕光轴LL转动照相机图标IC11的条件下,指示照相机图标IC11。
在根据可移动平台30a相对于照相装置1的倾斜状态(第三倾斜状态)(转动量α)绕光轴LL转动成像器图标IC12的条件下,指示成像器图标IC12。
照相机倾斜角度Kθ作为水平轴HX与第一方向轴AX之间的夹角被显示(见图13、14和15中的外阴影区)。
转动量α作为第一方向轴AX与可移动平台倾斜轴LVX之间的夹角被显示(见图14和15中的内阴影区)。
可移动平台倾斜角度LVL为相对于与重力方向垂直的水平面测量的可移动平台30a绕光轴LL的倾斜角度(第一倾斜状态),其作为水平轴HX与可移动平台倾斜轴LVX之间的夹角被显示(LVL=Kθ+α,见图16中的(7))。
在实施例中,在预览图像上指示第一信息IN1和第二信息IN2,但是可以在不同于显示器17的另一显示设备上指示它们。
照相机镜头67是照相装置1的可交换镜头,并连接到CPU21的端口P8。当照相装置1设置成ON状态等时,照相机镜头67将存储在照相机镜头67的内置ROM中的镜头信息输出到CPU21。
DSP19连接到CPU21的端口P9并连接到成像单元39a。根据来自CPU21的指令,DSP19对通过成像单元39a的成像操作而得到的图像信号执行计算操作,例如图像处理操作等等。
CPU21是在照相装置1的成像操作中控制照相装置1的每一部分的控制装置,并当调节图像合成时控制可移动平台30a的移动。
AE单元(曝光计算单元)23执行测光操作以及根据被拍摄(phtographed)的目标计算测光值。AE单元23还参考测光值计算光圈值和曝光操作的持续时间,这两者都是成像操作所需要的。AF单元24执行AF传感操作以及相应的对焦操作,两者都是成像操作所需的。在对焦操作中,照相机镜头67沿光轴LL重新定位。
AE单元23连接到CPU21的端口P4,用于输入和输出信号。AF单元24连接到CPU21的端口P5,用于输入和输出信号。
照相装置1的图像合成调节部分(图像合成调节装置)包括图像合成调节ON/OFF按钮14,图像合成调节ON/OFF开关14a,图像合成调节调节键16,显示器17,CPU21,倾斜检测单元25,驱动器电路29,图像合成调节单元30,以及霍尔传感器信号处理单元(磁场变化检测元件的信号处理电路)45。
图像合成调节ON/OFF开关14a的ON/OFF状态根据图像合成调节ON/OFF按钮14的操作状态而变化。
特别是,当操作者按下图像合成调节ON/OFF按钮14时,图像合成调节ON/OFF开关14a改变到ON状态,从而在预定时间间隔中执行图像合成调节,其中倾斜检测单元25和图像合成调节单元30被独立于包括测光操作等的其他操作驱动。当图像合成调节ON/OFF开关14a在ON状态时,(换言之,在图像合成调节模式),图像合成调节参数CP被设置为1(CP=1)。当图像合成调节ON/OFF开关14a不在ON状态时,(换言之,在非图像合成调节模式),图像合成调节参数CP被设置为0(CP=0)。在实施例中,预定时间间隔的值被设置为1ms。
指示图像合成调节ON/OFF开关14a在ON状态或者是OFF状态的信息作为1位数字信号被输入到CPU21的端口P14。
接下来,解释CPU21和倾斜检测单元25、驱动器电路29、图像合成调节单元30、以及霍尔传感器信号处理单元45之间的输入和输出关系的细节。
倾斜检测单元25具有加速度传感器26,第一放大器28a和第二放大器28b。
加速度传感器26检测第一重力分量和第二重力分量。第一重力分量是重力加速度在x方向的水平分量。第二重力分量是重力加速度在y方向的竖直分量。
第一放大器28a放大代表第一重力分量的信号,所述信号是从加速度传感器26输出的,并且向CPU21的A/D转换器A/D1输出模拟信号作为第一加速度ah。
第二放大器28b放大代表第二重力分量的信号,所述信号是从加速度传感器26输出的,并且向CPU21的A/D转换器A/D2输出模拟信号作为第二加速度av。
图像合成调节单元30是通过将成像单元39a移动到位置S来改变图像合成的装置。
图像合成调节单元30具有固定单元30b,以及包括成像单元39a的可移动平台30a,且所述可移动平台30a可以在xy平面上移动和转动。
在PON开关11a被设置成ON状态后(即当主电源被设置为ON状态时),对CPU21和倾斜检测单元25的每一部分供电。通过倾斜检测单元25进行的用于计算倾斜角度(照相机倾斜角度Kθ)的倾斜检测工作在PON开关11a被设置为ON状态之后开始。
CPU21将输入到A/D转换器A/D1的第一加速度ah转换为第一数字加速度信号Dah(A/D转换操作)。其进一步通过减小第一数字加速度信号Dah的高频分量(数字低通滤波)而计算第一数字加速度Aah,从而减小第一数字加速度信号Dah的噪音分量。
同样的,CPU21将输入到A/D转换器A/D2的第二加速度av转换为第二数字加速度信号Dav(A/D转换操作)。其进一步通过减小第二数字加速度信号Dav的高频分量(数字低通滤波)而计算第二数字加速度Aav,从而减小第二数字加速度信号Dav的噪音分量。
CPU21还计算照相装置1的照相机倾斜角度Kθ,所述倾斜角度Kθ通过照相装置1绕其光轴LL的转动而形成,以及根据第一数字加速度Aah的绝对值和第二数字加速度Aav的绝对值的差的大小,相对于垂直于重力方向的水平面而测量(见图16中的(1))。
根据照相装置1的定向,照相装置1的照相机倾斜角度Kθ变化,以及相对于第一水平定向、第二水平定向、第一竖直定向或第二竖直定向的其中之一测量该倾斜角度。这样,照相装置1的照相机倾斜角度Kθ通过x方向或y方向与水平面之间的夹角表示。
当x方向或y方向的其中之一在水平面上时,以及当x方向或y方向的另一个与水平面的夹角是90度时,照相装置1在非倾斜状态。
这样,CPU21和倾斜检测单元25具有计算照相装置1的倾斜角度的功能。
第一数字加速度Aah(第一重力分量)和第二数字加速度Aav(第二重力方向)根据照相装置1的定向而改变,并具有从-1到+1的值。
例如,当照相装置1保持在第一水平定向时,换言之,当照相装置1保持水平以及照相装置1的上表面向上时(见图2),第一数字加速度Aah是0,以及第二数字加速度Aav是+1。
当照相装置1保持在第二水平定向时,换言之,当照相装置1保持水平以及照相装置1的下表面向上时(见图3),第一数字加速度Aah是0,以及第二数字加速度Aav是-1。
当照相装置1保持在第一竖直定向时,换言之,当照相装置1保持竖直以及照相装置1的一个侧面向上时(见图4),第一数字加速度Aah是-1,以及第二数字加速度Aav是0。
当照相装置1保持在第二竖直定向时,换言之,当照相装置1保持竖直以及照相装置1的另一侧面向上时(见图5),第一数字加速度Aah是+1,以及第二数字加速度Aav是0。
当照相装置1的前表面面对重力方向或相反方向时,换言之,当照相装置1的前表面向上或者向下时,第一数字加速度Aah和第二数字加速度Aav是0。
当从前方观测,照相装置1从第一水平定向逆时针方向转动(倾斜)角度Kθ时(见图17),第一数字加速度Aah是-sin(Kθ)以及第二数字加速度Aav是+cos(Kθ)。
这样,倾斜角度(照相机倾斜角度Kθ)可以通过执行第一数字加速度Aah的反正弦变换以及取反,或者通过执行第二数字加速度Aav的反余弦变换来计算。
然而,当倾斜角度Kθ的绝对值很小时,换言之,在接近0的时候,正弦函数的变化大于余弦函数的变化,从而倾斜角度最好通过使用反正弦变换而不是反余弦变换来计算(Kθ=-Sin-1(Aah),见图27中的步骤S77)。
当从前方观测,照相装置1从第一竖直定向逆时针方向转动(倾斜)角度Kθ时(见图18),第一数字加速度Aah是-cos(Kθ)以及第二数字加速度Aav是-sin(Kθ)。
这样,倾斜角度(照相机倾斜角度Kθ)可以通过执行第一数字加速度Aah的反余弦变换以及取反,或者通过执行第二数字加速度Aav的反正弦变换以及取反来计算。
然而,当倾斜角度Kθ的绝对值很小时,换言之,在接近0的时候,正弦函数的变化大于余弦函数的变化,从而倾斜角度最好通过使用反正弦变换而不是反余弦变换来计算(Kθ=-Sin-1(Aav),见图27中的步骤S73)。
当从前方观测,照相装置1从第二水平定向逆时针方向转动(倾斜)角度Kθ时(见图19),第一数字加速度Aah是+sin(Kθ)以及第二数字加速度Aav是-cos(Kθ)。
这样,倾斜角度(照相机倾斜角度Kθ)可以通过执行第一数字加速度Aah的反正弦变换,或者通过执行第二数字加速度Aav的反余弦变换以及取反来计算。
然而,当倾斜角度Kθ的绝对值很小时,换言之,在接近0的时候,正弦函数的变化大于余弦函数的变化,从而倾斜角度最好通过使用反正弦变换而不是反余弦变换来计算(Kθ=+Sin-1(Aah),见图27中的步骤S76)。
当从前方观测,照相装置1从第二竖直定向逆时针方向转动(倾斜)角度Kθ时(见图20),第一数字加速度Aah是+cos(Kθ)以及第二数字加速度Aav是+sin(Kθ)。
这样,倾斜角度(照相机倾斜角度Kθ)可以通过执行第一数字加速度Aah的反余弦变换,或者通过执行第二数字加速度Aav的反正弦变换来计算。
然而,当倾斜角度Kθ的绝对值很小时,换言之,在接近0的时候,正弦函数的变化大于余弦函数的变化,从而倾斜角度最好通过使用反正弦变换而不是反余弦变换来计算(Kθ=+Sin-1(Aav),见图27中的步骤S74)。
倾斜角度,换言之照相机倾斜角度Kθ通过执行第一数字加速度Aah的绝对值和第二数字加速度Aav的绝对值中较小值的反正弦变换,以及加上正号或者负号而得到(Kθ=+Sin-1(Aah),-Sin-1(Aah),+Sin-1(Aav),或-Sin-1(Aav))。
根据第一数字加速度Aah的绝对值和第二数字加速度Aav的绝对值中的较大值,以及不应用绝对值的较大值的符号确定是否增加正号或者负号(见图27中的步骤S72和S75)。该确定的细节通过使用图27中的流程图进行解释。
在该实施例中,在第一中断过程中的加速度检测操作包括倾斜检测单元25中的过程以及从倾斜检测单元25将第一加速度ah和第二加速度av输入到CPU21。
照相机倾斜角度Kθ被配置为通过将用户所设定的转动量α相加来计算可移动平台倾斜角度LVL。
当执行图像合成调节时(CP=1),CPU21基于用户操作向右方向键16a和向左方向键16b的操作量来确定水平移动量H,基于用户操作向上方向键16c和向下方向键16d的操作量来确定竖直移动量V,基于用户操作右向转动键16e和左向转动键16f的操作量来确定转动量α。
当不执行图像合成调节时(CP=0),在可移动平台30a固定在初始状态的条件下,CPU21确定水平移动量H、竖直移动量V、以及转动量α(H=V=α=0)。
在初始状态下,可移动平台30a位于在x和y两个方向上的其移动范围的中心,以及组成成像器(成像传感器)39a1的成像表面的轮廓的矩形的四条边的每一条平行于x方向或者y方向。
CPU21根据水平移动量H、竖直移动量V、以及转动量α来计算成像单元39a(可移动平台30a)应移动到的位置S(见图16中的(2)以及图26中的步骤S57和S60)。位置S指示可移动平台30a的驱动点的位置。之后,CPU21将可移动平台30a移动到该位置S。
通过使用向右方向键16a和/或向左方向键16b在x方向上移动可移动平台30a来执行用于水平位移的图像合成调节。
通过使用向上方向键16c和/或向下方向键16d在y方向上移动可移动平台30a来执行用于竖直位移的图像合成调节。
通过使用右向转动键16e和/或左向转动键16f转动可移动平台30a来执行用于转动运动的图像合成调节。
图像合成调节键16的操作与可移动平台30a的移动/转动方向之间的关系被设定为用户可不考虑照相对象图像的颠倒(re-supination)和反转而操作图像合成调节键16。
例如,对于水平位移来说,从后方观察,当在向右方向上移动可移动平台30a时,在向左方向上移动图像合成(照相对象图像)。
类似地,对于竖直位移来说,从后方观察,当在向上方向上移动可移动平台30a时,在向下方向上移动图像合成(照相对象图像)。
类似地,对于转动运动来说,从后方观察,当沿右旋方向转动可移动平台30a(顺时针方向)时,沿右旋方向转动图像合成(照相对象图像)。
也就是说,可移动平台30a的移动方式是每个方向键16a至16f的方向对应于显示器17上的图像的移动方向。
具体而言,当操作向右/向左/向上/向下方向键16a至16d其中之一时,从后方观察,CPU21在被操作的方向键的相反方向上移动可移动平台30a。
当操作右向/左向转动键16e和16f其中之一时,从后方观察,CPU21在被操作的转动键的相同转动方向上转动可移动平台30a。
因此,可在与图像合成调节键16a至16f的方向对应的预期方向上移动图像合成。
在实施例中,可以不移动照相装置1而调节图像合成,即使当照相装置1被固定到三角架等等上时也是如此。此外,在这种情况下,可通过观察显示器17上的预览图像来确认与可移动平台30a的移动对应的图像合成的变化。
在预览图像上可以观察到调节之前的图像合成和调节之后的图像合成两者。因此,用户可以通过观察显示器17上的预览图像来调节预期的图像合成。
图8显示了在照相对象图像被捕捉的条件下显示器17上的预览图像,其中图像的左侧有一汽车,汽车的前端朝向右侧并且向上倾斜。
当用户操作向左方向键16b以在从后方观察的向右方向上移动可移动平台30a时,当用户操作向下方向键16d以在向上方向上移动可移动平台30a时,以及当用户操作右向转动键16e以沿从后方观察的顺时针方向(从前方观察的逆时针方向)转动可移动平台30a时,捕捉在成像器39a1的中心处包括不倾斜的汽车的照相对象图像(见图9)。
在实施例中,在垂直于光轴LL的平面(xy平面)上仅移动/转动设置在照相装置1中的包括成像器39a1的可移动平台30a。因此,不必移动/转动照相装置1来调节图像合成。因此,用于调节图像合成的设备未被放大。
注意,在倾斜校正中,可移动平台30a在移动范围内移动/转动,但不能在移动范围以外移动/转动。因此,在位置S的计算中,考虑可移动平台30a的移动范围与基于水平移动量H、竖直移动量V、转动量α的可移动平台30a的移动量之间的关系。
可移动平台30a上用于在x方向上移动可移动平台30a的驱动点被定义为水平驱动点DPx。
可移动平台30a上用于在y方向上移动可移动平台30a以及用于转动可移动平台30a的驱动点被定义为第一竖直驱动点DPyl和第二竖直驱动点DPyr(见图21和22)。
水平驱动点DPx是基于用于在x方向上驱动可移动平台30a的线圈(水平线圈31a)应用水平电磁力的点。水平驱动点DPx被设置在接近水平霍尔传感器hh10的位置。
第一竖直驱动点DPyl是基于用于在y方向上驱动可移动平台30a的线圈(第一竖直线圈32a1)应用第一电磁力的点。第一竖直驱动点DPyl被设置在接近第一竖直霍尔传感器hv1的位置。
第二竖直驱动点DPyr是基于用于在y方向上驱动可移动平台30a的线圈(第二竖直线圈32a2)应用第二电磁力的点。第二竖直驱动点DPyr被设置在接近第二竖直霍尔传感器hv2的位置。
根据转动量α和水平移动量H计算水平驱动点DPx的移动位置Sx,其是在初始状态(当图像合成调节开始时)到水平驱动点DPx的位置的移动量。
具体而言,水平驱动点DPx根据转动量α在x方向上移动第一水平位移量SHX1(SHX1=Lx×cos(θx+α)-Lx×cos(θx))。
注意,距离Lx是成像器39a1的成像表面的转动中心O和水平驱动点DPx之间的距离。
角度θx是x方向和经过初始状态的水平驱动点DPx及转动中心O的直线之间的夹角。
Lx和θx的值是固定值,通过事先的设计而确定(见图22)。
此外,水平驱动点DPx根据水平移动量H在x方向上移动第二水平位移量SHX2(SHX2=H)。
因此,通过第一水平位移量SHX1和第二水平位移量SHX2之和来表示水平驱动点DPx的移动位置Sx(Sx=SHX1+SHX2)。
根据转动量α和竖直移动量V计算第一竖直驱动点DPyl的移动位置Syl,其是在初始状态(当图像合成调节开始时)到第一竖直驱动点DPyl的位置的移动量。
具体而言,第一竖直驱动点DPyl根据转动量α在y方向上移动第一竖直位移量SHY1(SHY1=Lyl×cos(θyl-α)-Lyl×cos(θyl))。
注意,距离Lyl是成像器39a1的成像表面的转动中心O和第一竖直驱动点DPyl之间的距离。
角度θyl是y方向和经过初始状态的第一竖直驱动点DPyl及转动中心O的直线之间的夹角。
Lyl和θyl的值是固定值,通过事先的设计而确定。
此外,第一竖直驱动点DPyl根据竖直移动量V在y方向上移动第二竖直位移量SHY2(SHY2=V)。
因此,通过第一竖直位移量SHY1和第二竖直位移量SHY2的和来表示第一竖直驱动点DPyl的移动位置Syl(Syl=SHY1+SHY2)。
根据转动量α和竖直移动量V计算第二竖直驱动点DPyr的移动位置Syr,其是在初始状态(当图像合成调节开始时)到第二竖直驱动点DPyr的位置的移动量。
具体地,第二竖直驱动点DPyr根据转动量α在y方向上移动第三竖直位移量SHY3(SHY3=Lyr×cos(θyr+α)-Lyl×cos(θyr))。
注意,距离Lyr是成像器39a1的成像表面的转动中心O和第二竖直驱动点DPyr之间的距离。
角度θyr是y方向和经过初始状态的第二竖直驱动点DPyr及转动中心O的直线之间的夹角。
Lyr和θyr的值是固定值,通过事先的设计而确定。
此外,第二竖直驱动点DPyr根据竖直移动量V在y方向上移动第四竖直位移量SHY4(SHY4=V)。
因此,通过第三竖直位移量SHY3与第四竖直位移量SHY4之和来表示第二竖直驱动点DPyr的移动位置Syr(Syr=SHY3+SHY4)。
当通过转动量α的角度转动可移动平台30a时,换言之,当根据转动量α,水平驱动点DPx在x方向上移动第一水平位移量SHX1,第一竖直驱动点DPyl在y方向上移动第一竖直位移量SHY1,第二竖直驱动点DPyr在y方向上移动第三竖直位移量SHY3时,通过第一移动量Rx表示可移动平台30a上的点P在x方向上的移动量,以及通过第二移动量Ry表示点P在y方向上的移动量(Rx=r×sin(B+|α|)-r×sinB,Ry=r×sin(A+|α|)-r×sinA,见图23和24)。
例如,点P是成像器39a1的成像表面的矩形的其中一个角。
注意,距离r是点P与转动中心O之间的距离。
角度B是y方向与经过初始状态的点P及转动中心O的直线之间的夹角。
角度A是x方向与经过初始状态的点P及转动中心O的直线之间的夹角。
r、A和B的值是事先通过设计确定的固定值。
在可移动平台30a基于水平移动量H和转动量α在x方向上的移动处于可移动平台30a的移动范围内的条件下,调节(限制)水平驱动点DPx的移动位置Sx。
在可移动平台30a基于竖直移动量V和转动量α在y方向上的移动处于可移动平台30a的移动范围内的条件下,调节(限制)第一竖直驱动点DPyl的移动位置Syl以及第二竖直驱动点DPyr的移动位置Syr。
具体而言,CPU21确定第一移动量Rx的绝对值是否大于第一水平移动量Tsx以及第二移动量Ry的绝对值是否大于第一竖直移动量Tsy。
第一水平移动量Tsx是可移动平台30a根据转动在x方向上的可移动量。
通过第一移动量Rx的绝对值和第二水平移动量Ksx与水平移动量H的绝对值之差的和来表示第一水平移动量Tsx(Tsx=(Ksx-|H|)+|Rx|)。
第一竖直移动量Tsy是可移动平台30a根据转动在y方向上的可移动量。
通过第二移动量Ry的绝对值和第二竖直移动量Ksy与竖直移动量V的绝对值之差的和来表示第一竖直移动量Tsy(Tsy=(Ksy-|V|)+|Ry|)。
当第一移动量Rx的绝对值大于第一水平移动量Tsx(Tsx<|Rx|)时或当第二移动量Ry的绝对值大于第一竖直移动量Tsy(Tsy<|Ry|)时,CPU21确定,在可移动平台30a根据水平移动量H执行水平位移并且根据竖直移动量V执行竖直位移的条件下,如果可移动平台30a根据转动量α转动,可移动平台30a的一部分与可移动平台30a的移动范围的边框接触。
在这种情况下,CPU21不重新计算对应于转动量α的第一水平位移量SHX1、第一竖直位移量SHY1、以及第三竖直位移量SHY3,从而保持可移动平台30a先前的转动状态。
此外,CPU21执行表示不能根据转动量α执行转动的第一警告,作为预览图像上显示的第一信息IN1。
具体而言,当转动量α小于0时,CPU21确定不能在从后方观察的逆时针方向上执行可移动平台30a的转动,从而第一边框F1被突出显示并且向左下方倾斜(见图10和图29中的步骤S108)。
当转动量α大于或等于0时,CPU21确定不能在从后方观察的顺时针方向上执行可移动平台30a的转动,从而第一边框F1被突出显示并且向右下方倾斜(见图29中的步骤S107)。
此外,当CPU21确定不能在从后方观察的逆时针方向上执行转动时,CPU21控制左向转动键16f的背光灯发亮。因此CPU21执行指示左向转动键16f的操作无效的第一警告,除非通过操作除了左向转动键16f以外的任一图像合成调节键16来解除该不可转动的状态。
当CPU21确定不能执行在从后方观察的顺时针方向上的转动时,CPU21控制右向转动键16e的背光灯发亮。因此CPU21执行指示右向转动键16e的操作无效的第一警告,除非通过操作除了右向转动键16e以外的任一图像合成调节键16来解除该不可转动的状态(见图7)。
在图7中,右向转动键16e的阴影区域表示右向转动键16e的背光灯的发亮状态。
因此,当CPU21确定不能根据转动量α在xy平面上转动可移动平台30a时,在图像合成调节键16中的无效键(不可操作的键)的背光灯的ON/OFF状态不同于图像合成调节键16中的有效键(可操作的键)的背光灯的ON/OFF状态的条件下,图像合成调节键16显示与可移动平台30a和可移动平台30a的移动范围之间的位置关系相关的第三信息。
当第一移动量Rx的绝对值小于或等于第一水平移动量Tsx(Tsx≧|Rx|)时并且当第二移动量Ry的绝对值小于或等于第一竖直移动量Tsy(Tsy≧|Ry|)时,CPU21确定,在可移动平台30a根据水平移动量H执行水平位移并且根据竖直移动量V执行竖直位移的条件下,即使可移动平台30a根据转动量α转动,可移动平台30a也不与可移动平台30a的移动范围的边框接触。
在这种情况下,CPU21重新计算对应于转动量α的第一水平位移量SHX1、第一竖直位移量SHY1、以及第三竖直位移量SHY3(见图29中的步骤S103),从而根据第一水平位移量SHX1在x方向上移动水平驱动点DPx,根据第一竖直位移量SHY1在y方向上移动第一竖直驱动点DPyl,以及根据第三竖直位移量SHY3在y方向上移动第二竖直驱动点DPyr。
此外,在第一边框F1不倾斜并且不被突出显示的条件下,在预览图像上指示第一信息IN1(见图8、9、11和12,以及见图29中的步骤S105)。
此外,CPU21示意性地指示照相装置1的倾斜状态(照相机倾斜角度Kθ)和可移动平台30a的转动状态(转动量α),作为在显示器17上所显示的预览图像上的第二信息IN2。
通过该示意性指示,可以客观地识别照相机倾斜角度Kθ、转动量α、以及可移动平台倾斜角度LVL,其中可移动平台倾斜角度LVL为照相机倾斜角度Kθ与转动量α之和(LVL=Kθ+α)。
在图9和15显示的示例中,转动量α被设置成照相机倾斜角度Kθ与转动量α的正负不同,照相机倾斜角度Kθ与转动量α的绝对值相同,以及成像器39a1的成像表面的矩形的两条边平行于水平线,另外两条边垂直于水平线(LVL=Kθ+α=0)。
此外,CPU21确定水平移动量H的绝对值是否大于第二水平移动量Ksx以及竖直移动量V的绝对值是否大于第二竖直移动量Ksy。
第二水平移动量Ksx是可移动平台30a根据水平位移在x方向上的可移动量。
通过水平移动量H的绝对值和第一水平移动量Tsx与第一移动量Rx的绝对值之差的和来表示第二水平移动量Ksx(Ksx=(Tsx-|Rx|)+|H|)。
第二竖直移动量Ksy是可移动平台30a根据竖直位移在y方向上的可移动量。
通过竖直移动量V的绝对值和第一竖直移动量Tsy与第二移动量Ry的绝对值之差的和来表示第二竖直移动量Ksy(Ksy=(Tsy-|Ry|)+|V|)。
当水平移动量H的绝对值大于第二水平移动量Ksx(Ksx<|H|)时,CPU21确定,在可移动平台30a根据转动量α转动并且根据竖直移动量V执行竖直位移的条件下,如果可移动平台30a根据水平移动量H执行水平位移,可移动平台30a的一部分与可移动平台30a的移动范围的边框接触。
在这种情况下,CPU21不重新计算对应于水平移动量H的第二水平位移量SHX2,从而保持可移动平台30a先前的水平位移状态。
此外,CPU21执行指示不能根据水平移动量H执行水平位移的第二警告,作为预览图像上显示的第一信息IN1。
具体而言,当水平移动量H小于0时,CPU21确定不能在从后方观察的向右方向上执行可移动平台30a的水平位移。换言之,CPU21确定不能在向左方向上移动图像合成,因此突出显示第二边框F2的左边缘(见图11和图29中的步骤S114)。
当水平移动量H大于或等于0时,CPU21确定不能在从后方观察的向左方向上执行可移动平台30a的水平位移。换言之,CPU21确定不能在向右方向上移动图像合成,因此突出显示第二边框F2的右边缘(见图29中的步骤S115)。
此外,当CPU21确定不能在从后方观察的向右方向上执行水平位移时,CPU21控制向左方向键16b的背光灯发亮。因此CPU21执行指示向左方向键16b的操作无效的第二警告,除非通过操作除了向左方向键16b以外的任一图像合成调节键16来解除水平位移的该不可移动的状态。
当CPU21确定不能在从后方观察的向左方向上执行水平位移时,CPU21控制向右方向键16a的背光灯发亮。因此CPU21执行指示向右方向键16a的操作无效的第二警告,除非通过操作除了向右方向键16a以外的任一图像合成调节键16来解除水平位移的该不可移动的状态。
因此,当CPU21确定不能根据水平移动量H在xy平面上沿水平方向移动可移动平台30a时,在图像合成调节键16中的无效键(不可操作的键)的背光灯的ON/OFF状态不同于图像合成调节键16中的有效键(可操作的键)的背光灯的ON/OFF状态的条件下,图像合成调节键16显示与可移动平台30a和可移动平台30a的移动范围之间的位置关系相关的第三信息。
当水平移动量H的绝对值小于或等于第二水平移动量Ksx(Ksx≧|H|)时,CPU21确定,在可移动平台30a根据转动量α转动并且根据竖直移动量V执行竖直位移的条件下,即使可移动平台30a根据水平移动量H执行水平位移,可移动平台30a也不与可移动平台30a的移动范围的边框接触。
在这种情况下,CPU21重新计算对应水平移动量H的第二水平位移量SHX2(见图29中的步骤S110),从而根据第二水平位移量SHX2在x方向上移动水平驱动点DPx。
此外,在第二边框F2的右边缘和左边缘不被突出显示的条件下,在预览图像上指示第一信息IN1(见图8、9和12,以及见图29中的步骤S112)。
当竖直移动量V的绝对值大于第二竖直移动量Ksy(Ksy<|V|)时,CPU21确定,在可移动平台30a根据转动量α转动并且根据水平移动量H执行水平位移的条件下,如果可移动平台30a根据竖直移动量V执行竖直位移,可移动平台30a的一部分与可移动平台30a的移动范围的边框接触。
在这种情况下,CPU21不重新计算对应于竖直移动量V的第二竖直位移量SHY2以及第四竖直位移量SHY4,从而保持可移动平台30a先前的竖直位移状态。
此外,CPU21执行指示不能根据竖直移动量V执行竖直位移的第三警告,作为预览图像上显示的第一信息IN1。
具体而言,当竖直移动量V小于0时,CPU21确定不能在向上方向上执行可移动平台30a的竖直位移。换言之,CPU21确定不能在向下方向上移动图像合成,因此突出显示第二边框F2的下边缘(见图12和图30中的步骤S121)。
当竖直移动量V大于或等于0时,CPU21确定不能在向下方向上执行可移动平台30a的竖直位移。换言之,CPU21确定不能在向上方向上移动图像合成,因此突出显示第二边框F2的上边缘(见图30中的步骤S122)。
此外,当CPU21确定不能在向上方向上执行竖直位移时,CPU21控制向下方向键16d的背光灯发亮。因此CPU21执行指示向下方向键16d的操作无效的第三警告,除非通过操作除了向下方向键16d以外的任一图像合成调节键16来解除竖直位移的该不可移动的状态。
当CPU21确定不能在向下方向上执行竖直位移时,CPU21控制向上方向键16c的背光灯发亮。因此CPU21执行指示向上方向键16c的操作无效的第三警告,除非通过操作除了向上方向键16c以外的任一图像合成调节键16来解除水平位移的该不可移动的状态。
因此,当CPU21确定不能根据竖直移动量V在xy平面上沿竖直方向移动可移动平台30a时,在图像合成调节键16中的无效键(不可操作的键)的背光灯的ON/OFF状态不同于图像合成调节键16中的有效键(可操作的键)的背光灯的ON/OFF状态的条件下,图像合成调节键16显示与可移动平台30a和可移动平台30a的移动范围之间的位置关系相关的第三信息。
当竖直移动量V的绝对值小于或等于第二竖直移动量Ksy(Ksy≧|V|)时,CPU21确定,在可移动平台30a根据转动量α转动并且根据水平移动量H执行水平位移的条件下,即使可移动平台30a根据竖直移动量V执行竖直位移,可移动平台30a也不与可移动平台30a的移动范围的边框接触。
在这种情况下,CPU21重新计算对应于竖直移动量V的第二竖直位移量SHY2和第四竖直位移量SH4(见图30中的步骤S117),从而根据第二竖直位移量SHY2在y方向上移动第一竖直驱动点DPyl以及根据第四竖直位移量SHY4在y方向上移动第二竖直驱动点DPyr。
此外,在第二边框F2的上边缘和下边缘不被突出显示的条件下,在预览图像上指示第一信息IN1(见图8、9和11,以及见图30中的步骤S119)。
可同时执行通过突出显示第一边框F1的不可转动的状态的第一警告、通过突出显示第二边框F2的右边缘或左边缘的至少其中之一的水平方向上的不可移动的状态的第二警告、以及通过突出显示第二边框F2的上边缘或下边缘的至少其中之一的竖直方向上的不可移动的状态的第三警告。
图10显示了第一信息IN1,包括指示不能沿逆时针方向执行图像合成的转动的第一警告(不能沿从后方观察的逆时针方向执行可移动平台30a转动),以及指示不能在向下方向上执行图像合成的移动的第三警告(不能在向上方向上执行可移动平台30a的竖直位移)。
通过显示这些警告,可以在视觉上识别可移动平台30a的用于图像合成的移动/转动的限制。
特别地,通过使不可操作的键(无效键)的背光灯发亮,用户可以在视觉上识别解除不可转动/不可移动的状态所需的键。
在实施例中,不可操作的键的背光灯发亮,可操作的键的背光灯不发亮,但是,不可操作的键的背光灯可以发亮,可操作的键的背光灯可以不发亮。
此外,在图像合成调节键16包含在触摸面板中并在显示器17等等上显示的情况下,无效键(不可操作的键)的指示状态可以不同于有效键(可操作的键)的指示状态。
此外,当不可操作的键(无效键)被操作时,图像合成调节键16可以发出警告。具体而言,当不可操作的键被操作时,可以输出警告声音或警告震动作为警告。
此外,可在向右方向键16a、向左方向键16b、向上方向键16c、以及向下方向键16d周围设置转动调节控制盘部件16g来代替与转动相关的图像合成调节键16(右向转动键16e和左向转动键16f),以对转动起作用(见图32)。
从后方观察,当沿顺时针方向转动转动调节控制盘部件16g时,右向转动开关(未示出)被设置成ON状态,从而根据转动调节控制盘部件16g的转动量沿顺时针方向转动可移动平台30a,类似于右向转动键16e的操作。
从后方观察,当沿逆时针方向转动转动调节控制盘部件16g时,左向转动开关(未示出)被设置成ON状态,从而根据转动调节控制盘部件16g的转动量沿逆时针方向转动可移动平台30a,类似于左向转动键16f的操作。
通过使设置在转动调节控制盘部件16g右侧之后的右向转动背光灯16h发亮来执行沿顺时针方向的不可转动的状态的警告指示。
通过使设置在转动调节控制盘部件16g左侧之后的左向转动背光灯16i发亮来执行沿逆时针方向的不可转动的状态的警告指示。
因此,转动调节控制盘部件16g具有透射从右向转动背光灯16h和左向转动背光灯16i所发出的光的半透明(translucent)部件。
注意,可通过使设置在转动调节控制盘部件16g的右外侧的右向转动警告灯16j发亮来执行沿顺时针方向的不可转动的状态的警告指示,以及可通过使设置在转动调节控制盘部件16g的左外侧的左向转动警告灯16k发亮来执行沿逆时针方向的不可转动的状态的警告指示(见图33)。
包括成像单元39a的可移动平台30a的移动/转动通过使用电磁力执行,且将在下文中进行解释。
驱动力D用于驱动驱动器电路29,从而移动可移动平台30a到位置S。
用于水平线圈31a的驱动力D的水平方向分量被定义为水平驱动力Dx(在D/A转换之后,第一水平PWM功率(duty)dx)。
用于第一竖直线圈32a1的驱动力D的竖直方向分量被定义为第一竖直驱动力Dyl(在D/A转换之后,第一竖直PWM功率dyl)。
用于第二竖直线圈32a2的驱动力D的竖直方向分量被定义为第二竖直驱动力Dyr(在D/A转换之后,第二竖直PWM功率dyr)。
通过线圈单元和磁性单元的电磁力经过驱动器电路29执行可移动平台30a的驱动,包括到初始状态的固定(保持)位置的移动,驱动器电路29具有从CPU21的PWM0输入的水平PWM功率dx,从CPU21的PWM1输入的第一竖直PWM功率dyl,从CPU21的PWM2输入的第二竖直PWM功率dyr(见图16中的(3))。
在通过驱动器电路29执行的移动/转动之前或之后,通过霍尔传感器单元44a和霍尔传感器信号处理单元45检测可移动平台30a的检测位置P。
检测位置P的水平方向分量的信息,换言之,水平检测位置信号px被输入到CPU21的A/D转换器A/D3(见图16中的(4))。水平检测位置信号px是通过A/D转换器A/D3转换成数字信号(A/D转换操作)的模拟信号。A/D转换操作之后的检测位置P的水平方向分量被定义为pdx,并对应水平检测位置信号px。
检测位置P的一个竖直方向分量的信息,换言之,第一竖直检测位置信号pyl被输入到CPU21的A/D转换器A/D4。第一竖直检测位置信号pyl是通过A/D转换器A/D4转换成数字信号(A/D转换操作)的模拟信号。A/D转换操作之后的检测位置P的第一竖直方向分量被定义为pdyl,并对应第一竖直检测位置信号pyl。
检测位置P的另一个竖直方向分量的信息,换言之,第二竖直检测位置信号pyr被输入到CPU21的A/D转换器A/D5。第二竖直检测位置信号pyr是通过A/D转换器A/D5转换成数字信号(A/D转换操作)的模拟信号。A/D转换操作之后的检测位置P的第二竖直方向分量被定义为pdyr,并对应第二竖直检测位置信号pyr。
PID(比例积分微分)控制根据检测位置P(pdx,pdyl,pdyr)和移动之后的位置S(Sx,Syl,Syr)的坐标数据计算水平驱动力Dx和第一和第二竖直驱动力Dyl和Dyr(见图16中的(5))。
当照相装置1在图像合成调节模式时(CP=1),即图像合成调节ON/OFF开关14a设置在ON状态,执行对应于PID控制的图像合成调节的可移动平台30a到位置S(Sx,Syl,Syr)的驱动。
当图像合成调节参数CP为0时,执行不涉及图像合成调节的PID控制,从而可移动平台30a在初始状态被移动到移动范围的中心,从而组成成像单元39a的成像器39a1的成像表面的轮廓的四条边的每一条都与x方向或y方向平行(见图16中的(6))。
可移动平台30a具有用于驱动的线圈单元,所述用于驱动的线圈单元包括水平线圈31a,第一竖直线圈32a1,第二竖直线圈32a2,具有成像器39a1的成像单元39a,以及作为磁场变化检测元件单元的霍尔传感器单元44a(见图6和21)。在该实施例中,成像器39a1是CCD;但是,成像器39a1也可以是其他类型,例如CMOS等等。
固定单元30b具有磁性位置检测和驱动单元,所述磁性位置检测和驱动单元包括水平磁体411b,第一竖直磁体412b1,第二竖直磁体412b2,水平轭431b,第一竖直轭432b1以及第二竖直轭432b2。
固定单元30b在xy平面的矩形移动范围之内使用球等可移动和可转动的支持可移动平台30a。所述球设置在固定单元30b和可移动平台30a之间。
当成像器39a1的中心区域和照相机镜头67的光轴LL相交时,设置可移动平台30a的位置和固定单元30b的位置之间的关系,从而可移动平台30a在x方向和y方向上都位于其移动范围的中心,由此能够利用成像器39a1的成像范围的完整尺寸。
成像器39a1的成像表面的矩形形状具有两条对角线。在本实施例中,成像器39a1的中心在这两条对角线的交点上。
此外,对应于按下PON按钮11,PON开关11a被设置在ON状态,紧接着,在初始状态,其为图像合成调节的开始点,可移动平台30a在x方向和y方向上都位于其移动范围的中心,并且组成成像器39a1的成像表面的轮廓的四条边的每一条都与x方向或y方向平行(见图25中的步骤S15)。
水平线圈31a、第一竖直线圈32a1、第二竖直线圈32a2、以及霍尔传感器单元44a连接到可移动平台30a。
水平线圈31a形成底座和螺旋形线圈模式(pattern)。水平线圈31a的线圈模式具有平行于y方向的线,由此产生水平电磁力以在x方向移动可移动平台30a上的水平驱动点DPx,所述可移动平台30a包括水平线圈31a。
通过水平线圈31a的电流方向和水平磁体411b的磁场方向,产生水平电磁力。
第一竖直线圈32a1形成底座和螺旋形线圈模式(pattern)。第一竖直线圈32a1的线圈模式具有平行于x方向的线,由此产生第一竖直电磁力以在y方向移动可移动平台30a上的第一竖直驱动点DPyl,所述可移动平台30a包括第一竖直线圈32a1。
通过第一竖直线圈32a1的电流方向和第一竖直磁体412b1的磁场方向,产生第一竖直电磁力。
第二竖直线圈32a2形成底座和螺旋形线圈模式(pattern)。第二竖直线圈32a2的线圈模式具有平行于x方向的线,由此产生第二竖直电磁力以在y方向移动可移动平台30a上的第二竖直驱动点DPyr并转动可移动平台30a,所述可移动平台30a包括第二竖直线圈32a2。
通过第二竖直线圈32a2的电流方向和第二竖直磁体412b2的磁场方向,产生第二竖直电磁力。
水平线圈31a、第一竖直线圈32a1、第二竖直线圈32a2连接到驱动器电路29,所述驱动器电路29通过柔性电路板(未示出)驱动水平线圈31a、第一竖直线圈32a1、第二竖直线圈32a2。
水平PWM功率dx从CPU21的PWM0被输入到驱动器电路29,所述水平PWM功率dx是PWM脉冲的功率比例(duty ratio)。第一竖直PWM功率dyl从CPU21的PWM1被输入到驱动器电路29,所述第一竖直PWM功率dyl是PWM脉冲的功率比例。第二竖直PWM功率dyr从CPU21的PWM2被输入到驱动器电路29,所述第二竖直PWM功率dyr是PWM脉冲的功率比例。
对应于水平PWM功率dx的值,驱动器电路29为水平线圈31a供电,从而在x方向上移动可移动平台30a上的水平驱动点DPx。
对应于第一竖直PWM功率dyl的值,驱动器电路29为第一竖直线圈32a1供电,从而在y方向上移动可移动平台30a上的第一竖直驱动点DPyl。
对应于第二竖直PWM功率dyr的值,驱动器电路29为第二竖直线圈32a2供电,从而在y方向上移动可移动平台30a上的第二竖直驱动点DPyr。
第一和第二竖直线圈32a1和32a2在初始状态设置在x方向上。
第一和第二竖直线圈32a1和32a2设置在初始状态,从而成像器39a1的中心区域(转动中心O)和在y方向上的第一竖直线圈32a1的中心区域之间的距离等于成像器39a1的中心区域和在y方向上的第二竖直线圈32a2的中心区域之间的距离。
水平磁体411b安装在固定单元30b的可移动平台一侧,其中水平磁体411b在z方向上面对水平线圈31a和水平霍尔传感器hh10。
第一竖直磁体412b1安装在固定单元30b的可移动平台一侧,其中第一竖直磁体412b1在z方向上面对第一竖直线圈32a1和第一竖直霍尔传感器hv1。
第二竖直磁体412b2安装在固定单元30b的可移动平台一侧,其中第二竖直磁体412b2在z方向上面对第二竖直线圈32a2和第二竖直霍尔传感器hv2。
水平磁体411b安装在水平轭431b上,从而N极和S极设置在x方向。水平轭431b安装在固定单元30b上。
第一竖直磁体412b1安装在第一竖直轭432b1上,从而N极和S极设置在y方向。第一竖直轭432b1安装在固定单元30b上。
类似的,第二竖直磁体412b2安装在第二竖直轭432b2上,从而N极和S极设置在y方向。第二竖直轭432b2安装在固定单元30b上。
水平轭431b由软磁材料制成。
水平轭431b防止水平磁体411b的磁场耗散在周围环境中,从而提高水平磁体411b和水平线圈31a之间以及水平磁体411b和水平霍尔传感器hh10之间的磁通密度。
第一和第二竖直轭432b1和432b2由软磁材料制成。
第一竖直轭432b1防止第一竖直磁体412b1的磁场耗散在周围环境中,从而提高第一竖直磁体412b1和第一竖直线圈32a1之间以及第一竖直磁体412b1和第一竖直霍尔传感器hv1之间的磁通密度。
类似的,第二竖直轭432b2防止第二竖直磁体412b2的磁场耗散在周围环境中,从而提高第二竖直磁体412b2和第二竖直线圈32a2之间以及第二竖直磁体412b2和第二竖直霍尔传感器hv2之间的磁通密度。
水平轭431b和第一和第二竖直轭432b1和432b2可以一体或是分体形成。
霍尔传感器单元44a是单轴霍尔传感器,其具有三个霍尔传感器组件,所述霍尔传感器组件是使用霍尔效应的电磁转换元件(磁场变化检测元件)。霍尔传感器单元44a检测水平检测位置信号px作为可移动平台30a在x方向上的现有位置P,检测第一竖直检测位置信号pyl和第二竖直检测位置信号pyr作为可移动平台30a在y方向上的现有位置P。
三个霍尔传感器之一是用于检测水平检测位置信号px的水平霍尔传感器hh10,以及三个霍尔传感器的另一个是用于检测第一竖直检测位置信号pyl的第一竖直霍尔传感器hv1,而三个霍尔传感器的第三个是用于检测第二竖直检测位置信号pyr的第二竖直霍尔传感器hv2。
水平霍尔传感器hh10安装在可移动平台30a上,其中水平霍尔传感器hh10在z方向上面对固定单元30b的水平磁体411b,水平驱动点DPx被设置在接近水平霍尔传感器hh10的位置。
水平霍尔传感器hh10可以在y方向上被设置在水平线圈31a的螺旋绕组之外。但是,理想情况是水平霍尔传感器hh10被设置在水平线圈31a的螺旋绕组之内,在x方向上沿水平线圈31a的螺旋绕组的外圆周居中(见图21)。
在z方向,水平霍尔传感器hh10在水平线圈31a上是分层的(layered)。因此,用于位置检测操作产生的磁场的区域和用于驱动可移动平台30a而产生的磁场区域被共享。这样,在y方向的水平磁体411b的长度和在y方向的水平轭431b的长度可以被缩短。
此外,基于水平线圈31a施加水平电磁力的水平驱动点DPx可以接近通过水平霍尔传感器hh10的位置检测点。这样,可以执行x方向上的可移动平台30a的精确驱动控制。
第一竖直霍尔传感器hv1安装在可移动平台30a上,其中第一竖直霍尔传感器hv1在z方向上面对固定单元30b的第一竖直磁体412b1,第一竖直驱动点DPyl被设置在接近第一竖直霍尔传感器hv1的位置。
第二竖直霍尔传感器hv2安装在可移动平台30a上,其中第二竖直霍尔传感器hv2在z方向上面对固定单元30b的第二竖直磁体412b2,第二竖直驱动点DPyr被设置在接近第二竖直霍尔传感器hv2的位置。
第一和第二竖直霍尔传感器hv1和hv2在初始状态被设置在x方向。
第一竖直霍尔传感器hv1可以在x方向上被设置在第一竖直线圈32a1的螺旋绕组之外。但是,理想情况是第一竖直霍尔传感器hv1被设置在第一竖直线圈32a1的螺旋绕组之内,在y方向上沿第一竖直线圈32a1的螺旋绕组的外圆周居中。
在z方向,第一竖直霍尔传感器hv1在第一竖直线圈32a1上是分层的(layered)。因此,用于位置检测操作产生的磁场的区域和用于驱动可移动平台30a而产生的磁场区域被共享。这样,在x方向的第一竖直磁体412b1的长度和在x方向的第一竖直轭432b1的长度可以被缩短。
第二竖直霍尔传感器hv2可以在x方向上被设置在第二竖直线圈32a2的螺旋绕组的之外。但是,理想情况是第二竖直霍尔传感器hv2被设置在第二竖直线圈32a2的螺旋绕组之内,在y方向上沿第二竖直线圈32a2的螺旋绕组的外圆周居中。
在z方向,第二竖直霍尔传感器hv2在第二竖直线圈32a2上是分层的(layered)。因此,用于位置检测操作产生的磁场的区域和用于驱动可移动平台30a而产生的磁场区域被共享。这样,在x方向的第二竖直磁体412b2的长度和在x方向的第二竖直轭432b2的长度可以被缩短。
此外,基于第一竖直线圈32a1施加第一竖直电磁力的第一竖直驱动点DPyl可以接近通过第一竖直霍尔传感器hv1的位置检测点,基于第二竖直线圈32a2的施加第二竖直电磁力的第二竖直驱动点DPyr可以接近通过第二竖直霍尔传感器hv2的位置检测点。这样,可以执行y方向上的可移动平台30a的精确驱动控制。
在初始状态以及当成像器39a1的中心区域(转动中心O)和照相机镜头67的光轴LL相交时,理想的是水平霍尔传感器hh10位于霍尔传感器单元44a上,从而从z方向观测,在x方向上其面对水平磁体411b的N极和S极之间的中间区域,从而执行位置检测操作以及利用全部范围,在该范围中可以基于单轴霍尔传感器的线性输出变化(线性)执行精确位置检测操作。
类似的,在初始状态以及当成像器39a1的中心区域(转动中心O)和照相机镜头67的光轴LL相交时,理想的是第一竖直霍尔传感器hv1位于霍尔传感器单元44a上,从而从z方向观测,在y方向上其面对第一竖直磁体412b1的N极和S极之间的中间区域。
类似的,在初始状态以及当成像器39a1的中心区域(转动中心O)和照相机镜头67的光轴LL相交时,理想的是第二竖直霍尔传感器hv2位于霍尔传感器单元44a上,从而从z方向观测,在y方向上其面对第二竖直磁体412b2的N极和S极之间的中间区域。
第一霍尔传感器信号处理单元45具有磁场变化检测元件的信号处理电路,包括第一霍尔传感器信号处理电路450,第二霍尔传感器信号处理电路460以及第三霍尔传感器信号处理电路470。
第一霍尔传感器信号处理电路450基于水平霍尔传感器hh10的输出信号,检测水平霍尔传感器hh10的输出端之间的水平电势差。
第一霍尔传感器信号处理电路450根据水平电势差输出水平检测位置信号px到CPU21的A/D转换器A/D3。水平检测位置信号px表示在x方向上可移动平台30a上的水平霍尔传感器hh10的特别位置(通过水平霍尔传感器hh10的位置检测点)。
第一霍尔传感器信号处理电路450通过柔性电路板(未示出)连接到水平霍尔传感器hh10。
第二霍尔传感器信号处理电路460基于第一竖直霍尔传感器hv1的输出信号检测第一竖直霍尔传感器hv1的输出端之间的第一竖直电势差。
第二霍尔传感器信号处理电路460根据第一竖直电势差输出第一竖直检测位置信号pyl到CPU21的A/D转换器A/D4。第一竖直检测位置信号pyl表示在y方向上可移动平台30a上的第一竖直霍尔传感器hv1的特别位置(通过第一竖直霍尔传感器hv1的位置检测点)。
第二霍尔传感器信号处理电路460通过柔性电路板(未示出)连接到第一竖直霍尔传感器hv1。
第三霍尔传感器信号处理电路470基于第二竖直霍尔传感器hv2的输出信号检测第二竖直霍尔传感器hv2的输出端之间的第二竖直电势差。
第三霍尔传感器信号处理电路470根据第二竖直电势差输出第二竖直检测位置信号pyr到CPU21的A/D转换器A/D5。第二竖直检测位置信号pyr表示在y方向上可移动平台30a上的第二竖直霍尔传感器hv2的特别位置(通过第二竖直霍尔传感器hv2的位置检测点)。
第三霍尔传感器信号处理电路470通过柔性电路板(未示出)连接到第二竖直霍尔传感器hv2。
在该实施例中,三个霍尔传感器(hh10,hv1和hv2)被设置为指定可移动平台30a的位置,包括转动(倾斜)角度。
通过使用三个霍尔传感器中的两个(hv1和hv2)确定可移动平台30a上的两个点在y方向的位置。这两个点分别接近第一竖直驱动点DPyl和第二竖直驱动点DPyr。通过使用三个霍尔传感器中的另一个(hh10),确定可移动平台30a上的一个点在x方向的位置。这个点接近水平驱动点DPx。可以根据在x方向上的所述一个点的位置和在y方向上的两个点的位置的相关信息,确定包括xy平面上的转动(倾斜)角度的可移动平台30a的位置。
接下来,使用图25的流程图解释实施例中的照相装置1的主要操作。
当PON开关11a设置在ON状态,照相装置1设置在ON状态,以及向倾斜检测单元25供电,从而在步骤S11中倾斜检测单元25设置在ON状态。
在步骤S12中,CPU21对所述值进行初始化。所述值包括水平移动量H、竖直移动量V、转动量α、第一水平移动量Tsx、第二水平移动量Ksx、第一竖直移动量Tsy、第二竖直移动量Ksy、第一水平位移量SHX1、第二水平位移量SHX2、第一竖直位移量SHY1、第二竖直位移量SHY2、第三竖直位移量SHY3、以及第四竖直位移量SHY4。
具体而言,CPU21将水平移动量H、竖直移动量V、转动量α、第一水平位移量SHX1、第二水平位移量SHX2、第一竖直位移量SHY1、第二竖直位移量SHY2、第三竖直位移量SHY3、以及第四竖直位移量SHY4的值设置为0。
CPU21将第一水平移动量Tsx和第二水平移动量Ksx的值设置为水平最大移动量HOx。
CPU21将第一竖直移动量Tsy和第二竖直移动量Ksy的值设置为竖直最大移动量Hoy。
水平最大移动量HOx是初始状态下可移动平台30a在x方向上能够被移动的量。
竖直最大移动量Hoy是初始状态下可移动平台30a在y方向上能够被移动的量。
水平最大移动量HOx和竖直最大移动量Hoy是事先通过设计确定的固定值(见图23和24)。
在步骤S13中,以预定时间间隔(1ms)开始第一计时器中断过程和第二计时器中断过程。在后面通过图26、27、29和30中的流程图解释实施例中的第一计时器中断过程的细节。通过图28中的流程图解释实施例中的第二计时器中断过程的细节。
在步骤S14中,CPU21设置图像合成调节参数CP的值为0。
在步骤S15中,CPU21暂停300ms。之后,操作进行到步骤S16。
在该等待周期中所执行的第一计时器中断过程中,可移动平台30a被移动到移动范围的中心,作为初始状态,使得组成成像单元39a的成像器39a1的成像表面的轮廓的四条边的每一条平行于x方向或者y方向。
此外,CPU21与照相机镜头67通信,从而镜头信息从照相机镜头67输出到CPU21。
在步骤S16中,CPU21确定图像合成调节ON/OFF开关14a(图25中的C-SW)是否设置为ON状态。当CPU21确定图像合成调节ON/OFF开关14a未设置为ON状态,在步骤S17中,CPU21设置图像合成调节参数CP的值为0。否则,在步骤S18中,CPU21设置图像合成调节参数CP的值为1。
在步骤S19中,执行曝光操作,即成像器39a1(CCD等等)的电荷积累。
在步骤S20中,读取曝光时间中积累到成像器39a1中的电荷。在步骤S21中,CPU21和DSP19通信,从而基于从成像器39a1读取的电荷执行图像处理操作。图像处理操作中执行的图像显示在显示器17上(预览图像的指示)。
在步骤S22中,通过AE单元23执行测光操作,从而计算光圈值和曝光操作的持续时间。
在步骤S23中,通过AF单元24执行AF传感操作,以及通过驱动镜头控制电路执行对焦操作。
在步骤S24中,CPU21确定快门释放开关13a(图25中的R-SW)是否设置为ON状态。当CPU21确定快门释放开关13a未设置为ON状态,操作返回到步骤S16,以及重复步骤S16到S23中描述的过程。否则,操作继续到步骤S25。
在步骤S25中,执行曝光操作,即成像器39a1(CCD等等)电荷积累。在步骤S26中,读取曝光时间中积累到成像器39a1中的电荷。在步骤S27中,CPU21和DSP19通信,从而基于从成像器39a1读取的电荷执行图像处理操作。图像处理操作中执行的图像被存储在照相装置1的存储器中。在步骤S28中,存储在存储器中的图像显示在显示器17上,以及操作返回到步骤S16。换言之,照相装置返回到可以执行下一次成像操作的状态。
接下来,使用图26中的流程图解释实施例中的第一计时器中断过程,所述第一计时器中断过程在图25中的步骤S13开始,独立于其他操作以每一个预定时间间隔(1ms)执行。
当第一计时器中断过程开始时,从倾斜检测单元25输出的第一加速度ah被输入到CPU21的A/D转换器A/D1中,以及在步骤S51中被转换为第一数字加速度信号Dah。同样的,从倾斜检测单元25输出的第二加速度av被输入到CPU21的A/D转换器A/D2中,以及被转换为第二数字加速度信号Dav(加速度检测操作)。
在步骤S51中的加速度检测操作中,被第一和第二放大器28a和28b放大的第一加速度ah和第二加速度av被输入到CPU21。
第一和第二数字加速度信号Dah和Dav的高频在数字低通滤波过程中被降低(第一和第二数字加速度Aah和Aav)。
在步骤S52中,霍尔传感器单元44a检测可移动平台30a的位置。水平检测位置信号px和第一和第二竖直检测位置信号pyl和pyr通过霍尔传感器信号处理单元45进行计算。然后,水平检测位置信号px被输入到CPU21的A/D转换器A/D3中,以及被转换为数字信号pdx,第一竖直检测位置信号pyl被输入到CPU21的A/D转换器A/D4中,以及被转换为数字信号pdyl,并且第二竖直检测位置信号pyr被输入到CPU21的A/D转换器A/D5中,以及也被转换为数字信号pdyr,其均用来指定可移动平台30a的现有位置P(pdx,pdyl,pdyr)(见图16中的(4))。
在步骤S53中,CPU21根据第一和第二数字加速度Aah和Aav计算照相机倾斜角度Kθ(见图16中的(1))。
下面,使用图27中的流程图解释实施例中计算照相机倾斜角度Kθ的细节。
在步骤S54中,CPU21确定图像合成调节参数CP的值是否为0。当CPU21确定图像合成调节参数CP的值为0时(CP=0),换言之,当照相装置1不在图像合成调节模式,操作继续到步骤S55。
当CPU21确定图像合成调节参数CP的值不是0时(CP=1),换言之,当照相装置1在图像合成调节模式,操作继续到步骤S58。
在步骤S55中,CPU21将水平移动量H、竖直移动量V以及转动量α的值设置为0。
在步骤S56中,CPU21解除(中止)警告指示。具体而言,如果执行与不可转动条件相关的第一警告、与在水平方向上不可移动条件相关的第二警告、以及与在竖直方向上不可移动条件相关的第三警告的至少其中之一,换言之,如果指示了包括倾斜的第一边框F1或第二边框F2的突出显示的右边缘等等的第一信息IN1,则CPU21解除(取消)第一边框F1的倾斜状态以及第二边框F2的右边缘等的突出显示状态。
在步骤S57中,在组成成像器(成像传感器)39a1的成像表面的轮廓的矩形的四条边的每一条平行于x方向或者y方向的条件下,CPU21设置可移动平台30a应当移动到的位置S(Sx,Syl,Syr)到x方向和y方向的移动范围的中心(见图16中(6))。
在步骤S58中,CPU21确定快门释放开关13a(图26中的R-SW)是否被设置为ON状态。当CPU21确定快门释放开关13a未被设置为ON状态时,操作继续到步骤S59。否则,操作进行到步骤S61。
在步骤S59中,CPU21根据图像合成调节键16的操作状态来确定水平移动量H、竖直移动量V、以及转动量α的值。
在步骤S60中,根据水平移动量H、竖直移动量V、转动量α等,CPU21计算可移动平台30a应当移动到的位置S(Sx,Syl,Syr)(水平驱动点DPx的移动位置Sx,第一竖直驱动点DPyl的移动位置Syl,第二竖直驱动点DPyr的移动位置Syr)(见图16中的(2))。
下面使用图29和30的流程图解释位置S(Sx,Syl,Syr)的计算的细节。
在步骤S61中,根据现有位置P(pdx,pdyl,pdyr)以及在步骤S57或步骤S60中确定的位置S(Sx,Syl,Syr)的坐标,CPU21计算驱动力D的水平驱动力Dx(水平PWM功率dx)、第一竖直驱动力Dyl(第一竖直PWM功率dyl)和第二竖直驱动力Dyr(第二竖直PWM功率dyr),所述驱动力D移动可移动平台30a到位置S(见图16中(5))。
在步骤S62中,通过驱动器电路29,通过应用水平PWM功率dx驱动水平线圈31a;通过驱动器电路29,通过应用第一竖直PWM功率dyl驱动第一竖直线圈32a1,通过驱动器电路29,通过应用第二竖直PWM功率dyr驱动第二竖直线圈32a2,从而可移动平台30a被移动到位置S(Sx,Syl,Syr)(见图16中的(3))。
步骤S61和S62的过程是自动控制计算,其通过用于执行普通(正常)比例、积分和微分计算的PID自动控制来执行。
在步骤S63中,CPU21计算可移动平台倾斜角度LVL(LVL=Kθ+α,见图16中的(7))。
在步骤S64中,如果在预览图像上未指示第一信息IN1,则CPU21在预览图像上指示第一信息IN1。
如果预览图像上已经指示第一信息IN1,则CPU21保持该指示状态。
此外,如果预览图像上未指示第二信息IN2,则CPU21基于在步骤S53中计算的照相机倾斜角度Kθ等等在预览图像上指示第二信息IN2。
如果预览图像上已经指示了第二信息IN2,则CPU21基于照相机倾斜角度Kθ等等更新预览图像上指示的第二信息IN2。
接下来,使用图27中的流程图解释在图26的步骤S53中执行的照相机倾斜角度Kθ的计算。
当照相机倾斜角度Kθ的计算开始时,在步骤S71中,CPU21确定第二数字加速度Aav的绝对值是否大于或等于第一数字加速度Aah的绝对值。
当CPU21确定第二数字加速度Aav的绝对值大于或等于第一数字加速度Aah的绝对值时,操作进行到步骤S75,否则操作继续到步骤S72。
在步骤S72中,CPU21确定第一数字加速度Aah是否大于或等于0。当CPU21确定第一数字加速度Aah大于或等于0时,操作进行到步骤S74,否则操作继续到步骤S73。
在步骤S73中,CPU21确定照相装置1大约保持在第一竖直定向,以及通过对第二数字加速度Aav的反正弦变换取负值计算照相机倾斜角度Kθ(Kθ=-Sin-1(Aav))。
在步骤S74中,CPU21确定照相装置大约保持在第二竖直定向,以及通过执行第二数字加速度Aav的反正弦变换计算照相机倾斜角度Kθ(Kθ=+Sin-1(Aav))。
在步骤S75中,CPU21确定第二数字加速度Aav是否大于或等于0。当CPU21确定第二数字加速度Aav大于或等于0时,操作进行到步骤S77,否则操作继续到步骤S76。
在步骤S76中,CPU21确定照相装置1大约保持在第二水平定向,以及通过执行第一数字加速度Aah的反正弦变换计算照相机倾斜角度Kθ(Kθ=+Sin-1(Aah))。
在步骤S77中,CPU21确定照相装置大约保持在第一水平定向,以及通过对第一数字加速度Aah的反正弦变换取负值计算照相机倾斜角度Kθ(Kθ=-Sin-1(Aah))。
接下来,使用图28的流程图来解释实施例中的第二计时器中断过程,所述第二计时器中断过程在图25中的步骤S13开始,独立于其他操作以每一个预定时间间隔(1ms)执行。
当第二计时器中断过程开始时,在步骤S81中,CPU21确定向右方向键16a是否被按下以使向右方向开关(图28中的RD-SW)被设置成ON状态。
当CPU21确定向右方向开关被设置为ON状态时,操作继续到步骤S82。否则,操作进行到S83。
在步骤S82中,CPU21逐渐地(incrementally)增加水平移动量H。在实施例中,CPU21将水平移动量H的值加1。之后,操作继续到步骤S83。
在步骤S83中,CPU21确定向左方向键16b是否被按下以使向左方向开关(图28中的LD-SW)被设置为ON状态。
当CPU21确定向左方向开关被设置为ON状态时,操作继续到步骤S84。否则,操作进行到步骤S85。
在步骤S84中,CPU21逐渐地(incrementally)减小水平移动量H。在实施例中,CPU21将水平移动量H的值减1。之后,操作继续到步骤S85。
在步骤S85中,CPU21确定向上方向键16c是否被按下以使向上方向开关(图28中的UD-SW)被设置为ON状态。
当CPU21确定向上方向开关被设置为ON状态时,操作继续到步骤S86。否则,操作进行到步骤S87。
在步骤S86中,CPU21逐渐地增加竖直移动量V。在实施例中,CPU21将竖直移动量V的值加1。之后,操作继续到步骤S87。
在步骤S87中,CPU21确定向下方向键16d是否被按下以使向下方向开关(图28中的DD-SW)被设置为ON状态。
当CPU21确定向下方向开关被设置为ON状态时,操作继续到步骤S88。否则,操作进行到步骤S89。
在步骤S88中,CPU21逐渐地减小竖直移动量V。在实施例中,CPU21将竖直移动量V的值减1。之后,操作继续到步骤S89。
在步骤S89中,CPU21确定左向转动键16f是否被按下以使左向转动开关(图28中的LR-SW)被设置为ON状态。
当CPU21确定左向转动开关被设置为ON状态时,操作继续到步骤S90。否则,操作进行到步骤S91。
在步骤S90中,CPU21逐渐地减小转动量α。在实施例中,CPU21将转动量α的值减1。之后,操作继续到步骤S91。
在步骤S92中,CPU21确定右向转动键16e是否被按下以使右向转动开关(图28中的RR-SW)被设置为ON状态。
当CPU21确定右向转动开关被设置为ON状态时,操作继续到步骤S92。否则,操作结束。
在步骤S92中,CPU21逐渐地增加转动量α。在实施例中,CPU21将转动量α的值加1。之后,操作结束。
接下来,使用图29和30的流程图解释在图26的步骤S60中执行的可移动平台30a应移动到的位置S(水平驱动点DPx的移动位置Sx、第一竖直驱动点DPyl的移动位置Syl、以及第二竖直驱动点DPyr的移动位置Syr)的计算。
当位置S的计算开始时,在步骤S101中,CPU21基于转动量α计算第一移动量Rx和第二移动量Ry。
在步骤S102中,CPU21确定第一移动量Rx的绝对值是否大于第一水平移动量Tsx,或者第二移动量Ry的绝对值是否大于第一竖直移动量Tsy。
当CPU21确定第一移动量Rx的绝对值不大于第一水平移动量Tsx以及第二移动量Ry的绝对值不大于第一竖直移动量Tsy时,CPU21确定,在可移动平台30a根据水平移动量H执行水平位移并且根据竖直移动量V执行竖直位移的条件下,即使可移动平台30a根据转动量α转动,可移动平台30a也不与可移动平台30a的移动范围的边框接触。之后,操作继续到步骤S103。
否则(当步骤S102中的条件为真时),CPU21确定CPU21确定,在可移动平台30a根据水平移动量H执行水平位移并且根据竖直移动量V执行竖直位移的条件下,如果可移动平台30a根据转动量α转动,可移动平台30a的一部分与可移动平台30a的移动范围的边框接触。之后,操作进行到步骤S106。
在步骤S103中,CPU21基于转动量α计算第一水平位移量SHX1、第一竖直位移量SHY1、以及第三竖直位移量SHY3。
在步骤S104中,CPU21基于第一水平移动量Tsx、第一移动量Rx、和水平移动量H计算第二水平移动量Ksx。CPU21基于第一竖直移动量Tsy、第二移动量Ry、以及竖直移动量V计算第二竖直移动量Ksy。
在步骤S105中,CPU21解除(中止)警告指示。具体而言,如果显示了与不可转动条件相关的第一警告,换言之,如果指示了包括倾斜的第一边框F1的第一信息IN1,则CPU21解除(取消)第一边框F1的倾斜状态。
在步骤S106中,CPU21确定转动量α是否小于0。
当CPU21确定转动量α不小于0时,CPU21确定不能沿右旋方向(顺时针方向)转动图像合成,操作继续到步骤S107。
当CPU21确定转动量α小于0时,CPU21确定不能沿左旋方向(逆时针方向)转动图像合成,操作进行到步骤S108。
在步骤S107中,在第一边框F1向右下方倾斜、第一边框F1的矩形的一个或多个角与第二边框F2接触、并且与第一边框F1的角接触的第二边框F2的矩形的边被突出显示的条件下,显示第一信息IN1上的与不可转动条件相关的第一警告。
在步骤S108中,在第一边框F1向左下方倾斜、第一边框F1的矩形的一个或多个角与第二边框F2接触、并且与第一边框F1的角接触的第二边框F2的矩形的边被突出显示(见图10)的条件下,显示第一信息IN1上的与不可转动条件相关的第一警告。
在步骤S109中,CPU21确定水平移动量H的绝对值是否大于第二水平移动量Ksx。
当CPU21确定水平移动量H的绝对值不大于第二水平移动量Ksx时,CPU21确定即使可移动平台30a根据水平移动量H执行水平位移,可移动平台30a也不与可移动平台30a的移动范围的边框接触。之后,操作继续到步骤S110。
否则,CPU21确定如果可移动平台30a根据水平移动量H执行水平位移,可移动平台30a的一部分与可移动平台30a的移动范围的边框接触。之后,操作进行到步骤S113。
在步骤S110中,CPU21将第二水平位移量SHX2的值设置为水平移动量H。
在步骤S111中,CPU21基于第二水平移动量Ksx、水平移动量H、以及第一移动量Rx计算第一水平移动量Tsx。
在步骤S112中,CPU21解除(中止)警告指示。具体而言,如果显示了与在水平方向上不可移动条件相关的第二警告,换言之,如果指示了包括第二边框F2的突出显示的右边缘等等的第一信息IN1,则CPU21解除(取消)第二边框F2的右边缘等等的突出显示状态。
在步骤S113中,CPU21确定水平移动量H是否小于0。
当CPU21确定水平移动量H小于0时,CPU21确定不能在向左方向上执行图像合成的水平位移(从后方观察,不能在向右方向上执行可移动平台30a的移动)。之后,操作继续到步骤S114。
否则,CPU确定不能在向右方向上执行图像合成的水平位移(从后方观察,不能在向左方向上执行可移动平台30a的移动)。之后,操作进行到步骤S115。
在步骤S114中,在第二边框F2的矩形的左边突出显示的条件下,显示第一信息IN1上的与在水平方向上不可移动条件相关的第二警告。
在步骤S115中,在第二边框F2的矩形的右边突出显示的条件下,显示第一信息IN1上的与在水平方向上不可移动条件相关的第二警告。
在步骤S116中,CPU21确定竖直移动量V的绝对值是否大于第二竖直移动量Ksy。
当CPU21确定竖直移动量V的绝对值不大于第二竖直移动量Ksy时,CPU21确定即使可移动平台30a根据竖直移动量V执行竖直位移,可移动平台30a也不与可移动平台30a的移动范围的边框接触。之后,操作继续到步骤S117。
否则,CPU21确定如果可移动平台30a根据竖直移动量V执行竖直位移,可移动平台30a的一部分与可移动平台30a的移动范围的边框接触。之后,操作进行到步骤S120。
在步骤S117中,CPU21将第二竖直位移量SHY2和第四竖直位移量SHY4的值设置为竖直移动量V。
在步骤S118中,CPU21基于第二竖直移动量Ksy、竖直移动量V、以及第二移动量Ry计算第一竖直移动量Tsy。
在步骤S119中,CPU21解除(中止)警告指示。具体而言,如果显示与在任一竖直方向(向上或向下)上不可移动的条件相关的第三警告,换言之,如果指示包括第二边框F2的突出显示的上边缘等等的第一信息IN1,则CPU21解除(取消)第二边框F2的上边缘等等的突出显示状态。
在步骤S120中,CPU21确定竖直移动量V是否小于0。
当CPU21确定竖直移动量V小于0时,CPU21确定不能在向下方向上执行图像合成的竖直位移(不能在向下方向上执行可移动平台30a的移动)。之后,操作继续到步骤S121。
否则,CPU确定不能在向上方向上执行图像合成的竖直位移(不能在向上方向上执行可移动平台30a的移动)。之后,操作进行到步骤S122。
在步骤S121中,在第二边框F2的矩形的下边缘突出显示的条件下,显示第一信息IN1上的与在竖直方向上(向下)不可移动的条件相关的第三警告。
在步骤S122中,在第二边框F2的矩形的上边缘突出显示的条件下,显示第一信息IN1上的与在竖直方向上(向上)不可移动的条件相关的第三警告。
在步骤S123中,CPU21基于第一水平位移量SHX1和第二水平位移量SHX2计算位置S的水平分量(水平驱动点DPx的移动位置Sx)。
CPU21基于第一竖直位移量SHY1和第二竖直位移量SHY2计算位置S的第一竖直分量(第一竖直驱动点DPyl的移动位置Syl)。
CPU21基于第三竖直位移量SHY3和第四竖直位移量SHY4计算位置S的第二竖直分量(第二竖直驱动点DPyr的移动位置Syr)。
注意,第二信息IN2可以通过使用指示条(指示器)来仅仅指示可移动平台倾斜角度LVL,作为与照相机倾斜角度与转动量之和相关的信息(见图31)。
此外,已经解释了霍尔传感器被设置作为磁场变化检测元件执行位置检测。但是,其他检测元件,例如高频载波型磁场传感器的MI(磁阻)传感器,磁谐振型的磁场检测元件,或者MR(磁阻效应)元件也可以被设置为起到位置检测的作用。当使用MI传感器、磁谐振型的磁场检测元件、或者MR元件其中之一时,可以通过检测磁场的变化得到与可移动平台的位置相关的信息,这一点与使用霍尔传感器相似。
此外,可移动平台30a可用作防抖(稳定)装置。
当执行防抖操作时,不考虑使用图像合成调节键16设定的水平移动量H、竖直移动量V、以及转动量α,CPU21基于角速度传感器等等所检测的手抖动量执行可移动平台30a的受控运动。
虽然在此参考附图描述了本发明的实施例,但是很明显,本领域技术人员可以在不背离本发明的范围的情况下得到本发明的许多变化或改变。
Claims (6)
1.一种照相装置,包括:
可移动平台,其具有通过拍摄镜头捕捉光学图像的成像器,并且在与所述拍摄镜头的光轴垂直的xy平面上相对于所述拍摄镜头可移动;
操作单元,其被配置为设置所述可移动平台在所述xy平面上的移动量;以及
控制器,其根据使用所述操作单元设置的所述移动量来执行所述可移动平台的受控运动;
所述操作单元显示与所述可移动平台和所述可移动平台的移动范围之间的位置关系相关的第三信息。
2.根据权利要求1所述的照相装置,其中所述操作单元具有键,每个所述键包括背光灯或灯;以及
其中当所述控制器确定所述可移动平台处于不能根据所述移动量在所述xy平面上移动所述可移动平台的不可移动的状态时,所述键中的无效键的所述背光灯或灯的ON/OFF状态不同于所述键中的有效键的所述背光灯或灯的ON/OFF状态。
3.根据权利要求1所述的照相装置,其中所述操作单元具有键,所述键包含在触摸面板中;以及
其中当所述控制器确定所述可移动平台处于不能根据所述移动量在所述xy平面上移动所述可移动平台的不可移动的状态时,所述键中的无效键的指示状态不同于所述键中的有效键的指示状态。
4.根据权利要求1所述的照相装置,其中所述操作单元具有键;以及
其中当所述键中与不能根据所述移动量在所述xy平面上移动所述可移动平台的不可移动的状态对应的无效键被操作时,以及当所述控制器确定所述可移动平台处于所述不可移动的状态时,所述操作单元发出警告。
5.根据权利要求1所述的照相装置,其中所述操作单元具有被配置为在水平方向上移动所述可移动平台的水平方向键以及被配置为在竖直方向上移动所述可移动平台的竖直方向键。
6.根据权利要求1所述的照相装置,其中所述可移动平台在所述xy平面上可移动并且可转动;以及
其中所述操作单元具有被配置为在水平方向上移动所述可移动平台的水平方向键、被配置为在竖直方向上移动所述可移动平台的竖直方向键、以及被配置为转动所述可移动平台的转动键。
Applications Claiming Priority (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008326471 | 2008-12-22 | ||
JP2008-326573 | 2008-12-22 | ||
JP2008-326471 | 2008-12-22 | ||
JP2008326561 | 2008-12-22 | ||
JP2008-326561 | 2008-12-22 | ||
JP2008326514 | 2008-12-22 | ||
JP2008326573 | 2008-12-22 | ||
JP2008-326514 | 2008-12-22 | ||
CN200910260637.3A CN101762968B (zh) | 2008-12-22 | 2009-12-18 | 照相装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200910260637.3A Division CN101762968B (zh) | 2008-12-22 | 2009-12-18 | 照相装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103698962A true CN103698962A (zh) | 2014-04-02 |
CN103698962B CN103698962B (zh) | 2017-03-01 |
Family
ID=42266271
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310651930.9A Expired - Fee Related CN103698962B (zh) | 2008-12-22 | 2009-12-18 | 照相装置 |
CN200910260637.3A Expired - Fee Related CN101762968B (zh) | 2008-12-22 | 2009-12-18 | 照相装置 |
CN201310651951.0A Expired - Fee Related CN103698963B (zh) | 2008-12-22 | 2009-12-18 | 照相装置 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200910260637.3A Expired - Fee Related CN101762968B (zh) | 2008-12-22 | 2009-12-18 | 照相装置 |
CN201310651951.0A Expired - Fee Related CN103698963B (zh) | 2008-12-22 | 2009-12-18 | 照相装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8150251B2 (zh) |
CN (3) | CN103698962B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ITTO20110410A1 (it) * | 2011-05-10 | 2012-11-11 | Sisvel Technology Srl | Apparato per la cattura di immagini con correzione e gestione delle inclinazioni |
CN104299284B (zh) * | 2014-08-20 | 2017-02-15 | 深圳供电局有限公司 | 一种自动定位抓取设备图像的室内变电站轨道巡检系统、主机及方法 |
CN105791703A (zh) * | 2016-04-29 | 2016-07-20 | 深圳市金立通信设备有限公司 | 一种拍摄方法及终端 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10307323A (ja) * | 1997-05-02 | 1998-11-17 | Fumihiro Inami | 映像撮影機 |
CN1538721A (zh) * | 2003-04-15 | 2004-10-20 | ���ǵ�����ʽ���� | 使用移动终端上的旋转键的装置和方法 |
US20050206736A1 (en) * | 2004-03-19 | 2005-09-22 | Inventec Multimedia & Telecom Corporation | Automatic angle adjusting system |
US20060257128A1 (en) * | 2005-05-16 | 2006-11-16 | Konica Minolta Photo Imaging, Inc. | Image sensing apparatus |
WO2007089410A2 (en) * | 2006-01-27 | 2007-08-09 | Wms Gaming Inc. | Handheld device for wagering games |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6556783B1 (en) * | 1997-01-16 | 2003-04-29 | Janet L. Gelphman | Method and apparatus for three dimensional modeling of an object |
US7356115B2 (en) * | 2002-12-04 | 2008-04-08 | Varian Medical Systems Technology, Inc. | Radiation scanning units including a movable platform |
JP2006071743A (ja) | 2004-08-31 | 2006-03-16 | Olympus Corp | ブレ補正機能を有するカメラシステム及びその補正方法 |
JP2007025616A (ja) | 2005-06-15 | 2007-02-01 | Pentax Corp | ステージ装置及びこのステージ装置を利用したカメラの像振れ補正装置 |
JP4691484B2 (ja) * | 2006-10-10 | 2011-06-01 | Hoya株式会社 | 撮像装置のゴミ取り装置 |
JP5262378B2 (ja) * | 2007-08-09 | 2013-08-14 | ペンタックスリコーイメージング株式会社 | 撮像装置 |
JP5262377B2 (ja) * | 2007-08-09 | 2013-08-14 | ペンタックスリコーイメージング株式会社 | 撮像装置 |
JP5260115B2 (ja) * | 2008-03-31 | 2013-08-14 | ペンタックスリコーイメージング株式会社 | 撮像装置 |
JP5439733B2 (ja) * | 2008-03-31 | 2014-03-12 | リコーイメージング株式会社 | 撮像装置 |
JP2009244492A (ja) * | 2008-03-31 | 2009-10-22 | Hoya Corp | 撮像装置 |
JP5315751B2 (ja) * | 2008-03-31 | 2013-10-16 | ペンタックスリコーイメージング株式会社 | 撮像装置 |
JP5439732B2 (ja) * | 2008-03-31 | 2014-03-12 | リコーイメージング株式会社 | 撮像装置 |
JP5129638B2 (ja) * | 2008-04-02 | 2013-01-30 | ペンタックスリコーイメージング株式会社 | 撮像装置 |
-
2009
- 2009-12-03 US US12/630,095 patent/US8150251B2/en not_active Expired - Fee Related
- 2009-12-18 CN CN201310651930.9A patent/CN103698962B/zh not_active Expired - Fee Related
- 2009-12-18 CN CN200910260637.3A patent/CN101762968B/zh not_active Expired - Fee Related
- 2009-12-18 CN CN201310651951.0A patent/CN103698963B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10307323A (ja) * | 1997-05-02 | 1998-11-17 | Fumihiro Inami | 映像撮影機 |
CN1538721A (zh) * | 2003-04-15 | 2004-10-20 | ���ǵ�����ʽ���� | 使用移动终端上的旋转键的装置和方法 |
US20050206736A1 (en) * | 2004-03-19 | 2005-09-22 | Inventec Multimedia & Telecom Corporation | Automatic angle adjusting system |
US20060257128A1 (en) * | 2005-05-16 | 2006-11-16 | Konica Minolta Photo Imaging, Inc. | Image sensing apparatus |
WO2007089410A2 (en) * | 2006-01-27 | 2007-08-09 | Wms Gaming Inc. | Handheld device for wagering games |
Also Published As
Publication number | Publication date |
---|---|
US8150251B2 (en) | 2012-04-03 |
US20100158492A1 (en) | 2010-06-24 |
CN101762968A (zh) | 2010-06-30 |
CN103698962B (zh) | 2017-03-01 |
CN103698963A (zh) | 2014-04-02 |
CN101762968B (zh) | 2014-09-24 |
CN103698963B (zh) | 2016-09-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101762941B (zh) | 照相装置 | |
JP6838417B2 (ja) | 撮影装置 | |
US10341567B2 (en) | Photographing apparatus | |
CN101551572B (zh) | 照相装置 | |
CN101551575B (zh) | 照相装置 | |
CN101551578B (zh) | 照相装置 | |
CN101551576B (zh) | 照相装置 | |
CN101551577B (zh) | 照相装置 | |
CN101551573B (zh) | 照相装置 | |
JP5439734B2 (ja) | 撮像装置 | |
JP6772726B2 (ja) | 撮像装置及び撮像方法 | |
CN101762942A (zh) | 照相装置 | |
CN101762945B (zh) | 照相装置 | |
CN101762943B (zh) | 照相装置 | |
CN101762944B (zh) | 照相装置 | |
CN101762946B (zh) | 照相装置 | |
CN101762968B (zh) | 照相装置 | |
JP5499658B2 (ja) | 撮像装置 | |
JP2010171942A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170301 Termination date: 20201218 |
|
CF01 | Termination of patent right due to non-payment of annual fee |