CN105379247A - 图像处理装置、显示装置、摄像装置、图像处理方法和程序 - Google Patents

图像处理装置、显示装置、摄像装置、图像处理方法和程序 Download PDF

Info

Publication number
CN105379247A
CN105379247A CN201480002439.6A CN201480002439A CN105379247A CN 105379247 A CN105379247 A CN 105379247A CN 201480002439 A CN201480002439 A CN 201480002439A CN 105379247 A CN105379247 A CN 105379247A
Authority
CN
China
Prior art keywords
image
view data
camera head
visual field
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480002439.6A
Other languages
English (en)
Other versions
CN105379247B (zh
Inventor
工藤泰则
唐泽亮
饭岛恭子
野中修
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aozhixin Digital Technology Co ltd
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN105379247A publication Critical patent/CN105379247A/zh
Application granted granted Critical
Publication of CN105379247B publication Critical patent/CN105379247B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供图像处理装置、显示装置、摄像装置、图像处理方法和程序,在动态图像拍摄时由于平移操作、倾斜操作或其他拍摄画面变更操作而使视野区域急剧变化的情况下,也能够使用户在动态图像的再现时舒适地进行视觉辨认。图像处理部具有:判定部,其根据与从外部输入的时间上前后的图像数据对应的2个图像,判定拍摄时的视野区域是否变化;以及抑制部,其在由所述判定部判定为所述拍摄时的视野区域变化的情况下,生成并输出抑制了所述图像中包含的可视觉辨认的信息量的抑制图像数据。

Description

图像处理装置、显示装置、摄像装置、图像处理方法和程序
技术领域
本发明涉及对图像数据进行图像处理的图像处理装置、具有图像处理装置的显示装置、具有显示装置的摄像装置、图像处理装置进行的图像处理方法和程序。
背景技术
近年来,在数字摄像机等具有手抖校正功能的摄像装置中,在进行动态图像拍摄的情况下,在用户进行了平移操作、倾斜操作或其他拍摄画面变更操作时,与手抖校正的效果重叠,拍摄时的图像多余地摆动。因此,公知有在用户在动态图像拍摄时进行了平移操作、倾斜操作或其他拍摄画面变更操作的情况下禁止或抑制手抖校正功能的技术(参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开平9-289612号公报
发明内容
发明要解决的课题
但是,在上述专利文献1所记载的技术中,由于没有考虑到再现时的图像的变化,所以,在对动态图像拍摄时存在平移操作、倾斜操作或其他拍摄画面变更操作(以下有时简称为平移)的动态图像进行再现的情况下,视野区域急剧变化,繁多的被摄体闪烁。因此,期望在动态图像拍摄时由于平移操作、倾斜操作或其他拍摄画面变更操作而使视野区域急剧变化的情况下也能够使用户舒适地视觉辨认再现时的动态图像的技术。
本发明是鉴于上述情况而完成的,其目的在于,提供如下的图像处理装置、显示装置、摄像装置、图像处理方法和程序:在动态图像拍摄时由于平移操作、倾斜操作或其他拍摄画面变更操作而使视野区域急剧变化的情况下,也能够使用户舒适地视觉辨认再现时的动态图像。
用于解决课题的手段
为了解决上述课题并实现目的,本发明的图像处理装置的特征在于,该图像处理装置具有:判定部,其根据与从外部输入的时间上前后的图像数据对应的2个图像,判定拍摄时的视野区域是否发生了变化;以及抑制部,其在由所述判定部判定为所述拍摄时的视野区域发生了变化的情况下,生成并输出抑制了所述图像中包含的可视觉辨认的信息量的抑制图像数据。
并且,本发明的图像处理装置的特征在于,在上述发明中,所述抑制部抑制信息显示时的数据的空间变化量或时间变化量而生成所述抑制图像数据。
并且,本发明的图像处理装置的特征在于,在上述发明中,所述抑制部通过进行抑制所述图像的对比度、彩度和分辨率中的任意一方以上的图像处理,生成所述抑制图像数据。
并且,本发明的图像处理装置的特征在于,在上述发明中,所述抑制部通过进行提高所述图像数据的曝光值的图像处理,生成所述抑制图像数据。
并且,本发明的图像处理装置的特征在于,在上述发明中,所述抑制部通过进行对与所述图像数据对应的图像的像素数进行间疏的图像处理,生成所述抑制图像数据。
并且,本发明的显示装置的特征在于,该显示装置具有:上述发明的图像处理装置;以及显示部,其能够显示与所述抑制部生成的所述抑制图像数据对应的抑制图像。
并且,本发明的摄像装置的特征在于,该摄像装置具有:上述发明的显示装置;以及摄像部,其对视野区域进行连续摄像而依次生成多个图像数据。
并且,本发明的摄像装置的特征在于,该摄像装置具有:上述发明的显示装置;摄像部,其对视野区域进行连续摄像而依次生成多个图像数据;镜头部,其从所述视野区域会聚光,并且能够进行焦点位置调整;以及摄像元件,其接收所述镜头部会聚的光而生成所述图像数据,所述抑制部调整所述镜头部的焦点位置,使得与所述摄像元件生成的所述图像数据对应的图像的焦点模糊。
并且,本发明的摄像装置的特征在于,在上述发明中,所述摄像装置还具有显示控制部,在由所述判定部判定为所述拍摄时的视野区域发生了变化的情况下,该显示控制部重叠所述抑制图像和所述图像并使所述显示部进行显示。
并且,本发明的摄像装置的特征在于,在上述发明中,所述判定部按照与所述时间上前后的图像数据对应的2个图像的每个像素或将这2个图像分割为多个区域后的每个分割区域计算亮度差,从而判定所述拍摄时的视野区域是否发生了变化。
并且,本发明的图像处理方法是由图像处理装置执行的图像处理方法,其特征在于,该图像处理方法包括以下步骤:判定步骤,根据与从外部输入的时间上前后的图像数据对应的2个图像,判定拍摄时的视野区域是否发生了变化;以及抑制步骤,在所述判定步骤中判定为所述拍摄时的视野区域发生了变化的情况下,生成并输出抑制了所述图像中包含的可视觉辨认的信息量的抑制图像数据。
并且,本发明的程序的特征在于,该程序使图像处理装置执行以下步骤:判定步骤,根据与从外部输入的时间上前后的图像数据对应的2个图像,判定拍摄时的视野区域是否发生了变化;以及抑制步骤,在所述判定步骤中判定为所述拍摄时的视野区域发生了变化的情况下,生成并输出抑制了所述图像中包含的可视觉辨认的信息量的抑制图像数据。
发明效果
根据本发明,发挥在动态图像拍摄时视野区域急剧变化的情况下也能够使用户舒适地进行视觉辨认的效果。
附图说明
图1是示出本发明的实施方式1的摄像装置的功能结构的框图。
图2是示出本发明的实施方式1的摄像装置执行的处理的概要的流程图。
图3是示出用户对本发明的实施方式1的摄像装置进行平移操作时的状况的图。
图4是示意地示出在图3的状况下由摄像装置拍摄的视野区域的图。
图5是示出本发明的实施方式1的摄像装置的判定部判定时的图像的一例的图。
图6是示出本发明的实施方式1的摄像装置的判定部判定时的图像的另一例的图。
图7是示出本发明的实施方式1的摄像装置的显示部显示的图像的一例的图。
图8是示出本发明的实施方式1的摄像装置的显示部显示的图像的另一例的图。
图9是示出本发明的实施方式1的摄像装置的判定部判定时的图像的另一例的图。
图10是示出本发明的实施方式1的摄像装置的显示部显示的图像的另一例的图。
图11是示出本发明的实施方式2的摄像装置的功能结构的框图。
图12是示出本发明的实施方式2的摄像装置执行的处理的概要的流程图。
图13是示意地示出本发明的实施方式2的摄像装置的摄像部生成的紧前图像内的位置与信息量的关系的图。
图14是示意地示出本发明的实施方式2的摄像装置的摄像部生成的最新图像内的位置与信息量的关系的图。
图15是示出虚拟地重合图13(b)的曲线和图14(b)的曲线时的明亮度与位置的关系的图。
图16是示出虚拟地重合图13(b)的曲线和图14(b)的曲线时的明亮度的差分与位置的关系的图。
图17是示意地示出本发明的实施方式2的摄像装置的抑制部进行的校正处理的概要的图。
图18是示出本发明的实施方式2的摄像装置的显示部显示的图像的一例的图。
图19是示出本发明的实施方式2的摄像装置的显示部显示的图像的另一例的图。
图20是示意地示出本发明的实施方式2的变形例的摄像装置的摄像部生成的紧前图像内的位置与信息量的关系的图。
图21是示意地示出本发明的实施方式2的变形例的摄像装置的摄像部生成的最新图像内的位置与信息量的关系的图。
图22是示出虚拟地重合图21(b)的每个区域的明亮度和图22(b)的每个区域的明亮度时的明亮度与位置的关系的图。
图23是示出虚拟地重合图21(b)和图22(b)的每个区域的明亮度时的明亮度与位置的关系的图。
图24是示出本发明的实施方式3的摄像装置的功能结构的框图。
图25是示出本发明的实施方式3的摄像装置执行的处理的概要的流程图。
图26是示出本发明的实施方式3的摄像装置的显示部显示的图像的一例的图。
图27是示出本发明的实施方式3的摄像装置的显示部显示的图像的另一例的图。
图28是示出本发明的实施方式3的摄像装置的显示部显示的图像的另一例的图。
具体实施方式
下面,参照附图对用于实施本发明的方式(以下称为“实施方式”)进行说明。并且,下面,以搭载了本发明的图像处理装置和显示装置的摄像装置为例进行说明。另外,本发明不由以下的实施方式限定。并且,在附图的记载中,对相同部分标注相同标号进行说明。
(实施方式1)
图1是示出本发明的实施方式1的摄像装置的功能结构的框图。图1所示的摄像装置1至少具有摄像部10、显示部11、输入部12、记录部13、记录介质14、控制部15。
摄像部10在控制部15的控制下,对规定的视野区域进行连续摄像,生成时间上连续的多个图像数据(动态图像数据)。摄像部10使用如下部件构成:由多个镜头构成并形成被摄体像的光学系统;对光学系统的光量进行调整的光圈;通过接收光学系统形成的被摄体像并进行光电转换而生成图像数据的CCD(ChargeCoupledDevice)或CMOS(ComplementaryMetalOxideSemiconductor)等摄像元件;将摄像元件的状态设定为曝光状态或遮光状态的快门;对摄像元件生成的图像数据进行规定的模拟处理的信号处理部;通过对从信号处理部输入的模拟图像数据进行A/D转换而生成数字图像数据并将其输出到控制部15的A/D转换部;以及产生摄像元件的摄像定时的定时发生器。
显示部11在控制部15的控制下,显示与摄像部10生成的图像数据对应的图像。这里,图像的显示包括以规定时间(例如3秒)显示与刚刚拍摄之后的图像数据对应的图像的记录浏览显示、显示与记录介质14中记录的图像数据对应的再现图像的再现显示、以及依次显示与摄像部10连续生成的图像数据对应的实时取景图像的实时取景图像显示等。显示部11使用由液晶或有机EL(ElectroLuminescence)构成的显示面板和驱动器等构成。另外,在本实施方式1中,显示部11和后述控制部15作为显示装置发挥功能。
输入部12受理用于指示与摄像装置1有关的各种动作的指示信号的输入。输入部12使用将摄像装置1的电源状态切换为接通状态或断开状态的电源开关、受理用于指示摄像装置1进行静态图像拍摄的释放信号的输入的释放开关、以及受理用于指示摄像装置1进行动态图像拍摄的指示信号的输入的动态图像开关等构成。
记录部13记录经由控制部15输入的图像数据、摄像装置1的处理中的信息、用于使摄像装置1进行动作的各种程序、本实施方式1的程序以及程序的执行中使用的各种数据等。记录部13使用SDRAM(SynchronousDynamicRandomAccessMemory:同步动态随机存取存储器)和闪存等构成。
记录介质14记录经由控制部15输入的图像数据。记录介质14使用从摄像装置1的外部安装的存储卡等构成,经由未图示的存储器I/F以拆装自如的方式安装在摄像装置1上。记录介质14写入由后述控制部15实施了处理后的图像数据或动态图像数据。并且,记录介质14读出由控制部15记录的图像数据或动态图像数据。
控制部15针对构成摄像装置1的各部进行指示和数据的转送等,对摄像装置1的动作进行总括控制。控制部15使用CPU(CentralProcessingUnit)构成。另外,在本实施方式1中,控制部15作为图像处理装置发挥功能。
这里,对控制部15的详细结构进行说明。控制部15具有判定部151、抑制部152、显示控制部153。
判定部151判定摄像部10的视野区域是否发生了变化。具体而言,判定部151根据与摄像部10生成的时间上前后的图像数据对应的2个图像的一致度,判定摄像部10的视野区域是否变化。例如,判定部151通过对与摄像部10生成的时间上前后的图像数据对应的2个图像进行运动判定,判定摄像装置1中产生的运动、例如用户进行的平移操作、倾斜操作或其他拍摄画面变更操作。
在由判定部151判定为摄像部10的视野区域发生了变化的情况下,抑制部152生成抑制了与摄像部10生成的图像数据对应的图像中包含的视觉上可视觉辨认的信息量的抑制图像数据,并将其输出到显示控制部153或外部设备(例如图像显示装置等)。具体而言,抑制部152进行作为摄像部10生成的图像中包含的视觉上可视觉辨认的拍摄信息而降低对比度、彩度、分辨率和像素数中的任意一方以上的图像处理,生成抑制图像数据。当然,由于视觉辨认可能性可能受到肉眼的使用方式等影响,所以,当使用其他表现时,抑制部152也可以进行抑制信息显示时的数据的空间变化量或时间变化量(当空间变化较小时,该时间变化量与其联动而减小)、或记录时的数据量的处理。
并且,抑制部152也可以减少像素数或减少像素间的数据变化,通过减少各像素的信息量的变化的处理,也能够得到同样的效果。关于抑制部152,例如,当在明亮的室外等观看液晶等发光型显示元件时,外部光重叠而无法良好地观看,但是,即使这样使整体具有偏移(offset)而变得明亮,图像的变化也较少,不容易看到闪烁,但是,当然,即使这样与偏移量对应地增加图像的数据,也能够得到本发明的目标结果。并且,变化较少相当于在进行了压缩时使数据量减少的处理,所以,成为在记录时间和容量上有利的方向。在生理学的领域中,将在眼球移动迅速(saccade:扫视)时即使网膜上的像的运动剧烈也不会抑制知觉的效果称为扫视抑制,本发明的想法具有在设备侧对该抑制效果进行辅助的一面。当然,即使不伴随眼球移动,也存在导致不舒适感、违和感、品位等的图像表现,这也在本发明中得到解决。当根据肉眼的反应速度来设定该变化量时,只要能够利用1/10秒左右的差异中的图像变化进行判定即可,在1/30秒或1/60秒的帧率的情况下,只要能够利用几个帧之间的变化进行检测即可。
显示控制部153使显示部11显示与摄像部10生成的图像数据对应的图像。并且,在判定部151判定为摄像部10的视野区域变化的情况下,显示控制部153使显示部11显示与抑制部152生成的抑制图像数据对应的抑制图像。进而,显示控制部153使显示部11显示与摄像装置1有关的操作信息。另外,在本实施方式1中,显示控制部153作为向显示部11输出抑制部152生成的抑制图像数据的输出部发挥功能。
对具有以上结构的摄像装置1执行的处理进行说明。图2是示出摄像装置1执行的处理的概要的流程图。
如图2所示,首先,对摄像装置1设定为拍摄模式的情况(步骤S101:是)进行说明。该情况下,控制部15使摄像部10执行摄像(步骤S102)。
接着,判定部151判定与由摄像部10生成的时间上前后的图像数据对应的2个图像(以下简称为“时间上前后的2个图像”)的变化量是否为第1阈值以上(步骤S103)。该变化量可以是图像的明亮度的分布或明亮度本身的变化这样的判定,也可以如运动矢量那样是对如何变化进行分析这样的判定,无论哪种情况下,均假设在变化较大时阈值提高。
图3是示出用户对摄像装置1进行平移操作时的状况的图。图4是示意地示出在图3的状况下由摄像装置1摄像的视野区域的图。另外,在图3和图4中,示出通过用户的平移操作而使摄像装置1向大致水平方向(箭头a1)移动、从而使摄像装置1从包含被摄体O1的视野区域到包含被摄体O4的视野区域进行连续摄像时的状况。并且,图4的图像F1~F4相当于通过摄像装置1的移动而摄像的视野区域的图像。进而,在图3中,对用户进行使摄像装置1以一定速度向大致水平方向移动的平移操作的情况进行说明。
如图3和图4所示,在用户对摄像装置1进行了平移操作的情况下,判定部151判定摄像部10生成的时间上前后的2个图像的变化量是否是第1阈值。具体而言,作为2个图像的变化量,判定部151按照每个像素进行图案匹配,计算图像信息例如明亮度信息(亮度或色相)的变化量,判定该计算出的结果是否为第1阈值以上。更具体而言,如图5(a)和图5(b)所示,判定部151按照每个像素计算摄像部10生成的时间上前后的2个紧前图像LV1(相当于图4的图像F1的视野区域)和最新图像LV2a(相当于图4的图像F2的视野区域)的一致度,判定最新图像LV2a相对于紧前图像LV1的变化量是否为第1阈值以上、例如是否为摄像部10的视野区域中的3/4以上。另外,在图5中,作为第1阈值,设为摄像部10的视野区域中的3/4以上,但是,例如也可以是摄像部10的视野区域中的1/2以上,还可以是2/3以上,能够适当变更。当然,能够根据拍摄场景例如夜景、肖像、风景和被摄体来变更第1阈值。并且,还可以根据鉴赏时的环境而使第1阈值变化。即,在明亮时,能够降低显示图像的对比度来进行观看,但是,在暗黑时,对比度清晰,有时反而感到不舒服。即,这种情况下,可以假设已假设的显示再现环境来进行变更。
在步骤S103中,在判定部151判定为由摄像部10生成的时间上前后的2个图像的变化量为第1阈值以上的情况下(步骤S103:是),摄像装置1转移到后述步骤S104。
接着,判定部151判定由摄像部10生成的时间上前后的2个图像的变化量是否为第2阈值以上(步骤S104)。具体而言,作为2个图像的变化量,判定部151按照每个像素或按每个规定区域进行分割后的每个分割区域(每个块)计算图像信息的差或变化量,判定该计算出的结果是否为第2阈值以上。更具体而言,如图6(a)和图6(b)所示,判定部151按照每个像素或每个区域计算摄像部10生成的时间上前后的2个紧前图像LV1和最新图像LV2b(相当于图4的图像F3的视野区域)的一致度,判定最新图像LV2b相对于紧前图像LV1的变化量是否为第2阈值以上、例如是否为摄像部10的视野区域中的4/5以上。另外,在图6中,第2阈值设定为大于第1阈值即可。并且,判定部151还将在摄像部10生成的时间上前后的2个图像内不存在紧前图像与最新图像重叠的视野区域的情况判定为第2阈值以上。该第2阈值也可以在拍摄环境下变化,还可以根据再现鉴赏时的环境而使该第2阈值变化。即,在明亮时,能够降低显示图像的对比度来进行观看,但是,在暗黑时,对比度清晰,有时反而感到不舒服。即,这种情况下,可以假设已假设的显示再现环境来变更阈值。
在步骤S104中,在判定部151判定为由摄像部10生成的时间上前后的2个图像的变化量为第2阈值以上的情况下(步骤S104:是),摄像装置1转移到步骤S105。
接着,抑制部152进行降低与摄像部10生成的最新图像数据对应的最新图像的对比度的图像处理,生成抑制了视觉上可掌握的信息量的抑制图像数据(步骤S105)。另外,抑制部152也可以进行代替对比度而降低彩度或明亮度(亮度或增益)的图像处理。进而,抑制部152也可以进行组合了对比度、彩度和明亮度中的任意2个以上的图像处理,生成抑制了信息量的抑制图像数据。并且,即使缩小图像、或使周边部模糊、或设置框,画面内的图像的变化也较小。如上所述,即使整体具有偏移信号,图像变化也较小,成为消除眼睛疲劳和违和感的方向。这种画质调节可以在拍摄时进行,但是也可以在再现时进行,所以,可以仅给出图像变化抑制信号。
接着,显示控制部153使显示部11显示与由抑制部152生成的降低了对比度的抑制图像数据对应的实时取景图像(步骤S106)。具体而言,如图7所示,显示控制部153使显示部11显示与由抑制部152生成的降低了对比度的抑制图像数据对应的实时取景图像LV10。由此,在用户对摄像装置1进行了平移操作的情况下,降低从当前被摄体O1到期望被摄体O4所映出的繁多的被摄体O2、O3的对比度,在平移操作时的图像内抑制了视觉上可视觉辨认的信息量,所以,即使在动态图像拍摄时或动态图像再现时视野区域急剧变化的情况下,也能够使用户舒适地进行视觉辨认。另外,在图7中,利用阴影来表现对比度的降低。在步骤S106之后,摄像装置1转移到后述步骤S110。
在步骤S104中,在判定部151判定为由摄像部10生成的时间上前后的2个图像的变化量不是第2阈值以上的情况下(步骤S104:否),摄像装置1转移到步骤S107。
接着,抑制部152进行降低与摄像部10生成的紧前图像数据对应的紧前图像的分辨率的图像处理,生成抑制图像数据(步骤S107)。另外,抑制部152也可以代替与摄像部10生成的紧前图像数据对应的紧前图像的分辨率而对压缩率或像素进行间疏,从而抑制抑制图像数据。
然后,显示控制部153使显示部11显示将与由抑制部152生成的降低了分辨率的抑制图像数据对应的紧前图像重叠在最新图像上的实时取景图像(步骤S108)。具体而言,如图8所示,显示控制部153使显示部11显示将与由抑制部152生成的降低了分辨率的抑制图像数据对应的紧前图像重叠在最新图像上的实时取景图像LV11。由此,在用户对摄像装置1进行了平移操作的情况下,使从被摄体O1到期望被摄体O4所摄像的紧前图像依次成为残像,在平移操作时的图像内抑制视觉上可视觉辨认的信息量,所以,即使在动态图像拍摄时视野区域变化时,也能够在动态图像的再现时使用户舒适地进行视觉辨认。另外,在图8中利用虚线表现残像。在步骤S108之后,摄像装置1转移到步骤S110。
在步骤S103中,在判定部151判定为由摄像部10生成的时间上前后的2个图像的变化量不是第1阈值以上的情况下(步骤S103:否),摄像装置1转移到步骤S109。例如,在图9(a)和图9(b)所示的情况下,判定部151计算摄像部10生成的时间上前后的2个紧前图像LV1和最新图像LV2c(相当于图4的图像F1的视野区域)的一致度,判定为最新图像LV2c相对于紧前图像LV1的变化量不是第1阈值以上。具体而言,如图9(a)和图9(b)所示,在摄像部10的视野区域大致没有变化的情况下,判定为时间上前后的2个图像的变化量不是第1阈值以上。
接着,显示控制部153使显示部11显示与摄像部10生成的最新图像数据对应的实时取景图像(步骤S109)。具体而言,如图10所示,显示控制部153使显示部11显示与摄像部10生成的最新图像数据对应的实时取景图像LV12。在步骤S109之后,摄像装置1转移到步骤S110。
在步骤S106、步骤S108和步骤S109之后,在经由输入部12输入了用于指示静态图像拍摄的指示信号的情况下(步骤S110:是),控制部15使摄像部10执行拍摄(步骤S111),将摄像部10生成的图像数据记录在记录介质14中(步骤S112)。
接着,在经由输入部12断开了摄像装置1的电源的情况下(步骤S113:是),摄像装置1结束本处理。与此相对,在未经由输入部12断开摄像装置1的电源的情况下(步骤S113:否),摄像装置1返回步骤S101。
在步骤S110中,在未经由输入部12输入用于指示静态图像拍摄的指示信号的情况下(步骤S110:否),摄像装置1转移到步骤S114。
接着,在摄像装置1处于动态图像拍摄中的情况下(步骤S114:是),控制部15将与显示部11显示的显示图像对应的图像数据记录在记录介质14的动态图像文件中(步骤S115)。
然后,在经由输入部12输入了用于结束动态图像拍摄的指示信号的情况下(步骤S116:是),控制部15执行结束摄像装置1的动态图像拍摄的动态图像结束处理(步骤S117)。例如,控制部15针对记录介质14的动态图像文件记录表示动态图像时间和数据量的信息作为中间信息。在步骤S117之后,摄像装置1转移到步骤S113。
在步骤S116中,在未经由输入部12输入用于结束动态图像拍摄的指示信号的情况下(步骤S116:否),摄像装置1转移到步骤S113。
在步骤S114中,在摄像装置1未处于动态图像拍摄中的情况下(步骤S114:否),摄像装置1转移到步骤S118。
接着,在经由输入部12输入了用于开始动态图像拍摄的指示信号的情况下(步骤S118:是),控制部15开始进行摄像装置1的动态图像拍摄(步骤S119)。具体而言,控制部15在记录介质14中生成用于沿着时间序列记录摄像部10依次生成的图像数据的动态图像文件。在步骤S119之后,摄像装置1转移到步骤S113。
在步骤S118中,在未经由输入部12输入用于开始动态图像拍摄的指示信号的情况下(步骤S118:否),摄像装置1转移到步骤S113。
接着,对在步骤S101中摄像装置1未设定为拍摄模式的情况(步骤S101:否)进行说明。该情况下,在摄像装置1设定为再现模式时(步骤S120:是),显示控制部153使显示部11一览显示记录介质14中记录的图像文件或动态图像文件各自的标题中记录的缩略图像(步骤S121)。
接着,在经由输入部12从显示部11显示的图像一览中指定了要再现的图像文件的情况下(步骤S122:是),摄像装置1转移到步骤S123。与此相对,在未经由输入部12从显示部11显示的图像一览中指定要再现的图像文件的情况下(步骤S122:否),摄像装置1返回步骤S121。
在步骤S123中,在经由输入部12指定的图像文件为动态图像文件的情况下(步骤S123:是),显示控制部153开始进行与动态图像文件中记录的动态图像数据对应的动态图像的再现显示(步骤S124)。
接着,判定部151判定时间上前后的2个图像的变化量是否为第3阈值以上(步骤S125)。具体而言,判定部151判定使显示部11显示的紧前图像与最新图像的变化量是否为第3阈值以上。在判定部151判定为时间上前后的2个图像的变化量为第3阈值以上的情况下(步骤S125:是),摄像装置1转移到步骤S126。与此相对,在判定部151判定为时间上前后的2个图像的变化量不是第3阈值以上的情况下(步骤S125:否),摄像装置1转移到后述步骤S133。
在步骤S126中,在从显示部11显示的当前图像起的规定时间内存在图像的变化量稳定的稳定图像的情况下(步骤S126:是),抑制部152执行降低稳定图像的分辨率的抑制处理(步骤S127)。
接着,显示控制部153将由抑制部152降低了分辨率的稳定图像重叠在当前图像上并使显示部11进行显示(步骤S128)。由此,能够通过预告效果对用户提示安心感。
然后,在动态图像结束的情况下(步骤S129:是),摄像装置1转移到后述步骤S130。与此相对,在动态图像结束的情况下(步骤S129:否),摄像装置1返回步骤S125。
在步骤S130中,在经由输入部12切换了要再现的图像的情况下(步骤S130:是),摄像装置1返回步骤S121。与此相对,在未经由输入部12切换要再现的图像的情况下(步骤S130:否),摄像装置1转移到步骤S113。
在步骤S126中,在从显示部11显示的当前图像起的规定时间内不存在图像的变化量稳定的稳定图像的情况下(步骤S126:否),摄像装置1转移到步骤S131。
接着,抑制部152执行降低紧前图像的分辨率的抑制处理(步骤S131)。
然后,显示控制部153将由抑制部152降低了分辨率的紧前图像重叠在当前图像上并使显示部11进行显示(步骤S132)。在步骤S132之后,摄像装置1转移到步骤S129。
在步骤S133中,显示控制部153使显示部11显示与图像数据对应的图像(步骤S133)。在步骤S133之后,摄像装置1转移到步骤S129。
在步骤S123中,在经由输入部12指定的图像文件不是动态图像文件的情况下(步骤S123:否),显示控制部153使显示部11在整个画面中显示与图像数据对应的图像(步骤S134)。在步骤S134之后,摄像装置1转移到步骤S130。
在步骤S120中,在摄像装置1未设定为再现模式的情况下(步骤S120:否),摄像装置1转移到步骤S113。
根据以上说明的本发明的实施方式1,即使在动态图像拍摄时由于平移操作、倾斜操作或其他拍摄画面变更操作而使视野区域急剧变化的情况下,也能够使用户在动态图像的再现时舒适地进行视觉辨认。
并且,根据本发明的实施方式1,在判定部151判定为摄像部10的视野区域变化的情况下,抑制部152生成抑制了与由摄像部10生成的图像数据对应的图像中包含的视觉上可视觉辨认的信息量的抑制图像数据,显示控制部153使显示部11显示与由抑制部152生成的抑制图像数据对应的实时取景图像。由此,由于减小与紧前图像之间的变化量而在显示部11中显示帧间变化较大的最新图像,所以,能够在动态图像拍摄时或动态图像的再现时使用户舒适地进行视觉辨认。不需要统一进行这种抑制可视觉辨认的信息量的处理(即,抑制信息显示时的数据的空间变化量或时间变化量的处理),可以在平移开始时和中途改变处理,也可以根据平移时的图像变化的剧烈程度来改变处理。
另外,在上述本发明的实施方式1中,应用于通过用户进行了使摄像装置1向大致水平方向移动的平移操作的情况,但是,也可以应用于通过用户进行了使摄像装置1向大致垂直方向移动的倾斜操作的情况以及其他拍摄画面变更操作。
并且,在本发明的实施方式1中,在实时取景图像的显示时,抑制部152减少与由摄像部10生成的图像数据对应的图像中包含的视觉上可视觉辨认的信息量,但是,例如,也可以仅针对记录介质14中记录的图像数据抑制信息量。
并且,在本发明的实施方式1中,判定部151使用时间上前后的2个图像来判定摄像部10的视野区域是否变化,但是,不是必须在时间上相邻,也可以按照规定的帧间隔、例如摄像部10生成的图像数据的奇数帧或偶数帧来判定摄像部10的视野区域是否变化。
(实施方式2)
接着,对本发明的实施方式2进行说明。本实施方式2的摄像装置与上述实施方式1的摄像装置1的结构不同,而且,执行的处理不同。因此,下面,在对本实施方式2的摄像装置的结构进行说明后,对本实施方式2的摄像装置执行的处理进行说明。另外,对与上述实施方式1的摄像装置相同的结构标注相同标号并省略说明。但是,之前记载的事项中的与此处相对应的块、功能部分进行同样动作而只是省略重复说明,当然能够直接应用。
图11是示出本发明的实施方式2的摄像装置的功能结构的框图。图11所示的摄像装置1a具有摄像部10a、显示部11、输入部12、记录部13、记录介质14、手抖校正部16、运动检测部17、触摸面板18、通信部19、控制部20。
摄像部10a具有使用多个镜头构成并从规定视野区域会聚光而形成被摄体的被摄体像的镜头部101、以及接收镜头部101形成的被摄体像并生成被摄体的图像数据的摄像元件102。摄像元件102连续生成被摄体的图像数据并将其输出到控制部20。
手抖校正部16对摄像装置1a中产生的手抖进行校正。具体而言,手抖校正部16通过在与摄像部10a的光轴L正交的垂直面内使摄像元件102移动、并且在与光轴L正交的水平面内使摄像元件102移动,对摄像装置1a中产生的手抖进行校正(主体内手抖校正)。手抖校正部16使用多个超声波致动器和致动器驱动部构成。手抖校正部16在控制部20的控制下,使摄像元件102在垂直面内和水平面内移动。另外,手抖校正部16通过代替摄像元件102而使镜头部101在垂直面内和水平面内移动,也可以对摄像装置1a中产生的手抖进行校正(镜头内手抖校正)。
运动检测部17检测摄像装置1a中产生的运动,将该检测结果输出到控制部20。具体而言,运动检测部17分别检测摄像装置1a中产生的加速度和角速度,将该检测结果输出到控制部20。运动检测部17使用加速度传感器和陀螺仪传感器等构成。
触摸面板18重叠设置在显示部11的显示画面上。触摸面板18检测来自外部的物体的触摸,将与该检测到的触摸位置对应的位置信号输出到控制部20。并且,触摸面板18也可以检测用户根据显示部11中显示的信息例如图标图像或缩略图像进行触摸的位置,根据该检测到的触摸位置受理用于指示摄像装置1a进行的动作的指示信号以及选择图像的选择信号的输入。一般情况下,作为触摸面板18,存在电阻膜方式、静电容量方式和光学方式等。在本实施方式2中,可以应用任意一种方式的触摸面板。
通信部19按照规定的无线通信规格与外部设备进行无线通信,发送或接收包含图像数据的图像文件。这里,规定的无线通信规格是IEEE802.11b和IEEE802.11n等。另外,在本实施方式2中,能够应用任意的无线通信规格。并且,通信部19使用用于经由网络与外部设备进行图像文件或内容数据等各种信息的双向通信的通信器件构成。通信器件由在与其他设备之间收发电波信号的天线、以及对天线接收到的信号进行解调处理并且对要发送的信号进行调制处理的收发电路等构成。并且,在摄像装置1a的起动时,通信部19定期发送包含用于报知其存在的识别信息(设备ID)的通信信号。另外,通信部19也可以设置在从摄像装置1a的外部安装的存储卡等记录介质14中。进而,通信部19也可以设置在经由热靴安装在摄像装置1a上的配件中。
控制部20进行与构成摄像装置1a的各部对应的指示和数据的转送等,对摄像装置1a的动作进行总括控制。控制部20使用CPU等构成。另外,在本实施方式2中,控制部20作为图像处理装置发挥功能。
这里,对控制部20的详细结构进行说明。控制部20具有判定部201、抑制部202、显示控制部203。
判定部201通过重合与摄像部10a生成的时间上前后的图像数据对应的紧前面的紧前图像和最新的最新图像并按照每个像素判定差,判定摄像部10a的视野区域是否发生了变化。具体而言,判定部201对紧前图像和最新图像各自的图像中央部的像素值的差进行相加,并且对紧前图像和最新图像各自的图像周边部的像素值的差进行相加,在对图像中央部和图像周边部各自的差进行相加而得到的值为规定阈值以上的情况下,判定为摄像部10a的视野区域发生了变化。这里,图像中央部是包含图像的中心的2/3的区域。并且,图像周边部是除了图像中央部以外的区域。
在由判定部201判定为摄像部10a的视野区域变化的情况下,抑制部202生成抑制了与摄像部10a生成的图像数据对应的图像中包含的视觉上可视觉辨认的信息量的抑制图像数据。具体而言,抑制部202进行作为摄像部10a生成的图像中包含的视觉上可视觉辨认的拍摄信息而降低对比度、彩度、分辨率和像素数中的任意一方以上的图像处理,生成抑制图像数据。
显示控制部203使显示部11显示与摄像部10a生成的图像数据对应的图像。并且,在判定部201判定为摄像部10a的视野区域发生了变化的情况下,显示控制部203使显示部11显示与抑制部202生成的抑制图像数据对应的抑制图像。进而,显示控制部203使显示部11显示与摄像装置1a有关的操作信息。另外,在本实施方式2中,显示控制部203作为输出部发挥功能。
对具有以上结构的摄像装置1a执行的处理进行说明。图12是示出摄像装置1a执行的处理的概要的流程图。
在图12中,首先,对摄像装置1a设定为拍摄模式的情况(步骤S201:是)进行说明。该情况下,控制部20使摄像元件102执行摄像(步骤S202)。
接着,判定部201开始进行重合时间上前后的紧前面的紧前图像和最新的最新图像并按照每个像素判定差的判定处理(步骤S203),计算对紧前图像和最新图像各自的图像中央部中的像素的差进行相加而得到的值(以下将对图像中央部中的像素的差进行相加而得到的值称为“C”。)(步骤S204),并且计算对紧前图像和最新图像各自的图像周边部的像素的差进行相加而得到的值(以下将对图像周边部的像素的差进行相加而得到的值称为“P”)(步骤S205)。另外,图像中央部是包含图像的中心的矩形状的区域。并且,图像周边部是图像内除了图像中央部以外的区域,是从图像内的有效像素区域的图像中央部到外缘的区域。并且,判定部201不需要使用图像中央部和图像周边部各自的全部像素进行判定,也可以按照规定间隔对像素进行间疏而计算差。具体而言,判定部201可以计算对图像中央部和图像周边部各自的规定的像素列例如奇数列或偶数列的像素的差进行相加而得到的值。
图13是示意地示出紧前图像内的位置与信息量的关系的图。图14是示意地示出最新图像内的位置与信息量的关系的图。在图13和图14中,以直线L1上的作为信息量的明亮度为例进行说明。并且,在图13(b)和图14(b)中,横轴示出各图像的位置,纵轴示出明亮度。
如图13(a)所示,在紧前图像LV20中,横穿被摄体O1的面部的直线L1的明亮度成为图13(b)所示的曲线Im1。在从图13(a)所示的状态起由用户针对摄像装置1a在水平方向上进行了平移操作的情况下,能够得到图14所示的最新图像LV21。此时,最新图像LV21中的横穿被摄体O1的面部的直线L1的明亮度成为图14(b)所示的曲线Im2。判定部201对图13(b)的曲线Im1和图14(b)的曲线Im2进行比较(参照图15)。
图15是示出虚拟地重合图13(b)的曲线Im1和图14(b)的曲线Im2时的明亮度与位置的关系的图。图16是示出图13(b)的曲线Im1和图14(b)的曲线Im2的明亮度的差分与位置的关系的图。
如图15所示,用户仅观看时间上前后的紧前图像和最新图像这样的2帧图像的一部分存在差异D的图像,也会感到紧张。进而,在动态图像中存在平移操作的情况下,根据平移操作而使摄像装置1a的视野区域变化,而且使颜色成分和被摄体变化,所以用户感到不快。具体而言,如图16所示的曲线Im12那样,认为振幅越大则从紧前图像到最新图像的图像变化越大。因此,判定部201通过计算曲线Im1和曲线Im2各自的差分,判定最新图像L21相对于紧前图像L20的图像变化。即,判定部201通过对紧前图像和最新图像各自的像素值的绝对值进行相加,使最新图像L21相对于紧前图像L20的图像变化的变化量数值化。
返回图12,继续进行步骤S206以后的说明。
在步骤S206中,判定部201判定对像素中央部中的像素的差进行相加而得到的值C的绝对值|C|与对图像周边部中的像素的差进行相加而得到的值P的绝对值|P|之和即|C|+|P|是否为规定阈值以上。在判定部201判定为和|C|+|P|为规定阈值以上的情况下(步骤S206:是),摄像装置1a转移到后述步骤S207。与此相对,在判定部201判定为和|C|+|P|的值不是规定阈值以上的情况下(步骤S206:否),摄像装置1a转移到后述步骤S212。
在步骤S207中,判定部201判定C除以图像中央部的像素数而得到的平均值CA是否为P除以图像周边部的像素数而得到的平均值PA以上。在判定部201判定为C的平均值CA为P的平均值PA以上的情况下(步骤S207:是),摄像装置1a转移到后述步骤S208。与此相对,在判定部201判定为C的平均值CA不是P的平均值PA以上的情况下(步骤S207:否),摄像装置1a转移到后述步骤S210。
在步骤S208中,抑制部202进行降低与摄像部10a生成的最新图像数据对应的最新图像中的图像周边部的对比度的图像处理,生成抑制图像数据。具体而言,如图17所示,进行降低最新图像的对比度的图像处理,减小振幅以使得最新图像的明亮度从曲线Im2变成曲线Im3。
接着,显示控制部203使显示部11显示与由抑制部202生成的降低了对比度的抑制图像数据对应的实时取景图像(步骤S209)。具体而言,如图18所示,显示控制部203使显示部11显示与由抑制部202生成的降低了对比度的抑制图像数据对应的实时取景图像LV30。由此,在用户对摄像装置1a进行了平移操作的情况下,降低从当前被摄体O1到期望被摄体O4所映出的繁多的被摄体O2、O3的对比度,在平移操作时的图像内抑制视觉上可视觉辨认的信息量,所以,即使在动态图像拍摄时或动态图像再现时视野区域急剧变化时,也能够使用户舒适地进行视觉辨认。另外,在图18中,利用虚线和阴影来表现对比度的降低。在步骤S209之后,摄像装置1a转移到后述步骤S213。
在步骤S210中,抑制部202进行降低与摄像部10a生成的最新图像数据对应的最新图像的彩度和对比度的抑制处理,生成抑制图像数据。
接着,显示控制部203使显示部11显示与由抑制部202生成的降低了彩度和对比度的抑制图像数据对应的实时取景图像(步骤S211)。具体而言,如图19所示,显示控制部203使显示部11显示与由抑制部202生成的降低了彩度和对比度的抑制图像数据对应的实时取景图像LV31。由此,在用户对摄像装置1a进行了平移操作的情况下,降低从当前被摄体O1到期望被摄体O4所映出的繁多的被摄体O2、O3的对比度,在平移操作时的图像内抑制视觉上可视觉辨认的信息量,所以,即使在动态图像拍摄时或动态图像再现时视野区域急剧变化时,也能够使用户舒适地进行视觉辨认。另外,在图19中,利用阴影和虚线来表现彩度和对比度的降低。在步骤S211之后,摄像装置1a转移到后述步骤S213。
在步骤S212中,显示控制部203使显示部11显示与摄像部10a生成的图像数据对应的实时取景图像。在步骤S212之后,摄像装置1a转移到后述步骤S213。
步骤S213~步骤S222分别对应于上述图2的步骤S110~步骤S119。
在步骤S201中,在摄像装置1a未设定为拍摄模式(步骤S201:否)而设定为再现模式的情况下(步骤S223:是),摄像装置1a执行对与记录介质14中记录的图像数据对应的图像进行再现的再现显示处理(步骤S224)。在步骤S224之后,摄像装置1a转移到步骤S216。
在步骤S201中,在摄像装置1a未设定为拍摄模式(步骤S201:否)且未设定为再现模式的情况下(步骤S223:否),摄像装置1a转移到步骤S216。
根据以上说明的本发明的实施方式2,即使在动态图像拍摄时由于平移操作或倾斜操作而使视野区域急剧变化的情况下,也能够使用户舒适地进行视觉辨认。
另外,在上述本发明的实施方式2中,应用于通过用户进行了使摄像装置1a向大致水平方向移动的平移操作的情况,但是,也可以应用于通过用户进行了使摄像装置1a向大致垂直方向移动的倾斜操作、倾斜方向的视野角度变更的情况。当然,在迅速的变焦操作等画面内信息急剧变化的操作中也能够应用这些想法,这种效果在之前的实施方式中也是同样的。
并且,在本发明的实施方式2中,判定部201使用时间上前后的2个图像来判定摄像部10a的视野区域是否变化,但是,不是必须在时间上相邻,也可以按照规定的帧间隔、例如摄像部10a生成的图像数据的奇数帧或偶数帧来判定摄像部10的视野区域是否变化。这里,利用设置通信部等的实施例进行了说明,但是,也可以能够通过网络进行通信,以使得远程的视听者能够看到拍摄中的图像和所拍摄的图像。该情况下,必须假设利用室内的TV等进行视听的情况,但是,当在室内一边观看对比度较高的影像一边进行平移时,与室外的手持小型移动设备进行观看的情况相比,在生理上不容易承受,所以,也可以根据发送目的地来变更阈值等。
(实施方式2的变形例)
接着,对本实施方式2的变形例进行说明。在上述实施方式2中,判定部201按照时间上前后的紧前图像和最新图像各自的每个像素对明亮度进行比较,但是,在本实施方式2的变形例中,按照规定区域分别对时间上前后的紧前图像和最新图像进行分割,按照该分割后的每个区域进行明亮度的比较。
图20是示意地示出紧前图像内的位置与信息量的关系的图。图21是示意地示出最新图像内的位置与信息量的关系的图。图22是示出虚拟地重叠图20(b)的每个区域的明亮度和图21(b)的每个区域的明亮度时的明亮度与位置的关系的图。图23是示出虚拟地重合图21(b)的每个区域的明亮度和图22(b)的每个区域的明亮度时的明亮度的差(亮度差)与位置的关系的图。在图20~图23中,以直线L2上的作为信息量的明亮度为例进行说明。并且,在图20(b)、图21(b)、图22和图23中,横轴示出各区域的位置,纵轴示出明亮度。
如图20(b)、图21(b)和图22所示,判定部201按照规定区域将紧前图像LV20和最新图像LV21分割为多个区域,对该区域内的明亮度的最大值与最小值的差分Dim进行比较。具体而言,如图22和图23所示,判定部201对紧前图像LV20和最新图像LV21各自的区域内的明亮度的最大值与最小值的差分Dim进行比较,按照每个区域判定该差分作为DDIm,判定为该差分(亮度差)越大则图像内的信息量的变化越多。
根据以上说明的本发明的实施方式2的变形例,即使在动态图像拍摄时由于平移操作、倾斜操作或其他拍摄画面变更操作而使视野区域急剧变化的情况下,也能够使用户舒适地进行视觉辨认。
(实施方式3)
接着,对本发明的实施方式3进行说明。本实施方式3的摄像装置与上述实施方式2的摄像装置1a的结构不同,而且,执行的处理不同。具体而言,在对摄像装置进行了平移操作或倾斜操作或其他拍摄画面变更操作的情况下,变更拍摄条件来降低视觉上可掌握的信息量。因此,下面,在对本实施方式3的摄像装置的结构进行说明后,对本实施方式3的摄像装置执行的处理进行说明。另外,对与上述实施方式2的摄像装置相同的结构标注相同标号并省略说明。
图24是示出本发明的实施方式3的摄像装置的功能结构的框图。图24所示的摄像装置1b具有摄像部10a、显示部11、输入部12、记录部13、记录介质14、手抖校正部16、运动检测部17、触摸面板18、通信部19、焦点驱动部21、控制部22。
焦点驱动部21在控制部22的控制下,通过使镜头部101沿着光轴L移动,对摄像部10a的焦点进行调整。例如,焦点驱动部21在控制部22的控制下,通过使镜头部101沿着光轴L移动,使摄像部10a的焦点对焦在被摄体上。焦点驱动部21使用步进马达等构成。
控制部22进行与构成摄像装置1b的各部对应的指示和数据的转送等,对摄像装置1b的动作进行总括控制。控制部22使用CPU等构成。另外,在本实施方式3中,控制部22作为图像处理装置发挥功能。
这里,对控制部22的详细结构进行说明。控制部22具有判定部221、抑制部222、显示控制部223。
判定部221判定摄像部10a的视野区域是否变化。具体而言,判定部221根据与摄像部10a生成的时间上前后的图像数据对应的2个图像的一致度,判定摄像部10a的视野区域是否变化。例如,判定部221通过对与摄像部10a生成的时间上前后的图像数据对应的2个图像进行运动判定,判定摄像装置1中产生的运动、例如用户进行的平移操作、倾斜操作或其他拍摄画面变更操作。
在由判定部221判定为摄像部10a的视野区域变化的情况下,抑制部222生成抑制了与摄像部10a生成的图像数据对应的图像中包含的视觉上可视觉辨认的信息量的抑制图像数据。具体而言,抑制部222对与摄像部10a生成的图像数据对应的图像进行提高曝光值的图像处理、例如过曝光的图像处理,生成抑制图像数据。并且,抑制部222驱动焦点驱动部21,对镜头部101的焦点进行调整,以使得与摄像元件102生成的图像数据对应的图像的焦点模糊。
显示控制部223使显示部11显示与摄像部10a生成的图像数据对应的图像。并且,在判定部221判定为摄像部10a的视野区域变化的情况下,显示控制部223使显示部11显示与抑制部222生成的抑制图像数据对应的抑制图像。进而,显示控制部223使显示部11显示与摄像装置1b有关的操作信息。另外,在本实施方式3中,显示控制部223作为输出部发挥功能。
对具有以上结构的摄像装置1b执行的处理进行说明。图25是示出摄像装置1b执行的处理的概要的流程图。
如图25所示,首先,对摄像装置1b设定为拍摄模式的情况(步骤S301:是)进行说明。该情况下,控制部22使摄像元件102执行摄像(步骤S302)。
接着,判定部221根据时间上前后的紧前图像和最新图像,判定最新图像的画面整体(视野区域整体)是否从紧前图像的画面整体进行了移动(步骤S303)。具体而言,判定部221判定时间上前后的紧前图像和最新图像各自的像素的信息量是否为第1阈值以上。另外,第1阈值可以根据摄像元件102的帧率而适当变更。在判定部221判定为最新图像的画面整体从紧前图像的画面整体进行了移动的情况下(步骤S303:是),摄像装置1b转移到后述步骤S304。与此相对,在判定部221判定为最新图像的画面整体未从紧前图像的画面整体进行了移动的情况下(步骤S303:否),摄像装置1b转移到后述步骤S311。
在步骤S304中,判定部221根据时间上前后的紧前图像和最新图像,判定最新图像的移动方向是否相对于紧前图像的画面整体为1/3以上。在判定部221判定为最新图像的移动方向相对于紧前图像的画面整体为1/3以上的情况下(步骤S304:是),摄像装置1b转移到后述步骤S305。与此相对,在判定部221判定为最新图像的移动方向相对于紧前图像的画面整体不是1/3以上的情况下(步骤S304:否),摄像装置1b转移到后述步骤S311。
在步骤S305中,判定部221判定最新图像的对比度是否小于规定阈值。在判定部221判定为最新图像的对比度小于规定阈值的情况下(步骤S305:是),摄像装置1b转移到后述步骤S306。与此相对,在判定部221判定为最新图像的对比度不小于规定阈值的情况下(步骤S305:否),摄像装置1b转移到后述步骤S311。
在步骤S306中,判定部221判定最新图像内的被摄体是否是比规定阈值明亮的被摄体。在判定部221判定为最新图像内的被摄体是比规定阈值明亮的被摄体的情况下(步骤S306:是),摄像装置1b转移到后述步骤S307。与此相对,在判定部221判定为最新图像内的被摄体不是比规定阈值明亮的被摄体的情况下(步骤S306:否),摄像装置1b转移到后述步骤S309。
在步骤S307中,抑制部222进行提高摄像部10a生成的图像数据的曝光值的图像处理。具体而言,抑制部222进行将摄像部10a生成的图像数据的曝光值例如从+0.0提高到+2.0的校正。
接着,显示控制部223使显示部11显示与由抑制部222提高了曝光值的图像数据对应的实时取景图像(步骤S308)。具体而言,如图26所示,在显示部11正在显示实时取景图像LV40的情况下,在进行了平移操作时,显示控制部223使显示部11显示与由抑制部222提高了曝光值的图像数据对应的实时取景图像LV41、实时取景图像LV42。然后,显示控制部223在平移操作结束的时点使显示部11显示实时取景图像LV43(图26(a)→图26(b)→图26(c)→图26(d))。由此,在用户对摄像装置1b进行了平移操作的情况下,图像数据的曝光值自动提高,在再现时显示过曝光的图像。其结果,在平移操作时的图像内抑制了视觉上可视觉辨认的信息量,所以,即使在动态图像拍摄时或动态图像的再现时视野区域急剧变化时,也能够使用户舒适地进行视觉辨认。在步骤S308之后,摄像装置1b转移到步骤S312。
在步骤S309中,抑制部222驱动焦点驱动部21,通过使镜头部101沿着光轴L移动,调整针对被摄体的焦点位置动。
接着,显示控制部223使显示部11显示与在调整了焦点位置的状态下由摄像部10a生成的图像数据对应的实时取景图像(步骤S310)。具体而言,如图27所示,在显示部11正在显示实时取景图像LV50的情况下,在进行了平移操作时,显示控制部223使显示部11依次显示与在通过抑制部222调整了焦点位置的状态下、例如镜头部101从焦点位置(对焦位置)分开以使被摄体模糊的状态下由摄像部10a生成的图像数据对应的实时取景图像L51、实时取景图像LV52。然后,显示控制部223在平移操作结束的时点使显示部11显示与在通过抑制部222使焦点位置对焦在被摄体上的状态下由摄像部10a生成的图像数据对应的实时取景图像LV53(图27(a)→图27(b)→图27(c)→图27(d))。由此,在用户对摄像装置1b进行了平移操作的情况下,针对被摄体自动调整焦点位置,所以,在再现时显示模糊的图像。其结果,在平移操作时的图像内抑制了视觉上可视觉辨认的信息量,所以,即使在动态图像拍摄时或动态图像的再现时视野区域急剧变化时,也能够使用户舒适地进行视觉辨认。在步骤S310之后,摄像装置1b转移到步骤S312。
步骤S311~步骤S323分别对应于上述图12的步骤S212~步骤S224。
根据以上说明的本发明的实施方式3,即使在动态图像拍摄时由于平移操作或倾斜操作而使视野区域急剧变化的情况下,也能够使用户舒适地进行视觉辨认。
另外,在本发明的实施方式3中,抑制部222提高由摄像部10a生成的图像数据的曝光值,使显示部11中显示的图像成为过曝光,但是,例如,也可以减少摄像部10a生成的图像数据的像素数而使显示部11进行显示。具体而言,在对摄像装置1b进行了平移操作的情况下,抑制部222进行抑制与摄像部10a生成的图像数据对应的图像的像素数的图像处理,生成抑制图像数据,显示控制部223使显示部11显示与抑制部222生成的抑制图像数据对应的实时取景图像。例如,如图28所示,在显示部11正在显示实时取景图像LV60的情况下,在对摄像装置1b进行了平移操作时,显示控制部223使显示部11依次显示与抑制部222生成的抑制图像数据对应的实时取景图像LV61、实时取景图像LV62。然后,显示控制部223在平移操作结束的时点使显示部11显示与摄像部10a生成的图像数据对应的实时取景图像LV63(图28(a)→图28(b)→图28(c)→图28(d))。由此,即使在动态图像拍摄时或动态图像的再现时摄像装置1b的视野区域急剧变化的情况下,也能够降低平移操作中的图像的像素数,降低用户可视觉辨认的信息量,所以,能够使用户舒适地进行视觉辨认。
(其他实施方式)
并且,关于本发明的图像处理装置,除了数字单反照相机以外,例如还能够应用于数字照相机、数字摄像机和具有摄像功能的便携电话和平板型便携设备等电子设备、能够在动态图像拍摄时变更视野区域的显微镜装置和内窥镜装置的处理器部。
并且,关于本发明的摄像装置,镜头部可以相对于主体部拆装自如,镜头部也可以与主体部一体形成。
并且,本发明的图像处理装置所执行的程序以可安装形式或可执行形式的文件数据记录在CD-ROM、软盘(FD)、CD-R、DVD(DigitalVersatileDisk)、USB介质、闪存等计算机可读取的记录介质中进行提供。
并且,本发明的图像处理装置所执行的程序也可以存储在与因特网等网络连接的计算机上,通过经由网络下载进行提供。进而,也可以经由因特网等网络提供或发布本发明的图像处理装置所执行的程序。
另外,在本说明书的流程图的说明中,使用“首先”、“然后”、“接着”等表现明示了步骤间的处理的前后关系,但是,实施本发明所需要的处理的顺序不由这些表现唯一决定。即,能够在不矛盾的范围内对本说明书中记载的流程图中的处理的顺序进行变更。
这样,本发明可以包括这里未记载的各种实施方式,能够在由权利要求书确定的技术思想范围内进行各种设计变更等。
标号说明
1、1a、1b:摄像装置;10、10a:摄像部;11:显示部;12:输入部;13:记录部;14:记录介质;15、20、22:控制部;16:手抖校正部;17:运动检测部;18:触摸面板;19:通信部;21:焦点驱动部;101:镜头部;102:摄像元件;151、201、221:判定部;152、202、222:抑制部;153、203、223:显示控制部。

Claims (12)

1.一种图像处理装置,其特征在于,该图像处理装置具有:
判定部,其根据与从外部输入的时间上前后的图像数据对应的2个图像,判定拍摄时的视野区域是否发生了变化;以及
抑制部,其在由所述判定部判定为所述拍摄时的视野区域发生了变化的情况下,生成并输出抑制了所述图像中包含的可视觉辨认的信息量的抑制图像数据。
2.根据权利要求1所述的图像处理装置,其特征在于,
所述抑制部抑制信息显示时的数据的空间变化量或时间变化量而生成所述抑制图像数据。
3.根据权利要求1所述的图像处理装置,其特征在于,
所述抑制部通过进行抑制所述图像的对比度、彩度和分辨率中的任意一方以上的图像处理,生成所述抑制图像数据。
4.根据权利要求1所述的图像处理装置,其特征在于,
所述抑制部通过进行提高所述图像数据的曝光值的图像处理,生成所述抑制图像数据。
5.根据权利要求1所述的图像处理装置,其特征在于,
所述抑制部通过进行对与所述图像数据对应的图像的像素数进行间疏的图像处理,生成所述抑制图像数据。
6.一种显示装置,其特征在于,该显示装置具有:
权利要求1~5中的任意一项所述的图像处理装置;以及
显示部,其能够显示与所述抑制部生成的所述抑制图像数据对应的抑制图像。
7.一种摄像装置,其特征在于,该摄像装置具有:
权利要求6所述的显示装置;以及
摄像部,其对视野区域进行连续摄像而依次生成多个图像数据。
8.一种摄像装置,其特征在于,该摄像装置具有:
权利要求6所述的显示装置;
摄像部,其对视野区域进行连续摄像而依次生成多个图像数据;
镜头部,其会聚来自所述视野区域的光,并且能够进行焦点位置调整;以及
摄像元件,其接收所述镜头部会聚的光而生成所述图像数据,
所述抑制部调整所述镜头部的焦点位置,使得与所述摄像元件生成的所述图像数据对应的图像的焦点模糊。
9.根据权利要求7或8所述的摄像装置,其特征在于,
所述摄像装置还具有显示控制部,在由所述判定部判定为所述拍摄时的视野区域发生了变化的情况下,该显示控制部重叠所述抑制图像和所述图像并使所述显示部进行显示。
10.根据权利要求7~9中的任意一项所述的摄像装置,其特征在于,
所述判定部按照与所述时间上前后的图像数据对应的2个图像的每个像素或将这2个图像分割为多个区域后的每个分割区域来计算亮度差,从而判定所述拍摄时的视野区域是否发生了变化。
11.一种图像处理装置执行的图像处理方法,其特征在于,该图像处理方法包括以下步骤:
判定步骤,根据与从外部输入的时间上前后的图像数据对应的2个图像,判定拍摄时的视野区域是否发生了变化;以及
抑制步骤,在所述判定步骤中判定为所述拍摄时的视野区域发生了变化的情况下,生成并输出抑制了所述图像中包含的可视觉辨认的信息量的抑制图像数据。
12.一种程序,其特征在于,该程序使图像处理装置执行以下步骤:
判定步骤,根据与从外部输入的时间上前后的图像数据对应的2个图像,判定拍摄时的视野区域是否发生了变化;以及
抑制步骤,在所述判定步骤中判定为所述拍摄时的视野区域发生了变化的情况下,生成并输出抑制了所述图像中包含的可视觉辨认的信息量的抑制图像数据。
CN201480002439.6A 2013-12-10 2014-08-21 图像处理装置、显示装置、摄像装置和图像处理方法 Expired - Fee Related CN105379247B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013255425 2013-12-10
JPJP2013-255425 2013-12-10
PCT/JP2014/071934 WO2015087582A1 (ja) 2013-12-10 2014-08-21 画像処理装置、表示装置、撮像装置、画像処理方法およびプログラム

Publications (2)

Publication Number Publication Date
CN105379247A true CN105379247A (zh) 2016-03-02
CN105379247B CN105379247B (zh) 2019-08-20

Family

ID=53370901

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480002439.6A Expired - Fee Related CN105379247B (zh) 2013-12-10 2014-08-21 图像处理装置、显示装置、摄像装置和图像处理方法

Country Status (3)

Country Link
JP (1) JP5771767B1 (zh)
CN (1) CN105379247B (zh)
WO (1) WO2015087582A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109040593A (zh) * 2018-08-23 2018-12-18 惠州Tcl移动通信有限公司 一种基于动态环境的拍照对焦方法、终端及存储介质
CN109997171A (zh) * 2016-09-30 2019-07-09 株式会社尼康 显示装置以及程序
CN113542601A (zh) * 2016-06-20 2021-10-22 麦克赛尔株式会社 摄像装置、显示装置和摄像显示系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6723566B2 (ja) * 2018-10-17 2020-07-15 株式会社アジェンシア コンテンツ生成プログラム、コンテンツ生成方法及びコンテンツ生成システム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009115681A (ja) * 2007-11-08 2009-05-28 Nikon Corp 画像取得表示装置
CN101909152A (zh) * 2009-05-26 2010-12-08 奥林巴斯映像株式会社 摄像装置
CN102111546A (zh) * 2009-12-25 2011-06-29 佳能株式会社 图像处理方法、图像处理设备和摄像设备
CN102137232A (zh) * 2010-01-27 2011-07-27 奥林巴斯映像株式会社 画质调整装置、照相机和画质调整方法
CN102595035A (zh) * 2011-01-17 2012-07-18 奥林巴斯映像株式会社 摄像装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5221931B2 (ja) * 2007-10-31 2013-06-26 キヤノン株式会社 撮像装置及びその制御方法
JP2010098698A (ja) * 2008-10-20 2010-04-30 Canon Inc 撮像装置及びその制御方法及びプログラム
JP5402242B2 (ja) * 2009-05-25 2014-01-29 株式会社ニコン 画像再生装置、撮像装置、画像再生方法、画像再生プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009115681A (ja) * 2007-11-08 2009-05-28 Nikon Corp 画像取得表示装置
CN101909152A (zh) * 2009-05-26 2010-12-08 奥林巴斯映像株式会社 摄像装置
CN102111546A (zh) * 2009-12-25 2011-06-29 佳能株式会社 图像处理方法、图像处理设备和摄像设备
CN102137232A (zh) * 2010-01-27 2011-07-27 奥林巴斯映像株式会社 画质调整装置、照相机和画质调整方法
CN102595035A (zh) * 2011-01-17 2012-07-18 奥林巴斯映像株式会社 摄像装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113542601A (zh) * 2016-06-20 2021-10-22 麦克赛尔株式会社 摄像装置、显示装置和摄像显示系统
CN113542601B (zh) * 2016-06-20 2024-01-23 麦克赛尔株式会社 摄像装置、显示装置和摄像显示系统
CN109997171A (zh) * 2016-09-30 2019-07-09 株式会社尼康 显示装置以及程序
CN109997171B (zh) * 2016-09-30 2024-03-08 株式会社尼康 显示装置以及存储有程序的记录介质
CN109040593A (zh) * 2018-08-23 2018-12-18 惠州Tcl移动通信有限公司 一种基于动态环境的拍照对焦方法、终端及存储介质
CN109040593B (zh) * 2018-08-23 2020-08-11 惠州Tcl移动通信有限公司 一种基于动态环境的拍照对焦方法、终端及存储介质

Also Published As

Publication number Publication date
CN105379247B (zh) 2019-08-20
JPWO2015087582A1 (ja) 2017-03-16
JP5771767B1 (ja) 2015-09-02
WO2015087582A1 (ja) 2015-06-18

Similar Documents

Publication Publication Date Title
US9007442B2 (en) Stereo image display system, stereo imaging apparatus and stereo display apparatus
US8208048B2 (en) Method for high dynamic range imaging
US8031229B2 (en) Imaging apparatus and imaging control method
US7349006B2 (en) Image processing apparatus and method, recording medium, and program
US8599245B2 (en) Image processing apparatus, camera, and image processing method
WO2012011341A1 (ja) 撮像装置、その制御方法およびプログラム
JPH08205196A (ja) 2次元映像を3次元映像に変換する方法
CN102907104A (zh) 形成具有感知深度的视频
JP2007295559A (ja) ビデオ処理および表示
US20120163659A1 (en) Imaging apparatus, imaging method, and computer readable storage medium
CN105379247A (zh) 图像处理装置、显示装置、摄像装置、图像处理方法和程序
JP2000307952A (ja) 画像合成用自動背景シーンのデフォーカシング
JP2004118711A (ja) 画像処理装置、方法及びプログラム
JPWO2019146226A1 (ja) 画像処理装置、および出力情報制御方法、並びにプログラム
CN103649807A (zh) 成像设备
US20130222376A1 (en) Stereo image display device
JP6833801B2 (ja) 撮像装置、撮像方法、プログラムおよび記録媒体
JP2012178688A (ja) 立体画像撮影装置
JP2011085699A (ja) 表示装置
CN107430841B (zh) 信息处理设备、信息处理方法、程序以及图像显示系统
US9571720B2 (en) Image processing device, display device, imaging apparatus, image processing method, and program
CN111630849A (zh) 图像处理装置、图像处理方法、程序和投影系统
JP2004287794A (ja) 画像処理装置
JP2010258569A (ja) 表示制御装置、撮像装置、表示制御装置の制御方法、及びプログラム
JP2957883B2 (ja) 立体効果発生メガネ

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20211223

Address after: Tokyo, Japan

Patentee after: Aozhixin Digital Technology Co.,Ltd.

Address before: Tokyo, Japan

Patentee before: OLYMPUS Corp.

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190820

Termination date: 20210821

CF01 Termination of patent right due to non-payment of annual fee