CN1992816A - 图像显示装置和方法、以及程序 - Google Patents

图像显示装置和方法、以及程序 Download PDF

Info

Publication number
CN1992816A
CN1992816A CNA2006101673409A CN200610167340A CN1992816A CN 1992816 A CN1992816 A CN 1992816A CN A2006101673409 A CNA2006101673409 A CN A2006101673409A CN 200610167340 A CN200610167340 A CN 200610167340A CN 1992816 A CN1992816 A CN 1992816A
Authority
CN
China
Prior art keywords
image
mentioned
read
picture
reading
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006101673409A
Other languages
English (en)
Other versions
CN100456810C (zh
Inventor
久保学
辻村贵
福永将嗣
宫腰大辅
池田伸穗
福田京子
米田丰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1992816A publication Critical patent/CN1992816A/zh
Application granted granted Critical
Publication of CN100456810C publication Critical patent/CN100456810C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/443—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by reading pixels from selected 2D regions of the array, e.g. for windowing or digital zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/745—Circuitry for generating timing or clock signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/7795—Circuitry for generating timing or clock signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Input (AREA)
  • Image Processing (AREA)

Abstract

提供不使用压缩处理技术就能够降低分辨率转换所需的图像存储器的容量的图像显示装置和方法、以及程序。在向图像存储器写入一个画面的图像数据结束之前，开始读出该一个画面的图像数据。由此，在图像存储器中不需要一个画面的存储容量，而能够将输入图像数据的分辨率转换成输出图像数据的分辨率。特别是，如果对于周期为V的输入图像数据的输入同步信号，使输出同步信号延迟(1/2)V而输出，则作为图像存储器的容量，只要一个画面的一半程度即可，由此，与以往相比能够大幅度减小图像存储器的容量。

Description

图像显示装置和方法、以及程序
技术领域
本发明涉及一种图像显示装置和方法、以及程序，特别是涉及能够防止由于使如下定时变早而产生的最大放大率的降低的图像显示装置和方法、以及程序，其中，所述定时是从存储器读出利用电子变焦功能进行放大并输出的图像的定时。
背景技术
以往，在将图像转换为电气信号的摄像装置、例如摄像机等中，通过设置临时存储摄影图像的图像存储器，附加了实施手抖动校正和电子变焦等效果的功能。
在此，手抖动校正是指，通过由陀螺传感器等获取摄像机的拍摄者的手抖动信息，根据该信息切出图像的一部分，用邻近的像素值对像素值进行插值处理，从而将切出的部分电气地放大或缩小到标准视场角的图像。另外，电子变焦是指，通过切出图像的一部分，用邻近的像素值对不足的像素值进行插值处理，从而将切出的部分电气地放大到标准视场角的图像。
图1是表示时序图的一例的图，该时序图表示现有图像显示装置中的整个画面显示时的连续三个画面的图像存储器的地址推移和图像的输入输出定时。
在图1中，示出了将水平1920像素×垂直540行的输入图像的转换成分辨率为水平1440像素×垂直540行的输出图像的情况。
图像存储器由环形缓冲器构成，用虚线表示对该图像存储器写入数据，用实线表示读出所写入的数据。图像存储器是例如写入通过将图像的横方向的像素数进行变换输入而得到的图像的存储器。对于写入到图像存储器中的图像，从那里读出后适当实施纵方向的行数的变换，作为输出图像而输出得到的图像。
该图像存储器的地址从0开始，每写入1行，在下一行的写入地址加上1行。在地址到达至图像存储器的最后的情况下，如图所示下一行的写入地址返回0，再次继续进行每写入1行加1行的处理。即使一个画面的处理结束，也保持成为数据的写入目的地的地址，下一画面的处理(写入)从被保持的地址开始继续进行。
输入同步信号和输出同步信号互相同步产生，在将图像写入到图像存储器的期间，从图像存储器读出比该写入的图像靠前1V的图像。即，例如在期间(t11～t12)写入到图像存储器中的图像1，在迟1V的期间(t13～t14)从图像存储器被分辨率转换并读出，但是在该期间(t13～t14)，同时进行下一画面的图像2的写入。同样地，在期间(t15～t16)进行图像3的写入的同时，进行图像3的前一个画面的图像2的读出。
图2是作为设想现有图像显示装置中的手抖动校正的动作例，表示如下情况下的图：对于水平1920像素×垂直540行的输入图像，将其画面中央的水平1600像素×垂直450行指定为有效范围，转换成分辨率为水平1440像素×垂直540行的输出图像。
另外，作为设想现有图像显示装置中的手抖动校正的另一动作例，图3中示出了有效范围按照水平1600像素×垂直450行(画面上部)、水平960像素×垂直270行(画面中央)、水平1600像素×垂直450行(画面下部)的顺序变化的情况下的图像存储器的地址推移和图像的输入输出定时。
在图2和图3的动作例中也与图1的动作例相同，使输入同步信号和输出同步信号互相同步产生，在图像写入到图像存储器中的期间，从图像存储器读出比该图像靠前1V的图像。在这些示例中，输入图像的写入期间对应于有效范围图像的行位置而变化，但是读出期间相同，始终以固定的输出定时输出图像。
特许文献1：特许第3406924号公报
发明内容
发明要解决的问题
在现有的图像显示装置中，临时存储输入图像的图像存储器，至少需要一个画面(场或帧)的存储容量。因而，例如当分别用8位来存储高清晰度电视(HD)影像的一帧的亮度和色差信号时，如果仍然这样作，那么作为存储容量需要约12M比特，图像存储器不仅被大型化而且昂贵。
因此，公开了如下方法：在图像存储器的输入侧设置压缩编码电路，并且在图像存储器的输出侧设置扩展解码电路，使得图像存储器的存储容量很少也可以，或者通过电子变焦倍率来控制压缩时的量子化系数(参照特许文献1)。
根据这样的结构，某种程度能够削减到所需图像存储器的容量的一部分，另一方面，需要追加压缩编码电路、扩展解码电路等电路，另外，通过实施压缩处理而导致画质非常劣化，特别是在电子变焦时与电子变焦自身的画质劣化互起作用而使画质更加劣化。
本发明是鉴于这样的状况而完成的，例如，能够实现减小分辨率转换所需的图像存储器的容量。另外，还能够防止由于减小图像存储器的容量(通过使从存储器读出输出图像的定时变早)而产生的最大放大率的降低。
用于解决问题的方法
本发明的一个侧面的图像显示装置，具有将拍摄的整个图像的一部分进行放大显示的电子变焦功能，该图像显示装置具备：摄像单元，可切换图像的读出开始位置；写入单元，为了使得在从存储器读出图像的定时已写入有以整个图像的中心为基准的规定范围的数据的至少一部分，该写入单元抽出由上述摄像单元读出而作为摄像结果输入的图像中的上述规定范围的图像，将抽出的图像写入到上述存储器中；读出单元，在上述读出的定时，开始读出由上述写入单元写入到上述存储器中的图像，将从上述存储器读出的上述规定范围的图像转换为规定的分辨率的图像并输出；以及控制单元，当由上述读出单元读出的图像的范围比想进行放大显示的范围宽时，控制上述摄像单元的读出开始位置，使得读出的图像的范围变窄。
还可以设置曝光时间控制单元，该曝光时间控制单元对由上述控制单元控制的上述摄像单元的读出的开始位置的转变前后的最大曝光时间进行控制。
针对输入的图像的输入同步信号、和针对由读出单元输出的图像的输出同步信号相互非同步，在将上述输入同步信号设为V时，上述输出同步信号相对于上述输入同步信号延迟(1/3)V而输出。
本发明的一个侧面的图像显示方法或程序，是具有将拍摄的整个图像的一部分进行放大显示的电子变焦功能的图像显示装置的图像显示方法、或使计算机执行其图像处理的程序，包含以下步骤：对图像的读出开始位置进行切换，为了使得在从存储器读出图像的定时已写入有以整个图像的中心为基准的规定范围的数据的至少一部分，抽出被读出而作为摄像结果输入的图像中的上述规定范围的图像，将抽出的图像写入到上述存储器中，在上述读出的定时，开始读出写入到上述存储器中的图像，将从上述存储器读出的上述规定范围的图像转换为规定的分辨率的图像并输出，当读出的图像的范围比想进行放大显示的范围宽时，控制读出开始位置，使得读出的图像的范围变窄。
在本发明的一个侧面中，当由读出单元读出的图像的范围比想进行放大显示的范围宽时，控制摄像单元的读出的开始位置，使得读出的图像的范围变窄。
发明的效果
根据本发明，能够防止最大放大率的降低。
附图说明
图1是表示对现有的图像显示装置的一个作用进行说明的图像存储器的地址推移和图像的输入输出定时的时序图。
图2是表示对现有的图像显示装置的其他作用进行说明的图像存储器的地址推移和图像的输入输出定时的时序图。
图3是表示对现有的图像显示装置的另外其他作用进行说明的图像存储器的地址推移和图像的输入输出定时的时序图。
图4是本发明的实施方式的图像显示装置1的概要结构图。
图5是表示本发明所涉及的分辨率转换部16的一个结构例的框图。
图6是表示说明本发明一个作用的图像存储器的地址推移和图像的输入输出定时的时序图。
图7是表示说明本发明其他作用的图像存储器的地址推移和图像的输入输出定时的时序图。
图8是表示说明本发明另外其他作用的图像存储器的地址推移和图像的输入输出定时的时序图。
图9是表示说明本发明另外其他作用的图像存储器的地址推移和图像的输入输出定时的时序图。
图10是表示说明本发明另外其他作用的图像存储器的地址推移和图像的输入输出定时的时序图。
图11是表示利用降低读出开始位置的转变来缩短最大曝光时间的图。
图12是表示控制了最大曝光时间的示例的图。
图13是表示利用提高读出开始位置的转变来延长最大曝光时间的图。
图14是表示控制最大曝光时间的示例的图。
图15是说明摄像处理的流程图。
图16是表示个人计算机的结构例的框图。
附图标记说明
1：图像显示装置；11：镜头；12：摄像元件；13：A/D转换器；15：控制部；16：分辨率转换部；21：横分辨率转换电路；22：图像存储器；23：纵分辨率转换电路。
具体实施方式
以下，说明本发明的实施方式，下面举例说明本发明的构成要件与说明书或者附图中记载的实施方式的对应关系。本记载是为了证实支持本发明的实施方式被记载在说明书或者附图中。因此，即使有虽然记载在说明书或者附图中、但是没有作为与本发明的构成要件对应的实施方式记载在这里的实施方式，也不意味着该实施方式不与该构成要件对应。相反，即使实施方式作为与发明对应的部分而记载于此，也不意味着该实施方式不与该构成要件以外的构成要件对应。
本发明的一个侧面的图像显示装置(例如，图4的图像显示装置1)，具有将拍摄的整个图像的一部分进行放大显示的电子变焦功能，该图像显示装置具备：摄像单元(例如，图4的摄像元件12)，可切换图像的读出开始位置；写入单元(例如，图5的横分辨率转换电路21)，为了使得在从存储器读出图像的定时已写入有以整个图像的中心为基准的规定范围的数据的至少一部分，该写入单元抽出由上述摄像单元读出而作为摄像结果输入的图像中的上述规定范围的图像，将抽出的图像写入到上述存储器中；读出单元(例如，图5的纵分辨率转换电路23)，在上述读出的定时，开始读出由上述写入单元写入到上述存储器中的图像，将从上述存储器读出的上述规定范围的图像转换为规定的分辨率的图像并输出；以及控制单元(例如，图4的控制部15)，当由上述读出单元读出的图像的范围比想进行放大显示的范围宽时，控制上述摄像单元的读出开始位置，使得读出的图像的范围变窄。
还可以设置曝光时间控制单元(例如，图4的控制部15)，该曝光时间控制单元对由上述控制单元控制的上述摄像单元的读出开始位置的转变前后的最大曝光时间进行控制。
本发明的一个侧面的图像显示方法或程序，是具有将拍摄的整个图像的一部分进行放大显示的电子变焦功能的图像显示装置的图像显示方法、或使计算机执行其图像处理的程序，包含以下步骤：对图像的读出开始位置进行切换，为了使得在从存储器读出图像的定时(例如，从输入图像经过(1/3)V的定时)已写入有以整个图像的中心为基准的规定范围的数据的至少一部分，抽出被读出而作为摄像结果输入的图像中的上述规定范围的图像，将抽出的图像写入到上述存储器中(例如，图15的步骤S1)，在上述读出的定时，开始读出写入到上述存储器中的图像，将从上述存储器读出的上述规定范围的图像转换为规定的分辨率的图像并输出(例如，图15的步骤S3)，当读出的图像的范围比想进行放大显示的范围宽时，控制读出开始位置，使得读出的图像的范围变窄。
以下参照附图说明本发明的实施方式。
图4是与本发明的实施方式相关的图像显示装置1的概要结构图。
在本实施方式中，示出将图像显示装置1应用到数字摄像机的例子。图像显示装置1由以下部分构成：镜头11、摄像元件12、A/D(Analog/Digital：模拟/数字)转换器13、信号处理电路14、控制部15、以及分辨率转换和电子变焦电路部(以下称为“分辨率转换部”)16。
摄像元件12例如由X-Y地址型的CMOS(ComplementaryMetal Oxide Semiconductor：互补金属氧化物半导体)图像传感器等构成，将通过镜头11取入的来自被摄体的光转换为电气信号，将转换得到的模拟图像信号输出到A/D转换器13。
A/D转换器13将来自摄像元件12的模拟图像信号转换为数字图像信号，将得到的数字图像信号输出到信号处理电路14。
信号处理电路14对从A/D转换器13提供的图像信号实施伽马校正、彩色平衡调整等照相机信号处理，将亮度信号和色差信号分别作为8位的图像信号输出。
控制部15对分辨率转换部16指定与手抖动校正、电子变焦相应的输入图像的有效范围。另外，控制部15适当地对摄像元件12指定读出的开始位置。如后所述，不是从摄像元件12的最上部的块(像素的集合)，而是根据电子变焦的放大率，进行将在其下方的块作为开始位置的数据的读出。
分辨率转换部16根据来自控制部15的有效范围信息，仅抽出必要的图像数据，输出转换为输出图像的分辨率的图像信号(视频信号)。
图5是表示分辨率转换部16的详细结构例的框图。
分辨率转换部16由横分辨率转换电路21、图像存储器22、以及纵分辨率转换电路23构成。
横分辨率转换电路21设置在图像存储器22的前级，在来自信号处理电路14的输入图像之中，仅抽出由控制部15关于横方向(水平方向)指定的有效范围，并通过插值运算转换为输出图像的分辨率。以行单位进行处理。如果处理后的行在有效范围内，则横分辨率转换电路21将该行的数据写入图像存储器22。
纵分辨率转换电路23设置在图像存储器22的后级，从图像存储器22读出由控制部15指定的有效范围的行的数据，关于纵方向(垂直方向)通过插值运算转换为输出图像的分辨率并输出。
图像存储器22由例如DRAM等半导体存储元件构成，临时存储通过横分辨率转换电路21将其横方向的分辨率转换为与输出图像的横分辨率相同分辨率的输入图像的图像数据。例如，图像存储器22的容量是：
X＝输出图像的横方向的分辨率；
Y＝输入图像的纵方向的行数的1/2+边缘(10％程度)，将(X×Y)的数据作为可存储的容量。
因而，在图像存储器22中无法写入输入图像的一个画面的整个图像数据。因此，在图像显示装置1中，在向图像存储器22写入一个画面的图像数据结束之前，开始该一个画面的图像数据的读出。即，输入图像与以往相同，按照同步信号在每个固定期间V连续输入，但是输出图像与以往不同，相对输入图像仅延迟(1/2)V，在每个固定期间V连续输出。
在此，参照表示整个画面显示时(将块1至7的整个图像直接输出时)的连续两个画面的图像存储器的地址推移和图像的输入输出定时的时序图、即图6，说明图像显示装置1的动作的示例。
在图6的示例中，示出了将水平1728像素×垂直648行的输入图像转换成分辨率为水平1440像素×垂直540行的输出图像的情况。将输入图像在垂直方向上分割为7个块，将各个块作为块1至7进行说明。
图像存储器22由环形缓冲器构成，用虚线表示对图像存储器22写入数据，用实线表示从图像存储器22读出数据。
图像存储器22的地址从0开始，每写入1行，下一行的写入地址加1行。在地址到达至图像存储器的最后的情况下，如图所示下一行的写入地址返回0，再次继续进行每写入1行加1行的处理。即使一个画面(块1至7)的处理结束，也保持成为数据的写入目的地的地址，下一画面的处理从被保持的地址继续进行。
如图6所示，通过从摄像元件12的块1的行依次读出得到的输入图像，按照同步信号在每个固定期间V被连续输入。另外，输出同步信号与输入同步信号不同步，在该例中，在每个固定期间V，输出图像相对于输入图像延迟(1/2)V地被连续输出。
画面1的输入图像数据通过横分辨率转换电路21，从构成画面最上部的块1的行开始依次被分辨率转换，分辨率转换后的图像数据依次逐行写入到图像存储器22的地址中。
在图6中，在经过时刻t1～t3的期间将画面1的整个输入图像数据写入到图像存储器22的情况下，图像存储器22的纵方向的容量只有输入图像数据的行数的一半程度，因此成为写入对象的输入图像数据、例如位于一半下面的行上的图像数据，覆盖在先前写入的行的图像数据上。
因此，在图像显示装置1中，如图6所示，在针对图像存储器22的画面1的全部输入图像数据的写入结束之前的、从图像输入起经过了(1/2)V的时刻t2，开始由纵分辨率转换电路23进行的画面1的输入图像数据的纵分辨率转换处理。
在该(1/2)V的期间内，通过对已经写入到图像存储器22中的输入图像数据的从最上部行到下面的规定行，进行纵分辨率转换处理，由此在输入图像数据的前半部分由于后半部分的覆盖而消失之前，能够输出与输出图像的纵分辨率相同的图像。
在图6中，经过时刻t2～t5的期间，由纵分辨率转换电路23进行画面1的输入图像数据的读出，在该期间内的时刻t4，通过横分辨率转换电路21开始写入画面2的输入图像数据。
同样地，在从画面2的图像数据输入起经过了(1/2)V的时刻t6，读出画面2的图像数据，以后依次进行下一个画面即画面3(未图示)的写入和读出。
此外，该整个画面显示时的输入图像数据的写入速度和读出速度都相同，图像数据的写入处理不会超过读出处理。
下面，参照图7说明进行手抖动校正、电子变焦时的动作例。
在图7中，示出了对于水平1728像素×垂直648行的输入图像，将其画面中央的块4中包含的像素指定为有效范围，将该有效范围的分辨率转换成分辨率为水平1440像素×垂直540行的输出图像的情况。
横分辨率转换部21对于画面1的输入图像，将每1行的1728像素的数据按照控制部15的指定，转换成分辨率为1440像素的数据。在转换分辨率后的行包含在由控制部15指定的纵方向的有效范围内的情况下，横分辨率转换部21将转换后的数据写入到图像存储器22上的规定的地址中(时刻t1～t3)。
此外，写入地址从0开始，每写入1行，在下一行的写入地址上加上1行。即使结束了一个画面的处理，也保持成为数据写入目的地的地址，从被保持的地址继续进行下一画面即画面2的数据写入。
纵分辨率转换电路23在从输入画面1的图像数据起经过了(1/2)V时间后的时刻t2开始处理。在经过该(1/2)V时间的期间，结束块4的横分辨率转换，得到的数据被写入到图像存储器22中。
纵分辨率转换电路23在时刻t2开始从图像存储器22读出进行处理的行的数据，将读出的数据的分辨率转换为纵输出分辨率540并输出。此时，考虑到在图像存储器22中仅写入了有效范围的行，设定从图像存储器22读出的地址。
在图7中，经过时刻t2～t5的期间，由纵分辨率转换电路23读出画面1的输入图像数据，在该期间内的时刻t4，通过横分辨率转换电路21来开始写入画面2的输入图像数据。
同样地，在从画面2的图像数据的输入起经过了(1/2)V的时刻t6，读出画面2的图像数据，以后依次进行下一个画面即画面3(未图示)的写入和读出。
以上处理的结果，输入图像中的有效范围部分转换为分辨率与输出图像相同的图像，相对输入图像延迟(1/2)V，作为输出图像被输出。
在如上所述的定时，与为了进行手抖动校正、电子变焦而需要一个画面(场或一帧)容量的以往的图像存储器相比，仅通过对图像存储器22写入数据以及从图像存储器22读出数据，不会导致画质的劣化或压缩/扩展电路的追加，而能够将存储器容量减小到一半程度。即，能够实现图像存储器22的小型化和廉价化。
此外，以上在从输入图像仅延迟(1/2)V将输出图像进行输出的关系上，有效范围的开始行被限定为比输入画面的一半(1/2)靠上的行，但是关于摄像机的手抖动校正、电子变焦，几乎都将画面的中央附近设为有效画面，因此不会特别有问题。
另外，输出图像相对输入图像的输出延迟定时不限于上述(1/2)V，可以比这更早或更迟。在前者的情况下，进一步实现存储器容量的减小。由于要求进一步减小存储器容量，因此，例如能够将输出延迟定时设为(1/3)V，与可记录整个一个画面的以往的容量相比，将图像存储器22的容量设为1/3程度。
图8是表示将输出延迟定时仅确保(1/3)V时的图像存储器22的地址推移和定时的图。
在图8中也示出了将水平1728像素×垂直648行的输入图像转换成分辨率为水平1440像素×垂直540行的输出图像的情况。
如图8所示，通过从摄像元件12的块1的行依次读出得到的输入图像，在每个固定期间V，按照同步信号连续输入。另外，输出同步信号不与输入同步信号同步，在本例中，输出图像相对输入图像延迟(1/3)V在每个固定期间V连续输出。
即，如图8所示，在结束对图像存储器22写入画面1的全部输入图像数据之前的、在从输入图像开始经过了(1/3)V的时刻t2，开始由纵分辨率转换电路23进行的画面1的输入图像数据的纵分辨率转换处理。
在该(1/3)V时间的期间内通过对已经写入到图像存储器22中的输入图像数据的从最上部行到下面的规定行进行纵分辨率转换处理，能够在输入图像数据的前1/3部分由于其后部分的覆盖而消失之前，输出与输出图像的纵分辨率相同的图像。
在图8中，经过时刻t2～t5的期间，由纵分辨率转换电路23读出画面1的输入图像数据，在该期间内的时刻t4，由横分辨率转换电路21开始写入画面2的输入图像数据。
同样地，在从输入画面2的图像数据开始经过了(1/3)V的时刻t6，读出画面2的图像数据，之后依次进行下一个画面即画面3(未图示)的写入和读出。
图9是表示将输出延迟定时仅确保(1/3)V的情况下的图像存储器22的地址推移和定时的其他图。
在图9中，示出了对于水平1728像素×垂直648行的输入图像，将其画面中央的块3至5中包含的像素指定为有效范围，将该有效范围的分辨率转换成水平1440像素×垂直540行的输出图像的情况。
横分辨率转换电路21对于画面1的输入图像，将每1行的1728像素的数据按照控制部15的指定，转换成分辨率为1440像素的数据。在转换分辨率后的行包含在由控制部15指定的纵方向的有效范围即块3至5内范围中的情况下，横分辨率转换部21将转换后的数据写入到图像存储器22上的规定的地址中(时刻t1～t4)。
此外，从0开始写入地址，每当写入1行，在下一行的写入地址上加上1行。在本例中当结束一个画面的处理时，成为下一数据的写入地址目的地的地址变成0，将0的地址作为最初的数据写入目的地而进行下一画面(画面2)的处理。
纵分辨率转换电路23在从输入画面1的图像数据开始经过(1/3)V时间后的时刻t2开始处理。在经过该(1/3)V时间的期间，块3的横分辨率转换到中途结束，得到的数据被写入到图像存储器22中。在直到时刻t6的期间，纵分辨率转换电路23将读出的数据转换为纵输出分辨率540而输出，进行该处理直到块5的最后行。
同样地，在从输入画面2的图像数据开始经过了(1/3)V的时刻t7，读出画面2的块3至5的图像数据，之后依次进行下一个画面即画面3(未图示)的写入和读出。
在此，如上所述，由于使输出图像相对输入图像的延迟小于1/2V，电子变焦的最大放大率减少。这是因为，在使延迟为1/2V的情况下能够仅转换块4的分辨率并输出，与此相对，使延迟为1/3V的情况下，只要是根据输出同步信号从图像存储器22进行读出，在定时上不可能仅转换块4的分辨率，还转换块3至5的分辨率并输出。在放大后的输出图像的分辨率和大小相同的情况下，将更小范围的图像放大的一方其最大放大率更高。
因而，在图像显示装置1中改变摄像元件12的读出开始位置，由此，即使将延迟设为1/3V时，也能够获得与将延迟设为1/2V时相同的电子变焦放大率。
图10是表示在将中央部(块4)转换为分辨率与输出分辨率相同的图像并输出的情况下的图像存储器22的地址推移和定时的图。
从没有电子变焦的状态到利用块3至5的数据放大的状态为止，如图7、图9所示摄像元件12的读出开始位置为块1，与此相对，将用于放大的数据的块仅设为块4，使电子变焦的放大率为其以上的情况下，如图10所示，将摄像元件12的读出开始位置切换为块2。
由此，能够提前图像(想放大的块4)的输入定时，根据输出同步信号从图像存储器22仅读出块4，能够仅放大块4。
此外，在图10中，没有读出各块中的块1和7，而从摄像元件12仅读出了它们之间的块2至6。
如上所述，摄像元件12是例如X-Y型的CMOS，能够仅读出X轴方向、Y轴方向的规定地址的像素值，因此，这样能够切换与想放大的范围相应的读出位置。
在摄像元件12是卷帘快门方式的摄像元件(CMOS传感器等)的情况下，当如上所述改变摄像元件12的读出开始位置时，在该改变时(转变时)最大曝光时间也发生改变。
图11是表示通过将读出开始位置进行降低的转变(使电子变焦的放大率比通常(由图像存储器22读出的块3至5能够放大的范围)更放大的转变)而使最大曝光时间变短的图。
在图11中，转变时的最大曝光时间(3)比转变前后的最大曝光时间(1)、(2)、(4)、(5)更短。因此在该情况下，用于使出现在输出图像上的最大曝光时间的变化的影响不明显的方法，可考虑通过控制部15对转变前后的最大曝光时间进行控制的方法。
图12是表示如下例子的图，即由于转变时的最大曝光时间(3)变短，因此将转变前后的最大曝光时间(2)和(4)，控制在通常时的最大曝光时间即最大曝光时间(1)、(5)和转变时的最大曝光时间(3)的中间的时间。
通过这样对转变前后的最大曝光时间进行控制，能够防止在读出开始位置转变时最大曝光时间急剧变化，使出现在输出图像上的最大曝光时间变化的影响不明显。
图13是表示通过将读出开始位置提高的转变(将电子变焦的放大率从放大(将摄像元件12的读出开始位置作为块2来放大块4的范围)转变到通常)而使最大曝光时间变长的图。
在图13中，转变时的最大曝光时间(3)比转变前后的最大曝光时间(1)、(2)、(4)、(5)更长。因此在该情况下，作为使出现在输出图像上的最大曝光时间的变化的影响不明显的方法，考虑通过控制部15对转变时的最大曝光时间进行控制的方法。
图14是表示由于转变时的最大曝光时间(3)变大，因此将转变时的最大曝光时间(3)控制成与通常时的最大曝光时间相同的时间的示例的图。
通过这样控制最大曝光时间，能够防止在读出开始位置的转变时使最大曝光时间急剧变化，使出现在输出图像上的最大曝光时间变化的影响不明显。
参照图15的流程图，说明图像显示装置1的摄像处理。
在步骤S1中，横分辨率转换电路21读出输入图像数据并进行横分辨率转换，将图像数据写入图像存储器22。
在步骤S2中，控制部15判断是否从图像输入开始经过了(1/3)V，重复进行处理直到判断为从图像输入开始经过了(1/3)V。并且，在判断为从图像输入开始经过了(1/3)V的情况下进入步骤S3，纵分辨率转换电路23在控制部15的控制下，从图像存储器22读出输入图像数据并进行纵分辨率转换。
在该(1/3)V的期间内，通过对已经写入到图像存储器22中的输入图像数据的从最上部行到下面的规定行进行纵分辨率转换处理，由此，能够在输入图像数据的前1/3部分由于之后的部分的覆盖而消失之前，输出与输出图像的纵分辨率相同的图像。
在步骤S4中，控制部15判断用户的摄像操作是否结束，在判断为用户的摄像操作没有结束的情况下，返回步骤S1，转移到下一画面的摄像处理。
然后，在步骤S4中，在判断为用户的摄像操作结束的情况下，结束该摄像处理。
通过进行以上的处理，输入图像中的有效范围部分被转换为分辨率与输出图像相同的图像，作为输出图像相对于输入图像延迟(1/3)V而输出。因而，与可记录整个一个画面的以往的容量相比，能够使图像存储器22的容量变成1/3程度。
此外，输入图像数据的分辨率、输出图像数据的分辨率、有效范围的分辨率等不限于以上的示例，可以根据规格等进行适当改变。
另外，作为图像显示装置1例举了摄像机进行了说明，但是并不限于此，本发明也可以适用于例如数字静像照相机的运动图像模式等。
上述的一系列处理既可以由硬件执行，也可以由软件执行。在由软件执行一系列处理的情况下，从程序记录介质将构成该软件的程序安装到：装入到专用的硬件中的计算机中；或者可通过安装各种程序来执行各种功能的、例如通用的个人计算机等中。
图16是表示通过程序执行上述一系列处理的个人计算机的结构的例子的框图。
CPU(Central Processing Unit：中央处理器)101根据存储在ROM(Read Only Memory：只读存储器)102或存储部108中的程序来执行各种处理。在RAM(Random Access Memory：随机存取存储器)103中适当存储有CPU101所执行的程序、数据等。这些CPU101、ROM102以及RAM103通过总线104相互连接。
CPU101还通过总线104与输入输出接口105连接。在输入输出接口105上连接有由键盘、鼠标、麦克风等构成的输入部106、由显示器、扬声器等构成的输出部107。CPU101对应于从输入部106输入的指令来执行各种处理。并且，CPU101将处理的结果输出到输出部107。
与输入输出接口105连接的存储部108例如由硬盘构成，存储CPU101所执行的程序、各种数据。通信部109通过因特网、局域网等网络与外部装置进行通信。
当安装了磁盘、光盘、磁光盘、或半导体存储器等可移动介质111时，连接在输入输出接口105上的驱动器110驱动上述介质，获取记录在那里的程序、数据等。获取的程序、数据根据需要被传送到存储部108并被存储。
安装在计算机中、保存处于可由计算机执行的状态的程序的程序记录介质，如图16所示由可移动介质111、或者构成临时或永久保存程序的ROM102、存储部108的硬盘等构成，其中，上述可移动介质111是磁盘(包含软盘)、光盘(包含CD-ROM(CompactDisk-Read Only Memory：光盘只读存储器)、DVD(DigitalVersatile Disc：数字多功能光盘))、磁光盘、或者由半导体存储器等构成的封装介质。根据需要通过作为路由器、调制解调器等的接口的通信部109，利用例如局域网、因特网、数字卫星广播之类的有线或无线的通信介质，将程序保存在程序记录介质中。
此外，在本说明书中，对程序进行记述的步骤，不仅包含按照记载的顺序按时间序列进行的处理，而且包含未必按时间序列进行处理、而并行或者单独执行的处理。

Claims (5)

1.一种图像显示装置，具有将拍摄的整个图像的一部分进行放大显示的电子变焦功能，
该图像显示装置具备：
摄像单元，可切换图像的读出开始位置；
写入单元，为了使得在从存储器读出图像的定时已写入有以整个图像的中心为基准的规定范围的数据的至少一部分，该写入单元抽出由上述摄像单元读出而作为摄像结果输入的图像中的上述规定范围的图像，将抽出的图像写入到上述存储器中；
读出单元，在上述读出的定时，开始读出由上述写入单元写入到上述存储器中的图像，将从上述存储器读出的上述规定范围的图像转换为规定的分辨率的图像并输出；以及
控制单元，当由上述读出单元读出的图像的范围比想进行放大显示的范围宽时，控制上述摄像单元的读出开始位置，使得读出的图像的范围变窄。
2.根据权利要求1所述的图像显示装置，其特征在于，
还具备曝光时间控制单元，该曝光时间控制单元对由上述控制单元控制的上述摄像单元的读出开始位置的转变前后的最大曝光时间进行控制。
3.根据权利要求1所述的图像显示装置，其特征在于，
针对输入的图像的输入同步信号、和针对由读出单元输出的图像的输出同步信号相互非同步，在将上述输入同步信号的周期设为V时，上述输出同步信号相对于上述输入同步信号延迟(1/3)V而输出。
4.一种图像显示方法，是具有将拍摄的整个图像的一部分进行放大显示的电子变焦功能的图像显示装置的图像显示方法，包含以下步骤：
对图像的读出开始位置进行切换，
为了使得在从存储器读出图像的定时已写入有以整个图像的中心为基准的规定范围的数据的至少一部分，抽出被读出而作为摄像结果输入的图像中的上述规定范围的图像，将抽出的图像写入到上述存储器中，
在上述读出的定时，开始读出写入到上述存储器中的图像，将从上述存储器读出的上述规定范围的图像转换为规定的分辨率的图像并输出，
当读出的图像的范围比想进行放大显示的范围宽时，控制读出开始位置，使得读出的图像的范围变窄。
5.一种程序，使计算机执行具有将拍摄的整个图像的一部分进行放大显示的电子变焦功能的图像显示装置的图像处理，该程序使计算机执行包括如下步骤的处理：
对图像的读出开始位置进行切换，
为了使得在从存储器读出图像的定时已写入有以整个图像的中心为基准的规定范围的数据的至少一部分，抽出被读出而作为摄像结果输入的图像中的上述规定范围的图像，将抽出的图像写入到上述存储器中，
在上述读出的定时，开始读出写入到上述存储器中的图像，将从上述存储器读出的上述规定范围的图像转换为规定的分辨率的图像并输出，
当读出的图像的范围比想进行放大显示的范围宽时，控制读出开始位置，使得读出的图像的范围变窄。
CNB2006101673409A 2005-12-27 2006-12-27 图像显示装置和方法 Expired - Fee Related CN100456810C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005374681 2005-12-27
JP2005374681A JP4320658B2 (ja) 2005-12-27 2005-12-27 撮像装置、制御方法、並びにプログラム

Publications (2)

Publication Number Publication Date
CN1992816A true CN1992816A (zh) 2007-07-04
CN100456810C CN100456810C (zh) 2009-01-28

Family

ID=38193324

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2006101673409A Expired - Fee Related CN100456810C (zh) 2005-12-27 2006-12-27 图像显示装置和方法

Country Status (3)

Country Link
US (1) US8009337B2 (zh)
JP (1) JP4320658B2 (zh)
CN (1) CN100456810C (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101394462B (zh) * 2007-09-21 2012-05-23 佳能株式会社 信息处理装置及信息处理方法
CN102629140A (zh) * 2012-03-22 2012-08-08 圆展科技股份有限公司 摄影机定位系统及其控制方法
CN102932590A (zh) * 2011-08-08 2013-02-13 奥林巴斯映像株式会社 摄像装置
CN104704808A (zh) * 2012-10-09 2015-06-10 奥林巴斯株式会社 摄像显示系统、摄像装置、摄像方法和程序
CN105144281A (zh) * 2013-04-26 2015-12-09 夏普株式会社 存储器控制装置和便携终端

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4727457B2 (ja) * 2006-03-08 2011-07-20 富士フイルム株式会社 撮影装置
JP5142491B2 (ja) * 2006-07-31 2013-02-13 株式会社リコー 画像表示装置、画像表示方法及び画像表示プログラム
JP2009042338A (ja) * 2007-08-07 2009-02-26 Victor Co Of Japan Ltd 画素数変換方法、画素数変換装置及び画素数変換プログラム
US20100188579A1 (en) * 2009-01-29 2010-07-29 At&T Intellectual Property I, L.P. System and Method to Control and Present a Picture-In-Picture (PIP) Window Based on Movement Data
US20100188429A1 (en) * 2009-01-29 2010-07-29 At&T Intellectual Property I, L.P. System and Method to Navigate and Present Image Libraries and Images
US20100192181A1 (en) * 2009-01-29 2010-07-29 At&T Intellectual Property I, L.P. System and Method to Navigate an Electonic Program Guide (EPG) Display
JP5348035B2 (ja) * 2010-03-19 2013-11-20 セイコーエプソン株式会社 プロジェクター
US8937673B2 (en) * 2010-05-18 2015-01-20 Seiko Epson Corporation Image-displaying device and display timing control circuit
JP5163702B2 (ja) 2010-06-16 2013-03-13 セイコーエプソン株式会社 撮影装置およびタイミング制御回路
JP5121978B2 (ja) * 2010-08-30 2013-01-16 キヤノン株式会社 画像処理装置及びその制御方法
JP2012099876A (ja) * 2010-10-29 2012-05-24 Sanyo Electric Co Ltd 画像処理装置、撮像装置、画像処理方法、プログラム
JP5734082B2 (ja) * 2011-05-11 2015-06-10 キヤノン株式会社 撮像装置及びその制御方法、並びにプログラム
DE102014102689A1 (de) * 2014-02-28 2015-09-03 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Laufbildkameraanordnung und Verfahren zum Betreiben einer Laufbildkameraanordnung
JP6489802B2 (ja) * 2014-11-13 2019-03-27 キヤノン株式会社 撮像装置およびその制御方法、プログラム、並びに記憶媒体
JP6544939B2 (ja) * 2015-02-16 2019-07-17 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
US10321014B2 (en) * 2015-09-29 2019-06-11 Kyocera Document Solutions Inc. Image reading apparatus and image forming apparatus, comprising at least a mode reception and a selection of at least a quality first mode or a speed first mode

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5812189A (en) * 1992-06-23 1998-09-22 Canon Kabushiki Kaisha Video camera apparatus
JP3406924B2 (ja) * 1993-08-27 2003-05-19 キヤノン株式会社 画像処理装置及びその方法
US6630950B1 (en) * 1998-03-19 2003-10-07 Canon Kabushiki Kaisha Apparatus for improving image vibration suppression
US7091944B2 (en) * 2002-11-03 2006-08-15 Lsi Logic Corporation Display controller
JP3925415B2 (ja) * 2003-01-22 2007-06-06 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
JP4225241B2 (ja) 2004-05-13 2009-02-18 ソニー株式会社 画像表示装置
JP4434939B2 (ja) * 2004-12-27 2010-03-17 キヤノン株式会社 撮像装置及びその制御方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101394462B (zh) * 2007-09-21 2012-05-23 佳能株式会社 信息处理装置及信息处理方法
CN102932590A (zh) * 2011-08-08 2013-02-13 奥林巴斯映像株式会社 摄像装置
CN102932590B (zh) * 2011-08-08 2015-04-29 奥林巴斯映像株式会社 摄像装置
CN102629140A (zh) * 2012-03-22 2012-08-08 圆展科技股份有限公司 摄影机定位系统及其控制方法
CN104704808A (zh) * 2012-10-09 2015-06-10 奥林巴斯株式会社 摄像显示系统、摄像装置、摄像方法和程序
CN104704808B (zh) * 2012-10-09 2017-10-13 奥林巴斯株式会社 摄像显示系统、摄像装置、摄像方法和程序
CN105144281A (zh) * 2013-04-26 2015-12-09 夏普株式会社 存储器控制装置和便携终端
US9653045B2 (en) 2013-04-26 2017-05-16 Sharp Kabushiki Kaisha Memory control device and mobile terminal
CN105144281B (zh) * 2013-04-26 2017-07-28 夏普株式会社 存储器控制装置和便携终端

Also Published As

Publication number Publication date
CN100456810C (zh) 2009-01-28
JP4320658B2 (ja) 2009-08-26
US20070146810A1 (en) 2007-06-28
JP2007180717A (ja) 2007-07-12
US8009337B2 (en) 2011-08-30

Similar Documents

Publication Publication Date Title
CN1992816A (zh) 图像显示装置和方法、以及程序
CN1173553C (zh) 成像设备
EP1744554B1 (en) Imaging device and method
CN1147129C (zh) 成像设备和记录/再现设备
CN1753458A (zh) 摄影装置及摄影方法
CN1943221A (zh) 图像处理装置
JP4433883B2 (ja) ホワイトバランス補正装置及びホワイトバランス補正方法、プログラム、電子カメラ装置
CN1835556A (zh) 像素插值装置及照相机装置
JP2008124826A (ja) 撮像装置、表示制御方法及びプログラム
CN1941852A (zh) 摄影装置、摄影方法和程序
CN1184806C (zh) 成像装置和记录/再现装置
CN1697483A (zh) 图像显示装置
JP2006340070A (ja) 撮像装置及び撮像方法
US7710464B2 (en) Image photographing and recording device and method
JP5607911B2 (ja) 画像処理装置、撮像装置、画像処理方法、および、画像処理プログラム
JP4752652B2 (ja) 撮像装置、撮像画像表示方法、及び、プログラム
JP2005277618A (ja) 撮像装置、シェーディング補正装置、及びシェーディング補正方法
JP4535089B2 (ja) 撮像装置、画像処理方法及びプログラム
US11729506B2 (en) Imaging element with processor configured to receive vibration information, imaging apparatus, operation method of imaging element, and program
JP2008071150A (ja) 画像処理装置、画像処理プログラム及び撮影装置
CN1647520A (zh) 记录重放装置
JP4147098B2 (ja) 画像処理装置及び画像処理方法
JP2003087640A (ja) 撮像装置、信号処理装置及び制御方法
CN1921568A (zh) 成像设备及图像数据处理方法
CN1225542A (zh) 摄像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090128

Termination date: 20121227