CN101427302A - 图像合成装置以及图像合成方法 - Google Patents

图像合成装置以及图像合成方法 Download PDF

Info

Publication number
CN101427302A
CN101427302A CNA2006800543622A CN200680054362A CN101427302A CN 101427302 A CN101427302 A CN 101427302A CN A2006800543622 A CNA2006800543622 A CN A2006800543622A CN 200680054362 A CN200680054362 A CN 200680054362A CN 101427302 A CN101427302 A CN 101427302A
Authority
CN
China
Prior art keywords
mentioned
image
data
smoothing
view data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800543622A
Other languages
English (en)
Other versions
CN101427302B (zh
Inventor
椿泰范
田中敦
萩原利幸
内藤麻奈美
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN101427302A publication Critical patent/CN101427302A/zh
Application granted granted Critical
Publication of CN101427302B publication Critical patent/CN101427302B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/80—2D [Two Dimensional] animation, e.g. using sprites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0261—Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/18—Use of a frame buffer in a display terminal, inclusive of the display panel
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)
  • Studio Circuits (AREA)

Abstract

迁移信息计算部(2)计算图像的迁移效果的移动像素数，图像生成部(3a)读出根据舍去移动像素数计算出的图像文件(1a、1b)的描绘源区域，写入到根据舍去移动像素数计算出的图像生成缓冲器(12a)的描绘目的区域，图像生成部(3b)读出根据舍入移动像素数计算出的图像文件(1a、1b)的描绘源区域，写入到根据舍入移动像素数计算出的图像生成缓冲器(12b)的描绘目的区域，图像内插合成部(4)根据利用移动像素数计算出的合成比率合成图像生成缓冲器(12a、12b)的各图像数据而写入到内插合成缓冲器(13)。

Description

图像合成装置以及图像合成方法
技术领域
本发明涉及进行图像的移动而进行有效显示的图像合成装置。
背景技术
近年来，随着显示装置的薄型化、显示装置/计算机的价格降低和性能提高，在大街上随处可见在吸引众人目光的设施或室外各种显示装置上显示出过场动画(eyecatch)或者宣传广告用的文章、图像、影像等多媒体内容的例子。
作为使用了计算机的内容显示的优点，可以举出内容切换非常容易的例子。另外，还具有如下优点：即，还可以仅通过设定自由地变更内容显示时间等或者利用程序自由地设定内容切换方法等，可以容易地扩展内容提示方法的宽度。
作为这样的显示系统的一个例子，可以举出在店铺的招牌等中使用的显示装置上提示广告和宣传文字的系统。在上述系统中，通过依次切换多个静止图像、或者滚动显示分辨率为显示装置以上的图像、或者将长的宣传文字变换成图像并一边将其移动一边显示而给予图像效果，从而可以在有限面积的显示装置上提示较多的图像，进而还可以更引人注目。
作为以往的图像合成装置，具备：图像存储器，存储构成多个图像的像素值；索引图(key plan)，存储上述像素值间的合成比率；图像合成单元，利用上述合成比率进行上述像素值间的合成并输出上述像素值间的合成值；显示控制单元，产生用于从上述图像存储器和上述索引图向上述图像合成单元读出上述像素值以及上述合成比率的显示开始地址；滚动寄存器，保持与上述显示开始地址不同的地址值；以及地址切换单元，切换上述显示开始地址和上述滚动寄存器保持的地址，在该装置中，将滚动处理中的两个图像间的边界设为任意的形状(例如专利文献1)。
专利文献1：日本特开平5-313645号公报
以往的图像合成装置由于具有如上结构，所以在移动图像时在垂直同步信号的一个周期期间仅可以以显示装置中的整数像素单位精度进行移动，但是由于在垂直同步信号的每一个周期以整数像素单位精度移动，所以能够设定的迁移时间仅被限制在迁移效果完成的时间，存在难以在期望的迁移时间上运用这样的课题。
发明内容
本发明是为了解决如上所述课题而完成的，其目的在于得到一种图像合成装置，通过按照垂直同步信号的每一个周期对小数像素(以下称为子像素)单位精度的图像移动进行控制，并应对图像的小数像素(子像素)单位精度的移动，从而可以更灵活地设定迁移时间。
本发明的图像合成装置具备：迁移信息计算部，计算作为迁移图像的迁移信息的移动像素数；以及图像合成部，输出以基于上述移动像素数的合成比率，对与舍去在上述迁移信息计算部计算出的上述移动像素数的小数点以下的舍去移动像素数对应的上述迁移图像中的图像数据、和与舍入上述移动像素数的小数点以下的舍入移动像素数对应的上述迁移图像中的图像数据进行合成的合成数据。
根据本发明，能够对小数像素(子像素)单位精度的图像移动进行控制，得到能够消除迁移时间的设定限制这样的效果。
附图说明
图1是示出本发明的实施方式1的图像合成装置的结构的框图。
图2是示出本发明的实施方式1的图像合成装置中的图像数据的滚动效果的概要的说明图。
图3是示出本发明的实施方式1的图像合成装置的处理步骤的流程图。
图4是示出本发明的实施方式2的图像合成装置的结构的框图。
图5是示出本发明的实施方式2的图像合成装置中的图像数据的滚动效果的概要的说明图。
图6是示出本发明的实施方式2的图像合成装置中的图像数据按照滚动效果的画面变化的说明图。
图7是示出本发明的实施方式2的图像合成装置的处理步骤的流程图。
图8是说明本发明的实施方式2的图像合成装置的图像生成部的处理的说明图。
图9是示出本发明的实施方式2的图像合成装置的各部中的图像数据的变化样子的说明图。
图10是示出本发明的实施方式2的图像合成装置的各部中的图像数据的亮度值变化的样子的说明图。
图11是示出本发明的实施方式3的图像合成装置的结构的框图。
图12是示出本发明的实施方式3的具备输出选择部的图像合成装置的结构的框图。
图13是示出本发明的实施方式3的图像合成装置的处理步骤的流程图。
图14是示出本发明的实施方式3的图像合成装置的各部中的图像数据的变化样子的说明图。
图15是示出本发明的实施方式3的图像合成装置的各部中的图像数据的亮度值变化样子的说明图。
图16是示出本发明的实施方式4的图像合成装置的结构的框图。
图17是示出本发明的实施方式4的图像合成装置的处理步骤的流程图。
图18是示出本发明的实施方式5的图像合成装置的结构的框图。
图19是示出本发明的实施方式5的图像合成装置的处理步骤的流程图。
图20是示出本发明的实施方式6的图像合成装置的结构的框图。
图21是示出本发明的实施方式6的图像合成装置的处理步骤的流程图。
图22是示出本发明的实施方式7的图像合成装置的结构的框图。
图23是示出本发明的实施方式7的图像合成装置的处理步骤的流程图。
图24是示出本发明的实施方式的图像合成装置中的图像数据按照滑入效果的画面变化的说明图。
图25是示出本发明的实施方式的图像合成装置中的图像数据按照滑出效果的画面变化的说明图。
图26是示出本发明的实施方式的图像合成装置中的图像数据按照擦除效果得到的画面变化的说明图。
图27是示出本发明的实施方式的图像合成装置中的图像数据按照擦除效果的变形例(1)的画面变化的说明图。
图28是示出本发明的实施方式的图像合成装置中的图像数据按照擦除效果的变形例(2)的画面变化的说明图。
具体实施方式
以下，为了更详细地说明本发明，根据附图对具体实施方式进行说明。
实施方式1
图1是示出本发明的实施方式1的图像合成装置的结构的框图。本图像合成装置根据指定的迁移效果使一个图像迁移，由迁移信息计算部2和图像合成部30构成。图像合成部30具备图像生成部3a、3b、图像内插合成部4以及输出控制部5，由图像生成部3a、3b以及图像内插合成部4构成。
在本发明的实施方式1中，假设从迁移信息计算部2提供给图像生成部3a、3b以及图像内插合成部4的迁移信息是图像的移动像素数mv。在此，移动像素数是指，按照迁移效果移动的图像从迁移开始时的位置起移动的像素数。另外，如果假设描绘定时与垂直同步信号同步，则在刷新速率为60Hz时，每隔16.66...毫秒产生描绘定时。
接下来对图像合成装置的动作进行说明。
在图1中，图像文件1保持图像数据，包括要迁移的图像数据11，作为向图像生成部3a、3b的输入而提供图像数据11。例如当在图像文件1中可以设置缓冲器的情况下也可以抽取所需的图像数据11并积蓄到缓冲器而输出，当在图像合成部30中可以设置缓冲器的情况下也可以抽取所需的图像数据11而预先积蓄到缓冲器，另外当无法设置缓冲器的情况下也可以从图像文件1向图像合成部30逐次输出图像数据11。
迁移信息计算部2计算图像的移动像素数mv。
图像生成部3a将根据舍去(round down)从迁移信息计算部2得到的移动像素数的小数点以下的舍去移动像素数计算的图像文件1的图像数据11的第一描绘源区域部分作为输入而得到，并作为与该第一描绘源区域同样地根据舍去移动像素数计算的生成数据12a的第一描绘目的区域部分而输出，同样，将根据舍去移动像素数的小数点以下的舍去移动像素数计算的图像文件1的图像数据11的第二描绘源区域部分作为输入而得到，并作为与该第二描绘源区域同样地根据舍去移动像素数计算的生成数据12a的第二描绘目的区域部分而输出。关于该生成数据12a，假设，当在图像生成部3a内部可以内置缓冲器的情况下，读入图像数据11而生成并积蓄后输出，当无法内置缓冲器的情况下，一边读入而逐次生成一边输出。
图像生成部3b将根据舍入(round up)从迁移信息计算部2得到的移动像素数的小数点以下的舍入移动像素数计算的图像文件1的图像数据11的第一描绘源区域部分作为输入而得到，并作为与该第一描绘源区域同样地根据舍入移动像素数计算的生成数据12b的第一描绘目的区域部分而输出，同样，将根据舍入移动像素数的小数点以下的舍入移动像素数计算的图像文件1的图像数据11的第二描绘源区域部分作为输入而得到，并作为与该第二描绘源区域同样地根据舍入移动像素数计算的生成数据12b的第二描绘目的区域部分而输出。关于该生成数据12b，假设，当在图像生成部3b内部可以内置缓冲器的情况下，读入图像数据11而生成并积蓄后输出，当无法内置缓冲器的情况下，一边读入而逐次生成一边输出。
图像内插合成部4根据利用从迁移信息计算部2得到的图像的移动像素数mv计算出的后述的合成比率f，合成图像生成部3a、3b的生成数据12a、12b而生成内插合成数据13。关于该内插合成数据13，假设，当在图像生成部4内部可以内置缓冲器的情况下，读入生成数据12a、12b而合成并积蓄后输出，当无法内置缓冲器的情况下，一边读入而逐次合成一边输出。
如图1的框图所示，该内插合成数据13成为图像合成部30的输出，即合成数据31。
输出控制部5接收所合成的合成数据31，并按照每个描绘定时输出到外部的显示装置(未图示)而进行显示。
迁移信息计算部2更新作为迁移信息的移动像素数，图像合成装置反复上述动作。
在此，例如，图2将从右向左滚动的迁移效果的概要作为(A)方式、  (B)方式而示出。在(A)方式中，图像数据11与生成数据12a的尺寸相等，将从图像数据11切取的左端矩形区域作为生成数据12a的右端矩形区域进行贴合。另外，在(B)方式中，所输入的图像数据11相对要合成的有效区域，在水平方向上充分大，因此一边适当地设定描绘源区域一边切出而直接向描绘目的区域进行贴附。这些是因图像数据11与生成数据12a的尺寸的差异而不同的代表性的滚动实现方式，但在(B)方式中，当到达图像的右端时，还可以与(A)方式组合而切出左端区域来贴合。在采用(B)方式的情况下，由于将一张图像数据11的描绘源区域、生成数据12a的描绘目的区域分别分段成两个而通过两个阶段来生成，所以如后所述流程图的说明的一部分不同。
如上所述，通过在图像生成部3a、3b中将前段的多个图像数据的描绘源区域部分作为输入而得到所对应的描绘目的区域部分，从而构成并输出可以在后段存取的一个生成数据12a、12b。
图3是示出本发明的实施方式1的图像合成装置的处理步骤的流程图。根据本图对图像合成装置的处理步骤进行说明。
在步骤ST1中，迁移信息计算部2计算从初始的迁移前起的图像的移动像素数mv。例如，在以一定速度进行移动的情况下，在之前描绘时的移动像素数上增加LV/T，从而得到移动像素数mv。其中，L表示图像的总移动像素数，T表示迁移时间，V表示显示装置的显示图像的更新间隔时间。在此计算出的移动像素数mv与根据预先设定的迁移效果求出每个图像的描绘源区域以及描绘目的区域的区域计算式信息一起通知到图像生成部3a、3b，并且为了计算合成比率而通知到图像内插合成部4。
在步骤ST2中，在图2的(A)的方式、(B)方式中，图像生成部3a均根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的第一描绘源区域以及第一描绘目的区域的区域计算式信息，利用下式(1)计算图像生成部3a中的舍去移动像素数mv_a。
mv_a＝floor(mv)    (1)
在此，“floor(mv)”表示对移动像素数mv进行舍去而整数化的数值函数。
接下来，求出当所计算出的舍去移动像素数为mv_a时的与图像文件1的图像数据11对应的第一描绘源区域和与生成数据12a对应的第一描绘目的区域，将图像数据11的第一描绘源区域部分作为输入，输出到生成数据12a的第一描绘目的区域部分。
步骤ST3仅在之前说明的(A)方式的情况下执行。在步骤ST3中，与步骤ST2同样地，图像生成部3a求出所计算出的舍去移动像素数为mv_a时的针对图像文件1的图像数据11的第二描绘源区域和针对生成数据12a的第二描绘目的区域，将图像数据11的第二描绘源区域部分作为输入，输出到生成数据12a的第二描绘目的区域部分。第二描绘源区域在步骤ST2中相当于对图像数据11进行切取的左端矩形区域，并且第二描绘目的区域相当于针对生成数据12a的右端矩形区域。
在步骤ST4中，在图2的(A)的方式、  (B)方式中，图像生成部3b均根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的第一描绘源区域以及第一描绘目的区域的区域计算式信息，利用下式(2)计算图像生成部3b中的舍入移动像素数mv_b。
mv_b＝ceil(mv)    (2)
在此，“ceil(mv)”表示对移动像素数mv进行舍入而整数化的数值函数。
接下来，求出当所计算出的舍入移动像素数为mv_b时的与图像文件1的图像数据11对应的第一描绘源区域和与生成数据12b对应的第一描绘目的区域，将图像数据11的第一描绘源区域部分作为输入，输出到生成数据12b的第一描绘目的区域部分。
步骤ST5仅在之前说明的(A)方式的情况下执行。在步骤ST5中，与步骤ST4同样地，图像生成部3b求出所计算出的舍入移动像素数为mv_b时的针对图像文件1的图像数据11的第二描绘源区域和针对生成数据12b的第二描绘目的区域，将图像数据11的第二描绘源区域部分作为输入，输出到生成数据12b的第二描绘目的区域部分。第二描绘源区域在步骤ST4中相当于对图像数据11进行切取的左端矩形区域，并且第二描绘目的区域相当于针对生成数据12b的右端矩形区域。
在此说明的步骤ST2至步骤ST5，只要各个描绘源区域与描绘目的区域正确地对应，则也可以对处理的应用顺序进行替换。
在步骤ST6中，图像内插合成部4使用从迁移信息计算部2得到的移动像素数mv，利用下式(3)计算合成比率f。
f＝mv-floor(mv)    (3)
接下来，图像内插合成部4使用所计算出的合成比率f，利用下式(4)，将生成数据12a和生成数据12b作为输入而进行混合(blend)，输出内插合成数据13。
I’(x，y)＝(1-f)·Ia(x，y)+f·Ib(x，y)    (4)
在此，I’(x，y)表示内插合成数据13中的坐标(x，y)的亮度值，Ia(x，y)表示生成数据12a中的坐标(x，y)的亮度值，Ib(x，y)表示生成数据12b中的坐标(x，y)的亮度值。
另外，在上述式(4)中，生成数据12a的Ia(x，y)、12b的Ib(x，y)是以内置缓冲器而积蓄的情况为前提时的参考描述，但未内置缓冲器时的参考描述如下式(5)所示。
I’(x，y)＝(1-f)·I(x+floor(mv)，y)
+f·I(x+ceil(mv)，y)    (5)
在此，I(x，y)表示图像数据11中的坐标(x，y)的亮度值。但是，在如图2所示到达图像的右端时从图像的左端起连接的情况下，假设上述式(5)的x坐标，即x+floor(mv)以及x+ceil(mv)为针对图像宽度的剩余值。
在本发明的实施方式1中，如图1的框图所示，该内插合成数据13成为图像合成部30的输出，即合成数据31。
最后，在步骤ST7中，输出控制部5将所生成的合成数据31与描绘定时同步地显示在显示装置的画面上。
之后，返回到最初的步骤ST1，迁移信息计算部2更新相当于迁移信息的移动像素数mv，直到移动像素数成为mv＝L为止，反复执行直至步骤ST6的处理。
如上所述，根据本发明的实施方式1，由于在物理上按照每个垂直同步信号仅可以以整数像素单位精度移动图像，所以在图像的迁移时间上有设定限制的图像合成装置中，在进行不仅表现了整数而且还表现了小数点以下的数值的小数像素(子像素)移动时，制成移动了舍去所移动的像素数的小数点以下的部分之后的图像数据和移动了舍入的部分之后的图像数据，并将这些以小数点以下值的合成比率f合成，从而能够对小数像素(子像素)单位精度的图像移动进行控制，得到能够消除迁移时间的设定限制这样的效果。
另外，在本发明的实施方式1中，说明了在每次描绘时从图像文件1中直接参照图像数据11的情况，但在迁移开始前将图像数据11临时存储到图像缓冲器，并在描绘时从图像缓冲器中读出，也可以得到同样的效果。另外，同样，对于图像生成部3a、3b的生成数据12a、12b、图像内插合成部4的内插合成数据13，也可以构成为不直接输出而分别设置缓冲器来存储后读出。另外，在以压缩形式提供所输入的图像文件1的情况下，可以在图像数据11的参照阶段解压缩，也可以预先解压缩而存储到缓冲器。
另外，关于迁移效果，除了在图2中示出的滚动效果以外，还可以举出后述的滑入效果、滑出效果等，但这些基本上可以通过变更描绘源区域和描绘目的区域的设定方法来应用于本发明的图像合成装置中。
实施方式2
图4是示出本发明的实施方式2的图像合成装置的结构的框图。本图像合成装置根据指定的迁移效果使两个图像迁移，具备图像文件1a、1b、迁移信息计算部2、图像生成部3a、3b、图像内插合成部4以及输出控制部5。在此，将包括图像生成部3a、3b以及图像内插合成部4的结构范围设为图像合成部30。另外，在图中，本发明的实施方式1中的相同符号表示相同或相当的部分。
在图4中，与上述实施方式1中的图1的结构差异在于，图像文件1成为图像文件1a、1b这两个，并分别输入到图像生成部3a、3b。其中，例如上述实施方式1的图2的(B)方式是图像大于显示范围的例子，但如图5所示，对于该图像被分割成两个图像并从各自得到描绘源区域而贴合的情况，进行说明。
在本发明的实施方式2中，与上述实施方式1同样地，假设从迁移信息计算部2提供到图像生成部3a、3b以及图像内插合成部4的迁移信息为图像的移动像素数mv。
接下来对图像合成装置的动作进行说明。
在图4中，图像文件1a、1b包括图像数据11a、11b，作为向图像生成部3a、3b的输入而提供图像数据11a、11b。假设，对于该图像数据11a、11b，当可以设置缓冲器的情况下从图像文件1a、1b抽取并积蓄后输出，当无法设置缓冲器的情况下一边从图像文件1a、1b逐次抽取一边输出。
迁移信息计算部2计算与表示迁移效果的行进的迁移信息相当的图像的移动像素数mv。
图像生成部3a将根据舍去从迁移信息计算部2得到的移动像素数的小数点以下的舍去移动像素数计算的图像文件1a的图像数据11a的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据舍去移动像素数计算的生成数据12a的描绘目的区域部分而输出，同样，将根据舍去移动像素数计算的图像文件1b的图像数据11b的描绘源区域部分作为输入而得到，并作为根据舍去移动像素数计算的生成数据12a的描绘目的区域部分而输出。对于该生成数据12a，假设，当在图像生成部3a内部可以内置缓冲器的情况下读入图像数据11a、11b而生成并积蓄后输出，当无法内置缓冲器的情况下一边读入而逐次生成一边输出。
图像生成部3b与图像生成部3a同样地，将根据舍入从迁移信息计算部2得到的移动像素数的小数点以下的舍入移动像素数计算的图像文件1a的图像数据11a的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据舍入移动像素数计算的生成数据12b的描绘目的区域部分而输出，同样，将根据舍入移动像素数计算的图像文件1b的图像数据11b的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据舍入移动像素数计算的生成数据12b的描绘目的区域部分而输出。对于该生成数据12b，假设，当在图像生成部3b内部可以内置缓冲器的情况下读入图像数据11a、11b而生成并积蓄后输出，当无法内置缓冲器的情况下一边读入而逐次生成一边输出。
图像内插合成部4根据利用与从迁移信息计算部2得到的迁移信息相当的图像的移动像素数mv计算出的合成比率f，合成生成数据12a、12b并输出内插合成数据13。
如图4的框图所示，该内插合成数据13成为图像合成部30的输出，即合成数据31。
输出控制部5接收所合成的合成数据31，按照每个描绘定时输出到外部的显示装置(未图示)而进行显示。
迁移信息计算部2更新作为迁移信息的移动像素数，图像合成装置反复上述动作。
另外，在本发明的实施方式2中，在具体说明时，作为一个例子，对于在图像数据11a与图像数据11b之间以5秒的迁移时间进行从右向左的滚动效果时的处理，说明处理步骤。
图6是示出通过图像数据的滚动效果得到的画面变化的图，在此，示出从图像数据11a向图像数据11b从右向左滚动的情况。滚动效果是指，看上去之前显示的图像被接下来显示的图像从画面挤出的效果。
另外，在本发明的实施方式2中使用的例子中，图像数据11a、图像数据11b和显示装置的分辨率全部相同，为320×48。例如，当在迁移时从右向左滚动的情况下，图像数据11a的描绘源区域在迁移开始时为(0，0)-(320，48)，图像数据11b的描绘源区域不存在，但随着迁移，图像数据11a的描绘源区域变化成(n，0)-(320，48)，图像数据11b的描绘源区域变化成(0，0)-(n，48)。此时，图像数据11a的描绘目的区域成为(0，0)-(320-n，48)，图像数据11b的描绘目的区域成为(320-n，0)-(320，48)。然后，直到图像数据11a的描绘源区域和描绘目的区域的面积成为0为止反复进行。由此，看上去图像数据11a被图像数据11b向左挤出。另外，以后，在表示区域的坐标时，描述成(a，b)-(c，d)，其表示左上坐标为(a，b)，右下坐标为(c，d)的矩形区域。
图7是示出本发明的实施方式2的图像合成装置的处理步骤的流程图。按照本图对图像合成装置的处理步骤进行说明。
在步骤ST11中，与上述实施方式1的图3的步骤ST1同样地，迁移信息计算部2计算从迁移前起的图像的移动像素数mv，向图像生成部3a、3b通知求出预先设定的每个图像的描绘源区域以及描绘目的区域的区域计算式信息和所计算出的图像的移动像素数mv。
步骤ST12至步骤ST15相当于将上述实施方式1的图3的步骤ST2至步骤ST5中的第一描绘源区域、第一描绘目的区域、第二描绘源区域、第二描绘目的区域变更成本发明的实施方式2的图像数据11a的描绘源区域、描绘目的区域、图像数据11b的描绘源区域、描绘目的区域的处理。只要各个描绘源区域与描绘目的区域正确地对应，则这些四个步骤也可以对处理的应用顺序进行替换。
在步骤ST12中，图像生成部3a根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，利用上式(1)计算图像生成部3a中的移动像素数mv_a，求出图像文件1a的图像数据11a的描绘源区域a和生成数据12a的描绘目的区域a，将图像文件1a的图像数据11a的描绘源区域a部分作为输入，作为生成数据12a的描绘目的区域a部分而输出。
在步骤ST13中，图像生成部3a根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，利用上式(1)计算图像生成部3a中的移动像素数mv_a，求出图像文件1b的图像数据11b的描绘源区域b和生成数据12a的描绘目的区域b，将图像文件1b的图像数据11b的描绘源区域b部分作为输入，作为生成数据12a的描绘目的区域b部分而输出。
在步骤ST14中，图像生成部3b根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，利用上式(2)计算图像生成部3b中的移动像素数mv_b，求出图像文件1a的图像数据11a的描绘源区域a和生成数据12b的描绘目的区域a，将图像文件1a的图像数据11a的描绘源区域a部分作为输入，作为生成数据12b的描绘目的区域a部分而输出。
在步骤ST15中，图像生成部3b根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，利用上式(2)计算图像生成部3b中的移动像素数mv_b，求出图像文件1b的图像数据11b的描绘源区域b和生成数据12b的描绘目的区域b，将图像文件1b的图像数据11b的描绘源区域b部分作为输入，作为生成数据12b的描绘目的区域b部分而输出。
图8是说明图像数据11a、11b与生成数据12a、12b的生成数据的关系的图。在此，示出了进行如下处理的情况：根据从移动像素数mv计算出的mv_a、mv_b，向生成数据12a、12b的各个描绘目的区域a部分输出分别从图像数据11a切出的描绘源区域a部分，并且向生成数据12a、12b的各个描绘目的区域b部分输出分别从图像数据11b切出的描绘源区域b部分。
例如，在移动像素数mv为7.466...像素的情况下，图像生成部3a从图像文件1a读出描绘源区域(7，0)-(320，48)的图像数据11a，并写入到生成数据12a的描绘目的区域(0，0)-(313，48)。另外，图像生成部3a从图像文件1b读出描绘源区域(0，0)-(7，48)的图像数据11b，并写入到生成数据12a的描绘目的区域(313，0)-(320，48)。
同样地，图像生成部3b从图像文件1a读出描绘源区域(8，0)-(320，48)的图像数据11a，并写入到生成数据12b的描绘目的区域(0，0)-(312，48)。另外，图像生成部3b从图像文件1b读出描绘源区域(0，0)-(8，48)的图像数据11b，并写入到生成数据12b的描绘目的区域(312，0)-(320，48)。
在步骤ST16中，与上述实施方式1的图3的步骤ST6同样地，图像内插合成部4使用从迁移信息计算部2得到的移动像素数mv，使用利用上式(3)计算出的合成比率f，利用上式(4)，对生成数据12a和生成数据12b进行混合，作为内插合成数据13而输出。
该内插合成数据13成为图4的框图所示的图像合成部30的输出，即合成数据31。
最后，在步骤ST17中，与上述实施方式1的图3的步骤ST7同样地，输出控制部5将合成数据31与描绘定时同步地显示在显示装置的画面上。
之后，返回到最初的步骤ST11，迁移信息计算部2更新与迁移信息相当的移动像素数mv，直到移动像素数成为mv＝L为止，反复直至步骤ST17的处理。
接下来，根据图9以及图10，依次说明在本发明的实施方式2的图像合成装置中，在移动像素数为mv＝7.466...时输入的图像数据的从各处理部输出的结果的变化。另外，在本发明的实施方式2中，由于图像数据11a与图像数据11b同样地移动，所以在此示出了与本发明的实施方式2的情况同样地迁移一个图像数据时的变化，但在两个的情况下也相同，两个图像的相邻区域的像素在边界混在一起。
图9用亮度值示出本发明的实施方式2的图像合成装置的各部中的图像数据变化的样子。另外，图10用图表示出图9所示的亮度值，示出行进方向，即水平方向的某区域的亮度值的变化。图10(a)、(b)、(c)、(d)分别对应于图9(a)、(b)、(c)、(d)。
图9(a)和将其用图表示出的图10(a)示出图像文件1a(1b)的图像数据11a(11b)的例子。
图9(b)和将其用图表示出的图10(b)示出在图像生成部3a中从图像文件1a(1b)迁移的生成数据12a中当舍去移动像素数为mv_a＝7时的图像数据，在此，图像数据沿着水平方向移动了7个像素。
图9(c)和将其用图表示出的图10(c)示出在图像生成部3b中从图像文件1a(1b)迁移的生成数据12b中当舍入移动像素数为mv_b＝8时的图像数据，在此，图像数据沿着水平方向移动了8个像素。
图9(d)和将其用图表示出的图10(d)示出由图像内插合成部4内插合成后的移动像素数为mv＝7.466...时的内插合成数据13。在此，图9(d)的上段是取小数坐标的理想图像数据，但实际输出的像素值是输出取整数坐标的下段的值。
如果将其用图10的图表说明，则根据移动像素数mv＝7.466...，利用上式(3)计算合成比率f＝0.466...，从图10(a)的图像数据，使用图10(b)所示的生成数据的亮度值Ia(x，y)和图10(c)所示的生成数据的亮度值Ib(x，y)和所计算的合成比率f，利用上式(4)求出图10(d)所示的混合后的内插合成数据的亮度值I’(x，y)。
在图10(d)中，用白色的圆表示的点是移动像素数为mv＝7.466...时的内插合成数据的理想数据中的亮度值，利用下式(6)求出。
Ir(x，y)＝I(x-mv，y)    (6)
在此，Ir(x，y)表示理想数据中的坐标(x，y)的亮度值。
另外，在图10(d)中，用黑色的圆表示的点是移动像素数为mv＝7.466...时的图像内插合成部4中的内插合成数据的亮度值，虽然相对理想数据的亮度值发生了亮度变化，但该亮度值的内插合成数据作为移动像素数为mv＝7.466...时的合成数据而输出到显示装置。
这样，可以实现垂直同步信号的每一个周期的移动像素数不会仅限于整数，而能够自由地设定图像效果的时间的灵活的图像合成装置。
在显示装置中存在一个像素的矩形内为相同亮度值这样的物理上的制约，显示装置中的水平坐标i的像素的亮度值用下式(7)来表示。
I disp ( i ) = ∫ x = i x = i + 1 I ( x ) - - - ( 7 )
在此，Idisp(i)表示在显示装置中水平坐标值为i的像素上显示的亮度值。另外，在将图像数据不进行放大缩小而显示到显示装置的情况下，一个像素的大小依赖于显示装置，所以图像数据的亮度值在i≤x≤i+1中也一定。
与其相对，在将图像数据从右向左移动了移动像素数mv＝7.466...像素的情况下，在显示装置中图像移动后的水平坐标值i的像素上显示的亮度值I’disp(i)用下式(8)求出。
I disp ′ ( i ) = ∫ x = i x = i + 1 I ( x - 7.466 . . . ) = ( 1 - 0.466 . . . ) · ∫ x = i x = i + 1 I ( x - 7 ) + 0.466 . . . · ∫ x = i x = i + 1 I ( x - 8 )
                                              (8)
在此，I(x-7)相当于移动了舍去移动像素数mv的小数点以下的像素数的生成数据12a的图像数据，I(x-8)相当于移动了舍入移动像素数mv的小数点以下的像素数的生成数据12b的图像数据，而且，0.466...相当于小数点以下的合成比率f。因此，亮度值I’disp(i)的图像数据严格来说是相对理想图像数据的近似图像数据，但在显示到显示装置的情况下，相当于以小数像素(子像素)单位精度移动后的图像数据。
如上所述，根据本发明的实施方式2，由于在物理上按照每个垂直同步信号仅可以以整数像素单位精度移动图像，所以在图像的迁移时间上有设定限制的图像合成装置中，在进行不仅表现了整数而且还表现了小数点以下的数值的小数像素(子像素)移动时，制成移动了舍去要移动的像素数的小数点以下的部分之后的图像数据和移动了舍入的部分之后的图像数据，并将这些以小数点以下的值的合成比率f合成，从而能够对小数像素(子像素)单位精度的图像移动进行控制，得到能够消除迁移时间的设定限制这样的效果。
另外，在本发明的实施方式2中，在每次描绘时从各图像文件1a、1b直接读出图像数据，但即使在迁移开始前将图像文件1a、1b的图像数据存储到图像缓冲器，并在描绘时从图像缓冲器读出，也可以得到同样的效果。
另外，显然，虽然在本发明的实施方式2中，在各处理部中具备了输出缓冲器，但即使不具有该缓冲器而一个像素一个像素地将图像生成部3a、3b和图像内插合成部4的全部或一部分集中计算后输出到输出控制部5，也可以得到同样的效果。例如，如果将全部的处理集中计算，则成为上式(5)。
实施方式3
在上述实施方式2中，当以小数像素(子像素)单位精度移动时，在存在与图像数据的移动方向垂直的一个像素宽度的线或者与周围的亮度差大的一个像素的点的情况下，每次描绘时上述区域的周围的亮度会周期性地变化，视觉上看上去线或点的大小也会周期性地变化，其有时对图像整体的迁移效果的质量造成很大影响。因此，在本发明的实施方式3中，对如下的图像合成装置进行说明：在从图像文件1a、1b中将图像数据11a、11b作为输入而得到时，通过对图像数据11a、11b进行平滑化，从而使图像数据11a、11b在移动方向上模糊，从而减小移动方向的两个相邻像素彼此的亮度差，减轻上述问题。
图11是示出本发明的实施方式3的图像合成装置的结构的框图。本图像合成装置按照指定的迁移效果使两个图像迁移，具备图像文件1a、1b、迁移信息计算部2、图像生成部3a、3b、图像内插合成部4、输出控制部5、描绘定时信息存储部6、平滑化处理部7a、7b、迁移效果存储部10以及参数控制部18。在此，将包括参数控制部18、平滑化处理部7a、7b、图像生成部3a、3b以及图像内插合成部4的结构范围设为图像合成部30。另外，在图中，上述实施方式1以及上述实施方式2中的相同符号表示相同或相当的部分。
在图11中，与上述实施方式2中的图4的结构的差异在于，将图像文件1a、1b的图像数据11a、11b通过平滑化处理部7a、7b平滑化后输入到图像生成部3a、3b。
另外，图12是示出本发明的实施方式3的图像合成装置的结构的变形例的框图。本图像合成装置构成为：针对与之前说明的图11的图像合成部30相当的虚线部分的图像内插合成部4的输出，即内插合成数据13，在图像内插合成部4的紧接之后设置输出选择部8，以能够显示从内插合成数据13、图像数据11a、11b选择的合成数据31。
在本发明的实施方式3中，与上述实施方式2同样地，假设从迁移信息计算部2提供给图像生成部3a、3b以及图像内插合成部4的迁移信息为图像的移动像素数mv。
接下来根据设置有输出选择部8的图12，对图像合成装置的动作进行说明。
在图12中，描绘定时信息存储部6更新并存储输出控制部5向显示装置输出了图像数据的描绘定时的识别值，即描绘定时信息。
迁移效果存储部10输出迁移效果信息。
迁移信息计算部2从描绘定时信息存储部6获取描绘定时信息，从迁移效果存储部10获取迁移效果信息，在迁移效果伴随像素移动的情况下，从所获取的描绘定时信息计算与表示下一次描绘时的迁移效果的行进的迁移信息相当的移动像素数mv。
参数控制部18根据从迁移信息计算部2得到的迁移效果的种类生成平滑化参数。
图像文件1a、1b包括图像数据11a、11b，作为向平滑化处理部7a、7b的输入而提供图像数据11a、11b。
平滑化处理部7a、7b对于从图像文件1a、1b得到的图像数据11a、11b，针对图像的移动方向，利用来自参数控制部18的平滑化参数仅进行行进方向的平滑化处理，输出平滑化数据14a、14b。对于该平滑化数据14a、14b，假设，当在平滑化处理部7a、7b内部可以内置缓冲器的情况下，读入图像数据11a、11b并平滑化而积蓄后输出，当无法内置缓冲器的情况下，一边读入而逐次平滑化一边输出。
图像生成部3a将根据舍去从迁移信息计算部2得到的移动像素数的小数点以下的舍去移动像素数计算的平滑化数据14a的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据舍去移动像素数计算的生成数据12a的描绘目的区域部分而输出，将根据舍去移动像素数计算的平滑化数据14b的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据舍去移动像素数计算的生成数据12a的描绘目的区域部分而输出。
图像生成部3b将根据舍入从迁移信息计算部2得到的移动像素数的小数点以下的舍入移动像素数计算的平滑化数据14a的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据舍入移动像素数计算的生成数据12b的描绘目的区域部分而输出，将根据舍入移动像素数计算的平滑化数据14b的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据舍入移动像素数计算的生成数据12b的描绘目的区域部分而输出。
图像内插合成部4根据利用从迁移信息计算部2得到的迁移信息计算出的合成比率f，合成生成数据12a、12b而作为内插合成数据13输出。
输出选择部8根据从迁移信息计算部2得到的迁移信息，选择输出图像数据11a、图像数据11b和内插合成数据13中的某一个。
如图12的框图所示，从该输出选择部8输出的数据成为图像合成部30的输出，即合成数据31。
在此，在不具备输出选择部8的图11所示的图像合成装置的情况下，作为图像内插合成部4的输出的内插合成数据13成为作为图像合成部30的输出的合成数据31。
输出控制部5接收从图像合成部30输出的合成数据31，按照每个描绘定时输出到显示装置(未图示)而进行显示，并向描绘定时信息存储部6通知显示的结束。
迁移信息计算部2更新作为迁移信息的移动像素数，图像合成装置反复上述动作。
另外，关于本发明的实施方式3的图像合成装置中具备的迁移效果存储部10，当迁移信息计算部2内置有迁移效果存储部10的迁移效果信息的存储功能时，与上述实施方式1以及上述实施方式2的图像合成装置的结构同样地，不设置迁移效果存储部10而可以省略。
在本发明的实施方式3中，在具体说明时，作为一个例子，与上述实施方式2同样地，针对在图像数据11a与图像数据11b之间以5秒的迁移时间进行从右向左的滚动效果时的处理，说明处理步骤。
另外，在本发明的实施方式3中，从迁移信息计算部2提供给图像生成部3a、3b的迁移信息表示图像数据的移动像素数mv和迁移效果存储部10提供给迁移信息计算部2的迁移效果信息。在此，迁移效果信息表示迁移效果的种类和迁移时间、区域计算式信息。作为迁移效果的种类，有滚动、后述的滑入、滑出、擦除等。
另外，关于与本发明的实施方式3的图像合成装置连接的显示装置的规格，假设与上述实施方式2相同。
图13是示出本发明的实施方式3的图像合成装置的处理步骤的流程图。根据本图对基于图12的图像合成装置的处理步骤进行说明。
首先，在步骤ST21中，当在迁移中任意的描绘时刻的描绘结束之后，描绘定时信息存储部6更新描绘定时信息。作为例子，在本发明的实施方式3中，将已存储的迁移开始时刻t0和所获取的输出控制部5中的向显示装置的输出时刻tn设为描绘定时信息。其中，进行第一次的描绘之前的描绘时刻tn为t0。
另外，在该例子中，作为描绘定时信息使用了时刻，但在使用了显示次数、垂直同步信号的发生次数的情况下，也可以根据描绘的次数或垂直同步信号的发生次数计算迁移时间，或者相反地，根据迁移时间将描绘的次数或垂直同步信号的发生次数作为描绘定时信息的单位。
在步骤ST22中，迁移信息计算部2从描绘定时信息存储部6获取描绘定时信息，从迁移效果存储部10获取迁移效果信息，在迁移效果伴随像素的移动的情况下，与上述实施方式1的图3的步骤ST1同样地，根据描绘定时信息求出下一次描绘时的移动像素数mv。
例如，当以一定速度进行移动的情况下，利用下式(9)求出移动像素数mv。
mv＝p·L  (9)
在此，p表示将迁移时间设为100％的迁移行进率。作为例子，迁移行进率p可以根据下式(10)计算。
p＝t/T  (10)
在此，t表示从下一次描绘的迁移开始时刻起的相对描绘预定时刻，利用下式(11)求出
t＝tn-t0+V  (11)
其中，当描绘定时信息将描绘的次数或垂直同步信号的发生次数作为单位的情况下，也可以假设t为下一次描绘时的描绘次数或垂直同步信号的发生次数，T为迁移时间内的描绘或垂直同步信号的总发生次数。
在步骤ST23中，参数控制部18根据从迁移信息计算部2获取的迁移效果的种类，生成表示由于平滑化处理部7a、7b中的平滑化处理而引起的清晰度的劣化程度的平滑化参数。作为该平滑化参数，可以使用根据迁移效果的种类在各图像的行进方向上平滑化的由M×N的像素区域构成的空间滤波器，或者用于生成所使用滤波器的表示清晰度的劣化程度的值。
在本发明的实施方式3中，由于是水平方向的移动迁移效果，所以将作为下式(12)所示的3×1的空间滤波器且向垂直方向的平滑化效果小的线性的空间滤波器用作平滑化滤波器。
A＝(0.250.50.25)    (12)
相反，在垂直方向的移动迁移效果的情况下，将把上述空间滤波器的行和列转置而得到的作为下式(13)所示的1×3的空间滤波器且在水平方向上平滑化效果小的线性的空间滤波器用作平滑化滤波器。
A = 0.25 0.5 0.25 - - - ( 13 )
在此，A是在参数控制部18中根据迁移效果的种类设定的行列式，在本发明的实施方式3中，参数控制部18根据迁移效果的种类、即迁移效果的迁移方向，将上式(12)或上式(13)所示的空间滤波器选择为平滑化滤波器。另外，除了上式(12)或上式(13)所述的空间滤波器以外，不论效果的大小，只要是可以得到同样或近似的效果的滤波器，则同样可以使用，而不限于所例示的上述系数值。另外，在本发明的实施方式3中，说明了在水平方向、垂直方向上移动的例子，但即使是在其他方向，在平滑化处理部7a、7b所使用的滤波器在行进方向上平滑化的情况下，也可以得到同样的效果。
另外，参数控制部18通过根据迁移信息，在迁移开始时逐渐增大平滑化效果，之后，设为恒定，在迁移结束前再逐渐减小平滑化效果，由此可以避免在迁移开始的同时急剧地模糊图像的现象，可以实现不协调性更少的小数像素(子像素)单位精度的迁移效果。
在步骤ST24中，平滑化处理部7a根据从参数控制部18得到的平滑化参数，如下式(14)所示对图像文件1a的图像数据11a进行卷积，从而进行平滑化，并输出平滑化数据14a。
I LPF ( x , y ) = Σ ( i , j ) ∈ S A ( i , j ) · I ( x + i , y + j ) - - - ( 14 )
在此，假设ILPF(x，y)为从平滑化处理部7a输出的图像数据的坐标(x，y)的亮度值，I(x，y)为输入到平滑化处理部7a的图像文件1a的图像数据的坐标(x，y)的亮度值，S为满足下式(15)的以(0，0)为中心的矩形区域。i、j如下所示。
-floor(M/2)≤i≤floor(M/2)
并且
-floor(N/2)≤j≤floor(N/2)    (15)
A(j，i)表示作为从参数控制部18得到的平滑化参数的行列式A的j行i列的值。
根据该处理，图像文件1a的图像数据11a仅在行进方向上被平滑化。
在步骤ST25中，平滑化处理部7b与平滑化处理部7a同样地，根据从参数控制部18得到的平滑化参数，如上式(14)所示，对图像文件1b的图像数据11b进行卷积，从而进行平滑化，并输出平滑化数据14b。
根据该处理，图像文件1b的图像数据11b仅在行进方向上被平滑化。
步骤ST26至步骤ST29相当于将向图像生成部3a、3b的输入从上述实施方式2的图7的步骤ST12至步骤ST15中的图像文件1a、1b的图像数据11a、11b变更为平滑化处理部7a、7b输出的平滑化数据14a、14b的处理。关于这些四个步骤，只要各个描绘源区域与描绘目的区域正确地对应，则也可以对处理的应用顺序进行替换。
在步骤ST26中，图像生成部3a根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，求出图像生成部3a中的移动像素数mv_a为floor(mv)时的平滑化数据14a的描绘源区域a和生成数据12a的描绘目的区域a，将平滑化数据14a的描绘源区域a部分作为输入而得到，并作为生成数据12a的描绘目的区域a部分而输出。
在步骤ST27中，图像生成部3a根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，求出图像生成部3a中的移动像素数mv_a为floor(mv)时的平滑化数据14b的描绘源区域b和生成数据12a的描绘目的区域b，将平滑化数据14b的描绘源区域b部分作为输入而得到，并作为生成数据12a的描绘目的区域b部分而输出。
在步骤ST28中，图像生成部3b根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，求出图像生成部3b中的移动像素数mv_b为ceil(mv)时的平滑化数据14b的描绘源区域b和生成数据12b的描绘目的区域b，将平滑化数据14b的描绘源区域b部分作为输入而得到，并作为生成数据12b的描绘目的区域b部分而输出。
在步骤ST29中，图像生成部3b根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，求出图像生成部3b中的移动像素数mv_b为ceil(mv)时的平滑化数据14a的描绘源区域a和生成数据12b的描绘目的区域a，将平滑化数据14a的描绘源区域a部分作为输入而得到，并作为生成数据12b的描绘目的区域a部分而输出。
在步骤ST30中，与上述实施方式2同样地，图像内插合成部4根据从迁移信息计算部2得到的移动像素数计算合成比率f，根据所计算出的合成比率f，对生成数据12a、12b进行混合，作为内插合成数据13而输出。
在步骤ST31中，当从迁移信息计算部2得到的移动像素数为mv＝0的情况下，输出选择部8输出图像文件1a的图像数据。另外，在移动像素数为mv＝L的情况下，输出图像文件1b的图像数据。另一方面，在除此以外的情况下，输出内插合成数据13的图像数据。该输出选择部8的输出作为合成数据31而输出到输出控制部5。
在步骤ST32中，输出控制部5将从输出选择部8输出的合成数据31与垂直同步信号同步地显示在显示装置(未图示)的画面上，并向描绘定时信息存储部6通知显示的结束。
之后，返回到步骤ST21，描绘定时信息存储部6再次更新向显示装置的描绘时刻，直到移动像素数成为mv＝L为止，反复直至步骤ST32的处理。
接下来，根据图14以及图15，依次说明在本发明的实施方式3的图像合成装置中，在移动像素数为mv＝7.466...时输入的图像数据的从各处理部输出的结果的变化。
图14用亮度值示出本发明的实施方式3的图像合成装置的各部中的图像数据的变化的样子。另外，图15用图表示出图14所示的亮度值，示出作为行进方向的水平方向的某区域的亮度值的变化。图15(a)、(b)、(c)、(d)、(e)分别对应于图14的(a)、(b)、(c)、  (d)、  (e)。
图14(a)和将其在图表中用白色的圆表示的图15(a)示出图像文件1a(1b)的图像数据11a(11b)的例子。
图14(b)和将其在图表中用黑色的圆表示的图15(b)示出在平滑化处理部7a(7b)中图像数据11a(11b)被平滑化后的平滑化数据14a(14b)。关于在此所使用的作为平滑化参数的行列式，由于是向水平方向的移动，所以假设为上式(12)所示的行列式。
图14(c)和将其用图表表示的图15(c)示出当舍去移动像素数为mv_a＝7时在图像生成部3a中对平滑化数据14a(14b)进行迁移后的生成数据12a，在此，图像数据在水平方向上移动7个像素。
图14(d)和将其用图表表示的图15(d)示出当舍入移动像素数为mv_b＝8时在图像生成部3b中对平滑化数据14a(14b)进行迁移后的生成数据12b，在此，图像数据11在水平方向上移动8个像素。
图14(e)和将其用图表表示的图15(e)示出当移动像素数为mv＝7.466...时由图像内插合成部4内插合成后的内插合成数据13。在此，图14(e)的上段是取小数坐标的理想图像数据，但实际输出的像素值输出取整数坐标的下段的值。
如果将其用图15的图表说明，则根据移动像素数mv＝7.466...，利用上式(3)计算出合成比率f＝0.466...，从图15(b)的平滑化数据的亮度值，利用图15(c)所示的生成数据的亮度值Ia(x，y)和图15(d)所示的生成数据的亮度值Ib(x，y)以及计算出的合成比率f，利用上式(4)求出图15(e)所示的混合后的内插合成数据的亮度值I’(x，y)。
在图15(e)中，用白色的圆表示的点是移动像素数为mv＝7.466...时的内插合成数据的理想数据中的亮度值，利用上式(6)求出。
另外，在图15(e)中，用黑色的圆表示的点表示移动像素数为mv＝7.466...时的图像内插合成部4中的内插合成数据的亮度值，虽然相对理想数据的亮度值发生了亮度变化，但该亮度值的内插合成数据作为移动像素数为mv＝7.466...时的合成数据而输出到显示装置。
另外，从图15(c)和图15(e)来看，在本发明的实施方式3中，当比较移动小数像素(子像素)之后的图像和移动整数像素之后的图像时发生了亮度变化，但从图15(c)和图15(e)以及上述实施方式2的图10(b)和图10(d)、还有图15(e)以及上述实施方式2的图10(d)的比较来看，本发明的实施方式3与上述实施方式2相比，亮度变化大幅度地减小，与其相伴，得到减轻在图像移动中的周期性的亮度变化的效果。
这样，可以实现垂直同步信号的每一个周期的移动像素数不仅限于整数，而能够自由地设定图像效果的时间，并且减轻由于在行进方向的相邻像素之间亮度变化大的像素中的周期性的亮度变化而产生的迁移效果的质量劣化的图像合成装置。另外，通过具备描绘定时信息存储部6，从而不会对以前描绘出的内容造成影响，所以即使描绘未在垂直同步信号的一个周期以内结束，而等待下一个垂直同步信号的情况下，也可以按照预定进行显示，所以可以实现在迁移时间内迁移效果结束的图像合成装置。进而，通过具备迁移效果存储部10，可以实现能够在每次图像的迁移时进行不同的迁移效果的图像合成装置。
如上所述，根据本发明的实施方式3，由于在物理上按照每个垂直同步信号仅可以以整数像素单位精度移动图像，所以在图像的迁移时间上有设定限制的图像合成装置中，在进行不仅表现了整数而且还表现了小数点以下的数值的小数像素(子像素)移动时，制成移动了舍去所移动的像素数的小数点以下部分之后的图像数据和移动了舍入部分之后的图像数据，并将这些以小数点以下的值的合成比率f合成，从而可以对小数像素(子像素)单位精度的图像移动进行控制，得到可以消除迁移时间的设定限制这样的效果。
另外，根据本发明的实施方式3，通过平滑化处理部7a、7b将平滑化参数与图像数据卷积而对图像数据平滑化来降低各像素中的移动方向的两个相邻像素间的对比度，从而得到可以减轻在小数像素(子像素)移动时产生的周期性且大的亮度变化这样的效果。
进而，根据本发明的实施方式3，通过如图12的图像合成装置那样加入输出选择部8，得到在图像的迁移效果的开始前以及结束后的图像停止的状态下能够显示原图像的高质量的图像这样的效果。
另外，显然，在本发明的实施方式3中，即使在不具备输出选择部8的图11的图像合成装置中，只要在参数控制部18中将迁移开始时和迁移结束时的平滑化参数中的滤波器的分量值设为A(0，0)＝1、A(i，j)＝0(i≠0并且j≠0)，则不会得到平滑化效果，所以可以得到同样的效果。
另外，在本发明的实施方式3中，在每次描绘时从图像文件1a、1b读出图像数据11a、11b，但显然，即使预先从图像文件1a、1b读出图像数据11a、11b并存储到图像缓冲器，并在每次描绘时从图像缓冲器读出图像数据11a、11b，也可以得到同样的效果。另外，同样地，在平滑化处理部7a、7b的平滑化参数在迁移中不变化的情况下，如果预先从图像文件1a、1b读出图像数据11a、11b，并将由平滑化处理部7a、7b分别平滑化后的平滑化数据14a、14b存储到平滑化缓冲器，并在每次描绘时从平滑化缓冲器读出平滑化数据14a、14b，则不仅可以得到同样的效果，而且由于仅在迁移开始时进行平滑化处理即可，所以还可以进一步减轻处理。
实施方式4
在本发明的实施方式4中，说明将上述实施方式3中的平滑化处理部7a、7b设置于与上述实施方式3的图像合成装置的结构不同的位置时的图像合成装置。
图16是示出本发明的实施方式4的图像合成装置的结构的框图。本图像合成装置按照指定的迁移效果使两个图像迁移，具备图像文件1a、1b、迁移信息计算部2、图像生成部3a、3b、图像内插合成部4、输出控制部5、描绘定时信息存储部6、平滑化处理部7a、7b以及参数控制部18。在此，将包括图像生成部3a、3b、参数控制部18、平滑化处理部7a、7b以及图像内插合成部4的结构范围设为图像合成部30。另外，在图中，上述实施方式1至上述实施方式3中的相同符号表示相同或相当的部分。
在图16中，与上述实施方式3中的图11的结构的差异在于，将平滑化处理部7a、7b的平滑化处理的对象从向图像生成部3a、3b的输入前的图像数据11a、11b设为图像生成部3a、3b生成的生成数据12a、12b。另外，从结构中删除了迁移效果存储部10，但也可以与上述实施方式3同样地在结构中加入。
在本发明的实施方式4中，与上述实施方式1至上述实施方式3同样地，假设从迁移信息计算部2向图像生成部3a、3b以及图像内插合成部4提供的迁移信息为图像的移动像素数mv。
接下来对图像合成装置的动作进行说明。
在图16中，描绘定时信息存储部6与上述实施方式3的图11同样地，更新并存储输出控制部5向显示装置输出了图像数据的描绘定的识别值，即描绘定时信息。
迁移信息计算部2从描绘定时信息存储部6获取描绘定时信息，根据所获取的描绘定时信息计算与表示下一次描绘时的迁移效果的行进的迁移信息相当的移动像素数mv。
参数控制部18根据预先指定的迁移效果的种类生成平滑化参数。
图像文件1a、1b以及图像生成部3a、3b分别与上述实施方式2的图4所示的结构相同。
平滑化处理部7a、7b对于图像生成部3a、3b输出的生成数据12a、12b，针对图像的移动方向，利用来自参数控制部18的平滑化参数，仅在行进方向上进行平滑化处理，输出平滑化数据14a、14b。
图像内插合成部4根据利用从迁移信息计算部2得到的迁移信息计算出的合成比率f，合成平滑化数据14a、14b，输出内插合成数据13。
如图16的框图所示，该内插合成数据13成为图像合成部30的输出，即合成数据31。
输出控制部5与图4同样地，接收所合成的合成数据31，按照每个描绘定时输出到外部的显示装置(未图示)而进行显示。
迁移信息计算部2更新作为迁移信息的移动像素数，图像合成装置反复上述动作。
另外，关于与本发明的实施方式4的图像合成装置连接的显示装置的规格以及本发明的实施方式4中说明的迁移效果，假设与上述实施方式2相同。
图17是示出本发明的实施方式4的图像合成装置的处理步骤的流程图。根据本图对图像合成装置的处理步骤进行说明。
在步骤ST41的处理中，与上述实施方式3的图13所示的步骤ST21的处理同样地，在迁移中，在任意的描绘时刻tn的描绘结束之后，描绘定时信息存储部6更新描绘定时信息。
在步骤ST42中，迁移信息计算部2从描绘定时信息存储部6获取描绘定时信息，根据所获取的描绘定时信息，计算出与表示下一次描绘时的移动效果的行进的迁移信息相当的移动像素数mv。
在步骤ST43中，与上述实施方式3的图13所示的步骤ST23的处理同样地，参数控制部18根据预先指定的迁移效果的种类生成平滑化参数。
关于步骤ST44、ST45的处理，进行与上述实施方式2的图7所示的步骤ST12、ST13的处理相同的处理。
在步骤ST46中，平滑化处理部7a根据从参数控制部18得到的平滑化参数，如上式(14)所示对生成数据12a进行卷积，从而进行平滑化，并输出平滑化数据14a。根据该处理，生成数据12a仅在行进方向上被平滑化。
关于步骤ST47、ST48的处理，进行与上述实施方式2的图7所示的步骤ST14、ST15的处理相同的处理。
在步骤ST49中，平滑化处理部7b根据从参数控制部18得到的平滑化参数，如上式(14)所示对图像合成数据12b进行卷积，从而进行平滑化，并输出平滑化数据14b。根据该处理，生成数据12b仅在行进方向上被平滑化。
在此，关于步骤ST44、ST45和步骤ST47、ST48，只要各个描绘源区域与描绘目的区域正确地对应，则也可以对处理的应用顺序进行替换。于是，在图像生成部3a、3b中生成了生成数据12a、12b之后，在平滑化处理部7a、7b中在步骤ST46、ST49中生成对生成数据12a、12b分别进行平滑化处理的平滑化数据14a、14b即可。
在步骤ST50中，与上述实施方式2同样地，图像内插合成部4根据从迁移信息计算部2得到的移动像素数mv计算合成比率f，根据所计算出的合成比率f对平滑化数据14a、14b进行混合，输出内插合成数据13。
关于步骤ST51的处理，进行与上述实施方式2的图7所示的步骤ST17的处理相同的处理。
之后，返回到上述步骤ST41，描绘定时信息存储部6再次更新向显示装置的描绘时刻，直到移动像素数成为mv＝L为止，反复直至步骤ST51的处理。
这样，可以实现垂直同步信号的每一个周期的移动像素数不仅限于整数，而能够自由地设定图像效果的时间，并且减轻由于在移动方向的相邻像素之间亮度变化大的像素中的周期性的亮度变化而产生的质量劣化的图像合成装置。
如上所述，根据本发明的实施方式4，由于在物理上按照每个垂直同步信号仅可以以整数像素单位精度移动图像，所以在图像的迁移时间上有设定限制的图像合成装置中，在进行不仅表现了整数而且还表现了小数点以下的数值的小数像素(子像素)移动时，制成移动了舍去所移动的像素数的小数点以下部分之后的图像数据和移动了舍入部分之后的图像数据，并将这些以小数点以下的值的合成比率f合成，从而可以对小数像素(子像素)单位精度的图像移动进行控制，得到可以消除迁移时间的设定限制这样的效果。
另外，根据本发明的实施方式4，通过平滑化处理部7a、7b将平滑化参数与图像数据卷积而对图像数据平滑化来降低各像素中的移动方向的两个相邻像素间的对比度，从而得到可以减轻在小数像素(子像素)移动时产生的周期性且大的亮度变化这样的效果。
进而，根据本发明的实施方式4，也可以对图16的图像合成部30与上述实施方式3的图12的图像合成装置同样地加入输出选择部8，得到在图像的迁移效果的开始前以及结束后的图像停止的状态下能够显示原图像的高质量的图像这样的效果。
另外，在本发明的实施方式4中，在每次描绘时从图像文件读出图像数据，但显然，即使预先从图像文件1a、1b读出图像数据而存储到图像缓冲器，并在每次描绘时从图像缓冲器读出图像数据，也可以得到同样的效果。
实施方式5
在本发明的实施方式5中，说明平滑化处理部7a、7b位于与上述实施方式3以及上述实施方式4的图像合成装置的结构位置不同的位置时的图像合成装置。
图18是示出本发明的实施方式5的图像合成装置的结构的框图。本图像合成装置按照指定的迁移效果使两个图像迁移，具备图像文件1a、1b、迁移信息计算部2、图像生成部3a、3b、图像内插合成部4、输出控制部5、描绘定时信息存储部6、平滑化处理部7以及参数控制部18。在此，将包括图像生成部3a、3b、图像内插合成部4、参数控制部18以及平滑化处理部7的结构范围设为图像合成部30。另外，在图中，上述实施方式1至上述实施方式4中的相同符号表示相同或相当的部分。
另外，图18所示的图像合成装置是从上述实施方式3的图11所示的图像合成装置将平滑化处理部7a、7b设为一个平滑化处理部7，并将其位置移动到图像内插合成部4的紧接之后而得到的装置。
在图18中，与上述实施方式3中的图11的结构的差异在于，将上述实施方式3的图像内插合成部4的内插合成数据13设为图像合成部30输出的合成数据31，但在本发明的实施方式5中，将在移动了的平滑化处理部7中对内插合成数据13平滑化处理后的平滑化数据14作为合成数据31输出。
接下来对图像合成装置的动作进行说明。
描绘定时信息存储部6、迁移信息计算部2以及参数控制部18与上述实施方式4的图16的结构相同。另外，图像文件1a、1b、图像生成部3a、3b以及图像内插合成部4与上述实施方式2的图4所示的结构相同。
平滑化处理部7将内插合成数据13作为输入，针对图像的移动方向，根据平滑化参数，仅在行进方向上进行平滑化处理，输出平滑化数据14。
如图18的框图所示，该平滑化数据14成为图像合成部30的输出，即合成数据31。
输出控制部5按照每个描绘定时向显示装置输出存储在合成数据31中的图像数据，并向描绘定时信息存储部6通知显示的结束。
接下来对动作进行说明。
另外，关于与本发明的实施方式5的图像合成装置连接的显示装置的规格以及本发明的实施方式5中说明的迁移效果，假设与上述实施方式2相同。
图19是示出本发明的实施方式5的图像合成装置的处理步骤的流程图。根据本图对图像合成装置的处理步骤进行说明。
关于步骤ST61的处理，进行与上述实施方式3的图13所示的步骤ST21的处理相同的处理，在迁移中，在任意的描绘时刻tn的描绘结束之后，描绘定时信息存储部6更新描绘定时信息。
关于步骤ST62的处理，进行与上述实施方式3的图13所示的步骤ST22的处理相同的处理。
关于步骤ST63、ST64的处理，进行与上述实施方式2的图7所示的步骤ST12、ST13的处理相同的处理。
关于步骤ST65、ST66的处理，进行与上述实施方式2的图7所示的步骤ST14、ST15的处理相同的处理。
关于这些步骤ST63至步骤ST66，只要各个描绘源区域与描绘目的区域正确地对应，则也可以对处理的应用顺序进行替换。
关于步骤ST67的处理，进行与上述实施方式2的图7所示的步骤ST16的处理相同的处理。
在步骤ST68中，参数控制部18根据预先指定的迁移效果的种类生成平滑化参数。
在步骤ST69中，平滑化处理部7根据从参数控制部18得到的平滑化参数，如上式(14)所示对内插合成数据13进行卷积而平滑化，输出平滑化数据14。根据该处理，内插合成数据13仅在行进方向上被平滑化。
在步骤ST70中，输出控制部5将平滑化数据14与垂直同步信号同步地显示到显示装置的画面上，并向描绘定时信息存储部6通知显示的结束。
之后，返回到上述步骤ST61，描绘定时信息存储部6再次更新向显示装置的描绘时刻，直到移动像素数成为mv＝L为止，反复直至步骤ST70的处理。
这样，可以实现垂直同步信号的每一个周期的移动像素数不仅限于整数，而能够自由地设定图像效果的时间，并且减轻由于在行进方向的相邻像素之间亮度变化大的像素中的周期性的亮度变化而产生的质量劣化的图像合成装置。
如上所述，根据本发明的实施方式5，由于在物理上按照每个垂直同步信号仅可以以整数像素单位精度移动图像，所以在图像的迁移时间上有设定限制的图像合成装置中，在进行不仅表现了整数而且还表现了小数点以下的数值的小数像素(子像素)移动时，制成移动了舍去所移动的像素数的小数点以下部分之后的图像数据和移动了舍入部分之后的图像数据，并将这些以小数点以下的值的合成比率f合成，从而可以对小数像素(子像素)单位精度的图像移动进行控制，得到可以消除迁移时间的设定限制这样的效果。
另外，根据本发明的实施方式5，通过平滑化处理部7将平滑化参数与图像数据卷积而对图像数据平滑化来降低各像素中的移动方向的两个相邻像素间的对比度，从而得到可以减轻在小数像素(子像素)移动时产生的周期性且大的亮度变化这样的效果。
进而，根据本发明的实施方式5，通过将内插合成数据13的输入切换成平滑化数据14，由此得到在图像的迁移效果的开始前以及结束后的图像停止的状态下能够显示原图像的高质量的图像这样的效果。
另外，根据本发明的实施方式5，也可以如上述实施方式3中的图12的图像合成装置那样对图18的图像合成部30加入输出选择部8，得到在图像的迁移效果的开始前以及结束后的图像停止的状态下能够显示原图像的高质量的图像这样的效果。
另外，在本发明的实施方式5中，在每次描绘时从图像文件1a、1b读出图像数据，但显然，即使预先从图像文件1a、1b读出图像数据并存储到图像缓冲器，并在每次描绘时从图像缓冲器读出图像数据，也可以得到同样的效果。
实施方式6
在本发明的实施方式6中，说明并非通过矩阵的卷积运算来进行平滑化处理，而是使用多个平滑化用图像生成部和平滑化合成部，通过图像的描绘处理和合成处理来进行平滑处理的情况。
图20是示出本发明的实施方式6的图像合成装置的平滑化处理部7a、7b的结构的框图。本图像合成装置按照指定的迁移效果使两个图像迁移，包括图像生成部3a、3b以后的未图示的部分的除了平滑化处理部7a、7b以外的其他结构，假设与上述实施方式3的图12的结构相同。
在图20中，如果与上述实施方式3同样地假设由参数控制部18提供的平滑化参数为由M×N的像素区域构成的空间滤波器，则平滑化处理部7a具备M×N个平滑化用图像生成部151pq和平滑化合成部17a。同样地，平滑化处理部7b具备M×N个平滑化用图像生成部152pq和平滑化合成部17b。其中，假设p为作为平滑化参数的平滑化滤波器的对应的行序号，q与列序号对应，并0≤p≤M-1、0≤q≤N-1。
接下来对图像合成装置的平滑化处理部7a、7b的动作进行说明。
平滑化用图像生成部151pq将根据来自参数控制部18的平滑化参数计算的图像文件1a的图像数据11a的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据平滑化参数计算的平滑化用图像数据161pq的描绘目的区域部分而输出。
平滑化用图像生成部152pq将根据来自参数控制部18的平滑化参数计算的图像文件1b的图像数据11b的描绘源区域部分作为输入而得到，并作为与描绘源区域同样地根据平滑化参数计算的平滑化用图像数据162pq的描绘目的区域部分而输出。
平滑化合成部17a输出根据从平滑化参数计算得到的合成比率对上述平滑化用图像数据161pq进行合成的平滑化合成数据19a。
同样地，平滑化合成部17b输出根据从平滑化参数计算得到的合成比率对上述平滑化用图像数据162pq进行合成的平滑化合成数据19b。
另外，关于与本发明的实施方式6的图像合成装置连接的显示装置的规格以及本发明的实施方式6中说明的迁移效果，假设与上述实施方式2相同。
图21是示出本发明的实施方式6的图像合成装置的处理步骤的流程图。根据本图对图像合成装置的处理步骤进行说明。
关于步骤ST81至步骤ST83的处理，进行与上述实施方式3的图13所示的步骤ST21至步骤ST23相同的处理。
在步骤ST81中，在迁移中任意的描绘时刻tn的描绘结束之后，与上述实施方式3同样地，描绘定时信息存储部6更新描绘定时信息。
在步骤ST82中，与上述实施方式3同样地，迁移信息计算部2从描绘定时信息存储部6获取描绘定时信息，并计算下一次描绘的时间点中的移动像素数mv。
在步骤ST83中，与上述实施方式3同样地，参数控制部18从迁移信息计算部2得到迁移效果的种类和移动像素数而生成平滑化参数。
在步骤ST84中，平滑化用图像生成部151pq求出图像文件1a的图像数据11a移动基于从参数控制部18得到的平滑化参数的像素数(在水平方向上(p-floor(M/2))个像素，在垂直方向上(q-floor(N/2))个像素)时的图像文件1a的图像数据11a的描绘源区域和描绘目的区域，分别获取图像数据11a的描绘源区域部分，作为平滑化用图像数据161pq的描绘目的区域部分而输出。针对p、q的全部组合(如M×N)，分别进行处理。
在步骤ST85中，平滑化用图像生成部152pq求出图像文件1b的图像数据11b移动基于从参数控制部18得到的平滑化参数的像素数(在水平方向上(p-floor(M/2))个像素，在垂直方向上(q-floor(N/2))个像素)时的图像文件1b的图像数据11b的描绘源区域和描绘目的区域，分别获取图像数据11b的描绘源区域部分，作为平滑化用图像数据162pq的描绘目的区域部分而输出。针对p、q的全部组合(如M×N)，分别进行处理。
这些步骤ST84和步骤ST85包括根据p、q的值而在附图上省略的对应步骤，只要各个描绘源区域与描绘目的区域正确地对应，则也可以对处理的应用顺序进行替换。
例如，在平滑化参数为3×1的矩阵的情况下，输出如下所述没有在垂直方向上的移动，而是仅在水平方向上分别移动了-1个像素、0个像素、+1个像素的参照范围的平滑化用图像数据161pq、162pq。
平滑化用图像生成部15100从图像文件1a获取图像数据11a，输出向左移动一个像素的平滑化用图像数据16100，平滑化用图像生成部15110从图像文件1a获取图像数据11a，直接输出平滑化用图像数据16110，平滑化用图像生成部15120从图像文件1a获取图像数据11a，输出向右移动一个像素的平滑化用图像数据16120。
同样地，平滑化用图像生成部15200从图像文件1b获取图像数据11b，输出向左移动一个像素的平滑化用图像数据16200，平滑化用图像生成部15210从图像文件1b获取图像数据11b，直接输出平滑化用图像数据16210，平滑化用图像生成部15220从图像文件1b获取图像数据11b，输出向右移动一个像素的平滑化用图像数据16220。
在步骤ST86中，平滑化合成部17a将与平滑化用图像数据161pq从原图像移动的移动像素数对应的分量值A(p，q)作为合成比率，对所有平滑化用图像数据161pq进行混合而写入到平滑化合成数据19a。根据该处理，图像文件1a的图像数据11a仅在行进方向上被平滑化。
另外，平滑化用图像数据161pq的合成比率f1pq可以通过f1pq＝A(p，q)来求出，所输出的平滑化合成数据19a如下式(16)所示。
I 1 ( x , y ) = Σ ( i , j ) ∈ S { f 1 ij · I 1 ij ( x , y ) } - - - ( 16 )
在此，I1(x，y)表示平滑化合成数据19a的坐标(x，y)的亮度值，I1ij(x，y)表示平滑化用图像数据161ij的坐标(x，y)的亮度值。另外，假设S满足下式(17)。
-floor(M/2)≤i≤(M/2)
并且
-floor(N/2)≤j≤(N/2)    (17)
在步骤ST87中，平滑化合成部17b将与平滑化用图像数据162pq从原图像移动的移动像素数对应的分量值A(p，q)作为合成比率，对所有平滑化用图像数据162pq进行混合而写入到平滑化合成数据19b。根据该处理，图像文件1b的图像数据11b仅在行进方向上被平滑化。
其中，平滑化用图像数据162pq的合成比率f2pq可以通过f2pq＝A(p，q)来求出，所输出的平滑化合成数据19b如下式(18)所示。
I 2 ( x , y ) = Σ ( i , j ) ∈ S { f 2 ij · I 2 ij ( x , y ) } - - - ( 18 )
在此，I2(x，y)表示平滑化合成数据19b的坐标(x，y)的亮度值，I2ij(x，y)表示平滑化用图像数据162ij的坐标(x，y)的亮度值。另外，假设S满足上式(17)。
步骤ST88至步骤ST91的处理相当于将平滑化处理部7a、7b输出的向图像生成部3a、3b的输入从上述实施方式3的图13的步骤ST26至步骤ST29中的平滑化数据14a、14b变更为平滑化合成数据19a、19b的处理。关于这些四个步骤，只要各个描绘源区域与描绘目的区域正确地对应，则也可以对处理的应用顺序进行替换。
在步骤ST88中，图像生成部3a根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，求出图像生成部3a中的移动像素数mv_a为floor(mv)时的平滑化合成数据19a的描绘源区域a和生成数据12a的描绘目的区域a，将平滑化合成数据19a的描绘源区域a部分作为输入而得到，并作为生成数据12a的描绘目的区域a部分而输出。
在步骤ST89中，图像生成部3a根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，求出图像生成部3a中的移动像素数mva为floor(mv)时的平滑化合成数据19b的描绘源区域b和生成数据12a的描绘目的区域b，将平滑化合成数据19b的描绘源区域b部分作为输入而得到，并作为生成数据12a的描绘目的区域b部分而输出。
在步骤ST90中，图像生成部3b根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，求出图像生成部3b中的移动像素数mv_b为ceil(mv)时的平滑化合成数据19b的描绘源区域b和生成数据12b的描绘目的区域b，将平滑化合成数据19b的描绘源区域b部分作为输入而得到，并作为生成数据12b的描绘目的区域b部分而输出。
在步骤ST91中，图像生成部3b根据从迁移信息计算部2提供的移动像素数mv和求出每个图像数据的描绘源区域以及描绘目的区域的区域计算式信息，求出图像生成部3b中的移动像素数mv_b为ceil(mv)时的平滑化合成数据19a的描绘源区域a和生成数据12b的描绘目的区域a，将平滑化合成数据19a的描绘源区域a部分作为输入而得到，并作为生成数据12b的描绘目的区域a部分而输出。
关于步骤ST92至步骤ST94的处理，进行与上述实施方式3的图13所示的步骤ST30至步骤ST32相同的处理。
这样，可以实现垂直同步信号的每一个周期的移动像素数不仅限于整数，而能够自由地设定图像效果的时间，并且减轻由于在行进方向的相邻像素之间亮度变化大的像素中的周期性的亮度变化而产生的质量劣化的图像合成装置。
如上所述，根据本发明的实施方式6，由于在物理上按照每个垂直同步信号仅可以以整数像素单位精度移动图像，所以在图像的迁移时间上有设定限制的图像合成装置中，在进行不仅表现了整数而且还表现了小数点以下的数值的小数像素(子像素)移动时，制成移动了舍去所移动的像素数的小数点以下的部分之后的图像数据和移动了舍入的部分之后的图像数据，并将这些以小数点以下的值的合成比率f合成，从而可以对小数像素(子像素)单位精度的图像移动进行控制，得到可以消除迁移时间的设定限制这样的效果。
另外，根据本发明的实施方式6，通过平滑化处理部7a、7b将根据平滑化参数计算的图像文件1a、1b的图像数据11a、11b的描绘源区域部分作为输入，作为根据平滑化参数计算的平滑化用图像数据161pq、162pq的描绘目的区域部分而输出，输出根据基于平滑化参数计算出的合成比率f对平滑化用图像数据161pq、162pq进行合成而得到的平滑化合成数据19a、19b，从而对图像数据进行平滑化而降低各像素中的移动方向的两个相邻像素间的对比度，从而得到可以减轻在小数像素(子像素)移动时产生的周期性且大的亮度变化这样的效果。
进而，根据本发明的实施方式6，也可以如上述实施方式3中的图12的图像合成装置那样对图20的图像合成部30加入输出选择部8，得到在图像的迁移效果的开始前以及结束后的图像停止的状态下能够显示原图像的高质量的图像这样的效果。
另外，在本发明的实施方式6中，置换了上述实施方式3中的平滑化处理部7a、7b的内部结构，但显然，即使同样地置换上述实施方式4以及上述实施方式5中的平滑化处理部7a、7b的内部结构，也可以得到同样的效果。
另外，在本发明的实施方式6中，在每次描绘时从图像文件1a、1b读出图像数据11a、11b，但显然，即使预先从图像文件1a、1b读出图像数据11a、11b并存储到图像缓冲器，并在每次描绘时从图像缓冲器读出图像数据11a、11b，也可以得到同样的效果。
进而，在本发明的实施方式6中，如果平滑化参数被固定，则当预先从图像文件1a、1b获取图像数据11a、11b，将由平滑化处理部7a、7b分别平滑化后的平滑化合成数据19a、19b存储到缓冲器，在每次描绘时从缓冲器读出平滑化合成数据19a、19b时，不仅可以得到同样的效果，而且由于仅在迁移开始时进行平滑化处理即可，所以还可以进一步减轻描绘时的处理。
实施方式7
在本发明的实施方式7中，说明仅使用图像生成部和图像内插合成部并仅使用描绘处理和合成处理来一次实现上式实施方式3至上述实施方式6中的图像生成部、图像内插合成部、平滑化处理部的图像合成装置。
图22是示出本发明的实施方式7的图像合成装置的结构的框图。本图像合成装置按照指定的迁移效果使两个图像迁移，具备图像文件1a、1b、迁移信息计算部2、图像生成部3pq、图像内插合成部4、输出控制部5、描绘定时信息存储部6以及参数控制部18。在此，将包括图像生成部3pq、图像内插合成部4以及参数控制部18的结构范围设为图像合成部30。另外，在图中，上述实施方式1至上述实施方式4中的相同符号表示相同或相当的部分。
在图22中，与上述实施方式2中的图4的结构的差异在于，对于作为图像合成部30输出的合成数据的上述实施方式2的图像内插合成部4的内插合成数据13，输出图像内插合成部4通过得到从参数控制部18得到的平滑化参数而汇总进行平滑化处理和内插合成处理而得到的内插合成数据13。
接下来对图像合成装置的动作进行说明。
在图22中，图像生成部3pq将根据从迁移信息计算部2得到的迁移信息和从参数控制部18得到的平滑化参数计算的图像文件1a的图像数据11a的描绘源区域部分作为输入，作为与描绘源区域同样地根据迁移信息和平滑化参数计算的生成数据12pq的描绘目的区域部分而输出，同样，将根据迁移信息和平滑化参数计算的图像文件1b的图像数据11b的描绘源区域部分作为输入，作为与描绘源区域同样地根据迁移信息和平滑化参数计算的生成数据12pq的描绘目的区域部分而输出。对于该生成数据12pq，假设，当在图像生成部3pq内部可以内置缓冲器的情况下，读入图像数据11a、11b并生成而积蓄后输出，当无法内置缓冲器的情况下，一边读入而逐次生成一边输出。其中，假设p为作为平滑化参数的平滑化滤波器的对应的行序号，q与列序号对应，而且0≤p≤M、0≤q≤N-1。在此，以向水平方向移动的迁移效果为前提，但在采用向垂直方向移动的迁移效果时为0≤p≤M-1、0≤q≤N。
图像内插合成部4根据利用从迁移信息计算部2得到的迁移信息和从参数控制部18得到的平滑化参数计算出的合成比率，合成生成数据12pq而输出内插合成数据13。参数控制部18根据从迁移信息计算部2得到的迁移效果的种类生成平滑化参数，向图像生成部3pq和图像内插合成部4提供所生成的平滑化参数。其他图像文件1a、1b、迁移信息计算部2、输出控制部5以及描绘定时信息存储部6与上述实施方式4的图16所示的结构相同。
接下来对动作进行说明。
关于与本发明的实施方式7的图像合成装置连接的显示装置的规格以及本发明的实施方式7中说明的迁移效果，假设与上述实施方式2相同。另外，假设本发明的实施方式7中的在参数控制部18中构成的平滑化参数为M×N的滤波器。
另外，在本发明的实施方式7的图像合成装置中，由于迁移效果与上述实施方式3同样是图像向水平方向移动的效果，所以具备(M+1)×N个图像生成部3pq。另一方面，当图像向垂直方向移动的效果的情况下，具备M×(N+1)个图像生成部。
图23是示出本发明的实施方式7的图像合成装置的处理步骤的流程图。
关于步骤ST101至步骤ST103的处理，进行与上述实施方式4的图17所示的步骤ST41至步骤ST43相同的处理。
在步骤ST101中，当在迁移中任意的描绘时刻tn的描绘结束之后，描绘定时信息存储部6与上述实施方式4同样地更新描绘定时信息。
在步骤ST102中，迁移信息计算部2与上述实施方式4同样地从描绘定时信息存储部6获取描绘定时信息，计算下一次描绘的时间点的移动像素数mv。
在步骤ST103中，参数控制部18与上述实施方式4同样地，从迁移信息计算部2得到迁移效果的种类和移动像素数而求出平滑化参数。
在步骤ST104中，图像生成部3pq根据从迁移信息计算部2得到的移动像素数mv，求出迁移效果的移动像素数在水平方向上偏移floor(mv)-floor(M/2)+p个像素、在垂直方向上偏移q-floor(N/2)个像素时的图像文件1a的各描绘源区域和生成数据12pq的描绘目的区域，将图像文件1a的图像数据11a的描绘源区域部分作为输入而得到，作为生成数据12pq的描绘目的区域部分而输出。
在步骤ST105中，图像生成部3pq根据从迁移信息计算部2得到的移动像素数mv，求出迁移效果的移动像素数在水平方向上偏移floor(mv)-floor(M/2)+p个像素、在垂直方向上偏移q-floor(N/2)个像素时的图像文件1b的各描绘源区域和生成数据12pq的描绘目的区域，将图像文件1b的图像数据11b的描绘源区域部分作为输入而得到，作为生成数据12pq的描绘目的区域部分而输出。
这些步骤ST104和步骤ST105包括根据p、q的值在附图上省略的对应步骤，只要各个描绘源区域与描绘目的区域正确地对应，则也可以对处理的应用顺序进行替换。
在步骤ST106中，图像内插合成部4使用根据从迁移信息计算部2得到的移动像素数mv和从参数控制部18得到的平滑化参数计算出的针对各生成数据12pq的合成比率fpq，对各生成数据12pq进行混合而写入到内插合成数据13。
另外，针对生成数据12pq的合成比率fpq是根据下式(19)求出的。
f0q＝A(-floor(M/2)，q--N/2)·(1-f)
f1q＝(A(1-floor(M/2)，q-N/2)·(1-f)
+A(-floor(M/2)，q-N/2)·f
...
f(M-1)q＝A(M-1-floor(M/2)，q-N/2)·(1-f)+A(M-2-floor(M/2)
，q-N/2)·f
fMq＝A(M-1-floor(M/2)，q-N/2)·f    (19)
在此，合成比率f与上述式(3)中使用的合成比率相同。
例如，对平滑化参数为3×1的矩阵的情况进行说明。
图像生成部300根据从迁移信息计算部2提供的移动像素数mv，求出移动像素数为floor(mv)-1时的图像文件1a、1b的各描绘源区域和描绘目的区域，将各个描绘源区域部分作为输入而得到，作为生成数据1200的描绘目的区域部分而输出。其中，由于N＝1，所以垂直方向的偏移是0个像素，所以该计算方法与上述实施方式2相同。
同样地，图像生成部310根据从迁移信息计算部2提供的移动像素数mv，求出移动像素数为floor(mv)时的图像文件1a、1b的各描绘源区域和描绘目的区域，将各个描绘源区域部分作为输入而得到，作为生成数据1210的描绘目的区域部分而输出。
同样地，图像生成部320根据从迁移信息计算部2提供的移动像素数mv，求出移动像素数为floor(mv)+1时的图像文件1a、1b的各描绘源区域和描绘目的区域，将各个描绘源区域部分作为输入而得到，作为生成数据1220的描绘目的区域部分而输出。
同样地，图像生成部330根据从迁移信息计算部2提供的移动像素数mv，求出移动像素数为floor(mv)+2时的图像文件1a、1b的各描绘源区域和描绘目的区域，将各个描绘源区域部分作为输入而得到，作为生成数据1230的描绘目的区域部分而输出。
图像内插合成部4根据从迁移信息计算部2得到的移动像素数mv和从参数控制部18得到的平滑化参数，按照下式(20)计算生成数据1200、1210、1220、1230的合成比率f00、f10、f20、f30。
f00＝A(-1，0)·(1-f)
f10＝A(0，0)·(1-f)+A(-1，0)·f
f20＝A(1，0)·A(1-f)+A(0，0)·f
f30＝A(1，0)·f
f＝mv-floor(mv)    (20)
图像内插合成部4根据下式(21)合成生成数据1200、1210、1220、1230，作为内插合成数据13而输出。
I’(x，y)＝f00·I00(x，y)+f10·I10(x，y)+f20·I20(x，y)+f30·I30(x，y)    (21)
在此，Ipq(x，y)表示所输入的生成数据12qp的坐标的亮度值，I’(x，y)表示所输出的图像内插合成数据13的坐标的亮度值。
在步骤107中，输出控制部5将内插合成数据13与垂直同步信号同步地显示到显示装置的画面上。
之后，返回到步骤ST101，描绘定时信息存储部6再次更新向显示装置的描绘时刻，直到移动像素数成为mv＝L为止，反复步骤ST107的处理。
这样，可以实现垂直同步信号的每一个周期的移动像素数不仅限于整数，而能够自由地设定图像效果的时间，并且减轻由于在行进方向的相邻像素之间亮度变化大的像素中的周期性的亮度变化而产生的质量劣化的图像合成装置。
如上所述，根据本发明的实施方式7，与上述实施方式3至上述实施方式6同样地，由于在物理上按照每个垂直同步信号仅可以以整数像素单位精度移动图像，所以在图像的迁移时间上有设定限制的图像合成装置中，当进行小数像素(子像素)移动时，制成移动了舍去所移动的像素数的小数点以下的部分之后的图像数据和移动了舍入部分之后的图像数据以及将以这些为中心上下左右移动后的多个图像数据，并以分别对应的平滑化参数即平滑化滤波器的各系数以及作为迁移信息的移动像素数的小数点以下的值的合成比率合成，从而同时实现小数像素(子像素)单位精度的移动和平滑化处理，从而得到可以消除迁移时间的设定限制，并且对图像数据进行平滑化而降低对比度，减轻在进行小数像素(子像素)移动时产生的周期性且大的亮度变化这样的效果。
进而，根据本发明的实施方式7，也可以如上述实施方式3中的图12的图像合成装置那样对图22的图像合成装置30加入输出选择部8，得到在图像的迁移效果的开始前以及结束后的图像停止的状态下能够显示原图像的高质量的图像这样的效果。
另外，在本发明的实施方式7中，在每次描绘时从图像文件1a、1b读出图像数据11a、11b，但显然，即使预先从图像文件1a、1b读出图像数据11a、11b而存储到图像缓冲器，并在每次描绘时从图像缓冲器读出图像数据11a、11b，也可以得到同样的效果。
另外，显然，在上述实施方式1至上述实施方式7中，对于生成数据、内插合成数据、平滑化数据、平滑化用图像数据、平滑化合成数据，不论在图像生成部、图像内插合成部、平滑化处理部、平滑化用图像生成部、平滑化合成部中内置缓冲器存储并读出而输出，还是不内置缓冲器而一边逐次处理输入数据一边输出，都可以得到同样的效果。
进而，在上述实施方式2至上述实施方式7中，在图像生成部3a、3b、图像内插合成部4中计算各描绘源区域、各描绘目的区域、合成比率，但显然，即使由迁移信息计算部2进行各描绘源区域、各描绘目的区域、合成比率的计算，并向图像生成部3a、3b、图像内插合成部4提供移动像素数或者各自所需的各描绘源区域、各描绘目的区域、合成比率，也可以得到同样的效果。
进而，在上述实施方式3至上述实施方式7中，在参数控制部18中，仅根据迁移效果的种类决定了适用平滑化的方向，但进一步根据移动像素数的变化，在每次描绘时变更平滑化参数，以在变化大的情况下增大平滑化的程度，而在变化小的情况下减小，从而还可以进一步提高其效果。
进而，在上述实施方式3至上述实施方式5中，在平滑化处理部中在图像内使用了同一平滑化参数，但显然，通过调节平滑化参数，以针对如在所输入的图像数据中无需平滑化的与周围像素之间的亮度差小的像素减小平滑化的程度，从而以像素单位分开使用平滑化参数，从而能够进一步提高迁移效果中的画质。
进而，在上述实施方式3至上述实施方式6中，分别设置了平滑化处理部、图像生成部和图像内插合成部等各处理部，但显然，即使将平滑化处理部7、图像生成部3a、3b和图像内插合成部4的全部或一部分集中而用一次计算后输出到输出控制部5，也可以得到同样的效果。
如果集中全部而计算，则任一实施方式都成为与下式(22)相同的式。
I ′ ( x , y ) = ( 1 - f ) · Σ ( i , j ) ∈ S A ( i , j ) · I ( x + floor ( mv ) + i , y + j , c ) +     (22)
f · Σ ( i , j ) ∈ S A ( i , j ) · I ( x + ceil ( mv ) + i , y + j , c )
另外，由此还可知，上述实施方式3至上述实施方式7的图像合成装置虽然处理步骤不同，但全部可以得到同样的效果。
进而，在上述实施方式3中，说明了迁移效果存储部10也可以内置于迁移信息计算部2中，但显然，作为其他结构，即使迁移效果存储部10不经由迁移信息计算部2来提供迁移效果信息，而是直接向各处理部提供，也可以得到同样的效果。
进而，在上述实施方式1、上述实施方式2中，说明了不具备迁移效果存储部10以及描绘定时信息存储部6的图像合成装置，但显然，与上述实施方式3至上述实施方式7同样地，不会由于具备描绘定时信息存储部6而对以前描绘的内容造成影响，所以即使描绘未在垂直同步信号的一个周期以内结束，而等待下一个垂直同步信号的情况下，也可以按照预定进行显示，所以可以实现在迁移时间内迁移效果结束的图像合成装置。
进而，显然，在上述实施方式1、上述实施方式2中，与上述实施方式3至上述实施方式7同样地，通过具备迁移效果存储部10，从而可以实现能够在每次图像迁移时进行不同的迁移效果的图像合成装置。进而，显然，在上述实施方式1、上述实施方式2中，即使在具备描绘定时信息存储部6的情况下，也可以与上述实施方式3至上述实施方式7同样地，实现图像合成装置。
进而，在上述实施方式2至上述实施方式6中，作为迁移效果之一说明了两张图像间的滚动，但作为其他显示矩形的位置变化的一般效果，还可以举出滑入、滑出等。另外，即使是上述以外的迁移效果，通过图像生成部3a、3b针对各图像数据得到与迁移效果对应的描绘源区域和描绘目的区域，可以实现按照每个小数像素(子像素)移动的迁移效果。
进而，当针对每个图像，移动像素数的变位量不同的情况下，在参数控制部18中，在上述实施方式4以及上述实施方式5中，在平滑化处理部7a、7b中按照每个移动像素数的变位量的相同区域分开使用平滑化处理部7a、7b的平滑化参数，从而可以按照每个图像文件1a、1b的图像数据11a、11b实现移动像素数不同的迁移效果。另外，在上述实施方式3中，平滑化处理部7a、7b按照进行平滑化的每个图像文件1a、1b分开使用平滑化参数，从而可以按照每个图像文件1a、1b的图像数据11a、11b实现移动像素数不同的迁移效果。
例如，在滑入的情况下，不移动图像数据11a，而图像数据11b与滚动同样地进入到显示装置的画面上。在该情况下，参数控制部18根据从迁移信息计算部2得到的迁移信息计算图像数据11a、11b的各描绘目的区域，或者从迁移信息计算部获取上述各描绘目的区域，以在行进方向上仅对图像数据11b所描绘出的像素进行平滑化的方式设定各像素中的平滑化参数，平滑化处理部7a、7b根据上述平滑化参数进行处理，由此可以实现在滑入中按照每个小数像素(子像素)移动的迁移效果。
图24是示出基于从图像数据11a向图像数据11b从右向左滑入的滑入效果的画面变化的图。滑入是指，看上去在之前显示的图像之上新插入接下来要显示的图像的效果。与上述实施方式2中的滚动的例子同样地，假设图像数据11a、图像数据11b和显示装置的分辨率全部相同且为320×48。例如，当在迁移时从右向左滑入的情况下，图像数据11a的描绘源区域在迁移开始时为(0，0)-(320，48)，而没有图像数据11b的描绘源区域，但随着进行迁移，图像数据11a的描绘源区域变化为(0，0)-(320-n，48)，图像数据11b的描绘源区域变化为(0，0)-(n，48)。此时，图像数据11a的描绘目的区域成为(0，0)-(320-n，48)，图像数据11b的描绘目的区域成为(320-n，0)-(320，48)。然后，直到图像数据11a的描绘目的区域和描绘目的区域的面积成为0为止反复。由此，看上去在图像数据11a之上，新插入了图像数据11b。
在滑出的情况下，如果相反地仅对图像数据11a所描绘的区域进行平滑化，则可以实现同样的效果。
图25是示出基于从图像数据11a向图像数据11b从右向左滑出的滑出效果的画面变化的图。滑出是指，看上去之前所显示的图像在任意方向上被抽出，在其下显现接下来要显示的图像的效果。与上述实施方式2中的滚动的例子同样地，假设图像数据11a、图像数据11b和显示装置的分辨率全部同样且为320×48。例如，当在迁移时从右向左滑出的情况下，图像数据11a的描绘源区域在迁移开始时为(0，0)-(320，48)，而没有图像数据11b的描绘源区域，但随着进行迁移，图像数据11a的描绘源区域变化为(n，0)-(320，48)，图像数据11b的描绘源区域变化为(320-n，0)-(320，48)。此时，图像数据11a的描绘目的区域成为(0，0)-(320-n，48)，图像数据11b的描绘目的区域成为(320-n，0)-(320，48)。然后，直到图像数据11a的描绘目的区域和描绘目的区域的面积成为0为止反复。由此，看上去图像数据11a从画面被抽出，在其下显现图像数据11b。
另外，在擦除效果的情况下，由于图像数据11a、11b都未移动图像的位置，所以不会产生与图像的移动相伴的亮度变化。因此，仅通过上述实施方式2中的图像合成装置的结构就可以实现没有周期性的亮度变化的按照每个小数像素(子像素)移动的迁移效果。
图26是示出基于从图像数据11a向图像数据11b从右向左擦除的擦除效果的画面变化的图。擦除是指，看上去用接下来要显示的图像依次重绘之前显示的图像的效果。与上述实施方式2中的滚动的例子同样地，假设图像数据11a、图像数据11b和显示装置的分辨率全部同样且为320×48。例如，当在迁移时从右向左擦除的情况下，图像数据11a的描绘源区域在迁移开始时为(0，0)-(320，48)，而没有图像数据11b的描绘源区域，但随着进行迁移，图像数据11a的描绘源区域变化为(0，0)-(320-n，48)，图像数据11b的描绘源区域变化为(320-n，0)-(320，48)。此时，图像数据11a的描绘目的区域成为(0，0)-(320-n，48)，图像数据11b的描绘目的区域成为(320-n，0)-(320，48)。然后，直到图像数据11a的描绘目的区域和描绘目的区域的面积成为0为止反复。由此，看上去图像数据11a逐渐被图像数据11b重绘。另外，在擦除的情况下，表示作为迁移信息的迁移行进的移动像素数，表示被图像数据11b重绘的行数。
另外，在擦除效果中，还可以容易地实现在图像内部设定开始点并向左右进行图像重绘的图27、将开始点设定于左右两端并向内部重绘的图28那样的复合变形例子。在图27中示出了从内部的开始点向左右分别以mv_a/2的移动像素数进行重绘的例子，但也可以并非左右均等，而例如以开始点为边界，在左右以不同的移动像素数、合成比率进行重绘，并在到达左右端的时间点结束该方向的重绘。另外，在图28中示出了从左右两端向内部分别以mv_a/2的移动像素数进行重绘的例子，但也可以并非左右均等，而例如以交叉的结束点为边界，在左右以不同的移动像素数、合成比率进行重绘，并在内部的结束点交叉的时间点结束重绘。同样地，对于如将在内部的结束点左右分割的图像从左右滑入而在结束点结合、或者从内部的开始点将图像向左右分开而滑出这样的复合变形例，也可以通过以内部的开始点或结束点为边界，在左右以不同的移动像素数、合成比率在两个方向上进行两个系统的合成这样的考虑方法，容易地实现。
进而，在上述实施方式2至上述实施方式7中，以两个图像间的迁移效果为例子进行了说明，但即使如上述实施方式1那样以滚动方式显示一张图像的端到端、或者反复滚动一张以上的图像、或者连续迁移三张以上的图像，在上述实施方式2、上述实施方式4以及上述实施方式5的情况下，具备相当于图像数的图像文件，在上述实施方式3的情况下，具备相当于图像数的图像文件以及平滑化处理部，并由图像生成部3a、3b针对各图像数据或输出数据得到与迁移效果对应的描绘源区域和描绘目的区域并进行平滑化，从而也可以得到同样的效果。
另外，显然，在上述实施方式1至上式实施方式7中，即使利用程序实现各处理部，也可以得到同样的效果。

Claims (12)

1.一种图像合成装置，其特征在于，具备：
迁移信息计算部，作为图像的迁移信息计算移动像素数；以及
图像合成部，基于图像数据，生成与舍去在上述迁移信息计算部计算出的上述移动像素数的小数点以下的舍去移动像素数对应的生成数据、和与舍入上述移动像素数的小数点以下的舍入移动像素数对应的生成数据，基于该生成数据，以根据上述移动像素数得到的合成比率进行合成而输出合成图像数据。
2.根据权利要求1所述的图像合成装置，其特征在于，
上述图像合成部：
生成基于上述迁移信息、期望的迁移效果的种类和移动方向的平滑化参数，
对上述图像数据进行基于上述平滑化参数的平滑化处理，
从进行了该平滑化处理的图像数据，生成与上述舍去移动像素数以及上述舍入移动像素数对应的生成数据，
以上述合成比率合成该生成数据。
3.根据权利要求1所述的图像合成装置，其特征在于，
上述图像合成部：
生成基于上述迁移信息、期望的迁移效果的种类和移动方向的平滑化参数，
从上述图像数据生成与上述舍去移动像素数以及上述舍入移动像素数对应的生成数据，
对该生成数据进行基于上述平滑化参数的平滑化处理，
以上述合成比率合成进行了该平滑化处理的生成数据。
4.根据权利要求1所述的图像合成装置，其特征在于，
上述图像合成部：
生成基于上述迁移信息、期望的迁移效果的种类和移动方向的平滑化参数，
从上述图像数据生成与所生成的上述舍去移动像素数以及上述舍入移动像素数对应的生成数据，
以上述合成比率合成该生成数据，
对该合成后的生成数据进行基于上述平滑化参数的平滑化处理。
5.根据权利要求1所述的图像合成装置，其特征在于，
上述图像合成部具备：
第一图像生成部，得到根据上述舍去移动像素数设定的针对上述图像数据的描绘源区域部分的图像数据，并作为针对所生成的第一生成数据的描绘目的区域部分的生成数据；
第二图像生成部，得到根据上述舍入移动像素数设定的针对上述图像数据的描绘源区域部分的图像数据，并作为针对所生成的第二生成数据的描绘目的区域部分的生成数据；以及
图像内插合成部，以上述合成比率合成上述第一图像生成部生成的上述第一生成数据以及上述第二图像生成部生成的上述第二生成数据而生成内插合成数据，
将上述图像内插合成部生成的上述内插合成数据作为上述合成图像数据而输出。
6.根据权利要求5所述的图像合成装置，其特征在于，
上述图像合成部具备：
参数控制部，生成基于上述迁移信息、期望的迁移效果的种类和移动方向的平滑化参数；
第一平滑化处理部，得到根据上述舍去移动像素数设定的针对上述图像数据的描绘源区域部分的图像数据，生成利用由上述参数控制部生成的上述平滑化参数应用了平滑化处理的第一平滑化图像数据；以及
第二平滑化处理部，得到根据上述舍去移动像素数设定的针对上述图像数据的描绘源区域部分的图像数据，生成利用由上述参数控制部生成的上述平滑化参数应用了平滑化处理的第二平滑化图像数据，
上述第一图像生成部以及上述第二图像生成部得到上述第一平滑化处理部生成的上述第一平滑化数据和上述第二平滑化处理部生成的上述第二平滑化数据，并作为针对所生成的上述第一生成数据以及上述第二生成数据的描绘目的区域部分的生成数据。
7.根据权利要求6所述的图像合成装置，其特征在于，
上述图像合成部：
具备输出选择部，该输出选择部根据从上述图像信息计算部得到的迁移信息，选择并输出上述图像数据和上述内插合成数据中的某一个，
将在上述输出选择部选择的输出作为合成图像数据。
8.根据权利要求5所述的图像合成装置，其特征在于，
上述图像合成部具备：
参数控制部，生成基于上述迁移信息、期望的迁移效果的种类和移动方向的平滑化参数；
第一平滑化处理部，得到上述第一图像生成部生成的上述第一生成图像数据，生成利用由上述参数控制部生成的上述平滑化参数应用了平滑化处理的第一平滑化数据；以及
第二平滑化处理部，得到上述第二图像生成部生成的上述第二生成图像数据，生成利用由上述参数控制部生成的上述平滑化参数应用了平滑化处理的第二平滑化数据，
上述图像内插合成部根据上述第一平滑化处理部生成的上述第一平滑化数据和上述第二平滑化处理部生成的上述第二平滑化数据生成上述内插合成数据。
9.根据权利要求8所述的图像合成装置，其特征在于，
上述图像合成部：
具备输出选择部，该输出选择部根据从上述图像信息计算部得到的迁移信息，选择并输出上述图像数据和上述内插合成数据中的某一个，
将在上述输出选择部选择的输出作为合成图像数据。
10.根据权利要求5所述的图像合成装置，其特征在于，
上述图像合成部具备：
参数控制部，生成基于上述迁移信息、期望的迁移效果的种类和移动方向的平滑化参数；以及
平滑化处理部，得到上述图像内插合成部生成的上述内插合成数据，利用由上述参数控制部生成的上述平滑化参数应用平滑化处理而生成平滑化数据，
将上述平滑化处理部生成的上述平滑化数据作为平滑化后的内插合成数据而输出。
11.根据权利要求10所述的图像合成装置，其特征在于，
上述图像合成部：
具备输出选择部，该输出选择部根据从上述图像信息计算部得到的迁移信息，选择并输出上述图像数据和上述内插合成数据中的某一个，
将在上述输出选择部选择的输出作为合成图像数据。
12.一种图像合成方法，其特征在于，包括如下的步骤：
迁移信息计算步骤，作为图像的迁移信息计算移动像素数；
第一生成步骤，基于图像数据生成与舍去在上述迁移信息计算步骤中计算出的上述移动像素数的小数点以下的舍去移动像素数对应的生成数据；
第二生成步骤，基于上述图像数据生成与舍入在上述迁移信息计算步骤中计算出的上述移动像素数的小数点以下的舍入移动像素数对应的生成数据；以及
图像合成步骤，基于在该第一和第二生成步骤中生成的生成数据，以根据上述移动像素数得到的合成比率进行合成而输出合成图像数据。
CN2006800543622A 2006-04-25 2006-04-25 图像合成装置以及图像合成方法 Expired - Fee Related CN101427302B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2006/308653 WO2007129367A1 (ja) 2006-04-25 2006-04-25 画像合成装置および画像合成方法

Publications (2)

Publication Number Publication Date
CN101427302A true CN101427302A (zh) 2009-05-06
CN101427302B CN101427302B (zh) 2012-01-11

Family

ID=38667488

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800543622A Expired - Fee Related CN101427302B (zh) 2006-04-25 2006-04-25 图像合成装置以及图像合成方法

Country Status (6)

Country Link
US (1) US20090122081A1 (zh)
EP (1) EP2012301A4 (zh)
JP (1) JP4786712B2 (zh)
CN (1) CN101427302B (zh)
HK (1) HK1130557A1 (zh)
WO (1) WO2007129367A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105612574A (zh) * 2013-10-25 2016-05-25 发纮电机株式会社 可编程显示器、程序
CN106328045A (zh) * 2015-07-06 2017-01-11 西安诺瓦电子科技有限公司 可编程逻辑器件及其亚像素下采样方法和相关应用

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4962573B2 (ja) * 2007-12-06 2012-06-27 富士通株式会社 画像処理装置
JP4952796B2 (ja) 2007-12-25 2012-06-13 富士通株式会社 画像処理装置
CN101901126B (zh) * 2010-07-12 2012-01-04 东北大学 组合式大屏幕流媒体播放的计算机控制方法
WO2013146508A1 (ja) * 2012-03-30 2013-10-03 ソニー株式会社 画像処理装置および方法、並びにプログラム
JP6135050B2 (ja) * 2012-05-25 2017-05-31 セイコーエプソン株式会社 データ処理装置、表示装置、および、データ処理装置の制御方法
JP2013257476A (ja) * 2012-06-14 2013-12-26 Sony Corp 表示装置、画像処理装置、および表示方法
US20140215383A1 (en) * 2013-01-31 2014-07-31 Disney Enterprises, Inc. Parallax scrolling user interface
US11113578B1 (en) * 2020-04-13 2021-09-07 Adobe, Inc. Learned model-based image rendering
WO2024196107A1 (en) * 2023-03-21 2024-09-26 Samsung Electronics Co., Ltd. Generating contextual transition effects in videos

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2119594B (en) * 1982-03-19 1986-07-30 Quantel Ltd Video processing systems
US4849746A (en) * 1986-04-07 1989-07-18 Dubner Computer Systems, Inc. Digital video generator
US4805022A (en) * 1988-02-19 1989-02-14 The Grass Valley Group, Inc. Digital wipe generator
US5477240A (en) * 1990-04-11 1995-12-19 Q-Co Industries, Inc. Character scrolling method and apparatus
JPH04116691A (ja) * 1990-09-07 1992-04-17 Video Tron Kk 電子ロールオペーク装置
GB9024712D0 (en) * 1990-11-14 1991-01-02 Philips Electronic Associated Display method and apparatus
US5359712A (en) * 1991-05-06 1994-10-25 Apple Computer, Inc. Method and apparatus for transitioning between sequences of digital information
JPH05313645A (ja) 1992-05-06 1993-11-26 Matsushita Electric Ind Co Ltd 画像合成表示装置
JPH0723290A (ja) * 1993-06-30 1995-01-24 Nippon Hoso Kyokai <Nhk> スクロール装置
JPH08129374A (ja) * 1994-10-31 1996-05-21 Matsushita Electric Ind Co Ltd スクロール効果装置
US6141018A (en) * 1997-03-12 2000-10-31 Microsoft Corporation Method and system for displaying hypertext documents with visual effects
AU2710201A (en) * 2000-01-24 2001-07-31 Matsushita Electric Industrial Co., Ltd. Image composting apparatus, recording medium and program
US6618054B2 (en) * 2000-05-16 2003-09-09 Sun Microsystems, Inc. Dynamic depth-of-field emulation based on eye-tracking
JP2003233809A (ja) * 2002-02-07 2003-08-22 Matsushita Electric Ind Co Ltd 画像合成装置および画像合成方法
JP4484511B2 (ja) * 2003-12-26 2010-06-16 三洋電機株式会社 画像合成装置、画像合成用集積回路、及び画像合成方法
US7460132B2 (en) * 2005-04-28 2008-12-02 Texas Instruments Incorporated System and method for motion adaptive anti-aliasing

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105612574A (zh) * 2013-10-25 2016-05-25 发纮电机株式会社 可编程显示器、程序
CN105612574B (zh) * 2013-10-25 2018-08-14 发纮电机株式会社 可编程显示器、程序
CN106328045A (zh) * 2015-07-06 2017-01-11 西安诺瓦电子科技有限公司 可编程逻辑器件及其亚像素下采样方法和相关应用
CN106328045B (zh) * 2015-07-06 2019-07-16 西安诺瓦电子科技有限公司 可编程逻辑器件及其亚像素下采样方法和数据编码电路

Also Published As

Publication number Publication date
JPWO2007129367A1 (ja) 2009-09-17
EP2012301A4 (en) 2010-09-15
CN101427302B (zh) 2012-01-11
HK1130557A1 (en) 2009-12-31
WO2007129367A1 (ja) 2007-11-15
US20090122081A1 (en) 2009-05-14
EP2012301A1 (en) 2009-01-07
JP4786712B2 (ja) 2011-10-05

Similar Documents

Publication Publication Date Title
CN101427302B (zh) 图像合成装置以及图像合成方法
CN100587720C (zh) 渲染装置和方法,以及形状数据生成装置和方法
US5793379A (en) Method and apparatus for scaling images having a plurality of scan lines of pixel data
US20110150364A1 (en) Image transform method for obtaining expanded image data, image processing apparatus and image display device therefor
US20030151626A1 (en) Fast rendering of pyramid lens distorted raster images
CN102376293A (zh) 一种基于fpga的图像拼接处理器及图像拼接方法
US5499325A (en) Brightness controls for visual separation of vector and raster information
CN103324476A (zh) 页面动态参照布局及展现方法
JP2612260B2 (ja) テクスチヤマツピング装置
CN104732479A (zh) 对图像进行调整大小
KR101973985B1 (ko) 고해상도 디스플레이를 위한 분산 병렬 처리 방식의 영상 렌더링 시스템 및 그 방법
CN105321165A (zh) 图像处理装置、图像处理方法和图像处理系统
JP3892900B2 (ja) 複数の任意解像度のデバイスに表示を行うための任意解像度の個別ウインドウを備えたウインドウ・システム
CN101958002A (zh) 图像处理装置以及图像处理方法
JPH10261102A (ja) アニメーション生成装置およびアニメーション生成方法
JP2009069310A (ja) 表示制御装置及びその方法、プログラム、記録媒体、ディスプレイ装置
CN109493331B (zh) 一种基于并行计算算法的两景图像重叠区域快速获取方法
US8717380B2 (en) Image processing apparatus and control method thereof
JP2000251086A (ja) 曲線生成装置及び方法、並びにプログラム提供媒体
JPWO2014184956A1 (ja) 映像合成装置および方法
JP2013101363A (ja) スクリーンセーバ生成装置、および、スクリーンセーバ生成方法
US5701138A (en) Resolution independent methods for rendering a graphic image on a display device
JP3493126B2 (ja) テレビジョン受信機の表示装置
JPH06274653A (ja) グラフィック表示装置
KR100822948B1 (ko) 벡터 그래픽을 활용한 애니메이션의 개선된 중간 영상 생성시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1130557

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1130557

Country of ref document: HK

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120111

Termination date: 20190425

CF01 Termination of patent right due to non-payment of annual fee