CN103026386B - 图像处理装置、图像显示装置、图像处理方法及图像文件的数据结构 - Google Patents

Abstract

成为编辑对象的原来的图像用阶层数据（136）表示。用户将该图像内的区域（130）作为编辑对象而绘入图形（132）时，图像数据更新部生成仅由被进行了绘入的区域（130）构成的阶层构造的层（layer）（134）（S10）。具体来讲，是将编辑对象区域（130）的图像定为最下层，将其适当缩小而生成上面阶层的图像，作为阶层数据。在图像显示时，确认应新显示的帧（138）中包含被更新的区域（130）时，使层（134）的图像重叠于原来的阶层数据（136）的图像上地进行显示（S12）。

Description

图像处理装置、图像显示装置、图像处理方法及图像文件的数据结构

技术领域

本发明涉及将显示器所显示的图像放大/缩小或向上下左右移动的图像处理技术。

背景技术

已提出有不仅执行游戏程序，还能够再现动图像的家庭用娱乐系统。在该家庭用娱乐系统中，GPU生成使用了多面体的三维图像（例如参照专利文献1）。

无论图像显示的目的是什么，如何高效地显示图像一直都是重要的问题。尤其为高速地描绘高精细的图像而需要各种努力，例如提出了另外保存纹理数据，高效地进行映射（mapping）的手法（例如参照非专利文献1及2）。

〔在先技术文献〕

〔专利文献〕 

〔专利文献1〕美国专利第6563999号公报

〔非专利文献〕

〔非专利文献1〕Sylvain Fefebvre,et.al.,Unified Texture Management for Arbitrary Meshes,Repport de recherche,N5210,May2004,Institut National De Recherche En Informatique Et En Automatique 

〔非专利文献2〕Martin Kraus,et.al.,Adaptive Texture Maps,Graphics Hardware（2002）,pp1-10,The Eurographics Association 

发明内容

〔发明所要解决的课题〕

在适用上述的纹理映射等对数据结构进行加工的技术的情况下，存在若一度构建了显示图像的数据，则在需要更新图像的一部分时处理容易变得繁琐的问题。图像的分辨率越高、大小越大，就越容易发生图像的制作和编辑需要高度的知识、装置的处理负荷增加而使数据更新和图像显示的响应性降 低这样的情况。

本发明是鉴于这样的课题而研发的，其目的在于提供一种即使是高精细的图像，也能够高效地进行数据更新和描绘的图像处理技术。

〔用于解决课题的手段〕

本发明的一个方案涉及图像处理装置。该图像处理装置的特征在于，包括：存储部，存储将以不同分辨率来表现一个图像的图像数据按照分辨率顺序阶层化而成的阶层数据；显示图像处理部，根据用户所输入的显示区域移动请求，切换阶层数据中的阶层地描绘显示区域的图像；以及图像数据更新部，接收用户对所描绘的显示区域的图像的编辑操作输入，将阶层数据中的表示编辑对象区域的编辑后的图像的更新用阶层数据和原来的阶层数据一同作为编辑后的图像数据而存储于存储部；其中，显示图像处理部在原来的阶层数据的图像上重叠地描绘更新用阶层数据的图像。

本发明的另一方案涉及图像显示装置。该图像显示装置的特征在于，包括：解码部，对阶层数据和更新用阶层数据进行解码，其中，所述阶层数据是将以不同分辨率来表现一个图像的图像数据按照分辨率顺序阶层化而成的数据，所述更新用阶层数据是表示针对该阶层数据的图像进行的编辑对象区域的编辑后的图像的数据；以及统合绘图部，根据用户所输入的显示区域移动请求，切换各阶层数据中的阶层后，重叠描绘被解码了的图像。

本发明的另一方案涉及图像处理方法。该图像处理方法的特征在于，包括：从存储器读出阶层数据的步骤，该阶层数据是将以不同分辨率来表现一个图像的图像数据按照分辨率顺序阶层化而成的数据；根据由用户输入的显示区域移动请求，切换阶层数据中的阶层地描绘显示区域的图像的步骤；接收用户对所描画的显示区域的图像的编辑操作输入，将更新用阶层数据与原来的阶层数据一起作为编辑后的图像数据而存储于存储器中的步骤，其中，所述更新用阶层数据是表示阶层数据中的编辑对象区域的编辑后的图像的数据；以及在原来的阶层数据的图像上重叠描绘更新用阶层数据的图像的步骤。

本发明的另一方案涉及图像文件的数据结构。该数据结构是为在显示器上显示图像的至少一部分而从存储装置读出的图像文件的数据结构，其特征在于，使原图像的阶层数据与更新用阶层数据建立了对应；其中，所述原图像的阶层数据是将以不同分辨率表现一个图像的图像数据按分辨率顺序阶层化而成的数据，所述更新用阶层数据是对该原图像进行的编辑的对象区域的 编辑后的图像，表示要在显示时与原图像重叠的图像。

本发明的另一方案也涉及图像文件的数据结构。该数据结构是为在显示器上显示图像的至少一部分而从存储装置读出的图像文件的数据结构，其特征在于，使原图像的阶层数据、多个更新用阶层数据、以及上下信息图像的阶层数据建立了对应；其中，原图像的阶层数据是将以不同分辨率表现一个图像的图像数据按分辨率顺序阶层化而成的数据，更新用阶层数据是对该原图像进行的编辑的对象区域的编辑后的图像，表示要在显示时与原图像重叠描绘的图像，上下信息图像的阶层数据是与各更新用阶层数据建立了对应、且将用值的大小来表示重叠描绘时的重叠上下关系的参数作为像素值而保存的数据。

此外，将以上构成要素的任意组合、本发明的表现形式在方法、装置、系统、计算机程序等间变换后的实施方式，作为本发明的方案也是有效的。

〔发明效果〕 

通过本发明，能够高效地进行图像的编辑和编辑后的图像的显示。

附图说明

图1是表示能够适用于实施方式1的图像处理系统的使用环境的图。

图2是表示能够适用于图1的图像处理系统的输入装置的外观构成例的图。

图3是表示在实施方式1中使用的图像数据的阶层构造的图。

图4是表示实施方式1中的图像处理装置的构成的图。

图5是用于说明实施方式1中的图像数据的预读处理的图。

图6是详细地表示实施方式1中的具有阶层数据编辑功能的图像处理装置的控制部的构成的图。

图7是用于说明实施方式1中的图像编辑时的数据更新处理的基本步骤的图。

图8是表示在实施方式1中包括并行地生成和统合层（layer）的机构的图像数据更新部的构成的图。

图9是表示在实施方式1中用户进行图像的编辑时的图像数据的更新步骤的流程图。

图10是用于说明在实施方式2中准备的层的图。

图11是表示实施方式2中的图像数据更新部的构成的图。

图12是用于说明在实施方式2中按所绘入的图形单位来赋予Z值的方案的图。

图13是用于说明在实施方式2中按像素单位赋予Z值的方案的图。

图14是表示实施方式2中的图像显示时的处理步骤的流程图。

图15是用于说明在实施方式3中所准备的层和描绘顺序的图。

图16是用于说明实施方式3中的数据更新的步骤的图。

图17是表示实施方式3中的数据更新步骤的另一个例子的图。

图18是用于说明在实施方式3中将外接于所绘入的图形的矩形作为剪辑区域的方案的图。

图19是用于说明在本实施方式3中使剪辑区域进位时的数据更新处理的步骤的图。

图20是表示实施方式3中的图像数据更新部的构成的图。

具体实施方式

实施方式1

在本实施方式中定为处理对象的图像的数据具有由将原图像多阶段地缩小而生成的不同分辨率的图像构成的阶层构造。各阶层的图像分割为一个或多个平铺（tile）图像。例如，分辨率最低的图像由一个平铺图像构成，分辨率最高的原图像由最多数量的平铺图像构成。在图像显示时，通过将用于描绘的平铺图像在显示图像变为预定的分辨率时切换为不同的层的平铺图像，来迅速地进行放大显示或缩小显示。

首先，说明具有这样的阶层构造的图像的基本显示方式。图1表示能够适用本实施方式的图像处理系统1的使用环境。图像处理系统1具有用于执行图像处理软件的图像处理装置10和用于输出图像处理装置10的处理结果的显示装置12。显示装置12可以是具有输出图像的显示器及输出音声的扬声器的电视。

显示装置12可以通过有线缆线被连接到图像处理装置10，也可以通过无线LAN（Local Area Network：局域网）等无线连接。在图像处理系统1中，图像处理装置10可以介由缆线14连接于因特网等外部网络，下载并取得被阶层化了的压缩图像数据。此外，图像处理装置10还可以通过无线通信连接 于外部网络。

图像处理装置10例如可以是游戏装置或个人计算机，可以通过载入图像处理用的应用程序来实现图像处理功能。图像处理装置10按照来自用户的请求而进行显示于显示装置12的显示器的图像的放大/缩小处理、向上下左右方向的滚动处理等。下面，将这样的包含放大/缩小的显示区域变更处理表达为“显示区域的移动”。用户一边看显示器所显示的图像一边操作输入装置时，输入装置将显示区域移动请求信号发送到图像处理装置10。

图2表示输入装置20的外观构成例。输入装置20具备十字键21、模拟摇杆27a、27b和4种操作按钮26来作为用户可操作的操作手段。4种操作按钮26由○按钮22、×按钮23、□按钮24及△按钮25构成。

在图像处理系统1中，输入装置20的操作手段被分派用于输入放大/缩小显示图像的请求、及向上下左右方向滚动的请求的功能。例如，输入放大/缩小显示图像的请求的功能被分派给右侧的模拟摇杆27b。用户通过将模拟摇杆27b向身前拉，能够输入缩小显示图像的请求，此外，通过向前推，而能够输入放大显示图像的请求。

此外，输入滚动请求的功能被分派给十字键21。用户通过按下十字键21，能够输入向按下十字键21的方向的滚动请求。此外，输入显示区域移动请求的功能也可以分派给其它操作手段，例如可以向模拟摇杆27a分派输入滚动请求的功能。

输入装置20具有将所输入的显示区域移动请求信号传输到图像处理装置10的功能，在本实施方式中，被构成为能与图像处理装置10无线通信。输入装置20与图像处理装置10可以用Bluetooth（蓝牙）（注册商标）协议、IEEE802.11协议等来建立无线连接。此外，输入装置20可以介由缆线与图像处理装置10连接，将显示区域移动请求信号传输到图像处理装置10。

输入装置20如后述的那样，还接收添绘图形等用户的图像编辑请求。因此，可以将用于移动显示图像上所显示的光标的请求和用于从选项中进行选择的输入的功能分派给模拟摇杆27a、27b和十字键21，将确定编辑的功能分派给○按钮22。或可以从鼠标、触摸板等一般的输入装置中适宜地选择要分派那样的功能的输入装置20。

图3表示在本实施方式中使用的图像数据的阶层构造。图像数据具有由第0阶层30、第1阶层32、第2阶层34及第3阶层36沿深度（Z轴）方向 构成的阶层构造。此外，虽然在该图中仅表示了4阶层，但阶层数不限于此。下面，将具有这样的阶层构造的图像数据称作“阶层数据”。

图3所示的阶层数据具有四叉树阶层构造，各阶层由一个以上的平铺图像38构成。所有平铺图像38被形成为具有相同像素数的相同大小。例如具有256×256像素。各阶层的图像数据将一个图像以不同的分辨率来表现，将具有最高分辨率的第3阶层36的原图像多阶段地缩小而生成第2阶层34、第1阶层32、第0阶层30的图像数据。例如第N阶层的分辨率（N是0以上的整数）可以在左右（X轴）方向和上下（Y轴）方向上都是第（N＋1）层的分辨率的1/2。

在图像处理装置10中，阶层数据以被按预定的压缩格式压缩了的状态存储于存储装置，在显示于显示器前被从存储装置读出并解码。本实施方式的图像处理装置10具有支持多种压缩格式的解码功能，例如可解码S3TC格式、JPEG格式、JPEG2000格式的压缩数据。

阶层数据的阶层构造如图3所示的那样，将左右方向设定为X轴、将上下位向设定为Y轴、将深度方向设定为Z轴而构建虚拟的三维空间。图像处理装置10从输入装置20所提供的显示区域移动请求信号中导出显示图像的变更量后，使用该变更量导出虚拟空间中的帧的4角坐标（帧坐标）。此外，图像处理装置10也可以导出用于确定阶层的信息和该阶层中的纹理坐标（UV坐标）来代替虚拟空间中的帧坐标。下面，将阶层确定信息与纹理坐标的组合也称作帧坐标。

图4表示图像处理装置10的构成。图像处理装置10具有无线接口40、开关42、显示处理部44、硬盘驱动器50、记录介质安装部52、盘驱动器54、主存储器60、缓冲存储器70及控制部100。显示处理部44具有用于缓存将显示于显示装置12的显示器的数据的帧存储器。

开关42是以太网开关（以太网是注册商标），是通过有线或无线与外部设备连接并接收数据的器件。开关42介由缆线14与外部网络连接，能够从图像服务器接收被阶层化了的压缩图像数据。此外，开关42连接于无线接口40，无线接口40以预定的无线通信协议与输入装置20连接。在输入装置20中，用户所输入的显示区域移动请求信号经由无线接口40、开关42提供给控制部100。

硬盘驱动器50作为存储数据的存储装置来发挥作用。压缩图像数据被存 储于硬盘驱动器50。记录介质安装部52在被安装存储卡等可插拔的记录介质后，从可插拔的记录介质读出数据。盘驱动器54在被安装只读的ROM盘后驱动并识别ROM盘，读出数据。ROM盘可以是光盘或光磁盘等。压缩图像数据可以存储于这些记录介质中。

控制部100具备多核（Multiple core）CPU，一个CPU中具有一个通用处理器核和多个单处理器核。通用处理器核被称作PPU（Power Processing Unit），其它处理器核被称作SPU（Synergistic-Processing Unit）。

控制部100具备连接于主存储器60及缓冲存储器70的存储器控制器。PPU具备寄存器，并具备主处理器作为运算执行主体，将作为要执行的应用程序中的基本处理单位的任务高效地分派给各SPU。此外，PPU也可以自己执行任务。SPU具有寄存器，具备作为运算执行主体的副处理器和作为本地存储区域的本地存储器。本地存储器可以作为缓冲存储器70来使用。

主存储器60及缓冲存储器70是存储装置，作为RAM（随机存取存储器）来构成。SPU具有专用的DMA（Direct Memory Access：直接存储器存取）控制器作为控制单元，能够高速地进行主存储器60和缓冲存储器70之间的数据传输，此外，能够在显示处理部44中的帧存储器和缓冲存储器70之间实现高速的数据传输。本实施方式的控制部100通过使多个SPU并行地动作，来实现高速的图像处理功能。显示处理部44连接于显示装置12，输出与来自用户的请求相应的图像处理结果。

图像处理装置10为在进行显示图像的放大/缩小处理、显示区域的移动处理时顺畅地变更显示图像而预先将压缩图像数据的一部分从硬盘驱动器50载入到主存储器60。此外，将载入到主存储器60的压缩图像数据的再一部分进行解码并存储到缓冲存储器70中。由此，能够在之后的必要时机瞬时切换用于生成显示图像的图像。此时，可以通过基于这之前的显示区域的移动方向预读之后所需的区域，来决定成为载入和解码的对象的平铺图像。

图5是用于说明预读处理的图。该图表示了阶层数据的构造，各阶层被标记为L0（第0阶层）、L1（第1阶层）、L2（第2阶层）、L3（第3阶层）。在图5所示的阶层数据构造中，深度（Z轴）方向上的位置表示分辨率，越是靠近L0的位置，分辨率越低，据是靠近L3的位置，分辨率越高。此外，若关注显示器所显示的图像的大小，则深度方向上的位置对应于比例尺，将L3的显示图像的比例尺定为1时，L2中的比例尺是1/4、L1中的比例尺是 1/16，L0中的比例尺是1/64。

因此，在深度方向上，显示图像从L0侧向L3侧变化时，显示图像逐渐放大，从L3侧向L0侧变化时，显示图像逐渐缩小。箭头80表示来自用户的显示区域移动请求信号请求缩小显示图像并越过了比例尺1/4（L2）的状况。在图像处理装置10中，将作为平铺图像38而准备的L1、L2的深度方向的位置设定为深度方向的预读边界，当图像变更请求信号越过预读边界时，开始进行预读处理。

显示图像的比例尺处于L2附近时，使用L2（第2阶层）的平铺图像制作显示图像。具体来讲，在要显示的图像的比例尺处于L1平铺图像和L2平铺图像的切换边界82与L2平铺图像和L3平铺图像的切换边界84之间时，使用L2平铺图像。因此，如箭头80所示的那样，请求图像的缩小处理时，L2的平铺图像从被放大的图像变换为被缩小的图像地进行显示。另一方面，确定并预先解码从显示区域移动请求信号预测出的以后需要的平铺图像38。在图5的例子中，显示区域移动请求信号的请求比例尺越过L2时，图像处理装置10从硬盘驱动器50或主存储器60预读并解码位于缩小方向上的L1所对应的平铺图像38，写入到缓冲存储器70。

此外，虽然以上说明了深度方向的预读处理，但在上下左右方向的预读处理中，也是进行同样的处理。具体来讲，预先对解压缩在缓冲存储器70中的图像数据设定预读边界，使得在基于图像变更请求信号的显示位置越过预读边界时开始进行预读处理。

在此，考虑用户针对之前所述那样的阶层数据自己追加画或图形、或从上方进行涂色地更新图像的一部分的情况。此后，将这样的用户的行为称作“编辑”。此外，在以后的说明中，作为编辑行为，主要说明绘入图形的情况，但写字或粘贴其它图像、涂色、消色也能够同样地进行。

例如用户如一般的绘图装置一样地使图像的整体或一部分显示于显示装置12，通过以输入装置20移动光标来逐步地绘入想要的图形。此时，若编辑对象图像是上述那样的阶层数据，则数据的更新所需要的处理步骤与不具备阶层构造的图像相比变得复杂。

即，需要如下处理：（1）将用户在显示于显示装置12的图像上绘入的内容存储于作业用缓冲器，（2）在使用户确认绘入的内容的时刻，对成为编辑对象的阶层、例如在该时刻被用于显示装置12的图像显示的阶层的图像数据 添加作业用缓冲器的内容并进行压缩编码，（3）解码其它阶层的图像数据并配合分辨率地放大、缩小地添加作业用缓冲器的内容，并进行压缩编码，更新原来的阶层数据。

分辨率低的上位阶层中的极小的区域也是这样，越到下位阶层、分辨率越提高，对应区域的图像尺寸越变大。作为结果来讲，若图像数据的阶层数较大，则即使是上位阶层的很小的编辑，也会使更新对象的平铺图像的数量变得庞大。例如在上述那样的4叉树构造的阶层数据的情况下，即使是第1阶层中的一个平铺图像的更新，在第2阶层中也需要更新2×2=4个、在第n层中更新2n-1×2n-1个平铺图像。因此，在本实施方式中，通过将用户的编辑内容存储为与原来的阶层数据不同的另一阶层数据，来提高数据更新的效率。

图6详细地表示在本实施方式中具有阶层数据编辑功能的图像处理装置10的控制部100的构成。控制部100包括：输入信息取得部102，取得用户向输入装置20输入的信息；显示图像处理部110，按照用户的请求，一边使显示区域移动，一边描绘应显示的图像；以及图像数据更新部108，按照用户的编辑操作更新图像数据。

在图6及后述的图8、11、18中，作为进行各种处理的功能块而叙述的各要素，从硬件上来讲，能够由CPU（Central Processing Unit：中央处理器）、存储器、其它LSI来构成，从软件上来讲，由被载入到存储器的程序等实现。如已述的那样，控制部100具有1个PPU和多个SPU，PPU及SPU能够分别单独或共同构成各功能块。因此，本领域技术人员当理解这些功能块能够仅由硬件、仅由软件、或由它们的组合以各种形式实现，并不限定于某一种。

输入信息取得部102包括：显示信息取得部104，取得图像显示的开始/结束、显示区域的移动等与图像显示相关的指示输入的内容；以及编辑信息取得部106，取得用户对正显示的图像进行的编辑的内容的信息。在此，所谓编辑的内容，包括用户绘入的图形、文字的形状、颜色、大小、位置等。在本实施方式中，用户使用输入装置20使显示装置12所显示的图像的区域放大、缩小、滚动。并在想要的区域被显示的状态下选择图形、文字、颜色、大小来进行绘入，或通过光标来进行手绘（freehand）。

此时，显示区域移动请求信号由显示信息取得部104接收，图形绘入等编辑操作信号由编辑信息取得部106接收。后者的处理可以与一般的图像绘 图工具所实现的一样，编辑操作的具体手法不特别限定。显示信息取得部104所取得的信息被提供给显示图像处理部110。编辑信息取得部106所取得的信息被提供给图像数据更新部108。

显示图像处理部110包括：帧坐标确定部111，按照来自用户的显示区域移动请求来确定应新显示的区域的帧坐标；解码部112，解码应新解码的平铺图像；以及统合绘图部114，统合原来的阶层数据和表示更新部分的另外的阶层数据并进行绘图处理。

帧坐标确定部111基于显示区域移动请求的信息求出到下一个帧显示为止的移动量，并基于当前的帧坐标，确定应新显示的帧坐标。解码部112基于帧坐标确定部111所确定的帧坐标，从主存储器60读出需要的平铺图像进行解码，并存储于缓冲存储器70。在此，解码的对象除原来的阶层数据外，还包括所有表示更新部分的另外的阶层数据。

若需要的平铺图像的数据未存储于主存储器60，则解码部112从硬盘驱动器50载入。载入到主存储器60的区域、存储到缓冲存储器70的区域只要是包括帧坐标的预定范围即可，其具体决定手法不被限定。例如通过预先解码比帧尺寸大的区域、或如上述的那样预读今后需要的区域并载入、解码，能够实现针对显示区域移动请求响应性好的显示。

统合绘图部114从缓冲存储器70读出与帧坐标确定部111所确定的帧坐标对应的区域的图像数据，描绘到显示处理部44的帧存储器中。如之后所述的那样，在本实施方式中，若因用户编辑过图像而存在表示更新部分的另外的阶层数据，则基本上使该另外的阶层数据的图像重叠于原来的阶层数据的图像上。

因此，统合绘图部114参照表示阶层数据彼此的位置对应关系的数据，若需要向应新显示的帧坐标重叠，则执行重叠后再存储于帧存储器。若描绘没有被编辑、或不需要进行重叠的区域，则仅描绘原来的阶层数据。

图像数据更新部108从编辑信息取得部106接收到用户所进行的图像编辑操作的信息后，为反映它而生成或更新不同于原来的阶层数据的另一阶层数据，并存储于硬盘驱动器50。此外，还使该更新反映到被载入到主存储器60的平铺图像的数据中。新生成阶层数据时，还生成表示与原来的阶层数据的位置对应关系的信息，作为所生成的阶层数据的附加信息。

图7是用于说明本实施方式中的图像编辑时的数据更新处理的基本步骤 的图。在图7及后述的图9、14、16、17中，将各部的处理步骤用代表步骤的S（Step的首字母）和数字的组合来表示。首先，用阶层数据136表示成为编辑对象的原图像。假定用户将该图像中的区域130作为编辑对象，使用输入装置20绘入了图形132。区域130如上述的那样可以是在用户开始进行绘入时正显示于显示装置12的区域。

于是，图像数据更新部108生成仅由被进行了绘入的区域130构成的阶层数据134（S10）。具体来讲，是将编辑对象的区域130的图像定为最下层，并适当缩小它来生成上面阶层的图像，作为阶层数据。例如原来的阶层数据136的第1阶层的一部分是区域130时，新生成的阶层数据134由第1阶层、第0阶层构成。下面，将这样仅具有更新信息的阶层数据或其图像称作“层（layer）”。

图像数据更新部108不对原来的阶层数据136做处理，将新生成的层134存储于硬盘驱动器50。此时，生成表示如下对应关系的信息附加于该层134：构成层134的最下层的区域对应于原来的阶层数据136所形成的虚拟三维空间内的哪一个坐标。

于是，显示图像处理部110的统合绘图部114通过对应关系信息而确认到应新显示的帧138中包含已被更新的区域130时，重叠于原来的阶层数据136的图像地显示层134的图像（S12）。此时，在要显示比层的阶层数据134所保持的最下层数据分辨率大的图像时，将该最下层的图像放大进行重叠。

通过这样仅将更新对象区域的阶层数据作为层而在原来的阶层数据之外另行地生成，就无需如上述的那样使更新反映到分辨率高的阶层，能够抑制更新所需要的平铺图像的数量。作为结果，能够减少针对各平铺图像进行的解码、绘入、编码这样的一系列更新处理的次数，能够减轻更新所涉及的处理的负荷。

另一方面，若在用户每次进行绘入并使其确定时都生成层，则因编辑量的不同，有时层的数量会变得庞大。若层的数量变多，则除显示时的重叠处理增加、针对显示区域移动的响应性下降之外，还有整体上数据量变大、迫及主存储器60等各存储区域的可能。

因此，在本实施方式中，使层的生成和统合并行地进行。图8表示包含这样的机构的图像数据更新部108的构成。图像数据更新部108a包括用于生成层的层生成部116和用于统合层的层统合部118。层生成部116在用户每次 向编辑对象图像进行绘入并使其确定时，生成一个层并存储于主存储器60。此外，绘入的确定可以按图形单位自动地识别，也可以在用户向输入装置20进行了用于确定的输入时确定绘入。

层统合部118在后台统合层生成部116存储于主存储器60的层134a、134b。在该图中表示了统合3个层134b来生成一个层135的情况。由于要依次显示编辑中的图像，故层统合部118不盖写层生成部116所生成的层134a、134b地生成统合后的新的层135。并且，在统合处理完成的时点，将用于显示的数据从统合前的层134b切换为统合后的层135。

已统合3个层134b后的层135包含有3次的编辑结果。通过反复进行该处理而逐步减少层的数量，若用户的编辑处理结束，则将统合后的层135存储于硬盘驱动器50，将其和原来的阶层数据一起作为最终的图像数据。此外，可以将所有的层统合为一个层，也可以按预定数量分别统合更新时间较近的层、或针对各预定区域分别统合更新区域较近的层等，按照预定的方针使统合后的层有多个。

进而，说明通过上述构成来实现的图像处理装置10的动作。图9是表示用户进行图像编辑时的图像数据的更新步骤的流程图。在图9及后述的图14的流程图中，当在以S和数字的组合表示的处理中执行某判断处理，其判断结果为肯定时，附加“是”（“是”的首字母），例如表示为“S10的是”，相反的，该判断结果为否定时，附加“否”（“否”的首字母），表示为“S10的否”。

图9的流程图中的处理于用户进行了表示开始编辑图像的输入时开始。首先，用户介由输入装置20指定图像数据并请求开始编辑后（S20），输入信息取得部102的显示信息取得部104接收该请求，显示图像处理部110从硬盘驱动器50载入成为对象的图像的阶层数据并进行解码、绘图，由此显示第0阶层等预定的初始图像（S22）。

就此待机直到用户进行了显示区域的移动、绘入等编辑操作（S24的“否”），当进行了编辑操作时（S24的“是”），显示图像处理部110进行按照显示区域移动请求而移动显示区域、或使绘入操作反映到显示中等帧的更新处理（S26）。此时，在绘入确定之前，将正绘入的图形等描绘到作业用缓冲器，将其重叠到原来的阶层数据的图像上来显示。

每次绘入确定时，图像数据更新部108的层生成部116生成由以作业用 缓冲器的图像为最下层的阶层数据构成的层，并清空作业用缓冲器。另一方面，层统合部118作为后台处理而统合所生成的层（S28）。在该时点的统合对象层的统合完成之前，原样接收编辑操作，继续进行帧更新、层生成、统合（S30的“否”、S24的“是”、S26、S28）。

该时点的统合对象层的统合完成后（S30的“是”），将用于显示该统合对象层所表示的区域的数据切换为统合后的层（S32）。反复进行S24至S32的处理（S34的“否”）直到用户进行了结束编辑请求的输入，若进行了编辑结束请求（S34的“是”），则将最终统合后的层存储于硬盘驱动器50，结束处理（S36）。

通过以上所述的本实施方式，在针对具有阶层构造的图像数据进行了编辑的情况下，生成仅由更新对象区域构成、且成为更新对象的分辨率的层，和由分辨率比其小的阶层构成的阶层数据作为层。由此，不需要使编辑结果反映到原来的阶层数据所包含的所有阶层中，更新处理的负荷被减轻。特别是在阶层数较大的数据的情况下，即使是在低分辨率的阶层中的小区域，也会在最下层的图像中涉及广大的区域，故生成层所带来的效果会显著地表现出来。

此外，与生成层的处理并行地实施统合处理。由此，能够防止层的数量随着用户编辑的进行而无限度地增加。作为结果，为显示所编辑的图像而重叠图像需要很长的时间、存储器区域受迫的可能性降低。此外，可以对层的数量设置最大值，在层达到该数量时，向用户发出警告而使编辑待机，直到层数通过统合而减少。由此，能够防止层的生成速度比统合速度快、层的数量一时增加的情况。

实施方式2

本实施方式在与原来的阶层数据不同地另行保持表示更新部分的阶层数据这一点上与实施方式1一样。另一方面，不同于实施方式1在每次确定新的绘入时都制作新的层，在本实施方式中，预先准备层，并根据编辑而更新该层。所谓准备层，实际上是预先确保构成阶层数据的数据的存储区域。通过这样做来使得不增加层的数量。本实施方式能够用与图4所示的图像处理装置10、图6所示的控制部100一样的构成来实现。下面，着眼于与实施方式1不同的点来进行说明。

图10是用于说明本实施方式中所准备的层的图。在本实施方式中，将原来的阶层数据的阶层分为若干个组，针对各组准备一个层。在该图中，针对在原来的阶层数据140中的第0、第1、第2阶层准备第0层142a，针对第3、第4阶层准备第1层142b，针对第5、第6阶层准备第2层142c，针对第7、第8阶层准备第3层142d。此外，该图的分组是一个例子，层的数量、各层所包含的阶层数可以根据图像的大小和原来的阶层数据的阶层数等适当决定。

各层在被进行了针对原来的阶层数据中所负责的阶层的编辑时，反映该编辑地被更新。因此，在图10的例子中，成为第0层保持共计3阶层、其它层保持共计2阶层的、与原来的阶层数据的对应阶层相同大小的图像数据的阶层数据。例如若针对图10的原来的阶层数据140中的第4阶层的区域148进行了编辑，则更新第1层142b的对应的阶层、即第1阶层的相同区域148。

还更新同一第1层142b所包含的其他阶层、即第0阶层的对应区域。在这种情况下，只要将所更新的区域148缩小到该阶层的分辨率，更新包含该区域的平铺图像即可。包含3阶层的第0层142a的第1阶层被更新时，放大该区域，缩小其下一阶层的第2阶层，更新其上一阶层的第0阶层。

不导入层地更新原来的阶层数据146的所有阶层时，需要更新阶层数据146的斜线部分所包含的所有平铺图像。另一方面，在本实施方式中，通过导入层而能够将成为更新对象的平铺图像限定于被进行了编辑的层中所包含的阶层（例如第1层142b的斜线部分）。

进而，考虑在实施方式1中，用户在短时间内进行大量的编辑时，生成处理的速度比统合处理的速度快的情况，层数的控制中容易包含不确定的因素。在本实施方式中，由于能够预先使层数固定，且各层所负责的阶层有限，故即使用户的编辑阶层、编辑速度变化，也容易估计处理时间及所需要的存储区域。

在本实施方式中，在显示时对原来的阶层数据的图像重叠所有层地进行描绘。在以比原来的阶层数据中的最下层高的分辨率来显示时，将所有层的最下层的图像放大到该分辨率后进行重叠。即使是其它分辨率，只要重叠将各层中分辨率最接近的阶层的图像放大或缩小而成的同一分辨率的图像即可。

此时，在其它层之间，表示用户进行编辑的顺序的时序信息不被共享。因此，有可能发生无论将层按照哪个顺序来重叠，之后所添画的的图形也会隐藏于在其之前所描绘的图形的下面这样的事情。因此，在本实施方式中，使按像素分别保持规定重叠时的上下关系的变量的另一阶层数据与各层142a、142b、142c、142d建立对应。该变量与在三维图形中表示深度信息的Z值相似，故以下将其称作Z值。

如图10所示，图像的层142a、142b、142c、142d分别被对应Z层144a、144b、144c、144d，这些Z层是具有相同阶层数、相同大小、像素值成为Z值的阶层数据。并且，在图像的层被更新了时，也更新与该图像层建立有对应的Z层，使得在重叠所有层时，该更新区域被显示在最上面。

针对Z层，也通过放大、缩小被更新了的区域，来使更新反映到同一层的其它阶层。此时若通过进行缩小而将具有不同的Z值的像素统合为一个像素，则可以按平均值、最大值、最小值等预先规定的规则来决定Z值。

图11表示本实施方式的图像数据更新部108的构成。图像数据更新部108b包括根据用户的编辑而更新图像的层的图像层更新部160，和更新Z层的Z层更新部162。如上述的那样，在主存储器60中准备在原来的阶层数据中负责的阶层不同的多个图像的层142和分别与其相对应的Z层144。并且图像层更新部160在用户每次进行编辑时，更新负责编辑对象的阶层的图像的层142的对应区域的平铺图像，以反映编辑内容。

Z层更新部162更新与图像层更新部160所更新的图像层建立有对应的Z层144的对应区域的Z值。此时，针对包括其它层在内的对应区域之前所被赋予的Z值，决定使更新后的层的相应区域成为最上方那样的Z值。例如在重叠时越往下就使Z值越大的情况下，进行更新使得更新对象区域的Z值变得比所有层的对应区域的Z值都小。

在图像显示时，显示图像处理部110的统合绘图部114与三维图形描绘时的Z测试同样地、针对各像素分别将已描绘的Z值和正要描绘的层的Z值相比较来决定是否进行描绘。由此，总是与编辑时的重叠一样的顺序来显示。

图12、13是用于说明Z值的赋予方法的图。在这些图中，为使容易理解，将阶层数据的图像大小统一地表示。此外，假定Z值在重叠时越在下位就越大。图12表示按1次的编辑单位、即被绘入的图形单位赋予Z值的情况。首先，假设原来的阶层数据140的图像为无限远。实际上，是假设能够以被准备为Z值的位长（bit length）来表现的最大值（图中标记为“max”）（虚线矩形141)。

在此，假定对第0层142a负责的阶层绘入了圆170时，使在与该层建立了对应的Z层144a的图像中圆170的区域的所有像素值都比最大值小1。进而，当对第1层142b负责的阶层绘入了矩形172时，使与其建立了对应的Z层144b的矩形172的区域的像素值都比圆170再小1。即，比最大值小2。

进而，在对第2层142c负责的阶层绘入了三角形174时，使与其建立了对应的Z层144c的三角形174的区域的像素值全都比矩形172再小1。即，比最大值小3。同样地，在对第3层142d负责的阶层绘入了六角形176时，使与其建立了对应的Z层144d的六角形176的区域的像素值全都比三角形174再小1。即，比最大值小4。

由于这样赋予Z值，被赋予给最后所绘入的图形的区域的Z值预先保存在寄存器等中，通过从所保存的Z值减1来决定新的图形的Z值。图像显示时，不论层的描绘顺序如何，只要正想描绘的层的像素的Z值比已经描绘了的层的像素的Z值大，就不盖写它，由此能够沿绘入的顺序来显示所重叠的图像。在图12的重叠后的图像中，圆、矩形、三角形、六角形按照Z值从大到小的顺序依次从下位起被重叠（虚线矩形178）。

在此，向第1层142b负责的阶层新绘入了黑色圆180时，该黑色圆180的区域的Z值变为比前一层的第3层142d中所被绘入的六角形176的Z值小1的值，即比最大值小5的值。通过这样做，即使矩形172和黑色圆180属于同一第1层142b，重叠的顺序不同，能够进行正确地反映了绘入顺序的显示（虚线矩形182）。

图13表示按像素单位赋予Z值的情况。假定向该图中的第0层142a及第1层142b分别与图12同样地按圆170、矩形172的顺序绘入了该图形。由于被绘入第0层142a的圆170的所有区域都位于原来的阶层数据的图像的正上方，故Z值与图12一样、成为比最大值小1的值。

然后，对第1层142b绘入了矩形172时，若按像素单位来考虑，则在矩形172的区域中混合存在与圆170重叠的区域和位于原来的阶层数据的图像正上方的区域。因此，对与圆170重叠的区域赋予比圆170的Z值小1的值，对位于原来的阶层数据正上方的区域赋予比Z值的最大值小1的值。这样做，也能够与图12的情况一样，不按照层的描绘顺序地以本来的重叠顺序显示。

在此情况下，Z层更新部162针对各像素分别预先保存当前被赋予给各层的各阶层的Z值中的最小值。并且，对新成为更新对象的区域所包含的像 素赋予比预先保存的最小的Z值小1的值。虽然在图12及图13的例子中，都是按1的刻度赋予Z值的，但如果减小Z值也能使后绘入的图形总是被显示在上方，则其刻度可以不是1。

但是，可以想到随着不断编辑而新赋予的Z值逐渐变小时，最终Z值会下溢（underflow）而回到最大值。即使按升序赋予Z值，也会上溢。由于在此情况下需要重新赋予Z值等处理，故优选减小Z值的刻度。此外，与像图12那样按图形单位赋予Z值的情况相比，像图13那样按像素单位进行赋予更能够抑制Z值的消耗。与此同时，优选针对所预想的编辑量充分地准备Z值的位长。

本实施方式中的图像编辑时的数据更新处理能够通过在实施方式1的图9所示的流程图中将S28至S32的处理替换为预先准备的图像的层的更新处理、对应的Z层的更新处理来实现。图14是表示图像显示时的处理步骤的流程图。该流程图于用户介由输入装置20进行了使显示区域移动的请求时开始。

首先，帧坐标确定部111确定应新显示的区域的帧坐标，该信息包含有图像的分辨率（S40）。与此相应地，解码部112根据需要解码原来的阶层数据及各层，统合绘图部114首先描绘原来的阶层数据的帧（S42）。然后，将任意层、例如第0层中的接近所要求的分辨率的阶层的图像放大或缩小到该分辨率（S44、S46）。此时，同图像的层一起，还预先放大、缩小与其建立了对应的Z层。

然后，如下这样在原来的阶层数据的图像上重叠地描绘第0层的图像。即，从坐标（0，0）的像素起依次（S48）将与第0层建立了对应的Z层中的Z值Z（x，y）与已对同一像素描绘了的最新的Z值Zpre（x，y）进行比较，若Z（x，y）较小（S50的“是”），则描绘第0层的像素（S52）。若Z（x，y）大于或等于Zpre（x，y）时，则不进行描绘（S50的“否”）。

然后，使坐标（x，y）增值，针对下一像素进行同样的处理（S54的“否”、S56、S50、S52）。第0层的所有像素的处理结束后（S54的“是”），对第1层、第2层、···重复进行同样的处理（S58的“否”、S60、S46~S56）。通过对所有层的所有像素判断是否描绘，并按照此来进行描绘，能够不描绘因新的绘入而隐藏的层的像素地表现恰当的图像的重叠。

通过以上所述的本实施方式，将原来的阶层数据的阶层分为多个组，对 各组准备更新用的层。由此，层数不因编辑量而变化地成为一定的量，故容易估计显示时的重叠处理的负荷及所需要的存储区域。此外，由于各层所负责的阶层被限定，故应反映更新的阶层数被限定，能够恒常地减小更新对象的平铺图像的数量。此外，通过将与各层建立对应地决定重叠时的像素的上下关系的Z值作为阶层数据来保存，能够不按照层的描绘顺序地以正确的上下关系重叠，从而能够进行恰当的显示。

实施方式3

本实施方式在将表示更新部分的阶层数据与原来的阶层数据不同地另外保存这一点上与实施方式1及2是一样的。此外，在将原来的阶层数据的阶层分成组，对其分别准备更新用的层这一点上与实施方式2是一样的。另一方面，在实施方式2中，是将表示进行编辑的顺序的时序信息作为Z层而与图像的层另行地设定的，但在本实施方式中，不设置Z层，而是另外设定重叠的顺序变得恰当的机构。本实施方式能够用与图4所示的图像处理装置10、图6所示的控制部100同样的构成来实现。下面，着眼于与实施方式1及2不同的点进行说明。

图15是用于说明在本实施方式中准备的层和描绘顺序的图。与实施方式2一样，将原来的阶层数据190的阶层分成组，准备分别负责它们的层。在图15的例子中，第0层192a负责原来的阶层数据190的第0、第1、第2阶层，第1层192b负责第3、第4阶层，第2层192c负责第5、第6阶层，第3层192d负责第7、第8阶层。然后，与实施方式2一样，当所负责的阶层被进行了更新时，更新与其相应的层。

以下，越是所负责的阶层的分辨率低的层，越定为“上位”的层。在本实施方式中，如该图的箭头194所示的那样假定描绘顺序是固定的。具体来讲，在描绘原来的阶层数据的图像后，从负责分辨率高的阶层的层、即下位的层起依次描绘。在该图的例子中，按第3层192d、第2层192c、第1层192b、第0层192a顺序来描绘。在此情况下，若以该描绘顺序向各层进行了绘入，则即使重叠它们，所显示的图像196也是恰当的。

但是，例如第2层192c被绘入新的图形197时，由于在重叠时该图形会被第1层192b、第0层192a盖写，故不能够得到恰当的图像（图像198）。因此，在本实施方式中，向新成为编辑对象的层复制其上位的层的图像后，进行使复制源的层变透明的剪辑（clipping）处理。因此，假定本实施方式中 的层的数据的各像素具有α值。

图16是用于说明本实施方式中的数据更新的步骤的图。该图如图15所说明的那样，表示了第2层192c被绘入新的图形197的情况。此时，首先将比第2层192c上位的第1层192b及第0层192a的图像放大为第2层192c的各阶层的分辨率并盖写（S60、S62）。盖写的顺序与显示时一样，定为从下位的层起。

然后，将成为盖写源的第1层192b、第0层192a的图像透明化（S64、S66）。之后，向编辑对象的第2层192c绘入新的图形197来进行更新（S68）。如此，即使不像实施方式2那样准备Z层，被新绘入的图形也总是被描绘在某个层的最上面，在那之后被重叠的上位层不会盖写它，故最终所显示的图像199是恰当的。

此外，通过从下位层起进行重叠，剪辑成为总是从上位层向下位层方向的放大处理，故不会因缩小剪辑高分辨率的图像而丢失原来的信息，剪辑前后的信息量相同。由于即使这样做，因用户的编辑而需要更新的层是有限的，故与更新原来的阶层数据所包含的所有阶层相比，能够减轻更新处理的负荷。

图17表示本实施方式中的数据更新步骤的另一个例子。由于该例子也与图16一样，向第2层192c绘入新的图形197，故虽然将其上位的第1层192b、第0层192a的图像向第2层192c剪辑，但将该剪辑对象限定于编辑对象区域。在此所谓编辑对象区域，是例如为用户编辑而显示于显示装置12的帧的区域。或定为包含被绘入的图形的预定范围的区域。

在图17中，将第2层192c的区域200定为编辑对象区域。此时，仅将第1层192b、第0层192a的对应区域202的图像放大来盖写第2层192c（S70、S72），并使盖写源的区域204透明化（S74、S76）。这样处理，最终显示的图像206也是恰当的。此外，由于与图16的情况相比剪辑区域较小，故能够减轻处理的负荷。

像这样，剪辑区域越小，在处理负荷方面上就越有利。因此，能够想到根据被绘入的图形的大小而使剪辑区域变化。图18表示为将剪辑区域抑制到最小限度而将外接于被绘入的图形的矩形作为剪辑区域的情况。在这样的情况下，处理的负荷被最大限度地抑制，但另一方面，存在编辑对象区域较小时，上位层的应剪辑区域会变得不组1像素的情况。

图18的例子表示了在如图15所示那样进行负责的第0层192a～第3层 192d中，对第2层192c的最下层、即原来的阶层数据的第6阶层绘入了新的图形210的情况。使与其外接的矩形212的1边是8像素大小时，第1层192b的最下层、即原来的阶层数据的第4阶层中的对应区域的1边成为2像素。并且，第0层192a的最下层、即原来的阶层数据的第2阶层中的对应区域的1边成为0.5像素。

在这样的情况下，由于剪辑0.5像素是不可能的，故若维持现状则无法得到想要的显示图像214。因此，仅将需要的阶层的不足1像素的剪辑区域进位为1像素。并且，将本来的剪辑区域和因进位而扩大了的区域的差分放大到下面一位的层的对应区域并绘入。

图19是用于说明将剪辑区域进位时的数据更新处理的步骤的图。与图18一样，假定在第2层的最下层中更新了1边为8像素的区域。此时，如上述的那样，在第0层192a的最下层中，剪辑区域变为不足1像素。当然，在第0层192a的其它阶层中将变为比那更小的区域。在像这样最下层中出现剪辑区域不足1像素的层时，仅使该层的最下层的剪辑区域进位为1像素。并且，该层所包含的其它阶层不设置透明化区域。

在该图中，仅将第0层192a的最下层、本来的剪辑区域212aの1边0.5像素进位为1像素（将区域212a与其周围的区域218a相加的区域）。这是由于在显示时所要求的分辨率比该层所负责的阶层的分辨率高时，总是放大该层的最下层的图像来使用。如果不以最下层的像素进行剪辑，则无论绘入到第2层192c的图形210是什么分辨率，都被第0层192a的图形盖写而不被显示。

将在第0层192a的最下层中进行进位而剪辑的区域中的、本来应剪辑的1边0．5像素的区域212a放大地绘入到本来的剪辑目标、即第2阶层192c。该区域在第2层192c中成为1边8像素的区域。然后，将进位而剪辑的区域中的其余的区域218a绘入其下一位的第1层192b（区域218b）。作为其前阶段，与图18一样，第1层192b的1边2像素的区域212b被放大为1边8像素，被剪辑到第2层192c。

因此，如该图所示的那样，在第1层192b中，1边2像素的区域212b被透明化，其周围的区域218b成为将第0层192a中的本来的剪辑区域与进位后的区域的差分的区域218a放大后的图像。通过这样做，能够以放大第0层192a的最下层那样的分辨率总是显示恰当的图像216。

另一方面，由于显示使用比第0层192a的最下层靠上的阶层那样的低分辨率的图像时，图形210也不足1像素，故即使以第0层192a的图像进行盖写也没有问题。在该图的例子中，虽然第1层192b的任一阶层的剪辑区域都在1像素以上，但在最下层以外的阶层中应透明化的区域不足1像素时，因同样的理由而可以不使像素透明化。

图20表示本实施方式的图像数据更新部108的构成。图像数据更新部108c包括剪辑部230及层更新部232。在主存储器60中准备在原来的阶层数据中负责的阶层不同的多个层192。剪辑部230从主存储器60的层192中的比编辑对象层更上位的层向编辑对象层剪辑图像。此时，通过放大或缩小所剪辑的图像，来使得剪辑結果被反映到编辑对象的层所包含的所有阶层。

进而，通过针对剪辑源的层，将所有阶层的剪辑区域的α值定为0，来使图像透明化。成为对象的区域可以如图16那样定为整个区域，也可以如图17、18那样仅定为编辑对象区域或进位后的1像素。层更新部232向编辑对象的层绘入新的图形，进行更新。然后，通过放大或缩小绘入后的图像，来使该层所包含的所有阶层都被反映绘入。

本实施方式中的图像编辑时的数据更新处理能够通过在实施方式1的图9所示的流程图中将S28至S32的处理替换为预先准备的层中的比编辑对象更上位的层的剪辑和编辑对象层的更新处理来实现。此外，图像显示处理如上述的那样，可以仅在原来的阶层数据的图像上，从下位的层起依次重叠。

通过以上所述的本实施方式，将原来的阶层数据的层分为多个组，对各组准备更新用的层。然后，在编辑时，从编辑对象层的上位层进行剪辑后，盖写新绘入的图形。由此，同实施方式2一样，层数与编辑量无关地成为恒定，故容易估计显示时的重叠处理的负荷及所需要的存储区域。此外，由于不需要Z层，故只需要比实施方式2小的存储区域就可以了。

此外，由于更新对象被限定于已进行了编辑的层和其上位的层，故需要广范围地更新分辨率高的图像的可能性降低，能够减轻更新处理的负荷。此外，在图像显示时，只要单纯地从下位的层进行重叠即可，故处理的负荷较小，能够实现响应性好的显示。

以上基于实施方式对本发明进行了说明。本领域技术人员当理解上述的实施方式为例示，其各构成要素和各处理过程的组合可以有各种变形例，且该变形例同样包括在本发明的范围内。

例如本实施方式中的图像处理装置10是同时具有阶层数据的编辑功能和显示功能的，但也可以是仅具有显示功能的图像处理装置10。在此情况下，通过将层重叠于原来的阶层数据的图像进行显示，能够显示本实施方式所述的被编辑了的图像。

〔标号说明〕 

1图像处理系统、10图像处理装置、12显示装置、20输入装置、30第0阶层、32第1阶层、34第2阶层、36第3阶层、38平铺图像、44显示处理部、50硬盘驱动器、60主存储器、70缓冲存储器、100控制部、102输入信息取得部、104显示信息取得部、106编辑信息取得部、108图像数据更新部、110显示图像处理部、111帧坐标确定部、112解码部、114统合绘图部、116层生成部、118层统合部、160图像层更新部、162Z层更新部、230剪辑部、232层更新部。

〔工业可利用性〕

如上述的那样，本发明能够使用于计算机、图像处理装置、内容（contents）执行装置、图像显示装置、游戏机等信息处理装置。

Claims (11)

1.一种图像处理装置，其特征在于，包括：

存储部，存储将以不同分辨率来表现一个图像的图像数据按照分辨率顺序阶层化而成的阶层数据，

显示图像处理部，根据用户所输入的显示区域移动请求，切换上述阶层数据中的阶层地描绘显示区域的图像，以及

图像数据更新部，接收用户对所描绘的显示区域的图像的编辑操作输入，将上述阶层数据中的表示编辑对象区域的编辑后的图像的更新用阶层数据和原来的阶层数据一同作为编辑后的图像数据而存储于上述存储部；

其中，上述图像数据更新部使将原来的阶层数据的阶层分组而成的多个阶层分别与不同的上述更新用阶层数据建立对应，根据用户的编辑操作输入，更新与包含编辑对象区域的阶层建立了对应的上述更新用阶层数据；

上述显示图像处理部在上述原来的阶层数据的图像上全部重叠地描绘上述更新用阶层数据的图像。

2.如权利要求1所述的图像处理装置，其特征在于，

上述图像数据更新部在将与包含编辑对象区域的阶层建立了对应的上述更新用阶层数据更新为编辑后的图像之前，在上述显示图像处理部描绘图像时，将在更新对象的更新用阶层数据的图像后所重叠的更新用阶层数据的图像的至少一部分，复制于更新对象的更新用阶层数据的图像，并对复制源的图像的区域施以透明化处理。

3.如权利要求2所述的图像处理装置，其特征在于，

上述显示图像处理部从与分辨率高的阶层建立了对应的上述更新用阶层数据起依次重叠于上述原来的阶层数据的图像地进行描绘；

上述图像数据更新部将与分辨率低于更新对象的更新用阶层数据的阶层建立了对应的上述更新用阶层数据的图像的至少一部分，复制于更新对象的更新用阶层数据的图像。

4.如权利要求3所述的图像处理装置，其特征在于，

当上述更新用阶层数据的图像中的要施以透明化处理的区域不足1像素时，上述图像数据更新部使其进位为1像素，然后将应复制于更新对象的更新用阶层数据的图像的区域和该进位后的区域的差分区域，复制于与该更新用阶层数据建立了对应的阶层的下面一阶层所对应的更新用阶层数据的图像。

5.如权利要求1所述的图像处理装置，其特征在于，

上述图像数据更新部与各更新用阶层数据建立对应地生成上下信息图像的阶层数据，在更新上述更新用阶层数据时，更新上述上下信息图像的阶层数据使得新的更新对象区域被描绘在最上方，其中，所述上下信息图像的阶层数据是将用值的大小来表示重叠描绘上述更新用阶层数据的图像时的重叠上下关系的参数作为像素值而保存的数据；

上述显示图像处理部参照上述上下信息图像的阶层数据，用上述更新用阶层数据的图像中的应描绘在最上方的像素数据来描绘各像素。

6.如权利要求5所述的图像处理装置，其特征在于，

上述图像数据更新部按由用户的编辑操作输入所绘入的图形单位来决定上述上下信息图像的像素值。

7.如权利要求5所述的图像处理装置，其特征在于，

上述图像数据更新部按由用户的编辑操作输入所绘入的图形中包含的像素单位来决定上述上下信息图像的像素值。

8.如权利要求1所述的图像处理装置，其特征在于，

上述图像数据更新部在每次收到用户的编辑操作输入时，都生成仅表示编辑对象区域、且由编辑对象的分辨率以下的分辨率的阶层构成的新的上述更新用阶层数据。

9.如权利要求8所述的图像处理装置，其特征在于，

上述图像数据更新部在后台执行统合所生成的多个上述更新用阶层数据的处理。

10.一种图像显示装置，其特征在于，包括：

解码部，对原来的阶层数据和更新用阶层数据进行解码，其中，所述原来的阶层数据是将以不同分辨率来表现一个图像的图像数据按照分辨率顺序阶层化而成的数据，所述更新用阶层数据是表示针对该阶层数据的图像进行的编辑对象区域的编辑后的图像的数据，以及

统合绘图部，根据用户所输入的显示区域移动请求，切换各阶层数据中的阶层后，重叠描绘被解码了的图像；

其中，上述解码部对与将上述原来的阶层数据的阶层分组而成的多个阶层分别建立对应的多个上述更新用阶层数据进行解码；

上述统合绘图部将上述更新用阶层数据的图像全部重叠地描绘在上述原来的阶层数据的图像上。

11.一种图像处理方法，其特征在于，包括：

从存储器读出阶层数据的步骤，该阶层数据是将以不同分辨率来表现一个图像的图像数据按照分辨率顺序阶层化而成的数据，

根据由用户输入的显示区域移动请求，切换上述阶层数据中的阶层地描绘显示区域的图像的步骤，

接收用户对所描画的显示区域的图像的编辑操作输入，将更新用阶层数据与原来的阶层数据一起作为编辑后的图像数据而存储于存储器中的步骤，其中，所述更新用阶层数据是表示上述阶层数据中的编辑对象区域的编辑后的图像的数据，以及

在上述原来的阶层数据的图像上重叠描绘上述更新用阶层数据的图像的步骤；

在存储于存储器的步骤中，使将原来的阶层数据的阶层分组而成的多个阶层分别与不同的上述更新用阶层数据建立对应，根据用户的编辑操作输入，更新与包含编辑对象区域的阶层建立了对应的上述更新用阶层数据；

在进行描绘的步骤中，在上述原来的阶层数据的图像上全部重叠地描绘上述更新用阶层数据的图像。