CN100358368C - 静止图像数据文件的生成方法及装置 - Google Patents

静止图像数据文件的生成方法及装置 Download PDF

Info

Publication number
CN100358368C
CN100358368C CNB2005100529266A CN200510052926A CN100358368C CN 100358368 C CN100358368 C CN 100358368C CN B2005100529266 A CNB2005100529266 A CN B2005100529266A CN 200510052926 A CN200510052926 A CN 200510052926A CN 100358368 C CN100358368 C CN 100358368C
Authority
CN
China
Prior art keywords
image data
still image
image
attribute information
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2005100529266A
Other languages
English (en)
Other versions
CN1664859A (zh
Inventor
相矶政司
锹田直树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2004057163A external-priority patent/JP2005252426A/ja
Priority claimed from JP2004057158A external-priority patent/JP4239855B2/ja
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN1664859A publication Critical patent/CN1664859A/zh
Application granted granted Critical
Publication of CN100358368C publication Critical patent/CN100358368C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00283—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a television apparatus
    • H04N1/00286—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a television apparatus with studio circuitry, devices or equipment, e.g. television cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/215—Motion-based segmentation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3242—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of processing required or performed, e.g. for reproduction or before recording

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Television Signal Processing For Recording (AREA)
  • Image Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

本发明提供一种生成图像文件的图像文件生成方法。该图像文件生成方法包括：由时序上连续的多个源静止图像数据，生成至少1个静止图像数据的静止图像数据生成步骤；生成所述静止图像数据的属性信息的属性信息生成步骤；使用所述生成的静止图像数据和所述属性信息，生成所述静止图像数据文件的数据文件生成步骤。所述属性信息生成步骤包括：根据所述静止图像数据的生成，将在对所述静止图像数据的图像处理中可利用的信息作为所述属性信息生成的步骤。

Description

静止图像数据文件的生成方法及装置
技术领域
本发明涉及从多个静止图像数据生成静止图像数据的图像处理技术。
背景技术
近年来，从用数字视频摄像机及其他动态图像摄像装置记录的动态图像数据，生成静止图像数据的技术正在普及。但是，在来自动态图像数据的静止图像数据的生成处理中，一般的，如存在导致丢失被摄体的移动矢量或摄像工作的动态信息的问题。另一方面，从时序上连续的静止图像数据生成的更高分辨率的静止图像数据，具有如进行特定的画质调整画质就会过度的恶化的性质。这样，由于从动态图像数据那样的时序上连续的静止图像所生成的静止图像数据具有固有的性质，所以期望在该图像处理中能有特别的考虑。
但是，现今，在静止图像数据的生成后，表现出上述固有的性质的信息委托给使用者来处理，因此在图像处理中的特别考虑的请求成为使用者的负担。
发明内容
本发明，是为了解决现有技术中的上述课题而做出的，其目的在于，提供在生成图像文件的图像文件的生成方法中，将对于从时序上连续的多个源静止图像数据所生成的静止图像的图像处理中可利用的信息，作为属性信息包含于图像文件中的技术。
本发明中的静止图像数据文件生成方法，是生成静止图像数据文件的静止图像数据文件生成方法，包括：由动态图像数据，生成至少1个静止图像数据的静止图像数据生成步骤；生成所述静止图像数据的属性信息的属性信息生成步骤；以及，生成包含所述生成的静止图像数据和所述属性信息的所述静止图像数据文件的数据文件生成步骤，或者，具有生成包含所述生成的静止图像数据的所述静止图像数据文件的步骤、和生成包含所述属性信息的其他文件的步骤，并且所述静止图像数据文件和所述其他文件彼此关联的数据文件生成步骤，其中，所述属性信息生成步骤包括：根据所述静止图像数据的生成，将在对所述静止图像数据实施的图像处理中可利用、且将对动作区域进行指定的信息予以包含的信息，作为所述属性信息生成的步骤，所述动作区域是由所述静止图像数据表示的图像区域中被检测出动作的区域。
本发明中的静止图像数据文件生成装置，是生成静止图像数据文件的静止图像数据文件生成装置，备有：静态图像数据生成部，其由动态图像数据，生成至少1个的静止图像数据；属性信息生成部，其生成所述静止图像数据的属性信息；数据文件生成部，其实施：生成包含所述生成的静止图像数据和所述属性信息的所述静止图像数据文件的动作，或者生成包含所述生成的静止图像数据的所述静止图像数据文件以及包含所述属性信息的其他文件、且所述静止图像数据文件和所述其他文件彼此关联的数据文件的动作的其中之一，其中，所述属性信息生成部，根据所述静止图像数据的生成，将在对所述静止图像数据实施的图像处理中可利用、且将对动作区域进行指定的信息予以包含的信息，作为所述属性信息生成的步骤，所述动作区域是由所述静止图像数据表示的图像区域中被检测出动作的区域。
为了解决上述课题的至少一部分，本发明提供生成图像文件的图像文件生成方法。该图像文件生成方法，其特征在于，包括：由时序上连续的多个源静止图像数据，生成至少1个静止图像数据的静止图像数据生成步骤；生成所述静止图像数据的属性信息的属性信息生成步骤；使用所述生成的静止图像数据和所述属性信息生成所述静止图像数据文件的数据文件生成步骤。其中，所述属性信息生成步骤包括：根据所述静止图像数据的生成，将在对所述静止图像数据的图像处理中可利用的信息作为所述属性信息生成的步骤。
根据本发明的方法，因为生成了根据由时序上连续的多个源静止图像数据的静止图像数据的生成，将对于静止图像数据的图像处理中可利用的信息作为属性信息予以包含的数据文件，所以不过度增大使用者的负担而能够实现考虑了如上述生成的静止图像数据的固有性质的图像处理。
另外，静止图像数据文件，不一定是单一的数据文件，也可以是能与本发明相关联的各种文件的方式来构成。
本发明的第1方式，是由动态图像数据生成静止图像数据文件的静止图像数据文件生成装置。该静止图像数据文件的生成装置，备有：静态图像生成部，其由所述动态图像数据生成静止图像数据；属性信息生成部，其生成所述静止图像数据的属性信息；数据文件生成部，其使用所述静止图像数据和所述属性信息，生成所述静止图像数据文件。其中，所述属性信息生成部，其特征在于，使用包含于所述动态图像数据中的信息中的所述静止图像数据所包含的信息以外的信息，生成所述属性信息。
根据本发明的第1方式的静止图像数据文件的生成装置，由于使用包含于动态图像数据中的信息中的所述静止图像数据所包含的信息以外的信息生成的属性信息被保存在生成的静止图像数据文件中，所以可以得到如下的优点的至少一部分。
例如，(1)即使假如动态图像数据丢失，作为动态图像的一部分的静止图像的操作还可进行。(2)使用如此属性信息的静止图像数据文件，可以很容易地进行作为动态图像数据的数据管理。(3)由于来自动态图像数据的静止图像数据的生成中所使用的属性信息，可能会在其他的静止图像数据的生成中能再利用，所以由此可以实现处理的高速化。
在上述的静止图像数据文件生成装置中，所述属性信息，也可以以包含指定动作区域的信息，该动作区域是由所述静止图像数据所表示的图像区域中检测出动作的区域。这样能够实现例如关注被摄体的自动修整(trim)处理。这是因为动态区域多为被摄体的缘故。
在所述静止图像数据文件生成装置中，所述静止图像数据生成部，也可以从所述静止图像数据中提取所述动作区域。
在所述静止图像数据文件生成装置中，所述属性信息，可以包含移动信息，该移动信息表示在所述动作区域中的所述图像区域中的并进移动状态。这样，可以实现如根据被摄体的移动状态自动地进行最佳配置的修整处理。
在所述静止图像数据文件生成装置中，所述属性信息，也可以包含表示所述动作区域内的图像的性质的被摄体信息。这样，例如，基于属性信息检索或数据库化静止图像数据的时候，使用者可以很容易地取得有用的信息。
本发明第1方式的图像处理装置，其特征在于，是根据包含静止图像数据和所述静止图像数据的属性信息的静止图像数据文件，对所述静止图像数据进行图像处理的图像处理装置。所述属性信息，包含指定动作区域的信息，该动作区域是在由所述静止图像数据所表示的图像区域中检测出动作的区域。所述图像处理装置，根据所述属性信息，从由所述静止图像数据所表示的图像区域中提取所述动作区域。
根据本发明的第1方式的图像处理装置，因为能够从静止图像数据中，自动地提取出被摄体，所以例如在向被摄体的其他的图像的合成这样的以被摄体为中心的图像处理中，可以减轻使用者的负担。
在所述图像处理装置机中，所述属性信息包含移动信息，该移动信息表示并进移动状态，该并进移动状态包含在所述动作区域的所述图像区域中的移动方向。所述图像处理装置，可以用于根据所述移动信息，提取在所述动作区域的所述移动方向侧附加了规定区域的区域的图像。
这样，能够自动地提取以移动的被摄体为优选的配置的图像。一般，在被摄体移动的情况下，在构图上优选在移动方向上设置空区域。
在所述的图像处理装置中，所述图像处理装置，可以根据所述移动信息，提取在所述动作区域的所述移动方向侧上将比所述移动方向的相反侧更大的区域附加在了所述动作区域上的区域的图像。
在所述图像处理装置中，所述图像处理装置，决定由所述图像处理应生成的静止图像数据所表示的图像形状，并且以将在具有所述已被决定形状的图像区域内产生的剩余区域在所述移动方向较多分配的方式配置所述动作区域。
在所述图像处理装置中，在所述形状为具有规定的纵横比的矩形的时候，所述图像处理装置，可以将在具有规定的纵横比的图像区域内配置所述动作区域时所产生的剩余区域，以在所述移动方向上最近的上下左右中的任一侧中多分配的方式进行配置。
本发明的第2方式的图像生成装置，是生成图像文件的图像生成装置。该图像生成装置备有：图像合成部，其从多个图像数据中，将时序上排列的多个图像数据作为合成源图像数据取得，并合成所述取得的合成源图像数据，生成表示比所述多个图像数据所表示的图像更清晰的高清晰图像数据的高清晰图像数据；图像特性信息生成部，其生成用于限制对所述生成的高清晰图像数据的特定画质调整的图像特性信息；图像文件生成部，其生成高清晰图像文件，该高清晰图像文件包含所述生成的图像特性信息和所述高清晰图像数据。
该图像生成装置，能够将合成源图像数据进行合成，生成高清晰图像数据，并且生成用于限制对高清晰图像数据的特定的画质调整的图像特性信息，且生成包含高清晰图像数据和图像特性信息的高清晰图像文件。因此，对这样生成的高清晰图像文件进行画质调整时，能够限制若对高清晰图像数据实施便可能会降低画质的特定的画质调整。因此，对于表示合成多个图像数据而生成的高清晰图像的高清晰图像数据进行画质调整的时候，能够抑制画质的降低。
另外，在本说明书中，所谓“高清晰”，意思是指象素间距小，所谓“低清晰”意思是指象素间距大。
在所述图像生成装置中，所述特定的画质调整，也可以是在所述图像合成部中对所述高清晰图像数据不实施的画质调整。
这样，可以限制如果由高清晰图像数据的特性对高清晰图像数据执行画质调整可能会降低画质那样画质调整的执行。
在所述图像生成装置中，所述特定的画质调整，也可以是锐度的调整。
这样，能够限制如果对高清晰图像数据执行画质降低的可能性会特别大的锐度调整的执行。
另外，在上述图像生成装置中，所述多个图像数据，也可以是构成动态图像的时序上连续的帧图像数据。
这样，在对从构成动态图像的时序上连续的帧图像数据生成的高清晰图像数据进行画质调整时，能够抑制画质的降低。
本发明的第2方式的图像处理装置，是进行图像数据的画质调整的装置。该图像处理装置备有：图像文件取得部，其取得高清晰图像文件，该高清晰图像文件包括高清晰图像数据和图像特性信息，所述高清晰图像数据表示比通过合成从多个图像数据中取得的时序上排列的多个图像数据而生成的所述多个图像数据所表示图像更清晰的高清晰图像，所述图像特性信息用于限制对所述生成的高清晰图像数据的特定的画质调整；图像特性信息分析部，其分析包含在所述取得的高清晰图像文件中的所述图像特性信息；画质调整部，其根据所述图像特性信息的分析结果，限制对所述高清晰图像数据的特定的画质调整的执行。
该图像处理装置，分析包含在高清晰图像文件中的图像特性信息，根据该分析结果，能够限制对高清晰图像数据的特定的画质调整的执行。因此，在对表示合成多个图像数据而生成的高清晰图像的高清晰图像数据进行画质调整的时候，可以抑制画质的降低。
另外，本发明可以以各种方式实现，例如，可以以图像生成方法及装置、图像处理方法及装置、图像变换方法及装置、图像输出方法及装置、用于实现这些方法或者装置的功能的计算机程序、存储该计算机程序的记录介质、包含该计算机程序在载波中具体实现的数据信号等方式实现。
附图说明：
图1是表示作为本发明的一实施例的图像处理系统100的说明图。
图2是表示在显示器18a中所显示的图像文件生成处理中的操作显示画面200的说明图。
图3是表示本发明的第1实施例中的静止图像数据生成处理的内容的流程图。
图4是表示本发明的第1实施例中所使用动态图像数据的构成的一个例子的说明书。
图5是表示本发明的第1实施例中的帧图像提取处理的内容的流程图。
图6是表示本发明的第1实施例中的评价值计算处理的内容的流程图。
图7是表示本发明的第1实施例中的模块化处理的情况的说明图。
图8是表示本发明的实施例中的帧间比较处理的结果的说明图。
图9是表示本发明的第1实施例中所使用的系数表的说明图。
图10是表示本实施例中的属性信息的一个例子的说明图。
图11是表示本实施例中的图像数据文件GF的构成的说明图。
图12是表示本发明的第1实施例中的模板图像合成处理中的内容的流程图。
图13是表示在显示器18a中所显示的模板图像合成处理中的操作显示画面200a的说明图。
图14是表示本发明的第1实施例中的图像插入处理的内容的流程图。
图15是表示本发明的第1实施例中的最佳构图决定处理的内容的流程图。
图16是表示本发明的第1实施例中最佳构图被决定的情况的说明图。
图17是表示在第1实施例的变形例中提取图像的情况的说明图。
图18是概略性表示在本发明的第2实施例中的图像生成、处理装置的构成的说明图。
图19是表示由第2实施例中的图像生成、处理装置进行高清晰图像文件的生成及高清晰图像的画质调整的概要的说明图。
图20是表示由第2实施例中的图像生成、处理装置进行的高清晰图像文件生成的流程的流程图。
图21是概略性表示在第2实施例中的高清晰图像文件的内部构成的一个例子的说明图。
图22是表示由在第2实施例中图像生成、处理装置进行的高清晰图像的画质调整的流程的流程图。
图23是表示进行在第2实施例中的高清晰图像的画质调整时的图像生成、处理装置的用户接口的一个例子的说明图。
图24是表示在第2实施例中由图像合成部进行的图像合成的流程的流程图。
图25是表示有关在第2实例中的基准帧图像和对象帧图像之间的位置偏差的说明图。
图26是表示有关在第2实例中的基准帧图像和对象帧图像之间的位置偏差的补正的说明图。
图27是放大表示在第2实例中的基准帧图像和对象帧图像补正偏差配置后的情况的说明图。
图28是表示有关第2实施例中的双线性法的插值处理的说明图。
图29是示意性表示第2实施例中的阈值R的大小和高清晰图像Gp的画质之间的关系的说明图。
具体实施方式下面，基于实施例以以下顺序说明本发明的实施方式。
A-1.本发明的第1实施例中的图像处理系统的构成：
A-2.本发明的第1实施例中的静止图像数据文件生成处理：
A-3.本发明的第1实施例中的模板图像合成处理：
A-4.本发明的第1实施例的变形例：
B-1.本发明的第2实施例中的图像生成、处理装置的构成：
B-2.本发明的第2实施例中的处理的概要：
B-3.本发明的第2实施例中的高清晰图像文件的生成：
B-4.本发明的第2实施例中的高清晰图像的画质调整：
B-5.本发明的第2实施例中的图像合成：
B-6.本发明的第2实施例的变形例：
C.变形例：
A-1.本发明的第1实施例中的图像处理系统的构成：
图1是表示作为本发明一个实施例的图像处理系统100的说明图。图像处理系统100备有：供给动态图像数据的动态图像数据库部30；用于从动态图像数据中取得的多个静止图像数据的指定或图像处理用的用户接口部18；作为对从动态图像数据库部30取得的多个静止图像数据进行图像处理机的图像处理装置的个人计算机PC；作为将处理后的静止图像数据输出的输出装置的彩色打印机20。
个人计算机PC备有：执行来自动态图像数据的静止图像数据的提取和其他的图像处理的图像处理应用程序10；管理动态图像数据库部30或用户接口部18、彩色打印机20这类的外围设备之间的接口的接口部15。
图像处理应用程序10备有：从动态图像数据生成静止图像数据的静止图像数据生成部11；在各静止图像数据生成之际生成属性信息的属性信息生成部12；从生成的静止图像数据和其属性信息生成静止图像数据文件的数据文件生成部13；合成静止图像数据文件和预先准备的模板图像的图像合成处理部14。
动态图像数据库部30，作为动态图像数据的供给源具有数字视频摄像机30a、DVD30b及硬盘30c。动态图像数据在本实施例中作为非隔行扫描方式的帧图像数据。
用户接口部18，是用于使用者指定从动态图像数据中取得的帧图像数据的用户接口。用户接口部18备有将由动态图像数据库部30供给的动态图像、生成中的静止图像及后述的操作显示画面进行显示的显示器18a，和接受来自使用者的输入的键盘18b或鼠标18c。
图2是表示在显示器18a中所显示的图像文件生成处理中的操作显示画面200的说明图。操作显示画面200包括：选择作为处理对象的源图像数据的种类的源图像数据种类选择开关121；用于从被选择的种类的源图像数据当中选择一个的源图像数据选择窗口122；对由作为处理对象的源图像数据所表示图像进行显示的图像显示区域123；用于静止图像数据生成处理的操作按钮。另外，在图2的例子中，在源图像数据选择窗口122中显示动态图像数据Gs被选择了的状态。
在用于静态图像数据生成处理的操作按钮中包含用于控制在图像显示区域123中所显示的动态图像的各种按钮。用于控制动态图像的各种按钮中包含播放按钮231、停止按钮232、暂时停止按钮233、后退按钮234，快进按钮235。
用于静止图像数据生成处理的操作按钮中，还包含用于从动态图像数据生成静止图像的手动提取按钮125和自动提取按钮124。手动提取按钮125是用于边控制动态图像使用者边生成静态图像的按钮。另一方面，自动提取按钮124是用于自动地从动态图像数据生成静止图像数据的按钮。
以上说明的系统构成中，如果按下自动提取按钮124，则如以下所示那样，生成将包含在动态图像中的动态信息作为属性信息予以包括的静止图像数据文件。另外，在本实施例中，所谓“动态信息”是表示被摄体的动作的信息。
A-2.本发明的第1实施例中的静止图像数据文件处理：
图3是表示本发明的第1实施例中的静止图像数据生成处理的内容的流程图。在步骤S100中，图像处理应用程序10(图1)，接受来自动态图像数据库部30的动态图像数据的供给。被供给的动态图像数据，在图中未示出的存储器中被缓存，并在图像显示区123(图2)中被显示。
图4是表示本发明的第1实施例中所使用的动态图像数据的构成的一个例子的说明图。动态图像数据是1帧时间为33ms的时序上连续的帧图像数据的集合，在各帧图像数据中，以时序的顺序付与帧号码。在图4的例子中，动态图像数据显示了足球选手中的一个人向球门带球的情形。
在步骤S200中，静止图像数据生成部11执行帧图像提取处理。所谓帧图像提取处理，在本实施例中，是指从作为帧图像数据集合的动态图像数据中选择特定的帧图像数据的处理。
图5是表示在本实施例中的帧图像提取处理的内容的流程图。在步骤S210中，静止图像数据生成部11，进行采样处理。所谓采样处理，是指从动态图像数据提取帧图像数据的处理。该提取，例如以每隔1秒选择帧图像数据的方式进行。这样提取的帧图像数据，在本说明书中被称为“采样图像数据”。
在步骤S220中，静止图像数据生成部11进行评价值计算处理。所谓评价值计算处理，是指计算各帧图像的评价值的处理。关于该处理将在后面叙述。
在步骤S230中，静止图像数据生成部11进行帧图像选择处理。帧图像选择处理，可以通过从采样图像数据中选择计算出的评价值比事先决定的预定的阈值大的帧图像数据而进行。
图6是表示本实施例中的评价值计算处理的内容的流程图。在步骤S222中，静止图像数据生成部11执行模块化处理。所谓模块化处理是指将选择的帧图像数据区域按照每个规定的模块分割的处理。
图7是表示在本实施例中的模块化处理的情况的说明图。图7(a)、图7(b)及图7(c)分别表示了图4(a)、图4(b)及图4(c)所示的3幅图像的数据被模块化处理后的情况。各帧图像数据，在纵方向上被分割为3行，然后在横方向上被分割为6列。
在步骤S224中，静止图像数据生成部11，执行采样图像比较处理。所谓采样图像比较处理是指，将连续的采样图像按照每一模块进行比较处理。比较方法，例如可以使用梯度法检测模块的动作的有无。另外，在本实施例中，作为“动作”不仅仅检测并进移动，还有旋转移动或特征部的大小变动。
图8是表示本实施例中的帧间比较处理结果的说明图。图8(a)、图8(b)及图8(c)，分别表示图7(a)、图7(b)及图7(c)所示的帧图像数据的处理结果。处理结果表示为：将检测出“动作”的模块(动作模块)的模块值为“1”，将没有检测出“动作”的模块(静止模块)的模块值为“0”。
具体地说，进行如下的处理。例如对于图7(a)所示的帧，E列3行，E列4行，F列3行及F列4行的4个模块被决定为动作模块。这是由于足球选手在这些模块内移动的缘故。其结果，对于该4个模块，模块值定为“1”，对于其他模块，模块值定为“0”。
进行同样的处理，对于图7(b)所示的帧图像，只是D列2行，D列3行，E列2行及E列3行4个模块的模块值被决定为“1”，同样对于在图7(c)中所示的帧图像，只是C列2行，C列3行及D列3行的3个模块的模块值被决定为“1”。
在步骤S226中，静止图像数据生成部11，执行模块组生成处理。所谓模块组生成处理，是指将模块值为“1”的连续的模块的集合作为模块组的分组化处理。这是因为由于这样的模块组多为主要被摄体，所以如果注重模块组进行处理，可以准确的推断被摄体的状况的缘故。另外，在本实施例中，模块组相对于权利要求范围中的“动作区域”。
在步骤S228中，静止图像数据生成部11进行计数表乘法处理。计算表乘法处理，是以各个模块组计算出在图9所示的计算表和模块值的乘积后的值的总和的处理。例如，对于图7(a)的帧图像数据所包含的模块组，分别计算E列3行，E列4行，F列3行及F列4行的模块的模块值和计数表的相应的模块的计数的乘法。另外，对于其他的模块，因为模块值为“0”因此可以忽略。
该计算表(图9)，是在被摄体存在于图像区域的中央部分的情况下为高评价值的方式构成的。因此，周边部分的系数变为负值，并且中央部分的系数变为正数。另外，本实施例的计算表，是为了使说明清楚易懂而被简化的计算表。
具体地说，执行以下的计算。对于E行3列，模块值“1”和系数表中的相应的计数“1”相乘，计算出乘法运算值“1”。进行同样的处理，对E列4行，F列3行及F列4行计算出乘法运算值“-1”。这些值的总和为“-3”。同样，对于包含在图7(b)及图7(c)的帧图像中的各个模块组，分别为“4”、“3”。
这样，在图7(a)、图7(b)及图7(c)所示的帧图像的评价值，分别算出为“-3”、“4”及“3”。
在步骤S230(图5)中，静止图像数据生成部11，执行采样图像选择处理。所谓采样图像选择处理，是基于计算出的评价值选择包含模块组的帧图像数据的处理。例如，如果以包含评价值在4以上的模块组为选择基准，就会只选择图7(b)所示的帧图像。
在步骤S300(图3)中，属性信息生成部12，生成属性信息。所谓属性信息，是具有包含了静止图像数据的动态图像数据的动态属性信息。在本实施例中，模块组移动矢量、即移动方向和其大小为属性信息。该属性信息，按照每个静止图像数据中生成。
图10是本实施例中的属性信息的一个例子的说明图。图10的例子中，从右下向左上的移动矢量Vb相当于属性信息。移动矢量Vb例如可以作为2个数字组合生成。
在步骤S400中，数据文件生成部13，执行图像文件生成处理。图像文件生成处理，是使用选择的帧图像数据和生成的属性信息生成静止图像数据文件的处理。
图11是表示本实施例中的图像数据文件GF的构成的说明图。图像数据文件GF，由图像数据存储区域90和图像数据信息存储区域80构成。在图像数据存储区域90和图像数据信息存储区域80中，分别存储帧图像数据和其属性信息。
图11的例子中，在图像数据信息存储区域80中作为属性信息储存有模块组(动作区域)的大小和该模块组的移动矢量。模块组的大小，比如能表示为纵向和横向的象素数。
图像数据文件GF，也可以具有符合数字静止照像机用图像文件格式标准(Exif)的文件结构。该标准由日本电子信息技术产业协会(JEITA)所制定。在这种情况下，属性信息，例如可以存储在“Maker Note”。另外，取代存储在图像数据信息存储区域80中，可以作为电子水印存储在静止图像数据内。
这样生成的静止图像数据文件所包含的属性信息，可以有效利用在以下说明的模板图像合成处理中。
A-3.本发明的第1实施例中的静止图像模板生成处理：
图12是表示本发明的第1实施例中的模板图像合成处理的内容的流程图。所谓模板图像合成处理，是指在本实施例中，对于预先准备的模板图像，合成提取的静止图像数据的一部分区域的处理。
图13是表示在显示器18a中显示的模板图像合成处理中的操作显示画面200a的说明图。操作显示画面200a，同上述的操作显示画面200同样，包括：选择作为处理对象的源图像数据的种类的源图像数据种类选择开关121；用于从被选择的种类的源图像数据当中选择1个的源图像数据选择窗口122；显示作为处理对象的源图像数据所表示的图像的图像显示区域123。关于用于静止图像数据生成处理的操作按钮，代替用于控制在图像显示区域123中所表示动态图像的各种按钮，而包括手动修整按钮126和自动修整按钮127。
在步骤S1100中，使用者选择模板图像。所谓模板图像，是指为了在照片图像中施以修饰而合成的图像，是与胶片照片画框相当的图像。模板图像的选择，是可以由使用者用选择源图像数据种类选择开关121选择“模板”，同时用源图像数据选择窗口122点击期望的图像而进行。这样，若选择了模板图像，就在图像显示区域123中显示被选择的模板图像。另外，在图13例子中，在源图像数据选择窗口122中，显示了静止图像数据文件Ts被选择后的状态。
这样被选择的模板图像，具有用于插入静止图像的两个图像插入窗口W1、W2。两个图像插入窗口W1、W2的尺寸和纵横比这些信息，作为各模板图像的属性信息按照各个模板图像予以存储。
在步骤S1200中，使用者指定图像插入窗口。图像插图窗口的指定，在图13的例子中，是可以通过鼠标18c指定两个图像插入窗口W1、W2中的任一个。若指定了图像插入窗口，将被指定的图像插入窗口的尺寸和纵横比这些信息输入到图像合成处理部14(图1)。
在步骤S1300中，使用者进行图像插入处理。所谓图像插入处理，是指在被指定的模板图像的窗口内部，插入、合成提取出的静止图像数据的一部分区域的处理。
图14是表示在本发明的第1实施例中的图像插入处理的内容的流程图。在步骤S1310中，使用者选择作为处理对象的静止图像数据。静止图像数据的选择，可以是以使用者用源图像数据种类选择开关121选择“静止图像”，并用源图像数据选择窗口122点击期望的静止图像的方式而进行。
在步骤S1320中，图像合成处理部14执行属性数据读入处理。在属性数据读入处理中，读入静止图像数据的属性数据和模板图像的指定插入窗口的属性数据。若读入双方的图像数据的属性，则在步骤S1330的最佳构图决定处理中进行处理。由此，图像合成处理部14，能够基于插入窗口的属性数据，决定应该插入的静止图像的形状。
图15是表示本发明的第1实施例中的最佳构图决定处理的内容的流程图。所谓最佳构图决定处理，是指用于将静止图像数据的一部分区域(以下称为插入区域)，适当地配置在指定的插入窗口中的处理。在本实施例中，所谓适当配置，意思是如考虑静止图像数据的插入区域的移动矢量，在移动方向上扩大空间的配置。
图16是表示在本发明的第1实施例中最佳构图被决定的情况的说明图。图16(a)表示插入区域。图16(b)表示了插入区域配置在插入窗口中央的情况。图16(c)表示了通过最佳配置处理插入区域被配置在插入窗口的右侧的情况。图16(d)表示最佳配置的合成图像。另外，在图16(b)及图16(c)中，插入区域(图16(a))用虚线表示。
在步骤S1332中，图像合成处理部14，决定在静止图像数据的属性数据中是否包含表示移动矢量的移动矢量信息。在不包含移动矢量信息的情况下，处理进入步骤S1338，插入区域如在图16(b)中所示，插入区域被配置在插入窗口的中央。另一方面，在包含移动矢量信息的情况下，进入步骤S1334。
在步骤S1334中，图像合成处理部14执行纵横比比较处理。所谓纵横比比较处理，是指将插入窗口和插入区域的纵横比(aspect ratio)进行比较，决定在插入窗口内纵方向和横方向中的哪一方向上的能实现空区域的处理。例如，在图16的例子中可知在被插入的窗口内在横方向上能实现空区域。另外，在未发生空区域的方向上，通过调整插入图像的尺寸，使插入窗口W1和插入区域的尺寸一致。
在步骤S1336中，图像合成处理部14执行插入区域配置处理。所谓插入区域配置处理，是指基于移动矢量将插入图像配置在插入窗口内的最佳位置的处理。具体地说，插入图像，以在插入窗口内移动方向的前侧产生空区域的方式配置。这是因为，一般，在被摄体移动的情况下，优选在移动方向上设置空区域的构图的缘故。
在步骤S1400中，图像合成处理部14，匹配、合成插入图像和插入窗口的尺寸，生成图16(c)所示的合成图像。另外，上述的最佳配置，只在移动矢量在规定大小以上的情况下执行，在不足规定大小的情况下，可以作为配置在中央位置之用。
如此，在本实施例中，由于基于在从动态图像数据生成静止图像数据时生成的信息，可以自动地进行执行最佳配置的合成处理，所以在向由动态图像中提取的静止图像的模板图像的合成处理中能够减轻使用者的负担。
A-4.本发明的第1实施例的变形例：
在上述的第1实施例中，属性信息是模块组(动作区域)的移动矢量，但也可以是例如表示动作区域内的图像的特征的信息。这样的属性信息，例如能通过生成模块组内的象素值的色调矩形图、判断肤色区域的比例而实现。表示图像的特征的属性信息，为例如使用者基于属性信息检索(包含缩小范围)静止图像数据时，或进行静止图像数据的数据库化时的有用信息。
作为检索的例子，例如假设为插入窗口左方向移动的情况，如果使用者点击该图像插入窗口，则可以实现如下的构成：只提取静止图像数据并向使用者提示，该静止图像数据具有动作区域，该动作区域是作为属性信息具有左方向的移动矢量的动作区域。
在上述第1实施例中，虽然属性信息由包含在动态图像数据中的帧图像数据生成，但是也可以是例如根据将日期或语音、与时序有关的信息(例如顺序)这样的动态图像数据作为属性信息予以包含这样的信息，生成静态图像的属性信息。再有，也可以在属性信息中包含全景或变焦这样的推测的摄像技术。在本发明中静止图像数据的属性信息，一般的，包含在动态图像属性中的信息当中，可以是使用在所述静止图像数据所包含的信息以外的信息生成。
与时序有关的信息，例如在能够配置时序上的多个静止图像的模板图像中嵌入静止图像时，可以使用。日期，例如在模板图像中存在表示日期的窗口的情况下，能直接利用。语音，在模板图像文件具有存储语音文件的区域的情况下，在带有语音的图像文件生成时可利用。
另外，本发明中的静止图像数据的属性信息例如以以下的过程生成。
(1)从动态图像数据中提取静止图像数据的过程，
(2)从动态图像数据生成静止图像数据的过程(例如清晰化)，
或者
(3)与其他的帧图像比较的过程，
在上述第1实施例中，表示了在一个静止图像数据中检测出1个动作区域的例子，但是也可以在一个静止图像数据中包含多个动作区域。在包含多个动作区域的情况下，优选：标示各个动作区域，并按照每个动作区域附加属性信息。这是因为，这样做，例如在动态图像中包含多个被摄体的情况下，能够按照各个被摄体中的每一个管理属性信息的缘故。由此，例如使各个动作区域的每一个的最佳修整(trimming)、其他的图像处理或数据库管理成为可能。
在上述的第1实施例中，动态图像数据以非隔行扫描方式的帧图像构成，但是本发明也可以适用于隔行扫描方式的动态图像数据。在这样的情况下，在上述实施例中的各帧图像数据，成为相当于由第奇数号码的扫描线的图像数据构成奇数场(field)的静止图像数据，和第偶数号码的扫描线的图像数据构成的偶数场的静止图像数据构成的静止图像数据。
在上述第1实施例中，作为在模块的移动有无判定中所使用的帧间比较处理，使用梯度法作为模块的“动作”检测移动，但是也可以使用例如帧间差分法或背景差分法这样的其他方法检测被摄体的移动。还有，也可以不检测被摄体的移动，而检测被摄体的大小的变化或旋转这类的被摄体的变动。
在上述的第1实施例中，在提取静止图像中的动作区域并插入到插入窗口的时候，以匹配于插入窗口的方式决定空区域，但是例如也可以事先提取静止图像的动作区域，这样做，存在可以减小静止图像数据的数据大小的优点。
在这样的情况下，优选除动态区域之外，预先还提取表示在移动方向侧的规定区域的图像。规定区域，例如如图17(a)所示，配置在动态区域Pa1的移动方向侧。具有这样生成的具有图像区域Pa2的静止图像数据，插入到例如图17(b)所示的图像插入窗口W3中的时候，可以通过删除从图像插入窗口W3露出的部分，使其匹配于图像插入窗口W3。另外，规定区域的大小，可以设为预先规定的大小(例如1～2倍)，可以根据移动矢量的大小决定。
另外，在生成具有矩形的图像区域的静止图像数据的时候，优选规定的区域，相对于动态区域，配置在上下左右的4个方向中与移动方向最近的方向。规定的区域的延长方向的大小只要是例如具有动态区域的1～2倍的大小就足够了。这是由于插入窗口的纵横比，一般的在1～3倍的范围内的缘故。
在上述的第1实施例中，可以只在动态区域的移动方向上设置空区域，但是也可以例如在动态区域的相反侧也设置比移动方向侧的小的空区域。在本发明中，还可以构成为在动态区域的移动方向上，将比移动方向的相反侧大的区域附加在移动区域中而构成。
B-1.本发明的第2实施例中的图像生成、处理装置的构成：
图18是概略地表示作为本发明的第2实施例的图像生成、处理装置的构成的说明图。该图像生成、处理装置10000备有：计算机1000；作为将信息输入到计算机1000中的装置键盘3000及鼠标4000；作为将信息输出的装置的显示器2000及打印机7000；将动态图像数据输入到计算机1000中的数字视频摄像机6000及CD-R/RW驱动器5000。另外，作为输入动态图像数据的装置，可以备有可从DVD驱动器等各种信息存储介质中读取数据的驱动装置。
计算机1000，通过在规定的操作系统中，执行用于生成高清晰图像文件的应用程序，进行高清晰图像文件的生成。高清晰图像文件，包含高清晰图像数据和图像特性信息。高清晰图像数据，是比通过合成构成动态图像数据的多个帧图像数据而生成的帧图像数据所表示帧图像更高清晰的静止图像。图像特性信息包含用于限制对高清晰图像数据的画质调整的信息。该应用程序，具有图像合成部1100和图像特性信息生成部1200和图像文件生成部1300的功能。
另外，计算机1000，通过在规定的操作系统中，执行用于高清晰图像的画质调整的应用程序，进行高清晰图像的画质调整。高清晰图像的画质调整，是为了调整包含于高清晰图像文件中的高清晰图像数据所显示高清晰图像的画质，而进行高清晰图像数据的图像变换的处理。该应用程序具有图像文件取得部1400、图像特性信息分析部1500和画质调整部1600的功能。
再有，计算机1000，备有控制对图像输出装置的输出的图像输出控制部1700。
B-2.本发明的第2实施例中的处理的概要：
图19是表示图像生成、处理装置所进行的处理的概要的说明图。在图19中，显示图像生成、处理装置10000(图18)，生成高清晰图像数据，生成高清晰图像文件GF，进行高清晰图像Gp的画质调整，将高清晰画质Gp在打印机7000中印刷为止的处理流程。
在图19的上段中，表示将构成用于高清晰图像的生成的动态图像(以下成为“源动态图像”)的多个帧图像Gf，从图的左侧向右侧以时序顺序排列。另外，在本说明书中，将表示源动态图像的动态图像数据称为“源动态图像数据”。
帧图像F0，是在高清晰图像数据的生成中，作为图像合成的基准的图像(以下称为“基准帧图像数据”)。紧接其后的两个帧图像F1、F2为图像合成对象的图像(以下成为“对象帧图像”)。另外，设在以下的说明中，图像和表示该图像的图像数据使用相同符号。
图像生成、处理装置10000(图18)，使用表示基准帧图像F0的基准帧图像数据F0和表示对象帧图像F1、F2的对象帧图像数据F1、F2，进行高清晰图像数据的生成。另外，在本说明书中，将基准帧图像数据F0和对象帧图像数据F1、F2合称为“合成源帧图像数据”。
在图19中表示通过将合成源帧图像数据F0、F1、F2合成、生成的高清晰图像GP。高清晰图像Gp，作为比构成源动态图像的帧图像Gf更高清晰的图像生成。
接着，图像生成、处理装置10000生成用于限制对高清晰图像数据的特定的画质调整用的图像特征信息，生成包含高清晰图像数据和图像特性信息的高清晰图像文件GF。在图19中，表示被生成的高清晰图像文件GF。
另外，图像生成、处理装置10000，根据使用者的指示、或者自动地对包含在高清晰图像文件GF中的高清晰图像数据进行画质调整。此时，图像生成、处理装置10000，分析包含在高清晰图像文件GF中的图像特性信息，根据该分析结果，限制对于高清晰图像数据的特定的画质调整的执行。在图19中表示的是，根据图像特性信息、画质调整被限制的情况。另外，表示经画质调整后的高清晰图像Gp。
然后，图像生成、处理装置10000，由打印机7000输出经画质调整后的高清晰图像Gp。
以下，对由图像生成、处理装置10000进行高清晰图像文件的生成及高清晰图像的画质调整的内容进行详细地说明。
B-3.本发明的第2实施例中的高清晰图像文件的生成：
图20是表示由图像生成、处理装置进行高清晰图像文件的生成的流程的流程图。在步骤S10000中，图像生成、处理装置10000的图像合成部1100(图18)进行图像合成。如上所述，在图像合成部1100进行的图像合成，使用合成源帧图像数据F0、F1、F2进行。作为基准帧图像F0，例如，在播放在数字视频摄像机6000中所记录的动态图像，并在显示器2000显示中，当输入来自使用者的高清晰图像生成的指示时，选择在显示器2000中显示的帧图像。另外，作为对象帧图像F1、F2，选择紧接基准帧图像F0之后的两个帧图像。
图像合成部1100，从存储在数字视频摄像机6000中的源动态图像数据中参照绝对帧号码取得合成源帧图像数据F0、F1、F2，将合成源帧图像数据F0、F1、F2合成，生成高清晰图像数据。另外，在本说明书中，所谓“绝对帧号码”意思是在动态图像数据中的、从最初的帧图像数据连续计数出的号码。对于由图像合成部1100所进行的图像合成的详细说明在后述进行。
在步骤S20000中，图像特性信息生成部1200(图18)生成图像特征信息。图像特征信息，如上所述，包含用于限制对高清晰图像数据的特定的画质调整的信息。在这里，限制特定的信息画质调整的目的，不仅仅在于为了防止由于对高清晰图像数据已进行的图像调整再度进行而引起画质降低或处理时间的增加，还为了限制由于高清晰图像数据的特性、如对高清晰图像数据实施则可能会导致画质降低的画质调制的执行。
在本实施例中，特定的画质调整是锐度的调整，图像特性信息，作为禁止锐度的调整的信息生成。这是因为由于后述的高清晰图像数据的特性，如对高清晰图像数据进行锐度调整的话，画质降低的可能性特别大的缘故。具体地说，图像特性信息生成部1200，生成意味着对高清晰图像数据的锐度调整禁止的标志。
在步骤S30000中，图像文件生成部1300(图18)生成高清晰图像文件。高清晰图像文件GF，如上所述，是包含高清晰图像数据和图像特性信息的图像文件。
图21是概略性表示高清晰图像文件的内部构成的一个例子的说明图。高清晰图像文件GF备有：存储高清晰图像数据的图像数据存储区域9000；存储图像数据信息的图像数据信息存储区域8000。这里，图像数据信息意味着与高清晰图像数据有关的各种信息，其中，包含图像特性信息。高清晰图像数据，例如以JPEG形式存储，图像数据信息，例如以TIFF形式存储。另外，在本实施例中文件的结构，数据的结构这些用语意思是指文件或数据在存储装置中存储的状态下文件或数据的结构。
高清晰图像文件GF，基本上备有上述的图像数据存储区域9000和图像数据信息存储区域8000就可以，也可以采取遵照已经标准化的文件形式的文件结构。以下，对使有关本实施例的高清晰图像文件GF适用于标准化的文件形式的情况进行具体的说明。
高清晰图像文件GF，例如，可以有遵照数字视频摄像机用图像文件格式标准(Exif)的文件结构。Exif文件标准，由电子信息技术产业协会(JEITA)制定。另外，Exif文件形式，同图21中所示示意图一样，备有存储JPEG形式的图像数据的JPEG图像数据存储区域和存储与被存储JPEG图像数据相关的各种信息的附属信息存储区域。JPEG图像数据存储区域相当于图21中的图像数据存贮区域9000，附属信息存储区域相当于图像数据信息存储区域8000。另外，正如本领域技术人员周知的那样，在Exif文件形式的文件中，有时为了特定各个数据而使用标签，各个数据根据标签名而称呼。
在附属信息存储区域中，图21所示的图像特性信息，根据规定的地址或者偏移值存储。图像特性信息，例如，是附属信息存储区域内的未定义区域，可以存储向使用者开放的使用者定义区域内。
如上说明，本实施例的图像生成、处理装置10000，能够生成包含高清晰图像数据和图像特性信息的高清晰图像文件GF。
B-4.本发明的第2实施例中的高清晰图像的画质调整：
图22是表示图像生成、处理装置所进行的高清晰图像的画质调整度的流程的流程图。另外，图23是表示进行高清晰图像的画质调整时的图像生成、处理装置的用户接口的一个例子的说明图。在步骤S50000(图22)中，使用者进行作为画质调整的对象的高清晰图像文件GF的选择。
在图23中表示在显示器2000(图18)中所显示的用户接口画面20000。而且，图23(a)表示用户接口画面20000的初始画面。在用户接口画面20000中显示了：目录指定按钮21000、微缩图像显示画面22000、图像信息画面23000、画质调整按钮23200、印刷按钮24000。
使用者，能够操作目录指定按钮21000，指定存储有欲在微缩图像显示画面22000中显示的微缩图像的图像文件的目录。在微缩图像显示画面22000中显示存储在指定的目录下的所有图像文件的微缩图像。
使用者，参照在微缩图像显示画面22000中所显示的微缩图像，选择成为画质调整对象的图像文件。在图23(a)中，将被选择的图像文件的微缩图像用粗框包围显示。在图23的例子中，设被选择的图像文件，为高清晰图像文件GF。
另外，如果使用者选择图像文件，在图像信息画面23000中，表示被选择的图像文件的图像信息。另外，使用者能操作图像信息画面23000、指定印刷页数，还能操作印刷按钮24000、执行在被选择的图像文件中所包含的图像印刷指示。
在步骤S60000(图22)中，图像文件取得部1400(图18)，取得由步骤S50000所选择的高清晰图像文件。在步骤S70000中，图像特性信息分析部1500(图18)分析已取得的高清晰图像文件中所包含的图像特性信息。
在步骤S80000中，使用者进行画质调整的设定。使用者，通过操作画质调整按钮23200(图23)，可以进行对已选择的高清晰图像文件GF中所包含的高清晰图像数据进行的画质调整的设定。如果使用者操作画质调整按钮23200，则在用户接口画面20000中，显示图23(b)中所示的画质调整的执行画面。此时，在用户接口画面20000中显示图像显示画面25000、画质调整画面26000、用于退回图23(a)所示的初始画面的“退回”按钮27000。
在图像显示画面25000中，显示在被选择的高清晰图像文件GF中所包含的高清晰图像数据所表示的高清晰图像。在画质调整画面26000中，显示能够进行画质调整的项目，并且显示用于使用者指定关于各个项目的画质调整量的滑杆26200、26400。使用者或指定在画质调整画面26000中表示的画质调整项目，或移动滑杆26200、26400，进行画质调整。
此时，画质调整部1600(图18)，根据步骤S70000中的图像特征信息的分析结果，限制对于高清晰图像数据的画质调整的执行。在本实施例中，在高清晰图像文件GF中所包含的图像特性信息，作为禁止锐度的调整的信息生成。因此，画质调整部1600，根据图像特性信息的分析结果，限制对高清晰图像数据的锐度调整的执行。
即，如图23所示，在画质调整画面26000所显示的各画质调整项目内，用于锐度调整的锐度调整用滑杆26400例如为虚线表示，不能为使用者所操作。因此，使用者，不能进行锐度调整的指示。这样，对于高清晰图像数据的锐度调整被禁止。
在步骤S90000(图22)中，画质调整部1600(图18)根据使用者的设定，进行对于高清晰图像文件GF中所包含的高清晰图像数据的画质调整。
这样，本实施例的图像生成、处理装置10000，在执行对于高清晰图像文件GF中所包含的高清晰图像数据的画质调整的时候，通过分析图像特性信息，能够禁止画质降低的可能性特别大的锐度调整。因此在进行对于高清晰图像数据的画质调整时，能够抑制画质的降低，该高清晰图像数据表示合成多个帧图像数据而生成的高清晰图像。
B-5.本发明的第2实施例中的图像合成：
以下，对于上述高清晰图像文件的生成中的图像合成(图20的步骤S10000)进行详细地说明。图24是表示由图像合成部进行的图像合成的流程的流程图。在步骤S11000中，图像合成部1100(图18)，取得合成源动态帧图像数据。如上所述，所谓合成源动态帧图像数据，是指在源动态图像数据中的帧图像数据内，用于图像合成的帧图像数据，在本实施例中，是表示基准帧图像F0、对象帧图像F1及F2共计3帧图像Gf的帧图像数据。由图像合成部1100所取得的合成源帧图像数据，暂时存储在存储器或硬盘等的存储装置(图中未示出)中。
在步骤S12000中，图像合成部1100，执行用于补正已取得的合成源帧图像数据的各个帧图像互相的偏差(位置偏差)的补正量的推测。在该补正量的推测中，分别推测用于对对象帧图像F1及F2相相对于基准帧图像F0的位置偏差的补正用的补正量。
图25是表示对于基准帧图像和对象帧图像之间的位置偏差的说明图，图26是表示对于基准帧图形和对象帧图像之间的位置偏差的补正的说明图。
在以下的说明中，对于已取得3帧图像数据所表示的帧图像付与连续的号码n(n＝0，1，2)，将帧图像使用其连续的号码n来称呼。即、连续号码n的帧图像称为帧图像Fn。例如，将连续号码n的值为0的帧图像称为帧图像F0。这里，F0表示基准帧图像F0，F1及F2表示对象帧图像F1及F2。
图像偏差用并进(横方向或纵方向)的偏差和旋转偏差的组合表示。在图25中，表示了基准帧图像F0的边缘和对象帧图像F2的边缘重合的状态。另外，在基准帧图像F0上的中心位置追记假想的十字图像X0，该十字图像X0，与对象帧图像F2同样存在偏差，在对象帧图像F2上，表示作为偏差的结果图像的十字图像X2。另外，用粗实线表示基准帧图像F0和十字图像X0，同时用细虚线表示对象帧图像F2和十字图像X2。
在本实施例中，将横方向的并进偏差量表示为“um”，纵方向的并进偏差量表示为“vm”，旋转偏差量表示为“δm”。另外，关于对象帧图像Fn(n＝1，2)的偏差量分别表示为“umn”、“vmn”、“δmn”。例如，如图25所示，对象帧图像F2，相对于基准帧图像F0产生并进偏差、及旋转偏差，该偏差量表示为um2、vm2、δm2。
这里，由于将对象帧图形F1、F2与基准帧图像F0合成，补正对象帧图像F1、F2与基准帧图像F0之间的偏差，以消除对象帧图像F1、F2与基准帧图像F0之间的偏差的方式。将用于该补正的横方向的并进补正量表示为“u”，纵方向的并进补正量表示为“v”，旋转补正量表示为“δ”。另外，关于帧图像Fn(n＝1、2)的这些补正量表示为“un”、“vn”、“δn”。例如，对于对象帧图像F2的补正量表示为u2、v2、δ2。
这里，所谓的补正，意思是将对象帧图像Fn(n＝1、2)的各个象素的位置移动到在横方向施加un移动、在纵方向施加vn移动及施加δn旋转后的位置。因此，对象帧图像Fn(n＝1、2)的补正量un、vn、δn，用un＝-umn、vn＝-vmn、δn＝-δmn的关系表示。例如，对于对象帧图像F2的补正量u2、v2、δ2，用u2＝-um2、v2＝-vm2、δ2＝-δm2表示。
根据以上，例如，如图26所示，通过使用补正量u2、v2、δ2，补正对象帧图像F2的各个象素的位置，可以消除对象帧图像F2和基准帧图像F0之间的偏差。此时，将补正后的对象帧图像F2和基准帧图像F0用显示器2000(图18)显示，如图26所示，对象帧图像F2，以相对于基准帧图像F0部分一致的状态显示。另外，为了清楚易懂地显示该补正结果，在图26中，标记了和图25同样的假想的十字图像X0及十字图像X2，如图26所示，作为补正结果，消除了十字图像X2和十字图像X0之间地偏差而达到一致。
同样，对于对象帧图像F1，使用补正量u1、v1、δ1各值施以补正，可以置换对象帧图像F1的各象素的位置。
但是，对于各对象帧图像Fn(n＝1、2)的补正量un、vn、δn，在图像合成部1100(图18)中，基于基准帧图像F0的图像数据和对象帧图像F1～F2的图像数据，使用例如由图形匹配法或梯度法及最小二乘法的规定的公式计算。而且，计算出的补正量un、vn、δn，作为并进补正量数据un、vn及旋转补正量数据δn，存储在存储器内(图中未示出)的规定区域中。
在本实施例中，图像合成部1100，使用推测出的补正量un、vn、δn，补正基准帧图像F0和对象帧图像F1～F2之间的位置偏差。
在步骤S13000(图7)中，图像合成部1100(图18)，合成基准帧图像数据和补正后的对象帧图像数据，生成表示高清晰图像Gp的高清晰图像数据。此时，图像合成部1100，在构成生成的高清晰图像GP的各个象素(以下称为“生成图像”)中，对于不存在于基准帧图像F0及对象帧图像F1、F2中的任一个的的象素，使用表示存在于该生成象素的周边的象素的象素值的象素数据(表示灰度值的灰度数据)，通过进行预定的补正处理，边进行合成边进行高清晰化。
图27是放大表示对基准帧图像和对象帧图像进行了补正偏差配置情况的说明图。在图27中，高清晰图像Gp的各个象素的中心位置用黑点表示，同时基准帧图像F0的各象素的中心用空白的四边形表示，补正后的对象帧图像F1～F2的各象素的中心位置，用施以阴影线的四边形表示。另外，在以下，设高清晰图像Gp的象素的数目，相对基准帧图像F0的象素的数目，纵横分别为1.5倍。另外，高清晰图像Gp的各象素的中心，位于每隔两个象素与基准帧图像F0的各象素的中心重合的位置。但是，高清晰图像Gp的象素的中心，不必一定要位于与基准帧图像F0的各象素的中心重合的位置。例如，所有高清晰图像Gp的各象素的中心，也可以位于基准帧图像F0的各象素的中心的中间，还可以设为各种位置。另外，高清晰图像Gp和基准帧图像F0之间的图像大小的比，也不限定于纵横分别为1.5倍，还可以设为各种值。
以下，关注高清晰图像GP内的某象素G(j)(以下称为“关注象素G(j)”)进行说明。这里，变量j是付与构成高清晰图像Gp的所有象素的识别号码。对高清晰图像Gp的象素的识别号码的付与方法，例如将图像的左上端的象素作为j＝1，将其右邻的象素作为j＝2，如此向右横方向顺序付与号码，如果到图像的右端象素为止付与了号码，转移到下1段的左端，同样在向右横方向付与号码，最后，对右下端的象素付与号码。
图像合成部1100(图18)，在基准帧图像F0及对象帧图像F1、F2的象素内，探索该象素的中心和关注象素的G(j)的中心之间的距离比规定的阈值R小的象素，将检测到象素设定为“近旁象素”。
在图27所示的例子中，阈值R的值为R1时，由于对象帧图像F2的象素F(2，p)的中心和关注象素G(j)的中心之间的距离L2比R1小，因此将象素F(2，p)设定为近旁象素。另一方面，基准帧图像F0的象素F(0，z)和对象帧图像F1的象素F(1，c)，由于各个象素中心和关注象素G(j)中心间的距离(L0，L1)比R1大，因此不设定为近旁象素。另外，在本说明书中，将帧图像Fn的第i号的象素表记为F(n，i)，变量i是付与构成帧图像Fn的所有象素的识别号码。对于帧图像Fn的象素的识别号码的付与方法，和对于上述的高清晰图像Gp的象素的识别号码的付与方法相同。另外，c、p、z分别表示常数。
另外，在阈值R的值为R2时，将所有基准帧图像F0的象素F(0，z)、对象帧图像F1的象素F(1，c)、对象帧图像F2的象素F(2，p)，设定为近旁象素。
接着，图像合成部1100，使用设定的近旁象素和在包含该近旁象素的帧图像中包围关注象素G(j)的其他象素的象素数据，通过双线性法、双立方法、最近象素法等各种插值处理生成关注象素G(j)的图像数据。在图27的例子中，由于阈值R的值为R1的时候，将对象帧图像F2的象素F(2，p)设定为近旁象素，因此，关注象素G(j)的象素数据的生成，使用在对象帧图像F2中包围关注象素G(j)的4个象素的象素数据进行。另外，由于，阈值R的值为R2时，还将基准帧图像F0的象素F(0，z)和对象帧图像F1的象素F(1，c)设定为近旁象素，因此关注象素G(j)的象素数据的生成，使用在基准帧图像F0和对象帧图像F1及F2中，包围关注象素G(j)的合计12个象素的象素数据进行。以下，对于在阈值R的值为R1时的由双线性法进行的插值处理的一个例子进行说明。
图28是表示对由双线性法进行插值处理的说明图。图28表示阈值R为R1时的例子。关注象素G(j)，因为是不存在于基准帧图像F0及位置偏差补正后的对象帧图像F1～F2中的任一个中的象素，所以不存在象素数据。另外，按照以上所述，对象帧图像F2的象素F(2，p)设定为近旁象素。此时，图像合成部1100(图18)，使用在对象帧图像F2中，包围关注象素G(j)的4个象素(F(2，p)、F(2，p+1)、F(2、q)、F(2、q+1))进行插值处理。另外，在本说明书中，用于关注象素G(j)的插值处理的帧图像的、包围关注象素G(j)的象素称为周围象素，将周围象素的中心称为周围象素中心。
图像合成部1100，首先，将被包围在4个周围象素中心的四边形，通过连接各周围象素中心和关注象素G(j)的中心连接的4个线段分割为4个三角形。而且，使用被包围在4个周围象素中心的四边形的面积和该四边形内的4个三角形的面积，计算出各周围象素的权重系数。即对于各周围象素，计算出4个三角形内与其周围象素中心不接触的两个三角形的面积的总和、相对于被包围在4个周围象素中心的四边形的面积的比，并将计算出的值，作为该周围象素的权重系数。由此，如果计算出权重系数，距关注象素G(j)的距离越近的周围象素，则其权重系数越大。
关注象素G(j)的象素数据，通过对各周围象素，合计其周围象素的象素数据和其周围象素的权重系数之积的方式而计算出。
另外，如在图27中阈值R的值为R2时那样，关注象素G(j)的象素数据的生成中使用多个帧图像时，也和上述的一样计算出权重，通过合计周围象素的象素数据和该周围象素的权重系数之积，进行图像数据的生成。
如以上说明过的那样，由图像合成部1100进行的图像合成，根据阈值R的值，处理的内容产生变化。即阈值R的值越小，用于高清晰图像Gp的各象素的象素数据的生成的帧图像的数目越少。另外，阈值R的值越大，用于高清晰图像Gp的各象素的象素数据的生成的帧图像的数目越多。而且，在高清晰图像Gp的生成中，根据用于高清晰图像Gp的各象素的象素数据的生成的帧图像数目的多少，改变生成的高清晰图像Gp的画质。
图29是示意地表示阈值R的大小和高清晰图像Gp的画质之间的关系的说明图。在图像合成部1100进行的补正量的推测(图7的步骤S12000)中，由于动态图像生成时的透镜的畸变或噪声、局部的动作等的影响，有时会对于推测的补正量产生误差。图29显示的是在补正量的推测中产生误差时的例子。在图29(a)中，放大表示用于图像合成的偏差补正后的两个帧图像中的、表示对应的图像的一部分。如图29(a)所示，由于补正量的推测中的误差影响，在两图像边界部分产生偏差。
在图29(b)～(d)中表示，图像合成部1100使用图29(a)所示的两个图像，进行图像合成的结果。图29(b)是表示在阈值R的值小的时候的图像合成结果，图29(c)、图29(d)分别是表示在阈值R的值适当的时候和阈值R的值大的时候的图像合成结果。
另一方面，如图29(d)中所示，由于如果阈值R的值大，则用于高清晰图像Gp的各象素的象素数据的生成的帧图像数目多，因此平均化了在补正量推测中的误差的影响，图像的边界部分的偏差变得不引人注目。另外，噪声也通过平均化、容易降低。但是导致图像数据也被平均化，容易成为锐度低的图像。
如此，在高清晰图像Gp的生成中，锐度的提高与抑制补正量的推测误差的影响及降低噪声是相反的。在此，如果设定阈值R的值为适当的值，则如图29(c)所示，能够将高清晰图像Gp做成取得了两者的平衡的图像。如此，由图像合成部1100进行的图像合成中的阈值R，事先被实验性地进行调整，以取得生成的高清晰图像Gp的、锐度的提高与抑制补正量的推测误差的影像及降低噪声之间的平衡。。
为此，如果对表示生成的高清晰图像Gp的高清晰图像数据进行锐度调整，则有可能变为图29(b)或图29(d)所示的图像。因此，如果对于高清晰图像数据进行锐度调整，则画质降低的可能性特别大。
B-6.第2实施例的变形例：
在上述第2实施例的变形例中，图像特征信息，作为禁止锐度调整的信息生成，但是图像特征信息，也可能作为限制锐度的调整范围的信息生成。即，所谓的锐度调整的限制，包含锐度调整的禁止和锐度调整的范围的限制。
如果对高清晰图像数据限制锐度调整的调整范围，则例如，图6(b)所示的用户接口画面20000的画质调整画面26000中的锐度调整用滑杆26400的滑动范围显示得狭，使用者能够指定的锐度调整范围被限制。即使这样，在对于高清晰图像数据进行画质调整的时候，能够抑制画质的降低。
在上述第2实施例中，作为图像特征信息，可以生成表示对高清晰图像的锐度调整的禁止的标志，但作为图像特性信息，也可以生成表示包含在图像文件中的图像数据为高清晰图像数据的标志。对包含这样的图像特征信息的图像文件进行图像调整时，画质调整部1600(图18)，识别包含在图像文件中的图像数据为高清晰图像数据，限制对图像数据的锐度调整。这样，对高清晰图像数据进行画质调整的时候，也能够抑制画质降低。
在上述第2实施例中，特定的画质调整是作为锐度的调整，但是，特定的画质调整也可以是在图像生成部1100(图18)中对高清晰图像数据未执行的其他的画质调整。这样，由高清晰图像数据的特性，限制如对高清晰图像数据进行则可能会导致画质降低的画质调整的执行，能够抑制伴随画质调整的画质降低。另外，特定的画质调整，还可以是对高清晰图像数据已经进行的画质调整。这样可以防止由于再次执行对高清晰图像数据已经进行的画质调整造成的画质降低或处理时间的增加。
在上述的第2实施例中，在根据使用者的指示对高清晰图像数据进行的画质调整中，使用限制特定的画质调整的例子进行说明的，但是在自动地对高清晰图像数据进行的画质调整中，也当然可以限制特定的画质调整。
在上述第2实施例中，对象帧图像为紧接基准帧图像之后的两个帧图像，但是对象帧图像的选定方法或选定数目可以任意设定。例如，可以把紧靠基准帧图像的之前的两个帧图像作为对象帧图像进行设定。另外，可以将从基准帧图像相距规定的帧数目的帧图像作为对象帧图像进行设定。还有，可以将对象帧图像设定为3个。另外，对象帧图像的选定方法或选定数目可以是使用者来设定。
在上述第2实施例中，在微缩图像显示画面22000中，显示的是微缩图像，但是在微缩图像显示画面22000中也可以显示包含在图像文件中的图像数据所表示的图像本身。
在上述第2实施例中，使用用构成动态图像的多个帧图像数据生成高清晰图像数据的例子进行说明，但也可以是用帧图像数据以外的其他的图像数据生成高清晰图像数据。例如，能用多个静止图像数据生成高清晰图像数据。
在上述第2实施例中，在推测图像整体的偏差补正量的时候，使用并进偏差(横方向u、纵方向v)及旋转偏差(δ)这3个参数推测偏差补正量，但是本发明并不局限于此。例如，可以改变参数数目推测补正量，也可以使用其他种类的参数推测偏差补正量。
C.其他变形例：
另外，本发明并不局限于上述实施例或实施方式，在不脱离其主旨的范围内可以以各种方式实施，例如可以有如下的变形。
在上述实施例中，生成的是包含生成的静止图像数据和属性信息的图像文件，但是不一定需要将静止图像数据和属性信息存放在同一文件中，可以为相关联的各自的文件。
在所述各实施例中，也可以将由硬件实现的构成的一部分置换为软件，相反，也可以将由软件实现的构成的一部分置换为硬件。
在用软件实现本发明的功能的一部分或全部的情况下，该软件(计算机程序)，可以以存储在计算机可读取的记录介质中的形式提供。在本发明中，所谓“计算机可读取的记录介质”，并不局限于如软盘或CC-ROM这样的便携型的记录介质，也包含各种的RAM或ROM等的计算机内的内部存储装置或硬盘等的固定在计算机中的外部存储装置。
最后，通过参照，作为本申请的主张优先权的基础的以下的日本的专利，也包含在本申请的公开中。
(1)特愿2004-57158(申请日：平成16年3月2日)
(2)特愿2004-57163(申请日：平成16年3月2日)

Claims (19)

1、一种静止图像数据文件生成方法，是生成静止图像数据文件的静止图像数据文件生成方法，其特征在于，备有：
由动态图像数据生成至少1个静止图像数据的静止图像数据生成步骤；
生成所述静止图像数据的属性信息的属性信息生成步骤；以及，
生成包含所述生成的静止图像数据和所述属性信息的所述静止图像数据文件的数据文件生成步骤，或者，
具有生成包含所述生成的静止图像数据的所述静止图像数据文件的步骤、和生成包含所述属性信息的其他文件的步骤，并且所述静止图像数据文件和所述其他文件彼此关联的数据文件生成步骤，
其中，所述属性信息生成步骤包括：根据所述静止图像数据的生成，将在对所述静止图像数据实施的图像处理中可利用、且将对动作区域进行指定的信息予以包含的信息，作为所述属性信息生成的步骤，所述动作区域是由所述静止图像数据表示的图像区域中被检测出动作的区域。
2、根据权利要求1所述的静止图像数据文件生成方法，其特征在于，
所述属性信息生成步骤包括：使用所述动态图像数据所包含的信息中除所述静止图像数据所包含的信息以外的信息，生成所述属性信息的步骤。
3、根据权利要求1所述的静止图像数据文件生成方法，其特征在于，还包括：
根据所述动态图像数据，生成时序上连续的多个源静止图像数据的步骤；以及，根据所述多个源静止图像数据，生成对所述动作区域进行指定的信息的步骤。
4、根据权利要求1所述的静止图像数据文件生成方法，其特征在于，
所述静止图像数据生成步骤包括：从所述静止图像数据中提取所述动作区域的步骤。
5、根据权利要求1～4的任一项所述的静止图像数据文件生成方法，其特征在于，
所述属性信息包含：表示所述动作区域的所述图像区域中的并进移动状态的移动信息。
6、根据权利要求1～4的任一项所述的静止图像数据文件生成方法，其特征在于，
所述属性信息包含：表示所述动作区域内的图像性质的被摄体信息。
7、根据权利要求3所述的静止图像数据文件生成方法，其特征在于，
所述静止图像数据生成步骤，包含由所述多个源静止图像数据，生成比所述多个源静止图像数据的最低分辨率更高的分辨率的高分辨率静止图像数据的图像合成步骤，
所述属性信息包含：用于限制对所述生成的高分辨率静止图像数据的特定的画质调整的图像特性信息。
8、根据权利要求7所述的静止图像数据文件生成方法，其特征在于，
所述特定的画质调整包括：在所述图像合成步骤中对所述高分辨率静止图像数据未实行的画质调整。
9、根据权利要求7或8所述的静止图像数据文件生成方法，其特征在于，
所述特定的画质调整是锐度的调整。
10、一种图像处理方法，是根据包含静止图像数据和所述静止图像数据的属性信息的静止图像数据文件，对所述静止图像数据进行图像处理的图像处理方法，其特征在于，
所述静止图像数据文件，由权利要求1～4或7、8的任一项所述的静止图像数据文件生成方法生成，
所述图像处理方法，包括：根据所述属性信息，从由所述静止图像数据所表示的图像区域中提取所述动作区域的步骤。
11、根据权利要求10所述的图像处理方法，其特征在于，
所述属性信息包含移动信息，该移动信息表示在所述动作区域的所述图像区域中包含移动方向的并进移动状态，所述图像处理方法包括：根据所述移动信息，提取在所述动作区域的所述移动方向侧附加了规定区域的区域的图像的步骤。
12、根据权利要求11所述的图像处理方法，其特征在于，
所述图像处理方法包括：根据所述移动信息，提取在所述动作区域的所述移动方向侧上将比所述移动方向的相反侧更大的区域附加在所述动作区域上的区域的图像的步骤。
13、根据权利要求11所述的图像处理方法，其特征在于，
所述图像处理方法具备：决定由所述图像处理应生成的静止图像数据所表示的图像的形状，并且以具有所述被决定了的形状的图像区域内产生的剩余区域被在所述移动方向上多分配的方式，配置所述动作区域的步骤。
14、根据权利要求13所述的图像处理方法，其特征在于，
所述形状是具有规定的纵横比的矩形，
所述图像处理方法具备：以在具有所述规定的纵横比的图像区域内配置所述动作区域时所产生的剩余区域，被在所述移动方向上最近的上下左右中的任一侧多分配的方式，来配置所述动作区域的步骤。
15、一种图像文件处理方法，是对包含由时序上连续的多个源静止图像数据生成的静止图像数据和属性信息的静止图像数据文件进行图像处理的图像文件处理方法，其特征在于，
所述静止图像数据文件，由权利要求7所述的静止图像数据文件生成方法生成，
所述图像文件处理方法具备：对所述静止图像数据进行图像处理的图像处理步骤，
所述图像处理步骤包括：根据所述属性信息，限制对所述高分辨率静止图像数据的特定的画质调整的实行的步骤。
16、一种静止图像数据文件生成装置，是生成静止图像数据文件的静止图像数据文件生成装置，其特征在于，
备有：
静态图像数据生成部，其由动态图像数据生成至少1个的静止图像数据；
属性信息生成部，其生成所述静止图像数据的属性信息；
数据文件生成部，其实施：生成包含所述生成的静止图像数据和所述属性信息的所述静止图像数据文件的动作，或者生成包含所述生成的静止图像数据的所述静止图像数据文件以及包含所述属性信息的其他文件、且所述静止图像数据文件和所述其他文件彼此关联的数据文件的动作的其中之一，
其中，所述属性信息生成部，根据所述静止图像数据的生成，生成在对所述静止图像数据实施的图像处理中可利用、且将对动作区域进行指定的信息予以包含的信息，作为所述属性信息，所述动作区域是由所述静止图像数据表示的图像区域中被检测出动作的区域。
17、一种图像处理装置，是根据包含静止图像数据和所述静止图像数据的属性信息的静止图像数据文件，对所述静止图像数据进行图像处理的图像处理装置，其特征在于，
所述静止图像数据文件，由权利要求16所述的静止图像数据文件生成装置生成，
所述图像处理装置，根据所述属性信息，从由所述静止图像数据所表示的图像区域中提取所述动作区域。
18.一种图像处理方法，是根据包含静止图像数据和所述静止图像数据的属性信息的静止图像数据文件，对所述静止图像数据进行图像处理的图像处理方法，其特征在于，
所述静止图像数据文件，由权利要求5所述的静止图像数据文件生成方法生成，
所述图像处理方法，包括：根据所述属性信息，从由所述静止图像数据所表示的图像区域中提取所述动作区域的步骤。
19.一种图像处理方法，是根据包含静止图像数据和所述静止图像数据的属性信息的静止图像数据文件，对所述静止图像数据进行图像处理的图像处理方法，其特征在于，
所述静止图像数据文件，由权利要求6所述的静止图像数据文件生成方法生成，
所述图像处理方法，包括：根据所述属性信息，从由所述静止图像数据所表示的图像区域中提取所述动作区域的步骤。
CNB2005100529266A 2004-03-02 2005-03-02 静止图像数据文件的生成方法及装置 Expired - Fee Related CN100358368C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2004057163 2004-03-02
JP2004057163A JP2005252426A (ja) 2004-03-02 2004-03-02 画像データに対する画質調整制限情報を含む画像ファイルの生成
JP2004057158A JP4239855B2 (ja) 2004-03-02 2004-03-02 動画像データからの静止画像データの生成
JP2004057158 2004-03-02

Publications (2)

Publication Number Publication Date
CN1664859A CN1664859A (zh) 2005-09-07
CN100358368C true CN100358368C (zh) 2007-12-26

Family

ID=34752191

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2005100529266A Expired - Fee Related CN100358368C (zh) 2004-03-02 2005-03-02 静止图像数据文件的生成方法及装置

Country Status (5)

Country Link
US (1) US20050281536A1 (zh)
EP (1) EP1571825B8 (zh)
CN (1) CN100358368C (zh)
AT (1) ATE374501T1 (zh)
DE (1) DE602005002576T2 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4454559B2 (ja) 2005-09-30 2010-04-21 ヤマハ株式会社 光ディスク画像形成装置
KR100724426B1 (ko) 2005-10-11 2007-06-04 엘지전자 주식회사 영상촬영 장치 및 방법
US8326087B2 (en) * 2008-11-25 2012-12-04 Xerox Corporation Synchronizing image sequences
EP2400461A4 (en) * 2009-02-19 2017-08-02 Nec Corporation Image processing system, image processing method, and image processing program
JP4983961B2 (ja) 2010-05-25 2012-07-25 株式会社ニコン 撮像装置
JP2012065282A (ja) * 2010-09-17 2012-03-29 Panasonic Corp 画像表示装置、画像編集装置、画像表示プログラムおよび画像編集プログラム
CN102456216A (zh) * 2010-11-03 2012-05-16 北京普源精电科技有限公司 频谱分析仪的图像数据构造方法及装置
CN102609932A (zh) * 2011-01-21 2012-07-25 鸿富锦精密工业（深圳）有限公司 专利首页摘要附图切割方法及系统
KR101817657B1 (ko) * 2011-12-21 2018-01-11 삼성전자주식회사 디지털 촬영 장치 및 이의 제어 방법
CN106681735A (zh) * 2016-12-30 2017-05-17 迈普通信技术股份有限公司 基于字体生成动态图标的方法、装置及设备
US11601626B2 (en) * 2017-03-09 2023-03-07 Sony Corporation Image processing apparatus and method
CN108765522B (zh) * 2018-05-15 2022-08-02 维沃移动通信有限公司 一种动态图像生成方法及移动终端
JP6954229B2 (ja) * 2018-05-25 2021-10-27 京セラドキュメントソリューションズ株式会社 画像処理装置及び画像形成装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0804040A2 (en) * 1996-04-24 1997-10-29 Sony Corporation Apparatus and method for generating digital still image files from digital moving images
CN1170312A (zh) * 1996-05-17 1998-01-14 索尼公司 取自运动图像的静止图像文件的图像处理和显示方法及装置
CN1339913A (zh) * 2000-09-01 2002-03-13 精工爱普生株式会社 图像文件的输出图像调整
US20020061142A1 (en) * 2000-11-22 2002-05-23 Naoko Hiramatsu Image correction apparatus
WO2003001788A2 (en) * 2001-06-25 2003-01-03 Redhawk Vision Inc. Video event capture, storage and processing method and apparatus
US6650704B1 (en) * 1999-10-25 2003-11-18 Irvine Sensors Corporation Method of producing a high quality, high resolution image from a sequence of low quality, low resolution images that are undersampled and subject to jitter

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0780003B1 (en) * 1994-09-08 2003-07-30 Andrew Welch Method and apparatus for determining the location of a reflective object within a video field
JP3258840B2 (ja) * 1994-12-27 2002-02-18 シャープ株式会社 動画像符号化装置および領域抽出装置
DE69814212T2 (de) * 1997-02-28 2004-04-01 Matsushita Electric Industrial Co., Ltd., Kadoma Gerät zur Bildsignalumwandlung
US6674485B2 (en) * 1998-08-31 2004-01-06 Hitachi Software Engineering Co., Ltd. Apparatus and method for image compositing
WO2002075518A1 (fr) * 2001-03-15 2002-09-26 Seiko Epson Corporation Commande d'impression et commande de traitement d'image
JP3781370B2 (ja) * 2002-11-19 2006-05-31 本田技研工業株式会社 移動装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0804040A2 (en) * 1996-04-24 1997-10-29 Sony Corporation Apparatus and method for generating digital still image files from digital moving images
CN1170312A (zh) * 1996-05-17 1998-01-14 索尼公司 取自运动图像的静止图像文件的图像处理和显示方法及装置
US6650704B1 (en) * 1999-10-25 2003-11-18 Irvine Sensors Corporation Method of producing a high quality, high resolution image from a sequence of low quality, low resolution images that are undersampled and subject to jitter
CN1339913A (zh) * 2000-09-01 2002-03-13 精工爱普生株式会社 图像文件的输出图像调整
US20020061142A1 (en) * 2000-11-22 2002-05-23 Naoko Hiramatsu Image correction apparatus
WO2003001788A2 (en) * 2001-06-25 2003-01-03 Redhawk Vision Inc. Video event capture, storage and processing method and apparatus

Also Published As

Publication number Publication date
CN1664859A (zh) 2005-09-07
EP1571825B8 (en) 2008-07-02
EP1571825A1 (en) 2005-09-07
DE602005002576T2 (de) 2008-06-19
DE602005002576D1 (de) 2007-11-08
US20050281536A1 (en) 2005-12-22
EP1571825B1 (en) 2007-09-26
ATE374501T1 (de) 2007-10-15

Similar Documents

Publication Publication Date Title
CN100358368C (zh) 静止图像数据文件的生成方法及装置
US7120461B2 (en) Camera phone and photographing method for a camera phone
US7515294B2 (en) Image extracting method, image extracting apparatus, and program for implementing the method
JP5761322B2 (ja) 端末、画像処理方法、プログラム
US8134578B2 (en) Hybrid importance maps for content aware digital image resizing
US8588532B2 (en) Image processor
EP1130898A2 (en) Method, apparatus and recording medium for image processing
EP1130899B1 (en) Method, apparatus and recording medium for image processing
JP2009237702A (ja) アルバム作成方法、プログラムおよび装置
JP3731718B2 (ja) デジタル写真処理装置
US8169652B2 (en) Album creating system, album creating method and creating program with image layout characteristics
US8031226B2 (en) Image output apparatus, image output method, image output program, image trimming apparatus, image trimming method, and image trimming program
US9001376B2 (en) Image processing apparatus, image processing method, print order receiving apparatus, and print order receiving method
US20080143742A1 (en) Method and apparatus for editing image, generating editing image, and storing edited image in portable display device
JP4781844B2 (ja) 画像出力装置、画像出力方法、および画像出力プログラム
US8213044B2 (en) Printing device for printing image data as displayed, printing method for printing image data as displayed, and computer program product for printing image data as displayed
JP4926589B2 (ja) 画像合成装置、画像合成方法、およびプログラム
US6784887B1 (en) Image processing device
KR20070092369A (ko) 영상 편집 장치와 그 기록매체, 및 영상 편집 방법
US11301188B2 (en) Information processing apparatus, information processing method, and printing apparatus
JP4623120B2 (ja) 画像処理装置
KR20120128943A (ko) 디지털 사진 인화기의 사생활 보호 화면 생성 방법 및 이를 이용한 디지털 사진 인화기
JP2007045022A (ja) 印刷装置および印刷方法
CN102426574B (zh) 信息处理装置、信息处理方法
Montabone Geometric transforms

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20071226

Termination date: 20210302