WO2007004489A1 - 画像処理装置及び画像処理方法 - Google Patents

画像処理装置及び画像処理方法 Download PDF

Info

Publication number
WO2007004489A1
WO2007004489A1 PCT/JP2006/312913 JP2006312913W WO2007004489A1 WO 2007004489 A1 WO2007004489 A1 WO 2007004489A1 JP 2006312913 W JP2006312913 W JP 2006312913W WO 2007004489 A1 WO2007004489 A1 WO 2007004489A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
small
zoom
list
area
Prior art date
Application number
PCT/JP2006/312913
Other languages
English (en)
French (fr)
Inventor
Kenji Hiraoka
Original Assignee
Matsushita Electric Industrial Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co., Ltd. filed Critical Matsushita Electric Industrial Co., Ltd.
Priority to JP2007509259A priority Critical patent/JP4782105B2/ja
Priority to US11/993,637 priority patent/US8339420B2/en
Publication of WO2007004489A1 publication Critical patent/WO2007004489A1/ja

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting

Definitions

  • the present invention relates to an image processing apparatus and an image processing method for generating small images that are displayed in a list on a device having a small display area such as a portable terminal.
  • a method for managing a large number of images there are a method using a window and a folder, and a method for selecting a format for displaying an image.
  • a window having a plurality of program groups is displayed first, and when the user selects one of the program groups, a second window appears, and a small image representing an image belonging to the selected program group is displayed.
  • images are processed hierarchically using a fixed pseudo light box, and all images are displayed in a slide style with the same size.
  • the method of selecting the format for displaying images is that when the user selects a display format from the list, items that match the selected format are pulled from the database and displayed in a list that depends on the selected format. Is the method.
  • small images 300 used for selection of images having the possibility of grasping are sequentially displayed at predetermined positions on the display unit.
  • An image processing method is disclosed in which a plurality of displayed small images 300 are dynamically moved in the direction of the arrow, and the display area is increased as it goes to the center, and finally erased from a predetermined position on the display unit. ing.
  • small images are sequentially displayed at predetermined positions on the display unit, and the displayed small images 300 are dynamically moved in a spiral shape and each time they are moved.
  • An image processing method is disclosed in which the display area is reduced and finally a small image is erased at the center of the spiral shape (see, for example, Patent Document 1).
  • a small image that is displayed in a large size is arranged on the front side, and a small image that is displayed in a small size is arranged on the back side. The indication is achieved.
  • Patent Document 1 Japanese Patent Laid-Open No. 2001-306375
  • the present invention has been made in view of the above circumstances, and an object thereof is to provide an image processing apparatus and an image processing method that make it easy to understand the contents of an image with a small display.
  • the present invention is an image processing apparatus that displays a list of small images having a plurality of small images, an original image output unit that outputs an original image for generating the small image, and the original image output unit A main area extracting unit that extracts an image of the main main area of the original image output by the display, display area information indicating a display area of each small image displayed in the small image list, and the small image list.
  • a layout management unit that outputs arrangement information of each small image to be displayed, and the main region extraction unit according to the area of the display region indicated in the display region information output by the layout management unit By zooming the extracted image of the main area, a zoom image generating unit that generates a zoom image and a zoom image generated by the zoom image generating unit are enlarged or reduced and displayed in the small image list.
  • Small painting Based on the arrangement information output from the layout management unit and a small image generation unit that generates an image, each small image generated by the small image generation unit is arranged at a predetermined location in the small image list.
  • a small image list generation unit that generates a list.
  • the zoom ratio of the zoom image is appropriately set according to the display area of the small image. Therefore, the proportion of the main area in each small image can be changed according to each display area, and the contents of the small image can be easily understood.
  • the image zoom unit zooms based on the value obtained by dividing the area of the display region indicated by the display region information by the area of the original image output by the original image output unit. It can also be configured to determine the rate. [0010] Further, the image zoom unit is configured to zoom so that the image of the main region extracted by the main region extraction unit is at the center and the image of the main region is included in the zoom image. You can also
  • the image zoom unit may perform zooming so that the zoom image generated by performing the largest zoom is equal to the image of the main region extracted by the main region extraction unit.
  • An image display device is configured by combining the above-described image processing device and a display unit that displays a small image list generated by the small image list generation unit.
  • Such an image display device is preferably used particularly for a portable terminal such as a cellular phone.
  • the present invention is an image processing method for displaying a list of small images having a plurality of small images, wherein an original image for generating the small image is output, and a main area is selected from the output original images.
  • the image of the area is extracted, and the image of the extracted main area is zoomed according to the area of the display area indicated by the display area information indicating the display area of each small image displayed in the small image list.
  • To generate a zoom image enlarge or reduce the generated zoom image, generate a small image displayed in the small image list, and generate based on the arrangement information of each small image displayed in the small image list
  • the small image list is generated by arranging each small image at a predetermined position in the small image list, and has a configuration.
  • the present invention is an invention of a program, a procedure for outputting an original image for generating the small image, a procedure for extracting an image of the main main area of the output original image, Zooming the extracted image of the main area in accordance with the area of the display area indicated by the display area information indicating the display area of each small image displayed in the small image list having a plurality of small images
  • a procedure for enlarging or reducing the generated zoom image to generate a small image displayed in the small image list, and arrangement information for each small image displayed in the small image list.
  • the computer is caused to execute a procedure for arranging the generated small images at predetermined positions in the small image list and generating the small image list.
  • Such a program is recorded in a memory, a storage device or the like provided inside or outside the image processing apparatus, and is executed by a computer such as a CPU or an arithmetic unit.
  • the present invention since the display content is changed according to the size of the small image, the content of the displayed small image can be easily understood.
  • the present invention is effective when a plurality of small images having various sizes are displayed, such as pseudo three-dimensional display.
  • FIG. 1 is a block diagram showing a configuration of an image processing apparatus according to an embodiment of the present invention.
  • FIG.4 Diagram explaining an example of how to generate a zoom image
  • FIG. 5 is a diagram for explaining another example of how to generate a zoom image
  • FIG. 6 is a flowchart showing the operation of the image processing apparatus according to the embodiment.
  • FIG. 7 is a diagram showing a list of small images displayed by a conventional image processing apparatus.
  • FIG. 1 is a block diagram showing a configuration of an image processing apparatus according to an embodiment of the present invention.
  • the image processing apparatus of this embodiment is an apparatus that generates a list of small images having a plurality of small images (hereinafter referred to as a small image list) from captured images.
  • the image forming apparatus includes a unit 11, a main area detection unit 12, an image zoom unit 13, a layout management unit 14, a display image management unit 15, and an image layout unit 16.
  • Small image refers to a part or all of an original image in a partial region of the image display unit 17 described later. An image to be displayed. In general, when a part of the original image is displayed, at least the main area of the original image is included in the part as described below. In general, “small image” and “small image list” are sometimes called “thumbnail images”.
  • An image output unit (original image output unit) 11 is necessary for generating a small image from an image captured by an imaging device (not shown) such as a CCD camera or an image stored in advance.
  • the original image 100 is output to the main area detection unit 12.
  • the main area detection unit (main area extraction unit) 12 is configured by a memory such as a RAM and the like, for example, an original image 100 shown in FIG. 2 input from the image output unit 11 using a plurality of parameters.
  • An image of the main area 101 (hereinafter referred to as a main area image) is extracted from among the parameters using parameters used when recognizing a specific shape.
  • the main area 101 indicates an area used when generating a small image, which will be described later, and corresponds to the number of small images drawn in the small image list.
  • the parameters are: 1) a specific shape in the original image, for example, a template for comparing human faces, 2) a hue distribution in the original image 100, that is, an edge (contour) of a specific shape in the original image 100 RGB value of each pixel to be used, 3) Luminance distribution in the original image 100, that is, the same as the hue distribution, but the YUV value instead of the RGB value of the pixel, 4) Audio attached to the original image 100, 5) There are input conditions for the original image 100.
  • the image zoom unit 13 is output from the main region detection unit 12 based on information (display region information) indicating the display region of each small image displayed in the small image list output from the layout management unit 14. A small image is generated from the obtained main area image.
  • the image zoom unit 13 determines a zoom rate for the main region image output from the main region detection unit 12, and generates a zoom image.
  • the zoom image refers to an image obtained by cutting out from the original image 100 so as to include at least the entire main region (main region image).
  • the zoom rate is expressed by the ratio of the size of the original image 100 to the size of the zoom image thus obtained.
  • a zoom image with a larger zoom ratio has a smaller area other than the main area
  • a zoom image with a lower zoom ratio has a larger area other than the main area.
  • a zoom image with a large area ratio of the main area can be obtained by setting the zoom ratio large
  • a zoom area with a small area ratio of the main area can be obtained by setting the zoom ratio small.
  • An image can be obtained.
  • the display area (the area of the small image that is actually displayed) divided by the area of the original image 100 (the display area Z the original image area) is shown in FIG.
  • a zoom factor is set according to the zoom factor decision line shown in the graph, and a zoom image is generated according to the zoom factor.
  • the zoom ratio decreases as the right side of the graph, that is, the display area increases. Therefore, the setting on the right side of the graph is preferably used for a small image arranged on the near side in the example in FIG. 7, and the setting on the left side of the graph is arranged on the apparently back side in the example in FIG. It is preferably used for small images.
  • the display area of the display area indicated by the information indicating the display area is the same as the area of the original image 100, and the zoom ratio that does not zoom at all is 1. It shows.
  • the part indicated by the symbol A in FIG. 4 indicates that the maximum zoom ratio is used to zoom the main area image to the maximum.
  • the zoom ratio increases from 1 to the maximum zoom ratio.
  • the mode of force change in which the zoom rate changes linearly is not particularly limited.
  • the zoom factor is set to 1 in the symbol B. It is also possible to set a zoom factor other than 1 in the force symbol B.
  • FIG. 4 shows an example of a zoom image clipping method (zoom image shape determination method).
  • zoom image shape determination method zoom image shape determination method
  • the center o of the main area (image) 101 is set as the zoom center, and the vertex of the zoom image is moved along each line connecting the center and each vertex of the original image 100.
  • the zoom image is uniquely determined.
  • the zoom image 102 indicated by the dotted line is the zoom image with the maximum zoom rate (the left edge is the same in the main area 101 and the zoom image 102).
  • the aspect ratio (aspect ratio) of the original image 100 and the zoom image 102 is the same.
  • FIG. 5 shows another example of a zoom image clipping method (zoom image shape determination method).
  • the main area 101 is set to the zoom image 102 having the maximum zoom ratio, and the vertices of the zoom image are moved along the lines connecting the vertices of the main area 101 and the vertices of the original image 100.
  • the zoom image is uniquely determined.
  • the zoom image 102 indicated by the dotted line is an example.
  • the image zoom unit 13 zooms the image of the main region according to the area of the display region output by the layout management unit 14 to thereby display the zoom image. Acts as a zoom image generation unit to generate. Further, the image zoom unit 13 enlarges or reduces the zoom image zoomed by the method described above to generate a small image that is actually displayed in the small image list (acts as a small image generation unit), and displays this image as a display image. Output to management unit 16.
  • the layout management unit 14 outputs the display area information, which is information indicating the display area of each small image displayed in the small image list, to the image zoom unit 13, and displays it in the small image list.
  • the arrangement information of each small image is output to the image layout unit 16.
  • the display area information corresponds to the area of the small image, and the arrangement information corresponds to the position of the small image.
  • the display image management unit 15 stores the small image generated by the image zoom unit 13.
  • the image layout unit (small image list generation unit) 16 arranges each acquired small image at a predetermined position in the small image list based on the input arrangement information of each small image. Generate a list.
  • the above-described image processing device is combined with an image display unit 17 including a liquid crystal display device or the like to constitute an image display device.
  • the image display unit 17 is input from the image layout unit 16
  • the displayed small image list is displayed on the liquid crystal display device.
  • pseudo three-dimensional display as shown in FIG. 7 can be performed, but the display method is not particularly limited.
  • the image display device is preferably mounted on various portable terminals such as a mobile phone and a PDA, but the products to which the image display device is particularly applied are not limited.
  • FIG. 6 is a flowchart showing the operation of the image processing apparatus according to the embodiment.
  • the main area detection unit 12 uses a plurality of parameters to select the main area using the above-described parameters from the original image 100 as shown in FIG.
  • the image of 101 is extracted (step S101), and the image of the main area 101 is output by 13 image zoom units.
  • the image zoom unit 13 is based on the information indicating the display area of the small image displayed in the small image list output from the layout management unit 14, and the image of the main region 101 input from the main region detection unit 12. Next, the image zoom unit 13 generates a small image obtained by enlarging or reducing the zoom image to the size indicated in the display area display of the small image (step S 103). ), And outputs this small image to the display management unit 15.
  • the display image management unit 15 stores the small image input from the image zoom unit 13.
  • the image layout unit 16 reads out the arrangement information of each small image displayed in the small image list from the layout management unit 14 (step S104), and reads out each small image stored in the display image management unit 15 ( In step S 105), based on the read arrangement information, the read out small images are arranged at predetermined positions in the small image list to generate a thumbnail list (step S 106).
  • the image layout unit 16 outputs the generated small image to the image display unit 17 (step S107). Then, the image display unit 1 displays the input image list (step S108) and ends the process.
  • the image zoom unit 13 generates a zoom image by zooming the extracted image of the main region 101 according to the area of the display region output by the layout management unit 14. Therefore, the contents of a small image with a small image can be easily understood.
  • the zoom ratio of the zoom image is set as appropriate according to the display area of the small image. Therefore, the proportion of the main area that accurately represents the contents can be changed in accordance with each display area in each small image, and the contents of the small image can be easily understood.
  • the present invention since the display content is changed according to the size of the small image, the content of the displayed small image can be easily understood. Therefore, the present invention is effective when a plurality of small images having various sizes are displayed, such as pseudo three-dimensional display.
  • the display mode to which the present invention is applied is not limited to a specific method.
  • an image processing apparatus and an image processing method capable of easily understanding the contents of a small image.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

　奥に表示されている小画像の内容を判り易くする。 　レイアウト管理部１４は小画像一覧に表示される各小画像の表示領域と、小画像一覧に表示される各小画像の配置情報とを出力する。画像ズーム部１３は、レイアウト管理部１４により出力された表示領域の面積に応じて、主要部検出部により抽出された元画像の中から主要領域の画像をズームすることにより、ズーム画像を生成するとともに、生成されたズーム画像を拡大または縮小し、小画像一覧に表示される小画像を生成する。画像レイアウト部１６は、レイアウト管理部１４より出力された配置情報に基づき、生成された各小画像を小画像一覧の所定箇所に配置して小画像一覧を生成する。

Description

明 細 書
画像処理装置及び画像処理方法
技術分野
[0001] 本発明は、携帯端末等の表示領域が小さいデバイスに一覧表示される小画像を生 成する画像処理装置及び画像処理方法に関する。
背景技術
[0002] 従来、多数の画像を管理する方法として、ウィンドウとフォルダとを用いた方法、及 び画像を表示するためのフォーマットを選択する方法がある。ウィンドウを用いた方法 は、最初に複数のプログラムグループを有するウィンドウを表示し、ユーザがプロダラ ムグループの 1つを選択すると第 2のウィンドウを現し、選択したプログラムグループ に属する画像を表す小画像を表示する。そして、この方法は、固定疑似ライトボックス を用いて画像を階層的に処理し、すべての画像を同じ大きさでスライド風に表示する 。画像を表示するためのフォーマットを選択する方法は、ユーザがリストから表示ファ 一マットを選択すると、選択したフォーマットに合致したアイテムがデータベースから 引き出され、選択したフォーマットに依存するリスト中に表示される方法である。
[0003] し力しながら、これらの方法では、ユーザが簡単かつ迅速に画像を把握できるように 表示すると 、う点にぉ 、て不十分であると 、う問題点があった。
[0004] 上述した問題点を解決する方法として、図 7 (a)に示すように、把握対象の可能性を 秘めた画像の選択に使用される小画像 300を、表示部の所定箇所に逐次表示させ 、表示させた複数の小画像 300を矢印の方向に動的に移動させるとともに中央に行 くに従って表示面積を大きくさせ、最終的に表示部の所定箇所から消去させる画像 処理方法が開示されている。また、図 7 (b)に示すように、小画像を、表示部の所定 箇所に逐次表示させ、表示させた複数の小画像 300を螺旋形状に動的に移動させ るとともに、移動するごとに表示面積を小さくさせていき、最終的に螺旋形状の中心 において小画像を消去させる画像処理方法が開示されている（例えば、特許文献 1 参照)。このような方法では、大きく表示される小画像は見かけ上手前側に配置され、 小さく表示される小画像は見かけ上奥側に配置されているため、擬似的な 3次元表 示が達成される。
特許文献 1：特開 2001— 306375号公報
[0005] し力しながら、特に表示領域の小さい小画像が表示される場合、その内容が判りづ らくなるという問題があった。例えば、上述した擬似的 3次元表示においては、見かけ 上奥側に表示されている小画像ほど画像が小さくなり、その内容が判りづらくなるとい う事情があった。
[0006] 本発明は、上記事情に鑑みてなされたものであって、表示が小さい画像の内容を 判り易くする画像処理装置及び画像処理方法を提供することを目的とする。
発明の開示
課題を解決するための手段
[0007] 本発明は、小画像を複数有する小画像一覧を表示する画像処理装置であって、前 記小画像を生成するための元画像を出力する元画像出力部と、前記元画像出力部 により出力された元画像の中力 主要領域の画像を抽出する主要領域抽出部と、前 記小画像一覧に表示される各小画像の表示領域を示す表示領域情報と、前記小画 像一覧に表示される各小画像の配置情報とを出力するレイアウト管理部と、前記レイ アウト管理部により出力された前記表示領域情報に示されている表示領域の面積に 応じて、前記主要領域抽出部より抽出された前記主要領域の画像をズームすること により、ズーム画像を生成するズーム画像生成部と、前記ズーム画像生成部により生 成されたズーム画像を拡大または縮小し、前記小画像一覧に表示される小画像を生 成する小画像生成部と、前記レイアウト管理部より出力された前記配置情報に基づき 、前記小画像生成部より生成された各小画像を小画像一覧の所定箇所に配置して 小画像一覧を生成する小画像一覧生成部と、を備えるという構成を有する。
[0008] この構成によれば、小画像の表示領域に応じて適宜ズーム画像のズーム率が設定 される。従って、各小画像における各々表示領域に応じて主要領域の占める割合を 変化させることができ、小画像の内容を判り易くすることができる。
[0009] 前記画像ズーム部が、前記表示領域情報に示されて!/、る表示領域の面積を、前記 元画像出力部により出力された元画像の面積で除算した値を基にして、ズーム率を 決定するような構成にすることもできる。 [0010] また、前記画像ズーム部が、前記主要領域抽出部により抽出された主要領域の画 像を中心にし、かつ、前記主要領域の画像が前記ズーム画像に入るようにズームす るという構成にすることもできる。
[0011] さらに、前記画像ズーム部が、最も大きくズームして生成されるズーム画像が前記 主要領域抽出部により抽出された主要領域の画像と等しくなるようにズームすることも できる。
[0012] 上述の画像処理装置と、前記小画像一覧生成部により生成された小画像一覧を表 示する表示部とを組み合わせて画像表示装置が構成される。このような画像表示装 置は、特に携帯電話等の携帯端末に好ましく使用される。
[0013] また、本発明は、小画像を複数有する小画像一覧を表示する画像処理方法であつ て、前記小画像を生成するための元画像を出力し、出力した元画像の中から主要領 域の画像を抽出し、前記小画像一覧に表示される各小画像の表示領域を示す表示 領域情報に示されて 、る表示領域の面積に応じて、抽出した前記主要領域の画像 をズームすることによりズーム画像を生成し、生成したズーム画像を拡大または縮小 し、前記小画像一覧に表示される小画像を生成し、前記小画像一覧に表示される各 小画像の配置情報に基づき、生成した各小画像を小画像一覧の所定箇所に配置し て小画像一覧を生成すると ヽぅ構成を有する。
[0014] さらに、本発明は、プログラムの発明であって、前記小画像を生成するための元画 像を出力する手順と、出力した元画像の中力 主要領域の画像を抽出する手順と、 小画像を複数有する小画像一覧に表示される各小画像の表示領域を示す表示領域 情報に示されて 、る表示領域の面積に応じて、抽出した前記主要領域の画像をズ ームすることによりズーム画像を生成する手順と、生成したズーム画像を拡大または 縮小し、前記小画像一覧に表示される小画像を生成する手順と、前記小画像一覧に 表示される各小画像の配置情報に基づき、生成した各小画像を小画像一覧の所定 箇所に配置して小画像一覧を生成する手順とをコンピュータに実行させる。このよう なプログラムは、画像処理装置の内外に設けられたメモリ、記憶装置等に記録され、 CPUのごときコンピュータ、演算装置により実行される。
発明の効果 [0015] 本発明は、小画像の大きさに応じて表示内容が変更されるため、表示されている小 画像の内容を判り易くすることができる。特に、本発明は、擬似 3次元表示の如き、様 々な大きさを有する小画像を複数表示される場合に有効である。
図面の簡単な説明
[0016] [図 1]本発明の実施形態に係る画像処理装置の構成を示すブロック図
[図 2]元画像及び抽出される主要領域の 1例を示す図
[図 3]ズーム率を説明する図
[図 4]ズーム画像の生成の仕方の一例を説明する図
[図 5]ズーム画像の生成の仕方の他の例を説明する図
[図 6]実施形態の画像処理装置の動作を示すフローチャート
[図 7]従来の画像処理装置が表示する小画像一覧を示す図
符号の説明
[0017] 11 画像出力部
12 主要領域検出部
13 画像ズーム部
14 レイアウト管理部
15 表示画像管理部
16 画像レイアウト部
17 画像表示部
発明を実施するための最良の形態
[0018] 以下、本発明の実施するための最良の形態に係る画像処理装置について、図面を 参照して説明する。
[0019] 図 1は本発明の実施形態に係る画像処理装置の構成を示すブロック図である。この 実施形態の画像処理装置は、撮像された画像から複数の小画像を有する小画像の 一覧 (以下、小画像一覧という）を生成する装置であって、図 1に示すように、画像出 力部 11と、主要領域検出部 12と、画像ズーム部 13と、レイアウト管理部 14と、表示 画像管理部 15と、画像レイアウト部 16とを備えて構成されている。
[0020] 「小画像」とは、元画像の一部又は全部が、後述する画像表示部 17の一部領域に 表示される画像をいう。一般的に、元画像の一部が表示される場合は、下記で述べ るように元画像の少なくとも主要領域が、当該一部に含められる。また、一般的に「小 画像」、「小画像一覧」は「サムネイル画像」と呼ばれることがある。
[0021] 画像出力部 (元画像出力部） 11は、 CCDカメラ等の撮像素子（図示せず）により撮 影した画像または予め記憶されて 、る画像を、小画像を生成する際に必要となる元 画像 100として主要領域検出部 12に出力する。
[0022] 主要領域検出部（主要領域抽出部） 12は、 RAM等のメモリにより構成されており、 複数のパラメータを用 、て画像出力部 11から入力された、例えば図 2に示す元画像 100の中から、特定の形状を認識する際に用いられるパラメータを用いて主要領域 1 01の画像 (以下、主要領域画像という）を抽出する。ここで、主要領域 101は、後述 する小画像を生成する際に用いられる領域を示しており、小画像一覧に描かれてい る小画像の数に対応している。パラメータには、 1)元画像中に特定の形状、例えば、 人の顔を比較するテンプレート、 2)元画像 100中の色相分布、すなわち元画像 100 中の特定の形状のエッジ (輪郭）を特定する基各画素の RGB値、 3)元画像 100中の 輝度分布、すなわち色相分布と同様であるが画素の RGB値でなく YUV値、 4)元画 像 100に付随している音声、 5)元画像 100の入力条件等がある。
[0023] 画像ズーム部 13は、レイアウト管理部 14から出力された小画像一覧に表示される 各小画像の表示領域を示す情報 (表示領域情報）に基づき、主要領域検出部 12か ら出力された主要領域画像から小画像を生成する。まず、画像ズーム部 13は、主要 領域検出部 12から出力された主要領域画像に対するズーム率を決定し、ズーム画 像を生成する。
[0024] ズーム画像とは、元画像 100から少なくとも主要領域 (主要領域画像)全体を含む ように切り抜かれて得られた画像をいう。そして、ズーム率とは、そのようにして得られ たズーム画像の大きさに対する元画像 100の大きさの比によって表わされる。言い換 えると、ズーム率が大きいズーム画像ほど主要領域以外の領域がより小さくなり、ズー ム率が小さいズーム画像ほど主要領域以外の領域がより大きくなる。更に言い換える と、ズーム率を大きく設定することにより、主要領域の面積割合が大きいズーム画像 が得られ、ズーム率を小さく設定することにより、主要領域の面積割合が小さいズー ム画像が得られる。
[0025] 従って、ズーム率の小さいズーム画像を用いるにあたっては、実際に表示される小 画像が比較的大きい場合、図 7の例では、見かけ上手前側に配置される小画像に用 いることが好ましい。実際に表示される小画像が比較的大きいため、主要領域の面 積割合が小さくても、その内容は把握しやすいからである。
[0026] 一方、ズーム率の大きいズーム画像を用いるにあたっては、実際に表示される小画 像が小さい場合、図 7の例では、見かけ上奥側に配置される小画像に用いることが好 ましい。実際に表示される小画像が小さいため、主要領域の面積割合が大きい方が 、その内容は把握しやすいからである。
[0027] 以上を踏まえて、本実施形態では表示面積 (実際に表示される小画像の面積）と元 画像 100の面積で除算した値、（表示面積 Z元画像面積）に対し、図 3のグラフに示 すズーム率決定線に従ったズーム率を設定し、当該ズーム率に従ってズーム画像を 生成する。グラフの右側、すなわち、表示面積が大きいほどズーム率が小さくなつて いる。従って、グラフの右側の設定は、図 7の例では、見かけ上手前側に配置される 小画像に好ましく用いられ、グラフの左側の設定は、図 7の例では、見かけ上奥側に 配置される小画像に好ましく用いられる。
[0028] 図 3中の符号 Bに示された箇所では、表示領域を示す情報に示された表示領域の 表示面積と元画像 100の面積が同じとなり、全くズームをしないズーム率が 1であるこ とを示している。また、図 4中の符号 Aに示された箇所では、主要領域画像を最も大 きくズームする最大ズーム率であることを示している。更に、符号 B力も符号 Aにかけ ては、ズーム率が 1から最大ズーム率に上昇している。本例では、符号 Bから符号 A にかけては、ズーム率が線形に変化している力 変化の態様は特に限定されない。 また、本例では符号 Bにおいてズーム率が 1に設定されている力 符号 Bにおいて 1 以外の他のズーム率を設定することも可能である。
[0029] 本例における符号 B (ズーム率 = 1)に相当するズーム画像を用いる場合、元画像 がそのまま小画像として使用される。従って、小画像は元画像がそのまま縮小された 形式にて表示されるが、このような場合も本発明に含まれる。
[0030] 図 4はズーム画像の切り抜き方法 (ズーム画像の形状決定方法)の一例を示す。こ の例では、主要領域 (画像） 101の中心 oをズームの中心に設定し、当該中心と元画 像 100の各頂点を結ぶ各線上にそってズーム画像の頂点を移動させる。ズーム率を 変動させることにより、ズーム画像が一義的に定められる。ただし、主要領域 101は 必ずズーム画像内に収められなければならないので、点線で示したズーム画像 102 が最大ズーム率のズーム画像となる（左縁が主要領域 101とズーム画像 102で一致 している）。本例では、元画像 100とズーム画像 102各々のアスペスト比（縦横比）は 同一となる。
[0031] 図 5はズーム画像の切り抜き方法 (ズーム画像の形状決定方法)の他の例を示す。
この例では、主要領域 101を最大ズーム率のズーム画像 102に設定し、主要領域 1 01の各頂点と元画像 100の各頂点を結ぶ各線上にそってズーム画像の頂点を移動 させる。ズーム率を変動させることにより、ズーム画像が一義的に定められる。点線で 示したズーム画像 102は一例である。
[0032] 上述の、図 3〜図 5の例において、画像ズーム部 13はレイアウト管理部 14により出 力された表示領域の面積に応じて、主要領域の画像をズームすることにより、ズーム 画像を生成するズーム画像生成部として作用する。さらに画像ズーム部 13は、上述 した方法によりズームされたズーム画像を拡大または縮小して、実際に小画像一覧 に表示する小画像を生成し (小画像生成部として作用）、この画像を表示画像管理 部 16に出力する。
[0033] 上述したように、レイアウト管理部 14は、小画像一覧に表示される各小画像の表示 領域を示す情報である表示領域情報を画像ズーム部 13に出力するとともに、小画像 一覧に表示される各小画像の配置情報を画像レイアウト部 16に出力する。表示領域 情報は小画像の面積に対応し、配置情報は小画像の位置に対応する。
[0034] 表示画像管理部 15は、画像ズーム部 13により生成された小画像を記憶する。画像 レイアウト部 (小画像一覧生成部） 16は、入力された各小画像の配置情報に基づき、 表示画像管理部 15力 取得した各小画像を小画像一覧の所定箇所に配置し、小画 像一覧を生成する。
[0035] 上述の画像処理装置は、液晶表示装置等から構成された画像表示部 17と組み合 わされ、画像表示装置を構成する。画像表示部 17は、画像レイアウト部 16から入力 された小画像一覧を液晶表示装置に表示する。表示にあたっては、図 7のような擬似 3次元表示が行なわれ得るが、特に表示方式は限定されない。また、画像表示装置 は、携帯電話、 PDA等の各種携帯端末に好ましくは搭載されるが、特に適用される 製品は限定されない。
[0036] 次に、この実施形態の画像処理装置の動作を説明する。
[0037] 図 6は実施形態の画像処理装置の動作を示すフローチャートである。主要領域検 出部 12は、画像出力部 11から元画像 100が入力されると、図 2に示すように、複数 のパラメータを用いて元画像 100の中から、上述したパラメータを用いて主要領域 10 1の画像を抽出し (ステップ S101)、この主要領域 101の画像を画像ズーム部 13〖こ 出力する。
[0038] 画像ズーム部 13は、レイアウト管理部 14から出力された小画像一覧に表示される 小画像の表示領域を示す情報に基づき、主要領域検出部 12から入力された主要領 域 101の画像のズーム画像を生成する (ステップ S102)、次に、画像ズーム部 13は 、ズーム画像を小画像の表示領域表示に示された大きさに拡大または縮小した小画 像を生成し (ステップ S 103)、この小画像を表示管理部 15に出力する。
[0039] 表示画像管理部 15は、画像ズーム部 13から入力された小画像を記憶する。画像 レイアウト部 16は、小画像一覧に表示される各小画像の配置情報をレイアウト管理部 14から読み出すとともに (ステップ S 104)、表示画像管理部 15に記憶されて 、る各 小画像を読み出し (ステップ S 105)、読み出した配置情報に基づき、読み出した各 小画像を小画像一覧の所定箇所に配置してサムネイル一覧を生成する (ステップ S 1 06)。
[0040] その後、画像レイアウト部 16は、生成した小画像を画像表示部 17に出力する (ステ ップ S107)。すると、画像表示部 1は、入力された画像一覧を表示し (ステップ S108 )、処理を終了する。
[0041] 実施形態の画像処理装置では、レイアウト管理部 14により出力された表示領域の 面積に応じて、画像ズーム部 13が、抽出した主要領域 101の画像をズームしてズー ム画像を生成するので、画像が小さい小画像の内容を判り易くすることができる。
[0042] すなわち、小画像の表示領域に応じて適宜ズーム画像のズーム率が設定される。 従って、各小画像における各々表示領域に応じて、内容を的確に表わした主要領域 の占める割合を変化させることができ、小画像の内容を判り易くすることができる。
[0043] 本発明によれば、小画像の大きさに応じて表示内容が変更されるため、表示されて いる小画像の内容を判り易くすることができる。従って、本発明は、擬似 3次元表示の 如き、様々な大きさを有する小画像を複数表示する場合に有効である。もちろん本発 明が適用される表示態様は、特定の方式に限定されるわけではない。
[0044] 本出願は、 2005年 6月 30日出願の日本特許出願 (特願 2005— 192076)に基づ くものであり、その内容はここに参照として取り込まれる。
[0045] 以上、本発明の各種実施形態を説明したが、本発明は前記実施形態において示さ れた事項に限定されず、明細書の記載、並びに周知の技術に基づいて、当業者が その変更 ·応用することも本発明の予定するところであり、保護を求める範囲に含まれ る。
産業上の利用可能性
[0046] 本発明によれば、小画像の内容を判り易くすることができる画像処理装置及び画像 処理方法が提供される。

Claims

請求の範囲
[1] 小画像を複数有する小画像一覧を表示する画像処理装置であって、
前記小画像を生成するための元画像を出力する元画像出力部と、
前記元画像出力部により出力された元画像の中から主要領域の画像を抽出する主 要領域抽出部と、
前記小画像一覧に表示される各小画像の表示領域を示す表示領域情報と、前記 小画像一覧に表示される各小画像の配置情報とを出力するレイアウト管理部と、 前記レイアウト管理部により出力された前記表示領域情報に示されている表示領域 の面積に応じて、前記主要領域抽出部より抽出された前記主要領域の画像をズーム することにより、ズーム画像を生成するズーム画像生成部と、
前記ズーム画像生成部により生成されたズーム画像を拡大または縮小し、前記小 画像一覧に表示される小画像を生成する小画像生成部と、
前記レイアウト管理部より出力された前記配置情報に基づき、前記小画像生成部よ り生成された各小画像を小画像一覧の所定箇所に配置して小画像一覧を生成する 小画像一覧生成部と、
を備える画像処理装置。
[2] 請求項 1記載の画像処理装置であって、
前記ズーム画像生成部は、前記表示領域情報に示されて!/、る表示領域の面積を、 前記元画像出力部により出力された元画像の面積で除算した値を基にして、ズーム 率を決定する画像処理装置。
[3] 請求項 1記載の画像処理装置であって、
前記ズーム画像生成部は、前記主要領域抽出部により抽出された主要領域の画 像を中心にし、かつ、前記主要領域の画像が前記ズーム画像に入るようにズームす る画像処理装置。
[4] 請求項 1記載の画像処理装置であって、
前記ズーム画像生成部は、最も大きくズームして生成されるズーム画像が前記主要 領域抽出部により抽出された主要領域の画像と等しくなるようにズームする画像処理 装置。
[5] 請求項 1記載の画像処理装置と、
前記小画像一覧生成部により生成された小画像一覧を表示する表示部と、を備え る画像表示装置。
[6] 請求項 5の画像表示装置を含む携帯端末。
[7] 小画像を複数有する小画像一覧を表示する画像処理方法であって、
前記小画像を生成するための元画像を出力し、
出力した元画像の中から主要領域の画像を抽出し、
前記小画像一覧に表示される各小画像の表示領域を示す表示領域情報に示され ている表示領域の面積に応じて、抽出した前記主要領域の画像をズームすることに よりズーム画像を生成し、
生成したズーム画像を拡大または縮小し、前記小画像一覧に表示される小画像を 生成し、
前記小画像一覧に表示される各小画像の配置情報に基づき、生成した各小画像 を小画像一覧の所定箇所に配置して小画像一覧を生成する、画像処理方法。
[8] 小画像を生成するための元画像を出力する手順と、
出力した元画像の中から主要領域の画像を抽出する手順と、
小画像を複数有する小画像一覧に表示される各小画像の表示領域を示す表示領 域情報に示されている表示領域の面積に応じて、抽出した前記主要領域の画像を ズームすることによりズーム画像を生成する手順と、
生成したズーム画像を拡大または縮小し、前記小画像一覧に表示される小画像を 生成する手順と、
前記小画像一覧に表示される各小画像の配置情報に基づき、生成した各小画像 を小画像一覧の所定箇所に配置して小画像一覧を生成する手順と、
をコンピュータに実行させるプログラム。
PCT/JP2006/312913 2005-06-30 2006-06-28 画像処理装置及び画像処理方法 WO2007004489A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2007509259A JP4782105B2 (ja) 2005-06-30 2006-06-28 画像処理装置及び画像処理方法
US11/993,637 US8339420B2 (en) 2005-06-30 2006-06-28 Method and apparatus for producing size-appropriate images to be displayed by an electronic device with a small display area

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005192076 2005-06-30
JP2005-192076 2005-06-30

Publications (1)

Publication Number Publication Date
WO2007004489A1 true WO2007004489A1 (ja) 2007-01-11

Family

ID=37604358

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/312913 WO2007004489A1 (ja) 2005-06-30 2006-06-28 画像処理装置及び画像処理方法

Country Status (3)

Country Link
US (1) US8339420B2 (ja)
JP (1) JP4782105B2 (ja)
WO (1) WO2007004489A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8200037B2 (en) 2008-01-28 2012-06-12 Microsoft Corporation Importance guided image transformation

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
JP5016553B2 (ja) * 2008-05-28 2012-09-05 京セラ株式会社 携帯通信端末および端末操作方法
EP3260969B1 (en) 2009-09-22 2021-03-03 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8780069B2 (en) 2009-09-25 2014-07-15 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
CN103679632A (zh) * 2012-09-18 2014-03-26 英业达科技有限公司 以不同缩放比例缩放影像中不同区域的系统及方法
USD741895S1 (en) * 2012-12-18 2015-10-27 2236008 Ontario Inc. Display screen or portion thereof with graphical user interface
DK201670608A1 (en) 2016-06-12 2018-01-02 Apple Inc User interfaces for retrieving contextually relevant media content
AU2017100670C4 (en) 2016-06-12 2019-11-21 Apple Inc. User interfaces for retrieving contextually relevant media content
US20170357644A1 (en) 2016-06-12 2017-12-14 Apple Inc. Notable moments in a collection of digital assets
US10373290B2 (en) * 2017-06-05 2019-08-06 Sap Se Zoomable digital images
US11086935B2 (en) 2018-05-07 2021-08-10 Apple Inc. Smart updates from historical database changes
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
US11243996B2 (en) 2018-05-07 2022-02-08 Apple Inc. Digital asset search user interface
US10846343B2 (en) 2018-09-11 2020-11-24 Apple Inc. Techniques for disambiguating clustered location identifiers
US10803135B2 (en) 2018-09-11 2020-10-13 Apple Inc. Techniques for disambiguating clustered occurrence identifiers
DK201970535A1 (en) 2019-05-06 2020-12-21 Apple Inc Media browsing user interface with intelligently selected representative media items
DK202070612A1 (en) 2020-02-14 2021-10-26 Apple Inc User interfaces for workout content

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62144273A (ja) * 1985-12-19 1987-06-27 Toshiba Corp 画像検索装置
JPH06222899A (ja) * 1993-01-28 1994-08-12 Nec Corp マルチウィンドウ表示方式
JPH0997154A (ja) * 1995-10-02 1997-04-08 Sony Corp 画像制御装置および方法
JP2000057326A (ja) * 1998-08-05 2000-02-25 Casio Comput Co Ltd マルチ画面表示方法および画像表示装置
WO2000033571A1 (fr) * 1998-11-30 2000-06-08 Sony Corporation Procede et dispositif de delivrance d'information
JP2001306375A (ja) * 2000-04-21 2001-11-02 Sony Corp データオブジェクト管理システム
JP2001312268A (ja) * 2000-05-01 2001-11-09 Sony Corp 情報処理装置および方法、並びにプログラム格納媒体
JP2003173304A (ja) * 2001-12-04 2003-06-20 Sony Corp 情報提供システム、画像提供装置および方法、携帯情報処理装置および方法、並びにプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5898435A (en) * 1995-10-02 1999-04-27 Sony Corporation Image controlling device and image controlling method
JPH11250223A (ja) * 1998-02-27 1999-09-17 Canon Inc 画像処理装置及び方法並びに記憶媒体
US6362850B1 (en) * 1998-08-04 2002-03-26 Flashpoint Technology, Inc. Interactive movie creation from one or more still images in a digital imaging device
JP2001136358A (ja) 1999-11-01 2001-05-18 Dainippon Printing Co Ltd トリミング画像作成装置およびトリミング枠位置情報作成装置
JP2001186334A (ja) * 1999-12-27 2001-07-06 Canon Inc 画像処理装置、画像処理システム、画像処理方法、及び記憶媒体
US6654506B1 (en) * 2000-01-25 2003-11-25 Eastman Kodak Company Method for automatically creating cropped and zoomed versions of photographic images
US6961908B2 (en) * 2001-12-05 2005-11-01 International Business Machines Corporation System and method for navigating graphical images
US7139006B2 (en) * 2003-02-04 2006-11-21 Mitsubishi Electric Research Laboratories, Inc System and method for presenting and browsing images serially
JP2005080070A (ja) 2003-09-02 2005-03-24 Seiko Epson Corp 推奨されるトリミングサイズの決定
US6956589B2 (en) * 2003-09-29 2005-10-18 Beon Media Inc. Method and system for specifying zoom size
US8659619B2 (en) * 2004-03-26 2014-02-25 Intellectual Ventures Fund 83 Llc Display device and method for determining an area of importance in an original image
JP4653561B2 (ja) * 2005-05-31 2011-03-16 株式会社東芝 情報処理装置および表示制御方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62144273A (ja) * 1985-12-19 1987-06-27 Toshiba Corp 画像検索装置
JPH06222899A (ja) * 1993-01-28 1994-08-12 Nec Corp マルチウィンドウ表示方式
JPH0997154A (ja) * 1995-10-02 1997-04-08 Sony Corp 画像制御装置および方法
JP2000057326A (ja) * 1998-08-05 2000-02-25 Casio Comput Co Ltd マルチ画面表示方法および画像表示装置
WO2000033571A1 (fr) * 1998-11-30 2000-06-08 Sony Corporation Procede et dispositif de delivrance d'information
JP2001306375A (ja) * 2000-04-21 2001-11-02 Sony Corp データオブジェクト管理システム
JP2001312268A (ja) * 2000-05-01 2001-11-09 Sony Corp 情報処理装置および方法、並びにプログラム格納媒体
JP2003173304A (ja) * 2001-12-04 2003-06-20 Sony Corp 情報提供システム、画像提供装置および方法、携帯情報処理装置および方法、並びにプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8200037B2 (en) 2008-01-28 2012-06-12 Microsoft Corporation Importance guided image transformation

Also Published As

Publication number Publication date
JP4782105B2 (ja) 2011-09-28
US8339420B2 (en) 2012-12-25
JPWO2007004489A1 (ja) 2009-01-29
US20100079496A1 (en) 2010-04-01

Similar Documents

Publication Publication Date Title
JP4782105B2 (ja) 画像処理装置及び画像処理方法
JP4341408B2 (ja) 画像表示方法及び装置
JP4930607B2 (ja) 画像処理装置、及び、画像処理プログラム
JP2005251166A5 (ja)
JP4838746B2 (ja) コンテンツ表示方法、プログラム、及び装置、並びに記録媒体
JP2007041866A (ja) 情報処理装置及び情報処理方法並びにプログラム
KR20150106330A (ko) 화상 표시 장치 및 화상 표시 방법
JP2006261711A (ja) 画像生成装置
CN110326292B (zh) 图像显示装置、图像显示方法及存储介质
JP2011146799A (ja) 画像処理装置及び画像処理プログラム
JP2009080573A (ja) 表示手法
CN109324736A (zh) 局部放大图片的交互方法及装置
JP4872396B2 (ja) 画像編集装置、画像編集方法および画像編集プログラム
KR100686162B1 (ko) 이동통신 단말기 및 섬네일 이미지 표시 방법
JP2011013334A (ja) 画像表示装置
EP2085926B1 (en) Method and apparatus for generating thumbnail image
JP2011086050A (ja) 情報処理端末及びコンピュータプログラム
CN105678696B (zh) 一种信息处理方法及电子设备
JP6175375B2 (ja) 表示装置、表示方法及びプログラム
CN106131628A (zh) 一种视频图像处理方法及装置
WO2007001026A1 (ja) 画像処理装置及び画像処理方法
US10025485B2 (en) Non-transitory storage medium storing display program and display device
JP2008053813A (ja) 画像処理装置、および画像処理方法、並びに画像処理プログラム
JP4741916B2 (ja) 画像処理装置、画像処理方法及び該方法を実行するための画像処理プログラムを格納したコンピュータ読み取り可能な記録媒体
JP2011175309A (ja) 画像処理装置、及びプログラム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 2007509259

Country of ref document: JP

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 11993637

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 06767530

Country of ref document: EP

Kind code of ref document: A1