JP2012108721A

JP2012108721A - Image search device and image search method

Info

Publication number: JP2012108721A
Application number: JP2010256908A
Authority: JP
Inventors: Junichiro Nishi; 淳一郎西; Manabu Miki; 学三木
Original assignee: Viva Computer Co Ltd
Current assignee: Viva Computer Co Ltd
Priority date: 2010-11-17
Filing date: 2010-11-17
Publication date: 2012-06-07

Abstract

PROBLEM TO BE SOLVED: To provide an image search device applicable to a wider range of image data.SOLUTION: The image search device includes: an image data accumulating unit 11 for accumulating multiple pieces of image data; color sense point data accumulating unit 13 for accumulating color sense point data calculated on the basis of color pattern data corresponding to color sense language data and associated with the image data, for each image data, with respect to multiple pieces of sensory color sense language data related to colors; a color sense language data input unit 12 for inputting color sense language data; and an image data extraction unit 14 for extracting image data accumulated in the image data accumulating unit 11 on the basis of the color sense point data associated with the image data with respect to the color sense language data when the color sense language data is input.

Description

本発明は、画像検索装置、及び画像検索方法に関する。 The present invention relates to an image search device and an image search method.

近年、デジタルカメラやデジタル画像処理ソフトの普及により、個人若しくは企業のコンピュータハードディスクやインターネット上のハードディスクに写真、デザイン画像などの画像データが大量に蓄積されている。 In recent years, with the widespread use of digital cameras and digital image processing software, a large amount of image data such as photographs and design images has been accumulated in personal or corporate computer hard disks and hard disks on the Internet.

このような大量に蓄積されている画像データから、感性語を用いて目的の画像の検索を行う方法が提示されている。 A method for searching for a target image using a sensitivity word from such a large amount of stored image data is proposed.

例えば、あらかじめ被写体の持つ印象を表す感性語を付与しておき、画像から被写体を識別したときには、対応する感性語を自動付与させることで、感性語による検索を実現しているものがある（例えば、特許文献１参照）。 For example, a sensitivity word representing an impression of a subject is assigned in advance, and when a subject is identified from an image, a corresponding sensitivity word is automatically assigned to realize a search by the sensitivity word (for example, , See Patent Document 1).

また、既存にある感性語と対応した配色パターンのデータベースを利用して、配色パターンと画像から抽出した代表色との近似を計算し、感性語による画像検索を実現しているものもある（例えば、非特許文献1、２参照。）。 In addition, there is also a technique that realizes an image search using a sensitivity word by calculating an approximation between a color arrangement pattern and a representative color extracted from an image using a database of color arrangement patterns corresponding to existing sensitivity words (for example, Non-Patent Documents 1 and 2).

特開２００４−５５３４号公報JP 2004-5534 A

木本晴夫「感性語による画像検索とその精度評価」情報処理学会論文誌、1999Haruo Kimoto “Image Retrieval by Sensitivity Words and Its Accuracy Evaluation”, IPSJ Journal, 1999 小林重順、日本カラーデザイン研究所編「カラーイメージスケール改訂版」講談社、2000Shigejun Kobayashi, Japan Color Design Laboratory, “Color Image Scale Revised Edition” Kodansha, 2000

しかし、特許文献１の画像検索装置では、被写体「山林」に対して「すがすがしい」といった感性語キーワードが対応付けられており、被写体の持つ印象が明確である場合に限られ、模様のようなデザイン素材の場合、感性語が抽出できないため、より広い範囲の画像データに適用出来ず検索性能が不十分であった。 However, in the image search device of Patent Document 1, a sensitivity word keyword such as “fresh” is associated with the subject “mountain forest”, and the design is like a pattern only when the impression of the subject is clear. In the case of the material, since the sensitivity word cannot be extracted, it cannot be applied to a wider range of image data, and the search performance is insufficient.

また、通常、JIS Z 8721（物体色の色名）における系統色においては、「明るい」「つよい」「こい」「うすい」「やわらかい」「くすんだ」と言った色彩にもっとも関係の深い形容詞（感性語）は、「有彩色の明度及び彩度に関する修飾語」（それらの色の範囲は色調、もしくはトーンと呼ぶ）に対応させており、JISが参考にした全米色彩協議会（Inter-Society CoorCouncil、ISCC）と米国標準局（National Beureau of Standards、NBS）によるISCC-NBS色名法においても同様である。 In general, in the system colors in JIS Z 8721 (object color name), adjectives most closely related to colors such as “bright”, “good”, “koi”, “light”, “soft”, “dull” Sensitivity words) correspond to “modifiers for lightness and saturation of chromatic colors” (the range of these colors is called tones or tones), and the National Color Council (Inter-Society) referenced by JIS The same applies to the ISCC-NBS color name method by CoorCouncil (ISCC) and the National Beureau of Standards (NBS).

しかしながら、従来、非特許文献２のように、感性語と配色パターンが対応されているが画像検索は行われておらず、非特許文献１は、非特許文献２の感性語と配色パターンを用いて画像検索が行われているが、配色比率は含まれていなかった。また、予め色彩の専門家によって決められた感性語と配色パターンを用いることを前提としており、新たな組み合わせを作成することができなかった。さらに、感性語と色調を用いた検索は行われていなかった。 However, conventionally, as in Non-Patent Document 2, the sensitivity word and the color arrangement pattern correspond to each other, but the image search is not performed, and Non-Patent Document 1 uses the sensitivity word and the color arrangement pattern of Non-Patent Document 2. The image search was performed, but the color scheme ratio was not included. In addition, it is assumed that sensitivity words and color schemes determined in advance by color specialists are used, and a new combination could not be created. Furthermore, no search using sensitivity words and colors was performed.

本発明は、上記従来の画像検索装置を考慮して、より広い範囲の画像データに適用可能な画像検索装置、そのデータベース作成装置、及び画像検索方法を提供することを目的とする。 An object of the present invention is to provide an image search apparatus that can be applied to a wider range of image data, a database creation apparatus thereof, and an image search method in consideration of the conventional image search apparatus.

又、本発明は、上記従来の画像検索装置の課題を考慮して、色調を用いた画像検索装置、そのデータベース作成装置、及び画像検索方法を提供することを目的とする。 Another object of the present invention is to provide an image search device using color tone, a database creation device therefor, and an image search method in consideration of the problems of the conventional image search device.

上記目的を達成するために、第１の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、配色に関連する感覚的な配色感覚言語データに対して、それぞれの前記配色感覚言語データに対応する配色パターンデータに基づいて算出され、前記画像データに紐付けられた配色感覚点数データを蓄積する配色感覚点数データ蓄積部と、
前記配色感覚言語データを入力するための配色感覚言語データ入力部と、
前記配色感覚言語データが入力された際、前記配色感覚言語データに対するそれぞれの前記画像データに紐付けられた前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置である。 In order to achieve the above object, the first present invention provides:
An image data storage unit for storing a plurality of image data;
For each of the image data, a plurality of sensory color sense language data related to the color scheme is calculated based on the color scheme pattern data corresponding to each color scheme sense language data and linked to the image data. A color scheme sensory point data storage unit for storing color scheme sensory point data;
A color arrangement sense language data input unit for inputting the color arrangement sense language data;
When the color arrangement sense language data is input, the image data stored in the image data storage unit is extracted based on the color arrangement sense point data associated with the image data corresponding to the color arrangement sense language data. An image search device including an image data extraction unit that performs the operation.

第２の本発明は、
第１の本発明の画像検索装置の前記配色感覚点数データ蓄積部のデータベースを作成するデータベース作成装置であって、
複数の前記配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部と、
画像データを入力する画像データ入力部と、
入力された前記画像データについて、それぞれの前記配色感覚言語データに対して、それぞれの前記配色パターンデータに基づいて前記配色感覚点数データを算出する蓄積用配色感覚点数データ算出部とを備えた、データベース作成装置である。 The second aspect of the present invention
A database creation device for creating a database of the color arrangement sensation point data storage unit of the image search device of the first invention,
A color arrangement sense language data storage unit for storing a plurality of color arrangement sense language data and color arrangement pattern data corresponding to each of the color arrangement sense language data;
An image data input unit for inputting image data;
A database comprising the storage color scheme sensory point data calculation unit for calculating the color scheme sensory point data based on the color scheme pattern data for each color scheme language data for the input image data It is a creation device.

第３の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
複数の、配色に関連する感覚的な配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部と、
前記配色感覚言語データを入力するための配色感覚言語データ入力部と、
前記配色感覚言語データが入力された際、その配色感覚言語データの前記配色パターンデータに基づいて、それぞれの前記画像データの配色感覚点数データを算出する配色感覚点数データ算出部と、
それぞれの前記画像データの前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置である。 The third aspect of the present invention provides
An image data storage unit for storing a plurality of image data;
A plurality of sensory color scheme language data related to color scheme and a color scheme language data storage unit that stores color scheme pattern data corresponding to each color scheme language data;
A color arrangement sense language data input unit for inputting the color arrangement sense language data;
When the color arrangement sense language data is input, based on the color arrangement pattern data of the color arrangement sense language data, a color arrangement sense point data calculation unit that calculates color arrangement sense point data of each of the image data;
An image search apparatus comprising: an image data extraction unit that extracts the image data stored in the image data storage unit based on the color arrangement sense point data of each of the image data.

第４の本発明は、
前記配色パターンデータとは、前記配色感覚言語データに対応する配色を構成する複数の色と、前記複数の色の配色比率のデータである、第１又は３の本発明の画像検索装置である。 The fourth invention relates to
The color arrangement pattern data is the image search device according to the first or third aspect of the present invention, which is data of a plurality of colors constituting a color arrangement corresponding to the color arrangement sense language data and a color arrangement ratio of the plurality of colors.

第５の本発明は、
前記配色感覚点数データは、
前記配色感覚言語データに対応する配色を構成する複数の色について、各々の色を基準として、その色と同色とみなす色範囲内に、前記画像データを形成する色が含まれている割合が点数化されて算出される、第１又は３の本発明の画像検索装置である。 The fifth aspect of the present invention relates to
The color scheme sensation point data is
For a plurality of colors constituting the color scheme corresponding to the color scheme sense language data, the ratio of the colors forming the image data within the color range regarded as the same color as each color on the basis of each color is a score It is the image search device of the first or third aspect of the present invention, which is calculated by being converted into an image.

第６の本発明は、
前記色範囲とは、
２色間の距離が知覚的な色差に比例するL*a*b*表色系又はL*C*ｈ表色系の均等色空間において、
L*a*b*表色系の色差を用いて設定された、前記配色感覚言語データに対応した配色パターンデータを構成する複数の各色と同色とみなす範囲を、立体で表現したL*a*b*表色系又はL*C*ｈ表色系等に反映した球状空間内のことである、第５の本発明の画像検索装置である。 The sixth invention relates to
The color range is
In the L * a * b * color system or L * C * h color system where the distance between two colors is proportional to the perceptual color difference,
L * a * that expresses the range considered as the same color as each of the multiple colors constituting the color scheme pattern data corresponding to the color scheme sense language data set using the color difference of the L * a * b * color system. The image search device according to the fifth aspect of the present invention is a spherical space reflected in a b * color system or an L * C * h color system.

第７の本発明は、
前記配色感覚点数データは、
前記画像データの１ピクセル毎に、そのピクセルに含まれる色が、前記色範囲内に含まれているか否かが判断され、含まれている場合に点数が加算されることによって、前記配色を構成する複数の色の各々の点数が算出され、算出されたそれぞれの点数が合計されて求められる、第５の本発明の画像検索装置である。 The seventh invention relates to
The color scheme sensation point data is
For each pixel of the image data, it is determined whether or not the color included in the pixel is included in the color range, and if included, the score is added to configure the color scheme In the image search device according to the fifth aspect of the present invention, the score of each of the plurality of colors is calculated, and the calculated scores are totaled.

第８の本発明は、
前記配色感覚点数データは、
前記各々の色の点数の上限が、対応する前記配色感覚言語データの配色比率となるようにして求められる、第７の本発明の画像検索装置である。 The eighth invention relates to
The color scheme sensation point data is
In the image search device according to the seventh aspect of the present invention, the upper limit of the number of points of each color is obtained so as to be a color arrangement ratio of the corresponding color arrangement sense language data.

第９の本発明は、
前記配色感覚点数データは、
前記画像データの１ピクセルに含まれる色が、前記色範囲内に含まれている場合であっても、前記基準とする色との色差が大きい程加算する点数を小さくして計算される、第７の本発明の画像検索装置である。 The ninth invention relates to
The color scheme sensation point data is
Even if the color included in one pixel of the image data is included in the color range, the calculation is performed by decreasing the number of points to be added as the color difference from the reference color increases. 7 is an image search device according to the present invention.

第１０の本発明は、
前記複数の色とは、前記配色パターンデータに対応する画像データに対して設定された複数の配色領域のそれぞれについて、ＲＧＢ値に基づいて算出された平均色である、第４の本発明の画像検索装置である。 The tenth aspect of the present invention is
The plurality of colors is an average color calculated based on RGB values for each of a plurality of color arrangement regions set for image data corresponding to the color arrangement pattern data. A search device.

第１１の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、色調に関連する感覚的な色調感覚言語データに対して、それぞれの前記色調感覚言語データに対応する色調パターンデータに基づいて算出され、前記画像データに紐付けられた色調感覚点数データを蓄積する色調感覚点数データ蓄積部と、
前記色調感覚言語データを入力するための色調感覚言語データ入力部と、
前記色調感覚言語データが入力された際、前記色調感覚言語データに対するそれぞれの前記画像データに紐付けられた前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置である。 The eleventh aspect of the present invention is
An image data storage unit for storing a plurality of image data;
For each of the image data, a plurality of sensory tone sensation language data related to the tone is calculated based on the tone pattern data corresponding to each of the tone sensation language data and associated with the image data. A color tone sensation point data storage unit for storing color tone sensation point data;
A color sensation language data input unit for inputting the color sensation language data;
When the color sensation language data is input, the image data stored in the image data storage unit is extracted based on the color sensation score data associated with the image data corresponding to the color sensation language data. An image search device including an image data extraction unit that performs the operation.

第１２の本発明は、
第１１の本発明の画像検索装置の前記色調感覚点数データ蓄積部のデータベースを作成するデータベース作成装置であって、
複数の前記色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部と、
画像データを入力する画像データ入力部と、
入力された前記画像データについて、それぞれの前記色調感覚言語データに対して、それぞれの前記色調パターンデータに基づいて前記色調感覚点数データを算出する蓄積用色調感覚点数データ算出部とを備えた、データベース作成装置である。 The twelfth aspect of the present invention is
A database creation device for creating a database of the color tone sensation point data storage unit of the image search device of the eleventh aspect of the present invention,
A plurality of tone sensation language data, and a tone sensation language data storage unit that accumulates tone pattern data corresponding to each of the tone sensation language data;
An image data input unit for inputting image data;
A database comprising: the stored color tone sensation point data calculation unit for calculating the color tone sensation point data based on the color tone pattern data for each of the color tone sense language data for the input image data It is a creation device.

第１３の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
複数の、色調に関連する感覚的な色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部と、
前記色調感覚言語データを入力するための色調感覚言語データ入力部と、
前記色調感覚言語データが入力された際、その色調感覚言語データの前記色調パターンデータに基づいて、それぞれの前記画像データの色調感覚点数データを算出する色調感覚点数データ算出部と、
それぞれの前記画像データの前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置である。 The thirteenth aspect of the present invention is
An image data storage unit for storing a plurality of image data;
A plurality of sensory color sensation language data related to color tone, and a color sensation language data storage unit that accumulates color pattern data corresponding to each of the color sensation language data;
A color sensation language data input unit for inputting the color sensation language data;
When the color sensation language data is input, based on the color pattern data of the color sensation language data, a color sensation point data calculation unit that calculates the color sensation point data of each of the image data;
An image search device comprising: an image data extraction unit that extracts the image data stored in the image data storage unit based on the color tone score data of each of the image data.

第１４の本発明は、
前記色調パターンデータとは、前記色調感覚言語データに対応する色調と、前記色調を基準として、その色調と同じ色調とみなす色調範囲のデータである、第１１又は１３の本発明の画像検索装置である。 The fourteenth aspect of the present invention is
The color pattern data is data of a color range corresponding to the color tone corresponding to the color tone sensation language data and a color range that is considered to be the same color tone as the color tone, with the color tone as a reference. is there.

第１５の本発明は、
前記色調感覚点数データは、
前記画像データを形成する色調が、前記色調感覚言語データに対応する色調範囲内に含まれる割合が点数化されて算出される、第１４の本発明の画像検索装置である。 The fifteenth aspect of the present invention is
The color tone score data is
In the image search device according to the fourteenth aspect of the present invention, the color tone forming the image data is calculated by scoring the ratio of the color tone range included in the color tone range corresponding to the color tone sense language data.

第１６の本発明は、
前記色調感覚点数データは、
前記画像データの１ピクセル毎に、そのピクセルに含まれる色調が前記色調範囲内に含まれているか否かが判断され、含まれている場合に点数が加算されて算出される、第１５の本発明の画像検索装置である。 The sixteenth aspect of the present invention
The color tone score data is
For each pixel of the image data, it is determined whether or not the color tone included in the pixel is included in the color tone range, and if included, the fifteenth book is calculated by adding a score. It is an image search device of the invention.

第１７の本発明は、
前記色調感覚点数データは、
前記画像データの１ピクセルに含まれている色調が、前記色調範囲内に含まれている場合であっても、前記基準とする色調との差が大きい程加算する点数が小さくなるようにして算出される、第１６の本発明の画像検索装置である。 The seventeenth aspect of the present invention provides
The color tone score data is
Even when the color tone included in one pixel of the image data is included in the color tone range, the larger the difference from the reference color tone, the smaller the number of points to be added. The sixteenth image retrieval apparatus according to the present invention.

第１８の本発明は、
前記色調とは、明度及び彩度であり、
前記色調範囲とは、
色相、明度及び彩度の色の３属性によって形成され、前記色相を一定とした場合に前記明度及び前記彩度の面が形成される色空間において、
いずれかの前記明度及び前記彩度の面内でL*a*b*表色系の色差を用いて設定された、前記色調感覚言語データに対応した色調と同じ色調とみなす範囲を、前記色相を含めた立体に反映したリング状空間内のことである、第１４の本発明の画像検索装置である。 The eighteenth aspect of the present invention is
The color tone is lightness and saturation,
The tone range is
In a color space that is formed by three attributes of hue, brightness, and saturation color, and where the hue and saturation planes are formed when the hue is constant,
The range considered as the same color tone as the color tone corresponding to the color sense language data set using the color difference of the L * a * b * color system in the plane of any one of the lightness and the saturation is the hue. This is the image search device of the fourteenth aspect of the present invention, which is in a ring-shaped space reflected in a solid including

第１９の本発明は、
前記色空間とは、マンセル、L*C*h、ＨＳＶ、及びＨＬSのうちのいずれかから選択された空間である、第１８の本発明の画像検索装置である。 The nineteenth aspect of the present invention provides
The color space is the image search device according to the eighteenth aspect of the present invention, which is a space selected from any of Munsell, L * C * h, HSV, and HLS.

第２０の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、配色に関連する感覚的な配色感覚言語データに対して、それぞれの前記配色感覚言語データに対応する配色パターンデータに基づいて算出され、前記画像データに紐付けられた配色感覚点数データを蓄積する配色感覚点数データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記配色感覚言語データを入力するための配色感覚言語データ入力ステップと、
前記配色感覚言語データが入力された際、前記配色感覚言語データに対するそれぞれの前記画像データに紐付けられた前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法である。 The twentieth aspect of the present invention is
An image data storage unit for storing a plurality of image data;
For each of the image data, a plurality of sensory color sense language data related to the color scheme is calculated based on the color scheme pattern data corresponding to each color scheme sense language data and linked to the image data. An image search method using an image search device, comprising a color arrangement sense point data storage unit for storing color arrangement sense point data,
A color sense language data input step for inputting the color sense language data;
When the color arrangement sense language data is input, the image data stored in the image data storage unit is extracted based on the color arrangement sense point data associated with the image data corresponding to the color arrangement sense language data. And an image data extraction step.

第２１の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
複数の、配色に関連する感覚的な配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記配色感覚言語データを入力するための配色感覚言語データ入力ステップと、
前記配色感覚言語データが入力された際、その配色感覚言語データについて、対応する前記配色パターンデータに基づいて、それぞれの前記画像データの配色感覚点数データを算出する配色感覚点数データ算出ステップと、
それぞれの前記画像データの前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法である。 The twenty-first aspect of the present invention
An image data storage unit for storing a plurality of image data;
Using an image search device comprising a plurality of color arrangement sense language data related to color arrangement and a color arrangement sense language data storage unit for storing color arrangement pattern data corresponding to each color arrangement sense language data An image search method,
A color sense language data input step for inputting the color sense language data;
When the color arrangement sensation language data is input, the color arrangement sensation language data is calculated based on the color arrangement pattern data corresponding to the color arrangement sensation language data.
An image search method comprising: an image data extraction step of extracting the image data stored in the image data storage unit based on the color arrangement sense point data of each of the image data.

第２２の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、色調に関連する感覚的な色調感覚言語データに対して、それぞれの前記色調感覚言語データに対応する色調パターンデータに基づいて算出され、前記画像データに紐付けられた色調感覚点数データを蓄積する色調感覚点数データ蓄積部とを備えた画像検索装置を用いた画像検索方法であって、
前記色調感覚言語データを入力するための色調感覚言語データ入力ステップと、
前記色調感覚言語データが入力された際、前記色調感覚言語データに対するそれぞれの前記画像データに紐付けられた前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法である。 The twenty-second invention relates to
An image data storage unit for storing a plurality of image data;
For each of the image data, a plurality of sensory tone sensation language data related to the tone is calculated based on the tone pattern data corresponding to each of the tone sensation language data and associated with the image data. An image search method using an image search device including a color tone sensation point data storage unit for storing color tone sensation point data,
A color tone language data input step for inputting the color tone language data;
When the color sensation language data is input, the image data stored in the image data storage unit is extracted based on the color sensation score data associated with the image data corresponding to the color sensation language data. And an image data extraction step.

第２３の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
複数の、色調に関連する感覚的な色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記色調感覚言語データを入力するための色調感覚言語データ入力ステップと、
前記色調感覚言語データが入力された際、その色調感覚言語データの前記色調パターンデータに基づいて、それぞれの前記画像データの色調感覚点数データを算出する色調感覚点数データ算出ステップと、
それぞれの前記画像データの前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法である。 The twenty-third invention provides
An image data storage unit for storing a plurality of image data;
Using an image search apparatus comprising a plurality of sensory tone sensation language data related to a tone and a tone sense language data storage unit for storing tone pattern data corresponding to each of the tone sense language data An image search method,
A color tone language data input step for inputting the color tone language data;
When the color sensation language data is input, based on the color pattern data of the color sensation language data, a color sensation point data calculation step for calculating color sensation point data of each of the image data;
An image search method comprising: an image data extraction step of extracting the image data stored in the image data storage unit based on the color tone sensation point data of each of the image data.

第２４の本発明は、
第２０から２３のいずれかの本発明の画像検索方法の前記各ステップをコンピュータに実行させるプログラムである。 The twenty-fourth aspect of the present invention
A program for causing a computer to execute each of the steps of the image search method according to any one of the 20th to 23rd aspects of the present invention.

第２５の本発明は、
第２４の本発明のプログラムを記録した記録媒体であって、コンピュータにより処理可能な記録媒体である。 The twenty-fifth aspect of the present invention provides
A recording medium recording a program according to the twenty-fourth aspect of the present invention, which is a recording medium that can be processed by a computer.

本発明によれば、より広い範囲の画像データに適用可能な画像検索装置、データベース作成装置、及び画像検索方法を提供することが出来る。 According to the present invention, it is possible to provide an image search device, a database creation device, and an image search method that can be applied to a wider range of image data.

又、本発明によれば、色調を用いた画像検索装置、そのデータベース作成装置、及び画像検索方法を提供することが出来る。 In addition, according to the present invention, it is possible to provide an image search apparatus using color tones, a database creation apparatus thereof, and an image search method.

本発明にかかる実施の形態１における画像検索装置及びそのデータベース作成装置の構成図1 is a configuration diagram of an image search device and a database creation device thereof according to a first embodiment of the present invention. 本発明にかかる実施の形態１における配色感覚言語データベースを示す図The figure which shows the color sense sensation language database in Embodiment 1 concerning this invention. 本発明にかかる実施の形態１における配色感覚言語データベースを作成するフローを示す図The figure which shows the flow which produces the color arrangement sense language database in Embodiment 1 concerning this invention. 本発明にかかる実施の形態１における配色パターン抽出インタフェースを示す図The figure which shows the coloration pattern extraction interface in Embodiment 1 concerning this invention. 本発明にかかる実施の形態１における配色感覚点数データベースを作成するフローを示す図The figure which shows the flow which produces the color scheme sense score database in Embodiment 1 concerning this invention. 本発明にかかる実施の形態１における配色感覚言語データベースを示す図The figure which shows the color sense sensation language database in Embodiment 1 concerning this invention. 本発明にかかる実施の形態１における配色感覚言語データの配色パターンの一例を示す図The figure which shows an example of the color arrangement pattern of the color arrangement sense language data in Embodiment 1 concerning this invention 本発明にかかる実施の形態１における色補正のメンバーシップ関数を示す図The figure which shows the membership function of the color correction in Embodiment 1 concerning this invention 本発明にかかる実施の形態１における画像検索方法のフローを示す図The figure which shows the flow of the image search method in Embodiment 1 concerning this invention. 本発明にかかる実施の形態２における画像検索装置の構成図Configuration diagram of an image search apparatus according to a second embodiment of the present invention. 本発明にかかる実施の形態２における画像検索方法のフローを示す図The figure which shows the flow of the image search method in Embodiment 2 concerning this invention. 本発明にかかる実施の形態３における画像検索装置及びそのデータベース作成装置の構成図Configuration diagram of an image search apparatus and its database creation apparatus according to a third embodiment of the present invention 本発明にかかる実施の形態３における色調感覚言語データベースを作成するフローを示す図The figure which shows the flow which produces the color sense sensation language database in Embodiment 3 concerning this invention. 本発明にかかる実施の形態３における色相を無視して明度―彩度で決定される色空間断面を示す図The figure which shows the color space cross section determined by lightness-saturation ignoring the hue in Embodiment 3 concerning this invention 本発明にかかる実施の形態３における色調感覚言語データベースを示す図The figure which shows the color sense sensation language database in Embodiment 3 concerning this invention. 本発明にかかる実施の形態３における色調感覚空間を示す図The figure which shows the color tone sensation space in Embodiment 3 concerning this invention. 本発明にかかる実施の形態３における色調感覚点数データベースを作成するフローを示す図The figure which shows the flow which produces the color tone sensation score database in Embodiment 3 concerning this invention. 本発明にかかる実施の形態３における色補正のメンバーシップ関数を示す図The figure which shows the membership function of the color correction in Embodiment 3 concerning this invention. 本発明にかかる実施の形態３における色調感覚点数データベースを示す図The figure which shows the color tone sensation score database in Embodiment 3 concerning this invention. 本発明にかかる実施の形態３における画像検索方法のフローを示す図The figure which shows the flow of the image search method in Embodiment 3 concerning this invention. 本発明にかかる実施の形態４における画像検索装置の構成図Configuration diagram of an image search apparatus according to a fourth embodiment of the present invention. 本発明にかかる実施の形態４における画像検索方法のフローを示す図The figure which shows the flow of the image search method in Embodiment 4 concerning this invention. 本発明にかかる実施の形態の画像検索装置をコンピュータに適用した構成を示す図The figure which shows the structure which applied the image search device of embodiment concerning this invention to the computer 本発明にかかる実施の形態画像検索装置を用いた画像検索システムの構成を示す図1 is a diagram showing a configuration of an image search system using an image search device according to an embodiment of the present invention.

以下に、本発明にかかる実施の形態について図面を参照しながら説明する。 Embodiments according to the present invention will be described below with reference to the drawings.

（実施の形態１）
以下に、本発明にかかる実施の形態１の画像検索装置及びデータベース作成装置について説明する。本実施の形態１の画像検索装置は、配色感覚言語を用いて画像の検索を行う装置であり、配色感覚言語は、後述する色調感覚言語とともに感性語に含まれる。 (Embodiment 1)
The image search device and database creation device according to the first embodiment of the present invention will be described below. The image search apparatus according to the first embodiment is an apparatus that searches for an image using a color sense language, and the color sense language is included in the sensitivity word together with the color tone sense language described later.

図１は、本実施の形態１の画像検索装置及びデータベース作成装置の構成図である。図１に示すように、本実施の形態１の画像検索装置１０は、複数の画像データが蓄積された画像データ蓄積部１１と、例えば「あたたかな」、「スタイリッシュな」等の配色に関する配色感覚言語データを入力する配色感覚言語データ入力部１２と、それぞれの画像データについて配色感覚言語データ毎に算出され、それぞれの画像データと画像データＩＤによって紐付けられた点数のデータベースが蓄積された配色感覚点数データ蓄積部１３とを備えている。又、入力された配色感覚言語データについて、その配色感覚言語データに対する各画像データの配色感覚点数データに基づいて、表示する画像データを抽出する画像データ抽出部１４と、抽出された画像データを表示する表示部１５が設けられている。尚、配色感覚点数データに基づいて画像データを抽出するとは、例えば、配色感覚点数データの降順にソートをかけて、例えば点数の高い順に上位１０以内を抽出するということである。 FIG. 1 is a configuration diagram of an image search device and a database creation device according to the first embodiment. As shown in FIG. 1, the image search apparatus 10 according to the first embodiment includes an image data storage unit 11 in which a plurality of image data are stored, and a color arrangement sensation relating to a color arrangement such as “warm” and “stylish”. A color arrangement sense language data input unit 12 for inputting language data, and a color arrangement sense that is calculated for each color arrangement sense language data for each image data and stores a database of points associated with each image data and image data ID. And a score data storage unit 13. For the input color sense language data, based on the color sense point data of each image data for the color sense language data, an image data extraction unit 14 for extracting image data to be displayed, and the extracted image data are displayed. A display unit 15 is provided. Note that extracting image data based on the color arrangement sense score data means, for example, sorting in descending order of the color arrangement sense score data and extracting, for example, the top 10 within the highest score.

また、配色感覚点数データ蓄積部１３のデータベースを作成するデータベース作成装置２０は、配色感覚点数データ蓄積部１３の配色感覚点数データベースを作成するための画像データを入力する画像データ入力部２２と、入力された画像データについて、夫々の配色感覚言語データに対する配色感覚点数データを算出する蓄積用配色感覚点数データ算出部２３とを備えている。更に、データベース作成装置２０は、複数の配色感覚言語データ、それぞれの配色感覚言語データに対応する配色を構成する複数の色、及び夫々の色の配色比のデータベースが蓄積された配色感覚言語データ蓄積部２１と、配色感覚言語データ蓄積部２１に、配色感覚言語データ及びそれに対する画像データを入力してデータベースを作成する配色感覚言語データ作成用入力部２５と、入力された画像データの配色の解析を行って、その配色を構成する複数の色の配色比を算出する画像データ解析部２４とを備えている。 The database creation device 20 that creates the database of the color arrangement sense point data storage unit 13 includes an image data input unit 22 that inputs image data for creating the color arrangement sense point data database of the color arrangement sense point data storage unit 13, and an input. A storage color arrangement sense point data calculation unit 23 that calculates color arrangement sense point data for each color arrangement sense language data is provided for the image data that has been processed. Furthermore, the database creation device 20 stores color arrangement sense language data in which a plurality of color arrangement sense language data, a plurality of colors constituting the color arrangement corresponding to each color arrangement sense language data, and a database of color arrangement ratios of the respective colors are stored. A color arrangement sensation language data creation input unit 25 for creating a database by inputting the color arrangement sensation language data and image data corresponding to the color arrangement sensation language data storage unit 21; and an analysis of the color arrangement of the input image data And an image data analysis unit 24 for calculating a color arrangement ratio of a plurality of colors constituting the color arrangement.

次に、本実施の形態１のデータベース作成装置２０の動作について説明する。 Next, the operation of the database creation device 20 according to the first embodiment will be described.

本実施の形態１のデータベース作成装置２０は、画像検索装置１０の配色感覚点数データ蓄積部１３に蓄積されている配色感覚点数データベースを作成する装置であるが、このデータベースを作成する方法を説明する前に、データベース作成装置２０内の配色感覚言語データ蓄積部２１に蓄積されている配色感覚言語データベースの作成方法について説明する。 The database creation apparatus 20 according to the first embodiment is an apparatus that creates a color arrangement sense point number database stored in the color arrangement sense point data storage unit 13 of the image search apparatus 10. A method for creating this database will be described. First, a method of creating a color arrangement sense language database stored in the color arrangement sense language data storage unit 21 in the database creation apparatus 20 will be described.

図２は、配色感覚言語データ蓄積部２１の配色感覚言語データベース２１１の表を示す図である。図２に示すように、配色感覚言語データ毎に、その配色感覚言語データに対応する配色パターンを構成する複数の色（本実施の形態では３色に設定）のＲＧＢ平均色と、それぞれの色の配色比率からなる配色パターンデータが示されている。例えば、「暖かい」という配色感覚言語データの場合、その配色パターンは、色１（Ｒ２５２、Ｇ１５５、Ｂ４１）、色２（Ｒ２１５、Ｇ３４、Ｂ１１０）、色３（Ｒ２１７、Ｇ２１、Ｂ４８）の３色から構成されており、それぞれの配色比率は、色１＝４１％、色２＝２２％、色３＝３７％となっている。 FIG. 2 is a view showing a table of the color arrangement sense language database 211 of the color arrangement sense language data storage unit 21. As shown in FIG. 2, for each color arrangement sense language data, RGB average colors of a plurality of colors (set to three colors in the present embodiment) constituting a color arrangement pattern corresponding to the color arrangement sense language data, and the respective colors Color arrangement pattern data composed of the following color arrangement ratios is shown. For example, in the case of “warm” color arrangement sense language data, the color arrangement pattern includes three colors of color 1 (R252, G155, B41), color 2 (R215, G34, B110), and color 3 (R217, G21, B48). The respective color arrangement ratios are color 1 = 41%, color 2 = 22%, and color 3 = 37%.

この配色感覚言語データベース２１１に配色パターンデータを蓄積する方法について説明する。図３は、本実施の形態１の配色感覚言語データ蓄積部２１に配色パターンデータを蓄積するためのフローチャートである。 A method for storing color arrangement pattern data in the color arrangement sense language database 211 will be described. FIG. 3 is a flowchart for storing color arrangement pattern data in the color arrangement sense language data storage unit 21 of the first embodiment.

はじめに、Ｓ１０において、配色感覚言語データ作成用入力部２５から画像データαが入力され、その画像データαに対応する配色感覚言語データＡがユーザにより選択される。 First, in S10, image data α is input from the color arrangement sense language data creation input unit 25, and the color arrangement sense language data A corresponding to the image data α is selected by the user.

次に、Ｓ１１において、画像データ解析部２４によって画像データαから配色領域１が選択される。そして、Ｓ１２において、配色領域１の１ピクセルごとにＲＧＢ値を算出して全てのピクセルの合計を出し、その合計を配色領域１に該等するピクセル数で割り算することによって、ＲＧＢ平均色が算出される。 Next, in S11, the color arrangement region 1 is selected from the image data α by the image data analysis unit 24. In S12, an RGB value is calculated for each pixel in the color arrangement area 1, the total of all the pixels is calculated, and the total is divided by the number of pixels equal to the color arrangement area 1, thereby calculating an RGB average color. Is done.

同様に、Ｓ１３において画像データαから配色領域２が選択される。そして、Ｓ１４において、配色領域２の１ピクセルごとにＲＧＢ値を算出して合計を出し、その合計を配色領域２に該等するピクセル数で割り算することによって、ＲＧＢ平均色が算出される。 Similarly, the color arrangement region 2 is selected from the image data α in S13. In S 14, RGB values are calculated for each pixel in the color arrangement area 2, the sum is calculated, and the total is divided by the number of pixels equal to the color arrangement area 2 to calculate the RGB average color.

同様に、Ｓ１５において画像データαから配色領域３が選択される。そして、Ｓ１６において配色領域３の１ピクセルごとにＲＧＢ値を算出して合計を出し、その合計を配色領域３に該等するピクセル数で割り算することによって、ＲＧＢ平均色が算出される。 Similarly, the color arrangement region 3 is selected from the image data α in S15. In S16, an RGB value is calculated for each pixel in the color arrangement region 3 to obtain a total, and the total is divided by the number of pixels equivalent to the color arrangement region 3, whereby an RGB average color is calculated.

次に、Ｓ１７において、配色領域１、２、３から、配色領域の配色比が算出される。 Next, in S17, the color arrangement ratio of the color arrangement area is calculated from the color arrangement areas 1, 2, and 3.

最後にＳ１８において、上述のようにして算出された、配色感覚言語データＡと、それに対応した配色パターンを構成する各色のＲＧＢ平均色の色値、及び各色の配色比率からなる配色パターンデータが配色感覚言語データ蓄積部２１に保存される。 Finally, in S18, the color arrangement pattern data composed of the color arrangement sense language data A calculated as described above, the color values of the RGB average colors of the respective colors constituting the corresponding color arrangement pattern, and the color arrangement ratios of the respective colors are arranged. It is stored in the sensory language data storage unit 21.

以下に、配色感覚言語データ蓄積部の蓄積方法の実施例を用いて、より具体的に説明する。 Below, it demonstrates more concretely using the Example of the storage method of the color arrangement sense language data storage part.

配色感覚言語データ作成用入力部２５から入力された画像データ、あるいは、あらかじめ蓄積されている画像データ蓄積部１１から抽出した画像データから任意の配色領域を選択する。本発明では一つの配色パターンを構成する色は三種類とみなし、配色領域数は３つとする。 An arbitrary color arrangement region is selected from the image data input from the color arrangement sense language data creation input unit 25 or the image data extracted from the image data storage unit 11 stored in advance. In the present invention, the colors constituting one color arrangement pattern are regarded as three types, and the number of color arrangement areas is three.

図４は、配色パターンを抽出するインターフェースの一例を示す図である。図４に示すように、本実施の形態では、下方から見上げてビルを撮影した画像データが、配色感覚言語データ作成用入力部２５から読み込まれたとする。 FIG. 4 is a diagram illustrating an example of an interface for extracting a color arrangement pattern. As shown in FIG. 4, in the present embodiment, it is assumed that image data obtained by photographing a building looking up from below is read from the color arrangement sense language data creation input unit 25.

配色領域の選択は、マウスで画像の任意の一点をクリックする。クリックされたピクセルのＲＧＢ色値を画像データ解析部２４が読み取り、抽出したＲＧＢ色値と同色の範囲を色差のレベル調整によって判断し、一つの配色領域として認識する。配色領域は配色パターンを構成する数だけ選択するが、ここでは、配色パターンは３色から構成されるので、配色領域１〜３まで選択される。 To select a color arrangement area, click an arbitrary point on the image with the mouse. The image data analysis unit 24 reads the RGB color value of the clicked pixel, determines the same color range as the extracted RGB color value by adjusting the level of the color difference, and recognizes it as one color arrangement region. The number of color arrangement regions is selected as many as the number of color arrangement patterns. Here, since the color arrangement patterns are composed of three colors, the color arrangement regions 1 to 3 are selected.

まず、配色領域１として、空の部分を選択する。そして、選択した配色領域は、L*a*b*表色系の色差を用いて、同色と感じられる領域を指定し、一ピクセルごとのＲＧＢ値を平均することでＲＧＢ平均色値が算出される。それを配色領域２、配色領域３の全ピクセルに対して繰り返し、画像データから三色から構成される配色パターンを求める。なお、選択結果が配色領域１の表示部分２５１に表示される。 First, an empty part is selected as the color arrangement region 1. The selected color arrangement area uses the color difference of the L * a * b * color system, specifies the area that is felt as the same color, and averages the RGB values for each pixel to calculate the RGB average color value. The This is repeated for all pixels in the color arrangement area 2 and the color arrangement area 3, and a color arrangement pattern composed of three colors is obtained from the image data. The selection result is displayed on the display portion 251 of the color arrangement area 1.

すなわち、配色領域２として、右側のビルの部分（黄土色）を選択し、同様に配色領域２のＲＧＢ平均色値が算出される。なお、選択結果が配色領域２の表示部分２５２に表示される。 That is, the right building portion (ocher color) is selected as the color arrangement region 2, and the RGB average color value of the color arrangement region 2 is calculated in the same manner. The selection result is displayed on the display portion 252 of the color arrangement area 2.

次に、配色領域３として、左側のビルの部分（灰色）を選択し、同様に配色領域３のＲＧＢ平均色値が算出される。なお、選択結果が配色領域３の表示部分２５３に表示される。 Next, the left building portion (gray) is selected as the color arrangement region 3, and the RGB average color values of the color arrangement region 3 are calculated in the same manner. The selection result is displayed on the display portion 253 of the color arrangement region 3.

また配色パターンに含まれる三色について、それぞれの色が配色パターンに占める配色比率を算出する。配色比率は、例えば配色領域１から算出された配色１が１４００ピクセル、配色２が４００ピクセル、配色３は２００ピクセルの場合、配色１、配色２、配色３の配色比率は、７０％：２０％：１０％と計算される。 Further, for the three colors included in the color arrangement pattern, the color arrangement ratio of each color in the color arrangement pattern is calculated. For example, when the color scheme 1 calculated from the color scheme area 1 is 1400 pixels, the color scheme 2 is 400 pixels, and the color scheme 3 is 200 pixels, the color scheme ratio of the color scheme 1, the color scheme 2, and the color scheme 3 is 70%: 20%. : Calculated as 10%.

そして、配色パターンと配色比率の組み合わせである配色パターンデータに、配色感覚言語データが対応される。配色感覚言語データは、例えば、「はなやかな」「穏やかな」「愉しい」等の形容詞でもかまないし、「和風」や「エスニック」等の名詞でもかまわない。 The color arrangement sense language data corresponds to the color arrangement pattern data that is a combination of the color arrangement pattern and the color arrangement ratio. The color sense sensation language data may be, for example, adjectives such as “Hanami”, “Gentle”, “Fun”, or nouns such as “Japanese” or “Ethnic”.

上記、配色感覚言語データと、対応する配色パターンを構成する各色のＲＧＢ平均色値、及び各色の配色比率から構成される配色パターンデータが配色感覚言語データ蓄積部２１に格納される。 The color arrangement sense language data storage unit 21 stores color arrangement pattern data including the color arrangement sense language data, the RGB average color values of each color constituting the corresponding color arrangement pattern, and the color arrangement ratio of each color.

以下に、本実施の形態１のデータベース作成装置２０によって、画像検索装置１０の配色感覚点数データ蓄積部１３に蓄積されている配色感覚点数データベースを作成する方法について説明する。 Hereinafter, a method of creating the color arrangement sense point database stored in the color arrangement sense point data storage unit 13 of the image search apparatus 10 by the database creation apparatus 20 of the first embodiment will be described.

図５は、本発明にかかる実施の形態１におけるデータベース作成装置２０がデータベースを作成するために、画像データ入力部２２から入力した画像データβのなかに、ある配色感覚言語データに対応する配色パターンに含まれる色がどれくらいの割合で存在するかを解析するフローである。 FIG. 5 shows a color arrangement pattern corresponding to some color arrangement sense language data in the image data β input from the image data input unit 22 in order for the database creation apparatus 20 according to the first embodiment of the present invention to create a database. This is a flow for analyzing the ratio of the colors included in.

画像データ入力部２２から画像データが入力されると、図２の配色感覚言語データベースに蓄積されている複数の配色感覚言語データのうち１つの配色感覚言語データＢが選択される（Ｓ２０）。 When the image data is input from the image data input unit 22, one color combination sense language data B is selected from the plurality of color combination sense language data stored in the color combination sense language database of FIG. 2 (S20).

まず、Ｓ２１において画像データβのある１ピクセルの色情報（ＲＧＢ値）が取得される。 First, in S21, color information (RGB value) of one pixel having image data β is acquired.

次に、Ｓ２２において、配色感覚言語データＢに対応する配色パターンＰ１を構成している色１のＲＧＢ平均色値と色差（詳しくは後述する）から、取得したＲＧＢ値の色感覚点数ｘ1が算出される。 Next, in S22, the color sensation point number x1 of the acquired RGB value is calculated from the RGB average color value and color difference (details will be described later) of color 1 constituting the color arrangement pattern P1 corresponding to the color arrangement sense language data B. Is done.

次に、Ｓ２３において、配色パターンＰ１を構成している色２の色値と色差から、取得したＲＧＢ値の色感覚点数ｙ１が算出される。 Next, in S23, the color sense point number y1 of the acquired RGB value is calculated from the color value and the color difference of the color 2 constituting the color arrangement pattern P1.

次に、Ｓ２４において配色パターンＰ１を構成している色３の色値と色差から、取得したＲＧＢ値の色感覚点数ｚ１が算出される。 Next, in S24, the color sense point number z1 of the acquired RGB value is calculated from the color value and color difference of color 3 constituting the color arrangement pattern P1.

上記Ｓ２１からＳ２４までの制御は、画像データβの全てのピクセル（ピクセル数Ｎとする）について、色１、色２、色３に対する色感覚点数が算出されるまで繰り返される（Ｓ２５）。すなわち、色１については、Ｎ個のピクセル数の色感覚点数ｘ１、ｘ２・・・ｘＮが得られる。 The control from S21 to S24 is repeated until the number of color sensation points for color 1, color 2, and color 3 is calculated for all the pixels (pixel number N) of the image data β (S25). That is, for color 1, color sense points x1, x2,... XN of N pixels are obtained.

次に、Ｓ２６において、色１、色２、色３の各色感覚点数に対して、配色パターンＰ１を構成する色の配色比率が上限として設定される。 Next, in S 26, the color arrangement ratio of the colors constituting the color arrangement pattern P 1 is set as the upper limit for the number of color sense points of color 1, color 2, and color 3.

続いて、Ｓ２７において、上限の設定された色１、色２、色３の合計が求められ、配色感覚点数データｖが算出される。 Subsequently, in S27, the sum of color 1, color 2, and color 3 for which the upper limit is set is obtained, and color arrangement sense point data v is calculated.

次に、他の配色感覚言語データＣについて、その配色感覚言語データＣに対応する配色パターンＰ２を構成する色１〜３について、上記制御Ｓ２０〜Ｓ２７が行われて配色感覚点数データｖが決定され、配色感覚言語データベース２１１に蓄積されている全ての配色感覚言語データのそれぞれについて配色感覚点数データｖが決定される（Ｓ２８）。 Next, with respect to the other color arrangement sense language data C, the above-described control S20 to S27 is performed on the colors 1 to 3 constituting the color arrangement pattern P2 corresponding to the color arrangement sense language data C to determine the color arrangement sense point data v. The color arrangement sense point data v is determined for each of all the color arrangement sense language data stored in the color arrangement sense language database 211 (S28).

そして、画像データβに関する各配色感覚言語データに対する配色感覚点数データが、配色感覚点数データ蓄積部１３に蓄積され、配色感覚点数データベース１３１に登録される（Ｓ２９）。 Then, the color arrangement sensation point data for each color arrangement sensation language data related to the image data β is accumulated in the color arrangement sensation point data storage unit 13 and registered in the color arrangement sensation point database 131 (S29).

図６は、配色感覚点数データベース１３１を示す図である。図６に示すように、複数の画像データβ、γ・・・の各々について、各配色感覚言語データに対する配色感覚点数データｖが算出されている。尚、配色感覚点数データベース１３１には、画像データβ、γ自体ではなく、画像データのＩＤが記憶されており、この画像データＩＤによって、各配色感覚言語データに対する配色感覚点数データが、画像データ蓄積部１１に蓄積されている画像データβ、γに紐付けられている。 FIG. 6 is a diagram showing the color arrangement sense score database 131. As shown in FIG. 6, color arrangement sense point data v for each color arrangement sense language data is calculated for each of the plurality of image data β, γ. Note that the color arrangement sense point database 131 stores image data IDs instead of the image data β and γ itself, and the color arrangement sense point data for each color arrangement sense language data is stored in the image data by this image data ID. The image data β and γ stored in the unit 11 are associated with each other.

次に、配色感覚点数データベース１３１を作成する方法について実施例に基づいて、より詳しく説明する。 Next, a method for creating the color arrangement sense score database 131 will be described in more detail based on an embodiment.

第一段階として、配色パターンＰ１を構成する各色が、画像データβに含まれている各々の割合が算出される。上記と同様に、本実施の形態では配色パターンは三色（色１、色２、色３）から構成されるものとする。 As a first stage, the ratio of each color constituting the color arrangement pattern P1 is calculated in the image data β. Similarly to the above, in this embodiment, the color arrangement pattern is assumed to be composed of three colors (color 1, color 2, and color 3).

次に、色１、色２、色３の各色について、L*a*b*表色系の色差を用いて同色とみなすことが出来る色範囲が定められる。ここで、色範囲は、L*a*b*表色系においては、均等色空間のため、完全な球体状になる。そして、球体の大きさ小ささと色範囲の広さ狭さは比例する。 Next, for each color of color 1, color 2, and color 3, a color range that can be regarded as the same color is determined using the color difference of the L * a * b * color system. Here, the color range in the L * a * b * color system is a perfect sphere due to the uniform color space. The small size of the sphere is proportional to the narrowness of the color range.

色の品質管理では、同色と感じる色差は、ΔE*ab0.5以内程度とされているが、それは人の目で見て見分けが付かないというレベルであり、ΔE*ab0.5という数値をデジタル画像に適応すると人の目には同じ色と感じる色でも差異があるとコンピュータが判断してしまう。そのため、デジタル画像における同色と感じる色範囲は、もっと大きく例えばΔE*ab20程度に設定する。 In color quality control, the color difference perceived to be the same color is considered to be within ΔE * ab0.5, but this is a level that cannot be discerned by human eyes, and the value ΔE * ab0.5 is digital. When adapting to an image, the computer determines that there is a difference even in the color that the human eye feels the same color. For this reason, the color range in which the same color is felt in the digital image is set to a larger value, for example, about ΔE * ab20.

しかしながら、色の感覚は個人差があるため、色差の数値をユーザが任意に設定できるようにする方がより好ましい。図７は、「安定した」という配色感覚言語データに対応する配色パターンを構成する色１、色２、色３の色範囲をL*a*b*表色系において示した図である。「安定した」という配色感覚言語データを構成する濃い青（図中、符号７０参照）、それよりも薄い青（図中、符号７１参照）、一番薄い青（図中、符号７２参照）が、図のように示されている。 However, since the color sensation varies among individuals, it is more preferable to allow the user to arbitrarily set the numerical value of the color difference. FIG. 7 is a diagram showing, in the L * a * b * color system, the color ranges of color 1, color 2, and color 3 constituting the color arrangement pattern corresponding to the color arrangement sense language data “stable”. Dark blue (refer to reference numeral 70 in the figure), lighter blue (refer to reference numeral 71 in the figure), and lightest blue (refer to reference numeral 72 in the figure) that constitute the color scheme language data “stable” As shown in the figure.

そして、上記球体の中心部の色と周辺部の色では色感覚が異なるので、色値に点数差を設ける。例えば、球体の中心点の色値は１点、球体枠の色値は０点とし、その間を補完するメンバーシップ関数を作る。図８は、メンバーシップ関数を示す図である。 Since the color sensation differs between the color of the central part of the sphere and the color of the peripheral part, a point difference is provided in the color value. For example, assume that the color value of the center point of the sphere is 1 point and the color value of the sphere frame is 0 point, and a membership function that complements them is created. FIG. 8 is a diagram showing a membership function.

画像データβの中で、各色（色１、色２、色３）がどの程度含まれるか、画像データβのすべてのピクセルに対して色感覚点数を算出し、全色感覚点数を合計した値を全ピクセル数で除算して、配色に含まれる各色の色感覚点数を算出する。このように各色の色感覚点数が算出された後に、配色感覚点数データが算出される。 A value obtained by calculating the number of color sensation points for all the pixels of the image data β and calculating the total number of color sensation points for each pixel (color 1, color 2, color 3) in the image data β. Is divided by the total number of pixels to calculate the number of color sense points of each color included in the color scheme. After the color sensation score for each color is calculated in this way, color arrangement sensation score data is calculated.

尚、色感覚点数は、すべてその色であれば100点となる。すなわち、画像データβのピクセル数を、例えば３２０×２４０（＝７６８００）とした場合、全てのピクセルの色点数の合計値をｘ´とすると、色感覚点数ｘは、ｘ＝（ｘ´／７６８００）×１００として求めることが出来る。 Note that the number of color sense points is 100 for all colors. That is, when the number of pixels of the image data β is, for example, 320 × 240 (= 76800) and the total value of the number of color points of all the pixels is x ′, the color sense point number x is x = (x ′ / 76800). ) × 100.

現実的にはほとんどあり得ないが３色配色の場合の最高点は300点である。 Although practically impossible, the highest score in the case of the three color scheme is 300 points.

それらを配色数の３で割って平均値を出し、配色感覚点数データの上限を100点にするという方法も考えられるが、平均値が下がり人間の感覚からもずれるのでその方法は採用しない。 A method may be considered in which the average value is calculated by dividing them by 3 as the number of color schemes, and the upper limit of the color scheme sense point data is set to 100 points, but this method is not adopted because the average value falls and deviates from human senses.

また、配色感覚言語データに対応する配色比率が等分であるならば、例えば2色配色の場合、50点と50点ならば100点にするという計算方法もある。 Further, if the color arrangement ratio corresponding to the color arrangement sense language data is equally divided, for example, in the case of two color arrangements, there is a calculation method in which 50 points and 50 points are set to 100 points.

しかし、配色感覚言語データに対応する配色比率は非等分の方が多いので、非等分の配色比率を想定した計算方法にする必要がある。 However, since there are more non-equal color ratios corresponding to the color sense language data, it is necessary to use a calculation method that assumes the non-equal color ratio.

そのために、配色感覚言語データに対応する配色パターンを登録する際に加えた配色比率を計算に加え、各色の感覚点数は、配色比率の上限を超えないように設定する。 For this purpose, the color arrangement ratio added when registering the color arrangement pattern corresponding to the color arrangement sense language data is added to the calculation, and the number of sensory points for each color is set so as not to exceed the upper limit of the color arrangement ratio.

例えば、配色パターンＰ１の色１の比が70％の場合、色感覚点数が80点の場合でも70点とし、配色比率を各色感覚点数の上限値として設定する。それらの合計得点を、配色感覚点数データとし、最高得点は100点とする。 For example, when the ratio of color 1 of the color arrangement pattern P1 is 70%, even if the number of color sense points is 80, 70 points are set, and the color combination ratio is set as the upper limit value of each color sense point. The total score is the color scheme sensation score data, and the maximum score is 100.

すなわち、「暑苦しい」という配色感覚言語データについて、図２に示すように、「暑苦しい」に対応する配色パターンを構成する３色の配色比が、色１が６２％、色２が２９％、色３が９％となっている。画像データβについて、この「暑苦しい」という配色感覚言語データに対する配色感覚点数データを作成する場合、色１、色２、色３の色感覚点数が３０点、２０点、５０点とすると、配色比６２％、２９％、９％に基づいて設定された上限値から、各色感覚点数は３０点、２０点、９点となる。そして、これらの点を合計した５９点が、画像データβの「暑苦しい」という配色感覚言語データに対する配色感覚点数データとして算出される。 That is, for the color sense sensation language data “seriously”, as shown in FIG. 2, the color scheme ratio of the three colors constituting the color scheme corresponding to “seriously” is 62% for color 1, 29% for color 2, 3 is 9%. In the case of creating color arrangement sensation point data for the color arrangement sensation language data for the image data β, the color arrangement ratio is 30 points, 20 points, and 50 points. From the upper limit values set based on 62%, 29%, and 9%, the respective color sense points are 30, 20, and 9. Then, 59 points obtained by summing up these points are calculated as color arrangement sense point data for the color arrangement sense language data of “severe” in the image data β.

以上のようにして、所定の画像データの所定の配色感覚言語データに対する配色感覚点数データが算出される。上記と同様の手順を他の配色感覚言語データに対しても繰り返すことによって、所定の画像データに対して、複数の配色感覚言語データのそれぞれに対する配色感覚点数データが求められる。このようにして求められた所定の画像データに対する配色感覚言語データ別の配色感覚点数データが、配色感覚点数データ蓄積部１３内の配色感覚点数データベース１３１に登録される。 As described above, color arrangement sense point data for predetermined color arrangement sense language data of predetermined image data is calculated. By repeating the same procedure as described above for other color arrangement sense language data, color arrangement sense point data for each of a plurality of color arrangement sense language data is obtained for predetermined image data. The color arrangement sensation point data for each color arrangement sensation language data for the predetermined image data thus obtained is registered in the color arrangement sensation point database 131 in the color arrangement sensation point data storage unit 13.

次に、本実施の形態の画像検索装置１０による検索方法について説明するとともに、本発明の画像検索方法の一例についても同時に述べる。 Next, a search method by the image search apparatus 10 of the present embodiment will be described, and an example of the image search method of the present invention will be described at the same time.

図９は、本実施の形態の画像検索装置１０の画像検索のフローチャートを示す図である。 FIG. 9 is a diagram illustrating a flowchart of image search performed by the image search apparatus 10 according to the present embodiment.

Ｓ３０において配色感覚言語データ入力部１２から出力される信号、すなわち入力された配色感覚言語データ（たとえば、あたたかな、スタイリッシュなという配色感覚言語データ）が入力されると、画像データ抽出部１４は、Ｓ３１において、入力された配色感覚言語データに対する各画像データの配色感覚点数データを配色感覚点数データ蓄積部１３の配色感覚言語データベース１３１から取得する。このＳ３０が、本発明の配色感覚言語データ入力ステップの一例に相当する。 When the signal outputted from the color arrangement sense language data input unit 12 in S30, that is, the inputted color arrangement sense language data (for example, warm and stylish color arrangement sense language data) is inputted, the image data extraction unit 14 In S31, the color arrangement sense point data of each image data for the input color arrangement sense language data is acquired from the color arrangement sense language database 131 of the color arrangement sense point data storage unit 13. This S30 corresponds to an example of the color arrangement sense language data input step of the present invention.

そして、Ｓ３２において、画像データ抽出部１４は、取得した配色感覚点数データで、降順で画像データをソートして上位画像データＩＤを抽出する。尚、上位画像は例えば、１位〜１０位までのように適宜抽出すればよい。このＳ３２が、本発明の画像データ抽出ステップの一例に相当する。 In S 32, the image data extraction unit 14 sorts the image data in descending order by the acquired color arrangement sense score data, and extracts the upper image data ID. In addition, what is necessary is just to extract a high-order image suitably like 1st-10th place, for example. This S32 corresponds to an example of the image data extraction step of the present invention.

次に、Ｓ３３において、表示部１５は、ソートした順に抽出された画像データを、その画像データＩＤ（図６参照）に基づいて、画像データ蓄積部１１から抽出して表示する。 Next, in S33, the display unit 15 extracts and displays the image data extracted in the sorted order from the image data storage unit 11 based on the image data ID (see FIG. 6).

以上のように、配色感覚点数データの高い順に画像データを表示することで、入力した配色感覚言語データに対応した画像データを発見しやすくなり、検索性を向上させることが出来る。 As described above, by displaying the image data in descending order of the color arrangement sensation point data, it becomes easier to find the image data corresponding to the input color arrangement sensation language data, and the searchability can be improved.

尚、図５において説明したように、配色パターンを構成する各色の色感覚点数の上限値を設定しているが、この理由について以下に説明する。 As described with reference to FIG. 5, the upper limit value of the number of color sensation points for each color constituting the color arrangement pattern is set. The reason for this will be described below.

上述したように、ある画像データθについて、「暑苦しい」という配色感覚言語データに対応する配色パターンを構成する色１、色２、色３の各色感覚点数が６０点、２０点、５点とする。一方、上述したように、他の画像データδについて、「暑苦しい」という配色感覚言語データに対応する配色パターンを構成する色１、色２、色３の各色の色感覚点数が３０点、２０点、５０点とする。この場合、上限を設定せずに各色感覚点数を合計すると、画像データθが８５点、画像データδが１００点となり、画像データδの点数が高くなる。ところが、図２のデータベースの色１と色３の配色比に近い配色比を有している画像データはθである。すなわち、より「暑苦しい」という感覚に近い画像順に並ばず、逆転する可能性がある。 As described above, with respect to certain image data θ, the color sense points of color 1, color 2, and color 3 constituting the color arrangement pattern corresponding to the color arrangement sense language data of “sad” are 60 points, 20 points, and 5 points. . On the other hand, as described above, with respect to the other image data δ, the color sensation points of the colors 1, 2, and 3 constituting the color arrangement pattern corresponding to the color arrangement sensation language data of “sad” are 30 points and 20 points, respectively. 50 points. In this case, if the total number of color sense points is set without setting an upper limit, the image data θ is 85 points, the image data δ is 100 points, and the image data δ is high. However, image data having a color arrangement ratio close to the color arrangement ratio of colors 1 and 3 in the database of FIG. 2 is θ. That is, there is a possibility that the images are not arranged in the order of images closer to the feeling of “severe” but are reversed.

そこで、「暑苦しい」の配色パターンを構成する色１、色２、色３の配色比６２％、２９％、９％を上限とすることにより、画像データθの点数は８５点となり、画像データδの点数は５９点となり、画像データθの方がより上位に表示されることになる。このように、配色比を上限値とすることにより、配色感覚言語データにより合った画像データ順に表示することが出来、検索性能が向上する。 Therefore, the upper limit is set to 62%, 29%, and 9% of the color ratios of colors 1, 2, and 3 constituting the “sad” color scheme, so that the score of the image data θ is 85, and the image data δ The number of points is 59, and the image data θ is displayed higher. In this way, by setting the color arrangement ratio as the upper limit value, it is possible to display in the order of image data that matches the color arrangement sense language data, and search performance is improved.

尚、本実施の形態では、画像データ蓄積部１１内に画像データが蓄積されており、その画像データと画像データＩＤによって紐付けられた配色感覚点数データが、配色感覚点数データ蓄積部１３に蓄積されていたが、画像データ蓄積部１１が設けられておらず、配色感覚点数データ蓄積部１３に画像データが蓄積されていてもよい。 In the present embodiment, image data is stored in the image data storage unit 11, and the color arrangement sense point data associated with the image data and the image data ID is stored in the color arrangement sense point data storage unit 13. However, the image data storage unit 11 may not be provided, and the image data may be stored in the color arrangement sense point data storage unit 13.

（実施の形態２）
次に、本発明にかかる実施の形態２における画像検索装置について説明する。本実施の形態２の画像検索装置では、実施の形態１の画像検索装置と異なり、予め各画像データについて算出された配色感覚点数データがデータベースとして蓄積されておらず、配色感覚言語データが入力された際に、その配色感覚言語データについて各画像データの配色感覚点数データが算出される。 (Embodiment 2)
Next, an image search apparatus according to the second embodiment of the present invention will be described. In the image search device according to the second embodiment, unlike the image search device according to the first embodiment, the color scheme sensory point data calculated in advance for each image data is not stored as a database, and the color scheme sensor language data is input. In this case, the color arrangement sense point data of each image data is calculated for the color arrangement sense language data.

図１０は、本発明にかかる実施の形態２における画像検索装置３０の構成図である。尚、実施の形態１と同様の構成については同一の符号を付している。 FIG. 10 is a configuration diagram of the image search device 30 according to the second embodiment of the present invention. In addition, the same code | symbol is attached | subjected about the structure similar to Embodiment 1. FIG.

図１０に示すように、本実施の形態２では、実施の形態１と異なり、データベースを作成するためのデータベース作成装置２０が設けられていない。そして、実施の形態１では、データベース作成装置２０に設けられていた配色感覚言語データ蓄積部２１、画像データ解析部２４、及び配色感覚言語データ作成用入力部２５が、本実施の形態２では、画像検索装置３０に設けられている。また、配色感覚点数データ蓄積部１３が設けられていない。 As shown in FIG. 10, in the second embodiment, unlike the first embodiment, the database creation device 20 for creating a database is not provided. In the first embodiment, the color arrangement sense language data storage unit 21, the image data analysis unit 24, and the color arrangement sense language data creation input unit 25 provided in the database creation device 20 are the same as those in the second embodiment. The image search device 30 is provided. Further, the color arrangement sense point data accumulation unit 13 is not provided.

更に、実施の形態１の蓄積用配色感覚点数データ算出部２３に代わり、配色感覚点数データ算出部３１が設けられており、この配色感覚点数データ算出部３１が、配色感覚言語データ入力部１２に配色感覚言語データが入力された際に、各画像データの配色感覚点数データを算出する。尚、配色感覚言語データ蓄積部２１は、実施の形態１と同様の配色感覚言語データベース２１１を有している。 Furthermore, instead of the storage color scheme sensory point data calculation unit 23 of the first embodiment, a color scheme sensory point data calculation unit 31 is provided. This color scheme sensory point data calculation unit 31 is provided in the color scheme sensory language data input unit 12. When color sense language data is input, color sense point data of each image data is calculated. The color arrangement sense language data storage unit 21 has a color arrangement sense language database 211 similar to that of the first embodiment.

次に、本実施の形態の画像検索装置３０の検索方法について説明する。 Next, a search method of the image search device 30 according to the present embodiment will be described.

尚、配色感覚言語データ蓄積部２１の配色感覚言語データベースの作成については、実施の形態１と同様であるため説明を省略する。 Note that the creation of the color arrangement sense language database in the color arrangement sense language data storage unit 21 is the same as that in the first embodiment, and thus the description thereof is omitted.

図１１は、本実施の形態２の画像検索装置３０による検索方法のフローチャートを示す図である。 FIG. 11 is a diagram illustrating a flowchart of a search method performed by the image search device 30 according to the second embodiment.

図１１に示すように、Ｓ４０において配色感覚言語データ入力部１２から出力される信号、すなわち入力された配色感覚言語データ（たとえば、あたたかな、スタイリッシュなという配色感覚言語データ）が入力される。このＳ４０が、本発明の配色感覚言語データ入力ステップの一例に相当する。 As shown in FIG. 11, a signal output from the color arrangement sense language data input unit 12 in S40, that is, input color arrangement sense language data (for example, warm and stylish color arrangement sense language data) is input. This S40 corresponds to an example of the color arrangement sense language data input step of the present invention.

すると、Ｓ４１において、配色感覚点数データ算出部３１は、配色感覚言語データベース２１１を参照して、入力された配色感覚言語データについて、それに対応する配色パターンを構成する色１、色２、色３のＲＧＢ平均色値及びその配色比のデータを取得する。 Then, in S41, the color arrangement sensation point data calculation unit 31 refers to the color arrangement sensation language database 211, and for the input color arrangement sensation language data, the color 1, color 2, and color 3 constituting the color arrangement pattern corresponding thereto. The RGB average color value and the data of the color arrangement ratio are acquired.

次に、Ｓ４２において、画像データ蓄積部１１内の複数の画像データから１つを選択し、その画像データについて、取得した色１、色２、色３、及びその配色比のデータを用いて、入力された配色感覚言語データに対する配色感覚点数データを算出する。尚、この算出方法については、実施の形態１のＳ２１〜Ｓ２７と同様であるため省略する。このＳ４２が、本発明の配色感覚点数データ算出ステップの一例に相当する。 Next, in S42, one of the plurality of image data in the image data storage unit 11 is selected, and for the image data, the acquired color 1, color 2, color 3, and data of the color arrangement ratio thereof are used. Color arrangement sense point data for the input color arrangement sense language data is calculated. Since this calculation method is the same as S21 to S27 in the first embodiment, a description thereof will be omitted. This S42 corresponds to an example of the color arrangement sense score data calculation step of the present invention.

上記Ｓ４２の制御が、画像データ蓄積部１１内の全ての画像データについて行われる（Ｓ４３）。 The control in S42 is performed for all the image data in the image data storage unit 11 (S43).

そして、Ｓ４４において、画像データ抽出部１４は、算出された配色感覚点数データで、降順で画像データをソートして上位の画像データを抽出する。このＳ４４が、本発明の画像データ抽出ステップの一例に相当する。 In S 44, the image data extraction unit 14 sorts the image data in descending order with the calculated color arrangement sensation point data, and extracts the upper image data. This S44 corresponds to an example of the image data extraction step of the present invention.

次に、Ｓ４５において、表示部１５は、ソートした順に上位の画像データを画像データ蓄積部１１から抽出して表示する。 Next, in S45, the display unit 15 extracts and displays higher-order image data from the image data storage unit 11 in the sorted order.

以上のように、本実施の形態２では、蓄積されている画像データについて、予め配色感覚点数データが算出されておらず、検索のために配色感覚言語データが入力されてから、配色感覚点数データが算出される。 As described above, according to the second embodiment, the color arrangement sense point data is not calculated in advance for the accumulated image data, and after the color arrangement sense language data is input for search, the color arrangement sense point data is input. Is calculated.

尚、上記実施の形態１、２では、配色感覚言語データの配色パターンを構成する色を３色としているが、変更しても良い。 In the first and second embodiments, the colors constituting the color arrangement pattern of the color arrangement sense language data are three colors, but may be changed.

又、上記実施の形態１、２では、メンバーシップ関数を用いて中心と球体枠における色感覚点数に差を設けているが、設けなくても良い。但し、点数に差を設けた方が、より細かく順位付けをすることが出来る。 In the first and second embodiments, the membership function is used to provide a difference in the number of color sensation points between the center and the sphere frame. However, a more detailed ranking can be achieved by providing a difference in the number of points.

又、上記実施の形態１、２では、配色比を各色の色感覚点数の上限としているが、上限を設定しなくても良い。上限を設定しない場合、設定した場合と比べると検索の質は劣ることになるが、上限値を加える計算が減るので検索速度は向上する。 In the first and second embodiments, the color arrangement ratio is set as the upper limit of the number of color sense points for each color, but the upper limit need not be set. When the upper limit is not set, the quality of the search is inferior to that when the upper limit is set, but the search speed is improved because the calculation for adding the upper limit is reduced.

（実施の形態３）
以下に、本発明にかかる実施の形態３における画像検索装置及びデータベース作成装置について説明する。本実施の形態３の画像検索装置では、実施の形態１の画像検索装置と異なり、配色感覚言語データを用いず色調感覚言語データを用いて画像データの検索が行われる。 (Embodiment 3)
The image search device and database creation device according to the third embodiment of the present invention will be described below. In the image search apparatus according to the third embodiment, unlike the image search apparatus according to the first embodiment, the image data is searched using the color sense language data without using the color arrangement sense language data.

図１２は、本発明にかかる実施の形態３における画像検索装置４０及びそのデータベースを作成するデータベース作成装置５０の構成図である。 FIG. 12 is a configuration diagram of the image search device 40 and the database creation device 50 that creates the database according to the third embodiment of the present invention.

図１２に示すように、本実施の形態３の画像検索装置４０は、複数の画像データが蓄積された画像データ蓄積部４１と、例えば、「あかるい」、「くすんだ」等の色調に関する色調感覚言語データを入力する色調感覚言語データ入力部４２と、それぞれの画像データについて色調感覚言語データ毎に算出された色調感覚点数データが蓄積された色調感覚点数データ蓄積部４３とを備えている。又、入力された色調感覚言語データについて、その色調感覚言語データに対する各画像データの色調感覚点数データに基づいて表示する画像データを抽出する画像データ抽出部４４と、抽出された画像データを表示する表示部４５が設けられている。尚、色調感覚点数データに基づいて画像データを抽出するとは、例えば、色調感覚点数データの降順にソートをかけて、点数の高い順に上位１０以内を抽出するということである。 As shown in FIG. 12, the image search device 40 according to the third embodiment includes an image data storage unit 41 in which a plurality of image data is stored, and a color tone sensation relating to a color tone such as “red” or “dull”. A color sensation language data input unit 42 for inputting language data, and a color sensation point data storage unit 43 in which the color sensation point data calculated for each color sensation language data for each image data are stored. Further, for the input color sensation language data, an image data extraction unit 44 that extracts image data to be displayed based on the color sensation point data of each image data for the color sensation language data, and the extracted image data are displayed. A display unit 45 is provided. Note that extracting the image data based on the color sensation score data means, for example, sorting in descending order of the color sensation score data and extracting the top 10 within the highest score.

また、色調感覚点数データ蓄積部４３を作成するデータベース作成装置５０は、色調感覚言語データ蓄積部５１の色調感覚点数データベースを作成するための画像データを入力する画像データ入力部５２と、入力された画像データについて、夫々の色調感覚言語データに対する色調感覚点数データを算出する蓄積用色調感覚点数データ算出部５３とを備えている。又、データベース作成装置５０は、複数の色調感覚言語データ、及びそれぞれの色調感覚言語データに対応する色調感覚空間のデータベースが蓄積された色調感覚言語データ蓄積部５１と、色調感覚言語データ蓄積部５１内の色調感覚言語データベースを作成するために色感覚言語データを入力する色調感覚言語データ作成用入力部５５と、入力された色調感覚言語データに対する色調感覚空間を決定する色調空間決定部５４とを備えている。 Further, the database creation device 50 for creating the color sensation score data storage unit 43 is inputted with an image data input unit 52 for inputting image data for creating the color sensation score data database of the color sensation language data storage unit 51. For image data, an accumulation color sensation point data calculation unit 53 that calculates color sensation point data for each color sensation language data is provided. The database creation device 50 includes a color sensation language data storage unit 51 in which a plurality of color sensation language data and a database of color sensation space corresponding to each color sensation language data are stored, and a color sensation language data storage unit 51. A color sensation language data creation input unit 55 for inputting color sensation language data in order to create a color sensation language database, and a color tone space determination unit 54 for determining a color sensation space for the input color sensation language data I have.

次に、本実施の形態３のデータベース作成装置５０の動作について説明する。 Next, the operation of the database creation device 50 according to the third embodiment will be described.

本実施の形態３のデータベース作成装置５０は、画像検索装置４０の色調感覚点数データ蓄積部４３に蓄積されているデータベースを作成する装置であるが、その説明の前に、データベース作成装置５０内の色調感覚言語データ蓄積部５１に蓄積されているデータベースの作成方法について説明する。 The database creation device 50 according to the third embodiment is a device that creates a database stored in the color tone sensation point data storage unit 43 of the image search device 40. Before the description thereof, the database creation device 50 includes A method of creating a database stored in the color tone language data storage unit 51 will be described.

図１３は、本発明の色調パターンデータ蓄積部に色調パターンデータを蓄積するためのフローチャートである。 FIG. 13 is a flowchart for accumulating color tone pattern data in the color tone pattern data accumulating unit of the present invention.

はじめに、Ｓ５０において、色調感覚言語データ作成用入力部５５から、作成しようとする色調感覚言語データを入力する。 First, in S50, tone color data to be created is input from the color tone language data creation input unit 55.

次に、Ｓ５１において、色調空間決定部５４によってマンセル、L*C*h、ＨＳＶ、ＨＬＳ等のうちから一つの色空間が選択される。そして、Ｓ５２において、色相を無視して、明度−彩度で決定される色空間断面上から、明度値、彩度値を指定することで、中心点座標が決定される。 Next, in S51, the color space determination unit 54 selects one color space from Munsell, L * C * h, HSV, HLS, and the like. In S52, the center point coordinates are determined by designating the brightness value and the saturation value from the color space section determined by the brightness-saturation, ignoring the hue.

続いて、Ｓ５３において、明度−彩度で決定される色空間断面上で、同一の色調と認識する範囲を示す色差が決定される。このように、色相を無視して、明度―彩度で決定される色空間断面上から決定された中心点座標及び色差が図１４に示されている。ここで、円５４１が同一の色調と認識する範囲内として決定されている。すなわち、色差とは、円５４１の半径に相当することになる。 Subsequently, in S53, a color difference indicating a range recognized as the same color tone is determined on a color space section determined by lightness-saturation. As described above, the center point coordinates and the color difference determined from the color space section determined by lightness-saturation with the hue ignored are shown in FIG. Here, the circle 541 is determined to be within a range where the same color tone is recognized. That is, the color difference corresponds to the radius of the circle 541.

最後に、Ｓ５４において、色調感覚言語データと、中心座標及び色差からなる色調パターンデータが色調感覚言語データ蓄積部５１内に保存される。このようにして、色調感覚言語データ蓄積部５１内に色調感覚言語データベースが作成される。図１５は、色調感覚言語データベース５１１を示す図である。 Finally, in S54, the color sensation language data and the color pattern data including the center coordinates and the color difference are stored in the color sensation language data storage unit 51. In this way, the color sensation language database is created in the color sensation language data storage unit 51. FIG. 15 is a diagram showing the color tone sense language database 511.

次に、色調感覚言語データ蓄積部５１の色調パターンデータベースを作成する方法について実施例を用いて、より具体的に説明する。 Next, a method for creating a color tone pattern database of the color tone language data storage unit 51 will be described more specifically with reference to an embodiment.

色相を一定にした明度、彩度面によって、色調感覚空間の選択が行われる。色調とは色の調子のことでありトーンとも呼ぶ。分類の仕方はいろいろであるが、「明るい」、「暗い」、「あざやかな」、「くすんだ」などの感性語が使われることが多い。色調感覚空間の選択を行う明度、彩度面の元となる色空間としては、マンセル色立体、L*C*h、ＨＳＶ、ＨＬＳ等を用いることが出来るが、それぞれの色空間は色相、彩度、明度の色の三属性によって成り立っており、色相軸を一定にした際、明度、彩度面ができるものを前提とする。 The color sense space is selected according to the lightness and saturation plane with a constant hue. A color tone is a color tone and is also called a tone. There are various ways to classify, but sensitivity words such as “bright”, “dark”, “bright”, and “dull” are often used. Munsell color solids, L * C * h, HSV, HLS, etc. can be used as the color space from which the color sense space is selected for the lightness and saturation planes. It is assumed that it is composed of three attributes of color of brightness and brightness, and can produce brightness and saturation when the hue axis is constant.

本図では、トーンにおける明度値と彩度値をL*C*h表色系のL*（明度）、*h（彩度）で作成しているが、色調を選択する際、いずれかの色空間の明度、彩度面の中から、各色調の代表点が選択される。 In this figure, the brightness value and saturation value in the tone are created with L * C * h color system L * (brightness) and * h (saturation). A representative point of each color tone is selected from the brightness and saturation planes of the color space.

色調の代表点から、色調感覚空間を作成するために、L*a*b*表色系の色差を用いて、同色調と感じられる範囲が指定される（図１４の円５４１参照）。 In order to create a color tone sensation space from the representative points of the color tone, the range where the same color tone is felt is specified using the color difference of the L * a * b * color system (see circle 541 in FIG. 14).

そうすると、彩度、色相面で定めた色調の範囲が、各色相にも反映され、色相も含めた立体に戻すと、L*a*b*表色系、L*C*h表色系においては円筒形でリング状の色調感覚空間が出来る。図１６は、「明るい」という色調感覚言語に対する色調感覚空間を示す図である。このように、色調感覚空間は、各色立体上で表示できるようにされ、色調感覚が直感的にわかるようにされる。 Then, the hue range defined by saturation and hue will be reflected in each hue, and when returning to a solid including hue, it will be in the L * a * b * color system and L * C * h color system. Is a cylindrical ring-shaped color space. FIG. 16 is a diagram illustrating a color sensation space for a color sensation language “bright”. In this way, the color tone sensation space can be displayed on each color solid so that the color tone sensation can be intuitively understood.

作成された色調感覚空間（具体的には上記、明度値、彩度値による中心座標及び色差）に、色調感覚言語データを付与して、色調感覚言語データ蓄積部５１に格納される。 Color sense language data is assigned to the created color sense space (specifically, the central coordinates and color differences based on the lightness value and the saturation value) and stored in the color sense language data storage unit 51.

以上のように、それぞれの色調感覚言語データに対する色調感覚空間が決定されたデータベースが、色調感覚言語データ蓄積部５１内に保存されることになる。 As described above, the database in which the color sensation space for each color sensation language data is determined is stored in the color sensation language data storage unit 51.

以下に、本実施の形態３のデータベース作成装置５０によって、画像検索装置４０の色調感覚点数データ蓄積部４３に蓄積されているデータベースを作成する方法について説明する。 Hereinafter, a method for creating a database stored in the color tone sensation point data storage unit 43 of the image search device 40 by the database creation device 50 of the third embodiment will be described.

図１７は、本発明にかかる実施の形態３におけるデータベース作成装置５０がデータベースを作成するフローチャートを示す図である。 FIG. 17 is a diagram illustrating a flowchart in which the database creation device 50 according to the third embodiment of the present invention creates a database.

はじめに、Ｓ６０において、蓄積用色調感覚点数データ算出部５３によって、画像データ入力部５２から入力された画像データεのある１ピクセルの彩度と明度が取得される。次に、Ｓ６１において、色調感覚言語データ蓄積部５１から任意に色調感覚言語データＤに対応する色調空間が選択され、その色調空間の中心点座標と色差が抽出される。 First, in S60, the saturation and brightness of one pixel of the image data ε input from the image data input unit 52 is acquired by the accumulation tone sensation point data calculation unit 53. Next, in S61, a color space corresponding to the color sensation language data D is arbitrarily selected from the color sensation language data storage unit 51, and the center point coordinate and color difference of the color space are extracted.

次に、Ｓ６２において、中心点座標と、画像データεのある１ピクセルの彩度と明度の示す座標との距離を算出した結果、色差よりも小さければ該当ピクセルは色調空間に含まれていると判断され、色調空間に含まれていると判断された場合には、色調感覚点数データが算出される。 Next, in S62, if the distance between the center point coordinates and the coordinates of the saturation and brightness of one pixel in the image data ε is calculated, if the difference is smaller than the color difference, the corresponding pixel is included in the tone space. If it is determined that it is included in the color space, color tone sensation point data is calculated.

ここで、色相を一定とした場合、中心座標の色調と周辺部の色調では色調感覚が異なるので、色調感覚点数データに点数差が設けられる。例えば、図１４の円５４１の中心座標５４１ａの色調感覚点数が１点、外周５４１ｂの枠の色調感覚点数は０点とし、その間を補完するメンバーシップ関数が作られている。図１８は、メンバーシップ関数を示す図である。 Here, when the hue is constant, the color tone sensation differs between the color tone of the central coordinates and the color tone of the peripheral portion, and therefore, a point difference is provided in the color tone sensation point data. For example, the number of color sensation points in the center coordinate 541a of the circle 541 in FIG. 14 is 1, the number of color sensation points in the frame of the outer periphery 541b is 0, and a membership function is created that complements the score. FIG. 18 is a diagram showing a membership function.

続いて、画像データεのすべてのピクセルについて、同様に色調感覚点数データが算出され、最後まで算出されたら、色調感覚点数データを合計して、色調感覚言語データＤに対応する色調感覚点数データが算出される。 Subsequently, the color tone sensation point data is similarly calculated for all the pixels of the image data ε. When the color sensation point data is calculated to the end, the color tone sensation point data is summed up to obtain the color tone sensation point data corresponding to the color tone sense language data D. Calculated.

尚、この場合も、色調感覚点数データが、全てその色調であれば、１００点となる。すなわち、画像データεのピクセル数を例えば３２０×２４０（＝７６８００）とした場合、全てのピクセルの色調感覚色点数データの合計値をｓ´とすると、色調色感覚点数データｓは、ｓ＝（ｓ´／７６８００）×１００として求めることが出来る。 In this case as well, if all the color tone sensation point data are in that color tone, the score is 100 points. That is, when the number of pixels of the image data ε is, for example, 320 × 240 (= 76800) and the total value of the color tone color point data of all the pixels is s ′, the color tone color sense point data s is s = ( s ′ / 76800) × 100.

以上と同様に、色調感覚言語データ蓄積部５１から、別の色調感覚言語データの色調空間を選択して、同様の手順で、色調感覚点数データが算出される。 In the same manner as described above, a color tone space of another color tone language data is selected from the color tone language data storage unit 51, and tone color score data is calculated in the same procedure.

色調感覚言語データ蓄積部５１内の全ての色調感覚言語データに対応した色調空間に対して検証がおわれば、画像データεに対する各色調感覚言語データの色調感覚点数データが決定し、色調感覚点数データ蓄積部４３に蓄積され、色調感覚点数データベース４３１として登録される（Ｓ６６）。図１９は、色調感覚点数データベース４３１の一例を示す図である。色調感覚点数データベース４３１では、例えば、画像データεに対して「あざやか」「明るい」「くすんだ、及び「暗い」の色に対して、７５点、６０点、１０点、５点の色調感覚点数データが算出されている。ここで、色調感覚点数データベース４３１内には、画像データε自体は記憶されておらず、画像データＩＤが記憶されており、この画像データＩＤによって画像データ蓄積部に蓄積されている画像データに色調感覚点数データが紐付けられている。 When the color space corresponding to all the color sensation language data in the color sensation language data storage unit 51 is verified, the color sensation point data of each color sensation language data for the image data ε is determined, and the color sensation point number is determined. It is accumulated in the data accumulating unit 43 and registered as a color tone sensation point database 431 (S66). FIG. 19 is a diagram illustrating an example of the color tone sensation score database 431. In the color tone sensation score database 431, for example, 75, 60, 10 and 5 color sensation scores are obtained for the “blue”, “bright”, “dull” and “dark” colors for the image data ε. Data has been calculated. Here, in the color tone sensation point database 431, the image data ε itself is not stored, but the image data ID is stored, and the color tone is added to the image data stored in the image data storage unit by this image data ID. Sensory score data is linked.

次に、本実施の形態の画像検索装置４０による検索方法について説明するとともに、本発明の画像検索方法の一例についても同時に述べる。 Next, a search method by the image search device 40 of the present embodiment will be described, and an example of the image search method of the present invention will be described at the same time.

図２０は、本実施の形態の画像検索装置４０の画像検索のフローチャートを示す図である。 FIG. 20 is a diagram illustrating a flowchart of image search performed by the image search apparatus 40 according to the present embodiment.

Ｓ７０において色調感覚言語データ入力部４２から出力される信号、すなわち入力された色調感覚言語データ（たとえば、「あざやか」、「暗い」という色調感覚言語）が入力されると、画像データ抽出部４４は、Ｓ７１において、入力された色調感覚言語データに対する各画像データの色調感覚点数データを色調感覚点数データ蓄積部４３内の色調感覚点数データベース４３１から取得する。このＳ７１が、本発明の色調感覚言語データ入力ステップに相当する。 When the signal output from the color sensation language data input unit 42 in S70, that is, the input color sensation language data (for example, the color sensation language “Azayaka” or “Dark”) is input, the image data extraction unit 44 In S71, the color sensation score data of each image data for the input color sensation language data is obtained from the color sensation score data database 431 in the color sensation score data storage unit 43. This S71 corresponds to the color tone sensation language data input step of the present invention.

そして、Ｓ７２において、画像データ抽出部４４は、取得した色調感覚点数データで、降順で画像データをソートし、上位の画像データＩＤを抽出する。このＳ７２が、本発明の画像データ抽出ステップの一例に相当する。 In S72, the image data extraction unit 44 sorts the image data in descending order by the acquired tone sensation point data, and extracts the upper image data ID. This S72 corresponds to an example of the image data extraction step of the present invention.

次に、Ｓ７３において、表示部４５は、ソートした順に画像データＩＤに基づいて画像データを画像データ蓄積部４１から抽出して表示する。 Next, in S73, the display unit 45 extracts and displays the image data from the image data storage unit 41 based on the image data ID in the sorted order.

以上のように、色調感覚点数データの高い順に画像データを表示することで、入力した色調感覚言語データに対応した画像データを発見しやすくなり、検索性を向上させることが出来る。 As described above, by displaying the image data in descending order of the color tone sensation point data, it becomes easy to find the image data corresponding to the input color sensation language data, and the searchability can be improved.

尚、本実施の形態では、画像データ蓄積部４１内に画像データが蓄積されており、その画像データについての色調感覚点数データが、色調感覚点数データ蓄積部４３に蓄積されていたが、画像データ蓄積部４１が設けられておらず、色調感覚点数データ蓄積部４３に画像データが蓄積されていてもよい。 In the present embodiment, image data is stored in the image data storage unit 41, and tone sensation point data for the image data is stored in the tone sensation point data storage unit 43. The storage unit 41 may not be provided, and image data may be stored in the color tone sensation point data storage unit 43.

（実施の形態４）
次に、本発明にかかる実施の形態４における画像検索装置について説明する。本実施の形態４の画像検索装置は、実施の形態３の画像検索装置と異なり、予め各画像データについて算出された色調感覚点数データが蓄積されておらず、色調感覚言語データが入力された際に、その色調感覚言語データについて各画像データの色調感覚点数データを算出する。 (Embodiment 4)
Next, the image search apparatus in Embodiment 4 concerning this invention is demonstrated. Unlike the image search device according to the third embodiment, the image search device according to the fourth embodiment does not store the color sensation score data calculated for each image data in advance, and the color sensation language data is input. Then, the tone sensation point data of each image data is calculated for the tone sensation language data.

図２１は、本発明にかかる実施の形態４における画像検索装置６０の構成図である。尚、実施の形態３と同様の構成については同一の符号を付している。 FIG. 21 is a configuration diagram of the image search device 60 according to the fourth embodiment of the present invention. In addition, the same code | symbol is attached | subjected about the structure similar to Embodiment 3. FIG.

図２１に示すように、本実施の形態４では、実施の形態３と異なり、データベース作成装置５０が設けられていない、そして、実施の形態３では、データベース作成装置５０に設けられていた色調感覚言語データ蓄積部５１、色調空間決定部５４、及び色調感覚言語データ作成用入力部５５が、本実施の形態３では、画像検索装置６０に設けられている。また、実施の形態３の色調感覚点数データ蓄積部４３が設けられていない。更に、実施の形態３の蓄積用色調感覚点数データ算出部５３に代わり、色調感覚点数データ算出部６１が設けられており、この色調感覚点数データ算出部６１が、色調感覚言語データ入力部４２に色調感覚言語データが入力された際に、各画像データの色調感覚言語点数データを算出する。尚、色調感覚言語データ蓄積部５１は、実施の形態３と同様の色調感覚言語データベース５１１を有している。 As shown in FIG. 21, in the fourth embodiment, unlike the third embodiment, the database creation device 50 is not provided, and in the third embodiment, the color sensation provided in the database creation device 50 is provided. In the third embodiment, a language data storage unit 51, a color tone space determination unit 54, and a color tone language data creation input unit 55 are provided in the image search device 60. Further, the color tone sensation point data storage unit 43 of the third embodiment is not provided. Further, a tone sensory score data calculator 61 is provided instead of the storage tone sensory score data calculator 53 of the third embodiment, and this tone sensory score data calculator 61 is provided in the tone sensor language data input unit 42. When the color sensation language data is input, the color sensation language score data of each image data is calculated. The color tone language data storage unit 51 has a color tone language database 511 similar to that of the third embodiment.

次に、本実施の形態の画像検索装置６０の検索方法について説明する。 Next, the search method of the image search apparatus 60 of this Embodiment is demonstrated.

尚、色調感覚言語データ蓄積部５１の色調感覚言語データベースの作成については、実施の形態３と同様であるため説明を省略する。 Note that the creation of the color sensation language database in the color sensation language data storage unit 51 is the same as that in the third embodiment, and thus the description thereof is omitted.

図２２は、本実施の形態４の画像検索装置６０による検索方法のフローチャートを示す図である。 FIG. 22 is a diagram illustrating a flowchart of a search method performed by the image search device 60 according to the fourth embodiment.

画像検索を行うために、Ｓ８０において色調感覚言語データ入力部４２から出力される信号、すなわち入力された色調感覚言語データ（たとえば、あかるい、くすんだ、などという色調感覚言語）がユーザにより入力される。このＳ８０が、本発明の色調感覚言語データ入力ステップの一例に相当する。 In order to perform an image search, a signal output from the color sensation language data input unit 42 in S80, that is, input color sensation language data (for example, a color sensation language such as light and dull) is input by the user. . This S80 corresponds to an example of the color tone language data input step of the present invention.

すると、Ｓ８１において、色調感覚点数データ算出部６１は、色調感覚言語データ蓄積部５１を参照して、入力された色調感覚言語データに対する色調感覚空間に関するデータを、色調感覚言語データ蓄積部５１から抽出する。具体的には、色相を一定にした明度―彩度面上における中心座標と色差が抽出される。 Then, in S 81, the color sensation score data calculation unit 61 refers to the color sensation language data storage unit 51 and extracts data related to the color sensation space for the input color sensation language data from the color sensation language data storage unit 51. To do. Specifically, the central coordinates and color difference on the lightness-saturation surface with a constant hue are extracted.

そして、Ｓ８２において、画像データ蓄積部４１に保存されている複数の画像データのそれぞれについて、抽出された中心座標と色差から色調感覚点数データが算出される。この色感覚点数データの算出については、実施の形態３のＳ６０〜Ｓ６４と同様であり、画像データの１ピクセルの彩度と明度の示す座標と抽出された中心座標との距離を算出し、その距離が色差よりも小さい場合には、その距離に基づいてメンバーシップ関数を利用し、１ピクセル毎の色調感覚点数が求められる。求められた全てのピクセルの色調感覚点数を合計し、ピクセル数で除算し、１００点満点に換算することによって、１つの画像データに対する色調感覚点数データが算出される。このＳ８２が、本発明の色調感覚点数データ算出ステップの一例に相当する。 In step S82, tone sensation point data is calculated from the extracted center coordinates and color difference for each of the plurality of image data stored in the image data storage unit 41. The calculation of the color sensation point data is the same as S60 to S64 in the third embodiment, and the distance between the coordinates of the saturation and brightness of one pixel of the image data and the extracted center coordinate is calculated. If the distance is smaller than the color difference, a membership function is used on the basis of the distance, and the color tone sensation point for each pixel is obtained. The color tone sensation point data for one image data is calculated by summing the obtained color sensation score values of all the pixels, dividing by the number of pixels, and converting to 100 points. This S82 corresponds to an example of the color tone sensation point data calculation step of the present invention.

上記Ｓ８２の制御が、画像データ蓄積部４１内の全ての画像データについて行われる（Ｓ８３）。 The control in S82 is performed for all the image data in the image data storage unit 41 (S83).

そして、Ｓ８４において、画像データ抽出部４４は、算出された色調感覚点数データで、降順で画像データをソートし、上位の画像データを抽出する。このＳ８４が、本発明の画像データ抽出ステップの一例に相当する。 In S84, the image data extraction unit 44 sorts the image data in descending order based on the calculated tone sensation point data, and extracts the upper image data. S84 corresponds to an example of the image data extraction step of the present invention.

次に、Ｓ８５において、表示部４５は、ソートした順に抽出された画像データを画像データ蓄積部４１から抽出して表示する。 Next, in S85, the display unit 45 extracts the image data extracted in the sorted order from the image data storage unit 41 and displays it.

以上のように、本実施の形態４では、蓄積されている画像データについて、予め色調感覚点数データが算出されておらず、検索のために色調感覚言語データが入力されてから、色調感覚点数データが算出される。 As described above, in the fourth embodiment, the color sensation score data is not calculated in advance for the accumulated image data, and the color sensation language score data is input after the color sensation language data is input for search. Is calculated.

尚、上記実施の形態３、４では、メンバーシップ関数を用いて基準となる色調（中心座標）と同じ色調とみなす色調範囲において、基準となる色調からの距離に応じて色調感覚点数データに差を設けているが、設けなくても良い。但し、点差を設けた方が、より細かく順位付けを行うことが出来、より検索性能を向上させることが出来る。 In the third and fourth embodiments, in the color tone range that is regarded as the same color tone as the reference color tone (center coordinate) using the membership function, the difference in the color tone sensation point data is determined according to the distance from the reference color tone. Is provided, but may not be provided. However, if the point difference is provided, the ranking can be performed more finely and the search performance can be further improved.

尚、上記実施の形態１、２の画像検索装置では、配色感覚言語データが用いられており、上記実施の形態３、４の画像検索装置では、色調感覚言語データが用いられているが、実施の形態１と実施の形態３、又は実施の形態２と実施の形態４を組み合わせて、配色感覚言語データ及び色調感覚言語データの双方が画像検索に用いられてもよい。 Note that the color search sense language data is used in the image search devices of the first and second embodiments, and the color sense language data is used in the image search devices of the third and fourth embodiments. By combining the first and third embodiments, or the second and fourth embodiments, both the color sense sensation language data and the color sense sensation language data may be used for the image search.

このような場合、配色感覚言語データ及び色調感覚言語データのそれぞれを入力し、配色感覚点数データと色調感覚点数データの合計点数の高い順にソートを行い、所定の上位の数だけ、画像データを抽出し、表示するという制御を行うことが出来、より検索性を向上させることが出来る。 In such a case, each of the color sense sensation language data and the color sense sensation language data is input, and sorting is performed in descending order of the total number of the color sense sensation score data and the color sense sensation score data, and image data is extracted by a predetermined upper number. In addition, it is possible to perform display control and improve searchability.

図２３は、上記実施の形態２、４を組み合わせた画像検索装置を実現する際の構成図である。図２３に示す画像検索装置１００は、配色感覚言語データと色調感覚言語データの双方を用いて検索を行うことが可能な検索装置である。尚、配色感覚言語データと色調感覚言語データのいずれか一方のみを用いて検索を行っても良い。 FIG. 23 is a configuration diagram for realizing an image search apparatus that combines the second and fourth embodiments. An image search apparatus 100 shown in FIG. 23 is a search apparatus that can perform a search using both color arrangement sense language data and color sense language data. The search may be performed using only one of the color arrangement sense language data and the color tone sense language data.

画像検索装置１００は、コンピュータ１０１と、配色感覚言語データ入力装置１０２と、色調感覚言語データ入力装置１０３と、画像データ入力装置１０４と、出力装置１０５と、主記憶装置１０６と、中央演算装置１０７と、及びバス１０８とを備えている。 The image search device 100 includes a computer 101, a color sense language data input device 102, a color tone language data input device 103, an image data input device 104, an output device 105, a main storage device 106, and a central processing unit 107. And a bus 108.

主記憶装置１０６は、配色パターンデータ解析プログラム、色調パターンデータ解析プログラム、画像データ色情報解析プログラムを格納した画像検索処理プログラム格納部１０９と、配色感覚言語データ蓄積部１１０と、色調感覚言語データ蓄積部１１１と、画像データ蓄積部１１２とから構成されている。 The main storage device 106 includes an image search processing program storage unit 109 storing a color arrangement pattern data analysis program, a color pattern data analysis program, and an image data color information analysis program, a color arrangement sense language data storage unit 110, and a color sense language data storage. Part 111 and an image data storage part 112.

又、中央演算装置１０７は、配色パターンデータ解析演算部１１３と、色調パターンデータ解析演算部１１４と、画像データ蓄積演算部１１５と、画像データ色情報解析演算部１１６と、配色感覚空間出力演算部１１７と、色調感覚空間出力演算部１１８と、画像データ出力演算部１１９とから構成されている。 The central processing unit 107 includes a color arrangement pattern data analysis calculation unit 113, a color tone pattern data analysis calculation unit 114, an image data storage calculation unit 115, an image data color information analysis calculation unit 116, and a color arrangement sense space output calculation unit. 117, a color tone sensation space output calculation unit 118, and an image data output calculation unit 119.

図２４は、画像検索装置１００を用いた画像検索システム１の全体図である。 FIG. 24 is an overall view of the image search system 1 using the image search apparatus 100.

配色感覚言語データと色調感覚言語データによる画像検索システム１は、配色感覚言語データ蓄積部１１０から取得した配色感覚言語データと配色パターンデータを基に、画像データ上に設定した配色領域の配色感覚点数データを計算し、ソートすることで、配色感覚言語データによる画像データ検索が容易であり、さらに、色調感覚言語データ蓄積部１１１から取得した色調感覚言語データと色調パターンデータを基に、画像データの色調感覚点数データを計算し、ソートすることで、色調感覚言語データによる画像データ検索が容易にできる配色感覚言語データと色調感覚言語データによる画像データ検索システムである。 The image search system 1 based on the color arrangement sense language data and the color arrangement sense language data is based on the color arrangement sense language data and the color arrangement pattern data acquired from the color arrangement sense language data storage unit 110, and the number of color arrangement sense points of the color arrangement area set on the image data. By calculating and sorting the data, it is easy to search for image data based on the color sense language data, and based on the color sense language data and the color pattern data acquired from the color sense language data storage unit 111, the image data It is an image data search system using color sense sensation language data and color sense sensation language data that makes it easy to retrieve image data based on tone sensation language data by calculating and sorting color sense sensation point data.

配色感覚言語データと色調感覚言語データによる画像検索システム１は、配色感覚言語データと色調感覚言語データによる画像検索装置１００、通信ネットワーク２、第１のデータベースとして配色感覚言語データ蓄積部１１０、第２のデータベースとして色調感覚言語データ蓄積部１１１、第３のデータベースとして画像データ蓄積部１１２、ユーザ端末６（複数可能）等を含む。 The image search system 1 based on color arrangement sense language data and color sense language data includes an image search device 100 based on color arrangement sense language data and color sense language data, a communication network 2, a color arrangement sense language data storage unit 110 as a first database, and a second database. The database includes a color sensation language data storage unit 111 as a third database, an image data storage unit 112 as a third database, and a plurality of user terminals 6.

配色感覚言語データと色調感覚言語データによる画像検索システム１は、商品のモデル画像データや個人的に楽しむために撮影した画像データ、配色感覚言語データ、配色パターンデータ、色調感覚言語データ、色調パターンデータ、検索に必要な文字情報などの入出力手段を備えたコンピュータ機器である。たとえば、キーボード、マウス、USBメモリ、デジタルカメラ、スキャナー、モニター、テレビ、プリンターなどの装置に接続可能なインターフェースを持つコンピュータ機器を、配色感覚言語データと色調感覚言語データによる画像検索装置１００として使用することが可能である。 The image retrieval system 1 based on color sense language data and color sense language data includes model image data of products, image data taken for personal enjoyment, color sense language data, color pattern data, color sense language data, color pattern data The computer device includes input / output means such as character information necessary for the search. For example, a computer device having an interface connectable to devices such as a keyboard, a mouse, a USB memory, a digital camera, a scanner, a monitor, a television, and a printer is used as the image search device 100 using color sense language data and color sense language data. It is possible.

配色感覚言語データと色調感覚言語データによる画像検索装置１００は前記三つのデータベースを備えているが、別々のコンピュータに分散させてもよい。その場合、配色感覚言語データと色調感覚言語データによる画像検索装置１００は、別々のコンピュータに備えられているデータベースを連結して処理する手段を備える。 The image retrieval apparatus 100 based on the color arrangement sense language data and the color sense sense language data includes the three databases, but may be distributed to different computers. In that case, the image search device 100 based on the color sense sensation language data and the color sense sensation language data includes means for connecting and processing databases provided in separate computers.

また、図示していないが、配色感覚言語データと色調感覚言語データによる画像検索装置１００には通信ネットワークとの接続を可能にする通信制御装置が含まれている。 Although not shown, the image search device 100 based on the color sense language data and the color tone language data includes a communication control device that enables connection to a communication network.

配色感覚言語データ蓄積部１１０は、配色感覚言語データの一覧を構成する色情報を蓄積する。たとえば、感性語名称と、感性語名称に対応した配色パターンを構成する色値、配色パターンを構成する各々の色が配色パターンに占める割合、などの情報を含む。 The color arrangement sense language data storage unit 110 stores color information constituting a list of color arrangement sense language data. For example, it includes information such as a sensitivity word name, a color value constituting a color arrangement pattern corresponding to the sensitivity word name, and a ratio of each color constituting the color arrangement pattern to the color arrangement pattern.

色調感覚言語データ蓄積部１１１は、色調感覚言語の一覧を構成する色情報を蓄積する。たとえば、感性語名称と、感性語名称に対応した明度値、彩度値、色差、などの情報を含む。 The color sensation language data storage unit 111 accumulates color information constituting a list of color sensation languages. For example, it includes information such as a sensitivity word name and a brightness value, a saturation value, and a color difference corresponding to the sensitivity word name.

また、配色感覚言語データと色調感覚言語データによる画像検索装置１００の配色感覚空間出力演算部１１７及び色調感覚空間出力演算部１１８を用いて画像データの配色領域の配色パターンや色調を検索して色立体に表示してもよく、そのための膨大な画像データが画像データ蓄積部１１２に蓄積されていてもよい。 In addition, the color arrangement sense space output calculation unit 117 and the color tone sense space output calculation unit 118 of the image search device 100 based on the color arrangement sense language data and the color tone sense language data are used to search for the color arrangement pattern and color tone of the color arrangement region of the image data, and the color. The image may be displayed in three dimensions, and a large amount of image data for that may be stored in the image data storage unit 112.

通信ネットワーク２は、配色感覚言語データと色調感覚言語データによる画像検索装置１００、配色感覚言語データ蓄積部１１０、色調感覚言語データ蓄積部１１１、画像データ蓄積部１１２を相互に接続可能なコンピュータネットワークである。通信ネットワーク２はローカルエリアネットワークでもよく、インターネット等広域ネットワークでもよい。 The communication network 2 is a computer network in which the image search device 100 based on color sense language data and color sense language data, the color sense language data storage unit 110, the color sense language data storage unit 111, and the image data storage unit 112 can be connected to each other. is there. The communication network 2 may be a local area network or a wide area network such as the Internet.

ユーザ端末６はたとえば、通信ネットワーク２に接続可能なネットワークインターフェースを備えた末端装置である。任意であり、一つでも複数でも構わない。ユーザ端末６は、通信ネットワーク２を介して配色感覚言語データと色調感覚言語データによる画像検索装置１００の備える第１から第３のデータベースにアクセスして、配色感覚言語データと色調感覚言語データによる画像検索装置１００が備える画像データの配色領域を検索して、配色幾何学を色立体に表示した結果や、画像データの色調を検索して、色調感覚空間に表示した結果を取得して閲覧することが可能である。すなわち、ユーザは、検索のための配色感覚言語データや色調感覚言語データを入力する際、ユーザ端末６を通じて、配色感覚言語データ入力装置１０２、及び色調感覚言語データ入力装置１０３が操作することになる。尚、図２４に示す画像検索装置１００では、配色感覚言語データ蓄積部１１０、色調感覚言語データ蓄積部１１１、及び画像データ蓄積部１１２以外の構成については省略している。 The user terminal 6 is, for example, a terminal device provided with a network interface that can be connected to the communication network 2. It is optional and may be one or more. The user terminal 6 accesses the first to third databases of the image search device 100 based on the color sense sensation language data and the color sense sensation language data via the communication network 2, and images based on the color sense sensation language data and the color sense sensation language data. Searching the color arrangement area of the image data included in the search device 100, obtaining the result of displaying the color arrangement geometry in a color solid, or searching the color tone of the image data, and displaying the result displayed in the color tone sensation space. Is possible. That is, the user operates the color sense sensation language data input device 102 and the color sense sensation language data input device 103 through the user terminal 6 when inputting the color sense sensation language data and the color sense sensation language data for search. . In the image search device 100 shown in FIG. 24, the configuration other than the color arrangement sense language data storage unit 110, the color tone sense language data storage unit 111, and the image data storage unit 112 is omitted.

尚、図２３の配色感覚言語データ入力装置１０２は、上記配色感覚言語データ入力部１２及び配色感覚言語データ作成用入力部２５の双方を兼ねている。色調感覚言語データ入力装置１０３は、上記色調感覚言語データ入力部４２及び色調感覚言語データ作成用入力部５５の双方を兼ねている。画像データ入力装置１０４は、上記画像データ入力部２２、５２の双方を兼ねている。出力装置５は、上記表示部１５、４５の双方を兼ねている。配色感覚言語データ蓄積部１１０は、上記配色感覚言語データ蓄積部２１に相当する。色調感覚言語データ蓄積部１１１は、上記色調感覚言語データ蓄積部５１に相当する。画像データ蓄積部１１２は、上記画像データ蓄積部１１、４１に相当する。配色パターンデータ解析演算部１１３は、上記画像データ解析部２４の一部に相当する。色調パターンデータ解析演算部１１４は、上記色調空間決定部５４の一部に相当する。画像データ色情報解析演算部１１６は、上記配色感覚点数データ算出部３１と色調感覚点数データ算出部６１の双方を兼ねている。配色感覚空間出力演算部１１７は、図７に示すような配色感覚空間を出力するための演算部である。色調感覚空間出力演算部１１８は、図１６に示すような色調感覚空間を出力するための演算部である。画像データ出力演算部１１９は、上記画像データ抽出部１４、４４の双方を兼ねている。 Note that the color arrangement sense language data input device 102 of FIG. 23 also serves as both the color arrangement sense language data input unit 12 and the color arrangement sense language data creation input unit 25. The color sensation language data input device 103 serves as both the color sensation language data input unit 42 and the color sensation language data creation input unit 55. The image data input device 104 also serves as both the image data input units 22 and 52. The output device 5 serves as both the display units 15 and 45. The color arrangement sense language data storage unit 110 corresponds to the color arrangement sense language data storage unit 21. The color sensation language data storage unit 111 corresponds to the color sensation language data storage unit 51. The image data storage unit 112 corresponds to the image data storage units 11 and 41. The color arrangement pattern data analysis calculation unit 113 corresponds to a part of the image data analysis unit 24. The tone pattern data analysis calculation unit 114 corresponds to a part of the tone space determination unit 54. The image data color information analysis calculation unit 116 serves as both the color arrangement sensation point data calculation unit 31 and the color tone sensation point data calculation unit 61. The color arrangement sense space output calculation unit 117 is a calculation unit for outputting a color arrangement sense space as shown in FIG. The color tone sensation space output calculation unit 118 is a calculation unit for outputting a color tone sensation space as shown in FIG. The image data output calculation unit 119 also serves as both the image data extraction units 14 and 44.

以上のように、本発明によれば、デジタルカメラやデジタル画像処理ソフトの普及により、個人もしくは企業のコンピュータハードディスクやインターネット上のハードディスクに大量に蓄積されている写真やデザイン画像を、画像の配色特徴からの配色感覚言語データの自動付与と配色感覚点数データをつけ、あるいは、色調の特徴からの色調感覚言語データの自動付与と色調感覚点数データをつけて、感性語による画像検索を行うことが出来る。 As described above, according to the present invention, with the widespread use of digital cameras and digital image processing software, photographs and design images stored in large quantities on personal or corporate computer hard disks or hard disks on the Internet can be used. You can search for sensitivity words by automatically assigning color sense sensation language data and attaching color sense sensation point data, or by automatically assigning color sense sensation language data from tone characteristics and tone sense point data. .

又、本発明によれば、個人や企業が保有する大量のデジタル画像に自動的に配色感覚に適応した感性語等の配色感覚言語データや、色調に対応した感性語等の色調感覚言語データを付与し、画像検索することで、一つ一つ探す手間を大幅に削減することが可能になる。 In addition, according to the present invention, color sense sensation language data such as sensitivity words that are automatically adapted to the color arrangement sensation, and color sense sensation language data such as sensitivity words corresponding to the color tone are automatically obtained for a large number of digital images held by individuals and companies. By assigning and searching for images, it is possible to greatly reduce the labor of searching one by one.

例えば、商業目的で使われる場合、ストックフォトやデザイン素材を販売する企業では、大量にデジタル画像を蓄積しているが、それらをデザイナーや広告代理店が探すとき、被写体やシーンなどが明確な場合もあるが、感覚的な言葉にしかならない漠然としたイメージのときも多い。その場合、感性語で検索することができれば、非常に効果的である。 For example, when used for commercial purposes, companies that sell stock photos and design materials accumulate large amounts of digital images, but when the designer or advertising agency searches for them, the subject or scene is clear. However, there are many vague images that only become sensual words. In that case, if it is possible to search with a sensitivity word, it is very effective.

更に、本発明では配色パターンに対応した配色感覚言語データや、色立体に対応した色調感覚言語データを簡単に作ることができるため、例えば、地域別に複数の人数で作成してもらうことにより、デザイン画像を配色感覚言語データや、色調感覚言語データで検索することで感性的な傾向が把握できるようになる。 Furthermore, in the present invention, color sense sensation language data corresponding to a color arrangement pattern and color sense sensation language data corresponding to a color solid can be easily created. By searching the image with color arrangement sense language data or color sense sense language data, it becomes possible to grasp the sensibility tendency.

また、個人の収集したデジタル画像でも、時間、場所とも不明確であるとともに、写真にタイトルやキーワードを付与していない場合がほとんどである。そのような場合も、感性語を手がかりに検索することで目的の画像を発見することが可能になる。 Even in digital images collected by individuals, the time and place are unclear, and in most cases, no title or keyword is assigned to the photo. Even in such a case, it is possible to find a target image by searching for a sensitivity word.

尚、本発明のプログラムは、上述した本発明の画像検索方法の少なくとも、各ステップの動作をコンピュータにより実行させるプログラムであって、コンピュータと協働して動作するプログラムである。 The program of the present invention is a program that causes a computer to execute at least the operation of each step of the above-described image search method of the present invention, and is a program that operates in cooperation with the computer.

又、本発明の記録媒体は、上述した本発明の画像検索方法の各ステップの全部又は一部の動作をコンピュータにより実行させるプログラムを記録した記録媒体であり、コンピュータにより読み取り可能且つ、読み取られた前記プログラムが前記コンピュータと協動して前記動作を実行する記録媒体である。 The recording medium of the present invention is a recording medium that records a program that causes a computer to execute all or part of the operations of the above-described image search method of the present invention, and is readable and read by the computer. The program is a recording medium for executing the operation in cooperation with the computer.

又、本発明の上記「各ステップの動作」とは、前記ステップの全部又は一部の動作を意味する。 Further, the “operation of each step” of the present invention means the operation of all or a part of the steps.

又、本発明のプログラムの一利用形態は、コンピュータにより読み取り可能な、ＲＯＭ等の記録媒体に記録され、コンピュータと協働して動作する態様であっても良い。 Further, one use form of the program of the present invention may be an aspect in which the program is recorded on a recording medium such as a ROM readable by a computer and operates in cooperation with the computer.

又、本発明のプログラムの一利用形態は、インターネット等の伝送媒体、光・電波・音波等の伝送媒体中を伝送し、コンピュータにより読みとられ、コンピュータと協働して動作する態様であっても良い。 Also, one use form of the program of the present invention is an aspect in which the program is transmitted through a transmission medium such as the Internet, a transmission medium such as light, radio wave, and sound wave, read by a computer, and operates in cooperation with the computer. Also good.

又、上述した本発明のコンピュータは、ＣＰＵ等の純然たるハードウェアに限らず、ファームウェアや、ＯＳ、更に周辺機器を含むものであっても良い。 The computer of the present invention described above is not limited to pure hardware such as a CPU, but may include firmware, an OS, and peripheral devices.

尚、以上説明した様に、本発明の構成は、ソフトウェア的に実現しても良いし、ハードウェア的に実現しても良い。 As described above, the configuration of the present invention may be realized by software or hardware.

本発明の画像検索装置は、より広い範囲の画像データに適用可能な効果を有し、又、色調を用いた画像検索を行うことが可能な効果を有し、個人もしくは企業のコンピュータハードディスクやインターネット上のハードディスクに大量に蓄積されている写真やデザイン画像等の検索装置として有用である。 The image search apparatus of the present invention has an effect that can be applied to a wider range of image data, and has an effect that image search using color tone can be performed. It is useful as a search device for photos and design images stored in large quantities on the above hard disk.

１画像検索システム
２通信ネットワーク
６ユーザ端末
１０、３０、４０、６０、１００画像検索装置
１１、４１画像データ蓄積部
１２配色感覚言語データ入力部
１３配色感覚点数データ蓄積部
１４画像データ抽出部
１５表示部
２０、５０データベース作成装置
２１配色感覚言語データ蓄積部
２２画像データ入力部
２３蓄積用配色感覚点数データ算出部
２４画像データ解析部
２５配色感覚言語データ作成用入力部
３１配色感覚点数データ算出部
４２色調感覚言語入力部
４３色調感覚点数データ蓄積部
４４画像データ抽出部
４５表示部
５４色調空間決定部
５５色調感覚言語データ作成用入力部
６１色調感覚点数算出部
１０１コンピュータ
１０２配色感覚言語データ入力装置
１０３色調感覚言語データ入力装置
１０４画像データ入力装置
１０５出力装置
１０６主記憶装置
１０７中央演算装置
１０８バス
１０９画像検索処理プログラム格納部
１１０配色感覚言語データ蓄積部
１１１色調感覚言語データ蓄積部
１１２画像データ蓄積部
１１３配色パターンデータ解析演算部
１１４色調パターンデータ解析演算部
１１５画像データ蓄積演算部
１１６画像データ色情報解析演算部
１１７配色感覚空間出力演算部
１１８色調感覚空間出力演算部
１１９画像データ出力演算部 DESCRIPTION OF SYMBOLS 1 Image search system 2 Communication network 6 User terminal 10, 30, 40, 60, 100 Image search apparatus 11, 41 Image data storage part 12 Color arrangement sense language data input part 13 Color arrangement sense point data storage part 14 Image data extraction part 15 Display Unit 20, 50 Database creation device 21 Color scheme sensory language data storage unit 22 Image data input unit 23 Storage color scheme sensory point data calculation unit 24 Image data analysis unit 25 Color scheme sensory language data creation input unit 31 Color scheme sensory point data calculation unit 42 Tone sense language input unit 43 Tone sense point data storage unit 44 Image data extraction unit 45 Display unit 54 Tone space determination unit 55 Tone sense language data creation input unit 61 Tone sense point number calculation unit 101 Computer 102 Color arrangement sense language data input device 103 Color sense language data input device DESCRIPTION OF SYMBOLS 104 Image data input device 105 Output device 106 Main memory device 107 Central processing unit 108 Bus 109 Image search process program storage part 110 Color arrangement sense language data storage part 111 Color tone sense language data storage part 112 Image data storage part 113 Color arrangement pattern data analysis calculation 114 color tone pattern data analysis calculation unit 115 image data storage calculation unit 116 image data color information analysis calculation unit 117 color arrangement sense space output calculation unit 118 color tone sense space output calculation unit 119 image data output calculation unit

Claims

An image data storage unit for storing a plurality of image data;
For each of the image data, a plurality of sensory color sense language data related to the color scheme is calculated based on the color scheme pattern data corresponding to each color scheme sense language data and linked to the image data. A color scheme sensory point data storage unit for storing color scheme sensory point data;
A color arrangement sense language data input unit for inputting the color arrangement sense language data;
When the color arrangement sense language data is input, the image data stored in the image data storage unit is extracted based on the color arrangement sense point data associated with the image data corresponding to the color arrangement sense language data. An image search apparatus comprising: an image data extraction unit that performs the operation.

A database creation device for creating a database of the color arrangement sensation point data storage unit of the image search device according to claim 1,
A color arrangement sense language data storage unit for storing a plurality of color arrangement sense language data and color arrangement pattern data corresponding to each of the color arrangement sense language data;
An image data input unit for inputting image data;
A database comprising the storage color scheme sensory point data calculation unit for calculating the color scheme sensory point data based on the color scheme pattern data for each color scheme language data for the input image data Creation device.

An image data storage unit for storing a plurality of image data;
A plurality of sensory color scheme language data related to color scheme and a color scheme language data storage unit that stores color scheme pattern data corresponding to each color scheme language data;
A color arrangement sense language data input unit for inputting the color arrangement sense language data;
When the color arrangement sense language data is input, based on the color arrangement pattern data of the color arrangement sense language data, a color arrangement sense point data calculation unit that calculates color arrangement sense point data of each of the image data;
An image search apparatus comprising: an image data extraction unit that extracts the image data stored in the image data storage unit based on the color arrangement sense score data of each of the image data.

The image search device according to claim 1 or 3, wherein the color arrangement pattern data is data of a plurality of colors constituting a color arrangement corresponding to the color arrangement sense language data and a color arrangement ratio of the plurality of colors.

The color scheme sensation point data is
For a plurality of colors constituting the color scheme corresponding to the color scheme sense language data, the ratio of the colors forming the image data within the color range regarded as the same color as each color on the basis of each color is a score The image search apparatus according to claim 1, wherein the image search apparatus is calculated by being converted into an image.

The color range is
In the L * a * b * color system or L * C * h color system where the distance between two colors is proportional to the perceptual color difference,
L * a * that expresses the range considered as the same color as each of the multiple colors constituting the color scheme pattern data corresponding to the color scheme sense language data set using the color difference of the L * a * b * color system. 6. The image search device according to claim 5, wherein the image search device is in a spherical space reflected in a b * color system or an L * C * h color system.

The color scheme sensation point data is
For each pixel of the image data, it is determined whether or not the color included in the pixel is included in the color range, and if included, the score is added to configure the color scheme The image search device according to claim 5, wherein the score of each of the plurality of colors is calculated, and the calculated scores are totaled to be obtained.

The color scheme sensation point data is
The image search device according to claim 7, wherein the upper limit of the score of each color is determined so as to be a color arrangement ratio of the corresponding color arrangement sense language data.

The color scheme sensation point data is
Even if the color included in one pixel of the image data is included in the color range, the larger the color difference from the reference color is, the smaller the number of points to be added is calculated. Item 8. The image search device according to Item 7.

The image search according to claim 4, wherein the plurality of colors are average colors calculated based on RGB values for each of a plurality of color arrangement regions set for image data corresponding to the color arrangement pattern data. apparatus.

An image data storage unit for storing a plurality of image data;
For each of the image data, a plurality of sensory tone sensation language data related to the tone is calculated based on the tone pattern data corresponding to each of the tone sensation language data and associated with the image data. A color tone sensation point data storage unit for storing color tone sensation point data;
A color sensation language data input unit for inputting the color sensation language data;
When the color sensation language data is input, the image data stored in the image data storage unit is extracted based on the color sensation score data associated with the image data corresponding to the color sensation language data. An image search apparatus comprising: an image data extraction unit that performs the operation.

A database creation device for creating a database of the color tone sensation point data storage unit of the image search device according to claim 11,
A plurality of tone sensation language data, and a tone sensation language data storage unit that accumulates tone pattern data corresponding to each of the tone sensation language data;
An image data input unit for inputting image data;
A database comprising: the stored color tone sensation point data calculation unit for calculating the color tone sensation point data based on the color tone pattern data for each of the color tone sense language data for the input image data Creation device.

An image data storage unit for storing a plurality of image data;
A plurality of sensory color sensation language data related to color tone, and a color sensation language data storage unit that accumulates color pattern data corresponding to each of the color sensation language data;
A color sensation language data input unit for inputting the color sensation language data;
When the color sensation language data is input, based on the color pattern data of the color sensation language data, a color sensation point data calculation unit that calculates the color sensation point data of each of the image data;
An image search device comprising: an image data extraction unit that extracts the image data stored in the image data storage unit based on the color tone sensation point data of each of the image data.

The image search device according to claim 11 or 13, wherein the color pattern data is data of a color range corresponding to the color tone corresponding to the color tone sense language data and a color tone range regarded as the same color tone based on the color tone.

The color tone score data is
The image search device according to claim 14, wherein the ratio of the color tone forming the image data included in the color tone range corresponding to the color tone sense language data is calculated by scoring.

The color tone score data is
16. For each pixel of the image data, it is determined whether or not a color tone included in the pixel is included in the color tone range, and if included, a score is added and calculated. Image search device.

The color tone score data is
Even when the color tone included in one pixel of the image data is included in the color tone range, the larger the difference from the reference color tone, the smaller the number of points to be added. The image search device according to claim 16.

The color tone is lightness and saturation,
The tone range is
In a color space that is formed by three attributes of hue, brightness, and saturation color, and where the hue and saturation planes are formed when the hue is constant,
The range considered as the same color tone as the color tone corresponding to the color sense language data set using the color difference of the L * a * b * color system in the plane of any one of the lightness and the saturation is the hue. The image search device according to claim 14, wherein the image search device is in a ring-shaped space reflected in a solid including

The image search device according to claim 18, wherein the color space is a space selected from any one of Munsell, L * C * h, HSV, and HLS.

An image data storage unit for storing a plurality of image data;
For each of the image data, a plurality of sensory color sense language data related to the color scheme is calculated based on the color scheme pattern data corresponding to each color scheme sense language data and linked to the image data. An image search method using an image search device, comprising a color arrangement sense point data storage unit for storing color arrangement sense point data,
A color sense language data input step for inputting the color sense language data;
When the color arrangement sense language data is input, the image data stored in the image data storage unit is extracted based on the color arrangement sense point data associated with the image data corresponding to the color arrangement sense language data. And an image data extraction step.

An image data storage unit for storing a plurality of image data;
Using an image search device comprising a plurality of color arrangement sense language data related to color arrangement and a color arrangement sense language data storage unit for storing color arrangement pattern data corresponding to each color arrangement sense language data An image search method,
A color sense language data input step for inputting the color sense language data;
When the color arrangement sensation language data is input, the color arrangement sensation language data is calculated based on the color arrangement pattern data corresponding to the color arrangement sensation language data.
An image search method comprising: an image data extraction step of extracting the image data stored in the image data storage unit based on the color arrangement sense score data of each of the image data.

An image data storage unit for storing a plurality of image data;
For each of the image data, a plurality of sensory tone sensation language data related to the tone is calculated based on the tone pattern data corresponding to each of the tone sensation language data and associated with the image data. An image search method using an image search device including a color tone sensation point data storage unit for storing color tone sensation point data,
A color tone language data input step for inputting the color tone language data;
When the color sensation language data is input, the image data stored in the image data storage unit is extracted based on the color sensation score data associated with the image data corresponding to the color sensation language data. And an image data extraction step.

An image data storage unit for storing a plurality of image data;
Using an image search apparatus comprising a plurality of sensory tone sensation language data related to a tone and a tone sense language data storage unit for storing tone pattern data corresponding to each of the tone sense language data An image search method,
A color tone language data input step for inputting the color tone language data;
When the color sensation language data is input, based on the color pattern data of the color sensation language data, a color sensation point data calculation step for calculating color sensation point data of each of the image data;
An image search method comprising: an image data extraction step of extracting the image data stored in the image data storage unit based on the color tone sensation point data of each of the image data.

24. A program for causing a computer to execute the steps of the image search method according to claim 20.

A recording medium on which the program according to claim 24 is recorded, the recording medium being processable by a computer.