JP2002132825A - 画像検索システム、画像検索方法、画像検索プログラム、画像検索プログラムを記録したコンピュータ読み取り可能な記憶媒体、および画像検索装置 - Google Patents

画像検索システム、画像検索方法、画像検索プログラム、画像検索プログラムを記録したコンピュータ読み取り可能な記憶媒体、および画像検索装置

Info

Publication number
JP2002132825A
JP2002132825A JP2000327972A JP2000327972A JP2002132825A JP 2002132825 A JP2002132825 A JP 2002132825A JP 2000327972 A JP2000327972 A JP 2000327972A JP 2000327972 A JP2000327972 A JP 2000327972A JP 2002132825 A JP2002132825 A JP 2002132825A
Authority
JP
Japan
Prior art keywords
image
search
client device
image data
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000327972A
Other languages
English (en)
Inventor
Hitoshi Okamoto
仁 岡本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2000327972A priority Critical patent/JP2002132825A/ja
Publication of JP2002132825A publication Critical patent/JP2002132825A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】 【課題】 広域ネットワークを介した画像データの検索
を、迅速かつ的確に行い得るようにする。 【解決手段】 画像データを記憶蓄積するサーバ装置3
0と、その画像データを可視画像化して表示するクライ
アント装置20とが、広域ネットワークを介して互いに
接続されてなるネットワークシステムにおいて、クライ
アント装置20側での画像入力があると、その画像入力
によって入力された画像に類似する画像についての画像
データをサーバ装置30内から検索してクライアント装
置20に表示させるようにする。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、記憶蓄積された画
像データ群の中から所望する画像データを検索して出力
する画像検索システム、画像検索方法、画像検索プログ
ラム、画像検索プログラムを記録したコンピュータ読み
取り可能な記憶媒体、および画像検索装置に関する。
【0002】
【従来の技術】従来、ネットワーク技術の進展に伴い、
例えばWWW(World Wide Web)サーバがインターネッ
ト上に発信する画像データをパーソナルコンピュータ
(以下「PC」と略称する)等のクライアント装置で表
示出力する、といったことが広く行われている。特に、
近年では、いわゆるインターネットショッピング等の普
及によって、WWWサーバがインターネット上に発信す
るカタログ情報(商品の画像データ等)をクライアント
装置で表示出力し、そのクライアント装置のユーザが表
示画像を見て商品購入を検討する、といったことが広ま
りつつある。
【0003】ところで、WWWサーバがカタログ情報を
発信する場合、そのカタログ情報は、複数の商品につい
ての画像データを含むことが一般的である。すなわち、
WWWサーバは、複数の商品自体のデータとともに当該
商品についての画像データを記憶蓄積している。このこ
とから、通常、クライアント装置は、ユーザの操作に従
いながら、これらの画像データを逐次WWWサーバから
ダウンロードし、各商品の画像データを順次表示出力す
ることで、ユーザが商品購入を検討する際の資料とす
る。
【0004】
【発明が解決しようとする課題】しかしながら、クライ
アント装置のユーザは、必ずしもWWWサーバが記憶蓄
積している画像データの全ての表示出力を希望している
とは限らず、所望する商品の画像データのみの表示出力
を希望することのほうが多い。したがって、上述したよ
うに各商品の画像データを順次表示出力していたので
は、所望する商品の画像データをクライアント装置が表
示するまでに多くの時間を要する可能性がある。さらに
は、所望する商品の画像データがカタログ情報に含まれ
ているか否かをユーザが迅速に判断することもできな
い。つまり、各商品の画像データを順次表示出力してい
たのでは、ユーザにとっての利便性の点で非常に難があ
る。
【0005】この難点に対しては、例えば周知のデータ
検索技術を利用すること、すなわち商品の属性やキーワ
ード(例えば商品名)等を基にしたデータ検索処理を行
って所望する商品の画像データのみの表示出力すること
も考えられる。ところが、かかるデータ検索処理では、
ユーザの指定した属性やキーワード等と一致するものが
なければ、候補(表示出力する画像データ)が現れない
おそれがある。また、属性やキーワード等を基にするた
め、商品同士の形状の相違等については全く対応するこ
とができず、ユーザにとって有効な検索結果が得られな
い可能性がある。
【0006】そこで、本発明は、クライアント装置にて
表示出力される画像が複数の図形要素(商品を構成する
部品)の組み合わせからなることに着目し、図形要素の
組み合わせ、変形、編集等によって要求仕様に相当する
画像データを作成し、その画像データを検索キーとして
類似画像検索を行うことで、クライアント装置のユーザ
が所望する画像データを迅速かつ的確に検索して出力す
ることのできる画像検索システム、画像検索方法、画像
検索プログラム、および画像検索プログラムを記録した
コンピュータ読み取り可能な記憶媒体を提供することを
目的とする。
【0007】また、本発明は、画像データを検索キーと
した類似画像検索を行うのにあたって、その検索キーと
なる画像データの特定を容易に行うことのできる画像検
索装置を提供することを目的とする。
【0008】
【課題を解決するための手段】本発明の画像検索システ
ムは、上記目的を達成するために案出されたものであ
る。すなわち、画像データを記憶蓄積するサーバ装置
と、前記画像データを可視画像化して表示するクライア
ント装置とが、広域ネットワークを介して互いに接続さ
れてなる画像検索システムであって、前記クライアント
装置側で画像入力を行うための画像入力手段と、前記画
像入力手段による入力画像に類似する画像についての画
像データを前記サーバ装置内から検索して前記クライア
ント装置に表示させる画像検索手段とを備えることを特
徴とするものである。
【0009】また、本発明の画像検索方法は、画像デー
タを記憶蓄積するサーバ装置と、前記画像データを可視
画像化して表示するクライアント装置とが、広域ネット
ワークを介して互いに接続されてなるネットワークシス
テムで用いられる画像検索方法であって、前記クライア
ント装置側での画像入力があると、その画像入力によっ
て入力された画像に類似する画像についての画像データ
を前記サーバ装置内から検索して前記クライアント装置
に表示させることを特徴とする。
【0010】また、本発明の画像検索プログラムは、画
像データを記憶蓄積するサーバ装置と、前記画像データ
を可視画像化して表示するクライアント装置とが、広域
ネットワークを介して互いに接続されてなるネットワー
クシステムのうちの、少なくともいずれか一つのサーバ
装置またはクライアント装置にて実行される画像検索プ
ログラムであって、前記クライアント装置側での画像入
力があると、その画像入力によって入力された画像に類
似する画像についての画像データを前記サーバ装置内か
ら検索して前記クライアント装置に表示させることを特
徴とする。
【0011】また、本発明の画像検索プログラムを記録
したコンピュータ読み取り可能な記憶媒体は、画像デー
タを記憶蓄積するサーバ装置と、前記画像データを可視
画像化して表示するクライアント装置とが、広域ネット
ワークを介して互いに接続されてなるネットワークシス
テムのうちの、少なくともいずれか1つのサーバ装置ま
たはクライアント装置にて実行される画像検索プログラ
ムを記録したコンピュータ読み取り可能な記憶媒体であ
って、前記クライアント装置側での画像入力があると、
その画像入力によって入力された画像に類似する画像に
ついての画像データを前記サーバ装置内から検索して前
記クライアント装置に表示させることを特徴とする。
【0012】上記構成の画像検索システム、上記手順の
画像検索方法、上記手順を実行する画像検索プログラ
ム、および画像検索プログラムを記録したコンピュータ
読み取り可能な記憶媒体は、いずれも、サーバ装置とク
ライアント装置とが広域ネットワークを介して接続され
たネットワークシステムに適用される。ここで、広域ネ
ットワークとは、例えばインターネットに代表されるも
のをいう。そして、このようなネットワークシステムに
おいて、クライアント装置側で画像入力があると、その
画像入力によって特定される画像データを検索キーとし
て、サーバ装置が記憶蓄積している画像データに対する
類似画像検索を行う。したがって、クライアント装置側
では、画像入力によって検索キーを特定できるので、サ
ーバ装置が複数の画像データを記憶蓄積していても、例
えばクライアント装置のユーザが所望する形状(図形要
素)を含む画像についての画像データや、その画像に形
状が類似する画像についての画像データのみを、サーバ
装置から迅速かつ的確に取り出して表示し得るようにな
る。
【0013】また、本発明の画像検索装置は、画像デー
タを記憶蓄積する画像蓄積手段と、前記画像蓄積手段に
記憶蓄積される画像データによって特定される画像を構
成する図形要素に関する情報を記憶する図形記憶手段
と、前記図形記憶手段に記憶されている図形要素に関す
る情報を用いて入力画像を特定する画像編集手段と、前
記画像編集手段に特定された入力画像に類似する画像に
ついての画像データを前記画像蓄積手段に記憶蓄積され
た中から検索する画像検索手段と、前記画像検索手段で
の検索結果である画像データを出力する画像出力手段と
を備えることを特徴とするものである。
【0014】上記構成の画像検索装置によれば、図形記
憶手段に記憶されている図形要素に関する情報を用いて
画像編集手段が入力画像を特定する。そのため、入力画
像の特定に当たって、例えば図形記憶手段に記憶されて
いる図形要素を組み合わせたり、その変形や編集等を行
ったりすることが可能となり、入力画像特定の容易化が
図れる。そして、画像編集手段が入力画像を特定する
と、特定された入力画像に類似する画像についての画像
データを画像検索手段が画像蓄積手段に記憶蓄積された
中から検索するとともに、その検索結果である画像デー
タを画像出力手段が例えば可視画像化して出力する。し
たがって、画像蓄積手段が複数の画像データを記憶蓄積
していても、画像出力手段では、画像編集手段によって
用いられた図形要素を含む画像についての画像データ
や、その画像に形状が類似する画像についての画像デー
タのみを、迅速かつ的確に出力し得るようになる。
【0015】
【発明の実施の形態】以下、図面に基づき本発明に係る
画像検索システム、画像検索方法、画像検索プログラ
ム、画像検索プログラムを記録したコンピュータ読み取
り可能な記憶媒体、および画像検索装置について説明す
る。
【0016】〔第1の実施の形態〕先ず、本発明の第1
の実施の形態について説明する。ただし、ここでは、画
像データを記憶蓄積するサーバ装置と、画像データを可
視画像化して表示するクライアント装置とが、インター
ネット等の広域ネットワークを介して接続されたネット
ワークシステムを利用して、クライアント装置のユーザ
がいわゆるインターネットショッピングを行う場合を例
に挙げて説明する。
【0017】図1は、本発明の第1の実施の形態におけ
るシステム構成の一例を示すブロック図である。図例の
ように、本実施形態で説明する画像検索システムは、部
品構成編集部1と、部品属性編集部2と、検索指示部3
と、結果表示・結果選択部4と、類似画像検索部5と、
検索データ蓄積部6と、ユーザ(User)データ蓄積部7
と、検索データ呼出部8と、ユーザデータ書込部9と、
を備えて構成されている。
【0018】このうち、部品構成編集部1、部品属性編
集部2、検索指示部3および結果表示・結果選択部4
は、ネットワークシステムを構成するクライアント装置
20に設けられている。クライアント装置20は、例え
ばWWWブラウザ等のソフトウェアがインストールされ
たPCからなるもので、所定ソフトウェアを実行するこ
とによって上述の各部1〜4を実現するようになってい
る。
【0019】また、類似画像検索部5は、ネットワーク
システム内のいずれかの装置に設けられたものである。
具体的には、ネットワークシステムを構成するクライア
ント装置20またはサーバ装置30に設けることが考え
られる。この類似画像検索部5も、クライアント装置2
0またはサーバ装置30等が所定ソフトウェアを実行す
ることによって実現される。
【0020】また、検索データ蓄積部6、ユーザデータ
蓄積部7、検索データ呼出部8およびユーザデータ書込
部9は、ネットワークシステムを構成するサーバ装置3
0に設けられている。サーバ装置30は、例えば大容量
の記憶装置を備えたWWWサーバからなるもので、イン
ターネットショッピングによって提供する商品について
のカタログ情報(特に商品を表示するためのサンプル画
像データ)の発信元となるものである。
【0021】このようなサーバ装置30において、検索
データ蓄積部6およびユーザデータ蓄積部7は、サーバ
装置30が備える記憶装置によって実現される。このう
ち、検索データ蓄積部6には、ユーザに提供することの
できる各商品(以下「提供可能商品」という)について
のカタログ情報等(例えば、サンプル画像データ、その
サムネイル画像データ、商品価格等の属性情報、後述す
る特徴量データ)が予め記憶蓄積されている。また、ユ
ーザデータ蓄積部7には、インターネットショッピング
を利用したユーザ(顧客)の個人情報、操作履歴、購入
履歴等に関する情報が予め記憶蓄積されている。なお、
これらの各部6、7へのデータ書き込みおよび読み出し
を管理する検索データ呼出部8およびユーザデータ書込
部9は、サーバ装置30が所定ソフトウェアを実行する
ことによって実現される。
【0022】次に、以上のような画像検索システムを構
成する各部1〜9の機能について、この画像検索システ
ムを利用してユーザがインターネットショッピングを行
う場合の処理動作と併せて説明する。図2は本発明の第
1の実施の形態における処理動作例を示すフローチャー
トであり、図3はその処理動作中における入力画像特定
の具体例を示す説明図である。
【0023】この画像検索システムを利用してインター
ネットショッピングを行う場合、ユーザは、先ず、クラ
イアント装置20にログインし、そのクライアント装置
20を操作してサーバ装置30へのアクセスを行う。こ
のとき、ユーザは、クライアント装置20でのWWWブ
ラウザの起動およびサーバ装置30のURL(Uniform
Resource Locator)の指定を行うことによって、そのサ
ーバ装置30へのアクセスを行う。
【0024】このアクセスによって、クライアント装置
20では、サーバ装置30がインターネットショッピン
グのために発信しているカタログ情報を受け取って表示
出力することが可能となる。例えば、提供可能商品が
「時計」であれば、クライアント装置20では、サーバ
装置30へのアクセスによって、そのサーバ装置30か
ら「時計」の形状、色、値段等に関する情報をダウンロ
ードして、これを表示出力することが可能となる。
【0025】ただし、サーバ装置30の検索データ蓄積
部6には、一般に複数種類の提供可能商品についてのカ
タログ情報が記憶蓄積されている。このことから、クラ
イアント装置20側では、提供可能商品のカタログ情報
を全て表示出力するのではなく、ユーザが所望する商品
についての情報のみを表示出力するために、サーバ装置
30からのカタログ情報のダウンロードに先立って、ユ
ーザが次に述べるような操作を行う。
【0026】詳しくは、ユーザは、図2に示すように、
部品構成編集部1を用いて、所望する商品の構成および
形状、すなわち所望する商品がどのような部品によって
構成されているか、各部品がどのような形状をしている
のか等を指定する(ステップ101,以下ステップを
「S」と略す)。さらに、ユーザは、部品属性編集部2
を用いて、所望する商品の属性、すなわち所望する商品
を構成する部品がどのような材質によって形成されてい
るか、各部品がどのような色をしているのか等を指定す
る(S102)。
【0027】これらの指定を行うための部品構成編集部
1および部品属性編集部2は、当該指定をクライアント
装置20への画像入力によって行う。画像入力は、部品
構成編集部1および部品属性編集部2が周知である画像
形成機能を備えていれば、ユーザにマウスやポインティ
ングデバイス等を操作させることによって行えばよい。
ただし、ユーザによる操作の容易化を図るために、部品
構成編集部1および部品属性編集部2は、予め記憶蓄積
されている提供可能商品の部品データを用いて、ユーザ
に画像入力を行わせることが好ましい。
【0028】提供可能商品の部品データとは、提供可能
商品を構成する部品に関するデータのことをいう。具体
的には、提供可能商品「時計」における「文字盤」や
「バンド」等といった構成部品の形状(図形要素の形
状)を表すための画像データや、その構成部品の色や材
質を表すための属性情報等が、ここでいう部品データに
該当する。この部品データは、クライアント装置20が
記憶蓄積していてもよいが、サーバ装置30内の検索デ
ータ蓄積部6に記憶蓄積しておき、必要がある度(例え
ばアクセスがある度)にクライアント装置20へのダウ
ンロードを行うようにすれば、提供可能商品の変更等へ
の対応が容易になる。
【0029】このような部品データが予め記憶蓄積され
ていれば、部品構成編集部1および部品属性編集部2
は、図3に示すように、クライアント装置20への画像
入力に当たって、そのクライアント装置20の表示画面
上に部品データやその属性情報等を一覧表示して(図中
におけるウインドウA,B参照)、ユーザに所望する構
成部品の形状や色等を選択編集させる。これにより、部
品構成編集部1および部品属性編集部2は、ユーザの画
像描画能力等の影響を受けることなく、ユーザが所望す
る商品についての画像を的確に特定することができる
(図中におけるウインドウC参照)。また、ユーザにと
っても、自ら画像を描画する場合に比べて簡単な操作で
商品の構成や属性等を指定できるので、非常に利便性の
高いものとなる。
【0030】その後、図2に示すように、ユーザによる
画像描画または部品データの選択編集が終了し(S10
3)、部品構成編集部1および部品属性編集部2がユー
ザの所望する商品についての画像を特定すると、続い
て、クライアント装置20では、検索指示部3がその特
定された入力画像の画像データを検索キーとし、これを
類似画像検索部5に提示する。
【0031】これを受けて、類似画像検索部5は、提示
された画像データに類似する画像データを、サーバ装置
30の検索データ蓄積部6内に記憶蓄積されている提供
可能商品についてのカタログ情報の中から検索する(S
104)。すなわち、類似画像検索部5は、検索指示部
3から提示された検索キーを用いて、類似画像検索処理
を行う。
【0032】類似画像検索処理に当たっては、先ず、類
似画像検索部5が、検索キーとなる画像データを正規化
し、その特徴量の抽出を行う。このとき、正規化を行う
のは、特徴量の比較を一定の基準に則って行い得るよう
にするためである。画像データの特徴量とは、画像全体
の色調、縦横比、輝度や色の分布状態、エッジの分布状
態、平坦なエリアの分布状態等、その画像の物理的な特
徴量のことであり、数値として求まる量のことをいう。
なお、複数種類の特徴量を用いるようにすれば、類似画
像検索処理の精度が向上する。
【0033】また、このときに、検索データ呼出部8
は、類似画像検索部5からの指示を受けて、検索データ
蓄積部6内のカタログ情報に含まれる各画像データにつ
いての特徴量のリストを呼び出して、これを類似画像検
索部5に通知する。つまり、検索データ呼出部8は、検
索データ蓄積部6が画像データと共に予め記憶蓄積して
いる当該画像データの特徴量データに関するリストを、
類似画像検索部5へ渡す。
【0034】これにより、類似画像検索部5では、その
リストによって特定される各画像データの特徴量と、検
索キーとなる画像データの特徴量とを各々比較して、そ
の類似度を算出することができる。類似度の算出は、既
存の手法を利用して行えばよい。例えば、各画像データ
の特徴量をベクトルとして捉え、検索キーとなる画像デ
ータの特徴量ベクトルと他の画像データの特徴量ベクト
ルとの距離を算出して、距離が近いほど類似度も高いと
判断する、といったことが考えられる。
【0035】そして、類似画像検索部5は、類似度の算
出結果に基づいて、検索キーとなる画像データとの類似
度が高い(例えば所定の閾値以上の)画像データを、検
索データ蓄積部6内から選び出す。したがって、類似画
像検索部5では、複数の類似画像データに順位付けした
状態で、これらを選び出すといったこともあり得る。
【0036】なお、類似画像検索部5が行う類似画像検
索処理は、以上の手順に限るものではなく、他の周知の
手法を用いて行うようにしてもよい。
【0037】このようにして類似画像検索部5が類似画
像検索処理を行うと、その検索結果である類似画像デー
タは、類似画像検索部5からの指示を受けた検索データ
呼出部8によって検索データ蓄積部6内から読み出され
た後、サーバ装置30からクライアント装置20へダウ
ンロードされる。そして、クライアント装置20では、
結果表示・結果選択部4が、その表示出力を行う。
【0038】これにより、クライアント装置20の表示
画面上には、ユーザが入力した所望する商品についての
画像に類似する提供可能商品の画像(サンプル画像また
はサムネイル画像)と、その提供可能商品に関連した情
報(商品価格等)が表示されることになる(S10
5)。このとき、結果表示・結果選択部4は、最も類似
度の高い画像データのみではなく、例えば類似度の高い
上位10侯補を表示したり、類似度が所定の閾値以上の
ものを全て表示するようにしてもよい。
【0039】その後、ユーザがクライアント装置20を
操作して、そのクライアント装置20での表示結果の中
から必要とする結果(商品)を選択すると(S10
6)、結果表示・結果選択部4は、その選択結果および
ユーザに関する情報(インターネットショッピングに必
要な情報やログイン時の認証情報等)をサーバ装置30
へ送信する。これを受けて、サーバ装置30では、ユー
ザデータ書込部9がその選択結果およびユーザに関する
情報を新規または追加ユーザ情報としてユーザデータ蓄
積部7内に書き込む(S107)。
【0040】このユーザデータ蓄積部7内に書き込まれ
た情報によって、その後に行われる商品の発送や代金の
徴収が管理されることになるが、ここでは本発明の要旨
に直接関係ないため、その説明を省略する。
【0041】ユーザに関する情報をユーザデータ蓄積部
7に書き込んだ後は、他にユーザの検索したいものがな
ければ(S108)、ユーザはクライアント装置20か
らログアウトして、インターネットショッピングのため
の操作を終了する。
【0042】〔第2の実施の形態〕次に、本発明の第2
の実施の形態について説明する。ただし、ここでは、上
述した第1の実施の形態との相違点についてのみ説明す
るものとする。
【0043】図4は、本発明の第2の実施の形態におけ
るシステム構成の一例を示すブロック図である。なお、
図中において、第1の実施の形態の場合と同一の構成要
素については、同一の符号を与えている。図例のよう
に、本実施形態における画像検索システムは、第1の実
施の形態で説明した部品属性編集部2、検索指示部3、
結果表示・結果選択部4、類似画像検索部5、検索デー
タ蓄積部6と、ユーザデータ蓄積部7、検索データ呼出
部8およびユーザデータ書込部9に加えて、基本構成編
集部10と、部品構造編集部11と、キーワード(Keyw
ord)検索部12と、検索方法選択部13と、を備えて
いる。
【0044】このうち、基本構成編集部10および部品
構造編集部11は、第1の実施の形態で説明した部品構
成編集部1に代わってクライアント装置20に設けられ
たもので、所望する商品の構成および形状、すなわち所
望する商品がどのような部品によって構成されているか
(商品の基本構成)、各部品がどのような形状をしてい
るのか(部品の構造)等を指定するものである。これら
基本構成編集部10および部品構造編集部11は、クラ
イアント装置20が所定ソフトウェアを実行することに
よって実現される。
【0045】また、キーワード検索部12および検索方
法選択部13は、類似画像検索部5と同様に、ネットワ
ークシステム内のいずれかの装置、具体的にはクライア
ント装置20またはサーバ装置30に設けられたもの
で、そのクライアント装置20またはサーバ装置30で
の所定ソフトウェアの実行によって実現されるものであ
る。これらキーワード検索部12および検索方法選択部
13は、類似画像検索部5による類似画像検索処理に加
えて、周知のデータ検索技術を利用したキーワード検索
処理を行い得るようにするための設けられている。
【0046】続いて、以上のように構成された画像検索
システムの処理動作について説明する。図5は本発明の
第2の実施の形態における処理動作例を示すフローチャ
ートであり、図6はその処理動作中における入力画像特
定の具体例を示す説明図である。
【0047】この画像検索システムにおいても、第1の
実施の形態の場合と同様に、ユーザによるクライアント
装置20へのログインの認証後、そのユーザによるサー
バ装置30へのアクセスによって、この画像検索システ
ムを利用したインターネットショッピングが開始され
る。
【0048】ただし、このときに、この画像検索システ
ムでは、第1の実施の形態の場合とは異なり、クライア
ント装置20側でユーザが次に述べるような操作を行
う。先ず、ユーザは、図5に示すように、基本構成編集
部10を用いて、所望する商品の基本構成を指定する
(S201)。
【0049】ここでいう基本構成とは、例えば提供可能
商品が「シャツ」であれば、図6に示すように、「襟」
の形状がどのようになっているか、「ポケット」がどの
部分に幾つ付いているか等といった、その「シャツ」の
基本となる構成のことをいう(図中におけるウインドウ
D参照)。この基本構成によって、商品がどのような部
品によって構成されているか、各部品がどのような形状
をしているのか等が特定されることになる。
【0050】基本構成の指定は、ユーザにマウスやポイ
ンティングデバイス等を用いた画像入力によって行って
もよいが、第1の実施の形態で説明したように、予め記
憶蓄積されている提供可能商品の部品データを用いてユ
ーザに画像(定型部品画像)を選択させることによって
行うのが好ましい。なお、画像選択に当たって一覧表示
する部品データは、ユーザが部品属性編集部2を用いて
入力する商品名等を基を周知のキーワード検索を行うこ
とで、その記憶蓄積箇所からの抽出を行うようにすれば
よい。
【0051】このようにして基本構成を指定した後、図
5に示すように、その基本構成をたたき台としてより詳
細な仕様を指定する場合には(S202)、ユーザは、
部品構造編集部11を用いて、その基本構成中における
各部品の編集を行う(S203)。この編集によって、
ユーザは、各部品の形状を細かく変更するが可能にな
る。また、ユーザは、部品属性編集部2を用いて、その
基本構成中における各部品の属性、すなわち各部品の材
質や色等を指定する(S204)。
【0052】これにより、ユーザは、例えば、好みの仕
様の「シャツ」が提供可能商品に含まれているのか、あ
るいはそのような「シャツ」が在庫の中にあるのか等を
検索する場合に、基本的な「シャツ」の形を選び、それ
に「ポケット」等を追加したり、その形状や色等を修正
することで、所望する仕様の「シャツ」を指定すること
ができるようになる。
【0053】ただし、このとき、部品構造編集部11
は、図6に示すように、商品の基本構成がユーザに対し
て表示されていることから(図中におけるウインドウE
参照)、その表示状態を利用して各部品の形状の変更を
行わせる。例えば、提供可能商品が「シャツ」であり、
ユーザがその「シャツ」の「袖」の長さを変更しようと
する場合であれば、部品構造編集部11は、「袖」の端
部に合わせられたカーソルFの移動に伴ってその「袖」
の長さを可変させる。また、「ポケット」を追加する場
合であれば、追加する「ポケット」の形状を選択すると
ともに(図中におけるウインドウG参照)、その「ポケ
ット」の追加位置にカーソルHを合わせるようにする。
すなわち、部品構造編集部11は、周知のGUI(Grap
hical Userinterface)機能を利用してユーザに各部品
の編集を行わせる。これにより、ユーザは、各部品を容
易に所望の形状に変更することができるようになる。
【0054】なお、これは、部品属性編集部2を用いた
各部品の属性の指定についても全く同様のことがいえ
る。つまり、部品属性編集部2も、周知のGUI機能
(例えばプルダウンメニュー機能)を利用して、ユーザ
に各部品の属性指定を行わせるようにすることが考えら
れる(図中におけるウインドウI参照)。
【0055】その後、図5に示すように、部品属性編集
部2を用いた各部品の編集および部品属性編集部2を用
いた各部品の属性指定によって、商品の基本構成の表示
をユーザが所望する仕様にすることができたならば(S
205)、類似画像検索部5は、その仕様に類似する画
像データについて、第1の実施の形態の場合と同様に類
似画像検索処理を行う(S206)。
【0056】一方、基本構成編集部10を用いて指定し
た基本構成によって検索を行いたい場合には(S20
2)、先ず、ユーザは、基本構成の指定に用いた定型部
品画像に付随しているキーワード、属性またはID番号
等の記号情報を基に検索を行うよう、検索指示部3から
検索方法選択部13を通じてキーワード検索部12に対
して指示を与える。これを受けて、キーワード検索部1
2は、記号情報の一致による検索を行う(S207)。
すなわち、キーワード検索部12は、検索データ呼出部
8を介して検索データ蓄積部6に蓄積されている各画像
データの記号情報のリストを呼び出して比較し、検索指
示部3から指示された記号情報と一致する記号情報を持
つ画像データを選び出す。
【0057】ここで、一致する記号情報を持つ画像デー
タが存在しなかった場合には(S208)、キーワード
検索部12は、類似画像検索部5に類似画像検索処理を
行うよう依頼する。これにより、類似画像検索部5は、
基本構成を基にした類似画像検索を行って(S20
6)、その基本構成に類似した特徴を持つ画像データを
抽出することになる。
【0058】その後は、第1の実施の形態の場合と同様
に、クライアント装置20側での検索結果の表示(S2
09)、ユーザによる結果選択(S210)、ユーザデ
ータ書込部9による選択結果等のユーザデータ蓄積部7
内への書き込み(S211)を経て、他に検索したいも
のがなければユーザがクライアント装置20からログア
ウトして(S212)、インターネットショッピングの
ための操作を終了する。
【0059】以上のように、第1および第2の実施の形
態で説明した画像検索システムでは、クライアント装置
20のユーザに所望する商品についての画像入力を行わ
せることで、その入力画像と類似度の高い画像データの
みを、クライアント装置20がサーバ装置30からダウ
ンロードして表示出力するようになっている。つまり、
予めクライアント装置20側でユーザの要求仕様に相当
する画像データを作成させて、その画像データを検索キ
ーとして類似画像検索を行うことで、ユーザが所望する
商品およびこれに近い商品の画像を、そのユーザが迅速
かつ的確に得られるようにしている。
【0060】したがって、クライアント装置20のユー
ザとっては、従来のように各商品の画像を順次参照する
必要がなくなるので、所望する商品の有無(在庫にある
か否か等)を迅速に判断できるようになり、また商品の
属性やキーワード(例えば商品名)等を基にしたデータ
検索処理を行う場合のように、候補(表示出力する商
品)が現れなかったり、商品同士の形状の相違等につい
ては全く対応することができないといったこともなくな
るので、非常に利便性が高く、有効な検索結果を確実に
得られるものとなる。
【0061】特に、第1および第2の実施形態で説明し
た画像検索システムでは、ユーザによる所望する商品に
ついての画像入力に当たって、その画像入力を予め記憶
蓄積されている部品データを用いて行うようになってい
る。すなわち、商品についての画像が複数の図形要素
(商品を構成する部品)の組み合わせからなることに着
目し、図形要素の組み合わせ、変形、編集等によって要
求仕様に相当する画像データを作成し、その画像データ
を検索キーとして類似画像検索を行うことで、のユーザ
が所望する画像データを迅速かつ的確に検索して出力す
ることを可能にしている。
【0062】そのため、クライアント装置20のユーザ
とっては、自ら画像を描画する場合に比べて簡単な操作
で商品の構成や属性等を指定できるので、類似画像検索
処理のための検索キーとなる画像データの特定を非常に
容易に行うことができ、結果として非常に利便性の高い
ものとなる。また、ユーザ自ら画像を描画する場合のよ
うに、ユーザの画像描画能力等の影響を受けることもな
いので、ユーザが所望する商品についての画像を的確に
特定することも可能になる。
【0063】なお、上述した第1および第2の実施の形
態では、インターネット等の広域ネットワークを介して
接続されたネットワークシステムを利用して、クライア
ント装置20のユーザがいわゆるインターネットショッ
ピングを行う場合を例に挙げて説明したが、本発明はこ
れに限定されるものではない。すなわち、インターネッ
トショッピングを行う場合に限らず、広域ネットワーク
を介して画像データをキーとして検索を行う場合であれ
ば、全く同様に適用することが可能である。
【0064】また、広域ネットワークも、インターネッ
トに限定されるものではなく、例えば電話回線網やデジ
タル放送網、その他の広域ネットワークに応用すること
が考えられる。さらに、画像入力を行うための画像入力
手段としては、上述したようなクライアント20での画
像入力の他に、ファクシミリ装置やCCD(Charge Cou
pled Device)カメラ等を用いることも考えられる。
【0065】また、上述した第1および第2の実施の形
態では、本発明が適用された画像検索システムおよびそ
のシステムにて用いられる画像検索方法の具体例を説明
したが、本発明は、上述した画像検索方法を同じく上述
した画像検索システムに実行させるプログラム(例えば
ネットワーク上に配信可能なもの)、または、そのプロ
グラムを記録したコンピュータ読み取り可能な記録媒体
(CD−ROMやDVD−ROM等)であっても、実現
することが可能である。
【0066】また、類似画像検索処理を行う画像検索装
置に本発明を適用すれば、その画像検索装置が広域ネッ
トワークを介していないものであっても、上述した第1
および第2の実施の形態のように予め記憶蓄積されてい
る図形要素に関する情報(部品データ)を用いて画像入
力を行うことによって、そのユーザにとっての利便性や
操作容易性等を従来よりも大きく向上させることができ
る。
【0067】
【発明の効果】以上に説明したように、本発明に係る画
像検索システム、画像検索方法、画像検索プログラム、
および画像検索プログラムを記録したコンピュータ読み
取り可能な記憶媒体は、サーバ装置が複数の画像データ
を記憶蓄積していても、例えばクライアント装置のユー
ザが所望する形状(図形要素)を含む画像についての画
像データや、その画像に形状が類似する画像についての
画像データのみを、サーバ装置から迅速かつ的確に取り
出して出力し得るようになっているので、そのユーザに
とっては非常に利便性が高く、有効な検索結果を確実に
得られるものとなる。
【0068】また、本発明に係る画像検索装置によれ
ば、入力画像の特定に当たって、例えば図形記憶手段に
記憶されている図形要素を組み合わせたり、その変形や
編集等を行ったりすることが可能となるので、入力画像
特定の容易化が図れ、更なるユーザにとっての利便性向
上が可能となる。
【図面の簡単な説明】
【図1】 本発明の第1の実施の形態におけるシステム
構成の一例を示すブロック図である。
【図2】 本発明の第1の実施の形態における処理動作
例を示すフローチャートである。
【図3】 本発明に係る処理動作中における入力画像特
定の具体例を示す説明図である。
【図4】 本発明の第2の実施の形態におけるシステム
構成の一例を示すブロック図である。
【図5】 本発明の第2の実施の形態における処理動作
例を示すフローチャートである。
【図6】 本発明に係る処理動作中における入力画像特
定の具体例を示す説明図である。
【符号の説明】
1…部品構成編集部、2…部品属性編集部、3…検索指
示部、4…結果表示・結果選択部、5…類似画像検索
部、6…検索データ蓄積部、7…ユーザデータ蓄積部、
8…検索データ呼出部、9…ユーザデータ書込部、10
…基本構成編集部、11…部品構造編集部、20…クラ
イアント装置、30…サーバ装置

Claims (9)

    【特許請求の範囲】
  1. 【請求項1】 画像データを記憶蓄積するサーバ装置
    と、前記画像データを可視画像化して表示するクライア
    ント装置とが、広域ネットワークを介して互いに接続さ
    れてなる画像検索システムであって、 前記クライアント装置側で画像入力を行うための画像入
    力手段と、 前記画像入力手段による入力画像に類似する画像につい
    ての画像データを前記サーバ装置内から検索して前記ク
    ライアント装置に表示させる画像検索手段とを備えるこ
    とを特徴とする画像検索システム。
  2. 【請求項2】 前記画像入力手段は、 画像を構成する図形要素に関する情報を記憶する部品記
    憶手段と、 前記部品記憶手段に記憶された情報を用いて前記入力画
    像を特定する画像編集手段とを有することを特徴とする
    請求項1記載の画像検索システム。
  3. 【請求項3】 画像データを記憶蓄積するサーバ装置
    と、前記画像データを可視画像化して表示するクライア
    ント装置とが、広域ネットワークを介して互いに接続さ
    れてなるネットワークシステムで用いられる画像検索方
    法であって、 前記クライアント装置側での画像入力があると、当該画
    像入力によって入力された画像に類似する画像について
    の画像データを前記サーバ装置内から検索して前記クラ
    イアント装置に表示させることを特徴とする画像検索方
    法。
  4. 【請求項4】 前記クライアント装置での画像入力に先
    立って画像を構成する図形要素に関する情報を記憶して
    おき、 記憶された前記図形要素に関する情報を用いて前記クラ
    イアント装置にて入力される画像を特定することを特徴
    とする請求項3記載の画像検索方法。
  5. 【請求項5】 画像データを記憶蓄積するサーバ装置
    と、前記画像データを可視画像化して表示するクライア
    ント装置とが、広域ネットワークを介して互いに接続さ
    れてなるネットワークシステムのうちの、少なくともい
    ずれか一つのサーバ装置またはクライアント装置にて実
    行される画像検索プログラムであって、 前記クライアント装置側での画像入力があると、当該画
    像入力によって入力された画像に類似する画像について
    の画像データを前記サーバ装置内から検索して前記クラ
    イアント装置に表示させることを特徴とする画像検索プ
    ログラム。
  6. 【請求項6】 前記クライアント装置での画像入力に先
    立って画像を構成する図形要素に関する情報を記憶して
    おき、 記憶された前記図形要素に関する情報を用いて前記クラ
    イアント装置にて入力される画像を特定することを特徴
    とする請求項5記載の画像検索プログラム。
  7. 【請求項7】 画像データを記憶蓄積するサーバ装置
    と、前記画像データを可視画像化して表示するクライア
    ント装置とが、広域ネットワークを介して互いに接続さ
    れてなるネットワークシステムのうちの、少なくともい
    ずれか1つのサーバ装置またはクライアント装置にて実
    行される画像検索プログラムを記録したコンピュータ読
    み取り可能な記憶媒体であって、 前記クライアント装置側での画像入力があると、当該画
    像入力によって入力された画像に類似する画像について
    の画像データを前記サーバ装置内から検索して前記クラ
    イアント装置に表示させることを特徴とする画像検索プ
    ログラムを記録したコンピュータ読み取り可能な記憶媒
    体。
  8. 【請求項8】 前記クライアント装置での画像入力に先
    立って画像を構成する図形要素に関する情報を記憶して
    おき、 記憶された前記図形要素に関する情報を用いて前記クラ
    イアント装置にて入力される画像を特定することを特徴
    とする請求項7記載の画像検索プログラムを記録したコ
    ンピュータ読み取り可能な記憶媒体。
  9. 【請求項9】 画像データを記憶蓄積する画像蓄積手段
    と、 前記画像蓄積手段に記憶蓄積される画像データによって
    特定される画像を構成する図形要素に関する情報を記憶
    する図形記憶手段と、 前記図形記憶手段に記憶されている図形要素に関する情
    報を用いて入力画像を特定する画像編集手段と、 前記画像編集手段に特定された入力画像に類似する画像
    についての画像データを前記画像蓄積手段に記憶蓄積さ
    れた中から検索する画像検索手段と、 前記画像検索手段での検索結果である画像データを出力
    する画像出力手段とを備えることを特徴とする画像検索
    装置。
JP2000327972A 2000-10-27 2000-10-27 画像検索システム、画像検索方法、画像検索プログラム、画像検索プログラムを記録したコンピュータ読み取り可能な記憶媒体、および画像検索装置 Pending JP2002132825A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000327972A JP2002132825A (ja) 2000-10-27 2000-10-27 画像検索システム、画像検索方法、画像検索プログラム、画像検索プログラムを記録したコンピュータ読み取り可能な記憶媒体、および画像検索装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000327972A JP2002132825A (ja) 2000-10-27 2000-10-27 画像検索システム、画像検索方法、画像検索プログラム、画像検索プログラムを記録したコンピュータ読み取り可能な記憶媒体、および画像検索装置

Publications (1)

Publication Number Publication Date
JP2002132825A true JP2002132825A (ja) 2002-05-10

Family

ID=18804895

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000327972A Pending JP2002132825A (ja) 2000-10-27 2000-10-27 画像検索システム、画像検索方法、画像検索プログラム、画像検索プログラムを記録したコンピュータ読み取り可能な記憶媒体、および画像検索装置

Country Status (1)

Country Link
JP (1) JP2002132825A (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005108013A (ja) * 2003-09-30 2005-04-21 Ricoh Co Ltd 情報提供方法及び情報提供プログラム
JP2006209260A (ja) * 2005-01-25 2006-08-10 Fuji Xerox Co Ltd 物品検索システム及び物品検索方法、並びにコンピュータ・プログラム
JP2008146258A (ja) * 2006-12-07 2008-06-26 Canon Inc 画像処理装置、画像処理方法
JP2009188870A (ja) * 2008-02-08 2009-08-20 Olympus Imaging Corp 画像再生システムおよび画像再生方法
JP2012142006A (ja) * 2006-02-23 2012-07-26 Imaginestics Llc データベース内の構成部品を探索するための入力としてユーザが構成部品を描くことができるようにする方法
JP2020101946A (ja) * 2018-12-20 2020-07-02 ヤフー株式会社 情報処理装置、制御プログラム、情報処理方法及び情報処理プログラム

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005108013A (ja) * 2003-09-30 2005-04-21 Ricoh Co Ltd 情報提供方法及び情報提供プログラム
JP2006209260A (ja) * 2005-01-25 2006-08-10 Fuji Xerox Co Ltd 物品検索システム及び物品検索方法、並びにコンピュータ・プログラム
JP2012142006A (ja) * 2006-02-23 2012-07-26 Imaginestics Llc データベース内の構成部品を探索するための入力としてユーザが構成部品を描くことができるようにする方法
JP2008146258A (ja) * 2006-12-07 2008-06-26 Canon Inc 画像処理装置、画像処理方法
US8565534B2 (en) 2006-12-07 2013-10-22 Canon Kabushiki Kaisha Image processing apparatus and image processing method
JP2009188870A (ja) * 2008-02-08 2009-08-20 Olympus Imaging Corp 画像再生システムおよび画像再生方法
JP2020101946A (ja) * 2018-12-20 2020-07-02 ヤフー株式会社 情報処理装置、制御プログラム、情報処理方法及び情報処理プログラム

Similar Documents

Publication Publication Date Title
US9152614B2 (en) System and method for bulk web domain generation and management
US20120036153A1 (en) Mobile system, search system and search result providing method for mobile search
US20140007014A1 (en) Method For Graphical Representation Of A Content Collection
KR20170091142A (ko) 웹 콘텐츠 태깅 및 필터링
US8943038B2 (en) Method and apparatus for integrated cross platform multimedia broadband search and selection user interface communication
US20170132225A1 (en) Storing and retrieving associated information with a digital image
JP2009181468A (ja) 画像検索ログ収集システム、画像検索ログ収集方法、及びプログラム
JP2008192055A (ja) コンテンツ検索方法、およびコンテンツ検索装置
KR100853308B1 (ko) 항목 타입별 구조화된 검색
JP2002007479A (ja) 検索情報表示方法、情報検索システム、検索サーバー、及び、検索サーバー用プログラムの記録媒体
JP5506104B2 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
US20050188057A1 (en) Contents service system and method using image, and computer readable storage medium stored therein computer executable instructions to implement contents service method
JP2007279864A (ja) 情報提供システムおよび方法ならびにプログラム、電子商取引システムおよび方法ならびにプログラム
US20100228751A1 (en) Method and system for retrieving ucc image based on region of interest
JP2009009461A (ja) キーワードの入力支援システム、コンテンツ検索システム、コンテンツ登録システム、コンテンツ検索・登録システム、およびこれらの方法、並びにプログラム
US7191212B2 (en) Server and web page information providing method for displaying web page information in multiple formats
JP4938737B2 (ja) 商品検索システム、商品検索方法、及びプログラム
JP2007058532A (ja) 情報処理システム、情報処理装置および方法、プログラム、並びに、記録媒体
JP2005275488A (ja) 入力支援方法およびプログラム
JP2002132825A (ja) 画像検索システム、画像検索方法、画像検索プログラム、画像検索プログラムを記録したコンピュータ読み取り可能な記憶媒体、および画像検索装置
JP3994188B2 (ja) マルチメディアデータ検索システム、マルチメディア検索方法および該検索方法を実現するためのプログラム
US8131752B2 (en) Breaking documents
JP2005063428A (ja) 情報表示装置、方法及びプログラム
JP2006004062A (ja) 画像データベース作成装置および画像検索方法
JP4477931B2 (ja) 検索リクエスト装置、検索リクエスト方法、検索リクエストプログラムおよび検索リクエストプログラムを記録したコンピュータ読み取り可能な記録媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070312

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070327

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070525

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070703