JP2007328406A - Drawing retrieval system, drawing retrieval method, and drawing retrieval terminal - Google Patents

Drawing retrieval system, drawing retrieval method, and drawing retrieval terminal Download PDF

Info

Publication number
JP2007328406A
JP2007328406A JP2006157201A JP2006157201A JP2007328406A JP 2007328406 A JP2007328406 A JP 2007328406A JP 2006157201 A JP2006157201 A JP 2006157201A JP 2006157201 A JP2006157201 A JP 2006157201A JP 2007328406 A JP2007328406 A JP 2007328406A
Authority
JP
Japan
Prior art keywords
user terminal
search
data
terminal
drawing data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006157201A
Other languages
Japanese (ja)
Other versions
JP4752628B2 (en
Inventor
Yasuhiko Wakabayashi
康彦 若林
Keiko Katayama
恵子 片山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2006157201A priority Critical patent/JP4752628B2/en
Publication of JP2007328406A publication Critical patent/JP2007328406A/en
Application granted granted Critical
Publication of JP4752628B2 publication Critical patent/JP4752628B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To automatically obtain a large quantity of drawings closer to an image which came up in a retrieving person. <P>SOLUTION: Data of drawings highly similar to the drawing whose image is input by a user terminal (retrieving person) 1 is retrieved by a drawing retrieval terminal 2, and provided to the user terminal (retrieving person) 1. Further, every time the image of the drawing is input into the user terminal (retrieving person) 1, the drawing is registered in the drawing retrieval terminal 2 as drawing data. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、インターネット等のネットワークを介して描画を検索するための描画検索システム、描画検索方法及び描画検索端末に関する。   The present invention relates to a drawing search system, a drawing search method, and a drawing search terminal for searching for drawing via a network such as the Internet.

従来の画像検索装置として、描画入力された画像イメージに基づいて、予めメモリに記録された画像を検索する画像検索装置が特許文献1に記載されている。また、従来の情報検索装置として、文字、記号、写真画、イラスト画、その他のイメージ画に対応する複数種類かつ複数の画像データを検索情報として予めデータベースに格納しておき、これらの画像データ毎に予め一対一の関係で付加されている特定のキーワードやコードデータ等の検索キーが入力された場合に、この検索キーで指定されたイメージ画に対応する画像データを出力する情報検索装置が特許文献2に記載されている。   As a conventional image search apparatus, Patent Document 1 discloses an image search apparatus that searches for an image recorded in advance in a memory based on a drawn and input image image. Further, as a conventional information retrieval device, a plurality of types and a plurality of image data corresponding to characters, symbols, photographic images, illustrations, and other image images are stored in advance in a database as retrieval information, and each of these image data is stored. An information search device that outputs image data corresponding to an image specified by a search key when a search key such as a specific keyword or code data previously added in a one-to-one relationship is input to It is described in Document 2.

また、画像が持つ色彩や形状を含む特徴量を検索キーとして類似画像を検索する画像検索エンジンにおいて、多種多様な画像がカテゴリとともに管理されている環境において画像検索者が所望する画像を検索する際に、検索キーとして画像の特徴量およびカテゴリを示すテキストを用いて類似画像の検索を行なう画像検索方法および装置と画像検索プログラムを記録した記録媒体に関するものが特許文献3に記載されている。   In addition, in an image search engine that searches for similar images using feature quantities including colors and shapes of images as search keys, an image searcher searches for a desired image in an environment where a variety of images are managed together with categories. Further, Patent Document 3 discloses an image search method and apparatus for searching for similar images using text indicating image feature quantities and categories as search keys and a recording medium on which an image search program is recorded.

図10は、従来の画像検索装置の一構成例を示す図である。   FIG. 10 is a diagram illustrating a configuration example of a conventional image search apparatus.

図10に示す画像検索装置においては、分類木管理部140においてキーワード、キーワードの属するカテゴリ、キーワードに対応する画像、画像の特徴量を分類木として管理しておき、この分類木をユーザインターフェース部110から通信網を介してアプリケーションプログラム200に転送して画像検索者に表示し、この表示された分類木から画像検索者が選択したキーワードに対応する画像を画像検索者に表示して画像検索者により選択された画像の特徴量を取得し、この取得した画像の特徴量およびカテゴリを検索キーとしてDB検索部130から画像DB300を検索する。
特開2005−63465号公報 特開平7−85097号公報 特開2002−63172号公報
In the image search apparatus shown in FIG. 10, the classification tree management unit 140 manages keywords, the categories to which the keywords belong, images corresponding to the keywords, and image feature quantities as classification trees. From the displayed classification tree, the image corresponding to the keyword selected by the image searcher is displayed to the image searcher and displayed by the image searcher. The feature amount of the selected image is acquired, and the image DB 300 is searched from the DB search unit 130 using the acquired feature amount and category of the image as search keys.
JP 2005-63465 A JP-A-7-85097 JP 2002-63172 A

しかしながら、特許文献1に記載されたものにおいては、予めメモリに記録された画像の中から所望の画像が検索されるため、限られた画像の中からしか必要となる画像を得ることができないとともに、検索対象となる画像に関連する情報を取得することができないという問題点がある。   However, in the one described in Patent Document 1, since a desired image is searched from images recorded in a memory in advance, a necessary image can be obtained only from limited images. There is a problem that information related to an image to be searched cannot be acquired.

また、特許文献2に記載されたものにおいては、検索キーに基づいて画像が検索されるため、頭の中で浮かんだイメージを手書きでイラストとして検索をするものではなく、人それぞれ異なるイメージに近いものを探し出すことができないとともに、予め登録された画像の中から所望の画像が検索されるため、限られた画像の中からしか必要となる画像を得ることができないという問題点がある。   Moreover, in what was described in Patent Document 2, since an image is searched based on a search key, an image floating in the head is not searched as an illustration by hand, but close to different images for each person. In addition to searching for a desired image, a desired image is searched from pre-registered images, so that a necessary image can be obtained only from a limited number of images.

また、特許文献3に記載されたものにおいては、検索者が所望の画像を抽出するためには、キーワードの属するカテゴリ毎に選択を行うことになり、上記同様の問題点がある。   Moreover, in what was described in patent document 3, in order for a searcher to extract a desired image, it selects for every category to which a keyword belongs, and there exists a problem similar to the above.

本発明は、上述したような従来の技術が有する問題点に鑑みてなされたものであって、検索者が頭の中で浮かんだイメージに近い描画を自動的にかつ大量に取得することができる描画検索システム、描画検索方法及び描写検索端末を提供することを目的とする。   The present invention has been made in view of the problems of the conventional techniques as described above, and the searcher can automatically obtain a large amount of drawings close to the image floating in his head. An object is to provide a drawing search system, a drawing search method, and a drawing search terminal.

上記目的を達成するために本発明は、
描画をイメージ入力するための利用者端末と、描画データが登録され、前記利用者端末にイメージ入力された描画に基づいて描画データを検索し、該描画データを前記利用者端末に提供する描画検索端末とがネットワークを介して接続されてなる描画検索システムにおいて、
前記描画検索端末は、
描画データ及び該描画データに関する情報が登録された描画情報データベースと、
前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に基づいて描画データ及び該描画データに関する情報を検索する描画検索部と、
前記描画検索部にて検索された描画データ及び該描画データに関する情報を前記利用者端末に送信する合成表示部と、
前記利用者端末にイメージ入力された描画を、当該利用者端末を識別可能な識別情報と対応づけて描画データとして前記描画情報データベースに登録する描画データ登録部とを有し、
前記合成表示部は、前記描画検索部にて検索された描画データに対応づけられた識別情報によって識別される第1の利用者端末に対して当該描画データを送信し、前記第1の利用者端末から提供された描画に関する情報を、当該描画がイメージ入力された第2の利用者端末に送信することを特徴とする。
In order to achieve the above object, the present invention provides:
A user terminal for inputting a drawing image and a drawing search in which drawing data is registered, the drawing data is searched based on the drawing image input to the user terminal, and the drawing data is provided to the user terminal In a drawing search system in which a terminal is connected via a network,
The drawing search terminal
A drawing information database in which drawing data and information related to the drawing data are registered;
A drawing search unit for searching for drawing data and information related to the drawing data based on drawing input to the user terminal from the drawing information database;
A combined display unit that transmits drawing data searched by the drawing search unit and information related to the drawing data to the user terminal;
A drawing data registration unit that registers drawing drawn by image input to the user terminal with drawing information database as drawing data in association with identification information capable of identifying the user terminal;
The composite display unit transmits the drawing data to a first user terminal identified by identification information associated with the drawing data searched by the drawing search unit, and the first user Information related to the drawing provided from the terminal is transmitted to the second user terminal to which the drawing is input as an image.

上記のように構成された本発明においては、利用者端末に描画がイメージ入力されると、描画検索端末の描画検索部において、描画データが登録された描画情報データベースの中から、利用者端末にイメージ入力された描画に基づいて描画データが検索される。この際、描画検索端末の描画データ登録部において、利用者端末にイメージ入力された描画が描画データとして描画情報データベースに登録される。そして、描画検索端末の合成表示部において、描画検索部にて検索された描画データが利用者端末に送信される。また、描画検索端末の合成表示部において、描画検索部にて検索された描画データに対応づけられた識別情報によって識別される第1の利用者端末に対してその描画データが送信され、第1の利用者端末から提供された描画に関する情報が、描画がイメージ入力された第2の利用者端末に送信される。   In the present invention configured as described above, when drawing is input to the user terminal, the drawing search unit of the drawing search terminal stores the drawing data in the drawing information database in which the drawing data is registered. Drawing data is retrieved based on the image-input drawing. At this time, the drawing input to the user terminal is registered in the drawing information database as drawing data in the drawing data registration unit of the drawing search terminal. Then, in the composite display unit of the drawing search terminal, the drawing data searched by the drawing search unit is transmitted to the user terminal. In addition, in the composite display unit of the drawing search terminal, the drawing data is transmitted to the first user terminal identified by the identification information associated with the drawing data searched by the drawing search unit. Information relating to drawing provided from the user terminal is transmitted to the second user terminal to which the drawing is input as an image.

このように、利用者端末にイメージ入力された描画に基づいて描画データが検索されて利用者端末に提供されるので、検索者が頭の中で浮かんだイメージに近い描画を自動的に取得することができる。また、利用者端末にイメージ入力された描画がその都度描画データとして描画情報データベースに登録され、さらに、描画情報データベースから検索された描画データを登録した第1の利用者端末に対してその描画データが送信され、第1の利用者端末から提供された描画に関する情報が、描画がイメージ入力された第2の利用者端末に送信されるので、描画情報データベースには大量の描画データが登録され、利用者は、大量の描画を取得することができる。   In this way, drawing data is retrieved based on the drawing input to the user terminal and provided to the user terminal, so the searcher automatically obtains a drawing close to the image floating in the head. be able to. In addition, the drawing input as an image to the user terminal is registered in the drawing information database as drawing data each time, and the drawing data for the first user terminal that has registered the drawing data retrieved from the drawing information database. Is transmitted, and the information regarding the drawing provided from the first user terminal is transmitted to the second user terminal to which the drawing is input, so that a large amount of drawing data is registered in the drawing information database, The user can acquire a large amount of drawing.

また、描画をイメージ入力するための利用者端末と、描画データが登録され、前記利用者端末にイメージ入力された描画に基づいて描画データを検索し、該描画データを前記利用者端末に提供する描画検索端末とがネットワークを介して接続されてなる描画検索システムにおいて、
前記描画検索端末は、
描画データ及び該描画データに関する情報が登録された描画情報データベースと、
前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に基づいて描画データ及び該描画データに関する情報を検索する描画検索部と、
前記描画検索部にて検索された描画データ及び該描画データに関する情報を前記利用者端末に送信する合成表示部と、
前記利用者端末にイメージ入力された描画を、当該利用者端末を識別可能な識別情報と対応づけて描画データとして前記描画情報データベースに登録する描画データ登録部とを有し、
前記合成表示部は、前記描画情報データベースに登録された描画データを検索対象とする描画が第1の利用者端末にてイメージ入力されるとともに該描画に関する情報が入力された場合、前記描画情報データベースにて前記描画データに対応づけられた識別情報によって識別される第2の利用者端末に対して、前記描画及び該描画に関する情報を送信することを特徴とする描画検索システム。
Also, a user terminal for inputting an image of drawing and drawing data are registered, the drawing data is searched based on the drawing input as an image to the user terminal, and the drawing data is provided to the user terminal. In a drawing search system in which a drawing search terminal is connected via a network,
The drawing search terminal
A drawing information database in which drawing data and information related to the drawing data are registered;
A drawing search unit for searching for drawing data and information related to the drawing data based on drawing input to the user terminal from the drawing information database;
A combined display unit that transmits drawing data searched by the drawing search unit and information related to the drawing data to the user terminal;
A drawing data registration unit that registers drawing drawn by image input to the user terminal with drawing information database as drawing data in association with identification information capable of identifying the user terminal;
When the drawing for which the drawing data registered in the drawing information database is to be searched is input as an image at the first user terminal and information related to the drawing is input, the composite display unit A drawing search system, wherein the drawing and information related to the drawing are transmitted to a second user terminal identified by identification information associated with the drawing data.

上記のように構成された本発明においては、利用者端末に描画がイメージ入力されると、描画検索端末の描画検索部において、描画データが登録された描画情報データベースの中から、利用者端末にイメージ入力された描画に基づいて描画データが検索される。この際、描画検索端末の描画データ登録部において、利用者端末にイメージ入力された描画が描画データとして描画情報データベースに登録される。そして、描画検索端末の合成表示部において、描画検索部にて検索された描画データが利用者端末に送信される。また、描画検索端末の合成表示部において、描画情報データベースに登録された描画データを検索対象とする描画が第1の利用者端末にてイメージ入力されるとともにこの描画に関する情報が入力された場合、描画情報データベースにてその描画データに対応づけられた識別情報によって識別される第2の利用者端末に対して、描画及び描画に関する情報が送信される。   In the present invention configured as described above, when drawing is input to the user terminal, the drawing search unit of the drawing search terminal stores the drawing data in the drawing information database in which the drawing data is registered. Drawing data is retrieved based on the image-input drawing. At this time, the drawing input to the user terminal is registered in the drawing information database as drawing data in the drawing data registration unit of the drawing search terminal. Then, in the composite display unit of the drawing search terminal, the drawing data searched by the drawing search unit is transmitted to the user terminal. In addition, in the composite display unit of the drawing search terminal, when a drawing for which drawing data registered in the drawing information database is to be searched is input as an image at the first user terminal and information related to the drawing is input, Information relating to drawing and drawing is transmitted to the second user terminal identified by the identification information associated with the drawing data in the drawing information database.

このように、利用者端末にイメージ入力された描画に基づいて描画データが検索されて利用者端末に提供されるので、検索者が頭の中で浮かんだイメージに近い描画を自動的に取得することができる。また、利用者端末にイメージ入力された描画がその都度描画データとして描画情報データベースに登録され、さらに、描画情報データベースに登録された描画データを検索対象とする描画が第1の利用者端末にてイメージ入力されるとともにこの描画に関する情報が入力された場合、描画情報データベースに登録された描画データを登録した第2の利用者端末に対して、描画及び描画に関する情報が送信されるので、描画情報データベースには大量の描画データが登録され、利用者は、大量の描画を取得することができる。   In this way, drawing data is retrieved based on the drawing input to the user terminal and provided to the user terminal, so the searcher automatically obtains a drawing close to the image floating in the head. be able to. In addition, each time the image input to the user terminal is registered in the drawing information database as the drawing data, and the drawing for which the drawing data registered in the drawing information database is to be searched is the first user terminal. When information related to drawing is input together with image input, drawing and drawing information is transmitted to the second user terminal that has registered the drawing data registered in the drawing information database. A large amount of drawing data is registered in the database, and the user can acquire a large amount of drawing.

以上説明したように本発明においては、利用者端末にイメージ入力された描画に基づいて描画データが検索されて利用者端末に提供されるので、検索者が頭の中で浮かんだイメージに近い描画を自動的に取得することができ、また、利用者端末にイメージ入力された描画がその都度描画データとして描画情報データベースに登録され、また、利用者端末から提供された描画に関する情報が他の利用者端末に送信されるので、描画情報データベースには大量の描画データが登録され、利用者は、大量の描画を取得することができる。   As described above, in the present invention, drawing data is retrieved based on the drawing input to the user terminal and provided to the user terminal, so that the drawing close to the image that the searcher has floated in his head. The drawing input to the user terminal is registered in the drawing information database as the drawing data each time, and the information about the drawing provided from the user terminal is used for other purposes. Since a large amount of drawing data is registered in the drawing information database, the user can acquire a large amount of drawing.

以下に、本発明の実施の形態について図面を参照して説明する。   Embodiments of the present invention will be described below with reference to the drawings.

図1は、本発明の描画検索システムの実施の一形態を示す図である。   FIG. 1 is a diagram showing an embodiment of a drawing search system of the present invention.

本形態は図1に示すように、利用者端末となるユーザー端末(検索者)1と、描画検索端末2と、利用者端末となる他ユーザー端末(登録者)3と、利用者端末となる他ユーザー端末(検索者)4と、代行検索サイト5とが、インターネット等のネットワーク6を介して接続されて構成されている。   As shown in FIG. 1, the present embodiment is a user terminal (searcher) 1 that is a user terminal, a drawing search terminal 2, an other user terminal (registrant) 3 that is a user terminal, and a user terminal. Another user terminal (searcher) 4 and a proxy search site 5 are connected via a network 6 such as the Internet.

ユーザー端末(検索者)1は、パーソナルコンピュータや携帯電話、携帯情報端末等の情報処理装置であり、描画検索端末2が提供している描画情報のデータベースにアクセスし、その描画データやそれに関する情報を画面に表示する機能を備えている。描画データとしては、例えば、場所(公園、駅、観光名所等)、物(商品、建物、動物、植物等)、人(歴史人物、キャラクター等)、時間(季節、夜、気候等)の、手書きでイメージ入力される描画に類似する描画データと、またその描画に関連する内容等の情報である。描画検索端末2が提供している描画情報のデータベースには、手書きでイメージ入力される描画に類似する描画データと、またその描画に関連する情報が登録されている。また、ユーザー端末(検索者)1は、検索者が頭の中で思い浮かんだ場所や物や人等の描画を手書きによってイメージ入力できる機能を有する。例えば、タッチパネルを有し、このタッチパネルにペン等で触れることにより描画をイメージ入力する。画面に入力する描画は、イラストによるイメージ入力以外に、文章による入力も可能であり、入力された文章はイラストに変換される。これは、ユーザー端末(検索者)1において、予め登録された描画情報と単語とを対応づけておくことで実現される。例えば、「隅田川の橋を男の子が自転車に乗って渡っている。」という文章が入力された場合、「隅田川」、「橋」、「男の子」及び「自転車」の描画が表示される。また、音声による入力も可能であり、入力された音声は一度文字へ変換され、その後、イラストに変換される。そして、このように入力された描画イメージをネットワーク6を介して描画検索端末2に送信する機能を備えている。更に、一度に複数の描画の画面を描画検索端末2へ送信する機能を有する。   A user terminal (searcher) 1 is an information processing apparatus such as a personal computer, a mobile phone, or a portable information terminal, and accesses a drawing information database provided by the drawing search terminal 2, and the drawing data and information related thereto. Is displayed on the screen. Examples of drawing data include places (parks, stations, tourist attractions, etc.), objects (products, buildings, animals, plants, etc.), people (historical figures, characters, etc.), time (season, night, climate, etc.) The drawing data is similar to the drawing input by hand and the image is information related to the drawing. In the drawing information database provided by the drawing search terminal 2, drawing data similar to drawing input by hand and an image related to the drawing are registered. In addition, the user terminal (searcher) 1 has a function that allows a user to input a handwritten image of a place, an object, a person, or the like that has come to mind in the mind of the searcher. For example, a touch panel is provided, and drawing is input as an image by touching the touch panel with a pen or the like. In addition to image input by illustration, drawing input on the screen can also be input by text, and the input text is converted into an illustration. This is realized by associating previously registered drawing information with a word in the user terminal (searcher) 1. For example, when a sentence “A boy rides a bicycle on the Sumida River bridge” is input, a drawing of “Sumida River”, “Bridge”, “Boy” and “Bicycle” is displayed. Also, voice input is possible, and the input voice is once converted into characters and then converted into illustrations. The drawing image input in this way is provided with a function of transmitting to the drawing search terminal 2 via the network 6. Further, it has a function of transmitting a plurality of drawing screens to the drawing search terminal 2 at a time.

描画検索端末2は、描画情報を検索するワークステーション・サーバ等の情報処理装置であり、ユーザー端末(検索者)1から送信された描画イメージを受信し、描画情報のデータベースを検索し、受信した描画イメージに対して類似度が高い描画イメージをユーザー端末1に送信する機能を備えている。また、描画検索端末2は、描画イメージを検索し、ネットワーク6を介してユーザー端末(検索者)1、他ユーザー端末(登録者)3、他ユーザー端末(検索者)4及び代行検索サイト5に送信する。また、他ユーザー端末(登録者)3、他ユーザー端末(検索者)4及び代行検索サイト5から、描画に関連する情報を受信する機能を備えている。この描画イメージの検索を行う度毎に、ユーザー端末(検索者)1から送信された描画イメージを描画情報のデータベースに登録するため、ユーザー端末に対して、最新且つ大量の情報を提供することができる。他ユーザー端末(登録者)3、他ユーザー端末(検索者)4及び代行検索サイト5に対して、課金やポイント制により、最新且つ大量の情報を提供することも可能である。   The drawing search terminal 2 is an information processing device such as a workstation server that searches for drawing information, receives a drawing image transmitted from the user terminal (searcher) 1, searches a database of drawing information, and receives the drawing image. A function of transmitting a drawing image having high similarity to the drawing image to the user terminal 1 is provided. Further, the drawing search terminal 2 searches for a drawing image, and searches the user terminal (searcher) 1, other user terminal (registrant) 3, other user terminal (searcher) 4, and proxy search site 5 via the network 6. Send. Further, it has a function of receiving information related to drawing from the other user terminal (registrant) 3, the other user terminal (searcher) 4, and the proxy search site 5. Each time this drawing image is searched, the drawing image transmitted from the user terminal (searcher) 1 is registered in the drawing information database, so that the latest and large amount of information can be provided to the user terminal. it can. It is also possible to provide the latest and large amount of information to the other user terminal (registrant) 3, the other user terminal (searcher) 4 and the proxy search site 5 by charging or a point system.

他ユーザー端末(登録者)3は、パーソナルコンピュータや携帯電話、携帯情報端末等の情報処理装置であり、描画検索端末2よりデータベースから検索された描画イメージを受信する。ここでは、ユーザー端末(検索者)1が頭の中で思い浮かんだ場所や物や人等の描画イメージに対して描画検索端末2で描画検索をした結果、他ユーザー端末(登録者)3が既に登録した描画イメージと類似している判断されたものである。これに基づき、この描画イメージに関連する情報を描画検索端末2を経由してユーザー端末(検索者)1に送信する。   The other user terminal (registrant) 3 is an information processing apparatus such as a personal computer, a mobile phone, or a portable information terminal, and receives a drawing image searched from the database from the drawing search terminal 2. Here, as a result of a drawing search performed by the drawing search terminal 2 on a drawing image such as a place, an object, or a person that the user terminal (searcher) 1 thinks in his / her head, the other user terminal (registrant) 3 It is determined that the drawing image is similar to the already registered drawing image. Based on this, information related to this drawing image is transmitted to the user terminal (searcher) 1 via the drawing search terminal 2.

他ユーザー端末(検索者)4は、パーソナルコンピュータや携帯電話、携帯情報端末等の情報処理装置であり、描画検索端末2よりデータベースから検索された描画イメージを受信する。ここでは、ユーザー端末(検索者)1が頭の中で思い浮かんだ場所や物や人等の描画イメージに対して描画検索端末2で描画検索をした結果、他ユーザー端末(検索者)4が後から検索した描画イメージと類似している判断されたものである。これに基づき、この描画イメージに関連する情報を描画検索端末2を経由してユーザー端末(検索者)1に送信する。   The other user terminal (searcher) 4 is an information processing apparatus such as a personal computer, a mobile phone, or a portable information terminal, and receives the drawing image searched from the database from the drawing search terminal 2. Here, as a result of a drawing search performed by the drawing search terminal 2 on a drawing image such as a place or an object or a person that the user terminal (searcher) 1 has thought in his / her mind, the other user terminal (searcher) 4 It is determined to be similar to the drawing image retrieved later. Based on this, information related to this drawing image is transmitted to the user terminal (searcher) 1 via the drawing search terminal 2.

代行検索サイト5は、サーチ検索会社で専門人員による描画検索を代行して行う。例えば、サーチ検索会社に設置されているワークステーション・サーバやパーソナルコンピュータや携帯電話、携帯情報端末等の情報処理装置であり、ユーザー端末(検索者)1にイメージ入力された描画イメージを受信する。ここでは、ユーザー端末(検索者)1が頭の中で思い浮かんだ場所や物や人等の描画イメージに対して描画検索端末2で描画検索をした結果、この描画に類似する描画イメージが抽出されなかった場合、代行して描画検索を行う。代行検索サイト5では、専門人員が、本等の資料やインターネットを用いて描画検索を行い、専門人員が類似度を判断する。これに基づき、描画イメージに関連する情報を描画検索端末2を経由してユーザー端末(検索者)1に送信する。ユーザー端末(検索者)1は、描画検索を描画検索端末2へ送信する際に、代行検索サイト5で代行して描画検索を希望するか否かの選択を設定して送信することができる。   The agency search site 5 is a search search company that performs drawing search by professional personnel. For example, an information processing apparatus such as a workstation server, a personal computer, a mobile phone, or a portable information terminal installed in a search search company receives a drawing image input to the user terminal (searcher) 1. Here, a drawing image similar to this drawing is extracted as a result of a drawing search performed on the drawing search terminal 2 with respect to a drawing image of a place, object, person or the like that the user terminal (searcher) 1 has thought of in his head. If not, a drawing search is performed on behalf. In the agency search site 5, a specialist performs a drawing search using materials such as books and the Internet, and the specialist determines the similarity. Based on this, information related to the drawing image is transmitted to the user terminal (searcher) 1 via the drawing search terminal 2. When transmitting the drawing search to the drawing search terminal 2, the user terminal (searcher) 1 can set the selection as to whether the drawing search is desired on behalf of the proxy search site 5 and transmit it.

図2は、図1に示した描画検索端末2の構成を示すブロック図である。   FIG. 2 is a block diagram showing a configuration of the drawing search terminal 2 shown in FIG.

本形態における描画検索端末2は図2に示すように、描画認識抽出部7と、描画情報登録部8と、描画情報データベース8aと、描画検索部9と、合成表示部10とから構成されている。   As shown in FIG. 2, the drawing search terminal 2 in this embodiment includes a drawing recognition extraction unit 7, a drawing information registration unit 8, a drawing information database 8 a, a drawing search unit 9, and a composite display unit 10. Yes.

描画認識抽出部7は、ユーザー端末(検索者)1にてイメージ入力された描画イメージを受信し、受信した描画イメージについて、描画情報データベース8aを参照し、場所のイラスト、物のイラスト、人のイラストであるかを識別する。また、描画イメージの特徴とする部分や色、形、サイズ、位置等を認識して抽出する。   The drawing recognition extraction unit 7 receives a drawing image input by the user terminal (searcher) 1, refers to the drawing information database 8 a for the received drawing image, and displays an illustration of a place, an illustration of an object, a human Identify if it is an illustration. In addition, a characteristic part, color, shape, size, position, etc. of the drawn image are recognized and extracted.

描画情報登録部8は、描画認識抽出部7で抽出した描画イメージの対象となる部分を分類別にする。例えば、人の描画イメージでネクタイに背広の姿をしていた場合はビジネスマン、帽子とユニホーム姿をしていたら野球選手と識別して分類する。そして、描画イメージの対象となる部分について分類別に優先度の高い順番に描画データとして描画情報データベース8aに登録する。なお、この優先度は、描画認識抽出部7で抽出した部分について抽出される度合いに基づいて設定される。それにより、抽出される度合いが高い描画イメージを早く検索することができるようになる。また、この描画イメージについて、描画に関する情報も描画情報データベース8aに登録する。さらに、描画イメージ及びその描画に関する情報を描画情報データベース8aに登録する際、その描画がイメージ入力されたユーザー端末を識別可能な識別情報となるユーザーIDを、これら描画イメージ及びその描画に関する情報に対応づけて描画情報データベース8aに登録する。   The drawing information registration unit 8 classifies the target portion of the drawing image extracted by the drawing recognition extraction unit 7 by classification. For example, if a person's drawing image shows a tie in a suit, a business man, and if wearing a hat and uniform, identify them as baseball players. Then, the drawing image target part is registered in the drawing information database 8a as drawing data in descending order of priority for each classification. This priority is set based on the degree of extraction of the portion extracted by the drawing recognition extraction unit 7. Thereby, a drawing image with a high degree of extraction can be searched quickly. In addition, for this drawing image, information related to drawing is also registered in the drawing information database 8a. Furthermore, when registering a drawing image and information related to the drawing in the drawing information database 8a, a user ID serving as identification information for identifying the user terminal to which the drawing is input corresponds to the information related to the drawing image and the drawing. Then, it is registered in the drawing information database 8a.

描画検索部9は、ユーザー端末(検索者)1から送信されてきた描画イメージについて、描画情報データベース8aに登録された描画データに対して、描画イメージの対象となる部分(色、形、サイズ、位置等)の位置を移動、拡大、縮小等で合成し、比較して描画検索により絞り込みを行う。そして、描画情報データベース8aの中から、ユーザー端末(検索者)1から送信されてきた描画イメージに対して類似度が高い描画データを検索する。また、その描画に関する情報も描画情報データベース8aの中から検索する。   For the drawing image transmitted from the user terminal (searcher) 1, the drawing search unit 9 performs a drawing image target portion (color, shape, size, etc.) with respect to the drawing data registered in the drawing information database 8 a. Position), etc. are combined by moving, enlarging, reducing, etc., and compared, and narrowed down by drawing search. Then, the drawing information database 8a is searched for drawing data having a high similarity to the drawing image transmitted from the user terminal (searcher) 1. Also, information related to the drawing is searched from the drawing information database 8a.

合成表示部10は、描画検索部9で描画検索をした結果、ユーザー端末(検索者)1から送信されてきた描画イメージに対して類似度が高い描画データが描画情報データベース8aの中から検索された場合は、その描画データや描画に関する情報をユーザー端末(検索者)1へ送信する。描画データと描画に関する情報をユーザー端末(検索者)1へ送信する場合は、それらを合成して送信する。また、描画検索部9にて検索された描画データを既に登録していた他ユーザー端末(登録者)3に対して、その描画に関する情報の提供を依頼し、他ユーザー端末(登録者)3から提供された描画に関する情報をユーザー端末(検索者)1に送信する。また、ユーザー端末(検索者)1が描画検索を行った後、同様に他ユーザー端末(検索者)4も描画サーチ検索を行った結果、ユーザー端末(検索者)1が登録した描画データに類似していたならば、他ユーザー端末(検索者)4から送信されてきた描画データやそれに関する情報を自動的にユーザー端末(検索者)1へ送信する。更に、描画検索した結果、描画に対して類似度が高い描画データが検索されなかった場合は、代行して描画サーチ検索を行う代行検索サイト5へ送信する。また、他ユーザー端末(登録者)3や代行検索サイト5からの情報を描画情登録部8に通知する。   As a result of the drawing search performed by the drawing search unit 9, the composite display unit 10 searches the drawing information database 8a for drawing data having a high similarity to the drawing image transmitted from the user terminal (searcher) 1. If it is, the drawing data and information about drawing are transmitted to the user terminal (searcher) 1. When transmitting drawing data and information related to drawing to the user terminal (searcher) 1, they are combined and transmitted. Further, the other user terminal (registrant) 3 who has already registered the drawing data searched by the drawing search unit 9 is requested to provide information related to the drawing. Information on the provided drawing is transmitted to the user terminal (searcher) 1. In addition, after the user terminal (searcher) 1 performs a drawing search, the other user terminal (searcher) 4 also performs a drawing search search. As a result, similar to the drawing data registered by the user terminal (searcher) 1 If so, the drawing data transmitted from the other user terminal (searcher) 4 and information related thereto are automatically transmitted to the user terminal (searcher) 1. Further, if drawing data having a high similarity to drawing is not found as a result of the drawing search, the drawing search is sent to the substitute search site 5 that performs drawing search instead. In addition, the drawing information registration unit 8 is notified of information from the other user terminal (registrant) 3 and the proxy search site 5.

以下に、上記のように構成された描画検索システムの動作について説明する。   The operation of the drawing search system configured as described above will be described below.

図3は、図1に示した描画検索システムにおいてユーザー端末(検索者)1にてイメージ入力された描画に基づいて検索された描画データが他ユーザー端末(登録者)3によって登録されたものである場合の処理を説明するための図である。   FIG. 3 is a diagram in which drawing data searched based on drawing input by the user terminal (searcher) 1 in the drawing search system shown in FIG. 1 is registered by another user terminal (registrant) 3. It is a figure for demonstrating the process in a certain case.

ユーザー端末(検索者)1において、描画検索画面に手書きによって描画イメージ(b)が入力され、描画検索端末2に送信される(A1)。   In the user terminal (searcher) 1, the drawing image (b) is input by handwriting on the drawing search screen and transmitted to the drawing search terminal 2 (A1).

描画検索端末2において、ユーザー端末(検索者)1から送信されてきた描画イメージ(b)について、描画情報データベース8aが参照されて描画検索が実施される。その結果、ユーザー端末(検索者)1から送信されてきた描画イメージ(b)に対して類似度が高い描画データ(b1,b2,b3)が検索され、この描画データ(b1,b2,b3)がユーザー端末(検索者)1に送信される。なお、類似度は描画検索端末2にて予め設定されており、その設定された類似度を用いて、描画イメージが類似しているかどうかが判断されることになる。ここで、描画検索端末2にて検索された描画データ(b1,b2,b3)は、描画データ(b1)が他ユーザー端末(登録者)31によって登録されたものであり、描画データ(b2)が他ユーザー端末(登録者)32によって登録されたものであり、描画データ(b3)が他ユーザー端末(登録者)33によって登録されたものである。そのため、描画データ(b1)が他ユーザー端末(登録者)31に送信され、また、描画データ(b2)が他ユーザー端末(登録者)32に送信され、また、描画データ(b3)が他ユーザー端末(登録者)33に送信される(A2)。   In the drawing search terminal 2, the drawing search is performed with reference to the drawing information database 8 a for the drawing image (b) transmitted from the user terminal (searcher) 1. As a result, drawing data (b1, b2, b3) having a high similarity to the drawing image (b) transmitted from the user terminal (searcher) 1 is searched, and this drawing data (b1, b2, b3). Is transmitted to the user terminal (searcher) 1. The similarity is set in advance in the drawing search terminal 2, and it is determined whether the drawn images are similar using the set similarity. Here, the drawing data (b1, b2, b3) searched by the drawing search terminal 2 is obtained by registering the drawing data (b1) by the other user terminal (registrant) 31, and the drawing data (b2). Is registered by the other user terminal (registrant) 32, and the drawing data (b 3) is registered by the other user terminal (registrant) 33. Therefore, the drawing data (b1) is transmitted to the other user terminal (registrant) 31, the drawing data (b2) is transmitted to the other user terminal (registrant) 32, and the drawing data (b3) is transmitted to the other user. It is transmitted to the terminal (registrant) 33 (A2).

そして、他ユーザー端末(登録者)31において、描画データ(b1)に関する情報(c1)が抽出されて描画検索端末2に送信され、また、他ユーザー端末(登録者)32において、描画データ(b2)に関する情報(c2)が抽出されて描画検索端末2に送信され、また、他ユーザー端末(登録者)33において、描画データ(b3)に関する情報(c3)が抽出されて描画検索端末2に送信される(A3)。   Then, the information (c1) related to the drawing data (b1) is extracted and transmitted to the drawing search terminal 2 at the other user terminal (registrant) 31, and the drawing data (b2) is sent to the other user terminal (registrant) 32. ) Information (c2) is extracted and transmitted to the drawing search terminal 2, and information (c3) related to the drawing data (b3) is extracted and transmitted to the drawing search terminal 2 at the other user terminal (registrant) 33. (A3).

描画検索端末2においては、描画データ(b1)にその描画データに関する情報(c1)が合成されて描画検索の画面に表示され、また、描画データ(b2)にその描画データに関する情報(c2)が合成されて描画検索の画面に表示され、また、描画データ(b3)にその描画データに関する情報(c3)が合成されて描画検索の画面に表示され、ユーザー端末(検索者)1に送信される(A4)。   In the drawing search terminal 2, information (c1) related to the drawing data is combined with the drawing data (b1) and displayed on the drawing search screen, and information (c2) related to the drawing data is displayed in the drawing data (b2). The combined data is displayed on the drawing search screen, and the drawing data (b3) is combined with the information (c3) on the drawing data and displayed on the drawing search screen, and transmitted to the user terminal (searcher) 1. (A4).

これにより、ユーザー端末(検索者)1に手書き入力された描画イメージに類似する描画イメージを取得することができるとともに、その描画イメージに関する情報を取得することができる。   Thereby, while being able to acquire the drawing image similar to the drawing image input by handwriting in the user terminal (searcher) 1, the information regarding the drawing image can be acquired.

図4は、図1に示した描画検索システムにおいて、ユーザー端末(検索者)1にてイメージ入力された描画に基づいて検索された描画データが他ユーザー端末(登録者)3によって登録されたものである場合の処理を説明するためのフローチャートである。なお、本例では、ユーザー端末(検索者)1が第2の利用者端末となり、他ユーザー端末(登録者)3が第1の利用者端末となる。   FIG. 4 shows a drawing search system shown in FIG. 1 in which drawing data searched based on drawing input by a user terminal (searcher) 1 is registered by another user terminal (registrant) 3. It is a flowchart for demonstrating the process in being. In this example, the user terminal (searcher) 1 is the second user terminal, and the other user terminal (registrant) 3 is the first user terminal.

本例は、ユーザー端末(検索者)1に手書き入力された描画イメージについて描画検索端末2で描画検索を行った後に、ユーザー端末(検索者)1へ検索された描画データを送付するとともに、その描画データを登録した他ユーザー端末(登録者)3に対して、その描画データに関する情報の提供依頼をし、ユーザー端末(検索者)1へ描画データに関する情報を提供するものである。   In this example, after the drawing search terminal 2 performs a drawing search on a drawing image input by handwriting to the user terminal (searcher) 1, the searched drawing data is sent to the user terminal (searcher) 1. A request is made to provide information related to the drawing data to another user terminal (registrant) 3 who has registered the drawing data, and information related to the drawing data is provided to the user terminal (searcher) 1.

まず、ユーザー端末(検索者)1により、描画検索端末2が開設している描画検索エンジンのホームページへアクセスする(ステップS1)。   First, the user terminal (searcher) 1 accesses the homepage of the drawing search engine established by the drawing search terminal 2 (step S1).

すると、これに応答して、描画検索画面の情報が描画検索端末2からユーザー端末(検索者)1に送信され(ステップS2)、ユーザー端末(検索者)1に表示される(ステップS3)。   In response to this, information on the drawing search screen is transmitted from the drawing search terminal 2 to the user terminal (searcher) 1 (step S2) and displayed on the user terminal (searcher) 1 (step S3).

その後、ユーザー端末(検索者)1において、所望の描画イメージが手書き入力される(ステップS4)。また、その描画イメージに関する情報を入力することもできる。   Thereafter, a desired drawing image is input by handwriting on the user terminal (searcher) 1 (step S4). Information about the drawing image can also be input.

図5は、図1に示したユーザー端末(検索者)1に描画イメージが手書き入力される状態を示す図である。   FIG. 5 is a diagram illustrating a state in which a drawing image is input by handwriting to the user terminal (searcher) 1 illustrated in FIG.

図5に示すように、ユーザー端末(検索者)1のモニタ画面11に、ペン12等によって描画イメージが手書き入力される。   As shown in FIG. 5, a drawing image is handwritten on the monitor screen 11 of the user terminal (searcher) 1 with a pen 12 or the like.

そして、手書き入力された描画イメージがユーザー端末(検索者)1から送信され(ステップS5)、描画検索端末2において、その描画イメージと描画に関する情報が受信される(ステップS6)。また、この際、ユーザー端末(検索者)1を識別可能なユーザーIDも、ユーザー端末(検索者)1から送信されて描画検索端末2にて受信される。   The handwritten input drawing image is transmitted from the user terminal (searcher) 1 (step S5), and the drawing search terminal 2 receives the drawing image and information related to drawing (step S6). At this time, a user ID that can identify the user terminal (searcher) 1 is also transmitted from the user terminal (searcher) 1 and received by the drawing search terminal 2.

描画検索端末2においては、まず、描画認識抽出部7において、ユーザー端末(検索者)1から送信されてきた描画イメージについて、場所のイラスト、物のイラスト、人のイラストであるかが識別され、また、描画イメージの特徴とする部分や色、形、サイズ、位置等が認識されて抽出される。   In the drawing search terminal 2, first, the drawing recognition extraction unit 7 identifies whether the drawing image transmitted from the user terminal (searcher) 1 is a place illustration, an object illustration, or a person illustration, In addition, the characteristic part, color, shape, size, position, etc. of the drawn image are recognized and extracted.

また、描画イメージの対象となる部分が分類別にされ、描画イメージの対象となる部分が抽出された優先度の高い順番に設定される。   In addition, the drawing image target parts are classified, and the drawing image target parts are set in the order of high priority.

そして、描画情報登録部8において、ユーザー端末(検索者)1から送信されてきた描画イメージが描画情報データベース8aに登録される(ステップS7)。この際、描画イメージは、ユーザー端末(検索者)1を識別可能なユーザーIDと対応づけて登録される。   In the drawing information registration unit 8, the drawing image transmitted from the user terminal (searcher) 1 is registered in the drawing information database 8a (step S7). At this time, the drawing image is registered in association with a user ID that can identify the user terminal (searcher) 1.

また、描画検索部9において、ユーザー端末(検索者)1から送信されてきた描画イメージの対象となる部分が位置の移動、拡大、縮小等によって、描画情報データベース8aに登録された描画データと合成されることにより比較されて絞り込みが行われる(ステップS8)。   Further, the drawing search unit 9 combines the drawing data registered in the drawing information database 8a by moving, enlarging or reducing the position of the drawing image transmitted from the user terminal (searcher) 1 by moving the position, enlarging or reducing the position. As a result, comparison is made and narrowing down is performed (step S8).

そして、描画情報データベース8aに登録された描画データの中から、ユーザー端末(検索者)1から送信されてきた描画イメージに類似する描画データが抽出され(ステップS9)、合成表示部10からユーザー端末(検索者)1に送信される。   Then, drawing data similar to the drawing image transmitted from the user terminal (searcher) 1 is extracted from the drawing data registered in the drawing information database 8a (step S9). (Searcher) 1 is transmitted.

ユーザー端末(検索者)1においては、描画検索端末2から送信されてきた検索結果となる描画データが表示され、それにより、手書き入力した描画イメージに類似した描画データを取得することができる(ステップS10)。   In the user terminal (searcher) 1, the drawing data that is the search result transmitted from the drawing search terminal 2 is displayed, and thereby drawing data similar to the drawing image input by handwriting can be acquired (step). S10).

図6は、図1に示した描画検索システムにおいてユーザー端末(検索者)1に表示される検索結果の一例を示す図である。   6 is a diagram showing an example of a search result displayed on the user terminal (searcher) 1 in the drawing search system shown in FIG.

図6に示すように、ユーザー端末(検索者)1に図5に示したような描画イメージが入力された場合、これに類似した描画データが描画検索端末2にて検索され、ユーザー端末(検索者)1に表示されることになる。   As shown in FIG. 6, when a drawing image as shown in FIG. 5 is input to the user terminal (searcher) 1, drawing data similar to this is searched by the drawing search terminal 2, and the user terminal (search) 1) is displayed.

またこの際、描画情報データベース8aから検索された描画データが、他ユーザー端末(登録者)3にて上記同様に手書き入力されて描画情報データベース8aに登録されたものである場合、描画検索端末2の合成表示部10において、検索された描画データが他ユーザー端末(登録者)3に送信される。これは、描画情報データベース8aには、描画データが、その描画データを登録した他ユーザー端末(登録者)3を識別可能なユーザーIDに対応づけて登録されているため、このユーザーIDによって、検索された描画データを登録した他ユーザー端末(登録者)3を識別することができる。これにより、合成表示部10においては、検索された描画データに関する情報の提供を他ユーザー端末(登録者)3に依頼することになる。   At this time, if the drawing data retrieved from the drawing information database 8a is input by handwriting at the other user terminal (registrant) 3 and registered in the drawing information database 8a as described above, the drawing retrieval terminal 2 In the composite display unit 10, the retrieved drawing data is transmitted to the other user terminal (registrant) 3. This is because the drawing data is registered in the drawing information database 8a in association with a user ID that can identify the other user terminal (registrant) 3 who registered the drawing data. The other user terminal (registrant) 3 who registered the drawn data can be identified. As a result, the composite display unit 10 requests the other user terminal (registrant) 3 to provide information related to the retrieved drawing data.

これに対して、他ユーザー端末(登録者)3において、描画検索端末2から送信されてきた描画データに関する情報が提供されると(ステップS11)、描画検索端末2の合成表示部10において、描画データと、他ユーザー端末(登録者)3から送信されてきた情報とが合成されてユーザー端末(検索者)1に送信される。   On the other hand, when the information on the drawing data transmitted from the drawing search terminal 2 is provided in the other user terminal (registrant) 3 (step S11), the combined display unit 10 of the drawing search terminal 2 draws the drawing data. The data and the information transmitted from the other user terminal (registrant) 3 are combined and transmitted to the user terminal (searcher) 1.

描画検索端末2にて合成された送信された描画データ及びそれに関する情報はユーザー端末(検索者)1にて表示され、それにより、手書き入力した描画イメージに類似した描画データ及びそれに関する情報を取得することができる(ステップS12)。   The transmitted drawing data synthesized in the drawing search terminal 2 and information related thereto are displayed in the user terminal (searcher) 1, thereby acquiring drawing data similar to the drawing image input by handwriting and information related thereto. (Step S12).

図7は、図1に示した描画検索システムにおいてユーザー端末(検索者)1に表示される検索結果の一例を示す図である。   7 is a diagram showing an example of a search result displayed on the user terminal (searcher) 1 in the drawing search system shown in FIG.

図7に示すように、ユーザー端末(検索者)1には、描画検索端末2にて検索された描画データと、他ユーザー端末(登録者)3から提供され、描画データに関する情報とが合成されて表示されることになる。   As shown in FIG. 7, the user terminal (searcher) 1 combines the drawing data searched by the drawing search terminal 2 with the information related to the drawing data provided from the other user terminal (registrant) 3. Will be displayed.

次に、ユーザー端末(検索者)1が描画検索を行った後、同様に他ユーザー端末(検索者)4も描画サーチ検索を行い、描画検索の結果、他ユーザー端末(検索者)4に手書き入力された描画イメージが、ユーザー端末(検索者)1が登録した描画データに類似していた場合の処理について説明する。   Next, after the user terminal (searcher) 1 performs a drawing search, the other user terminal (searcher) 4 also performs a drawing search search. As a result of the drawing search, handwriting is performed on the other user terminal (searcher) 4. A process when the input drawing image is similar to the drawing data registered by the user terminal (searcher) 1 will be described.

図8は、図1に示した描画検索システムにおいてユーザー端末(検索者)1が描画検索を行った後、同様に他ユーザー端末(検索者)4も描画サーチ検索を行い、描画検索の結果、他ユーザー端末(検索者)4に手書き入力された描画イメージが、ユーザー端末(検索者)1が登録した描画データに類似していた場合の処理を説明するためのフローチャートである。なお、本例では、ユーザー端末(検索者)1が第2の利用者端末となり、他ユーザー端末(検索者)4が第1の利用者端末となる。   FIG. 8 shows that after the user terminal (searcher) 1 performs a drawing search in the drawing search system shown in FIG. 1, the other user terminal (searcher) 4 also performs a drawing search search. It is a flowchart for demonstrating a process in case the drawing image input by handwriting into the other user terminal (searcher) 4 is similar to the drawing data which the user terminal (searcher) 1 registered. In this example, the user terminal (searcher) 1 is the second user terminal, and the other user terminal (searcher) 4 is the first user terminal.

ユーザー端末(検索者)1において、図4に示したステップS1〜S10の処理が行われた後、他ユーザー端末(検索者)4においても、図4に示したステップS1〜S10の処理が行われ、他ユーザー端末(検索者)4に手書き入力された描画イメージが、ユーザー端末(検索者)1が登録した描画データに類似していた場合は、他ユーザー端末(登録者)4において、手書き入力された描画イメージに関する情報が提供されると(ステップS13)、描画検索端末2の合成表示部10において、描画データと、他ユーザー端末(登録者)4から送信されてきた情報とが合成されてユーザー端末(検索者)1に送信される。   After the processing of steps S1 to S10 shown in FIG. 4 is performed at the user terminal (searcher) 1, the processing of steps S1 to S10 shown in FIG. If the drawing image input by handwriting on the other user terminal (searcher) 4 is similar to the drawing data registered by the user terminal (searcher) 1, the other user terminal (registrant) 4 When information about the input drawing image is provided (step S13), the combined display unit 10 of the drawing search terminal 2 combines the drawing data with the information transmitted from the other user terminal (registrant) 4. To the user terminal (searcher) 1.

描画検索端末2にて合成された送信された描画データ及びそれに関する情報は、図9に示したようにユーザー端末(検索者)1にて表示され、それにより、描画検索端末2に登録された描画データに関する情報を取得することができる(ステップS14)。   The transmitted drawing data synthesized by the drawing search terminal 2 and information related thereto are displayed on the user terminal (searcher) 1 as shown in FIG. Information about the drawing data can be acquired (step S14).

次に、描画検索端末2においてユーザー端末(検索者)1に手書き入力された描画イメージについて描画検索を行った結果、類似しているものがなかった場合の処理について説明する。   Next, a description will be given of processing when there is no similarity as a result of performing a drawing search on a drawing image input by handwriting to the user terminal (searcher) 1 in the drawing search terminal 2.

図9は、図1に示した描画検索システムにおいて、描画検索端末2においてユーザー端末(検索者)1に手書き入力された描画イメージについて描画検索を行った結果、類似しているものがなかった場合の処理を説明するためのフローチャートである。   FIG. 9 shows a case where the drawing retrieval system shown in FIG. 1 does not have a similarity as a result of a drawing retrieval performed on the drawing image handwritten to the user terminal (searcher) 1 in the drawing retrieval terminal 2. It is a flowchart for demonstrating the process of.

図4に示したステップS1〜S8の処理が行われ、描画検索した結果、描画に対して類似度が高い描画データが検索されなかった場合は、ユーザー端末(検索者)1に手書き入力された描画イメージが、描画検索端末2の合成表示部10から描画検索を代行して行う代行検索サイト5へ送信される。   When the processing of steps S1 to S8 shown in FIG. 4 is performed and the drawing search results in that drawing data having a high similarity to the drawing is not searched, the user terminal (searcher) 1 inputs the handwriting. The drawing image is transmitted from the composite display unit 10 of the drawing search terminal 2 to the proxy search site 5 that performs the drawing search as a proxy.

そして、代行検索サイト5において、描画検索端末2から送信されてきた描画イメージに類似する描画データが検索され、描画検索端末2を介してユーザー端末(検索者)1に送信される(ステップS15)。   Then, drawing data similar to the drawing image transmitted from the drawing search terminal 2 is searched at the proxy search site 5 and transmitted to the user terminal (searcher) 1 via the drawing search terminal 2 (step S15). .

代行検索サイト5から送信された描画データ及びそれに関する情報は、図9に示したようにユーザー端末(検索者)1にて表示され、それにより、ユーザー端末(検索者)1に手書き入力された描画イメージ及びそれに関する情報を取得することができる(ステップS16)。   The drawing data transmitted from the proxy search site 5 and the information related thereto are displayed on the user terminal (searcher) 1 as shown in FIG. A drawing image and information related thereto can be acquired (step S16).

本発明の描画検索システムの実施の一形態を示す図である。It is a figure which shows one Embodiment of the drawing search system of this invention. 図1に示した描画検索端末の構成を示すブロック図である。FIG. 2 is a block diagram showing a configuration of a drawing search terminal shown in FIG. 図1に示した描画検索システムにおいてユーザー端末(検索者)にてイメージ入力された描画に基づいて検索された描画データが他ユーザー端末(登録者)によって登録されたものである場合の処理を説明するための図である。The processing when the drawing data searched based on the drawing input by the user terminal (searcher) in the drawing search system shown in FIG. 1 is registered by another user terminal (registrant) will be described. It is a figure for doing. 図1に示した描画検索システムにおいて、ユーザー端末(検索者)にてイメージ入力された描画に基づいて検索された描画データが他ユーザー端末(登録者)によって登録されたものである場合の処理を説明するためのフローチャートである。In the drawing search system shown in FIG. 1, processing when drawing data searched based on drawing input by an image at a user terminal (searcher) is registered by another user terminal (registrant). It is a flowchart for demonstrating. 図1に示したユーザー端末(検索者)に描画イメージが手書き入力される状態を示す図である。It is a figure which shows the state by which a drawing image is input by handwriting into the user terminal (searcher) shown in FIG. 図1に示した描画検索システムにおいてユーザー端末(検索者)に表示される検索結果の一例を示す図である。It is a figure which shows an example of the search result displayed on a user terminal (searcher) in the drawing search system shown in FIG. 図1に示した描画検索システムにおいてユーザー端末(検索者)に表示される検索結果の一例を示す図である。It is a figure which shows an example of the search result displayed on a user terminal (searcher) in the drawing search system shown in FIG. 図1に示した描画検索システムにおいてユーザー端末(検索者)が描画検索を行った後、同様に他ユーザー端末(検索者)も描画サーチ検索を行い、描画検索の結果、他ユーザー端末(検索者)に手書き入力された描画イメージが、ユーザー端末(検索者)が登録した描画データに類似していた場合の処理を説明するためのフローチャートである。In the drawing search system shown in FIG. 1, after a user terminal (searcher) performs a drawing search, another user terminal (searcher) similarly performs a drawing search search. As a result of the drawing search, the other user terminal (searcher) ) Is a flowchart for explaining processing in a case where the drawing image input by handwriting is similar to the drawing data registered by the user terminal (searcher). 図1に示した描画検索システムにおいて、描画検索端末においてユーザー端末(検索者)に手書き入力された描画イメージについて描画検索を行った結果、類似しているものがなかった場合の処理を説明するためのフローチャートである。In the drawing search system shown in FIG. 1, for explaining a process when there is no similarity as a result of performing a drawing search on a drawing image input by handwriting to a user terminal (searcher) in a drawing search terminal. It is a flowchart of. 従来の画像検索装置の一構成例を示す図である。It is a figure which shows the example of 1 structure of the conventional image search apparatus.

符号の説明Explanation of symbols

1 ユーザー端末(検索者)
2 描画検索端末
3 他ユーザー端末(登録者)
4 他ユーザー端末(検索者)
5 代行検索サイト
6 ネットワーク
7 描画認識抽出部
8 描画情報登録部
8a 描画情報データベース
9 描画検索部
10 合成表示部
11 モニタ画面
12 ペン
1 User terminal (searcher)
2 Drawing search terminal 3 Other user terminal (registrant)
4 Other user terminal (searcher)
5 Proxy Search Site 6 Network 7 Drawing Recognition Extraction Unit 8 Drawing Information Registration Unit 8a Drawing Information Database 9 Drawing Search Unit 10 Composite Display Unit 11 Monitor Screen 12 Pen

Claims (14)

描画をイメージ入力するための利用者端末と、描画データが登録され、前記利用者端末にイメージ入力された描画に基づいて描画データを検索し、該描画データを前記利用者端末に提供する描画検索端末とがネットワークを介して接続されてなる描画検索システムにおいて、
前記描画検索端末は、
描画データ及び該描画データに関する情報が登録された描画情報データベースと、
前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に基づいて描画データ及び該描画データに関する情報を検索する描画検索部と、
前記描画検索部にて検索された描画データ及び該描画データに関する情報を前記利用者端末に送信する合成表示部と、
前記利用者端末にイメージ入力された描画を、当該利用者端末を識別可能な識別情報と対応づけて描画データとして前記描画情報データベースに登録する描画データ登録部とを有し、
前記合成表示部は、前記描画検索部にて検索された描画データに対応づけられた識別情報によって識別される第1の利用者端末に対して当該描画データを送信し、前記第1の利用者端末から提供された描画に関する情報を、当該描画がイメージ入力された第2の利用者端末に送信することを特徴とする描画検索システム。
A user terminal for inputting a drawing image and a drawing search in which drawing data is registered, the drawing data is searched based on the drawing image input to the user terminal, and the drawing data is provided to the user terminal In a drawing search system in which a terminal is connected via a network,
The drawing search terminal
A drawing information database in which drawing data and information related to the drawing data are registered;
A drawing search unit for searching for drawing data and information related to the drawing data based on drawing input to the user terminal from the drawing information database;
A combined display unit that transmits drawing data searched by the drawing search unit and information related to the drawing data to the user terminal;
A drawing data registration unit that registers drawing drawn by image input to the user terminal with drawing information database as drawing data in association with identification information capable of identifying the user terminal;
The composite display unit transmits the drawing data to a first user terminal identified by identification information associated with the drawing data searched by the drawing search unit, and the first user A drawing search system, wherein information relating to drawing provided from a terminal is transmitted to a second user terminal to which an image of the drawing is input.
描画をイメージ入力するための利用者端末と、描画データが登録され、前記利用者端末にイメージ入力された描画に基づいて描画データを検索し、該描画データを前記利用者端末に提供する描画検索端末とがネットワークを介して接続されてなる描画検索システムにおいて、
前記描画検索端末は、
描画データ及び該描画データに関する情報が登録された描画情報データベースと、
前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に基づいて描画データ及び該描画データに関する情報を検索する描画検索部と、
前記描画検索部にて検索された描画データ及び該描画データに関する情報を前記利用者端末に送信する合成表示部と、
前記利用者端末にイメージ入力された描画を、当該利用者端末を識別可能な識別情報と対応づけて描画データとして前記描画情報データベースに登録する描画データ登録部とを有し、
前記合成表示部は、前記描画情報データベースに登録された描画データを検索対象とする描画が第1の利用者端末にてイメージ入力されるとともに該描画に関する情報が入力された場合、前記描画情報データベースにて前記描画データに対応づけられた識別情報によって識別される第2の利用者端末に対して、前記描画及び該描画に関する情報を送信することを特徴とする描画検索システム。
A user terminal for inputting a drawing image and a drawing search in which drawing data is registered, the drawing data is searched based on the drawing image input to the user terminal, and the drawing data is provided to the user terminal In a drawing search system in which a terminal is connected via a network,
The drawing search terminal
A drawing information database in which drawing data and information related to the drawing data are registered;
A drawing search unit for searching for drawing data and information related to the drawing data based on drawing input to the user terminal from the drawing information database;
A combined display unit that transmits drawing data searched by the drawing search unit and information related to the drawing data to the user terminal;
A drawing data registration unit that registers drawing drawn by image input to the user terminal with drawing information database as drawing data in association with identification information capable of identifying the user terminal;
When the drawing for which the drawing data registered in the drawing information database is to be searched is input as an image at the first user terminal and information related to the drawing is input, the composite display unit A drawing search system, wherein the drawing and information related to the drawing are transmitted to a second user terminal identified by identification information associated with the drawing data.
請求項1または請求項2に記載の描画検索システムにおいて、
前記描画検索部は、前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に対して類似度が高い描画データ及び該描画データに関する情報を検索することを特徴とする描画検索システム。
In the drawing search system according to claim 1 or 2,
The drawing search system, wherein the drawing search unit searches the drawing information database for drawing data having a high similarity to the drawing input as an image to the user terminal and information related to the drawing data.
請求項1または請求項2に記載の描画検索システムにおいて、
前記利用者端末は、前記イメージ入力された描画とともに前記識別情報を前記描画検索端末に送信することを特徴とする描画検索システム。
In the drawing search system according to claim 1 or 2,
The drawing search system, wherein the user terminal transmits the identification information together with the drawing with the image input to the drawing search terminal.
請求項1乃至4のいずれか1項に記載の描画検索システムにおいて、
前記合成表示部は、前記描画データと前記描画に関する情報とを合成して前記利用者端末に送信することを特徴とする描画検索システム。
The drawing search system according to any one of claims 1 to 4,
The drawing display system, wherein the combining display unit combines the drawing data and the information related to drawing and transmits the combined data to the user terminal.
描画をイメージ入力するための利用者端末と、描画データが登録され、前記利用者端末にイメージ入力された描画に基づいて描画データを検索し、該描画データを前記利用者端末に提供する描画検索端末とがネットワークを介して接続されてなる描画検索システムを用いた描画検索方法であって、
前記利用者端末が、イメージ入力された描画を前記描画検索端末に送信する処理と、
前記描画検索端末が、描画情報データベースの中から前記利用者端末にイメージ入力された描画に基づいて描画データ及び該描画データに関する情報を検索する処理と、
前記描画検索端末が、前記利用者端末にイメージ入力された描画を描画データとして前記描画情報データベースに登録する処理と、
前記描画検索端末が、前記描画情報データベースから検索された描画データ及び該描画データに関する情報を前記利用者端末に送信する処理と、
前記描画検索端末が、前記描画情報データベースから検索された描画データに対応づけられた識別情報によって識別される第1の利用者端末に当該描画データを送信する処理と、
前記描画検索端末が、前記第1の利用者端末から提供された描画に関する情報を、当該描画がイメージ入力された第2の利用者端末に送信する処理とを有することを特徴とする描画検索方法。
A user terminal for inputting a drawing image and a drawing search in which drawing data is registered, the drawing data is searched based on the drawing image input to the user terminal, and the drawing data is provided to the user terminal A drawing search method using a drawing search system in which a terminal is connected via a network,
A process in which the user terminal transmits the image-input drawing to the drawing search terminal;
The drawing search terminal searches the drawing information database for drawing data and information related to the drawing data based on drawing input to the user terminal as an image;
Processing for the drawing search terminal to register the drawing inputted as an image in the user terminal in the drawing information database as drawing data;
A process in which the drawing search terminal transmits drawing data searched from the drawing information database and information related to the drawing data to the user terminal;
A process in which the drawing search terminal transmits the drawing data to a first user terminal identified by identification information associated with the drawing data searched from the drawing information database;
A drawing search method comprising: a process in which the drawing search terminal transmits information related to drawing provided from the first user terminal to a second user terminal to which the drawing is input as an image. .
描画をイメージ入力するための利用者端末と、描画データが登録され、前記利用者端末にイメージ入力された描画に基づいて描画データを検索し、該描画データを前記利用者端末に提供する描画検索端末とがネットワークを介して接続されてなる描画検索システムを用いた描画検索方法であって、
前記利用者端末が、イメージ入力された描画を前記描画検索端末に送信する処理と、
前記描画検索端末が、描画情報データベースの中から前記利用者端末にイメージ入力された描画に基づいて描画データ及び該描画データに関する情報を検索する処理と、
前記描画検索端末が、前記利用者端末にイメージ入力された描画を描画データとして前記描画情報データベースに登録する処理と、
前記描画検索端末が、前記描画情報データベースから検索された描画データ及び該描画データに関する情報を前記利用者端末に送信する処理と、
前記描画検索端末が、前記描画情報データベースに登録された描画データを検索対象とする描画が第1の利用者端末にてイメージ入力されるとともに該描画に関する情報が入力された場合、前記描画情報データベースにて前記描画データに対応づけられた識別情報によって識別される第2の利用者端末に対して、前記描画及び該描画に関する情報を送信する処理とを有することを特徴とする描画検索方法。
A user terminal for inputting a drawing image and a drawing search in which drawing data is registered, the drawing data is searched based on the drawing image input to the user terminal, and the drawing data is provided to the user terminal A drawing search method using a drawing search system in which a terminal is connected via a network,
A process in which the user terminal transmits the image-input drawing to the drawing search terminal;
The drawing search terminal searches the drawing information database for drawing data and information related to the drawing data based on drawing input to the user terminal as an image;
Processing for the drawing search terminal to register the drawing inputted as an image in the user terminal in the drawing information database as drawing data;
A process in which the drawing search terminal transmits drawing data searched from the drawing information database and information related to the drawing data to the user terminal;
When the drawing retrieval terminal receives a drawing for which the drawing data registered in the drawing information database is to be retrieved as an image input at the first user terminal and information relating to the drawing is inputted, the drawing information database And a process of transmitting the drawing and information relating to the drawing to a second user terminal identified by the identification information associated with the drawing data.
請求項6または請求項7に記載の描画検索方法において、
前記描画検索端末が、前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に対して類似度が高い描画データ及び該描画データに関する情報を検索する処理を有することを特徴とする描画検索方法。
In the drawing search method according to claim 6 or 7,
The drawing search terminal has processing for searching the drawing information database for drawing data having a high degree of similarity to the drawing input as an image to the user terminal and information related to the drawing data from the drawing information database retrieval method.
請求項6または請求項7に記載の描画検索方法において、
前記利用者端末が、前記イメージ入力された描画とともに前記識別情報を前記描画検索端末に送信する処理を有することを特徴とする描画検索方法。
In the drawing search method according to claim 6 or 7,
A drawing search method comprising: a process in which the user terminal transmits the identification information to the drawing search terminal together with the image input drawing.
請求項6乃至9のいずれか1項に記載の描画検索方法において、
前記描画検索端末が、前記描画データと前記描画に関する情報とを合成して前記利用者端末に送信する処理を有することを特徴とする描画検索方法。
In the drawing search method according to any one of claims 6 to 9,
A drawing search method comprising: a process in which the drawing search terminal synthesizes the drawing data and information related to the drawing and transmits the combined data to the user terminal.
描画をイメージ入力するための利用者端末にネットワークを介して接続され、描画データが登録され、前記利用者端末にイメージ入力された描画に基づいて描画データを検索し、該描画データを前記利用者端末に提供する描画検索端末であって、
描画データ及び該描画データに関する情報が登録された描画情報データベースと、
前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に基づいて描画データ及び該描画データに関する情報を検索する描画検索部と、
前記描画検索部にて検索された描画データ及び該描画データに関する情報を前記利用者端末に送信する合成表示部と、
前記利用者端末にイメージ入力された描画を、当該利用者端末を識別可能な識別情報と対応づけて描画データとして前記描画情報データベースに登録する描画データ登録部とを有し、
前記合成表示部は、前記描画検索部にて検索された描画データに対応づけられた識別情報によって識別される第1の利用者端末に対して当該描画データを送信し、前記第1の利用者端末から提供された描画に関する情報を、当該描画がイメージ入力された第2の利用者端末に送信することを特徴とする描画検索端末。
Connected via a network to a user terminal for inputting a drawing image, the drawing data is registered, the drawing data is searched based on the drawing image input to the user terminal, and the drawing data is retrieved from the user A drawing search terminal provided to the terminal,
A drawing information database in which drawing data and information related to the drawing data are registered;
A drawing search unit for searching for drawing data and information related to the drawing data based on drawing input to the user terminal from the drawing information database;
A combined display unit that transmits drawing data searched by the drawing search unit and information related to the drawing data to the user terminal;
A drawing data registration unit that registers drawing drawn by image input to the user terminal with drawing information database as drawing data in association with identification information capable of identifying the user terminal;
The composite display unit transmits the drawing data to a first user terminal identified by identification information associated with the drawing data searched by the drawing search unit, and the first user A drawing search terminal, wherein information relating to drawing provided from a terminal is transmitted to a second user terminal to which the drawing is input as an image.
描画をイメージ入力するための利用者端末にネットワークを介して接続され、描画データが登録され、前記利用者端末にイメージ入力された描画に基づいて描画データを検索し、該描画データを前記利用者端末に提供する描画検索端末であって、
描画データ及び該描画データに関する情報が登録された描画情報データベースと、
前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に基づいて描画データ及び該描画データに関する情報を検索する描画検索部と、
前記描画検索部にて検索された描画データ及び該描画データに関する情報を前記利用者端末に送信する合成表示部と、
前記利用者端末にイメージ入力された描画を、当該利用者端末を識別可能な識別情報と対応づけて描画データとして前記描画情報データベースに登録する描画データ登録部とを有し、
前記合成表示部は、前記描画情報データベースに登録された描画データを検索対象とする描画が第1の利用者端末にてイメージ入力されるとともに該描画に関する情報が入力された場合、前記描画情報データベースにて前記描画データに対応づけられた識別情報によって識別される第2の利用者端末に対して、前記描画及び該描画に関する情報を送信することを特徴とする描画検索端末。
Connected via a network to a user terminal for inputting a drawing image, the drawing data is registered, the drawing data is searched based on the drawing image input to the user terminal, and the drawing data is retrieved from the user A drawing search terminal provided to the terminal,
A drawing information database in which drawing data and information related to the drawing data are registered;
A drawing search unit for searching for drawing data and information related to the drawing data based on drawing input to the user terminal from the drawing information database;
A combined display unit that transmits drawing data searched by the drawing search unit and information related to the drawing data to the user terminal;
A drawing data registration unit that registers drawing drawn by image input to the user terminal with drawing information database as drawing data in association with identification information capable of identifying the user terminal;
When the drawing for which the drawing data registered in the drawing information database is to be searched is input as an image at the first user terminal and information related to the drawing is input, the composite display unit A drawing search terminal that transmits the drawing and information related to the drawing to a second user terminal identified by identification information associated with the drawing data.
請求項11または請求項12に記載の描画検索端末において、
前記描画検索部は、前記描画情報データベースの中から前記利用者端末にイメージ入力された描画に対して類似度が高い描画データ及び該描画データに関する情報を検索することを特徴とする描画検索端末。
The drawing search terminal according to claim 11 or 12,
The drawing search terminal, wherein the drawing search unit searches the drawing information database for drawing data having a high similarity to the drawing input to the user terminal and information related to the drawing data.
請求項11乃至13のいずれか1項に記載の描画検索端末において、
前記合成表示部は、前記描画データと前記描画に関する情報とを合成して前記利用者端末に送信することを特徴とする描画検索端末。

The drawing search terminal according to any one of claims 11 to 13,
The drawing search terminal characterized in that the combined display unit combines the drawing data and the information related to drawing and transmits the combined data to the user terminal.

JP2006157201A 2006-06-06 2006-06-06 Drawing search system, drawing search method, and drawing search terminal Expired - Fee Related JP4752628B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006157201A JP4752628B2 (en) 2006-06-06 2006-06-06 Drawing search system, drawing search method, and drawing search terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006157201A JP4752628B2 (en) 2006-06-06 2006-06-06 Drawing search system, drawing search method, and drawing search terminal

Publications (2)

Publication Number Publication Date
JP2007328406A true JP2007328406A (en) 2007-12-20
JP4752628B2 JP4752628B2 (en) 2011-08-17

Family

ID=38928853

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006157201A Expired - Fee Related JP4752628B2 (en) 2006-06-06 2006-06-06 Drawing search system, drawing search method, and drawing search terminal

Country Status (1)

Country Link
JP (1) JP4752628B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011008521A (en) * 2009-06-25 2011-01-13 Seiko Epson Corp Printer, apparatus and method for processing image and computer program
US9183228B2 (en) 2012-12-18 2015-11-10 Samsung Electronics Co., Ltd. Image retrieval method, real-time drawing prompting method, and devices thereof
JP6403861B1 (en) * 2017-12-14 2018-10-10 ヤフー株式会社 Providing program, providing apparatus, and providing method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003006198A (en) * 2001-04-20 2003-01-10 Canon Inc Image processor and image processing method, and server apparatus
JP2005063465A (en) * 2004-11-17 2005-03-10 Casio Comput Co Ltd Image retrieval device, electronic still camera and image retrieval method
JP2005107990A (en) * 2003-09-30 2005-04-21 Ricoh Co Ltd Electronic picture book generation method and electronic picture book generation program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003006198A (en) * 2001-04-20 2003-01-10 Canon Inc Image processor and image processing method, and server apparatus
JP2005107990A (en) * 2003-09-30 2005-04-21 Ricoh Co Ltd Electronic picture book generation method and electronic picture book generation program
JP2005063465A (en) * 2004-11-17 2005-03-10 Casio Comput Co Ltd Image retrieval device, electronic still camera and image retrieval method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011008521A (en) * 2009-06-25 2011-01-13 Seiko Epson Corp Printer, apparatus and method for processing image and computer program
US9183228B2 (en) 2012-12-18 2015-11-10 Samsung Electronics Co., Ltd. Image retrieval method, real-time drawing prompting method, and devices thereof
JP6403861B1 (en) * 2017-12-14 2018-10-10 ヤフー株式会社 Providing program, providing apparatus, and providing method

Also Published As

Publication number Publication date
JP4752628B2 (en) 2011-08-17

Similar Documents

Publication Publication Date Title
US9411827B1 (en) Providing images of named resources in response to a search query
JP5830784B2 (en) Interest graph collection system by relevance search with image recognition system
KR101760853B1 (en) Facial recognition with social network aiding
WO2016015437A1 (en) Method, apparatus and device for generating picture search library and searching for picture
US20090161963A1 (en) Method. apparatus and computer program product for utilizing real-world affordances of objects in audio-visual media data to determine interactions with the annotations to the objects
CN106255968A (en) Natural language picture search
US20110106805A1 (en) Method and system for searching multilingual documents
CN112088370A (en) Digital asset search user interface
JP2004234228A (en) Image search device, keyword assignment method in image search device, and program
US20110078151A1 (en) Computer systems and methods for collecting, associating, and/or retrieving data
CN103562911A (en) Gesture-based visual search
CN102782751A (en) Digital media voice tags in social networks
JP2006024060A (en) Information acquisition utilization managing apparatus, and information acquisition utilization managing method
WO2021225085A1 (en) Information processing system, information processing method, information processing program, and server
JP2018205978A (en) Information extracting device and information extracting method
JP4752628B2 (en) Drawing search system, drawing search method, and drawing search terminal
JP5484113B2 (en) Document image related information providing apparatus and document image related information acquisition system
TW201933269A (en) Intellectual property system, intellectual property support method and intellectual property support program
JP2000339330A (en) Method for collecting and providing home page information with coordinate, recording medium and its device
JP2004038840A (en) Device, system, and method for managing memorandum image
KR101734970B1 (en) System and method of providing search result according to search intention of user
US20220050867A1 (en) Image management with region-based metadata indexing
JP2019114308A (en) Intellectual Property System, Intellectual Property Support Method and Intellectual Property Support Program
JP2005115868A (en) Private information storage device and method, and private information management device and method
JP2006228072A (en) Search engine server system linked with map information system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090415

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110408

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110426

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110509

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140603

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees