JP2003281151A - 検索システム - Google Patents

検索システム

Info

Publication number
JP2003281151A
JP2003281151A JP2002077094A JP2002077094A JP2003281151A JP 2003281151 A JP2003281151 A JP 2003281151A JP 2002077094 A JP2002077094 A JP 2002077094A JP 2002077094 A JP2002077094 A JP 2002077094A JP 2003281151 A JP2003281151 A JP 2003281151A
Authority
JP
Japan
Prior art keywords
search
mobile terminal
transmitting
search target
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002077094A
Other languages
English (en)
Inventor
Nobuyuki Tada
信之 多田
Tsutomu Sano
力 佐野
Jun Oka
潤 岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2002077094A priority Critical patent/JP2003281151A/ja
Publication of JP2003281151A publication Critical patent/JP2003281151A/ja
Pending legal-status Critical Current

Links

Abstract

(57)【要約】 【課題】 この発明は、画像の取込みだけで検索対象物
の検索を行うことができ、検索対象物の名前などのキー
ワードが判らなくても検索ができる。 【解決手段】 この発明は、携帯電話に付属した撮影機
能により検索対象物の画像を撮影し、ネットを介して検
索サーバに送信することにより、検索対象物の検索を行
うようにしたものである。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】この発明は、携帯端末等に付
属したカメラにより検索対象物の画像を撮影し、ネット
を介して検索サーバに送信することにより、検索対象物
の検索を行う検索システムに関する。
【0002】
【従来の技術】屋外等の出先にて何か調べ物をしようと
した際、携帯端末からネットを介して検索サーバに問合
せを行う。これにより、該当するデータが携帯端末に返
送され、表示させることができるようになっている。し
かし、この検索システムの場合、キーワードとしてもの
の名前や特徴を入力することにより、該当する文章や画
像等を返送するものである。したがって、上記のような
検索システムでは、キーワードに基づいて検索が行われ
るため、キーワードが判らないと検索できないという欠
点があった。
【0003】たとえば、 1.ハイキングや旅行に出かけた時に、野原に咲いてい
る花やきのこ類、昆虫または、海辺で見つけた貝殻など
の名前や特性をその場で知りたい場合、 2.医者から処方してもらった薬が家に残っている場
合、この薬が何の薬だかわからないので調べたくなった
場合、 3.飲食店へ出かけた時に、出されたワインや日本酒の
銘柄や特性、また何処で購入できるかを知りたくなった
場合、 4.町で見かけた服が何処で購入できるかを知りたくな
った場合、等である。
【0004】
【発明が解決しようとする課題】この発明は、携帯端末
等に付属した撮影機能により検索対象物の画像を撮影
し、ネットを介して検索サーバに送信することにより、
検索対象物の検索を行うことができ、検索対象物の名前
などのキーワードが判らなくても検索ができる検索シス
テムを提供することを目的としている。
【0005】
【課題を解決するための手段】この発明の検索システム
は、撮影機能を有する携帯端末とこの携帯端末と通信回
線を介して接続されている検索サーバとを有するものに
おいて、上記携帯端末から上記検索サーバへ検索対象物
に対する検索開始を送信する第1の送信手段と、この第
1の送信手段による検索対象物に対する検索開始に基づ
いて、上記検索サーバから上記携帯端末へ検索対象物に
対する画像撮影条件を送信する第2の送信手段と、この
第2の送信手段による検索対象物に対する画像撮影条件
を、上記携帯端末にて案内する第1の案内手段と、この
第1の案内手段により案内された検索対象物に対する画
像撮影条件に基づいて、上記携帯端末により撮影された
検索対象物の画像を、上記携帯端末から上記検索サーバ
へ送信する第3の送信手段と、上記検索サーバが、上記
第3の送信手段による少なくとも1つの検索対象物の画
像と、あらかじめ記憶されている種々の物の少なくとも
1つの画像撮影条件に基づく画像とを比較し、一番似て
いる物を検索対象物と判断する判断手段と、上記検索サ
ーバが、上記判断手段により判断した物に対してあらか
じめ記憶されている詳細情報を、上記検索サーバから上
記携帯端末へ送信する第4の送信手段と、上記携帯端末
が、上記第4の送信手段による検索対象物の詳細情報を
案内する第2の案内手段とを有するものである。
【0006】
【発明の実施の形態】以下、図面を参照してこの発明の
実施形態の検索システムを説明する。図1は、検索シス
テムの概略構成を説明するためのブロック図であり、カ
メラを内蔵した携帯端末としての携帯電話1と、この携
帯電話1とインターネット等の通信回線2を介して接続
されている検索サーバ3とを有する構成となっている。
【0007】上記携帯電話1は、携帯電話1の全体を制
御する制御部4と、種々の設定を行うキーボード5と、
表示部6と、撮影機能としてのカメラ部7と、電話回線
あるいはインターネットとの送受信を行う送受信部8
と、電話機能の際に用いられる受送話部9と、データが
記憶されるメモリ部10を有する。
【0008】上記検索サーバ3は、検索サーバ3の全体
を制御する制御部11と、検索対象物の種類ごとの検索
条件に基づくガイダンスデータが登録されているガイダ
ンス用のデータベース部12と、上記携帯電話1から供
給される検索対象物の種類ごとの撮影条件に基づく種々
の画像に対応する種々のものの基準画像が登録されてい
る基準画像用のデータベース部13と、検索されたもの
に対する詳細情報が登録されている詳細情報用のデータ
ベース部14と、インターネット2を介して上記携帯電
話1との送受信を行う送受信部15と、上記携帯電話1
から供給される検索対象物の種類ごとの撮影条件に基づ
く種々の画像と基準画像用のデータベース部13に登録
されている対応する各物の基準画像とのパターンマッチ
ング、輪郭特徴の比較等により、総合的に類似度の一番
高い候補を検索結果とする検索部16により構成されて
いる。
【0009】データベース部13には、検索対象物の種
類ごとでかつ撮影条件ごとの比較用基準パターンが登録
されている。次に、上記のような構成において、図2に
示すフローチャートを参照しつつ、検索処理を説明す
る。
【0010】まず、利用者は携帯電話1の表示部6によ
るメニューからキーボード5により検索モードを選択
し、検索する検索対象物の種類を選択する(ST1)。
これにより、携帯電話1の制御部4は、これらの選択内
容をインターネット2を介して上記検索サーバ3へ送信
する(ST2)。
【0011】この検索サーバ3の制御部11は、携帯電
話1から供給される検索する検索対象物の種類に対する
画像撮影条件のガイダンスデータをデータベース部12
から読出し(ST3)、インターネット2を介して上記
携帯電話1へ返送する(ST4)。
【0012】これにより、上記携帯電話1の制御部4
は、供給される画像撮影条件に対するガイダンスデータ
に基づいて、表示部6により検索対象物に対する撮影の
仕方をガイダンスする(ST5)。このガイダンスにし
たがって、利用者は検索対象物を撮影する(ST6)。
すると、制御部4は、この撮影した検索対象物の撮影画
像をメモリ部10に登録するとともに、表示部6により
表示する(ST7)。利用者はこの表示内容が上記ガイ
ダンスに沿ったものであるか否かを確認し、沿ったもの
と確認できた際に、OKをキーボード5により入力する
(ST8)。
【0013】これにより、別の撮影の仕方のガイダンス
にしたがって、利用者は検索対象物を撮影する(ST
9)。すると、制御部4は、この撮影した検索対象物の
撮影画像をメモリ部10に登録するとともに、表示部6
により表示する(ST10)。利用者はこの表示内容が
上記ガイダンスに沿ったものであるか否かを確認し、沿
ったものと確認できた際に、OKをキーボード5により
入力する(ST11)。
【0014】この後、更に別の撮影の仕方のガイダンス
がある場合、ステップ9に戻り、別の撮影の仕方のガイ
ダンスがない場合、ステップ12に進む。また、上記ス
テップ7の案内により、表示内容が上記ガイダンスに沿
ったものと確認できなかった際に、上記ステップ6に戻
る。上記ステップ10の案内により、表示内容が上記ガ
イダンスに沿ったものと確認できなかった際に、上記ス
テップ9に戻る。
【0015】上記ステップ11によるOKが入力された
際に、制御部4は、メモリ部10に登録された検索対象
物の撮影画像を、インターネット2を介して上記検索サ
ーバ3へ送信する(ST12)。この検索サーバ3の制
御部11は、検索部16を用いて、携帯電話1から供給
される画像撮影条件の異なる検索対象物の撮影画像と、
データベース部13に登録されている対象としているも
のの画像撮影条件が同じ基準の画像とをパターンマッチ
ングなどにより比較し、一番似ている物を検索対象物と
判断する(ST13)。
【0016】この判断により、制御部11は、検索対象
物と一番似ている物に対する詳細情報をデータベース部
14から読出し(ST14)、インターネット2を介し
て上記携帯電話1へ返送する(ST15)。これによ
り、上記携帯電話1の制御部4は、供給される詳細情報
を表示部6により表示する(ST16)。
【0017】次に、具体例として、「花」が検索対象物
の場合の処理について説明する。まず、利用者は携帯電
話1の表示部6によるメニューからキーボード5により
検索モードを選択し、「花」の検索を選択する(ST
1)。これにより、携帯電話1の制御部4は、これらの
「花」の検索をインターネット2を介して上記検索サー
バ3へ送信する(ST2)。
【0018】この検索サーバ3の制御部11は、携帯電
話1から供給される「花」に対する画像撮影条件のガイ
ダンスデータとして、「花の上面からの撮影」「花の側
面からの撮影」「花びらの撮影」「葉の撮影」「幹の撮
影」等のガイダンスデータをデータベース部12から読
出し(ST3)、インターネット2を介して上記携帯電
話1へ返送する(ST4)。
【0019】これにより、上記携帯電話1の制御部4
は、表示部6により「花の上面からの撮影」をガイダン
スする(ST5)。このガイダンスにしたがって、利用
者は花を上面から撮影する(ST6)。すると、制御部
4は、この撮影した花を上面からの撮影画像をメモリ部
10に登録するとともに、表示部6により表示する(S
T7)。利用者はこの表示内容が上記ガイダンスに沿っ
たものであるか否かを確認し、沿ったものと確認できた
際に、OKをキーボード6により入力する(ST8)。
【0020】この後、利用者により「花の側面からの撮
影」「花びらの撮影」「葉の撮影」「幹の撮影」等のガ
イダンスにしたがって、種々の撮影条件での花が撮影さ
れる(ST9から11)。そして、ステップ11による
OKが入力された際、制御部4は、メモリ部10に登録
された検索対象物の撮影画像を、インターネット2を介
して上記検索サーバ3へ送信する(ST12)。
【0021】この検索サーバ3の制御部11は、検索部
16を用いて、携帯電話1からの種々の撮影条件での花
の撮影画像と、データベース部13に登録されている
「花」の画像撮影条件が同じ基準の画像とをパターンマ
ッチングなどにより比較し、一番似ている物(類似度の
高い物)を検索対象物と判断する(ST13)。
【0022】この判断により、制御部11は、検索対象
物と一番似ている物に対する詳細情報としての花の名前
と特徴、データベース部13に登録されている「花」の
画像と購入店名(連絡先)等をデータベース部14から
読出し(ST14)、インターネット2を介して上記携
帯電話1へ返送する(ST15)。これにより、上記携
帯電話1の制御部4は、供給される詳細情報としての花
の名前と特徴と購入店名(連絡先)を表示部6により表
示する(ST16)。
【0023】また、ハイキングや旅行に出かけた時に、
山のきのこ類、昆虫、鳥または、海辺で見つけた貝殻な
どの名前や特性をその場で知りたい場合、医者から処方
してもらった薬が家に残っている場合、この薬が何の薬
だかわからないので調べたくなった場合、飲食店へ出か
けた時に、出されたワインや日本酒の銘柄や特性、また
何処で購入できるかを知りたくなった場合、町で見かけ
た服が何処で購入できるかを知りたくなった場合にも、
上記同様に容易に知らせることができる。
【0024】たとえば、図3の(a)のように、ドライ
ブに出かける。図3の(b)のように、出先でカエルを
発見する。図3の(c)のように、名前・特性を知りた
くなる。図3の(d)のように、携帯電話1のカメラ部
7で撮影する(ST5〜11に対応)。この際、1つ又
は複数通りの画像を撮影する。
【0025】ついで、図3の(e)のように、撮影デー
タを検索センタ3へ転送する(ST12に対応)。これ
により、図3の(f)のように、検索センタ3でデータ
ベース部12の基準画像と照合する(ST13に対
応)。図3の(g)のように、照合結果がトノサマガエ
ルでその特性データを返送する(ST15に対応)。図
3の(h)のように、照合結果を受信し表示し理解し納
得する(ST16に対応)。図3の(i)のように、ト
ノサマガエルを購入できるお店紹介する(ST16に対
応)。図3の(j)のように、その場でお店に電話す
る。
【0026】上記したように、携帯電話に付属した撮影
機能により検索対象物の画像を撮影し、ネットを介して
(有線、無線は問わない)検索サーバに送信することに
より、検索対象物の検索を行うことができ、検索対象物
の名前などのキーワードが判らなくても検索ができる。
この結果、知りたい、その場で又はその時点で情報が得
られる。また、幾つもの図鑑を持ち歩くことがなくな
る。更に、自分で図鑑等を使って探す手間が省ける。専
門家に付き添ってもらう必要が無くなる。
【0027】
【発明の効果】以上詳述したように、この発明によれ
ば、携帯端末等に付属した撮影機能により検索対象物の
画像を撮影し、ネットを介して検索サーバに送信するこ
とにより、検索対象物の検索を行うことができ、検索対
象物の名前などのキーワードが判らなくても検索ができ
る検索システムを提供できる。
【図面の簡単な説明】
【図1】この発明の実施形態を説明するための検索シス
テムの概略構成を示す図。
【図2】検索処理を説明するためのフローチャート。
【図3】検索処理を説明するための図。
【符号の説明】
1…携帯電話、2…通信回線、3…検索サーバ、4…制
御部、5…キーボード、6…表示部、7…カメラ部、8
…送受信部、9…受送話部、10…メモリ部、11…制
御部、12、13、14…データベース部、15…送受
信部、16…検索部。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 岡 潤 東京都港区芝浦一丁目1番1号 株式会社 東芝本社事務所内 Fターム(参考) 5B050 AA06 AA08 AA10 CA07 CA08 DA02 DA04 EA06 EA09 EA18 FA02 FA13 FA19 GA08 5B057 BA02 BA26 CC01 CE11 CE16 CH18 DA12 DA16 DB02 DB06 DB09 DC05 DC09 DC33 5B075 ND08 ND20 NR12 PP02 PP10 PQ02 PR06 QM08

Claims (5)

    【特許請求の範囲】
  1. 【請求項1】 撮影機能を有する携帯端末とこの携帯端
    末と通信回線を介して接続されている検索サーバとを有
    する検索システムにおいて、 上記携帯端末から上記検索サーバへ検索対象物に対する
    検索開始を送信する第1の送信手段と、 この第1の送信手段による検索対象物に対する検索開始
    に基づいて、上記検索サーバから上記携帯端末へ検索対
    象物に対する画像撮影条件を送信する第2の送信手段
    と、 この第2の送信手段による検索対象物に対する画像撮影
    条件を、上記携帯端末にて案内する第1の案内手段と、 この第1の案内手段により案内された検索対象物に対す
    る画像撮影条件に基づいて、上記携帯端末により撮影さ
    れた検索対象物の画像を、上記携帯端末から上記検索サ
    ーバへ送信する第3の送信手段と、 上記検索サーバが、上記第3の送信手段による少なくと
    も1つの検索対象物の画像と、あらかじめ記憶されてい
    る種々の物の少なくとも1つの画像撮影条件に基づく画
    像とを比較し、一番似ている物を検索対象物と判断する
    判断手段と、 上記検索サーバが、上記判断手段により判断した物に対
    してあらかじめ記憶されている詳細情報を、上記検索サ
    ーバから上記携帯端末へ送信する第4の送信手段と、 上記携帯端末が、上記第4の送信手段による検索対象物
    の詳細情報を案内する第2の案内手段とを有する、 ことを特徴とする検索システム。
  2. 【請求項2】 検索対象物が種類ごとに分類されている
    ものであり、検索対象物の種類ごとに異なった画像撮影
    条件であり、検索対象物の詳細情報が、検索対象物の名
    前、特徴などの時点に出ている内容と購入できる店舗の
    案内であることを特徴とする請求項1に記載の検索シス
    テム。
  3. 【請求項3】 撮影機能を有する携帯端末とこの携帯端
    末と通信回線を介して接続されている検索サーバとを有
    する検索システムにおいて、 上記携帯端末が、 検索対象物に対する検索開始を上記検索サーバへ送信す
    る第1の送信手段と、 この第1の送信手段による送信に応答して供給される検
    索対象物に対する画像撮影条件を、上記携帯端末にて案
    内する第1の案内手段と、 この第1の案内手段により案内された検索対象物に対す
    る画像撮影条件に基づいて撮影された検索対象物の画像
    を、上記検索サーバへ送信する第2の送信手段と、 この第2の送信手段による送信に応答して供給される検
    索対象物の詳細情報を案内する第2の案内手段とを有
    し、 上記検索サーバが、 上記携帯端末から供給される検索対象物に対する検索開
    始に基づいて、上記携帯端末へ検索対象物に対する画像
    撮影条件を送信する第3の送信手段と、 この第3の送信手段による送信に応答して供給される少
    なくとも1つの検索対象物の画像と、あらかじめ記憶さ
    れている種々の物の少なくとも1つの画像撮影条件に基
    づく画像とを比較し、一番似ている物を検索対象物と判
    断する判断手段と、 この判断手段により判断した物に対してあらかじめ記憶
    されている詳細情報を、上記携帯端末へ送信する第4の
    送信手段とを有する、 ことを特徴とする検索システム。
  4. 【請求項4】 検索対象物が種類ごとに分類されている
    ものであり、検索対象物の種類ごとに異なった画像撮影
    条件であり、検索対象物の詳細情報が、検索対象物の名
    前、特徴などの時点に出ている内容と購入できる店舗の
    案内であることを特徴とする請求項3に記載の検索シス
    テム。
  5. 【請求項5】 撮影機能を有する携帯端末とこの携帯端
    末と通信回線を介して接続されている検索サーバとを有
    する検索システムにおける検索方法において、 上記携帯端末から上記検索サーバへ検索対象物に対する
    検索開始を送信する第1の送信工程と、 この第1の送信工程による検索対象物に対する検索開始
    に基づいて、上記検索サーバから上記携帯端末へ検索対
    象物に対する画像撮影条件を送信する第2の送信工程
    と、 この第2の送信工程による検索対象物に対する画像撮影
    条件を、上記携帯端末にて案内する第1の案内工程と、 この第1の案内工程により案内された検索対象物に対す
    る画像撮影条件に基づいて、上記携帯端末により撮影さ
    れた検索対象物の画像を、上記携帯端末から上記検索サ
    ーバへ送信する第3の送信工程と、 この第3の送信工程による少なくとも1つの検索対象物
    の画像と、上記検索サーバにあらかじめ記憶されている
    種々の物の少なくとも1つの画像撮影条件に基づく画像
    とを比較し、一番似ている物を検索対象物と判断する判
    断工程と、 この判断工程により判断した物に対してあらかじめ記憶
    されている詳細情報を、上記検索サーバから上記携帯端
    末へ送信する第4の送信工程と、 上記第4の送信工程による検索対象物の詳細情報を上記
    携帯端末により案内する第2の案内工程とを有する、 ことを特徴とする検索システムにおける検索方法。
JP2002077094A 2002-03-19 2002-03-19 検索システム Pending JP2003281151A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002077094A JP2003281151A (ja) 2002-03-19 2002-03-19 検索システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002077094A JP2003281151A (ja) 2002-03-19 2002-03-19 検索システム

Publications (1)

Publication Number Publication Date
JP2003281151A true JP2003281151A (ja) 2003-10-03

Family

ID=29227890

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002077094A Pending JP2003281151A (ja) 2002-03-19 2002-03-19 検索システム

Country Status (1)

Country Link
JP (1) JP2003281151A (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006086780A (ja) * 2004-09-16 2006-03-30 Nikon Corp デジタルカメラ
JP2009122903A (ja) * 2007-11-14 2009-06-04 Olympus Imaging Corp 画像鑑賞システムおよび画像鑑賞方法
WO2012045205A1 (zh) * 2010-10-07 2012-04-12 Liu Alion 基于因特网的植物信息电子查询方法及其系统
JP2015035094A (ja) * 2013-08-08 2015-02-19 東芝テック株式会社 情報処理装置、店舗システム及びプログラム

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006086780A (ja) * 2004-09-16 2006-03-30 Nikon Corp デジタルカメラ
JP4586470B2 (ja) * 2004-09-16 2010-11-24 株式会社ニコン デジタルカメラ
JP2009122903A (ja) * 2007-11-14 2009-06-04 Olympus Imaging Corp 画像鑑賞システムおよび画像鑑賞方法
WO2012045205A1 (zh) * 2010-10-07 2012-04-12 Liu Alion 基于因特网的植物信息电子查询方法及其系统
JP2015035094A (ja) * 2013-08-08 2015-02-19 東芝テック株式会社 情報処理装置、店舗システム及びプログラム

Similar Documents

Publication Publication Date Title
US6993573B2 (en) Automatic access of internet content with a camera-enabled cell phone
US8359314B2 (en) System and method for tagging images based on positional information
JP5218989B2 (ja) 通信端末装置、及び、プログラム
USRE45369E1 (en) Mobile device with integrated photograph management system
US20070118509A1 (en) Collaborative service for suggesting media keywords based on location data
JP2003122757A (ja) 検索案内システム、端末装置およびサーバ装置
CN107092646A (zh) 用于使用移动装置进行图像辨识的系统和方法
JP2006293912A (ja) 情報表示システム、情報表示方法および携帯端末装置
JP2006031200A (ja) 商品検索システム及びその方法並びにそれに用いる端末装置、サーバ装置及びプログラム
WO2019206316A1 (zh) 一种拍照方法和终端设备
KR101307325B1 (ko) 관심영역 설정을 이용한 이미지 이중 검색 시스템
JP5242202B2 (ja) 携帯通信端末
JP2009199438A (ja) 画像取得システム
JP2003281151A (ja) 検索システム
KR101803391B1 (ko) 사용자 정보 기반 영상 검색 관리 방법과 이를 이용한 장치 및 시스템
CN107343142A (zh) 一种照片的拍摄方法及拍摄装置
KR20120076492A (ko) 사용자 상황 인식 기반의 가상 체험 시스템 및 그 방법
JP2003015980A (ja) ロゴマーク検索システム及び方法
JP2007108989A (ja) 情報処理システム、及び情報処理方法
KR101913324B1 (ko) 사용자 정보 기반 영상 검색 관리 방법과 이를 이용한 장치 및 시스템
KR101787400B1 (ko) 사용자 정보 기반 영상 검색 관리 방법과 이를 이용한 장치 및 시스템
US20070124330A1 (en) Methods of rendering information services and related devices
WO2013132916A1 (ja) 通信機器、サーバ装置、通信システム、データ送信方法、データ送受信方法、およびプログラム
JP2004145416A (ja) 画像認識用サーバ、画像認識用携帯端末装置、画像認識方法、画像認識用プログラム、画像認識用プログラムを記録した記録媒体
JP5618804B2 (ja) 画像検索装置、画像検索方法及び画像検索プログラム