JP2002536730A - マルチメディアデータの検索又はブラウジング方法 - Google Patents

マルチメディアデータの検索又はブラウジング方法

Info

Publication number
JP2002536730A
JP2002536730A JP2000596529A JP2000596529A JP2002536730A JP 2002536730 A JP2002536730 A JP 2002536730A JP 2000596529 A JP2000596529 A JP 2000596529A JP 2000596529 A JP2000596529 A JP 2000596529A JP 2002536730 A JP2002536730 A JP 2002536730A
Authority
JP
Japan
Prior art keywords
information
multimedia data
searching
user
browsing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000596529A
Other languages
English (en)
Other versions
JP3585844B2 (ja
Inventor
イ，ジン・スー
キム，ヒョン・ジュン
Original Assignee
エルジー エレクトロニクス インコーポレーテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1019990002979A external-priority patent/KR100319153B1/ko
Priority claimed from KR1019990035798A external-priority patent/KR100350785B1/ko
Application filed by エルジー エレクトロニクス インコーポレーテッド filed Critical エルジー エレクトロニクス インコーポレーテッド
Publication of JP2002536730A publication Critical patent/JP2002536730A/ja
Application granted granted Critical
Publication of JP3585844B2 publication Critical patent/JP3585844B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99932—Access augmentation or optimizing
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99933—Query processing, i.e. searching
    • Y10S707/99935—Query augmenting and refining, e.g. inexact access
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99933—Query processing, i.e. searching
    • Y10S707/99936—Pattern matching access
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99939—Privileged access

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Analysis (AREA)

Abstract

(57)【要約】 イメージを効果的に検索又はブラウジングすることができるマルチメディアデータの検索又はブラウジング方法を提供する。本発明の検索又はブラウジング方法は入力されたマルチメディアデータのフューチャの加重値と権限コードに対する少なくとも一つの信頼度情報を考慮して行う。本発明によれば、システムは参照マルチメディアデータを選択し、入力されたマルチメディアデータのフューチャ又は一部のフューチャの加重値を利用してマルチメディアデータを検索する。ユーザは検索又はブラウジングされたマルチメディアデータの妥当性情報をフィードバックし、システムはその妥当性情報を利用して新たな加重値を計算する。従って、システムは更新しフューチャ及び／又は一部のフューチャの新たな加重値を維持する。

Description

【発明の詳細な説明】
【０００１】 技術分野 本発明はデータの検索又はブラウジング方法に関し、更に詳細にはイメージ又
はビデオ等のマルチメディアデータの検索又はブラウジング方法に関する。
【０００２】 背景技術 最近、デジタル映像信号処理技術は驚くべき水準に発展しており、この技術は
様々な分野で利用されている。例えば、映画、ドラマ等の動映像ファイルで特定
の人物の顔だけを自動的に編集するための検出システム、システムに登録された
人にだけアクセスさせるセキュリティシステム、又は検出システムで検出された
イメージ又はビデオで特定のデータを検索するシステム等で使用される。このよ
うなシステムの性能は、基本的に所望する検出または検索の対象を正確且つ迅速
に処理する特性を必要とする。従って、従来様々なイメージ検索方法が提案され
ている。
【０００３】 関連する技術のイメージ検索方式は次の通りである。 まず、米国特許第５，５７９，４７１号の“Ｉｍａｇｅ Ｑｕｅｒｙ Ｓｙｓ
ｔｅｍ ａｎｄ Ｍｅｔｈｏｄ”の検索システムは、検索するイメージのカラー
、テクスチャー、形状等のフューチャ（特徴）を利用して類似度を検索する。こ
の際、各々のフューチャの重要度は検索するイメージのフューチャに応じて異な
り、又その重要度は一フューチャでもそのフューチャ内に存する部分的な要素（
例えば、カラーにおいて赤色、緑色等の部分要素）に応じて異なる。しかし、こ
の検索システムではイメージ毎に異なる重要度の特性が分からなかった。
【０００４】 このような問題点を改善してよく検索できるようにユーザがカラー、テクスチ
ャ、形状のようなフューチャ別の重要度を直接表示する方式を、Ｖｉｒａｇｅ
Ｉｍａｇｅ Ｓｅａｒｃｈ Ｅｎｇｉｎｅ（ｗｗｗ．ｖｉｒａｇｅ．ｃｏｍ）に
記載している。しかし、このような方式では、イメージを検索する際、ユーザが
その重要度を直接表示する場合、フューチャ別の重要度を直接決定し難いという
問題点があった。
【０００５】 この問題点を改善するべく、イメージの検索時に参照イメージと類似している
イメージ並びに類似していないイメージをシステムに登録させ、その登録された
イメージ間の類似度を計算して自動的にフューチャのタイプ別に加重値を計算す
る方法を“Ｒｅｌｅｖａｎｃｅ Ｆｅｅｄｂａｃｋ Ｔｅｃｈｎｉｑｕｅ ｉｎ
Ｉｎｔｅｒａｃｔｉｖｅ、Ｙｏｎｇ Ｒｕｉ，ＳＰＩＥ Ｖｏｌ．３３１２”
に記載した。しかし、この方式では、特定のイメージに対する検索を一回終える
と加重値情報を維持しない。このため、同一のイメージを参照イメージとして選
択してイメージを探す度に加重値を又計算しなければならない。
【０００６】 又、ビデオ（動映像資源）検索及びブラウジングシステム或いはイメージ検索
及びブラウジングシステムでは、マルチメディアデータの検索又はブラウジング
を一層効果的に行うために該当イメージ又はビデオデータの特徴を記述した情報
を利用する。例えば、イメージ検索システムでは、イメージの全体カラーヒスト
グラム、又はイメージを所定の複数の領域に分けて各領域別のカラー値を表現す
る等の方式を用いてイメージのフューチャ情報を記述し、連続した２つのイメー
ジ間のフューチャ情報を相互比較して所定の類似度を計算し、その類似度を利用
して２つのイメージの類否を判定する。
【０００７】 ユーザは、特定の人物の登場或いは特定の事件の発生のビデオの区間を検索し
て上映したいと思う。その際、特定の事件を代表するキーフレームを示す方式で
ビデオの検索及びブラウジング検索を行う。また、最近ではキーフレーム、キー
セグメント等を下位レベルのフューチャ情報と上位レベルのフューチャ情報と定
義して使用する。このようなフューチャ情報を利用したマルチメディアデータの
検索及びブラウジング方式は、どの情報が更に重要でありどの情報が重要でない
かを示す加重値情報を使用するか、或いは類似のマルチメディアデータ同士にグ
ループ化して得たグループ情報を検索に直接又は間接的に利用することもある。
この加重値情報又はグループ情報などは専門家によって前もって定義、またはユ
ーザのフィードバックによって学習されてその値が更新される可変的なフューチ
ャ情報である。
【０００８】 さらに、イメージ又は動映像等のマルチメディアデータをブラウジングする際
、ユーザの要求またはハードウェア等の資源条件を考慮して本来のマルチメディ
アデータの全部または一部を表示することができる。その際、特定の部分だけを
示す場合、全体のデータの中で重要な部分を優先的にディスプレイするためにデ
ータの各部分の重要度を表現する。この重要度はユーザのフィードバックにより
更新、又は専門家により前もって定義することのできる可変的な値となる。
【０００９】 また、米国特許第５，０２０，０１９号、米国特許第５，２９７，０４２号に
記載したように、ユーザ毎にそのユーザに合うサービスを提供するためユーザの
選好度（例えば、アクション物、ドラマ、又はスポーツ等を含む）を含む情報を
使用することもある。又他の例をとると、キーワードの検索の場合、ユーザ毎に
使用するキーワードの選好度及びその意味が異なる。従って、ユーザの選好度に
基づいて使用されるキーワードの加重値を割り当てると、各ユーザは一層効果的
な検索を行うことができる。ユーザの選好度はユーザの事前検索の検索条件及び
ヒストリを使用して得ることができる。上述したユーザの選好度による情報もや
はり主に学習により更新可能な可変的フューチャ情報である。
【００１０】 このような可変的フューチャ情報はマルチメディアデータの検索及びブラウジ
ングに効果的に使用されるが、次のような問題点があった。 まず、マルチメディアの特徴を記述した可変的情報が専門家によって前もって
定義される場合、どのくらい信じうる専門家により定義されたか、又はどのくら
い多い専門家の意見が反映されて定義されたかによりその値の信頼性が変わる。
すなわち、マルチメディアデータの特徴を記述した可変的情報を前もって専門家
集団により定義するとしても、専門家の熟練度に応じて同一のイメージに対する
フューチャ情報の信頼度が一定でないこともある。また、このようなフューチャ
情報がユーザのフィードバックによって学習される場合には、フィードバックの
数及び正確度に応じて信頼性が変わる。例えば、検索後にユーザが２つのイメー
ジの類否を不正確に判断すると、前記情報はフィードバックされ、フューチャ情
報の学習に逆に影響を及ぼす。
【００１１】 更に、新たなユーザにより入力されたユーザの選好度はサーバーから勧められ
たフューチャ情報と異なることもある。この場合、システムはユーザの信頼度に
応じてユーザの選好度の情報に適宜な加重値を割り当てなければならない。結局
、ユーザ毎に異なるフィードバックをシステムに与えるので、フューチャ情報の
信頼度が相対的に高ければ、新たなユーザの個別フィードバックがフューチャ情
報の更新に及ぼす影響が小さくなり、逆に信頼度が低ければ新たなユーザにより
フィードバックされる可変的フューチャ情報値に及ぼす影響が大きくなる。この
ような関連技術はは、上述した点を考慮することができないため、マルチメディ
アの検索又はブラウジング時に信頼度情報が要求される。
【００１２】
【発明が解決しようとする課題】
本発明の目的は、上記の問題点を改善して一層正確且つ効果的なマルチメディ
アデータの検索又はブラウジング方法を提供することにある。 本発明の他の目的は、フューチャ情報の更新のために情報の信頼度及び権限コ
ードを考慮した検索又はブラウジングする方法を提供することにある。 本発明の又他の目的は、マルチメディアデータの検索又はブラウジング時に利
用されるデータ構造を提供することにある。
【００１３】 発明の開示 上記目的を達するための本発明のマルチメディアデータの検索又はブラウジン
グ方法は、参照マルチメディアデータを選択又は入力する段階と、前記マルチメ
ディアデータのフューチャ及び／又は部分的なフューチャに割り当てられた加重
値を利用して前記参照マルチメディアデータを検索する段階と、その検索又はブ
ラウジングされたマルチメディアデータの妥当性に対してユーザフィードバック
を入力する段階と、検索の結果的なイメージに対して前記参照マルチメディアデ
ータの類似度を測定し、その測定された値を利用して新たな加重値を計算する段
階と、以前の加重値を更新し、更新された加重値を維持する段階とを備える。
【００１４】 本発明の他の目的を達するための本発明のマルチメディアデータの検索又はブ
ラウジング方法は、マルチメディアデータの特徴の重要性を示す可変情報と前記
可変情報の信頼性を示す信頼性情報を利用して参照マルチメディアデータを検索
する段階と、検索又はブラウジングされたマルチメディアデータの妥当性に対し
てユーザフィードバックを入力する段階と、システムに蓄積されたユーザ又はユ
ーザパターン情報によりフィードバックされた学習情報を使用して新たな可変情
報を計算する段階と、前記計算された可変情報及び／又は信頼度情報を利用して
以前の可変情報を更新し、前記更新された情報を維持する段階とを備え、前記可
変情報はマルチメディアデータの構造に含まれる。
【００１５】 本発明のさらに他のマルチメディアデータの検索又はブラウジング方法は、参
照マルチメディアデータを入力又は選択する段階と、マルチメディアデータの特
徴の重要性を示す可変情報を利用して参照マルチメディアを検索する段階と、前
記検索又はブラウジングされたマルチメディアデータの妥当性に対してユーザフ
ィードバックを入力する段階と、検索の結果的なイメージに対する参照マルチメ
ディアデータの類似度を測定し、その測定された値を利用して新たな可変情報を
計算する段階と、信頼度情報と権限コードを選択的に組み合わせて以前の可変情
報を更新し、その更新された情報を維持する段階とを備え、前記マルチメディア
データの構造は前記可変情報、前記可変情報の信頼性情報、及びユーザに対する
権限を制限する権限コードを含む。
【００１６】 本発明のマルチメディアデータの検索又はブラウジングシステムに対するデー
タ構造は、マルチメディアデータと、前記マルチメディアデータのフューチャ情
報と、そして前記マルチメディアデータの特徴の加重値を示す加重値情報とから
構成される。
【００１７】 発明を実施するベストモード 以下、本発明の好ましい実施形態を添付図面を参照して説明する。 図１は本発明の検索又はブラウジングシステムで使用されるマルチメディアデ
ータの構造を説明する図である。データ構造はユーザのフィードバックを反映す
るためのイメージ特性情報１０１を含む。そのユーザフィードバックを反映する
ためのイメージ特性情報１０１は、ユーザのフィードバックにより学習されたフ
ューチャ或いは部分的なフューチャ（本明細書では“フューチャ”という）の重
要性を示す情報であり、イメージ特性情報１０２、権限コード１０４、及び信頼
度コード１０７を含む。特に、イメージ特性情報１０２は、実際に検索に使用さ
れるイメージフューチャ１０３ａと、イメージフューチャの重要性を示す加重値
１０３ｂとを含む。信頼度コード１０７は加重値の信頼度を示す。好ましい実施
形態において、前記信頼度コードはレベルｉのユーザによる加重値の更新の回数
１０８で示される。前記権限コード１０４は権限レベル１０６と前記権限レベル
の数１０５を示す。
【００１８】 本発明は、権限コード１０４を利用して加重値の更新可否を決定し、更新の程
度を決定する。更に、信頼度コード１０７及び権限コード１０４は必要に応じて
データ構造に選択的に含まれてもよく、全部含まれてもよい。例えば、データ構
造は信頼度コード１０７とイメージ特性情報１０２だけを含むこともできる。そ
の場合、システムは権限コード１０４を与える。この際、只一つの権限レベルが
システムに要求されると、権限コード１０４が省略されてもよい。イメージ特性
情報１０２の加重値１０３ｂはユーザにフィードバックされる度に更新される、
イメージのフューチャに与えられた加重値である。更に、権限コード１０４の権
限レベルｉ １０６はイメージフューチャ及び／又は更新の程度に与えられた加
重値を更新するか否か決定する。レベルの数はシステムの必要に応じて決定され
、権限レベルの数１０５で示される。例えば、５つのレベルが存する場合、１、
２等級に分類されたユーザにだけ加重値に対する更新を許し、１等級ユーザの更
新の程度は０．９５の比重、２等級ユーザの更新の程度は０．８５の比重に更新
する。
【００１９】 図２は本発明の検索又はブラウジングシステムで使用されるデータ構造を示す
図である。図２に示すように、データ構造は、マルチメディアデータ２０１、マ
ルチメディアデータのフューチャ情報２０２、マルチメディアデータのフューチ
ャの重要性を示す加重値情報（又は可変情報）２０３、加重値情報の信頼度を示
す信頼度情報２０６、２０８、及びユーザに対する権限レベルを示す権限コード
２０７を含む。
【００２０】 図１を参照して説明すると、権限レベルは加重値情報の更新可否及び更新の程
度を決定するために使用される。従って、データ構造における権限コードは権限
レベルの数２０４、権限レベルに対する権限レベルのパスワード２０５、２０７
を含む。権限コードに基づいてデータを変更するためのアクセス、つまり適切な
イメージのアクセスを許容又は制限する権限レベルに基づいてユーザに異なるパ
スワードを与えることができる。従って、特定のレベルよりも低い権限レベルの
ユーザにはイメージのアクセスを許容しない。
【００２１】 好ましい実施形態において、イメージ制作者（生成者）はユーザの権限をｎレ
ベルに分け、権限レベルに基づいてユーザに適宜のパスワードを与える。従って
、ユーザはイメージを検索又はブラウジングすることができ、所与の権限レベル
に基づいてイメージ特性情報を変化させることができる。
【００２２】 更に、イメージ特性情報は他の権限レベルのユーザによって更新されるので、
各々の権限レベルのユーザによるフィードバックの数は信頼度情報の計算のため
に記録される。詳しくは、ｋ番目のレベルのユーザフィードバックによるイメー
ジ特性情報に対する加重値の更新の回数Ｎｋにｋ番目のレベルに与えられた加重
値係数を掛ける。各々の権限レベル（１〜ｎ）に対する生成値（ａｋ×Ｎｋ）を
合算し、和に所定の係数ａを掛けてイメージ特性情報の信頼度を得る。２つの入
力データが同一のマルチメディアデータであるが異なるヒストリにより学習され
た異なるイメージ特性情報を有する場合、ユーザは、各々のイメージ特性情報に
おける信頼度情報に基づいてどのイメージを使用するかを決定することができる
。ここで、権限レベルがただ一つであれば、イメージは権限情報無しに信頼度値
を有する。
【００２３】 本発明の第１実施形態のマルチメディアデータの検索又はブラウジング方法は
、イメージのフューチャを説明する可変情報及び／又は権限コードを入力された
マルチメディアデータに含む。図３は本発明の第１実施形態の検索又はブラウジ
ング方法のフローチャートである。説明の便宜上マルチメディアデータをイメー
ジとする。
【００２４】 図３に示すように、まずユーザによりマルチメディアデータを検索又はブラウ
ジングするシステムで参照イメージを選択または入力する（Ｓ３０１）。次いで
、システムはイメージフューチャに割り当てられた加重値及びイメージ特徴を利
用して類似のイメージを検索する（Ｓ３０２）。システムは、参照イメージが最
初に選択又は入力されると、加重値の初期値を設定する。加重値はカラー、テク
スチャー、又は形状等のイメージフューチャに対して与えられてもよく、及び／
又はＩ番目のカラー要素等のイメージ特徴要素に対して与えられてもよい。
【００２５】 ユーザは、検索又はブラウジングの結果を見て妥当性情報つまり検索又はブラ
ウジング結果が妥当なのか否かを入力することによりフィードバックすることが
できる。特に、ユーザは結果が自分の所望するものであれば正しい情報としてフ
ィードバックし、所望しないものであれば正しくない情報としてフィードバック
する。例えば、ユーザにより決定されたイメージが参照イメージと類似すれば正
しい情報としてフィードバックし、参照イメージと違えば正しくない情報として
フィードバックする。従って、システムは、ユーザが妥当性情報を入力したか否
かを判断する（Ｓ３０３）。もしもユーザからフィードバックされない場合には
システムはＳ３０１に戻り、フィードバックされた場合にはシステムはユーザが
フューチャの加重値を更新するための権限レベルを有しているか否かを決定する
（Ｓ３０４）。ここで、システムは、ユーザがパスワードを入力することにより
ユーザの権限レベルを決定することができる。権限レベルの詳細な説明は第３実
施形態を参考として後述する。一般に、Ｓ３０４は権限レベルに基づいた更新の
程度を含めて加重値の更新を制限する。しかし、この段階は省略可能であり、こ
の場合に加重値は各々のユーザのフィードバックに対して更新される。
【００２６】 図３に示すように、ユーザの権限レベルが更新を許すと、システムは検索され
たイメージの間で参照イメージとフィードバックされたイメージとの類似度を測
定して新たな加重値を計算する（Ｓ３０５、Ｓ３０６）。すなわち、システムは
、妥当性情報が正しいという情報であれば、フィードバックされたイメージと参
照イメージとの間の類似度を増加させるフューチャの加重値を増加させる。逆に
、妥当性情報が正しくないという情報であれば、システムは参照イメージとフィ
ードバックされたイメージとの間の非類似度を増加させるフューチャの加重値を
増加させる。
【００２７】 次いで、システムは計算された加重値を利用してイメージフューチャ情報の以
前の加重値情報を更新し、次の検索又はブラウジングのために更新された加重値
を維持する（Ｓ３０７）。特に、加重値は更新前のｋ番目のフューチャの加重値
、現在イメージ検索で得られたｋ番目のフューチャの新たな加重値、及びあらゆ
るフューチャの新たな加重値の平均を考慮して更新する。ここで、以前の加重値
による更新された加重値、つまり更新前のｋ番目のフューチャの加重値に及ぼす
影響は以前の加重値の信頼度に反比例する。
【００２８】 好ましい実施形態において、加重値は式１を用いて更新することができる。こ
の時、Ｗｋ（ｔ）はｋ番目のフューチャの更新された加重値であり、Ｗｋ（ｔ−
１）は更新前のｋ番目のフューチャの加重値であり、Ｗｎｅｗ ｋは現在イメー
ジ検索により得られたｋ番目のフューチャの計算された加重値であり、Ｍ（Ｗｎ
ｅｗ）は現在イメージ検索により得られたあらゆるフューチャに対して計算され
た加重値の平均であり、ａはユーザの権限レベルに応ずる更新の程度を決定する
加重値係数である。 ［１］Ｗｋ（ｔ）＝Ｗｋ（ｔ−１）＋ΔＷｋ、（ΔＷｋ＝ａ（Ｗｎｅｗ＿ｋ −Ｍ（Ｗｎｅｗ））
【００２９】 又、加重値は、検索過程の間に得られた非類似度イメージリスト又は類似イメ
ージリストを利用して更新することもできる。例えば、システムは類似イメージ
リストのイメージ間の類似度を測定し、類似度の判断に寄与するフューチャの加
重値を増加させる。逆に、システムは非類似イメージリストのイメージ間の非類
似度を測定し、非類似度の判断に寄与するフューチャの加重値を増加させる。
【００３０】 本発明の第１実施形態によれば、検索に利用されたフューチャの加重値情報は
システムに入力されたマルチメディアデータ構造内に含まれる。従って、システ
ムは、イメージを検索又はブラウジングする度にイメージの特徴を示す加重値を
正しい方向に学習させることにより適切な加重値を開発してゆく。結果的に、シ
ステムは場所、応用プログラム、イメージ検索エンジンに係わらずにフューチャ
の加重値情報を利用してより一層効果的な検索又はブラウジングを行うことがで
きる。又、検索又はブラウジングに加重値を利用する度にユーザは主観的、客観
的な質疑に対して効果的な応答を実行することにより、ユーザの希望するイメー
ジを検索又はブラウジングすることができるように本実施形態を適用して使用す
ることができる。従って、本発明の第１実施形態はユーザのフィードバックに応
じて加重値を調整する“Ｒｅｌｅｖａｎｃｅ ｆｅｅｄｂａｃｋ”概念を使用す
ることのできるイメージフォーマットで使用するのに適切である。
【００３１】 本発明の第２実施形態において、検索又はブラウジングのために選択又は入力
された参照データは、マルチメディアの特徴の重要性を示す可変情報とその可変
情報の信頼度を示す信頼度情報とを含む。第２実施形態において、可変情報と信
頼度情報とを含むマルチメディアデータ構造はシステムに入力され、システムは
参照データを検索する。説明の便宜上、マルチメディアデータをイメージと見す
る。
【００３２】 第１実施形態において、ユーザは検索又はブラウジングされた結果としてのイ
メージの妥当性情報をフィードバックした。次いで、システムはユーザにより入
力された妥当性情報又はシステムに蓄積されたユーザのパターン情報を利用して
新たな可変情報を計算する。例えば、ユーザのパターン情報はユーザのヒストリ
又は使用ヒストリになる。従って、システムは新たな可変情報及び／又は信頼度
情報を利用して可変情報を更新し、更新された可変情報を維持する。ここで、可
変情報は図３で説明した加重値の更新と同様な方式で更新される。
【００３３】 可変情報は、マルチメディアデータのカラー、テクスチャー、又はキーワード
の検索に使用されるフューチャの加重値、特定のビデオの検索又はブラウジング
に使用されるフレーム又はセグメントの加重値、ユーザの選好度又はユーザの習
慣を示し、マルチメディアデータの主要領域又は主要対象の検索又はブラウジン
グ時に使用されるデータの一部を示すユーザ依存的情報の加重値、類似リスト又
はクラスターモデルのマルチメディアグルーピングのための情報、又は説明した
２つ以上の加重値の組合せである。
【００３４】 一般に、信頼度情報は可変情報に対する信頼性を直接又は間接的に示し、入力
された妥当性情報に基づいて可変情報に対するユーザの学習量に比例する特性を
有する。又、信頼度情報はシステムの性能により決定される。信頼度の程度に対
する詳細な説明は第３実施形態を参照して説明する。
【００３５】 従って、２つのデータが同一のマルチメディアデータを持つが、異なる可変情
報値を有するとすると、システムは更に高い信頼度を有する可変情報を選択する
ことができ、又は新たな可変情報を計算するに際して可変情報の信頼度に比例し
て可変情報を組み合わせることができる。可変情報の計算は本発明の第２実施形
態に係わらずに独立的に利用することができる。
【００３６】 例えば、１つのイメージが生成された後、他のユーザにより多数のイメージに
複写された後、複写されたイメージが互いに異なる応用プログラムを経る間に各
々の可変情報により特性化されたと仮定する。特に、互いに異なる応用プログラ
ムにより特性化されたイメージは可変情報の互いに異なる信頼度情報及び可変情
報を有する。その際、システムは、他の応用プログラムで上述したイメージを呼
んできてイメージ検索に使用しようとする際、どれを利用するかを決定しなけれ
ばならない。もしも異なって特性化された各イメージが可変情報（加重値）に対
する信頼度を共に有していると、システムは信頼度の高いイメージを選択して検
索に利用すればよい。又、システムは信頼度に比例して多数の複写されたイメー
ジに該当する他の特性化されたイメージの加重値を組み合わせて新たな加重値を
得ることができる。
【００３７】 上述した本発明の第２実施形態によれば、可変情報だけでなく可変情報の信頼
度情報もシステムに入力されたイメージに含まれるため、イメージが検索される
度に加重値が更新される。したがって、一層正確な検索要素となるように学習さ
れる。結果的に、システムは最適の状態で知能的に発展する。
【００３８】 本発明の第３実施形態の検索又はブラウジングシステムに入力されるマルチメ
ディアデータのデータ構造は、フューチャの重要性を示す可変情報、その可変情
報の信頼度を示す信頼度情報、及びユーザに対する権限を制限する権限コードか
ら構成される。ここで、権限コードはマルチメディアデータに含まれてもよく、
又はマルチメディアデータの検索又はブラウジングに対する判断がフィードバッ
クされる時にシステムから提供されてもよい。
【００３９】 本発明の第３実施形態のマルチメディアデータの検索及びブラウジングシステ
ムは、ユーザの調整信号に応じて参照マルチメディアデータを選択又は入力する
。従って、システムは可変情報、可変情報の信頼度情報、及び権限コードを利用
してマルチメディアデータを検索する。権限コードはあらゆるユーザのフィード
バックに応答してフィードバックの信頼度に係わらずに更新により可変情報の不
適切な学習を制限するために使用する。
【００４０】 例えば、経験ないユーザが全く異なる２つのイメージを互いに同じイメージだ
と見ると、このユーザにより検索に利用されたイメージに対するフューチャの加
重値が全く異なる方向に更新される。従って、該当イメージの学習結果は信頼性
が落ちる。しかし、又他の方法として、入力されるイメージが権限コードを含ん
でない場合には、代わりに、システムで権限情報を提供することにより、ユーザ
が所定のイメージを加重値更新できる権限の有無、又は加重値の更新に及ぼす影
響の程度を制限又は異なった扱いをすることもできる。例えば、ユーザのＬｏｇ
−Ｉｎ ＩＤを権限レベルの決定のために使用することができる。
【００４１】 更に、第１、第２実施形態に示すように、ユーザは検索又はブラウジングされ
たマルチメディアデータに対する妥当性情報をフィードバックする。従って、シ
ステムはフィードバックされたイメージと参照イメージとの類似度を測定し、測
定された値を利用して新たな可変情報を計算する。次いで、システムで算出され
た可変情報、信頼度情報、権限コードを利用して参照イメージに含まれた以前の
可変情報を更新し、更新された可変情報を維持する。この際、マルチメディアデ
ータを更新するシステムで算出されたマルチメディアデータに対する可変情報の
値の互いに異なる２つ以上の同一のマルチメディアデータが発生すると、システ
ムは可変情報の値に対する信頼度が相対的に高いものを選択する。
【００４２】 特に、新たな加重値を式１又は検索過程の間に得られた類似リスト又は非類似
リストにより第１実施形態に示すように計算し更新することができる。更に、加
重値は加重値の信頼度に基づいて更新することができる。加重値は式２により更
新することができ、この際にＲｃは現在学習されたイメージの信頼度、Ｗｃは信
頼度に対して既設定された加重値であり、Ｒｔは現在フィードバックされたユー
ザの権限レベルに該当する加重値を更新する程度であり、Ｗｔはユーザの権限レ
ベルに対する加重値である。 ［２］更新された加重値＝（ＲｃＷｃ＋ＲｔＷｔ）／（Ｒｃ＋Ｒｔ） ここで、Ｒｃの値は各権限レベルのユーザによる以前の加重値の更新回数であ
る。
【００４３】 図４は本発明の第３実施形態によるマルチメディアデータの検索又はブラウジ
ングシステムにおいて可変的な信頼度情報のデータ構造を示す図である。図４に
示すように、本発明による可変的な信頼度情報４０１はレベルの数４０２、レベ
ルｉが加重値の更新に及ぼす影響の程度４０３、レベルｉのユーザにより更新さ
れた回数４０４から構成される。
【００４４】 一方、図６は本発明の第３実施形態によるマルチメディアデータの検索又はブ
ラウジングシステムで固定的な信頼度情報のデータ構造を示す図である。図６を
参照すると、固定的な信頼度情報６０１はレベルｉのユーザにより更新された回
数６０２だけを含む。このような信頼度は下記のような方式で求めることができ
る。
【００４５】 一つ、信頼度は等級レベルの高いユーザが多く使用して学習させたイメージで
あるほど更に高い信頼度を付与する方式を使用する。すなわち、信頼度はフィー
ドバック及び権限レベルを付与するユーザの数に比例する。従って、システムの
立場では、等級レベルの高いユーザによりフィードバックされた妥当性情報の学
習量が相対的に多いイメージに相対的に高い信頼度を付与する。 二つ、システムは既設定の等級レベルから上位等級レベルまでのユーザが学習
させたイメージに信頼度を付与する。すなわち、システムは、設定された権限レ
ベルに基づいて等級レベルの中で上位等級レベルに該当するユーザによってフィ
ードバックされた妥当性情報の学習量が相対的に多いイメージに相対的に高い信
頼度を付与する。 三つ、システムの性能に基づいて信頼度を決定する。 四つ、システムはユーザレベルの数を一致する更新の程度に可変的に設定して
使用することにより、図４に示すような信頼度情報を使用することもでき、図６
に示すような固定的な信頼度情報を使用することもできる。この場合、ユーザの
フィードバックによる更新の数とフィードバックを付与するユーザの権限レベル
が高いほど相対的に高い信頼度を付与する。
【００４６】 図５は図４の可変信頼度情報の例を示す。図５では、ユーザが全体的に５つの
権限レベルに分類される。図５において、第１等級は１．０の加重値更新程度を
有し、第１等級のユーザにより８回の更新回数を記録し、第２等級は０．７の加
重値更新程度を有し、第２等級のユーザにより１４回の更新回数を記録し、第３
等級は０．５の加重値更新程度を有し、第３等級のユーザにより３０回の更新回
数を記録し、第４等級は０．３の加重値更新程度を有し、第４等級のユーザによ
り２３回の更新回数を記録し、第５等級は０．１の加重値更新程度を有し第５等
級のユーザにより４回の更新回数を記録している。すなわち、各権限レベルの数
と各々の権限レベルのユーザにより更新される程度の値が可変的に設定される。
【００４７】 図７は図６の固定的な加重値情報の例を示す図である。図７では、ユーザに対
する権限を１０レベルに固定し、各レベルに対して該当する加重値更新程度を０
．１〜１の間の値で予め割り当てる。図７では、第１等級は１．０の更新程度で
８回の更新回数を記録し、第４等級は０．７の更新程度で１４回の更新回数を記
録し、第６等級は０．５の更新程度で３０回の更新回数を記録し、第８等級は０
．３の更新程度で２３回の更新回数を記録し、第１０等級は０．１の更新程度で
４回の更新回数を記録している。
【００４８】 このような方式は権限をシステムで検索してそのイメージのアクセス（加重値
の更新の許容／禁止或いは更新の程度）をコントロールするに効果的である。ま
た、図７に示されたシステムでは１０のレベルの全部に対して使用してもよく、
この中で必要な個数だけを部分的に使用してもよい。例えば、システムは、１０
のレベルをユーザに付与しないで図５に示すように５つのレベルを利用すること
ができる。この場合、図５の第１レベルに該当する図７の第１レベルは第１レベ
ルであり、図５の第２レベルに該当する図７の第４レベルは第２レベルであり、
図５の第３レベルに該当する図７の第６レベルは第３レベルであり、図５の第４
レベルに該当する図７の第８レベルは第４レベルであり、図５の第５レベルに該
当する図７の第１０レベルは第５レベルである。従って、１０の固定的な等級レ
ベルの中で５つの等級レベルだけを使用するので、システムは各々の等級レベル
に対する更新の許容可否を決定することができる。
【００４９】
【発明の効果】
上述した本発明の実施形態によれば、次のような効果を奏する。 一つ、システムに入力されるイメージ内にイメージフューチャの加重値（又は
可変情報）が含まれ、イメージが検索として使用されるほど該当イメージがより
良い検索結果を与えるために学習（又は特性化）されるので、同一のイメージに
対して検索する時により効果的且つ正確に検索又はブラウジングを行うことがで
きる。 二つ、同一のイメージが互いに異なる環境で学習された後更新される際、どの
イメージがより効果的に学習されたかが分かるようにイメージに対する加重値ま
たは可変情報の信頼性を示す信頼度情報をイメージ内に含めることにより、現在
イメージの検索又はブラウジングを効果的且つ正確に行うことができる。
【００５０】 三つ、入力されたイメージ内に権限コードを含めるか、或いはシステムにより
権限コードを提供することにより、ユーザの等級レベルに基づいて更新の可否及
び更新の程度を制限する。従って、ユーザの無分別又は非専門的な更新により該
当イメージが正しくない方向に学習されることを防止することができる。 四つ、システムの特性に応じてイメージの特徴に対する加重値（又は可変情報
）に信頼性情報、権限情報を選択的に組み合わせて使用するか、全て組み合わせ
て使用することにより、該当イメージに対する正しい検索を行うように知能的に
学習及び自己発展する方向にマルチメディアデータの検索又はブラウジングを行
うことができる。
【図面の簡単な説明】
【図１】 本発明の検索又はブラウジングシステムにおいてマルチメディアデータの構造
を説明する図、
【図２】 本発明の検索又はブラウジングシステムで利用されるデータの構造を示す図、
【図３】 本発明の第１実施形態によるマルチメディアデータの検索又はブラウジングの
手続きを示すフローチャート、
【図４】 本発明の第３実施形態によるマルチメディアデータの検索又はブラウジングシ
ステムにおいて可変的な信頼度情報のデータ構造を示す図、
【図５】 図４のデータ構造に応じてマルチメディアデータ内の可変的な加重値情報の例
を示す図、
【図６】 本発明の第３実施形態によるマルチメディアデータの検索又はブラウジングシ
ステムにおいて固定的な信頼度情報のデータ構造を示す図、
【図７】 図５によるマルチメディアデータ内の固定的な加重値情報の例を示す図。
───────────────────────────────────────────────────── フロントページの続き (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＣＹ， ＤＥ，ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，Ｉ Ｔ，ＬＵ，ＭＣ，ＮＬ，ＰＴ，ＳＥ)，ＯＡ(ＢＦ，ＢＪ ，ＣＦ，ＣＧ，ＣＩ，ＣＭ，ＧＡ，ＧＮ，ＧＷ，ＭＬ， ＭＲ，ＮＥ，ＳＮ，ＴＤ，ＴＧ)，ＡＰ(ＧＨ，ＧＭ，Ｋ Ｅ，ＬＳ，ＭＷ，ＳＤ，ＳＬ，ＳＺ，ＴＺ，ＵＧ，ＺＷ )，ＥＡ(ＡＭ，ＡＺ，ＢＹ，ＫＧ，ＫＺ，ＭＤ，ＲＵ， ＴＪ，ＴＭ)，ＡＥ，ＡＬ，ＡＭ，ＡＴ，ＡＵ，ＡＺ， ＢＡ，ＢＢ，ＢＧ，ＢＲ，ＢＹ，ＣＡ，ＣＨ，ＣＮ，Ｃ Ｒ，ＣＵ，ＣＺ，ＤＥ，ＤＫ，ＤＭ，ＥＥ，ＥＳ，ＦＩ ，ＧＢ，ＧＤ，ＧＥ，ＧＨ，ＧＭ，ＨＲ，ＨＵ，ＩＤ， ＩＬ，ＩＮ，ＩＳ，ＪＰ，ＫＥ，ＫＧ，ＫＰ，ＫＺ，Ｌ Ｃ，ＬＫ，ＬＲ，ＬＳ，ＬＴ，ＬＵ，ＬＶ，ＭＡ，ＭＤ ，ＭＧ，ＭＫ，ＭＮ，ＭＷ，ＭＸ，ＮＯ，ＮＺ，ＰＬ， ＰＴ，ＲＯ，ＲＵ，ＳＤ，ＳＥ，ＳＧ，ＳＩ，ＳＫ，Ｓ Ｌ，ＴＪ，ＴＭ，ＴＲ，ＴＴ，ＴＺ，ＵＡ，ＵＧ，ＵＺ ，ＶＮ，ＹＵ，ＺＡ，ＺＷ Ｆターム(参考） 5B075 ND12 PQ42 PR06 QM08 UU40 5L096 DA02 EA39 FA00 HA09 JA03 JA24 KA04 KA15

Claims (28)

    【特許請求の範囲】
  1. 【請求項１】 参照マルチメディアデータのフューチャ及び前記フューチ
    ャの加重値情報を含むデータ構造を有する参照マルチメディアデータを受信する
    段階と、 前記フューチャと加重値情報を利用して前記参照マルチメディアデータを検索
    する段階と、 前記検索段階で得た結果としてのマルチメディアデータに対する妥当性情報を
    ユーザフィードバックする段階と、 前記結果としてのマルチメディアデータと前記参照マルチメディアデータに対
    する類似度を測定し、前記測定値を利用してフューチャの新たな加重値を計算す
    る段階と、 前記計算された加重値を利用して参照マルチメディアデータのデータ構造に含
    まれたフューチャの以前の加重値を更新する段階と を備えることを特徴とするマルチメディアデータの検索又はブラウジング方法。
  2. 【請求項２】 前記フィードバック段階において、ユーザのフィードバック
    が正しい妥当性情報であれば、参照マルチメディアデータと結果としてのマルチ
    メディアデータとの間の類似度を増加させるフューチャの加重値を増加させるこ
    とを特徴とする請求項１記載のマルチメディアデータの検索又はブラウジング方
    法。
  3. 【請求項３】 前記フィードバック段階において、ユーザのフィードバック
    が正しくない妥当性情報であれば、参照マルチメディアデータと結果としてのマ
    ルチメディアデータとの間の非類似度を増加させるフューチャの加重値を増加さ
    せることを特徴とする請求項２記載のマルチメディアデータの検索又はブラウジ
    ング方法。
  4. 【請求項４】 前記参照マルチメディアデータのデータ構造は、加重値に対
    する信頼性を直接または間接的に示す信頼度情報を更に含むことを特徴とする請
    求項１記載のマルチメディアデータの検索又はブラウジング方法。
  5. 【請求項５】 前記フューチャに割当てられた加重値の信頼度はユーザのフ
    ィードバックによる学習量に比例することを特徴とする請求項４記載のマルチメ
    ディアデータの検索又はブラウジング方法。
  6. 【請求項６】 前記参照マルチメディアデータのデータ構造は、ユーザのフ
    ィードバックによる加重値の更新を制限する権限情報を更に含むことを特徴とす
    る請求項４記載のマルチメディアデータの検索又はブラウジング方法。
  7. 【請求項７】 前記権限情報は、前記更新段階で加重値情報の更新の程度に
    影響を及ぼす程度値を有することを特徴とする請求項６記載のマルチメディアデ
    ータの検索又はブラウジング方法。
  8. 【請求項８】 高い権限レベルのユーザによるユーザフィードバックに更に
    高い信頼度が与えられることを特徴とする請求項７記載のマルチメディアデータ
    の検索又はブラウジング方法。
  9. 【請求項９】 前記更新段階において、信頼度情報及び権限情報に基づいて
    参照マルチメディアデータのデータ構造内のフューチャの加重値情報を更新する
    ことを特徴とする請求項６記載のマルチメディアデータの検索又はブラウジング
    方法。
  10. 【請求項１０】 前記参照マルチメディアデータのデータ構造は、ユーザの
    フィードバックによる加重値情報の更新を制限する権限情報を更に含むことを特
    徴とする請求項１記載のマルチメディアデータの検索又はブラウジング方法。
  11. 【請求項１１】 前記権限情報は多数の権限レベルを含み、各権限レベルは
    前記更新段階で加重値情報の更新の程度に影響を及ぼす程度値を有することを特
    徴とする請求項１０記載のマルチメディアデータの検索又はブラウジング方法。
  12. 【請求項１２】 ユーザの権限レベルを決定するようにユーザよりパスワー
    ドを受信することを特徴とする請求項１１記載のマルチメディアデータの検索又
    はブラウジング方法。
  13. 【請求項１３】 参照マルチメディアデータのフューチャの重要性を示す可
    変情報を利用して参照マルチメディアデータを検索する段階と、 ユーザで前記検索されたマルチメディアデータに対する妥当性情報をフィード
    バックする段階と、 前記システムで前記妥当性情報のフィードバックされた情報又は前記システム
    に蓄積されたユーザパターン情報を利用して新たな可変情報を算出する段階と、 前記システムで前記算出された可変情報及び／又は信頼度情報を利用して可変
    情報を更新し、前記更新された可変情報を維持する段階と を備えることを特徴とするマルチメディアデータの検索又はブラウジング方法。
  14. 【請求項１４】 前記可変情報は、 前記マルチメディアデータの検索に使用されたフューチャの加重値と、 特定のビデオの検索又はブラウジングに使用されたフレーム又はセグメントの
    加重値と、 ユーザの選好度又はユーザの習慣を示すユーザ依存的情報と前記マルチメディ
    アの主要領域又は主要対象の検索及びブラウジングに使用されるデータの一部分
    に対する加重値と、 類似リスト、クラスターモデルのマルチメディアのグルーピングのための情報
    の中で選択される何れか一つ以上の組合せ であることを特徴とする請求項１３記載のマルチメディアデータの検索又はブラ
    ウジング方法。
  15. 【請求項１５】 前記新たな可変情報を算出する場合、検索又はブラウジン
    グされたマルチメディアデータに対する互いに異なる可変情報の値を有する２つ
    以上の同一のマルチメディアデータが発生すると、前記可変情報の値に対する信
    頼度が相対的に高いものを選択することを特徴とする請求項１３記載のマルチメ
    ディアデータの検索又はブラウジング方法。
  16. 【請求項１６】 前記新たな可変情報を算出する場合、検索又はブラウジン
    グされたマルチメディアデータに対する互いに異なる可変情報の値を有する２つ
    以上の同一のマルチメディアデータが発生すると、前記マルチメディアデータを
    前記可変情報の値の信頼度に比例するように組み合わせることを特徴とする請求
    項１３記載のマルチメディアデータの検索又はブラウジング方法。
  17. 【請求項１７】 参照マルチメディアデータのフューチャの重要性を示す可
    変情報を利用して参照マルチメディアデータを検索する段階と、 前記システムで前記検索されたマルチメディアデータに対する妥当性情報をフ
    ィードバックする段階と、 学習情報等の妥当性情報を利用、或いは既蓄積されたユーザパターン情報及び
    ／又は信頼度情報を利用して前記可変情報を更新し、前記更新された可変情報を
    維持する段階と を備えることを特徴とするマルチメディアデータを検索又はブラウジング方法。
  18. 【請求項１８】 各ユーザとシステムとの間の通信時に利用されるデータが
    、 マルチメディアデータと、 前記マルチメディアデータのフューチャ情報と、 前記マルチメディアデータのフューチャの重要度を示す加重値情報と を含むことを特徴とするマルチメディアデータの検索又はブラウジング時に利用
    されるデータ構造。
  19. 【請求項１９】 前記データ構造は、可変情報の信頼度を示す信頼度情報を
    更に含むことを特徴とする請求項１８記載のマルチメディアデータの検索又はブ
    ラウジング時に利用されるデータ構造。
  20. 【請求項２０】 前記信頼度情報は特定のレベルのユーザによって更新され
    た回数情報を含むことを特徴とする請求項１９記載のマルチメディアデータの検
    索又はブラウジング時に利用されるデータ構造。
  21. 【請求項２１】 前記データ構造は権限コードを更に含むことを特徴とする
    請求項１９記載のマルチメディアデータの検索又はブラウジング時に利用される
    データ構造。
  22. 【請求項２２】 前記信頼度情報は可変的であり、権限レベルの数、各権限
    レベルに対する可変情報の更新程度、及び各権限レベルのユーザによる可変情報
    の更新回数を含むことを特徴とする請求項２１記載のマルチメディアデータの検
    索又はブラウジング時に利用されるデータ構造。
  23. 【請求項２３】 前記信頼度情報は固定的であり、固定された権限レベルの
    ユーザによる可変情報の更新回数を含むことを特徴とする請求項２１記載のマル
    チメディアデータの検索又はブラウジング時に利用されるデータ構造。
  24. 【請求項２４】 前記データ構造は権限コードを更に含むことを特徴とする
    請求項１８記載のマルチメディアデータの検索又はブラウジング時に利用される
    データ構造。
  25. 【請求項２５】 請求項１８のデータ構造を有するマルチメディアデータの
    検索又はブラウジング方法。
  26. 【請求項２６】 請求項１９のデータ構造を有するマルチメディアデータの
    検索又はブラウジング方法。
  27. 【請求項２７】 請求項２１のデータ構造を有するマルチメディアデータの
    検索又はブラウジング方法。
  28. 【請求項２８】 請求項２４のデータ構造を有するマルチメディアデータの
    検索又はブラウジング方法。
JP2000596529A 1999-01-29 2000-01-27 マルチメディアデータの検索方法及び生成方法 Expired - Fee Related JP3585844B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR1019990002979A KR100319153B1 (ko) 1999-01-29 1999-01-29 사용자의 권한 등급에 따른 이미지 검색 시스템
KR1999/35798 1999-08-27
KR1019990035798A KR100350785B1 (ko) 1999-08-27 1999-08-27 멀티미디어 데이타의 특징 기술정보 생성방법
KR1999/2979 1999-08-27
PCT/KR2000/000063 WO2000045341A1 (en) 1999-01-29 2000-01-27 Method of searching or browsing multimedia data and data structure

Publications (2)

Publication Number Publication Date
JP2002536730A true JP2002536730A (ja) 2002-10-29
JP3585844B2 JP3585844B2 (ja) 2004-11-04

Family

ID=26634655

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000596529A Expired - Fee Related JP3585844B2 (ja) 1999-01-29 2000-01-27 マルチメディアデータの検索方法及び生成方法

Country Status (9)

Country Link
US (2) US6643643B1 (ja)
EP (2) EP1066595B1 (ja)
JP (1) JP3585844B2 (ja)
CN (1) CN1293793B (ja)
AT (2) ATE510258T1 (ja)
AU (1) AU2330100A (ja)
CA (1) CA2326813A1 (ja)
DE (1) DE60044924D1 (ja)
WO (1) WO2000045341A1 (ja)

Families Citing this family (146)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000276469A (ja) * 1999-03-23 2000-10-06 Canon Inc 情報検索装置及びその方法、記憶媒体
US6411724B1 (en) * 1999-07-02 2002-06-25 Koninklijke Philips Electronics N.V. Using meta-descriptors to represent multimedia information
KR100346262B1 (ko) * 1999-08-27 2002-07-26 엘지전자주식회사 멀티미디어 데이타의 키워드 자가 생성방법
US6970860B1 (en) * 2000-10-30 2005-11-29 Microsoft Corporation Semi-automatic annotation of multimedia objects
US7099860B1 (en) * 2000-10-30 2006-08-29 Microsoft Corporation Image retrieval systems and methods with semantic and feature based relevance feedback
AUPR230700A0 (en) * 2000-12-22 2001-01-25 Canon Kabushiki Kaisha A method for facilitating access to multimedia content
KR100788643B1 (ko) * 2001-01-09 2007-12-26 삼성전자주식회사 색과 질감의 조합을 기반으로 하는 영상 검색 방법
US6870956B2 (en) 2001-06-14 2005-03-22 Microsoft Corporation Method and apparatus for shot detection
JP2003132090A (ja) * 2001-10-26 2003-05-09 Olympus Optical Co Ltd 類似データ検索装置および方法
JP4014390B2 (ja) * 2001-10-29 2007-11-28 オリンパス株式会社 マルチメディアオブジェクト検索システム
US7117207B1 (en) * 2002-09-11 2006-10-03 George Mason Intellectual Properties, Inc. Personalizable semantic taxonomy-based search agent
US7098117B2 (en) * 2002-10-18 2006-08-29 The Regents Of The University Of Michigan Method of fabricating a package with substantially vertical feedthroughs for micromachined or MEMS devices
US7116716B2 (en) 2002-11-01 2006-10-03 Microsoft Corporation Systems and methods for generating a motion attention model
US7274741B2 (en) 2002-11-01 2007-09-25 Microsoft Corporation Systems and methods for generating a comprehensive user attention model
US20040088723A1 (en) * 2002-11-01 2004-05-06 Yu-Fei Ma Systems and methods for generating a video summary
US7164798B2 (en) * 2003-02-18 2007-01-16 Microsoft Corporation Learning-based automatic commercial content detection
US7260261B2 (en) * 2003-02-20 2007-08-21 Microsoft Corporation Systems and methods for enhanced image adaptation
US7400761B2 (en) * 2003-09-30 2008-07-15 Microsoft Corporation Contrast-based image attention analysis framework
US7471827B2 (en) 2003-10-16 2008-12-30 Microsoft Corporation Automatic browsing path generation to present image areas with high attention value as a function of space and time
US7805024B2 (en) * 2004-05-05 2010-09-28 Nokia Corporation Method and apparatus to provide efficient multimedia content storage
US7860874B2 (en) 2004-06-08 2010-12-28 Siemens Industry, Inc. Method for searching across a PLC network
US9053754B2 (en) 2004-07-28 2015-06-09 Microsoft Technology Licensing, Llc Thumbnail generation and presentation for recorded TV programs
US7986372B2 (en) 2004-08-02 2011-07-26 Microsoft Corporation Systems and methods for smart media content thumbnail extraction
US7383260B2 (en) * 2004-08-03 2008-06-03 International Business Machines Corporation Method and apparatus for ontology-based classification of media content
JP2006048320A (ja) * 2004-08-04 2006-02-16 Sony Corp 情報処理装置および方法、記録媒体、並びにプログラム
US7734622B1 (en) * 2005-03-25 2010-06-08 Hewlett-Packard Development Company, L.P. Media-driven browsing
GB2432927A (en) * 2005-10-25 2007-06-06 Thomas Donnelly Image search engine
US8818916B2 (en) 2005-10-26 2014-08-26 Cortica, Ltd. System and method for linking multimedia data elements to web pages
US9372940B2 (en) 2005-10-26 2016-06-21 Cortica, Ltd. Apparatus and method for determining user attention using a deep-content-classification (DCC) system
US9218606B2 (en) 2005-10-26 2015-12-22 Cortica, Ltd. System and method for brand monitoring and trend analysis based on deep-content-classification
US9384196B2 (en) 2005-10-26 2016-07-05 Cortica, Ltd. Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof
US11403336B2 (en) 2005-10-26 2022-08-02 Cortica Ltd. System and method for removing contextually identical multimedia content elements
US10387914B2 (en) 2005-10-26 2019-08-20 Cortica, Ltd. Method for identification of multimedia content elements and adding advertising content respective thereof
US10380164B2 (en) 2005-10-26 2019-08-13 Cortica, Ltd. System and method for using on-image gestures and multimedia content elements as search queries
US9489431B2 (en) 2005-10-26 2016-11-08 Cortica, Ltd. System and method for distributed search-by-content
US11216498B2 (en) 2005-10-26 2022-01-04 Cortica, Ltd. System and method for generating signatures to three-dimensional multimedia data elements
US10776585B2 (en) 2005-10-26 2020-09-15 Cortica, Ltd. System and method for recognizing characters in multimedia content
US10585934B2 (en) 2005-10-26 2020-03-10 Cortica Ltd. Method and system for populating a concept database with respect to user identifiers
US10607355B2 (en) 2005-10-26 2020-03-31 Cortica, Ltd. Method and system for determining the dimensions of an object shown in a multimedia content item
US9235557B2 (en) 2005-10-26 2016-01-12 Cortica, Ltd. System and method thereof for dynamically associating a link to an information resource with a multimedia content displayed in a web-page
US9191626B2 (en) 2005-10-26 2015-11-17 Cortica, Ltd. System and methods thereof for visual analysis of an image on a web-page and matching an advertisement thereto
US10380267B2 (en) 2005-10-26 2019-08-13 Cortica, Ltd. System and method for tagging multimedia content elements
US11032017B2 (en) 2005-10-26 2021-06-08 Cortica, Ltd. System and method for identifying the context of multimedia content elements
US9256668B2 (en) 2005-10-26 2016-02-09 Cortica, Ltd. System and method of detecting common patterns within unstructured data elements retrieved from big data sources
US9646005B2 (en) 2005-10-26 2017-05-09 Cortica, Ltd. System and method for creating a database of multimedia content elements assigned to users
US9558449B2 (en) 2005-10-26 2017-01-31 Cortica, Ltd. System and method for identifying a target area in a multimedia content element
US9466068B2 (en) 2005-10-26 2016-10-11 Cortica, Ltd. System and method for determining a pupillary response to a multimedia data element
US10614626B2 (en) 2005-10-26 2020-04-07 Cortica Ltd. System and method for providing augmented reality challenges
US10535192B2 (en) 2005-10-26 2020-01-14 Cortica Ltd. System and method for generating a customized augmented reality environment to a user
US10848590B2 (en) 2005-10-26 2020-11-24 Cortica Ltd System and method for determining a contextual insight and providing recommendations based thereon
US10635640B2 (en) 2005-10-26 2020-04-28 Cortica, Ltd. System and method for enriching a concept database
US9529984B2 (en) 2005-10-26 2016-12-27 Cortica, Ltd. System and method for verification of user identification based on multimedia content elements
US11019161B2 (en) 2005-10-26 2021-05-25 Cortica, Ltd. System and method for profiling users interest based on multimedia content analysis
US10360253B2 (en) 2005-10-26 2019-07-23 Cortica, Ltd. Systems and methods for generation of searchable structures respective of multimedia data content
US10191976B2 (en) 2005-10-26 2019-01-29 Cortica, Ltd. System and method of detecting common patterns within unstructured data elements retrieved from big data sources
US9330189B2 (en) 2005-10-26 2016-05-03 Cortica, Ltd. System and method for capturing a multimedia content item by a mobile device and matching sequentially relevant content to the multimedia content item
US9031999B2 (en) 2005-10-26 2015-05-12 Cortica, Ltd. System and methods for generation of a concept based database
US10180942B2 (en) * 2005-10-26 2019-01-15 Cortica Ltd. System and method for generation of concept structures based on sub-concepts
US8266185B2 (en) 2005-10-26 2012-09-11 Cortica Ltd. System and methods thereof for generation of searchable structures respective of multimedia data content
US10691642B2 (en) 2005-10-26 2020-06-23 Cortica Ltd System and method for enriching a concept database with homogenous concepts
US11003706B2 (en) 2005-10-26 2021-05-11 Cortica Ltd System and methods for determining access permissions on personalized clusters of multimedia content elements
US10949773B2 (en) 2005-10-26 2021-03-16 Cortica, Ltd. System and methods thereof for recommending tags for multimedia content elements based on context
US9639532B2 (en) 2005-10-26 2017-05-02 Cortica, Ltd. Context-based analysis of multimedia content items using signatures of multimedia elements and matching concepts
US10193990B2 (en) 2005-10-26 2019-01-29 Cortica Ltd. System and method for creating user profiles based on multimedia content
US10380623B2 (en) 2005-10-26 2019-08-13 Cortica, Ltd. System and method for generating an advertisement effectiveness performance score
US9477658B2 (en) 2005-10-26 2016-10-25 Cortica, Ltd. Systems and method for speech to speech translation using cores of a natural liquid architecture system
US10742340B2 (en) 2005-10-26 2020-08-11 Cortica Ltd. System and method for identifying the context of multimedia content elements displayed in a web-page and providing contextual filters respective thereto
US11361014B2 (en) 2005-10-26 2022-06-14 Cortica Ltd. System and method for completing a user profile
US11386139B2 (en) 2005-10-26 2022-07-12 Cortica Ltd. System and method for generating analytics for entities depicted in multimedia content
US11620327B2 (en) 2005-10-26 2023-04-04 Cortica Ltd System and method for determining a contextual insight and generating an interface with recommendations based thereon
US8312031B2 (en) 2005-10-26 2012-11-13 Cortica Ltd. System and method for generation of complex signatures for multimedia data content
US9953032B2 (en) 2005-10-26 2018-04-24 Cortica, Ltd. System and method for characterization of multimedia content signals using cores of a natural liquid architecture system
US10621988B2 (en) 2005-10-26 2020-04-14 Cortica Ltd System and method for speech to text translation using cores of a natural liquid architecture system
US9396435B2 (en) 2005-10-26 2016-07-19 Cortica, Ltd. System and method for identification of deviations from periodic behavior patterns in multimedia content
US11604847B2 (en) 2005-10-26 2023-03-14 Cortica Ltd. System and method for overlaying content on a multimedia content element based on user interest
US8326775B2 (en) 2005-10-26 2012-12-04 Cortica Ltd. Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof
US9286623B2 (en) 2005-10-26 2016-03-15 Cortica, Ltd. Method for determining an area within a multimedia content element over which an advertisement can be displayed
US10372746B2 (en) 2005-10-26 2019-08-06 Cortica, Ltd. System and method for searching applications using multimedia content elements
US10698939B2 (en) 2005-10-26 2020-06-30 Cortica Ltd System and method for customizing images
US9767143B2 (en) 2005-10-26 2017-09-19 Cortica, Ltd. System and method for caching of concept structures
US8180826B2 (en) 2005-10-31 2012-05-15 Microsoft Corporation Media sharing and authoring on the web
US7773813B2 (en) 2005-10-31 2010-08-10 Microsoft Corporation Capture-intention detection for video content analysis
US8196032B2 (en) 2005-11-01 2012-06-05 Microsoft Corporation Template-based multimedia authoring and sharing
CN100463515C (zh) * 2005-11-23 2009-02-18 中国移动通信集团公司 多媒体广播组播业务的数据保护方法
US7599918B2 (en) * 2005-12-29 2009-10-06 Microsoft Corporation Dynamic search with implicit user intention mining
US10733326B2 (en) 2006-10-26 2020-08-04 Cortica Ltd. System and method for identification of inappropriate multimedia content
US8099315B2 (en) 2007-06-05 2012-01-17 At&T Intellectual Property I, L.P. Interest profiles for audio and/or video streams
KR101382499B1 (ko) * 2007-10-22 2014-04-21 삼성전자주식회사 영상 태깅 방법 및 이를 사용하는 영상 재생 장치.
US20090287655A1 (en) * 2008-05-13 2009-11-19 Bennett James D Image search engine employing user suitability feedback
US8839327B2 (en) 2008-06-25 2014-09-16 At&T Intellectual Property Ii, Lp Method and apparatus for presenting media programs
US9015778B2 (en) 2008-06-25 2015-04-21 AT&T Intellectual Property I. LP Apparatus and method for media on demand commentaries
EP2380097B1 (en) * 2008-12-22 2019-04-17 Koninklijke Philips N.V. Relevance feedback on a segment of a data object
US9276761B2 (en) * 2009-03-04 2016-03-01 At&T Intellectual Property I, L.P. Method and apparatus for group media consumption
US8275623B2 (en) 2009-03-06 2012-09-25 At&T Intellectual Property I, L.P. Method and apparatus for analyzing discussion regarding media programs
US8266652B2 (en) 2009-10-15 2012-09-11 At&T Intellectual Property I, L.P. Apparatus and method for transmitting media content
US9830605B2 (en) * 2009-10-30 2017-11-28 At&T Intellectual Property I, L.P. Apparatus and method for product marketing
US8224756B2 (en) * 2009-11-05 2012-07-17 At&T Intellectual Property I, L.P. Apparatus and method for managing a social network
US8760469B2 (en) 2009-11-06 2014-06-24 At&T Intellectual Property I, L.P. Apparatus and method for managing marketing
US9031379B2 (en) * 2009-11-10 2015-05-12 At&T Intellectual Property I, L.P. Apparatus and method for transmitting media content
US8316303B2 (en) 2009-11-10 2012-11-20 At&T Intellectual Property I, L.P. Method and apparatus for presenting media programs
US10708663B2 (en) 2009-11-13 2020-07-07 At&T Intellectual Property I, L.P. Apparatus and method for media on demand commentaries
US8387088B2 (en) 2009-11-13 2013-02-26 At&T Intellectual Property I, Lp Method and apparatus for presenting media programs
US9100550B2 (en) 2009-11-20 2015-08-04 At&T Intellectual Property I, L.P. Apparatus and method for managing a social network
US8373741B2 (en) * 2009-11-20 2013-02-12 At&T Intellectual Property I, Lp Apparatus and method for collaborative network in an enterprise setting
US8839306B2 (en) 2009-11-20 2014-09-16 At&T Intellectual Property I, Lp Method and apparatus for presenting media programs
US9094726B2 (en) * 2009-12-04 2015-07-28 At&T Intellectual Property I, Lp Apparatus and method for tagging media content and managing marketing
KR101914193B1 (ko) 2010-04-15 2018-11-02 삼성전자주식회사 디지털 컨텐츠 제공 장치 및 그 방법
CN102474586B (zh) * 2010-06-16 2015-10-21 松下电器（美国）知识产权公司 影像检索装置、影像检索方法、记录介质、程序、集成电路
US8831358B1 (en) 2011-11-21 2014-09-09 Google Inc. Evaluating image similarity
US9846696B2 (en) 2012-02-29 2017-12-19 Telefonaktiebolaget Lm Ericsson (Publ) Apparatus and methods for indexing multimedia content
US9633015B2 (en) 2012-07-26 2017-04-25 Telefonaktiebolaget Lm Ericsson (Publ) Apparatus and methods for user generated content indexing
US9292552B2 (en) * 2012-07-26 2016-03-22 Telefonaktiebolaget L M Ericsson (Publ) Apparatus, methods, and computer program products for adaptive multimedia content indexing
US9070046B2 (en) 2012-10-17 2015-06-30 Microsoft Technology Licensing, Llc Learning-based image webpage index selection
US10445367B2 (en) 2013-05-14 2019-10-15 Telefonaktiebolaget Lm Ericsson (Publ) Search engine for textual content and non-textual content
CN105493436B (zh) 2013-08-29 2019-09-10 瑞典爱立信有限公司 用于向授权用户分发内容项目的方法、内容拥有者设备
WO2015030645A1 (en) 2013-08-29 2015-03-05 Telefonaktiebolaget L M Ericsson (Publ) Methods, computer program, computer program product and indexing systems for indexing or updating index
US10289733B2 (en) * 2014-12-22 2019-05-14 Rovi Guides, Inc. Systems and methods for filtering techniques using metadata and usage data analysis
WO2017105641A1 (en) 2015-12-15 2017-06-22 Cortica, Ltd. Identification of key points in multimedia data elements
US11195043B2 (en) 2015-12-15 2021-12-07 Cortica, Ltd. System and method for determining common patterns in multimedia content elements based on key points
CN107133280A (zh) * 2017-04-14 2017-09-05 合信息技术（北京）有限公司 反馈的响应方法及装置
WO2019008581A1 (en) 2017-07-05 2019-01-10 Cortica Ltd. DETERMINATION OF DRIVING POLICIES
WO2019012527A1 (en) 2017-07-09 2019-01-17 Cortica Ltd. ORGANIZATION OF DEPTH LEARNING NETWORKS
US10846544B2 (en) 2018-07-16 2020-11-24 Cartica Ai Ltd. Transportation prediction system and method
US11036801B1 (en) * 2018-09-25 2021-06-15 A9.Com, Inc. Indexing and presenting content using latent interests
US11126870B2 (en) 2018-10-18 2021-09-21 Cartica Ai Ltd. Method and system for obstacle detection
US11181911B2 (en) 2018-10-18 2021-11-23 Cartica Ai Ltd Control transfer of a vehicle
US10839694B2 (en) 2018-10-18 2020-11-17 Cartica Ai Ltd Blind spot alert
US20200133308A1 (en) 2018-10-18 2020-04-30 Cartica Ai Ltd Vehicle to vehicle (v2v) communication less truck platooning
US11700356B2 (en) 2018-10-26 2023-07-11 AutoBrains Technologies Ltd. Control transfer of a vehicle
US10789535B2 (en) 2018-11-26 2020-09-29 Cartica Ai Ltd Detection of road elements
US11643005B2 (en) 2019-02-27 2023-05-09 Autobrains Technologies Ltd Adjusting adjustable headlights of a vehicle
US11285963B2 (en) 2019-03-10 2022-03-29 Cartica Ai Ltd. Driver-based prediction of dangerous events
US11694088B2 (en) 2019-03-13 2023-07-04 Cortica Ltd. Method for object detection using knowledge distillation
US11132548B2 (en) 2019-03-20 2021-09-28 Cortica Ltd. Determining object information that does not explicitly appear in a media unit signature
US10796444B1 (en) 2019-03-31 2020-10-06 Cortica Ltd Configuring spanning elements of a signature generator
US11488290B2 (en) 2019-03-31 2022-11-01 Cortica Ltd. Hybrid representation of a media unit
US11222069B2 (en) 2019-03-31 2022-01-11 Cortica Ltd. Low-power calculation of a signature of a media unit
US10776669B1 (en) 2019-03-31 2020-09-15 Cortica Ltd. Signature generation and object detection that refer to rare scenes
US10789527B1 (en) 2019-03-31 2020-09-29 Cortica Ltd. Method for object detection using shallow neural networks
CN110825891B (zh) * 2019-10-31 2023-11-14 北京小米移动软件有限公司 多媒体信息的识别方法及装置、存储介质
US11593662B2 (en) 2019-12-12 2023-02-28 Autobrains Technologies Ltd Unsupervised cluster generation
US10748022B1 (en) 2019-12-12 2020-08-18 Cartica Ai Ltd Crowd separation
US11590988B2 (en) 2020-03-19 2023-02-28 Autobrains Technologies Ltd Predictive turning assistant
US11827215B2 (en) 2020-03-31 2023-11-28 AutoBrains Technologies Ltd. Method for training a driving related object detector
US11645733B2 (en) 2020-06-16 2023-05-09 Bank Of America Corporation System and method for providing artificial intelligence architectures to people with disabilities
US11756424B2 (en) 2020-07-24 2023-09-12 AutoBrains Technologies Ltd. Parking assist

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06168277A (ja) * 1992-11-30 1994-06-14 Canon Inc 画像検索装置及び方法
JPH0721198A (ja) * 1993-06-17 1995-01-24 Nippon Telegr & Teleph Corp <Ntt> 画像検索方法
JPH07160731A (ja) * 1993-12-09 1995-06-23 Canon Inc 画像検索方法及びその装置
JPH07239856A (ja) * 1994-02-25 1995-09-12 Canon Inc 画像検索方法および装置
JPH08249353A (ja) * 1995-03-15 1996-09-27 Omron Corp 画像検索方法及び装置
JPH08249351A (ja) * 1995-03-15 1996-09-27 Omron Corp 画像検索方法及び装置
JPH09101970A (ja) * 1995-10-06 1997-04-15 Omron Corp 画像検索方法および画像検索装置
JPH09265478A (ja) * 1996-03-29 1997-10-07 Nec Corp 情報フィルタリング方式
JPH10154149A (ja) * 1996-11-25 1998-06-09 Nippon Telegr & Teleph Corp <Ntt> 類似オブジェクト検索方法および装置
JPH10171826A (ja) * 1996-12-11 1998-06-26 Nippon Telegr & Teleph Corp <Ntt> 類似オブジェクト検索方法および装置
JPH10260983A (ja) * 1997-03-19 1998-09-29 Canon Inc 画像検索装置及び方法
JPH10289241A (ja) * 1997-04-14 1998-10-27 Canon Inc 画像処理装置及びその制御方法
JPH10326286A (ja) * 1997-05-27 1998-12-08 Mitsubishi Electric Corp 類似検索装置及び類似検索プログラムを記録した記録媒体
JPH1115834A (ja) * 1997-06-19 1999-01-22 Canon Inc 画像処理装置及びその制御方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5020019A (en) * 1989-05-29 1991-05-28 Ricoh Company, Ltd. Document retrieval system
JPH03122770A (ja) * 1989-10-05 1991-05-24 Ricoh Co Ltd キーワード連想文書検索方法
US5321833A (en) * 1990-08-29 1994-06-14 Gte Laboratories Incorporated Adaptive ranking system for information retrieval
US5579471A (en) * 1992-11-09 1996-11-26 International Business Machines Corporation Image query system and method
WO1995017711A1 (en) * 1993-12-23 1995-06-29 Diacom Technologies, Inc. Method and apparatus for implementing user feedback
US5724567A (en) * 1994-04-25 1998-03-03 Apple Computer, Inc. System for directing relevance-ranked data objects to computer users
US5802361A (en) * 1994-09-30 1998-09-01 Apple Computer, Inc. Method and system for searching graphic images and videos
US5793888A (en) * 1994-11-14 1998-08-11 Massachusetts Institute Of Technology Machine learning apparatus and method for image searching
US6460036B1 (en) * 1994-11-29 2002-10-01 Pinpoint Incorporated System and method for providing customized electronic newspapers and target advertisements
US5774121A (en) * 1995-09-18 1998-06-30 Avantos Performance Systems, Inc. User interface method and system for graphical decision making with categorization across multiple criteria
US5826260A (en) * 1995-12-11 1998-10-20 International Business Machines Corporation Information retrieval system and method for displaying and ordering information based on query element contribution
US5731991A (en) * 1996-05-03 1998-03-24 Electronic Data Systems Corporation Software product evaluation
US6081276A (en) 1996-11-14 2000-06-27 International Business Machines Corporation Method and apparatus for creating a color name dictionary and for querying an image by color name
DE69832924T2 (de) * 1997-04-14 2006-07-06 Canon K.K. Bildverarbeitungsgerät und Kontrollverfahren dafür
US6163622A (en) 1997-12-18 2000-12-19 U.S. Philips Corporation Image retrieval system
US6067539A (en) * 1998-03-02 2000-05-23 Vigil, Inc. Intelligent information retrieval system
US6285995B1 (en) 1998-06-22 2001-09-04 U.S. Philips Corporation Image retrieval system using a query image
US6457052B1 (en) * 1998-06-23 2002-09-24 At&T Corp Method and apparatus for providing multimedia buffering capabilities based on assignment weights

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06168277A (ja) * 1992-11-30 1994-06-14 Canon Inc 画像検索装置及び方法
JPH0721198A (ja) * 1993-06-17 1995-01-24 Nippon Telegr & Teleph Corp <Ntt> 画像検索方法
JPH07160731A (ja) * 1993-12-09 1995-06-23 Canon Inc 画像検索方法及びその装置
JPH07239856A (ja) * 1994-02-25 1995-09-12 Canon Inc 画像検索方法および装置
JPH08249353A (ja) * 1995-03-15 1996-09-27 Omron Corp 画像検索方法及び装置
JPH08249351A (ja) * 1995-03-15 1996-09-27 Omron Corp 画像検索方法及び装置
JPH09101970A (ja) * 1995-10-06 1997-04-15 Omron Corp 画像検索方法および画像検索装置
JPH09265478A (ja) * 1996-03-29 1997-10-07 Nec Corp 情報フィルタリング方式
JPH10154149A (ja) * 1996-11-25 1998-06-09 Nippon Telegr & Teleph Corp <Ntt> 類似オブジェクト検索方法および装置
JPH10171826A (ja) * 1996-12-11 1998-06-26 Nippon Telegr & Teleph Corp <Ntt> 類似オブジェクト検索方法および装置
JPH10260983A (ja) * 1997-03-19 1998-09-29 Canon Inc 画像検索装置及び方法
JPH10289241A (ja) * 1997-04-14 1998-10-27 Canon Inc 画像処理装置及びその制御方法
JPH10326286A (ja) * 1997-05-27 1998-12-08 Mitsubishi Electric Corp 類似検索装置及び類似検索プログラムを記録した記録媒体
JPH1115834A (ja) * 1997-06-19 1999-01-22 Canon Inc 画像処理装置及びその制御方法

Also Published As

Publication number Publication date
AU2330100A (en) 2000-08-18
EP1635243B1 (en) 2011-05-18
US20040064526A1 (en) 2004-04-01
CA2326813A1 (en) 2000-08-03
CN1293793B (zh) 2010-05-12
JP3585844B2 (ja) 2004-11-04
EP1635243A2 (en) 2006-03-15
ATE510258T1 (de) 2011-06-15
CN1293793A (zh) 2001-05-02
EP1066595B1 (en) 2010-09-08
EP1635243A3 (en) 2010-02-17
DE60044924D1 (de) 2010-10-21
EP1066595A1 (en) 2001-01-10
WO2000045341A1 (en) 2000-08-03
ATE480826T1 (de) 2010-09-15
US6643643B1 (en) 2003-11-04

Similar Documents

Publication Publication Date Title
JP2002536730A (ja) マルチメディアデータの検索又はブラウジング方法
JP3564068B2 (ja) マルチメディアデータのサーチ方法
US6112186A (en) Distributed system for facilitating exchange of user information and opinion using automated collaborative filtering
US6014664A (en) Method and apparatus for incorporating weights into data combinational rules
US6795818B1 (en) Method of searching multimedia data
US6092049A (en) Method and apparatus for efficiently recommending items using automated collaborative filtering and feature-guided automated collaborative filtering
US9536005B2 (en) Social distance based search result order adjustment
US6049777A (en) Computer-implemented collaborative filtering based method for recommending an item to a user
US5583763A (en) Method and apparatus for recommending selections based on preferences in a multi-user system
US10255353B2 (en) Individualized detailed program recommendations with active updating of viewer preferences
JP2002543539A (ja) カラー画像を表現する方法、カラー画像を探索する方法、カラー画像を表現及び探索する装置、コンピュータシステム、コンピュータプログラム並びにコンピュータ読取り可能媒体
JP2001155037A (ja) 多重項目による利用者嗜好度情報データ構造及びそれを利用したマルチメディア情報提供方法
JP2000242663A (ja) 情報提供システム及び情報提供方法
US6987222B2 (en) Determining similarity between artists and works of artists
KR100650665B1 (ko) 동영상 검색방법
US20210124778A1 (en) Convergence information-tags retrieval method
JP4209104B2 (ja) 多重重み構造を使ったマルチメディア検索方法
JPH11238077A (ja) 画像検索装置及び方法並びに画像検索プログラムを記録する記録媒体
JP3205136B2 (ja) 大域的および局所的文脈情報を用いた検索候補の絞り込み方法
CN116702243A (zh) 一种产品设计的集约化设计方法
KR100319153B1 (ko) 사용자의 권한 등급에 따른 이미지 검색 시스템
CN118245634A (zh) 基于大数据的影视内容优化推荐方法
KR20000054861A (ko) 특징소 타입별 및 요소별 중요도 자동 판단에 의한 이미지 검색
KR20210093744A (ko) 영상 검색 제공 방법 및 장치
JP2646757B2 (ja) 検索結果集合決定方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20031209

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20040309

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20040316

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040609

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040706

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040804

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080813

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080813

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090813

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees