JP5372369B2 - Digital asset management, desktop to use search that defines the target, and a digital watermark search - Google Patents

Digital asset management, desktop to use search that defines the target, and a digital watermark search Download PDF

Info

Publication number
JP5372369B2
JP5372369B2 JP2007518107A JP2007518107A JP5372369B2 JP 5372369 B2 JP5372369 B2 JP 5372369B2 JP 2007518107 A JP2007518107 A JP 2007518107A JP 2007518107 A JP2007518107 A JP 2007518107A JP 5372369 B2 JP5372369 B2 JP 5372369B2
Authority
JP
Grant status
Grant
Patent type
Prior art keywords
metadata
image
search
watermark
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007518107A
Other languages
Japanese (ja)
Other versions
JP2008510327A (en )
Inventor
トニー, エフ. ロドリゲツ,
ショーン カルフーン,
スコット, ジェー. カー,
スティーヴン グレイ,
アラステア, エム. リード,
Original Assignee
ディジマーク コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/30Information retrieval; Database structures therefor ; File system structures therefor
    • G06F17/30861Retrieval from the Internet, e.g. browsers
    • G06F17/30864Retrieval from the Internet, e.g. browsers by querying, e.g. search engines or meta-search engines, crawling techniques, push systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/30Information retrieval; Database structures therefor ; File system structures therefor
    • G06F17/30244Information retrieval; Database structures therefor ; File system structures therefor in image databases
    • G06F17/30265Information retrieval; Database structures therefor ; File system structures therefor in image databases based on information manually generated or based on information not derived from the image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/30Information retrieval; Database structures therefor ; File system structures therefor
    • G06F17/3074Audio data retrieval
    • G06F17/30743Audio data retrieval using features automatically derived from the audio content, e.g. descriptors, fingerprints, signatures, MEP-cepstral coefficients, musical score, tempo
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/30Information retrieval; Database structures therefor ; File system structures therefor
    • G06F17/3074Audio data retrieval
    • G06F17/30749Audio data retrieval using information manually generated or using information not derived from the audio data, e.g. title and artist information, time and location information, usage information, user ratings

Abstract

The present invention provides methods and systems to improve network searching for watermarked content. In some implementations we employ keyword searching to narrow the universe of possible URL candidates. A resulting URL list is searched for digital watermarking. A system is provided to allow customer input. For example, a customer enters keywords or network locations. The keywords or network locations are provided to a watermark-enabled web browser which accesses locations associated with the keywords or network locations. Some implementations of the present invention employ a plurality of distributed watermark-enabled web browsers. Other aspects of the invention provide methods and system to facilitate desktop searching and automated metadata gathering and generating. In one implementation a digital watermark is used to determine whether metadata associated with an image or audio file is current or fresh. The metadata is updated when it is out of date. Watermarks can also be used to link to or facilitate so-called on-line "blogs" (or online conversations).

Description

関連出願のデータ Data related applications

本特許出願は、2005年4月19日に出願された米国特許仮出願第60/673,022号、2005年2月25日に出願された米国特許仮出願第60/656,642号、2004年6月24日に出願された米国特許仮出願第60/582,914号、及び2004年6月22日に出願された米国特許仮出願第60/582,280号の利益を主張するものである。 This patent application, April 19, 2005 U.S. Provisional Patent Application No. 60 / 673,022, filed, U.S. Provisional Patent Application No. 60 / 656,642 filed February 25, 2005, 2004 filed June 24 year U.S. provisional Patent application No. 60 / 582,914, and claims the benefit of U.S. provisional Patent application No. 60 / 582,280, filed Jun. 22, 2004 is there.

また、本特許出願は、2001年4月6日に出願された米国特許仮出願第60/282,205号の利益を主張する2002年4月5日に出願の米国特許出願第10/118,468号(米国2002−0188841A1として公開された)と、2000年1月13日に出願された米国特許出願第09/482,786号(許可された)と、2000年7月6日に出願された米国特許出願第09/612,177号(現在の米国特許第6,681,029号)に関連する出願である。 Further, the present patent application, April 2001, filed Apr. 5, 2002 This application claims the benefit of U.S. Provisional Application No. 60 / 282,205 to 6 days U.S. Patent Application No. 10/118, Nos. 468 and (published as US 2002-0188841A1), filed on January 13, 2000 the US patent application Ser. No. 09 / 482,786 and (is allowed), filed on July 6, 2000 U.S. Patent application Serial No. 09 / 612,177 which is filed relating to (now U.S. Pat. No. 6,681,029). ここで、米国特許出願第09/612,177号は、1996年11月12日に出願された米国特許出願第08/746,613号(現在の米国特許第6,122,403号)の継続出願である。 Here, the US patent application Ser. No. 09 / 612,177, continuation of 1996 November 12, US patent application Ser. No. 08 / 746,613, filed on days (now US Pat. No. 6,122,403) it is an application. この米国特許出願第08/746,613号は、1996年5月16日に出願された米国特許出願第08/649,419号(現在の米国特許第5,862,260号)及び1995年7月27日に出願された第08/508,083号(現在の米国特許第5,841,978号)の一部継続出願である。 The U.S. patent application Ser. No. 08 / 746,613, 1996 May 16, U.S. Patent Application Serial No. 08 / 649,419, filed (now U.S. Pat. No. 5,862,260) and 1995 7 08 / No. 508,083, filed in January 27, which is a continuation-in-part application (now U.S. Pat. No. 5,841,978).

本発明は、広くデジタル透かし処理に関するものである。 The present invention relates broadly digital watermarking. 幾つかの実施の形態において、本発明は、ネットワーク又はデスクトップの検索に関するものである。 In some embodiments, the present invention relates to retrieval of the network or desktop.

背景及び概要 Background and Overview

デジタルコンテンツが増加し続けるにつれて、デジタル資産の管理が益々困難な課題となっている。 As digital content continues to increase, the digital asset management has become an increasingly difficult task. コンピュータネットワーキング及びデータベース技術の向上によって、会社が、画像及び他のメディアの大きな集合体を管理し、コンテンツを第三者に利用できるようにすることが可能になっている。 The improved computer networking and database technology, company, manages a large collection of images and other media, it has been possible to make content available to third parties. ネットワーク通信は、強力なツールを提供してデータベースマネージャーが他の者とコンテンツを共有することを可能にするが、コンテンツが如何に使用されるかを制御及び追跡することを困難とし、また、コンテンツを効率的に共有することを困難にする。 Network communications, database manager provides a powerful tool to allow the sharing others content, but makes it difficult to control and keep track of the content is how used, The content the making it difficult to efficiently share.

本特許出願の譲受人による先の特許文書は、インターネットのようなコンピュータネットワークにおいてメディアオブジェクトファイルを自動的にサーチし、且つ、デジタル透かしによってスクリーニング(選別)するシステム及び方法を示している。 Patent documents earlier by the assignee of the present patent application, automatically searches the media object files in a computer network such as the Internet, and illustrates a system and method for screening (sorting) by the digital watermarking. 例えば、本譲受人の米国特許第5,862,260号を参照されたい。 For example, see U.S. Pat. No. 5,862,260 of the present assignee. インターネットコンテンツ又はリンクの自動サーチ及び収集を実行するために使用されるソフトウェアは、ウェブクローラー又はスパイダーと称されることがある。 Software used to perform an automatic search and collection of Internet content or links may be referred to as a web crawler or spider.

デジタル透かし処理は、メディアコンテンツを変更してマシン読み取り可能なコードをデータコンテンツに埋め込むためのプロセスである。 Digital watermarking is a process for embedding machine readable code into data content by changing the media content. データは、埋め込まれたコードがユーザに感知されないか又は略感知されないが自動検出プロセスを介して検出できるように、変更される。 Data embedded code is not or substantially sensed not sensed the user to be detected through the automatic detection process is changed. 最も一般的には、デジタル透かしは、画像、オーディオ信号及びビデオ信号のようなメディアに適用される。 Most commonly, the digital watermark image is applied to the media, such as audio and video signals. しかしながら、デジタル透かし処理は、ドキュメント(例えば、ライン、ワード又はキャラクタシフト、バックグランドテクスチャ等を介して)、ソフトウェア、多次元グラフィックモデル、及びオブジェクトの表面テクスチャを含む他の形式のデータにも適用できる。 However, the digital watermarking is a document (e.g., lines, words or character shift, via a background texture, etc.), can be applied software, multidimensional graphical models, and also to other types of data including the surface texture of the object .

デジタル透かし処理システムは、二つの主な要素、即ち、メディアコンテンツに透かしを埋め込む埋め込み部と、埋め込まれた透かしを検出して読み取る読み取り部を有している。 Digital watermarking systems have two major components, namely, the embedding unit embeds the watermark in the media content, a reading unit for reading and detecting the embedded watermark. 埋め込み部は、空間的、時間的又は他の領域(例えば、フーリエ、離散的コサイン、又はウェーブレット変換領域)においてメディアコンテンツのデータサンプルを変更することによって透かしを埋め込む。 Embedding unit, spatial, temporal or other areas (e.g., Fourier, discrete cosine, or wavelet transform domain) embedding a watermark in by modifying data samples of the media content. 読み取り部は、ターゲットコンテンツを分析して、透かしが存在するか否かを検出する。 Reading unit analyzes the target content, to detect whether the watermark is present. 透かしが情報(例えば、メッセージ)をエンコードするアプリケーションでは、リーダーはこの情報を検出された透かしから抽出する。 Watermark information (e.g., messages) in the application of encoding, the reader extracts from the detected watermark this information.

ステガノグラフィー、データ隠蔽、及びデジタル透かし処理に関する本譲受人の研究は、例えば、米国特許第5,862,260号、第6,408,082号、及び第6,614,914号、並びに、公開された明細書WO9953428号及びWO0007356号(米国特許第6,449,377号及び第6,345,104号に対応する)に反映されている。 Steganography, data hiding, and this assignee of study on digital watermarking, for example, U.S. Patent No. 5,862,260, No. 6,408,082, and No. 6,614,914, as well as the public is reflected in by the specification No. WO9953428 and No. WO0007356 (corresponding to U.S. Pat. No. 6,449,377 and EP 6,345,104). 非常に多数の他の手法が、当業者に知られている。 A large number of other techniques are known to those skilled in the art. 当業者は、ステガノグラフィー、データ隠蔽、及びデジタル透かし処理に関する全範囲の文献に精通しているものと見なされる者である。 Those skilled in the art, a person who is assumed to be familiar with steganography, data hiding, and the entire range of documents related to digital watermarking. 本出願の主題は、米国特許第5,862,260号、第6,122,403号、2000年5月15日に出願された出願中の特許出願第09/571,422号、2000年7月20日に出願された第09/620,019号、及び2000年8月10日に出願された第09/636,102号に開示されたものに関連している。 The subject matter of the present application, US Pat. No. 5,862,260, No. 6,122,403, patent application Ser. No. 09 / 571,422 in the application filed on May 15, 2000, 2000 7 09 / 620,019 No. filed on 20 days a month, and are related to those disclosed in No. 09 / 636,102, filed Aug. 10, 2000.

米国特許第5,862,260号に説明され、且つ、デジマーク・コーポレーションによって(IMAGEBRIDGEという商標名で)市販されている透かしベースの情報検索の拡張として、透かしデコーダを採用し分散させて、透かしスクリーニングを実行し、インターネットを含むネットワーク上の透かし入りメディアオブジェクトを用いた情報交換を行うことが可能である。 It is described in U.S. Patent No. 5,862,260, and, (under the trade name IMAGEBRIDGE) by Digimarc Corporation as an extension of the information retrieval watermark base marketed, by adopting the watermark decoder dispersion, watermark screening is executed, it is possible to perform information exchange using watermarked media objects on the network, including the Internet. 例えば、透かしデコーダは、インターネットのようなコンピュータネットワーク上の種々のロケーション、例えば、各サーチエンジンにより収集されたメディアオブジェクトをスクリーニングする複数のインターネットサーチエンジン、ファイアウオールで遭遇するメディアオブジェクトを選別するネットワークファイアウオール、スパイダーが通常届かないローカルエリアネットワーク及びデータベース、コンテンツフィルタ、クライアントベースのウェブブラウザ等に、に配備される。 For example, the watermark decoder, various locations on a computer network such as the Internet, for example, a plurality of Internet search engines for screening media objects collected by the search engine, the network selecting a media object encountered in firewall firewall, local area networks and databases spider can not reach normal, content filtering, the client-based web browser or the like, are deployed. これら分布されたデコーダの各々は、スパイダースレッドとして動作し、透かし情報のログを取る(及び、恐らくはそれに対して作用する)。 Each of these distributed decoder operates as a spider thread, logging watermark information (and, possibly acting on it). 透かし情報の種類には、例えば、透かし入りメディアオブジェクトにおける透かしからデコードされた識別子、メディアオブジェクトカウント、メディアオブジェクトの位置(それらが見つかった場所)のアドレス、及び、その他のコンテクスト情報(例えば、いかにオブジェクトが使用されるか、誰がそれを使用するか、等々)がある。 The types of watermark information, for example, address identifier decoded from the watermark in watermarked media objects, media objects counted, the position of the media object (where they are found), and other contextual information (e.g., how the object there either used, who uses it, etc.) it is. 次いで、スパイダースレッドは、それらのログ又はレポートを中央スパイダープログラムへ送信し、このプログラムが、ログを収集して、情報をサーチ可能なデータベースのフィールドへ集約する。 Then, spider thread, send them the log or report to a central spider program, this program is, to collect the log, to aggregate the information to the field of searchable database.

しかし、インターネットは、広大である。 However, the Internet is a vast. 一つの課題として、ウェブ全体にわたって透かし入りコンテンツを探索することがある。 One of the problems is to explore the watermarked content over the web.

従って、更なる改良を、インターネットの深部において透かしデータを更に探索するために提供する。 Therefore, further improvements are provided to further explore the watermark data in the deep portion of the Internet.

本発明の一側面によれば、ネットワークにおいて透かし入りコンテンツをサーチする方法が提供される。 According to one aspect of the present invention, a method of searching a watermarked content in the network is provided. この方法は、透かし入りコンテンツに関連する一以上のキーワードを受け取るステップと、当該一以上のキーワードをネットワークサーチエンジンに提供するステップと、を含む。 The method includes receiving one or more keywords associated with watermarked content, and providing the one or more keywords to network search engine, a. 一以上のキーワードに関連するURLのリストがネットワークサーチエンジンから得られる。 List of URL associated with one or more keywords can be obtained from the network search engine. URLへのアクセスがなされ、各URLにアクセスする間に、各URLのコンテンツがデジタル透かしを求めて、分析される。 Access to the URL is made, while access to the URL, the content of each URL in search of digital watermarks are analyzed. 少なくとも一つの透かし識別子、及びそれに対応するURLの位置は、それらが見つかったときに、報告される。 At least one watermark identifier and the position of the URL corresponding thereto, when they are found, are reported.

本発明の別の側面によれば、透かし入りコンテンツのネットワークサーチを管理するシステムが設けられる。 According to another aspect of the present invention, a system is provided for managing a network search of watermarked content. この方法は、i)顧客からキーワード及びネットワークの位置情報のうち少なくとも一つを受け取るためのウェブサイトインタフェイスと、ii)複数の分散した透かし検出器と通信するウェブサイトインタフェイスと、iii)キーワード及びネットワークの位置情報を、分散した透かし検出器に伝達するためのコントローラと、iv)デジタル透かし及びそれに対応するネットワークの位置に関連する情報を保持するデータベースと、を含む。 This method, i) the website interface for receiving at least one of position information of the keyword and the network from the customer, ii) the website interface for communicating with a plurality of distributed watermark detector, iii) Keyword and a location information of the network, and a controller for transmitting the distributed watermark detector, a database holding information related to the position of the network corresponding to iv) digital watermarks and it a.

更に別の側面によれば、ネットワークにおいて透かし入りコンテンツをサーチする方法が提供される。 According to yet another aspect, a method of searching a watermarked content in the network is provided. この方法は、可視パターンを受け取るステップと、その可視パターンに対応するコンテンツをネットワークにおいてサーチするステップと、を含む。 The method includes receiving a visible pattern, the steps of searching in a network the content corresponding to the visible pattern. 可視パターンに対応するものとして特定されたコンテンツが、デジタル透かしのために分析される。 Identified content as corresponding to the visible pattern is analyzed for the digital watermarks. デジタル透かしが見つかったときには、少なくとも一つの透かし識別子及びそれに対応するURLの位置が報告される。 When the digital watermark is found, the position of the URL and its corresponding at least one watermark identifier is reported.

別の課題は、ユーザのコンピュータ又はネットワークコンピュータにローカル記憶されたコンテンツを検出して管理することである。 Another object is to detect and manage content that is locally stored on the user's computer or network computer. サーチツールが最近出現してきており、ユーザがファイルをサーチして、当該ファイルの一覧を自分のコンピュータ上に作成することを可能にしている。 Search tool has been recently emerged the user to search for files, and a list of the file allows you to create on your computer. その例には、GoogleのGoogleデスクトップサーチ及びMicrosoftのMSNデスクトップサーチがある。 In the example, there is a Google Desktop Search and Microsoft's MSN Desktop Search Google. 改良を行うことによって、画像及びオーディオに関連するメタデータが最新のものであって、デスクトップサーチツールによって容易にインデックス付け可能なものであることを確実にする。 By make improvements, there is metadata associated with the image and audio of the latest, to ensure that those readily indexable by desktop search tool.

従って、本発明の更に別の側面によれば、画像又はオーディオファイルを受け取るステップと、画像又はオーディオファイルにおける知覚特徴を特定するステップと、当該知覚特徴に基づいて、画像又はオーディオファイルに対するメタデータを生成するステップと、を含む方法が提供される。 Thus, according to yet another aspect of the present invention, the steps of: receiving an image or audio file, identifying a perceived feature of the image or audio file, based on the perception characteristic, the metadata for an image or audio file method comprising the steps of generating, is provided.

関連する実施の形態では、この方法は、更に、メタデータをデスクトップサーチインデックスでインデックス付けするステップを含む。 In a related embodiment, the method further comprises the step of indexing the metadata in Desktop Search index.

関連する別の実施の形態では、上記の特定するステップが、パターン認識、カラー分析、又は顔認識を含む。 In another embodiment related to, the specific steps includes a pattern recognition, color analysis or face recognition.

本発明の更に別の側面によれば、電子処理回路によって実行するためにコンピュータメモリに記憶された実行可能な命令を有するデスクトップサーチツールが提供される。 According to yet another aspect of the present invention, desktop search tool is provided with executable instructions stored in the computer memory for execution by the electronic processing circuit. 命令は、i. Instruction, i. 一以上のコンピュータディレクトリにおいて画像又はオーディオファイルをサーチし、ii. It searches the image or audio file in one or more computer directory, ii. 画像又はオーディオファイルを発見したときに、当該ファイルに埋め込まれたデジタル透かしのためにファイルを分析し、デジタル透かしが埋め込まれている場合には、複数ビットの識別子を復元し、iii. When it discovers image or audio file, analyzing a file for digital watermark embedded in the file, when the digital watermark is embedded is to restore multiple-bit identifier, iii. 画像又はオーディオファイルからメタデータを得て、iv. From the image or audio file to obtain metadata, iv. リモートデータベースに複数ビットの識別子を用いて問合せを行い、ファイルメタデータが最新のものであるかどうか決定する、ための複数の命令を含む。 Queries using a plurality bits of the identifier to a remote database, file metadata to determine whether up to date, including a plurality of instructions for.

関連する実施の形態では、デスクトップサーチツールは、更に、ファイルメタデータが最新のものでないときにリモートデータベースからのメタデータを用いてファイルメタデータをリフレッシュするための命令を備える。 In a related embodiment, the desktop search tool, further comprising instructions for refreshing the file metadata using the metadata from the remote database when the file metadata is not up to date.

本発明の別の側面によれば、デスクトップサーチツールを制御する方法が提供される。 According to another aspect of the present invention, a method of controlling the desktop search tool is provided. この方法は、一以上のコンピュータディレクトリにおいて画像又はオーディオファイルをサーチするステップと、画像又はオーディオファイルが発見されたときに、当該ファイルを分析して、デジタル透かしが埋め込まれているかどうか決定するステップと、を含む。 The method includes the step of searching the image or audio file in one or more computer directory, when an image or audio file is found, the steps of analyzing the file to determine whether the digital watermark is embedded ,including. デジタル透かしが埋め込まれている場合には、デジタル透かしにより伝えられた複数ビットの識別子が当該ファイルから復元される。 When the digital watermark is embedded, multiple-bit identifier conveyed by the digital watermark is restored from the file. この方法は、更に、画像又はオーディオファイルからメタデータを得るステップと、複数ビットの識別子を用いてリモートデータベースに問合せを行い、ファイルメタデータが最新のものであるかどうかを決定するステップと、を含む。 The method further includes the steps of the image or audio file obtaining metadata, queries the remote database using a plurality of bits of the identifier, the steps of the file metadata to determine whether up to date, the including.

本発明の更に別の側面によれば、画像又はオーディオに関連したメタデータを収集するための方法が提供される。 According to yet another aspect of the present invention, a method for collecting metadata associated with the image or audio is provided. この方法は、コンテンツ部分及びメタデータ部分を含む画像又はオーディオファイルを受け取るステップと、メタデータを分析して、コンテンツ部分が生成された時刻及び日付のうち少なくとも一方を決定するステップと、一以上のユーザソフトウェアアプリケーションに自動的にアクセスして、時刻及び日付のうち少なくとも一方に関連する情報を収集するステップと、当該情報をメタデータ部分に追加するステップと、を含む。 The method includes receiving an image or audio file containing the content portion and a metadata portion, it analyzes the metadata, determining at least one of the time and date that the content portion is generated, one or more automatically access the user software applications, including a step of collecting information relating to at least one of the time and date, and the step of adding the information to the metadata portion.

本発明の更に別の側面によれば、第1の画像又はオーディオファイルのためのメタデータを得る方法が提供される。 According to yet another aspect of the present invention, a method of obtaining metadata for a first image or audio file is provided. この方法は、第1の画像又はオーディオファイルに対する生成時間の所定の時間枠内に生成された他の画像又はオーディオファイルを決定するステップと、当該他の画像又はオーディオファイルに関連するメタデータを収集するステップと、当該メタデータの少なくとも幾つかを第1の画像又はオーディオファイルに関連付けるステップと、を含む。 The method collects determining the other image or audio file generated in the first image or the predetermined generation time for the audio file time frame, the metadata associated with the other image or audio file comprising the steps of: a step of associating at least some of the meta data in the first image or audio file, a.

本発明の別の態様によれば、コンピュータを介して、画像又はオーディオファイル或いはファイルディレクトリに対してメタデータをオーサリングする(加える)方法が提供される。 According to another aspect of the present invention, via the computer, authoring metadata to the image or audio file or file directory (adding) a method is provided. この方法は、ユーザが複数のカテゴリーのメタデータからあるカテゴリーのメタデータを選択できるようにするグラフィックユーザインタフェイスを提供するステップと、選択された時に、選択されたカテゴリーのメタデータを、マウスカーソル又はタッチスクリーンを介してディレクトリ内のファイル又はコンテンツに適用することによって、選択されたカテゴリーのメタデータを画像又はオーディオファイル若しくはファイルディレクトリに関連付けるステップと、を含む。 The method includes providing a graphical user interface that allows selecting the metadata categories from metadata users plurality of categories, when selected, the metadata of the selected category, the mouse cursor or by applying to the file or the content in the directory through a touch screen, comprising the steps of: associating metadata of the selected category on the image or audio files or file directories.

更に別の側面、特徴及び効果は、以下の詳細な説明及び添付図面から更に明らかとなるであろう。 Yet another aspect, features and advantages will become more apparent from the following detailed description and accompanying drawings.

詳細な説明 Detailed description

<はじめに> <Introduction>
以下、コンテンツサーチ、インデックス付け、及びデスクトップサーチのためのシステム及びプロセスを説明する。 Hereinafter, content search, indexing, and systems and processes for the Desktop Search will be described. これらの幾つかは、感知できないように埋め込まれたデジタル透かしを他のメカニズムと組み合せて使用して、スチール画像、ビデオ、オーディオ、グラフィック及びテキストを含むメディアコンテンツを特定してインデックス付けする。 Some of these are digital watermark embedded in can not be sensed using in combination with other mechanisms, still images, video, audio, and identifying media content including graphics and text indexing. 以下の幾つかのセクションでは、情報を自動的に生成及び収集し、情報をサーチ可能なインデックスでインデックス付けし、情報をメディアファイルに関連付けるための方法及びシステムを説明する。 In some of the following sections, automatically generate and collect information, and indexing the information in searchable index, information describing the method and system for associating a media file. 一つのセクションでは、電子回路と共に用いられる身分特定書類であって、デジタル透かし処理によって更に安全が図られた身分特定書類を説明する。 In one section, a Identification particular document for use with an electronic circuit, further safety describing identity specific documents been achieved by digital watermarking.

<より多くのインターネットのサーチ及び一体化サーチシステム> <More and more of the Internet search and integrated search systems of>
ウェブサーチは、インターネットに対するブームであり続けている。 Web search, continues to be a boom to the Internet. 例えば、幾つか挙げると、Google、Yahoo! For example, to name a few, Google, Yahoo! 及びMSNBCがある。 And there is MSNBC. ウェブサーチによって、ユーザは、インターネット上に分散された情報を検出することが可能である。 By the web search, the user is able to detect the information that is distributed on the Internet. しかしながら、現在のサーチシステムには、二つの大きな問題がある。 However, in the current search system, there are two major problems. 第1に、ウェブクローラーは、サーチエンジン上でインデックス付けするための情報を検出するものであり、インターネットの約10−20%(寛大な推定)しかサーチしない。 First, the web crawler is adapted to detect information for indexing on the search engine, about 10-20% of the Internet (generous estimate) only search. 第2に、ウェブクローラーは、伝統的に、HTML(ハイパーテキストマークアップ言語)ウェブページのような表面的な情報しか探索せず、深部にある情報、例えば、ダウンロード可能なファイル、フラッシュメディア及びデータベース情報を、無視する。 Second, the web crawler, traditionally, only superficial information, such as HTML (Hypertext Markup Language) web page without search, information is in the deep, for example, downloadable files, flash media and database information, to ignore.

我々は、インターネットを如何に効率的にサーチすべきかという問題に直面している。 We are faced with the problem of what to efficiently search the how the Internet. サーチするインターネットが多いほど、透かし入りコンテンツを探索する機会が高くなる。 As the search to the Internet often, the higher the chance to explore the watermarked content.

第1の解決策は、クライアントベースのウェブブラウザの集団(Army)によって、透かし入りコンテンツを探索することである。 The first solution, by client-based web browser of the population (Army), is to explore the watermarked content.

この第1の解決策の一つの実施の形態は、ユーザがインターネットを日常的にサーフィンするときに遭遇するコンテンツをサーチする。 One embodiment of the first solution is to search the contents encountered when a user routinely surf the Internet. 特定されると、透かし入りコンテンツ及びコンテンツの位置を中央位置へ報告することができる。 Once identified, it is possible to report the position of the watermarked content and content to the central position. このツールの能力は、透かし検出器が、数百又は数千(数百万のこともある)のブラウジングツールに組み込まれたときに発揮される。 The ability of this tool, the watermark detector is exerted when incorporated browsing tool hundreds or thousands (sometimes millions). 透かし入りコンテンツは、恐らくはパスワードで保護されているか又は制限されたウェブサイトに置かれており、ユーザがウェブサイトに入った後に、恐らくは、ユーザid又はパスワードを入れて、制限されたウェブサイトへのアクセスが可能になった後に、分析される。 Watermarked content, are placed in the web site that is possibly or restriction is protected by a password, after the user has entered the web site, perhaps, put the user id or password, to a restricted website after the access is enabled, it is analyzed.

幾つかの更なる詳細な事項について考える。 Think about some of the more detailed matters. デジタル透かしリーダーは、ユーザのインターネットブラウザ又はファイルブラウザ、例えば、ウインドウズ・エクスプローラに組み込まれる(又はそれと協働する)。 Digital watermarking reader, Internet browser or file browser of the user, for example, (with or cooperating therewith) are incorporated to the Windows Explorer. 透かしリーダーソフトウェア(例えば、プラグインであるか、アプリケーションプログラミングインタフェイスを介して一体化されるか、或いはオペレーティングシステムへのシェル拡張として)が装備されたウェブファイルブラウザを使用して、ユーザは、インターネット及び/又はコンテンツファイルをブラウズする。 Watermark reader software (for example, if it were a plug-in, or are integrated via an application programming interface, or as a shell extension to the operating system) using a web file browser, which is equipped with, the user, Internet and / or to browse the content file. デジタル透かしリーダーは、ブラウザを通して遭遇するコンテンツを分析する。 Digital watermark reader, to analyze the content to be encountered through a browser. 例えば、ユーザは、ESPN. For example, a user, ESPN. com、CNN. com, CNN. comをアクセスし、次いで、LotsofImages. To access the com, then, LotsofImages. comにポストされた画像を見る。 View the posted image to com. 透かしリーダーは、ユーザがコンテンツをブラウズするときに種々のウェブページ及びウェブ画像を傍受する。 Watermark reader, the user is to intercept a variety of web pages and web image when you browse the content. (また、透かしリーダーは、ウェブベースのオーディオ及びビデオも検査するように構成することができる。) デジタル透かしリーダーは、透かし入りコンテンツを探す。 (In addition, the watermark reader can be configured to also to check web-based audio and video.) Digital watermark reader, look for the watermarked content. 透かし入りコンテンツを見つけてデコードすると、リーダーは、透かし識別子を取得する。 When you decode to find the watermarked content, the reader, to get a watermark identifier. この識別子は、数値識別子であってもよく、若しくは、テキスト又は他の識別情報を含んでいてもよい。 This identifier may be a numeric identifier, or may contain text or other identifying information. 透かしリーダーは、その識別子と、その透かし識別子が見つかったウェブの位置とを記憶する(又は直ちに報告する)。 Watermark reader, and its identifier, (report or immediately) the watermark identifier is stored and the position of the web that was found. このレポートは、日付/タイムスタンプを含むこともできる。 This report can also include a date / time stamp.

中央サーバーは、位置のレポートを受け取ると、ウェブの位置にアクセスして、透かし入りコンテンツをサーチすることにより、透かし入りコンテンツの存在を任意に検証することができる。 The central server receives the location of the report, to access the web of position, by searching the watermarked content, it is possible to arbitrarily verify the presence of watermarked content. 或いは、サーバーは、透かし入りコンテンツを、登録されたコンテンツ所有者に報告する。 Alternatively, the server reports the watermarked content, the registered content owner. 所有者は、例えば、識別子をその所有者に関連付けているデータベースを検索することによって、特定される。 Owner, for example, by searching a database that associates an identifier to the owner, is identified. (所有者は、次いで、このレポートを使用して、著作権、商標又は他の知的財産の権利を施行する上での助けとすることができる。) また、中央サーバーは、ログ、言うなれば一連の管理情報を維持して、透かし入りコンテンツ(例えば、オーディオ、ビデオ、画像)が特定の日に特定のウェブの位置で見つかったことを証明することもできる。 (The owner, then, using this report, copyright, it is possible to help in order to enforce the rights of trademark or other intellectual property.) In addition, the central server, log, Nare say if it maintains a set of management information, watermarked content (e.g., audio, video, image) may prove to be found at the location of a particular web on a particular day.

透かしリーダーは、特定されたコンテンツをサーバーへ報告することに代えて、コンテンツ識別子及び位置を、透かし入りコンテンツの所有者に直接的に報告することができる。 Watermark reader, instead of reporting the identified content to the server, the content identifier and position, can be directly reported to the owner of the watermarked content. この実施の形態では、透かしは、コンテンツ所有者を特定する情報を含むか、又は当該情報にリンクする。 In this embodiment, the watermark, or includes information that identifies the content owner, or links to such information. 透かしリーダーは、この情報を使用して、透かし識別子と、透かし識別子が見つかった位置とを報告するときに、メッセージ(例えば、自動eメール)を所有者へ適切に向ける。 Watermark reader uses this information, and the watermark identifier, when reporting the position it finds the watermark identifier, the message (for example, automatic e-mail) properly direct the to the owner.

第1の解決策の関連の実施の形態は、より受動的なものである。 First related embodiment of the solution is made more passive. 透かしリーダーは、ブラウザ(又はスクリーンセーバー)に組み込まれる。 Watermark reader is incorporated into the browser (or screensaver). 透かしリーダーに装備されたブラウザは、コンピュータがアイドル状態であるか又は非アクティブ状態にあるときに、透かし入りコンテンツをインターネットにおいてサーチする。 Equipped with a browser to watermark reader, the computer is when there is or in a non-active state in the idle state, searching for a watermarked content in the Internet. 例えば、ブラウザは、スクリーンセーバーが起動されたとき、又はコンピュータが所定の期間において非アクティブ状態であった後に、ウェブサイトを自動的にサーチする(例えば、そこにアクセスする)。 For example, the browser, when the screen saver is activated, or after the computer has been inactive state in a predetermined time period, automatically searches the website (e.g., access thereto).

しかし、どのウェブサイトにブラウザがアクセスするのか? However, whether the browser has access to any web site?

ウェブブラウジングを管理するための多数の適切な解決策が存在する。 A number of appropriate solutions for managing web browsing exists.

第1の実施の形態では、ブラウザ(又は協働ソフトウェア)は、中央サーバーと通信して、アクセスすべきウェブサイトのリストを得る。 In the first embodiment, the browser (or cooperating software) communicates with a central server to obtain a list of web sites to be accessed. ブラウザは、リストをキャッシュ記憶し、コンピュータが非アクティブ状態にあるときに、当該リストに列挙されたウェブサイトにアクセスする。 The browser cache stores the list, the computer when it is in an inactive state, to access the listed web sites on the list. 或いは、問合せを行ったブラウザにウェブサイトのリストを提供するのではなく、サーバーが、キーワードのリストをブラウザに提供する。 Alternatively, rather than providing a list of web sites to the browser that made the inquiry, the server provides a list of keywords in your browser. これらキーワードは、サーチエンジン、例えば、Googleにプラグインされ、次いで、ブラウザが、得られたウェブサイトを、コンピュータが非アクティブ状態にある期間中にサーチする。 These keywords, search engine, for example, is a plug-in to Google, then, the browser, the resulting web site, to search in the period in which the computer is in an inactive state. ブラウザは、キーワードを受け容れて、サーチエンジンに自動的にアクセスし、そこで、得られたURLを収集してサーチするように構成することができる。 The browser can be accepted keywords, automatically access to the search engine, where, be configured to search and collect the resulting URL. 或いは、中央サーバーは、サーチエンジンにアクセス(ヒット)して、キーワードをプラグインし、URLを収集することができる。 Alternatively, the central server, and access (hit) to the search engine, the keywords and plug-ins, it is possible to collect the URL. (コンテンツ所有者は、中央サーバーと通信して、顧客がサーチしようとするウェブサイト又はキーワードのリストを与えることができる。) (Content owners, to communicate with a central server, customers can give a list of web sites or keywords that you try to search.)

非アクティブ状態にある期間中に動作するのではなく、透かしリーダーを装備したブラウザは、バックグランドプロセスとしてサーチを行うことができる。 Rather than operate during the period which is in an inactive state, browser equipped with a watermark reader, it is possible to perform the search as a background process. 例えば、ブラウザは、コンピュータユーザがPowerPointプレゼンテーションを纏め上げたり、又はeメールをタイピングすることに集中している間に、ウェブサイトをサーチする。 For example, the browser, while the computer user is concentrated or put together a PowerPoint presentation, or e-mail to be typing, searching the web site. バックグランドプロセスは、ユーザがウェブブラウジング用のブラウザアイコンをクリックする場合に、又はユーザが付加的なコンピュータリソースを必要とする場合に、任意に中断される。 Background process, when a user clicks a browser icon for web browsing, or if the user requires additional computer resources, is optionally interrupted. 実際に、本発明の一つの実施の形態は、透かしサーチに関連したアクティビティを監視するためのレギュレータ(例えば、ソフトウェアモジュール)を提供する。 Indeed, one embodiment of the present invention, a regulator for monitoring activity associated with the watermark search (e.g., software module) provides. このレギュレータは、処理又はコンピュータリソースが所定のレベルに到達した場合に透かしサーチアクティビティを自動的に削減する。 The regulator automatically reduces the watermark search activities when processing or computer resources has reached a predetermined level. (また、ユーザが透かしサーチを続けるべきかどうか決定することを可能にするために、ポップウインドウをユーザに提示することも可能である。) (Also, in order for the user to make it possible to determine whether to continue the watermark search, it is also possible to present the pop window to the user.)

透かしリーダーがデータベース又はフラッシュメディア(或いは分析が困難な他のコンテンツ)に遭遇した場合には、当該透かしリーダーは、このような発見を中央サーバーに報告することができる。 If the watermark reader encounters a database or flash media (or analysis is difficult to other content) is the watermark reader can report such finding to the central server. 中央サーバーは、ウェブサイトに再アクセスして、このような階層構造のコンテンツを取り扱うことができる。 A central server, it is possible to re-access to the web site, dealing with the content of such a hierarchical structure. 例えば、中央サーバーは、データベース又はFlashMediaにおいて透かし入りコンテンツを探索することを可能にするアルゴリズムを使用してもよい。 For example, central server may use an algorithm that allows to explore the watermarked content in a database or FlashMedia. データベースの一例は、画像データベースである。 An example of a database, an image database. データベースは、恐らくは、ファイル名又はメタデータに対するキーワードサーチにより、又はレコードごとのサーチを経て、捜索される。 Database, perhaps, by the keyword search for the file name or metadata, or through a search of each record is searched. 次いで、各レコード(又は特定のレコード)において、透かし入りコンテンツがサーチされる。 Then, each record (or specific record), watermarked content is searched.

<ターゲットを定めたサーチ> <Search that defines the target>
透かし検出を、ターゲットを定めたサーチと組み合わせると、効率が改善される。 The watermark detection, combined with the search that defines the target efficiency is improved.

例えば、コンテンツ所有者(例えば、ビーグル(Beagle)の受賞画像の著作権所有者)は、その画像が自分のウェブサイトからコピーされてインターネットに不法に配布されたことを発見するものとする。 For example, the content owner (for example, the copyright owner of the winning image of the Beagle (Beagle)) is intended to discover that the image has been distributed illegally copied to the Internet from their web site. もちろん、コンテンツ所有者は、自分の画像を自分のウェブサイトにポスティングする前に、当該画像にデジタル透かしを埋め込んでいる。 Of course, content owners, prior to posting their own image to your web site, which is embedded in a digital watermark to the image. 透かしは、画像識別情報、例えば、コンテンツ所有者の名前、画像識別子、データ著作権情報、等を保持し、又は当該情報にリンクしていることが好ましい。 Watermark, the image identification information, for example, the name of the content owner, the image identifier, data copyright information, etc. holds, or is preferably linked to the information. コンテンツ所有者は、更に、自分の海賊版画像が、模造品ドックフードの特定ブランド「Yumpsterlishious」にしばしば結び付けられていることを発見するものとする。 Content owners, furthermore, their pirated image is assumed to discover that it is often tied to a particular brand "Yumpsterlishious" imitation dog food. 「Yumpsterlishious」及び/又は「Beagle」にターゲットを定めたサーチ(例えば、サーチエンジンを経ての)が、例えば、1024個のURLのリストを発生するものとする。 Search that defines target "Yumpsterlishious" and / or "Beagle" (e.g., the via search engine) is, for example, it is assumed that generates a list of 1024 URL. そして、1024個のURLの各々からのコンテンツを透かしリーダーで分析して、コンテンツ所有者の画像の無断コピーを検出する。 Then, analyzed by the leader watermark content from each of the 1024 URL, to detect the unauthorized copy of the content owner of the image. 疑わしい画像の位置(例えば、URL)は、法的執行のために著作権所有者へ転送することができる。 Position of the suspect image (e.g., URL) may be transferred to the copyright owner to the law enforcement. もちろん、その他のキーワードとして、著者、写真家、芸術家、要旨、日付、等を含んでいてもよい。 Of course, as other keywords, author, photographer, artist, subject matter, may contain date, and the like. 上述した例は、キーワードサーチ(又はターゲットを定めたサーチ)及びデジタル透かし分析を改善する。 The above-described example, (search defining the or target) keyword search and to improve digital watermark analysis.

ターゲットを定めた別のサーチは、コンテンツに関連するメタデータを使用する。 Another search that defines the target, using the metadata associated with the content. サーチエンジン(又は、ウェブブラウザ、メディアプレーヤ等のメディアハンドラー)は、コンテンツメタデータにおけるキーワードを探す(例えば、ヘッダー、XMLタグ、等)。 Search engine (or a web browser, media handler such as a media player) will look for keywords in the content metadata (e.g., header, XML tags, etc.). 関連のメタデータ内にあるキーワードを含むコンテンツが(例えば、上述の例から「Beagle」を借りるために)、透かしリーダーによってサーチされて、当該コンテンツが埋め込まれた透かしを有するか否かを求める。 Content that contains the keyword within the associated metadata (e.g., to borrow "Beagle" from the above example), is searched by the watermark reader obtains whether having a watermark the content is embedded. 或いは、オーディオ又はビデオファイルに関連するメタデータにおいてキーワードがサーチされ、キーワードが見つかった場合に、当該ファイルがデジタル透かしリーダーで更に分析される。 Alternatively, the search keywords in the metadata associated with audio or video files, when the keyword is found, the file is further analyzed by a digital watermark reader. この例は、メタデータにおけるキーワードを使用して、透かし検出のための有望な候補を特定する。 This example uses the keyword in the metadata to identify a promising candidate for the watermark detection.

また、透かし検出を、いわゆるパターンマッチングと結合することもできる。 Further, the watermark detection may also be coupled with a so-called pattern matching. パターンマッチングアルゴリズムは、公知であり、語彙又は画像ベースのマッチングをインターネットにおいてサーチする際に、このようなアルゴリズムを使用することができる。 Pattern matching algorithms are known, the vocabulary or image-based matching at the time of searching the Internet, may use such an algorithm. 透かしデコーディングは、所定のパターン基準を満たすコンテンツについてのみ実行される。 Watermark decoding is performed only for the content satisfying a predetermined pattern reference. 例えば、パターンマッチングサーチが、Xerloppy・Corporationの商標であるstylistic Xを含む全ての画像又はグラフィックに対して開始される。 For example, the pattern matching search is initiated for all images or graphics including STYLISTIC X is a trademark of Xerloppy · Corporation. パターンマッチングサーチは、72のヒットを検出する。 Pattern matching search detects hits 72. 次いで、画像(又はグラフィックファイル)をサーチして、当該画像の中にデジタル透かしが埋め込まれているかどうかを決定する。 Then, by searching an image (or graphic file), to determine whether the digital watermark in the image is embedded.

ターゲットを定めた更に別のサーチツールは、ネットワークトラフィックパターンを改善する。 Yet another searching tool defining a target improves network traffic patterns. ルーター及びスイッチノードを監視して、インターネットトラフィックのトレンドを求める。 Watching the routers and switch nodes, determine trends Internet traffic. 透かし読み取りウェブクローラーが、当該トレンドに向けられる。 Watermark reading web crawler is directed to the trend. 例えば、特定のルーターを監視して、著作権付き(及び透かし入り)画像を含むウェブサイトにアクセスする前に、どこでトラフィックが発生したか又はどこからルーティングされたかを調べる。 For example, to monitor a specific router, before accessing a website containing copyrighted (and watermarked) images, where checks traffic is routed or from where occurred. 発生又はルーティングしたことが疑われるウェブサイトは、透かし入りコンテンツのサーチにおいてアクセス(クロール)される。 Web site that is suspected of occurred or routing is accessed (crawl) in search of watermarked content.

ターゲットを定めた更に別のサーチ方法は、不正な著作権付き資料が以前に見つかったウェブサイトを定常的に分析する。 Yet another search method was set a target, to analyze a web site that illegal copyrighted material is found in the previous constantly. 例えば、サーバーは、透かし入りコンテンツが以前に見つかったウェブサイトのリストを保持する。 For example, the server maintains a list of web sites that watermarked content is found previously. これらウェブサイトは、透かし入りコンテンツのサーチにおいて定常的にアクセス(クロール)される。 These web sites are regularly accessed in search of watermarked content (crawl).

<統合サーチシステム> <Integrated search system>
図1は、統合サーチ方法を実施するシステム101を示している。 Figure 1 illustrates a system 101 for implementing the integration search method. 「統合」という語は、手動サーチ及び自動サーチの両方を使用するよう動作可能なシステムを表わすために使用される。 The term "integrated" is used to represent an operable system to use both manual search and automatic search. システム101の一つの目的は、インターネットのようなネットワークにおいてデジタル透かし入りコンテンツを特定することである。 One objective of the system 101 is to identify the digital watermarked content in a network such as the Internet. このシステムは、中央制御パネル又はインタフェイス102を備え、当該パネルを介してサーチ基準が与えられる。 The system comprises a central control panel or interface 102, search criteria are given through the panel. 例えば、顧客は、検索語(例えば、「Beagle」)又は透かし入りコンテンツをサーチしようとする特定のウェブアドレスを、例えば、ウェブベースの顧客インタフェイス104を介して、入力することができる。 For example, a customer, a search term (for example, "Beagle") a specific web address to try to search for or watermarked content, for example, can be via a web-based customer interface 104, to enter. 検索語及び/又はURLは、インタフェイス102へ伝送される。 Search term and / or URL is transmitted to the interface 102. インタフェイス102は、それら検索語及び/又はURLを、透かし検出器使用可能のウェブクローラー(又はサーチエージェント)120、又は分散透かし検出器使用可能のウェブクローラー(例えば、上述したウェブブラウザの集団からのソルジャー(soldier)へ送出する。その代替手段として、インタフェイス102は、検索語及び/又はURLを、ディレクテッド・サーチモジュール106に与える。ディレクテッド・サーチモジュール106は、デジタル透かし検出器を含むサーバーベースウェブクローラーである。ディレクテッド・サーチモジュール106は、透かし入りコンテンツのサーチにおいて対応のURLにアクセス(ヒット)する。 Interface 102, those search terms and / or URL, the watermark detector usable web crawler (or search agent) 120, or distributed watermark detectors available web crawler (e.g., from a population of a web browser as described above and it sends to the Soldier (soldier). server as an alternative, interface 102, a search term and / or URL, provided to the directed search module 106. directed search module 106, which includes a digital watermark detector is the base web crawler. directed search module 106, to access (hit) in the corresponding URL in the search of watermarked content.

図1のシステムは、更に、オペレータがサーチを指令する手動サーチモジュール108を備えている。 The system of Figure 1 further includes a manual search module 108 for an operator to command a search. 例えば、オペレータは、ウェブクローラー120に転送されるべきウェブサイトを入力するか、又は透かし入りコンテンツのサーチするためにウェブブラウザを特定のウェブサイトに向ける。 For example, the operator directs enter the website to be transferred to the web crawler 120, or a web browser to search for watermarked content to a specific web site. 或いは、モジュール108を使用して、サーチエンジン、例えば、Googleに接続し、ここで、キーワードが入力されて、得られたURLが、透かし検出器使用可能のウェブブラウザに与えられる。 Alternatively, using modules 108, search engine, for example, connected to Google, here, it is input keyword, the obtained URL is provided to the watermark detector enabled web browser. もちろん、サーチエンジンとの接続は、自動的であってもよい。 Of course, the connection between the search engine may be automatically.

インタフェイス102はまた、モジュール110(これは、人間との何らかの対話を含んでもよい)と接続して、ウェブサイト、例えば、データベース及びFlashMediaを含むウェブサイトをより深く丹念に探索することを補助することが好ましい。 Interface 102 also includes module 110 (which may include any interaction with humans may) connected to the web site, for example, to assist in searching for a web site that contains a database and FlashMedia deeper carefully it is preferable. モジュール110はまた、アクセスすべき更なるURLをシステムに与えることもできる。 Module 110 may also provide additional URL to be accessed to the system. これらのURLは、ウェブクローラー120に直接与えられてもよいが、制御パネル102により制御されることが好ましい。 These URL may be given directly to the web crawler 120, but is preferably controlled by the control panel 102.

ウェブクローラー120からの結果(及び分散ウェブクローラーからの報告)は、顧客報告又は更なる分析のために、データベース130に与えられる。 Results from the web crawler 120 (and reporting from distributed web crawler), for the customer reports or further analysis is given in the database 130.

<サーチエンジンのカテゴリー分け> <Categorization of search engine>
サーチエンジンは、ウェブクローラーを使用して、ウェブページをカテゴリー分けする。 Search engine uses a web crawler, to categorize the web page. 例えば、ウェブサイトのテキストをクローラーによって取得し、当該テキストを使用して、キーワードインデックスを生成する。 For example, acquired by the crawler the text of the web site, using the text, to generate a keyword index. ウェブサイト所有者は、URL及びキーワードをリストすることによってウェブサイトを登録することも可能である。 Web site owners, it is also possible to register a Web site by listing the URL and keyword. 改良として、登録又はカテゴリー分けプロセスに、デジタル透かし分析を含める。 As an improvement, the registration or categorization process, including the digital watermark analysis. 例えば、サーチエンジンのウェブクローラーは、デジタル透かしリーダーを使用し、デジタル透かしを求めてターゲットウェブサイトをスキャンする。 For example, the web crawler of the search engine, using a digital watermark reader, to scan the target web site in search of digital watermark. デジタル透かしは、固有の識別子、及び恐らくはテキストを含む。 Digital watermark includes a unique identifier, and possibly the text. 識別子及び/又はテキストは、ターゲットウェブサイトのカタログを作成する際に、キーワードとして使用される。 Identifier and / or text, when you create a catalog of the target web site, is used as a keyword. 例えば、サーチエンジンは、ウェブアドレスを、透かし数値識別子、及び透かしによって伝えられるテキストに対応付け、ウェブサイトがデジタル透かしを含むことを示すことが可能である。 For example, the search engine, the web address, correspondence to the text reportedly watermark numeric identifier, and the watermark, it can be shown that the website includes digital watermarking. 透かしベースのキーワードは、ウェブサイトで見つかったテキスト又はHTMLから導出されたキーワードと共にサーチ可能である。 Watermark-based keyword, it is possible to search with keywords, which is derived from the found text or HTML in the web site.

上記のカテゴリー分けの変形例として、コンテンツは、XMLタグを含むことができる。 As a modification of the above categorization, content may include XML tags. タグは、ウェブサイトのコンテンツの一以上のアイテムがデジタル透かしを含むことを示すフィールドを含むことができる。 Tag can include a field that indicates that one or more items of content of the web site includes a digital watermark. ウェブクローラー/サーチエンジンは、透かしをデコードする必要がなく、ウェブサイトがデジタル透かしを含むことをXMLフィールド(又はヘッダデータ)から決定する。 Web crawlers / search engines, it is not necessary to decode the watermark, determining that the website contains digital watermark from XML field (or header data). ウェブクローラー又はそれに関連したサーチエンジンは、「透かしが存在する」という指示情報を、ウェブサイトに関連したキーワードとして含む。 Web crawler or search engine associated with it, the indication information that "watermark is present", including as a keyword related to the web site. また、サーチエンジンのキーワードサーチは、「透かしが存在する」という情報と、関連のキーワード(例えば、「ビーグル」)とを含む全てのウェブサイトを含めることが可能である。 In addition, keyword search of the search engine, and the information of "watermark is present", related keywords (for example, "Beagle"), it is possible to include all of the web site that includes a. それにより得られるウェブサイトリストにおいて、デジタル透かしをサーチすることができる。 In the website list obtained thereby, it is possible to search for digital watermarking.

<移動アプリケーション> <Mobile Application>
別のサーチツールは、複数の移動デバイスとの通信を促進し、種々の移動デバイスによって生成されるサーチ結果を改善する。 Another search tool facilitates communication with a plurality of mobile devices, to improve the results search produced by various mobile devices. 例えば、23歳のジンジャーが土曜の夜にナイトクラブに行くとする。 For example, the 23-year-old ginger is go to a nightclub on Saturday night. 彼女は、彼女の好きな行きつけの場所にたどり着き、3人の親しい友人に出会う。 She arrived to her favorite hangout place, meet close friends of three people. 音楽がかかり、会話が騒音と煙で妨げられる。 Takes music, conversation is interrupted by the noise and the smoke. しかし、ワイヤレス通信は、妨げられない。 However, wireless communication is not impeded. ジンジャーは、いつも通り、無線デバイス(例えば、ポケットPC、ブラックベリー、セルラー電話、等)を携帯している。 Ginger, as usual, the wireless device (for example, Pocket PC, Blackberry, cellular phone, etc.) has been carrying. 彼女の装置は、例えば、BlueToothを使用可能であり、ジンジャーの友人が保持する同様のデバイスと容易に通信できる。 Her device, for example, may be used to BlueTooth, can easily communicate with similar devices ginger friend has. (以前には、ジンジャー及び彼女の友人は、安全な通信を可能にするパスワード又は共有セキュリティプロトコルを確立していた。さもなければ、無線デバイスを持ってそばに立っている誰かが、彼等のデバイスにおけるコンテンツを傍受することができ得た。) ジンジャーのデバイスは、他のデバイスと通信して、それらが最近サーチを実行したかどうか調べ、そうであれば、サーチの性質が何であったかも調べる。 (In the past, Ginger and her friends, had established a password or shared security protocol to enable secure communication. Otherwise, someone, their standing by with a wireless device obtained can be used to intercept the content in the device.) Ginger of the device, to communicate with other devices, they examined whether you run a search recently, and if so, the nature of the search is to examine anything the was the one . ジンジャーは、サーチのトピック(キーとなる検索語又は識別子)を自分の無線デバイスにプリセットすることができる。 Ginger can be preset search of the topic (search word or identifier as a key) to your wireless device. サーチのトピックをプリセットするのではなく、ジンジャーの無線デバイスが、ジンジャーのウェブブラウジングの履歴又は過去のインターネットへの問合せに基づいて、サーチのトピックを自動的に生成することが可能である。 Instead of presetting the search topic, ginger wireless devices, based on the inquiry to the history or past Internet ginger web browsing, it is possible to automatically generate the search topic. 一つの設定は、他のデバイスにより実行されたサーチの結果を単にコピーすることである。 One configuration is to simply copy the results of the search performed by the other devices. ジンジャーのデバイスは、これらのプリセットされたサーチトピックを使用して、他のデバイスを探索し、それらがジンジャーのサーチ用語に関連した何かを見つけたか否かを調べる。 Ginger devices use these preset search topic, and searching for another device, checks whether find something that they related to Ginger search term.

1人の友人であるキムは、無名のオーストラリアのロックバンドであるAintitniceにより1980年代後半に創作されて演奏された音楽について、昨日、ターゲットを定めたサーチを行った。 1 person is a friend of Kim, about the music that was played are created in the late 1980s by Aintitnice is an Australian rock band anonymous, yesterday, was conducted a search that defines the target. サーチ結果(及び恐らくはオーディオファイルのよう対応のコンテンツ)が、サーチ結果又は共有ディレクトリに記憶される。 Search results (and possibly the corresponding content as an audio file) is stored in the search results or shared directory. (サーチは、キムの移動デバイスで行う必要がなく、キムのホームコンピュータで行って、そのサーチ結果をキムの移動デバイスへ伝送することが可能である。) ジンジャーも、Aintitniceが好きであり、そのグループを自分の移動デバイスに検索語として入力している。 (Search need not be done in Kim mobile device, performed in Kim's home computer, it is possible to transmit the search result to Kim mobile device.) Ginger is also a like Aintitnice, its the group has entered into his mobile device as a search term. ジンジャーの無線デバイスは、キムのデバイスとネゴシエーションして、サーチ結果及び/又はオーディオファイルも取得する。 Ginger wireless devices, and devices and negotiation Kim also obtains search results and / or audio files. (オーディオファイルが権利保護されている場合には、ジンジャーのデバイスは、オンラインサーバーとネゴシエーションして、音楽を再生するために必要な権利を取得することが可能である。例えば、オーディオファイルは、オンラインサーバーにリンクするために使用されるデジタル透かしを含み得る。) (When the audio file is right protected, Ginger devices, and the online server negotiate, it is possible to obtain the necessary rights to play music. For example, an audio file, online It may include digital watermarks that are used to link to the server.)

ジンジャー自身の選択(例えば、キムと友人であって且つAintitniceをプリセットする)並びに接近(例えば、ある友人とナイトクラブに通う)が、移動サーチを可能にしている。 Selection of ginger itself (e.g., and presets the Aintitnice a Kim and friends) and close (e.g., go to some friends and nightclubs) have to allow movement search.

この移動デバイスのサーチの幾つかの組み合せとして、例えば、以下のものがある。 As a combination several search of the mobile device, for example, as follows.

A1. A1. サーチを行う方法であって、 A method for performing a search,
第1の移動デバイスから、第2の移動デバイスへ無線で問合せを行い、第2の移動デバイスが所定のサーチ基準に関連したインターネットサーチ結果を有するか否かを決定するステップと、 From the first mobile device, to the second mobile device queries wirelessly, comprising the second mobile device to determine whether they have internet search results associated with a predetermined search criteria,
少なくともサーチ結果のサブセットを受け取るステップと、 And receiving at least a subset of search results,
を備える方法。 The method comprises a.

A2. A2. A1の方法であって、第1のデバイスが問合せを行って、第2の移動デバイスが所定のサーチ基準に関連したコンテンツを有するか否かを決定する方法。 A A1 of the method, the first device performs a query, how the second mobile device to determine whether they have content related to predetermined search criteria.

B1. B1. サーチを行う方法であって、 A method for performing a search,
第1のハンドヘルド移動デバイスにおいてサーチ基準を受け取るステップと、 Receiving a search criteria in the first handheld mobile device,
第1のハンドヘルド移動デバイスによって第2のハンドヘルド移動デバイスを感知したときに、第2のハンドヘルド移動デバイスへ自動的に且つ無線で問合せを行って、第2のハンドヘルド移動デバイスが、サーチ基準に対応するコンテンツを記憶しているかどうか決定するステップと、 Upon sensing a second handheld mobile device by a first handheld mobile devices, carried out automatically and query wirelessly to a second handheld mobile device, a second handheld mobile device, corresponds to the search criteria the method comprising the steps of: determining whether to store the content,
第2のハンドヘルド移動デバイスからサーチ基準に対応するコンテンツを受け取るステップと、 Receiving a content corresponding to the search criteria from the second handheld mobile device,
を備える方法。 The method comprises a.

上記セクションの幾つかの他の組み合せとして、以下のものがある。 As some other combination of the above sections are as follows.

C1. C1. 透かし入りコンテンツをネットワークにおいてサーチする方法であって、 A method of searching in a network the watermarked content,
可視パターンを表わすデータを受け取るステップと、 Receiving a data representing the visible pattern,
当該可視パターンに対応するコンテンツをネットワークにおいてサーチするステップと、 A step of searching in a network content corresponding to the visible pattern,
デジタル透かしのための可視パターンに対応するものとして特定されたコンテンツを分析するステップと、 And analyzing the identified content as corresponding to the visible pattern for digital watermarking,
デジタル透かしから、少なくとも一つの透かし識別子を取得するステップと、 Digital watermark, and obtaining at least one watermark identifier,
デジタル透かしが見つかったときに、少なくとも一つの透かし識別子及びそれに対応するネットワーク位置を報告するステップと、 When the digital watermark is found, the step of reporting the network location corresponding thereto and at least one watermark identifier,
を備える方法。 The method comprises a.

C2. C2. C1の方法であって、可視パターンが会社のロゴを含む、方法。 A C1 of the method, the visible pattern includes a company logo, way.

C3. C3. 透かし入りコンテンツをネットワークにおいてサーチする方法であって、 A method of searching in a network the watermarked content,
リモートサーバーにアクセスして、ネットワーク位置のリストを得るステップと、 Accessing a remote server, and obtaining a list of network locations,
コンピュータユーザが非アクティブ状態にある期間中に、当該ネットワーク位置で、デジタル透かしをサーチするステップと、 During the period in which the computer user is in an inactive state, a step of searching in the network location, the digital watermark,
デジタル透かしが見つかったときに、少なくとも一つの透かし識別子及びそれに対応するネットワーク位置をリモートサーバーに報告するステップと、 When the digital watermark is found, the step of reporting the network location corresponding thereto and at least one watermark identifier to the remote server,
を備える方法。 The method comprises a.

C4. C4. 透かし入りコンテンツをネットワークにおいてサーチする方法であって、 A method of searching in a network the watermarked content,
リモートサーバーにアクセスして、サーチ基準を取得するステップと、 And access to a remote server, the method comprising the steps of: obtaining a search criteria,
コンピュータユーザがアクティブ状態にある期間中に、バックグランドプロセスとしてデジタル透かしをインターネットにおいてサーチするステップと、 During the period in which the computer user is in an active state, comprising the steps of: searching the digital watermark in the Internet as a background process,
デジタル透かしが見つかったときに、少なくとも一つの透かし識別子及びそれに対応するネットワーク位置をリモートサーバーに報告するステップと、 When the digital watermark is found, the step of reporting the network location corresponding thereto and at least one watermark identifier to the remote server,
を備える方法。 The method comprises a.

C5. C5. C4の方法であって、サーチ基準が、ユーザによりアクセスされたインターネットコンテンツをサーチするための命令を含む方法。 A C4 method, the method comprising searching criteria, the instructions for searching the Internet content accessed by the user.

C6. C6. C4の方法であって、サーチ基準がキーワードを含む方法。 A C4 of the method, a method of search criteria including the keyword.

C7. C7. C6の方法であって、ネットワークサーチエンジンに自動的にアクセスするステップと、ネットワークサーチエンジンにキーワードを提供するステップと、そこから、キーワードに関連したURLのリストを取得するステップと、を備え、当該サーチがURLのサーチを含む方法。 A C6 method, comprising the steps of: automatically accessing network search engine, comprising the steps of providing a keyword to a network search engine, from there, obtaining a list of URL associated with the keyword, and the how to search, including a search of the URL.

C8. C8. 透かし入りコンテンツのネットワークサーチを管理するためのシステムであって、 A system for managing a network search of watermarked content,
顧客からキーワード及びネットワーク位置情報の少なくとも一つを受け取るためのウェブサイトインタフェイスと、 And website interface for receiving at least one keyword and the network position information from the customer,
複数の分散された透かし検出器と通信するためのウェブサイトインタフェイスと、 And website interface for communicating with a plurality of distributed watermark detectors,
複数の分散された透かし検出器へのキーワード及びネットワーク位置情報の伝送を制御するためのコントローラと、 A controller for controlling the transmission of a keyword and network location information to a plurality of distributed watermark detectors,
デジタル透かし及びそれに対応するネットワーク位置に関連した情報を保持するためのデータベースと、 A database for storing information relating to the digital watermarking and network location corresponding thereto,
を備えるシステム。 System comprising a.

C9. C9. 透かし入りコンテンツのネットワークサーチを管理するためのシステムであって、 A system for managing a network search of watermarked content,
遠隔の顧客からキーワード及びネットワーク位置情報の少なくとも一つを受け取るためのウェブサイトインタフェイスと、 And website interface for receiving at least one keyword and the network position information from a remote client,
デジタル透かし検出器を含み又はそれと協働するウェブブラウザと、 A web browser that includes or cooperating therewith digital watermark detector,
ウェブブラウザへキーワード及びネットワーク位置情報を伝送するためのコントローラであって、キーワードに関連した位置又はネットワーク位置をウェブブラウザがサーチするコントローラと、 A controller for transmitting the keyword and network position information to the web browser, and a controller to position or network location associated with the keyword web browser to search,
デジタル透かし及びそれに対応するネットワーク位置に関連した情報を保持するためのデータベースと、 A database for storing information relating to the digital watermarking and network location corresponding thereto,
を備えるシステム。 System comprising a.

<デスクトップサーチ> <Desktop Search>
本発明の別の側面は、効率的なメディア(例えば、オーディオ、画像及びビデオ)サーチ及びカタログ作成を可能にするデスクトップサーチツールである。 Another aspect of the present invention, efficient media (e.g., audio, image and video), a desktop search tool that enables the creation search and catalog. このツールは、メタデータのリフレッシュ能力も提供することが可能である。 This tool, the refresh capability of the metadata also can be provided.

ユーザコンピュータ200(図2)に常駐するサーチツール201(例えば、ソフトウェアプログラム又はアプリケーション)を開始する。 Searching tool 201 that resides on the user computer 200 (FIG. 2) (e.g., a software program or application) starts. このサーチツールは、二つの主たるソフトウェア要素、即ちインデックシングツール202と、デスクトップサーチツール204と、を備えている。 The search tool includes two main software elements, namely a indexing tool 202, the desktop search tool 204. もちろん、これらツール202及び204は、個別の要素又はソフトウェアアプリケーションである必要はないが、ここでは、個々のファンクションの説明を容易にするために個別に参照する。 Of course, these tools 202 and 204 need not be separate elements or software application, where, referring individually to facilitate the description of the individual functions. ソフトウェアは、ソフトウェアプログラマーが利用可能な言語、例えば、C、C++、ビジュアル・ベーシック、Java、Python、Tcl、Perl、Scheme、Smalltalk及びRuby、等で書くことができる。 Software, software programmers available languages, for example, can be written C, C ++, Visual Basic, Java, Python, Tcl, Perl, Scheme, in Smalltalk and Ruby, and the like.

インデックスツール202は、画像、オーディオ又はビデオファイルのサーチのために、ユーザコンピュータ(又はホームネットワーク)を捜索する。 Index tool 202 includes an image, for searching audio or video files, to search the user computer (or home network). インデックスツール202は、その検出結果を、一以上のインデックスでカタログ化する(例えば、インデックスを生成する)。 Index tool 202, the detection result, cataloging the index of one or more (e.g., to generate the index). 「インデックス」とは、ワード、数字及びキャラクタ、並びにこれらに関連したファイル及び位置のサーチ可能なリスト又は集合を含むものである。 The "index" is intended to include words, numbers and characters, as well as a searchable list or set of files and locations associated with these. 次いで、ユーザは、キーワードを含むファイルを見つけたいときに、全コンピュータではなく、インデックスをサーチする。 Then, the user, when you want to find the file that contains the keyword, rather than the whole computer, to search the index. サーチは、デスクトップサーチツール204で実行される。 Search is run on the desktop search tool 204. ここでは、画像(image)及びビデオファイルの両方を「画像(imagery)」と称していることについて言及しておく。 Here, both of the image (image) and video files previously mention that is referred to as "image (imagery)". 「画像」という用語の使用は、マルチメディアファイルもカバーするに足る広いものある。 The use of the term "image" is wide ones enough to also cover multi-media files.

デスクトップサーチツール204は、ユーザインタフェイス(例えば、デスクトップウインドウ又はHTMLベースのインタフェイス)を提供し、当該ユーザインタフェイス通してユーザは、特定の画像又はオーディオファイル或いはそれらに関連したメタデータを見つけるためのインデックスを問合せる。 Desktop Search tool 204, the user interface (e.g., a desktop window or HTML-based interface) provides a user through the user interface, in order to find a particular image or audio file or metadata associated therewith query the index. 画像又はオーディオファイルは、通常、コンテンツ部分及びメタデータ部分により画成されている。 Image or audio file is usually defined by the content portion and a metadata portion.

ユーザは、記憶エリアを選択して、サーチツール201によってサーチ及びカタログ化を行うことができることが好ましい。 The user selects the storage area, it is preferable to be able to perform search and cataloging by searching tool 201. この記憶エリアとは、例えば、Cドライブ、あるファイル又はディレクトリ、及び/又は、取り外し可能な媒体(ジップドライブ、外部ハードドライブ、DVDドライブ、アタッチ型MP3プレーヤ、又はジャンプドライブ(フラッシュメモリ、USBドライブ))等である。 And the storage area, for example, C drive, a file or directory, and / or removable media (zip drives, external hard drives, DVD drives, attach type MP3 player or jump drive (flash memory, USB drive) ), and the like. もちろん、ユーザは、自分の全コンピュータ又はホームネットワークを選択することができる。 Of course, the user can select his full computer or home network. サーチツール201は、バックグランドサーチモードに置かれることが好ましい。 Search tool 201, it is preferable to be placed in the back ground search mode.

バックグランドサーチモードで動作するときには、サーチツール202は、ユーザが他のアプリケーションにおいて作業を行う間に、コンピュータをサーチする(例えば、全ての到来するファイルを定常的に調べる通常のウィルス対策ソフトウェアに類似する)。 When operating in the background search mode, the search tool 202, while the user is performing work in other applications, searching for a computer (e.g., similar to all the incoming files to regular antivirus software to examine steadily to). このバックグランドモードは、新たなファイルがユーザのコンピュータ又はホームネットワークによって生成され又は受け取られるときに、新たなファイルをフィルタリングすることが好ましい。 The background mode, when a new file is generated by the user's computer or home network or are received, it is preferable to filter the new file.

説明を簡単にするために、画像ファイルに焦点を当てる。 To simplify the description, it focuses on the image file. しかしながら、本発明の技術が画像又は画像ファイルに限定されるものでないことを理解されたい。 However, the technique of the present invention it will be understood that it is not limited to the image or image file. むしろ、本発明の技術は、オーディオ及びリッチコンテンツ(例えば、マクロメディアフラッシュファイル)等にも適用できる。 Rather, the technique of the present invention, audio and rich content (e.g., Macromedia Flash file) can be applied to the like.

本発明のインデックシングツールは、例えば、ファイル拡張子*. Indexing tool of the present invention is, for example, the file extension *. gif、*. gif, *. jpg、*. jpg, *. bmp、*. bmp, *. tif、等により特定される画像ファイルをサーチする。 tif, searches the image file specified by the like. (オーディオ又はビデオファイルをサーチする場合には、*.au、*.wmv、*.mpg、*.aac、*.mp3、*.swf、等をサーチしてもよい。) (If you search for audio or video files, *. Au, *. Wmv, *. Mpg, *. Aac, *. Mp3, *. Swf, or the like may be search for.)

画像が、検出されると、インデックス付けされる。 Images, when it is detected, is indexed. これを行うために、画像は、メタデータ部分がもしあれば、当該メタデータ部分にアクセスするに足るよう開かれる(例えば、恐らくは、圧縮された画像部分にアクセスせずに)。 To do this, the image, if the metadata portion if is opened so that sufficient to access the metadata portion (e.g., perhaps, without accessing the compressed image part). メタデータは、サーチ可能なインデックスを含ませるように提供することが可能である。 Meta data may be provided so as to include searchable index. 例えば、「Falls.jpg」と称する画像が、記述フレーズ“Picture of Falls taken near Silver Lake, Montana(モンタナ州シルバーレイク付近で撮影された滝の写真)”を含むメタデータを有するものと考える。 For example, an image referred to as a "Falls.jpg" is considered to have a meta-data, including descriptions phrase "Picture of Falls taken near Silver Lake, Montana (photo of waterfall taken in the vicinity of the Montana Silver Lake)". ファイル名及び記述フレーズは、ファイル位置及び記述フレーズ内の他のメタデータと共に、デスクトップサーチインデックスに追加される。 File name and description phrases, along with other metadata in a file location and description phrases, it is added to the desktop search index.

この第1の実施の形態は、サーチツール201が、アプリケーションプログラムインタフェイスを通してデスクトップサーチインデックス(例えば、MSNデスクトップサーチ)と協働するときに最良に機能する。 The first embodiment, the search tool 201, desktop search index through an application program interface (e.g., MSN Desktop Search) to function best when the cooperating. 例えば、デスクトップサーチが画像ファイルに遭遇すると、当該デスクトップサーチがサーチツール201をコールするか、又は画像ファイル又はファイル位置をサーチツール201へ渡す。 For example, desktop search encounters an image file, the Desktop Search calls a search tool 201, or passes the image file or the file position to the search tool 201. 別の態様では、IFilterShopLLCからの画像サーチソフトウェア(www.ifiltershop.comにおいてオンラインで入手できる)をインデックスツール202の要素として使用する。 In another aspect, using the image search software from IFilterShopLLC the (available online at Www.Ifiltershop.Com) as an element of an index tool 202. IFilterShopソフトウェアは、画像において当該画像に関連したメタデータをサーチする上での助けとなる。 IFilterShop software helps in order to search the metadata associated with the image in the image. このようなメタデータは、デスクトップサーチツール204によりサーチされるべきインデックスに追加される。 Such metadata is added to the index to be searched by Desktop Search tool 204.

第2の実施の形態では、インデックスツール202は、サーチされた各画像ファイル用のHTMLファイル(又はXML、ワード、又は他のテキストサーチ可能なファイル)を生成する。 In the second embodiment, the index tool 202 generates an HTML file for each image file is searched (or XML, word or other text searchable files,). HTMLファイルは、画像ファイルと同じディレクトリ、又はサーチツールにアクセス可能なディレクトリに記憶されることが好ましい。 HTML file, the same directory as the image file, or be stored in a search tool to access a directory preferred. HTMLファイルは、画像ファイル名(「Falls.jpg」)、用語のリスト(「Picture of Falls taken near Silver Lake, Montana」)、及び他のメタデータ(時刻、撮影日付、カメラパラメータ、地球座標(geo-coordinates)、等)を含む。 HTML file, image file name ( "Falls.jpg"), a list of terms ( "Picture of Falls taken near Silver Lake, Montana"), and other meta-data (time, date of shooting, camera parameters, Earth coordinates (geo -coordinates), including the etc.). HTMLファイルは、同様のファイル名を、異なる拡張子(例えば、「Falls.dwm.html」)と共に有することが好ましい。 HTML file, the same file name, different extensions (for example, "Falls.dwm.html") preferably have together. HTMLファイルにJPEG画像のサムネイル表示を任意に含める(又は関連付ける)ことも可能である。 Any inclusion (or associate) a thumbnail display of the JPEG image into an HTML file may be.

HTMLファイルは、サーチ可能である。 HTML file, it is possible to search. 例えば、インデックスツール202(又はGoogle及びMSNデスクトップサーチツール)は、メタデータ(例えば、テキスト)をHTMLファイルにおいてサーチすることができ、検出すると、サーチツールは、メタデータを、当該サーチツールのデスクトップインデックスに追加する。 For example, the index tool 202 (or Google and MSN Desktop Search Tool) is the metadata (e.g., text) can search for the HTML file, detects, the search tool, the metadata, desktop index of the searching tool to add to.

<デジタル透かし> <Digital Watermark>
上述したデスクトップサーチの第1及び第2の両実施の形態では、埋め込まれたデジタル透かしを求めて、画像ファイルがサーチされることが好ましい。 In both the first and second embodiments of the desktop search described above, seeking embedded digital watermark, it is preferable that the image file is searched. 即ち、インデックスツール202は、デジタル透かし検出器を備え、又はそれと協働する。 That is, the index tool 202 is provided with a digital watermark detector, or therewith co to work. 検出した場合には、HTMLファイルに透かし指示子(例えば、テキスト、番号又はグラフィック指示子)が与えられて、画像ファイルが透かし入りであること、及び、如何なる情報が透かしによって保持されているか(例えば、複数ビット識別子又はメッセージ)が、示される。 When detecting the watermark indicator in the HTML file (e.g., text, numbers or graphics directive) and is given, that the image file is watermarked, and whether any information is held by the watermark (e.g. multiple bit identifier or message) is shown.

従って、画像に埋め込まれたデジタル透かしは、デスクトップサーチツールによりサーチ可能となる。 Accordingly, the digital watermark embedded in the image becomes searchable by Desktop Search Tool.

透かしが画像内に検出されなかった場合には、透かしを必要に応じて当該画像に埋め込むことが可能である。 If the watermark is not detected in the image may be embedded in the image as needed watermark.

また、透かしは、以下に詳細に探求するように、画像とオンラインメタデータレポジトリー(格納装置)との間をリンクするための識別子としても使用できる。 Moreover, the watermark is to explore in more detail below, it can be used as an identifier to link between the image and the online metadata repository (storage device).

<透かしベースのリフレッシュ> <Watermark-based refresh>
2000年1月13日に出願された米国特許出願第09/482,786号、及びその親特許出願では、メタデータレポジトリーを参照し、ステガノグラフィー識別子を使用して、メタデータレポジトリーにアクセスしている。 Filed January 13, 2000 U.S. Patent Application Serial No. 09 / 482,786, and in its parent patent application, refers to the metadata repository, using steganography identifier, access metadata repository are doing.

それに関連する実施の形態をここで提供する。 The embodiments related thereto provided herein.

メタデータは、その基礎をなすコンテンツと分離されることが不可避であるという前提でスタートする。 Metadata that is separated from the content its underlying starts with the assumption that it is unavoidable. コンテンツをスケーリングし、切り取り、編集し、変換し、送信することによって、メタデータがそのコンテンツから分離する機会が増加する。 Scaling the content, cut, edit, convert, by sending, opportunity for metadata separated from its content is increased.

デジタル透かしは、メタデータとコンテンツとの間に持続的リンクを与える。 Digital watermarks provide a persistent link between the metadata and content.

本発明の一側面は、メタデータの「リフレッシュ」又は同期である。 One aspect of the present invention is a "refresh" or metadata synchronization. デスクトップサーチツール201は、インデックス付けプロセスの一部分として、メタデータレポジトリーを用いてチェックを行い、画像に関連したメタデータが現在のもの、即ち最新のものであることを確実にする。 Desktop Search tool 201, as part of the indexing process, checks by using the meta-data repository, metadata associated with the image is the current one, to ensure that that is, up-to-date. (明らかなように、これらのリフレッシュ又は同期技術は、Google及びYahoo!のようなインターネットサーチツールへと拡張することも可能である。サーチエンジンは、サーチの後又はその一部分において、検出された特定の画像、オーディオ、又はビデオに対してメタデータを設けたい(ポピュレートしたい)か否かをサーチャーに尋ねることができる。以下に述べる方法及びシステムは、このようなポピュレート動作に使用することができる。) (As is apparent, these refresh or synchronization techniques, could be extended to Google and Yahoo! Internet search tools like. Search engine, after the search, or a portion thereof, detected specific image, audio, or need to represent metadata for video or (populated want) whether it is possible to ask the searcher. methods and systems described below can be used in such populated operation. )

より詳細には、デスクトップサーチツール201は、メタデータレポジトリー210(図3)に問合せを行い、遭遇した画像に関連したメタデータがあるか否かを調べる。 More specifically, Desktop Search tool 201 queries the metadata repository 210 (FIG. 3), it is checked whether there is meta data relating to encounter images.

レポジトリー210は、ユーザのコンピュータ200にローカルに記憶することも可能であるが、より好ましくは、レポジトリー210は、ネットワーク(例えば、インターネット又はセルラーネットワーク)を介してアクセスされる。 Repository 210, it is also possible to locally stored on the user's computer 200, and more preferably, repository 210, the network (e.g., Internet or a cellular network) accessed through.

遭遇した画像にデジタル透かし識別子が埋め込まれている場合には、その透かし識別子がメタデータレポジトリー210に伝送される。 When the digital watermark identifier is embedded in encountered image, the watermark identifier is transmitted to the metadata repository 210. この識別子を使用して、レポジトリー210を指し示し、当該識別子に関連した情報を検出する。 Using this identifier, points to repository 210, detects the information related to the identifier. この情報は、サーチツール201へインデックス付けのために伝送される。 This information is transmitted for indexing to the search tool 201. レポジトリーに記憶された情報は、画像メタデータに対してチェックされる。 Information stored in the repository is checked against the image metadata. レポジトリー情報が最も現在のもの、即ち最新のものである場合には、当該情報がアクセスされてインデックス付けされる(また、恐らくは、ユーザのコンピュータに記憶され又はその画像に関連付けられる)。 Those repository information on the most current, i.e., if it is the latest one is the information is accessed is indexed (and possibly stored in the user's computer or be associated with the image). しかしながら、画像が最新のメタデータを含む場合には、画像メタデータがメタデータレポジトリーへコピーされ、透かし識別子に基づいてカタログ化されるのが好ましい。 However, if the image contains the latest metadata, the image metadata is copied to the metadata repository preferably be cataloged on the basis of the watermark identifier. 関連メタデータ「freshness(フレッシュさ)」は、例えば、メタデータタイムスタンプ又は「last updated(最後に更新された)」とのファイルインジケータによって決定することができる。 Associated metadata "freshness (freshness)", for example, can be determined by the file indicator for the metadata timestamp or "last updated (was last updated)". 或いは、ファイルメタデータが見つからない場合には(非フレッシュの別のケース)、レポジトリーからのメタデータがインデックス付けのために与えられて、画像ファイルに関連付けされる。 Alternatively, if the file can not be found metadata (non Fresh another case), the metadata from the repository is given for indexing, is associated with the image file.

ユーザは、さほど信頼できるものではないので、新たなメタデータ又はフレッシュコンテンツを簡単に除外するために、ハッシュ又は他の縮小ビット識別子を使用して、コンテンツ及びメタデータの信憑性を検証することができる。 Since the user does not much reliable, in order to easily exclude new metadata or fresh content, using a hash or other reduced bit identifier, verify the authenticity of the content and metadata it can. 例えば、ヘッダは、基礎となるコンテンツがEaglesによる歌であることを示す。 For example, the header may indicate that the underlying content is a song by Eagles. ヘッダは、歌のハッシュを有して、コンテンツ及びヘッダ情報の検証を可能にする。 Header, a hash of the song, to allow verification of the content and header information. ハッシュは、メタデータと共に、信頼性のある第三者のレポジトリーへ提供される。 Hash, together with metadata, it provided a reliable to third party repository. このハッシュが認証されて、メタデータ(及び歌)が信頼できるものと見なされる。 And this hash is authenticated, the metadata (and song) are deemed reliable.

サーチツール201は、メタデータレポジトリー210を用いて周期的にチェックを行い、画像メタデータ(及びこのようなメタデータのインデックス)が最新のものであることを確実にする。 Searching tool 201 periodically checks using metadata repository 210, image metadata (and index of such metadata) to ensure that this is the latest version. また、グラフィックユーザインタフェイスによって選択可能なボタンを提供して、ユーザがメタデータレポジトリー210に連続的に(又は頻繁に)問合せするための特徴を選択することを可能とし、メタデータのフレッシュさを保障してもよい。 Also, providing a selectable button by the graphic user interface, the user is continuously (or frequently) in the metadata repository 210 to enable the selection of features to query, freshness metadata it may be guaranteed.

別の実施の形態として、サーチツール201は、遭遇した画像それ自体がレポジトリー210に記憶されているかどうか問合せする。 As another embodiment, the search tool 201 encounters image itself to inquire whether it is stored in the repository 210. 記憶されていない場合には、サーチツールは、画像のコピーをレポジトリー210に提供する。 If not stored, the search tool, providing a copy of the image repository 210. そして、メタデータ及び画像の両方がレポジトリー210に記憶される。 Then, both the metadata and the image is stored in the repository 210. また、サーチインデックスを更新して、画像それ自体がレポジトリー210に記憶されたことを反映することが可能である。 It also updates the search index, the image itself is possible to reflect that stored in the repository 210. (ある場合には、画像は、それがレポジトリーにコピーされたときにユーザのコンピュータから除去される。) 画像の登録は、サーチツール201により自動的に行うことが可能である。 (In some cases, images. Is removed from the user's computer when it is copied to the repository) image registration may be automatically carried out by the search tool 201. 例えば、登録は、ユーザのアカウントへの画像の関連付け、又は固有の識別子の割り当て(例えば、デジタル透かし、指紋、又はハッシュを介して)を含んでもよい。 For example, registration, association of an image to the user's account, or assignment of a unique identifier (e.g., a digital watermark, fingerprint, or via hash) may contain.

透かしベースのメタデータ収集の幾つかの更なる実施例について考える。 Consider some further embodiments of the watermark based metadata collection.

駆け出しの写真家は、ディズニーランドでの休暇中にメモリカード一杯に写真を撮る。 Fledgling photographer, take pictures in the memory card full during vacation in Disneyland. 旅行に出る前に、写真家は、撮影する写真の幾つか又は全部に同じ識別子を用いた透かしを入れるために、カメラをプログラムしてした(セルラー電話に組み込まれたものかもしれない)。 Before leaving to travel, photographer, in order to put a watermark using the same identifier to some or all of the photos you want to shoot, and to program the camera (which may be what is incorporated in the cellular phone). 識別子は、データレポジトリー210において、キーワード又は情報(例えば、休暇の日付、場所、旅行の家族メンバー、オンラインジャーナル、等)に関連付けられている。 Identifier, in the data repository 210, are associated with the keyword or information (for example, the date of the vacation, location, family members of the travel, online journal, etc.). サーチツール201は、ディズニーランドの写真内の透かし識別子に遭遇すると、付加的なメタデータをサーチするために、識別子を用いてデータレポジトリー210に問合を行う。 Searching tool 201 encounters a watermark identifier in Disneyland pictures, in order to search for additional metadata, perform queries to the data repository 210 using the identifier. キーワード又は情報がデータレポジトリー210から検索されて、デスクトップサーチのためにインデックス付けされる。 Keyword or information is retrieved from the data repository 210, is indexed for desktop search. このようにして、識別子を使用し、付加的なメタデータが生成される。 In this way, using the identifier, additional metadata is created. また、メタデータを、サーチ可能なインデックスでインデックス付けすることも可能である。 Moreover, metadata can also be indexed in a searchable index.

ここで、レポジトリー210が公開されたレポジトリーであるとする。 Here, as a repository for repository 210 is published. 若い写真家は、ディズニーランドに広く関連した識別子を選択する。 Young photographer selects the widely associated with the identifier to Disneyland. 即ち、写真家は、ディズニーランドで休暇を取るときに人々が一般に使用する識別子を選択する。 In other words, the photographer selects the identifier that people generally use when taking a vacation in Disneyland. 恐らくは、透かし識別子は、信頼性のあるメタデータブローカー、即ちキーメタデータ「グラウンド・ツルース(ground truths)」(例えば、場所、イベント、日付、等のような)に関連したメタデータを提供し又は得ることに関して信頼性のある者を通して得られる。 Perhaps, the watermark identifier, metadata broker a reliable, that is key meta-data "ground Tsurusu (ground truths)" (for example, place, event, date, such as etc.) providing a meta-data associated with or obtained through a reliable person with respect to obtaining. メタデータブローカーは、次いで、識別子、又は識別子が関連付けられている場所/イベントに関連する一般的なメタデータを収集する。 Metadata broker then identifier or identifiers to collect common metadata associated with location / event associated. ユーザ識別子を、選択された識別子と共に使用して、若い写真家を特定する際の助けとすることができる。 A user identifier, can be used in conjunction with selected identifier, to assist in identifying the young photographer. 公開された又は信頼性のあるメタデータブローカーは、識別子に関連したデータレコードを設け(ポピュレートし)、又は取得する(例えば、人々がディズニーランドのお気に入りの記憶、演出、ミッキーマウスの真相を郵便で知らせ、又は信頼性のあるメタデータブローカーがメタデータそれ自体を得る、等々である)。 Published or metadata broker a reliable informs providing a data record associated with the identifier (populated), or to get (for example, people Disneyland favorite memory, performance, the truth of Mickey Mouse in the mail , or metadata broker reliable get metadata itself, and so). サーチツール201は、ディズニーランドの写真における透かし識別子に遭遇すると、付加的なメタデータをサーチするために、識別子でデータレポジトリー210に問合せを行う。 Searching tool 201 encounters a watermark identifier in photographic Disneyland, to search for additional metadata queries the data repository 210 with the identifier. データレコードが検索され、デスクトップサーチのためにインデックス付けされる。 Data record is retrieved and indexed for desktop search. (もちろん、公開識別子に代えて、半公開識別子を提供してもよい。例えば、家族の集いに参加する全てのメンバーが、同じ識別子を使用することができる。「同じ」という語の使用は、透かしが多数のペイロードフィールドを有する状況を含み、「同じ」識別子が所定のフィールドに含められる。このマルチペイロードフィールドの状況では、二つの透かしが同じ識別子を含んでもよいが、異なるフィールドに異なる情報が記憶されることがある。) (Of course, in place of the public identifier, may provide a semi-public identifier. For example, all of the members to participate in the gathering of family, the same identifier can be used. The use of the word "same" is, includes the situation where the watermark has a large number of payload field, the "same" identifier is included in the field. in the context of this multi-payload field, but the two watermarks may include the same identifier, different information in different fields the stored it is.)

<メタデータの収集> <Collection of metadata>
メタデータは、他の技術を使用して収集することも可能である。 Metadata can be collected using other techniques. 例えば、画像の位置は、関連する手がかりから推測することができる。 For example, the position of the image can be inferred from the relevant cues. 「DisneyLand001」という名前の画像ファイルは、おそらく、ディズニーランドで撮影されたものである。 Image file named "DisneyLand001" is, perhaps, it was taken at Disneyland. ディズニーランドという語が、メタデータを収集するために、インターネットサーチエンジン又はデータレポジトリーに提供される。 Word Disneyland, to collect metadata is provided to the Internet search engine or data repository. メタデータは、デスクトップサーチツールに提供され、当該ツールが画像ファイルのメタデータ部分を更新し、サーチ可能なデスクトップインデックスで新たなメタデータをインデックス付けする。 Metadata is provided to the desktop search tool, the tool updates the metadata portion of the image file, indexing new metadata searchable desktop index.

ディレクトリ構造体の名前、並びに/又は、日付及び時間情報を使用して、メタデータを収集することが可能である。 The name of the directory structure, and / or, by using the date and time information can be collected metadata. 例えば、サーチツール201が(例えば、メタデータフィールド、又は透かし日付/タイムスタンプから)2005年2月14日の午後8:30に写真が撮られたことが分かる場合には、当該サーチツールは、この情報を使用して、関連メタデータを収集することができる。 For example, a search tool 201 in the case where (for example, meta-data field, or from the watermark date / time stamp) it can be seen that photo to 8:30 pm on February 14, 2005 has been taken is, is the search tool, using this information, it is possible to collect associated metadata. 恐らくは、サーチツールは、写真家のアウトルックカレンダー又は他のカレンダーソフトウェアに問合せを行い、その時間に何がスケジュールされていたか(ジェークとジェーンの「バレンタイン」日のディナー)を調べる。 Possibly, search tool, queries the photographer of Outlook calendar or other calendar software, find out the what had been scheduled time (dinner of "Valentine's" date of the Jake and Jane). この情報は、デスクトップサーチツール201によってインデックス付けするために提供される。 This information is provided in order to be indexed by desktop search tool 201. この情報は、インデックス付けのために提供されるだけでなく、画像ファイルにメタデータとして関連付けることも可能である。 This information is not only provided for indexing, it is also possible to associate the image file as metadata.

或いは、ユーザが電子ジャーナル又はダイアリーを保持している場合には、当該ジャーナル又はダイアリー内のある日付を同様に問合せることが可能である。 Alternatively, if the user holds the electronic journal or diary is capable of querying the date of the said journal or diary as well. 例えば、ジャーナルのエントリー内のワード又は用語が抽出され、インデックス付けされ、次いで、メタデータとして記憶される。 For example, words or terms in the journal entry is extracted, indexed and then stored as metadata. さらに、サーチツールは、財務又は小切手帳ソフトウェア(例えば、マイクロソフト・マネー又はオンラインバンクステートメント)にアクセスして、この時間の付近の領収証やエントリーをチェックすることができる。 In addition, search tools, financial or checkbook software (for example, Microsoft Money or online bank statement) to access, it is possible to check the receipt and entry of the vicinity of the time. (アウトルック、MSマネー、ワード及びエクセルとのインタフェイスは、このようなプログラム及びそれらのインタフェイスに関する公開情報を考えると、当業者にとって単純なことである。例えば、アウトルックは、おおよそ、マイクロソフト・ビジュアル・ベーシックで書かれたプログラムからのオートメーション技術を使用してアクセスすることが可能である。他の技術は、アプリケーションプログラムインタフェイス等を使用する。) (Outlook, interface with MS Money, Word and Excel, given the public information about such programs and their interfaces, is that simple to those of ordinary skill in the art. For example, outlook, roughly, Microsoft Visual - it can be accessed using the automation technology from a program written in bASIC. other techniques use an application program interface, and the like.)

デスクトップサーチツール201はまた、追跡記録を使用して、メタデータを収集することも可能である。 Desktop Search Tool 201 also uses a tracking record, it is also possible to collect the metadata. 例えば、ユーザが、兄弟であるスコットからeメールされた写真を受け取るものとする。 For example, a user is assumed to receive the photos from a brother Scott has been e-mail. eメールの記録(誰からいつ受け取ったか)を写真に対するメタデータとして使用することができる。 e-mail records (from whom and when it has received) can be used as metadata for the photo. (上記説明から、全てのファイルは、受け取ったときにサーチできることを想起されたい。例えば、インデックスツール202は、アウトルックインボックスに新たな画像が受信されていることを認識する。eメール履歴及び画像がインデックスツール202により探索されて、この情報が収集される。) (From the above description, all files Recall that can search when received. For example, the index tool 202 recognizes that a new image is received in the Outlook Inbox .e mail history and images There is searched by the index tool 202, the information is collected.)

インターネット履歴又はキャッシュも調べられる。 Internet history or cache is also examined. 例えば、インターネットサーチエンジンに入力された検索語は、ブラウザの履歴から引き出されるか、又はキャッシュ記憶されて、サーチによって検出された画像に対してメタデータとして使用される。 For example, search terms entered into the Internet search engines, or drawn from browser history, or cached stored and used as metadata for the detected image by the search.

今日のカメラの多くは、GPSユニットを装備している。 Many of today's camera is equipped with a GPS unit. これらのユニットにより収集されたGPSデータは、ヘッダ又は透かし情報内に記憶することができる。 GPS data collected by these units may be stored in the header or the watermark information. サーチツール201は、GPSデータを使用して、関連メタデータを探索する。 Searching tool 201 uses the GPS data, to search for the associated metadata. 例えば、GPS座標が画像から抽出され、地理データベースに提供される。 Eg, GPS coordinates are extracted from the image, is provided to the geographic database. これら座標は、データベースをインデックス付けし、地理的位置に関連したメタデータを見つけるために使用される。 These coordinates are used to indexed database, find the metadata associated with geographic location. メタデータは、都市の名前、経歴情報、現在の天気、ビルの仕様、関連する写真、等を含むことができる。 Metadata, the name of the city, biographical information, current weather, building specifications, it is possible to include the related photos, and the like.

画像に関してなされる一般的な「推定」からメタデータを収集することも可能である。 It is also possible to collect metadata from general "estimated" to be made with respect to the image. 例えば、隣接写真におけるメタデータを見ることができる。 For example, it is possible to view the metadata in adjacent photographs. 例えば、三つの写真、即ちフォト1、フォト2及びフォト3を含むディレクトリについて考える。 For example, three of the photos, that is thinking about the directory that contains the photo 1, photo 2 and photo 3. フォト2に対するメタデータを収集するときに、サーチツール201は、フォト1及びフォト3に関連するメタデータを見て、フォト2に対するメタデータを補う。 When collecting metadata for photo 2, the search tool 201 watches metadata associated with the photo 1 and photo 3, supplement metadata for photo 2. それらの写真は、同じ又は略同じ時間に、同じ又は略同じ場所で撮影された見込みがある。 These photographs, the same or substantially the same time, have the same or expected to substantially taken at the same location. 同様に、タイムスタンプを使用して、5分又は10分の時間枠内のように互いに接近して撮影された画像を決定する。 Similarly, using the time stamps to determine the image that is close to capturing each other as in the time frame of 5 minutes or 10 minutes. このようなタイムフレーム内の画像は、関連している見込みがある。 Images such time frame may expect that relevant. この時間枠は、ユーザの好みで拡張することができる(例えば、ディズニーランドの休暇をカバーするために7日に拡張される)。 This time frame can be extended by the user's preference (e.g., extended to 7 days to cover the Disneyland vacation). これらの画像に関連したメタデータは、サーチツール201によって使用されるか、又はターゲット画像に関連付けられる。 Metadata associated with these images are either used by the search tool 201, or associated with the target image.

GPSデータ及びタイムスタンプを使用して、更に別の情報を発生することが可能である。 Using GPS data and time stamps, it is possible to further generate different information. 例えば、スポーツ熱狂者が、ダラスにおけるNCCA男子バスケットボール準決勝を観戦している間に、何枚かのスナップ写真を撮る。 For example, sports enthusiasts, while watching the NCCA men's basketball semi-finals in Dallas, take several sheets of snapshot. GPS座標及びタイムスタンプが写真に関連付けられる(例えば、埋め込まれた透かし又はヘッダ情報として)。 GPS coordinates and time stamps are associated with pictures (e.g., as an embedded watermark or header information). GPSは、場所(例えば、スポーツアリーナ)を特定するために使用され、タイムスタンプは、スポーツアリーナにおけるイベント(バスケットボールゲーム)を特定するために使用される。 GPS is the location (e.g., sports arena) is used to identify the time stamp is used to identify the event (basketball game) of a sport arena. これらの用語を検索語として使用して、そのイベントに関連した付加的なメタデータ、ストーリー、スコア、等を特定することができる。 Using these terms as search terms, additional metadata associated with the event, story, scores, etc. can be identified. この情報は、画像への関連付けのために提供される。 This information is provided for association with the image.

<メタデータの発生> <Occurrence of meta-data>
画像に対するメタデータを自動的に発生することも可能である。 It is also possible to automatically generate metadata for the image.

バイオメトリックセンサ(例えば、指紋スキャナ)を有する携帯電話について考える。 Biometric sensor (e.g., fingerprint scanner) Consider a cellular telephone with. (例えば、韓国の最大ワイヤレスネットワークオペレータの一つであるLGテレコムは、最近、バイオメトリック携帯電話LP3800を売り出した。他の製造者も、競合する携帯電話を提供している。)ユーザは、携帯電話によってスキャンするために自分の指を提示する。 (E.g., LG Telecom is one of the largest wireless network operators in Korea has recently selling biometric mobile phone LP3800. Other manufacturers also provide a competing mobile phones.) The user, mobile to present their finger in order to scan by phone. ユーザは、指紋で特定される。 The user is identified by a fingerprint. サーチツール201は、この指紋識別子を写真家のメタデータとして使用する。 Search tool 201, to use this fingerprint identifier as a photographer of the meta data. (例えば、サーチツール201は、携帯電話に問合せし(例えば、ワイヤレス又はBluetoothの傍受により)、写真を撮影した写真家が誰であるのかについて質問する。写真は、ファイル名又は他の識別子によって携帯電話のカメラに対して特定される。或いは、写真家の識別子が写真のメタデータに含まれている場合には、サーチツール201は、その識別子が誰に対応しているのかを調べるために携帯電話に問合せを行う。バイオメトリック識別子に以前に遭遇している場合には、サーチツールは、携帯電話と通話するのではなく、過去のセルラー電話質問結果を使用することができる。もちろん、人間の指紋(又はそこからのテンプレート)をメタデータそれ自体として使用することも可能である。 (For example, search tool 201, to contact the mobile phone (for example, by the interception of wireless or Bluetooth), photographer that the photo was taken to a question about who the is the one. Photo, carried by a file name or other identifier be specific to the telephone of the camera. Alternatively, if the photographer of the identifier is included in the photo metadata, search tool 201, mobile in order to examine whether the identifier is compatible with anyone queries the phone. If you have previously encountered in biometric identifiers, search tools, mobile phone instead of a call, it is possible to use the past of cellular telephone query results. of course, human it is also possible to use a fingerprint (or template therefrom) as metadata itself.

サーチツール201はまた、パターン認識又はカラー分析モジュールを有するか、又はそれと協働してもよい。 Searching tool 201 also includes or has a pattern recognition or color analysis module, or the same may cooperate. メタデータは、画像パターン認識を介して発生される。 Metadata is generated through the image pattern recognition. 例えば、サーチツール201は、パターン認識モジュールを用いて画像を分析する。 For example, the search tool 201 analyzes an image using the pattern recognition module. その結果がメタデータとして使用される。 The result is used as meta data. (例えば、パターン認識モジュールは、木の写真を分析した後に、用語「木」を返送する。) 画像のカラー分析を行うことも可能であり、例えば、画像の三次元カラー空間ヒストグラムを計算することも可能である。 (E.g., the pattern recognition module, after analyzing the tree photo, returns the term "tree".) It is also possible to perform color analysis of the image, for example, to calculate the three-dimensional color space histogram of the image it is also possible. ヒストグラムは、主要カラー(例えば、赤、ピンク、黄色、等)を特定する。 Histogram, to identify key color (for example, red, pink, yellow, etc.). 主要カラーは、画像領域に基づくか、又は主要カラーを含む画像の割合に基づくことができる。 Primary color, either based on the image area, or can be based on the percentage of the image containing the main color. 或いは、最上位の三つ、又はその程度のカラーだけが、特定の画像に対してインデックス付けされる。 Alternatively, the three most significant, or only the color of its extent, is indexed to a particular image. デスクトップサーチツール204にタイプされた又は対話された要求がピンクの帽子をかぶった祖母の写真を要求しているものと想像することができよう。 It will be able to imagine that the desktop search tool 204 typed or dialogue has been requested to have requested a photo of her grandmother wearing a pink hat. この問合せは、特に、用語「祖母(grandma)」及び「ピンク(pink)」を含む。 This inquiry is, in particular, contain the term "grandmother (grandma)" and "pink (pink)". 用語「ピンク」は、カラー分析によって自動的に求められた主要カラーとしてピンクを有する写真を特定する。 The term "pink" are specific for a photo with a pink automatically as a main color obtained by the color analysis. このサブセットは、メタデータとして祖母を含む全ての写真と照合される。 This subset is collated with all pictures containing grandmother as metadata. それによって得られた写真のセットは、ユーザによる精査のために特定される。 It set of photographic images obtained by is identified for review by the user.

他のメタデータを画像特性から推定することが可能である。 It is possible to estimate other metadata from the image characteristics. 「暗い」写真(カラー又はピクセル分析により求められる)は、その写真が夜又は室内で撮影されたことを暗示し得る。 "Dark" photos (determined by the color or pixel analysis) may imply that the photo was taken in the evening or room.

パターン認識又はデジタル透かしではなく、サーチツール201は、指紋モジュールを含むか又はそれと協働してもよい。 Rather than pattern recognition or digital watermarking, searching tool 201 may or therewith cooperating containing fingerprint module. 「指紋(fingerprint)」という語は、画像ハッシュのような画像の縮小ビット表示を意味するために使用している。 The term "fingerprint (fingerprint)" is used to mean a reduced bit display of the image, such as an image hash. 「指紋」及び「ハッシュ」との語を、交換可能に使用することがある。 The term "fingerprint" and "hash", which may be used interchangeably. 指紋を生成し、これを使用してデータベースに問い合わせる。 To generate a fingerprint, query the database using it. データベースでは、他の画像が指紋形成されている。 The database other images are fingerprint formed. 例えば、エンパイアステートビルの異なる写真は、同様の(又は関連した)指紋を生じる。 For example, different pictures of the Empire State Building, produce similar (or related) fingerprint. これらの写真及びそれに対応する指紋は、データベースにおいてインデックス付けされる。 These photographs and fingerprints corresponding thereto are indexed in the database. 厳密な一致は頻繁には見られないかもしれないが、統計学的に関連していると見なされる指紋は、あり得る組合せとして返送される。 Exact match may not frequently are found, the fingerprint is considered to be statistically relevant, it is returned as a combination that may be. これらの指紋に関連したメタデータも、返送することが可能である。 Metadata associated with these fingerprints can be returned. (指紋及び透かしを効果的に結合することもできる。例えば、デジタル透かしをメタデータへの持続的リンクとして使用し、一方、指紋を識別に使用することができる。) (It is also possible to effectively bind the fingerprints and watermarks. For example, the digital watermark is used as persistent link to metadata, whereas, can be used to identify a fingerprint.)

サーチツール201はまた、顔認識モジュールを含むか又はそれと協働することができる。 Searching tool 201 may also be or cooperating therewith including the face recognition module. 顔認識ソフトウェアを使用して、画像に示された人々を識別する。 Use face recognition software to identify people shown in the image. 顔認識ソフトウェアは、トレーニングすると、画像を分析して、そこに示された人々を識別できるか否かを調べる。 Facial recognition software, when training, by analyzing the image, checks whether it is possible to identify those indicated therein. 示された人々の名前をインデックスして、画像に関連付けることができる。 The name of the indicated people in the index, can be associated with the image. 或いは、個人のプロフィール(名前、誕生日、家族関係等)を生成して、個人と関連付けることができる。 Alternatively, a personal profile (name, birthday, family relationships, etc.) to generate, can be associated with the individual. 次いで、顔認識ソフトウェアが個人を識別するときには、個人のプロフィールがメタデータとして画像に関連付けられる。 Then, the face recognition software to identify the individual, personal profile is associated with the image as metadata. (図4は、この方法の一実施例を示す。顔認識ソフトウェア401は、画像402を分析し、画像がジェーンを示すと決定する。プロフィールデータベース403に質問して、ジェーンのプロフィール404(例えば、名前、現在年齢、誕生日、等)を得、そしてプロフィール404がメタデータとして画像に関連付けられる。) (Figure 4 illustrates one embodiment of the method. Face recognition software 401 analyzes the image 402, the image is determined to represent Jane. Ask the profile database 403, Jane profile 404 (e.g., name, current age, birthday, etc.) to give a, and profile 404 is associated with the image as metadata.)

メタデータは、ユーザのホームドメイン内のサーチ装置によって発生することが可能である。 The metadata may be generated by a search device in the user's home domain. 例えば、サーチツール201は、カメラ及びGPSユニットを装備したユーザの携帯電話との通信を開始する(例えば、Bluetooth又はワイヤレス接続を介して)。 For example, the search tool 201 starts communication with the user of the cellular phone equipped with a camera and GPS unit (e.g., via Bluetooth or wireless connection). サーチツール201は、カメラがどこで写真を撮影したかを問合せする。 Search tool 201, the camera is a query where in the photo was taken. 画像取得の地理的位置及び時間をメタデータとして使用することもできるし、又はメタデータを見つけるために使用することも可能である。 It geographic location and time of the image acquisition can also be used as metadata, or can be used to locate the metadata. 携帯電話又は他のカメラに問合せするのではなく、サーチツールは、ユーザのTiVo装置、ゲームコンソール(例えば、Xbox又はPlayStation)、音楽プレーヤ(例えば、iPod又はMP3プレーヤ)又はPDAと対話することが可能である。 Instead of inquiry to a mobile phone or other camera, search tool, TiVo device of the user, the game console (for example, Xbox or PlayStation), music player (for example, iPod or MP3 player) can interact with or PDA it is. これらのソースから収集された関連情報(例えば、ジャーナル、カレンダー、他の画像、音楽、ビデオゲーム、等)は、ユーザデスクトップ上の特定ファイル用のメタデータとして使用することができる。 Related information collected from these sources (e.g., journal, calendar, other images, music, video games, etc.) can be used as metadata for a particular file on the user desktop.

<ユーザ選択> <User-selected>
サーチツール201(図2)は、好ましくは、一つ以上のユーザインタフェイス(例えば、ツール204により与えられる)を備え、当該インタフェイスを通して、ユーザは、ツール201と対話することが可能であり、ツール201によって見つけられるか又はインデックス付けされたメタデータと対話することができる。 Searching tool 201 (FIG. 2) preferably includes one or more user interface (e.g., provided by the tool 204), through the interface, the user is able to interact with the tool 201, It may interact with found or indexed metadata by the tool 201.

例えば、ユーザは、好ましくは、サーチツール201が付加的なメタデータを検出しそうなインターネットベースのサイトを、デスクトップサーチツール204を通して、選択することができる。 For example, users preferably the detected likely Internet-based site search tool 201 is additional metadata through Desktop Search tool 204, may be selected. (ユーザは、URLをタイプ入力するか、又は所定のメタデータウェブサイトをハイライト処理することができる。) (The user can either type in URL, or a predetermined metadata website can be highlighted.)

ユーザはまた、このようなインタフェイスを通して、一以上のフィルタを設定できることも好ましい。 The user may also through such interface, it is also preferable to be able to set one or more filters. 「フィルタ」は、メタデータとして使用されるべき情報を制限又は選別するソフトウェアモジュール又はプロセスである。 "Filter" is a software module or process for limiting or sorting information to be used as metadata. フィルタは、ユーザが意味のない可能性のあるメタデータを取り除くことを可能にする。 Filter makes it possible to remove the metadata user might not meaningful. 例えば、一つのフィルタオプションは、ユーザのデスクトップから収集されたメタデータだけを画像に関連付けることを可能にする。 For example, one filter option allows to associate only the image metadata collected from the user's desktop. 別のオプションは、ユーザが、好ましい又は信頼性のあるものとしてメタデータのソースを設定することを可能にする。 Another option allows the user to set the source of metadata as being preferred or reliable. レポジトリー210から収集されたメタデータは、信頼性があるものと指定されてもよいが、画像ヘッダにおいて検出されたテキストの自動インターネットサーチによって収集されたメタデータは、信頼性がないことがある。 Metadata collected from repository 210, may be specified that there is reliability, metadata collected by the automatic Internet search found text in the image header may be unreliable. 関連フィルタオプションは、ユーザがメタデータのソースに基づいてメタデータを予めランク付けすることを可能にする。 Related filtering option that allows a user to attach previously ranked metadata based on the source of the metadata. メタデータが充分なランクのものでない場合には、画像ファイルが新たなメタデータを含むように拡張されず、低いランクのメタデータは、インデックス付けされない。 If metadata is not of sufficient rank image file is not expanded to include new metadata, the metadata of lower rank are not indexed. 更に別のフィルタオプションは、ユーザによって承認されたメタデータだけを画像に関連付けることを可能にする。 Yet another filter option allows to associate only the image metadata approved by the user.

収集又は発生されたメタデータは、ユーザによる再検討及び承認のためにインタフェイスを介して提示されることが好ましい。 Collected or generated metadata is preferably presented via the interface for review and approval by a user. 例えば、メタデータは、チェックボックスを備えたグラフィックウインドウ(図5を参照)を介して提示される。 For example, metadata is presented via a graphical window that includes a check box (see Figure 5). ユーザは、画像に関連付けしたいメタデータを単にチェックし、サーチツール201が、メタデータ部分を更新して、ユーザの選択を反映する。 User simply checks the metadata to be associated with the image, searching tool 201 updates the metadata portion to reflect the user's selection. チェックボックスに代わりに、ユーザは、保持することを望むメタデータをハイライト表示することも可能である。 Instead the check box, the user can also be highlighted metadata wants to retain.

<ディレクトリビュー> <Directory view>
本発明の別の特徴は、ディレクトリビューである。 Another feature of the present invention is a directory view. ファイルは、しばしば、ディレクトリ及びフォルダによって配列されてグラフィック表示される。 File, often, are arranged by the directory and folder are graphic display. (あなたのコンピュータディレクトリの「My Documents」を単にクリックして、ファイルが如何に配列されているのかを参照されたい。) (By simply click the "My Documents" on your computer directory, see whether the file has been how the sequence.)

この改良は、ファイルをそれらのメタデータに基づいて配列してグラフィック表示する。 This improvement, graphic displays are arranged on the basis of a file on their metadata. 例えば、サーチツール201によって収集された情報に基づき、画像が、当該画像に関連したメタデータに従ってコンピュータディスプレイ上に配列されてグラフィック表示される。 For example, based on information collected by the search tool 201, an image, are arranged on a computer display according to the metadata associated with the image graphically displayed. メタデータのカテゴリーは、ユーザの好みで変化し得るが、幾つかの例を以下に示す。 Category metadata may vary with the user's preference, Some examples below.

ユーザが、三つの広いメタデータカテゴリー、即ち休暇、プロフェッショナル、及び家族を選択する。 The user selects three broad metadata category, ie vacation, professional, and family.

プログラム(又はオペレーティングシステム)は、サーチツール201によって提供されたインデックスを問合せする。 Program (or operating system) to query the index provided by the searching tool 201. 画像を「休暇」画像として特定するメタデータを含む全ての画像は、休暇ディレクトリに関連付けられ、画像を「家族」として特定するメタデータを含む全ての画像は、家族ディレクトリに関連付けられる。 All images including metadata specifying the image as "vacation" image is associated with vacation directory, all images including metadata specifying the image as the "family" is associated with a family directory.

ユーザは、メタデータのカテゴリーを変更することにより「ファイルディレクトリ」ビューを変更することができる。 The user is able to change the "File Directory" view by changing the category of metadata. ユーザはまた、サブディレクトリも確立することができる(例えば、休暇ディレクトリ内のディズニーランド及びナイアガラの滝のメタデータ表示)。 The user also can be established subdirectories (e.g., Disneyland and Niagara Falls in vacation directory metadata display).

画像は、典型的なディレクトリツリー形態ではなく、メタデータ構造で配列されて表示される。 Image is not a typical directory tree form is displayed by being arranged in a metadata structure. ユーザがメタデータ要求を変更すると、デスクトップ配列も変更される。 When the user changes the metadata request, even desktop sequence is changed.

ディレクトリビューの視覚表示はまた、例えば、メタデータ又はメディアの特定形式に関連したスタイルシートに基づいて変更することができる。 Visual display of the directory view can also be, for example, can be changed based on the style sheet associated with a particular type of metadata or media. スタイルシートは、家族のメンバーごとに(又はWindowsのログインプロフィール間で)変化し得る。 Style sheets, for each family member (or between Windows login profile) may vary. 音楽も、そのコンテンツに基づいて表示することができる。 Music, can be displayed on the basis of its content. 例えば、特定のリズム又はハーモニーをもつ音楽を、一意に、又はスタイルシートに基づく等によって、提示することが可能である。 For example, a music with a particular rhythm or harmony, uniquely, or by the like based on the style sheet, it is possible to present.

上記のファイルディレクトリの多数の可能性のある組み合せの一つは、次のものを含む。 One combination of a number of possibilities of the file directory, including:.

D1. D1. コンピュータに記憶されて、コンピュータ上で動作するグラフィックユーザインタフェイスであって、 Stored in a computer, a graphical user interface running on a computer,
コンピュータディスプレイを通して、ファイルのグラフィック表示を提示する第1のモジュールと、 Through computer display, a first module that presents a graphical representation of the file,
表示用に各ファイルに関連したメタデータを決定する第2のモジュールと、 A second module for determining metadata associated with each file for display,
表示用に上記ファイルを当該ファイルのメタデータに基づいてグラフィカルに編成する第3のモジュールと、 A third module for organizing graphically based on the file metadata of the file for display,
を備えるグラフィックユーザインタフェイス。 Graphic user interface with a.

<メタデータオーサリング> <Metadata authoring>
図6を参照して、メタデータオーサリングツール206(例えば、ソフトウェアアプリケーション)について説明する。 Referring to FIG. 6, the metadata authoring tool 206 (e.g., software application) will be described. オーサリングツール206は、ユーザがメタデータにアノテーション付けし、メタデータをマルチメディアコンテンツに関連付けることを可能にする。 Authoring tool 206 allows a user to annotate metadata makes it possible to associate metadata with the multimedia content. ほとんどの画像編集ソフトウェア(例えば、マイクロソフトからのデジタル・画像・スイート)は、メタデータオーサリング能力を提供するが、本明細書では、本発明による幾つかの改良を提供する。 Most image editing software (e.g., a digital image suite from Microsoft) provide metadata authoring capabilities, herein, provide several improvements according to the invention.

一つの改良は、画像又は画像のグループに所定のメタデータを「ペイント」する能力である。 One improvement is the ability to "paint" a given metadata into groups of image or images. 例えば、ソフトウェアアプリケーションの設定において、異なるメタデータの選択、例えば、「休暇」、「家族」のような用語、又はプロフィール(「ジェーンの個人的プロフィール」)、等を可能にするメタデータツールバーが、本発明により提供される。 For example, in the setting of a software application, the choice of different metadata, for example, "vacation", terms such as "family", or profile ( "personal profile of Jane"), metadata toolbar etc. enabling is provided by the present invention. メタデータツールバーからメタデータのカテゴリーを選択(クリック)することで、画像又はファイルディレクトリにメタデータをペイントすることができる。 By from the metadata toolbar select the category of meta-data (click), the image or file directory can be used to paint the meta data. (メタデータを選択すると、マウスカーソルがペイントブラシとして現われるようになることが想像できよう。次いで、選択されたメタデータを画像に文字通り「ペイント」する。画像又はディレクトリアイコン表示(又はサムネイル)は、メタデータに関連したカラーを変化させて、メタデータが画像に添付されたというユーザフィードバックを提供することができる。)その舞台裏では、メタデータ及びターゲット画像のユーザ選択によって、画像ファイルのメタデータ部分にどのメタデータを追加すべきかがオーサリングツール206に伝えられる。 (Selecting metadata could imagine that the mouse cursor comes to appear as a paintbrush. Then, literally "paint" the image of the selected metadata. Image or directory icon display (or thumbnail) is by changing the color associated with the metadata, can be metadata to provide user feedback that is attached to the image.) Behind the scenes, the user selects the metadata and the target image, the image file metadata or it should be added to any metadata in part is transmitted to the authoring tool 206. メタデータ部分は、「ペインティング」を反映するように書き直されるか又は追加される。 The metadata portion is or added is rewritten to reflect the "painting".

<更に多くのデスクトップサーチ> <More Desktop Search>
ここで、デスクトップサーチの話題に戻る。 Here, returning to the topic of desktop search. 別の実施の形態では、画像(並びに/又は、オーディオ及びビデオ)サーチツール(例えば、C++で書かれたコンピュータプログラム)が、本発明により提供される。 In another embodiment, an image (and / or audio and video) searching tool (e.g., a computer program written in C ++) are provided by the present invention. 画像サーチツールは、ユーザの装置(例えば、コンピュータ、ネットワークサーバー、iPod、セルラー電話、等)に常駐し、画像をサーチするために、ファイル及びフォルダをアクセスする。 Image search tool, the device of the user (for example, a computer, a network server, iPod, cellular phone, etc.) reside in, in order to search for the image, to access the files and folders. 例えば、サーチツールは、ファイル拡張子*. For example, a search tool, file extension *. gif、*. gif, *. jpg、*. jpg, *. bmp、*. bmp, *. tif、等により特定される画像ファイルをサーチする。 tif, searches the image file specified by the like. (オーディオ又はビデオファイルをサーチする場合には、*.au、*.wmv、*.mpg、*.aac、*.mp3、*.swf、等をサーチしてもよい。) 別の実施例では、ユーザ(又はオペレーティングシステム)が画像ディレクトリを特定し、サーチツールがそれら特定されたディレクトリの各々を探索する。 (When searching for the audio or video files, *. Au, *. Wmv, *. Mpg, *. Aac, *. Mp3, *. Swf, etc. may search for.) In another embodiment the user (or operating system) specifies an image directory, searches each directory search tool is identified them.

図7を参照する。 Referring to FIG. 7. 特定すると、サーチツールは、画像を開いて、埋め込まれたデジタル透かしを画像内でサーチする。 Upon identification, searching tool, open images, search for embedded digital watermark in the image. サーチツールは、透かし検出器を含んでいてもよく、又はそれをコールしてもよい。 Searching tool may comprise a watermark detector, or may be calling. 透かし情報(例えば、複数ビットのペイロード)は、検出されると、第1のファイル、例えば、XMLファイルに与えられるか又はそれに含められる。 Watermark information (e.g., payload plurality of bits), when detected, the first file, for example, be included or it is provided to an XML file. 第1のファイルは、同じファイル名を含むが、異なる拡張子を有することが好ましい。 The first file contains the same file name, it is preferable to have a different extension. 画像は、当該画像からメタデータ(例えば、EXIF情報、ヘッダ情報、又は他のメタデータ)を得るために更に評価される。 Images, metadata from the image (e.g., EXIF ​​information, header information, or other metadata) further evaluated to obtain. メタデータは、第1のファイルに与えられるか、又はそれに含められる。 Metadata is either supplied to the first file, or included in it. 第1のファイルは、画像(或いはオーディオ又はビデオ)に最初に含まれていたものと同じタグ又は識別子を有していてもよい。 The first file may have the same tag or identifier that was included in the first image (or audio or video).

デジタル透かしに遭遇すると、サーチツールは、一つ以上のオンラインメタデータレポジトリーに問合せを行って、画像に関連した付加的なメタデータが存在するか否かを決定することができる。 Upon encountering a digital watermark, the search tool can be determined by querying the one or more online metadata repository, whether additional metadata associated with the image exists. このようなオンラインメタデータは、第1のファイルにダウンロードすることができる。 Such online metadata may be downloaded to the first file. もちろん、フィルタ又は基準を使用して、どのオンラインメタデータが受け容れられるかを制限することができる。 Of course, it is possible to use filters or criteria to limit which online metadata is accepted. 例えば、信頼性のある又は確認されたソースによって署名されたメタデータのパケット又はグループだけを、第1のファイルに含むように受け容れることができる。 For example, only, it is possible to accept to include in the first file signature packet or group of metadata by a trusted or confirmed source. 或いは、異なるメタデータフィールド又はタグが、最後に変更されたインジケータ又はタイムスタンプインジケータを含むことができる。 Alternatively, different metadata fields or tag, finally can include modified indicator or timestamp indicator. このように、オンラインメタデータが冗長なフィールド又はタグを含む場合には、最新バージョンのメタデータ(画像に関連付けられた又はオンラインの何れか)が使用される。 Thus, when online metadata containing redundant fields or tag, the latest version of the metadata (or associated or online image) is used. さらに、ユーザは、メタデータのどのソースが信頼されるべきか、また、どのソースを含めるべきかを、指定することができる。 Further, the user should which source metadata is trusted, also should be included which source can be specified.

透かし識別子はまた、「双方向」メタデータポピュレーションを支援することも可能である。 Watermark identifier is also capable of supporting the "two-way" metadata population. 即ち、透かし識別子は、メタデータのオンラインレポジトリーにリンクすることができ、より詳細には、特定の画像又は関連メタデータにリンクすることができる。 That is, the watermark identifier may be linked to the online repository of metadata, and more particularly, can be linked to a specific image or associated metadata. メタデータを、オンラインレポジトリーにアップロードして、透かし識別子を介して画像メタデータに関連付けることができる。 Metadata, and upload the online repository, can be associated with image metadata via a watermark identifier. (透かしベースのネットワークナビゲーションが、例えば、上述した本譲受人の米国特許出願第09/571、422号に説明されている。) (Watermark-based network navigation, for example, are described in U.S. Patent Application Serial No. 09 / 571,422 of the present assignee discussed above.)

図7に戻る。 Returning to FIG. 7. 次に、第2のファイル(例えば、HTML)が生成される。 Next, a second file (e.g., HTML) is generated. この第2のファイルの名前は、第1のファイル及び画像と同じファイル名を、異なるファイル拡張子と共に有することが好ましい。 The name of the second file, it is preferable to have the same file name as the first file and the image, with a different file extension. この第2のファイルは、第1のファイルからの情報を含むことが好ましい。 The second file may include information from the first file. 例えば、第1のファイルが画像の記憶位置を含む場合には、第2のファイルが画像へのハイパーリンクを含むことができる(記憶位置に基づいて)。 For example, if the first file comprises a storage location of the image, the second file (based on the stored position) Hyperlinks may include in the image. 上記の幾つかの実施の形態で述べたように、第2のファイルは、画像の表示を含むこともでき、或いはビデオ又はオーディオの場合には、恐らくは、オーディオ又はビデオのサンプル又は断片を含むこともできる。 As described in some embodiments above, the second file can also include a display of the image, or in the case of video or audio, perhaps, contain samples or fragments of audio or video It can also be. 第2のファイルは、第1のファイルからの情報の幾つか又は全部を含むようにユーザが構成することが可能である。 The second file, the user to include some or all of the information from the first file can be configured. これは、例えば、ユーザがカメラ設定のビューを制限したい場合に好都合である。 This, for example, the user is advantageous when it is desired to restrict the view of the camera settings. (その舞台裏では、スタイルシート又は「スキン」と協働するXMLパーザーを使用して、第1のファイルを解釈し、第2のファイルをスタイルシートに基づいて設ける(ポピュレート)することができる。他の実施の形態では、その基礎となるコンテンツそれ自体を使用して、第2のファイルをいかにポピュレートするかを決定する。あるリズム又はメロディーを有するオーディオコンテンツは、第1の所定のスタイルに基づいて表示される一方、他の特性を有するコンテンツは、第2の異なるスタイルに基づいて表示される。) (Behind the scenes, it is possible to use the XML parser to cooperate with style sheets, or "skin", interprets the first file, provided on the basis of the second file to the style sheets (populating). in another embodiment, using the content itself the underlying, determining how to populate the second file. audio content having a certain rhythm or melody, based on the first predetermined style while displayed Te, content having other characteristics, are displayed based on a second, different styles.)

HTMLファイルの生成は、通常、デスクトップサーチツール(例えば、Google又はYahoo、等)によるインデックス付けをトリガーする。 Generation of the HTML file, usually, desktop search tool (for example, Google or Yahoo, etc.) to trigger the indexing by. メタデータがインデックスに追加され、画像のサーチを効果的なものとする。 Metadata is added to the index, the search of the image and effective. ある実施の形態では、もちろん、上記のサーチツールの機能がデスクトップサーチツールと一体化される。 In one embodiment, of course, the function of the search tool is integrated with the desktop search tool. 他の実施の形態では、サーチツールがデスクトップサーチツールにプラグインする。 In other embodiments, the search tool is plugged into the desktop search tool. 更に別の実施の形態では、サーチツールがプロキシーサーバー又はネットワークハブと協働する(又はそこから動作する)。 In yet another embodiment, the search tool (works or from) cooperating with a proxy server or network hub.

(ここで、あるデスクトップサーチツール、例えば、Googleデスクトップサーチツールは、あるファイル「タイプ」(例えば、JPEG、等)の登録を可能にすることに注意されたい。上述した第1のファイルに、固有のファイル拡張子(又はタイプ)を与えることができる。このように、デスクトップサーチツールには、冗長な結果を回避するためにインデックス付けの際に、第1のファイルを無視することを伝えることができる。) (Here, a desktop search tool, for example, the Google Desktop Search tool, a file "type" (for example, JPEG, it should be noted that to enable the registration etc.). In the first file as described above, specific it can give the file extension (or type). in this manner, the desktop search tool, at the time of indexing in order to avoid redundant result, is to convey that to ignore the first file it can.)

画像サーチツールは、「最後に変更された」日付を比較して、特定の画像をインデックス付けすべきかどうかを決定することができる。 Image search tool, by comparing the date on which the "last changed", it is possible to determine whether or not to index with a particular image. 例えば、画像の最後に変更された日付を、それに対応する第1のファイルの最後に変更された日付と比較することができる。 For example, the date last modified image can be compared with the changed date last first file corresponding thereto. 画像の変更日付が第1のファイルのものより遅い場合には、画像を再び分析して、透かし及びメタデータを得る。 Dates image if slower than that of the first file, image analyzed again to obtain the watermark and metadata. 第1のファイルは、それに対応する第2のファイルと共に更新される。 The first file is updated with a second file corresponding thereto.

<ブログ> <Blog>
透かしを使用して、いわゆるオンラインブログを支援し、且つそこにリンクすることが可能である。 Use the watermark, to support the so-called online blog, it is and can be linked to there. (ブログとは、ウェブサイトに発表される情報である。いわゆる「ブログスクリプト」は、誰かが情報をウェブサイトに投稿することを可能にする。) (Blog is information that is published on the web site. So-called "blog script" allows someone to post the information on the web site.)

デジタル透かしが埋め込まれた写真(或いはオーディオ又はビデオ)について考える。 Think about the photo that digital watermark is embedded (or audio or video). 透かしリーダーは、透かしを抽出し、オンラインリソース(例えば、URL)へリンクする。 Watermark reader to extract the watermark, to link to online resources (for example, URL). 改良点は、デジタル透かしがブログ又はブログスレッド(或いは会話)へリンクすることである。 The improvement is that the digital watermark is linked to a blog or a blog thread (or conversation). ブログは、例えば、ファイルとして記憶することができる。 Blog, for example, can be stored as a file. 透かしが、例えば、Flickr(例えば、www.flickr.comを参照)に類似したオンラインフォトブログサイトのURLを含むか、又はそれを参照する場合について考える。 Watermark is, for example, Flickr (see, for example, www.flickr.com) consider the case that it contains the URL of the online photo blog site that is similar to, or refer to it. 透かしは、フリッカーにおける特定の写真又はアカウントにリンクし、恐らくは、特定のブログスレッドにもリンクすることが可能である。 Watermark is to link to a particular photo or account in the flicker, perhaps, it is possible to link to a specific blog thread. 例えば、コンピュータ、モニタ及び椅子で完成されたホームオフィスを示す写真について考える。 For example, consider photographs showing computer, a home office that has been completed by the monitor and chair. 描画されているアイテムに関して、多数の異なるブログスレッド(又は会話)が投稿されることがある。 Respect item being rendered, there are a large number of different blogs thread (or conversation) is posted. (恐らくは、ある者は、椅子が好きであり、充分な腰部支持を提供するかどうかと考えている。会話又はスレッドは、この話題に関して続く。) おそらく、椅子を示すか、さもなければ、椅子又はスレッドにリンクされている画像領域を表わす透かしが、特定のスレッドにリンクするために使用される。 (Possibly, a person is like the chair, believes that whether to provide adequate lumbar support. Conversation or thread continues on this topic.) Perhaps show a chair, otherwise, chair or watermark representing an image region that is linked to a thread is used to link to a particular thread. 個別の透かし(又は透かしコンポーネント)を画像に埋め込んで、特定のスレッドを表わすことが可能である。 Embed individual watermark (or watermark component) in the image, it is possible to represent a particular thread. 透かしペイロード又はコンポーネント情報は、ユーザに表示可能な主題ラインにリンクする識別子を有して、ユーザが考慮しようとするブログスレッドをユーザが取り上げることを可能にする。 Watermark payload or component information, have an identifier that links to the user can display a subject line, which allows a user to pick up the user to blog thread that tries to take into account. 写真が多数のこのような透かしを含む場合には、対応の主題ラインの各々を、選択のために表示することができる。 Photo if it contains a large number of such watermarks, each of the corresponding subject line can be displayed for selection. このようにして、透かしは、各ブログ及びブログスレッドのルートとなる。 In this way, the watermark becomes each blog and a blog thread root. (恐らくは、ブログスレッドをスタートするための必須条件として、会話に透かし識別子又はコンポーネントが割り当てられ、コンポーネントが、ブログ又は応答が投稿されるときに、画像に、恐らくは特定領域に、埋め込まれる。) (Possibly, as a prerequisite for starting a blog thread, the conversation watermark identifier or component is assigned to, component, when the blog or response is posted to the image, perhaps a particular region, is embedded.)

他の実施の形態では、ブログにコメントする各個人に、識別子(又は特定の固有の透かし署名)が割り当てられる。 In other embodiments, the individuals to comment on a blog, an identifier (or a particular unique watermark signature) is assigned. 個人の透かしは、写真についてブログをするか、さもなければ、コメントするときに、画像に埋め込まれる。 Watermark of individuals, or a blog about the photo, otherwise, at the time of comment, is embedded in the image.

<ブログの詳細> <Blog details>
それらの本質において、「フォトブログ」は、単に写真を伴うブログである。 In their essence, "photo blog" is a blog that simply accompanied by a photo. ほとんどのケースでは、写真はアンカーである。 In most cases, the photograph is an anchor. それらは、注意を引き、トーンを設定し、ブックマークとして働く。 They draw attention, to set the tone, it acts as a bookmark. (例えば、www.photoblog.orgを参照) (See, for example, www.photoblog.org)

一方では、画像をウェブ上のログの一部分として単に投稿し、会話に対してユーモア、イラスト、ドキュメンテーション、又はアンカーを与えることができる。 On the other hand, simply post pictures as part of the log on the web, it is possible to provide humorous illustration, documentation, or an anchor to conversational. 会話は、休暇地、個人、子供、家族、場所、又は、何らかの他の話題性及び写真向きのものに関することであってもよい。 Conversation, vacation destinations, individuals, children, family, location, or, may be matters concerning those of some other topicality and photo orientation.

デジタル透かしは、改良を伴う新たな工夫をもたらす。 Digital watermark, bring a new twist with improved. 透かしは、写真をフォトブログのセンターピースとする。 Watermark is, the photo with the photo blog of the center piece. 透かし入り写真は、ブログへのエージェント、及び繰り返し再訪問され得るポータルとなる。 Watermarked photos, agent to the blog, and the repeated re-visit that may be portal. 写真を、ブログ自体へのポインタとして配布することができる。 Photos, can be distributed as a pointer to the blog itself. 写真は、受取人の注意を捕え、デジタル透かしを通して、ブログサーバー(又はブログが投稿されるネットワークリソース)へリンクバックする。 Photo, captured the attention of the recipient, through a digital watermark, to link back to the blog server (network resource or blog is posted). ブログは、投稿されるか(例えば、ウェブサイトへ行って読まねばならない)、又はダウンロード可能である(例えば、古き良きニュースグループコンセプトのような種類)ことを想像することができる。 Blog, or is posted (for example, must be read to go to the web site), or possible is downloaded (for example, the good old type, such as a news group concept) that it is possible to imagine. 写真をブログクライアント又は他のアプリケーションにドラッグ及びドロップすることにより、ブログをクライアント又はアプリケーションに追加する。 By drag and drop photos to your blog client, or other applications, to add a blog to the client or application. (その舞台裏では、透かし検出器がドラッグ−ドロップされた写真から透かし識別子を読み取る。透かし識別子は、オンラインブログ(又は会話)へリンクするために使用される。例えば、識別子を使用して、ブログのファイル記憶位置、又はブログを投稿するネットワーク位置(例えば、URL)を特定する。ブログが取得されるか、又はその位置へダウンロードされる。他の場合には、ブログ全体をダウンロードするのではなく、ブログへのリンクがアプリケーション又はクライアントに記憶される。 (Behind the scenes, the watermark detector drag -.. Reading watermark identifiers from the drop photographic watermark identifier is used to link to the online blog (or speech) for example, using the identifier, blog file storage location, or network location to post a blog (e.g., URL) or identify. blog is obtained, or are being. otherwise downloaded to that location, rather than downloading the entire blog , a link to the blog is stored in the application or client.

ブログの開始について考える。 Think about the start of the blog. ユーザは、ブログサイトへ画像をアップロードしてブログをスタートし、第1のエントリーを書き込む。 The user, start a blog and upload images to a blog site, write the first entry. このサイトは、画像に識別子を用いて自動的に透かしを入れ、写真をブログにリンクする(又はそれを既存のブログに追加する)。 This site is automatically put a watermark, (to add or it to the existing blog) to link photos to your blog using the identifier to the image. ブログが生成された状態で、ユーザは、(任意に)右クリックし、例えば、画像(及びブログ)を友人へ送信する。 In a state where the blog is created, the user may (optionally) Right-click, for example, transmits an image (and blog) to a friend. 透かし入りフォトを含むeメールは、友人を招いて応答させる。 e-mail, including the watermarked photo, to respond invited friends. 友人は、透かし識別子を通してオリジナルブログへとリンクされる。 Friend, is linked to the original blog through the watermark identifier.

この機能は、デスクトップサーチツールと共に組み込むことができる。 This feature can be incorporated along with the desktop search tool.

デスクトップサーチツールが透かし入り画像に気付くと、その画像は、例えば、透かしに関連したオンラインブログサイトに問合せするか、又は透かしペイロードに保持された「ブログビット」を評価することによって、関連ブログがあるかどうか調べるためにチェックされる。 When the desktop search tool is aware of the watermarked image, the image is, for example, by evaluating whether to contact the online blog site associated with the watermark, or held in the watermark payload to "blog bit", there is a related blog It is checked to determine whether. (透かしペイロードは、多数のフィールドを含むことができ、それらの一つは、特定のブログサイトを特定するか又はそこにリンクする。) デスクトップサーチツール(又はフォトショップ、ウェブブラウザ等を含むフォト取り扱いソフトウェア)は、ユーザ指示を提供することが好ましい(例えば、「ゴー・ツー・ブログ(go to blog)」リンクが現れる)。 (Watermark payload can include a number of fields, one of them, to link a specific blog site or there is specific.) Desktop Search tool (or photo shop, photo handling, including a web browser, etc. software), it is preferable to provide a user instruction (for example, "Go-to-blog (go to blog)" link will appear). ビューアは、透かし識別子を介してブログを読むようにナビゲートすることができる。 Viewer, it is possible to navigate to read the blog via the watermark identifier. 画像は、ブログスレッドにリンクされるか、又は「ブックマーク」される。 Image is either linked to the blog thread, or is "bookmark".

透かしリーダー又はデスクトップサーチツールは、右クリック特徴を有し、当該特徴によって、ブログ可能な画像のブログエントリーへの追加を可能にする(透かしにより決定される特徴)。 Watermark reader or desktop search tool has a right-click feature, by the feature, allowing the addition of a blog can image blog entry (features to be determined by the watermark). このようにして、画像は、ホームコンピュータ又は携帯電話における如何なる場所にも現われ、ブログスレッドを読み取ったり又はそこに追加したりするためのブログへのゲートウェイとして働く。 In this manner, the image can appear in any location in the home computer or a mobile phone acts as a gateway to the blog to add a read or or there blog thread.

ブログと画像との基本的な関連付けは、例えば、写真がフォトレポジトリー又はオンラインサイトに登録されるときに行うことができる。 Basic association with blogs and image, for example, can be performed when the photograph is registered in the photo repository or online site. 写真を登録するか、又は写真に透かしを入れる動作が、ブログを生成することを可能とし、時間と共に、より一般的な仲介を、登録されている任意のブログに提供することを可能とする。 Either register a photo, or acts watermarking photographs, make it possible to produce a blog, with time, making it possible to provide a more general mediation, in any blog registered. いかなる画像も「ブログ可能」である。 Any image is also "blog possible". 時間と共に、写真家は、マーケッティング又は通信の方法としてそれらのコレクションに関するブログを生成することができる。 Over time, the photographer, it is possible to generate a blog about their collection as a marketing or communication methods. 友人やクライアントと対話する手段として、プライベートな(例えば、パスワード又はバイオメトリック保護の)ブログを想像することができる。 As a means to interact with friends and clients, it is possible to imagine the private (for example, a password or biometric protection) blog.

透かしは、印刷に耐え得ることが好ましく、このようにして、印刷された画像と(写真)ブログとの間に関係が生成される。 Watermark is preferably capable of withstanding the printing, in this way, the relationship is created between the printed image and (photograph) blog. (ある実施の形態では、画像が印刷されるまでブログが生成されない。しかし、いずれの場合にも、透かし処理は、透かし処理ステップを通過する印刷に能力を加えて、独特のアイデンティティを与える。) (In some embodiments, a blog is not generated until the image is printed. However, in either case, the watermark processing, added the ability to print to pass the watermarking step, providing a unique identity.)

実際のアプリケーションとして、ウェブベースのユーザインタフェイスが生成される。 As a practical application, web-based user interface is generated. ユーザは、透かし入り写真(又は単にその写真から抽出した透かし識別子)を、ウェブを介して、インタフェイスに与える。 The user watermarked photo (or simply watermark identifier extracted from the photograph), via a web, giving the interface. 写真を受け取ると、ウェブサイトは、当該写真から透かし識別子を抽出する。 Upon receipt of the photo, web site, to extract the watermark identifier from the photo. 透かし識別子は、それに関連した情報を検出するために、ベースベース(basebase)又はインデックスに提供される。 Watermark identifier, in order to detect the information related to it, is provided Bass (basebase) or index. 例えば、写真が、一つ以上のテキストベースのブログに最初に関連付けられていたものとする。 For example, photographs, and what was initially associated with one or more of text-based blog. ブログの現在位置が検出され、インタフェイスを通してユーザに提供される。 The current position of the blog is detected and provided to the user through the interface.

上記のブログ実施の形態の幾つかの可能性のある組み合せとして、次のものがある。 As a combination of several possibilities of the blog embodiment, there are following.

E1. E1. ブログをメディアに関連付ける方法であって、 A method to associate a blog to the media,
デジタル透かしを画像又はオーディオに埋め込むステップと、 A step of embedding a digital watermark in image or audio,
デジタル透かしの少なくとも一部分をネットワークホスト型ブログに関連付けるステップと、 Associating at least a portion of the digital watermark in the network hosted blog,
を備える方法。 The method comprises a.

E2. E2. E1の方法であって、透かしが複数のデータフィールドを備え、少なくとも一つのフィールドが、ブログがホストされるオンラインアドレスを含むか又はそれを指す、方法。 A E1 method, the watermark comprises a plurality of data fields, at least one field, blogs point it or including online addresses hosted method.

E3. E3. E1の方法であって、ブログがオンライン会話を含むような方法。 A E1 of the method, methods, such as blogs, including the online conversation.

E4. E4. オンラインブログをメディアに関連付ける方法であって、 A method to associate the online blog to the media,
メディアからデジタル透かしをデコードするステップと、 A step of decoding the digital watermark from the media,
透かしに関連したオンラインレポジトリーにアクセスするステップと、 The method comprising the steps of: access to the online repository associated with the watermark,
メディアに関連したブログにアクセスするステップと、 The method comprising the steps of: access to a blog associated with the media,
を備える方法。 The method comprises a.

<身分特定書類上の電子メモリに記憶された透かし画像> <Watermark image stored in the electronic memory of the identification specific documents>
本特許文書の譲受人は、身分特定書類をデジタル透かしで安全化することに向けた多数の特許出願を提出している。 The assignee of the present patent document is submitted a large number of patent applications directed to secure the identity specific documents in digital watermarking. それらの幾つかは、いわゆるスマートカード、例えば、電子メモリ及び/又は電子処理回路を含むドキュメントについて、構想を示し、開示している。 Some of them, so-called smart card, for example, an electronic memory and / or documents, including electronic processing circuit, shows the concept discloses. 例えば、米国特許第5,841,886号、第6,389,151号、第6,546,112号、第6,608,911号、特許出願公告第US2002−0009208A1号、及び第US2003−0178495A1号、米国特許出願第10/893,149号(US2005−0063027A1として公告された)、及び第10/686,495号(US2004−0181671A1として公告された)を参照されたい。 For example, U.S. Patent No. 5,841,886, No. 6,389,151, No. 6,546,112, No. 6,608,911, Patent Application Publication No. US2002-0009208A1, and the US2003-0178495A1 , U.S. (which is published as US2005-0063027A1) Patent application No. 10 / 893,149 No., and 10 / 686,495 No. (as published as US2004-0181671A1) see. 関連する実施の形態及び改良について、以下に説明する。 For related embodiments and modifications will be described below.

図8を参照する。 Referring to FIG. 8. 身分特定書類の電子メモリ回路に記憶されている画像に、デジタル透かしを埋め込む。 The image stored in the electronic memory circuit identification certain documents, embedding a digital watermark. 画像は、書類の許可された所持者に対応することが好ましい。 Image preferably corresponds to the authorized holder of the document. 例えば、図8に示すドキュメント400は、パスポートブック、ビザ、運転免許証、等の身分特定書類を表わしている。 For example, the document 400 shown in FIG. 8, a passport book, visas, represents a driver's license, the identity specific documents like. ドキュメント400は、当該ドキュメント400の許可された所持者の写真表示410(「印刷画像」とも称される)と、ドキュメントの表面上の印刷物420と、集積回路(例えば、チップ)430とを備えている。 Document 400, includes a authorized holder of photographic representation 410 of the document 400 (also referred to as "print image"), and the printed matter 420 on the surface of the document, an integrated circuit (e.g., chip) and 430 there. チップ430は、電子メモリ及び処理回路の両方を備えることができる。 Chip 430 may comprise both electronic memory and processing circuitry. チップ430は、受動的(例えば、内部電源なし)であってもよく、又は能動的(例えば、それ自身の電源を含む)であってもよい。 Chip 430, passive (e.g., No internal power source) may be, or active (e.g., it includes its own power) may be used. チップは、非接触のものであることが好ましいが、ドキュメント400は、接触型のチップであってもよい。 Chip, it is preferable that a non-contact, document 400 may be a contact type chip. 例えば、ISO規格14443及び7816−4に合致するような適切なチップが知られている。 For example, a suitable chip so as to conform to ISO standards 14443 and 7816-4 are known.

一実施の形態では、集積回路430に画像が記憶される。 In one embodiment, the image is stored in the integrated circuit 430. この画像は、メモリスペースを節約する上で助けとなるように、例えば、JPEGファイルのように圧縮されることが好ましい。 This image, To assist in order to save memory space, for example, is preferably compressed as JPEG files. 記憶された画像は、印刷画像410、又は印刷画像410の縮小ビット表示に対応することが好ましい。 Stored image preferably corresponds to the reduced bit representation of the printed image 410, or the printed image 410. この画像には、デジタル透かしが埋め込まれる。 This image, digital watermark is embedded.

デジタル透かしは、ドキュメント、集積回路及び/又は許可されたドキュメント所持者に対応する情報と、相互に関係付けられていることが好ましい。 Digital watermark document, the information corresponding to the integrated circuit and / or authorized document holder, you are preferable that the interrelated.

例えば、チップ430は、チップのスタティックメモリに記憶されたシリアル番号(例えば、96ビット)を有していてもよい。 For example, the chip 430, the serial number stored in the static memory chips (e.g., 96 bits) may have. このシリアル番号、又はシリアル番号のハッシュ(例えば、縮小ビット表示)は、デジタル透かしメッセージコンポーネントとして使用される。 The hash of the serial number, or serial number (e.g., reduced bit representation) is used as a digital watermark message components. ハッシュ又はシリアル番号は、チップ430に記憶された写真画像に埋め込まれる。 Hash or serial number is embedded in the photographic image stored in the chip 430.

シリアル番号は、テーブル1に示すようなドキュメント番号、即ち以下の透かしメッセージと結合することができる。 The serial number can be combined with document number, i.e. below the watermark message as shown in Table 1.

合成されたメッセージは、記憶された画像にステガノグラフィー式に埋め込まれる。 Synthesized message is embedded in Steganography expression stored images. 従って、チップ及びドキュメントは、デジタル透かしを介して結合される。 Therefore, chips and the document are coupled via a digital watermark. チップが交換されるか、別のドキュメントへ移動されるか、又は模倣された場合には、チップ430に記憶された画像に埋め込まれていなければならないシリアル番号又はドキュメント番号を検証することによって、変化を特定することができる。 A chip is replaced, or moved to another document, or if it is imitated by verifying the serial number or document number that must be embedded in the image stored in the chip 430, changes it is possible to identify. 同様に、印刷画像410が変更、又は交換された場合にも、そこに埋め込まれた必要な透かしメッセージ(例えば、チップシリアル番号)を含まないであろう。 Similarly, it changes the print image 410, or when it is replaced is also required watermark message embedded therein (e.g., a chip serial number) will not contain.

ドキュメントの検証は、自動的に行うことができる。 Verification of documents, can be performed automatically. 例えば、シリアル番号がスタティックメモリから読み取られ(例えば、スマートカードリーダーを介して)、透かし入り画像が同様に検索され、デコードされる。 For example, the serial number is read from the static memory (e.g., via a smart card reader), watermarked image is searched in the same manner and decoded. シリアル番号及び透かしメッセージを比較して、それらが予想した通りに対応するかどうかを調べる。 Comparing the serial number and the watermark message to see if they correspond to the as expected. ドキュメント番号が透かしメッセージコンポーネントとして使用されている場合には、それも比較のために入力できる(例えば、OCR−Bテキストの読み取り、バーコード、磁気ストリップ又は手動入力を介して)。 If the document number is used as a watermark message component, it can also be input for comparison (e.g., reading of the OCR-B text, bar codes, via a magnetic strip or manual input).

ドキュメント番号又はシリアル番号に代えて、印刷、バーコード、磁気ストリップ、等に保持された他のテキスト又はメッセージを、透かしメッセージコンポーネントとして使用することが可能である。 Instead of the document number or serial number, printing, bar code, magnetic strip, the other text or messages held in equal, it is possible to use as a watermark message components.

図8に戻る。 Returning to FIG. 8. 印刷画像410には、例えば、デジタル透かしの形態のデータをステガノグラフィー式に埋め込むことができる。 The printed image 410, for example, can be embedded data of the digital watermark form steganography expression. デジタル透かしは、チップ430に保持された情報と相互に関係付けられていることが好ましい。 Digital watermarks are preferably interrelated information held by the chip 430. 例えば、印刷画像410に埋め込まれた透かしは、チップシリアル番号又はそのハッシュを含んでいてもよい。 For example, the watermark embedded in the printed image 410 may include a chip serial number or hash thereof. チップ430のメモリ容量に限度があって、記憶画像を含まないがシリアル番号は含むようなケースでは、印刷画像410の透かしは、チップとドキュメントとの間のリンクを与える。 There is a limit to the memory capacity of the chip 430, but does not include the stored image in the case that the serial number include the watermark of the printed image 410 provides a link between the chip and the document.

更に別の実施の形態では、印刷画像410の第1の透かしが、チップ430の記憶画像に埋め込まれた第2の透かしにリンクされる。 In yet another embodiment, the first watermark of the printed image 410 is linked to the second watermark embedded in a storage image of the chip 430. このリンクは、多数の異なる方法で達成可能である。 This link can be achieved in a number of different ways. 例えば、各透かしは、情報、例えば、シリアル番号、ドキュメント番号、或いはドキュメントに印刷されるか又は保持された情報(例えば、バーコード)を、冗長に含む。 For example, each watermark information, for example, a serial number, document number, or whether or retained information is printed on the document (e.g., bar code), and redundantly contains. 別の実施例では、第1のデジタル透かしは、第2のデジタル透かしをデコード又は解読するためのキーを含む(又はその逆のことも言える)。 In another embodiment, the first digital watermark, (it can be said or vice versa) a key for decoding or decrypting the second digital watermark. 更に別の実施例では、第1のメッセージ部分が第1のデジタル透かしによって伝えられ、第2のメッセージ部分が第2のデジタル透かしによって伝えられる。 In yet another embodiment, the first message portion is transmitted by the first digital watermark, the second message portion is transmitted by the second digital watermark. 身分特定書類400を適切に認証するには、二つのメッセージ部分を連結することが必要とされる。 To properly authenticate the identity specific document 400, it is required to connect the two message part. 別の実施例は、身分特定書類のどこかに印刷された第3のデジタル透かしを含む(例えば、バックグランドパターン、グラフィック、ゴースト画像、シール、等で)。 Another embodiment includes a third digital watermarks printed somewhere identification certain documents (e.g., background pattern, graphic, ghost images, sealed, in, etc.). 三つのデジタル透かしの全てが、認証のためにリンクされるか、又は相互に関係付けられる。 All three digital watermark, or are linked for authentication, or are related to each other.

更に別の実施の形態では、写真画像ではなく、異なるバイオメトリック画像又はテンプレートがチップに記憶される。 In yet another embodiment, rather than the photographic image, different biometric image or template is stored in the chip. 例えば、バイオメトリックは、指紋画像又は網膜スキャンを含んでもよい。 For example, the biometric may include a fingerprint image or retinal scan. このようなバイオメトリックは、上述したように、透かしを入れてドキュメントにリンクすることができる。 Such a biometric, as described above, it is possible to link to a document put a watermark.

ドキュメントを形成するためのワークフローの例を、図9A及び9Bに示す。 An example of a workflow for forming a document, shown in FIGS. 9A and 9B. 身分特定書類(例えば、パスポート)の申請者は、申請書を埋めて、写真を用意する(ステップ500)。 Identification specific documents (for example, passport) of the applicant, fill in the application form, to provide a photo (step 500). 申請書は、処理機関へ提出され(例えば、州の当局、ステップ510)、当該機関が申請書を処理する(ステップ520)。 Application is submitted to the processing engine (e.g., state authorities, step 510), the engine processes the application (step 520). もちろん、申請書は、郵送されてもよいし又は電子的に提出されてもよい。 Of course, the application form may be submitted may be mailed or electronically. 申請処理は、バックグランドチェックを含んでいてもよく、当該チェックとして、申請者が身分特定書類を詐欺的に取得しようと試みているのではないことを保証するためにデータベースをチェックしてもよい。 Application process may also include a background check, as the check, the applicant may check the database to ensure that no than attempting to fraudulently acquire the status specific documents . 申請が承認された場合には、申請者に対して書類が生成される。 If the application is approved, the document against the applicant is generated. パスポートの場合には、ブランク「ブック」が得られる。 In the case of passports, blank "book" is obtained. このブランクブックは、ブック(以下、「ドキュメント」)番号を含む。 This blank book, book (hereinafter referred to as "documents"), including the number. この書類番号は、申請者又は申請者のファイルとマッチングされる(ステップ530)。 The document number is the file matched the applicant or applicant (step 530). ほとんどの場合に、ブックには、チップが既に固定(又は一体化)されている。 In most cases, a book, the chip has already been fixed (or integrated). そうでなければ、その後の段階でチップをドキュメントに取り付け又は一体化することができる。 Otherwise, it can be attached or integrated chips in the document at a later stage. ドキュメントは、申請者を特定するように個人化される(ステップ540)。 Document is personalized to identify the applicant (step 540). 例えば、ドキュメントには、可変情報(例えば、名前、住所、性別、目の色、誕生日、等)が印刷される。 For example, in the document, the variable information (for example, name, address, gender, eye color, birth date, etc.) is printed. 又、この可変情報又はその一部分がバーコードとして記憶されるか、或いは磁気ストリップ又はチップに記憶される。 Also, if this variable information or a portion thereof is stored as a bar code, or stored in the magnetic strip or chip. 又、写真表示もドキュメントに印刷され(又は取り付けられ)、チップに記憶される。 Moreover, picture display is also printed on the document (or attached), is stored in the chip.

図9Bを参照する。 Referring to FIG. 9B. 申請者を表わすデジタル画像が透かし埋め込み装置に与えられる。 Digital image representing the applicant is given to the watermark embedding device. (申請者が物理的な画像を用意した場合には、その画像が光学的にスキャンされ、デジタル表示が透かし埋め込み装置に与えられる。)メッセージ(例えば、スタティックメモリから読み取られたチップシリアル番号又はドキュメント番号、等)が埋め込み装置へ入力される。 (If the applicant has prepared a physical image, the image is optically scanned, the digital display can be provided to the watermark embedding device.) Message (e.g., a chip serial number or document read from static memory number, etc.) is input to the embedded device. 透かし埋め込み装置は、デジタル画像のコピーに所望のメッセージを埋め込む。 Watermark embedding device embeds the desired message on a copy of the digital image. 埋め込み処理されたデジタル画像は、圧縮されて、チップに記憶される。 Embedding digital image is compressed and stored in the chip. 必要に応じて、第2のメッセージをデジタル画像の別のコピーに埋め込み、次いで、書類の表面に印刷することができる。 If necessary, embedding a second message to another copy of the digital image can then be printed on the surface of the document. (もちろん、ある実施の形態では、同じメッセージを含む同じ埋め込み画像が、ドキュメントに印刷され且つオンチップに記憶される。) (Of course, in some embodiments, the same embedded images including the same message is printed on the document is and on-chip memory.)

図9Aに戻る。 Back in Figure 9A. 書類形成プロセスは、書類を検査する品質保証ステップ550を任意に含む。 Documents forming process includes quality assurance step 550 of inspecting documents arbitrarily. 例えば、マシン読み取り可能な特徴(例えば、OCR、バーコード、磁気ストリップ、デジタル透かし、光学メモリ、電子チップ記憶)が読み取られ、そしてそれらが予想情報に一致するかどうかを調べるために検査される。 For example, a machine-readable feature (for example, OCR, bar code, magnetic strip, a digital watermark, optical memory, electronic chip memory) is read, and they are checked to see if it matches the prediction information. 相互相関関係(例えば、第1及び第2のデジタル透かし間の)をテストすることもできる。 Cross correlation (e.g., between the first and second digital watermarks) can be tested. また、品質保証オペレータがドキュメントを目視検査してもよい。 In addition, quality assurance operator may visually inspect the document.

このセクションに基づく幾つかの可能性のある組み合せとして、以下のものがある(これに限定されない)。 As a combination of several possibilities based on this section, there are (but not limited to) the following.

F1. F1. 電子メモリチップであって、当該電子メモリチップ内にシリアル番号が記憶されており、当該シリアル番号は、電子メモリチップを一意に特定し、更に、電子メモリチップが、身分特定書類の許可された所持者を表わすデジタル画像を含み、又、デジタル画像には、第1のデジタル透かしが埋め込まれており、更に、第1のデジタル透かしがシリアル番号の表示を含む、当該電子メモリチップと、 An electronic memory chips, possession are serial numbers in the electronic memory chip memory, the serial number, uniquely identifying the electronic memory chip, further, electronic memory chips, allowed identification specific documents includes a digital image representing a person, also the digital image, a first digital watermark is embedded, further, the first digital watermark includes a display of the serial number, and the electronic memory chip,
名前及び身分特定書類番号の少なくとも一方を含むテキストが印刷された第1の表面エリアと、 A first surface area that text including at least one of name and identity specific documents number is printed,
身分特定書類の許可された所持者の表示を含む写真画像が印刷された第2の表面エリアと、 And a second surface area which the photographic image is printed, including an indication of the authorized holder of the identity specific documents,
を備える身分特定書類。 Identification specific documents with a.

F2. F2. F1の身分特定書類であって、第1のデジタル透かしがシリアル番号の縮小ビット表示を含む、身分特定書類。 A Identification particular document F1, the first digital watermark includes a reduced bit representation of a serial number, identification specific documents.

F3. F3. F2の身分特定書類であって、第1のデジタル透かしが身分特定書類番号の表示を更に含む、身分特定書類。 A F2 Identification certain documents, the first digital watermark further comprises a display identification specific document number, identification specific documents.

F4. F4. F1の身分特定書類であって、第2の表面エリアに印刷された写真画像が第2のデジタル透かしを含む、身分特定書類。 A Identification particular document F1, photographic image printed on the second surface area comprises a second digital watermark, Identification certain documents.

F5. F5. F4の身分特定書類であって、第1のデジタル透かし及び第2のデジタル透かしが相互依存している、身分特定書類。 A Identification particular documents F4, the first digital watermark and a second digital watermark is interdependent, Identification certain documents.

F6. F6. F5の身分特定書類であって、第2のデジタル透かしが、第1のデジタル透かしをデコード又は解読するためのキーを含む、身分特定書類。 A Identification particular documents F5, the second digital watermark includes a key for decoding or decrypting the first digital watermark identification specific documents.

F7. F7. F5の身分特定書類であって、第1のデジタル透かしが、第2のデジタル透かしをデコード又は解読するためのキーを含む、身分特定書類。 A Identification particular documents F5, the first digital watermark includes a key for decoding or decrypting the second digital watermark, Identification certain documents.

F8. F8. F4の身分特定書類であって、第1のデジタル透かし及び第2のデジタル透かしが互いに冗長であるか又は相関した情報を含む、身分特定書類。 A Identification particular documents F4, including information first digital watermark and a second digital watermark is or correlation is redundant to each other, identification specific documents.

F9. F9. F1−F8のいずれか一つの身分特定書類であって、運転免許証及びパスポートの少なくとも一つを含む、身分特定書類。 It is any one of the identification particular document F1-F8, comprising at least one driver's license and passport, identity specific documents.

F10. F10. F4の身分特定書類であって、第3のデジタル透かしを含む第3の表面エリアを含む、身分特定書類。 A Identification particular documents F4, including a third surface area, including the third digital watermark identification specific documents.

F11. F11. F1−F10のいずれか一つの身分特定書類であって、デジタル画像が電子メモリチップにおいて圧縮形態をとっている、身分特定書類。 Be any one of the identification particular document F1-F10, the digital image is taking compressed form in the electronic memory chip, identification specific documents.

F12. F12. F1−F11のいずれか一つの身分特定書類であって、電子メモリチップが電子処理回路を含む、身分特定書類。 Be any one of the identification particular document F1-F11, electronic memory chip comprises an electronic processing circuit, Identification certain documents.

G1. G1. 電子メモリチップであって、当該電子メモリチップにはシリアル番号が記憶されており、当該シリアル番号は、電子メモリチップを一意に特定し、当該電子メモリチップにはデジタル画像が更に記憶されており、当該デジタル画像には第1のデジタル透かしが埋め込まれている、当該電子メモリチップと、 An electronic memory chip, to the electronic memory chip is serial number storage, the serial number, uniquely identifying the electronic memory chips, digital images to the electronic memory chip is further stored, in the digital image are embedded first digital watermark, and the electronic memory chip,
名前及び身分特定書類番号の少なくとも一方を含むテキストが印刷された第1の表面エリアと、 A first surface area that text including at least one of name and identity specific documents number is printed,
印刷画像又はグラフィックを含む第2の表面エリアであって、印刷画像又はグラフィックには第2のデジタル透かしが埋め込まれており、更に、第1のデジタル透かし及び第2のデジタル透かしは身分特定書類を認証するために相互に関係付けられている、第2の表面エリアと、 A second surface area, including printed images or graphics, the printed image or graphics is embedded a second digital watermark, further, the first digital watermark and second digital watermarks the identity specific documents are interrelated to authenticate, and a second surface area,
を備える身分特定書類。 Identification specific documents with a.

G2. G2. G1の身分特定書類であって、第1のデジタル透かし及び第2のデジタル透かしが、冗長な情報又は相関情報を含ませることによって、相互に関係付けられている身分特定書類。 A Identification particular documents G1, by the first digital watermark and a second digital watermark, to include redundant information or correlation information, identification specific documents associated with each other.

G3. G3. G2の身分特定書類であって、上記情報が少なくともシリアル番号の表示を含む、身分特定書類。 A Identification particular document G2, the information includes an indication of at least the serial number, identification specific documents.

G4. G4. G3の身分特定書類であって、上記情報が少なくともドキュメント番号の表示を更に含む、身分特定書類。 A Identification particular document G3, the information further includes an indication of at least the document number, identification specific documents.

G5. G5. G1の身分特定書類であって、第1のデジタル透かし及び第2のデジタル透かしがデコード又は解読キーを介して相互に関係付けられている、身分特定書類。 A Identification particular documents G1, the first digital watermark and a second digital watermark is interrelated through a decoding or decryption key, identification specific documents.

G6. G6. G1の身分特定書類であって、デジタル画像が身分特定書類の許可された所持者のバイオメトリックを含む、身分特定書類。 A Identification particular documents G1, including digital image the authorized holder of the biometric identification certain documents, identity specific documents.

上記セクションの更に別の実施の形態は、以下の通りである。 Yet another embodiment of the section is as follows. もちろん、これらは、唯一の可能性のある組み合せではなく、単なる一例に過ぎない。 Of course, these are not the combination of only possibility is merely an example.

H1. H1. デスクトップサーチツールを制御する方法であって、 A method for controlling a desktop search tool,
画像又はオーディオファイルを一つ以上のコンピュータディレクトリにおいてサーチするステップと、 A step of searching in one or more computers directory pictures or audio files,
画像又はオーディオファイルが発見されたときに、埋め込まれたデジタル透かしについてそのファイルを分析し、デジタル透かしが埋め込まれている場合には、デジタル透かしに保持された複数ビットの識別子を復元するステップと、 When the image or audio file is found, analyzing the file for the embedded digital watermark, when the digital watermark is embedded, and restoring a plurality of bits of the identifier held in the digital watermark,
画像又はオーディオファイルからメタデータを得るステップと、 And obtaining metadata from the image or audio file,
複数ビットの識別子を用いてリモートデータベースに問合せを行って、ファイルメタデータが最新のものであるか否かを決定するステップと、 A step of performing a query to a remote database, file metadata to determine whether or not the latest with a plurality of bits of the identifier,
を備える方法。 The method comprises a.

H2. H2. H1の方法であって、ファイルメタデータが最新のものでないときに、リモートデータベースからのメタデータでファイルメタデータをリフレッシュするステップを更に備える方法。 A H1 of the method, a method of file metadata when not current, further comprising the step of refreshing the file metadata in the metadata from the remote database.

H3. H3. H2の方法であって、タイムスタンプ又は最後に編集されたフィールドを使用して、ファイルメタデータが最新のものであるか否かを決定する方法。 A H2 of method, using the fields that are edited in the time stamp or last file how metadata to determine whether or not the latest.

H4. H4. H1の方法であって、ファイルがリモートデータベースに記憶されていないときに、画像又はオーディオファイルをアップロードするステップを更に備える方法。 A H1 of the method, when the file is not stored in the remote database, further comprising the method the step of uploading an image or audio file.

I1. I1. 透かし入りコンテンツをネットワークにおいてサーチする方法であって、 A method of searching in a network the watermarked content,
透かし入りコンテンツに関連した一つ以上のキーワードを受け取るステップと、 And receiving one or more keywords associated with watermarked content,
一つ以上のキーワードをネットワークサーチエンジンへ与えるステップと、 And the step of providing one or more of the keyword to the network search engine,
一つ以上のキーワードに関連したURLのリストをネットワークサーチエンジンから得るステップと、 Obtaining a list of URL related to one or more keywords from the network search engine,
デジタル透かしに関して、URLに関連したウェブサイトでコンテンツを分析するステップと、 With respect to the digital watermark, and the step of analyzing the content on the web site associated with the URL,
デジタル透かしから少なくとも一つの透かし識別子を得るステップと、 And obtaining at least one watermark identifier from a digital watermark,
少なくとも一つの透かし識別子及びそれに対応するURL位置を報告するステップと、 A step of reporting at least one watermark identifier and the corresponding URL location,
を備えた方法。 Method with.

I2. I2. I1の方法であって、透かし識別子及びURL位置をリモートサーバーへ報告する方法。 A I1 of the way, how to report a watermark identifier and the URL location to a remote server.

I3. I3. I1の方法であって、透かし識別子及びURL位置を、透かし識別子に関連した著作権所有者へ直接報告する方法。 A I1 of the way, how to report directly to the watermark identifier and URL position, to the copyright owner associated with the watermark identifier.

I4. I4. I1の方法であって、一つ以上のキーワードが透かし識別子を含む、方法。 A I1 method, one or more keywords include a watermark identifier, the method.

J1. J1. 透かし入りコンテンツをネットワークにおいてサーチする方法であって、 A method of searching in a network the watermarked content,
透かし入りコンテンツが記憶されているネットワークリソースに関連したネットワークトラフィックパターンを監視するステップと、 A step of monitoring the network traffic patterns associated with network resources watermarked content is stored,
透かし入りコンテンツのサーチにおいてトラフィックパターンの方向に透かしリーダーを向けるステップと、 Comprising the steps of directing a watermark reader in the direction of the traffic patterns in the search of the watermarked content,
を備える方法。 The method comprises a.

K1. K1. サーチエンジンによりコンテンツをカテゴリー分けする方法であって、 A method for categorizing the content by the search engine,
ウェブサイトに関連したメタデータであって、デジタル透かしの存在を反映するメタデータを検査するステップと、 A meta-data associated with the web site, the steps of checking the metadata to reflect the presence of a digital watermark,
ウェブサイトに関連したデジタル透かしインジケータの存在を提供するステップであって、デジタル透かしインジケータの存在がサーチエンジンを介してサーチ可能である、ステップと、 The method comprising: providing a presence of a digital watermark indicator associated with the web site, the presence of a digital watermark indicator is searchable via search engine, comprising the steps,
を備える方法。 The method comprises a.

L1. L1. 装置サーチ方法であって、 A device search method,
i. i. 画像又はオーディオファイルを一以上の装置のディレクトリにおいてサーチするステップと、 A step of searching in the directory of one or more devices to image or audio file,
ii. ii. 画像又はオーディオファイルが発見されたときに、埋め込まれたデジタル透かしについてそのファイルを分析し、デジタル透かしが埋め込まれている場合には、当該ファイルから透かし情報を復元するステップと、 When the image or audio file is found, if the embedded digital watermark analyze the file, the digital watermark is embedded, and restoring the watermark information from the file,
iii. iii. 画像又はオーディオファイルからメタデータを得るステップと、 And obtaining metadata from the image or audio file,
iv. iv. 透かし情報の少なくともある部分干及びメタデータの少なくともある部分を含む第1のファイルを生成するステップと、 Generating a first file including at least some portion interference and at least some portion of the metadata of the watermark information,
v. v. 第1のファイルから第2のファイルを生成するステップであって、第2のファイルは、透かし情報の少なくともある部分及びメタデータの少なくともある部分を含み、更に、第2のファイルの生成によって、装置のサーチツールによる第2のファイルのインデックシングをトリガーする、ステップと、 From the first file and generating a second file, the second file includes at least some portion, and at least some portion of the metadata of the watermark information, further, the generation of the second file, device to trigger the indexing of the second file by the search tool, and the step,
を備える方法。 The method comprises a.

L2. L2. L1の方法であって、第1のファイルがXMLを含み、第2のファイルがHTMLを含む方法。 A L1 of the method, the first file comprises XML, how the second file that contains the HTML.

L3. L3. L1の方法であって、装置が、携帯電話、ポータブル音楽プレーヤ、ゲームコンソール、及びコンピュータの少なくとも一つを含む、方法。 A L1 methods, devices, including mobile phones, portable music players, game consoles, and at least one computer, the method.

L4. L4. L1の方法であって、上記の生成が少なくともスタイルシートを使用する、方法。 A L1 method, said generator uses at least stylesheet method.

<結論考察> <Conclusion Discussion>
特定の実施の形態を参照して、本技術の原理を図示して説明したが、この技術は、多数の他の異なる形態で実施できることが認識されよう。 With reference to specific embodiments have been illustrated and described the principles of the present technology, this technology will recognize that can be implemented in many other different forms.

上述した方法、プロセス、要素、モジュール、フィルタ、及びシステムは、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアの組み合せで実施することができる。 Method described above, the process, components, modules, filters, and systems may be implemented in hardware, software, or a combination of hardware and software. 例えば、透かしデータエンコードプロセスは、プログラム可能なコンピュータ又は特殊目的のデジタル回路で実施することができる。 For example, the watermark data encoding process can be implemented by a digital circuit of a programmable computer or a special purpose. 同様に、透かしデータのデコーディングは、ソフトウェア、ファームウェア、ハードウェア、或いはそれらソフトウェア、ファームウェア及びハードウェアの組み合せで実施することができる。 Similarly, the decoding of the watermark data can be implemented in software, firmware, hardware, or a combination thereof software, firmware and hardware.

上述した方法、要素及びプロセス(例えば、デスクトップサーチツール、並びにメタデータ発生及び収集ツール)は、システムのメモリ(例えば、電子、光学又は磁気記憶装置のようなコンピュータ読み取り可能な媒体)から実行されるソフトウェアプログラム(例えば、C、C++、ビジュアル・ベーシック、Java、Python、Tcl、Perl、Scheme、Ruby、実行可能なバイナリーファイル、等)で実施することができる。 Method described above, the elements and processes (e.g., desktop search tool, and the meta-data generating and collecting tool), is executed from the memory of the system (e.g., electronic, computer readable media such as optical or magnetic storage device) software programs (e.g., C, C ++, Visual basic, Java, Python, Tcl, Perl, Scheme, Ruby, executable binary files, etc.) can be carried out in.

セクションの見出しは、読者の便宜のために設けたものである。 The section headings are those provided for the convenience of the reader. 一つの見出しのもとで見つかった特徴は、別の見出しのもとで見つかった特徴と組み合わせることができる。 Features found under one heading may be combined with features found under different headings. 種々の実施例の組み合せ(例えば、C1、D1、等)は、一例として与えられたものに過ぎない。 Combinations of the various embodiments (e.g., C1, D1, etc.) are merely given as an example. もちろん、上記の詳細な開示を考慮すると、他の多数の組み合せも考えられる。 Of course, in light of the detailed disclosure above, numerous other combinations are also contemplated.

「デスクトップ」という語の使用は、これに限定されるものと解釈されるべきでない。 The use of the word "desktop" should not be construed as being limited thereto. 実際に、本発明の「デスクトップ」サーチモジュール、並びに本発明のメタデータ発生及び収集方法は、ラップトップ、ハンドヘルドコンピューティング装置、パーソナル(又はデジタル)ビデオレコーダー(例えば、シンクTiVo)、携帯電話、等に使用することができる。 Indeed, "desktop" search module, as well as meta-data generating and collecting method of the invention of the present invention may be a laptop, a handheld computing device, a personal (or digital) video recorder (e.g., a sink TiVo), mobile phones, etc. it can be used for. 本発明では、本発明のメタデータインデックス又はサーチツールを、MP3プレーヤ、iPods、TiVo装置、ゲームコンソール(例えば、XBox)、等の消費者向け電子装置に記憶することもできる。 In the present invention, the metadata index or search tool of the present invention, MP3 players, iPods, TiVo device, game console (e.g., XBox), can also be stored in the consumer electronic device and the like. このような装置間の通信は、無線であっても、有線であってもよい。 Communication between such devices may be a wireless, it may be wired.

上述の詳細な実施の形態における要素及び特徴の特定の組み合せは、単なる例示に過ぎず、これらの教示は、本書及び上記で引用した特許文献における他の教示と交換及び置き換え可能である。 Elements and specific features combined in detailed embodiments described above are merely illustrative, these teachings can be substituted for exchange and with other teachings in patents cited herein and above.

ネットワークサーチを改善するためのシステムを示す図である。 It illustrates a system for improving network search. デスクトップサーチツールを示す図である。 It is a diagram showing a desktop search tool. 図2のデスクトップサーチツールと通信するメタデータレポジトリーを示す図である。 It is a diagram illustrating a metadata repository that communicate with the desktop search tool of FIG. 個人のメタデータプロフィールの画像への関連付けを示す図である。 It is a diagram illustrating the association of the individual metadata profile image. 自動的に収集又は生成されたメタデータを選択するためのグラフィックユーザインタフェイスを示す図である。 It is a diagram illustrating a graphical user interface for selecting automatically collected or generated metadata. ユーザのデスクトップにおけるメタデータオーサリングツールを示す図である。 It is a diagram illustrating a metadata authoring tool in a user's desktop. 本発明の別の側面に基づくデスクトップインデックス付け方法を示すフローチャートである。 It is a flowchart showing a desktop indexing method according to another aspect of the present invention. 電子メモリを含む身分特定書類を示す図である。 Is a diagram showing an identification specific documents, including electronic memory. 身分特定書類の発行プロセスを示す図である。 Is a diagram illustrating the process of issuing identity specific documents. 関連のデジタル透かしプロセスを示す図である。 Is a diagram showing the relationship of digital watermarking process.

Claims (3)

  1. 画像又はオーディオファイルを一つ以上のコンピュータディレクトリにおいてサーチするステップと、 A step of searching in one or more computers directory pictures or audio files,
    前記画像又はオーディオファイルが発見されたときに、埋め込まれたデジタル透かしについて前記画像又はオーディオファイルを分析し、デジタル透かしが埋め込まれている場合には、該デジタル透かしに保持された複数ビットの数値識別子を復元するステップであって、前記デジタル透かしは、前記画像又はオーディオファイルのデータサンプルを変更することにより埋め込まれている、該ステップと、 When the image or audio file is found, analyzing the image or audio file for the embedded digital watermark, when the digital watermark is embedded, multiple-bit numeric identifier stored in the digital watermark a step for restoring the digital watermark is embedded by changing the data samples of the image or audio file, and said step,
    前記画像又はオーディオファイルからファイルメタデータを得るステップと、 Obtaining a file metadata from the image or audio file,
    前記複数ビットの数値識別子を用いてリモートデータベースに問合せを行って、前記ファイルメタデータが最新のものであるか否かを決定するステップであって、前記複数ビットの数値識別子は、前記リモートデータベースによってインデックスとして使用され、該インデックスに関連付けられたメタデータを特定し、特定された該メタデータに関連付けられた情報が、前記ファイルメタデータが最新のものである否かを決定するために使用され、該情報はファイルインジケータ又はタイムスタンプを含む、該ステップと、 Said queries the remote database using a plurality of bits of numerical identifier, the method comprising the file metadata to determine whether or not the latest, numeric identifier of the plurality of bits, by said remote database is used as an index to identify metadata associated with the index, the information associated with the metadata specified, the file metadata is used to determine whether this is the latest version, the information includes a file indicator or timestamp, and said step,
    前記ファイルメタデータが前記特定されたメタデータより最新のものである場合に、前記ファイルメタデータを前記リモートデータベースに伝送するステップと、 If the file metadata is latest from metadata said identified transmitting said file metadata to the remote database,
    を備える方法。 The method comprises a.
  2. 前記ファイルメタデータが最新のものでないときに、前記リモートデータベースからのメタデータで前記ファイルメタデータをリフレッシュするステップを更に備える、請求項1に記載の方法。 Wherein when the file metadata is not up to date, further comprising the step of refreshing the file metadata in the metadata from the remote database, the method according to claim 1.
  3. 前記画像又はオーディオファイルが前記リモートデータベースに記憶されていないときに、 記画像又はオーディオファイルをアップロードするステップを更に備える、請求項1に記載の方法。 Wherein when the image or audio file is not stored in the remote database, further comprising the step of uploading the previous SL image or audio files The method of claim 1.
JP2007518107A 2004-06-22 2005-06-13 Digital asset management, desktop to use search that defines the target, and a digital watermark search Active JP5372369B2 (en)

Priority Applications (9)

Application Number Priority Date Filing Date Title
US58228004 true 2004-06-22 2004-06-22
US60/582,280 2004-06-22
US58291404 true 2004-06-24 2004-06-24
US60/582,914 2004-06-24
US65664205 true 2005-02-25 2005-02-25
US60/656,642 2005-02-25
US67302205 true 2005-04-19 2005-04-19
US60/673,022 2005-04-19
PCT/US2005/020790 WO2006009663A1 (en) 2004-06-22 2005-06-13 Digital asset management, targeted searching and desktop searching using digital watermarks

Publications (2)

Publication Number Publication Date
JP2008510327A true JP2008510327A (en) 2008-04-03
JP5372369B2 true JP5372369B2 (en) 2013-12-18

Family

ID=35785547

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2007518107A Active JP5372369B2 (en) 2004-06-22 2005-06-13 Digital asset management, desktop to use search that defines the target, and a digital watermark search
JP2010158011A Active JP5702555B2 (en) 2004-06-22 2010-07-12 Digital asset management, desktop to use search that defines the target, and a digital watermark search

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2010158011A Active JP5702555B2 (en) 2004-06-22 2010-07-12 Digital asset management, desktop to use search that defines the target, and a digital watermark search

Country Status (2)

Country Link
JP (2) JP5372369B2 (en)
WO (1) WO2006009663A1 (en)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7450734B2 (en) 2000-01-13 2008-11-11 Digimarc Corporation Digital asset management, targeted searching and desktop searching using digital watermarks
US8953908B2 (en) 2004-06-22 2015-02-10 Digimarc Corporation Metadata management and generation using perceptual features
US8570586B2 (en) 2005-05-02 2013-10-29 Digimarc Corporation Active images through digital watermarking
JP2008165424A (en) * 2006-12-27 2008-07-17 Sony Corp Image retrieval device and method, imaging device and program
JP4376933B2 (en) 2007-12-07 2009-12-02 日立ソフトウエアエンジニアリング株式会社 Print management system, and the print management method, and program
US8527486B2 (en) * 2008-06-27 2013-09-03 Kii, Inc. Mobile application discovery through mobile search
US8595503B2 (en) 2008-06-30 2013-11-26 Konica Minolta Laboratory U.S.A., Inc. Method of self-authenticating a document while preserving critical content in authentication data
US9074256B2 (en) * 2009-04-06 2015-07-07 Vanda Pharmaceuticals, Inc. Method of predicting a predisposition to QT prolongation
ES2604102T3 (en) * 2009-04-06 2017-03-03 Vanda Pharmaceuticals Inc. Treatment method based on polymorphisms of KCNQ1
EP2341450A1 (en) 2009-08-21 2011-07-06 Mikko Kalervo Väänänen Method and means for data searching and language translation
US8175617B2 (en) 2009-10-28 2012-05-08 Digimarc Corporation Sensor-based mobile search, related methods and systems
US8806346B2 (en) 2010-03-30 2014-08-12 Itxc Ip Holdings S.A.R.L. Configurable workflow editor for multimedia editing systems and methods therefor
US9281012B2 (en) 2010-03-30 2016-03-08 Itxc Ip Holdings S.A.R.L. Metadata role-based view generation in multimedia editing systems and methods therefor
US8463845B2 (en) 2010-03-30 2013-06-11 Itxc Ip Holdings S.A.R.L. Multimedia editing systems and methods therefor
US8788941B2 (en) * 2010-03-30 2014-07-22 Itxc Ip Holdings S.A.R.L. Navigable content source identification for multimedia editing systems and methods therefor
JP5557756B2 (en) * 2011-01-17 2014-07-23 日本放送協会 Electronic watermark embedding apparatus, a digital watermark embedding program, a digital watermark detection apparatus and an electronic watermark detecting program
CN103457962B (en) * 2012-05-28 2018-03-23 腾讯科技(深圳)有限公司 Way to access the microblogging album, microblogging clients and systems

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1249002B1 (en) * 2000-01-13 2011-03-16 Digimarc Corporation Authenticating metadata and embedding metadata in watermarks of media signals
JPH11213014A (en) * 1997-11-19 1999-08-06 Nippon Steel Corp Data base system, data base retrieving method and recording medium
JPH11260045A (en) 1998-03-13 1999-09-24 Sony Corp Reproducing system and reproducing terminal
US6389181B2 (en) * 1998-11-25 2002-05-14 Eastman Kodak Company Photocollage generation and modification using image recognition
GB9921234D0 (en) * 1999-09-08 1999-11-10 Sony Uk Ltd A system and method for editing source content to produce an edited content sequence
GB9921235D0 (en) * 1999-09-08 1999-11-10 Sony Uk Ltd A system and method for navigating through source content
EP1785890A3 (en) 2000-07-20 2007-05-30 Digmarc Corporation Using embedded data with file sharing
GB0029880D0 (en) * 2000-12-07 2001-01-24 Sony Uk Ltd Video and audio information processing
US6973574B2 (en) * 2001-04-24 2005-12-06 Microsoft Corp. Recognizer of audio-content in digital signals
JP2002351878A (en) 2001-05-18 2002-12-06 Internatl Business Mach Corp <Ibm> Digital contents reproduction device, data acquisition system, digital contents reproduction method, metadata management method, electronic watermark embedding method, program, and recording medium
JP2003153217A (en) 2001-11-09 2003-05-23 Canon Inc Format for managing metadata and description object data
JP3933452B2 (en) * 2001-11-27 2007-06-20 シャープ株式会社 Support methods and support server to support the availability of information
US20030133017A1 (en) * 2002-01-16 2003-07-17 Eastman Kodak Company Method for capturing metadata in a captured image
JP2003303210A (en) 2002-04-11 2003-10-24 Canon Inc Information processing method, information processing device, and recording medium
JP3971642B2 (en) * 2002-04-23 2007-09-05 日本電信電話株式会社 Content download method and apparatus
JP2004046506A (en) * 2002-07-11 2004-02-12 Hitachi Ltd Local tax electronic declaration system, local tax electronic declaration method, retrieval method of local tax declaration state, and local tax electronic declaration program
JP2004120420A (en) * 2002-09-26 2004-04-15 Fuji Photo Film Co Ltd Image adjusting device and program
JP2004133536A (en) * 2002-10-08 2004-04-30 Canon Inc Metadata automatic generation/update device, metadata automatic generation/update method and program for realizing the generation/update method
JP3781715B2 (en) * 2002-11-01 2006-05-31 松下電器産業株式会社 Metadata production equipment and search device

Also Published As

Publication number Publication date Type
WO2006009663A1 (en) 2006-01-26 application
JP2008510327A (en) 2008-04-03 application
JP2010267292A (en) 2010-11-25 application
JP5702555B2 (en) 2015-04-15 grant

Similar Documents

Publication Publication Date Title
Pavlik Journalism and new media
Jaffe et al. Generating summaries and visualization for large collections of geo-referenced photographs
US7437351B2 (en) Method for searching media
US7197502B2 (en) Machine-implemented activity management system using asynchronously shared activity data objects and journal data items
US7707039B2 (en) Automatic modification of web pages
US7149353B2 (en) Method and system for suppression of features in digital images of content
US8099660B1 (en) Tool for managing online content
US20060004703A1 (en) Semantic web portal and platform
US20090164267A1 (en) Employing Organizational Context within a Collaborative Tagging System
US20070162566A1 (en) System and method for using a mobile device to create and access searchable user-created content
US20080109422A1 (en) Personalized search
US7174054B2 (en) Method and system for access to electronic images of text based on user ownership of corresponding physical text
US20090217343A1 (en) Digital Rights Management of Streaming Captured Content Based on Criteria Regulating a Sequence of Elements
US20110288946A1 (en) Method and System of Managing Digital Multimedia Content
US20060200455A1 (en) Search engine result reporter
US20090138484A1 (en) Method for Enhancing Content using Persistent Content Identification
US20050050028A1 (en) Methods and systems for searching content in distributed computing networks
US7263521B2 (en) Navigation of the content space of a document set
EP0936531A2 (en) Information search method and system therefor
US20100161600A1 (en) System and method for automated service recommendations
US20070226321A1 (en) Image based document access and related systems, methods, and devices
US20060184566A1 (en) Crosslink data structure, crosslink database, and system and method of organizing and retrieving information
US20070133947A1 (en) Systems and methods for image search
US20080049971A1 (en) Systems and methods for processing content objects
US7293012B1 (en) Friendly URLs

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080611

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080611

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100112

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100412

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100419

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100512

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100519

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100614

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100621

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100712

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20101014

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101206

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110405

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20110622

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110705

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120111

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130514

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130517

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130613

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130918

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250