JP4860149B2 - デジタルコンテンツマーキング方法、デジタルコンテンツ内のフィンガープリントを検出する方法、デジタルコンテンツ、デジタルコンテンツに透かしを入れる装置、透かしを入れたデジタルコンテンツにフィンガープリントをほどこす装置、デジタルコンテンツ内のフィンガープリントを検出する装置、およびインストラクションを含む情報を格納するメモリ - Google Patents

デジタルコンテンツマーキング方法、デジタルコンテンツ内のフィンガープリントを検出する方法、デジタルコンテンツ、デジタルコンテンツに透かしを入れる装置、透かしを入れたデジタルコンテンツにフィンガープリントをほどこす装置、デジタルコンテンツ内のフィンガープリントを検出する装置、およびインストラクションを含む情報を格納するメモリ Download PDF

Info

Publication number
JP4860149B2
JP4860149B2 JP2004520106A JP2004520106A JP4860149B2 JP 4860149 B2 JP4860149 B2 JP 4860149B2 JP 2004520106 A JP2004520106 A JP 2004520106A JP 2004520106 A JP2004520106 A JP 2004520106A JP 4860149 B2 JP4860149 B2 JP 4860149B2
Authority
JP
Japan
Prior art keywords
digital content
block
blocks
information
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004520106A
Other languages
English (en)
Other versions
JP2005533410A5 (ja
JP2005533410A (ja
Inventor
スティーブン・ワトソン
ダニエル・エイ・コレンズ
ケビン・フイ
マイケル・エイ・マルコム
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kaleidescape Inc
Original Assignee
Kaleidescape Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kaleidescape Inc filed Critical Kaleidescape Inc
Publication of JP2005533410A publication Critical patent/JP2005533410A/ja
Publication of JP2005533410A5 publication Critical patent/JP2005533410A5/ja
Application granted granted Critical
Publication of JP4860149B2 publication Critical patent/JP4860149B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32154Transform domain methods
    • H04N1/32187Transform domain methods with selective or adaptive application of the additional information, e.g. in selected frequency coefficients
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0021Image watermarking
    • G06T1/0028Adaptive watermarking, e.g. Human Visual System [HVS]-based watermarking
    • G06T1/0035Output size adaptive watermarking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32154Transform domain methods
    • H04N1/32165Transform domain methods using cosine transforms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32267Methods relating to embedding, encoding, decoding, detection or retrieval operations combined with processing of the image
    • H04N1/32277Compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/467Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2383Channel coding or modulation of digital bit-stream, e.g. QPSK modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3233Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of authentication information, e.g. digital signature, watermark
    • H04N2201/324Selecting a particular authentication information from amongst a plurality of different authentication information

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Processing (AREA)
  • Television Systems (AREA)

Description

本発明は、デジタルコンテンツの配布に関する。
例えば、映画などのメディアストリームのためのデジタルコンテンツの配布は、いくつかの問題を受ける。1つの問題は、簡単にデジタルコンテンツの正確なコピーを作成できるため、それをする権限を有しているかいないかにかかわらず、いかなる受取人もそのコンテンツを再配付可能となることである。権限なく配布される惧れがなく、デジタルコンテンツ、特にメディアストリームのためのデジタルコンテンツを配布可能となることは有利であろう。これは、デジタルコンテンツを、例えば、コンピュータネットワーク、あるいは、(例えば、要求に応じて、あるいは今後の要求を予測して、あるいは他の何かに応じて)エンドビューアへ配布するための他の技術など、通信リンクを用いて配布することが所望されるとき、特に有利であろう。
1つの既知の解決策は、デジタルコンテンツに、コンテンツの権限のない配布者を識別可能となる「フィンガープリント」を付けることで、結果として、できるならば潜在的な権限のない配布者を思いとどまらせようとするものである。しかしながら、デジタルコンテンツのフィンガープリンティングは、以下を含むいくつかの既知の問題を受ける。(1) そのメディアストリームの提示は、オリジナルのコンテンツを改変することにより、劣化する場合があること。(2)その受取人が、フィンガープリントを改変あるいは消去することにより、改ざんしてしまうこともあること。もしくは、(3) 特に、複数の権限のない再配布者が、これらの複数の受取人が利用可能な情報を用いて、フィンガープリントが改変あるいは消去されたコピーを製造するために結託している場合は、権限がないという十分な確証のある再配布者の決定は困難となること。
他の問題は、フィンガープリントが、オリジナルのメディアストリームの配布、デコーディング、あるいは提示を妨げるかもしれないことである。特に、オリジナルのメディアストリームが、例えば、MPEG‐2フォーマットなどのように、映画用の既知のフォーマットを用いて符号化されているときは、一本の映画でさえ、含まれているデータ量はかなり大きくなる場合がある。
特定のフィンガープリントされたデジタルコンテンツが配布目的のためにフィンガープリントを変えられないよう、オリジナルのMPEG符号化(オリジナルのメディアストリームのパケット化を含む)ストラクチャーを保持することは、どのようなフィンガープリンティング方法にも有利であろう。特に、以下を保証することは有利となろう。(1) フィンガープリントされたデジタルコンテンツの長さが、オリジナルのデジタルコンテンツの長さと同じであること、および、(2)フィンガープリントされたデジタルコンテンツを再計算する必要もなく、さらに、フィンガープリントされたデジタルコンテンツについての多量の中間状態の情報を維持する必要もなく、ネットワークコミュニケーションの技術を使用する時などのように、デジタルコンテンツの送付を中断および再開することができること。
本発明の1つの態様は、メディアストリーム内に情報を埋め込む方法である。この方法は以下を含んでいる。(1) 情報を埋め込むために、そのメディアストリーム内部の1組の位置を選択すること、(2)それらの位置を作成するために、1組の可能な改変を選択すること、および、(3) 可能な改変のサブセットを作成すること。位置および可能な改変の組は、本明細書では「透かし」と呼ばれる場合もある。実際の改変のサブセットは、本明細書では「フィンガープリント」と呼ばれる場合もある。
本方法は、1つは、同一メディアストリームのオリジナルバージョンであり、また1つは、同一メディアストリームの代替バージョンであるといった、同一のメディアストリームの代替バージョンが存在する1組の位置を決定する。本明細書では「オリジナルの映画」および「代替映画」(「代替映画」)と呼ぶことがあり、あるいは、メディアストリーム内の特定のブロックを「オリジナルのブロック」および「代替ブロック」(「代替ブロック」)と呼ぶこともある。1つより多い代替映画あるいは代替ブロックが、1ビットより多い情報が各位置で埋め込可能となるよう、各位置を決定することができる。したがって、こうした各位置は、1ビット以上の情報を埋め込むことができ、この埋め込まれたビットは、その位置にオリジナルの映画あるいは代替映画が選択されているか否かに対応している。
方法の態様は、メディアストリームの配布における変化が全くないよう、改変を選択することを含んでいる。例えば、(1)そのメディアストリームを表わすデジタルコンテンツのパケット化、あるいは、(2)メディアストリームの音声部分のビデオ部分との同期化。好適な実施例では、変更のない配布は、例えば、MPEGで符号化された映画の個々のブロックなどのような、そのメディアストリームを表わすデジタルコンテンツの部分の長さに全く変更を加えることなく実行可能である。
好適な実施例では、この方法は、そのメディアストリーム用デジタルコンテンツのMPEG‐2符号化内の、1組のイントラ符号化されたブロックを決定することを含んでいる。イントラ符号化された各ブロックは、そのブロックに対するDCT係数のための1組のランレベルの符号化された値を有している。本方法は、オリジナルの組の値と少しでも違っている代替組の値があるか否か、さらに、符号化されたブロックのビット長が変わっていないかを決定する。したがって、こうした各ブロックは、埋め込まれた情報に対する位置、およびその位置に対する改変の双方を提供して、結果的に、埋め込み可能な情報値を少なくとも1ビット提供する。代替的実施例では、ブロックの代わりにマクロブロックを使用してもよい。
この好適な実施例は、以下の選択を有することができよう、(1)2以下の値などの、任意の個々のブロック内で変更されるランレベルの符号化された値の数;(2)+/−1レベルなどの、変更される任意のランレベルの符号化された値に対する改変の量;および(3)24以下の量子化スケールなどの、変更される任意のランレベルの符号化された値に対しても、許容される量子化量。
好適な実施例では、本方法は、代替ブロックを選択可能なそれらのブロックを認識すること、ランダムあるいは擬似ランダム効果に対応して、各ブロックで特定の代替ブロックを選択することを含んでいる。このタイプの効果により、フィンガープリントを「取り消す」ためにランレベルを研究しようと試みるアタックに対し、フィンガープリントが抵抗することを補助可能となる。また、それは、透かしをコンテンツの空間周波数の比較的大きな範囲にわたって広げるのを補助してもよく、アタックへの抵抗を補助する一方で、視覚効果をさらに減少させる。したがって、透かしを入れられる各映画に対して、それに透かしを入れた特定の代替映画は、代替ブロッをオリジナルのブロックに再符号化することにより、または、ブロックを代替ブロックに再符号化することにより、情報の埋め込みをリバースするようなアタックに対しても抵抗力を有している。なぜなら、アタッカーは、これらの代替ブロック、あるいはこれらのオリジナルブロックを容易には知り得ないからである。
好適な実施例の方法は、また、メディアストリームを表わすデジタルコンテンツに対するパケット化されたデータストリーム内部のパケットの境界にまたがる位置にあるブロックを除外する。代替ブロックは、こうしたまたがるブロックを選択しないことが好ましい。なぜならこれらのブロックにアクセスすると、パケット化されたデジタルコンテンツの解析にかかわることになり、自明でない予見、およびメディアストリームを表わすデジタルコンテンツの分析をしなければならなくなるからである。したがって、この最適化により、本発明の好適な実施例の実現が単純化される。
本発明は映画に限定されるものではなく、例えば、アニメーションあるいは音声などの、他のデジタルコンテンツおよびメディアストリームに対しても適用可能であるのみならず、例えば、写真あるいはイラストなどの静止メディアに対しても、さらにデータベースあるいは情報の他のコレクションに対しても適用可能である。
以下の説明では、本発明の好適な実施例は、好適な処理ステップおよびデータストラクチャーに関して説明されている。本技術分野の技術者ならば、この出願の熟読の後に、本発明の実施例は、1つ以上の汎用プロセッサ、あるいは専用プロセッサ、あるいは、特定の処理ステップならびに本明細書で説明されるデータストラクチャーに適当な他の回路を用いて実行可能であり、さらに、特定の処理ステップの実行およびデータストラクチャーは、過度の実験あるいはさらなる発明を必要としないことを認めるであろう。
語彙
次の用語は、以下で説明するように、本発明の態様に関連し、あるいは関係している。これらの用語の一般的な意味の記述は、制限を意図するものではなく、説明を意図しているに過ぎない。
「デジタルコンテンツ」というフレーズは、エンドビューアへの提示のために、メディアストリームあるいは他の情報を表示することを意図した、デジタルフォーマットのデータを説明する。「デジタルコンテンツ」は、例えば、メッセージヘッダー情報などのパッケージング情報とは区別される。
「メディアストリーム」というフレーズは、一連のフレームもしくはフィールドを含む映画、あるいは一連の音声を含むオーディオなど、連続した提示を意図する情報を説明する。本明細書に使用されているように、「メディアストリーム」というフレーズは、パケットを用いて連続的に送信し、コンテンツ全体が到着する前に再生を始める、音声と画像の「ストリーミングメディア」の標準的な意味より広い意味を有している。むしろ、本明細書で用いられているように、「メディアストリーム」は、連続して届けらなければならないといういかなる特定の要件も存在しない。また、本明細書で説明するように、メディアストリームは、写真あるいはイラストなどのような静止したメディアと同様に、例えば、アニメーションあるいは音声などのような、提示のための他の情報を指す場合もあるし、情報のデータベースおよび他のコレクションを指す場合もある。
「情報をメディアストリームに埋め込む」というフレーズは、そのメディアストリームを表示し、さらに、後に検出可能な形式で埋め込まれた情報を含む、そのメディアストリームのための1組のデジタルコンテンツを生成することを説明する。
「透かし」という用語は、情報をそのデジタルコンテンツに埋め込むことができる、デジタルコンテンツのためのスキーマを説明する。本明細書で説明するように、アタッカーは、本発明により提供される透かしを容易には取り外すことができない。しかしながら、本明細書で説明するような透かしの概念は、十分に一般的であるため、アタックに対して抵抗力を持たない透かしも含み得る。本明細書で説明するように、本発明により提供される透かしは、そのメディアストリーム内部に、情報が埋め込まれる1組の位置、および情報を埋め込むことで、これらの各位置にほどこされる可能な改変の双方を含んでいる。しかしながら、本明細書で説明するような透かしの概念は、十分に一般的であるため、情報を埋め込む他の技術を用いた透かしも含み得る。
「フィンガープリント」という用語は、少なくとも1人の指定されたデジタルコンテンツの受取人を識別し得る程度の、情報の特定の組を説明する。本明細書で説明するように、共謀した複数のアタッカーは、本発明により提供されるフィンガープリントを容易には取り除くことができず、あるいは、彼らのうちの少なくとも1人がデジタルコンテンツの権限のない配布者として検出されるのを防ぎ得ない。しかしながら、本明細書で説明するようなフィンガープリントの概念は、十分に一般的であるため、取り除きに対してそれほど抵抗力を持たず、もしくは、デジタルコンテンツの権限のない配布者を検出するような能力を提供しないフィンガープリントも含み得る。本明細書で説明するように、本発明により、提供されるフィンガープリントはメディアストリーム内部に、透かしにより識別される各位置にほどこされる特定の組の改変を含んでいる。しかしながら、本明細書で説明するようなフィンガープリントの概念は、十分に一般的であるため、情報を埋め込み、その埋め込まれた情報を検出し、さらにデジタルコンテンツの権限のない配布者を検出する、他の技術を用いるフィンガープリントを含み得る。
「適応」という用語は、送り主がデジタルコンテンツを受取人へ届ける処理を説明する。本明細書で説明するように、送り主は、そのデジタルコンテンツのコピーを解読し、さらにそのデジタルコンテンツにより表されるメディアストリームに情報を埋め込み(したがって、そのデジタルコンテンツを部分的にフィンガープリントする)、そして、その部分的にフィンガープリントされたデジタルコンテンツを再暗号化する。送り主は、この適応されたデジタルコンテンツを受取人に送る。
「エンドビューア」というフレーズは、メディアストリーム用のデジタルコンテンツのデコードを受け、さらにメディアストリームの提示を受けると考えられる、メディアストリームの受取人を説明する。
「デコード」という用語は、符号化されたフォーマットのメディアストリームのデジタルコンテンツに応答して、メディアストリームの提示の形式でのデータを生成することを説明する。本明細書で説明するように、符号化されたフォーマットは、MPEG‐2などの業界基準の符号化されたフォーマットを含んでいてもよい。しかしながら、本明細書で説明するようなデコードの概念は、十分に一般的であるため、メディアストリームのための他の符号化フォーマットも含み得る。
「提示」という用語は、例えば、映画を見る(あるいは、他の感覚)ためのオーディオおよびビジュアル情報などのような、メディアストリームを見るための形式で情報を生成することを説明する。本明細書で説明するように、映画の提示は、映画のフレームあるいはフィールドのビジュアルディスプレイのみならず、その映画に関連付けられたサウンドトラックのオーディオ提示も含み得る。しかしながら、本明細書で説明するような提示の概念は、十分に一般的であるため、オーディオ、ビジュアル、あるいはその他を含む、エンドビューアが受け取る情報の生成のための、他の様々な形式を含み得る。
「オリジナルの映画」および「代替映画」というフレーズは、1つは、本発明の態様を用いるシステムへ導入されるそのメディアストリームのオリジナルバージョンであり、そして、他の1つは、オリジナルの映画に応じて生成された、同一メディアストリームの代替バージョンであるといった、同一メディアストリームの代替バージョンを説明する。同様に、「オリジナルブロック」および「代替ブロック」というフレーズは、オリジナルの映画あるいは代替映画内の、同一の個々のブロックあるいはマクロブロックの各代替バージョンを説明する。本明細書で説明するように、オリジナルの映画と代替映画との間の違いは、代替映画が、あらゆる点において、オリジナルの映画の代わりとなり得るので、履歴的である。同様に、任意の1つのオリジナルブロックと、その関連する代替ブロックとの間の違いも、代替ブロックが、あらゆる点においてオリジナルブロックの代わりとなり得るので、履歴的である。
「MPEG」というフレーズは、ISO/IEC(国際標準化機構/国際電気標準会議)のワーキンググループである、「動画専門家グループ(Moving Picture Experts Group)」の頭文字語である。「MPEG‐1」、「MPEG‐2」、および「MPEG‐4」というフレーズは、それぞれ、ISO/IEC 11172、ISO/IEC 13818、およびISO/IEC 14496ドキュメント内に詳しく説明されている、メディアコンテンツを符号化する技術を指している。本発明は、MPEGでの使用に限定されるものではなく、さらに、これらの用語は、同様の性質であるか、あるいはそうでないかにかかわらず、他の符号化技術を含むように広く解釈されるべきである。
「イントラ符号化されたブロック」という用語は、イントラ符号化されたマクロブロックの一部であるブロックを指している。イントラ符号化されたブロックおよびマクロブロックは、MPEG技術の技術分野ではよく知られた用語である。
これらの用語および概念の拡張を含む本発明の他の、およびさらなるアプリケーションは、この出願を熟読した後には、当業者にとれば明白であろう。これらの他の、およびさらなるアプリケーションは本発明の範囲および趣旨の一部であり、またこれらは、当業者にとれば、さらなる発明あるいは過度な実験を伴うことなく、明白であろう。
システムの要素
図1は、デジタルコンテンツに透かしを入れ、フィンガープリントをほどこすシステムのブロック図を示している。
システム100は、ビデオ配布ネットワーク110を含んでいる。ビデオ配布ネットワーク110は、少なくとも1つの注入オリジン120、および多くのエンドビューア施設130を含んでいる。
1.注入オリジンからエンドビューア施設への配布
注入オリジン120は、ビデオ配布ネットワーク110外部のソースから、メディアストリーム用のデジタルコンテンツ121を受けとる。好適な実施例では、これらのソースは、例えば、映画プロダクションスタジオ、テレビスタジオ、ラジオまたはテレビのネットワークシンジケータなどのような、コンテンツプロデューサーあるいはコンテンツアグリゲータを含んでいてもよい。必要であれば、注入オリジン120は、デジタルコンテンツ121をフォーマットし、それに透かしを入れ、さらに、注入オリジン120での記憶のためにそれを暗号化する。好適な実施例では、注入オリジン120は、本明細書で説明されるように、透かしを入れ、フィンガープリントをほどこす方法を使用する。
好適な実施例では、注入オリジン120は、少なくともインストラクションを実行することができるプロセッサ、デジタルコンテンツおよびインストラクションを格納するためのメモリ、およびネットワークインタフェースを含んでいる。
ビデオ配布ネットワーク110は、各々が、個々に、あるいは連携して、注入オリジン120からエンドビューア施設130への、デジタルコンテンツ121を受け取り、格納し、および配布するために作用可能な、キャッシュ装置111のネットワークを含んでいる。好適な実施例では、エンドビューアからの要求は、ビデオ配布ネットワーク110に、エンドビューア施設130へデジタルコンテンツ121を配布するように促し、したがって、配布用の「プル」モデルが使用される。しかしながら、代替的実施例では、注入オリジン120あるいは他の装置は、ビデオ配布ネットワーク110に、デジタルコンテンツ121をエンドビューア施設130へ配布するよう促すことも可能であり、したがって、代替的に、「プッシュ」モデルあるいは配布用の他のモデルを用いることも可能である。
好適な実施例では、キャッシュ装置111は、1次キャッシュ112、中間キャッシュ113、およびリーフキャッシュ114を含む、層状配布システム内に配列される。1次キャッシュ112は、デジタルコンテンツ121を注入オリジン120から直接受け取る。中間キャッシュ113は、デジタルコンテンツ121を、1次キャッシュ112、あるいは、ネットワークトポロジー的に注入オリジン120により近い、他の中間キャッシュ113から受け取る。リーフキャッシュ114は、デジタルコンテンツ121を、中間キャッシュ113から、あるいは、可能であれば1次キャッシュ112から受け取り、デジタルコンテンツ121をエンドビューア施設130へ直接配布する。
好ましくは(すなわち、好適な実施例では)、各キャッシュ装置およびエンドビューア施設は、少なくともインストラクションを実行可能なプロセッサ、デジタルコンテンツおよびインストラクションを格納するメモリ、およびネットワークインタフェースを含んでいる。
好適な実施例では、ビデオ配布ネットワーク110は、インターネット、あるいは、その機密保護サブセットのような冗長通信ネットワークを含んでいる。しかしながら、本発明のコンテキストでは、任意の特定の通信技術を使用するビデオ配布ネットワーク110のための、いかなる特定の要件も存在していない。代替的実施例では、デジタルコンテンツ121のコピーを、注入オリジン120から、ビデオ配布ネットワーク110を通して最終的にエンドビューア施設130へ配送可能ないかなる通信技術も適当であろう。
好適な実施例では、ビデオ配布ネットワーク110を用いるデジタルコンテンツ121の配布は、デジタルコンテンツ121のコピーが、複数のキャッシュ装置111に記録され、および維持され、さらに、注入オリジン120からエンドビューア施設130への1つより多い経路を用いて配送し得ることを提供する。
第1例については、デジタルコンテンツ121のコピーは、注入オリジン120から2つの異なる中間キャッシュ113(AおよびB)へ、さらに、これらの中間キャッシュ113(AおよびB)から複数のエンドビューア施設130へ配送可能である。これらの中間キャッシュ113(A)のうちの1つが、後にそのデジタルコンテンツ121のコピーを破棄する場合には、さらにエンドビューア施設130へ配送するために、他の中間キャッシュ113(B)から他のコピーを受け取ることができる。
第2例については、デジタルコンテンツ121の異なる部分が、注入オリジン120から異なる中間キャッシュ113(AおよびB)へ配送され、次いで、これらの中間キャッシュ113(AおよびB)から同一エンドビューア施設130へ配送されることができる。これは、例えば、ビデオ配布ネットワーク110内部の通信リンクエラー、あるいは代替的にユーザの動作などにより、デジタルコンテンツ121を注入オリジン120からエンドビューア施設130へ送る作業が中断された場合に発生し、後に再開され、完了される。
2. 各受取人へのビデオ配布ネットワークを用いた配布
ビデオ配布ネットワーク110内の任意の送り主が、任意の受取人に対して、いつデジタルコンテンツ121を配送しても、送り主は、その受取人に対してデジタルコンテンツ121の適応を実行する。適応では、送り主は、そのデジタルコンテンツのコピーを復号化し、そのデジタルコンテンツを部分的にフィンガープリントし、さらにその部分的にフィンガープリントされたデジタルコンテンツを再暗号化することにより、情報を、そのデジタルコンテンツにより表示されるメディアストリーム内に埋め込む。
好適な実施例では、適応は、キャッシュ装置111とエンドビューア施設130の双方を含む、あらゆる受取人に対して実行される。これは、たとえ、それらの注入オリジン120からの距離が、同一あるいは同様であっても、キャッシュ装置111間の転送も含むことになろう。しかしながら、本発明の文脈では、代替的実施例において、ビデオ配布ネットワーク110の何らかの部分が、デジタルコンテンツ121を復号化し、あるいは再暗号化することなく、伝送することができるよう、適応が全ての可能な受取人に対して実行されるための、いかなる特定の要件も存在していない。
復号化と再暗号化には、異なるキーが使用されるのが好ましい。さらに、復号化と再暗号化には、異なる暗号スキームを使用することも可能である。代替的に、同一のキー、スキーム、あるいはその双方も使用可能である。
したがって、上述したように、結果として、個々のエンドビューア施設130が、複数の受取人に対して部分的にフィンガープリントされたデジタルコンテンツ121を受け取ることは可能である。しかしながら、いずれにせよ、好適な実施例では、個々のビューアを検出するためにフィンガープリンティング方法(例えば、フィンガープリントされたデジタルコンテンツの複数の受取人の間の共謀を検出する技術を用いるなど)が提供されている。
個々のエンドビューア施設130が、暗号化され、およびフィンガープリントされたデジタルコンテンツ121を受け取ると、その施設は、そのデジタルコンテンツ121をローカルビデオライブラリ131内へ記録する。ローカルビデオライブラリ131は、デジタルコンテンツ121を、後に1つ以上の再生要素132へ配布するために、暗号化され、およびフィンガープリントされた形式で保存する。エンドビューアによる要求に応答して、ローカルビデオライブラリ131は、デジタルコンテンツ121を、デジタルコンテンツ121が、実質的に同時に復号化され、さらに、視聴のためにエンドビューアへ提示される、1つ以上の再生要素132へ配布する。
システム100の1つの可能な実現についてのさらなる詳細は、2003年1月31日に出願された、関連出願である米国特許出願第10/356,692号「デジタルコンテンツの並行配布およびフィンガープリンティング(Parallel Distribution and Fingerprinting of Digital Content)」(コレンズ(Collens)他)で議論されている。
動作方法
図2は、本発明に従う、MPEG符号化と、代替ブロック(すなわち、代替ブロック)の生成を示す。本発明は、MPEG符号化デジタルコンテンツでの使用に限定されない。MPEGの文脈での本発明の以下の議論を読んだ後は、デジタル符号化の当業者であるなら、過度の実験あるいはさらなる発明を要することなく、本発明を異なる符号化スキームおよびデータタイプに適用することができるだろう。
図2では、デジタルコンテンツのフレーム200が、MPEG規格に従って処理される。説明の目的のために、このフレームはRGB、CMYK、あるいは何らかの他のフォーマットでのイメージフレームとして示されている。本発明はまた、他のタイプのデジタルコンテンツに適用可能である。
フレーム自体の中のデータを処理可能である。フレーム自体の中のデータが処理される場合、そのフレームは「イントラ符号化されている」と呼ばれる。
代替的に、そのフレームに対して予測されるデータとそのデータの相違を処理可能である。フレームデータの予測は、前のフレーム内のデータ、あるいは、前のフレームと後に続くフレームの双方のデータに基づくことが可能である。前者の場合は、このフレームは「予測」フレームと呼ばれている;後者の場合は、このフレームは「双方向」フレームと呼ばれている。
本発明の好適な実施例は、イントラ符号化フレームのみに適用される;しかしながら、この場合にはこうした必要はない。
フレーム200は、16×16画素マクロブロック210に分割される。そして、各マクロブロックは、輝度マクロブロック220およびクロミナンスマクロブロック225に分解される。図2は、4:2:0クロミナンスフォーマットを示している。このフォーマットでは、輝度マクロブロックは4つの8×8ブロックを含み、クロミナンスマクロブロックは2つの8×8ブロックを含んでいる。肉眼は、輝度変化ほどクロミナンス変化に敏感ではないので、クロミナンスデータには低解像度を用いることができる。様々なダウンサンプリング技術のいずれであれクロミナンスブロックを決定可能である。
他のクロミナンスフォーマットでは、異なるサイズの各クロミナンスマクロブロックが使用可能である。例えば、4:2:2フォーマットでは、各クロミナンスマクロブロックは4つの8×8ブロック含み、さらに4:4:4フォーマットでは、各クロミナンスマクロブロックは8つの8×8ブロックを含んでいる。
次に、各ブロックの輝度およびクロミナンスデータが処理される。ブロックを処理するために、離散コサイン変換(DCT)がそのブロックに適用され、1組の8×8DCT係数230をもたらす。
その後、DCT係数が量子化される。量子化は、全てのDCT係数を整数によりブロックに対して分割し、いかなる残余も破棄することを伴っている。この処理により、ゼロの係数の間に点在する、いくつかの非ゼロ係数がもたされる。係数が分割されるこの整数は、ブロックに対する量子化レベルである。量子化により、精度は若干の損失をもたらす;しかしながら、可能な量子化の程度に応じて、精度の損失は、エンドビューアにとり容認可能であろう(少しでも気付かれるなら)。量子化の便益は、高度なデータ圧縮が可能となることである。
そして、ブロックに対して量子化されたデータは、パターン240などのジグザグパターンでブロックをラン(run)することにより順序付けられる。この順序付けは、ゼロの連続で分離されるレベルと呼ばれる、非ゼロ係数の系列をもたらす。図2では、こうした系列は、参照数字250で表現的に示されている。
レベルおよびゼロの系列は、ランレベル符号化と呼ばれる処理を通して数の対のリストに変換される。このリスト内の数の対は、参照番号260で表される、ランレベルコードと呼ばれている。各対の第1数はランにおいてレベルに先行するゼロの数を表し、さらに、各対の第2数はレベルを表す。このようにして、例えば、AおよびBが各レベルに対する値として、レベルとゼロの系列(A 0 0 0 0 0 B 0 0)は、対(0,A)および(5,B)などに変換可能である。
圧縮を改良するために、ランレベルコードは、ハフマンコードなどの何らかの適応型符号化スキームを通して符号化される。このタイプの符号化スキームは、結果的に、各ランレベルコードに対して長さの異なる2進コードとなる。この理由で、結果として生じるコードは、可変長コード(VLC)と呼ばれる。図2では、長さの異なるVLC270は、長さの異なるダッシュにより表されている。
VLC270は、4つの可変長コードを表す4本のダッシュを含んでおり、これは順番に、輝度あるいはクロミナンスデータの単一の8×8画素ブロックに対する、量子化されたDCT係数のための4つのランレベルコードを表している。ブロックは、より短い、あるいはより長い長さの、より少ない、あるいはより多くのこうしたVLCにより表されることができよう。
上で議論したように、フレームのVLCへの変換は、ダウンサンプリングおよび量子化にかかわる;その結果、VLCは正確なフレームデータを表さない。本発明は、ほとんど同一の、しかし完全には同一でない方法でフレームを表す、フレームに対するVLCの1つ以上の交互の組を決定することにより、この事実を利用する。これらのVLCの交互の組は、本発明に従う代替ブロックを形成する。VLCのオリジナルの組は、オリジナルブロックと呼ばれている。
代替ブロックのための、若干のあるいは全てのVLCは、オリジナルブロック内のVLCとは異なる長さを有している場合もあろう。しかしながら、本発明に従えば、代替ブロックに対するVLCの全長は、オリジナルブロックに対するVLCの全長と等しくなるべきである。これは、図2において表示的に示されており、そこでは、代替ブロック280に対するVLCの全長は、オリジナルブロック290に対するVLC270の全長と等しい。
図3は、本発明に従うパケット化の保存を示している。
図3では、データストリーム300は、ヘッダー320内の制御データなどに加えてVLCのオリジナルブロック310を含んでいる。各ブロック内のVLCの可変数および長さは、ブロック310内の破線で表されている。
データストリーム300は、パケット化されたデータストリーム330と同様のメディアストリームとしての提示のためにパケット化される。このパケット化されたデータストリームは、それ自身のパケットヘッダー340と、データストリーム300からの全てのデータを含むパケット350を含んでいる。パケットの境界は、図3においてパケット化されたデータストリーム330とデータストリーム300との間の縦線により示したように、データストリーム300内のいかなる場所にも発生させることが可能である。したがって、パケット境界は、ブロック310およびヘッダー320で発生可能である。
データストリーム360は、データストリーム300内の若干のブロックの代替ブロック370を含んでいる。これらの代替ブロックは、データをデータストリーム内に埋め込むために、対応するオリジナルブロックの代わりに、データストリーム内へ挿入することができる。
図2について議論したように、代替ブロックに対するVLCの全長は、対応するオリジナルブロックに対するVLCの全長と等しい。しかしながら、個々のVLCの数、サイズ、あるいはその両方は、総合的ブロック長が変化しない限り、オリジナルブロックのものと異なることができる。これらの変化は、ブロック370の破線により表されている。
代替ブロックの長さが、それに対応するオリジナルブロックの長さに適合しているので、代替ブロックを伴うパケットを、オリジナルブロックを伴うパケットと置換することにより、代替ブロックを、パケット化されたデータストリーム330内へ代入可能である。
しかしながら、代替ブロックが2つのパケットにまたがっている場合は、代替ブロックによる置換は、パケット化されたデータストリームの重要な予見および分析を必要とすることになろう。したがって、本発明の好適な実施例は、データの埋め込み可能な位置から、パケットの境界にまたがるブロックを排除している。言い換えれば、代替ブロックは、パケット化されたデータストリーム内のパケットの境界にまたがるブロックを許可しないことが好ましい。
次に、位置選択のための、およびこれらの位置に対する代替ブロックのための、好適な技術の特定の細部について議論する。デジタルコンテンツの特定のアイテムに対する可能な位置および代替ブロックの組は、そのデジタルコンテンツに対して透かしを形成する。これらの可能な代替ブロックのいくつか、あるいは全てが挿入されているコンテンツのコピーは、完全に、あるいは部分的にフィンガープリントされていると言われる。
図4は、情報が埋め込まれるであろう1組の位置でデジタルコンテンツに透かしを入れ、フィンガープリントをほどこす方法のフロー図を示している。
1.透かし入れ
これらの位置でのブロック位置および代替ブロックの組は、MPEGの文脈での位置および可能な改変の組の特定の例である。概して、これらの位置でのこうした位置および可能な改変の組は、本発明に従う透かしを形成する。ステップ401およびステップ402は、この透かしの作成ステップである。これらのステップは、注入オリジン120で実行されるのが好ましい。
ステップ401では、情報を埋め込む位置がデジタルコンテンツ内で選択される。好適な実施例では、このデジタルコンテンツは、MPEG‐1、MPEG‐2、あるいはMPEG‐4(以下では、まとめて単にMPEGと言及する)に符号化されたデジタル映画であってもよい。以下のステップは、符号化されたデジタル映画の文脈で説明されている。しかしながら、本発明は、他のデジタルコンテンツにも等しく適用可能であり、さらに、これらのステップのアプリケーションは、さらなる発明、あるいは過度の実験を必要とはしないだろう。
位置は、輝度あるいはクロミナンスDCT係数のいずれかの8×8ブロックであるのが好ましいが、こうした係数の16×16マクロブロックであってもよい。本発明は、完全にイントラ符号化されたマクロブロックである位置で使用可能であるが、位置は、イントラ符号化されたマクロブロックのブロックであるのが好ましい。ブロックとイントラ符号化されたマクロブロックは、MPEG符号化技術ではよく知られている。
本発明は、例えば、ウェーブレットあるいは、輝度もしくはクロミナンス情報が、なんらかの変換されたドメイン(例えば、非MPEG符号化スキームにおける)に提示されるいかなる他の変換など、DCT以外の変換からの係数を含む他のブロックに適用可能であり、あるいは、RGBデータ、CMYKデータ、YUVデータに変換、および、より一般的に、メディアストリームの提示に役立つ情報がデジタルコンテンツで表示される、いかなる変換にも適用可能である。本技術分野の技術者ならば、この出願の熟読の後に、本発明の範囲および趣旨の中で、本質的に色空間および基礎機能のいかなる組合せも実行可能となり得て、さらに、過度の実験あるいはさらなる発明を必要としないことを認めるであろう。
パケット化されたデジタルコンテンツの場合は、パケットの境界にまたがるブロックは、情報を埋め込むために可能な位置から排除されるのが好ましい。
位置はまた、ブロックの代替バージョンがあり、位置に対して可能な改変を選択するよう、ステップ402で議論した評価基準を満たしているような形で選択される。したがって、ステップ401は、ステップ402に関連して起こるのが好ましい。
ステップ402では、ブロックに対する可能な改変が選択される。デジタルコンテンツのパケット化および同期を維持するために、これらの改変は、情報が埋め込まれる位置(すなわち、ブロック)でのデジタルコンテンツの長さへ、いかなる変化も伴わないことが好ましい。
MPEGのコンテキストでは、各ブロックは、そのブロックに対する離散コサイン変換(DCT)係数のためのランレベル符号化値の組を有している。本発明は、オリジナルの値の組と少しだけ異なっている代替の値の組があるか否か、さらにそれが符号化されたブロックのビット長を変えないかどうかを決定する。したがって、こうした各ブロックは、情報を埋め込む位置とその位置に対する改変の双方を提供し、その結果、埋め込み可能な情報の少なくとも1ビットを提供する。代替的実施例では、各マクロブロックがブロックの代わりに使用されている。
より詳細には、MPEGでは、クロミナンスおよび輝度ブロックは、ピクセルデータ値の離散コサイン変換を表すランレベルコードに対応する可変長コード(VLC)を用いて符号化される。これらのVLCはハフマンコードであり、それはデータ圧縮の非常に効率的な方法を提供する。しかしながら、異なる各ブロックに対する結果としてのデータは、異なる長さを有している場合もある。
したがって、情報を埋め込む位置で一定のブロック長を維持するためには、ブロックに対するVLCのいかなる変化も、正味の長さとゼロの差にならなければならない。これは、いくつかの方法で達成可能である。
第1に、1つのVLCは、同一長を有する他のVLCの代わりをすることができよう。第2に、オリジナル、および、代用されたVLCの合計の長さが等しい状態で、1つより多いVLCが、等しい数のVLCの代わりをすることもできよう。例えば、5と6の長さを有する2つのVLCは、4と7の長さを有するVLCの代わりに用いることができよう。第3に、1つ以上のVLCを追加し、あるいは削除することができよう。視覚インパクトを減少するためには、追加および削除は、1のレベルでVLCに限定されるのが好ましい。他の技術と同様、これらの3つの技術の組合せが利用可能である。
ブロックに対する2つより多いVLCが変化する場合は、人為ストラクチャーは、たとえ非常に低いレベルの認知であれ、ビューアにより目視されるものとなろう。したがって、代替ブロックは、VLCに対する2つの変化からもたらされるブロックに限定されるのが好ましい。
デジタルコンテンツの提示への視覚インパクトを制限するために、識別された位置のデータへの変化は、ランレベルコード内の1つのレベル値により増加し、あるいは減少するのが好ましい。加えて、MPEGは、ランレベルコードにより表されるデータの量子化に関係している。量子化スケール(QS)が24より高いなら、1のレベル変化でさえ、提示において容認できない歪みをもたらすことになる。したがって、24以下の量子化スケールを有するブロックのみが、代替ブロックの形成に使用されるのが好ましい。
要するに、好適な実施例では、以下の評価基準は、オリジナルブロックに対する可能な改変(すなわち、代替ブロック)を識別するために使用される:
・ブロックは、イントラ符号化されたマクロブロックの一部分である
・ブロックは、プラスあるいはマイナス1のレベルの値により変化可能な、1つか2つのランレベルコードを含んでいる。ランレベルにおけるその変化は、変化していないレベルに対するVLCと同一の長さを有するVLCをもたらす。(2つのランレベルコードが変化する場合、VLCの長さの合計だけが等しい必要がある)
ブロックの量子化スケールは24以下である。
経験的に、典型的なMPEG符号化されたデジタル映画は、これらの評価基準を満たす、およそ1億の適当な位置を含んでいるのがわかっている。
以上の評価基準の使用が好適な実施例である一方、本発明は、これらの評価基準に限定されない。したがって、本発明の代替的実施例は、イントラ符号化されていないマクロブロック内部に含まれるブロックを含む、いかなるタイプのブロックからも代替ブロックが作成可能であり、さらに、1つのブロック内の2つのVLCを変更し、追加し、あるいは削除することが可能であり、1つのレベルより大きなレベル内の変化を使用可能であり、さらに、24より大きい量子化スケールを有するブロックから代替ブロックを作成可能である。他の変化も、本発明の範囲から逸脱することなく可能である。
図5は、代替ブロックを決定するステップ402での、ブロック内の可能な改変を識別するために使用可能な再帰的技術のフロー図を示している。非再帰的技術を含む他の異なる技術は、ステップ402の実行において、本発明から逸脱することなく、使用可能である。
再帰的技術では、順番に、それ自体の他の例をコールする初期処理が開始される。したがって、この処理のコールされた例は、処理の他の例をコールすることなども可能である。図5では、この再帰的コールは破線として示されている。
初期処理は、ステップ501におけるブロックに対するVLCの第1の許可された変更を作成する。VLCの変更に対して確立された、量子化レベルおよび他の任意の要件に対する評価基準を満たしている場合、VLCの変更が許可される。その後、ステップ502では、処理は、ブロックに対して変更されたVLCの長さのネット変化がゼロであるか否かを確認するようチェックする。ネット変化(再帰的処理を任意にコールすることにおける変更からの変化を含んでいる)がゼロである場合、可能な代替ブロックが見出されたことになる。可能な代替ブロックは、ステップ503で可能な代替ブロックのリストに追加される。ネット変化がゼロでない場合は、この変化はステップ504で記載(note)される。
この処理は、そのポイントまでのネット変化をパスして、ステップ507でそれ自体の他の例を、再帰的にコールする。再帰的にコールされた処理は、ブロックに対するVLCの次の可能な変更から開始する。この次の変更とは、第1もしくは現在のVLCの他の変更、あるいは次のVLCの変更であることもあろう。
この処理は、そのブロックの終端に達するまで、再帰的コールを続ける。処理の1つによりブロックの終端に達すると、この処理のためのフローは、ステップ505により、再帰的処理が戻るステップ506へ分流される。ここで、戻り処理をコールした処理は、ステップ508で続けられ、そのブロック内のVLCの次に許可可能な変更がなされる。この全再帰的処理は、初期処理が、そのブロックの終端に達するまで続く。
以上の再帰的処理の理解の一助に、例を挙げることにする。この例では、2回の変化のみが、ブロックに対する3つのVLCの各々に試みられている。例を単純化するために、すべての変更が許可されていると仮定する。これらの変化は、A+1、A−1、B+1、B−1、C+1、およびC−1と示されている。この例では、以下の順序のVLC変更は、正味の長さの変化がゼロであるとチェックされる:(A+1),(A+1,B+1),(A+1,B+1,C+1),(A+1,B+1,C−1),(A+1,B−1),(A+1,B−1,C+1),(A+1,B−1,C−1),(A+1,C+1),(A+1,C−1),(A−1),(A−1,B+1),(A−1,B+1,C+1),(A−1,B+1,C−1),(A−1,B−1),(A−1,B−1,C+1),(A−1,B−1,C−1),(A−1,C+1),(A−1,C−1),(B+1),(B+1,C+1),(B+1,C−1),(B−1),(B−1,C+1),(B−1,C−1),(C+1),および(C−1).
図5の再帰的技術は、所与のブロックに対する、全ての可能な代替ブロックを見出すために使用可能である。しかしながら、代替的実施例では、この技術は、いったんある程度の数の可能な代替ブロックが見出されたり、あるいはいったん単一の代替ブロックが見出された場合でも停止可能である。複数の可能な代替ブロックが見出された場合は、1つ以上の可能な代替ブロックが、例えば、擬似ランダムに、可能な代替ブロックから選択可能であろう。他の変形形態も可能であり、本発明の範囲内にとどまっている。
2. フィンガープリンティング
図4に戻って、フィンガープリンティングはステップ403で実行される。フィンガープリンティングは、情報をデジタルコンテンツに埋め込むために、選択された位置で改変のいくつかを実際に作成する処理である。MPEGの文脈では、改変は、いくつかのオリジナルブロックに代えて代替ブロックを使用することにより作成される。
ブロックに対して1つの代替ブロックが見出された場合、その位置へ1ビットを埋め込むのにその代替ブロックが使用可能である。例えば、1組の位置および可能な改変がいったん決定されると、その位置でオリジナルブロックを使用することにより、その位置へ「0」を埋め込み可能であり、その位置で代替ブロックを使用することにより、「1」を埋め込み可能である。データを埋め込む他の構成も使用可能である。
さらに、選択された位置で、ブロックに対して1つより多い代替ブロックが見出される場合、それらの代替ブロックは、その位置で1ビットより多くを埋め込むのに使用可能である。例えば、オリジナルブロックが「00」を表し、第1代替ブロックが「01」を表し、第2代替ブロックが「10」を表し、さらに第3代替ブロックが「11」を表すことが可能である。さらに、複数の代替ブロックを使用する他のスキームも可能である。
ステップ403では、デジタルコンテンツ内の選択された位置のいくつかにおいて、代替ブロックをオリジナルブロックの代わりに用いることにより、情報(すなわち、ビット)がデジタルコンテンツ内へ埋め込まれる。デジタルコンテンツの配布においては、複数の異なる点で変化を受けるのは、位置のサブセットのみであるのが好ましい。例えば、第1サブセットは1次キャッシュ112で変化を受け、第2サブセットが中間キャッシュ113で変化を受け、第3サブセットがリーフキャッシュ114で変化を受ける、などが可能である。概して、少なくともいくつかの「0」(あるいは、符号化スキームに依存する他の値)が利用可能な位置へ埋め込まれるので、各サブセット内のすべての位置が変更されるというわけではないことになる。
3.フィンガープリント情報の抽出
フィンガープリンティングが重要であるのは、埋め込まれた情報を抽出可能であるからに他ならない。図6は、デジタルコンテンツ内のフィンガープリントから、埋め込まれた情報を抽出する方法のフロー図を示している。データは、図6に示したステップを実行可能な計算装置で抽出可能である。こうした計算装置は、少なくとも、デジタルコンテンツを格納し、さらにステップを実行するインストラクションを格納するプロセッサおよびメモリを含んでいるのが好ましい。
ステップ601では、デジタルコンテンツの特定のアイテムに対する透かしが決定される。この透かしは、デジタルコンテンツの特定のアイテム用のそれらの位置に、1組の位置と可能な改変(例えば、代替ブロック)を含んでいる。
透かし自体は、エンドユーザに配布されるデジタルコンテンツには含まれていないのが好ましい。したがって、デジタルコンテンツについての識別情報に基づいて、透かしは注入ポイント120から検索されるのが好ましい。こうした識別情報の例には、コンテンツのタイトル、改訂番号、シリアル番号などが含まれる。
識別情報は、それ自体、何らかの強健な方式でデジタルコンテンツ内に埋め込まれているか、あるいはデジタルコンテンツから自明であることが好ましい。例えば、MPEG符号化された映画の場合は、識別情報は映画のタイトルであることもあり、これは、映画の内容から自明である。他の識別情報も利用可能である。
透かしがいったん検索されると、ステップ602で、透かしにより決定される情報を埋め込む選択位置を検査可能である。位置は、透かしにより特定される可能な改変に従って、各位置のうちのいずれが改変されたかを決定するために検査される。
次に、ステップ603では、改変(例えば、代替ブロック)が存在しているか、あるいは存在していないかの検査から、埋め込まれた情報を抽出可能である。例えば、存在している改変がデジタルの「1」を表し、存在していない改変がデジタルの「0」を表すことができる。本発明から逸脱することなく、他の符号化スキームが使用可能である。
各々の埋め込まれたビット情報は、デジタルコンテンツ内に何度も埋め込まれるのが好ましい。これにより、いくつかの位置で改変の喪失あるいは変造があっても、埋め込まれた情報は喪失しないことになる。
加えて、デジタルコンテンツ内の位置の順序は、既知であるがランダム(あるいは、擬似ランダム)な何らかの方式で埋め込まれた情報における、ビットの順序に関連しているのが好ましい。この埋め込み情報の混ぜ合わせは、埋め込まれた情報への権限のないアクセス、あるいは変造の防止を補助する。
検査されるデジタルコンテンツは、故意にあるいは偶発的に改変されたこともあろう。結果として、デジタルコンテンツ内のいかなる所与のブロックも、コンテンツの透かしからのオリジナルブロックあるいは代替ブロックのどちらとも、正確には整合しないこともあろう。この問題を処理するために、例えば、VLCから得られるDCT係数のベクトルスペースなど、何らかのベクトルスペース内の対応するオリジナルブロックからの各ブロックの距離が計算可能であろう。その後、オリジナルブロックあるいは代替ブロックの何らかの距離以内にあるブロックは、これらのブロックに整合するとみなすことができよう。埋め込まれたデータの各ビットが何度も埋め込まれている場合、埋め込まれたデータを計算するために、十分なビットが抽出されることになろう。
本発明の一般性
代替ブロックの生成は、デジタルコンテンツに対して使用される符号化のタイプに依存していない。一般的な意味で、本発明の透かし入れ技術およびフィンガープリントをほどこす技術は、連続の、あるいはアナログの物理処理をモデル化する、いかなるディジタルデータにも適用可能である。本発明は、MPEG―ハフマンコード化、あるいは他の完全に異なる符号化スキームを使用しているか否かに関係なく、MPEGの何らかのバージョン―により符号化された、デジタル化された音声データ、測定データ、ビデオデータ、他のマルチメディアデータなどに適用可能である。データを埋め込むために、デジタルコンテンツ内の位置を選択し、さらに、選択された位置へほどこされる可能な改変を選択するために、本発明の技術はこのデジタル化されたデータのいずれにも使用可能であり、その間ずっと、データのパケット化が保存される。
さらには、本発明は、メディアストリームの配布以外およびデジタルコンテンツの配布以外のアプリケーションにも役立ち、十分な一般性を有している。例えば、本発明は、また、概して、データセットのセキュリティ、あるいはそれらのデータセットの受取人を識別することが所望されているアプリケーションに役立つ。
このように、本明細書には、好適な実施例が開示されているが、本発明の概念、範囲、および趣旨内に留まりながらも、多くの変形形態が可能である。これらの変形形態は、本明細書を熟読するならば、当業者には明白になろう。
デジタルコンテンツに透かしを入れ、フィンガープリントをほどこすシステムのブロック図である。 本発明に従う、MPEG符号化と、代替ブロックの生成を示す図である。 本発明に従う、パケット化の保存を示す図である。 情報が埋め込まれることになる1組の位置で、デジタルコンテンツに透かしを入れ、フィンガープリントをほどこす方法のフロー図である。 本発明に従う、代替ブロックを決定するために、ブロック内の可能な改変を識別するために使用可能な再帰的技術のフロー図である。 情報をデジタルコンテンツに埋め込むフィンガープリントの検出方法のフローチャートを示す図である。

Claims (3)

  1. データが埋め込まれた符号化デジタルコンテンツ内の一組の符号化ブロックを決定するステップと、
    それぞれが前記一組の符号化ブロックのうちの一つの符号化ブロックに関連付けられている、複数の可能な代替ブロックを特定するステップと、
    記複数の可能な代替ブロックから一つの代替ブロックのサブセットを選択し、前記代替ブロックのサブセットに関連付けられた複数の符号化ブロックに代えて前記代替ブロックのサブセットを前記デジタルコンテンツ内に挿入することによって、前記デジタルコンテンツ内にフィンガープリントを埋め込ステップとを含み
    前記可能な代替ブロックのそれぞれは、関連付けられた符号化ブロックの可変長コード(VLC)の改変であり、関連付けられた符号化ブロック内の第1の可変長コードのビット長を増加させる第1の改変と前記第1の可変長コードのビット長の増加分と等しい量、関連付けられた符号化ブロック内の第2の可変長コードのビット長を減少させる第2の改変とを含み、
    前記可能な代替ブロックのそれぞれは、前記関連づけられた一つの符号化ブロックのビット長と等しいビット長であることを特徴とする、フィンガープリントされたデジタルコンテンツを生成する方法。
  2. データストリーム内において、前記符号化ブロックを含むオリジナルブロックを、前記代替ブロックを含む代替パケットによって置換するステップ、をさらに含む、請求項1に記載の方法。
  3. 前記決定ステップでは、パケット化されたデータストリーム内のパケットの境界にまたがるブロックを排除する、請求項1に記載の方法。
JP2004520106A 2002-07-09 2003-07-09 デジタルコンテンツマーキング方法、デジタルコンテンツ内のフィンガープリントを検出する方法、デジタルコンテンツ、デジタルコンテンツに透かしを入れる装置、透かしを入れたデジタルコンテンツにフィンガープリントをほどこす装置、デジタルコンテンツ内のフィンガープリントを検出する装置、およびインストラクションを含む情報を格納するメモリ Expired - Fee Related JP4860149B2 (ja)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US39492202P 2002-07-09 2002-07-09
US39463002P 2002-07-09 2002-07-09
US39458802P 2002-07-09 2002-07-09
US60/394,922 2002-07-09
US60/394,630 2002-07-09
US60/394,588 2002-07-09
US10/356,322 2003-01-31
US10/356,322 US7003131B2 (en) 2002-07-09 2003-01-31 Watermarking and fingerprinting digital content using alternative blocks to embed information
PCT/US2003/021592 WO2004006168A1 (en) 2002-07-09 2003-07-09 Watermarking and fingerprinting digital content using alternative blocks to embed information

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2011040389A Division JP2011172232A (ja) 2002-07-09 2011-02-25 デジタルコンテンツマーキング方法、デジタルコンテンツ内のフィンガープリントを検出する方法、デジタルコンテンツ、デジタルコンテンツに透かしを入れる装置、透かしを入れたデジタルコンテンツにフィンガープリントをほどこす装置、デジタルコンテンツ内のフィンガープリントを検出する装置、およびインストラクションを含む情報を格納するメモリ

Publications (3)

Publication Number Publication Date
JP2005533410A JP2005533410A (ja) 2005-11-04
JP2005533410A5 JP2005533410A5 (ja) 2006-08-24
JP4860149B2 true JP4860149B2 (ja) 2012-01-25

Family

ID=30119311

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2004520106A Expired - Fee Related JP4860149B2 (ja) 2002-07-09 2003-07-09 デジタルコンテンツマーキング方法、デジタルコンテンツ内のフィンガープリントを検出する方法、デジタルコンテンツ、デジタルコンテンツに透かしを入れる装置、透かしを入れたデジタルコンテンツにフィンガープリントをほどこす装置、デジタルコンテンツ内のフィンガープリントを検出する装置、およびインストラクションを含む情報を格納するメモリ
JP2011040389A Pending JP2011172232A (ja) 2002-07-09 2011-02-25 デジタルコンテンツマーキング方法、デジタルコンテンツ内のフィンガープリントを検出する方法、デジタルコンテンツ、デジタルコンテンツに透かしを入れる装置、透かしを入れたデジタルコンテンツにフィンガープリントをほどこす装置、デジタルコンテンツ内のフィンガープリントを検出する装置、およびインストラクションを含む情報を格納するメモリ

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2011040389A Pending JP2011172232A (ja) 2002-07-09 2011-02-25 デジタルコンテンツマーキング方法、デジタルコンテンツ内のフィンガープリントを検出する方法、デジタルコンテンツ、デジタルコンテンツに透かしを入れる装置、透かしを入れたデジタルコンテンツにフィンガープリントをほどこす装置、デジタルコンテンツ内のフィンガープリントを検出する装置、およびインストラクションを含む情報を格納するメモリ

Country Status (5)

Country Link
US (4) US7003131B2 (ja)
EP (1) EP1529262B1 (ja)
JP (2) JP4860149B2 (ja)
AU (1) AU2003259108A1 (ja)
WO (1) WO2004006168A1 (ja)

Families Citing this family (107)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7644282B2 (en) 1998-05-28 2010-01-05 Verance Corporation Pre-processed information embedding system
US6737957B1 (en) 2000-02-16 2004-05-18 Verance Corporation Remote control signaling using audio watermarks
US6834308B1 (en) 2000-02-17 2004-12-21 Audible Magic Corporation Method and apparatus for identifying media content presented on a media playing device
US7562012B1 (en) * 2000-11-03 2009-07-14 Audible Magic Corporation Method and apparatus for creating a unique audio signature
US7363278B2 (en) * 2001-04-05 2008-04-22 Audible Magic Corporation Copyright detection and protection system and method
US7529659B2 (en) 2005-09-28 2009-05-05 Audible Magic Corporation Method and apparatus for identifying an unknown work
US7877438B2 (en) * 2001-07-20 2011-01-25 Audible Magic Corporation Method and apparatus for identifying new media content
US8972481B2 (en) 2001-07-20 2015-03-03 Audible Magic, Inc. Playlist generation method and apparatus
US20030135623A1 (en) * 2001-10-23 2003-07-17 Audible Magic, Inc. Method and apparatus for cache promotion
US7555650B1 (en) * 2002-03-20 2009-06-30 Thomson Licensing Techniques for reducing the computational cost of embedding information in digital representations
US7231607B2 (en) * 2002-07-09 2007-06-12 Kaleidescope, Inc. Mosaic-like user interface for video selection and display
US7246322B2 (en) 2002-07-09 2007-07-17 Kaleidescope, Inc. Grid-like guided user interface for video selection and display
US20070245247A1 (en) * 2002-05-14 2007-10-18 Kaleidescape, Inc. Grid-like guided user interface for video selection and display
US20040083487A1 (en) * 2002-07-09 2004-04-29 Kaleidescape, A Corporation Content and key distribution system for digital content representing media streams
US7111171B2 (en) * 2002-07-09 2006-09-19 Kaleidescope, Inc. Parallel distribution and fingerprinting of digital content
WO2004006579A1 (en) * 2002-07-09 2004-01-15 Kaleidescape, Inc. Content and key distribution system for digital content representing media streams
US7003131B2 (en) * 2002-07-09 2006-02-21 Kaleidescape, Inc. Watermarking and fingerprinting digital content using alternative blocks to embed information
EP2782337A3 (en) 2002-10-15 2014-11-26 Verance Corporation Media monitoring, management and information system
US8225194B2 (en) 2003-01-09 2012-07-17 Kaleidescape, Inc. Bookmarks and watchpoints for selection and presentation of media streams
WO2004070998A2 (en) 2003-01-31 2004-08-19 Kaleidescape, Inc. Recovering from de-synchronization attacks against watermarking and fingerprinting
US8332326B2 (en) * 2003-02-01 2012-12-11 Audible Magic Corporation Method and apparatus to identify a work received by a processing system
US8572104B2 (en) 2003-04-18 2013-10-29 Kaleidescape, Inc. Sales of collections excluding those already purchased
US20050086069A1 (en) * 2003-07-15 2005-04-21 Kaleidescape, Inc. Separable presentation control rules with distinct control effects
US20050050103A1 (en) * 2003-07-15 2005-03-03 Kaleidescape Displaying and presenting multiple media streams from multiple DVD sets
US7616776B2 (en) 2005-04-26 2009-11-10 Verance Corproation Methods and apparatus for enhancing the robustness of watermark extraction from digital host content
US7369677B2 (en) 2005-04-26 2008-05-06 Verance Corporation System reactions to the detection of embedded watermarks in a digital host content
US20060239501A1 (en) 2005-04-26 2006-10-26 Verance Corporation Security enhancements of digital watermarks for multi-media content
US9055239B2 (en) * 2003-10-08 2015-06-09 Verance Corporation Signal continuity assessment using embedded watermarks
WO2005114571A1 (en) 2004-04-27 2005-12-01 Thomson Licensing Film fingerprinting
US8130746B2 (en) * 2004-07-28 2012-03-06 Audible Magic Corporation System for distributing decoy content in a peer to peer network
US8570586B2 (en) 2005-05-02 2013-10-29 Digimarc Corporation Active images through digital watermarking
US8020004B2 (en) 2005-07-01 2011-09-13 Verance Corporation Forensic marking using a common customization function
US8781967B2 (en) 2005-07-07 2014-07-15 Verance Corporation Watermarking in an encrypted domain
RU2008105592A (ru) * 2005-07-14 2009-08-20 Конинклейке Филипс Электроникс Н.В. (Nl) Способ внедрения данных
US7516074B2 (en) * 2005-09-01 2009-04-07 Auditude, Inc. Extraction and matching of characteristic fingerprints from audio signals
CN102036072A (zh) * 2005-12-05 2011-04-27 汤姆逊许可证公司 用于水印检测的方法和系统
WO2007067168A1 (en) 2005-12-05 2007-06-14 Thomson Licensing Watermarking encoded content
US20070162761A1 (en) 2005-12-23 2007-07-12 Davis Bruce L Methods and Systems to Help Detect Identity Fraud
DE102005063136B3 (de) * 2005-12-30 2007-07-05 Siemens Ag Verfahren und Vorrichtung zum Generieren eines markierten Datenstroms, Verfahren und Vorrichtung zum Einfügen eines Wasserzeichens in einen markierten Datenstrom und markierter Datenstrom
DE102006005052A1 (de) * 2006-02-03 2007-08-09 Siemens Ag Verfahren und Vorrichtung zum Generieren zumindest eines nutzerspezifisch markierten Datenstroms, Verfahren und Vorrichtung zum Nachweis eines nutzerspezifisch markierten Datenstroms und ein nutzerspezifisch markierter Datenstrom
JP5132672B2 (ja) * 2006-03-17 2013-01-30 トムソン ライセンシング ディジタル透かしや他のデータを後に挿入するためにコンテンツを処理するシステム及び方法
US8102863B1 (en) 2006-06-27 2012-01-24 Qurio Holdings, Inc. High-speed WAN to wireless LAN gateway
US9654447B2 (en) 2006-08-29 2017-05-16 Digimarc Corporation Customized handling of copied content based on owner-specified similarity thresholds
US8707459B2 (en) 2007-01-19 2014-04-22 Digimarc Corporation Determination of originality of content
US8010511B2 (en) 2006-08-29 2011-08-30 Attributor Corporation Content monitoring and compliance enforcement
US8738749B2 (en) 2006-08-29 2014-05-27 Digimarc Corporation Content monitoring and host compliance evaluation
US8615778B1 (en) 2006-09-28 2013-12-24 Qurio Holdings, Inc. Personalized broadcast system
US7983440B1 (en) 2006-11-02 2011-07-19 Qurio Holdings, Inc. Selection of I-frames for client-side watermarking
US7738676B1 (en) 2006-11-02 2010-06-15 Qurio Holdings, Inc. Client-side watermarking using hybrid I-frames
US7802306B1 (en) 2006-11-30 2010-09-21 Qurio Holdings, Inc. Multiple watermarks for digital rights management (DRM) and content tracking
US8000474B1 (en) * 2006-12-15 2011-08-16 Quiro Holdings, Inc. Client-side protection of broadcast or multicast content for non-real-time playback
US9179200B2 (en) 2007-03-14 2015-11-03 Digimarc Corporation Method and system for determining content treatment
US20080181513A1 (en) * 2007-01-31 2008-07-31 John Almeida Method, apparatus and algorithm for indexing, searching, retrieval of digital stream by the use of summed partitions
US7979464B2 (en) * 2007-02-27 2011-07-12 Motion Picture Laboratories, Inc. Associating rights to multimedia content
US8135947B1 (en) 2007-03-21 2012-03-13 Qurio Holdings, Inc. Interconnect device to enable compliance with rights management restrictions
US8788848B2 (en) * 2007-03-22 2014-07-22 Microsoft Corporation Optical DNA
US8837721B2 (en) * 2007-03-22 2014-09-16 Microsoft Corporation Optical DNA based on non-deterministic errors
US9191605B1 (en) 2007-03-26 2015-11-17 Qurio Holdings, Inc. Remote monitoring of media content that is associated with rights management restrictions
US7895442B1 (en) 2007-06-18 2011-02-22 Qurio Holdings, Inc. Interconnect device to enable compliance with rights management restrictions
EP2009638A1 (en) * 2007-06-28 2008-12-31 THOMSON Licensing Video copy prevention if the difference betweeen the fingerprints before and after its modification is above a threshold
US8006314B2 (en) 2007-07-27 2011-08-23 Audible Magic Corporation System for identifying content of digital data
JP5414684B2 (ja) 2007-11-12 2014-02-12 ザ ニールセン カンパニー (ユー エス) エルエルシー 音声透かし、透かし検出、および透かし抽出を実行する方法および装置
CN101472161B (zh) * 2007-12-27 2011-04-20 华为技术有限公司 嵌入水印以及移除水印的方法和装置、水印处理系统
US8457951B2 (en) 2008-01-29 2013-06-04 The Nielsen Company (Us), Llc Methods and apparatus for performing variable black length watermarking of media
US8259938B2 (en) 2008-06-24 2012-09-04 Verance Corporation Efficient and secure forensic marking in compressed
WO2010003152A1 (en) 2008-07-03 2010-01-07 Verimatrix, Inc. Efficient watermarking approaches of compressed media
CN102187583B (zh) 2008-08-19 2013-09-11 汤姆森特许公司 基于上下文的自适应二进制算术编码(cabac)的视频流兼容性
KR101611375B1 (ko) 2008-08-19 2016-04-11 톰슨 라이센싱 압축된 비디오에서 구문 요소의 cabac/avc 준수 워터마킹
WO2010021700A1 (en) 2008-08-19 2010-02-25 Thomson Licensing A propagation map
WO2010021691A1 (en) * 2008-08-19 2010-02-25 Thomson Licensing Luminance evaluation
US8824727B2 (en) 2008-08-20 2014-09-02 Thomson Licensing Selection of watermarks for the watermarking of compressed video
US8340343B2 (en) * 2008-10-31 2012-12-25 General Instrument Corporation Adaptive video fingerprinting
US9135948B2 (en) 2009-07-03 2015-09-15 Microsoft Technology Licensing, Llc Optical medium with added descriptor to reduce counterfeiting
US20100214894A1 (en) * 2009-02-20 2010-08-26 Microsoft Corporation Optical Medium with Added Descriptor to Reduce Counterfeiting
US8199651B1 (en) 2009-03-16 2012-06-12 Audible Magic Corporation Method and system for modifying communication flows at a port level
US9015741B2 (en) * 2009-04-17 2015-04-21 Gracenote, Inc. Method and system for remotely controlling consumer electronic devices
EP2257067A1 (en) * 2009-05-29 2010-12-01 Thomson Licensing Method for inserting watermark assistance data in a bitstream, method of watermarking said bitstream, device implementing the method of watermarking and bitstream comprising the watermark assistance data
FR2949283B1 (fr) * 2009-08-19 2012-03-30 Neotion Procede et installation pour marquer en temps reel un flux video compose d'une succession d'images video codees selon la norme mpeg-2.
BR112012019745B1 (pt) 2010-02-09 2020-11-10 Contentarmor Método de detecção de marca dágua utilizando um mapa de propagação
US8838977B2 (en) 2010-09-16 2014-09-16 Verance Corporation Watermark extraction and content screening in a networked environment
EP2458890B1 (en) 2010-11-29 2019-01-23 Nagravision S.A. Method to trace video content processed by a decoder
US9195810B2 (en) 2010-12-28 2015-11-24 Microsoft Technology Licensing, Llc Identifying factorable code
US9093120B2 (en) 2011-02-10 2015-07-28 Yahoo! Inc. Audio fingerprint extraction by scaling in time and resampling
US8533481B2 (en) 2011-11-03 2013-09-10 Verance Corporation Extraction of embedded watermarks from a host content based on extrapolation techniques
US8923548B2 (en) 2011-11-03 2014-12-30 Verance Corporation Extraction of embedded watermarks from a host content using a plurality of tentative watermarks
US8615104B2 (en) 2011-11-03 2013-12-24 Verance Corporation Watermark extraction based on tentative watermarks
US8682026B2 (en) 2011-11-03 2014-03-25 Verance Corporation Efficient extraction of embedded watermarks in the presence of host content distortions
US8745403B2 (en) 2011-11-23 2014-06-03 Verance Corporation Enhanced content management based on watermark extraction records
US9323902B2 (en) 2011-12-13 2016-04-26 Verance Corporation Conditional access using embedded watermarks
US9547753B2 (en) 2011-12-13 2017-01-17 Verance Corporation Coordinated watermarking
US9008308B2 (en) * 2012-02-08 2015-04-14 Vixs Systems, Inc Container agnostic decryption device and methods for use therewith
WO2013174439A1 (en) 2012-05-24 2013-11-28 Qatar Foundation A method and system for creating depth signatures
US9571606B2 (en) 2012-08-31 2017-02-14 Verance Corporation Social media viewing system
US8726304B2 (en) 2012-09-13 2014-05-13 Verance Corporation Time varying evaluation of multimedia content
US8869222B2 (en) 2012-09-13 2014-10-21 Verance Corporation Second screen content
US9106964B2 (en) 2012-09-13 2015-08-11 Verance Corporation Enhanced content distribution using advertisements
US9081778B2 (en) 2012-09-25 2015-07-14 Audible Magic Corporation Using digital fingerprints to associate data with a work
JP5571756B2 (ja) * 2012-10-15 2014-08-13 トムソン ライセンシング ウォーターマークエンコードコンテンツ
US9262794B2 (en) 2013-03-14 2016-02-16 Verance Corporation Transactional video marking system
US9251549B2 (en) 2013-07-23 2016-02-02 Verance Corporation Watermark extractor enhancements based on payload ranking
US9208334B2 (en) 2013-10-25 2015-12-08 Verance Corporation Content management using multiple abstraction layers
PL2905970T3 (pl) 2014-02-05 2017-02-28 Nagravision S.A. Sposób i urządzenie odbiorcze skonfigurowane do oznaczania treści medialnych
CN106170988A (zh) 2014-03-13 2016-11-30 凡瑞斯公司 使用嵌入式代码的交互式内容获取
US9332522B2 (en) 2014-05-20 2016-05-03 Disney Enterprises, Inc. Audiolocation system combining use of audio fingerprinting and audio watermarking
US11611808B2 (en) 2017-05-09 2023-03-21 Verimatrix, Inc. Systems and methods of preparing multiple video streams for assembly with digital watermarking
US11057685B2 (en) * 2018-03-29 2021-07-06 Ncr Corporation Media content proof of play over optical medium
KR20220046598A (ko) 2019-08-16 2022-04-14 도쿄엘렉트론가부시키가이샤 확률 중심 결함 교정을 위한 방법 및 공정

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11341450A (ja) * 1998-05-26 1999-12-10 Nippon Hoso Kyokai <Nhk> 電子透かし埋め込み装置および電子透かし抽出装置
WO2001019071A1 (en) * 1999-09-03 2001-03-15 Meyer Thomas W Encoding of digital information

Family Cites Families (126)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4965825A (en) 1981-11-03 1990-10-23 The Personalized Mass Media Corporation Signal processing apparatus and methods
JPS5951338A (ja) * 1982-09-17 1984-03-24 Horiba Ltd 光フアイバ−結合型イオン濃度測定装置
US4792226A (en) * 1987-02-27 1988-12-20 C.F.A. Technologies, Inc. Optical fingerprinting system
US4992940A (en) 1989-03-13 1991-02-12 H-Renee, Incorporated System and method for automated selection of equipment for purchase through input of user desired specifications
US5270831A (en) 1990-09-14 1993-12-14 Eastman Kodak Company Storage and playback of digitized images in digital database together with presentation control file to define image orientation/aspect ratio
DE69230168T2 (de) * 1991-12-02 2000-04-20 Koninklijke Philips Electronics N.V. Geschlossenes Informationssystem mit Kopierschutz
US6850252B1 (en) * 1999-10-05 2005-02-01 Steven M. Hoffberg Intelligent electronic appliance system and method
US6182069B1 (en) 1992-11-09 2001-01-30 International Business Machines Corporation Video query system and method
US5337357A (en) 1993-06-17 1994-08-09 Software Security, Inc. Method of software distribution protection
US6345104B1 (en) * 1994-03-17 2002-02-05 Digimarc Corporation Digital watermarks and methods for security documents
US7171016B1 (en) 1993-11-18 2007-01-30 Digimarc Corporation Method for monitoring internet dissemination of image, video and/or audio files
US6614914B1 (en) * 1995-05-08 2003-09-02 Digimarc Corporation Watermark embedder and reader
US5748763A (en) * 1993-11-18 1998-05-05 Digimarc Corporation Image steganography system featuring perceptually adaptive and globally scalable signal embedding
US6983051B1 (en) * 1993-11-18 2006-01-03 Digimarc Corporation Methods for audio watermarking and decoding
US6625581B1 (en) 1994-04-22 2003-09-23 Ipf, Inc. Method of and system for enabling the access of consumer product related information and the purchase of consumer products at points of consumer presence on the world wide web (www) at which consumer product information request (cpir) enabling servlet tags are embedded within html-encoded documents
US7362775B1 (en) * 1996-07-02 2008-04-22 Wistaria Trading, Inc. Exchange mechanisms for digital information packages with bandwidth securitization, multichannel digital watermarks, and key management
US5943422A (en) * 1996-08-12 1999-08-24 Intertrust Technologies Corp. Steganographic techniques for securely delivering electronic digital rights management control information over insecure communication channels
US7143290B1 (en) * 1995-02-13 2006-11-28 Intertrust Technologies Corporation Trusted and secure techniques, systems and methods for item delivery and execution
EP1526472A3 (en) * 1995-02-13 2006-07-26 Intertrust Technologies Corp. Systems and methods for secure transaction management and electronic rights protection
US6411725B1 (en) * 1995-07-27 2002-06-25 Digimarc Corporation Watermark enabled video objects
US5983220A (en) 1995-11-15 1999-11-09 Bizrate.Com Supporting intuitive decision in complex multi-attributive domains using fuzzy, hierarchical expert models
US5822432A (en) * 1996-01-17 1998-10-13 The Dice Company Method for human-assisted random key generation and application for digital watermark system
US6957350B1 (en) * 1996-01-30 2005-10-18 Dolby Laboratories Licensing Corporation Encrypted and watermarked temporal and resolution layering in advanced television
JPH09231274A (ja) 1996-02-26 1997-09-05 Fujitsu Ltd 検索サーバーシステム
US5896454A (en) * 1996-03-08 1999-04-20 Time Warner Entertainment Co., L.P. System and method for controlling copying and playing of digital programs
US5664018A (en) * 1996-03-12 1997-09-02 Leighton; Frank Thomson Watermarking process resilient to collusion attacks
US6229924B1 (en) * 1996-05-16 2001-05-08 Digimarc Corporation Method and apparatus for watermarking video images
US5765176A (en) * 1996-09-06 1998-06-09 Xerox Corporation Performing document image management tasks using an iconic image having embedded encoded information
US5809139A (en) * 1996-09-13 1998-09-15 Vivo Software, Inc. Watermarking method and apparatus for compressed digital video
US5734752A (en) * 1996-09-24 1998-03-31 Xerox Corporation Digital watermarking using stochastic screen patterns
CN1482542A (zh) * 1997-01-27 2004-03-17 �ʼҷ����ֵ������޹�˾ 传递内容信息和与其相关的附加信息的方法和系统
US6009525A (en) 1997-08-29 1999-12-28 Preview Systems, Inc. Multi-tier electronic software distribution
US6467867B1 (en) * 1997-09-03 2002-10-22 Macdermid Acumen, Inc. Method and apparatus for registration and color fidelity control in a multihead digital color print engine
CN1136724C (zh) * 1997-10-08 2004-01-28 麦克罗维西恩公司 用于进行录像的单次拷贝水印标记的方法和设备
US6463426B1 (en) 1997-10-27 2002-10-08 Massachusetts Institute Of Technology Information search and retrieval system
US7154560B1 (en) * 1997-10-27 2006-12-26 Shih-Fu Chang Watermarking of digital image data
US6208745B1 (en) * 1997-12-30 2001-03-27 Sarnoff Corporation Method and apparatus for imbedding a watermark into a bitstream representation of a digital image sequence
US6373960B1 (en) * 1998-01-06 2002-04-16 Pixel Tools Corporation Embedding watermarks into compressed video data
JP2000048478A (ja) * 1998-05-26 2000-02-18 Yamaha Corp ディジタルコピー制御方法及びそれを用いた装置
US7644282B2 (en) * 1998-05-28 2010-01-05 Verance Corporation Pre-processed information embedding system
US6611812B2 (en) * 1998-08-13 2003-08-26 International Business Machines Corporation Secure electronic content distribution on CDS and DVDs
US6226618B1 (en) * 1998-08-13 2001-05-01 International Business Machines Corporation Electronic content delivery system
US6188728B1 (en) * 1998-09-29 2001-02-13 Sarnoff Corporation Block motion video coding and decoding
US6260024B1 (en) 1998-12-02 2001-07-10 Gary Shkedy Method and apparatus for facilitating buyer-driven purchase orders on a commercial network system
US6563935B1 (en) * 1998-12-02 2003-05-13 Hitachi, Ltd. Method of extracting digital watermark information and method of judging bit value of digital watermark information
US6366910B1 (en) 1998-12-07 2002-04-02 Amazon.Com, Inc. Method and system for generation of hierarchical search results
DE60045377D1 (de) 1999-03-30 2011-01-27 Tivo Inc Fernsehbetrachterschnittstellensystem
US6629097B1 (en) 1999-04-28 2003-09-30 Douglas K. Keith Displaying implicit associations among items in loosely-structured data sets
US6192139B1 (en) * 1999-05-11 2001-02-20 Sony Corporation Of Japan High redundancy system and method for watermarking digital image and video data
US6522769B1 (en) * 1999-05-19 2003-02-18 Digimarc Corporation Reconfiguring a watermark detector
US6701305B1 (en) 1999-06-09 2004-03-02 The Boeing Company Methods, apparatus and computer program products for information retrieval and document classification utilizing a multidimensional subspace
GB2351405B (en) * 1999-06-21 2003-09-24 Motorola Ltd Watermarked digital images
US7610233B1 (en) * 1999-12-22 2009-10-27 Accenture, Llp System, method and article of manufacture for initiation of bidding in a virtual trade financial environment
US7426750B2 (en) 2000-02-18 2008-09-16 Verimatrix, Inc. Network-based content distribution system
AU2001249848A1 (en) 2000-04-04 2001-10-15 Ecd Systems, Inc. Method and system for digital data delivery and reproduction
US7111168B2 (en) * 2000-05-01 2006-09-19 Digimarc Corporation Digital watermarking systems
JP2004501555A (ja) 2000-05-26 2004-01-15 キヤノン株式会社 コンテンツ作成方法およびコンテンツ再生装置およびその方法
US6714683B1 (en) * 2000-08-24 2004-03-30 Digimarc Corporation Wavelet based feature modulation watermarks and related applications
US7181625B2 (en) * 2000-10-17 2007-02-20 Vidius Inc. Secure distribution of digital content
US6694041B1 (en) * 2000-10-11 2004-02-17 Digimarc Corporation Halftone watermarking and related applications
US6889383B1 (en) 2000-10-23 2005-05-03 Clearplay, Inc. Delivery of navigation data for playback of audio and video content
JP3431593B2 (ja) * 2000-10-31 2003-07-28 株式会社東芝 コンテンツ生成装置、電子透かし検出装置、コンテンツ生成方法、電子透かし検出方法及び記録媒体
US20020116707A1 (en) 2000-12-11 2002-08-22 Morris Richard M. Streaming media client system and method
US20020114795A1 (en) 2000-12-22 2002-08-22 Thorne Kevin J. Composition and process for bone growth and repair
US20020087876A1 (en) 2000-12-28 2002-07-04 Larose Gordon Edward Adaptive software installation process supporting multiple layers of security-related attributes
US7251833B2 (en) 2000-12-29 2007-07-31 International Business Machines Corporation Digital media delivery with local cache and streaming tokens
US6678009B2 (en) 2001-02-27 2004-01-13 Matsushita Electric Industrial Co., Ltd. Adjustable video display window
FR2822261A1 (fr) 2001-03-16 2002-09-20 Thomson Multimedia Sa Procede de navigation par calcul de groupes, recepteur mettant en oeuvre le procede, et interface graphique pour la presentation du procede
JP2002278996A (ja) 2001-03-22 2002-09-27 Sony Corp 記録装置および記録方法、並びに記録媒体
US6728213B1 (en) * 2001-03-23 2004-04-27 Advanced Micro Devices, Inc. Selective admission control in a network device
US7016496B2 (en) 2001-03-26 2006-03-21 Sun Microsystems, Inc. System and method for storing and accessing digital media content using smart card technology
US20030163815A1 (en) 2001-04-06 2003-08-28 Lee Begeja Method and system for personalized multimedia delivery service
JP3983993B2 (ja) 2001-04-13 2007-09-26 株式会社日立製作所 顔写真付き申請書データ作成方法及びその実施装置並びにその処理プログラム
US6973574B2 (en) 2001-04-24 2005-12-06 Microsoft Corp. Recognizer of audio-content in digital signals
US6996273B2 (en) 2001-04-24 2006-02-07 Microsoft Corporation Robust recognizer of perceptually similar content
US6975743B2 (en) 2001-04-24 2005-12-13 Microsoft Corporation Robust and stealthy video watermarking into regions of successive frames
US7502937B2 (en) * 2001-04-30 2009-03-10 Digimarc Corporation Digital watermarking security systems
US20020174021A1 (en) 2001-05-15 2002-11-21 International Business Machines Corporation Optimized shopping list process
US20020178077A1 (en) 2001-05-25 2002-11-28 Katz Steven Bruce Method for automatically invoking a software module in response to an internal or external event affecting the procurement of an item
KR20030006533A (ko) 2001-07-13 2003-01-23 삼성전자 주식회사 영상 재생 시스템의 재생 제한 레벨 제어 방법 및 장치
GB2379115A (en) 2001-08-21 2003-02-26 Sony Uk Ltd Introducing test signals into a data signal
US20030110503A1 (en) 2001-10-25 2003-06-12 Perkes Ronald M. System, method and computer program product for presenting media to a user in a media on demand framework
KR100860174B1 (ko) 2001-12-06 2008-09-24 엘지전자 주식회사 영상 표시 장치 및 그 운용방법
US7032177B2 (en) 2001-12-27 2006-04-18 Digeo, Inc. Method and system for distributing personalized editions of media programs using bookmarks
US20030139971A1 (en) 2002-01-18 2003-07-24 Edulink, Inc. System and method for automating a purchase approval process
US6957232B2 (en) 2002-04-05 2005-10-18 Infocus Corporation Projector control markup language
US7120297B2 (en) * 2002-04-25 2006-10-10 Microsoft Corporation Segmented layered image system
US7231607B2 (en) 2002-07-09 2007-06-12 Kaleidescope, Inc. Mosaic-like user interface for video selection and display
US7246322B2 (en) 2002-07-09 2007-07-17 Kaleidescope, Inc. Grid-like guided user interface for video selection and display
US7003131B2 (en) 2002-07-09 2006-02-21 Kaleidescape, Inc. Watermarking and fingerprinting digital content using alternative blocks to embed information
WO2004006579A1 (en) 2002-07-09 2004-01-15 Kaleidescape, Inc. Content and key distribution system for digital content representing media streams
US7111171B2 (en) * 2002-07-09 2006-09-19 Kaleidescope, Inc. Parallel distribution and fingerprinting of digital content
US7188248B2 (en) 2002-07-09 2007-03-06 Kaleidescope, Inc. Recovering from de-synchronization attacks against watermarking and fingerprinting
US9445133B2 (en) 2002-07-10 2016-09-13 Arris Enterprises, Inc. DVD conversion for on demand
US7046820B2 (en) * 2002-07-16 2006-05-16 Matsushita Electric Industrial Co., Ltd. Methods for digital watermarking of images and images produced thereby
AU2003285891A1 (en) * 2002-10-15 2004-05-04 Digimarc Corporation Identification document and related methods
US7526114B2 (en) * 2002-11-15 2009-04-28 Bioarray Solutions Ltd. Analysis, secure access to, and transmission of array images
US7333001B2 (en) * 2002-11-23 2008-02-19 Kathleen Lane Secure personal RFID documents and method of use
US7494060B2 (en) * 2002-12-10 2009-02-24 Anthony Zagami Information-based access control system for sea port terminals
US7187415B2 (en) 2002-12-12 2007-03-06 Ati Technologies, Inc. System for detecting aspect ratio and method thereof
US7072496B2 (en) * 2002-12-20 2006-07-04 Motorola, Inc. Slap print segmentation system and method
US20040166484A1 (en) 2002-12-20 2004-08-26 Mark Alan Budke System and method for simulating training scenarios
US8225194B2 (en) 2003-01-09 2012-07-17 Kaleidescape, Inc. Bookmarks and watchpoints for selection and presentation of media streams
WO2004070998A2 (en) 2003-01-31 2004-08-19 Kaleidescape, Inc. Recovering from de-synchronization attacks against watermarking and fingerprinting
US20050004873A1 (en) 2003-02-03 2005-01-06 Robin Pou Distribution and rights management of digital content
US20040166915A1 (en) 2003-02-20 2004-08-26 Jerry Robarge Interactive game with visual video interface
US7730407B2 (en) 2003-02-28 2010-06-01 Fuji Xerox Co., Ltd. Systems and methods for bookmarking live and recorded multimedia documents
US8572104B2 (en) 2003-04-18 2013-10-29 Kaleidescape, Inc. Sales of collections excluding those already purchased
US20050086069A1 (en) 2003-07-15 2005-04-21 Kaleidescape, Inc. Separable presentation control rules with distinct control effects
US20050125405A1 (en) 2003-04-18 2005-06-09 Kaleidescape, Inc. Distinct display of differentiated rights in property
US20050050103A1 (en) 2003-07-15 2005-03-03 Kaleidescape Displaying and presenting multiple media streams from multiple DVD sets
US20070118812A1 (en) 2003-07-15 2007-05-24 Kaleidescope, Inc. Masking for presenting differing display formats for media streams
EP1656623A4 (en) 2003-07-15 2006-10-18 Kaleidescape Inc MASKING FOR PRESENTING DIFFERENT DISPLAY FORMATS FOR MULTIMEDIA STREAMS
WO2006025833A1 (en) 2003-07-15 2006-03-09 Kaleidescape, Inc. Displaying and presenting multiple media streams for multiple dvd sets
US8422043B2 (en) * 2003-09-12 2013-04-16 Oki Data Corporation Watermarked document reading apparatus with improved error processing
KR100506661B1 (ko) * 2003-10-02 2005-08-10 한국전자통신연구원 웨이블릿 최저주파수 대역에서의 디지털 워터마크 삽입 및추출 방법
US7369677B2 (en) * 2005-04-26 2008-05-06 Verance Corporation System reactions to the detection of embedded watermarks in a digital host content
JP3832660B2 (ja) 2003-10-29 2006-10-11 株式会社Nttファシリティーズ 充電装置
US8032754B2 (en) 2004-01-09 2011-10-04 Microsoft Corporation Systems and methods for embedding media forensic identification markings
US7257732B2 (en) 2004-02-13 2007-08-14 Kaleidescape, Inc. Integrating content-laden media with storage system
US20050201726A1 (en) 2004-03-15 2005-09-15 Kaleidescape Remote playback of ingested media content
US7172115B2 (en) * 2004-04-02 2007-02-06 Riptide Systems, Inc. Biometric identification system
US20060126599A1 (en) * 2004-11-22 2006-06-15 Tarn Liang C Integrated message system with gateway functions and method for implementing the same
JP5055813B2 (ja) 2006-04-10 2012-10-24 富士電機株式会社 Soi横型半導体装置
US7730043B1 (en) * 2006-06-29 2010-06-01 Adobe Systems Incorporated Incremental batch-mode editing of digital media objects
US8557411B2 (en) 2009-08-14 2013-10-15 Samsung Sdi Co., Ltd. Secondary battery with a connection tab folded around an insulator and method of manufacturing the same

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11341450A (ja) * 1998-05-26 1999-12-10 Nippon Hoso Kyokai <Nhk> 電子透かし埋め込み装置および電子透かし抽出装置
WO2001019071A1 (en) * 1999-09-03 2001-03-15 Meyer Thomas W Encoding of digital information

Also Published As

Publication number Publication date
EP1529262A4 (en) 2010-12-22
US7181044B2 (en) 2007-02-20
US20040008864A1 (en) 2004-01-15
JP2011172232A (ja) 2011-09-01
US20070242862A1 (en) 2007-10-18
US7003131B2 (en) 2006-02-21
EP1529262A1 (en) 2005-05-11
EP1529262B1 (en) 2012-09-05
US20120237078A1 (en) 2012-09-20
US8189854B2 (en) 2012-05-29
JP2005533410A (ja) 2005-11-04
WO2004006168A1 (en) 2004-01-15
AU2003259108A1 (en) 2004-01-23
US20060072786A1 (en) 2006-04-06

Similar Documents

Publication Publication Date Title
JP4860149B2 (ja) デジタルコンテンツマーキング方法、デジタルコンテンツ内のフィンガープリントを検出する方法、デジタルコンテンツ、デジタルコンテンツに透かしを入れる装置、透かしを入れたデジタルコンテンツにフィンガープリントをほどこす装置、デジタルコンテンツ内のフィンガープリントを検出する装置、およびインストラクションを含む情報を格納するメモリ
EP0859503B1 (en) Electronic watermark system
US7568105B2 (en) Parallel distribution and fingerprinting of digital content
US8995711B2 (en) Efficient watermarking approaches of compressed media
US7006661B2 (en) Digital watermarking systems and methods
JP4785317B2 (ja) レンダリングコマンドとしてのトランスマーキング透かし埋め込み機能およびマルチメディア信号の特徴に基づく透かし埋め込み処理
US20240236444A9 (en) Watermarking multimedia fragments into two or more variants
JP4100674B2 (ja) データ処理装置及びデータ処理方法
Thanh et al. A proposal of digital rights management based on incomplete cryptography using invariant Huffman code length feature
Caldelli et al. Joint near-lossless compression and watermarking of still images for authentication and tamper localization
Linnartz et al. MPEG PTY-marks: Cheap detection of embedded copyright data in DVD-video
JP2005217598A (ja) 電子透かし埋め込み装置,電子透かし検出装置,電子透かし埋め込み方法,および電子透かし検出方法
JP2014175757A (ja) 分割要素の結合による電子透かしを生成する電子透かし処理システム、サーバ、プログラム及び方法
JP2004120141A (ja) アクセス制御システム
KR20240110212A (ko) 오디오 워터마크 활용 방법과 그 장치, 오디오 워터마크를 삽입하여 제작한 오디오 저작물의 권리보호 방법 및 그 장치
Goyal et al. Comparative Study of Spatial Watermarking of Various Video formats
Abhishek Basu et al. On the Implementation of Copyright
Busser et al. Executive Commitee
Nguyen et al. THE COMBINATION OF WATERMARKING ALGORITHMS FOR MP4 VIDEO

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060704

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060704

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20080625

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100119

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100416

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100423

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100519

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100526

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100618

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100625

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100716

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101026

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110225

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110411

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110426

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20110706

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110713

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110721

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20110721

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111012

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111101

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111102

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141111

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees