JP2000106627A - デ―タ配信方法 - Google Patents

デ―タ配信方法

Info

Publication number
JP2000106627A
JP2000106627A JP11209223A JP20922399A JP2000106627A JP 2000106627 A JP2000106627 A JP 2000106627A JP 11209223 A JP11209223 A JP 11209223A JP 20922399 A JP20922399 A JP 20922399A JP 2000106627 A JP2000106627 A JP 2000106627A
Authority
JP
Japan
Prior art keywords
color
information
data
image
embedded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP11209223A
Other languages
English (en)
Other versions
JP3853541B2 (ja
Inventor
Akira Yoda
章 依田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Holdings Corp
Original Assignee
Fuji Photo Film Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Photo Film Co Ltd filed Critical Fuji Photo Film Co Ltd
Priority to JP20922399A priority Critical patent/JP3853541B2/ja
Priority to US09/363,892 priority patent/US7194635B1/en
Publication of JP2000106627A publication Critical patent/JP2000106627A/ja
Application granted granted Critical
Publication of JP3853541B2 publication Critical patent/JP3853541B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00838Preventing unauthorised reproduction
    • H04N1/0084Determining the necessity for prevention
    • H04N1/00854Recognising an unauthorised user or user-associated action
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/10Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/10Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]
    • G06F21/16Program or content traceability, e.g. by watermarking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00838Preventing unauthorised reproduction
    • H04N1/0084Determining the necessity for prevention
    • H04N1/00843Determining the necessity for prevention based on recognising a copy prohibited original, e.g. a banknote
    • H04N1/00846Determining the necessity for prevention based on recognising a copy prohibited original, e.g. a banknote based on detection of a dedicated indication, e.g. marks or the like
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00838Preventing unauthorised reproduction
    • H04N1/00856Preventive measures
    • H04N1/00875Inhibiting reproduction, e.g. by disabling reading or reproduction apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32203Spatial or amplitude domain methods
    • H04N1/32251Spatial or amplitude domain methods in multilevel data, e.g. greyscale or continuous tone data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H04N2201/3205Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of identification information, e.g. name or ID code
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3233Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of authentication information, e.g. digital signature, watermark
    • H04N2201/3236Details of authentication information generation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3271Printing or stamping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3278Transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/328Processing of the additional information
    • H04N2201/3281Encryption; Ciphering

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Technology Law (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Facsimile Transmission Control (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Computer And Data Communications (AREA)
  • Image Processing (AREA)

Abstract

(57)【要約】 【課題】 画像データ等のデータを配信する際に、デー
タを受け取った人を特定可能とし、また、受け取ったデ
ータ範囲を確実に証明可能とする。 【解決手段】 画像データや音声データ等のデータ120
を公衆回線ネットワーク111経由で配信する際に、その
データ120の所定範囲に亘って、データ配信を受ける受
信者毎に埋め込み位置を変えて特定の情報を埋め込んで
おく。受信者側では、埋め込み位置を知らされている情
報読出し手段114を用いて上記特定の情報を読み出すと
ともに、その読み出した情報を受信者を特定する情報と
共に暗号化して出力する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は画像データ等のデー
タを配信する方法に関し、特に詳細には、データ受取人
を特定可能で、また、受け取ったデータ範囲を証明可能
としたデータ配信方法に関するものである。
【0002】また本発明は、上述のようなデータ配信方
法を実行するソフトウェアを記憶した記憶媒体に関する
ものである。
【0003】
【従来の技術】例えば電子情報通信学会論文誌D−2,
Vol.J80-d-2 No.5,1997に示されているように、デジタ
ル画像データを公衆回線ネットワーク経由で不特定多数
の利用者に配信するシステムが知られている。このシス
テムは、画像提供者と利用者双方にとって効率の良いシ
ステムとして期待されている。
【0004】このようなシステムを利用して、従来は紙
を媒介として配布していた出版物をネットワーク経由で
配信するいわゆる電子配布印刷(Distributed Press)
も、重要な方式として注目されている。なかでも広告や
商品カタログの配信を電子的に行ない、それらを一般消
費者の家庭でプリントさせるケースは、その情報を希望
する利用者のみに情報を提供できるため無駄がなく、か
つ提供者側も潜在顧客情報を収集することができるた
め、ダイレクトメールに代わる優れた宣伝媒体として注
目されている。
【0005】
【発明が解決しようとする課題】ところで、このような
商用の配布物の作成コストは、本来、情報提供者側が負
担すべきものであるが、現状ではデータアクセスにかか
る通信費やプリント用の消耗品代、電気代など全てがユ
ーザー負担となってしまう。このことが、上述の優れた
情報配信システムの普及を妨げる一因となっている。
【0006】これに対し、例えば広告ページをダウンロ
ードする際にIDを入力させるなどして、ユーザー側に
情報プリント費用をキャッシュバックすることも考えら
れているが、その場合には、実際にプリントしたことを
確認する手段が無いことがシステム普及の妨げとなる。
【0007】他方、特開平9−191394号に示され
るように、デジタル画像データに対してその関連情報を
「電子透かし」として埋め込む方法が提案されている。
この電子透かしは、それを埋め込んでいるデータが本来
の用途に供された際に、人間の通常の感覚では認識され
ないような深層付加情報としてデータに埋め込まれるも
のである。すなわち、例えば画像データに埋め込まれる
深層付加情報は、その画像データが画像再生に供された
とき、該深層付加情報が示す内容は視認されないよう
に、例えば極めて高い空間周波数に対応する信号成分中
に埋め込まれる。
【0008】この電子透かしの技術を利用すれば、コン
テンツである画像データと不可分に付加情報を埋め込み
可能であるため、実際に画像データ全てをダウンロード
しないと情報を取り出せないように設定することが可能
であり、情報を取り出せたことによって広告データをフ
ルにアクセスしたことを証明できる。
【0009】ところが、取り出した情報を別の画像に埋
め込んで配信すると、広告データのすり替えなど不正な
利用も可能となってしまう。また抽出したデータのコピ
ーを他者に配布して不正請求させることも可能になる
等、様々な問題が生じる可能性がある。
【0010】こうした点から、広告宣伝ページのデータ
のクライアント側でのダウンロードを確実に立証できる
方式が望まれている。
【0011】また以上は、画像データを配信する場合の
問題について説明したが、音楽等を表す音声データや、
その他のデータを不特定多数の利用者に配信する場合に
も、同様の要求が存在する。
【0012】本発明は上記の事情に鑑みてなされたもの
であり、画像データなどのデータを受け取った人を特定
可能で、また、受け取ったデータ範囲を確実に証明可能
なデータ配信方法を提供することを目的とする。
【0013】
【課題を解決するための手段】本発明によるデータ配信
方法は、画像データや音声データ等のデータを配信する
データ配信方法において、データ配信者側では、画像デ
ータや音声データ等のデータの所定範囲に亘って埋め込
み位置を特定して特定の情報を埋め込み、データ配信を
受ける受信者側においては、上記埋め込み位置を知らさ
れている情報読出し手段を用いて前記特定の情報を読み
出すとともに、その読み出した情報を受信者を特定する
情報と共に暗号化して出力することを特徴とするもので
ある。
【0014】なおこのデータ配信方法の好ましい実施形
態においては、上記埋め込み位置が、データ配信を受け
る受信者毎に変えられる。また上記画像データや音声デ
ータ等のデータは、例えば公衆回線ネットワーク経由で
配信することができるし、あるいはそれに限らず、フロ
ッピ・ディスク等に記憶させた形態で配信することもで
きる。
【0015】また本発明のデータ配信方法において、好
ましくは、受信者側のプリンタで情報読出しが行なわ
れ、このプリンタから該プリンタを特定する情報が、受
信者を特定する情報として出力される。
【0016】さらに、上記の暗号化された出力は、公衆
回線ネットワークを経由させる等してデータ配信者側に
戻されるのが望ましい。
【0017】また本発明は、上述の通りのデータ配信方
法を実行するソフトウェアを記憶した記憶媒体も提供す
るものである。
【0018】
【発明の効果】本発明のデータ配信方法では、データ配
信者が受信者毎に埋め込み位置を変える等して特定の情
報を埋め込み、受信者側においては、埋め込み位置を知
らされている情報読出し手段を用いて上記特定の情報を
読み出すようにしているので、通常は、データ配信者が
意図した受信者のみが上記特定の情報を読み出し可能で
あると考えることができる。つまり、上記特定の情報を
読み出せたということ自体が、読み出し者がデータ配信
者が意図した受信者であったことを証明していると言え
る。
【0019】そこで、受信者側から暗号化して出力され
た埋め込み情報および受信者特定情報をデータ配信者側
でデコードしたとき、そこで埋め込み情報が正しく記述
されていれば、該情報が埋め込まれた範囲のデータが、
データ配信者が意図した受信者側に配信されたことを確
認できる。
【0020】また受信者を特定する情報を確認すること
により、データを受け取った人を特定可能であり、そこ
で、それを根拠にしてプリント費用の支払いを決めるこ
とができ、また、受信者がプリント費用を重複請求して
いないかどうか等を確認することもできる。
【0021】そして、埋め込み情報と受信者を特定する
情報とは共に暗号化して出力されるから、悪意を持った
者がこのデータを分析して他のコンテンツに埋め込んだ
り、あるいは受信者特定情報を変更する等のことは至難
となる。
【0022】なお上記の埋め込み位置は、特に受信者毎
に変えなくても、データ配信者が決定した特定のものと
しておけばよい。つまりそのような場合は、データ配信
者が意図した受信者のみを対象として秘匿的にその埋め
込み位置を知らせるようにすれば、データ配信者が意図
していない受信者が埋め込み位置を知ってしまうことを
防止できる。
【0023】
【発明の実施の形態】以下図面を参照して、本発明の実
施の形態を説明する。図1は、本発明のデータ配信方法
を実施するシステムの一例を示すものである。なおここ
では、画像データ配信サーバーによる静止画データの配
信を考えるが、音声・動画データ等のその他のデータを
配信する場合も同様に考えることができる。
【0024】画像サーバー110には、多数枚の画像につ
いての画像データが収容されている。それらの画像デー
タには著作権者の情報が付帯している。画像サーバー11
0は公衆回線ネットワーク111に接続されて、不特定多数
のクライアント(顧客)から接続および画像配信要求を
受けられるようになっている。また画像サーバー110に
は、画像データ120に対して関連情報を不可分に埋め込
むことができる透かしエンコーダ112が接続されてお
り、この透かしエンコーダ112で画像データ120に、著作
権者情報等の提供者側情報(特定情報)が画像データと
不可分に埋め込まれる。なおこの提供者側情報は、必要
に応じて暗号化されてもよい。
【0025】この情報埋め込み処理には、例えば以下の
ような方法を用いる。まず著作者の原画像をO(n×m
画素、8bit3色)とする。この画像を3×3画素のブ
ロックaijに分割する。なおi=1,・・n/3、j=1,・
・m/3である。ここでaijは、各色8個のビットプレ
ーンRaij(p)、Gaij(p)、Baij(p)[p=
1、・・8]に分割することが可能である。この各々の
ビットプレーンは3×3bitの集まりであり、1バイト
+1bitの情報を表すことができる。
【0026】このビットプレーンに対し、ブロック毎に
色やpをランダムに変えながら埋め込みを行なえばその
位置を秘匿できる。画像の所有者、つまりこの場合には
サーバー管理者のみが知りうる方法で上記の埋め込み位
置を変えながら情報を埋め込めば、第三者に知られるこ
となく所有者側情報と利用者情報を不可分に埋め込むこ
とができる。またこの埋め込み位置を最適に調整するこ
とにより、画質劣化を最小に抑えることも可能である。
【0027】上記画像サーバー110には、公衆回線ネッ
トワーク111を介してプリンタ113が接続されるようにな
っている。このプリンタ113には、読出し装置(デコー
ダ)114が内蔵されている。この読出し装置114は、予め
登録されたユーザー(データ受信者)毎にデータ配信者
から提供されるものであり、そこには各プリンタ毎に固
有に割り振られたプリンタ番号が記憶されている。
【0028】そして、データ受信者が画像配信要求を出
す際、各プリンタ113の読出し装置114から画像サーバー
110側に上記プリンタ番号を伝える等により、そのプリ
ンタ113でのみ解釈可能な位置に前記提供者側情報が埋
め込まれる。読出し装置114は、配信された画像データ1
20を一旦バッファに保存し、そこで提供者側情報の読出
し処理を行なう。またプリンタ113は、画像データ120に
基づいてハードコピー121を出力する。
【0029】読出し装置114は、読み出した提供者側情
報を、プリンタ固有のIDなど受信側を特定する情報
(受信者ID)とともに所定の暗号化アルゴリズムによ
り暗号化し、出力する。この出力の形態としては、例え
ばプリンタ113のディスプレイに表示する、ハードコピ
ー121の画像枠外に印字する等、種々の形態を採用する
ことができる。
【0030】この暗号化されたデータは、例えば公衆回
線ネットワーク111を介して画像配信者側に返信され
る。画像配信者側は、所定のアルゴリズムに従って暗号
をデコードし、画像埋め込み情報(提供者側情報)部分
と受信側特定情報(受信者ID)部分とに分離する。そ
こで画像埋め込み情報部分が正しく記述されていれば、
その情報が埋め込まれた範囲の画像データ120が確実に
プリンタ113に渡されたことを確認できる。その理由
は、先に詳しく説明した通りである。
【0031】そして、これらの提供者側情報と受信者I
Dは、配信画像がプリントされたことを示すものとし
て、例えばプリント経費請求時の証明として用いられ
る。その際、受信者IDを確認すれば、その受信者がプ
リント費用を重複請求していないかどうか等も確認可能
である。
【0032】また、提供者側情報と受信者IDとは共に
暗号化して出力されるから、悪意を持った者がこのデー
タを分析して他のコンテンツに埋め込んだり、あるいは
受信者IDを変更する等のことは至難となる。
【0033】以上は、埋め込み情報読み出し手段がプリ
ンタに内蔵された場合について説明したが、CRT等の
ディスプレイで画像を表示する場合でも、本発明の方法
を同様に実施することが可能である。その場合には、専
用のビュワーソフトに埋め込み情報検出機能を付加し、
音声、動画等のデジタルコンテンツを再生し終わった段
階で、埋め込み情報と受信者側情報を共に暗号化して出
力させるとよい。
【0034】次に、図2を参照して本発明の別の実施形
態について説明する。この実施形態は、一例としてある
企業がその広告用カレンダーをユーザー(顧客)に配信
するために本発明を適用したものであり、図2はそのた
めのデータ配信システムの概略を示している。なお同図
では、頭に「S」の付いた番号で各種処理を示し、
「P」の付いた番号で各種データ類を示している。
【0035】図示の通りここでは、企業側のサーバーコ
ンピュータシステム(以下、企業サーバーという)P1
と、ユーザー側のクライアントコンピュータシステム
(以下、クライアントコンピュータという)P30との
間で配信画像データを含む各種データが送受されるよう
になっている。なおこのデータの送受は、例えばインタ
ーネットや、あるいは専用のネットワークを利用して行
なわれる。
【0036】その企業のカレンダーを受け取りたいユー
ザーは、クライアントコンピュータP30を操作して企
業サーバーP1にアクセスし、企業サーバーI/F(イ
ンターフェイス)P2にコンテンツ要求を入力し(ステ
ップS31)、カレンダーのダウンロード画面を開かせ
る。そのダウンロード画面においては、ダウンロードに
先立ってユーザー側の情報および、企業側から予め与え
られているパスワード(PW)を入力する要求が出され
る(ステップS3)。ユーザーはこの要求を見て、住
所、氏名等の一般情報並びにパスワードを入力する(ス
テップS32)。これにより企業側は、ユーザー情報を
得ることができる。
【0037】企業サーバーP1は、このようにして入力
されたパスワードP33を受けると、提供する広告情報
を含むコンテンツP5の特に広告情報部分に、電子透か
しとして企業側の特定情報(企業ID)P4を埋め込む
(ステップS6)。この特定情報としては、会社名や商
品名など様々なものが適用可能である。この情報埋め込
みは特定の透かし埋め込みソフトを用いて行なわれ、そ
のアルゴリズムに従って、ユーザーのパスワードに応じ
て位置を変えて情報を埋め込むことが可能になってい
る。以上のようにして電子透かしが埋め込まれたコンテ
ンツ、すなわちWM(ウォーターマーク)コンテンツP
7は、クライアントコンピュータP30に転送される。
【0038】上記電子透かし埋め込みの方法としては、
例えば色変換時に生じる色座標の空孔を利用する方法を
利用することができ、その場合には、情報を埋め込む色
座標の位置をユーザーのパスワードに応じて変化させる
のが望ましい。なお、この色座標を利用する情報埋込み
方法については、後に詳しく説明する。
【0039】ユーザーは、前述のダウンロード画面から
ダウンロードした画像データを自前のプリンターでプリ
ントすれば、カレンダーとして使用可能である。また、
所定の写真ラボ(現像所)が提供する専用のプリンター
ドライバーでラボ注文用の画像ファイルを作成し、それ
をラボに送信あるいは持参すれば、極めて高品質のカレ
ンダープリントを得ることができる。
【0040】しかし、ラボでのプリントに要する費用は
ユーザーの自己負担となるため、ユーザーにとってその
企業の広告付きのカレンダーは、費用を考えると魅力が
少ないこともあり得る。特に広告部分のプリントは、ユ
ーザーにとっては価値が少ない上に、プリントコストを
増やす要因でもあるので、ダウンロードしたデジタルデ
ータ上で広告部分を削除してプリントする方が得策とな
る。
【0041】本実施形態は、このようなユーザー側の事
情も考慮し、広告部分も入ったカレンダーがプリントさ
れるようにしたものである。すなわち、特定の電子透か
し読み出しソフトを内蔵したプリンター、またはプリン
タードライバーを使用したラボプリント注文の場合に
は、ユーザーは以下のようにして料金負担無しでプリン
トが可能となる。以下、プリンタードライバー使用とし
た本実施形態におけるラボプリントについて説明する。
【0042】クライアントコンピュータP30は、企業
サーバーP1から転送されていたウォーターマークコン
テンツP7に電子透かしが埋め込まれていることを検知
すると、ユーザーにラボプリント指定およびパスワード
入力を促す。ステップS34において正しいパスワード
入力を伴ってラボプリント指定がなされると、クライア
ントコンピュータP30内のプリンタードライバーは、
ウォーターマークコンテンツP7から画像に埋め込まれ
ている電子透かし情報を読み出す(ステップS35)。
【0043】プリンタードライバーは、電子透かし情報
を完全に読み出すと、電子透かしが示している企業側特
定情報(企業ID)P36と、プリンタードライバーソ
フトに設けられているドライバー毎に固有のID情報P
37とを合わせた合成情報P39を作成し、それを暗号
化して(ステップS38)ファイルとして出力するとと
もに、その情報を注文ファイルP41に電子透かしの形
で埋め込む(ステップS40)。なおこのとき、ユーザ
ーがカレンダーの広告部分を切り取ったり、あるいは一
部分しかプリント指定しなかった場合は、埋め込み情報
が正しく作成されない。
【0044】上記の暗号化ファイル情報は、ネットワー
クを介して企業サーバーP1に転送される。企業サーバ
ーP1はその暗号化された情報を復号して解読し(ステ
ップS10)、記憶している顧客履歴P8および企業I
DP4と、解読した合成情報P9が示す埋め込み情報お
よびドライバーID等を照合し(ステップS11)、そ
の情報の元になったコンテンツが本当にその企業のもの
であるか、ユーザーはプリント料金を重複請求していな
いか等を確認する(ステップS12)。
【0045】企業サーバーP1はその確認により不正が
無いと判断した場合は、ユーザーに向けてプリントチケ
ット情報P14を発行し、それを暗号化し(ステップS
15)、ネットワークを介してクライアントコンピュー
タP30に転送する。このプリントチケット情報P14
には、前記注文ファイルP41に埋め込まれた情報に対
応する情報が含まれている。なお、ステップS12にお
いて不正が認められた場合、処理はそこで終了する(ス
テップS13)。
【0046】ユーザーは、前記注文ファイルP41およ
び、ネットワークを介して受け取ったプリントチケット
情報P14をラボに持ち込む。なお、この持ち込みの代
わりに、ネットワークを介して情報の転送を行なうよう
にしても構わない。ラボでは、専用のコンピュータシス
テム(以下、ラボコンピュータシステムという)P50
によって以下の処理がなされる。
【0047】まずラボコンピュータシステムP50は、
暗号化されているプリントチケット情報P42を復号す
る(ステップS51)とともに、注文ファイルP41の
画像に埋め込まれた情報を専用の透かし読み出しソフト
によって読み出し(ステップS52)、両者を照合する
(ステップS55)。この照合により、プリントチケッ
トと注文画像とが相対応しているか否かを判別し(ステ
ップS54)、相対応していれば、ラボはユーザーのプ
リント料金は無料とし、それを企業への課金P56によ
って得る。一方、プリントチケットと注文画像とが相対
応していない場合、ラボはユーザーに有料のプリント料
金P53を提示し、それをユーザーから直接受け取る。
【0048】以上説明した実施形態によれば、悪意有る
者からの妨害がない状態で、企業側が本来のユーザーに
対して広告情報付きのコンテンツ配信サービスを行なう
ことが可能になる。
【0049】なおこの実施形態では、画像への埋め込み
情報を抽出して企業側に確認するプロセスをユーザー側
で行なっているが、埋め込み情報を抽出してプリンター
ドライバーIDとともに注文ファイルP41に透かしの
形で埋め込み、企業側への確認はラボにおいて行なうこ
とも可能である。
【0050】また上記の例で、画像全面に異なる情報を
埋め込み、一部しかプリントしなかった場合(例えば1
年分のカレンダーのうち何か月分だけしかプリントしな
かった場合)等は、プリント面積に応じて料金を変える
ことも可能である。また、広告部分を含む画像領域に電
子透かしを埋め込み、ある部分は別画像(ユーザーの画
像等)に入れ替えるようなことも可能である。
【0051】次に図3以下を参照して、色座標を利用す
る情報埋込み方法について説明する。図3は色座標を利
用する情報埋込み方法の第1例を実施する情報埋込装置
の構成を示す概略ブロック図である。図3に示すように
この情報埋込装置は、画像データS0を色変換するとと
もに、後述するようにコード化された付帯情報H1を埋
め込んで、付帯情報H1が埋め込まれた画像データS1
を作成する色変換手段1と、埋め込む情報H0をコード
化してコード化された付帯情報H1を得るコード化手段
2と、コード化手段2において情報H0のコード化を行
なうためのテーブルを作成するテーブル作成手段3とを
備える。
【0052】なお、本例において画像データS0に埋め
込まれる情報H0としては、プリンタードライバーソフ
トに設けられているドライバー固有のID情報や、企業
ID、商品名の他、その画像データS0の著作権情報、
認証情報、画像データS0を撮影したときの撮影条件、
撮影時のコメント、撮影日時、撮影に使用したカメラの
レンズ情報、ストロボ使用の有無の情報、フイルム種等
の情報、撮影者名、フイルムやプリント画像から画像デ
ータS0を読取った場合には読取時の読取条件、画像デ
ータS0の検索情報等が挙げられる。
【0053】色変換手段1においては、画像データS0
が属する第1の色空間と変換先である第2の色空間との
量子化誤差に基づいて、付帯情報H1を埋め込むための
色変換テーブルが作成され、このテーブルに基づいて画
像データS0の色変換が行なわれる。
【0054】図4は第1および第2の色空間の量子化誤
差を求めるための装置の構成を示す概略ブロック図であ
る。図4に示すように、この装置は画像データS0が属
する第1の色空間の色空間情報を取得する第1の色空間
情報取得手段11と、第1の色空間情報取得手段11に
おいて取得された第1の色空間情報に基づいて、第1の
色空間の境界を表すGamut情報を取得する第1のG
amut情報取得手段12と、画像データS0の変換先
である第2の色空間の色空間情報を取得する第2の色空
間情報取得手段13と、第2の色空間情報取得手段13
において取得された第2の色空間情報に基づいて第2の
色空間の境界を表すGamut情報を取得する第2のG
amut情報取得手段14と、第1および第2の色空間
のGamut情報の相違に基づいて、Gamut外のデ
ータの圧縮方式を選択する圧縮方式選択手段15と、圧
縮方式選択手段15により選択された圧縮方式および第
1および第2の色空間のGamut情報に基づいてGa
mut外の量子化誤差を判定する量子化誤差判定手段1
6とを備える。
【0055】一方、Gamut内の量子化誤差について
は、図5に示す装置により求められる。図5に示す装置
は、図4に示す第1および第2の色空間情報取得手段1
1,13と、第1および第2の色空間情報に基づいてG
amut内の幾何学的な色座標の相違、すなわち第1の
色空間の色座標と第2の色空間の色座標との配列の幾何
学的な相違により、変換時に色座標間に生じる量子化誤
差を判定する量子化誤差判定手段17とを備える。
【0056】ここで、色空間の違いに基づく量子化誤差
について説明する。図6および図7は量子化誤差を説明
するための図である。図6に示すように、第1の色空間
において正規的に並んでいる色座標を第2の色空間に写
像すると、両色空間は色再現性が異なるため量子化の仕
方が異なり、その結果空間的な歪みが生じる。例えば、
第1の色空間のある色座標が第2の色空間におけるAの
方に写像されると分解能が欠落し量子化数の縮退が起こ
る。一方、Bの方に写像されると分解能が増大し量子化
数の増加が起こる。このように、量子化数の縮退および
増加が起こるとそこに量子化誤差が生じる。
【0057】次に、図7に示すように、第1の色空間か
ら第2の色空間への変換を行なう場合を考える。図7に
示すように第1および第2の色空間のGamut(色空
間としての境界)の相違から、色空間が重なる部分と重
ならない部分とが生じる。第2の色空間において第1の
色空間からはみ出している部分(Gamut外)につい
ては、第1の色空間においては表現できないため、例え
ば図7に示すように第1の色空間の中心に向かって圧縮
する必要がある。このように色空間を圧縮すると、第2
の色空間は全体的に情報量を失うため、量子化数の縮退
が生じて量子化誤差が生じる。なお、色空間の圧縮方式
としては、第1の色空間の中心に向かって圧縮する方式
のみならず、第1の色空間から離れるほど大きく圧縮す
る方法、中心方向ではなく中心軸に対する接線方向に圧
縮する方法等、種々の方法を用いることができる。そし
て、上述した図4に示す圧縮方式選択手段15はこのG
amut外のデータの圧縮方式を選択するものである。
【0058】このように、色空間をその色空間と色再現
特性が異なる色空間に変換すると、各色空間における量
子化の分解能の相違により、常に量子化数の縮退あるい
は増加が起こり量子化誤差が生じる。本例はこの量子化
数の縮退および増加により生じる量子化誤差の領域に付
帯情報H1を埋め込むようにしたものである。ここで、
本例においては量子化数が縮退する場合および増加する
場合のそれぞれについて2通りの埋込方法が考えられ
る。
【0059】まず、量子化数が縮退する場合の量子化誤
差に付帯情報を埋め込む場合について説明する。図8は
量子化数が縮退する場合の量子化誤差への付帯情報の埋
め込みを説明するためのモデルを示す図である。なお、
図8では説明の便宜のためRGB3次元色空間を横軸を
R軸、縦軸をG軸とした2次元で示すものとし、紙面に
垂直な方向にあるB軸については省略している。ここ
で、第1の色空間は例えば標準的なCRTモニタの信号
に対応したs−RGB色空間等であり、図8においては
8ビットに量子化されたRGB色空間(R,G,B=0
〜255)において、RGB各軸の色座標の変化ステッ
プ3段分の色領域を示している。図8においてはR軸お
よびG軸のみが示されているため、この色領域において
は、R00,R01,R02,R10,R11,R
12,R20,R21,R22の色座標からなる9つの
色を取り得る。
【0060】また、第2の色空間は、例えばプリンタ露
光信号に対応した色空間であり、第1の色空間と同様に
RGB3次元色空間を横軸をR軸、縦軸をG軸とした2
次元で示すものとし、紙面に垂直な方向にあるB軸につ
いては省略している。第1の色空間のR00,R01
02,R10,R11,R12,R20,R21,R
22の9点の色座標を有する色領域と等色する第2の色
空間の色領域は、第1の色空間については各軸について
3ステップあるが、第2の色空間については各軸につい
て2ステップしかなく、量子化の分解能が粗くなってい
る。したがって、第1の色空間においては、R00,R
01,R02,R10,R11,R12,R20,R2
1,R22の9点の色座標を有していたものが、図8
に示すように第2の色空間においては、R′0G′0
R′0G′1,R′1G′0,R′1G′1の4点の色座標と
なる。ここで、簡便のために、第2の色空間における4
点の色座標は、第1の色空間と等色していると仮定す
る。また、第1の色空間のステップ幅は、知覚量に対応
した色差ΔE=1のステップで均等に刻まれているもの
とすると、図8に示す第1および第2の色空間において
対応する色領域は1辺の大きさが2ΔEの矩形色領域と
なる。
【0061】ここで、第1の色空間から第2の色空間へ
の変換を考えると、9点の色座標が4点の色座標に縮退
する色変換となるが、この色領域の角部分に相当する4
点の色座標は、第1の色空間と第2の色空間で等色して
いることから、それぞれ対応する色座標に変換される。
すなわち、第1の色空間における色座標R00,R
02,R20,R22は第2の色空間におけるR′
0G′0,R′0G′1,R′1G′0,R′1G′1にそれぞ
れ変換される。一方、第1の色空間における角部以外の
5点の色座標は、それぞれ色差ができるだけ少なくなる
ように第2の色空間に変換される。以下この5点の色座
標に着目して説明する。なお、簡便のため、図9に示す
ように図8の第1の色空間におけるR01,R10,R
11,R12,R21の5点の色座標に0,1,2,
3,4の番号を付する。これと同様に、第2の色空間に
おけるR′0G′0,R′0G′1,R′1G′0,R′
1G′1の4点の色座標にそれぞれ(0),(1),
(2),(3)の番号を付する。
【0062】第1の色空間における色座標0は、第2の
色空間への変換時には、変換前後において色差ΔEが最
も少なくなる色座標(0),(1)のいずれかに変換さ
れる。また、第1の色空間における色座標2は、第2の
色空間への変換時には、変換前後における色差ΔEは、
色座標(0),(1),(2),(3)のいずれについ
ても同じであるため、色座標(0),(1),(2),
(3)のいずれかに変換される。このように、第1の色
空間における色座標0,1,3,4については、変換先
の第2色空間の座標に2つの自由度があり、それぞれ1
ビットの情報を持たせることができる。また、第1の色
空間における色座標2については、4つの自由度があり
2ビットの情報を持たせることができる。この状態を表
1に示す。したがって、第1の色空間から第2の色空間
への変換時に、6ビットの情報を表すことが可能であ
る。例えば表2に示すように、表1における第1の色空
間の色座標0,1,3,4の場合に第2色空間の色座標
の欄における上段を0、下段を1に対応させ、表3に示
すように表1における第1の色空間の色座標2について
は、上段を00、2段目を01、3段目を10、4段目
を11に対応させると、図10に示すように、「0→
(1)、1→(2)、2→(1)、3→(1)、4→
(3)」と色変換がなされている場合に、6ビットの情
報「110101」を表すこととなる。
【0063】
【表1】
【0064】
【表2】
【0065】
【表3】
【0066】画像データS0に情報H0を埋め込むため
には、情報H0をテーブル作成手段3において作成され
たテーブルを参照して6ビットの値にコード化してコー
ド化された付帯情報H1を得、付帯情報H1のコードに
対応した第1の色空間から第2の色空間への色変換テー
ブルを作成する。例えば6ビットにコード化された付帯
情報H1が「110101」であるとき、色変換テーブ
ルは図10に示すように、色座標が「0→(1)、1→
(2)、2→(1)、3→(1)、4→(3)」となる
ように、画像データS0を第1の色空間から第2の色空
間に変換するものとなる。
【0067】この場合、6ビット値にどのような情報を
割り当てても、第1から第2の色空間への変換前後にお
ける各色座標の色差ΔEは、全ての色座標においてΔE
≦√2であるため、ほとんど目立たないものとなる。
【0068】一方、埋め込まれた付帯情報H1を読み出
すためには、色変換前の画像データS0と、上述した表
1に相当する第1の色空間と第2の色空間との対応関係
を示す色変換テーブルと、コード化された付帯情報H1
と情報H0との対応関係を表すテーブル(テーブル作成
手段3において作成されたもの)とがあればよい。この
場合、色変換前の画像データS0により表される画像上
の特定の色(ここでは0,1,2,3,4と番号を付し
た色座標における色)の位置を求める。この位置は、色
変換後の画像データS1により表される画像上において
付帯情報H1が埋め込まれた位置に対応するものとな
る。そして、変換前の特定色が存在する位置において、
この位置の色が色変換後にどのような色に変換されてい
るかを検出し、変換後の色に対応する色座標を求める。
そして、変換前の色座標と変換後の色座標との対応関係
および表1から6ビットの付帯情報H1を読み出すこと
ができる。さらに、付帯情報H1と情報H0とを対応付
けるテーブルを参照して、情報H0を得ることができ
る。
【0069】なお、上記例においては、各色座標につい
てそれぞれ別個にビット情報を持たせているが、以下の
ようにして色領域全体で情報を持たせることも可能であ
る。例えば図9において、第1の色空間における色座標
0,2,4は、第2の色空間への色変換によりR方向の
色の誤差を生ずる。この3つの色座標のR方向の色の誤
差の総和をΔErとすると、ΔErはΔEr=−3,−
1,1,3の4つの値を取り得る。この値のうち、ΔE
r=−1およびΔEr=1については、色座標の変換の
仕方として6つの組み合わせを取り得る。例えばΔEr
=−1の場合は次の6つの組み合わせがある。
【0070】 [0→(0),2→(0),4→(3)]・・(a) [0→(0),2→(2),4→(3)]・・(b) [0→(0),2→(1),4→(2)]・・(c) [0→(0),2→(3),4→(2)]・・(d) [0→(1),2→(0),4→(2)]・・(e) [0→(1),2→(2),4→(2)]・・(f) これらの組み合わせにおいてはいずれもΔErが同一で
あるため、いずれの組み合わせにより色変換を行なって
も、変換後の画像上においては色差としてはほとんど知
覚することができないものとなる。したがって、このよ
うな(a)〜(f)の6つの組み合わせを、付帯情報H
1を表すコードとして使用することにより、知覚される
色の差が非常に小さくなるため、一層視認され難い態様
で画像データS0に付帯情報H1を埋め込むことが可能
となる。なお、この場合埋め込む情報H0はコード化手
段2において上記6つの組み合わせ(a)〜(f)のい
ずれかの記号にコード化され、コード化された付帯情報
H1は(a)〜(f)のいずれかの記号により表される
ものとなる。
【0071】さらに、上記組み合わせにおける(a)と
(f)、(b)と(e)のように、変換先の3つの色座
標が全て異なっている組み合わせのペアを用いて、付帯
情報H1を埋め込むことも可能である。例えば、組み合
わせ(a)を1に対応させ、もう1つの組み合わせ
(f)を0に対応させておく。そして、画像データS0
に付帯情報H1を埋め込む際に、1にコード化された付
帯情報H1を埋め込む場合には(a)のように変換を行
なう色変換テーブルを用いた色変換を行ない、0にコー
ド化された付帯情報を埋め込む場合には(f)のように
変換を行なう色変換テーブルを用いた色変換を行なうよ
うにすればよい。
【0072】また、画像データS0により表される画像
を、例えば上、中、下の3つの画像領域に分割し、上部
分に1の情報、中部分に0の情報、下部分に1の情報を
埋め込む場合、各画像領域毎に(a)および(f)のよ
うに変換を行なう色変換テーブルを切り替えることによ
り、情報を埋め込むことができる。この場合、いずれの
色変換テーブルにより変換を行なっても、誤差の総和Δ
Er=−1であるため、各画像領域の境界部分において
色変換テーブルの切り替えによる色の差はほとんどな
く、これによりほとんど視認されることなく付帯情報を
埋め込むことが可能である。
【0073】一方、量子化数が増加する場合の量子化誤
差に埋め込む方法については後述する。
【0074】次いで、本例の動作について説明する。
【0075】まず、図4および図5に示す第1の色空間
情報取得手段11において、画像データS0が属する第
1の色空間の色空間情報が取得されるとともに、変換先
の色空間である第2の色空間情報が第2の色空間情報取
得手段13において取得される。次に、図4に示す第1
および第2のGamut情報取得手段12において、第
1および第2の色空間情報に基づいて、第1および第2
の色空間のGamut情報が取得される。一方、圧縮方
式選択手段15においては、第2の色空間におけるGa
mut外の座標値の圧縮方式が圧縮方式選択手段15に
おいて選択され、この選択された圧縮方式と第1および
第2のGamut情報とに基づいて量子化誤差判定手段
16においてGamut外の色座標の変換時における量
子化誤差が求められる。一方で、図5に示す量子化誤差
判定手段17においては、第1および第2の色空間情報
に基づいて、Gamut内の色座標の変換時に生じる量
子化誤差が求められる。
【0076】また、図3に示すテーブル作成手段3にお
いては、埋め込む情報H0をコード化するためのテーブ
ルが作成され、コード化手段2においてはこのテーブル
を参照して情報H0がコード化されて付帯情報H1が得
られる。一方、色変換手段1においては、上述したよう
に画像データS0を第1の色空間から第2の色空間に変
換する際に、色座標を変換先のいずれの色座標に写像す
るかという色変換テーブルが作成される。そして、色変
換手段1において画像データS0を第1の色空間から第
2の色空間に変換する際に、コード化された付帯情報H
1が画像データS0に埋め込まれ、付帯情報H1が埋め
込まれた画像データS1が得られる。
【0077】このように、量子化数が縮退する方向に付
帯情報H1を埋め込む場合は、色空間的に元々分解能が
ない部分に付帯情報H1が量子化誤差として埋め込まれ
るため、画像データS1を再生しても出力後に情報は視
認しにくくなり、これにより付帯情報H1を画像データ
に秘匿的に埋め込むことができる。なお、このように埋
め込まれた付帯情報H1を読み出すためには、上述した
ように色変換テーブル、およびテーブル作成手段3にお
いて作成されたテーブルが必要であるため、これらのテ
ーブルを有する特定の者のみが情報H0の内容を知るこ
とができ、これにより情報H0の秘匿性を保持すること
ができる。
【0078】次いで、色座標を利用する情報埋込み方法
の第2例について説明する。図11はこの方法を実施す
る別の情報埋込装置の構成を示す概略ブロック図であ
る。図11に示すように、この情報埋込装置は、2種類
の色変換テーブルT1,T2を切り替えて付帯情報H1
を画像データS0に埋め込んで、付帯情報H1が埋め込
まれた画像データS1を作成するものであり、第1例と
同様の色変換手段1と、第1の色変換テーブルT1を変
調して第2の色変換テーブルT2を作成するテーブル変
調手段21とを備える。
【0079】第1の色変換テーブルT1は、画像データ
S0が属する第1の色空間を第2の色空間に変換するた
めのものであり、画像データS0が第1の色空間におい
て取り得る全ての色データを、第2の色空間に変換する
ものである。具体的には、図12に示すように、便宜上
1次元で示す第1の色空間における各色座標を、同様に
1次元で示す第2の色空間における色座標に実線矢印で
示すように変換するものである。ここで、図12に示す
破線で囲む色領域Aにおいては、色変換により量子化分
解能が縮退しており、上記第1例においてはここに付帯
情報H1を埋め込むものである。一方、色領域Bにおい
ては量子化分解能が増加しており、第2例においてはこ
こに付帯情報H1を埋め込むものとする。
【0080】すなわち、図12に示す第2の色空間にお
ける色座標Jの画素値となる画像データ中の画素は、第
2の色空間においては元々存在しないか、存在してはい
るものの第1の色変換テーブルT1を用いて変換を行な
った場合には使用しないものとなっている。したがっ
て、第2例においては、まず色座標Jを求め、第1の色
空間における色座標Iを第1の色変換テーブルT1によ
り変換した場合には第2の色空間における色座標J+1
に変換されるところを、色座標Jに変換されるように第
1の色変換テーブルT1を変調して第2の色変換テーブ
ルT2を求め、第1および第2の色変換テーブルT1,
T2を切り替えて色変換を行なうことにより、付帯情報
H1を埋め込むものである。なお、色座標Iは画像デー
タS0により表される画像上において、比較的出現する
確率が高い色を表すものを選択する。
【0081】付帯情報H1は以下のようにして画像デー
タS0に埋め込まれる。図13は第2例において付帯情
報H1を埋め込む状態を説明するための図である。図1
3に示すように、画像データS0が例えば1024×1
536画素を有する場合に、画像データS0により表さ
れる画像を1024×256画素を有する6つの画像領
域R1〜R6に分割する。この場合、全ての画像領域R
1〜R6に色座標Iにより表される画素が存在するもの
とする。そして、画像データS0の色変換を行なう際
に、画像領域R2,R5については第1の色変換テーブ
ルT1を使用し、画像領域R1,R3,R4,R6につ
いては第2の色変換テーブルT2を使用する。これによ
り、変換後の画像データS1において、色変換前の画像
データS0における色座標Iは、画像領域R2,R5に
おいては色座標J+1に、画像領域R1,R3,R4,
R6においては色座標Jに変換されることとなる。した
がって、画像データS1により表される画像上におい
て、色座標Jが出現する場合を1、色座標J+1が出現
する場合を0として、画像領域R1〜R6毎に色座標
J、J+1の有無を検出すれば6ビットの情報を埋め込
むことができる。また、色座標Jと色座標J+1とは、
第2の色空間において1量子化ステップ以下であるた
め、画像領域R1〜R6の境界部分においては、色の差
はほとんど視認できないものとなる。したがって、第1
の色変換テーブルT1のみにより画像データS0を変換
する場合と比較して、画質をほとんど劣化させることな
く付帯情報H1を埋め込むことができる。なお、本例に
おいては、図13に示すように、「101101」とい
う付帯情報H1が埋め込まれることとなる。
【0082】なお、付帯情報H1を読み出すためには、
画像データS1により表される画像の上記6つの画像領
域R1〜R6のそれぞれについて、色座標Jおよび色座
標J+1の有無を検出して付帯情報H1を求め、付帯情
報H1と情報H0とを対応付けるテーブル(第1例のテ
ーブル作成手段3において作成されたテーブル)を参照
して情報H0を得ることができる。したがって、第1例
とは異なり、色変換前の画像データS0を用いることな
く付帯情報H1を読み出すことができる。なおこの場
合、色座標Jと色座標J+1とは、第2の色空間におい
て1量子化ステップ以下であるため視認しにくいが、デ
ジタル値としては差異を有するため、画像データS1の
データ値としては、色座標Jおよび色座標J+1の差異
を検出することができるものである。
【0083】この場合に、どの色座標が付帯情報の埋め
込みに対応した色座標であるかを知らなければ、読み出
すことができない。本発明では、この色座標位置を特定
の受信者にのみ教えることで、特定の受信者のみが情報
の読み出しが可能となる。
【0084】この第2例のように、量子化数が増加する
方向に付帯情報H1を埋め込む場合において、第1およ
び第2の色変換テーブルT1,T2を使用して、第1の
色空間における色座標Iが第2の色空間において色座標
Jおよび色座標J+1のいずれに変換されるかに応じて
付帯情報H1を埋め込むことにより、第1の色変換テー
ブルT1のみを用いて色変換を行なう場合と比較して
も、ほとんど画質を劣化させることなく付帯情報H1を
画像データS0に埋め込むことができる。また、付帯情
報H1を読み出す場合にも、色座標Jおよび色座標J+
1の有無を検出すればよいため、色変換前の画像データ
S0は不要となりこれにより付帯情報H1の検出を容易
に行なうことができる。
【0085】なお、上記第2例においては、第1の色空
間における色座標Iを第2の色空間における色座標Jお
よび色座標J+1のいずれに変換するかを切り替えるこ
とにより付帯情報H1を埋め込んでいるが、第1の色空
間における色座標Iに近接する色座標I−1または色座
標I+1を第2の色空間における色座標Jおよび色座標
J+1のいずれに変換するかを切り替えることにより、
付帯情報H1を埋め込むようにしてもよい。この場合、
色座標Iを色座標Jまたは色座標J+1に変換する場合
と比較して、色の誤差が大きくなるため多少画質は劣化
するものの、第2例と同様に付帯情報H1を画像データ
S0に埋め込むことができる。
【0086】また、図12に示す第2の色空間の色座標
Jのように、第1の色変換テーブルT1を用いて変換を
行なった場合には使用されない色座標が、第1の色空間
中に複数個存在する場合には、その複数個の色座標を同
一の付帯情報に基づいて変調させる色変換テーブルを使
用して色変換を行ない、付帯情報の読出しの際には、複
数個の読出結果の論理和「OR」を使用することも可能
である。これにより、分割された画像領域に情報埋込可
能な色座標が存在する確率を高めることができる。
【0087】次いで、色座標を利用する情報埋込み方法
の第3例について説明する。図14はこの方法を実施す
る情報埋込装置の構成を示す概略ブロック図である。図
14に示すようにこの情報埋込装置は、例えば撮影日時
の情報と画像データS0の撮影者の情報という2種類の
情報H0,H0′をそれぞれ別個に表す2種類の付帯情
報H1、H2を使用し、第2の色変換テーブルT2に加
えて第3、第4の色変換テーブルT3,T4を作成し、
2種類の付帯情報H1,H2に応じて第2の色変換テー
ブルT2、第3の色変換テーブルT3および第4の色変
換テーブルT4から一つの色変換テーブルを選択して、
付帯情報H1,H2を選択的に画像データS0に埋め込
むものである。
【0088】すなわち、上記第2例においては、第1の
色空間における色座標Iを第2の色空間における色座標
Jおよび色座標J+1のいずれに切り替えるかにより付
帯情報H1を画像データS0に埋め込んでいたが、図1
0に示す色領域Cにおいても、第1の色空間における色
座標I′を第2の色空間における色座標J′および色座
標J′+1のいずれに切り替えるかにより情報を埋め込
むことができる。したがって、第3の例においては、2
種類の情報を選択的に埋め込み可能なように、上記第2
の例と同様の第2の色変換テーブルT2を作成するとと
もに、第1の色変換テーブルT1により色座標I′を変
換した場合には第2の色空間における色座標J′+1に
変換されるところを色座標J′に変換されるように第1
の色変換テーブルT1を変調して第3の色変換テーブル
T3を作成する。なお、第2の色変換テーブルT2にお
いては第1の色空間における色座標I′は第1の色変換
テーブルT1と同様に第2の色空間における色座標J′
+1に変換するものとし、第3の色変換テーブルT3に
おいては第1の色空間における色座標Iは第1の色変換
テーブルT1と同様に第2の色空間における色座標J+
1に変換するものとする。また、第4の色変換テーブル
T4は、第1の色空間における色座標Iは第2の色空間
における色座標Jに、第1の色空間における色座標I′
は第2の色空間における色座標J′にそれぞれ変換する
ものとする。
【0089】そして、上記第2の例と同様に画像データ
S0により表される画像を6つの画像領域に分割し、各
画像領域毎に第1の色変換テーブルT1と第2の色変換
テーブルT2とを切り替えて画像データS0を画像デー
タS1に変換することにより、付帯情報H1を画像デー
タS0に埋め込むことができる。一方、各画像領域毎に
第1の色変換テーブルT1と第3の色変換テーブルT3
とを切り替えて画像データS0を画像データS1に変換
することにより、付帯情報H2を画像データS0に埋め
込むことができる。この第2の色変換テーブルT2と第
3の色変換テーブルT3とは、テーブル変調手段21に
いずれの付帯情報H1,H2が入力されるかに応じて切
り替えられることとなる。
【0090】一方、付帯情報H1,H2を同時に埋め込
むことも可能である。すなわち、上記第2の例と同様に
画像データS0により表される画像を6つの画像領域に
分割し、各画像領域毎に第1から第4の色変換テーブル
T1,T2,T3,T4を切り替えて画像データS0を
画像データS1に変換することにより、付帯情報H1,
H2を画像データS0に埋め込むことができる。この場
合、各画像領域毎に付帯情報H1,H2の内容が判定さ
れ、例えばある画像領域において、付帯情報H1が0、
付帯情報H2が0の場合には第1の色変換テーブルT1
を、付帯情報H1が1、付帯情報H2が0の場合には第
2の色変換テーブルT2を、付帯情報H1が0、付帯情
報H2が1である場合には、第3の色変換テーブルT3
を、付帯情報H1,H2ともに1である場合には第4の
色変換テーブルT4を使用して画像データS0を画像デ
ータS1に変換することにより、付帯情報H1,H2を
画像データS0に埋め込むことができる。なお、第1か
ら第4の色変換テーブルT1,T2,T3,T4は、テ
ーブル変調手段21に入力される付帯情報H1,H2の
内容に応じて切り替えられることとなる。
【0091】なお、ここでは第1から第4の色変換テー
ブルT1〜T4を使用して2つの付帯情報H1,H2を
埋め込んでいるが、2つのテーブルを使用して付帯情報
H1,H2を埋め込むことも可能である。これは、例え
ば第1および第4の色変換テーブルT1,T4を使用
し、画像上の異なる色座標に付帯情報H1,H2を埋め
込むものである。そして、各画像領域内の画素毎に色変
換を行なう際にその色座標が色座標IであるかI′であ
るかまたはその他の色座標であるかを判定し、色座標I
であれば付帯情報H1のその領域における情報の内容を
判定し、「1」であればその画素については第4の色変
換テーブルT4を使用し、「0」であれば第1の色変換
テーブルを使用する。一方、色座標I′であれば付帯情
報H1に代えて付帯情報H2の内容を判定し、「1」で
あればその画素については第4の色変換テーブルT4を
使用し、「0」であれば第1の色変換テーブルを使用す
る。なお、色座標Iでも色座標I′でもない場合には、
第1および第4の色変換テーブルT1,T4のいずれを
使用してもよいが、その直前の変換に使用したテーブル
をそのまま使用すれば、演算速度の点で好ましい。そし
てこのように、第1および第4の色変換テーブルT1,
T4を色座標に応じて切り替えることにより、複数の付
帯情報を異なる色座標に埋め込むことができる。
【0092】なお、埋め込まれた付帯情報H1,H2を
検出するには、画像データS1により表される画像の上
記6つの画像領域に対応する画像領域毎に、色座標Jお
よび色座標J+1の有無を検出すれば、上記第2の例と
同様に付帯情報H1を求めることができる。また、色座
標J′および色座標J′+1の有無を検出すれば、付帯
情報H2を求めることができる。
【0093】なお、上記第3の例においては2つの付帯
情報H1,H2を画像データS0に埋め込んでいるが、
第1の色空間から第2の色空間に変換する際に、図10
に示す色領域B,Cのように量子化数が増加する色領域
は、他にも複数存在するものである。したがって、この
ような色領域毎に第1の色空間における色座標の変換先
を第1の色変換テーブルT1と異なるものとした色変換
テーブルを作成することにより、より多くの付帯情報を
選択的に画像データS0に埋め込むことができる。
【0094】また、上記第2および第3の例においては
画像データS0により表される画像を複数の画像領域に
分割し、この画像領域毎に使用する色変換テーブルを切
り替えて付帯情報を埋め込んでいるが、画像データS0
により表される画像の画素位置に付帯情報を埋め込むこ
とも可能である。以下、これを第4の例として説明す
る。図15はこの第4の例において行なわれる処理を説
明するための図である。第4の例においては、画像デー
タS0をラスタ走査しつつ各画素毎に色変換し、このラ
スタ走査による色変換の最中において、第1の色空間に
おける色座標Iが出現する毎に第2の例と同様に第1お
よび第2の色変換テーブルT1,T2を切り替えて、付
帯情報H1を埋め込むものである。なお、ここでは「1
011」という付帯情報H1を埋め込むものとする。
【0095】まず、画像データS0を初期の画素位置
(例えば画素の座標値として(0,0)からラスタ走査
し、図15に示すように第1の色空間における色座標I
が出現するまでは全ての画素のデータ値を第1の色変換
テーブルT1により色変換し、最初に出現した色座標I
については第2の色変換テーブルT2により色変換を行
なう。以下、2番目に出現した色座標Iについては第1
の色変換テーブルT1により、3番目および4番目に出
現した色座標Iについては第2の色変換テーブルT2に
より色変換を行なう。そして、4つの色座標Iが出現し
た後は残余の画素のデータ値を全て第1の色変換テーブ
ルT1を用いて色変換して付帯情報H1が埋め込まれた
画像データS1を得る。なお、この場合は予め埋め込む
情報のビット数を規定しておく必要がある。
【0096】このようにして埋め込まれた付帯情報H1
を読み出すには、画像データS1を初期位置からラスタ
走査し、画像データS0における色座標Iに対応する位
置において、第2の色空間における色座標Jおよび色座
標J+1の出現状態を検出する。この場合、図16に示
すようにJ、J+1、J、Jという順序で色座標Jおよ
び色座標J+1が出現するため、色座標Jを1、色座標
J+1を0と対応付けておけば、「1011」という付
帯情報H1を読み出すことができる。なお、この場合に
おいては、画像データS1により表される画像上におい
て色座標Iに対応する位置が必要であるため、付帯情報
H1を読み出すためには色変換前の画像データS0が必
要となる。そして、読み出した付帯情報H1を付帯情報
H1と情報H0とを対応付けるテーブルを参照すること
により、情報H0を得ることができる。
【0097】なお、第4の例に示すように付帯情報H1
を埋め込む場合において、複数の付帯情報を画像データ
S0に同時に埋め込むことも可能である。以下これを色
座標を利用する情報埋込み方法の第5例として説明す
る。図17はこの第5の例において行なわれる処理を説
明するための図である。なお、この第5例においては第
3例と同様に2つの付帯情報H1,H2を埋め込むもの
とする。第5の例は、第4の例と同様に画像データS0
をラスタ走査し、この走査の最中において第1の色空間
における色座標Iが出現する毎に第2例と同様に第1の
色変換テーブルT1を第2の色変換テーブルT2に切り
替えて付帯情報H1を埋め込み、さらに第1の色空間に
おける色座標I′が出現する毎に第1の色変換テーブル
T1を上記第3例における第3の色変換テーブルT3に
切り替えて付帯情報H2を埋め込むものである。なお、
ここでは「1011」という付帯情報H1を、「010
1」という付帯情報H2を埋め込むものとする。
【0098】まず、図17に示すように第1の色空間に
おける色座標Iが出現するまでは全ての画素のデータ値
を第1の色変換テーブルT1により色変換し、最初に出
現した色座標Iについては第2の色変換テーブルT2に
より色変換を行なう。以下、2番目に出現した色座標I
については第1の色変換テーブルT1により、3番目お
よび4番目に出現した色座標Iについては第2の色変換
テーブルT2により色変換を行なう。一方、最初に出現
した色座標I′については第1の色変換テーブルT1に
より色変換を行ない、以下、2番目に出現した色座標
I′については第3の色変換テーブルT3により、3番
目および4番目に出現した色座標Iについてはそれぞれ
第1および第3の色変換テーブルT1,T3により色変
換を行なう。そして、各色座標I,I′が4つ出現した
後は残余の画素のデータ値を全て第1の色変換テーブル
T1を用いて色変換して付帯情報H1,H2が埋め込ま
れた画像データS1を得る。なお、第5例においても第
4例と同様に予め埋め込む情報のビット数を規定してお
く必要がある。
【0099】このようにして埋め込まれた付帯情報H
1,H2を読み出すには、まず、上記第4例と同様に
「1011」という付帯情報H1を読み出す。その後、
画像データS1を初期位置からラスタ走査し、画像デー
タS0における色座標I′と対応する位置において、第
2の色空間における色座標J′および色座標J′+1の
出現状態を検出する。この場合、図18に示すように
J′+1、J′、J′+1、J′という順序で色座標
J′および色座標J′+1が出現するため、色座標J′
を1、色座標J′+1を0と対応付けておけば、「01
01」という付帯情報H2を読み出すことができる。そ
して、読み出した付帯情報H1,H2を付帯情報H1,
H2と埋め込む情報H0,H0′とを対応付けるテーブ
ルを参照することにより、情報H0,H0′を得ること
ができる。
【0100】このように、第5例においては、複数の異
なる付帯情報H1,H2を1つの画像データS0に埋め
込むことが可能である。また、色座標毎に異なる付帯情
報を埋め込むことができる一方で、付帯情報を埋め込ん
だ際に使用した色座標を知らなければその付帯情報を読
み出すことはできないため、付帯情報を埋め込む際に使
用した色座標に関する情報の有無に応じて、読み出すこ
とができる付帯情報を異なるものとすることができる。
したがって、画像データS1の利用者に応じて、知らせ
る色座標の情報を制限することにより、利用者毎にアク
セス可能な付帯情報を制限することが可能となる。さら
に、埋め込まれている付帯情報とは異なる色座標を変換
する新たな色変換テーブルを用いることにより、既に埋
め込まれている付帯情報を消去することなく、新たな付
帯情報を埋め込むことが可能である。
【0101】なお、上記第5の例においては、情報が埋
め込まれた位置を特定するために、色変換前の画像デー
タS0を用いているが、図19に示すように付帯情報H
1,H2を埋め込む際に、比較的出現頻度が高い色座標
Kを、情報が埋め込まれた位置を特定するための同期信
号として用いることにより、画像データS0を使用する
ことなく、情報の埋込位置を特定することができる。こ
れは、第1の色空間における色座標Kは、情報を埋め込
まない場合には第2の色空間における色座標L+1に変
換され、情報を埋め込む場合には第2の色空間における
色座標Lに変換されるものとし、埋め込まれた情報を読
み出す際に同期信号として使用される第1の色空間の色
座標Kに対応した情報埋込後の第2の色空間の色座標L
の出現状態を検出することにより、色変換前の画像デー
タS0を使用することなく、情報の埋め込み位置を特定
可能とするものである。これを色座標を利用する情報埋
込み方法の第6例として説明する。
【0102】画像の色変換時に情報埋め込みを行なう際
に、画像データS0を初期位置からラスタ走査し、最初
に色座標Kが出現した場合に、色座標Kに対して情報埋
め込みを行なう色変換テーブルを用いて第2の色空間に
おける色座標Lに変換する。その後、色座標Iおよび色
座標I′が出現した場合に、付帯情報H1,H2の内容
に応じて第1の色変換テーブルT1を使用するか、第
2、第3の色変換テーブルT2,T3を使用するかを切
り替えて画素のデータ値を変換する。そして、2番目の
色座標Kが出現した場合に、最初に色座標Kが出現して
から2番目の色座標Kが出現するまでの間に、既に色座
標IおよびI′が双方とも出現している場合には、情報
埋め込みを行なう色変換テーブルにより色座標Kを第2
の色空間における色座標Lに変換する。また、色座標
I,I′の双方が出現していない場合には、情報埋め込
みを行なわない色変換テーブルにより色座標Kを第2の
色空間における色座標L+1に変換する。3番目以降に
出現した色座標Kにおいても同様に、色座標I,I′の
双方が出現したか否かを判断し、双方が出現済みである
場合には情報埋め込みを行なう色変換テーブルを、双方
が出現済みでない場合には情報埋め込みを行なわない色
変換テーブルを使用して、色座標Kを第2の色空間にお
ける色座標L,L+1に変換する。
【0103】このように色変換を行なうことにより、色
変換後の画像データS1を初期位置からラスタ走査した
場合に、色座標Lが出現してから次の色座標Lが出現す
るまでの間には、色変換前の画像データS0における色
座標Iおよび色座標I′が少なくとも1回出現すること
となる。したがって、この色座標Lと色座標Lとの間の
区間を1ビットの情報埋め込み区間とし、色座標Iおよ
び色座標I′が出現した場合に色変換テーブルを切り替
えて画素のデータ値を変換する。そして、上記のような
同期信号の埋め込みを行なう際に、色変換後の画像デー
タS1中に5番目の色座標Lが出現するまで第2の色空
間における色座標Lの出現間隔において色座標Iおよび
色座標I′が出現した場合に、色変換テーブルを切り替
えて図19に示すように、「1100」および「001
0」という付帯情報H1,H2を埋め込むことができ
る。
【0104】なお、第6例においては、第2の色空間に
おける色座標Lの出現間隔において、複数の色座標Iお
よび色座標I′が出現する場合があるが、最初に出現し
た色座標I,I′についてのみ情報を埋め込むという規
則を予め設定しておくことにより、混乱することなく情
報を埋め込むことができる。また、色座標Kの出現間隔
において、色座標I,I′が全く出現しない場合がある
が、この場合は色座標Iおよび色座標I′が出現するま
では、色座標Kが検出されてもその色座標Kについては
同期信号として使用されないため、混乱することなく情
報を埋め込むことができる。
【0105】なお、上記第4から第6の例においては画
像データS0,S1のラスタ走査を開始する位置として
例えば画素の座標が(0,0)の位置としているが、こ
れに限定されるものではなく、任意の画素位置からラス
タ走査を開始してもよいものである。
【0106】なお、上記第2から第6の例においては、
第2の色空間において使用していない色を用いる等によ
り、量子化数が増大する空間に付帯情報を埋め込んでい
るが、第1および第2の色空間の性質によっては、付帯
情報を埋め込むために十分な変換先の色座標を確保でき
ない場合がある。この場合、以下のようにして変換先の
色座標を確保すればよい。図20は変換先の色座標が確
保できない場合の対処方法を説明するための図である。
まず、第2の色空間において、情報を埋め込む色座標
e′を予め定めておき、色変換時にこの色座標e′に変
換される第1の色空間の色座標eを求める。そして、図
20の破線で示すように、この第1の色空間における色
座標eを第2の色空間における色座標e′に変換する色
変換テーブルと、図20の実線で示すように第1の色空
間における色座標eを第2の色空間における色座標e′
に隣接する色座標d′に変換する色変換テーブルとの2
つの色変換テーブルを作成する。そして画像データS0
の色変換時に、この2つの色変換テーブルのいずれを使
用するかに応じて画像データS0に付帯情報を埋め込む
ことができる。
【0107】すなわち、第1の色空間における色座標e
を第2の色空間における色座標e′に変換する色変換テ
ーブルを第1の色変換テーブルT1、第1の色空間にお
ける色座標eを第2の色空間における色座標e′に隣接
する色座標d′に変換するテーブルを第2の色変換テー
ブルT2として上記第2から第6の例と同様に画像デー
タS0の色変換を行ない、変換後の画像データS1にお
ける変換前の画像データS0の色座標eと対応する位置
が、色座標d′となっているか色座標e′となっている
かにより1ビットの情報を埋め込むことができる。した
がって、上記第2から第6の例と同様に、色変換に使用
するテーブルを切り替えて画像データS0に付帯情報を
埋め込むことができる。
【0108】なお、上記第2から第6の例においては、
画像データS0にコード化された付帯情報H1を埋め込
んでいるが、付帯情報H1をパターン状に埋め込むこと
も可能である。以下、パターン状の付帯情報H1の埋め
込みを、色座標を利用する情報埋込み方法の第7例とし
て説明する。図21は第7の例において行なわれる処理
を示す図である。図21に示すように、第7の例におい
ては、画像データS0により表される画像G1をこれが
属する第1の色空間から第2の色空間に変換する際に、
「C」の文字パターンを有する文字画像M1を、パター
ン状の付帯情報H1として埋め込むものである。なお、
文字画像M1は画像G1と同一画素数を有し、文字画像
M1中の「C」の文字パターンは十分に線幅を有し、こ
の文字画像M1を表す画像データは、文字パターン部分
が1、背景部分が0の値を有する2値データとなってい
る。また、第7の例においては、画像G1を第2の色空
間に変換する際に通常使用される色変換テーブルを第1
の色変換テーブルT1とし、付帯情報H1を埋め込むた
めに使用する色変換テーブルを第2の色変換テーブルT
2とする。
【0109】そして、画像G1を第1の色空間から第2
の色空間に変換する際に、画像G1上における図10に
示す第1の色空間の色座標I,I′に対応する画素位置
に、付帯情報H1を埋め込むものである。すなわち、画
像G1を表す画像データS0を第1の色空間から第2の
色空間に変換する際に、第2の色空間において存在しな
いか、存在してはいるものの第1の色変換テーブルT1
を用いて変換を行なった場合には使用しない色座標(以
下ここでは空孔色座標とする)に、付帯情報H1をパタ
ーン状に埋め込むものである。
【0110】ここで、RGB3次元画像データのうち1
色の色データが8ビットの階調を有するものであるとす
ると、この色データをこれが属する色空間とは異なる色
空間に変換した場合、概略1割程度の空孔色座標が出現
することは十分に想定できる。ここで、色変換時に仮に
1割の空孔色座標が出現するとすると、RGBの3次元
色空間においては、単純計算で27%(1−0.93
の空孔色座標が出現することとなる。また、画像データ
が各色16ビットの階調を有するような場合にはさらに
空孔色座標が出現する確率が高くなる。
【0111】一方、付帯情報H1をパターン状に埋め込
む場合、画像G1が1000×1000画素を有するも
のであるとすると、100×100画素程度の埋め込み
可能画素が存在すれば、たとえこれが画像上にランダム
に存在しているとしても、1文字を表現するには十分な
ものである。すなわち、画像G1の全画素のうち1/1
00の画素が空孔色座標となれば、十分に付帯情報H1
をパターン状に埋め込むことができるものである。ここ
で、上記の計算においては1つの画像G1中には27%
程度の空孔色座標が出現することから、付帯情報H1は
確実にパターン状に埋め込むことが可能となる。
【0112】具体的には、画像G1と文字画像M1との
各画素位置を対応させ、文字画像M1において値が1と
なる文字パターン部分とが重複する画素位置について
は、第2の色変換テーブルT2を使用して色変換を行な
う。この結果、画像G1上の重複する画素位置において
空孔色座標が存在する場合には、その空孔色座標が第2
の色変換テーブルT2により変換されて変換後の色が出
現する。そして、その他の画素位置については第1の色
変換テーブルT1を使用して色変換を行なうことによ
り、変換後の色により付帯情報H1が画像G1にパター
ン状に埋め込まれて、図21に示すように付帯情報H1
が埋め込まれた画像G2を表す画像データS1を得るこ
とができる。
【0113】なお、画像G2においては、付帯情報H1
により表される文字パターンに対応する画素位置の色座
標は、第1の色変換テーブルT1により色変換を行なっ
た場合と比較して色差は1段階程度であるため、ほとん
ど視認されることなく付帯情報H1が埋め込まれること
となる。
【0114】また、自然画像においてグレーの壁を背景
とした写真や、青空を背景とした写真等において、グレ
ーや空色等の多用される色については、空孔色座標が少
なくなるように描画するのが常である。しかしながら、
見かけ上同一の色であってもデジタル値として差異を有
するものであれば空孔色座標は発生し得るため、付帯情
報H1をパターン状に埋め込むことができる。また、コ
ンピュータグラフィックス等において、デジタル値が全
く同一の背景を有する画像において、その背景が空孔色
座標に相当しない場合には、付帯情報H1をパターン状
に埋め込むことができないが、このような場合には若干
のノイズを付与することにより、空孔色座標を発生させ
れば付帯情報H1をパターン状に埋め込むことができる
こととなる。
【0115】一方、埋め込まれた付帯情報H1を読み出
すには、画像G2において情報が埋め込まれた全ての色
座標(例えば図10における色座標J,J′)を、それ
とは全く異なる色(例えば色Xとする)に変換する色変
換テーブルT3′を予め準備しておき、この色変換テー
ブルT3′により画像G2を表す画像データS1を色変
換することにより、付帯情報H1の文字パターンが色X
により表された文字画像M1′を得ることができる。な
お、ここで、画像G2から読み出される文字パターン
は、文字画像M1のように文字パターン部分の全ての画
素について値を有するものでなく、空孔色座標以外の画
素位置には画素値の抜けを有するものであるため、文字
画像M1′のように「′」を付したものである。
【0116】なお、第7の例においては1つの文字画像
M1のみを画像G1に埋め込んでいるが、上述したよう
に1つの画像中においては空孔色座標は全画素の27%
程度存在することから、複数の文字画像を画像G1に埋
め込むことも可能である。以下、これを色座標を利用す
る情報埋込み方法の第8例として説明する。図22は第
8の例において行なわれる処理を示す図である。図22
に示すように、第8の例においては、画像データS0に
より表される画像G1をこれが属する第1の色空間から
第2の色空間に変換する際に、「C」、「O」、
「P」、「Y」の文字パターンを有する文字画像M1〜
M4を、パターン状の付帯情報H1として埋め込むもの
とする。
【0117】この場合、画像G1における互いに異なる
空孔色座標(1色でも複数色の組でもよい)に文字画像
M1〜M4を埋め込むため、画像G1をこれが属する第
1の色空間から第2の色空間に変換する際には、第7の
例と同様に通常の画素位置については第1の色変換テー
ブルT1を使用し、付帯情報H1を埋め込む画素位置に
ついては、文字画像M1〜M4の種類に応じて複数の第
2の色変換テーブルT2を切り替えて使用するものであ
る。例えば、「C」の文字画像M1を埋め込む際には、
図10における色座標I(空孔色座標)を色座標Jに変
換する色変換テーブルを使用し、「O」の文字画像M2
を埋め込む際には、図10における色座標I′を色座標
J′に変換する色変換テーブルを使用する。以下、
「P」、「Y」の文字画像M3,M4を埋め込む際に
は、色座標I,I′とは異なる空孔色座標(例えば色座
標I0,I1とする)を、第1の色変換テーブルT1に
より変換した場合の色座標(例えば色座標J0+1,J
1+1とする)とは異なる色座標(例えば色座標J0,
J1とする)に変換する色変換テーブルを使用する。そ
して、これにより4つの文字画像M1〜M4が付帯情報
H1として埋め込まれた画像G2を得ることができる。
【0118】一方、埋め込まれた4つの文字画像M1〜
M4からなる付帯情報H1を読み出すには、画像G2に
おいて情報が埋め込まれた色座標(例えば色座標J,
J′,J0,J1)を、それとは全く異なる色(例えば
色X0〜X3)にそれぞれ変換する4つの色変換テーブ
ルT3′〜T6′を予め準備しておき、この4つの色変
換テーブルT3′〜T6′により画像G2を表す画像デ
ータS1を順次色変換することにより、文字画像M1〜
M4の文字パターンが色X0〜X3により表された文字
画像M1′〜M4′を順次得ることができる。この際、
文字画像M1′〜M4を順次再生することにより、埋め
込まれた付帯情報H1を動きのある文字列として表示す
ることができる。
【0119】なお、上記第7および第8の例において
は、文字画像を付帯情報H1として埋め込んでいるが、
アニメーション等の画像や図形等を付帯情報H1として
これをパターン状に埋め込むことも可能である。この場
合、第8の例のように異なる複数のパターンを埋め込
み、埋め込まれたパターンを順次読み出して再生するこ
とにより、動きのあるアニメーションとして、付帯情報
を再生することができる。
【0120】ところで、写真ラボにおけるデジタルファ
イル作成サービスにおいては、ユーザのネガフイルムを
スキャナにより読取り、画像毎に最適な画像処理が施さ
れたプリント用の画像データを作成し、この画像データ
をCD−R等の記録媒体に記録してユーザに渡すことを
行なっている。この際、プリント用の画像データはその
まま記録媒体に記録されるのではなく、ユーザのパソコ
ンのCRTモニタに再生した際に最適な画像の見え方と
なるように、モニタ用の色空間への変換がなされた後に
記録されることとなる。ここで、プリント用の画像デー
タはカラーペーパレコーダ等のデジタルプリンタの記録
信号であるRGB信号が用いられ、モニタ用の画像デー
タは共通色空間として国際電気学会(IEC)で定義さ
れているs−RGB信号等が用いられる。
【0121】この際、カラーペーパに記録された画像の
色と、s−RGB規格により定められている標準モニタ
に表示された画像の色とが、特定の観察条件下において
一致するように色変換が行なわれる。ここで、カラーペ
ーパおよびモニタともに、RGBの各色8ビットの情報
を有しており224の色表現が可能であるが、カラーペー
パに記録された画像はプリンタ再現色に対応した色空間
の画像であり、モニタに表示された画像はモニタに対応
した色空間の画像であるため、色空間を一致させる場
合、ある色領域においては後者の方がデータ密度が高く
なり、また別の領域においては前者の方がデータ密度が
高くなるといった状況が生じる。このため、s−RGB
空間においては存在しないRGBの組み合わせがプリン
タの色空間上には複数存在する。
【0122】このため、両者の色空間の相違により上記
各例に示したように、付帯情報を埋め込むことができ
る。このようなデジタルファイル作成サービスにおい
て、埋め込むことができる情報としては、撮影時のコメ
ント、撮影日時、カメラのレンズ情報、ストロボの有無
に関する情報、フイルム種等の情報、撮影者名、注文者
名、画像処理で使用したパラメータ等が挙げられる。
【0123】図23は、デジタルファイル作成サービス
における処理の流れを示す概略ブロック図である。ま
ず、ラボ30においては、注文者31のネガフイルムを
スキャンしてデジタル画像データS10を得、このデジ
タル画像データS10に対してプリントとして最適な画
像が再現されるような画像処理を施し、これをプリント
用の画像データS11とする。そして、モニタ用の画像
データS12に色変換する際に付帯情報を埋め込み、付
帯情報が埋め込まれた画像データS12を注文者31に
提供する。この際、付帯情報の埋め込みは、注文者31
がラボ30にサービスを依頼する際に、どのような情報
を埋め込むかを指定することにより行なわれる。また、
付帯情報は、上記各例において説明したように画像デー
タS11に埋め込まれる。なおここでの注文者とは、コ
ンテンツに情報埋め込みを行なうデータ配信者のことで
ある。注文者31は提供された画像データS12をモニ
タに表示し、さらにトリミング、文字入れ等の加工を施
して、加工済みの画像データS12′を得る。そして、
ラボ30においては、画像データS12′をプリンタ用
の色空間に変換するとともに、埋め込まれている付帯情
報を読み出す。
【0124】この際、ラボ30では特定の色座標のデー
タを検出することにより、上記各例において説明したよ
うに、埋め込まれた付帯情報を読み出すことが可能であ
る。そして例えば、埋め込まれた付帯情報が撮影日時と
撮影時のコメントである場合には、その情報を加工がな
された画像上に適切にレイアウトしてプリントを行なう
ことができる。すなわち、オリジナルの画像が図24
(a)に示すように撮影日時を含むものであった場合、
従来のプリントサービスにおいてトリミングを依頼した
場合には、撮影日時の部分がカットされてしまうため、
図24(b)に示すようにトリミング後の画像は撮影日
時が含まれないものとなる。一方、本例においては撮影
日時の情報を付帯情報として画像データS12に含ませ
ておくことにより、図24(c)に示すようにトリミン
グがなされても撮影日時の情報をトリミング後の画像に
含ませてプリントを行なうことができる。また、付帯情
報としてコメントが含まれている場合にも、このコメン
トをトリミング後の画像と同時にプリントすることがで
きる。
【0125】なお、種々の画像や写真がレイアウトされ
たテンプレートをユーザ31に提供して、ユーザ31の
画像とテンプレートとを組み合わせた加工を行なうこと
もできるが、テンプレートが著作権を有するものである
場合がある。このような場合は、テンプレートを表すテ
ンプレートデータに、テンプレートを作成した者の著作
権情報を付帯情報として埋め込むことにより、ラボ30
におけるプリント時に付帯情報を読み出して、テンプレ
ートが著作権が有するか否かを確認することができる。
そして、テンプレートが著作権を有する場合には、プリ
ント料金に著作権使用料を加算することにより、ラボ3
0がユーザ31からの著作権使用料の徴収を行なうこと
ができる。
【0126】また、ラボ30においては、プリントに最
適な画像処理を施した後に色変換とともに付帯情報を埋
め込んで画像データS12を得ているため、ユーザ31
から渡された加工後の画像データS12′に付帯情報が
埋め込まれているか否かを確認することにより、既に特
定のラボ30においてプリントに最適な画像処理が施さ
れたものであるか否かを確認することができる。したが
って、画像データS12′に付帯情報が埋め込まれてい
る場合には、既にプリントに最適な画像処理が施されて
いるものであることを確認することができるため、同一
の画像処理を重複して行なうことを防止することができ
る。
【図面の簡単な説明】
【図1】本発明のデータ配信方法を実施するシステムの
一例を示すブロック図
【図2】本発明のデータ配信方法を実施するシステムの
別の例を示すブロック図
【図3】色座標を利用する情報埋込み方法の第1例を実
施する装置の構成を示す概略ブロック図
【図4】情報埋込装置において量子化誤差を求める装置
の構成を示す概略ブロック図(Gamut外)
【図5】情報埋込装置において量子化誤差を求める装置
の構成を示す概略ブロック図(Gamut内)
【図6】量子化誤差を説明するための図(その1)
【図7】量子化誤差を説明するための図(その2)
【図8】量子化数が縮退する場合の量子化誤差領域の付
帯情報の埋め込みを説明するためモデルを示す図
【図9】図8に示すモデルにおいて色座標に番号を付し
た状態を示す図
【図10】図8に示すモデルにおいて実際の変換におけ
る付帯情報の埋込例を示す図
【図11】色座標を利用する情報埋込み方法の第2例を
実施する装置の構成を示す概略ブロック図
【図12】第1の色空間から第2の色空間への変換状態
を示す図
【図13】付帯情報を埋め込む状態を説明するための図
【図14】色座標を利用する情報埋込み方法の第3例を
実施する装置の構成を示す概略ブロック図
【図15】色座標を利用する情報埋込み方法の第4例に
おける情報埋込状態を説明するための図
【図16】色座標を利用する情報埋込み方法の第4例に
おける情報読み出し状態を説明するための図
【図17】色座標を利用する情報埋込み方法の第5例に
おける情報埋込状態を説明するための図
【図18】色座標を利用する情報埋込み方法の第5例に
おける情報読み出し状態を説明するための図
【図19】色座標を利用する情報埋込み方法の第6例に
おける情報埋込状態および読み出し状態を説明するため
の図
【図20】変換先の色座標が確保できない場合の対処方
法を説明するための図
【図21】色座標を利用する情報埋込み方法の第7例に
おいて行なわれる処理を示す図
【図22】色座標を利用する情報埋込み方法の第8例に
おいて行なわれる処理を示す図
【図23】デジタルファイル作成サービスにおける処理
の流れを示す概略ブロック図
【図24】デジタルファイル作成サービスにおいてプリ
ンとされた画像を示す図
【図25】2値の画素4つを1単位として、その面積変
化により階調を表現するケースをモデル的に示す図
【符号の説明】
1 色変換手段 2 コード化手段 3 テーブル作成手段 11 第1の色空間情報取得手段 12 第1のGamut情報取得手段 13 第2の色空間情報取得手段 14 第2のGamut情報取得手段 15 圧縮方式選択手段 16,17 量子化誤差判定手段 21 テーブル変調手段 110 画像サーバー 111 公衆回線ネットワーク 112 透かしエンコーダ 113 プリンタ 114 デコーダ 120 画像データ 121 ハードコピー P1 企業サーバー P30 クライアントコンピュータ P50 ラボコンピュータシステム
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) // G09C 5/00 H04L 11/18

Claims (7)

    【特許請求の範囲】
  1. 【請求項1】 画像データや音声データ等のデータを配
    信するデータ配信方法において、 データ配信者側で、画像データや音声データ等のデータ
    の所定範囲に亘って埋め込み位置を特定して特定の情報
    を埋め込み、 データ配信を受ける受信者側において、前記埋め込み位
    置を知らされている情報読出し手段を用いて前記特定の
    情報を読み出すとともに、その読み出した情報を受信者
    を特定する情報と共に暗号化して出力することを特徴と
    するデータ配信方法。
  2. 【請求項2】 前記埋め込み位置を、データ配信を受け
    る受信者毎に変えることを特徴とする請求項1記載のデ
    ータ配信方法。
  3. 【請求項3】 前記画像データや音声データ等のデータ
    を公衆回線ネットワーク経由で配信することを特徴とす
    る請求項1または2記載のデータ配信方法。
  4. 【請求項4】 受信者側のプリンタで情報読出しを行な
    い、このプリンタから該プリンタを特定する情報を、前
    記受信者を特定する情報として出力させることを特徴と
    する請求項1から3いずれか1項記載のデータ配信方
    法。
  5. 【請求項5】 前記暗号化された出力を、データ配信者
    側に戻すことを特徴とする請求項1から4いずれか1項
    記載のデータ配信方法。
  6. 【請求項6】 前記暗号化された出力を、公衆回線ネッ
    トワーク経由でデータ配信者側に戻すことを特徴とする
    請求項5記載のデータ配信方法。
  7. 【請求項7】 請求項1から6いずれか1項記載のデー
    タ配信方法を実行するソフトウェアを記憶した記憶媒
    体。
JP20922399A 1998-07-30 1999-07-23 データ配信方法 Expired - Lifetime JP3853541B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP20922399A JP3853541B2 (ja) 1998-07-30 1999-07-23 データ配信方法
US09/363,892 US7194635B1 (en) 1998-07-30 1999-07-30 Method for secure delivery of digital image data using an embedded watermark based on a receiving indentity

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP21498698 1998-07-30
JP10-214986 1998-07-30
JP20922399A JP3853541B2 (ja) 1998-07-30 1999-07-23 データ配信方法

Publications (2)

Publication Number Publication Date
JP2000106627A true JP2000106627A (ja) 2000-04-11
JP3853541B2 JP3853541B2 (ja) 2006-12-06

Family

ID=26517297

Family Applications (1)

Application Number Title Priority Date Filing Date
JP20922399A Expired - Lifetime JP3853541B2 (ja) 1998-07-30 1999-07-23 データ配信方法

Country Status (2)

Country Link
US (1) US7194635B1 (ja)
JP (1) JP3853541B2 (ja)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001312660A (ja) * 2000-04-28 2001-11-09 Toshiba Tec Corp 広告受容の対価支払システム
JP2002077572A (ja) * 2000-08-29 2002-03-15 Nec Corp ディジタルコンテンツ生成・再生装置及び広告情報配信システム
JP2002197347A (ja) * 2000-12-25 2002-07-12 Photo Wave:Kk 写真プリントシステム
US7124114B1 (en) 2000-11-09 2006-10-17 Macrovision Corporation Method and apparatus for determining digital A/V content distribution terms based on detected piracy levels
US7436975B2 (en) 2001-12-11 2008-10-14 Minolta Co., Ltd. Image reading apparatus, image reading method and image reading system
JP2009530896A (ja) * 2006-03-17 2009-08-27 エヌエックスピー ビー ヴィ 修飾子電子透かしを用いた圧縮方式、及びこの圧縮方式を用いて画像をフレームメモリに一次記憶する装置
JP2011530939A (ja) * 2008-08-14 2011-12-22 エスケーテレコム株式会社 可聴周波数帯域でのデータ送受信システム及び方法
JP2012006385A (ja) * 2010-05-24 2012-01-12 Canon Inc 画像処理装置、インクジェット記録装置、データ生成装置および画像処理方法
US8392827B2 (en) 2001-04-30 2013-03-05 International Business Machines Corporation Method for generation and assembly of web page content
JP2013538528A (ja) * 2010-09-13 2013-10-10 ドルビー ラボラトリーズ ライセンシング コーポレイション 色域外の色座標を使用したデータ伝送
JP2015220734A (ja) * 2014-05-21 2015-12-07 日本放送協会 情報多重化装置、情報分離装置、およびそれらのプログラム
WO2019229970A1 (ja) * 2018-06-01 2019-12-05 三菱電機株式会社 エレベーターの監視装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6785814B1 (en) * 1998-07-28 2004-08-31 Fuji Photo Film Co., Ltd Information embedding method and apparatus
US7440584B2 (en) * 2000-03-31 2008-10-21 Intel Corporation System and method for marking data and document distribution
US20030179413A1 (en) * 2002-03-19 2003-09-25 Lenz Gary A. Identification card watermarking
FR2935508B1 (fr) * 2008-09-01 2010-09-17 Sagem Securite Procede de determination d'une pseudo-identite a partir de caracteristiques de minuties et dispositif associe.
US20200366459A1 (en) * 2019-05-17 2020-11-19 International Business Machines Corporation Searching Over Encrypted Model and Encrypted Data Using Secure Single-and Multi-Party Learning Based on Encrypted Data

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4775978A (en) * 1987-01-12 1988-10-04 Magnetic Peripherals Inc. Data error correction system
EP0987855A2 (en) * 1993-11-18 2000-03-22 Digimarc Corporation Method and apparatus for encoding audio with auxiliary digital data
US5841886A (en) * 1993-11-18 1998-11-24 Digimarc Corporation Security system for photographic identification
DE4413451A1 (de) * 1994-04-18 1995-12-14 Rolf Brugger Vorrichtung zum Vertrieb von Musikinformationen in digitaler Form
EP0766468B1 (en) 1995-09-28 2006-05-03 Nec Corporation Method and system for inserting a spread spectrum watermark into multimedia data
US6205249B1 (en) * 1998-04-02 2001-03-20 Scott A. Moskowitz Multiple transform utilization and applications for secure digital watermarking
JPH10191025A (ja) 1996-12-26 1998-07-21 Nippon Telegr & Teleph Corp <Ntt> デジタル画像への情報埋め込み装置
TW338865B (en) * 1997-06-03 1998-08-21 Philips Eloctronics N V Authentication system
DE69835133T8 (de) * 1997-12-03 2007-05-16 Kabushiki Kaisha Toshiba, Kawasaki Verfahren zur Bildinformationsverarbeitung und Verfahren zur Verhinderung von Fälschungen von Zertifikaten und dergleichen
JP2000295454A (ja) * 1999-04-05 2000-10-20 Hitachi Ltd 電子透かし装置及び方法並びに記録媒体

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001312660A (ja) * 2000-04-28 2001-11-09 Toshiba Tec Corp 広告受容の対価支払システム
JP2002077572A (ja) * 2000-08-29 2002-03-15 Nec Corp ディジタルコンテンツ生成・再生装置及び広告情報配信システム
US7124114B1 (en) 2000-11-09 2006-10-17 Macrovision Corporation Method and apparatus for determining digital A/V content distribution terms based on detected piracy levels
JP2002197347A (ja) * 2000-12-25 2002-07-12 Photo Wave:Kk 写真プリントシステム
US8392827B2 (en) 2001-04-30 2013-03-05 International Business Machines Corporation Method for generation and assembly of web page content
US7436975B2 (en) 2001-12-11 2008-10-14 Minolta Co., Ltd. Image reading apparatus, image reading method and image reading system
JP2009530896A (ja) * 2006-03-17 2009-08-27 エヌエックスピー ビー ヴィ 修飾子電子透かしを用いた圧縮方式、及びこの圧縮方式を用いて画像をフレームメモリに一次記憶する装置
JP2011530939A (ja) * 2008-08-14 2011-12-22 エスケーテレコム株式会社 可聴周波数帯域でのデータ送受信システム及び方法
US9002487B2 (en) 2008-08-14 2015-04-07 Sk Telecom Co., Ltd. System and method for data reception and transmission in audible frequency band
JP2012006385A (ja) * 2010-05-24 2012-01-12 Canon Inc 画像処理装置、インクジェット記録装置、データ生成装置および画像処理方法
US9623671B2 (en) 2010-05-24 2017-04-18 Canon Kabushiki Kaisha Image processor, printing apparatus, and image processing method
US10022983B2 (en) 2010-05-24 2018-07-17 Canon Kabushiki Kaisha Image processor, printing apparatus, and image processing method
JP2013538528A (ja) * 2010-09-13 2013-10-10 ドルビー ラボラトリーズ ライセンシング コーポレイション 色域外の色座標を使用したデータ伝送
KR101471830B1 (ko) * 2010-09-13 2014-12-11 돌비 레버러토리즈 라이쎈싱 코오포레이션 색역 밖의 컬러 좌표들을 이용하는 데이터 송신
JP2015220734A (ja) * 2014-05-21 2015-12-07 日本放送協会 情報多重化装置、情報分離装置、およびそれらのプログラム
WO2019229970A1 (ja) * 2018-06-01 2019-12-05 三菱電機株式会社 エレベーターの監視装置

Also Published As

Publication number Publication date
US7194635B1 (en) 2007-03-20
JP3853541B2 (ja) 2006-12-06

Similar Documents

Publication Publication Date Title
JP3813387B2 (ja) 情報埋込方法および装置並びに記録媒体
JP3853541B2 (ja) データ配信方法
JP3946909B2 (ja) 第1デジタル画像と第2デジタル画像とを1つの復号デジタル画像へと複合する方法
US6438251B1 (en) Method of processing image information and method of preventing forgery of certificates or the like
US6513118B1 (en) Electronic watermarking method, electronic information distribution system, image filing apparatus and storage medium therefor
US6697498B2 (en) Method and computer program product for hiding information in an indexed color image
US6425081B1 (en) Electronic watermark system electronic information distribution system and image filing apparatus
DE69933153T2 (de) Elektronisches Gerät, Datenverarbeitungsverfahren und -system sowie rechnerlesbares Speichermedium
US7607017B2 (en) Embedding data in material
US8175322B2 (en) Method of digital watermark and the corresponding device, and digital camera which can append watermark
US20020104003A1 (en) Digital watermark processing apparatus, and digital contents distribution system using the apparatus
CA2470980C (en) Embedding information in images using two-layer conjugate screening
US20020093567A1 (en) Method and system for generating a digital photographic proof
JPH11196392A (ja) 電子画像の改竄検出方法及び改竄検出システム
JPH11168616A (ja) 画像情報処理方法および画像情報処理装置
US7269271B2 (en) Method for digital image alteration detection and original digital image recovery
JP3770732B2 (ja) 画像への情報添付方法および画像からの情報抽出方法
JPH11232259A (ja) 電子文書管理装置
JP2000358154A (ja) 透かしマークの可視度を調整可能な電子透かし
JP2010206399A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
JP3527082B2 (ja) 電子認証方法及びシステム
JPH11212462A (ja) 電子透かし方式、電子情報配布システム、画像ファイル装置、及び記憶媒体
Bhattacharyya et al. A secured technique for image data hiding
JPH09154007A (ja) 機密情報記録方法
JP3431130B2 (ja) デジタルカメラの機能付加方法および記録媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040823

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060731

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060905

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060906

R150 Certificate of patent or registration of utility model

Ref document number: 3853541

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090915

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090915

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090915

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100915

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100915

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110915

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120915

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130915

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: R3D02

EXPY Cancellation because of completion of term
S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R370 Written measure of declining of transfer procedure

Free format text: JAPANESE INTERMEDIATE CODE: R370