JP2000350010A - 画像処理装置および画像処理方法、並びに媒体 - Google Patents

画像処理装置および画像処理方法、並びに媒体

Info

Publication number
JP2000350010A
JP2000350010A JP16052999A JP16052999A JP2000350010A JP 2000350010 A JP2000350010 A JP 2000350010A JP 16052999 A JP16052999 A JP 16052999A JP 16052999 A JP16052999 A JP 16052999A JP 2000350010 A JP2000350010 A JP 2000350010A
Authority
JP
Japan
Prior art keywords
pixel
image
information
embedded
decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP16052999A
Other languages
English (en)
Other versions
JP4092608B2 (ja
Inventor
Tetsujiro Kondo
哲二郎 近藤
Naoki Kobayashi
小林  直樹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP16052999A priority Critical patent/JP4092608B2/ja
Priority to US09/587,838 priority patent/US6870944B1/en
Priority to EP00304811A priority patent/EP1059606B1/en
Priority to KR1020000030985A priority patent/KR100667612B1/ko
Priority to DE60030911T priority patent/DE60030911T2/de
Priority to CNB001202073A priority patent/CN1148964C/zh
Publication of JP2000350010A publication Critical patent/JP2000350010A/ja
Priority to US10/915,806 priority patent/US7606431B2/en
Priority to US10/915,829 priority patent/US6940996B2/en
Application granted granted Critical
Publication of JP4092608B2 publication Critical patent/JP4092608B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

(57)【要約】 【課題】 画像の画質を劣化させず、かつデータ量を増
加させずに、情報を埋め込む。 【解決手段】 埋め込み符号化器3では、画像を構成す
る一部の画素が選択され、その選択された画素の画素値
が、付加情報にしたがってローテーションされることに
より、画素に、付加情報が埋め込まれ、埋め込み画像が
出力される。一方、埋め込み復号器6では、埋め込み画
像を構成する一部の画素が選択され、その選択された画
素の画素値が、所定のビット数だけローテーションされ
る。さらに、その画素値がローテーションされた画素
と、選択された画素以外の画素との間の相関が演算さ
れ、その相関に基づいて、選択された画素を復号するた
めにローテーションすべきビット数が決定される。そし
て、その決定されたビット数に基づいて、選択された画
素と、その画素に埋め込まれた付加情報とが復号され
る。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、画像処理装置およ
び画像処理方法、並びに媒体に関し、再生画像の画質の
劣化を極力なくし、かつデータ量を増加せずに、画像に
情報を埋め込むことができるようにする画像処理装置お
よび画像処理方法、並びに媒体に関する。
【0002】
【従来の技術】信号に対して、そのデータ量を増加させ
ることなく、情報を埋め込む手法としては、例えば、デ
ィジタルオーディオデータの最下位ビットや、下位2ビ
ットなどを、埋め込む情報に変換するものなどがある。
この手法は、ディジタルオーディオデータの下位ビット
が、その音質にあまり影響を与えないことを利用し、そ
の下位ビットを、単に、埋め込む情報に置き換えるもの
であり、従って、再生時には、情報が埋め込まれたディ
ジタルオーディオデータは、その下位ビットを元に戻さ
ずに、そのまま出力される。即ち、情報が埋め込まれた
下位ビットを、元に戻すのは困難であり、また、下位ビ
ットは、音質に、あまり影響を与えないことから、ディ
ジタルオーディオデータは、情報が埋め込まれた状態で
出力される。
【0003】
【発明が解決しようとする課題】しかしながら、以上の
ような手法では、本来の信号と異なる信号が出力され
る。従って、信号がオーディオデータである場合には、
その音質に、また、信号がビデオデータである場合に
は、その画質に、少なからず影響がある。
【0004】本発明は、このような状況に鑑みてなされ
たものであり、画像の画質の劣化を極力なくし、かつデ
ータ量を増加せずに、画像に情報を埋め込むことができ
るようにするものである。
【0005】
【課題を解決するための手段】請求項1に記載の画像処
理装置は、画像を構成する一部の画素を選択する選択手
段と、選択手段によって選択された画素の画素値を、情
報にしたがってローテーションすることにより、画素
に、情報を埋め込むローテーション手段とを含むことを
特徴とする。
【0006】ローテーション手段には、選択手段によっ
て選択された画素のうちの一部の画素の画素値を、最下
位ビットから最上位ビットの方向にローテーションさ
せ、残りの画素の画素値を、最上位ビットから最下位ビ
ットの方向にローテーションさせることができる。
【0007】画像を所定のブロックに分割する分割手段
をさらに設けることができ、この場合、選択手段には、
ブロックを構成する一部の画素を選択させることができ
る。
【0008】請求項4に記載の画像処理方法は、画像を
構成する一部の画素を選択する選択ステップと、選択ス
テップで選択された画素の画素値を、情報にしたがって
ローテーションすることにより、画素に、情報を埋め込
むローテーションステップとを含むことを特徴とする。
【0009】請求項5に記載の媒体がコンピュータに実
行させるプログラムは、画像を構成する一部の画素を選
択する選択ステップと、選択ステップで選択された画素
の画素値を、情報にしたがってローテーションすること
により、画素に、情報を埋め込むローテーションステッ
プとを含むことを特徴とする。
【0010】請求項6に記載の画像処理装置は、情報埋
め込み画像を構成する一部の画素を選択する選択手段
と、選択手段によって選択された画素の画素値を、所定
のビット数だけローテーションするローテーション手段
と、画素値がローテーションされた画素と、選択手段に
よって選択された画素以外の画素との間の相関を演算す
る相関演算手段と、相関に基づいて、選択手段によって
選択された画素を復号するための、画素値を、ローテー
ションするビット数を決定する決定手段と、決定手段に
よって決定されたビット数に基づいて、選択手段によっ
て選択された画素を復号するとともに、その画素に埋め
込まれた情報を復号する復号手段とを含むことを特徴と
する。
【0011】ローテーション手段には、選択手段によっ
て選択された画素のうちの一部の画素の画素値を、最下
位ビットから最上位ビットの方向にローテーションさ
せ、残りの画素の画素値を、最上位ビットから最下位ビ
ットの方向にローテーションさせることができる。
【0012】情報埋め込み画像を所定のブロックに分割
する分割手段をさらに設けることができ、この場合、選
択手段には、ブロックを構成する一部の画素を選択させ
ることができる。
【0013】相関演算手段には、画素値がローテーショ
ンされた画素について、その画素の周辺にある画素であ
って、選択手段によって選択された画素以外の画素との
間の相関を演算させることができる。
【0014】相関演算手段には、画素値がローテーショ
ンされた画素について、選択手段によって選択された画
素以外の画素との間の相関の他、既に復号された画素と
の間の相関も演算させることができる。
【0015】請求項11に記載の画像処理方法は、情報
埋め込み画像を構成する一部の画素を選択する選択ステ
ップと、選択ステップで選択された画素の画素値を、所
定のビット数だけローテーションするローテーションス
テップと、画素値がローテーションされた画素と、選択
ステップで選択された画素以外の画素との間の相関を演
算する相関演算ステップと、相関に基づいて、選択ステ
ップで選択された画素を復号するための、画素値をロー
テーションするビット数を決定する決定ステップと、決
定ステップで決定されたビット数に基づいて、選択ステ
ップで選択された画素を復号するとともに、その画素に
埋め込まれた情報を復号する復号ステップとを含むこと
を特徴とする。
【0016】請求項12に記載の媒体がコンピュータに
実行させるプログラムは、情報埋め込み画像を構成する
一部の画素を選択する選択ステップと、選択ステップで
選択された画素の画素値を、所定のビット数だけローテ
ーションするローテーションステップと、画素値がロー
テーションされた画素と、選択ステップで選択された画
素以外の画素との間の相関を演算する相関演算ステップ
と、相関に基づいて、選択ステップで選択された画素を
復号するための、画素値をローテーションするビット数
を決定する決定ステップと、決定ステップで決定された
ビット数に基づいて、選択ステップで選択された画素を
復号するとともに、その画素に埋め込まれた情報を復号
する復号ステップとを含むことを特徴とする。
【0017】請求項13に記載の画像処理装置は、画像
を構成する一部の画素を選択する第1の選択手段と、第
1の選択手段によって選択された画素の画素値を、情報
にしたがってローテーションすることにより、画素に、
情報を埋め込み、情報埋め込み画像を出力する第1のロ
ーテーション手段と、情報埋め込み画像を構成する一部
の画素を選択する第2の選択手段と、第2の選択手段に
よって選択された画素の画素値を、所定のビット数だけ
ローテーションする第2のローテーション手段と、画素
値がローテーションされた画素と、第2の選択手段によ
って選択された画素以外の画素との間の相関を演算する
相関演算手段と、相関に基づいて、第2の選択手段によ
って選択された画素を復号するための、画素値をローテ
ーションするビット数を決定する決定手段と、決定手段
によって決定されたビット数に基づいて、第2の選択手
段によって選択された画素を復号するとともに、その画
素に埋め込まれた情報を復号する復号手段とを含むこと
を特徴とする。
【0018】請求項1に記載の画像処理装置および請求
項4に記載の画像処理方法、並びに請求項5に記載の媒
体においては、画像を構成する一部の画素が選択され、
その選択された画素の画素値が、情報にしたがってロー
テーションされることにより、画素に、情報が埋め込ま
れる。
【0019】請求項6に記載の画像処理装置および請求
項11に記載の画像処理方法、並びに請求項12に記載
の媒体においては、情報埋め込み画像を構成する一部の
画素が選択され、その選択された画素の画素値が、所定
のビット数だけローテーションされる。さらに、その画
素値がローテーションされた画素と、選択された画素以
外の画素との間の相関が演算され、その相関に基づい
て、選択された画素を復号するための、画素値をローテ
ーションするビット数が決定される。そして、その決定
されたビット数に基づいて、選択された画素が復号され
るとともに、その画素に埋め込まれた情報が復号され
る。
【0020】請求項13に記載の画像処理装置において
は、画像を構成する一部の画素が選択され、その選択さ
れた画素の画素値が、情報にしたがってローテーション
されることにより、画素に、情報が埋め込まれ、情報埋
め込み画像が出力される。一方、情報埋め込み画像を構
成する一部の画素が選択され、その選択された画素の画
素値が、所定のビット数だけローテーションされる。さ
らに、その画素値がローテーションされた画素と、選択
された画素以外の画素との間の相関が演算され、その相
関に基づいて、選択された画素を復号するための、画素
値をローテーションするビット数が決定される。そし
て、その決定されたビット数に基づいて、選択された画
素が復号されるとともに、その画素に埋め込まれた情報
が復号される。
【0021】
【発明の実施の形態】図1は、本発明を適用した画像伝
送システム(システムとは、複数の装置が論理的に集合
した物をいい、各構成の装置が同一筐体中にあるか否か
は問わない)の一実施の形態の構成例を示している。
【0022】この画像伝送システムは、符号化装置10
および復号装置20で構成されており、符号化装置10
は、符号化対象としての、例えば、画像を符号化して符
号化データを出力し、復号装置20は、その符号化デー
タを、元の画像に復号するようになされている。
【0023】即ち、画像データベース1は、符号化すべ
き画像(例えば、ディジタル画像)を記憶している。そ
して、画像データベース1からは、そこに記憶されてい
る画像が読み出され、埋め込み符号化器3に供給され
る。
【0024】また、付加情報データベース2は、符号化
対象の画像に埋め込むべき情報としての付加情報(ディ
ジタルデータ)を記憶している。そして、付加情報デー
タベース2からも、そこに記憶されている付加情報が読
み出され、埋め込み符号化器3に供給される。
【0025】埋め込み符号化器3では、画像データベー
ス1からの画像、および付加情報データベース2からの
付加情報が受信される。さらに、埋め込み符号化器3
は、画像データベース1からの画像が有するエネルギの
偏りを利用して復号を行うことができるように、その画
像を、付加情報データベース2からの付加情報にしたが
って符号化して出力する。即ち、埋め込み符号化器3
は、画像が有するエネルギの偏りを利用して復号を行う
ことができるように、画像に付加情報を埋め込むこと
で、その画像を符号化し、符号化データを出力する。埋
め込み符号化器3が出力する符号化データは、例えば、
光磁気ディスク、磁気ディスク、光ディスク、磁気テー
プ、相変化ディスクなどでなる記録媒体4に記録され、
あるいは、また、例えば、地上波、衛星回線、CATV
(Cable Television)網、インターネット、公衆回線な
どでなる伝送媒体5を介して伝送され、復号装置20に
提供される。
【0026】復号装置20は、埋め込み復号器6で構成
され、そこでは、記録媒体4または伝送媒体5を介して
提供される符号化データが受信される。さらに、埋め込
み復号器6は、その符号化データを、画像が有するエネ
ルギの偏りを利用して、元の画像および付加情報に復号
する。復号された画像は、例えば、図示せぬモニタに供
給されて表示される。また、復号された付加情報は、例
えば、所定の処理を行うのに用いられる。
【0027】次に、図1の埋め込み符号化器3における
符号化、および埋め込み復号器6における復号の原理に
ついて説明する。
【0028】一般に、情報と呼ばれるものは、エネルギ
(エントロピー)の偏り(普遍性)を有し、この偏り
が、情報(価値ある情報)として認識される。即ち、例
えば、ある風景を撮影して得られる画像が、そのような
風景の画像であると認識されるのは、画像(画像を構成
する各画素の画素値など)が、その風景に対応したエネ
ルギの偏りを有するからであり、エネルギの偏りがない
画像は、雑音等にすぎず、情報としての利用価値はな
い。
【0029】従って、価値ある情報に対して、何らかの
操作を施し、その情報が有する本来のエネルギの偏り
を、いわば破壊した場合でも、その破壊されたエネルギ
の偏りを元に戻すことで、何らかの操作が施された情報
も、元の情報に戻すことができる。即ち、情報を符号化
して得られる符号化データは、その情報が有する本来の
エネルギの偏りを利用して、元の情報に復号することが
できる。
【0030】情報が有するエネルギ(の偏り)を表すも
のとしては、例えば、相関性があり、情報の相関性と
は、その情報の構成要素(例えば、画像であれば、その
画像を構成する画素やラインなど)どうしの相関(例え
ば、自己相関や、ある構成要素と他の構成要素との距離
など)を意味する。
【0031】即ち、例えば、いま、図2に示すようなH
ラインでなる画像があった場合に、その上から1行目の
ライン(第1ライン)と、他のラインとの相関は、一般
に、図3(A)に示すように、第1ラインとの距離が近
いライン(図2における画面の上の行のライン)ほど大
きくなり、第1ラインとの距離が遠いライン(図2にお
ける画面の下の行のライン)ほど小さくなる(第1ライ
ンから近いほど相関が大きくなり、遠いほど相関が小さ
くなるという相関の偏りがある)。
【0032】そこで、いま、図2の画像において、第1
ラインから近い第Mラインと、第1ラインから遠い第N
ラインとを入れ替え(1<M<N≦H)、その入れ替え
後の画像について、第1ラインと、他のラインとの相関
を計算すると、それは、例えば、図3(B)に示すよう
になる。
【0033】即ち、入れ替え後の画像では、第1ライン
から近い第Mライン(入れ替え前の第Nライン)との相
関が小さくなり、第1ラインから遠い第Nライン(入れ
替え前の第Mライン)との相関が大きくなる。
【0034】従って、図3(B)では、第1ラインから
近いほど相関が大きくなり、遠いほど相関が小さくなる
という相関の偏りが破壊されている。しかしながら、画
像については、一般に、第1ラインから近いほど相関が
大きくなり、遠いほど相関が小さくなるという相関の偏
りを利用することにより、破壊された相関の偏りを、元
に戻すことができる。即ち、図3(B)において、第1
ラインから近い第Mラインとの相関が小さく、第1ライ
ンから遠い第Nラインとの相関が大きいのは、画像が有
する本来の相関の偏りからすれば、明らかに不自然であ
り(おかしく)、第Mラインと第Nラインとは入れ替え
るべきである。そして、図3(B)における第Mライン
と第Nラインとを入れ替えることで、図3(A)に示す
ような相関、即ち、元の画像を復号することができる。
【0035】ここで、図2および図3で説明した場合に
おいては、ラインの入れ替えが、画像の符号化を行うこ
ととなる。また、その符号化に際し、埋め込み符号化器
3では、例えば、何ライン目を移動するかや、どのライ
ンどうしを入れ替えるかなどが、付加情報にしたがって
決定されることになる。一方、埋め込み復号器6では、
符号化後の画像、即ち、ラインの入れ替えられた画像
を、その相関を利用して、ラインを元の位置に入れ替え
ることにより、元の画像に戻すことが、画像を復号する
こととなる。さらに、その復号に際し、埋め込み復号器
6において、例えば、何ライン目を移動したかや、どの
ラインどうしを入れ替えたかなどを検出することが、画
像に埋め込まれた付加情報を復号することになる。
【0036】次に、図4は、以上のような画像の相関性
を利用して元に戻すことができるように、画像に付加情
報を埋め込む埋め込み符号化を行う図1の埋め込み符号
化器3の構成例を示している。
【0037】画像データベース1から供給される画像
は、フレームメモリ31に供給されるようになされてお
り、フレームメモリ31は、画像データベース1からの
画像を、例えば、フレーム単位で一時記憶するようにな
されている。
【0038】CPU(Central Processing Unit)32は、プ
ログラムメモリ33に記憶されたプログラムを実行する
ことで、フレームメモリ31に記憶された画像を対象
に、後述する埋め込み符号化処理を行うようになされて
いる。即ち、CPU32は、付加情報データベース2から
供給される付加情報を、フレームメモリ31に記憶され
た画像に埋め込むようになされている。
【0039】プログラムメモリ33は、例えば、ROM(Re
ad Only Memory)やRAM(Random Access Memory)などで構
成され、CPU32に、埋め込み符号化処理を行わせるた
めのコンピュータプログラムを記憶している。
【0040】出力I/F(Interface)34は、フレームメ
モリ31から、付加情報の埋め込まれた画像を読み出
し、符号化データとして出力するようになされている。
【0041】なお、フレームメモリ31は、複数のフレ
ームを記憶することのできるように、複数バンクで構成
されており、バンク切り替えを行うことで、フレームメ
モリ31では、画像データベース1から供給される画像
の記憶、CPU32による埋め込み符号化処理の対象とな
っている画像の記憶、および埋め込み符号化処理後の画
像(符号化データ)の出力を、同時に行うことができる
ようになされている。これにより、画像データベース1
から供給される画像が、動画であっても、符号化データ
のリアルタイム出力を行うことができるようになされて
いる。
【0042】次に、図5は、図4のCPU32が、プログ
ラムメモリ33に記憶されたプログラムを実行すること
で実現される埋め込み符号化器3の機能的構成例を示し
ている。
【0043】ブロック分割部41には、符号化対象とし
ての画像が、例えば、1フレーム単位で供給されるよう
になっており、ブロック分割部41は、その1フレーム
単位の画像を、所定の大きさのブロックに分割して、ビ
ットローテーション部42に供給するようになってい
る。
【0044】ビットローテーション部42には、ブロッ
ク分割部41からブロックが供給される他、画像に埋め
込む付加情報が供給されるようになっており、ビットロ
ーテーション部42は、ブロック分割部41からのブロ
ックを構成する一部の画素を選択し、その画素(以下、
適宜、選択画素という)の画素値を、付加情報にしたが
ってローテーションすることにより、選択画素に、付加
情報を埋め込むようになっている。選択画素に付加情報
が埋め込まれたブロックは、符号化ブロックとして符号
化画像メモリ43に供給されるようになっている。
【0045】符号化画像メモリ43は、ビットローテー
ション部42から供給される符号化ブロックを順次記憶
し、1フレーム分の符号化ブロックを記憶すると、その
1フレーム分の符号化ブロックを、符号化データとして
出力するようになっている。
【0046】次に、図6のフローチャートを参照して、
図5の埋め込み符号化器3において行われる埋め込み符
号化処理について説明する。
【0047】上述したように、ブロック分割部41に
は、符号化対象としての画像が、1フレーム単位で供給
されるようになっており、ブロック分割部41は、1フ
レームの画像を受信すると、ステップS1において、そ
の1フレームの画像を、所定の大きさのブロックに分割
する。即ち、ブロック分割部41は、1フレームの画像
を、例えば、図7(A)に示すように、横×縦が4×4
画素のブロックに分割する。ブロック分割41において
得られたブロックは、例えば、ラインスキャン順に、順
次、ビットローテーション部42に供給される。
【0048】ビットローテーション部42は、ブロック
分割部41からブロックを受信すると、そのブロック
を、注目ブロックとし、ステップS2において、注目ブ
ロックを構成する一部の画素を選択する。即ち、ビット
ローテーション部42は、注目ブロックを構成する画素
のうち、例えば、図7(A)に●印および斜線を付した
○印で示すような、五の目格子を構成するような位置関
係にある画素を、選択画素として選択する。従って、こ
こでは、ブロックを構成する1/2の画素が、選択画素
として選択される。
【0049】そして、ステップS3に進み、ビットロー
テーション部42において、選択画素の画素値が、付加
情報にしたがってローテーションされることで、選択画
素に、付加情報が埋め込まれる。即ち、ビットローテー
ション部42は、選択画素のうち、図7(A)において
斜線を付した○印で示す選択画素の画素値を、そのLSB
(Least Significant Bit)からMSB(Most Significant Bi
t)の方向に、付加情報の値に対応するビット数だけロー
テーション(以下、適宜、左ローテーションという)す
る。
【0050】ここで、ローテーションは、基本的には、
ビットシフトと同一であるが、LSBからMSB方向にローテ
ーションを行う場合には、MSBは捨てずにLSBに移動さ
れ、逆に、MSBからLSB方向にローテーションを行う場合
には、LSBは捨てずにMSBに移動される。
【0051】さらに、ビットローテーション部42は、
選択画素のうち、図7(A)において●印で示す選択画
素の画素値を、そのMSBからLSBの方向に、付加情報に対
応するビット数だけローテーション(以下、適宜、右ロ
ーテーションという)する。
【0052】ここで、画素値が左ローテーションまたは
右ローテーションされる画素を、それぞれ左ローテーシ
ョン画素または右ローテーション画素というものとする
と、本実施の形態では、選択画素の斜め方向について、
左ローテーション画素と右ローテーション画素とが交互
に並ぶようになっており、従って、選択画素の半分が左
ローテーションされ、残りの半分が右ローテーションさ
れる。
【0053】例えば、いま、画素値が8ビットで表され
るとし、ある左ローテーション画素の画素値が、001111
01B(Bは、その前の数字が2進数であることを表す)で
あり、また、ある右ローテーション画素の画素値が、10
010111Bであったとする。さらに、付加情報が2である
とすると、図7(B)に示すように、画素値が00111101
Bの左ローテーション画素、または画素値が10010111Bで
ある右ローテーション画素は、2ビットだけ左ローテー
ション、または右ローテーションされ、それぞれの画素
値は、11110100B、または11100101Bとされる。ブロック
内の他の左ローテーション画素および右ローテーション
画素も、同様に、付加情報に従ってローテーションされ
る。
【0054】なお、画素値が8ビットで表される場合に
おいては、0乃至7ビットのローテーションが可能であ
り、従って、この場合、1のブロックには、0乃至7の
付加情報(3ビットで表される付加情報)を埋め込むこ
とができる。
【0055】ステップS3で選択画素のローテーション
が行われたブロックは、符号化ブロックとして、符号化
画像メモリ43に供給されて記憶される。そして、ステ
ップS4に進み、ビットローテーション部42におい
て、1フレームの画像を分割して得られたブロックのう
ち、まだ、注目ブロックとして処理していないブロック
(以下、適宜、未処理ブロックという)があるかどうか
が判定される。ステップS4において、未処理ブロック
があると判定された場合、その未処理ブロックのいずれ
かが注目ブロックとされ、ステップS2に戻り、以下、
同様の処理が繰り返される。
【0056】また、ステップS4において、未処理ブロ
ックがないと判定された場合、即ち、符号化画像メモリ
43に、1フレーム分の符号化ブロックが記憶された場
合、その1フレーム分の符号化ブロックが、符号化画像
メモリ43から読み出される。そして、ステップS5に
進み、ブロック分割部41において、次に処理すべきフ
レームがあるかどうかが判定される。ステップS5にお
いて、次に処理すべきフレームがあると判定された場
合、ステップS1に戻り、そのフレームを対象に、以
下、同様の処理が行われる。
【0057】一方、ステップS5において、次に処理す
べきフレームがないと判定された場合、埋め込み符号化
処理を終了する。
【0058】以上のように、画像を構成する一部の画素
を選択し、その選択画素の画素値を、付加情報にしたが
ってローテーションすることにより、画素に、付加情報
を埋め込むことで、画像の画質の劣化を極力なくし、か
つデータ量を増加せずに、画像に付加情報を埋め込むこ
とができる。
【0059】即ち、付加情報が埋め込まれた選択画素
(図7(A)において、斜線を付した○印および●印で
示す画素)の画素値は、画像の相関性、即ち、ここで
は、付加情報が埋め込まれなかった画素(図7(A)に
おいて、○印で示す画素)等との間の相関を利用するこ
とにより、後述するように、オーバヘッドなしで、元の
画素と付加情報に復号(戻す)ことができる。従って、
その結果得られる復号画像(再生画像)には、基本的
に、付加情報を埋め込むことによる画質の劣化は生じな
い。
【0060】次に、図8は、図5の埋め込み符号化器3
が出力する符号化データを、画像の相関性を利用して元
の画像と付加情報に復号する図1の埋め込み復号器6の
構成例を示している。
【0061】符号化データ、即ち、付加情報が埋め込ま
れた画像(以下、適宜、埋め込み画像という)は、フレ
ームメモリ51に供給されるようになされており、フレ
ームメモリ51は、埋め込み画像を、例えば、フレーム
単位で一時記憶するようになされている。なお、フレー
ムメモリ51も、図4のフレームメモリ31と同様に構
成され、バンク切り替えを行うことにより、埋め込み画
像が、動画であっても、そのリアルタイム処理が可能と
なっている。
【0062】出力I/F52は、フレームメモリ51か
ら、CPU53による、後述する埋め込み復号処理の結果
得られる画像(復号画像)を読み出して出力するように
なされている。
【0063】CPU53は、プログラムメモリ54に記憶
されたプログラムを実行することで、埋め込み復号処理
を行うようになされている。即ち、CPU53は、フレー
ムメモリ51に記憶された埋め込み画像を、画像の相関
性を利用して元の画像と付加情報に復号するようになさ
れている。
【0064】プログラムメモリ54は、例えば、図4の
プログラムメモリ33と同様に構成され、CPU53に、
埋め込み復号化処理を行わせるためのコンピュータプロ
グラムを記憶している。
【0065】次に、図9は、図8のCPU53が、プログ
ラムメモリ54に記憶されたプログラムを実行すること
で実現される埋め込み復号器6の機能的構成例を示して
いる。
【0066】符号化データとしての埋め込み画像は、例
えば、1フレーム単位で、ブロック分割部61に供給さ
れるようになっている。ブロック分割部61は、埋め込
み画像を、図5のブロック分割部41における場合と同
様に、所定の大きさのブロック、即ち、符号化ブロック
に分割し、ビット逆ローテーション部62に順次供給す
るようになっている。
【0067】ビット逆ローテーション部62は、ブロッ
ク分割部61からの符号化ブロックを構成する画素のう
ち、図5のビットローテーション部42が選択するもの
と同一の位置にある画素を、選択画素として選択し、そ
の選択画素の画素値を、ローテーションビット用レジス
タ63から供給されるローテーション値に対応するビッ
ト数だけローテーションし、差分値計算部64に供給す
るようになっている。さらに、ビット逆ローテーション
部62は、最適ローテーションビット保存用レジスタ6
9に記憶された最適ローテーションビットだけ、選択画
素の画素値をローテーションし、これにより、符号化ブ
ロックを元のブロックに復号して、復号画像メモリ71
に供給するようになっている。
【0068】ローテーションビット用レジスタ63は、
画素値をローテーションするビット数としてのローテー
ション値を設定し、ビット逆ローテーション部62およ
びスイッチ65に供給するようになっている。即ち、画
素値がth_rビットで表される場合、その画素値は、0乃
至th_r−1ビットだけローテーションすることが可能で
あり(th_rビット以上のビット数のローテーションは、
0乃至th_r−1ビットのいずれかのビット数のローテー
ションに等しい)、この場合、ローテーションビット用
レジスタ63は、0乃至th_r−1ビットを、順次、ロー
テーション値として設定し、ビット逆ローテーション部
62およびスイッチ65に供給する。
【0069】差分値計算部64は、ビット逆ローテーシ
ョン部64から供給される、選択画素の画素値がローテ
ーションされた符号化ブロックを受信し、その符号化ブ
ロックについて、選択画素と、それに隣接する画素との
相関値、即ち、ここでは、例えば、それぞれの画素値の
差分絶対値和を計算する。この相関値としての画素値の
差分絶対値和は、スイッチ66および比較器68に供給
されるようになっている。
【0070】スイッチ65は、比較器68の制御にした
がって、ローテーションビット用レジスタ63が出力す
るローテーション値を、最適ローテーションビット保存
用レジスタ69に供給するようになっている。スイッチ
66は、比較器68の制御にしたがって、差分値計算部
64が出力する相関値を、最小差分値保存用レジスタ6
7に供給するようになっている。
【0071】最小差分値保存用レジスタ67は、スイッ
チ66を介して、差分値計算部64から供給される相関
値を、いま処理の対象となっている符号化ブロック(以
下、適宜、注目符号化ブロックという)についての最大
の相関値として記憶するようになっている。なお、本実
施の形態では、上述したように、符号化ブロックについ
ての選択画素と、それに隣接する画素との間の相関値
は、それぞれの画素値の差分絶対値和を採用しているこ
とから、最大の相関値とは、画素値の差分絶対値和の最
小値を意味することとなる。
【0072】最小差分値保存用レジスタ67が記憶する
最大の相関値としての、画素値の差分絶対値和の最小値
(最小差分絶対値和)は、比較器68に供給されるよう
になっており、比較器68は、差分値計算部64が出力
する差分絶対値和と、最小差分値保存用レジスタ67が
記憶している最小差分絶対値和とを比較し、その比較結
果に基づいて、スイッチ65および66を制御するよう
になっている。
【0073】最適ローテーションビット保存用レジスタ
69は、スイッチ65を介して、ローテーションビット
用レジスタ63から供給されるローテーション値を、符
号化ブロックの選択画素の画素値をローテーションする
最適なビット数である最適ローテーションビットとして
記憶し、必要に応じて、ビット逆ローテーション部62
および復号付加情報メモリ70に供給するようになって
いる。
【0074】復号付加情報メモリ70は、最適ローテー
ションビット保存用レジスタ69から供給される最適ロ
ーテーションビットに対応する値を、符号化ブロックに
埋め込まれた付加情報の復号結果として一時記憶して出
力するようになっている。復号画像メモリ71は、ビッ
ト逆ローテーション部62が出力する、選択画素の画素
値が最適ローテーションビットだけローテーションされ
た符号化ブロックを、元のブロックの復号結果として一
時記憶し、1フレーム分のブロックの復号結果を記憶す
ると、その1フレーム分の復号画像を出力するようにな
っている。
【0075】次に、図10のフローチャートを参照し
て、図9の埋め込み復号器6において行われる埋め込み
復号処理について説明する。
【0076】上述したように、ブロック分割部61に
は、埋め込み画像が、1フレーム単位で供給されるよう
になっており、ブロック分割部61は、1フレームの埋
め込み画像を受信すると、ステップS11において、そ
の1フレームの埋め込み画像を、図5のブロック分割部
41と同様に、所定の大きさのブロックに分割する。即
ち、ブロック分割部61は、1フレームの埋め込み画像
を、図11(A)に示すように、横×縦が4×4画素の
符号化ブロックに分割する。ブロック分割61において
得られた符号化ブロックは、例えば、ラインスキャン順
に、順次、ビット逆ローテーション部62に供給され
る。
【0077】ビット逆ローテーション部62は、ブロッ
ク分割部61から符号化ブロックを受信すると、ステッ
プS12において、その符号化ブロックを注目符号化ブ
ロックとして、その注目符号化ブロックを構成する一部
の画素を、選択画素として選択する。即ち、ビット逆ロ
ーテーション部62は、注目符号化ブロックを構成する
画素から、図11(A)に斜線を付した○印および●印
で示す、図5のビットローテーション部42が選択画素
として選択する画素と同一の画素を、選択画素として選
択する。さらに、ビット逆ローテーション部62は、選
択画素のうち、図5のビットローテーション部42にお
いて左ローテーション画素または右ローテーション画素
とされたものを、それぞれ右ローテーション画素または
左ローテーション画素とする。
【0078】即ち、符号化ブロックの選択画素のうち、
図5のビットローテーション部42において左ローテー
ション画素とされた画素は、その画素値を、そこに埋め
込まれた付加情報に対応するビット数だけ、左ローテー
ションとは逆に右ローテーションすることで、元の画素
に復号することができる。同様に、図5のビットローテ
ーション部42において右ローテーション画素とされた
画素は、その画素値を、そこに埋め込まれた付加情報に
対応するビット数だけ、右ローテーションとは逆に左ロ
ーテーションすることで、元の画素に復号することがで
きる。
【0079】そこで、ビット逆ローテーション部62
は、図5のビットローテーション部42において左ロー
テーション画素または右ローテーション画素とされたも
のを、それぞれ右ローテーション画素または左ローテー
ション画素とするようになっている。従って、ビット逆
ローテーション部62では、図7(A)で説明した場合
とは逆に、図11(A)において斜線を付した○印で示
す画素が、右ローテーション画素とされ、また、●印で
示す画素が、左ローテーション画素とされる。
【0080】その後、ステップS13に進み、ローテー
ションビット用レジスタ63は、ローテーション値nを
0に初期化し、また、最小差分値保存用レジスタ67
は、その記憶値(最小差分絶対値和)を、所定の大きな
値(例えば、記憶することのできる最大値など)に初期
化する。さらに、ローテーションビット用レジスタ63
は、ローテーション値nを、ビット逆ローテーション部
62に供給するとともに、通常はオフ状態となっている
スイッチ65に出力し、ステップS14に進む。
【0081】ステップS14では、ビット逆ローテーシ
ョン部62において、注目符号化ブロックの左ローテー
ション画素または右ローテーション画素の画素値が、ロ
ーテーションビット用レジスタ63からのローテーショ
ン値nだけ、それぞれ左ローテーションまたは右ローテ
ーションされ、そのローテーション後の注目符号化ブロ
ックが、差分値計算部64に供給される。
【0082】即ち、例えば、いま、画素値が8ビットで
表されるとし、ある右ローテーション画素の画素値が、
11110100Bであり、また、ある左ローテーション画素の
画素値が、11100101Bであったとする。さらに、ローテ
ーション値nが2であるとすると、図11(B)に示す
ように、画素値が11110100Bの右ローテーション画素、
または画素値が11100101Bである左ローテーション画素
は、2ビットだけ右ローテーション、または左ローテー
ションされ、それぞれの画素値は、00111101B、または1
0010111Bとされる。注目符号化ブロック内の他の左ロー
テーションおよび右ローテーション画素も、同様に、ロ
ーテーション値nに従ってローテーションされる。
【0083】差分値計算部64は、ビット逆ローテーシ
ョン部62から、選択画素の画素値がnビットだけロー
テーションされた注目符号化ブロックを受信すると、ス
テップS15において、注目符号化ブロックについての
相関値(注目符号化ブロックを構成する画素どうしの相
関値)として、選択画素とそれに隣接する画素との相関
値の総和、即ち、ここでは、例えば、選択画素とそれに
隣接する画素との画素値の差分絶対値和を計算する。
【0084】具体的には、図12に示すように、符号化
ブロックにおいては、●印および斜線を付した○印で示
す選択画素は、1以上の、選択画素でない画素、即ち、
埋め込み符号化処理において、画素値がローテーション
されていない画素(以下、適宜、非選択画素という)に
隣接している。差分値計算部64では、符号化ブロック
において、選択画素と、その選択画素に隣接している非
選択画素との画素値どうしの差分の絶対値(差分絶対
値)が計算され、その総和(差分絶対値和)が、符号化
ブロックについての相関値として求められる。
【0085】なお、選択画素に複数の非選択画素が隣接
している場合には、例えば、図12において実線の矢印
で示すように、その複数の非選択画素それぞれについ
て、選択画素との差分絶対値が計算される。
【0086】また、上述の場合においては、符号化ブロ
ック内の画素のみを用いて相関値を求めるようにした
が、相関値は、符号化ブロック外の画素をも用いて求め
るようにすることが可能である。
【0087】即ち、例えば、いま、埋め込み画像を構成
する符号化ブロックが、ラインスキャン順に、注目符号
化ブロックとして処理されていくとすると、ある注目符
号化ブロックを処理するときには、その左、上、または
左上に隣接する符号化ブロックについての埋め込み復号
は、既に終了し、元の画素値に戻されている。また、注
目符号化ブロックの、左や上に隣接する画素、さらに
は、その右や下に隣接する画素の中には、画素値がロー
テーションされていない画素(非選択画素)がある。
【0088】注目符号化ブロック外の画素であっても、
画素値が、以上のように元の画素値になっている画素
(図12において点線の○印で示す)は、図12におい
て点線の矢印で示すように、注目符号化ブロック内の選
択画素との差分絶対値を計算するのに用いるようにする
ことができる。
【0089】さらに、上述の場合には、符号化ブロック
についての相関値を求めるのに、選択画素と、その選択
画素に隣接している非選択画素との画素値どうしの差分
絶対値を用いるようにしたが、その他、例えば、選択画
素に隣接していなくても、その選択画素の周辺にある非
選択画素との画素値どうしの差分絶対値をも用いるよう
にすることが可能である。
【0090】また、選択画素との差分絶対値は、その選
択画素に対して空間的に近接する画素の他、時間的に近
接する画素を対象にして求めることも可能である。
【0091】以上のようにして、差分値計算部64にお
いて求められた注目符号化ブロックについての相関値と
しての画素値の差分絶対値和は、比較器68に供給され
るとともに、通常はオフ状態となっているスイッチ66
に供給される。
【0092】比較器68は、差分値計算部64から、注
目符号化ブロックについての差分絶対値和を受信する
と、ステップS15において、その差分絶対値和が、最
小差分値保存用レジスタ67の記憶値(最小差分絶対値
和)より小さいかどうかを判定する。
【0093】ステップS16において、差分計算部64
からの差分絶対値和が、最小差分値保存用レジスタ67
の記憶値より小さいと判定された場合、即ち、選択画素
の画素値をnビットだけローテーションした注目符号化
ブロックについての相関値の方が、その注目符号化ブロ
ックについて、いままでに得られた相関値よりも大き
く、従って、選択画素の画素値をnビットだけローテー
ションした注目符号化ブロックが、元のブロックとなっ
ていることの確からしさが大きい場合、ステップS17
に進み、比較器68は、スイッチ65および66を一
時、オフ状態からオン状態にして、ステップS18に進
む。
【0094】これにより、ステップS17では、ローテ
ーションビット用レジスタ63が出力するローテーショ
ン値nが、スイッチ65を介して、最適ローテーション
ビット保存用レジスタ69に供給され、最適ローテーシ
ョンビット保存用レジスタ69では、そこに最適ローテ
ーションビットn_minとして既に記憶されている記憶値
に替えて、ローテーションビット用レジスタ63からの
ローテーション値nが、新たな最適ローテーションビッ
ト(注目符号化ブロックを復号するのに、選択画素をロ
ーテーションする最も適切なビット数)n_minとして記
憶される。
【0095】さらに、ステップS17では、差分値計算
部64が出力する差分絶対値和が、スイッチ66を介し
て、最小差分値保存用レジスタ67に供給され、最小差
分値保存用レジスタ67では、そこに最小差分値として
既に記憶されている記憶値に替えて、差分値計算部64
が出力する差分絶対値和が、新たな最小差分絶対値和
(注目符号化ブロックについての最大の相関値)として
記憶される。
【0096】一方、ステップS16において、差分計算
部64からの差分絶対値和が、最小差分値保存用レジス
タ67の記憶値より小さくないと判定された場合、即
ち、選択画素の画素値をnビットだけローテーションし
た注目符号化ブロックについての相関値が、その注目符
号化ブロックについて、いままでに得られた最大の相関
値以下で、従って、選択画素の画素値をnビットだけロ
ーテーションした注目符号化ブロックが、元のブロック
となっていることの確からしさが大きくない場合、ステ
ップS17をスキップして、ステップS18に進み、ロ
ーテーションビット用レジスタ63において、ローテー
ション値nが1だけインクリメントされる。
【0097】そして、ステップS19に進み、ローテー
ションビット用レジスタ63において、ローテーション
値nが、画素値のビット数th_rより小さいかどうかが判
定される。ステップS19において、ローテーション値
nが、画素値のビット数th_rより小さいと判定された場
合、即ち、ローテーション値nが、画素値をローテーシ
ョンすることのできるビット数の範囲内にある場合、ス
テップS14に戻り、以下、同様の処理が繰り返され
る。
【0098】また、ステップS19において、ローテー
ション値nが、画素値のビット数th_rより小さくないと
判定された場合、即ち、ローテーション値nを、画素値
のローテーションが可能なすべての値として、注目符号
化ブロックについての相関値(差分絶対値和)の計算を
行った場合、ステップS20に進み、注目符号化ブロッ
クの選択画素の画素値が、最適ローテーションビットn_
minだけローテーションされることにより、その注目符
号化ブロックが元のブロックに復号されるとともに、そ
こに埋め込まれていた付加情報が復号される。
【0099】即ち、最適ローテーションビット保存用レ
ジスタ69は、そこに記憶されている最適ローテーショ
ンビットn_minを、ビット逆ローテーション部62に供
給し、ビット逆ローテーション部62では、その最適ロ
ーテーションビットn_minだけ、注目符号化ブロックの
左ローテーション画素または右ローテーション画素の画
素値が、ステップS14で説明したように、それぞれ左
ローテーションまたは右ローテーションされ、これによ
り、元のブロックに復号される。この復号されたブロッ
クは、復号画像メモリ71に供給されて、対応するアド
レスに記憶される。
【0100】さらに、最適ローテーションビット保存用
レジスタ69は、そこに記憶されている最適ローテーシ
ョンビットn_minを、注目符号化ブロックに埋め込まれ
ていた付加情報の復号結果として、復号付加情報メモリ
70に供給して記憶させる。
【0101】その後、ステップS21に進み、ビット逆
ローテーション部62において、1フレームの埋め込み
画像を分割して得られた符号化ブロックのうち、まだ、
注目符号化ブロックとして処理していないブロック(こ
のブロックも、以下、適宜、未処理ブロックという)が
あるかどうかが判定される。ステップS21において、
未処理ブロックがあると判定された場合、その未処理ブ
ロックのいずれか(例えば、ラインスキャン順で、次に
符号化ブロックとすべきもの)が注目符号化ブロックと
され、ステップS12に戻り、以下、同様の処理が繰り
返される。
【0102】また、ステップS21において、未処理ブ
ロックがないと判定された場合、即ち、1フレーム分の
ブロックの復号結果が、復号画像メモリ71に記憶され
るとともに、その1フレームに埋め込まれたすべての付
加情報の復号結果が、復号付加情報メモリ70に記憶さ
れた場合、その1フレームの復号画像が、復号画像メモ
リ71から読み出されるとともに、付加情報の復号結果
が、復号付加情報メモリ70から読み出される。
【0103】そして、ステップS22に進み、ブロック
分割部61において、次に処理すべき埋め込み画像のフ
レームがあるかどうかが判定される。ステップS22に
おいて、次に処理すべき埋め込み画像のフレームがある
と判定された場合、ステップS11に戻り、そのフレー
ムを対象に、以下、同様の処理が行われる。
【0104】一方、ステップS22において、次に処理
すべき埋め込み画像のフレームがないと判定された場
合、埋め込み復号処理を終了する。
【0105】以上のように、付加情報が埋め込まれた画
像である符号化データを、画像の相関性を利用して、元
の画像と付加情報に復号するようにしたので、その復号
のためのオーバヘッドがなくても、符号化データを、元
の画像と付加情報に復号することができる。従って、そ
の復号画像(再生画像)には、基本的に、付加情報を埋
め込むことによる画質の劣化は生じない。
【0106】ここで、画素値が8ビットで表される自然
画像を、4×4画素のブロックに分割して、埋め込み符
号化処理を行い(従って、この場合、1ブロックにつ
き、3ビットの付加情報を埋め込むことができるから、
付加情報の埋め込みレートは、3ビット/16ピクセル
となる)、その結果得られる埋め込み画像に対して、埋
め込み復号処理を施すシミュレーションを行ったとこ
ろ、すべての画素値が正常に復号された(従って、付加
情報も、すべて正常に復号された)。
【0107】また、同様の自然画像を、2×2画素のブ
ロックに分割して、埋め込み符号化処理を行い(この場
合の、付加情報の埋め込みレートは、3ビット/4ピク
セルで、上述の場合の4倍)、その結果得られる埋め込
み画像に対して、埋め込み復号処理を施すシミュレーシ
ョンを行ったところ、97.92%の画素値が正常に復
号された。
【0108】従って、ブロックを構成する画素数を多く
すれば、精度良く復号することができるが、1フレーム
当たりに、埋め込むことのできる付加情報の量、即ち、
埋め込みレートは減少する。一方、ブロックを構成する
画素数を少なくすれば、埋め込みレートは増加するが、
復号の精度が劣化する。以上から、ブロックを構成する
画素数は、埋め込みレートと、復号の精度とをバランス
させるように決めるのが望ましい。
【0109】次に、上述した一連の処理は、ハードウェ
アにより行うこともできるし、ソフトウェアにより行う
こともできる。一連の処理をソフトウェアによって行う
場合には、そのソフトウェアを構成するプログラムが、
専用のハードウェアとしての埋め込み符号化器3や埋め
込み復号器6に組み込まれているコンピュータ、または
各種のプログラムをインストールすることで各種の処理
を行う汎用のコンピュータ等にインストールされる。
【0110】そこで、図13を参照して、上述した一連
の処理を実行するプログラムをコンピュータにインスト
ールし、コンピュータによって実行可能な状態とするた
めに用いられる媒体について説明する。
【0111】プログラムは、図13(A)に示すよう
に、コンピュータ101に内蔵されている記録媒体とし
てのハードディスク102に予めインストールした状態
でユーザに提供することができる。
【0112】あるいはまた、プログラムは、図13
(B)に示すように、フロッピーディスク111、CD-R
OM(Compact Disc Read Only Memory)112,MO(Magnet
o optical)ディスク113,DVD(Digital Versatile Di
sc)114、磁気ディスク115、半導体メモリ116
などの記録媒体に、一時的あるいは永続的に格納し、パ
ッケージソフトウエアとして提供することができる。
【0113】さらに、プログラムは、図13(C)に示
すように、ダウンロードサイト121から、ディジタル
衛星放送用の人工衛星122を介して、コンピュータ1
23に無線で転送したり、LAN(Local Area Network)、
インターネットといったネットワーク131を介して、
コンピュータ123に有線で転送し、コンピュータ12
3において、内蔵するハードディスクなどに格納させる
ようにすることができる。
【0114】本明細書における媒体とは、これら全ての
媒体を含む広義の概念を意味するものである。
【0115】また、本明細書において、媒体により提供
されるプログラムを記述するステップは、必ずしもフロ
ーチャートとして記載された順序に沿って時系列に処理
する必要はなく、並列的あるいは個別に実行される処理
(例えば、並列処理あるいはオブジェクトによる処理)
も含むものである。
【0116】なお、本実施の形態においては、埋め込み
符号化処理および埋め込み復号処理において、画像を、
4×4画素のブロックに分割するようにしたが、その他
の画素数で構成されるブロックに分割することも可能で
ある。さらに、ブロックの形状は、長方形に限定される
ものではない。
【0117】また、本実施の形態では、1フレームを構
成するブロックすべてに対して、付加情報を埋め込むよ
うにしたが、1フレームを構成する幾つかのブロックに
のみ、付加情報を埋め込むようにすることも可能であ
る。なお、この場合、付加情報を埋め込まないブロック
を構成する画素は、付加情報が埋め込まれたブロックを
復号する際に、相関値を演算するのに用いることが可能
である。
【0118】さらに、本実施の形態では、1フレームを
ブロックに分割して付加情報を埋め込むようにしたが、
各フレームを、ブロックに分割せずに、即ち、各フレー
ムをブロックとして、付加情報を埋め込むことや、複数
フレームを1ブロックとして、付加情報を埋め込むこと
も可能である。
【0119】また、画素値のローテーションは、画素値
が、例えば、YUVやRGBなどの複数成分で表現され
る場合には、そのすべての成分に対して、同一の付加情
報にしたがったローテーションを施すようにすることも
できるし、各成分それぞれに対して、異なる付加情報に
したがったローテーションを施すようにすることもでき
る。
【0120】さらに、本実施の形態では、ブロックを構
成する画素から、五の目格子状に、画素を選択し、その
選択画素に、付加情報を埋め込むようにしたが、付加情
報を埋め込む画素の選択パターンは、これに限定される
ものではない。また、本実施の形態では、ブロックを構
成する1/2の画素を選択し、その選択画素の画素値
を、付加情報にしたがってローテーションするようにし
たが、このようなローテーションを行う画素も、ブロッ
クを構成する1/2の画素に限定されるものではない。
但し、付加情報を埋め込んだ画素の復号にあたっては、
上述したように、付加情報が埋め込まれていない画素を
用いて相関値を求めるのが望ましく、また、画素どうし
の相関は、基本的に、それらの間の空間的または時間的
距離が離れるほど小さくなっていく。従って、正確な復
号を行う観点からは、付加情報を埋め込む画素として選
択する画素は、空間的または時間的に、いわゆる疎らに
なるように選択するのが望ましい。
【0121】また、本実施の形態では、選択画素の斜め
方向について、左ローテーション画素と右ローテーショ
ン画素とが交互に並ぶように、左ローテーション画素お
よび右ローテーション画素を設定するようにしたが、左
ローテーション画素および右ローテーション画素は、そ
の他のパターンにしたがって設定することも可能であ
る。
【0122】さらに、本実施の形態では、選択画素のう
ちの一部を左ローテーション画素とするとともに、残り
を右ローテーション画素として、それぞれを、付加情報
にしたがって左ローテーションまたは右ローテーション
するようにしたが、選択画素のすべてを、左ローテーシ
ョンまたは右ローテーションするようにすることも可能
である。
【0123】また、付加情報として用いる情報は、特に
限定されるものではなく、例えば、画像や、音声、テキ
スト、コンピュータプログラム、その他のデータを付加
情報として用いることが可能である。なお、画像データ
ベース1の画像の一部を付加情報とし、残りを、フレー
ムメモリ31への供給対象とすれば、その残りの部分
に、付加情報とされた画像の一部分が埋め込まれるか
ら、画像の圧縮が実現されることになる。
【0124】
【発明の効果】請求項1に記載の画像処理装置および請
求項4に記載の画像処理方法、並びに請求項5に記載の
媒体によれば、画像を構成する一部の画素が選択され、
その選択された画素の画素値が、情報にしたがってロー
テーションされることにより、画素に、情報が埋め込ま
れる。従って、画像の相関性を利用することにより、オ
ーバヘッドなしで、元の画像と情報に復号することが可
能なデータを得ることができる。
【0125】請求項6に記載の画像処理装置および請求
項11に記載の画像処理方法、並びに請求項12に記載
の媒体によれば、情報埋め込み画像を構成する一部の画
素が選択され、その選択された画素の画素値が、所定の
ビット数だけローテーションされる。さらに、その画素
値がローテーションされた画素と、選択された画素以外
の画素との間の相関が演算され、その相関に基づいて、
選択された画素を復号するための、画素値をローテーシ
ョンするビット数が決定される。そして、その決定され
たビット数に基づいて、選択された画素が復号されると
ともに、その画素に埋め込まれた情報が復号される。従
って、情報埋め込み画像を、画像の相関性を利用するこ
とにより、元の画像と情報に復号することが可能とな
る。
【0126】請求項13に記載の画像処理装置によれ
ば、画像を構成する一部の画素が選択され、その選択さ
れた画素の画素値が、情報にしたがってローテーション
されることにより、画素に、情報が埋め込まれ、情報埋
め込み画像が出力される。一方、情報埋め込み画像を構
成する一部の画素が選択され、その選択された画素の画
素値が、所定のビット数だけローテーションされる。さ
らに、その画素値がローテーションされた画素と、選択
された画素以外の画素との間の相関が演算され、その相
関に基づいて、選択された画素を復号するための、画素
値をローテーションするビット数が決定される。そし
て、その決定されたビット数に基づいて、選択された画
素が復号されるとともに、その画素に埋め込まれた情報
が復号される。従って、情報埋め込み画像を、画像の相
関性を利用することにより、オーバヘッドなしで、元の
画像と情報に復号することが可能となる。
【図面の簡単な説明】
【図1】本発明を適用した画像伝送システムの一実施の
形態の構成例を示すブロック図である。
【図2】符号化対象の画像を示す図である。
【図3】相関性を利用した符号化/復号を説明するため
の図である。
【図4】図1の埋め込み符号化器3のハードウェア構成
例を示すブロック図である。
【図5】図4の埋め込み符号化器3の機能的構成例を示
すブロック図である。
【図6】図5の埋め込み符号化器3による埋め込み符号
化処理を説明するためのフローチャートである。
【図7】埋め込み符号化処理を説明するための図であ
る。
【図8】図1の埋め込み復号器6のハードウェア構成例
を示すブロック図である。
【図9】図8の埋め込み復号器6の機能的構成例を示す
ブロック図である。
【図10】図9の埋め込み復号器6による埋め込み復号
処理を説明するためのフローチャートである。
【図11】図10のステップS11,S12、およびS
14の処理を説明するための図である。
【図12】図10のステップS15の処理を説明するた
めの図である。
【図13】本発明を適用した媒体を説明するための図で
ある。
【符号の説明】
1 画像データベース, 2 付加情報データベース,
3 埋め込み符号化器, 4 記録媒体, 5 伝送
媒体, 6 埋め込み復号器, 10 符号化装置,
20 復号装置, 31 フレームメモリ, 32 C
PU, 33プログラムメモリ, 34 出力I/F,
41 ブロック分割部, 42 ビットローテーショ
ン部, 43 符号化画像メモリ, 51 フレームメ
モリ,52 出力I/F, 53 CPU, 54 プ
ログラムメモリ, 61 ブロック分割部, 62 ビ
ット逆ローテーション部, 63 ローテーションビッ
ト用レジスタ, 64 差分値計算部, 65,66
スイッチ, 67 最小差分値保存用レジスタ, 68
比較器, 69 最適ローテーションビット保存用レ
ジスタ, 70 復号付加情報メモリ, 71 復号画
像メモリ, 101 コンピュータ, 102 ハード
ディスク, 103 半導体メモリ,111 フロッピ
ーディスク, 112 CD-ROM, 113 MOディス
ク, 114 DVD, 115 磁気ディスク, 11
6 半導体メモリ, 121 ダウンロードサイト,
122 衛星, 123 コンピュータ, 131 ネ
ットワーク
───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C059 KK43 LA00 LA02 LA06 LB02 RB01 RC35 RF21 SS06 SS20 SS26 TA02 TC02 TD06 UA02 UA05 UA35 UA39 5C076 AA02 AA14 AA36 BA06 5C078 BA21 CA00 CA14 DA00 DA01 DA02 DB16 9A001 EE04 EZ03 HH23 HH27 JZ19 KK60

Claims (13)

    【特許請求の範囲】
  1. 【請求項1】 画像に、情報を埋め込むための処理を行
    う画像処理装置であって、 前記画像を構成する一部の画素を選択する選択手段と、 前記選択手段によって選択された前記画素の画素値を、
    前記情報にしたがってローテーションすることにより、
    前記画素に、前記情報を埋め込むローテーション手段と
    を含むことを特徴とする画像処理装置。
  2. 【請求項2】 前記ローテーション手段は、前記選択手
    段によって選択された前記画素のうちの一部の画素の画
    素値を、最下位ビットから最上位ビットの方向にローテ
    ーションし、残りの画素の画素値を、最上位ビットから
    最下位ビットの方向にローテーションすることを特徴と
    する請求項1に記載の画像処理装置。
  3. 【請求項3】 前記画像を所定のブロックに分割する分
    割手段をさらに含み、 前記選択手段は、前記ブロックを構成する一部の画素を
    選択することを特徴とする請求項1に記載の画像処理装
    置。
  4. 【請求項4】 画像に、情報を埋め込むための処理を行
    う画像処理方法であって、 前記画像を構成する一部の画素を選択する選択ステップ
    と、 前記選択ステップで選択された前記画素の画素値を、前
    記情報にしたがってローテーションすることにより、前
    記画素に、前記情報を埋め込むローテーションステップ
    とを含むことを特徴とする画像処理方法。
  5. 【請求項5】 画像に、情報を埋め込む処理を行うため
    のプログラムをコンピュータに実行させる媒体であっ
    て、 前記画像を構成する一部の画素を選択する選択ステップ
    と、 前記選択ステップで選択された前記画素の画素値を、前
    記情報にしたがってローテーションすることにより、前
    記画素に、前記情報を埋め込むローテーションステップ
    とを含むことを特徴とするプログラムを、前記コンピュ
    ータに実行させる媒体。
  6. 【請求項6】 情報が埋め込まれた画像である情報埋め
    込み画像を、元の画像と情報に復号するための処理を行
    う画像処理装置であって、 前記情報埋め込み画像を構成する一部の画素を選択する
    選択手段と、 前記選択手段によって選択された前記画素の画素値を、
    所定のビット数だけローテーションするローテーション
    手段と、 画素値がローテーションされた前記画素と、前記選択手
    段によって選択された前記画素以外の画素との間の相関
    を演算する相関演算手段と、 前記相関に基づいて、前記選択手段によって選択された
    前記画素を復号するための、画素値をローテーションす
    るビット数を決定する決定手段と、 前記決定手段によって決定されたビット数に基づいて、
    前記選択手段によって選択された前記画素を復号すると
    ともに、その画素に埋め込まれた前記情報を復号する復
    号手段とを含むことを特徴とする画像処理装置。
  7. 【請求項7】 前記ローテーション手段は、前記選択手
    段によって選択された前記画素のうちの一部の画素の画
    素値を、最下位ビットから最上位ビットの方向にローテ
    ーションし、残りの画素の画素値を、最上位ビットから
    最下位ビットの方向にローテーションすることを特徴と
    する請求項6に記載の画像処理装置。
  8. 【請求項8】 前記情報埋め込み画像を所定のブロック
    に分割する分割手段をさらに含み、 前記選択手段は、前記ブロックを構成する一部の画素を
    選択することを特徴とする請求項6に記載の画像処理装
    置。
  9. 【請求項9】 前記相関演算手段は、画素値がローテー
    ションされた前記画素について、その画素の周辺にある
    画素であって、前記選択手段によって選択された前記画
    素以外の画素との間の相関を演算することを特徴とする
    請求項6に記載の画像処理装置。
  10. 【請求項10】 前記相関演算手段は、画素値がローテ
    ーションされた前記画素について、前記選択手段によっ
    て選択された前記画素以外の画素との間の相関の他、既
    に復号された画素との間の相関も演算することを特徴と
    する請求項6に記載の画像処理装置。
  11. 【請求項11】 情報が埋め込まれた画像である情報埋
    め込み画像を、元の画像と情報に復号するための処理を
    行う画像処理方法であって、 前記情報埋め込み画像を構成する一部の画素を選択する
    選択ステップと、 前記選択ステップで選択された前記画素の画素値を、所
    定のビット数だけローテーションするローテーションス
    テップと、 画素値がローテーションされた前記画素と、前記選択ス
    テップで選択された前記画素以外の画素との間の相関を
    演算する相関演算ステップと、 前記相関に基づいて、前記選択ステップで選択された前
    記画素を復号するための、画素値をローテーションする
    ビット数を決定する決定ステップと、 前記決定ステップで決定されたビット数に基づいて、前
    記選択ステップで選択された前記画素を復号するととも
    に、その画素に埋め込まれた前記情報を復号する復号ス
    テップとを含むことを特徴とする画像処理方法。
  12. 【請求項12】 情報が埋め込まれた画像である情報埋
    め込み画像を、元の画像と情報に復号する処理を行うプ
    ログラムを、コンピュータに実行させる媒体であって、 前記情報埋め込み画像を構成する一部の画素を選択する
    選択ステップと、 前記選択ステップで選択された前記画素の画素値を、所
    定のビット数だけローテーションするローテーションス
    テップと、 画素値がローテーションされた前記画素と、前記選択ス
    テップで選択された前記画素以外の画素との間の相関を
    演算する相関演算ステップと、 前記相関に基づいて、前記選択ステップで選択された前
    記画素を復号するための、画素値をローテーションする
    ビット数を決定する決定ステップと、 前記決定ステップで決定されたビット数に基づいて、前
    記選択ステップで選択された前記画素を復号するととも
    に、その画素に埋め込まれた前記情報を復号する復号ス
    テップとを含むことを特徴とするプログラムを、前記コ
    ンピュータに実行させる媒体。
  13. 【請求項13】 画像に、情報を埋め込み、その情報が
    埋め込まれた画像である情報埋め込み画像を出力する埋
    め込み符号化器と、 前記情報埋め込み画像を、元の画像と情報に復号する埋
    め込み復号器とを備える画像処理装置であって、 前記埋め込み符号化器は、 前記画像を構成する一部の画素を選択する第1の選択手
    段と、 前記第1の選択手段によって選択された前記画素の画素
    値を、前記情報にしたがってローテーションすることに
    より、前記画素に、前記情報を埋め込み、前記情報埋め
    込み画像を出力する第1のローテーション手段とを含
    み、 前記埋め込み復号器は、 前記情報埋め込み画像を構成する一部の画素を選択する
    第2の選択手段と、 前記第2の選択手段によって選択された前記画素の画素
    値を、所定のビット数だけローテーションする第2のロ
    ーテーション手段と、 画素値がローテーションされた前記画素と、前記第2の
    選択手段によって選択された前記画素以外の画素との間
    の相関を演算する相関演算手段と、 前記相関に基づいて、前記第2の選択手段によって選択
    された前記画素を復号するための、画素値をローテーシ
    ョンするビット数を決定する決定手段と、 前記決定手段によって決定されたビット数に基づいて、
    前記第2の選択手段によって選択された前記画素を復号
    するとともに、その画素に埋め込まれた前記情報を復号
    する復号手段とを含むことを特徴とする画像処理装置。
JP16052999A 1999-06-08 1999-06-08 画像処理装置および画像処理方法、並びにプログラム格納媒体 Expired - Fee Related JP4092608B2 (ja)

Priority Applications (8)

Application Number Priority Date Filing Date Title
JP16052999A JP4092608B2 (ja) 1999-06-08 1999-06-08 画像処理装置および画像処理方法、並びにプログラム格納媒体
US09/587,838 US6870944B1 (en) 1999-06-08 2000-06-06 Image processing apparatus, image processing method, and storage medium
KR1020000030985A KR100667612B1 (ko) 1999-06-08 2000-06-07 이미지 처리 장치, 이미지 처리 방법 및 저장 매체
DE60030911T DE60030911T2 (de) 1999-06-08 2000-06-07 Bildverarbeitungsgerät und -verfahren und Speichermedium
EP00304811A EP1059606B1 (en) 1999-06-08 2000-06-07 Image processing apparatus, image processing methods, and storage media
CNB001202073A CN1148964C (zh) 1999-06-08 2000-06-08 图像处理装置图像处理方法
US10/915,806 US7606431B2 (en) 1999-06-08 2004-08-11 Image processing apparatus, image processing method, and storage medium
US10/915,829 US6940996B2 (en) 1999-06-08 2004-08-11 Image processing apparatus, image processing method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP16052999A JP4092608B2 (ja) 1999-06-08 1999-06-08 画像処理装置および画像処理方法、並びにプログラム格納媒体

Publications (2)

Publication Number Publication Date
JP2000350010A true JP2000350010A (ja) 2000-12-15
JP4092608B2 JP4092608B2 (ja) 2008-05-28

Family

ID=15716949

Family Applications (1)

Application Number Title Priority Date Filing Date
JP16052999A Expired - Fee Related JP4092608B2 (ja) 1999-06-08 1999-06-08 画像処理装置および画像処理方法、並びにプログラム格納媒体

Country Status (1)

Country Link
JP (1) JP4092608B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002278748A (ja) * 2001-03-22 2002-09-27 Sony Corp データ処理装置およびデータ処理方法、プログラムおよびプログラム記録媒体、並びに符号化データおよびデータ記録媒体
CN100341330C (zh) * 2005-02-25 2007-10-03 吉林大学 音视频混合信号同步压缩中的音频嵌入视频及其提取方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002278748A (ja) * 2001-03-22 2002-09-27 Sony Corp データ処理装置およびデータ処理方法、プログラムおよびプログラム記録媒体、並びに符号化データおよびデータ記録媒体
JP4556087B2 (ja) * 2001-03-22 2010-10-06 ソニー株式会社 データ処理装置およびデータ処理方法、並びにプログラムおよびプログラム記録媒体
CN100341330C (zh) * 2005-02-25 2007-10-03 吉林大学 音视频混合信号同步压缩中的音频嵌入视频及其提取方法

Also Published As

Publication number Publication date
JP4092608B2 (ja) 2008-05-28

Similar Documents

Publication Publication Date Title
JP4822304B2 (ja) 画像処理装置および画像処理方法、並びに記録媒体
US6215421B1 (en) Coding apparatus and method, decoding apparatus and method, data processing system, and storage medium
US7738711B2 (en) Coding apparatus and method, decoding apparatus and method, data processing system, storage medium, and signal
JP4147700B2 (ja) 符号化装置および符号化方法、並びに記録媒体
JP4214440B2 (ja) データ処理装置およびデータ処理方法、並びに記録媒体
JP2004129203A (ja) 符号化装置及び方法
JP2000232365A (ja) 符号化装置および符号化方法、復号装置および復号方法、記録媒体、並びにデータ処理装置
US6940996B2 (en) Image processing apparatus, image processing method, and storage medium
JP2002278748A (ja) データ処理装置およびデータ処理方法、プログラムおよびプログラム記録媒体、並びに符号化データおよびデータ記録媒体
US6738492B1 (en) Coding apparatus and method, decoding apparatus and method, data processing system, storage medium, and signal
JP2000350010A (ja) 画像処理装置および画像処理方法、並びに媒体
JP4099687B2 (ja) 画像処理装置および画像処理方法、並びに媒体
JP4556147B2 (ja) 復号装置および復号方法、記録媒体、並びにデータ処理装置
EP0993194B1 (en) Method and apparatus for embedding an additional signal into an image signal
KR100777144B1 (ko) 코딩 장치와 방법, 디코딩 장치와 방법, 데이터 처리 시스템, 저장 매체, 및 기록 매체
JP4264606B2 (ja) データ処理装置およびデータ処理方法
JP2894140B2 (ja) 画像符号化方法
JP2000050269A (ja) 復号装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071122

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080118

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080207

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080220

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110314

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110314

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130314

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140314

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees