KR19980079437A - 화상 데이터 처리 장치 - Google Patents

화상 데이터 처리 장치 Download PDF

Info

Publication number
KR19980079437A
KR19980079437A KR1019970054410A KR19970054410A KR19980079437A KR 19980079437 A KR19980079437 A KR 19980079437A KR 1019970054410 A KR1019970054410 A KR 1019970054410A KR 19970054410 A KR19970054410 A KR 19970054410A KR 19980079437 A KR19980079437 A KR 19980079437A
Authority
KR
South Korea
Prior art keywords
data
spatial frequency
data set
image
frequency domain
Prior art date
Application number
KR1019970054410A
Other languages
English (en)
Other versions
KR100280953B1 (ko
Inventor
시로 후지와라
야스히코 오쿠하라
히로타카 나카노
후미히로 오카자키
Original Assignee
가네코 히사시
닛폰덴키 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP5019597A external-priority patent/JP3109575B2/ja
Application filed by 가네코 히사시, 닛폰덴키 가부시끼가이샤 filed Critical 가네코 히사시
Publication of KR19980079437A publication Critical patent/KR19980079437A/ko
Application granted granted Critical
Publication of KR100280953B1 publication Critical patent/KR100280953B1/ko

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/913Television signal processing therefor for scrambling ; for copy protection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0021Image watermarking
    • G06T1/0028Adaptive watermarking, e.g. Human Visual System [HVS]-based watermarking
    • G06T1/0035Output size adaptive watermarking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0021Image watermarking
    • G06T1/005Robust watermarking, e.g. average attack or collusion attack resistant
    • G06T1/0071Robust watermarking, e.g. average attack or collusion attack resistant using multiple or alternating watermarks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2201/00General purpose image data processing
    • G06T2201/005Image watermarking
    • G06T2201/0052Embedding of the watermark in the frequency domain

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Processing (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

인코더는 공간 주파수 영역에 변환된 화상의 특징적인 부분에 어떤 특징의 전자 은화(隱畵) 데이터를 매립하는 수단(40)과 전자 은화 데이터가 매립된 공간 주파수 영역의 데이터를 양자화하는 양자화기(50)와 양자화기 출력을 가변장 부호화하는 가변장 부호기(60)를 가지며 압축부호화된 디지털 화상 데이터를 출력한다. 디코더는 압축부호화된 디지털 화상 데이터를 공간 주파수 영역의 데이터에 복원하는 가변장 복호화기(80) 및 역양자화기(90)와 복원된 데이터에서 전자 은화 데이터를 검출하는 수단(120)과 검출결과를 표시하는 검출표시수단(130)을 갖고 있다.

Description

화상 데이터 처리 장치
본 발명은 디지털 화상 처리장치에 관한 것으로, 특히 화상 데이터의 인코드 장치 및 디코드 장치에 관한 것이다.
근래, JPEG, MPEG-1, MPEG-2, H261, H263 등의 규격에 의거해서 화상 데이터를 압축하고 재생하는 장치가 개발되어 있다. 이들의 규격에 준거한 화상 데이터 부호화 복호화장치는 높은 데이터 압축율을 실현하는 한편, 고화질을 유지한다는 이점이 있으므로 앞으로도 더욱 더 보급될 것으로 생각된다.
이들의 압축 데이터는 디지털 데이터이기 때문에 데이터를 반복복제(카피)해도 화질의 손색이 거의 없다. 이 때문에 오리지널 데이터를 작성하는 수고를 생략하고 시판되고 있는 화상 데이터를 그대로 복제하거나 일부분을 이용해서 마치 자신이 작성한 것처럼 시장에 제품으로서 출하하는 등의 부정 복제물이 나돌고 있다.
이것에 대해서 오리지널 데이터의 제작자는 자기가 제작한 데이터가 제작자의 허락없이 복제되거나 데이터의 일부를 개량되어서 유통되는 것을 방지하기 위해서 데이터에 대해서 스크램블을 가함으로써 이러한 부정 복제물이 유통되는 것을 방지하려고 하고 있다.
도 8은 종래의 부정복제 방지기구를 포함하는 화상 데이터의 인코더 디코더의 일례를 도시하는 블록도이다. 인코더(201)에서, 원화상은 이산 코사인 변환기(20), 양자화기(50), 가변장(variable length) 부호화기(60)를 거쳐서 MPEG 방식 등에 준거하는 압축 디지털 화상 데이터로 변환된 후, 스크램블러(210)에서 스크램블이 가해진다. 스크램블이 가해진 디지털 화상 데이터는 그 스크램블에 대응하는 디스크램블러를 구비하는 장치가 아니면 재생되지 않는다. 이 스크램블된 데이터는 축적 /전송수단(70)으로 전송된다.
또한, 디코더(202)에서, 입력되는 디지털 화상 데이터엔 스크램블이 가해져 있다. 디스크램블러(220)는 상기 스크램블이 가해진 데이터를 디스크램블하고, 원래의 MPEG 등에 준거한 압축 디지털 화상 데이터를 복원한다. 복원된 데이터는 가변장 복호화기(80), 역양자화기(90), 역이산 코산인 변환기(100)를 거쳐서 재생화상으로 되어 출력된다.
이와 같이 종래엔 데이터에 스크램블을 가함으로써 부정복제를 방지하려고 했다. 예를 들면 특개평 6-121313호 공보엔 그 같은 스크램블 기술을 아날로그 화상신호에 대해서 사용한 기술의 예가 나타나 있다.
상술한 바와 같이 데이터에 스크램블을 가함으로써 부정복제를 방지하는 것이 가능하게 되었는데, 기술의 진보와 더불어 이 스크램블에 의한 부정복제의 방지효과가 없어지게 되었다. 즉, 부정복제를 하려든 사람이 이 스크램블의 알고리즘을 해석하여, 데이터에 가해져 있는 스크램블의 해제를 행하게 되었기 때문이다. 이 때문에 오리지널 데이터 제작자와 부정복제를 하려는 사람 사이에서, 새로운 스크램블 알고리즘의 개발과 그 알고리즘을 해석하여 부정복제를 행하려는 시도가 반복되어, 근본적으로 부정 복제를 방지할 수 없게 되었다. 그리고 스크램블의 알고리즘 해석 등에 의해서 일단 스크램블이 해제되면, 그 후는 통상의 복제가 가능하게 된다. 부정 복제된 데이터를 다시 복제하는 일은 매우 용이하므로 종래기술은 부정복제의 확산을 방지할 수 없었다.
본 발명의 주목적은 데이터가 부정하게 복제되었다고 해도 그것을 식별할 수 있는 화상 데이터 처리장치를 제공하는 것이다.
본 발명의 한 양상에 따르면, 압축된 디지털 화상 데이터를 작성하는 인코더로서, 원화상을 이산 코사인 변환하는 이산 코사인 변환기와, 이산 코사인 변환기에서 변환된 데이터에 미리 정한 특정 정보를 갖는 전자 은화 데이터를 매립하는 전자 은화 매립수단 및 전자 은화 매립수단에서 출력된 데이터를 양자화하는 양자화기와, 양자화기에 의해서 양자화된 데이터를 가변장 부호화하는 가변장 부호화기를 구비하는 인코더가 제공된다.
또한, 본 발명의 다른 양상에 의하면 압축된 디지털 화상 데이터의 디코더로서, 가변장 부호화된 화상 데이터를 가변장 복호화하는 가변장 복호화기와, 가변장 복호화된 데이터를 역양자화하는 역양자화기와, 역양자화된 데이터에서 전자 은화데이터를 검출하는 수단과, 해당 검출수단으로 검출된 결과를 조작하고 있는 사람에 통지하고 또는 그 결과에 따라서 어떤 기기의 상태를 제어하는 수단 및 역양자화된 데이터를 역이산 코사인 변환해서 재생화상을 얻는 수단을 구비하는 디코더가 제공된다.
인코더에서는, 공간 주파수 영역으로 표현된 화상의 특징적인 부분에 전자은화 매립수단에 의해 전자 은화 데이터를 매립할 수 있다. 매립된 전자 은화 데이터는 사실상 인간의 눈에는 지각되지 않으므로, 화질을 손상하지 않으면서 화상 데이터 자체적으로 화상에 정보를 유지하는 것이 가능하다.
또, 매립된 전자 은화 데이터는 제 3자가 삭제, 개정할 수 없고, 복제 등에 의해서도 지워지지 않으므로, 화상 데이터의 제작시에 미리 어떤 특정 의미를 갖는 전자 은화 데이터를 매립해 두고, 디코더로 그 전자 은화를 검출하는 것에 의해서, 부정복제된 데이터의 정당한 권리자의 증명에 이용하거나 재생측의 기기를 제어함으로써 부정복제를 억제할 수 있다.
간단한 예로서는, 화상 데이터에 매립하는 전자 은화 데이터에 대해서 미리 복제금지라는 의미를 갖게 해 두면, 재생시에 디코더가 그 전자 은화 데이터가 매립되어 있다는 것을 검출한 경우에만 그 화상 데이터의 복제는 금지되어 있다는 뜻의 음성, 문자 등에 의해서 경고를 발하는 것으로, 화상 데이터의 이용자의 양심에 호소하고 부정이용을 할 생각을 멈추게 하는 효과를 기대할 수 있다.
다른 예로서는, 그 전자 은화 데이터에 대해서 저작권자의 전자 서명이라는 의미를 갖게 해 두면, 저작권자가 자신의 화상 데이터가 부정하게 복제사용되고 있는 것으로 생각되는 데이터를 발견한 경우에, 디코더에 의해서 그 화상 데이터에 자신의 전자 은화 데이터가 매립되어 있는 것을 나타내고 상대에게 사용중지를 요구하거나 또는 손해배상청구 등의 법적조치를 할 때의 증거로서 이용할 수 있다.
도 1은 본 발명의 제 1의 실시의 형태를 도시하는 블록도.
도 2는 본 발명의 제 1의 실시의 형태에 있어서의 전자 은화 매립수단(40)의 구성을 도시하는 블록도.
도 3은 본 발명의 제 1의 실시의 형태에 있어서의 전자 은화 검출수단(130)의 구성을 도시하는 블록도.
도 4는 본 발명의 제 2의 실시형태를 도시하는 블록도.
도 5는 본 발명의 제 3의 실시형태를 도시하는 블록도.
도 6은 본 발명의 제 4의 실시형태를 도시하는 블록도.
도 7은 본 발명이 제 5의 실시형태를 도시하는 블록도.
도 8은 종래의 기술을 도시하는 블록도.
도 9는 종래 기술에 있어서의 일반적인 인코더(1), 디코더(2)의 구성을 도시하는 블록도.
* 도면의 주요부분에 대한 부호의 설명
10 : 원화상 20 : 이산 코사인 변환기
30 : 전자 은화 데이터 40 : 전자 은화 매립 수단
50 : 양자화기 60 : 가변장 부호화기
70 : 축적/전송 수단 80 : 가변장 복호화기
90 : 역양자화기 100 : 역이산 코사인 변환기
110 : 재생 화상 130 : 검출 표시 수단
본 발명의 이해를 위해서, 먼저 JPEG, MPEG-1, MPEG-2, H261, H263 등에 준거한 인코디/디코더에 대해서 간단하게 설명한다.
이들의 규격은 세밀한 점에선 다르지만, 화상 압축의 기본적 알고리즘으로서 이산 코사인 변환, 양자화, 가변장 부호화(호프만 부호화)를 쓰고 있으며, 또한, 동화상에 대응하는 것에 대해선 또한 움직임 보상을 쓰고 있으며 이것들의 규격에 본질적인 차이는 없다.
도 9는 일반적인 JPEG. MPEG-1, MPEG-2, H261, H263 등의 인코더/디코더의 구성을 간략화해서 도시한 블록도이다. 도시한 이외에 헤더처리, 지그제그 스캔처리, JPEG 이외의 규격의 경우에는 또한 움직임 보상 등의 처리도 필요한데, 본 발명의 본질엔 무관하므로 설명은 생략한다.
도 9에 있어서 이 일반적인 인코더(1)는 이산 코사인 변환기(20)와 양자화기(50)와 가변장 부호화기(60)로 구성되어 있다.
원화상(10)은 이산 코사인 변환기(20)에 입력되면 8 픽셀 × 8 픽셀 치수의 직사각형영역(블록) 단위로 2차원 이산 코사인 변환이 실시되며, 시간영역으로 표현된 데이티에서 공간 주파수 영역으로 표현된 데이터로 변환된다. 일반적으로 화상 데이터를 공간 주파수 영역으로 표현하면 낮은 공간 주파수 영역으로 치우쳐 데이터가 존재하기 때문에 데이터량 압축이 용이해진다. 이 처리는 그때문에 행해진다.
이산 코사인 변환기(2)에서 출력된 데이터는 양자화기(50)에 입력되며 양자화된다. 이 처리에 의해서 데이터가 취할 수 있는 값의 범위를 좁게 하고 데이터량을 압축한다. 양자화기(50)에서 출력된 데이터는 가변장 부호화기(60)에 입력되며 가변장 부호화된다. 가변장 부호화는 데이터중에서 출현빈도가 높은 값일수록 짧은 길이의 부호를 할당하므로서 데이터량을 압축하는 것이며 MPEG 등의 경우는 호프만부호를 사용하고 있다.
그리고 가변장 부호화기(60)에서 출력된 데이터는 축적/전송수단(70)에 의해 서 축적 또는 전송된다. 즉, 광 디스크, 자기 디스크, 광자기 디스크 등의 축적매체에 기록되어 판매/반포된다. 또는, 지상파/위성/유선 등의 무선/유선 전송에 의해 통신 또는 반송된다.
한편, 도 9에 있어서 일반적인 디코더(2)는 가변장 복호화기(80)와 역양자화기(90)와 역이산 코사인 변환기(100)로 구성되고 있다.
인코더(1)에서 작성되고 축적/전송수단(70)을 거친 데이터는 가변장 복호화기(80)에 입력된다. 가변장 복호화기(80)는 가변장 복호를 그것에 할당되어 있는 값을 표현하는 고정장 부호로 복호하고 출력한다. 이것은 나중의 처리를 용이하게하기 위해서이다. 가변장 복호화기(80)에서 출력된 데이터는 역양자화기(90)에 입력되어 역양자화된다. 즉, 인코더(1)측에서 양자화되기 전의 크기의 값으로 개략 복원된다. 역양자화기(90)의 출력은 역이산 코사인 변환기(100)에 입력되며 8픽셀×8픽셀의 블록단위로 2차원 역이산 코사인 변환이 실시되며 공간 주파수 영역으로 표현된 데이터에서 실공간 영역으로 표현된 데이터로 변환된다. 즉, 원화상과 거의 동일한 재생화상(110)이 얻어진다. 다만, 양자화/역양자화의 과정에서 정보의 일부가 상실되므로 원화상(10)과 완전하게 동일한 재생화상은 얻어지지 않는다.
다음에 본 발명의 제 1의 실시의 형태에 대해서 도면 참조로 설명한다.
도 1은 본 발명의 제 1의 실시의 형태를 도시하는 블록도이다. 도 1에 있어서 본 발명의 인코더(3)는 이산 코사인 변환기(20)와 전자 은화 매립수단(40)과 양자화기(50)와 가변장 부호화기(60)를 포함한다. 또한, 본 발명의 디코더(4)는 가변장 복호화기(80)와 역양자화기(90)와 역이산 코사인 변환기(100)와 전자은화 검출수단(120)과 검출표시수단(130)을 포함한다.
또한, 여기에서도 앞에서 설명한 일반적인 JPEG, MPEG 등의 인코더/디코더의 경우와 마찬가지로 헤더 처리나 지그재그 스캔처리, 움직임 보상 등 본 발명의 본질과 무관한 부분에 대해선 생략하고 있는데, 그것들은 일반적인 인코더/디코더의 그것과 같다.
도 1에 있어서 인코더(3) 측에서 원화상(10)은 이산 코사인 변환기(20)에 입력되며 8픽셀 × 8픽셀의 블록 단위로 2차원 이산 코사인 변환이 실시되며, 실공간 영역으로 표현된 데이터에서 공간 주파수 영역으로 표현된 데이터로 변환된다.
이산 코사인 변환기(20)에서 출력된 데이터는 전자 은화 매립수단(40)에 입력되며 특정 전자 은화 데이터(30)가 매립된다. 전자 은화 매립수단(40)에서 출력된 데이터는 양자화기(50)에 입력되어 양자화된다. 양자화기(50)에서 출력된 데이터는 가변장 부호화기(60)에 입력되고 고정장 부호에서 가변장 부호로 부호화되며 MPEG 등에 준거한 압축 디지털 화상 데이터로서 가변장 부호화기에서 출력된다.
가변장 부호화기(60)에서 출력된 MPEG 등에 준거한 압축 디지털 화상 데이터 축적/전송수단(70)을 거쳐서 디코더(4)에 입력된다. 즉, 광 디스크, 자기 디스크, 광자기 디스크 등의 축적매체에 기록되어 판매/반포 되거나 또는 지상파/위성/유선 등의 무선/유선 방송에 의해 전송되거나 또는 지상파/위성/유선 등의 무선/유선 통신, ATM, 인터넷, ISDN 등의 네트워크에 의한 통신에 의해 전송되어 디코더(4)측에 보내진다.
디코더(4)측에서는, 축적/전송수단(70)에 의해서 보내어진 압축 디지털 화상 데이터는 가변장 복호화기(80)에 입력되어 고정장 부호로 변화되어서 출력된다. 가변장 복호화기(80)에서 출력된 데이터는 역양자화기(90)에 입력되고 역양자화되어 출력된다. 역양자화기(90)에서 출력된 데이터는 역이산 코사인 변환기(100)와 전자 은화 검출수단(120)에 입력된다.
역이산 코사인 변환기(100)에 입력된 데이터는 8픽셀 × 8픽셀의 블록단위로 2차원 역이산 코사인 변환이 실시되고, 공간 주파수 영역으로 표현된 데이터에서 실공간 영역으로 표현된 데이터로 변환되고, 원화상과 거의 동일한 재생화상(110)으로서 출력된다.
한편, 전자 은화 검출수단(120)으로 입력된 데이터는 그 중에 어떤 특정 전자 은화가 데이터(30)가 매립되어 있는지의 여부가 조사된다. 특정 전자 은화 데이터(30)가 매립되어 있는 것이 검출된 경우에는, 검출된 것을 나타내는 신호를 출력한다. 또한, 이 전자 은화 데이터(30)는 인코더(3)측의 전자 은화 데이터(30)와 동일한 것이다.
전자 은화 검출수단(120)이 출력하는, 데이터 중에 있는 특정 전자 은화 데이터(30)가 매립되어 있는 것을 나타내는 신호는 검출표시수단(130)으로 입력되며 그 신호에 따라서 음, 광, 문자, 영상 등의 임의의 수단으로 검출상태를 표시한다.
혹은, 그 결과를 파일에 기록하거나 그 신호에 따라서 다른 기기의 상태를 제어한다.
도 2는 전자 은화 매립수단(40)의 구성을 도시하는 블록도이다. 도 2에 도시하듯이 전가 은화 매립수단(40)은 제 1의 승산기(45a)와 제 2의 승산기(45b)와 정수(α)와 제 2의 승산기(45b)와 정수(α) 레지스터(46)와 가산기(47)와 부분 평균계산기(48)로 구성된다.
도 3은 전자 은화 검출수단(120)의 구성을 도시하는 블록도이다. 도 3에 도시하듯이 전자 은화 검출수단(120)은 부문 평균 계산기(48)와 제산기(25)와 내적 계산기(126)와 역치 레지스터(127)와 비교기(128)로 구성된다.
다음에 이들 도 1에서 도 3을 참조해서 본 발명의 제 1의 실시형태의 동작에 대해서 설명한다.
우선, 인코더(3)측에선 원화상(10)으로 시간영역으로 표현된 디지털 데이터라고 한다. 이 디지털 데이터는 컴퓨터 그래픽(CG) 화상같이 처음부터 디지털 데이터로서 제작된 것이어도 사진이나 회화등을 스캐너로 주사해서 디지털화된 것이어도 비디오신호를 캡쳐해서 디지털화된 것이어도 무방하다.
원화상(10)은 이산 코사인 변환기(20)에 입력되며 8픽셀 × 8픽셀의 블록단위로 직교 변환의 1종인 2차원 이산 코사인 변환에 의해 시간영역으로 표현된 데이터에서 공간 주파수 영역으로 표현된 데이터로 변환된다.
자연화상은 시간영역으로 표현하면 데이터의 발생확률에 아무런 통계적 치우침도 없고 데이터량 압축은 곤란한데 2차원 이산 코사인 변환에 의해서 공간 주파수 영역으로 표현된 형태로 변환하면 데이터의 발생확률에 통계적 치우침이 발생하고 데이터량 압축이 용이해진다. 구체적으로는 저주파수 영역에 치우쳐서 데이터가 존재한다.
이산 코사인 변환기(20)에서 출력된 데이터는 전자 은화 매립수단(40)에 입력되며 어느 특정 전자 은화 데이터(30)가 매립된다. 이 전자 은화 데이터(30)의 매립은 8픽셀 × 8픽셀의 블록단위를 다음같이 행해진다.
이산 코사인 변환기(20)에서 출력되는 공간 주파수 영역데이터의 교류(AC)성분중 저주파수 성분에서 차례로 n개를 취하고, f(1), f(2),…, f(n)로 한다.
전자 은화 데이터(30)의 내용 w(1), w(2),…, w(n)로선 평균(0), 분산(1)인 정규분포에서 고른다. 실제로는 미리 선정하고 그 전자 은화 데이터에 대응시켜서 의미를 매긴다. 그리고,
F(i) = f(i) +α×avg(f(i))×w(i) (i = 1,2,…, n)
를 각(i)에 대해서 계산하고 입력된 데이터 중의 f(i)를 F(i)로 치환하고 출력한다. 이 식은 원화상의 스펙트럼의 각 성분 f(i)에 데이터 α×avg(f(i))×w(i)를 은화로서 가산하는 것을 의미한다. 여기에서 α는 스케일링 계수이며 avg(f(i))를 f(i)의 근처 6점(f(i-1), f(i), f(i + 1)의 3점)의 절대값의 평균을 취한 부분평균이다. 이 부분 평균은 부분 평균 계산기(48)로 행해진다. 상술의 F(i)의 연산이 도 2의 승산기(45a, 45b) 및 가산기(49)로 행해짐은 분명할 것이다.
공간 주파수 영역에선 저주파수 영역에 데이터가 편재하고 있다. 즉, 저주파수 영역의 파워 스팩트럼이 크므로 그 부분에 전자 은화로서 작은 값을 가산해도 화상에 부여하는 영향은 매우 작으며 현실적으로는 인간의 눈으로는 거의 지각할 수 없다. 한편, 파워 스펙트럼이 큰 성분은 화상의 특징적인 부분을 나타내고 있기때문에 매립된 전자 은화를 무리하게 제외하면 화상 그 자체를 심하게 손상하게 된다. 즉, 화질을 손상하지 않고 전자 은화를 매립할 수 있는데 제 3자가 매립된 전자 은화 화질을 손상하지 않고 제거하기는 불가능하며 이것이 데이터의 헤더 등에 플러그의 형태로 정보를 넣는 방법과 크게 다른 특징이다.
또, 공간 주파수 영역에 있어서 화상의 특징적인 부분에 전자 은화가 매립되기 때문에 화상이 확대, 축소처리 되거나 일부분이 절단되거나 VTR에 녹화되거나 종이에 인쇄되거나 해도 매립된 전자 은화는 남으며 재차 디지털 데이터화해서 검출처리를 행하면 검출할 수 있다는 특징도 있다.
전자 은화 매립수단(40)에서 출력된 데이터는 양자화기(50)에 입력되며 양자화된다. 여기에서 양자화란 각 주파수성분의 값을 (1)보다 큰 정수값으로 정수제산하므로서 결과로서 원래 작은 값밖에 갖지 않는 고주파수 성분의 값의 대부분은 0으로 되며 또, 0이 아니어도 취할 수 있는 값의 범위가 좁아지므로 데이터량을 줄일 수 있다.
양자화기(50)가 출력한 데이터는 가변장 부호화기(60)에 입력되며 고정장 부호에서 가변장 부호로 부호화되며 MPEG 등으로 압축된 디지털 화상 데이터로서 출력된다.
가변장 부호화는 데이터 중에서 출현 빈도가 높은 값일수록에 짧은 길이의 부호를 할당하므로서 데이터량을 줄이는 것이며 호프만 부호나 산술부호 등이 있다. MPEG 등에선 호프만 부호가 사용되는데 일반적인 가변장 부호는 부호화-복호화의 과정은 가역이며 가역부호라면 어느 부호를 써도 본 발명이 동작 및 효과에 영향은 전혀 없다.
이같이 해서 가변장 부호화기(60)에서 출력된 디지털 화상 데이터는 축적/전송수단(70)에 의해서 디코더(9)에 보내진다. 즉, CD-ROM 등의 축적매체에 기록되어서 판매/반포되거나 무선/유선에 의한 방송, 통신에 의해서 전송되어서 디코더(4)까지 보내지게 되는데 본 발명은 그것들의 형태엔 의존하지 않는다.
디코더(4)에 보내어진 디지털 화상 데이터는 가변장 복호화기(80)에 입력되며 가변장 부호에선 고정장 부호로 변환된다. 가변장 부호화는 축적/전송의 과정에서의 데이터량을 줄이기 위해서 행하고 있는 것이며 데이터를 처리할 때엔 고정장부호 쪽이 용이하기 때문이다.
가변장 복호화기(80)에서 출력된 데이터는 역양자화기(90)에 입력되며 역양자화되고 출력된다. 여기에선 인코더(3)측에서 양자화시에 제산이 사용한 정수를 승산하므로서 각 주파수성분의 값을 거의 원래의 값으로 되돌린다. 이 단계에서 공간 주파수 영역으로 표현된 형태로 원화상이 거의 재생된 것으로 된다. 역양자화기(90)에서 출력된 데이터는 역이산 코사인 변환기(100)와 전자 은화 검출수단(120)에 입력된다.
역이산 코사인 변환기(100)에 입력된 데이터는 8×8의 블록단위로 2차원 역이산 코사인 변환이 실시되며 재생화상(110)으로서 출력된다. 이때, 매립되어 있는 전자 은화 데이터(30)는 정확하게는 재생화상(110)으로서 출력된다. 이때, 매립되어 있는 전자 은화 데이터(30)는 정확하게는 재생화상(110)중에 노이즈로서 존재하고 있는데 상술같이 현실적으로는 인간으로선 지각할 수 없으므로 문제가 없다.
또, 재생화상(110)의 표시에는 CRT 등으로 표시하는 NTSC 등의 비디오신호에 인코드해서 출력하는 또는 자기 디스크 등에 파일로서 기록하는 또는 프린터 등으로 종이에 인쇄하는 등 여러 가지 형태가 있다.
전자 은화 검출수단(120)에 입력된 데이터는 그 중에 어떤 특정 은화 데이터(30)가 매립되어 있는지 조사하고 매립되고 있는 경우엔 그것을 나타내는 신호를 출력한다. 전자 은화 데이터(30)의 검출은 8×8의 블록단위에 다음 처리를 행한다.
입력된 블록의 데이터에 대해서 그 AC 성분 중 낮은 주파수 성분의 것에서 차례로 n개를 취하고 F(1), F(2),…, F(n)로 하고 F(i)의 근처 3점(F(i-1)), F(i), F(i + 1)의 3점)의 절대값의 평균값을 부분 평균 avg(F(i))로 했을 때,
w(i)=F(i)/avg(F(i)) (i = 1,2,…, n)
를 모든 (i)에 대해서 부분 평균 계산기, 제산기(125)로 행해진다.
또한, 1 화상분포의 w(i)의 총계 WF(i)를 모든 (i)를 모든 (i)에 대해서 계산한다. 다음에 내전계산기(126)는 전자 은화 데이터(30)인 w(i)와 앞서 구한 WF(i)의 통계적 유사도를 벡터의 내적을 이용해서 통계적 유사도 c를 구한다.
C = WF·w/(WFD × wD)
여기에서 W=(WF(1), WF(2),…, WF(n)), w=(w(1), w(2),…, w(n), WFD=백터 WF의 절대값, wD=벡터 w의 절대값이다. ·는 내적을 나타낸다. 통계적 유사도 c가 어떤 특정의 값(역치) 이상인 경우엔 그 전자 은화 데이터(30)가 매립되어 있다고 판정한다. 이 전자 은화 데이터(30)는 인코더(3)측의 전자 은화 데이터(30)와 동일한 것이다.
검출표시수단(130)은 전자 은화 검출수단(120)이 출력한다. 데이터 중에 어떤 특정 전자 은화 데이터(30)가 매립되고 있는 것을 나타내는 신호가 입력되고 그 신호에 따라서 음, 음성, 광, 문자, 영상 등을 출력하고 또는 파일에 기록하고 또는 통신하고 또는 그 신호에 따라서 다른 어떤 기기를 제어하는 등 해서 전자 은화데이터(30)가 검출된 것을 외부에 표시한다.
다음에 본 발명의 제 2의 실시형태에 대해서 도면참조로 설명한다.
도 4는 본 발명의 제 2의 실시형태를 도시하는 블록이다. 도 4에 도시되듯이 인코더(5a)는 이산 코사인 변환기(21)와 전자 은화 매립기(41)와 전자 은화 데이터(31a)와 양자화기(51)와 가변장 부호화기(61)로 구성된다.
또, 디코더(69)는 가변장 복호화기(81)와 역양자화기(91)와 역이산 코사인 변환기(101)와 전자 은화 검출기(121)와 경고제시기(31)와 전자 은화 데이터(31a)로 구성된다.
인코더(5a)측에선 원화상(10)은 이산 코사인 변환기(21)에 입력되며 8×8의 블록단위에 2차원 이산 코사인 변환에 의해서 실공간 영역으로 표현한 형식의 데이터에서 공간 주파수 영역으로 표현한 형식의 데이터로 변환되고 출력된다.
전자 은화 매립기(41)는 이산 코사인 변환기(21)가 출력한 데이터에 미리 복제금지의 의미가 주어진 전자 은화 데이터(31a)를 매립하고 출력한다. 양자화기(51)는 전자 은화 매립기(41) 출력이 입력되고 그것을 고정장 부호에서 가변장 부호로 부호화해서 출력한다. 가변장 부호화기(61)의 출력은 압축 디지탈 화상 데이터로서 인코더(5a)의 출력으로 된다.
인코더(5a)에서 출력된 MPEG 등으로 압축된 디지털 화상 데이터는 축적/전송 수단(70)을 거쳐서 디코더(6a)까지 보내진다.
즉, CD-ROM, DVD-ROM 등의 광 디스크, HD 등의 자기 디스크, MO 등의 광자기 디스크와 같은 축적매체에 기록되어 판매/반포되거나 위성방송, 지상파 방송, 유선방송, ATM 회선, ISDN 회선 등의 무선/유선에 의한 방송, 통신에 의해서 전송되거나 해서 디코더(6a)까지 보내어지게 된다.
이같이 해서 디코더(6a)까지 보내어진 MPEG 등으로 압축된 디지털 화상 데이터는 가변장 복호화기(81)에 입력되고 가변장 부호에서 고정장 부호로 복호되어 출력된다. 가변장 복호화기(81) 출력은 역양자화기(91)에 입력되며 역양자화되어 출력된다. 영양자화기(91) 출력은 역이산 코사인 변환기(101)와 전자 은화 검출기(121)에 입력된다. 역이산 코사인 변환기(101)에 입력된 데이터는 8×8의 블록단위로 2차원 역이산 코사인 변환이 실시되고 공간 주파수 영역에서의 실공간 영역에서의 표현으로 변환되고 재생화상(110)으로서 출력된다.
한편, 전자 은화 검출기(121)는 입력된 데이터에 전자 은화 데이터(31a)가 매립되어 있는지를 검출하고 만약 매립되어 있던 경우에는 검출한 것을 나타내는 신호를 출력한다.
이 실시형태에선 전자 은화 데이터(31a)에는 복제금지라는 의미가 미리 주어지고 있으므로 전화 은화 데이터(310)가 검출된 디지털 화상 데이터는 그 화상의 저작권자 또는 판권자 등에 의해서 복제가 금지되고 있다는 것을 알 수 있다.
경고제시기(131)는 전자 은화 검출기(121)가 출력하는 전자 은화 데이터(31a)를 검출한 것을 나타내는 신호가 입력되고 전자 은화 데이터(31a)가 검출된 경우엔 사용자에 대해서 그 디지털 화상 데이터의 복제는 금지되고 있다는 뜻의 경고를 내고 사용자의 양심에 호소함으로써 부정사용을 억제한다. 구체적으로는 복제금지를 나타내는 램프, LED 등의 점등이나 경고음성의 출력, 문자표시 등의 방법으로 경고를 낼 수 있다.
다음에 본 발명에 제 3의 실시형태에 대해서 도면참조로 설명한다.
도 5는 본 발명의 제 3의 실시형태의 구성을 도시하는 블록도이다. 도 5에 있어서 인코더(5a)는 제 2의 실시형태의 인코더(5a)와 동일하다. 디코더(6a)는 제 2의 실시형태의 디코더(6a)의 구성요소에 덧붙여 역이산 코사인 변환기(101)의 뒤에 VTR 녹화방지기(141)를 구비하는 점이 제 2실시형태와 상이하다.
제 3의 실시형태의 동작은 다음같이 된다. 또한, 제 2의 실시형태와 같은 부분에 대해선 그 동작은 같으므로 여기에선 반복하지 않는다.
역이산 코사인 변환기(101)의 출력, 즉, 재생 화상 데이터는 VTR 녹화방지기(141)에 입력된다. 또, 전자 은화 검출기(121)의 출력은 VTR 녹화방지기(141)와 경고제시기(131)에 입력된다.
VTR 녹화방지기(141)를 통상은 역이산 코사인 변환기(101)가 출력하는 재생 화상 데이터가 입력되며 그것을 NTSC, PAC 등의 TV신호로 변환해서 출력한다. 그러나 전자 은화 검출기(121)에서 전자 은화 데이터(31a)가 매립되어 있는 것을 검출될 것을 나타내는 신호가 입력된 경우, 즉, 복제가 금지되어 있는 경우엔 재생화상 데이터에 VTR 등으로의 정상 녹화를 방해하기 위한 신호를 가해서 출력한다.
이 VTR으로의 정상 녹화를 방해하는 신호는 예를 들면 그것이 TV 신호에 가해져도 TV 수상기엔 정상으로 표시되는데 VTR엔 정상으로 녹화되지 않는 것이어야 한다. 이 같은 것은 얼마든지 생각되고 있다. 구체적으로는 VTR에선 주사동기, 색동기 등의 피드백 제어 루프 증에 기계적 요소가 들어가 있기 때문에 응답이 늦은 것에 대해서 TV 수상기에선 그것들의 루프는 전지적 요소만으로 구성되어 있기 때문에 응답이 빠르다는 특성의 차이를 이용하고 규격 외의 신호를 혼입해서 VTR의 그것들의 제어 루프를 오동작시키므로서 실현하는 방법이 많다.
VTR 녹화방지기(141)의 출력이 디코더(6b)의 출력으로서 출력되고 이것을 TV수상기를 표시하는 것에 의해서 재생 화상(110)이 얻어진다.
이 예에선 복제금지의 데이터에 대해선 복제금지라는 경고를 낼뿐만 아니라 VTR에 정상으로 녹화할 수 없게 처리한 TV 신호의 형태로 재생 화상을 출력하므로 제 2의 실시형태보다 큰 복제 방지 효과가 기대된다.
다음은 본 발명의 제 4의 실시형태에 대해서 도면참조로 설명한다.
도 6은 본 발명의 제 4의 실시형태를 도시하는 블록도이다.
도 6에 도시되듯이 인코더(5c), 디코더(5c)는 전자 은화 데이터(31c)의 의미매김이 저작권자 정보라는 점과 경고제시기(131) 대신에 검출표시기(132)가 구비되고 있는 점이 제 2의 실시형태와 다르다.
제 4의 실시형태의 동작은 다음같이 된다. 이하에서 설명을 생략한 부분의 구성 및 동작은 제 2의 실시형태와 같다.
전자 은화 검출기(121)의 출력은 검출표시기(132)에 입력된다. 검출표시기(132)는 전자 은화 검출기(121)가 전자 은화 데이터(31c)가 매립되어 있는 것을 검출한 것을 나타내는 신호가 입력되면 검출된 것을 LED를 점등하는 등의 방법으로 외부에 나타낸다.
인코더(5c), 디코더(6c)에선 전자 은화 데이터(31c)는 메모리카드 등에 기억시켜서 기기에서 탈착가능한 구조로 해두면 기기를 복수인수로 공용할 수 있다.
이 예에선 디지털 화상 데이터의 제작자는 데이터의 제작시에 자신에 고유인 전자 은화 데이터(31c)를 저작권자의 ID, 즉 일종의 전자서명으로서 인코더(5c)로 작품에 매립해 둔다.
이렇게 작성된 디지털 화상 데이터는 축적/전송수단(70)을 거쳐서 유통하는 것으로 되는데 그 중에는 부정으로 복제되어 무단 사용되는 데이터도 나오게 된다.
만약, 부정복제되고 무단으로 있다고 생각되는 데이터를 발견했을 때, 그 데이터에 대해서 디코더(6c)로 자신이 저작권자 ID로서 사용한 전자 은화 데이터(31c)의 검출처리를 행한다. 만약, 그 데이터가 부정복제된 디지털 데이터 200이면 매립하고 있는 전자 은화 데이터(31c)가 검출되므로 그것을 증거로서 상대에 사용중지를 요구하거나 손해배상청구 등의 법적수단을 취할 수 있다.
또, 역으로 자시의 작품의 위작이라고 생각되는 데이터를 발견했을 때, 그 데이터에 대해서 디코더(6c)로 자신이 저작권자 ID로서 사용한 전자 은화 데이터(31c)의 검출처리를 향한다. 만약, 그 데이터가 위작이면 매립하고 있을 것인 전자은화(31c)가 검출되지 않으므로 그것을 증거로서 법적수단등을 취할 수 있다.
다음에 본 발명의 제 5의 실시형태에 대해서 도면참조로 설명한다. 도 7은 본 발명의 제 5의 실시형태를 도시하는 블록도이다. 도 7로 분명하듯이 인코더 5d, 디코더 6d는 복수의 전자 은화 데이터를 매립, 또는 검출할 수 있는 구성으로 되어있다.
우선, 인코더(5d)는 제 2의 실시형태의 인코더(5a)의 전자 은화 데이터(31a)대신에 전자 은화 데이터(1)에서 전자 은화 데이터까지의 n개의 전자 은화 데이터를 기억하고 있는 전자 은화 데이터 테이블(32)을 구비하고 있다. 또한, 인코더(5a)의 구성요소에 덧붙여서 전자 은화 데이터 선택기(151)와 피드백 제어기(161)와 피드백기(171)를 구비하고 있다.
제 5의 실시형태의 동작은 다음같이 된다. 설명을 생략한 부분의 구성 및 동작에 대해선 제 2의 실시형태와 같다.
복수의 전자 은화 데이터를 매립하기 위해선 어떤 전자 은화 데이터를 매립한 데이터에 대해서 재차 전자 은화 데이터를 매립하는 처리를 행한다.
전자 은화 데이터 선택기(151)는 전자 은화 데이터 테이블(32)에 기억되고 있는 전자 은화 데이터(1)에서 전자 은화 데이터 n까지의 n개의 전자 은화 데이터중에서 J(0 ≥ j ≤ n)개의 매립 전자 은화 데이터를 선택하고 전자 은화 매립기(41)로 순차 출력하게 전자 은화 데이터 테이블(32)을 제어한다.
또, 매립 전자 은화 데이터의 수 j, 즉, 매립처리의 반복회수 j를 피드백 제어기(161)로 출력한다.
피드백 제어기(161)는 전자 은화 데이터 선택기가 출력하는 매립 전자 은화데이터의 수 j를 입적하고, 전자 은화 매립기(41)의 출력을 그 입력으로 j-1회 피드백하도록 피드백기(171)를 제어한다. 피드백기(171)는 피드백 제어기(161)의 출력에 따라서 전자 은화 매립기(41)의 매립의 출력을 그 입력에 피드백시킨다.
다음에 디코더(6d)는 제 2의 실시형태의 디코더(5a)의 전자 은화 데이터(31a) 대신에 전자 은화 데이터(1)에서 전자 은화 데이터 n까지의 n개의 전자 은화 데이터를 기억하고 있는 전자 은화 데이터 테이블을 구비하고 있다. 또한, 디코더(6a)의 구성요소에 덧붙여 전자 은화 데이터 선택기(151)와 검출제어기(181)를 구비하고 있다.
복수의 전자 은화 데이터를 검출하기 위해선 검출하려는 모든 전자 은화 데이터에 대해서 검출처리를 행한다.
전자 은화 데이터의 선택기(151)는 전자 은화 데이터 테이블(32)에 기억되고 있는 전자 은화 데이터(1)에서 전자 은화 데이터 n까지의 n개의 전자 은화 데이터중에서 k(O ≤ k ≤ n)개의 검출하는 전자 은화 데이터를 선택하고 전자 은화 검출기(121)로 순차 출력하게 전자 은화 데이터 테이블(32)을 제어한다. 또, 이 반복처리를 가능케 하기 위해서 이 실시형태의 전자 은화 데이터 검출기는 검출하는 전자 은화 데이터의 수 k, 즉 검출처리의 반복회수 k를 검출제어기(181)로 출력한다.
검출제어기(181)는 전자 은화 데이터 선택기가 출력하는 검출하는 전자 은화 데이터의 수 k가 입력되고 k회 검출처리를 반복하게 전자 은화 검출기(121)를 제어한다.
이 실시형태에선 제 1에서 제 4의 실시형태에 비교해서 보다 많은 정보를 매립하고 또 검출할 수 있으므로 예를 들면 복제금지정보와 저작권자정보와 의미 지어진 2개의 전자 은화 데이터를 매립하면 제 1의 또한 다른 정보도 매립하면 보다 큰 효과를 얻을 수 있다.
또한, 이상 설명한 실시형태에선 화상신호를 공간 주파수영역의 데이터로 변환하는 수단으로서 이산 코사인 변환을 쓴 경우를 예로서 설명했는데 이 변환엔 다른 직교변환방식, 예를 들면 아다말 변환, 푸리에 변환, K-L 변환 등을 사용해도 좋다는 것은 당업자에게 자명할 것이다.
또, 본 발명의 화상처리장치의 인코더, 디코더의 부분을 마이크로프로세서 등과 ROM, 플로피디스크 등의 프로그램 격납용 기록매체로 구성하고 이상 말한 실시형태의 동작을 충실하게 실현하기 위한 프로그램을 이 프로그램 격납용 기록매체에 격납하므로서 이상 말한 여러 가지의 실시형태와 동일한 동작을 행하게 하는 것도 당업자에겐 자명한 변경에 불과하다는 것도 분명하다. 이것들의 변경도 본 발명의 범위의 일부를 이룬다.
본 발명의 인코더는 손상치 않고 화상에 전자 은화 데이터(식별 데이터)는 매립할 수 있다. 그 이유는 매립된 전자 은화 데이터는 화상으로서 보면 낮은 레벨의 노이즈로서 존재하고 있으므로 인간의 눈엔 거의 지각되고 있지 않기 때문이다.
또, 전자 은화 데이터의 매립은 화상을 공간 주파수 영역으로 표현했을 때 큰 값을 갖는 주파수 성분에 대해서 전자 은화 데이터의 패턴을 가산하는 것으로 행하지만 그때 전자 은화 데이터로서 평균 0, 분산 1인 정규분포에서 선정하고 다시 그것을 가산하는 주파수 성분의 값의 크기에 비례시켜서 스케일링하고 나서 가산하므로 화상에 제공되는 영향이 작기 때문이다.
또, 본 발명의 인코더로 화상에 매립된 은화 데이터를 제 3자가 삭제, 개변하는 것은 거의 불가능하다. 그 이유는 전자 은화 데이터는 매립대상의 화상을 공간 주파수 영역으로 실현했을 때 큰 값을 갖는 주파수 성분에 매립되어 있으므로 필터 등의 처리, 복제, VTR의 녹화, 종이에의 인쇄 등에 의해서도 제거할 수 없고 또, 제 3자가 상이한 전자 은화 데이터를 위해서 매립해도 이미 매립되어 있는 전자 은화 데이터는 남으며 디코더로 검출할 수 있기 때문이다. 또, 만약 전자 은화 데이터를 검출할 수 없는 정도로 처리하면 화상의 특징적인 부분의 정보를 파괴하고 말므로 화질을 두드러지게 손상하고 화상의 가치가 없어지고 전자 은화 데이터를 삭제한 의미가 없어지기 때문이다.
또한, 본 발명에선 디지털 화상 데이터의 제작자나 출판사가 본 발명이 인코더로 그 화상에 저작권자나 판권자 등에 고유의 전자 은화 데이터를 미리 화상에 매립해 둠으로서 부정 복재된 가능성이 있는 데이터를 발견했을 때 그 사실을 용이하게 증명할 수 있다. 즉, 그 데이터에 대해서 디코더를 검출처리를 행하고 그 데이터에서 자신에 고유의 전자 은화 데이터가 검출되면 그 데이터의 정규의 권리자가 자신이라는 것이 증명된다. 그 이유는 매립된 전자 은화 데이터는 제 3자엔, 삭제, 개변할 수 없고 복제되어도 영구히 남고 무리하게 삭제하면 화질을 두드러지게 손상하고 말기 때문이다.
또, 본 발명에선 디지털 화상 데이터의 제작자나 출판사가 본 발명이 인코더로 그 화상에 복제금지의 정보를 갖는 전자 은화를 미리 매립해 둠으로서 디코더로 그것을 검출해서 복제금지인 것을 사용자에 경고하거나 또는 VTR에 정상으로 녹화할 수 없는 처리를 실시하고 출력하는 것에 의해서 부정복제를 방지하고 저작권 등의 권리자의 권리보호를 할 수 있다. 그 이유는 매립된 전자 은화 데이터는 제 3자엔 삭제, 개변할 수 없고 복제되어도 영구히 남고 무리하게 삭제하면 화질을 두드러지게 손상하기 때문이다.
또, 본 발명을 JPEG, MPEG-1, MPEG-2, H261, H263 등의 방식과의 조합에 적합하고 있으며 비교적 간단한 처리의 추가로 실현가능하다. 그 이유는 JPEG, MPEG-1, MPEG-2, H261, H263 등의 방식은 그 기본적 알고리즘 등이 인코더측에서 실공간 영역으로 표현된 원화상을 공간 주파수 영역에서의 표현으로 변환하고 데이터 양 압축처리를 행하고 축적 또는 전송하고 디코드측에서 압축을 해제하고 공간주파수 영역에서의 표현에서 실공간 영역에서의 표현으로 변환하여 재생화상을 얻는 것이므로 전자 은화 데이터의 매립처리와 검출처리를 위해서만 따로 이산 코사인 변환, 역이산 코사인 변환 등의 많은 연산량을 필요로 하는 처리를 행할 필요가 없고 그것들의 처리는 JPEG, MPEG 등의 본래의 처리로 공용할 수 있으므로 적은 연산량의 증가로 실현할 수 있는 것이다.

Claims (14)

  1. 원화상에 직교변환을 실시하고 공간 주파수 영역의 데이터 세트로 변환하는 변환수단과, 미리 정해진 n개 1조의 식별 데이터 w(1), w(2),…, w(n)와 상기 공간 주파수 영역의 데이터 세트에서 선정된 n개의 공간 주파수 데이터 f(1), f(2),…,f(n)로 구해진 n개의 제 2의 공간 주파수 데이터를 상기 공간 주파수 데이터 f(1), f(2).…, f(n)에 각각 가산함으로써 상기 공간 주파수의 데이터 세트를 수정하고 상기 공간 주파수 영역의 데이터 세트에 상기 식별 데이터를 매립하는 데이터 매립 수단 및 이 수정된 공간 주파수의 데이터 세트를 압축 부호화하는 압축수단으로 구성되는 것을 특징으로 하는 화상 데이터 처리장치.
  2. 제 1 항에 있어서. 상기 데이터 매립수단은 n개의 상기 식별 데이터 w(1), w(2),…, w(n)와 상기 n개의 공간 주파수 데이터 f(1). f(2),…, f(n)를 각각 승산하고 이 승산결과를 정수(α)배한 결과 α×w(i)×f(i) (i = 1,2,…, n)를 대응하는 공간 주파수 데이터 f(i)에 가함으로써 상기 공간 주파수 데이터 세트를 수정하고 상기 매립수단 출력으로 하는 것을 특징으로 하는 화상 데이터 처리장치.
  3. 원화상에 직교변환을 실시하고, 공간 주파수 영역의 데이터 세트로 변환하고, 상기 공간주파수 영역의 데이터 세트에서 선정된 n개의 공간 주파수 데이터 f(1), f(2),…, f(n)와 미리 정해진 식별 데이터 w(1), w(2),…, w(n)에서 구해진 3개의 제 2의 공간 주파수 데이터를 상기 n개의 공간 주파수 데이터 f(1), f(2),…, f(n)에 각각 가산하고, 이 가산에 의해 수정된 공간 주파수의 데이터 세트를 압축 부호화하는 것에 의해서 얻어진 데이터가 공급되는 화상 데이터 처리장치이고, 상기 압축된 데이터 세트를 신청하는 신장수단 및 상기 신장기로 신장된 데이터 세트에서 상기 수정된 n개의 공간 주파수의 데이터 f(1), f(2),…,5(n)의 복원값 F(1), F(2),…, F(n)을 얻고 이 복원값 F(i)(i=1,2,…, n)에서 상기 식별 데이터를 검출하면 검출신호를 출력하는 검출수단으로 구성되는 것을 특징으로 하는 화상 데이터 처리장치.
  4. 제 3항에 있어서, 상기 검출수단은 상기 복원값 F(i)(i=1,2,…, n)의 부분평균 avg(F(i))(i=1,2,…, n)을 계산하는 부분평균 계산수단과, 상기 복원값을 그것에 대응하는 부분평균으로 제산한 n개의 값(F(i)/avg (F(i)))(i = 1, 2, …, n)과 상기 식별 데이터 w(i)(i = 1, 2,…, n)와의 유사도를 산출하고, 이 유사도가 소정의 값보다 클 때, 상기 검출신호를 출력하는 것을 특징으로 하는 화상데이터 처리장치.
  5. 제 3 또는 4항에 있어서, 상기 복원된 공간 주파수 영역의 데이터 세트에 역직교 변환을 실시하고 원화상을 복원하는 수단과, 상기 검출하는 수단이 검출신호를 출력했을 때 상기 복원된 원화상에 화상기록장치를 오동작시키기 위한 신호를 혼입해서 상기 화상 기록장치에 공급하고, 그렇지 않은 경우엔 상기 복원된 원화상을 상기 화상 기록장치에 공급하는 공급수단을 더 구비하는 것을 특징으로 하는 화상 데이터 장치.
  6. 부호화부와 복호화부로 이루어진 화상 데이터 처리장치이고, 상기 부호화부는 원화상에 직교 변환을 실시하고, 공간 주파수 영역의 데이터 세트로 변환하는 변환수단과, 이 공간 주파수 영역의 데이터 세트에 미리 정해진 1조의 식별 데이터 w(1), w(2), …, w(n)와 상기 공간 주파수 영역이 데이터 세트에서 선택된 공간 주파수 데이터 f(1), f(2),…, f(n)에서 구해진 제 2의 공간 주파수 데이터를 상기 공간 주파수 데이터 f(1), f(2),…, f(n)를 가산하므로서 상기 공간 주파수 영역의 데이터 세트에 상기 식별 데이터를 매립하는 매립수단과, 이 식별 데이터가 매립된 상기 공간 주파수 영역의 데이터 세트를 압축 부호화하는 압축수단으로 구성되며, 상기 복호화부는 상기 압축된 공간 주파수 영역의 데이터 세트를 신장하고, 상기 공간 주파수 영역의 데이터 세트를 복원하는 신장수단과, 상기 부호화부에서 상기 제 2의 공간 주파수 데이터가 가산된 n개의 공간 주파수 데이터의 복원값 F(1), F(2),…, F(n)에서 상기 식별 데이터를 검출하면 검출신호를 출력하는 검출수단으로 구성되는 것을 특징으로 하는 화상 데이터 처리장치.
  7. 제 6항에 있어서, 상기 매립수단은 n개의 상기 식별 데이터 w(1), w(2),…, w(n)와 상기 n개의 공간 주파수 데이터 f(1), f(2),…, f(n)를 각각 승산하고, 이 승산결과를 정수(α)배한 결과인 상기 제 2의 공간 주파수 데이터 α×w(i)×f(i)를 대응하는 공간 주파수 데이터에 가하므로서 상기 공간 주파수 데이터세트를 상기 매립수단 출력으로하고, 상기 검출수단은 상기 복원값 F(i)의 부분 평균 avg(F(i))(i=1,2,…, n)를 계산하는 부분평균 계산수단과, 상기 복원값 F(i)를 그것에 대응하는 부분평균으로 제산한 n개의 값(F(i)/avg(F(i)))(i = 1,2,…, n)과 상기 식별 데이터 w(1)(i = 1, 2,…, n)와의 유사도를 산출하고, 이 유사도가 소정이 값보다 클 때, 상기 검출신호를 출력하는 것을 특징으로 하는 화상 데이터 처리장치.
  8. 제 6 또는 7항에 있어서, 상기 복원된 공간 주파수 영역의 데이터 세트에 역직교 변환을 실시하고 상기 원화상을 복원하는 수단과, 상기 검출하는 수단이 검출신호를 출력했을 때 상기 복원된 원화상에 화상기록장치를 오동작시키기 위한 신호를 혼입하여 상기 화상 기록장치에 공급하고, 그렇지 않는 경우엔 상기 복원된 원화상을 상기 화상 기록장치에 공급하는 공급수단을 더 구비하는 것을 특징으로 하는 화상 데이터 처리장치.
  9. 제 6, 7 또는 8항에 있어서, 상기 부호화부는 복수(M)조의 식별 데이터를 격납하는 제 1의 테이블과, 지정된 m(0 m ≤ M)조의 식별 데이터를 순차 장기 제 1의 테이블에서 판독하고, 제 2회째에서 제 (m-1)회 째의 제 1의 테이블의 판독마다 상기 매립수단 출력을 상기 매립수단의 입력측에 피드백하는 부호화 제어회로를 더 구비하며, 상기 부호화부는 상기 제 1의 테이블과 동일한 식별 데이터를 격납하는 제 2의 테이블과, 지정된 식별 데이터를 순차 상기 제 2의 테이블에서 판독하고 상기 검출수단에 공급하는 복호화 제어회로를 더 구비하는 것을 특징으로 하는 화상 데이터 처리장치.
  10. 제 9 항에 있어서, 상기 제 1, 제 2의 테이블의 적어도 1개는 화상 데이터 처리장치에 착탈자재 구성인 것을 특징으로 하는 화상 데이터 처리장치.
  11. 컴퓨터 화상 처리장치로서 동작시키기 위한 프로그램을 격납하는 기록매체이고 a. 원화상에 직교변환을 실시하고, 공간 주파수 영역의 데이터 세트로 변환하는 단계와, b. 상기 공간 주파수 영역의 데이터 세트에서 선정된 n개의 공간 주파수 데이터 f(1), f(2),…, f(n)와 미리 정해진 식별 데이터 w(1), w(2),…, w(n)에서 n개 제 2의 공간 주파수 데이터를 얻는 단계와, C. 상기 제 2의 공간 주파수 데이터를 상기 n개의 공간 주파수 데이터 f(1), f(2),…, f(n)에 각각 가산하고, 이 가산에 의해 상기 공간 주파수의 데이터 세트를 수정하는 단계와, d. 상기 수정된 공간 주파수의 데이터 세트를 압축 부호화하는 단계를 포함하는 것을 특징으로 하는 프로그램 격납 기록매체.
  12. 제 11 항에 있어서, 상기 단계 b는 n개의 상기 식별 데이터 w(1), w(2),…, w(n)와 상기 n개의 공간 주파수 데이터(1), f(2),…, f(n)를 각각 승산하고, 이 승산결과를 정수(α)배한 결과 α×w(i)×f(i)(i=1,2,…, n)를 상기 n개의 제 2의 공간 주파수 데이터를 얻는 단계인 것을 특징으로 하는 프로그램 격납 기록매체.
  13. 원화상에 직교변환을 실시하고, 공간 주파수 영역의 데이터 세트로 변환하고, 상기 공간 주파수 영역의 데이터 세트에서 선택된 n개의 공간 주파수 데이터 f(1), f(2),…, f(n)와 미리 정해진 식별 데이터 w(1), w(2),…, w(n)에서 구해진 n개의 제 2의 공간 주파수 데이터를 상기 n개의 공간 주파수 데이터 f(1), f(2),…, f(n)에 각각 가산하고, 이 가산에 의해 수정된 공간 주파수의 데이터 세트를 압축 부호화하는 것에 의해서 얻어진 데이터를 복원하는 처리를 컴퓨터 실행시키기 위한 프로그램을 격납하는 기록매체이고, a. 상기 압축된 데이터 세트를 신장하는 단계와, b. 신장된 데이터 세트에서 상기 수정된 n개의 공간 주파수의 데이터 f(1), f(2),…, f(n)의 복원값 F(1), F(2),…, F(n)을 얻고 이 복원값 F(i)(i=1, 2, n)에서 상기 식별 데이터를 검출하면 검출신호를 출력하는 단계를 포함하는 것을 특징으로 하는 프로그램 격납 기록매체.
  14. 제 13항에 있어서, 상기 단계 b는 상기 복원값 F(i)(i=1,2,…, n)의 부호평균 avg(F(i))(i=1,2,…, n)를 계산하는 단계와, 상기 복원값을 그것에 대응하는 부분 평균으로 제산한 n개의 값(F(i)/avg)(F(i)(i=1,2,…, n)와 상기 식별 데이터 w(i)(i=1, 2,…, n)와의 유사도를 산출하는 단계와, 이 유사도가 소정의 값보다 클 때 상기 검출신호를 출력하는 단계로 이루어진 것을 특징으로 하는 프로그램 격납 기록매체.
KR1019970054410A 1997-03-05 1997-10-20 화상 데이터 처리 장치 및 상기 화상 데이터 처리를 위한 프로그램 격납 기록매체 KR100280953B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP97-50195 1997-03-05
JP5019597A JP3109575B2 (ja) 1996-09-30 1997-03-05 画像データ処理装置

Publications (2)

Publication Number Publication Date
KR19980079437A true KR19980079437A (ko) 1998-11-25
KR100280953B1 KR100280953B1 (ko) 2001-02-01

Family

ID=12852377

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970054410A KR100280953B1 (ko) 1997-03-05 1997-10-20 화상 데이터 처리 장치 및 상기 화상 데이터 처리를 위한 프로그램 격납 기록매체

Country Status (6)

Country Link
EP (1) EP0869454B1 (ko)
KR (1) KR100280953B1 (ko)
CN (1) CN1155247C (ko)
CA (1) CA2219875C (ko)
DE (1) DE69739778D1 (ko)
SG (1) SG71059A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100323441B1 (ko) * 1997-08-20 2002-06-20 윤종용 엠펙2동화상부호화/복호화시스템
US6931536B2 (en) 2001-03-06 2005-08-16 Macrovision Corporation Enhanced copy protection of proprietary material employing multiple watermarks

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0766468B1 (en) * 1995-09-28 2006-05-03 Nec Corporation Method and system for inserting a spread spectrum watermark into multimedia data
JP3106985B2 (ja) * 1996-12-25 2000-11-06 日本電気株式会社 電子すかし挿入装置及び検出装置

Also Published As

Publication number Publication date
KR100280953B1 (ko) 2001-02-01
EP0869454A3 (en) 2000-05-17
CA2219875A1 (en) 1998-09-05
DE69739778D1 (de) 2010-04-08
EP0869454B1 (en) 2010-02-24
CN1155247C (zh) 2004-06-23
CN1192630A (zh) 1998-09-09
SG71059A1 (en) 2000-03-21
EP0869454A2 (en) 1998-10-07
CA2219875C (en) 2002-03-12

Similar Documents

Publication Publication Date Title
JP3109575B2 (ja) 画像データ処理装置
KR100290330B1 (ko) 디지탈데이터용식별데이터삽입및검출시스템
CA2227381C (en) Image data encoding system and image inputting apparatus
Hsu et al. DCT-based watermarking for video
EP1085754B1 (en) A system for acquiring and replaying television programs
US6674873B1 (en) Method and device for inserting and detecting a watermark in digital data
JP2001275115A (ja) 電子すかしデータ挿入装置および検出装置
US20060133477A1 (en) Combined video decoder and watermark creator
CA2226719C (en) Image data illegal use prevention system
JP3055672B2 (ja) 画像データのエンコードシステム及び画像入力装置
US6687824B1 (en) Digital image coding/decoding apparatus and method for recording and restoring a signature image using watermarking
KR100280953B1 (ko) 화상 데이터 처리 장치 및 상기 화상 데이터 처리를 위한 프로그램 격납 기록매체
GB2379348A (en) Modifying information signal such that perceptibility of impairment varies
US7583850B2 (en) Image-processing apparatus and method
CA2374323C (en) Digital image watermarking method
Barni et al. Robust Watermarking of Video for Copyright Protection
Wolthusen Digital Watermarking: From Concepts to Real-Time Video Applications
JP2004222322A (ja) 電子すかしデータ挿入方法及び装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121023

Year of fee payment: 13

FPAY Annual fee payment

Payment date: 20131022

Year of fee payment: 14

FPAY Annual fee payment

Payment date: 20141021

Year of fee payment: 15

LAPS Lapse due to unpaid annual fee