KR20050023394A

KR20050023394A - Ｗｍ 신호 생성 장치, ｗｍ 신호 생성 방법, ｗｍ 신호생성 방법을 실행하기 위한 컴퓨터 실행 가능한 프로그램및 이 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체,전자 워터마크 매립 장치 및 그 전자 워터마크 매립장치를 포함하는 디지털 텔레비전 장치

Info

Publication number: KR20050023394A
Application number: KR10-2005-7000134A
Authority: KR
Inventors: 다치바나류키; 스기하라료
Original assignee: 인터내셔널 비지네스 머신즈 코포레이션
Priority date: 2002-07-29
Filing date: 2003-07-25
Publication date: 2005-03-09
Also published as: JP4088622B2; EP1553775A4; CA2494554A1; WO2004012453A1; CN1672414A; US7587604B2; JPWO2004012453A1; AU2003252704A1; US7461256B2; US20080285794A1; US20100011217A1; CN100463514C; EP1553775A1; IL166503A0; US20060153421A1; KR100791434B1; US7797542B2

Abstract

내성, 품질이 개선된 WM 신호를 생성하여, 전자 워터마크를 매립하기 위한 장치, 프로그램, 기억 매체 및 전자 워터마크 매립 기능을 포함하는 디지털 텔레비전 장치를 제공한다. 실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 장치(10)는 실시간 콘텐츠를 입력하는 입력 수단(12)과, 실시간 콘텐츠를 유지하는 입력 버퍼(14)와, 분할된 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 WM 신호를 생성하기 위한 생성 수단과, 생성된 WM 신호를 유지하기 위한 출력 버퍼(18)를 포함한다. 생성 수단은 상기 WM 신호의 강도를 예측하기 위한 예측 수단(16)과, 분할 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 제어 수단(20)과, 출력 WM 신호를 생성하기 위한 수단(22)을 포함하도록 구성된다.

Description

ＷＭ 신호 생성 장치, ＷＭ 신호 생성 방법, ＷＭ 신호 생성 방법을 실행하기 위한 컴퓨터 실행 가능한 프로그램 및 이 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체, 전자 워터마크 매립 장치 및 그 전자 워터마크 매립 장치를 포함하는 디지털 텔레비전 장치{WM SIGNAL GENERATION DEVICE, WM SIGNAL GENERATION METHOD, COMPUTER-EXECUTABLE PROGRAM FOR EXECUTING WM SIGNAL GENERATION METHOD AND COMPUTER READABLE RECORDING MEDIUM ON WHICH THE PROGRAM IS RECORDED, DIGITAL WATERMARKING DEVICE, AND DIGITAL TV SET INCLUDING THE DIGITAL WATERMARKING DEVICE}

본 발명은 콘텐츠에 대하여 저작권 등의 권리 정보를 추가하기 위한 전자 워터마크에 관한 것으로, 보다 상세하게는, 본 발명은 실시간으로 제공되는 콘텐츠에 대하여 전자 워터마크의 계산에 의해 생기는 지연으로부터 발생하는 문제점을 개선하여, 보다 양호한 품질의 콘텐츠를 제공하면서, 전자 워터마크의 검출성이 개선 가능한 WM 신호 생성 장치, WM 신호 생성 방법 및 이 방법을 실행하는 컴퓨터 실행 가능한 프로그램, 이 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체, 전자 워터마크 매립 장치 및 이 전자 워터마크 매립 장치를 포함하는 디지털 텔레비전 장치에 관한 것이다.

지금까지 「워터마크」 기술은 지폐 등에 있어서, 진위 판단용으로 사용되고 있다. 또한, 최근에는 컴퓨터 기술의 발달에 의해, 음악, 화상, 동화상 등은 저작권에 기초하여, 콘텐츠로서 제공되는 경우가 많아지고 있다. 이 때문에, 콘텐츠의 부정 복사를 판단하기 위해서도, 전술한 「워터마크」 기술을 사용하여, 콘텐츠의 부정 복사를 방지할 필요가 있다. 콘텐츠에 대한 「워터마크」 매립은 원칙과 같이 디지털 방식으로 「워터마크 신호」[이하, WM(watermark) 신호]를 오리지널 콘텐츠에 매립함으로써 행해진다.

지금까지 여러 가지 전자 워터마크 매립 방법이 제안되었다. 예컨대 동일한 출원인에 의한 「주파수 영역에 데이터를 매립하기 위한 시스템 및 방법」에서는 음악 등의 오디오 신호를 포함하는 콘텐츠에 대하여 전자 워터마크를 매립하는 경우에, 주파수 영역에서 심리 청각 모델을 계산함으로써, 전자 워터마크를 매립하는 것을 검토하고 있다. 이 방법은 오디오 신호의 주파수를 검출할 때에 DFT(이산 푸리에 변환)의 프레임을 정확히 발견할 필요가 있어, 이를 위한 계산 시간이 증가하여, 실시간으로 제공되는 오디오 신호에 대하여 시간적 지연을 일으키는 일없이 WM 신호를 매립하는 목적에는 부적합하다는 문제점이 있었다.

이 때문에, 동일한 출원인에 의한 특허 출원 「프레임 동기를 필요로 하지 않는 워터마크 매립 시스템 및 방법」에서는, 오디오 신호에 대하여 프레임 동기화를 필요로 하지 않고서 WM 신호를 매립하는 기술도 검토되고 있다. 프레임 동기화를 필요로 하지 않는 매립 기술은 오리지널 신호의 신축이나 위치의 틀어짐에 대하여 내성이 크고, 시간적 지연도 크지 않으며, 또한 전자 워터마크의 검출 판단을 양호하게 행할 수 있다고 하는 이점을 갖고 있다. 그러나, 상술한 프레임 동기화의 필요가 없는 매립 방법은 WM 신호와 오리지널 신호의 위상이 동기되어야 하기 때문에, WM 신호만이 지연하는 식의 실시간으로 제공되는 콘텐츠에 WM 신호를 매립한다고 하는 목적에는 알맞지 않고, 또한 WM 신호에만 지연이 발생한 경우에는 WM 신호의 검출성이 현저히 저하되는 내성 상의 문제점이 있었다.

또한, Boney 등의 "Digital Watermarks for Audio Signals", (IEEE International Conference on Multimedia Computing and System, June 17-23th, Hiroshima, Japan, pp 473-480)에서는 심리 청각 모델을 모의하는 필터를 미리 설치해 두고, 시간 영역에서 유사 랜덤 계열을 필터링함으로써, WM 신호의 지연에 의한 상술한 내성의 열화와 같은 문제점이 개선되고 있다. 그러나, 필터링 계수를 프레임마다 결정해야 하기 때문에, 상술한 바와 같이, 실시간으로 제공되는 오디오 신호에 대하여 WM 신호를 매립하기 위해서는 적절하지 않다.

더욱이, Swanson 등은, "Robust Audio Watermarking Using Perceptual Masking"(Signal Processing vol 66, 1999, 337-355)에서, 주파수 마스킹을 계산하기 위한 심리 시청각 모델과, 시간적 마스킹을 계산하기 위한 심리 청각 모델의 양방을 사용하는 방법을 제안하고 있다. 시간적 마스킹에서는 오디오 신호의 엔벨로프 계산과 마스크량을 예측하여 WM 신호를 매립하지만, 예측은 시간적 마스킹의 출력을 사용하는 마스크량의 예측이며, 오리지널 콘텐츠를 직접 사용한 실시간 WM 신호 매립이 아니다.

이와는 별도로, 비디오 신호와 같은 화상 데이터에 대하여도 전자 워터마크를 매립하는 기술이 제안되어 있다. 예컨대, Deguillaume 등은, "Robust 3D DFT Video Watermarking", Proc. SPIE vol. 3657, pp. 113-124에 있어서, 비디오 계열을 종횡과 시간 방향의 3차원 정보로서 DFT를 적용하여, WM 신호를 매립하는 방법을 제안하고 있다. 이 방법에 있어서도 DFT를 행하기 위한 시간 폭만큼만 지연이 생기기 때문에, 전자 워터마크를 실시간으로 매립하기 위한 적절한 방법이라고 할 수 없다.

또한, 일본 특허 공개 평11-55638호 공보에서는, 화상 내의 일부의 영역을 정보 부가 영역으로서 설정하고, 이 부분을 확대 또는 축소함으로써, 정보를 화상에 매립하는 방법이 개시되어 있다. 이 매립 방법은 영상에 WM 신호를 추가하는 것이 아니라, 영상 자체를 일부 가공하는 것이기 때문에, 매립 전과 매립 후에 있어서 신호의 차분이 커서, 품질 상의 문제를 일으킨다. 또한, Hartung 등은, "Watermarking of Uncompressed and Compresses Video", Signal Processing, vol. 66, No. 3, pp. 283-301, 1998에서, 비디오를 정지 화상의 연속이라고 간주하여, 유사 랜덤 수열로 변조한 메시지를 각 프레임에 가산하는 방법을 개시하고 있다. 또한, 압축된 비디오 계열에 대해서는, 디코딩하지 않고서 매립 메시지에 따라서 DFT 계수를 수시로 치환하는 방법을 제안하고 있다. 그러나, Hartung 등의 방법에서도, 예측적으로 제어하는 것이 아닌 점에서, 실시간으로 콘텐츠에 대하여 WM 신호를 매립하는 점에서는 충분하지 않다.

상술한 전자 워터마크는 인터넷을 통해서 멀티미디어 데이터를 배신할 때의 저작권의 보호나, DVD-Video, DVD-Audio와 같은 미디어의 유통에 있어서의 저작권 보호를 주된 목적으로 하는 것이었다. 이들 디지털 콘텐츠는 기억 매체 상에 이미 유지되어 있다. 상술한 기술은 이들의 유지된 디지털 콘텐츠에 대하여 WM 신호 매립 처리를 하는 것으로, 실시간으로 제공되는 콘텐츠에 대하여 WM 신호를 매립하는 것이 아니다.

그러나, 디지털 정보의 적용 범위가 넓어짐에 따라, 클래식 콘서트에서 연주되는 음악을 부정하게 휴대한 테이프 레코더로 녹음하여, 후에 CD에 기록하여 판매 또는 인터넷으로 공개한다고 하는 부정 행위도 생각할 수 있다. 또한, 영화에 대해서도, 부정하게 휴대한 비디오 카메라를 사용하여 스크린을 녹화하고, 그 후에 DVD나 Video CD에 기록하여 판매하거나, 인터넷으로 공개해 버린다고 하는 부정 행위도 상정된다. 또한, 텔레비전이나 라디오를 통하여 음악이나 스포츠 이벤트 등을 생방송하는 경우에, 수신한 방송을 기록하여, DVD Video 등의 기록 매체에 기록하여 판매하거나, 인터넷으로 제공한다고 하는 부정도 상정된다. 나아가서는, 저작권의 주장 외에, 복사 제어를 하고 싶은 경우나, 녹음자 또는 녹화자 또는 녹음 녹화된 위치를 특정하고 싶은 경우도 있다.

도 22에는 종래의 WM 매립 기술을 사용하여 실시간으로 제공되는 콘텐츠에 대하여 전자 워터마크를 매립하기 위한 장치를 도시한다. 도 22에 도시하는 전자 워터마크 매립 장치(200)는 실시간으로 공급되는 생연주나 생방송(이하, 실시간 콘텐츠로서 참조함)에 대하여 전자 워터마크를 매립할 수 있다. 도 22에 도시한 전자 워터마크 생성 장치(200)는 실시간 콘텐츠를 디지털적으로 받아들이기 위한 취입 수단(202)과, 받아들인 실시간 콘텐츠를 사용하여 전자 워터마크를 생성하기 위한 생성 수단(204)을 포함하도록 구성된다. 전자 워터마크가 매립된 콘텐츠는 네트워크(206)를 통해 사용자에게 제공되고 있다. 콘텐츠에는 전자 워터마크가 매립되어 있기 때문에, 사용자가 녹음 또는 녹화하더라도, 제공자의 저작권은 보호받게 된다.

여기서, 더욱 상세하게 도 22에 도시한 종래의 전자 워터마크 매립 장치를 설명하면, 종래의 전자 워터마크 매립 장치에 포함되는 생성 수단(204)은 입력 버퍼(208)와, 전자 워터마크 계산 수단(210)과, 출력 버퍼(212)를 포함하도록 구성된다. 입력 버퍼(208)는 취입 수단(202)에 의해 디지털적으로 받아들인 데이터를 버퍼링한다. 전자 워터마크 계산 수단(210)은 받아들인 실시간 콘텐츠를 사용해서 심리 청각 모델 등에 기초하여, 적절한 크기의 전자 워터마크 신호를 생성한다. 또한, 출력 버퍼(212)는 전자 워터마크가 매립된 콘텐츠가 네트워크(206)를 통해서 제공될 때까지의 동안, 전자 워터마크가 매립된 콘텐츠를 일시적으로 유지한다.

이 때문에, 실시간 콘텐츠의 취득에서부터, 전자 워터마크가 매립된 콘텐츠가 네트워크(206)로 송출될 때까지는 통상, 최대 수백 ms의 시간 지연이 생성된다. 또한, 실시간 콘텐츠는 반드시 생성 수단(204)을 통과할 필요가 있다. 이 때문에, 도 22에 도시한 시스템에 의해 전자 워터마크를 매립하여 콘텐츠를 제공하는 경우에, 전자 워터마크 매립 장치(200)를 구성하는 요소 중 어느 하나에 장해가 발생하면, 콘텐츠의 제공이 불가능하다는 문제점이 생긴다. 또한, 콘텐츠의 제공이 불가능하지 않더라도, 콘텐츠의 제공에 있어서 이상 음 ·이상 화상이 추가되어, 콘텐츠 제공의 품질을 저하시킨다고 하는 문제점도 있다.

또한, 도 22에 도시한 종래의 전자 워터마크 생성 장치에서는, 클래식 콘서트와 같이, 연주가 관객에게 도달할 때까지의 사이에 한번도 녹음 ·녹화되지 않는 콘텐츠에 대하여 전자 워터마크를 매립할 수 없다고 하는 문제점이 있다. 나아가서는, 실제의 연주와 같은 아날로그 신호에서 디지털 신호로 변환하는 ADC를 포함하고 있기 때문에, 잡음이 필연적으로 생성되어 실시간 콘텐츠의 품질이 저하된다는 문제점도 생긴다.

도 23은 도 22에 도시한 전자 워터마크 매립 장치에 의해 발생하는 문제점을 개선하기 위한 대체 장치를 도시한다. 도 23에 도시하는 전자 워터마크 매립 장치(214)는 실시간 콘텐츠를 디지털 방식으로 취입하기 위한 취입 수단(202)의 출력이 생성 수단(216)과 지연 수단(218)에 대하여 병렬적으로 입력된다. 생성 수단(216)은 전자 워터마크 계산 수단(210)에 의해 산출된 WM 신호만을 출력한다. 지연 수단(218)의 출력과, 출력 버퍼(212)의 출력은 믹서와 같은 매립 수단(222)에 입력되어, 실시간 콘텐츠에 대하여 WM 신호를 매립할 수 있게 된다. 도 23에 도시한 장치(214)는 또한 상술한 바와 같이 사용자에게 도달할 때까지 한번도 녹음 ·녹화되지 않는 콘텐츠에 대해서는 대응할 수 없다. 또한, 계산된 WM 신호의 콘텐츠에 대한 시간 지연은 개선할 수 있지만, 콘텐츠 자체에 지연을 생기게 되고, 또한 지연 수단(218)의 고장에 의해, 콘텐츠의 제공이 중단되게 되는 문제점이 있다.

전술한 문제점을 해결하기 위해서, 도 23에 도시된 지연 수단을 제공하지 않고서, 생성된 WM 신호와 콘텐츠의 정보를 가산하는 전자 워터마크 매립 장치도 생각할 수 있다. 그런데 지연 수단을 사용하지 않는 경우에는 실시간 콘텐츠에는 시간적 지연은 생기지 않지만, WM 신호 산출을 위한 시간만큼, 실시간 콘텐츠와 WM 신호 사이에 시간차가 생기게 되어, 결국 또 다른 문제를 일으키게 된다. 도 24에는 도 23에 도시한 전자 워터마크 생성 장치에서의 전술한 새롭게 생성되는 문제점을 나타낸다.

도 24는 횡축을 시간축으로 하여 실시간 콘텐츠의 시간적 변화와, 산출된 WM 신호의 매립 타이밍을, 도 24에 도시한 시스템(214)을 사용한 경우를 예로 들어 나타낸 도면이다. 도 24에 도시한 바와 같이, 예컨대 시각(t₁)에 있어서 실시간 콘텐츠가 생성 수단에 받아들여진 것으로 한다. 실시간 콘텐츠는 연주 등의 상황에 따라서, 그 진폭이 시간적으로 변동하고, 도 24에 도시한 실시형태에서는, 시간(t₄)을 넘어 진폭이 감소해 간다. 한편, WM 신호는 입력 버퍼링 및 출력 버퍼링과 같은 처리에 더하여, 심리 청각 모델을 사용한 불가청량(不可聽量) 또는 불가시량(不可視量)의 계산 등에 의해 생성되기 때문에, 계산에 사용된 실시간 콘텐츠의 샘플링 프레임(t₁-t₂)으로부터 WM 신호 계산을 위한 지연 시간(t₄-t₂)분만큼 시간적으로 틀어져 매립되게 된다.

이 때에, 실시간 콘텐츠를 이용하여 WM 신호를 생성하는 방법을 채용하는 경우에는, 지연 시간후의 실시간 콘텐츠의 강도에 따라서는 전자 워터마크의 검출이 불가능하게 되거나, 불가능하지 않더라도 곤란해 진다는 문제점이 생긴다. 이하, 상술한 문제점을, 본 발명에서는 전자 워터마크의 검출 가능성을 내성으로서 참조한다. 또한, 실시간 콘텐츠의 진폭을 사용하여, WM 신호의 진폭을 조정하여 매립을 하는 방법을 사용하고 있는 경우에는, 도 24에 도시한 종래예의 경우에는 WM 신호가 들리게 되어 버린다고 하는 문제점도 발생한다. 이하, 본 발명에서는 상술한 WM 신호와 실시간 콘텐츠 사이의 진폭 어긋남을 품질로서 참조한다.

도 1은 본 발명의 WM 신호 생성 장치를 도시한 도면이다.

도 2는 본 발명의 WM 생성 처리의 흐름도이다.

도 3은 본 발명의 예측 수단의 상세한 기능 블록도이다.

도 4는 본 발명에 따른 지연 시간후의 강도 예측의 실시형태를 도시한 도면이다.

도 5는 본 발명에 따른 비디오 신호의 지연 시간후의 휘도를 예측하는 예측부의 기능 블록도이다.

도 6은 본 발명에 따른 타일 분할의 실시형태를 도시한 도면이다.

도 7은 본 발명에 따른 휘도 예측의 실시형태를 도시한 도면이다.

도 8은 본 발명에 따른 비디오 신호를 처리하기 위한 판단 수단의 기능 블록도이다.

도 9는 본 발명에 따른 오디오 신호에 대한 출력 WM 신호 생성의 처리를 도시한 흐름도이다.

도 10은 본 발명에 따른 출력 WM 신호 생성의 다른 실시형태를 도시한 도면이다.

도 11은 본 발명에 따른 출력 WM 신호 생성의 또 다른 실시형태를 도시한 도면이다.

도 12는 본 발명에 따른 비디오 신호에 대한 출력 WM 신호 생성의 처리를 도시한 흐름도이다.

도 13은 본 발명의 WM 신호 생성 장치의 다른 실시형태를 도시한 도면이다.

도 14는 도 13에 도시한 WM 신호 생성 장치의 처리를 도시한 흐름도이다.

도 15는 본 발명의 전자 워터마크 매립 장치의 실시예를 도시한 도면이다.

도 16은 본 발명의 전자 워터마크 매립 장치의 다른 실시예를 도시한 도면이다.

도 17은 본 발명의 전자 워터마크 매립 장치의 또 다른 실시예를 도시한 도면이다.

도 18은 본 발명의 전자 워터마크 매립 장치의 또 다른 실시예를 도시한 도면이다.

도 19는 본 발명의 전자 워터마크 매립 장치의 또 다른 실시예를 도시한 도면이다.

도 20은 본 발명의 전자 워터마크 매립 장치의 또 다른 실시예를 도시한 도면이다.

도 21은 본 발명의 전자 워터마크 매립 장치를 포함하는 디지털 텔레비전 장치의 실시형태를 도시한 도면이다.

도 22는 종래의 전자 워터마크 매립 장치의 개략 블록도이다.

도 23은 종래의 전자 워터마크 매립 장치의 개략 블록도이다.

도 24는 WM 신호 생성에 의한 시간 지연의 관계를 도시한 도면이다.

본 발명은, 상술한 종래 기술의 내성 및 품질을 향상시키기 위해서, 내성의 저하를 생기게 하는 요인과, 품질의 저하를 생기게 하는 원인을 분리하여 대처함으로써, 종래의 시스템에의 문제점을 해결할 수 있다 인식 하에서 이루어진 것이다. 즉, 본 발명에서는 실시간 콘텐츠와 WM 신호의 매립 타이밍 간의 시간 지연은 불가피한 것으로, WM 신호를 매립할 때에, 실시간 콘텐츠를 분할하고, 분할된 실시간 콘텐츠를 사용하여 위상 및 음량, 휘도와 같은 지각 자극치의 변화를 시간적으로 예측하여, WM 신호의 강도를 산출함으로써, 내성 및 품질을 개선할 수 있다고 하는 인식 하에서 이루어진 것이다. 또한, 예측 처리에 사용되지 않는 실시간 콘텐츠는 WM 신호 생성과는 독립적으로 사용자에 대하여 제공된다.

즉, 실시간 콘텐츠의 음량이나 휘도와 같은 지각에 대한 자극치는 음악이든, 동화상이든, WM 신호 생성에 필요한 시간 범위에서, 어느 정도 예측 가능한 관계로 변화된다. 본 발명은 WM 신호를 매립하는 대상인 실시간 콘텐츠의 과거의 시간적 변화에 주목하여, 과거의 시간 변화를 사용하면, 지연 시간 정도 후의 실시간 콘텐츠 강도의 장래 예측을 양호하게 행할 수 있음을 인식함으로써 이루어진 것이다.

또한, 본 발명의 내성은 WM 신호를 비밀키를 사용하여 매립할 때에, 비밀키로부터 일정한 규칙을 사용하여 매립치를 생성하고, 생성된 매립치를 사용하여 WM 신호의 신호 강도를 제어함으로써, 양호하게 내성을 향상시킬 수 있다. WM 신호의 매립은 매립치의 부호에 따라서, 예컨대 매립치가 마이너스인 경우에는, WM 신호 강도를 0으로 하고, 매립치가 플러스일 때에만 넌제로(non-zero)의 WM 신호를 매립함으로써 이루어진다. 또한 WM 신호의 매립 위상은 시간 지연이 발생하는 것이 전제가 되기 때문에, 실시간 콘텐츠 신호의 위상에 의존하는 일없이 랜덤하게 가해질 수 있다. 본 발명에 의해 WM 신호를 매립함으로써, 비밀키와, 메시지의 비트와, 유사 난수와 같은 정보를 사용하여, 시간 지연의 생성에서부터 독립적으로 내성을 향상시키는 것이 가능해진다.

즉, 본 발명에 따르면, 실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 장치로서, 상기 실시간 콘텐츠를 입력하는 입력 수단과, 상기 실시간 콘텐츠를 유지하는 입력 버퍼와, 상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하기 위한 생성 수단과, 상기 생성된 출력 WM 신호를 유지하기 위한 출력 버퍼를 포함하고, 상기 생성 수단은 상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하기 위한 예측 수단과, 상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 제어 수단과, 상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하기 위한 수단을 포함하는 WM 신호 생성 장치가 제공된다.

본 발명에서는, 상기 지각 자극치는 음향 또는 휘도이며, 상기 예측 수단은 상기 입력 버퍼에 유지된 데이터를 사용하여 상기 소정 시간후의 실시간 콘텐츠의 강도에 대응한 예측 불가청량 또는 예측 불가시량의 WM 신호를 생성할 수 있다. 본 발명에 있어서 상기 제어 수단은 비밀키와, 상기 메시지와, 유사 랜덤수를 사용하여, 플러스/마이너스의 2치화된 매립치를 생성하는 수단을 포함할 수 있다. 또한 본 발명의 상기 WM 신호 생성 장치는 또한 상기 생성된 WM 신호를 매립하는 시간 경과후의 실시간 콘텐츠와, 상기 생성된 WM 신호를 비교하여, 상기 출력 버퍼의 출력을 제어하는 출력 제어 수단을 포함할 수 있다. 본 발명에 있어서 상기 입력 수단은 상기 실시간 콘텐츠를 분할하여 입력하는 수단을 포함하고, 상기 생성 수단은 그 분할된 실시간 콘텐츠를 사용하여 WM 신호를 생성할 수 있다.

본 발명에 따르면, 실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 방법으로서, 상기 실시간 콘텐츠를 입력하는 단계와, 실시간 콘텐츠를 유지하는 단계와, 상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하는 단계와, 상기 생성된 출력 WM 신호를 유지하는 단계를 포함하고, 상기 생성 단계는 상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하는 단계와, 상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 단계와, 상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하는 단계를 포함하는 WM 신호 생성 방법이 제공된다.

본 발명에 따르면, 실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 방법을 컴퓨터에 대하여 실행시키기 위한 컴퓨터 실행 가능한 프로그램으로서, 이 프로그램은 컴퓨터에 대하여, 입력된 상기 실시간 콘텐츠를 유지하는 단계와, 상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하는 단계와, 상기 생성된 출력 WM 신호를 유지하는 단계를 포함하고, 상기 생성 단계는 상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하는 단계와, 상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 단계와, 상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하는 단계를 포함하는 WM 신호 생성 방법을 실행시키기 위한 프로그램이 제공된다.

본 발명에 따르면, 실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 방법을 컴퓨터에 대하여 실행시키기 위한 컴퓨터 실행 가능한 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체로서, 상기 프로그램은 컴퓨터에 대하여, 입력된 상기 실시간 콘텐츠를 유지하는 단계와, 상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하는 단계와, 상기 생성된 출력 WM 신호를 유지하는 단계를 실행시키고, 상기 생성 단계는 상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하는 단계와, 상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 단계와, 상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하는 단계를 포함하는 것인 WM 신호 생성 방법을 실행시키기 위한 프로그램이 기억된 컴퓨터 판독 가능한 기록 매체가 제공된다.

본 발명에 따르면, 실시간 콘텐츠에 대하여 전자 워터마크를 매립하기 위한 장치로서, 상기 실시간 콘텐츠를 입력하는 입력 수단과, 상기 실시간 콘텐츠를 유지하는 입력 버퍼와, 상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하기 위한 생성 수단과, 상기 생성된 출력 WM 신호를 유지하기 위한 출력 버퍼와, 상기 생성된 WM 신호를 수신하여, 상기 실시간 콘텐츠에 매립하기 위한 매립 수단을 포함하고, 상기 생성 수단은 상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하기 위한 예측 수단과, 상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 제어 수단과, 상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하기 위한 수단을 포함하는 것인 전자 워터마크 매립 장치가 제공된다.

본 발명에 따르면, 실시간 콘텐츠에 대하여 전자 워터마크를 매립하기 위한 장치를 포함하는 디지털 텔레비전 장치로서, 디지털 방송을 수신하고, 디코딩하여 실시간 콘텐츠를 생성하기 위한 수단과, 생성된 실시간 콘텐츠를 표시하기 위한 표시 수단과, 상기 디코딩된 실시간 콘텐츠에 대하여 전자 워터마크를 매립하기 위한 전자 워터마크 매립 장치를 포함하고, 상기 전자 워터마크 매립 장치는 상기 실시간 콘텐츠를 입력하는 입력 수단과, 상기 실시간 콘텐츠를 유지하는 입력 버퍼와, 상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하기 위한 생성 수단과, 상기 생성된 출력 WM 신호를 유지하기 위한 출력 버퍼와, 상기 생성된 출력 WM 신호를 수신하여, 상기 실시간 콘텐츠에 매립하기 위한 매립 수단을 포함하고, 상기 생성 수단은 상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하기 위한 예측 수단과, 상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 제어 수단과, 상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하기 위한 수단을 포함하는 것인 디지털 텔레비전 장치가 제공된다.

본 발명의 디지털 텔레비전 장치에 있어서, 상기 전자 워터마크 매립 장치는 디지털 텔레비전 장치의 외부 부착 장치이거나 또는 상기 디지털 텔레비전 장치의 내부에 포함되는 것이 바람직하다. 본 발명에 있어서 상기 입력 수단은 상기 실시간 콘텐츠를 분할하여 입력하는 수단을 포함하는 것이 바람직하며, 상기 제어 수단은 상기 메시지와 비밀키를 사용하여 매립을 제어하는 것이 바람직하다.

이하, 본 발명을 도면에 도시한 실시형태를 참조하여 상세히 설명하지만, 본 발명은 후술하는 실시형태에 한정되는 것이 아니다.

도 1에는 본 발명의 WM 신호 생성 장치의 기능 블록도를 도시한다. 도 1에 도시한 본 발명의 WM 신호 생성 장치(10)는 실시간 콘텐츠를 입력하기 위한 입력 수단(12)과, 입력 수단(12)에 의해 취득한 실시간 콘텐츠를 연속적으로 처리하기 위한 입력 버퍼(14)와, 입력 버퍼(14)에 축적된 데이터를 사용하여 지연 시간후의 WM 신호를 예측하기 위한 예측 수단(16)과, 생성된 강도의 WM 신호를 출력 전에 축적해 두기 위한 출력 버퍼(18)와, 매립치를 생성하여 WM 신호의 값을 제어하는 제어 수단(20)과, 매립치를 사용하여 출력 WM 신호를 생성하는 WM 신호 생성 수단(22)을 포함하도록 구성된다. 예측 수단(16), 제어 수단(20) 및 WM 신호 생성 수단(22)은 본 발명에 있어서 최종적으로 매설되는 출력 WM 신호를 생성하기 위한 기능을 갖는 생성 수단을 구성한다.

입력 수단(12)에는 생연주, 생방송 등의 데이터가 실시간 콘텐츠로서 입력된다. 이 입력 수단(12)은 실시간 콘텐츠의 분할 수단으로서 기능하며, 실시간 콘텐츠를, ADC와 같은 수단을 사용하여 디지털화하여, 분할한 후 입력 버퍼(14)로 보낸다. 입력 버퍼(14)는 수신한 데이터를 적절한 처리 프레임분마다 기억하여, 예측 수단(16)에 전달한다. 입력 버퍼(14)는 실시간 콘텐츠에 대하여 연속적으로 WM 신호를 제공하는 동시에, 실시간 콘텐츠의 강도의 시간적인 예측을 제공할 수 있도록, 적어도 1 프레임분 이상의 실시간 콘텐츠를 유지할 수 있도록 구성되어 있다.

예측 수단(16)은 데이터가 오디오 데이터인 경우에는 심리 청각 모델 등을 사용하여, 소정의 지연 시간후의 WM 신호의 강도를 예측한다. 또한, 예측 수단은 실시간 콘텐츠가 화상 데이터인 경우에는, 예컨대 화상 데이터를 타일형의 직사각형 영역으로 분할하고, 타일마다의 휘도를 예측하여, 휘도에 따른 신호를 생성시킴으로써, WM 신호를 예측한다. 제어 수단(20)에 의해 생성되는 매립치는 WM 신호의 예측치를 실시간 콘텐츠에 그대로 더하거나, 또는 강도가 0이 되도록 제어되어, WM 신호 생성 수단(22)에 있어서 출력 WM 신호로서 생성된다. 출력 WM 신호는 출력 버퍼(18)에 일단 유지되고, 그 후, 믹서, 마이크로폰, 프로젝터와 같은 매립 수단(24)에 의해, 실시간 콘텐츠에 대하여 매립된다.

본 발명에 있어서 실시간 콘텐츠에 대한 WM 신호의 매립은 생연주 등의 오디오에 대해서는 증폭기 및 스피커와 같은 음향 발생 장치를 사용해서 WM 신호에 대응하는 오디오 신호를 생성하여 이루어질 수 있다. 또한, 생방송, 영화 등의 경우에는 비디오 신호를 위한 믹서 등을 사용하여 이루어질 수 있다. 또한, 오디오 신호와, 비디오 신호의 양방에, 각각 WM 신호를 매립할 수도 있다.

여기서, 입력된 실시간 콘텐츠가 입력 버퍼(14)에 받아들여져, 출력 버퍼(18)로부터 출력 WM 신호로서 출력될 때까지 필요한 시간 지연에 대해서 상세히 설명한다. 본 발명에서 오디오 데이터를 예로 들어 설명하면, CD 음질로 재생하는 경우에는 44.1 kHz의 주파수가 사용되며, 예컨대 1 프레임이 1024 샘플로 구성된다고 한다면, 입력 버퍼(14)에 있어서는, 오디오 데이터를 축적하기 위해서, 적어도 23.2 ms의 시간이 필요하다. 또한, 후술하는 심리 청각 모델을 사용하여 DFT 및 마스크량을 계산해서 WM 신호를 작성하기 위해서 필요한 시간은 전형적으로는 1024 샘플의 데이터를 사용하여 약 3.7 ms가 필요하다. 출력 버퍼(18)에 대해서도 압력 버퍼와 마찬가지로, CD 음질의 재생을 고려하면 입력 버퍼와 같은 정도인 23.2 ms의 지연 시간이 발생한다.

따라서, WM 신호는 실시간 콘텐츠에 매립될 때까지, 적어도 약 50 ms 정도, 또 기타 ADC 등의 지연이 있는 경우에는 100 ms 정도의 시간 지연이 상정된다. 따라서, 특히 품질을 고려하면, 대강 100 ms 정도 후의 신호 강도를 예측할 필요가 있다. 또, DVD 음질로 콘텐츠를 제공하는 경우에는 96 KHz에서의 입력 및 출력이 필요하게 되는데, 이 경우에도 약 50 ms∼100 ms 사이의 실시간의 데이터를 예측함으로써 충분히 대응할 수 있다.

본 발명에 있어서의 예측 수단(16)은 실시간 콘텐츠의 시간적 발전을 예측하여, 강도가 조정된 WM 신호를 산출한다. 실시간 콘텐츠의 시간적 발전의 예측은 WM 신호를 생성하기 위해서 사용하는 실시간 콘텐츠의 프레임의 시간적 거동을, 예컨대 프레임의 시간 간격으로 적절한 함수를 사용하여 외부 삽입 등을 함으로써 실행되어, 출력 WM 신호가 매립되는 시간에 있어서의 가중치를 산출한다. 이 가중치를 심리 청각 모델을 사용하여 얻어진 WM 신호에 곱하여, WN 신호의 강도에 오리지널 콘텐츠의 시간적 발전을 반영한다.

본 발명에 있어서 예측을 위해 지수 함수, 선형 함수, 삼각 함수 등을 이용할 수 있으며, 그 외 어떤 함수도 이용할 수 있다.

또한, 본 발명에 있어서의 제어 수단(20)은 비밀키 및 전자 워터마크로서 매립하기 위한 메시지를 유지하고 있으며, 비밀키 및 WM 신호를 생성하기 위한 메시지의 비트를 사용하여, 매립치를 생성한다. 생성된 매립치는 예측 수단(16)에 의해 생성된 신호의 매립 판단을 위해 사용된다. WM 신호 생성 수단(22)은 매립치에 기초하여 출력 WM 신호를 생성한다. 출력하는 WM 신호는 출력 버퍼(18)에 축적된 후, 매립 수단(24)으로 보내진다. 매립 수단(24)에는 실시간 콘텐츠도 입력되어, 생성된 출력 WM 신호의 매립이 이루어진다. WM 신호가 매립된 매립이 끝난 콘텐츠는 적절한 매체를 통해서 사용자에게 제공되어, 만일 사용자가 위법으로 복사하여 CD나, 인터넷을 통해 영업 목적으로 제공한 경우에도, 위법 복사임을 증명하는 것이 가능하게 된다.

도 2는 본 발명의 WM 신호 생성 장치에 있어서의 처리를 도시한 흐름도이다. 본 발명의 WM 신호 생성 처리는 단계 S10에서, 입력 장치로부터 실시간 콘텐츠를 샘플링하여, 입력 버퍼에 유지시킨다. 단계 S12에서, 예측 수단을 사용하여 지각 자극치의 지연 시간후의 강도를 예측한다. 단계 S14에서 비밀키 및 메시지를 사용하여 WM 신호의 매립을 제어하기 위한 매립치를, 제어 수단을 사용하여 생성한다. 이 매립치(S)는 본 발명에 있어서 +1 또는 -1의 플러스/마이너스의 2치를 취한다. 이 매립치는 출력 WM 신호 생성 수단으로 보내어져, WM 신호의 출력을 제어하기 위해서 사용된다. 구체적으로는, 단계 S16에서, 제어 수단에 의해 생성된 매립치(S)가 0보다도 큰지의 여부를 판단하여, 매립치(S)가 0보다도 큰 경우(예)에는 단계 S18에서 예측치를 사용하여, 출력 WM 신호를 생성한다. 또한, S가 0보다도 작은 경우(아니오)에는 단계 S20에서 예측치를 사용하지 않고서 0의 신호 강도의 출력 WM 신호를 생성한다. 그 후 주파수 영역의 출력 WM 신호를 시간 영역의 출력 WM 신호로 변환하여, 예컨대 출력 버퍼에 유지시켜, 단계 S22에서 매립 수단으로 출력하여 매립한다.

이하, 본 발명의 특히 예측 수단(16), 제어 수단(20), WM 신호 생성 수단(22)에 있어서 실행되는 처리에 관해서 설명한다.

A. 예측 수단의 상세 구성과 처리

(A-1) 오디오 신호에 대한 WM 신호의 예측 및 그 처리

예측 수단(16)에 있어서는, 입력 버퍼(14)에 유지된 실시간 콘텐츠의 데이터를 사용하여, (1) 심리 청각 모델을 사용한 WM 신호 생성 및 (2) 오리지널 콘텐츠의 시간 발전을 예측한 WM 신호의 가중치 계산을 포함하는, 품질 향상을 위한 처리를 실행한다. 도 3은 본 발명에 있어서 오디오 신호에 대하여 WM 신호를 생성하기 위해서 사용할 수 있는 예측 수단(16)의 상세 구성을 도시한 도면이다. 도 3에 도시한 예측 수단(16)은 주파수 해석 수단(30)과, 에너지 해석 수단(32)과, 강도 ·주파수 예측 수단(34)과, 불가청량 계산 수단(36)을 포함하도록 구성된다.

주파수 해석 수단(30)은 입력 버퍼(14)로부터 처리 프레임분만큼 데이터를 받아들여, 주파수 해석을, 푸리에 변환, 코사인 변환, 웨이브렛 변환 등을 사용하여 실행한다. 본 발명에서 처리 프레임은 입력 버퍼(14)에서의 1 프레임의 샘플수와 같으며, 예컨대 1024 샘플로 할 수 있다. 또한, 처리 프레임의 샘플수는 처리 능력에 따라서, 512 샘플 또는 2048 샘플을 사용할 수 있다.

또한, 에너지 해석 수단(32)은 주파수 해석 수단(30)에 의해 얻어진 주파수 해석의 결과를 사용하여, 각 주파수 성분(ω)의 진폭 x@yf, ω@z의 제곱합을 처리 프레임을 단위로 하여 산출하여, 그 주파수 성분(ω)의 에너지로 한다. 여기서, f는 처리 프레임의 번호이며, ω는 주파수 성분이다. 얻어지는 프레임 f의 주파수대 b의 에너지를 E@yf, b@z로서 나타내면, 하기 식으로 에너지 E@yf, b@z를 얻을 수 있다.

상기 식 (1) 중에서, Band(b)는 주파수대 b에 포함되는 주파수 성분의 집합이다. 본 발명에서는, 주파수대마다의 에너지는 상술한 제곱합이 아니라, 단순한 진폭의 합으로서 산출할 수도 있으며, 또한 이들 이외의 어떠한 기법에 의해서도 에너지를 얻을 수 있다.

강도 ·주파수 예측 수단(34)은 예컨대 버퍼 메모리를 포함하도록 구성되어 있고, 현재 처리하고 있는 프레임 f를 사용하여, 다음 프레임 (f+1)의 강도 ·주파수 예측을 실행한다. 도 4에는 강도 ·주파수 예측 수단에 있어서의 프레임 간의 관계를 도시한다. 도 4는 횡축을 시간으로 하고, 종축을 음압으로 하여, 처리 프레임과, 실시간 콘텐츠의 진폭과의 관계를 나타내고 있다. 현재 처리하고 있는 프레임은 f 프레임이며, 예측해야 하는 프레임은 (f+1)이다. 도 4에 도시한 바와 같이 본 발명에 있어서는, 각 주파수마다의 시간 발전을 지수 함수, 선형 함수 또는 삼각 함수 등을 사용하여 예측하여, 가중치를 산출할 수 있다. 도 4에는 주파수대마다 에너지로부터 얻어지는, 지수 함수를 사용한 피팅 곡선(fitting curve)이 FC로 나타내어져 있다. 또한, 본 발명에서는, 특히 하나의 처리 프레임으로부터 예측하는 것이 아니라, 2개의 처리 프레임을 연속하여, 보다 고정밀도의 시간 전개로부터, 예측할 수도 있다.

지수 함수를 사용해서 예측하는 경우에는, 가중치 계수는 하기 식(2)에 의해 주어지며, 예측을 선형 함수를 사용하여 행하는 경우에는 하기 식(3)으로 제공될 수 있다.

상기 식(3)에 있어서, 예측치가 마이너스가 된 경우에는, 제로를 사용한다. 또한, 주파수 성분의 예측은 얻어진 에너지의 예측치를 사용하여, 하기 식(4), 또는 보다 간소하게 하기 식(5)에 의해 주어진다.

상기 식에서, ω은 주파수대 Band(b)를 구성하는 주파수 성분이다. 또한, ｜Band(b)｜는 집합 A의 사이즈를 나타낸다.

그 후, 생성된 주파수 성분의 예측치를 사용하여, 불가청량 계산 수단(36)은 인간에게는 들리지 않을 정도의 WM 신호의 크기(a_ω)를 각 주파수 성분마다 계산한다. 본 발명에서는, 심리 청각 모델 자체를 요지로 하는 것이 아니기 때문에 상세한 설명은 생략하지만, 심리 청각 모델을 위한 기법으로서는, 예컨대 전술한 종래 기술을 참조할 수 있다. 또한, 본 발명의 다른 실시형태에서는 진폭뿐만 아니라, 위상도 예측할 수 있다.

(A-2) 비디오 신호에 대한 WM 신호 예측 및 그 처리

비디오의 경우에도 대강 같은 처리를 사용할 수 있다. 도 5에는 본 발명에 있어서 비디오 신호에 대한 예측 수단(16)의 상세 구성을 도시한다. 이하, 본 발명에 있어서 비디오 신호에 대하여 강도 예측에 기초찬 WM 신호를 생성하는 처리에 관해서 설명한다. 입력 버퍼(14)로부터 입력된 비디오 프레임은 종횡으로 화소가 배치되어, 각각의 화소에 대하여 휘도가 대응하는 3차원 데이터로서 타일 분할 수단(40)에 입력된다. 도 6에는 본 발명에 있어서 행하는 타일 분할의 실시형태를 도시한 도면이다. 타일 분할 수단(40)은 도 6에 도시된 바와 같이, 비디오 프레임을 소정 사이즈의 타일로 분할하고, 타일에 포함되는 화소를 선택하여, 화소의 좌표 및 휘도(x, y, c)를 특정한다.

각각의 타일에 포함되는 화소가 특정된 후, 휘도 해석 수단(24)에 의해 타일 내에서의 휘도 분포의 해석을 타일마다 휘도 평균을 산출하여, 타일마다 평균 휘도(Tav)를 생성함으로써 실행한다.

휘도 유지 수단(44)에는 이미 처리한 프레임의 동일 타일에서의 평균 휘도(Tavf)가 유지되어 있고, 프레임마다의 소정의 타일(T)에 관한 평균 휘도의 변화를 적절한 함수를 사용하여, 외부 삽입 또는 피팅함으로써, WM 신호가 매립되는 시간 지연후의 실시간 콘텐츠의 평균 휘도에 대한 가중치를 예측한다. 그 처리를, 선형 예측에 의해 행하는 경우의 실시형태에 대해서, 도 7에 도시한다. 오디오 신호의 경우와 마찬가지로, 제로보다도 작은 값이 예측된 경우에는 제로를 사용한다.

불가시량 계산 수단(46)에서는, 예측된 가중치의 값을 사용하여, 불가시량(a_t)을 산출하여, 출력한다. 또한, 프레임 f 및 과거의 프레임의 휘도 분포를 해석하여, 이미지가 줌 중인지, 또는 팬(pan) 중인지, 또는 정지 중인지를 판정할 수 있다. 이를 위해서, 본 발명에서는 움직임 벡터 검출 방법을 사용할 수 있다. 이 경우, 줌 중이라면, 그 시점에서 처리해야 하는 프레임에 관한 변조량에 대해서도 줌에 대응하도록 증가 ·감소시킨다. 또한, 팬 중이라면, 변조량에 대해서도 팬을 행하고, 정지 중인 경우에는 변조량에 대해서 특별히 변경을 가하지 않는다. 또한, 본 발명에 있어서는 줌 또는 팬의 검출을 위해, 타일마다의 휘도가 아니라, 픽셀마다 휘도를 이용한 쪽이 정밀도적으로는 향상되지만, 계산량도 증가하기 때문에, WM 신호 매립을 위한 시간 지연을 고려하면, 시스템 능력에 따라서 적절하게 설정할 수 있다.

B. 제어 수단의 상세 구성 및 그 처리

(B-1) 오디오 신호에서의 WM 신호 생성의 처리

도 8은 본 발명에 있어서 채용하는 제어 수단(20)의 상세한 기능 블록도이다. 도 8에 도시한 바와 같이, 본 발명에 있어서 오디오 신호에 대하여 WM 신호를 매립하기 위한 매립치를 생성하는 제어 수단(20)은 매립해야 하는 메시지를 유지하는 메시지 유지 수단(50)과, 비밀키 유지 수단(52)과, 매립치 생성 수단(54)을 포함하도록 구성된다. 이들의 정보와, 유사 난수(+1, -1)를 사용하여 매립되는 비트마다 매립치(S)를 생성한다. 생성된 매립치(S)는 WM 신호 생성 수단(22)으로 보내어져, 출력 WM 신호를 생성하기 위해서 사용된다. 한편, 본 발명에 있어서는 전자 워터마크에 대해, 비밀성이 그다지 중요하지 않은 경우에는 비밀키를 사용하지 않고서 WM 신호를 생성할 수도 있다. 그 때에도 후술하는 절차는 마찬가지로 이용될 수 있다.

도 9는 본 발명의 WM 신호 생성을 위한 처리를 도시한 흐름도이다. 도 9에 도시한 바와 같이, WM 신호의 생성은 단계 S30에서, 주파수대마다 매립하는 메시지의 부호(1 또는 0)와, 그것에 대응하는 유사 랜덤수(-1 또는 1)를 판독한다. 단계 S32에서는, 판독된 매립 비트(mb)와, 유사 랜덤수(pr)를 사용해서, 하기 식을 이용하여 주파수대마다 다른 매립치(S)를 생성한다.

상기 식(6)으로 주어지는 매립치(S)는 +1 또는 -1을 취하는 값이다.

이어서, 단계 S34에서, 생성된 매립치(S)를 사용하여, WM 신호 제어를 한다. 단계 S34에서의 판단에 있어서 S가 플러스인 경우(예)에는 하기 식(7)로 나타내어지는 바와 같이 단계 S36에서 예측된 강도(a_ω)를 갖는 랜덤한 위상의 WM 신호를 생성하고, s가 마이너스인 경우(아니오)에는 단계 S38에서 0의 WM 신호를 생성한다.

상기 식(7)에서, θ_ω은 0∼2π까지의 랜덤한 값이다.

본 발명에 있어서는, 비밀키와, 전자 워터마크로서 매립하는 메시지의 비트와 유사 랜덤수를 사용하여, S에 의해 주어지는 주파수대마다의 매립 규칙을 생성하고, 또한 생성된 매립치가 마이너스인 경우에는 WM 신호(WM 신호를 매립하지 않음)의 크기를 0으로 하여, WM 신호와, 실시간 콘텐츠 사이에 시간 지연이 생긴 경우에도, WM 신호의 0의 주파수 성분을 마커로서 사용할 수 있어여, 내성을 향상할 수 있다.

그 후, WM 신호 생성 수단(22)은 상기 식(7)에 따라서 생성된 (a_ωexpθ_ω, 0)의 세트로서 구성되는 출력 WM 신호를, 역푸리에 변환하여, 주파수 영역에서의 WM 신호를 시간 영역의 WM 신호로 변환한다. 그 후, 단계 S40에서, 예컨대 출력 버퍼에 생성된 출력 WM 신호를 보내어, 실시간으로 제공되는 콘텐츠에 매립한다. 상술한 방법은 주파수 성분마다 품질 조정을 할 수 있지만, 역푸리에 변환을 필요로 하기 때문에, 시간 지연을 증가시키는 경우도 있다. 이 때문에, 본 발명의 다른 실시형태에서는 하기와 같이, 미리 WM 신호를 주파수 영역에 대해서 준비해 두는 방법을 이용할 수 있다.

도 10은 본 발명의 주파수 영역의 WM 신호를 미리 준비하는, 다른 실시형태의 매립 방법을 도시한 흐름도이다. 도 10에 도시한 바와 같이 단계 S50에서 미리 주파수 영역의 WM 신호를 생성하여, 적절한 메모리에 불가시량이 유지되어 있는 WM 신호는 주파수 영역에서, 하기 식(8)으로 제공될 수 있다.

상기 식에서, θ_ω은 0∼2π까지의 랜덤 값이다. 그 후, 단계 S52에서, 매립치를 계산하여, 단계 S54에서 적절한 메모리 등에 유지되어 있는 WM 신호의 크기 (a_ω)를 판독하여, 단계 S56에서 주파수 영역에서의 WM 신호를 하기 식(9)를 사용하여 생성한다.

그 후, 단계 S58에서 주파수 영역의 WM 신호를 시간 영역의 출력 WM 신호로 변환하여, 실시간 콘텐츠에 대한 매립을 행한다. 상기 식(9)에 나타낸 바와 같이, 본 발명의 다른 실시형태에서는, 어떤 프레임에 있어서도 공통된 n_ω를 사용하기 때문에, 고속화를 달성할 수 있다. 또한, 동일한 n_ω을 사용함으로써 WM 신호에 규칙적인 패턴이 생성되는 경우에는 품질상 문제를 생기게 할 가능성이 있다. 이러한 경우에는 다른 n_ω를 복수 준비해 두고, 프레임마다 다른 WM 신호를 사용할 수 있다.

또한, 본 발명의 다른 실시형태에서는, 보다 고속화를 달성하기 위해서 미리 시간 영역의 WM 신호를 생성해 두고, 역푸리에 변환을 실행시키지 않고서 WM 신호로서 매립하게 할 수 있다. 도 11에는 본 발명에서 상술한 다른 실시형태의 흐름도를 도시한다. 도 11에 도시된 바와 같이, 단계 S60에서, 시간 영역의 WM 신호를 역푸리에 변환하여 생성해 둔다. 그 후, 단계 S62에서, 비밀키, 메시지의 비트 및 유사 랜덤수를 사용하여 매립치(sb)를 산출한다. 그 후, 단계 S64에서 WM 신호의 진폭(a_ω)을 판독하고, 산출된 sb를 사용하여, 단계 S66에서 하기 식(10)에 따라서 시간 영역에서의 출력 WM 신호(zt)를 생성하여 매립한다.

상기 식에서, E_a,b는, 주파수대 b에 있어서의 비가청(非可聽) 에너지이며, E_n,b는 준비한 주파수대 b의 불가청량의 에너지로, 하기 식(11), (12)에 의해 제공된다.

도 11에 도시한 방법에 따르면, 주파수 영역으로부터의 역푸리에 변환이 불필요하게 되어, 고속화를 달성하는 것이 가능하다.

(B-2) 비디오 신호에 있어서의 WM 신호 생성 및 그 처리

비디오 신호에 관해서 본 발명을 적용하는 경우에도 도 9에 도시한 것과 같은 기능의 WM 신호 생성 처리를 사용할 수 있다. 비디오 신호로서는, 본 발명에서는 MPEG-2이나, 또한 고차 포맷의 비디오 신호를 사용할 수 있으며, 비디오 신호에 대하여 본 발명을 적용하는 경우에는, 예컨대 타일마다 부여하는 부호와, 유사 랜덤수를 정해 두고서, 비밀키를 사용하여 매립치(S)를 타일마다 산출하여, 불가시량을 가산 ·감산함으로써 전자 워터마크를 매립할 수 있다. 도 12는 본 발명을 비디오 신호에 적용하는 경우의 흐름도를 나타내고 있다.

도 12에 도시한 비디오 신호에 대하여 본 발명을 적용하는 처리는 단계 S70에서 비밀키 및 메시지의 매립 비트를 판독한다. 단계 S72에서는, 타일마다 유사 랜덤수와, 비밀키, 메시지의 비트 및 비트를 사용하여 매립수(S)를 산출하여, 단계 S74에서 매립수가 0보다 큰지의 여부를 판단하고, 단계 S76 및 단계 S78에서, S에 관련하여 0의 신호를 포함하는 WM 신호를 생성하여, 단계 S80에서 이들 신호를 출력 WM 신호로서 생성한다.

도 13은 본 발명의 WM 신호 생성 장치(10)의 다른 실시형태를 도시한 도면이다. 도 10에 도시한 WM 신호 생성 장치(10)는 실시간 콘텐츠를 분할하여 입력하기 위한 입력 수단(12)과, 입력 수단(12)에 의해 얻어진 실시간 콘텐츠를 연속적으로 처리하기 위한 입력 버퍼(14)와, 입력 버퍼(14)에 축적된 데이터를 사용하여 WM 신호를 장래적으로 예측하는 예측 수단(16)과, 생성된 WM 신호를 출력 전에 축적해 두기 위한 출력 버퍼(18)를 포함하도록 구성된다. 제어 수단(20)은 비밀키 및 메시지를 포함하고 있고, 도 1에서 설명한 바와 같이, 매립치(S)를 산출하여, WM 신호 생성 수단(22)에 매립치(S)를 보내고 있다.

WM 신호 생성 수단(22)에 의해 생성된 출력 WM 신호는 출력 버퍼(18)에 일단 보내어져, 유지된다. 또한, 도 13에 도시한 WM 신호 생성 장치(10)는 출력 제어 수단(26)을 포함하도록 구성된다. 이 출력 제어 수단(26)은 실시간 콘텐츠의 시간 발전으로부터 생성한 예측치와, 그 시점에서의 실시간 콘텐츠로부터, 예측치와 실시간 콘텐츠의 강도의 차분을 생성한다.

출력 제어 수단(26)에 의해 생성된 차분은 미리 불가청량 또는 불가시량을 고려하여 설정된 임계치와 비교되어, WM 신호와, 그 시점에서의 실시간 콘텐츠가 입력되며, 예측한 값이 불가청량 또는 불가시량으로서 타당한지의 여부를 판단하여, 타당한 경우에는 출력 버퍼(18)에 유지된 WM 신호를 출력하여, 실시간 콘텐츠에 대하여 전자 워터마크로서 매립을 행한다. 또한, WM 신호가 지나치게 큰 경우에는 매립 수단(24)으로의 출력을 중지시킴으로써, WM 신호를 매립하지 않는다. 또한, 본 발명에서는 적절한 감쇠 요인(attenuation factor)을 승산하여 적절한 불가청량으로 한 후, 출력하는 구성으로 할 수 있다.

도 14에는 본 발명의 도 13에서 나타낸 실시형태에서의 처리에 있어서 추가되는 처리의 흐름도를 도시한다. 도 14에 도시한 바와 같이, 단계 S90에서, 그 시점에서의 실시간 콘텐츠를 취득한다. 단계 S92에서는, 예측치와 그 시점에서의 콘텐츠의 강도의 차분을 산출한다. 단계 S94에서는 차분이 허용 범위 내에 있는지의 여부를 판단하여, 허용 범위 내라면(예), 단계 S96에서 출력 WM 신호를 매립한다. 또한, 차분이 허용 범위 내가 아닌 경우(아니오)에는 WM 신호를 매립하면 실시간 콘텐츠의 품질을 저하시키기 때문에, 출력 WM 신호를 매립하지 않는다.

본 발명의 도 13 및 도 14에서 도시한 실시형태를 사용함으로써, 부적절한 크기의 WM 신호가 매립되는 일이 없어져, 실시간으로 제공되는 콘텐츠의 품질을 더욱 향상시키는 것이 가능하다. 또한, 도 14에 도시한 예측치의 타당성을 판단하는 처리는 비디오 신호에 대하여 WM 신호를 매립하는 경우에도 적용할 수 있다.

이하, 본 발명의 WM 신호 생성 장치, 전자 워터마크 매립 장치 및 디지털 텔레비전 장치를, 도면에 도시한 구체적인 실시예를 가지고 설명한다.

(실시예 1) : 방송 설비에서의 이용

도 15에는 텔레비전이나, 라디오에서 생방송하는 콘텐츠의 저작권을 나타내기 위해서 사용되는 전자 워터마크 매립 장치의 실시예를 도시한다. 도 15에 도시한 실시예에서는 스튜디오 등에서 마이크로폰(70)을 사용하여 실시간 콘텐츠를 녹음한다. 녹음한 콘텐츠를 분할 수단으로서 이용되는 믹서(72)를 사용하여 2분할하여, 한 쪽의 마이크 출력을 믹서(74)에 입력한다. 다른 마이크 출력을 본 발명의 WM 신호 생성 장치(76)에 입력하여, 출력 WM 신호(78)를 생성한다. 출력 WM 신호(78)는 출력 제어 수단(26)에 의해 그 크기가 체크된 후, 믹서(74)에 입력된다. 입력된 출력 WM 신호는 그 시점에서의 실시간 콘텐츠에 대하여 매립되어, 매립이 끝난 콘텐츠(80)가 생성된다. 생성된 매립이 끝난 콘텐츠(80)는 적절한 통신 네트워크를 통해 사용자에게 제공된다. 도 15에 도시한 실시형태에 따른 네트워크로서는 지상파 통신, 위성 통신, 유선 네트워크 또는 인터넷 등을 사용할 수 있다.

본 발명의 도 15에 도시한 실시예에서, 믹서(74)가 WM 신호의 크기를 조정할 수 있다면, WM 신호 생성 장치(76)에 도 13 및 도 14에서 설명한 WM 신호의 크기를 판단하는 구성을 채용할 필요는 없다. 그러나, 도 15에 도시한 실시예에서도 WM 신호 생성 장치(76)로서, 도 13에 도시한 구성을 채용할 수 있다. 도 15에 도시한 실시예에 따르면, 스튜디오 등에서의 생연주, 생중계에 대하여 전자 워터마크를 부가하여 사용자에게 제공하는 것이 가능하다.

도 16은 콘서트장에서 본 발명의 전자 워터마크 생성 장치를 적용하는 경우의 실시예를 도시한 도면이다. 도 16에 도시된 실시예에서는 콘서트홀에서 연주되는 클래식 음악과 같이, 마이크로폰 등의 녹음 수단을 통하지 않고서, 직접 사용자에 대하여 콘텐츠가 제공된다. 이 때문에, 도 16에 도시한 실시예에서는 전자 워터마크 매립 장치(80)는 마이크로폰과 같은 입력 수단(14)과, 앰프, 스피커와 같은 오디오 신호 생성 장치(82)를 포함하도록 구성된다. 콘텐츠에 대하여 직접 전자 워터마크가 매립된다.

또한, 본 발명의 또 다른 실시예에서는, 오디오 신호 발생 장치(82)는 1대뿐만이 아니라, 각 연주자에게 하나씩 배치하는 것도 가능하다. 복수의 오디오 신호 발생 장치를 연주자에게 근접하여 배치하는 실시예에서는, 실시간 콘텐츠와 출력 WM 신호의 정합성을 보다 확실하게 보증할 수 있어, 품질 향상을 더욱 달성할 수 있다. 이 때, 복수의 출력 WM 신호가 시간적으로 틀어져 혼합해 버리면, 내성에 악영향을 주기 때문에, 복수의 오디오 신호 발생 장치(82)는 타이밍적으로 동기되는 것이 바람직하다.

도 17은 본 발명에서 부정 녹음을 특정하게 하는 것이 가능한 실시형태를 도시한 도면이다. 도 17에 도시한 실시예에 있어서, 클래식 음악이 실시간 콘텐츠로서 제공되고 있다고 가정한다. 또한, 좌석(S₀)에 앉아 있는 관객이 부정 녹음을 하고 있다고 가정한다. 좌석(S₀∼S₃)에는 콘서트홀에 고유의 식별 번호가 붙여져 있으며, 예컨대 식별 번호에 대응한 출력 WM 신호가 오디오 신호로서 소형 마이크로폰 등에 의해 관객의 근처로부터 제공되는 구성으로 되어 있다. 본 발명의 도 17에 도시한 실시예에서는 관객 각각에게 인접하여 배치한 전자 워터마크 매립 장치(84)에 의해 출력 WM 신호가 생성된다.

그러나, 본 발명의 도 17에 도시한 실시예의 다른 변경예에서는, 도 17에 도시한 바와 같이, 전자 워터마크 생성 서버(86)를 별도로 설치하여, 식별 번호에 대응한 WM 신호를 전자 워터마크 생성 서버(86)가 좌석마다 할당된 비밀키 또는 메시지를 사용하여, 좌석마다 출력 WM 신호를 생성할 수 있다. 좌석마다 생성된 출력 WM 신호는 좌석 등에 배치된 소형 마이크로폰으로 보내짐으로써, 관객마다 다른 출력 WM 신호의 제공이 가능하다.

도 17에 도시한 실시예는 좌석마다 다른 전자 워터마크를 매립함으로써, 부정 녹음한 사람이 후에 CD나 DVD에 기록하여 부정하게 판매한 경우에도, 부정 녹음한 사람을 추적하기 쉽다는 효과를 얻을 수 있다.

본 발명의 전자 워터마크 매립 장치는 영화관 등에 있어서 영사되고 있는 영상과 같은 실시간 콘텐츠의 저작권을 주장하기 위해서, 전자 워터마크를 매립하는 데에도 사용될 수 있다. 이하의 실시예에서는 실시간으로 제공되는 이미지 콘텐츠에 대하여 전자 워터마크를 매립하는 경우에 관해서 설명한다. 매립되는 메시지로서는, 오디오 신호와 마찬가지로, 상영장, 주최자 ·공동 주최자, 상영 내용, 상영 일시, 복사 조건 등으로 할 수 있다.

도 18에는 본 발명에서 전자 워터마크를 영상에 매립하는 경우의 실시예를 도시한다. 도 18에서 도시하는 본 발명의 특정한 실시예에서는, 프로젝터(88)로부터 오리지널의 이미지 콘텐츠를 재생하고 있다. 동시에 본 발명의 출력 WM 신호 생성 장치(90)에는 프로젝터(88)의 비디오 출력이 입력되어, 출력 WM 신호가 생성된다. 생성된 출력 WM 신호는 프로젝터(88)에 출력된다. WM 신호가 매립된 영상은 프로젝터(88)에서 스크린(92)으로 투영되어, 실시간으로 이미지 콘텐츠에 출력 WM 신호를 매립할 수 있다.

도 19에는 오리지널 이미지 콘텐츠의 비디오 출력을 뽑아낼 수 있지만, 믹서를 사용할 수 없는 경우의 실시예를 도시한다. 도 19에 도시한 실시예에서는 오리지널의 이미지 콘텐츠를 프로젝터(94)에서 스크린(92)에 투영하여, 사용자에 대하여 콘텐츠를 제공한다. 비디오 출력은 본 발명의 WM 신호 생성 장치(90)로 입력되어, 출력 WM 신호가 생성된다. 생성된 출력 WM 신호는 프로젝터(100)로 보내져, 프로젝터(100)로부터 스크린(92)으로 투영함으로써, 스크린(92) 상에서 전자 워터마크를 매립하는 것이 가능하다.

또한, 도 20에는 오리지널의 이미지 콘텐츠의 비디오 출력을 뽑아내는 것도, 믹서를 사용할 수도 없는 경우의 실시예를 도시한다. 도 20에 도시한 실시예에서는, 오리지널의 이미지 콘텐츠를 프로젝터(94)로부터 스크린(92)에 투영하여, 사용자에 대하여 콘텐츠를 제공한다. 스크린(92)에 투영된 콘텐츠는, 예컨대 비디오 카메라(102)에 의해 취득되어, 본 발명의 WM 신호 생성 장치(90)에 입력된다. 그 후, 본 발명의 방법에 의해 지연된 출력 WM 신호를 생성하여, 출력 WM 신호를 프로젝터(100)에서 스크린(92)으로 투영시킴으로써, 스크린 상에서 전자 워터마크를 매립하는 것이 가능하다. 상술한 바와 같이, 본 발명의 도 18∼도 20에 도시한 실시예에서는 객석에 부정하게 비디오 카메라를 가지고 들어가 녹화된 비디오 이미지에 대해서도 전자 워터마크를 매립할 수 있다.

도 21에는 디지털 텔레비전 장치로 사용자에 대하여 제공된 콘텐츠가 그 사용자에 의해 부정한 목적으로 녹화된 경우에 대응하는 실시형태를 도시한다. 도 21에 도시한 실시예에서는, 본 발명의 전자 워터마크 생성 장치는 디지털 텔레비전 장치에 인접하여 배치되는 외부 부착 장치(104)의 형태로 되어 있다. 디지털 통신 네트워크를 통해 안테나로부터 수신된 데이터는 튜너 디코더부(106)에서 튜닝 및 복호되어, 오류 정정 및 디멀티플렉서 등을 통해 텔레비전 모니터에 출력되는 콘텐츠(108)로 된다. 콘텐츠(108)는 믹서(110)에서 2분할되어, 본 발명의 WM 신호 생성 장치(112)에 입력된다. 도 18에 도시한 본 발명의 WM 신호 생성 장치(112)는 지금까지 설명한 방법에 의해, 오디오 신호 및 화상 신호에 대하여 출력 WM 신호(114)를 생성하여, 믹서(116)에 생성된 출력 WM 신호(114)를 보내, 콘텐츠(108)에 대하여 워터마크를 매립할 수 있게 된다. 도 21에 도시한 실시예에서는, 디지털 텔레비전 방송에 있어서 송신된 콘텐츠에 대하여 전자 워터마크를 매립함으로써, 사용자에 의한 부정한 녹화 또는 녹음을 식별할 수 있는 구성으로 되어 있다.

또한, 본 발명의 또 다른 실시예에서는, 특히 시간적으로 변동이 큰 실시간 콘텐츠뿐만 아니라, 미술관에 전시되어 있는 미술품에 대하여 프로젝터를 사용하여 전자 워터마크를 투영해 둠으로써, 미술품의 비디오 화상의 부정 취득을 방지하기 위해서도 사용할 수 있다. 또한, 본 발명은 인터넷 배신에 있어서의 스트리밍에 대하여 전자 워터마크를 실시간으로 매립하는 경우에도 적용할 수 있다.

본 발명에서 설명한 각 수단은 중앙처리장치(CPU), RAM, ROM 등의 메모리, 하드디스크와 같은 기억 수단 등을 포함하는 컴퓨터 또는 정보 처리 장치에 있어서, 소프트웨어적으로 구성되는 소프트웨어 모듈로 구성할 수 있다. 또한, 상술한 소프트웨어 모듈은 본 발명에서 설명한 기능을 갖는 한, 도면에 도시한 기능 블록에 대응하는 구성으로서 포함되는 것이 아니라, 다른 기능 블록 구성으로서 구성할 수 있다. 또한, 본 발명의 전자 워터마크 생성 방법을 실행시키기 위한 프로그램은 여러 가지 프로그래밍 언어, 예컨대 어셈블러 언어, C 언어, C++ 언어, Java(등록상표) 등을 사용하여 기술할 수 있으며, 본 발명의 프로그램을 기술한 코드는 RAM, ROM, 플래시 메모리 등에 있어서의 펌웨어로서 포함할 수 있고, 자기 테이프, 플렉시블 디스크, 하드디스크, 컴팩트 디스크, 광자기 디스크, DVD(digital versatile disc)와 같은 컴퓨터 판독 가능한 기록 매체에 유지시킬 수 있다.

지금까지 본 발명을 도면에 기재한 구체적인 실시형태를 가지고 설명하여 왔지만, 본 발명은 상술한 특정한 실시형태에 제한되는 것이 아니라, 여러 가지 변경예 및 다른 실시형태라도, 본 발명이 효과를 발휘하는 범위에서, 지금까지 알려진 어떠한 구성 요소도 이용할 수 있다.

Claims

실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 장치로서,

상기 실시간 콘텐츠를 입력하는 입력 수단과,

상기 실시간 콘텐츠를 유지하는 입력 버퍼와,

상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하기 위한 생성 수단과,

상기 생성된 출력 WM 신호를 유지하기 위한 출력 버퍼를 포함하고,

상기 생성 수단은,

상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하기 위한 예측 수단과,

상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 제어 수단과,

상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하기 위한 수단을 포함하는 것인 WM 신호 생성 장치.
제1항에 있어서, 상기 지각 자극치는 음향 또는 휘도이며, 상기 예측 수단은 상기 입력 버퍼에 유지된 데이터를 사용하여 상기 소정 시간후의 실시간 콘텐츠의 강도에 대응한 예측 불가청량 또는 예측 불가시량의 WM 신호를 생성하는 것인 WM 신호 생성 장치.
제1항 또는 제2항에 있어서, 상기 제어 수단은 비밀키와, 상기 메시지와, 유사 랜덤수를 사용하여, 플러스/마이너스의 2치화된 매립치를 생성하는 수단을 포함하는 것인 WM 신호 생성 장치.
제1항 내지 제3항 중 어느 한 항에 있어서, 상기 WM 신호 생성 장치는 상기 생성된 WM 신호를 매립하는 시간 경과후의 실시간 콘텐츠와 상기 생성된 WM 신호를 비교하여, 상기 출력 버퍼의 출력을 제어하는 출력 제어 수단을 더 포함하는 것인 WM 신호 생성 장치.
제1항 내지 제4항 중 어느 한 항에 있어서, 상기 입력 수단은 상기 실시간 콘텐츠를 분할하여 입력하는 수단을 포함하고, 상기 생성 수단은 상기 분할된 실시간 콘텐츠를 사용하여 WM 신호를 생성하는 것인 WM 신호 생성 장치.
실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 방법으로서,

상기 실시간 콘텐츠를 입력하는 단계와,

실시간 콘텐츠를 유지하는 단계와,

상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하는 단계와,

상기 생성된 출력 WM 신호를 유지하는 단계를 포함하고,

상기 생성 단계는,

상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하는 단계와,

상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 단계와,

상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하는 단계를 포함하는 것인 WM 신호 생성 방법.
제6항에 있어서, 상기 지각 자극치는 음향 또는 휘도이며, 상기 예측 단계는 상기 입력 버퍼에 유지된 데이터를 사용하여 상기 소정 시간후의 실시간 콘텐츠의 강도에 대응한 예측 불가청량 또는 예측 불가시량의 WM 신호를 생성하는 단계를 포함하는 것인 WM 신호 생성 방법.
제6항 또는 제7항에 있어서, 상기 제어 단계는 비밀키 및 상기 메시지와, 유사 랜덤수를 사용하여, 플러스/마이너스의 2치화된 매립치를 생성하는 단계를 포함하는 것인 WM 신호 생성 방법.
제6항 내지 제8항 중 어느 한 항에 있어서, 상기 생성된 WM 신호를 매립하는 시간 경과후의 실시간 콘텐츠와 상기 생성된 WM 신호를 비교하여, 상기 출력 버퍼의 출력을 제어하는 단계를 더 포함하는 것인 WM 신호 생성 방법.
제6항 내지 제9항 중 어느 한 항에 있어서, 상기 입력하는 단계는 상기 실시간 콘텐츠를 분할하는 단계를 포함하고, 상기 생성 단계는 상기 분할된 실시간 콘텐츠를 사용하여 출력 WM 신호를 생성하는 단계를 포함하는 것인 WM 신호 생성 방법.
실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 방법을 컴퓨터에 대하여 실행시키기 위한 컴퓨터 실행 가능한 프로그램으로서, 상기 프로그램은 컴퓨터에 대하여,

입력된 상기 실시간 콘텐츠를 유지하는 단계와,

상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하는 단계와,

상기 생성된 출력 WM 신호를 유지하는 단계를 실행시키고,

상기 생성 단계는,

상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하는 단계와,

상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 단계와,

상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하는 단계를 포함하는 것인 컴퓨터 실행 가능한 프로그램.
제11항에 있어서, 상기 지각 자극치는 음향 또는 휘도이며, 상기 예측 단계는 상기 입력 버퍼에 유지된 데이터를 사용하여 상기 소정 시간후의 실시간 콘텐츠의 강도에 대응한 예측 불가청량 또는 예측 불가시량의 WM 신호를 생성하는 단계를 포함하는 것인 컴퓨터 실행 가능한 프로그램.
제11항 또는 제12항에 있어서, 상기 생성 단계에서, 분할하여 입력된 실시간 콘텐츠를 사용하고, 상기 제어 단계는 비밀키와, 상기 메시지와, 유사 랜덤수를 사용하여, 플러스/마이너스의 2치화된 매립치를 생성하는 단계를 포함하는 것인 컴퓨터 실행 가능한 프로그램.
제11항 내지 제13항 중 어느 한 항에 있어서, 상기 생성된 WM 신호를 매립하는 시간 경과후의 실시간 콘텐츠와 상기 생성된 WM 신호를 비교하여, 상기 출력 버퍼의 출력을 제어하는 단계를 더 포함하는 것인 컴퓨터 실행 가능한 프로그램.
실시간 콘텐츠에 대하여 전자 워터마크로서 매립되는 WM 신호를 생성하기 위한 방법을 컴퓨터에 대하여 실행시키기 위한 컴퓨터 실행 가능한 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체로서, 이 프로그램은, 컴퓨터에 대하여,

입력된 상기 실시간 콘텐츠를 유지하는 단계와,

상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하는 단계와,

상기 생성된 출력 WM 신호를 유지하는 단계를 실행시키고,

상기 생성 단계는,

상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하는 단계와,

상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 단계와,

상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하는 단계를 포함하는 것인 컴퓨터 판독 가능한 기록 매체.
제15항에 있어서, 상기 지각 자극치는 음향 또는 휘도이며, 상기 예측 단계는 상기 입력 버퍼에 유지된 데이터를 사용하여 상기 소정 시간후의 실시간 콘텐츠의 강도에 대응한 예측 불가청량 또는 예측 불가시량의 WM 신호를 생성하는 단계를 포함하는 것인 컴퓨터 판독 가능한 기록 매체.
제15항 또는 제16항에 있어서, 상기 생성 단계에서, 분할하여 입력된 실시간 콘텐츠를 사용하고, 상기 제어 단계는 비밀키와, 상기 메시지와, 유사 랜덤수를 사용하여, 플러스/마이너스의 2치화된 매립치를 생성하는 단계를 포함하는 것인 컴퓨터 판독 가능한 기록 매체.
제15항 내지 제17항 중 어느 한 항에 있어서, 상기 생성된 WM 신호를 매립하는 시간 경과후의 실시간 콘텐츠와 상기 생성된 WM 신호를 비교하여, 상기 출력 버퍼의 출력을 제어하는 단계를 더 포함하는 것인 컴퓨터 판독 가능한 기록 매체.
실시간 콘텐츠에 대하여 전자 워터마크를 매립하기 위한 장치로서,

상기 실시간 콘텐츠를 입력하는 입력 수단과,

상기 실시간 콘텐츠를 유지하는 입력 버퍼와,

상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하기 위한 생성 수단과,

상기 생성된 출력 WM 신호를 유지하기 위한 출력 버퍼와,

상기 생성된 WM 신호를 수신하여, 상기 실시간 콘텐츠에 매립하기 위한 매립 수단을 포함하고,

상기 생성 수단은,

상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하기 위한 예측 수단과,

상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 제어 수단과,

상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하기 위한 수단을 포함하는 것인 전자 워터마크 매립 장치.
제19항에 있어서, 상기 지각 자극치는 음향 또는 휘도이며, 상기 예측 수단은 상기 입력 버퍼에 유지된 데이터를 사용하여 상기 소정 시간후의 실시간 콘텐츠의 강도에 대응한 예측 불가청량 또는 예측 불가시량의 WM 신호를 생성하는 것인 전자 워터마크 매립 장치.
제19항 또는 제20항에 있어서, 상기 제어 수단은 비밀키와, 상기 메시지와, 유사 랜덤수를 사용하여, 플러스/마이너스의 2치화된 매립치를 생성하는 수단을 포함하는 것인 전자 워터마크 매립 장치.
제19항 내지 제21항 중 어느 한 항에 있어서, 상기 WM 신호 생성 장치는 상기 생성된 WM 신호를 매립하는 시간 경과후의 실시간 콘텐츠와 상기 생성된 WM 신호를 비교하여, 상기 출력 버퍼의 출력을 제어하는 출력 제어 수단을 더 포함하는 것인 전자 워터마크 매립 장치.
제19항 내지 제22항 중 어느 한 항에 있어서, 상기 입력 수단은 상기 실시간 콘텐츠를 분할하여 입력하는 수단을 포함하고, 상기 생성 수단은 상기 분할된 실시간 콘텐츠를 사용하여 WM 신호를 생성하는 것인 전자 워터마크 매립 장치.
제19항 내지 제23항 중 어느 한 항에 있어서, 상기 실시간 콘텐츠는 생연주되는 음악인 것인 전자 워터마크 매립 장치.
제19항 내지 제24항 중 어느 한 항에 있어서, 상기 실시간 콘텐츠는 생방송되는 방송 콘텐츠인 것인 전자 워터마크 매립 장치.
제19항 내지 제25항 중 어느 한 항에 있어서, 상기 전자 워터마크 매립 장치는 디지털 텔레비전 장치의 외부 부착 장치이거나 또는 상기 디지털 텔레비전 장치의 내부에 포함되는 것인 전자 워터마크 매립 장치.
실시간 콘텐츠에 대하여 전자 워터마크를 매립하기 위한 장치를 포함하는 디지털 텔레비전 장치로서,

디지털 방송을 수신하고, 디코딩하여 실시간 콘텐츠를 생성하기 위한 수단과,

생성된 실시간 콘텐츠를 표시하기 위한 표시 수단과,

상기 디코딩된 실시간 콘텐츠에 대하여 전자 워터마크를 매립하기 위한 전자 워터마크 매립 장치를 포함하고,

상기 전자 워터마크 매립 장치는,

상기 실시간 콘텐츠를 입력하는 입력 수단과,

상기 실시간 콘텐츠를 유지하는 입력 버퍼와,

상기 실시간 콘텐츠로부터 실시간 콘텐츠의 예측 강도에 대응하는 출력 WM 신호를 생성하기 위한 생성 수단과,

상기 생성된 출력 WM 신호를 유지하기 위한 출력 버퍼와,

상기 생성된 출력 WM 신호를 수신하고, 상기 실시간 콘텐츠에 매립하기 위한 매립 수단을 포함하며,

상기 생성 수단은,

상기 실시간 콘텐츠의 소정 시간후의 지각 자극치의 예측으로부터 상기 WM 신호의 강도를 예측하기 위한 예측 수단과,

상기 실시간 콘텐츠에 전자 워터마크로서 매립하는 메시지를 사용하여 매립을 제어하는 제어 수단과,

상기 예측 수단으로부터의 출력과 상기 제어 수단으로부터의 출력을 사용하여 출력 WM 신호를 생성하기 위한 수단을 포함하는 것인 디지털 텔레비전 장치.
제27항에 있어서, 상기 전자 워터마크 매립 장치는 디지털 텔레비전 장치의 외부 부착 장치이거나 또는 상기 디지털 텔레비전 장치의 내부에 포함되는 것인 디지털 텔레비전 장치.
제27항 또는 제28항에 있어서, 상기 입력 수단은 분할 수단을 포함하고, 상기 제어 수단은 상기 메시지와 비밀키를 사용하여 매립을 제어하는 것인 디지털 텔레비전 장치.