KR101529082B1 - 분할된 추적 정보를 이용한 워터마킹 장치 및 방법 - Google Patents

분할된 추적 정보를 이용한 워터마킹 장치 및 방법 Download PDF

Info

Publication number
KR101529082B1
KR101529082B1 KR1020080120549A KR20080120549A KR101529082B1 KR 101529082 B1 KR101529082 B1 KR 101529082B1 KR 1020080120549 A KR1020080120549 A KR 1020080120549A KR 20080120549 A KR20080120549 A KR 20080120549A KR 101529082 B1 KR101529082 B1 KR 101529082B1
Authority
KR
South Korea
Prior art keywords
information
watermarking
tracking information
value
pattern image
Prior art date
Application number
KR1020080120549A
Other languages
English (en)
Other versions
KR20100062111A (ko
Inventor
김종흠
김종안
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020080120549A priority Critical patent/KR101529082B1/ko
Priority to US12/452,418 priority patent/US8189859B2/en
Priority to PCT/KR2009/007121 priority patent/WO2010064830A2/ko
Publication of KR20100062111A publication Critical patent/KR20100062111A/ko
Application granted granted Critical
Publication of KR101529082B1 publication Critical patent/KR101529082B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/913Television signal processing therefor for scrambling ; for copy protection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/913Television signal processing therefor for scrambling ; for copy protection
    • H04N2005/91307Television signal processing therefor for scrambling ; for copy protection by adding a copy protection signal to the video signal
    • H04N2005/91335Television signal processing therefor for scrambling ; for copy protection by adding a copy protection signal to the video signal the copy protection signal being a watermark

Abstract

분할된 추적 정보를 이용한 워터마킹 장치 및 방법이 제공된다. 분할된 추적 정보를 이용한 워터마킹 장치는 기 설정된 비트 값이 포함된 워터마킹 패턴 이미지를 수신하는 워터마킹 패턴 이미지 수신부, 사용자 ID 값 또는 사용자 단말기 ID 값에 기초하여 이진화된 추적 정보를 생성하고, 상기 생성된 추적 정보를 분할하며, 상기 분할된 추적 정보를 식별하는 그룹 번호 값을 추가하여 워터마킹 정보를 생성하는 워터마킹 정보 생성부, 상기 워터마킹 정보의 비트 값에 기초하여 상기 워터마킹 패턴 이미지를 호출하고, 동영상 데이터에 프레임 별로 상기 프레임의 일부에 상기 호출된 워터마킹 패턴 이미지를 순차적으로 오버레이시키는 오버레이부를 포함하되, 상기 오버레이부는 워터마킹 정보를 반복하여 오버레이시킨다.
워터마킹, 추적 정보, 분할, 싱크 코드, 로고 이미지, 오버레이

Description

분할된 추적 정보를 이용한 워터마킹 장치 및 방법{APPARATUS FOR WATERMARKING BY DIVIDING OFF TRACKING INFORMATION AND METHOD THEREFOR}
본 발명은 분할된 추적 정보를 이용한 워터마킹 장치 및 방법에 관한 것으로서, 보다 상세하게는, 추적 정보를 분할하고, 분할된 추적 정보 사이에 그룹 번호를 나타내는 비트 값을 추가하여 워터마킹 정보를 생성하는 워터마킹 장치 및 방법에 관한 것이다.
단말에서 실시간으로 불법 복제자를 추적하기 위한 정보를 삽입/추출하는 노력은 최근 IPTV(Internet Protocol Television) 사업이 활성화되면서 각광을 받고 있는 분야이다. 이는 현 서비스 환경에서 아날로그 디스플레이와 디지털 디스플레이가 혼재되어 있으며 아날로그 인터페이스로 영상이 전달되는 경우에는 명확한 보안 전송 규격이 존재하지 않기 때문이다. 실제 아날로그 인터페이스로 영상이 전달될 경우 SD급의 영상 캡처가 가능하며 최근에는 그 캡처 장치의 가격도 저렴하여 누구나 쉽게 구입할 수 있는 상황이다. 따라서, 콘텐츠의 불법 유통을 추적하기 위하여 다양한 워터마킹 기술이 사용되고 있다. 불법 복제자 추적을 위한 워터마킹 기술은 일반적으로 삽입한 추적 정보가 영상 재생 시 사용자의 눈에 띌 경우 반 감을 불러일으킬 수 있으므로 영상 데이터의 특정 부분에 눈에 띄지 않도록 데이터를 처리하여 삽입하는 방식이 주로 사용된다. 특히, 추적 정보를 눈에 보이지 않는 형대로 영상 데이터에 삽입하는 워터마킹의 경우에는 영상 프레임 별로 알고리즘에 따라 복잡한 연산의 수행을 요구한다.
하지만, IP 셋톱 박스는 제한된 리소스를 사용하기 때문에 많은 연산을 수행하기 힘든 문제가 있었으며, 특히, 워터마킹 알고리즘을 포함하고 있는 전용 SoC(System on a Chip)를 사용하지 않고서는 워터마킹과 관련된 복잡한 작업을 수행하기 힘든 문제가 있었다.
한편, 불법 유통된 콘텐츠로부터 추적 정보를 검출할 경우에, 검출된 추적 정보 중 일부에 오류가 존재하면, 전체 추적 정보를 다시 검출해야 하기 때문에 추적 정보의 검출에 많은 시간이 소요되고, 다양한 공격에 대한 강인성이 떨어지는 문제가 있었다.
한편, 선행 기술로서, 대한민국 특허등록번호 제10-0405827호에는 " 디지털 워터마크의 삽입/추출방법과 이를 이용한 워터마크 삽입/추출 장치"라는 명칭의 발명이 개시되어 있다.
상기 선행 기술은 로고나 그림 등의 이미지 데이터를 워터마크로 사용하여 영상 신호에 삽입하고, 또한 영상 신호 중에 포함된 워터마크를 추출하여 가시적으로 확인할 수 있는 워터마킹 기술에 관한 것으로서, 영상 신호에 삽입된 디지털 워터마크와 상기 생성된 디지털 워터마크와의 상관도를 계산하여 워터마크의 중복 삽입을 방지하는 기술을 개시하고 있다.
하지만, 상술한 선행 기술은 워터마크 삽입 장치에 과도한 연산을 요구하기 때문에 사양이 낮은 장치에 부적절한 문제가 있었으며, 워터마크된 정보의 일부에 오류가 존재할 경우에 전체 정보를 다시 검출해야 하기 때문에 추적 정보의 검출이 비효율적인 문제가 있었다.
본 발명의 일부 실시예는 연산량을 최소화하면서 동영상 데이터에 추적 정보를 워터마킹하는 분할된 추적 정보를 이용한 워터마킹 장치 및 방법을 제공한다.
또한, 본 발명의 일 실시예는 추적 정보의 검출 시 효율성이 향상되며 다양한 공격에 대하여 강인성이 향상된 워터마킹 장치 및 방법이 제공된다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 제 1 측면은 기 설정된 비트 값이 포함된 워터마킹 패턴 이미지를 수신하는 워터마킹 패턴 이미지 수신부, 사용자 ID 값 또는 사용자 단말기 ID 값에 기초하여 이진화된 추적 정보를 생성하고, 상기 생성된 추적 정보를 분할하며, 상기 분할된 추적 정보를 식별하는 그룹 번호 값을 추가하여 워터마킹 정보를 생성하는 워터마킹 정보 생성부, 상기 워터마킹 정보의 비트 값에 기초하여 상기 워터마킹 패턴 이미지를 호출하고, 동영상 데이터에 프레임 별로 상기 프레임의 일부에 상기 호출된 워터마킹 패턴 이미지를 순차적으로 오버레이시키는 오버레이부를 포함하되, 상기 오버레이부는 워터마킹 정보를 반복하여 오버레이 시키는 것인 분할된 추적 정보를 이용한 워터마킹 장치를 제공할 수 있다.
또한, 본 발명의 제 2 측면은 사용자 ID 값 또는 사용자 단말기 ID 값에 기초하여 이진화된 추적 정보를 생성하는 단계, 상기 생성된 추적 정보를 분할하고, 상기 분할된 추적 정보를 식별하는 그룹 번호 값을 상기 분할된 추적 정보 사이에 삽입하는 단계 및 상기 그룹 번호가 삽입된 추적 정보에 기초하여, 기 설정된 비트 값이 포함된 워터마킹 패턴 이미지를 호출하고, 동영상 데이터에 프레임 별로 상기 호출된 워터마킹 패턴 이미지를 상기 프레임의 일부분에 순차적으로 오버레이시키는 단계를 포함하는 추적 정보를 분할하여 워터마킹하는 방법을 제공할 수 있다.
또한, 본 발명의 제 3 측면은 동영상 데이터 프레임의 일부분에 오버레이된 이미지로부터 분할된 추적 정보 및 상기 분할된 추적 정보 별 그룹 번호를 포함하는 워터마킹 정보를 추출하는 단계, 상기 추출된 워터마킹 정보로부터 상기 그룹 번호 사이에 위치한 상기 분할된 추적 정보를 추출하는 단계, 상기 그룹 번호에 기초하여 상기 추출된 분할된 추적 정보를 순서대로 조합하는 단계 및 상기 조합된 추적 정보로부터 사용자 ID 값 또는 사용자 단말기 ID 값을 검출하는 단계를 포함하는 워터마킹된 추적 정보를 검출하는 방법을 제공할 수 있다.
전술한 본 발명의 과제 해결 수단에 의하면, 워터마킹 장치에서는 워터마킹 정보를 생성하고, 외부로부터 수신한 워터마킹 패턴 이미지를 동영상 프레임에 오버레이함으로써, 연산량을 최소화하면서 동영상 데이터에 추적 정보를 워터마킹할 수 있다.
또한, 전술한 본 발명의 과제 해결 수단에 의하면, 추적 정보를 분할하여 워터마킹 정보를 생성함으로써, 추적 정보의 검출 시 추적 정보의 일부에 오류가 존재하더라도 효율적으로 추적 정보를 검출할 수 있다.
또한, 본 발명의 다른 과제 해결 수단 중 하나에 의하면, 분할된 추적 정보 의 그룹 번호를 포함하는 싱크 코드를 토글 비트와 함께 짝을 지어 복수 회 반복시킴으로써, 다양한 공격에 대하여 강인성이 향상될 수 있다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
이하 첨부된 도면을 참고하여 본 발명을 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 워터마킹 시스템의 세부 구성도이다.
도 1에 도시된 바와 같이 본 발명의 일 실시예에 따른 워터마킹 시스템은 방송 사업자(1000), IPTV 방송 시스템(2000), 네트워크 망(3000), 사용자 단말기(4000) 및 불법 유통 추적 시스템(5000)을 포함한다.
또한, IPTV 방송 시스템(2000)은 베이스 밴드 시스템(2100), 압축 다중화 시 스템(2200), 수신 제한 시스템(CAS: Conditional Access System)(2300), 모니터링 시스템(2400), 미디어 관리 시스템(Media Operation Core: MOC)(2500), 워터마킹 패턴 이미지 생성 시스템(2600), 콘텐츠 배포 시스템(2700) 및 워터마킹 설정 시스템(2800)을 포함한다.
방송 사업자(1000)는 방송 콘텐츠를 제작, 편집 및 변경하여 IPTV 방송 시스템(2000)으로 제공하는 역할을 한다. 방송 사업자(1000)는 프로그램 공급자(PP), 지상파 또는 콘텐츠 제공자(CP)를 포함할 수 있다. 또한, 방송 사업자(1000)에 의하여 제공되는 방송 콘텐츠는 기존 방송 콘텐츠와 인터넷 상의 풍부한 콘텐츠를 포함할 수 있다.
IPTV 방송 시스템(2000)은 방송 사업자(1000)로부터 방송 콘텐츠를 수신하여 관리하며, 사용자 단말기(4000)로 콘텐츠를 분배하여 방송/녹화/재생 서비스를 제공하는 역할을 한다. 상기 수신한 방송 콘텐츠에는 관련 부가 정보 및 이러한 부가 정보에 대한 EPG(Electronic Program Guide)가 포함되어 있을 수 있다.
IPTV 방송 시스템(2000)은 멀티캐스트 라우팅 프로토콜을 지원하는 라우터를 경유하여 가입자 집선 장치, 가입자 스위치를 통해 방송 영상 및 음성 신호, 데이터 방송용 데이터 및 프로그램 추천 서비스 메뉴를 포함하는 EPG 정보(PSIP/PSI/SI 정보)를 멀티캐스팅으로 다수의 가입자의 IP 셋탑 박스로 전송할 수 있다.
베이스 밴드 시스템(2100)은 외부 프로그램 공급자(PP)로부터 MPEG2(Moving Picture Experts Group 2) 방송 신호, 또는 지상파로부터 아날로그 방송 신호를 수신하고, 수신한 소스(source) 방송 신호를 SDI(Serial Digital Interface) 신호로 변환하고, 프레임(Frame)을 동기화하며, 루틴 스위처(Routine Switcher)를 통해 여러 방송 채널(예를 들어, 100 채널)의 방송 영상 및 음성 신호들을 분배하며, 자막 생성기(CG) 및 자동 프로그램 제어기(Automatic Program Controller: APC)에 의해 상기 방송 영상 및 음성 신호에 광고, 로고, 또는 자막 중 적어도 어느 하나를 삽입하여(신호 편집 및 가공) 상기 압축 다중화 시스템(2200)으로 전송할 수 있다.
상기 SDI(Serial Digital Interface) 신호는, 예를 들어, 270Mbps의 전송률을 가진 디지털 신호 표준안으로서, 복합 디지털 영상과 4채널의 디지털 오디오 신호가 혼합되어 있을 수 있다.
상기 베이스 밴드 시스템(2100)은 기본적으로 프로그램 공급자(PP), 지상파 등의 방송 신호를 각각 수신하는 수신 장치, 수신 장치에서 수신된 소스(Source) 신호를 SDI 신호로 변환 및 보정하고 프레임을 동기화하기 위한 프레임 동기화기(Frame Synchronizer), 운용 관리를 위해 모든 방송 신호 채널을 연결/집중화하는 A/V 라우터 등의 신호 분배기, 상기 SDI 신호에 광고, 로고, 자막을 삽입하여 신호를 편집하고 가공하는 자막 생성기(character generator)를 포함할 수 있다.
압축 다중화 시스템(2200)은 상기 베이스 밴드 시스템(2100)으로부터 수신된 방송 영상 및 음성 신호(Video, Audio)를 방송 채널 별(예를 들어, 100 채널)로 각각 A/V 인코더(A/V Encoder)로 입력하여 SDI(Serial Digital Interface) 영상 신호를 H.264로 압축하고, 음성 신호를 MPEG-2 AAC로 압축하여 MPEG-2 TS(Transport Stream)을 생성하고, 압축된 방송 영상 및 음성인 MPEG-2 TS 신호와 함께 데이터 인코더(data encoder) 및 PSI/SI 발생기(PSI/SI Generator)에 의해 생성된 데이터 방송용 데이터 및 EPG 정보(PSIP/PSI/SI 정보)를 다중화(Multiplexing)한 후, 다중화된 MPEG-2 TS 신호를 수신 제한 기술을 사용하는 경우 스크램블러(Scrambler)에 입력하여 암호화하고 최종적으로 IP 패킷화하여 IP 패킷화한 TS(Transport Stream) 방송 신호를 송출할 수 있다.
또한, 선택적으로, 프로그램 추천 콘텐츠에 대한 불법 시청과 불법 복제를 방지하기 위해 수신 제한 시스템(2300)을 사용할 수 있다.
수신 제한 시스템(2300)은 실시간 채널에 대한 암호화 및 VOD 콘텐츠의 사전 암호화를 수행하며 시청 권한을 제어함으로써 인증된 사용자에 한해 채널 및 콘텐츠를 이용할 수 있도록 하는 역할을 한다. IPTV 컨텐츠의 불법 복제를 방지하기 위해 수신 제한 시스템(2300) 대신에 디지털 저작권 관리(DRM: Digital Rights Management) 방식을 사용할 수도 있다.
모니터링 시스템(2400)은 관제 시스템으로, IPTV 방송을 위한 A/V 방송 신호의 송출 장애, IPTV IPTV 방송 시스템(2000)의 다운 링크를 모니터링하여 수신 장애, 및 자막 확인 등을 모니터링할 수 있다.
미디어 관리 시스템(2500)은 방송 업무를 운영하기 위한 각종 비즈니스 프로세스 정보(프로그램 편성 정보, 소재 정보, 계약 정보, 상품 정보 등)를 관리하는 시스템이다. 미디어 관리 시스템(2500)은 방송 센터의 중앙에서 각 시스템들과 유기적인 결합을 통해 정보 흐름을 통합 관리할 수 있다.
상기 미디어 관리 시스템(2500)은 방송 프로그램 편성 정보, 콘텐츠 및 미디어 관리 정보, 프로그램 제공자(PP)와 콘텐츠 제공자(CP)의 계약 정보, 상품 정보 를 관리하고, 방송 센터의 중앙에서 각 시스템들과의 유기적인 결합을 통해 정보 흐름을 통합 관리하는 중재자(Coordinator) 역할을 수행할 수 있다.
또한, 상기 미디어 관리 시스템(2500)은 획득(Acquisition) 측면에서 계약 관리, 미디어 및 콘텐츠 메타데이터(meta data) 관리, 방송 스케줄 정보인 EPG 정보 획득/관리, 운영(operation) 측면에서 실시간 방송 및 VOD 채널 편성 관리, 각 서브 시스템과 연동을 에이전트(Agent) 관리, VOD 카탈로그 생성 관리 및 각종 상품 관리를 제공하며, 분석 측면에서 CP/CA와의 정산, 가입자 시청 성향 등의 마케팅 분석 리포팅, 송출(Delivery) 측면에서 방송 송출 모니터링, 비디오 서버 송출 관리 및 VOD 가입자 인증, CP/CA와의 정산을 위한 송출 결과 기록/관리, 연동된 각 서브 시스템과의 데이터 동기화를 제공할 수 있다.
워터마킹 패턴 이미지 생성 시스템(2600)은 원본 이미지에 워터마킹될 정보 값을 삽입하여 패턴화된 워터마킹 패턴 이미지를 생성하고 생성된 워터마킹 패턴 이미지를 사용자 단말기(4000)로 제공하는 역할을 한다. 따라서, 사용자 단말기(4000)는 워터마킹 패턴 이미지를 직접 생성할 필요가 없으며, 적은 연산으로도 효율적으로 추적 정보를 동영상 데이터에 워터마킹할 수 있게 된다.
워터마킹 패턴 이미지란 워터마킹될 정보 값이 삽입된 워터마킹 이미지로서, 이미지에 삽입될 정보의 종류만큼 패턴화된 이미지를 말한다. 예를 들어, 원본 이미지에 삽입될 정보가 2bit 값인 경우에 00, 01, 10, 11 값이 각각 삽입된 4개의 이미지가 워터마킹 패턴 이미지가 될 수 있다.
워터마킹 패턴 이미지 생성 시스템(2600)은 워터마킹 패턴 이미지를 회사명, 시청 등급을 나타내는 로고 이미지 또는 자막 이미지 등을 이용하여 생성할 수 있다. 로고 이미지 또는 자막 이미지를 이용하여 워터마킹 패턴 이미지를 생성할 경우에는 원본 로고 이미지와 육안으로 식별하기 어렵기 때문에 추적 정보를 비가시적으로 부호화하여 워터마킹할 수 있게 된다.
또한, 워터마킹 패턴 이미지 생성 시스템(2600)은 원본 로고 이미지의 영역 중 워터마크를 삽입하고자 하는 관심 영역(ROI, Region of Interest)에 있는 화소(pixel)들의 색상 정보 값(예, 조도(luminance) 등)을 변경하는 기법 등을 이용하여 이진화된 정보 값을 로고 이미지에 삽입할 수 있다. 예를 들어, 정보 값 ‘1’을 나타내기 위하여 로고 이미지의 관심 영역 내의 픽셀의 색상 정보 값을 원본 이미지보다 평균적으로 높게 나타나도록 할 수 있으며, 정보 값 ‘0’을 나타내기 위하여 로고 이미지의 관심 영역내의 픽셀의 색상 정보 값을 원본 이미지보다 평균적으로 낮게 나타나도록 처리할 수 있다. 나아가, 워터마킹 패턴 이미지 생성 시스템(2600)은 싱크 코드의 비트 값이 포함된 싱크 이미지로 사용될 워터마킹 패턴 이미지와 분할된 추적 정보의 비트 값을 포함하는 추적 정보 이미지 로 사용될 워터마킹 패턴 이미지를 쉽게 구별할 수 있도록 생성할 수 있다.
워터마킹 패턴 이미지는 사용자 단말기(4000)로 제공된 후 워터마킹 정보에 기초하여 후술할 오버레이부(4400)에 순차적으로 제공될 수 있다. 워터마킹 정보란, 후술할 워터마킹 정보 생성부(4300)에서 생성되는 정보로서, 동영상 프레임에 오버레이될 정보를 말한다. 워터마킹 정보는, 예를 들어, 추적 정보, 오류 복원 코드, 싱크 코드 및 토글 코드 등을 포함할 수 있다. 예를 들어, 워터마킹 정보 값이 00, 11, 01, 10 인 경우에 00, 11, 01, 10 값이 삽입된 워터마킹 패턴 이미지가 순차적으로 호출되어 오버레이될 수 있다.
워터마킹 패턴 이미지 생성 시스템(2600)은 사용자 단말기(4000)에 위치할 수도 있다.
콘텐츠 배포 시스템(2700)은 방송 콘텐츠를 사용자 단말기(4000)로 제공하는 역할을 한다.
워터마킹 설정 시스템(2800)은 워터마킹 정보의 생성 방법 및 워터 마킹 이미지의 오버레이 방법 등과 같이 워터마킹에 관련된 규칙을 설정하는 역할을 한다. 워터마킹 설정 시스템(2800)은 워터마킹 패턴 이미지에 삽입할 정보량, 메시지 블록의 크기, 각 비트 값의 반복 회수 등을 설정할 수 있으며, 워터마킹 이미지의 오버레이와 관련하여 워터마킹 이미지의 노출 주기, 시작 시간, 반복 횟수 등의 규칙을 설정할 수 있다. 메시지 블록이란 분할된 추적 정보 값을 포함하는 비트 값의 묶음으로서, 오류 복원 코드 값 및 토글 비트 등을 포함할 수 있다. 워터마킹 설정 시스템(2800)은 설정된 규칙을 워터마킹 패턴 이미지 생성 시스템(2600) 및 사용자 단말기(4000)로 제공하여 워터마킹 이미지의 생성 및 노출 등을 유연하게 조정할 수 있게 된다.
네트워크 망(3000)은 IPTV 방송 시스템(2000)으로부터 방송 콘텐츠를 수신하여 사용자 단말기(4000)에게 상기 수신한 방송 콘텐츠를 전달하는 역할을 한다. 네트워크 망(3000)은 백본(Backbone)망 및 액서스(Access)망을 포함하며, 상기 액서스망은 이더넷(Ethernet), xDSL(ADSL, VDSL), HFC(Hybrid Fiber Coaxial Ca), FTTC(Fiber To The Curb), FTTH(Fiber To The Home) 구조 중 어느 하나의 토폴로지로 구성될 수 있다.
사용자 단말기(4000)는 IPTV 방송 시스템(2000)으로 사용자 정보를 제공하고 IPTV 방송 시스템(2000)으로부터 선호 콘텐츠를 수신하여 저장하는 역할을 한다. 사용자 단말기(4000)는 인터넷 방송 서비스를 이용하기 위한 장치로서, 일반적으로는 IPTV, 셋탑 박스(STB) 및 리모콘을 포함한다. IPTV는 IPTV 방송 시스템(2000)으로부터 수신한 방송 콘텐츠를 출력하고, 리모콘을 통하여 입력받은 사용자 응답 신호를 셋탑 박스의 리턴 채널을 통하여 IPTV 방송 시스템(2000)으로 전달한다. 사용자 단말기는 IP STB가 내장된 TV, 또는 사용자의 TV와 연결된 IP 셋탑 박스(IP STB), 컴퓨터, 노트북, 또는 개인 휴대용 단말기 중 어느 하나의 단말을 사용할 수 있다. 사용자 단말기(4000)의 세부 구성에 대하여는 후술하기로 한다.
불법 유통 추적 시스템(5000)은 불법 유통된 동영상 데이터로부터 추적 정보를 추출하여 불법 유통을 추적하는 역할을 한다. 불법 유통 추적 시스템(5000)은 워터마킹 정보 내의 싱크 코드, 오류 복원 코드 및 토글 코드를 이용하여 추적 정보를 조합할 수 있다. 불법 유통 추적 시스템(5000)의 세부 구성에 대하여는 후술하기로 한다.
이하, 도 2를 참조하여 본 발명의 일 실시예에 따른 사용자 단말기(4000)의 세부 구성을 설명하기로 한다.
도 2는 본 발명의 일 실시예에 따른 사용자 단말기(4000)의 세부 구성도이다.
도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 사용자 단말기(4000)는 프레임 추출부(4100), 워터마킹 패턴 이미지 수신부(4200), 워터마킹 정보 생성부(4300), 오버레이부(4400) 및 디스플레이부(4500)를 포함한다.
프레임 추출부(4100)는 동영상 데이터를 수신하고 상기 수신한 동영상 데이터 스트림을 압축 해제하여 동영상 프레임을 추출하는 역할을 한다.
워터마킹 패턴 이미지 수신부(4200)는 워터마킹 패턴 이미지 생성 시스템(2600)으로부터 워터마킹 패턴 이미지를 수신하고, 오버레이부(4400)로 워터마킹 패턴 이미지를 순차적으로 제공하는 역할을 한다.
워터마킹 정보 생성부(4300)는 추적 정보를 포함하는 워터마킹 정보를 생성하고, 생성된 워터마킹 정보를 오버레이부(4400)로 제공하는 역할을 한다. 워터마킹 정보 생성부(4300)의 세부 구성에 대하여는 후술하기로 한다.
오버레이부(4400)는 워터마킹 정보에 기초하여 워터마킹 패턴 이미지를 순차적으로 호출하고, 호출된 워터마킹 패턴 이미지를 동영상 데이터에 프레임 별로 삽입하는 역할을 한다. 예를 들어, 워터마킹 정보 값이 00 11 01 10 인 경우에 00 11 01 10 값이 삽입된 워터마킹 패턴 이미지가 순차적으로 호출되어 오버레이될 수 있다. 워터마킹 패턴 이미지가 로고 이미지 또는 자막 이미지를 원본 이미지로 하여 생성될 수 있음은 앞서 살펴본 바이다.
오버레이부(4400)는 워터마킹 설정 시스템(2800)으로부터 워터마킹 이미지의 오버레이와 관련된 설정 값(워터마킹 이미지의 노출 주기, 시작 시간 등)을 수신하고, 수신한 설정 값에 기초하여 워터마킹 패턴 이미지를 오버레이시킬 수 있다.
디스플레이부(4500)는 워터마킹 패턴 이미지가 삽입된 동영상 데이터를 디스플레이하는 역할을 한다.
사용자 단말기(4000)는 IPTV 방송 시스템(2000)으로부터 수신한 워터마킹 패턴 이미지를 이용하여, 워터마킹하기 때문에 적은 연산으로도 효율적으로 추적 정보를 동영상 데이터에 워터마킹할 수 있게 된다.
이하, 도 3을 참조하여 본 발명의 일 실시예에 따른 워터마킹 정보 생성부(4300)의 세부 구성을 설명하기로 한다.
도 3은 본 발명의 일 실시예에 따른 워터마킹 정보 생성부(4300)의 세부 구성도이다.
도 3에 도시된 바와 같이, 본 발명의 일 실시예에 따른 워터마킹 정보 생성부(4300)는 추적 정보 생성부(4310), 이진 코드 분할부(4320), 오류 복원 코드(ECC: Error Correction Code) 추가부(4330), 싱크 코드 삽입부(4340) 및 토글 비트 추가부(4350)를 포함한다.
추적 정보 생성부(4310)는 콘텐츠의 불법 유통의 추적에 사용되는 이진화된 추적 정보를 생성하는 역할을 한다. 추적 정보는 콘텐츠의 불법 유통을 추적하는데 필요한 이진화된 정보를 말하며, 예를 들어, IPTV(Internet Protocol Television) 가입자 ID(Identification) 정보, 사용자 단말기의 하드웨어 정보, 콘텐츠의 재생 시각 또는 상기 IPTV 가입자의 식별이 가능한 트랜잭션(Transaction) 정보 등을 포함할 수 있다.
이진 코드 분할부(4320)는 워터마킹 설정 시스템(2800)으로부터 추적 정보의 분할에 관한 정보를 수신하고, 상기 정보에 기초하여 추적 정보를 분할하는 역할을 한다. 이진 코드 분할부(4320)가 추적 정보를 분할하기 때문에, 추적 정보의 일부에 오류가 발생하더라도 오류가 발생하지 않은 메시지 블록을 이용하여 추적 정보를 추출할 수 있기 때문에 워터마킹 정보로부터 추적 정보를 추출하는 시간 및 효율을 향상시킬 수 있게 된다.
오류 복원 코드 추가부(4330)는 분할된 추적 정보에 오류 복원 코드를 추가하여 복수개의 메시지 블록을 생성하는 역할을 한다. 메시지 블록은 분할된 추적 정보에 오류 복원 코드가 추가된 비트열을 말한다.
싱크 코드 삽입부(4340)는 복수 개의 메시지 블록을 구별하기 위한 싱크 코드를 삽입하는 역할을 한다. 싱크 코드 값은 싱크 코드 이후에 배열되는 메시지 블록의 그룹 번호 값을 나타내며, 상기 싱크 코드는 메시지 블록을 구분하는 역할을 한다. 상기 그룹 번호는 메시지 블록을 재조합하는데 이용될 수 있다.
토글 비트 추가부(4350)는 싱크 코드 및 메시지 블록 내의 비트 값에 토글 비트를 추가하는 역할을 한다. 토글 비트 추가부(4350)는 싱크 코드 및 메시지 블록 내의 비트 값에 짝을 지어 토글 비트 값을 추가할 수 있으며, 상기 짝지어진 비트 값을 복수 회 반복시킬 수 있다.
예를 들어, 도 9와 같이 싱크 코드에 2 비트를 할당하고, 토글 비트에 1 비트를 할당할 경우에, 싱크 코드 값이 10인 경우 첫번째 비트 값인 1에 토글 비트 0을 짝을 지어 4회 반복시키고(10 10 10 10), 두 번째 비트 값인 0에 토글 비트 1을 짝을 지어 4회 반복시킬 수 있다(01 01 01 01). 따라서, 상기 반복되는 토글 비트 0에 대응하는 비트 값은 첫 번째 비트 값인 1이 반복된 것임을 알 수 있으며, 상기 반복되는 토글 비트 1에 대응하는 비트 값은 두 번째 비트 값인 0이 반복된 것임을 알 수 있게 된다. 동일한 비트 값이 토글 비트와 짝을 이루어 복수 회 반복하여 삽입되기 때문에, 비트 값의 오류를 찾아내어 제거할 수 있으며, 워터마킹된 동영상의 강인성을 향상시킬 수 있게 된다.
한편, 상기 짝을 이루는 2개의 비트 값은 2 비트 정보를 포함하는 하나의 워터마킹 패턴 이미지에 의해 하나의 프레임에 함께 삽입될 수 있다.
또한, 토글 비트 추가부(4350)는 싱크 코드 및 메시지 블록 내의 복수 개의 비트 값에 토글 비트를 짝지을 수도 있다. 예를 들어, 2 비트의 싱크 코드 값과 1 비트의 토글 비트를 함께 짝지을 수 있으며, 이 경우 상기 짝을 이루는 3개의 비트 값은 3 비트 정보를 포함하는 하나의 워터마킹 패턴 이미지에 의해 하나의 프레임에 함께 삽입될 수 있다.
이하, 도 4를 참조하여 본 발명의 일 실시예에 따른 워터마킹 정보가 포함된 워터마킹 패턴 이미지의 오버레이 순서에 대하여 설명하기로 한다.
도 4는 본 발명의 일 실시예에 따른 워터마킹 정보가 포함된 워터마킹 패턴 이미지의 오버레이 순서를 도시한 도면이다.
도 4에 도시된 바와 같이 워터마킹 패턴 이미지는 워터마킹 정보에 기초하여 순차적으로 호출되어 오버레이될 수 있다. 워터마킹 패턴 이미지는 싱크 코드의 비트 값이 포함된 싱크 이미지(400, 420, 440, 460) 및 분할된 추적 정보의 비트 값을 포함하는 추적 정보 이미지(411, 412, 413, 421, 422, 423)로 구별될 수 있 다. 또한, 상기 싱크 이미지 및 추적 정보 이미지는 별도로 구별 가능한 워터마킹 패턴 이미지를 사용함으로써, 쉽게 구별될 수 있다. 또한, 각각의 이미지에는 토글 비트가 포함될 수 있다. 워터마킹 패턴 이미지는, 예를 들어, 그룹 번호 00 값을 포함한 싱크 이미지(400)가 먼저 복수 회 반복하여 오버레이되고, 이후에 그룹 번호 00에 해당하는 메시지 블록 0 내의 추적 정보가 포함된 추적 정보 이미지들(411, 412, 413)이 순차적으로 오버레이될 수 있다. 이후, 그룹 번호 01 값을 포함한 싱크 이미지(420)가 복수 회 반복하여 오버레이되고, 그룹 번호 01에 해당하는 메시지 블록 1 내의 추적 정보가 포함된 추적 정보 이미지들(421, 422, 423)이 오버레이될 수 있다. 또한, 토글 비트가 포함된 워터마킹 패턴 이미지는 복수 회 연속해서 반복하여 오버레이될 수 있다. 상기 토글 비트는 싱크 코드의 비트 값 또는 추적 정보의 비트 값 각각을 구별하는데 이용될 수 있으며, 상기 싱크 코드의 비트 값 또는 추적 정보의 비트 값에 발생하는 오류를 제거하는데 이용될 수 있다.
이하, 도 5를 참조하여 본 발명의 일 실시예에 따른 불법 유통 추적 시스템(5000)의 세부 구성을 설명하기로 한다.
도 5는 본 발명의 일 실시예에 따른 불법 유통 추적 시스템(5000)의 세부 구성도이다.
도 5에 도시된 바와 같이 본 발명의 일 실시예에 따른 불법 유통 추적 시스템(5000)은 워터마킹 정보 추출부(5100), 메시지 블록 조합부(5200), 추적 정보 검출부(5300) 및 추적 정보 해석부(5400)를 포함한다.
워터마킹 정보 추출부(5100)는 동영상 데이터로부터 워터마킹 정보를 추출하는 역할을 한다. 워터마킹 정보 추출부(5100)는 동영상 프레임 별로 삽입된 이진화된 값을 추출하여 나열함으로써 워터마킹 정보를 추출할 수 있다. 워터마킹 정보 추출부(5100)는 워터마킹 정보가 동영상 데이터에 반복하여 삽입되어 있는 경우에는 상기 워터마킹 정보를 반복하여 추출할 수 있다.
워터마킹 정보 추출부(5100)는 특정 비트 값이 토글 값과 함께 복수 회 반복하여 삽입된 경우에는 토글 신호의 연속으로 반복 삽입된 이진화된 값을 결정하여 추출한 다음, 추출된 값 중에서 과반수 이상의 값을 해당 워터마킹 이미지에 삽입된 정보 값으로 판단할 수 있다.
예를 들어, 도 10과 같이 비트 값 1 및 0이 토글 신호와 함께 각각 4회씩 반복해서 (1,0)(1,0)(1,0)(1,0) (0,1)(0,1)(0,1)(0,1)로 오버레이된 경우에, 오버레이된 이진화 값 중 일부에 에러가 발생하여, 워터마킹 정보 추출부(5100)가 동영상 데이터로부터 (1,0)(1,0)(0,0)(1,0) (0,1)(0,1)(0,1)(1,1) 값을 추출할 수 있다. 상기의 경우, 워터마킹 정보 추출부(5100)는 토글 신호를 통하여 2개의 비트 값이 존재함을 알 수 있으며, 토글 신호 0에 대하여 추출된 1, 1, 0, 1 값 중에서 과반수 이상의 값인 1을 정상적인 값으로 판단하고, 토글 신호 1과 함께 추출된 0, 0, 0, 1 값 중에서 과반수 이상의 값인 0 값을 정상적인 값으로 판단할 수 있다.
메시지 블록 조합부(5200)는 워터마킹 정보로부터 싱크 코드 및 메시지 블록을 구별하고 오류가 없는 메시지 블록을 추출하여 조합하는 역할을 한다.
메시지 블록 조합부(5200)는 싱크 코드의 유효성 판단하고 싱크 코드의 값을 상기 싱크 코드 이후에 추출된 메시지 블록의 그룹 번호로 인식할 수 있다. 메시지 블록 조합부(5200)는 싱크 코드 값을 추출할 경우에 싱크 코드 값이 바뀌었지만 토글 값이 바뀌지 않았다면 바뀐 싱크 코드 값이 유효한 값이 아니라고 판단할 수 있다.
또한, 메시지 블록 조합부(5200)는 추출한 싱크 코드 값에 기초하여 메시지 블록의 그룹 번호를 확인할 수 있으며, 메시지 블록 별로 유효성을 판단하고 유효한 메시지 블록만을 추출하여 그룹 번호 순으로 조합할 수 있다. 메시지 블록 조합부(5200)는 각각의 그룹 번호 별로 오류가 없는 메시지 블록을 추출하여 전체 메시지 블록을 완성할 때까지, 반복되는 워터마킹 정보로부터 메시지 블록을 추출할 수 있다.
따라서, 분할된 추적 정보를 포함한 메시지 블록 전체 중 일부에 오류가 발생한다고 하더라도, 오류가 발생하지 않은 메시지 블록의 추적 정보를 사용할 수 있기 때문에 추적 정보의 검출을 보다 효율적으로 수행할 수 있게 된다.
추적 정보 검출부(5300)는 완성된 메시지 블록으로부터 추적 정보를 검출하는 역할을 한다. 추적 정보 검출부(5300)는 각각의 메시지 블록에서 오류 복원 코드를 제외하고 분할된 추적 정보를 검출할 수 있으며, 검출된 분할된 추적 정보를 조합하여 추적 정보를 완성할 수 있다.
추적 정보 해석부(5400)는 검출된 추적 정보를 해석하여 동영상 데이터의 불법 유통을 추적하는 역할을 한다. 추적 정보 해석부(5400)는 추적 정보를 해석하여, 예를 들어, IPTV(Internet Protocol Television) 가입자 ID(Identification) 정보, 사용자 단말기의 하드웨어 정보, 콘텐츠의 재생 시각 또는 상기 IPTV 가입자의 식별이 가능한 트랜잭션(Transaction) 정보 등을 확인할 수 있다.
이하, 도 6을 참조하여 본 발명의 일 실시예에 따른 추적 정보를 검출하는 과정에서의 워터마킹 정보 값을 설명하기로 한다.
도 6은 본 발명의 일 실시예에 따른 추적 정보를 검출하는 과정에서의 워터마킹 정보 값을 도시한 도면이다.
도 6에 도시된 바와 같이, 워터마킹 정보 추출부(5100)는 동영상 데이터로부터 워터마킹 정보를 반복하여 추출할 수 있다. 워터마킹 정보(60)는 복수 개의 싱크 코드 및 메시지 블록들을 포함하고 있으며, 싱크 코드는 각 메시지 블록의 그룹 번호 값을 갖고 있으며, 메시지 블록들 사이에 위치하여 복수 개의 메시지 블록을 구별할 수 있게 한다.
메시지 블록 조합부(5200)는 싱크 코드를 통하여 메시지 블록들을 구별하여 추출하고 추출된 메시지 블록을 그룹 번호 순으로 배치할 수 있다. 만약, 주기 1의 워터마킹 정보(60)의 메시지 블록 1에 오류가 있는 경우에는 주기 1의 워터마킹 정보로부터는 메시지 블록 0, 메시지 블록 2 및 메시지 블록 3을 추출하고, 주기 2의 워터마킹 정보로부터 메시지 블록 1을 추출할 수 있다. 또한, 추출된 메시지 블록들을 그룹 번호 순으로 나열하여 전체 메시지 블록(62)을 완성할 수 있다.
각각의 메시지 블록은 분할된 추적 정보 값 및 오류 복원 코드을 포함하고 있으며, 추적 정보 검출부(5300)는 전체 메시지 블록(62)으로부터 분할된 추적 정보 값만을 추출하여 추적 정보(64)를 완성할 수 있다.
이하, 도 7을 참조하여 본 발명의 일 실시예에 따른 워터마킹 정보의 생성 방법에 대하여 설명하기로 한다.
도 7은 본 발명의 일 실시예에 따른 워터마킹 정보 생성 방법의 세부 흐름도이다.
단계 S700은 추적 정보를 생성하는 단계이다. 추적 정보는, 예를 들어, IPTV(Internet Protocol Television) 가입자 ID(Identification) 정보, 사용자 단말기의 하드웨어 정보, 콘텐츠의 재생 시각 또는 상기 IPTV 가입자의 식별이 가능한 트랜잭션(Transaction) 정보 등을 포함할 수 있다.
단계 S702는 추적 정보를 분할하는 단계이다. 추적 정보는 워터마킹 정보의 생성 방법과 관련하여 미리 설정된 규칙에 기초하여 분할될 수 있다.
단계 S704는 분할된 추적 정보에 오류 복원 코드를 추가하는 단계이며, 단계 S706은 싱크 코드를 삽입하는 단계이다. 싱크 코드의 값은 오류 복원 코드가 추가된 분할된 추적 정보 사이에 삽입되며, 각각의 분할된 추적 정보를 식별하는 값으로 이용될 수 있다.
단계 S706은 각각의 비트 값에 토글 비트를 추가하는 단계이다. 토글 비트 값은 단수 혹은 복수 개의 비트 값과 짝을 지어 추가될 수 있으며, 상기 짝지어진 비트 값들은 하나의 워터마킹 이미지에 포함될 수 있다. 또한, 상기 짝지어진 비트 값들을 복수 회 반복시킬 수 있다.
이하, 도 8을 참조하여 본 발명의 일 실시예에 따른 추적 정보의 검출 방법을 설명하기로 한다.
도 8은 본 발명의 일 실시예에 따른 추적 정보의 검출 방법을 도시한 세부 흐름도이다.
단계 S800은 불법 유통된 콘텐츠로부터 반복되는 워터마킹 정보를 추출하는 단계이다.
단계 S802는 워터마킹 정보로부터 싱크 코드 및 메시지 블록을 구별하고, 상기 싱크 코드에 기초하여 메시지 블록을 추출하는 단계이다. 싱크 코드는 메시지 블록의 그룹 번호를 포함하고 있으며, 상기 그룹 번호에 기초하여 메시지 블록들을 구별할 수 있다.
단계 S804는 추출한 메시지 블록에 오류가 있는지 여부를 판단하고 오류가 없는 메시지 블록을 나열하는 단계이며, 단계 S806은 메시지 블록의 조합을 완성하였는지 여부를 판단하는 단계이다.
상기 판단 결과(S806), 메시지 블록의 조합을 완성하지 않은 경우에는 다음 주기의 워터마킹 정보로 이동하여 메시지 블록을 추출하며(S808), 메시지 블록의 조합을 완성한 경우에는 완성된 전체 메시지 블록으로부터 추적 정보를 추출하고(S810) 추출된 추적 정보를 해석한다(S812).
본 발명의 일 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있 다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
도 1은 본 발명의 일 실시예에 따른 워터마킹 시스템의 세부 구성도.
도 2는 본 발명의 일 실시예에 따른 사용자 단말기(4000)의 세부 구성도.
도 3은 본 발명의 일 실시예에 따른 워터마킹 정보 생성부(4300)의 세부 구성도.
도 4는 본 발명의 일 실시예에 따른 워터마킹 정보가 포함된 워터마킹 패턴 이미지의 오버레이 순서를 도시한 도면.
도 5는 본 발명의 일 실시예에 따른 불법 유통 추적 시스템(5000)의 세부 구성도.
도 6은 본 발명의 일 실시예에 따른 추적 정보를 검출하는 과정에서의 워터마킹 정보 값을 도시한 도면.
도 7은 본 발명의 일 실시예에 따른 워터마킹 정보 생성 방법의 세부 흐름도.
도 8은 본 발명의 일 실시예에 따른 추적 정보의 검출 방법을 도시한 세부 흐름도.
도 9는 비트 값에 토글 비트를 추가하여 복수 회 반복하는 방법을 도시한 도면.
도 10은 토글 비트를 포함하여 반복되는 비트 값으로부터 오류가 발생한 비트 값을 판단하는 방법을 도시한 도면.
*도면의 주요 부분에 대한 부호 설명
4100: 프레임 추출부 4200: 워터마킹 패턴 이미지 수신부
4300: 워터마킹 정보 생성부 4310: 추적 정보 생성부
4320: 이진 코드 분할부 4330: 오류 복원 코드 추가부
4340: 싱크 코드 삽입부 4350: 토글 코드 추가부
4400: 오버레이부 4500: 디스플레이부

Claims (16)

  1. 분할된 추적 정보를 이용한 워터마킹 장치에 있어서,
    기 설정된 비트 값이 포함된 워터마킹 패턴 이미지를 수신하는 워터마킹 패턴 이미지 수신부,
    사용자 ID 값 또는 사용자 단말기 ID 값에 기초하여 이진화된 추적 정보를 생성하고, 상기 생성된 추적 정보를 분할하며, 상기 분할된 추적 정보를 식별하는 그룹 번호 값을 추가하여 워터마킹 정보를 생성하는 워터마킹 정보 생성부,
    상기 워터마킹 정보의 비트 값에 기초하여 상기 워터마킹 패턴 이미지를 호출하고, 동영상 데이터에 프레임 별로 상기 프레임의 일부에 상기 호출된 워터마킹 패턴 이미지를 순차적으로 오버레이시키는 오버레이부
    를 포함하되,
    상기 오버레이부는 워터마킹 정보를 반복하여 오버레이 시키는 것인 워터마킹 장치.
  2. 제 1 항에 있어서,
    상기 워터마킹 정보 생성부는 상기 분할된 추적 정보의 그룹 번호를 나타내는 비트 값과 짝을 이루어 토글 비트를 추가하며, 상기 짝을 이루는 그룹 번호 비트 값 및 토글 비트 값들을 기 설정된 회수만큼 반복시키는 것인 워터마킹 장치.
  3. 제 2 항에 있어서,
    상기 오버레이부는 상기 워터마킹 패턴 이미지를 상기 추적 정보의 그룹 번호 비트 값 및 상기 그룹 번호 비트 값과 짝을 이루는 토글 비트 값을 모두 포함한 비트 값에 기초하여 호출하는 것인 워터마킹 장치.
  4. 제 2 항에 있어서,
    상기 워터마킹 패턴 이미지는 로고 이미지에 기 설정된 비트 값을 포함시켜 생성된 것인 워터마킹 장치.
  5. 제 2 항에 있어서,
    상기 워터마킹 정보 생성부 및 상기 오버레이부는 IPTV 서비스 사업자로부터 워터마킹과 관련된 규칙을 수신하는 것인 워터마킹 장치.
  6. 제 2 항에 있어서,
    로고 이미지에 기 설정된 비트 값을 포함시켜 워터마킹 패턴 이미지를 생성 하는 워터마킹 패턴 이미지 생성부를 더 포함하는 것인 워터마킹 장치.
  7. 추적 정보를 분할하여 워터마킹하는 방법에 있어서,
    사용자 ID 값 또는 사용자 단말기 ID 값에 기초하여 이진화된 추적 정보를 생성하는 단계,
    상기 생성된 추적 정보를 분할하고, 상기 분할된 추적 정보를 식별하는 그룹 번호 값을 상기 분할된 추적 정보 사이에 삽입하는 단계 및
    상기 그룹 번호가 삽입된 추적 정보에 기초하여, 기 설정된 비트 값이 포함된 워터마킹 패턴 이미지를 호출하고, 동영상 데이터에 프레임 별로 상기 호출된 워터마킹 패턴 이미지를 상기 프레임의 일부분에 순차적으로 오버레이시키는 단계
    를 포함하는 워터마킹 방법.
  8. 제 7 항에 있어서,
    상기 오버레이시키는 단계는 상기 워터마킹 패턴 이미지를 기 설정된 비트 수를 주기로 하여 반복하여 오버레이시키는 것인 워터마킹 방법.
  9. 제 7 항에 있어서,
    상기 분할된 추적 정보의 그룹 번호를 나타내는 비트 값과 짝을 이루어 토글 비트를 추가하고, 상기 짝을 이루는 그룹 번호 비트 값 및 토글 비트 값들을 기 설정된 회수만큼 반복시키는 단계를 더 포함하는 워터마킹 방법.
  10. 제 7 항에 있어서,
    상기 워터마킹 패턴 이미지는 상기 추적 정보의 그룹 번호 비트 값 및 상기 그룹 번호 비트 값과 짝을 이루는 토글 비트 값이 모두 포함되어 생성된 것인 워터마킹 방법.
  11. 제 7 항에 있어서,
    상기 워터마킹 패턴 이미지는 로고 이미지에 기 설정된 비트 값을 포함시켜 생성된 것인 워터마킹 방법.
  12. 제 7 항에 있어서,
    로고 이미지에 기 설정된 비트 값을 포함시켜 워터마킹 패턴 이미지를 생성하는 단계를 더 포함하는 것인 워터마킹 방법.
  13. 워터마킹된 추적 정보를 검출하는 방법에 있어서,
    동영상 데이터 프레임의 일부분에 오버레이된 이미지로부터 분할된 추적 정보 및 상기 분할된 추적 정보 별 그룹 번호를 포함하는 워터마킹 정보를 추출하는 단계,
    상기 추출된 워터마킹 정보로부터 상기 그룹 번호 사이에 위치한 상기 분할된 추적 정보를 추출하는 단계,
    상기 그룹 번호에 기초하여 상기 추출된 분할된 추적 정보를 순서대로 조합하는 단계 및
    상기 조합된 추적 정보로부터 사용자 ID 값 또는 사용자 단말기 ID 값을 검출하는 단계
    를 포함하는 추적 정보 검출 방법.
  14. 제 13 항에 있어서,
    상기 추출된 분할된 추적 정보에 오류가 존재하는 경우에 상기 워터마킹 정보를 반복하여 추출하는 단계 및
    상기 반복하여 추출된 워터마킹 정보로부터 상기 오류가 존재한 분할된 추적 정보의 그룹 번호에 대응하는 분할된 추적 정보를 추출하는 단계
    를 더 포함하는 추적 정보 검출 방법.
  15. 제 14 항에 있어서,
    상기 그룹 번호는 토글 비트와 짝을 이루어 복수 회 반복하여 존재하며, 상기 반복되는 그룹 번호 값 중에서 과반수 이상의 값을 유효한 그룹 번호 값으로 판단하는 것인 추적 정보 검출 방법.
  16. 제 14 항에 있어서,
    워터마킹 정보를 추출하는 단계는 상기 동영상 데이터의 프레임 별로 삽입된 로고 이미지로부터 추출되는 것인 추적 정보 검출 방법.
KR1020080120549A 2008-12-01 2008-12-01 분할된 추적 정보를 이용한 워터마킹 장치 및 방법 KR101529082B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020080120549A KR101529082B1 (ko) 2008-12-01 2008-12-01 분할된 추적 정보를 이용한 워터마킹 장치 및 방법
US12/452,418 US8189859B2 (en) 2008-12-01 2009-12-01 Apparatus for inserting watermark and method therefor
PCT/KR2009/007121 WO2010064830A2 (ko) 2008-12-01 2009-12-01 워터마크 삽입 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080120549A KR101529082B1 (ko) 2008-12-01 2008-12-01 분할된 추적 정보를 이용한 워터마킹 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20100062111A KR20100062111A (ko) 2010-06-10
KR101529082B1 true KR101529082B1 (ko) 2015-06-17

Family

ID=42233724

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080120549A KR101529082B1 (ko) 2008-12-01 2008-12-01 분할된 추적 정보를 이용한 워터마킹 장치 및 방법

Country Status (3)

Country Link
US (1) US8189859B2 (ko)
KR (1) KR101529082B1 (ko)
WO (1) WO2010064830A2 (ko)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012065258A (ja) * 2010-09-17 2012-03-29 Sony Corp 情報処理装置、および情報処理方法、並びにプログラム
KR20120060350A (ko) * 2010-12-02 2012-06-12 삼성전자주식회사 영상처리장치 및 그 제어방법
KR101808817B1 (ko) * 2010-12-06 2017-12-13 한국전자통신연구원 디지털 콘텐츠 포렌식마킹 장치 및 그 방법
US9239910B2 (en) * 2011-04-04 2016-01-19 Markany Inc. System and method for preventing the leaking of digital content
IL218701A0 (en) * 2012-03-18 2012-07-31 Itzik Mantin Encryption-resistant watermarking
EP2693392A1 (en) * 2012-08-01 2014-02-05 Thomson Licensing A second screen system and method for rendering second screen information on a second screen
EP2843963A1 (en) * 2013-08-30 2015-03-04 Thomson Licensing Method for watermarking a content
GB201410032D0 (en) * 2014-06-05 2014-07-16 Friend Mts Ltd Watermarking
US10504200B2 (en) 2014-03-13 2019-12-10 Verance Corporation Metadata acquisition using embedded watermarks
WO2015138798A1 (en) 2014-03-13 2015-09-17 Verance Corporation Interactive content acquisition using embedded codes
US9805434B2 (en) 2014-08-20 2017-10-31 Verance Corporation Content management based on dither-like watermark embedding
WO2016086047A1 (en) 2014-11-25 2016-06-02 Verance Corporation Enhanced metadata and content delivery using watermarks
US9942602B2 (en) 2014-11-25 2018-04-10 Verance Corporation Watermark detection and metadata delivery associated with a primary content
US9602891B2 (en) 2014-12-18 2017-03-21 Verance Corporation Service signaling recovery for multimedia content using embedded watermarks
US10136194B2 (en) * 2016-07-06 2018-11-20 Cisco Technology, Inc. Streaming piracy detection method and system
IL251149A0 (en) 2017-03-14 2017-06-29 Google Inc Semi-transparent marks for transferred content
CN108648132B (zh) * 2018-04-16 2020-08-14 深圳市联软科技股份有限公司 根据图形生成水印的方法、系统、终端及介质
CN110062291A (zh) * 2019-04-29 2019-07-26 王子孟 一种数字水印添加与提取方法、装置及系统
CN112040336B (zh) * 2019-06-03 2023-03-14 中兴通讯股份有限公司 视频水印添加、提取的方法、装置和设备
KR102265784B1 (ko) * 2019-11-22 2021-06-17 (주)잉카엔트웍스 클라이언트측 포렌식 워터마크 장치, 시스템 및 방법
KR102592989B1 (ko) * 2020-05-28 2023-10-23 (주)리마보안연구소 동영상 복제 검출 및 추적 방법 및 장치
US11722741B2 (en) 2021-02-08 2023-08-08 Verance Corporation System and method for tracking content timeline in the presence of playback rate changes
RU2758666C1 (ru) * 2021-03-25 2021-11-01 Публичное Акционерное Общество "Сбербанк России" (Пао Сбербанк) Способ и система защиты цифровой информации, отображаемой на экране электронных устройств, с помощью динамических цифровых меток
CN113573141B (zh) * 2021-07-21 2022-09-30 北京奇艺世纪科技有限公司 一种视频处理方法、装置、电子设备及存储介质
CN116456154B (zh) * 2023-06-16 2023-09-01 深圳市华曦达科技股份有限公司 一种视频盗版溯源方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6101602A (en) * 1997-12-08 2000-08-08 The United States Of America As Represented By The Secretary Of The Air Force Digital watermarking by adding random, smooth patterns
US20050025333A1 (en) * 2003-03-05 2005-02-03 Yasuhiro Fujii Method of watermarking for binary images

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7313251B2 (en) * 1993-11-18 2007-12-25 Digimarc Corporation Method and system for managing and controlling electronic media
KR100339860B1 (ko) * 1999-12-22 2002-06-05 이원돈 오디오신호에 영상의 워터마크를 삽입 또는 추출하는 방법및 이를 위한 기록매체
KR100405827B1 (ko) 2001-05-03 2003-11-14 주식회사 마크애니 디지털 워터마크의 삽입/추출방법과 이를 이용한 워터마크삽입/추출 장치
KR100612830B1 (ko) * 2001-11-14 2006-08-18 삼성전자주식회사 신뢰성 높은 워터마킹 및 워터마크 추출 장치와 그 방법
KR100492743B1 (ko) * 2003-04-08 2005-06-10 주식회사 마크애니 신호의 특성값의 양자화에 의한 워터마크 삽입 및 검출방법
EP1634238B1 (en) * 2003-05-09 2012-11-21 Avid Technology, Inc. Watermarking
EP1530357A1 (en) * 2003-11-06 2005-05-11 Ricoh Company, Ltd. Method, computer program, and apparatus for detecting specific information included in image data of original image with accuracy, and computer readable storing medium storing the program

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6101602A (en) * 1997-12-08 2000-08-08 The United States Of America As Represented By The Secretary Of The Air Force Digital watermarking by adding random, smooth patterns
US20050025333A1 (en) * 2003-03-05 2005-02-03 Yasuhiro Fujii Method of watermarking for binary images

Also Published As

Publication number Publication date
WO2010064830A3 (ko) 2010-08-19
KR20100062111A (ko) 2010-06-10
US20110188700A1 (en) 2011-08-04
WO2010064830A2 (ko) 2010-06-10
US8189859B2 (en) 2012-05-29

Similar Documents

Publication Publication Date Title
KR101529082B1 (ko) 분할된 추적 정보를 이용한 워터마킹 장치 및 방법
US11166056B2 (en) Method and system for remotely controlling consumer electronic devices
US9756381B2 (en) Method and apparatus for processing digital service signals
US8990844B2 (en) Method and apparatus for processing digital service signals
KR101193534B1 (ko) 비디오 콘텐츠에 워터마크를 삽입하는 워터마킹 장치 및 방법
US20100064305A1 (en) System and method of detecting unauthorized content usage
KR102618316B1 (ko) 다운스트림 엔티티에 의한 액션을 용이하게 하기 위한, 전송 스트림 메타데이터를 기반으로 하는 미디어의 동적 워터마킹
US20220150601A1 (en) Use of Watermarking to Trigger Fingerprint-Related Action
US20100064139A1 (en) System and method of extending marking information in content distribution
KR101153262B1 (ko) 비디오 콘텐츠에 워터마크를 중첩하여 삽입/검출하는 시스템 및 방법
KR20110042946A (ko) 다중 워터마크 삽입 시스템 및 방법
WO2020263621A1 (en) Use of watermarking to trigger fingerprint-related action

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant