일반적으로 멀티미디어 콘텐츠는 이를 소비하는 사용자에게 네트워크를 통하여 실시간으로 전달되고, 멀티미디어 콘텐츠를 제공하는 서비스 제공자는 워터마크를 삽입한 멀티미디어 콘텐츠를 제공할 수도 있다. 멀티미디어 콘텐츠에 워터마크를 삽입하는 목적은 콘텐츠의 무결성을 입증하기 위한 것일 수도 있고, 저작권 보호를 위한 것일 수도 있다.
이와 관련하여, 서비스 제공자가 제공하는 멀티미디어 콘텐츠는 디지털 정보로서 인터넷 등의 통신망을 통하여 개인 사용자들 사이에서 P2P 프로그램 등에 의하여 손쉽게 전파될 수 있다. 이러한 행위는 용이하게 수행될 수 있지만, 이러 한 불법적인 복제 및 전파가 일어나는 경로를 추적하는 것은 용이하지 않다. 따라서, 서비스 제공자로부터 제공되는 멀티미디어 콘텐츠에 워터마크를 삽입함으로써 불법 유통을 방지하는 포렌식 마킹 (Forensic Marking) 은 그 해결책이 될 수 있다.
포렌식 마킹이란 콘텐츠의 불법 유통의 경로를 추적할 수 있도록 하는 워터마크를 콘텐츠에 삽입하는 기술을 의미한다. 포렌식 워터마크는 도난당한 자동차를 추적하는데 사용될 수 있는 차량 식별 번호와 같이, 불법 복제된 콘텐츠의 소스를 찾아내는데 유용하다. 예를 들어, 저작권으로 보호되는 매체가 P2P 프로그램 등을 통하여 검색되어 불법적으로 배포된 것으로 판단된다면, 콘텐츠 소유권자는 의심되는 콘텐츠 내에서 워터마크를 추출할 수 있고, 콘텐츠를 불법 유통시킨 자를 식별할 수 있다.
포렌식 마킹에 있어서 삽입되는 워터마크는 강인성이 요구된다. 여기서 워터마크의 강인성이란 워터마크가 포함된 멀티미디어 콘텐츠의 필터링, 변형, 압축 등의 공격에 의하여 워터마크가 변형되지 않고 유지되는 성질을 의미한다. 또한, 포렌식 마킹을 위한 워터마크에는 멀티미디어 콘텐츠를 제공받는 사용자의 정보와 관련되어, 추후 불법 유통되는 멀티미디어 콘텐츠로부터 추출되는 워터마크로부터 그 멀티미디어 콘텐츠가 서비스 제공자로부터 어떤 사용자에게 제공된 것인지 추적할 수 있는 단서를 제공할 수 있다.
한편, 일반적으로 멀티미디어 콘텐츠는 텍스트 또는 이미지 (정지 화상) 이 아닌 오디오 또는 비디오 형식의 콘텐츠를 의미하고, 이러한 멀티미디어 콘텐츠는 이미지에 비하여 상당히 많은 양의 데이터를 포함한다. 또한, 멀티미디어 콘텐츠를 원본 데이터의 형태로 송신 또는 수신하는 경우에는, 그 데이터의 용량이 커서 송신 또는 수신의 대상으로서 적합하지 않다. 따라서, 일반적으로 멀티미디어 콘텐츠의 대부분은 그 원본 데이터가 아닌 압축된 데이터의 형태로 이용된다.
또한, 콘텐츠의 일부분에만 워터마크를 삽입하는 경우에는 워터마크의 삽입 처리에 소요되는 리소스 및 시간을 절감할 수는 있다. 그러나, 워터마크가 삽입된 일부분을 제외한 나머지 상당한 부분이 콘텐츠로서의 가치에 큰 영향을 주지 않는다면, 이러한 부분만을 제거하여 콘텐츠를 배포할 수도 있고, 워터마크된 부분을 추출하거나 또는 제거하는 것이 더 용이할 수도 있다. 따라서, 포렌식 마킹으로서의 워터마크 삽입은 콘텐츠의 상당한 부분에 전반적으로 이루어져야 한다.
이러한 멀티미디어 콘텐츠에 대하여 포렌식 마킹을 하는 경우, 종래에는 워터마크의 높은 강인성을 보장하기 위하여 멀티미디어 콘텐츠의 압축되지 않은 원본 데이터 (raw data) 에 워터마크를 삽입하였다. 이러한 종래기술에 의하는 경우 압축된 멀티미디어 콘텐츠의 압축을 푼 원본 데이터의 상태에서 워터마크를 삽입하고, 워터마크가 삽입된 원본 데이터를 압축하여 실시간 제공이 가능한 멀티미디어 콘텐츠를 획득하는 과정이 필요하게 된다. 따라서, 사용자 정보와 관련된 워터마크를 삽입하는 포렌식 마킹의 경우에는, 사용자로부터 사용자의 정보를 획득한 후, 압축된 멀티미디어 콘텐츠를 풀어 원본 데이터의 상태에서 워터마크를 삽입하고 이를 다시 압축하는 데에 많은 시간이 소요되므로, 사용자의 요청이 있는 즉시 실시간으로 멀티미디어 콘텐츠를 제공하는 것이 불가능한 문제점이 있다.
한편, 이러한 문제점을 보완하기 위하여 최근에는 압축된 멀티미디어 콘텐츠에 직접 워터마크를 삽입하는 비트스트림 워터마킹 방식이 제안되고 있으나, 이러한 방식은 원본 데이터에 직접 워터마크를 삽입하는 방식에 비하여 워터마크의 강인성이 많이 떨어지므로 포렌식 마킹에 이용하기에는 부적절한 문제점이 있다.
이하, 본 발명에 대하여 첨부하는 도면을 참조하여 상세하게 설명한다.
도 1 은 워터마크를 포함하는 멀티미디어 콘텐츠를 사용자의 요청에 따라 제공하는 전반적인 과정 (100) 을 도시한 블록도로서, 서비스 제공자 단말 (110), 사용자 단말 (120), 및 서비스 제공자 측에서 유지되는 테이블 데이터베이스 (130) 사이의 동작에 대하여 설명한다.
서비스 제공자 단말 (110) 은 다양한 멀티미디어 콘텐츠를 사용자 단말 (120) 로부터의 요청에 따라 제공하고, 사용자 단말 (120) 로부터의 요청에 즉시 응답하여 사용자가 요청한 멀티미디어 콘텐츠를 실시간으로 제공할 수 있다. 또한, 서비스 제공자 단말 (110) 은 다양한 멀티미디어 콘텐츠를 사용자의 요청에 앞서 미리 구비하고 있다.
서비스 제공자 단말 (110) 에 의하여 배포되는 멀티미디어 콘텐츠의 불법적인 복제 및 유통을 방지하기 위하여, 즉, 포렌식 마킹을 위하여, 멀티미디어 콘텐츠에 워터마크를 삽입할 수 있다. 이 때 삽입되는 워터마크는 강인한 워터마크이며, 멀티미디어 콘텐츠의 원본 데이터 (raw data) 상태에 삽입된다. 또한, 워터마크의 삽입은 콘텐츠의 상당한 부분에 전반적으로 이루어질 수도 있다.
원본 데이터에 강인한 워터마크가 삽입된 후, 워터마크가 삽입된 데이터는 압축되어 실시간 제공가능한 멀티미디어 콘텐츠로서 저장된다. 이로써 불법적인 복제 등에 수반되는 디지털 데이터의 변형, 왜곡, 훼손에도 삽입된 워터마크가 사라지지 않아, 불법 유통의 경로에 있는 데이터에서 워터마크를 추출할 수 있게 되므로, 포렌식 마킹에 적합한 특징을 가질 수 있게 된다. 워터마크 삽입 및 추출에 관련한 구체적인 기술은 해당 기술분야의 당업자에게 널리 알려진 바와 같으므로, 본 발명의 특징을 명료하게 표현하기 위하여 그 구체적인 설명은 생략한다.
서비스 제공자 단말 (110) 이 구비하고 있는 다양한 멀티미디어 콘텐츠 각각에 워터마크를 삽입함에 있어서, 어떤 멀티미디어 콘텐츠에 어떤 워터마크 정보가 삽입되는지 그 연관정보를 생성하여 저장할 수 있다. 저장된 연관정보는 테이블 데이터베이스 (130) 에 테이블 (132) 로서 저장될 수 있다.
데이터베이스 (130) 에 테이블 (132) 이 저장되는 한편, 서비스 제공자 단말 (110) 은 워터마크가 삽입된 멀티미디어 콘텐츠 (워터마킹된 멀티미디어 콘텐츠) 를 사용자 단말 (120) 에 제공가능한 멀티미디어 콘텐츠로서 저장할 수 있다 (112).
사용자는 서비스 제공자 단말 (110) 이 구비하는 다양한 멀티미디어 콘텐츠 중에서 하나 또는 복수개를 선택하여, 이에 대한 요청을 송신하고 (122), 서비스 제공자 단말 (110) 은 사용자 단말 (120) 로부터의 요청을 수신할 수 있다 (114).
사용자의 요청을 수신한 서비스 제공자 단말 (110) 이 사용자 단말 (120) 에 워터마킹된 멀티미디어 콘텐츠를 제공하는 것과 병렬적으로 테이블 데이터베이스 (130) 에서 멀티미디어 콘텐츠와 워터마크 정보의 연관정보가 저장된 테이블 (132) 을 이용하여, 어떤 사용자에게 어떤 멀티미디어 콘텐츠가 제공되는지에 대한 연관정보를 생성하여 테이블 (134) 로서 저장할 수도 있다. 즉, 테이블 (134) 의 생성 및 저장하는 동작은 워터마킹된 멀티미디어 콘텐츠를 사용자에게 제공하는 동작보다 전, 후, 또는 동시에 수행될 수도 있다. 이로써, 서비스 제공자 단말 (110) 은 테이블 (134) 에 저장된 연관정보에 의하여, 어떤 사용자에게 어떤 워터마킹된 멀티미디어 콘텐츠가 제공되었는지 알 수 있게 된다.
테이블 (134) 이 저장되는 한편, 서비스 제공자 단말 (110) 은 워터마킹된 멀티미디어 콘텐츠를 사용자 단말 (120) 에 송신하고 (116), 사용자 단말 (120) 에서는 요청한 멀티미디어 콘텐츠에 대응하는 워터마킹된 멀티미디어 콘텐츠를 수신하여 이를 재생, 감상할 수 있게 된다 (124).
한편, 종래의 멀티미디어 콘텐츠 실시간 제공 서비스의 기술에 있어서 사용자의 요청으로부터 사용자가 해당 멀티미디어 콘텐츠를 수신하기까지 소요되는 시간은, 본 발명에 있어서 사용자의 요청 송신 (122) 로부터 서비스 제공자의 요청 수신 (114), 서비스 제공자로부터의 워터마킹된 멀티미디어 콘텐츠의 송신 (116) 및 그 수신 (124) 에 이르기까지 소요되는 시간과 동일하다. 또한, 본 발명에 있어서는 사용자 단말 (120) 로부터의 요청이 있기 전에 미리 워터마킹된 멀티미디어 콘텐츠를 생성하여 저장한 상태이므로, 제공하려는 멀티미디어 콘텐츠에 워터마킹을 삽입하는 동작은 사용자 단말 (120) 로부터의 요청 이후의 시간에 산입되지 않는다. 또한, 사용자 정보를 포함하는 연관정보를 테이블 (134) 로서 생성하는 것은 사용자에게 워터마킹된 멀티미디어 콘텐츠를 송신 (116) 하는 것과 동시에 병렬적으로 수행되는 것이므로, 사용자 단말 (120) 에 실시간 서비스를 제공하는 데 소요되는 시간과 무관하다. 또는, 워터마킹된 멀티미디어 콘텐츠를 제공하기에 앞서 테이블 (134) 을 생성하는 경우라고 하더라도, 테이블 (134) 는 테이블 (132) 에 사용자 정보만을 연관시키는 동작을 추가적으로 수행할 뿐이므로, 이 동작에 소요되는 시간은 극히 작다. 따라서, 사용자가 인지하는 실시간 서비스의 품질, 즉, 사용자의 요청으로부터 멀티미디어 콘텐츠를 제공받는 데까지 소요되는 시간은, 종래기술의 경우와 실질적으로 동일하다. 따라서, 사용자 단말 (120) 에서는 요청한 멀티미디어 콘텐츠에 대응하는 워터마킹된 멀티미디어 콘텐츠를 실시간으로 제공받을 수 있다.
도 2 는 워터마크가 포함된 멀티미디어 콘텐츠를 생성하여 제공하는 방법 (200) 에 대하여 서비스 제공자 측에서 설명하는 블록도이다.
우선, 서비스 제공자는 다양한 멀티미디어 콘텐츠의 각각의 원본 데이터 상태에 워터마크 정보를 삽입한 후에 이를 압축함으로써, 워터마크가 삽입된 멀티미 디어 콘텐츠 (워터마킹된 멀티미디어 콘텐츠) 를 미리 생성하고 저장한다 (S210). 다음으로, 사용자로부터의 멀티미디어 콘텐츠 요청을 수신하는 경우 (S220), 서비스 제공자는 사용자가 요청한 멀티미디어 콘텐츠에 대응하는 워터마킹된 멀티미디어 콘텐츠를 검색하여 준비하고, 이 워터마킹된 멀티미디어 콘텐츠와 사용자의 정보를 매칭하는 테이블을 생성하여 저장한다 (S230). 마지막으로, 서비스 제공자는 사용자가 요청한 멀티미디어 콘텐츠에 대응하는 워터마킹된 멀티미디어 콘텐츠를 사용자에게 실시간으로 송신한다 (S240). 전술한 매칭 테이블 생성 및 저장단계 (S230) 와 실시간 송신 단계 (S240) 은 병렬적으로 수행될 수도 있다. 실시간 송신의 구체적인 기술은 해당 기술분야의 당업자에게 널리 알려진 바와 같으므로 본 발명의 특징을 명료하게 나타내기 위하여 그 구체적인 설명은 생략한다.
도 3 은 워터마크를 포함하는 멀티미디어 콘텐츠를 제공하는 시스템 (300) 을 설명하기 위한 블록도로서, 시스템 (300) 은 분배 서버 (310), 사용자 단말 (320) 및 네트워크 (330) 를 포함할 수 있다. 여기서, 사용자 단말 (320) 은 멀티미디어 콘텐츠를 소비하는 일반적인 사용자에 의하여 제어되는 단말을 의미하고, 통신망 (320) 은 인터넷 등의 일반적인 유선/무선 통신망을 포함할 수도 있다. 이하에서는 분배 서버 (310) 에 대하여 구체적으로 설명한다.
분배 서버 (310) 는 멀티미디어 콘텐츠 데이터베이스 (311), 워터마크 정보 생성부 (312), 워터마크 삽입부 (313), 워터마킹된 멀티미디어 콘텐츠 데이터베이스 (314), 테이블 데이터베이스 (315), 송신부 (316), 수신부 (317) 및 제어부 (318) 를 포함할 수 있다. 분배 서버 (310) 의 구성요소들 (311 내지 315) 은 분배 서버 (310) 내에 일체로 배치될 수도 있고, 또는 분배 서버 (310) 의 외부에 각각 형성되어 분배 서버에 접속함으로써 배치될 수도 있다.
멀티미디어 콘텐츠 데이터베이스 (311) 는 분배 서버 (310) 로부터 사용자에게 제공될 수 있는 하나 이상의 다양한 멀티미디어 콘텐츠를 저장할 수 있다 멀티미디어 콘텐츠 데이터베이스 (311) 에 저장된 멀티미디어 콘텐츠들 각각에는 고유한 식별정보가 부여될 수 있다. 고유한 식별정보는 해당 멀티미디어 콘텐츠의 파일명, 파일 위치 (경로), 크기 등의 속성의 하나 이상을 포함할 수도 있다.
워터마크 정보 생성부 (312) 는 멀티미디어 콘텐츠에 삽입되는 하나 이상의 워터마크의 정보를 생성하여 저장한다. 워터마크로서 포함되는 정보는 서비스 제공자의 명칭, 포렌식 마킹으로서의 정보 등을 포함할 수도 있고, 또는 임의의 정보일 수도 있다. 생성된 워터마크 정보는 각각의 고유한 식별정보에 의하여 구별될 수 있다. 고유한 식별정보는 해당 워터마크의 생성일자, 일련번호 등의 속성의 하나 이상을 포함할 수도 있다.
워터마크 삽입부 (313) 에서는, 멀티미디어 콘텐츠 데이터베이스 (311) 로부터 멀티미디어 콘텐츠를 수신받으며, 워터마크 삽입부 (313) 에서 수신하는 멀티미디어 콘텐츠는 원본 데이터의 상태이다. 또한, 워터마크 삽입부 (313) 는 워터마크 정보 생성부 (312) 로부터 워터마크 정보를 수신한다. 워터마크 삽입부에서 수신된 멀티미디어 콘텐츠에 워터마크 정보를 삽입함으로써 워터마크가 삽입된 멀티미디어 콘텐츠 (워터마킹된 멀티미디어 콘텐츠) 를 생성하고, 이를 워터마킹된 멀티미디어 콘텐츠 데이터베이스 (314) 에 저장한다. 또한, 워터마킹된 멀티미 디어 콘텐츠는 압축된 상태로 데이터베이스 (314) 에 저장된다. 이러한 워터마킹된 멀티미디어 콘텐츠의 생성 및 저장은 사용자로부터의 멀티미디어 콘텐츠의 요청에 앞서서 미리 수행된다.
워터마크 삽입부 (313) 에서 수행되는 워터마킹의 삽입에 따라서, 테이블 데이터베이스 (315) 에서는 멀티미디어 콘텐츠의 식별정보와 해당 멀티미디어 콘텐츠에 삽입된 워터마크의 식별정보의 연관정보를 생성하여 저장할 수 있다. 이러한 연관정보는 다음의 표 1 과 같은 매칭 테이블로서 생성될 수 있다.
멀티미디어 콘텐츠 식별정보 |
워터마크 식별정보 |
CID001 |
WM001 |
CID002 |
WM007 |
CID003 |
WM010 |
CID004 |
WM074 |
... |
... |
표 1 에서 알수 있는 바와 같이, 다양한 멀티미디어 콘텐츠의 각각에 삽입된 워터마크가 각각 무엇인지 알 수 있게 된다. 이는 후술하는 바와 같이 사용자 식별정보와 연관되어 포렌식 마킹으로서의 기능을 수행할 수 있도록 한다.
사용자 단말 (320) 로부터의 멀티미디어 콘텐츠 요청이 수신부 (317) 를 통하여 수신되는 경우, 워터마킹된 멀티미디어 콘텐츠 데이터베이스 (314) 에 저장된 워터마킹된 멀티미디어 콘텐츠들 중에서 사용자가 요청한 멀티미디어 콘텐츠에 대응하는 워터마킹된 멀티미디어 콘텐츠가 검색 및 추출될 수 있다. 또한, 수신부 (317) 를 통해서 사용자 단말 (320) 이 멀티미디어 콘텐츠의 요청을 위하여 분배 서버 (310) 에 접속할 때에 사용자 식별정보를 획득할 수 있다. 사용자 식별정보는 사용자 아이디, 접속일자, 접속 아이피 등의 속성의 하나 이상을 포함할 수도 있다.
사용자 단말 (320) 의 요청에 대응하는 워터마킹된 멀티미디어 콘텐츠를 사용자에게 제공하는 것 병렬적으로 테이블 데이터베이스 (315) 에서는 사용자의 식별정보와 사용자에게 제공될 멀티미디어 콘텐츠의 식별정보의 연관정보를 생성하여 저장할 수 있다. 이러한 연관정보는 다음의 표 2 와 같은 매칭 테이블로서 저장될 수도 있다.
멀티미디어 콘텐츠 식별정보 |
워터마크 식별정보 |
사용자 식별정보 |
CID001 |
WM001 |
USER001 |
CID002 |
WM007 |
USER042 |
CID003 |
WM010 |
USER002 |
CID004 |
WM074 |
USER001 |
... |
... |
... |
표 2 의 일 실시예는 표 1 과 같은 매칭 테이블에 저장된 콘텐츠 식별정보 및 워터마크 식별정보에 사용자 식별정보가 추가로 연관되어 생성된 것이다.
또한, 본 발명의 다른 실시예에 의하면 표 1 의 매칭 테이블과는 별도의 매칭 테이블로서 멀티미디어 콘텐츠 식별정보와 사용자 식별정보만의 연관정보가 생성되거나, 워터마크 식별정보와 사용자 식별정보만의 연관정보가 생성될 수도 있다.
멀티미디어 콘텐츠 식별정보, 워터마크 식별정보, 사용자 식별정보 사이에 연관정보가 생성되어 테이블 데이터베이스 (315) 에 저장된 후에, 또는 멀티미디어 콘텐츠 식별정보, 워터마크 식별정보, 사용자 식별정보 사이에 연관정보가 생성되는 것과 동시에, 송신부 (316) 에서는 사용자가 요청한 멀티미디어 콘텐츠에 대응하는 워터마킹된 멀티미디어 콘텐츠를 사용자에게 송신한다. 송신부 (316) 에서 워터마킹된 멀티미디어 콘텐츠를 송신하여, 사용자 단말 (320) 에서는 워터마킹된 멀티미디어 콘텐츠를 수신하여 실시간으로 재생 및 감상할 수 있다. 이러한 송신은 스트리밍 서비스를 위한 송신일 수도 있다.
사용자 단말 (320) 에 워터마킹된 멀티미디어 콘텐츠를 제공한 후에, 사용자가 이를 불법적으로 복제하거나 유통하더라도, 어떤 사용자가 어떤 워터마크가 포함된 어떤 멀티미디어 콘텐츠를 제공받았는지에 대한 연관정보가 서비스 제공자측 (분배 서버) 에 유지되고 있으므로, 그 불법적인 유통의 경로를 추적할 수 있게 되고, 이러한 불법 행위를 미연에 방지할 수 있게 된다.
전술한 분배 서버 (310) 의 각각의 구성요소들 (311 내지 317) 의 동작 및 상호동작은 제어부 (318) 에 의하여 적절하게 제어되고, 각각의 구성요소들 (311 내지 317) 사이의 신호 또는 데이터의 전송은 버스 (319) 를 통하여 수행된다.
지금까지, 본 발명에 따른 워터마크를 포함하는 멀티미디어 콘텐츠의 실시간 제공방법 및 장치 등에 대한 바람직한 실시예가 개시되고 설명되었지만, 이는 본 발명이 속하는 기술 분야의 숙련된 자에게 있어 이러한 실시예가 오직 예시를 위한 것임이 명확하게 이해될 수 있고, 본 발명의 기술적 사상의 범위는 이러한 실시예에 한정되는 것이 아니며 다양하게 변경, 변형, 치환 또는 대체될 수 있음은 명백하다. 또한, 본 발명의 기술적 사상은 전술한 실시예에 한정되는 것이 아니라, 오직 첨부된 특허청구범위 및 그에 균등한 기술적 원리에 의해서만 한정될 뿐임이 명백하다.