KR102291540B1 - Apparatus and method for inserting forensic watermarks - Google Patents

Apparatus and method for inserting forensic watermarks Download PDF

Info

Publication number
KR102291540B1
KR102291540B1 KR1020190143373A KR20190143373A KR102291540B1 KR 102291540 B1 KR102291540 B1 KR 102291540B1 KR 1020190143373 A KR1020190143373 A KR 1020190143373A KR 20190143373 A KR20190143373 A KR 20190143373A KR 102291540 B1 KR102291540 B1 KR 102291540B1
Authority
KR
South Korea
Prior art keywords
watermark
content
embedding
section
information
Prior art date
Application number
KR1020190143373A
Other languages
Korean (ko)
Other versions
KR20210056658A (en
Inventor
박병선
박상호
윤성주
Original Assignee
(주)잉카엔트웍스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)잉카엔트웍스 filed Critical (주)잉카엔트웍스
Priority to KR1020190143373A priority Critical patent/KR102291540B1/en
Publication of KR20210056658A publication Critical patent/KR20210056658A/en
Application granted granted Critical
Publication of KR102291540B1 publication Critical patent/KR102291540B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/005—Robust watermarking, e.g. average attack or collusion attack resistant
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2201/00—General purpose image data processing
    • G06T2201/005—Image watermarking
    • G06T2201/0063—Image watermarking in relation to collusion attacks, e.g. collusion attack resistant

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 포렌식 워터마크 임베딩 장치 및 방법에 관한 것으로, 본 발명에 따른 포렌식 워터마크 임베딩 장치는, 임베딩 정보를 저장하기 위한 데이터베이스 유닛; 원본 콘텐츠에서 소정 구간의 콘텐츠마다 블록들을 분석하여 동일 블록에 대해, 워터마크 0을 임베딩하고 생성된 0 임베딩 콘텐츠를 포함한 0 콘텐츠들을 0 콘텐츠 파일로 저장하고 그리고 워터마크 1을 임베딩하고 1 임베딩 블록들을 청크 파일로 저장하고, 워터마크 0 또는 1이 임베딩된 블록들에 대한 임베딩 정보를 데이터베이스 유닛에 저장하는 전처리 유닛; 및 데이터베이스 유닛에 저장된 임베딩 정보를 이용하여 전처리 유닛으로부터 제공되는 0 콘텐츠 파일에서 워터마크 0이 임베딩된 블록들을 추출하고 워터마크 정보에 근거하여 청크 파일의 1 임베딩 블록들로 대체하여 워터마크 정보를 표시한 배포 콘텐츠를 출력하는 배포 유닛을 포함함으로써, 실시간 응답성을 보장하면서도 공모 공격에 강인한 포렌식 워터마크를 제공할 수 있다.The present invention relates to a forensic watermark embedding apparatus and method. The forensic watermark embedding apparatus according to the present invention comprises: a database unit for storing embedding information; Blocks are analyzed for each content of a predetermined section in the original content, and for the same block, watermark 0 is embedded, 0 contents including the 0 embedded contents are stored as 0 contents file, and watermark 1 is embedded and 1 embedding blocks are embedded. a pre-processing unit that stores as a chunk file and stores embedding information for blocks in which watermark 0 or 1 is embedded in a database unit; and extracting blocks in which watermark 0 is embedded from the 0 content file provided from the pre-processing unit by using the embedding information stored in the database unit, and replacing them with 1 embedding blocks of the chunk file based on the watermark information to display the watermark information By including a distribution unit that outputs one distribution content, it is possible to provide a forensic watermark that is robust against collusion attacks while ensuring real-time responsiveness.

Figure R1020190143373
Figure R1020190143373

Description

포렌식 워터마크 임베딩 장치 및 방법{APPARATUS AND METHOD FOR INSERTING FORENSIC WATERMARKS}Forensic watermark embedding apparatus and method

본 발명은 포렌식 워터마크 임베딩 장치 및 방법에 관한 것으로, 특히 워터마크 정보를 임베딩한 블록들을 미리 준비해두어 실시간 응답성을 보장하면서도 공모 공격에 강인한 포렌식 워터마크 임베딩 장치 및 방법에 관한 것이다. The present invention relates to an apparatus and method for embedding a forensic watermark, and more particularly, to an apparatus and method for embedding a forensic watermark that is robust against collusion attacks while ensuring real-time responsiveness by preparing blocks in which watermark information is embedded in advance.

서버 사이드에서 포렌식 워터마크를 임베딩하기 위해서는 실시간으로 사용자 정보를 임베딩해야 하는 어려움을 극복해야 한다. 이러한 어려움을 극복하기 위해, 전처리 과정을 통해 원본 콘텐츠에 워터마크 0을 임베딩한 0 콘텐츠 파일과 원본 콘텐츠에 워터마크 1을 임베딩한 1 콘텐츠 파일을 생성한 후에, 사용자 정보에 근거하여 실시간으로 전처리 과정에서 생성된 0 콘텐츠 파일과 1 콘텐츠 파일을 조합하여 포렌식 워터마크를 임베딩하는 방식이 사용되고 있다.In order to embed a forensic watermark on the server side, it is necessary to overcome the difficulty of embedding user information in real time. In order to overcome this difficulty, after creating a 0 content file with watermark 0 embedded in the original content and a 1 content file embedding watermark 1 in the original content through preprocessing, a preprocessing process in real time based on user information A method of embedding a forensic watermark by combining 0 content files and 1 content files created in .

하지만, 이 방식은 복수의 사용자가 각자가 자신이 가진 콘텐츠의 일부 구간을 섞어 쉽게 포렌식 워터마크를 무력화할 수 있는 치명적인 단점이 있다. 예를 들면, 두 명의 사용자가 각자 내려받은 콘텐츠 섹션들을 섞여서 완전히 다른 콘텐츠 파일을 만들어 서비스 제공자가 임베딩한 정보를 무력화할 수 있다. 그럼에도, 이 방식은 서버 사이드에서 실시간으로 포렌식 마크를 임베딩할 수 있다는 장점으로 인해, 공모 공격(collusion attack)에 취약함에도 시장에서 관심을 받고 있다. However, this method has a fatal disadvantage that a plurality of users can easily neutralize the forensic watermark by mixing some sections of their own content. For example, two users can shuffle their downloaded content sections to create a completely different content file, overriding information embedded by a service provider. Nevertheless, this method is attracting attention in the market despite being vulnerable to a collusion attack due to the advantage of embedding forensic marks in real time on the server side.

상술한 문제점을 해결하기 위해, 본 발명은 워터마크 정보를 임베딩한 블록들을 미리 준비해두어 실시간 응답성을 보장하면서도 공모 공격에 강인한 포렌식 워터마크 임베딩 장치 및 방법을 제공하는 것을 목적으로 한다. In order to solve the above problems, an object of the present invention is to provide an apparatus and method for embedding a forensic watermark that is robust against collusion attacks while ensuring real-time responsiveness by preparing blocks in which watermark information is embedded in advance.

상술한 목적을 달성하기 위해, 본 발명의 일실시예에 따른 포렌식 워터마크 임베딩 장치는, 임베딩 정보를 저장하기 위한 데이터베이스 유닛; 원본 콘텐츠에서 소정 구간의 콘텐츠마다 블록들을 분석하여 동일 블록에 대해, 워터마크 0을 임베딩하고 생성된 0 임베딩 콘텐츠를 포함한 0 콘텐츠들을 0 콘텐츠 파일로 저장하고 그리고 워터마크 1을 임베딩하고 1 임베딩 블록들을 청크 파일로 저장하고, 상기 워터마크 0 또는 1이 임베딩된 블록들에 대한 상기 임베딩 정보를 상기 데이터베이스 유닛에 저장하는 전처리 유닛; 및 상기 데이터베이스 유닛에 저장된 상기 임베딩 정보를 이용하여 상기 전처리 유닛으로부터 제공되는 상기 0 콘텐츠 파일에서 상기 워터마크 0이 임베딩된 블록들을 추출하고 워터마크 정보에 근거하여 상기 청크 파일의 상기 1 임베딩 블록들로 대체하여 상기 워터마크 정보를 표시한 배포 콘텐츠를 출력하는 배포 유닛을 제공한다.In order to achieve the above object, a forensic watermark embedding apparatus according to an embodiment of the present invention includes a database unit for storing embedding information; Blocks are analyzed for each content of a predetermined section in the original content, and for the same block, watermark 0 is embedded, 0 contents including the 0 embedded contents are stored as 0 contents file, and watermark 1 is embedded and 1 embedding blocks are embedded. a pre-processing unit for storing the chunk file and storing the embedding information for the blocks in which the watermark 0 or 1 is embedded in the database unit; and extracting the watermark 0-embedded blocks from the 0 content file provided from the pre-processing unit by using the embedding information stored in the database unit, and using the 1 embedding blocks of the chunk file based on the watermark information. A distribution unit for outputting distribution content displaying the watermark information is provided instead.

상기 원본 콘텐츠는 동영상 콘텐츠이고, 상기 소정 구간의 콘텐츠는 GOP(Group Of Picture) 콘텐츠와 관련이 있고, 상기 전처리 유닛은 상기 GOP 콘텐츠 중 소정의 프레임의 블록들을 분석하여 상기 워터마크 정보를 표시할 블록들에 대한 위치 정보를 상기 임베딩 정보로 저장할 수 있다.The original content is moving picture content, the content of the predetermined section is related to GOP (Group Of Picture) content, and the pre-processing unit analyzes blocks of a predetermined frame among the GOP contents to display the watermark information. It is possible to store the location information for each of them as the embedding information.

상기 배포 유닛은 상기 임베딩 정보를 이용하여 상기 전처리 유닛으로부터 제공되는 상기 0 콘텐츠 파일에서 상기 워터마크 0이 임베딩된 블록들을 가진 프레임을 추출하고 상기 추출된 프레임을 파싱하여 비트스트림의 NAL(network abstration layer) 단위로 상기 워터마크 정보에 근거하여 상기 청크 파일의 상기 1 임베딩 블록들로 대체할 수 있다.The distribution unit extracts a frame having blocks in which the watermark 0 is embedded from the 0 content file provided from the pre-processing unit by using the embedding information, and parses the extracted frame to obtain a network abstraction layer (NAL) of the bitstream. ), based on the watermark information, may be replaced with the 1 embedding blocks of the chunk file.

상기 배포 유닛은 클라이언트 메타데이터가 입력되면 상기 클라이언트 메타데이터로부터 상기 워터마크 정보를 생성하고, 상기 클라이언트 메타데이터 및 상기 워터마크 정보를 연계하여 상기 데이터베이스 유닛에 저장할 수 있다.The distribution unit may generate the watermark information from the client metadata when the client metadata is input, and store the watermark information in the database unit in association with the client metadata and the watermark information.

상기 전처리 유닛은 상기 소정의 프레임에 상기 워터마크 정보를 페이로딩할 수 있는 개수를 만족하는 블록들이 있는지를 확인할 수 있다.The pre-processing unit may check whether there are blocks satisfying the number of payloads of the watermark information in the predetermined frame.

상기 전처리 유닛은 상기 원본 콘텐츠에서 섹션 콘텐츠마다, 섹션 워터마크 0을 임베딩하여 0 섹션 콘텐츠들을 0 섹션 콘텐츠 파일로 저장하고 그리고 섹션 워터마크 1을 임베딩하여 1 섹션 콘텐츠들을 1 섹션 콘텐츠 파일로 저장하며, 상기 0 콘텐츠 섹션 파일 및 상기 1 섹션 콘텐츠 파일 중 적어도 하나는 상기 워터마크 0 또는 1이 임베딩된 콘텐츠를 포함하고, 상기 배포 유닛은 섹션 워터마크 정보에 근거하여 상기 0 섹션 콘텐츠 파일 또는 상기 1 섹션 콘텐츠 파일의 해당 섹션 콘텐츠 파일을 선택하여 조합 콘텐츠 파일을 출력할 수 있다.the pre-processing unit embeds section watermark 0 for each section content in the original content to store 0-section contents as a 0-section content file, and embeds section watermark 1 to store 1 section contents as a 1-section contents file, At least one of the zero-section content file and the one-section content file includes the content in which the watermark 0 or 1 is embedded, and the distribution unit is configured to configure the zero-section content file or the one-section content according to the section watermark information. You can output a composite content file by selecting the corresponding section content file in the file.

상기 배포 유닛은 상기 임베딩 정보를 이용하여 상기 조합 콘텐츠 파일에서 상기 워터마크 0이 임베딩된 블록들을 가진 프레임을 추출하고, 상기 워터마크 정보에 근거하여 상기 청크 파일의 1 임베딩 블록들로 대체할 수 있다.The distribution unit may extract a frame having blocks embedded with the watermark 0 from the combined content file by using the embedding information, and replace it with embedding blocks 1 of the chunk file based on the watermark information. .

본 발명의 또 하나의 실시예에 따른 데이터베이스 유닛을 포함하는 장치에 의해 수행되는 포렌식 워터마크 임베딩 방법은, 원본 콘텐츠에서 소정 구간의 콘텐츠마다 블록들을 분석하여 동일 블록에 대해, 워터마크 0을 임베딩하고 생성된 0 임베딩 콘텐츠를 포함한 0 콘텐츠들을 0 콘텐츠 파일로 저장하고 그리고 워터마크 1을 임베딩하고 1 임베딩 블록들을 청크 파일로 저장하고, 상기 워터마크 0 또는 1이 임베딩된 블록들에 대한 임베딩 정보를 상기 데이터베이스 유닛에 저장하는 저장하는 단계; 상기 데이터베이스 유닛에 저장된 상기 임베딩 정보를 이용하여 상기 저장하는 단계에서 저장되어 제공되는 상기 0 콘텐츠 파일에서 상기 워터마크 0이 임베딩된 블록들을 추출하는 단계; 및 워터마크 정보에 근거하여 상기 청크 파일의 상기 1 임베딩 블록들로 대체하여 상기 워터마크 정보를 표시한 배포 콘텐츠를 출력하는 단계를 제공함으로써, 상술한 목적을 달성할 수 있다.The forensic watermark embedding method performed by an apparatus including a database unit according to another embodiment of the present invention analyzes blocks for each content of a predetermined section in original content and embeds watermark 0 in the same block, Store 0 contents including the generated 0 embedding contents as 0 contents file, embed watermark 1 and store 1 embedding blocks as a chunk file, and embed embedding information for blocks in which watermark 0 or 1 is embedded. storing to store in a database unit; extracting the blocks in which the watermark 0 is embedded from the 0 content file stored and provided in the storing step by using the embedding information stored in the database unit; and outputting distribution content displaying the watermark information by replacing the first embedding blocks of the chunk file with the watermark information based on the watermark information, thereby achieving the above object.

상기 워터마크 정보는 상기 소정의 프레임의 블록들과 관련된 블록 워터마크 정보이고, 상기 배포 콘텐츠는 상기 섹션 워터마크 정보와 상기 블록 워터마크 정보를 이중으로 임베딩한 콘텐츠일 수 있다.The watermark information may be block watermark information related to blocks of the predetermined frame, and the distribution content may be content in which the section watermark information and the block watermark information are doubly embedded.

상기 저장하는 단계에서의 상기 소정의 프레임은 상기 섹션 워터마크 0 또는 1이 임베딩되어 있지 않은 프레임일 수 있다.The predetermined frame in the storing step may be a frame in which the section watermark 0 or 1 is not embedded.

상술한 구성에 의해, 본 발명은 워터마크 정보를 임베딩한 블록을 미리 준비해둠으로써, 실시간 응답성을 보장하면서도 공모 공격에 강인한 포렌식 워터마크를 제공할 수 있다.With the above configuration, the present invention can provide a forensic watermark that is robust against collusion attacks while ensuring real-time responsiveness by preparing a block in which watermark information is embedded in advance.

본 발명은 또한, 동일한 사용자 정보를 섹션 워터마크 정보와 블록 워터마크 정보로 사용함으로써, 실시간 응답성을 보장하면서도 공모 공격에 강인한 포렌식 마크를 제공할 수 있다. In the present invention, by using the same user information as section watermark information and block watermark information, it is possible to provide a forensic mark robust to collusion attacks while ensuring real-time responsiveness.

도 1은 본 발명의 일 실시예에 따른 포렌식 워터마크 임베딩 장치를 도시하는 블록도이다.
도 2는 도 1의 블록 분석부에서 선택된 블록들의 일 예를 도시하는 도면이다.
도 3은 블록 단위의 워터마크 정보가 임베딩된 프레임의 일 예를 도시하는 도면이다.
도 4는 도 1의 워터마크 블록 조합부에서 블록들이 조합된 프레임 일부의 스트림의 일 예를 도시하는 도면이다.
도 5는 도 1의 프레임 결합부에서 프레임들이 결합된 배포 콘텐츠의 일 예를 도시하는 도면이다.
도 6은 도 1의 데이터베이스 유닛에 저장된 정보들의 일 예를 도시하는 도면이다.
도 7은 본 발명의 또 하나의 실시예에 따른 포렌식 워터마크 임베딩 장치를 도시하는 블록도이다.
도 8은 섹션마크가 임베딩된 복수의 0 섹션 콘텐츠와 복수의 1 섹션 콘덴츠의 일 예를 도시하는 도면이다.
도 9는 도 7에 도시된 블록마크 임베딩부를 구체적으로 도시하는 블록도이다.
도 10은 본 발명의 또 다른 실시예에 따른 포렌식 워터마크 임베딩 방법을 도시하는 흐름도이다1 is a block diagram illustrating a forensic watermark embedding apparatus according to an embodiment of the present invention.
FIG. 2 is a diagram illustrating an example of blocks selected by the block analyzer of FIG. 1 .
3 is a diagram illustrating an example of a frame in which block-wise watermark information is embedded.
4 is a diagram illustrating an example of a stream of a part of a frame in which blocks are combined in the watermark block combining unit of FIG. 1 .
5 is a diagram illustrating an example of distribution content in which frames are combined in the frame combining unit of FIG. 1 .
FIG. 6 is a diagram illustrating an example of information stored in the database unit of FIG. 1 .
7 is a block diagram illustrating a forensic watermark embedding apparatus according to another embodiment of the present invention.
8 is a diagram illustrating an example of a plurality of 0-section contents and a plurality of 1-section contents in which a section mark is embedded.
9 is a block diagram specifically illustrating the block mark embedding unit illustrated in FIG. 7 .
10 is a flowchart illustrating a forensic watermark embedding method according to another embodiment of the present invention.

이하, 첨부된 도면을 참조하여 본 발명에 따른 포렌식 워터마크 임베딩 장치 및 방법의 바람직한 실시예를 설명한다. 참고로, 아래에서 본 발명을 설명함에 있어서, 본 발명의 구성요소를 지칭하는 용어들은 각각의 구성 요소들의 기능을 고려하여 명명된 것이므로, 본 발명의 기술적 구성요소를 한정하는 의미로 이해되어서는 안 될 것이다. Hereinafter, a preferred embodiment of a forensic watermark embedding apparatus and method according to the present invention will be described with reference to the accompanying drawings. For reference, in describing the present invention below, terms referring to the components of the present invention are named in consideration of the function of each component, so it should not be construed as limiting the technical components of the present invention. will be

도 1은 본 발명의 일 실시예에 따른 포렌식 워터마크 임베딩 장치를 도시하는 블록도이고, 도 2는 도 1의 블록 분석부에서 선택된 블록들의 일 예를 도시하는 도면이고, 도 3은 블록 단위의 워터마크 정보가 임베딩된 프레임의 일 예를 도시하는 도면이고, 도 4는 도 1의 워터마크 블록 조합부에서 블록들이 조합된 프레임 일부의 스트림의 일 예를 도시하는 도면이고, 도 5는 도 1의 프레임 결합부에서 프레임들이 결합된 배포 콘텐츠의 일 예를 도시하는 도면이고, 도 6은 도 1의 데이터베이스 유닛에 저장된 정보들의 일 예를 도시하는 도면이다.1 is a block diagram illustrating an apparatus for embedding a forensic watermark according to an embodiment of the present invention, FIG. 2 is a diagram illustrating an example of blocks selected by the block analyzer of FIG. 1, and FIG. 3 is a block diagram It is a diagram illustrating an example of a frame in which watermark information is embedded, FIG. 4 is a diagram illustrating an example of a stream of a part of a frame in which blocks are combined in the watermark block combining unit of FIG. 1, and FIG. 5 is FIG. It is a diagram illustrating an example of distribution content in which frames are combined in the frame combining unit of , and FIG. 6 is a diagram illustrating an example of information stored in the database unit of FIG. 1 .

도 1에 도시된 바와 같이, 포렌식 워터마크 임베딩 장치는 전처리 유닛(110), 배포 유닛(130) 및 데이터베이스 유닛(140)을 포함한다. As shown in FIG. 1 , the forensic watermark embedding apparatus includes a pre-processing unit 110 , a distribution unit 130 , and a database unit 140 .

전처리 유닛(110)은 콘텐츠 ID 부여부(112), 프레임 추출부(114), 블록 분석부(116), 마크 0 임베딩부(118), 마크 1 임베딩부(120), 0 콘텐츠 저장부(122) 및 1 청크 저장부(124)를 포함할 수 있다.The pre-processing unit 110 includes a content ID granting unit 112 , a frame extracting unit 114 , a block analyzing unit 116 , a mark 0 embedding unit 118 , a mark 1 embedding unit 120 , and a 0 content storage unit 122 . ) and one chunk storage unit 124 .

콘텐츠 ID 부여부(112)는 원본 콘텐츠가 입력되면 관리를 위한 콘텐츠 ID를 부여한다. 콘텐츠 ID 부여부(112)는 원본 콘텐츠가 동일하면, 항상 동일한 콘텐츠 ID를 부여하는 것이 바람직하지만, 원본 콘텐츠가 전처리 유닛(110)에 입력될 때마다 시리즈 형태의 콘텐츠 ID를 부여할 수도 있다. 콘텐츠 ID 부여부(112)는 원본 콘텐츠와 관련된 콘텐츠 ID를 데이터베이스 유닛(140)에 저장한다. The content ID granting unit 112 grants a content ID for management when original content is input. It is preferable that the content ID granting unit 112 always assign the same content ID when the original content is the same, but may also grant a series-type content ID whenever the original content is input to the pre-processing unit 110 . The content ID granting unit 112 stores the content ID associated with the original content in the database unit 140 .

프레임 추출부(114)는 원본 콘텐츠로부터 인트라 프레임을 추출한다. 원본 콘텐츠가 동영상 콘텐츠이면, 원본 콘텐츠는 복수의 GOP(Group Of Pictures)를 포함할 수 있다. 여기서 GOP는 프레임 내 부호화 영상인 인트라 프레임(I frame), 프레임 간 순방향 예측의 부호화 영상인 예측 프레임(P frame), 및 양방향 예측 부호화 영상인 양방향 예측 프레임(B frame)을 포함하며, 예를 들어 하나의 GOP는 I, B, B, P, B, B, P, B, B, P, B, B, P, B, B으로 구성될 수 있다. 여기서 프레임 추출부(114)가 추출하는 프레임의 예시로 인트라 프레임이 사용되었을 뿐이며, 예측 프레임(P frame)과 양방향 예측 프레임(B frame)을 배제하는 것이 아니다. The frame extraction unit 114 extracts an intra frame from the original content. If the original content is video content, the original content may include a plurality of Group Of Pictures (GOPs). Here, the GOP includes an intra frame (I frame) that is an intra-frame coded image, a prediction frame (P frame) that is an coded image of inter-frame forward prediction, and a bi-directional prediction frame (B frame) that is a bi-prediction coded image, for example. One GOP may be composed of I, B, B, P, B, B, P, B, B, P, B, B, P, B, B. Here, an intra frame is only used as an example of the frame extracted by the frame extraction unit 114, and the prediction frame (P frame) and the bidirectional prediction frame (B frame) are not excluded.

블록 분석부(116)는 프레임 추출부(114)에서 추출되어 출력된 인트라 프레임을 입력으로 받아 온전한 워터마크 정보를 표현할 수 있는 블록들을 분석하여 워터마크 정보가 임베딩될 프레임을 선택할 수 있다. 이 경우, 동영상이라면, 하나의 프레임 내에 페이로드 모두를 표현할 수 있는 블록들이 있는지를 분석하여 선택할 수 있다.The block analyzer 116 may receive the intra frame extracted and output from the frame extractor 114 as an input, analyze blocks capable of expressing complete watermark information, and select a frame in which the watermark information is to be embedded. In this case, if it is a moving picture, it can be selected by analyzing whether there are blocks capable of expressing all the payloads in one frame.

블록 분석부(116)는 부호화된 영상의 인트라 프레임에서 소정 크기 이하의 블록, 즉 부호화된 영상의 가장 작은 블록을 선택한다. 블록 분석부(116)는 예를 들어, 인트라 프레임에서 4 X 4의 예측 블록의 휘도(luminance) 신호를 선택할 수 있다. 이에 의해, 인트라 프레임에서 소정 크기보다 큰 블록으로 부호화된 블록은 워터마크 정보를 임베딩할 블록 후보군에서 제외된다. 소정 크기보다 큰 블록으로 부호화된 블록을 후보군에서 제외하는 이유는 이들 블록의 영상이 평탄한(smooth) 영상에 가까우므로 이러한 블록에 워터마크가 임베딩될 경우 눈에 띌 가능성이 크기 때문이다. 그러므로 HEVC 규격에서 32 X 32, 32 X 16, 16 X 32 및 16 X 16의 블록들 중 어느 하나로 부호화되어 있는 경우, 이 블록은 평탄화 영상에 가까운 것으로 고려될 수 있고, AVC 규격에서 16 X 16, 8 X 16 및 16 X 8의 블록들 중 어느 하나로 부호화되어 있는 경우, 이 블록은 평탄화 영상에 가까운 것으로 고려될 수 있다.The block analyzer 116 selects a block of a predetermined size or less from the intra frame of the encoded image, that is, the smallest block of the encoded image. The block analyzer 116 may select, for example, a luminance signal of a 4×4 prediction block in an intra frame. Accordingly, a block encoded as a block larger than a predetermined size in the intra frame is excluded from the block candidate group for embedding watermark information. The reason that blocks encoded as blocks larger than a predetermined size are excluded from the candidate group is because images of these blocks are close to smooth images, and therefore, when a watermark is embedded in such a block, it is highly likely to stand out. Therefore, if any one of blocks of 32 X 32, 32 X 16, 16 X 32 and 16 X 16 is coded in the HEVC standard, this block may be considered as close to a flattened image, and in the AVC standard, 16 X 16, When one of 8 X 16 and 16 X 8 blocks is coded, this block may be considered to be close to a flattened image.

블록 분석부(116)는 소정 크기 이하의 블록들만으로 구성된 매크로블록을 선택한다. 블록 분석부(116)는 예를 들어, AVC 규격의 경우 부호화된 영상의 인트라 프레임에서 선택된 4 X 4의 서브블록으로만 구성된 16 X 16의 매크로블록을 선택할 수 있다.The block analyzer 116 selects a macroblock composed of only blocks of a predetermined size or less. For example, in the case of the AVC standard, the block analyzer 116 may select a 16×16 macroblock including only 4×4 subblocks selected from an intra frame of an encoded image.

블록 분석부(116)는 선택된 매크로블록의 양자화 계수들 중에서 영이 아닌 양자화 계수들(nonzero quantized coefficients: NNZ)의 수가 소정의 개수(Nt)보다 더 큰 지를 확인한다. NNZ의 수가 소정의 개수(Nt)보다 더 크면, 블록 분석부(116)는 해당 블록들을 워터마크 정보가 임베딩 가능한 블록들로 선택한다. NNZ가 작은 경우에는 영상 복호화 과정에서 해당 매크로블록의 원래의 정보를 많이 잃어버리게 되어 동기화 에러가 커질 수 있는바, 이들을 고려하여 소정의 개수(Nt)를 설정하는 것이 중요하다.The block analyzer 116 determines whether the number of nonzero quantized coefficients (NNZ) among quantization coefficients of the selected macroblock is greater than a predetermined number Nt. If the number of NNZs is greater than the predetermined number Nt, the block analyzer 116 selects the blocks as blocks in which watermark information can be embedded. When the NNZ is small, a lot of original information of the corresponding macroblock is lost in the video decoding process, and a synchronization error may increase.

블록 분석부(116)는 워터마크 정보를 임베딩할 수 있는 매크로블록들의 수가 워터마크 정보를 페이로드할 수의 소정 개수, 예를 들어 64개 이상이면, 워터마크 정보가 임베딩될 프레임으로 선택한다. 블록 분석부(116)에서 분석한 결과에 따른 블록들의 일 예가 도 2에 도시되어 있다. 도 2에서 프레임들이 각각 인트라 프레임에 해당한다면, 제1 GOP의 인트라 프레임(Frame-1) 및 제1 GOP의 인트라 프레임(Frame-3)이 배포 유닛(130)에서 워터마크 정보를 임베딩할 프레임으로 선택된 것이다. If the number of macroblocks capable of embedding watermark information is a predetermined number, for example, 64 or more, the number of macroblocks capable of embedding watermark information, the block analyzer 116 selects the watermark information as a frame to be embedded. An example of blocks according to the analysis result by the block analyzer 116 is shown in FIG. 2 . If the frames in FIG. 2 correspond to intra frames, respectively, the intra frame (Frame-1) of the first GOP and the intra frame (Frame-3) of the first GOP are the frames to embed the watermark information in the distribution unit 130 . it will be chosen

한편, 워터마크 정보의 워터마크가 삽입된 영상은 시간적 플리커(temporal flicker)가 발생할 수 있다. 블록 분석부(116)는 이러한 시간적 플리커를 방지하거나 감소시키기 위해 의사 움직임 벡터(pseudo motion vector)를 계산하여 워터마크 정보가 임베딩될 최종 매크로블록들을 결정할 수 있다.Meanwhile, temporal flicker may occur in an image in which a watermark of watermark information is embedded. The block analyzer 116 may determine final macroblocks in which watermark information is to be embedded by calculating a pseudo motion vector in order to prevent or reduce such temporal flicker.

블록 분석부(116)는 워터마크가 임베딩될 최종 매크로블록이 결정되면, 프레임 정보와 프레임 내의 블록들의 위치 정보(location-map)를 데이터베이스 유닛(140)에 저장할 수 있다. 위치 정보는 블록에 대한 스트림상의 NAL(network abstration layer) 정보를 포함할 수 있다.When the final macroblock in which the watermark is to be embedded is determined, the block analyzer 116 may store frame information and location-map of blocks within the frame in the database unit 140 . The location information may include network abstration layer (NAL) information on a stream for a block.

마크 0 임베딩부(118)는 블록 분석부(116)로부터 선택되어 출력된 매크로블록들에 대해 워터마크 0을 임베딩하여 0 임베딩 프레임을 출력한다. 마크 1 임베딩부(120)는 블록 분석부(116)로부터 선택되어 출력된 매크로블록들에 대해 워터마크 1을 임베딩하고 1 임베딩 블록들을 하나의 청크로 묶여 출력한다. 블록 단위의 워터마크 정보가 임베딩된 프레임의 일 예가 도 3에 도시되어 있다. 도 3에 도시된 바와 같이, 동일 영상의 블록에 대해 각각 다른 워터마크, 즉, 워터마크 0 또는 1이 임베딩되어 있다. The mark 0 embedding unit 118 embeds a watermark 0 with respect to macroblocks selected and output by the block analysis unit 116 to output a 0 embedding frame. The mark 1 embedding unit 120 embeds a watermark 1 with respect to macroblocks selected and output by the block analyzer 116 and outputs the 1 embedding blocks bundled into one chunk. An example of a frame in which block-wise watermark information is embedded is shown in FIG. 3 . As shown in FIG. 3 , different watermarks, ie, watermarks 0 or 1, are embedded in blocks of the same image.

워터마크 정보 0 또는 1을 임베딩하는 방법은 두 가지가 있다: 제1 방법은 압축 도메인(compressed domain)에서 임베딩하는 방법으로서 압축된 도메인의 선택된 블록에 워터마크 0 또는 1을 임베딩하며, 제2 방법은 비-압축 도메인(uncompressed domain)에서 임베딩하는 방법으로서 비-압축된 도메인의 선택된 블록에 워터마크 0 또는 1을 임베딩하는 것이다. 제2 방법은 디코딩과 인코딩이 필요하다. 한편, 워터마크 기법에 따라 비트스트림상의 오프셋 또는 크기가 다를 수 있는데, 제1 방법에서는 동일 블록에 워터마크 0 또는 1을 임베딩하면 NAL 크기가 변동되거나 그렇지 않을 수 있지만, 제2 방법에서는 워터마크 0을 임베딩한 블록의 크기와 워터마크 1을 임베딩한 블록의 크기가 서로 다르게 된다.There are two methods for embedding the watermark information 0 or 1. The first method is a method for embedding in a compressed domain, wherein the watermark 0 or 1 is embedded in a selected block of the compressed domain, and the second method is embedding in the uncompressed domain, and embedding a watermark 0 or 1 in a selected block of the uncompressed domain. The second method requires decoding and encoding. On the other hand, the offset or size on the bitstream may be different depending on the watermark technique. In the first method, if watermark 0 or 1 is embedded in the same block, the NAL size may or may not be changed, but in the second method, watermark 0 The size of the block embedding , and the size of the block embedding watermark 1 are different from each other.

0 콘텐츠 저장부(122)는 마크 0 임베딩부(118)로부터 출력되는 0 임베딩 프레임을 포함한 프레임 콘텐츠들을 0 콘텐츠 파일로 저장한다. 1 청크 저장부(124)는 마크 1 임베딩부(120)로부터 출력되는 복수의 블록들을 청크 파일로 저장한다.The zero content storage unit 122 stores frame contents including the zero embedding frame output from the mark zero embedding unit 118 as zero content files. The 1 chunk storage unit 124 stores a plurality of blocks output from the mark 1 embedding unit 120 as a chunk file.

배포 유닛(130)은 클라이언트 메타데이터에 따라 워터마크 정보를 조합한 배포 콘텐츠를 출력하기 위해, 정보 생성부(132), 워터마크 블록 조합부(134) 및 프레임 결합부(136)를 포함한다. The distribution unit 130 includes an information generating unit 132 , a watermark block combining unit 134 , and a frame combining unit 136 to output distribution content combining watermark information according to client metadata.

정보 생성부(132)는 사용자 디바이스 등으로부터 송신된 클라이언트 메타데이터(metadata)를 수신하고, 이 클라이언트 메타데이터를 이용하여 콘텐츠의 사용자 등을 특정할 수 있는 정보를 생성한다. 여기서 클라이언트 메타데이터는 사용자 정보 또는 일시(일자/시간) 정보 등일 수 있다. 여기서 사용자 정보는 사용자가 사용하는 ID 정보 또는 사용자 디바이스 정보를 포함하며, 사용자 디바이스 정보는 사용자 디바이스의 고유 ID(예를 들면, IP 어드레스, MAC 어드레스 정보) 등의 정보일 수 있고, 일시 정보는 예를 들면 네트워크상의 시각 서버에서 시각 정보 프로토콜(NTP,Network Time Protocol,RFC-1305) 등을 이용하여 송신되는 것일 수 있다. The information generating unit 132 receives client metadata transmitted from a user device or the like, and uses the client metadata to generate information that can specify a user or the like of the content. Here, the client metadata may be user information or date/time (date/time) information. Here, the user information includes ID information or user device information used by the user, and the user device information may be information such as a unique ID (eg, IP address, MAC address information) of the user device, and the date and time information is, for example, For example, it may be transmitted using a time information protocol (NTP, Network Time Protocol, RFC-1305) from a time server on the network.

정보 생성부(132)는 콘텐츠의 사용자 등을 특정할 수 있는 워터마크 정보(Client-Request-ID)를 생성하여, 워터마크 블록 조합부(134)에 제공하고, 데이터베이스 유닛(140)에 클라이언트 메타데이터와 연계하여 워터마크 정보를 저장한다.The information generating unit 132 generates watermark information (Client-Request-ID) capable of specifying a user of the content, etc., and provides it to the watermark block combining unit 134 , and transmits the client meta information to the database unit 140 . Watermark information is stored in association with data.

워터마크 블록 조합부(134)는 정보 생성부(132)로부터 워터마크 정보를 수신하면, 데이터베이스 유닛(140)에 저장된 프레임 정보와 프레임 내의 블록들의 위치 정보를 불러온다. 워터마크 블록 조합부(134)는 프레임 정보를 이용하여 0 콘텐츠 저장부(122)로부터 출력되는 GOP들 중에서 워터마크 정보를 표시할 인트라 프레임을 추출한다. 워터마크 블록 조합부(134)는 워터마크 정보를 표시하기 위해 추출된 인트라 프레임의 블록들의 위치 정보를 이용하여 워터마크 0 블록 및 워터마크 1 블록을 조합하여 출력한다. 이 경우 워터마크 블록 조합부(134)는 추출된 인트라 프레임을 파싱하고 NAL 단위로 워터마크 0 블록 및 워터마크 1 블록을 조합할 수 있다. NAL 단위로 워터마크 0 블록 및 워터마크 1 블록을 조합하면 배포 유닛에 디코딩과 인코딩이 필요없는 바, 비용적인 측면에서 유리할 뿐만 아니라 디코딩 및 인코딩에 따른 지연을 개선할 수 있어 실시간 응답이 가능하게 된다. 워터마크 블록 조합부(134)는 워터마크 정보에 의해 사용자 등이 특정될 수 있도록, 블록 분석부(116)에서 선택된 모든 프레임에 대해서는 동일한 워터마크 정보를 임베딩한다. 워터마크 블록 조합부(134)에서 블록들이 조합된 프레임 일부의 스트림의 일 예가 도 4에 도시되어 있다.When the watermark block combining unit 134 receives the watermark information from the information generating unit 132 , the frame information stored in the database unit 140 and location information of blocks within the frame are retrieved. The watermark block combining unit 134 extracts an intra frame for displaying watermark information from among the GOPs output from the zero content storage unit 122 by using the frame information. The watermark block combination unit 134 combines and outputs the watermark 0 block and the watermark 1 block by using the location information of the blocks of the intra frame extracted to display the watermark information. In this case, the watermark block combining unit 134 may parse the extracted intra frame and combine the watermark 0 block and the watermark 1 block in NAL units. Combining the watermark 0 block and the watermark 1 block in NAL units eliminates the need for decoding and encoding in the distribution unit. . The watermark block combining unit 134 embeds the same watermark information in all frames selected by the block analyzing unit 116 so that a user or the like can be specified by the watermark information. An example of a stream of a part of a frame in which blocks are combined in the watermark block combining unit 134 is shown in FIG. 4 .

프레임 결합부(136)는 0 콘텐츠 저장부(122)로부터 출력되는 원본 콘텐츠들과 워터마크 블록 조합부(134)로부터 출력되는 워터마크 콘텐츠들을 결합하여 배포 콘텐츠 파일을 출력한다. 프레임 결합부(136)에서 프레임들이 결합된 배포 콘텐츠의 일 예가 도 5에 도시되어 있다. The frame combining unit 136 combines the original contents output from the 0 content storage unit 122 and the watermark contents output from the watermark block combining unit 134 to output a distributed content file. An example of distribution content in which frames are combined in the frame combining unit 136 is shown in FIG. 5 .

데이터베이스 유닛(140)은 콘텐츠 ID 부여부(112)에서 부여된 콘텐츠 ID를 저장하며, 블록 분석부(116)에서 선택된 프레임 정보와 프레임 내의 블록들의 위치 정보를 저장한다. 이에 의해, 이들 정보는 배포 유닛(130)에서 포렌식 워터마크를 임베딩할 때에 실시간으로 워터마크 정보를 임베딩하여 송신할 수 있다. The database unit 140 stores the content ID assigned by the content ID granting unit 112 , and stores information on the frame selected by the block analyzing unit 116 and location information of blocks within the frame. Thereby, these information can be transmitted by embedding the watermark information in real time when embedding the forensic watermark in the distribution unit 130 .

데이터베이스 유닛(140)은 또한, 정보 생성부(132)에 입력된 클라이언트 메타데이터와 정보 생성부(132)에서 생성된 워터마크 정보를 저장한다. 워터마크 정보는 배포 유닛(130)에서 입력된 클라이언트 메타데이터와 함께 연계되어 저장되므로, 나중에 워터마크 정보를 통해 사용자를 특정할 수 있다. 데이터베이스 유닛(140)에 저장된 정보들의 일 예가 도 6에 도시되어 있다.The database unit 140 also stores the client metadata input to the information generating unit 132 and the watermark information generated by the information generating unit 132 . Since the watermark information is stored in association with the client metadata input in the distribution unit 130, the user can be specified later through the watermark information. An example of information stored in the database unit 140 is shown in FIG. 6 .

도 7은 본 발명의 또 하나의 실시예에 따른 포렌식 워터마크 임베딩 장치를 도시하는 블록도이고, 도 8은 섹션마크가 임베딩된 복수의 0 섹션 콘텐츠와 복수의 1 섹션 콘덴츠의 일 예를 도시하는 도면이고, 도 9는 도 7에 도시된 블록마크 임베딩부를 구체적으로 도시하는 블록도이다.7 is a block diagram illustrating a forensic watermark embedding apparatus according to another embodiment of the present invention, and FIG. 8 is a block diagram showing an example of a plurality of 0-section contents and a plurality of 1-section contents in which a section mark is embedded FIG. 9 is a block diagram specifically illustrating the block mark embedding unit shown in FIG. 7 .

도 7에 도시된 바와 같이, 포렌식 워터마크 임베딩 장치는 전처리 유닛(110), 배포 유닛(130) 및 데이터베이스 유닛(140)을 포함한다. As shown in FIG. 7 , the forensic watermark embedding apparatus includes a pre-processing unit 110 , a distribution unit 130 , and a database unit 140 .

전처리 유닛(110)은 콘텐츠 ID 부여부(112), 섹션 출력부(702), 섹션마크 0 임베딩부(704), 섹션마크 1 임베딩부(706), 블록마크 임베딩부(708), 0 콘텐츠 저장부(710), 1 콘텐츠 저장부(712) 및 1 청크 저장부(124)를 포함할 수 있다.The pre-processing unit 110 includes a content ID granting unit 112, a section output unit 702, a section mark 0 embedding unit 704, a section mark 1 embedding unit 706, a block mark embedding unit 708, 0 content storage It may include a unit 710 , one content storage unit 712 , and one chunk storage unit 124 .

콘텐츠 ID 부여부(112)는 원본 콘텐츠가 입력되면 관리를 위한 콘텐츠 ID를 부여한다. The content ID granting unit 112 grants a content ID for management when original content is input.

섹션 출력부(702)는 원본 콘텐츠를 소정 크기의 섹션으로 나누어 섹션 콘텐츠들을 출력한다. 여기서 소정 크기는 소정 시간, 예를 들어 2초일 수 있으며, 소정 규모, 예를 들어 약 10M 바이트일 수 있으며, 또는 동영상의 복수 개의 GOP(Group Of Picture) 단위일 수 있다. 이 경우 섹션 콘텐츠는 압축(부호화)된 콘텐츠일 수도 있고 비-압축(비-부호화)된 콘텐츠일 수 있다.The section output unit 702 divides the original content into sections of a predetermined size and outputs the section contents. Here, the predetermined size may be a predetermined time, for example, 2 seconds, may be a predetermined size, for example, about 10M bytes, or may be a plurality of GOP (Group Of Picture) units of a moving picture. In this case, the section content may be compressed (encoded) content or non-compressed (non-encoded) content.

섹션마크 0 임베딩부(704)는 섹션 출력부(702)로부터 출력되어 입력되는 섹션 콘텐츠마다 섹션 워터마크 0을 임베딩한다. 섹션마크 1 임베딩부(706)는 섹션 출력부(702)로부터 출력되어 입력되는 섹션 콘텐츠마다 섹션 워터마크 1을 임베딩한다. 섹션 단위로 섹션 워터마크 0 또는 1이 임베딩되어 섹션마크 0 임베딩부(704) 또는 섹션마크 1 임베딩부(706)로부터 출력되는 복수의 0 섹션 콘텐츠 및 복수의 1 섹션 콘텐츠의 일 예가 도 8에 도시되어 있다.The section mark 0 embedding unit 704 embeds the section watermark 0 for each inputted section content outputted from the section output unit 702 . The section mark 1 embedding unit 706 embeds the section watermark 1 for each inputted section content outputted from the section output unit 702 . An example of a plurality of 0-section contents and a plurality of 1-section contents output from the section mark 0 embedding unit 704 or the section mark 1 embedding unit 706 by embedding section watermark 0 or 1 in a section unit is shown in FIG. has been

블록마크 임베딩부(708)는 도 9에 도시된 바와 같이, 프레임 추출파트(902), 블록 분석파트(904), 블록마크 0 임베딩파트(906) 및 블록마크 1 임베딩파트(908)를 포함한다. 도 9에 도시된 프레임 추출파트(902), 블록 분석파트(904), 블록마크 0 임베딩파트(906) 및 블록마크 1 임베딩파트(908)는 도 1에 도시된 프레임 추출부(114), 블록 분석부(116), 마크 0 임베딩부(118) 및 마크 1 임베딩부(120)의 기능을 동일하게 수행한다. 프레임 추출파트(902)는 섹션마크 1 임베딩부(706)로부터 출력되는 섹션 콘텐츠로부터 인트라 프레임을 추출한다. 이 경우 프레임 추출파트(902)에서 추출되는 인트라 프레임에는 섹션 워터마크 1이 임베딩되어 있지 않은 것이 바람직하다. 따라서, 블록마크 0 임베딩파트(906)는 블록 분석파트(904)로부터 선택되어 출력된 매크로블록들에 대해 블록 워터마크 0을 임베딩하여 0 임베딩 프레임을 출력한다. 블록마크 1 임베딩파트(908)는 블록 분석파트(904)로부터 선택되어 출력된 매크로블록들에 대해 블록 워터마크 1을 임베딩하고 1 임베딩 블록들을 하나의 청크로 묶여 출력한다.The block mark embedding unit 708 includes a frame extraction part 902, a block analysis part 904, a block mark 0 embedding part 906 and a block mark 1 embedding part 908, as shown in FIG. . The frame extraction part 902, the block analysis part 904, the block mark 0 embedding part 906 and the block mark 1 embedding part 908 shown in FIG. 9 are the frame extraction part 114 and the block shown in FIG. The functions of the analysis unit 116 , the mark 0 embedding unit 118 , and the mark 1 embedding unit 120 are performed identically. The frame extraction part 902 extracts an intra frame from the section content output from the section mark 1 embedding unit 706 . In this case, it is preferable that the section watermark 1 is not embedded in the intra frame extracted from the frame extraction part 902 . Accordingly, the block mark 0 embedding part 906 embeds the block watermark 0 for macroblocks selected from the block analysis part 904 and outputs a 0 embedding frame. The block mark 1 embedding part 908 embeds block watermark 1 with respect to macroblocks selected from the block analysis part 904 and output, and the 1 embedding blocks are bundled into one chunk and output.

도 7에서는 블록마크 임베딩부(708)가 섹션마크 1 임베딩부(706)로부터 출력되는 복수의 1 섹션 콘텐츠에 대해서만 블록마크를 임베딩하는 것이 도시되어 있지만, 섹션마크 0 임베딩부(704)로부터 출력되는 복수의 0 섹션 콘텐츠에 대해서도 블록마크를 임베딩하는 것이 가능하며, 섹션마크 0 임베딩부(704)로부터 출력되는 복수의 0 섹션 콘텐츠와 섹션마크 1 임베딩부(706)로부터 출력되는 복수의 1 섹션 콘텐츠 둘 다에 대해서도 블록마크를 임베딩할 수 있다.7 shows that the block mark embedding unit 708 embeds the block mark only for a plurality of one-section contents output from the section mark 1 embedding unit 706, but the section mark 0 embedding unit 704 outputs It is also possible to embed a block mark for a plurality of 0-section contents, and a plurality of 0-section contents output from the section mark 0 embedding unit 704 and a plurality of 1-section contents output from the section mark 1 embedding unit 706 are two It is also possible to embed block marks for everything.

0 콘텐츠 저장부(710)는 섹션마크 0 임베딩부(704)에서 출력되는 복수의 0 섹션 콘텐츠를 0 콘텐츠 파일로 저장한다. 1 콘텐츠 저장부(712)는 섹션마크 1 임베딩부(706)로부터 출력되는 1 임베딩 프레임을 포함한 1 콘텐츠들을 1 콘텐츠 파일로 저장한다. 1 청크 저장부(124)는 블록마크 임베딩부(708)로부터 출력되는 복수의 청크들을 청크 파일로 저장한다.The 0 content storage unit 710 stores the plurality of 0 section contents output from the section mark 0 embedding unit 704 as 0 contents files. The 1 content storage unit 712 stores 1 contents including 1 embedding frame output from the section mark 1 embedding unit 706 as 1 content file. The 1 chunk storage unit 124 stores a plurality of chunks output from the block mark embedding unit 708 as a chunk file.

배포 유닛(130)은 클라이언트 메타데이터에 따라 워터마크 정보를 조합한 배포 콘텐츠를 출력하기 위해, 정보 생성부(132), 섹션 조합부(732), 워터마크 블록 조합부(134) 및 프레임 결합부(136)를 포함한다. The distribution unit 130 outputs the distribution content combining the watermark information according to the client metadata, the information generating unit 132, the section combining unit 732, the watermark block combining unit 134, and the frame combining unit. (136).

정보 생성부(132)는 사용자 디바이스 등으로부터 송신된 클라이언트 메타데이터(metadata)를 수신하고, 이 클라이언트 메타데이터를 이용하여 콘텐츠의 사용자 등을 특정할 수 있는 정보를 생성한다. 정보 생성부(132)는 콘텐츠의 사용자 등을 특정할 수 있는 섹션 워터마크 정보를 생성하여 섹션 조합부(732)에 제공하고, 블록 워터마크 정보를 생성하여 워터마크 블록 조합부(134)에 제공하며, 데이터베이스 유닛(140)에 클라이언트 메타데이터와 연계하여 섹션 워터마크 정보와 블록 워터마크 정보를 저장한다. 본 실시예에서는 섹션 조합부(732)와 워터마크 블록 조합부(134)에 제공되는 워터마크 정보의 명칭이 다르게 표현되어 있으나, 이들 워터마크 정보는 동일할 수 있고, 무엇보다도 콘텐츠의 사용자 등을 특정한다는 점에서 워터마크 정보가 이중으로 임베딩된 것이다. The information generating unit 132 receives client metadata transmitted from a user device or the like, and uses the client metadata to generate information that can specify a user or the like of the content. The information generating unit 132 generates section watermark information that can specify a user of the content and provides it to the section combining unit 732 , and generates block watermark information and provides it to the watermark block combining unit 134 . and store section watermark information and block watermark information in association with client metadata in the database unit 140 . In the present embodiment, the names of the watermark information provided to the section combining unit 732 and the watermark block combining unit 134 are expressed differently, but these watermark information may be the same, and above all, the user of the content, etc. In the point of being specified, the watermark information is doubly embedded.

섹션 조합부(134)는 정보 생성부(132)로부터 출력되어 입력된 워터마크 정보에 따라 0 또는 1 콘텐츠 파일로부터 해당 섹션 콘텐츠들을 선택하여 출력한다. 섹션 조합부(134)는 예를 들어, 워터마크 정보가 10110…이면, 제1 섹션에서는 1 섹션 콘텐츠, 제2 섹션에서는 0 섹션 콘텐츠, 제3 섹션에서는 1 섹션 콘텐츠, 제4 섹션에서는 1 섹션 콘텐츠, 제5 섹션에서는 0 섹션 콘텐츠를 조합하여 출력한다. The section combining unit 134 selects and outputs corresponding section contents from 0 or 1 contents files according to the input watermark information output from the information generation unit 132 . The section combining unit 134 may determine, for example, that the watermark information is 10110 . . . If this is the case, section 1 content in the first section, section 0 content in the second section, section 1 content in the third section, section 1 content in the fourth section, and section 0 content in the fifth section are combined and outputted.

워터마크 블록 조합부(134)는 정보 생성부(132)로부터 워터마크 정보를 수신하면, 데이터베이스 유닛(140)에 저장된 프레임 정보와 프레임 내의 블록들의 위치 정보를 불러온다. 워터마크 블록 조합부(134)는 프레임 정보를 이용하여 섹션 조합부(732)로부터 출력되는 GOP들 중에서 워터마크 정보를 표시할 인트라 프레임을 추출한다. 워터마크 블록 조합부(134)는 워터마크 정보를 표시하기 위해 추출된 인트라 프레임의 블록들의 위치 정보를 이용하여 워터마크 블록 조합부(134)는 워터마크 정보를 표시하기 위해 추출된 인트라 프레임의 블록들의 위치 정보를 이용하여 워터마크 0 블록 및 워터마크 1 블록을 조합하여 출력한다. When the watermark block combining unit 134 receives the watermark information from the information generating unit 132 , the frame information stored in the database unit 140 and location information of blocks within the frame are retrieved. The watermark block combining unit 134 extracts an intra frame for displaying watermark information from among the GOPs output from the section combining unit 732 by using the frame information. The watermark block combination unit 134 uses the location information of the blocks of the intra frame extracted to display the watermark information, and the watermark block combination unit 134 uses the block of the intra frame extracted to display the watermark information. The watermark 0 block and the watermark 1 block are combined and outputted by using the location information of each.

프레임 결합부(136)는 섹션 조합부(732)로부터 출력되는 조합 콘텐츠와 워터마크 블록 조합부(134)로부터 출력되는 워터마크 콘텐츠를 결합하여 배포 콘텐츠 파일을 출력한다. The frame combining unit 136 combines the combined content output from the section combining unit 732 with the watermark content output from the watermark block combining unit 134 to output a distributed content file.

데이터베이스 유닛(140)은 콘텐츠 ID 부여부(112)에서 부여된 콘텐츠 ID를 저장하며, 블록 분석부(116)에서 선택된 프레임 정보와 프레임 내의 블록들의 위치 정보를 저장한다. 데이터베이스 유닛(140)은 또한, 정보 생성부(132)에 입력된 클라이언트 메타데이터와 정보 생성부(132)에서 생성된 워터마크 정보를 저장한다.The database unit 140 stores the content ID assigned by the content ID granting unit 112 , and stores information on the frame selected by the block analyzing unit 116 and location information of blocks within the frame. The database unit 140 also stores the client metadata input to the information generating unit 132 and the watermark information generated by the information generating unit 132 .

도 10은 본 발명의 또 다른 실시예에 따른 포렌식 워터마크 임베딩 방법을 도시하는 흐름도이다.10 is a flowchart illustrating a forensic watermark embedding method according to another embodiment of the present invention.

콘텐츠 ID 부여부(112)는 원본 콘텐츠가 입력되면 관리를 위한 콘텐츠 ID를 부여한다(S1002). 프레임 추출부(114)는 원본 콘텐츠로부터 인트라 프레임을 추출한다(S1004). 원본 콘텐츠가 동영상 콘텐츠이면, 원본 콘텐츠는 복수의 GOP(Group Of Pictures)를 포함할 수 있다. When the original content is input, the content ID granting unit 112 grants a content ID for management (S1002). The frame extraction unit 114 extracts an intra frame from the original content (S1004). If the original content is video content, the original content may include a plurality of Group Of Pictures (GOPs).

블록 분석부(116)는 부호화된 영상의 인트라 프레임에서 소정 크기 이하의 블록, 즉 부호화된 영상의 가장 작은 블록을 선택한다(S1006). 블록 분석부(116)는 소정 크기 이하의 블록들만으로 구성된 매크로블록을 선택한다(S1008). 블록 분석부(116)는 예를 들어, AVC 규격의 경우 부호화된 영상의 인트라 프레임에서 선택된 4 X 4의 서브블록으로만 구성된 16 X 16의 매크로블록을 선택할 수 있다.The block analyzer 116 selects a block of a predetermined size or less from the intra frame of the encoded image, that is, the smallest block of the encoded image (S1006). The block analyzer 116 selects a macroblock composed of only blocks of a predetermined size or less (S1008). For example, in the case of the AVC standard, the block analyzer 116 may select a 16×16 macroblock including only 4×4 subblocks selected from an intra frame of an encoded image.

블록 분석부(116)는 워터마크가 임베딩될 최종 매크로블록이 결정되면, 프레임 정보와 프레임 내의 블록들의 위치 정보(location-map)를 데이터베이스 유닛(140)에 저장한다(S1010). 위치 정보는 블록에 대한 스트림상의 NAL(network abstration layer) 정보를 포함할 수 있다.When the final macroblock in which the watermark is to be embedded is determined, the block analyzer 116 stores frame information and location-map of blocks in the frame in the database unit 140 (S1010). The location information may include network abstration layer (NAL) information on a stream for a block.

마크 0 임베딩부(118)는 블록 분석부(116)로부터 선택되어 출력된 매크로블록들에 대해 워터마크 0을 임베딩하여 0 임베딩 프레임을 출력하고, 0 콘텐츠 저장부(122)는 마크 0 임베딩부(118)로부터 출력되는 0 임베딩 프레임을 포함한 프레임 콘텐츠들을 0 콘텐츠 파일로 저장한다(S1012). The mark 0 embedding unit 118 embeds a watermark 0 for macroblocks selected and output by the block analysis unit 116 and outputs a 0 embedding frame, and the 0 content storage unit 122 outputs a mark 0 embedding unit ( 118), the frame contents including the 0 embedding frame are stored as 0 contents file (S1012).

마크 1 임베딩부(120)는 블록 분석부(116)로부터 선택되어 출력된 매크로블록들에 대해 워터마크 1을 임베딩하고 1 임베딩 블록들을 하나의 청크로 묶여 출력하고, 1 청크 저장부(124)는 마크 1 임베딩부(120)로부터 출력되는 복수의 블록들을 1 청크 파일로 저장한다(S1014).The mark 1 embedding unit 120 embeds watermark 1 for macroblocks selected and output by the block analysis unit 116 and outputs 1 embedding blocks as a single chunk, and the 1 chunk storage unit 124 is A plurality of blocks output from the mark 1 embedding unit 120 are stored as one chunk file (S1014).

정보 생성부(132)는 사용자 디바이스 등으로부터 송신된 클라이언트 메타데이터(metadata)를 수신하고, 이 클라이언트 메타데이터를 이용하여 콘텐츠의 사용자 등을 특정할 수 있는 워터마크 정보(Client-Request-ID)를 생성한다(S1016). 정보 생성부(132)는 워터마크 정보를 워터마크 블록 조합부(134)에 제공하고, 데이터베이스 유닛(140)에 클라이언트 메타데이터와 연계하여 워터마크 정보를 저장한다.The information generating unit 132 receives client metadata transmitted from a user device, etc., and uses the client metadata to generate watermark information (Client-Request-ID) that can specify a user of the content, etc. generated (S1016). The information generating unit 132 provides the watermark information to the watermark block combining unit 134 , and stores the watermark information in the database unit 140 in association with client metadata.

워터마크 블록 조합부(134)는 정보 생성부(132)로부터 워터마크 정보를 수신하면, 데이터베이스 유닛(140)에 저장된 프레임 정보와 프레임 내의 블록들의 위치 정보를 불러온다. 워터마크 블록 조합부(134)는 프레임 정보를 이용하여 0 콘텐츠 저장부(122)로부터 출력되는 GOP들 중에서 워터마크 정보를 표시할 인트라 프레임을 추출한다. 워터마크 블록 조합부(134)는 워터마크 정보를 표시하기 위해 추출된 인트라 프레임의 블록들의 위치 정보를 이용하여 워터마크 정보에 근거하여 워터마크 0 블록을 워터마크 1 블록으로 대체하여 출력한다(S1018). 워터마크 블록 조합부(134)는 워터마크 정보에 의해 사용자가 특정될 수 있도록, 블록 분석부(116)에서 선택된 모든 프레임에 대해서는 동일한 워터마크 정보를 임베딩한다.When the watermark block combining unit 134 receives the watermark information from the information generating unit 132 , the frame information stored in the database unit 140 and location information of blocks within the frame are retrieved. The watermark block combining unit 134 extracts an intra frame for displaying watermark information from among the GOPs output from the zero content storage unit 122 by using the frame information. The watermark block combining unit 134 replaces the watermark 0 block with the watermark 1 block and outputs the watermark 1 block based on the watermark information by using the location information of the blocks of the intra frame extracted to display the watermark information (S1018). ). The watermark block combining unit 134 embeds the same watermark information for all frames selected by the block analyzing unit 116 so that a user can be specified by the watermark information.

프레임 결합부(136)는 0 콘텐츠 저장부(122)로부터 출력되는 원본 콘텐츠들과 워터마크 블록 조합부(134)로부터 출력되는 워터마크 콘텐츠들을 결합하여 배포 콘텐츠 파일을 출력한다(S1020).The frame combining unit 136 combines the original contents output from the zero content storage unit 122 and the watermark contents output from the watermark block combining unit 134 to output a distributed content file (S1020).

본 발명의 실시예들에서는 블록들을 분석하여 선택하는 것을 예시로 설명했지만, 경우에 따라서는 고정된 블록들을 선택하여 이용할 수도 있을 것이다.In the embodiments of the present invention, analysis and selection of blocks has been described as an example, but in some cases, fixed blocks may be selected and used.

이상에서 설명된 본 발명의 실시예들은 본 발명의 기술 사상을 예시적으로 보여준 것에 불과하며, 본 발명의 보호 범위는 이하 특허청구범위에 의하여 해석되어야 마땅할 것이다. 또한, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형할 수 있을 것인 바, 본 발명과 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The embodiments of the present invention described above are merely illustrative of the technical idea of the present invention, and the protection scope of the present invention should be interpreted by the following claims. In addition, a person of ordinary skill in the art to which the present invention belongs will be able to various modifications and variations without departing from the essential characteristics of the present invention, all technical ideas within the scope equivalent to the present invention are should be construed as being included in the scope of the rights of

110: 전처리 유닛 112: 콘텐츠 ID 부여부
114: 프레임 추출부 116: 블록 분석부
118: 마크 0 임베딩부 120: 마크 1 임베딩부
122: 0 콘텐츠 저장부 124: 1 청크 저장부
130: 배포 유닛 132: 정보 생성부
134: 워터마크 블록 조합부 136: 프레임 결합부
140: 데이터베이스 유닛 702: 섹션 출력부
704: 섹션마크 0 임베딩부 706: 섹션마크 1 임베딩부
708: 블록마크 임베딩부 710: 0 콘텐츠 저장부
712: 1 콘텐츠 저장부110: preprocessing unit 112: content ID granting unit
114: frame extraction unit 116: block analysis unit
118: mark 0 embedding part 120: mark 1 embedding part
122: 0 content storage 124: 1 chunk storage
130: distribution unit 132: information generating unit
134: watermark block combination unit 136: frame combination unit
140: database unit 702: section output unit
704: section mark 0 embedding unit 706: section mark 1 embedding unit
708: block mark embedding unit 710: 0 content storage unit
712: 1 content storage

Claims (12)

포렌식 워터마크 임베딩 장치에 있어서,
임베딩 정보를 저장하기 위한 데이터베이스 유닛;
원본 콘텐츠에서 소정 구간의 콘텐츠마다 블록들을 분석하여 동일 블록에 대해, 워터마크 0을 임베딩하고 생성된 0 임베딩 콘텐츠를 포함한 0 콘텐츠들을 0 콘텐츠 파일로 저장하고 그리고 워터마크 1을 임베딩하고 1 임베딩 블록들을 청크 파일로 저장하고, 상기 워터마크 0 또는 1이 임베딩된 블록들에 대한 상기 임베딩 정보를 상기 데이터베이스 유닛에 저장하는 전처리 유닛; 및
상기 데이터베이스 유닛에 저장된 상기 임베딩 정보를 이용하여 상기 전처리 유닛으로부터 제공되는 상기 0 콘텐츠 파일에서 상기 워터마크 0이 임베딩된 블록들을 추출하고 워터마크 정보에 근거하여 상기 청크 파일의 상기 1 임베딩 블록들로 대체하여 상기 워터마크 정보를 표시한 배포 콘텐츠를 출력하는 배포 유닛을 포함하고,
상기 원본 콘텐츠는 동영상 콘텐츠이고,
상기 소정 구간의 콘텐츠는 GOP(Group Of Picture) 콘텐츠와 관련이 있고,
상기 전처리 유닛은, 상기 GOP 콘텐츠 중 소정의 프레임의 블록들을 분석하여 상기 소정의 프레임에 상기 워터마크 정보를 페이로딩할 수 있는 개수를 만족하는 블록들이 있는지를 확인하고, 확인된 블록들 중 상기 상기 워터마크 정보를 표시할 블록들에 대한 위치 정보를 상기 임베딩 정보로 저장하도록 구성되는 것을 특징으로 하는 포렌식 워터마크 임베딩 장치.In the forensic watermark embedding device,
a database unit for storing embedding information;
Blocks are analyzed for each content of a predetermined section in the original content, and for the same block, watermark 0 is embedded, 0 contents including the 0 embedding contents are stored as 0 contents file, and watermark 1 is embedded and 1 embedding blocks are embedded. a pre-processing unit storing the data in a chunk file and storing the embedding information for the blocks in which the watermark 0 or 1 is embedded in the database unit; and
By using the embedding information stored in the database unit, the watermark 0-embedded blocks are extracted from the 0 content file provided from the pre-processing unit and replaced with the 1 embedding blocks of the chunk file based on the watermark information. and a distribution unit for outputting distribution content displaying the watermark information,
The original content is video content,
The content of the predetermined section is related to GOP (Group Of Picture) content,
The pre-processing unit analyzes blocks of a predetermined frame among the GOP contents to determine whether there are blocks satisfying the number of which the watermark information can be payloaded in the predetermined frame, and among the checked blocks, the The forensic watermark embedding apparatus, characterized in that it is configured to store location information on blocks for which watermark information is to be displayed as the embedding information. 삭제delete 제1항에 있어서,
상기 배포 유닛은 상기 임베딩 정보를 이용하여 상기 전처리 유닛으로부터 제공되는 상기 0 콘텐츠 파일에서 상기 워터마크 0이 임베딩된 블록들을 가진 프레임을 추출하고 상기 추출된 프레임을 파싱하여 비트스트림의 NAL(network abstration layer) 단위로 상기 워터마크 정보에 근거하여 상기 청크 파일의 상기 1 임베딩 블록들로 대체하는 것을 특징으로 하는 포렌식 워터마크 임베딩 장치.According to claim 1,
The distribution unit extracts a frame having blocks in which the watermark 0 is embedded from the 0 content file provided from the pre-processing unit by using the embedding information, and parses the extracted frame to form a network abstraction layer (NAL) of the bitstream. ) unit, based on the watermark information, for replacing the one embedding blocks of the chunk file with the forensic watermark embedding apparatus. 제1항 또는 제3항에 있어서,
상기 배포 유닛은 클라이언트 메타데이터가 입력되면 상기 클라이언트 메타데이터로부터 상기 워터마크 정보를 생성하고, 상기 클라이언트 메타데이터 및 상기 워터마크 정보를 연계하여 상기 데이터베이스 유닛에 저장하는 것을 특징으로 하는 포렌식 워터마크 임베딩 장치. 4. The method of claim 1 or 3,
The distribution unit generates the watermark information from the client metadata when the client metadata is input, and stores the watermark information in the database unit in association with the client metadata and the watermark information. . 삭제delete 제1항에 있어서,
상기 전처리 유닛은 상기 원본 콘텐츠에서 섹션 콘텐츠마다, 섹션 워터마크 0을 임베딩하여 0 섹션 콘텐츠들을 0 섹션 콘텐츠 파일로 저장하고 그리고 섹션 워터마크 1을 임베딩하여 1 섹션 콘텐츠들을 1 섹션 콘텐츠 파일로 저장하며, 상기 0 콘텐츠 섹션 파일 및 상기 1 섹션 콘텐츠 파일 중 적어도 하나는 상기 워터마크 0 또는 1이 임베딩된 콘텐츠를 포함하고,
상기 배포 유닛은 섹션 워터마크 정보에 근거하여 상기 0 섹션 콘텐츠 파일 또는 상기 1 섹션 콘텐츠 파일의 해당 섹션 콘텐츠 파일을 선택하여 조합 콘텐츠 파일을 출력하는 것을 특징으로 하는 포렌식 워터마크 임베딩 장치. According to claim 1,
the pre-processing unit embeds section watermark 0 for each section content in the original content to store 0-section contents as a 0-section content file, and embeds section watermark 1 to store 1 section contents as a 1-section contents file, At least one of the 0 content section file and the 1 section content file includes content in which the watermark 0 or 1 is embedded,
and the distribution unit selects the 0-section content file or the corresponding section content file of the 1-section content file according to the section watermark information to output a combined content file. 제6항에 있어서,
상기 배포 유닛은 상기 임베딩 정보를 이용하여 상기 조합 콘텐츠 파일에서 상기 워터마크 0이 임베딩된 블록들을 가진 프레임을 추출하고, 상기 워터마크 정보에 근거하여 상기 청크 파일의 1 임베딩 블록들로 대체하는 것을 특징으로 하는 포렌식 워터마크 임베딩 장치.7. The method of claim 6,
the distribution unit extracts a frame having the blocks in which the watermark 0 is embedded from the combined content file by using the embedding information, and replaces it with embedding blocks 1 in the chunk file based on the watermark information Forensic watermark embedding device. 데이터베이스 유닛을 포함하는 장치에 의해 수행되는 포렌식 워터마크 임베딩 방법에 있어서,
원본 콘텐츠에서 소정 구간의 콘텐츠마다 블록들을 분석하여 동일 블록에 대해, 워터마크 0을 임베딩하고 생성된 0 임베딩 콘텐츠를 포함한 0 콘텐츠들을 0 콘텐츠 파일로 저장하고 그리고 워터마크 1을 임베딩하고 1 임베딩 블록들을 청크 파일로 저장하고, 상기 워터마크 0 또는 1이 임베딩된 블록들에 대한 임베딩 정보를 상기 데이터베이스 유닛에 저장하는 저장하는 단계;
상기 데이터베이스 유닛에 저장된 상기 임베딩 정보를 이용하여 상기 저장하는 단계에서 저장되어 제공되는 상기 0 콘텐츠 파일에서 상기 워터마크 0이 임베딩된 블록들을 추출하는 단계; 및
워터마크 정보에 근거하여 상기 청크 파일의 상기 1 임베딩 블록들로 대체하여 상기 워터마크 정보를 표시한 배포 콘텐츠를 출력하는 단계를 포함하고,
상기 원본 콘텐츠는 동영상 콘텐츠이고,
상기 소정 구간의 콘텐츠는 GOP(Group Of Picture) 콘텐츠와 관련이 있고,
상기 저장하는 단계에서의 상기 블록들의 분석은 상기 GOP 콘텐츠 중 소정의 프레임의 블록들을 분석하여 상기 워터마크 정보를 표시할 블록들에 대한 위치 정보를 상기 임베딩 정보로 저장하고,

상기 저장하는 단계는 상기 원본 콘텐츠에서 섹션 콘텐츠마다, 섹션 워터마크 0을 임베딩하여 0 섹션 콘텐츠들을 0 섹션 콘텐츠 파일로 저장하고 그리고 섹션 워터마크 1을 임베딩하여 1 섹션 콘텐츠들을 1 섹션 콘텐츠 파일로 저장하는 것을 더 포함하고, - 상기 0 콘텐츠 섹션 파일 및 상기 1 섹션 콘텐츠 파일 중 적어도 하나는 상기 워터마크 0 또는 1이 임베딩된 콘텐츠를 포함함 -;
상기 추출하는 단계 이전에, 섹션 워터마크 정보에 근거하여 상기 0 섹션 콘텐츠 파일 또는 상기 1 섹션 콘텐츠 파일의 해당 섹션 콘텐츠 파일을 선택하여 조합 콘텐츠 파일을 출력하는 단계를 더 포함하는 것을 특징으로 하는 포렌식 워터마크 임베딩 방법.A forensic watermark embedding method performed by an apparatus including a database unit, the method comprising:
Blocks are analyzed for each content of a predetermined section in the original content, and for the same block, watermark 0 is embedded, 0 contents including the 0 embedding contents are stored as 0 contents file, and watermark 1 is embedded and 1 embedding blocks are embedded. storing as a chunk file and storing embedding information for blocks in which the watermark 0 or 1 is embedded in the database unit;
extracting the blocks in which the watermark 0 is embedded from the 0 content file stored and provided in the storing step by using the embedding information stored in the database unit; and
and outputting distribution content displaying the watermark information by replacing the 1 embedding blocks of the chunk file based on the watermark information,
The original content is video content,
The content of the predetermined section is related to GOP (Group Of Picture) content,
The analysis of the blocks in the storing step analyzes blocks of a predetermined frame among the GOP contents and stores location information on blocks to display the watermark information as the embedding information,

The storing includes embedding section watermark 0 for each section content in the original content to save section 0 contents as a 0 section content file, and embedding section watermark 1 to store 1 section contents as a 1 section contents file. further comprising: - at least one of the 0 content section file and the 1 section content file includes the watermark 0 or 1 embedded content;
Forensic water, characterized in that before the extracting, further comprising the step of outputting a combined content file by selecting the corresponding section content file of the 0-section content file or the 1-section content file based on the section watermark information How to embed marks. 삭제delete 삭제delete 제8항에 있어서,
상기 워터마크 정보는 상기 소정의 프레임의 블록들과 관련된 블록 워터마크 정보이고,
상기 배포 콘텐츠는 상기 섹션 워터마크 정보와 상기 블록 워터마크 정보를 이중으로 임베딩한 콘텐츠인 것을 특징으로 하는 포렌식 워터마크 임베딩 방법.9. The method of claim 8,
The watermark information is block watermark information related to blocks of the predetermined frame,
The forensic watermark embedding method, characterized in that the distribution content is content in which the section watermark information and the block watermark information are doubly embedded. 제8항에 있어서,
상기 저장하는 단계에서의 상기 소정의 프레임은 상기 섹션 워터마크 0 또는 1이 임베딩되어 있지 않은 프레임인 것을 특징으로 하는 포렌식 워터마크 임베딩 방법.9. The method of claim 8,
The forensic watermark embedding method, characterized in that the predetermined frame in the storing step is a frame in which the section watermark 0 or 1 is not embedded.
KR1020190143373A 2019-11-11 2019-11-11 Apparatus and method for inserting forensic watermarks KR102291540B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190143373A KR102291540B1 (en) 2019-11-11 2019-11-11 Apparatus and method for inserting forensic watermarks

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190143373A KR102291540B1 (en) 2019-11-11 2019-11-11 Apparatus and method for inserting forensic watermarks

Publications (2)

Publication Number Publication Date
KR20210056658A KR20210056658A (en) 2021-05-20
KR102291540B1 true KR102291540B1 (en) 2021-08-20

Family

ID=76142950

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190143373A KR102291540B1 (en) 2019-11-11 2019-11-11 Apparatus and method for inserting forensic watermarks

Country Status (1)

Country Link
KR (1) KR102291540B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101039466B1 (en) * 2010-11-03 2011-06-07 주식회사 생각과기술 The method for inserting/detecting a forensic mark using self reference code and peak position modulation and the apparatus thereof

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8565472B2 (en) * 2007-10-30 2013-10-22 General Instrument Corporation Method, device and system for dynamically embedding watermark information into multimedia content
KR101193534B1 (en) * 2009-07-17 2012-10-22 주식회사 케이티 Watermarking apparatus and method for inserting watermark in video contents
KR20130043563A (en) * 2011-10-20 2013-04-30 한국전자통신연구원 Method and system for forensic marking of digital contents
US9742783B2 (en) * 2015-05-29 2017-08-22 Markany Inc. Method for sending contents including tracking information and apparatus thereof, and method for receiving content including tracking information and apparatus thereof
KR102017487B1 (en) * 2018-02-01 2019-09-04 광운대학교 산학협력단 A Blind Digital Watermarking Method for Omni-directional Images using Feature Points

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101039466B1 (en) * 2010-11-03 2011-06-07 주식회사 생각과기술 The method for inserting/detecting a forensic mark using self reference code and peak position modulation and the apparatus thereof

Also Published As

Publication number Publication date
KR20210056658A (en) 2021-05-20

Similar Documents

Publication Publication Date Title
JP3516585B2 (en) Data processing device and data processing method
US9292897B2 (en) Watermarking of images
JP2007533197A (en) Encoding method applied to multimedia data
CN104429083A (en) Coding timing information for video coding
KR20120085870A (en) Streaming encoded video data
HUE029013T2 (en) Arranging sub-track fragments for streaming video data
KR20150081229A (en) Video decoding method and apparatus using the same
KR20200128146A (en) Method and device for using out-of-band stream end NAL unit in decoding
KR102289397B1 (en) Apparatus and method for inserting just in time forensic watermarks
Iqbal et al. Compressed-domain video processing for adaptation, encryption, and authentication
KR102291540B1 (en) Apparatus and method for inserting forensic watermarks
KR102265784B1 (en) Apparatus and method for client side forensic watermark
JP7378616B2 (en) Interactive selection information intended for use for interactive playback of DASH content
KR102278005B1 (en) Apparatus and method for inserting a plurality of forensic marks
JP7221406B2 (en) In-manifest update event
TW202131682A (en) Video coding in relation to subpictures
US20220078464A1 (en) Method for concealing data in an image or a video stream inside a compression chain
RU2610286C2 (en) Decoding of multilayer video stream
US20220207120A1 (en) Apparatus and method for embedding plurality of forensic marks
JP7434561B2 (en) MPD expiration date processing model
Iqbal et al. Hard authentication of H. 264 video applying MPEG-21 generic bitstream syntax description (GBSD)
JP2009501477A (en) How to embed data
KR20220082578A (en) Forensic marking device and method with secret sharing technology applied
JP2024516010A (en) Method for annotating VVC subpictures in DASH - Patent application
Iqbal et al. Compressed domain authentication of live video

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
Z031 Request for patent cancellation [new post grant opposition system introduced on 1 march 2017]

Free format text: CASE NUMBER: 2022106000016