JP5557756B2 - Digital watermark embedding device, digital watermark embedding program, digital watermark detection device, and digital watermark detection program - Google Patents

Digital watermark embedding device, digital watermark embedding program, digital watermark detection device, and digital watermark detection program Download PDF

Info

Publication number
JP5557756B2
JP5557756B2 JP2011006577A JP2011006577A JP5557756B2 JP 5557756 B2 JP5557756 B2 JP 5557756B2 JP 2011006577 A JP2011006577 A JP 2011006577A JP 2011006577 A JP2011006577 A JP 2011006577A JP 5557756 B2 JP5557756 B2 JP 5557756B2
Authority
JP
Japan
Prior art keywords
digital watermark
moving image
embedding
image content
identification information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011006577A
Other languages
Japanese (ja)
Other versions
JP2012151535A (en
Inventor
恵吾 真島
寿之 大亦
正顕 黒住
友幸 井上
淳 具志堅
克昌 広瀬
大 中島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Japan Broadcasting Corp filed Critical Japan Broadcasting Corp
Priority to JP2011006577A priority Critical patent/JP5557756B2/en
Publication of JP2012151535A publication Critical patent/JP2012151535A/en
Application granted granted Critical
Publication of JP5557756B2 publication Critical patent/JP5557756B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、電子透かし埋め込み装置、電子透かし埋め込みプログラム、電子透かし検出装置および電子透かし検出プログラムに関するものである。   The present invention relates to a digital watermark embedding device, a digital watermark embedding program, a digital watermark detection device, and a digital watermark detection program.

従来、映画スクリーンやテレビのモニタをビデオカメラで撮影(以下、再撮という)した映像やMPEG−2等の符号化方式により圧縮した映像からでも埋め込んだ情報を検出可能な電子透かし(以下、「再撮耐性等を有する電子透かし」という)の技術が提案されている(例えば、特許文献1参照)。   Conventionally, a digital watermark (hereinafter referred to as “a digital watermark”) that can detect embedded information even from a video captured by a video camera (hereinafter referred to as “re-captured”) or a video compressed by an encoding method such as MPEG-2. A technique of “digital watermark having reshooting resistance” has been proposed (for example, see Patent Document 1).

国際公開第05/079072号International Publication No. 05/079072

しかしながら、従来の電子透かしにおいては、コンテンツの違法コピーを高速に検知して効率良く排除する技術、および、放送局において番組または放送素材を効果的に識別する技術については言及されておらず、電子透かしを実用的に利用できないという課題があった。   However, in the conventional digital watermark, there is no mention of a technology that detects illegal copies of content at high speed and efficiently eliminates it, and a technology that effectively identifies a program or broadcast material in a broadcasting station. There was a problem that the watermark could not be used practically.

本発明はかかる点に鑑みてなされたものであって、電子透かしを活用して、コンテンツの違法コピーを高速に検知して効率良く排除できるとともに、放送局において番組または放送素材を効果的に識別することができる電子透かし埋め込み装置、電子透かし埋め込みプログラム、電子透かし検出装置および電子透かし検出プログラムを提供することを課題とする。   The present invention has been made in view of the above points, and can effectively detect illegal copies of contents at high speed by using digital watermarks and efficiently identify programs or broadcast materials at a broadcasting station. An object is to provide a digital watermark embedding device, a digital watermark embedding program, a digital watermark detection device, and a digital watermark detection program.

前記課題を解決するために請求項1に係る電子透かし埋め込み装置は、電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成する電子透かし埋め込み装置であって、埋め込み単位特定手段と、埋め込む電子透かし埋め込み手段と、領域分割手段と、を備え、電子透かし埋め込み手段が基本識別情報埋め込み部を備える構成とした。   In order to solve the above problem, an electronic watermark embedding device according to claim 1 is an electronic watermark embedding device that generates an electronic watermark embedded moving image content by embedding an electronic watermark in the moving image content, The digital watermark embedding unit and the region dividing unit are included, and the digital watermark embedding unit includes a basic identification information embedding unit.

このような構成によれば、電子透かし埋め込み装置は、埋め込み単位特定手段によって、動画像コンテンツを構成するフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する。また、電子透かし埋め込み手段によって、フレーム画像に、所定数の画素ブロック単位で構成され、動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含む電子透かしを埋め込む。また、領域分割手段によって、フレーム画像を複数の埋め込み領域に分割する。   According to such a configuration, the digital watermark embedding device specifies the pixel block unit corresponding to one bit of the digital watermark as the embedding unit in the frame image constituting the moving image content by the embedding unit specifying unit. Further, the digital watermark embedding means adds a digital watermark including one or more basic identification information, which is configured in a predetermined number of pixel block units and is information for distinguishing the moving image content from other moving image content, to the frame image. Embed. Further, the frame image is divided into a plurality of embedding areas by the area dividing means.

そして、基本識別情報埋め込み部によって、複数の埋め込み領域ごとに、基本識別情報を1回以上埋め込む。そのため、電子透かし埋め込み装置は、1枚のフレーム画像に埋め込むことができる基本識別情報の数を、埋め込み領域の数だけ倍増させることができるため、フレーム画像のある部分でより激しい劣化が生じた場合であっても、その他の部分の基本識別情報から電子透かしを検出することができる電子透かし埋め込み動画像コンテンツを生成することができる。   Then, the basic identification information embedding unit embeds basic identification information at least once for each of a plurality of embedding areas. For this reason, the digital watermark embedding device can double the number of basic identification information that can be embedded in one frame image by the number of embedding areas, so that a more severe deterioration occurs in a part of the frame image. Even so, it is possible to generate a digital watermark-embedded moving image content capable of detecting a digital watermark from basic identification information of other parts.

また、前記課題を解決するために請求項2に係る電子透かし埋め込み装置は、電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成する電子透かし埋め込み装置であって、埋め込み単位特定手段と、電子透かし埋め込み手段と、埋め込みデータ生成手段と、を備え、電子透かし埋め込み手段が、埋め込みデータをフレーム画像に所定回数繰り返し埋め込む構成とした。   According to another aspect of the present invention, there is provided a digital watermark embedding device according to claim 2, wherein the digital watermark embedding device generates a digital watermark embedded video content by embedding the digital watermark in the video content. Means, an electronic watermark embedding means, and an embedded data generating means, and the electronic watermark embedding means is configured to repeatedly embed embedded data in a frame image a predetermined number of times.

このような構成によれば、電子透かし埋め込み装置は、埋め込み単位特定手段によって、動画像コンテンツを構成するフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する。また、電子透かし埋め込み手段によって、フレーム画像に、所定数の画素ブロック単位で構成され、動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含む電子透かしを埋め込む。また、埋め込みデータ生成手段によって、同一の前記基本識別情報を1つ以上含む電子透かしの埋め込みデータを生成する。そのため、電子透かし埋め込み装置は、1つ以上の基本識別情報を一度にフレーム画像に埋め込むことができるため、電子透かしの埋め込み処理の回数を減らし、全体の処理速度を高速化することができる。   According to such a configuration, the digital watermark embedding device specifies the pixel block unit corresponding to one bit of the digital watermark as the embedding unit in the frame image constituting the moving image content by the embedding unit specifying unit. Further, the digital watermark embedding means adds a digital watermark including one or more basic identification information, which is configured in a predetermined number of pixel block units and is information for distinguishing the moving image content from other moving image content, to the frame image. Embed. Further, the embedded data generating means generates digital watermark embedded data including one or more of the same basic identification information. Therefore, since the electronic watermark embedding apparatus can embed one or more pieces of basic identification information in a frame image at a time, the number of digital watermark embedding processes can be reduced and the overall processing speed can be increased.

また、請求項3に係る電子透かし埋め込み装置は、請求項1に係る電子透かし埋め込み装置において、関連情報埋め込み部を備える構成とした。   According to a third aspect of the present invention, there is provided a digital watermark embedding device according to the first aspect, comprising the related information embedding unit in the digital watermark embedding device according to the first aspect.

このような構成によれば、電子透かし埋め込み装置は、関連情報埋め込み手段によって、複数の埋め込み領域ごとに、動画像コンテンツに関連した情報である関連情報を1回以上埋め込む。そのため、電子透かし埋め込み装置は、1枚のフレーム画像に埋め込むことができる関連情報の数を、埋め込み領域の数だけ倍増させることができるため、フレーム画像のある部分でより激しい劣化が生じた場合であっても、その他の部分の関連情報から電子透かしを検出することができる電子透かし埋め込み動画像コンテンツを生成することができる。   According to such a configuration, the digital watermark embedding device embeds the related information, which is information related to the moving image content, at least once for each of the plurality of embedding areas by the related information embedding unit. For this reason, the digital watermark embedding apparatus can double the number of related information that can be embedded in one frame image by the number of embedding areas, so that a more severe deterioration occurs in a part of the frame image. Even in such a case, it is possible to generate a digital watermark-embedded moving image content capable of detecting a digital watermark from related information of other parts.

また、請求項4に係る電子透かし埋め込み装置は、請求項2に係る電子透かし埋め込み装置において、埋め込みデータ生成手段が、同一の基本識別情報を1つ以上含むとともに動画像コンテンツに関連した情報である関連情報を1つ以上含む電子透かしの埋め込みデータを生成する構成とした。   The digital watermark embedding device according to claim 4 is the digital watermark embedding device according to claim 2, wherein the embedded data generation means is information related to moving image content while including one or more of the same basic identification information. The digital watermark embedded data including one or more related information is generated.

このような構成によれば、電子透かし埋め込み装置は、1つ以上の基本識別情報と1つ以上の関連情報を一度にフレーム画像に埋め込むことができるため、電子透かしの埋め込み処理の回数を減らし、全体の処理速度を高速化することができる。   According to such a configuration, the digital watermark embedding apparatus can embed one or more basic identification information and one or more related information in a frame image at a time, thereby reducing the number of digital watermark embedding processes, The overall processing speed can be increased.

また、請求項3または請求項4に係る電子透かし埋め込み装置において、基本識別情報が、動画像コンテンツの著作権者の氏名または名称、あるいは、動画像コンテンツの識別子である構成としてもよい。   Further, in the digital watermark embedding device according to claim 3 or claim 4, the basic identification information may be a name or name of a copyright holder of the moving image content or an identifier of the moving image content.

さらに、請求項3から請求項5のいずれか一項に係る電子透かし埋め込み装置において、関連情報が、動画像コンテンツの名称を記述したメタデータ、または、動画像コンテンツの著作権者の氏名以外の権利情報もしくは動画像コンテンツの著作権者の名称以外の権利情報を記述したメタデータである構成としてもよく、請求項3、請求項4、請求項6のいずれか一項に係る電子透かし埋め込み装置において、関連情報が、動画像コンテンツの撮影日時または撮影場所を示す情報である構成としてもよい。   Furthermore, in the digital watermark embedding device according to any one of claims 3 to 5, the related information is metadata other than the metadata describing the name of the moving image content or the name of the copyright holder of the moving image content. The digital watermark embedding device according to any one of claims 3, 4 and 6, wherein the metadata may be metadata describing rights information or rights information other than the name of the copyright holder of the moving image content. In the configuration, the related information may be information indicating a shooting date or a shooting location of the moving image content.

前記課題を解決するために請求項9に係る電子透かし埋め込みプログラムは、電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成するために、コンピュータを、埋め込み単位特定手段、埋め込む電子透かし埋め込み手段、領域分割手段、として機能させ、電子透かし埋め込み手段が基本識別情報埋め込み部を備える構成とした。   In order to solve the above-described problem, an electronic watermark embedding program according to claim 9, an embedding unit specifying unit, an embedding electronic device, The digital watermark embedding unit includes a basic identification information embedding unit that functions as a watermark embedding unit and an area dividing unit.

このような構成によれば、電子透かし埋め込みプログラムは、埋め込み単位特定手段によって、動画像コンテンツを構成するフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する。また、電子透かし埋め込み手段によって、フレーム画像に、所定数の画素ブロック単位で構成され、動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含む電子透かしを埋め込む。また、領域分割手段によって、フレーム画像を複数の埋め込み領域に分割する。   According to such a configuration, the digital watermark embedding program specifies the pixel block unit corresponding to one bit of the digital watermark as the embedding unit in the frame image constituting the moving image content by the embedding unit specifying unit. Further, the digital watermark embedding means adds a digital watermark including one or more basic identification information, which is configured in a predetermined number of pixel block units and is information for distinguishing the moving image content from other moving image content, to the frame image. Embed. Further, the frame image is divided into a plurality of embedding areas by the area dividing means.

そして、基本識別情報埋め込み部によって、複数の埋め込み領域ごとに、基本識別情報を1回以上埋め込む。そのため、電子透かし埋め込みプログラムは、1枚のフレーム画像に埋め込むことができる基本識別情報の数を、埋め込み領域の数だけ倍増させることができるため、フレーム画像のある部分でより激しい劣化が生じた場合であっても、その他の部分の基本識別情報から電子透かしを検出することができる電子透かし埋め込み動画像コンテンツを生成することができる。   Then, the basic identification information embedding unit embeds basic identification information at least once for each of a plurality of embedding areas. Therefore, the digital watermark embedding program can double the number of basic identification information that can be embedded in one frame image by the number of embedding areas, so that a more severe deterioration occurs in a part of the frame image Even so, it is possible to generate a digital watermark-embedded moving image content capable of detecting a digital watermark from basic identification information of other parts.

前記課題を解決するために請求項10に係る電子透かし埋め込みプログラムは、電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成するために、コンピュータを、埋め込み単位特定手段、電子透かし埋め込み手段、埋め込みデータ生成手段、として機能させ、電子透かし埋め込み手段が、埋め込みデータをフレーム画像に所定回数繰り返し埋め込む構成とした。   In order to solve the above-described problem, a digital watermark embedding program according to claim 10, in order to generate a digital watermark-embedded moving image content by embedding the digital watermark in the moving image content, The digital watermark embedding means is configured to repeatedly embed the embedded data in the frame image a predetermined number of times.

このような構成によれば、電子透かし埋め込みプログラムは、埋め込み単位特定手段によって、動画像コンテンツを構成するフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する。また、電子透かし埋め込み手段によって、フレーム画像に、所定数の画素ブロック単位で構成され、動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含む電子透かしを埋め込む。また、埋め込みデータ生成手段によって、同一の前記基本識別情報を1つ以上含む電子透かしの埋め込みデータを生成する。そのため、電子透かし埋め込みプログラムは、1つ以上の基本識別情報を一度にフレーム画像に埋め込むことができるため、電子透かしの埋め込み処理の回数を減らし、全体の処理速度を高速化することができる。   According to such a configuration, the digital watermark embedding program specifies the pixel block unit corresponding to one bit of the digital watermark as the embedding unit in the frame image constituting the moving image content by the embedding unit specifying unit. Further, the digital watermark embedding means adds a digital watermark including one or more basic identification information, which is configured in a predetermined number of pixel block units and is information for distinguishing the moving image content from other moving image content, to the frame image. Embed. Further, the embedded data generating means generates digital watermark embedded data including one or more of the same basic identification information. Therefore, the digital watermark embedding program can embed one or more pieces of basic identification information in a frame image at a time, so that the number of digital watermark embedding processes can be reduced and the overall processing speed can be increased.

前記課題を解決するために請求項11に係る電子透かし検出装置は、動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域のそれぞれに、当該動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含むとともに当該動画像コンテンツに関連した情報である関連情報を1つ以上含む電子透かしが埋め込まれている電子透かし埋め込み動画像コンテンツから、請求項1から請求項10のいずれか一項に記載の電子透かし埋め込み装置によって生成された電子透かしを検出する電子透かし検出装置であって、基本識別情報検出部と、関連情報検出部と、からなる電子透かし検出手段を備える構成とした。
また、電子透かし検出装置は、基本識別情報検出部および関連情報検出部が、動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域ごとの埋め込みビットを判定し、当該複数の判定結果を相補的に判断することで、前記基本識別情報および前記関連情報に相当する最終的な埋め込みビットを決定する。
In order to solve the above-described problem, the digital watermark detection apparatus according to claim 11 distinguishes the moving image content from other moving image contents in each of a plurality of embedded regions in the frame image constituting the moving image content. the basic identification information from the electronic watermark embedding moving image content targeted electronic watermark containing related information is information related to the moving image content of one or more are embedded with comprises one or more is information, according claim 1 An electronic watermark detection apparatus for detecting an electronic watermark generated by the electronic watermark embedding apparatus according to any one of items 10, wherein the electronic watermark detection means includes a basic identification information detection unit and a related information detection unit It was set as the structure provided with.
In the digital watermark detection apparatus, the basic identification information detection unit and the related information detection unit determine embedded bits for each of a plurality of embedded regions in a frame image constituting the moving image content, and the plurality of determination results are complementary. Thus, a final embedded bit corresponding to the basic identification information and the related information is determined.

このような構成によれば、電子透かし検出装置は、基本識別情報検出部によって、複数の埋め込み領域から基本識別情報を検出し、関連情報検出部によって、複数の埋め込み領域から関連情報を検出するように、検出処理を2段階に分けて行うことができる。
さらに、電子透かし検出装置は、複数の埋め込み領域ごとの判定結果を総合することで、フレーム画像に埋め込まれている電子透かしの内容(基本識別情報および関連情報)を検出することができる。
According to such a configuration, the digital watermark detection apparatus detects the basic identification information from the plurality of embedded regions by the basic identification information detection unit, and detects the related information from the plurality of embedded regions by the related information detection unit. In addition, the detection process can be performed in two stages.
Furthermore, the digital watermark detection apparatus can detect the contents (basic identification information and related information) of the digital watermark embedded in the frame image by integrating the determination results for each of the plurality of embedded regions.

また、請求項12に係る電子透かし検出装置は、請求項11に係る電子透かし検出装置において、検索キーワード入力手段と、動画像コンテンツ収集手段と、を備え、基本識別情報検出部および関連情報検出部が、収集された動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域から、基本識別情報および関連情報を検出する構成とした。   A digital watermark detection apparatus according to a twelfth aspect is the digital watermark detection apparatus according to the eleventh aspect, further comprising a search keyword input unit and a moving image content collection unit, and a basic identification information detection unit and a related information detection unit. However, the basic identification information and the related information are detected from a plurality of embedded regions in the frame image constituting the collected moving image content.

このような構成によれば、電子透かし検出装置は、キーワード入力手段によって、通信網上における予め設定されたウェブサイト上に存在する動画像コンテンツを検索するための検索キーワードを入力する。また、動画像コンテンツ収集手段によって、検索キーワードに従ってウェブサイト上に存在する動画像コンテンツを検索し、当該動画像コンテンツを収集する。そのため、電子透かし検出装置は、キーワードに一致する動画像コンテンツを構成するフレーム画像の複数の埋め込み領域において、基本識別情報または関連情報が埋め込まれているか否かを検出するため、フレーム画像のある部分で劣化が生じた場合であっても、その他の部分の基本識別情報または関連情報から電子透かしを検出することができる。   According to such a configuration, the digital watermark detection apparatus inputs a search keyword for searching for moving image content existing on a preset website on the communication network by the keyword input unit. Also, the moving image content collecting means searches for moving image content existing on the website according to the search keyword, and collects the moving image content. For this reason, the digital watermark detection apparatus detects a portion of the frame image in order to detect whether basic identification information or related information is embedded in a plurality of embedded regions of the frame image constituting the moving image content that matches the keyword. Even when degradation occurs in the digital watermark, the digital watermark can be detected from the basic identification information or the related information of other parts.

また、請求項13に係る電子透かし検出装置は、請求項11に係る電子透かし検出装置において、動画像コンテンツ受信手段と、動画像コンテンツ復号手段と、第1データベース格納手段と、第2データベース格納手段と、を備え、基本識別情報検出部および関連情報検出部が、復号された動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域から、基本識別情報および関連情報を検出するとともに、第1データベース格納手段および第2データベース格納手段から、基本識別情報および関連情報に対応したテキスト情報をそれぞれ抽出する構成とした。   A digital watermark detection apparatus according to a thirteenth aspect is the digital watermark detection apparatus according to the eleventh aspect, wherein a moving image content receiving unit, a moving image content decoding unit, a first database storage unit, and a second database storage unit are provided. And the basic identification information detection unit and the related information detection unit detect the basic identification information and the related information from a plurality of embedded regions in the frame image constituting the decoded moving image content, and the first database The text information corresponding to the basic identification information and the related information is extracted from the storage means and the second database storage means, respectively.

このような構成によれば、電子透かし検出装置は、動画像コンテンツ受信手段によって、伝送路経由で動画像コンテンツを受信する。また、動画像コンテンツ復号手段によって、受信した動画像コンテンツをベースバンド信号に復号する。なお、この電子透かし検出装置は、第1データベース格納手段によって、動画像コンテンツの基本識別情報に対応付けて、当該動画像コンテンツの名称、または、当該動画像コンテンツの説明をテキスト情報として格納しているとともに、第2データベース格納手段によって、動画像コンテンツの関連情報に対応付けて、当該動画像コンテンツが撮影された場所の地図情報をテキスト情報として格納している。そのため、電子透かし検出装置は、伝送路経由で動画像コンテンツを受信した際に、基本識別情報および関連情報の検出に加えて、これらに関連した情報も抽出されるように構成されているため、例えば送信元や名称が不明な動画像コンテンツを受信した場合であっても、送信元や名称を把握することができる。   According to such a configuration, the digital watermark detection apparatus receives the moving image content via the transmission path by the moving image content receiving unit. The received moving image content is decoded into a baseband signal by the moving image content decoding means. In the electronic watermark detection apparatus, the first database storage unit stores the name of the moving image content or the description of the moving image content as text information in association with the basic identification information of the moving image content. At the same time, the second database storage means stores the map information of the place where the moving image content is photographed as text information in association with the related information of the moving image content. Therefore, when the digital watermark detection apparatus receives moving image content via a transmission path, in addition to detecting basic identification information and related information, information related thereto is also extracted. For example, even when moving image content whose transmission source or name is unknown is received, the transmission source or name can be grasped.

前記課題を解決するために請求項1に係る電子透かし検出プログラムは、動画像コンテンツを構成するフレーム画像に、当該動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含むとともに当該動画像コンテンツに関連した情報である関連情報を1つ以上含む電子透かしが埋め込まれている電子透かし埋め込み動画像コンテンツから、請求項1から請求項10のいずれか一項に記載の電子透かし埋め込み装置によって生成された電子透かしを検出するために、コンピュータを、基本識別情報検出部と関連情報検出部とを備える電子透かし検出手段として機能させる構成とした。 In order to solve the above-described problem, the digital watermark detection program according to claim 12 includes basic identification information, which is information for distinguishing the moving image content from other moving image content in a frame image constituting the moving image content. from watermarked moving image content watermarking include relevant information one or more is information related to the moving image content embedded with comprises one or more, any one of claims 1 to 10 In order to detect the digital watermark generated by the digital watermark embedding device described in 1), the computer is configured to function as a digital watermark detection unit including a basic identification information detection unit and a related information detection unit.

このような構成によれば、電子透かし検出プログラムは、基本識別情報検出部によって、フレーム画像から基本識別情報を検出し、関連情報検出部によって、フレーム画像から、関連情報を検出する関連情報検出部を検出するように、検出処理を2段階に分けて行うことができる。   According to such a configuration, the electronic watermark detection program detects the basic identification information from the frame image by the basic identification information detection unit, and detects the related information from the frame image by the related information detection unit. The detection process can be performed in two stages so as to detect.

請求項1から請求項10に係る発明によれば、基本識別情報をフレーム画像に繰り返し埋め込むことで、フレーム画像の一部が劣化した場合であっても、電子透かし検出装置によってその他の部分の基本識別情報から電子透かしを検出させることができるため、コンテンツの違法コピーを高速に検知して効率良く排除することができるとともに、放送局において番組または放送素材を効果的に識別することができる。   According to the first to tenth aspects of the present invention, even when a part of the frame image is deteriorated by repeatedly embedding the basic identification information in the frame image, the electronic watermark detection apparatus performs basic of other parts. Since the digital watermark can be detected from the identification information, an illegal copy of the content can be detected at high speed and efficiently eliminated, and the program or broadcast material can be effectively identified at the broadcast station.

請求項11から請求項1に係る発明によれば、基本識別情報がフレーム画像に繰り返し埋め込まれていることで、フレーム画像の一部が劣化した場合であっても、その他の部分の基本識別情報から電子透かしを検出することができるため、コンテンツの違法コピーを高速に検知して効率良く排除することができるとともに、放送局において番組または放送素材を効果的に識別することができる。 According to the invention of claims 11 to claims 1 to 4, that the basic identification information is repeatedly embedded in the frame image, even when a part of the frame image is degraded, the basic identity of the other portion Since a digital watermark can be detected from information, illegal copies of content can be detected at high speed and efficiently eliminated, and programs or broadcast materials can be effectively identified at a broadcast station.

本発明の第1実施形態に係る電子透かし埋め込み装置の全体構成を示すブロック図である。1 is a block diagram showing an overall configuration of a digital watermark embedding device according to a first embodiment of the present invention. 画像フレームの埋め込み領域を説明するための概略図である。It is the schematic for demonstrating the embedding area | region of an image frame. 画像フレームの埋め込み領域における電子透かしのデータ配列を説明するための概略図である。It is the schematic for demonstrating the data arrangement | sequence of the digital watermark in the embedding area | region of an image frame. 本発明の第1実施形態に係る電子透かし埋め込み装置の動作を説明するためのフローチャートである。It is a flowchart for demonstrating operation | movement of the digital watermark embedding apparatus which concerns on 1st Embodiment of this invention. 本発明の第2実施形態またはその変形例に係る電子透かし埋め込み装置の全体構成を示すブロック図である。It is a block diagram which shows the whole structure of the digital watermark embedding apparatus which concerns on 2nd Embodiment of this invention, or its modification. 本発明の第1実施形態に係る電子透かし検出装置の全体構成を示すブロック図である。1 is a block diagram showing an overall configuration of a digital watermark detection apparatus according to a first embodiment of the present invention. 本発明の第1実施形態に係る電子透かし検出装置の動作を説明するためのフローチャートである。It is a flowchart for demonstrating operation | movement of the digital watermark detection apparatus which concerns on 1st Embodiment of this invention. 本発明の第2実施形態に係る電子透かし検出装置の全体構成を示すブロック図である。It is a block diagram which shows the whole structure of the digital watermark detection apparatus which concerns on 2nd Embodiment of this invention. 本発明の第2実施形態に係る電子透かし検出装置の動作を説明するためのフローチャートである。It is a flowchart for demonstrating operation | movement of the digital watermark detection apparatus which concerns on 2nd Embodiment of this invention.

本発明の実施形態に係る電子透かし埋め込み装置、電子透かし埋め込みプログラム、電子透かし検出装置および電子透かし検出プログラムについて、図面を参照しながら説明する。なお、以下の説明において、同一の構成については同一の名称及び符号を付し、詳細説明を省略する。   An electronic watermark embedding device, an electronic watermark embedding program, an electronic watermark detection device, and an electronic watermark detection program according to an embodiment of the present invention will be described with reference to the drawings. In the following description, the same configuration is given the same name and symbol, and detailed description is omitted.

<電子透かし埋め込み装置>
[第1実施形態]
以下、第1実施形態に係る電子透かし埋め込み装置1について、図1〜図3を参照しながら詳細に説明する。電子透かし埋め込み装置1は、電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成するものである。電子透かし埋め込み装置1は、具体的には、図1に示すように、埋め込み単位特定手段9と、領域分割手段10と、電子透かし埋め込み手段20と、を備えている。以下、電子透かし埋め込み装置1が備える各構成について説明する。
<Digital watermark embedding device>
[First Embodiment]
Hereinafter, the digital watermark embedding device 1 according to the first embodiment will be described in detail with reference to FIGS. The digital watermark embedding device 1 generates a digital watermark embedded moving image content by embedding the digital watermark in the moving image content. Specifically, as shown in FIG. 1, the digital watermark embedding apparatus 1 includes an embedding unit specifying means 9, an area dividing means 10, and a digital watermark embedding means 20. Hereinafter, each component provided in the digital watermark embedding apparatus 1 will be described.

埋め込み単位特定手段9は、一つのフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定するためのものである。この画素ブロックは、少なくとも1つ以上の画素から構成されており、例えば横10×縦10から構成される複数(100個)の画素等、画素ブロックが複数の画素から構成される場合、その画素ブロック内には、同一の電子透かしが埋め込まれる。なお、埋め込み単位特定手段9により特定される画素ブロックの画素数は特に限定されるものではなく、前記した1個や100個の画素に限定されない。   The embedding unit specifying means 9 is for specifying a pixel block unit corresponding to 1 bit of a digital watermark as an embedding unit in one frame image. This pixel block is composed of at least one pixel. For example, when a pixel block is composed of a plurality of pixels, such as a plurality (100 pixels) composed of 10 × 10 pixels, the pixel The same digital watermark is embedded in the block. The number of pixels of the pixel block specified by the embedding unit specifying means 9 is not particularly limited, and is not limited to the one or 100 pixels described above.

領域分割手段10は、動画像コンテンツのフレーム画像を複数の埋め込み領域に分割するものであり、この埋め込み領域に、電子透かしが埋め込まれることとなる。また、領域分割手段10は、分割した埋め込み領域が、後記する電子透かし埋め込み手段20により、基本識別情報及び関連情報である電子透かしが繰り返し複数回埋め込み可能なようにフレームを分割する。本実施形態における領域分割手段10は、図2に示すように、動画像コンテンツを構成するそれぞれのフレーム画像を例えば(1)〜(8)の8つの領域に分割する。そして、領域分割手段10は、フレーム画像の分割位置に関する情報(例えば、各埋め込み領域の境界に位置する画素の座標)を生成する。なお、本実施形態の埋め込み領域には、一つのフレームを分割した(1)〜(8)の8つの埋め込み領域に、それぞれ同一のデータが埋め込まれる。   The area dividing means 10 divides the frame image of the moving image content into a plurality of embedded areas, and a digital watermark is embedded in the embedded area. The area dividing means 10 divides the frame so that the divided embedding area can be embedded a plurality of times repeatedly by the electronic watermark embedding means 20 described later. As shown in FIG. 2, the area dividing unit 10 in this embodiment divides each frame image constituting the moving image content into, for example, eight areas (1) to (8). Then, the region dividing unit 10 generates information on the division position of the frame image (for example, the coordinates of the pixel located at the boundary of each embedded region). In the embedding area of the present embodiment, the same data is embedded in the eight embedding areas (1) to (8) obtained by dividing one frame.

領域分割手段10には、図1に示すように、図示しない動画像コンテンツ蓄積装置等から、動画像コンテンツが入力される。そして、領域分割手段10は、前記した手法によってフレーム画像を複数の埋め込み領域に分割し、図2に示すように、フレーム画像と当該フレーム画像の分割位置に関する情報とを電子透かし埋め込み手段20に出力する。   As shown in FIG. 1, moving image content is input to the region dividing means 10 from a moving image content storage device or the like (not shown). Then, the region dividing unit 10 divides the frame image into a plurality of embedding regions by the above-described method, and outputs the frame image and information on the division position of the frame image to the digital watermark embedding unit 20 as shown in FIG. To do.

電子透かし埋め込み手段20は、動画像コンテンツを構成するフレーム画像に、一つの画素ブロックを1ビットデータとして、基本識別情報および関連情報を含む電子透かしを埋め込むものである。電子透かし埋め込み手段20は、具体的には、図1に示すように、フレーム画像に基本識別情報を埋め込む基本識別情報埋め込み部201と、フレーム画像に関連情報を埋め込む関連情報埋め込み部202と、を備えており、フレーム画像に対して基本識別情報と関連情報とを別々に埋め込むように構成されている。   The electronic watermark embedding unit 20 embeds an electronic watermark including basic identification information and related information, with one pixel block as 1-bit data, in a frame image constituting moving image content. Specifically, as shown in FIG. 1, the digital watermark embedding unit 20 includes a basic identification information embedding unit 201 for embedding basic identification information in a frame image, and a related information embedding unit 202 for embedding related information in a frame image. The basic identification information and the related information are embedded separately in the frame image.

ここで、基本識別情報とは、動画像コンテンツを他の動画像コンテンツと区別するために最低限必要な情報のことを意味している。基本識別情報は、所定数の画素ブロック単位で構成される。基本識別情報の具体的な内容は、電子透かしの用途によって異なるが、例えば電子透かしをコンテンツの違法コピーを検出する用途に活用する場合は、著作権者の氏名または名称等の動画像コンテンツの著作権者を識別するための情報を基本識別情報とすることができる。また、電子透かしを放送局において番組または放送素材を識別する用途に活用する場合は、動画像コンテンツの識別子(コンテンツID)、動画像コンテンツを撮影したカメラ等の固体識別番号、放送局間におけるコンテンツ受け渡しの際の送信元放送局ID、等の動画像コンテンツの識別情報を基本識別情報とすることができる。なお、基本識別情報は、ビット数が小さいほど検出に要する時間も短くなるため、例えば8ビット程度の少数ビットデータで構成することが好ましい。   Here, the basic identification information means information necessary for distinguishing moving image content from other moving image content. The basic identification information is configured in units of a predetermined number of pixel blocks. The specific contents of the basic identification information differ depending on the use of the digital watermark. For example, when the digital watermark is used for detecting an illegal copy of the content, the copyright of the moving image content such as the name or name of the copyright holder is used. Information for identifying the right holder can be used as basic identification information. In addition, when the digital watermark is used for the purpose of identifying a program or broadcast material at a broadcasting station, the identifier (content ID) of the moving image content, the individual identification number of the camera that shot the moving image content, the content between the broadcasting stations The identification information of the moving image content such as the transmission source broadcasting station ID at the time of delivery can be used as the basic identification information. Note that the basic identification information is preferably composed of, for example, a small number of bits of about 8 bits because the smaller the number of bits, the shorter the time required for detection.

また、関連情報とは、動画像コンテンツに関連した情報のことを意味している。関連情報は、所定数の画素ブロック単位で構成される。関連情報の具体的な内容は、電子透かしの用途によって異なるが、例えば電子透かしをコンテンツの違法コピーを検出する用途に活用する場合は、動画像コンテンツの名称等の属性情報を記述したメタデータ、または、動画像コンテンツの著作権者の氏名または名称以外の権利情報(権利期間等)を記述したメタデータを関連情報とすることができる。また、電子透かしを放送局において番組または放送素材を識別する用途に活用する場合は、動画像コンテンツの撮影日時または撮影場所等の制作情報を関連情報とすることができる。なお、関連情報は、基本識別情報と異なり一つの埋め込み領域に対して一つ埋め込まれていればよいため、例えば40ビット程度の汎用データで構成することが好ましい。   The related information means information related to moving image content. The related information is configured in units of a predetermined number of pixel blocks. The specific content of the related information varies depending on the use of the digital watermark. For example, when the digital watermark is used for detecting an illegal copy of the content, metadata describing attribute information such as the name of the moving image content, Alternatively, metadata describing rights information (such as a rights period) other than the name or name of the copyright holder of the moving image content can be used as related information. Further, when the digital watermark is used for the purpose of identifying a program or broadcast material at a broadcasting station, production information such as shooting date or shooting location of moving image content can be used as related information. Note that unlike the basic identification information, the related information only needs to be embedded in one embedded area, and therefore, it is preferable that the related information is composed of general-purpose data of about 40 bits, for example.

基本識別情報埋め込み部201は、図2に示す埋め込み領域(1)〜(8)に対して、基本識別情報を所定回数繰り返し埋め込むものである。基本識別情報埋め込み部201は、ここでは図2に示す埋め込み領域(1)〜(8)のそれぞれに、図示しない基本識別情報蓄積装置等から入力された基本識別情報を例えば5回埋め込む。基本識別情報埋め込み部201は、例えば基本識別情報が8ビットである場合、図2に示す埋め込み領域(1)〜(8)ごとに8ビットの基本識別情報を5回ずつ埋め込み、1つの埋め込み領域に対して合計40ビットのデータを埋め込む。   The basic identification information embedding unit 201 repeatedly embeds basic identification information a predetermined number of times in the embedding areas (1) to (8) shown in FIG. Here, the basic identification information embedding unit 201 embeds basic identification information input from a basic identification information storage device (not shown) or the like in each of the embedding areas (1) to (8) shown in FIG. For example, when the basic identification information is 8 bits, the basic identification information embedding unit 201 embeds 8 bits of basic identification information five times for each of the embedded areas (1) to (8) shown in FIG. Embedded with a total of 40 bits of data.

基本識別情報埋め込み部201は、図2に示す埋め込み領域(1)〜(8)のそれぞれに基本識別情報を5回ずつ埋め込む場合、埋め込み領域(1)から(8)まで順番に基本識別情報を埋め込む処理を5回繰り返すことで、1つの埋め込み領域に対して合計40ビットのデータを埋め込む。但し、基本識別情報埋め込み部201が基本識別情報を埋め込む順序は特に限定されず、例えば1つの埋め込み領域に対して基本識別情報を5回埋め込む処理を埋め込み領域(1)から(8)まで順番に行うことで、1つの埋め込み領域に対して合計40ビットのデータを埋め込んでもよい。   When the basic identification information embedding unit 201 embeds the basic identification information in each of the embedding areas (1) to (8) shown in FIG. 2 five times, the basic identification information is embedded in the order of the embedding areas (1) to (8). By repeating the embedding process five times, a total of 40 bits of data are embedded in one embedding area. However, the order in which the basic identification information embedding unit 201 embeds the basic identification information is not particularly limited. For example, the process of embedding the basic identification information five times in one embedding area is sequentially performed from the embedding areas (1) to (8). By performing, a total of 40 bits of data may be embedded in one embedded area.

関連情報埋め込み部202は、図2に示す埋め込み領域(1)〜(8)に対して、図示しない関連情報蓄積装置等から入力された関連情報を1回以上埋め込むものである。関連情報埋め込み部202は、例えば関連情報が40ビットである場合、図2に示す埋め込み領域(1)〜(8)ごとに40ビットの関連情報を1回ずつ埋め込み、1つの埋め込み領域に対して40ビットのデータを埋め込む。なお、関連情報埋め込み部202は、ここでは前記した基本識別情報埋め込み部201による基本識別情報の5回分の埋め込み処理の後に、関連情報の埋め込み処理を行う。   The related information embedding unit 202 embeds the related information input from a related information storage device (not shown) or the like once or more in the embedding areas (1) to (8) shown in FIG. For example, when the related information is 40 bits, the related information embedding unit 202 embeds 40 bits of related information once for each of the embedded regions (1) to (8) shown in FIG. Embed 40-bit data. Here, the related information embedding unit 202 performs related information embedding processing after the basic identification information embedding unit 201 embeds the basic identification information five times.

前記したように、基本識別情報埋め込み部201が基本識別情報の埋め込み処理を5回行った後に、関連情報埋め込み部202が関連情報の埋め込み処理を1回行った場合、図2に示す埋め込み領域(1)〜(8)のそれぞれには、図3に示すようなデータ配列を有する電子透かしの埋め込みデータが埋め込まれる。すなわち、図3に示すように、図2に示す埋め込み領域(1)〜(8)のそれぞれが1つの埋め込み単位(単位埋め込み領域)となり、当該埋め込み単位における少数ビットデータの繰り返し埋め込み領域に基本識別情報a1〜a5が埋め込まれ、当該埋め込み単位の汎用データの埋め込み領域に関連情報bが埋め込まれている。なお、図3におけるCRCは、汎用データの埋め込み領域に埋め込まれた関連情報bのデータビットに対する誤り訂正データのことを意味している。   As described above, when the basic identification information embedding unit 201 performs the basic identification information embedding process five times and then the related information embedding unit 202 performs the related information embedding process once, the embedding area shown in FIG. In each of 1) to (8), embedded digital watermark data having a data arrangement as shown in FIG. 3 is embedded. That is, as shown in FIG. 3, each of the embedding areas (1) to (8) shown in FIG. 2 becomes one embedding unit (unit embedding area), and a basic identification is made as a repetitive embedding area of a small number of bit data in the embedding unit. Information a1 to a5 is embedded, and related information b is embedded in an embedded area of general-purpose data in the embedding unit. The CRC in FIG. 3 means error correction data for the data bits of the related information b embedded in the general data embedding area.

(電子透かしの埋め込みアルゴリズム)
以上説明した基本識別情報埋め込み部201および関連情報埋め込み部202は、具体的には、前記した特許文献1に記載されたアルゴリズムと同様のアルゴリズムを用いて、フレーム画像に基本識別情報および関連情報を埋め込む。すなわち、基本識別情報埋め込み部201および関連情報埋め込み部202は、図2に示す埋め込み領域(1)〜(8)ごとに、画素値(輝度値)の変化が視認されにくい特性を有する画素を適応画素として抽出し、当該領域間の境界および/または時間方向で画素値(輝度値)を変化させることで基本識別情報および関連情報を埋め込み、再撮耐性等を有する電子透かし埋め込み動画像コンテンツを生成する。
(Digital watermark embedding algorithm)
Specifically, the basic identification information embedding unit 201 and the related information embedding unit 202 described above use the same algorithm as the algorithm described in Patent Document 1 described above, to add the basic identification information and the related information to the frame image. Embed. That is, the basic identification information embedding unit 201 and the related information embedding unit 202 apply a pixel having a characteristic that a change in pixel value (luminance value) is not easily perceived for each of the embedding regions (1) to (8) illustrated in FIG. Extract as pixels and embed basic identification information and related information by changing pixel values (luminance values) in the boundary and / or time direction between the areas, and generate digital watermark embedded moving image content with re-shooting tolerance etc. To do.

電子透かし埋め込み手段20には、図1に示すように、領域分割手段10から、分割画像が入力される。そして、電子透かし埋め込み手段20は、前記した手法によって電子透かし埋め込み動画像コンテンツを生成し、これを例えば図示しない電子透かし埋め込み動画像コンテンツ蓄積手段等に出力する。   As shown in FIG. 1, the digital watermark embedding unit 20 receives the divided image from the region dividing unit 10. Then, the digital watermark embedding unit 20 generates a digital watermark embedded moving image content by the above-described method, and outputs it to, for example, a digital watermark embedded moving image content storage unit (not shown).

以上のような構成を備える電子透かし埋め込み装置1は、1枚のフレーム画像に埋め込むことができる基本識別情報の数を、埋め込み領域の数だけ倍増させることができるため、フレーム画像のある部分でより激しい劣化が生じた場合であっても、その他の部分の基本識別情報から電子透かしを検出することができる電子透かし埋め込み動画像コンテンツを生成することができる。従って、電子透かし埋め込み装置1は、基本識別情報をフレーム画像に繰り返し埋め込むことで、フレーム画像の一部が劣化した場合であっても、電子透かし検出装置によってその他の部分の基本識別情報から電子透かしを検出させることができるため、コンテンツの違法コピーを高速に検知して効率良く排除することができるとともに、放送局において番組または放送素材を効果的に識別することができる。   The digital watermark embedding device 1 having the above-described configuration can double the number of basic identification information that can be embedded in one frame image by the number of embedding areas. Even when severe deterioration occurs, it is possible to generate a digital watermark-embedded moving image content capable of detecting a digital watermark from basic identification information of other portions. Accordingly, the digital watermark embedding apparatus 1 repeatedly embeds the basic identification information in the frame image, so that even if a part of the frame image is deteriorated, the digital watermark detection apparatus uses the digital identification information from the other parts of the basic identification information. Therefore, illegal copies of content can be detected at high speed and efficiently eliminated, and programs or broadcast materials can be effectively identified at a broadcasting station.

[電子透かし埋め込み装置1の動作]
以下、電子透かし埋め込み装置1の動作について、図4を参照しながら簡単に説明する。まず、図示しない動画像コンテンツ蓄積装置等から動画像コンテンツが入力されると、埋め込み単位特定手段9が、フレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する(ステップS1)。次に、領域分割手段10が、動画像コンテンツのフレーム画像を複数の埋め込み領域(図2参照)に分割した分割画像を生成し、これを電子透かし埋め込み手段20に出力する(ステップS2)。次に、基本識別情報埋め込み部201が、図2に示す埋め込み領域(1)〜(8)のそれぞれに対して、基本識別情報を所定回数(例えば5回)繰り返し埋め込む(ステップS3)。また、関連情報埋め込み部202が、図2に示す埋め込み領域(1)〜(8)のそれぞれに対して、関連情報を1回埋め込む(ステップS4)。そして、このような埋め込み処理によって、図2に示す埋め込み領域(1)〜(8)のそれぞれに、図3に示すようなデータ配列を有する電子透かしの埋め込みデータが埋め込まれた電子透かし埋め込み動画像コンテンツを生成し、図示しない電子透かし埋め込み動画像コンテンツ蓄積手段等に出力する。
[Operation of Digital Watermark Embedding Apparatus 1]
Hereinafter, the operation of the digital watermark embedding apparatus 1 will be briefly described with reference to FIG. First, when moving image content is input from a moving image content storage device or the like (not shown), the embedding unit specifying means 9 specifies a pixel block unit corresponding to one bit of the digital watermark as an embedding unit in the frame image (step) S1). Next, the area dividing means 10 generates a divided image obtained by dividing the frame image of the moving image content into a plurality of embedding areas (see FIG. 2), and outputs this to the digital watermark embedding means 20 (step S2). Next, the basic identification information embedding unit 201 repeatedly embeds the basic identification information a predetermined number of times (for example, five times) in each of the embedding areas (1) to (8) shown in FIG. 2 (step S3). Further, the related information embedding unit 202 embeds the related information once in each of the embedding areas (1) to (8) shown in FIG. 2 (step S4). Then, by such an embedding process, a digital watermark embedded moving image in which embedded data of a digital watermark having a data arrangement as shown in FIG. 3 is embedded in each of the embedding areas (1) to (8) shown in FIG. Content is generated and output to a digital watermark embedded moving image content storage means (not shown).

[第2実施形態]
以下、第2実施形態に係る電子透かし埋め込み装置1Aについて、図5を参照(適宜図3も参照)しながら簡単に説明する。電子透かし埋め込み装置1Aは、図5に示すように、埋め込み単位特定手段9と、電子透かし埋め込み手段21と、埋め込みデータ生成手段30と、を備えている。ここで、電子透かし埋め込み装置1Aは、前記した電子透かし埋め込み装置1とは異なり、フレーム画像を複数の埋め込み領域に分割することなく、予め生成された埋め込みデータをフレーム画像の面内に繰り返し埋め込むことを特徴としている。なお、電子透かし埋め込み装置1Aは、電子透かし埋め込み装置1と同様の埋め込みアルゴリズムを用いている。
[Second Embodiment]
Hereinafter, a digital watermark embedding device 1A according to the second embodiment will be briefly described with reference to FIG. 5 (refer to FIG. 3 as appropriate). As shown in FIG. 5, the digital watermark embedding apparatus 1 </ b> A includes an embedding unit specifying unit 9, a digital watermark embedding unit 21, and an embedded data generating unit 30. Here, unlike the digital watermark embedding apparatus 1 described above, the digital watermark embedding apparatus 1A repeatedly embeds pre-generated embedded data in the plane of the frame image without dividing the frame image into a plurality of embedding areas. It is characterized by. The digital watermark embedding apparatus 1A uses the same embedding algorithm as the digital watermark embedding apparatus 1.

埋め込み単位特定手段9は、前記した電子透かし埋め込み装置1と同様に、一つのフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する。   The embedding unit specifying unit 9 specifies a pixel block unit corresponding to one bit of the digital watermark as an embedding unit in one frame image, as in the digital watermark embedding apparatus 1 described above.

電子透かし埋め込み手段21は、前記した電子透かし埋め込み手段20と同様に、動画像コンテンツを構成するフレーム画像に、基本識別情報および関連情報からなる電子透かしを埋め込むものであるが、基本識別情報埋め込み部201および関連情報埋め込み部202を備えていない点において、電子透かし埋め込み手段20とは異なる。すなわち、電子透かし埋め込み手段21は、フレーム画像に対して基本識別情報と関連情報をそれぞれ別々に埋め込むのではなく、後記する埋め込みデータ生成手段30によって予め生成された電子透かしの埋め込みデータをフレーム画像の面内に繰り返し埋め込む。   The electronic watermark embedding unit 21 embeds an electronic watermark composed of basic identification information and related information in a frame image constituting the moving image content, similar to the electronic watermark embedding unit 20 described above. 201 and the related information embedding unit 202 are different from the digital watermark embedding unit 20 in that the 201 and the related information embedding unit 202 are not provided. That is, the digital watermark embedding unit 21 does not embed the basic identification information and the related information separately in the frame image, but uses the embedded data of the digital watermark generated in advance by the embedded data generation unit 30 to be described later. Embedded repeatedly in the plane.

電子透かし埋め込み手段21には、図5に示すように、図示しない動画像コンテンツ蓄積手段等から、動画像コンテンツが入力されるとともに、埋め込みデータ生成手段30から、埋め込みデータが入力される。そして、電子透かし埋め込み手段21は、前記した手法によって電子透かし埋め込み動画像コンテンツを生成し、これを例えば図示しない電子透かし埋め込み動画像コンテンツ蓄積手段等に出力する。なお、埋め込みデータとは、図3に示すように、同一の基本識別情報を複数含むとともに、関連情報を1つ含むデータ配列を有する電子透かしの埋め込みデータのことを意味している。   As shown in FIG. 5, the digital watermark embedding unit 21 receives moving image content from a moving image content storage unit (not shown) and the like, and also receives embedded data from the embedded data generation unit 30. Then, the digital watermark embedding unit 21 generates a digital watermark embedded moving image content by the above-described method, and outputs it to, for example, a digital watermark embedded moving image content storage unit (not shown). As shown in FIG. 3, the embedded data means digital watermark embedded data having a data array including a plurality of the same basic identification information and one related information.

埋め込みデータ生成手段30は、電子透かしの埋め込みデータを予め生成するものである。埋め込みデータ生成手段30は、前記した埋め込み単位特定手段9によって特定された一つの画素ブロックを1ビットデータとして、基本識別情報および関連情報を含む電子透かしの埋め込みデータを生成する。   The embedded data generation means 30 generates digital watermark embedded data in advance. The embedded data generating means 30 generates electronic watermark embedded data including basic identification information and related information by using one pixel block specified by the above-described embedding unit specifying means 9 as 1-bit data.

埋め込みデータ生成手段30には、図示しない基本識別情報蓄積装置等から、基本識別情報が入力されるとともに、図示しない関連情報蓄積装置等から、関連情報が入力される。そして、埋め込みデータ生成手段30は、図3に示すように、基本識別情報と関連情報とを配列することで、電子透かしの埋め込みデータを生成し、図5に示すように、これを電子透かし埋め込み手段21に出力する。   The basic identification information is input to the embedded data generation means 30 from a basic identification information storage device or the like (not shown), and related information is input from a related information storage device or the like (not shown). Then, as shown in FIG. 3, the embedded data generating means 30 generates the embedded data of the digital watermark by arranging the basic identification information and the related information, and as shown in FIG. Output to means 21.

以上のような構成を備える電子透かし埋め込み装置1Aは、複数の基本識別情報と1つの関連情報を一度にフレーム画像に埋め込むことができるため、電子透かしの埋め込み処理の回数を減らし、全体の処理速度を高速化することができる。   Since the digital watermark embedding apparatus 1A having the above-described configuration can embed a plurality of basic identification information and one related information in a frame image at a time, the number of digital watermark embedding processes is reduced and the overall processing speed is reduced. Can be speeded up.

[第2実施形態の変形例]
以下、第2実施形態に係る電子透かし埋め込み装置1Aの変形例について、図5を参照しながら簡単に説明する。電子透かし埋め込み装置1Aの変形例は、図5に示すように、前記した電子透かし埋め込み装置1Aと同様の構成を備えているが、埋め込み単位特定手段9、電子透かし埋め込み手段21および埋め込みデータ生成手段30の動作が異なることを特徴としている。なお、電子透かし埋め込み装置1Aの変形例は、電子透かし埋め込み装置1と同様の埋め込みアルゴリズムを用いている。
[Modification of Second Embodiment]
Hereinafter, a modified example of the digital watermark embedding apparatus 1A according to the second embodiment will be briefly described with reference to FIG. As shown in FIG. 5, the modified example of the electronic watermark embedding apparatus 1A has the same configuration as the above-described electronic watermark embedding apparatus 1A, but includes an embedding unit specifying means 9, an electronic watermark embedding means 21, and an embedded data generating means. 30 operations are different. Note that the modification example of the digital watermark embedding apparatus 1A uses an embedding algorithm similar to that of the digital watermark embedding apparatus 1.

電子透かし埋め込み装置1Aの変形例は、埋め込みデータ生成手段30によって、電子透かしの埋め込みデータを予め1フレーム分生成する。これは、例えば埋め込みデータ生成手段30によって、埋め込み単位特定手段9によって特定された一つの画素ブロックを1ビットデータとして、図3に示すデータ配列を有する電子透かしの埋め込みデータ(合計80ビット)を8つ分生成し、1フレーム分の埋め込みデータ(合計640ビット)を一度に生成することを意味している。電子透かし埋め込み装置1Aの変形例は、このようにして生成した1フレーム分の電子透かしの埋め込みデータを、フレーム画像に1回埋め込むことで、電子透かしの埋め込み処理を行う。   In a modification of the digital watermark embedding apparatus 1A, the embedded data generation means 30 generates one frame of digital watermark embedded data in advance. For example, the embedding data generation means 30 uses one pixel block specified by the embedding unit specifying means 9 as 1-bit data, and 8 watermarks (total 80 bits) of digital watermark embedding data having the data arrangement shown in FIG. This means that one frame of embedded data (total of 640 bits) is generated at a time. The modified example of the digital watermark embedding apparatus 1A performs the digital watermark embedding process by embedding the digital watermark embedding data for one frame generated in this way once in the frame image.

以上のような構成を備える電子透かし埋め込み装置1Aの変形例は、埋め込みデータ生成手段30によって1フレーム分の埋め込みデータを生成することで、一度の処理によってフレーム画像に電子透かしを埋め込むことができるため、埋め込み処理の速度を向上させることができる。   In the modified example of the digital watermark embedding apparatus 1A having the above-described configuration, since the embedded data generation unit 30 generates embedded data for one frame, the digital watermark can be embedded in the frame image by a single process. The speed of the embedding process can be improved.

[電子透かし埋め込みプログラム]
ここで、前記した電子透かし埋め込み装置1,1Aおよびその変形例は、一般的なコンピュータを、前記した各手段および各部として機能させるプログラムにより動作させることで実現することができる。このプログラムは、通信回線を介して配布することも可能であるし、CD−ROM等の記録媒体に書き込んで配布することも可能である。
[Digital watermark embedding program]
Here, the above-described digital watermark embedding apparatuses 1 and 1A and modifications thereof can be realized by causing a general computer to operate by a program that functions as each of the above-described units and units. This program can be distributed via a communication line, or can be written on a recording medium such as a CD-ROM for distribution.

<電子透かし検出装置>
[第1実施形態]
以下、第1実施形態に係る電子透かし検出装置2について、図6を参照しながら詳細に説明する。電子透かし検出装置2は、前記した電子透かし埋め込み装置1によって生成された電子透かし埋め込み動画像コンテンツ中に埋め込まれた電子透かしを検出するものである。電子透かし検出装置2は、具体的には、動画像コンテンツを構成するフレーム画像に、基本識別情報を複数含むとともに関連情報を1つ含む電子透かしが埋め込まれている電子透かし埋め込み動画像コンテンツから電子透かしを検出する。そして、電子透かし検出装置2は、図6に示すように、その検出結果(基本識別情報および関連情報の内容)を外部の表示手段80に出力する。なお、図6に示す表示手段80は、外部に設けられたパソコンのモニタ等を想定しているが、電子透かし検出装置2の内部に備える構成としても構わない。
<Digital watermark detection device>
[First Embodiment]
Hereinafter, the digital watermark detection apparatus 2 according to the first embodiment will be described in detail with reference to FIG. The digital watermark detection device 2 detects a digital watermark embedded in the digital watermark embedded video content generated by the digital watermark embedding device 1 described above. Specifically, the digital watermark detection apparatus 2 electronically converts digital watermark embedded video image content in which a digital watermark including a plurality of basic identification information and one related information is embedded in a frame image constituting the video content. Detect watermarks. Then, as shown in FIG. 6, the digital watermark detection apparatus 2 outputs the detection result (the contents of the basic identification information and the related information) to the external display unit 80. The display unit 80 shown in FIG. 6 is assumed to be a monitor of a personal computer provided outside, but may be configured to be provided inside the digital watermark detection apparatus 2.

また、電子透かし検出装置2は、電子透かしをコンテンツの違法コピーを検出する用途に活用する場合に用いることを想定している。従って、電子透かし検出装置2の検出対象となる電子透かしの中には、基本識別情報として、著作権者の氏名または名称等の動画像コンテンツの著作権者を識別するための情報が含まれており、かつ、関連情報として、動画像コンテンツの名称等の属性情報を記述したメタデータ、または、動画像コンテンツの著作権者の氏名または名称以外の権利情報(権利期間等)を記述したメタデータが含まれている場合を想定している。   Also, it is assumed that the digital watermark detection apparatus 2 is used when the digital watermark is used for the purpose of detecting an illegal copy of content. Accordingly, the digital watermark to be detected by the digital watermark detection apparatus 2 includes information for identifying the copyright holder of the moving image content such as the name or name of the copyright holder as basic identification information. In addition, as related information, metadata describing attribute information such as the name of the moving image content, or metadata describing rights information (right period, etc.) other than the name or name of the copyright holder of the moving image content Is assumed.

電子透かし検出装置2は、図6に示すように、電子透かし検出手段70を主な構成として備えており、検索キーワード入力手段40と、動画像コンテンツ収集手段50と、動画像コンテンツ蓄積手段60と、を付加的な構成として備えている。以下、電子透かし検出装置2が備える各構成について説明する。   As shown in FIG. 6, the digital watermark detection apparatus 2 includes a digital watermark detection unit 70 as a main configuration, and includes a search keyword input unit 40, a moving image content collection unit 50, and a moving image content storage unit 60. Are provided as additional configurations. Hereinafter, each component provided in the digital watermark detection apparatus 2 will be described.

検索キーワード入力手段40は、動画像コンテンツ収集手段50に対して、検索キーワードを入力するものである。検索キーワード入力手段40は、具体的には、図示しない外部のユーザの操作に基づいて、図6に示すように通信網N上における予め設定されたウェブサイト上に存在する動画像コンテンツを検索するための検索キーワードを動画像コンテンツ収集手段50に入力する。なお、通信網Nとしては、ここではインターネットを想定している。また、予め設定されたウェブサイトとしては、ここでは動画投稿サイト等を想定している。   The search keyword input unit 40 is for inputting a search keyword to the moving image content collection unit 50. Specifically, the search keyword input unit 40 searches for moving image content existing on a preset website on the communication network N as shown in FIG. 6 based on an operation of an external user (not shown). The search keyword is input to the moving image content collection means 50. Note that the Internet is assumed here as the communication network N. In addition, as a preset website, a video posting site or the like is assumed here.

動画像コンテンツ収集手段50は、動画像コンテンツの収集を行うものである。動画像コンテンツ収集手段50は、具体的には、図6に示すように、検索キーワードに従って、通信網N上における予め設定されたウェブサイト上に存在する動画像コンテンツを検索し、当該動画像コンテンツを収集する。   The moving image content collection unit 50 collects moving image content. Specifically, as shown in FIG. 6, the moving image content collection means 50 searches for moving image content existing on a preset website on the communication network N according to the search keyword, and the moving image content To collect.

動画像コンテンツ蓄積手段60は、動画像コンテンツ収集手段50が収集した動画像コンテンツを蓄積するものである。動画像コンテンツ蓄積手段60は、具体的には、データを記憶することができるメモリ、ハードディスク等で具現される。動画像コンテンツ蓄積手段60には、図6に示すように、動画像コンテンツ収集手段50から、動画像コンテンツの画像データ(輝度および色差の画像データ)が1フレームないし複数フレーム単位で入力される。   The moving image content storage unit 60 stores the moving image content collected by the moving image content collection unit 50. Specifically, the moving image content storage unit 60 is implemented by a memory, a hard disk, or the like that can store data. As shown in FIG. 6, moving image content storage means 60 receives moving picture content image data (luminance and color difference image data) from moving picture content collection means 50 in units of one frame or a plurality of frames.

電子透かし検出手段70は、動画像コンテンツを構成するフレーム画像から電子透かしを検出するものである。電子透かし検出手段70は、具体的には、図6に示すように、フレーム画像から基本識別情報を検出する基本識別情報検出部701と、フレーム画像から関連情報を検出する関連情報検出部702と、を備えており、フレーム画像に電子透かしとして埋め込まれている基本識別情報と関連情報とを別々に検出するように構成されている。   The digital watermark detection means 70 is for detecting a digital watermark from frame images constituting the moving image content. Specifically, as shown in FIG. 6, the electronic watermark detection means 70 includes a basic identification information detection unit 701 that detects basic identification information from a frame image, and a related information detection unit 702 that detects related information from the frame image. The basic identification information embedded in the frame image as a digital watermark and the related information are separately detected.

基本識別情報検出部701は、図2に示す埋め込み領域(1)〜(8)に埋め込まれた基本識別情報を検出するものである。基本識別情報検出部701は、例えば図2に示す埋め込み領域(1)から埋め込み領域(8)までを順番に走査して当該埋め込み領域ごとの埋め込みビットを判定し、後記するように、当該複数の判定結果を多数決する多数決判定等によって相補的に判断することで、基本識別情報に相当する最終的な埋め込みビットを決定する。なお、基本識別情報検出部701は、電子透かし埋め込み装置1によってフレーム画像のどの位置にどのような基本識別情報が埋め込まれているのか、すなわち検出対象となる基本識別情報の埋め込み位置の情報と、当該基本識別情報に対応する埋め込みビットの情報と、を予め保持しており、これらの情報を用いて埋め込みビットを判定することで、最終的な埋め込みビットを決定する。   The basic identification information detection unit 701 detects basic identification information embedded in the embedded regions (1) to (8) shown in FIG. For example, the basic identification information detection unit 701 sequentially scans from the embedding area (1) to the embedding area (8) illustrated in FIG. 2 to determine an embedding bit for each embedding area, and as described later, The final embedded bit corresponding to the basic identification information is determined by making a complementary determination by majority determination or the like that determines the majority of the determination results. Note that the basic identification information detection unit 701 indicates what basic identification information is embedded at which position of the frame image by the digital watermark embedding device 1, that is, information on the embedded position of the basic identification information to be detected, The information of the embedded bit corresponding to the basic identification information is stored in advance, and the final embedded bit is determined by determining the embedded bit using the information.

ここで、図2に示す埋め込み領域(1)〜(8)のそれぞれには、図3に示すように、基本識別情報が5つずつ埋め込まれているため、1枚のフレーム画像には、合計40箇所に基本識別情報が埋め込まれていることになる。そのため、より少ないフレーム数のフレーム画像から基本識別情報を検出することができるため、電子透かしの検出処理を高速化することができる。   Here, in each of the embedding areas (1) to (8) shown in FIG. 2, five pieces of basic identification information are embedded as shown in FIG. Basic identification information is embedded in 40 locations. Therefore, since the basic identification information can be detected from a frame image having a smaller number of frames, the digital watermark detection process can be speeded up.

関連情報検出部702は、図2に示す埋め込み領域(1)〜(8)に埋め込まれた関連情報を検出するものである。関連情報検出部702は、例えば図2に示す埋め込み領域(1)から埋め込み領域(8)までを順番に走査して当該埋め込み領域ごとの埋め込みビットを判定し、後記するように、当該複数の判定結果を多数決する多数決判定等によって相補的に判断することで、関連情報に相当する最終的な埋め込みビットを決定する。なお、関連情報検出部702は、電子透かし埋め込み装置1によってフレーム画像のどの位置にどのような関連情報が埋め込まれているのか、すなわち検出対象となる関連情報の埋め込み位置の情報と、当該関連情報に対応する埋め込みビットの情報と、を予め保持しており、これらの情報を用いて埋め込みビットを判定することで、最終的な埋め込みビットを決定する。   The related information detection unit 702 detects related information embedded in the embedded areas (1) to (8) shown in FIG. For example, the related information detection unit 702 sequentially scans from the embedding area (1) to the embedding area (8) illustrated in FIG. 2 to determine the embedding bit for each embedding area, and the plurality of determinations as described later. The final embedded bit corresponding to the related information is determined by making a complementary decision by majority decision or the like for majority decision of the result. Note that the related information detection unit 702 indicates what type of related information is embedded in which position of the frame image by the digital watermark embedding apparatus 1, that is, information on the embedded position of related information to be detected, and the related information. The embedded bit information corresponding to is stored in advance, and the final embedded bit is determined by determining the embedded bit using this information.

ここで、図2に示す埋め込み領域(1)〜(8)のそれぞれには、図3に示すように、関連情報が1つずつ埋め込まれているため、1枚のフレーム画像には、合計8箇所に関連情報が埋め込まれている。なお、関連情報検出部702は、ここでは前記した基本識別情報検出部701による基本識別情報の検出処理の後に、関連情報の検出処理を行う。   Here, each of the embedding areas (1) to (8) shown in FIG. 2 has one piece of related information embedded therein as shown in FIG. The relevant information is embedded in the place. Here, the related information detection unit 702 performs related information detection processing after the basic identification information detection processing by the basic identification information detection unit 701 described above.

(電子透かしの検出アルゴリズム)
基本識別情報検出部701および関連情報検出部702は、以下のようなアルゴリズムを用いてフレーム画像内における基本識別情報および関連情報を検出する。基本識別情報検出部701および関連情報検出部702は、例えば前記したように特許文献1に記載されたアルゴリズムを用いて電子透かしの埋め込み処理を行った場合、埋め込み領域(1)〜(8)(図2参照)内および/または時間方向の画素値(輝度値)変化パターンと、予め定めた電子透かしによる埋め込みビットの埋め込み領域(1)〜(8)(図2参照)内および/または時間方向の画素値(輝度値)変化パターンとの相関値を計算して埋め込み領域ごとにビットを判定し、これらの結果を多数決して最終的な埋め込みビットを決定する。
(Digital watermark detection algorithm)
The basic identification information detection unit 701 and the related information detection unit 702 detect basic identification information and related information in a frame image using the following algorithm. When the basic identification information detection unit 701 and the related information detection unit 702 perform the digital watermark embedding process using the algorithm described in Patent Document 1 as described above, for example, the embedded regions (1) to (8) ( 2) and / or temporal direction pixel value (brightness value) change patterns and embedded bit embedding areas (1) to (8) (see FIG. 2) and / or temporal direction. The correlation value with the pixel value (luminance value) change pattern is calculated to determine the bit for each embedding area, and the final embedding bit is determined by many of these results.

電子透かし検出手段70には、図6に示すように、動画像コンテンツ蓄積手段60から、動画像コンテンツが入力される。そして、電子透かし検出手段70は、前記した手法によって電子透かしを検出し、図6に示すように、その検出結果を表示手段80に出力する。   As shown in FIG. 6, moving image content is input from the moving image content storage unit 60 to the digital watermark detection unit 70. Then, the digital watermark detection means 70 detects the digital watermark by the above-described method, and outputs the detection result to the display means 80 as shown in FIG.

以上のような構成を備える電子透かし検出装置2は、基本識別情報検出部701によって、複数の埋め込み領域から基本識別情報を検出し、関連情報検出部702によって、複数の埋め込み領域から関連情報を検出するように、検出処理を2段階に分けて行うことができる。また、電子透かし検出装置2は、キーワードに一致する動画像コンテンツを構成するフレーム画像の複数の埋め込み領域において、基本識別情報または関連情報が埋め込まれているか否かを検出するため、フレーム画像のある部分で劣化が生じた場合であっても、その他の部分の基本識別情報または関連情報から電子透かしを検出することができる。従って、電子透かし検出装置2は、基本識別情報がフレーム画像に繰り返し埋め込まれていることで、フレーム画像の一部が劣化した場合であっても、その他の部分の基本識別情報から電子透かしを検出することができるため、コンテンツの違法コピーを高速に検知して効率良く排除することができるとともに、放送局において番組または放送素材を効果的に識別することができる。   In the digital watermark detection apparatus 2 having the above configuration, the basic identification information detection unit 701 detects basic identification information from a plurality of embedding areas, and the related information detection unit 702 detects related information from the plurality of embedding areas. As described above, the detection process can be performed in two stages. Further, the digital watermark detection apparatus 2 has a frame image in order to detect whether or not basic identification information or related information is embedded in a plurality of embedded regions of the frame image constituting the moving image content that matches the keyword. Even when deterioration occurs in a part, a digital watermark can be detected from basic identification information or related information of another part. Therefore, the digital watermark detection apparatus 2 detects the digital watermark from the basic identification information of other parts even when a part of the frame image deteriorates because the basic identification information is repeatedly embedded in the frame image. Therefore, illegal copies of content can be detected at high speed and efficiently eliminated, and programs or broadcast materials can be effectively identified at a broadcast station.

[電子透かし検出装置2の動作]
以下、電子透かし検出装置2の動作について、図7を参照しながら簡単に説明する。まず、検索キーワード入力手段40から検索キーワードが入力されると、動画像コンテンツ収集手段50は、当該検索キーワードに従って、通信網N上における予め設定されたウェブサイト上に存在する動画像コンテンツを検索および収集する(ステップS5)。次に、基本識別情報検出部701が、当該収集された動画像コンテンツを構成するフレーム画像の埋め込み領域(1)〜(8)(図2参照)に埋め込まれた基本識別情報を検出し、検出結果を表示手段80に出力する(ステップS6)。次に、関連情報検出部702が、当該収集された動画像コンテンツを構成するフレーム画像の埋め込み領域(1)〜(8)(図2参照)に埋め込まれた関連識別情報を検出し、検出結果を表示手段80に出力する(ステップS7)。そして、表示手段80が当該検出結果を表示する。
[Operation of Digital Watermark Detection Apparatus 2]
Hereinafter, the operation of the digital watermark detection apparatus 2 will be briefly described with reference to FIG. First, when a search keyword is input from the search keyword input unit 40, the moving image content collection unit 50 searches for moving image content existing on a preset website on the communication network N according to the search keyword. Collect (step S5). Next, the basic identification information detection unit 701 detects and detects the basic identification information embedded in the embedded areas (1) to (8) (see FIG. 2) of the frame images constituting the collected moving image content. The result is output to the display means 80 (step S6). Next, the related information detection unit 702 detects the related identification information embedded in the embedded regions (1) to (8) (see FIG. 2) of the frame image constituting the collected moving image content, and the detection result Is output to the display means 80 (step S7). Then, the display unit 80 displays the detection result.

[第2実施形態]
以下、第2実施形態に係る電子透かし検出装置2Aについて、図8を参照しながら簡単に説明する。電子透かし検出装置2Aは、前記した電子透かし検出装置2と同様に、前記した電子透かし埋め込み装置1によって生成された電子透かし埋め込み動画像コンテンツ中に埋め込まれた電子透かしを検出するものであるが、動画像コンテンツ蓄積手段60および電子透かし検出手段70の他に、動画像コンテンツ受信手段90と、動画像コンテンツ復号手段100と、第1データベース格納手段111と、第2データベース格納手段112と、を備えている点において、電子透かし検出装置2とは異なる。なお、電子透かし検出装置2Aは、電子透かし検出装置2と同様の検出アルゴリズムを用いている。
[Second Embodiment]
Hereinafter, a digital watermark detection apparatus 2A according to the second embodiment will be briefly described with reference to FIG. The digital watermark detection apparatus 2A detects the digital watermark embedded in the digital watermark embedded moving image content generated by the digital watermark embedding apparatus 1 in the same manner as the digital watermark detection apparatus 2 described above. In addition to the moving image content storage unit 60 and the digital watermark detection unit 70, a moving image content receiving unit 90, a moving image content decoding unit 100, a first database storage unit 111, and a second database storage unit 112 are provided. However, the digital watermark detection apparatus 2 is different from the digital watermark detection apparatus 2. The digital watermark detection apparatus 2A uses the same detection algorithm as the digital watermark detection apparatus 2.

また、電子透かし検出装置2Aは、電子透かしを放送局において番組または放送素材を識別する用途に活用する場合に用いることを想定している。従って、電子透かし検出装置2Aの検出対象となる電子透かしの中には、基本識別情報として、動画像コンテンツの識別子(コンテンツID)、動画像コンテンツを撮影したカメラ等の固体識別番号、放送局間におけるコンテンツ受け渡しの際の送信元放送局ID、等の動画像コンテンツの識別情報が含まれており、かつ、関連情報として、動画像コンテンツの撮影日時または撮影場所等の制作情報が含まれている場合を想定している。   Also, it is assumed that the digital watermark detection apparatus 2A is used when the digital watermark is used for the purpose of identifying a program or broadcast material in a broadcasting station. Therefore, in the digital watermark to be detected by the digital watermark detection apparatus 2A, as the basic identification information, the identifier (content ID) of the moving image content, the individual identification number of the camera or the like that shot the moving image content, and between broadcast stations Includes the identification information of the moving image content such as the transmission source broadcasting station ID at the time of delivering the content, and the related information includes the production information such as the shooting date and time or the shooting location of the moving image content. Assume the case.

動画像コンテンツ受信手段90は、伝送路を経由して、圧縮処理が施された動画像コンテンツ(以下、圧縮動画像コンテンツという)を受信するものである。動画像コンテンツ受信手段90は、図8に示すように、伝送路T経由で受信した圧縮動画像コンテンツを動画像コンテンツ復号手段100に出力する。なお、伝送路Tとしては、ここでは放送局間を結ぶFPU(Field Pickup Unit)線、高速固定データ通信回線またはインターネット等を想定している。また、動画像コンテンツの圧縮処理とは、例えば送信側の放送局において、電子透かし埋め込み装置1,1Aによって電子透かしの埋め込み処理がなされた後の電子透かし埋め込み動画像コンテンツに対して、図示していない圧縮装置により圧縮処理が行われたことを意味している。   The moving image content receiving unit 90 receives moving image content (hereinafter referred to as “compressed moving image content”) subjected to compression processing via a transmission path. The moving image content receiving unit 90 outputs the compressed moving image content received via the transmission path T to the moving image content decoding unit 100 as shown in FIG. Here, the transmission path T is assumed to be an FPU (Field Pickup Unit) line, a high-speed fixed data communication line, the Internet, or the like connecting between broadcasting stations. Also, the moving image content compression processing is illustrated with respect to the electronic watermark embedded moving image content after the electronic watermark embedding device 1 or 1A has performed the electronic watermark embedding processing in the transmitting broadcast station, for example. This means that the compression process has been performed by a non-compressor.

動画像コンテンツ復号手段100は、動画像コンテンツをベースバンド信号に復号するものである。動画像コンテンツ復号手段100は、図8に示すように、動画像コンテンツ受信手段90から圧縮処理が施された圧縮動画像コンテンツが入力されると、ベースバンド信号に復号することで圧縮処理前の状態に戻し、当該動画像コンテンツを動画像コンテンツ蓄積手段60に出力する。   The moving image content decoding unit 100 decodes moving image content into a baseband signal. As shown in FIG. 8, the moving image content decoding unit 100 receives the compressed moving image content subjected to the compression processing from the moving image content receiving unit 90 and decodes it into a baseband signal, thereby performing the pre-compression processing. Returning to the state, the moving image content is output to the moving image content storage means 60.

第1データベース格納手段111は、動画像コンテンツの基本識別情報に対応付けて、当該動画像コンテンツの名称、または、当該動画像コンテンツの説明をテキスト情報として格納するものである。第1データベース格納手段111は、具体的には、データを記憶することができるメモリ、ハードディスク等で具現される。第1データベース格納手段111は、図8に示すように、基本識別情報に対応した動画像コンテンツの名称、または、当該動画像コンテンツの説明等のテキスト情報を基本識別情報検出部701に出力する。   The first database storage unit 111 stores the name of the moving image content or the description of the moving image content as text information in association with the basic identification information of the moving image content. Specifically, the first database storage unit 111 is implemented by a memory, a hard disk, or the like that can store data. As shown in FIG. 8, the first database storage unit 111 outputs the name of the moving image content corresponding to the basic identification information or text information such as a description of the moving image content to the basic identification information detection unit 701.

第2データベース格納手段112は、動画像コンテンツの関連情報に対応付けて、当該動画像コンテンツが撮影された場所の地図情報をテキスト情報として格納するものである。第2データベース格納手段112は、具体的には、データを記憶することができるメモリ、ハードディスク等で具現される。第2データベース格納手段112は、図8に示すように、関連情報に対応した動画像コンテンツが撮影された場所の地図情報からなるテキスト情報を関連情報識別部702に出力する。   The second database storage unit 112 stores the map information of the place where the moving image content is photographed as text information in association with the related information of the moving image content. Specifically, the second database storage unit 112 is implemented by a memory, a hard disk, or the like that can store data. As shown in FIG. 8, the second database storage unit 112 outputs text information including map information of a place where the moving image content corresponding to the related information is taken to the related information identification unit 702.

このような構成を備える電子透かし検出装置2Aにおいて、電子透かし検出手段70の基本識別情報検出部701は、動画像コンテンツ復号手段100によって復号された動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域(図2参照)から、基本識別情報を検出するとともに、第1データベース格納手段111から、基本識別情報に対応した動画像コンテンツの名称、または、当該動画像コンテンツの説明等のテキスト情報を抽出する。また、電子透かし検出手段70の関連情報検出部702は、動画像コンテンツ復号手段100によって復号された動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域(図2参照)から、関連情報を検出するとともに、第2データベース格納手段112から、関連情報に対応した動画像コンテンツが撮影された場所の地図情報等のテキスト情報を抽出する。   In the digital watermark detection apparatus 2A having such a configuration, the basic identification information detection unit 701 of the digital watermark detection unit 70 includes a plurality of embeddings in a frame image constituting the moving image content decoded by the moving image content decoding unit 100. The basic identification information is detected from the area (see FIG. 2), and the name of the moving image content corresponding to the basic identification information or the text information such as the description of the moving image content is extracted from the first database storage unit 111. To do. In addition, the related information detection unit 702 of the digital watermark detection unit 70 detects related information from a plurality of embedded regions (see FIG. 2) in the frame image constituting the moving image content decoded by the moving image content decoding unit 100. At the same time, text information such as map information of the place where the moving image content corresponding to the related information is taken is extracted from the second database storage unit 112.

以上のような構成を備える電子透かし検出装置2Aは、伝送路T経由で動画像コンテンツを受信した際に、基本識別情報および関連情報の検出に加えて、これらに関連した情報も抽出されるように構成されているため、例えば送信元や名称が不明な動画像コンテンツを受信した場合であっても、送信元や名称を把握することができる。   When the digital watermark detection apparatus 2A having the above-described configuration receives the moving image content via the transmission path T, in addition to the detection of the basic identification information and the related information, information related thereto is also extracted. For example, even when a moving image content with an unknown transmission source or name is received, the transmission source or name can be recognized.

[電子透かし検出装置2Aの動作]
以下、電子透かし検出装置2Aの動作について、図9を参照しながら簡単に説明する。まず、動画像コンテンツ受信手段90が、伝送路T経由で圧縮動画像コンテンツが受信される(ステップS8)。次に、動画像コンテンツ復号手段100が、圧縮動画像コンテンツをベースバンド信号に復号する(ステップS9)。次に、基本識別情報検出部701が、当該復号された動画像コンテンツを構成するフレーム画像の埋め込み領域(1)〜(8)(図2参照)に埋め込まれた基本識別情報を検出するとともに、第1データベース格納手段111から、基本識別情報に対応したテキスト情報を抽出し、検出結果とテキスト情報を表示手段80に出力する(ステップS10)。次に、関連情報検出部702が、当該収集された動画像コンテンツを構成するフレーム画像の埋め込み領域(1)〜(8)(図2参照)に埋め込まれた関連識別情報を検出するとともに、第2データベース格納手段112から、関連情報に対応したテキスト情報を抽出し、検出結果とテキスト情報を表示手段80に出力する(ステップS11)。そして、表示手段80が当該検出結果およびテキスト情報を表示する。
[Operation of Digital Watermark Detection Apparatus 2A]
Hereinafter, the operation of the digital watermark detection apparatus 2A will be briefly described with reference to FIG. First, the moving image content receiving means 90 receives the compressed moving image content via the transmission path T (step S8). Next, the moving image content decoding unit 100 decodes the compressed moving image content into a baseband signal (step S9). Next, the basic identification information detection unit 701 detects the basic identification information embedded in the embedding areas (1) to (8) (see FIG. 2) of the frame image constituting the decoded moving image content, Text information corresponding to the basic identification information is extracted from the first database storage unit 111, and the detection result and the text information are output to the display unit 80 (step S10). Next, the related information detection unit 702 detects the related identification information embedded in the embedded regions (1) to (8) (see FIG. 2) of the frame images constituting the collected moving image content, and (2) Text information corresponding to the related information is extracted from the database storage unit 112, and the detection result and the text information are output to the display unit 80 (step S11). Then, the display unit 80 displays the detection result and text information.

[電子透かし検出プログラム]
ここで、前記した電子透かし検出装置2,2Aは、一般的なコンピュータを、前記した各手段および各部として機能させるプログラムにより動作させることで実現することができる。このプログラムは、通信回線を介して配布することも可能であるし、CD−ROM等の記録媒体に書き込んで配布することも可能である。
[Digital watermark detection program]
Here, the digital watermark detection devices 2 and 2A described above can be realized by causing a general computer to operate by a program that functions as each of the above-described units and units. This program can be distributed via a communication line, or can be written on a recording medium such as a CD-ROM for distribution.

以上、本発明に係る電子透かし埋め込み装置、電子透かし埋め込みプログラム、電子透かし検出装置および電子透かし検出プログラムについて、発明を実施するための形態により具体的に説明したが、本発明の趣旨はこれらの記載に限定されるものではなく、特許請求の範囲の記載に基づいて広く解釈されなければならない。また、これらの記載に基づいて種々変更、改変等したものも本発明の趣旨に含まれることはいうまでもない。   As mentioned above, the digital watermark embedding device, the digital watermark embedding program, the digital watermark detection device, and the digital watermark detection program according to the present invention have been described in detail according to the mode for carrying out the invention. The present invention should not be limited to the above, but should be widely interpreted based on the description of the scope of claims. Needless to say, various changes and modifications based on these descriptions are also included in the spirit of the present invention.

例えば、前記した電子透かし埋め込み装置1の電子透かし埋め込み手段20は、基本識別情報埋め込み部201のみを備える構成としてもよい。すなわち、電子透かし埋め込み装置1は、入力された動画像コンテンツに対して、基本識別情報のみを埋め込んで電子透かし埋め込み動画像コンテンツを生成してもよい。   For example, the digital watermark embedding unit 20 of the digital watermark embedding apparatus 1 may include only the basic identification information embedding unit 201. That is, the digital watermark embedding device 1 may generate the digital watermark embedded video content by embedding only basic identification information in the input video content.

また、前記した電子透かし埋め込み装置1の領域分割手段10は、図2に示すように、フレーム画像を(1)〜(8)の8つの領域に分割しているが、8つ以下あるいは8つ以上の領域に分割しても構わない。   Further, as shown in FIG. 2, the area dividing unit 10 of the digital watermark embedding apparatus 1 divides the frame image into eight areas (1) to (8). You may divide | segment into the above area | region.

また、前記した電子透かし埋め込み装置1の基本識別情報埋め込み部201は、図2に示す埋め込み領域(1)〜(8)のそれぞれに、基本識別情報を1回だけ埋め込んでもよい。   Further, the basic identification information embedding unit 201 of the digital watermark embedding apparatus 1 may embed basic identification information only once in each of the embedding areas (1) to (8) shown in FIG.

また、前記した電子透かし埋め込み装置1の関連情報埋め込み部202は、基本識別情報埋め込み部201による基本識別情報の5回分の埋め込み処理の後に、関連情報の埋め込み処理を行うとしたが、基本識別情報と関連情報の埋め込みの順序は特に限定されず、どちらが先でも、どちらが後でも、あるいは同時であっても構わない。   The related information embedding unit 202 of the digital watermark embedding apparatus 1 performs the related information embedding process after the basic identification information embedding unit 201 embeds the basic identification information five times. The order of embedding the related information is not particularly limited, which may be first, later, or simultaneous.

また、前記した電子透かし埋め込み装置1の基本識別情報埋め込み部201および関連情報埋め込み部202は、図3に示すようなデータ配列を有する電子透かしの埋め込みが可能であれば、特許文献1に記載された再撮耐性を有する電子透かしの埋め込みアルゴリズム以外のアルゴリズムも用いることができる。   Further, the basic identification information embedding unit 201 and the related information embedding unit 202 of the digital watermark embedding device 1 are described in Patent Document 1 if a digital watermark having a data arrangement as shown in FIG. 3 can be embedded. An algorithm other than the digital watermark embedding algorithm having reshooting resistance can also be used.

また、前記した電子透かし埋め込み装置1Aの埋め込みデータ生成手段30は、基本識別情報のみを含む電子透かしの埋め込みデータを生成する構成としてもよい。すなわち、電子透かし埋め込み装置1Aは、関連情報を含まない電子透かしの埋め込みデータを生成してもよい。   The embedded data generating means 30 of the digital watermark embedding apparatus 1A described above may be configured to generate digital watermark embedded data including only basic identification information. That is, the digital watermark embedding device 1A may generate digital watermark embedding data that does not include related information.

また、前記した電子透かし埋め込み装置1Aの埋め込みデータ生成手段30は、基本識別情報を1つのみ含む電子透かしの埋め込みデータを生成する構成としてもよい。すなわち、電子透かし埋め込み装置1Aは、基本識別情報を1つのみ、あるいは基本識別情報および関連情報をそれぞれ1つずつ含む電子透かしの埋め込みデータを生成してもよい。   Further, the embedded data generating means 30 of the digital watermark embedding apparatus 1A may be configured to generate digital watermark embedded data including only one basic identification information. That is, the digital watermark embedding apparatus 1A may generate digital watermark embedding data including only one basic identification information or one basic identification information and one related information.

また、電子透かし検出装置2,2Aは、電子透かし埋め込み装置1のみならず、電子透かし埋め込み装置1Aおよびその変形例によって生成された電子透かし埋め込み動画像コンテンツ中に埋め込まれた電子透かしを検出することもできる。   Also, the digital watermark detection devices 2 and 2A detect not only the digital watermark embedding device 1 but also the digital watermark embedded in the digital watermark embedding moving image content generated by the digital watermark embedding device 1A and its modification. You can also.

また、前記した電子透かし検出装置2,2Aの基本識別情報検出部701および関連情報検出部702で用いられる電子透かしの検出アルゴリズムは前記したものに限定されず、例えばフレーム画像内の埋め込み領域ごとに算出される相関値を順次足し合わせ、一定の閾値に達した時点で、対応する埋め込みビットを最終的な埋め込みビットとして出力するアルゴリズムを用いてもよい。なお、この場合、例えば1つの基本識別情報がフレーム画像の時間方向あるいは複数のフレームにわたって埋め込まれている場合とは異なり、1枚のフレーム画像から基本識別情報を検出することができるため、電子透かしの検出処理を高速化することができる。   Further, the digital watermark detection algorithm used in the basic identification information detection unit 701 and the related information detection unit 702 of the digital watermark detection devices 2 and 2A is not limited to the above, and for example, for each embedded region in the frame image An algorithm may be used in which the calculated correlation values are sequentially added and the corresponding embedded bits are output as final embedded bits when a certain threshold value is reached. In this case, unlike the case where, for example, one basic identification information is embedded in the time direction of a frame image or over a plurality of frames, the basic identification information can be detected from one frame image. Detection processing can be speeded up.

また、前記した電子透かし検出装置2,2Aの関連情報検出部702は、基本識別情報検出部701による基本識別情報の検出処理の後に、関連情報の検出処理を行うとしたが、電子透かし検出装置2,2Aの処理能力に応じて、基本識別情報の検出処理と関連情報の検出処理を並行して同時に行っても良い。   In addition, the related information detection unit 702 of the above-described digital watermark detection devices 2 and 2A performs the related information detection processing after the basic identification information detection processing by the basic identification information detection unit 701. Depending on the processing capacity of 2 or 2A, the detection processing of the basic identification information and the detection processing of the related information may be performed simultaneously in parallel.

また、前記した電子透かし埋め込み装置1の説明では、図3に示す少数ビットデータの繰り返し埋め込み領域に8ビットの基本識別情報を繰り返し埋め込み、汎用データの埋め込み領域に40ビットの関連情報を埋め込む場合を示したが、他のビット列長であってもよい。この2種類のデータについて、それぞれどのビット列長が最適であるかは、電子透かしの検出に要する時間や検出精度との兼ね合いによるため、個々の具体的な態様により異なる。   Further, in the description of the digital watermark embedding apparatus 1 described above, there is a case where the 8-bit basic identification information is repeatedly embedded in the repetitive embedding area of the small number of bits data shown in FIG. Although shown, other bit string lengths may be used. Which bit string length is optimal for the two types of data depends on the time required for detection of the digital watermark and the detection accuracy, and therefore differs depending on each specific mode.

例えば、前記した基本識別情報の検出に要する時間をより短縮化する必要がある場合、その埋め込み繰り返し回数を増加させればよい。例えば、図3に示す電子透かしのデータ配列における基本識別情報の繰り返し回数を5回から10回に増加させると、基本識別情報検出部701が判定する埋め込み領域ごとの埋め込みビットの数がより増加し、最終的な埋め込みビットの決定までの時間がより短縮されるため、基本識別情報をより高速に検出することができる。また、関連情報(汎用データ)のデータ量が大きく、その検出に非常に長い時間を要する場合は、基本識別情報の埋め込み繰り返し回数を減少させることによって、1フレーム内の埋め込み領域における汎用データが占める割合を増加させればよい。   For example, when it is necessary to further shorten the time required for detecting the basic identification information, the number of embedding repetitions may be increased. For example, when the number of repetitions of the basic identification information in the digital watermark data array shown in FIG. 3 is increased from 5 to 10, the number of embedded bits for each embedded area determined by the basic identification information detecting unit 701 increases. Since the time until the final embedded bit is determined is further shortened, the basic identification information can be detected at a higher speed. If the amount of related information (general-purpose data) is large and it takes a very long time to detect it, general-purpose data in the embedding area in one frame occupies by reducing the number of repetitions of embedding basic identification information. What is necessary is just to increase a ratio.

また、前記した電子透かし検出装置2の説明では、動画像コンテンツ収集手段50がインターネット経由でアクセス可能な動画像コンテンツのうち、動画投稿サイトにアップロードされた放送番組等、著作権侵害の可能性が疑われる動画像コンテンツを収集する場合を示したが、使用する通信網Nはインターネットに限らず、任意の通信網を利用することができる。また、ウェブサイトについても、動画投稿サイトに限らず任意のウェブサイトを対象として動画像コンテンツを探索してもよく、アクセスし得るあらゆる動画像コンテンツを収集してもよい。   In the description of the digital watermark detection apparatus 2 described above, there is a possibility of copyright infringement, such as a broadcast program uploaded to a video posting site, among moving image contents accessible by the moving image content collection unit 50 via the Internet. Although the case of collecting suspected moving image content has been shown, the communication network N to be used is not limited to the Internet, and any communication network can be used. As for the website, the moving image content may be searched not only for the moving image posting site but also for any website, and any accessible moving image content may be collected.

また、前記した電子透かし検出装置2を動画投稿サイトへの削除要請システムと組み合わせて違法流通対策システムを構築してもよい。また、当該電子透かし検出装置2を直接動画投稿サイトに備え、アップロードされる動画像コンテンツから基本識別情報を高速に検出することで、違法にアップロードされた動画像コンテンツを速やかに検知し、即座にこれを削除する構成としてもよい。   Further, an illegal distribution countermeasure system may be constructed by combining the digital watermark detection apparatus 2 described above with a deletion request system for moving image posting sites. In addition, the digital watermark detection apparatus 2 is directly provided in a video posting site, and by quickly detecting basic identification information from uploaded video content, illegally uploaded video content can be detected quickly and immediately. It is good also as a structure which deletes this.

1,1A 電子透かし埋め込み装置
2,2A 電子透かし検出装置
9 埋め込み単位特定手段
10 領域分割手段
20,21 電子透かし埋め込み手段
30 埋め込みデータ生成手段
40 検索キーワード入力手段
50 動画像コンテンツ収集手段
60 動画像コンテンツ蓄積手段
70 電子透かし検出手段
80 表示手段
90 動画像コンテンツ受信手段
100 動画像コンテンツ復号手段
111 第1データベース格納手段(DB1)
112 第2データベース格納手段(DB1)
201 基本識別情報埋め込み部
202 関連情報埋め込み部
701 基本識別情報検出部
702 関連情報検出部
N 通信網
T 伝送路
DESCRIPTION OF SYMBOLS 1,1A Digital watermark embedding apparatus 2,2A Digital watermark detection apparatus 9 Embedding unit specification means 10 Area division means 20, 21 Digital watermark embedding means 30 Embedded data generation means 40 Search keyword input means 50 Moving picture content collection means 60 Moving picture contents Storage means 70 Digital watermark detection means 80 Display means 90 Moving picture content receiving means 100 Moving picture content decoding means 111 First database storage means (DB1)
112 Second database storage means (DB1)
201 Basic identification information embedding unit 202 Related information embedding unit 701 Basic identification information detecting unit 702 Related information detecting unit N Communication network T Transmission path

Claims (14)

電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成する電子透かし埋め込み装置であって、
前記動画像コンテンツを構成するフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する埋め込み単位特定手段と、
前記フレーム画像に、所定数の画素ブロック単位で構成され、前記動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含む電子透かしを埋め込む電子透かし埋め込み手段と、
前記フレーム画像を複数の埋め込み領域に分割する領域分割手段と、を備え、
前記電子透かし埋め込み手段は、前記複数の埋め込み領域ごとに、前記基本識別情報を1回以上埋め込む基本識別情報埋め込み部を備えることを特徴とする電子透かし埋め込み装置。
A digital watermark embedding device that generates a digital watermark embedded video content by embedding a digital watermark in the video content,
An embedding unit specifying means for specifying a pixel block unit corresponding to one bit of a digital watermark as an embedding unit in a frame image constituting the moving image content;
A digital watermark embedding unit that embeds a digital watermark including one or more basic identification information, which is configured in units of a predetermined number of pixel blocks and is used for distinguishing the moving image content from other moving image content, in the frame image; ,
Area dividing means for dividing the frame image into a plurality of embedded areas,
The digital watermark embedding apparatus comprising: a basic identification information embedding unit that embeds the basic identification information at least once for each of the plurality of embedding areas.
電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成する電子透かし埋め込み装置であって、
前記動画像コンテンツを構成するフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する埋め込み単位特定手段と、
前記フレーム画像に、所定数の画素ブロック単位で構成され、前記動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含む電子透かしを埋め込む電子透かし埋め込み手段と、
同一の前記基本識別情報を1つ以上含む前記電子透かしの埋め込みデータを生成する埋め込みデータ生成手段と、を備え、
前記電子透かし埋め込み手段は、前記埋め込みデータを前記フレーム画像に所定回数繰り返し埋め込むことを特徴とする電子透かし埋め込み装置。
A digital watermark embedding device that generates a digital watermark embedded video content by embedding a digital watermark in the video content,
An embedding unit specifying means for specifying a pixel block unit corresponding to one bit of a digital watermark as an embedding unit in a frame image constituting the moving image content;
A digital watermark embedding unit that embeds a digital watermark including one or more basic identification information, which is configured in units of a predetermined number of pixel blocks and is used for distinguishing the moving image content from other moving image content, in the frame image; ,
Embedded data generation means for generating embedded data of the digital watermark including one or more of the same basic identification information,
The digital watermark embedding device, wherein the digital watermark embedding unit repeatedly embeds the embedded data in the frame image a predetermined number of times.
前記電子透かし埋め込み手段は、前記複数の埋め込み領域ごとに、動画像コンテンツに関連した情報である関連情報を1回以上埋め込む関連情報埋め込み部を備えることを特徴とする請求項1に記載の電子透かし埋め込み装置。   The digital watermark according to claim 1, wherein the digital watermark embedding unit includes a related information embedding unit that embeds related information, which is information related to moving image content, at least once for each of the plurality of embedding areas. Implantation device. 前記埋め込みデータ生成手段は、同一の前記基本識別情報を1つ以上含むとともに動画像コンテンツに関連した情報である関連情報を1つ以上含む前記電子透かしの埋め込みデータを生成することを特徴とする請求項2に記載の電子透かし埋め込み装置。   The embedded data generation unit generates the embedded data of the digital watermark including one or more pieces of the same basic identification information and one or more pieces of related information that is information related to moving image content. Item 3. The electronic watermark embedding device according to Item 2. 前記基本識別情報は、前記動画像コンテンツの著作権者の氏名または名称であることを特徴とする請求項3または請求項4に記載の電子透かし埋め込み装置。   The digital watermark embedding apparatus according to claim 3 or 4, wherein the basic identification information is a name or a name of a copyright holder of the moving image content. 前記基本識別情報は、前記動画像コンテンツの識別子であることを特徴とする請求項3または請求項4に記載の電子透かし埋め込み装置。   5. The digital watermark embedding apparatus according to claim 3, wherein the basic identification information is an identifier of the moving image content. 前記関連情報は、前記動画像コンテンツの名称を記述したメタデータ、または、前記動画像コンテンツの著作権者の氏名以外の権利情報もしくは前記動画像コンテンツの著作権者の名称以外の権利情報を記述したメタデータであることを特徴とする請求項3から請求項5のいずれか一項に記載の電子透かし埋め込み装置。   The related information describes metadata describing the name of the moving image content, rights information other than the name of the copyright owner of the moving image content, or rights information other than the name of the copyright owner of the moving image content The digital watermark embedding apparatus according to any one of claims 3 to 5, wherein the digital watermark embedding apparatus includes the metadata. 前記関連情報は、前記動画像コンテンツの撮影日時または撮影場所を示す情報であることを特徴とする請求項3、請求項4、請求項6のいずれか一項に記載の電子透かし埋め込み装置。   7. The digital watermark embedding apparatus according to claim 3, wherein the related information is information indicating a shooting date / time or a shooting location of the moving image content. 電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成するために、コンピュータを、
前記動画像コンテンツを構成するフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する埋め込み単位特定手段、
前記フレーム画像に、所定数の画素ブロック単位で構成され、前記動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含む電子透かしを埋め込む電子透かし埋め込み手段、
前記フレーム画像を複数の埋め込み領域に分割する領域分割手段、として機能させ、
前記電子透かし埋め込み手段は、前記複数の埋め込み領域ごとに、前記基本識別情報を1回以上埋め込む基本識別情報埋め込み部を備えることを特徴とする電子透かし埋め込みプログラム。
In order to generate a digital watermark embedded video content by embedding the digital watermark in the video content,
An embedding unit specifying means for specifying a pixel block unit corresponding to one bit of an electronic watermark serving as an embedding unit in a frame image constituting the moving image content;
An electronic watermark embedding unit that embeds an electronic watermark that is configured in units of a predetermined number of pixel blocks in the frame image and includes one or more basic identification information that is information for distinguishing the moving image content from other moving image content;
Function as area dividing means for dividing the frame image into a plurality of embedded areas;
The electronic watermark embedding program, comprising: a basic identification information embedding unit that embeds the basic identification information at least once for each of the plurality of embedding areas.
電子透かしを動画像コンテンツに埋め込むことで電子透かし埋め込み動画像コンテンツを生成するために、コンピュータを、
前記動画像コンテンツを構成するフレーム画像において、埋め込み単位となる電子透かし1ビットに対応する画素ブロック単位を特定する埋め込み単位特定手段、
前記フレーム画像に、所定数の画素ブロック単位で構成され、前記動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含む電子透かしを埋め込む電子透かし埋め込み手段、
同一の前記基本識別情報を1つ以上含む前記電子透かしの埋め込みデータを生成する埋め込みデータ生成手段、として機能させ、
前記電子透かし埋め込み手段は、前記埋め込みデータを前記フレーム画像に所定回数繰り返し埋め込むことを特徴とする電子透かし埋め込みプログラム。
In order to generate a digital watermark embedded video content by embedding the digital watermark in the video content,
An embedding unit specifying means for specifying a pixel block unit corresponding to one bit of an electronic watermark serving as an embedding unit in a frame image constituting the moving image content;
An electronic watermark embedding unit that embeds an electronic watermark that is configured in units of a predetermined number of pixel blocks in the frame image and includes one or more basic identification information that is information for distinguishing the moving image content from other moving image content;
Function as embedded data generation means for generating embedded data of the digital watermark including one or more of the same basic identification information,
The digital watermark embedding unit, wherein the digital watermark embedding unit repeatedly embeds the embedded data in the frame image a predetermined number of times.
動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域のそれぞれに、当該動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含むとともに当該動画像コンテンツに関連した情報である関連情報を1つ以上含む電子透かしが埋め込まれている電子透かし埋め込み動画像コンテンツから、請求項1から請求項10のいずれか一項に記載の電子透かし埋め込み装置によって生成された前記電子透かしを検出する電子透かし検出装置であって、
前記複数の埋め込み領域から前記基本識別情報を検出する基本識別情報検出部と、前記複数の埋め込み領域から前記関連情報を検出する関連情報検出部と、からなる電子透かし検出手段を備え
前記基本識別情報検出部および前記関連情報検出部は、前記動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域ごとの埋め込みビットを判定し、当該複数の判定結果を相補的に判断することで、前記基本識別情報および前記関連情報に相当する最終的な埋め込みビットを決定することを特徴とする電子透かし検出装置。
Each of the plurality of embedded regions in the frame image constituting the moving image content includes one or more basic identification information that is information for distinguishing the moving image content from other moving image contents, and the moving image content includes The digital watermark embedding device according to any one of claims 1 to 10, wherein the digital watermark embedding moving image content is embedded with a digital watermark including one or more related information that is related information . An electronic watermark detection apparatus for detecting the electronic watermark,
A digital watermark detection means comprising: a basic identification information detection unit that detects the basic identification information from the plurality of embedded regions; and a related information detection unit that detects the related information from the plurality of embedded regions ,
The basic identification information detection unit and the related information detection unit determine embedded bits for each of a plurality of embedded regions in a frame image constituting the moving image content, and determine the plurality of determination results in a complementary manner. the electronic watermark detection apparatus characterized that you determine the final buried bit corresponding to the basic identification information and the related information.
通信網上における予め設定されたウェブサイト上に存在する動画像コンテンツを検索するための検索キーワードを入力する検索キーワード入力手段と、
前記検索キーワードに従って前記ウェブサイト上に存在する動画像コンテンツを検索し、当該動画像コンテンツを収集する動画像コンテンツ収集手段と、を備え、
前記基本識別情報検出部および前記関連情報検出部は、前記収集された動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域から、前記基本識別情報および前記関連情報を検出することを特徴とする請求項11に記載の電子透かし検出装置。
Search keyword input means for inputting a search keyword for searching for moving image content existing on a website set in advance on a communication network;
Moving image content collection means for searching for moving image content existing on the website according to the search keyword and collecting the moving image content;
The basic identification information detection unit and the related information detection unit detect the basic identification information and the related information from a plurality of embedded regions in a frame image constituting the collected moving image content. The digital watermark detection apparatus according to claim 11.
伝送路経由で前記動画像コンテンツを受信する動画像コンテンツ受信手段と、
前記受信した動画像コンテンツをベースバンド信号に復号する動画像コンテンツ復号手段と、
前記動画像コンテンツの基本識別情報に対応付けて、当該動画像コンテンツの名称、または、当該動画像コンテンツの説明をテキスト情報として格納する第1データベース格納手段と、
前記動画像コンテンツの関連情報に対応付けて、当該動画像コンテンツが撮影された場所の地図情報をテキスト情報として格納する第2データベース格納手段と、を備え、
前記基本識別情報検出部および前記関連情報検出部は、前記復号された動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域から、前記基本識別情報および前記関連情報を検出するとともに、前記第1データベース格納手段および前記第2データベース格納手段から、前記基本識別情報および前記関連情報に対応したテキスト情報をそれぞれ抽出することを特徴とする請求項11に記載の電子透かし検出装置。
Moving image content receiving means for receiving the moving image content via a transmission path;
Moving image content decoding means for decoding the received moving image content into a baseband signal;
First database storage means for storing the name of the moving image content or the description of the moving image content as text information in association with the basic identification information of the moving image content;
Second database storage means for storing, as text information, map information of a place where the moving image content is photographed in association with the related information of the moving image content,
The basic identification information detection unit and the related information detection unit detect the basic identification information and the related information from a plurality of embedded regions in a frame image constituting the decoded moving image content. 12. The digital watermark detection apparatus according to claim 11, wherein text information corresponding to the basic identification information and the related information is extracted from a database storage unit and the second database storage unit, respectively.
動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域のそれぞれに、当該動画像コンテンツを他の動画像コンテンツと区別するための情報である基本識別情報を1つ以上含むとともに当該動画像コンテンツに関連した情報である関連情報を1つ以上含む電子透かしが埋め込まれている電子透かし埋め込み動画像コンテンツから、請求項1から請求項10のいずれか一項に記載の電子透かし埋め込み装置によって生成された前記電子透かしを検出するために、コンピュータを、
前記複数の埋め込み領域から前記基本識別情報を検出する基本識別情報検出部と、前記複数の埋め込み領域から前記関連情報を検出する関連情報検出部と、からなる電子透かし検出手段として機能させ、
前記基本識別情報検出部および前記関連情報検出部は、前記動画像コンテンツを構成するフレーム画像内における複数の埋め込み領域ごとの埋め込みビットを判定し、当該複数の判定結果を相補的に判断することで、前記基本識別情報および前記関連情報に相当する最終的な埋め込みビットを決定することを特徴とする電子透かし検出プログラム。
Each of the plurality of embedded regions in the frame image constituting the moving image content includes one or more basic identification information that is information for distinguishing the moving image content from other moving image contents, and the moving image content includes The digital watermark embedding device according to any one of claims 1 to 10, wherein the digital watermark embedding moving image content is embedded with a digital watermark including one or more related information that is related information . In order to detect the watermark, a computer is
A basic identification information detection unit for detecting the basic identification information from the plurality of embedding areas; and a related information detection unit for detecting the related information from the plurality of embedding areas.
The basic identification information detection unit and the related information detection unit determine embedded bits for each of a plurality of embedded regions in a frame image constituting the moving image content, and determine the plurality of determination results in a complementary manner. digital watermark detection program characterized that you determine the final buried bit corresponding to the basic identification information and the related information.
JP2011006577A 2011-01-17 2011-01-17 Digital watermark embedding device, digital watermark embedding program, digital watermark detection device, and digital watermark detection program Expired - Fee Related JP5557756B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011006577A JP5557756B2 (en) 2011-01-17 2011-01-17 Digital watermark embedding device, digital watermark embedding program, digital watermark detection device, and digital watermark detection program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011006577A JP5557756B2 (en) 2011-01-17 2011-01-17 Digital watermark embedding device, digital watermark embedding program, digital watermark detection device, and digital watermark detection program

Publications (2)

Publication Number Publication Date
JP2012151535A JP2012151535A (en) 2012-08-09
JP5557756B2 true JP5557756B2 (en) 2014-07-23

Family

ID=46793404

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011006577A Expired - Fee Related JP5557756B2 (en) 2011-01-17 2011-01-17 Digital watermark embedding device, digital watermark embedding program, digital watermark detection device, and digital watermark detection program

Country Status (1)

Country Link
JP (1) JP5557756B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017119620A1 (en) * 2016-01-08 2017-07-13 서울과학기술대학교 산학협력단 Visible light communication method for transmitting additional data hidden in display
KR101718279B1 (en) * 2016-01-08 2017-03-21 서울과학기술대학교 산학협력단 Visible light communication using diplay apative behind schene method
KR101821798B1 (en) * 2016-12-08 2018-01-24 서울과학기술대학교 산학협력단 Visible light IoT communication method transmitting by embedding additional invisual information on video information of panel display
CN113015004B (en) * 2021-03-15 2023-04-28 北京奇艺世纪科技有限公司 Watermark video frame identification method, watermark video frame production method, watermark video frame identification device and electronic equipment

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001282749A (en) * 2000-03-30 2001-10-12 Toppan Printing Co Ltd Method for detecting information on network
JP2002014935A (en) * 2000-06-28 2002-01-18 Nippon Telegr & Teleph Corp <Ntt> Data collection-type communication processor
JP2003304388A (en) * 2002-04-11 2003-10-24 Sony Corp Additional information detection processor, apparatus and method for contents reproduction processing, and computer program
JP2004048219A (en) * 2002-07-10 2004-02-12 Hitachi Ltd Inserting method of electronic watermark information
WO2006009663A1 (en) * 2004-06-22 2006-01-26 Digimarc Corporation Digital asset management, targeted searching and desktop searching using digital watermarks
JP4360341B2 (en) * 2005-04-08 2009-11-11 日本電信電話株式会社 Digital watermark detection apparatus, method, and program
JP2007074454A (en) * 2005-09-08 2007-03-22 Hitachi Ltd Detecting method and device of digital watermark
JP4327188B2 (en) * 2006-09-01 2009-09-09 株式会社沖データ Image forming apparatus
JP2008090438A (en) * 2006-09-29 2008-04-17 Hitachi Koukiyou Syst Eng Kk Falsification detection device and system for moving image content
US20100199220A1 (en) * 2007-05-29 2010-08-05 Yomiuri Telecasting Corporation Image information acquisition device, its method, and program
JP5258243B2 (en) * 2007-09-20 2013-08-07 日立公共システムエンジニアリング株式会社 Broadcast distribution monitoring system, broadcast distribution monitoring method, broadcast distribution information acquisition apparatus, and acquisition method
JP5229958B2 (en) * 2009-02-20 2013-07-03 学校法人日本大学 Digital watermark embedded image content creation method
JP5031793B2 (en) * 2009-05-15 2012-09-26 株式会社日立製作所 Tamper detection system, watermark information embedding device, tamper detection device, watermark information embedding method, and tamper detection method
JP5153723B2 (en) * 2009-05-29 2013-02-27 日本放送協会 Digital watermark detection device

Also Published As

Publication number Publication date
JP2012151535A (en) 2012-08-09

Similar Documents

Publication Publication Date Title
Chen et al. Automatic detection of object-based forgery in advanced video
US9280977B2 (en) Content recognition employing fingerprinting at different resolutions
US20200311121A1 (en) Identifying Media Components
CN103294667B (en) The method and system of homologous picture tracking are carried out by watermark
US8671109B2 (en) Content-based video copy detection
JP5711387B2 (en) Method and apparatus for comparing pictures
KR101517750B1 (en) Methods and apparatus for comparing videos
CN101647288A (en) Generating a data stream and identifying positions within a data stream
US11853357B2 (en) Method and system for dynamically analyzing, modifying, and distributing digital images and video
JP5557756B2 (en) Digital watermark embedding device, digital watermark embedding program, digital watermark detection device, and digital watermark detection program
Lian et al. Content-based video copy detection–a survey
CN106454367B (en) Multimedia file identification method and system
CN105959814A (en) Scene-recognition-based video bullet screen display method and display apparatus thereof
JP5634075B2 (en) Method and apparatus for processing a sequence of images, apparatus for processing image data, and computer program product
JP2002175311A (en) Method and device for registering video information, and method and device for retrieving the video information
JP2004364263A (en) Information embedding apparatus and method, tampering detecting apparatus and method, and recording medium
US20170103285A1 (en) Method and device for detecting copies in a stream of visual data
JP5153723B2 (en) Digital watermark detection device
US20180293461A1 (en) Method and device for detecting copies in a stream of visual data
Kezheng et al. Video watermarking temporal synchronization on motion vector
Hauer et al. Framework for combined video frame synchronization and watermark detection
Daniel et al. An Exploration based on Multifarious Video Copy Detection Strategies
Amar Toward a Novel LSB-based Collusion-Secure Fingerprinting Schema for 3D Video
Garboan Towards camcorder recording robust video fingerprinting
Kezheng et al. Digital watermarking synchronization algorithm of mpeg-4 video

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130624

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140304

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20140326

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140418

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140507

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140603

R150 Certificate of patent or registration of utility model

Ref document number: 5557756

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees