JP7362154B2 - クライアント側フォレンジックウォーターマーク装置、システム及び方法 - Google Patents

クライアント側フォレンジックウォーターマーク装置、システム及び方法 Download PDF

Info

Publication number
JP7362154B2
JP7362154B2 JP2021571406A JP2021571406A JP7362154B2 JP 7362154 B2 JP7362154 B2 JP 7362154B2 JP 2021571406 A JP2021571406 A JP 2021571406A JP 2021571406 A JP2021571406 A JP 2021571406A JP 7362154 B2 JP7362154 B2 JP 7362154B2
Authority
JP
Japan
Prior art keywords
watermark
mask
frame
content
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021571406A
Other languages
English (en)
Other versions
JP2022534620A (ja
Inventor
パク、ビョンソン
パク、サンホ
ユン、ソンジュ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inka Entworks Inc
Original Assignee
Inka Entworks Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inka Entworks Inc filed Critical Inka Entworks Inc
Publication of JP2022534620A publication Critical patent/JP2022534620A/ja
Application granted granted Critical
Publication of JP7362154B2 publication Critical patent/JP7362154B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0021Image watermarking
    • G06T1/0085Time domain based watermarking, e.g. watermarks spread over several images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43074Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on the same device, e.g. of EPG data or interactive icon with a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/654Transmission by server directed to the client
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2201/00General purpose image data processing
    • G06T2201/005Image watermarking
    • G06T2201/0051Embedding of the watermark in the spatial domain
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2201/00General purpose image data processing
    • G06T2201/005Image watermarking
    • G06T2201/0063Image watermarking in relation to collusion attacks, e.g. collusion attack resistant

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Description

本発明は、クライアント側フォレンジックウォーターマーク装置、システム及び方法に関し、ウォーターマークマスクを用いて、クライアント側でフォレンジックウォーターマークを表示することができるクライアント側フォレンジックウォーターマーク装置、システム及び方法に関する。
サーバー側でフォレンジックウォーターマークを埋め込む接近方式は、たくさんのサーバーリソースが必要となるだけでなく、実時間応答性に劣るという短所がある。したがって、サーバー側でフォレンジックウォーターマークを埋め込むためには、実時間にユーザー情報を埋め込まなければならないという問題を克服しなければならない。このような問題を克服するために、前処理過程を通じて、映像コンテンツにウォーターマーク0を埋め込んだ0コンテンツファイルと、映像コンテンツにウォーターマーク1を埋め込んだ1コンテンツファイルを生成した後、ユーザー情報に基づいて、実時間に前処理過程で生成された0コンテンツファイルと1コンテンツファイルとを組み合わせてフォレンジックウォーターマークを埋め込む方式が使用されている。しかしながら、この方式は、複数のユーザーがそれぞれ自分の持ったコンテンツの一部区間を混ぜて、容易にフォレンジックウォーターマークを無力化することができるという致命的な短所がある。例えば、2人のユーザーがそれぞれダウンロードしたコンテンツセクションを混ぜて、全く違うコンテンツファイルを作り出し、サービス提供者が埋め込んだ情報を無力化することができる。
また、映像コンテンツにハードウェアDRM(Digital Rights Management)が適用されている場合、映像を操作する方式では、ウォーターマークを埋め込むことができない。従って、ハードウェアDRMが適用されている映像コンテンツにも埋め込み可能なフォレンジックウォーターマークの表現方法が求められている。
上述の問題点を解決するために、本発明は、ウォーターマークマスクを用いて、クライアント側でフォレンジックウォーターマークを表示することができるクライアント側フォレンジックウォーターマーク装置、システム及び方法を提供することを目的とする。
上述の目的を達成するために、本発明の一実施例による、映像コンテンツからウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積部に蓄積するコンテンツサーバーと通信することができるフォレンジックウォーターマーク装置は、前記コンテンツサーバーに、再生したい前記映像コンテンツを要請し、前記コンテンツサーバーから前記映像コンテンツ及び前記ウォーターマーク領域情報を受信するダウンロード部と、前記ダウンロード部から入力された前記ウォーターマーク領域情報を利用し、前記ウォーターマークマスクを出力するウォーターマークマスク生成部と、前記ダウンロード部から入力された前記映像コンテンツの前記ウォーターマークマスク領域に、前記ウォーターマークマスク生成部から入力された前記ウォーターマークマスクを重ね合わせるオーバーレイ部と、を含む。
前記ダウンロード部は、前記コンテンツサーバーからクライアントセッションID(Client-session-ID)をさらに受信することができて、前記ウォーターマークマスク生成部は、前記ダウンロード部から入力された前記クライアントセッションIDを利用し、前記ウォーターマークマスクを生成して出力することができる。
前記ウォーターマークマスク生成部は、前記ウォーターマークマスクを含むマスクフレームを生成することができる。前記オーバーレイ部は、前記ダウンロード部から入力された前記映像コンテンツのうち、前記ウォーターマークマスク領域を含む映像フレーム上に、前記ウォーターマークマスク生成部から入力された前記マスクフレームを重ね合わせることができる。
前記マスクフレームは、背景と前景とに区分され、非可視性のために、透明の程度を示すアルファ値を前記背景と前記前景とにそれぞれ異ならせて付与することができる。
前記ウォーターマークマスク生成部は、前記ウォーターマーク領域情報から輝度値を抽出し、前記輝度値が所定の臨界値を基準に暗い値であれば、前記背景として暗いアルファ値を選択することができる。
前記フォレンジックウォーターマーク装置は、前記マスクフレームが、前記映像コンテンツのうち、前記ウォーターマークマスク領域を含む映像フレーム上に重なり合うように、前記映像フレームに前記マスクフレームを同期化する同期管理部をさらに含むことができる。
前記同期管理部は、前記ウォーターマークマスク領域を含む映像フレームに連続する映像フレームに変化がないことを示すオーバーレイ継続区間が受信されると、前記オーバーレイ継続区間(Overlay-duration)の間、前記映像フレームに前記マスクフレームを重ね合わせるように、前記映像フレームに前記マスクフレームを同期化することができる。
前記フォレンジックウォーターマーク装置は、前記ウォーターマークマスクと関連し、前記コンテンツサーバーから受信された前記クライアントセッションIDが有効であるか、前記同期管理部が前記オーバーレイ継続期間に基づいて動作しているか、または前記オーバーレイ部の動作が除去され、前記映像コンテンツのみが表示されかをモニタリングする攻撃防御部をさらに含むことができる。
本発明の他の実施例によるフォレンジックウォーターマークシステムは、映像コンテンツから、ウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積するコンテンツサーバーと、上述のフォレンジックウォーターマーク装置とを含むことができ、前記コンテンツサーバーは、前記ダウンロード部から、再生したい前記映像コンテンツの要請と共にクライアントメタデータを受信すると、前記映像コンテンツのクライアントを特定できる前記クライアントセッションIDを生成して、前記クライアントメタデータと共に前記クライアントセッションIDを前記蓄積部に蓄積することにより、上述の目的を達成することができる。
前記コンテンツサーバーは、前記映像コンテンツのGOPコンテンツのうち、所定のフレームのブロックを分析して、前記ウォーターマークマスクを表示するブロックに対する位置情報を前記ウォーターマーク領域情報として蓄積することができる。
本発明のまた他の実施例による、映像コンテンツからウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積部に蓄積するコンテンツサーバーと通信できるフォレンジックウォーターマーク装置によって行われるフォレンジックウォーターマーク方法は、前記コンテンツサーバーに、再生したい前記映像コンテンツを要請し、前記コンテンツサーバーから前記映像コンテンツ及び前記ウォーターマーク領域情報を受信する段階と、前記受信する段階で受信した前記ウォーターマーク領域情報を用いて、前記ウォーターマークマスクを出力する段階と、前記受信する段階で受信された前記映像コンテンツの前記ウォーターマークマスク領域に、前記出力する段階で出力された前記ウォーターマークマスクを重ね合わせる段階と、を含むことにより、上述の目的を達成することができる。
上述の構成により、本発明は、クライアント側でフォレンジックウォーターマークを表示することにより、共謀攻撃に対応することができる。
また、本発明は、映像コンテンツにハードウェアDRM(Digital Rights Management)が適用されている場合でも、フォレンジックウォーターマークを表示することができる。
本発明の一実施例によるフォレンジックウォーターマーク装置を示すブロック図である。 図1のブロック分析部で選択されたブロックの一例を示す。 図1のウォーターマークマスク生成部に生成されたウォーターマークマスクフレームの一例を示す。 図1の同期管理部で管理されるオーバーレイ継続区間の一例を示す。 図1のコンテンツオーバーレイ部で重ねられた映像の一例を示す。 本発明の他の実施例によるフォレンジックウォーターマーク方法を示す流れ図である。
以下、添付の図面を参照し、本発明によるクライアント側フォレンジックウォーターマーク装置、システム及び方法の好ましい実施例を説明する。ちなみに、本発明を説明するにあたって、本発明の構成要素を指す用語は、それぞれの構成要素の機能を考慮して命名されたもので、本発明の技術的構成要素を限定する意味として理解されてはならない。
図1は、本発明の一実施例によるフォレンジックウォーターマーク装置を示すブロック図であり、図2は、図1のブロック分析部で選択されたブロックの一例を示す図であって、図3は、図1のウォーターマークマスク生成部に生成されたウォーターマークマスクフレームの一例を示す図であり、図4は、図1の同期管理部で管理されるオーバーレイ継続区間の一例を示す図であって、図5は、図1のコンテンツオーバーレイ部で重ねられた映像の一例を示す図である。
図1に示されたように、フォレンジックウォーターマークシステムは、コンテンツサーバー110及びフォレンジックウォーターマーク装置120を含む。
コンテンツサーバー110は、フレーム抽出部112、ブロック分析部114、コンテンツ蓄積部116及びデータベース蓄積部118を含む。
フレーム抽出部112は、映像コンテンツからイントラフレームを抽出する。 映像コンテンツは、複数のGOP(Group Of Pictures)を含むことができる。ここで、GOPは、フレーム内の符号化映像であるイントラフレーム(I frame)、フレーム間の順方向予測の符号化映像である予測フレーム(P frame)、及び双方向予測符号化映像である双方向予測フレーム(B frame)を含み、例えば、一つのGOPは、I、B、B、P、B、B、P、B、B、P、B、B、P、B、Bから構成できる。 ここで、フレーム抽出部114が抽出するフレームの例としてイントラフレームが用いられただけで、予測フレーム(P frame)と双方向予測フレーム(B frame)を排除するわけではない。
ブロック分析部114は、フレーム抽出部112から抽出されて出力されたイントラフレームの入力を受けて、完全なウォーターマーク情報を表現できるブロックを分析し、フォレンジックウォーターマーク装置120でウォーターマークマスクが表示されるフレームを選択することができる。この場合、一つのフレーム内に全てのペイロードを表現できるブロックがあるかを分析し、そのフレームを選択することができる。
ブロック分析部114は、符号化された映像のイントラフレームから所定大きさ以下のブロック、即ち、符号化された映像の最も小さいブロックを選択する。 ブロック分析部114は、例えば、イントラフレームから4×4の予測ブロックの輝度(luminance)信号を選択することができる。これにより、イントラフレームにおいて所定大きさより大きいブロックで符号化されたブロックは、ウォーターマーク情報を埋め込むブロック候補群から除外される。所定大きさより大きいブロックで符号化されたブロックを候補群から除く理由は、これらのブロックの映像が平坦な(smooth)映像に近いため、このようなブロックにウォーターマークが埋め込まれた場合、目立つ可能性が大きいからである。したがって、HEVC規格において、あるブロックが32×32、32×16、16×32及び16×16のブロックのいずれかによって符号化されている場合、このブロックは、平坦化映像に近いものと考慮され、AVC規格において、あるブロックが16×16、8×16及び16×8のブロックのいずれかによって符号化されている場合、このブロックは、平坦化映像に近いものと考慮される。
ブロック分析部114は、所定大きさ以下のブロックのみから構成されたマクロブロックを選択する。ブロック分析部114は、例えば、AVC規格の場合、符号化された映像のイントラフレームから選択された4×4のサブブロックのみから構成された16×16のマクロブロックを選択することができる。
ブロック分析部114は、選択されたマクロブロックの量子化係数の中で、0ではない量子化係数(nonzero quantized coefficients:NNZ)の数が所定の個数(Nt)より大きいかどうかを確認する。NNZの数が所定の個数(Nt)より大きい場合、ブロック分析部114は、当該ブロックを、ウォーターマーク情報の埋め込み可能なブロックとして選択する。NNZが小さい場合は、映像復号化過程で当該マクロブロックの元の情報をたくさん失ってしまい、同期化エラーが大きくなる可能性があるため、それらを考慮して所定の個数(Nt)を設定することが重要である。
ブロック分析部114は、ウォーターマーク情報を埋め込めるマクロブロックの数が、ウォーターマーク情報をペイロードする数の所定個数、例えば64個以上であれば、そのマクロブロックをウォーターマーク情報が表示されるフレームとして選択する。ブロック分析部114で分析した結果によるブロックの一例が図2に示されている。 図2において、フレームがそれぞれイントラフレームに該当するとすれば、第1GOPのイントラフレーム(Frame-1)及び第1GOPのイントラフレーム(Frame-3)が、フォレンジックウォーターマーク装置120でウォーターマークマスクが表示されるフレームとして選択されたことになる。
一方、フォレンジックウォーターマーク装置120において、ウォーターマークマスクが重ねられた映像は、時間的フリッカー(temporal flicker)が生じ得る。 ブロック分析部114は、このような時間的フリッカーを防止または減少させるために、擬似動きベクター(pseudomotion vector)を計算し、ウォーターマークマスクが表示される最終マクロブロックを決定することができる。
ブロック分析部114は、ウォーターマークマスクが表示される最終マクロブロックが決定されると、フレーム情報(Frame Number)及びフレーム内のブロックの位置情報(Block-Location)をデータベース蓄積部118に蓄積する。一方、ブロック分析部は、ウォーターマークマスクが表示される最終マクロブロックの輝度情報を蓄積することができる。
コンテンツ蓄積部116は、映像コンテンツと完全に同一なコンテンツを蓄積することができ、装置によっては、ウォーターマークマスクが後からフレーム上に表示されるという情報がシーケンスヘッダに含まれたコンテンツを蓄積することができるが、映像フレーム自体に変形があるわけではないため、本発明では、このような全てのコンテンツを映像コンテンツとして統一して使用する。
データベース蓄積部118には、ブロック分析部114で選択されたフレーム情報と、フレーム内のブロックの位置情報と、輝度情報とがウォーターマーク領域情報として蓄積される。このウォーターマーク領域情報は、後でフォレンジックウォーターマーク情報を表示するように、フォレンジックウォーターマーク装置120に送信される。フォレンジックウォーターマーク装置120から映像コンテンツが要請され、コンテンツ再生時点でフォレンジックウォーターマーク装置120またはユーザーなどを特定できるクライアントセッションID(Client-Session-ID)が生成された場合は、データベース蓄積部118にクライアントメタデータと共にこのクライアントセッションIDも蓄積される。
フォレンジックウォーターマーク装置120は、ダウンロード部122、ウォーターマークマスク生成部124、同期管理部126、オーバーレイ部128、ディスプレイ部130、及び攻撃防御部132を含む。
ダウンロード部122は、コンテンツサーバー110に視聴しようとするコンテンツを要請し、ダウンロードされたコンテンツを管理して再生する。ダウンロード部122は、コンテンツサーバー110から映像コンテンツだけではなく、クライアントセッションID、ウォーターマーク領域情報、及びオーバーレイ継続期間を受信する。
ウォーターマークマスク生成部124は、ダウンロード部122からクライアントセッションID及びウォーターマーク領域情報を受信する。ウォーターマークマスク生成部124は、クライアントセッションIDを使用してウォーターマークマスクを生成し、ウォーターマーク領域情報を用いてマスクフレームのブロックにウォーターマークマスクを提供する。図1では、ウォーターマークマスクがフォレンジックウォーターマーク装置120で生成されるものとして説明されているが、ウォーターマークマスクは、コンテンツサーバー110からも受信することができる。
ウォーターマークマスクは、映像コンテンツ上に半透明の形で重ねられる。 したがって、ウォーターマークマスクは、可視的に識別することができない。ウォーターマークマスク生成部124に生成されたウォーターマークマスクフレームの一例が図3に示されている。
図3に示されたように、例えば、クライアントセッションIDがABCである場合、ウォーターマークマスクは、マスクフレーム内にABCと表示される。この場合、非可視性のために、透明度を表すアルファ(alpha)でウォーターマークを表示することができるが、完全透明は、0.0であって、完全不透明は、1.0である。本実施例では、このようなアルファの表示として、例えば、(1)背景(Background):Black Alpha0.0及び前景(Foreground):White Alpha0.1、(2)背景:Black Alpha0.1及び前景:White Alpha0.0、(3)背景:White Alpha0.0及び前景:Black Alpha0.1、(4)背景:White Alpha0.1及び前景:Black Alpha0.0を使用した。このようなアルファ値は、ウォーターマーク領域情報に含まれた輝度情報を利用して選択することができる。例えば、コンテンツ映像の輝度が暗いと、背景は、Black Alphaを選択し、輝度値によってBlack Alpha値を選択して、コンテンツ映像の輝度が明るいと、背景は、White Alphaを選択し、輝度値によってWhite Alpha値を選択する。ここで、実施例のアルファ値は例示であって、輝度情報によって変更できる。
同期管理部126は、ウォーターマークマスクが映像コンテンツの適切な時点に重ね合わせられるように、コンテンツフレームとマスクフレームとを同期化させる。一つのウォーターマークマスクは、1つ以上のフレームにわたって、その上に重ね合わせられる。同期管理部126で管理されるオーバーレイ継続区間の一例が図4に示されている。図4に示されているように、ウォーターマークマスク1(Overlay-Mask-1)は、3つのフレームにわたって、その上に重なり合っており、ウォーターマーク2(Overlay-Mask-2)は、1つのフレームにのみ重なり合っている。
図4では、ウォーターマークマスク1は、3つのフレームにわたって、その上に重なり合っているが、これは、例えば動画のGOPにおいてIフレームに連続した2つのフレームにウォーターマークマスク1を表示することを意味する。この場合、それはIフレームに連続した2つのフレームの場面には、時間的変化がないことを意味し、このような情報は、コンテンツのGOPヘッダ情報などから得ることができる。
オーバーレイ部128は、マスクフレームを、再生されるコンテンツフレーム上に重ね合わせる。コンテンツオーバーレイ部128で重ね合わせられた映像の一例が図5に示されている。オーバーレイ部128は、必要に応じて、コンテンツフレームの色相及び濃度などを考慮し、マスクフレームの濃度などを変えてマスクフレームを重ね合わせることができる。
ディスプレー部130は、オーバーレイ部128で重ね合わせられた動画を表示する。この場合、ディスプレー部130に表示された動画では、肉眼でウォーターマークマスクを認識することができない。
攻撃防御部132は、ウォーターマークマスクを除去する外部攻撃があるかどうかをモニタリングする。攻撃防御部132は、オーバーレイ部128に提供されるウォーターマーク領域情報とクライアントセッションIDとが有効であるかをモニタリングし、同期管理部126がウォーターマーク領域情報とオーバーレイ継続期間情報とに基づいて動作しているかをモニタリングする。また、攻撃防御部132は、オーバーレイ部128の動作が除去されて、ディスプレイ部130に映像コンテンツのみが表示されているかなどをモニタリングする。モニタリング中に外部攻撃を検知すると、再生を停止し、ディスプレイ部130に映像コンテンツが表示されないようにする。
図6は、本発明のまた一つの実施例によるフォレンジックウォーターマーク方法を示す流れ図である。
フレーム抽出部112は、映像コンテンツから所定のフレーム、例えばイントラフレームを抽出する(S602)。ブロック分析部114は、フレーム抽出部112から抽出されて出力されたイントラフレームの入力を受けて、完全なウォーターマーク情報を表現できるブロックを分析し、フォレンジックウォーターマーク装置120でウォーターマークマスクが表示されるフレームを選択する(S604)。ブロック分析部114は、ウォーターマークマスクが表示されるマクロブロックが決定されると、フレーム情報及びフレーム内のブロックの位置情報をデータベース蓄積部に蓄積する(S606)。一方、ブロック分析部は、ウォーターマークマスクが表示されるマクロブロックの輝度情報をさらに蓄積することができる。
コンテンツ蓄積部116には、オリジナルコンテンツ、即ち、映像コンテンツと完全に同一のコンテンツが蓄積される(S608)。コンテンツサーバー110によっては、ウォーターマークマスクが後からフレーム上に表示されるという情報がシーケンスヘッダに含まれたコンテンツがコンテンツ蓄積部116に蓄積されることができるが、映像フレーム自体に変形があるわけではないため、本発明では、このような全てのコンテンツをオリジナルコンテンツとして統一して使用する。
フォレンジックウォーターマーク装置120から映像コンテンツが要請され、コンテンツ再生時点でフォレンジックウォーターマーク装置120またはユーザーなどを特定できるクライアントセッションIDが生成された場合は、データベース蓄積部118にクライアントメタデータと共に、該クライアントセッションIDを蓄積する(S610)。
ダウンロード部122は、コンテンツサーバー110から映像コンテンツとウォーターマーク領域情報を受信するS612。ダウンロード部122は、ウォーターマーク領域情報の他に、クライアントセッションID及びオーバーレイ継続期間をさらに受信することができる。
ウォーターマークマスク生成部124は、ダウンロード部122からクライアントセッションID及びウォーターマーク領域情報を受信する。ウォーターマークマスク生成部124は、クライアントセッションIDを使用してウォーターマークマスクを生成し、ウォーターマーク領域情報を用いてマスクフレームのブロックにウォーターマークマスクを提供し、マスクフレームを出力する(S614)。
同期管理部126は、ウォーターマークマスクが映像コンテンツの適切な時点に重なり合うよう、コンテンツフレームとマスクフレームとを同期化させる(S616)。一つのウォーターマークマスクは、1つ以上のフレームにわたって、その上に重なり得る。
オーバーレイ部128は、マスクフレームを、再生されるコンテンツフレーム上に重ね合わせる(S618)。コンテンツオーバーレイ部128で重ねられた映像の一例が図5に示されている。オーバーレイ部128は、必要で応じて、コンテンツフレームの色相及び濃度などを考慮し、マスクフレームの濃度などを変えてマスクフレームを重ね合わせることができる。
ディスプレー部130は、オーバーレイ部128で重ね合わせられた動画を表示する(S620)。この場合、ディスプレー部130に表示された動画では、肉眼でウォーターマークマスクを認識することができない。
本発明の実施例では、ブロックを分析して選択することを例示として説明したが、場合によっては、固定されたブロックを選択して利用することもできる。
以上、説明した本発明の実施例は、本発明の技術思想を例示的に示したものに過ぎず、本発明の保護範囲は、以下の特許請求範囲によって解すべきである。また、本発明の属する技術分野で通常の知識を有する者であれば、本発明の本質的な特性を逸脱することなく様々な変更や修正を加えることがき、本発明と同等の範囲内にある全ての技術思想は、本発明の権利範囲に含まれるものと解すべきである。
以下に、出願当初の特許請求の範囲に記載の事項を、そのまま、付記しておく。
[C1]
映像コンテンツからウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積部に蓄積するコンテンツサーバーと通信することができるフォレンジックウォーターマーク装置であって、
前記コンテンツサーバーに、再生したい前記映像コンテンツを要請し、前記コンテンツサーバーから前記映像コンテンツ及び前記ウォーターマーク領域情報を受信するダウンロード部と、
前記ダウンロード部から入力された前記ウォーターマーク領域情報を利用し、前記ウォーターマークマスクを出力するウォーターマークマスク生成部と、
前記ダウンロード部から入力された前記映像コンテンツの前記ウォーターマークマスク領域に、前記ウォーターマークマスク生成部から入力された前記ウォーターマークマスクを重ね合わせるオーバーレイ部と、を含むことを特徴とするフォレンジックウォーターマーク装置。
[C2]
前記ダウンロード部は、前記コンテンツサーバーからクライアントセッションIDをさらに受信し、
前記ウォーターマークマスク生成部は、前記ダウンロード部から入力された前記クライアントセッションIDを利用し、前記ウォーターマークマスクを生成して出力することを特徴とする、C1に記載のフォレンジックウォーターマーク装置。
[C3]
前記ウォーターマークマスク生成部は、前記ウォーターマークマスクを含むマスクフレームを生成し、
前記オーバーレイ部は、前記ダウンロード部から入力された前記映像コンテンツのうち、前記ウォーターマークマスク領域を含む映像フレーム上に、前記ウォーターマークマスク生成部から入力された前記マスクフレームを重ね合わせることを特徴とする、C2に記載のフォレンジックウォーターマーク装置。
[C4]
前記マスクフレームは、背景と前景とに区分し、非可視性のために、透明の程度を示すアルファ値を前記背景と前記前景とにそれぞれ異ならせて付与することを特徴とする、C3に記載のフォレンジックウォーターマーク装置。
[C5]
前記ウォーターマークマスク生成部は、前記ウォーターマーク領域情報から輝度値を抽出し、前記輝度値が所定の臨界値を基準に暗い値であると、前記背景として暗いアルファ値を選択することを特徴とする、C4に記載のフォレンジックウォーターマーク装置。
[C6]
前記マスクフレームが、前記映像コンテンツのうち、前記ウォーターマークマスク領域を含む映像フレーム上に重なり合うように、前記映像フレームに前記マスクフレームを同期化する同期管理部をさらに含むことを特徴とする、C3に記載のフォレンジックウォーターマーク装置。
[C7]
前記同期管理部は、前記ウォーターマークマスク領域を含む映像フレームに連続する映像フレームに変化がないことを示す重なり継続区間が受信されると、前記オーバーレイ継続区間の間、前記映像フレームに前記マスクフレームを重ね合わせるように、前記映像フレームに前記マスクフレームを同期化することを特徴とする、C6に記載のフォレンジックウォーターマーク装置。
[C8]
前記ウォーターマークマスクと関連し、前記コンテンツサーバーから受信された前記クライアントセッションIDが有効であるか、前記同期管理部が前記オーバーレイ継続期間に基づいて動作しているか、または前記オーバーレイ部の動作が除去され、前記映像コンテンツのみが表示されかをモニタリングする攻撃防御部をさらに含むことを特徴とする、C7に記載のフォレンジックウォーターマーク装置。
[C9]
フォレンジックウォーターマークシステムであって、
映像コンテンツから、ウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積するコンテンツサーバーと、
C1乃至C8のいずれかに記載のフォレンジックウォーターマーク装置とを含み、
前記コンテンツサーバーは、前記ダウンロード部から、再生したい前記映像コンテンツの要請と共にクライアントメタデータを受信すると、前記映像コンテンツのクライアントを特定できる前記クライアントセッションIDを生成して、前記クライアントメタデータと共に前記クライアントセッションIDを前記蓄積部に蓄積することを特徴とする、フォレンジックウォーターマークシステム。
[C10]
前記コンテンツサーバーは、前記映像コンテンツのGOPコンテンツのうち、所定のフレームのブロックを分析して、前記ウォーターマークマスクを表示するブロックに対する位置情報を前記ウォーターマーク領域情報として蓄積することを特徴とする、C9に記載のフォレンジックウォーターマークシステム。
[C11]
映像コンテンツからウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積部に蓄積するコンテンツサーバーと通信できるフォレンジックウォーターマーク装置によって行われるフォレンジックウォーターマーク方法であって、
前記コンテンツサーバーに、再生したい前記映像コンテンツを要請し、前記コンテンツサーバーから前記映像コンテンツ及び前記ウォーターマーク領域情報を受信する段階と、
前記受信する段階で受信した前記ウォーターマーク領域情報を用いて、前記ウォーターマークマスクを出力する段階と、
前記受信する段階で受信された前記映像コンテンツの前記ウォーターマークマスク領域に、前記出力する段階で出力された前記ウォーターマークマスクを重ね合わせる段階と、を含むことを特徴とするフォレンジックウォーターマーク方法。
[C12]
前記受信する段階は、前記コンテンツサーバーからクライアントセッションIDをさらに受信して、
前記出力する段階は、前記受信する段階で受信された前記クライアントセッションIDを利用し、前記ウォーターマークマスクを生成して出力することを特徴とする、C11に記載のフォレンジックウォーターマーク方法。
[C13]
前記生成する段階は、前記ウォーターマークマスクを含むマスクフレームを生成することを含み、
前記重ね合わせる段階は、前記マスクフレームを、前記映像コンテンツのうち、前記ウォーターマークマスク領域を含む映像フレームに同期化させることにより、前記映像フレーム上に、前記生成する段階で生成した前記マスクフレームを重ね合わせることを特徴とする、C11または12に記載のフォレンジックウォーターマーク方法。
[C14]
前記ウォーターマークマスクと関連し、前記コンテンツサーバーから受信した前記クライアントセッションIDが有効であるか、または前記重ね合わせる段階の動作が除去され、前記映像コンテンツのみが表示されるかをモニタリングする段階をさらに含めることを特徴とする、C13に記載のフォレンジックウォーターマーク方法。

Claims (10)

  1. 映像コンテンツからウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積部に蓄積するコンテンツサーバーと通信することができるフォレンジックウォーターマーク装置であって、
    前記コンテンツサーバーに、再生したい前記映像コンテンツを要請し、前記コンテンツサーバーから前記映像コンテンツ及び前記ウォーターマーク領域情報を受信するダウンロード部と、
    前記ダウンロード部から入力された前記ウォーターマーク領域情報を利用し、前記ウォーターマークマスクを出力するウォーターマークマスク生成部と、
    前記ダウンロード部から入力された前記映像コンテンツの前記ウォーターマークマスク領域に、前記ウォーターマークマスク生成部から入力された前記ウォーターマークマスクを重ね合わせるオーバーレイ部と、を含み、
    前記ウォーターマークマスク生成部は、前記ウォーターマークマスクを含むマスクフレームをさらに生成し、
    前記オーバーレイ部は、前記ダウンロード部から入力された前記映像コンテンツのうち、前記ウォーターマークマスク領域を含む映像フレーム上に、前記マスクフレームを重ね合わせ、
    前記マスクフレームは、背景と前景とに区分し、非可視性のために、透明の程度を示すアルファ値を前記背景と前記前景とにそれぞれ異ならせて付与することを特徴とするフォレンジックウォーターマーク装置。
  2. 前記ダウンロード部は、前記コンテンツサーバーからクライアントセッションIDをさらに受信し、
    前記ウォーターマークマスク生成部は、前記ダウンロード部から入力された前記クライアントセッションIDを利用し、前記ウォーターマークマスクを生成して出力することを特徴とする、請求項1に記載のフォレンジックウォーターマーク装置。
  3. 前記マスクフレームが、前記映像コンテンツのうち、前記ウォーターマークマスク領域を含む映像フレーム上に重なり合うように、前記映像フレームに前記マスクフレームを同期化する同期管理部をさらに含むことを特徴とする、請求項に記載のフォレンジックウォーターマーク装置。
  4. 前記同期管理部は、前記ウォーターマークマスク領域を含む映像フレームに連続する映像フレームに変化がないことを示す重なり継続区間が受信されると、前記重なり継続区間の間、前記映像フレームに前記マスクフレームを重ね合わせるように、前記映像フレームに前記マスクフレームを同期化することを特徴とする、請求項に記載のフォレンジックウォーターマーク装置。
  5. 前記ウォーターマークマスクと関連し、前記コンテンツサーバーから受信されたクライアントセッションIDが有効であるか、前記同期管理部が前記重なり継続区間に基づいて動作しているか、または前記オーバーレイ部の動作が除去され、前記映像コンテンツのみが表示されかをモニタリングする攻撃防御部をさらに含むことを特徴とする、請求項に記載のフォレンジックウォーターマーク装置。
  6. フォレンジックウォーターマークシステムであって、
    映像コンテンツから、ウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積するコンテンツサーバーと、
    請求項1に記載のフォレンジックウォーターマーク装置とを含み、
    前記コンテンツサーバーは、前記ダウンロード部から、再生したい前記映像コンテンツの要請と共にクライアントメタデータを受信すると、前記映像コンテンツのクライアントを特定できるクライアントセッションIDを生成して、前記クライアントメタデータと共に前記クライアントセッションIDを前記蓄積部に蓄積することを特徴とする、フォレンジックウォーターマークシステム。
  7. 前記コンテンツサーバーは、前記映像コンテンツのGOPコンテンツのうち、所定のフレームのブロックを分析して、前記ウォーターマークマスクを表示するブロックに対する位置情報を前記ウォーターマーク領域情報として蓄積することを特徴とする、請求項に記載のフォレンジックウォーターマークシステム。
  8. 映像コンテンツからウォーターマークマスクを表示するウォーターマークマスク領域を選定し、前記ウォーターマークマスク領域に対するウォーターマーク領域情報を蓄積部に蓄積するコンテンツサーバーと通信できるフォレンジックウォーターマーク装置によって行われるフォレンジックウォーターマーク方法であって、
    前記コンテンツサーバーに、再生したい前記映像コンテンツを要請し、前記コンテンツサーバーから前記映像コンテンツ及び前記ウォーターマーク領域情報を受信する段階と、
    前記受信する段階で受信した前記ウォーターマーク領域情報を用いて、前記ウォーターマークマスクを出力する段階と、
    前記受信する段階で受信された前記映像コンテンツの前記ウォーターマークマスク領域に、前記出力する段階で出力された前記ウォーターマークマスクを重ね合わせる段階と、を含み、
    前記出力する段階は、前記ウォーターマークマスクを含むマスクフレームを生成することを含み、
    前記重ね合わせる段階は、前記マスクフレームを、前記映像コンテンツのうち、前記ウォーターマークマスク領域を含む映像フレームに同期化させることにより、前記映像フレーム上に、前記マスクフレームを重ね合わせ、
    前記マスクフレームは、背景と前景とに区分し、非可視性のために、透明の程度を示すアルファ値を前記背景と前記前景とにそれぞれ異ならせて付与することを特徴とするフォレンジックウォーターマーク方法。
  9. 前記受信する段階は、前記コンテンツサーバーからクライアントセッションIDをさらに受信して、
    前記出力する段階は、前記受信する段階で受信された前記クライアントセッションIDを利用し、前記ウォーターマークマスクを生成して出力することを特徴とする、請求項に記載のフォレンジックウォーターマーク方法。
  10. 前記ウォーターマークマスクと関連し、前記コンテンツサーバーから受信した前記クライアントセッションIDが有効であるか、または前記重ね合わせる段階の動作が除去され、前記映像コンテンツのみが表示されるかをモニタリングする段階をさらに含めることを特徴とする、請求項に記載のフォレンジックウォーターマーク方法。
JP2021571406A 2019-11-22 2020-11-12 クライアント側フォレンジックウォーターマーク装置、システム及び方法 Active JP7362154B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020190151243A KR102265784B1 (ko) 2019-11-22 2019-11-22 클라이언트측 포렌식 워터마크 장치, 시스템 및 방법
KR10-2019-0151243 2019-11-22
PCT/KR2020/015908 WO2021101170A1 (ko) 2019-11-22 2020-11-12 클라이언트측 포렌식 워터마크 장치, 시스템 및 방법

Publications (2)

Publication Number Publication Date
JP2022534620A JP2022534620A (ja) 2022-08-02
JP7362154B2 true JP7362154B2 (ja) 2023-10-17

Family

ID=75980019

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021571406A Active JP7362154B2 (ja) 2019-11-22 2020-11-12 クライアント側フォレンジックウォーターマーク装置、システム及び方法

Country Status (6)

Country Link
US (1) US11812118B2 (ja)
EP (1) EP4064716A4 (ja)
JP (1) JP7362154B2 (ja)
KR (1) KR102265784B1 (ja)
CN (1) CN113940090B (ja)
WO (1) WO2021101170A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116095425A (zh) * 2022-12-14 2023-05-09 杭州熙羚信息技术有限公司 基于水印的边界视频溯源方法、装置、设备及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016522435A (ja) 2013-04-26 2016-07-28 ナグラビジョン エス アー 少なくとも1つのコンテンツキーによって暗号化された圧縮コンテンツに透かしを入れる方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7644282B2 (en) * 1998-05-28 2010-01-05 Verance Corporation Pre-processed information embedding system
US6430301B1 (en) * 2000-08-30 2002-08-06 Verance Corporation Formation and analysis of signals with common and transaction watermarks
US7392392B2 (en) * 2001-12-13 2008-06-24 Digimarc Corporation Forensic digital watermarking with variable orientation and protocols
US7392394B2 (en) * 2001-12-13 2008-06-24 Digimarc Corporation Digital watermarking with variable orientation and protocols
KR100522049B1 (ko) * 2003-11-14 2005-10-18 한국전자통신연구원 프레임 평균을 이용한 실시간 비디오 워터마크 삽입 및추출 방법
US8020004B2 (en) * 2005-07-01 2011-09-13 Verance Corporation Forensic marking using a common customization function
CN101223550A (zh) * 2005-07-14 2008-07-16 皇家飞利浦电子股份有限公司 用于嵌入数据的方法
US8259938B2 (en) * 2008-06-24 2012-09-04 Verance Corporation Efficient and secure forensic marking in compressed
KR101529082B1 (ko) * 2008-12-01 2015-06-17 주식회사 케이티 분할된 추적 정보를 이용한 워터마킹 장치 및 방법
KR101193534B1 (ko) * 2009-07-17 2012-10-22 주식회사 케이티 비디오 콘텐츠에 워터마크를 삽입하는 워터마킹 장치 및 방법
JP5108916B2 (ja) * 2010-05-28 2012-12-26 ヤフー株式会社 コンテンツ送信システム、コンテンツ送信方法及びプログラム
US8886945B2 (en) 2010-12-17 2014-11-11 Motorola Mobility Llc System and method for conveying session information for use in forensic watermarking
CN102567939A (zh) * 2010-12-27 2012-07-11 北大方正集团有限公司 一种图像中可见水印的分离方法及装置
US8165343B1 (en) * 2011-09-28 2012-04-24 Unicorn Media, Inc. Forensic watermarking
US9292897B2 (en) * 2012-10-05 2016-03-22 Mobitv, Inc. Watermarking of images
WO2014153199A1 (en) * 2013-03-14 2014-09-25 Verance Corporation Transactional video marking system
EP2989806A1 (en) * 2013-04-25 2016-03-02 Verance Corporation Real-time anti-piracy for broadcast streams
CN103366332B (zh) * 2013-06-18 2015-11-25 河海大学 一种基于深度信息的图像水印方法
US9742783B2 (en) * 2015-05-29 2017-08-22 Markany Inc. Method for sending contents including tracking information and apparatus thereof, and method for receiving content including tracking information and apparatus thereof
US10939163B2 (en) 2015-11-12 2021-03-02 Nagravision S.A. Method for watermarking encrypted digital content, method and device for retrieving a unique identifier from watermarked content and content distribution network
IL251149A0 (en) * 2017-03-14 2017-06-29 Google Inc Semi-transparent marks for transferred content
US10698988B2 (en) * 2017-03-30 2020-06-30 Cisco Technology, Inc. Difference attack protection
US10887362B2 (en) * 2017-04-10 2021-01-05 Box, Inc. Forensic watermarking of shared video content
CN108055493B (zh) * 2017-12-13 2020-06-30 苏州科达科技股份有限公司 在视频图像中嵌入水印的方法及装置
CN110287658A (zh) * 2019-06-20 2019-09-27 南京大学 一种基于DirectX的数字水印生成方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016522435A (ja) 2013-04-26 2016-07-28 ナグラビジョン エス アー 少なくとも1つのコンテンツキーによって暗号化された圧縮コンテンツに透かしを入れる方法

Also Published As

Publication number Publication date
EP4064716A4 (en) 2023-12-27
WO2021101170A1 (ko) 2021-05-27
KR102265784B9 (ko) 2023-02-08
US11812118B2 (en) 2023-11-07
JP2022534620A (ja) 2022-08-02
US20220239993A1 (en) 2022-07-28
CN113940090B (zh) 2023-08-01
KR102265784B1 (ko) 2021-06-17
EP4064716A1 (en) 2022-09-28
KR20210062956A (ko) 2021-06-01
CN113940090A (zh) 2022-01-14

Similar Documents

Publication Publication Date Title
CN108831511B (zh) 用于使用场景稳定元数据的系统、方法、设备和存储介质
CN109219844B (zh) 在视频优先级与图形优先级之间转换
RU2468401C2 (ru) Окружающее освещение
Meng et al. Embedding visible video watermarks in the compressed domain
US10720091B2 (en) Content mastering with an energy-preserving bloom operator during playback of high dynamic range video
US20080168512A1 (en) System and Method to Implement Interactive Video Streaming
EP1871100A2 (en) Adaptive video processing using sub-frame metadata
US9292897B2 (en) Watermarking of images
WO2001089221A1 (en) Multiple camera video system which displays selected images
JPH11355736A (ja) 画像処理装置、画像処理方法及びコンピュ―タ読み取り可能な記憶媒体
JP2006254366A (ja) 画像処理装置、カメラシステム、ビデオシステム、ネットワークデータシステム、並びに、画像処理方法
JP2006516862A (ja) ビデオ信号を結合して1つの包括的なビデオ信号を生成する方法と装置
KR101269900B1 (ko) 다중 영상 기반의 모션 제어 카메라 효과 구현 방법 및 장치
JP7362154B2 (ja) クライアント側フォレンジックウォーターマーク装置、システム及び方法
Pan et al. HDR video quality assessment: Perceptual evaluation of compressed HDR video
KR102289397B1 (ko) 적시의 포렌식 워터마크 임베딩 장치 및 방법
CN112262570A (zh) 将高分辨率视频流自动实时帧分割成组成特征并修改各个帧中的特征以同时创建来自相同的视频源的多个不同线性视图的方法和系统
KR20140146592A (ko) 컬러 그레이딩 미리 보기 방법 및 장치
JP2021508990A (ja) コンテンツスキャン適応メタデータを用いた光レベル管理
CN111787397B (zh) 一种基于d3d同一画布渲染多路视频的方法
KR101473648B1 (ko) 배경 스크린 없는 실시간 크로마키 영상 합성 방법 및 시스템
CN108924575B (zh) 一种视频解码分析方法、装置、设备及介质
CN114762353A (zh) 实时播放由多个摄像头输入的虚拟现实影像的装置及方法
CN111179317A (zh) 互动教学系统及方法
KR102337699B1 (ko) 영상 처리 장치 및 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211130

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221227

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20230106

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230522

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230829

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230927

R150 Certificate of patent or registration of utility model

Ref document number: 7362154

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150