TWI486903B - 代表數位內容之碼式資料位元流及在其內插入水印輔助資料之方法 - Google Patents

代表數位內容之碼式資料位元流及在其內插入水印輔助資料之方法 Download PDF

Info

Publication number
TWI486903B
TWI486903B TW099114587A TW99114587A TWI486903B TW I486903 B TWI486903 B TW I486903B TW 099114587 A TW099114587 A TW 099114587A TW 99114587 A TW99114587 A TW 99114587A TW I486903 B TWI486903 B TW I486903B
Authority
TW
Taiwan
Prior art keywords
data
code
replaced
watermark
bit stream
Prior art date
Application number
TW099114587A
Other languages
English (en)
Other versions
TW201104618A (en
Inventor
Marie-Jean Colaitis
Pascal Marie
Original Assignee
Thomson Licensing
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=41509016&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=TWI486903(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Thomson Licensing filed Critical Thomson Licensing
Publication of TW201104618A publication Critical patent/TW201104618A/zh
Application granted granted Critical
Publication of TWI486903B publication Critical patent/TWI486903B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/913—Television signal processing therefor for scrambling ; for copy protection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

代表數位內容之碼式資料位元流及在其內插入水印輔助資料之方法
本發明係關於寫碼之技術界域。具體而言，本發明係關於在碼式資料位元流內插入水印輔助資料之方法，使用插入之水印輔助資料對碼式資料位元流加水印之方法，以及實施加水印方法之裝置。又關於碼式資料位元流，包括利用插入方法所插入之水印輔助資料。
為保護數位內容(例如影音或3D資料等)，已知插入獨特水印，在分配之各連流內興起數位碼的形式，以識別人員或團體已授權傳輸未授權之內容。舉例而言，在影片促銷之際，借助不同水印加上水印記號的DVD，發送到選擇過的人員。若有洩漏，可重構水印，以識別洩漏來源。可有其他應用：插入水印，可以識別作業或受益人，或經由水印傳輸補助資料(元資料)。
為此，已知可利用消費者設備，進行影訊加水印，把代表影像/一序列形象之碼式資料位元流，加以個人化。「個人化」之達成是藉插入數位碼，代表例如「使用者識別證」，以及可能在碼式資料位元流內之時戳，甚至其他種類之資訊(像著作權)。其次在文件中，「水印」、「數位碼」和「使用者識別證」可互用，以指明插入碼式資料位元流內之數位碼。為降低消費者設備進行此類個人化所需之計算電力，已知使用「取代水印」技術，以水印輔助資料，諸如水印取代映圖(稱為WSM)加以「輔助」。此項協助式取代技術，實施加水印過程分成三步驟。
第一步驟發生在播音器磁頭端，在此發生水印輔助資料，是使用形象序列，或更一般而言，為要被廣播的數位內容。然後，在第二步驟當中，該水印輔助資料即內嵌於碼式資料位元流內，並傳輸至消費者側，於此發生第三步驟。於第三步驟之際，在消費者設備內使用水印輔助資料，藉插入水印，協助所接受碼式資料位元流之個人化。第一步驟之目的，在於確保取代不會敗壞碼式資料位元流；確保消費者在重構形象序列看/聽不到水印，即個人化；並確保水印充分牢固到耐受若干相關攻擊。所以，第一步驟包括在碼式資料位元流內識別要被取代的資料，並決定取代資料。又保證牢固性和逼真性二者。水印輔助資料是由此第一步驟所致。
於此第二步驟當中，水印輔助資料再內嵌於碼式資料位元流內，待傳輸至消費者設備。由先前技術已知使用MPEG2-TS私人或使用者資料(TS代表“Transport Stream”)，內嵌水印輔助資料。MPEG2-TS輸送層，在ITU T Rec. H.222.0|ISO/IEC 13818 1(第2版,2000)題為〈資訊科技─活動形象和關聯聲音之概括寫碼：系統〉之文件內有界定。
於第三步驟當中，是利用消費者設備在壓縮界域內，施以個人化加水印。誠然，水印是直接「插入」碼式資料位元流內。此項插入係在碼式資料位元流內，根據內嵌式水印輔助資料所含資訊，若干碼式資訊以若干其他稱為取代資料更換(取代)為之。把水印插入壓縮界域內，可兼保護位元流本身，以及由碼式資料位元流解碼所得之基帶內容。誠然，在解壓縮之際，水印傳播至基帶內容。
此項解決方案的第一項缺點是，MPEG2-TS私人或使用者資料容易除掉，致使解決方案較不耐攻擊。其次，MPEG2-TS私人和使用者資料未經編密碼，因而需要特殊之額外編密碼機制。此外，MPEG2-TS封包為私人資料部署的部份，尺寸有限，而限制了水印輔助資料之尺寸。此外，水印輔助資料與形象序列之使用者資料同步化，並非率直。誠然，使用者資料蒴包於MPEG2-TS封包內，與視訊之蒴包不同，故要求諸封包要同步化。最後，WSM按先前技術所界定，不能提供對諸應用要求之適用性。
本發明旨在消弭先前技術之至少一缺點。為此，本發明係關於在碼式資料位元流內插入水印輔助資料之方法。此方法包括步驟為，在碼式資料位元流內插入識別資料，以識別要被取代之碼式資料，且對要被取代之各碼式資料，插入至少一取代資料。此方法又包括步驟為，在碼式資料位元流內插入格式資料，界定以取代資料取代要被取代的碼式資料之方式。格式資料提供適用性，可最配合諸應用要件。
按照特殊具體例，此方法又包括步驟為，在碼式資料內，為要被取代之各碼式資料，插入核對資料。
按照特殊之特徵，核對資料是循環冗贅核對，由要被取代的碼式資料計算。
按照變化例，核對資料是要被取代的碼式資料。
按照特殊之特徵，識別資料是絕對位址，識別要被取代的碼式資料初始。
按照碼式資料位元流蒴包於輸送封包內時所用變化例，識別資料包括識別輸送封包用之資料，包括要被取代之碼式資料，以及相對於輸送封包初始之偏差值，識別要被取代的碼式資料初始。
按照特殊之特徵，識別資料、取代碼式資料和格式資料，係以補充增進資訊訊息的形式，插入碼式資料位元流內。
本發明又關於碼式資料位元流，包括：
─識別資料，識別要被取代之碼式資料；
─至少一取代資料，供要被取代之各碼式資料；
─格式資料，界定以取代資料取代要被取代的碼式資料之方式。
此外，本發明擬議利用水印對碼式資料位元流加水印之方法，包括如下步驟：
─從碼式資料位元流，決定識別資料，識別要被取代的碼式資料；至少一取代資料，為要被取代的各碼式資料；和格式資料，界定利用取代資料取代要被取代的碼式資料之方式；
─以識別資料識別要被取代之碼式資料；
─基於格式資料和加水印資料，利用一取代碼式資料取代要被取代的各碼式資料，而對碼式資料流加水印。
本發明又關於一種裝置，包括：
─輸入，接受代表數位內容的碼式資料位元流；
─加水印模組，基於與裝置關聯之識別符，把碼式資料位元流加水印，進入已加水印的位元流內；
─解碼模組，從加水印位元流重構加水印之數位內容；
─第一輸出，供傳輸加水印之位元流；
─第二輸出，供傳輸加水印之數位內容。
裝置之加水印模組包括：
─決定單位，從碼式資料位元流，決定識別資料，識別要被取代之碼式資料；至少一取代資料，供要被取代之各碼式資料；和格式資料，界定利用取代資料取代要被取代的碼式資料之方式；
─識別單位，以識別資料識別要被取代之碼式資料；
─加水印單位，基於格式資料和加水印資料，利用一取代碼式資料取代要被取代之碼式資料，對碼式資料流加水印。
本發明其他特點和優點，會出現在如下參考附圖所示若干具體例之說明中。
本發明係關於水印輔助資料(諸如WSM)插入碼式資料位元流內。為簡明起見，以下把碼式資料位元流視為代表形象序列。惟碼式資料位元流可代表任何種類的數位內容，諸如聲訊或3D資料。一般而言，序列形象當做碼式資料之寫碼，包括從先前寫碼的形象之形象資料預估形象資料(時間性預估)，和從同樣先前寫碼的形象之形象資料預估(空間性預估)。從原先資料減去預估資料算出之剩餘資料一般(例如使用分立餘弦轉換式或近似)加以轉換，和量化。量化資料最後使用例如VLC(「可變長度碼」之縮寫)表，經熵寫碼成碼式資料位元流。舉例而言，序列可依照2005年12月15日出版的ISO/IEC 14496-10第二版題《資訊科技─視聽客體之寫碼─第10章進階影視寫碼》文件內所述MPEG-4 AVC/H.264標準編碼。按照變化例，形象序列是依ITU-T題〈叢書H：視聽和多媒體系統─視聽服務的基礎設施─活動視訊之寫碼─低位元率通訊用的視訊寫碼〉推荐文內所述H.263標準寫碼。按照另一變化例，形象序列是依2000年12月15日出版的ISO/IEC 13818-2文件題《資訊科技─活動圖像及關聯聲訊資訊之概括寫碼：視訊》所述MPEG-2標準寫碼。本發明既不受標準也不受數位內容型式之限制。
按照本發明，水印輔助資料有若干條目，各條目包括：
─至少一識別資料，在碼式資料位元流內，識別要被取代之碼式資料；和
─至少一取代資料。
例如，識別資料界定為：從碼式資料位元流初始，到要被取代的碼式資料初始(例如第一位元或位元組)之偏差值。
按照變化例，識別資料界定為：從形象初始到要被取代的碼式資料初始之偏差值。
按照變化例，若水印輔助資料蒴包於輸送封包內，諸如MPEG-2 TS封包，則偏差值包括二部份：
─參照封包，包括要被取代的碼式資料之第一資料(例如第一位元或位元組)；
─從此封包初始至要被取代的碼式資料第一資料之偏差值。
例如，在碼式資料位元流內每“n”個形象，即識別要被取代的“m”碼式資料，其m和n係整數，諸如16和1。按照變化例，要被取代之該碼式資料，係按照2008年10月2日公告的國際專利申請案WO 2008/118145所揭示方法識別。
舉例而言，取代資料是按照2008年10月2日公告的WO 2008/118145號文件所載方法決定。
參見第1圖說明本發明水印輔助資料插入碼式資料位元流F內之方法第一具體例。碼式資料位元流以下視為代表形象序列，亦可代表任何種類的數位內容，諸如聲訊或3D資料。
在步驟12，於碼式資料位元流內，插入至少一識別資料，以識別要被取代之碼式資料，和至少一取代資料。識別資料和取代資料可由碼式資料位元流計算，或由查索表提供。
在步驟14，於碼式資料位元流F內插入格式資料，界定利用取代資料取代要被取代的碼式資料之方式。
格式資料可由外部機構，諸如使用者界面提供，做為參數。如此格式資料可視應用加以固定，亦可動態變化。選擇格式資料在若干層面之間衡量：
─壓縮計劃，已用來產生碼式資料位元流F，及其得以取代之能力；
─壓縮計劃的碼式資料位元流語法；
─每形象需要有應用取代數；
─位元率，可部署於水印輔助資料額外酬載，利用某些特殊格式減到最小；
─需避免壓縮錯誤；
─為水印目標的攻擊牢固性；
─要被內嵌的數位碼實際大小；
─逾時重複率，等等。
格式資料具有彈性，可最佳配合諸項應用。因此，可衍生許多變化例。
舉例而言，格式資料界定取代資料數，界定是否取代受到錯誤核對。視碼式資料位元流內編碼之格式資料，可將若干額外資料編碼，諸如核對資料。
例如，按照第一取代格式(格式1)，在步驟12插入二取代資料。在消費者設備內，使用取代資料之一D1，代替要被取代的碼式資料，把‘0’嵌入碼式資料位元流內，而第二取代資料D2，用來代替要被取代的碼式資料，把‘1，嵌入碼式資料位元流內。此情況即第2圖左側所示。
按照第二取代格式(格式2)，在步驟12插入單一取代資料。在消費者設備內，使用單一取代資料D1，替代要被取代的碼式資料，把‘0’嵌入碼式資料位元流內，而要被取代的碼式資料被本身取代(即未達成取代)，把‘1’嵌入碼式資料位元流內。按照變化例，使用單一取代資料，把‘1’嵌入要被取代的碼式資料，而要被取代的碼式資料被本身取代(即未達成取代)，把‘0’嵌入碼式資料位元流內。此情況即第2圖右側所示。
按照第一和第二取代格式之變化例，在步驟12插入核對資料。此情況如第3圖所示。核對資料係例如要被取代的碼式資料，或由要被取代的碼式資料算出之CRC(代表「循環冗贅核對」)。舉例而言，核對資料是要被取代的碼式資料全部位元組的XOR(邏輯運算，稱為「互斥式」exclusiveor)。若核對資料是要被取代的碼式資料，則在消費者設備內，把核對資料與所接到的要被取代碼式資料，加以比較。若二資料相配，則發生取代，否則未有取代，可能報出錯誤。若核對資料為CRC，則核對資料與基於所接到要被取代的碼式資料所局部計算之CRC，進行比較。若二資料相等，則發生取代，否則未有取代。誠然，如果在傳輸之際，在消費者設備所接到碼式資料位元流內，要被取代的碼式資料有些改變，即未有取代。此等改變可能由於形象轉變、轉碼…，使用比插入要被取代的碼式資料所需位元數更少之位元，有益於插入CRC。
按照第4圖所示另一變化例，在步驟12可插入二取代資料以上。各取代資料代表要內嵌的資料。在此情況下，每次可嵌入一位元以上。如第4圖所示實施例，在步驟12插入四取代資料。取代資料之一用來在碼式資料位元流內嵌入‘00’，第二取代資料用來在碼式資料位元流內嵌入‘11’，第三取代資料用來在碼式資料位元流內嵌入‘01’，而第四取代資料用來在碼式資料位元流內嵌入‘10’。此變化例可在與核對資料組合中使用。
第二具體例係在H.264/MPEG4 AVC寫碼標準架構內，使用SEI訊息(SEI代表「補充增進資訊」)，就第1圖加以說明。此等SEI訊息是以2005年12月15日出版的ISO/IEC 1446附錄D內題為《資訊科技─視聽客體之寫碼─第10章：進階視訊寫碼》加以界定。在H.264內界定之SEI訊息，並非全部限於此標準，此等訊息可按未來標準使用。亦可按H.263等較早標準使用。H.263在H.263的補充增進資訊(SEI)文件內界定(見ITU-T推荐的附錄L和W，題為〈叢書H：視聽和多媒體系統─視聽服務的基礎設施─活動視訊之寫碼─低位元率通訊用的視訊寫碼〉)，含有許多特點，可增進解碼形象資料之利用，不需改變解碼過程。
標準界定的語法是，碼式資料之任何位元流必須符合可與此標準相容。語法特別界定諸項資訊如何寫碼(例如序列、運動向量等內所含形象相關資料)。按照H.264諸項使用CABAC(英文「文脈為本之適應應二元數學寫碼」之縮寫)熵寫碼。須知如果解碼設備不擁有其使用上必要之功能性，此SEI即可忽視。有益的是，第二具體例可傳輸水印輔助資料，不需修改標準。
在步驟12，使用SEI訊息，把至少一識別資料和至少一取代資料，插入碼式資料位元流F內。
在步驟14，使用SEI訊息，把格式資料插入碼式資料位元流F內。
為此目的，界定新的SEI訊息，稱為WSM SEI訊息，把水印輔助資料蒴包。新語法在下表中以矩陣顯示，呈擬似碼的形式，與ISO/IEC 14496-10文件內之手法相同。具體而言，運算子'=='意指「等於」，而‘!=’表示「不等於」。運算子'!'是「不」的邏輯運算子。SEI訊息使用「未暫存資料」SEI酬載型(SEI_payloadType等於5)，並參照ISO/IEC 14496-10之7.3.2.3.1節，界定如下：
其中：
-f(n)是固定式形態位元串列，使用n位元，以左位元先書寫(由左到右)；
-u(n)是使用n位元的不帶號整數；
-b(8)是具有任何形態位元串列(8位元)之位元組；
-b(v)是可變長度位元場；而
-next_bits(n)提供碼式資料位元流內之次一位元，以供比較，不推進位元流指點器。故在碼式資料位元流內可供注意次一n位元，n係其引數。
ff_byte 是位元組，等於0xFF，識別需要其內所用語法結構之較長表示法。
user_data_unregistered_payload_type_byte 是酬載型WSM SEI訊息。例如，MPEG-4 AVC user_data_unregistered_payload_type_byte等於0x05。
last_payload_size_byte 是SEI訊息尺寸之最後位元組。此型SEI訊息在ISO/IEC 14496-10之7.3.2.3.1節內進一步界定。
WSM_user_data_unregistered() 界定如下：
uuid_iso_iec_11578 應有數值，按照ISO/IEC 11578：1996附錄A文件內界定的程序，特定為UUID(UUID代表通用獨特識別符Universal Unique IDentifier)。使用IETF RFC 4122所發生此等UUID之一例為1dfa52e0_ef8b_11dd-ba2f-0800200c9a66。
含有與水印輔助資料有關資訊的WSM_poyload之語法，按照下述方式界定：
串列或CABAC串列界定為位元之接續。所以，以下「串列」字組指碼式資料位元流內會被取代的連續位元之一片。
WSM_FormatType 是位元組，用來界定取代要進行之方式，所以把水印輔助資料條目格式化。以下格式化界定為例：
FT0：條目空白，無報導錯誤；
FT1：只擬議一取代值WSM_OtherValue 以嵌入“1”，而現時值WSM_CurrentValue 用來嵌入“0”。現時值WSM_CurrentValue 是CABAC編碼位元組，可能必須要取代。現時值(WSM_CurrentValue )亦做為核對資料傳輸，有助於提高個人化過程之牢固。
FT2：擬議二取代值WSM_ZeroValue ，會嵌入“0”，而WSM_OneValue 會嵌入“1”。現時值(WSM_CurrentValue )亦做為核對資料傳輸，有助於提高個人化過程之牢固。
FT3：同FT1，惟WSM_CurrentValue 串列改為簡單的1-位元組，以節省位元率。此WSM_CurrentValueCRC 可在消費者裝置內用做核對資料，使個人化過程更牢固。
FT4：同FT2，惟WSM_CurrentValue 串列改為簡單的1-位元組，以節省位元率。此WSM_CurrentValueCRC 可在消費者裝置內用做核對資料，使個人化過程更牢固。
FT5：同FT1，惟WSM_StringOffset 分裂成二副場：封包位址(WSM_PacketOffset )和所指點封包內之位元組位址(WSM_StringRelativeOffset )。
FT6：同FT2，惟WSM_StringOffset 分裂成二副場：封包位址(WSM_PacketOffset )和所指點封包內之位元組位址(WSM_StringRelativeOffset )。
FT7：同FT3，惟WSM_StringOffset 分裂成二副場：封包位址(WSM_PacketOffset )和所指點封包內之位元組位址(WSM_StringRelativeOffset )。
FT8：同FT4，惟WSM_StringOffset 分裂成二副場：封包位址(WSM_PacketOffset )和所指點封包內之位元組位址(WSM_StringRelativeOffset )。
其他：保存未來使用。會列出錯誤。
舉例而言，FT0=0x00,FT1=0x01,FT2=0x02,FT3=0x03,FT4=0x04,FT5=0x05,FT6=0x06,FT7=0x07，而FT8=0x08。當然，其他數值亦可用。
以格式FT1至FT8情況而言，核對資料也是在步驟12編碼於位元流內，使個人化過程更牢固。在消費者設備內，在取代WSM_StringOffset所指點位元組的CABAC串列之前，此CABAC串列是與WSM_CurrentValue比較。若不相配，即不發生取代，可能列出錯誤。按照變化例，CRC是由WSM_StringOffset所指點位元組的CABAC串列局部算出，並與WSM_CurrentValueCRC比較。若不相配，不發生取代，可能會列報錯誤。會引進更多的WSM_FormatType， 使更多位元(例如以8取代4)，寫碼WSM_NumberOfEntries ，並使WSM_StringLength 有24位元位址(或WSM_PacketOffset 有16位元)。
做為第一實施例，界定新格式型WSM_FormatType==FT9等於FT2(即除WSM_CurrentValue外，有二取代值)。FT9格式型與FT2不同，即WSM_NumberOfEntries寫碼於8位元(代替4)，而WSM_StringLength寫碼於24位元(代替4)。可處置更多存取單位。如此格式充分適於高位元率寫碼。
做為第二實施例，界定另一格式FTn，n係不同於業已使用的正整數。按照此格式，所有取代條目有同樣的串列長度。所以，為把水印輔助資料酬載尺寸減到最小，使WSM_StringLength[i]可以全部條目共用，因而從“for(i=0；iWSM_NumberOfEntries；i++)”環路除去，移至WSM_PayLoad頭標(即剛好在WSM_SequenceTag之後)。WSM_StringLength[i]即變成全局WSM_StringLength。
WSM_NumberOfEntries 特定現時水印輔助資料內存在的條目數減一。則每條目詳列出取代。
按照變化例，WSM_NumberOfEntries 特定條目數。
WSM_SequenceTag 表示數位碼酬載應插入水印輔助資料的第一條目內之位元(例如第一位元、第二位元、第三位元等)。酬載包括「使用者識別證」，亦可包括「時戳」、其他資訊(例如著作權)、保護位元、冗贅。
WSM_StringLength 界定取代串列之長度減一(例如位元組數)。
按照變化例，WSM_StringLength 界定取代串列之長度。
WSM_StringOffset 是現時存取單元內要被取代的第一位元組之諸位元組絕對位址。若WSM_StringOffset等於0，識別現時存取單元的第一晶片之第一位元組。存取單元界定為「始終含有確實一主要碼式圖像的NAL單元集」。NAL單元是「含有指示遵循資料型式的語法結構和含有該資料之位元組」。存取單元和NAL單元是MPEG-4 AVC/H.264標準之組件。
按照特殊之特徵，條目係以偏差值遞降順序加以組織。
按照變化例，WSM_StringOffset分裂成二副場：第一是WSM_PacketOffset ，係TS封包位址，第二是WSM_StringRelativeOffset ，係從TS封包開始的位元組內之偏差值。可使消費者設備內之處理容易。在此情況下，把下列場編碼：若WSM_PacketOffset等於0，即識別TS封包，包括WSM_PayLoad的第一位元組。
WSM_StringRelativeOffset 是在WSM_PacketOffset所指點TS封包內要被取代的第1位元組相對位址。若WSM_StringRelativeOffset等於0，即識別TS封包酬載之第一位元組。
WSM_Filler是充填位元組。舉例而言，WSM_Filler[i] 等於0xFF。若WSM_PayLoadSize太大，WSM_Filler可用來填塞。在H.264內，此等私人SEI訊息使用對形象提供準確時間參照的NAL(英文「網路適應層」之縮寫)單元，嵌入碼式資料位元流內，故方便水印輔助資料和形象碼式資料間之同步化。誠然，SEI訊息係「附設」於存取單元。視MPEG4/AVC寫碼模態(圖場、圖幅、MBAFF)，存取單元含有一全場或一全幅。故WSM SEI訊息即蒴包於NAL單元內，如下表：
forbidden_zero_bit 按照H.264該等於0。
nal_ref_idc 對於按照H.264具有nal_unit_type等於6,9,10,11或12的全部NAL，該等於0。
nal_unit_type 特定NAL單元內所含RBSP(代表「原生位元率序列酬載」)之型式，正如ISO/IEC 14496-10的表7-1內所特定。特定VCL NAL單元(VCL是英文「視訊寫碼層」的縮寫)，一如具有nal_unit_type等於1至含5在內的NAL單元所特定。所有其餘NAL單元均稱為non-VCL NAL單元。Nal_unit_type等於6，意指SEI訊息。
rbsp_trailing_bits() 是特定可變長度碼的位元串列。實務上，一般輪到序列0x80，接著0x00。
在H.264/MPEG4 AVC寫碼標準的架構內，使用SEI訊息，擬議第三具體例。按照第三具體例，界定新型式資訊SEI，以便對WSM有關之額外資訊寫碼。為此目的，圖場payloadType的新值，是從未用值當中界定(例如payloadType等於22)。具體而言，payloadType起先22值(0至21)已用於寫碼特別資訊，諸如影片的顆粒特徵，相當於payloadType等於19。以下在陣列內顯示新語法，呈擬似碼的形式，有ISO/IEC 14496-10文件內之同樣習用。SEI資料的語法(即sei_payload)，是以下述方式，延伸WSM_payload，與第二具體例的WSM_payload一致。
byte_aligned() 用來核對碼式資料位元流是否在位元組邊界排整。
本發明關係到水印方法，參照第5和6圖所述。更具體言之，係關於包括格式資料、識別資料和取代資料的碼式資料位元流F+WSM加水印方法。
在步驟20，利用碼式資料位元流F一部份之解碼，決定格式資料，界定要被取代資料取代的碼式資料取代方式；識別資料，識別要被取代的碼式資料；和至少一取代資料，供要被取代的各碼式資料。舉例而言，相當於第二和第三具體例，把蒴包WSM的SEI訊息解碼。
在步驟22，要被取代的碼式資料，利用識別資料加以識別。
在步驟24，以適當取代資料取代要被取代的各識別碼式資料，把碼式資料位元流F加水印，成為加水印位元流F’。基於取代資料，又基於要嵌入碼式資料F位元流內的水印值W，按照格式資料決定適當的取代資料。
舉例而言，如第6圖所示，在步驟22，從步驟20恢復之識別資料、取代和識別三個碼式資料C1,C2,C3。
在步驟24，此三個碼式資料，各視要嵌入的數位碼W加以取代。例如，W等於001。所以，為把位元0嵌入C1內，C1以E0取代，而E1用來嵌位元1。然後，為把位元0嵌入C2，以F0取代C2，而用F1來嵌位元1。最後，為把位元1嵌入C3內，以G1取代C3，而G0用來嵌位元0。
按照變化例，於步驟20當中，亦決定核對資料，在步驟24，只有核對資料匹配要被取代之接到資料，進行取代。
本發明又關於代表一序列形象、聲訊資料、3D資料，或任何數位內容的碼式資料位元流F。本發明碼式資料位元流包括水印輔助資料，尤指：
─識別資料，識別要被取代的碼式資料；
─至少一取代資料，對要被取代的各碼式資料；
─格式資料，界定利用取代資料取代要被取代馬路資料之方式。
本發明又關於參照第7圖所述裝置3。此裝置3包括條目30，供接受碼式資料位元流F，代表一序列形象或任何數位內容，包括水印輔助資料。碼式資料位元流F宜利用本發明方法按照三個具體例之一所發生。條目30之輸出連結到加水印模組32之輸入。加水印模組32之輸出連結到裝置3之第一輸出36，和解碼模組34之輸入，解碼模組34的輸出連結到裝置3的第二輸出38。
加水印模組32適於實施本發明加水印方法之步驟20、22和24。此為目的，加水印模組32包括：
─決定單元，從碼式資料位元流，決定識別資料，識別要被取代之碼式資料；至少一取代資料，對要被取代之各碼式資料；和格式資料，界定利用取代資料取代要被取代的碼式資料之方式；
─識別單元，以識別資料識別要被取代之碼式資料；
─加水印單元，基於格式資料和加水印資料，以一取代碼式資料取代要被取代之形象碼式資料，對碼式資料位元流加水印。
要嵌入F內之水印W，包括至少使用者識別證/可識別裝置3之識別符。第一輸出36輸出加水印位元流F’，可傳輸至網路R，諸如WLAN(英文「無線局部地區網路」的縮寫)。解碼模組34適於把加水印位元流F’解碼，以重構加水印數位內容S’，諸如加水印序列形象。S’可傳輸至電視機供顯示。
按照有益具體例，加水印資料是碼式資料位元流內之ERASED，應用來避免被盜緩衝複製，因而恢復加水印輔助資料。
以連結至寫碼方法的第二具體例為例，可應用下法以抹除加水印輔助資料：
設定WSM_FormatType=0
社會黨WSM_NumberOfEntries=0
以WSM_Filler充填於酬載之餘數。
SEI訊息嵌入碼式資料位元流內，使用NAL單元(英文「網路適應層」的縮寫)，對形象提供準確時間參照，故方便水印輔助資料和形象碼字資料間之同步化。此外，SEI訊息以同樣編密碼系統編密碼，壓縮形象序列，並深加合併。故，為除去加水印輔助資料，需破解編密碼系統。最後，SEI訊息不限於酬載。
當然，本發明不限於上述具體例。更具體言之，本發明不限於把資料插入形象碼式資料位元流內。誠然，插入資料之碼式資料位元流可代表任何種類的數位內容，例如聲訊或3D資料。
12．．．插入識別和取代資料之步驟
14．．．插入格式資料之步驟
F．．．碼式資料位元流
WSM．．．水印輔助資料
D1．．．單一取代資料
D2．．．第二取代資料
20．．．恢復格式資料，識別資料和取代資料之步驟
22．．．識別要被取代之資料之步驟
24．．．對F加水印之步驟
F’．．．加水印位元流
C1,C2,C3．．．碼式資料
W．．．數位碼
3．．．裝置
30．．．條目
32．．．加水印模組
34．．．解碼模組
36．．．裝置之第一輸出
38．．．裝置之第二輸出
R．．．網路
S’．．．加水印數位內容
第1圖為本發明插入方法之方塊圖；
第2、3、4圖代表碼式資料位元流和本發明所界定諸取代資料；
第5圖為本發明加水印方法之方塊圖；
第6圖表示碼式資料位元流及其按本發明加水印方法加水印之相關位元流；
第7圖代表本發明裝置。
12．．．插入識別和取代資料之步驟
14．．．插入格式資料之步驟

Claims (5)

  1. 一種代表數位內容之碼式資料位元流內插入水印輔助資料之方法，包括步驟為：在該碼式資料位元流內插入識別資料，識別要取代之碼式資料；在該碼式資料位元流內，插入格式資料，界定取代資料，如何進行取代，若進行該碼式資料取代，經錯誤核對；為要被取代之各碼式資料，且視該格式資料，在該碼式資料位元流內，插入至少一取代資料，和一核對資料，以核對要取代之碼式資料是否在傳輸時進行某些修飾，其中該識別資料、該格式資料、該至少一取代資料和該核對資料，是以補充增進資訊訊文之形式，插入於該碼式資料位元流內者。
  2. 如申請專利範圍第1項插入水印輔助資料之方法，其中該核對資料係由要被取代的碼式資料計算之循環冗贅核對者。
  3. 如申請專利範圍第1項插入水印輔助資料之方法，其中該核對資料係要被取代之碼式資料者。
  4. 如申請專利範圍第1項插入水印輔助資料之方法，其中該識別資料包括絕對位址，識別要被取代的碼式資料之初始和該取代資料之長度者。
  5. 如申請專利範圍第1項插入水印輔助資料之方法，其中該碼式資料位元流係蒴包於輸送封包內，該識別資料包括識別輸送封包之資料，包括要被取代之碼式資料，以及相對於該輸送封包初始之偏差值，識別要被取代的碼式資料初始和該取代資料之長度者。
TW099114587A 2009-05-29 2010-05-07 代表數位內容之碼式資料位元流及在其內插入水印輔助資料之方法 TWI486903B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
EP09305493A EP2257067A1 (en) 2009-05-29 2009-05-29 Method for inserting watermark assistance data in a bitstream, method of watermarking said bitstream, device implementing the method of watermarking and bitstream comprising the watermark assistance data

Publications (2)

Publication Number Publication Date
TW201104618A TW201104618A (en) 2011-02-01
TWI486903B true TWI486903B (zh) 2015-06-01

Family

ID=41509016

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099114587A TWI486903B (zh) 2009-05-29 2010-05-07 代表數位內容之碼式資料位元流及在其內插入水印輔助資料之方法

Country Status (7)

Country Link
US (1) US8462982B2 (zh)
EP (2) EP2257067A1 (zh)
JP (1) JP5591584B2 (zh)
KR (1) KR101733516B1 (zh)
CN (1) CN101902627B (zh)
BR (1) BRPI1001709B1 (zh)
TW (1) TWI486903B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5786478B2 (ja) * 2011-06-15 2015-09-30 富士通株式会社 動画像復号装置、動画像復号方法、及び動画像復号プログラム
NL2011201C2 (en) * 2013-07-19 2015-01-21 Civolution B V Method and system for watermarking content prior to fragmenting.
US10645404B2 (en) 2014-03-24 2020-05-05 Qualcomm Incorporated Generic use of HEVC SEI messages for multi-layer codecs
CN106304851A (zh) * 2015-04-23 2017-01-04 Lg电子株式会社 发送广播信号的装置、接收广播信号的装置、发送广播信号的方法和接收广播信号的方法
CN105704545B (zh) * 2016-01-20 2018-06-15 中国科学院信息工程研究所 一种基于h.264视频流的密钥同步信息传输方法
US10834153B2 (en) * 2016-08-24 2020-11-10 Qualcomm Incorporated System level signaling of SEI tracks for media data streaming
JP7018447B2 (ja) * 2017-01-05 2022-02-10 シャープ株式会社 仮想現実アプリケーション用の、動き制約タイルセットのシグナリングのためのシステム及び方法
US10560728B2 (en) 2017-05-29 2020-02-11 Triton Us Vp Acquisition Co. Systems and methods for stitching separately encoded NAL units into a stream
CA3071560C (en) * 2017-08-10 2024-01-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method
US11057685B2 (en) * 2018-03-29 2021-07-06 Ncr Corporation Media content proof of play over optical medium
US11212595B1 (en) * 2020-08-17 2021-12-28 Cognizant Technology Solutions India Pvt. Ltd. System and method for watermarking over the top (OTT) content delivered through OTT platform
US11317128B1 (en) * 2020-10-23 2022-04-26 Synamedia Limited Systems, methods, and devices for media content tamper protection and detection
CN112995675A (zh) * 2021-03-01 2021-06-18 洛阳伟信电子科技有限公司 一种适用于机载下传的视频采集压缩及数据封装方法
US11589100B1 (en) * 2021-03-31 2023-02-21 Amazon Technologies, Inc. On-demand issuance private keys for encrypted video transmission
US11496776B1 (en) * 2021-07-19 2022-11-08 Intrado Corporation Database layer caching for video communications
WO2023205559A1 (en) * 2022-04-22 2023-10-26 Whdiyo Llc Dynamic visual watermark for streaming video

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040152479A1 (en) * 2003-01-31 2004-08-05 Rainbolt Bradley J. Data channel procedure for systems employing frequency diversity
US20070030996A1 (en) * 2005-08-02 2007-02-08 Lsi Logic Corporation Method and/or apparatus for video watermarking and steganography using simulated film grain
TW200850003A (en) * 2007-01-16 2008-12-16 Qualcomm Inc Apparatus and method for decoding of digital image and audio signals
US20080320375A1 (en) * 2007-06-22 2008-12-25 Matsushita Electric Industrial Co., Ltd. Data transmitting apparatus and data receiving apparatus
US20090080689A1 (en) * 2005-12-05 2009-03-26 Jian Zhao Watermarking Encoded Content
TW200920093A (en) * 2007-07-27 2009-05-01 Lagavulin Ltd Apparatuses, methods, systems and user interfaces for a portable, image-processing transmitter and automated contractual image dealer and transmitter

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5710834A (en) * 1995-05-08 1998-01-20 Digimarc Corporation Method and apparatus responsive to a code signal conveyed through a graphic image
US6411725B1 (en) * 1995-07-27 2002-06-25 Digimarc Corporation Watermark enabled video objects
KR100294890B1 (ko) * 1998-07-01 2001-07-12 윤종용 워터마킹을 사용한 디지털 영상 코딩 장치와 디코딩 장치 및 그 방법
JP3614784B2 (ja) * 2001-02-01 2005-01-26 松下電器産業株式会社 情報埋め込み装置、情報埋め込み方法、情報取り出し装置、および情報取り出し方法
US7003131B2 (en) * 2002-07-09 2006-02-21 Kaleidescape, Inc. Watermarking and fingerprinting digital content using alternative blocks to embed information
JP3979350B2 (ja) * 2003-06-24 2007-09-19 ソニー株式会社 情報記録媒体ドライブ装置、情報処理装置、データ再生制御システム、および方法、並びにコンピュータ・プログラム
JP4155956B2 (ja) * 2004-09-16 2008-09-24 三洋電機株式会社 電子透かし埋め込み装置と方法ならびに電子透かし抽出装置と方法
US20060268989A1 (en) * 2005-05-27 2006-11-30 Matsushita Electric Industrial Co., Ltd. Bit stream generation method and bit stream generatation apparatus
US20070154060A1 (en) * 2006-01-04 2007-07-05 Taiwan Semiconductor Manufacturing Co., Ltd. Digital imaging device having watermarking capability
US20080101456A1 (en) * 2006-01-11 2008-05-01 Nokia Corporation Method for insertion and overlay of media content upon an underlying visual media
US20070220266A1 (en) * 2006-03-03 2007-09-20 Verimatrix, Inc. Security monitoring system and method for network distribution of digital content
CN101115124B (zh) * 2006-07-26 2012-04-18 日电（中国）有限公司 基于音频水印识别媒体节目的方法和装置
CN101262593A (zh) * 2007-03-07 2008-09-10 赵壮 基于混合水印机制的增强型oma drm 2.0视频数字版权管理系统
WO2008118146A1 (en) 2007-03-23 2008-10-02 Thomson Licensing Modifying a coded bitstream
EP1983755A1 (en) * 2007-04-17 2008-10-22 Thomson Licensing Method to transmit video data in a data stream and associated metadata
US8306268B2 (en) * 2007-09-12 2012-11-06 General Electric Company Method and system for image integrity determination
US20090136087A1 (en) * 2007-11-28 2009-05-28 Joseph Oren Replacement Based Watermarking

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040152479A1 (en) * 2003-01-31 2004-08-05 Rainbolt Bradley J. Data channel procedure for systems employing frequency diversity
US20070030996A1 (en) * 2005-08-02 2007-02-08 Lsi Logic Corporation Method and/or apparatus for video watermarking and steganography using simulated film grain
US20090080689A1 (en) * 2005-12-05 2009-03-26 Jian Zhao Watermarking Encoded Content
TW200850003A (en) * 2007-01-16 2008-12-16 Qualcomm Inc Apparatus and method for decoding of digital image and audio signals
US20080320375A1 (en) * 2007-06-22 2008-12-25 Matsushita Electric Industrial Co., Ltd. Data transmitting apparatus and data receiving apparatus
TW200920093A (en) * 2007-07-27 2009-05-01 Lagavulin Ltd Apparatuses, methods, systems and user interfaces for a portable, image-processing transmitter and automated contractual image dealer and transmitter

Also Published As

Publication number Publication date
CN101902627B (zh) 2014-07-09
EP2257068A3 (en) 2011-06-01
EP2257067A1 (en) 2010-12-01
BRPI1001709A2 (pt) 2011-07-26
CN101902627A (zh) 2010-12-01
JP5591584B2 (ja) 2014-09-17
KR101733516B1 (ko) 2017-05-10
TW201104618A (en) 2011-02-01
KR20100129234A (ko) 2010-12-08
US20110129114A1 (en) 2011-06-02
BRPI1001709B1 (pt) 2020-03-10
US8462982B2 (en) 2013-06-11
EP2257068A2 (en) 2010-12-01
JP2010279031A (ja) 2010-12-09

Similar Documents

Publication Publication Date Title
TWI486903B (zh) 代表數位內容之碼式資料位元流及在其內插入水印輔助資料之方法
EP4038883B1 (en) Use of transformed coefficients to provide embedded signalling for watermarking
US6208745B1 (en) Method and apparatus for imbedding a watermark into a bitstream representation of a digital image sequence
JP5356812B2 (ja) 画像系列及びロゴを含むビデオコンテンツを符号化する方法及び装置
WO1998010591A1 (en) Information transmitting method, encoder/decoder of information transmitting system using the method, and encoding multiplexer/decoding inverse multiplexer
US9082172B2 (en) Device for generating watermark metadata, associated device for embedding watermark
JP2022130436A (ja) 復号された画像データから画像データを再構成する方法および装置
US20090219987A1 (en) Method and Device for Generating a Marked Data Flow, Method and Device for Inserting a Watermark Into a Marked Data Flow, and Marked Data Flow
WO2010102650A1 (en) Technique for bringing encoded data items into conformity with a scalable coding protocol
US20070064937A1 (en) Method and apparatus for encoding or decoding a bitstream
US9319752B2 (en) Robust watermark
US20060268989A1 (en) Bit stream generation method and bit stream generatation apparatus
JP2010068421A (ja) 電子透かし装置及び電子透かし方法
WO2020012070A1 (en) An apparatus, a method and a computer program for video coding and decoding
Chung et al. A secure digital watermarking scheme for MPEG-2 video copyright protection
Ebrahimi et al. Secure JPEG 2000-JPSEC
US20220360806A1 (en) Use of transformed coefficients to provide embedded signalling for watermarking
CN117201789B (zh) 视频码流生成方法、计算机存储介质及编码器
KR100439521B1 (ko) 헤더 정보 암호화에 의한 멀티미디어 컨텐츠 보호 방법
JP2003178521A (ja) 圧縮デジタルデータのコピー方法
JPH10178642A (ja) 情報多重化方法および著作権保護システム
He et al. Multimedia authentication
JPH10304324A (ja) 情報受信装置及び同装置に適用する情報埋め込み処理方法
MXPA01002481A (en) Multimedia information communication device and its method

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees