JP2020120370A - オブジェクトのプライバシが保護されるイメージフレームのシーケンスをエンコーディング及びデコーディングする方法及びデバイス - Google Patents
オブジェクトのプライバシが保護されるイメージフレームのシーケンスをエンコーディング及びデコーディングする方法及びデバイス Download PDFInfo
- Publication number
- JP2020120370A JP2020120370A JP2019209253A JP2019209253A JP2020120370A JP 2020120370 A JP2020120370 A JP 2020120370A JP 2019209253 A JP2019209253 A JP 2019209253A JP 2019209253 A JP2019209253 A JP 2019209253A JP 2020120370 A JP2020120370 A JP 2020120370A
- Authority
- JP
- Japan
- Prior art keywords
- sequence
- image frames
- encoded sequence
- encoded
- privacy
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000012545 processing Methods 0.000 description 10
- 238000013459 approach Methods 0.000 description 7
- 239000000284 extract Substances 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000033001 locomotion Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000009827 uniform distribution Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/19686—Interfaces masking personal details for privacy, e.g. blurring faces, vehicle license plates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
- G08B13/19604—Image analysis to detect motion of the intruder, e.g. by frame subtraction involving reference image or background adaptation with time to compensate for changing conditions, e.g. reference image update on detection of light level change
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
- H04N19/29—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving scalability at the object level, e.g. video object layer [VOL]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2347—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Studio Devices (AREA)
Abstract
Description
エンコードされるイメージフレームのシーケンスであって、プライバシが保護されるべきオブジェクトを描くイメージフレームのシーケンスを受信することと、
イメージフレームのシーケンスの第1のバージョン及び第2のバージョンを生成することであって、
そのシーケンスの、第2のバージョンではない、第1のバージョンのイメージフレームには、プライバシマスクが提供され、イメージフレームのシーケンスに描かれたオブジェクトのプライバシが保護される、イメージフレームのシーケンスの第1のバージョン及び第2のバージョンを生成することと、
イメージフレームのシーケンスの第1のバージョンを、イントラコードされたイメージフレーム及びインターコードされたイメージフレームの第1のエンコードされたシーケンスとしてエンコーディングすることと、
イメージフレームのシーケンスの第2のバージョンを、インターコードされたイメージフレームの第2のエンコードされたシーケンスとしてエンコーディングすることであって、
第2のエンコードされたシーケンスのインターコードされたイメージフレームは、第1のエンコードされたシーケンスのイントラコードされたイメージフレームを使用してエンコードされる、エンコーディングすることと、
第2のエンコードされたシーケンスのインターコードされたイメージフレームを暗号化することと、
第1のエンコードされたシーケンス及び第2のエンコードされたシーケンスのイメージフレームをインターリービングすることにより、第1のエンコードされたシーケンス及び第2のエンコードされたシーケンスを、単一の出力シーケンスに結合することと、
を含む。
イメージフレームのシーケンスの第3のバージョンを生成することと、
そのシーケンスの第3のバージョンのイメージフレームには、プライバシマスクが提供され、プライバシが保護されるべき第2のタイプのオブジェクト以外のすべてのプライバシを保護することと、
イメージフレームのシーケンスの第3のバージョンを、インターコードされたイメージフレームの第3のエンコードされたシーケンスとしてエンコーディングすることであって、
第3のエンコードされたシーケンスのインターコードされたイメージフレームは、第1のエンコードされたシーケンスのイントラコードされたイメージフレームを使用してエンコードされる、エンコーディングすることと、
第3のエンコードされたシーケンスのインターコードされたイメージフレームを暗号化することと、
第1のエンコードされたシーケンス、第2のエンコードされたシーケンス、及び第3のエンコードされたシーケンスのイメージフレームをインターリービングすることにより、第3のエンコードされたシーケンスを、第1のエンコードされたシーケンス及び第2のエンコードされたシーケンスと共に、単一の出力シーケンスに結合することと、
をさらに含んでよい。
エンコードされるイメージフレームのシーケンスであって、プライバシが保護されるべきオブジェクトを描くイメージフレームのシーケンスを受信するよう構成されているレシーバと、
イメージフレームのシーケンスの第1のバージョンを生成するよう構成されているプライバシマスカであって、そのシーケンスの第1のバージョンのイメージフレームには、プライバシマスクが提供され、イメージフレームのシーケンスに描かれたオブジェクトのプライバシを保護する、プライバシマスカと、
イメージフレームのシーケンスの第1のバージョンを、イントラコードされたイメージフレーム及びインターコードされたイメージフレームの第1のエンコードされたシーケンスとしてエンコードし、イメージフレームのシーケンスの第2のバージョンを、インターコードされたイメージフレームの第2のエンコードされたシーケンスとしてエンコードするよう構成されているエンコーダであって、イメージフレームのシーケンスの第2のバージョンのイメージフレームには、プライバシマスクが提供されず、イメージフレームのシーケンスに描かれたオブジェクトのプライバシを保護せず、第2のエンコードされたシーケンスのインターコードされたイメージフレームは、第1のエンコードされたシーケンスのイントラコードされたイメージフレームを使用してエンコードされる、エンコーダと、
第2のエンコードされたシーケンスのインターコードされたフレームを暗号化するよう構成されているエンクリプタと、
第1のエンコードされたシーケンス及び第2のエンコードされたシーケンスのイメージフレームをインターリービングすることにより、第1のエンコードされたシーケンス及び第2のエンコードされたシーケンスを、単一の出力シーケンスに結合するよう構成されているインターリーバと、
を含む。
プライバシが保護されるべきオブジェクトを描くイメージフレームのシーケンスを撮像するよう構成されているイメージセンサと、
イメージセンサにより撮像されたイメージフレームのシーケンスを受信し、受信した、イメージフレームのシーケンスを、単一の出力シーケンスにエンコードするよう配置されている、第2の態様に係るデバイスと、
を含む。
エンコードされた、イメージフレームのシーケンスを受信することであって、
エンコードされた、イメージフレームのシーケンスは、イメージフレームの第1のエンコードされたシーケンス及び第2のエンコードされたシーケンスのインターリーブされたイメージフレームを含み、
イメージフレームの第2のエンコードされたシーケンスは、第1のエンコードされたシーケンスのイントラコードされたイメージフレームを使用してエンコードされた、インターコードされたイメージフレームを含み、
オブジェクトのプライバシは、第1のエンコードされたシーケンスのイメージフレーム内のプライバシマスクにより、及び、第2のエンコードされたシーケンス内の暗号化により保護される、イメージフレームのシーケンスを受信することと、
エンコードされた、イメージフレームのシーケンスから、第1のエンコードされたシーケンスのイントラコードされたイメージフレーム及び第2のエンコードされたシーケンスのインターコードされたイメージフレームを抽出することと、
第2のエンコードされたシーケンスのインターコードされたイメージフレームを復号することと、
第1のエンコードされたシーケンスのイントラコードされたフレーム及び第2のエンコードされたシーケンスの復号された、インターコードされたイメージフレームをデコーディングするであって、
復号された、インターコードされたイメージフレームは、第1のエンコードされたシーケンスのデコードされた、イントラコードされたフレームを使用してデコードされる、インターコードされたイメージフレームをデコーディングすることと、
表示用のデコードされたシーケンスを、第2のエンコードされたシーケンスのデコードされ、復号された、インターコードされたイメージフレームから、形成することと、
を含む。
エンコードされた、イメージフレームのシーケンスを受信するよう構成されているレシーバであって、
エンコードされた、イメージフレームのシーケンスは、イメージフレームの第1のエンコードされたシーケンス及び第2のエンコードされたシーケンスのインターリーブされたイメージフレームを含み、
イメージフレームの第2のエンコードされたシーケンスは、第1のエンコードされたシーケンスのイントラコードされたイメージフレームを使用してエンコードされた、インターコードされたイメージフレームを含み、
オブジェクトのプライバシは、第1のエンコードされたシーケンスのイメージフレーム内のプライバシマスクにより、及び、第2のエンコードされたシーケンス内の暗号化により保護される、レシーバと、
エンコードされた、イメージフレームのシーケンスから、第1のエンコードされたシーケンスのイントラコードされたイメージフレーム及び第2のエンコードされたシーケンスのインターコードされたイメージフレームを抽出するよう構成されているフレームエキストラクタと、
第2のエンコードされたシーケンスのインターコードされたイメージフレームを復号するよう構成されているデクリプタと、
第1のエンコードされたシーケンスのイントラコードされたフレーム及び第2のエンコードされたシーケンスの復号された、インターコードされたイメージフレームをデコードし、復号された、インターコードされたイメージフレームは、第1のエンコードされたシーケンスのデコードされた、イントラコードされたフレームを使用してデコードされ、第2のエンコードされたシーケンスのデコードされ、復号された、インターコードされたイメージフレームから、表示用のデコードされたシーケンスを形成するよう構成されているデコーダと、
を含む。
Claims (14)
- プライバシが保護されるべきオブジェクトを描くイメージフレームのシーケンス(116)をエンコーディングする方法であって、
プライバシが保護されるべき様々なタイプのオブジェクトを描くイメージフレームのシーケンス(116)を受信すること(E02)と、
前記イメージフレームのシーケンス(116)の第1のバージョン(216a)及び第2のバージョン(416b)を生成すること(E04)であって、
前記イメージフレームのシーケンスの前記第1のバージョン(216a)を生成する際には、前記第1のバージョン(216a)の前記イメージフレームには、プライバシマスクが提供され、プライバシが保護されるべきすべてのタイプのオブジェクトのプライバシが保護され、
前記イメージフレームのシーケンスの前記第2のバージョン(416b)を生成する際には、前記シーケンスの前記第2のバージョン(216b)の前記イメージフレームには、プライバシマスクが提供され、プライバシが保護されるべき第1のタイプのオブジェクト以外のすべてのプライバシが保護される、第1のバージョン(216a)及び第2のバージョン(416b)を生成すること(E04)と、
前記イメージフレームのシーケンスの前記第1のバージョン(216a)を、イントラコードされたイメージフレーム及びインターコードされたイメージフレームの第1のエンコードされたシーケンス(207)としてエンコーディングすること(E06)と、
前記イメージフレームのシーケンスの前記第2のバージョン(416b)を、インターコードされたイメージフレームの第2のエンコードされたシーケンス(208)としてエンコーディングすること(E08)であって、
前記第2のエンコードされたシーケンス(208)の前記インターコードされたイメージフレームは、前記第1のエンコードされたシーケンス(207)の前記イントラコードされたイメージフレームを使用してエンコードされる、エンコーディングすること(E08)と、
前記第2のエンコードされたシーケンス(208)の前記インターコードされたイメージフレームを暗号化すること(E10)と、
前記第1のエンコードされたシーケンス(207)及び前記第2のエンコードされたシーケンス(209)のイメージフレームをインターリービングすることにより、前記第1のエンコードされたシーケンス(207)及び前記第2のエンコードされたシーケンス(209)を、単一の出力シーケンス(117)に結合すること(E12)と、
を含む方法。 - 前記第2のエンコードされたシーケンス(208)の前記インターコードされたイメージフレームに、標準イメージデコーダ(121)によりデコードされることを防ぐインジケーションを付与することをさらに含む、請求項1に記載の方法。
- 前記インジケーションは、前記第2のエンコードされたシーケンス(208)の前記インターコードされたイメージフレームのヘッダに付与される、請求項2に記載の方法。
- 前記インジケーションは、前記第2のエンコードされたシーケンス(208)の前記インターコードされたイメージフレームに関連付けられた、NALユニットのユニットタイプである、ネットワークアブストラクションレイヤ(network abstraction layer又はNAL)の値を設定することにより付与され、前記値は、前記NALユニットが、前記標準デコーダ(121)によりデコードされるべきでないことを示す、請求項2又は3に記載の方法。
- 前記第1のエンコードされたシーケンス(207)の前記イントラコードされたイメージフレームに、それらが表示されるべきでないインジケーションを付与することと、
前記イントラコードされたイメージフレームのそれぞれの後に、前記第1のエンコードされたシーケンス(207)に、Pスキップフレームを加えることと、
をさらに含む、請求項1から4のいずれか一項に記載の方法。 - 前記イメージフレームのシーケンス(116)の第3のバージョン(516b)を生成することであって、
前記シーケンスの前記第3のバージョン(516b)の前記イメージフレームには、プライバシマスクが提供され、プライバシが保護されるべき第2のタイプのオブジェクト以外のすべてのプライバシが保護される、第3のバージョン(516b)を生成することと
前記イメージフレームのシーケンスの前記第3のバージョン(516b)を、インターコードされたイメージフレームの第3のエンコードされたシーケンス(508)としてエンコーディングすることであって、
前記第3のエンコードされたシーケンス(508)の前記インターコードされたイメージフレームは、前記第1のエンコードされたシーケンス(207)の前記イントラコードされたイメージフレームを使用してエンコードされる、エンコーディングすることと、
前記第3のエンコードされたシーケンス(508)の前記インターコードされたイメージフレームを暗号化することと、
前記第1のエンコードされたシーケンス、前記第2のエンコードされたシーケンス、及び前記第3のエンコードされたシーケンスのイメージフレームをインターリービングすることにより、前記第3のエンコードされたシーケンス(509)を、前記第1のエンコードされたシーケンス(207)及び前記第2のエンコードされたシーケンス(209)と共に、前記単一の出力シーケンス(117)に結合することと、
をさらに含む、請求項5に記載の方法。 - 前記第2のエンコードされたシーケンス(208)は、前記エンコーディングの開始点として、前記第1のエンコードされたシーケンス(207)のイントラコードされたイメージフレームを使用してエンコードされた、連続する、インターコードされたイメージフレームのサブシーケンスを含む、請求項1から6のいずれか一項に記載の方法。
- プライバシが保護されるべきオブジェクトを描くイメージフレームのシーケンス(116)をエンコーディングするデバイス(113、413、513)であって、
プライバシが保護されるべき様々なタイプのオブジェクトを描くイメージフレームのシーケンスを受信するよう構成されているレシーバ(201)と、
前記イメージフレームのシーケンスの第1のバージョン(216a)を生成するよう構成されている第1のプライバシマスカ(202)であって、前記第1のバージョン(216a)の前記イメージフレームを生成する際には、前記シーケンスの前記第1のバージョン(216a)の前記イメージフレームに、プライバシマスクを提供し、プライバシが保護されるべきすべての様々なタイプのオブジェクトのプライバシを保護するよう構成されている、第1のプライバシマスカ(202)と、
前記イメージフレームのシーケンスの第2のバージョン(416b)を生成するよう構成されている第2のプライバシマスカ(402)であって、前記第2のバージョン(416b)の前記イメージフレームを生成する際には、前記第2のバージョン(416b)の前記イメージフレームに、プライバシマスクを提供し、プライバシが保護されるべき第1のタイプのオブジェクト以外のすべてのプライバシを保護するよう構成されている、第2のプライバシマスカ(402)と、
前記イメージフレームのシーケンスの前記第1のバージョン(216a)を、イントラコードされたイメージフレーム及びインターコードされたイメージフレームの第1のエンコードされたシーケンス(207)としてエンコードし、前記イメージフレームのシーケンスの前記第2のバージョン(216b、416b)を、インターコードされたイメージフレームの第2のエンコードされたシーケンス(208)としてエンコードするよう構成されているエンコーダ(203)であって、前記第2のエンコードされたシーケンス(208)の前記インターコードされたイメージフレームは、前記第1のエンコードされたシーケンス(207)の前記イントラコードされたイメージフレームを使用してエンコードされる、エンコーダ(203)と、
前記第2のエンコードされたシーケンス(208)の前記インターコードされたフレームを暗号化するよう構成されているエンクリプタ(204)と
前記第1のエンコードされたシーケンス及び前記第2のエンコードされたシーケンスのイメージフレームをインターリービングすることにより、前記第1のエンコードされたシーケンス(207)及び前記第2のエンコードされたシーケンス(209)を、単一の出力シーケンス(117)に結合するよう構成されているインターリーバ(205)と、
を含む、デバイス。 - プライバシが保護されるべきオブジェクトを描くイメージフレームのシーケンスを撮像するよう構成されているイメージセンサ(111)と、
前記イメージセンサ(111)により撮像された前記イメージフレームのシーケンスを受信し、前記受信した、イメージフレームのシーケンスを、単一の出力シーケンスにエンコードするよう配置されている、請求項8に記載のデバイス(113、413、513)と、
を含む、カメラ(11)。 - プロセッサにより実行されると、請求項1から7のいずれか一項に記載の方法を実施するよう適合されているコンピュータコード命令を保存している、非一時的コンピュータ可読媒体。
- オブジェクトのプライバシが保護される、エンコードされた、イメージフレームのシーケンス(117)をデコーディングする方法であって、
プライバシが保護されるべき様々なタイプのオブジェクトを描く、エンコードされた、イメージフレームのシーケンス(117)を受信すること(D02)と、
前記エンコードされた、イメージフレームのシーケンスは、イメージフレームの第1のエンコードされたシーケンス(207)及び第2のエンコードされたシーケンス(209)のインターリーブされたイメージフレームを含み、
前記イメージフレームの第2のエンコードされたシーケンス(209)は、前記第1のエンコードされたシーケンス(207)のイントラコードされたイメージフレームを使用してエンコードされた、インターコードされたイメージフレームを含み、
前記タイプのオブジェクトのすべてのプライバシが、前記第1のエンコードされたシーケンス(207)の前記イメージフレーム内のプライバシマスクにより保護され、
前記タイプのオブジェクトの、第1のタイプ以外のすべてのプライバシが、前記第2のエンコードされたシーケンス(209)の前記イメージフレーム内のプライバシマスクにより保護され、
前記第2のエンコードされたシーケンス(209)は暗号化される、イメージフレームのシーケンス(117)を受信すること(D02)と、
前記エンコードされた、イメージフレームのシーケンス(117)から、前記第1のエンコードされたシーケンス(207)の前記イントラコードされたイメージフレーム及び前記第2のエンコードされたシーケンス(209)の前記インターコードされたイメージフレームを抽出すること(D04)と、
前記第2のエンコードされたシーケンス(209)の前記インターコードされたイメージフレームを復号すること(D06)と、
前記第1のエンコードされたシーケンス(207)の前記イントラコードされたフレーム及び前記第2のエンコードされたシーケンス(208)の前記復号された、インターコードされたイメージフレームをデコーディングすること(D08)であって、
前記復号された、インターコードされたイメージフレームは、前記第1のエンコードされたシーケンス(207)の前記デコードされた、イントラコードされたフレームを使用してデコードされる、インターコードされたイメージフレームをデコーディングすること(D08)と、
表示用のデコードされたシーケンス(125)を、前記第2のエンコードされたシーケンスの前記デコードされ、復号された、インターコードされたイメージフレームから形成すること(D10)と、
を含む方法。 - 前記第2のエンコードされたシーケンス(209)の前記インターコードされたイメージフレームには、標準デコーダ(121)によりデコードされることを防ぐインジケーションが付与され、
前記抽出することにて、前記インジケーションが使用され、前記エンコードされた、イメージフレームのシーケンス(117)内の前記インターコードされたイメージフレームを特定する、
請求項11に記載の方法。 - 前記第1のエンコードされたシーケンス(207)の前記イントラコードされたフレーム及び前記第2のエンコードされたシーケンス(209)の前記インターコードされたイメージフレームには、それらの表示時点を示すタイムスタンプが提供され、
前記表示用のデコードされたシーケンス(125)に含まれていない、前記第1のエンコードされたシーケンス(207)の前記イントラコードされたフレームを補償するよう、前記第2のエンコードされたシーケンス(209)の前記インターコードされたイメージフレームの前記タイムスタンプを調整することをさらに含む、請求項11又は請求項12に記載の方法。 - オブジェクトのプライバシが保護される、エンコードされた、イメージフレームのシーケンスをデコーディングするデバイス(122)であって、
プライバシが保護されるべき様々なタイプのオブジェクトを描く、エンコードされた、イメージフレームのシーケンス(117)を受信するよう構成されているレシーバ(701)であって、
前記エンコードされた、イメージフレームのシーケンス(117)は、イメージフレームの第1のエンコードされたシーケンス(207)及び第2のエンコードされたシーケンス(209)のインターリーブされたイメージフレームを含み、
前記イメージフレームの第2のエンコードされたシーケンス(209)は、前記第1のエンコードされたシーケンス(207)のイントラコードされたイメージフレームを使用してエンコードされた、インターコードされたイメージフレームを含み、
前記タイプのオブジェクトのすべてのプライバシが、前記第1のエンコードされたシーケンス(207)の前記イメージフレーム内のプライバシマスクにより保護され、
前記タイプのオブジェクトの、第1のタイプ以外のすべてのプライバシが、前記第2のエンコードされたシーケンス(209)の前記イメージフレーム内のプライバシマスクにより保護され、
前記第2のエンコードされたシーケンス(209)は暗号化される、レシーバ(701)と、
前記エンコードされた、イメージフレームのシーケンス(117)から、前記第1のエンコードされたシーケンス(207)の前記イントラコードされたイメージフレーム及び前記第2のエンコードされたシーケンス(209)の前記インターコードされたイメージフレームを抽出するよう構成されているフレームエキストラクタ(702)と、
前記第2のエンコードされたシーケンス(209)の前記インターコードされたイメージフレームを復号するよう構成されているデクリプタ(703)と、
前記第1のエンコードされたシーケンス(207)の前記イントラコードされたフレーム及び前記第2のエンコードされたシーケンス(208)の前記復号された、インターコードされたイメージフレームをデコードし、前記復号された、インターコードされたイメージフレームは、前記第1のエンコードされたシーケンス(207)の前記デコードされた、イントラコードされたフレームを使用してデコードされ、前記第2のエンコードされたシーケンスの前記デコードされ、復号された、インターコードされたイメージフレームから、表示用のデコードされたシーケンス(125)を形成するよう構成されているデコーダ(704)と、
を含むデバイス。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP18214316.4A EP3672244B1 (en) | 2018-12-20 | 2018-12-20 | Methods and devices for encoding and decoding a sequence of image frames in which the privacy of an object is protected |
EP18214316.4 | 2018-12-20 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020120370A true JP2020120370A (ja) | 2020-08-06 |
JP2020120370A5 JP2020120370A5 (ja) | 2021-03-25 |
JP6964647B2 JP6964647B2 (ja) | 2021-11-10 |
Family
ID=64746300
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019209253A Active JP6964647B2 (ja) | 2018-12-20 | 2019-11-20 | オブジェクトのプライバシが保護されるイメージフレームのシーケンスをエンコーディング及びデコーディングする方法及びデバイス |
Country Status (6)
Country | Link |
---|---|
US (1) | US10964182B2 (ja) |
EP (1) | EP3672244B1 (ja) |
JP (1) | JP6964647B2 (ja) |
KR (1) | KR102219661B1 (ja) |
CN (1) | CN111355964B (ja) |
TW (1) | TWI712311B (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3996367B1 (en) * | 2020-11-05 | 2023-07-26 | Axis AB | Method and image-processing device for video processing |
EP4020998A1 (en) * | 2020-12-23 | 2022-06-29 | Axis AB | Encoding of modified video |
US20220279244A1 (en) * | 2021-03-01 | 2022-09-01 | Charter Communications Operating, Llc | Blurred viewer monitoring and advertisement system |
CN113489991B (zh) * | 2021-06-30 | 2023-04-07 | 杭州海康威视数字技术股份有限公司 | 视频编码方法、装置、视频编码设备及存储介质 |
CN113489990B (zh) * | 2021-06-30 | 2023-05-02 | 杭州海康威视数字技术股份有限公司 | 视频编码方法、装置、电子设备及存储介质 |
DE102022202943A1 (de) | 2022-03-25 | 2023-09-28 | Robert Bosch Gesellschaft mit beschränkter Haftung | Überwachungsanordnung mit Zugriffsberechtigung, Verfahren, Computerprogramm und Speichermedium |
DE102022202941A1 (de) | 2022-03-25 | 2023-09-28 | Robert Bosch Gesellschaft mit beschränkter Haftung | Überwachungsanordnung, Verfahren zur Überwachung, Computerprogramm und Datenträger |
CN115426507B (zh) * | 2022-07-29 | 2023-12-05 | 宁波星巡智能科技有限公司 | 基于目标检测的隐私视频传输、播放方法、装置及设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005286468A (ja) * | 2004-03-29 | 2005-10-13 | Mitsubishi Electric Corp | マスキング機能付き監視システムおよびカメラ、並びに該カメラとともに用いられるマスク解除装置 |
FR2972886A1 (fr) * | 2011-03-17 | 2012-09-21 | Thales Sa | Procede de compression/decompression de flux video partiellement masques, codeur et decodeur mettant en oeuvre le procede |
JP2018142950A (ja) * | 2016-12-20 | 2018-09-13 | アクシス アーベー | プライバシーマスクを含む画像を符号化する方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040179712A1 (en) | 2001-07-24 | 2004-09-16 | Gerrit Roelofsen | Method and sysem and data source for processing of image data |
EP1831849A1 (en) | 2004-12-27 | 2007-09-12 | Emitall Surveillance S.A. | Efficient scrambling of regions of interest in an image or video to preserve privacy |
US8867853B2 (en) | 2011-06-28 | 2014-10-21 | Stoplift, Inc. | Image processing to prevent access to private information |
RU2016115055A (ru) * | 2013-09-20 | 2017-10-25 | Вид Скейл, Инк. | Системы и способы обеспечения кодирования 3d справочной таблицы для масштабируемости цветовой гаммы |
EP2874396A1 (en) | 2013-11-15 | 2015-05-20 | Everseen Ltd. | Method and system for securing a stream of data |
DE102013226802A1 (de) | 2013-12-20 | 2015-06-25 | Siemens Aktiengesellschaft | Schutz von Privatsphäre in einem Videostrom mittels einer redundanten Slice |
US10297126B2 (en) * | 2015-09-16 | 2019-05-21 | Sensormatic Electronics, LLC | Privacy masking video content of alarm exceptions and mask verification |
CN108289202A (zh) * | 2018-01-29 | 2018-07-17 | 北京大椽科技有限公司 | 一种智能网络监控方法及系统 |
-
2018
- 2018-12-20 EP EP18214316.4A patent/EP3672244B1/en active Active
-
2019
- 2019-10-28 KR KR1020190134540A patent/KR102219661B1/ko active IP Right Grant
- 2019-11-20 JP JP2019209253A patent/JP6964647B2/ja active Active
- 2019-11-26 CN CN201911171669.6A patent/CN111355964B/zh active Active
- 2019-12-19 US US16/721,247 patent/US10964182B2/en active Active
- 2019-12-20 TW TW108146849A patent/TWI712311B/zh active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005286468A (ja) * | 2004-03-29 | 2005-10-13 | Mitsubishi Electric Corp | マスキング機能付き監視システムおよびカメラ、並びに該カメラとともに用いられるマスク解除装置 |
FR2972886A1 (fr) * | 2011-03-17 | 2012-09-21 | Thales Sa | Procede de compression/decompression de flux video partiellement masques, codeur et decodeur mettant en oeuvre le procede |
JP2018142950A (ja) * | 2016-12-20 | 2018-09-13 | アクシス アーベー | プライバシーマスクを含む画像を符号化する方法 |
Non-Patent Citations (1)
Title |
---|
ZHENG, XIAOZHEN ET AL.: "Mask information for Annotated region SEI message", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JCTVC-AF0024 (version 3), JPN6021023198, 17 July 2018 (2018-07-17), pages 1 - 7, ISSN: 0004533080 * |
Also Published As
Publication number | Publication date |
---|---|
EP3672244A1 (en) | 2020-06-24 |
US10964182B2 (en) | 2021-03-30 |
TW202032981A (zh) | 2020-09-01 |
JP6964647B2 (ja) | 2021-11-10 |
US20200202689A1 (en) | 2020-06-25 |
KR20200077394A (ko) | 2020-06-30 |
CN111355964A (zh) | 2020-06-30 |
KR102219661B1 (ko) | 2021-02-23 |
CN111355964B (zh) | 2021-08-13 |
EP3672244B1 (en) | 2020-10-28 |
TWI712311B (zh) | 2020-12-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6964647B2 (ja) | オブジェクトのプライバシが保護されるイメージフレームのシーケンスをエンコーディング及びデコーディングする方法及びデバイス | |
Zhang et al. | Hiding privacy information in video surveillance system | |
US20080267403A1 (en) | System and method for privacy enhancement via adaptive cryptographic embedding | |
KR101271461B1 (ko) | 감시영상의 프라이버시 정보 보호 장치 및 방법 | |
EP3796655B1 (en) | Video privacy mask in forward predicted video frame | |
JP4825449B2 (ja) | 映像配信システム | |
Guo et al. | An efficient motion detection and tracking scheme for encrypted surveillance videos | |
Carrillo et al. | Compression independent object encryption for ensuring privacy in video surveillance | |
KR101951605B1 (ko) | 영상의 유출을 방지하기 위한 cctv 영상 보안 시스템 | |
KR20130114037A (ko) | 프라이버시 영역의 마스킹 및 복원 방법 | |
Paruchuri et al. | Video data hiding for managing privacy information in surveillance systems | |
Ruchaud et al. | Privacy protecting, intelligibility preserving video surveillance | |
US20230269422A1 (en) | Selective video modification | |
Ruchaud et al. | ASePPI: Robust Privacy Protection Against De-Anonymization Attacks. | |
US11463240B2 (en) | Methods and image processing devices for encoding and decoding private data | |
US20160337673A1 (en) | Protection of privacy in a video stream by means of a redundant slice | |
WO2020223858A1 (zh) | 发送端和接收端的隐私保护方法、电子设备、以及计算机可读存储介质 | |
Gerhardt et al. | Selective face encryption in H. 264 encoded videos | |
Ruchaud et al. | ASePPI, an adaptive scrambling enabling privacy protection and intelligibility in H. 264/AVC | |
Noorkami | Secure and Robust compressed-domain video watermarking for H. 264 | |
Yabuta et al. | Privacy protection by masking moving objects for security cameras | |
Mulani | Secured Data Transmission in Compressed Encrypted Video Stream | |
Shahid | Protection of Scalable Video by Encryption and Watermarking | |
Tseng et al. | Protection of Privacy-Sensitive Contents in Surveillance Videos Using WebM Video Features |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210210 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210210 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20210210 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210609 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210622 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210819 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211012 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211019 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6964647 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |