JP6463397B2 - ビデオストリームをエンコードするための方法及びシステム - Google Patents
ビデオストリームをエンコードするための方法及びシステム Download PDFInfo
- Publication number
- JP6463397B2 JP6463397B2 JP2017043950A JP2017043950A JP6463397B2 JP 6463397 B2 JP6463397 B2 JP 6463397B2 JP 2017043950 A JP2017043950 A JP 2017043950A JP 2017043950 A JP2017043950 A JP 2017043950A JP 6463397 B2 JP6463397 B2 JP 6463397B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- image frame
- camera
- pixel block
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 57
- 238000004422 calculation algorithm Methods 0.000 claims description 51
- 238000013139 quantization Methods 0.000 claims description 22
- 238000004364 calculation method Methods 0.000 claims description 7
- 238000001914 filtration Methods 0.000 claims description 5
- 230000002123 temporal effect Effects 0.000 claims description 5
- 230000001419 dependent effect Effects 0.000 claims 1
- 239000013598 vector Substances 0.000 description 13
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 238000004091 panning Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/533—Motion estimation using multistep search, e.g. 2D-log search or one-at-a-time search [OTS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/57—Motion estimation characterised by a search window with variable size or shape
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/583—Motion compensation with overlapping blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6815—Motion detection by distinguishing pan or tilt from motion
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
− カメラの動きに関する情報を受信するステップと、
− カメラの動きに関する情報に基づいて、第1の画像フレーム内にも存在する画像データを含む第2の画像フレームの第1の領域、及び第1の画像フレーム内に存在しない画像データを含む第2の画像フレームの第2の領域を定義するステップと、
− 第2の領域に対して、I−ブロックエンコーディングを使用して各ピクセルブロックをエンコードするステップと、
− 第1の領域の特定のピクセルブロックの各々に対して、特定のピクセルブロックと第1の画像フレームの少なくとも一部をブロックマッチングアルゴリズムへの入力として使用するブロックマッチングアルゴリズムからの出力に基づいて、特定のピクセルブロックをI−ブロック、P−ブロック及びPスキップブロックのうちのいずれか1つとしてエンコードすることを選択し、その選択に従って特定のピクセルブロックをエンコードするステップと
を含む。
− カメラの動きに関する情報を受信するように構成された受信コンポーネントと、
− カメラの動きに関する情報に基づいて、第1の画像フレーム内にも存在する画像データを含む第2の画像フレームの第1の領域と、第1の画像フレーム内に存在しない画像データを含む第2の画像フレームの第2の領域を定義するように構成された領域計算コンポーネントと、
− 第2の領域に対して、I−ブロックエンコーディングを使用して各ピクセルブロックをエンコードし、
− 第1の領域の特定のピクセルブロックの各々に対して、特定のピクセルブロックと第1の画像フレームの少なくとも一部を入力として使用するブロックマッチングアルゴリズムからの出力に基づいて、I−ブロック、P−ブロック及びPスキップブロックのうちのいずれか1つとして特定のピクセルブロックをエンコードすることを選択し、その選択に従って特定のピクセルブロックをエンコードするように
− 構成されたエンコードコンポーネントとを含む。
右方向への16ピクセルのPTZ動作によって、
− ブロックAとEは次のフレームで消える
− ブロックBとFは次の次のフレームで消える
− ブロックDとHはこのフレーム内では新しい
− ブロックの残り(CとG)は少なくとも2つ先のフレームで残っている
Claims (15)
- カメラによってキャプチャされる、シーンを描写するビデオストリームをエンコードするエンコーダで実行される方法であって、前記ビデオストリームは第1の画像フレーム(102)と第2の画像フレーム(104)を含み、前記第1の画像フレームは前記ビデオストリーム内で前記第2の画像フレームに先行し、前記第1及び第2の画像フレームは前記シーンの部分的に重なる部分をカバーし、前記方法は、
前記カメラの動きに関する情報を受け取るステップ(S802)と、
前記カメラの動きに関する前記情報に基づいて、前記第2の画像フレームの第1の領域(106)と第2の領域(108)を定義するステップ(S804)であって、前記第1の領域は前記第1の画像フレームによってもカバーされる前記シーンの一部をカバーし、前記第2の領域は前記第1の画像フレームによってカバーされていない前記シーンの一部をカバーするステップと、
前記第2の領域に対して、I−ブロックエンコーディングを使用して各ピクセルブロックをエンコードするステップ(S814)と、
前記第1の領域の特定のピクセルブロックの各々に対して、前記特定のピクセルブロックと前記第1の画像フレームの少なくとも一部をブロックマッチングアルゴリズムへの入力として使用する前記ブロックマッチングアルゴリズムからの出力に基づいて、I−ブロック、P−ブロック及びPスキップブロックのうちのいずれか1つとして前記特定のピクセルブロックをエンコードすることを選択し、前記選択に従って前記特定のピクセルブロックをエンコードするステップ(S816)と、
前記カメラが動いている間に、所定の閾値を引き上げるステップ(S808)と
を含み、前記エンコーダは、前記ブロックマッチングアルゴリズムからの出力であり前記ピクセルブロックが前記第1の画像フレームの最良マッチングピクセルブロックとどの程度よくマッチするかを表す差分値が前記所定の閾値を超えるときには、ピクセルブロックをエンコードされた第1の種類のブロックとして、又は前記差分値が前記所定の閾値を超えないときには、ピクセルブロックをエンコードされた第2の種類のブロックとして、エンコードすることを選択するように構成されている、方法。 - 前記所定の閾値が、所定の第1の閾値であり、前記エンコードされた第1の種類のブロックが、I−ブロックである、請求項1に記載の方法。
- 前記エンコーダは所定の第2の閾値を有し、前記エンコーダは、ピクセルブロックをPスキップブロックとしてエンコードするか、ピクセルブロックをPブロックとしてエンコードするかを選択するように構成されており、前記エンコーダは、前記ブロックマッチングアルゴリズムからの出力であり前記ピクセルブロックが前記第1の画像フレームの最良マッチングピクセルブロックとどの程度よくマッチするかを表す差分値が前記第2の閾値を超えないときには前記ピクセルブロックをPスキップブロックとしてエンコードするように構成されており、前記第2の閾値は前記第1の閾値よりも低く、前記エンコーダは、前記差分値が前記第2の閾値と前記第1の閾値の間であるときには前記ピクセルブロックをPブロックとしてエンコードし、
前記カメラが動いている間に、前記第2の閾値を引き上げるステップ(S810)を含む、請求項2に記載の方法。 - 前記ビデオストリームは更に、第3の画像フレーム(202)と、前記ビデオストリーム内で前記第3の画像フレームに先行する前記第2の画像フレームを含み、前記第3の画像フレームは、前記第1及び前記第2の画像フレームによってカバーされる前記シーンの一部に部分的に重なる前記シーンの一部をカバーし、前記第1の領域と第2の領域は、前記第3の画像フレームによってカバーされない前記シーンの一部をカバーする、請求項1から3のいずれか一項に記載の方法。
- 前記カメラの動きに関する情報に基づいて、前記第1の画像フレームと前記第3の画像フレームによってもカバーされる前記シーンの一部をカバーする前記第2の画像フレームの第3の領域(204)、並びに、前記第3の画像フレームによってもカバーされるが前記第1の画像フレームによってカバーされない前記シーンの一部をカバーする前記第2の画像フレームの第4の領域(206)を定義するステップ(S806)と、
前記第2の領域は前記第3の画像フレームによってカバーされていない前記シーンの一部をカバーし、前記第1の領域は前記第3の画像フレームによってカバーされていない前記シーンの一部をカバーし、前記第3の領域の特定のピクセルブロックの各々に対して、前記特定のピクセルブロックと前記第1及び第3の画像フレームの少なくとも一部を入力として使用する前記ブロックマッチングアルゴリズムからの出力に基づいて、I−ブロック、P−ブロック、Pスキップブロック、B−ブロック及びBスキップブロックのうちのいずれか1つとして前記特定のピクセルブロックをエンコードすることを選択し、前記選択に従って前記特定のピクセルブロックをエンコードするステップ(S818)と、
前記第4の領域の特定のピクセルブロックの各々に対して、特定のピクセルブロックと前記第3の画像フレームの少なくとも一部を入力として使用する前記ブロックマッチングアルゴリズムからの出力に基づいて、I−ブロック、B−ブロック及びBスキップブロックのうちのいずれか1つとして前記特定のピクセルブロックをエンコードすることを選択し、前記選択に従って前記特定のピクセルブロックをエンコードするステップ(S820)と
を更に含む、請求項4に記載の方法。 - 前記エンコーダは、ピクセルブロックをBスキップブロックとしてエンコードするか、ピクセルブロックをBブロックとしてエンコードするかを選択するための所定の第3の閾値を有し、前記エンコーダは、前記ブロックマッチングアルゴリズムからの出力であり前記ピクセルブロックが前記第1の画像フレームの最良マッチングピクセルブロックとどの程度よくマッチするかを表す差分値が前記第3の閾値を超えないときには、前記ピクセルブロックをBスキップブロックとしてエンコードするように構成されており、前記第3の閾値は前記第1の閾値よりも低く、前記エンコーダは、前記差分値が前記第3の閾値と前記第1の閾値の間であるときには前記ピクセルブロックをBブロックとしてエンコードし、
前記カメラが動いている間に、前記第3の閾値を引き上げるステップ(S812)を含む、請求項2に従属する請求項5に記載の方法。 - 前記第1の領域のピクセルブロックをエンコードするステップは第1の量子化パラメータを使用することを含み、
前記第2の領域のピクセルブロックをエンコードするステップは第2の量子化パラメータを使用することを含み、
前記第3の領域のピクセルブロックをエンコードするステップは第3の量子化パラメータを使用することを含み、
前記第4の領域のピクセルブロックをエンコードするステップは第4の量子化パラメータを使用することを含み、
前記第3及び第4の量子化パラメータは、前記第1及び第2の量子化パラメータより小さい、請求項5又は6に記載の方法。 - 前記第4の量子化パラメータは前記第3の量子化パラメータより小さい、請求項7に記載の方法。
- 前記エンコーダはH.264エンコーダであり、
前記カメラの動きに関する情報が前記カメラの水平運動に対応することを判定するステップと、
前記第2の画像の前記ピクセルブロックのエンコードに先立って前記第2の画像を回転するステップと
を更に含む、請求項1から8のいずれか一項に記載の方法。 - 前記ブロックマッチングアルゴリズムへの入力として、前記カメラの動きに関する情報を提供するステップを更に含む、請求項1から9のいずれか一項に記載の方法。
- 処理能力を有するデバイスによって実行されると、請求項1から10のいずれか一項に記載の方法を実行するように適合された命令を有するコンピュータ可読記憶媒体。
- カメラによってキャプチャされた、シーンを描写するビデオストリーム(908)をエンコードするように構成されたエンコーダ(900)であって、前記ビデオストリームは第1の画像フレームと第2の画像フレームを含み、前記第1の画像フレームは前記ビデオストリーム内で前記第2の画像フレームに先行し、前記第1及び第2の画像フレームは前記シーンの部分的に重なる部分をカバーし、前記エンコーダは、
前記カメラの動きに関する情報(910)を受信するように構成された受信コンポーネント(902)と、
前記カメラの動きに関する前記情報に基づいて、前記第2の画像フレーム内の、前記第1の画像フレームによってもカバーされる前記シーンの一部をカバーする第1の領域(106)と、前記第1の画像フレームによってカバーされない前記シーンの一部をカバーする第2の領域(108)を定義するように構成された領域計算コンポーネント(904)と、
前記第2の領域に対して、I−ブロックエンコーディングを使用して各ピクセルブロックをエンコードし、
前記第1の領域の特定のピクセルブロックの各々に対して、前記特定のピクセルブロックと前記第1の画像フレームの少なくとも一部を入力として使用するブロックマッチングアルゴリズムからの出力に基づいて、I−ブロック、P−ブロック及びPスキップブロックのうちのいずれか1つとして前記特定のピクセルブロックをエンコードすることを選択し、前記選択に従って前記特定のピクセルブロックをエンコードし、
前記カメラが動いている間に、所定の閾値を引き上げる(S808)ように
構成されたエンコードコンポーネント(906)と
を備え、前記エンコーダは、前記ブロックマッチングアルゴリズムからの出力であり前記ピクセルブロックが前記第1の画像フレームの最良マッチングピクセルブロックとどの程度よくマッチするかを表す差分値が前記所定の閾値を超えるときには、ピクセルブロックをエンコードされた第1の種類のブロックとして、又は前記差分値が前記所定の閾値を超えないときには、ピクセルブロックをエンコードされた第2の種類のブロックとして、エンコードすることを選択するように構成されているエンコーダ。 - シーンを描写するビデオストリーム(908)をキャプチャするように構成されたカメラ(1000)であって、前記カメラは前記カメラの動作を推定するための動作推定装置(1002)を備えるカメラと、
前記カメラが接続される請求項12に定義されたエンコーダと
を備えたシステムであって、前記動作推定装置は前記カメラの動きに関連する情報を前記エンコーダへ送信するように構成されており、前記カメラは前記ビデオストリームを前記エンコーダへ送信するように構成されている、システム。 - 前記動作推定装置は、前記カメラのパン−チルト制御への入力、前記カメラのステップモータの動きに関する情報、前記カメラ内のセンサからの動作データ、及び前記ビデオストリームの画像フレームの時間的フィルタ処理からのグローバルモーション推定のうちの少なくとも1つを使用して、前記カメラの動きを推定するように構成されている、請求項13に記載のシステム。
- カメラによってキャプチャされる、シーンを描写するビデオストリームをエンコードするH.264エンコーダで実行される方法であって、前記ビデオストリームは第1の画像フレーム(102)と第2の画像フレーム(104)を含み、前記第1の画像フレームは前記ビデオストリーム内で前記第2の画像フレームに先行し、前記第1及び第2の画像フレームは前記シーンの部分的に重なる部分をカバーし、前記方法は、
前記カメラの動きに関する情報を受け取るステップ(S802)と、
前記カメラの動きに関する前記情報に基づいて、前記第2の画像フレームの第1の領域(106)と第2の領域(108)を定義するステップ(S804)であって、前記第1の領域は前記第1の画像フレームによってもカバーされる前記シーンの一部をカバーし、前記第2の領域は前記第1の画像フレームによってカバーされていない前記シーンの一部をカバーするステップと、
前記第2の領域に対して、I−ブロックエンコーディングを使用して各ピクセルブロックをエンコードするステップ(S814)と、
前記第1の領域の特定のピクセルブロックの各々に対して、前記特定のピクセルブロックと前記第1の画像フレームの少なくとも一部をブロックマッチングアルゴリズムへの入力として使用する前記ブロックマッチングアルゴリズムからの出力に基づいて、I−ブロック、P−ブロック及びPスキップブロックのうちのいずれか1つとして前記特定のピクセルブロックをエンコードすることを選択し、前記選択に従って前記特定のピクセルブロックをエンコードするステップ(S816)と、
前記カメラの動きに関する情報が前記カメラの水平運動に対応することを判定するステップと、
前記第2の画像の前記ピクセルブロックのエンコードに先立って前記第2の画像を回転するステップと
を含む、方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP16160285.9A EP3220642B1 (en) | 2016-03-15 | 2016-03-15 | Method, apparatus and system for encoding a video stream by defining areas within a second image frame with image data common to a first image frame |
EP16160285.9 | 2016-03-15 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2017201777A JP2017201777A (ja) | 2017-11-09 |
JP2017201777A5 JP2017201777A5 (ja) | 2018-05-24 |
JP6463397B2 true JP6463397B2 (ja) | 2019-01-30 |
Family
ID=55586167
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017043950A Active JP6463397B2 (ja) | 2016-03-15 | 2017-03-08 | ビデオストリームをエンコードするための方法及びシステム |
Country Status (6)
Country | Link |
---|---|
US (1) | US10075727B2 (ja) |
EP (1) | EP3220642B1 (ja) |
JP (1) | JP6463397B2 (ja) |
KR (1) | KR101908639B1 (ja) |
CN (1) | CN107197307B (ja) |
TW (1) | TWI660626B (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7036416B2 (ja) | 2017-10-18 | 2022-03-15 | Necプラットフォームズ株式会社 | 装置 |
US10397518B1 (en) * | 2018-01-16 | 2019-08-27 | Amazon Technologies, Inc. | Combining encoded video streams |
EP3657799B1 (en) * | 2018-11-22 | 2020-11-04 | Axis AB | Method for intra refresh encoding of a plurality of image frames |
EP3668096A1 (en) | 2018-12-11 | 2020-06-17 | Axis AB | Method and device for encoding a sequence of image frames using a first and a second encoder |
EP3713235B1 (en) * | 2019-03-19 | 2023-08-02 | Axis AB | Methods and devices for encoding a video stream using a first and a second encoder |
EP3868101B1 (en) * | 2019-08-23 | 2024-04-10 | Huawei Technologies Co., Ltd. | An encoder, a decoder and corresponding methods for performing chroma deblocking for blocks which use joint chroma coding |
EP3829170A1 (en) * | 2019-11-29 | 2021-06-02 | Axis AB | Encoding and transmitting image frames of a video stream |
EP3833028B1 (en) * | 2019-12-03 | 2022-02-09 | Axis AB | Method and system for calculating a cost of encoding a motion vector |
EP3985976B1 (en) * | 2020-10-16 | 2022-09-28 | Axis AB | Method of encoding an image including a privacy mask |
US11425412B1 (en) * | 2020-11-10 | 2022-08-23 | Amazon Technologies, Inc. | Motion cues for video encoding |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05336514A (ja) * | 1992-05-29 | 1993-12-17 | Sony Corp | 画像符号化装置 |
US5537155A (en) * | 1994-04-29 | 1996-07-16 | Motorola, Inc. | Method for estimating motion in a video sequence |
US5619281A (en) * | 1994-12-30 | 1997-04-08 | Daewoo Electronics Co., Ltd | Method and apparatus for detecting motion vectors in a frame decimating video encoder |
JP3317327B2 (ja) * | 1996-02-07 | 2002-08-26 | 日本電信電話株式会社 | 動画像符号化方法および装置 |
ATE404019T1 (de) * | 2001-09-12 | 2008-08-15 | Nxp Bv | Bewegungsschätzung und/oder kompensation |
US7653133B2 (en) * | 2003-06-10 | 2010-01-26 | Rensselaer Polytechnic Institute (Rpi) | Overlapped block motion compression for variable size blocks in the context of MCTF scalable video coders |
JP2007510213A (ja) * | 2003-10-28 | 2007-04-19 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 小さな高速移動物体を追跡するための動きベクトル場の改良 |
JP4507896B2 (ja) * | 2005-01-27 | 2010-07-21 | パナソニック株式会社 | 動画像圧縮装置と動画像圧縮処理方法 |
US8774272B1 (en) | 2005-07-15 | 2014-07-08 | Geo Semiconductor Inc. | Video quality by controlling inter frame encoding according to frame position in GOP |
JP2007228101A (ja) * | 2006-02-21 | 2007-09-06 | Victor Co Of Japan Ltd | 動画像符号化装置 |
JP4303745B2 (ja) * | 2006-11-07 | 2009-07-29 | シャープ株式会社 | 画像表示装置及び方法、画像処理装置及び方法 |
GB0811841D0 (en) * | 2008-06-27 | 2008-07-30 | Symbian Software Ltd | Video compression |
US20100079605A1 (en) | 2008-09-29 | 2010-04-01 | William Marsh Rice University | Sensor-Assisted Motion Estimation for Efficient Video Encoding |
US20110292997A1 (en) | 2009-11-06 | 2011-12-01 | Qualcomm Incorporated | Control of video encoding based on image capture parameters |
JP5598199B2 (ja) * | 2010-09-16 | 2014-10-01 | 富士通株式会社 | 動画像符号化装置 |
US9769473B2 (en) | 2012-06-08 | 2017-09-19 | Apple Inc. | Predictive video coder with low power reference picture transformation |
CN103673990B (zh) * | 2012-09-13 | 2016-04-06 | 北京同步科技有限公司 | 获取摄像机姿态数据的装置及其方法 |
-
2016
- 2016-03-15 EP EP16160285.9A patent/EP3220642B1/en active Active
-
2017
- 2017-03-08 KR KR1020170029541A patent/KR101908639B1/ko active IP Right Grant
- 2017-03-08 JP JP2017043950A patent/JP6463397B2/ja active Active
- 2017-03-10 TW TW106107880A patent/TWI660626B/zh active
- 2017-03-10 CN CN201710141219.7A patent/CN107197307B/zh active Active
- 2017-03-15 US US15/459,646 patent/US10075727B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20170272771A1 (en) | 2017-09-21 |
KR20170107377A (ko) | 2017-09-25 |
CN107197307A (zh) | 2017-09-22 |
US10075727B2 (en) | 2018-09-11 |
EP3220642A1 (en) | 2017-09-20 |
CN107197307B (zh) | 2018-10-16 |
EP3220642B1 (en) | 2018-03-07 |
TW201737712A (zh) | 2017-10-16 |
KR101908639B1 (ko) | 2018-10-16 |
TWI660626B (zh) | 2019-05-21 |
JP2017201777A (ja) | 2017-11-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6463397B2 (ja) | ビデオストリームをエンコードするための方法及びシステム | |
EP2002649B1 (en) | Electronic video image stabilization | |
JP7011506B2 (ja) | ビデオストリームを形成するための方法および画像処理ユニット | |
JP5908581B2 (ja) | 画像キャプチャパラメータに基づくビデオ符号化の制御 | |
EP2847993B1 (en) | Motion sensor assisted rate control for video encoding | |
EP3474225B1 (en) | Method and encoder for encoding a video stream in a video coding format supporting auxiliary frames | |
JP2017201777A5 (ja) | ||
KR100426174B1 (ko) | 영상압축 알고리즘을 이용한 카메라 제어방법 | |
KR102215627B1 (ko) | 비디오 스트림을 인코딩하기 위한 방법, 비디오 인코더, 및 비디오 카메라 | |
EP3989530A1 (en) | Generating substitute image frames based on camera motion | |
US9979882B2 (en) | Method and device for controlling a camera capable of pan and tilt control | |
JP6707334B2 (ja) | リアルタイム符号化のための方法及び装置 | |
KR20180006972A (ko) | 비디오 모션 보상을 위한 장치 및 방법 | |
JP4557752B2 (ja) | 動画像処理装置、動画像処理方法、及び動画像処理プログラム | |
CN108632527B (zh) | 控制器、摄像机以及用于控制摄像机的方法 | |
EP3131295A1 (en) | Video encoding method and system | |
JP6339977B2 (ja) | 映像符号化装置及び映像符号化プログラム | |
JP6259272B2 (ja) | 映像符号化装置及び映像符号化プログラム | |
Peng et al. | Integration of image stabilizer with video codec for digital video cameras | |
WO2019167546A1 (ja) | 映像符号化装置及び映像符号化方法 | |
JP2006303987A (ja) | 画像符号化装置及び画像符号化方法 | |
JP2007019759A (ja) | 監視カメラ | |
JP7336185B2 (ja) | 画像処理装置および画像処理方法 | |
JP2006180200A (ja) | 監視装置 | |
JP2023083234A (ja) | 画像取得デバイスを用いて撮影されたビデオストリームのビットレートを制御するための方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180405 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180405 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20180405 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180731 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20180821 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180828 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181128 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181211 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181228 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6463397 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |