JP2013513998A5 - - Google Patents

Download PDF

Info

Publication number
JP2013513998A5
JP2013513998A5 JP2012543082A JP2012543082A JP2013513998A5 JP 2013513998 A5 JP2013513998 A5 JP 2013513998A5 JP 2012543082 A JP2012543082 A JP 2012543082A JP 2012543082 A JP2012543082 A JP 2012543082A JP 2013513998 A5 JP2013513998 A5 JP 2013513998A5
Authority
JP
Japan
Prior art keywords
frame
frames
offset
encoding
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012543082A
Other languages
English (en)
Other versions
JP5969389B2 (ja
JP2013513998A (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from PCT/US2010/003110 external-priority patent/WO2011081639A2/en
Publication of JP2013513998A publication Critical patent/JP2013513998A/ja
Publication of JP2013513998A5 publication Critical patent/JP2013513998A5/ja
Application granted granted Critical
Publication of JP5969389B2 publication Critical patent/JP5969389B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (16)

  1. 複数のフレームを有するビデオシーケンスから少なくとも2つのフレームを選択するステップと、
    前記選択されたフレームの各々における少なくとも1つの対象オブジェクトのトータルエリアを判別するステップと、
    各トータルエリアを閾値エリアと比較するステップと、
    前記閾値エリアを超えるトータルエリアを有する選択されたフレームの各々を低オブジェクト重み付けフレームとして分類するステップと、
    前記閾値エリアを超えないトータルエリアを有する選択されたフレームの各々を高オブジェクト重み付けフレームとして分類するステップと、
    各低オブジェクト重み付けフレームを第1の符号化モードに従って符号化すると共に各高オブジェクト重み付けフレームを異なる符号化モードに従って符号化するステップと、
    を含む方法。
  2. フレーム内のどのマクロブロックが前記少なくとも1つの対象オブジェクトを含むかを判別するステップと、
    前記少なくとも2つのフレームの各々について当初QPを決定するステップと、
    前記低オブジェクト重み付けフレームについては、前記当初QPにオフセットを与えるステップと、
    前記オフセットを与えるステップに応じて、前記少なくとも1つの対象オブジェクトに含まれている前記マクロブロックへのビット割り当てを増大するステップと、
    を含む、請求項1記載の方法。
  3. 連続する高オブジェクト重み付けフレームについてフレームにおけるテンポラルマスキング効果の量(ΔQPMasking)からフレーム毎のQPオフセット寄与を判定するステップ
    前記ΔQPMaskingをフレームタイプから得られたQPオフセット寄与(ΔQPType)に組み合わせるステップ
    連続する高オブジェクト重み付けフレームを、前記フレームタイプから得られたQPオフセット寄与(ΔQPType)に組み合わされた計算済みΔQPMaskingを使用することによって得られるビットレートを使用して符号化するステップ
    を含む、請求項1記載の方法。
  4. 連続する高オブジェクト重み付けフレームに関するフレーム複雑度を計算するステップ
    連続する高オブジェクト重み付けフレームの各GOPについてGOP範囲及びGOP符号化パターンに基づいてフレームタイプを選択するステップ
    フレームタイプに基づいてフレーム毎のQPオフセット寄与(ΔQPType)を計算するステップ
    をさらに含む、請求項3記載の方法。
  5. 全ての高オブジェクト重み付けフレームについての平均ΔQPMaskingを計算するステップ
    ΔQPMaskingを正規化するステップ
    最終的なフレーム毎のΔQPを計算するステップ
    をさらに含む、請求項4記載の方法。
  6. 前記計算された最終的なフレーム毎のΔQPを用いて、割り当てられるビット量及びレート制御量を計算するステップ(112)をさらに含む、請求項5記載の方法。
  7. 前記フレームにおけるテンポラルマスキング効果の量(ΔQPMasking)からフレーム毎のQPオフセット寄与を計算するステップ(106)は、ΔQPMasking(n)=a・ComplMasking(n)を使用して実行され、ComplMasking(n)は、高オブジェクト重み付けフレームの所定サイズのウインドウにおける現在のフレームに隣接する複数のフレームの平均として計算されたフレームのテンポラルマスキング複雑度を含む、請求項3記載の方法。
  8. 高オブジェクト重み付けフレームについて各フレームのフレーム複雑度を計算する前記ステップ、順方向フレーム間予測を使用して実行される、請求項4記載の方法。
  9. フレーム内のどのマクロブロックが前記少なくとも1つの対象オブジェクトを含むかを判定するステップと、
    前記少なくとも2つのフレームの各々について当初QPを決定するステップと、
    前記低オブジェクト重み付けフレームの前記当初QPにオフセットを与えるステップであって、これにより、前記少なくとも1つの対象オブジェクトに含まれる前記マクロブロックへのビット割り当てが増加する、ステップと、
    を含む、請求項3記載の方法。
  10. フレーム内のどのマクロブロックが前記少なくとも1つの対象オブジェクトを含むかを判定するステップと、
    前記少なくとも2つのフレームの各々について当初QPを決定するステップと、
    前記低オブジェクト重み付けフレームの前記当初QPにオフセットを与えるステップであって、これにより、前記少なくとも1つの対象オブジェクトに含まれる前記マクロブロックへのビット割り当てが増加する、ステップと、
    を含む、請求項4記載の方法。
  11. 前記低オブジェクト重み付けフレームについてオリジナルのマクロブロック画素と2つ以上の符号化モード符号化されたマクロブロック画素との間の絶対値差合計(SAD)を判定するステップと、
    前記低オブジェクト重み付けフレームについての絶対値差合計判定ステップにおける少なくとも1つの他の符号化モードよりも小さな絶対値差合計を有する符号化モードを選択するステップと、
    当該選択するステップで選択されたそれぞれの符号化モードに従って前記低オブジェクト重み付けフレームを符号化するステップと、
    を含む、請求項1記載の方法。
  12. 前記絶対値差合計判定ステップにおいてエンコーダ重みアレイを適用して、前記オブジェクトの画素オブジェクトではない画素よりも大きな重みが割り当てられるようにするステップを含む、請求項11記載の方法。
  13. ビデオシーケンスを符号化するエンコーダであって、
    ビデオフレームにおける対象オブジェクトのエリアを判定する手段と、
    モード選択閾値エリアを設定する手段と、
    複数のフレームについて前記オブジェクトのエリアを前記閾値エリアと比較する手段と、
    前記比較する手段に応答して符号化モードを選択する手段であって、異なるフレームについて異なる符号化モードを選択するように適合される、前記選択する手段と、
    符号化手段であって、前記異なるフレームを前記異なる符号化モードで符号化するように適合される、前記符号化手段と、
    を含む、前記エンコーダ。
  14. 前記判定する手段は、前記対象オブジェクトを構成する画素の数を判定し、
    前記選択する手段は、前記閾値エリアを越える画素数のエリアを有するフレームについて知覚量子化パラメータオフセット判定を使用し、
    前記符号化手段は、前記知覚量子化パラメータオフセット判定に応じた符号化モードで前記フレームを符号化する、請求項13記載のエンコーダ。
  15. 前記判定する手段は、前記対象オブジェクトを構成する画素の数を判定し、
    前記選択する手段は、ナイーブQPオフセット判定を使用し、前記選択する手段は、前記閾値を超えない画素数のエリアを有する少なくとも2つのフレームの各々について当初QPを決定し、前記少なくとも2つのフレームについてオフセットを前記当初QPに与え、前記オフセットに応答して前記少なくとも1つの対象オブジェクトに含まれるマクロブロックへのビット割り当てを増大させるのに適合し
    前記符号化手段は、前記オフセットに応じた符号化モードで前記閾値フレームを超えない画素数のエリアを有する前記少なくとも2つのフレームを符号化する、請求項14記載のエンコーダ。
  16. 前記判定する手段は、前記対象オブジェクトを構成する画素の数を判定し、
    前記選択する手段は、ナイーブQPオフセット判定を使用し、前記選択する手段は前記閾値を超えない画素数のエリアを有する少なくとも2つのフレームの各々について当初QPを決定し、前記少なくとも2つのフレームについてオフセットを前記当初QPに与え、前記オフセットに応答して前記少なくとも1つの対象オブジェクトに含まれるマクロブロックへのビット割り当てを増大させるのに適合し
    前記符号化手段は、前記オフセットに応じた符号化モードで前記閾値フレームを超えない画素数のエリアを有する前記少なくとも2つのフレームを符号化する、請求項13記載のエンコーダ。
JP2012543082A 2009-12-14 2010-12-08 オブジェクト認識ビデオ符号化ストラテジ Expired - Fee Related JP5969389B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US28415109P 2009-12-14 2009-12-14
US61/284,151 2009-12-14
PCT/US2010/003110 WO2011081639A2 (en) 2009-12-14 2010-12-08 Object-aware video encoding strategies

Publications (3)

Publication Number Publication Date
JP2013513998A JP2013513998A (ja) 2013-04-22
JP2013513998A5 true JP2013513998A5 (ja) 2014-01-30
JP5969389B2 JP5969389B2 (ja) 2016-08-17

Family

ID=44168390

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012543082A Expired - Fee Related JP5969389B2 (ja) 2009-12-14 2010-12-08 オブジェクト認識ビデオ符号化ストラテジ

Country Status (6)

Country Link
US (1) US9118912B2 (ja)
EP (1) EP2514207A2 (ja)
JP (1) JP5969389B2 (ja)
KR (1) KR101882024B1 (ja)
CN (1) CN102656886B (ja)
WO (1) WO2011081639A2 (ja)

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8510644B2 (en) * 2011-10-20 2013-08-13 Google Inc. Optimization of web page content including video
WO2013086137A1 (en) 2011-12-06 2013-06-13 1-800 Contacts, Inc. Systems and methods for obtaining a pupillary distance measurement using a mobile computing device
US9286715B2 (en) 2012-05-23 2016-03-15 Glasses.Com Inc. Systems and methods for adjusting a virtual try-on
US9235929B2 (en) 2012-05-23 2016-01-12 Glasses.Com Inc. Systems and methods for efficiently processing virtual 3-D data
US9483853B2 (en) 2012-05-23 2016-11-01 Glasses.Com Inc. Systems and methods to display rendered images
US10045032B2 (en) 2013-01-24 2018-08-07 Intel Corporation Efficient region of interest detection
US9398302B2 (en) * 2013-03-08 2016-07-19 Mediatek Inc. Image encoding method and apparatus with rate control by selecting target bit budget from pre-defined candidate bit budgets and related image decoding method and apparatus
GB201312382D0 (en) 2013-07-10 2013-08-21 Microsoft Corp Region-of-interest aware video coding
US10080018B2 (en) 2014-03-25 2018-09-18 Owtware Holdings Limited, BVI Video content classification
US20150288965A1 (en) * 2014-04-08 2015-10-08 Microsoft Corporation Adaptive quantization for video rate control
FR3022095B1 (fr) * 2014-06-06 2017-09-01 Daniel Elalouf Dispositif et procede de transmission de donnees multimedia
US9549188B2 (en) * 2014-07-30 2017-01-17 Intel Corporation Golden frame selection in video coding
CN106030646B (zh) * 2015-01-30 2020-03-17 Ds全球 用于虚拟拍摄服务的系统和方法
US10735755B2 (en) * 2015-04-21 2020-08-04 Arris Enterprises Llc Adaptive perceptual mapping and signaling for video coding
CN107852508A (zh) * 2015-07-31 2018-03-27 深圳市大疆创新科技有限公司 修改搜索区域的方法
EP3225026A4 (en) * 2015-07-31 2017-12-13 SZ DJI Technology Co., Ltd. Method of sensor-assisted rate control
JP6537396B2 (ja) * 2015-08-03 2019-07-03 キヤノン株式会社 画像処理装置、撮像装置および画像処理方法
CN106920255B (zh) * 2015-12-24 2020-06-05 航天信息股份有限公司 一种针对图像序列的运动目标提取方法及装置
CN106231303B (zh) * 2016-07-22 2020-06-12 上海交通大学 一种hevc编码中使用预测模式进行复杂度控制的方法
CN106331707B (zh) * 2016-08-30 2020-03-13 上海大学 基于恰可觉察失真模型的非对称感知视频编码系统及方法
CN108347607B (zh) * 2017-01-25 2020-08-18 联咏科技股份有限公司 固定码率且基于行的嵌入式视频压缩方法和图像处理设备
KR102683294B1 (ko) * 2018-09-10 2024-07-10 삼성전자주식회사 객체를 인식하는 전자 장치 및 그 전자 장치를 제어하는 방법
KR20210072344A (ko) 2019-12-09 2021-06-17 삼성전자주식회사 전자장치 및 그 제어방법
CN113011210B (zh) * 2019-12-19 2022-09-16 北京百度网讯科技有限公司 视频处理方法和装置
US11263261B2 (en) * 2020-02-14 2022-03-01 Alibaba Group Holding Limited Method and system for characteristic-based video processing
CN114979610A (zh) * 2021-02-26 2022-08-30 微软技术许可有限责任公司 用于3d场景重构的图像传输
WO2023140446A1 (ko) * 2022-01-19 2023-07-27 한화비전 주식회사 영상처리장치 및 그의 영상처리방법
WO2024040535A1 (zh) * 2022-08-25 2024-02-29 深圳市大疆创新科技有限公司 视频处理方法、装置、设备和计算机存储介质
WO2024076273A1 (en) * 2022-10-07 2024-04-11 Telefonaktiebolaget Lm Ericsson (Publ) Object-based qp adaptation
CN116614631B (zh) * 2023-05-17 2024-03-19 北京百度网讯科技有限公司 视频处理方法、装置、设备及介质

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05227524A (ja) * 1991-09-30 1993-09-03 Victor Co Of Japan Ltd データ圧縮装置
US5214507A (en) 1991-11-08 1993-05-25 At&T Bell Laboratories Video signal quantization for an mpeg like coding environment
JP2646921B2 (ja) 1991-11-15 1997-08-27 日本ビクター株式会社 適応量子化装置
JP3258840B2 (ja) 1994-12-27 2002-02-18 シャープ株式会社 動画像符号化装置および領域抽出装置
US6192075B1 (en) 1997-08-21 2001-02-20 Stream Machine Company Single-pass variable bit-rate control for digital video coding
US6782135B1 (en) * 2000-02-18 2004-08-24 Conexant Systems, Inc. Apparatus and methods for adaptive digital video quantization
GB2371434A (en) * 2001-01-19 2002-07-24 Motorola Inc Encoding and transmitting video data
US6944224B2 (en) * 2002-08-14 2005-09-13 Intervideo, Inc. Systems and methods for selecting a macroblock mode in a video encoder
US20060109902A1 (en) * 2004-11-19 2006-05-25 Nokia Corporation Compressed domain temporal segmentation of video sequences
EP1872590B1 (en) * 2005-04-19 2014-10-22 Telecom Italia S.p.A. Method and apparatus for digital image coding
US8149909B1 (en) * 2005-10-13 2012-04-03 Maxim Integrated Products, Inc. Video encoding control using non-exclusive content categories
JP4993676B2 (ja) * 2006-09-01 2012-08-08 キヤノン株式会社 画像符号化装置及び画像符号化方法
HUE037450T2 (hu) * 2007-09-28 2018-09-28 Dolby Laboratories Licensing Corp Videó információ kezelése
BRPI0911189A2 (pt) * 2008-04-11 2018-05-22 Thomson Licensing sistema e método para melhorar a visibilidade de um objeto em uma imagem digital
WO2009126261A2 (en) 2008-04-11 2009-10-15 Thomson Licensing System and method for enhancing the visibility of an object in a digital picture
US9215467B2 (en) * 2008-11-17 2015-12-15 Checkvideo Llc Analytics-modulated coding of surveillance video
WO2010060463A1 (en) * 2008-11-25 2010-06-03 Telefonaktiebolaget L M Ericsson (Publ) Method and apparatus for statistical multiplexing
CN101494785B (zh) 2008-12-19 2012-05-09 无锡云视界科技有限公司 一种h.264感兴趣区域编码的方法

Similar Documents

Publication Publication Date Title
JP2013513998A5 (ja)
KR101517768B1 (ko) 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
JP4390112B2 (ja) ビデオシーケンスのレートを制御する方法及び装置並びにビデオ符号化装置
CN102186084B (zh) 一种可伸缩视频编码svc的空间增强层码率控制实现方法
KR101433170B1 (ko) 인접 블록의 공간 예측 방향성을 이용하여 화면 내 예측모드를 추정하는 인코딩 및 디코딩 방법, 그 장치
JP5554831B2 (ja) 歪みの重み付け
CN106231320B (zh) 一种支持多机并行编码的联合码率控制方法及系统
CN101287112B (zh) 一种自适应码率控制方法
JP4690966B2 (ja) 動画像符号化装置
CN104185024B (zh) 一种基于总码率与信息熵模型的hevc量化参数优化方法
CN1902939A (zh) 数字画面序列的编码方法和解码方法以及编码设备
US20170374361A1 (en) Method and System Of Controlling A Video Content System
GB2444991A (en) Method of selecting quantizer values in video compression systems
CN108989818B (zh) 一种图像编码参数调整方法及装置
CN104754335A (zh) 一种视频编码码率控制方法
KR20120096863A (ko) 고효율 비디오 부호화의 계층적 부호화 구조를 위한 비트율 제어 기법
CN104038769A (zh) 帧内编码的码率控制方法
CN103391439B (zh) 一种基于主动宏块隐藏的h.264/avc码率控制方法
KR101464538B1 (ko) 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
KR101566290B1 (ko) Dc 화면내 예측 부호화방법
CN107613294A (zh) 一种快速跳过hevc中p、b帧帧内预测模式的方法
CN103414889A (zh) 一种基于双目恰可察觉失真的立体视频码率控制方法
CN102271248B (zh) 一种基于权重窗口模型的h.264/avc宏块级码率控制算法
JP2009094644A5 (ja)
CN107592535B (zh) H.265/hevc图像层码率控制方法