JP2014519735A - ビットストリームレベルで動画品質を推定する方法及び装置 - Google Patents
ビットストリームレベルで動画品質を推定する方法及び装置 Download PDFInfo
- Publication number
- JP2014519735A JP2014519735A JP2014509580A JP2014509580A JP2014519735A JP 2014519735 A JP2014519735 A JP 2014519735A JP 2014509580 A JP2014509580 A JP 2014509580A JP 2014509580 A JP2014509580 A JP 2014509580A JP 2014519735 A JP2014519735 A JP 2014519735A
- Authority
- JP
- Japan
- Prior art keywords
- missing
- texture
- level
- error concealment
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 230000000007 visual effect Effects 0.000 claims abstract description 11
- 230000033001 locomotion Effects 0.000 claims description 55
- 230000002123 temporal effect Effects 0.000 claims description 24
- 239000013598 vector Substances 0.000 claims description 22
- 238000000605 extraction Methods 0.000 claims description 13
- 238000004364 calculation method Methods 0.000 claims description 6
- 230000001186 cumulative effect Effects 0.000 claims 2
- 230000005540 biological transmission Effects 0.000 description 15
- 230000015556 catabolic process Effects 0.000 description 9
- 238000006731 degradation reaction Methods 0.000 description 9
- 238000013459 approach Methods 0.000 description 6
- 238000005259 measurement Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 101150093282 SG12 gene Proteins 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000013441 quality evaluation Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000001303 quality assessment method Methods 0.000 description 1
- 238000013442 quality metrics Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
- H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
Description
Claims (15)
- 誤り隠蔽の後の動画を示す動画品質をビットストリームレベルで推定する方法であり、前記誤り隠蔽前にビットストリームレベルで実行される方法であって、
動画ビットストリームから複数のグローバル条件特徴量を抽出及び/又は計算するステップと、
MBが欠落したことを判定するステップと、
少なくとも前記欠落したMBについて複数のローカル有効性特徴量を抽出及び/又は計算するステップと、
前記誤り隠蔽で使用される誤り隠蔽法をエミュレートすることにより、前記欠落したMBについて数値の誤り隠蔽の有効性レベルを計算するステップと、
動画品質の推定された可視アーチファクトレベルとして、前記計算された誤り隠蔽有効性レベルを提供するステップと
を有する方法。 - 前記複数の条件特徴量は、フレーム種別、イントラMB対インターMBの比、モーションインデックス、及びテクスチャインデックスのうち少なくとも2つを有する、請求項1に記載の方法。
- 前記複数の条件特徴量は、フレーム種別、イントラMB対インターMBの比、モーションインデックス、及びテクスチャインデックスを少なくとも有する、請求項2に記載の方法。
- 前記テクスチャインデックスは、フレームの関心のあるMBのテクスチャ平滑性特徴量から取得され、
前記関心のあるMBは、前記欠落したMB自体と、前記欠落したMBに隣接するMBとを有し、
前記テクスチャ平滑性特徴量は、DC及びAC係数の累積エネルギーに対するDC係数の比と閾値との比較から取得される、請求項2又は3に記載の方法。 - 前記複数のローカル有効性特徴量は、空間的動きベクトル均一性、時間的動きベクトル均一性、及びテクスチャ平滑性のうち少なくとも2つを有する、請求項1ないし4のうちいずれか1項に記載の方法。
- 前記複数のローカル有効性特徴量は、空間的動きベクトル均一性、時間的動きベクトル均一性、平均の動きの大きさ、及びテクスチャ平滑性を少なくとも有する、請求項5に記載の方法。
- 前記空間的動きベクトル均一性は、隣接する正確なMBの動きベクトルに基づく、請求項5又は6に記載の方法。
- 前記テクスチャ平滑性は、DC+ACエネルギーに対するDC係数エネルギーの比と閾値との比較から取得され、現在のMB及び隣接するMBのDCT係数に基づく、請求項5ないし7のうちいずれか1項に記載の方法。
- H.264符号化が使用され、前記複数のローカル有効性特徴量は、インタースキップモードの比及びインターダイレクトモードの比のうち少なくとも1つを有する、請求項1ないし8のうちいずれか1項に記載の方法。
- 誤り隠蔽の後の動画を示す動画品質を推定する装置であり、前記動画品質が前記誤り隠蔽前にビットストリームレベルで推定される装置であって、
動画ビットストリームから複数のグローバル条件特徴量を抽出及び計算する第1の抽出及び計算手段と、
MBが欠落したことを判定する判定手段と、
少なくとも前記欠落したMBについて複数のローカル有効性特徴量を抽出及び計算する第2の抽出及び計算手段と、
誤り隠蔽法をエミュレートすることにより、前記欠落したMBについて数値のEC有効性レベルを計算する計算手段と、
動画品質の推定された可視アーチファクトレベルとして、前記計算された誤り隠蔽有効性レベルを提供する出力手段と
を有する装置。 - 前記複数の条件特徴量は、フレーム種別、イントラMB対インターMBの比、モーションインデックス、及びテクスチャインデックスのうち少なくとも2つを有する、請求項10に記載の装置。
- 前記複数の条件特徴量は、フレーム種別、イントラMB対インターMBの比、モーションインデックス、及びテクスチャインデックスを少なくとも有する、請求項11に記載の装置。
- 前記テクスチャインデックスは、フレームの関心のあるMBのテクスチャ平滑性特徴量から取得され、
前記テクスチャ平滑性特徴量は、DC及びAC係数の累積エネルギーに対するDC係数の比と閾値との比較から取得され、
前記関心のあるMBは、前記欠落したMB自体と、前記欠落したMBに隣接するMBとを有する、請求項11又は12に記載の装置。 - 前記複数のローカル有効性特徴量は、空間的動きベクトル均一性、時間的動きベクトル均一性、及びテクスチャ平滑性のうち少なくとも2つを有する、請求項10ないし13のうちいずれか1項に記載の装置。
- H.264符号化が使用され、前記複数のローカル有効性特徴量は、インタースキップモードの比及びインターダイレクトモードの比のうち少なくとも1つを有する、請求項10ないし14のうちいずれか1項に記載の装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2011/000832 WO2012151719A1 (en) | 2011-05-12 | 2011-05-12 | Method and device for estimating video quality on bitstream level |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014519735A true JP2014519735A (ja) | 2014-08-14 |
JP5911563B2 JP5911563B2 (ja) | 2016-04-27 |
Family
ID=47138638
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014509580A Active JP5911563B2 (ja) | 2011-05-12 | 2011-05-12 | ビットストリームレベルで動画品質を推定する方法及び装置 |
Country Status (8)
Country | Link |
---|---|
US (1) | US9549183B2 (ja) |
EP (1) | EP2708028B8 (ja) |
JP (1) | JP5911563B2 (ja) |
KR (1) | KR20140022065A (ja) |
CN (1) | CN103548342B (ja) |
AU (1) | AU2011367779B2 (ja) |
BR (1) | BR112013028991A2 (ja) |
WO (1) | WO2012151719A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2754292B1 (en) | 2011-09-09 | 2016-08-31 | Thomson Licensing | Method and device for calculating distortion of a video being affected by compression artifacts and channel artifacts |
WO2014094313A1 (en) * | 2012-12-21 | 2014-06-26 | Thomson Licensing | Video quality model, method for training a video quality model, and method for determining video quality using a video quality model |
US10148526B2 (en) * | 2013-11-20 | 2018-12-04 | International Business Machines Corporation | Determining quality of experience for communication sessions |
US11888919B2 (en) | 2013-11-20 | 2024-01-30 | International Business Machines Corporation | Determining quality of experience for communication sessions |
CN105491391A (zh) * | 2014-09-15 | 2016-04-13 | 联想(北京)有限公司 | 一种图像压缩方法及电子设备 |
US10834406B2 (en) * | 2016-12-12 | 2020-11-10 | Netflix, Inc. | Device-consistent techniques for predicting absolute perceptual video quality |
CN112291560B (zh) * | 2020-10-30 | 2024-05-07 | 北京百度网讯科技有限公司 | 视频编码方法、装置、设备和介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6421386B1 (en) * | 1999-12-29 | 2002-07-16 | Hyundai Electronics Industries Co., Ltd. | Method for coding digital moving video including gray scale shape information |
US6865227B2 (en) * | 2001-07-10 | 2005-03-08 | Sony Corporation | Error concealment of video data using motion vector data recovery |
EP1779673A1 (en) * | 2004-07-15 | 2007-05-02 | Qualcomm Incorporated | H.264 spatial error concealment based on the intra-prediction direction |
US9578337B2 (en) * | 2007-01-31 | 2017-02-21 | Nec Corporation | Image quality evaluating method, image quality evaluating apparatus and image quality evaluating program |
CN100531400C (zh) | 2007-07-26 | 2009-08-19 | 上海交通大学 | 基于宏块级和像素级运动估计的视频差错掩盖方法 |
KR20090063406A (ko) * | 2007-12-14 | 2009-06-18 | 삼성전자주식회사 | 전송 특성을 고려한 실시간 동영상 화질 평가 시스템 및방법 |
CN101227619B (zh) * | 2008-01-29 | 2011-06-15 | 华为技术有限公司 | 一种实现视频解码中图像错误掩盖的方法及视频解码器 |
EP2106154A1 (en) | 2008-03-28 | 2009-09-30 | Deutsche Telekom AG | Audio-visual quality estimation |
US9788018B2 (en) * | 2008-06-30 | 2017-10-10 | Microsoft Technology Licensing, Llc | Error concealment techniques in video decoding |
CN101895769B (zh) * | 2010-06-21 | 2011-11-30 | 清华大学 | 基于稀疏表示的视频差错隐藏方法和装置 |
EP3139611A1 (en) * | 2011-03-14 | 2017-03-08 | HFI Innovation Inc. | Method and apparatus for deriving temporal motion vector prediction |
-
2011
- 2011-05-12 BR BR112013028991A patent/BR112013028991A2/pt not_active IP Right Cessation
- 2011-05-12 US US14/116,342 patent/US9549183B2/en active Active
- 2011-05-12 WO PCT/CN2011/000832 patent/WO2012151719A1/en active Application Filing
- 2011-05-12 AU AU2011367779A patent/AU2011367779B2/en not_active Ceased
- 2011-05-12 KR KR1020137029708A patent/KR20140022065A/ko active Search and Examination
- 2011-05-12 CN CN201180070515.3A patent/CN103548342B/zh not_active Expired - Fee Related
- 2011-05-12 EP EP11865360.9A patent/EP2708028B8/en not_active Not-in-force
- 2011-05-12 JP JP2014509580A patent/JP5911563B2/ja active Active
Non-Patent Citations (1)
Title |
---|
JPN6015026038; Amy R. Reibman et al.: 'Quality monitoring of video over a packet network' IEEE Transactions on Multimedia Vol.6, No.2, 200404, pp. 327-334 * |
Also Published As
Publication number | Publication date |
---|---|
WO2012151719A1 (en) | 2012-11-15 |
EP2708028B1 (en) | 2019-04-17 |
KR20140022065A (ko) | 2014-02-21 |
JP5911563B2 (ja) | 2016-04-27 |
AU2011367779A1 (en) | 2014-01-09 |
BR112013028991A2 (pt) | 2017-02-07 |
AU2011367779B2 (en) | 2016-12-15 |
EP2708028A1 (en) | 2014-03-19 |
EP2708028B8 (en) | 2019-06-12 |
US20140219350A1 (en) | 2014-08-07 |
US9549183B2 (en) | 2017-01-17 |
CN103548342B (zh) | 2017-02-15 |
CN103548342A (zh) | 2014-01-29 |
EP2708028A4 (en) | 2015-01-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6104301B2 (ja) | 映像品質推定技術 | |
KR101414435B1 (ko) | 비디오 스트림 품질 평가 방법 및 장치 | |
CN109510919B (zh) | 用于感知质量评估的场景变换检测的方法、设备和介质 | |
JP5911563B2 (ja) | ビットストリームレベルで動画品質を推定する方法及び装置 | |
JP5981561B2 (ja) | シーンカットアーチファクトを考慮するビデオ品質評価 | |
US20150341667A1 (en) | Video quality model, method for training a video quality model, and method for determining video quality using a video quality model | |
KR20140008508A (ko) | 패킷 손실 가시도의 연속 추정에 기반한 객관적인 비디오 품질 평가 방법 및 장치 | |
Liao et al. | A packet-layer video quality assessment model with spatiotemporal complexity estimation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140509 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150622 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150630 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20150929 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151027 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160301 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160329 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5911563 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |