JP7215229B2 - 映像品質推定装置、映像品質推定方法及びプログラム - Google Patents

映像品質推定装置、映像品質推定方法及びプログラム Download PDF

Info

Publication number
JP7215229B2
JP7215229B2 JP2019037769A JP2019037769A JP7215229B2 JP 7215229 B2 JP7215229 B2 JP 7215229B2 JP 2019037769 A JP2019037769 A JP 2019037769A JP 2019037769 A JP2019037769 A JP 2019037769A JP 7215229 B2 JP7215229 B2 JP 7215229B2
Authority
JP
Japan
Prior art keywords
quality
video
tile
tiles
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019037769A
Other languages
English (en)
Other versions
JP2020141374A (ja
Inventor
正憲 小池
勇一朗 浦田
和久 山岸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2019037769A priority Critical patent/JP7215229B2/ja
Priority to PCT/JP2020/007628 priority patent/WO2020179563A1/ja
Priority to US17/310,691 priority patent/US11671654B2/en
Publication of JP2020141374A publication Critical patent/JP2020141374A/ja
Application granted granted Critical
Publication of JP7215229B2 publication Critical patent/JP7215229B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、映像品質推定装置、映像品質推定方法及びプログラムに関するものである。特に、本発明は、映像をタイルに分割して配信するタイルベース映像配信サービスおいてユーザが体感する映像の品質値(映像品質値)を推定するための映像品質推定装置、映像品質推定方法及びプログラムに関する。
近年、仮想現実(VR)技術の発展により、ユーザが360°見渡すことのできるVR映像を視聴する機会が増加している。それに伴い、VR映像配信サービスも増加し、ユーザがヘッドマウントディスプレイ(HMD)や従来の据え置き型ディスプレイ等を用いてVR映像を視聴する機会も増加している。ユーザがVR映像を視聴するとき、例えば、HMDを装着して、ユーザが首を振る、体を動かすなどの行動によって視線方向を変えることができ、また、従来の据え置き型のディスプレイをマウス等で操作することによって映像の視聴方向を変えることができる。
一般的に、映像配信サービスにおいて、ユーザが映像に対して感じる品質は、映像品質に関連するパラメータ(ビットレート、解像度、フレームレート等)に強く影響を受ける。2次元の映像の品質評価については、従来から検討が進められており、例えば、非特許文献1~4において、評価者が2次元の映像を視聴した際に、映像信号、映像のビットストリーム、パケットヘッダやメタデータなどから映像品質を推定する客観品質評価技術が記載されている。
VR映像は2D映像と異なる配信方法が提案されており、配信前の品質を推定する上で、VR特有の配信手法を考慮する必要がある。VR映像配信においては、360°全体の映像に対して、ディスプレイに表示される映像はその一部の領域だけとなる。そこで、従来の映像配信サービスのように映像全体を一様な画質で配信する方法ではなく、ディスプレイに表示されるユーザの視聴方向の映像を高画質で配信し、その他のディスプレイに表示されない映像を低画質で配信、もしくは配信しないことによって配信コストを抑えるというタイルベース配信と呼ばれる手法が提案されている。タイルベース配信の一例として、非特許文献5で示されたMPEG-DASHと呼ばれる配信方式を用いて、非特許文献6で示されるようにVR映像のタイル分割を行い、タイルごとの画質を変えて符号化し、配信する手法が挙げられている。
Objective perceptual multimedia video quality measurement of HDTV for digital cable television in the presence of a full reference, Recommendation ITU-T J.341, 2016 Parametric non-intrusive bitstream assessment of video media streaming quality, Recommendation ITU-T P.1202, 2012 Parametric non-intrusive assessment of audiovisual media streaming quality, Recommendation ITU-T P.1201, 2012 Parametric bitstream-based quality assessment of progressive download and adaptive audiovisual streaming services over reliable transport, Recommendation ITU-T P.1203, 2017 I. Sodagar, "The MPEG-DASH Standard for Multimedia Streaming Over the Internet," in IEEE MultiMedia, vol. 18, pp. 62-67, 2011. Jean Le Feuvre, Cyril Concolato, "Tiled-based Adaptive Streaming using MPEG-DASH," MMSys '16 Proceedings of the 7th International Conference on Multimedia Systems, Article No. 41
VR映像を適切な品質で提供するためには、映像配信前の品質を適切に設計することが求められ、VR映像の品質を推定する手法が必要である。しかしながら、VR映像に対する客観品質評価技術は存在しない。
VR映像のタイルベース配信では、タイルごとに映像の品質を表すパラメータを変えることができるため、従来の2次元映像の品質推定と異なり複数のタイルごとの映像の品質を表すパラメータを利用した品質推定が必要となると考えられる。
例えば、タイルベース配信では、ユーザが向きを変えず、同じ方向のみを視聴している場合においては高画質の映像が表示される。一方で、 タイルベースVR映像を視聴する方向を変化させた場合では、新しい視聴方向のタイルを低画質のタイルから高画質のタイルに切り替えるまでの間に、低画質の映像を視聴するため、ユーザが画質の劣化を知覚する可能性がある。このように、視線移動が起きない場合に表示される高画質のタイルの品質と、視線移動の際に視聴する低画質タイルの品質は、それぞれユーザが実際に体感する品質に対する寄与率も異なると考えられる。
従来の2次元映像の品質評価ではこれらの視線移動による品質劣化を考慮する必要がなかったが、タイルベースVR映像の品質評価では高画質タイル、低画質タイルそれぞれの品質を考慮した評価を行う必要がある。
本発明は、上記の点を鑑みて、タイルベースVR映像を視聴した際にユーザが体感する品質を推定することを目的とする。
本発明の一形態に係る映像品質推定装置は、
第1のタイルで構成される映像と、前記第1のタイルの品質よりも低い品質を有する1つ又は複数の第2のタイルで構成される映像とを切り替えることによって視聴される映像を配信するサービスにおいてユーザが体感する品質を推定するための映像品質推定装置であって、
受信したタイルベース映像から、前記第1のタイルの品質を表す第1のパラメータと、前記1つ又は複数の第2のタイルの品質を表す第2のパラメータとを抽出する映像品質パラメータ抽出部と、
前記第1のパラメータと前記第2のパラメータとを使用して、タイルベース映像の品質を推定する映像品質推定部と、
を有し、
前記第2のパラメータの値が一定である場合、推定される前記タイルベース映像の品質が前記第1のパラメータの値の増加に伴い減少し、前記第1のパラメータの値が一定である場合、推定される前記タイルベース映像の品質が前記第2のパラメータの値の増加に伴い減少することを特徴とする
また、本発明の一形態に係る映像品質推定方法は、
第1のタイルで構成される映像と、前記第1のタイルの品質よりも低い品質を有する1つ又は複数の第2のタイルで構成される映像とを切り替えることによって視聴される映像を配信するサービスにおいてユーザが体感する品質を推定するための映像品質推定装置が実行する映像品質推定方法であって、
受信したタイルベース映像から、前記第1のタイルの品質を表す第1のパラメータと、前記1つ又は複数の第2のタイルの品質を表す第2のパラメータとを抽出するステップと、
前記第1のパラメータと前記第2のパラメータとを使用して、タイルベース映像の品質を推定するステップと、
を有し、
前記第2のパラメータの値が一定である場合、推定される前記タイルベース映像の品質が前記第1のパラメータの値の増加に伴い減少し、前記第1のパラメータの値が一定である場合、推定される前記タイルベース映像の品質が前記第2のパラメータの値の増加に伴い減少することを特徴とする

また、本発明の一形態に係るプログラムは、上記の装置の各部としてコンピュータを機能させる。
本発明によれば、タイルベースVR映像を視聴した際にユーザが体感する品質を推定することが可能になる。
本発明の一実施形態におけるVR映像品質推定装置の構成図である。 量子化パラメータ(QP)と映像品質値の関係例を表す図である。 本発明の一実施形態における映像品質推定方法のフローチャートである。 本発明の一実施形態におけるVR映像品質推定装置のハードウェア構成例を示す図である。
以下、図面とともに本発明の実施形態について詳細に説明する。
本発明の実施形態では、映像をタイルに分割して配信するタイルベース映像配信サービスにおいてユーザが体感する品質を推定する手法について説明する。
図1に本発明の一実施形態におけるVR映像品質推定装置1の構成を示す。VR映像品質推定装置1は、任意のタイルベースVR映像の品質を推定することを目的として、高画質タイルの映像の品質を表すパラメータPH、低画質タイルの映像の品質を表すパラメータPLを利用して、主観評価特性を定式化したモデル式を基に、パラメータPH及びパラメータPLを入力としてVR映像の品質を推定する装置である。
同図に示すVR映像品質推定装置1は、映像品質パラメータ抽出部11及び映像品質推定部12から構成される。
映像品質パラメータ抽出部11は、受信したタイルベースVR映像を入力とし、品質評価のために設定した高画質タイル・低画質タイルのそれぞれの映像の品質を表すパラメータPH,PLをタイルベースVR映像から抽出し、高画質タイル・低画質タイルのそれぞれのパラメータPH,PLを映像品質推定部12に出力する。
映像の品質を表すパラメータは、タイルベースVR映像を符号化するときに用いられるパラメータであり、タイルベースVR映像の高画質タイル・低画質タイルそれぞれに対する解像度、フレームレート、ビットレート、量子化パラメータ(QP)のうち少なくとも一つを意味する。すなわち、映像の品質を表すパラメータは上記の情報すべてでもよく、一部の情報でもよい。
また、ここで低画質タイルについては、VR映像全体をカバーする1枚のタイルとしても良いし、低画質タイルも高画質タイルと同様の複数のタイルに分割されたものとしてもよい。分割された低画質タイルを複数受信し、その低画質タイル群で一部の領域を表示する場合は、その領域を1枚として扱うことができる。以下は、簡単に説明するため、低画質タイルが1枚の場合について述べる。
映像品質推定部12は、高画質タイル・低画質タイルそれぞれのパラメータPH,PLを入力とし、タイルベースVR映像の品質(映像品質値)を推定して出力する。映像品質推定部12は、高画質タイル・低画質タイルそれぞれのパラメータPH,PLと映像品質値の関係を表したモデル式を有する。映像品質推定部12は、当該モデル式に高画質タイル・低画質タイルそれぞれのパラメータPH,PLを入力して、タイルベースVR映像品質値を推定する。
映像品質推定部12が用いるモデル式に関して、映像の品質を表すパラメータの例としてQPを用いて説明する。QPは映像の符号化に関するパラメータであり、QPの値が小さいほど映像がより映像が精細に表現できることを示す。
図2を用いてQPが異なる映像間での品質値の関係について説明する。図2は、タイルベースVR映像における高画質タイル・低画質タイルのQPと映像品質値の関係を示したものである。図中の横軸は高画質タイルのQP、縦軸は映像品質値を表しており、低画質タイルのQPが異なった複数の場合の線を図示している。低画質タイルのQPが一定の場合、高画質タイルのQPの増加に伴い、タイルベースVR映像の品質が劣化する。具体的には、視線移動が起こらない場合では、ユーザは一般的に高画質タイルを視聴するため、高画質タイルのQPの増加に伴って発生するVR映像のノイズやボケをユーザが知覚し、映像品質値が低下する。ここで、映像品質値とは、主観品質評価法から得られるタイルベースVR映像の品質値を表す。
一方で、高画質タイルのQPが同一であっても、低画質タイルのQPによって映像品質値は異なり、低画質タイルのQPが大きいほど映像品質値は小さくなる。具体的には、ユーザが視線移動をした際に、高画質タイルではなく低画質タイルをユーザは視聴する。その際に低画質タイルを見ることによってユーザは映像の品質劣化を知覚し、映像品質値が低下する。
映像品質推定部12は、上記のように、高画質タイルのQPの増加に伴って映像品質値が低下し、低画質タイルのQPの増加に伴って映像品質値が低下するという特性を表したモデル式を有する。当該モデル式を基にタイルベースVR映像を視聴した際に体感する映像品質値VQを求める手法として、(1)低画質タイルの品質を利用して求める手法と、(2)高画質タイルと低画質タイルの画質差を利用して求める手法がある。
それぞれの手法について、VR映像品質推定装置1が実行する処理手順について説明する。図3は、VR映像品質推定装置が実行する映像品質推定方法の一例を説明するためのフローチャートである。
ステップS1において、タイルベースVR映像が映像品質パラメータ抽出部11に入力される。
タイルベースVR映像は全体のVR映像がタイルに分割されており、タイルごとに画質が異なる。ここでは、ユーザの視聴方向のタイルは高画質タイルであり、その他のタイルは低画質タイルであると仮定する。
ステップS2において、映像品質パラメータ抽出部11は、入力されたタイルベースVR映像の品質を表すパラメータを抽出する。
タイルベースVR映像が高画質タイルと低画質タイルで構成される場合、映像品質パラメータ抽出部11は、高画質タイル・低画質タイルのそれぞれの映像の品質を表すパラメータPH,PLを抽出する。
ステップS3において、映像品質推定部12は品質評価のモデル式に基づき、映像品質値を算出する。
映像の品質を表すパラメータをQPとすると、図2を参照して説明したように、低画質タイルのQPが一定の場合、高画質タイルのQPの増加に伴い、タイルベースVR映像の品質が劣化する。したがって、高画質タイルによる品質値VQHは、高画質タイルのQPであるQPHの増加に伴い品質が減少する特性(例:指数関数、逆数のロジスティック関数など)に基づいて推定する。例えば、以下の数式に基づき品質推定が実施される。
Figure 0007215229000001
なお、上記の式(1)は以下のいずれかのモデル式で置き換えてもよいし、他の式を用いてよい。
Figure 0007215229000002
Figure 0007215229000003
Figure 0007215229000004
上記の式(1)~(4)では、a~cの係数は予め定めたものとしているが、係数は解像度・フレームレート、ビットレート等に対応して定まる数としてもよい。
例えば、式(4)のa,bは解像度・フレームレートを用いて以下のように計算できる。
Figure 0007215229000005
ここで、v1~v6は係数であり、rsはVR映像の解像度を、frはVR映像のフレームレートを示す。
また、図2を参照して説明したように、高画質タイルのQPが一定の場合、低画質タイルのQPの増加に伴い、タイルベースVR映像の品質が劣化する。したがって、低画質タイルの品質値VQLは、高画質タイルの場合と同様に、低画質タイルのQPであるQPLの増加に伴い品質が減少する特性(例:指数関数、逆数のロジスティック関数など)に基づいて推定する。例えば、以下の数式に基づき品質推定が実施される。
Figure 0007215229000006
なお、上記の式(6)は高画質タイルの品質推定と同様に他の式に置き換えることができる。
(1)低画質タイルの品質を利用して求める手法の場合、映像品質推定部12は、高画質タイルの品質値VQHと、低画質タイルの品質値VQLを利用して、以下の数式に基づいて映像品質値VQを推定する。
Figure 0007215229000007
(2)高画質タイルと低画質タイルの画質差を利用して求める手法の場合、映像品質推定部12は、高画質タイルの品質値VQHと、低画質タイルによる品質劣化値VQDを利用して、以下の数式に基づいて映像品質値VQを推定する。
Figure 0007215229000008
上記の式(8)において、VQHは式(1)~(4)のいずれか又は他の式によって推定される。VQDは高画質タイルのQP(QPH)と低画質タイルのQP(QPL)を用いて、以下の式に基づいて推定される。
Figure 0007215229000009
ただし、a~cは予め定めた係数とする。
なお、式(9)は以下のモデル式で置き換えてもよいし、他の式を用いてよい。
Figure 0007215229000010
ただし、a~fは予め定めた係数とする。
上記の数式では、係数は予め定めたものとしているが、係数は解像度・フレームレート・ビットレート等に対応して定まる数としてもよい。
ステップS4において、映像品質推定部12は算出された映像品質値VQを出力する。
以上の実施形態では、VQの推定をQPを用いて行った。VQの推定はQPを用いた推定に限定されず、映像の品質を表すパラメータである解像度・フレームレート・ビットレートの品質要因を利用して推定を行うことも可能である。
例えば、QPに加えて解像度及びフレームレートを利用して、映像品質に対して単調増加の関係を表す関数(例:線形関数、指数関数、ロジスティック関数など)を利用してVQを推定する。例えば、解像度及びフレームレートのいずれかを単独で用いて、VQHは以下の式で表される。
Figure 0007215229000011
Figure 0007215229000012
また、例えばQPと解像度、フレームレートを同時に用いた場合、VQHは以下の式で表される。
Figure 0007215229000013
VQLについてもRSL,FRLを用いて同様に表すことができる。
ただし、a~iは予め定めた係数、RSH,RSLはそれぞれ高画質タイル・低画質タイルの解像度、FRH,FRLはそれぞれ高画質タイル・低画質タイルのフレームレートを示している。
また、QPの代わりにビットレートを用いて、映像品質に対して単調増加の関係を表す関数(例:線形関数、指数関数、ロジスティック関数など)を利用してVQHを推定することもできる。例えば、以下の式で表される。
Figure 0007215229000014
VQLについてもBRLを用いて同様に表すことができる。
ただし、a~cは予め定めた係数、BRH,BRLはそれぞれ高画質タイル・低画質タイルのビットレートを示している。
同様にして、(2)高画質タイルと低画質タイルの画質差を利用して求める手法のときのVQDも解像度・フレームレート・ビットレートを利用して表すことが可能である。
なお、品質推定に用いた数式はあくまで一例であり、他の数式も本発明の範囲内に入るものとする。
図4に、本発明の一実施形態におけるVR映像品質推定装置1のハードウェア構成例を示す。VR映像品質推定装置1は、CPU(Central Processing Unit)151等のプロセッサ、RAM(Random Access Memory)やROM(Read Only Memory)等のメモリ装置152、ハードディスク等の記憶装置153等から構成されたコンピュータでもよい。例えば、VR映像品質推定装置1の機能及び処理は、記憶装置153又はメモリ装置152に格納されているデータやプログラムをCPU151が実行することによって実現される。また、VR映像品質推定装置1に必要な情報は、入出力インタフェース装置154から入力され、VR映像品質推定装置1において求められた結果は、入出力インタフェース装置154から出力されてもよい。
説明の便宜上、本発明の実施形態に係るVR映像品質推定装置1は機能的なブロック図を用いて説明しているが、本発明の実施形態に係るVR映像品質推定装置1は、ハードウェア、ソフトウェア又はそれらの組み合わせで実現されてもよい。例えば、本発明の実施形態は、コンピュータに対して本発明の実施形態に係るVR映像品質推定装置1の機能を実現させるプログラム、コンピュータに対して本発明の実施形態に係る方法の各手順を実行させるプログラム等により、実現されてもよい。また、各機能部が必要に応じて組み合わせて使用されてもよい。また、本発明の実施形態に係る方法は、実施形態に示す順序と異なる順序で実施されてもよい。
上記のように、タイルベースVR映像において、高画質タイル・低画質タイルそれぞれの映像の品質を表すパラメータを利用して、高画質タイルと低画質タイルの品質、又は高画質タイルと低画質タイルの画質差を捉え、視線移動における品質劣化を考慮したモデルを利用することで、タイルベースVR映像のユーザが視聴した際に体感する品質を推定することが可能になる。
以上、タイルベースVR映像の符号化のパラメータから、品質を推定することを可能にする手法について説明したが、本発明は、上記の実施形態に限定されることなく、特許請求の範囲内において、種々の変更・応用が可能である。
1 VR映像品質推定装置
11 映像品質パラメータ抽出部
12 映像品質推定部

Claims (6)

  1. 第1のタイルで構成される映像と、前記第1のタイルの品質よりも低い品質を有する1つ又は複数の第2のタイルで構成される映像とを切り替えることによって視聴される映像を配信するサービスにおいてユーザが体感する品質を推定するための映像品質推定装置であって、
    受信したタイルベース映像から、前記第1のタイルの品質を表す第1のパラメータと、前記1つ又は複数の第2のタイルの品質を表す第2のパラメータとを抽出する映像品質パラメータ抽出部と、
    前記第1のパラメータと前記第2のパラメータとを使用して、タイルベース映像の品質を推定する映像品質推定部と、
    を有し、
    前記第2のパラメータの値が一定である場合、推定される前記タイルベース映像の品質が前記第1のパラメータの値の増加に伴い減少し、前記第1のパラメータの値が一定である場合、推定される前記タイルベース映像の品質が前記第2のパラメータの値の増加に伴い減少することを特徴とする映像品質推定装置。
  2. 前記第1のタイルは高画質タイルであり、前記1つ又は複数の第2のタイルは1つ又は複数の低画質タイルであり、
    前記映像品質推定部は、前記高画質タイルの品質を表す第1のパラメータを使用して、前記高画質タイルの品質を推定し、前記1つ又は複数の低画質タイルの品質を表す第2のパラメータを使用して、前記1つ又は複数の低画質タイルの品質を推定し、前記高画質タイルの品質と前記1つ又は複数の低画質タイルの品質から前記タイルベース映像の品質を推定する、請求項1に記載の映像品質推定装置。
  3. 前記第1のタイルは高画質タイルであり、前記1つ又は複数の第2のタイルは1つ又は複数の低画質タイルであり、
    前記映像品質推定部は、前記高画質タイルの品質を表す第1のパラメータを使用して、前記高画質タイルの品質を推定し、前記高画質タイルの品質を表す第1のパラメータと、前記1つ又は複数の低画質タイルの品質を表す第2のパラメータとを使用して、前記高画質タイルと前記1つ又は複数の低画質タイルとの画質差を推定し、前記高画質タイルの品質と前記画質差から前記タイルベース映像の品質を推定する、請求項1に記載の映像品質推定装置。
  4. 前記第1のパラメータ及び前記第2のパラメータは、解像度、フレームレート、ビットレート、及び量子化パラメータのうち少なくとも1つである、請求項1乃至3のうちいずれか1項に記載の映像品質推定装置。
  5. 第1のタイルで構成される映像と、前記第1のタイルの品質よりも低い品質を有する1つ又は複数の第2のタイルで構成される映像とを切り替えることによって視聴される映像を配信するサービスにおいてユーザが体感する品質を推定するための映像品質推定装置が実行する映像品質推定方法であって、
    受信したタイルベース映像から、前記第1のタイルの品質を表す第1のパラメータと、前記1つ又は複数の第2のタイルの品質を表す第2のパラメータとを抽出するステップと、
    前記第1のパラメータと前記第2のパラメータとを使用して、タイルベース映像の品質を推定するステップと、
    を有し、
    前記第2のパラメータの値が一定である場合、推定される前記タイルベース映像の品質が前記第1のパラメータの値の増加に伴い減少し、前記第1のパラメータの値が一定である場合、推定される前記タイルベース映像の品質が前記第2のパラメータの値の増加に伴い減少することを特徴とする映像品質推定方法。
  6. 請求項1乃至4のうちいずれか1項に記載の装置の各部としてコンピュータを機能させるためのプログラム。
JP2019037769A 2019-03-01 2019-03-01 映像品質推定装置、映像品質推定方法及びプログラム Active JP7215229B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019037769A JP7215229B2 (ja) 2019-03-01 2019-03-01 映像品質推定装置、映像品質推定方法及びプログラム
PCT/JP2020/007628 WO2020179563A1 (ja) 2019-03-01 2020-02-26 映像品質推定装置、映像品質推定方法及びプログラム
US17/310,691 US11671654B2 (en) 2019-03-01 2020-02-26 Video quality estimation apparatus, video quality estimation method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019037769A JP7215229B2 (ja) 2019-03-01 2019-03-01 映像品質推定装置、映像品質推定方法及びプログラム

Publications (2)

Publication Number Publication Date
JP2020141374A JP2020141374A (ja) 2020-09-03
JP7215229B2 true JP7215229B2 (ja) 2023-01-31

Family

ID=72280636

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019037769A Active JP7215229B2 (ja) 2019-03-01 2019-03-01 映像品質推定装置、映像品質推定方法及びプログラム

Country Status (3)

Country Link
US (1) US11671654B2 (ja)
JP (1) JP7215229B2 (ja)
WO (1) WO2020179563A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022044252A1 (ja) * 2020-08-28 2022-03-03 日本電信電話株式会社 映像品質推定装置、映像品質推定方法及びプログラム
CN114513616B (zh) * 2020-11-16 2024-04-19 瑞昱半导体股份有限公司 高清晰度多媒体接口传送装置及其控制方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007251968A (ja) 2007-04-02 2007-09-27 Ricoh Co Ltd 画像処理装置及び画像処理方法
JP2009260940A (ja) 2008-03-21 2009-11-05 Nippon Telegr & Teleph Corp <Ntt> 映像品質客観評価方法、映像品質客観評価装置、およびプログラム
JP2011217345A (ja) 2010-03-18 2011-10-27 Nippon Telegr & Teleph Corp <Ntt> 映像伝送方法、映像伝送装置、及びプログラム
JP2014527778A (ja) 2011-08-29 2014-10-16 アイ.シー.ブイ.ティー リミテッド ビデオコンテンツシステムの制御
JP2017098604A (ja) 2015-11-18 2017-06-01 日本電信電話株式会社 映像品質推定装置、映像品質推定方法、及びプログラム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10623736B2 (en) * 2018-06-14 2020-04-14 Telefonaktiebolaget Lm Ericsson (Publ) Tile selection and bandwidth optimization for providing 360° immersive video

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007251968A (ja) 2007-04-02 2007-09-27 Ricoh Co Ltd 画像処理装置及び画像処理方法
JP2009260940A (ja) 2008-03-21 2009-11-05 Nippon Telegr & Teleph Corp <Ntt> 映像品質客観評価方法、映像品質客観評価装置、およびプログラム
JP2011217345A (ja) 2010-03-18 2011-10-27 Nippon Telegr & Teleph Corp <Ntt> 映像伝送方法、映像伝送装置、及びプログラム
JP2014527778A (ja) 2011-08-29 2014-10-16 アイ.シー.ブイ.ティー リミテッド ビデオコンテンツシステムの制御
JP2017098604A (ja) 2015-11-18 2017-06-01 日本電信電話株式会社 映像品質推定装置、映像品質推定方法、及びプログラム

Also Published As

Publication number Publication date
US11671654B2 (en) 2023-06-06
JP2020141374A (ja) 2020-09-03
US20220132205A1 (en) 2022-04-28
WO2020179563A1 (ja) 2020-09-10

Similar Documents

Publication Publication Date Title
Xu et al. Region-of-interest based conversational HEVC coding with hierarchical perception model of face
KR100935650B1 (ko) 비디오 품질 추정 장치, 방법 및 프로그램을 기록한 컴퓨터 판독가능한 기록매체
JP6328637B2 (ja) ビデオストリーミングサービスのためのコンテンツ依存型ビデオ品質モデル
Amirpour et al. PSTR: Per-Title Encoding Using Spatio-Temporal Resolutions
JP7215229B2 (ja) 映像品質推定装置、映像品質推定方法及びプログラム
CN112584119A (zh) 一种基于强化学习的自适应全景视频传输方法及系统
JP5221459B2 (ja) 映像品質推定装置、システム、方法およびプログラム
Devlic et al. QoE-aware optimization for video delivery and storage
Min et al. Perceptual video quality assessment: A survey
Shahid et al. Subjective quality assessment of H. 264/AVC encoded low resolution videos
Nur Yilmaz A no reference depth perception assessment metric for 3D video
JP6402088B2 (ja) 映像品質推定装置、映像品質推定方法、及びプログラム
Yeh et al. Temporal video transcoding based on frame complexity analysis for mobile video communication
Vlaović et al. Content dependent spatial resolution selection for MPEG DASH segmentation
EP3264709A1 (en) A method for computing, at a client for receiving multimedia content from a server using adaptive streaming, the perceived quality of a complete media session, and client
Takagi et al. Subjective video quality estimation to determine optimal spatio-temporal resolution
WO2022044252A1 (ja) 映像品質推定装置、映像品質推定方法及びプログラム
JP7351398B2 (ja) Vr映像符号化パラメータ算出装置、vr映像符号化パラメータ算出方法、及びプログラム
JP7400936B2 (ja) 映像品質推定装置、映像品質推定方法、及びプログラム
Brachmański et al. Subjective Assessment of the Quality of Video Sequences by the Young Viewers
JP7347527B2 (ja) 映像品質推定装置、映像品質推定方法、及びプログラム
Pal et al. G. 1070 model extension at full HD resolution for VP9/HEVC codec
Takagi et al. Optimized spatial and temporal resolution based on subjective quality estimation without encoding
WO2022190263A1 (ja) 情報処理装置、分析方法およびプログラム
WO2022190264A1 (ja) 情報処理装置、分析方法およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210701

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220719

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220902

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230102

R150 Certificate of patent or registration of utility model

Ref document number: 7215229

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150