상기 목적을 달성하기 위한 본 발명에 따른 화질 평가 방법은, (a) 다수의 화질 평가자로부터 주관적 화질평가 데이터를 입력받는 단계; (b) 테스트 대상이 되는 비디오 영상을 촬영하여 영상 데이터로 입력받고, 입력된 상기 영상 데이터를 각 평가 항목별로 화질평가 인자값으로 산출하는 단계; (c) 상기 화질평가 인자값을 화질 평가 모델링을 통해 상기 주관적 화질평가 데이터에 반영하여 점수로 매핑시키는 단계; 및 (d) 상기 화질평가 인자값을 상기 주관적 화질평가 데이터와 상관도에 따라 연산하여 객관적 화질평가 데이터를 화면 상에 출력하는 단계;를 포함하는 것을 특징으로 한다.
또한, 본 발명의 다른 목적에 따른 화질 평가 시스템은, 다수의 화질 평가자로부터 주관적 화질평가 데이터를 입력받는 주관적 화질평가 입력부; 테스트 대상이 되는 비디오 영상을 촬영하여 영상 데이터로 입력받고, 입력된 상기 영상 데이터를 각 평가 항목별로 화질평가 인자값으로 산출하는 객관적 화질평가 측정부; 상기 화질평가 인자값을 화질 평가 모델링을 통해 상기 주관적 화질평가 데이터에 반영하여 점수로 매핑시키는 화질평가 모델링부; 및 상기 화질평가 인자값을 상기 주관적 화질평가 데이터와 상관도에 따라 연산하여 객관적 화질평가 데이터를 화면 상에 출력하는 화질평가 알고리즘부;를 포함하는 것을 특징으로 한다.
상기 객관적 화질평가 측정부는, 평가하고자 하는 대상이 되는 비디오 데이터를 화면 상으로 출력하는 디스플레이 장치; 상기 디스플레이 장치에서 출력되는 비디오 화면을 촬영하거나 캡쳐하여 영상 데이터로 입력하는 촬영기기; 및 촬영된 또는 캡쳐된 상기 영상 데이터에 대하여 각 평가 항목별로 수치 데이터를 산출하는 측정데이터 산출부;를 포함하는 것을 특징으로 한다.
또한, 상기 주관적 화질평가 데이터는, 선명도, 명암대비, 밝기, 색재현, 및 잡음에 대한 메트릭을 포함하고, 상기 객관적 화질평가 데이터는, 선명도, 명암대 비, 밝기, 색재현, 잡음, 및 왜곡특성에 대한 메트릭을 포함하는 것을 특징으로 한다.
또한, 상기 선명도는 Y-Preshoot, Y-Overshoot, Y-Ringing, MTF(Modulation Transfer Function)를 포함하는 메트릭을 갖고, 상기 명암대비는 흑백포화, Gamma Curve, Contrast Ratio, Black Level을 포함하는 메트릭을 가지며, 상기 밝기는 휘도 히스토그램, 휘도를 포함하는 메트릭을 가지며, 상기 색재현은 color 히스토그램, RGB 색좌표, 피부색 색좌표, White Balance, 색포화를 포함하는 메트릭을 가지며, 상기 잡음은 양자화 잡음, C/Y-SN을 포함하는 메트릭을 가지며, 상기 왜곡특성은 H/V Linearity와 Circle-Distortion을 포함하는 메트릭을 갖는 것을 특징으로 한다.
또한, 상기 객관적 화질평가 측정부는 화질평가 항목의 각 메트릭에 대해, 화질평가 항목별 상관도를 가지며, 각각의 메트릭은 단일의 각각의 측정값을 포함하고, 상기 화질평가 인자값을 상기 주관적 화질평가 데이터와 상관한 결과에는 각각의 측정값마다 단일의 가중 인자를 포함하며, 상기 객관적 화질평가 데이터는 메트릭 측정값들의 각각의 가중 인자들과 메트릭 측정값을 곱한 것들의 합으로 계산하여 얻는 것을 특징으로 한다.
그리고, 상기 객관적 화질평가 데이터는 각 평가 항목에 대해 수치 데이터로 출력함과 더불어, 각 평가 항목에 대한 결과를 평가 내용으로 출력하는 것을 특징으로 한다.
이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다.
우선 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다.
또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
도 1은 본 발명의 실시예에 따른 화질 평가 시스템의 구성을 개략적으로 나타낸 구성도이다.
본 발명에 따른 화질 평가 시스템(100)은, 주관적 화질평가 입력부(110), 객관적 화질평가 측정부(120), 화질평가 모델링부(130), 화질평가 알고리즘부(140) 등을 포함한 구성을 갖는다.
주관적 화질평가 입력부(110)는 다수의 화질 평가자로부터 주관적 화질평가 데이터를 입력받는다. 예컨대, 키보드(Keyboard)와 같은 키입력 장치를 통해 각각의 화질 평가자가 평가한 화질평가 데이터를 입력받는다. 또한, 주관적 화질평가 입력부(110)는 다수의 화질 평가자들에게 평가 항목에 대한 입력 화면을 제공하고, 입력 화면에서 요구하는 각 평가 항목별로 화질 평가자들로부터 화질평가 데이터를 입력받게 할 수도 있다.
객관적 화질평가 측정부(120)는 비디오 플레이어로부터 출력되는 비디오 영상을 촬영하여 영상 데이터로 입력받고, 입력된 영상 데이터를 각 평가 항목별로 화질평가 인자값으로 산출한다.
화질평가 모델링부(130)는 객관적 화질평가 측정부(120)에서 측정된 화질평가 인자값을 화질 평가 모델링을 통해 주관적 화질평가 데이터에 반영하여 점수로 매핑시킨다. 이때, 화질 평가 모델링은 객관적 화질평가 인자 데이터를 입력받아 주관적 화질평가 데이터와 동일한 점수폭을 갖도록 근사화시키는 것이다.
화질평가 알고리즘부(140)는 화질평가 인자값을 상관도에 따라 주관적 화질평가 데이터와 연산하여 객관적 화질평가 데이터로 화면 상에 출력한다. 화질평가 알고리즘부(140)에서 출력되는 화질평가 데이터는 각 평가 항목에 대해 수치 데이터로 출력할 뿐만 아니라, 각 평가 항목에 대한 결과를 평가 내용으로 출력할 수 있다.
도 2는 객관적 화질평가 측정부의 구성을 개략적으로 나타낸 구성도이다.
도 2에 도시된 바와 같이, 객관적 화질평가 측정부(120)는 비디오 디스플레이어(210), 촬영기기(220), 및 측정데이터 산출부(230)를 포함한 구성을 갖는다.
비디오 디스플레이어(210)는 평가하고자 하는 대상이 되는 비디오 데이터를 화면 상으로 출력하는 디스플레이 장치이다.
촬영기기(220)는 비디오 디스플레이어(210)에서 출력되는 비디오 화면을 촬영하거나 캡쳐하여 영상 데이터로 입력한다.
측정데이터 산출부(230)는 촬영된 또는 캡쳐된 영상 데이터에 대하여 각 평가 항목별로 수치 데이터를 산출한다. 예컨대, 측정데이터 산출부(230)는 바람직하게는 촬영기기(220)로부터 입력된 비디오 영상을 분석하여 각 평가 항목별로 수치 데이터를 산출할 수 있는 컴퓨터 장치 등을 이용할 수 있다.
도 3은 본 발명의 실시예에 따른 화질 평가 방법을 설명하기 위한 동작 흐름도이다.
본 발명은, 비디오 화질을 평가하기 위한 주관적 방법들에 따르는 단점들을 피하기 위해, 비디오 화질을 평가하는 자동화된 객관적 방법들을 이용하는 것이 바람직하다. 자동화된 객관적 방법들은 비디오 화질의 우수함 또는 저하의 양을 정하기 위해 객관적 성능들의 지수를 얻도록 추구한다. 비디오 알고리즘들이 연속적으로 비디오 스트림에 나타남으로써, 하나 또는 그 이상의 비디오 화질의 객관적 측정들을 얻기 위한 처리는 비디오 알고리즘들의 다른 유형들을 빠르게 분석할 수 있기 위해 자동화되어야 한다. 따라서, 본 발명에 따른 객관적 화질평가 측정부(120)와, 화질평가 모델링부(130), 및 화질평가 알고리즘부(140)를 통해 자동화가 이루어지게 된다.
또한, 비디오 화질의 객관적 측정들은 동일한 세팅들이 유지되어 있다고 가정한 상태에서, 테스트가 반복될 때 항상 동일한 결과 값을 얻게 된다. 비디오 화질의 궁극적인 목적이 시청자에게 가장 호소력 있는 화상을 제공하는 것이기 때문에, 비디오 화질의 객관적 측정들의 값에 대한 최종 판단은 객관적 측정들이 주관 적 결과들과 가진 상관 관계의 정도이다. 통계적 분석은 주관적 화질평가 입력부(110)에 의해 주관적으로 얻어진 결과들과 객관적 화질평가 측정부(120)에 의해 객관적으로 얻어진 결과들을 상관시키는 데 이용된다.
먼저, 비디오 화질의 평가를 위한 전문가 집단으로부터 주관적 화질평가 입력부(110)를 통해 테스트 대상의 비디오 영상에 대해 주관적 화질평가를 입력받는다(S302).
이때, 주관적 화질평가의 메트릭(Metric)은 다음 표1과 같이 선명도, 명암대비, 밝기, 색재현, 잡음 등을 포함한다.
구 분 |
선명도 |
명암대비 |
밝기 |
색재현 |
잡음 |
Total |
30점 |
30점 |
20점 |
10점 |
10점 |
Displayer1 |
24 |
25 |
16 |
9 |
9 |
83 |
표1과 같이 화질 평가자로부터 선명도 24, 명암대비 25, 밝기 16, 색재현 9, 잡음 9 등에 대한 메트릭을 점수로써 각각 입력받는 것이다.
이어, 화질 평가 시스템(100)은 테스트 대상의 비디오 영상에 대해 객관적 화질평가 측정부(120)에 의해 객관적 화질평가 항목을 측정한다(S304).
즉, 도 2에 도시된 바와 같이 비디오 디스플레이어(110)에서 출력되는 비디오 영상을 촬영기기(220)로 촬영하고, 촬영한 비디오 영상에 대해 도 4에 도시된 화질 평가 항목을 측정하여 화질 지수를 점수로 얻는 것이다.
예컨대, 도 4에 도시된 바와 같이, 평가 항목 "선명도"는 Y-Preshoot, Y-Overshoot, Y-Ringing, MTF(Modulation Transfer Function)를 포함하는 메트릭을 갖는다. 또한, 평가 항목 "명암대비"는 흑백포화, Gamma Curve, Contrast Ratio, Black Level을 포함하는 메트릭을 갖는다. 또한, 평가 항목 "밝기"는 휘도 히스토그램, 휘도를 포함하는 메트릭을 갖는다. 또한, 평가 항목 "색재현"은 color 히스토그램, RGB 색좌표, 피부색 색좌표, White Balance, 색포화를 포함하는 메트릭을 갖는다. 또한, 평가 항목 "잡음"은 양자화 잡음, C/Y-SN을 포함하는 메트릭을 가지며, 평가 항목 "왜곡특성"은 H/V Linearity와 Circle-Distortion을 포함하는 메트릭을 갖는다.
그리고, 화질 평가 항목은 도 5에 도시된 바와 같이 Y-Preshoot, Y-Overshoot, Y-Ringing, MTF(Modulation Transfer Function)를 포함하는 평가 항목 "선명도"는 0 ~ 30 점 이내의 화질 지수를 갖는다. 또한, 흑백포화, Gamma Curve, Contrast Ratio, Black Level을 포함하는 평가 항목 "명암대비"는 0 ~ 20 점 이내의 화질 지수를 갖는다. 또한, 휘도 히스토그램, 휘도를 포함하는 평가 항목 "밝기"는 0 ~ 20 점 이내의 화질 지수를 갖는다. 또한, color 히스토그램, RGB 색좌표, 피부색 색좌표, White Balance, 색포화를 포함하는 평가 항목 "색재현"은 0 ~ 0 점 이내의 화질 지수를 갖는다. 또한, 양자화 잡음, C/Y-SN을 포함하는 평가 항목 "잡음"은 0 ~ 10 점 이내의 화질 지수를 가지며, H/V Linearity와 Circle-Distortion을 포함하는 평가 항목 "왜곡특성"도 0 ~ 10 점 이내의 화질 지수를 갖는다.
한편, 선택된 메트릭들의 객관적 결과들은 정보 신호에 대한 객관적 화질 평가를 위해서 상관 결과들과 결합된다. 따라서, 객관적 화질평가 측정부(120)는 화질평가 항목의 각 메트릭에 대해, 예컨대, 다음 표2와 같은 화질평가 항목별 상관도를 갖는다.
화질평가 항목 |
사용된 메트릭 |
화질평가 항목별 상관도 |
선명도 (30점) |
Y-Preshoot |
0.67 |
Y-Overshoot |
0.67 |
Y-Ringing |
0.46 |
MTF |
0.42 |
명암대비 (20점) |
흑백포화 |
0.37 |
Gamma Curve |
0.35 |
Contrast Ratio |
0.3 |
Black Level |
0.27 |
밝기 (20점) |
휘도 히스토그램 |
0.5 |
휘도 |
0.55 |
색재현 (10점) |
Color 히스토그램 |
0.56 |
RGB 색좌표 |
0.49 |
피부색 색좌표 |
0.08 |
White Balance |
0.11 |
색포화 |
0.50 |
Noise (10점) |
양자화 Noise |
0.63 |
C/Y-SN |
0.73 |
왜곡특성 (10점) |
H/V Linearity |
0.69 |
Circle-Distortion |
0.34 |
이어, 객관적 화질평가 측정부(120)는 평가 항목에 대해 객관적 화질평가 인자를 도출한다(S306).
즉, 객관적 화질평가 측정부(120)는 선명도에 대한 해당 인자(X1 ~ X8), 명암대비에 대한 해당 인자(X9 ~ X14), 밝기에 대한 해당 인자(X15 ~ X16), 색재현에 대한 해당 인자(X17 ~ X18), 잡음에 대한 해당 인자(X19)를 각각 산출하는 것이다.
이후, 화질평가 모델링부(130)는 화질평가 인자값을 주관적 화질평가 데이터에 반영하여 점수로 매핑한다(S308).
여기서, 각각의 메트릭들은 단일의 각각의 측정값을 포함하고, 상관 결과들은 각각의 측정값마다 단일의 가중 인자를 포함하며, 객관적 화질 측정의 점수는 다음 수학식1과 같이 메트릭 측정값들의 각각의 가중 인자들과 메트릭 측정값을 곱한 것들의 합으로 계산된다.
수학식1은 평가 항목 중 "선명도"에 대한 점수를 나타낸다.
다음 수학식2는 "명암대비" 평가 항목에 대한 점수를 나타낸다.
다음 수학식3은 "밝기" 평가 항목에 대한 점수를 나타낸다.
다음 수학식4는 "색재현" 평가 항목에 대한 점수를 나타낸다.
전술한 바와 같은 과정으로 화질평가 인자값을 주관적 화질평가 데이터에 반영하여 점수로 매핑한 이후, 화질 평가 시스템(100)은 화질평가 알고리즘부(140)를 통해 상관도에 의한 화질평가 결과를 확정한다(S310).
즉, 다음 표3과 같이 주관적 화질평가 데이터에, 상관도에 따른 화질 예측 모델(IQPM:Image Quality Prediction Model)값을 산출하여 화질평가를 확정하게 되는 것이다.
항목 |
선명도 |
명암대비 |
밝기 |
색재현 |
Noise |
Total |
점수 |
30점 |
30점 |
20점 |
10점 |
10점 |
100점 |
구분 |
주관평가 |
IQPM |
주관평가 |
IQPM |
주관평가 |
IQPM |
주관평가 |
IQPM |
주관평가 |
IQPM |
주관평가 |
IQPM |
제품1 |
24 |
25.7 |
25 |
23.4 |
16 |
14.9 |
9 |
8.3 |
9 |
9.1 |
83 |
82.5 |
절대편차 |
0.5 |
한편, 화질 평가 항목의 각각의 메트릭에 대해 도 6에 도시된 바와 같이 10점으로 균일하게 평준화시키게 되면, 도시된 그래프와 같이 물리적 메트릭과 화질 인식도 간은 선형적인 관계가 아님을 알 수 있다.
그리고, 화질 평가 시스템(100)은 도 7에 도시된 바와 같이 화질 평가 결과를 화면 상으로 출력해 준다. 도 7에 도시된 화질 평가 결과에 대한 화면은, 화질 평가 항목 중 선명도 메트릭에 대한 결과값과, 선명도 메트릭의 결과에 대한 설명, 선명도 메트릭의 그래프, 입력 메트릭의 정의(File Input Define), 평가 항목의 점수 결과, 각 평가 항목에 대한 설명 등을 나타낸다.
전술한 바와 같이 본 발명에 의하면, ㅍ다수의 화질 평가단에 의해 수행된 주관적 화질 평가 데이터를 근거로, 다수의 객관적 화질 평가 데이터를 산출하여 점수로 매핑하고, 상관도에 따라 가중치를 부가하여 집계한 후 기준치와 비교하여 화질 평가 결과를 얻도록 하는 화질 평가 방법 및 시스템을 실현할 수 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다.
따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다.
본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.