KR101492060B1 - 동영상의 일괄 컬러 변환 방법 및 그 기록매체 - Google Patents

동영상의 일괄 컬러 변환 방법 및 그 기록매체 Download PDF

Info

Publication number
KR101492060B1
KR101492060B1 KR20130098569A KR20130098569A KR101492060B1 KR 101492060 B1 KR101492060 B1 KR 101492060B1 KR 20130098569 A KR20130098569 A KR 20130098569A KR 20130098569 A KR20130098569 A KR 20130098569A KR 101492060 B1 KR101492060 B1 KR 101492060B1
Authority
KR
South Korea
Prior art keywords
image
reference image
color information
shot
images
Prior art date
Application number
KR20130098569A
Other languages
English (en)
Inventor
황영배
김선주
김제우
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR20130098569A priority Critical patent/KR101492060B1/ko
Priority to PCT/KR2013/007761 priority patent/WO2015025999A1/ko
Application granted granted Critical
Publication of KR101492060B1 publication Critical patent/KR101492060B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/49—Segmenting video sequences, i.e. computational techniques such as parsing or cutting the sequence, low-level clustering or determining units such as shots or scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Image Processing (AREA)

Abstract

동영상의 일괄 컬러 변환 방법 및 그 기록매체가 개시된다. 본 발명의 일 실시예에 따른 동영상의 일괄 컬러 변환 방법은 동영상을 복수개의 샷(SHOT)으로 분할하는 1단계; 샷들 중에서 어느 하나의 샷을 선택하고, 샷을 이루는 영상들 중에서 적어도 하나의 기준 영상을 지정하는 2단계; 기준 영상과 동일한 영상을 포함하는 것으로, 기준 영상과 다른 컬러 정보를 가지는 타겟 영상을 입력하는 3단계; 기준 영상의 컬러 정보를 타겟 영상의 컬러 정보로 변환하는 4단계; 및 변환된 기준 영상의 컬러 정보로 선택된 샷을 이루는 전체 영상들의 컬러 정보를 모두 변환하는 5단계를 포함한다.

Description

동영상의 일괄 컬러 변환 방법 및 그 기록매체{METHOD FOR OVERALL TRANSFORMING COLOR OF VIDEO}
본 발명은 컬러 변환 방법에 관한 것으로, 보다 상세하게는 동영상의 컬러를 일괄적으로 변환하기 위한 동영상의 일괄 컬러 변환 방법과 상기 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체에 관한 것이다.
인터넷 기술 및 스트림 전송 기술의 발달로 인해 다양한 멀티미디어 콘텐츠들이 활발하게 제작 및 유통되고 있다. 특히 동영상 콘텐츠들의 경우에는 스마트 디바이스 및 소셜 네트워크의 확산으로 큰 폭의 성장세를 보이고 있는 추세이다.
이러한 동영상들은 다양한 신(SCENE) 및 컷(CUT)으로 구분된 부분 영상들을 조합 및 편집하여 이루어지는 것이 대부분이다. 이 때, 장비나 기후 등의 동영상 촬영 조건에 따라 하나의 동영상을 이루는 다수의 부분 영상들은 서로 컬러 정보가 상이한 경우가 매우 많은 바, 경우에 따라서는 전체 동영상에 있어 균일한 색감을 유지해야 하는 경우가 발생한다. 그리고 이 경우에 이용될 수 있는 기술이 동영상의 컬러 변환 기술이다.
동영상은 수 많은 연속 프레임들이 모여 이루어지는 바, 동영상 전체의 컬러 변환을 위해서는 상기 프레임들을 모두 RAW로 저장한 후에 적절한 영상 처리(예컨대 화이트 밸런스, 감마 코렉션 등)를 거치게 된다. 그러나 RAW는 데이터 용량이 매우 크기 때문에 RAW 형태로 동영상이 존재하기는 사실상 어려우며, 전체 동영상의 컬러를 변환하기 위해서는 수많은 프레임들을 일일이 컬러 변환하여야 하므로 시간이 매우 오래 걸린다는 단점이 있다.
이에 동영상의 컬러를 변환하기 위한 편집 툴(TOOL)들이 존재하고 있으나, 이러한 툴들은 컬러의 절대 값을 변환시키는 바, 애초부터 영상 간 존재하는 촬영 조건 차이에 따른 불균질한 컬러 차이를 완전히 보정하기 어려우므로 한계가 있다.
본 발명의 실시예들은 동영상의 전체 영상 또는 부분 영상에 대하여 일괄적으로 컬러를 변환시킬 수 있는 동영상의 일괄 컬러 변환 방법 및 그 기록매체를 제공하고자 한다.
본 발명의 일 측면에 따르면, 동영상을 복수개의 샷(SHOT)으로 분할하는 1단계; 상기 샷들 중에서 어느 하나의 샷을 선택하고, 상기 샷을 이루는 영상들 중에서 적어도 하나의 기준 영상을 지정하는 2단계; 상기 기준 영상과 동일한 영상을 포함하는 것으로, 상기 기준 영상과 다른 컬러 정보를 가지는 타겟 영상을 입력하는 3단계; 상기 기준 영상의 컬러 정보를 상기 타겟 영상의 컬러 정보로 변환하는 4단계; 및 상기 변환된 기준 영상과 타겟 영상 간의 변환 관계로 상기 선택된 샷을 이루는 전체 영상들의 컬러 정보를 모두 변환하는 5단계를 포함하는 동영상의 일괄 컬러 변환 방법이 제공될 수 있다.
또한, 상기 5단계 이후에, 상기 2단계부터 5단계까지 반복 수행하는 6단계를 더 포함할 수 있다.
또한, 상기 1단계에서의 동영상 분할은 두 개의 인접하는 영상의 픽셀 값의 차이를 계산하여 상기 차이가 임계값 미만이면 동일 샷으로 판단하고, 상기 임계값 이상이면 다른 샷으로 판단하여 분할하는 방법을 이용할 수 있다.
또한, 상기 2단계에서의 기준 영상은 상기 선택된 샷의 첫 번째 영상일 수 있다.
또한, 상기 첫 번째 영상과 상기 선택된 샷의 다른 영상들의 픽셀 값의 차이를 계산하여 상기 차이가 임계값 이상인 영상들 중에서 상기 차이가 가장 높은 영상을 새로운 기준 영상으로 추가하는 2-1 단계를 더 포함할 수 있다.
또한, 상기 5단계 이후에, 상기 변환된 전체 영상들의 컬러 정보를 각각 상기 타겟 영상의 컬러 정보와 비교하는 5-1단계; 상기 변환된 전체 영상들 중 상기 타겟 영상과의 컬러 정보 차이가 임계값 이상인 영상이 존재하는 경우에, 상기 컬러 정보 차이가 가장 큰 영상을 기준 영상에 추가하는 5-2단계; 상기 4단계 및 5단계를 재수행하는 5-3단계를 더 포함할 수 있다.
또한, 상기 타겟 영상은 상기 기준 영상과 동일한 카메라를 사용하여 찍은 영상이되 다른 영상 세팅을 갖는 영상이거나, 상기 기준 영상과 다른 카메라를 사용하여 찍은 영상이거나, 상기 기준 영상과 동일한 장면을 포함하는 것으로 인터넷을 통해 다운로드한 영상이거나, 상기 기준 영상을 영상 편집 소프트웨어를 사용하여 영상 처리한 영상일 수 있다.
또한, 상기 4단계는, 상기 기준 영상 및 타겟 영상에서 동일한 물리적 위
치에 있으면서 동일한 특징(feature)을 갖는 대응점을 검색하는 4-1단계; 상기 기준 영상 및 타겟 영상의 카메라 반응함수가 선형함수를 갖도록 복사 보정(radiometric calibration)하는 4-2단계; 및 컬러 변환 행렬을 산출하여 컬러 정보를 변환하는 4-3단계를 포함할 수 있다.
본 발명의 다른 측면에 따르면, 본 발명의 일 측면에 따른 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체가 제공될 수 있다.
본 발명의 실시예들은 동영상을 이루는 샷(SHOT)에 대하여 최소 하나의 영상의 컬러를 변환할 경우, 상기 샷을 이루는 다른 영상에 대해서도 일괄적으로 컬러를 변환할 수 있으므로 매우 효율적으로 동영상의 컬러를 일괄 변환할 수 있다.
또한, 변환하고자 하는 컬러 정보를 갖는 타겟 영상으로 다른 카메라 셋팅, 다른 카메라 또는 영상 편집 소프트웨어로 영상처리된 영상을 이용 가능하므로 동영상의 각 영상의 RAW를 별도로 저장할 필요가 없어 간편하다.
도 1은 본 발명의 일 실시예에 따른 동영상의 일괄 컬러 변환 방법을 나타내는 순서도이다.
도 2는 동영상에서 샷(SHOT)의 개념을 나타내는 영상 이미지이다.
도 3은 도 1에서 S120 단계를 세부적으로 나타내는 순서도이다.
도 4는 기준 영상과 타겟 영상의 일 예시를 나타내는 영상 이미지이다.
도 5는 도 1에서 S140 단계를 세부적으로 나타내는 순서도이다.
도 6은 도 1에서 S150 이후에 추가되는 단계를 세부적으로 나타내는 순서도이다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예들에 대하여 구체적으로 설명하도록 한다.
도 1은 본 발명의 일 실시예에 따른 동영상의 일괄 컬러 변환 방법(이하, 일괄 컬러 변환 방법)을 나타내는 순서도이다. 이하에서는 도 1에 도시된 각 단계별로 본 발명을 설명하도록 한다.
(1) 1단계(S110)
1단계는 동영상을 복수개의 샷(SHOT)으로 분할하는 단계이다.
본 명세서에 기재된 동영상의 계층적 구조에 대하여 간략히 설명하면, 동영상은 수 없이 많은 연속 프레임(FRAME)이 모여 이루어진다. 즉, 프레임은 동영상을 이루는 기본 단위에 해당한다. 본 명세서에서 프레임은 '영상'과 동일한 의미로 기재되었음을 밝혀둔다.
복수개의 연속적인 프레임은 하나의 샷(SHOT)을 구성할 수 있다. 샷은 전체적으로 유사한 영상을 가진 프레임들의 집합으로 정의될 수 있다. 즉, 동영상은 복수개의 샷으로 구성된다. 일반적으로 동영상 내에서 장면 전환이 이루어진다 함은 샷(SHOT)이 달라졌다는 의미로도 파악될 수 있다.
복수개의 샷은 의미적인 관계에 따라 하나의 신(SCENE)을 구성할 수 있다. 이러한 신(SCENE)은 동영상 편집자(내지 연출자)의 의도에 따라 달라질 수 있다. 즉, 편집자가 복수개의 샷(SHOT)을 어떻게 그룹화 하는지에 따라 신(SCENE)들은 다양하게 달라질 수 있다. 그러므로 하나의 신(SCENE) 내에서는 전혀 다른 영상들이 존재할 수도 있다.
따라서 본 발명의 1단계에서 동영상을 분할한다는 의미는 신(SCENE)의 분할을 의미하는 것이 아니라, 전체적으로 유사한 영상을 가진 프레임의 집합인 샷(SHOT)의 분할을 의미함을 밝혀둔다.
관련하여 도 2에서는 동영상에서의 샷(SHOT)의 개념을 나타낸다. 도 2는 하나의 뉴스(NEWS) 동영상을 15개의 샷(SHOT)으로 분할한 모습을 나타내고 있다. 설명하였듯이 각 샷들은 전체적으로 유사한 영상을 가진 프레임들의 집합이다. 도 2에서 각 샷의 위에 배치된 이미지는 각 샷에서 첫 번째 프레임이고, 아래에 배치된 이미지는 각 샷에서 마지막 프레임이다.
동영상을 복수개의 샷으로 분할하는 방법에 대하여 설명한다.
동영상을 복수개의 샷으로 분할하는 방법은 다양하게 존재할 수 있으며, 예컨대 두 개의 인접 영상(프레임)의 픽셀 값의 차이를 계산하여 상기 차이가 임계값 미만이면 동일 샷으로 판단하고, 상기 차이가 임계값 이상이면 다른 샷으로 판단하여 분할하는 방법을 이용할 수 있다(샷 경계 검출법, shot boundary detection). 여기에서 상기 임계값은 기 설정될 수 있다.
또는, 영상 간의 전체 컬러 히스토그램(color histogram)을 비교하고, 상기 컬러 히스토그램의 차이가 임계값 미만이면 동일 샷으로 판단하고, 상기 차이가 임계값 이상이면 다른 샷으로 판단하여 분할하는 방법을 이용할 수 있다.
또는, 동영상에서 장면의 변화가 많지 않거나 동영상 길이가 상대적으로 짧은 경우에는 사용자가 수동으로 샷을 분할하는 방법을 사용하는 것도 가능하다.
또는, 동영상에 오디오 정보가 포함되어 있는 경우에는 상기 오디오 정보를 이용하는 것도 가능하다. 예컨대 사람의 목소리는 개인마다 고유한 피치 정보가 존재하는 바, 피치 변화를 분석하여 화자가 바뀌는 것을 검출함으로써 샷을 분할하는 방법을 사용할 수 있다.
이렇듯 동영상을 복수개의 샷으로 분할하는 방법은 공지된 다양한 방법을 사용할 수 있으며, 상기 언급된 방법으로만 한정되는 것은 아니다(이상 S110).
(2) 2단계(S120)
2단계는 분할된 샷(SHOT)들 중에서 어느 하나의 샷을 선택하고, 상기 샷을 이루는 영상(프레임)들 중에서 적어도 하나의 기준 영상을 지정하는 단계이다.
상술하였듯이 하나의 샷은 복수개의 영상으로 구성된다. 상기 영상들은 유사한 픽셀 값 및 컬러 히스토그램값을 갖는다.
기준 영상은 샷을 이루는 복수개의 영상들 중에서 적어도 하나 이상일 수 있다. 예컨대 기준 영상은 선택된 샷의 첫 번째 영상(프레임)일 수 있다(DEFAULT값). 본 명세서에서는 선택된 샷의 첫 번째 영상을 제1 기준 영상으로 지칭하기로 한다.
기준 영상은 복수개가 지정될 수도 있다. 동일한 샷(SHOT) 내에서도 상대적으로 다른 영상들과 픽셀 값 및 컬러 히스토그램값이 차이가 큰 영상이 속할 수 있으며, 이 경우에는 컬러 변환 결과가 저하될 수 있기 때문이다. 본 명세서에서는 제1 기준 영상 이외에 기준 영상으로 추가되는 영상을 제2 기준 영상으로 지칭하기로 한다.
도 3에서는 도 1의 S120 단계를 세부적으로 나타내는 순서도를 도시하고 있다. 도 3에서와 같은 단계를 거쳐 제2 기준 영상이 지정될 수 있다.
구체적으로, 제1 기준 영상이 지정되면(S121) 제1 기준 영상과 선택된 샷의 다른 영상들의 컬러 정보 차이를 계산한다. 동일 샷 내에 있는 영상들은 비교적 유사한 컬러 정보를 가지고 있으나, 영상들끼리는 컬러 정보 차이가 존재할 수 있으며 경우에 따라서는 상기 차이가 클 수도 있다(S122). 한편, 본 명세서에서 컬러 정보란 영상으로부터 얻어지는 RGB(Red-Green-Blue)와 같은 색 모델뿐만 아니라 영상의 밝기, 채도, 색상 등과 같은 컬러 특성을 의미한다.
이 때, 기 설정된 임계값(예컨대 임계값은 10%)과 비교하였을 때에(S123), 상기 컬러 정보 차이(제1 기준 영상과 선택된 샷의 다른 영상들 사이)가 임계값 미만인 경우에는 영상들 간의 컬러 정보가 비교적 유사한 수준에 있음을 의미하는 바, 제2 기준 영상을 추가 지정할 필요가 없다. 따라서 다음 단계인 S130으로 넘어갈 수 있다. 그러나, 상기 컬러 정보 차이가 임계값 이상인 경우에는 컬러 정보 차이가 가장 큰 영상을 제2 기준 영상으로 추가함으로써(S124) 후술할 컬러 변환 결과에서의 신뢰성을 향상시킬 수 있다.
한편, 제2 기준 영상은 컬러 변환이 이루어진 후에도 추가적으로 지정될 수 있으며, 이에 대해서는 후술하기로 한다(이상 S120).
(3) 3단계(S130)
3단계는 타겟 영상을 입력하는 단계이다. 본 명세서에서 타겟 영상은 기준 영상과 동일한 영상을 포함하는 것으로, 기준 영상과는 다른 컬러 정보를 가지는 영상을 의미한다. 즉, 타겟 영상은 기준 영상의 컬러 정보의 변환 대상이 되는 컬러 정보를 가진 영상이다.
타겟 영상은 기준 영상과 동일한 영상을 포함하면 되고 특정 종류의 것으로 한정되지 않는다.
예컨대, 타겟 영상은 기준 영상과 동일한 카메라를 사용하여 찍은 영상이되 다른 영상 세팅(여기에서 영상 세팅은 화이트 밸런스, 감마 코렉션, 픽처 스타일, 밝기 조정 등의 영상 세팅을 의미함)을 갖는 영상이거나, 기준 영상과 다른 카메라를 사용하여 찍은 영상일 수 있다(카메라가 다르면 스펙트럼 감도, 사용되는 감마, 스타일 등이 달라짐). 또한 타겟 영상은 기준 영상과 동일한 장면을 포함할 경우에 인터넷을 통해 다운로드한 영상일 수도 있다. 또한 타겟 영상은 기준 영상을 영상 편집 소프트웨어(포토샵, 페인트샵과 같은 편집툴)를 이용하여 영상처리한 영상일 수도 있다.
관련하여 도 4는 기준 영상과 타겟 영상의 일 예시를 나타내는 영상 이미지이다. 좌측 이미지는 DSLR을 이용해서 찍은 영상이고, 우측 이미지는 스마트폰을 이용해서 찍은 영상이다. 촬영 장비가 다르므로 양 자의 색감은 상이하다. 이 때, 좌측 이미지가 기준 영상이고 우측 이미지가 타겟 영상이라 가정할 때에, 좌측 이미지는 본 발명의 컬러 변환 방법에 의해 우측 이미지와 같은 색감을 가지도록 변환될 수 있다. 즉, DSLR을 이용해서 찍은 영상을 마치 스마트폰으로 찍은 영상처럼 컨버젼할 수 있다. 물론 그 역의 경우도 가능하다(이상 S130).
(4) 4단계(S140)
4단계는 S130에서와 같이 타겟 영상이 입력되면, 기준 영상의 컬러 정보를 타겟 영상의 컬러 정보로 변환하는 단계이다(컬러 보정). 컬러 정보 변환 방법은 본 기술분야에서 공지된 다양한 컬러 보정 방법을 이용할 수 있다.
관련하여 본 발명의 발명자들이 출원하여 등록 받은 한국등록특허 제10-1227936호에서는 대응 영상의 컬러 보정 방법이 기재되어 있으며, 본 발명에서 S140 단계는 상기 특허에 기재된 대응 영상의 컬러 보정 방법이 적용될 수 있다. 즉, 본 발명의 S140 단계는 상기 특허의 내용을 포함할 수 있으며, 이하에서 간략히 설명하도록 한다.
도 5는 도 1에서 S140 단계를 세부적으로 나타내는 순서도이다.
도 5를 참조하면, 상기 4단계는 상기 기준 영상 및 타겟 영상에서 동일한 물리적 위치에 있으면서 동일한 특징(feature)을 갖는 대응점을 검색하는 4-1 단계와, 상기 기준 영상 및 타겟 영상의 카메라 반응함수가 선형함수를 갖도록 복사 보정(radiometric calibration, 영상의 카메라 반응 함수를 구하고, 이의 역함수를 영상에 가함으로써 카메라 반응 함수가 선형함수가 되도록 보정하는 것을 의미하며 카메라 반응 함수는 카메라의 영상을 통해 얻은 관찰(measurement)과 장면의 복사휘도간의 관계를 의미함)하는 4-2 단계와, 컬러 변환 행렬을 산출하여 컬러 정보를 변환하는 4-3 단계를 포함할 수 있다. 상기 각 단계에 대한 세부적인 설명은 한국등록특허 제10-1227936호에 구체적으로 기재되어 있는 바, 여기에서는 생략하도록 한다.
이로써 기준 영상의 컬러 정보는 타겟 영상의 컬러 정보로 변환된다(이상 S140).
(5) 5단계(S150)
5단계는 상기 변환된 기준 영상과 타겟 영상 간의 변환 관계로 상기 선택된 샷을 이루는 전체 영상들의 컬러 정보를 모두 변환하는 단계이다. 즉, 상기 4단계에서 기준 영상의 컬러 정보가 변환되면 상기 기준 영상과 타겟 영상 간의 변환 관계가 도출되고, 이를 토대로 동일한 샷 내에 있는 모든 영상들의 컬러 정보가 일괄적으로 변환될 수 있다.
상술한 것과 같이 동일한 샷 내에 있는 모든 영상들은 기준 영상과 컬러 정보가 비교적 유사한 영상들이다. 따라서 동일한 샷 내의 모든 영상들을 변환된 기준 영상의 컬러 정보로 변환하는 것은 상대적으로 속도가 빠를 뿐만 아니라 신뢰성이 높아질 수 있다.
한편, 동일한 샷 내의 모든 영상들에 대하여 일괄적으로 컬러 정보를 변환한 후에는 변환 결과에 따라 기준 영상을 추가하여(제2 기준 영상) 컬러 변환을 재수행하는 것이 가능하다.
앞서 언급한 것처럼 동일 샷 내에 있는 영상들은 비교적 유사한 컬러 정보를 가지고 있으나, 영상들끼리는 컬러 정보 차이가 존재할 수 있으며 경우에 따라서는 상기 차이가 클 수도 있다. 따라서 기준 영상은 처음부터 복수개가 지정될 수 있으나, 동일한 샷 내의 모든 영상들에 대하여 컬러 정보를 변환한 후에 그 변환 결과에 따라 기준 영상을 추가로 지정하는 것이 가능하다.
관련하여 도 6은 도 1에서 S150 이후에 추가되는 단계를 세부적으로 나타내는 순서도이다.
도 6을 참조하면, S150 단계에서 변환된 전체 영상들(동일 샷 내에 있는 영상들임)의 컬러 정보를 각각 상기 타겟 영상의 컬러 정보와 비교한다(S151). 이 때, 컬러 정보가 변환된 전체 영상들 중에서 상기 타겟 영상과의 컬러 정보 차이가 임계값 미만인 경우에는 전체 영상들에 대한 컬러 변환이 적절하게 수행된 것으로 볼 수 있다. 따라서 다음 단계로 넘어갈 수 있다(S160).
그러나 컬러 정보가 변환된 전체 영상들 중에서 상기 타겟 영상과의 컬러 정보 차이가 임계값 이상인 영상이 존재하는 경우에는(S152), 전체 영상들에 대한 컬러 변환이 적절하게 수행되지 않은 것으로 볼 수 있다. 따라서 기준 영상을 추가 지정할 필요가 있다. 그러므로 이와 같은 경우에는 컬러 정보 차이가 임계값 이상인 영상 중에서도 그 차이가 가장 큰 영상(가장 컬러 변환 결과가 나쁘게 나온 영상에 해당함)을 제2 기준 영상으로 추가한 다음(S153), 다시 S140 단계부터 재수행함으로써 컬러 변환의 신뢰성을 향상시킬 수 있다. 제2 기준 영상이 추가되어도 타겟 영상은 변하지 않으므로 가장 컬러 변환 결과가 나쁘게 나온 영상이 보다 타겟 영상에 가깝도록 변환되는 결과를 낳는다(이상 S150).
(6) 6단계(S160)
상술한 5단계까지의 과정이 종료되면 동영상을 이루는 복수개의 샷(SHOT) 중에서 선택된 샷(SHOT)에 대한 컬러 변환이 이루어진 상태이다. 따라서 다른 샷에 대하여도 컬러 변환을 수행하고자 할 때에는 새로운 샷을 선택하고 상술한 S120 단계부터 S150 단계까지 반복 수행하게 된다. 상기와 같은 과정을 반복 수행하면 동영상 전체 영상에 대하여 원하는 타겟 영상과 동일 또는 유사한 컬러 정보를 갖도록 영상들이 일괄적으로 변환될 수 있다.
상술한 바와 같이, 본 발명의 실시예들은 동영상을 이루는 샷(SHOT)에 대하여 최소 하나의 영상의 컬러를 변환할 경우, 상기 샷을 이루는 다른 영상에 대해서도 일괄적으로 컬러를 변환할 수 있으므로 매우 효율적으로 동영상의 컬러를 일괄 변환할 수 있다. 또한, 변환하고자 하는 컬러 정보를 갖는 타겟 영상으로 다른 카메라 셋팅, 다른 카메라 또는 영상 편집 소프트웨어로 영상처리된 영상을 이용 가능하므로 동영상의 각 영상의 RAW를 별도로 저장할 필요가 없어 간편하다는 장점을 갖는다.
이상에서 상술한 본 발명에 따른 동영상의 일괄 컬러 변환 방법은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현할 수 있다. 컴퓨터가 읽을 수 있는 기록메체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 상기 대응 영상의 컬러 보정 방법을 구현하기 위한 기능적인(function) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
이상, 본 발명의 실시예들에 대하여 설명하였으나 해당 기술 분야에서 통상의 지식을 가진 자라면 특허청구범위에 기재된 본 발명의 사상으로부터 벗어나지 않는 범위 내에서, 구성 요소의 부가, 변경, 삭제 또는 추가 등에 의해 본 발명을 다양하게 수정 및 변경시킬 수 있을 것이며, 이 또한 본 발명의 권리범위 내에 포함된다고 할 것이다.

Claims (9)

  1. 동영상의 일괄 컬러 변환 방법에 있어서,
    동영상을 복수개의 샷(SHOT)으로 분할하는 1단계;
    상기 샷들 중에서 어느 하나의 샷을 선택하고, 상기 샷을 이루는 영상들 중에서 적어도 하나의 기준 영상을 지정하는 2단계;
    상기 기준 영상과 동일한 영상을 포함하는 것으로, 상기 기준 영상과 다른 컬러 정보를 가지는 타겟 영상을 입력하는 3단계;
    상기 기준 영상의 컬러 정보를 상기 타겟 영상의 컬러 정보로 변환하는 4단계; 및
    상기 변환된 기준 영상과 타겟 영상 간의 변환 관계로 상기 선택된 샷을 이루는 전체 영상들의 컬러 정보를 모두 변환하는 5단계를 포함하고,
    상기 2단계에서의 기준 영상은 상기 선택된 샷의 첫 번째 영상이며,
    상기 동영상의 일괄 컬러 변환 방법은,
    상기 첫 번째 영상과 상기 선택된 샷의 다른 영상들의 픽셀 값의 차이를 계산하여 상기 차이가 임계값 이상인 영상들 중에서 상기 차이가 가장 큰 영상을 새로운 기준 영상으로 추가하는 2-1 단계를 더 포함하는 동영상의 일괄 컬러 변환 방법.
  2. 청구항 1에 있어서,
    상기 5단계 이후에,
    상기 2단계부터 5단계까지 반복 수행하는 6단계를 더 포함하는 동영상의 일괄 컬러 변환 방법.
  3. 청구항 1에 있어서,
    상기 1단계에서의 동영상 분할은 두 개의 인접하는 영상의 픽셀 값의 차이를 계산하여 상기 차이가 임계값 미만이면 동일 샷으로 판단하고, 상기 임계값 이상이면 다른 샷으로 판단하여 분할하는 방법을 이용하는 동영상의 일괄 컬러 변환 방법.
  4. 삭제
  5. 삭제
  6. 동영상의 일괄 컬러 변환 방법에 있어서,
    동영상을 복수개의 샷(SHOT)으로 분할하는 1단계;
    상기 샷들 중에서 어느 하나의 샷을 선택하고, 상기 샷을 이루는 영상들 중에서 적어도 하나의 기준 영상을 지정하는 2단계;
    상기 기준 영상과 동일한 영상을 포함하는 것으로, 상기 기준 영상과 다른 컬러 정보를 가지는 타겟 영상을 입력하는 3단계;
    상기 기준 영상의 컬러 정보를 상기 타겟 영상의 컬러 정보로 변환하는 4단계; 및
    상기 변환된 기준 영상과 타겟 영상 간의 변환 관계로 상기 선택된 샷을 이루는 전체 영상들의 컬러 정보를 모두 변환하는 5단계를 포함하고,
    상기 2단계에서의 기준 영상은 상기 선택된 샷의 첫 번째 영상이며,
    상기 동영상의 일괄 컬러 변환 방법은,
    상기 5단계 이후에,
    상기 변환된 전체 영상들의 컬러 정보를 각각 상기 타겟 영상의 컬러 정보와 비교하는 5-1단계;
    상기 변환된 전체 영상들 중 상기 타겟 영상과의 컬러 정보 차이가 임계값 이상인 영상이 존재하는 경우에, 상기 컬러 정보 차이가 가장 큰 영상을 기준 영상에 추가하는 5-2단계;
    상기 4단계 및 5단계를 재수행하는 5-3단계를 더 포함하는 동영상의 일괄 컬러 변환 방법.
  7. 청구항 1에 있어서,
    상기 타겟 영상은 상기 기준 영상과 동일한 카메라를 사용하여 찍은 영상이되 다른 영상 세팅을 갖는 영상이거나, 상기 기준 영상과 다른 카메라를 사용하여 찍은 영상이거나, 상기 기준 영상과 동일한 장면을 포함하는 것으로 인터넷을 통해 다운로드한 영상이거나, 상기 기준 영상을 영상 편집 소프트웨어를 사용하여 영상 처리한 영상인 동영상의 일괄 컬러 변환 방법.
  8. 청구항 1에 있어서,
    상기 4단계는,
    상기 기준 영상 및 타겟 영상에서 동일한 물리적 위치에 있으면서 동일한 특징(feature)을 갖는 대응점을 검색하는 4-1단계;
    상기 기준 영상 및 타겟 영상의 카메라 반응함수가 선형함수를 갖도록 복사 보정(radiometric calibration)하는 4-2단계; 및
    컬러 변환 행렬을 산출하여 컬러 정보를 변환하는 4-3단계를 포함하는 동영상의 일괄 컬러 변환 방법.
  9. 청구항 1 내지 청구항 3 및 청구항 6 내지 청구항 8 중 어느 한 항에 기재된 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR20130098569A 2013-08-20 2013-08-20 동영상의 일괄 컬러 변환 방법 및 그 기록매체 KR101492060B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR20130098569A KR101492060B1 (ko) 2013-08-20 2013-08-20 동영상의 일괄 컬러 변환 방법 및 그 기록매체
PCT/KR2013/007761 WO2015025999A1 (ko) 2013-08-20 2013-08-29 동영상의 일괄 컬러 변환 방법 및 그 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130098569A KR101492060B1 (ko) 2013-08-20 2013-08-20 동영상의 일괄 컬러 변환 방법 및 그 기록매체

Publications (1)

Publication Number Publication Date
KR101492060B1 true KR101492060B1 (ko) 2015-02-12

Family

ID=52483765

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130098569A KR101492060B1 (ko) 2013-08-20 2013-08-20 동영상의 일괄 컬러 변환 방법 및 그 기록매체

Country Status (2)

Country Link
KR (1) KR101492060B1 (ko)
WO (1) WO2015025999A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3803797A4 (en) 2018-09-03 2021-08-18 Samsung Electronics Co., Ltd. METHODS AND SYSTEMS FOR PERFORMING MODIFICATION OPERATIONS ON A MEDIA

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008300981A (ja) * 2007-05-29 2008-12-11 Canon Inc 画像処理装置および画像処理方法
KR20110016505A (ko) * 2008-06-17 2011-02-17 코닌클리케 필립스 일렉트로닉스 엔.브이. 컬러 조정
KR20110071854A (ko) * 2009-12-21 2011-06-29 한국전자통신연구원 입체 영상 시스템에서 영상 데이터의 색상 보정 장치 및 방법
KR20120133417A (ko) * 2011-05-31 2012-12-11 전자부품연구원 대응 영상의 컬러 보정 방법 및 그 기록매체

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100612842B1 (ko) * 2004-02-28 2006-08-18 삼성전자주식회사 앵커 샷 결정방법 및 결정장치
KR20070107628A (ko) * 2007-08-15 2007-11-07 (주)코인미디어 랩 동영상 샷의 분류
KR101266919B1 (ko) * 2009-08-28 2013-05-23 한국전자통신연구원 촬영된 영상의 컬러 변환 시스템 및 그 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008300981A (ja) * 2007-05-29 2008-12-11 Canon Inc 画像処理装置および画像処理方法
KR20110016505A (ko) * 2008-06-17 2011-02-17 코닌클리케 필립스 일렉트로닉스 엔.브이. 컬러 조정
KR20110071854A (ko) * 2009-12-21 2011-06-29 한국전자통신연구원 입체 영상 시스템에서 영상 데이터의 색상 보정 장치 및 방법
KR20120133417A (ko) * 2011-05-31 2012-12-11 전자부품연구원 대응 영상의 컬러 보정 방법 및 그 기록매체

Also Published As

Publication number Publication date
WO2015025999A1 (ko) 2015-02-26

Similar Documents

Publication Publication Date Title
CN109862389B (zh) 一种视频处理方法、装置、服务器及存储介质
RU2496250C1 (ru) Устройство и способ обработки изображения
JP2008277899A (ja) ホワイトバランス調整装置、撮像装置、およびホワイトバランス調整プログラム
KR101136506B1 (ko) 화상 생성 방법, 장치 및 그 프로그램 및 프로그램을 기록한 기록매체
US20110075924A1 (en) Color adjustment
US9087385B2 (en) Method for improving images captured underwater
JP7152065B2 (ja) 画像処理装置
CN113748426B (zh) 实时馈送中的内容感知的pq范围分析仪和色调映射
JP2005277981A (ja) 画像処理のための対象画像の選択
KR20150043145A (ko) 피사체 추적 기법을 이용한 카메라와 피사체 사이의 거리 변화 측정방법 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 거리 변화 측정 장치.
US9712796B2 (en) Metadata for use in color grading
US20100080457A1 (en) Method and apparatus for colour correction of image sequences
KR20180000729A (ko) 디스플레이 장치 및 이의 제어 방법
US9906740B2 (en) Image processing apparatus, image processing method, and medium for noise reduction
US9565412B2 (en) Image processing apparatus that develops photographed data, image processing method, and recording medium
KR101492060B1 (ko) 동영상의 일괄 컬러 변환 방법 및 그 기록매체
KR20130058972A (ko) 자동 영상보정을 위한 영상 처리 장치 및 방법
KR20100067268A (ko) 유효 영역을 이용한 자동 화이트 밸런스 조정 장치 및 방법
KR102136716B1 (ko) 관심영역 기반의 화질개선 장치와 그를 위한 컴퓨터로 읽을 수 있는 기록 매체
JP5084615B2 (ja) 画像表示装置
CN114140348A (zh) 一种对比度增强方法、装置及设备
JP4013024B2 (ja) 動画処理装置、動画処理方法、および記録媒体
JP2009239772A (ja) 撮像装置、画像処理装置、および画像処理方法、並びにプログラム
WO2019233800A1 (en) Adjusting parameters of light effects specified in a light script
US9147228B2 (en) Band dependent linearization for multiband remotely sensed and aerial imagery

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171207

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190201

Year of fee payment: 5