KR101379132B1 - 3차원 입체 영상의 화질을 개선하기 위한 방법 - Google Patents

3차원 입체 영상의 화질을 개선하기 위한 방법 Download PDF

Info

Publication number
KR101379132B1
KR101379132B1 KR1020070005727A KR20070005727A KR101379132B1 KR 101379132 B1 KR101379132 B1 KR 101379132B1 KR 1020070005727 A KR1020070005727 A KR 1020070005727A KR 20070005727 A KR20070005727 A KR 20070005727A KR 101379132 B1 KR101379132 B1 KR 101379132B1
Authority
KR
South Korea
Prior art keywords
image
histogram
cumulative
brightness values
calculated
Prior art date
Application number
KR1020070005727A
Other languages
English (en)
Other versions
KR20080068249A (ko
Inventor
안상준
한영섭
최광철
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070005727A priority Critical patent/KR101379132B1/ko
Publication of KR20080068249A publication Critical patent/KR20080068249A/ko
Application granted granted Critical
Publication of KR101379132B1 publication Critical patent/KR101379132B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/40Image enhancement or restoration using histogram techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/55Depth or shape recovery from multiple images
    • G06T7/593Depth or shape recovery from multiple images from stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

본 발명은 3차원 입체 영상의 화질을 개선하기 위한 방법을 제시한다. 이를 위해 본 발명은 두 개의 영상 입력부를 통해 입력되는 좌우 영상의 히스토그램을 생성한 후, 생성된 히스토그램에서 미리 정해진 범위 내의 명도값들에 대응되는 화소수를 순차적으로 누적하여 그 차이를 이용해 영상의 화질 저하를 최소화한다. 이와 같은 방법은 좌우 영상의 특성을 유사하게 만들어 3차원 입체 영상의 화질을 개선할 수 있도록 하는 이점을 제공한다.
3D, 히스토그램, 화질개선, 영상처리

Description

3차원 입체 영상의 화질을 개선하기 위한 방법{METHOD FOR IMPROVING QUALITY OF 3D IMAGE}
도 1은 본 발명의 실시 예에 따른 두 개의 영상 입력부를 통해 입력되는 영상의 구조도,
도 2는 좌우의 특성이 다른 입체 영상의 예시도,
도 3은 본 발명의 실시 예에 따른 3차원 입체 영상의 화질을 개선하기 위한 장치의 블록 구성도,
도 4는 본 발명의 실시 예에 따른 흑백 영상의 히스토그램 예시도,
도 5는 본 발명의 실시 예에 따른 칼라 영상의 히스토그램 예시도,
도 6은 본 발명의 실시 예에 따른 3차원 입체 영상의 화질을 개선하기 위한 제어 흐름도.
도 7a와 도 7b는 본 발명의 실시 예에 따른 히스토그램의 매칭을 위한 예시 코드.
본 발명은 입체 영상의 처리 방법에 관한 것으로, 특히 3차원 입체 영상의 화질을 개선하기 위한 방법에 관한 것이다.
최근 이동 통신 단말기는 소비자의 욕구에 따라 그 기능이 다양해지고 있다. 이동 통신 단말기에는 기본적인 통화 기능 이외에, 게임이나 인터넷 검색, 이메일(E-mail) 수신 및 발신, 대금 결재 등 다양한 기능이 구비되고 있으며, 최근에는 카메라 렌즈가 설치되어 사물의 형상을 찍을 수 있는 카메라 폰이 상용화되고 있다.
카메라 폰은 널리 보급됨에 따라 그 기능이 증대되고 있으며, 특히 근래에는 평면적인 영상뿐만 아니라 입체적인 영상을 촬영할 수 있는 카메라 폰이 등장하게 되었다. 이와 같은 카메라 폰은 두 개의 카메라 센서를 사용하여 3차원 입체 영상을 촬영한다.
하지만, 종래의 3차원 입체 영상은 두 개의 카메라 센서의 특성에 대한 고려없이, 기존의 한 개의 카메라 센서를 사용할 때와 마찬가지로 촬영이 되어 각 센서를 통해 촬영된 두 영상은 색감이나 밝기 등에서 차이가 발생한다. 이는 두 개의 카메라 센서가 하드웨어적으로 똑같은 설정이 되었다 하더라도 각각 영상을 받아들이는 특성의 차이로 인한 것이며, 두 개의 카메라 센서 구조를 이용할 때에 나타나는 문제이다.
각 센서에서 촬영된 영상은 이후 3차원 입체 영상을 위해 하나의 이미지로 보여지게 되는데, 이 과정에서 좌우 영상의 밝기 및 색감 등의 특성에 차이가 발생하여 최종적으로 출력되는 입체 영상의 화질에 저하가 발생하게 된다.
상기한 바와 같이 기존의 두 개의 카메라 센서의 특성에 대한 고려없이 촬영된 각 영상은 그 화질에 차이가 생기고, 이에 따라 최종적으로 출력되는 3차원 입체 영상의 화질에 저하가 발생하는 문제점이 있다.
따라서, 본 발명은 두 개의 카메라로 촬영된 3차원 입체 영상을 좀 더 선명하게 출력하기 위한 3차원 입체 영상의 화질을 개선하기 위한 방법을 제공한다.
상술한 바를 달성하기 위한 본 발명은 3차원 입체 영상의 화질을 개선하기 위한 방법에 있어서, 이동 통신 단말기에서 3차원 입체 영상의 화질을 개선하기 위한 방법에 있어서, 두 개의 영상 입력부로부터 하나의 피사체에 대해 각각 좌우 영상에 해당하는 제 1 영상 및 제 2 영상을 수신하는 과정과, 상기 제 1 영상 및 제 2 영상에 대한 히스토그램을 비교하여 화소수에 따라 기준 영상과 복원 대상 영상을 설정하는 과정과, 상기 기준 영상과 복원 대상 영상의 히스토그램을 이용하여 정규화된 누적합을 산출하는 과정과, 상기 누적합이 산출될 때마다 누적합 간의 차이를 계산하여 히스토그램을 생성하고, 상기 생성된 히스토그램을 이용하여 상기 기준 영상에 매칭되는 영상을 생성하는 과정을 포함함을 특징으로 하는 3차원 입체 영상의 화질을 개선하기 위한 방법을 포함함을 특징으로 한다.
이하 본 발명의 바람직한 실시 예들의 상세한 설명이 첨부된 도면들을 참조하여 설명될 것이다. 그리고 본 발명을 설명함에 있어, 관련된 공지 기능 혹은 구 성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
본 발명은 3차원 입체 영상의 화질을 개선하기 위한 방법을 제시한다. 이를 위해 본 발명은 두 개의 영상 입력부를 통해 입력되는 좌우 영상의 히스토그램을 생성한 후, 생성된 히스토그램에서 미리 정해진 범위 내의 명도값들에 대응되는 화소수를 순차적으로 누적하여 그 차이를 이용해 영상의 화질 저하를 최소화한다. 이와 같은 방법은 좌우 영상의 특성을 유사하게 만들어 3차원 입체 영상의 화질을 개선할 수 있도록 하는 이점을 제공한다.
이하, 본 발명의 실시 예에 따른 두 개의 영상 입력부를 통해 입력되는 입체 영상의 구조를 보인 도 1을 참조하여 설명한다. 본 발명에서 이용되는 입체 영상은 기존의 영상과는 달리 도 1과 같은 구조를 가진다.
두 개의 영상 입력부는 이동 통신 단말기에 장착되는 카메라 센서를 의미하며, 도 1에 도시된 바와 같이 각 영상 입력부를 통해 입력되는 두 개의 좌우 영상은 하나의 피사체를 촬영하여 얻어지는 영상이다. 두 개의 카메라 센서를 이용하여 촬영된 좌우 두 개의 영상은 하나로 붙어서 저장이 된다. 이때, 좌우 영상은 도 1에 도시된 바와 같이 TypeⅠ, TypeⅡ 중 어느 하나의 형태로 저장이 된다.
전술한 바와 같이 오른쪽 영상과 왼쪽 영상은 두 개의 영상 입력부를 통해 각각 별개로 촬영되어 저장된다. 하지만, 촬영된 각각의 영상은 좌우 카메라 센서의 물리적 특성으로 인해 화질의 차이가 발생하게 된다. 이와 같은 이유로 화질의 차이가 발생한 영상의 예를 도 2를 참조하여 설명한다.
도 2는 본 발명의 실시 예에 따른 좌우의 특성이 다른 입체 영상의 예시도이다. 도 2에 도시된 바와 같이 두 개의 영상 입력부를 통해 촬영된 왼쪽 영상(210)과 오른쪽 영상(220)은 두 개의 카메라 센서의 영상을 받아들이는 특성에 의해 화질에 차이가 발생한다. 본 발명의 실시 예에서 두 개의 좌우 영상은 인터리빙(Interleaving) 되어 하나의 영상으로 출력되는데, 전술한 바와 같이 좌우 영상의 화질에 차이가 생길 경우 출력되는 입체 영상의 화질이 저하되는 문제점이 발생하게 된다.
구체적으로 설명하면, 최종적으로 출력되는 영상은 왼쪽 영상과 오른쪽 영상의 일정한 범위로 나누어진 부분들이 차례대로 교차되는 방식으로 합쳐져 하나의 영상으로 출력된다. 이때 이동 통신 단말기는 입체 효과를 내는 패널을 장착하여 두 개의 영상이 합쳐지면서 생기는 이미지의 잡음을 제거하여 자연스러운 입체 영상이 출력되도록 한다. 이와 같은 좌우 영상이 합쳐치는 방법은 본 발명의 실시 예에 따라 변경이 가능하다.
전술한 바와 같이 최종 영상은 좌우 영상의 화질에 차이가 발생함에 따라 그 화질이 저하된다는 문제점이 있다. 따라서, 본 발명에서는 이러한 좌우 영상의 화질의 차이로 인한 3차원 입체 영상의 화질 저하 문제를 해결하기 위한 방법을 제안하는 것이다.
이하, 본 발명의 실시 예에 따른 3차원 입체 영상의 화질을 개선하기 위한 장치의 블록 구성도인 도 3을 참조하여 설명한다.
도 3를 참조하면, 카메라 센서인 제 1 영상 입력부(300)와 제 2 영상 입력 부(310)는 각각 하나의 피사체에 대한 촬영 영상인 오른쪽 영상 및 왼쪽 영상을 생성하여 그 오른쪽 영상 및 왼쪽 영상을 디지털로 변환하여 출력한다. 하지만, 이와 같은 영상 입력부(300, 310)를 통해 촬영된 좌우 영상은 두 개의 카메라 센서의 물리적 특성의 차이로 인해 색감이나 밝기 등에서 차이가 발생한다. 여기서, 물리적 특성이란 카메라 센서가 영상을 받아들이는 특성을 말하며, 이로 인해 하드웨어적으로 같은 값이 설정되어도 촬영된 각 영상의 특성은 다르게 나타난다. 예를 들어, 두 개의 카메라 센서의 밝기가 각각 10으로 동일하게 설정이 되었더라도 촬영된 각 영상의 밝기에는 차이가 생긴다.
이동 통신 단말기는 두 개의 영상 입력부(300, 310)를 통해 입력된 좌우 영상을 도 1에 도시된 형태 중 어느 하나의 형태로 저장한다. 그리고나서 이동 통신 단말기는 전송이 필요한 시점에 저장해놓은 좌우 영상을 압축하는 인코딩(Encoding)을 수행하게 된다. 이러한 인코딩을 위한 과정을 구체적으로 설명하면 다음과 같다.
먼저, 제 1 영상 입력부(300)를 통해 촬영된 오른쪽 영상(Right original image)과 제 2 영상 입력부(310)를 통해 촬영된 왼쪽 영상(Left original image)은 히스토그램 산출부(320)에 원 영상 그대로 전달된다.
그러면 히스토그램 산출부(320)는 프레임 단위로 동시에 오른쪽 영상 및 왼쪽 영상을 입력받아 각 영상에서 명도값에 대응하는 화소들의 개수를 계산하여 각각의 히스토그램을 산출한다. 여기서 산출되는 히스토그램의 예는 도 4 및 도 5와 같다.
먼저, 도 4는 본 발명의 실시 예에 따른 흑백 영상의 히스토그램 예시도이다. 히스토그램은 영상의 명도값을 수평축으로 하고 그 수평축의 각 명도값에 대응하는 화소들의 개수를 수직축으로 해서 만든 그래프이다. 따라서 수평축에 해당하는 명도는 0에서 255의 범위값을 가지며 수직축의 화소들의 개수는 영상의 크기와 밝기의 분포에 따라 달라지게 된다. 흑백 영상의 경우 히스토그램을 해석함으로써 영상을 구성하는 화소들의 밝기 분포의 특성에 대해 알 수가 있다. 흑백 영상의 히스토그램은 흰색과 검은색의 분포가 표현이 되는데, 명도가 0에 가까울수록 검은색에 가깝고 255에 가까울수록 흰색에 가까운 것을 나타낸다.
한편, 도 5는 본 발명의 실시 예에 따른 칼라 영상의 히스토그램 예시도이다. 도 5를 참조하면, 칼라 영상에서 히스토그램은 R(Red), G(Green), B(Blue) 3가지 색상의 분포를 고려해야 한다. 이에 따라 도 5의 히스토그램은 각 색상 성분인 R, G, B별로 명도를 0에서 255의 범위로 나누어서 각 명도들의 분포를 그래프화시킨다. 도 5(a)는 색상 성분 중 R의 히스토그램을 나타내며, 도 5(b)는 G의 히스토그램을, 도 5(c)는 B의 히스토그램을 나타낸다. 도 5의 세 개의 히스토그램에서 수평축과 수직축은 도 4의 흑백 영상의 히스토그램의 경우와 동일한 의미로 사용되므로 자세한 설명은 생략한다.
전술한 과정으로 산출된 좌우 영상의 히스토그램은 히스토그램 산출부(320)에 의해 차이 추정부(330)로 출력된다. 차이 추정부(330)는 수신한 좌우 영상 중에서 임의의 영상을 선택해서 선택된 영상을 원 영상 그대로 인코더(340)로 출력한다. 이하, 본 발명의 실시 예에서는 설명의 편의를 위해 오른쪽 영상이 선택된 경 우를 기준으로 설명한다. 다시 말해, 오른쪽 영상에 왼쪽 영상을 매칭(Matching)시켜 왼쪽 영상의 히스토그램값을 변화시키는 경우를 예로 들어 설명한다.
그러면 차이 추정부(330)는 영상을 구성하는 각 색상의 성분, 즉 R, G, B 별로 계산된 히스토그램을 이용하여 왼쪽 영상의 히스토그램을 오른쪽 영상의 히스토그램에 매칭시킨다. 전술한 히스토그램의 매칭 방법을 구체적으로 설명하면, 차이 추정부(330)는 먼저 수신한 좌우 영상의 히스토그램에서 각 명도값에 대응하는 화소수를 순차적으로 누적하여 생성된 누적 히스토그램값(이하, 누적합이라 칭함.)을 각각 구하고 이를 정규화한다. 여기서 정규화라 함은 변환 함수에 의해 변환된 값이 범위값을 넘어설 때 이러한 값들을 원하는 일정 범위 안에 재매핑시키기 위하여 조정하는 것을 말한다. 이 과정에서 차이 추정부(330)는 좌우 영상의 특성을 동일하게 만드는 것이 목적이므로 히스토그램의 매칭 방향은 중요하지 않다.
그러면 차이 추정부(330)는 좌우 영상의 정규화된 누적합의 차이(Disparity)를 계산하여 그 차이가 가장 적은 베스트 매치(Best match)를 찾는다. 이러한 탐색 과정을 거쳐 베스트 매치를 찾게 되면, 차이 추정부(330)는 베스트 매치에 대응하는 값으로 히스토그램을 생성한다. 그리고 차이 추정부(330)는 생성된 히스토그램으로 수정된 왼쪽 영상을 인코더(340)로 출력한다. 즉, 차이 추정부(330)는 왼쪽 영상을 오른쪽 영상에 매칭함으로써 화질이 개선되도록 변환된 왼쪽 영상을 인코더(340)로 출력한다. 이에 따라 인코더(340)는 히스토그램 산출부(320)로부터 출력된 오른쪽 원 영상과 차이 추정부(330)에서 변환되어 출력된 왼쪽 영상을 인코딩하여 출력하게 된다.
전술한 바와 같이 왼쪽 영상을 오른쪽 영상에 매칭시켜 출력되는 두 개의 영상의 특성을 유사하게 하는 것은 최종적으로 출력되는 3차원 입체 영상의 화질을 향상시키기 위한 것이다.
이하, 본 발명의 실시 예에 따른 3차원 입체 영상의 화질을 개선하기 위한 제어 흐름도인 도 6을 참조하여 설명한다.
도 6을 참조하면, 600 단계에서 두 개의 영상 입력부(300, 310)를 통해 동일한 피사체를 촬영한다. 그러면 두 개의 영상 즉, 오른쪽 영상과 왼쪽 영상을 얻을 수 있게 된다. 구체적으로, 제 1 영상 입력부(300)에서 얻은 오른쪽 원 영상과 제 2 영상 입력부(310)에서 얻은 왼쪽 원 영상은 일단 히스토그램 산출부(320)로 전달이 된다.
그러면 610 단계에서 히스토그램 산출부(320)는 촬영된 좌우 영상의 히스토그램을 계산하여 차이 추정부(330)로 출력을 한다. 이어, 620 단계에서 차이 추정부(330)는 계산된 각 히스토그램의 정규화된 누적합을 산출하여 630 단계에서 산출된 두 누적합의 차이를 계산한다. 630 단계에서 누적합의 차이를 계산하는 이유는 촬영된 좌우 영상의 화질의 차이를 수치적으로 분석하기 위해서이다.
그리고 차이 추정부(330)는 640 단계에서 현재 프레임내에서 누적합 차이 계산이 완료되었는지 판단한다. 누적합 차이 계산이 완료되지 않았으면 차이 추정부(330)는 630 단계로 되돌아가 차이 계산을 계속하고, 완료되었으면 650 단계로 진행한다.
650 단계로 진행한 차이 추정부(330)는 누적합의 차이가 최소인 명도값을 파 악한다. 즉, 오른쪽 영상의 누적 히스토그램에 왼쪽 영상의 누적 히스토그램을 매칭하여 누적합의 차이가 가장 적은 부분을 검색한다. 여기서 차이 추정부(330)가 누적합의 차이가 최소인 값을 검색하는 이유는, 누적합의 차이가 적을수록 화질이 좋은 오른쪽 영상과 그 특성이 유사하다는 것을 의미하기 때문이다. 차이 추정부(330)는 누적합의 차이가 최소인 명도값을 파악하기 미리 설정된 최소값을 이용한다. 이어, 차이 추정부(330)는 최소값과 명도값 0 부터 255까지에 해당하는 누적합의 차이를 순차적으로 비교한다. 차이 추정부(330)는 전술한 비교 과정에서 누적합의 차이가 최소값보다 작다면, 해당 누적합의 차이를 최소값으로 설정하고 다음 명도값에 해당하는 누적합의 차이와 비교를 한다. 이와 같은 과정을 통해 차이 추정부(330)는 660 단계에서 누적합의 차이가 최소인 명도값을 파악하여 베스트 매치로 결정한다. 그리고 차이 추정부(330)는 670 단계로 진행하여 결정된 베스트 매치에 대응하도록 히스토그램을 생성한다. 그리고, 차이 추정부(330)는 이와 같은 과정으로 생성된 히스토그램을 680 단계에서 영상으로 복원한다.
전술한 바와 같이 본 발명은 좌우 영상의 매칭을 통해 화질의 저하를 방지하고, 이에 따라 최종적으로 출력되는 3차원 입체 영상의 화질을 개선할 수 있는 이점이 있다.
이하, 본 발명의 실시 예에 따른 히스토그램 매칭의 예시 코드인 도 7a 및 도 7b를 참조하여 설명한다. 도 7a와 도 7b는 하나의 프로그래밍 코드이며, 도 7a의 도면 부호 740 부분에 이어서 도 7b의 도면 부호 750 부분과 연결이 된다. 도 7a와 도 7b에서는 히스토그램 지정 연산이 수행되며, 히스토그램 지정 연산은 수정 할 영상의 정규화된 누적합과 매칭 대상이 되는 영상의 정규화된 누적합을 이용하여 수정할 영상의 값을 변환하는 연산을 말한다.
이와 같은 히스토그램 지정 연산이 수행된 예시 코드를 먼저, 도 7a를 참조하여 설명한다. 도면 부호 700에 의해 지시되는 부분은 왼쪽 영상과 오른쪽 영상의 히스토그램을 생성하기 위한 배열을 할당하기 위하여 변수값을 정의한 것을 보여준다. 배열은 각각 히스토그램과 누적 히스토그램별로 할당이 되며, 배열값이 256인 이유는 명도값이 0에서 255의 범위로 되어 있기 때문이다.
도면 부호 710은 히스토그램의 배열을 초기화하는 부분을 나타낸다. 즉, 도면 부호 710 부분에서는 0에서 255까지의 명도값에 대응하는 화소의 개수가 모두 0으로 초기화된다.
이어 나타나는 도면 부호 720 부분은 좌우 영상의 명도값에 대응하는 화소의 개수를 계산하여 각각의 히스토그램을 생성하는 것을 보여준다. 그리고 도면 부호 730 부분에서는 도면 부호 720 부분에서 생성된 히스토그램을 바탕으로 왼쪽 영상의 히스토그램에 대한 정규화된 합을 계산한다. 구체적으로 말하자면, 왼쪽 영상의 명도값에 대응하는 화소의 개수가 누적되어 생성된 누적 히스토그램의 값이 일정 범위 안에 매핑되도록 정규화한다. 다음에 진행되는 도면 부호 740의 부분은 도면 부호 730 부분과 마찬가지 방법으로 오른쪽 영상의 히스토그램에 대한 정규화된 합을 계산한다.
도 7a의 도면 부호 740 부분과 연결되는 도 7b의 도면 부호 750 부분에서는 전술한 도면 부호 730과 740 부분에서 구한 정규화된 누적합의 차이를 계산하여 그 차이가 가장 적은 누적 히스토그램의 명도값을 검색한다. 이어, 도면 부호 760 부분은 도면 부호 750 부분에서 검색된 명도값에 대응하는 히스토그램을 생성한다. 여기서 생성되는 히스토그램은 매칭 방향이 왼쪽 영상을 오른쪽 영상에 매칭하는 경우일 때, 왼쪽 영상의 히스토그램으로 대체가 된다. 그리고 마지막 도면 부호인 770 부분에서는 도면 부호 700 부분에서 할당한 메모리를 해제하고 모든 수행을 종료한다.
이와 같은 과정으로 좌우 영상의 히스토그램을 매칭시키는 방법은 두 영상의 화질의 차이를 최소화함으로써 최종 출력되는 3차원 입체 영상의 화질을 개선할 수 있는 이점을 제공한다.
상기한 바와 같은 본 발명에 따르면, 두 개의 카메라 센서를 이용하는 경우 발생하는 입체 영상의 화질 저하 문제를 좌우 영상의 히스토그램을 매칭시키는 방법으로 해결하여 보다 향상된 화질로 3차원 입체 영상을 제공할 수 있는 이점이 있다.

Claims (6)

  1. 이동 통신 단말기에서 3차원 입체 영상의 화질을 개선하기 위한 방법에 있어서,
    두 개의 영상 입력부로부터 하나의 피사체에 대해 좌우 영상에 해당하는 제 1 영상 및 제 2 영상을 수신하는 과정과,
    상기 수신한 제 1 영상 및 제 2 영상에 대해 각각 명도 값들에 대한 화소수들을 나타내는 제1 히스토그램 및 제2 히스토그램을 계산하는 과정과,
    상기 계산된 제1 히스토그램에 대해 각각 명도 값들에 대한 화소수들을 누적한 값을 나타내는 제1 누적합들을 산출하며, 상기 계산된 제2 히스토그램에 대해 각각 명도 값들에 대한 화소수들을 누적한 값을 나타내는 제2 누적합들을 산출하는 과정과,
    상기 제2 누적합들 각각에 대해 제1 누적합들 중에서 차이가 가장 작은 제1 누적합을 검색하며, 상기 검색된 제1 누적합에 대응하는 히스토그램을 생성하여 상기 계산된 제2 히스토그램을 상기 생성된 히스토그램으로 대체하는 과정과,
    상기 생성된 히스토그램을 이용하여 상기 수신한 제1 영상에 매칭되는 제2 영상을 생성하는 과정을 포함함을 특징으로 하는 3차원 입체 영상의 화질을 개선하기 위한 방법.
  2. 제 1항에 있어서, 상기 명도 값들에 대한 화소수들을 누적한 값은,
    해당 히스토그램에서 명도 값 0부터 255까지에 대응되는 화소수를 순차적으로 누적하여 산출됨을 특징으로 하는 3차원 입체 영상의 화질을 개선하기 위한 방법.
  3. 제 1항에 있어서,
    상기 제1 영상은 상기 하나의 피사체에 대해 좌측 영상에 해당하며, 상기 제2 영상은 상기 하나의 피사체에 대해 우측 영상에 해당하는 것을 포함함을 특징으로 하는 3차원 입체 영상의 화질을 개선하기 위한 방법.
  4. 이동 통신 단말기에서 3차원 입체 영상의 화질을 개선하기 위한 장치에 있어서,
    하나의 피사체에 대해 좌우 영상에 해당하는 제1 영상 및 제2 영상을 수신하는 두 개의 영상 입력부와,
    상기 두 개의 영상 입력부에서 상기 제1 영상 및 제2 영상의 수신 시, 상기 수신한 제 1 영상 및 제 2 영상에 대해 각각 명도 값들에 대한 화소수들을 나타내는 제1 히스토그램 및 제2 히스토그램을 계산하며, 상기 계산된 제1 히스토그램에 대해 각각 명도 값들에 대한 화소수들을 누적한 값을 나타내는 제1 누적합들을 산출하며, 상기 계산된 제2 히스토그램에 대해 각각 명도 값들에 대한 화소수들을 누적한 값을 나타내는 제2 누적합들을 산출하며, 상기 제2 누적합들 각각에 대해 제1 누적합들 중에서 차이가 가장 작은 제1 누적합을 검색하며, 상기 검색된 제1 누적합에 대응하는 히스토그램을 생성하며, 상기 계산된 제2 히스토그램을 상기 생성된 히스토그램으로 대체하여 상기 수신한 제1 영상에 매칭되는 제2 영상을 생성하도록 제어하는 제어부를 포함함을 특징으로 하는 3차원 입체 영상의 화질을 개선하기 위한 장치.
  5. 제 4항에 있어서, 상기 명도 값들에 대한 화소수들을 누적한 값은,
    해당 히스토그램에서 명도 값 0부터 255까지에 대응되는 화소수를 순차적으로 누적하여 산출됨을 특징으로 하는 3차원 입체 영상의 화질을 개선하기 위한 장치.
  6. 제4항에 있어서,
    상기 제1 영상은 상기 하나의 피사체에 대해 좌측 영상에 해당하며, 상기 제2 영상은 상기 하나의 피사체에 대해 우측 영상에 해당하는 것을 특징으로 하는 3차원 입체 영상의 화질을 개선하기 위한 장치.
KR1020070005727A 2007-01-18 2007-01-18 3차원 입체 영상의 화질을 개선하기 위한 방법 KR101379132B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070005727A KR101379132B1 (ko) 2007-01-18 2007-01-18 3차원 입체 영상의 화질을 개선하기 위한 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070005727A KR101379132B1 (ko) 2007-01-18 2007-01-18 3차원 입체 영상의 화질을 개선하기 위한 방법

Publications (2)

Publication Number Publication Date
KR20080068249A KR20080068249A (ko) 2008-07-23
KR101379132B1 true KR101379132B1 (ko) 2014-03-28

Family

ID=39822103

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070005727A KR101379132B1 (ko) 2007-01-18 2007-01-18 3차원 입체 영상의 화질을 개선하기 위한 방법

Country Status (1)

Country Link
KR (1) KR101379132B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100942925B1 (ko) * 2008-08-11 2010-02-22 한국전자통신연구원 스테레오 비전 시스템 및 그 제어방법
KR101929494B1 (ko) * 2012-07-10 2018-12-14 삼성전자주식회사 영상 처리 방법 및 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11248446A (ja) * 1998-02-26 1999-09-17 Fuji Heavy Ind Ltd ステレオ画像処理装置
JP2000266539A (ja) 1999-03-15 2000-09-29 Nissan Motor Co Ltd 車間距離計測装置
JP2001091247A (ja) 1999-09-22 2001-04-06 Fuji Heavy Ind Ltd 距離データの検査方法およびその検査装置
JP2003158751A (ja) 2001-11-20 2003-05-30 Fuji Heavy Ind Ltd ステレオカメラの調整装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11248446A (ja) * 1998-02-26 1999-09-17 Fuji Heavy Ind Ltd ステレオ画像処理装置
JP2000266539A (ja) 1999-03-15 2000-09-29 Nissan Motor Co Ltd 車間距離計測装置
JP2001091247A (ja) 1999-09-22 2001-04-06 Fuji Heavy Ind Ltd 距離データの検査方法およびその検査装置
JP2003158751A (ja) 2001-11-20 2003-05-30 Fuji Heavy Ind Ltd ステレオカメラの調整装置

Also Published As

Publication number Publication date
KR20080068249A (ko) 2008-07-23

Similar Documents

Publication Publication Date Title
CN111016445B (zh) 使用块匹配的镜头阴影颜色校正的方法和系统
US8004566B2 (en) Self calibration of white balance for a digital camera device using correlated color temperature data
US9288392B2 (en) Image capturing device capable of blending images and image processing method for blending images thereof
KR101027353B1 (ko) 전자 비디오 이미지 안정화
KR100918480B1 (ko) 스테레오 비전 시스템 및 그 처리 방법
US9854167B2 (en) Signal processing device and moving image capturing device
US8120658B2 (en) Hand jitter reduction system for cameras
US8615140B2 (en) Compression of image data in accordance with depth information of pixels
KR102386385B1 (ko) 전자 장치 및 전자 장치의 이미지 압축 방법
WO2010124070A1 (en) System and method to selectively combine video frame image data
US20160171697A1 (en) Method and system of run-time self-calibrating lens shading correction
KR20190010296A (ko) 전자 장치 및 전자 장치에서 이미지 데이터를 압축하는 방법
KR20190010040A (ko) 전자 장치 및 전자 장치에서 하이 다이나믹 레인지 이미지 데이터를 압축하는 방법
WO2008039551A1 (en) A hand jitter reduction system for cameras
CN107194901B (zh) 图像处理方法、装置、计算机设备和计算机可读存储介质
CN107341782B (zh) 图像处理方法、装置、计算机设备和计算机可读存储介质
CN109257540B (zh) 多摄镜头组的摄影校正方法及摄影装置
KR101379132B1 (ko) 3차원 입체 영상의 화질을 개선하기 위한 방법
CN110418133B (zh) 用于为图像数据编码的方法和装置
WO2023040540A1 (zh) 图像处理芯片、应用处理芯片、电子设备和图像处理方法
KR100745245B1 (ko) 휴대 단말기에서의 흔들림 움직임 보상 장치 및 방법
CN115278191A (zh) 图像白平衡方法及装置、计算机可读介质和电子设备
KR101675796B1 (ko) 이미지 해상도 보정을 위한 룩업테이블 생성 방법, 이를 이용한 이미지 해상도 보정 장치 및 방법
CN114125408A (zh) 图像处理方法及装置、终端和可读存储介质
KR20190009911A (ko) 이미지의 에러 데이터를 보정하여 압축하기 위한 장치 및 그에 관한 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee