KR101519463B1 - 3d 이미지 변환 장치 및 그 방법 - Google Patents

3d 이미지 변환 장치 및 그 방법 Download PDF

Info

Publication number
KR101519463B1
KR101519463B1 KR1020130108080A KR20130108080A KR101519463B1 KR 101519463 B1 KR101519463 B1 KR 101519463B1 KR 1020130108080 A KR1020130108080 A KR 1020130108080A KR 20130108080 A KR20130108080 A KR 20130108080A KR 101519463 B1 KR101519463 B1 KR 101519463B1
Authority
KR
South Korea
Prior art keywords
image
area
image area
conversion
unit
Prior art date
Application number
KR1020130108080A
Other languages
English (en)
Other versions
KR20150029216A (ko
Inventor
김만배
길종인
Original Assignee
강원대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 강원대학교산학협력단 filed Critical 강원대학교산학협력단
Priority to KR1020130108080A priority Critical patent/KR101519463B1/ko
Publication of KR20150029216A publication Critical patent/KR20150029216A/ko
Application granted granted Critical
Publication of KR101519463B1 publication Critical patent/KR101519463B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/28—Quantising the image, e.g. histogram thresholding for discrimination between background and foreground patterns
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 텍스트 이미지 영역과 원시 이미지 영역을 포함하는 전체 이미지 중에서 3D 변환을 하기 위한 3D 변환 예정 이미지를 탐색하는 이미지 영역 탐색부; 상기 3D 변환 예정 이미지의 깊이 정보를 생성하는 깊이 정보 생성부; 상기 깊이 정보에 상응하여 상기 3D 변환 예정 이미지를 확대하여 좌안 이미지 영역과 우안 이미지 영역을 생성하는 이미지 변환부; 및 상기 좌안 이미지 영역과 우안 이미지 영역을 조합하여 3D 이미지를 생성하는 이미지 조합부;를 포함하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다. 따라서 본 발명은 텍스트 이미지 영역을 포함하는 전체 이미지를 3D 이미지로 변환하는 경우 텍스트의 깨짐을 방지하는 효과가 있다.

Description

3D 이미지 변환 장치 및 그 방법 {apparatus for generating 3D image and the method thereof}
본 발명은 텍스트 이미지 영역을 포함하는 전체 이미지를 3D 이미지로 변환하는 3D 이미지 변환 장치 및 그 방법에 관한 것이다.
3D 이미지 변환 기술은 2D 이미지(평면 이미지)에 입체감을 주는 기술로서, 사람의 눈으로 실제로 보는 것처럼 영상에서 사물의 깊이와 공간 형상 정보 등이 표현되어 있는 이미지이다. 3D 이미지 변환 기술은 정보통신, 방송, 의료, 교육 훈련, 군사, 게임, 애니메이션, 가상현실, CAD, 산업 기술 등 그 응용 분야가 매우 다양하다.
일반적으로 사람이 지각하는 입체감은 관찰하고자 하는 물체의 위치에 따른 수정체의 두께 변화 정도, 양쪽 눈과 대상물과의 각도 차이, 그리고 좌우 눈에 보이는 대상물의 위치 및 형태의 차이, 대상물의 운동에 따라 생기는 시차, 그 밖에 각종 심리 및 기억에 의한 효과 등이 복합적으로 작용해 생긴다.
그 중에서도 입체감의 가장 중요한 요인은 사람의 두 눈이 가로 방향으로 약 6 ~ 7가량 떨어져 위치함으로써 나타나게 되는 양안 시차(binocular disparity)이다. 사람의 눈은 양안 시차에 의해 대상물에 대한 각도 차이를 가지고 바라보게 되고, 이 차이로 인해 각각의 눈에 서로 다른 상의 이미지가 맺히게 되며 두 이미지가 망막을 통해 뇌로 전달된다. 뇌는 이 두 개의 정보를 정확히 서로 융합하여 본래의 3D 입체 영상을 느낄 수 있는 것이다.
3D 이미지 변환 기술은 기존의 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display)와 접목되어 휴대폰, TV, 모니터 등을 포함하는 여러 기기에 적용되고 있다.
이러한 일반적인 3D 이미지 변환은 대상 2D 이미지에서 깊이맵을 추출하여 상기 깊이맵을 바탕으로 이루어진다. 텍스트(text)가 포함된 이미지(PC에서의 window 이미지)의 경우, 텍스트의 동일한 깊이맵을 얻지 못하면 깨짐, 흔들림 등의 문제가 발생하고, 3D 이미지를 시청하는 사용자는 심한 시각적 피로도를 느끼게 된다.
따라서, 텍스트를 포함하는 이미지에서 텍스트를 제외한 이미지만을 선별하여 상기 텍스트가 아닌 이미지만을 3D 이미지 변환할 필요가 있다. 이에 대한 종래기술로서, 대한민국 등록특허공보 KR 1183028은 프레젠테이션 영상에서 특정 부분만을 선정하여 3D 이미지 변환하는 부분적 입체감을 갖는 입체 프레젠테이션 영상 제작 방법을 제시한다. 도 1을 참조하면, 영역 또는 지점 선택 수단(130)이 프레젠테이션 영상에서 3D 변환할 부분을 선택하고 프레젠테이션 영상 제작 수단(150)이 3D 영상을 생성한다. 프레젠테이션 영상 제작 수단(150)은 좌안 프레젠테이션 영상 및 우안 프레젠테이션 영상을 시프트(shift)시켜 3D 영상을 생성한다. 그러나, 시프트(shift)를 통해 생성된 3D 영상은 시프트한 만큼 영상 정보가 없는 검은 영역(Boundary hole)을 가지게 된다. 3D 영상은 상기 검은 영역만큼 영상 정보를 손실하게 되고 이는 시각적 문제를 야기한다.
이하, 상술한 문제점을 해결하기 위하여 3D 이미지 변환 장치는 검은 영역을 생성하지 않고 3D 이미지 변환할 필요가 있다. 또한, 텍스트를 포함하는 이미지를 변환하는데 있어서, 텍스트의 깨짐을 방지하기 위하여 특정 영역만을 선별하여 3D 이미지 변환할 장치가 요구된다.
본 발명이 해결하고자 하는 과제는 텍스트 이미지 영역을 포함하는 전체 이미지를 3D 이미지로 변환하는 3D 이미지 변환 장치 및 그 방법을 제공하는 것이다.
본 발명이 해결하고자 하는 또 다른 과제는 3D 이미지 변환시 영상이 손실되는 검은 영역(Boundary hole)의 발생을 방지하는 3D 이미지 변환 장치 및 그 방법을 제공하는 것이다.
본 발명의 실시의 일 측면에서, 본 발명은 텍스트 이미지 영역과 원시 이미지 영역을 포함하는 전체 이미지 중에서 3D 변환을 하기 위한 3D 변환 예정 이미지를 탐색하는 이미지 영역 탐색부; 상기 3D 변환 예정 이미지의 깊이 정보를 생성하는 깊이 정보 생성부; 상기 깊이 정보에 상응하여 상기 3D 변환 예정 이미지를 확대하여 좌안 이미지 영역과 우안 이미지 영역을 생성하는 이미지 변환부; 및 상기 좌안 이미지 영역과 우안 이미지 영역을 조합하여 3D 이미지를 생성하는 이미지 조합부;를 포함하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 이미지 변환부는 상기 이미지 영역의 우측을 기준으로 좌측으로 상기 3D 변환 예정 이미지를 확대하여 상기 좌안 이미지 영역을 생성하고, 좌측을 기준으로 우측으로 상기 3D 변환 예정 이미지를 확대하여 상기 우안 이미지 영역을 생성하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 전체 이미지가 상기 텍스트 이미지 영역과 상기 원시 이미지 영역을 포함하고 있는지 여부를 판별하는 이미지 판별부;를 더 포함하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 이미지 판별부는 상기 전체 이미지를 히스토그램화하여 판별하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 이미지 판별부는 상기 전체 이미지를 그레이스케일 이미지로 변환하여 히스토그램화하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 이미지 판별부는 상기 전체 이미지를 히스토그램화 한 값 중의 최대값이 상기 히스토그램의 임계값보다 큰 경우 상기 텍스트 영역과 상기 원시 이미지 영역을 포함하는 상기 전체 이미지로 판별하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 전체 이미지의 수평 라인과 수직 라인 중 적어도 어느 하나의 개수를 카운트하여 상기 카운트한 값이 임계값보다 큰 경우 상기 텍스트 영역과 상기 원시 이미지 영역을 포함하는 상기 전체 이미지로 판별하는 것을 특징으로 하는 3D이미지 변환 장치를 제공한다.
바람직하게는, 상기 이미지 영역 탐색부는 상기 전체 이미지에서 연속적으로 연결되어 있는 라인 픽셀들에 동일한 레이블을 부여하여 상기 3D 변환 예정 이미지를 탐색하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 이미지 영역 탐색부는 상기 레이블에 상응하는 라인 픽셀을 카운트하고, 상기 카운트한 값이 라인 픽셀의 임계값보다 작은 경우, 상기 레이블에 상응하는 라인 픽셀을 제거하여 상기 3D 변환 예정 이미지를 탐색하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 이미지 영역 탐색부는 상기 원시 이미지 영역에 포함된 원시 이미지의 가로 길이값과 세로 길이값의 차이값이 임계값보다 큰 경우, 상기 원시 이미지를 상기 3D 변환 예정 이미지가 아닌 것으로 판별하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 상기 이미지 영역 탐색부는 상기 원시 이미지 영역에 포함된 원시 이미지의 가로 길이값과 세로 길이값 중 어느 하나가 임계값보다 작은 경우, 상기 원시 이미지는 3D 변환 예정 이미지가 아닌 것으로 판별하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
본 발명의 실시의 다른 측면에서, 본 발명은 상기 이미지 변환부는 좌측을 기준으로 우측으로 상기 3D 변환 예정 이미지를 확대하고 상기 확대에 상응하는 만큼 제거하여 좌안 이미지 영역을 생성하고, 좌측을 기준으로 우측으로 상기 3D 변환 예정 이미지를 확대하고 상기 확대에 상응하는 만큼 좌측으로 이동하고 상기 이동에 상응하는 만큼 제거하여 우안 이미지 영역을 생성하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
본 발명의 실시의 또 다른 측면에서, 본 발명은 상기 이미지 변환부는 우측을 기준으로 좌측으로 상기 3D 변환 예정 이미지를 확대하고 상기 확대에 상응하는 만큼 제거하여 좌안 이미지 영역을 생성하고, 우측을 기준으로 좌측으로 상기 3D 변환 예정 이미지를 확대하고 상기 확대에 상응하는 만큼 우측으로 이동하고 상기 이동에 상응하는 만큼 제거하여 우안 이미지 영역을 생성하는 것을 특징으로 하는 3D 이미지 변환 장치를 제공한다.
바람직하게는, 텍스트 이미지 영역과 원시 이미지 영역을 포함하는 전체 이미지 중에서 3D 변환을 하기 위한 3D 변환 예정 이미지를 탐색하는 단계; 상기 3D 변환 예정 이미지의 깊이 정보를 생성하는 단계; 상기 깊이 정보에 상응하여 상기 3D 변환 예정 이미지를 확대하여 좌안 이미지 영역과 우안 이미지 영역을 생성하는 단계; 및 상기 좌안 이미지 영역과 우안 이미지 영역을 조합하여 3D 이미지를 생성하는 단계;를 포함하는 것을 특징으로 하는 3D 이미지 변환 방법을 제공한다.
본 발명은 텍스트 이미지 영역을 포함하는 전체 이미지를 3D 이미지로 변환하는 경우 텍스트의 깨짐을 방지하는 효과가 있다.
또한, 본 발명은 3D 이미지 변환을 수행할 때, 영상 정보의 손실 발생을 억제하여 영상의 품질을 높이는 효과가 있다.
도 1은 종래의 부분적 입체감을 갖는 입체 프레젠테이션 영상 제작 방법의 예시도를 나타내는 도면이다.
도 2는 본 발명의 바람직한 일 실시예에 따른 3D 이미지 변환 장치의 구성도를 나타내는 도면이다.
도 3은 본 발명의 바람직한 일 실시예에 따른 3D 이미지 변환 장치의 제어부의 구성도를 나타내는 도면이다.
도 4는 본 발명의 바람직한 일 실시예에 따른 3D 이미지 변환 장치가 3D 이미지 변환을 수행하는 순서도를 나타내는 도면이다.
도 5는 본 발명의 바람직한 일 실시예에 따른 이미지 변환부가 좌안 이미지 영역 및 우안 이미지 영역을 생성하는 예시도를 나타내는 도면이다.
도 6은 본 발명의 바람직한 일 실시예에 따른 이미지 조합부가 생성한 3D 이미지에 대한 예시도를 나타내는 도면이다.
도 7은 본 발명의 바람직한 다른 실시예에 따른 이미지 변환부가 좌안 이미지 영역을 생성하는 예시도를 나타내는 도면이다.
도 8은 본 발명의 바람직한 다른 실시예에 따른 이미지 변환부가 우안 이미지 영역을 생성하는 예시도를 나타내는 도면이다.
도 9는 본 발명의 바람직한 일 실시예에 따른 이미지 판별부가 히스토그램을 이용하여 입력 이미지를 판별하는 순서도를 나타내는 도면이다.
도 10은 본 발명의 바람직한 일 실시예에 따른 텍스트 이미지 영역을 포함하는 전체 이미지의 히스토그램을 나타내는 도면이다.
도 11은 본 발명의 바람직한 다른 실시예에 따른 이미지 판별부가 수평수직 라인을 카운트하여 입력 이미지를 판별하는 순서도를 나타내는 도면이다.
도 12는 본 발명의 바람직한 다른 실시예에 따른 수평수직 라인을 검출하기 위한 이미지를 나타내는 도면이다.
도 13은 본 발명의 바람직한 일 실시예에 따른 이미지 탐색부가 3D 변환 예정 이미지를 탐색하는 순서도를 나타내는 도면이다.
도 14는 본 발명의 바람직한 일 실시예에 따른 이미지 탐색부가 3D 변환 예정 이미지를 탐색하기 위한 라인 검출 이미지를 나타내는 도면이다.
도 15는 본 발명의 바람직한 일 실시예에 따른 이미지 탐색부가 레이블에 상응하는 라인 픽셀을 제거한 이미지를 나타내는 도면이다.
도 16은 본 발명의 바람직한 일 실시예에 따른 이미지 탐색부가 가로 및 세로 길이값을 이용하여 3D 변환 예정 이미지 영역을 제거한 이미지를 나타내는 도면이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면 번호에 상관없이 동일한 수단에 대해서는 동일한 참조 번호를 사용하기로 한다.
본 명세서의 이미지는 정지화면(사진, 그림) 또는 동작화면(영상)을 모두 포함하는 개념이다.
도 2는 본 발명의 바람직한 일 실시예에 따른 3D 이미지 변환 장치의 구성도를 나타내는 도면이다.
도 2를 참조하면, 본 발명의 3D 이미지 변환 장치는 이미지 수신부(210), 제어부(220) 및 표시부(230)를 포함한다.
이미지 수신부(210)는 외부로부터 이미지를 수신한다. 이미지 수신부(210)는 방송국, 네트워크 서버 또는 외부장치와 통신하여 이미지를 수신할 수 있는데, 방송국, 네트워크 서버 또는 외부장치로부터 이미지가 포함된 데이터를 수신하고 상기 데이터를 가공(process)하여 이미지를 추출하여 제어부(220)로 전송한다.
상기 이미지는 정지화면(사진, 그림) 또는 동작화면(영상)을 모두 포함하는 개념으로서, 일반 이미지(natural image) 및 텍스트 이미지 영역을 포함하는 전체 이미지(510)를 포함한다. 상기 일반 이미지는 텍스트가 없는 이미지이다. 텍스트 이미지 영역을 포함하는 전체 이미지(510)는 문자 또는 기호 등을 망라하는 텍스트를 포함하는 이미지이다.
이미지 수신부(210)는 방송국에서 전송하는 방송 데이터를 수신할 수 있다. 이미지 수신부(210)는 안테나를 통해 RF(radio frequency)형태의 방송 데이터를 수신할 수 있다. 상기 방송 데이터는 이미지 데이터를 포함하는데, 이미지 수신부(210)는 상기 방송 데이터를 처리(process)하여 3D 이미지 변환할 이미지를 추출한다.
이미지 수신부(210)는 유무선 네트워크와 연결되어 외부 서버와 연결될 수 있다. 상기 유무선 네트워크는 영상 또는 음성 통화를 할 수 있는 방송형 통신망, 공중전화망 및 이동통신망 등을 포함한다. 상기 유무선 네트워크는 무선 통신망도 포함한다. 상기 무선 통신망과의 접속을 위하여, WLAN(Wireless LAN), Wi-Fi, Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등의 통신 규격이 이용될 수 있다. 이미지 수신부(210)는 상기 유무선 네트워크를 통해 방송, 게임, VOD 등을 포함하는 컨텐츠 데이터를 제공받을 수 있다. 상기 컨텐츠 데이터는 이미지 데이터를 포함하는데, 이미지 수신부(210)는 상기 컨텐츠 데이터를 처리(process)하여 3D 이미지 변환할 이미지를 추출한다.
이미지 수신부(210)는 외부장치와 연결될 수 있다. 이미지 수신부(210)는 DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북) 등과 같은 외부장치와 유무선으로 연결된다. 이미지 수신부(210)는 상기 외부장치로부터 데이터를 수신하고 상기 데이터를 가공(process)하여 3D 이미지 변환할 이미지를 추출한다.
제어부(220)는 이미지 수신부(210)로부터 입력된 이미지가 일반 이미지와 텍스트 이미지 영역을 포함하는 전체 이미지(510) 중 어느 것인지를 판별한다. 제어부(220)는 히스토그램 및 수직수평 라인의 개수를 이용하여 판별한다. 제어부(220)는 상기 입력된 이미지가 일반 이미지인 경우 전체를 3D 이미지 변환을 하고, 텍스트 이미지 영역을 포함하는 전체 이미지(510)인 경우 3D 변환 예정 이미지(511)를 탐색하는 이미지 영역을 탐색하여 특정 부분만 3D 이미지 변환을 수행한다.
제어부(220)는 텍스트 이미지 영역과 원시 이미지 영역을 포함하는 전체 이미지 중에서 3D 변환을 하기 위한 3D 변환 예정 이미지를 탐색한다. 제어부(220)는 텍스트 이미지 영역을 포함하는 전체 이미지(510)에서 연속적으로 연결되어 있는 라인 픽셀들에 동일한 레이블을 부여하여 상기 3D 변환 예정 이미지(511)를 탐색한다.
제어부(220)는 3D 변환 예정 이미지(511)의 깊이(depth) 정보를 생성한다. 제어부(220)는 상기 깊이 정보에 상응하여 3D 변환 예정 이미지(511)을 확대하여 좌안 이미지 영역(521) 및 우안 이미지 영역(531)을 생성한다.
제어부(220)는 상기 깊이 정보에 상응하여 3D 변환 예정 이미지(511)을 확대하여 좌안 이미지 영역(521) 및 우안 이미지 영역(531)을 생성한다. 제어부(220)는 좌안 이미지 영역(521)과 우안 이미지 영역(531)의 확대 방향을 서로 반대로 하여야 한다. 제어부(220)는 좌안 이미지 영역(521)을 좌측으로 확대하고, 우안 이미지 영역(531)을 우측으로 확대할 수 있다. 또한, 제어부(220)는 좌안 이미지 영역(521)를 우측으로 확대하고, 우안 이미지 영역(531)을 좌측으로도 확대할 수 있다.
제어부(220)는 좌안 이미지 영역(521)과 우안 이미지 영역(531)을 조합하여 3D 이미지를 생성한다. 제어부(220)는 3D 이미지를 다양한 포맷으로 형성될 수 있다.
표시부(230)는 이미지를 구현한다. 표시부(230)는 2D 및 3D 디스플레이(3D display)를 수행할 수 있다. 표시부(230)는 제어부(220)에서 처리된 이미지 데이터를 RGB 데이터로 변환하고 상기 RGB 데이터에 상응하게 이미지를 화면으로 표시할 수 있다. PDP, LCD, OLED, 플렉시블 디스플레이(flexible display) 등이 표시부(230)로서 가능하다.
표시부(230)는 3D 이미지를 사용자가 인식하는 방식에 따라 추가 디스플레이 방식과 단독 디스플레이 방식으로 나뉠 수 있다. 단독 디스플레이 방식은 별도의 보조 장치 없이 디스플레이에서 단독으로 3D 이미지가 구현될 수 있는 방식이다. 단독 디스플레이 방식의 이미지를 시청하는 사용자는 추가 장치(ex)편광안경)가 없어도 3D 이미지를 시청할 수 있다. 단독 디스플레이 방식으로는 렌티큘라 방식, 파라랙스 베리어(parallax barrier) 등이 있을 수 있다. 추가 디스플레이 방식은 보조 장치를 사용하여 3D 이미지를 구현하는 방식이다. 추가 디스플레이 방식으로는 헤드 마운트 디스플레이(HMD) 방식, 안경 방식 등이 있을 수 있다. 또한, 안경 방식에서 사용되는 안경으로는 편광 안경, 셔터 글래스, 스펙트럼 필터 등이 적용될 수 있다.
도 3은 본 발명의 바람직한 일 실시예에 따른 3D 이미지 변환 장치의 제어부의 구성도를 나타내는 도면이다. 도 3을 참조하면, 제어부(220)는 이미지 판별부(221), 이미지 영역 탐색부(223), 깊이 정보 생성부(225), 이미지 변환부(227) 및 이미지 조합부(229)를 포함한다.
이미지 판별부(221)는 제어부(220)로 입력되는 이미지가 일반 이미지인지 또는 텍스트 이미지 영역을 포함하는 전체 이미지(510)인지를 판별한다. 이미지 판별부(221)는 상기 판별을 두 가지 방식으로 실시한다.
이미지 판별부(221)의 첫 번째 판별법은 그레이스케일 이미지의 히스토그램을 이용한다.
도 9는 본 발명의 바람직한 일 실시예에 따른 이미지 판별부가 히스토그램을 이용하여 입력 이미지를 판별하는 순서도를 나타내는 도면이고, 도 10은 본 발명의 바람직한 일 실시예에 따른 텍스트 이미지 영역을 포함하는 전체 이미지의 히스토그램을 나타내는 도면이다. 여기서, 도 10a는 일반 이미지의 히스토그램이고, 도 10b는 텍스트 이미지 영역을 포함하는 전체 이미지의 히스토그램이다.
도 9를 참조하면, S901단계에서, 이미지 판별부(221)는 이미지 수신부(210)로부터 입력된 이미지를 그레이스케일 이미지로 변환한다.
S903단계에서, 이미지 판별부(221)는 상기 그레이스케일 이미지의 히스토그램을 생성한다.
S905단계에서, 이미지 판별부(221)는 그레이스케일 이미지를 히스토그램화 한 값 중에서 최대값을 산출한다. 상기 최대값은 다음과 같이 산출될 수 있다.
텍스트 이미지 영역을 포함하는 전체 이미지(510)의 특징 중 하나는 여러 색이 고르게 분포하는 일반 이미지와 달리, 배경의 영향으로 인해 특정 색상이 많은 부분을 차지한다.
도 10을 참조하면, 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 히스토그램은 과도하게 기울기(gradient)가 높은 구간을 많이 포함함을 알 수 있다. 이러한 특징은 일반 이미지와 텍스트 이미지 영역을 포함하는 전체 이미지(510)를 분류할 수 있는 정보가 된다. 이미지 판별부(221)는 히스토그램에서 최대 빈도수(frequency)를 갖는 구간(bin)을 선택하고 상기 구간(bin)에 해당하는 픽셀 비율(R1)을 다음 식을 통하여 계산한다.
Figure 112013082395016-pat00001
여기서, MAXiH(Yi)는 최대 빈도수을 갖는 구간 i 의 픽셀수이고, M×N은 전체 픽셀수 이다.
S907단계에서, 이미지 판별부(221)는 상기 최대값을 히스토그램 임계값과 비교한다. 이미지 판별부(221)는 픽셀 비율(R1)을 히스토그램 임계값(T1)과 비교한다.
S909단계에서, 이미지 판별부(221)는 상기 최대값이 히스토그램 임계값보다 크면 텍스트 이미지 영역을 포함하는 전체 이미지로 판별한다. 이미지 판별부(221)는 픽셀 비율(R1)이 히스토그램 임계값(T1) 보다 크면 텍스트 이미지 영역을 포함하는 전체 이미지로 판별한다.
S911단계에서, 이미지 판별부(221)는 상기 최대값이 히스토그램 임계값보다 작거나 같으면 일반 이미지로 판별한다. 이미지 판별부(221)는 픽셀 비율(R1)이 히스토그램 임계값(T1) 보다 작으면 일반 이미지로 판별한다.
이미지 판별부(221)의 두 번째 판별법은 수평수직 라인의 개수를 이용하여 판별한다. 이미지 판별부(221)는 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 수평 라인과 수직 라인 중 적어도 어느 하나의 개수를 카운트하여 상기 카운트한 값이 임계값보다 큰 경우 텍스트 이미지 영역을 포함하는 전체 이미지(510)로 판별한다.
도 11은 본 발명의 바람직한 다른 실시예에 따른 이미지 판별부가 수평수직 라인을 카운트하여 입력 이미지를 판별하는 순서도를 나타내는 도면이고, 도 12는 본 발명의 바람직한 다른 실시예에 따른 수평수직 라인을 검출하기 위한 이미지를 나타내는 도면이다. 여기서, 도 12a는 일반 이미지의 라인 이미지이고, 도 12b는 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 라인 이미지이고, 도 12c는 일반 이미지의 수평수직 라인 검출 이미지이며, 도 12d는 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 수평수직 라인 검출 이미지이다.
도 11을 참조하면, S1101단계에서, 이미지 판별부(221)는 라인 이미지를 얻어 라인을 검출한다. 이미지 판별부(221)는 행렬 연산자를 입력 이미지에 회선(convolution)하여 출력을 획득하고, 상기 출력 중에서 최대값을 선택하는 방법으로 라인 이미지를 획득한다. 도 12a 및 도 12b를 참고하면, 일반 이미지의 라인 이미지보다 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 라인 이미지가 수평수직 라인을 더 많이 포함하고 있다.
S1103단계에서, 이미지 판별부(221)는 수평수직 라인이 아닌 라인 즉, 곡선 및 사선 라인을 제거하여 수평수직 라인 검출 이미지를 생성한다. 이미지 판별부(221)는 수평수직 라인이 아닌 라인을 제거하여 수평수직 라인의 카운트 작업을 더욱 용이하게 한다. 이미지 판별부(221)는 라인 이미지에서 검출된 각 라인 픽셀을 중심으로 상, 하, 좌, 우의 4방향으로 탐색하여 길이를 조사한다. 이미지 판별부(221)는 조사한 길이가 임계치 T2보다 작은 경우 수평수직 라인이 아니라고 판단하여 제거한다. 도 12c 및 도 12d를 참고하면, 일반 이미지의 수평수직 라인 검출 이미지보다 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 수평수직 라인 검출 이미지가 수평수직 라인을 더 많이 포함하고 있다.
S1105단계에서, 이미지 판별부(221)는 수평수직 라인을 검출하고 카운트한다.
S1107단계에서, 이미지 판별부(221)는 상기 수평수직 라인의 카운트값을 라인 임계값과 비교한다.
S1109단계에서, 이미지 판별부(221)는 상기 수평수직 라인의 카운트값이 크면 입력 이미지를 텍스트 이미지 영역을 포함하는 전체 이미지(510)로 판별한다.
S1111단계에서, 이미지 판별부(221)는 상기 수평수직 라인의 카운트값이 작거나 같으면 입력 이미지를 일반 이미지로 판별한다.
이미지 영역 탐색부(223)는 텍스트 이미지 영역과 원시 이미지 영역을 포함하는 전체 이미지 중에서 3D 변환을 하기 위한 3D 변환 예정 이미지를 탐색한다. 입력된 이미지가 텍스트 이미지 영역을 포함하는 전체 이미지(510)로 판별이 되면, 이미지 영역 탐색부(223)는 3D 이미지 변환을 영역을 설정한다.
이미지 영역 탐색부(223)는 텍스트 이미지 영역을 포함하는 전체 이미지(510)에서 연속적으로 연결되어 있는 라인 픽셀들에 동일한 레이블을 부여하여 3D 변환 예정 이미지(511)를 탐색한다.
이미지 영역 탐색부(223)는 이미지에서 서로 연결된 라인끼리 동일한 레이블을 부여하는 CCL(Connected Component Labeling)알고리즘을 사용할 수 있다. 이미지 영역 탐색부(223)는 검출된 각 라인 픽셀을 기준으로 8방향으로 탐색하여 연속적으로 연결되어 있는 픽셀들을 동일한 레이블로 처리한다. 이미지 영역 탐색부(223)는 이 과정에서 각 레이블 당 라인 픽셀의 개수를 구할 수 있다. 각 라인 픽셀은 모두 레이블을 가지고 있고, 각 레이블은 라인 픽셀의 개수에 대한 정보를 가지고 있다. 이미지 영역 탐색부(223)는 적은 라인 픽셀의 수를 갖고 있는 레이블의 라인 픽셀들을 제거함으로써, 부적절한 3D 변환 예정 이미지(511)를 제거할 수 있다.
도 13은 본 발명의 바람직한 일 실시예에 따른 이미지 탐색부가 3D 변환 예정 이미지를 탐색하는 순서도를 나타내는 도면이고, 도 14는 본 발명의 바람직한 일 실시예에 따른 이미지 탐색부가 3D 변환 예정 이미지를 탐색하기 위한 라인 검출 이미지를 나타내는 도면이고, 도 15는 본 발명의 바람직한 일 실시예에 따른 이미지 탐색부가 레이블에 상응하는 라인 픽셀을 제거한 이미지를 나타내는 도면이고, 도 16은 본 발명의 바람직한 일 실시예에 따른 이미지 탐색부가 가로 및 세로 길이값을 이용하여 3D 변환 예정 이미지 영역을 제거한 이미지를 나타내는 도면이다.
도 13을 참조하면, S1301단계에서, 이미지 영역 탐색부(223)는 라인 이미지를 얻어 라인을 검출한다. 이미지 영역 탐색부(223)는 라인 이미지에서 수평수직 라인을 검출하여 수평수직 라인 검출 이미지를 생성한다. 이미지 영역 탐색부(223)는 이미지 판별부(221)가 입력 이미지가 텍스트 이미지 영역을 포함하는 전체 이미지(510)인지 판별하는 것과 동일한 과정을 수행한다. 도 14a는 텍스트 이미지 영역을 포함하는 전체 이미지(510)이고, 도 14b는 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 라인 이미지이고, 도 14c는 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 수평수직 라인 검출 이미지이다. 도 14를 참조하면, 텍스트 이미지 영역을 포함하는 전체 이미지(510)가 원본 이미지에서 라인 이미지 및 수평수직 라인 검출 이미지로 변환되는 양상이 도시되어 있다.
S1303단계에서, 이미지 영역 탐색부(223)는 상기 라인 이미지수평수직 라인 검출 이미지로부터 수평수직 라인이 아닌 라인 즉, 곡선 및 사선 라인을 제거하여 노이즈가 제거된 수직수평 라인 검출 이미지를 생성한다.
S1305단계에서, 이미지 영역 탐색부(223)는 상기 도 14c의 수평수직 라인 검출 이미지에서 연속적으로 연결된 라인 픽셀들에 동일한 레이블을 부여한다.
S1307단계에서, 이미지 영역 탐색부(223)는 상기 레이블에 상응하는 라인 픽셀을 카운트한다.
S1309단계에서, 이미지 영역 탐색부(223)는 상기 라인 픽셀을 카운트한 값과 라인 픽셀 임계값을 비교한다.
S1311단계에서, 이미지 영역 탐색부(223)는 상기 라인 픽셀을 카운트한 값이 라인 픽셀 임계값 보다 작으면, 상기 레이블에 상응하는 라인 픽셀들을 제거한다. 이로써, 크기가 작은 사각형의 3D 변환 예정 이미지(511)는 제거된다.
S1313단계에서, 이미지 영역 탐색부(223)는 상기 라인 픽셀을 카운트한 값이 라인 픽셀 임계값 보다 크거나 같으면, 상기 레이블에 상응하는 라인 픽셀들을 보존하고 그대로 남긴다. 도 15a는 도 14c와 같은 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 수평수직 라인 검출 이미지이고, 도 15b와 도 15c는 라인 픽셀 임계값을 증가시켰을 때 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 수평수직 라인 검출 이미지이다. 도 15를 참조하면, 이미지 영역 탐색부(223)가 임계값을 증가시켜 엄격하게 3D 변환 예정 이미지(511)를 탐색하는 양상이 도시되어 있다. 라인 픽셀 임계값이 증가함에 따라, 3D 변환 예정 이미지(511)는 크기가 작은 순서대로 제거된다. 라인 픽셀 임계값이 더 큰 도 15c가 라인 픽셀 임계값이 더 작은 도 15b 보다 더 적은 라인들을 포함하고 있다.
S1315단계에서, 이미지 영역 탐색부(223)는 텍스트 이미지 영역을 포함하는 전체 이미지(510)의 수평수직 라인 검출 이미지에서 가로 및 세로 길이값을 산출한다. 이미지 영역 탐색부(223)는 가로 및 세로 길이값을 가지고 수평수직 라인 검출 이미지에서 노이즈 3D 변환 예정 이미지(511)를 제거한다. 상기 노이즈 3D 변환 예정 이미지(511)는 이미지가 아니나 이미지의 형상으로 오인할 수 있는 것들을 말한다. 가령, 웹페이지 이미지를 수평수직 라인 검출 이미지화 한 경우, 이미지 영역 탐색부(223)는 주소창, 검색어창 등을 사각형의 3D 변환 예정 이미지(511)으로 오인할 수 있다. 이미지 영역 탐색부(223)는 이들의 특징인 가로 길이와 세로 길이의 차이를 이용하여 상기 노이즈 3D 변환 예정 이미지(511)를 제거한다. 이미지 영역 탐색부(223)는 가로 및 세로 길이값이 특정값을 넘지 못하는 경우도 노이즈로 보고 제거한다.
S1320단계에서, 이미지 영역 탐색부(223)는 상기 가로 길이값과 세로 길이값의 차이값을 산출한다.
S1322단계에서, 이미지 영역 탐색부(223)는 상기 차이값을 차이 임계값과 비교한다.
S1324단계에서, 이미지 영역 탐색부(223)는 상기 차이값이 상기 차이 임계값보다 크면 3D 변환 예정 이미지(511)를 제거한다.
S1326단계에서, 이미지 영역 탐색부(223)는 상기 차이값이 상기 차이 임계값보다 작거나 같으면 3D 변환 예정 이미지(511)를 보존한다.
S1321단계에서, 이미지 영역 탐색부(223)는 상기 가로 길이값을 길이 임계값과 비교한다.
S1323단계에서, 이미지 영역 탐색부(223)는 상기 가로 길이값이 길이 임계값보다 작으면 3D 변환 예정 이미지(511)를 제거한다.
S1325단계에서, 이미지 영역 탐색부(223)는 상기 가로 길이값이 길이 임계값 보다 크거나 같으면 상기 세로 길이값을 길이 임계값과 비교한다. 이미지 영역 탐색부(223)는 상기 세로 길이값이 길이 임계값보다 작으면 3D 변환 예정 이미지(511)를 제거한다.
S1327단계에서, 이미지 영역 탐색부(223)는 상기 세로 길이값이 길이 임계값 보다 크거나 같으면 3D 변환 예정 이미지(511)를 보존한다.
깊이 정보 생성부(225)는 3D 변환 예정 이미지(511)에 대한 깊이(depth) 정보를 생성한다. 상기 깊이 정보는 3D 변환 예정 이미지(511)를 확대할 때, 확대하는 정도의 기준이 된다. 이미지 변환부(227)는 상기 깊이 정보에 상응하게 3D 변환 예정 이미지(511)를 확대한다.
이미지 변환부(227)는 상기 깊이 정보에 상응하여 3D 변환 예정 이미지(511)를 확대하여 좌안 이미지 영역(521)과 우안 이미지 영역(531)을 생성한다.
도 5는 본 발명의 바람직한 일 실시예에 따른 이미지 변환부가 좌안 이미지 영역 및 우안 이미지 영역을 생성하는 예시도를 나타내는 도면이다.
도 5를 참조하면, 이미지 변환부(227)는 좌안 이미지 영역(521)을 생성한다. 이미지 변환부(227)는 텍스트 이미지 영역을 포함하는 전체 이미지(510) 중에서 3D 변환 예정 이미지(511)를 깊이 정보 생성부(225)가 생성한 깊이 정보(depth)만큼 확대하되, 3D 변환 예정 이미지(511)의 우측을 기준으로 고정하고, 좌측으로 확대하여 좌안 이미지 영역(521)을 생성한다.
이미지 변환부(227)는 우안 이미지 영역(531)을 생성한다. 이미지 변환부(227)는 텍스트 이미지 영역을 포함하는 전체 이미지(510) 중에서 3D 변환 예정 이미지(511)를 깊이 정보 생성부(225)가 생성한 깊이 정보(depth)만큼 확대하되, 3D 변환 예정 이미지(511)의 좌측을 기준으로 고정하고, 우측으로 확대하여 우안 이미지 영역(531)을 생성한다.
도 5a는 확대된 좌안 이미지 영역(521)을 포함하는 좌안 이미지(520)이고, 도 5b는 확대된 우안 이미지 영역(531)을 포함하는 우안 이미지(530)이다. 이미지 변환부(227)는 좌안 이미지 영역(521)을 포함하는 좌안 이미지(520) 및 우안 이미지(530)를 각각 생성한다.
이미지 조합부(229)는 좌안 이미지 영역(521)과 우안 이미지 영역(531)을 조합하여 3D 이미지를 생성한다.
도 6은 본 발명의 바람직한 일 실시예에 따른 이미지 조합부가 생성한 3D 이미지에 대한 예시도를 나타내는 도면이다. 도 6a는 2D 이미지인 원본 이미지이고, 도 6b는 3D 이미지이다.
도 6을 참조하면, 이미지 조합부(229)는 좌안 이미지 영역(521)이 포함된 좌안 이미지(520)와 우안 이미지 영역(531)이 포함된 우안 이미지(530)를 조합하여 3D 이미지를 생성한다. 이미지 조합부(229)는 다양한 포맷의 3D 이미지를 생성한다. 포맷은 좌안 이미지(520)와 우안 이미지(530)가 좌우로 배치되는 사이드 바이 사이드(side by side), 좌안 이미지(520) 및 우안 이미지(530)가 상하로 배치되는 탑다운(top down), 좌안 이미지(520)와 우안 이미지(530)가 시분할로 배치되는 프레임 시퀀셜(frame sequential), 좌안 이미지(520)와 우안 이미지(530)를 라인별로 혼합하는 인터레이스(interlace), 좌안 이미지(520) 및 우안 이미지(530)를 박스별로 혼합하는 체커 박스(checker box)를 포함한다. 이미지 조합부(229)는 좌안 이미지(520)와 우안 이미지(530)를 특정 포맷형태로 조합하여 도 6a와 같은 3D 이미지를 생성한다.
도 4는 본 발명의 바람직한 일 실시예에 따른 3D 이미지 변환 장치가 3D 이미지 변환을 수행하는 순서도를 나타내는 도면이다.
도 4를 참조하면, S401단계에서, 이미지 수신부(210)는 특정 이미지를 수신한다.
S403단계에서, 이미지 판별부(221)는 상기 이미지가 텍스트 이미지 영역과 원시 이미지 영역을 포함하고 있는지 여부를 판별한다. 이미지 판별부(221)는 일반 이미지인지 또는 텍스트 이미지 영역을 포함하는 전체 이미지(510)인지 여부를 판별한다.
S405단계에서, 입력된 이미지가 텍스트 이미지 영역을 포함하는 전체 이미지(510)면, 이미지 영역 탐색부(223)는 3D 이미지 변환을 위한 3D 변환 예정 이미지(511)을 탐색한다.
S407단계에서, 입력된 이미지가 일반 이미지면, 이미지 영역 탐색부(223)는 3D 변환 예정 이미지(511)을 탐색하지 않고, 이미지 변환부(227)는 입력된 이미지 전체를 3D 이미지 변환을 수행한다.
S409단계에서, 깊이 정보 생성부(225)는 3D 변환 예정 이미지(511)의 깊이 정보를 생성한다.
S411단계에서, 이미지 변환부(227)는 3D 변환 예정 이미지(511)의 좌안 이미지 영역(521) 및 우안 이미지 영역(531)을 생성한다.
S413단계에서, 이미지 조합부(229)는 좌안 이미지 영역(521) 및 우안 이미지 영역(531)을 조합하여 3D 이미지를 생성한다.
S415단계에서, 표시부(230)는 상기 3D 이미지를 디스플레이 한다.
본 발명의 다른 실시예에 따르면, 3D 이미지 변환 장치의 이미지 변환부(227)는 3D 변환 예정 이미지(511)을 확대, 이동 및 제거를 통하여 좌안 이미지 영역(521)과 우안 이미지 영역(531)을 생성한다.
이미지 변환부(227)는 좌측을 기준으로 우측으로 3D 변환 예정 이미지(711)를 확대하고 상기 확대에 상응하는 만큼 제거하여 좌안 이미지 영역(521)을 생성하고, 좌측을 기준으로 우측으로 3D 변환 예정 이미지(811)를 확대하고 상기 확대에 상응하는 만큼 좌측으로 이동하고 상기 이동에 상응하는 만큼 제거하여 우안 이미지 영역(531)을 생성한다.
도 7은 본 발명의 바람직한 다른 실시예에 따른 이미지 변환부가 좌안 이미지 영역을 생성하는 예시도를 나타내는 도면이고, 도 8은 본 발명의 바람직한 다른 실시예에 따른 이미지 변환부가 우안 이미지 영역을 생성하는 예시도를 나타내는 도면이다.
도 7을 참조하면, 이미지 변환부(227)는 3D 변환 예정 이미지(711)를 확대하고 확대한 부분을 제거하여 좌안 이미지 영역(521)을 생성한다. 이미지 변환부(227)는 텍스트 이미지 영역을 포함하는 전체 이미지(710) 중에서 3D 변환 예정 이미지(711)에 대하여 Pmax 만큼 확대한다(도 7a 및 도 7b 참고). 상기 Pmax 는 3D 변환 예정 이미지(711)의 깊이 정보에 의하여 결정된다. 이미지 변환부(227)는 확대한 부분(713) 만큼 제거하여 좌안 이미지 영역(521)을 생성한다.
도 8을 참조하면, 이미지 변환부(227)는 3D 변환 예정 이미지(811)를 확대하고 확대한 부분을 제거하여 우안 이미지 영역(531)을 생성한다. 이미지 변환부(227)는 텍스트 이미지 영역을 포함하는 전체 이미지(810) 중에서 3D 변환 예정 이미지(811)에 대하여 Pmax 만큼 확대한다(도 8a 참고). 상기 Pmax 는 3D 변환 예정 이미지(811)의 깊이 정보에 의하여 결정된다. 이미지 변환부(227)는 3D 변환 예정 이미지(811)를 만큼 즉, Pmax에 상응하게 이동(shift)시킨다(도 8a 참고). 이미지 변환부(227)는 3D 변환 예정 이미지(811)의 이동으로 인한 공백(813)를 제거한다(도 8b 참고). 공백(813)은 Pmax에 상응한다.
본 발명의 또 다른 실시예에 따르면, 3D 이미지 변환 장치의 이미지 변환부(227)는 3D 변환 예정 이미지(511)을 확대, 이동 및 제거를 통하여 좌안 이미지 영역(521)과 우안 이미지 영역(531)을 생성하되, 도 7 및 도 8와 다른 방향으로 생성한다.
이미지 변환부(227)는 우측을 기준으로 좌측으로 3D 변환 예정 이미지(711)를 확대하고 상기 확대에 상응하는 만큼 제거하여 좌안 이미지 영역(521)을 생성하고, 우측을 기준으로 좌측으로 3D 변환 예정 이미지(811)를 확대하고 상기 확대에 상응하는 만큼 우측으로 이동하고 상기 이동에 상응하는 만큼 제거하여 우안 이미지 영역(531)을 생성한다.
상기에서는 본 발명의 실시예를 참조하여 설명하였지만, 해당 기술분야에서 통상의 지식을 가진 자라면 하기의 특허 청구 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
210 : 이미지 수신부
220 : 제어부
221 : 이미지 판별부
223 : 이미지 영역 탐색부
225 : 깊이 정보 생성부
227 : 이미지 변환부
229 : 이미지 조합부
230 : 표시부

Claims (24)

  1. 텍스트 이미지 영역과 원시 이미지 영역 중 적어도 어느 하나를 포함하는 전체 이미지를 히스토그램화 하여 상기 전체이미지가 상기 텍스트 이미지 영역을 포함하고 있는 지 여부를 판별하는 이미지 판별부;
    상기 전체 이미지 중에서 3D 변환을 하기 위한 3D 변환 예정 이미지를 탐색하는 이미지 영역 탐색부;
    상기 3D 변환 예정 이미지의 깊이 정보를 생성하는 깊이 정보 생성부;
    상기 깊이 정보에 상응하여 상기 3D 변환 예정 이미지를 확대하여 좌안 이미지 영역과 우안 이미지 영역을 생성하는 이미지 변환부; 및
    상기 좌안 이미지 영역과 우안 이미지 영역을 조합하여 3D 이미지를 생성하는 이미지 조합부;를 포함하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  2. 제1항에 있어서,
    상기 이미지 변환부는 상기 이미지 영역의 우측을 기준으로 좌측으로 상기 3D 변환 예정 이미지를 확대하여 상기 좌안 이미지 영역을 생성하고, 좌측을 기준으로 우측으로 상기 3D 변환 예정 이미지를 확대하여 상기 우안 이미지 영역을 생성하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  3. 삭제
  4. 삭제
  5. 제1항에 있어서,
    상기 이미지 판별부는 상기 전체 이미지를 그레이스케일 이미지로 변환하여 히스토그램화 하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  6. 제5항에 있어서,
    상기 이미지 판별부는 상기 전체 이미지를 히스토그램화 한 값 중의 최대값이 상기 히스토그램의 임계값보다 큰 경우 상기 텍스트 영역과 상기 원시 이미지 영역을 포함하는 상기 전체 이미지로 판별하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  7. 삭제
  8. 제1항에 있어서,
    상기 이미지 영역 탐색부는 상기 전체 이미지에서 연속적으로 연결되어 있는 라인 픽셀들에 동일한 레이블을 부여하여 상기 3D 변환 예정 이미지를 탐색하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  9. 제8항에 있어서,
    상기 이미지 영역 탐색부는 상기 레이블에 상응하는 라인 픽셀을 카운트하고, 상기 카운트한 값이 라인 픽셀의 임계값보다 작은 경우, 상기 레이블에 상응하는 라인 픽셀을 제거하여 상기 3D 변환 예정 이미지를 탐색하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  10. 제9항에 있어서,
    상기 이미지 영역 탐색부는 상기 원시 이미지 영역에 포함된 원시 이미지의 가로 길이값과 세로 길이값의 차이값이 임계값보다 큰 경우, 상기 원시 이미지를 상기 3D 변환 예정 이미지가 아닌 것으로 판별하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  11. 제9항에 있어서,
    상기 이미지 영역 탐색부는 상기 원시 이미지 영역에 포함된 원시 이미지의 가로 길이값과 세로 길이값 중 어느 하나가 임계값보다 작은 경우, 상기 원시 이미지는 3D 변환 예정 이미지가 아닌 것으로 판별하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  12. 제1항에 있어서,
    상기 이미지 변환부는 좌측을 기준으로 우측으로 상기 3D 변환 예정 이미지를 확대하고 우측으로부터 상기 확대에 상응하는 만큼의 영역을 제거하여 좌안 이미지 영역을 생성하고, 좌측을 기준으로 우측으로 상기 3D 변환 예정 이미지를 확대하고 상기 확대에 상응하는 만큼 좌측으로 이동하고 우측으로부터 상기 이동에 상응하는 만큼의 영역을 제거하여 우안 이미지 영역을 생성하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  13. 제1항에 있어서,
    상기 이미지 변환부는 우측을 기준으로 좌측으로 상기 3D 변환 예정 이미지를 확대하고 우측으로부터 상기 확대에 상응하는 만큼의 영역을 제거하여 좌안 이미지 영역을 생성하고, 우측을 기준으로 좌측으로 상기 3D 변환 예정 이미지를 확대하고 상기 확대에 상응하는 만큼 우측으로 이동하고 우측으로부터 상기 이동에 상응하는 만큼의 영역을 제거하여 우안 이미지 영역을 생성하는 것
    을 특징으로 하는 3D 이미지 변환 장치.
  14. 3D 이미지 변환 장치가 3D 이미지 변환 방법에 있어서,
    텍스트 이미지 영역과 원시 이미지 영역 중 적어도 어느 하나를 포함하는 전체 이미지를 히스토그램화 하여 상기 전체이미지가 상기 텍스트 이미지 영역을 포함하고 있는 지 여부를 판별하는 단계;
    상기 전체 이미지 중에서 3D 변환을 하기 위한 3D 변환 예정 이미지를 탐색하는 단계;
    상기 3D 변환 예정 이미지의 깊이 정보를 생성하는 단계;
    상기 깊이 정보에 상응하여 상기 3D 변환 예정 이미지를 확대하여 좌안 이미지 영역과 우안 이미지 영역을 생성하는 단계; 및
    상기 좌안 이미지 영역과 우안 이미지 영역을 조합하여 3D 이미지를 생성하는 단계;를 포함하는 것
    을 특징으로 하는 3D이미지 변환 방법.
  15. 제14항에 있어서,
    좌안 이미지 영역과 우안 이미지 영역을 생성하는 단계는 상기 이미지 영역의 우측을 기준으로 좌측으로 상기 3D 변환 예정 이미지를 확대하여 상기 좌안 이미지 영역을 생성하고, 좌측을 기준으로 우측으로 상기 3D 변환 예정 이미지를 확대하여 상기 우안 이미지 영역을 생성하는 것
    을 특징으로 하는 3D이미지 변환 방법.
  16. 삭제
  17. 삭제
  18. 제14항에 있어서,
    상기 전체 이미지가 상기 텍스트 이미지 영역과 상기 원시 이미지 영역을 포함하고 있는지 여부를 판별하는 단계는 상기 전체 이미지를 그레이스케일 이미지로 변환하여 히스토그램화하는 것
    을 특징으로 하는 3D이미지 변환 방법.
  19. 제18항에 있어서,
    상기 전체 이미지가 상기 텍스트 이미지 영역과 상기 원시 이미지 영역을 포함하고 있는지 여부를 판별하는 단계는 상기 전체 이미지를 히스토그램화 한 값 중의 최대값이 상기 히스토그램의 임계값보다 큰 경우 상기 텍스트 영역과 상기 원시 이미지 영역을 포함하는 상기 전체 이미지로 판별하는 것
    을 특징으로 하는 3D이미지 변환 방법.
  20. 삭제
  21. 제14항에 있어서,
    3D 변환 예정 이미지를 탐색하는 단계는 상기 전체 이미지에서 연속적으로 연결되어 있는 라인 픽셀들에 동일한 레이블을 부여하여 상기 3D 변환 예정 이미지를 탐색하는 것
    을 특징으로 하는 3D이미지 변환 방법.
  22. 제21항에 있어서,
    3D 변환 예정 이미지를 탐색하는 단계는 상기 레이블에 상응하는 라인 픽셀을 카운트하고, 상기 카운트한 값이 라인 픽셀의 임계값보다 작은 경우, 상기 레이블에 상응하는 라인 픽셀을 제거하여 상기 3D 변환 예정 이미지를 탐색하는 것
    을 특징으로 하는 3D이미지 변환 방법.
  23. 제22항에 있어서,
    3D 변환 예정 이미지를 탐색하는 단계는 상기 원시 이미지 영역에 포함된 원시 이미지의 가로 길이값과 세로 길이값의 차이값이 임계값보다 큰 경우, 상기 원시 이미지를 상기 3D 변환 예정 이미지가 아닌 것으로 판별하는 것
    을 특징으로 하는 3D이미지 변환 방법.
  24. 제22항에 있어서,
    3D 변환 예정 이미지를 탐색하는 단계는 상기 원시 이미지 영역에 포함된 원시 이미지의 가로 길이값과 세로 길이값 중 어느 하나가 임계값보다 작은 경우, 상기 원시 이미지는 3D 변환 예정 이미지가 아닌 것으로 판별하는 것
    을 특징으로 하는 3D이미지 변환 방법.
KR1020130108080A 2013-09-09 2013-09-09 3d 이미지 변환 장치 및 그 방법 KR101519463B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130108080A KR101519463B1 (ko) 2013-09-09 2013-09-09 3d 이미지 변환 장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130108080A KR101519463B1 (ko) 2013-09-09 2013-09-09 3d 이미지 변환 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20150029216A KR20150029216A (ko) 2015-03-18
KR101519463B1 true KR101519463B1 (ko) 2015-05-12

Family

ID=53023751

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130108080A KR101519463B1 (ko) 2013-09-09 2013-09-09 3d 이미지 변환 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR101519463B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11004257B1 (en) 2019-11-04 2021-05-11 Lg Electronics Inc. Method and apparatus for image conversion
WO2021107595A1 (ko) * 2019-11-29 2021-06-03 주식회사 코믹스브이 가상콘텐츠 체험 시스템 및 그 제어방법

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102132406B1 (ko) * 2015-04-29 2020-07-09 삼성전자주식회사 디스플레이 장치 및 그의 제어 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101382227B1 (ko) * 2013-01-30 2014-04-04 주식회사 넥시아 디바이스 윈도우 영상을 분류하는 방법, 이를 입체 영상으로 변환하는 방법 및 이를 수행하는 전자 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101382227B1 (ko) * 2013-01-30 2014-04-04 주식회사 넥시아 디바이스 윈도우 영상을 분류하는 방법, 이를 입체 영상으로 변환하는 방법 및 이를 수행하는 전자 장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11004257B1 (en) 2019-11-04 2021-05-11 Lg Electronics Inc. Method and apparatus for image conversion
WO2021107595A1 (ko) * 2019-11-29 2021-06-03 주식회사 코믹스브이 가상콘텐츠 체험 시스템 및 그 제어방법

Also Published As

Publication number Publication date
KR20150029216A (ko) 2015-03-18

Similar Documents

Publication Publication Date Title
KR101690297B1 (ko) 영상 변환 장치 및 이를 포함하는 입체 영상 표시 장치
US20120236133A1 (en) Producing enhanced images from anaglyph images
US20110199469A1 (en) Detection and display of stereo images
KR20120049997A (ko) 영상 변환 장치 및 이를 이용하는 디스플레이 장치와 그 방법들
JP2010093816A (ja) 視覚的関心に基づいた２次元映像の３次元映像変換器および変換方法
RU2598989C2 (ru) Устройство отображения трехмерного изображения и способ отображения для такового
US20130293469A1 (en) User interface control device, user interface control method, computer program and integrated circuit
US20110199468A1 (en) 3-dimensional display with preferences
WO2013054619A1 (ja) 画像処理装置、画像処理方法およびプログラム
KR101519463B1 (ko) 3d 이미지 변환 장치 및 그 방법
KR20120101881A (ko) 영상 디스플레이 방법 및 장치
JP2014011804A (ja) ディスプレイ装置及びその制御方法
US9521428B2 (en) Method, device and system for resizing original depth frame into resized depth frame
US20120121163A1 (en) 3d display apparatus and method for extracting depth of 3d image thereof
EP2752815A1 (en) Display method and display apparatus
JP2016535516A (ja) 多視点映像処理装置及びその映像処理方法
US9529825B2 (en) Method, device and system for restoring resized depth frame into original depth frame
KR101567710B1 (ko) 특수 안경을 착용한 관찰자만 정보를 볼 수 있는 디스플레이 시스템
Chappuis et al. Subjective evaluation of an active crosstalk reduction system for mobile autostereoscopic displays
US9547933B2 (en) Display apparatus and display method thereof
US20240121373A1 (en) Image display method and 3d display system
KR101620969B1 (ko) 디스플레이 장치 및 이에 적용되는 3ｄ 영상 미리보기 제공 방법, 그리고 3ｄ 영상 제공 시스템
WO2012096054A1 (ja) 視差画像表示装置、視差画像表示方法及び視差画像表示プログラム
JP6131256B6 (ja) 映像処理装置及びその映像処理方法
JP6131256B2 (ja) 映像処理装置及びその映像処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180502

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190321

Year of fee payment: 5