KR100991804B1

KR100991804B1 - 이동 기기용 입체영상생성칩 및 이를 이용한입체영상표시방법

Info

Publication number: KR100991804B1
Application number: KR1020080054215A
Authority: KR
Inventors: 이영훈; 정용비
Original assignee: 유한회사 마스터이미지쓰리디아시아
Priority date: 2008-06-10
Filing date: 2008-06-10
Publication date: 2010-11-04
Also published as: TW201019709A; WO2009151249A2; EP2285133A4; CN102100075A; EP2285133A2; JP2011525075A; US20110063419A1; WO2009151249A3; KR20090128179A

Abstract

본 발명은 이동 기기용 입체영상생성칩 및 이를 이용한 입체영상표시방법에 대한 것이다. 즉, 이동 기기에 삽입된 입체영상생성 칩을 이용하여 입체 영상을 디스플레이하되, 촬영된 좌측 영상과 우측 영상을 바로 교대로 배치되는 형태로 합성하여 저장/영상처리하는 것이 아니라, 사이드-바이-사이드(side-by-side) 방식으로 연결하여 저장/영상처리를 수행하고, 이후 디스플레이 단계에서 입체영상생성 칩의 좌우 영상을 교대로 배치하는 합성단계를 통해 디스플레이되는 입체영상의 품질을 향상시킬 수 있다. 또한, 일반 2D 영상을 상술한 입체영상생성칩을 통해 3D 디스플레이하는 것이 가능하다.

입체영상, side-by-side

Description

이동 기기용 입체영상생성칩 및 이를 이용한 입체영상표시방법{Stereoscopic Image Generation Chip For Mobile Equipment, and Method For Generating Stereoscopic Image Using The Same}

본 발명은 이동 기기를 이용한 입체 영상 생성 칩 및 이를 이용한 입체영상 표시 방법에 대한 것으로서, 더 구체적으로는 이동기기 내 입체영상 생성 칩의 입체영상 처리 기능을 강화하여 입체영상 품질을 향상시키고, 2D 이미지를 3D로 인식될 수 있도록 처리하는 기술에 대한 것이다.

일반적으로 입체 영상(또는 3D 영상)을 구현하는 방법은 인간의 두 눈에 서로 다른 영상을 조명함으로써 구현되며, 입체영상 표시 장치는 이와 같이 두 눈에 서로 다른 영상을 조명하기 위하여 별도의 안경착용이 필요한지 여부에 따라 크게 안경식 입체영상 표시 장치와 비안경식 (나안방식) 입체영상 표시 장치로 구분된다.

안경식 입체영상 표시장치는 관찰자가 특수한 안경을 착용하여야 하는 불편함을 감수하여야 하지만, 비안경식 입체영상 표시 장치는 상술한 안경을 착용하지 않고 직접 스크린을 주시하는 것만으로도 입체영상을 느낄 수 있어 안경식 입체영 상 표시 장치의 단점을 해소할 수 있기 때문에, 이에 대한 많은 연구가 진행되고 있다. 비안경식 입체영상 표시 장치는 렌티큘러 (lenticular) 방식에 의한 장치와 패럴랙스-배리어 (parallax-barrier) 방식에 의한 장치로 크게 구분된다.

이하에서 패럴랙스-배리어 방식에 의한 입체영상 표시 장치의 동작을 도 1a 및 도 1b를 참조하여 설명한다.

도 1a는 패럴랙스-배리어를 이용한 입체영상 표시장치의 단면도, 도 1b는 패럴랙스-배리어를 이용한 입체영상 표시장치의 사시도이다.

패럴랙스-배리어 방식에 의한 입체영상 표시 장치는 도 1a 및 도 1b에 도시된 바와 같이 좌/우 두 눈에 각각 대응하는 수직방향(도 1b 의 Y-Y' 방향)을 향하는 좌측영상(L)과 우측영상(R)을 수평방향(도 1b에서 X-X' 방향)으로 교대로 배치한 디스플레이 모듈(10), 및 그 전단에 배리어(20; barrier)라 불리는 수직방향을 향하는 막대 형태의 차단막을 포함한다. 이러한 입체영상 표시 장치는 도 1a에 도시된 바와 같이 좌측영상(L)에 해당하는 빛은 좌안으로만 입사되고, 우측영상(R)에 해당하는 빛은 우안으로만 입사되도록 상기 디스플레이 모듈(10) 및 배리어(20)를 배치하며, 이를 통해 분할된 2 개의 좌, 우 영상(L, R)이 분리 관측되어 입체감을 느끼게 하는 방식이다.

상술한 바와 같은 입체 영상을 구현하기 위하여는 좌측 영상과 우측 영상이 교대로 배치되어 저장된 입체 영상 컨텐츠가 필요하다. 다만, 현재 이와 같은 입체영상 컨텐츠 생성은 입체영상을 촬영하기 위한 장비가 고가이며, 대중화되어 있지 않아 특정 서비스 제공자에 의해서만 제공되고 있으며, 일반 사용자들에 의해 널리 활성화되어 있지 않고 있다.

따라서, 이와 같은 입체 영상을 휴대폰을 포함한 기존 이동 기기를 이용하여 쉽게 높은 품질의 입체영상을 생성하는 기술에 대한 기대가 크다. 또한, 기존 2D 이미지를 사용자가 일정 정도 입체감을 느끼도록 조정하여 디스플레이할 수 있다면, 3D 기술에 대한 수요가 증대될 것이다.

아울러, 입체영상의 경우, 좌우측 영상의 특수한 처리 방식에 따라 압축 및 압축된 이미지의 디코딩에 있어서의 품질(Quality)이 좌우되는바, 입체영상 콘텐츠의 특성에 맞는 입체영상생성칩 또는 모듈이 필요하다.

상술한 바와 같은 문제점을 해결하기 위해서 본 발명의 목적은 기존의 카메라 모듈 2개를 장착한 이동 기기를 이용하여 일반 사용자가 쉽게 입체영상 컨텐츠를 제작하고, 또한 입체영상 촬영 시 실제 디스플레이 되는 입체영상을 확인하고 깊이감(depth)을 조절하여 컨텐츠를 생성함으로써 보다 높은 품질의 입체 영상을 제작하는 방법을 제공하는 데 있다.

특히, 본 발명에서는 상술한 이동 기기를 이용한 입체영상 생성을 이동 기기에 장착된 입체영상생성칩을 이용하여 수행하되, 입체영상 컨텐츠 고유의 특성을 고려하여 영상 처리 절차를 개선함으로써 간단하게 디스플레이되는 입체영상의 품질을 향상하는 방법을 제공하고자 한다.

아울러, 기존 2D 영상까지 사용자가 일정 정도 입체감을 느끼도록 디스플레이 함으로써 입체 영상 기술의 활용도를 증가시키는 방법을 제공하고자 한다.

상술한 바와 같은 목적을 위한 본 발명의 일 실시형태에서는 영상 처리가 가능한 벡엔드 및 2개의 카메라 모듈을 포함하는 이동 기기(Mobile Equipment)에 삽입된 입체 영상 생성 칩을 통해 입체 영상을 표시하는 방법으로서, (1) 상기 이동 기기의 2개의 카메라 모듈을 통해 촬영된 좌측 영상과 우측 영상을 상기 입체 영상 생성 칩에 입력하는 단계; (2) 상기 입력된 좌측 영상과 우측 영상을 상기 입체 영상 생성 칩에 의해 사이드-바이-사이드(side-by-side) 방식으로 연결하여 상기 이 동 기기의 벡엔드(Backend)로 출력하는 단계; (3) 상기 벡엔드에서 영상 처리된, 사이드-바이-사이드 방식으로 연결된 좌측 영상과 우측 영상을 상기 벡엔드로부터 상기 입체영상 생성 칩에 입력하는 단계; (4) 상기 입체영상 생성 칩을 통해, 상기 좌측 영상과 상기 우측 영상 각각을 세로 방향의 복수의 이미지로 분할하여, 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들이 각각 번갈아 배치되도록 합성하는 단계; 및 (5) 상기 합성된 이미지를 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈을 통해 디스플레이하는 단계에 따라 입체영상을 표시하는 방법을 제안한다.

이때, 상기 (5) 단계 이전에, (4-1) 상기 합성된 이미지 내에서, 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들을 각각 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감(depth)을 조정하는 단계를 더 포함할 수도 있다. 여기서, "깊이감"이란 사용자가 영상이 스크린과 대비하여 돌출되거나 스크린 후방에 위치하는 것으로 인식되는 정도를 의미하는 것으로 가정한다.

또한, 상기 (3) 단계가, 상기 벡엔드에서 영상 처리된, 2차원 영상을 상기 입체영상 생성 칩에 입력하는 단계를 포함하며, 상기 (4) 단계가, 상기 2차원 영상을 상기 입체영상 생성 칩을 통해 세로 방향의 복수의 이미지로 분할하여, 상기 분할된 복수의 이미지를 순차적으로 의사(pseudo) 좌측 영상 이미지 조합과 의사 우측 영상 이미지 조합으로서 번갈아 매핑하는 단계를 포함하며, 상기 (4-1) 단계가, 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 좌우 방 향 중 서로 다른 방향으로 시프트시킴으로써 깊이감을 조정하는 단계를 포함하며, 상기 (5) 단계가, 상기 깊이감이 조정된 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 상기 입체영상디스플레이 모듈을 통해 디스플레이하는 단계를 포함하도록 설정함으로써, 일반 2D 영상 역시 사용자가 입체감을 느끼도록 디스플레이할 수도 있다.

또한, 상기 (4-1) 단계는, 상기 이동 기기의 액정에 디스플레이되는 입체영상을 확인한 사용자가 상기 이동 기기의 입력 장치를 통해 입력한 제어 정보에 따라, 상기 좌측 영상이 분할된 복수의 이미지들 또는 상기 의사 좌측 영상 이미지 조합, 및 상기 우측 영상이 분할된 복수의 이미지들 또는 상기 의사 우측 영상 이미지 조합을 상기 서로 다른 방향으로 시프트시키는 정도를 결정하여 수행되는 것이 바람직하다.

또한, 상기 (2) 단계는, 상기 입체 영상 생성 칩의 카운터로부터 생성된 시간 동기를 이용하여, 상기 입력된 좌측 영상과 우측 영상의 촬영 시간 동기에 맞추어, 상기 입력된 좌측 영상과 우측 영상을 연결하는 것일 수 있다. 구체적으로, 상기 2개의 카메라 모듈은 대기(Ready) 또는 전원 해제(power down) 중 하나 이상의 기능을 포함하는 일시 정지 기능을 포함하며, 상기 (2) 단계는, 상기 2개의 카메라 모듈로부터 입력 받은 상기 좌측 영상과 상기 우측 영상의 동기가 맞지 않는 경우, 상기 2개의 카메라 모듈의 상기 일시 정지 기능을 사용하여 상기 좌측 영상과 상기 우측 영상을 일시 정지시킨 후, 동기가 맞도록 상기 좌측 영상과 상기 우측 영상을 동시에 재 시작시키는 단계를 포함하도록 설정될 수도 있다.

한편, 상술한 바와 같은 과제를 해결하기 위한 본 발명의 다른 일 실시형태에서는, 2차원 영상을 세로 방향의 복수의 이미지로 분할하여, 상기 분할된 복수의 이미지를 순차적으로 의사(Pseudo) 좌측 영상 이미지 조합과 의사 우측 영상 이미지 조합으로서 번갈아 매핑하는 단계; 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 각각 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감(Depth)을 조정하는 단계; 및 상기 깊이감이 조정된 의사 좌측 영상 이미지 조합 및 의사 우측 영상 이미지 조합을 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈을 통해 디스플레이하는 단계를 포함하는 이차원영상의 입체영상표시방법을 제공한다.

이때, 상기 2차원 영상은 상기 이동기기의 영상 처리가 가능한 벡엔드에서 영상 처리된 후 상기 이동 기기에 설치된 입체영상 생성 칩에 입력된 2차원 영상이며, 상기 매핑 단계 및 상기 깊이감 조정 단계는 상기 입체 영상 생성 칩에 의해 수행될 수 있다.

또한, 상기 깊이감 조정 단계는, 이동 기기의 액정에 디스플레이되는 입체영상을 확인한 사용자가 상기 이동 기기의 입력 장치를 통해 입력한 제어 정보에 따라, 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 상기 서로 다른 방향으로 시프트시키는 정도를 결정하여 수행되는 것일 수 있다.

한편, 상술한 바와 같은 과제를 해결하기 위한 본 발명의 또 다른 일 실시형태에서는 영상 처리가 가능한 벡엔드 및 2개의 카메라 모듈을 포함하는 이동 기기(Mobile Equipment)에 삽입되어 입체 영상 표시 기능을 수행하는 입체 영상 생성 칩으로서, 상기 이동 기기의 2개의 카메라 모듈을 통해 촬영된 좌측 영상과 우측 영상을 입력받기 위한 카메라 입력부; 상기 입력된 좌측 영상과 우측 영상을 사이드-바이-사이드(side-by-side) 방식으로 연결하는 처리를 수행하는 영상연결모듈; 상기 영상연결모듈에 의해 사이드-바이-사이드 방식으로 연결된 상기 좌측 영상과 우측 영상을 상기 이동 기기의 벡엔드(Backend)로 출력하기 위한 카메라 출력부; 상기 벡엔드에서 영상 처리된, 사이드-바이-사이드 방식으로 연결된 좌측 영상과 우측 영상을 상기 벡엔드로부터 입력받기 위한 디스플레이 입력부; 상기 사이드-바이-사이드 방식으로 연결된 좌측 영상과 우측 영상을 각각 세로 방향의 복수의 이미지로 분할하여, 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들이 각각 번갈아 배치되도록 합성하는 합성 모듈; 및 상기 합성 모듈을 통해 합성된 이미지를 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈에 출력하기 위한 디스플레이 출력부를 포함하는 이동 기기용 입체영상생성칩을 제공한다.

이때, 상기 합성 모듈에 의해 합성된 상기 이미지 내에서 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들을 각각 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감(depth)을 조정하는 깊이감 조정 모듈을 더 포함할 수도 있다.

또한, 상기 디스플레이 입력부는 상기 벡엔드에서 영상 처리된, 2차원 영상을 추가적으로 입력받으며, 상기 합성 모듈은 상기 2차원 영상을 세로 방향의 복수의 이미지로 분할하여, 상기 분할된 복수의 이미지를 순차적으로 의사(pseudo) 좌 측 영상 이미지 조합과 의사 우측 영상 이미지 조합으로서 번갈아 매핑하는 기능을 추가적으로 수행하며, 상기 깊이감 조정 모듈은 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 각각 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감을 조정하는 기능을 추가적으로 수행하며, 상기 디스플레이 출력부는 상기 깊이감 조정 모듈에 의해 깊이감이 조정된 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 상기 입체영상디스플레이 모듈에 출력하는 기능을 추가적으로 수행할 수도 있다.

또한, 상기 깊이감 조정 모듈은, 상기 이동 기기의 액정에 디스플레이되는 입체영상을 확인한 사용자가 상기 이동 기기의 입력 장치를 통해 입력한 제어 정보에 따라, 상기 좌측 영상이 분할된 복수의 이미지들 또는 상기 의사 좌측 영상 이미지 조합, 및 상기 우측 영상이 분할된 복수의 이미지들 또는 상기 의사 우측 영상 이미지 조합을 상기 서로 다른 방향으로 시프트시키는 정도를 결정하여 깊이감 조정을 수행하는 것일 수 있다.

아울러, 상기 입체 영상 생성 칩의 시간 동기를 생성하기 위한 카운터를 더 포함하며, 상기 영상연결모듈은 상기 카운터로부터 생성된 시간 동기를 이용하여, 상기 입력된 좌측 영상과 우측 영상의 촬영 시간 동기에 맞추어, 상기 입력된 좌측 영상과 우측 영상을 연결하는 것일 수 있다. 구체적으로, 상기 2개의 카메라 모듈은 대기(Ready) 또는 전원 해제(power down) 중 하나 이상의 기능을 포함하는 일시 정지 기능을 포함하며, 상기 영상연결모듈은, 상기 2개의 카메라 모듈로부터 입력 받은 상기 좌측 영상과 상기 우측 영상의 동기가 맞지 않는 경우, 상기 2개의 카메 라 모듈의 상기 일시 정지 기능을 사용하여 상기 좌측 영상과 상기 우측 영상을 일시 정지시킨 후, 동기가 맞도록 상기 좌측 영상과 상기 우측 영상을 동시에 재 시작시킴으로써 상기 좌측 영상과 우측 영상의 촬영 시간 동기에 맞추어 연결하는 것일 수 있다.

마지막으로, 상술한 바와 같은 과제를 해결하기 위한 본 발명의 또 다른 일 실시형태에서는, 2차원 영상을 세로 방향의 복수의 이미지로 분할하여, 상기 분할된 복수의 이미지를 순차적으로 의사(Pseudo) 좌측 영상 이미지 조합과 의사 우측 영상 이미지 조합으로서 번갈아 매핑하는 합성 모듈; 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감(Depth)을 조정하는 깊이감 조정 모듈; 및 상기 깊이감이 조정된 의사 좌측 영상 이미지 조합 및 의사 우측 영상 이미지 조합을 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈에 출력하는 디스플레이 출력부를 포함하는 이동 기기용 입체영상생성칩을 제안한다.

이때, 상기 2차원 영상은 상기 이동기기의 영상 처리가 가능한 벡엔드에서 영상 처리된 후 상기 입체영상 생성 칩에 입력된 2차원 영상일 수 있다.

아울러, 상기 깊이감 조정 모듈은, 상기 이동 기기의 액정에 디스플레이되는 입체영상을 확인한 사용자가 상기 이동 기기의 입력 장치를 통해 입력한 제어 정보에 따라, 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 상기 서로 다른 방향으로 시프트시키는 정도를 결정하여 상기 깊이감 조정을 수행하는 것일 수 있다.

상술한 바와 같은 본 발명의 실시형태에 따르면, 기존의 카메라 모듈 2개를 장착한 이동 기기를 이용하여 일반 사용자가 쉽게 입체영상 컨텐츠를 제작하고, 또한 입체영상 촬영 시 실제 디스플레이되는 입체영상을 확인하고 깊이감을 조절하여 컨텐츠를 생성함으로써 보다 높은 품질의 입체 영상을 제작할 수 있다.

특히, 상술한 이동 기기를 이용한 입체영상 생성을 이동 기기에 장착된 입체영상생성칩을 이용하여 수행하되, 입체영상 컨텐츠 고유의 특성, 즉 좌측 영상과 우측 영상이 교대로 배치된 형태를 지녀야 한다는 특성 및 이에 대한 영상 처리시 영향을 고려하여 영상 처리 절차를 개선함으로써 간단하게 디스플레이되는 입체영상의 품질을 향상시킬 수 있다.

아울러, 기존 2D 영상까지 사용자가 일정 정도 입체감을 느끼도록 디스플레이 함으로써 입체 영상 기술의 활용도를 증가시킬 수 있다.

이하, 본 발명에 따른 바람직한 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다. 첨부된 도면과 함께 이하에 개시될 상세한 설명은 본 발명의 예시적인 실시형태를 설명하고자 하는 것이며, 본 발명이 실시될 수 있는 유일한 실시형태를 나타내고자 하는 것이 아니다.

이하의 상세한 설명은 본 발명의 완전한 이해를 제공하기 위해서 구체적 세부사항을 포함한다. 그러나, 당업자는 본 발명이 이러한 구체적 세부사항 없이도 실시될 수 있음을 안다. 몇몇 경우, 본 발명의 개념이 모호해지는 것을 피하기 위 하여 공지의 구조 및 장치는 생략되거나, 각 구조 및 장치의 핵심기능을 중심으로 한 블록도 형식으로 도시된다. 또한, 본 명세서 전체에서 동일한 구성요소에 대해서는 가능한 동일한 도면 부호를 사용하여 설명한다.

도 2는 2개의 카메라 모듈을 이용하여 촬영한 좌측 영상과 우측 영상을 각각 도시한 도면이다.

본 발명의 일 실시형태에 따르면 영상 촬영 기능이 있는 휴대폰 등 기존의 이동 기기(Mobile Eqipment)용 카메라 모듈 2개를 이용하여 각각 도 2의 (1)과 같은 좌측 영상(L)과 도 2의 (2)와 같은 우측 영상(R)을 촬영한다. 한편, 기존의 영상 처리 기능을 가지는 이동 기기는 1개의 카메라 모듈을 통해 촬영된 영상을 상기 이동 기기의 벡엔드 칩셋(back-end chipset) 또는 간단히 벡엔드를 통해 처리하는 기능만을 포함하며, 본 발명의 일 실시형태에서 의도하는 바와 같이 2개의 카메라 모듈을 통해 촬영된 좌측 영상과 우측 영상을 동기를 맞추어 합성하고, 입체감을 조정할 수 없다. 따라서, 본 발명의 일 실시형태에서는 이와 같은 이동 기기에 입체 영상 생성 칩을 삽입하며, 이를 통해 입체 영상을 생성하도록 할 수 있다.

한편, 도 2에 도시된 바와 같은 좌측 영상(L)과 우측 영상(R)은 정지화상일 수도 있고, 동영상일 수도 있으며, 각각의 카메라 모듈을 통한 일반적인 영상 컨텐츠에 해당한다. 또한, 각각의 카메라 모듈은 CMOS 또는 CCD를 지원하도록 할 수 있으며, 이는 선택적인 사항에 해당한다.

도 3은 2개의 카메라 모듈을 이용하여 촬영한 좌측 영상과 우측 영상을 입체영상 생성 칩에서 합성한 영상을 도시한 도면이다.

구체적으로, 도 2의 (1) 및 (2)에 도시된 바와 같은 2개의 카메라 모듈에 의해 촬영된 좌측 영상과 우측 영상은 입체 영상 생성칩에 입력되어 각각 세로방향 열을 단위로 분할되어 가로 방향으로 교대로 배치되어 합성된다. 이와 같이 공간적으로 교대로 배치된 좌우 영상은 도 1a 및 도 1b와 같은 패럴랙스 베리어를 이용한 디스플레이 모듈을 통해 사용자의 좌안에는 좌측 영상만 보이고, 우안에는 우측 영상만이 보여 전체적으로 입체 영상으로 인지되게 된다.

이와 같은 입체영상 생성 방법에 대한 일반론을 바탕으로 이하에서는 이동 기기에 입체영상생성칩을 삽입하여 입체영상을 생성하되, 입체영상 컨텐츠의 고유 특성을 고려하여 높은 품질의 입체영상 디스플레이가 가능하도록 하는 개선된 입체영상생성칩 및 이를 이용한 방법에 대해 설명한다. 이를 위해 먼저 이동기기에 삽입된 입체영상생성칩을 이용하여 입체영상을 생성하는 일반적인 방법 및 이의 문제점을 살펴본다.

도 4는 이동기기에 삽입된 입체영상생성칩을 이용하여 입체영상을 디스플레이하는 일반적인 방법을 설명하기 위한 도면이다.

일반적으로 이동기기를 이용한 입체 영상 생성을 위해서는 기존 이동 기기에 장착된 카메라 모듈을 2개로 확장하고(401a, 401b), 기존 이동기기에서 처리할 수 없는 입체영상 합성 등의 기능 수행을 위해 입체영상생성칩(402)의 삽입이 필요하다. 물론, 기존 백엔드(403)에 대응하는 모듈에 소프트웨어 형식으로 입체영상생성칩(402)의 기능을 추가하는 것 역시 가능하며, 본 발명은 이를 배제하지 않는다. 즉, 본 발명의 각 실시형태에 따른 방법은 입체영상생성칩에 의해 수행될 수도, 전 체 단계가 또는 부분적인 단계가 소프트웨어적으로 수행될 수도 있다. 다만, 본 발명의 바람직한 일 실시형태에서는 입체영상의 합성, 처리 과정을 별도의 입체영상생성 칩에 의한 하드웨어적인 처리를 통해 처리 속도를 증가시키고, 보다 안정적으로 입체영상을 생성하는 방법을 고려한다.

먼저, 2개의 카메라 모듈(401a, 402b)은 인간의 좌우측 눈에 대응하게 각각 좌측 영상(L)과 우측 영상(R)을 촬영하여 입체영상생성칩(402)에 전달한다. 좌측 영상(L) 및 우측 영상(R)을 전달받은 입체영상생성칩(402)은 이후 도 3에 도시된 바와 같이 좌우측 영상이 가로 방향으로 교대로 배치되도록 합성하여 합성 영상(C)을 생성할 수 있다. 이와 같이 생성된 합성 영상(C)은 이후 이동기기의 벡엔드(403)에 전달된다.

이와 같이 합성 영상(C)을 전달받은 이동기기의 벡엔드 단은 합성 영상(C)에 대해 다양한 영상 처리를 수행한다. 이러한 영상 처리에는 영상의 압축 과정, 압축된 컨텐츠의 저장 과정, 저장된 영상의 디코딩 과정 등이 포함된다.

이들 중 영상의 압축 방식은 정지 영상과 동영상에 따라 다양한 방식이 규정되어 있다. 간단한 설명을 위해 이하 정지 영상에 대한 압축 방식을 예로 들어 개략적으로 설명한다.

정지 영상에 대한 압축은 영상을 작은 픽셀(pixel) 단위로 세분하여, 각 픽셀의 영상 데이터 값을 미리 정해진 순서에 따라 판독한 후, 각 판독 데이터 값의 연속된 형태를 일정 기준에 따라 정해진 코드 값에 매핑하여 압축하게 된다. 이때, 영상 압축에 있어서 "0"의 반복은 중요한 의미를 가지며, 예를 들어, "0"이 10회 반복된 형태는 "0"을 10번 나열하는 것이 아니라 반복되는 "0"의 횟수를 별도 신호 값으로 나타냄으로써 영상 데이터를 압축할 수 있다.

다만, 도 3에 도시된 바와 같이 좌측 영상(L)과 우측 영상(R)이 교대로 반복된 입체영상 컨텐츠의 경우, 좌측 영상과 우측 영상 사이에 다수의 경계 영역을 가지며, 이 경계 영역들은 영상의 불연속성(discontinuity)을 증가시키게 된다. 이와 같이 영상의 불연속성이 증가할 경우, 이에 따라 영상 압축 과정에서 압축률이 감소하게 되며, 압축된 컨텐츠의 용량이 증가하게 된다. 따라서 입체영상 컨텐츠 저장을 위해 큰 용량의 저장 매체가 필요하게 된다. 또한, 나누어진 화소들의 상관도(correlation)가 감소함에 따라 압축된 영상의 품질이 감소할 수 있다.

한편, 저장 매체에 저장된 입체영상 컨텐츠는 디코딩(decoding) 과정을 거쳐 디스플레이 모듈(404)을 통해 디스플레이될 수 있다. 이와 같은 디코딩 과정에 있어서도 컨텐츠 데이터 사이의 낮은 상관도는 디코딩 영상의 품질 저하의 원인이 되기도 한다. 따라서, 도 4에서 벡엔드(403)단으로부터 입체영상 디스플레이 모듈(404)로 전달되는 디코딩 영상(C')은 동일 조건하에서도 2D 영상에 비해 품질이 떨어질 수 있다.

따라서, 본 발명의 일 실시형태에서는 이동 기기의 벡엔드 단에 전달되는 입체영상 컨텐츠의 상술한 불연속성 또는 낮은 상관도로 인한 상술한 문제를 해결하기 위해 다음과 같은 방식을 제안한다.

도 5는 본 발명의 일 실시형태에 따라 이동기기에 삽입된 입체영상생성칩을 이용하여 입체영상을 디스플레이하는 방법을 설명하기 위한 도면이다.

본 실시형태에 있어서도, 이동 기기에 장착된 2개의 카메라 모듈(401a, 401b)은 각각 좌측 영상(L)과 우측 영상(R)을 촬영하여 입체영상생성칩(502)에 전달한다(S501). 다만, 본 실시형태에 따른 입체영상생성칩(502)은 이 좌측 영상(L)과 우측 영상(R)을 바로 도 3에 도시된 바와 같이 L, R, L, R, ..의 반복 형태로 합성하는 것이 아니라, 좌측 영상 전체와 우측 영상 전체를 사이드-바이-사이드(Side-By-Side) 방식으로 합성하는 것을 제안한다. 이하에서, "사이드-바이-사이드" 방식을 2 이상의 영상이 좌우측 방향으로 그대로 연결된 형태를 지칭하는 것으로 규정한다. 만일, 2개의 카메라 모듈(401a, 401b)을 통해 촬영된 좌측 영상(L)과 우측 영상(R)이 동영상인 경우, 이들은 입체영상생성칩(502)의 카운터를 이용하여 시간동기에 맞게 연결될 수 있으며, 이에 대해서는 후술한다. 이와 같이 사이드-바이-사이드 방식으로 연결된 좌측 영상(L)과 우측 영상(R)은 이후 이동 기기의 벡엔드(403) 단으로 전달되며(S502), 이에 대해 상술한 바와 같은 다양한 영상 처리가 수행될 수 있다.

사이드-바이-사이드 방식으로 좌측 영상(L)과 우측 영상(R)이 연결된 입체영상 컨텐츠의 경우, 좌측 영상(L)과 우측 영상(R)이 도 3에 도시된 바와 같이 교대로 배치된 입체영상 컨텐츠에 비해 영상 데이터의 불연속성이 작기 때문에 높은 압축율을 획득할 수 있다. 이에 따라 압축된 영상의 용량은 보다 작아지게 되며, 한정되어 있는 이동 기기의 저장 매체에 보다 많은 컨텐츠를 저장할 수 있다. 또한, 영상 데이터의 높은 상관도는 압축 및 디코딩 과정에서의 영상 데이터 손실을 감소시킬 수 있다.

한편, 본 실시형태에서는 상술한 바와 같은 압축, 저장, 디코딩 등의 영상 처리 과정을 거친 입체영상 컨텐츠가 이후 다시 입체영상생성칩(502)에 입력되도록 설정하는 것을 제안한다(S503). 즉, 도 3과 같이 이동기기 내에서 일반적인 입체영상 디스플레이 과정에서 벡엔드 단에서 영상처리된 입체영상이 바로 입체영상 디스플레이 모듈(404)로 전달되던 것에 반하여(즉, 입체영상 디스플레이 모듈 구동 기능이 입체영상생성칩이 아닌 이동 기기의 벡 엔드 단에 있는 것에 반하여), 본 실시형태에서는 입체영상 디스플레이 모듈 구동 기능을 입체영상생성칩(502)이 포함하는 것을 제안한다. 또한, 본 실시형태에 따른 입체영상생성칩(502)은 다음과 같이 입체영상 컨텐츠의 합성 기능을 추가적으로 수행하는 것이 요구된다.

즉, 벡엔드(403) 단에서 영상 처리된, 사이드-바이-사이드 방식으로 연결된 입체영상 컨텐츠(Sc')는 패럴랙스-베리어 또는 렌티큘러 방식의 입체영상 디스플레이 모듈(404)의 디스플레이 방식에 맞도록 좌측 영상과 우측 영상이 번갈아 배치된 형태로 변환되는 것이 바람직하다. 이에 따라 본 실시형태에 따른 입체영상생성칩(502)은 입력 받은 입체영상 컨텐츠의 좌측 영상(L) 부분과 우측 영상(R) 부분을 각각을 세로 방향의 복수의 이미지로 분할하여, 좌측 영상이 분할된 복수의 이미지들과 우측 영상이 분할된 복수의 이미지들이 각각 가로방향으로 번갈아 배치시키는 방식으로 합성하게 된다. 이와 같이 합성된 입체영상 컨텐츠(Ic)는 입체영상 디스플레이 모듈(404)에 전달되어 도 1 및 도 2와 관련하여 상술한 바와 같은 패럴랙스-베리어 방식 입체영상 디스플레이 또는 렌티큘러 렌즈 어레이 방식 입체영상 디스플레이가 수행되게 된다(S504).

상술한 바와 같이 본 실시형태에 따라 입체영상 컨텐츠 용량을 감소시키고, 보다 높은 품질의 입체영상표시가 가능하게 된다. 다만, 디스플레이 수단 및 사용자에 따라 인지되는 입체감이 서로 상이할 수 있다. 즉, 사용자에 따라서는 보다 강한 깊이감(depth)을 느끼기를 원할 수도 있고, 인지 과정에서의 불편함 등을 이유로 보다 약한 깊이감을 느끼기를 원할 수도 있다. 여기서, "깊이감"이란 사용자가 영상이 스크린과 대비하여 돌출되거나 스크린 후방에 위치하는 것으로 인식되는 정도를 의미하는 것으로 가정한다. 따라서, 본 발명의 바람직한 일 실시형태에서는 사용자가 입체영상을 확인하여, 각각의 사용자에게 맞도록 깊이감을 별도로 조정함으로써 더욱 효율적으로 입체감을 느끼도록 할 수 있다.

도 6은 본 발명의 일 실시형태에 따라, 촬영된 좌측 영상과 우측 영상의 깊이감을 입체 영상 생성 칩에 의해 조절하는 원리를 설명하기 위한 도면이다.

도 6에 도시된 바와 같이 입체 영상을 구성하는 좌측 영상과 우측 영상의 합성 위치에 따라, 사용자에게 해당 사물이 스크린(401) 전면(예를 들어, 좌측 영상과 우측 영상이 "402"로 지칭된 위치)에 위치하는 것으로 인지될 수도, 스크린(401) 후면(예를 들어, 좌측 영상과 우측 영상이 "403"으로 지칭된 위치)에 위치하는 것으로 인지될 수 있다. 본 발명의 일 실시형태에 따르면, 상술한 바와 같이 합성된 좌측 영상과 우측 영상의 좌우 배치의 상대적 시프트(shift)를 통해 조정하여 깊이감을 조정함으로써, 사용자에 따라 입체감을 조정하는 것을 제안한다.

이와 같은 좌측 영상과 우측 영상의 합성 및 상대적 시프트를 통한 입체감 조정은 기존의 이동 기기 구성에 본 발명의 일 실시형태에 따른 입체 영상 생성 칩 의 입체영상 프로세서, 구체적으로 입체 영상 프로세서의 입체감 조정 모듈를 통해 구현될 수도, 이와 달리 이동 기기에 설치되는 소프트웨어에 의해 구현될 수도 있으며, 이에 대해서는 후술하기로 한다.

구체적으로, 합성된 좌측 영상과 우측 영상의 배치 관계에 따라 스크린(401) 전면에 "402"로 지칭된 위치에 사물이 위치하는 것으로 인지되는 경우, 우측 영상을 좌우 방향 중 우측 방향인 "A" 방향으로, 좌측 영상을 좌측 방향인 "A'" 방향으로 시프트한다면, 사용자에게는 좌우 영상 사이의 간격으로 인하여 이들 좌측 영상과 우측 영상이 "402a"로 지칭된 위치에 위치하는 것으로 인지되어 결과적으로 사물이 더욱 스크린(401)으로부터 멀어지는 방향(즉, "a" 방향)으로 이동하는 것과 같은 효과를 가지게 된다. 또한, 동일한 영상 내에서 스크린(401) 후면에 위치("403" 위치)하는 것으로 인지되는 사물에 대해, 우측 영상을 "A" 방향으로, 좌측 영상을 "A'" 방향으로 시프트하는 경우, 사용자에게는 좌우 영상 사이의 간격으로 인하여 이들 우측 영상과 우측 영상이 "403a"로 지칭된 위치에 위치하는 것으로 인지되어 결과적으로 사물이 스크린(401) 쪽(즉, "a" 방향)으로 이동하는 것과 같은 효과를 가지게 된다.

결국, 우측 영상을 "A" 방향으로, 좌측 영상을 "A'" 방향으로 시프트하는 경우, 사물을 전체적으로 "a" 방향으로 이동시키는 효과를 가지게 되어 전체적인 깊이감을 조정할 수 있다.

반대로, 스크린(401) 전면에 "402"로 지칭된 위치에 사물이 위치하는 것으로 인지되는 경우, 우측 영상을 좌측 방향인 "B" 방향으로, 좌측 영상을 우측 방향인 "B'" 방향으로 서로 반대방향으로 시프트하는 경우, 사용자에게는 이들 영상이 "402b" 위치에 위치하는 것과 같이 인지되어, 결과적으로 스크린(401) 쪽(즉, "b" 방향)으로 이동하는 것과 같은 효과를 가지게 된다. 또한, 스크린(401) 후면에 "403"으로 지칭된 위치에 사물이 위치하는 것으로 인지되는 대상 역시, 우측 영상을 "B" 방향으로, 좌측 영상을 "B'" 방향으로 시프트하는 경우, 사용자에게는 이들 영상이 "403b" 위치에 위치하는 것과 같이 인지되어, 결과적으로 스크린(401)으로부터 멀어지는 방향(즉, "b" 방향)으로 이동하는 것과 같은 효과를 가지게 된다.

결국, 우측 영상을 "B" 방향으로, 좌측 영상을 "B'" 방향으로 시프트하는 경우, 사물을 전체적으로 "b" 방향으로 이동시키는 효과를 가지게 되어 전체적인 입체감을 조정할 수 있다.

도 6과 관련하여 상술한 바와 같은 깊이감 조정은 본 발명의 일 실시형태에서 이동 기기의 액정을 통해 촬영된 입체 영상의 입체감을 확인하면서 동시에 수행될 수 있으며, 이에 따라 디스플레이 모듈 및 사용자에 따라 상이하게 요구되는 입체감을 조정하여 입체 영상을 생성할 수 있다.

이와 같이, 깊이감의 조정은 저장된 컨텐츠에 대해 수행되어 바로 디스플레이될 수도, 깊이감이 조정된 상태에서 다시 재 저장되어 이후 재생에 바로 이용되게 할 수도 있다. 이를 통해 본 실시형태에 따른 입체영상생성 방법 및 입체영상 생성칩은 각 사용자 조건에 최적화된 입체영상을 디스플레이할 수 있다.

아울러, 도 6에 도시된 바와 같은 깊이감 조정 방식은 다음과 같이 2D 영상의 깊이감을 임의적으로 조정하여 사용자가 2D 영상을 일정정도 입체적으로 느끼도 록 할 수 있으며, 이러한 기술은 이하 본 발명의 또 다른 일 실시형태로서 설명한다.

도 7은 본 발명의 일 실시형태에 따라 2차원 이미지를 3차원적으로 나타내기 위한 방법을 설명하는 도면이다.

도 7의(a)에 도시된 2D 영상은 이동기기의 벡엔드 단에서 영상처리된 2D 영상일 수도, 이동 기기의 어느 한 카메라 모듈을 통해 촬영된 영상일 수도, 다른 매체에 의해 영상 처리된 영상일 수도 있다. 이와 같은 2D 영상을 입력받은 본 실시형태에 따른 입체영상생성 칩은 2차원 영상을 먼저 도 7의 (a)에 도시된 바와 같이 세로 방향의 복수의 이미지로 분할하여, 분할된 각각의 영상 부분을 순차적으로 좌측 영상부 및 우측 영상부로서 교차적으로 매핑한다. 이하의 설명에 있어서는, 원래 각각 촬영된 좌측 영상과 우측 영상이 교대로 배치된 형태와 구분을 용이하게 하기 위해, 상술한 바와 같이 2D 영상을 분할하여 좌측 영상 부분으로 매핑된 조합을 "의사(Pseudo) 좌측 영상 이미지 조합", 우측 영상 부분으로 매핑된 조합을 "의사 우측 영상 이미지 조합"이라 지칭하기로 한다. 이와 같은 의사 좌측 영상 이미지 조합 및 의사 우측 영상 이미지 조합은 도 7의 (b) 및 (c)에 도시된 바와 같이 깊이감이 조정될 수 있다.

도 7의 (b)는 의사 좌측 영상 이미지 조합을 우측 방향으로, 의사 우측 영상 이미지 조합을 좌측 방향으로 상대적으로 시프트하는 것을 도시하고 있다. 이와 같이 의사 좌측 영상 이미지 조합을 우측 방향으로, 의사 우측 영상 이미지 조합을 좌측 방향으로 시프트하는 경우, 도 6에 도시된 형태에서는 영상이 스크린 후방으 로 이동하는 방향(즉, "b" 방향)으로 이동하게 된다.

또한, 도 7의 (c)는 의사 좌측 영상 이미지 조합을 좌측 방향으로, 의사 우측 영상 이미지 조합을 우측 방향으로 상대적으로 시프트하는 것을 도시하고 있다. 이와 같이 의사 좌측 영상 이미지 조합을 좌측 방향으로, 의사 우측 영상 이미지 조합을 우측 방향으로 시프트하는 경우, 도 6에 도시된 형태에서는 영상이 스크린 전방으로 이동하는 방향(즉, "a" 방향)으로 이동하게 된다. 이와 같은 방식으로 깊이감(depth)이 조정된 의사 좌측 영상 이미지 조합 및 의사 우측 영상 이미지 조합은 패럴랙스-베리어 방식 또는 렌티큘러 어레이 방식 입체영상 디스플레이 모듈을 통해 사용자에게 의사 좌측 영상 이미지 조합은 좌안에만, 의사 우측 영상 이미지 조합은 우안에만 조명되도록 함으로써 사용자가 입체감을 느끼도록 할 수 있다.

이와 같은 2D 영상의 입체화는 상술한 일반 3D 영상 디스플레이와 독립적으로 또는 결합되어 사용될 수 있다.

도 8은 본 발명의 일 실시형태에 따른 입체영상생성칩이 2D 영상 및/또는 3D 영상을 처리하는 개념을 나타낸 개념도이다.

즉, 본 발명에 따른 입체영상생성칩(502')은 이동 기기의 벡엔드 단으로부터 사이드-바이-사이드 방식으로 좌우측 영상이 결합된 3D 컨텐츠 또는 일반 2D 컨텐츠를 제공받을 수 있다. 이때, 3D 컨텐츠/2D 컨텐츠는 바람직하게는 벡엔드 단에서 영상 처리된 컨텐츠이다. 이와 같은 컨텐츠를 제공받은 입체영상생성칩(502')은 3D 컨텐츠에 대해서는 좌측 영상부와 우측 영상부를 복수의 이미지로 분할하여 교대로 배치하여 합성하는 처리를, 2D 컨텐츠에 대해서는 도 7과 관련하여 상술한 바와 같 이 세로방향으로 분할된 복수의 이미지를 각각 의사 좌측 영상 이미지 조합 및 의사 우측 영상 이미지 조합에 매핑하는 처리를 수행할 수 있다. 이에 따라 입체영상 디스플레이 모듈로 출력되는 영상(Ic')은 좌측 영상/의사 좌측 영상과 우측 영상/의사 우측 영상이 교대로 배치된 형태를 가지게 되며, 이를 통해 패럴랙스 베리어/렌티큘러 렌즈 어레이 방식 디스플레이 모듈을 통해 사용자의 좌안과 우안에 구분되어 디스플레이 될 수 있다.

한편, 본 발명의 바람직한 일 실시형태에서는 일반 2D 영상과 3D 영상을 결합하여 디스플레이할 수도 있다. 즉, 하나 이상의 특정 대상(Object)의 경우 2개의 카메라 모듈을 통해 촬영된 좌측 영상과 우측 영상의 결합된 형태로 처리되어, 해당 대상의 각 부분에 따라 깊이감이 상이하도록 디스플레이할 수 있으며, 이 대상들을 일반 2D 영상 배경하에 디스플레이할 수 있다. 이때 배경에 해당하는 2D 영상 역시 전체적으로 도 7과 관련하여 상술한 바와 같이 깊이감이 조정될 수 있으며, 이에 따라 사용자는 실감나는 입체 영상을 즐길 수 있다.

상술한 설명에 있어서는 패럴랙스 베리어 방식 입체 영상 디스플레이 모듈이 도 1a 및 도 1b에 도시된 바와 같이 좌측 영상과 우측 영상이 각각 세로 방향 열을 단위로 분할되어 가로 방향으로 배치되어 합성된 입체 영상만이 사용자에게 입체 영상으로서 인지되는 형태만을 설명하였다. 다만, 본 발명자에 의해 발명되어, 본 출원인에 의해 출원된 "셀 구조 패럴랙스-베리어 및 이를 이용하는 입체영상 표시 장치(특허출원번호 제 2005-0127631 호)"에 따르면, 상술한 패럴랙스 베리어를 셀 방식으로 구현하여, 이를 가로방향 또는 세로 방향으로 선택적으로 구동할 수 있 다. 따라서, 본 발명의 일 실시형태에 따라 입체 영상을 합성하는 경우, 합성의 방향은 가로 방향 또는 세로 방향 등 어느 한 방향으로 한정될 필요는 없으며, 입체 영상을 합성하는 방향과 이를 상영하는데 이용되는 패럴랙스 베리어 방식의 디스플레이 모듈의 베리어 방향을 조절하여 입체 영상을 상영할 수 있다.

한편, 2개의 카메라 모듈을 통해 촬영한 좌우 영상이 동영상인 경우, 각각의 영상은 상술한 입체 영상 생성 칩에서 시간 동기에 맞게 합성되어야 한다. 이와 같은 시간 동기는 본 발명의 일 실시형태에 따른 입체 영상 생성 칩의 카운터에 의해 생성된 시간 동기를 이용하여, 좌우 영상의 동기가 맞지 않은 경우 좌우 영상 중 어느 하나를 입체영상 생성칩의 메모리에 일시 저장한 후, 동기를 맞추어 합성하거나, 기존 2개의 카메라 모듈에 포함된 대기(ready) 또는 전원 해제(power down) 기능 등을 포함하는 일시 정지 기능을 이용하여 좌우 영상에 따른 전압에 변화가 있을 때, 좌우 영상 모두를 일시 정지하였다가, 이 둘의 동기가 맞도록 동시에 재 시작함으로써 획득될 수 있으며, 이하에서 더 구체적으로 살펴보기로 한다.

먼저, 본 발명의 일 실시형태에 따른 입체영상 생성 칩은 좌측 영상과 우측 영상의 동기가 맞지 않는 경우, 이들 중 어느 하나를 임시 저장하기 위한 메모리 모듈을 포함할 수 있다. 이 메모리 모듈은 2개의 카메라 모듈을 통해 촬영한 좌측 영상과 우측 영상의 동기가 맞지 않는 경우, 이들 사이의 동기를 맞추기 위해 동기가 빠른 영상을 일시 저장하는 버퍼 기능을 수행할 수 있으며, 이를 통해 좌우 영상의 동기를 맞추어 합성할 수 있다.

한편, 본 발명의 다른 일 실시형태에서는 상술한 바와 같이 입체 영상 생성 칩이 별도의 메모리 모듈을 포함하지 않는다 하더라도 다음과 같은 방법에 의해 좌우 영상의 동기를 맞출 수 있다.

도 9는 본 발명의 일 실시형태에 따라 메모리 모듈이 없더라도 2개의 카메라 모듈을 통해 촬영한 좌측 영상과 우측 영상의 동기를 맞추는 방법을 설명하기 위한 도면이다.

구체적으로, 2개의 카메라 모듈을 통해 촬영된 좌측 영상과 우측 영상의 동기를 각각 "CH 1 카메라 sync" 및 "CH 2 카메라 sync"로 도시하였으며, 양 영상의 동기가 맞지 않을 경우 기존 카메라 모듈의 일시 정지 기능을 이용하여 동기를 맞추는 과정을 도시하였다,

기존의 카메라 모듈은 영상 촬영의 편의를 위해 대기 또는 전원 해제 등의 일시 정지 기능을 포함할 수 있다. 따라서, 본 발명의 일 실시형태에서는 입체 영상 생성 칩에 좌우 영상 중 어느 하나의 일시 저장을 위한 메모리 모듈이 없더라도, 2개의 카메라 모듈로부터 입력받은 좌우 영상의 동기가 맞지 않는 경우, 양 영상의 동기에 이벤트가 있을 때, 즉 도 9에 도시된 바와 같이 전압이 "high"에서 "low"로 변환되는 시점 또는 이와 반대로 "low"에서 "high"로 변환되는 시점에, 좌우 영상을 일시 정지하였다가, 양 영상의 동기를 맞추어 동시에 재시작함으로써 동기를 맞출 수 있다.

이와 같이, 2개의 카메라 모듈의 일시 정지 기능을 이용하여 입체 영상 생성 칩이 메모리 모듈을 포함하지 않더라도 좌우 영상의 동기를 맞추는 기능은 이하에서 구체적으로 설명할 입체 영상 생성 칩의 입체 영상 프로세서에 의해 수행될 수 도 있으나, 상술한 방식을 수행할 수 있는 한 이에 한정될 필요는 없다.

한편, 이하에서는 상술한 본 발명의 각 실시형태에 따른 입체영상생성 칩이 이동기기내에서 어떻게 배치 가능할 것인지에 대해 설명한다.

도 10은 본 발명의 일 실시형태에 따른 입체영상생성 칩의 이동 기기 내 배치관계를 설명하기 위한 도면이다.

도 10은 기본적으로 도 5에 블록도 형식으로 도시된 각 구성에 대응될 수 있다. 즉, 2개의 카메라 모듈(401a, 402b)은 "CAM1" 및 "CAM2"로 나타내었으며, 입체영상생성칩(502)은 "3D MUXER"로 나타내었다. 한편, 이동기기의 벡엔드 단(403)은 "CPU"로 도시하고 있으며, 입체영상 디스플레이 모듈(404)은 "LCD" 및 "TN LCD"로 나타내고 있다. 도 10은 이와 같은 대응관계에 따라 도면부호를 표시하고 있다.

도 10과 관련하여 구체적인 동작을 도 5와 관련하여 설명하면 다음과 같다. 2개의 카메라 모듈(CAM1(401a), CAM2(401b))을 통해 촬영된 좌측 영상과 우측 영상은 각각 입체영상생성칩 기능을 수행하는 3D MUXER(502)에 입력된다. 이때 카메라의 출력 신호는 3D MUXER(502)의 2개의 카메라 입력부(CAM1, CAM2)를 통해 입력된다. 카메라 모듈로부터 좌측 영상과 우측 영상을 입력받은 3D MUXER(502)는 좌우측 영상을 사이드-바이-사이드 방식으로 결합할 수 있다. 이때, 각 영상이 동영상인 경우, 동기를 맞추는 것이 필요하다. 이와 같이 결합된 영상은 3D MUXER(502)의 카메라 출력부(CAM OUT)를 통해 이동 기기의 벡엔드단, 즉 CPU(403)에 카메라 인터페이스를 통해 입력될 수 있다.

이를 통해 이동 기기의 CPU(403)는 입체영상 컨텐츠의 다양한 영상 처리를 수행할 수 있다. 예를 들어 CPU(403)는 입체영상 컨텐츠의 압축, 압축된 영상의 저장, 저장된 영상의 디코딩 등의 절차를 수행할 수 있다. 이와 같은 영상 처리가 수행된 3D 컨텐츠는 디스플레이 모듈 입력부, 예를 들어 LCD 입력부(LCD IN)을 통해 다시 3D MUXER(502)에 입력될 수 있다. 또한, 본 발명의 일 실시형태에서 3D MUXER(502)는 CPU(403)로부터 3D 컨텐츠뿐만 아니라 일반 2D 컨텐츠를 입력받아 이에 깊이감 조정 기능을 수행할 수도 있음은 상술한 바와 같다.

이와 같이 영상 처리된 3D 컨텐츠/2D 컨텐츠를 입력 받은 3D MUXER(502)는 3D 컨텐츠에 대해 상술한 바와 같이 좌측 영상과 우측 영상이 교대로 번갈아 배치되는 형태로 합성하는 과정을, 2D 컨텐츠에 대해 상술한 바와 같이 영상을 세로 방향 복수의 이미지로 분할하여 각각을 의사 좌측 영상 이미지 조합, 의사 우측 영상 이미지 조합에 매핑하는 과정을 수행할 수 있다. 이와 같이 합성/매핑된 정보는 이후 디스플레이 출력부, 예를 들어 LCD 출력부(LCD OUT)를 통해 입체영상 디스플레이 모듈, 예를 들어 LCD 및 TN LCD에 전달될 수 있다.

상술한 도 10은 당업자가 본 발명을 용이하게 실시하도록 도 5에 도시된 각 기능 블록들의 구체적인 형태를 나타낸 것이며, 본 발명의 범위는 이에 한정될 필요가 없다. 즉, 도 5에 도시된 각 기능 블록들은 동일 또는 균등한 기능을 수행하는 한 다른 부품 또는 명칭으로 지칭될 수 있음은 당업자에게 자명하다.

또한, 상술한 바와 같은 본 발명의 실시형태들에 따른 입체영상 표시 방법은 다음과 같이 수정되어 실시될 수 있다. 즉, 본 발명의 다른 일 실시형태에서는 휴대폰, UMPC 등의 이동 기기의 2개의 카메라를 통해 촬영된 좌측 영상과 우측 영상 이 해당 이동 기기에 의해 사이드-바이-사이드 방식으로 연결된 후, 다른 매체로 전달되어 디스플레이될 수도 있다. 이하, 본 실시형태를 입체영상이 디스플레이되는 장치를 "제 1 기기"로, 좌측 영상과 우측 영상을 촬영하여 컨텐츠를 생성하는 장치를 "제 2 기기"로 명명하여 설명한다.

우선, 제 2 기기는 2개의 카메라 모듈을 포함하는 것이 바람직하다. 이 2개의 카메라 모듈을 통해 각각 좌측 영상과 우측 영상이 촬영된다. 그 후, 촬영된 좌우 영상은 제 2 기기에서 사이드-바이-사이드 방식으로 연결되는 처리를 거칠 수 있으며, 제 2 기기가 본 발명의 상술한 실시형태에 따른 이동기기인 경우, 입체영상 생성 칩에 의해 좌우 영상의 사이드-바이-사이드 방식 연결이 수행될 수 있다.

이를 통해 입체영상 컨텐츠가 생성되며, 본 실시형태에서는 이와 같은 입체영상 컨텐츠를 다른 매체(제 1 기기)에서 디스플레이되는 것을 제안한다. 즉, 제 2 기기에서 사이드-바이-사이드 방식으로 연결된 좌우측 영상은 USB 등의 유선 연결 단자 또는 다양한 무선 연결 수단에 의해 제 1 기기에 입력될 수 있다. 이때 입력되는 입체영상 컨텐츠로서의 좌우측 영상은 제 2 기기에서 단순히 사이드-바이-사이드 방식으로 연결된 것일 수도 있으나, 제 2 기기에서 압축 등의 영상처리가 수행된 상태의 컨텐츠인 것이 바람직하다. 상기 제 2 기기가 상술한 실시형태에 따른 이동 기기인 경우, 이와 같은 영상 처리는 이동기기의 벡엔드단에서 수행될 수 있다.

상술한 바와 같이 입체영상 컨텐츠를 입력 받은 제 1 기기는 이후 입력 받은 좌측 영상과 상기 우측 영상 각각을 세로 방향의 복수의 이미지로 분할하여, 좌측 영상이 분할된 복수의 이미지들과 우측 영상이 분할된 복수의 이미지들이 각각 번갈아 배치되도록 합성할 수 있다. 이를 통해 입체영상 컨텐츠는 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 제 1 기기의 입체영상디스플레이 모듈을 통해 디스플레이되어, 사용자에게 입체영상을 제공할 수 있다.

아울러, 상술한 실시형태에서 제 1 기기에 입력되는 입체영상 컨텐츠는 제 2 기기에서 2D 영상이 도 7과 관련하여 상술한 바와 같이 깊이감이 조정되어 의사 3차원 영상으로서 생성된 컨텐츠일 수도 있다.

상술한 바와 같이 개시된 본 발명의 바람직한 실시형태에 대한 상세한 설명은 당업자가 본 발명을 구현하고 실시할 수 있도록 제공되었다. 상기에서는 본 발명의 바람직한 실시 형태를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다. 예를 들어, 본 발명의 상술한 설명에 있어서 "이동 기기"는 휴대폰, PDA, PMP 등을 포함하는 모든 이동식 기기를 포함하는 개념이며, 2개의 카메라 모듈과 영상 처리가 가능한 벡엔드 칩을 포함하는 이동 기기라면 어느 특정 형태의 기기에 한정할 필요가 없으며 임의의 이동 기기에 본 발명의 실시형태에 따른 입체 영상 생성 칩을 삽입함으로써 입체 영상을 생성할 수 있다.

따라서, 본 발명은 여기에 나타난 실시형태들에 제한되려는 것이 아니라, 여기서 개시된 원리들 및 신규한 특징들과 일치하는 최광의 범위를 부여하려는 것이다.

상술한 바와 같은 본 발명에 따른 이동기기용 입체영상 생성 칩 및 이를 이용한 입체영상 생성 방법은 휴대폰, PDA, PMP 등을 포함하는 다양한 이동식 기기에 적용되어, 기존 2D 영상을 사용자가 입체적으로 느끼도록 하며, 보다 높은 품질의 입체영상 디스플레이를 구현할 수 있도록 할 수 있다.

도 1a는 패럴랙스-배리어를 이용한 입체영상 표시장치의 단면도.

도 1b는 패럴랙스-배리어를 이용한 입체영상 표시장치의 사시도.

도 2는 2개의 카메라 모듈을 이용하여 촬영한 좌측 영상과 우측 영상을 각각 도시한 도면.

도 3은 2개의 카메라 모듈을 이용하여 촬영한 좌측 영상과 우측 영상을 입체 영상 생성 칩에서 합성한 영상을 도시한 도면.

도 4는 이동기기에 삽입된 입체영상생성칩을 이용하여 입체영상을 디스플레이하는 일반적인 방법을 설명하기 위한 도면.

도 5는 본 발명의 일 실시형태에 따라 이동기기에 삽입된 입체영상생성칩을 이용하여 입체영상을 디스플레이하는 방법을 설명하기 위한 도면.

도 6은 본 발명의 일 실시형태에 따라, 촬영된 좌측 영상과 우측 영상의 깊이감을 입체 영상 생성 칩에 의해 조절하는 원리를 설명하기 위한 도면.

도 7은 본 발명의 일 실시형태에 따라 2차원 이미지를 3차원적으로 나타내기 위한 방법을 설명하는 도면.

도 8은 본 발명의 일 실시형태에 따른 입체영상생성칩이 2D 영상 및/또는 3D 영상을 처리하는 개념을 나타낸 개념도.

도 10은 본 발명의 일 실시형태에 따른 입체영상생성칩의 이동기기 내 배치관계를 설명하기 위한 도면.

*도면의 주요 부분에 대한 부호의 설명

20 : 패럴랙스 배리어 10 : 디스플레이 모듈

401a, 401b : 카메라 모듈 402, 502 : 입체영상 생성 칩

403 : 백엔드(backend) 404 : 입체영상 디스플레이 모듈

L : 좌측영상 R: 우측영상

C, C', Ic : 결합 영상 I_2D : 2D 영상

Sc, Sc' : 사이드-바이-사이드 방식 연결 영상

Claims

영상 처리가 가능한 벡엔드 및 2개의 카메라 모듈을 포함하는 이동 기기(Mobile Equipment)에 삽입된 입체 영상 생성 칩을 통해 입체 영상을 표시하는 방법에 있어서,

(1) 상기 이동 기기의 2개의 카메라 모듈을 통해 촬영된 좌측 영상과 우측 영상을 상기 입체 영상 생성 칩에 입력하는 단계;

(2) 상기 입력된 좌측 영상과 우측 영상을 상기 입체 영상 생성 칩에 의해 사이드-바이-사이드(side-by-side) 방식으로 연결하여 상기 이동 기기의 벡엔드(Backend)로 출력하는 단계;

(3) 상기 벡엔드에서 영상 처리된, 사이드-바이-사이드 방식으로 연결된 좌측 영상과 우측 영상을 상기 벡엔드로부터 상기 입체영상 생성 칩에 입력하는 단계;

(4) 상기 입체영상 생성 칩을 통해, 상기 좌측 영상과 상기 우측 영상 각각을 세로 방향의 복수의 이미지로 분할하여, 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들이 각각 번갈아 배치되도록 합성하는 단계; 및

(5) 상기 합성된 이미지를 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈을 통해 디스플레이하는 단계를 포함하는, 입체영상표시방법.
제 1 항에 있어서,

상기 (5) 단계 이전에,

(4-1) 상기 합성된 이미지 내에서, 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들을 각각 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감(depth)을 조정하는 단계를 더 포함하는, 입체영상표시방법.
제 2 항에 있어서,

상기 (3) 단계는,

상기 벡엔드에서 영상 처리된, 2차원 영상을 상기 입체영상 생성 칩에 입력하는 단계를 포함하며,

상기 (4) 단계는,

상기 2차원 영상을 상기 입체영상 생성 칩을 통해 세로 방향의 복수의 이미지로 분할하여, 상기 분할된 복수의 이미지를 순차적으로 의사(pseudo) 좌측 영상 이미지 조합과 의사 우측 영상 이미지 조합으로서 번갈아 매핑하는 단계를 포함하며,

상기 (4-1) 단계는,

상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감을 조정하는 단계를 포함 하며,

상기 (5) 단계는,

상기 깊이감이 조정된 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 상기 입체영상디스플레이 모듈을 통해 디스플레이하는 단계를 포함하는, 입체영상표시방법.
제 3 항에 있어서,

상기 (4-1) 단계는,

상기 이동 기기의 액정에 디스플레이되는 입체영상을 확인한 사용자가 상기 이동 기기의 입력 장치를 통해 입력한 제어 정보에 따라,

상기 좌측 영상이 분할된 복수의 이미지들 또는 상기 의사 좌측 영상 이미지 조합, 및 상기 우측 영상이 분할된 복수의 이미지들 또는 상기 의사 우측 영상 이미지 조합을 상기 서로 다른 방향으로 시프트시키는 정도를 결정하여 수행되는, 입체영상표시방법.
제 1 항에 있어서,

상기 (2) 단계는,

상기 입체 영상 생성 칩의 카운터로부터 생성된 시간 동기를 이용하여, 상기 입력된 좌측 영상과 우측 영상의 촬영 시간 동기에 맞추어, 상기 입력된 좌측 영상과 우측 영상을 연결하는, 입체영상표시방법.
제 5 항에 있어서,

상기 2개의 카메라 모듈은 대기(Ready) 또는 전원 해제(power down) 중 하나 이상의 기능을 포함하는 일시 정지 기능을 포함하며,

상기 (2) 단계는,

상기 2개의 카메라 모듈로부터 입력 받은 상기 좌측 영상과 상기 우측 영상의 동기가 맞지 않는 경우, 상기 2개의 카메라 모듈의 상기 일시 정지 기능을 사용하여 상기 좌측 영상과 상기 우측 영상을 일시 정지시킨 후, 동기가 맞도록 상기 좌측 영상과 상기 우측 영상을 동시에 재 시작시키는 단계를 포함하는, 입체영상표시방법.
2차원 영상을 세로 방향의 복수의 이미지로 분할하여, 상기 분할된 복수의 이미지를 순차적으로 의사(Pseudo) 좌측 영상 이미지 조합과 의사 우측 영상 이미지 조합으로서 번갈아 매핑하는 단계;

상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 각각 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감(Depth)을 조정하는 단계; 및

상기 깊이감이 조정된 의사 좌측 영상 이미지 조합 및 의사 우측 영상 이미지 조합을 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈을 통해 디스플레이하는 단계를 포함하는, 입체영상표시방법.
제 7 항에 있어서,

상기 2차원 영상은 이동기기의 영상 처리가 가능한 벡엔드에서 영상 처리된 후 상기 이동 기기에 설치된 입체영상 생성 칩에 입력된 2차원 영상이며,

상기 매핑 단계 및 상기 깊이감 조정 단계는 상기 입체 영상 생성 칩에 의해 수행되는, 입체영상표시방법.
제 7 항 또는 제 8 항에 있어서,

상기 깊이감 조정 단계는,

이동 기기의 액정에 디스플레이되는 입체영상을 확인한 사용자가 상기 이동 기기의 입력 장치를 통해 입력한 제어 정보에 따라, 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 상기 서로 다른 방향으로 시프트시키는 정도를 결정하여 수행되는, 입체영상표시방법.
영상 처리가 가능한 벡엔드 및 2개의 카메라 모듈을 포함하는 이동 기기(Mobile Equipment)에 삽입되어 입체 영상 표시 기능을 수행하는 입체 영상 생성 칩에 있어서,

상기 이동 기기의 2개의 카메라 모듈을 통해 촬영된 좌측 영상과 우측 영상을 입력받기 위한 카메라 입력부;

상기 입력된 좌측 영상과 우측 영상을 사이드-바이-사이드(side-by-side) 방식으로 연결하는 처리를 수행하는 영상연결모듈;

상기 영상연결모듈에 의해 사이드-바이-사이드 방식으로 연결된 상기 좌측 영상과 우측 영상을 상기 이동 기기의 벡엔드(Backend)로 출력하기 위한 카메라 출력부;

상기 벡엔드에서 영상 처리된, 사이드-바이-사이드 방식으로 연결된 좌측 영상과 우측 영상을 상기 벡엔드로부터 입력받기 위한 디스플레이 입력부;

상기 사이드-바이-사이드 방식으로 연결된 좌측 영상과 우측 영상을 각각 세로 방향의 복수의 이미지로 분할하여, 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들이 각각 번갈아 배치되도록 합성하는 합성 모듈; 및

상기 합성 모듈을 통해 합성된 이미지를 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈에 출력하기 위한 디스플레이 출력부를 포함하는, 이동 기기용 입체영상생성칩.
제 10 항에 있어서,

상기 합성 모듈에 의해 합성된 상기 이미지 내에서 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들을 각각 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감(depth)을 조정하는 깊이감 조정 모듈을 더 포함하는, 이동 기기용 입체영상생성칩.
제 11 항에 있어서,

상기 디스플레이 입력부는 상기 벡엔드에서 영상 처리된, 2차원 영상을 추가적으로 입력받으며,

상기 합성 모듈은 상기 2차원 영상을 세로 방향의 복수의 이미지로 분할하여, 상기 분할된 복수의 이미지를 순차적으로 의사(pseudo) 좌측 영상 이미지 조합과 의사 우측 영상 이미지 조합으로서 번갈아 매핑하는 기능을 추가적으로 수행하며,

상기 깊이감 조정 모듈은 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 각각 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감을 조정하는 기능을 추가적으로 수행하며,

상기 디스플레이 출력부는 상기 깊이감 조정 모듈에 의해 깊이감이 조정된 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 상기 입체영상디스플레이 모듈에 출력하는 기능을 추가적으로 수행하는, 이동 기기용 입체영상생성칩.
제 12 항에 있어서,

상기 깊이감 조정 모듈은,

상기 이동 기기의 액정에 디스플레이되는 입체영상을 확인한 사용자가 상기 이동 기기의 입력 장치를 통해 입력한 제어 정보에 따라,

상기 좌측 영상이 분할된 복수의 이미지들 또는 상기 의사 좌측 영상 이미지 조합, 및 상기 우측 영상이 분할된 복수의 이미지들 또는 상기 의사 우측 영상 이미지 조합을 상기 서로 다른 방향으로 시프트시키는 정도를 결정하여 깊이감 조정을 수행하는, 이동 기기용 입체영상생성칩.
제 10 항에 있어서,

상기 입체 영상 생성 칩의 시간 동기를 생성하기 위한 카운터를 더 포함하며,

상기 영상연결모듈은 상기 카운터로부터 생성된 시간 동기를 이용하여, 상기 입력된 좌측 영상과 우측 영상의 촬영 시간 동기에 맞추어, 상기 입력된 좌측 영상과 우측 영상을 연결하는, 이동 기기용 입체영상생성칩.
제 14 항에 있어서,

상기 2개의 카메라 모듈은 대기(Ready) 또는 전원 해제(power down) 중 하나 이상의 기능을 포함하는 일시 정지 기능을 포함하며,

상기 영상연결모듈은,

상기 2개의 카메라 모듈로부터 입력 받은 상기 좌측 영상과 상기 우측 영상의 동기가 맞지 않는 경우, 상기 2개의 카메라 모듈의 상기 일시 정지 기능을 사용하여 상기 좌측 영상과 상기 우측 영상을 일시 정지시킨 후, 동기가 맞도록 상기 좌측 영상과 상기 우측 영상을 동시에 재 시작시킴으로써 상기 좌측 영상과 우측 영상의 촬영 시간 동기에 맞추어 연결하는, 이동 기기용 입체영상생성칩.
2차원 영상을 세로 방향의 복수의 이미지로 분할하여, 상기 분할된 복수의 이미지를 순차적으로 의사(Pseudo) 좌측 영상 이미지 조합과 의사 우측 영상 이미지 조합으로서 번갈아 매핑하는 합성 모듈;

상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 좌우 방향 중 서로 다른 방향으로 시프트시킴으로써 깊이감(Depth)을 조정하는 깊이감 조정 모듈; 및

상기 깊이감이 조정된 의사 좌측 영상 이미지 조합 및 의사 우측 영상 이미지 조합을 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈에 출력하는 디스플레이 출력부를 포함하는, 이동 기기용 입체영상생성칩.
제 16 항에 있어서,

상기 2차원 영상은 상기 이동기기의 영상 처리가 가능한 벡엔드에서 영상 처리된 후 상기 입체영상 생성 칩에 입력된 2차원 영상인, 이동 기기용 입체영상생성칩.
제 16 항 또는 제 17 항에 있어서,

상기 깊이감 조정 모듈은,

상기 이동 기기의 액정에 디스플레이되는 입체영상을 확인한 사용자가 상기 이동 기기의 입력 장치를 통해 입력한 제어 정보에 따라, 상기 의사 좌측 영상 이미지 조합 및 상기 의사 우측 영상 이미지 조합을 상기 서로 다른 방향으로 시프트시키는 정도를 결정하여 상기 깊이감 조정을 수행하는, 이동 기기용 입체영상생성칩.
제 1 기기를 통해 입체영상을 표시하는 방법에 있어서,

(1) 제 2 기기의 2개의 카메라 모듈을 통해 촬영된 좌측 영상과 우측 영상을 사이드-바이-사이드(side-by-side) 방식으로 연결된 상태로 상기 제 1 기기에 입력 받는 단계;

(2) 상기 제 1 기기에서 상기 입력 받은 좌측 영상과 상기 우측 영상 각각을 세로 방향의 복수의 이미지로 분할하여, 상기 좌측 영상이 분할된 복수의 이미지들과 상기 우측 영상이 분할된 복수의 이미지들이 각각 번갈아 배치되도록 합성하는 단계; 및

(3) 상기 합성된 이미지를 상기 제 1 기기의 페럴랙스 배리어 또는 렌티큘러 렌즈 어레이를 포함하는 입체영상디스플레이 모듈을 통해 디스플레이하는 단계를 포함하는, 입체영상표시방법.
제 19 항에 있어서,

상기 사이드-바이-사이드 방식으로 연결된 좌측 영상과 우측 영상은 상기 제 1 기기와 상기 제 2 기기 사이의 연결 수단을 통해 상기 제 1 기기에 입력되는, 입체영상표시방법.
제 20 항에 있어서,

상기 제 1 기기는 이동 기기이며,

상기 연결 수단은 유선 연결 수단 및 무선 연결 수단을 포함하는, 입체영상표시방법.