KR101374517B1 - Apparatus for taking integral image and method for displaying stereoscopy using the same - Google Patents

Apparatus for taking integral image and method for displaying stereoscopy using the same Download PDF

Info

Publication number
KR101374517B1
KR101374517B1 KR1020110033390A KR20110033390A KR101374517B1 KR 101374517 B1 KR101374517 B1 KR 101374517B1 KR 1020110033390 A KR1020110033390 A KR 1020110033390A KR 20110033390 A KR20110033390 A KR 20110033390A KR 101374517 B1 KR101374517 B1 KR 101374517B1
Authority
KR
South Korea
Prior art keywords
image
integrated
image data
lens array
array module
Prior art date
Application number
KR1020110033390A
Other languages
Korean (ko)
Other versions
KR20120115836A (en
Inventor
류관희
박찬
정지성
김남
권기철
Original Assignee
충북대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 충북대학교 산학협력단 filed Critical 충북대학교 산학협력단
Priority to KR1020110033390A priority Critical patent/KR101374517B1/en
Publication of KR20120115836A publication Critical patent/KR20120115836A/en
Application granted granted Critical
Publication of KR101374517B1 publication Critical patent/KR101374517B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 집적영상 획득장치 및 그를 이용한 입체영상 표시방법에 관한 것으로, 더욱 상세하게는 휴대용 단말기에 구비된 카메라 앞에 렌즈 어레이 모듈을 장착하여 집적영상을 획득하고, 획득된 집적영상을 휴대용 단말기를 통해 입체영상으로 표시할 수 있도록 한 집적영상 획득장치 및 그를 이용한 입체영상 표시방법에 관한 것이다. 이와 같은 본 발명은 복수의 렌즈를 메트릭스 형태로 구비한 렌즈 어레이 모듈; 상기 렌즈 어레이모듈의 각 복수의 렌즈로부터 광신호를 수신하여 전기적 신호로 변환하는 카메라; 렌즈 어레이모듈의 각 렌즈를 통해 촬영된 집적영상 데이터로부터 시차에 따른 이미지를 생성하기 위해 각 렌즈를 통해 획득된 영상 데이터별로 구분하여 집적영상 데이터를 재배열하고, 재배열된 집적영상 데이터를 시차 위치에 맞게 시차 이미지로 저장하는 영상 처리부; 및 상기 영상처리부에서 출력되는 영상신호를 표시하는 표시부를 포함하되, 상기 영상 처리부는, 표시부를 통해 터치되는 위치에 대응하는 시차 이미지를 출력하는 집적영상 획득장치 및 그를 이용한 입체영상 표시방법을 제공한다.The present invention relates to an integrated image acquisition apparatus and a stereoscopic image display method using the same. More particularly, an integrated image is acquired by mounting a lens array module in front of a camera provided in a portable terminal, and the obtained integrated image is obtained through a portable terminal. An integrated image acquisition device capable of displaying a stereoscopic image and a stereoscopic image display method using the same. Such a present invention provides a lens array module including a plurality of lenses in a matrix form; A camera which receives an optical signal from each of the plurality of lenses of the lens array module and converts the optical signal into an electrical signal; In order to generate a parallax image from the integrated image data photographed through each lens of the lens array module, the integrated image data is rearranged by dividing the image data acquired through each lens and the rearranged integrated image data is disparified. An image processor configured to store the image as a parallax image according to the present invention; And a display unit for displaying an image signal output from the image processor, wherein the image processor provides an integrated image acquisition device for outputting a parallax image corresponding to a position touched through the display unit, and a stereoscopic image display method using the same. .

Figure R1020110033390
Figure R1020110033390

Description

집적영상 획득장치 및 그를 이용한 입체영상 표시방법{APPARATUS FOR TAKING INTEGRAL IMAGE AND METHOD FOR DISPLAYING STEREOSCOPY USING THE SAME}Integrated image acquisition device and stereoscopic image display method using the same {APPARATUS FOR TAKING INTEGRAL IMAGE AND METHOD FOR DISPLAYING STEREOSCOPY USING THE SAME}

본 발명은 집적영상 획득장치 및 그를 이용한 입체영상 표시방법에 관한 것으로, 더욱 상세하게는 휴대용 단말기에 구비된 카메라 앞에 렌즈 어레이 모듈을 장착하여 집적영상을 획득하고, 획득된 집적영상을 휴대용 단말기를 통해 입체영상으로 표시할 수 있도록 한 집적영상 획득장치 및 그를 이용한 입체영상 표시방법에 관한 것이다.The present invention relates to an integrated image acquisition apparatus and a stereoscopic image display method using the same. More particularly, an integrated image is acquired by mounting a lens array module in front of a camera provided in a portable terminal, and the obtained integrated image is obtained through a portable terminal. An integrated image acquisition device capable of displaying a stereoscopic image and a stereoscopic image display method using the same.

집적영상의 획득과 디스플레이는 현재 다양한 방면에서 연구중에 있다.Acquisition and display of integrated images are currently being studied in various ways.

하지만, 대부분이 휴대용이 아닌 고정형이거나, 특수한 환경에서 집적영상을 획득하고 있다. 또한 집적영상 획득과 집적영상 디스플레이 방법이 하나의 시스템으로 구성되어 있지 않고 각각 독립적으로 구성된 경우가 대부분이다. However, most of them acquire fixed images in fixed or non-portable environments. In addition, integrated image acquisition and integrated image display methods are not composed of a single system, but are mostly configured independently.

이에, 휴대가 가능한 휴대용 단말기용 집적영상 획득장치와 이를 획득한 휴대용 단말기에서 바로 입체 집적영상을 표시할 수 있도록 방법을 구현할 필요성이 있다.
Accordingly, there is a need to implement an integrated image acquisition apparatus for a portable terminal that can be portable and a method for displaying a stereoscopic integrated image directly on the portable terminal.

본 발명은 상기와 같은 필요성을 감안하여 안출된 것으로, 휴대용 단말기에 구비된 카메라 앞에 렌즈 어레이 모듈을 장착하여 집적영상을 획득하고, 획득된 집적영상을 휴대용 단말기를 통해 입체영상으로 표시할 수 있도록 한 집적영상 획득장치 및 그를 이용한 입체영상 표시방법을 제공함에 그 목적이 있다.SUMMARY OF THE INVENTION The present invention has been made in view of the above-mentioned necessity, and has a lens array module mounted in front of a camera provided in a portable terminal to acquire an integrated image, and display the obtained integrated image as a stereoscopic image through the portable terminal. An object of the present invention is to provide an integrated image acquisition device and a stereoscopic image display method using the same.

본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해되어질 수 있을 것이다.
The objects of the present invention are not limited to the above-mentioned objects, and other objects not mentioned can be clearly understood by those skilled in the art from the following description.

상기와 같은 목적을 달성하기 위한 본 발명의 일면에 따른 집적영상 획득장치는, 복수의 렌즈를 메트릭스 형태로 구비한 렌즈 어레이 모듈; 상기 렌즈 어레이모듈의 각 복수의 렌즈로부터 광신호를 수신하여 전기적 신호로 변환하는 카메라; 렌즈 어레이모듈의 각 렌즈를 통해 촬영된 집적영상 데이터로부터 시차에 따른 이미지를 생성하기 위해 각 렌즈를 통해 획득된 영상 데이터별로 구분하여 집적영상 데이터를 재배열하고, 재배열된 집적영상 데이터를 시차 위치에 맞게 시차 이미지로 저장하는 영상 처리부; 및 상기 영상처리부에서 출력되는 영상신호를 표시하는 표시부를 포함하되, 상기 영상 처리부는, 표시부를 통해 터치되는 위치에 대응하는 시차 이미지를 출력하는 것을 특징으로 한다.According to an aspect of the present invention, there is provided an integrated image obtaining apparatus including: a lens array module including a plurality of lenses in a matrix form; A camera which receives an optical signal from each of the plurality of lenses of the lens array module and converts the optical signal into an electrical signal; In order to generate a parallax image from the integrated image data photographed through each lens of the lens array module, the integrated image data is rearranged by dividing the image data acquired through each lens and the rearranged integrated image data is disparified. An image processor configured to store the image as a parallax image according to the present invention; And a display unit which displays an image signal output from the image processor, wherein the image processor outputs a parallax image corresponding to a position touched through the display unit.

바람직하게, 움직임을 감지하는 모션 센서를 더 포함하여 감지되는 움직임에 대응하는 시차 이미지를 상기 영상 처리부가 상기 표시부에 출력하도록 하는 것을 특징으로 한다.Preferably, the image processing unit further includes a motion sensor for detecting a motion so that the image processor outputs the parallax image corresponding to the detected motion to the display unit.

바람직하게, 상기 영상 처리부는, 상기 렌즈 어레이 모듈을 통해 획득되는 영상 데이터를 비트맵(Bitmap) 형식으로 저장한 후, 집적영상 데이터를 재배열하는 것을 특징으로 한다.The image processor may be configured to rearrange the integrated image data after storing the image data acquired through the lens array module in a bitmap format.

본 발명의 다른 면에 따른 집적영상 획득장치를 이용한 입체영상 표시방법은, 카메라가 내장된 휴대용 단말기의 카메라 앞에 렌즈 어레이 모듈을 부착하고, 카메라를 이용하여 피사체를 촬영하는 단계; 렌즈 어레이 모듈의 각 렌즈에 의해 집적 영상을 획득하고, 획득된 집적 영상을 특정 영상포맷으로 저장하는 단계; 특정 영상 포맷으로 저장된 집적영상으로부터 시차에 따른 이미지를 생성하기 위해 영상 데이터를 재배열하고, 재배열된 영상 데이터를 시차 위치에 맞게 시차 이미지로 저장하는 단계; 및 화면상에 표시되는 이미지의 위치에 대응하는 시차이미지를 표시하는 단계를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, a stereoscopic image display method using an integrated image acquisition apparatus includes attaching a lens array module in front of a camera of a portable terminal having a camera and photographing a subject using the camera; Acquiring an integrated image by each lens of the lens array module and storing the obtained integrated image in a specific image format; Rearranging the image data to generate a parallax image from an integrated image stored in a specific image format, and storing the rearranged image data as a parallax image according to a parallax position; And displaying a parallax image corresponding to the position of the image displayed on the screen.

바람직하게, 상기 특정 영상 포맷은, 비트맵(Bitmap)인 것을 특징으로 한다.Preferably, the specific video format is a bitmap.

바람직하게, 상기 휴대용 단말기에 구비된 모션센서에 의해 감지되는 움직임에 대응하는 시차 이미지를 표시하는 단계를 더 포함하는 것을 특징으로 한다.
The method may further include displaying a parallax image corresponding to a movement detected by a motion sensor provided in the portable terminal.

전술한 과제해결 수단에 의해 본 발명은 휴대용 단말기에 구비된 카메라 앞에 렌즈 어레이 모듈을 장착하여 집적영상을 획득하고, 획득된 집적영상을 휴대용 단말기를 통해 입체영상으로 표시할 수 있도록 함으로써, 렌즈 어레이 모듈의 각 요소 렌즈들을 통해 집적 영상을 획득할 수 있는 효과가 있다.
In accordance with the above-described problem solving means, the present invention provides a lens array module by mounting a lens array module in front of a camera provided in the portable terminal, and by displaying the obtained integrated image as a stereoscopic image through the portable terminal, There is an effect that can obtain an integrated image through each element of the lens.

도 1은 본 발명의 실시예에 따른 집적영상 획득장치를 보인 구성도.
도 2a 및 도 2b는 도 1에 있어, 렌즈 어레이 모듈을 보인 예시도. 도 3은 본 발명의 실시예에 따른 이미지를 재배열 방법을 설명하기 위한 예시도.
도 4는 재배열 이미지를 시차 이미지로 저장하는 방법을 설명하기 위한 예시도.
도 5는 본 발명의 실시예에 따른 집적영상 획득장치를 이용한 입체영상 표시방법을 보인 흐름도.
도 6은 본 발명의 실시예에 따라 입체영상의 영역을 선택하는 방법을 보인 예시도.
도 7은 본 발명의 다른 실시예에 따라 입체영상의 영역을 선택하는 방법을 보인 예시도.1 is a block diagram showing an integrated image acquisition apparatus according to an embodiment of the present invention.
2A and 2B are exemplary views illustrating a lens array module in FIG. 1. 3 is an exemplary view for explaining a method of rearranging an image according to an embodiment of the present invention.
4 is an exemplary diagram for describing a method of storing a rearranged image as a parallax image.
5 is a flow chart showing a stereoscopic image display method using an integrated image acquisition device according to an embodiment of the present invention.
6 is an exemplary view showing a method of selecting a region of a stereoscopic image according to an embodiment of the present invention.
7 is an exemplary view showing a method of selecting a region of a stereoscopic image according to another embodiment of the present invention.

본 발명에 따른 집적영상(Integral Image) 획득장치 및 그를 이용한 입체영상 표시방법은 카메라가 내장된 휴대용 단말기의 카메라 앞에 렌즈 어레이 모듈을 부착하여 집적영상을 획득한 후, 렌즈 어레이의 각 렌즈를 통해 촬영된 영상 데이터를 시차에 따른 이미지로 생성하기 위해 영상 데이터를 재배열하고, 재배열된 영상 데이터를 시차 위치(x, y좌표)에 맞게 시차 방향별로 구분하여 시차 이미지로 저장한다. 이후, 휴대용 단말기의 조작에 의해 선택되는 위치의 해당 시차 이미지를 표시하도록 하는 기술적 구성을 제안한다.An integrated image acquisition apparatus and a stereoscopic image display method using the same according to the present invention are obtained by attaching a lens array module in front of a camera of a portable terminal having a camera to acquire an integrated image, and then shooting through each lens of the lens array. The image data is rearranged to generate the image data according to parallax, and the rearranged image data is divided into parallax directions according to parallax positions (x, y coordinates) and stored as parallax images. Then, a technical configuration for displaying the corresponding parallax image of the position selected by the operation of the portable terminal is proposed.

하기의 설명에서 본 발명의 집적영상 획득장치 및 그를 이용한 입체영상 표시방법의 특정 상세들이 본 발명의 보다 전반적인 이해를 제공하기 위해 나타나 있는데, 이들 특정 상세들 없이 또한 이들의 변형에 의해서도 본 발명이 용이하게 실시될 수 있다는 것은 이 기술분야에서 통상의 지식을 가진 자에게 자명할 것이다.In the following description, specific details of the integrated image obtaining apparatus and stereoscopic image display method using the same of the present invention are shown to provide a more general understanding of the present invention. It will be apparent to one of ordinary skill in the art that the present invention can be practiced in a timely manner.

하기의 설명에서 본 발명의 집적영상 획득장치는 카메라가 내장된 휴대용 단말기에 구비됨을 인지해야 한다.In the following description, it should be appreciated that the integrated image capturing apparatus of the present invention is provided in a portable terminal having a built-in camera.

이하, 본 발명에 따른 바람직한 실시 예를 첨부된 도면을 참조하여 상세히 설명하되, 본 발명에 따른 동작 및 작용을 이해하는데 필요한 부분을 중심으로 설명한다.
Hereinafter, with reference to the accompanying drawings, preferred embodiments of the present invention will be described in detail, focusing on the parts necessary to understand the operation and action according to the present invention.

도 1은 본 발명의 실시예에 따른 집적영상 획득장치를 보인 구성도이다.1 is a block diagram showing an integrated image acquisition apparatus according to an embodiment of the present invention.

도 1을 참조하면, 본 발명에 따른 집적영상 획득장치는 렌즈 어레이 모듈(10)과, 카메라(21)와, 신호 처리부(23)와, 영상처리부(25)와, 표시부(27)를 포함하여 구성된다.Referring to FIG. 1, an integrated image acquisition device according to the present invention includes a lens array module 10, a camera 21, a signal processor 23, an image processor 25, and a display unit 27. It is composed.

렌즈 어레이 모듈(10)은 복수의 렌즈를 메트릭스 형태로 구비한 것으로, 도 2a에 도시된 바와 같이 복수의 렌즈가 동일한 대칭 축을 가지며, 2차원 주기적 어레이로 배열된 복수의 렌즈를 구비한다. 이러한 렌즈 어레이 모듈(10)은 도 2b와 같이 휴대용 단말기의 카메라(21) 앞에 쉽게 장착될 수 있도록 장착수단을 구비하는 것이 바람직하다.The lens array module 10 includes a plurality of lenses in a matrix form. As shown in FIG. 2A, the lens array module 10 includes a plurality of lenses having the same symmetry axis and arranged in a two-dimensional periodic array. This lens array module 10 is preferably provided with a mounting means so that it can be easily mounted in front of the camera 21 of the portable terminal as shown in FIG.

카메라(21)는 영상 데이터를 촬영하며, 촬영된 광신호를 전기적 신호로 변환하는 카메라 센서를 구비한다. 또한 카메라(21)는 렌즈 어레이모듈(10)의 각 복수의 렌즈로부터 광신호를 수신하여 전기적 신호로 변환한다. The camera 21 photographs image data and includes a camera sensor that converts the photographed optical signal into an electrical signal. In addition, the camera 21 receives an optical signal from each of the plurality of lenses of the lens array module 10 and converts it into an electrical signal.

영상 처리부(25)는 카메라(21)로부터 출력되는 전기적 신호를 변환하여 영상신호를 표시하기 위한 화면 데이터로 변환한다. 이때 영상 처리부(25)는 영상신호를 표시부의 규격에 맞춰 전송하며, 영상데이터를 압축 및 신장한다. 여기서 영상 처리부(25)는 DSP(Digital Signal Processor)로 구현할 수 있다. 또한 영상 처리부(25)는 렌즈 어레이모듈(10)의 각 렌즈를 통해 촬영된 집적영상 데이터를 시차에 따른 이미지로 생성하기 위해 집적영상 데이터를 재배열하고, 재배열된 집적영상 데이터를 시차 위치(x, y좌표)에 맞게 시차 이미지로 저장하도록 제어한다. 여기서, 시차 이미지는 메모리(미도시)에 저장된다. 또한 영상 처리부(25)는 표시부(27)의 화면을 통해 터치되는 위치(x, y 좌표)에 대응하는 시차 이미지를 출력한다. 또한 영상 처리부(25)는 휴대용 단말기에 내장되는 모션 센서(미도시)를 이용하여 인식되는 위치(x, y 좌표)에 대응하는 시차 이미지를 출력한다.The image processor 25 converts an electrical signal output from the camera 21 and converts it into screen data for displaying an image signal. At this time, the image processor 25 transmits the image signal in accordance with the standard of the display unit, and compresses and decompresses the image data. The image processor 25 may be implemented by a digital signal processor (DSP). In addition, the image processor 25 rearranges the integrated image data to generate the integrated image data photographed through each lens of the lens array module 10 as the image according to the parallax, and the rearranged integrated image data to the parallax position ( Control to save as parallax image according to x, y coordinate). Here, the parallax image is stored in a memory (not shown). In addition, the image processor 25 outputs a parallax image corresponding to a position (x, y coordinate) touched through the screen of the display unit 27. In addition, the image processor 25 outputs a parallax image corresponding to a position (x, y coordinate) recognized using a motion sensor (not shown) built in the portable terminal.

표시부(27)는 영상처리부(25)에서 출력되는 영상신호를 화면으로 표시한다. 여기서 표시부(27)는 LCD를 사용할 수 있으며, 이 경우 표시부(27)는 LCD 제어부(LCD controller), 영상데이터를 저장할 수 있는 메모리 및 LCD 표시소자 등을 구비할 수 있다. 여기서 상기 LCD를 터치스크린(touch screen) 방식으로 구현하는 경우, 키입력부(미도시)와 LCD는 입력부가 될 수 있다. 여기서, 키입력부는 휴대용 단말기의 기능 조작을 위해 구비되는 것으로, 본 발명에 따라 카메라의 촬영 및 촬영된 영상 저장 요청, 영상 표시 영역 선택키를 구비한다.The display unit 27 displays an image signal output from the image processor 25 on the screen. Here, the display unit 27 may use an LCD. In this case, the display unit 27 may include an LCD controller, a memory capable of storing image data, and an LCD display device. Herein, when the LCD is implemented using a touch screen method, a key input unit (not shown) and the LCD may be input units. Here, the key input unit is provided for the operation of the function of the portable terminal. According to the present invention, the key input unit includes a photographing request of the camera, a request for storing the captured image, and an image display area selection key.

도 3은 본 발명의 실시예에 따른 이미지를 재배열 방법을 설명하기 위한 예시도이고, 도 4는 재배열 이미지를 시차 이미지로 저장하는 방법을 설명하기 위한 예시도이다.3 is an exemplary diagram for describing a method of rearranging an image according to an exemplary embodiment of the present invention, and FIG. 4 is an exemplary diagram for describing a method of storing a rearranged image as a parallax image.

도 3 및 도 4를 참조하면, 렌즈 어레이모듈(10)의 각 렌즈를 통해 획득된 각각의 영상 데이터를 도 3과 같이 각 렌즈를 통해 획득된 영상 데이터별로 구분하여 집적영상 데이터를 재배열한다.Referring to FIGS. 3 and 4, the integrated image data is rearranged by dividing each image data obtained through each lens of the lens array module 10 for each image data obtained through each lens as shown in FIG. 3.

이후, 시차에 따른 이미지를 생성하기 위해 도 4와 같이 집적영상 재배열 방법을 수행한다. 이때 재배열 방법은 각각의 렌즈를 통해 획득된 영상 데이터를 시차 위치가 동일한 이미지로 재배열하여 저장한다.Thereafter, an integrated image rearrangement method is performed to generate an image according to parallax. In this case, the rearrangement method rearranges and stores the image data acquired through each lens into an image having the same parallax position.

우선, 이를 위해 도 3과 같이 각 렌즈를 통해 획득된 영상데이터별로 저장한다.First, for this purpose, as shown in FIG. 3, the image data acquired through each lens is stored.

즉, a렌즈를 통해 획득된 a영상 데이터, b렌즈를 통해 획득된 b영상 데이터, c렌즈를 통해 획득된 c영상 데이터 등으로 집적영상 데이터를 구분하고, 집적영상 데이터로부터 피사체 방향별 영상을 얻기 위해 시차 위치가 동일한 영상 데이터별로 구분하여 재배열한다.That is, the integrated image data is classified into a image data obtained through the a lens, b image data obtained through the b lens, and c image data obtained through the c lens, and the image for each object direction is obtained from the integrated image data. For this reason, the image data is classified and rearranged by the same parallax position.

이에 a00, b00, c00, d00, …과 같이 x좌표, y좌표가 (0,0)에 해당하는 시차 영상 데이터로 이루어질 수 있도록 재배열하고, a01, b01, c01, d01, …과 같이 x좌표, y좌표가 (0,1)에 해당하는 영상 데이터로 구분하여 재배열한다. A00, b00, c00, d00,... As shown in FIG. 5, the x-coordinate and y-coordinate are rearranged so as to consist of parallax image data corresponding to (0,0), and a01, b01, c01, d01,... The x coordinate and the y coordinate are divided into image data corresponding to (0,1) and rearranged.

이러한 재배열 방법에 의해 집적영상 데이터의 재배열 과정이 완료되면, 재배열된 집적영상 데이터를 2차원적 이미지 배열의 도 4와 같이 시차 위치(x, y좌표)에 맞게 시차 방향별로 구분한 후 시차 이미지로 저장한다.When the rearrangement process of the integrated image data is completed by such a rearrangement method, the rearranged integrated image data is divided into parallax directions according to parallax positions (x, y coordinates) as shown in FIG. 4 of the two-dimensional image array. Save as parallax image.

도 5는 본 발명의 실시예에 따른 집적영상 획득장치를 이용한 입체영상 표시방법을 보인 흐름도이다.5 is a flowchart illustrating a stereoscopic image display method using an integrated image acquisition apparatus according to an exemplary embodiment of the present invention.

도 5를 참조하면, 우선 카메라가 내장된 휴대용 단말기의 카메라 앞에 렌즈 어레이 모듈(10)을 부착한 후(S510), 카메라(21)를 이용하여 피사체를 촬영한다(S520).Referring to FIG. 5, first, the lens array module 10 is attached in front of a camera of a portable terminal in which a camera is embedded (S510), and then a subject is photographed using the camera 21 (S520).

그러면, 휴대용 단말기는 렌즈 어레이 모듈(10)의 각 렌즈에 의해 집적 영상을 획득하게 되고(S530), 획득된 집적 영상을 특정 영상(예컨대, Bitmap) 형태로 저장한다(S540).Then, the portable terminal acquires an integrated image by each lens of the lens array module 10 (S530), and stores the obtained integrated image in the form of a specific image (eg, a bitmap) (S540).

이후, 휴대용 단말기는 특정 영상 형태로 저장된 집적영상으로부터 시차에 따른 이미지를 생성하기 위해 영상 데이터를 재배열하고(S550), 재배열된 영상 데이터를 시차 위치(x, y좌표)에 맞게 시차 이미지로 저장한다(S560).Subsequently, the portable terminal rearranges the image data to generate a parallax image from the integrated image stored in a specific image form (S550), and converts the rearranged image data into a parallax image according to the parallax position (x, y coordinate). Save (S560).

상기 과정에 의해 저장된 시차 위치에 대응하여 저장된 시차 이미지는 사용자가 화면상에 표시되는 이미지의 위치에 대응하는 시차이미지를 표시부(27)에 표시한다(S570). 이때 사용자는 표시부(27)에 표시되는 이미지 중 특정 방향에서의 이미지를 보고자 도 6와 같이 표시부(27)의 화면상에 터치되는 위치에 대응하는 시차 이미지를 표시부(27)에 표시한다.The parallax image stored corresponding to the parallax position stored by the above process displays the parallax image corresponding to the position of the image displayed on the screen by the user on the display unit 27 (S570). At this time, the user displays the parallax image corresponding to the position touched on the screen of the display unit 27 on the display unit 27 to see an image in a specific direction among the images displayed on the display unit 27.

또한 모션센서를 더 포함하는 휴대용 단말기인 경우에는 도 7과 같이 모션 센서의 움직임에 대응하는 시차 이미지를 영상 처리부(25)가 처리하여 표시부(27)에 표시한다. In the case of a portable terminal further including a motion sensor, the image processing unit 25 processes the parallax image corresponding to the motion of the motion sensor as shown in FIG. 7 and displays it on the display unit 27.

한편 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
While the present invention has been described in connection with what is presently considered to be the most practical and preferred embodiment, it is to be understood that the invention is not limited to the disclosed embodiments, but is capable of various modifications within the scope of the invention. Therefore, the scope of the present invention should not be limited by the illustrated embodiments, but should be determined by the scope of the appended claims and equivalents thereof.

Claims (6)

휴대용 단말기에 구비된 집적영상 획득장치에 있어서,
집적영상을 획득하기 위해 복수의 렌즈를 메트릭스 형태로 구비한 렌즈 어레이 모듈;
휴대용 단말기에 구비되며, 상기 렌즈 어레이모듈의 각 복수의 렌즈로부터 광신호를 수신하여 전기적 신호로 변환하는 카메라;
렌즈 어레이모듈의 각 렌즈를 통해 촬영된 집적영상 데이터로부터 시차에 따른 이미지를 생성하기 위해 각 렌즈를 통해 획득된 영상 데이터별로 구분하여 집적영상 데이터를 재배열하고, 재배열된 집적영상 데이터를 시차 위치에 맞게 시차 이미지로 저장하는 영상 처리부;
움직임을 감지하는 모션 센서; 및
상기 영상처리부에서 출력되는 영상신호를 표시하는 표시부를 포함하되,
상기 영상 처리부는, 표시부를 통해 터치되는 위치에 대응하는 시차 이미지를 출력하고, 상기 모션 센서에서 감지되는 움직임에 대응하는 시차 이미지를 상기 표시부에 출력하도록 하며,
상기 렌즈 어레이 모듈은 복수의 렌즈가 동일한 대칭축을 가지며, 2차원 주기적 어레이로 배열된 복수의 렌즈를 구비하고, 상기 휴대용 단말기에 구비된 상기 카메라에 장착될 수 있도록 장착수단을 구비하는 것을 특징으로 하는 집적영상 획득장치.
An integrated image acquisition device provided in a portable terminal,
A lens array module including a plurality of lenses in a matrix form to obtain an integrated image;
A camera provided in the portable terminal and receiving an optical signal from each of the plurality of lenses of the lens array module and converting the optical signal into an electrical signal;
In order to generate a parallax image from the integrated image data photographed through each lens of the lens array module, the integrated image data is rearranged by dividing the image data acquired through each lens and the rearranged integrated image data is disparified. An image processor configured to store the image as a parallax image according to the present invention;
A motion sensor for detecting movement; And
A display unit for displaying an image signal output from the image processing unit,
The image processor outputs a parallax image corresponding to a position touched through a display unit, and outputs a parallax image corresponding to a motion detected by the motion sensor to the display unit.
The lens array module includes a plurality of lenses having the same axis of symmetry, a plurality of lenses arranged in a two-dimensional periodic array, and a mounting means to be mounted on the camera provided in the portable terminal. Integrated image acquisition device.
삭제delete 제1 항에 있어서, 상기 영상 처리부는,
상기 렌즈 어레이 모듈을 통해 획득되는 영상 데이터를 비트맵(Bitmap) 형식으로 저장한 후, 집적영상 데이터를 재배열하는 것을 특징으로 하는 집적영상 획득장치.
The image processing apparatus of claim 1, wherein the image processor comprises:
And storing the image data acquired through the lens array module in a bitmap format and rearranging the integrated image data.
삭제delete 삭제delete 삭제delete
KR1020110033390A 2011-04-11 2011-04-11 Apparatus for taking integral image and method for displaying stereoscopy using the same KR101374517B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110033390A KR101374517B1 (en) 2011-04-11 2011-04-11 Apparatus for taking integral image and method for displaying stereoscopy using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110033390A KR101374517B1 (en) 2011-04-11 2011-04-11 Apparatus for taking integral image and method for displaying stereoscopy using the same

Publications (2)

Publication Number Publication Date
KR20120115836A KR20120115836A (en) 2012-10-19
KR101374517B1 true KR101374517B1 (en) 2014-03-14

Family

ID=47284386

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110033390A KR101374517B1 (en) 2011-04-11 2011-04-11 Apparatus for taking integral image and method for displaying stereoscopy using the same

Country Status (1)

Country Link
KR (1) KR101374517B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108234989B (en) * 2018-03-01 2019-12-06 四川大学 convergent integrated imaging shooting method based on checkerboard calibration plate

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070027318A (en) * 2005-09-06 2007-03-09 (주)다산알앤디 Method of processing three-d image and three-d image processing system using the same
JP2007096825A (en) 2005-09-29 2007-04-12 Funai Electric Co Ltd Compound eye imaging apparatus
JP2010141447A (en) 2008-12-10 2010-06-24 Casio Computer Co Ltd Mobile information terminal with camera
JP2011504036A (en) 2007-11-15 2011-01-27 エスケーテレコム株式会社 Method, system and server for reproducing media by movement of terminal

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070027318A (en) * 2005-09-06 2007-03-09 (주)다산알앤디 Method of processing three-d image and three-d image processing system using the same
JP2007096825A (en) 2005-09-29 2007-04-12 Funai Electric Co Ltd Compound eye imaging apparatus
JP2011504036A (en) 2007-11-15 2011-01-27 エスケーテレコム株式会社 Method, system and server for reproducing media by movement of terminal
JP2010141447A (en) 2008-12-10 2010-06-24 Casio Computer Co Ltd Mobile information terminal with camera

Also Published As

Publication number Publication date
KR20120115836A (en) 2012-10-19

Similar Documents

Publication Publication Date Title
CN111052727B (en) Electronic device and control method thereof
KR101899877B1 (en) Apparatus and method for improving quality of enlarged image
US9742995B2 (en) Receiver-controlled panoramic view video share
US10200624B2 (en) Three-dimensional, 360-degree virtual reality exposure control
CN110519519A (en) User interface for the selection parameter during image is focused again
KR20140054959A (en) Method for controlling camera of terminal and terminal thereof
JP2016524423A5 (en)
CN108605148A (en) Video display system
KR20160058519A (en) Image processing for multiple images
US20110090366A1 (en) Apparatus and method for image capture using image stored in camera
CN107111371B (en) method, device and terminal for displaying panoramic visual content
CN108777765B (en) Method and device for acquiring full-definition image and electronic equipment
JP5477777B2 (en) Image acquisition device
JP5523086B2 (en) Information presenting apparatus, information presenting method, and program
JP5890359B2 (en) TERMINAL DEVICE, DISPLAY METHOD, PROGRAM, AND DISPLAY SYSTEM
US9319579B2 (en) Image processing apparatus, control method, and program for the same with focus state specification and deletion confirmation of image data
KR101374517B1 (en) Apparatus for taking integral image and method for displaying stereoscopy using the same
JP6162971B2 (en) Image processing apparatus, image processing method, imaging apparatus, and control method thereof
JP2015212892A (en) Image processor, information processing method and program
US8917316B2 (en) Photographing equipment
KR101081934B1 (en) Image generation apparatus and panoramic image generation method thereof
TW201543890A (en) Camera to capture multiple sub-images for generation of an image
JP2014225868A (en) Imaging apparatus
JP6624861B2 (en) Image processing apparatus, control method, and program
JP6368881B1 (en) Display control system, terminal device, computer program, and display control method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180906

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190221

Year of fee payment: 6