KR20090037239A - Terminal having function for rendering image and program recording medium - Google Patents
Terminal having function for rendering image and program recording medium Download PDFInfo
- Publication number
- KR20090037239A KR20090037239A KR1020070102792A KR20070102792A KR20090037239A KR 20090037239 A KR20090037239 A KR 20090037239A KR 1020070102792 A KR1020070102792 A KR 1020070102792A KR 20070102792 A KR20070102792 A KR 20070102792A KR 20090037239 A KR20090037239 A KR 20090037239A
- Authority
- KR
- South Korea
- Prior art keywords
- dimensional image
- terminal
- estimated
- input
- vanishing point
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/04—Texture mapping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/536—Depth or shape recovery from perspective effects, e.g. by using vanishing points
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Telephone Function (AREA)
- Studio Devices (AREA)
Abstract
Description
본 발명은 카메라를 통하여 입력된 2차원 이미지를 3차원 이미지로 변환할 수 있는 단말기 및 이러한 기능을 구현하는 프로그램을 기록한 매체에 관한 것이다.The present invention relates to a terminal capable of converting a two-dimensional image input through a camera into a three-dimensional image, and a medium for recording a program for implementing such a function.
일반적으로, 단말기는, 음성/영상 통화 기능, 정보 입/출력 기능 및 데이터 저장 기능 등을 하나 이상 갖춘 기기를 의미한다.In general, the terminal refers to a device having at least one voice / video call function, an information input / output function, and a data storage function.
최근, 단말기는, 상술한 기능들에 더하여, 정지 영상 또는 동영상 등의 영상 촬영, 음악 파일 또는 동영상 파일 등의 멀티미디어 파일 재생, 게임, 방송 수신/출력, 길 안내 서비스 등의 다양한 기능들을 수행할 수 있게 되면서, 종합적인 멀티미디어 기기(multimedia player) 형태로 구현되고 있다. Recently, in addition to the above-described functions, the terminal may perform various functions such as shooting a still image or a video, playing a multimedia file such as a music file or a video file, playing a game, receiving / outputting a broadcast, and a road guidance service. As a result, it is being implemented in the form of a comprehensive multimedia player.
이러한 멀티 미디어 기기에는, 복잡한 기능을 구현하기 위해 하드웨어 또는 소프트웨어의 측면에서 새로운 다양한 시도들이 적용되고 있다. 일 예로, 사용자가 쉽고 편리하게 기능을 검색하거나 선택하게 하기 위하여, 다양한 형태로 구현되는 사용자 인터페이스(User Interface; 'UI') 환경을 제공하고 있다.In these multimedia devices, various new attempts are being applied in terms of hardware or software to implement complex functions. For example, in order to allow a user to search for or select a function easily and conveniently, a user interface (UI) environment implemented in various forms is provided.
특히, 종래 기술에 따른 이미지 변환 방식에 의하면, 단말기는 사용자로부터의 조작에 따라 이미지 변환 과정을 수행하게 된다. 따라서, 사용자의 조작이 없는 경우에는, 이미지 변환 과정을 수행할 수가 없게 된다.In particular, according to the image conversion method according to the prior art, the terminal performs the image conversion process in accordance with the operation from the user. Therefore, when there is no user's operation, the image conversion process cannot be performed.
또한, 종래 기술에 의하면, 박스 모델(box model) 방식에 의해서만 2차원 이미지에서 3차원 이미지로의 변환이 가능하다. 즉, 3차원 이미지로의 다양한 변환 방식이 제공되지 않고 있다.In addition, according to the prior art, it is possible to convert from a two-dimensional image to a three-dimensional image only by a box model method. That is, various conversion methods to three-dimensional images are not provided.
본 발명은, 사용자의 조작이 없는 경우라도 자동으로 이미지 변환 과정을 수행할 수 있는 단말기 및 프로그램을 제공하는데 그 목적이 있다.It is an object of the present invention to provide a terminal and a program capable of automatically performing an image conversion process even when there is no user's operation.
또한, 본 발명은, 다양한 3차원 모델 방식을 적용하여 이미지 변환 과정을 효율적이고 다양하게 수행할 수 있는 단말기 및 프로그램을 제공하는데 다른 목적이 있다.Another object of the present invention is to provide a terminal and a program capable of efficiently and variously performing an image conversion process by applying various three-dimensional model methods.
상기의 목적을 달성하기 위하여, 본 발명에 따른 이미지 변환 기능을 갖는 단말기는, 2차원 이미지(image)를 입력받는 카메라; 및 상기 입력된 2차원 이미지상에서 적어도 하나의 소실점(vanishing point) 및 하나의 공간 개념을 형성하는 복수의 평면들을 추정하고, 상기 추정된 소실점 및 평면을 이용하여 상기 입력된 2차원 이미지를 3차원 이미지로 변환하는 제어부를 포함한다.In order to achieve the above object, the terminal having an image conversion function according to the present invention, the camera receiving a two-dimensional image (image); And estimating a plurality of planes forming at least one vanishing point and one spatial concept on the input two-dimensional image, and using the estimated vanishing point and the plane, three-dimensional image of the input two-dimensional image. The control unit to convert to.
또한, 상기의 목적을 달성하기 위하여, 본 발명에 따른 프로그램을 기록한 매체는, 차원 이미지(image)를 입력받는 단계; 상기 입력된 2차원 이미지상에서 적어도 하나의 소실점(vanishing point)을 추정하는 단계; 상기 추정된 적어도 하나의 소실점을 기준으로, 상기 입력된 2차원 이미지상에서 하나의 공간 개념을 형성하는 복수의 평면들을 추정하는 단계; 및 상기 추정된 소실점 및 평면을 이용하여, 상기 입력된 2차원 이미지를 3차원 이미지로 변환하는 단계를 수행하는 프로그램을 기록한다.In addition, in order to achieve the above object, a medium in which a program according to the present invention is recorded, the method comprising: receiving a dimensional image; Estimating at least one vanishing point on the input two-dimensional image; Estimating a plurality of planes forming one spatial concept on the input two-dimensional image based on the estimated at least one vanishing point; And a program for performing the step of converting the input two-dimensional image into a three-dimensional image by using the estimated vanishing point and plane.
상기에서 설명한 본 발명에 따른 이미지 변환 기능을 갖는 단말기 및 이러한 기능을 구현하는 프로그램을 기록한 매체의 효과를 설명하면 다음과 같다.The effects of a terminal having an image conversion function and a medium on which a program implementing the function according to the present invention described above are described as follows.
첫째, 사용자의 조작 없이도 입력된 2차원 이미지에서 3차원 이미지로의 이미지 변환 과정을 자동으로 수행할 수 있다.First, an image conversion process from an input two-dimensional image to a three-dimensional image may be automatically performed without a user's manipulation.
둘째, 2차원에서 3차원으로의 이미지 변환 과정에 있어서 다양한 3차원 모델 방식을 적용할 수 있다.Second, various three-dimensional model methods can be applied in the process of converting an image from two to three dimensions.
상술한 목적, 특징들 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 더욱 분명해 질 것이다. 이하, 본 발명과 관련된 이미지 변환 기능을 갖는 단말기 및 이러한 기능을 구현하는 프로그램을 기록한 매체에 대하여 도면을 참조하여 더욱 상세하게 설명한다. 또한, 본 발명의 요지를 흐리게 할 우려가 있다고 판단되는 공지기술에 대하여서는 그 상세한 설명을 생략하도록 한다.The above objects, features and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings. Hereinafter, a terminal having an image conversion function and a medium on which a program for implementing the function are recorded will be described in more detail with reference to the accompanying drawings. In addition, the detailed description thereof will be omitted for the known technology which is considered to blur the gist of the present invention.
본 명세서에서 기술되는 단말기는, 휴대폰(mobile phone), 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 내비게이션(Navigation), 디지털 카메라(Digital Camera), MP3P(MPEG layer 3 Player) 등이 있다.The terminal described in the present specification includes a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), and a navigation device. , Digital cameras, and MP3P (MPEG layer 3 Player).
도 1을 참조하여, 본 발명과 관련된 단말기를 기능에 따른 구성요소 관점에서 살펴보겠다. 도 1은, 본 발명의 일 실시예와 관련된 단말기의 블록 구성도(block diagram)이다. Referring to FIG. 1, a terminal related to the present invention will be described in terms of components according to functions. 1 is a block diagram of a terminal according to an embodiment of the present invention.
도 1에 도시된 단말기(100)는, 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1은, 다양한 구성요소가 있는 단말기를 도시하고 있다. 그러나, 도시된 구성요소 모두가 필수구성요소인 것은 아니다. 도시된 구성요소보다 많은 구성요소에 의해 단말기가 구현될 수도 있고, 그보다 적은 구성요소에 의해서도 단말기가 구현될 수 있다.The
이하, 도 1에 도시된 단말기(100)를 구성하는 구성요소들에 대해 차례로 살펴본다.Hereinafter, the components constituting the
무선 통신부(110)는, 단말기(100)와 무선 통신 시스템 사이의 무선 통신 또는 단말기(100)와 단말기(100)가 위치한 네트워크 사이의 무선 통신을 수행하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들어, 무선 통신부(110)는, 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.The
방송 수신 모듈(111)은, 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. The
여기에서, 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 또한, 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 또한, 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.Here, the broadcast channel may include a satellite channel and a terrestrial channel. The broadcast management server may mean a server that generates and transmits a broadcast signal and / or broadcast related information or a server that receives a pre-generated broadcast signal and / or broadcast related information and transmits the same to a terminal. In addition, broadcast related information may mean information related to a broadcast channel, a broadcast program, or a broadcast service provider. In addition, the broadcast signal may include not only a TV broadcast signal, a radio broadcast signal, and a data broadcast signal, but also a broadcast signal having a data broadcast signal combined with a TV broadcast signal or a radio broadcast signal.
한편, 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있으며, 이러한 경우에는 이동통신 모듈(112)에 의해 수신될 수 있다.Meanwhile, broadcast related information may be provided through a mobile communication network, and in this case, may be received by the
방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.The broadcast related information may exist in various forms. For example, it may exist in the form of Electronic Program Guide (EPG) of Digital Multimedia Broadcasting (DMB) or Electronic Service Guide (ESG) of Digital Video Broadcast-Handheld (DVB-H).
방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성된다.The
방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는, 메모리(160)에 저장될 수 있다.The broadcast signal and / or broadcast related information received through the
또한, 이동통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. In addition, the
무선 인터넷 모듈(113)은, 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 단말기(100)에 내장되거나 외장 될 수 있다.The
근거리 통신 모듈(114)은, 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.The short
또한, 위치정보 모듈(115)은, 단말기(100)의 위치를 확인하거나 얻기 위한 모듈이다. 일례로 GPS(Global Position System) 모듈을 들 수 있다. GPS 모듈은, 복수 개의 인공위성으로부터 위치 정보를 수신한다. 여기에서, 위치 정보는, 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다. 예를 들어, GPS 모듈은, 3개 이상의 위성으로부터 정확히 측정된 시간 및 거리를 이용하여, 3개의 각각 다른 거리를 삼각 방법에 따라서 현 위치를 계산할 수 있다. 예를 들어, 3개의 위성으로부터 거리와 시간 정보를 얻고 1개 위성으로 오차를 수정하는 방법이 사용될 수 있다. 특히, GPS 모듈은, 위성으로부터 수신한 위치 정보로부터, 위도, 경도, 고도의 위치뿐만 아니라 3차원의 속도 정보와 함께 정확한 시간까지 얻을 수 있다.In addition, the
한편, A/V(Audio/Video) 입력부(120)는, 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)는, 화상 통화 모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 그리고, 처리된 화상 프레임은, 디스플레이부(151)에 표시될 수 있다.Meanwhile, the A /
카메라(121)에서 처리된 화상 프레임은, 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는, 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수도 있다.The image frame processed by the
마이크(122)는, 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 그리고, 처리된 음성 데이터는, 통화 모드인 경우 이동통신 모듈(112)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)는, 외부의 음향 신호를 입력받는 과정에서 발생하는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘을 구현할 수 있다.The
사용자 입력부(130)는, 사용자로부터 입력 동작을 받아들여, 단말기(100)의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는, 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 특히, 터치 패드가 후술하는 디스플레이부(151)와 상호 레이어 구조를 이룰 경우, 이를 터치 스크린이라 부를 수 있다.The
센싱부(140)는, 단말기(100)의 개폐 상태, 단말기(100)의 위치, 사용자 접촉 유무, 단말기(100)의 방위, 단말기(100)의 가속/감속 등과 같이, 단말기(100)의 현 상태를 감지하여 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어, 단말기(100)가 슬라이드 폰 형태인 경우, 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외 부 기기 결합 여부 등과 관련된 센싱 기능도 담당할 수 있다.The
인터페이스부(170)는, 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 포함될 수 있다. The
여기에서, 식별 모듈은, 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module; 'UIM'), 가입자 인증 모듈(Subscriber Identify Module; 'SIM'), 범용 사용자 인증 모듈(Universal Subscriber Identity Module; 'USIM') 등을 포함할 수 있다. 또한, 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서, 식별 장치는, 포트를 통하여 단말기(100)와 연결될 수 있다. 이와 같은, 인터페이스부(170)는, 외부 기기로부터 데이터를 전송받거나 전원을 공급받아, 단말기(100) 내부의 각 구성 요소에 전달하거나 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.Here, the identification module is a chip that stores various information for authenticating the use authority of the terminal 100, and includes a user identification module (UIM) and a subscriber identify module (SIM). ), A Universal Subscriber Identity Module (“USIM”), and the like. In addition, the device equipped with the identification module (hereinafter, 'identification device') may be manufactured in the form of a smart card. Therefore, the identification device may be connected to the terminal 100 through a port. As such, the
출력부(150)는, 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로, 이에는 디스플레이부(151)와 음향 출력 모듈(152), 알람부(153) 등이 포함될 수 있다.The
디스플레이부(151)는, 단말기(100)에서 처리되는 정보를 표시 출력한다. 예를 들어, 단말기가 통화 모드인 경우, 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고, 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우, 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다. The
한편, 전술한 바와 같이, 디스플레이부(151)와 터치 패드가 상호 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이부(151)는, 출력 장치 이외에 입력 장치로도 사용될 수 있다. 디스플레이부(151)는, 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 그리고, 단말기(100)의 구현 형태에 따라, 디스플레이부(151)는, 2개 이상 존재할 수도 있다. 예를 들어, 단말기(100)에 외부 디스플레이부(미도시)와 내부 디스플레이부(미도시)가 동시에 구비될 수 있다.Meanwhile, as described above, when the
음향 출력 모듈(152)은, 호 신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서, 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(152)은, 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는, 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The
알람부(153)는, 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 단말기에서 발생되는 이벤트의 예로는, 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 알람부(153)는, 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신된 경우, 이를 알리기 위해 알람부(153)는 진동을 출력할 수 있다. 또는, 키 신호가 입력된 경우, 키 신호 입력에 대한 피드백으로 알람부(153)는 진동을 출력할 수 있다. 상기와 같은 진동 출력을 통해 사용자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림을 위한 신호는, 디스플레이부(151)나 음향 출력 모듈(152)을 통해서도 출력될 수 있다.The
메모리(160)는, 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다. The
메모리(160)는, 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 단말기(100)는, 인터넷(internet)상에서 메모리(160)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.The
그리고 제어부(180)는, 통상적으로 단말기의 전반적인 동작을 제어한다. 예를 들어, 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수 행한다. 또한, 제어부(180)는, 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은, 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.The
전원 공급부(190)는, 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.The
여기에 설명되는 다양한 실시예는, 예를 들어 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여, 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수 있다.The various embodiments described herein may be implemented in a computer readable recording medium using, for example, software, hardware or a combination thereof.
하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는, ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다.According to a hardware implementation, the embodiments described herein include application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs). ), Processors, controllers, micro-controllers, microprocessors, and electrical units for performing functions. In some cases such embodiments may be implemented by the
소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은, 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는, 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는, 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.In a software implementation, embodiments such as procedures or functions may be implemented with separate software modules that allow at least one function or operation to be performed. The software code may be implemented by a software application written in a suitable programming language. In addition, the software code may be stored in the
이하에서는, 도 1을 참조하여, 본 발명에 따른 이미지 변환 기능을 수행하기 위하여, 단말기의 각 구성요소 간의 유기적 동작 관계에 대하여 상세히 설명하도록 한다.Hereinafter, with reference to FIG. 1, in order to perform the image conversion function according to the present invention, the organic operation relationship between each component of the terminal will be described in detail.
먼저, 카메라(121)는, 외부로부터 2차원 이미지를 입력받는다.First, the
제어부(180)는, 카메라(121)로부터 이미지 입력 신호를 수신함에 따라, 카메라(121)를 통하여 입력된 2차원 이미지상에서 적어도 하나의 소실점 및 하나의 공간 개념을 형성하는 복수의 평면을 추정하고, 상기 추정된 소실점 및 평면을 이용하여 2차원 이미지를 3차원 이미지로 변환할 수 있다.As the
이상에서는 본 발명과 관련된 단말기를 기능에 따른 구성요소 관점에서 살펴보았다. 이하에서는, 도 2 및 도 3을 더욱 참조하여, 본 발명과 관련된 단말기를 외형에 따른 구성요소 관점에서 더욱 살펴보겠다. 이하에서는, 설명의 간명함을 위해, 폴더 타입, 바 타입, 스윙타입, 슬라이더 타입, 등과 같은 여러 타입의 단말기들 중에서 슬라이더 타입의 단말기를 예로 들어 설명한다. 따라서, 본 발명은, 슬라이더 타입의 단말기에 한정되는 것은 아니고, 상기 전술한 타입을 포함한 모든 타입의 단말기에 적용될 수 있다. In the above, the terminal related to the present invention has been described in terms of components according to functions. Hereinafter, referring to FIGS. 2 and 3, the terminal related to the present invention will be further described in terms of components according to appearance. Hereinafter, for simplicity, a slider type terminal is described as an example among various types of terminals such as a folder type, a bar type, a swing type, a slider type, and the like. Therefore, the present invention is not limited to the slider type terminal, but can be applied to all types of terminals including the above-described type.
도 2는, 본 발명의 일 실시예에 관련된 단말기를 전면에서 바라본 사시도이다. 2 is a front perspective view of a terminal according to an embodiment of the present invention.
본 발명에 따른 단말기(100)는, 제 1 바디(200)와, 제 1 바디(200)에 적어도 일 방향을 따라 슬라이딩 가능하게 구성된 제 2 바디(205)를 포함한다. The terminal 100 according to the present invention includes a
한편, 본 발명에 따른 단말기(100)가, 폴더 타입인 경우에, 제 1 바디와, 제 1 바디에 적어도 일측이 폴딩(folding) 또는 언폴딩(unfolding)되게 구성된 제 2 바디를 포함한다.Meanwhile, in the case of a folder type, the terminal 100 according to the present invention includes a first body and a second body configured to be folded or unfolded at least one side of the first body.
제 1 바디(200)가 제 2 바디(205)와 중첩되게 배치된 상태를 닫힌 상태(closed configuration)라 칭할 수 있으며, 본 도면에 도시된 바와 같이 제 1 바디(200)가 제 2 바디(205)의 적어도 일 부분을 노출한 상태를 열린 상태(open configuration)라 칭할 수 있다. A state in which the
단말기(100)는 닫힌 상태에서 주로 대기 모드로 작동하지만 사용자의 조작에 의해 대기 모드가 해제되기도 한다. 그리고, 단말기(100)는 열린 상태에서 주로 통화 모드 등으로 작동하지만 사용자의 조작 또는 소정 시간의 경과에 의해 대기 모드로 전환되기도 한다.Although the terminal 100 operates mainly in the standby mode in the closed state, the standby mode may be released by a user's operation. In addition, the terminal 100 operates mainly in a call mode or the like in an open state, but may be switched to a standby mode by a user's operation or a lapse of a predetermined time.
제 1 바디(200)의 외관을 이루는 케이스(케이싱, 하우징, 커버 등)는 제 1 프론트 케이스(220)와 제 1 리어 케이스(225)에 의해 형성된다. 제 1 프론트 케이스(220)와 제 1 리어 케이스(225)에 의해 형성된 공간에는 각종 전자부품들이 내장된다. 제 1 프론트 케이스(220)와 제 1 리어 케이스(225) 사이에는 적어도 하나의 중간 케이스들이 추가로 배치될 수도 있다. The case (casing, housing, cover, etc.) forming the exterior of the
상기 케이스들은 합성수지를 사출하여 형성되거나 금속 재질, 예를 들어 스테인레스 스틸(STS) 또는 티타늄(Ti) 등과 같은 금속 재질을 갖도록 형성될 수도 있다.The cases may be formed by injecting a synthetic resin or may be formed of a metal material, for example, a metal material such as stainless steel (STS) or titanium (Ti).
제 1 바디(200), 구체적으로 제 1 프론트 케이스(220)에는 디스플레이부(151), 음향 출력 모듈(152), 카메라(121) 또는 제 1 사용자 입력부(210)가 배치 될 수 있다. The
디스플레이부(151)는, 정보를 시각적으로 표현하는 LCD(liquid crystal display), OLED(Organic Light Emitting Diodes) 등을 포함한다. The
그리고, 디스플레이부(151)에는 터치 패드가 레이어 구조로 중첩됨으로써, 디스플레이부(151)가 터치 스크린으로 동작하여 사용자의 터치에 의한 정보의 입력 또한 가능하게 할 수도 있다.In addition, since the touch pad is superimposed on the
음향 출력 모듈(152)은 스피커의 형태로 구현될 수 있다. The
카메라(121)는 사용자 등에 대한 이미지 또는 동영상을 촬영하기에 적절하도록 구현될 수 있다. The
제 1 바디(200)와 마찬가지로, 제 2 바디(205)의 외관을 이루는 케이스는 제 2 프론트 케이스(230)와 제 2 리어 케이스(235)에 의해 형성된다.Like the
제 2 바디(205), 구체적으로 제 2 프론트 케이스(230)의 전면(front face)에는 제 2 사용자 입력부(215)가 배치될 수 있다.The second
제 2 프론트 케이스(230) 또는 제 2 리어 케이스(235) 중 적어도 하나에는 제 3 사용자 입력부(245), 마이크(122), 인터페이스부(170)가 배치될 수 있다. The third
제 1 내지 제 3 사용자 입력부(210, 215, 245)는, 사용자 입력부(130)라 통칭될 수 있으며, 사용자가 촉각적인 느낌을 주면서 조작하게 되는 방식(tactile manner)이라면 어떤 방식이든 채용될 수 있다. The first to third
예를 들어, 사용자 입력부(130)는, 사용자의 푸시 또는 터치 조작에 의해 명령 또는 정보를 입력받을 수 있는 돔 스위치 또는 터치 패드로 구현되거나, 키를 회전시키는 휠 또는 조그 방식이나 조이스틱과 같이 조작하는 방식 등으로도 구현될 수 있다. For example, the
기능적인 면에서, 제 1 사용자 입력부(210)는, 시작, 종료, 스크롤 등과 같은 명령을 입력하기 위한 것이고, 제 2 사용자 입력부(215)는, 숫자 또는 문자, 심볼(symbol) 등을 입력하기 위한 것이다. 또한, 제 3 사용자 입력부(245)는, 단말기 내의 특수한 기능을 활성화하기 위한 핫 키(hot-key)로서 작동할 수 있다.In functional terms, the first
마이크(122)는, 사용자의 음성, 기타 소리 등을 입력받기에 적절한 형태로 구현될 수 있다. The
인터페이스부(170)는, 본 발명과 관련된 단말기가 외부 기기와 데이터 교환 등을 할 수 있게 하는 통로가 된다. 예를 들어, 인터페이스부(170)는 유선 또는 무선으로, 이어폰과 연결하기 위한 접속단자, 근거리 통신을 위한 포트{예를 들어 적외선 포트(IrDA port), 블루투스 포트(Bluetooth port), 무선 랜 포트(wireless Lan port)등}, 또는 단말기에 전원을 공급하기 위한 전원 공급 단자들 중 적어도 하나일 수 있다. The
인터페이스부(170)는, SIM(subscriber identification module) 또는 UIM(user identity module), 정보 저장을 위한 메모리 카드 등의 외장형 카드를 수용하는 카드 소켓일 수도 있다.The
제 2 리어 케이스(235) 측에는 단말기(100)에 전원을 공급하기 위한 전원 공급부(190)가 장착된다. The
전원 공급부(190)는, 예를 들어 충전 가능한 배터리로서 충전 등을 위하여 착탈 가능하게 결합할 수 있다.The
도 3는, 도 2에 도시된 단말기를 후면에서 바라본 사시도이다. 3 is a perspective view of the terminal shown in FIG.
도 3을 참조하면, 제 2 바디(205)의 제 2 리어 케이스(235)의 후면에는 카메라(121)가 추가로 장착될 수 있다. 제 2 바디(205)에 장착된 카메라(121)는, 제 1 바디(200)의 카메라(121)와 실질적으로 반대되는 촬영 방향을 가지며, 제 1 바디(200)의 카메라(121)와 서로 다른 화소를 가질 수 있다.Referring to FIG. 3, a
예를 들어, 제 1 바디(200)의 카메라(121)는 화상 통화 등의 경우에 사용자의 얼굴을 촬영하여 상대방에 전송함에 무리가 없도록 저 화소를 가지며, 제 2 바디(205)의 카메라(121)는 일반적인 피사체를 촬영하고 바로 전송하지는 않는 경우가 많기에 고 화소를 가지는 것이 바람직하다.For example, the
제 2 바디(205)의 카메라(121)에 인접하게는 플래쉬(250)와 거울(255)이 추가로 배치될 수 있다. 플래쉬(250)는, 제 2 바디(205)의 카메라(121)로 피사체를 촬영하는 경우에 상기 피사체를 향해 빛을 비추게 된다. 거울(255)은, 사용자가 제 2 바디(205)의 카메라(121)를 이용하여 자신을 촬영(셀프 촬영)하고자 하는 경우에, 사용자 자신의 얼굴 등을 비춰볼 수 있게 한다.The
제 2 리어 케이스(235)에는 음향 출력 모듈(152)이 추가로 배치될 수도 있다. The
제 2 바디(205)의 음향 출력 모듈(152)은, 제 1 바디(200)의 음향 출력 모듈(152)과 함께 스테레오 기능을 구현할 수 있으며, 스피커폰 모드로 통화를 위하여 사용될 수도 있다. The
또한, 제 2 리어 케이스(235)의 일 측에는 통화 등을 위한 안테나 외에 방송신호 수신용 안테나(260)가 배치될 수 있다. 안테나(260)는 제 2 바디(205)에서 인출 가능하게 설치될 수 있다.In addition, an
제 1 바디(200)의 제 1 리어 케이스(225) 측에는 제 1 바디(200)와 제 2 바디(205)를 슬라이딩 가능하게 결합하는 슬라이드 모듈(265)의 일 부분이 배치된다. A portion of the
슬라이드 모듈(265)의 다른 부분은 제 2 바디(205)의 제 2 프론트 케이스(230) 측에 배치되어, 본 도면에서와 같이 외부로 드러나지 않는 형태일 수 있다. The other part of the
이상에서는 카메라(121) 등이 제 2 바디(205)에 배치되는 것으로 설명하였으나, 반드시 그에 제한되는 것은 아니다.In the above description, the
예를 들어, 제 2 바디(205)의 카메라(121) 등과 같이 제 2 리어 케이스(235)에 배치되는 것으로 설명한 구성들 중 적어도 하나 이상이 제 1 바디(200), 주로는 제 1 리어 케이스(225)에 장착되는 것도 가능하다. 그러한 경우라면, 상기 닫힌 상태에서 제 1 리어 케이스(225)에 배치되는 구성(들)이 제 2 바디(205)에 의해 보호되는 이점이 있다. 나아가, 제 2 바디(205)의 카메라(121)가 별도로 구비되지 않더라도, 제 1 바디(200)의 카메라(121)가 회전 가능하게 형성되어 제 2 바디(205)의 카메라(121)의 촬영 방향까지 촬영할 수 있도록 구성될 수도 있다.For example, at least one or more of the configurations described as being disposed in the second
도 1 내지 도 3에 도시된 단말기(100)는, 유무선 통신 시스템 및 위성 기반 통신 시스템을 포함하여, 프레임(frame) 또는 패킷(packet)을 통하여 데이터(data)를 전송할 수 있는 통신 시스템에서 동작 가능하도록 구성될 수 있다.The terminal 100 illustrated in FIGS. 1 to 3 may be operated in a communication system capable of transmitting data through a frame or packet, including a wired / wireless communication system and a satellite-based communication system. It can be configured to.
이하에서는, 도 4를 참조하여, 본 발명의 일 실시예에 관련된 단말기가 동작할 수 있는 무선 통신 시스템에 대하여 살펴보겠다. Hereinafter, a wireless communication system in which a terminal according to an embodiment of the present invention can operate will be described with reference to FIG. 4.
통신 시스템은, 서로 다른 무선 인터페이스 및/또는 물리 계층을 이용할 수도 있다. 예를 들어, 통신 시스템에 의해 이용 가능한 무선 인터페이스에는, 주파수 분할 다중 접속(Frequency Division Multiple Access; 'FDMA'), 시분할 다중 접속(Time Division Multiple Access; 'TDMA'), 코드 분할 다중 접속(Code Division Multiple Access; 'CDMA'), 범용 이동통신 시스템(Universal Mobile Telecommunications Systems; 'UMTS')(특히, LTE(Long Term Evolution), 이동통신 글로벌 시스템(Global System for Mobile Communications; 'GSM') 등이 포함될 수 있다. 이하에서는, 설명의 편의를 위하여, CDMA에 한정하여 설명하도록 한다. 그러나, 본 발명은, CDMA 무선 통신 시스템을 포함한 모든 통신 시스템 적용될 있음은 당연하다.The communication system may use different air interfaces and / or physical layers. For example, a radio interface usable by a communication system may include frequency division multiple access (FDMA), time division multiple access (TDMA), and code division multiple access (Code Division). Multiple Access (CDMA), Universal Mobile Telecommunications Systems (UMTS) (especially Long Term Evolution (LTE), Global System for Mobile Communications (GSM), etc.) In the following, for convenience of explanation, the description will be limited to CDMA, but the present invention is naturally applicable to all communication systems including the CDMA wireless communication system.
도 4에 도시된 바와 같이, CDMA 무선 통신 시스템은, 복수의 단말기들(100), 복수의 기지국(Base Station; 'BS')(270), 기지국 제어부(Base Station Controllers; 'BSCs')(275), 이동 스위칭 센터(Mobile Switching Center; 'MSC')(280)를 포함할 수 있다. MSC(280)는, 일반 전화 교환망(Public Switched Telephone Network; 'PSTN')(290)과 연결되도록 구성되고, BSCs(275)와도 연결되도록 구성된다. BSCs(275)는, 백홀 라인(backhaul line)을 통하여, BS(270)과 짝을 이루어 연결될 수 있다. 백홀 라인은, E1/T1, ATM, IP, PPP, Frame Relay, HDSL, ADSL 또는 xDSL 중 적어도 하나에 따라서 구비될 수 있다. 따라서, 복수의 BSCs(275)가 도 4에 도시된 시스템에 포함될 수 있다.As shown in FIG. 4, the CDMA wireless communication system includes a plurality of
각각의 BS(270)는, 적어도 하나의 섹터를 포함할 수 있고, 각각의 섹터는, 전방향성 안테나 또는 BS(270)으로부터 방사상의 특정 방향을 가리키는 안테나를 포함할 수 있다. 또한, 각각의 섹터는, 다양한 형태의 안테나를 두 개 이상 포함할 수도 있다. 각각의 BS(270)는, 복수의 주파수 할당을 지원하도록 구성될 수 있고, 복수의 주파수 할당 각각은, 특정 스펙트럼(예를 들어, 1.25MHz, 5MHz 등)을 갖는다.Each
섹터와 주파수 할당의 교차는, CDMA 채널이라고 불릴 수 있다. BS(270)은, 기지국 송수신 하부 시스템(Base Station Tranceiver Subsystem; 'BTSs')이라고 불릴수 있다. 이러한 경우, "기지국"이라는 단어는, 하나의 BSC(275) 및 적어도 하나의 BS(270)을 합하여 불릴 수도 있다. 기지국은, 또한 "셀 사이트"를 나타낼 수도 있다. 또는, 특정 BS(270)에 대한 복수의 섹터들 각각은, 복수의 셀 사이트로 불릴 수도 있다. The intersection of sectors and frequency assignments may be called a CDMA channel.
도 4에 도시된 바와 같이, 방송 송신부(Broadcasting Transmitter; 'BT')(295)는, 시스템 내에서 동작하는 단말기들(100)에게 방송 신호를 송신한다. 도 1에 도시된 방송용 모듈(111)은, BT(295)에 의해 전송되는 방송 신호를 수신하기 위해 단말기(100) 내에 구비된다. As shown in FIG. 4, a broadcasting transmitter (BT) 295 transmits a broadcast signal to
뿐만 아니라, 도 4에서는, 여러 개의 위성 위치 확인 시스템(Global Positioning System; 'GPS') 위성(300)을 도시한다. 상기 위성들(300)은, 복수의 단말기(100) 중 적어도 하나의 단말기의 위치를 파악하는 것을 돕는다. 도 4에서는 두 개의 위성이 도시되어 있지만, 유용한 위치 정보는, 두 개 이하 또는 이상의 위성들에 의해 획득될 수도 있다. 도 1에 도시된 GPS 모듈(115)은, 원하는 위치 정보를 획득하기 위하여 위성들(300)과 협력한다. 여기에서는, GPS 추적 기술뿐만 아니라 위치를 추적할 수 있는 모든 기술들을 이용하여 위치를 추적할 수 있다. 또한, GPS 위성들(300) 중 적어도 하나는, 선택적으로 또는 추가로 위성 DMB 전송을 담당할 수도 있다.In addition, FIG. 4 illustrates multiple satellite positioning systems (GPS)
무선 통신 시스템의 전형적인 동작 중, BS(270)은, 다양한 단말기들(100)로부터 역 링크 신호를 수신한다. 이때, 단말기들(100)은, 호를 연결 중이거나, 메시지를 송수신 중이거나 또는 다른 통신 동작을 수행중에 있다. 특정 기지국(270)에 의해 수신된 역 링크 신호들 각각은, 특정 기지국(270)에 의해 내에서 처리된다. 상기 처리 결과 생성된 데이터는, 연결된 BSC(275)로 송신된다. BSC(275)는, 기지국들(270) 간의 소프트 핸드오프(soft handoff)들의 조직화를 포함하여, 호 자원 할당 및 이동성 관리 기능을 제공한다. 또한, BSC(275)는, 상기 수신된 데이터를 MSC(280)으로 송신하고, MSC(280)은, PSTN(290)과의 연결을 위하여 추가적인 전송 서비스를 제공한다. 유사하게, PSTN(290)은 MSC(280)과 연결하고, MSC(280)은 BSCs(275)와 연결하고, BSCs(275)는 단말기들(100)로 순 링크 신호를 전송하도록 BS들(270)을 제어한다.During typical operation of a wireless communication system,
본 발명에 대한 구체적인 설명에 앞서, 본 발명은, 2차원 이미지에 생명력을 불어넣기 위하여, 2차원 이미지를 3차원 모델 방식에 적용하여 3차원 이미지로 변환시키는 방법에 관한 것임을 전제한다. 특히, 3차원 모델 방식의 예로서, 여러 장 의 참조 영상을 필요로 하는 기존의 영상 기반 렌더링 방법과는 달리 한 장의 입력 이미지만으로부터 환경 모델을 구성 및 렌더링하는 그림 속으로의 여행(Tour Into the Picture; 'TIP') 방식을 들 수 있다. Prior to the detailed description of the present invention, it is assumed that the present invention relates to a method of converting a two-dimensional image into a three-dimensional image by applying the two-dimensional image to a three-dimensional model in order to breathe vitality into the two-dimensional image. In particular, as an example of a three-dimensional model method, unlike a conventional image-based rendering method requiring multiple reference images, a tour into a picture that constructs and renders an environment model from only one input image (Tour Into the the Picture; 'TIP').
이하에서는, 도 5를 참조하여, 본 발명에 따른 프로그램에 의해 수행되는 이미지 변환 과정에 대하여 단계별로 살펴보겠다. 도 5는, 본 발명의 일 실시예에 관련된 프로그램에 의해 수행되는 이미지 변환 과정의 흐름도이다. 이하, 설명의 편의를 위하여, 도 5에 도시된 이미지 변환 과정은, 도 1에 도시된 단말기(100)에서 수행된다고 가정한다.Hereinafter, referring to FIG. 5, an image conversion process performed by a program according to the present invention will be described step by step. 5 is a flowchart of an image conversion process performed by a program related to an embodiment of the present invention. Hereinafter, for convenience of description, it is assumed that the image conversion process illustrated in FIG. 5 is performed by the terminal 100 illustrated in FIG. 1.
도 5에 도시된 바와 같이, 단말기(100)는, 카메라(121)를 통하여 외부로부터 2차원 이미지를 입력받는다(S510).As shown in FIG. 5, the terminal 100 receives a 2D image from the outside through the camera 121 (S510).
사용자의 선택에 따라 이미지 촬영 모드가 설정되면, 단말기(100)는, 카메라(121)를 온(on)시켜 이미지 입력 및 촬영할 수 있는 상태를 설정하게 된다.When the image capturing mode is set according to the user's selection, the terminal 100 turns on the
단말기(100)는, 입력 단계(S510)에서 입력된 2차원 이미지상에서, 적어도 하나의 소실점(vanishing point)을 추정한다(S520).The terminal 100 estimates at least one vanishing point on the two-dimensional image input in the input step S510 (S520).
여기에서, 소실점은, 투시도법에 의하여 2차원 이미지상에 도시된 모든 물체의 연장선이 만나는 점을 의미한다. 소실점의 개수에 따라 1점 투시, 2점 투시 등으로 나뉠 수 있고, 소실점의 높이에 따라 앙시 투시, 중심 투시, 조감 투시로 나뉠 수도 있다.Here, the vanishing point means that the extension lines of all the objects shown on the two-dimensional image meet by the perspective view method. Depending on the number of vanishing points, it may be divided into one-point perspective, two-point perspective, and the like.
단말기(100)는, 추정 단계(S520)에서 추정된 소실점을 기준으로, 입력 단계(S510)에서 입력된 2차원 이미지상에서 하나의 공간 개념을 형성하는 복수의 평 면들을 추정한다(S530).The terminal 100 estimates a plurality of planes forming one spatial concept on the two-dimensional image input in the input step S510 based on the vanishing point estimated in the estimation step S520 (S530).
소실점 및 평면의 추정 단계(S520, S530)에 대하여, 도 6을 참조하여 더욱 상세히 설명하도록 한다. 설명의 편의를 위하여, 도 6에 도시된 2차원 이미지상에서는 1개의 소실점 및 5개의 평면이 추정된다고 가정한다.Estimating vanishing points and planes (S520, S530) will be described in more detail with reference to FIG. For convenience of explanation, it is assumed that one vanishing point and five planes are estimated on the two-dimensional image shown in FIG. 6.
도 6에 도시된 바와 같이, 소실점은, 2차원 이미지에 도시된 물체들의 연장선이 만나는 점들 중 2차원 이미지의 안쪽(또는 중심쪽)에서 만나는 점(611)이 될 수 있다.As illustrated in FIG. 6, the vanishing point may be a
또한, 도 6에 도시된 바와 같이, 복수의 평면들은, 뒷벽(rear wall)(621), 천장(ceiling)(622), 바닥(floor)(623), 왼벽(left wall)(624), 오른벽(right wall)(625)을 포함할 수 있다. 더욱 구체적으로, 소실점(611)을 중심으로 뒷벽(621)의 면적 및 위치가 결정된 후, 나머지 평면들의 위치가 결정된다. 따라서, 상술한 복수의 평면들은, 위가 열린 하나의 공간을 형성하는 형태를 갖게 된다.Also, as shown in FIG. 6, the plurality of planes may include
여기에서, 본 발명이 적용되기 위한 복수의 평면들에 대한 조건을 나열하면 다음과 같다. 접해 있는 모든 평면들은 서로 수직관계에 있어야하고, 뒷벽은 바라보는 면에 평행해야하고, 바닥 및 천장은 바라보는 면에 대하여 수직이어야 하고, 3차원 이미지를 구성할 모든 평면들의 구성은 2차원 이미지 평면들로부터 유래하여야한다.Here, the conditions for the plurality of planes to which the present invention is applied are listed as follows. All adjacent planes must be perpendicular to each other, the back wall must be parallel to the viewing face, the floor and ceiling must be perpendicular to the viewing face, and the composition of all the planes that will make up the 3D image is the 2-dimensional image plane. Should come from them.
도 5로 복귀하여, 단말기(100)는, 추정 단계(S520, S530)에서 추정된 소실점 및 평면을 이용하여, 입력 단계(S510)에서 입력된 2차원 이미지를 3차원 이미지로 변환한다(S540).Returning to FIG. 5, the terminal 100 converts the two-dimensional image input in the input step S510 into a three-dimensional image by using the vanishing points and the plane estimated in the estimating steps S520 and S530 (S540). .
변환 단계(S540)에서, 단말기(100)는, 그림자, 색상, 농도 변화 등과 같은 3차원 질감을 2차원 이미지에 추가하여 사실감을 더하는 렌더링(rendering) 과정을 수행할 수 있다.In the conversion step (S540), the terminal 100 may perform a rendering process of adding a three-dimensional texture, such as shadows, colors, density changes, etc. to the two-dimensional image to add realism.
이하에서는, 도 7 내지 도 9를 참조하여 본 발명의 일 실시예에 따른 이미지 변환 과정에 대하여 구체적으로 설명하도록 한다. Hereinafter, an image conversion process according to an embodiment of the present invention will be described in detail with reference to FIGS. 7 to 9.
도 7은, 본 발명의 일 실시예에 따른 이미지 변환 과정을 나타낸 제 1 도면이다.7 is a first diagram illustrating an image conversion process according to an embodiment of the present invention.
단말기(100)는, 카메라(121)를 통하여, 2차원 이미지를 입력받는다(a).The terminal 100 receives a 2D image through the camera 121 (a).
그리고, 단말기(100)는, 상기 입력된 2차원 이미지상에서 복수의 모서리들을 검출한다(b). 여기에서, 복수의 모서리는, 2차원 이미지상에 도시된 모든 물체들의 테두리를 의미한다.In addition, the terminal 100 detects a plurality of corners on the input two-dimensional image (b). Here, the plurality of edges mean the edges of all objects shown on the two-dimensional image.
그리고, 단말기(100)는, 상기 검출된 복수의 모서리들을 이용하여, 복수의 도미턴트 라인들(dominant lines)을 검출한다(c). 여기에서, 도미넌트 라인은, 복수의 모서리들의 방향 및 패턴에 따라 검출될 수 있다. In addition, the terminal 100 detects a plurality of dominant lines using the detected plurality of edges (c). Here, the dominant line may be detected according to the direction and pattern of the plurality of edges.
그리고, 단말기(100)는, 상기 검출된 도미넌트 라인들을 이용하여 소실점을 추정할 수 있다(d). 여기에서, 소실점은, 상기 검출된 도미넌트 라인들의 교차점으로부터 추정될 수 있다.In addition, the terminal 100 may estimate the vanishing point using the detected dominant lines (d). Here, the vanishing point can be estimated from the intersection of the detected dominant lines.
그리고, 단말기(100)는, 상기 추정된 소실점을 기준으로 하는 제 1 평면(예를 들어, 도 6의 뒷벽)이 크기를 추정한다. 여기에서, 제 1 평면의 크기는, 제 1 평면의 너비 및 높이에 의해 결정되고, 제 1 평면은, 직사각형인 것이 바람직하다.In addition, the terminal 100 estimates the size of the first plane (for example, the back wall of FIG. 6) based on the estimated vanishing point. Here, the size of the first plane is determined by the width and height of the first plane, and the first plane is preferably rectangular.
그리고, 단말기(100)는, 제 1 평면(721)의 2차원 이미지상에서의 위치를 결정한 후, 제 1 평면(721)의 윗변, 아랫변, 좌변, 우변으로부터 각각 그에 대응되는 2차원 이미지의 가장자리로 향하는 각각의 평면(722, 723, 724, 725)을 추정할 수 있다(e). 여기에서, 제 1 평면(721)의 위치는, 제 1 평면(721) 및 도미넌트 라인 사이의 거리를 이용하여 결정될 수 있다.After determining the position on the two-dimensional image of the
따라서, 단말기(100)는, 도 7에 도시된 3차원 모델 방식을 이용하여 2차원 이미지를 3차원 이미지로 변환할 수 있다.Therefore, the terminal 100 may convert the 2D image into the 3D image by using the 3D model shown in FIG. 7.
도 8은, 본 발명의 일 실시예에 따른 이미지 변환 과정을 나타낸 제 2 도면이다.8 is a second diagram illustrating an image conversion process according to an embodiment of the present invention.
도 8의 (a)에 도시된 바와 같이, 단말기(100)는, 입력된 2차원 이미지상에서 소실점(811) 및 복수의 평면들을 먼저 추정한다. 그리고, 단말기(100)는, 3차원 모델 방식을 구현하기 위하여, 소실점(811)을 중심으로 하는 제 1 원을 생성한 후 제 1 원으로부터 2차원 이미지의 가장자리 쪽으로 향하는 복수의 원들을 생성할 수 있다. 이때, 소실점(811)으로부터 2차원 이미지의 가장자리 쪽으로 갈수록 원의 반지름은 커지게 된다. 또한, 소실점은 모든 원들의 중심이 된다.As shown in FIG. 8A, the terminal 100 first estimates a vanishing
도 8의 (a)에 도시된 복수의 원들은, 3차원 이미지로 보면, 도 8의 (b)에 도시된 바와 같은 기하 포물면(821)을 형성하게 된다. 이때, 상기 형성된 기하 포물면(821)은, 상기 추정된 복수의 평면들에 접하게 된다. A plurality of circles shown in (a) of FIG. 8, when viewed in a three-dimensional image, will form a
이때, 단말기(100)는, 기하 포물면의 휨 정도, 궤도 크기, 위치 중 적어도 하나를 조절하여, 기하 포물면을 생성할 수 있다. In this case, the terminal 100 may generate the geometric paraboloid by adjusting at least one of the degree of warpage, the trajectory size, and the position of the geometric paraboloid.
따라서, 단말기(100)는, 도 8에 도시된 기하 포물면을 이용한 3차원 모델 방식을 이용하여 2차원 이미지를 3차원 이미지로 변환할 수 있다.Therefore, the terminal 100 may convert the 2D image into the 3D image by using the 3D model method using the geometric paraboloid shown in FIG. 8.
도 9는, 본 발명의 일 실시예에 따른 이미지 변환 과정을 나타낸 제 3 도면이다.9 is a third diagram illustrating an image conversion process according to an embodiment of the present invention.
도 9에 도시된 바와 같이, 단말기(100)는, 입력된 2차원 이미지상에서 복수의 주요 모서리들(912)을 결정한다. 그리고, 단말기(100)는, 상기 결정된 주요 모서리들(912)을 이용하여, 2차원 이미지상에서 적어도 하나의 소실점 및 복수의 평면들을 추정할 수 있다.As shown in FIG. 9, the terminal 100 determines a plurality of main edges 912 on the input two-dimensional image. The terminal 100 may estimate at least one vanishing point and a plurality of planes on the 2D image by using the determined main corners 912.
그리고, 단말기(100)는, 상기 결정된 주요 모서리들을 이용하여, 복수의 평면들이 교차하는 교차선들 및 소실점(911-1, 912-2)의 위치를 결정할 수 있다. 특히, 소실점(911-1, 912-2)의 위치는, 적어도 2개의 교차선들이 만나는 지점이 될 수 있다.In addition, the terminal 100 may determine positions of intersection lines and vanishing points 911-1 and 912-2 where a plurality of planes intersect using the determined main corners. In particular, the locations of vanishing points 911-1 and 912-2 may be points where at least two intersection lines meet.
또한, 단말기(100)는, 상기 결정된 소실점(911-1, 911-2)의 위치를 이용하여 카메라를 보정할 수도 있다.In addition, the terminal 100 may correct the camera by using the determined positions of the vanishing points 911-1 and 911-2.
따라서, 단말기(100)는, 도 9에 도시된 모서리를 이용한 3차원 모델 방식을 이용하여 2차원 이미지를 3차원 이미지로 변환할 수 있다.Therefore, the terminal 100 may convert the 2D image into the 3D image by using the 3D model method using the edges shown in FIG. 9.
또한, 본 발명의 일실시예에 의하면, 전술한 이미지 변환 방법은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는, 단말기의 제어부(180)를 포함할 수도 있다.In addition, according to an embodiment of the present invention, the above-described image conversion method may be embodied as computer readable codes on a medium in which a program is recorded. The computer-readable medium includes all kinds of recording devices in which data that can be read by a computer system is stored. Examples of computer-readable media include ROM, RAM, CD-ROM, magnetic tape, floppy disks, optical data storage devices, and the like, which are also implemented in the form of carrier waves (eg, transmission over the Internet). It also includes. In addition, the computer may include the
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서, 여러 가지 치환, 변형 및 변경이 가능하므로, 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다. 또한, 상기 설명된 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The present invention described above is capable of various substitutions, modifications, and changes without departing from the technical spirit of the present invention for those skilled in the art to which the present invention pertains. It is not limited by the accompanying drawings. In addition, the above-described embodiments may be configured by selectively combining all or part of the embodiments so that various modifications may be made.
도 1은 본 발명의 일 실시예에 관련된 단말기의 블록 구성도.1 is a block diagram of a terminal according to an embodiment of the present invention.
도 2는 본 발명의 일 실시예에 관련된 단말기의 전면 사시도.2 is a front perspective view of a terminal according to an embodiment of the present invention;
도 3은 본 발명의 일 실시예에 관련된 단말기의 후면 구성도.3 is a rear configuration diagram of a terminal according to an embodiment of the present invention.
도 4는 본 발명의 일 실시예에 관련된 단말기가 동작할 수 있는 무선 통신 시스템에 대한 블록도.4 is a block diagram of a wireless communication system in which a terminal according to an embodiment of the present invention may operate.
도 5는 본 발명의 일 실시예에 관련된 프로그램에 의해 수행되는 이미지 변환 과정의 흐름도.5 is a flowchart of an image conversion process performed by a program related to an embodiment of the present invention.
도 6은 본 발명의 일 실시예에 따라 2차원 이미지상에서 소실점 및 평면을 추정하는 과정을 나타낸 도면.6 is a view showing a process of estimating vanishing point and plane on a two-dimensional image in accordance with an embodiment of the present invention.
도 7은 본 발명의 일 실시예에 따른 이미지 변환 과정을 나타낸 제 1 도면.7 is a first diagram illustrating an image conversion process according to an embodiment of the present invention.
도 8은 본 발명의 일 실시예에 따른 이미지 변환 과정을 나타낸 제 2 도면.8 is a second diagram illustrating an image conversion process according to an embodiment of the present invention.
도 9는 본 발명의 일 실시예에 따른 이미지 변환 과정을 나타낸 제 3 도면.9 is a third diagram illustrating an image conversion process according to an embodiment of the present invention.
Claims (13)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070102792A KR101341521B1 (en) | 2007-10-11 | 2007-10-11 | Terminal having function for rendering image and program recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070102792A KR101341521B1 (en) | 2007-10-11 | 2007-10-11 | Terminal having function for rendering image and program recording medium |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090037239A true KR20090037239A (en) | 2009-04-15 |
KR101341521B1 KR101341521B1 (en) | 2013-12-16 |
Family
ID=40762023
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020070102792A KR101341521B1 (en) | 2007-10-11 | 2007-10-11 | Terminal having function for rendering image and program recording medium |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101341521B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101157049B1 (en) * | 2010-03-29 | 2012-06-21 | (주)루쏘코리아 | 3d image manufacturing method and system |
-
2007
- 2007-10-11 KR KR1020070102792A patent/KR101341521B1/en not_active IP Right Cessation
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101157049B1 (en) * | 2010-03-29 | 2012-06-21 | (주)루쏘코리아 | 3d image manufacturing method and system |
Also Published As
Publication number | Publication date |
---|---|
KR101341521B1 (en) | 2013-12-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101474429B1 (en) | Mobile terminal and display method thereof | |
KR101708306B1 (en) | Mobile twrminal and 3d image convergence method thereof | |
US20120290680A1 (en) | Mobile terminal and control method thereof | |
US20140063181A1 (en) | Mobile terminal and method of controlling the same | |
KR20090053605A (en) | Mobile terminal having charging menu setting function and mutual charging method using the same | |
KR20090043373A (en) | Contactless charging apparatus and method using solar light | |
KR20090059507A (en) | Contactless charging apparatus having charging state display function and charging method using the same | |
KR20090104484A (en) | Terminal and method of performing instant messaging service therein | |
KR20090063528A (en) | Mobile terminal and method of palying back data therein | |
KR20090040613A (en) | Mobile terminal and method of displaying a screen therein | |
KR20090043986A (en) | Mobile terminal, method of transmitting information therein, and method of palying back data therein | |
KR20090080796A (en) | Mobile terminal and its method for controlling of vibrator | |
KR100952248B1 (en) | Mobile terminal and its navigation method | |
KR20090104486A (en) | Terminal and method of buffering channel therein | |
KR20090053319A (en) | Communication terminal and displaying method therein | |
KR101341521B1 (en) | Terminal having function for rendering image and program recording medium | |
KR101405949B1 (en) | Mobile terminal | |
KR20090055408A (en) | Apparatus and method for controlling contactless charging in mobile terminal | |
KR20090064832A (en) | Mobile communication terminal and method of editing image therein | |
KR20100036883A (en) | Mobile terminal and method for transmitting information | |
KR101461937B1 (en) | Terminal and display method therein | |
KR101504200B1 (en) | Mobile terminal having navigation and information displaying method therefor | |
KR101405940B1 (en) | Communication terminal and method of transmitting message thereof | |
KR101422009B1 (en) | Mobile terminal and method of data communication therein | |
KR20090062640A (en) | Communication device and method of outputting data therein |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20161124 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20171124 Year of fee payment: 5 |
|
LAPS | Lapse due to unpaid annual fee |