KR20120026899A - 가상 메모기능을 갖는 이동 단말기 및 그 가상 메모 관리방법 - Google Patents

Abstract

본 발명은 가상 메모기능을 갖는 이동 단말기 및 그 가상 메모 관리방법에 관한 것으로서, 특정 공간위치에 메모를 작성하여 등록한 후 사용자가 이동 단말기의 브리뷰화면으로 해당 공간위치를 향하면 상기 작성된 가상메모를 표시함으로써 장소 및 시간에 구애받지 않고 간편하게 메모를 작성 및 확인할 수 있도록 한다.

Description

가상 메모기능을 갖는 이동 단말기 및 그 가상 메모 관리방법{MOBILE TWRMINAL AND SCREEN CONFIGURATION CONTROLLING METHOD THEREOF}

본 발명은 이동 단말기의 증강현실에 관한 것으로, 특히 특정 공간 위치에 가상메모를 작성 및 표시할 수 있는 이동 단말기 및 그의 가상 메모 관리방법에 관한 것이다.

이동 단말기는 다양한 기능을 수행할 수 있도록 구성될 수 있다. 그러한 다양한 기능들의 예로 데이터 및 음성 통신 기능, 카메라를 통해 사진이나 동영상을 촬영하는 기능, 음성 저장 기능, 스피커 시스템을 통한 음악 파일의 재생 기능, 이미지나 비디오의 디스플레이 기능 등이 있다. 일부 이동 단말기는 게임을 실행할 수 있는 추가적 기능을 포함하고, 다른 일부 이동 단말기는 멀티미디어 기기로서 구현되기도 한다. 더욱이 최근의 이동단말기는 방송이나 멀티캐스트(multicast) 신호를 수신하여 비디오나 텔레비전 프로그램을 시청할 수 있다.

또한, 상기 이동 단말기의 기능 지지 및 증대를 위한 노력들이 계속되고 있다. 상술한 노력은 이동 단말기를 형성하는 구조적인 구성요소의 변화 및 개량뿐만 아니라 소프트웨어나 하드웨어의 개량도 포함한다. 그 중에서 이동 단말기의 터치 기능은 터치 스크린을 이용하여 버튼/키 입력이 익숙하지 않은 사용자도 편리하게 단말기의 동작을 수행할 수 있도록 한 것으로서, 최근에는 단순한 입력뿐만 아니라 사용자 인터페이스(UI)와 함께 단말기의 중요한 기능으로서 자리 잡아가고 있다. 따라서, 상기 터치 기능이 이동단말기에 더욱 다양한 형태로 적용됨에 따라 그에 맞는 사용자 인터페이스(UI)의 개발이 더욱 요구되고 있다.

상기 이동 단말기에 구현된 다양한 기능 및 사용자 인터페이스들에는 입력의 편의를 위하여 다양한 메뉴들을 제공하고 있다.

일반적으로 증강현실(Augmented Reality)은 사용자가 눈으로 보는 현실세계에 가상 물체를 겹쳐 보여주는 기술이다. 즉, 증강현실은 기본적으로 현실세계를 바탕으로 그 위에 가상정보를 입히는 것이다. 이와같이 실제환경과 가상의 객체가 혼합된 증강현실기술은 실제환경은 물론 별도의 부가 정보를 제공할 수 있는 장점이 있다.

증강현실 기술에 대한 연구가 시작된 이래 다양한 분야에서 상기 증강현실을 응용하려는 연구가 이어져 왔으며, 최근에는 스마트 폰의 개발로 인하여 상기 기술을 접목하려는 연구가 활발히 이루어지고 있다. 최근이 이동 단말기, PDA(Personal digital Assiants), UMPS(Ultra Mobile Personal Computer)등 모바일 기기의 컴퓨팅 능력 향상과 무선 네트워크장치의 발달로 손안(Handheld)의 증강형실 시스템이 가능하게 되었다.

일 예로 스마트폰 카메라로 주변을 비추면 인근에 있는 상점의 정보(상점명, 위치, 전화번호 및 기타 메뉴)가 입체영상으로 표기된다즌지 건물을 비추면 해당 건물에 대한 정보가 화면에 표시된다.

그런데, 현재 스마트폰과 같은 모바일 기기의 보급이 빠르게 확상되어 증강형실을 접할 수 있는 환경이 조성되었음에도 불구하고 증강현실을 이용한 다양한 어프리케이션 및 유저 인터페이스(UI)가 개발되고 있지 않은 실정이다.

본 발명의 목적은 특정 공간 위치에 가상 메모를 설정 및 등록하여, 해당 공간위치를 카메라가 비출 때 상기 등록된 메모를 표시할 수 있는 이동 단말기의 가상메모 관리방법을 제공하는데 있다.

상기한 과제를 실현하기 위한 본 발명의 일 실시예와 관련된 이동 단말기의 가상메모 관리방법은, 가상 메모 어플리케이션 실행시 카메라의 프리뷰 화면에서 특정 공간 위치에 가상메모를 작성하는 단계와; 상기 작성된 가상메모를 서버에 등록하는 단계와; 상기 가상 메모 어플리케이션 재실행시에 카메라가 특정 공간 위치를 향하면 상기 등록된 가상메모를 해당 공간위치에 표시하는 단계를 포함한다.

상기 공간위치는 프리뷰 화면에 포함된 특정 객체 또는 특정 객체를 행하는 방위각이다.

상기 가상메모는 메모보드에서 작성하며, 상기 메모보드는 가상메모의 메인메뉴 선택시 표시되거나 가상 메모가 부착될 객체가 통터치될 때 표시된다.

상기 가상메모는 메모내용, 사용자의 위치 및 상기 공간 위치를 향하는 방위각을 포함한다.

상기 표시할 가상메모가 복수개인 경우에는 날짜별 작성자별로 표시되고, 다른 사용자의 가상메모와 구별되도록 표시된다.

상기 작성된 가상 메모에는 메모내용의 공개여부를 나타내는 보안정보가 설정된다.

상기 가상메모를 공간위치에 표시하기 위해서는 사용자의 위치 및 방위각을 확인하여 서버로 전송하고, 상기 서버로부터 사용자의 위치 및 방위각에 대응되는 가상메모와 가이드정보를 수신하여, 상기 가이드정보를 상기 프리뷰 화면에 표시함과 함께 상기 공간위치에 기 등록된 가상메모를 표시한다.

상기 가이드 정보는 카메라의 프리뷰 화면이 상기 가상메모가 부착된 공간위치를 향하도록 하는 정보로서, 카메라의 방향이동을 지시하는 표시, 사진 및 베스트 샷정보를 포함한다.

상기 사용자의 위치는 실외에서는 PGS신호를 이용한 위치추적, 실내에서는 적어도 3개 이상의 WiFi AP를 이용한 위치추적, 근거리 통신을 이용한 가전기기의 고유 ID를 이용한 위치추적등을 통해 측정되고, 자이로 센서를 이용한 이동궤적 추적 및 기지국의 RSSI신호세기 측정을 통하여 보정된다.

상기한 과제를 실현하기 위한 본 발명의 일 실시예와 관련된 이동 단말기는, 가상메모 어플리케이션 실행시 카메라의 프리뷰 화면을 표시하는 디스플레이부와;상기 프리뷰 화면의 특정 공간 위치에 가상메모를 설정되면 해당 가상메모를 서버에 등록하고, 가상 메모 어플리케이션 재실행시에 카메라가 특정 공간 위치를 향하면 상기 등록된 가상메모를 해당 위치에 표시하는 제어부를 포함한다.

상기 공간위치는 프리뷰 화면에 포함된 특정 객체 또는 특정 객체를 행하는 방위각이다.

상기 가상메모는 메모보드에서 작성하며, 상기 메모보드는 가상메모의 메인메뉴 선택시 표시되거나 가상 메모가 부착될 객체가 통터치될 때 표시된다.

상기 가상메모는 메모내용, 사용자의 위치 및 상기 공간 위치를 향하는 방위각을 포함한다.

상기 표시할 가상메모가 복수개인 경우에는 날짜별 작성자별로 표시되고, 다른 사용자의 가상메모와 구별되도록 표시된다.

상기 작성된 가상 메모에는 메모내용의 공개여부를 나타내는 보안정보가 설정된다.

상기 가상메모를 공간위치에 표시하기 위하여 상기 제어부는, 사용자의 위치 및 방위각을 확인하여 서버로 전송하고, 상기 서버로부터 사용자의 위치 및 방위각에 대응되는 가상메모와 가이드정보를 수신하여, 상기 가이드정보를 상기 프리뷰 화면에 표시함과 함께 상기 공간위치에 기 등록된 가상메모를 표시한다.

상기 가이드 정보는 카메라의 프리뷰 화면이 상기 가상메모가 부착된 공간위치를 향하도록 하는 정보로서, 카메라의 방향이동을 지시하는 표시, 사진 및 베스트 샷정보를 포함한다.

상기 제어부는 실외에서는 PGS신호를 이용한 위치추적, 실내에서는 적어도 3개 이상의 WiFi AP를 이용한 위치추적, 근거리 통신을 이용한 가전기기의 고유 ID를 이용한 위치추적등을 통해 사용자의 위치를 확인하고, 자이로 센서를 이용한 이동궤적 추적 및 기지국의 RSSI신호세기 측정을 통하여 보정한다.

상기 실시예에 따른 가상 메모기능을 갖는 이동 단말기 및 그 가상 메모 관리방법은, 특정 공간위치에 메모를 작성하여 등록한 후 사용자가 이동 단말기의 브리뷰화면으로 해당 공간위치를 향하면 상기 작성된 가상메모를 표시함으로써 장소 및 시간에 구애받지 않고 간편하게 메모를 작성 및 확인할 수 있다. 특히 가상메모 어플리케이션이 다양하게 사용되어 사용자의 가상메모가 충분히 축적되면, 이를 인터넷을 통하여 데이타 베이스화하여 검색할 수 있으며, 광고등에도 할용할 수 있는 효과가 있다.

도 1은 본 발명의 일 실시예에 관련된 이동 단말기의 블록 구성도.
도 2는 본 발명의 일 실시예에 관련된 이동 단말기가 동작할 수 있는 무선 통신 시스템에 대한 블록도.
도 3은 본 발명의 실시예에서 객체를 선택한 후 가상 메모를 작성하는 예를 나타낸 도면.
도 4는 본 발명의 실시예에서 가상메모를 작성한 후 객체를 선택하는 예를 나타낸 도면.
도 5는 본 발명의 실시예에서 하나의 객체에 복수의 메모가 추가된 형태를 나타낸 도면.
도 6a 및도 6b는 본 발명의 실시예에서 카메라의 프리뷰 화면에 표시되는 가이드 정보의 일 예를 나타낸 도면.
도 7은 본 발명의 실시예에서 가상메모에 대한 보안을 설정하는 예를 나타낸 도면.
도 8은 본 발명의 실시예에서 사용자 A가 작성한 가상 메모를 사용자 B가 확인하는 예를 나타낸 도면.
도 9는 본 발명의 실시예에서 사용자 A가 직접 가상메모정보를 사용자 B에게 전송하여 가상 메모의 부착된 위치를 알려주는 예를 나타낸 도면.
도 10은 본 발명의 실시에에 따른 이동 단말기의 가상메모 관리 방법을 나타낸 순서도.

이하, 본 발명과 관련된 이동 단말기에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있음을 유념해야 한다.

단말기는 다양한 형태로 구현될 수 있다. 예를 들어, 본 명세서에서 기술되는 단말기에는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등과 같은 이동 단말기와, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기가 있다. 이하의 설명에서는 상기 단말기가 이동 단말기인 것으로 가정하고 설명한다. 그러나, 이하의 설명에 따른 구성은 이동용을 위해 특별히 구성된 구성요소를 제외한다면 상기 고정 단말기에도 적용될 수도 있음을 본 기술분야의 당업자라면 쉽게 알 수 있을 것이다.

도 1은 본 발명의 일 실시예와 관련된 이동 단말기의 블록 구성도(block diagram)이다.

상기 이동 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1은 다양한 구성요소를 가지고 있는 이동 단말기를 나타내고 있다. 그러나 도시된 구성요소 모두가 필수구성요소인 것은 아니다. 도시된 구성요소 보다 많은 구성요소에 의해 이동 단말기가 구현될 수도 있고, 그 보다 적은 구성요소에 의해서도 이동 단말기가 구현될 수 있다.

이하 상기 구성요소들에 대해 차례로 살펴본다.

무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템 간의 무선 통신 또는 이동 단말기(100)와 이동 단말기(100)가 위치한 네트웍간의 무선 통신을 하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.

방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.

한편, 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있으며, 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다.

상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.

상기 방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성된다.

방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.

또한, 이동통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.

무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 무선 인터넷 모듈(113)은 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN (Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.

근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.

또한, 위치정보 모듈(115)은 이동 단말기의 위치를 확인하거나 얻기 위한 모듈이다. 상기 위치정보 모듈(115)의 대표적인 예로는 GPS(Global Position System) 모듈이 있다. 현재 기술에 의하면, 상기 GPS모듈은 3개 이상의 위성으로부터 떨어진 거리 정보와 정확한 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도, 경도, 및 고도에 따른 3차원의 현 위치 정보를 정확히 산출할 수 있다. 현재, 3개의 위성을 이용하여 위치 및 시간 정보를 산출하고, 또 다른 1개의 위성을 이용하여 상기 산출된 위치 및 시간 정보의 오차를 수정하는 방법이 널리 사용되고 있다. 또한, GPS 모듈은 현 위치를 실시간으로 계속 산출함으로써 속도 정보를 산출할 수 있다.

한편, A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)은 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 그리고, 처리된 화상 프레임은 디스플레이 모듈(151)에 표시될 수 있다.

카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)은 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다.

마이크(122)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰 (Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 그리고, 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(112)를 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)를 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.

사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 특히, 터치 패드가 후술하는 디스플레이 모듈(151)과 상호 레이어 구조를 이룰 경우, 이를 터치 스크린이라 부를 수 있다.

센싱부(140)는 이동 단말기(100)의 개폐 상태, 이동 단말기(100)의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 이동 단말기 (100)의 현 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 이동 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당한다. 한편, 상기 센싱부(140)는 근접 센서(141)를 포함할 수 있다. 이에 대해서는 나중에 터치스크린과 관련되어 후술된다.

또한, 상기 센싱부(140)는 사용자가 이동할 때 이동방향을 계산하는 지자기 센서, 회전방향을 계산하는 자이로 센서및 사용자의 보폭에 보수(한 걸음)를 곱하여 이동 거리를 계산하는 가속센서를 포함한다.

인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 포함될 수 있다.

여기에서, 식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module; 'UIM'), 가입자 인증 모듈(Subscriber Identify Module; 'SIM'), 범용 사용자 인증 모듈(Universal Subscriber Identity Module; 'USIM') 등을 포함할 수 있다. 또한, 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나 전원을 공급받아 이동 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.

또한, 상기 인터페이스부(170)는 이동단말기(100)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동단말기로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동단말기가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.

출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로, 이에는 디스플레이 모듈(151), 음향 출력 모듈(152), 및 알람부(153) 등이 포함될 수 있다.

디스플레이 모듈(151)는 이동 단말기(100)에서 처리되는 정보를 표시 출력한다. 예를 들어 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.

한편, 전술한 바와 같이, 디스플레이 모듈(151)과 터치패드가 상호 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이 모듈(151)은 출력 장치 이외에 입력 장치로도 사용될 수 있다. 디스플레이 모듈(151)은 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 이들 중 일부 디스플레이는 이를 통해 외부를 볼 수 있도록 투명하도록 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 TOLED(transparent organic light emitting diode) 등이 있다. 그리고 이동 단말기(100)의 구현 형태에 따라 디스플레이 모듈(151)이 2개 이상 존재할 수도 있다. 예를 들어, 이동 단말기(100)에 외부 디스플레이 모듈(미도시)과 내부 디스플레이 모듈(미도시)이 동시에 구비될 수 있다. 상기 터치스크린은 터치 입력 위치 및 면적 뿐만 아니라 터치 입력 압력까지도 검출할 수 있도록 구성될 수 있다.

음향 출력 모듈(152)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(152)은 이동 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.

알람부(153)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(153)는 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신된 경우, 이를 알리기 위해 알람부(153)는 진동을 출력할 수 있다. 또는, 키 신호가 입력된 경우, 키 신호 입력에 대한 피드백으로 알람부(153)는 진동을 출력할 수 있다. 상기와 같은 진동 출력을 통해 사용자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림을 위한 신호는 디스플레이 모듈(151)이나 음향 출력 모듈(152)을 통해서도 출력될 수 있다.

메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 상기 메모리(160)에는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.

메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 이동 단말기(100)는 인터넷(internet)상에서 상기 메모리(160)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.

그리고 제어부(180)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.

상기 제어부(180)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.

전원 공급부(190)는 배터리로서 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.

여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다.

소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.

이상에서는 본 발명과 관련된 이동 단말기를 기능에 따른 구성요소 관점에서 살펴보았다. 이하에서는 도 2 및 도 3을 더욱 참조하여, 본 발명과 관련된 이동 단말기를 외형에 따른 구성요소 관점에서 더욱 살펴보겠다. 이하에서는 설명의 간명함을 위해 폴더 타입, 바 타입, 스윙타입, 슬라이더 타입, 등과 같은 여러 타입의 이동 단말기들 중에서 슬라이더 타입의 이동 단말기를 예로 들어 설명한다. 따라서 본 발명은 슬라이더 타입의 이동 단말기에 한정되는 것은 아니고 상기 전술한 타입을 포함한 모든 타입의 이동 단말기에 적용될 수 있다.

도 1에 도시된 단말기(100)는, 유무선 통신 시스템 및 위성 기반 통신 시스템을 포함하여, 프레임(frame) 또는 패킷(packet)을 통하여 데이터(data)를 전송할 수 있는 통신 시스템에서 동작 가능하도록 구성될 수 있다.

이하에서는, 도 2를 참조하여, 본 발명에 관련된 단말기가 동작 가능한 통신 시스템에 대하여 살펴보겠다.

통신 시스템은, 서로 다른 무선 인터페이스 및/또는 물리 계층을 이용할 수도 있다. 예를 들어, 통신 시스템에 의해 이용 가능한 무선 인터페이스에는, 주파수 분할 다중 접속(Frequency Division Multiple Access; 'FDMA'), 시분할 다중 접속(Time Division Multiple Access; 'TDMA'), 코드 분할 다중 접속(Code Division Multiple Access; 'CDMA'), 범용 이동통신 시스템(Universal Mobile Telecommunications Systems; 'UMTS')(특히, LTE(Long Term Evolution)), 이동통신 글로벌 시스템(Global System for Mobile Communications; 'GSM') 등이 포함될 수 있다. 이하에서는, 설명의 편의를 위하여, CDMA에 한정하여 설명하도록 한다. 그러나, 본 발명은, CDMA 무선 통신 시스템을 포함한 모든 통신 시스템 적용될 있음은 당연하다.

도 2에 도시된 바와 같이, CDMA 무선 통신 시스템은, 복수의 단말기들(100), 복수의 기지국(Base Station; 'BS')(270), 기지국 제어부(Base Station Controllers; 'BSCs')(275), 이동 스위칭 센터(Mobile Switching Center; 'MSC')(280)를 포함할 수 있다. MSC(280)는, 일반 전화 교환망(Public Switched Telephone Network; 'PSTN')(290)과 연결되도록 구성되고, BSCs(275)와도 연결되도록 구성된다. BSCs(275)는, 백홀 라인(backhaul line)을 통하여, BS(270)과 짝을 이루어 연결될 수 있다. 백홀 라인은, E1/T1, ATM, IP, PPP, Frame Relay, HDSL, ADSL 또는 xDSL 중 적어도 하나에 따라서 구비될 수 있다. 따라서, 복수의 BSCs(275)가 도 2에 도시된 시스템에 포함될 수 있다.

각각의 BS(270)는, 적어도 하나의 섹터를 포함할 수 있고, 각각의 섹터는, 전방향성 안테나 또는 BS(270)으로부터 방사상의 특정 방향을 가리키는 안테나를 포함할 수 있다. 또한, 각각의 섹터는, 다양한 형태의 안테나를 두 개 이상 포함할 수도 있다. 각각의 BS(270)는, 복수의 주파수 할당을 지원하도록 구성될 수 있고, 복수의 주파수 할당 각각은, 특정 스펙트럼(예를 들어, 1.25MHz, 5MHz 등)을 갖는다.

섹터와 주파수 할당의 교차는, CDMA 채널이라고 불릴 수 있다. BS(270)은, 기지국 송수신 하부 시스템(Base Station Transceiver Subsystem; 'BTSs')이라고 불릴수 있다. 이러한 경우, "기지국"이라는 단어는, 하나의 BSC(275) 및 적어도 하나의 BS(270)을 합하여 불릴 수도 있다. 기지국은, 또한 "셀 사이트"를 나타낼 수도 있다. 또는, 특정 BS(270)에 대한 복수의 섹터들 각각은, 복수의 셀 사이트로 불릴 수도 있다.

도 2에 도시된 바와 같이, 방송 송신부(Broadcasting Transmitter; 'BT')(295)는, 시스템 내에서 동작하는 단말기들(100)에게 방송 신호를 송신한다. 도 1에 도시된 방송수신 모듈(111)은, BT(295)에 의해 전송되는 방송 신호를 수신하기 위해 단말기(100) 내에 구비된다.

뿐만 아니라, 도 2에서는, 여러 개의 위성 위치 확인 시스템(Global Positioning System; 'GPS') 위성(300)을 도시한다. 상기 위성들(300)은, 복수의 단말기(100) 중 적어도 하나의 단말기의 위치를 파악하는 것을 돕는다. 도 2에서는 두 개의 위성이 도시되어 있지만, 유용한 위치 정보는, 두 개 이하 또는 이상의 위성들에 의해 획득될 수도 있다. 도 1에 도시된 위치정보 모듈(115)은, 원하는 위치 정보를 획득하기 위하여 위성들(300)과 협력한다. 여기에서는, GPS 추적 기술뿐만 아니라 위치를 추적할 수 있는 모든 기술들을 이용하여 위치를 추적할 수 있다. 또한, GPS 위성들(300) 중 적어도 하나는, 선택적으로 또는 추가로 위성 DMB 전송을 담당할 수도 있다.

무선 통신 시스템의 전형적인 동작 중, BS(270)은, 다양한 단말기들(100)로부터 역 링크 신호를 수신한다. 이때, 단말기들(100)은, 호를 연결 중이거나, 메시지를 송수신 중이거나 또는 다른 통신 동작을 수행하고 있다. 특정 기지국(270)에 의해 수신된 역 링크 신호들 각각은, 특정 기지국(270)에 의해 내에서 처리된다. 상기 처리 결과 생성된 데이터는, 연결된 BSC(275)로 송신된다. BSC(275)는, 기지국들(270) 간의 소프트 핸드오프(soft handoff)들의 조직화를 포함하여, 호 자원 할당 및 이동성 관리 기능을 제공한다. 또한, BSC(275)는, 상기 수신된 데이터를 MSC(280)으로 송신하고, MSC(280)은, PSTN(290)과의 연결을 위하여 추가적인 전송 서비스를 제공한다. 유사하게, PSTN(290)은 MSC(280)과 연결하고, MSC(280)은 BSCs(275)와 연결하고, BSCs(275)는 단말기들(100)로 순 링크 신호를 전송하도록 BS들(270)을 제어한다.

일반적으로 증강현실은 스마트폰 카메라를 프리뷰 상태로 동작시킬 때 실제 대상물의 프리뷰 화면상에 그 대상물에 대한 가상정보 즉, 대상물의 정보(위치, 명칭, 전화번호 및 기타) 및 대상물과 관련된 정보를 보여주는 것입니다.

본 발명은 증강현실의 기능을 이용하여 특정 공간 위치에 가상메모를 작성하여 저장한 후 해당 위치가 스마트폰 카메라에 의해 비춰질 때 상기 작성된 가상메모를 증강현실정보와 함께 표시하는 어플리케이션을 제공한다. 특히 본 발명은 GPS, 지자기 센서 및 다양한 사용자의 위치추적방법을 적용하여 실외는 물론 실내에서 증강현실정보를 이용한 가상메모의 작성, 등록 및 표시방법을 제공한다. 이상 가상 메모는 설명의 편의를 위하여 메모로 약칭한다.

1. 사용자의 대표위치 등록

사용자는 가상메모를 작성하기 위하여 가상메모 어플리케이션을 실행한다. 상기 실행된 가상 어플리케이션의 메인 메뉴에서 사용자는 자신의 대표위치를 설정할 수 있다. 상기 사용자의 대표위치는 이동 단말기(또는 스마트폰)를 이용하여 특정 고정물을 비출 때 고정물의 방위각을 감지하여 해당 고정물에 대한 메모를 보다 정확한 위치에 표시할 수 있도록 하는 역할을 한다. 즉, GPS 및 WiFi AP를 통한 위치추적이 양호하지 않은 경우, 상기 등록된 대표 위치를 근거로 보다 정확한 위치에 메모를 위치시킬 수 있다.

상기 사용자의 대표위치는 실외에서는 위치정보모듈(115)이 GPS신호를 이용하여 감지하며, 실내에서는 무선랜 (WiFi) 억세스 포인트(Access Point:AP)를 이용하여 감지한다.

상기 감지된 사용자의 대표위치는 가상메모 관리서버에 등록된다. 상기 가상메모 관리서버는 상기 대표위치뿐만 아니라 가상메모 어플리케이션에 가입한 사용자들의 메모 및 관련정보를 관리하는 서버이다. 이때, 사용자가 등록하는 위치는 사용자가 많은 시간을 보내는 위치로서, 예를들면 가정에서는 고정물(거실, 벽, 창문, 냉장고 및 에어컨)을 포함하며, 사무실(또는 회사)에서는 책상등이 있으며, 외부에서는 자주 가는 도서관 또는 특정 모임장소등을 포함할 수 있다.

특히 상기 사용자의 대표위치는 실내 및 실외에서 사용자(이동 단말기)의 위치 측정이 양호한 경우에는 단지 참고 위치로 활용된다.

2. 가상메모 작성

상기 가상메모 어플리케이션이 실행되면 카메라, 위치정보모듈 및 각종 센서(지자기 센서 및 자이로센서등)이 자동으로 동작된다.

상기 카메라는 메모를 남길 객체를 갭쳐하며, 상기 지자기 센서는 이동 단말기가 메모를 남길 객체를 향하는 방위각을 측정하며, 상기 자이로센서는 이동 단말기 사용자의 이동궤적을 특정하는 역할을 수행한다.

상기 카메라가 작동되어 프리뷰 화면에 적어도 하나 이상의 객체가 표시된 상태에서, 사용자는 객체 또는 그 객체를 향하는 방위각에 메모를 작성하여 등록할 수 있다. 즉, 사용자는 어떤 타입으로 메모를 작성할 지를 결정해야 한다.

상기 메모를 소정 객체(고정물)에 남길 것인지 아니면 방위각에 남길 것인지는 가상 메모 어플리케이션의 메인 메뉴 또는 화면을 롱 터치했을 때 별도의 메뉴로서 제공할 수 있다.

도 3은 본 발명의 실시예에서 객체를 선택한 후 가상 메모를 작성하는 예를 나타낸다.

도 3에 도시된 바와같이, 사용자가 프리뷰 화면을 소정 위치를 롱터치하면, 팝업 형태로 객체 또는 방위각을 선택할 수 있는 메뉴를 제공한다. 상기 메뉴에서 사용자가 객체 또는 방위각을 선택하면 프리뷰 화면에 메모 보드(50)가 표시된다.

사용자는 상기 표시된 메모 보드에서 가상메모를 작성한다.

상기 메모보드(50)에서 가상 메모를 작성하는 방법은 2가지로 구분된다.

첫 번째 방법은 메모보드에서 가상메모를 작성하여 바로 등록하는 방법이고, 두 번째 방법은 메모보드를 생성하여 가상메모를 작성한 후 그 작성된 메모를 터치 & 드래그 동작에 의해 원하는 객체로 이동시켜 가상메모를 등록하는 방법이다. 즉, 상기 첫번째 방법은 객체를 선택한 후 가상메모를 작성하는 방법이고, 두번째 방법은 메모를 먼저 작성한 후 가상메모를 남길 객체를 나중에 선택하는 방법이다.

상기 도 3에 도시된 바와같이 첫번째 방법에서, 사용자는 예를들면 냉장고를 롱터치하여 메모보드를 표시하고, 그 표시된 메모보드에서 가상메모를 작성한 후 이동 단말기의 사용자 입력부(130)의 '확인'버튼을 눌러 가상메모의 작성이 완료되었음을 나타낸다. 상기 확인버튼이 입력되면 제어부(180)는 상기 선택된 냉장고에 메모를 추가한다.

두 번째 방법은 도 4에 도시된 바와같이, (가상)메모보드에서 가상메모를 작성한 후 메인보드의 아래 부분을 터치하여 신규 메모를 생성하기 위한 메뉴를 표시한 후, 해당 메뉴에서 신규메모추가 항목을 선택하여 가상메모를 원하는 객체에 추가한다. 이때, 상기 메뉴는 신규메모 추가, 삭제 및 이동 항복을 포함한다.

사용자는 가상메모가 작성되면 상기 신규 메모추가 항목을 선택하는데, 해당 항목이 선택되면 상기 작성된 가상메모가 작은 메모지로 변한다. 사용자는 상기 변화된 작은 메모지를 터치 & 드래그하여 예를들면 냉장고에 위치시킴으로써 가상메모를 냉장고에 추가한다.

도 5는 본 발명의 실시예에서 하나의 객체에 복수의 메모가 추가된 형태를 나타낸 예이다.

도 5에 도시된 바와같이 ,하나의 객체 또는 방위각에 상기와 같은 가상 메모를apah 작성하여 추가할 수 있다. 또한, 가상 메모 어플리케이션의 추가항목을 선택하거나 메모보드내에 구비된 메모추가 아이콘(클립형태)을 선택하여 하나의 가상메모안에 적어도 하나 이상의 가상메모를 더 포함하도록 설정할 수 있다. 3. 가상메모 등록

가상메모의 등록은 가상메모가 특정 객체 또는 방위각에 추가되는 시점에서 이루어진다. 가상메모가 특정 객체 또는 방위각에 추가되면, 제어부(180)는 위치정보모듈(115)에서 측정된 사용자의 위치, 지자기 센터에서 측정된 방위각 및 가상메모의 내용을 네트워크의 가상메모 관리 서버(미도시)로 전송한다.

상기 가상메모 관리서버는 가상메모 어플리케이션에 가입한 사용자들의 가상메모를 관리하는 서버로서 기존의 위치정보 서버 또는 증강현실정보 서버와 연동될 수 있다. 따라서, 상기 가상 메모는 기존의 증강현실정보와 연계하여 표시되거나 또는 상기 가상메모 관리서버에 의하여 가상메모 어플리케이션에 가입한 사용자에게 가상메모만을 표시할 수 있다.

또한, 상기 작성된 가상메모는 가상메모 관리서버로 전송됨과 함께 이동 단말기의 가상 메모함에 저장된다. 상기 저장되는 가상메모 역시 이동 단말기의 위치, 이동 단말기가 객체를 향하는 방위각 및 메모내용을 포함한다.

상기 가상 메모함에 저장되는 가상 메모는 폴더 또는 아이콘 형태로 저장되며, 방위각, 위치 및 메모내용을 포함한다. 또한, 상기 메모는 제목, 메모날짜 및 시간정보를 포함한다.

3. 메모 표시

가상메모의 표시는 사용자가 가상메모 어플리케이션을 실행한 후 카메라를 특정 객체 또는 방위각에 위치시켰을 때 표시된다.

상기 가상 메모 어플리케이션이 실행되면 제어부(180)는 위치정보모듈(115)을 통하여 GPS위성으로부터 수신된 GPS신호를 이용하여 이동 단말기의 현재 위치를 파악하고, 지자기 센터에서 측정된 이동 단말기의 각도를 근거로 현재 이동 단말기가 향하는 방위각을 측정한다.

상기 측정된 이동 단말기의 위치와 방위각은 가상메모관리 서버로 전송되고, 상기 가상메모 관리서버는 상기 위치 및 방위각에 해당하는 적어도 하나 이상의 가상메모를 이동 단말기로 전송한다. 따라서, 제어부(180)는 현재 이동 단말기에서 표시되고 있는 프리뷰 화면(실사영상), 예를들면, 소정 객체 또는 방위각에 에 상기 가상메모관리 서버로부터 전송된 가상메모를 중첩하여 표시한다.

이때 표시되는 가상메모에는 가상메모를 작성한 날짜(또는 시간) 또는 작성자등이 표시되며, 메모가 복수개인 경우에는 작성 날짜별로 표시하거나 작성자별로 표시한다.

그런데, 이동 단말기의 프리뷰 화면에 가상메모를 표시할 때 가장 중요한 요소는 이동 단말기의 현재 위치 즉 사용자의 위치이다. 실외의 경우에는 GPS신호를 이용하여 비교적 정확하게 사용자의 위치를 파악할 수 있지만, 실내의 경우에는 여러가지 방법을 이용하여 위치를 파악한다.

일 예로, 가정내 또는 주변에 있는 3개 이상의 WiFi AP를 이용하여 일차적으로 이동 단말기의 현재 위치를 측정한 후 이동 단말기에 구비된 자이로 센서를 이용하여 사용자의 이동궤적을 근거로 상기 측정된 위치를 보정하고, 더 나아가 기지국의 수신신호세기(RSSI)를 이용하여 상기 측정된 위치를 보정한다면 실내에서 정확한 위치추적이 가능하다.

다른 예로서, 영상인식을 이용하여 이동 단말기에서 촬영된 영상을 가상메모 관리서버에 기등록된 집안의 설계도와 비교하여 이동 단말기의 위치를 파악할 수 있으며, 근거리 무선통신을 이용하는 가전기기들의 고유 ID를 이용하여 이동 단말기의 위치를 추적하고 보정하는 것이 가능하다.

그리고, 상기 등록된 가상메모를 표시할 때 가상메모관리 서버는 사용자가 현재 메모가 부착되어 있는 개체를 보다 정확하게 향하도록 가이드정보를 제공할 수 있다. 상기 가상메모관리 서버는 추적된 이동 단말기의 위치 및 이동 단말기의 각도를 근거로 이동 단말기가 메모가 남겨진 객체 또는 방위각을 향하도록 도 6a 및도 6b에 도시된 바와 같이 가이드 정보를 제공한다.

또한, 상기 가상메모 관리서버는 가이드 정보 이외에도 메모가 남겨진 객체의 사진 또는 베스트 샷(best shot) 위치정보를 이동 단말기에 제공할 수 있다. 제어부(180)는 사용자의 프리뷰 화면이 상기 사진 또는 베스트 샷 위치정보와 일치할 때 사용자에게 최적의 위치에 도달되었음을 통지할 수 있다.

따라서, 사용자는 이동 단말기의 프리뷰 화면에 표시되는 상기 가이드 정보를 근거로 이동 단말기의 방향을 조절하여 가상 메모가 남겨진 객체(e.g.,냉장고)fmf 정확하게 프리뷰 화면에 위치시키게 된다.

이와같이 사용자는 자신이 특정 객체 도는 방위각에 추가한 가상 메모를 자신의 이동 단말기를 이용하여 간편하게 확인할 수 있다.

본 발명에서 가상메모는 가상 메모 어플리케이션을 사용하는 다른 사용자와 공유할 수 있다. 일반적으로 메모는 사용자 자신의 일정에 관련도기도 하지만, 다른 사용자에게 특정 사실을 알리는 용도로도 사용되기 때문에 다른 사용자와의 공유가 반드시 필요하다.

사용자는 가상 메모를 작성한 후 설정메뉴에서 가상메모에 대한 보안을 설정할 수 있다. 보안 설정은 공개 또는 비공개로 구분되어, 공개된 사용자는 다른 사람이 작성한 가상 메모를 볼 수 있다.

도 7은 본 발명의 실시예에서 가상메모에 대한 보안을 설정하는 예이다.

사용자는 보안설정 메뉴에서 사용자 리스트를 추가할 수 있으며, 사용자 리스트중에서 가상메모를 공개하고자 하는 사용자를 설정할 수 있다. 따라서, 가상메모 공개가 체크된 사용자는 가상 메모 어플리케이션을 실행한 후 가상메모 보기를 선택하면, 다른 사용자가 특정 객체 또는 방위각에 추가한 가상메모를 볼 수 있다.

도 8은 본 발명의 실시예에서 사용자 A가 작성한 가상 메모를 사용자 B가 확인하는 예를 나타낸 도면이다. 이때, 사용자 A,B는 강튼 집에 살고 있으며 사용자 A가 가상메모를 작성한 경우를 예로 든다.

먼저 사용자 A는 가상 메모를 냉장고에 붙여 놓은 후 사용자 B가 볼수 있도록 보안을 설정한다. 상기 작성된 가상메모는 이동 단말기의 위치정보 및 방위각과 함께 가상메모 관리서버에 등록된다.

이후 사용자 B가 귀가하여 가상 메모 어프리케이션을 실행한 후 메모보기를 선택하면, 사용자 B의 제어부(180)는 가상메모 관리서버로 가상메모를 요청하는 신호를 전송한다. 상기 가상메모 요청신호에는 사용자 B의 위치정보가 포함된다. 따라서, 가상메모 관리서버는 사용자 B가 메모공개가 설정된 사용자 인지 체크하여, 메모공개가 설정된 사용자 인 경우 상기 사용자가 등록한 가상메모를 사용자 B의 이동 단말기로 전송한다.

따라서, 사용자 B는 가상메모 관리서버가 제공하는 가이드 정보에 따라 이동 단말기를 냉장고에 행하도록 하여 사용자 A의 가상 메모를 인식하고, 해당 가상 메모를 선택하여 상세 메모 내용을 확인다.

특히 제어부(180)는 가상메모 관리서버에서 전송된 가상메모 정보에 따라 현재 프리뷰화면에 메모가 있으며, 도 6a 및 도 6b에 도시된 바와같이 메모가 있는 위치(객체 또는 방위각)를 안내하는 가이드 정보를 표시한다. 따라서, 사용자 B는 사용자 A가 남긴 가상메모가 어디에 있는지 정확하게 인지하고, 해당 객체 또는 방위각에 붙여진 가상 메모를 확인할 수 있다.

한편, 사용자B가 이동 단말기를 냉장고에 비추었을 때 복수의 메모가 존재할 수 있다. 만약 복수의 가상 메모가 냉장고에 부착되어 있으며, 사용자 B가 붙여 놓은 가상 메모가 아닌 경우 제어부(180)는 사용자 B의 가상메모와 구별되도록 특수효과(깜박임, 다른 색, 움직임 및 소리))를 준다. 또한, 상기 가상 메모의 긴급성이나 시간이 지난 가상메모는 다른 가상 메모와 다르게 색 및 사이즈를 변화시킨다.

도 9는 본 발명의 실시예에서 사용자 A가 직접 가상메모정보를 사용자 B에게 전송하여 가상 메모의 부착된 위치를 알려주는 예를 나타낸 도면이다.

도 9를 참조하면, 사용자 A는 사용자 B에게 가상메모를 전송하여, 사용자B가 상기 사용자 A가 가상메모를 설정한 위치에서 가상 메모를 확인할 수 있도록 한다. 예를들어, 야외의 특정 지점(A)에서 어떤 건물(e.g.,스타벅스)의 3층을 사용자 B에게 알려주고 싶을 경우 사용자 A는 상기 지점(A)에서 스타벅스 3층을 행한 방위각에 가상메모를 설정하여 등록하고, 그 등록된 가상메모정보를 사용자 B에게 전송한다. 상기 전송되는 가상메모정보는 메모내용, 방위각 및 사용자의 위치를 포함한다.

따라서, 사용자 B는 GPS안내를 받아 스타벅스까지 도달한 후 사용자 A로부터 수신한 가상메모정보(사용자 A의 위치 및 방위각)따라 제어부(180)가 제공하는 가이드정보에 따라 정확하게 스타벅스의 3층을 향하여 사용자 A가 남긴 가상메모를 확인한다.

도 10은 본 발명의 실시에에 따른 이동 단말기의 가상메모 관리 방법을 나타낸 순서도이다.

도 10에 도시된 바와같이, 가상메모를 작성하기 위하여 사용자는 먼저 가상메모 어플리케이션을 실행한다(S10). 상기 가상 메모어플리케이션이 실행되면 카메라, 위치정보 모듈(115) 및 지자기센서가 자동으로 동작된다(S11).

사용자는 카메라의 프리뷰 화면을 가상 메몰르 남기고자 하는 객체(대상물, 고정물)에 위치시킨 상태에서, 가상메모의 메인메뉴의 설정메뉴를 선택하거나 또는 해당 객체를 롱터치하면, 제어부(1800는 해당 가상메모를 객체에 부착할 것인지 아니면 방위각에 부착할 것인지를 결정할 수 있는 팝업을 표시한다. 사이 팝업에서 사용자가 특정 객체에 가상메모를 남기기로 결정하면, 제어부(1800는 프리뷰 화면에 메모내용을 입력할 수 있는 메모보드를 표시한다.

상기 표시된 메모보드에서 사용자는 메모내용을 작성하고, 필요할 경우에는 추가로 다른 메모를 작성하거나 하나의 메모안에 여러개의 메모를 포함시키는 등의 작업을 수행한다(S12). 더불어 사용자는 작성된 가상메모에 보안을 설정하여 작성된 가상 메모의 공개여부를 설정한다.

사용자가 상기 작성된 가상메모를 특정 개체에 부착하면, 제어부(180)는 ㅔ모내용, 사용자의 위치 및 방위각을 포함하는 메모정보를 가상메모 관리서버로 전송하여 해당 메모를 등록한다(S313).

이후 사용자가 다시 가상메모 애플리케이션을 실행하여 메모보기를 선택하면, 제어부(180)는 전술한 다양한 위치측정방법을 이용하여 사용자의 현 위치를 측정한 후 상기 측정된 사용자의 위치와 지자기 센서에서 측정된 방위각을 가상메모 요청신호에 포함시켜 가상메모 관리서버로 전송한다(S14. S15).

상기 가상메모 관리서버는 이동 단말기에서 전송된 사용자의 위치 및 방위각을 근거로 데이타 베이스로부터 적어도 하나 이상의 가상메모를 검색한 후 그 검색된 가상메모를 가이드정보와 함게 이동 단말로 전송한다.

따라서, 이동 단말기의 제어부(180)는 상기 가상메모 관리서버로부터 수신한 가이드정보를 프리뷰 화면에 표시하여 메모가 부착된 객체를 가이드함과 함께 해당 객체 위에 기 작성된 가상메모를 표시한다. 이때, 해당 개체에 다른 사용자가 붙여 놓은 가상메모가 존재할 경우에는 구별되도록 표시한다.

또한, 본 발명에서 가상메모에는 단순히 텍스크 뿐만아니라 사진, 동영상, 어플리케이션 바로가기 및 전화번호등을 설정할 수 있으며, 스케줄 및 알람기능과 연계하여 특정 메모가 사용자가 지정한 시간에 활성화되어 사용자에게 해야할 일 등을 통지할 수도 있다.

상술한 바와같이 본 발명은 특정 공간위치에 메모를 작성하여 등록한 후 사용자가 이동 단말기의 브리뷰화면으로 해당 공간위치를 향하면 상기 작성된 가상메모를 표시함으로써 장소 및 시간에 구애받지 않고 간편하게 메모를 작성 및 확인할 수 있다. 특히 가상메모 어플리케이션이 다양하게 사용되어 사용자의 가상메모가 충분히 축적되면, 이를 인터넷을 통하여 데이타 베이스화하여 검색할 수 있으며, 광고등에도 할용할 수 있을 것이다.

즉, 사용자들은 무선 인터넷을 이용하여 특정 위치에 어떤 메모들이 있는지 확인해 볼 수 있으며 그 위치에 어떤 사람이 가상 메모를 남겼는지 확인할 수 있게 된다. 이러한 가상메모는 최근 연인들의 사랑의 맹세 열세, 사랑의 글을 특정 지역(남산, 명소 및 음식점)에 남기고 이를 기념하는일 이 많아짐에 따라 향후 더욱 다양하게 쓰일 수 있을 것이다.

또한, 본 발명의 일 실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는, 단말기의 제어부를 포함할 수도 있다.

상기와 같이 설명된 이동 단말기는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

110 : 무선통신부 111 : 방송수신모듈
112 : 이동통신모듈 113 ; 무선인터넷모듈
140 ; 센싱부 150 : 출력부
151 : 디스플레이부 160 : 메모리
180 : 제어부

Claims (24)

1. 가상 메모 어플리케이션 실행시 카메라의 프리뷰 화면에서 특정 공간 위치에 가상메모를 작성하는 단계와;
   상기 작성된 가상메모를 서버에 등록하는 단계와;
   상기 가상 메모 어플리케이션 재실행시에 카메라가 특정 공간 위치를 향하면 상기 등록된 가상메모를 해당 공간위치에 표시하는 단계를 포함하는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
2. 제1항에 있어서, 상기 가상메모는
   상기 공간위치에 적어도 하나 이상 설정되며, 각 가상메모는 여러개의 다른 가상메모를 포함할 수 있는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
3. 제1항에 있어서, 상기 공간위치는
   프리뷰 화면에 포함된 객체 또는 객체를 행하는 방위각인 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
4. 제1항에 있어서, 상기 가상메모는
   메모보드에서 작성하며, 상기 메모보드는 가상메모의 메인메뉴 선택시 표시되거나 가상 메모가 부착될 객체가 통터치될 때 표시되는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
5. 제1항에 있어서, 상기 가상메모는
   객체가 선택된 상태에서 작성되거나 또는 가상메모의 작성 완료된 후 드래그 & 드롭에 의해 특정 객체로 이동될 때 해당 객체에 부착되는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
6. 제1항에 있어서, 상기 가상메모는
   메모내용, 사용자의 위치 및 공간 위치를 향하는 방위각을 포함하는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
7. 제1항에 있어서, 상기 가상메모가 복수개인 경우에는
   날짜별 작성자별로 표시하는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
8. 제1항에 있어서, 상기 가상메모가 복수개인 경우에는
   다른 사용자의 가상메모와 구별되도록 표시하는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
9. 제1항에 있어서, 상기 작성된 가상 메모에
   메모내용의 공개여부를 나타내는 보안정보를 설정하는 단계를 더 포함하는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
10. 제1항에 있어서, 상기 가상메모를 공간위치에 표시하는 단계는
    사용자의 위치 및 방위각을 확인하는 단계와;
    상기 확인된 위치 및 방위각을 서버로 전송하는 단계와;
    상기 서버로부터 사용자의 위치 및 방위각에 대응되는 가상메모와 가이드정보를 수신하는 단계와;
    상기 가이드정보를 상기 프리뷰 화면에 표시함과 함께 상기 공간위치에 기 등록된 가상메모를 표시하는 단계를 포함하는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
11. 제10항에 있어서, 상기 가이드 정보는
    카메라의 프리뷰 화면이 상기 가상메모가 부착된 공간위치를 향하도록 하는 정보로서, 카메라의 방향이동을 지시하는 표시, 사진 및 베스트 샷정보를 포함하는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
12. 제10항에 있어서, 상기 사용자의 위치는
    실외에서는 PGS신호를 이용한 위치추적, 실내에서는 적어도 3개 이상의 WiFi AP를 이용한 위치추적, 근거리 통신을 이용한 가전기기의 고유 ID를 이용한 위치추적등을 통해 측정되고, 자이로 센서를 이용한 이동궤적 추적 및 기지국의 RSSI신호세기 측정을 통하여 보정되는 것을 특징으로 하는 이동 단말기의 가상메모 관리방법.
13. 가상메모 어플리케이션 실행시 카메라의 프리뷰 화면을 표시하는 디스플레이부와;
    상기 프리뷰 화면의 특정 공간 위치에 가상메모를 설정되면 해당 가상메모를 서버에 등록하고, 가상 메모 어플리케이션 재실행시에 카메라가 특정 공간 위치를 향하면 상기 등록된 가상메모를 해당 위치에 표시하는 제어부를 포함하는 것을 특징으로 하는 이동 단말기.
14. 제13항에 있어서, 상기 가상메모는
    상기 공간위치에 적어도 하나 이상 설정되며, 각 가상메모는 여러개의 다른 가상메모를 포함할 수 있는 것을 특징으로 하는 이동 단말기.
15. 제13항에 있어서, 상기 공간위치는
    프리뷰 화면에 포함된 객체 또는 객체를 행하는 방위각인 것을 특징으로 하는 이동 단말기.
16. 제13항에 있어서, 상기 가상메모는
    메모보드에서 작성하며, 상기 메모보드는 가상메모의 메인메뉴 선택시 표시되거나 가상 메모가 부착될 객체가 통터치될 때 표시되는 것을 특징으로 하는 이동 단말기.
17. 제13항에 있어서, 상기 가상메모는
    객체가 선택된 상태에서 작성되거나 또는 가상메모의 작성 완료된 후 드래그 & 드롭에 의해 특정 객체로 이동될 때 해당 객체에 부착되는 것을 특징으로 하는 이동 단말기.
18. 제13항에 있어서, 상기 가상메모는
    메모내용, 사용자의 위치 및 상기 공간 위치를 향하는 방위각을 포함하는 것을 특징으로 하는 이동 단말기.
19. 제13항에 있어서, 상기 제어부는
    가상메모가 복수개인 경우 날짜별 작성자별로 표시하는 것을 특징으로 하는 이동 단말기.
20. 제13항에 있어서, 상기 제어부는
    가상메모가 복수개인 경우 다른 사용자의 가상메모와 구별되도록 표시하는 것을 특징으로 하는 이동 단말기.
21. 제13항에 있어서, 상기 작성된 가상 메모에는 메모내용의 공개여부를 나타내는 보안정보가 설정되는 것을 특징으로 하는 이동 단말기.
22. 제13항에 있어서, 상기 제어부는
    가상 메모 어플리케이션이 재실행되면 사용자의 위치 및 방위각을 확인하여 서버로 전송하고, 상기 서버로부터 사용자의 위치 및 방위각에 대응되는 가상메모와 가이드정보를 수신하여, 상기 가이드정보를 프리뷰 화면에 표시함과 함께 상기 공간위치에 기 등록된 가상메모를 표시하는 것을 특징으로 하는 이동 단말기.
23. 제22항에 있어서, 상기 가이드 정보는
    카메라의 프리뷰 화면이 상기 가상메모가 부착된 공간위치를 향하도록 하는 정보로서, 카메라의 방향이동을 지시하는 표시, 사진 및 베스트 샷정보를 포함하는 것을 특징으로 하는 이동 단말기.
24. 제22항에 있어서, 상기 제어부는
    실외에서는 PGS신호를 이용한 위치추적, 실내에서는 적어도 3개 이상의 WiFi AP를 이용한 위치추적, 근거리 통신을 이용한 가전기기의 고유 ID를 이용한 위치추적등을 통해 사용자의 위치를 확인하고, 자이로 센서를 이용한 이동궤적 추적 및 기지국의 RSSI신호세기 측정을 통하여 보정하는 것을 특징으로 하는 이동 단말기.

Images