KR20130064244A - 휴대단말기의 콘텐츠 표시장치 및 방법 - Google Patents

휴대단말기의 콘텐츠 표시장치 및 방법 Download PDF

Info

Publication number
KR20130064244A
KR20130064244A KR1020110130770A KR20110130770A KR20130064244A KR 20130064244 A KR20130064244 A KR 20130064244A KR 1020110130770 A KR1020110130770 A KR 1020110130770A KR 20110130770 A KR20110130770 A KR 20110130770A KR 20130064244 A KR20130064244 A KR 20130064244A
Authority
KR
South Korea
Prior art keywords
content
unit
display
camera
display area
Prior art date
Application number
KR1020110130770A
Other languages
English (en)
Other versions
KR101873525B1 (ko
Inventor
김경화
강지영
김선화
김희운
신동준
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020110130770A priority Critical patent/KR101873525B1/ko
Priority to US13/671,797 priority patent/US9002400B2/en
Priority to EP12195816.9A priority patent/EP2602729B1/en
Priority to CN201210523939.7A priority patent/CN103162706B/zh
Priority to JP2012269631A priority patent/JP6169350B2/ja
Publication of KR20130064244A publication Critical patent/KR20130064244A/ko
Application granted granted Critical
Publication of KR101873525B1 publication Critical patent/KR101873525B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W64/00—Locating users or terminals or network equipment for network management purposes, e.g. mobility management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Abstract

휴대단말기의 콘텐츠 표시장치가, 단말기의 위도, 경도 및 고도의 3차원 위치정보를 감지하는 위치감지부를 구비하는 감지부와, 콘텐츠를 저장하는 콘텐츠저장부와, 생성되는 콘텐츠를 위치정보와 함께 콘텐츠저장부에 저장하며, 콘텐츠표시시 콘텐츠 표시영역을 설정하고 저장된 콘텐츠의 위치정보를 분석하여 표시영역 내에 위치되는 콘텐츠들을 3차원 적으로 표시되도록 제어하는 제어부와, 제어부의 제어에 설정 영역의 대응되는 위치에 콘텐츠를 표시하는 표시부로 구성된다.

Description

휴대단말기의 콘텐츠 표시장치 및 방법{DEVICE AND METHOD FOR DISPLAYING A CONTENTS IN WIRELESS TERMINAL}
본 발명은 휴대단말기의 콘텐츠 표시장치 및 방법에 관한 것으로, 특히 콘텐츠의 생성 환경을 고려하여 콘텐츠를 입체적으로 표시할 수 있는 장치 및 방법에 관한 것이다.
현재 휴대단말기는 고성능의 카메라, 고속의 통신부, 고해상도의 표시부를 구비하여 다양한 형태의 통신 및 멀티미디어 서비스를 수행할 수 있다. 그리고 상기 휴대단말기는 다양한 콘텐츠(contents)들을 외부로부터 수신하거나 내부에서 생성할 수 있으며, 이런 콘텐츠들에 부가적인 정보추가하여 콘텐츠를 다양한 형태로 처리할 수 있다.
그러나 휴대단말기에서 상기 콘텐츠에 부가된 정보를 확인하고자 하는 경우, 콘텐츠들을 일일이 확인하여야 하는 불편함이 있었다. 예를들면 사진을 촬영하는 경우, 촬영된 사진을 저장할 때 사진을 촬영한 위치 등의 정보를 생성하여 함께 저장할 수 있다. 이런 경우 사진들의 촬영 위치를 확인하고자하는 경우, 해당하는 사진을 선택하여 촬영된 위치를 확인하여야 했다. 즉, 특정 지역 또는 위치에서 생성된 콘텐츠들을 통합하여 확인하는 방법이 없었다.
본 발명은 휴대단말기에서 콘텐츠(contents, item)를 생성할 때 콘텐츠의 위치정보를 함께 생성하여 저장하고, 콘텐츠를 표시할 때 위치정보를 고려하여 콘텐츠가 생성된 위치를 다양한 방법으로 표현할 수 있는 장치 및 방법을 제안한다. 이를 위하여, 본 발명은 콘텐츠 생성시 단말에 탑재되어 있는 다양한 센서의 조합으로 contents가 생성되는 위치 정보를 저장하고, 해당 콘텐츠를 표현할 때 다양한 센서들 또는 지도와 해당하는 콘텐츠와 함께 저장된 위치 정보와 조합하여 다양한 형태로 콘텐츠를 표현(contents viewer)하는 장치 및 방법을 제안한다.
본 발명의 실시예에서는 콘텐츠 생성시 위도, 경도 및 고도를 포함하는 위치 정보를 생성하여 콘텐츠와 함께 저장한다. 그리고 콘텐츠 표시시 본 발명의 실시예에 따른 휴대단말기는 맵 상에서 표시영역이 설정되면, 상기 설정된 영역 내에 위치되는 콘텐트들을 선택하고 선택된 콘텐츠들을 고도를 고려하여 맵 표시영역에 표시한다. 또한 본 발명의 실시예에서는 콘텐츠 표시시 현재의 단말기 위치, 단말기가 향하고 있는 방위, 카메라의 화각, 단말기의 기울기 등을 고려하여 표시영역을 설정하고, 설정된 표시 영역 내에 위치되는 콘텐츠들을 선택하여 카메라로 촬영되는 화면의 해당 위치에 표시한다.
본 발명의 실시예에 따른 휴대단말기의 콘텐츠 표시장치가, 단말기의 위도, 경도 및 고도의 3차원 위치정보를 감지하는 위치감지부를 구비하는 감지부와, 콘텐츠를 저장하는 콘텐츠저장부와, 생성되는 콘텐츠를 상기 위치정보와 함께 상기 콘텐츠저장부에 저장하며, 콘텐츠표시시 콘텐츠 표시영역을 설정하고 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원 적으로 표시되도록 제어하는 제어부와, 상기 제어부의 제어에 설정 영역의 대응되는 위치에 콘텐츠를 표시하는 표시부로 구성된 것을 특징으로 한다.
또한 본 발명의 실시예에 따라 3차원 맵을 이용하여 휴대단말기의 콘텐츠를 표시장치가, 단말기의 위도, 경도 및 고도의 3차원 위치정보를 감지하는 위치감지부와, 콘텐츠를 저장하는 콘텐츠저장부와, 3차원 맵을 저장하는 맵저장부와, 콘텐츠 생성시 상기 위치감지부로부터 상기 콘텐츠가 생성되는 위치정보를 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하며, 콘텐츠표시시 상기 맵저장부에서 선택되는 맵을 표시하고, 상기 맵에서 콘텐츠 표시영역을 설정하고 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원으로 표시되도록 제어하는 제어부와, 상기 제어부의 제어에 설정 영역의 대응되는 위치에 콘텐츠를 표시하는 표시부로 구성된 것을 특징으로 한다.
또한 본 발명의 실시예에 따라 카메라를 이용하여 휴대단말기의 콘텐츠를 표시하는 장치가, 카메라와, 콘텐츠 생성 및 단말기가 위치되는 위도, 경보 및 고도의 3차원정보를 감지하는 위치감지부와, 카메라 방위를 감지하는 방위감지부와, 카메라의 화각을 감지하는 화각감지부와, 단말기의 기울기 각도를 검출하는 각도검출부를 구비하는 감지부와, 콘텐츠를 저장하는 콘텐츠저장부와, 콘텐츠 생성시 상기 위치감지부로부터 상기 콘텐츠가 생성되는 위치정보를 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하며, 콘텐츠표시시 상기 단말기의 위치, 방위, 화각 및 단말 기울기 각도 정보들을 분석하여 상기 카메라의 촬영 영상의 콘텐츠 표시영역을 설정하고 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원 적으로 표시되도록 제어하는 제어부와, 상기 제어부의 제어에 설정 영역의 대응되는 위치에 콘텐츠를 표시하는 표시부로 구성된 것을 특징으로 한다.
그리고 본 발명의 실시예에 따른 휴대단말기의 콘텐츠 표시방법이, 콘텐츠 생성시 위치감지부로부터 상기 콘텐츠가 생성되는 위도, 경도 및 고도의 3차원 위치정보를 감지하여 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하는 과정과, 콘텐츠표시시 콘텐츠의 표시영역을 설정하고 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 선택하며, 상기 표시영역의 대응되는 위치에 상기 선택된 콘텐츠를 3차원으로 표시하는 과정으로 이루어짐을 특징으로 한다.
또한 본 발명의 실시예에 따라 휴대단말기의 콘텐츠를 3차원 맵을 이용하여 표시하는 방법이, 콘텐츠 생성시 위치감지부로부터 상기 콘텐츠가 생성되는 위도, 경도 및 고도의 3차원 위치정보를 감지하여 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하는 과정과, 콘텐츠 표시모드시 3차원 맵을 저장하는 맵저장부에서 선택되는 맵을 표시하고, 상기 맵에서 콘텐츠 표시영역을 설정하고 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원으로 표시하는 과정으로 이루어짐을 특징으로 한다.
또한 본 발명의 실시예에 따라 휴대단말기에서 콘텐츠를 AR표시모드로 표시하는 방법이, 콘텐츠 생성시 위치감지부로부터 상기 콘텐츠가 생성되는 위도, 경도 및 고도의 3차원 위치정보를 감지하여 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하는 과정과, 콘텐츠표시시 카메라를 구동하고, 단말기의 위치, 방위, 화각 및 단말 기울기 각도 정보들을 분석하여 상기 카메라의 촬영 영상의 콘텐츠 표시영역을 설정하고 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원 적으로 표시하는 과정으로 이루어짐을 특징으로 한다.
본 발명은 휴대단말기에서 콘텐츠(contents, item)를 생성할 때 콘텐츠의 위치정보를 함께 생성하여 저장하고, 콘텐츠를 표시할 때 위치정보를 고려하여 콘텐츠가 생성된 위치를 다양한 방법으로 표현할 수 있는 이점이 있다. 본 발명은 콘텐츠 생성시 단말에 탑재되어 있는 다양한 센서의 조합으로 contents가 생성되는 위치 정보를 저장하고, 해당 콘텐츠를 표현할 때 다양한 센서들 또는 지도와 해당하는 콘텐츠와 함께 저장된 위치 정보와 조합하여 다양한 형태로 콘텐츠를 3차원의 맵 또는 카메라에서 촬영되는 영상에 콘텐츠를 입체적으로 표현할 수 있다.
도 1은 본 발명의 실시예에 따른 휴대단말기의 구성을 도시하는 도면
도 2는 휴대단말기에서 본 발명의 실시예에 따라 콘텐츠를 생성하는 구성을 도시하는 도면
도 3은 본 발명의 실시예에 따라 휴대단말기에서 생성되는 콘텐츠의 위치 정보를 획득하는 방법을 설명하기 위한 도면
도 4는 휴대단말기에서 본 발명의 실시예에 따라 위치정보를 구비하는 콘텐츠를 맵을 통해 표시하는 구성을 도시하는 도면
도 5a는 3D 맵 및 3D 맵에 위치정보를 가지는 콘텐츠가 표시되는 예를 도시하는 도면이며, 도 5b는 동일한 위치정보를 가지는 콘텐츠들을 표시하는 예를 도시하는 도면
도 6은 휴대단말기에서 본 발명의 실시예에 따라 위치정보를 구비하는 콘텐츠를 AR 표시모드로 표시하는 구성을 도시하는 도면
도 7a - 도 7c는 휴대단말기에서 위치정보를 가지는 콘텐츠를 AR 표시 기능으로 표시하는 예를 도시하는 도면
도 8은 본 발명의 실시예에 따라 위치정보를 가지는 콘텐츠를 생성하고, 이를 표시하는 방법을 도시하는 흐름도
도 9는 휴대단말기에서 본 발명의 실시예에 따라 위치정보를 가지는 콘텐츠를 표시하는 절차를 설명하기 위한 흐름도
도 10a는 본 발명의 실시예에 따른 콘텐츠의 종류를 설명하기 위한 도면이며, 도 10b는 도 10a와 같은 콘텐츠의 생성시의 메모 정보를 표시하는 예를 도시하는 도면
이하, 본 발명의 바람직한 실시 예들의 상세한 설명이 첨부된 도면을 참조하여 상세히 설명한다. 도면들 중 동일한 구성들은 가능한 한 어느 곳에서든지 동일한 부호들을 나타내고 있음을 유의하여야 한다.
본 발명은 휴대단말기에서 콘텐츠 생성시, 콘텐츠가 생성되는 위치정보(위도, 경도 및/또는 고도 정보 등)를 생성하여 콘텐츠와 함께 저장한다. 이때 생성되는 콘텐츠들은 카메라에서 촬영되는 동영상 및/또는 이미지, 사용자에 의해 작성되는 정보(memo, note 등), 음성 정보(voice record 등), 다운로드 등에 획득되는 정보 등이 될 수 있다.
그리고 상기와 같이 생성되는 콘텐츠들을 표시할 때, 맵 또는 AR(Augmented Reality) 기능으로 이용하여 표현할 수 있다. 전자의 경우, 휴대단말기는 표시되는 맵 상에서 사용자에 의해 표시영역이 설정되면, 저장하고 있는 콘텐츠들의 위치정보를 분석하여 설정된 영역 내에 위치되는 콘텐트들을 선택하고, 선택된 콘텐츠들을 고도를 고려하여 표시영역 내의 맵에 표시한다. 여기서 상기 맵은 3D 맵이 될 수 있으며, 그 종류는 street view, 인공위성 view, 3D view 등이 될 수 있다. 또한 후자의 경우, 본 발명의 실시예에서는 현재의 단말기 위치, 단말기가 향하고 있는 방위, 카메라의 화각, 단말기의 기울기 등을 고려하여 콘텐츠가 표시되어야 할 표시영역을 설정하고, 저장하고 있는 콘텐들의 위치정보를 분석하여 설정된 표시 영역 내에 위치되는 콘텐츠들을 선택한 후, 상기 선택된 콘텐츠들을 카메라로 촬영되는 화면의 해당 위치에 표시한다. 여기서 상기 단말기 위치, 단말기가 향하고 있는 방위 및 단말기의 기울기 등은 휴대단말기가 구비하고 있는 센서들을 이용하여 구할 수 있다.
따라서 본 발명의 실시예에 따른 휴대단말기는 콘텐츠(Camera, Note, memo, voice record 등)를 생성할 있는 어플리케이션들과, 상기 콘텐츠들의 생성 위치 정보를 발생하기 위한 감지부(위도, 경도, 고도 등의 감지부)와, 상기 콘텐츠들을 표시하기 위한 표시영역을 결정하기 위한 정보들을 생성하는 감지부(기울기, 위치, 방위 등) 및/또는 맵 등을 구비한다.
이하의 설명에서 3차원 위치정보라는 용어는 위도, 경도 및 고도 정보를 의미하며, 3차원 표시라는 용어는 표시영역에 콘텐츠가 생성된 위치를 표시할 때 위도, 경도 및 고도 정보를 고려하여 표시하는 것을 의미하는 것으로 설명될 것이다. 또한 표시영역이라는 용어는 3차원 표시모드에서 사용자에 의해 설정어 표시부에 표시되는 3차원 맵을 의미하며, 또한 AR 표시모드시 카메라에서 촬영되어 표시부에 표시되는 이미지를 의미한다. 그리고 상기 AR 표시라는 용어는 3차원 위치정보를 가지는 콘텐츠를 표시할 때 카메라로부터 촬영되는 이미지에 콘텐츠를 3차원으로 표시하는 의미로 사용될 것이다.
도 1은 본 발명의 실시예에 따른 휴대단말기의 구성을 도시하는 도면이다.
상기 도 1을 참조하면, 감지부130은 본 발명의 실시예에 따라 콘텐츠가 생성되는 위치정보들 및 콘텐츠 표현시 표시영역을 설정하기 위한 정보들을 생성하는 기능을 수행한다. GPS(Global Positioning system) 수신부131은 단말기의 위치 정보를 발생한다. 여기서 상기 위치정보는 위도 및 경도 정보가 될 수 있다. 고도센서(height sensor)133은 단말기가 위치된 높이(고도) 정보를 발생한다. 상기 고도센서133은 기압을 측정하는 압력센서, 위성신호(및 압력)을 이용하는 센서, 레이더등을 이용하는 방법들을 사용할 수 있다. 여기서 상기 GPS수신부130이 단말기의 고도를 감지할 수 있는 경우, 상기 고도센서133은 생략될 수 있다. 방위센서(direction sensor)135는 단말기가 위치되는 방향을 감지한다. 상기 방위센서135는 지자기 센서(magnetic sensor; compass) 및/또는 자이로센서(gyroscope) 등으로 구현할 수 있다. 각도검출센서137은 단말기의 기울어진 각도 및 움직임(회전) 등을 감지한다. 여기서 상기 각도검출이라는 용어는 사용자가 단말기를 파지한 상태에서 지표의 수평면과 단말기가 이루는 각도 및 단말기의 움직임을 포함하는 용어로 사용될 것이다. 상기 기울기 센서는 가속도센서(accelerometer) 및/또는 자이로센서 등으로 구현할 수 있다.
통신부120은 휴대단말기와 각각 대응되는 통신망을 무선 연결하는 기능을 수행한다. 여기서 상기 통신망은 기지국 통신망 또는 인터넷 통신망 등이 될 수 있다. 상기 통신부120은 송신신호를 RF 대역으로 상승시키는 변환기(frequency up converter)와 전력증폭기 등으로 구성되는 송신부와, RF 수신호를 저잡음 증폭하는 증폭기와 RF신호를 기저대역으로 하강 변환하는 변환기(frequency down converter) 등을 구비할 수 있다. 또한 상기 통신부 120은 상기 송신신호를 변조하여 송신부에 전달하는 변조부 및 상기 수신부에서 출력되는 신호를 복조하는 복조부를 구비할 수 있다. 여기서 상기 변복조부는 통신 방식에 따라 WCDMA, CDMA 등의 3G, GSM 또는 LTE 방식의 4G 변복조부가 될 수 있으며, 또한 상기 변복조부는 WiFi, Wibro, Wimax 등의 변복조부가 될 수 있다.
카메라140은 외부 영상을 촬영하는 기능을 수행한다.
표시부150은 상기 제어부100의 제어하에 표시 데이터를 표시하는 기능을 수행한다. 입력부155는 휴대단말기의 동작을 제어하기 위한 명령 및 데이터를 입력하는 기능을 수행한다. 여기서 상기 입력부155 및 표시부150은 일체화된 터치스크린(Touch Screen Panel)이 될 수 있다.
맵저장부115는 본 발명의 실시예에 따라 생성된 콘텐츠를 표현하기 위한 지도 데이터들을 저장한다. 맵저장부115에 저장되는 지도 데이터는 3D 형태의 street view, 인공위성 view, 3D view 들이 될 수 있다.
제어부100은 휴대단말기의 전반적인 동작을 제어한다. 또한 상기 제어부100은 본 발명의 실시예에 따라 콘텐츠를 생성 및 저장하고, 저장된 콘텐츠를 표시하는 기능을 수행한다.
메모리110은 휴대단말기의 동작 프로그램 및 본 발명의 실시예에 따른 프로그램들을 저장하는 프로그램 메모리와, 인스톨 데이터 및 프로그램 수행 중에 발생되는 데이터를 저장하는 데이터 메모리를 구비할 수 있다. 상기 메모리110은 상기 제어부100에서 생성되는 본 발명의 실시예에 따라 콘텐츠가 생성된 위치정보와 함께 해당하는 콘텐츠를 저장하는 콘텐츠 저장부를 구비한다.
상기와 같은 휴대단말기에서, 상기 제어부100은 콘텐츠 생성시, 상기 GPS수신부131 및 고도센서133을 통해 콘텐츠가 생성되는 위치정보(위도, 경도 및/또는 고도 정보 등)를 생성하며, 상기 위치정보와 함께 콘텐츠를 상기 메모리110의 콘텐츠 저장부에 저장되도록 제어한다. 여기서 상기 콘텐츠는 상기 카메라140에서 촬영되는 동영상 및 정지영상 이미지와, 상기 통신부120을 통해 다운로드되는 멀티미디어 정보들과, 상기 입력부155를 통해 입력되는 메모 및 노트 정보들과, 도시하지 않은 마이크 등으로 입력되는 녹음 정보 등이 될 수 있다. 이때 상기 콘텐츠 저장부에 저장되는 콘텐츠 정보에는 해당 콘텐츠의 섬네일 영상 또는 아이콘도 함께 저장될 수 있다.
그리고 상기 제어부100은 상기 저장된 콘텐츠들을 표시할 때, 맵 또는 AR(Augmented Reality) 기능으로 표현되도록 제어한다. 이때 상기 콘텐츠는 맵 또는 AR로 표현되는 콘텐츠의 해당 위치에 섬네일 이미지 또는 아이콘으로 표현될 수 있다.
먼저 상기 맵을 이용하는 경우, 상기 제어부100은 맵저장부115에 선택된 맵데이타를 상기 표시부150에 표시하며, 상기 표시되는 맵 상에서 사용자에 의해 표시영역이 설정되면, 상기 메모리110의 콘텐츠저장부에 저장하고 있는 콘텐츠들의 위치정보를 분석하여 설정된 영역 내에 위치되는 콘텐츠들을 선택하고, 선택된 콘텐츠들을 고도를 고려하여 표시영역 내의 맵에 표시한다.
또한 후자의 경우, 상기 제어부100은 GPS수신부131 (및/또는 고도센서133)을 통해 현재의 단말기 위치를 감지하고, 상기 방위센서135를 통해 단말기가 향하고 있는 방향(즉, 카메라140의 렌즈가 향하고 있는 방향)의 방위(North, East, West, South direction)를 감지하며, 카메라140의 설정된 줌 비율(zoom ratio)로부터 카메라140으로 촬영되는 영상의 화각을 결정하고, 각도검출센서137을 통해 단말기의 기울어진 각도를 감지한 후, 상기 감지되는 단말기의 위치, 단말기의 방위, 카메라140의 화각 및 단말기의 기울어진 각도등을 고려하여 콘텐츠를 표시할 표시영역을 결정한다. 이후 상기 제어부100은 상기 메모리110의 콘텐츠 저장부에 저장된 콘텐츠들의 위치정보를 분석하여 상기 설정된 표시영역 내에 위치되는 콘텐츠들을 선택하고, 상기 선택된 콘텐츠들을 상기 표시부150에 표시하도록 제어한다. 이때 상기 표시부150은 상기 카메라140에서 촬영되는 영상이 표시되는 상태이며, 따라서 상기 선택된 콘텐츠들은 표시부150 상에서 표시되는 영상의 해당 위치에 표시된다.
상기와 같이 맵 상에 표시되는 콘텐츠 또는 AR로 표현되는 영상에 표시되는 콘텐츠는 섬네일 이미지 또는 아이콘 형태로 표시될 수 있다. 그리고 해당 위치에 복수의 콘텐츠들이 존재하는 경우, 상기 제어부100은 이를 섬네일 이미지 및/또는 아이콘들을 중첩시켜 표시할 수 있으며, 또한 콘텐츠의 수를 표시할 수 있다. 그리고 상기 섬네일 이미지 및 아이콘으로 표현되는 콘텐츠를 선택하는 경우, 상기 제어부100은 해당 콘텐츠를 선택하여 표시부140에 표시할 수 있다.
먼저 본 발명의 실시예에 따른 콘텐츠 생성 및 표시 방법을 구체적으로 살펴본다. 이하의 설명에서는 상기 콘텐츠가 사진 이미지인 경우를 가정하여 설명하기로 한다.
도 2는 휴대단말기에서 본 발명의 실시예에 따라 콘텐츠를 생성하는 구성을 도시하는 도면이다.
상기 도 2를 참조하면, 휴대단말기의 사용자는 휴대단말기를 통해 다양한 종류의 콘텐츠를 생성할 수 있다. 여기서 콘텐츠는 카메라140으로부터 촬영되는 사진 이미지 및 동영상, 사용자가 입력부155를 통해 작성하는 메모 및 스케쥴링 정보, 도시하지 않은 오디오 처리부를 통해 생성하는 오디오 녹음 데이터, 통신부120을 통해 다운로딩하는 멀티미디어 데이터(영화, 문서 데이터, 음악, 이들이 통합된 정보 등), 사용자에 의해 생성되는 비디오, 오디오, 이미지 및/또는 문서 데이터 등이 포함한 정보 등이 될 수 있다. 콘텐츠 생성부210은 본 발명의 실시예에 따라 3D 화면으로 표시하기 위한 상기와 같은 콘텐츠를 생성하며, 따라서 상기 콘텐트 생성부210은 카메라140, 통신부120 및 입력부155를 포함할 수 있으며, 이들로부터 발생되는 콘텐츠를 저장할 수 있는 형태로 부호화하며, 또한 복수의 콘텐츠들인 경우 이들을 결합하는 기능을 수행할 수 있다. 사용자는 휴대단말기의 설정 모드에서 3D 화면으로 표시하기 위한 콘텐츠들을 설정할 수 있으며, 또한 제조시 설정할 수도 있다.
여기서 상기 콘텐츠가 사진 이미지인 경우, 상기 카메라140으로부터 촬영되는 사진 이미지는 표시부150을 통해 표시된다. 이때 사용자로부터 저장요구가 발생되면, 콘텐츠 생성부210은 상기 촬영된 사진 이미지를 영상처리(스케일링, 압축 변환 등)한다. 여기서 상기 콘텐츠 생성부210은 카메라140을 포함할 수 있다. 그리고 위치감지부220은 현재 사용자가 사진을 촬영한 위치 정보를 수신하여 콘텐츠의 위치정보를 생성한다. 여기서 상기 GPS수신부131은 위도, 경도 및 고도를 모두 감지할 수 있으며, 또한 위도 및 경도만을 감지할 수 있다. 여기서 상기 GPS수신부131은 위도 및 경도의 평면 위치 정보만을 감지하는 것으로 가정한다. 이런 경우, 상기 GPS수신부131이 사용자가 위치한 평면좌표(즉, 위도 및 경도)를 감지하고, 고도센서133이 사용자가 위치한 고도를 감지하는 경우, 상기 위치감지부220은 상기 센서131 및 133으로부터 콘텐츠가 생성되는 위치(위도, 경도 및 고도)를 감지한다. 여기서 상기 위치감지부220은 상기 GPS수신부131 및/또는 고도센서133을 포함할 수 있다.
그러면 상기 콘텐츠처리부230은 상기 생성된 콘텐츠 및 상기 콘텐츠의 위치 정보를 콘텐츠 저장부240에 저장한다. 여기서 상기 콘텐츠 저장부240은 상기 메모리110에 위치되며, 저장되는 콘텐츠 및 정보는 콘텐츠의 이름, 콘텐츠 생성시간, 위치정보(위도, 경도, 고도), 콘텐츠 등이 될 수 있다. 또한 상기 콘텐츠처리부230은 입력부155를 통해 입력되는 콘텐츠의 간단한 메모 정보를 상기 콘텐츠에 부가할 수 있다. 이런 경우 상기 콘텐츠 저장부240에 저장되는 콘텐츠 정보는 하기 <표 1>과 같은 구조를 가질 수 있다.
콘텐츠 이름
콘텐츠 생성 시간
(년,월,일,시간 등)
위치정보
위도(X)
경도(Y)
높이(H)
메모
콘텐츠
(사진, 동영상, 문서, 음성 녹음 등)
도 3은 본 발명의 실시예에 따라 휴대단말기에서 생성되는 콘텐츠의 위치 정보를 획득하는 방법을 설명하기 위한 도면이다.
상기 도 3을 참조하면, 본 발명의 실시예에서는 생성되는 콘텐츠의 위치정보를 획득할 때, 위도(X좌표) 및 경도(Y좌표) 이외에 고도(높이 H)정보를 추가한다. 예를들어 사용자가 카메라140을 이용하여 사진을 촬영할 때, 사용자는 도로, 건물 위, 지하 상가 등 높이가 다양한 장소가 될 수 있다. 본 발명의 실시예에서는 표시모드에서 해당 콘텐츠의 콘텐츠가 생성된 위치 및 높이를 함께 표시한다. 이를 위하여 도 3에 도시된 바와 같이 사용자가 311 - 314와 같은 위치에서 사진을 찍었다고 가정하면, 위치감지부220은 생성된 콘텐츠의 위도 및 경도와 함께 높이 정보도 함께 생성하며, 콘텐츠처리부210은 콘텐츠생성부210에서 생성된 콘텐츠에 상기 위치감지부220에서 생성되는 위치정보를 부가시켜 콘텐츠저장부240에 저장한다. 그리고 상기 콘텐츠저장부240에 저장되는 콘텐츠는 콘텐츠 표시시 해당 콘텐츠의 위치정보에 따라 3차원 적으로 표시될 수 있다.
상기 콘텐츠저장부240에 저장된 콘텐츠는 콘텐츠가 생성된 위치 정보에 따라 3차원 적으로 표시된다. 즉, 상기 콘텐츠는 3차원 지도 상에 표시될 수 있으며, 또한 사용자가 선택하는 3차원 화면에서 표시될 수 있다. 본 발명의 실시예에서 상기 콘텐트 표시모드는 맵 표시 모드(map mode) 및 AR 표시 모드((Augmented Reality mode)를 구비할 수 있다. 여기서 상기 맵 표시모드는 3차원 맵을 이용하여 표시할 수 있으며, 상기 AR 모드는 카메라140을 이용하여 수행할 수 있다.
먼저 상기 맵 표시모드의 동작을 살펴본다.
도 4는 휴대단말기에서 본 발명의 실시예에 따라 위치정보를 구비하는 콘텐츠를 맵을 통해 표시하는 구성을 도시하는 도면이다. 도 5a는 3D 맵 및 3D 맵에 위치정보를 가지는 콘텐츠가 표시되는 예를 도시하는 도면이며, 도 5b는 동일한 위치정보를 가지는 콘텐츠들을 표시하는 예를 도시하는 도면이다.
상기 도 4 - 5b를 참조하면, 맵을 통해 위치정보를 가지는 콘텐츠를 표시하고자 하는 경우 사용자는 입력부155를 통해 맵 표시를 요구하며, 제어부100은 이를 감지하고 사용자가 요구한 맵을 맵저장부115에 억세스하여 표시부150을 통해 표시한다. 이때 상기 3차원 맵은 street view, 인공위성 view, 3D view 등이 될 수 있다. 또한 상기 맵저장부115에 저장되는 맵은 통신부120을 통해 다운로드될 수 있다. 또한 상기 맵저장부115는 외장 메모리로써, 외부에서 맵 데이터를 저장하고, 맵이 저장된 메모리를 휴대단말기에 연결하여 사용할 수 도 있다. 그러면 사용자는 표시되는 맵에서 콘텐츠에서 콘텐츠를 표시하기 위한 영역을 선택한다. 그러면 상기 제어부100은 사용자에 의해 선택된 맵 영역에 위치되는 콘텐츠들을 선택하여 맵 상에 3차원으로 표시한다.
표시영역결정부410은 위치정보를 가지는 콘텐츠를 표시하기 위한 맵이 선택되면, 맵저장부155로부터 해당하는 선택된 맵을 도 5a와 같이 표시한다. 즉, 상기 표시영역결정부410은 사용자에 의해 설정된 맵 영역을 선택하여 표시부150에 표시한다. 그리고 상기 설정된 표시영역은 맵 데이터로써, 위도, 경도 및 고도가 표시되는 3차원 맵이다. 상기와 같이 표시영역이 설정되면 도 5a와 같은 3차원 맵으로 표시되며, 콘텐츠선택부420은 상기 콘텐츠저장부240으로부터 상기 도 5a와 같은 표시영역에 표시될 콘텐츠들을 결정한다. 이때 상기 콘텐츠저장부240에 저장된 콘텐츠들은 상기 <표 1>과 같이 위도, 경도 및 고도의 위치정보들을 가진다. 그리고 상기 콘텐츠선택부420은 상기 결정된 표시영역 내의 내에 위치되는 위도 및 경도 정보를 가지는 콘텐츠들을 선택한다. 그러면 표시제어부430은 맵의 표시영역에 위치되는 콘텐츠들을 섬네일 이미지(thumb-nail image)로 표시하며, 이때 콘텐츠의 고도 정보를 이용하여 도 상기 도 5a와 같이 입체적으로 표시한다. 여기서 상기 섬네일 이미지는 콘텐츠의 종류에 따라 각각 대응되는 이미지로 표시될 수 있다. 즉, 사진이나 동영상인 경우에는 섬네일 사진 이미지나 동영상이 될 수 있으며, 메시지 등과 같은 문자 콘텐츠인 경우에는 해당 콘텐츠의 심볼 아이콘 이미지가 될 수 있다.
상기 도 5a에서 참조번호 511-516은 상기 <표 1>과 같은 구조를 가지는 콘텐츠가 될 수 있으며, 표시되는 위치는 해당 콘텐츠가 생성된 위치가 된다. 이때 상기 콘텐츠들은 위도 및 경도 이외에 높이 정보를 가지므로, 상기 표시제어부430은 각 콘텐츠의 위도 및 경도 위치정보에 의해 맵 상에서 평면 위치를 결정하고, 각 콘텐츠의 높이 정보에 의해 해당 콘텐츠의 표시 높이 결정하여 표시부150에 표시한다. 따라서 최종적으로 표시되는 콘텐츠는 도 5a와 같이 콘텐츠의 생성 위치를 3차원으로 표시할 수 있게 된다.
또한 상기 콘텐츠는 동일한 위치에서 여러개가 생성될 수 있다. 이런 경우, 상기 표시제어부430은 해당 위치에서 복수의 콘텐츠가 생성되었음을 표시할 수 있다. 본 발명의 실시예에서 상기 표시제어부430은 도 5b의 520과 같이 복수의 콘텐츠가 있음을 표시할 수 있다. 상기 표시제어부430은 상기 콘텐츠의 섬네일 이미지들이 겹쳐지는 형태로 표시하거나 콘텐츠의 수를 숫자로 표시할 수 있으며, 또한 상기와 같은 두 가지 형태를 조합하여 520과 같이 표시할 수 있다. 그리고 상기 520과 같이 콘텐츠를 표시하는 상태에서 섬네일 이미지를 드래그 등의 액션을 취하면, 상기 표시제어부430은 525와 같이 표시 형태를 변경할 수도 있다.
또한 상기 도 5a와 같이 콘텐츠들이 생성된 위치를 3차원 맵으로 표시하는 상태에서, 사용자가 특정 콘텐츠를 터치하면 해당 콘텐츠를 정보(예를들면 메모 등)를 표시하며, 선택(예를들면 double touch)하면, 상기 표시제어부430은 이를 감지하고 해당 콘텐츠를 표시부150에 표시한다.
두 번째로 상기 AR 표시모드의 동작을 살펴본다.
도 6은 휴대단말기에서 본 발명의 실시예에 따라 위치정보를 구비하는 콘텐츠를 AR 표시모드로 표시하는 구성을 도시하는 도면이다. 도 7a - 도 7c는 휴대단말기에서 위치정보를 가지는 콘텐츠를 AR 표시 기능으로 표시하는 예를 도시하는 도면이다.
상기 도 6 - 도 7c를 참조하면, AR 기능으로 위치정보를 가지는 콘텐츠를 표시하고자 하는 경우 사용자는 카메라140을 구동하며, 상기 제어부110은 상기 카메라140으로부터 촬영되는 영상을 표시부150에 표시한다. 그리고 상기 제어부100은 상기 카메라140으로 촬영되는 이미지의 위치에서 생성된 콘텐츠들을 3차원으로 표시한다. 이를 위하여, 상기 제어부100은 현재 사용자의 위도, 경도 및 고도에 대한 위치 정보, 단말기 향하고 있는 방위(즉, 카메라140의 촬영 방향), 단말기의 기울어진 각도, 카메라140에서 촬영되는 이미지의 화각 등을 감지할 수 있어야 하며, 또한 사용자 또는 제조사에 의해 설정된 표시 영역의 거리 정보 등을 필요로 한다.
사용자가 AR 표시모드를 선택하고 카메라140을 구동하면, 상기 제어부100은 상기 카메라140으로부터 촬영되는 영상을 상기 표시부150에 표시하고 현재 단말기의 위치정보 감지 및 콘텐츠를 표시할 영역을 설정한다. 먼저 위치감지부220은 현재 단말기가 위치된 위도, 경도 및 높이에 대한 위치정보를 감지한다. 상기 위치감지부220은 상기한 바와 같이 GPS수신부131 및/또는 고도센서133을 구비할 수 있으며, 상기 GPS수신부131 및 고도센서133의 출력으로부터 단말기가 위치되는 위도, 경도 및 고도 정보를 감지한다.
방위 감지부610은 현재 카메라140이 향하고 있는 방향을 감지한다. 여기서 상기 방위감지부610은 상기 방위센서135를 구비할 수 있으며, 상기 방위센서135는 지자기 센서 및/또는 자이로센서 등이 될 수 있다. 상기 방위감지부630에서 감지되는 방위 정보는 카메라140이 향하고 있는 전면 방향으로 N 극을 중심으로 하는 각도로 표현할 수 있다.
각도검출부630은 단말기의 기울기(즉, 지면과 이루는 단말기의 기울어진 각도)를 검출한다. 예를들면 사용자가 카메라140을 사용할 때, 피사체를 향해 카메라를 아래로 숙여 촬영하는 하이 앵글 샷(high-angle shot), 또는 위로 올려 촬영하는 로우 앵글 샷(low-angle shot) 등의 기법을 사용할 수 있다. 이런 경우, 상기 카메라140으로부터 촬영되는 이미지는 같은 위치에서 촬영하여도 다른 이미지로 표시된다. 따라서 콘텐츠 AR 표시모드시 단말기의 기울어진 각도를 검출하여 콘텐츠를 표시할 영역을 설정할 수 있도록 한다.
화각감지부630은 카메라140에서 촬영되는 이미지의 촬영 각도를 감지한다. 상기 화각(angle of view)는 카메라140으로 포착하는 영상의 시야 각으로써, 광각으로 촬영하는 경우 화각이 넓고 망원으로 촬영하는 화각이 좁다. 따라서 상기 카메라140의 화각에 따라 촬영되는 이미지가 달라지며, 따라서 콘텐츠를 표시하는 영역의 크기도 달라진다. 상기 카메라140의 광각에서 망원까지의 화각은 줌비율에 따라 결정될 수 있으며, 이는 상기 카메라140을 휴대단말기에 장착할 때 미리 설정되어야 하며, 상기 제어부100은 줌비율에 따라 상기 화각을 알 수 있다. 따라서 상기 화각감지부620은 상기 카메라140 구동시 사용자에 의해 설정되는 줌비율을 확인하며, 상기 확인된 줌비율에 따라 상기 카메라140의 화각을 감지할 수 있다.
표시영역 결정부640은 상기 위치감지부220에서 출력되는 단말기의 위치정보(위도, 경도 및 고도 정보), 방위감지부610에서 출력되는 단말기가 향하고 있는 방위, 화각감지부620에서 출력되는 카메라140의 화각 및 각도검출부630에서 출력되는 단말기의 기울어진 각도 정보등을 이용하여 콘텐츠를 표시할 영역을 도 7a - 도 7c의 참조번호 700과 같이 설정한다. 이때 상기 콘텐츠 저장부240에 저장된 콘텐츠들은 사용자가 가시권 내의 콘텐츠들 이외에 가시권 밖의 먼 위치에서 생성된 콘텐츠들도 저장하고 있다. 따라서 설정된 표시영역 내에서 표시될 수 있는 콘텐츠들을 결정하기 위하여 단말기로부터 일정 거리 이내의 콘텐츠들을 표시하도록 하는 것이 바람직하다. 따라서 상기 표시영역 결정부640은 현재의 단말기의 위치에서 일정 거리 이내의 콘텐츠들을 표시하도록 하기 위한 표시거리 정보를 구비할 수 있다. 여기서 상기 표시거리는 제조시 설정될 수 있으며, 단말기의 표시거리 설정모드에서 사용자에 의해 설정될 수도 있다. 따라서 상기 표시영역결정부640은 단말기의 위치정보(위도, 경도 및/또는 고도), 단말기가 향하고 있는 방위, 단말기의 기울어진 각도, 카메라140의 화각 및 설정된 표시거리를 이용하여 AR 기능으로 표시할 콘텐츠들의 표시 영역을 설정한다.
그러면 상기 콘텐츠선택부650은 상기 표시영역의 위도, 경도 및 고도의 위치 범위를 확인하고, 상기 콘텐츠저장부240에 저장된 콘텐츠의 위치정보를 분석하여 확인된 표시영역 내에 위치되는 콘텐츠를 선택한다. 이때 상기 콘텐츠저장부240에서 저장되는 콘텐츠는 표시영역 내에서 표시거리를 초과하는 콘텐츠들이 있을 수 있다. 상기 콘텐츠선택부650은 상기 표시영역 내에서 설정된 표시거리를 만족하는 위치정보(위도, 경도 및 고도)를 만족하는 콘텐츠들만을 선택한다. 그리고 표시제어부660은 상기 선택된 콘텐츠들의 위도 및 경도 위치에 상기 고도 정보를 부가하여 표시부140에 표시되도록 제어한다. 그러면 상기 표시부150에는 상기 카메라140으로 촬영되는 사진 이미지가 표시되며, 또한 상기 사진 이미지 상에서 콘텐츠가 생성된 위치에 해당 콘텐츠의 섬네일 이미지가 표시된다. 이때 상기 표시되는 콘텐츠는 단말기에서 상기 표시거리 사이의 표시영역 내에 위치되는 콘텐츠들이다. 여기서 상기 표시제어부660은 표시영역 내에서 가까운 위치된 콘텐츠들과 멀리 위치된 콘텐츠들을 구별하여 표시하기 위하여 표시되는 콘텐츠의 크기를 다르게 표시(가까운 콘텐츠는 크게 멀리 위치되는 콘텐츠는 상대적으로 작게)할 수 있으며, 또는 다른 색상으로 표시할 수 있다.
도 7a - 도 7c는 단말기의 기울어진 각도에 따라 표시영역이 변경되어 콘텐츠 섬네일 이미지가 표시되는 예를 도시하는 도면이다. 여기서 상기 도 7a - 도 7c는 단말기의 위치정보, 단말기의 방위정보, 카메라140의 화각 정보는 동일하며, 단말기의 기울어진 각도가 다른 상태를 가정하고 있다. 도 7a는 단말기를 건물을 촬영하는 이미지며, 도 7b는 상기 도 7a와 동일한 조건에서 단말기를 들어올려 로우앵글로 촬영하는 예를 도시하는 이미지이고, 도 7c는 상기 도 7a와 동일한 조건에서 단말기를 내려 하이앵글로 촬영하는 예를 도시하는 이미지이다. 이런 경우, 상기 화각영역설정부640은 상기 각도검출부630에서 검출되는 단말기의 기울기 각도에 따라 도 7a - 도 7c와 같이 서로 다른 콘텐츠 표시영역을 설정한다. 그러면 콘텐츠선택부650은 상기 콘텐츠저장부240 내에 저장된 콘텐츠들의 위치정보를 분석하여 상기 단말기와 설정된 표시거리 사이에서 상기 설정된 표시영역 내에 위치되는 콘텐츠들을 선택하고, 표시제어부660은 상기 선택된 콘텐츠들을 표시부150에 표시한다.
도 8은 본 발명의 실시예에 따라 위치정보를 가지는 콘텐츠를 생성하고, 이를 표시하는 방법을 도시하는 흐름도이다.
상기 도 8을 참조하면, 콘텐츠를 처리모드이면, 상기 제어부100은 811단계에서 이를 감지하고, 813단계에서 콘텐츠를 생성 및 이를 처리하며, 그 결과를 표시한다. 이때 상기 콘텐츠 처리모드는 콘텐츠를 생성하는 모드가 될 수 있으며, 상기 콘텐츠는 카메라140으로부터 촬영되는 사진 및 동영상, 입력부155를 통해 작성하는 메모, 문서 및 스케쥴링 정보, 도시하지 않은 오디오 처리부를 통해 생성하는 오디오 녹음 데이터, 통신부120을 통해 다운로딩하는 멀티미디어 데이터(영화, 문서 데이터, 음악, 이들이 통합된 정보 등), 사용자에 의해 생성되는 비디오, 오디오, 이미지 및/또는 문서 데이터 등이 포함한 정보 등이 될 수 있다. 휴대단말기의 설정 모드에서 3D 화면으로 표시하기 위한 콘텐츠들을 설정할 수 있으며, 또한 제조시 설정할 수도 있다.
이때 사용자로부터 저장요구가 발생되면, 상기 제어부100은 815단계에서 이를 감지하고, 817단계에서 GPS수신부131 및 고도센서133을 통해 콘텐츠가 생성된 위치정보를 생성한다. 여기서 상기 위치정보 위도, 경도 및 고도가 될 수 있다. 이때 상기 GPS수신부131이 위도, 경도 및 고도를 모두 감지할 수 있으면 상기 고도센서133은 생략될 수 있다. 여기서 상기 GPS수신부131은 위도 및 경도의 평면 위치 정보만을 감지하는 것으로 가정한다. 이런 경우, 상기 GPS수신부131이 사용자가 위치한 평면좌표(즉, 위도 및 경도)를 감지하고, 고도센서133이 사용자가 위치한 고도를 감지하는 경우, 상기 제어부100은 상기 GPS수신부 131 및 고도센서133으로부터 콘텐츠가 생성되는 위치(위도, 경도 및 고도)를 감지한다. 이후 상기 제어부100은 819단계에서 상기 생성된 콘텐츠 및 상기 콘텐츠의 위치 정보를 메모리110의 콘텐츠 저장부에 저장한다. 여기서 상기 콘텐츠 저장부은 상기 메모리110에 위치되며, 저장되는 콘텐츠 및 정보는 상기 <표 1>과 같은 구조를 가질 수 있다.
상기와 같이 메모리110의 콘텐츠저장부에 저장된 콘텐츠는 콘텐츠가 생성된 위치 정보에 따라 3차원 적으로 표시할 수 있다. 단말기의 사용자로부터 콘텐츠표시모드가 요구되면, 상기 제어부100은 821단계에서 이를 감지하고, 823단계에서 표시할 콘텐츠가 위치정보를 포함하는 콘텐츠인가 검사한다. 이때 위치정보가 포함된 콘텐츠의 표시이면, 상기 제어부100은 825단계로 진행하여 설정된 표시영역 내의 콘텐츠들을 선택하여 표시한다. 이때 상기 콘텐츠는 3차원 지도 상에 표시될 수 있으며, 또한 사용자가 선택하는 3차원 화면에서 표시될 수 있다. 본 발명의 실시예에서 상기 콘텐트 표시모드는 맵 표시 모드(map mode) 및 AR 표시 모드((Augmented Reality mode)를 구비할 수 있다. 여기서 상기 맵 표시모드는 3차원 맵을 이용하여 표시할 수 있으며, 상기 AR 모드는 카메라140을 이용하여 수행할 수 있다. 그러나 상기 823단계에서 위치정보가 포함되지 않은 콘텐츠이면, 상기 제어부100은 827단계로 진행하여 일반적인 콘텐츠 표시 절차를 수행한다.
상기 제어부100은 사용자가 콘텐츠 표시모드 요구시, 휴대단말기에서 표시할 수 있는 표시모드를 메뉴로 안내할 수 있다. 이런 경우, 본 발명의 실시예에서는 맵 표시모드 및 AR 표시모드 등이 메뉴로 설정되어 표시될 수 있다. 그리고 상기 맵표시모드가 선택되면, 상기 제어부100은 사용자가 선택 가능한 맵(3차원으로 표현 가능한 맵, 예를들면street view, 인공위성 view, 3D view 등)들을 메뉴로 표시하고, 사용자에 의해 선택된 맵을 선택하여 표시할 수 있다.
도 9는 휴대단말기에서 본 발명의 실시예에 따라 위치정보를 가지는 콘텐츠를 표시하는 절차를 설명하기 위한 흐름도로써, 상기 도 8의 825단계의 동작 절차가 될 수 있다.
먼저 상기 맵 표시모드의 동작을 살펴본다.
사용자가 콘텐츠 표시 모드에서 맵 표시모드를 선택하면, 상기 제어부100은 911단계에서 이를 감지하고, 913단계에서 사용자가 요구한 맵을 맵저장부115에 억세스하여 표시부150을 통해 표시한다. 이때 상기 맵은 street view, 인공위성 view, 3D view 등이 될 수 있으며, 상기 제어부100은 사용자에 의해 선택된 맵을 상기 표시부150에 표시한다. 또한 상기 맵저장부115에 저장되는 맵은 통신부120을 통해 다운로드될 수 있으며, 또한 맵을 저장하는 외장 메모리가 될 수 있다. 상기와 같이 맵이 표시되는 상태에서, 사용자는 입력부155를 통해 맵의 영역을 확장하거나 축소할 수 있다. 그리고 또한 상기와 같이 맵이 표시되는 상태에서, 사용자는 콘텐츠를 표시하기 위한 영역을 지정할 수 있다. 사용자가 콘텐츠를 표시하기 위한 영역을 맵 상에 지정하면, 상기 제어부100은 915단계에서 표시영역이 선택되었음을 감지하고, 917단계에서 콘텐츠 표시영역을 설정한다. 이때 상기 맵에 표시영역이 설정되면, 상기 제어부100은 상기 설정된 표시영역의 위치정보(위도 및 경도, 그리고 고도 정보)를 알 수 있다. 따라서 이후 상기 제어부100은 919단계에서 상기 표시영역의 위치정보를 확인하고, 상기 콘텐츠저장부에 저장된 콘텐츠들의 위치정보를 확인하며, 상기 표시영역 내에 속하는 콘텐츠들을 선택한다. 그리고 상기 제어부100은 921단계에서 상기 선택된 콘텐츠들을 고도정보를 고려하여 상기 맵의 설정된 표시영역에 표시한다. 즉, 상기 제어부100은 사용자에 의해 설정된 맵 영역에 위치되는 콘텐츠들을 선택하여 맵 상에 3차원으로 표시한다.
상기한 바와 같이 제어부100은 위치정보를 가지는 콘텐츠를 표시하기 위한 맵이 선택되면, 맵저장부155로부터 해당하는 선택된 맵을 표시하며, 여기서 상기 맵은 위도, 경도 및 고도가 표시되는 3차원 맵이다. 상기와 같이 표시영역이 설정되면, 상기 제어부100은 상기 메모리110의 콘텐츠저장부로부터 상기 설정된 표시영역에 표시될 콘텐츠의 위치정보를 분석한 후, 상기 맵의 표시영역 내의 내에 위치되는 위도 및 경도 정보를 가지는 콘텐츠들을 선택한다. 이후 상기 제어부100은 맵의 표시영역에 위치되는 콘텐츠들을 섬네일 이미지로 표시하며, 이때 콘텐츠의 고도 정보를 이용하여 도 상기 도 5a와 같이 위도, 경도 및 고도를 고려하여 3차원으로 표시한다. 또한 상기 도 5a와 같이 콘텐츠들이 생성된 위치를 3차원 맵으로 표시하는 상태에서, 사용자가 특정 콘텐츠를 터치하면 해당 콘텐츠를 정보(예를들면 메모 등)를 표시하며, 콘텐츠를 선택하면 상기 표시제어부430은 이를 감지하고 해당 콘텐츠를 표시부150에 표시한다.
두 번째로 상기 AR 표시모드의 동작을 살펴본다.
사용자가 AR 표시모드를 선택하고 카메라140을 구동하면, 상기 제어부100은 931단계에서 이를 감지하고, 933단계에서 상기 카메라140으로부터 촬영되는 영상을 상기 표시부150에 표시한다. 이후 상기 제어부100은 콘텐츠를 표시하기 위한 영역을 설정하기 위하여, 935단계에서 다음과 같은 파라미터들을 감지한다. 이를 위하여 먼저 상기 제어부100은 GPS수신부131 및/또는 고도센서133의 출력으로부터 단말기의 위치를 감지한다. 여기서 상기 단말기의 위치를 감지하는 이유는 현재 위치로부터 카메라가 향하는 방향에 위치되는 표시영역 사이에 위치되는 콘텐츠를 선택하기 위함이다. 두 번째로 상기 제어부100은 방위센서135를 통해 현재 카메라140이 향하고 있는 방향을 감지하며, 상기 방위센서135는 지자기 센서 및/또는 자이로센서 등이 될 수 있다. 여기서 상기 카메라가 향하는 방향을 감지하는 이유는 상기 카메라140으로부터 촬영되는 영상의 방향을 확인하기 위함이다. 즉, 본 발명의 실시예에 따른 AR 표시기능은 카메라140으로 촬영되는 영상에 콘텐츠를 표시할 수 있으며, 이를 위하여 방위센서135를 통해 카메라140로부터 촬영되는 방위를 결정할 수 있다. 세 번째로 상기 제어부100은 각도검출센서137의 출력으로부터 단말기의 기울기(즉, 지면과 이루는 단말기의 기울어진 각도)를 검출한다. 여기서 상기 카메라140의 기울기를 감지하는 이유는 카메라 앵글에 따라 표시영역의 방향이 다르게 설정되기 때문이다. 즉, 동일한 조건에서 카메라140의 앵글을 다르게 촬영하는 경우, 표시부150에 표시되는 화면은 동일한 위도 및 경도를 가질 수 있지만, 그 고도 정보는 다르게 된다. 이런 경우, 상기 카메라140으로부터 촬영되는 이미지는 같은 위치에서 촬영하여도 다른 이미지로 표시된다. 따라서 콘텐츠 AR 표시모드시 단말기의 기울어진 각도를 검출하여 콘텐츠를 표시할 영역을 설정할 수 있도록 한다. 네 번째로 상상기 제어부100은 카메라140에서 촬영되는 영상의 시야 각인 화각을 감지한다. 상기 카메라140의 광각에서 망원까지의 화각은 줌비율에 따라 결정될 수 있으며, 상기 제어부100은 줌비율에 따라 상기 화각을 알 수 있다. 따라서 상기 제어부100은 상기 카메라140 구동시 사용자에 의해 설정되는 줌비율을 확인하며, 상기 확인된 줌비율에 따라 상기 카메라140의 화각을 감지할 수 있다. 여기서 화각을 감지하는 이유는 상기 표시부150에 표시되는 표시영역의 크기(망원 화각 또는 광각 화각)를 확인하기 위함이다.
상기와 같이 콘텐츠 표시영역을 결정하기 위한 각 파라미터들을 감지한 후, 상기 제어부100은 937단계에서 상기 단말기의 위치정보(위도, 경도 및 고도 정보), 상기 단말기가 향하고 있는 방위, 상기 카메라140의 화각 및 상기 단말기의 기울어진 각도 정보 등을 이용하여 콘텐츠를 표시할 영역을 설정한다. 이때 상기 콘텐츠 저장부에 저장된 콘텐츠들은 사용자가 가시권 내의 콘텐츠들 이외에 가시권 밖의 먼 위치에서 생성된 콘텐츠들도 저장하고 있다. 따라서 상기 제어부100은 상기 카메라140에 표시되는 표시영역 내에서 단말기와 일정 거리 이내에 위치되는 콘텐츠들을 표시하는 것이 바람직하다. 이를 위하여 상기 제어부100은 현재의 단말기의 위치에서 일정 거리 이내의 콘텐츠들을 표시하도록 하기 위한 표시거리 정보를 구비할 수 있다. 따라서 상기 제어부100은 상기 단말기의 위치정보(위도, 경도 및/또는 고도), 단말기가 향하고 있는 방위, 단말기의 기울어진 각도, 카메라140의 화각 및 설정된 표시거리를 이용하여 AR 기능으로 표시할 콘텐츠들의 표시 영역을 설정한다.
이후 상기 제어부100은 939단계에서 상기 표시영역의 위도, 경도 및 고도의 위치 범위를 확인하고, 상기 메모리110의 콘텐츠저장부에 저장된 콘텐츠의 위치정보를 분석하여 상기 표시부150에 표시되는 표시영역 내에 위치되는 콘텐츠를 선택한다. 이때 상기 제어부100은 표시영역 내에서 설정된 표시거리를 만족하는 위치정보(위도, 경도 및 고도)를 만족하는 콘텐츠들만을 선택할 수 있으며, 941단계에서 상기 제어부100은 상기 선택된 콘텐츠들의 위도 및 경도 위치에 상기 고도 정보를 부가하여 표시부140에 도 7a - 도 7c와 같이 표시되도록 제어한다. 그러면 상기 표시부150에는 상기 카메라140으로 촬영되는 사진 이미지가 표시되며, 또한 상기 사진 이미지 상에서 콘텐츠가 생성된 위치에 해당 콘텐츠의 섬네일 이미지가 표시된다. 이때 상기 표시되는 콘텐츠는 단말기에서 상기 표시거리 사이의 표시영역 내에 위치되는 콘텐츠들이다. 여기서 상기 표시제어부660은 표시영역 내에서 가까운 위치된 콘텐츠들과 멀리 위치된 콘텐츠들을 구별하여 표시하기 위하여 표시되는 콘텐츠의 크기를 다르게 표시(가까운 콘텐츠는 크게 멀리 위치되는 콘텐츠는 상대적으로 작게)할 수 있으며, 또는 다른 색상으로 표시할 수 있다.
본 발명의 실시예에 따른 콘텐츠는 상기한 바와 같이 다양한 형태를 가질 수 있다. 도 10a는 본 발명의 실시예에 따른 콘텐츠의 종류를 설명하기 위한 도면이며, 도 10b는 도 10a와 같은 콘텐츠의 생성시의 메모 정보를 표시하는 예를 도시하고 있다.
상기 도 10a - 도 10b를 참조하면, 콘텐츠1011-1014는 표시영역 내에서 동시에 표시될 수 있는 위치들에서 각각 생성된 콘텐츠로써, 1011은 메모, 1012 및 1014는 사진, 1013은 음성 녹음 콘텐츠인 경우를 가정하고 있다. 이런 경우, 상기 콘텐츠 처리모드에서 콘텐츠를 생성하는 저장하는 경우, 상기 제어부100은 상기 <표 1>과 같은 구조로 콘텐츠를 생성하여 메모리110의 콘텐츠저장부에 저장한다. 이후 표시모드(맵 표시모드 또는 AR 표시모드)를 실행하면, 상기 제어부100은 콘텐츠 표시영역을 설정하고 도 10a와 같이 표시영역 내에 위치되는 콘텐츠들을 섬네일 이미지 또는 섬네일 아이콘으로 표시하다. 그리고 상기 도 10a와 같이 콘텐츠들을 3차원 이미지로 표시하는 상태에서 사용자가 특정 콘텐츠를 선택하면, 상기 제어부100은 해당 콘텐트를 생성한 위치 정보를 표시할 수 있다.
상기한 바와 같이 본 발명의 실시예는 콘텐츠 생성시 위도, 경도 및 고도의 위치정보를 감지하여 콘텐츠와 함께 저장하고, 콘텐츠 표시모드시 상기 위치정보를 이용하여 표시 영역에 해당 콘텐츠를 섬네일 이미지로 표시할 수 있다. 이때 표시 방법은 이미지를 촬영한 곳의 위치정보를 기반으로 갤러리(gallery)에서 위치정보를 함께 표기할 수 있는 viewer가 제공되는 경우, 이미지를 3D viewer처럼 보이는 gallery 표시가 가능하게 한다. 이때 상기 콘텐츠는 다양한 종류(all kinds of user make contents (Memo, Voice record, Video, Photo edit...etc))의 콘텐츠가 될 수 있다.
또한 본 발명의 실시예에서는 저장된 콘텐츠를 결합(aggregation)하여 카메라를 활성화 한 상태에서 콘텐츠가 만들어진 위치를 제공하는 경우, 단말기는 서비스 없이도 사용자에게 AR contents view를 제시할 수 있다. 이런 경우, 상기 단말기는 AR mode에서 특정 위치를 향해 단말의 카메라140을 이용하여 촬영하고, 상기 촬영한 사진들과 비디오, 저장된 메모 등을 현실공간의 위치에 매핑하여 표시할 수 있다.
또한 본 발명의 실시예에는 맵을 이용하여 3차원 viewer를 제공하는 경우, street view, 인공위성 view, 3D view에서 콘텐츠가 만들어진 위치에 아이템(item)이 위치(positioning)되어 있는 viewer 기능을 수행할 수 있다.
본 명세서와 도면에 개시 된 본 발명의 실시예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.

Claims (23)

  1. 휴대단말기의 콘텐츠 표시장치에 있어서,
    단말기의 위도, 경도 및 고도의 3차원 위치정보를 감지하는 위치감지부를 구비하는 감지부와,
    콘텐츠를 저장하는 콘텐츠저장부와,
    생성되는 콘텐츠를 상기 위치정보와 함께 상기 콘텐츠저장부에 저장하며, 콘텐츠 표시시 콘텐츠 표시영역을 설정하고, 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원으로 표시되도록 제어하는 제어부와,
    상기 제어부의 제어에 설정 영역의 대응되는 위치에 콘텐츠를 표시하는 표시부로 구성된 것을 특징으로 하는 장치.
  2. 제1항에 있어서, 상기 제어부가 상기 콘텐츠 생성시 상기 위치감지부로부터 상기 콘텐츠가 생성되는 3차원 위치정보를 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하는 것을 특징으로 하는 장치.
  3. 제2항에 있어서,
    3차원 맵을 저장하는 맵저장부를 더 구비하며,
    상기 제어부가 맵 표시모드시 상기 맵저장부에서 선택된 맵을 표시부에 표시하며, 사용자에 의해 지정되는 표시영역을 설정하는 표시영역결정부와,
    상기 콘텐츠저장부에 저장되는 콘텐츠들의 3차원 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 선택하는 콘텐츠 선택부와,
    상기 선택된 콘텐츠를 상기 표시부에 3차원으로 표시하는 표시제어부로 구성된 것을 특징으로 하는 장치.
  4. 제3항에 있어서,
    카메라를 더 구비하며,
    상기 감지부가 카메라의 촬영 방위를 감지하는 방위감지부와, 카메라의 화각을 감지하는 화각감지부와, 단말기의 기울기 각도를 검출하는 각도검출부를 더 구비하며,
    AR 표시모드시 상기 카메라를 구동하여 AR 표시모드를 수행하는 상기 제어부가,
    상기 감지부로부터 단말기의 위도, 경도 및 고도의 3차원 위치정보, 상기 카메라가 향하고 있는 방위, 상기 카메라의 화각 및 단말기의 기울기 각도를 분석하여 상기 카메라에서 촬영되는 표시영역을 결정하는 표시영역결정부와,
    상기 콘텐츠저장부에 저장되는 콘텐츠들의 3차원 위치정보를 분석하여 상기 표시영역 내에서 미리 설정된 표시거리 내에 위치되는 콘텐츠들을 선택하는 콘텐츠 선택부와,
    상기 선택된 콘텐츠를 상기 표시부에 3차원으로 표시하는 표시제어부로 구성된 것을 특징으로 하는 장치.
  5. 제4항에 있어서,
    상기 위치감지부는 위도 및 경도를 감지하는 GPS수신부와 고도를 감지하는 고도센서로 구성되며, 상기 방위감지부는 지자기센서이고, 상기 각도검출부는 가속도센서 및/또는 자이로센서인 것 특징으로하는 장치.
  6. 제5항에 있어서,
    기지국 및/또는 인터넷망과 연결되는 통신부와, 문자 데이타를 발생하는 입력부와, 오디오 데이터를 처리하는 오디오처리부를 더 구비하며,
    상기 콘텐츠는 카메라로부터 촬영되는 사진, 상기 통신부를 통해 다운로드되는 데이터, 입력부를 통해 작성되는 문자 정보, 오디오처리부를 통해 발생되는 오디오 데이터 등인 것을 특징으로 하는 장치.
  7. 휴대단말기의 콘텐츠 표시장치에 있어서,
    단말기의 위도, 경도 및 고도의 3차원 위치정보를 감지하는 위치감지부와,
    상기 3차원 위치정보를 포함하는 콘텐츠를 저장하는 콘텐츠저장부와,
    3차원 맵을 저장하는 맵저장부와,
    콘텐츠 생성시 상기 위치감지부로부터 상기 콘텐츠가 생성된 3차원 위치정보를 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하며, 콘텐츠 표시시 상기 맵저장부에서 선택되는 맵을 표시하며, 상기 맵에서 콘텐츠 표시영역을 설정하고 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원으로 표시되도록 제어하는 제어부와,
    상기 제어부의 제어에 설정 영역의 대응되는 위치에 콘텐츠를 3차원으로 표시하는 표시부로 구성된 것을 특징으로 하는 장치.
  8. 제7항에 있어서, 상기 제어부가,
    맵표시모드시 상기 맵저장부에서 선택된 맵을 표시부에 표시하며, 사용자에 의해 지정되는 표시영역을 설정하는 표시영역결정부와,
    상기 콘텐츠저장부에 저장되는 콘텐츠들의 3차원 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 선택하는 콘텐츠 선택부와,
    상기 선택된 콘텐츠를 상기 표시부에 3차원으로 표시하는 표시제어부로 구성된 것을 특징으로 하는 장치.
  9. 휴대단말기의 콘텐츠 표시장치에 있어서,
    카메라와,
    콘텐츠 생성 및 단말기가 위치되는 위도, 경보 및 고도의 3차원 위치정보를 감지하는 위치감지부와, 카메라 방위를 감지하는 방위감지부와, 카메라의 화각을 감지하는 화각감지부와, 단말기의 기울기 각도를 검출하는 각도검출부를 구비하는 감지부와,
    3차원 위치정보를 포함하는 콘텐츠를 저장하는 콘텐츠저장부와,
    콘텐츠 생성시 상기 위치감지부로부터 상기 콘텐츠가 생성되는 상기 3차원 위치정보를 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하며, 콘텐츠 표시시 상기 단말기의 3차원 위치, 방위, 화각 및 단말 기울기 각도 정보들을 분석하여 상기 카메라의 촬영되는 표시영역을 설정하고, 상기 저장된 콘텐츠의 3차원 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원으로 표시되도록 제어하는 제어부와,
    상기 제어부의 제어에 설정 영역의 대응되는 위치에 콘텐츠를 3창원으로 표시하는 표시부로 구성된 것을 특징으로 하는 장치.
  10. 제9항에 있어서, 상기 제어부가
    상기 카메라를 구동하고, 상기 감지부로부터 단말기의 위도, 경도 및 고도의 3차원 위치정보, 상기 카메라가 향하고 있는 방위, 상기 카메라의 화각 및 단말기의 기울기 각도를 분석하여 상기 카메라에서 촬영되는 표시영역을 결정하는 표시영역결정부와,
    상기 콘텐츠저장부에 저장되는 콘텐츠들의 3차원 위치정보를 분석하여 상기 표시영역 내에서 미리 설정된 표시거리 내에 위치되는 콘텐츠들을 선택하는 콘텐츠 선택부와,
    상기 선택된 콘텐츠를 상기 표시부에 3차원으로 표시하는 표시제어부로 구성된 것을 특징으로 하는 장치.
  11. 제10항에 있어서,
    상기 위치감지부는 위도 및 경도를 감지하는 GPS수신부와 고도를 감지하는 고도센서로 구성되며, 상기 방위감지부는 지자기센서이고, 상기 각도검출부는 가속도센서 및 자이로센서인 것 특징으로하는 장치.
  12. 제5항에 있어서,
    기지국 및/또는 인터넷망과 연결되는 통신부와, 키데이타를 발생하는 입력부와, 오디오 처리부를 더 구비하며,
    상기 콘텐츠는 카메라로부터 촬영되는 사진, 상기 통신부를 통해 다운로드되는 데이터, 입력부를 통해 작성되는 문자 정보, 오디오처리부를 통해 발생되는 오디오 데이터 등인 것을 특징으로 하는 장치.
  13. 휴대단말기의 콘텐츠 표시방법에 있어서,
    콘텐츠 생성시 위치감지부로부터 상기 콘텐츠가 생성되는 위도, 경도 및 고도의 3차원 위치정보를 감지하여 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하는 과정과,
    콘텐츠표시시 콘텐츠의 표시영역을 설정하고 상기 저장된 콘텐츠의 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 선택하며, 상기 선택된 콘텐츠를 상기 표시영역의 대응되는 위치에 3차원으로 표시하는 과정으로 이루어짐을 특징으로 하는 방법.
  14. 제13항에 있어서, 상기 콘텐츠를 표시하는 과정이,
    맵 표시모드시 3차원 맵을 저장하는 맵저장부에서 선택된 맵을 표시하며, 사용자에 의해 지정되는 표시영역을 설정하는 과정과,
    상기 콘텐츠저장부에 저장되는 콘텐츠들의 3차원 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 선택하는 과정과,
    상기 선택된 콘텐츠를 상기 표시부에 3차원으로 표시하는 과정으로 이루어짐을 특징으로 하는 방법.
  15. 제14항에 있어서,
    AR 표시모드시 상기 카메라를 구동하는 과정과,
    단말기의 위도, 경도 및 고도의 3차원 위치정보, 상기 카메라가 향하고 있는 방위정보, 상기 카메라의 화각 정보 및 단말기의 기울기 각도 정보들을 분석하여 상기 카메라에서 촬영되는 표시영역을 결정하는 과정과,
    상기 콘텐츠저장부에 저장되는 콘텐츠들의 3차원 위치정보를 분석하여 상기 표시영역 내에서 미리 설정된 표시거리 내에 위치되는 콘텐츠들을 선택하는 과정과,
    상기 선택된 콘텐츠를 상기 표시부에 3차원으로 표시하는 과정으로 이루어짐을 특징으로 하는 방법.
  16. 제15항에 있어서,
    상기 콘텐츠는 카메라로부터 촬영되는 사진, 통신부를 통해 다운로드되는 데이터, 입력부를 통해 작성되는 문자 정보 및/또는 멀티미디어 정보, 오디오처리부를 통해 발생되는 오디오 데이터 등인 것을 특징으로 하는 장치.
  17. 휴대단말기의 콘텐츠 표시방법에 있어서,
    콘텐츠 생성시 위치감지부로부터 상기 콘텐츠가 생성되는 위도, 경도 및 고도의 3차원 위치정보를 감지하여 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하는 과정과,
    콘텐츠 표시모드시 3차원 맵을 저장하는 맵저장부에서 선택되는 맵을 표시하고, 상기 맵에서 콘텐츠 표시영역을 설정하고 상기 저장된 콘텐츠의 3차원 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 3차원으로 표시하는 과정으로 이루어짐을 특징으로 하는 방법.
  18. 제17항에 있어서, 상기 콘텐츠를 표시하는 과정이,
    상기 맵저장부에서 선택된 맵을 표시부에 표시하며, 사용자에 의해 지정되는 표시영역을 설정하는 과정과,
    상기 콘텐츠저장부에 저장되는 콘텐츠들의 3차원 위치정보를 분석하여 상기 표시영역 내에 위치되는 콘텐츠들을 선택하는 과정과,
    상기 선택된 콘텐츠를 상기 설정된 표시영역에 3차원으로 표시하는 과정으로 이루어짐을 특징으로 하는 방법.
  19. 제18항에 있어서, 상기 맵저장부는 3차원의 street view, 인공위성 view, 맵 데이터를 저장하는 것을 특징으로 하는 방법.
  20. 휴대단말기의 콘텐츠 표시방법에 있어서,
    콘텐츠 생성시 위치감지부로부터 상기 콘텐츠가 생성되는 위도, 경도 및 고도의 3차원 위치정보를 감지하여 상기 콘텐츠와 함께 상기 콘텐츠저장부에 저장하는 과정과,
    AR 표시모드시 카메라를 구동하고, 단말기의 3차원 위치정보, 카메라가 향하는 방위정보, 카메라의 화각정보 및 단말 기울기 각도 정보들을 분석하여 상기 카메라의 표시영역을 설정하고 상기 저장된 콘텐츠의 3차원 위치정보를 분석하여 상기 표시영역에서 미리 설정된 표시거리 내에 위치되는 콘텐츠들을 3차원 적으로 표시하는 과정으로 이루어짐을 특징으로 하는 방법.
  21. 제20항에 있어서, 상기 콘텐츠를 표시하는 과정이,
    상기 카메라를 구동하고, 상기 감지부로부터 단말기의 위도, 경도 및 고도의 위치정보, 상기 카메라가 향하고 있는 방위정보, 상기 카메라의 화각정보 및 단말기의 기울기 각도 정보를 분석하여 상기 카메라에서 촬영되는 표시영역을 결정하는 표시영역결정부와,
    상기 콘텐츠저장부에 저장되는 콘텐츠들의 3차원 위치정보를 분석하여 상기 표시영역에서 설정된 표시거리 내에 위치되는 콘텐츠들을 선택하는 콘텐츠 선택부와,
    상기 선택된 콘텐츠를 상기 표시부에 3차원으로 표시하는 표시제어부로 구성된 것을 특징으로 하는 장치.
  22. 제21항에 있어서,
    상기 위치감지는 GPS 수신부를 통해 위도 및 경도를 감지하고 고도센서를 통해 고도를 감지하며, 상기 방위감지부는 지자기센서를 통해 카메라가 향하는 방위를 감지하고, 단말기의 기울기 각도는 가속도센서 및 자이로센서를 통해 감지하는 것을 특징으로 하는 방법.
  23. 제22항에 있어서,
    상기 콘텐츠는 카메라로부터 촬영되는 사진, 상기 통신부를 통해 다운로드되는 데이터, 입력부를 통해 작성되는 문자 정보, 오디오처리부를 통해 발생되는 오디오 데이터 등인 것을 특징으로 하는 방법.
KR1020110130770A 2011-12-08 2011-12-08 휴대단말기의 콘텐츠 표시장치 및 방법 KR101873525B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020110130770A KR101873525B1 (ko) 2011-12-08 2011-12-08 휴대단말기의 콘텐츠 표시장치 및 방법
US13/671,797 US9002400B2 (en) 2011-12-08 2012-11-08 Apparatus and method for content display in a mobile terminal
EP12195816.9A EP2602729B1 (en) 2011-12-08 2012-12-06 Apparatus and method for content display in a mobile terminal
CN201210523939.7A CN103162706B (zh) 2011-12-08 2012-12-07 用于移动终端中的内容显示的设备和方法
JP2012269631A JP6169350B2 (ja) 2011-12-08 2012-12-10 携帯端末機におけるコンテンツ表示装置及び方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110130770A KR101873525B1 (ko) 2011-12-08 2011-12-08 휴대단말기의 콘텐츠 표시장치 및 방법

Publications (2)

Publication Number Publication Date
KR20130064244A true KR20130064244A (ko) 2013-06-18
KR101873525B1 KR101873525B1 (ko) 2018-07-03

Family

ID=47563000

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110130770A KR101873525B1 (ko) 2011-12-08 2011-12-08 휴대단말기의 콘텐츠 표시장치 및 방법

Country Status (5)

Country Link
US (1) US9002400B2 (ko)
EP (1) EP2602729B1 (ko)
JP (1) JP6169350B2 (ko)
KR (1) KR101873525B1 (ko)
CN (1) CN103162706B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101525706B1 (ko) * 2013-12-24 2015-06-03 주식회사 다음카카오 컨텐츠 제공 방법, 상기 방법을 수행하는 컨텐츠 제공 서버 및 컨텐츠 수신 방법, 상기 컨텐츠를 수신하는 사용자 단말

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8422825B1 (en) * 2008-11-05 2013-04-16 Hover Inc. Method and system for geometry extraction, 3D visualization and analysis using arbitrary oblique imagery
KR101303166B1 (ko) * 2012-01-26 2013-09-09 엘지전자 주식회사 이동 단말기 및 그의 사진 검색방법
JP5891843B2 (ja) * 2012-02-24 2016-03-23 ソニー株式会社 クライアント端末、サーバ、およびプログラム
CN107205270B (zh) * 2012-04-27 2020-05-08 华为技术有限公司 定位终端的方法、装置和系统
US9161167B2 (en) * 2013-01-23 2015-10-13 Qualcomm Incorporated Visual identifier of third party location
US9671941B1 (en) * 2013-05-09 2017-06-06 Amazon Technologies, Inc. Graphical behaviors for recognition interfaces
JP6166961B2 (ja) * 2013-06-18 2017-07-19 Kddi株式会社 モバイル端末
CN103453901B (zh) * 2013-06-27 2016-09-28 展讯通信（上海）有限公司 一种位置指引系统及位置指引方法
CN103383259B (zh) * 2013-07-11 2016-05-04 北京奇虎科技有限公司 通过街景服务实现路线指引的方法和系统
CN104346051A (zh) 2013-07-29 2015-02-11 联想(北京)有限公司 一种显示方法、图像采集方法以及电子设备
JP6223755B2 (ja) * 2013-09-06 2017-11-01 株式会社東芝 方法、電子機器、及びプログラム
US9176991B2 (en) 2013-11-21 2015-11-03 International Business Machines Corporation Storing photographic metadata for scene reproduction
US9986140B2 (en) 2013-11-21 2018-05-29 International Business Machines Corporation Utilizing metadata for automated photographic setup
JP6264870B2 (ja) * 2013-12-13 2018-01-24 富士通株式会社 情報提供装置、プログラム、及びシステム
CN104748738B (zh) * 2013-12-31 2018-06-15 深圳先进技术研究院 室内定位导航方法和系统
US20150193468A1 (en) * 2014-01-07 2015-07-09 Interdigital Patent Holdings, Inc. Methods and apparatus for summarizing and presenting data based on user actions and locations
JP6326996B2 (ja) * 2014-06-13 2018-05-23 富士通株式会社 端末装置、情報処理システム、及び表示制御プログラム
CN104144287A (zh) * 2014-06-24 2014-11-12 中国航天科工集团第三研究院第八三五七研究所 一种增强现实照相机
US10056054B2 (en) 2014-07-03 2018-08-21 Federico Fraccaroli Method, system, and apparatus for optimising the augmentation of radio emissions
US9924240B2 (en) 2015-05-01 2018-03-20 Google Llc Systems and methods for interactive video generation and rendering
CN104809227B (zh) * 2015-05-07 2018-06-05 北京金山安全软件有限公司 一种照片显示方法及装置
US10234305B2 (en) * 2015-08-27 2019-03-19 Here Global B.V. Method and apparatus for providing a targeted map display from a plurality of data sources
US20170154051A1 (en) * 2015-12-01 2017-06-01 Microsoft Technology Licensing, Llc Hashmaps
US10650039B2 (en) * 2016-02-25 2020-05-12 Lionheart Legacy Uco Customizable world map
US10145704B2 (en) * 2016-04-17 2018-12-04 Streetography, Inc. Digitally-generated map containing defined regions for rendering with photo overlays
US10147215B2 (en) 2016-04-17 2018-12-04 Streetography, Inc. Digitally generated set of regional shapes for presenting information on a display screen
CN107305562A (zh) * 2016-04-21 2017-10-31 展讯通信（上海）有限公司 生成kml文件的方法、装置及移动终端
US10334134B1 (en) 2016-06-20 2019-06-25 Maximillian John Suiter Augmented real estate with location and chattel tagging system and apparatus for virtual diary, scrapbooking, game play, messaging, canvasing, advertising and social interaction
US10638256B1 (en) 2016-06-20 2020-04-28 Pipbin, Inc. System for distribution and display of mobile targeted augmented reality content
US11785161B1 (en) 2016-06-20 2023-10-10 Pipbin, Inc. System for user accessibility of tagged curated augmented reality content
US11201981B1 (en) 2016-06-20 2021-12-14 Pipbin, Inc. System for notification of user accessibility of curated location-dependent content in an augmented estate
US10805696B1 (en) 2016-06-20 2020-10-13 Pipbin, Inc. System for recording and targeting tagged content of user interest
US11876941B1 (en) 2016-06-20 2024-01-16 Pipbin, Inc. Clickable augmented reality content manager, system, and network
US11044393B1 (en) 2016-06-20 2021-06-22 Pipbin, Inc. System for curation and display of location-dependent augmented reality content in an augmented estate system
TWI617931B (zh) * 2016-09-23 2018-03-11 李雨暹 適地性空間物件遠距管理方法與系統
US10477602B2 (en) 2017-02-04 2019-11-12 Federico Fraccaroli Method, system, and apparatus for providing content, functionalities and services in connection with the reception of an electromagnetic signal
US10880716B2 (en) 2017-02-04 2020-12-29 Federico Fraccaroli Method, system, and apparatus for providing content, functionalities, and services in connection with the reception of an electromagnetic signal
TWI642002B (zh) 2017-04-14 2018-11-21 李雨暹 適地性空間物件可視範圍管理方法與系統
US11410330B2 (en) * 2017-05-30 2022-08-09 Edx Technologies, Inc. Methods, devices, and systems for determining field of view and producing augmented reality
CN108241746B (zh) 2018-01-09 2020-08-04 阿里巴巴集团控股有限公司 可视化公益活动的实现方法和装置
WO2019164514A1 (en) * 2018-02-23 2019-08-29 Google Llc Transitioning between map view and augmented reality view
JP7028698B2 (ja) * 2018-04-13 2022-03-02 シャープ株式会社 電子機器、制御装置、制御方法、および制御プログラム
CN109582879A (zh) * 2018-11-06 2019-04-05 珠海格力电器股份有限公司 一种通过电子地图显示便签的方法、系统及智能终端
CN111753934A (zh) * 2019-03-29 2020-10-09 青岛九石智能科技股份有限公司 一种存储柜的控制方法、控制装置及存储柜
CN110675310B (zh) 2019-07-02 2020-10-02 北京达佳互联信息技术有限公司 视频处理方法、装置、电子设备及存储介质
TWI730539B (zh) * 2019-10-09 2021-06-11 開曼群島商粉迷科技股份有限公司 動態數位內容的顯示方法、圖形使用者介面與系統
KR20220114336A (ko) * 2021-02-08 2022-08-17 현대자동차주식회사 사용자 단말 및 그 제어 방법
CN113885748A (zh) * 2021-09-23 2022-01-04 维沃移动通信有限公司 对象切换方法、装置、电子设备和可读存储介质
WO2024070752A1 (ja) * 2022-09-30 2024-04-04 富士フイルム株式会社 画像処理装置、方法及びプログラム

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8326851B2 (en) * 2001-06-29 2012-12-04 Grune Guerry L Simultaneous intellectual property search and valuation system and methodology (SIPS-VSM)
JP2006091390A (ja) * 2004-09-24 2006-04-06 Mitsubishi Electric Corp 情報表示システム及び情報表示方法及び情報表示方法をコンピュータに実行させるためのプログラム及び情報表示端末装置
WO2006041937A2 (en) * 2004-10-04 2006-04-20 Solid Terrain Modeling Three-dimensional cartographic user interface system
JP2006178828A (ja) * 2004-12-24 2006-07-06 Konica Minolta Holdings Inc 被写体情報検索システム
US7720436B2 (en) * 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
US7933929B1 (en) * 2005-06-27 2011-04-26 Google Inc. Network link for providing dynamic data layer in a geographic information system
JP4353259B2 (ja) * 2007-02-22 2009-10-28 ソニー株式会社 情報処理装置、画像表示装置、および、これらにおける制御方法ならびに当該方法をコンピュータに実行させるプログラム
JP2009145234A (ja) * 2007-12-14 2009-07-02 Sony Corp ガイド情報提示システム、ガイド情報提示方法、サーバ装置、端末装置
JP5250902B2 (ja) * 2008-03-19 2013-07-31 シャープ株式会社 ネットワークシステム、移動通信端末、および通信方法
US8422825B1 (en) * 2008-11-05 2013-04-16 Hover Inc. Method and system for geometry extraction, 3D visualization and analysis using arbitrary oblique imagery
JP5315111B2 (ja) * 2009-03-31 2013-10-16 株式会社エヌ・ティ・ティ・ドコモ 端末装置、情報提示システム及び端末画面表示方法
US20110161875A1 (en) * 2009-12-29 2011-06-30 Nokia Corporation Method and apparatus for decluttering a mapping display
JP5463967B2 (ja) * 2010-03-09 2014-04-09 株式会社ニコン デジタルカメラ
JP5401387B2 (ja) * 2010-03-31 2014-01-29 株式会社ゼンリンデータコム 地図画像処理装置、地図画像処理方法及び地図画像処理プログラム
US20110279446A1 (en) 2010-05-16 2011-11-17 Nokia Corporation Method and apparatus for rendering a perspective view of objects and content related thereto for location-based services on mobile device
US8723888B2 (en) * 2010-10-29 2014-05-13 Core Wireless Licensing, S.a.r.l. Method and apparatus for determining location offset information
US9083891B2 (en) * 2010-12-15 2015-07-14 Hitachi, Ltd. Video monitoring apparatus
JP2011129143A (ja) * 2011-01-17 2011-06-30 Fujitsu Ltd 情報提供システム，情報処理装置およびプログラム
JP5724543B2 (ja) * 2011-03-31 2015-05-27 ソニー株式会社 端末装置、オブジェクト制御方法及びプログラム
JP5724544B2 (ja) * 2011-03-31 2015-05-27 ソニー株式会社 画像処理装置、画像処理方法及びプログラム
US8676937B2 (en) * 2011-05-12 2014-03-18 Jeffrey Alan Rapaport Social-topical adaptive networking (STAN) system allowing for group based contextual transaction offers and acceptances and hot topic watchdogging
US8948596B2 (en) * 2011-07-01 2015-02-03 CetusView Technologies, LLC Neighborhood node mapping methods and apparatus for ingress mitigation in cable communication systems
US20130027554A1 (en) * 2011-07-31 2013-01-31 Meadow William D Method and Apparatus for Automated Camera Location and Orientation with Image Processing and Alignment to Ground Based Reference Point(s)
US9087412B2 (en) * 2011-09-26 2015-07-21 Nokia Technologies Oy Method and apparatus for grouping and de-overlapping items in a user interface
US9870429B2 (en) * 2011-11-30 2018-01-16 Nokia Technologies Oy Method and apparatus for web-based augmented reality application viewer

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101525706B1 (ko) * 2013-12-24 2015-06-03 주식회사 다음카카오 컨텐츠 제공 방법, 상기 방법을 수행하는 컨텐츠 제공 서버 및 컨텐츠 수신 방법, 상기 컨텐츠를 수신하는 사용자 단말

Also Published As

Publication number Publication date
EP2602729A1 (en) 2013-06-12
JP2013120606A (ja) 2013-06-17
JP6169350B2 (ja) 2017-07-26
CN103162706B (zh) 2018-02-13
KR101873525B1 (ko) 2018-07-03
EP2602729B1 (en) 2018-10-31
US20130150124A1 (en) 2013-06-13
US9002400B2 (en) 2015-04-07
CN103162706A (zh) 2013-06-19

Similar Documents

Publication Publication Date Title
KR101873525B1 (ko) 휴대단말기의 콘텐츠 표시장치 및 방법
JP6077068B1 (ja) 拡張現実システム、および拡張現実方法
CN103167412B (zh) 用于显示移动终端的位置的设备和方法
US20180286098A1 (en) Annotation Transfer for Panoramic Image
US8174561B2 (en) Device, method and program for creating and displaying composite images generated from images related by capture position
KR101436223B1 (ko) 궤적 기반 위치 결정을 이용한 이미지 식별
US8732273B2 (en) Data inquiry system and method for three-dimensional location-based image, video, and information
US9874448B2 (en) Electric device and information display method
JP6116756B2 (ja) 測位・ナビゲーション方法、装置、プログラム、及び記録媒体
JP5477059B2 (ja) 電子機器、画像出力方法及びプログラム
KR20120017293A (ko) 증강 현실 제공 장치 및 방법
CA3058243C (en) Information display method and apparatus
US20160284130A1 (en) Display control method and information processing apparatus
CN107193820B (zh) 位置信息获取方法、装置及设备
US20120209513A1 (en) System and method of relative location detection using image perspective analysis
CN110874699B (zh) 记录物品的物流信息方法、装置及系统
KR20110139375A (ko) 위치 정보가 포함된 이미지의 디스플레이 방법 및 장치
CN112292876B (zh) 用于促进对天线的调谐的装置、方法和计算机程序
CN110633335B (zh) 获取poi数据的方法、终端和可读存储介质
WO2024067073A1 (zh) 一种图片拍摄与分享方法及电子设备
Lo et al. A directive location-based landscape tour service using augmented reality glass
WO2015027290A1 (en) A device, method, computer program and data signal for capturing electronic images
EP4298599A1 (en) Image processing method, recording medium, image processing apparatus, and image processing system
KR20150124055A (ko) 차량용 단말장치를 이용한 컨텐츠 공유 방법 및 그를 이용하는 장치
JP2013003247A (ja) 方位表示装置、方位表示方法およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant