KR101800890B1 - 위치 기반의 통신 방법 및 시스템 - Google Patents

위치 기반의 통신 방법 및 시스템 Download PDF

Info

Publication number
KR101800890B1
KR101800890B1 KR1020110014977A KR20110014977A KR101800890B1 KR 101800890 B1 KR101800890 B1 KR 101800890B1 KR 1020110014977 A KR1020110014977 A KR 1020110014977A KR 20110014977 A KR20110014977 A KR 20110014977A KR 101800890 B1 KR101800890 B1 KR 101800890B1
Authority
KR
South Korea
Prior art keywords
message
electronic device
external electronic
plane
objects
Prior art date
Application number
KR1020110014977A
Other languages
English (en)
Other versions
KR20110096500A (ko
Inventor
아미르 샤함
에드워드 옥스
에이얼 톨레대노
오나 브레그먼-아미타이
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP11155330.1A priority Critical patent/EP2362627B1/en
Publication of KR20110096500A publication Critical patent/KR20110096500A/ko
Application granted granted Critical
Publication of KR101800890B1 publication Critical patent/KR101800890B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/222—Monitoring or handling of messages using geographical location information, e.g. messages transmitted or received in proximity of a certain spot or area
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/58—Message adaptation for wireless communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/025—Services making use of location information using location based information parameters
    • H04W4/026—Services making use of location information using location based information parameters using orientation information, e.g. compass
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/029—Location-based management or tracking services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/33—Services specially adapted for particular environments, situations or purposes for indoor environments, e.g. buildings
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 위치 기반의 메시지를 제공하는 방법에 있어서, 주위에 물리적인 물체 중에서 메시지에 적합한 플레이스홀더(placeholder)에 이미지 촬영 장치를 포함하는 휴대단말기를 위치시키는 과정과, 상기 플레이스홀더를 식별하는 이미지를 필기 메시지, 시각 메시지 및 음성 메시지 중 적어도 하나가 조합된 메시지와 연관시키는 과정을 포함하며, 상기 연관 과정은 상기 휴대단말기와 통신하는 서버에서 실행되는 것을 특징으로 한다.

Description

위치 기반의 통신 방법 및 시스템{LOCATION-BASED COMMUNICATION METHOD AND SYSTEM}
본 발명은 새로운 통신 방법 및 이를 실시하는 시스템에 관한 것이다.
보다 상세하게는, 본 발명은 카메라와 같은 촬영 장치를 포함하는 휴대 통신 장치의 사용자에 의해 작성되어 남겨진 후에 추후 읽혀지는 노트를 위한 플레이스홀더(placeholder)의 생성 방법에 관한 것이다.
셀룰러 폰과 같은 소형의 휴대 장치는 사용자들 사이의 직접적인 통신에 널리 사용되고 있지만, 현재 오프라인 통신에서의 이들의 활용은 제한적이다.
특정 사용자가 특정 시간에만 민감한(또는 사적인) 메시지를 남기는 것(leaving a message) 대신에, 메시지를 다양한 장소에서 남기고 인증된 사용자만이 메시지를 읽을 수 있도록 하는 것이 매우 바람직하지만 종래기술은 간단하고 편리하게 전술한 메시지 남김 방법을 제공하지 못하였다. GPS(Global Positioning System) 또는 QR(Quick Response) 코드를 이용하는 기술이 종래기술에서 시도되었으나, 널리 사용되지 못하였고 실직적으로 편리한 해결책이 되지 못하였다.
예를 들어, 미국 특허 제US2009/0081959호("Mobile Virtual and Augmented Reality System")에는 "가상 그라피티"(virtual graffiti)를 생성하고, 이것을 특정 지리적 위치 또는 객체에 할당하고, 이것을 서버에 업로딩하여 인증된 관람자가 지리적으로 근접한 상태에 있을 때 이 그라피티를 다운로드하는 방법이 제시되어 있다.
이 발명은 지리적 위치결정을 행하기 위하여 GPS를 이용하고 다른 형태로는 만일 GPS가 동작하지 않을 경우, 실내 위치 시스템에 근거하여 Wi-Fi를 제안한다. 그러나, 실질적으로 이 발명은 휴대단말기를 사용하는데 있어서의 제약에 대해 언급하고 있지 않다. 또한, 이 발명은 사용자들 사이에 직접적으로 정보를 전송하는 것이 불가능하고, 휴대단말기 사용의 특징 중의 하나인 한정적인 리소스(resource limits)을 고려하고 있지 않다.
또 다른 예로서, 미국 특허 제US2008/0122871호("Federated Virtual Graffiti")가 있다. 이 발명은 가상의 메시지들(virtual messages)을 지리적 위치를 기반으로 관련 짓고, 특정 사용자들에 대한 접근을 제한하는 것에 대한 예시이다.
하지만, 이 발명의 시스템은 남겨진 메시지를 이용하는데 있어 한정적인 자원을 가지는 휴대단말기의 문제점을 극복하기 위해 소정의 가상 보드(virtual board)를 필요로 한다.
따라서, 제US2009/0081959호의 발명과 제US2008/0122871호의 발명은 자원이 한정적인 휴대단말기의 한계를 포괄적으로 해결하는 해결책을 제공하고 있지 않다.
따라서, 본 발명은 종래 기술의 문제점들을 극복하고, 셀룰러 폰과 같이 용이하게 사용할 수 있는 장치를 통해 사용자가 간단하고 편리한 방식으로 위치 기반의 메시지를 교환할 수 있도록 하기에 적합한 방법 및 시스템을 제공하고자 한다.
본 발명의 또 다른 목적과 이점들은 이하 상세 설명을 통해 설명될 것이다.
본 발명은 위치 기반의 메시지를 제공하는 방법에 있어서, 주위에 물리적인 물체 중에서 메시지에 적합한 플레이스홀더(placeholder)에 이미지 촬영 장치를 포함하는 휴대단말기를 위치시키는 과정과, 상기 플레이스홀더를 식별하는 이미지를 필기 메시지, 시각 메시지 및 음성 메시지 중 적어도 하나가 조합된 메시지와 연관시키는 과정을 포함하며, 상기 연관 과정은 상기 휴대단말기와 통신하는 서버에서 실행되는 것을 특징으로 한다.
본 발명은 위치 기반 메시지의 제공 방법에 있어서, 상기 이미지 촬영 장치를 통해 상기 플레이스홀더를 식별하는 과정과, 상기 플레이스홀더와 연관된 하나 이상의 메시지를 포함하고 있는 서버와 통신하여, 상기 하나 이상의 메시지를 획득하는 과정을 더 포함하는 것을 특징으로 한다.
본 발명은 위치 기반의 메시지를 관리하는 시스템에 있어서, 하나 이상의 메시지를 메시지 플레이스홀더를 식별하는 하나 이상의 이미지와 연관시키기에 적합한 데이터베이스와, 데이터의 입력 및 출력을 관리하기에 적합하고, 소정의 메시지 플레이스홀더와 연관된 메시지를 확인하여 전송하기에 적합한 컴퓨터와, 메시지 플레이스홀더 및 상기 메시지 플레이스홀더와 연관된 메시지에 관한 데이터를 휴대단말기로부터 수신하고, 메시지에 관한 데이터를 전송하기에 적합한 통신 장치를 포함하는 것을 특징으로 한다.
본 발명은 종래 기술의 문제점들을 극복하고, 셀룰러 폰과 같이 용이하게 사용할 수 있는 장치를 통해 사용자가 간단하고 편리한 방식으로 위치 기반의 메시지를 교환할 수 있는 효과가 있다.
도 1은 유효한 객체 검출의 일례를 나타내는 도면.
도 2는 유효하지 않아 필터링되는 객체의 일례를 나타내는 도면.
도 3은 본 발명의 실시예에 따른 검출 알고리즘을 개략적으로 나타내는 도면.
도 4는 검출 프로세스 동안 발생하는 객체 설명(description)을 개략적으로 나타내는 도면.
도 5는 본 발명의 이용 예를 나타내는 도면.
도 6은 본 발명의 다른 이용 예를 나타내는 도면.
본 발명은 실내 및 실외 표면 양측에 증강된 메시지(augmented message)의 작성을 가능하게 한다. 본 발명은 서버/PC를 이용하거나 장치들 사이에 MMS를 직접적으로 사용하여 작성된 내용을 공유할 수 있도록 한다. 이하에 상세히 설명되는 바와 같이, 본 발명은 특히 휴대단말기에 적합하도록 설계되며, 휴대단말기의 자원을 효율적으로 이용하게 된다. 또한, 본 발명은 증강된 메시지로서 송신 및 수신될 수 있는 가상 객체들의 생성 및/또는 증강을 가능하게 한다.
본 발명에 따라 실행되는 각 과정(프로세스)의 다른 스테이지를 이하에 상세히 설명한다.
스테이지 1 - 객체 선택
사용자 "A"는 프리뷰 모드(preview mode)에 있는 휴대단말기의 카메라를 가리켜서, 가상 노트를 추가하기 위한 잠재적 객체(potential object)를 찾는다. 잠재적 객체는 이하에 설명되는 프로세스의 알고리즘 엔진에 의해 선택되고, 사용자가 참고할 수 있도록 표시된다.
모든 객체가 본 발명의 취지에 적합한 것이 아님을 당업자에게는 명확한 것으로, 본 발명의 취지에 적합한 객체는 환경(environment)과 시각적으로 구분되어(isolated) 식별 가능한 객체이다. 또한, 본 발명의 취지에 적합한 객체는 주위의 다수 객체들 사이에서 명확하게 식별 가능한 속성을 가지는 핵심적인 텍스쳐 특징(textural feature) 또는 다른 정보를 포함하여야 한다. 본 발명의 일부인 검출 단계(detection stage)에서 실제환경(real world)의 소정의 후보 객체들(candidate objects)은 검출되고, 선택되고, 유니크하게(Uniquely) 설명된다. 실제환경의 객체들 중에서 적당한 객체들을 적절하게 선택하는 것을 객체 인식을 위한 휴대단말기의 시스템 자원을 상당히 감소시킨다.
본 발명의 취지에 적합한 객체는 명확하게 식별 가능하다는 제한 이외에는, 본 발명에서 이용 가능한 객체에 대한 추가적인 제한은 없다. 선별되는(filtered) 객체(노트가 할당될 수도 있는 객체)의 유형은 어플리케이션 별로 상이할 수 있다.
다음의 예는 본 발명의 이번 단계를 추가적으로 설명한다.
도 1 및 도 2는 객체 검출의 예를 나타내는데, 여기서 객체의 검출 및 노트의 할당은 광고(signs) 및 그림과 같이 벽에 부착된 평면적인 객체로 한정되며, 실제 환경에서의 다른 객체들은 배제된다.
도 1은 얇은 프레임의 프레임 구조를 가지는 평면적인 객체(예를 들어, 그림)가 선택되었음을 사용자에게 알리는 것을 효과적으로 설명하고 있음이 도시되어 있다. 이하 도 3 및 도 4를 통해 본 발명의 동작이 설명된다. 도 2는 도 1의 객체와는 상이한 3차원의 객체를 도시하고 있는데, 3차원 객체는 엔진에 주어진 설정에 따라 부적절한 객체 유형에 해당하므로 본 발명의 동작에서 선택되지 않는다.
본 발명은 어떠한 특정의 검출 알고리즘으로 한정되는 것이 아니며 임의의 적합한 검출 방법으로 기능할 수 있음은 당업자에게 명확할 것이다.
본 발명의 적합한 일 실시예에 따른 검출 알고리즘은 도 3에 도시된 과정을 따른다.
도 3에 도시된 과정은 이미지를 선처리(pre-processing)하는 과정과, 이미지 파생(image derivatives)과 이미지 통계(image statistics)를 추출하는 과정과, 하나 이상의 후보 객체 이미지 세그먼트(segment)에서 적합한 객체를 검출하는 과정과, 후보 객체 이미지들에 대해 분류 및 필터링 테스트를 적용하여 인식하기에 적합한 객체를 획득하는 과정을 포함한다.
이미지의 선처리 과정은, 처리 가능한 포맷과 크기로 이미지를 변한하고, 이미지를 부드럽게 하거나(smooth enhancing) 노이즈를 제거(de-noise)하는 등의 예와 같이 필요로 하는 이미지 필터링 알고리즘을 적용하는 과정을 포함한다.
다양한 이미지 파생(예를 들어, 그라디언트(gradient))과 추가적인 이미지 통계와 같은 로우 레벨(low level)의 이미지 정보들이 수집되어 다음 과정의 입력으로써 제공된다. 분할(segmentation) 알고리즘은 후보 이미지 세그먼트들(segments, 예를 들어 높은 그라디언트(high gradient)와 바람직한 형상 특성(shape properties)을 가지는 조직 특성 콘텐츠(textrual feature content)의 영역)을 검색한다. 마지막으로, 유효성 테스트(validation test)를 적용하여 선택된 세그먼트들이 요구되는 형상(shape) 및 크기(size), 이미지 프레임 위치(image frame location) 및 충분한 조직 정보 제약(textural information constrains)들에 부합하는지 확인한다. 이런 방식으로, 매칭 알고리즘은 실제환경의 씬(scene) 중에서 필요로 하는 미리 정의된 일부에만 한정적으로 적용되어, 다음 과정(process)에서 발생될 수 있는 처리 동작(processing)을 경감시킨다. 객체가 최종적으로 데이터베이스(database)의 객체에 매칭되면 객체에 대한 평면 체크(planarity check)가 확인되는데, 이에 대해서는 이하의 도 4를 참조한 설명에서 상세히 논의하기로 한다.
예를 들어, 도 1에 도시된 바와 같이 평면의(planar) 그림 객체가 검출되는 예에서, 해당 이미지는 컬러 그라디언트 정보(color gradients information)의 획득을 위해 선처리(preprocessing)된다. 컬러 그라디언트 정보가 획득된 이미지는 이미지 축(image axes) 상에서 이미지의 서브영역들(sub-regions)에 대한 고속의 계측적 투영(fast hierarchical projection )을 이용하여 분할된다. 이 과정에서, 컬러 그라디언트 정보가 획득된 이미지의 콘텐츠는 두 개의 직교 축 상에 투영되며, 이후 두 개의 투영된 함수들이 후보 2D 영역(candidate 2D regions)에 대해 분석된다.
이러한 과정은 다수의 축을 갖는 시스템(several axes system)에 적용될 수 있으며, 투영을 통해 관련 서브영역 또한 계층적으로 또한 분석된다. 이러한 방법을 통해, 고속의 처리 동작으로 식별되는 높은 그라디언트 콘텐츠를 가지는 영역들은 이미지 로컬 아티팩트(image local artifact)에 대해 견고(robust)하다. 이러한 방식으로 분석되는 특징들(features)은 객체 자체에 관련된 것으로 객체의 적합성 및 식별의 용이성을 판단하기 위한 것이다.
몇몇 반복성, 크기, 형상, 통계 및 특징 콘텐츠 분류 테스트에 부합하는 영역들은 유효 후보들(valid candidates)로서 정의된다. 예를 들어, 특정 도시적인 실시에 있어서, 검출은 최소 및 최대 크기와 형상 제약을 갖는 이미지 중심 부근에 있는 단일 후보 영역으로 한정되었다. 또한, 반복성은 몇몇 이미지 프레임에 대하여 일시적으로 영역을 추적함으로써 확인되었고, 이것의 조직 이미지 데이터는 효과적인 이미지 매치 프로세스에 만족하는 것으로 확인되었다.
일단 객체가 선택되면, 선택된 객체는 표시되며 데이터베이스에 추가된다. 이 객체는 두 종류의 속성을 이용하여 식별된다.
첫 번째 종류의 속성은 객체의 위치 특성(예를 들어, 지리적 위치, 이것을 선택한 네트워크, 카메라에 대한 배향 등)에 관한 것이다. 이들 속성들은 비교를 위해 객체의 상대적으로 작은 서브세트(subset)를 데이터베이스로부터 필터링하도록 하며, 데이터베이스에서의 검색과 후보 객체의 비교를 가속화시킨다.
두 번째 종류의 속성은 객체 뷰(object view)로부터 추출된 이미지 통계 및 특징에 근거한 특정 객체에 대한 고유의 설명(specific object distinctive description)이다. 완벽한 설명(complete description)은, 도 4에 개략적으로 도시된 바와 같이, 효율적인 데이터베이스 검색뿐만 아니라 객체의 고유하고 반복적인 부분을 식별하게 한다.
특징 매치는 상술한 객체 평면 체크와 같은 추가적인 체크를 위한 수단을 또한 제공한다. 이 매치에 근거하여, 실제환경의 객체 포인트를 카메라 이미지의 포인트로 변환하는 것이 평면 투영에 대한 평면에 부합하는지를 확인하게 된다.
어드레스로서의 객체
객체는 어드레스로서 정의될 수 있다. 본 발명에 따라 작성된 고유의 식별은 객체와의 가상 메시지의 송수신(사람들과의 메시지 송수신과는 대조)을 가능하게 한다. 이는 객체에 대하여 근접성을 유지하지 않으면서도 행해질 수 있다. 그러므로, 일단 실제환경(실제세계)에 존재하는 객체가 전자 ID(electronic ID)를 수신하여 데이터베이스에 추가되면, 메시지를 송수신할 수 있는 어드레스가 된다(예를 들어, 본 발명에 따른 장치를 조작하는 사용자의 동작을 통해 수행됨).
추가적으로, 사용자들 사이의 통신은 실세환경으로부터의 추가적인 컨텍스트(context)를 통해 개선된다. 사용자의 송신기, 사용자의 수신기 및 장소들(예를 들어, 객체들)의 여러 조합은 사용자들의 통신 방법을 다양하게 한다.
스테이지 2 - 이미지에 가상 메시지 첨부
이 스테이지에서, 사용자 "A"는 휴대폰 (또는 다른 종류의 휴대단말기) GUI (도 1에 도시)를 이용하여 등록된(signed) 후보 객체들로부터 하나의 객체를 선택한다. 사용자는 새로운 가상 노트를 선택한 객체에 추가/첨부할 수도 있다. 이 프로세스는 도 5에 개략적으로 도시되어 있다. 가상 노트는 문자, 그림, 파일(음성, 비디오)첨부 등을 포함할 수 있다. 사용자는 이러한 노트를 객체에 가상적으로 첨부하고, 이 노트에 태그를 붙여서 데이터베이스에 저장하게 된다.
본 발명의 일 실시예에서, 객체에 추가된 노트들은 공유 데이터베이스에 저장된다. 노트를 포함하는 객체의 공유는 다양한 방식으로 행해질 수 있으며, 예를 들어, 서버 또는 MMS(Multimedia Messaging Service)를 이용할 수 있다. 또한, 사용자는 자신에게 가상 메시지를 남길 수도 있다. 또한, 노트의 콘텐츠 작성을 간략화하기 위하여, 노트 템플릿 콘텐츠 작성 툴(note template content creation tool)을 제공할 수 있다.
스테이지 3 - 노트 검출
이 스테이지에서, 사용자 "B"는 모바일 폰의 카메라를 프리뷰 모드를 이용(스테이지 1에서 행해진 프로세스와 동일)하여 잠재적인 객체를 검색하고 검출한다. 몇몇 애플리케이션에서는, 시스템의 모든 사용자들에게 공지된 특정 객체들을 대상으로 하는 것이 적합할 수도 있다. 이러한 경우와 같이, 잠재적인 객체들은 미리 정의되며, 검색은 미리 정의된 객체들에 대해서만 초점을 맞추게 된다.
상술한 바와 같이, 본 발명은 필터링 메커니즘을 동작시켜서, 잠재적인 객체들을 정의하고 그런 다음 엔진은 잠재적인 객체(예를 들어, 사각형의 표면)들을 검색하고 식별하게 된다. 이 필터링 스테이지의 이용으로 다음의 이점들이 달성된다.
첫 째로, 선택적인 검출은 처리되어야만 하는 실제환경의 정보를 감소시키게 된다. 이는 한정된 컴퓨팅 자원(예를 들어, CPU 및 메모리)을 가지는 휴대단말기 및 다른 휴대기기와 같은 시스템이 인식 동작(recognition task)을 처리할 수 있도록 한다. 두 번째로, 후보 객체들은 이들의 이미지 특징에 근거하여 적합한 객체 인식이 가능하도록 하기 위하여 충분한 이미지 정보를 제공하게 되므로, 낮은 미스매치(mismatch)와 높은 검출 확률로 정확한(robust) 인식이 가능하게 된다.
잠재적인 객체의 식별에 있어서, 엔진은 현재 객체가 데이터베이스에 존재하는지를 데이터베이스 내에서 확인하며, 존재가 확인되면 소정의 노트가 해당 객체에 남겨져 있는지의 여부를 확인한다. 데이터베이스는 실제환경의 객체들 또는 장소들을 포함하며, 이들 각각은 사용자 노트들과 추가적인 데이터에 관한 것일 수 있다. 이러한 데이터베이스에서의 검색은 상술한 다양한 속성의 키(keys)들을 활용하여 촉진된다. 또한, 엔진은 사용자가 노트를 수신 또는 보는 것이 허가되었는지를 확인함으로써, 노트들이 할당될 동일한 객체들을 이용하여 많은 사용자 그룹이 서로 간에 통신할 수 있도록 한다. 즉, 선택된 객체가 공공 장소에 있을 경우(예를 들어, 쇼핑 몰에 위치), 권한이 없는 사람들이 그들의 메시지를 볼 위험 없이 다른 그룹의 사람들이 멤버들 사이에 메시지를 배포하기 위하여 이것을 이용할 수도 있다. 공공 장소에서, 본 발명의 이용을 용이하게 하기 위하여 특정 객체를 "메시지 보드"(message board)로서 지정하는 것이 더 바람직할 수도 있다.
추가적인 이용 예를 다음과 같이 설명하면, 가족에게 있어서 주방은 메시지를 남기기에 유용한 장소가 되는데 도 5는 주방을 이용한 예를 개략적으로 도시하고 있다.
도 5의 예에서, 사용자 A는 냉장고 상에 있는 제1 그림을 가리켜서(예를 들어, 선택하여) 제1그림에 사용자가 밖에서 놀고 있음을 나타내는 노트를 추가한다. 이후, 사용자는 냉장고 상에 있는 제2 그림을 가리켜서(예를 들어, 선택하여) 가족 중 한 사람에게 강아지 먹이를 살 것을 요청하는 제2 노트를 추가한다. 물론, 제1 및 제2노트는 동일한 그림 상에 남겨질(추가될) 수도 있으나, 사용자 A가 자신의 노트 별로 분리된 플레이스홀더(placeholder)를 원하거나, 또는 가족의 다른 구성원들이 다른 노트들에 더 주의하기를 원하거나, 임의의 다른 이유가 있을 경우에는 그림별로 노트를 추가할 수 있다. 전술한 예에 있어서, 가족용 PC(Family PC)는 본 발명을 운영하는 서버로서 이용될 수 있으며, 이로 인해 사용자 A에 의해 남겨진 노트들은 가족용 PC에서 갱신된다. 필요로 할 경우, 가족용 PC는 갱신된 노트들을 MMS 또는 이메일을 통해 가족 중 선택된 구성원들에게 전송될 수 있다. 또 다른 형태로는, 가족 중 그 밖의 구성원들은 주방에 들어와서 플레이스홀더(이 예에서는 그림 또는 냉장고에 붙어있는 그림의 일부)를 가리킨 후에(예를 들어, 선택한 후에) 하나 이상의 메시지들(또는, 만일 이들 중 몇 개가 즉시로 중계되었을 경우)을 인식할 수 있을 것이다.
또는, 노트의 메시지를 수신하지 못한 사용자 B는 주방으로 걸어들어와 냉장고 상에 있는 그림들을 사용자의 장치로 가리킴으로써 하나 이상의 메시지들이 남겨져 있었음을 발견하고, 가족용 PC와 통신하여 남겨진 메시지를 획득한다.
도 6에 도시된 또 다른 예에서는 집의 문이 노트의 메시지들을 붙이는(예를 들어, 남기는) 용도로 이용될 수 있다. 예를 들어, 사용자 C는 외출시에 문에 해당하는 제3그림에 제3노트의 메시지를 남길 수 있으며, 사용자 D는 휴대단말기를 제3그림에 해당하는 객체(예를 들어, 문)를 휴대단말기를 통해 선택함으로써 제3노트의 메시지를 확인할 수 있다.
지금까지 본 발명에 대해서 상세히 설명하였으나, 그 과정에서 언급한 실시예는 예시적인 것일 뿐, 한정적인 것이 아님을 분명히 하며, 본 발명은 이하의 특허청구범위에 의해 제공되는 본 발명의 기술적 사상이나 분야를 벗어나지 않는 범위 내에서, 본 발명으로부터 균등하게 대체될 수 있는 정도의 구성요소 변경은 본 발명의 범위에 속한다 할 것이다.

Claims (6)

  1. 휴대단말기에서의 통신 방법에 있어서,
    이미지 촬영 장치를 통해 촬영된 적어도 하나의 객체를 표시하는 과정,
    미리 지정된 특성을 포함하는지 여부에 따라 상기 적어도 하나의 객체 중 평면으로 구성된 평면 객체를 확인하는 과정,
    입력 데이터에 기반하여 생성된 메시지를 상기 평면 객체의 적어도 일부에 중첩되도록 표시하는 과정,
    상기 메시지를 수신 또는 표시하는 것이 허가된 적어도 하나의 외부 전자 장치를 확인하는 과정, 및
    상기 적어도 하나의 외부 전자 장치에 의해 상기 평면 객체가 촬영될 때 상기 메시지가 상기 적어도 하나의 외부 전자 장치에서 표시되도록, 상기 메시지와 상기 평면 객체에 관한 정보를 서버를 통해 상기 적어도 하나의 외부 전자 장치로 전송하는 과정을 포함하며,
    상기 미리 지정된 특성은, 반복성, 크기, 형상, 통계 및 특정 테스트에 부합하는 영역 중 적어도 일부를 포함하는 통신 방법.
  2. 제1항에 있어서,
    상기 서버로부터, 상기 평면 객체와 연관된 적어도 하나의 메시지를 수신하는 과정을 더 포함하는 통신 방법.
  3. 제1항에 있어서,
    상기 메시지는 필기 메시지, 시각 메시지 및 음성 메시지 중 적어도 어느 하나가 조합된 것을 특징으로 하는 통신 방법.
  4. 휴대단말기에 있어서,
    이미지 촬영 장치; 및
    상기 이미지 촬영 장치를 통해 촬영된 적어도 하나의 객체를 표시하고,
    미리 지정된 특성을 포함하는지 여부에 따라 상기 적어도 하나의 객체 중 평면으로 구성된 평면 객체를 확인하고,
    입력 데이터에 기반하여 생성된 메시지를 상기 평면 객체의 적어도 일부에 중첩되도록 표시하고,
    상기 메시지를 수신 또는 표시하는 것이 허가된 적어도 하나의 외부 전자 장치를 확인하고,
    상기 적어도 하나의 외부 전자 장치에 의해 상기 평면 객체가 촬영될 때 상기 메시지가 상기 적어도 하나의 외부 전자 장치에서 표시되고, 상기 메시지와 상기 평면 객체에 관한 정보가 서버를 통해 상기 적어도 하나의 외부 전자 장치로 전송되도록 제어하는 CPU(central processing unit);를 포함하며,
    상기 미리 지정된 특성은, 반복성, 크기, 형상, 통계 및 특정 테스트에 부합하는 영역 중 적어도 일부를 포함하는 휴대단말기.
  5. 제4항에 있어서,
    상기 메시지는 필기 메시지, 시각 메시지 및 음성 메시지 중 적어도 어느 하나가 조합된 것을 특징으로 하는 휴대단말기.
  6. 제4항에 있어서,
    상기 CPU는,
    상기 서버로부터, 상기 평면 객체와 연관된 적어도 하나의 메시지를 수신하는 휴대단말기.
KR1020110014977A 2010-02-22 2011-02-21 위치 기반의 통신 방법 및 시스템 KR101800890B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP11155330.1A EP2362627B1 (en) 2010-02-22 2011-02-22 Location-based communication method and system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/709,612 2010-02-22
US12/709,612 US8185596B2 (en) 2010-02-22 2010-02-22 Location-based communication method and system

Publications (2)

Publication Number Publication Date
KR20110096500A KR20110096500A (ko) 2011-08-30
KR101800890B1 true KR101800890B1 (ko) 2017-11-23

Family

ID=44477405

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110014977A KR101800890B1 (ko) 2010-02-22 2011-02-21 위치 기반의 통신 방법 및 시스템

Country Status (2)

Country Link
US (1) US8185596B2 (ko)
KR (1) KR101800890B1 (ko)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9264474B2 (en) 2013-05-07 2016-02-16 KBA2 Inc. System and method of portraying the shifting level of interest in an object or location
US20150161822A1 (en) * 2013-12-11 2015-06-11 Adobe Systems Incorporated Location-Specific Digital Artwork Using Augmented Reality
US10335677B2 (en) * 2014-12-23 2019-07-02 Matthew Daniel Fuchs Augmented reality system with agent device for viewing persistent content and method of operation thereof
US10228775B2 (en) * 2016-01-22 2019-03-12 Microsoft Technology Licensing, Llc Cross application digital ink repository
KR101773885B1 (ko) * 2016-10-19 2017-09-01 (주)잼투고 이미지 인증을 이용한 증강현실 객체 제공 방법 및 제공 서버
CN108304067A (zh) * 2018-01-26 2018-07-20 百度在线网络技术（北京）有限公司 用于展示信息的系统、方法和装置
US11227435B2 (en) 2018-08-13 2022-01-18 Magic Leap, Inc. Cross reality system
US10957112B2 (en) 2018-08-13 2021-03-23 Magic Leap, Inc. Cross reality system
WO2020072985A1 (en) 2018-10-05 2020-04-09 Magic Leap, Inc. Rendering location specific virtual content in any location
CN110677537B (zh) * 2019-09-29 2021-05-11 维沃移动通信有限公司 便签信息显示方法、便签信息发送方法及电子设备
CN114586071A (zh) 2019-10-15 2022-06-03 奇跃公司 支持多设备类型的交叉现实系统
US11568605B2 (en) 2019-10-15 2023-01-31 Magic Leap, Inc. Cross reality system with localization service
JP2022551735A (ja) 2019-10-15 2022-12-13 マジック リープ， インコーポレイテッド 無線フィンガプリントを用いたクロスリアリティシステム
JP2023501952A (ja) 2019-10-31 2023-01-20 マジック リープ， インコーポレイテッド 持続座標フレームについての品質情報を伴うクロスリアリティシステム
JP7525603B2 (ja) 2019-11-12 2024-07-30 マジック リープ， インコーポレイテッド 位置特定サービスおよび共有場所ベースのコンテンツを伴うクロスリアリティシステム
EP4073763A4 (en) 2019-12-09 2023-12-27 Magic Leap, Inc. CROSS-REALLY SYSTEM WITH SIMPLIFIED PROGRAMMING OF VIRTUAL CONTENT
WO2021163295A1 (en) 2020-02-13 2021-08-19 Magic Leap, Inc. Cross reality system with prioritization of geolocation information for localization
CN115398314A (zh) 2020-02-13 2022-11-25 奇跃公司 使用多分辨率帧描述符进行地图处理的交叉现实系统
US11410395B2 (en) 2020-02-13 2022-08-09 Magic Leap, Inc. Cross reality system with accurate shared maps
US11551430B2 (en) 2020-02-26 2023-01-10 Magic Leap, Inc. Cross reality system with fast localization
JP2023524446A (ja) 2020-04-29 2023-06-12 マジック リープ， インコーポレイテッド 大規模環境のためのクロスリアリティシステム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090327433A1 (en) 2008-06-27 2009-12-31 Microsoft Corporation Displaying Images for People Associated with a Message Item
US20100017759A1 (en) 2008-07-15 2010-01-21 Immersion Corporation Systems and Methods For Physics-Based Tactile Messaging
US20100023878A1 (en) * 2008-07-23 2010-01-28 Yahoo! Inc. Virtual notes in a reality overlay

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6504956B1 (en) * 1999-10-05 2003-01-07 Ecrio Inc. Method and apparatus for digitally capturing handwritten notes
US7728869B2 (en) 2005-06-14 2010-06-01 Lg Electronics Inc. Matching camera-photographed image with map data in portable terminal and travel route guidance method
US8933889B2 (en) * 2005-07-29 2015-01-13 Nokia Corporation Method and device for augmented reality message hiding and revealing
US20070032244A1 (en) * 2005-08-08 2007-02-08 Microsoft Corporation Group-centric location tagging for mobile devices
US8243022B2 (en) * 2006-11-27 2012-08-14 Microsoft Corporation Federated virtual graffiti
US20080147730A1 (en) * 2006-12-18 2008-06-19 Motorola, Inc. Method and system for providing location-specific image information
JP4914268B2 (ja) * 2007-03-29 2012-04-11 株式会社日立製作所 検索サービスサーバの情報検索方法。
US7844229B2 (en) * 2007-09-21 2010-11-30 Motorola Mobility, Inc Mobile virtual and augmented reality system
US20090248300A1 (en) * 2008-03-31 2009-10-01 Sony Ericsson Mobile Communications Ab Methods and Apparatus for Viewing Previously-Recorded Multimedia Content from Original Perspective
US20090292464A1 (en) * 2008-05-23 2009-11-26 Tele Atlas North America, Inc. System and method for providing geographic markers on electronic objects and real-world objects
TWI403156B (zh) * 2008-08-08 2013-07-21 尼康股份有限公司 Carrying information machines, photographic devices, and information acquisition systems

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090327433A1 (en) 2008-06-27 2009-12-31 Microsoft Corporation Displaying Images for People Associated with a Message Item
US20100017759A1 (en) 2008-07-15 2010-01-21 Immersion Corporation Systems and Methods For Physics-Based Tactile Messaging
US20100045619A1 (en) 2008-07-15 2010-02-25 Immersion Corporation Systems And Methods For Transmitting Haptic Messages
US20100023878A1 (en) * 2008-07-23 2010-01-28 Yahoo! Inc. Virtual notes in a reality overlay

Also Published As

Publication number Publication date
US8185596B2 (en) 2012-05-22
KR20110096500A (ko) 2011-08-30
US20110208817A1 (en) 2011-08-25

Similar Documents

Publication Publication Date Title
KR101800890B1 (ko) 위치 기반의 통신 방법 및 시스템
US9619489B2 (en) View of a physical space augmented with social media content originating from a geo-location of the physical space
US7853296B2 (en) Mobile virtual and augmented reality system
KR102134569B1 (ko) 위치-기반 서비스에서 사용자들 매칭
US20140181678A1 (en) Interactive augmented reality system, devices and methods using the same
US20100309226A1 (en) Method and system for image-based information retrieval
EP2003611A2 (en) Information presentation system, information presentation terminal, and server
TW201018298A (en) Data access based on content of image recorded by a mobile device
CN108897996B (zh) 标识信息关联方法及装置、电子设备及存储介质
US11430211B1 (en) Method for creating and displaying social media content associated with real-world objects or phenomena using augmented reality
JP6478286B2 (ja) 拡張現実コンテンツを選別するための方法、装置、およびシステム
US20120019547A1 (en) Apparatus and method for providing augmented reality using additional data
CN105451202A (zh) 短信处理方法及装置
CN113393471A (zh) 图像处理方法和装置
CN107613491B (zh) 使用增强现实获取无线接入点的密码信息的方法和装置
US10606886B2 (en) Method and system for remote management of virtual message for a moving object
US20200026869A1 (en) Systems and methods for identification of a marker in a graphical object
CN106682146B (zh) 一种根据关键词检索景区评价的方法及系统
KR100985949B1 (ko) 이동통신망을 통한 상품정보 서비스 제공 방법 및 시스템
KR101332816B1 (ko) 프라이빗 태그를 제공하는 증강 현실 장치 및 방법
CN112118533A (zh) 一种导航信息展示的方法以及装置
CN109522431B (zh) 一种基于图片识别的酒店推荐方法及系统
KR102041849B1 (ko) 다중 id를 이용한 공간 정보 공유 서비스 시스템 및 그 방법
CN113536129A (zh) 服务推送方法及相关产品
EP2362627B1 (en) Location-based communication method and system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant