KR20140052045A - 실내 포지셔닝을 위한 로고 검출 - Google Patents

실내 포지셔닝을 위한 로고 검출 Download PDF

Info

Publication number
KR20140052045A
KR20140052045A KR1020147007272A KR20147007272A KR20140052045A KR 20140052045 A KR20140052045 A KR 20140052045A KR 1020147007272 A KR1020147007272 A KR 1020147007272A KR 20147007272 A KR20147007272 A KR 20147007272A KR 20140052045 A KR20140052045 A KR 20140052045A
Authority
KR
South Korea
Prior art keywords
mobile device
location
estimating
pois
mobile
Prior art date
Application number
KR1020147007272A
Other languages
English (en)
Other versions
KR101570195B1 (ko
Inventor
후이 차오
난 후
사우미트라 모한 다스
라자쉬 굽타
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20140052045A publication Critical patent/KR20140052045A/ko
Application granted granted Critical
Publication of KR101570195B1 publication Critical patent/KR101570195B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2457—Query processing with adaptation to user needs
    • G06F16/24575—Query processing with adaptation to user needs using context
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20—Instruments for performing navigational calculations
    • G01C21/206—Instruments for performing navigational calculations specially adapted for indoor navigation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/16—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using electromagnetic waves other than radio waves

Abstract

모바일 디바이스에서 또는 모바일 디바이스와 함께 사용하기 위해 실내 포지셔닝을 위한 로고 검출을 위한 하나 이상의 동작들 또는 기법들을, 완전히 또는 부분적으로, 용이하게 하거나 지원하기 위해 이용될 수 있는 예시적인 방법들, 장치들 또는 제조 물품들이 본원에 개시된다. 간략하게는, 일 구현예에 따라, 방법은, 모바일 디바이스에서, 모바일 디바이스의 카메라 센서를 통해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하는 단계; 및 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 하나 이상의 관심 포인트들과 연관된 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 모바일 디바이스의 위치를 추정하는 단계를 포함할 수 있다. 일부 경우들에서, 모바일 디바이스의 추정된 위치는 하나 이상의 공지된 위치들의 하나 이상의 POI들의 적어도 하나의 추가적인 POI에 적어도 부분적으로 기초하여 정제될 수 있다.

Description

실내 포지셔닝을 위한 로고 검출{LOGO DETECTION FOR INDOOR POSITIONING}
이 출원은, 그 전체 내용이 인용에 의해 본원에 포함되는, 2011년 8월 19일에 출원된 "Method and/or Apparatus for Position Estimation"에 대한 미국 가특허 출원 제61/525,704호, 및 2012년 6월 1일에 출원된 "Logo Detection for Indoor Positioning"에 대한 미국 비-가특허 출원 제13/486,359호를 우선권으로 주장하는 PCT 출원이다.
본 개시내용은 일반적으로는 포지션 추정 기법들에 관한 것이며, 더 구체적으로는 모바일 통신 디바이스들에서 또는 모바일 통신 디바이스들과 함께 사용하기 위한 실내 포지셔닝(positioning)을 위한 로고 검출에 관한 것이다.
예를 들어, 셀룰러 전화들, 휴대용 내비게이션 유닛들, 랩톱 컴퓨터들, 개인 디지털 보조 단말들 등과 같은 모바일 통신 디바이스들은 매일 더욱 일반화되고 있다. 예를 들어, 위치-인식 셀룰러 전화들, 스마트 전화들 등과 같은 특정 모바일 통신 디바이스들은 다양한 시스템들로부터 획득되거나 수집된 포지션 정보를 제공함으로써 사용자들이 자신들의 지리적 위치들을 추정하는 것을 보조할 수 있다. 예를 들어, 실외 환경에서, 특정 모바일 통신 디바이스들은 셀룰러 전화 또는 다른 무선 통신 네트워크를 통해 글로벌 포지셔닝 시스템(GPS) 또는 다른 유사한 글로벌 내비게이션 위성 시스템(GNSS), 셀룰러 기지국, 위치 비컨 등과 같은 위성 포지셔닝 시스템(SPS)으로부터 무선 신호들을 획득함으로써 포지션 추정 또는 소위 "포지션 픽스(fix)"를 획득할 수 있다. 일부 경우들에서, 수신된 무선 신호들은 모바일 통신 디바이스에 의해 또는 모바일 통신 디바이스에서 프로세싱될 수 있고, 그의 위치는 예를 들어, 어드밴스드 순방향 링크 삼각측량법(AFLT), 기지국 식별 등과 같은 공지된 기법들을 사용하여 추정될 수 있다.
실내 환경에서, 때때로, 모바일 통신 디바이스들은 하나 이상의 포지션 추정 기법들을 용이하게 하거나 지원하기 위한 위성 또는 유사 무선 신호들을 신뢰가능하게 수신하거나 획득하지 못할 수 있다. 예를 들어, SPS 또는 다른 무선 송신기들로부터의 신호들은 감쇠되거나 그렇지 않은 경우 일부 방식으로 영향을 받을 수 있는데(예를 들어, 불충분하고, 약하고, 단편적(fragmentary)임 등), 이는 포지션 추정들을 위한 신호들의 사용을 적어도 부분적으로 불가능하게 할 수 있다. 이로써, 실내 환경에서, 내비게이션 또는 위치 서비스들을 가능하게 하기 위해 상이한 기법들이 사용될 수 있다. 예를 들어, 모바일 통신 디바이스는 공지된 위치들에 포지셔닝된 3개 이상의 지상 무선 액세스 포인트들에 대한 범위들을 측정함으로써 포지션 픽스를 획득할 수 있다. 범위들은 예를 들어, 적절한 액세스 포인트들로부터 수신된 무선 신호들로부터의 미디어 액세스 제어 식별자(MAC ID) 어드레스를 획득하고, 신호 강도, 왕복 지연 등과 같은 수신된 신호들의 하나 이상의 특성들을 측정함으로써 측정될 수 있다. 실내 환경에서와 같은 모바일 통신 디바이스의 포지션은, 예를 들어, 또한 열 맵 또는 라디오 맵 서명 매칭을 통해 추정될 수 있다. 예를 들어, 모바일 통신 디바이스에서 수신된 무선 신호들의 현재 또는 라이브 특성들은 데이터베이스 내에 열(heat) 맵 값들로서 저장된 예상되거나 이전에 측정된 신호 특성들과 비교될 수 있다. 모바일 통신 디바이스에서 현재 수신된 신호들에 의해 보여지는 특성들에 더욱 가깝게 매치하는 데이터베이스 내의 서명을 찾음으로써, 매칭 서명과 연관된 위치는 디바이스의 추정된 위치로서 사용될 수 있다.
그러나, 예를 들어, 더 큰 실내 또는 유사 영역들, 다중 경로 또는 페이딩 효과들 등이 발생하기 쉬운 상대적으로 조밀한 환경들(예를 들어, 쇼핑 몰들, 소매 아울렛들 등)에서와 같은 일부 경우들에서, 액세스 포인트 또는 유사한 무선 송신기 분포는 정확하거나 다른 방식으로 적절한 포지셔닝을 위해서는 덜 충분하거나 덜 적합할 수 있다. 추가로, 때때로, 관심 있는 특정 실내 영역에 대한 열(heat) 맵을 구성하기 위해 신호 특성들을 사전-측정하는 것은 노동 집약적이고, 시간소모적이고, 비용이 들 수 있고 기타 등등이다. 또한, 일단 구성되면, 열 맵은 다소 정적인 경향이 있으며, 이로써, 대응하는 물리적 위치와 연관된 상대적으로 동적 환경에서 업데이트하거나 재구성하기에 어렵거나 고가일 수 있다. 따라서, 가령, 예를 들면, 실내 또는 유사 환경(예를 들어, 어번 캐니언(urban canyon)들 등)에서 포지션 정확성을 개선하거나 다른 방식으로 향상시키는 방법은 계속 개발 영역에 있다.
예시적인 구현예들은 모바일 통신 디바이스에서 또는 모바일 통신 디바이스와 함께 사용하기 위한 실내 포지셔닝을 위한 로고 검출에 관한 것이다. 일 구현예에서, 모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법은, 모바일 디바이스에서, 하나 이상의 공지된 위치들의 하나 이상의 관심 포인트(POI)들과 연관된 하나 이상의 브랜드-특정 시각적 서명들을 수신하는 단계; 모바일 디바이스의 카메라 센서에 의해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하는 단계; 추출된 시각적 특징들 및 하나 이상의 수신된 브랜드-특정 시각적 서명들을 매칭시키는 단계; 및 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 하나 이상의 POI들과 연관된 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 모바일 디바이스의 위치를 추정하는 단계를 포함할 수 있다.
또 다른 구현예에서, 장치는, 시각적 보조 정보를 수신하기 위한 무선 트랜시버; 하나 이상의 이미지들을 캡쳐하기 위한 카메라 센서; 및 카메라 센서를 통해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하고, 그리고 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 하나 이상의 POI들과 연관된 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 모바일 디바이스의 위치를 추정하도록 하나 이상의 이미지들을 프로세싱하기 위한 메모리에 커플링된 적어도 하나의 이미지 프로세싱 모듈을 포함하는 모바일 디바이스를 포함할 수 있다.
또 다른 구현예에서, 모바일 디바이스의 위치를 추정하기 위한 장치는, 모바일 디바이스에서 하나 이상의 공지된 위치들의 하나 이상의 관심 포인트(POI)들과 연관된 하나 이상의 브랜드-특정 시각적 서명들을 수신하기 위한 수신 수단; 모바일 디바이스의 카메라 센서를 통해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하기 위한 추출 수단; 및 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 하나 이상의 POI들과 연관된 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 모바일 디바이스의 위치를 추정하기 위한 추정 수단을 포함할 수 있다.
또 다른 구현예에서, 물품은, 모바일 디바이스의 카메라 센서를 통해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하고; 그리고 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 하나 이상의 POI들과 연관된 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 모바일 디바이스의 위치를 추정하기 위해 모바일 디바이스에서의 특수 목적 컴퓨팅 플랫폼에 의해 실행가능한 명령들이 저장된 비-일시적 저장 매체를 포함할 수 있다. 그러나, 이들이 단지 예시적인 구현예들이며, 청구된 발명 대상이 이들 특정 구현예들에 제한되지 않는다는 점이 이해되어야 한다.
비-제한적이며, 불완전한 양상들이 후속하는 도면들과 관련하여 기재되며, 여기서 동일한 참조 부호들은, 다른 방식으로 특정되지 않는 한, 다양한 도면들 전반에 걸쳐 동일한 부분들을 지칭한다.
도 1은 예시적인 동작 환경의 구현예와 연관된 특징들을 예시하는 개략도이다.
도 2는 실내 포지셔닝을 위한 로고 검출을 용이하게 하거나 지원하기 위해 사용될 수 있는 예시적인 좌표 시스템의 구현예이다.
도 3은 실내 포지셔닝을 위한 로고 검출과 관련하여 수행될 수 있는 예시적인 프로세스의 구현예의 요약을 예시하는 흐름도이다.
도 4는 관심 있는 하나 이상의 로고들을 캡쳐하는 모바일 디바이스의 구현예를 예시하는 개략도이다.
도 5는 실내 포지셔닝을 위한 로고 검출과 관련하여 사용될 수 있는 예시적인 정보 구조의 구현예이다.
도 6은 모바일 디바이스의 포지션을 추정하는 예시적인 사용 경우를 예시하는 프로세스의 구현예의 흐름도이다.
도 7은 실내 포지셔닝을 위한 로고 검출을 위한 예시적인 프로세스의 구현예를 예시하는 흐름도이다.
도 8은 모바일 디바이스와 연관된 예시적인 컴퓨팅 환경의 구현예를 예시하는 개략도이다.
도 9는 서버와 연관된 예시적인 컴퓨팅 환경의 구현예를 예시하는 개략도이다.
후속하는 상세한 설명에서, 다수의 특정 상세항목들은 청구된 발명 대상의 철저한 이해를 제공하기 위해 설명된다. 그러나, 청구된 발명 대상이 이들 특정 상세항목들 없이 구현될 수 있다는 점이 당업자들에 의해 이해될 것이다. 다른 경우들에서, 당업자에 의해 공지될 방법들, 장치들 또는 시스템들이 청구된 발명 대상을 모호하게 하지 않기 위해 상세하게 기재되지 않았다.
예를 들어, 모바일 통신 디바이스에서 또는 모바일 통신 디바이스와 함께 사용될 수 있는, 실내 또는 유사한 환경에서 포지셔닝하기 위한 로고 검출을 위한 하나 이상의 동작들 또는 기법들을 용이하게 하거나 지원하기 위해, 완전히 또는 부분적으로, 구현될 수 있는 일부 예시적인 방법들, 장치들, 또는 제조 물품들이 본원에 개시되어 있다. 본원에 사용된 바와 같이, "모바일 통신 디바이스", "무선 디바이스", "위치-인식 모바일 디바이스" 또는 이러한 용어들의 복수의 형태는 상호교환가능하게 사용될 수 있고, 시간마다 변경하는 포지션 또는 위치를 가질 수 있는 임의의 종류의 특수 목적 컴퓨팅 플랫폼 또는 장치를 지칭할 수 있다. 일부 경우들에서, 모바일 통신 디바이스는, 예를 들어, 하나 이상의 통신 프로토콜들에 따라 적절한 통신 네트워크들을 통해 정보의 무선 전송 또는 수신을 통해, 다른 디바이스들, 모바일 등과 통신할 수 있다. 예시로서, 본원에서 단순히 모바일 디바이스들로서 지칭될 수 있는 특수 목적 모바일 통신 디바이스들은, 예를 들어, 셀룰러 전화들, 위성 전화들, 스마트 전화들, 개인 디지털 보조 단말(PDA)들, 랩톱 컴퓨터들, 개인용 엔터테인먼트 시스템들, 태블릿 개인용 컴퓨터(PC)들, 개인용 오디오 또는 비디오 디바이스들, 개인용 오디오 또는 비디오 디바이스들, 개인용 내비게이션 디바이스들 등을 포함할 수 있다. 그러나, 이들이 단순히 실내 포지셔닝을 위한 로고 검출에 관련하여 이용될 수 있는 모바일 디바이스들의 예시적인 예들이며, 청구된 발명 대상이 이러한 견지에서 제한되지 않는다는 점이 인지되어야 한다.
이전에 언급된 바와 같이, 모바일 디바이스는 디바이스로 하여금, 예를 들어, 삼변측량법, 삼각측량법, 열 맵 또는 라디오 맵 신호 서명 매칭 등과 같은 적용가능한 포지션 추정 기법들을 사용하여 자신의 지리적 위치를 추정하게 하는 위치-인식 능력을 특징으로 할 수 있다. 일부 경우들에서, 위치-인식 능력에 추가하여, 모바일 디바이스는, 예를 들어, 라이브 비디오 이미지 캡쳐 능력을 특징으로 할 수 있다. 예를 들어, 모바일 디바이스는 모바일 디바이스와 연관된 스크린 또는 디스플레이에 이러한 이미지의 동시적 또는 실시간 디스플레이에 대한 라이브 비디오 이미지를 캡쳐할 수 있는 카메라 센서 또는 유사 이미지 캡쳐 디바이스를 포함할 수 있다. 본원에 사용된 바와 같이, "실시간"은, 전자 통신으로 인한 시간량 뿐만 아니라 다른 정보 프로세싱에 의해 지연된, 컨텐츠 또는 정보의 적시성(timeliness)의 양을 지칭할 수 있다.
보여질 바와 같이, 예를 들어, 실내 또는 유사 환경에서, 가령, 로고 검출을 통해, 모바일 디바이스의 포지션을 추정하기 위해 이미지 캡쳐 능력이 적어도 부분적으로 사용될 수 있다. 본원에 사용된 바와 같이, "로고", "시각적 서명", "브랜드-특정 시각적 서명", 또는 "텍스트 라벨"은 상호교환가능하게 사용될 수 있고, 상업적으로 또는 다른 방식으로, 하나 이상의 시각적 엘리먼트들의 상대적으로 균일한 표현 또는 사용의 일치성에 적어도 부분적으로 기초하여 식별되거나 인지될 수 있는 하나 이상의 시각적 엘리먼트들을 지칭할 수 있다. 일부 경우들에서, 로고는, 예를 들어, 상품 또는 서비스를 다른 상품들 또는 서비스들과 구별하거나, 또는 이러한 상품 또는 서비스의 소스를 표시하기 위해, 상점들, 커피숍들, 소매 아울렛들, 은행들 등과 같은, 하나 이상의 관심 포인트(POI)들에서 제공되는 이러한 상품 또는 서비스와 연관될 수 있다. 때때로, 로고는 도시 계획 또는 대중교통-관련 인프라구조와 같은 적절한 인프라구조와 연관될 수 있는데, 예를 들어, 길모퉁이, 교차로, 건물 등과 같은 하나 이상의 관심 포인트들에 제공될 수 있다. 로고는 또한, 단지 또 다른 가능한 구현예를 예시하자면, 예를 들어, 빌딩 외관의 특정 부분(예를 들어, 정면, 측면, 후면 등)과 같은 적절한 인프라구조의 특성을 나타낼 수 있다. 다시 말해, 본 명세서의 상황에서, "로고"는 넓게 해석될 것이며, 가령, 하나 이상의 컴퓨터 비젼 또는 유사한 방식들을 통해 전자적으로 식별될 수 있는, 예를 들어, 실내 또는 유사한 환경에서 하나 이상의 포지셔닝 동작들을 용이하게 하거나 지원할 수 있는 임의의 시각적 엘리먼트를 포함할 수 있다.
예시로서, 로고는, 예를 들어, 상표, 상품명, 건물의 트레이드 드레스(trade dress)(예를 들어, 정면, 스토어프론트 등), 신호체계(예를 들어, 교통 신호, 거리 지명, 규제 픽토그래프(pictograph) 등), 로고타입 또는 워드마크, 심볼, 아이콘, 상징(emblem), 뱃지 등을 포함할 수 있다. 일부 경우들에서, 로고는, 예를 들어, 로고의 형상, 컬러, 사이즈, 텍스트, 텍스트 사이즈, 시각적 엘리먼트들의 배치 또는 배열 등에 대한 로고의 균일성 또는 사용의 일치성에 적어도 부분적으로 기초하여 식별되거나 인식될 수 있다. 때때로, 로고는, 예를 들어, 동적 로고를 포함할 수 있는데, 이는 이러한 로고의 컨텐츠 또는 상황이 특정 세팅, 하루 중 시간, 계절, 위치, 조명 조건들, 상품, 서비스 등에 따라 변경할 수 있음을 의미한다. 제한이 아닌 예시로서, 일부 경우들에서, Gap®, GapOutlet®, GapKids®, babyGap®, GapMaternity® 등과 같은 브랜드-특정 시각적 서명들은 동적 로고를 나타낼 수 있다. 동적 로고의 변경들이, 애플리케이션, 환경, 시각적 특징 추출 기법들, 로고 검출 방식들 등에 적어도 부분적으로 의존할 수 있는, 상이한 로고들로 간주될 수 있거나 간주되지 않을 수 있다는 점이 인지되어야 한다. 물론, 이들은 단지 로고에 관련된 예들이며, 청구된 발명 대상은 그렇게 제한되지 않는다.
이전에 언급된 바와 같이, 예를 들어, 더 큰 실내 또는 유사 영역들, 상대적으로 조밀한 환경들(예를 들어, 쇼핑 몰들, 팩토리 아울렛 등) 등에서와 같은 일부 경우들에서, 특정 모바일 디바이스들은 정확한 또는 다른 방식으로 충분한 포지셔닝을 용이하게 하거나 지원하기 위해 공지된 송신기들로부터 필수적인 무선 신호들을 신뢰가능하게 수신하거나 획득하지 못할 수 있다. 예를 들어, 무선 신호들은 감쇠되거나 그렇지 않은 경우 일부 방식으로 영향을 받을 수 있는데(예를 들어, 불충분함, 약함, 단편적임, 차단됨 등), 이는 주어진 포지션 추정 기법으로 무선 신호들의 사용을 불가능하게 할 수 있다. 이로써, 때때로, 특정 모바일 디바이스들의 포지셔닝 능력들은 덜 유용하거나 어쩌면 흠이 있을 수 있다. 용어들 "포지션" 및 "위치"가 본원에서 상호교환가능하게 사용될 수 있다는 점에 유의해야 한다.
예를 들어, 대략적인 위치와 함께 관심 영역의 디지털 맵(예를 들어, 쇼핑몰의 층별 배치도 등)과 같은 특정 보조 정보를 제공하는 것은, 예를 들어, 일부 상황, 기준 프레임 등을 설정함으로써 모바일 디바이스 로컬화를 부분적으로 보조할 수 있다. 따라서, 모바일 디바이스는, 예를 들어, 연관된 사용자가 관심 영역의 특정 건물, 건물의 일부분 내에, 특정 층 등에(예를 들어, 워싱턴 스퀘어 몰의 푸드 코트, 북쪽 종단 등의 근처에 등) 위치된다는 것을 대략적으로 추정할 수 있다. 그러나, 더욱 정확하거나 다른 방식으로 충분한 실내 포지셔닝을 용이하게 하거나 지원하기 위해, 때때로, 이전에 언급된 바와 같이, 액세스 포인트들, 무선 태그들, 그리드 포인트들 등과 같은 공지된 기준 포인트들로부터의 일부 추가 정보(예를 들어, 신호 강도, 왕복 지연 등)가 요구되거나 또는 다른 방식으로 유용할 수 있다. 그러나, 가령, 더 크거나 더 조밀한 실내 영역들 내의 무선 송신기들의 부적합하거나 덜 충분한 분포는, 예를 들어, 또한 표시된 바와 같이, 추정된 위치의 정확성을 감소시키거나 또는 다른 방식으로 영향을 줄 수 있다. 일부 경우들에서, 열 맵-관련 정보는, 이용가능한 경우 유용할 수 있지만, 다소 부피가 크거나 또는 포괄적이어서 모바일 디바이스의 무선 통신 링크들에서의 이용가능한 대역폭, 메모리 공간, 배터리 수명 등에 부담을 줄(tax) 수 있다. 따라서, 가령, 실내 또는 유사한 환경에서 더욱 정확하고, 정밀하고, 강건하거나, 또는 다른 방식으로 유용한 포지셔닝을 용이하게 하거나 지원할 수 있는 하나 이상의 방법들, 시스템들 또는 장치들을 개발하는 것이 바람직할 수 있다.
구현예에서, 예를 들어, 특정 실내 또는 유사한 관심 영역의 층별 배치도에 매핑된 하나 이상의 공지된 POI들을 나타내는 기준 로고들과 같은, 적절한 로고들의 세트가 획득될 수 있다. 하기에 설명된 바와 같이, 기준 로고들은 예를 들어, 모바일 디바이스의 카메라 뷰에 동시에 보여지는 하나 이상의 POI들과 연관된 브랜드-특정 시각적 서명들의 하나 이상의 캡쳐된 이미지들로부터 추출된 시각적 특징들에 대해 매칭될 수 있다. 예를 들어, 모바일 디바이스의 배향은, 가령, 하나 이상의 연관된 센서들을 통해 결정될 수 있고, 하나 이상의 도시된 POI들에 대한 포즈가 추정될 수 있다. 일부 경우들에서, 포즈는, 예를 들어, 하나 이상의 도시된 POI들에 대한 가시선 각도에 적어도 부분적으로 기초하여 추정될 수 있다. 예를 들어, 특정 실내 또는 유사한 관심 영역의 층별 배치도로 매핑되고 매칭된 시각적 특징들과 연관된 하나 이상의 도시된 POI들과 같은, 하나 이상의 POI들의 추정된 포즈 및 공지된 위치들에 적어도 부분적으로 기초하여, 모바일 디바이스의 추정된 위치가 계산될 수 있다. 때때로, 모바일 디바이스의 추정된 위치는, 예를 들어, 또한 보여질 바와 같이, 가령, 라이브 카메라 뷰에 동시에 보여지는 적어도 하나의 추가적인 POI의 시각적 특징들의 매칭을 통해 정제(refine)될 수 있다.
도 1은, 가령, 로고 검출을 통해서 모바일 디바이스(102)의 포지션 추정을 위한 하나 이상의 프로세스들 또는 동작들을 용이하게 하거나 지원할 수 있는 예시적인 동작 환경(100)의 구현예와 연관된 특징들을 예시하는 개략도이다. 동작 환경(100)이, 공중 네트워크들(예를 들어, 인터넷, 월드 와이드 웹), 개인 네트워크들(예를 들어, 인트라넷들), 무선 로컬 영역 네트워크들(WLAN 등) 등과 같은 다양한 통신 네트워크들 또는 네트워크들의 조합의 상황에서, 완전히 또는 부분적으로, 구현될 수 있는 비-제한적인 예로서 본원에 설명된다는 점이 인지되어야 한다. 또한, 청구된 발명 대상이 실내 구현예들에 제한되지 않는다는 점에 유의해야 한다. 예를 들어, 때때로, 본원에 기재된 하나 이상의 동작들 또는 기법들이, 어번 캐니언, 타운 스퀘어들, 원형 극장들, 주차장들, 옥상 가든들, 파티오들 등과 같은 부분적으로 또는 실질적으로 밀폐된(enclosed) 영역들을 포함할 수 있는 실내-유사 환경에서 적어도 부분적으로 수행될 수 있다. 때때로, 본원에 기재된 하나 이상의 동작들 또는 기법들은 실외 환경에서 적어도 부분적으로 수행될 수 있다.
예시된 바와 같이, 동작 환경(100)은, 예를 들어, 하나 이상의 통신 프로토콜들에 따라 무선 통신 링크들(110)을 통해 모바일 디바이스(102)와 통신할 수 있는 하나 이상의 위성들(104), 베이스 트랜시버 스테이션들(106), 무선 송신기들(108) 등을 포함할 수 있다. 위성들(104)은, 예를 들어, 미국 글로벌 포지셔닝 시스템(GPS), 러시아 GLONASS 시스템, 유럽 갈릴레오 시스템, 뿐만 아니라, 위성 시스템들의 조합으로부터의 위성들을 이용할 수 있는 임의의 시스템, 또는 미래에 개발될 임의의 위성 시스템과 같은, 하나 이상의 위성 포지셔닝 시스템들(SPS)과 연관될 수 있다. 베이스 트랜시버 스테이션들(106), 무선 송신기들(108) 등은 예를 들어, 동일하거나 유사한 타입일 수 있거나, 또는 구현예에 따라 액세스 포인트들, 라디오 비컨들, 셀룰러 기지국들, 펨토 셀들 등과 같은 상이한 타입들의 디바이스들을 나타낼 수 있다. 때때로, 예를 들어, 무선 송신기들(108)과 같은 하나 이상의 무선 송신기들은 무선 신호들을 전송 및 수신할 수 있을 수 있다.
일부 경우들에서, 하나 이상의 베이스 트랜시버 스테이션들(106), 무선 송신기들(108) 등은, 가령 하나 이상의 통신 링크들(114)을 통해, 예를 들어, 적절한 또는 원하는 정보를 제공할 수 있는 하나 이상의 유선 또는 무선 통신 또는 컴퓨팅 네트워크들을 포함할 수 있는 네트워크(112)에 동작 가능하게 커플링될 수 있다. 보여질 바와 같이, 정보는, 예를 들어, 단지 한가지 가능한 구현예를 예시하자면, 관련된 POI들을 실내 또는 유사한 관심 영역 내의 공지된 위치들 및 이들 POI들에 부여된 브랜드-특정 시각적 서명들과 연관시키는 보조 정보를 포함할 수 있다. 때때로, 보조 정보는, 예를 들어, 동작 환경(100)과 연관된 하나 이상의 동작들 또는 프로세스들을 용이하게 하거나 지원하기 위한 하나 이상의 베이스 트랜시버 스테이션들(106), 무선 송신기들(108) 등의 신원들 또는 위치들을 포함할 수 있다. 예시에 의해, 보조 정보는, 예를 들어, 애플리케이션, 네트워크, 환경, 로고 검출 또는 시각적 특징 추출 기법 등에 적어도 부분적으로 의존할 수 있는, 디지털 맵, 룩업 테이블, 수학 공식, 적절한 모델, 알고리즘 등의 형태로 제공될 수 있다. 구현예에서, 네트워크(112)는, 예를 들어, 모바일 디바이스(102), 하나 이상의 베이스 트랜시버 스테이션들(106), 무선 송신기들(108), 뿐만 아니라, 동작 환경(100)과 연관된 하나 이상의 서버들과 같은 적절한 컴퓨팅 플랫폼들 또는 디바이스들 사이의 통신들을 용이하게 하거나 지원할 수 있을 수 있다. 일부 경우들에서, 서버들은, 예를 들어, 위치 서버(116), 시각적 보조 서버(118), 뿐만 아니라, 동작 환경(100)과 연관된 하나 이상의 동작들 또는 프로세스들을 용이하게 하거나 지원할 수 있는, 일반적으로 120에서 표시된 하나 이상의 다른 서버들(예를 들어, 내비게이션, 정보, 맵 등의 서버 등)을 포함할 수 있다.
하기에 더 상세하게 설명될 바와 같이, 위치 서버(116)는, 예를 들어, 동작 환경(100)과 연관된, 가령 실내 또는 유사한 관심 영역 내의 모바일 디바이스(102)의 대략적 위치를 제공할 수 있다. 추가로, 때때로, 보여질 바와 같이, 위치 서버(116)는, 예를 들어, 특정 실내 또는 유사한 관심 영역에 대한 위치 상황 식별자(LCI)를 제공할 수 있다. 예를 들어, 하나의 가능한 구현예를 예시하자면, LCI는 글로벌 좌표 시스템에 따라 매핑되지 않는 건물의 특정 층 또는 다른 실내 또는 유사한 관심 영역과 같은, 로컬로 정의된 영역을 포함할 수 있거나 또는 로컬로 정의된 영역과 연관될 수 있다. 따라서, 일부 경우들에서, 가령, 실내 또는 유사 관심 영역의 입구에서 또는 진입 시에, 예를 들어, 모바일 디바이스(102)는, 원하는 경우, 영역 또는 인접 영역들을 커버하는 하나 이상의 LCI들을 제공하기 위한 요청을 위치 서버(116)에 통신할 수 있다. 여기서, 요청은, 예를 들어, 위치 서버(116)가 모바일 디바이스(102)의 대략적 위치를 하나 이상의 LCI들에 의해 커버되는 실내 또는 유사 영역들과 연관시키고, 이후 관련 LCI들을 모바일 디바이스(102)에 통신하도록, 표시된 바와 같이, 모바일 디바이스(102)의 대략적 위치를 참조하거나 또는 다른 방식으로 포함할 수 있다. 일부 경우들에서, 모바일 디바이스(102)는 예를 들어, 하나 이상의 관련 LCI들에 의해 식별되는 영역에 관련된 내비게이션, 맵 또는 유사한 정보(예를 들어, 디지털 맵, 무선 송신기들의 위치들 또는 신원들, 라디오 또는 열 맵들, 라우팅가능성(routeability) 그래프들 등)를 획득하기 위해, 서버(120)와 같은 적절한 서버를 이용하여, 후속하는 메시지들에서, 완전히 또는 부분적으로, 공지된 위치들을 가지는 하나 이상의 수신된 LCI들을 이용할 수 있다. 또한 보여질 바와 같이, 시각적 보조 서버(118)는, 예를 들어, 브랜드-특정 시각적 서명들을 공지된 위치들을 가지는 하나 이상의 관련 POI들과 연관시키는 표, 그래프, 또는 다른 유사 정보 구조와 같은, 시각적 보조 정보를 제공할 수 있지만, 청구된 발명 대상은 그렇게 제한되지 않는다. 예를 들어, 일부 경우들에서, 시각적 보조 정보는 영역 내에 위치된 하나 이상의 관련 POI들(예를 들어, 스토어들, 소매상들 등)을 식별하기 위해 특정 실내 또는 유사한 관심 영역의 층별 배치도로 매핑된 스토어 명칭들, 브랜드들, 스토어프론트 외관들을 나타내는 로고들의 세트를 포함할 수 있다.
특정 개수의 컴퓨팅 플랫폼들 또는 디바이스들이 본원에 예시되어 있지만, 임의의 개수의 적절한 컴퓨팅 플랫폼들 또는 디바이스들이 동작 환경(100)과 연관된 하나 이상의 기법들 또는 프로세스들을 용이하게 하거나 또는 다른 방식으로 지원하기 위해 구현될 수 있다. 예를 들어, 때때로, 네트워크(112)는 모바일 디바이스(102), 하나 이상의 베이스 트랜시버 스테이션들(106), 무선 송신기들(108), 서버들(116, 118, 120) 등과의 통신을 위한 커버리지 영역을 늘리기(enhance) 위해 하나 이상의 유선 또는 무선 통신 네트워크들(예를 들어, Wi-Fi 등)에 커플링될 수 있다. 일부 경우들에서, 네트워크(112)는 예를 들어, 펨토셀-기반 동작 커버리지 영역들을 용이하게 하거나 지원할 수 있다. 다시, 이들은 단지 예시적인 구현예들이며, 청구되는 발명 대상은 이러한 견지에서 제한되지 않는다.
표시된 바와 같이, 가령, 하나 이상의 로고 검출 동작들과 관련하여 모바일 디바이스의 추정된 위치를 계산하기 위해, 예를 들어, 일부 경우들에서, 실내 또는 유사 환경 내에서의 모바일 디바이스의 배향을 결정하는 것이 유용할 수 있다. 이러한 상황에서, "배향"은 예를 들어, 고정된 포인트 및 기준 포지션을 가지는, 기준의 일부 프레임에 대한 모바일 디바이스의 상대적 배치를 지칭할 수 있다. 통상적으로, 필수적이지는 않지만, 배향은, n-차원 공간 내에서, 각각, 특정 방향(들) 또는 포인트(들)에 대한 하나 이상의 각도들 또는 벡터들을 통해, 적어도 부분적으로, 정의되거나 특정될 수 있다. 보여질 바와 같이, 모바일 디바이스의 배향을 아는 경우에, 모바일 디바이스는, 예를 들어, 디바이스의 라이브 카메라 뷰에 보여지는 하나 이상의 POI들의 브랜드-특정 시각적 서명들에 대한 포즈를 추정할 수 있을 수 있고, 모바일 디바이스의 포지션을 계산할 수 있다.
따라서, 모바일 디바이스는, 예를 들어, 하나 이상의 로고 검출 동작들 또는 기법들을 용이하게 하거나 지원하기 위한, 디바이스와 연관된 응용 프로세서와 같은, 적절한 프로세서에 측정 신호들을 제공할 수 있는 하나 이상의 센서들을 특징으로 할 수 있다. 예를 들어, 모바일 디바이스는, 중력의 방향, 공간적 배향, 선형 또는 각 모션, 주변 환경, 또는 디바이스에 의해 경험되는 다른 힘 또는 필드를 측정할 수 있는, 하나 이상의 가속계들, 자이로스코프들, 자력계들, 주변광 검출기들, 근접도 센서들, 기압계들 등을 특징으로 할 수 있다. 센서들이, 예를 들어, 개별적으로 이용될 수 있거나, 또는, 가령, 모바일 디바이스의 배향, 위치를(예를 들어, 장소 층을 나타내는 기압 측정들 등을 통해) 대략적으로 또는 다른 방식 등으로 표시하는 측정 신호들을 제공하기 위해, 다른 센서들과 결합하여 사용될 수 있는데, 이는 애플리케이션, 환경, 로고 검출 또는 시각 특징 추출 방식들 등에 의존할 수 있다. 이것은, 보여질 바와 같이, 가령, 관심 있는 소매상, 아울렛 등이 동일하거나 유사한 브랜드-특정 시각적 서명들을 가지는 다수의 입구들, 층들, 스토어프론트들 등을 가지는 경우, 적어도 부분적으로 모바일 디바이스 로컬화를 용이하게 하거나 지원할 수 있다. 예를 들어, 가속계는 지구 중심을 향한 중력의 방향을 감지할 수 있고, 디멘젼들로서 데카르트 좌표 공간들 또는 축들 X, Y 및 Z로 종종 참조되는 하나, 둘 또는 세 개의 방향들에 관련하여 모션을 검출 또는 측정할 수 있다. 선택적으로 또는 대안적으로, 가속계는 또한, 예를 들어, 다양한 가속들의 크기의 측정들을 제공할 수 있다. 자이로스코프는 코리올리 효과(Coriolis effect)를 이용할 수 있고, 롤(roll), 피치(pitch) 또는 요(yaw) 디멘젼들로 각속도 측정들을 제공할 수 있고, 예를 들어, 방위(heading) 또는 방위각 변경들을 결정하는 애플리케이션들에서 사용될 수 있다. 자력계는 X, Y, Z 디멘젼들에서 자기장의 방향을 측정할 수 있고, 예를 들어, 다양한 내비게이션 애플리케이션들에서 정북쪽 또는 절대적 방위를 감지할 시에 사용될 수 있다.
도 2는, 예를 들어, 모바일 디바이스(202)의 배향과 같은 실내 포지셔닝을 위한 로고 검출을 위한 하나 이상의 동작들 또는 기법들을 용이하게 하거나 지원하기 위해, 전체적으로 또는 부분적으로 사용될 수 있는 예시적인 좌표 시스템(200)의 구현예를 예시한다. 예시된 바와 같이, 예시적인 좌표 시스템(200)은, 예를 들어, 3차원 데카르트 좌표 시스템을 포함할 수 있지만, 청구된 발명 대상은 그렇게 제한되지 않는다. 여기서, 모바일 디바이스(202)의 모션의 하나 이상의 변형(translational) 양상들은, 예를 들어, 예시적인 좌표 시스템(200)의 원점(204)에 대해 3차원 또는 축 X, Y 및 Z에 관련하여, 3D 가속계와 같은 적절한 가속계에 의해 적어도 부분적으로 검출되거나 측정될 수 있다. 중력에 대한 배향 변경들과 같은, 모바일 디바이스(202)의 모션의 하나 이상의 회전 양상들은, 또한, 1차원 또는 2차원에 관해 적절한 가속계에 의해 적어도 부분적으로 검출되거나 측정될 수 있다. 예를 들어, 모바일 디바이스(202)의 회전 모션은 좌표 (φ, τ)의 견지에서 검출되거나 측정될 수 있고, 여기서, 206에서 화살표에 의해 일반적으로 예시된 바와 같이, 파이(φ)는 X축을 중심으로 한 회전 또는 롤을 나타내고, 타우(τ)는, 208에서 일반적으로 예시된 바와 같이, Y축을 중심으로 한 회전 또는 피치를 나타낸다. 따라서, 여기서, 3D 가속계는, 예를 들어, 롤 또는 피치 디멘젼들에 관련하여 중력의 방향 뿐만 아니라 중력에 대한 변경을 적어도 부분적으로 검출 또는 측정할 수 있고, 따라서, 관측가능성의 5개 디멘젼들(X, Y, Z, φ, τ)을 제공한다. 그러나, 이들이 단지 예시적인 좌표 시스템(200)에 관련하여 가속계에 의해 적어도 부분적으로 검출되거나 측정될 수 있는 다양한 모션들의 예들이며, 청구된 발명 대상이 이들 특정 모션들 또는 좌표 시스템에 제한되지 않는다는 점이 이해되어야 한다.
때때로, 모바일 디바이스(202)의 모션의 하나 이상의 회전 양상들은, 단지 또 다른 가능한 구현예를 예시하자면, 예를 들어, 적합한 정도들의 관측가능성을 제공할 수 있는 적절한 자이로스코프에 의해 적어도 부분적으로 검출되거나 측정될 수 있다. 예를 들어, 자이로스코프는 1차원, 2차원 또는 3차원을 참조하여 모바일 디바이스(202)의 회전 모션을 검출 또는 측정할 수 있다. 따라서, 자이로스코프 회전은, 예를 들어, 좌표들(φ, τ, ψ)의 견지에서 적어도 부분적으로 검출되거나 측정될 수 있고, 여기서, 일반적으로 210에서 참조되는 바와 같이, 파이(φ)는 X 축을 중심으로 한 회전(206) 또는 롤을 나타내고, 타우(τ)는 Y축을 중심으로 한 회전(208) 또는 피치를 나타내고, 싸이(ψ)는 Z축을 중심으로 한 회전 또는 요를 나타낸다. 자이로스코프는 통상적으로, 필수적이지는 않지만, 예를 들어, 카메라 뷰에 보여지는 하나 이상의 POI들에 대한 포즈를 결정하기 위해 적어도 부분적으로 사용될 수 있는 각도 변경들의 견지에서 측정들을 제공할 수 있다. 물론, 예시적인 좌표 시스템(200)에 관련된 다양한 회전 모션들에 관한 상세항목들은 단지 예시들이며, 청구된 발명 대상은 그렇게 제한되지 않는다.
모바일 디바이스(202)의 배향이, 예를 들어, 좌표들의 원점 또는 중심이 모바일 디바이스(202)에 고정되어 모바일 디바이스(202)와 함께 움직이는 로컬 좌표 시스템과 같은, 임의의 적절한 좌표 시스템에 관련하여 결정되거나 추정될 수 있다는 점이 인지되어야 한다. 선택적으로 또는 대안적으로, 예를 들어, 좌표들의 지오(geo)-중심 또는 지구 중심 시스템을 이용하는 글로벌 기준 시스템이 적어도 부분적으로 사용될 수 있다. 때때로, 기준 프레임의 축이 예를 들어, 쇼핑 몰 내의 복도, 통로 등과 같은 실내 또는 유사한 관심 영역의 일부 구조 엘리먼트에 고정되거나 이와 함께 정렬될 수 있는 상대적 좌표 시스템이 사용될 수 있다. 일부 경우들에서, 좌표 시스템은 상호 직교하는 디멘젼들을 정의할 수 있다. 물론, 사용될 수 있는 좌표 시스템들에 관한 상세항목들은 단지 예시들이며, 청구된 발명 대상은 이러한 견지에서 제한되지 않는다. 또한, 일부 구현예들에서, 모바일 디바이스(202)가 실내 포지셔닝을 위한 로고 검출을 위한 하나 이상의 동작들 또는 프로세스들을 용이하게 하거나 지원하도록 열거된 센서들을 넘는 다른 센서들을 포함할 수 있다는 점에 유의해야 한다. 예를 들어, 모바일 디바이스(202)는 주변광 검출기, 근접도 센서, 온도 센서, 기압 센서, 자기 나침반 등을 포함할 수 있다.
이를 염두에 두고, 예를 들어, 실내 또는 유사 환경에서, 가령 로고 검출을 통해, 모바일 디바이스의 포지션을 추정하기 위해 전체적으로 또는 부분적으로 수행될 수 있는 예시적인 프로세스(300)의 구현예의 요약을 예시하는 흐름도인 도 3에 대해 이제 주목된다. 예를 들어, 예시적인 프로세스(300)와 연관된 입력 신호들, 출력 신호들, 동작들, 결과들 등과 같이 획득되거나 생성된 정보가 하나 이상의 디지털 신호들을 통해 표현될 수 있다는 점에 유의해야 한다. 또한, 하나 이상의 동작들이 동시에 또는 특정 시퀀스에 관련하여 예시되거나 설명되지만, 다른 시퀀스들 또는 동시적 동작들이 사용될 수 있다는 점이 인지되어야 한다. 추가로, 하기 기재가 특정 다른 도면들에서 예시된 특정 양상들 또는 특징들을 참조하지만, 하나 이상의 동작들은 다른 양상들 또는 특징들과 함께 수행될 수 있다.
예시적인 프로세스는, 예를 들어, 모바일 디바이스의 카메라 뷰에서 실내 또는 유사한 관심 영역(예를 들어, 스토어프론트들 등)과 연관된 하나 이상의 POI들을 나타내는 하나 이상의 로고들의 라이브 비디오 이미지를 캡쳐하는 동작(302)에서 시작할 수 있다. 표시된 바와 같이, 비디오 이미지는, 스크린 또는 디스플레이에 이러한 이미지의 동시적 또는 실시간 디스플레이를 위해 라이브 비디오 이미지를 캡쳐할 수 있는 카메라 센서 또는 유사한 디바이스와 같은, 임의의 적절한 비디오 감지 기술을 통해 캡쳐될 수 있다. 예를 들어, 도 4에 예시된 바와 같이, 모바일 디바이스(400)의 사용자는 예를 들어, 특정 스토어프론트, 로고 등을 향한 카메라 센서(402)와 같은 연관된 이미지 캡쳐 디바이스를 포인팅 또는 에이밍(aim)할 수 있거나, 또는 화살표들(406)을 통해 일반적으로 참조되는 바와 같이, 주변환경 주위에서 패닝하여, 디스플레이(408)에서 실내 또는 유사 환경의 라이브 비디오 이미지를 동시에 볼 수 있다. 통상적으로, 필수적이지는 않지만, "패닝"은 디스플레이 영역 내의 컨텐츠를 리포지셔닝(re-position) 또는 리센터링(re-center)하기 위해 디바이스, 모바일을 이동시키거나 조작하는 것 또는 다른 방식을 지칭할 수 있다. 예를 들어, 패닝은 편의상 디스플레이 영역 내에 디스플레이되거나 보일 상대적으로 크거나 작을 수 있는 컨텐츠를 통해 내비게이팅하기 위해 사용될 수 있다. 이러한 예시된 예에서, 디스플레이(408)는 예를 들어, 410에서 양방향 화살표를 통해 일반적으로 표시된, 시야를 정의하는, 카메라 센서(402)에 대한 뷰 파인더로서 적어도 부분적으로 사용될 수 있다.
도 4에서 계속하여, 구현예에서, 실내 또는 유사한 관심 영역과 연관된 하나 이상의 로고들(예를 들어, Aldo®, Gap® 등)을 보거나 캡쳐하기 위해, 예를 들어 패닝 시퀀스를 통해 획득된 일련의 비디오 프레임들이 캡쳐될 수 있다. 비디오 프레임들은, 적어도 부분적으로, 임의의 적절한 컴퓨터 비젼 또는 유사한 시각적 특징 추출 기법들을 사용하여 모바일 디바이스(400)의 카메라 뷰에 동시에 보여지는 로고들(예를 들어, Aldo®, Gap® 등)의 하나 이상의 캡쳐된 이미지들로부터 시각적 특징들을 추출하기 위해 사용될 수 있다. 일부 경우들에서, 시각적 특징들을 추출하기 위해 어떠한 카메라 액츄에이션(예를 들어, 사진 촬영 등)도 요구되지 않거나 다른 방식으로 유용하지 않을 수 있다는 점에 유의해야 한다. 예를 들어, 하나 이상의 로고들과 연관된 특징들은 모바일 디바이스(400)를 패닝하고, 포인팅하거나 또는 다른 방식으로 이동하는 동안 추출될 수 있다. 시각적 특징들은, 단지 몇몇 예들을 들자면, SIFT(Scale-Invariant Feature Transform), SURF(Speeded-Up Robust Feature), NFT(Nearest Feature Trajectory) 등, 또는 예를 들어, 등록상표 코너 검출-타입 기법들과 같은 임의의 적절한 기법 또는 방식을 사용하여 추출될 수 있다. 청구된 발명 대상은 물론, 이들 방식들에 제한되지 않는다. 일부 경우들에서, 가령, 특정 추출된 특징들이 (예를 들어, 시각적 서명 매칭, 포지션의 계산 등을 위해) 충분하거나 또는 다른 방식으로 유용하기 않는 경우, 모바일 디바이스(400)는 반복되는 패닝, 더 느린 속도로 패닝, 더 큰 영역을 패닝하는 것 등을 위해 사용자를 조장할 수 있다. 시각적 특징 추출이 모바일 디바이스 적합 서버(예를 들어, 도 1의 시각적 보조 서버(118) 등)에서 또는 모바일 디바이스 적합 서버에 의해, 또는 이들의 임의의 조합으로 구현될 수 있다는 점에 유의해야 한다.
도 3을 다시 참조하면, 동작(304)에서, 예를 들어, 현재 장소에 대한 보조 정보와 같은 적절한 보조 정보가 획득될 수 있다. 이 상황에서, 현재 "장소"는 현장, 빌딩(예를 들어, 쇼핑 몰, 소매 아울렛 등), 현장, 빌딩 등 내의 일반적인 영역, 또는 다른 부분적으로 또는 실질적으로 밀폐된 영역(예를 들어, 어번 캐니언 등)과 같이, 모바일 디바이스와 연관된 임의의 적절한 실내 또는 유사한 관심 영역을 지칭할 수 있다. 일부 경우들에서, 보조 정보는, 예를 들어, 현재 장소, 적용가능한 맵 또는 장소 정보 등과 연관된 무선 송신기들의 신원들 또는 위치들, 기준 포인트들 등을 포함할 수 있다. 맵 또는 장소 정보는, 예를 들어, 장소의 벽들, 룸들, 문들, 통로들, 엘리베이터들, 계단들, 사다리들, 바닥들, 천장들과 같은 하나 이상의 구조적 특징들을 식별하는 모바일 디바이스와 연관된 장소의 디지털 맵(예를 들어, 층별 배치도들 등)을 포함할 수 있다. 선택적으로 또는 대안적으로, 맵 또는 장소 정보는, 예를 들어, 동작(316)에서와 같은, 다른 보조 정보와는 별도로 제공될 수 있지만, 청구된 발명 대상은 그렇게 제한되지 않는다.
동작(306)에서 참조된 바와 같이, 일부 경우들에서, 보조 정보는, 예를 들어, 사용자 입력, SPS로부터 획득된 최근 포지션 픽스 등에 적어도 부분적으로 기초하여 획득된 모바일 디바이스의 대략적 위치를 포함할 수 있다. 이전에 언급된 바와 같이, 대략적 위치는 예를 들어, 모바일 디바이스가 공지된 위치들에 포지셔닝된 송신기들로부터 필수적인 무선 신호들을 신뢰가능하게 수신하거나 획득할 수 없는 경우들에서 유용할 수 있다. 때때로, 보조 정보는, 예를 들어, 도 1의 서버들(116, 118 또는 120)과 같은 하나 이상의 적절한 서버들과의 통신을 통해 획득될 수 있지만, 청구된 발명 대상이 그렇게 제한되지 않는다. 예를 들어, 보조 정보는, (예를 들어, 모바일 디바이스 등에 의한) 요청 시에 획득될 수 있고, 실내 또는 유사한 관심 영역에 진입할 시에 또는 진입한 이후에, 임의의 적절한 푸시 또는 풀 기법 등을 통해 모바일 디바이스에 (예를 들면, 캐시, 메모리 등 내에) 사전 패치되거나(pre-fetch) 또는 사전 로딩될 수 있다. 동작(306)이 특정 예시적인 구현예들에서 선택적일 수 있다는 점에 유의해야 한다.
일부 경우들에서, 모바일 디바이스의 대략적 위치에 적어도 부분적으로 기초하여, 위치 상황 식별자는, 예를 들어, 보조 정보의 일부로서 또는 보조 정보와 관련하여 디바이스에 의해 사용하기 위해 결정되고 제공될 수 있다. 본원에서 사용된 바와 같이, "위치 상황 식별자"(LCI)는 모바일 디바이스의 대략적 위치와 관련되거나 다른 방식으로 대응할 수 있는 로고들의 세트를 가지는 실내 또는 유사 관심 영역의 특정 부분을 지칭할 수 있다. 예를 들어, LCI는 모바일 디바이스의 대략적 위치 주변의, 그리고 쇼핑몰의 섹션, 윙 또는 빌딩의 층 등에 적용가능한 하나 이상의 POI들을 식별하는 로고들의 세트를 가지는, 쇼핑몰의 섹션 또는 윙, 빌딩의 층, 또는 유사한 영역을 포함할 수 있다. 모든 또는 대부분의 연관된 POI들에 대한 로고들을 가지는 전체 영역 대신에 하나 이상의 관련된 POI들을 식별하기 위한 로고들의 더 작은 세트를 관심 영역의 일부에 제공함으로써, 예를 들어, 더 작은 컴퓨팅 또는 통신 자원들(예를 들어, 대역폭, 메모리, 동작 수명, 다운로드 속도 등)이 유리하게 이용될 수 있다. 구현예에 따라, LCI에 의해 커버되는 영역에 대한 보조 정보는, 예를 들어, 하나 이상의 관련 POI들, 관련 POI들의 위치들, 뿐만 아니라, 이들 POI들에 부여된 브랜드-특정 시각적 서명들을 연관시킬 수 있는 적절한 정보 구조의 형태로 제공될 수 있다.
제한이 아닌 예시로서, 적어도 하나의 구현예에서 전체적으로 또는 부분적으로 이용될 수 있는 정보 구조가 도 5에 예시된다. 보여지는 바와 같이, 정보 구조는, 예를 들어, 스토어 ID 필드(502), 이미지 특징 필드(504), 및 위치 정보 필드(506)와 같은 다수의 필드들을 가지는 표(500)를 포함할 수 있지만, 청구된 발명 대상은 그렇게 제한되지 않는다. 스토어 ID 필드(502)는, 예를 들어, LCI와 연관된 특정 스토어와 같은 실내 또는 유사 환경을 식별할 수 있고, 이미지 특징 필드(504)는 이러한 스토어와 연관된 로고의 이미지로부터 유도된 브랜드-특정 시각적 서명들의 시각적 특징들을 포함할 수 있고, 위치 정보 필드(506)는 이러한 스토어의 위치(예를 들어, POI 등)를 식별하는 좌표들을 포함할 수 있다. 스토어 위치는 로컬 기준 데이터(예를 들어, 쇼핑 몰의 층별 배치도 등), 글로벌 기준 데이터(예를 들어, 지구-중심 좌표 등) 또는 이들의 임의의 조합에 대한 2차원(X, Y), 3차원(X, Y, Z) 좌표 시스템 등과 같은 임의의 적절한 좌표 시스템을 참조하여 식별될 수 있다. 일부 경우들에서, 정보 구조는, 또다른 가능한 구현예를 예시하자면, 예를 들어, 영역 내에 위치된 하나 이상의 관련 POI들을 식별하기 위해 LCI에 의해 커버되는 영역의 층별 배치도로 매핑되는 로고들의 세트를 가지는 디지털 맵의 형태일 수 있다. 선택적으로 또는 대안적으로, 정보 구조는, 예를 들어, 영역 내에 이들 POI들에 부여된 위치들을 모든 또는 대부분의 POI들과 연관시키는 로고들의 세트를 가지는, 쇼핑 몰, 소매 아울렛 등과 같은 전체 관심 영역을 포함할 수 있다.
일부 경우들에서, 표(500)와 같은 보조 정보는, 예를 들어, 적절한 POI들을 식별하기 위해 사용되는 하나 이상의 브랜드-특정 시각적 서명들을 포함하는 더 큰 데이터베이스 또는 유사한 정보 저장소로부터 유도될 수 있다. 예를 들어, 하나 이상의 스토어프론트들(예를 들면, POI들 등)을 식별하기 위해 하나 이상의 비즈니스 엔티티들(예를 들어, 스토어 체인, 소매 기업 등)에 의해 사용되는 로고들의 세트는 임의의 적절한 기법들을 사용하여 브랜드-특정 시각적 서명들의 중심 데이터베이스에서 수집될 수 있다. 실내 또는 유사한 관심 영역 내의 위치들과 POI들을 연관시키는 로고들의 세트는, 예를 들어, 군중-소싱 등을 통해 획득된 장소의 소유자에 의해 공급될 수 있다. 예시를 위해, 몰 쇼핑객들 또는 고객들은 원하는 작업들을 실행하고(그리고, 로고들, 스토어프론트 이미지들을 제공하고, POI들을 위치들과 연관시키는 등), 이렇게 하기 위해 일부 방식들로 보상될 수 있다. 일 구현예에서, 중심 데이터베이스는, 예를 들어, 도 1의 시각적 보조 서버(118)와 같은 적절한 서버와 연관된 시각적 보조 데이터베이스를 포함할 수 있다. 주어진 LCI에 대해, 시각적 보조 데이터베이스 내의 관련 POI들에 대한 하나 이상의 로고들은, 예를 들어, 하나 이상의 적절한 기법들을 사용하여 식별되고 추출될 수 있다. LCI에 의해 커버되는 영역이 스토어 체인에 대한 소매 스토어프론트와 같은 특정 비즈니스 엔티티와 연관되는 POI를 포함하는 경우, 예를 들어, 중앙 데이터베이스로부터의 대표적 브랜드-특정 시각적 서명은 표(500)와 같은 보조 정보 내로 포함될 수 있다.
다시 도 3을 참조하면, 동작(308)에서, 이미지 질의는 예를 들어, 로고 식별을 위해, 가령, 적합한 서버(예를 들어, 도 1의 서버(118, 120 등))에 제출될 수 있다. 더 구체적으로, 모바일 디바이스의 라이브 카메라 뷰에 보여지는 하나 이상의 POI들의 로고들의 하나 이상의 캡쳐된 이미지들로부터 추출된 시각적 특징들은 매치가 존재하는지의 여부를 결정하기 위해 적절한 데이터베이스(예를 들어, 시각적 보조 데이터베이스 등) 내의 기준 로고들과 비교될 수 있다. 보여지는 바와 같이, 일부 경우들에서, LCI 또는 관심 영역의 하나 이상의 파라미터들, 모바일 디바이스의 대략적 위치 등과 같은 적절한 보조 정보가 사용되거나 다른 방식으로 고려될 수 있다. 동작(310)에서, 가령, 질의에 응답하여, 하나 이상의 캡쳐된 로고 이미지들과 충분히 유사한 시각적 특징들을 가지는 로고들의 하나 이상의 후보 기준 이미지들은, 예를 들어, 임의의 적절한 시각적 특징 매칭 방식을 사용하여 톱 매치들로서 식별될 수 있다. 예를 들어, 톱 매치들은, 한가지 가능한 구현예들을 예시하자면, 적용가능한 로고 이미지들과 연관된 메타데이터, 상황 파라미터들(예를 들어, 하루 중 시간, 조명 조건들 등), 시각적 특징들 등의 가중된 비교에 적어도 부분적으로 기초하여 식별될 수 있다. 이용가능한 경우, 라이브 카메라 뷰에 보여지는 POI와 연관된 브랜드-특정 시각적 서명을 나타내는 로고의 최상의 또는 다른 방식으로 적절한 후보 이미지가, 가령, 모바일 디바이스, 적절한 서버 등에 의해 또는 모바일 디바이스, 적절한 서버 등에서 선택될 수 있다.
동작(312)에 관련하여, (예를 들어, LCI 등에 의해 식별가능한) 예를 들어, 모바일 디바이스의 대략적 위치 근처의 영역에 있는 것으로 알려진, 그리고 매칭된 로고와 연관된 POI들과 같은 하나 이상의 적절한 POI들이 식별될 수 있다. 하나 이상의 식별된 POI들은, 예를 들어, 동작들(314 및 316)을 통해 참조되는 바와 같이, 가령, 장소 맵 내의 하나 이상의 POI들의 룩 업을 통해, 최상의 또는 다른 방식으로 적절한 후보 이미지에 의해 표현되는 선택된 로고와 연관된 하나 이상의 특정 위치들에서 하나 이상의 POI들과 후속적으로 상관될 수 있다.
동작(318)에서, 모바일 디바이스의 배향을 아는 경우에, 가령 비디오 프레임들이 캡쳐되는 동안, 예를 들어, 라이브 카메라 뷰에서 보여지는 하나 이상의 POI들에 관련한 포즈가 하나 이상의 적절한 기법들을 사용하여 추정될 수 있다. 예시의 방식으로, 하나 이상의 적용가능한 알고리즘 또는 모델들(예를 들면, Levenberg-Marquardt, 3-포인트, 4-포인트 등, POSIT(pose from orthography and scaling with iterations) 알고리즘 등)을 이용하는, 예를 들어, 분석적, 기하학적, 대수적 또는 유사한 방식들이 완전히 또는 부분적으로 사용될 수 있다. 일부 경우들에서, 포즈는, 가령, 예를 들어, 카메라 뷰에 보여지며 관심 있는 하나 이상의 브랜드-특정 시각적 서명들을 매칭시키는, 하나 이상의 POI들에 대한, 모바일 디바이스의 가시선 각도에 적어도 부분적으로 기초하여 추정될 수 있다. 예를 들어, 도 4에 개략적으로 나타난 바와 같이, 때때로, 단지 한가지 가능한 구현예를 들자면, 가시선 각도는, 가령, 임의의 적절한 평면(예를 들어, 이미지 평면, 투사 평면 등) 내에서 412에서 파선-점선을 통해 참조되는 카메라 렌즈의 광학 축과 관련하여 추정될 수 있다. 제한이 아닌 예시로서, 예를 들어, 광학 축(412)과 정렬된 배향 벡터를 계산함으로써 배향 검출 프로세스를 적용하여, 연관된 POI를 식별하는 Aldo®의 브랜드-특정 시각적 서명에 대한 포즈가, 광학축(412) 및 로고 관측선(416)에 의해 형성된 각도(414)를 통해 추정될 수 있다. 마찬가지로, 연관된 POI를 식별하는 Gap®의 브랜드-특정 시각적 서명에 대한 포즈는 예를 들어, 418에서 참조되는 각도를 통해 추정될 수 있고, 광학 축(412) 및 로고 관측선(420)에 의해 형성될 수 있다. 물론, 이들은 단지 포즈 추정에 관한 상세항목이며, 청구된 발명 대상은 그렇게 제한되지 않는다.
다시 도 3을 참조하면, 동작(320)에서, 추정된 포즈 및 장소 맵과 관련하여 획득된 관심 있는 POI(예를 들어, Aldo® 등)의 공지된 위치에 적어도 부분적으로 기초하여, 예를 들어, 모바일 디바이스의 추정된 포지션이 계산될 수 있다. 일부 경우들에서, 모바일 디바이스의 포지션은, 예를 들어, 적절한 카메라-뷰-및-장소-맵-정렬-및-매핑 프로세스와 관련하여 계산될 수 있다. 예를 들어, 프로세스 동안, 하나 이상의 공지된 POI들은 특정 장소의 디지털 맵 상에 정렬되고, 그 위치가 사용자의 기준점인 카메라의 관점을 나타내거나 모델링(예를 들어, 모바일 디바이스와 연관됨 등)하기 위해 공통 좌표 시스템(예를 들어, 로컬, 글로벌 등)으로 매핑될 수 있다. 여기서, 예를 들어, 특정 장소의 토폴로지(예를 들어, 구조적 엘리먼트들, 영역 제한들 등), 장소 토폴로지에 기초한 로고에 대한 사용자의 잠재적 포지션 등을 설명할 수 있는 임의의 적절한 정렬 또는 매핑 동작들 또는 기법들이 완전히 또는 부분적으로 사용될 수 있다. 정렬 및 매핑 프로세스들이 일반적으로 알려져 있으며, 본원에서 더욱 상세하게 설명될 필요는 없다.
일부 경우들에서, 모바일 디바이스의 추정된 포지션이, 예를 들어, 위에서 논의된 하나 이상의 동작들 또는 프로세스들을 이용하여, 가령, 라이브 카메라 뷰에 동시에 보여지는 적어도 하나의 추가적인 POI(예를 들어, Gap® 등)의 시각적 특징들의 매칭을 통해, 정제될 수 있다. 예시로서, 때때로, 도 4의 모바일 디바이스(400)와 같은 모바일 디바이스의 정제된 포지션은, 예를 들어, 라인들(416 및 420)과 같은 로고 관측선들의 교차점(예를 들어, 꼭짓점, 관점의 중심 등에서)에 있거나 또는 교차점의 근처에 있는 것으로 추정될 수 있지만, 청구된 발명 대상은 그렇게 제한되지 않는다. 추가로, 일부 경우들에서, 적절한 모바일 디바이스로부터 관심 있는 하나 이상의 POI들까지의 거리는 예를 들어, 하나 이상의 적절한 기법들을 사용하여, 가령 하나 이상의 검출된 로고들의 사이즈(예를 들어, 실제, 원래, 투시된 등)를 아는 경우에 추정될 수 있다. 예를 들어, 시각적 특징 추출 또는 매칭, 포즈 추정, 포지션 계산 등과 같은 예시적인 프로세스(300)와 연관된 하나 이상의 동작들 또는 프로세스들이 적절한 서버, 모바일 디바이스, 또는 이들의 임의의 조합에서 또는 적절한 서버, 모바일 디바이스, 또는 이들의 임의의 조합에 의해 구현될 수 있다는 점에 유의해야 한다.
도 6은, 예를 들어, LCI가 모바일 디바이스의 대략적 위치를 포함하는 영역에 대응하는, 가령 실내 또는 유사 환경에서, 로고 검출을 통해 모바일 디바이스의 포지션을 추정하는 예시적인 사용 경우 또는 시나리오를 예시하는 프로세스(600)의 구현예의 흐름도이다. 602에서 참조되는 바와 같이, 관심 영역에 진입하는 경우, 사용자는 모바일 디바이스 상에 호스팅된 적절한 포지션 또는 내비게이션 애플리케이션을 턴온시키거나 활성화시킬 수 있다. 모바일 디바이스는, 예를 들어, 디바이스의 대략적 위치에 적어도 부분적으로 기초하여 영역과 연관된 LCI에 대한 적용가능한 보조 정보를 획득하기 위해 적절한 서버와 통신할 수 있다. 모바일 디바이스의 대략적 위치는, 예를 들면, SPS 또는 다른 무선 송신기들(예를 들어, WiFi 액세스 포인트들 등), 하나 이상의 연관된 센서들(예를 들어, 가속계, 자이로스코프, 기압계 등) 등을 통해 획득된 최근 포지션 픽스에 적어도 부분적으로 기초하여 획득될 수 있다. 이전에 언급된 바와 같이, 이것은 예를 들어, 소매상, 아울렛 등이 동일하거나 유사한 로고들을 통해 식별된 다수의 스토어프론트들, 입구들, 층들 등을 가지는 경우 모바일 디바이스의 위치를 결정할 시에 유용할 수 있다. 선택적으로 또는 대안적으로, 대략적 위치는, 예를 들어, 또한 표시된 바와 같이, 사용자 입력을 통해 획득될 수 있다. 따라서, 예시된 바와 같이, 보조 정보는, 예를 들어, 모바일 디바이스의 대략적 위치, 하나 이상의 관련된 로고 이미지들, 로고들과 연관된 시각적 특징들, POI들의 위치들 등과 같은 적용가능한 POI 정보와 함께 장소의 디지털 맵을 포함할 수 있다.
604에서 표시된 바와 같이, 원하는 경우, 사용자는 예를 들어, 연관된 이미지 캡쳐 디바이스(예를 들어, 카메라 센서 등)를 활성화시킬 수 있는 모바일 디바이스 상에 호스팅된 적절한 포지션 엔진 또는 유사한 애플리케이션을 활성화시키거나 턴온시킬 수 있다. 일부 경우들에서, 이전에 언급된 바와 같이, 예를 들어, 로컬 영역 네트워크(예를 들어, WiFi 등)와 연관된 하나 이상의 액세스 포인트들과 같은 실내 또는 유사한 관심 영역 내의 하나 이상의 무선 송신기들의 위치는 공지되지 않을 수 있다. 또한, 때때로, 하나 이상의 공지된 무선 송신기들로부터의 신호들은 불충분하고, 약하고, 단편적인 것 등과 같이 감쇠되거나 그렇지 않은 경우 일부 방식으로 영향을 받을 수 있다. 이는, 예를 들어, 또한 표시된 바와 같이, 모바일 디바이스가 자신의 위치를 추정하는 것을 불가능하게 할 수 있다. 이러한 예시된 예에서, 모바일 디바이스는 하나 이상의 로고 검출 동작들을 구현하기 위해 디바이스의 환경 주위에 디바이스를 패닝하도록 사용자를 조장하는 적절한 메시지(예를 들어, "WiFi를 이용하여 포지셔닝할 수 없음" 등)를 디스플레이할 수 있다.
606에서 예시된 바와 같이, 메시지에 응답하여, 사용자는, 예를 들어, 하나 이상의 연관된 센서들에 의해 인식가능하거나 검출가능한 특정 배향으로 모바일 디바이스를 배치할 수 있다. 카메라 뷰를 사용하여, 사용자는 예를 들어, 연관된 스크린 또는 디스플레이에서 실내 또는 유사한 관심 영역의 라이브 비디오 이미지를 캡쳐하고 동시에 디스플레이하도록 카메라 센서 또는 유사한 이미지 캡쳐 디바이스를 이용하여 다양한 방향들로 모바일 디바이스를 패닝하거나 포인팅할 수 있다. 608에서 일반적으로 표시된 바와 같이, 다양한 방향들로 모바일 디바이스를 패닝하거나 포인팅하는 동안, 사용자는 하나 이상의 적절한 로고들(예를 들어, Roots®, Indigo® 등)이 스크린 또는 디스플레이의 사용자 시야 내에 올 때까지 카메라 뷰에서 캡쳐된 비디오 이미지를 볼 수 있다. 따라서, 모바일 디바이스 및 연관된 사용자의 위치는, 예를 들어, 하나 이상의 POI들이 보일 수 있는 가능한 구역 또는 영역에 적어도 부분적으로 기초하여 추정될 수 있다.
각각 610 및 612에서 각각 참조된 바와 같이, 단지 한 가지 가능한 구현예를 예시하자면, 캡쳐된 로고(예를 들어, Roots® 등)의 이미지는, 가령, 예를 들어, 위에서 논의된 하나 이상의 로고 검출 또는 매칭 동작들을 통해서 일부 방식으로 프로세싱될 수 있고, 로고와 연관된 POI는 가령, 포즈 추정 동작과 관련한 장소 맵을 통해 식별될 수 있다. 캡쳐된 로고와 연관된 POI의 추정된 포즈 및 공지된 위치에 적어도 부분적으로 기초하여, 모바일 디바이스의 추정된 위치가 계산될 수 있다. 때때로, 614에서 일반적으로 참조된 바와 같이, 모바일 디바이스의 추정된 위치는, 예를 들어, 라이브 카메라 뷰에 동시에 보여지는 적어도 하나의 추가적인 POI(예를 들어, Indigo® 등)에 적어도 부분적으로 기초하여 정제될 수 있다. 물론, 예시된 사용 경우에 관한 상세항목들은 단지, 청구된 발명 대상이 제한되지 않는 예들이다.
따라서, 본원에 논의된 바와 같이, 가령, 실내 또는 유사한 환경에서 실내 포지셔닝을 위한 로고 검출은, 예를 들면, 이점들을 제공할 수 있다. 예를 들어, 로고들의 더 작은 세트는 각각 또는 다른 방식으로 적절한 장소를 방문하거나 매핑하지 않고, 더 많은 수의 장소들(예를 들어, 쇼핑 몰들, 소매 아울렛들 등)에서의 위치 추정들을 유리하게 만족시킬 수 있다. 추가로, 이전에 언급된 바와 같이, 가령 실내 또는 유사한 환경에서 더욱 정확하고, 정밀하고, 강건하거나, 또는 다른 방식으로 유용한 포지셔닝은, 예를 들어, 무선 통신 링크들의 이용가능한 대역폭, 모바일 디바이스의 메모리 공간 또는 배터리 수명 등에 부담을 주지 않고 유리하게 달성될 수 있다. 물론, 실내 포지셔닝을 위한 로고 검출의 특정 양상들 및 그 이점들의 기재는 단지 예시이며, 청구된 발명 대상은 그렇게 제한되지 않는다.
실내 포지셔닝을 위한 로고 검출을 위한 하나 이상의 동작들 또는 기법들을 용이하게 하거나 지원하기 위해 완전히 또는 부분적으로 수행될 수 있는 예시적인 프로세스(700)의 구현예를 예시하는 흐름도인 도 7이 이제 주목된다. 하나 이상의 동작들이 동시에 또는 특정 시퀀스에 대해 예시되거나 설명될 수 있지만, 다른 시퀀스들 또는 동시적 동작들이 또한 사용될 수 있다는 점이 인지되어야 한다. 추가로, 하기 설명이 특정한 다른 도면들에 예시된 특정 양상들 또는 특징들을 참조하지만, 하나 이상의 동작들은 다른 양상들 또는 특징들을 통해 수행될 수 있다.
예시적인 프로세스(700)는, 예를 들어, 모바일 디바이스에서, 하나 이상의 공지된 위치들의 하나 이상의 관심 포인트(POI)들과 연관된 하나 이상의 브랜드-특정 시각적 서명들을 수신하는 동작(702)에서 시작할 수 있다. 표시된 바와 같이, 하나 이상의 브랜드-특정 시각적 서명들은, 예를 들어, 실내 또는 유사한 관심 영역 내의 위치들과 POI들을 연관시키기 위해 적어도 부분적으로 사용될 수 있는, 모바일 디바이스에 의해 액세스가능한 시각적 보조 데이터베이스와 같은 적절한 데이터베이스로부터 유도될 수 있다. 일부 경우들에서, 하나 이상의 브랜드-특정 시각적 서명들은, 가령, 모바일 디바이스로부터의 요청에 응답하여, 예를 들어, 적절한 서버(예를 들어, 도 1의 시각적 보조 서버(118) 등)에 의해 통신될 수 있다.
동작(704)에서, 시각적 특징들은, 예를 들어, 모바일 디바이스의 카메라 센서를 통해 캡쳐된 하나 이상의 이미지들로부터 추출될 수 있다. 예를 들어, 시각적 특징들은 실내 또는 유사한 관심 영역과 연관된 하나 이상의 로고들을 보기 위해 패닝 시퀀스를 통해 획득된 일련의 비디오 프레임들로부터 추출될 수 있다. 시각적 특징들은, 예를 들어, SIFT, SURF, NFT 등, 코너 검출-타입 기법들, 등록 상표 또는 다른 방식을 포함하는 임의의 적절한 컴퓨터 비젼 또는 유사한 시각적 특징 추출 기법들을 사용하여 추출될 수 있다.
동작(706)에 관련하여, 추출된 시각적 특징들은, 예를 들어, 하나 이상의 수신된 브랜드-특정 시각적 서명들과 매칭될 수 있다. 예를 들어, 추출된 시각적 특징들은, 가령 적절한 보조 정보(예를 들어, 디바이스의 대략적 위치, LCI 등)와 관련된 매치가 존재하는지의 여부를 결정하기 위해 적절한 데이터베이스(예를 들어, 시각적 보조 데이터베이스 등) 내의 기준 로고들과 비교될 수 있다. 관심 있는 POI와 연관된 브랜드-특정 시각적 서명을 나타내는 로고의 최상의 또는 다른 방식의 적절한 후보 이미지가, 예를 들어, 표시된 바와 같이, 선택될 수 있다.
동작(708)에서, 모바일 디바이스의 위치는 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 하나 이상의 POI들과 연관된 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 추정될 수 있다. 예를 들어, 위에서 논의된 바와 같이, 모바일 디바이스 배향을 아는 경우에, 가령, 비디오 프레임들이 캡쳐되는 동안, 모바일 디바이스의 포즈가 추정될 수 있다. 특정 실내 또는 유사한 관심 영역의 층별 배치도로 매핑되며 매칭된 시각적 특징들과 연관된 하나 이상의 도시된 POI들과 같은 하나 이상의 POI들의 추정된 포즈 및 공지된 위치들에 적어도 부분적으로 기초하여, 예를 들어, 모바일 디바이스의 추정된 위치가 계산될 수 있다.
동작(710)에서, 모바일 디바이스의 추정된 위치는, 예를 들어, 하나 이상의 공지된 위치들의 하나 이상의 POI들의 적어도 하나의 추가적인 POI에 적어도 부분적으로 기초하여 정제될 수 있다. 예를 들어, 이전에 언급된 바와 같이, 모바일 디바이스의 정제된 포지션이 투사된 로고 이미지들의 포즈 라인들의 교차점에 있는 것으로 추정될 수 있지만, 청구된 발명 대상은 그렇게 제한되지 않는다. 일부 경우들에서, 모바일 디바이스로부터 관심 있는 하나 이상의 POI들까지의 추정된 거리는, 또한 표시된 바와 같이, 예를 들어, 하나 이상의 적절한 기법들을 사용하여, 가령 하나 이상의 검출된 로고들의 사이즈(예를 들어, 실제, 원래, 투사된 것 등)를 아는 경우에 컴퓨팅될 수 있다.
도 8은 실내 또는 유사 환경에서의 포지셔닝을 위한 로고 검출을 위한 하나 이상의 동작들 또는 기법들을 용이하게 하거나 지원하기 위해 적어도 부분적으로 사용될 수 있는 모바일 디바이스와 연관된 예시적인 컴퓨팅 환경의 구현예의 개략도이다. 예시적인 컴퓨팅 환경은, 예를 들어, 도 1의 모바일 디바이스(102)의 하나 이상의 특징들 또는 양상들을 포함할 수 있는 모바일 디바이스(800)를 포함할 수 있지만, 청구된 발명 대상은 그렇게 제한되지 않는다. 예를 들어, 일부 경우들에서, 모바일 디바이스(800)는 가령, 적절한 무선 통신 네트워크 상에서 안테나(806)를 통해, 804에서 일반적으로 참조된, 무선 신호들을 전송하거나 수신할 수 있는 무선 트랜시버(802)를 포함할 수 있다. 무선 트랜시버(802)는, 예를 들어, 무선 트랜시버 버스 인터페이스(810)를 통해 버스(808)에 커플링되거나 접속될 수 있다. 구현예에 따라, 때때로, 무선 트랜시버 버스 인터페이스(810)는, 예를 들어, 무선 트랜시버(802)와 적어도 부분적으로 통합될 수 있다. 일부 구현예들은, 단지 몇몇 예들을 들자면, 무선 충실도(WiFi), 코드 분할 다중 액세스(CDMA), 광대역-CDMA(W-CDMA), 롱 텀 에볼루션(LTE), Bluetooth®와 같은 대응하는 다수의 무선 통신 표준들에 따라 신호들의 전송 또는 수신을 가능하게 하기 위해 다수의 무선 트랜시버들(802) 또는 안테나들(806)을 포함할 수 있다.
구현예에서, 모바일 디바이스(800)는, 예를 들어, 가령 SPS 안테나(816)를 통해 하나 이상의 SPS 신호들(814)을 수신하거나 획득할 수 있는 SPS 수신기(812)를 포함할 수 있다. SPS 수신기(812)는, 모바일 디바이스(800)의 위치를 추정하기 위해 하나 이상의 획득된 SPS 신호들(814)을 완전히 또는 부분적으로 프로세싱할 수 있다. 일부 경우들에서, 하나 이상의 범용 응용 프로세서들(818), 메모리(820), 디지털 신호 프로세서(들)(DSP)(822), 또는 도시되지 않은 유사한 특수 디바이스들 또는 프로세서들은, 가령, SPS 수신기(812)와 함께, 획득된 SPS 신호들(814)을 완전히 또는 부분적으로 프로세싱하고, 모바일 디바이스(800)의 위치를 계산하는 것 등을 위해 이용될 수 있다. 가령, 로고 검출과 함께, 하나 이상의 포지셔닝 동작들을 구현하기 위한 SPS 또는 다른 신호들의 저장은, 예를 들면, 메모리(820), 적절한 레지스터들 또는 버퍼들(미도시)에서 적어도 부분적으로 수행될 수 있다. 도시되지 않았지만, 적어도 하나의 구현예에서, 하나 이상의 프로세서들(818), 메모리(820), DSP들(822), 또는 유사한 특수 디바이스들 또는 프로세서들이, 카메라 센서를 통해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하고, 추출된 시각적 특징들 및 하나 이상의 수신된 브랜드-특정 시각적 서명들을 매치시키고, 추출된 시각적 특징들과 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 모바일 디바이스의 위치를 추정하는 것 등을 수행할 수 있는 하나 이상의 프로세싱 모듈들을 포함할 수 있다는 점이 인지되어야 한다. 또한, 하나 이상의 이미지 프로세싱 모듈들의 전부 또는 일부가 하드웨어, 펌웨어, 소프트웨어, 또는 이들의 임의의 조합을 사용하거나 또는 다른 방식으로 이들을 포함하여 구현될 수 있다는 점에 유의해야 한다.
예시된 바와 같이, DSP(822)는 버스(808)를 통해 프로세서(818) 및 메모리(820)에 커플링되거나 접속될 수 있다. 도시되지 않았지만, 일부 경우들에서, 버스(808)는 DSP(822), 프로세서(818), 메모리(820) 등과 같은, 모바일 디바이스(800)의 하나 이상의 적용가능한 컴포넌트들과 통합될 수 있는 하나 이상의 버스 인터페이스들을 포함할 수 있다. 다양한 실시예들에서, 본원에 설명된 하나 이상의 동작들 또는 기능들은, 단지 몇몇 예들을 들자면, RAM, ROM, FLASH, 디스크 드라이브 등과 같은 가령 컴퓨터-판독가능한 저장 매체 상에와 같이, 메모리(820)에 저장된 하나 이상의 기계-판독가능한 명령들의 실행에 응답하여 수행될 수 있다. 명령들은, 예를 들어, 프로세서(818), 도시되지 않은 하나 이상의 특수 프로세서들, DSP(822) 등을 통해 실행가능할 수 있다. 메모리(820)는 본원에 설명된 동작들 또는 기능들을 수행하기 위해 프로세서(818), DSP(822) 등에 의해 실행가능할 수 있는 소프트웨어 코드(예를 들어, 프로그래밍 코드, 명령들 등)를 저장할 수 있는 비-일시적 프로세서-판독가능한 메모리, 컴퓨터-판독가능한 메모리 등을 포함할 수 있다.
모바일 디바이스(800)는, 단지 몇몇 예들을 들자면, 예를 들어, 스피커, 마이크로폰, 디스플레이 디바이스, 진동 디바이스, 키보드, 터치 스크린 등과 같은 몇몇 디바이스들 중 어느 하나를 포함할 수 있는 사용자 인터페이스(824)를 포함할 수 있다. 적어도 하나의 구현예에서, 사용자 인터페이스(824)는 사용자로 하여금 모바일 디바이스(800) 상에 호스팅된 하나 이상의 애플리케이션들과 상호작용하게 할 수 있다. 예를 들어, 사용자 인터페이스(825)의 하나 이상의 디바이스들은, 사용자로부터의 입력 또는 동작에 응답하여, DSP(822), 프로세서(818) 등에 의해 추가로 프로세싱될 아날로그 또는 디지털 신호들을 메모리(820) 상에 저장할 수 있다. 유사하게, 모바일 디바이스(800) 상에 호스팅된 하나 이상의 애플리케이션들은 사용자에게 출력 신호를 제시하기 위해 메모리(820)에 아날로그 또는 디지털 신호들을 저장할 수 있다. 일부 구현예들에서, 모바일 디바이스(800)는 예를 들어, 전용 스피커, 마이크로폰, 디지털 대 아날로그 회로, 아날로그 대 디지털 회로, 증폭기들, 이득 제어부 등을 포함하는 전용 오디오 입력/출력(I/O) 디바이스(826)를 선택적으로 포함할 수 있다. 그러나, 이것이 단지 오디오 I/O 디바이스가 구현될 수 있는 방법의 예이며, 청구된 발명 대상이 이와 관련하여 제한되지 않는다는 점이 이해되어야 한다. 보여진 바와 같이, 모바일 디바이스(800)는, 키보드, 터치 스크린 등 상에 인가되는 터칭 또는 유사한 압력에 응답하는 하나 이상의 터치 센서들(828)을 포함할 수 있다.
구현예에서, 모바일 디바이스는, 가령, 정지 또는 움직이는 이미지를 캡쳐하기 위한 전용의 또는 다른 방식의, 예를 들어, 카메라(830)를 포함할 수 있다. 카메라(830)는, 단지 몇몇 예들을 들자면, 예를 들어, 카메라 센서 또는 유사 이미징 디바이스(예를 들어, 전하 결합 디바이스, 상보형 금속 산화물 반도체(CMOS)-타입 이미저 등), 렌즈, 아날로그 대 디지털 회로, 프레임 버퍼들 등을 포함할 수 있다. 일부 경우들에서, 하나 이상의 캡쳐된 이미지들을 나타내는 신호들의 추가적인 프로세싱, 컨디셔닝(conditioning), 인코딩 또는 압축은, 예를 들어, 적어도 부분적으로, 프로세서(818), DSP(822) 등에서 수행될 수 있다. 선택적으로 또는 대안적으로, 전용의 또는 다른 방식의 비디오 프로세서(832)가 하나 이상의 캡쳐된 이미지들을 나타내는 신호들의 컨디셔닝, 인코딩, 압축 또는 조작을 수행할 수 있다. 부가적으로, 비디오 프로세서(832)는, 예를 들어, 모바일 디바이스(800)의 디스플레이(미도시) 상의 표현을 위해 하나 이상의 저장된 이미지들을 디코딩 또는 압축해제할 수 있다.
모바일 디바이스(800)는, 예를 들어, 하나 이상의 관성 센서들, 주변 환경 센서들 등과 같이, 버스(808)에 커플링되거나 접속된 하나 이상의 센서들(834)을 포함할 수 있다. 센서들(834) 중 관성 센서들은, 단지 몇몇 예들을 예시하자면, 예를 들어, 하나 이상의 가속계들(예를 들어, 1차원, 2차원, 또는 3차원으로 모바일 디바이스(800)의 가속에 집합적으로 응답함 등), 자이로스코프들 또는 자력계들(예를 들어, 하나 이상의 나침반 애플리케이션들을 지원하기 위함 등) 등을 포함할 수 있다. 모바일 디바이스(800)의 주변 환경 센서들은, 단지 몇몇 예들을 들자면, 예를 들어, 하나 이상의 온도 센서들, 기압 센서들, 주변광 검출기들, 카메라 센서들, 마이크로폰들 등을 포함할 수 있다. 센서들(834)은, 메모리(820)에 저장될 수 있고, 가령 포지셔닝 또는 내비게이션 동작들, 통신들, 게임 등에 관련된 하나 이상의 애플리케이션들의 지원 시에, DSP(822), 프로세서(818) 등에 의해 프로세싱될 수 있는, 아날로그 또는 디지털 신호들을 생성할 수 있다.
특정 구현예에서, 모바일 디바이스(800)는 무선 트랜시버(802), SPS 수신기(812) 등을 통해 수신되거나 하향변환된 신호들의 베이스밴드 프로세싱을 수행할 수 있는, 전용의 또는 다른 방식의 모뎀 프로세서(836)를 포함할 수 있다. 유사하게, 예를 들어, 모뎀 프로세서(836)는 무선 트랜시버(802)를 통한 전송을 위해 상향변환될 신호들의 베이스밴드 프로세싱을 수행할 수 있다. 대안적인 구현예들에서, 전용 모뎀 프로세서를 가지는 것 대신, 베이스밴드 프로세싱은, 프로세서(818), DSP(822) 등에 의해 적어도 부분적으로 수행될 수 있다. 추가로, 별도의 컴포넌트로서 예시되어 있지만, 일부 경우들에서, 인터페이스(838)는 예를 들어, 버스(808) 또는 SPS 수신기(812)와 같은 모바일 디바이스(800)의 하나 이상의 적용가능한 컴포넌트들과, 완전히 또는 부분적으로 통합될 수 있다. 선택적으로 또는 대안적으로, SPS 수신기(812)는 직접적으로 버스(808)에 커플링되거나 접속될 수 있다. 그러나, 이들이 단지 베이스밴드 프로세싱을 수행할 수 있는 컴포넌트들 또는 구조들의 예들이며, 청구된 발명 대상이 이러한 견지에서 제한되지 않는다는 점이 이해되어야 한다.
도 9는, 예를 들어, 도 1과 관련하여 위에서 논의된 바와 같이, 실내 또는 유사한 환경에서 포지셔닝을 위한 로고 검출을 위한 하나 이상의 동작들 또는 프로세스들을 부분적으로 또는 실질적으로 구현하거나 지원될 수 있는 하나 이상의 서버들 또는 다른 디바이스들과 연관되거나 이들을 포함할 수 있는 예시적인 컴퓨팅 환경 또는 시스템(900)의 구현예를 예시하는 개략도이다. 컴퓨팅 환경(900)은, 통신 네트워크(908)와 함께 동작 가능하게 커플링될 수 있는, 예를 들어, 제1 디바이스(902), 제2 디바이스(904), 제3 디바이스(906) 등을 포함할 수 있다. 일부 경우들에서, 제1 디바이스(902)는, 예를 들어, 기지국 역법(almanac)과 같은 포지셔닝 보조 정보를 제공할 수 있는 서버를 포함할 수 있다. 제1 디바이스(902)는 또한, 모바일 디바이스의 위치의 대략적 추정에 적어도 부분적으로 기초하여 요청 모바일 디바이스에 LCI를 제공할 수 있는 서버를 포함할 수 있다. 제1 디바이스(902)는 또한 모바일 디바이스로부터의 요청에 특정된 LCI의 위치에 관련된 실내 포지셔닝 보조 정보를 제공할 수 있는 서버를 포함할 수 있다. 제2 디바이스(904) 또는 제3 디바이스(906)는, 예를 들어, 한가지 가능한 구현예를 예시하자면, 모바일 디바이스들을 포함할 수 있다. 추가로, 통신 네트워크(908)는, 액세스 포인트들, 펨토셀들 등과 같은 하나 이상의 무선 송신기들을 포함할 수 있다. 물론, 청구된 발명 대상은 이러한 사항들에서의 범위에서 제한되지 않는다.
제1 디바이스(902), 제2 디바이스(904), 또는 제3 디바이스(906)는 통신 네트워크(908)를 통해 정보를 교환할 수 있는 임의의 디바이스, 어플라이언스, 플랫폼, 또는 머신을 나타낼 수 있다. 제한이 아닌 예시로서, 제1 디바이스(902), 제2 디바이스(904), 또는 제3 디바이스(906) 중 어느 것은: 예를 들어, 데스크톱 컴퓨터, 랩톱 컴퓨터, 워크스테이션, 서버 디바이스들과 같은 하나 이상의 컴퓨팅 디바이스들 또는 플랫폼들; 예를 들어, 개인 디지털 보조 단말, 모바일 통신 디바이스 등과 같은 하나 이상의 개인용 컴퓨팅 또는 통신 디바이스들 또는 어플라이언스; 예를 들어, 데이터베이스 또는 정보 저장 서비스 제공자/시스템, 네트워크 서비스 제공자/시스템, 인터넷 또는 인트라넷 서비스 제공자/시스템, 포털 또는 검색 엔진 서비스 제공자/시스템, 무선 통신 서비스 제공자/시스템과 같은 컴퓨팅 시스템 또는 연관된 서비스 제공자 능력; 또는 이들의 임의의 조합을 포함할 수 있다. 제1, 제2 또는 제3 디바이스들(902, 904, 및 906) 중 임의의 것은, 각각, 본원에 설명된 예시적인 구현예들에 따라, 모바일 디바이스, 무선 송신기 또는 수신기, 서버 등 중 하나 이상을 포함할 수 있다.
구현예에서, 통신 네트워크(908)는 제1 디바이스(902), 제2 디바이스(904), 또는 제3 디바이스(906) 중 적어도 둘 사이에서 정보의 교환을 지원할 수 있는 하나 이상의 통신 링크들, 프로세스들, 또는 자원들을 나타낼 수 있다. 제한이 아닌 예시로서, 통신 네트워크(908)는 무선 또는 유선 통신 링크들, 전화 또는 원격 통신 시스템들, 정보 버스들 또는 채널들, 광섬유들, 지상 또는 우주선 자원들, 로컬 영역 네트워크들, 광역 네트워크들, 인트라넷들, 인터넷, 라우터들 또는 스위치들 등, 또는 이들의 임의의 조합을 포함할 수 있다. 예시된 바와 같이, 예를 들어, 제3 디바이스(906)에 의해 부분적으로 모호해진 파선 박스를 통해, 통신 네트워크(908)에 동작 가능하게 커플링된 추가적인 유사 디바이스들이 존재할 수 있다. 또한, 본원에 설명된 바와 같은, 컴퓨팅 환경(900)에 도시된 다양한 디바이스들 또는 네트워크들의 전부 또는 일부, 또는 프로세스들 또는 방법들이 하드웨어, 펌웨어, 소프트웨어, 또는 이들의 임의의 조합을 사용하여, 또는 다른 방식으로 이들을 포함하여 구현될 수 있다는 점이 인지될 수 있다.
제한이 아닌 예시로서, 제2 디바이스(904)는 버스(914)를 통해 메모리(912)에 동작 가능하게 커플링될 수 있는 적어도 하나의 프로세싱 유닛(910)을 포함할 수 있다. 프로세싱 유닛(910)은 적절한 컴퓨팅 프로시져 또는 프로세스의 적어도 일부분을 수행할 수 있는 하나 이상의 회로들을 나타낼 수 있다. 예를 들어, 프로세싱 유닛(910)은 하나 이상의 프로세서들, 제어기들, 마이크로프로세서들, 마이크로컨트롤러들, 주문형 집적 회로들, 디지털 신호 프로세서들, 프로그램가능 논리 디바이스들, 필드 프로그램가능 게이트 어레이들 등, 또는 이들의 임의의 조합을 포함할 수 있다.
메모리(912)는 임의의 정보 저장 메커니즘 또는 어플라이언스를 나타낼 수 있다. 메모리(912)는, 예를 들어, 주 메모리(916) 및 보조 메모리(918)를 포함할 수 있다. 주 메모리(916)는 예를 들어, 랜덤 액세스 메모리, 판독 전용 메모리 등을 포함할 수 있다. 이 예에서 프로세싱 유닛(910)과는 별도인 것으로서 예시되었지만, 주 메모리(916)의 전부 또는 일부가 프로세싱 유닛(910) 내에 제공되거나 또는 다른 방식으로 프로세싱 유닛(910)과 공동 위치/커플링될 수 있다는 점이 이해되어야 한다. 보조 메모리(918)는, 예를 들어, 디스크 드라이브, 광학 디스크 드라이브, 테이프 드라이브, 고체 상태 메모리 드라이브 등과 같은, 예를 들어, 주 메모리 또는 하나 이상의 정보 저장 디바이스들 또는 시스템들과 동일하거나 유사한 타입의 메모리를 포함할 수 있다. 특정 구현예들에서, 보조 메모리(918)는 컴퓨터-판독가능한 매체(920)에 동작 가능하게 수용적이거나, 또는 컴퓨터-판독가능한 매체(920)에 커플링하도록 다른 방식으로 구성가능할 수 있다. 컴퓨터-판독가능한 매체(920)는, 예를 들어, 컴퓨팅 환경(900)에서 디바이스들 중 하나 이상에 대한 액세스 가능한 정보, 코드 또는 명령들을 전달하거나 만들 수 있는 임의의 비-일시적 저장 매체를 포함할 수 있다. 컴퓨터-판독가능한 매체(920)는 또한 저장 매체로서 지칭될 수 있다.
제2 디바이스(904)는, 예를 들어, 적어도 통신 네트워크(908)에 대한 제2 디바이스(904)의 동작 가능한 커플링을 제공하거나 또는 다른 방식으로 지원할 수 있는 통신 인터페이스(922)를 포함할 수 있다. 제한이 아닌 예시로서, 통신 인터페이스(922)는 네트워크 인터페이스 디바이스 또는 카드, 모뎀, 라우터, 스위치, 트랜시버 등을 포함할 수 있다. 제2 디바이스(904)는 또한, 예를 들어, 입력/출력 디바이스(924)를 포함할 수 있다. 입력/출력 디바이스(924)는 휴먼 또는 머신 입력들을 수용하거나 또는 다른 방식으로 도입하도록 구성가능할 수 있는 하나 이상의 디바이스들 또는 특징들, 또는 휴먼 또는 머신 출력들을 전달하거나 또는 다른 방식으로 제공할 수 있는 하나 이상의 디바이스들 또는 특징들을 나타낼 수 있다. 제한이 아닌 예시로서, 입력/출력 디바이스(924)는 동작 가능하게 구성된 디스플레이, 스피커, 키보드, 마우스, 트랙볼, 터치 스크린, 정보 포트 등을 포함할 수 있다.
본원에 설명된 방법들은 특정 특징들 또는 예들에 따른 애플리케이션들에 따른 다양한 수단에 의해 구현될 수 있다. 예를 들어, 방법들은 하드웨어, 펌웨어, 소프트웨어, 이산/고정 논리 회로, 또는 이들의 임의의 조합 등에서 구현될 수 있다. 하드웨어 또는 논리 회로 구현예에서, 예를 들어, 프로세싱 유닛은 단지 몇몇 예들을 들자면, 하나 이상의 주문형 집적 회로들(ASIC들), 디지털 신호 프로세서들(DSP들), 디지털 신호 프로세싱 디바이스들(DSPD들), 프로그램가능 논리 디바이스들(PLD들), 필드 프로그램가능 게이트 어레이들(FPGA들), 프로세서들, 제어기들, 마이크로-컨트롤러들, 마이크로프로세서들, 전자 디바이스들, 본원에 설명된 기능들을 수행하도록 설계된 다른 디바이스들 또는 유닛들, 또는 이들의 조합들 내에서 구현될 수 있다.
펌웨어 또는 소프트웨어 구현예에 대해, 방법들은 본원에 설명된 기능들을 수행하는 명령들을 가지는 모듈들(예를 들어, 프로시져들, 기능들 등)을 이용하여 구현될 수 있다. 명령들을 실재적으로 구현하는 임의의 컴퓨터-판독가능한 매체가 본원에 설명된 방법들을 구현할 시에 사용될 수 있다. 예를 들어, 소프트웨어 코드들은 메모리에 저장되고, 프로세서에 의해 실행될 수 있다. 메모리는 프로세서 내에 또는 프로세서에 대해 외부에 구현될 수 있다. 본원에 사용된 바와 같이, 용어 "메모리"는 장기, 단기, 휘발성, 비휘발성 또는 다른 메모리 중 임의의 타입을 지칭할 수 있고, 임의의 특정 타입의 메모리 또는 메모리들의 수, 또는 메모리가 저장된 미디어의 타입에 제한되지 않는다. 적어도 일부 구현예들에서, 본원에 설명된 저장 매체들의 하나 이상의 부분들은 저장 매체들의 특정 상태에 의해 표현되는 바와 같은 정보를 나타내는 신호들을 저장할 수 있다. 예를 들어, 정보를 나타내는 전자 신호는 정보를 바이너리 정보로서(예를 들어, 1들 및 0들을 통해) 나타내도록 저장 매체들의 이러한 부분들의 상태에 영향을 주거나 변경시킴으로써 저장 매체들(예를 들어, 메모리)의 일부에 "저장"될 수 있다. 이로써, 특정 구현예에서, 정보를 나타내는 신호를 저장하기 위한 저장 매체들의 일부의 상태의 이러한 변경은 저장 매체들의 상이한 상태 또는 상이한 것으로의 변환으로 구성된다.
표시된 바와 같이, 하나 이상의 예시적인 구현예들에서, 설명된 기능들은 하드웨어, 소프트웨어, 펌웨어, 이산/고정 논리 회로, 이들의 일부 조합 등에서 구현될 수 있다. 소프트웨어에서 구현되는 경우, 기능들은 하나 이상의 명령들 또는 코드로서 물리적 컴퓨터-판독가능한 매체 상에 저장될 수 있다. 컴퓨터-판독가능한 매체는 물리적 컴퓨터 저장 매체들을 포함한다. 저장 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 이용가능한 물리적 매체일 수 있다. 제한이 아닌 예시로서, 이러한 컴퓨터-판독가능한 매체들은 RAM, ROM, EEPROM, CD-ROM 또는 다른 광학적 디스크 스토리지, 자기 디스크 스토리지 또는 다른 자기 저장 디바이스들, 또는 명령들 또는 정보 구조들의 형태로 원하는 프로그램 코드를 저장하기 위해 사용될 수 있고 컴퓨터 또는 컴퓨터의 프로세서에 의해 액세스될 수 있는 임의의 다른 매체를 포함할 수 있다. 본원에서 사용되는 바와 같은 디스크(disk) 및 디스크(disc)는 컴팩트 디스크(disc)(CD), 레이저 디스크(disc) , 광 디스크(disc), 디지털 다목적 디스크(disc)(DVD), 플로피 디스크(disk), 및 블루-레이 디스크(disc)를 포함하며, 여기서 디스크들(disks)은 일반적으로 데이터를 자기적으로 재생하지만, 디스크들(discs)은 일반적으로 레이저들을 통해 광학적으로 데이터를 재생한다.
위에서 논의된 바와 같이, 모바일 디바이스는 하나 이상의 무선 통신 기법들을 사용하여 다양한 통신 네트워크들을 통해 정보의 무선 전송 또는 수신을 통해 하나 이상의 다른 디바이스들과 통신할 수 있을 수 있다. 여기서, 예를 들어, 무선 통신 기법들은 무선 광역 네트워크(WWAN), 무선 로컬 영역 네트워크(WLAN), 무선 개인 영역 네트워크(WPAN) 등을 사용하여 구현될 수 있다. 용어 "네트워크" 및 "시스템"은 본원에서 상호교환가능하게 사용될 수 있다. WWAN은 코드 분할 다중 액세스(CDMA) 네트워크, 시분할 다중 액세스(TDMA) 네트워크, 주파수 분할 다중 액세스(FDMA) 네트워크, 직교 주파수 분할 다중 액세스(OFDMA) 네트워크, 단일-캐리어 주파수 분할 다중 액세스(SC-FDMA) 네트워크, 롱 텀 에볼루션(LTE) 네트워크, WiMAX (IEEE 802.16) 네트워크 등일 수 있다. CDMA 네트워크는 단지 몇몇 라디오 기술들을 들자면, cdma2000, 광대역-CDMA(W-CDMA), 시분할 동기식 코드 분할 다중 액세스(TD-SCDMA)와 같은 하나 이상의 라디오 액세스 기술(RAT)들을 구현할 수 있다. 여기서, cdma2000는 IS-95, IS-2000, 및 IS-856 표준들에 따라 구현되는 기술들을 포함할 수 있다. TDMA 네트워크는 모바일 통신용 글로벌 시스템(GSM), 디지털 어드밴스드 모바일 폰 시스템(D-AMPS), 또는 일부 다른 RAT를 구현할 수 있다. GSM 및 W-CDMA는 "제3 세대 파트너쉽 프로젝트"(3GPP)라는 명칭의 컨소시엄으로부터의 문서들에 설명된다. cdma2000는 "제3 세대 파트너쉽 프로젝트 2"(3GPP2)라는 명칭의 컨소시엄으로부터의 문서들에 설명된다. 3GPP 및 3GPP2 문서들이 공개적으로 이용가능하다. 예를 들어, WLAN은 IEEE 802.11x 네트워크를 포함할 수 있고, WPAN은 블루투스 네트워크, IEEE 802.15x, 또는 일부 다른 타입의 네트워크를 포함할 수 있다. 기법들은 또한, WWAN, WLAN, 또는 WPAN의 임의의 조합과 함께 구현될 수 있다. 무선 통신 네트워크들은 예를 들어, 롱 텀 에볼루션(LTE), 어드밴스드 LTE, WiMAX, 울트라 모바일 브로드밴드(UMB) 등과 같은 소위 차세대 기술들(예를 들어, "4G")을 포함할 수 있다.
구현예에서, 모바일 디바이스는, 가령, 자신의 위치를 추정하고, 보조 정보를 획득하고, 셀룰러 전화 서비스를 비즈니스 또는 홈으로 확장하는 것 등의 목적으로, 예를 들어, 하나 이상의 펨토셀들과 통신할 수 있을 수 있다. 본원에 사용되는 바와 같이, "펨토셀"은 하나 이상의 적절한 기법들을 사용하여 모바일 디바이스로부터 전송되는 무선 신호를 검출할 수 있을 수 있는 하나 이상의 더 작은 사이즈의 셀룰러 기지국들을 지칭할 수 있다. 통상적으로, 필수적이지는 않지만, 펨토셀은 예를 들어, 많은 가능한 예들 중 몇몇 예들만을 들자면, 유니버설 모바일 원격 통신 시스템(UMTS), 롱 텀 에볼루션(LTE), EV-DO(Evolution-Data Optimized 또는 Evolution-Data only), GSM, WiMAX(Worldwide Interoperability for Microwave Access), 코드 분할 다중 액세스(CDMA)-2000, 또는 시분할 동기식 코드 분할 다중 액세스(TD-SCDMA)와 같은 다양한 타입들의 통신 기술을 이용하거나 다른 방식으로 이와 호환가능할 수 있다. 일부 구현예들에서, 펨토셀은 예를 들어, 통합 WiFi를 포함할 수 있고, 인터넷과 같은 또다른 브로드밴드 네트워크에 의해 더 큰 셀룰러 원격 통신 네트워크에 모바일 디바이스 액세스를 제공할 수 있다. 그러나, 펨토셀들에 관련된 이러한 상세항목들은 단지 예들이며, 청구된 발명 대상은 그렇게 제한되지 않는다.
본원에 설명된 기법들은 몇몇 GNSS의 임의의 하나 또는 GNSS의 조합들을 포함하는 SPS와 함께 사용될 수 있다. 또한, 기법들은 "의사위성들(pseudolites)"로서 작동하는 지상 송신기들, 또는 SV들 및 이러한 지상 송신기들의 조합을 이용하는 포지셔닝 시스템들과 함께 사용될 수 있다. 지상 송신기들은, 예를 들어, PN 코드 또는 다른 범위 코드(예를 들어, GPS 또는 CDMA 셀룰러 신호 등과 유사함)를 브로드캐스팅하는 지상-기반 송신기들을 포함할 수 있다. 원격 송신기에 의한 식별을 허용하기 위해 이러한 송신기에는 고유한 PN 코드가 할당될 수 있다. 지상 송신기들은, 예를 들어, 궤도 SV로부터의 SPS 신호들이, 가령, 터널들, 광산들, 건물들, 어번 캐니언들 또는 다른 밀폐된 영역들에서 이용 불가할 수 있는 상황들에서 SPS를 증분시키기 위해 유용할 수 있다. 의사위성들의 또다른 구현예는 라디오-비컨들로서 공지되어 있다. 용어 "우주선"(SV)은, 본원에 사용된 바와 같이, 의사위성들, 의사위성들의 등가물들, 및 어쩌면 다른 것들로서 작동하는 지상 송신기들을 포함하도록 의도된다. 용어들 "SPS 신호들" 또는 "SV 신호들"은, 본원에서 사용되는 바와 같이, 의사위성들 또는 의사위성들의 등가물들로서 작동하는 지상 송신기들을 포함하는 지상 송신기들로부터의 SPS형 신호들을 포함하도록 의도된다.
또한, 컴퓨터-판독가능한 코드 또는 명령들은 (예를 들어, 전기 디지털 신호들을 통해) 송신기로부터 수신기로 물리적 전송 매체들 상에서 신호들을 통해 전송될 수 있다. 예를 들어, 소프트웨어는 웹사이트, 서버, 또는 다른 원격 소스로부터 동축 케이블, 광섬유 케이블, 연선, 디지털 가입자 회선(DSL), 또는 적외선, 라디오 및 마이크로파와 같은 무선 기술들의 물리적 컴포넌트들을 사용하여 전송될 수 있다. 위 항목들의 조합들이 또한 물리적 전송 매체들의 범위 내에 포함될 수 있다. 이러한 컴퓨터 명령들은 상이한 시간들에서(예를 들어, 제1 시간 및 제2 시간에서) 일부분들(예를 들어, 제1 및 제2 부분들)에서 전송될 수 있다. 이러한 상세한 설명의 일부 부분들이 특정 장치 또는 특수 목적 컴퓨팅 디바이스 또는 플랫폼의 메모리 내에 저장된 바이너리 디지털 신호들 상에서 동작들의 알고리즘들 또는 심볼 표현들의 견지에서 제시된다. 이러한 특정 명세서의 상황에서, 용어 특정 장치 등은, 장치가 프로그램 소프트웨어로부터의 명령들에 따른 특정 기능들을 수행하도록 프로그래밍되면, 범용 컴퓨터를 포함한다. 알고리즘 디스크립션 또는 심볼 표현들은 다른 당업자들에게 자신의 작업물을 전달하기 위해 신호 프로세싱 및 관련 기술분야들에서의 당업자에 의해 사용되는 기법들의 예들이다. 알고리즘은 본원에서, 그리고 일반적으로, 원하는 결과를 유도하는 자가-일치 시퀀스의 동작들 또는 유사한 신호 프로세싱인 것으로 간주된다. 이 상황에서, 동작들 또는 프로세싱들은 물리적 수량들의 물리적 조작을 포함한다. 통상적으로, 필수적이지는 않지만, 이러한 수량들은 저장되고, 전달되고, 결합되고, 비교되거나 또는 다른 방식으로 조작될 수 있는 전기 또는 자기 신호들의 형태를 취할 수 있다.
때때로, 원리상 공통적 사용의 이유로, 신호들을 비트들, 정보, 값들, 엘리먼트들, 심볼들, 문자들, 변수들, 항목들, 수들, 수치들 등으로 지칭하는 것이 편리한 것으로 증명되었다. 그러나, 이들 및 유사한 용어들 모두가 적절한 물리적 수량들과 연관될 것이며, 단지 편리한 라벨들이라는 점이 이해되어야 한다. 구체적으로 다른 방식으로 언급되지 않는 한, 위의 논의로부터 명백한 바와 같이, 이러한 명세서 전반에 걸쳐, "프로세싱", "컴퓨팅", "계산", "결정", "확인", "식별", "연관", "측정", "수행" 등과 같은 용어들을 이용하는 논의들이 특수 목적 컴퓨터 또는 유사한 특수 목적 전자 컴퓨팅 디바이스와 같은 특정 장치의 동작들 또는 프로세스들을 지칭한다는 점이 인지된다. 따라서, 이 명세서의 상황에서, 특수 목적 컴퓨터 또는 유사한 특수 목적 전자 컴퓨팅 디바이스는, 통상적으로, 또는 특수 목적 컴퓨터 또는 유사한 특수 목적 전자 컴퓨팅 디바이스의 메모리들, 레지스터들, 또는 다른 정보 저장 디바이스들, 전송 디바이스들 내에서 물리적 전자, 전기 또는 자기 수량들로서 표현되는 신호들을 조작하거나 변환할 수 있다.
본원에 사용된 바와 같은 용어들 "그리고" 및 "또는"은 이러한 용어들이 사용되는 상황들에 적어도 부분적으로 의존하는 것으로 또한 예상되는 다양한 의미들을 포함할 수 있다. 통상적으로, "또는"은 A, B 또는 C와 같은 리스트를 연관시키기 위해 사용되는 경우, 본원에서 내포적 의미로서 사용되는 A, B 및 C, 및 본원에서 배타적인 의미로서 사용되는 A, B 또는 C를 의미하도록 의도된다. 이 명세서 전반에 걸친 "일 예" 또는 "예"에 대한 참조는 예와 관련하여 설명된 특정 특징, 구조 또는 특성이 청구된 발명 대상의 적어도 하나의 예에 포함됨을 의미한다. 따라서, 이 명세서 전반에 걸친 다양한 장소들에서 구문 "일 예에서" 또는 "예"의 출현들은 반드시 모두 동일한 예를 지칭하지는 않는다. 추가로, 본원에서 사용되는 용어 "하나 이상"은 임의의 특징, 구조 또는 특성을 단수로 설명하도록 사용될 수 있거나, 또는 특징들, 구조들 또는 특성들의 일부 조합을 설명하도록 사용될 수 있다. 그러나, 이것이 단지 예시적인 예이며, 청구되는 발명 대상은 이 예에 제한되지 않는다는 점에 유의해야 한다. 또한, 특정 특징들, 구조들 또는 특성들이 하나 이상의 예들에서 조합될 수 있다. 본원에 설명된 예들은 디지털 신호들을 사용하여 동작하는 기계들, 디바이스들, 엔진들 또는 장치를 포함할 수 있다. 이러한 신호들은 전자 신호들, 광학 신호들, 전자기 신호들, 또는 위치들 사이에 정보를 제공하는 임의의 형태의 에너지를 포함할 수 있다.
특정 예시적인 기법들이 다양한 방법들 또는 시스템들을 사용하여 본원에서 설명되고 도시되었지만, 청구된 발명 대상으로부터 벗어나지 않고, 다양한 다른 수정들이 이루어질 수 있고 등가물들이 대체될 수 있다는 점이 당업자들에 의해 이해되어야 한다. 추가적으로, 본원에 설명된 중심 개념으로부터의 이탈 없이 청구된 발명 대상의 교시들에 대한 특정 상황을 조정하기 위해 많은 수정들이 이루어질 수 있다. 따라서, 청구된 발명 대상이 개시된 특정 예들에 제한되는 것이 아니라, 이러한 청구된 발명 대상이 또한 첨부된 청구항들의 범위 내에 드는 모든 구현예들 및 이들의 등가물들을 포함할 수 있다는 점이 의도된다.

Claims (37)

  1. 모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법으로서,
    상기 모바일 디바이스에서, 하나 이상의 공지된 위치들의 하나 이상의 관심 포인트(POI)들과 연관된 하나 이상의 브랜드-특정 시각적 서명들을 수신하는 단계;
    상기 모바일 디바이스의 카메라 센서를 통해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하는 단계;
    상기 추출된 시각적 특징들 및 상기 하나 이상의 수신된 브랜드-특정 시각적 서명들을 매칭시키는 단계; 및
    상기 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 상기 하나 이상의 POI들과 연관된 상기 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 상기 모바일 디바이스의 위치를 추정하는 단계를 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  2. 제1항에 있어서,
    상기 모바일 디바이스의 대략적(rough) 위치에 적어도 부분적으로 기초하여 영역을 식별하는 위치 상황 식별자(LCI)를 결정하는 단계; 및
    상기 결정된 LCI에 적어도 부분적으로 기초하여 상기 영역 내의 상기 하나 이상의 POI들을 식별하는 단계를 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  3. 제2항에 있어서,
    상기 하나 이상의 식별된 POI들과 연관된 상기 하나 이상의 브랜드-특정 시각적 서명들을 메모리에 저장하는 단계를 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  4. 제1항에 있어서,
    상기 모바일 디바이스의 상기 위치는 실내 환경에 대한 맵과 관련하여 추정되는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  5. 제4항에 있어서,
    상기 실내 환경은 장소(venue)를 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  6. 제1항에 있어서,
    상기 위치를 추정하는 단계는:
    상기 하나 이상의 POI들에 관련하여 포즈(pose)를 추정하는 단계; 및
    상기 추정된 포즈에 적어도 부분적으로 기초하여 상기 모바일 디바이스의 상기 위치를 추정하는 단계를 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  7. 제6항에 있어서,
    상기 포즈는 상기 하나 이상의 POI들에 대한 상기 모바일 디바이스의 가시선(line of sight) 각도에 적어도 부분적으로 기초하여 추정되는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  8. 제7항에 있어서,
    상기 가시선 각도는 상기 모바일 디바이스의 카메라 렌즈의 광학축 및 로고 관측선에 의해 형성되는 각도를 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  9. 제1항에 있어서,
    상기 시각적 특징들은 하나 이상의 시각적 특징 추출 기법들의 적용을 통해 추출되는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  10. 제1항에 있어서,
    상기 하나 이상의 브랜드-특정 시각적 서명들은 상기 모바일 디바이스에 의해 액세스가능한 데이터베이스를 통해 상기 하나 이상의 POI들과 연관되는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  11. 제10항에 있어서,
    상기 데이터베이스는: 실내 환경의 식별자(ID); 상기 하나 이상의 POI들에 관련된 위치 정보; 상기 하나 이상의 브랜드-특정 시각적 서명들의 상기 추출된 시각적 특징들; 또는 위의 항목들의 임의의 조합 중 적어도 하나를 포함하는 시각적 보조 데이터베이스를 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  12. 제1항에 있어서,
    상기 하나 이상의 이미지들은 상기 하나 이상의 브랜드-특정 시각적 서명들을 보기 위해 패닝(panning) 시퀀스를 통해 획득된 일련의 비디오 프레임들을 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  13. 제1항에 있어서,
    하나 이상의 공지된 위치들의 상기 하나 이상의 POI들의 적어도 하나의 추가적인 POI에 적어도 부분적으로 기초하여 상기 추정된 위치를 정제(refining)하는 단계를 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  14. 제13항에 있어서,
    상기 적어도 하나의 추가적인 POI는 상기 모바일 디바이스의 라이브 카메라 뷰에 동시에 보여지는 POI를 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  15. 제1항에 있어서,
    상기 위치는 상기 하나 이상의 POI들이 보여질 수 있는 영역에 적어도 부분적으로 기초하여 추정되는,
    모바일 디바이스의 위치를 추정하기 위한 모바일-기반 방법.
  16. 모바일 디바이스를 포함하는 장치로서,
    상기 모바일 디바이스는:
    시각적 보조 정보를 수신하기 위한 무선 트랜시버;
    하나 이상의 이미지들을 캡쳐하기 위한 카메라 센서; 및
    적어도 하나의 이미지 프로세싱 모듈을 포함하고, 상기 적어도 하나의 이미지 프로세싱 모듈은,
    상기 카메라 센서를 통해 캡쳐된 상기 하나 이상의 이미지들로부터 시각적 특징들을 추출하고; 그리고
    상기 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 하나 이상의 POI들과 연관된 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 상기 모바일 디바이스의 위치를 추정하기 위해 상기 하나 이상의 이미지들을 프로세싱하기 위해 메모리에 커플링되는,
    장치.
  17. 제16항에 있어서,
    상기 적어도 하나의 이미지 프로세싱 모듈은 추가로:
    상기 하나 이상의 POI들에 대한 포즈를 추정하고; 그리고
    상기 추정된 포즈에 적어도 부분적으로 기초하여 상기 모바일 디바이스의 상기 위치를 추정하기 위한 것인,
    장치.
  18. 제17항에 있어서,
    상기 포즈는 상기 하나 이상의 POI들에 대한 상기 모바일 디바이스의 가시선 각도에 적어도 부분적으로 기초하여 추정되는,
    장치.
  19. 제16항에 있어서,
    상기 하나 이상의 브랜드-특정 시각적 서명들은, 실내 환경의 식별자(ID); 상기 하나 이상의 POI들에 관련된 위치 정보; 상기 하나 이상의 브랜드-특정 시각적 서명들의 상기 추출된 시각적 특징들; 또는 위의 항목들의 임의의 조합 중 적어도 하나를 포함하고, 상기 모바일 디바이스에 의해 액세스가능한 보조 데이터베이스를 통해 상기 하나 이상의 POI들과 연관되는,
    장치.
  20. 제16항에 있어서,
    상기 적어도 하나의 이미지 프로세싱 모듈은 추가로:
    상기 모바일 디바이스의 대략적 위치에 적어도 부분적으로 기초하여 영역을 식별하는 LCI를 결정하고; 그리고
    상기 결정된 LCI에 적어도 부분적으로 기초하여 상기 영역 내의 상기 하나 이상의 POI들을 식별하기 위한 것인,
    장치.
  21. 모바일 디바이스의 위치를 추정하기 위한 장치로서,
    상기 모바일 디바이스에서, 하나 이상의 공지된 위치들의 하나 이상의 관심 포인트(POI)들과 연관된 하나 이상의 브랜드-특정 시각적 서명들을 수신하기 위한 수신 수단;
    상기 모바일 디바이스의 카메라 센서를 통해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하기 위한 추출 수단;
    상기 추출된 시각적 특징들 및 상기 하나 이상의 수신된 브랜드-특정 시각적 서명을 매칭시키기 위한 매칭 수단; 및
    상기 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 상기 하나 이상의 POI들과 연관된 상기 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 상기 모바일 디바이스의 위치를 추정하기 위한 추정 수단을 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  22. 제21항에 있어서,
    상기 위치를 추정하기 위한 상기 추정 수단은:
    상기 하나 이상의 POI들에 관련하여 포즈를 추정하기 위한 수단; 및
    상기 추정된 포즈에 적어도 부분적으로 기초하여 상기 모바일 디바이스의 상기 위치를 추정하기 위한 수단을 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  23. 제22항에 있어서,
    상기 포즈는 상기 하나 이상의 POI들에 대한 가시선 각도에 적어도 부분적으로 기초하여 추정되는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  24. 제21항에 있어서,
    상기 추출된 시각적 특징들과 상기 하나 이상의 POI들 사이의 매치가 존재하는지의 여부를 결정하기 위해 상기 추출된 시각적 특징들과 상기 하나 이상의 브랜드-특정 시각적 서명들을 비교하기 위한 비교 수단을 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  25. 제21항에 있어서,
    상기 시각적 특징들은 하나 이상의 시각적 특징 추출 기법들의 적용을 통해 추출되는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  26. 제21항에 있어서,
    상기 하나 이상의 공지된 위치들은 실내 환경에 대한 하나 이상의 맵들을 통해 획득되는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  27. 제26항에 있어서,
    상기 실내 환경은 장소를 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  28. 제21항에 있어서,
    상기 하나 이상의 브랜드-특정 시각적 서명들은 상기 모바일 디바이스에 의해 액세스가능한 데이터베이스를 통해 상기 하나 이상의 POI들과 연관되는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  29. 제28항에 있어서,
    상기 데이터베이스는 실내 환경의 식별자(ID); 상기 하나 이상의 POI들에 관련된 위치 정보; 상기 하나 이상의 브랜드-특정 시각적 서명들의 상기 추출된 시각적 특징들; 또는 위의 항목들의 임의의 조합 중 적어도 하나를 포함하는 시각적 보조 데이터베이스를 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  30. 제21항에 있어서,
    상기 모바일 디바이스의 대략적 위치에 적어도 부분적으로 기초하여 영역을 식별하는 LCI를 결정하기 위한 결정 수단; 및
    상기 결정된 LCI에 적어도 부분적으로 기초하여 상기 영역 내의 상기 하나 이상의 POI들을 식별하기 위한 식별 수단을 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  31. 제30항에 있어서,
    상기 하나 이상의 식별된 POI들과 연관된 상기 하나 이상의 브랜드-특정 시각적 서명들을 메모리에 저장하기 위한 저장 수단을 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  32. 제21항에 있어서,
    하나 이상의 공지된 위치들의 상기 하나 이상의 POI들의 적어도 하나의 추가적인 POI에 적어도 부분적으로 기초하여 상기 추정된 위치를 정제하기 위한 정제 수단을 더 포함하는,
    모바일 디바이스의 위치를 추정하기 위한 장치.
  33. 모바일 디바이스에서 특수 목적 컴퓨팅 플랫폼에 의해 실행가능한 명령들이 저장된 비-일시적 저장 매체를 포함하는 물품으로서,
    상기 명령들은:
    상기 모바일 디바이스의 카메라 센서에 의해 캡쳐된 하나 이상의 이미지들로부터 시각적 특징들을 추출하고; 그리고
    상기 추출된 시각적 특징들 및 하나 이상의 공지된 위치들의 하나 이상의 POI들과 연관된 하나 이상의 브랜드-특정 시각적 서명들 사이의 매치에 적어도 부분적으로 기초하여 상기 모바일 디바이스의 위치를 추정하기 위한 것인,
    물품.
  34. 제33항에 있어서,
    상기 저장 매체는:
    상기 하나 이상의 POI들에 대한 포즈를 추정하기 위한 명령들; 및
    상기 추정된 포즈에 적어도 부분적으로 기초하여 상기 모바일 디바이스의 상기 위치를 추정하기 위한 명령들을 더 포함하는,
    물품.
  35. 제34항에 있어서,
    상기 포즈는 상기 하나 이상의 POI들에 대한 가시선 각도에 적어도 부분적으로 기초하여 추정되는,
    물품.
  36. 제33항에 있어서,
    상기 하나 이상의 브랜드-특정 시각적 서명들은, 실내 환경의 식별자(ID); 상기 하나 이상의 POI들에 관련된 위치 정보; 상기 하나 이상의 브랜드-특정 시각적 서명들의 상기 추출된 시각적 특징들; 또는 위의 항목들의 임의의 조합 중 적어도 하나를 포함하고, 상기 모바일 디바이스에 의해 액세스가능한 보조 데이터베이스를 통해 상기 하나 이상의 POI들과 연관되는,
    물품.
  37. 제33항에 있어서,
    상기 저장 매체는:
    상기 모바일 디바이스의 대략적 위치에 적어도 부분적으로 기초하여 영역을 식별하는 LCI를 결정하기 위한 명령들; 및
    상기 결정된 LCI에 적어도 부분적으로 기초하여 상기 영역 내의 상기 하나 이상의 POI들을 식별하기 위한 명령들을 더 포함하는,
    물품.
KR1020147007272A 2011-08-19 2012-08-08 실내 포지셔닝을 위한 로고 검출 KR101570195B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161525704P 2011-08-19 2011-08-19
US61/525,704 2011-08-19
US13/486,359 US8938257B2 (en) 2011-08-19 2012-06-01 Logo detection for indoor positioning
US13/486,359 2012-06-01
PCT/US2012/050045 WO2013028359A1 (en) 2011-08-19 2012-08-08 Logo detection for indoor positioning

Publications (2)

Publication Number Publication Date
KR20140052045A true KR20140052045A (ko) 2014-05-02
KR101570195B1 KR101570195B1 (ko) 2015-11-18

Family

ID=47713005

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147007272A KR101570195B1 (ko) 2011-08-19 2012-08-08 실내 포지셔닝을 위한 로고 검출

Country Status (6)

Country Link
US (1) US8938257B2 (ko)
EP (1) EP2745079A1 (ko)
JP (1) JP5844463B2 (ko)
KR (1) KR101570195B1 (ko)
CN (1) CN103827634B (ko)
WO (1) WO2013028359A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180026824A (ko) * 2016-09-05 2018-03-14 주식회사 에피폴라 지역 분할과 파노라마 분할 기법을 이용한 위치기반 관심지점 정보 검색 시스템 및 방법

Families Citing this family (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9253607B2 (en) * 2011-12-16 2016-02-02 Maxlinear, Inc. Method and system for location determination and navigation using textual information
FI124153B (en) * 2012-01-11 2014-04-15 Indooratlas Oy Using magnetic field navigation
US9332392B1 (en) * 2012-06-11 2016-05-03 Google Inc. Remotely activating a combination of mobile device functions
US11265673B2 (en) 2012-06-15 2022-03-01 Qualcomm Incorporated Client access to mobile location services
US20140162693A1 (en) * 2012-06-15 2014-06-12 Qualcomm Incorporated Methods and systems for providing location based services in a venue
US10419890B2 (en) 2012-06-15 2019-09-17 Qualcomm Incorporated Client access to mobile location services
US9578115B2 (en) 2012-06-15 2017-02-21 Qualcomm Incorporated Indoor location server provision and discovery
KR101960280B1 (ko) * 2012-07-23 2019-03-20 삼성전자주식회사 자기장 지도를 수정하는 방법, 자기장 지도를 수정하는 사용자 단말 및 서버
US8744418B2 (en) * 2012-08-31 2014-06-03 Analog Devices, Inc. Environment detection for mobile devices
US9692875B2 (en) 2012-08-31 2017-06-27 Analog Devices, Inc. Grip detection and capacitive gesture system for mobile devices
US9043349B1 (en) 2012-11-29 2015-05-26 A9.Com, Inc. Image-based character recognition
US20140180627A1 (en) * 2012-12-20 2014-06-26 Qualcomm Incorporated System, method and/or devices for applying magnetic signatures for positioning
US9330047B2 (en) 2013-01-15 2016-05-03 Qualcomm Incorporated Wireless docking service with direct connection to peripherals
US9342930B1 (en) * 2013-01-25 2016-05-17 A9.Com, Inc. Information aggregation for recognized locations
GB2511096A (en) * 2013-02-22 2014-08-27 Fox Murphy Ltd A Mobile Indoor Navigation System
US9959674B2 (en) 2013-02-26 2018-05-01 Qualcomm Incorporated Directional and X-ray view techniques for navigation using a mobile device
US9341483B2 (en) * 2013-03-11 2016-05-17 Qualcomm Incorporated Methods and apparatus for position estimation
US9256795B1 (en) 2013-03-15 2016-02-09 A9.Com, Inc. Text entity recognition
US9154919B2 (en) * 2013-04-22 2015-10-06 Alcatel Lucent Localization systems and methods
US20140323148A1 (en) * 2013-04-30 2014-10-30 Qualcomm Incorporated Wide area localization from slam maps
CN104166657A (zh) * 2013-05-17 2014-11-26 北京百度网讯科技有限公司 电子地图搜索方法以及服务器
US8738036B1 (en) * 2013-05-29 2014-05-27 Joingo, Llc Method and system for wayfinding at a venue
WO2015069320A2 (en) * 2013-05-31 2015-05-14 Andrew Llc System and method for mobile identification and tracking in location systems
US10297083B2 (en) 2013-09-16 2019-05-21 Apple Inc. Method and system for determining a model of at least part of a real object
US9338603B2 (en) * 2013-09-30 2016-05-10 Qualcomm Incorporated Location based brand detection
CN104657389A (zh) * 2013-11-22 2015-05-27 高德软件有限公司 定位方法、系统及移动终端
US9424598B1 (en) 2013-12-02 2016-08-23 A9.Com, Inc. Visual search in a controlled shopping environment
US9813676B2 (en) 2013-12-11 2017-11-07 Qualcomm Incorporated Use of mobile device with image sensor to retrieve information associated with light fixture
US9638783B2 (en) 2013-12-12 2017-05-02 Qualcomm Incorporated Broadcast-based positioning for device-to-device proximity services
US9506761B2 (en) 2014-01-10 2016-11-29 Alcatel Lucent Method and apparatus for indoor position tagging
WO2015116036A1 (en) 2014-01-28 2015-08-06 Hewlett-Packard Development Company, L.P. Method and system for surface wear determination
CN104936283B (zh) * 2014-03-21 2018-12-25 中国电信股份有限公司 室内定位方法、服务器和系统
US9584980B2 (en) * 2014-05-27 2017-02-28 Qualcomm Incorporated Methods and apparatus for position estimation
US9536161B1 (en) 2014-06-17 2017-01-03 Amazon Technologies, Inc. Visual and audio recognition for scene change events
US9317921B2 (en) * 2014-07-10 2016-04-19 Qualcomm Incorporated Speed-up template matching using peripheral information
WO2016014020A1 (en) 2014-07-21 2016-01-28 Hewlett-Packard Development Company, L.P. Radial histogram matching
US10139869B2 (en) 2014-07-23 2018-11-27 Analog Devices, Inc. Capacitive sensors for grip sensing and finger tracking
US11127039B2 (en) * 2014-08-01 2021-09-21 Oracle International Corporation Delivering geo-context information to a mobile device based on predicted mobile device locations
CN104378822B (zh) * 2014-11-14 2019-02-05 联想(北京)有限公司 一种定位方法、服务器、电子设备及定位系统
US10333619B2 (en) 2014-12-12 2019-06-25 Nokia Technologies Oy Optical positioning
KR102250947B1 (ko) 2014-12-26 2021-05-12 삼성전자주식회사 전자 장치의 위치 확인 방법, 전자 장치 및 서버의 동작 방법
US9824481B2 (en) 2014-12-30 2017-11-21 Qualcomm Incorporated Maintaining heatmaps using tagged visual data
US10582105B2 (en) * 2014-12-30 2020-03-03 Qualcomm Incorporated Changing camera parameters based on wireless signal information
US10001376B1 (en) * 2015-02-19 2018-06-19 Rockwell Collins, Inc. Aircraft position monitoring system and method
US20160258761A1 (en) * 2015-03-03 2016-09-08 Qualcomm Incorporated Vlc-based vector field fingerprint mapping
US9524435B2 (en) * 2015-03-20 2016-12-20 Google Inc. Detecting the location of a mobile device based on semantic indicators
CN105371848B (zh) * 2015-11-05 2018-03-02 广东欧珀移动通信有限公司 一种室内导航方法及用户终端
US10012509B2 (en) 2015-11-12 2018-07-03 Blackberry Limited Utilizing camera to assist with indoor pedestrian navigation
US11528452B2 (en) * 2015-12-29 2022-12-13 Current Lighting Solutions, Llc Indoor positioning system using beacons and video analytics
CN105808717A (zh) * 2016-03-07 2016-07-27 苏州中德睿博智能科技有限公司 一种基于dr定位信息的视觉标签匹配方法
US10488488B2 (en) * 2016-04-04 2019-11-26 Walmart Apollo, Llc Systems and methods for estimating a geographical location of an unmapped object within a defined environment
CN107270906A (zh) * 2016-04-08 2017-10-20 北京黎阳之光科技有限公司 一种基于wifi的人员精准定位系统
CN106403942B (zh) * 2016-08-30 2022-04-29 全球能源互联网研究院 基于变电站景深图像识别的人员室内惯性定位方法
CN106528592B (zh) * 2016-09-21 2022-07-26 北京国芯能集成电路科技有限公司 一种对矿场进行盘点的方法及系统
US9813150B1 (en) * 2016-09-23 2017-11-07 Qualcomm Incorporated Controllable selection of light-capture devices
DE102017116327A1 (de) * 2017-07-19 2019-01-24 Pracht Andreas Edmund, Herfurtner Alexander GbR (vertretungsberechtigter Gesellschafter: Andreas Edmund Pracht) Elektrisches Installationsgerät, System zur Realisierung eines Smart Homes und Verfahren zum Betrieb eines derartigen Systems
US11106716B2 (en) * 2017-11-13 2021-08-31 Accenture Global Solutions Limited Automatic hierarchical classification and metadata identification of document using machine learning and fuzzy matching
US11126846B2 (en) * 2018-01-18 2021-09-21 Ebay Inc. Augmented reality, computer vision, and digital ticketing systems
US11318050B2 (en) 2018-01-24 2022-05-03 American Printing House for the Blind, Inc. Navigation assistance for the visually impaired
WO2019183393A1 (en) * 2018-03-21 2019-09-26 Lei Zhou Controlling movement of an automated guided vehicle
CN112020630A (zh) * 2018-04-27 2020-12-01 北京嘀嘀无限科技发展有限公司 用于更新建筑物的3d模型的系统和方法
KR102529190B1 (ko) 2018-05-25 2023-05-04 삼성전자주식회사 위치를 결정하기 위한 전자 장치 및 그의 동작 방법
US11074351B2 (en) 2018-08-21 2021-07-27 International Business Machines Corporation Location specific identity verification system
EP3671120B1 (en) * 2018-12-17 2023-07-26 HERE Global B.V. Enhancing the accuracy for device localization
US11107099B2 (en) * 2018-12-21 2021-08-31 Google Llc Brand penetration determination system using image semantic content
EP3798986A1 (en) * 2019-09-27 2021-03-31 Apple Inc. Location aware visual markers
CN112629532B (zh) * 2019-10-08 2023-10-20 宏碁股份有限公司 提升准确率之室内定位方法及应用其之行动装置
CN110706490A (zh) * 2019-10-25 2020-01-17 上海市保安服务总公司宝山区公司 一种智能交通终端管理设备的数据处理方法及设备
US11417104B2 (en) 2019-11-01 2022-08-16 Walmart Apollo, Llc Systems and methods for automatically determining location of an object inside a retail store
US11200407B2 (en) * 2019-12-02 2021-12-14 Motorola Solutions, Inc. Smart badge, and method, system and computer program product for badge detection and compliance
US11049206B1 (en) 2020-08-20 2021-06-29 Eric Schneider Enhanced content generation system, method, and device
US20220198178A1 (en) * 2020-12-22 2022-06-23 Here Global B.V. Method and apparatus for identifying the floor of a building

Family Cites Families (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6175644B1 (en) 1998-05-01 2001-01-16 Cognex Corporation Machine vision system for object feature analysis and validation based on multiple object images
CA2439002C (en) * 2001-03-09 2009-11-24 Radianse, Inc. A system and method for performing object association using a location tracking system
JP2003111128A (ja) * 2001-09-28 2003-04-11 J-Phone East Co Ltd 現在位置特定方法、現在位置情報提供方法、移動経路案内方法、位置情報管理システム及び情報通信端末
DE60228744D1 (de) 2001-10-09 2008-10-16 Sirf Tech Inc Verfahren und system zum versenden von positionskodierten bildern über ein drahtloses netz
US6674391B2 (en) 2002-05-08 2004-01-06 Lockheed Martin Corporation System and method of simulated image reconstruction
JP2003344093A (ja) * 2002-05-31 2003-12-03 Equos Research Co Ltd 歩行者用経路案内データ配信装置、歩行者用経路案内データ配信システム及び歩行者用経路案内データ配信プログラム
DE10248534B4 (de) 2002-10-14 2013-04-11 T-Mobile Deutschland Gmbh Verfahren zur genauen Positionsbestimmung eines mobilen Endgerätes
US7373109B2 (en) * 2003-11-04 2008-05-13 Nokia Corporation System and method for registering attendance of entities associated with content creation
US7746404B2 (en) * 2003-11-10 2010-06-29 Hewlett-Packard Development Company, L.P. Digital camera with panoramic image capture
US7831387B2 (en) 2004-03-23 2010-11-09 Google Inc. Visually-oriented driving directions in digital mapping system
WO2005098364A1 (ja) 2004-03-31 2005-10-20 Pioneer Corporation 経路案内システム及び方法
WO2006035476A1 (ja) * 2004-09-27 2006-04-06 Mitsubishi Denki Kabushiki Kaisha 位置特定サーバ及び移動体端末
US7707239B2 (en) * 2004-11-01 2010-04-27 Scenera Technologies, Llc Using local networks for location information and image tagging
GB2427100B (en) * 2005-06-09 2008-07-09 Motorola Inc A notification apparatus and method for a cellular communication system
JP4935145B2 (ja) * 2006-03-29 2012-05-23 株式会社デンソー カーナビゲーション装置
US7672669B2 (en) 2006-07-18 2010-03-02 Veriwave, Inc. Method and apparatus for controllable simulation of mobility
US8305935B2 (en) * 2006-07-27 2012-11-06 Mobitrum Corporation Method and system for dynamic information exchange on location aware mesh network devices
US20100092093A1 (en) 2007-02-13 2010-04-15 Olympus Corporation Feature matching method
EP2120009B1 (en) 2007-02-16 2016-09-07 Mitsubishi Electric Corporation Measuring device and measuring method
US20080268876A1 (en) * 2007-04-24 2008-10-30 Natasha Gelfand Method, Device, Mobile Terminal, and Computer Program Product for a Point of Interest Based Scheme for Improving Mobile Visual Searching Functionalities
US20090083237A1 (en) 2007-09-20 2009-03-26 Nokia Corporation Method, Apparatus and Computer Program Product for Providing a Visual Search Interface
US20090083275A1 (en) 2007-09-24 2009-03-26 Nokia Corporation Method, Apparatus and Computer Program Product for Performing a Visual Search Using Grid-Based Feature Organization
US8478226B2 (en) * 2008-06-02 2013-07-02 Research In Motion Limited Updating a request related to an IMS emergency session
US20090315766A1 (en) 2008-06-19 2009-12-24 Microsoft Corporation Source switching for devices supporting dynamic direction information
US9509867B2 (en) 2008-07-08 2016-11-29 Sony Corporation Methods and apparatus for collecting image data
US8688058B2 (en) 2008-11-24 2014-04-01 Chiewcharn Narathong Techniques for improving transmitter performance
EP2219367B1 (en) * 2009-02-16 2011-12-21 Research In Motion Limited Using gravity to direct a rotatable camera in a mobile device
JP5742057B2 (ja) 2009-03-03 2015-07-01 ディジマーク コーポレイション 公共ディスプレイからのナローキャスティングおよび関連配設
US9301238B2 (en) * 2009-03-06 2016-03-29 Qualcomm Incorporated Methods and apparatus for automated local network formation using alternate connected interfaces
US8938355B2 (en) 2009-03-13 2015-01-20 Qualcomm Incorporated Human assisted techniques for providing local maps and location-specific annotated data
US8060302B2 (en) 2009-03-31 2011-11-15 Microsoft Corporation Visual assessment of landmarks
US20100309225A1 (en) 2009-06-03 2010-12-09 Gray Douglas R Image matching for mobile augmented reality
KR101622110B1 (ko) 2009-08-11 2016-05-18 삼성전자 주식회사 특징점 추출 방법 및 추출 장치, 이를 이용한 영상 기반 위치인식 방법
US8611592B2 (en) 2009-08-26 2013-12-17 Apple Inc. Landmark identification using metadata
US8549044B2 (en) * 2009-09-17 2013-10-01 Ydreams—Informatica, S.A. Edificio Ydreams Range-centric contextual information systems and methods
US8150367B1 (en) * 2009-09-30 2012-04-03 Google Inc. System and method of determining a location based on location of detected signals
US8238671B1 (en) 2009-12-07 2012-08-07 Google Inc. Scene classification for place recognition
US8489127B2 (en) * 2010-04-20 2013-07-16 Apple Inc. Context-based reverse geocoding
US8897816B2 (en) 2010-06-17 2014-11-25 Nokia Corporation Method and apparatus for locating information from surroundings
US8332429B2 (en) 2010-06-22 2012-12-11 Xerox Corporation Photography assistant and method for assisting a user in photographing landmarks and scenes
KR20120017821A (ko) 2010-08-20 2012-02-29 삼성전자주식회사 휴대용 단말기에서 데이터를 공유하기 위한 장치 및 방법
US8634848B1 (en) * 2010-09-29 2014-01-21 Amazon Technologies, Inc. Inter-device location determinations
US8676623B2 (en) 2010-11-18 2014-03-18 Navteq B.V. Building directory aided navigation
US9874454B2 (en) 2011-01-13 2018-01-23 Here Global B.V. Community-based data for mapping systems
US20120270573A1 (en) 2011-04-20 2012-10-25 Point Inside, Inc. Positioning system and method for single and multilevel structures
US8706137B2 (en) * 2011-08-02 2014-04-22 Qualcomm Incorporated Likelihood of mobile device portal transition
US20130212094A1 (en) 2011-08-19 2013-08-15 Qualcomm Incorporated Visual signatures for indoor positioning

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180026824A (ko) * 2016-09-05 2018-03-14 주식회사 에피폴라 지역 분할과 파노라마 분할 기법을 이용한 위치기반 관심지점 정보 검색 시스템 및 방법

Also Published As

Publication number Publication date
US20130045751A1 (en) 2013-02-21
JP5844463B2 (ja) 2016-01-20
CN103827634A (zh) 2014-05-28
JP2014524577A (ja) 2014-09-22
CN103827634B (zh) 2017-03-01
KR101570195B1 (ko) 2015-11-18
EP2745079A1 (en) 2014-06-25
US8938257B2 (en) 2015-01-20
WO2013028359A1 (en) 2013-02-28

Similar Documents

Publication Publication Date Title
KR101570195B1 (ko) 실내 포지셔닝을 위한 로고 검출
US9906921B2 (en) Updating points of interest for positioning
US9582720B2 (en) Image-based indoor position determination
JP6239659B2 (ja) 消失点決定に基づくセンサ較正および位置推定
AU2015307177B2 (en) Selective crowdsourcing of location-related data
KR102252566B1 (ko) 로케이션 서비스를 개선하기 위해 3차원 로케이션 정보를 사용하기 위한 시스템 및 방법
US9131347B2 (en) Utilizing a pressure profile to determine a location context identifier
US9354067B2 (en) System, method and/or devices for aligning a movement path with an indoor routing graph
US9395189B2 (en) Indoor structure inference using points of interest
US20170078851A1 (en) Associating a signal observation with a location tag
US20150192656A1 (en) Received signal direction determination in using multi-antennas receivers
US20140180627A1 (en) System, method and/or devices for applying magnetic signatures for positioning
US20130267260A1 (en) Map modification using ground-truth measurements
WO2017200662A1 (en) Predictor-corrector based pose detection

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee