KR20120094007A - 증강 현실에서의 물체 추적 - Google Patents

증강 현실에서의 물체 추적 Download PDF

Info

Publication number
KR20120094007A
KR20120094007A KR1020127014417A KR20127014417A KR20120094007A KR 20120094007 A KR20120094007 A KR 20120094007A KR 1020127014417 A KR1020127014417 A KR 1020127014417A KR 20127014417 A KR20127014417 A KR 20127014417A KR 20120094007 A KR20120094007 A KR 20120094007A
Authority
KR
South Korea
Prior art keywords
processor
tracking data
mobile phone
scene
data
Prior art date
Application number
KR1020127014417A
Other languages
English (en)
Other versions
KR101491582B1 (ko
Inventor
헨리 릉
Original Assignee
엠파이어 테크놀로지 디벨롭먼트 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 filed Critical 엠파이어 테크놀로지 디벨롭먼트 엘엘씨
Publication of KR20120094007A publication Critical patent/KR20120094007A/ko
Application granted granted Critical
Publication of KR101491582B1 publication Critical patent/KR101491582B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/66Radar-tracking systems; Analogous systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/003Bistatic radar systems; Multistatic radar systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/06Systems determining position data of a target
    • G01S13/42Simultaneous measurement of distance and other co-ordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/50Systems of measurement based on relative movement of target
    • G01S13/52Discriminating between fixed and moving objects or between objects moving at different speeds
    • G01S13/522Discriminating between fixed and moving objects or between objects moving at different speeds using transmissions of interrupted pulse modulated waves
    • G01S13/524Discriminating between fixed and moving objects or between objects moving at different speeds using transmissions of interrupted pulse modulated waves based upon the phase or frequency shift resulting from movement of objects, with reference to the transmitted signals, e.g. coherent MTi
    • G01S13/53Discriminating between fixed and moving objects or between objects moving at different speeds using transmissions of interrupted pulse modulated waves based upon the phase or frequency shift resulting from movement of objects, with reference to the transmitted signals, e.g. coherent MTi performing filtering on a single spectral line and associated with one or more range gates with a phase detector or a frequency mixer to extract the Doppler information, e.g. pulse Doppler radar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/50Systems of measurement based on relative movement of target
    • G01S13/52Discriminating between fixed and moving objects or between objects moving at different speeds
    • G01S13/56Discriminating between fixed and moving objects or between objects moving at different speeds for presence detection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/87Combinations of radar systems, e.g. primary radar and secondary radar
    • G01S13/878Combination of several spaced transmitters or receivers of known location for determining the position of a transponder or a reflector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

물체를 추적하는 기술이 일반적으로 기재된다. 어떤 예에서, 시스템은 이동 전화 및 증강 현실 장치를 포함할 수 있다. 이동 전화는 송신파를 수신하고 물체로부터 반사된 반사파를 수신하도록 구성될 수 있다. 이동 전화는 송신파 및 수신파 간의 차를 결정하고 결정된 차에 기초하여 제1 추적 데이터를 생성하도록 구성될 수 있다. 증강 현실 장치는 제1 추적 데이터를 수신하고 제1 추적 데이터에 기초하여 물체의 위치에 관한 제2 추적 데이터를 결정하도록 적응될 수 있다. 결정된 제1 및 제2 추적 데이터에 기초하여 디스플레이 상에 이미지가 생성될 수 있다.

Description

증강 현실에서의 물체 추적{TRACKING AN OBJECT IN AUGMENTED REALITY}
다르게 표시되지 않으면, 본 섹션에서 기재된 물질은 본 출원의 청구범위에 대하여 종래 기술이 아니며 본 섹션 내의 포함에 의해 종래 기술로 인정되지 않는다.
증강 현실 시스템에서, 실세계의 사용자의 뷰가 컴퓨터 장치에 의해 생성된 추가의 정보로 강화되거나 증강된다. 사용자에게 제공되는 디스플레이를 통해, 사용자는 관심있는 장면 내의 실제 물체 상에 놓인 가상 기하학적인 물체를 볼 수 있다. 추가적으로, 실제 물체에 대한 비기하학적 가상 정보가 추가되고 디스플레이 상에 디스플레이될 수 있다.
본 개시물의 상기 및 다른 특징은 첨부된 도면과 결합한 다음의 설명 및 첨부된 청구범위로부터 명백해질 것이다. 이들 도면은 본 개시물에 따른 몇가지 실시예만을 나타내므로, 그 범위를 제한하는 것이 아니며, 본 개시물은 첨부된 도면을 사용함으로써 더 상세히 기재될 것이다.
도 1은 증강 현실에서의 물체의 추적을 구현하는데 사용될 수 있는 어떤 예의 시스템을 나타내는 도면.
도 2는 증강 현실에서의 물체의 추적을 구현하는데 사용될 수 있는 어떤 예의 시스템을 나타내는 도면.
도 3은 증강 현실에서의 물체의 추적을 위한 예의 프로세스의 흐름도.
도 4는 증강 현실에서의 물체의 추적을 위한 컴퓨터 프로그램 제품을 나타내는 도면.
도 5는 본 개시물에 따른 증강 현실에서의 물체의 추적을 수행하도록 배치된 예의 컴퓨터 장치(400)의 블록도.
적어도 임의의 실시예에 따라 배치된 모든 것이 여기에 제시된다.
다음의 상세한 설명에서, 그 일부를 형성하는 첨부된 도면을 참조한다. 도면에서, 문맥이 다르게 지시되지 않으면, 유사한 심볼은 일반적으로 유사한 구성요소를 지칭한다. 상세한 설명, 도면 및 청구범위에 기재된 예시적인 실시예는 제한을 의미하지 않는다. 여기에 기재된 내용의 사상 또는 범위를 벗어나지 않고 다른 실시예가 사용될 수 있고 다른 변형이 가능하다. 여기에 일반적으로 기재되고 도면에 도시된 본 개시물의 형태는 다양한 상이한 구성으로 배열, 대체, 결합, 분리 또는 설계될 수 있고, 이들 모두는 여기에서 명확히 예상될 수 있다.
본 개시물은 일반적으로 증강 현실에서의 물체의 추적에 관련된 방법, 장치, 시스템, 디바이스 및 컴퓨터 프로그램 제품에 대한 것이다.
간략히 말하면, 물체를 추적하는 기술이 일반적으로 기재된다. 어떤 예에서, 시스템은 이동 전화 및 증강 현실 장치를 포함할 수 있다. 이동 전화는 송신파를 수신하고 물체의 반사된 반사파를 수신하는데 유효할 수 있다. 이동 전화는 송신파 및 반사파 간의 차를 결정하고 결정된 차에 기초하여 제1 추적 데이터를 생성하도록 구성된다. 증강 현실 장치는 제1 추적 데이터를 수신하고 제1 추적 데이터에 기초하여 물체의 위치에 관한 제2 추적 데이터를 결정하도록 적응될 수 있다. 이미지는 결정된 제1 및 제2 추적 데이터에 기초하여 디스플레이 상에 생성될 수 있다.
도 1은 여기에 제시된 적어도 일부의 실시예에 따른 증강 현실에서의 물체의 추적을 구현하는데 사용될 수 있는 어떤 예의 시스템을 나타낸다. 어떤 예에서, 시스템(100)은 조명(illuminating) 장치(102), 청취(listening) 장치(104), 네트워크(106), 증강 현실 장치(108), 및 디스플레이(110)를 포함할 수 있다. 이하에서 더 상세히 설명하는 바와 같이, 어떤 예에서, 조명 장치(102)는 전자기파를 이용하여 물체(114)를 조사하도록(illuminate) 적응될 수 있다. 물체(114)는 방향(116)으로 이동하고 있을 수 있다. 청취 장치(104)는 조명 장치(102)에 의해 생성된 전자기파를 수신하고 물체(114)로부터 반사된 전자기파를 수신하도록 적응될 수 있다. 조명 장치(106)로부터 수신된 전자기파 및 물체(114)로부터 수신된 전자기파 간의 차에 기초하여, 청취 장치(104)는 물체(114)의 위치에 관한 정보를 생성하도록 적응될 수 있다. 그 정보는 네트워크(106)를 통해 증강 현실 장치(108)로 전송될 수 있다. 장치(108)는 그 정보를 이용하여 사용자(112)가 관심있는 장면(118)에 관한 이미지(142)를 디스플레이(110) 상에 생성한다. 시스템(100)의 구성요소는 모두 관심있는 장면(118)의 내부 또는 외부에 배치될 수 있다.
도 2는 여기에 기재된 적어도 일부의 실시예에 따른 증강 현실에서의 물체의 추적을 구현하는데 사용될 수 있는 어떤 예의 시스템을 나타낸다. 도 2의 시스템은 도 1의 시스템(100)과 거의 유사하며, 추가의 세부사항을 갖는다. 도 1의 구성요소와 동일하게 라벨링된 도 2의 구성요소는 명료화를 위하여 다시 설명하지 않는다.
도 1에서 상술한 구성요소에 더하여, 시스템(100)은 기지국(124) 및 GPS 위성 성상(constellation)(136)을 더 포함할 수 있다. 도 2에 도시된 바와 같이, 어떤 예에서, 조명 장치(102)는 하나 이상의 이동 전화를 포함할 수 있다. 다른 예에서, 조명 장치(102)는 전자기파를 송신하도록 적응될 수 있는 임의의 장치일 수 있다. 어떤 예에서, 조명 장치(102)는 셀룰러 통신 소스 또는 오디오, 텔레비전 또는 임의의 다른 데이터 통신 소스에서 사용될 수 있는 무선 주파수(RF) 통신 및/또는 방송 소스를 포함할 수 있다. 임의의 실시예에서, 조명 장치(102)는 TV(아날로그 또는 디지털) 방송, GSM(Global System for Mobile) 통신, CDMA(Code Division Multiple Access) 통신, WCDMA (Wideband Code Division Multiple Access) 통신, 위성 통신, TDMA(Time Division Multiple Access) 통신, OFDMA(Orthogonal Frequency-Division Multiple Access) 통신, PHS(Personal Handy-phone System) 통신, AM(Amplitude Modulation) 또는 FM(Frequency Modulation) 방송, DAB(Digital Audio Broadcasting), DVB-T(Digital Video Broadcasting-Terrestrial), WLAN(Wireless Local Area Network) 액세스 포인트, WAN(Wide Area Network) 액세스 포인트, MAN(Metropolitan Area Network) 액세스 포인트, PAN(Personal Area Network) 액세스 포인트 등을 포함할 수 있다. 유사하게, 어떤 예에서, 조명 장치(102)는 TV 수신기, 디지털 TV 수신기, GSM 장치, CDMA 장치, AM/FM 라디오 수신기, PDA, 스마트 폰, 위성 라디오 수신기, DAB 수신기, DVB-T 수신기, WLAN 장치, WAN 장치, MAN 장치 및 PAN 장치 등을 포함할 수 있다.
조명 장치(102)는 조명 장치(102)가 셀룰러 네트워크의 기지국(124)과 상향링크 통신 채널을 통해 통신할 때 전자기파(120)를 송신하도록 적응될 수 있다. 전자기파(120)는 무지향성이며 많은 방향으로 전파될 수 있다. 간략화를 위하여, 5개의 방향(120a, 120b, 120c, 120d 및 120e)의 파가 도시된다. 어떤 예에서, 파(120a 및 120b)는 방향(116)으로 이동하는 물체(114)에 입사된다. 파(120a 및/또는 120b)가 물체(114)에 부딪히면, 물체(114)로부터 반사할 수 있다. 또한, 물체(114)가 방향(116)으로 이동함에 따라, 물체(114)로부터 반사된 파(120a 및 120b)는 파(122)에 의해 도시된 바와 같이 주파수 또는 도플러 시프트를 경험할 수 있다.
청취 장치(104)는 상술한 바와 같이 하나 이상의 이동 전화 또는 조명 장치로서 사용될 수 있는 임의의 장치를 포함할 수 있다. 각각의 청취 전화(104)는 안테나(126), GPS(global position system) 모듈(130), 네트워크 모듈(132), 메모리(134), 디스플레이(154), 감지 모듈(150) 및 카메라(148) 중의 하나 이상을 포함할 수 있고, 이들 모두는 프로세서(128)와 통신할 수 있다. GPS 모듈(130)은 GPS 위성 성상(136)으로부터 장치(104)의 위치 정보를 수신하도록 적응될 수 있다. 안테나 어레이(126)는 이하에서 설명하는 빔형성 알고리즘의 사용 등을 통해 청취 전화(104)에 의해 사용되는 전자기 검출의 이득 및 방향을 쉐이핑(shape)하도록 적응될 수 있다. 네트워크 모듈(132)은 네트워크(106)를 통해 장치(104)로부터 장치(108)로 정보를 전달하도록 적응될 수 있다. 네트워크 모듈(132) 및 네트워크(106)는 예를 들어 와이파이 네트워크, 패킷타이즈 네트워크, SMS를 통한 문자 메시지, WLAN(Wireless Local Area Network) PAN(Personal Area Network), WAN(Wide Area Network), MAN(Metropolitan Area Network) 및 블루투스, 지그비, WiMax 등의 다른 형태의 통신 중의 일부이거나 또는 그들을 포함할 수 있다. 메모리(134)는 청취 전화(104)에 의해 사용되는 정보를 저장하도록 적응될 수 있다. 카메라(148)는 관심 장면(118)에 관한 데이터를 캡쳐(capture)하도록 적응될 수 있다.
어떤 실시예에서, 단일 이동 전화가 조명 장치(102) 및 청취 장치(104)로서 사용될 수 있다. 예를 들어, 단일 이동 전화는 파(120)를 조사하고 반사파(122)를 청취하는 상이한 주파수 세트를 이용할 수 있다. 시분할 멀티플렉싱, 직교 주파수 분할 멀티플렉싱 등의 다른 타입의 분할 멀티플렉싱 기술이 단일 이동 전화에 의해 사용될 수 있다.
어떤 예에서, 청취 장치(104)는 조명 장치(102)에 링크될 수 있다. 예를 들어, 조명 장치(102)는 제어 신호를 전송하여 장치(108) 또는 네트워크(106) 내의 장치들에게 조명 장치(102)가 조사할 계획이라는 것을 알리도록 적응될 수 있다. 장치(108)는 청취 장치(104)가 청취하도록 요청하고 및/또는 조명 장치(102)가 빛을 조사하라고 요청하는 제어 신호를 전송하도록 적응될 수 있다.
도 1을 참조하여 상술한 바와 같이, 파(120)가 이동하는 물체(114)와 충돌하면, 반사파(122)가 생성될 수 있다. 청취 전화(104)의 안테나(126)는 반사파(122) 및/또는 송신파(120e)를 수신하도록 적응될 수 있다. 예를 들어, 파(122 및 122e)는 청취 전화(104)의 에코 채널 및 직접 채널을 통해 청취 전화(104)에 의해 수신될 수 있다. 프로세서(128)는 반사파(122) 및 송신파(120) 간의 차를 결정하도록 적응될 수 있다. 어떤 예에서, 차는 이하에서 상세히 설명하는 바와 같이 상호 상관 프로세싱을 이용하여 도플러 스펙트럼을 결정하는데 사용될 수 있다. 차가 임계치보다 높으면, 프로세서(128)는 이하에서 더 상세히 설명하는 바와 같이 물체(114)의 위치에 관한 추적 데이터(140)를 결정하도록 적응될 수 있다.
어떤 예에서, 임계치는 도플러 스펙트럼 내에 시프트가 있는지를 검출하는데 사용되는 검출 방법에 기초하여 결정될 수 있다. 상이한 검출 방법은 상이한 임계치를 초래할 수 있다. 예를 들어, 시스템(100)이 CRAF(Constant False Alarm Rate) 검출을 이용하면, 시스템이 허위 경보의 일정한 소정의 확률을 유지하도록 검출 임계치가 계산될 수 있다.
각각의 청취 장치(104)는 예를 들어 GPS 모듈(130) 또는 기지국(124)과의 통신을 통해 자신의 위치를 결정하도록 적응될 수 있다. 예를 들어, 각각의 기지국(124)은 청취 장치(104)에 기지국의 각각의 GPS 위치를 전달하도록 적응될 수 있다. 청취 장치(104) 내의 프로세서(128)는 장치(104) 및 각각의 기지국(124) 사이의 거리를 근사화하여 장치(104)의 위치를 삼각측량하도록 적응될 수 있다. 프로세서(128)는 파(102) 및 파(122) 간의 차를 결정한다. 프로세서(128)는 빔형성 알고리즘을 이용하여 청취 장치(104)에 대하여 물체(114)에 대한 추적 데이터(140)를 결정하도록 적응될 수 있다. 어떤 예에서, 빔형성 알고리즘은 물체(114)의 위치의 추정, 물체(114)의 이동에 의해 유발되는 도플러 스펙트럼의 변화, 물체(114) 및 청취 전화(104) 간의 각도 및/또는 물체(114) 및 청취 전화(104) 간의 각도 또는 속도 변화 등의 추적 데이터(140)를 결정하는데 사용될 수 있다. 빔형성 알고리즘은 메모리(134) 내에 저장될 수 있고 예를 들어 칼만 필터(Kalman filter)일 수 있다.
전화(104)가 디스플레이(154)를 포함하는 경우, 프로세서(128)는 추적 데이터(140)를 이용하여 디스플레이(154) 상에 물체 이미지를 디스플레이하도록 적응될 수 있다. 프로세서(128)는 추적 데이터(140)를 카메라(148)에 의해 캡쳐된 데이터와 결합하고 및/또는 디스플레이(154) 상에 결합 정보를 디스플레이하도록 적응될 수 있다.
프로세서(128)는 시간 및/또는 날짜 스탬프를 포함하는 추적 데이터(140)를 네트워크 모듈(132) 및 네트워크(106)를 통해 장치(108)로 전송하도록 적응될 수 있다. 장치(108)는 추적 데이터(14)를 수신하도록 적응될 수 있다. 추적 데이터(140)는 다수의 청취 전화(140)로부터 장치(108)에 의해 수신될 수 있다. 추적 데이터(140)는 카메라(138)로부터의 캡쳐된 데이터 및/또는 카메라(148)로부터의 데이터 등의 관심 장면(118)에 대한 다른 데이터와 결합되어 디스플레이(110) 상에 관심있는 장면(118)의 이미지(142)를 생성할 수 있다. 디스플레이(110)는 컴퓨터 모니터(110a), 이동 전화(110b) 또는 임의의 다른 이동 장치(미도시) 등의 임의의 형태의 디스플레이일 수 있고 관심있는 장면(118)의 내부 및 외부에 배치될 수 있다. 예를 들어, 청취 전화(104) 및/또는 조명 전화(102)는 디스플레이(110)에 사용될 수 있다.
장치(108)는 다수의 청취 장치(104)로부터 추적 데이터(140)를 수신하고 물체(114)의 향상된 추적 데이터(152)를 결정하도록 적응될 수 있다. 어떤 예에서, 추적 데이터(140)는 3개의 청취 장치로부터 수신될 수 있다. 이들 예에서, 각각의 추적 데이터는 각각의 청취 장치의 위치 및 물체 및 각각의 청취 장치 간의 거리를 나타낼 수 있다. 장치(108)는 물체(114)의 위치를 삼각 측량하도록 적응될 수 있다. 장치(108)는 향상된 추적 데이터(152)를 디스플레이(110)에 전송하도록 적응될 수 있다. 상술한 바와 같이, 어떤 예에서, 디스플레이(110)는 청취 또는 조명 이동 전화(104 또는 102)일 수 있다. 어떤 예에서, 청취 전화(104)가 디스플레이(110b)에 대응하는 디스플레이(154)를 포함하는 경우, 프로세서(128)는 향상된 추적 데이터(152)에 기초하여 디스플레이(154)를 업데이트하도록 적응될 수 있다.
어떤 예에서, 조명 및 청취 장치(102 및 104)는 장치(108)로 추적 데이터(140)를 규칙적으로 전송하도록 적응될 수 있다. 상술한 데이터에 더하여, 추적 데이터(140)는 각각의 장치의 아이덴티티, 각각의 장치의 위치 및 조명 또는 청취 등의 구현될 수 있는 모드를 포함할 수 있다. 어떤 예에서, 장치(108)는 장치(102 또는 104) 외부에 있고 네트워크(106)를 통해 통신할 수 있다. 어떤 예에서, 장치(108)에 의해 수행되는 프로세스는 장치(102 및/또는 104) 내에 분배된 소프트웨어일 수 있다. 소프트웨어가 장치(102 및/또는 104) 사이에서 분배된 예에서, 장치는 네트워크(106)를 이용하여 서로 통신하도록 구성될 수 있다.
이동하는 물체(114)가 청취 장치(104) 및 장치(108)에 의해 검출된 후에, 청취 장치(104) 및 장치(108)는 물체(114)를 추적하도록 적응될 수 있다. 어떤 예에서, 장치(108)는 먼저 장치(102 또는 104) 중의 어느 것이 장면(118) 내의 물체(114)의 추적에 이용되는지를 결정할 수 있다. 어떤 예에서, 장치(108)는 제어 신호를 소정의 장치로 전송하여 그 장치가 빛을 조사하거나 청취하도록 요청하도록 적응될 수 있다. 예를 들어, 도 2에 도시된 바와 같이, 장치(108)는 제어 신호를 전송하여 장치(102)가 빛을 조사하도록 하고 장치(104)가 청취하도록 적응될 수 있다. 예를 들어, 물체(114)가 도면에서 우측으로 이동함에 따라, 제어 신호는 먼저 장치(102a)가 빛을 조사하도록 적응되어야 하고 장치(102b)가 청취하도록 적응되어야 한다고 요청할 수 있다. 그 후, 제어 신호는 장치(102b)가 빛을 조사하고 장치(104b)가 청취하도록 요청할 수 있다.
상술한 바와 같이, 물체(114)가 조명 장치에 상대적으로 이동하면, 물체(114)는 도플러 스펙트럼을 변화시킨다. 이 변화는 파(120) 및 파(122) 간의 차를 측정함으로써 청취 장치(104)에 의해 검출될 수 있다. 예를 들어, 청취 장치(104)는 안테나 어레이(126) 내의 2개의 개별 채널 상에서 파(120) 및 파(122)를 수신할 수 있다. 프로세서(128)는 파(120) 및 파(122)에 대하여 블라인드 등화, 증폭, 감쇠(예를 들어, 이득 스케일링), 다운 컨버전, 복조, 디지타이제이션(예를 들어, 비교기 및/또는 아날로그/디지털 변환기에 의한 양자화), 데이터 포맷팅, 신호 정정(예를 들어, 직교 신호 정정, 곱셈 신호 정정, 등), 대역폭 필터링(예를 들어, 밴드 패스, 로우 패스, 하이 패스 필터 등의 수동 또는 능동 필터 사용), 적응적 필터링, 신호 평균 및/또는 데이터 평균 등의 신호 프로세싱을 수행하도록 적응될 수 있다. 어떤 예에서, 상기 신호 프로세싱은 신호 프로세싱 모듈(150)에서 도시된 바와 같이 전용 하드웨어 모듈을 이용하여 프로세서(128)에 의해 수행될 수 있다. 프로세서(128)는 파(102) 및 파(122) 간의 코히어런트 상호 상관을 수행하여 도플러 스펙트럼을 결정하도록 적응될 수 있다. 정의된 임계치 이상의 도플러 스펙트럼의 변화는 추적 데이터(140)의 적어도 일부에 대하여 이용될 수 있다.
다른 가능한 이득 중에서, 청취 장치는 포터블, 낮은 비용 및 낮은 전력 소모를 가질 수 있다. 청취 장치에 대한 추가의 주파수 할당이 수행되지만 필요하지 않을 수 있다. 어떤 실시예에서, 청취 장치는 수동 장치이기 때문에 높은 카운터-투-스텔스(counter-to-stealth) 능력을 가질 수 있다. 어떤 실시예에서, 수동 장치가 액티브하게 신호를 전송하지 않기 때문에, 태스크가 비밀 방식으로 실행될 수 있다. 예를 들어, 청취 장치는 임의의 형태의 신호를 액티브하게 전송하지 않고 이동 물체를 추적할 수 있다. 결과적으로, 다른 장치는 청취 장치가 추적을 수행하려고 시도하는 것을 검출하는데 어려움을 가질 수 있다.
기존의 이동 전화는 기존의 하드웨어에 대한 변경 없이 청취 장치로서 이용가능하다. 이종 센서를 추가하면, 칼리브레이션 및 데이터 결합으로부터 복잡성을 추가할 수 있다. 이동 전화에 의해 물체에 빛을 조사함으로써, 본 개시물에 따라 배치된 시스템은 쉽게 정리될 수 있다. 이동 전화가 상이한 위치를 갖는 경향이 있음에 따라, 어떤 기재된 시스템 내의 이동 전화는 물체의 분산의 공간 다이버시티를 포함할 수 있다. 이것은 더 넓은 영역의 커버리지 및 먼 거리의 분산된 약한 물체도 추적하는 능력이 가능하게 할 수 있다. 본 개시물에 따른 시스템은 이동 전화를 이용하여 추적된 물체와 전화 상의 카메라로 캡쳐된 정보를 통합할 수 있다.
도 3은 본 개시물의 적어도 어떤 실시예에 따라 증강 현실에서의 물체의 추적을 위한 예시적인 프로세스의 흐름도이다. 도 3의 프로세스는 예를 들어 상술한 시스템(100)을 이용하여 구현될 수 있다. 예시적인 프로세스는 블록(S2, S4, S6, S8, S10, S12, S14, S16, S18, S20, S22, S24 및/또는 S26) 중의 하나 이상에 의해 기재된 바와 같이 하나 이상의 동작, 액션, 또는 기능을 포함할 수 있다. 개별 블록으로서 도시되지만, 다양한 블록은 원하는 구현에 따라 추가의 블록으로 분리되거나, 더 적은 블록으로 결합되거나, 제거될 수 있다. 프로세싱은 블록(S2)에서 시작될 수 있다.
블록(S2)에서, 이동 전화 등의 조명 장치는 송신 전자기파를 이용하여 물체를 조사하도록 적응될 수 있다. 조명은 예를 들어, 기지국과 통신하여 수행될 수 있다. 블록(S2) 다음에는 블록(S4)이 뒤따른다.
블록(S4)에서, 이동 전화 등의 청취 장치가 송신 전자기파를 검출하도록 배치될 수 있다. 프로세싱은 블록(S4)에서 블록(S6)으로 계속될 수 있다.
블록(S6)에서, 청취 장치는 물체로부터 반사된 파를 검출하도록 배치될 수 있다. 프로세싱은 블록(S6)에서 블록(S8)으로 계속될 수 있다.
블록(S8)에서, 청취 장치는 송신파를 반사파와 비교하여 차를 결정하도록 적응될 수 있다. 프로세싱은 블록(S8)에서 블록(S10)으로 계속될 수 있다.
블록(S10)에서, 청취 장치는 차가 임계치보다 큰지를 문의할 수 있다. 차가 임계치보다 작으면(아니오), 프로세싱은 블록(S10)에서 블록(S14)으로 계속될 수 있다. 그렇지 않으면, 차가 임계치보다 크면(예), 프로세싱은 블록(S10)에서 블록(S12)으로 계속될 수 있다.
블록(S12)에서, 청취 장치는 추적 데이터를 결정하도록 적응될 수 있다. 추적 데이터는 추적 데이터(140) 내에 상기 정보를 포함할 수 있다. 프로세싱은 블록(S12)에서 블록(S14 및 S22)으로 계속될 수 있다.
블록(S22)에서, 청취 장치가 디스플레이를 포함하는 경우, 청취 장치는 추적 데이터에 기초하여 물체에 대한 정보를 디스플레이하도록 적응될 수 있다.
블록(S14)에서, 청취 장치는 증강 현실 장치에 추적 데이터를 전송하도록 적응될 수 있다. 프로세싱은 블록(S14)에서 블록(S16)으로 계속될 수 있다.
블록(S16)에서, 증강 현실 장치는 복수의 청취 장치로부터 수신된 추적 데이터를 수신하도록 배치될 수 있다. 프로세싱은 블록(S16)에서 블록(S18)으로 계속될 수 있다.
블록(S18)에서, 장치는 물체의 위치에 관한 향상된 추적 데이터를 결정하도록 적응될 수 있다. 프로세싱은 블록(S18)에서 블록(S20)으로 계속될 수 있다.
블록(S20)에서, 증강 현실 장치는 향상된 추적 데이터를 디스플레이로 전송하도록 구성될 수 있다. 프로세싱은 블록(S20)에서 블록(S24)으로 계속될 수 있다.
블록(S24)에서, 청취 장치가 디스플레이를 포함하는 경우, 청취 장치는 향상된 추적 데이터를 수신하도록 적응될 수 있다. 프로세싱은 블록(S24)에서 블록(S26)으로 계속될 수 있다.
블록(S26)에서, 청취 장치는 향상된 추적 데이터에 기초하여 디스플레이를 업데이트하도록 적응될 수 있다.
도 4는 본 개시물의 적어도 어떤 예에 따른 증강 현실에서의 물체의 추적을 위한 컴퓨터 프로그램 제품(300)을 나타낸다. 프로그램 제품(300)은 신호 포함 매체(302)를 포함할 수 있다. 신호 포함 매체(302)는, 예를 들어, 프로세서에 의해 실행될 때 도 1 내지 3을 참조하여 상술한 기능을 제공할 수 있는 하나 이상의 명령(304)을 포함할 수 있다. 따라서, 예를 들어, 시스템(100)을 참조하면, 조명 장치(102), 청취 장치(104) 및/또는 장치(108) 내의 프로세서 중의 하나 이상이 매체(302)에 의해 시스템(100)에 전달된 명령(304)에 응답하여 도 4에 도시된 블록 중의 하나 이상을 착수할 수 있다.
어떤 구현예에서, 신호 포함 매체(302)는, 제한되지 않지만, 하드 디스크 드라이브, 컴팩트 디스크(CD), 디지털 비디오 디스크(DVD), 디지털 테이프, 메모리 등의 컴퓨터 판독가능 매체(306)를 포함할 수 있다. 어떤 구현예에서, 신호 포함 매체(302)는, 제한되지 않지만, 메모리, 판독/기입(R/W) CD, R/W DVD 등의 기록가능 매체(308)를 포함할 수 있다. 어떤 실시예에서, 신호 포함 매체(302)는, 제한되지 않지만, 디지털 및/또는 아날로그 통신 매체(예를 들어, 파이버 옵틱 케이블, 도파관, 유선 통신 링크, 무선 통신 링크 등) 등의 통신 매체(310)를 포함할 수 있다. 따라서, 예를 들어, 프로그램 제품(300)은 RF 신호 포함 매체(302)에 의해 시스템(100)의 하나 이상의 모듈로 전달되고, 신호 포함 매체(302)는 무선 통신 매체(310)(예를 들어, IEEE 802.11 표준에 따른 무선 통신 매체)에 의해 전달된다.
도 5는 본 개시물의 적어도 어떤 실시예에 따른 증강 현실에서의 물체의 추적을 수행하도록 배치된 예시적인 컴퓨팅 장치(400)를 나타내는 블록도이다. 기본 구성(402)에서, 컴퓨팅 장치(400)는 일반적으로 하나 이상의 프로세서(404) 및 시스템 메모리(406)를 포함한다. 메모리 버스(408)는 프로세서(404) 및 시스템 메모리(406) 간의 통신을 위해 사용될 수 있다.
원하는 구성에 따라, 프로세서(404)는, 제한되지 않지만, 마이크로프로세서(μP), 마이크로컨트롤러(μC), 디지털 신호 프로세서(DSP) 또는 그 임의의 조합을 포함하는 임의의 타입일 수 있다. 프로세서(404)는 레벨 1 캐쉬(410) 및 레벨 2 캐쉬(412) 등의 하나 이상의 레벨의 캐싱, 프로세서 코어(414) 및 레지스터(416)를 포함할 수 있다. 예시적인 프로세서 코어(414)는 산술 논리 유닛(ALU), 플로팅 포인트 유닛(FPU), 디지털 신호 프로세싱 코어(DSP 코어) 또는 그 임의의 조합을 포함할 수 있다. 예시적인 메모리 제어기(418)는 또한 프로세서(404)와 함께 사용되거나, 어떤 구현예에서, 메모리 제어기(418)는 프로세서(404)의 내부 부분일 수 있다.
원하는 구성에 따라, 시스템 메모리(406)는, 제한되지 않지만, (RAM 등의) 휘발성 메모리, (ROM, 플래시 메모리 등의) 비휘발성 메모리 또는 임의의 그 조합을 포함하는 임의의 타입일 수 있다. 시스템 메모리(406)는 운영 체제(420), 하나 이상의 애플리케이션(422) 및 프로그램 데이터(424)를 포함할 수 있다.
애플리케이션(422)은 도 1 내지 4를 참조하여 상술한 것을 포함하는 여기에 기재된 기능을 수행하도록 배치된 증강 현실 알고리즘(426)에서의 물체의 추적을 포함할 수 있다. 프로그램 데이터(424)는 여기에 기재된 바와 같이 증강 현실 알고리즘에서의 물체의 추적에 유용할 수 있는 물체 추적 데이터(428)를 포함할 수 있다. 어떤 실시예에서, 애플리케이션(422)은 운영 체제(420) 상에서 프로그램 데이터(424)와 함께 동작하도록 배치되어 증강 현실 시스템 내의 물체의 추적이 제공될 수 있다. 이 기재된 기본 구성(402)은 내부 점선 내의 구성요소에 의해 도 5에 도시된다.
컴퓨팅 장치(400)는 추가의 특징 또는 기능 및 기본 구성(402) 및 임의의 요구되는 장치 및 인터페이스 간의 통신이 가능하도록 하는 추가의 인터페이스를 가질 수 있다. 예를 들어, 버스/인터페이스 제어기(430)는 저장 인터페이스 버스를 통한 기본 구성(402) 및 하나 이상의 데이터 저장 장치(432) 간의 통신을 가능하게 하는데 사용될 수 있다. 데이터 저장 장치(432)는 제거가능 저장 장치(436), 제거불가능 저장 장치(438) 또는 그 조합일 수 있다. 제거가능 저장 장치 및 제거불가능 저장 장치의 예는, 몇 개만 예를 들자면, 플렉시블 디스크 드라이브 및 하드 디스크 드라이브(HDD) 등의 자기 디스크 드라이브, 콤팩트 디스크(CD) 드라이브 또는 DVD(digital versatile disk) 드라이브 등의 광 디스크 드라이브, SSD(solid state drive) 및 테이프 드라이브 등을 포함한다. 예시적인 컴퓨터 저장 매체는, 컴퓨터 판독가능 명령, 데이터 구조, 프로그램 모듈 또는 다른 데이터 등의 정보 저장을 위한 임의의 방법 또는 기술로 구현되는 휘발성 및 비휘발성, 제거가능 및 제거불가능 매체를 포함할 수 있다.
시스템 메모리(406), 제거가능 저장 장치(436) 및 제거불가능 저장 장치(438)는 컴퓨터 저장 매체의 예이다. 컴퓨터 저장 매체는, 제한되지 않지만, RAM, ROM, EEPROM, 플래시 메모리 또는 다른 메모리 기술, CD-ROM, DVD 또는 다른 광 저장장치, 자기 카세트, 자기 테이프, 자기 디스크 저장장치 또는 다른 자기 저장 장치 또는 원하는 정보를 저장하는데 사용될 수 있고 컴퓨팅 장치(400)에 의해 액세스될 수 있는 임의의 다른 매체를 포함한다. 임의의 이러한 컴퓨터 저장 매체는 컴퓨팅 장치(400)의 일부일 수 있다.
컴퓨팅 장치(400)는 또한 버스/인터페이스 제어기(430)를 통한 다양한 인터페이스 장치(예를 들어, 출력 장치(442), 주변 인터페이스(444) 및 통신 장치(446))로부터 기본 구성(402)으로의 통신을 가능하게 하는 인터페이스 버스(440)를 포함할 수 있다. 예시적인 출력 장치(442)는, 하나 이상의 A/V 포트(452)를 통해 디스플레이 또는 스피커 등의 다양한 외부 장치와 통신하도록 구성될 수 있는 그래픽 처리 유닛(448) 및 오디오 처리 유닛(450)을 포함한다. 예시적인 주변 인터페이스(444)는 하나 이상의 I/O 포트(458)를 통해 입력 장치(예를 들어, 키보드, 마우스, 펜, 음성 입력 장치, 터치 입력 장치 등) 등의 외부 장치 또는 다른 주변 장치(예를 들어, 프린터, 스캐너 등)와 통신하도록 구성될 수 있는 직렬 인터페이스 제어기(454) 또는 병렬 인터페이스 제어기(456)를 포함한다. 예시적인 통신 장치(446)는 하나 이상의 통신 포트(464)를 통해 네트워크 통신 링크를 통해 하나 이상의 다른 컴퓨팅 장치(462)와 통신하도록 배치될 수 있는 네트워크 제어기(460)를 포함한다.
네트워크 통신 링크는 통신 매체의 일 예일 수 있다. 통신 매체는 일반적으로 컴퓨터 판독가능 명령, 데이터 구조, 프로그램 모듈 또는 반송파 또는 다른 전송 메카니즘 등의 변조된 데이터 신호 내의 다른 데이터에 의해 구현될 수 있고 임의의 정보 전달 매체를 포함할 수 있다. "변조된 데이터 신호"는 그 특성 중의 하나 이상을 갖는 신호이거나 임의의 방식으로 변경되어 신호 내의 정보를 인코딩할 수 있다. 예로서, 제한되지 않지만, 통신 매체는 유선 네트워크 또는 직접 유선 접속 등의 유선 매체, 음향, 무선 주파수(RF), 마이크로웨이브, 적외선(IR) 및 다른 무선 매체 등의 무선 매체를 포함할 수 있다. 여기에 사용된 용어 "컴퓨터 판독가능 매체"는 저장 매체 및 통신 매체를 포함할 수 있다.
컴퓨터 장치(400)는 셀 폰, 개인 휴대 단말기(PDA), 개인 매체 플레이어 장치, 무선 웹 와치(web-watch) 장치, 개인 헤드셋 장치, 애플리케이션 특정 장치 또는 상기 기능 중의 어느 것을 포함하는 하이브리드 장치 등의 소형 인수 휴대용(또는 이동) 전자 장치 중의 일부로서 구현될 수 있다. 컴퓨팅 장치(400)는 또한 랩탑 컴퓨터 및 넌-랩탑 컴퓨터 구성을 포함하는 개인 컴퓨터로서 구현될 수 있다.
본 개시물은 다양한 형태의 설명으로 의도되며, 본 출원에 기재된 특정한 실시예에 관하여 제한되지 않는다. 본 기술에 숙련된 자에게 명백한 바와 같이 그 범위 및 사상을 벗어나지 않고 많은 변형과 변경이 가능하다. 여기에 열거된 것에 더하여 본 개시물의 범위 내의 기능적으로 동등한 방법 및 장치는 상기 설명으로부터 본 기술에 숙련된 자에게 자명하다. 이러한 변형 및 변경은 첨부된 청구범위 내에 있는 것으로 의도된다. 본 개시물은 청구범위가 부여된 동등물의 전체 범위와 함께 첨부된 청구범위에 의해서만 제한된다. 본 개시물은 변할 수 있는 특정한 방법, 시약, 복합 구성 또는 생물학 시스템으로 제한되지 않는 것을 이해할 것이다. 여기에 사용된 용어는 특정한 실시예를 설명할 목적을 위한 것이며, 제한을 의도하지 않는다.
실질적으로 임의의 복수 및/또는 단수의 용어의 사용에 대하여, 본 기술에 숙련된 자는 컨텍스트 및/또는 애플리케이션에 적절하게 복수로부터 단수 및/또는 단수로부터 복수로 변환할 수 있다. 다양한 단수/복수 순열이 명료화를 위하여 기재될 수 있다.
일반적으로, 여기에서, 특히 첨부된 청구범위(예를 들어, 첨부된 청구범위의 바디)에서, 사용되는 용어는 일반적으로 "개방" 용어(예를 들어, "포함하는"이라는 용어는 "제한되지 않지만 포함하는"으로서 해석되고, "갖는"이라는 용어는 "적어도 갖는"으로서 해석되고, "포함하다"라는 용어는 "제한되지 않지만 포함한다"로 해석됨)로서 의도된다. 특정한 수의 도입 청구항 설명이 의도되면, 이러한 의도는 청구범위 내에 명시적으로 나열되고, 이러한 나열의 부재에서, 이러한 의도는 존재하지 않음을 이해할 것이다. 예를 들어, 이해를 돕기 위하여, 다음의 첨부된 청구범위는 도입 구"적어도 하나" 및 "하나 이상"의 사용을 포함하여 청구범위 설명을 도입할 수 있다. 그러나, 이러한 구의 사용은, 동일한 청구범위가 도입 구 "하나 이상" 또는 "적어도 하나" 및 "a" 또는 "an" 등의 부정관사를 포함할 때에도(예를 들어, "a" 및/또는 "an"는 "적어도 하나" 또는 "하나 이상"을 의미하는 것으로 해석된다), 부정관사 "a" 또는 "an" 에 의한 청구범위 설명의 도입이 이러한 도입 청구범위 설명을 포함하는 임의의 특정한 청구범위를 제한하는 것을 암시하는 것으로 해석되지 않고, 이는 청구범위 설명을 도입하는데 사용되는 정관사의 사용에도 마찬가지이다. 또한, 소정 수의 도입 청구항 설명이 명시적으로 기재되어도, 본 기술에 숙련된 자는 이러한 설명이 적어도 인용된 수를 의미하는 것으로 해석되어야 함을 인식할 것이다 (예를 들어, 다른 수식어가 없는 "2개의 설명"의 기본적인 설명은 적어도 2개의 설명 또는 2 이상의 설명을 의미한다). 또한, "A, B 및 C 중의 적어도 하나"와 유사한 컨벤션(convention)이 사용되는 경우, 일반적으로 이러한 구성은 본 기술에 숙련된 자가 그 컨벤션을 이해하는 의미로 의도된다(예를 들어, "A, B 및 C의 적어도 하나를 포함하는 시스템"은, 제한되지 않지만, A만, B만, C만, A 및 B, A 및 C, B 및 C, 및/또는 A, B 및 C를 갖는 시스템을 포함한다). "A, B, 또는 C의 적어도 하나"와 유사한 컨벤션이 사용되는 경우, 일반적으로 이러한 구성은 본 기술에 숙련된 자가 그 컨벤션을 이해하는 의미로 의도된다(예를 들어, "A, B 또는 C의 적어도 하나를 포함하는 시스템"은, 제한되지 않지만, A만, B만, C만, A 및 B, A 및 C, B 및 C, 및/또는 A, B 및 C를 갖는 시스템을 포함한다). 설명, 청구범위 또는 도면에서, 2개 이상의 대체 용어를 나타내는 가상적인 임의의 선언 단어 및/또는 구는 용어 중의 하나, 용어 중의 다른 하나 또는 2개의 용어를 포함할 가능성을 고려하도록 이해되어야 한다. 예를 들어, 구"A 또는 B"는 "A", "B" 또는 "A 및 B"의 가능성을 포함하는 것으로 이해될 것이다.
본 개시물의 특징 또는 형태가 마쿠쉬 그룹에 관하여 기재되지만, 본 기술에 숙련된 자는 본 개시물이 마쿠쉬 그룹의 임의의 개별 부재 또는 부재의 서브그룹으로 기재될 수 있음을 인식할 것이다.
본 기술에 숙련된 자에 의해 이해되는 바와 같이, 기재된 설명을 제공하는 관점 등의 임의의 및 모든 목적을 위하여, 여기에 기재된 모든 범위는 임의의 및 모든 가능한 하위 범위 및 그 하위 범위의 조합을 포함한다. 임의의 열거된 범위는 동일한 범위를 충분히 설명하고 적어도 2등분, 3등분, 4등분, 5등분, 10등분 등으로 나누도록 인식될 수 있다. 비제한적인 예로서, 여기에 기재된 각각의 범위는 하위 삼분의 일, 중간 삼분의 일, 상위 삼분의 일로 용이하게 나누어질 수 있다. 본 기술에 숙련된 자에 이해되는 바와 같이, "까지", "적어도", "보다 큰", "보다 작은" 등의 모든 언어는 인용된 수를 포함하고 상술한 바와 같이 하위 범위로 나누어질 수 있는 범위를 지칭한다. 마지막으로, 본 기술에 숙련된 자에 의해 이해되는 바와 같이, 범위는 각각의 개별 부재를 포함한다. 따라서, 예를 들어, 1 내지 3개의 셀을 갖는 그룹은 1, 2 또는 3개의 셀을 갖는 그룹을 지칭한다. 마찬가지로 1 내지 5개의 셀을 갖는 그룹은 1, 2, 3, 4 또는 5개의 셀을 갖는 그룹을 지칭한다.
다양한 형태 및 실시예가 여기에 기재되지만, 다른 형태 및 실시예가 본 기술에 숙련된 자에게 자명하다. 여기에 기재된 형태 및 실시예는 설명을 목적으로 하는 것으로 제한하지 않으며, 다음의 청구범위에 의해 지시된 범위 및 사상 내에 있다.

Claims (37)

  1. 이동 전화를 이용하여 증강 현실 시스템에서 사용되는 관심있는 장면 내의 실제 물체의 위치를 추적하는 방법으로서,
    이동 전화 내의 안테나로 송신파를 수신하는 단계;
    안테나로 반사파를 수신하는 단계 - 상기 반사파는 상기 송신파로 조사될(illuminated) 때 물체로부터 반사되는 에너지와 관련됨 -;
    상기 안테나와의 통신으로 프로세서에 의해 상기 송신파와 상기 반사파 간의 차(difference)를 결정하는 단계;
    상기 차에 기초하여 상기 프로세서에 의해 추적 데이터를 생성하는 단계 - 상기 추적 데이터는 관심있는 장면 내의 실제 물체의 위치와 관련됨 -; 및
    상기 추적 데이터를 상기 관심있는 장면에 관한 추가의 데이터와 결합하여 결합 데이터를 생성하는 단계 - 상기 결합 데이터는 증강 현실 시스템 내의 실제 물체의 위치를 나타냄 -
    를 포함하는 방법.
  2. 제1항에 있어서, 상기 프로세서는 제1 프로세서이고, 상기 방법은 상기 제1 프로세서로부터 제2 프로세서로 네트워크를 통해 상기 추적 데이터를 전송하는 단계를 더 포함하는 방법.
  3. 제2항에 있어서, 상기 이동 전화는 제1 이동 전화이고, 상기 방법은 제2 이동 전화에 의해 상기 송신파를 생성하는 단계를 더 포함하는 방법.
  4. 제3항에 있어서, 상기 제2 이동 전화로부터 상기 제1 이동 전화로 제어 신호를 전송하는 단계를 더 포함하고, 상기 제어 신호는 상기 제1 이동 전화가 상기 송신파를 청취하라고 요청하도록 구성된 것인 방법.
  5. 제3항에 있어서, 상기 제2 이동 전화에 의해 기지국과 통신하는 단계를 더 포함하고, 상기 제2 이동 전화는 상기 기지국과 통신할 때 상기 송신파를 생성하도록 구성된 것인 방법.
  6. 제1항에 있어서, 상기 송신파는 제1 시간에 상기 이동 전화에 의해 생성되고, 상기 반사파는 제2 시간에 상기 이동 전화에 의해 수신되고, 상기 송신파는 제1 주파수 세트를 포함하는 제1 스펙트럼을 갖고, 상기 반사파는 제2 주파수 세트를 포함하는 제2 스펙트럼을 갖는 것인 방법.
  7. 제1항에 있어서, 상기 추적 데이터는 상기 프로세서의 위치를 포함하는 것인 방법.
  8. 제7항에 있어서, 상기 추적 데이터는 상기 프로세서와 실제 물체 간의 거리를 포함하는 것인 방법.
  9. 제3항에 있어서, 상기 제2 프로세서로부터 상기 제2 이동 전화로 제어 신호를 전송하는 단계를 더 포함하고, 상기 제어 신호는 상기 제2 이동 전화가 실제 물체를 조사하라고 요청하도록 구성된 것인 방법.
  10. 제7항에 있어서, 상기 추적 데이터는 상기 송신파에 대하여 상기 반사파의 도플러 스펙트럼 내의 변화, 실제 물체와 상기 이동 전화 사이의 각도, 실제 물체와 상기 이동 전화 사이의 각도의 변화 또는 실제 물체의 속도 중의 적어도 하나를 포함하는 것인 방법.
  11. 제1항에 있어서, 상기 차는 상기 이동 전화에 대하여 실제 물체의 이동에 의해 유발된 도플러 스펙트럼의 변화에 관한 것인 방법.
  12. 제1항에 있어서, 상기 추적 데이터는 제1 추적 데이터이고, 상기 방법은 제2 프로세서에 의해 실제 물체의 위치에 관한 제2 추적 데이터를 결정하는 단계를 더 포함하고, 상기 제2 추적 데이터는 상기 이동 전화 및 다른 이동 전화에 의해 생성된 제1 추적 데이터의 적어도 2세트에 기초하는 것인 방법.
  13. 제1항에 있어서,
    상기 이동 전화 내의 카메라에 의해 관심있는 장면에 관한 데이터를 캡쳐하는 단계; 및
    상기 이동 전화에 의해 상기 추적 데이터 및 상기 관심있는 장면에 관한 데이터에 기초하여 이미지를 디스플레이하는 단계
    를 더 포함하는 방법.
  14. 제12항에 있어서,
    상기 이동 전화 내의 카메라에 의해 관심있는 장면에 관한 데이터를 캡쳐(capture)하는 단계;
    상기 이동 전화에 의해 상기 제2 추적 데이터를 수신하는 단계; 및
    상기 이동 전화에 의해 상기 제2 추적 데이터 및 상기 관심있는 장면에 관한 데이터에 기초하여 이미지를 디스플레이하는 단계
    를 더 포함하는 방법.
  15. 제12항에 있어서,
    상기 제2 프로세서와 통신하여 카메라에 의해 관심있는 장면에 관한 데이터를 캡쳐하는 단계;
    상기 제2 추적 데이터 및 상기 관심있는 장면에 관한 데이터에 기초하여 이미지를 생성하는 단계; 및
    상기 이미지를 디스플레이로 전송하는 단계
    를 더 포함하는 방법.
  16. 제1항에 따른 방법을 구현하도록 구성되는 이동 전화로서,
    프로세서;
    상기 프로세서와 통신하도록 배치된 메모리; 및
    상기 프로세서와 통신하도록 배치된 안테나 - 상기 안테나는 기지국과 통신하도록 구성되고, 상기 안테나는 송신파를 수신하고 반사파를 수신하도록 구성되며, 상기 반사파는 상기 송신파로 조사될 때 물체로부터 반사된 에너지와 관련됨 -
    를 포함하고,
    상기 프로세서는,
    상기 송신파와 상기 반사파 간의 차를 결정하고;
    상기 차에 기초하여 추적 데이터를 생성하고 - 상기 추적 데이터는 상기 관심있는 장면 내의 실제 물체의 위치와 관련됨 -;
    상기 추적 데이터를 상기 관심있는 장면에 관한 추가의 데이터와 결합하여 결합 데이터를 생성하고 - 상기 결합 데이터는 증강 현실 시스템 내의 실제 물체의 위치를 나타냄 -;
    상기 추적 데이터를 상기 메모리에 저장하도록 구성된 것인 이동 전화.
  17. 제16항에 있어서, 상기 프로세서와 통신하도록 배치된 디스플레이를 더 포함하고, 상기 프로세서는 상기 추적 데이터에 기초하여 이미지를 생성하도록 구성되고, 상기 디스플레이는 상기 이미지를 디스플레이하도록 구성된 것인 이동 전화.
  18. 제17항에 있어서, 상기 프로세서와 통신하도록 배치된 카메라를 더 포함하고, 상기 카메라는 관심있는 장면에 관한 데이터를 캡쳐하도록 구성되고, 상기 프로세서는 상기 추적 데이터 및 상기 관심있는 장면에 관한 데이터에 기초하여 이미지를 생성하도록 구성되는 것인 이동 전화.
  19. 이동 전화로부터 수신된 제1 추적 데이터를 이용하여 관심있는 장면 내의 실제 물체의 위치를 추적하도록 구성된 증강 현실 장치로서, 상기 제1 추적 데이터는 송신파와 반사파 간의 차에 관한 것이고, 상기 반사파는 상기 송신파로 조사될 때 실제 물체로부터 반사된 에너지와 관련되고, 상기 증강 현실 장치는,
    프로세서;
    상기 프로세서와 통신하도록 배치된 메모리; 및
    상기 프로세서와 통신하도록 배치된 안테나
    를 포함하고,
    상기 안테나는 관심있는 장면 내의 실제 물체의 위치에 관한 제1 추적 데이터를 수신하도록 구성되고, 상기 프로세서는 상기 제1 추적 데이터에 기초하여 상기 관심있는 장면 내의 실제 물체의 위치에 관한 제2 추적 데이터를 결정하도록 구성되고, 상기 프로세서는 상기 제1 및 제2 추적 데이터를 상기 관심있는 장면에 관한 추가의 데이터와 결합하여 결합 데이터를 생성하도록 구성되며, 상기 결합 데이터는 상기 증강 현실 시스템 내의 실제 물체의 위치를 나타내는 것인 증강 현실 장치.
  20. 제19항에 있어서, 상기 프로세서는 복수의 이동 전화로부터 상기 제1 추적 데이터를 수신하도록 구성된 것인 증강 현실 장치.
  21. 제19항에 있어서, 상기 프로세서와 통신하도록 배치된 디스플레이를 더 포함하고, 상기 프로세서는 상기 제2 추적 데이터에 기초하여 이미지를 생성하도록 구성되고, 상기 디스플레이는 상기 이미지를 디스플레이하도록 구성된 것인 증강 현실 장치.
  22. 관심있는 장면 내의 실제 물체의 위치를 추적하고 제19항에 따른 증강 현실 장치에서 사용되는 방법으로서,
    프로세서에서 하나 이상의 이동 전화로부터 제1 추적 데이터를 수신하는 단계 - 상기 제1 추적 데이터는 송신파와 반사파 간의 차에 관한 것이고, 상기 반사파는 상기 송신파로 조사될 때 물체로부터 반사된 에너지와 관련되고, 상기 제1 추적 데이터는 상기 관심있는 장면 내의 실제 물체의 위치에 관한 것임 -;
    상기 프로세서에 의해 상기 제1 추적 데이터에 기초하여 상기 물체의 위치에 관한 제2 추적 데이터를 결정하는 단계; 및
    상기 프로세서에 의해 상기 제1 및 제2 추적 데이터를 상기 관심있는 장면에 관한 추가의 데이터와 결합하여 결합 추적 데이터를 생성하는 단계 - 상기 결합 추적 데이터는 증강 현실 시스템 내의 실제 물체의 위치를 나타냄 -
    를 포함하는 방법.
  23. 제22항에 있어서,
    상기 프로세서에 의해 상기 제2 추적 데이터에 기초하여 이미지를 생성하는 단계; 및
    상기 이미지를 디스플레이 상에 디스플레이하는 단계
    를 더 포함하는 방법.
  24. 증강 현실에 사용되는 관심있는 장면 내의 실제 물체의 위치를 추적하는 시스템으로서,
    이동 전화; 및
    제19항의 증강 현실 장치
    를 포함하고,
    상기 이동 전화는,
    제1 프로세서; 및
    상기 제1 프로세서와 통신하도록 배치된 제1 안테나를 포함하고,
    상기 제1 안테나는 기지국과 통신하도록 구성되고, 상기 제1 안테나는 송신파를 수신하고 실제 물체로부터 반사된 반사파를 수신하도록 구성되며, 상기 반사파는 상기 송신파로 조사될 때 실제 물체로부터 반사된 에너지와 관련되고,
    상기 제1 프로세서는 상기 송신파와 상기 반사파 간의 차를 결정하도록 구성되고 상기 차에 기초하여 제1 추적 데이터를 생성하도록 구성되며, 상기 제1 추적 데이터는 상기 관심있는 장면 내의 실제 물체의 위치와 관련되고,
    상기 증강 현실 장치는,
    제2 프로세서; 및
    상기 제2 프로세서와 통신하도록 배치된 제2 안테나를 포함하고,
    상기 제2 안테나는 상기 제1 추적 데이터를 수신하도록 구성되고, 상기 제2 프로세서는 상기 제1 추적 데이터에 기초하여 실제 물체의 위치에 관한 제2 추적 데이터를 결정하도록 구성되며, 상기 제2 프로세서는 상기 제1 및 제2 추적 데이터를 상기 관심있는 장면에 관한 추가의 데이터와 결합하여 결합 추적 데이터를 생성하도록 구성되고, 상기 결합 추적 데이터는 상기 증강 현실 내의 실제 물체의 위치를 나타내는 것인 시스템.
  25. 제24항에 있어서, 상기 이동 전화는 제1 이동 전화이고, 상기 시스템은 제2 이동 전화를 더 포함하고, 상기 제2 이동 전화는 상기 송신파를 생성하도록 구성된 것인 시스템.
  26. 제25항에 있어서, 상기 제2 프로세서는 상기 제2 이동 전화에 제어 신호를 전송하도록 구성되고, 상기 제어 신호는 상기 제2 이동 전화가 상기 물체를 조사하라고 요청하도록 구성된 것인 시스템.
  27. 제25항에 있어서,
    상기 기지국은 제1 기지국이고,
    상기 제2 이동 전화는 또한 제2 기지국과 통신하도록 구성되고,
    상기 제2 이동 전화는 상기 제2 기지국과 통신할 때 상기 송신파를 생성하도록 구성된 것인 시스템.
  28. 제24항에 있어서,
    상기 송신파는 상기 이동 전화에 의해 제1 시간에 제1 주파수 세트를 포함하는 제1 스펙트럼으로 생성되고,
    상기 이동 전화는 제2 시간에 동작하여 제2 주파수 세트를 포함하는 제2 스펙트럼을 갖는 반사파를 수신하도록 구성된 것인 시스템.
  29. 제24항에 있어서, 상기 제1 추적 데이터는 상기 제1 프로세서의 위치를 포함하는 것인 시스템.
  30. 제24항에 있어서, 상기 제1 추적 데이터는 상기 제1 프로세서와 실제 물체 간의 거리, 상기 반사파와 관련된 도플러 스펙트럼의 변화, 실제 물체와 상기 이동 전화 간의 각도, 물체와 상기 이동 전화 간의 각도의 변화 또는 실제 물체의 속도 중의 적어도 하나를 포함하는 것인 시스템.
  31. 제24항에 있어서, 상기 차는 상기 이동 전화에 대하여 실제 물체의 이동에 의해 유발된 도플러 스펙트럼의 변화에 관한 것인 시스템.
  32. 제24항에 있어서, 상기 제1 프로세서와 통신하도록 배치되는 디스플레이를 더 포함하고, 상기 제1 프로세서는 상기 제2 추적 데이터에 기초하여 이미지를 생성하도록 구성되고, 상기 디스플레이는 상기 이미지를 디스플레이하도록 구성된 것인 시스템.
  33. 제32항에 있어서, 상기 제1 프로세서와 통신하도록 배치된 카메라를 더 포함하고, 상기 카메라는 관심있는 장면에 관한 데이터를 캡쳐하도록 구성되고, 상기 제1 프로세서는 상기 제2 추적 데이터와 상기 관심있는 장면에 관한 데이터에 기초하여 이미지를 생성하도록 구성된 것인 시스템.
  34. 컴퓨팅 장치에 의해 실행될 때 이동 전화를 이용하여 증강 현실 시스템에서 사용되는 관심있는 장면 내의 실제 물체의 위치를 추적하는 제1항의 방법을 수행하도록 상기 컴퓨팅 장치를 적응시키는 컴퓨터 실행가능 명령이 저장된 컴퓨터 저장 매체로서, 상기 방법은,
    상기 이동 전화 내의 안테나로 송신파를 수신하는 단계;
    안테나로 반사파를 수신하는 단계 - 상기 반사파는 상기 송신파로 조사될 때 물체로부터 반사되는 에너지와 관련됨 -;
    상기 안테나와의 통신으로 프로세서에 의해 상기 송신파와 상기 반사파 간의 차를 결정하는 단계;
    상기 차에 기초하여 상기 프로세서에 의해 추적 데이터를 생성하는 단계 - 상기 추적 데이터는 상기 관심있는 장면 내의 실제 물체의 위치와 관련됨 -; 및
    상기 추적 데이터를 상기 관심있는 장면에 관한 추가의 데이터와 결합하여 결합 데이터를 생성하는 단계 - 상기 결합 데이터는 증강 현실 시스템 내의 실제 물체의 위치를 나타냄 -
    를 포함하는 것인 컴퓨터 저장 매체.
  35. 제34항에 있어서, 상기 차는 상기 이동 전화에 대하여 물체의 이동에 의해 유발된 도플러 스펙트럼의 변화에 관한 것인 컴퓨터 저장 매체.
  36. 증강 현실에서 사용되는 관심있는 장면 내의 실제 물체의 위치를 추적하는 시스템으로서,
    제1 이동 전화;
    제2 이동 전화; 및
    제19항의 증강 현실 장치
    를 포함하고,
    상기 제1 이동 전화는,
    제1 프로세서; 및
    상기 제1 프로세서와 통신하도록 배치된 제1 안테나를 포함하고,
    상기 제1 안테나는 제1 기지국과 통신하도록 구성되고, 상기 제1 안테나는 제1 송신파를 수신하고 물체로부터 반사된 제1 반사파를 수신하도록 구성되고, 상기 제1 반사파는 상기 제1 송신파로 조사될 때 실제 물체로부터 반사된 에너지와 관련되고,
    상기 제1 프로세서는 상기 제1 송신파와 상기 제1 반사파 간의 제1 차를 결정하도록 구성되고 상기 차에 기초하여 제1 추적 데이터를 생성하도록 구성되며, 상기 제1 추적 데이터는 상기 관심있는 장면 내의 실제 물체의 위치와 관련되고,
    상기 제2 이동 전화는,
    제2 프로세서; 및
    상기 제2 프로세서와 통신하도록 배치된 제2 안테나를 포함하고,
    상기 제2 안테나는 제2 기지국과 통신하도록 구성되고, 상기 제2 안테나는 제2 송신파를 수신하고 물체로부터 반사된 제2 반사파를 수신하도록 구성되며, 상기 제2 반사파는 상기 제2 송신파로 조사될 때 물체로부터 반사된 에너지와 관련되고,
    상기 제2 프로세서는 상기 제2 송신파와 상기 제2 반사파 간의 제2 차를 결정하도록 구성되고 상기 제2 차에 기초하여 제2 추적 데이터를 생성하도록 구성되며, 상기 제2 추적 데이터는 상기 관심있는 장면 내의 실제 물체의 위치와 관련되고,
    상기 증강 현실 장치는,
    제3 프로세서; 및
    상기 제3 프로세서와 통신하도록 배치된 제3 안테나를 포함하고,
    상기 제3 안테나는 상기 제1 및 제2 추적 데이터를 수신하도록 구성되고, 상기 제3 프로세서는 상기 제1 및 제2 추적 데이터에 기초하여 실제 물체의 위치에 관한 제3 추적 데이터를 결정하도록 구성되고, 상기 제3 프로세서는 상기 제1, 제2 및 제3 추적 데이터를 상기 관심있는 장면에 관한 추가의 데이터와 결합하여 결합 추적 데이터를 생성하도록 구성되고, 상기 결합 추적 데이터는 상기 증강 현실 시스템 내의 실제 물체의 위치를 나타내는 것인 시스템.
  37. 제36항에 있어서, 제3 이동 전화를 더 포함하고, 상기 제3 이동 전화는 상기 제1 송신파를 생성하도록 구성된 것인 시스템.


KR1020127014417A 2010-03-02 2011-02-16 증강 현실에서의 물체 추적 KR101491582B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/715,868 2010-03-02
US12/715,868 US8442502B2 (en) 2010-03-02 2010-03-02 Tracking an object in augmented reality
PCT/US2011/024988 WO2011109167A1 (en) 2010-03-02 2011-02-16 Tracking an object in augmented reality

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020147005474A Division KR101687460B1 (ko) 2010-03-02 2011-02-16 증강 현실에서의 물체 추적

Publications (2)

Publication Number Publication Date
KR20120094007A true KR20120094007A (ko) 2012-08-23
KR101491582B1 KR101491582B1 (ko) 2015-02-09

Family

ID=44531769

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020147005474A KR101687460B1 (ko) 2010-03-02 2011-02-16 증강 현실에서의 물체 추적
KR1020127014417A KR101491582B1 (ko) 2010-03-02 2011-02-16 증강 현실에서의 물체 추적

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020147005474A KR101687460B1 (ko) 2010-03-02 2011-02-16 증강 현실에서의 물체 추적

Country Status (4)

Country Link
US (1) US8442502B2 (ko)
JP (1) JP5566472B2 (ko)
KR (2) KR101687460B1 (ko)
WO (1) WO2011109167A1 (ko)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101719982B1 (ko) * 2010-07-19 2017-03-27 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101363559B1 (ko) * 2010-07-23 2014-02-17 주식회사 팬택 부가 데이터를 이용한 증강 현실 제공 장치 및 증강 현실 제공 방법
US20130050499A1 (en) * 2011-08-30 2013-02-28 Qualcomm Incorporated Indirect tracking
US9854328B2 (en) 2012-07-06 2017-12-26 Arris Enterprises, Inc. Augmentation of multimedia consumption
CN104520806B (zh) * 2012-08-01 2016-09-14 英派尔科技开发有限公司 用于云监控的异常检测
US9164552B2 (en) 2012-09-27 2015-10-20 Futurewei Technologies, Inc. Real time visualization of network information
US9589078B2 (en) 2012-09-27 2017-03-07 Futurewei Technologies, Inc. Constructing three dimensional model using user equipment
GB201222625D0 (en) * 2012-12-14 2013-01-30 Omarco Network Solutions Ltd Improvements relating to tracking moving objects
US10217284B2 (en) * 2013-09-30 2019-02-26 Qualcomm Incorporated Augmented virtuality
US9886162B2 (en) 2014-06-02 2018-02-06 Qualcomm Incorporated Device-provided tracking data for augmented reality
US9092898B1 (en) 2014-07-03 2015-07-28 Federico Fraccaroli Method, system and apparatus for the augmentation of radio emissions
US9736628B2 (en) * 2015-01-09 2017-08-15 Twych Innovation, Inc. Object location tracking using mobile communication device
US10181219B1 (en) 2015-01-21 2019-01-15 Google Llc Phone control and presence in virtual reality
US10102674B2 (en) 2015-03-09 2018-10-16 Google Llc Virtual reality headset connected to a mobile computing device
WO2016187483A1 (en) * 2015-05-20 2016-11-24 Brian Mullins Light-based radar system for augmented reality
US9781565B1 (en) * 2016-06-01 2017-10-03 International Business Machines Corporation Mobile device inference and location prediction of a moving object of interest
US10254546B2 (en) 2016-06-06 2019-04-09 Microsoft Technology Licensing, Llc Optically augmenting electromagnetic tracking in mixed reality
IL254452B (en) * 2017-09-12 2019-12-31 Senstation Tech Ltd A method and system for target detection by a passive radar system that utilizes sources of multi-channel quality according to provider
CN109931923B (zh) 2017-12-15 2023-07-07 阿里巴巴集团控股有限公司 一种导航引导图的生成方法和装置
TWI694355B (zh) * 2018-02-07 2020-05-21 宏達國際電子股份有限公司 即時渲染影像的追蹤系統、追蹤方法以及非暫態電腦可讀取媒體
US11614532B2 (en) 2020-01-21 2023-03-28 Rockwell Collins, Inc. Multistatic radar utilizing 5G
WO2022119366A1 (ko) * 2020-12-04 2022-06-09 삼성전자주식회사 안테나를 포함하는 전자 장치

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2831204B2 (ja) * 1992-07-09 1998-12-02 株式会社フジタ 移動体の位置出し装置
US5604503A (en) * 1995-03-27 1997-02-18 Lockheed Martin Corporation Multipath and co-channel signal preprocessor
JP2880960B2 (ja) * 1996-08-14 1999-04-12 日本電気株式会社 複合画像装置
US6011515A (en) * 1996-10-08 2000-01-04 The Johns Hopkins University System for measuring average speed and traffic volume on a roadway
KR20010070558A (ko) * 2001-05-24 2001-07-27 신천우 차량용 밀리파레이다 신호처리 시스템
CN100380136C (zh) * 2001-08-01 2008-04-09 罗克马诺尔研究有限公司 目标探测系统和方法
JP3819284B2 (ja) * 2001-11-29 2006-09-06 クラリオン株式会社 車両周囲監視装置
EP1719086B1 (en) * 2004-01-27 2013-03-27 Richard Harry Turner Method and apparatus for detection and tracking of objects within a defined area
US8180396B2 (en) * 2007-10-18 2012-05-15 Yahoo! Inc. User augmented reality for camera-enabled mobile devices
JP5266513B2 (ja) * 2007-12-19 2013-08-21 株式会社セガ ゴルフシミュレータ、ゴルフゲーム装置及びプログラム
US8301092B2 (en) * 2009-06-09 2012-10-30 Broadcom Corporation Method and system for a low noise amplifier utilizing a leaky wave antenna
US8427508B2 (en) * 2009-06-25 2013-04-23 Nokia Corporation Method and apparatus for an augmented reality user interface

Also Published As

Publication number Publication date
US8442502B2 (en) 2013-05-14
JP2013515244A (ja) 2013-05-02
CN102668605A (zh) 2012-09-12
KR101491582B1 (ko) 2015-02-09
JP5566472B2 (ja) 2014-08-06
US20110217962A1 (en) 2011-09-08
KR20140041925A (ko) 2014-04-04
KR101687460B1 (ko) 2016-12-19
WO2011109167A1 (en) 2011-09-09

Similar Documents

Publication Publication Date Title
KR101687460B1 (ko) 증강 현실에서의 물체 추적
Ruan et al. AudioGest: Enabling fine-grained hand gesture detection by decoding echo signal
KR101445996B1 (ko) 증강 현실을 위한 광대역 수동적 추적
Liu et al. Accurate WiFi based localization for smartphones using peer assistance
Lin et al. Rebooting ultrasonic positioning systems for ultrasound-incapable smart devices
Cai et al. Ubiquitous acoustic sensing on commodity iot devices: A survey
US8548494B2 (en) Localization of mobile computing devices in indoor environments
US8174934B2 (en) Sound direction detection
US8817578B2 (en) Sonic wave output device, voice communication device, sonic wave output method and program
Wang et al. ObstacleWatch: Acoustic-based obstacle collision detection for pedestrian using smartphone
CN102985840B (zh) 具有高精度的稳固超声室内定位系统
Cai et al. Self-deployable indoor localization with acoustic-enabled IoT devices exploiting participatory sensing
Guldogan et al. Multiple target tracking with Gaussian mixture PHD filter using passive acoustic Doppler-only measurements
Allegro et al. Acoustic dual-function communication and echo-location in inaudible band
Jin et al. Acoussist: An acoustic assisting tool for people with visual impairments to cross uncontrolled streets
TR200908217A2 (tr) Bir takip sırasında tarama radarı için uyarı alarmı üreten cihaz ve aynı amaca yönelik yöntem.
JP2012002584A (ja) 測位装置及び測位方法
US20240155303A1 (en) Acoustic configuration based on radio frequency sensing
CN107371228B (zh) 调整无线路由设备的发射参数的方法和电子设备
KR20210066693A (ko) 주변 환경을 탐색하는 전자 장치 및 그 동작 방법
EP3435345A1 (en) System and method for registering a position of loss of an object
CN112098944B (zh) 一种智能设备的定位方法和智能设备
KR20190054664A (ko) 360˚ 전방위 20미터 내 탐지용 fmcw 레이다 기술을 활용한 멀티센서
CN112098949B (zh) 一种定位智能设备的方法和装置
CN112098934B (zh) 一种智能设备的定位方法和智能设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
A107 Divisional application of patent
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190328

Year of fee payment: 5