KR20240056623A - 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강 - Google Patents

무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강 Download PDF

Info

Publication number
KR20240056623A
KR20240056623A KR1020247012633A KR20247012633A KR20240056623A KR 20240056623 A KR20240056623 A KR 20240056623A KR 1020247012633 A KR1020247012633 A KR 1020247012633A KR 20247012633 A KR20247012633 A KR 20247012633A KR 20240056623 A KR20240056623 A KR 20240056623A
Authority
KR
South Korea
Prior art keywords
environment
devices
network
endpoint
wireless
Prior art date
Application number
KR1020247012633A
Other languages
English (en)
Inventor
미차 안테노르 베놀리엘
가렛 에드워드 킨스만
Original Assignee
누들 테크놀로지 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 누들 테크놀로지 인코포레이티드 filed Critical 누들 테크놀로지 인코포레이티드
Publication of KR20240056623A publication Critical patent/KR20240056623A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G06F15/163Interprocessor communication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W64/00Locating users or terminals or network equipment for network management purposes, e.g. mobility management
    • H04W64/003Locating users or terminals or network equipment for network management purposes, e.g. mobility management locating network equipment
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2356/00Detection of the display position w.r.t. other display screens
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/04Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G09G2370/042Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller for monitor identification
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Mobile Radio Communication Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

하나의 예에서, 방법은 디바이스로부터 무선 신호를 수신하는 단계를 포함할 수 있다. 디바이스는 환경 내에 있을 수 있다. 방법은 또한, 디바이스를 식별하는 단계를 포함할 수 있다. 디바이스는 무선 신호 내에 포함된 데이터 및 메타데이터 중의 적어도 하나에 기초하여 식별될 수 있다. 추가적으로, 방법은 환경 내에서의 디바이스의 위치를 결정하는 단계를 포함할 수 있다. 환경 내에서의 디바이스의 위치는 무선 신호 내에 포함된 데이터에 기초하여 결정될 수 있다. 또한, 방법은 환경을 나타내는 증강된 환경, 및 증강된 환경 내에서 디바이스를 나타내는 심볼을 디스플레이하는 단계를 포함할 수 있다. 심볼은 환경 내에서의 디바이스의 위치에 대응하는 증강된 환경 내에서의 위치에서 디스플레이될 수 있다.

Description

무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강{AUGMENTING REALITY BY CAPTURING SIGNALS USING WIRELESS RADIOS}
본 개시내용은 일반적으로 현실을 증강시키는 것에 관한 것이다. 특히, 본 개시내용은 무선 라디오(wireless radio)들을 이용하여 신호들을 캡처함으로써 현실을 증강시키기 위한 시스템들 및 방법들을 설명한다.
증강 현실(augmented reality)(AR) 및 가상 현실(virtual reality)(VR)은 실제의 세계를 시뮬레이팅된 엘리먼트들 또는 전체 시뮬레이팅된 세계로 증강시키거나 대체하는 실무를 포함한다. 추가적으로, AR 및 VR은 사용자의 지각된 현실을 추가적인 그래픽, 텍스트, 사운드들, 비디오 등으로 강화하기 위하여 이용될 수 있다. 예를 들어, AR 및/또는 VR은 게임 캐릭터들을 시뮬레이팅된 세계, 다른 사용자들의 아바타(avatar)들 등에 추가할 수 있다. 따라서, 본 개시내용은 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의해 디바이스들을 식별함으로써 현실을 증강시키는 것에 관한 것이다.
청구된 발명 요지는, 임의의 단점들을 해결하거나 위에서 설명된 것들과 같은 환경들에서 오직 동작하는 실시예들로 제한되지는 않는다. 이 배경은 본 개시내용이 사용될 수 있는 예들을 예시하기 위하여 오직 제공된다.
본 개시내용은 일반적으로 현실을 증강시키는 것에 관한 것이다. 특히, 본 개시내용은 무선 라디오들을 이용하여 신호들을 캡처하는 것에 디바이스들을 식별함으로써 현실을 증강시키기 위한 시스템들 및 방법들을 설명한다.
하나의 예에서, 방법은 디바이스로부터 무선 신호를 수신하는 단계를 포함할 수 있다. 디바이스는 환경 내에 있을 수 있다. 방법은 또한, 디바이스를 식별하는 단계를 포함할 수 있다. 디바이스는 무선 신호 내에 포함된 데이터 및 메타데이터(metadata) 중의 적어도 하나에 기초하여 식별될 수 있다. 추가적으로, 방법은 환경 내에서의 디바이스의 위치를 결정하는 단계를 포함할 수 있다. 환경 내에서의 디바이스의 위치는 무선 신호 내에 포함된 데이터에 기초하여 결정될 수 있다. 또한, 방법은 환경을 나타내는 증강된 환경, 및 증강된 환경 내에서 디바이스를 나타내는 심볼을 디스플레이하는 단계를 포함할 수 있다. 심볼은 환경 내에서의 디바이스의 위치에 대응하는 증강된 환경 내에서의 위치에서 디스플레이될 수 있다.
또 다른 예에서, 방법은 제1 디바이스로부터 제1 무선 신호를 수신하는 단계를 포함할 수 있다. 제1 디바이스는 환경 내에 있을 수 있다. 방법은 또한, 제2 디바이스로부터 제2 무선 신호를 수신하는 단계를 포함할 수 있다. 제2 디바이스는 또한, 환경 내에 있을 수 있다. 추가적으로, 방법은 제1 디바이스를 식별하는 단계를 포함할 수 있다. 제1 디바이스는 제1 무선 신호 내에 포함된 데이터 및 메타데이터 중의 적어도 하나에 기초하여 식별될 수 있다. 또한, 방법은 제2 디바이스를 식별하는 단계를 포함할 수 있다. 제2 디바이스는 제2 무선 신호 내에 포함된 데이터 및 메타데이터 중의 적어도 하나에 기초하여 식별될 수 있다. 방법은 환경 내에서의 제1 디바이스 및 제2 디바이스의 위치들을 결정하는 단계를 포함할 수 있다. 제1 디바이스 및 제2 디바이스의 위치는 제1 및 제2 무선 신호에 기초하여 결정될 수 있다. 방법은 또한, 증강된 환경을 디스플레이하는 단계를 포함할 수 있다. 증강된 환경은 환경을 나타낼 수 있고, 제1 디바이스 및 제2 디바이스를 나타내는 심볼들을 포함할 수 있다. 심볼들은 환경 내에서의 제1 디바이스 및 제2 디바이스의 위치들에 대응하는 증강된 환경 내에서의 위치들에서 디스플레이될 수 있다.
이 개요는 상세한 설명에서 이하에 추가로 설명되는 개념들의 선택을 단순화된 형태로 도입한다. 이 개요는 청구된 발명 요지의 핵심적인 특징들 또는 필수적인 특성들을 식별하도록 의도된 것도 아니고, 청구된 발명 요지의 범위를 결정할 시에 보조하는 것으로서 이용되도록 의도된 것도 아니다.
도 1은 예시적인 네트워크 아키텍처를 예시하고;
도 2는 무선 라디오들을 이용하여 신호들을 캡처함으로써 현실을 증강시키기 위한 예시적인 환경을 예시하고;
도 3은 무선 라디오들을 이용하여 신호들을 캡처함으로써 현실을 증강시키기 위한 예시적인 방법의 흐름도이고;
도 4는 머신으로 하여금, 본 명세서에서 논의된 방법들 중의 임의의 하나 이상을 수행하게 하기 위한 명령어들의 세트가 컴퓨팅 디바이스 내에서 실행될 수 있는 그러한 컴퓨팅 디바이스의 예시적인 형태인 머신의 도식적인 표현이다.
도면들에 대해 참조가 행해질 것이고, 특정 언어는 개시내용의 다양한 양태들을 설명하기 위하여 이용될 것이다. 이러한 방식으로 도면들 및 설명을 이용하는 것은 그 범위를 제한하는 것으로서 해석되지 않아야 한다. 추가적인 양태들은 청구항들을 포함하는 개시내용을 고려하여 분명할 수 있거나, 실무에 의해 학습될 수 있다.
표준화된 통신 프로토콜들(예컨대, Bluetooth®)을 이용하는 무선 디바이스들의 수가 증가하고 무선 디바이스들을 생산하는 비용이 감소함에 따라, 이 디바이스들에 의해 송신되고 수신된 무선 신호들을 이용하여 현실을 증강시킬 가능성들도 증가한다. 추가적으로, 무선 디바이스들의 수가 증가함에 따라, 이 디바이스들과 연관된 보안 및 프라이버시(privacy) 우려들은 특히, 무선 디바이스들(예컨대, IoT 디바이스들)이 예를 들어, 상업적 및 산업적 애플리케이션들에서 점점 더 확장하는 환경들에서와 같이 또한 증가한다.
본 개시내용에서 포함된 논의는 일반적으로, 증강된 환경들의 예들을 이용하여 행해진다. 증강된 환경들은, 실제의 환경(일반적으로 본 개시내용에서 "환경"으로서 지칭됨)을 추가적인 정보 및/또는 시각자료(visual)들로 강화하는 것을 포함하는 증강 현실(AR), 및 실제의 환경의 뷰(view)를 시뮬레이팅된 환경으로 대체하는 것을 포함하는 가상 현실(VR)에 적용할 수 있다는 것이 이해된다.
일부 실시예들에서는, 증강된 환경을 생성하기 위하여, 환경 내에서의 디바이스들(예컨대, 컴퓨팅 디바이스들 및/또는 센서들)은 식별 정보를 포함하는 무선 신호들을 송신할 수 있다. 예를 들어, 무선 신호들 내에 포함된 데이터는 식별 정보, 위치 정보, 디바이스/객체 특성들 디스크립터(descriptor)들, 또는 임의의 다른 적절한 유형의 데이터를 포함할 수 있다. 스마트 디바이스들은 다양한 디바이스들로부터 무선 신호들을 수신할 수 있다. 스마트 디바이스들은 스마트폰들, 컴퓨팅 디바이스들, 텔레비전들, 디지털 비디오 디스크(digital video disc)(DVD) 플레이어들, VR 헤드셋들, 셀 전화들, 태블릿들, 개인용 컴퓨터들, 또는 임의의 다른 적절한 디바이스를 포함할 수 있다.
스마트 디바이스들은 무선 신호들을 이용하여 환경 내에서 디바이스들 중의 하나 이상을 식별할 수 있다. 일부 실시예들에서, 식별 프로세스는 무선 신호들을 송신하는 디바이스들의 각각의 디바이스의 유형을 결정하는 것을 포함할 수 있다. 추가적으로, 일부 실시예들에서, 디바이스들 중의 하나 이상은 무선 신호들을 송신하도록 구성되지 않은 객체들에 물리적으로 부착된 센서들을 포함할 수 있다. 예를 들어, 센서는 거주용 건물의 룸(room) 내에 위치된 소파(sofa)에 물리적으로 부착될 수 있다. 센서들은 대응하는 객체에 관련된 데이터를 포함하는 무선 신호들을 송신할 수 있다. 예를 들어, 데이터는 객체가 소파인 것과, 소파의 대응하는 치수들을 표시할 수 있다. 이러한 그리고 다른 실시예들에서, 식별 프로세스는 센서들과 연관된 객체들의 각각의 객체의 유형을 결정하는 것을 포함할 수 있다.
적어도 하나의 실시예에서, 데이터는 객체에 대한 구입 정보를 표시할 수 있다. 예를 들어, 데이터는 소파에 대하여, 가격, 입수가능성, 배달 시간, 소파와 연관된 서비스 등을 표시할 수 있다. 추가의 예에서, 호텔 룸은 대응하는 객체에 관련된 데이터를 포함하는 무선 신호들을 각각 송신하는 다수의 객체들을 포함할 수 있다. 예를 들어, 호텔 룸은 텔레비전, 소파, 매트리스, 헤어 드라이어, 의자, 책상 등을 포함할 수 있다. 이 항목들의 각각은 대응하는 제품에 대한 임의의 유형의 정보의 데이터를 포함하는 무선 신호들을 송신할 수 있다. 추가적으로, 데이터는 객체들 중의 임의의 것 또는 전부에 대한 구입 정보를 포함할 수 있다. 예에서, 사용자는 호텔 룸에서의 객체들에 대한 데이터를 수신하고 관측하기 위하여 사용자 디바이스를 이용할 수 있다. 사용자는 예를 들어, 호텔 룸에서의 것과 동일한 모델인 새로운 매트리스와 같은 항목을 구입할 수 있다. 사용자는 사용자의 주택에서의 매트리스의 배달을 선택할 수 있고, 사용자가 호텔로부터 집으로 복귀할 때, 매트리스는 배달될 수 있고 사용자를 위하여 준비될 수 있다. 또 추가의 예에서, 사용자는 객체 자체, 또는 임의의 서비스를 포함할 수 있는 객체에 대한 서비스를 구입할 수 있다. 예를 들어, 사용자는 객체에 대한 설치 서비스 또는 보호 계획을 구입할 수 있다.
스마트 디바이스들은 또한, 환경 내에서의 디바이스들 및/또는 객체들 중의 하나 이상의 디바이스 및/또는 객체의 위치를 결정할 수 있다. 일부 실시예들에서, 무선 신호들 중의 적어도 일부는 환경 내에서의 대응하는 디바이스들 또는 객체들의 물리적 위치를 표시하는 데이터를 포함할 수 있다. 이러한 그리고 다른 실시예들에서, 스마트 디바이스들은 대응하는 무선 신호들의 신호 특성들에 기초하여 디바이스들 또는 객체들 중의 하나 이상의 디바이스 또는 객체의 위치를 결정하도록 구성될 수 있다. 일부 실시예들에서, 스마트 디바이스들은 서로에 대한 디바이스들 중의 하나 이상의 디바이스의 물리적 위치를 결정할 수 있다. 이러한 그리고 다른 실시예들에서, 스마트 디바이스들은 스마트 디바이스들의 물리적 위치에 대한 디바이스들 중의 하나 이상의 디바이스의 물리적 위치를 결정할 수 있다. 추가적으로 또는 대안적으로, 스마트 디바이스들은 환경의 외부 경계에 대한(예컨대, 벽, 건물, 수역(body of water), 페인팅된 라인, 또는 경계를 생성할 수 있는 임의의 다른 객체와 같은 물리적 경계에 대한) 디바이스들 중의 하나 이상의 디바이스의 물리적 위치들을 결정할 수 있다.
스마트 디바이스들은 디스플레이들을 포함할 수 있다. 스마트 디바이스들은 디스플레이들을 통해, 증강된 환경을 디스플레이할 수 있다. 증강된 환경은 환경을 나타내도록 디스플레이될 수 있다. 추가적으로, 스마트 디바이스들은 또한, 증강된 환경 내에서의 디바이스들 및/또는 객체들 중의 하나 이상을 나타내는 심볼들을 디스플레이할 수 있다. 예를 들어, 스마트 디바이스들은 소파들, 개인용 컴퓨터들, 텔레비전들, 스마트폰들, DVD 플레이어들, 상점(storefront)들, 건물들, 차량들, 사람, 도구들, 의학 디바이스들, 공원 벤치들, 랜드마크들, 카메라들, 또는 임의의 다른 적절한 디바이스 또는 객체의 심볼들을 디스플레이할 수 있다. 일부 실시예들에서, 스마트 디바이스들은 환경 내에서의 디바이스들의 위치들에 대응하는 증강된 환경 내에서의 위치들에서 심볼들을 디스플레이할 수 있다. 추가적으로, 스마트 디바이스들은 디바이스들 및/또는 객체들에 관한 추가적인 정보를 디스플레이할 수 있다. 증강된 환경에서 가시적인 추가적인 정보는 환경에서 가시적인 정보와 비교된 것보다 더 클 수 있다. 예를 들어, 추가적인 정보는 중량, 높이, 나이, 의학 이력, 참석 이력, 현재의 판매들, 판매 설명들, 제공된 상품들 및/또는 서비스들, 상품 설명들, 서비스 설명들, 생산 연도, 생산 제조사, 생산 모델, 또는 디바이스들 및/또는 객체들에 대응하는 임의의 다른 적절한 정보와 같은, 디바이스들 및/또는 객체들의 특성들을 포함할 수 있다. 증강된 환경에서 추가적인 정보를 포함하는 것은 스마트 디바이스들의 사용자들의 경험을 개선시킬 수 있다.
따라서, 본 개시내용은 현실을 증강시키기 위한 시스템들 및 방법들을 설명한다. 특히, 본 개시내용은 무선 라디오들을 이용하여 신호들을 캡처함으로써 현실을 증강시키기 위한 시스템들 및 방법들을 설명한다.
도 1은 본 개시내용의 실시예들이 구현될 수 있는 예시적인 네트워크 아키텍처(100)를 예시한다. 네트워크 아키텍처(100)는 하나 이상의 엔드포인트(endpoint) 디바이스들(105), 하나 이상의 중간 디바이스들(115), 하나 이상의 중계 서버들(125), 및 하나 이상의 엔드포인트 관리자 서버들(135)을 포함할 수 있다. 일부 실시예들에서, 네트워크 아키텍처(100)는 네트워크 클라이언트들로서 기능할 수 있는 크라우드-소싱된(crowd-sourced) 중간 디바이스들(115) 및 하나 이상의 중계 서버들(125)을 통해, 하나 이상의 엔드포인트 디바이스들(105)과 다양한 엔드포인트 관리자 서버들(135) 사이에서 데이터를 이동시키는 것이 가능할 수 있다.
엔드포인트 디바이스(105)는 하나 이상의 무선 디바이스들(예컨대, IoT 디바이스들)을 포함할 수 있다. 엔드포인트 디바이스(105)는 전력 공급부, 데이터 수집 디바이스(예컨대, 센서), 및 네트워크 디바이스를 포함할 수 있다. 전력 공급부는 배터리 또는 전력 그리드에 대한 접속을 포함할 수 있다. 추가적으로 또는 대안적으로, 전력 공급부는 솔라 패널(solar panel), 솔라 셀(solar cell), 솔라 광발전(solar photovoltaic), 전자기(electromagnetic) 등과 같은 에너지 하베스팅(energy harvesting) 장치를 포함할 수 있다. 적어도 일부 실시예들에서, 엔드포인트 디바이스(105)는 전력 공급부를 포함하지 않을 수 있고, 그 대신에, 주변 후방산란(ambient backscatter) 기법들을 이용할 수 있다. 엔드포인트 디바이스(105)는 또한, 하나 이상의 센서들을 포함할 수 있다. 하나 이상의 센서들은 임의의 유형의 조건을 검출하고, 검출된 조건에 기초하여 전자 데이터를 생성하도록 구성될 수 있다. 예를 들어, 엔드포인트 디바이스(105)는 심박수 모니터(heart rate monitor)에 의해 수집된 심박수 조건들을 이용하여 심박수 데이터를 생성하도록 구성되는 심박수 모니터를 갖는 스마트 워치(smart watch)를 포함할 수 있다. 일부 실시예들에서, 엔드포인트 디바이스(105)는 인터넷 상에서 통신하기 위한 능력을 가지지 않고, 인근의 중간 디바이스(115)와 같은 (예컨대, 오직 센서를 포함하는) 인근의 디바이스들과 통신할 수 있는 하드웨어 및/또는 소프트웨어를 오직 포함한다. 다른 실시예들에서, 엔드포인트 디바이스(105)는 인터넷 상에서 통신하기 위한 하드웨어 및/또는 소프트웨어를 포함할 수 있다. 적어도 하나의 실시예에서, 엔드포인트 디바이스(105)는 애플리케이션들을 보안성 있게 호스팅할 수 있고 기밀 및 암호 데이터를 저장할 수 있는 하드웨어 보안 엘리먼트(secure element)(SE)를 포함할 수 있다.
엔드포인트 디바이스(105)의 네트워크 디바이스는 무선 네트워크를 통해 또 다른 디바이스와 통신할 수 있는 임의의 하드웨어, 소프트웨어, 또는 그 조합을 포함할 수 있다. 적어도 하나의 실시예에서, 네트워크 디바이스는 Bluetooth® 또는 임의의 다른 단거리 네트워크와 같은 단거리 네트워크를 통해 통신하도록 구성된 임의의 네트워크 제어기를 포함할 수 있다. 적어도 하나의 실시예에서, 네트워크 디바이스는 저전력 네트워크를 통해 통신하도록 구성된 임의의 네트워크 제어기를 포함할 수 있다. 예시적인 엔드포인트 디바이스들(105)은 산업적 디바이스들, 주거용 기기들, 상업용 장비, 재고 추적기들, 스마트 워치들, 웨어러블들, 심박수 모니터들, 물류 추적기들, 환경적 센서들, 금전 등록기들, 신용 카드 판독기들, 포스(point-of-sale)(POS), 자전거들, 전기 스쿠터들, 전기 스케이트보드들, 차량들, 자동차들, 전기 자동차들, 위성들, 스마트 디바이스들, 또는 임의의 디바이스(무선 라디오 인터페이스를 포함하는 이동식 및 이동식이 아님)를 포함하지만, 이것으로 제한되지는 않는다. 네트워크 아키텍처(100)는 임의의 수의 엔드포인트 디바이스들(105)을 포함할 수 있고, 네트워크 아키텍처(100)에서의 엔드포인트 디바이스들(105)은 임의의 유형의 네트워크-가능 디바이스를 포함하는 임의의 유형의 엔드포인트 디바이스(105)일 수 있다. 일부 실시예들에서, 엔드포인트 디바이스들(105)은 POS, 오염 센서, 정지된 객체에 부착된 센서, 또는 개인용 컴퓨터와 같이, 네트워크 아키텍처(100)에서 고정될 수 있거나 상대적으로 정지될 수 있다. 추가적으로 또는 대안적으로, 엔드포인트 디바이스들(105)은 스마트 워치, 스마트폰들, 랩톱들, 테블릿들, 또는 임의의 자동차 또는 차량과 같이, 이동식일 수 있다.
하나 이상의 엔드포인트 디바이스들(105)은 적어도 하나의 무선 네트워크(110)를 통해 다른 디바이스들과 통신하도록 구성될 수 있다. 예를 들어, 제1 엔드포인트 디바이스(105a)는 무선 네트워크(110a)를 통해 제1 중간 디바이스(115a)와 전자 통신할 수 있다. 하나 이상의 중간 디바이스들(115)은 무선 네트워크(110)를 통해 엔드포인트 디바이스(105)와, 그리고 제2 네트워크(120)를 통해 중계 서버(125)와 통신할 수 있는 임의의 유형의 디바이스를 포함할 수 있다. 적어도 하나의 실시예에서, 중간 디바이스(115)는 2 개의 네트워크 제어기들인, 무선 네트워크(110)를 통해 통신하기 위한 제1 네트워크 제어기, 및 제2 네트워크(120)를 통해 통신하기 위한 제2 네트워크 제어기를 포함할 수 있다. 예시적인 중간 디바이스들(115)은 이동 디바이스들, 개인용 컴퓨터들(PC), 랩톱들, 스마트폰들, 넷북들, 전자-판독기들, 개인 정보 단말들(personal digital assistants)(PDA), 셀룰러 전화들, 이동 전화들, 태블릿들, 차량들, 드론들, 자동차들, 트럭들, 웨어러블 디바이스들, 안경, 라우터들, 텔레비전들, 또는 셋톱 박스들 등을 포함한다.
예시된 바와 같이, 제1 엔드포인트 디바이스(105a)는 무선 네트워크(110a)(예컨대, 단거리 네트워크)를 통해 제1 중간 디바이스(115a)와 전자 통신할 수 있다. 또한, 제2 엔드포인트 디바이스(105b)는 또 다른 무선 네트워크(110b)(예컨대, 저전력 네트워크)를 통해 제2 중간 디바이스(115b)와 전자 통신할 수 있다. 제3 엔드포인트 디바이스(105c)는 또 다른 무선 네트워크(110c)를 통해 제3 중간 디바이스(115c)와 전자 통신할 수 있다. 제4 엔드포인트 디바이스(105d)는 또 다른 무선 네트워크(110d)를 통해 제4 중간 디바이스(115d)와 전자 통신할 수 있다.
일부 실시예들에서, 무선 네트워크(110)는 상대적으로 낮은 양의 전력을 이용하는 임의의 네트워크일 수 있다. 예시적인 무선 네트워크들(110)은 임의의 Bluetooth® 네트워크 유형(예컨대, 블루투스 로우 에너지(Bluetooth Low Energy)(BLE), 블루투스 4.0, 블루투스 5.0 블루투스 장거리(Bluetooth Long Range)), NB-IoT, LTE 다이렉트(Direct), LTE-M, LTE M2M, 5G, Wi-Fi, Wi-Fi 어웨어(Aware), 밀리미터파(mmWave), 또는 임의의 다른 유형의 네트워크를 포함할 수 있다. 하나 이상의 엔드포인트 디바이스들(105)은 상이한 유형들의 무선 네트워크들(110)을 이용하여 다양한 중간 디바이스들(115)에 접속할 수 있다. 예를 들어, 제1 엔드포인트 디바이스(105a)는 제1 단거리 무선 네트워크(110a)를 통해 제1 중간 디바이스(115a)와 전자 통신할 수 있고, 제2 엔드포인트 디바이스(105b)는 제2 단거리 무선 네트워크(110b)를 통해 제2 중간 디바이스(115b)와 전자 통신할 수 있다.
엔드포인트 디바이스들(105), 중간 디바이스들(115), 또는 둘 모두는 고정될 수 있거나, 상대적으로 정지될 수 있거나, 이동가능할 수 있다. 엔드포인트 디바이스(105) 및 중간 디바이스(115)가 서로의 무선 범위 내로 들어올 때, 엔드포인트 디바이스(105) 및 중간 디바이스(115)는 엔드포인트 디바이스(105)와 중간 디바이스(115) 사이의 데이터 교환을 개시하기 위하여 핸드쉐이크(handshake) 및/또는 인증(authentication)을 수행할 수 있다.
일부 실시예들에서, 엔드포인트 디바이스(105)는 무선 네트워크(110)를 통해, 데이터를 포함하는 비콘(beacon)들(예컨대, 무선 신호들)을 주기적으로 전송할 수 있다. 엔드포인트 디바이스들(105)은 엔드포인트 디바이스들(105) 상에서 작동될 수 있는 다양한 서비스들을 포함할 수 있다. 예를 들어, 스마트 워치는 시계 서비스, 심박수 모니터 서비스, 모션 검출 서비스, 음악 서비스 등을 포함할 수 있다. 비콘들은 이 서비스들의 각각에 대하여 생성될 수 있거나, 서비스들의 일부 또는 전부에 대한 데이터를 포함하기 위하여 단일 비콘이 생성될 수 있다.
중간 디바이스(115)는 엔드포인트 디바이스들로부터의 이러한 비콘들에 대하여 리스닝(listen)할 수 있다. 비콘을 수신하는 것에 응답하여, 중간 디바이스(115)는 비콘을 제2 네트워크(120)를 통해 중계 서버(125)로 전송할 수 있다. 적어도 하나의 실시예에서, 무선 네트워크(110) 및 제2 네트워크(120)는 상이한 유형들의 네트워크들이다. 예를 들어, 무선 네트워크(110)는 Bluetooth® 네트워크일 수 있고, 제2 네트워크(120)는 셀룰러 네트워크, Wi-Fi, 또는 인터넷일 수 있다. 비콘을 수신하는 것에 응답하여, 중간 디바이스(115)는 또한, 중간 디바이스(115)에서의 디스플레이를 위한 증강 현실 또는 가상 현실 엘리먼트를 생성할 수 있다. 예를 들어, 접속된 스케이트보드 디바이스(105)로부터 비콘을 수신하는 것에 응답하여, 한 쌍의 안경(115)은 디스플레이를 통해, 스케이트보드에 대한 정보를 제시할 수 있다. 예를 들어, 안경(115)을 착용하는 사용자는 외부에서 걷고 있을 수 있고, 또 다른 사용자들이 접속된 스케이트보드(105)를 탑승하여 지나갈 수 있다. 안경(115)은 하나 이상의 증강 현실 엘리먼트들을 통한 것과 같이, 스케이트보드(115)에 대한 정보를 제공할 수 있다. 정보를 제공하기 전에, 안경(115)은, 안경(115)의 착용자에 의해 활성화될 때, 안경(115)으로 하여금, 정보를 제공하게 하는 통지를 제시할 수 있다. 안경(115)의 착용자가 스케이트보드(115)를 구입할 수 있고 그 선택의 위치로 그것을 운송하게 할 수 있도록, 정보는 구입 정보를 포함할 수 있다.
제2 네트워크(120)는 공공 네트워크(예컨대, 인터넷), 사설 네트워크(예컨대, 로컬 영역 네트워크(local area network)(LAN) 또는 광역 네트워크(wide area network)(WAN)), 유선 네트워크(예컨대, 이더넷 네트워크), 무선 네트워크(예컨대, 802.xx 네트워크 또는 Wi-Fi 네트워크), 셀룰러 네트워크(예컨대, 롱텀 에볼루션(Long Term Evolution)(LTE) 또는 LTE-어드밴스드(LTE-Advanced) 네트워크, 1G, 2G, 3G, 4G, 5G, 6G 등), 라우터들, 허브들, 스위치들, 서버 컴퓨터들, 및/또는 그 조합을 포함할 수 있다.
중계 서버(125)는 비콘 또는 비콘에 관련된 정보를 제3 네트워크(130)를 통해 엔드포인트 관리자 서버(135)로 전송할 수 있다. 제3 네트워크(130)는 공공 네트워크(예컨대, 인터넷), 사설 네트워크(예컨대, 로컬 영역 네트워크(LAN) 또는 광역 네트워크(WAN)), 유선 네트워크(예컨대, 이더넷 네트워크), 무선 네트워크(예컨대, 802.xx 네트워크 또는 Wi-Fi 네트워크), 셀룰러 네트워크(예컨대, 롱텀 에볼루션(LTE) 또는 LTE-어드밴스드 네트워크, 1G, 2G, 3G, 4G, 5G, 6G 등), 라우터들, 허브들, 스위치들, 서버 컴퓨터들, 및/또는 그 조합을 포함할 수 있다. 적어도 하나의 실시예에서, 제2 네트워크(120) 및 제3 네트워크(130)는 동일한 네트워크이거나, 적어도 일부 중첩하는 컴포넌트들을 포함한다.
하나 이상의 중계 서버들(125)은 랙마운트 서버(rackmount server), 라우터 컴퓨터, 서버 컴퓨터, 개인용 컴퓨터, 메인프레임 컴퓨터(mainframe computer), 랩톱 컴퓨터, 태블릿 컴퓨터, 데스크톱 컴퓨터, 스마트폰, 자동차들, 드론들, 로봇, 오퍼레이팅 시스템을 가지는 임의의 모빌리티 디바이스(mobility device) 등과 같은 하나 이상의 컴퓨팅 디바이스들, 데이터 저장소들(예컨대, 하드 디스크들, 메모리들, 데이터베이스들), 네트워크들, 소프트웨어 컴포넌트들, 및/또는 하드웨어 컴포넌트들을 포함할 수 있다. 하나 이상의 중계 서버들(125)은 중간 디바이스(115)로부터 비콘을 수신하도록 구성될 수 있다. 하나 이상의 중계 서버들(125)은 비콘, 또는 비콘과 관련되거나 비콘과 연관된 데이터를 엔드포인트 관리자 서버(135)로 전송할 수 있다. 하나 이상의 중계 서버들(125)은 엔드포인트 관리자 서버(135)로부터 메시지를 수신할 수 있고, 일부 실시예들에서는, 메시지를 엔드포인트 관리자 서버(135)로부터 중간 디바이스(115)로 전송할 수 있다. 적어도 일부 실시예들에서, 중간 디바이스(115)는 엔드포인트 관리자 서버(135)로부터 메시지를 수신하는 것에 응답하여, 하나 이상의 동작들을 수행할 수 있다. 동작들은 중간 디바이스(115)에 국소적인 동작들, 및/또는 메시지를 엔드포인트 관리자 서버(135)로부터 엔드포인트 디바이스(105)로 전송하는 것을 포함한다.
엔드포인트 관리자 서버(135)는 랙마운트 서버, 라우터 컴퓨터, 서버 컴퓨터, 개인용 컴퓨터, 메인프레임 컴퓨터, 랩톱 컴퓨터, 태블릿 컴퓨터, 데스크톱 컴퓨터, 스마트폰, 자동차, 드론, 로봇, 오퍼레이팅 시스템을 가지는 임의의 모빌리티 디바이스 등과 같은 하나 이상의 컴퓨팅 디바이스들, 데이터 저장소들(예컨대, 하드 디스크들, 메모리들, 데이터베이스들), 네트워크들, 소프트웨어 컴포넌트들, 및/또는 하드웨어 컴포넌트들을 포함할 수 있다. 엔드포인트 관리자 서버(135)는 하나 이상의 엔드포인트 디바이스들(105)과 연관될 수 있다. 예를 들어, 특정한 기업, 사람, 또는 제조자는 엔드포인트 디바이스(105)를 판매할 수 있고, 엔드포인트 디바이스(105)와 통신하거나, 엔트포인트 디바이스(105)를 제어하거나, 엔드포인트 디바이스(105)에 관련된 데이터를 저장하기 위하여 엔드포인트 관리자 서버(135)를 이용할 수 있다.
엔드포인트 관리자 서버(135)는 특정한 엔드포인트 디바이스(105) 또는 엔드포인트 디바이스들(105)의 세트와 연관된 메시지들을 전송할 수 있다. 예를 들어, 엔드포인트 관리자 서버(135)는 특정한 엔드포인트 디바이스(105) 또는 엔드포인트 디바이스들(105)의 세트의 특성들 또는 특징들을 설명하는 정보를 전송할 수 있다. 추가적으로, 일부 실시예들에서, 엔드포인트 관리자 서버(135)는 특정한 엔드포인트 디바이스(105)에 의해 생성된 비콘으로부터의 요청에 대한 응답과 같은 다른 통신들을 엔드포인트 디바이스(105)로 전송할 수 있다.
각각의 중계 서버(125)는 메시지 관리자(140)를 포함할 수 있다. 메시지 관리자(140)는 프로세서, (예컨대, 하나 이상의 동작들을 수행하거나 하나 이상의 동작들의 수행을 제어하기 위한) 마이크로프로세서, FPGA, 또는 ASIC을 포함하는 하드웨어를 이용하여 구현될 수 있다. 일부 다른 사례들에서, 메시지 관리자(140)는 하드웨어 및 소프트웨어의 조합을 이용하여 구현될 수 있다. 소프트웨어에 의한 구현예는 컴퓨팅 시스템(예컨대, 중계 서버(125))의 하드웨어 내에 포함될 수 있는 것과 같은 하나 이상의 트랜지스처들 또는 트랜지스터 엘리먼트들의 급속한 활성화 및 비활성화를 포함할 수 있다. 추가적으로, 소프트웨어 정의된 명령어들은 트랜지스터 엘리먼트들 내의 정보에 따라 동작할 수 있다. 소프트웨어 명령어들의 구현예는 전자 경로들을 적어도 일시적으로 재구성할 수 있고 컴퓨팅 하드웨어를 변환할 수 있다.
각각의 중계 서버(125)는 데이터 스토리지(data storage)(145)를 포함할 수 있다. 데이터 스토리지(145)는 임의의 메모리 또는 데이터 스토리지를 포함할 수 있다. 일부 실시예들에서, 데이터 스토리지(145)는 컴퓨터-실행가능 명령어들을 반송하거나 가지기 위한 컴퓨터-판독가능 저장 매체들, 또는 그 상에 저장된 데이터 구조들을 포함할 수 있다. 컴퓨터-판독가능 저장 매체들은 프로세서와 같은 범용 또는 특수-목적 컴퓨터에 의해 액세스될 수 있는 임의의 이용가능한 매체들을 포함할 수 있다. 예를 들어, 데이터 스토리지(145)는, 랜덤 액세스 메모리(Random Access Memory)(RAM), 판독-전용 메모리(Read-Only Memory)(ROM), 전기적 소거가능 프로그래밍가능 판독-전용 메모리(Electrically Erasable Programmable Read-Only Memory)(EEPROM), 컴팩트 디스크 판독-전용 메모리(Compact Disc Read-Only Memory)(CD-ROM) 또는 다른 광학 디스크 스토리지, 자기 디스크 스토리지 또는 다른 자기 저장 디바이스들, 플래시 메모리 디바이스들(예컨대, 솔리드 스테이트 메모리 디바이스들), 또는 컴퓨터-실행가능 명령어들 또는 데이터 구조들의 형태로 원하는 프로그램 코드를 반송하거나 저장하기 위하여 이용될 수 있고 범용 또는 특수-목적 컴퓨터에 의해 액세스될 수 있는 임의의 다른 저장 매체를 포함하는 유형의 또는 비-일시적 컴퓨터-판독가능 저장 매체들일 수 있는 컴퓨터-판독가능 저장 매체들을 포함할 수 있다. 위의 조합들은 데이터 스토리지(145) 내에 포함될 수 있다. 도시된 실시예에서, 데이터 스토리지(145)는 중계 서버(125)의 일부이다. 일부 실시예들에서, 데이터 스토리지(145)는 중계 서버(125)로부터 분리되어 있을 수 있고, 네트워크를 통해 데이터 스토리지(145)를 액세스할 수 있다. 적어도 하나의 실시예에서, 데이터 스토리지(145)는 다수의 데이터 스토리지들을 포함할 수 있다.
데이터 스토리지(145)는 엔드포인트 디바이스들(105), 중간 디바이스들(115), 및 엔드포인트 관리자 서버들(135)에 속하는 데이터, 및 엔드포인트 디바이스들(105), 중간 디바이스들(115), 및 엔드포인트 관리자 서버들(135) 사이의 관계들을 포함할 수 있다. 예를 들어, 데이터 스토리지(145)는 특정한 엔드포인트 관리자 서버(135)와 연관되는 엔드포인트 디바이스들의 테이블 또는 리스트를 포함할 수 있다. 데이터 스토리지(145)는 비콘의 수신의 타임스탬프(timestamp), 비콘의 생성과 연관된 타임스탬프, 비콘 및/또는 비콘을 생성하였거나 송신한 엔드포인트 디바이스(105)와 연관된 지리-위치(geo-location), 엔드포인트 디바이스(105)와 연관된 센서 데이터, 엔드포인트 관리자 서버들(135)과 엔드포인트 디바이스들(105) 사이에서 데이터를 어떻게 및/또는 어디로 전송할 것인지에 대한 라우팅 정보, 중간 디바이스들(115)과 엔드포인트 디바이스들(105) 사이의 접속 강도들, 중간 디바이스(115)에 대한 엔드포인트 디바이스(105)의 인접성, 중간 디바이스(115)를 엔드포인트 디바이스(105)와 접속하는 무선 네트워크(110)의 유형, 중간 디바이스(115)와 엔드포인트 디바이스(105) 사이의 접속의 비용, 중간 디바이스의 현재의 배터리 레벨, 중간 디바이스의 유형 등과 같은, 엔드포인트 디바이스들로부터 수신된 비콘들에 속하는 데이터를 포함할 수 있다.
메시지 관리자(140)는 엔드포인트 디바이스들(105), 중간 디바이스들(115), 및 엔드포인트 관리자 서버(들)(135) 사이의 통신들을 프로세싱할 수 있다. 예에서, 메시지 관리자(140)는 제2 네트워크(120)를 통해 제1 중간 디바이스(115a)로부터 비콘을 수신할 수 있다. 비콘은 엔드포인트 디바이스(105a)에 의해 무선 네트워크(110a)를 통해 제1 중간 디바이스(115a)로 전송되었을 수 있다. 비콘은 엔드포인트 디바이스(105a)의 식별자(예컨대, MAC 어드레스, 고유 ID), 엔드포인트 디바이스(105a)의 지리학적 위치, 및 그것이 지원하는 서비스들의 UUID들의 광고들 등을 포함하는, 엔드포인트 디바이스(105a)에 대한 특성들을 포함할 수 있다. 메시지 관리자(140)는 비콘에 속하는 정보를 식별하기 위하여 비콘을 분석하는 것에 의한 것과 같이, 비콘의 특성들을 식별할 수 있다. 메시지 관리자(140)는 비콘의 특성들에 기초하여, 비콘과 연관되는 엔드포인트 관리자 서버(135)를 식별하기 위하여 데이터 스토리지(145)를 액세스할 수 있다. 예를 들어, 엔드포인트 디바이스의 식별자는 특정한 엔드포인트 관리자 서버(135)를 운영하는 특정한 제조자와 연관될 수 있다. 메시지 관리자(140)는 데이터 스토리지(145)에서의 이 특정한 엔드포인트 관리자 서버(135), 및 엔드포인트 관리자 서버(135)에 도달하기 위하여 비콘을 전송하기 위한 어드레스 및/또는 경로를 식별할 수 있다. 적어도 일부 실시예들에서, 메시지 관리자(140)는 비콘 또는 비콘 메시지를 제3 네트워크(130)를 통해 엔드포인트 관리자 서버(135)로 전송할 수 있다. 비콘 메시지는 비콘을 포함할 수 있거나, 비콘을 포함하지 않을 수 있거나, 비콘에 속하는 정보를 포함할 수 있다.
적어도 하나의 실시예에서, 비콘은 엔드포인트 디바이스(105)와 연관된 다수의 서비스들로부터의 데이터를 포함할 수 있다. 추가적으로 또는 대안적으로, 단일 엔드포인트 디바이스(105)로부터의 다수의 비콘들이 생성될 수 있고 무선 네트워크(110)를 통해 브로드캐스팅될 수 있다. 이 다수의 비콘들의 각각은, 예를 들어, 엔드포인트 디바이스(105)와 연관된 상이한 서비스와 연관될 수 있다. 대안적으로, 이 다수의 비콘들의 각각은, 예를 들어, 무선 네트워크(110)의 상이한 네트워크 유형과 연관될 수 있다. 메시지 관리자(140)는 서비스들 및/또는 네트워크 유형을 식별할 수 있고, 서비스에 대한 정보에 기초하여, 비콘 메시지를 수신해야 하는 적절한 엔드포인트 관리자 서버(135)를 식별할 수 있다.
엔드포인트 관리자 서버(135)는 중계 서버(125)로부터 메시지를 수신할 수 있다. 엔드포인트 관리자 서버(135)는 메시지를 저장할 수 있거나, 메시지를 프로세싱할 수 있거나, 메시지에 기초하여 보고를 생성할 수 있거나, 메시지에 기초하여 통지 또는 응답을 생성할 수 있거나, 임의의 다른 액션을 행할 수 있다. 예를 들어, 엔드포인트 관리자 서버(135)는 비콘 메시지에 속하는 응답 메시지를 생성할 수 있다. 응답 메시지는 중계 서버들(125), 중간 디바이스들(115), 비콘을 생성한 엔드포인트 디바이스(105), 또는 비콘을 생성하지 않은 또 다른 엔드포인트 디바이스(105) 중의 하나 이상에 대하여 의도된 메시지를 포함할 수 있다. 엔드포인트 관리자 서버(135)는 응답 메시지를, 비콘 메시지를 엔드포인트 관리자 서버(135)로 전송한 동일한 중계 서버(125)(예컨대, 중계 서버(125a))로, 또는 비콘 메시지를 엔드포인트 관리자 서버(135)로 전송하지 않은 상이한 중계 서버(125)(예컨대, 중계 서버(125b))로 전송할 수 있다.
중계 서버(125)는 엔드포인트 관리자 서버(135)로부터, 비콘 메시지에 속하는 응답 메시지를 수신할 수 있다. 중계 서버(125)는 중계 서버(125)에서 동작들을 수행하는 것, 데이터를 또 다른 디바이스(예컨대, 사용자 디바이스)로 전송하는 것, 데이터를 엔드포인트 디바이스(105)로 전송하는 것 등에 의한 것과 같이, 응답 메시지를 프로세싱할 수 있다.
일부 실시예들에서, 네트워크 아키텍처(100)는 인터넷 상에서 네트워크-기반 통신이 가능한 임의의 디바이스들 사이에서 데이터를 교환하기 위하여 이용될 수 있다. 예에서, 네트워크 아키텍처(100)는 지연-감내 접속성(delay-tolerant connectivity)을 생성하기 위하여 현존하는 스마트폰 기반구조를 활용할 수 있다. 네트워크 아키텍처(100)는 초기 지연 감내 방식으로 데이터를 클라우드로 이동시킬 수 있고, 이것은 펌웨어 업데이트들, 스테이터스 업데이트들, 로그-파일 저장, 및 소액결제(micropayment)들과 같은 많은 유형들의 무선 통신(예컨대, IoT 통신들)을 위하여 유용할 수 있다. 중간 디바이스들(115)은 산업적 디바이스들, 스마트워치들, 웨어러블들, 물류 추적기들, 및 환경적 센서들 같은 다른 디바이스들(예컨대, 엔드포인트 디바이스들(105))에 대하여 주기적으로 스캐닝하기 위하여 스마트폰들 상에서 작동하는 소프트웨어를 포함할 수 있다. 이 엔드포인트 디바이스들(105)은 데이터를 클라우드로 그리고 데이터를 클라우드 내에서 이동시키기 위한 대용량의 광역 네트워크들을 생성하기 위하여 스마트폰들 상에서 작동하는 소프트웨어 클라이언트와 접속할 수 있다.
또한, 인간 인구의 95 %가 일부 종류의 셀룰러 서비스에 의해 포괄되는 것으로 추정되었다. 네트워크 아키텍처(100)는 전세계의 어느 곳에서나 전개될 수 있고, 더 낮은 접속성의 영역들이 그 접속성을 증가시키는 것을 가능하게 한다. 또한, 네트워크 아키텍처(100)는 예를 들어, Bluetooth® 가능형 스마트폰들 상에서 작동하는 소프트웨어를 이용함으로써, 기존의 셀룰러 네트워크들의 도달을 넘어서는 커버리지를 제공할 수 있다. 사용자들은 제한된 접속성 또는 셀룰러 접속성이 없는 에어리어(area)로 통행할 수 있지만, 무선 네트워크(110)를 통해 엔드포인트 디바이스들(105)로부터 비콘들을 여전히 수신할 수 있다. 네트워크 아키텍처(100)를 이용하면, 중간 디바이스들(115) 또는 엔드포인트 디바이스들(105)의 사용자들은 본 개시내용에서 설명된 바와 같은 증강된 환경을 이제 용이하게 생성할 수 있다.
본 개시내용의 범위로부터 이탈하지 않으면서, 수정들, 추가들, 또는 생략들이 네트워크 아키텍처(100)에 대해 행해질 수 있다. 본 개시내용은 더 일반적으로, 하나 이상의 엔드포인트 디바이스들(105), 하나 이상의 무선 네트워크들, 하나 이상의 중간 디바이스들(115), 하나 이상의 제2 네트워크들(120), 하나 이상의 중계 서버들(125), 하나 이상의 제3 네트워크들(130), 및 하나 이상의 엔드포인트 관리자 서버들(135) 또는 그 임의의 조합을 포함하는 네트워크 아키텍처(100)에 적용된다.
또한, 본 명세서에서 설명된 실시예들에서의 다양한 컴포넌트들의 분리는 분리가 모든 실시예들에서 발생한다는 것을 표시하도록 의도되지 않는다. 추가적으로, 설명된 컴포넌트들은 단일 컴포넌트로 함께 통합될 수 있거나 다수의 컴포넌트들로 분리될 수 있다는 것이 이 개시내용의 장점으로 이해될 수 있다.
도 2는 무선 라디오들을 이용하여 신호들을 캡처함으로써 현실을 증강시키기 위한 예시적인 환경(200)을 예시한다. 환경(200)은 컴퓨팅 디바이스(250) 및/또는 센서들(255)과 무선으로 통신하도록 구성된 스마트 디바이스(240)를 포함할 수 있다. 스마트 디바이스(240), 컴퓨팅 디바이스들(250), 및 센서들(255)은 도 1의 중간 디바이스들(115) 및/또는 엔드포인트 디바이스들(105)에 대응할 수 있다.
일부 실시예들에서, 스마트 디바이스(240), 컴퓨팅 디바이스들(250), 및 센서들(255)은 네트워크(245) 상에서 통신하도록 구성될 수 있다. 네트워크(245)는 공공 네트워크(예컨대, 인터넷), 사설 네트워크(예컨대, 로컬 영역 네트워크(LAN) 또는 광역 네트워크(WAN)), 유선 네트워크(예컨대, 이더넷 네트워크), 무선 네트워크(예컨대, 802.xx 네트워크 또는 Wi-Fi 네트워크), 셀룰러 네트워크(예컨대, 롱텀 에볼루션(LTE) 또는 LTE-어드밴스드 네트워크, 1G, 2G, 3G, 4G, 5G 등), 라우터들, 허브들, 스위치들, 서버 컴퓨터들, 및/또는 그 조합을 포함할 수 있다. 일부 실시예들에서, 스마트 디바이스(240), 컴퓨팅 디바이스들(250), 및 센서들(255)은 무선 네트워크(110) 상에서 서로 통신하도록 구성될 수 있다. 적어도 하나의 실시예에서, 무선 네트워크(110) 및 네트워크(245)는 동일한 네트워크이거나, 적어도 일부 중첩하는 컴포넌트들을 포함한다.
일부 실시예들에서, 센서들(255)은 무선 통신을 위하여 구성되지 않은 객체(예컨대, 무선 카드를 포함하지 않는 비-컴퓨팅 디바이스 또는 컴퓨팅 디바이스)에 물리적으로 부착되도록 구성된 디바이스들을 포함할 수 있다. 예를 들어, 센서들(255)은 가구, 선반 유닛, 사진, 그림, PC, 또는 임의의 다른 객체에 부착될 수 있다. 센서들(255)은 객체들에 대응하는 데이터를 포함하는 무선 신호들을 송신하도록 구성될 수 있다. 예를 들어, 센서들(255)이 가구들에 부착될 경우에, 센서들(255)은 환경(200) 내에서의 가구들의 치수들, 중량, 및/또는 물리적 위치를 포함하는 무선 신호들을 송신할 수 있다. 적어도 하나의 실시예에서, 센서들(255)은 하드웨어 보안 엘리먼트를 포함할 수 있다.
일부 실시예들에서, 컴퓨팅 디바이스들(250)은 무선 통신을 위하여 구성된 디바이스들을 포함할 수 있다. 예를 들어, 컴퓨팅 디바이스들(250)은 태블릿, 스마트폰, 이동 디바이스, 스마트 텔레비전, 스마트 DVD 플레이어, 또는 임의의 다른 적절한 디바이스를 포함할 수 있다. 컴퓨팅 디바이스들(250)은 컴퓨팅 디바이스들(250)에 대응하는 데이터를 포함하는 무선 신호들을 송신할 수 있다. 예를 들어, 컴퓨팅 디바이스들(250)에 의해 송신된 무선 신호들은 디바이스 식별자, 디바이스 디스크립터, 컴퓨팅 디바이스의 물리적 위치, 또는 임의의 다른 적절한 데이터를 포함할 수 있다.
스마트 디바이스(240)는 컴퓨팅 디바이스들(250) 및 센서들(255)로부터 무선 신호들을 수신할 수 있다. 일부 실시예들에서, 스마트 디바이스(240)는 무선 네트워크(110)를 통해 무선 신호들을 수신할 수 있다. 다른 실시예들에서, 스마트 디바이스(240)는 네트워크(245)를 통해 무선 신호들을 수신할 수 있다. 일부 실시예들에서, 스마트 디바이스(240)는 무선 네트워크(110)를 통해 무선 신호들의 부분을, 그리고 네트워크(245)를 통해 무선 신호들의 또 다른 부분을 수신할 수 있다.
스마트 디바이스(240)는 무선 신호들에 기초하여 컴퓨팅 디바이스들(250) 및/또는 센서들을 식별할 수 있다. 일부 실시예들에서, 무선 신호들은 무선 신호의 신호의 유형에 대응하는 메타데이터를 포함할 수 있다. 예를 들어, 메타데이터는 무선 신호들이 블루투스(Bluetooth), Wi-Fi, 또는 또 다른 유형의 통신 프로토콜을 포함하는 통신 프로토콜을 이용하여 전송된다는 것을 표시할 수 있다. 또 다른 예로서, 메타데이터는 무선 신호들의 주파수 대역(예컨대, 무선 신호의 유형)을 표시할 수 있다. 이러한 그리고 다른 실시예들에서, 스마트 디바이스(240)는 메타데이터에 기초하여 컴퓨팅 디바이스들(250) 및/또는 센서들(255)을 식별할 수 있다.
일부 실시예들에서, 무선 신호들은 컴퓨팅 디바이스들(250) 및/또는 센서들(255)이 부착되는 객체들에 대응하는 데이터를 포함할 수 있다. 예를 들어, 무선 신호들 내에 포함된 데이터는 디바이스 식별자, 컴퓨팅 디바이스들(250) 및/또는 센서들(255)이 부착되는 객체들의 특성 설명들, 컴퓨팅 디바이스들(250)의 공개된 MAC 어드레스, 또는 임의의 다른 적절한 데이터를 포함할 수 있다. 이러한 그리고 다른 실시예들에서, 스마트 디바이스(240)는 무선 신호들 내에 포함된 데이터에 기초하여 컴퓨팅 디바이스들(250) 및/또는 센서들(255)을 식별할 수 있다. 예를 들어, 스마트 디바이스(240)는 증강된 환경 내에 포함되어야 할 컴퓨팅 디바이스들(250)의 공개된 MAC 어드레스를 결정할 수 있다.
일부 실시예들에서, 스마트 디바이스(240)는 컴퓨팅 디바이스들(250) 및/또는 센서들(255)이 부착되는 객체들에 대한 추가적인 정보가 중계 서버(125) 및/또는 엔드포인트 관리자 서버(135)(도 2에서 예시되지 않음)에서 이용가능할 수 있는 것으로 결정할 수 있다. 이러한 그리고 다른 실시예들에서, 스마트 디바이스(240)는 요청 메시지들(예컨대, 비콘들)을 컴퓨팅 디바이스들(250) 및/또는 센서들(255) 중의 하나 이상과 연관된 중계 서버들(125) 또는 엔드포인트 관리자 서버들(135)로 송신할 수 있다. 이러한 그리고 다른 실시예들에서, 요청 메시지들은 무선 신호들이 그로부터 수신되었던 특정한 컴퓨팅 디바이스들(250) 및/또는 센서들(255)을 식별할 수 있다. 추가적으로, 요청 메시지들은 무선 신호들이 그로부터 수신되었던 컴퓨팅 디바이스들(250) 및/또는 센서들(255)에 관한 추가적인 정보를 요청할 수 있다.
스마트 디바이스(240)는 환경(200) 내에서의 컴퓨팅 디바이스들(250) 및 센서들(255)의 위치들을 결정할 수 있다. 환경(200) 내에서의 컴퓨팅 디바이스들(250) 및 센서들(255)/센서들(255)이 부착되는 객체들의 위치들은 무선 신호들에 기초하여 결정될 수 있다. 일부 실시예들에서, 무선 신호들은 대응하는 컴퓨팅 디바이스들(250) 및 센서들(255)/센서들(255)이 부착되는 객체들의 위치 정보를 포함할 수 있다. 다른 실시예들에서, 대응하는 컴퓨팅 디바이스들(250) 및 센서들(255)/센서들(255)이 부착되는 객체들의 위치들은 무선 신호들의 특성들에 기초하여 결정될 수 있다. 예를 들어, 무선 신호들의 신호 강도가 이용될 수 있다.
일부 실시예들에서, 스마트 디바이스(240)는 서로에 대한 대응하는 컴퓨팅 디바이스들(250) 및 센서들(255)/센서들(255)이 부착되는 객체들의 물리적 위치를 결정할 수 있다. 이러한 그리고 다른 실시예들에서, 스마트 디바이스(240)는 스마트 디바이스(240)의 물리적 위치에 대한 대응하는 컴퓨팅 디바이스들(250) 및 센서들(255)/센서들(255)이 부착되는 객체들의 물리적 위치를 결정할 수 있다. 추가적으로 또는 대안적으로, 스마트 디바이스(240)는 환경(200)의 외부 경계에 대한 대응하는 컴퓨팅 디바이스들(250) 및 센서들(255)/센서들(255)이 부착되는 객체들의 물리적 위치들을 결정할 수 있다.
스마트 디바이스(240)는 디스플레이(260)를 포함할 수 있다. 스마트 디바이스(240)는 디스플레이(260)를 통해, 증강된 환경을 디스플레이할 수 있다. 일부 실시예들에서, 증강된 환경은 환경(200) 및 환경(200) 내에서 위치된 상이한 컴퓨팅 디바이스들(250) 및/또는 객체들을 표현하도록 디스플레이될 수 있다. 예를 들어, 증강된 환경은 스마트 디바이스(240), 컴퓨팅 디바이스들(250) 중의 하나 이상, 및/또는 센서들(255)이 부착되는 객체들 중의 하나 이상을 나타내는 심볼들을 포함할 수 있다. 일부 실시예들에서, 스마트 디바이스(240)는 적어도 환경(200) 내에서 이동하도록 구성된 이동 디바이스 또는 웨어러블 디바이스를 포함할 수 있다. 다른 실시예들에서, 스마트 디바이스(240)는 환경(200) 내에서 정지하도록 구성된 정지식 디바이스를 포함할 수 있다.
디스플레이되고 있는 심볼들이 환경(200) 내에서의 대응하는 컴퓨팅 디바이스들(250) 및 객체들의 위치에 대응하는 증강된 환경 내에서의 위치에서 디스플레이되도록, 증강된 환경이 디스플레이될 수 있다. 일부 실시예들에서, 증강된 환경은 환경(200)의 3차원 표현을 포함할 수 있다. 예를 들어, 증강된 환경은 룸의 시뮬레이팅된 벽들, 컴퓨팅 디바이스들(250) 또는 객체들의 높이, 선반들, 또는 환경(200) 내에서의 임의의 다른 적절한 디바이스 및/또는 객체를 포함할 수 있다. 또 다른 예로서, 룸에서의 각각의 가구는 대응하는 센서(255)에 부착될 수 있다. 대응하는 센서들(255)은 가구의 치수들, 중량, 형상, 재료, 또는 제조자와 같은 물리적 특성들을 포함하기 위한 무선 신호들을 송신할 수 있다. 스마트 디바이스(240)는 이 무선 신호들을 수신할 수 있고, 3차원 표현이 되도록 증강된 환경을 구성할 수 있고, 룸 내에서의 각각의 가구의 3차원 표현들을 포함할 수 있다.
본 개시내용의 예시적인 구현예는, 환경(200)이 어둡지만(예컨대, 광을 포함하지 않음), 환경(200) 내에서 주위를 이동하는 사람들은 환경(200)을 통해 안전하게 행동할 수 있기 위하여(예컨대, 군대, 경찰, 응급 의료요원, 또는 다른 사람들이 비상사태 또는 자연적 재난에 반응하는 것) 어떤 객체들이 환경(200) 내에 있는지를 알 필요가 있는 상황들을 포함할 수 있다. 예를 들어, 사용자는 스마트 디바이스(240)를 이용하여, 지진 후에 붕괴된 건물의 먼지에 의해 갇힌 임의의 사람들이 있는지 여부를 검출할 수 있다. 또 다른 예로서, 사용자는 스마트 디바이스(240)를 이용하여, 비상사태 동안에 건물 내에 갇힌 임의의 사람들 및/또는 동물들이 있는지 여부를 검출할 수 있다.
특정 예시적인 환경(200)에서, 스마트 디바이스(240)는 창고 및 창고 내의 자산들(예컨대, 자산들은 센서들(255)이 부착되는 객체들, 예를 들어, 자산들의 패키징일 수 있음)을 나타내는 증강된 환경을 생성할 수 있다. 스마트 디바이스(240)의 사용자는 이동 애플리케이션 또는 웹사이트를 이용하는 것에 의한 것과 같이, 특정한 자산이 손실되어 있다는 것을 표시할 수 있다. 예를 들어, 특정한 자산의 손실된 스테이터스는 엔드포인트 관리자 서버(135) 또는 중계 서버(125)에 제공될 수 있다. 제1 실시예에서, 엔드포인트 관리자 서버(135)는 특정한 자산이 손실되어 있다는 메시지를 스마트 디바이스(240)로 전송할 수 있다. 메시지는 손실된 자산의 식별자를 포함할 수 있다. 스마트 디바이스(240) 또는 스마트 디바이스(240)에 통신가능하게 결합된 동글(dongle)은 창고 내에서 위치결정될 수 있다(예컨대, 개인용 컴퓨터 자체가 창고 내에 있을 필요가 없도록, 무선 신호들을 수신하도록 구성된 개인용 컴퓨터에 부착된 동글). 일부 실시예들에서는, 자산이 객체이므로, 스마트 디바이스(240)는 센서들(255)로부터 무선 신호들을 오직 수신할 수 있다. 다른 실시예들에서, 스마트 디바이스(240)는 센서들(255) 및 컴퓨팅 디바이스들(250)의 둘 모두로부터 무선 신호들을 수신할 수 있지만, 컴퓨팅 디바이스들(250)로부터 수신된 무선 신호들을 필터링할 수 있다. 스마트 디바이스(240)는 손실된 자산이 아닌 객체들에 대응하는 정보를 필터링할 수 있다. 스마트 디바이스(240)는 디스플레이(260)를 통해, 창고를 나타내는 증강된 환경을 디스플레이할 수 있다. 추가적으로, 스마트 디바이스(240)는 증강된 환경 내에서 손실된 자산을 나타내는 심볼을 디스플레이할 수 있다. 또한, 일부 실시예들에서, 손실된 자산에 관한 추가적인 정보는 증강된 환경에서 디스플레이될 수 있다. 예를 들어, 추가적인 정보는 창고 내에서의 손실된 자산의 물리적 위치를 표시할 수 있다.
사용자는 증강된 환경에서의 심볼의 위치 및/또는 추가적인 정보에 기초하여 창고 내에서의 손실된 자산의 물리적 위치 또는 최후에 알려진 물리적 위치를 결정하는 것이 가능할 수 있다. 예를 들어, 증강된 환경은 창고 내에서의 실제적인 선반들을 나타내는 시뮬레이팅된 선반들을 포함할 수 있고, 손실된 자산을 나타내는 심볼은 시뮬레이팅된 선반들 중의 하나 상에 있는 것으로서 디스플레이될 수 있다. 따라서, 사용자는 어느 실제적인 선반이 증강된 환경에서의 시뮬레이팅된 선반에 대응하는지를 결정할 수 있다.
또 다른 특정 예에서, 환경(200)은 쇼핑 에어리어(예컨대, 쇼핑 몰, 스트리트 숍들 등)를 포함할 수 있다. 컴퓨팅 디바이스들(250) 및/또는 센서들(255)은 점포 내에서 위치될 수 있거나, 쇼핑 에어리어에서의 상점에 부착될 수 있다. 스마트 디바이스(240)의 사용자는 쇼핑 에어리어에 진입할 수 있고, 스마트 디바이스(240)는 컴퓨팅 디바이스들(250) 및/또는 센서들(255)로부터 무선 신호들을 수신할 수 있다. 스마트 디바이스(240)는 디스플레이(260)를 통해, 쇼핑 에어리어를 나타내는 증강된 환경을 디스플레이할 수 있다. 추가적으로, 스마트 디바이스(240)는 무선 신호가 컴퓨팅 디바이스들(250) 및 센서들(255)로부터 수신되었던 쇼핑 에어리어 내에서의 점포들의 각각을 나타내는 증강된 환경 내에서의 심볼을 디스플레이할 수 있다. 또한, 일부 실시예들에서, 점포들에 관한 추가적인 정보는 증강된 환경에서 디스플레이될 수 있다. 예를 들어, 추가적인 정보는 현재 또는 당면한 판매들, 이용가능한 상품들 또는 서비스들, 또는 점포들에서의 현재 또는 당면한 이벤트들을 표시할 수 있다. 또한, 일부 실시예들에서, 스마트 디바이스(240)는 사용자에 의해 생성된 가상적 희망 리스트에 포함된 상품들 또는 서비스들을 무선 신호들에서 표시된 상품들 및 서비스들과 비교할 수 있다. 이러한 그리고 다른 실시예들에서, 증강된 환경은 점포들 내에 있는 어느 상품들 또는 서비스들이 가상적 희망 리스트 내에 또한 포함되는지를 표시하는 추가적인 정보를 포함할 수 있다.
또 다른 특정 예에서, 환경(200)은 식료품점(grocery store) 또는 또 다른 유형의 음식 제조자(food vendor)를 포함할 수 있다. 컴퓨팅 디바이스들(250) 및/또는 센서들(255)은 식료품점에서 이용가능한 음식 상품들에 의해 위치될 수 있거나, 이러한 음식 상품들에 부착될 수 있다. 스마트 디바이스(240)의 사용자는 식료품점에 진입할 수 있고, 스마트 디바이스(240)는 컴퓨팅 디바이스들(250) 및/또는 센서들(255)로부터 무선 신호들을 수신할 수 있다. 스마트 디바이스(240)는 디스플레이(260)를 통해, 식료품점을 나타내는 증강된 환경을 디스플레이할 수 있다. 추가적으로, 스마트 디바이스(240)는 무선 신호가 컴퓨팅 디바이스들(250) 또는 센서들(255)로부터 수신되는 음식 상품들의 각각을 나타내는 증강된 환경 내에서의 하나 이상의 심볼들을 디스플레이할 수 있다. 예를 들어, 컴퓨팅 디바이스들(250)은 특정한 선반 또는 선반 유닛 상의 각각의 음식 상품에 대응하는 무선 신호들을 송신할 수 있다. 또한, 일부 실시예들에서, 음식 상품들에 관한 추가적인 정보는 증강된 환경에서 디스플레이될 수 있다. 예를 들어, 추가적인 정보는 음식 상품들의 영양상 값들, 성분들, 건강 등급들, 글루텐 스테이터스(gluten status)(예컨대, 글루텐 없음 또는 그렇지 않은지), 지방 스테이터스(fat status)(예컨대, 저지방 또는 그렇지 않음), 섬유질 스테이터스(fiber status)(예컨대, 섬유질이 높은지 또는 그렇지 않은지) 중의 적어도 하나를 표시할 수 있다. 또한, 일부 실시예들에서, 스마트 디바이스(240)는 사용자에 의해 표시된 특정한 영양상 설정들을 충족시키지 않는 컴퓨팅 디바이스들(250) 및/또는 센서들(255)에 대응하는 심볼들을 필터링할 수 있다. 예를 들어, 지방이 높거나 글루텐을 포함하는 음식 상품들에 대응하는 각각의 심볼은 필터링될 수 있고, 증강된 환경에서 디스플레이되지 않을 수 있다.
특정 예에서, 환경(200)은 도로망(예컨대, 표면 도로 거리, 고속도로, 및/또는 무료도로)을 포함할 수 있다. 도로망을 이용하는 하나 이상의 차량들은 컴퓨팅 디바이스들(250) 및/또는 센서들(255)을 포함할 수 있다. 추가적으로, 스마트 디바이스(240)는 또 다른 차량(예컨대, 경찰차, 고속도로 순찰차 등)에 대응할 수 있다. 일부 실시예들에서, 차량은 예를 들어, 적절한 보험을 휴대하지 않거나, 현재의 등록증을 휴대하지 않거나, 과속함으로써 법률들을 따르지 않을 수 있다. 스마트 디바이스(240)의 사용자(예컨대, 경찰관)는 법률들을 따르지 않는 것에 대하여 차량을 정차시키는 것으로 결정할 수 있다. 일단 정차되면, 스마트 디바이스(240)는 차량에 부착된 센서들(255)에서의 컴퓨팅 디바이스들(250)로부터 또는 이러한 센서들(255)로부터 하나 이상의 무선 신호들을 수신할 수 있다. 스마트 디바이스(240)는 디스플레이(260)를 통해, 도로망 및/또는 차량을 나타내는 증강된 환경을 디스플레이할 수 있다. 추가적으로, 스마트 디바이스(240)는 증강된 환경에서 차량, 운전자, 승객들, 또는 그 일부 조합에 관한 추가적인 정보를 디스플레이할 수 있다. 예를 들어, 추가적인 정보는 차량 이력, 운전자 이력(예컨대, 운전 레코드 또는 미해결된 영장들), 승객 이력(예컨대, 미해결된 영장들), 또는 차량, 운전자, 또는 승객들에 대응하는 임의의 다른 정보를 표시할 수 있다.
또 다른 특정 예에서, 환경(200)은 의료 시설(예컨대, 병원의 특정한 룸 또는 전체 건물)를 포함할 수 있다. 컴퓨팅 디바이스들(250) 및/또는 센서들(255)은 메스(scalpel)들, 환자 의류 물품들(예컨대, 손목밴드들)을 통한 환자들, 또는 추가적인 의학 디바이스들과 같은 도구들에 부착될 수 있다. 스마트 디바이스(240)의 사용자는 의료 시설에 진입할 수 있고, 스마트 디바이스(240)는 컴퓨팅 디바이스들(250) 및/또는 센서들(255)로부터 무선 신호들을 수신할 수 있다. 일부 실시예들에서, 스마트 디바이스(240)는 디스플레이(260)를 통해, 의료 시설 내에서의 도구들 및/또는 의학 디바이스들의 각각을 나타내는 심볼을 포함하는 증강된 환경을 디스플레이할 수 있다. 추가적으로, 일부 실시예들에서, 증강된 환경은 의료 시설 내에서의 도구들 및/또는 의학 디바이스들의 각각의 리스트와 함께 디스플레이될 수 있다. 이러한 그리고 다른 실시예들에서, 환경(200) 내에서의 각각의 도구 또는 의학 디바이스의 리스트를 포함하는 추가적인 정보는 각각의 도구 및/또는 의학 디바이스가 수술들 동안에 또는 수술들 후에 면밀하게 추적되는 것을 허용할 수 있다. 추가적으로, 도구들 및 의학 디바이스들을 나타내는 증강된 환경에서의 심볼들의 디스플레이는 장애물들이 문제들을 야기시키지 않으면서, 사용자가 각각의 도구 및 의학 디바이스의 위치를 검증하는 것을 허용할 수 있다. 예를 들어, 사용자는 수건을 이동시킬 필요 없이, 메스가 수건 아래에 있다는 것을 검증할 수 있다. 이러한 그리고 다른 실시예들에서, 추가적인 정보는 환자를 식별하는 정보(예컨대, 식별 정보), 환자의 의학 이력, 환자에 의해 취해진 약물치료들, 또는 임의의 다른 적절한 정보를 포함할 수 있다.
또 다른 특정 예에서, 환경(200)은 교육 시설(예컨대, 특정한 교실 또는 전체 건물)을 포함할 수 있다. 컴퓨팅 디바이스들(250) 및/또는 센서들(255)은 학생 컴퓨팅 디바이스들에 대응할 수 있거나, 학생 손목밴드들 또는 학생 백팩들에 부착될 수 있다. 예를 들어, 컴퓨팅 디바이스들(250)은 학생과 연관된 태블릿, 스마트폰, 랩톱, 또는 또 다른 컴퓨팅 디바이스를 포함할 수 있다. 스마트 디바이스(240)의 사용자(예컨대, 교사, 교장, 보조자, 또는 다른 학교 고용인)는 교육 시설에 진입할 수 있고, 스마트 디바이스(240)는 컴퓨팅 디바이스들(250) 및/또는 센서들(255)로부터 무선 신호들을 수신할 수 있다. 일부 실시예들에서, 스마트 디바이스(240)는 디스플레이(260)를 통해, 출석한 각각의 학생을 나타내는 심볼을 포함하는 증강된 환경을 디스플레이할 수 있다. 다른 실시예들에서, 증강된 환경은 출석하지 않은 학생들의 심볼들을 오직 포함하도록 디스플레이될 수 있다. 예를 들어, 스마트 디바이스(240)는 수업에 등재된 모든 학생들의 리스트를 포함할 수 있다. 스마트 디바이스(240)는 무선 신호들을 수신할 수 있고, 출석한 각각의 학생을 필터링할 수 있어서, 출석하지 않은 학생들을 나타내는 심볼들(예컨대, 아바타들)만이 디스플레이된다. 이러한 그리고 다른 실시예들에서, 추가적인 정보는 학생을 식별하는 정보, 학생의 교육 이력, 학생을 위한 의학 고려사항들, 또는 임의의 다른 적절한 정보를 포함할 수 있다.
또 다른 특정 예에서, 환경(200)은 이웃, 도시, 스테이트, 또는 다른 지리적 환경을 포함할 수 있다. 컴퓨팅 디바이스들(250) 및/또는 센서들(255)은 환경(200) 내에서의 객체들 및/또는 랜드마크들에 부착될 수 있다. 예를 들어, 센서(255)는 도시 내에서의 공원 벤치에 부착될 수 있다. 스마트 디바이스(240)의 사용자는 환경(200)에 진입할 수 있고(예컨대, 공원 벤치 위에 앉아 있음), 스마트 디바이스(240)는 무선 신호들을 수신할 수 있다. 일부 실시예들에서, 스마트 디바이스(240)는 디스플레이(260)를 통해, 객체를 둘러싸는 랜드마크들을 나타내는 심볼들을 포함하는 증강된 환경을 디스플레이할 수 있다. 예를 들어, 증강된 환경은 환경(200) 내에서의 스마트 디바이스(240)에 대한 극장, 관측 에어리어, 공공 명소, 또는 다른 랜드마크의 위치를 디스플레이할 수 있다. 추가적으로, 일부 실시예들에서, 증강된 환경은 랜드마크들, 쇼들 또는 라인들을 위한 대기 시간들, 사용자의 위치로부터 랜드마크들까지의 거리, 또는 랜드마크들의 이력적 정보를 설명하는 정보의 리스트와 함께 디스플레이될 수 있다.
또 다른 특정 예에서, 환경(200)은 공공에게 개방된 건물, 구조, 또는 다른 장소에 대응할 수 있다. 컴퓨팅 디바이스들(250) 및/또는 센서들(255)은 다른 사람들에 대응할 수 있거나, 다른 사람들에 부착될 수 있다. 스마트 디바이스(240)의 사용자는 환경(200)에 진입할 수 있고, 스마트 디바이스(240)는 컴퓨팅 디바이스들(250) 및/또는 센서들(255)로부터 무선 신호들을 수신할 수 있다. 일부 실시예들에서, 스마트 디바이스(240)는 사용자의 연락처들 또는 친구들(예컨대, 소셜 미디어 상의 친구들)의 리스트를 포함할 수 있다. 스마트 디바이스(240)는 연락처들 또는 친구들의 리스트 내에 포함되지 않는 사람들에 대응하는 무선 신호들을 필터링할 수 있다. 또한, 스마트 디바이스(240)는 디스플레이(260)를 통해, 환경(200) 내에 있고 사용자의 연락처들 또는 친구들의 리스트 내에 포함되는 각각의 사람을 나타내는 심볼(예컨대, 아바타)을 포함하는 증강된 환경을 디스플레이할 수 있다.
또한, 컴퓨팅 디바이스들(250) 및 센서들(255)에 의해 송신된 무선 신호들은 무선 신호들 내에 포함된 데이터의 보안 송신을 보장하기 위하여 암호화될 수 있다. 무선 신호들은 임의의 적절한 암호화 기법에 따라 암호화될 수 있다. 예를 들어, 제조자 특정적일 수 있거나, 사용자 특정적일 수 있거나, 회전되거나 또는 그렇지 않을 수 있거나, 공유된 정보(예컨대, 디바이스의 맥 어드레스(mac address))로부터 유도될 수 있는 공유된 키를 갖는 대칭적 암호화 알고리즘(예컨대, 진보된 암호화 표준(Advanced Encryption Standard)(AES), 또는 ECDSA와 같은, 그러나 이것으로 제한되지는 않는 비대칭적 암호화 알고리즘.
본 개시내용의 범위로부터 이탈하지 않으면서, 수정들, 추가들, 또는 생략들이 환경(200)에 대해 행해질 수 있다. 본 개시내용은 더 일반적으로, 스마트 디바이스(240), 하나 이상의 컴퓨팅 디바이스들(250), 하나 이상의 무선 네트워크들(110), 네트워크(245), 하나 이상의 센서들(255), 또는 그 임의의 조합을 포함하는 환경(200)에 적용된다. 추가적으로, 본 개시내용은 또한, 스마트 디바이스(240), 하나 이상의 무선 네트워크들(110), 네트워크(245), 하나 이상의 컴퓨팅 디바이스들(250), 및 제로 센서(zero sensor)들(255)을 포함하는 환경(200)에 적용될 수 있다. 또한, 본 개시내용은 또한, 스마트 디바이스(240), 하나 이상의 무선 네트워크들(110), 네트워크(245), 하나 이상의 센서들(255), 및 제로 컴퓨팅 디바이스(zero computing device)들(250)을 포함하는 환경(200)에 적용될 수 있다.
또한, 본 명세서에서 설명된 실시예들에서의 다양한 컴포넌트들의 분리는 분리가 모든 실시예들에서 발생한다는 것을 표시하도록 의도되지 않는다. 추가적으로, 설명된 컴포넌트들은 단일 컴포넌트로 함께 통합될 수 있거나 다수의 컴포넌트들로 분리될 수 있다는 것이 이 개시내용의 장점으로 이해될 수 있다.
도 3은 무선 라디오들을 이용하여 신호들을 캡처함으로써 현실을 증강시키기 위한 예시적인 방법의 흐름도이다. 예를 들어, 방법(300)은 증강된 환경을 생성하기 위하여 도 2의 스마트 디바이스(240)에 의해 수행될 수 있다. 방법(300)은 환경 내에서의 컴퓨팅 디바이스들 및/또는 객체들을 나타내는 심볼들을 포함하는 환경을 나타내는 증강된 환경을 생성하기 위하여 수행될 수 있다. 예를 들어, 방법은 도 2의 컴퓨팅 디바이스들(250) 및/또는 센서들(255)을 나타내는 심볼들을 포함하는 환경(200)을 나타내는 증강된 환경을 생성하고 디스플레이하기 위하여 수행될 수 있다.
방법은 블록(305)에서 시작할 수 있고, 여기서, 무선 신호들은 환경 내에서의 디바이스로부터 수신될 수 있다. 예를 들어, 무선 신호는 도 2의 컴퓨팅 디바이스들(250) 및/또는 센서들(255)로부터 스마트 디바이스(240)에 의해 수신될 수 있다.
블록(310)에서는, 디바이스가 식별될 수 있다. 일부 실시예들에서, 디바이스는 무선 신호 내에 포함된 데이터 및 메타데이터 중의 적어도 하나에 기초하여 식별될 수 있다. 데이터는 디바이스를 식별하는 정보, 환경 내에서의 디바이스의 위치, 디바이스의 유형, 또는 임의의 다른 적절한 정보를 포함할 수 있다. 블록(315)에서는, 환경 내에서의 디바이스의 위치가 결정될 수 있다. 환경 내에서의 디바이스의 위치는 무선 신호 내에 포함된 데이터에 기초하여 결정될 수 있다.
블록(320)에서는, 증강된 환경이 디스플레이될 수 있다. 증강된 환경은 환경을 나타낼 수 있다. 추가적으로, 디바이스를 나타내는 심볼은 증강된 환경 내에서 디스플레이될 수 있다. 일부 실시예들에서, 심볼은 환경 내에서의 디바이스의 위치에 대응하는 증강된 환경 내에서의 위치에서 디스플레이될 수 있다. 증강된 환경은 이미지, 아이콘, 텍스트, 그래픽 등과 같은 임의의 유형의 데이터를 포함할 수 있다. 데이터는 디바이스 또는 유사한 디바이스 및/또는 디바이스와 연관된 서비스들을 어떻게 구입할 것인지에 대한 정보를 포함하는, 디바이스에 대한 정보를 포함할 수 있다.
도 4는 머신으로 하여금, 본 명세서에서 논의된 방법들 중의 임의의 하나 이상을 수행하게 하기 위한 명령어들의 세트가 컴퓨팅 디바이스(400) 내에서 실행될 수 있는 그러한 컴퓨팅 디바이스(400)의 예시적인 형태인 머신의 도식적인 표현을 예시한다. 컴퓨팅 디바이스(400)는 이동 전화, 스마트폰, 넷북 컴퓨터, 랙마운트 서버, 라우터 컴퓨터, 서버 컴퓨터, 개인용 컴퓨터, 메인프레임 컴퓨터, 랩톱 컴퓨터, 태블릿 컴퓨터, 데스크톱 컴퓨터 등을 포함할 수 있고, 이들 내에서, 머신으로 하여금, 본 명세서에서 논의된 방법들 중의 임의의 하나 이상을 수행하게 하기 위한 명령어들의 세트가 실행될 수 있다. 대안적인 실시예들에서, 머신은 LAN, 인트라넷(intranet), 익스트라넷(extranet), 또는 인터넷에서 다른 머신들에 접속(예컨대 네트워크화)될 수 있다. 머신은 클라이언트-서버 네트워크 환경에서 서버 머신의 용량으로 동작할 수 있다. 머신은 개인용 컴퓨터(personal computer)(PC), 셋톱 박스(set-top box)(STB), 서버, 네트워크 라우터, 스위치 또는 브릿지, 또는 그 머신에 의해 취해져야 할 액션들을 특정하는 명령어들(순차적 또는 그 외의 것)의 세트를 실행할 수 있는 임의의 머신을 포함할 수 있다. 또한, 오직 단일 머신이 예시되지만, 용어 "머신"은 또한, 본 명세서에서 논의된 방법들 중의 임의의 하나 이상을 수행하기 위한 명령어들의 세트(또는 다수의 세트들)를 개별적으로 또는 공동으로 실행하는 머신들의 임의의 집합을 포함할 수 있다.
예시적인 컴퓨팅 디바이스(400)는 버스(408)를 통해 서로 통신하는, 프로세싱 디바이스(예컨대, 프로세서)(402), 주 메모리(404)(예컨대, 판독-전용 메모리(ROM), 플래시 메모리, 동기식 DRAM(synchronous DRAM)(SDRAM)과 같은 동적 랜덤 액세스 메모리(dynamic random access memory)(DRAM)), 정적 메모리(406)(예컨대, 플래시 메모리, 정적 랜덤 액세스 메모리(static random access memory)(SRAM)), 및 데이터 저장 디바이스(416)를 포함한다.
프로세싱 디바이스(402)는 마이크로프로세서, 중앙 프로세싱 유닛 등과 같은 하나 이상의 범용 프로세싱 디바이스들을 표현한다. 더 상세하게는, 프로세싱 디바이스(402)는 복합 명령어 세트 컴퓨팅(complex instruction set computing)(CISC) 마이크로프로세서, 축소된 명령어 세트 컴퓨팅(reduced instruction set computing)(RISC) 마이크로프로세서, 매우 긴 명령어 워드(very long instruction word)(VLIW) 마이크로프로세서, 또는 다른 명령어 세트들을 구현하는 프로세서 또는 명령어 세트들의 조합을 구현하는 프로세서들을 포함할 수 있다. 프로세싱 디바이스(402)는 또한, 애플리케이션 특정 집적 회로(application specific integrated circuit)(ASIC), 필드 프로그래밍가능한 게이트 어레이(field programmable gate array)(FPGA), 디지털 신호 프로세서(digital signal processor)(DSP), 네트워크 프로세서 등과 같은 하나 이상의 특수-목적 프로세싱 디바이스들을 포함할 수 있다. 프로세싱 디바이스(402)는 본 명세서에서 논의된 동작들 및 단계들을 수행하기 위한 명령어들(426)을 실행하도록 구성된다.
컴퓨팅 디바이스(400)는 네트워크(418)와 통신할 수 있는 네트워크 인터페이스 디바이스(422)를 더 포함할 수 있다. 컴퓨팅 디바이스(400)는 또한, 디스플레이 디바이스(410)(예컨대, 액정 디스플레이(liquid crystal display)(LCD) 또는 음극선관(cathode ray tube)(CRT)), 영숫자 입력 디바이스(412)(예컨대, 키보드), 커서 제어 디바이스(414)(예컨대, 마우스), 및 신호 생성 디바이스(420)(예컨대, 스피커)를 포함할 수 있다. 적어도 하나의 실시예에서, 디스플레이 디바이스(410), 영숫자 입력 디바이스(412), 및 커서 제어 디바이스(414)는 단일 컴포넌트 또는 디바이스(예컨대, LCD 터치 스크린)으로 조합될 수 있다.
데이터 저장 디바이스(416)는 본 명세서에서 설명된 방법들 또는 기능들 중의 임의의 하나 이상을 구체화하는 명령어들(426)의 하나 이상의 세트들이 저장되는 컴퓨터-판독가능 저장 매체(424)를 포함할 수 있다. 명령어들(426)은 또한, 컴퓨팅 디바이스(400)에 의한 그 실행 동안에 주 메모리(404) 및/또는 프로세싱 디바이스(402) 내에서 완전히 또는 적어도 부분적으로 상주할 수 있고, 주 메모리(404) 및 프로세싱 디바이스(402)는 또한, 컴퓨터-판독가능 매체들을 구성할 수 있다. 명령어들은 네트워크 인터페이스 디바이스(422)를 통해 네트워크(418) 상에서 추가로 송신될 수 있거나 수신될 수 있다.
컴퓨터-판독가능 저장 매체(424)는 단일 매체인 것으로 예시적인 실시예에서 도시되지만, 용어 "컴퓨터-판독가능 저장 매체"는 명령어들의 하나 이상의 세트들을 저장하는 단일 매체 또는 다수의 매체들(예컨대, 중앙집중화되거나 분산된 데이터베이스, 및/또는 연관된 캐시들 및 서버들)을 포함할 수 있다. 용어 "컴퓨터-판독가능 저장 매체"는 또한, 머신에 의한 실행을 위한 명령어들의 세트를 저장할 수 있거나, 인코딩할 수 있거나, 반송할 수 있으며, 머신으로 하여금, 본 개시내용의 방법들 중의 임의의 하나 이상을 수행하게 하는 임의의 매체를 포함할 수 있다. 용어 "컴퓨터-판독가능 저장 매체"는 이에 따라, 솔리드-스테이트(solid-state) 메모리들, 광학적 매체들, 및 자기적 매체들을 포함하지만, 이것으로 제한되지는 않도록 취해질 수 있다.
대상 기술은 예를 들어, 이하에서 설명된 다양한 양태들에 따라 예시된다. 대상 기술의 양태들의 다양한 예들은 편의를 위하여 번호부여된 예들(1, 2, 3, 제1, 제2, 제3 등)로서 설명된다. 이들은 예들로서 제공되고, 대상 기술을 제한하지 않는다. 본 명세서에서 설명된 다양한 구현예들의 양태들은 문맥이 이와 다르게 기술하지 않으면, 생략될 수 있거나, 다른 구현예들의 양태들을 위하여 치환될 수 있거나, 다른 구현예들의 양태들과 조합될 수 있다. 예를 들어, 이하의 예 1의 하나 이상의 양태들은 생략될 수 있거나, 또 다른 예(예컨대, 예 2)의 하나 이상의 양태들을 위하여 치환될 수 있거나, 또 다른 예의 양태들과 조합될 수 있다. 다음은 본 명세서에서 제시된 일부 예시적인 구현예들의 비-제한적인 개요이다.
제1 예시적인 방법에서, 방법은 환경 내에서의 디바이스로부터 무선 신호를 수신하는 단계, 무선 신호 내에 포함된 데이터 및 메타데이터 중의 적어도 하나에 기초하여 디바이스를 식별하는 단계, 무선 신호 내에 포함된 데이터에 기초하여 환경 내에서의 디바이스의 위치를 결정하는 단계, 및 환경을 나타내는 증강된 환경 및 증강된 환경 내에서의 디바이스를 나타내는 심볼을 디스플레이하는 단계 - 심볼은 환경 내에서의 디바이스의 위치에 대응하는 증강된 환경 내에서의 위치에서 디스플레이됨 - 를 포함한다.
제1 예의 방법으로서, 여기서, 무선 신호 내에 포함된 메타데이터는 무선 신호를 위한 신호의 유형, 및 무선 신호를 위한 통신 프로토콜을 포함한다.
제1 예의 방법으로서, 여기서, 무선 신호 내에 포함된 데이터는 디바이스 식별자를 포함한다.
제1 예의 방법으로서, 여기서, 무선 신호 내에 포함된 데이터는 디바이스의 특성 설명들을 포함한다.
제1 예의 방법으로서, 여기서, 무선 신호 내에 포함된 데이터는 디바이스를 구입하는 것 또는 디바이스에 관련된 서비스에 속하는 정보를 포함한다.
제1 예의 방법으로서, 여기서, 방법은 적어도 환경 내에서 이동하도록 구성된 이동 디바이스에 의해 수행된다.
제1 예의 방법으로서, 여기서, 환경을 나타내는 증강된 환경을 디스플레이하는 것은 디바이스를 포함하는 증강된 환경에서 환경의 3차원 표현을 구성하는 것을 포함한다.
제1 예의 방법으로서, 여기서, 환경은 쇼핑 에어리어를 포함하고, 디바이스는 상점 내에 내장되고, 무선 신호 내에 포함된 데이터는 상점에 대응하는 점포에서 이용가능한 판매 설명들, 상품 설명들, 및 서비스 설명들 중의 적어도 하나를 포함한다.
제1 예의 방법으로서, 여기서, 환경은 쇼핑 에어리어를 포함하고, 디바이스는 음식 상품들을 저장하는 선반 내에 내장되고, 무선 신호 내에 포함된 데이터는 음식 상품들의 영양상 값들, 성분들, 및 건강 등급들 중의 적어도 하나를 포함한다.
제1 예의 방법으로서, 여기서, 환경은 도로망을 포함하고, 디바이스는 도로망을 이용하는 차량 내에 내장되고, 무선 신호 내에 포함된 데이터는 이력, 운전자의 식별 정보, 및 차량의 식별 정보 중의 적어도 하나를 포함한다.
제1 예의 방법으로서, 여기서, 환경은 의료 시설을 포함하고, 디바이스는 환자와 연관된 의류 물품 내에 내장되고, 무선 신호 내에 포함된 데이터는 환자에 의해 취해진 약물치료들의 식별 정보, 이러한 약물치료들의 의학 이력, 및 이러한 약물치료들 중의 적어도 하나를 포함한다.
제1 예의 방법으로서, 여기서, 환경은 의료 시설을 포함하고, 디바이스는 의학 디바이스 내에 내장되고, 디바이스를 나타내는 심볼은 의학 디바이스를 추적하기 위하여, 그리고 의학 디바이스가 잘못 배치되지 않는다는 것을 보장하기 위하여 증강된 환경에서 디스플레이된다.
제1 예의 방법으로서, 여기서, 환경은 교육 시설을 포함하고, 디바이스는 학생과 연관된 객체 내에 내장되고, 방법은 무선 신호에 기초하여 출석한 학생을 표기하는 단계를 더 포함한다.
제1 예의 방법으로서, 여기서, 무선 신호 내에 포함된 데이터는 디바이스의 공개된 MAC 어드레스를 포함하고, 방법은 디바이스의 공개된 MAC 어드레스를 결정하는 단계를 더 포함한다.
제1 예의 방법으로서, 여기서, 환경은 거주용 건물을 포함하고, 디바이스는 비-컴퓨팅 디바이스에 물리적으로 부착된 센서를 포함한다.
제2 예시적인 방법은 환경 내에서의 제1 디바이스로부터 제1 무선 신호를 수신하는 단계, 환경 내에서의 제2 디바이스로부터 제2 무선 신호를 수신하는 단계, 제1 무선 신호 내에 포함된 데이터 및 메타데이터 중의 적어도 하나에 기초하여 제1 디바이스를 식별하는 단계, 제2 무선 신호 내에 포함된 데이터 및 메타데이터 중의 적어도 하나에 기초하여 제2 디바이스를 식별하는 단계, 제1 및 제2 무선 신호에 기초하여 환경 내에서의 제1 디바이스 및 제2 디바이스의 위치들을 결정하는 단계, 및 환경을 나타내는 증강된 환경, 및 증강된 환경 내에서의 제1 디바이스 및 제2 디바이스를 나타내는 심볼들을 디스플레이하는 단계 - 심볼들은 동시에, 그리고 환경 내에서의 제1 디바이스 및 제2 디바이스의 위치들에 대응하는 증강된 환경 내에서의 위치들에서 디스플레이됨 - 를 포함한다.
제2 예의 방법으로서, 여기서, 제1 무선 신호 내에 포함된 데이터는 제1 디바이스의 특성 설명들을 포함하고, 여기서, 제1 디바이스를 나타내는 제1 심볼들은 제1 디바이스의 특성 설명들의 적어도 부분을 포함한다.
제3 예시적인 방법은 환경 내에서의 디바이스로부터 무선 신호를 수신하는 단계, 무선 신호 내에 포함된 데이터 및 메타데이터 중의 적어도 하나에 기초하여 디바이스를 식별하는 단계, 무선 신호 내에 포함된 데이터에 기초하여 환경 내에서의 디바이스의 정보를 결정하는 단계, 및 디바이스의 정보를 표시하는 증강 현실 엘리먼트를 디스플레이하는 단계 - 증강 현실 엘리먼트는 증강된 환경 내에서의 디바이스의 위치에 대응하는 증강된 환경 내에서의 위치에서 디스플레이됨 - 를 포함한다.
제3 예의 방법으로서, 여기서, 증강 현실 엘리먼트는 증강된 환경에서의 디바이스의 그래픽 표현을 포함한다.
제3 예의 방법으로서, 여기서, 증강 현실 엘리먼트는 디바이스 또는 디바이스와 연관된 서비스를 어떻게 구입할 것인지에 대한 정보를 포함한다.
본원에서 그리고 특히, 첨부된 청구항들(예컨대, 첨부된 청구항들의 본문들)에서 이용된 용어들은 일반적으로 "개방형" 용어들로서 의도된다(예컨대, 용어 "포함하는(including)"은 "포함하지만 이것으로 제한되지는 않음"으로서 해석되어야 하고, 용어 "가지는(having)"은 "적어도 가지는"으로서 해석되어야 하고, 용어 "포함한다(includes)"는 "포함하지만 이것으로 제한되지는 않는다"로서 해석되어야 하는 등과 같음).
추가적으로, 특정 수의 도입된 청구항 인용이 의도될 경우에, 이러한 의도는 청구항에서 명시적으로 인용될 것이고, 이러한 인용의 부재 시에, 이러한 의도는 존재하지 않는다. 예를 들어, 이해에 대한 보조로서, 다음의 첨부된 청구항들은 청구항 인용들을 도입하기 위하여 도입부 여구들 "적어도 하나(at least one)" 및 "하나 이상(one or more)"의 사용을 포함할 수 있다. 그러나, 동일한 청구항이 도입부 여구들 "하나 이상" 또는 "적어도 하나"와, "a" 또는 "an"과 같은 부정 관사들(예컨대, "a" 및/또는 "an"은 전형적으로 "적어도 하나" 또는 "하나 이상"을 의미하도록 해석될 수 있음)을 포함하더라도, 이러한 어구들의 이용은 부정 관사들 "a" 또는 "an"에 의한 청구항 인용의 도입이 이러한 도입된 청구항 인용을 포함하는 임의의 특정한 청구항을, 오직 하나의 이러한 인용을 포함하는 실시예들로 제한한다는 것을 암시하도록 해석되지 않아야 하고; 동일사항은 청구항 인용들을 도입하기 위하여 이용된 정관사들의 이용에 대해 유효하다.
추가적으로, 특정 수의 도입된 청구항 인용이 명시적으로 인용되더라도, 본 기술분야의 통상의 기술자들은 이러한 인용이 적어도 인용된 수를 의미하도록 해석될 수 있다는 것을 인식할 것이다(예컨대, "2 개의 인용들"의 기본적인 인용은 다른 수식어들이 없다면, 적어도 2 개의 인용들, 또는 2 개 이상의 인용들을 의미함). 또한, “A, B, 및 C 등 중의 적어도 하나”, 또는 “A, B, 및 C 등 중의 하나 이상”과 유사한 관례가 이용되는 그러한 사례들에서, 일반적으로, 이러한 구성은 A 단독, B 단독, C 단독, A 및 B 함께, A 및 C 함께, B 및 C 함께, 또는 A, B, 및 C 함께 등을 포함하도록 의도된다. 예를 들어, 용어 “및/또는(and/or)”의 이용은 이러한 방식으로 해석되도록 의도된다.
또한, 2 개 이상의 대안적인 용어들을 제시하는 임의의 택일적 단어 또는 어구는 설명, 청구항들, 또는 도면들에서 있든지 간에, 용어들 중의 하나, 용어들 중의 어느 하나, 또는 용어들의 둘 모두를 포함할 가능성들을 고려하도록 이해될 수 있다. 예를 들어, 어구 "A 또는 B"는 "A" 또는 "B" 또는 "A 및 B"의 가능성들을 포함하도록 이해될 수 있다.
본 명세서에서 설명된 실시예들은 컴퓨터-실행가능 명령어들 또는 데이터 구조들을 반송하거나 이들을 저장하게 하기 위한 컴퓨터-판독가능 매체들을 이용하여 구현될 수 있다. 이러한 컴퓨터-판독가능 매체들은 범용 또는 특수 목적 컴퓨터에 의해 액세스될 수 있는 임의의 이용 가능한 매체들일 수 있다. 제한이 아닌 예로서, 이러한 컴퓨터-판독가능 매체들은, 랜덤 액세스 메모리(Random Access Memory)(RAM), 판독-전용 메모리(Read-Only Memory)(ROM), 전기적 소거가능 프로그래밍가능 판독-전용 메모리(Electrically Erasable Programmable Read-Only Memory)(EEPROM), 컴팩트 디스크 판독-전용 메모리(Compact Disc Read-Only Memory)(CD-ROM) 또는 다른 광학 디스크 스토리지, 자기 디스크 스토리지 또는 다른 자기 저장 디바이스들, 플래시 메모리 디바이스들(예컨대, 솔리드 스테이트 메모리 디바이스들), 또는 컴퓨터-실행가능 명령어들 또는 데이터 구조들의 형태로 원하는 프로그램 코드를 반송하거나 저장하기 위하여 이용될 수 있고 범용 또는 특수-목적 컴퓨터에 의해 액세스될 수 있는 임의의 다른 저장 매체를 포함하는 비-일시적 컴퓨터-판독가능 저장 매체들을 포함할 수 있다. 위의 조합들은 또한, 컴퓨터-판독가능 매체들의 범위 내에서 포함될 수 있다.
컴퓨터-실행가능 명령어들은 예를 들어, 범용 컴퓨터, 특수 목적 컴퓨터, 또는 특수 목적 프로세싱 디바이스(예컨대, 하나 이상의 프로세서들)가 어떤 기능 또는 기능들의 그룹을 수행하게 하는 명령어들 및 데이터를 포함할 수 있다. 발명요지는 구조적 특징부들 및/또는 방법론적 액트(methodological act)들에 대해 특정된 언어로 설명되었지만, 첨부된 청구항들에서 정의된 발명요지는 위에서 설명된 특정 특징부들 또는 동작들에 반드시 제한되지는 않는다는 것이 이해되어야 한다. 오히려, 위에서 설명된 특정 특징들 및 액트들은 청구항들을 구현하는 예시적인 형태들로서 개시된다.
본 명세서에서 이용된 바와 같이, 용어들 “모듈(module)” 또는 “컴포넌트(component)”는 컴퓨팅 시스템의 범용 하드웨어(예컨대, 컴퓨터-판독가능 매체들, 프로세싱 디바이스들 등) 상에서 저장될 수 있고/있거나 이들에 의해 실행될 수 있는 모듈 또는 컴포넌트의 동작들 및/또는 소프트웨어 객체들 또는 소프트웨어 루틴들을 수행하도록 구성된 특정 하드웨어 구현예들을 지칭할 수 있다. 일부 실시예들에서, 본 명세서에서 설명된 상이한 컴포넌트들, 모듈들, 엔진들, 및 서비스들은 컴퓨팅 시스템 상에서 (예컨대, 별도의 스레드(thread)들로서) 실행되는 객체들 또는 프로세스들로서 구현될 수 있다. 본 명세서에서 설명된 시스템 및 방법들의 일부는 일반적으로, (범용 하드웨어 상에서 저장되고 및/또는 범용 하드웨어에 의해 실행된) 소프트웨어로 구현되는 것으로서 설명되지만, 특정 하드웨어 구현예들 또는 소프트웨어 및 특정 하드웨어 구현예들의 조합이 또한 가능하고 고려된다. 이 설명에서, “컴퓨팅 엔티티(computing entity)”는 본 명세서에서 이전에 정의된 바와 같은 임의의 컴퓨팅 시스템, 또는 컴퓨팅 시스템 상에서 작동하는 임의의 모듈 또는 모듈들의 조합일 수 있다.
개시된 프로세스들 및/또는 방법들에 대하여, 프로세스들 및 방법들에서 수행된 기능들은 문맥에 의해 기술될 수 있는 바와 같이, 상이한 순서로 구현될 수 있다. 또한, 개요 서술된 단계들 및 동작들은 예들로서 오직 제공되고, 단계들 및 동작들의 일부는 임의적일 수 있거나, 더 적은 단계들 및 동작들로 조합될 수 있거나, 또는 추가적인 단계들 및 동작들로 확장될 수 있다.
이 개시내용은 때때로, 상이한 다른 컴포넌트들 내에 포함되거나 상이한 다른 컴포넌트들과 접속된 상이한 컴포넌트들을 예시할 수 있다. 이러한 도시된 아키텍처들은 단지 예시적이고, 동일하거나 유사한 기능성을 달성하는 많은 다른 아키텍처들이 구현될 수 있다.
본 개시내용의 양태들은 그 사상 또는 필수적인 특성들로부터 이탈하지 않으면서 다른 형태들로 구체화될 수 있다. 설명된 양태들은 모든 점들에서 한정적인 것이 아니라 예시적인 것으로 고려되어야 한다. 청구된 발명요지는 상기한 설명이 아니라, 첨부된 청구항들에 의해 표시된다. 청구항들의 등가성의 의미 및 범위 내에서 나오는 모든 변경들은 그 범위 내에서 포괄되어야 한다.

Claims (1)

  1. 방법으로서,
KR1020247012633A 2019-09-25 2020-09-25 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강 KR20240056623A (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962905914P 2019-09-25 2019-09-25
US62/905,914 2019-09-25
PCT/US2020/052904 WO2021062293A1 (en) 2019-09-25 2020-09-25 Augmenting reality by capturing signals using wireless radios
KR1020227013787A KR102659324B1 (ko) 2019-09-25 2020-09-25 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020227013787A Division KR102659324B1 (ko) 2019-09-25 2020-09-25 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강

Publications (1)

Publication Number Publication Date
KR20240056623A true KR20240056623A (ko) 2024-04-30

Family

ID=75166863

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020227013787A KR102659324B1 (ko) 2019-09-25 2020-09-25 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강
KR1020247012633A KR20240056623A (ko) 2019-09-25 2020-09-25 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020227013787A KR102659324B1 (ko) 2019-09-25 2020-09-25 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강

Country Status (8)

Country Link
US (1) US20220375176A1 (ko)
EP (1) EP4035017A4 (ko)
JP (1) JP2022549439A (ko)
KR (2) KR102659324B1 (ko)
CN (1) CN114730304A (ko)
AU (1) AU2020356625A1 (ko)
BR (1) BR112022005275A2 (ko)
WO (1) WO2021062293A1 (ko)

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7035897B1 (en) * 1999-01-15 2006-04-25 California Institute Of Technology Wireless augmented reality communication system
US7023356B2 (en) * 2001-11-26 2006-04-04 Aero-Vision Technologies, Inc. System and method for monitoring individuals and objects associated with wireless identification tags
US6982640B2 (en) * 2002-11-21 2006-01-03 Kimberly-Clark Worldwide, Inc. RFID system and method for tracking food freshness
JP2005267355A (ja) * 2004-03-19 2005-09-29 Takaya Corp 出席管理システム
US7720436B2 (en) * 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
WO2007068002A2 (en) * 2005-12-09 2007-06-14 Tego Inc. Multiple radio frequency network node rfid tag
US7518502B2 (en) * 2007-05-24 2009-04-14 Smith & Nephew, Inc. System and method for tracking surgical assets
US20110196571A1 (en) * 2010-02-09 2011-08-11 At&T Mobility Ii Llc System And Method For The Collection And Monitoring Of Vehicle Data
US20110310227A1 (en) * 2010-06-17 2011-12-22 Qualcomm Incorporated Mobile device based content mapping for augmented reality environment
US8743145B1 (en) * 2010-08-26 2014-06-03 Amazon Technologies, Inc. Visual overlay for augmenting reality
US20130109929A1 (en) * 2011-10-28 2013-05-02 Mindray Ds Usa, Inc. Systems and methods for patient monitors to automatically identify patients
US9572026B2 (en) * 2012-10-16 2017-02-14 Cisco Technology, Inc. Location services for a wireless device
US9547939B2 (en) * 2013-07-25 2017-01-17 Fluke Corporation Detecting and visualizing wireless network devices in communication networks
WO2015192117A1 (en) * 2014-06-14 2015-12-17 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
JP2016192118A (ja) * 2015-03-31 2016-11-10 株式会社リコー 情報処理システム、情報処理装置、および情報処理プログラム並びに情報処理方法
KR20180089907A (ko) * 2016-02-04 2018-08-09 애플 인크. 무선 레인징에 기초한 전자 디바이스들의 제어 및 정보의 디스플레이
US10812936B2 (en) * 2017-01-23 2020-10-20 Magic Leap, Inc. Localization determination for mixed reality systems

Also Published As

Publication number Publication date
EP4035017A4 (en) 2023-02-08
EP4035017A1 (en) 2022-08-03
AU2020356625A1 (en) 2022-04-28
JP2022549439A (ja) 2022-11-25
CN114730304A (zh) 2022-07-08
WO2021062293A1 (en) 2021-04-01
KR20220071231A (ko) 2022-05-31
US20220375176A1 (en) 2022-11-24
BR112022005275A2 (pt) 2022-06-14
KR102659324B1 (ko) 2024-04-22

Similar Documents

Publication Publication Date Title
Satyanarayanan Mobile computing: the next decade
US9996309B2 (en) Method and apparatus for providing search information
CN104798417B (zh) 基于语义位置的地理围栏
US9763037B2 (en) Network architecture for synchronized display
Sohaib et al. Internet of Things (IoT) in E-commerce: For people with disabilities
US10558862B2 (en) Emotion heat mapping
US11769306B2 (en) User-exhibit distance based collaborative interaction method and system for augmented reality museum
US20140207615A1 (en) Techniques for locating an item to purchase in a retail environment
CN109426333A (zh) 一种基于虚拟空间场景的信息交互方法及装置
Xie et al. Internet of Things-based intelligent evacuation protocol in libraries
KR20160106289A (ko) 컨텐츠 제공 시스템 및 전자 장치의 컨텐츠 제공 방법
US20140074874A1 (en) Method, system and apparatus for location-based machine-assisted interactions
Islam et al. The IoT: Exciting possibilities for bettering lives: Special application scenarios
US9756458B1 (en) Determining user commonalities and differences
EP3596977A1 (en) Wireless device detection, tracking, and authentication platform and techniques
WO2015015315A2 (en) Establishing communication with a computing device based on the proximity of the computing device to a location
Xu et al. A novel radio frequency identification three-dimensional indoor positioning system based on trilateral positioning algorithm
Irfan et al. Crowd analysis using visual and non-visual sensors, a survey
KR102659324B1 (ko) 무선 라디오들을 이용하여 신호들을 캡처하는 것에 의한 현실 증강
Demirer et al. Exploring the educational potential of Internet of Things (IoT) in seamless learning
Jung et al. IoT enabled smart emergency led exit sign controller design using Arduino
US20160203408A1 (en) Systems and methods for a cloud-based artificial intelligence engine
WO2020168493A1 (zh) 三维场景建模方法、装置、设备及存储介质
US20140379803A1 (en) Methods and systems for a mobile social application
CN106714094B (zh) 数据处理方法、装置及系统

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination