KR101938621B1 - 증강 현실 데이터 센터의 시각화 - Google Patents

증강 현실 데이터 센터의 시각화 Download PDF

Info

Publication number
KR101938621B1
KR101938621B1 KR1020137026450A KR20137026450A KR101938621B1 KR 101938621 B1 KR101938621 B1 KR 101938621B1 KR 1020137026450 A KR1020137026450 A KR 1020137026450A KR 20137026450 A KR20137026450 A KR 20137026450A KR 101938621 B1 KR101938621 B1 KR 101938621B1
Authority
KR
South Korea
Prior art keywords
view
equipment
augmented reality
portable device
location
Prior art date
Application number
KR1020137026450A
Other languages
English (en)
Other versions
KR20140012714A (ko
Inventor
잭 디. 티손
재커리 제이. 스모린스키
존 피. 오도넬
브렌단 에프. 도오리
Original Assignee
팬듀트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 팬듀트 코포레이션 filed Critical 팬듀트 코포레이션
Publication of KR20140012714A publication Critical patent/KR20140012714A/ko
Application granted granted Critical
Publication of KR101938621B1 publication Critical patent/KR101938621B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • G01C21/206Instruments for performing navigational calculations specially adapted for indoor navigation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1696Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a printing or scanning device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9537Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9554Retrieval from the web using information identifiers, e.g. uniform resource locators [URL] by using bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes

Abstract

데이터센터 데이터세트 및 다른 정보는 휴대용 디바이스를 사용하여 증강 현실 뷰에 시각적으로 디스플레이된다. 이런 정보의 시각적 디스플레이는 실제 데이터센터 환경의 시각적 디스플레이와 함께 제공된다. 이들 2개의 디스플레이를 조합하면 설치자와 기술자로 하여금 작업하는 환경과 시각적으로 상관된 명령 또는 다른 데이터를 볼 수 있게 할 수 있다.

Description

증강 현실 데이터 센터의 시각화{AUGMENTED REALITY DATA CENTER VISUALIZATION}
데이터 센터는 관리를 위해 다수의 훈련 및 기술 소유자를 요구하는 매우 동적인 환경이다. 일반적으로, 회사 내 상이한 부서들은 공간 배치, 저장, 네트워크 자산 이용가능성, 서버 프로비저닝(provisioning), 및 시설 관리와 같은 상이한 기능, 전개 및 운영(operation)을 담당하고 있다.
이들 그룹들 간에 정보의 공유는 종종 스프레드시트(spreadsheet)에 수동으로 데이터를 입력하는 것과 오토캐드(AutoCad), 마이크로소프트 비지오(MS Visio) 및 어퍼처(Aperture)와 같은 다른 정적-뷰(static-view) 소프트웨어 도구를 통해 달성된다. 이렇게 수동적인 입력과 정적-뷰 도구를 조합하면 여러 태스크(task)에 대해 업데이트된 정보를 요구하는 사람들에게 진부한 정보를 프리젠테이션(presentation)할 수 있다. 이러한 태스크에는 하드웨어의 설치 또는 재위치, 또는 기존 네트워크 부품들 사이의 연결부의 설치 또는 이동이 포함될 수 있다.
따라서, 매우 유용한 형태로 핵심 기술 직원에 이 정보를 제공하는 능력과 최신의(up-to-date) 시스템 정보를 조합하는 시스템이 요구된다.
따라서, 일 실시예에서, 본 발명은, 네트워크 데이터센터에 관한 데이터를 사용자에게 레포트(report)하는 시스템에 관한 것으로, 상기 시스템은 상기 네트워크 데이터센터 내 장비에 관한 상기 데이터를 데이터 뷰(data view)로 상기 사용자에게 제공하도록 구성된 어플라이언스(appliance)를 포함하되, 상기 어플라이언스는, 상기 데이터 뷰가 증강 현실 오버레이(augmented reality overlay)에 데이터센터 하드웨어의 실시간 시각적 묘사(real-time visual depiction)와 시각적으로 오버레이되도록, 상기 데이터센터 하드웨어의 실시간 시각적 묘사와 조합하여 상기 데이터를 제공한다.
다른 실시예에서, 본 발명은 원격 통신 장비를 구비하는 구내(premise)의 적어도 일부에 관한 데이터를 레포트하는 시스템에 관한 것으로, 상기 시스템은 추적 정보가 매립된 적어도 하나의 추적가능한 인디케이터(indicator); 및 상기 추적 정보의 획득에 응답하여 상기 데이터를 디스플레이하도록 구성된 어플라이언스를 포함한다.
본 발명의 전술한 및 다른 특징, 및 이를 달성하는 방법은 첨부 도면과 연계하여 취해진 본 발명의 실시예의 이하 상세한 설명을 참조함으로써 보다 명백해지고 발명이 더 잘 이해될 수 있을 것이다.
도 1은 본 발명의 일부 실시예에 따른 증강 현실 시스템을 사용하는 사용자에게 보여질 수 있는 정보를 묘사한 도면;
도 2는 본 발명의 일 실시예에 따른 증강 현실 디스플레이를 도시한 도면;
도 3은 본 발명의 일 실시예에 따라 작업 지도(work order)에 관한 항목(item)을 도시한 도면;
도 4는 본 발명의 일 실시예에 따른 증강 현실 뷰를 도시한 도면;
도 5는 본 발명의 일 실시예에 따라 추적가능한 인디케이터의 사용을 보여주는 조합 실례를 도시한 도면;
도 6은 본 발명의 일 실시예에 따른 평면도를 보여주는 휴대용 디바이스를 도시한 도면; 및
도 7a 내지 도 7h는 본 발명의 일 실시예에 따라 기술자를 가이드하는 휴대용 디바이스의 실례들을 도시한 도면.
대응하는 참조 부호는 여러 도면에 걸쳐 대응하는 부분을 나타낸다. 본 명세서에 제시된 예시는 본 발명의 바람직한 실시예를 하나의 형태로 예시하는 것이며 이러한 예시는 임의의 방식으로 본 발명의 범위를 제한하는 것으로 해석되어서는 아니된다.
본 발명의 일부 실시예에 따른 시스템 및 방법은 데이터 센터 운영(operation), 네트워크 가동 시간 또는 대역폭 용량(capability), 환경, 및 인프라스트럭처 상태(infrastructure status)의 끊김없는 및 전체적인 뷰를 제공하기 위해 네트워크 설계 및 운영(operation) 도구와 증강 현실 도구를 조합한다. 본 발명의 일 실시예에서, 비디오 디스플레이와 카메라를 조합하는 핸드헬드 디바이스(handheld device)와 같은 핸드헬드 시각화 도구는 실세계 뷰(real-world view)와 관련된 데이터 또는 이미지의 컴퓨터 제공된 오버레이와 카메라에 의해 보이는 실세계 뷰를 조합하는데 사용된다. 이러한 특징의 조합은 다수의 장점을 제공한다.
본 시스템의 하나의 장점은 착공(groundbreaking) 전에 데이터 센터를 계획하거나 자산(asset)을 조달하는 것이 보다 효율적으로 수행될 수 있다는 것이다. 이것은 예를 들어, 데이터 센터 공간의 실세계 뷰가 데이터 센터 자산의 가상 뷰(virtual view)와 조합될 수 있기 때문에 발생한다. 이것은 데이터 센터 공간과 자산 사이에 공간 효율적인 대응이 데이터 센터에서 설치될 수 있게 한다.
본 시스템의 또 다른 장점은 데이터 센터에서 연결부(connectivity)의 이동(move), 추가(add) 및 변경(change)(MAC) 동안 동작 효율이 증가된다는 것이다. 나아가, 데이터 센터 정보의 매크로 뷰(macro view) 및 마이크로 뷰(micro view)는 사용자로 하여금 마이크로-레벨의 정보로 드릴 다운(drill down)하는 것을 가능하게 하면서 대규모 데이터의 투시 뷰(perspective viewing)를 사용자에게 제공할 수 있게 한다. 이것은 사용자로 하여금 상부로부터 증강 현실(Augmented Reality: AR) 비주얼(도 1 참조)의 3D 뷰를 가지게 하여, 사용자로 하여금 위치들 사이를 걸어다닐 필요 없이 디스플레이를 사용하여 가상 위치들 사이를 신속하게 이동할 수 있게 하는 "비행(fly)" 특징을 통해 달성될 수 있다. 이러한 뷰는 사용자로 하여금 데이터센터를 통해 걸어다니게 하고 사용자가 잠재적으로 대규모 환경을 통해 이동하고 있을 때 일련의 뷰(애플리케이션 뷰, 온도 뷰, 전력 뷰, 플랜 뷰)를 동적으로 풀업(pull up)하는 능력을 구비하게 한다.
매우 정밀한 위치 가이드부(guidance)가 작업 지도 전개, 하드웨어 구현 매핑, 포트 연결, 가상 기계 매핑, 다수의 서버로의 가상 기계의 변환, 데이터센터에서 문제 영역으로의 기술자의 전개, 보안 위반(security violation), 긴급 응답(emergency response), 및 사용자 자산 전개를 포함하는 다수의 시나리오에 사용하기 위해 데이터 센터에 사용될 수 있다.
상이한 실시예에서, 증강 현실(AR) 안경, 가상 현실 고글, 또는 PDA와 같은 헨드헬드 디바이스를 포함하는 다수의 어플라이언스가 특정 항목에 관한 정보를 획득하기 위하여 데이터 센터 내 특정 디바이스, 캐비닛(cabinet), 또는 영역을 지시(pointed at)할 수 있는 시각적 데이터를 보기 위해 사용될 수 있다.
도 1은 AR를 통해 사용자에게 제공될 수 있는 정보를 묘사한다. AR 안경을 사용하여 사용자는 선반(rack) 또는 캐비닛에 접근할 수 있고, 특정 디바이스에 집중할 때, 환경 또는 전력 데이터를 풀업할 수 있다. 도 1에서 보는 바와 같이, 사용자는 선반 뷰(10)로부터 상이한 디바이스를 선택할 수 있고, AR 소프트웨어를 사용하는 것에 의해, 사용자에 의해 선택된 특정 하드웨어와 관련된 상이한 데이터를 추출할 수 있다.
사용자는 연결 데이터를 선택할 수 있고, AR 안경을 통해 디바이스의 단 대 단 연결 매핑(end-to-end connectivity mapping)을 시각적으로 볼 수 있다. 도 1은 (데이터 센터를 탑 다운으로 본 것(top down look)을 도시하는) "리프트(lift)" 뷰 특징(12)을 또한 도시한다. 이것은 사용자로 하여금 탑-다운 뷰로부터 특정 선반 또는 캐비닛을 시각적으로 픽킹(pick)하는 것에 의해 예를 들어 정보 뷰(13)에 있는 정보를 풀업할 수 있게 하고, 이로부터 사용자는 특정 캐비닛에 대한 롤업(rollup) 데이터를 획득하거나, 또는 모니터링을 위해 특정 디바이스를 픽킹하는 2D 정면 뷰(elevation view)를 풀업할 수 있다. 이것은 매우 대규모 데이터 센터에 유용하고 데이터 센터를 통해 네비게이션하는데 효과적일 수 있다. 또한 도 1에는 인프라스트럭처 관리 뷰(14)가 도시되어 있는데 이 인프라스트럭처 관리 뷰(infrastructure management view)(14)는 AR 뷰로부터 선택된 항목에 대해 물리적 위치 트리 형태(tree topology)의 뷰를 사용자로 하여금 볼 수 있게 한다. 가상 기계의 논리적 뷰(16)는 가상 기계가 AR 디바이스의 뷰 내 하드웨어에서 실행될 때 가상 기계의 시각화를 가능하게 한다.
도 1의 선반 뷰(10)에서, 선반(20)에 추가되는 서버(18)는 AR 시스템에 의해 선반 뷰(10)에 삽입되어 서버(18)의 설치 후 볼 수 있는 선반(20)의 뷰를 기술자에 제공한다. 또한 도 1에는 선반(20)에서 예비 공간(21)의 AR 뷰를 볼 수 있다. 도 1에서 볼 수 있는 바와 같이 사용자는 데이터 센터 내 특정 위치 내 자산 추적을 위하여 에워싸는(immersive) 환경에서 살아있는 정보를 볼 수 있는 능력을 증강 현실(AR)에 구비한다. 나아가, AR 뷰는 나사, 케이블 관리자, 데이터 케이블, 전력 케이블, 및 레이블(label)과 같은 하드웨어 설치를 위한 단계별 명령(step-by-step instruction)을 오버레이하는데 사용될 수 있다.
AR 데이터 센터 소프트웨어는 수동 및 능동 (실시간) 데이터를 모두 디스플레이할 수 있다. 예를 들어, 전력 데이터는 (AR 고글로, 또는 핸드헬드 디바이스 상의 사용자 인터페이스로) 주변을 돌아다니는 각 특정 디바이스에 걸쳐 디스플레이될 수 있다. 나아가, 포트-레벨 연결 정보는 연결 관리 디바이스(Panduit PViQ 디바이스와 같은 것)에 의해 제공되고 HUD(head up display)로 디스플레이될 수 있다. 이러한 뷰의 일례로는 도 2에 도시되어 있고, 여기서 AR 디스플레이 상의 트레이스(trace)(22)는 상이한 가격의 하드웨어들 사이의 연결에 대한 시각적 표시(indication)를 제공한다.
애플리케이션 계층 정보가 디바이스마다 디스플레이될 수 있다. 이러한 정보는 사용되는 운영 시스템(operating system: OS)에 대한 정보, 특정 블레이드 서버(blade server)에 설치된 가상 기계에 대한 정보, 및 단 대 단 포트 연결, 설치된 소프트웨어 애플리케이션, 및 SLA(Software Licensing Agreement, Service Level Agreement) 감사 작업(auditing)에 대한 정보를 포함할 수 있다.
캐비닛-레벨, 선반-레벨, 및 룸-레벨 데이터/환경/전력 데이터 집적(aggregation) 또는 "롤업(rollup)"이 또한 AR 소프트웨어 환경에서 디스플레이될 수 있다. 예를 들어, AR 뷰는 데이터 센터 내 룸(room), 캐비닛의 열(row), 또는 특정 선반에 의한 전력 소비를 사용자에게 보여주는데 사용될 수 있다. 룸 내 온도 분포는 시각적으로 디스플레이될 수 있다. AR 데이터 센터 소프트웨어는 케이블 연결의 이동, 추가, 변경(MAC)의 전개 및 확인, 및 Panduit의 작업 지도 소프트웨어와 같은 작업 지도 소프트웨어를 통해 또는 다른 제3자 벤더와의 통합을 통한 연결 변경을 위해 사용될 수 있다. 도 2는 AR 데이터 디스플레이(24 및 26)를 도시한다. 정보 데이터 디스플레이(24)는 서버에 관한 정보를 보여주고, 작업 지도 데이터 디스플레이(26)는 MAC 운영(operation)에 수반되는 포트를 보여준다.
Panduit PIM 물리적 인프라스트럭처 관리 시스템과 같은 물리적 계층 정보 시스템에 연결된 AR 데이터 센터 소프트웨어는 서버 프로비저닝(provisioning) 및 서버 해체(decommissioning)와 같은 많은 활동에 기술자를 시각적으로 가이드하며, 물리적 계층 정보 시스템으로부터 연결이 달성되고 추적되는 것을 시각적으로 확인할 수 있다. 예를 들어, 도 3은 본 발명의 일 실시예에 따른 작업 지도에 수반되는 명령 및 뷰를 도시한다.
도 3에서 항목(1)은 작업 지도 그 자체에 관한 식별 정보를 포함하는 작업 지도 바코드이다. 도 3에 도시된 작업 지도는 기술자에게 항목(3)에 나열된 3개의 장비를 설치하고 이들 장비 중 2개의 장비를 연결하도록 명령하고 있다. 항목(2)은 장비가 발견될 수 있는 곳을 보여주고, 항목(4 및 5)은 장비들이 설치될 룸과 캐비닛을 각각 보여준다. 도 3에서 항목(6)은 각 장비가 설치될 선반 유닛(rack unit: RU) 위치의 바코드 리스트이다. 항목(7)은 2개의 장비 사이에 이루어질 연결을 기술자에게 보여준다. 맵(30)이 설치를 위해 기술자를 올바른 캐비닛 위치(B)로 가이드하는데 제공될 수 있다. AR 뷰에 오버레이된 정면 뷰(32)는 기존 작업 지도를 보여주기 위해 제공된다.
물리적 계층 정보 시스템에 연결된 AR 데이터 센터 소프트웨어는 기술자에게 특정 디바이스를 캐비닛 안으로 전개한 경우 초래될 수 있는 시나리오, 즉 "어떻게 할지"를 시각적으로 제공한다. 캐비닛의 건강 상태 및 전력 사용량에 대한 설치의 영향과 같은 요인이 디스플레이될 수 있다. 나아가, 미래의 증축(build out)을 위해 예비된 공간이 최종 설치 상태 시나리오에서와 같이 AR 디스플레이에 도시될 수 있다.
물리적 계층 정보 시스템에 연결된 AR 데이터 센터 소프트웨어는 또한 패치 필드 레벨에서 네트워크 연결의 신속히 결정을 가능하게 하기 위해 특정 팟(pod)에서 포트의 이용가능성을 기술자에 시각적으로 제공할 수 있다.
본 발명의 일 실시예에서, AR 기술은 보다 효율적인 데이터 센터 건설(construction)을 가능하게 하기 위해 데이터 센터 정보와 결합된다. 이 실시예에서, 업자(contractor)는 건설(construction) 상세를 포함하는 AR 안경을 착용한다. 단계별(Step by step) 건설 정보는 설치자가 부품이 전개될 곳과 방법 및 순서를 시각적으로 방향성 있게(directionally) 볼 수 있도록 다수의 소스(예를 들어, 오토캐드(AutoCad) 드로잉, HVAC 드로잉, 작업 지도 시스템 등)로부터 공급된다. 연결점(Connection point) 및 다른 상세는 AR 안경을 통해 설치자에 제공될 수 있다.
본 발명의 일부 실시예에서, 기술자는 작업 지도를 실시하기 위해 AR 데이터 센터 환경을 통해 시각적으로 가이드된다. 이것은 기술자로 하여금 도 3에 도시된 바와 같이 AR 환경의 작업 지도의 상세를 볼 수 있게 한다. 기술자는 이후 작업을 완료하기 위해 데이터 센터를 통해 올바른 영역, 캐비닛, 또는 장비로 시각적으로 가이드된다. 이러한 시각적 가이드부는 도 4에 도시되어 있고, 여기서 AR 뷰에서 화살표(40)는 작업 지도가 수행되어야 하는 적절한 캐비닛(42)을 기술자에 보여준다.
도 5는 본 발명의 일 실시예에 따른 AR 시스템의 예시적인 구현을 도시한다. 도 5의 실시예에서, 휴대용 디바이스(50)는 구역 박스(54)를 물리적으로 개봉할 필요 없이 구역 박스(54) 내에 설치된 하드웨어의 AR 뷰(52)를 디스플레이하는데 사용된다. 이 도시에서, 구역 박스(54)는 가까운 큐비클(cubicle)(55) 내에 네트워크 장비의 연결을 가능하게 하는 하드웨어를 포함한다. QR 코드와 같은 추적가능한 인디케이터(56)는 휴대용 디바이스(50)에 제공된 카메라의 뷰에 있다. 이것은 AR 소프트웨어로 하여금 구역 박스(54) 내에 저장된 하드웨어에 관한 다른 정보와 함께 이미지를 디스플레이할 수 있게 해준다.
도 5에 있는 이미지 디스플레이 또는 AR 뷰에 디스플레이될 연결 정보와 같은 AR 데이터는 데이터베이스와의 통신을 통해 휴대용 디바이스 또는 다른 AR 뷰어에 의해 획득될 수 있다. AR 인에이블 디바이스(50)에 프리젠테이션하기 위한 데이터는 메인 데이터베이스로부터 획득될 수 있다. 물리적 인프라스트럭처 관리 시스템(예를 들어, RFID, 바코드, 스위치 업링크 방법) 내 자산 추적 특징은 데이터베이스를 최신(up-to-date) 것으로 유지하는데 사용될 수 있다. AR 인에이블 디바이스가 일단 특정 식별자(예를 들어, 인디케이터(56))를 인식하면, 디바이스는 데이터베이스로부터 관련 데이터를 (내부 또는 무선으로) 풀링(pull)하고, AR 뷰(52)에 AR 오버레이를 디스플레이한다. 보여지는 데이터는 메뉴를 통해 사용자에 의해 선택될 수 있다.
도 6은 구역 박스 및 큐비클 내 네트워크 장비 사이에 연결을 도시하는 연결 평면도(58)를 구비하는 휴대용 디바이스(50)를 도시한다. 구역 박스 이미지(60)는 휴대용 디바이스(50)를 나타내는 구역 박스의 마지막으로 알려진 뷰를 도시하는 스냅숏(snapshot)일 수 있다. 연결 평면도는 사용자에 의해 선택된 영역의 평면도를 도시한다. 스위치 디스플레이(59)는 연결 평면도(58)에 도시된 위치를 서비스하는 스위치 포트를 보여주기 위해 동시에 제공될 수 있다. 알람(alert)이 또한 예를 들어 연결 문제를 보여주기 위하여 이들 뷰에 제공될 수 있다.
도 7은 네트워크 장비의 설치를 요구하는 작업 지도를 통해 기술자를 가이드하는 휴대용 디바이스(50)에 대한 일련의 뷰를 도시한다. 제1 뷰(70)에서, 기술자는 작업 지도의 통지(notification)를 수신한다. 다음으로, 뷰(72)에 도시된 바와 같이, 기술자의 위치가 결정되고 맵 삽화(map illustration)(73)가 디바이스에 도시되어, 작업 지도를 완성하기 위해 필요한 장비의 위치를 기술자가 취할 수 있는 경로를 도시한다. 다음으로, 뷰(74)에 도시된 바와 같이, AR 뷰는 하나를 초과하는 비교가능한 종단점(endpoint)이 디바이스(50)의 카메라의 뷰에 있을 때 올바른 종단점을 보여주는 스크린 상에 인디케이터(75)를 배치하는데 사용된다. 올바른 저장 룸이 입력될 때, 뷰(76)에 도시된 바와 같이, 디바이스의 카메라는 작업 지도를 수행하는데 필요한 장비에 인디케이터(77)를 배치하기 위해 재고 목록(inventory)에 제공된 표식(indicia)을 사용한다.
기술자가 일단 올바른 장비의 픽업을 확인하면, 맵 삽화(73)는 뷰(78)에 도시된 바와 같이 장비가 설치될 목적지로 가는 경로를 나타내는데 사용된다. 다음으로, 인디케이터(77)는 장비가 설치될 올바른 열을 나타내기 위해 디스플레이(80)에 도시된다. 기술자가 선반에 접근하면, 인디케이터(77)는 뷰(82)에 도시된 바와 같이 올바른 선반을 나타낸다. 마지막으로, 연결 디스플레이(83)는 뷰(84)에 도시된 바와 같이 장비의 올바른 설치를 통해 기술자를 가이드한다. MAC가 (스위치 업링크 또는 다른 수단을 통해) 일단 검증되면, 전체 시스템이 변경을 반영하고 데이터베이스 내 환경의 정확한 표현을 유지하기 위해 업데이트된다.
본 발명의 특정 실시예가 도시되고 설명되었으나, 이 기술 분야에 통상의 지식을 가진 자에게는 본 발명의 개시 내용을 벗어남이 없이 이들 실시예에 변경이 이루어질 수 있는 것으로 이해된다. 본 명세서에 도시되고 설명된 사항은 예시를 위한 것으로 제공된 것일 뿐 발명을 제한하는 것으로 제공된 것이 전혀 아니다.

Claims (15)

  1. 목적지(destination) 위치에 장비를 설치하기 위한 방법으로서:
    (a) 기술자에 의하여 휴대용 디바이스를 제공받는 단계로서, 상기 휴대용 디바이스는 디스플레이 및 카메라를 포함하고, 적어도 일부 컴퓨터 생성 데이터와 조합된 상기 카메라의 뷰의 실시간 시각적 묘사(real-time visual depiction)를 제공하는 증강 현실 뷰(augmented reality view)를 디스플레이하도록 구성되는 단계;
    (b) 상기 기술자에게 진행중인(pending) 작업 지도(work order)를 통지하는 통지(notification)를 상기 휴대용 디바이스에 의하여 수신하는 단계;
    (c) 상기 기술자의 시작 위치를 상기 휴대용 디바이스에 의하여 결정하는 단계;
    (d) 상기 기술자로 하여금 장비 위치와 상기 증강 현실 뷰에 도달하도록 제1 경로를 디스플레이하는 제1 지도 뷰를 제공함으로써 상기 시작 위치로부터 상기 장비 위치로 상기 기술자를 상기 휴대용 디바이스에 의하여 가이드하는 단계로서, 상기 제1 지도 뷰 및 상기 증강 현실 뷰는 상기 디스플레이 상에 동시에 제공되는 상기 단계;
    (e) 상기 기술자가 상기 장비 위치에 도달하고 상기 장비가 상기 카메라의 시야 내에 있을 때, 상기 증강 현실 뷰 상의 상기 컴퓨터 생성 데이터로서 상기 장비를 식별하는 제1 시각 인디케이터(indicator)를 상기 휴대용 디바이스에 의하여 제공하는 단계;
    (f) 상기 장비를 상기 기술자에 의하여 집속하는 단계(collecting);
    (g) 상기 기술자로 하여금 상기 목적지 위치와 상기 증강 현실 뷰에 도달하도록 제2 경로를 디스플레이하는 제2 지도 뷰를 제공함으로써 상기 장비 위치로부터 상기 목적지 위치로 상기 기술자를 상기 휴대용 디바이스에 의하여 가이드하는 단계로서, 상기 제2 지도 뷰 및 상기 증강 현실 뷰는 상기 디스플레이 상에 동시에 제공되는 상기 단계;
    (h) 상기 기술자가 상기 목적지 위치에 도달하고 설치 위치가 상기 카메라의 시야 내에 있을 때, 상기 증강 현실 뷰 상의 상기 컴퓨터 생성 데이터로서 상기 설치 위치를 식별하는 제2 시각 인디케이터를 상기 휴대용 디바이스에 의하여 제공하는 단계; 및
    (i) 상기 장비를 상기 기술자에 의하여 상기 설치 위치에 설치하는 단계;
    를 포함하고,
    상기 단계(d) 및 (g)의 양 단계들 동안 제공되는 상기 증강 현실 뷰는 상기 컴퓨터 생성 데이터로서 하나 이상의 가이드부(guidance) 마커를 포함하는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  2. 제1 항에 있어서, 단계 (g)는 자산 추적 애플리케이션으로 상기 집속을 확인하는 단계를 더 포함하는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  3. 제2 항에 있어서, 상기 확인은 상기 휴대용 디바이스를 통해 수행되는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  4. 제1 항에 있어서, 상기 휴대용 디바이스는 핸드헬드 디바이스 및 안경 중 적어도 하나를 포함하는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  5. 제1 항에 있어서, 상기 제1 시각 인디케이터 및 상기 제2 시각 인디케이터 중 적어도 하나를 제공하는 단계가 하나 이상의 식별자를 인식하고 상기 식별자들을 데이터베이스에 저장된 데이터와 연관시키는 것에 의해 수행되는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  6. 제1 항에 있어서, 부정확한 단계가 수행되면, 상기 휴대용 디바이스는 경고를 제공하고, 상기 부정확한 단계는 상기 장비 위치에 상기 장비 이외의 장비를 집속하고 상기 목적지 위치 이외의 위치에 상기 장비를 설치하는 것 중 적어도 하나인 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  7. 제1 항에 있어서, 상기 장비는 적어도 하나의 커넥터를 포함하고, 상기 단계(i)는 각각의 상기 적어도 하나의 커넥터로 적어도 하나의 케이블을 연결하는 단계를 포함하는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  8. 제7 항에 있어서, 상기 적어도 하나의 케이블 및 상기 각각의 상기 적어도 하나의 커넥터는 상기 카메라 시야 내에 있고, 상기 적어도 하나의 케이블 및 상기 각각의 상기 적어도 하나의 커넥터는 상기 증강 현실 뷰 상에 상기 컴퓨터 생성 데이터로서 적어도 하나의 연결부(connectivity) 식별자를 통해 식별되는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  9. 제8 항에 있어서, 상기 단계(i) 동안 디스플레이되는 상기 증강 현실 뷰 상의 상기 컴퓨터 생성 데이터는 완료된 작업 지도의 예측된 결과의 묘사를 더 포함하는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  10. 제7 항에 있어서, 상기 휴대용 디바이스는 상기 적어도 하나의 케이블이 비각각의(non-respective) 상기 적어도 하나의 커넥터와 연결되는 경우 경고를 제공하는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  11. 제7 항에 있어서, 자산 추적 애플리케이션과의 상기 연결을 확인하는 단계를 포함하는 단계(j)를 더 포함하는 것을 특징으로 하는 목적지 위치에 장비를 설치하기 위한 방법.
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
KR1020137026450A 2011-03-22 2012-03-22 증강 현실 데이터 센터의 시각화 KR101938621B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161466355P 2011-03-22 2011-03-22
US61/466,355 2011-03-22
US13/426,065 US20120249588A1 (en) 2011-03-22 2012-03-21 Augmented Reality Data Center Visualization
US13/426,065 2012-03-21
PCT/US2012/030025 WO2012129354A1 (en) 2011-03-22 2012-03-22 Augmented reality data center visualization

Publications (2)

Publication Number Publication Date
KR20140012714A KR20140012714A (ko) 2014-02-03
KR101938621B1 true KR101938621B1 (ko) 2019-01-15

Family

ID=45955095

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137026450A KR101938621B1 (ko) 2011-03-22 2012-03-22 증강 현실 데이터 센터의 시각화

Country Status (6)

Country Link
US (2) US20120249588A1 (ko)
EP (2) EP3324313A1 (ko)
JP (1) JP6258848B2 (ko)
KR (1) KR101938621B1 (ko)
BR (1) BR112013023612A2 (ko)
WO (1) WO2012129354A1 (ko)

Families Citing this family (173)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI423112B (zh) * 2009-12-09 2014-01-11 Ind Tech Res Inst 可攜式虛擬輸入操作裝置與其操作方法
US9781170B2 (en) 2010-06-15 2017-10-03 Live Nation Entertainment, Inc. Establishing communication links using routing protocols
US10096161B2 (en) 2010-06-15 2018-10-09 Live Nation Entertainment, Inc. Generating augmented reality images using sensor and location data
MX350182B (es) 2010-06-15 2017-08-08 Ticketmaster L L C Metodo y sistemas para configuracion y modelado por computadora de lugares de eventos y mapas interactvos.
US8913086B2 (en) * 2011-04-07 2014-12-16 International Business Machines Corporation Systems and methods for managing errors utilizing augmented reality
US8738754B2 (en) 2011-04-07 2014-05-27 International Business Machines Corporation Systems and methods for managing computing systems utilizing augmented reality
US8773467B2 (en) * 2011-06-13 2014-07-08 International Business Machines Corporation Enhanced asset management and planning system
US9965564B2 (en) * 2011-07-26 2018-05-08 Schneider Electric It Corporation Apparatus and method of displaying hardware status using augmented reality
US9171209B2 (en) 2012-02-23 2015-10-27 Tyco Electronics Uk Infrastructure Limited Overlay-based asset location and identification system
US8965624B2 (en) 2012-08-14 2015-02-24 Ebay Inc. Method and system of vehicle tracking portal
US20140095244A1 (en) * 2012-10-02 2014-04-03 Computer Sciences Corporation Facility visualization and monitoring
US9141188B2 (en) 2012-10-05 2015-09-22 Elwha Llc Presenting an augmented view in response to acquisition of data inferring user activity
US10713846B2 (en) 2012-10-05 2020-07-14 Elwha Llc Systems and methods for sharing augmentation data
US10180715B2 (en) 2012-10-05 2019-01-15 Elwha Llc Correlating user reaction with at least an aspect associated with an augmentation of an augmented view
US9077647B2 (en) 2012-10-05 2015-07-07 Elwha Llc Correlating user reactions with augmentations displayed through augmented views
US10269179B2 (en) 2012-10-05 2019-04-23 Elwha Llc Displaying second augmentations that are based on registered first augmentations
US9111383B2 (en) 2012-10-05 2015-08-18 Elwha Llc Systems and methods for obtaining and using augmentation data and for sharing usage data
US9336508B2 (en) * 2012-11-02 2016-05-10 Patrick Soon-Shiong Virtual planogram management, systems, and methods
JP5787099B2 (ja) * 2012-11-06 2015-09-30 コニカミノルタ株式会社 案内情報表示装置
US20140146038A1 (en) * 2012-11-28 2014-05-29 International Business Machines Corporation Augmented display of internal system components
CN103968824B (zh) * 2013-01-28 2018-04-10 华为终端(东莞)有限公司 一种发现增强现实目标的方法及终端
CN104007889B (zh) * 2013-02-27 2018-03-27 联想(北京)有限公司 一种反馈方法和电子设备
US9340304B2 (en) 2013-02-28 2016-05-17 The Boeing Company Aircraft comparison system
US10067650B2 (en) * 2013-06-20 2018-09-04 The Boeing Company Aircraft comparison system with synchronized displays
US9612725B1 (en) 2013-02-28 2017-04-04 The Boeing Company Nonconformance visualization system
US9292180B2 (en) 2013-02-28 2016-03-22 The Boeing Company Locator system for three-dimensional visualization
US9880694B2 (en) * 2013-05-09 2018-01-30 The Boeing Company Shop order status visualization system
US10481768B2 (en) 2013-04-12 2019-11-19 The Boeing Company Nonconformance identification and visualization system and method
US9492900B2 (en) 2013-03-15 2016-11-15 The Boeing Company Condition of assembly visualization system based on build cycles
US10061481B2 (en) 2013-02-28 2018-08-28 The Boeing Company Methods and devices for visually querying an aircraft based on an area of an image
US9110560B1 (en) 2013-02-28 2015-08-18 The Boeing Company Shop order status visualization system
US9870444B2 (en) 2013-03-05 2018-01-16 The Boeing Company Shop order status visualization system
US9182892B2 (en) 2013-02-28 2015-11-10 The Boeing Company Condition of assembly visualization system
US9558220B2 (en) 2013-03-04 2017-01-31 Fisher-Rosemount Systems, Inc. Big data in process control systems
US10223327B2 (en) 2013-03-14 2019-03-05 Fisher-Rosemount Systems, Inc. Collecting and delivering data to a big data machine in a process control system
US9665088B2 (en) 2014-01-31 2017-05-30 Fisher-Rosemount Systems, Inc. Managing big data in process control systems
US10649424B2 (en) 2013-03-04 2020-05-12 Fisher-Rosemount Systems, Inc. Distributed industrial performance monitoring and analytics
US10678225B2 (en) 2013-03-04 2020-06-09 Fisher-Rosemount Systems, Inc. Data analytic services for distributed industrial performance monitoring
US10282676B2 (en) 2014-10-06 2019-05-07 Fisher-Rosemount Systems, Inc. Automatic signal processing-based learning in a process plant
US10866952B2 (en) 2013-03-04 2020-12-15 Fisher-Rosemount Systems, Inc. Source-independent queries in distributed industrial system
US10909137B2 (en) 2014-10-06 2021-02-02 Fisher-Rosemount Systems, Inc. Streaming data for analytics in process control systems
US10649449B2 (en) 2013-03-04 2020-05-12 Fisher-Rosemount Systems, Inc. Distributed industrial performance monitoring and analytics
US10386827B2 (en) 2013-03-04 2019-08-20 Fisher-Rosemount Systems, Inc. Distributed industrial performance monitoring and analytics platform
US9959190B2 (en) 2013-03-12 2018-05-01 International Business Machines Corporation On-site visualization of component status
US10025486B2 (en) 2013-03-15 2018-07-17 Elwha Llc Cross-reality select, drag, and drop for augmented reality systems
US9779517B2 (en) 2013-03-15 2017-10-03 Upskill, Inc. Method and system for representing and interacting with augmented reality content
US10109075B2 (en) 2013-03-15 2018-10-23 Elwha Llc Temporal element restoration in augmented reality systems
CN107885494B (zh) 2013-03-15 2021-09-10 费希尔-罗斯蒙特系统公司 用于分析过程控制数据的方法和计算机系统
WO2014145193A1 (en) * 2013-03-15 2014-09-18 Nexref Technologies, Llc Marker-based augmented reality (ar) display with inventory management
US9639964B2 (en) 2013-03-15 2017-05-02 Elwha Llc Dynamically preserving scene elements in augmented reality systems
US10649412B2 (en) 2013-03-15 2020-05-12 Fisher-Rosemount Systems, Inc. Method and apparatus for seamless state transfer between user interface devices in a mobile control room
US20140298216A1 (en) 2013-03-28 2014-10-02 The Boeing Company Visualization of an Object Using a Visual Query System
DE102013207118A1 (de) * 2013-04-19 2014-10-23 Siemens Aktiengesellschaft Verfahren zum Betreiben einer mobilen DV-Anlage und zentrale DV-Anlage
JP6255706B2 (ja) 2013-04-22 2018-01-10 富士通株式会社 表示制御装置、表示制御方法、表示制御プログラムおよび情報提供システム
US10416857B2 (en) 2013-05-09 2019-09-17 The Boeing Company Serial number control visualization system
US20140351408A1 (en) * 2013-05-21 2014-11-27 International Business Machines Corporation Utilizing augmented reality for locating computer hardware associated to a reported incident
WO2014193342A1 (en) 2013-05-28 2014-12-04 Hewlett-Packard Development Company, L.P. Mobile augmented reality for managing enclosed areas
WO2015013713A2 (en) * 2013-07-26 2015-01-29 Electronic Power Design, Inc. A method and apparatus for a upgrading a pedestal crane
US20150035823A1 (en) 2013-07-31 2015-02-05 Splunk Inc. Systems and Methods for Using a Three-Dimensional, First Person Display to Convey Data to a User
US9092865B2 (en) * 2013-08-16 2015-07-28 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Map generation for an environment based on captured images
US9461456B2 (en) 2013-10-16 2016-10-04 Dell Products, Lp Integrated switchboard for a modular data center
US20150109332A1 (en) * 2013-10-17 2015-04-23 Fmr Llc Real-time visualizations of components in a modular instrumentation center
US9098986B2 (en) * 2013-10-17 2015-08-04 Rockwell Automation Technologies, Inc. Indicator light interpretation device and method for indicator lights of an electronic device
US9672648B2 (en) * 2013-10-18 2017-06-06 Vmware, Inc. Augmented reality aided navigation
US9973527B2 (en) 2013-11-19 2018-05-15 Intel Corporation Context-aware proactive threat management system
US9443221B2 (en) 2013-12-16 2016-09-13 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Physical location tagging via image recognition
JP6244954B2 (ja) * 2014-02-06 2017-12-13 富士通株式会社 端末装置、情報処理装置、表示制御方法、及び表示制御プログラム
EP2913730B1 (en) * 2014-02-28 2019-10-30 ABB Schweiz AG Use of a live video stream in a process control system
US20150325047A1 (en) * 2014-05-06 2015-11-12 Honeywell International Inc. Apparatus and method for providing augmented reality for maintenance applications
US10332314B2 (en) * 2014-05-07 2019-06-25 Commscope Technologies Llc Hands-free asset identification, location and management system
US10044795B2 (en) 2014-07-11 2018-08-07 Vmware Inc. Methods and apparatus for rack deployments for virtual computing environments
US10388068B2 (en) * 2014-07-14 2019-08-20 Ademco Inc. System and method of augmented reality alarm system installation
EP2990894B1 (en) * 2014-08-25 2018-09-26 The Boeing Company Serial number control visualization system
US10168691B2 (en) 2014-10-06 2019-01-01 Fisher-Rosemount Systems, Inc. Data pipeline for process control system analytics
WO2016057386A1 (en) 2014-10-07 2016-04-14 Diversey, Inc. Methods and apparatus for technical and customer support for industrial cleaning devices
US9882800B2 (en) * 2015-01-20 2018-01-30 International Business Machines Corporation Computer room environment servicing
US9646400B2 (en) 2015-02-12 2017-05-09 At&T Intellectual Property I, L.P. Virtual doorbell augmentations for communications between augmented reality and virtual reality environments
US10007413B2 (en) 2015-04-27 2018-06-26 Microsoft Technology Licensing, Llc Mixed environment display of attached control elements
US10099382B2 (en) 2015-04-27 2018-10-16 Microsoft Technology Licensing, Llc Mixed environment display of robotic actions
DE102015007624A1 (de) 2015-06-16 2016-12-22 Liebherr-Components Biberach Gmbh Verfahren zum Montieren von elektrischen Schaltanlagen sowie Montagehilfsvorrichtung zum Erleichtern der Montage solcher Schaltanlagen
US10754494B2 (en) * 2015-06-23 2020-08-25 Dell Products, L.P. Method and control system providing one-click commissioning and push updates to distributed, large-scale information handling system (LIHS)
US10740081B2 (en) 2015-06-30 2020-08-11 Vmware, Inc. Methods and apparatus for software lifecycle management of a virtual computing environment
US10198620B2 (en) * 2015-07-06 2019-02-05 Accenture Global Services Limited Augmented reality based component replacement and maintenance
US9929780B2 (en) * 2015-07-27 2018-03-27 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Capturing physical inventory in a data center
US11064009B2 (en) 2015-08-19 2021-07-13 Honeywell International Inc. Augmented reality-based wiring, commissioning and monitoring of controllers
US9838844B2 (en) 2015-09-25 2017-12-05 Ca, Inc. Using augmented reality to assist data center operators
US10528021B2 (en) 2015-10-30 2020-01-07 Rockwell Automation Technologies, Inc. Automated creation of industrial dashboards and widgets
JP5997824B1 (ja) * 2015-11-10 2016-09-28 株式会社オプティム 遠隔端末、遠隔指示方法及び遠隔端末用プログラム
US10891574B2 (en) 2015-11-17 2021-01-12 Target Brands, Inc. Planogram resetting using augmented reality in a retail environment
US10313281B2 (en) 2016-01-04 2019-06-04 Rockwell Automation Technologies, Inc. Delivery of automated notifications by an industrial asset
US10503483B2 (en) 2016-02-12 2019-12-10 Fisher-Rosemount Systems, Inc. Rule builder in a process control network
US9836888B2 (en) * 2016-02-18 2017-12-05 Edx Technologies, Inc. Systems and methods for augmented reality representations of networks
US9965841B2 (en) 2016-02-29 2018-05-08 Schneider Electric USA, Inc. Monitoring system based on image analysis of photos
US10685147B2 (en) 2016-02-29 2020-06-16 The Boeing Company Non-conformance mapping and visualization
JP6803166B2 (ja) * 2016-07-26 2020-12-23 富士通コンポーネント株式会社 情報処理装置
US10318570B2 (en) 2016-08-18 2019-06-11 Rockwell Automation Technologies, Inc. Multimodal search input for an industrial search platform
JP6195960B2 (ja) * 2016-08-26 2017-09-13 株式会社オプティム 遠隔指示方法及び遠隔端末用プログラム
US9881425B1 (en) * 2016-09-09 2018-01-30 The Boeing Company Synchronized side-by-side display of real and virtual environments
US10261747B2 (en) 2016-09-09 2019-04-16 The Boeing Company Synchronized side-by-side display of live video and corresponding virtual environment images
US10178130B2 (en) 2016-09-14 2019-01-08 Fortinet, Inc. Augmented reality visualization device for network security
US10401839B2 (en) 2016-09-26 2019-09-03 Rockwell Automation Technologies, Inc. Workflow tracking and identification using an industrial monitoring system
US10319128B2 (en) * 2016-09-26 2019-06-11 Rockwell Automation Technologies, Inc. Augmented reality presentation of an industrial environment
US10545492B2 (en) 2016-09-26 2020-01-28 Rockwell Automation Technologies, Inc. Selective online and offline access to searchable industrial automation data
US10735691B2 (en) 2016-11-08 2020-08-04 Rockwell Automation Technologies, Inc. Virtual reality and augmented reality for industrial automation
US10388075B2 (en) 2016-11-08 2019-08-20 Rockwell Automation Technologies, Inc. Virtual reality and augmented reality for industrial automation
US10866631B2 (en) 2016-11-09 2020-12-15 Rockwell Automation Technologies, Inc. Methods, systems, apparatuses, and techniques for employing augmented reality and virtual reality
US10212157B2 (en) 2016-11-16 2019-02-19 Bank Of America Corporation Facilitating digital data transfers using augmented reality display devices
US10158634B2 (en) 2016-11-16 2018-12-18 Bank Of America Corporation Remote document execution and network transfer using augmented reality display devices
US10943229B2 (en) 2016-11-29 2021-03-09 Bank Of America Corporation Augmented reality headset and digital wallet
US10685386B2 (en) 2016-11-30 2020-06-16 Bank Of America Corporation Virtual assessments using augmented reality user devices
US10339583B2 (en) 2016-11-30 2019-07-02 Bank Of America Corporation Object recognition and analysis using augmented reality user devices
US10600111B2 (en) 2016-11-30 2020-03-24 Bank Of America Corporation Geolocation notifications using augmented reality user devices
US10481862B2 (en) 2016-12-02 2019-11-19 Bank Of America Corporation Facilitating network security analysis using virtual reality display devices
US10607230B2 (en) 2016-12-02 2020-03-31 Bank Of America Corporation Augmented reality dynamic authentication for electronic transactions
US10311223B2 (en) 2016-12-02 2019-06-04 Bank Of America Corporation Virtual reality dynamic authentication
US10586220B2 (en) 2016-12-02 2020-03-10 Bank Of America Corporation Augmented reality dynamic authentication
US10109095B2 (en) 2016-12-08 2018-10-23 Bank Of America Corporation Facilitating dynamic across-network location determination using augmented reality display devices
US10109096B2 (en) 2016-12-08 2018-10-23 Bank Of America Corporation Facilitating dynamic across-network location determination using augmented reality display devices
US10217375B2 (en) 2016-12-13 2019-02-26 Bank Of America Corporation Virtual behavior training using augmented reality user devices
US10210767B2 (en) 2016-12-13 2019-02-19 Bank Of America Corporation Real world gamification using augmented reality user devices
US10955803B1 (en) * 2017-02-05 2021-03-23 Novatech Process Solutions, Llc System and method for documenting and managing execution of procedures in a graphical interface environment
US10433112B2 (en) * 2017-02-22 2019-10-01 Middle Chart, LLC Methods and apparatus for orienteering
US10984493B1 (en) 2017-05-05 2021-04-20 Wells Fargo Bank, N.A. Augmented or virtual reality to scenario plan property purchase or renovation
CN110800260B (zh) 2017-06-28 2022-04-26 康普技术有限责任公司 一种操作增强现实设备的方法、增强现实设备和存储介质
WO2019028418A1 (en) * 2017-08-03 2019-02-07 Commscope Technologies Llc METHODS FOR AUTOMATIC RECORDING OF CONNECTION CHANGES AT PASSIVE CONNECTION TABLE AND NETWORK EQUIPMENT LEVELS
US20190057180A1 (en) * 2017-08-18 2019-02-21 International Business Machines Corporation System and method for design optimization using augmented reality
US10591730B2 (en) * 2017-08-25 2020-03-17 II Jonathan M. Rodriguez Wristwatch based interface for augmented reality eyewear
US10771350B2 (en) * 2017-09-26 2020-09-08 Siemens Aktiengesellschaft Method and apparatus for changeable configuration of objects using a mixed reality approach with augmented reality
IT201700114872A1 (it) * 2017-10-12 2019-04-12 New Changer S R L Apparato di visione per l'ausilio al cablaggio di fibra ottica
US11120515B1 (en) 2017-11-03 2021-09-14 Wells Fargo Bank, N.A. Property enhancement analysis
US10445944B2 (en) 2017-11-13 2019-10-15 Rockwell Automation Technologies, Inc. Augmented reality safety automation zone system and method
US11222081B2 (en) 2017-11-27 2022-01-11 Evoqua Water Technologies Llc Off-line electronic documentation solutions
KR101878375B1 (ko) * 2017-11-30 2018-07-16 안경찬 증강현실을 이용한 로또 복권 마킹 안내 방법 및 장치
US20190304154A1 (en) * 2018-03-30 2019-10-03 First Insight, Inc. Importation and transformation tool for utilizing computer-aided design files in a web browser or customized client interface
WO2019215507A2 (en) 2018-05-10 2019-11-14 TechSee Augmented Vision Ltd. Methods and systems for providing interactive support sessions
WO2019227197A1 (en) * 2018-06-01 2019-12-05 Ats Automation Tooling Systems Inc. System and method for visual state identification of automation systems
US20200011696A1 (en) * 2018-07-03 2020-01-09 Honeywell International Inc. Indoor wayfinding to equipment and infrastructure
US10901721B2 (en) 2018-09-20 2021-01-26 Vmware, Inc. Methods and apparatus for version aliasing mechanisms and cumulative upgrades for software lifecycle management
US10997415B2 (en) 2018-10-05 2021-05-04 General Electric Company Augmented reality system for asset tracking and visualization using indoor positioning system
US10831588B2 (en) 2018-10-16 2020-11-10 International Business Machines Corporation Diagnosis of data center incidents with augmented reality and cognitive analytics
US10771343B2 (en) * 2018-11-06 2020-09-08 Mastercard International Incorporated System, method, and computer-implemented method for standardizing electronic identifiers to improve identification of physical equipment
US11145130B2 (en) * 2018-11-30 2021-10-12 Apprentice FS, Inc. Method for automatically capturing data from non-networked production equipment
KR20200076326A (ko) * 2018-12-19 2020-06-29 삼성전자주식회사 다른 전자 장치의 설치 및 유지보수에 사용되는 전자 장치 및 그 제어 방법
US10972361B2 (en) 2019-01-31 2021-04-06 Dell Products L.P. System and method for remote hardware support using augmented reality and available sensor data
US10966342B2 (en) 2019-01-31 2021-03-30 Dell Products, L.P. System and method for determining location and navigating a datacenter using augmented reality and available sensor data
US20200250863A1 (en) * 2019-01-31 2020-08-06 Dell Products, Lp System and Method for Wiring Management of Multi-chassis Systems in a Datacenter using Augmented Reality and Available Sensor Data
US10880163B2 (en) 2019-01-31 2020-12-29 Dell Products, L.P. System and method for hardware management and configuration in a datacenter using augmented reality and available sensor data
US10663302B1 (en) * 2019-03-18 2020-05-26 Capital One Services, Llc Augmented reality navigation
US11107284B2 (en) * 2019-06-28 2021-08-31 Dell Products L.P. System and method for visualization of system components
US10922938B2 (en) 2019-07-01 2021-02-16 Honeywell International Inc. Systems and methods for providing an immersive experience of a facility control room using virtual reality
US11489736B2 (en) * 2019-07-23 2022-11-01 Core Scientific, Inc. System and method for managing computing devices
US11048760B1 (en) * 2019-07-31 2021-06-29 Splunk Inc. Techniques for placing content in and applying layers in an extended reality environment
US11646807B2 (en) * 2019-08-21 2023-05-09 Commscope Technologies Llc Methods including detecting cables connected to ports of communications network equipment and related systems
US11184258B1 (en) * 2019-09-03 2021-11-23 Amazon Technologies, Inc. Network analysis using forwarding table information
JP2022547955A (ja) * 2019-09-13 2022-11-16 ユービキティ インコーポレイテッド インターネット接続設定のための拡張現実
US10958765B1 (en) 2019-09-17 2021-03-23 Saudi Arabian Oil Company Augmented reality for end-to-end data center it infrastructure layout
US11055037B2 (en) * 2019-09-26 2021-07-06 Ricoh Company, Ltd. Enhanced printer and printer operator interactions
US11611484B2 (en) 2019-10-15 2023-03-21 Oracle International Corporation System and method for use of virtual or augmented reality with data center operations or cloud infrastructure
JP2021072001A (ja) * 2019-10-31 2021-05-06 キヤノン株式会社 プログラム、情報処理装置、情報処理方法、及び情報処理システム
US10997832B1 (en) 2019-12-04 2021-05-04 International Business Machines Corporation Augmented reality based dynamic guidance
US11796333B1 (en) 2020-02-11 2023-10-24 Keysight Technologies, Inc. Methods, systems and computer readable media for augmented reality navigation in network test environments
US11798156B2 (en) 2020-03-26 2023-10-24 International Business Machines Corporation Hyperconverged configuration troubleshooting
US11270459B2 (en) * 2020-04-22 2022-03-08 Dell Products L.P. Enterprise system augmented reality detection
US11374808B2 (en) * 2020-05-29 2022-06-28 Corning Research & Development Corporation Automated logging of patching operations via mixed reality based labeling
US11295135B2 (en) * 2020-05-29 2022-04-05 Corning Research & Development Corporation Asset tracking of communication equipment via mixed reality based labeling
US11570050B2 (en) * 2020-11-30 2023-01-31 Keysight Technologies, Inc. Methods, systems and computer readable media for performing cabling tasks using augmented reality
US11663749B2 (en) 2021-02-09 2023-05-30 Red Hat, Inc. Providing context for software deployments using augmented reality
US11347305B1 (en) * 2021-03-03 2022-05-31 Dell Products L.P. Managing software files of a data center via augmented reality
US11431557B1 (en) 2021-04-13 2022-08-30 Dell Products L.P. System for enterprise event analysis
US11606246B2 (en) 2021-04-28 2023-03-14 Dell Products L.P. System for enterprise alert timeline of a system and service
US11935224B2 (en) * 2021-05-03 2024-03-19 Cox Communications, Inc. Systems and methods for troubleshooting equipment installation using artificial intelligence
US11777557B2 (en) * 2021-05-07 2023-10-03 Viavi Solutions Inc. Personal mobile signal egress logging and augmented reality leak locator
US11908088B2 (en) 2021-06-09 2024-02-20 Red Hat, Inc. Controlling virtual resources from within an augmented reality environment

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1046411A2 (en) 1999-04-23 2000-10-25 GB Solo Limited A helmet
WO2007133209A1 (en) 2006-05-12 2007-11-22 Information Decision Technologies, Llc Advanced augmented reality system and method for firefighter and first responder training

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE50007901D1 (de) * 1999-03-02 2004-10-28 Siemens Ag Nutzung von augmented reality-basistechnologien zur situationsgerechten unterstützung des facharbeiters durch entfernte experten
US20050131729A1 (en) * 1999-11-16 2005-06-16 Melby John M. Apparatus and method for tracking and managing physical assets
US20020070953A1 (en) * 2000-05-04 2002-06-13 Barg Timothy A. Systems and methods for visualizing and analyzing conditioned data
US7410138B2 (en) * 2003-03-14 2008-08-12 Tgr Intellectual Properties, Llc Display adjustably positionable about swivel and pivot axes
US8793587B2 (en) * 2005-06-29 2014-07-29 Hewlett-Packard Development Company, L.P. Interactive display of data center assets
US20100214111A1 (en) * 2007-12-21 2010-08-26 Motorola, Inc. Mobile virtual and augmented reality system
US20100180092A1 (en) * 2009-01-09 2010-07-15 Vmware, Inc. Method and system of visualization of changes in entities and their relationships in a virtual datacenter through a log file
JP2010165321A (ja) * 2009-01-19 2010-07-29 Toshiba Corp 配電盤点検システム
US8196047B2 (en) * 2009-01-20 2012-06-05 Microsoft Corporation Flexible visualization for services
JP2010211623A (ja) * 2009-03-11 2010-09-24 Brother Ind Ltd 作業支援システム
US8031468B2 (en) * 2009-06-03 2011-10-04 American Power Conversion Corporation Hot aisle containment cooling unit and method for cooling

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1046411A2 (en) 1999-04-23 2000-10-25 GB Solo Limited A helmet
WO2007133209A1 (en) 2006-05-12 2007-11-22 Information Decision Technologies, Llc Advanced augmented reality system and method for firefighter and first responder training

Also Published As

Publication number Publication date
EP3324313A1 (en) 2018-05-23
JP6258848B2 (ja) 2018-01-10
JP2014517944A (ja) 2014-07-24
US20120249588A1 (en) 2012-10-04
US20140330511A1 (en) 2014-11-06
EP2689350A1 (en) 2014-01-29
KR20140012714A (ko) 2014-02-03
BR112013023612A2 (pt) 2017-02-07
WO2012129354A1 (en) 2012-09-27

Similar Documents

Publication Publication Date Title
KR101938621B1 (ko) 증강 현실 데이터 센터의 시각화
US10332314B2 (en) Hands-free asset identification, location and management system
US10404543B2 (en) Overlay-based asset location and identification system
CN108833141B (zh) 数据中心运维管理装置与系统
US20190041637A1 (en) Methods of automatically recording patching changes at passive patch panels and network equipment
CN110796727A (zh) 基于虚拟现实技术的机房远程全景监控方法
CA2777693C (en) Apparatus and method of displaying hardware status using augmented reality
JP5349417B2 (ja) 拡張現実技術を利用した保守・監視システム
US9361716B1 (en) System and method for increasing the system awareness of IT operations personnel with augmented reality
US11113642B2 (en) Mobile application for assisting a technician in carrying out an electronic work order
KR20200063684A (ko) 에너지 사용량을 3차원 공간에 렌더링 하여 표시하는 에너지 모니터링 방법 및 이를 이용한 에너지 모니터링 시스템
CN114787875A (zh) 用于与数据中心运营或云基础设施一起使用虚拟或增强现实的系统和方法
CN109674628A (zh) 一种智能眼镜
US20200374202A1 (en) Industrial field services automation platform
KR20210128822A (ko) 360도 전방위 영상 기반의 건설현장 관리시스템
Haramaki et al. A network topology visualization system based on mobile AR technology
KR20220010356A (ko) 증강현실 콘텐츠 기반 작업관리 시스템 및 방법
CN115470563A (zh) 一种基于建管平台的可视化呈现方法、设备及存储介质
CN107919904B (zh) 带保护业务路径管理方法、装置
EP2780814B1 (en) Mobilized sensor system
CN110866618A (zh) 设备信息的处理方法及系统
US20210208551A1 (en) Building management system and positioning method in building
KR20220108930A (ko) 케이블 설치 작업량 관리 장치 및 방법
CN117830568A (zh) 一种电力元宇宙模型建模系统及其远程维护指导方法
CN115794062A (zh) 软件生成方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant