CN113868102A - 用于信息显示的方法、电子设备和计算机程序产品 - Google Patents

用于信息显示的方法、电子设备和计算机程序产品 Download PDF

Info

Publication number
CN113868102A
CN113868102A CN202010621934.2A CN202010621934A CN113868102A CN 113868102 A CN113868102 A CN 113868102A CN 202010621934 A CN202010621934 A CN 202010621934A CN 113868102 A CN113868102 A CN 113868102A
Authority
CN
China
Prior art keywords
information
infrastructure
visualized
hardware
virtual reality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010621934.2A
Other languages
English (en)
Inventor
沙丹青
陈强
贾真
唐旭玮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EMC Corp
Original Assignee
EMC IP Holding Co LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EMC IP Holding Co LLC filed Critical EMC IP Holding Co LLC
Priority to CN202010621934.2A priority Critical patent/CN113868102A/zh
Priority to US16/934,258 priority patent/US11087053B1/en
Publication of CN113868102A publication Critical patent/CN113868102A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/321Display for diagnostics, e.g. diagnostic result display, self-test user interface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/323Visualisation of programs or trace data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324Display of status information
    • G06F11/328Computer systems status display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9538Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2111/00Details relating to CAD techniques
    • G06F2111/18Details relating to CAD techniques using virtual or augmented reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0233Improving the luminance or brightness uniformity across the screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Computation (AREA)
  • Geometry (AREA)
  • Computing Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开的实施例涉及用于信息显示的方法、电子设备和计算机程序产品。根据本公开的示例性实现,一种用于信息显示的方法,包括:获取与现实世界中的用于信息处理的基础设施相关联的原始信息;对原始信息中的至少一部分进行可视化,以生成可视化信息,可视化信息包括与基础设施所处于的环境相关联的可视化环境信息、与基础设施中的硬件相关联的可视化硬件信息、与基础设施进行的数据处理相关联的可视化数据处理信息、以及对原始信息进行分析得到的可视化分析结果中的至少一项;以及将可视化信息呈现在至少一个虚拟现实设备所显示的虚拟世界中,虚拟世界模拟现实世界并且包括基础设施的虚拟表示。由此,可以改进基础设施管理。

Description

用于信息显示的方法、电子设备和计算机程序产品
技术领域
本公开的实施例总体涉及信息显示,具体涉及用于信息显示的方法、电子设备和计算机程序产品。
背景技术
近年来,虚拟现实(VR)技术快速发展。虚拟现实技术可以提供生动的上下文和沉浸式体验。虚拟现实技术所具有的以清晰、直观的方式呈现可视化信息的能力使其能够形成理想的可视化平台。因此,可以利用虚拟现实技术改进许多行业。
传统的用于信息处理的基础设施(诸如IT基础设施)的设计存在各种缺陷。例如,基础设施设计主要基于不直观的2D计算机辅助设计或3D物理模型。用户无法立即可视化和感知基础设施的设计。此外,基于2D计算机辅助设计或3D物理模型的设计无法在设计阶段提供基于性能的数据分析。在这种情况下,需要使用虚拟现实技术来改进基础设施设计。
发明内容
本公开的实施例提供了用于信息显示的方法、电子设备和计算机程序产品。
在本公开的第一方面,提供了一种用于信息显示的方法。该方法包括:获取与现实世界中的用于信息处理的至少一个基础设施相关联的原始信息;对原始信息中的至少一部分进行可视化,以生成可视化信息,可视化信息包括与至少一个基础设施所处于的环境相关联的可视化环境信息、与至少一个基础设施中的硬件相关联的可视化硬件信息、与至少一个基础设施进行的数据处理相关联的可视化数据处理信息、以及对原始信息进行分析得到的可视化分析结果中的至少一项;以及将可视化信息呈现在至少一个虚拟现实设备所显示的虚拟世界中,虚拟世界模拟现实世界并且包括至少一个基础设施的虚拟表示。
在本公开的第二方面,提供了一种电子设备。该设备包括至少一个处理单元和至少一个存储器。至少一个存储器被耦合到至少一个处理单元并且存储用于由至少一个处理单元执行的指令。该指令当由至少一个处理单元执行时使得设备执行动作,该动作包括:获取与现实世界中的用于信息处理的至少一个基础设施相关联的原始信息;对原始信息中的至少一部分进行可视化,以生成可视化信息,可视化信息包括与至少一个基础设施所处于的环境相关联的可视化环境信息、与至少一个基础设施中的硬件相关联的可视化硬件信息、与至少一个基础设施进行的数据处理相关联的可视化数据处理信息、以及对原始信息进行分析得到的可视化分析结果中的至少一项;以及将可视化信息呈现在至少一个虚拟现实设备所显示的虚拟世界中,虚拟世界模拟现实世界并且包括至少一个基础设施的虚拟表示。
在本公开的第三方面,提供了一种计算机程序产品。计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括机器可执行指令,机器可执行指令在被执行时使机器实现根据本公开的第一方面所描述的方法的任意步骤。
提供发明内容部分是为了以简化的形式来介绍对概念的选择,它们在下文的具体实施方式中将被进一步描述。发明内容部分无意标识本公开的关键特征或必要特征,也无意限制本公开的范围。
附图说明
通过结合附图对本公开示例性实施例进行更详细的描述,本公开的上述以及其它目的、特征和优势将变得更加明显,其中,在本公开示例性实施例中,相同的参考标号通常代表相同部件。
图1示出了本公开的一些实施例能够在其中实现的示例环境的示意图;
图2示出了根据本公开的一些实施例的用于信息显示的方法的流程图;
图3示出了根据本公开的一些实施例的虚拟世界及其中的可视化信息的示例的示意图;以及
图4示出了可以用来实施本公开内容的实施例的示例设备的示意性框图。
在各个附图中,相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参照附图更详细地描述本公开的优选实施例。虽然附图中显示了本公开的优选实施例,然而应该理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了使本公开更加透彻和完整,并且能够将本公开的范围完整地传达给本领域的技术人员。
在本文中使用的术语“包括”及其变形表示开放性包括,即“包括但不限于”。除非特别申明,术语“或”表示“和/或”。术语“基于”表示“至少部分地基于”。术语“一个示例实施例”和“一个实施例”表示“至少一个示例实施例”。术语“另一实施例”表示“至少一个另外的实施例”。术语“第一”、“第二”等等可以指代不同的或相同的对象。下文还可能包括其他明确的和隐含的定义。
如上所述,基础设施设计存在各种缺陷。例如,这些缺陷主要体现在以下五方面。在跨传统基础设施管理工具和/或平台方面,由于用户可能会利用多种不同的工具和/或平台来进行基础设施管理,因此需要不同的专业技能来操作这些工具和/或平台。此外,用户所利用的工具和/或平台中的一些可能是独立的,并且无法彼此连接。这将显著降低基础设施管理效率。
在数据可视化方面,传统基础设施管理工具和/或平台通常仅以2D形式呈现基础设施的硬件状态、环境参数、管理过程等。然而,这样的呈现方式并不直观。此外,这些工具和/或平台也没有呈现针对基础设施的任何分析和见解。
在远程监控方面,传统基础设施管理工具和/或平台通常没有提供远程监控能力。然而,大多数技术人员并非是基础设施中的所有硬件的专家,并且专家也不一定总是能够到达现场进行技术支持。例如,一种传统的技术支持模型要求满足以下三个条件:1)检测并且报告故障或错误;2)通知用户,并且技术人员能够对故障或错误提供现场支持;3)技术人员需要在特定的服务水平协议中进行报告。然而,通常提供现场支持的技术人员仅是缺乏必要技能的初级技术人员,因此具备必要技能的高级技术人员需要在服务水平协议中商定的时间内出差以提供现场支持。这可能导致技术人员往返于现场的时间显著超过了用户和技术人员的总体诊断和维护时间。
在数据分析方面,传统基础设施管理流程没有利用来自各种数据库的大量数据,也没有提供数据分析,从而仅向用户提供非常有限的信息。
在协同工作方面,在传统基础设施故障排除或维护过程中,无法支持多个用户之间的协同工作。技术人员需要现场与其他技术人员一起解决故障或进行维护。如果遇到无法解决的问题,也需要能够解决问题的技术人员到达现场。
根据本公开的示例实施例,提出了一种用于信息显示的改进方案。在该方案中,获取与现实世界中的用于信息处理的至少一个基础设施相关联的原始信息;对原始信息中的至少一部分进行可视化,以生成可视化信息,可视化信息包括与至少一个基础设施所处于的环境相关联的可视化环境信息、与至少一个基础设施中的硬件相关联的可视化硬件信息、与至少一个基础设施进行的数据处理相关联的可视化数据处理信息、以及对原始信息进行分析得到的可视化分析结果中的至少一项;以及将可视化信息呈现在至少一个虚拟现实设备所显示的虚拟世界中,虚拟世界模拟现实世界并且包括至少一个基础设施的虚拟表示。
以此方式,本方案可以将虚拟现实技术应用于基础设施设计,而避免测试物理基础设施的潜在昂贵过程。虚拟现实技术可以直观地显示基础设施的各种状态,并且可以在基础设施设计的早期阶段提供设计测试(诸如布局测试和性能测试等)。例如,通过虚拟现实技术,用户可以直接看到基础设施的布局或基础设施中的硬件的布置方式,并且可以通过调整基础设施的参数来改进设计。由此,可以在设计过程中测试并解决潜在问题,然后将成功的设计应用于实际系统,而不会因设计不当而浪费额外成本。此外,本方案还允许多个用户以共享视图一起协作工作,从而提高设计效率。
在下文中,将结合图1-图4更详细地描述本方案的具体示例。图1示出了根据本公开的一些实施例的示例环境100的示意图。环境100包括基础设施110、计算设备120和虚拟现实设备130。基础设施110可以表示现实世界中的用于信息处理的物理设备,诸如但不限于服务器、路由器、交换机等以及这些设备的组合或这些设备中的硬件部件。应当理解的是,为了清楚起见,图1中仅示出了一个基础设施,但是基础设施的数目不限于此,并且可以是更多或更少的任何适当数目。例如,基础设施事实上可以表示具有多个基础设施的数据中心。
计算设备120可以从各种来源获取与基础设施110相关联的原始信息,并且对原始信息中的至少一部分进行可视化,以将可视化信息呈现在虚拟现实设备130所显示的虚拟世界中。虚拟世界模拟现实世界,并且包括基础设施110的虚拟表示。例如,虚拟世界可以包括现实世界中的建筑结构和布局(暖通空调(HVAC)系统、墙壁、管道等)、各种设备(机架、电缆连接、服务器、存储设备等)等。
计算设备120可以是任何合适类型的设备,例如移动电话、平板计算机、个人计算机、便携式计算机、台式计算机、个人数字助理(PDA)等。此外,应当理解的是,计算设备120可以被嵌入在基础设施110或虚拟现实设备130中或者作为基础设施110或虚拟现实设备130外部的独立设备。
虚拟现实设备130可以是支持虚拟现实技术的任何合适的设备,包括但不限于头戴式显示器、双目全方位显示器、液晶光闸眼镜、大屏幕投影、CAVE洞穴式虚拟现实显示系统、智能眼镜、智能手机、平板计算机、台式计算机、膝上型计算机等。例如,使用虚拟现实设备130的用户可以在虚拟世界中导航以查看基础设施的虚拟表示,并且使用手势、眼睛注视、控制器等来获取、控制或改变可视化信息及与可视化信息相对应的基础设施或传感器等的参数或设置。
具体地,计算设备120可以分别从基础设施110、传感器140、远程设备150和数据库160中的至少一个来源获取原始信息。基础设施110可以向计算设备120提供与基础设备110中的硬件相关联的原始硬件信息。例如,硬件可以包括处理资源(诸如中央处理单元(CPU)、图形处理单元(GPU)等)、网络资源、存储资源(诸如存储器、光存储装置、磁存储装置等)和状态指示器(诸如LED灯、警示灯等)。这种情况下,原始硬件信息可以包括这些硬件所处于的状态、性能、使用情况等。
传感器140可以用于监测基础设施110以及基础设施110所处于的环境。这些传感器可以安装在基础设施110内部,也可以安装在基础设施110外部从而独立于基础设施110。传感器140可以具有任何合适的形式,并且可以例如是相机、烟雾探测器、温度传感器、湿度传感器、存在传感器、恒温器、气体检测器、和/或枪击传感器等。由此,计算设备120可以从这些传感器140获取其感测或捕获到的原始环境信息。例如,原始环境信息可以是图像、视频、烟雾浓度、温度、湿度、红外信息、特定气体含量、和/或枪声分贝等。
远程设备150可以是与基础设施110进行分布式数据处理的设备。可以在本地基础设施和远程设备处对数据进行处理,以形成数据处理管道。本地基础设施(例如,本地边缘服务器)可以进行数据获取和简单的数据处理。远程设备(例如,远程核心服务器、云等)可以进行更复杂的数据处理。例如,远程核心服务器可以进行更计算密集型的数据融合与分析。云可以使用大量历史数据进行更高级的人工智能或机器学习任务,以进行长期决策。基础设施110和远程设备150之间可以通过网络交换数据。网络可以例如是任何合适的有线或无线网络,诸如光纤网络、5G网络等。由此,计算设备120可以从基础设施110和远程设备150获取与这样的数据处理管道相关联的原始数据处理信息。例如,原始数据处理信息可以是网络参数、数据处理状态、和/或数据传输状态等。
数据库160可以例如是历史硬件信息数据库、历史环境信息数据库、知识数据库、风险模型数据库、专家数据库、故障排除过程数据库、和/或操作过程数据库等。由此,计算设备120可以从这些数据库160获取附加信息。在这种情况下,附加信息可以例如是历史硬件信息、历史环境信息、知识片段、风险模型、专业信息、故障排除过程信息、和/或操作过程信息等。
计算设备120可以对原始信息进行可视化,以生成可视化信息。在一些实施例中,可视化信息可以包括与基础设施110所处于的环境相关联的可视化环境信息、与基础设施110中的硬件相关联的可视化硬件信息、与基础设施110进行的数据处理相关联的可视化数据处理信息、和/或对原始信息进行分析得到的可视化分析结果。
例如,可视化环境信息可以是对视频、烟雾浓度、温度、湿度、红外信息、特定气体含量、和/或枪声分贝等的可视化表示。可视化硬件信息可以是对基础设施110中的硬件的状态、性能、和/或使用情况等的可视化表示。可视化数据处理信息可以是对网络参数、数据处理状态、和/或数据传输状态等的可视化表示。可视化分析结果可以是对基础设施110的运行和维护的建议和/或预测等的可视化表示。由此,计算设备120可以将可视化信息呈现在虚拟现实设备110所显示的虚拟世界中。
此外,计算设备120还可以支持远程控制。计算设备120可以通过将可视化信息经由网络传输至虚拟现实设备130,来将可视化信息呈现在虚拟世界中。网络可以例如是任何合适的有线或无线网络,诸如光纤网络、5G网络等。此外,虚拟现实设备130可以通过网络从虚拟现实设备130接收用于改变可视化信息的请求,以改变可视化信息以及与被改变的可视化信息相对应的基础设施或传感器的参数或设置。例如,用户可以通过眼睛注视、手势、控制器等方式输入用于改变可视化信息的请求,以查看、操纵或控制可视化信息。
另外,计算设备120还可以支持数据分析。计算设备120可以使用数据分析模型来分析原始信息,以得到分析结果。例如,分析结果可以包括针对基础设施110的操作建议、维护建议和/或预测建议。
进一步地,计算设备120还可以支持多用户之间的协同工作。多个用户可以处于相同虚拟世界中,并且可以在基础设施的操作、维护、故障排除等方面相互协作。
以此方式,本方案可以提供各种优点。例如,可以提供更直观的信息呈现方式。可以传达实时信息,提高了系统效率和准确性。可以允许实时更新信息,使用户可以记录详细的注释或描述。通过利用各种数据分析模型,可以表明设计改变、使用场景、环境条件和其他各种变量的影响,而无需开发物理原型,减少了开发时间并改进了最终产品或过程的质量。通过支持远程控制和协同工作,可以使用户之间的协作更容易和高效。通过在虚拟世界中呈现可视化信息,可以提高操作、维护、故障排除等效率。由于实现了自动化和无缝控制,因此改善了用户体验。通过将传统上未连接的各种系统(从HVAC系统到硬件系统)整合在一起,可以获得新的认识和见解,从而能够优化工作流程并且提供工作效率。
图2示出了根据本公开的一些实施例的用于信息显示的方法200的流程图。例如,方法200可以由如图1所示的计算设备120来执行。应当理解的是,方法200还可以包括未示出的附加步骤和/或可以省略所示出的步骤,本公开的范围在此方面不受限制。
在210,计算设备120获取与现实世界中的用于信息处理的基础设施110相关联的原始信息。如上所述,原始信息可以从各种来源获取。例如,计算设备120可以从用于监测基础设施110的传感器140获取原始环境信息。计算设备120还可以从基础设施110获取与基础设施110中的硬件相关联的原始硬件信息。此外,计算设备120还可以从基础设施110和/或远程设备150获取与数据处理相关联的原始数据处理信息。进一步地,计算设备120还可以从各种附加数据库160获取附加信息。如上所述,这些附加数据库160可以例如是历史硬件信息数据库、历史环境信息数据库、知识数据库、风险模型数据库、专家数据库、故障排除过程数据库、和/或操作过程数据库。
在220,计算设备120对所述原始信息中的至少一部分进行可视化,以生成可视化信息。例如,可视化信息可以包括与基础设施110所处于的环境相关联的可视化环境信息、与基础设施110中的硬件相关联的可视化硬件信息、与基础设施110进行的数据处理相关联的可视化数据处理信息、和/或对原始信息进行分析得到的可视化分析结果。
为了生成可视化环境信息,可以通过环境信息融合模型将原始环境信息融合在一起,并且确定实时情况。然后,可以基于实时情况来决定要向用户提供的环境信息。例如,在温度超过预定阈值的情况下,通过环境信息融合模型可以确定实时情况是基础设施所处的环境过热,从而决定向用户提供的温度信息。在这种情况下,可以生成关于温度的可视化环境信息。
具体地,在一些实施例中,计算设备120获取环境信息融合模型。环境信息融合模型可以基于原始环境信息来确定要向用户提供的环境信息。计算设备120可以将原始环境信息应用于环境信息融合模型,以确定要向用户提供的环境信息。计算设备120可以对要向用户提供的环境信息进行可视化,以生成可视化环境信息。在一些实施例中,在将原始环境信息应用于环境信息融合模型之前,还可以对原始环境信息进行预处理和/或填补原始环境信息中缺失的环境信息,并且将经过上述处理的原始环境信息应用于环境信息融合模型。
此外,在一些实施例中,数据中心中通常存在多个基础设施,为了减少用户的认知负担,可以仅可视化用户关注的硬件信息。在这种情况下,为了生成可视化硬件信息,计算设备120可以确定用户对至少一个基础设施110中的每个基础设施的相应关注度,并且将关注度超过阈值关注度的基础设施确定为目标基础设施。计算设备120可以从原始硬件信息中选择与目标基础设施相关联的部分硬件信息,并且对所选择的部分硬件信息进行可视化,以生成可视化硬件信息。
关注度可以取决于用户在虚拟世界中与基础设施的距离。例如,距离越近,关注度越高。因此,用户刚好导航到的基础设施可以被认为是目标基础设施。此外,关注度可以取决于用户的眼睛注视。例如,被用户注视的基础设施的关注度较高,因此可以被认为是目标基础设施。另外,关注度还可以取决于用户通过手势或控制器进行的选择,用户选择的基础设施的关注度较高,因此可以被认为是目标基础设施。
另外,如上所述,远程设备150可以与基础设施110进行分布式数据处理,以形成数据处理管道。基础设施110和远程设备150之间可以通过网络交换数据。由此,可以生成与这样的数据处理管道相关联的可视化数据处理信息。例如,可视化数据处理信息可以是网络参数、数据处理状态、和/或数据传输状态等。
进一步地,对原始信息进行分析,可以在问题发生之前解决问题,防止基础设施停机,探索新的机会,以及针对未来进行规划。由此,为了生成可视化分析结果,计算设备120可以使用数据分析模型来分析原始信息,以得到分析结果。数据分析模型可以是能够对原始信息进行分析的任何合适的模型,例如机器学习模型、神经网络模型、人工智能模型等。
在一些实施例中,分析结果可以包括针对基础设施110的操作建议、维护建议和/或预测建议。例如,分析结果可以涉及日常运营数据摘要、关于调试和维护的建议、故障排除指南、提醒即将到来的维护计划或潜在问题、有关当前和未来运营的建议、潜在风险提醒、寻路、预测性维护建议、运营计划、资源分配和管理等。计算设备120可以对分析结果进行可视化,以生成可视化分析结果。
由此,在230,计算设备120将可视化信息呈现在虚拟现实设备130所显示的虚拟世界中。图3示出了根据本公开的一些实施例的虚拟世界及其中的可视化信息的示例的示意图300。如图3所示,虚拟世界中具有基础设施110的虚拟表示310。在虚拟表示310上,覆盖了可视化环境信息330、可视化硬件信息340、可视化数据处理信息350、和可视化分析结果360。使用虚拟现实设备130的用户可以在虚拟世界中导航以查看基础设施110的虚拟表示310,并且使用手势、眼睛注视、控制器等来获取、控制或改变所呈现的这些可视化信息及与可视化信息相对应的基础设施110或传感器140等的参数或设置。
进一步地,如上所述,本方案可以提供远程控制和协同工作的能力。在这种情况下,当基础设施110发生任何问题时,现场技术人员或远程技术人员都可以在其虚拟现实设备130中共享相关情况的视图。当每个技术人员都对相关情况具有共同了解时,可以更有效地解决问题。如果检测到问题,这些技术人员可以在虚拟世界中远程地进行查看、控制和协作,而没有必要到达现场。此外,技术人员可以提供有关故障排除或维护的建议,并且在虚拟世界中立即查看到结果。
为此,在一些实施例中,为了实现远程控制,计算设备120可以通过将可视化信息经由网络传输至虚拟现实设备130,来将可视化信息呈现在虚拟世界中。网络可以例如是任何合适的有线或无线网络,诸如光纤网络、5G网络等。
此外,为了实现协同工作,计算设备120可以从一个虚拟现实设备接收用于改变可视化信息的请求,并且基于该请求,改变可视化信息。进一步地,计算设备120可以将改变后的可视化信息呈现在发送请求的该虚拟现实设备和协同工作的另外的虚拟现实设备所显示的虚拟世界中。
以此方式,本方案可以提供更直观的信息呈现方式。可以传达实时信息,提高了系统效率和准确性。可以允许实时更新信息,使用户可以记录详细的注释或描述。通过利用各种数据分析模型,可以表明设计改变、使用场景、环境条件和其他各种变量的影响,而无需开发物理原型,减少了开发时间并改进了最终产品或过程的质量。通过支持远程控制和协同工作,可以使用户之间的协作更容易和高效。通过在虚拟世界中呈现可视化信息,可以提高操作、维护、故障排除等效率。由于实现了自动化和无缝控制,因此改善了用户体验。通过将传统上未连接的各种系统(从HVAC系统到硬件系统)整合在一起,可以获得新的认识和见解,从而能够优化工作流程并且提供工作效率。
此外,为了进一步帮助理解,在下文中,将描述两个用户场景。在一个用户场景中,基础设施的技术人员希望在办公室或家中检查基础设施的实时状态。通过使用虚拟现实设备,该技术人员可以查看包括基础设施的虚拟表示以及各种可视化信息的虚拟世界。通过查看这些可视化信息,该技术人员可以远程地进行例行检查。如果检测到任何警告或错误,该技术人员可以导航到有问题的硬件并且进行远程故障排除。通过远程监控和故障排除,可以节省现场支持所需的大量工作,并且在该技术人员休假时,也可以进行例行检查和排除故障。
此外,如果需要技术人员到达基础设施现场并且进行故障排除,则也可以首先远程地诊断问题,以便订购必要的设备和零件。同样,当要为客户调试新的基础设施时,也可以由技术人员远程地配置该基础设施。
在另一用户场景中,如果检测到任何警告或错误,则技术人员将与虚拟世界中的有问题的硬件连接并且尝试进行故障排除。然而,该技术人员对所发生的问题并不熟悉。经过多次尝试,该技术人员仍然无法解决该问题,并且不知道如何继续。此时,该技术人员可以向远程专家寻求帮助。远程专家可以使用其虚拟现实设备共享技术人员的虚拟世界,控制基础设施,并且进行故障排除。由此,技术人员和远程专家可以协同工作,直到问题解决为止。
图4示出了可以用来实施本公开内容的实施例的示例设备400的示意性框图。例如,如图1所示的计算设备120可以由设备400来实施。如图所示,设备400包括中央处理单元(CPU)410,其可以根据存储在只读存储器(ROM)420中的计算机程序指令或者从存储单元480加载到随机访问存储器(RAM)430中的计算机程序指令,来执行各种适当的动作和处理。在RAM 430中,还可存储设备400操作所需的各种程序和数据。CPU 410、ROM 420以及RAM430通过总线440彼此相连。输入/输出(I/O)接口450也连接至总线440。
设备400中的多个部件连接至I/O接口450,包括:输入单元460,例如键盘、鼠标等;输出单元470,例如各种类型的显示器、扬声器等;存储单元480,例如磁盘、光盘等;以及通信单元490,例如网卡、调制解调器、无线通信收发机等。通信单元490允许设备400通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
上文所描述的各个过程和处理,例如方法200,可由处理单元410执行。例如,在一些实施例中,方法200可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元480。在一些实施例中,计算机程序的部分或者全部可以经由ROM 420和/或通信单元490而被载入和/或安装到设备400上。当计算机程序被加载到RAM 430并由CPU 410执行时,可以执行上文描述的方法200的一个或多个动作。
本公开可以是方法、装置、系统和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于执行本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Java、Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理单元,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理单元执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (19)

1.一种用于信息显示的方法,包括:
获取与现实世界中的用于信息处理的至少一个基础设施相关联的原始信息;
对所述原始信息中的至少一部分进行可视化,以生成可视化信息,所述可视化信息包括与所述至少一个基础设施所处于的环境相关联的可视化环境信息、与所述至少一个基础设施中的硬件相关联的可视化硬件信息、与所述至少一个基础设施进行的数据处理相关联的可视化数据处理信息、以及对所述原始信息进行分析得到的可视化分析结果中的至少一项;以及
将所述可视化信息呈现在至少一个虚拟现实设备所显示的虚拟世界中,所述虚拟世界模拟所述现实世界并且包括所述至少一个基础设施的虚拟表示。
2.根据权利要求1所述的方法,其中获取所述原始信息包括:
从用于监测所述至少一个基础设施的传感器获取原始环境信息。
3.根据权利要求2所述的方法,其中生成所述可视化信息包括:
获取环境信息融合模型,所述环境信息融合模型被配置为基于所述原始环境信息来确定要向用户提供的环境信息;
将所述原始环境信息应用于所述环境信息融合模型,以确定所述要向用户提供的环境信息;以及
对所述要向用户提供的环境信息进行可视化,以生成所述可视化环境信息。
4.根据权利要求1所述的方法,其中获取所述原始信息包括:
从所述至少一个基础设施获取与所述硬件相关联的原始硬件信息。
5.根据权利要求4所述的方法,其中生成所述可视化信息包括:
确定用户对所述至少一个基础设施中的每个基础设施的相应关注度;
将所述至少一个基础设施中关注度超过阈值关注度的一个基础设施确定为目标基础设施;
从所述原始硬件信息中选择与所述目标基础设施相关联的部分硬件信息;以及
对所选择的所述部分硬件信息进行可视化,以生成所述可视化硬件信息。
6.根据权利要求1所述的方法,其中获取所述原始信息包括以下至少一项:
从所述至少一个基础设施获取与所述数据处理相关联的原始数据处理信息;以及
从与所述至少一个基础设施相关联的至少一个数据库获取附加信息,所述至少一个数据库包括以下至少一项:历史硬件信息数据库、历史环境信息数据库、知识数据库、风险模型数据库、专家数据库、故障排除过程数据库、操作过程数据库。
7.根据权利要求1所述的方法,其中生成所述可视化信息包括:
使用数据分析模型来分析所述原始信息,以得到分析结果,所述分析结果包括针对所述至少一个基础设施的操作建议、维护建议和预测建议中的至少一项;以及
对所述分析结果进行可视化,以生成所述可视化分析结果。
8.根据权利要求1所述的方法,其中将所述可视化信息呈现在所述虚拟世界中包括:
通过将所述可视化信息经由网络传输至所述至少一个虚拟现实设备,来将所述可视化信息呈现在所述虚拟世界中。
9.根据权利要求1所述的方法,其中所述至少一个虚拟现实设备包括第一虚拟现实设备和第二虚拟现实设备,并且所述方法还包括:
从所述第一虚拟现实设备接收用于改变所述可视化信息的请求;
基于所述请求,改变所述可视化信息;以及
将改变后的可视化信息呈现在所述第一虚拟现实设备和所述第二虚拟现实设备所显示的所述虚拟世界中。
10.一种电子设备,包括:
至少一个处理单元;
至少一个存储器,所述至少一个存储器被耦合到所述至少一个处理单元并且存储用于由所述至少一个处理单元执行的指令,所述指令当由所述至少一个处理单元执行时,使得所述设备执行动作,所述动作包括:
获取与现实世界中的用于信息处理的至少一个基础设施相关联的原始信息;
对所述原始信息中的至少一部分进行可视化,以生成可视化信息,所述可视化信息包括与所述至少一个基础设施所处于的环境相关联的可视化环境信息、与所述至少一个基础设施中的硬件相关联的可视化硬件信息、与所述至少一个基础设施进行的数据处理相关联的可视化数据处理信息、以及对所述原始信息进行分析得到的可视化分析结果中的至少一项;以及
将所述可视化信息呈现在至少一个虚拟现实设备所显示的虚拟世界中,所述虚拟世界模拟所述现实世界并且包括所述至少一个基础设施的虚拟表示。
11.根据权利要求10所述的设备,其中获取所述原始信息包括:
从用于监测所述至少一个基础设施的传感器获取原始环境信息。
12.根据权利要求11所述的设备,其中生成所述可视化信息包括:
获取环境信息融合模型,所述环境信息融合模型被配置为基于所述原始环境信息来确定要向用户提供的环境信息;
将所述原始环境信息应用于所述环境信息融合模型,以确定所述要向用户提供的环境信息;以及
对所述要向用户提供的环境信息进行可视化,以生成所述可视化环境信息。
13.根据权利要求10所述的设备,其中获取所述原始信息包括:
从所述至少一个基础设施获取与所述硬件相关联的原始硬件信息。
14.根据权利要求13所述的设备,其中生成所述可视化信息包括:
确定用户对所述至少一个基础设施中的每个基础设施的相应关注度;
将所述至少一个基础设施中关注度超过阈值关注度的一个基础设施确定为目标基础设施;
从所述原始硬件信息中选择与所述目标基础设施相关联的部分硬件信息;以及
对所选择的所述部分硬件信息进行可视化,以生成所述可视化硬件信息。
15.根据权利要求10所述的设备,其中获取所述原始信息包括以下至少一项:
从所述至少一个基础设施获取与所述数据处理相关联的原始数据处理信息;以及
从与所述至少一个基础设施相关联的至少一个数据库获取附加信息,所述至少一个数据库包括以下至少一项:历史硬件信息数据库、历史环境信息数据库、知识数据库、风险模型数据库、专家数据库、故障排除过程数据库、操作过程数据库。
16.根据权利要求10所述的设备,其中生成所述可视化信息包括:
使用数据分析模型来分析所述原始信息,以得到分析结果,所述分析结果包括针对所述至少一个基础设施的操作建议、维护建议和预测建议中的至少一项;以及
对所述分析结果进行可视化,以生成所述可视化分析结果。
17.根据权利要求10所述的设备,其中将所述可视化信息呈现在所述虚拟世界中包括:
通过将所述可视化信息经由网络传输至所述至少一个虚拟现实设备,来将所述可视化信息呈现在所述虚拟世界中。
18.根据权利要求10所述的设备,其中所述至少一个虚拟现实设备包括第一虚拟现实设备和第二虚拟现实设备,并且所述方法还包括:
从所述第一虚拟现实设备接收用于改变所述可视化信息的请求;
基于所述请求,改变所述可视化信息;以及
将改变后的可视化信息呈现在所述第一虚拟现实设备和所述第二虚拟现实设备所显示的所述虚拟世界中。
19.一种计算机程序产品,所述计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括机器可执行指令,所述机器可执行指令在被执行时使机器执行根据权利要求1至9任一项所述的方法的步骤。
CN202010621934.2A 2020-06-30 2020-06-30 用于信息显示的方法、电子设备和计算机程序产品 Pending CN113868102A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010621934.2A CN113868102A (zh) 2020-06-30 2020-06-30 用于信息显示的方法、电子设备和计算机程序产品
US16/934,258 US11087053B1 (en) 2020-06-30 2020-07-21 Method, electronic device, and computer program product for information display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010621934.2A CN113868102A (zh) 2020-06-30 2020-06-30 用于信息显示的方法、电子设备和计算机程序产品

Publications (1)

Publication Number Publication Date
CN113868102A true CN113868102A (zh) 2021-12-31

Family

ID=77179362

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010621934.2A Pending CN113868102A (zh) 2020-06-30 2020-06-30 用于信息显示的方法、电子设备和计算机程序产品

Country Status (2)

Country Link
US (1) US11087053B1 (zh)
CN (1) CN113868102A (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10942710B1 (en) 2019-09-24 2021-03-09 Rockwell Automation Technologies, Inc. Industrial automation domain-specific language programming paradigm
US11048483B2 (en) 2019-09-24 2021-06-29 Rockwell Automation Technologies, Inc. Industrial programming development with an extensible integrated development environment (IDE) platform
US11080176B2 (en) 2019-09-26 2021-08-03 Rockwell Automation Technologies, Inc. Testing framework for automation objects
US11733687B2 (en) 2019-09-26 2023-08-22 Rockwell Automation Technologies, Inc. Collaboration tools
US11392112B2 (en) 2019-09-26 2022-07-19 Rockwell Automation Technologies, Inc. Virtual design environment
US11042362B2 (en) 2019-09-26 2021-06-22 Rockwell Automation Technologies, Inc. Industrial programming development with a trained analytic model
US11308447B2 (en) 2020-04-02 2022-04-19 Rockwell Automation Technologies, Inc. Cloud-based collaborative industrial automation design environment
CN114323136A (zh) * 2021-12-28 2022-04-12 旭昇智能科技(常熟)有限公司 基于物联网的生产环境监测方法及系统

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012022551A (ja) * 2010-07-15 2012-02-02 Hisatomo Takeuchi 建物3dテクスチャモデル処理電子情報処理装置
CN102877443A (zh) * 2012-10-31 2013-01-16 南京国图信息产业股份有限公司 一种基于虚拟现实和物联网技术的水闸交互控制系统
CN104850693A (zh) * 2015-01-19 2015-08-19 安科智慧城市技术(中国)有限公司 一种监控设备布局方法和装置
CN106095651A (zh) * 2016-06-15 2016-11-09 浪潮(北京)电子信息产业有限公司 一种3d虚拟机房监控管理方法及系统
CN106657906A (zh) * 2016-12-13 2017-05-10 国家电网公司 具有自适应场景虚拟现实功能的信息设备监控系统
CN106776207A (zh) * 2016-12-02 2017-05-31 郑州云海信息技术有限公司 一种数据中心监控系统
CN107729065A (zh) * 2017-11-02 2018-02-23 港珠澳大桥管理局 一种三维监控的方法以及系统
CN109101616A (zh) * 2018-08-07 2018-12-28 北京东土科技股份有限公司 基于电子地图的监控视频轮巡方法、装置、设备及介质
CN109359751A (zh) * 2018-10-26 2019-02-19 上海达实联欣科技发展有限公司 智能建筑运维管理系统及其管理方法
CN109709936A (zh) * 2018-12-24 2019-05-03 广州供电局有限公司 设备运行状态监测方法、装置、计算机设备和存储介质
CN110069045A (zh) * 2019-04-11 2019-07-30 广州番禺职业技术学院 基于bim、vr及物联网的污水处理厂无人值守方法和智能管理平台
CN110502356A (zh) * 2018-05-17 2019-11-26 国际商业机器公司 用以监测计算基础设施设备中的计算硬件的系统
CN110543236A (zh) * 2019-07-31 2019-12-06 苏州浪潮智能科技有限公司 一种基于虚拟现实技术的机房监控系统及方法
CN110599603A (zh) * 2019-09-20 2019-12-20 上海大学 基于增强现实的机械设备可视化交互与设备状态监控系统及其方法

Family Cites Families (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5956665A (en) 1996-11-15 1999-09-21 Digital Equipment Corporation Automatic mapping, monitoring, and control of computer room components
US6384842B1 (en) 1999-05-13 2002-05-07 Lsi Logic Corporation User interface to provide a physical view of movable physical entities
US8116889B2 (en) 2002-06-27 2012-02-14 Openpeak Inc. Method, system, and computer program product for managing controlled residential or non-residential environments
US9818136B1 (en) 2003-02-05 2017-11-14 Steven M. Hoffberg System and method for determining contingent relevance
US7966246B2 (en) 2003-10-23 2011-06-21 Alphacet, Inc. User interface for correlation of analysis systems
US7322010B1 (en) 2004-02-06 2008-01-22 Symantec Operating Corporation Graphical user interface for mapping computer resources
US7971121B1 (en) 2004-06-18 2011-06-28 Verizon Laboratories Inc. Systems and methods for providing distributed packet loss concealment in packet switching communications networks
US7369061B1 (en) 2004-10-05 2008-05-06 Steven Sellers Vehicle locator device
US20060095662A1 (en) 2004-11-01 2006-05-04 Broadcom Corporation Method and computer program product for displaying and modifying hardware status
US8836580B2 (en) 2005-05-09 2014-09-16 Ehud Mendelson RF proximity tags providing indoor and outdoor navigation and method of use
US7496445B2 (en) 2005-04-27 2009-02-24 Proxemics, Llc Wayfinding
US20070050128A1 (en) 2005-08-31 2007-03-01 Garmin Ltd., A Cayman Islands Corporation Method and system for off-board navigation with a portable device
US7567844B2 (en) * 2006-03-17 2009-07-28 Honeywell International Inc. Building management system
US20070294032A1 (en) 2006-06-14 2007-12-20 Zumsteg Philip J Navigation using tracking system multi-function devices
US7447807B1 (en) 2006-06-30 2008-11-04 Siliconsystems, Inc. Systems and methods for storing data in segments of a storage subsystem
US8427489B2 (en) 2006-08-10 2013-04-23 Avocent Huntsville Corporation Rack interface pod with intelligent platform control
US7940778B2 (en) 2007-06-29 2011-05-10 Intel Corporation Cross-layer approach to virtualized overlay on ad hoc networks
US9652749B2 (en) 2008-02-05 2017-05-16 Madhavi Jayanthi Mobile device and server for task assignments and pickup requests
US9225610B2 (en) 2008-03-31 2015-12-29 Hitachi, Ltd. User interface providing information system topology presentation
US20100070169A1 (en) 2008-09-15 2010-03-18 Matthew Paulin Method of advertising using waypoints
JP2010170411A (ja) 2009-01-23 2010-08-05 Hitachi Ltd 計算機システム、ストレージプール管理方法
US8830267B2 (en) 2009-11-16 2014-09-09 Alliance For Sustainable Energy, Llc Augmented reality building operations tool
US9883332B2 (en) 2010-03-01 2018-01-30 Innovative Timing Systems, Llc System and method of an event timing system having integrated geodetic timing points
US9361729B2 (en) 2010-06-17 2016-06-07 Microsoft Technology Licensing, Llc Techniques to present location information for social networks using augmented reality
KR101763595B1 (ko) 2010-11-16 2017-08-01 엘지전자 주식회사 모니터링 서비스를 위한 데이터를 처리하는 네트워크 tv의 제어 방법 및 상기 네트워크 tv
US8781764B2 (en) 2011-03-16 2014-07-15 Deere & Company System for detecting a short circuit associated with a direct current bus
US8706963B2 (en) 2011-06-02 2014-04-22 Hitachi, Ltd. Storage managing system, computer system, and storage managing method
US9557807B2 (en) 2011-07-26 2017-01-31 Rackspace Us, Inc. Using augmented reality to create an interface for datacenter and systems management
US9485623B2 (en) 2011-08-18 2016-11-01 Rivada Research, Llc Method and system for providing enhanced location based trilateration
US9235819B2 (en) 2011-11-04 2016-01-12 Canon Kabushiki Kaisha Printing system, image forming apparatus, and method
CN104012033B (zh) 2011-12-29 2017-06-09 英特尔公司 计算资源的安全地理定位
US8930134B2 (en) 2012-06-12 2015-01-06 Sears Brands, Llc Systems and methods for high-precision indoor positioning, navigation and shopping behavior profiling
US20140025414A1 (en) 2012-07-20 2014-01-23 Bret Dwayne Worden Health assessment method and system for assets
EP2725818A1 (en) 2012-10-23 2014-04-30 GN Store Nord A/S A hearing device with a distance measurement unit
US20140195454A1 (en) 2012-12-04 2014-07-10 Shalewater Solutions, Inc. System, method, and apparatus for managing fluid transportation
US9367199B2 (en) 2012-12-13 2016-06-14 Sap Se Dynamical and smart positioning of help overlay graphics in a formation of user interface elements
US8972168B2 (en) 2012-12-20 2015-03-03 Wal-Mart Stores, Inc. Tracking a mobile device
US9959190B2 (en) 2013-03-12 2018-05-01 International Business Machines Corporation On-site visualization of component status
US9940663B2 (en) 2013-08-15 2018-04-10 Frank Daly Ward Indoor location mapping and wayfinding system
US9301170B2 (en) 2013-11-06 2016-03-29 Ixia Systems, methods, and computer readable media for utilizing a mobile robotic platform to conduct functionality testing in a wireless communications network
US9609539B2 (en) 2013-11-08 2017-03-28 Qualcomm Incorporated Techniques and methods for controlling crowdsourcing from a mobile device
EP2924538B1 (en) 2014-03-25 2020-06-17 Fujitsu Technology Solutions Intellectual Property GmbH Computer system and method for its operation
US10169303B2 (en) 2014-05-27 2019-01-01 Hitachi, Ltd. Management system for managing information system
US9973514B2 (en) 2014-10-27 2018-05-15 Hong Kong Baptist University Method and apparatus for assuring location data integrity with minimum location disclosure
US20160196584A1 (en) 2015-01-06 2016-07-07 Facebook, Inc. Techniques for context sensitive overlays
MX2017014648A (es) 2015-05-15 2018-04-11 Airfusion Inc Aparato portatil y metodo para apoyo de decision para fusion y analisis de datos de sensores multiples automatizados en tiempo real.
US9958277B1 (en) 2015-12-18 2018-05-01 EMC IP Holding Company LLC Waypoint-assisted navigation of an enterprise facility
US10395426B2 (en) 2015-12-23 2019-08-27 EMC IP Holding Company LLC Augmented reality system and method
US10222982B2 (en) 2016-02-10 2019-03-05 Ricoh Company, Ltd. Lifetime management device and lifetime management method
US20170277559A1 (en) * 2016-03-25 2017-09-28 Daqri, Llc Classifying work processes
US9960954B2 (en) 2016-03-29 2018-05-01 Wipro Limited Methods and systems to improve correlation between overlay and underlay networks in data centers
US10318163B2 (en) 2016-03-30 2019-06-11 EMC IP Holding Company LLC Balancing SSD wear in data storage systems
US10324633B2 (en) 2016-03-31 2019-06-18 EMC IP Holding Company LLC Managing SSD write quotas in data storage systems
US10366536B2 (en) * 2016-06-28 2019-07-30 Microsoft Technology Licensing, Llc Infinite far-field depth perception for near-field objects in virtual environments
US20180035606A1 (en) 2016-08-05 2018-02-08 Romello Burdoucci Smart Interactive and Autonomous Robotic Property Maintenance Apparatus, System, and Method
US10832031B2 (en) * 2016-08-15 2020-11-10 Apple Inc. Command processing using multimodal signal analysis
US10049499B2 (en) * 2016-08-29 2018-08-14 Toyota Jidosha Kabushiki Kaisha Method of ground adjustment for in-vehicle augmented reality systems
US10388075B2 (en) * 2016-11-08 2019-08-20 Rockwell Automation Technologies, Inc. Virtual reality and augmented reality for industrial automation
US10529088B2 (en) 2016-12-02 2020-01-07 Gabriel Fine Automatically determining orientation and position of medically invasive devices via image processing
US11132840B2 (en) * 2017-01-16 2021-09-28 Samsung Electronics Co., Ltd Method and device for obtaining real time status and controlling of transmitting devices
US20180349367A1 (en) * 2017-06-06 2018-12-06 Tsunami VR, Inc. Systems and methods for associating virtual objects with electronic documents, and searching for a virtual object or an electronic document based on the association
US10410424B1 (en) 2017-07-31 2019-09-10 EMC IP Holding Company LLC System health awareness using augmented reality
US10409523B1 (en) 2017-07-31 2019-09-10 EMC IP Holding Company LLC Storage device monitoring using augmented reality
WO2020077500A1 (en) * 2018-10-15 2020-04-23 Midea Group Co., Ltd. System and method for providing real-time product interaction assistance
US10970547B2 (en) * 2018-12-07 2021-04-06 Microsoft Technology Licensing, Llc Intelligent agents for managing data associated with three-dimensional objects
US10956632B2 (en) * 2018-12-27 2021-03-23 Utopus Insights, Inc. Scalable system and engine for forecasting wind turbine failure
US10873724B1 (en) * 2019-01-08 2020-12-22 State Farm Mutual Automobile Insurance Company Virtual environment generation for collaborative building assessment
US11586942B2 (en) * 2019-06-19 2023-02-21 Accenture Global Solutions Limited Granular binarization for extended reality

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012022551A (ja) * 2010-07-15 2012-02-02 Hisatomo Takeuchi 建物3dテクスチャモデル処理電子情報処理装置
CN102877443A (zh) * 2012-10-31 2013-01-16 南京国图信息产业股份有限公司 一种基于虚拟现实和物联网技术的水闸交互控制系统
CN104850693A (zh) * 2015-01-19 2015-08-19 安科智慧城市技术(中国)有限公司 一种监控设备布局方法和装置
CN106095651A (zh) * 2016-06-15 2016-11-09 浪潮(北京)电子信息产业有限公司 一种3d虚拟机房监控管理方法及系统
CN106776207A (zh) * 2016-12-02 2017-05-31 郑州云海信息技术有限公司 一种数据中心监控系统
CN106657906A (zh) * 2016-12-13 2017-05-10 国家电网公司 具有自适应场景虚拟现实功能的信息设备监控系统
CN107729065A (zh) * 2017-11-02 2018-02-23 港珠澳大桥管理局 一种三维监控的方法以及系统
CN110502356A (zh) * 2018-05-17 2019-11-26 国际商业机器公司 用以监测计算基础设施设备中的计算硬件的系统
CN109101616A (zh) * 2018-08-07 2018-12-28 北京东土科技股份有限公司 基于电子地图的监控视频轮巡方法、装置、设备及介质
CN109359751A (zh) * 2018-10-26 2019-02-19 上海达实联欣科技发展有限公司 智能建筑运维管理系统及其管理方法
CN109709936A (zh) * 2018-12-24 2019-05-03 广州供电局有限公司 设备运行状态监测方法、装置、计算机设备和存储介质
CN110069045A (zh) * 2019-04-11 2019-07-30 广州番禺职业技术学院 基于bim、vr及物联网的污水处理厂无人值守方法和智能管理平台
CN110543236A (zh) * 2019-07-31 2019-12-06 苏州浪潮智能科技有限公司 一种基于虚拟现实技术的机房监控系统及方法
CN110599603A (zh) * 2019-09-20 2019-12-20 上海大学 基于增强现实的机械设备可视化交互与设备状态监控系统及其方法

Also Published As

Publication number Publication date
US11087053B1 (en) 2021-08-10

Similar Documents

Publication Publication Date Title
US11087053B1 (en) Method, electronic device, and computer program product for information display
US11948052B2 (en) Method, electronic device, and computer program product for monitoring field device
CN112558974A (zh) 用于协作开发工业应用的系统、方法和计算机介质
CN106547678B (zh) 用于白盒测试的方法和装置
US10063427B1 (en) Visualizing and interacting with resources of an infrastructure provisioned in a network
US8473852B2 (en) Virtual world building operations center
CN112558555B (zh) 维护和调试
US10938826B2 (en) Intelligent device security
US20200126445A1 (en) Intelligent augmented reality for technical support engineers
US11469969B2 (en) Intelligent lifecycle management of analytic functions for an IoT intelligent edge with a hypergraph-based approach
CN110808855B (zh) 互联网技术架构及管理方法、装置、电子设备和介质
KR102051543B1 (ko) Vr 훈련 시스템 및 방법
KR102051568B1 (ko) Vr 훈련 시스템 및 방법
CN109471805A (zh) 资源测试方法及装置、存储介质、电子设备
US20140379898A1 (en) Visual diagramming tool for hardware configurations
US20170192957A1 (en) Methods and analytics systems having an ontology-guided graphical user interface for analytics models
KR102051558B1 (ko) Vr 훈련 시스템 및 방법
US10459826B2 (en) Run time workload threshold alerts for customer profiling visualization
EP3719666A1 (en) Verification, modification, and/or validation of an infrastructure design document via improved collaboration between on-site devices and remote devices
JP6677460B2 (ja) 複雑系の関心要素の可視化及び診断解析
CN107798675A (zh) 显示图像中拖影的检测方法及装置
US20150302535A1 (en) Method and system for visualizing competency based learning data in decision making dashboards
EP2592507B1 (en) Method and apparatus for the display of multiple errors on a human-machine interface
CN112950303A (zh) 订单处理方法、装置、电子设备及存储介质
US20220333808A1 (en) Systems and methods for analyzing heating, ventilation, and air conditioning systems including remote monitoring of technicians

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination