CN111066302B - 洗手间装置增强现实安装系统 - Google Patents

洗手间装置增强现实安装系统 Download PDF

Info

Publication number
CN111066302B
CN111066302B CN201780094264.XA CN201780094264A CN111066302B CN 111066302 B CN111066302 B CN 111066302B CN 201780094264 A CN201780094264 A CN 201780094264A CN 111066302 B CN111066302 B CN 111066302B
Authority
CN
China
Prior art keywords
dispenser
image
network
joining
unique identifier
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780094264.XA
Other languages
English (en)
Other versions
CN111066302A (zh
Inventor
F·J·小威廉姆斯
B·R·加齐
A·L·威尔逊
S·贝克尔
A·J·汤姆森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kimberly Clark Worldwide Inc
Original Assignee
Kimberly Clark Worldwide Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kimberly Clark Worldwide Inc filed Critical Kimberly Clark Worldwide Inc
Publication of CN111066302A publication Critical patent/CN111066302A/zh
Application granted granted Critical
Publication of CN111066302B publication Critical patent/CN111066302B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/30—Managing network names, e.g. use of aliases or nicknames
    • H04L61/3015—Name registration, generation or assignment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/75—Indicating network or usage conditions on the user display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2101/00—Indexing scheme associated with group H04L61/00
    • H04L2101/30—Types of network names
    • H04L2101/365—Application layer names, e.g. buddy names, unstructured names chosen by a user or home appliance name
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2101/00—Indexing scheme associated with group H04L61/00
    • H04L2101/60—Types of network addresses
    • H04L2101/69—Types of network addresses using geographic information, e.g. room number

Abstract

一种通过使用任何增强现实安装装置将装置加入到网络的系统和方法。本文所述的安装系统包括安装装置，例如智能电话，其包括摄像头以捕获设施中的(一个或多个)所述装置的图像，所述设施例如是为最终用户使用而安装或放置了所述装置的区域。然后，通过使用图像分析技术和所述安装装置上的图形用户界面(GUI)，例如，所述图像中的分配器被单独识别并加入到所述网络。

Description

洗手间装置增强现实安装系统
技术领域
本公开整体涉及在网络例如无线网络上加入(或安装)洗手间装置。
背景技术
无线网络在许多环境中很普遍。在网络上加入(或安装或调试)装置可以采用多种形式。此类过程可导致加入网络的装置被分配或接收名称或参考标识符，例如，该名称或参考标识符可用于唯一地或准唯一地标识网络中的该装置，例如用于发送或接收网络通信的目的。
发明内容
一般来讲，本说明书的主题涉及一种用于将装置例如洗手间装置(诸如手巾分配器)加入到网络的系统。本说明书中描述的主题的一个方面可以在包括安装装置的系统中实现，安装装置包括屏幕和成像装置，其中成像装置被配置为捕获具有至少一个支持网络的洗手间分配器的环境的表示，并且屏幕被配置为可视地呈现该表示以供用户查看；以及应用程序，其被配置为分析该表示以将该至少一个分配器识别为分配器装置，并且呈现图形用户界面作为该表示上的覆盖，通过该图形用户界面，用户可以通过与该图形用户界面交互来选择该至少一个分配器；确定该至少一个分配器的唯一标识符；并且生成不同于唯一标识符的该至少一个分配器的网络名称。这个方面的其他实施方案包括相对应的方法、设备和计算机程序产品。
本说明书中描述的主题的另一方面可以通过一种方法来实现，该方法包括通过使用安装装置来捕获具有支持网络的洗手间分配器的洗手间环境的图像；以及在装置上显示图像；在显示图像的同时提供图形用户界面；接受用户对图形用户界面的输入以选择至少一个洗手间分配器；确定分配器的唯一标识符；基于分配器在洗手间环境中的相对位置，来生成分配器的网络名称。这个方面的其他实施方案包括相对应的系统、设备和计算机程序产品。
本说明书中所描述的主题的特定实施方案可被实施以便实现下列一个或多个优点。装置安装系统有助于将装置加入到网络，而无需单独或手动标识装置。例如，与手动输入每个装置的装置ID相反，系统可以通过增强现实界面在视觉上识别每个装置并将其加入网络，包括确定设施(例如洗手间)中每个装置的位置。这样可以减少将装置加入到网络时的人为错误，还可以加快过程，因为可以避免或减少费时的手动输入详细装置信息。
在一些实施方式中，该位置信息可以被嵌入在装置名称中，从而允许用户通过仅检查其名称来立即知道装置的位置。例如，基于装置名称，读者例如设施服务人员可以在房间或区域中定位和标识特定装置，而不必(先建立然后)查阅表格或列表或记住装置名称和对应的位置。在洗手间手巾分配器的上下文中，当分配器需要重新填充时，包括分配器的网络名称的消息或警报可以被发送至服务人员。通过使用此类装置命名约定，消息或警报可以简单地包括装置名称，并且仅凭该信息，服务员就可以轻松地定位需要重新填充的分配器，而不必在消息中包括附加的位置信息(这将需要更大的消息文件和/或附加的带宽和/或附加的系统资源)，或者以其他方式需要服务员查阅列表或表格以确定位置或记住装置位置。因此，例如由于该消息需要较短的文件或较少的传输带宽，或者因为不需要生成将装置名称链接到位置的附加表格或列表，节省了系统资源。
附图和下文的描述中阐述了本说明书中所描述主题的一个或多个实现方式的细节。主题的其他特征、方面和优点将从描述、附图以及权利要求书变得显而易见。
附图说明
图1为其中可以实现洗手间装置安装系统的示例性环境的框图。
图2A是洗手间环境的表示。
图2B是捕获图2A的环境的图像的示例安装装置的表示。
图2C是安装装置上的图形用户界面的表示，其覆盖洗手间环境的表示。
图2D是示例模板装置图像和装置的对应图像的表示。
图3是为加入网络的装置生成网络名称的示例方法。
在本说明书和附图中重复使用附图标记旨在表示本公开的相同或类似的特征或元件。
具体实施方式
将装置连接到网络通常是手动、非常耗时且容易出错的过程。本文所述的安装系统包括安装装置，例如智能电话，其包括摄像头以捕获设施中的(一个或多个)装置的图像，设施例如是为最终用户使用而安装或放置了装置的区域。然后，通过使用图像分析技术和安装装置上的图形用户界面(GUI)，图像中的装置(例如分配器)被单独识别并加入到网络。例如，安装装置的用户可以与GUI交互，以使安装装置例如通过光学字符识别过程“读取”装置上的序列号或其他识别标记，例如条形码或QR码。有了这样的装置标识符，安装装置可以例如通过由安装装置或管理网络的网络服务器发起的握手过程来促进将装置加入网络的过程。
此外，通过图像分析过程，安装装置可以确定装置在设施中的相对位置，例如，皂液器X最靠近设施的入口通道，而手巾分配器Y紧靠皂液器X的左侧。此外，通过利用安装装置可用或可访问的其他定位功能(例如GPS、蜂窝或/和Wi-Fi信号强度级别)和/或其他定位服务或技术(例如三角测量)，安装装置可以向加入网络的每个装置分配相对和/或绝对位置信息。基于此位置信息，安装系统可以为装置生成一个名称，以使用户可以轻松识别装置的位置。此类信息例如可以帮助用户通过对装置进行快速视觉评估来轻松地标识一组装置中的某个装置。参考图1更详细地描述该系统，该图是其中可以实现洗手间装置安装系统的示例环境的框图。
图1中的环境100包括设施107，例如洗手间，一个或多个端点装置104，装置安装系统123，其可以包括数据处理设备102和安装装置105中的一个或两个。系统123将装置104加入到网络，如下面更详细描述的。更一般地，环境100可以包括一个或多个设施107，例如半私人或公共洗手间107、休息室107或装置104(例如卫生分配器)所位于的另一限定的空间或区域。在一些实施方式中，设施107为具有至少一个门或入口/出口点的封闭或限定的房间或空间。在一些实施方式中，端点装置104是安装系统123已经或将为该装置104生成名称的任何装置。在一些实施方式中，装置104为支持网络的装置，使得该装置具有接收器、发射器或收发器，以通过有线或无线连接，通过网络，和/或与安装系统123进行通信。端点装置104可以包括例如手巾分配器104a、卫生纸分配器104b、洗手皂(或其他清洁剂)分配器104c、手部或面部护理剂分配器(未示出)、表面清洁剂、包括用于马桶或小便池和/或类似物、门开/关柜台等的消毒或杀菌分配器(未示出)，这些装置中的每一个都是不同类型的端点装置104。如本文所用，加入(或安装在)网络上意指将装置104与该网络或安装系统123相关联，使得安装系统123可以为该装置104生成(并且可选地分配)名称，例如以在网络上标识该装置，用于例如向该装置104发送和从该装置接收消息。
如上所述，安装系统123可以跨无线或有线信道或其某种组合与装置104进行通信。例如，安装系统123包括收发器和微处理器以促进这种通信。在一些实施方式中，安装系统123连接至WAN或LAN，以与端点装置104和诸如移动装置之类其他装置(例如，移动安装装置105和/或服务器)进行通信。
安装系统123针对环境100中的每个设施107，诸如针对多层建筑物的楼层、建筑物或建筑物的集合，基于协议，为端点装置104生成将端点装置104与相应设施107相关联的配置数据。例如，配置数据包括每个端点装置104的名称和端点装置104与该装置104所定位的设施107或建筑物之间的关联。装置104的名称唯一地或准唯一地标识环境100中的装置104。在一些实施方式中，安装系统123基于装置沿着每个设施107中定义的路径(例如，路径115)的相对位置来命名装置104，如下文更详细地描述。
图2A是洗手间环境的表示。更具体地，图2A是在参考点119附近取得的图1的洗手间环境的表示，并且从左至右示出了手巾分配器104ai、水池151a、洗手皂分配器104ci、洗手皂分配器104cii、水池151b和手巾分配器104aii。图2B是捕获图2A的环境的图像的示例安装装置105的表示。
安装装置105包括屏幕220和成像装置，例如摄像头(未示出)。安装装置105可以是例如智能电话、平板电脑、膝上型计算机等。如上所述，图2B所示的安装装置105已经捕获了图2A的洗手间环境的表示。例如，智能电话105的摄像头用于拍摄图2A中的装置104和设施107的固定装置(例如水池)的照片(或捕获视频)。更一般地，成像装置105捕获具有至少一个支持网络的洗手间分配器104的环境100(例如，设施107)的表示/图像，并且屏幕220可视地呈现该表示以供用户观看。例如，用户可以使用安装装置105来捕获设施107的多个表示(例如，矩形洗手间107的所有四个墙壁)，以示出设施107中存在的所有装置104。这些表示可以重叠，例如示出一个或多个相同的装置104，或者它们可以各自示出未被另一表示捕获的不同装置104，或者图像可以是扫视以捕获设施107中的所有装置104的连续的视频。
安装系统123还包括应用程序125。应用程序125分析在图像中捕获的表示，以识别表示中描绘的分配器装置104。该应用程序还使安装装置105在屏幕220上呈现图形用户界面270，作为表示或图像上的覆盖，用户可以通过与图形用户界面270进行交互来选择分配器装置104。应用程序125还确定每个分配器装置104的唯一标识符，例如序列号，并生成不同于对应唯一标识符的每个分配器装置104的网络名称。例如，唯一标识符可以是装置序列号，网络名称可以是包含装置位置的字母数字字符串，如下文更详细描述。
图2C是安装装置105上的图形用户界面270的表示，其覆盖洗手间环境100的表示。参考图2C，并且如上所述，每个装置104都具有唯一标识符250，例如，装置104ai具有唯一标识符150ai，而装置104cii具有唯一标识符250cii。这些唯一标识符可以是例如装置104的序列号、MAC地址或管理员分配给装置104的伪造的或虚假的数字、字母或字母数字。这些标识符可以例如以字母数字形式或诸如条形码或QR码之类的代码形式体现，例如它们在装置104上可见和/或可通过无线通信协议/过程访问。
在一些实施方式中，装置104包括无线通信装置(例如，收发器)，其允许装置104例如通过蜂窝、蓝牙和/或NFC协议和过程与安装装置105进行无线通信。这样，安装装置105可以无线询问装置104以查询其唯一标识符。例如，安装装置105使用NFC来查询最接近它的装置104，例如，在这种通信范围内的唯一分配器。响应于该查询，装置104可以发送其标识符并且(可选地)生成可视队列(例如，闪烁的LED或分配产品)以确认哪个装置104正在与安装装置105进行通信。在一些实施方式中，装置104可以具有致动器(例如，按钮等)，该致动器在被用户致动(例如，按下)时使装置104无线地广播其唯一标识符，该唯一标识符可以由安装装置105检测到。
在一些实施方式中，应用程序125还包括选择所识别的装置254的选项，例如，该选项允许用户选择表示中所识别的装置104之一，选择装置104要加入的网络256，以及将装置加入选项258，以使选定的装置104加入选定的网络。参照图3更详细地描述应用程序125的操作，该图是生成加入网络的装置104的网络名称的示例方法300。
通过使用安装装置，捕获具有支持网络的洗手间分配器的洗手间环境的图像(302)。例如，安装装置105可以使用其成像装置来捕获具有一个或多个装置104的设施107的图像，例如图片或表示。在一些实施方式中，用户可以使用安装装置105来捕获多个图像，例如，每个装置104一个图像或设施107的每个墙壁(例如具有多个装置104的墙壁)一个图像，或者可以捕获整个设施107的全景图像或扫视视频剪辑。所捕获的图像可以包括装置104的唯一标识符，只要这些标识符在装置104上可视地显示，例如印刷或压印的序列号或印刷在应用于装置104的标签上的条形码或QR码。
图像显示在安装装置上(304)。例如，如图2B所示，图像显示在安装装置105的屏幕220上。在一些实施方式中，图像可以存储在安装装置105上，以供以后访问和使用。例如，用户可以捕获多个设施107的多个图像，并且随后访问那些图像，以将在那些图像中捕获的装置104加入网络。图像可以包括一个或多个参考点。例如，设施107的每个图像或图像集可包括参考点，例如进入设施107的入口通道103。如下所述，位置信息可用于将设施107的多个图像“缝合”为整个设施107的全景图像，示出所有装置104及其相对于彼此的相对位置和/或参考点，例如入口通道103。在一些实施方式中，用户捕获设施107的图像，以便每个图像的某些部分与另一个图像重叠，以限定单个图像在缝合在一起的全景图像中的位置。例如，用户使用安装装置105以拍摄有装置A、B和C以及入口通道的设施107的第一图像。第二图像将捕获装置C和D，最后一个图像将捕获装置D、E和F以及入口通道。如应用程序125所指示的，安装装置105(或数据处理设备102)可以基于在重叠图像中捕获的装置104的共性(和/或其他特征)来将图像拼接在一起。图像可以是在固定的时间点捕获环境100(或其一部分)的静态表示(例如，摄像机图像)，也可以是实时的，环境的实时的连续的捕获(例如，视频馈送)，或该实时图像可以被记录为视频以便稍后回放，并且可以对其执行过程300。
在一些实施方式中，安装装置105例如在应用程序125的指导下，用与关于图像被捕获/拍摄的位置的位置信息来标记图像。例如，安装装置105可以使用GPS、具有蜂窝辅助的GPS、无线信号三角测量、来自已知通信点的接近度/飞行时间分析、海拔数据、指南针、用户输入等，以确定或生成位置信息。如下所述，此信息可用于确定装置104的绝对位置。在这种情况下，绝对位置是指装置104相对于已知的固定网格或坐标系(例如，纬度和经度，笛卡尔坐标系)的位置。
与图像的显示同时提供图形用户界面(306)。例如，安装装置105可访问的应用程序125能够提供图形用户界面270，该图形用户界面与图像同时显示在屏幕220上，例如，如图2C所示。应用程序125是例如在诸如智能电话、平板电脑或膝上型计算机(例如，安装装置105)之类的移动计算系统上运行的计算机程序。此类计算机程序(也被称为程序、软件、软件应用程序、脚本或代码)可以以任何形式的编程语言编写，包括汇编或解释型语言，或声明性或过程语言，并且可以以任何形式部署，包括作为独立程序或作为适用于计算环境中的模块、部件、子例程或其他单元来部署。应用程序125可以安装在安装装置105、数据处理设备102上，或者在两者上都安装，或者作为软件即服务应用程序，从安装装置105和数据处理设备102之一或两者运行(例如，在云计算环境中)。在一些实施方式中，图形用户界面270与安装装置105的触摸屏220结合使用，例如，图形用户界面270可以感测和解释触摸屏上的触摸。
应用程序125还可以允许识别图像中的特征或项目。例如，应用程序125可以通过各种图像分析技术，例如但不限于，斑点检测、模板匹配和SURF特征提取，来识别图像中存在的装置104。在一些实施方式中，应用程序125可以访问一个或多个装置104的多个已知图像(例如，从各种角度和在不同的距离)，这些图像被称为模板装置图像127。应用程序125将模板装置图像127与图像的各部分进行比较(例如，基于像素或图像特征的相似性)，以检测可能的匹配，例如，大于90％的比较像素或特征在相应的图像部分和模板装置图像127之间匹配。
模板装置图像127可以与描述或表征相应模板装置图像127所对应的装置104的元数据或其他信息相关联。应用程序125可以访问这种描述性数据或信息。这样的数据或信息可以描述装置的类型，例如，手巾分配器、皂液分配器、卫生纸分配器、装置104的制造商、装置104的品牌和/或型号等。例如，如图2D所示，其是示例模板装置图像127和装置104的对应图像的表示，模板装置图像290对应于手巾装置104ai。该装置104的描述性数据292描述它是手巾分配器并且是制造商X的型号Y。
接受对图形用户界面的用户输入以选择至少一个洗手间分配器(308)。例如，通过上述装置识别过程，应用程序125已经识别出图像中表示的一个或多个装置104。然后，用户可以与安装装置105上的图形用户界面270进行交互，并选择屏幕220上的图像中表示的一个或多个已识别的装置104。例如，屏幕220可以是触摸屏，并且用户可以通过触摸(一次或在某些情况下多次)显示装置104的图像的屏幕区域来选择装置104。在一些实施方式中，应用程序125响应于安装装置105捕获图像而自动识别图像中的装置104。在其他实施方式中，通过用户选择“选择装置”指令254来启动识别过程。在任何一种情况下，在一些实施方式中，由应用程序125识别的装置104将在屏幕220上被分开，例如通过颜色、文本、用圆圈或正方形突出显示或包围，以指示它们是可选项目。
确定分配器的唯一标识符(310)。如上所述，装置104的唯一标识符可以是管理员分配给装置104的序列号、MAC地址或伪造的数字、字母或字母数字。在一些实施方式中，这些唯一标识符可以例如以字母数字形式或诸如条形码或QR码之类的代码形式来体现。例如，参考图2C，装置104ai和104cii的唯一标识符分别是250ai和250cii。
在唯一标识符在装置104上可见并且在图像中被捕获的一些实施方式中，应用程序125可以例如通过光学字符识别过程或者通过特征识别和解码过程(如将用于条形码或QR码的那样)，从捕获的图像读取装置104的唯一标识符。
用户可以通过与例如按钮256之类的项目的交互来选择装置104可以加入到的可用网络。可用网络可以由应用程序125通过识别来自可用网络的广播的过程来确定，或者由管理员预先设置。在一些实施方式中，仅存在装置104可以加入的一个网络，因此项目256可能不可用。
基于分配器在洗手间环境中的相对位置来生成分配器的网络名称(312)。装置104(例如卫生分配器)的网络名称传达相对于其在设施107中的位置的位置。一旦选择了要加入给定网络的装置104，用户就可以通过与图形用户界面270呈现的“将装置加入”项258进行交互来将该装置104加入。作为响应，应用程序125“读取”装置104的唯一标识符，并且在一些实施方式中，访问关于装置104的相对位置信息。如上所述，关于装置104的相对位置信息可以参考设施107中诸如门或入口通道(例如，入口通道103)之类的参考点并根据第一协议来确定，如下所述。
第一协议基于(i)装置104的序列(根据装置104的空间方向(在其相应的设施107中)和(ii)定义序列115的起点的参考，来定义用于生成装置104的命名信息的一个或多个规则。应用程序125可以访问规则。每个装置104的相对位置是相对于序列115中其特定位置/顺序的。例如，序列115中的第一装置104的序列序号为1，序列115中的第三装置的序列序号为3。通常，对于任何给定的设施107，每个装置104都具有空间取向，该空间取向限定其相对于(相同设施中)至少另一个装置104的位置和/或设施107中的另一个参考点(例如，进入或离开设施107的门或入口通道103)的位置。例如，相对于图1中的设施107，装置104bi位于门103和装置104bii之间。或者，相对于设施107中的中心参考点119，装置104bi为从门103(例如，起点)沿顺时针方向(例如，沿路径115)的第一装置。同样地，装置104bii为从门103沿顺时针方向的第三装置，并且装置104cii为从门103沿顺时针方向的第六装置。
相对于从门103沿逆时针方向，装置104aii为第一装置，并且装置104cii为第二装置。还可以设想其他空间取向方案。例如，递增可以基于设施107中的装置104的类型，使得装置类型的每个共同的集合被编号为1至X，例如，卫生纸分配器1至X、手巾分配器1至X、洗手皂分配器1至X。在一些实施方式中，楼层或建筑物中的至少一个设施107包括至少两种不同类型的端点装置104。
序列115基于装置104的空间取向(例如，围绕设施107沿顺时针或逆时针方向)限定处理(例如，命名)装置104的顺序。起点用于标识序列115中的第一装置104。例如，起点可以指定序列115中的第一装置为沿顺时针方向(或逆时针方向)最靠近门103(或设施107中的其他参考点)的装置104。
装置104的空间关系或位置可以由应用程序125基于装置104在捕获图像中的位置来确定。例如，并且如上所述，通过图像分析技术，应用程序125可以确定起点(以编程方式设置或由安装装置105的用户每个设施地设置)，并通过比较图像中每个装置104相对于其他装置的位置(和/或第一排序装置104的起点)，对序列115中的装置104进行排序。
在一些实施方式中，应用程序125可以使用其位置和方向来确定或补充装置104的相对位置信息，包括绝对位置信息。例如，基于安装工具105的功能，应用程序125可以使用GPS、无线信号强度级别、三角形、指南针数据、加速度计、气压计、高度计(仅举几例)中的一个或组合(取决于安装装置105中有什么可用)，来确定安装装置105的位置。应用程序125可以使用覆盖在地图信息上的该位置信息来确定安装装置105所位于的地址、城市、州、国家等。如果位于多层建筑物中并且可以访问建筑物的布局，则应用程序可以确定安装工具105所在的房间(例如，位于三楼西北角的男士卫生间)。应用程序125还可以使用该信息来确定装置104的绝对位置。例如，基于安装装置105的已知位置，安装装置105在其捕获装置104的图像时的方位以及在捕获图像时装置104与安装装置105的距离，例如，如通过对当时成像装置的焦深或长度的分析所确定的，应用程序125可以确定装置104的绝对位置。因此，除了仅基于对图像中的装置104的相对位置的图像分析来构造序列之外或替代地，应用程序125还可以基于装置104的绝对位置来确定序列115。
规则可以例如由管理员以程序代码或脚本的方式编程定义，以及/或者由管理员完全或部分地手动指定。规则还可以指定附加的命名约定。例如，在建筑物中的洗手间设施的上下文中，约定可以为“洗手间性别/楼层编号-装置类型-装置位置顺序”，其中洗手间性别为男性(M)、女性(FE)或家庭(FA)；楼层为设施107所在的楼层编号，因此第一层为1，第二层为2，依此类推；装置类型为装置的类型，诸如手巾分配器(HT)、卫生纸分配器(BT)、皂液分配器(SO)等；序列中的装置位置为序列中装置的编号，如上所述。
因此，对于位于第一层的被定位成根据序列115自门起排第二的男士洗手间中的手巾分配器，系统123将装置命名为M1-HT-2。同样，对于位于第三层的被定位成根据序列自门起排第三的女士洗手间中的皂液分配器，系统123将装置命名为W3-SO-3。以这种方式，例如，当建筑物的服务人员接收到指示(例如因为纸巾不足)需要服务于手巾分配器104的消息时，该消息中的分配器104的名称通知服务人员关于分配器104的特定位置，因此服务人员可以直接走到该分配器104处，而不必交叉检查或查阅另一个数据库或列表。与在消息中包括需要附加带宽来传输并且效率较低的较长书面描述相比，这进一步允许简洁的消息。
在一些情况下，相同房间类型的多个房间(例如，两个男士洗手间)可位于同一层。因此，例如在一些实施方式中，规则指定以下命名约定：“洗手间性别/楼层编号-设施名称限定符-装置类型-序列中的装置位置”，其中设施名称限定符可以由管理员或用户设置。在一些实施方式中，限定符是描述性的，以便立即赋予位置信息。例如，如果楼层在建筑物的南侧和北侧均包括男士洗手间，则相应的限定符可以为南侧或北侧。这样，对于位于第一层南侧的被定位成根据序列自门起排第二的男士洗手间中的手巾分配器，以及位于第一层北侧的被定位成根据序列自门起排第四的男士洗手间中的手巾分配器，系统123将这些装置分别命名为M1-southside-HT-2和M1-northside-HT-4。上面的示例集中讨论了洗手间，但还可以设想其他类型的设施和装置，例如办公室、休息室、制造区域、食品制备区域等中的装置。
实施方案
实施方案1.一种系统，包括：安装装置，其包括屏幕和成像装置，其中成像装置被配置为捕获具有至少一个支持网络的洗手间分配器的环境的表示，并且屏幕被配置为可视地呈现该表示以供用户观看；以及应用程序，其被配置为分析所述表示以将所述至少一个分配器识别为分配器装置，并且呈现图形用户界面作为所述表示上的覆盖，通过所述图形用户界面，用户可以通过与所述图形用户界面交互来选择所述至少一个分配器；确定所述至少一个分配器的唯一标识符；并且生成不同于唯一标识符的所述至少一个分配器的网络名称。
实施方案2.如实施方案1所述的系统，其中确定所述至少一个分配器的唯一标识符包括使用图像处理技术来光学读取在所述至少一个分配器上可视地显示的序列号或代码。
实施方案3.如任一前述实施方案所述的系统，其中确定所述至少一个分配器的唯一标识符包括：询问所述至少一个分配器以查询所述唯一标识符。
实施方案4.如任一前述实施方案所述的系统，其中所述应用程序至少部分地从所述安装装置运行。
实施方案5.如任一前述实施方案所述的系统，包括与所述安装装置进行数据通信的数据处理设备，其中所述应用程序至少部分地从所述数据处理设备运行。
实施方案6.如任一前述实施方案所述的系统，其中所述表示包括所述环境中的参考点，并且生成不同于所述唯一标识符的所述至少一个分配器的网络名称包括基于所述至少一个分配器与所述参考点的相对位置来生成所述名称。
实施方案7.如任一前述实施方案所述的系统，其中所述表示是所述环境的图像，并且分析所述表示以识别所述至少一个分配器包括：将所述图像中的所述至少一个分配器的形状与描绘相应已知分配器的多个分配器图像之一进行匹配。
实施方案8.一种方法，包括通过使用安装装置来捕获具有支持网络的洗手间分配器的洗手间环境的图像；以及在装置上显示图像；在显示图像的同时提供图形用户界面；接受用户对图形用户界面的输入以选择至少一个洗手间分配器；确定分配器的唯一标识符；基于分配器在洗手间环境中的相对位置，来生成分配器的网络名称。
实施方案9.如实施方案8所述的方法，其中确定所述分配器的唯一标识符包括对所述图像进行图像处理以光学读取在所述分配器上可视地显示的序列号或代码。
实施方案10.如前述实施方案8-9中任一项所述的方法，其中确定所述分配器的唯一标识符包括：询问所述分配器以查询所述唯一标识符。
实施方案11.如前述实施方案8-10中任一项所述的方法，其中所述安装装置是移动装置。
实施方案12.如前述实施方案8-11中任一项所述的方法，其中所述移动装置具有摄像头，并且捕获洗手间环境的图像包括使用所述摄像头来拍摄所述洗手间环境的照片。
实施方案13.如实施方案12所述的方法，其中捕获洗手间环境的图像包括：使用所述摄像头拍摄所述洗手间环境的多张照片，以创建所述洗手间环境的全景。
实施方案14.如前述实施方案8-13中任一项所述的方法，包括：响应于接受用户输入，可视地分开所述选择的分配器。
实施方案15.如前述实施方案8-14中任一项所述的方法，包括基于所述安装装置的位置和方向以及所述装置在所述图像中的位置来确定所述装置在设施中的位置。
当介绍本公开或其优选实施方案的元件时，冠词“一个”、“一种”、“该”和“所述”旨在表示存在该元件中的一个或多个。词语“包括”、“包含”和“具有”旨在为包含性的，意指可能存在所列元件之外的额外元件。虽然本说明书含有许多特定实施细节，但是这些细节不应该被解释为对任何发明或可要求保护的内容的范围的限制，而是作为可能对特定发明的特定实施方案特定的特征的描述。在本说明书中在单独的实施方案的上下文中所描述的某些特征也可以在单个实施方案中组合地实施。相反地，在单个实施方案的上下文中所描述的各种特征也可以单独地或以任何合适的子组合形式在多个实施方案中实施。此外，尽管特征在上文可以被描述为以某些组合形式起作用，甚至最初要求如此，但来自要求保护的组合的一个或多个特征可以在一些状况下从组合中删除，并且要求保护的组合可以针对子组合或子组合的变型。
在本说明书中描述的主题和操作的实施方式可以在数字电子电路中或在计算机软件、固件或硬件中实现，包括本说明书中公开的结构以及它们的结构等同物或它们中的一个或多个的组合。本说明书中描述的主题的实施方式可以实施为编码在计算机存储介质上以用于由数据处理设备执行或控制数据处理设备的操作的一个或多个计算机程序，即计算机程序指令的一个或多个模块。替代性地或除此之外，程序指令可以编码在人工生成的传播信号上，例如，机器生成的电信号、光信号或电磁信号，所述信号被生成以编码信息，以便传输到合适的接收器设备，从而由数据处理设备执行。
计算机存储介质可以是计算机可读存储装置、计算机可读存储基板、随机或串行存取存储器阵列或装置，或它们中的一个或多个的组合，或可以包括在它们中。此外，虽然计算机存储介质不是传播信号，但是计算机存储介质可以是在人工生成的传播信号中编码的计算机程序指令的来源或目的地。计算机存储介质还可以是一个或多个单独的物理部件或介质(例如，多个CD、盘或其他存储装置)或可以包含在其中。
本说明书中所描述的操作可以被实施为由数据处理设备或系统对存储在一个或多个计算机可读存储装置上的或从其他来源接收的数据执行的操作。
术语数据处理设备或数据处理系统涵盖用于处理数据的所有种类的设备、装置和机器，包括例如可编程处理器、计算机、片上系统，或前述项中的多个或组合。设备可包括专用逻辑电路，例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)。除了硬件之外，设备还可以包括为所讨论的计算机程序创建执行环境的代码，例如构成处理器固件、协议栈、数据库管理系统、操作系统、跨平台运行时环境、虚拟机或它们中的一个或多个的组合的代码。设备和执行环境可以实现各种不同的计算模型基础结构，例如web服务、分布式计算以及网格计算基础结构。
计算机程序(也被称为程序、软件、软件应用程序、脚本或代码)可以以任何形式的编程语言编写，包括汇编或解释型语言、声明性或过程语言，并且它可以以任何形式部署，包括作为独立程序或作为适用于计算环境中的模块、部件、子例程、对象或其他单元来部署。计算机程序可以但不必对应于文件系统中的文件。程序可以存储在保持其他程序或数据的文件(例如，存储在标记语言文档中的一个或多个脚本)的一部分中、存储在专用于所讨论程序的单个文件中，或存储在多个协调的文件(例如，存储一个或多个模块、子程序或代码的部分的文件)中。计算机程序可以被部署以在一台计算机上或位于一个站点或跨多个站点分布并且通过通信网络互连的多台计算机上执行。
在本说明书中描述的过程和逻辑流可以由执行一个或多个计算机程序的一个或多个可编程处理器来执行，以通过对输入数据进行操作并且生成输出来执行动作。过程和逻辑流还可以由专用逻辑电路例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)来执行，并且设备还可以被实现为所述专用逻辑电路。
适用于执行计算机程序的处理器包括例如通用微处理器和专用微处理器，以及任何种类的数字计算机的任何一个或多个处理器。一般来说，处理器将从只读存储器或随机存取存储器或两者接收指令和数据。计算机的基本元件是用于根据指令来执行动作的处理器，以及用于存储指令和数据的一个或多个存储器装置。一般来说，计算机还将包括用于存储数据的一个或多个大容量存储装置，例如，磁盘、磁光盘或光盘，或操作性地与它们连接，以从其中接收数据或向其中传输数据或两者。然而，计算机无需具有此类装置。此外，计算机还可以嵌入在另一装置中，例如，移动电话、个人数字助理(PDA)、移动音频或视频播放器、游戏控制台、全球定位系统(GPS)接收器，或便携式存储装置(例如，通用串行总线(USB)闪存驱动)，这只是举了几个例子。适用于存储计算机程序指令和数据的装置包含所有形式的非易失性存储器、介质和存储器装置，包含例如半导体存储器装置，例如，EPROM、EEPROM以及闪存装置；磁盘，例如内部硬盘或可移动盘；磁光盘；以及CD-ROM和DVD-ROM盘。处理器和存储器可以由专用逻辑电路补充，或并入其中。
在本说明书中描述的主题的实施方式可以在包括后端部件(例如，作为数据服务器)或包括中间件部件(例如，应用服务器)或包括前端部件(例如，具有图形用户界面或Web浏览器的客户端计算机，用户可以通过所述图形用户界面或Web浏览器与本说明书中所描述的主题的实施方式进行交互)，或者一个或多个此类后端、中间件或前端部件的任何组合的计算系统中实现。系统的部件可以通过数字数据通信(例如，通信网络)的任何形式或介质进行互连。通信网络的示例包括局域网(“LAN”)和广域网(“WAN”)、互连网络(例如，互联网)，以及对等网络(例如，自组织对等网络)。
计算系统可包括客户端和服务器。客户端和服务器一般彼此远离，且通常通过通信网络进行交互。客户端和服务器的关系由于计算机程序在相应的计算机上运行并在彼此之间具有客户端-服务器关系而产生。在一些实施方案中，服务器将数据(例如，HTML页面)传输至用户计算机(例如，为了向用户显示数据并且从与用户计算机交互的用户接收用户输入)。可以在服务器处从用户计算机接收在用户计算机处生成的数据(例如，用户交互的结果)。
虽然本说明书含有许多特定实施细节，但是这些细节不应该被解释为对任何发明或可要求保护的内容的范围的限制，而是作为对特定发明的特定实施方案特定的特征的描述。在本说明书中在单独的实施方案的上下文中所描述的某些特征也可以在单个实施方案中组合地实施。相反地，在单个实施方案的上下文中所描述的各种特征也可以单独地或以任何合适的子组合形式在多个实施方案中实施。此外，尽管特征在上文可以被描述为以某些组合形式起作用，甚至最初要求如此，但来自要求保护的组合的一个或多个特征可以在一些状况下从组合中删除，并且要求保护的组合可以针对子组合或子组合的变型。
类似地，虽然操作在附图中是按特定顺序描绘的，但是这不应该被理解为要求此类操作以所示的特定顺序或按先后顺序执行，或所有所示出的操作都被执行，以实现所需结果。在某些情况下，多任务和并行处理可以是有利的。此外，在上文所描述的实施方案中各种系统部件的分离不应该被理解为在所有实施方案中都要求此类分离，应当理解，所描述的程序部件和系统通常可以集成在单个软件产品中或封装到多个软件产品中。
此书面说明并不将本发明限于阐述的精确术语。因此，虽然已经参照上述实例详细描述了本发明，但是本领域的普通技术人员可以在不脱离本发明范围的情况下实现对这些实例的变更、修改和变化。

Claims (14)

1.一种用于将装置加入到网络的系统，其包括：
安装装置，其包括屏幕和成像装置，其中所述成像装置被配置为捕获具有多个支持网络的洗手间分配器的环境的图像，并且所述屏幕被配置为可视地呈现所述图像以供用户查看；以及
应用程序，其被配置为：
分析所述图像以将多个分配器识别为分配器装置，并呈现图形用户界面作为所述图像上的覆盖图，通过所述用户界面，用户可以通过与所述图形用户界面进行交互来选择所述多个分配器中的至少一个分配器；
确定所述至少一个分配器的唯一标识符；以及
生成不同于所述唯一标识符的所述至少一个分配器的网络名称，其中所述图像包括所述环境中的参考点，并且生成不同于所述唯一标识符的所述至少一个分配器的网络名称包括根据第一协议基于所述至少一个分配器与所述参考点的相对位置来生成所述名称，所述第一协议基于(i)根据分配器的空间方向的分配器的序列，以及(ii)定义所述序列的起点的参考点，定义一个或多个规则。
2.如权利要求1所述的用于将装置加入到网络的系统，其中确定所述至少一个分配器的唯一标识符包括使用图像处理技术来光学读取在所述至少一个分配器上可视地显示的序列号或代码。
3.如权利要求1所述的用于将装置加入到网络的系统，其中确定所述至少一个分配器的唯一标识符包括：询问所述至少一个分配器以查询所述唯一标识符。
4.如权利要求1所述的用于将装置加入到网络的系统，其中所述应用程序至少部分地从所述安装装置运行。
5.如权利要求1所述的用于将装置加入到网络的系统，包括与所述安装装置进行数据通信的数据处理设备，其中所述应用程序至少部分地从所述数据处理设备运行。
6.如权利要求1所述的用于将装置加入到网络的系统，其中分析所述图像以识别所述至少一个分配器包括：将所述图像中的所述至少一个分配器的形状与描绘相应已知分配器的多个分配器图像之一进行匹配。
7.一种用于将装置加入到网络的方法，其包括：
通过使用安装装置来捕获具有多个支持网络的洗手间分配器的洗手间环境的图像，其中所述图像包括所述环境中的参考点；
在所述安装装置的屏幕上显示所述图像；
分析所述图像以将多个分配器识别为分配器装置；
在显示所述图像的同时提供图形用户界面作为所述图像上的覆盖图；
接受用户对所述图形用户界面的输入以选择所述多个分配器中的至少一个分配器；
确定所述至少一个分配器的唯一标识符；
根据第一协议基于所述至少一个分配器与所述洗手间环境中的参考点的相对位置来生成所述至少一个分配器的网络名称，所述第一协议基于(i)根据分配器的空间方向的分配器的序列，以及(ii)定义所述序列的起点的参考点，定义一个或多个规则，其中所述网络名称与所述唯一标识符不同。
8.如权利要求7所述的用于将装置加入到网络的方法，其中确定所述至少一个分配器的唯一标识符包括对所述图像进行图像处理以光学读取在所述至少一个分配器上可视地显示的序列号或代码。
9.如权利要求7所述的用于将装置加入到网络的方法，其中确定所述至少一个分配器的唯一标识符包括：询问所述至少一个分配器以查询所述唯一标识符。
10.如权利要求7所述的用于将装置加入到网络的方法，其中所述安装装置是移动装置。
11.如权利要求10所述的用于将装置加入到网络的方法，其中所述移动装置具有摄像头，并且捕获洗手间环境的图像包括使用所述摄像头来拍摄所述洗手间环境的照片。
12.如权利要求11所述的用于将装置加入到网络的方法，其中捕获洗手间环境的图像包括：使用所述摄像头拍摄所述洗手间环境的多张照片，以创建所述洗手间环境的全景。
13.如权利要求7所述的用于将装置加入到网络的方法，包括：响应于接受用户输入，可视地触发所述至少一个分配器。
14.如权利要求7所述的用于将装置加入到网络的方法，包括基于所述安装装置的位置和方向以及所述至少一个分配器在所述图像中的位置来确定所述至少一个分配器在设施中的位置。
CN201780094264.XA 2017-09-15 2017-09-15 洗手间装置增强现实安装系统 Active CN111066302B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2017/051735 WO2019055024A1 (en) 2017-09-15 2017-09-15 SYSTEM FOR INSTALLATION OF INCREASED REALITY OF TOILET DEVICE

Publications (2)

Publication Number Publication Date
CN111066302A CN111066302A (zh) 2020-04-24
CN111066302B true CN111066302B (zh) 2023-07-21

Family

ID=65723836

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780094264.XA Active CN111066302B (zh) 2017-09-15 2017-09-15 洗手间装置增强现实安装系统

Country Status (9)

Country Link
US (2) US11288510B2 (zh)
EP (1) EP3682616B1 (zh)
KR (1) KR102370770B1 (zh)
CN (1) CN111066302B (zh)
AU (1) AU2017431769B2 (zh)
BR (1) BR112020003838A2 (zh)
CA (1) CA3073928C (zh)
CO (1) CO2020003116A2 (zh)
WO (1) WO2019055024A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA3072435A1 (en) * 2017-08-31 2019-03-07 Kimberly-Clark Worldwide, Inc. Washroom device installation system
US11871322B2 (en) 2018-12-21 2024-01-09 Essity Hygiene And Health Aktiebolag Installation of hygiene equipment
PL3771390T3 (pl) 2019-08-02 2022-02-07 Cws International Gmbh Sposób i układ do wykrywania poziomu napełnienia w dozowniku ręcznika higienicznego
KR20230039097A (ko) * 2021-09-13 2023-03-21 삼성전자주식회사 전자 장치 및 이의 제어 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103905710A (zh) * 2012-12-25 2014-07-02 夏普株式会社 图像捕获方法及其移动终端和设备

Family Cites Families (65)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7783380B2 (en) * 2003-12-31 2010-08-24 Kimberly-Clark Worldwide, Inc. System and method for measuring, monitoring and controlling washroom dispensers and products
US7673071B2 (en) * 2004-11-10 2010-03-02 International Business Machines Corporation Apparatus, system, and method for generating a name for a system of devices
US7899583B2 (en) * 2005-04-12 2011-03-01 Ehud Mendelson System and method of detecting and navigating to empty parking spaces
US9420423B1 (en) * 2005-04-12 2016-08-16 Ehud Mendelson RF beacon deployment and method of use
US8750892B2 (en) * 2006-06-21 2014-06-10 Scenera Mobile Technologies, Llc System and method for naming a location based on user-specific information
US8566630B2 (en) * 2006-11-30 2013-10-22 Eaton Corporation Apparatus, methods and computer program products supporting automatic network identification for power supplies
US7885145B2 (en) * 2007-10-26 2011-02-08 Samsung Electronics Co. Ltd. System and method for selection of an object of interest during physical browsing by finger pointing and snapping
CN101498781A (zh) * 2008-01-29 2009-08-05 日电（中国）有限公司 独立定位器以及自治超声波定位系统和方法
US20110053614A1 (en) * 2008-03-07 2011-03-03 Hitachi, Ltd. Position information system
US20100029326A1 (en) * 2008-07-30 2010-02-04 Jonathan Bergstrom Wireless data capture and sharing system, such as image capture and sharing of digital camera images via a wireless cellular network and related tagging of images
WO2010079400A1 (en) * 2009-01-06 2010-07-15 Koninklijke Philips Electronics N.V. Control system for controlling one or more controllable devices sources and method for enabling such control
EP2545494A1 (en) * 2010-03-12 2013-01-16 Shafa Wala Position capture input apparatus, system, and method therefor
US10096161B2 (en) 2010-06-15 2018-10-09 Live Nation Entertainment, Inc. Generating augmented reality images using sensor and location data
US8743145B1 (en) * 2010-08-26 2014-06-03 Amazon Technologies, Inc. Visual overlay for augmenting reality
US8811377B1 (en) * 2010-08-30 2014-08-19 Synapsense Corporation Apparatus and method for instrumenting devices to measure power usage using a multi-tier wireless network
US9047074B2 (en) * 2010-08-30 2015-06-02 Synapsense Corporation Apparatus and method for managing power capacity in data centers using a wireless sensor network
KR101744723B1 (ko) * 2010-12-20 2017-06-20 한국전자통신연구원 실내 위치 인식 시스템 및 이를 이용한 실내 위치 인식 방법
US8818706B1 (en) * 2011-05-17 2014-08-26 Google Inc. Indoor localization and mapping
US8538442B1 (en) * 2011-06-15 2013-09-17 Google Inc. Indoor localization of mobile device using labels
CN102307386B (zh) * 2011-08-31 2015-03-11 公安部第三研究所 基于Zigbee无线网络的室内定位监控系统及方法
US8990682B1 (en) * 2011-10-05 2015-03-24 Google Inc. Methods and devices for rendering interactions between virtual and physical objects on a substantially transparent display
US9002401B2 (en) * 2012-02-06 2015-04-07 Electronics And Telecommunications Research Institute Terminal and method for recognizing communication target
KR101825600B1 (ko) * 2012-02-13 2018-02-05 주식회사 엔씨소프트 증강현실기술을 이용한 좌석안내 장치 및 그 방법
WO2013150091A1 (en) * 2012-04-04 2013-10-10 Nestec S.A. Beverage dispenser with identification code
US9395189B2 (en) * 2012-06-21 2016-07-19 Qualcomm Incorporated Indoor structure inference using points of interest
US9256961B2 (en) * 2012-06-28 2016-02-09 Here Global B.V. Alternate viewpoint image enhancement
US9448758B2 (en) * 2012-07-18 2016-09-20 The Boeing Company Projecting airplane location specific maintenance history using optical reference points
CN103049772B (zh) * 2012-12-11 2016-08-10 上海大学 基于无源射频识别技术的室内定位跟踪系统和方法
US9380275B2 (en) * 2013-01-30 2016-06-28 Insitu, Inc. Augmented video system providing enhanced situational awareness
CN105431708B (zh) * 2013-06-17 2019-06-21 索尼公司 图像处理装置、图像处理方法以及程序
WO2015008290A2 (en) * 2013-07-18 2015-01-22 Secure4Drive Communication Ltd. Method and device for assisting in safe driving of a vehicle
KR101627169B1 (ko) * 2013-09-27 2016-06-07 한국과학기술연구원 증강현실 컨텐츠 저작 및 제공 시스템
WO2015047033A1 (en) * 2013-09-30 2015-04-02 Samsung Electronics Co., Ltd. System and method for providing cloud printing service
US9058375B2 (en) * 2013-10-09 2015-06-16 Smart Screen Networks, Inc. Systems and methods for adding descriptive metadata to digital content
EP3511918B1 (en) * 2014-01-30 2023-05-17 Signify Holding B.V. Controlling a lighting system using a mobile terminal
KR101997370B1 (ko) * 2014-07-31 2019-10-01 콘비다 와이어리스, 엘엘씨 사물 인터넷(iot)에서의 디바이스 로케이션 등록을 위한 서버
EP3010225B1 (en) * 2014-10-14 2019-07-24 Nokia Technologies OY A method, apparatus and computer program for automatically capturing an image
CN104526699B (zh) * 2014-12-05 2016-03-02 网易（杭州）网络有限公司 室内清洁机器人
US10325294B2 (en) * 2014-12-10 2019-06-18 Meijer, Inc. System and method for notifying customers of checkout queue activity
US20160171577A1 (en) * 2014-12-10 2016-06-16 Meijer, Inc. System and method for providing in-person retailer assistance to customers in a retail environment
US9665960B1 (en) * 2014-12-22 2017-05-30 Amazon Technologies, Inc. Image-based item location identification
SE538405C2 (en) * 2015-01-07 2016-06-14 Viscando Ab Method and system for categorization of a scene
US9819748B2 (en) * 2015-01-15 2017-11-14 Cisco Technology, Inc. Network device identification in an industrial control network
US9588514B2 (en) * 2015-01-26 2017-03-07 Fisher-Rosemount Systems, Inc. Commissioning field devices in a process control system supported by big data
EP3254430B1 (en) * 2015-02-03 2021-11-17 Signify Holding B.V. Methods and systems for providing conditional access to indoor location information
US11386479B1 (en) * 2015-03-17 2022-07-12 Pinterest, Inc. Computer-readable storage medium for presenting object identifiers for real world objects on wearable and portable devices
US10350839B2 (en) * 2015-05-21 2019-07-16 The Boeing Company Remote advanced repair guidance
US10406045B2 (en) * 2015-06-22 2019-09-10 Stryker Corporation Patient support apparatuses with navigation and guidance systems
TWI593988B (zh) * 2015-07-24 2017-08-01 P-Square Inc Indoor positioning system and method
CN105094335B (zh) * 2015-08-04 2019-05-10 天津锋时互动科技有限公司 场景提取方法、物体定位方法及其系统
EP3135617A1 (en) * 2015-08-27 2017-03-01 Posterfy Oy Method for monitoring dispensers
AU2015412744B2 (en) * 2015-10-30 2021-11-18 Kimberly-Clark Worldwide, Inc. Product use acoustic determination system
US10984373B2 (en) * 2016-03-07 2021-04-20 Sony Corporation System and method for information processing
JP7187446B2 (ja) * 2016-05-27 2022-12-12 ホロビルダー インコーポレイテッド 拡張された仮想現実
US10248879B2 (en) * 2016-06-22 2019-04-02 United States Postal Service Item tracking using a dynamic region of interest
US10118292B2 (en) * 2016-08-18 2018-11-06 Saudi Arabian Oil Company Systems and methods for configuring field devices using a configuration device
US10412042B2 (en) * 2016-09-21 2019-09-10 Rockwell Automation Technologies, Inc. Topology based internet protocol (IP) addressing
US10412041B2 (en) * 2016-09-21 2019-09-10 Rockwell Automation Technologies, Inc. Internet protocol (IP) addressing using an industrial control program
CN106358150B (zh) * 2016-09-30 2019-10-29 浙江大学 一种移动设备室内定位方法
US10990106B2 (en) * 2016-10-09 2021-04-27 Zhejiang Guozi Robot Technology Co., Ltd. Mobile unit, inventory management system and the method for mobile unit localization
US10417781B1 (en) * 2016-12-30 2019-09-17 X Development Llc Automated data capture
CN106714302A (zh) * 2017-01-23 2017-05-24 吉林大学 一种基于BP‑Landmarc神经网络的室内定位装置和控制方法
US10817724B2 (en) * 2017-05-01 2020-10-27 Microsoft Technology Licensing, Llc Real time object surface identification for augmented reality environments
US10839064B2 (en) * 2017-06-20 2020-11-17 Citrix Systems, Inc. Securely entering credentials via head-mounted display device
CA3072435A1 (en) 2017-08-31 2019-03-07 Kimberly-Clark Worldwide, Inc. Washroom device installation system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103905710A (zh) * 2012-12-25 2014-07-02 夏普株式会社 图像捕获方法及其移动终端和设备

Also Published As

Publication number Publication date
US20200218894A1 (en) 2020-07-09
WO2019055024A1 (en) 2019-03-21
AU2017431769A1 (en) 2020-03-19
CN111066302A (zh) 2020-04-24
EP3682616B1 (en) 2023-11-08
CA3073928A1 (en) 2019-03-21
BR112020003838A2 (pt) 2020-09-08
EP3682616A1 (en) 2020-07-22
US11288510B2 (en) 2022-03-29
US20220254156A1 (en) 2022-08-11
EP3682616A4 (en) 2021-04-21
CO2020003116A2 (es) 2020-04-13
AU2017431769B2 (en) 2022-11-10
KR20200036055A (ko) 2020-04-06
CA3073928C (en) 2022-10-18
KR102370770B1 (ko) 2022-03-04

Similar Documents

Publication Publication Date Title
US20220254156A1 (en) Washroom device augmented reality installation system
US8818706B1 (en) Indoor localization and mapping
CN105190239B (zh) 用于使用移动装置的导航的方向性及x射线视图技术
KR101255950B1 (ko) 위치기반 건설 현장 관리 방법 및 시스템
US20150310664A1 (en) Augmented reality based management of a representation of a smart environment
CN103890603B (zh) 一种用于重构无线设备周围环境的地图的方法及实现该方法的无线设备
CN110779479B (zh) 一种应用于室内地图的对象处理方法
CN111052679B (zh) 洗手间装置安装系统及方法
WO2015069560A1 (en) Image based location determination
JP6684730B2 (ja) 複合個室群管理システム
US20150134689A1 (en) Image based location determination
EP3066644A1 (en) Image based location determination
JP6663100B2 (ja) パーソナライズされた拡張位置情報を提供するための情報を収集するための方法、デバイス、およびシステム。
US20190162542A1 (en) Method And Apparatus For Indoor Mapping, Positioning, Or Navigation
Martinho et al. Find_Me: IoT indoor guidance system
CN113194801A (zh) 卫生设备的安装
KR102091766B1 (ko) 모델하우스서비스 제공 시스템, 서버 및 방법
de la Guía et al. Applying rfid technology to improve user interaction in novel environments

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant