CN107113354A - 包括头戴式设备的通信系统 - Google Patents

包括头戴式设备的通信系统 Download PDF

Info

Publication number
CN107113354A
CN107113354A CN201580070378.1A CN201580070378A CN107113354A CN 107113354 A CN107113354 A CN 107113354A CN 201580070378 A CN201580070378 A CN 201580070378A CN 107113354 A CN107113354 A CN 107113354A
Authority
CN
China
Prior art keywords
headset
equipment
wearer
session
equipments
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580070378.1A
Other languages
English (en)
Other versions
CN107113354B (zh
Inventor
P.A.斯鲁布索勒
L.蒂贝里
W.迪斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN107113354A publication Critical patent/CN107113354A/zh
Application granted granted Critical
Publication of CN107113354B publication Critical patent/CN107113354B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/06—Details of telephonic subscriber devices including a wireless LAN interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Computer And Data Communications (AREA)

Abstract

一种通信系统具有头戴式设备，其被布置成用于在操作环境中进行无线通信。第一头戴式设备（100）具有相机（120），其用于捕获环境图像；以及第一处理器（110），其被布置成用于基于第一头戴式设备（150）的佩戴者的观察方向来检测其他头戴式设备（150）。然后，基于远程可检测的视觉特性来在操作距离处标识其他头戴式设备，并且在第一头戴式设备和其他头戴式设备之间建立通信会话。其他头戴式设备具有其他处理器（160），其用于建立通信会话。有效地，基于头戴式设备的佩戴者的眼神接触来发起通信会话。可以检测到佩戴者的手势以发起或定义通信会话。

Description

包括头戴式设备的通信系统
技术领域
本发明涉及一种通信系统，其包括用于操作环境的头戴式设备，该头戴式设备被布置成用于进行无线通信。
本发明还涉及一种头戴式设备、通信方法以及用于该系统的计算机程序产品。
本发明涉及例如经由Wi-Fi的无线通信领域，并且更具体地涉及头戴式设备，例如，用作对接设备（dockee）和用于由对接设备访问主机的一个或多个外围设备的主机。在该上下文中，外围设备可以是外部设备（如显示器、键盘或鼠标）、或内置在主机中的外围设备（如扬声器或存储单元）。例如，电视机也可以是主机，即，主机内置在电视机中，并且构成可以提供对多个外围设备的访问的主机。访问和/或使用这些外围设备和/或主机的任何其他内部或外部资源可以被称为由主机提供的服务。
背景技术
无线通信可以用于在各种移动设备（比如诸如智能眼镜或智能防护镜之类的头戴式设备、平板电脑或移动电话）之间进行通信。例如，无线对接使得移动设备（用作对接设备）能够访问通过有线或无线本地附接的外围设备集合（诸如鼠标、显示器、机床等），该外围设备集合通过无线链路上的通用消息交换协议集合（例如，基于使用如IEEE802.11中所描述的Wi-Fi）连接至其他设备（被称为主机或无线对接站）。与一个或多个有线或无线外围设备耦合在一起的主机可以被称为无线对接环境。
无线对接例如从WO 2012/117306A1得知。无线对接站可以使得在至少一个对接设备与主机之间能够进行无线安全通信。无线对接主机可以通过Wi-Fi信标提供关于其存在的信息，对接设备可以使用该信标来选择并且发起与所选主机的连接。
WO2012/167200描述了将客户端设备选择性地接纳到与主机的数据共享会话中。主机用户可以基于客户端与主机的接近度(proximity)来选择客户端设备或者可视地标识客户端设备的用户。当主机确定接纳客户端设备时，设备必须接近以使用相机或麦克风来创建本地音频/视觉通道。经由该通道从客户端设备向主机提供标识符。当如此接纳时，则客户端和主机设备可以进行通信。
US2014/0368980A1描述了一种包括具有相机的头戴式设备的通信系统。可穿戴计算系统可以从用户接收请求对可穿戴计算系统的操作的协助的命令，并且可以发起技术支持会话来请求协助。可穿戴计算系统还可以通过耦合至可穿戴计算系统的麦克风在用户和技术支持人员之间提供音频通信通道。
发明内容
在实践操作环境（例如，办公环境、具有多个活动用户的用户住宅、手术室、空中交通管制、金融机构、软件开发等）中，各种人员可能佩戴头戴式设备（如智能眼镜）。其他室外示例可能是建筑工人或应急专业人员。佩戴头戴式设备的任何人在本文档中被称为佩戴者、或用户，其中，参考经由头戴式设备执行或控制的活动。例如，用户可以是头戴式设备的佩戴者，并且还具有例如经由WiFi无线地耦合至头戴式设备的智能手机或平板电脑。手机或平板电脑可能具有要共享的数据，或者用户可能想要使用外围设备（例如，耦合至主机的大显示器）。在本文档中，外围设备一词包括耦合至主机的任何物理设备，并且为用户提供诸如信息的输入或输出、交互或控制（例如，显示器或交互式工具）的功能性。这种功能性的示例包括：
-选择在给定时间显示哪些信息源；
-放大显示器的某个区域；
-示出附加信息；
-打开/关闭一些外围设备；
-创建注释；
-发送/接收消息；
-与其他人通信（例如，视频聊天）。
因此，用户可能想要在操作环境中与一些其他用户或设备通信，例如，交换音频或视频信息，或用于使用或共享外围设备。然而，例如，如果在操作环境中存在多个用户，或者由于嘈杂环境而导致难以联系所选择的用户，则可能难以建立与特定用户的通信会话。
本发明的目的是提供一种通信系统，其使得在减少用户交互量和所需时间的同时，能够在操作环境中建立与其他用户的通信会话。
为此，根据本发明的第一方面，提供了一种如所附的独立权利要求所限定的通信系统、头戴式设备、通信方法以及用于系统中的计算机程序产品。
在通信系统中，第一头戴式设备包括：
-相机，其用于在第一佩戴者佩戴第一头戴式设备的同时，捕获操作环境的环境图像；
-第一处理器，其被布置成用于：
-基于第一佩戴者的观察方向和环境图像来检测在距离第一佩戴者的操作距离处由操作环境中的其他佩戴者佩戴的其他头戴式设备，
-基于远程可检测的视觉特性来在操作距离处标识其他头戴式设备，
-在第一头戴式设备和其他头戴式设备之间建立通信会话，
其他头戴式设备包括：
-其他处理器，其被布置成用于：
-在第一头戴式设备和其他头戴式设备之间建立通信会话。
一种通信方法用于上述系统中的第一头戴式设备中使用，该头戴式设备被布置成用于进行无线通信，并且包括相机，其用于在第一佩戴者佩戴第一头戴式设备的同时，捕获操作环境的环境图像。该方法包括：基于第一佩戴者的观察方向和环境图像来检测在距离第一佩戴者的操作距离处由操作环境中的其他佩戴者佩戴的其他头戴式设备；基于远程可检测的视觉特性来在操作距离处标识其他头戴式设备；以及在头戴式设备和其他头戴式设备之间建立通信会话。
上述特征具有以下效果。在使用中，诸如智能眼镜之类的头戴式设备的相机将捕获环境图像，并且该图像将由第一处理器处理。当佩戴头戴式设备时，将沿佩戴者的观察方向对相机进行引导。对接设备处理器可以基于佩戴者相对于操作环境的观察方向来检测聚焦位置。该聚焦位置可以与环境图像中的中心位置相对应，该中心位置与由于用户的眼睛处于中性、居中取向而导致直视前方的佩戴者的视野相对应。在图像中，在聚焦位置附近，可以通过使用佩戴者的观察方向，来检测第一头戴式设备的佩戴者正在观看的其他头戴式设备。
观察方向可以通过选择图像的中心部分来隐含地使用，而相机被向前引导（即，沿佩戴者的头部的方向），当佩戴者的眼睛处于中性位置时，中心部分与佩戴者正在观看的点重合。
可替代地，可以通过确定佩戴者的眼睛的位置（例如，通过同样已知的眼睛跟踪）来主动地检测观察方向。对此，处理器可以被布置成用于通过检测佩戴者的至少一只眼睛的实际取向并且确定实际取向与居中取向的偏移来检测观察方向，以及依据偏移移位聚焦位置。聚焦位置可以与由于用户的眼睛处于居中取向而导致直视前方的佩戴者的视野中的中心位置相对应，或者可能与由于用户的眼睛看到与头戴式设备所指向的方向不同的方向而导致的偏心位置相对应。可以通过指向用户的眼睛的向内相机（inwards facingcamera）来检测眼睛取向。有利地，基于佩戴者的实际观察方向来扩大聚焦位置，并且基于图像中的扩大后的聚焦位置来检测头戴式设备。
随后，基于在操作距离（即，可操作地执行工作或其他动作的佩戴者在操作环境中是活动的距离）处远程可检测的视觉特性（例如，足够大以便从环境图像分析和解码的视觉标记）来标识其他头戴式设备，并且该系统有利地推断出第一佩戴者想要选择进行通信的其他佩戴者佩戴所标识的头戴式设备。
标识可以包括：在可能多个其他头戴式设备中进行选择，因为可以在聚焦位置周围检测到多个头戴式设备。例如，选择还可以基于远程可检测的视觉特性（例如，在其他头戴式设备整体上和/或其他佩戴者的特性）、其他头戴式设备与第一佩戴者的聚焦位置的接近度，其他头戴式设备的取向，或其他佩戴者的头，脸或眼睛的取向。取向可以朝向第一头戴式设备，因此指示其他佩戴者和第一佩戴者之间的眼神接触，并且因此指示要选择哪个头戴式设备。
视觉标记可以例如是图形代码，其足够大以便远程可检测。这样的视觉标记被设计成用于通过图像处理器从示出了使用如此编码的设备的操作环境的在操作距离处拍摄的环境图像进行读取，并且可以包含头戴式设备上的其他信息。视觉标记可以例如是具有远程可检测大小的图形符号和/或文本的标签。有利地，这种符号或文本可以由图像处理器从环境图像中检测到，并且清楚地标识相应的头戴式设备。视觉标记可以例如是在外围设备的显示器上显示的活动视觉标记，或通过从头戴式设备发出的编码光所显示的活动视觉标记。有利地，标记可以由头戴式设备动态地创建或调整，以表示可用或所需的实际服务或功能、或所提出的会话类型。
随后，在第一佩戴者的头戴式设备和其他佩戴者的头戴式设备之间建立通信会话。该通信会话经由所述无线通信建立，并且可以使用任何协议或消息传送系统（例如，Wi-Fi）。会话还可以包括诸如话音、视频、文本或其他数据之类的应用级数据的通信。由于佩戴者通过眼神接触参与将目标瞄准其他头戴式设备，通信会话具有安全性级别。有利地，基于第一佩戴者的观察方向来建立会话，即，基于眼神接触来基本上自动建立会话，而不需要佩带者必须触摸头戴式设备并且不需要用户的特定命令。例如，在嘈杂或室外操作环境中，因为用户在彼此的视野范围内，所以他们可能彼此容易接触，但是在其任务期间无法有效地听到/看到细节。
可选地，在头戴式设备中，对接设备处理器被布置成用于检测从佩戴者的眼睛到其他头戴式设备的观察距离，并且根据该观察距离来移位所述聚焦位置。有利地，聚焦位置通过距头戴式设备的实际观察距离来扩大，并且基于图像中的扩大后的聚焦位置来选择其他头戴式设备。
在第一头戴式设备中的实施例中，第一处理器被布置成用于建立通信会话包括：通过检测其他头戴式设备的佩戴者的手势来检测会话确认。
附加地或可替代地，在其他头戴式设备中，其他处理器被布置成用于建立通信会话，其包括通过检测第一头戴式设备的佩戴者的手势来检测会话请求。
特征具有以下效果。在使用中，可以通过另一方的手势来确认（或拒绝）通信会话。还有，可以通过另一方的手势来请求通信会话。为了检测手势，其他头戴式设备还可以配备有相机和图像处理器功能，或者例如，配备有用于检测点头请求或确认的陀螺仪。有利地，会话可以通过使用佩戴者的手势来启动和/或确认，这提供了对通信会话的直观控制。
在实施例中，第一头戴式设备包括向内相机，其用于捕获佩戴者的眼睛的眼睛图像；并且第一处理器被布置成用于基于眼睛图像来检测佩戴者的观察方向。有利地，基于眼睛图像来精确地检测观察方向。
在第一头戴式设备的实施例中，第一处理器被布置成用于基于远程可检测的视觉特性来进行所述标识其他头戴式设备，该远程可检测的视觉特性是以下各项中的至少一项：
-如从其他头戴式设备发出的编码光；
-如在其他头戴式设备上提供的视觉标记；
-其他头戴式设备的视觉特性；
-其他头戴式设备的佩戴者的视觉特性；
-其他头戴式设备的佩戴者的手势。
在该上下文中，视觉意味着通过存在于头戴式设备上的任何相机或辐射检测系统进行的视觉可检测的辐射，因此这包括热成像、飞行时间或类似3D成像、或可以用于标识佩戴者和/或头戴式设备的其他非人类视觉方法。可替代地或附加地，检测还可以包括检测其他设备的RF信号强度。
特征具有以下效果。在使用中，当环境图像中存在多个头戴式设备时，基于头戴式设备和/或其佩戴者的可识别特性来进行标识。例如，处理器可以被布置成用于首先在视觉上标识人类形式，然后集中在可穿戴设备标记可能位于的区域上，用于检测视觉标记。
基于所述标识（例如，标识数据或代码），经由无线通信联系相应的头戴式设备。例如，如在编码光中检测到的代码耦合至在经由无线通信建立通信会话期间交换的消息中的至少一个代码。或者可以使用具有关于相应佩戴者、相应头戴式设备、视觉标记、电子代码和地址等的数据的数据库。
在第一头戴式设备的实施例中，第一处理器被布置成用于建立通信会话，包括：
-生成会话请求并且经由无线通信向其他头戴式设备发送会话请求，和/或
-经由无线通信接收来自其他头戴式设备的会话确认。
附加地或可替代地，在其他头戴式设备中，其他处理器被布置成用于建立通信会话，包括：
-经由无线通信接收来自第一头戴式设备的会话请求，和/或
-生成会话确认并且经由无线通信向第一头戴式设备发送会话确认。
特征具有以下效果。在使用中，根据包括会话请求和会话确认的预先定义的顺序来交换消息以发起通信会话。另外，在准备会话请求和确认中可以检测到手势。例如，在通信系统的其他实施例中，在第一头戴式设备中，第一处理器被布置成用于基于检测第一头戴式设备的佩戴者的手势来生成会话请求，和/或在其他头戴式设备中，其他处理器被布置成用于基于检测其他头戴式设备的佩戴者的手势来进行所述生成会话确认。此外或可替代地，在第一头戴式设备中，第一处理器可以被布置成用于基于检测其他头戴式设备的佩戴者的手势来进行所述生成会话请求，和/或在其他头戴式设备中，其他处理器可以被布置成用于基于检测第一头戴式设备的佩戴者的手势来进行所述生成会话确认。
在第一头戴式设备的实施例中，第一处理器被布置成用于基于第一头戴式设备的佩戴者的手势和/或其他头戴式设备的佩戴者的手势来确定通信会话类型。特征具有以下效果。在使用中，系统可以支持各种类型的通信，例如，取决于活动的用户或应用的要求。有利地，通过检测第一头戴式设备或其他头戴式设备或两者的佩戴者的相应手势，系统可以建立特定通信会话，例如，话音通信会话。在其他实施例中，通信会话类型可以是作为主机的第一头戴式设备与作为对接设备的其他头戴式设备之间的对接会话、作为对接设备的第一头戴式设备和作为主机的其他头戴式设备之间的对接会话、话音通信会话、视觉信息共享会话、外围设备共享会话中的一个。
在第一头戴式设备的实施例中，第一处理器被布置成用于在通信会话中提供用户交互会话。在其他头戴式设备中，其他处理器被布置成用于在通信会话中提供用户交互会话。此外，用户交互会话可以包括以下各项中的至少一项：头戴式设备的佩戴者之间的话音通信、头戴式设备的佩戴者之间的信息共享或信息交互使用、或者外围设备或外围设备的一部分的共享。例如，该信息可以包括以下各项中的至少一项：文本、图像、视频、计算机生成的数据。另外，在嘈杂的环境中，可以有利地使用“基于语音到文本”的通信，其中，在接收佩戴者的智能眼镜显示器上来渲染文本。共享外围设备可能是共享电脑屏幕，通过第一头戴式设备接替其他头戴式设备的显示器。
在第一头戴式设备的实施例中，第一处理器被布置成用于用作作为通信会话的对接会话中的对接设备。在其他头戴式设备中，其他处理器被布置成用于用作对接会话中的主机，主机被布置成用于耦合至至少一个外围设备。主机可以被布置成用于与作为对接设备的头戴式设备进行无线对接，并且用于提供对头戴式设备的外围设备的访问。头戴式设备可以被布置成用于作为用于访问外围设备的主机的对接设备的无线对接。有利地，已经提供了一种对接系统，其中，基于佩戴者的观察方向和可能其他手势来在头戴式设备之间自动执行对接。
根据本发明的方法可以作为计算机实现方法或以专用硬件或两者的组合来在计算机上实现。根据本发明的方法的可执行代码可以存储在计算机程序产品上。计算机程序产品的示例包括存储器设备、光学存储设备、集成电路、服务器、在线软件等。优选地，计算机程序产品包括存储在计算机可读介质上的非暂态程序代码部件，该非暂态程序代码部件用于当所述程序产品在计算机上执行时，执行根据本发明的方法。在实施例中，计算机程序包括计算机程序代码部件，该计算机程序代码部件适于当计算机程序在计算机上运行时，执行根据本发明的方法的所有步骤。计算机程序可以被体现在计算机可读介质上。
根据本发明的设备和方法的其他优选实施例在所附权利要求中给出，权利要求的公开内容通过引用并入本文。
附图说明
本发明的这些和其他方面将参考在以下描述中通过示例而描述的实施例并且参考附图进一步变得显而易见并且得以进一步阐明，其中
图1示出了包括头戴式设备的对接系统，
图2示出了具有多个外围设备和头戴式设备的操作环境的示例，
图3示出了在对接设备处选择外围设备的对接方法，以及
图4示出了在主机处对接的方法。
这些附图纯粹是示意性的，而非按比例绘制。在这些附图中，与已经描述的元件相对应的元件可以具有相同的附图标记。
具体实施方式
可穿戴计算将为公司提供许多新机会，以增强工人（诸如开放式办公环境中的知识型工人）在其专业环境内的生产力。特别地，诸如智能眼镜之类的头戴式设备提供了在多人环境中的工人的协作活动中扩展、增强或替换平板电脑、计算机和智能电话的功能的能力，这些工人想要以自组织的方式彼此交互。在这种操作环境中，可能存在各种其他头戴式设备和/或外围设备。因此，这种操作环境在彼此的操作距离处可以具有多个佩戴者和头戴式设备（即，如在操作环境中的实际工作期间由用户佩戴）。
创新型可穿戴移动设备（例如，智能可穿戴眼镜）具有由用户佩戴而不是携带的优点，并且可以由佩戴者免于手操作。典型地，头戴式设备具有各种传感器（例如，麦克风、加速度计等）和板载致动器（例如，扬声器、显示器等），并且通常还具有相机。从这些传感器中提取的信息，特别是从捕获操作环境的图像的相机中提取的信息可以用于导出关于佩戴者的位置和聚焦（例如，观察方向）的信息。这种图像（即，在操作环境中的实际用户佩戴头戴式设备的同时，由该头戴式设备的相机捕获的图像）被称为环境图像。
典型地，头戴式设备和主机设备每个包括执行存储在设备处的适当软件的微处理器；例如，该软件可能已经被下载和/或存储在对应的存储器中，该存储器例如诸如RAM之类的易失性存储器或诸如闪存（未示出）之类的非易失性存储器。这些设备还可以配备有微处理器和存储器（未示出）。可替代地，设备可以全部或部分地以可编程逻辑（例如，作为现场可编程门阵列（FPGA））来实现。对接设备和主机设备可以全部或部分地实现为所谓的专用集成电路（ASIC）（即，为设备的特定用途定制的集成电路（IC））。
另外，下文所描述的功能和单元可以至少部分地在硬件电路中实现，该硬件电路可以包括处理器电路和存储电路，该处理器电路执行在存储电路中以电子方式表示的指令。
诸如智能眼镜之类的头戴式设备可以建立基于会话的点对点通信的形式。对此，头戴式设备必须彼此配对或对接。典型地，对于多用户环境内的用户来说，自组织配对和取消配对的过程是麻烦的，因为其可能需要明确的用户动作（例如，NFC配对或在按钮配对的情况下等待两分钟），以防止连接至错误设备。进一步地，人们必须能够数字地标识人（例如，经由用户管理工具）以便触发并且建立通信。在数据库中从大量人员中选择一个人可能相当麻烦，特别是在你无法记住另一个人的名字的情况下。
在各种实践操作环境中，用户可能需要配对和解除配对的次数被设想得很高。在现代建筑中经常看到的开放式办公室中变成重点关注的一个交互是在不会打扰空间中的其他人的情况下与各个同事通信的能力，例如，以合作和/或共享信息（例如，话音、文本、共享图像、共享视频、共享并且与计算机生成的数据交互、共享电脑屏幕、接替其他佩戴者的显示器）。由多用户/多设备环境产生的歧义可以通过消除对与设备进行任何明确的用户交互动作以用于选择和配对/取消配对的需求来解决。当选择和标识预期的其他用户的头戴式设备时，可以在头戴式设备的佩戴者之间建立通信和交互，该通信会话可以满足不同通信需求的范围。
在其他实际操作环境中，可能出现另一问题。
工人可能需要在嘈杂环境（工厂、机场跑道、施工现场）相互交互，并且需要以点对点的方式快速自然地进行通信。可以通过与其他头戴式设备建立通信会话来实现这种需求，而不需要与其他设备进行明确的用户交互动作以用于选择和配对/取消配对。
图1示出了包括头戴式设备的通信系统。该通信系统包括操作环境（同样未示出）中的两个头戴式设备。第一头戴式设备100被示为智能眼镜。
头戴式设备具有眼镜101，其要位于佩戴者的眼睛前方。该眼镜可以提供有平视显示器（HUD）。
头戴式设备可以提供有眼睛跟踪单元115和相机120。该相机120沿前视取向安装，以便捕获基本上与头戴式设备的佩戴者的视野重合的环境的图像。佩戴者的眼睛130被示意性地指示，并且表示佩戴者（未进一步示出）。
头戴式设备具有无线通信单元105以及处理器110，该处理器耦合至头戴式设备中的另外单元，以用于控制如稍后详细描述的头戴式设备的功能。处理器被布置成用于基于佩戴者的观察方向和环境图像来检测操作环境中的其他头戴式设备。另外，处理器被布置成用于从相机获取环境图像并且用于处理该图像。
可选地，处理器被布置成用于通过采用图像中的中心位置指示相对于操作环境的观察方向经由相机来检测聚焦位置。该聚焦位置与由于用户的眼睛处于居中取向而导致直视前方的佩戴者的视野中的中心位置相对应。处理器还被布置成用于选择最靠近聚焦位置的头戴式设备。这种选择假设佩戴者具有眼神接触。
可选地，处理器被布置成用于通过检测佩戴者的眼睛的实际取向并且确定实际取向与居中取向的偏移来检测观察方向。如此，跟踪眼睛的实际取向来确定观察方向是已知的。随后，聚焦位置依据偏移移位。处理器可以被布置成用于检测佩戴者的眼睛到另外头戴式设备的观察距离，并且用于依据观察距离来移位所述聚焦位置。例如，可以使用具有让用户通过与相机交互来调整自动焦点的自动聚焦相机来确定距离。此外，距离范围可以用于仅选择距佩戴者眼睛不超过一定距离的那些头戴式设备。
可替代地，可以通过使用例如基于Wi-Fi的距离测量值（使用例如IEEE精细时间测量（FTM））来检测距其他头戴式设备的距离。
随后，处理器例如通过检测视觉标记基于远程可检测的视觉特性来在操作距离处标识其他头戴式设备。对此，头戴式设备可以提供有足够大的视觉标记。可替代地，头戴式设备可以提供有发出编码光的光源，以用于在一定距离处标识头戴式设备，或者提供有一些其他标签、图形符号或视觉代码。处理器基于这种视觉标签或视觉代码来标识其他头戴式设备。当已经标识了其他头戴式设备时，处理器被布置成在第一头戴式设备和其他头戴式设备之间建立通信会话。
头戴式设备可以以设备和视觉标记之间的关系是已知的这种方式配置。该配置可以存储在例如主机中，例如，作为无线对接环境数据结构的一部分，或者存储在头戴式设备所连接至的网络中的服务器设备上。主机或网络服务器设备可以提供查询接口，其用于检索所存储的配置信息。主机还可以使用信标帧、探测响应或GAS帧在与无线对接设备进行预关联发现信息交换期间提供所存储的配置信息。可替代地，配置数据可以分布在头戴式设备中。头戴式设备可以提供查询接口，其用于检索所存储的配置数据，或者使用添加到P2P预关联设备发现的现有或新信息元素在预关联发现期间提供该数据，或者在GAS查询响应消息中提供该数据。
在头戴式设备的实施例中，一旦在来自可穿戴设备的外向相机的图像内检测到视觉标记，则关于标记的信息或从标记中提取的信息用于从先前存储的配置信息中检索关于所检测到的头戴式设备的信息。可以例如通过连接至主机，通过向网络中的服务器发送查询，通过解析通过使用信标帧、探测响应或GAS帧由无线对接主机发送的预关联发现信息来检索配置。然后，配置信息用于确定用于发起通信会话的头戴式设备。
图1所示的通信系统示出了具有其他处理器160和其他无线通信单元155的其他头戴式设备150。还可以存在类似于第一头戴式设备的另外部件，而其他眼睛表示其他头戴式设备的其他佩戴者。其他处理器被布置成在第一头戴式设备和其他头戴式设备之间建立通信会话。
头戴式设备被布置成用于通过使相应的无线通信单元105，155以及其他元件以用于例如经由同样已知的WiFi通信而进行无线通信。建立Wi-Fi连接需要采用若干个步骤，并且在通过Wi-Fi将两个设备“相关联”之前，交换若干个消息。这可能需要一些用户参与以确保正确设备将被连接并且需要时间，在该时间期间，用户必须等待建立和发起连接，特别是认证步骤以及建立用于设立安全连接的链路密钥通常需要时间和用户参与。当然，可以预先将操作环境中的所有设备彼此配对，并且使用那些凭证或导出凭证来自动建立其他安全连接（例如，使用持久P2P组，使用预共享的密钥来导出加密/链路密钥），但这在许多操作环境中可能并不实用。
在实施例中，基于向量的上下文参数通过对头戴式设备之间朝向公共参考点（诸如具有由头戴式设备已知的固定位置的Wi-Fi接入点、在位置已知的两个头戴式设备的视野中的某个对象，该已知位置诸如是灯或火警）之间的角度（和/或距离）进行三角测量来自动导出，并且使用该基于向量的上下文参数作为用于导出加密/链路密钥的公共秘密。例如，会话的请求者的头戴式设备可以使用其所测量的（或已知的）本身与参考点之间的距离，其所测量的（或已知的）其本身与其他头戴式设备之间的距离，以及请求者的头戴式设备在参考点和所请求的头戴式设备之间所具有的角度以导出所请求的设备在请求者的头戴式设备和参考点之间所具有的角度（例如，通过两次应用余弦规则以导出从请求者的头戴式设备之间朝向参考点的距离和角度两者）。所请求的设备可以简单地测量请求者的头戴式设备与参考之间的角度，从而两者都自动到达与输入相同（或非常相似）的可以用作公共秘密的角度，以导出（多个）适用的链路密钥（集合）。
测量头戴式设备与众所周知的对象之间的距离或两个头戴式设备之间的距离可以例如使用IEEE精细时间测量（FTM）来进行。该距离还可以根据检索/取出来自另外用户（例如，位置跟踪数据库（例如，基于Wi-Fi、GPS或另外信号）、用户和工作场所的位置数据库）的位置信息而导出，根据来自另外用户头部上方的灯的编码光提取位置而导出。参考点必须在两个头戴式设备之间进行商定和/或进行预先商定/提前配置。
原则上，内置罗盘和磁北之间的角度可以用于导出共享秘密。假设头戴式设备和磁北之间有两条平行线，作为会话的请求者的头戴式设备可以假设所请求的头戴式设备的角度为180度减去请求者的头戴式设备的罗盘指向与磁北之间的角度，而头戴式设备指向所请求的头戴式设备。注意，所导出的角度不是非常精确，并且需要考虑可能的值范围或例如针对一段时间所测量的可能平均值，以便考虑磁场强度的可能波动、罗盘的准确性以及可能的磁干扰。
在备选实施例中，两个头戴式设备均配备有能够创建编码光的灯，由此编码光例如用于对公钥进行编码，并且由此头戴式设备的相机能够解码该公钥。公钥可以在Diffie-Hellman密钥交换中用于导出链路密钥。公钥还可以用于验证到达消息的数字签名，并且仅接受可以基于此产生正确的数字签名并且因此具有对应的私钥的连接/消息。
在用于增强例如使用基于向量的上下文参数进行配对的可靠性的备选实施例或附加实施例中，配对两个头戴式设备涉及使用其他用户的特点作为创建链路密钥的输入，该用户特点诸如是其他用户的头发颜色、其他用户的衣服颜色、其他用户的名字、其他用户的手势、其他用户的眼睛颜色等。当两个设备通过Wi-Fi相关联时，它们的Wi-Fi连接受到密码保护，并且可以建立IP连接。
Wi-Fi设备可以使它们自己无线可发现。这可以在两个设备相关联之前进行，所以这被称为预关联发现。存在几种类型的预关联发现。一种是预关联设备发现，由此可以发现设备和设备的一些特性，如其名称、功能等。这可以从IEEE 802.11公知的信标帧和探测请求帧和探测响应帧来进行。另一类型是预关联服务发现，通过该预关联服务发现，服务（例如，由Wi-Fi设备提供的打印、显示等）可以由其他人通过IEEE 802.1 lu通用广告服务（GAS）帧来发现。这种发现可以包括关于为无线对接提供的无线对接环境的信息。以下元件提供了选择无线设备以用于建立无线通信会话的机构。
第一头戴式设备100具有相机120，其用于捕获操作环境的环境图像；而第一处理器110被布置成用于基于佩戴者的观察方向和环境图像来检测操作环境中的其他头戴式设备150。通过选择图像的中心部分，可以隐含地使用观察方向，同时相机被向前引导（即，当佩戴头戴式设备时，沿佩戴者的头部的方向）。现在，图像的中心部分与佩戴者正在向前看时（即，佩戴者的眼睛处于中性位置）他所看到的点重合。
可替代地，观察方向可以通过确定佩戴者的眼睛的位置（例如，通过同样已知的眼睛跟踪单元115）来主动地检测。眼睛跟踪的功能也可以在处理器中实现。在实施例中，第一头戴式设备包括向内相机，其用于捕获佩戴者的眼睛的眼睛图像，并且第一处理器被布置成用于基于眼睛图像来检测佩戴者的观察方向。因此，处理器可以被布置成用于通过检测佩戴者的至少一只眼睛的实际取向并且确定实际取向与居中取向的偏移以及依据偏移移位聚焦位置，来检测观察方向。聚焦位置可以与由于用户的眼睛处于居中取向而导致直视前方的佩戴者的视野中的中心位置相对应，或者可能与由于用户的眼睛看到与头戴式设备所指向的方向不同的方向而导致的偏心位置相对应。眼睛跟踪单元可以具有指向用户的眼睛的向内相机。因此，主动检测观察方向。
使用实际观察方向，选择佩戴者似乎正在看到的环境图像的一部分。有利地，基于佩戴者的实际观察方向来扩大聚焦位置，并且基于图像中的扩大后的聚焦位置来选择头戴式设备。
在建立通信会话期间，可以基于用户与头戴式设备或所连接的设备的交互（诸如按压头戴式设备上的按钮或者使用如所连接的手表或手机上的触摸屏之类的一些其他用户接口元素）来发布各种命令、请求或确认。然而，除了这种用户接口之外或者作为这种用户接口的替代，还可以使用手势。
在通信系统的实施例中，智能眼镜佩戴者通过与其他佩戴者的直接眼神接触和手势的组合来与另一个佩戴者建立通信会话。例如，第一佩戴者可以指示与其他佩戴者的通信会话是通过与其他佩戴者的直接眼神接触和手势的组合所意图的。其他佩戴者可以指示进行通信的意图，和/或确认他启动通信会话的意愿。手势可以是手部手势或身体部位的任何其他合适的移动。基于人的图像的手势识别同样已知。手势还可以指示通信的类型、通信的持续时间、作为通信对象的数据类型或应用、或定义通信会话的任何其他元素。现在，对各种实施例进行描述。
在上述通信系统的实施例中，在第一头戴式设备中，第一处理器被布置成用于通过检测其他头戴式设备的佩戴者的手势基于检测会话确认来建立通信会话。可替代地或附加地，在其他头戴式设备中，其他处理器被布置成用于建立通信会话，包括通过检测第一头戴式设备的佩戴者的手势来检测会话请求。
图2示出了在通信系统中建立通信会话。通信系统包括操作环境中的两个头戴式设备（示意性地示出）。第一头戴式设备220具有第一通信单元221和第一处理器222。其他头戴式设备230具有其他通信单元231和其他处理器232。头戴式设备如上文所描述的被配置成用于在操作环境中进行视觉检测和彼此标识。随后，通信会话可以以以下方式中的一种方式来建立。
在第一头戴式设备中，第一处理器222可以被布置成用于通过生成会话请求250来建立通信会话，并且经由无线通信向其他头戴式设备发送会话请求。
可替代地或附加地，第一处理器可以被布置成用于经由无线通信从其他头戴式设备接收会话确认240。另外，在其他头戴式设备中，其他处理器可以被布置成用于通过经由无线通信接收来自第一头戴式设备的会话请求250来建立通信会话。可替代地或附加地，其他处理器可以被布置成用于生成会话确认240，并且经由无线通信向第一头戴式设备发送会话确认。
可选地，手势和电子无线消息的组合可以用于发起和/或确认建立、定义、修改或终止通信会话。
在通信系统的实施例中，在第一头戴式设备中，第一处理器被布置成用于基于检测第一头戴式设备的佩戴者的手势来生成会话请求。例如，处理器可以在其他头戴式设备的方向检测佩戴者的邀请手势（例如，伸出他的手指）。另外，头戴式设备可以发射通过该手势触发以引起与其他佩戴者的通信的注意的光或闪光。然后，处理器例如通过检测从该头戴式设备发出的编码光来标识所指向的头戴式设备。然后，生成以该头戴式设备为目标的会话请求。
可替代地或附加地，在其他头戴式设备中，其他处理器被布置成用于基于检测其他头戴式设备的佩戴者的手势来生成会话确认。例如，处理器可以在第一头戴式设备的方向检测佩戴者的积极手势（诸如“翘起拇指”）。然后，处理器可以例如通过检测从该头戴式设备发出的编码光标识所指示的头戴式设备。可替代地，处理器可能已经接收到会话请求，并且对其进行响应。然后，生成以第一头戴式设备为目标的会话响应。
在通信系统的实施例中，在第一头戴式设备中，第一处理器被布置成用于基于检测其他头戴式设备的佩戴者的手势来生成会话请求。例如，处理器可以在第一头戴式设备的方向检测其他佩戴者的邀请手势。然后，处理器例如通过检测从其他头戴式设备发出的编码光来标识佩戴者对其做出邀请手势的其他头戴式设备。然后，生成以其他头戴式设备为目标的会话请求。另外，可以标识会议手势用于邀请多于一个人，即，发起与可能单独确认邀请的三个或更多个佩戴者进行的通信会话。
可替代地或附加地，在其他头戴式设备中，其他处理器被布置成用于基于检测第一头戴式设备的佩戴者的手势来生成会话确认。例如，处理器可以在其他头戴式设备的方向检测第一佩戴者的确认手势（例如，伸出手指）。然后，处理器例如通过检测第一头戴式设备上的视觉标记来标识第一头戴式设备。然后，生成以该头戴式设备为目标的会话确认。
在通信系统的实施例中，在第一头戴式设备中，第一处理器被布置成用于确定通信会话类型。例如，通信会话类型是话音通信会话、或视觉信息共享会话或外围设备共享会话。
在实施例中，通信会话类型是作为主机的第一头戴式设备和作为对接设备的其他头戴式设备之间的对接会话，或作为对接设备的第一头戴式设备和作为主机的其他头戴式设备之间的对接会话。在无线对接中，所谓的无线对接主机使得若干个服务可用于被称为对接设备的移动设备，通过这些服务，该对接设备可以一次性建立通信。可由无线对接主机得到的任何外围设备和/或服务组可以被称为无线对接环境。
图3示出了被布置成用于将对接设备对接到主机的通信系统。该图示出了对接系统，其包括作为对接设备的头戴式设备320。该系统包括主机设备300，其用于与一个或多个对接设备 320进行无线通信。主机可以嵌入在其他头戴式设备中，或者主机设备可以耦合至其他头戴式设备。主机耦合至若干个外围设备310，311，312以提供服务，例如，渲染音频或视频（AV）数据。注意，在本文档中，AV数据用于任何类型的视频数据、音频数据或视频和音频数据的组合。外围设备可以包括视频输出设备（如投影机（beamer）或显示器311）、图形输入/输出设备（如相机310或触摸屏）、音频输出设备（如扬声器系统312或耳机）、用户输入设备（如鼠标或房间控制单元）、数据处理设备（如数据存储单元或打印机）。在实践环境中可能存在多台主机，这些主机耦合至其他外围设备。
主机设备300具有用于适应无线通信的主机通信单元302，例如，同样众所周知的Wi-Fi单元。主机设备还具有主机处理器301，其被布置成用于对接至少一个对接设备。将无线设备对接到无线对接主机（WDH）的过程是经由诸如Wi-Fi或蓝牙之类的可用无线电通道建立数据链路的过程，并且如上文参考WO 2012/117306A1所讨论的同样已知。可以例如在于2007年7月26日发布的蓝牙规范，核心软件包版本2.1+EDR中找到蓝牙的描述。对接过程涉及提供对对接设备的一个或多个外围设备的访问。主机可以具有专用外围设备控制单元，其用于控制配置以及经由外围设备可用的服务。
对接设备 320具有用于适应与主机的所述无线通信的对接设备通信单元321。在实践中，可能存在用于该目的的多个通信单元，例如，蓝牙、Wi-Fi和60 GHz（例如，WiGig）。该对接设备还具有对接设备处理器322，其被布置成用于与主机设备对接，以用于作为对接设备访问该至少一个服务。
头戴式设备上的相机323被布置成用于当佩戴者正在表示主机的其他头戴式设备的方向观看时，捕获操作环境的图像。处理器322被布置成用于检测佩戴者相对于操作环境的观察方向。由于在实际佩戴头戴式设备期间头戴式设备的取向及其相机是已知的，因此处理器可以假设佩戴者集中在靠近所捕获的图像的中心的焦点上。上文已经对确定观察方向和焦点的其他实施例进行了讨论。
处理器322进一步实现如上文参考图1和图2所示的第一处理器所讨论的通信功能集合。从而，基于如上文所讨论的眼神接触来在头戴式设备之间建立使得能够对接的通信会话，即，对接式通信会话。这些设备可以采用Wi-Fi通信（例如，通过使用Wi-Fi 直连）来使其无线对接环境或其功能无线地可用。当两个设备通过Wi-Fi相关联时，它们的Wi-Fi连接受到密码保护，并且建立IP连接。
在通信系统的实施例中，在第一头戴式设备中，第一处理器被布置成用于基于第一头戴式设备的佩戴者的手势和/或基于其他头戴式设备的佩戴者的手势，来确定通信会话类型。例如，处理器可以在其他头戴式设备的方向检测第一佩戴者的类型手势（例如，支付移动）。然后，处理器标识其他头戴式设备，例如，通过检测其他头戴式设备上的视觉标记。然后，建立会话，并且基于该手势来定义会话的类型。例如，启动使得能够进行或支付帐单的应用。
在实践中，手势可以指示用户是否想要通信，并且可以进一步指示用户愿意建立的共享类型（例如，话音通信）。当智能眼镜检测到手部挥动手势以引起另一个人的注意时，外向相机可以用于确定另一智能眼镜是否位于相机的视野内。一旦检测到另一佩戴者的智能眼镜，发起者就等待佩戴者的响应。例如，接收佩戴者可能摇头以拒绝该请求，或者可能点头以确认会话。可替代地，在两个眼镜之间检测到眼神接触延长（例如，基于超时）以触发发起。眼神接触由发起者的智能眼镜拾取，并且发起配对请求/响应协议，例如，Wi-Fi保护设立、蓝牙配对。对于隐私和安全性，配对过程可以包括交换共享秘密，例如，自动确定的共享上下文参数。例如，与使用内置罗盘的地球磁北极相比较，这样的参数可以基于角度计算。例如，可以在两个头戴式设备处独立地确定北极与所连接的头戴式设备之间的连接线或眼神接触线之间的角度。选择要被检测的手势是建立会话的最自然的交互形式。然而，还可以检测到诸如闪烁之类的备选确认方式。因此，基于眼神接触来发起通信会话，并且导致头戴式设备配对，同时在该过程期间可以检测到手势和/或进一步定义通信类型。
一旦配对，就进行会话间通信，其可以取决于发起者的原始手势。例如，在话音通信的情况下，默认操作可能要以“安静模式”工作。这意味着佩戴者可以在不干扰没有参加会话的工人的情况下默读或相互耳语。
一旦发起，会话就在配对后的佩戴者之间存在眼神接触或话音通信的持续时间内保持活动。对此，第一处理器和其他处理器可以监视眼神接触、手势或通信活动。例如，第一处理器可以控制相机周期性地拍摄随后的环境图像，该环境图像可以用于使用佩戴者的观察方向来检测或跟踪其他头戴式设备的位置。
在实施例中，基于非眼神接触的超时来触发取消配对，或者如果在话音通信链路上在一段时间内检测到静音，则触发取消配对。这里不需要通过用户命令明确地结束会话。可替代地或附加地，向用户提供用户接口以发布命令以控制通信会话。
例如，用户可能希望一旦配对就改变会话，或者可能想要向会话添加其他眼镜佩戴者。
在实施例中，第一处理器被布置成用于执行会话间交互，其可以包括但不限于：
·特定话音通信类型，例如，支持安静环境，诸如用户可以耳语的办公室，或激活噪音消除的嘈杂环境；
·交换文档和数字媒体；
·使用多个显示器的屏幕共享；
·使得其他用户能够看到他人看到什么以获得他人对情形的视图（例如，在医院的手术室中）
例如，用户用他的手指指向他的笔记本电脑屏幕，并且说。头戴式设备检测所指向的数字对象并且将其数字形式转发给其他接收者。
可以使用Wi-Fi、Wi-Fi 直连、蓝牙或另外无线技术来建立点对点通信。一旦建立了点对点无线连接，诸如Wi-Fi 直连，则相同的无线连接可以用于建立链接至佩戴者的头戴式设备的另外设备和服务之间的通信。例如，所链接的智能手机/平板电脑/笔记本电脑可以建立用于文件交换的Wi-Fi直接服务发送服务会话，用于显示共享的Miracast会话，要能够使用彼此的外围设备的Wi-Fi串行总线或Wi-Fi对接会话等。
图4示出了用于头戴式设备中使用的通信方法。该方法实现了头戴式设备之间的通信会话。已经参考图1、图2和图3对第一头戴式设备和其他头戴式设备的运行进行了阐明。首先，该方法在START 501处开始，并且由用户将头戴式设备放置在他/她的头部上而触发。相机被激活用于捕获环境图像。接着，在DET_HWD 502处，基于头戴式设备的佩戴者的观察方向和环境图像来在操作环境中检测其他头戴式设备。接着，在阶段ID_HWD 503处，例如，基于视觉标记来标识其他头戴式设备。接着，如果检测和标识成功，则在阶段SEL 504处选择头戴式设备。如果不成功，则该方法在第一阶段DET_HWD处继续。可选地，该方法执行手势检测阶段DET_GEST508。在此阶段，通过检测其他头戴式设备的佩戴者的手势来检测会话确认，和/或通过检测第一头戴式设备的佩戴者的手势来检测会话请求。接着，该方法通过在头戴式设备和其他头戴式设备之间建立通信会话来在通信阶段COM_SES 505处继续。
在实践中，该方法可以以软件（头戴式设备方法）来实现，例如，所谓的应用。这样的计算机程序产品用于进行无线通信，并且包括程序，该程序可操作以使处理器执行如参考图4所描述的头戴式设备方法。该方法的其他实施例包括其他指令，用以执行如参考图1至图3所描述的其他操作。因此，可以使用可编程组件以硬件和/或软件来实现本发明的各种实施例。
将领会的是，为了清楚起见，上述描述参考不同的功能单元和处理器对本发明的实施例进行了描述。然而，显而易见的是，在不背离本发明的情况下，可以使用功能性在不同功能单元或处理器之间的任何合适分布。例如，图示为要由单独单元、处理器或控制器执行的功能性可以由相同的处理器或控制器执行。因此，对特定功能单元的引用仅被视为对用于提供所描述的功能性的合适部件的引用，而非指示严格逻辑或物理结构或组织。本发明可以以包括硬件、软件、固件或这些的任何组合的任何合适的形式来实现。
应当指出，在本文档中，“包括”一词并不排除所列出的元素或步骤之外的其他元素或步骤的存在，并且元素之前的“一（a）”或“一个（an）”一词不排除存在多个这样的元素，任何附图标记不限制权利要求的范围，本发明可以通过硬件和软件两者来实现，并且几个“部件”或“单元”可以由相同的硬件或软件项来表示，并且处理器可以可能与硬件元件协作来实现一个或多个单元的功能。进一步地，本发明不限于实施例，并且本发明存在于上文所描述的或在彼此不同的从属权利要求中描述的每个新颖特征或特征的组合。

Claims (15)

1.一种通信系统，包括用于操作环境中使用的头戴式设备，该头戴式设备被布置成用于进行无线通信，
第一头戴式设备（100），包括：
-相机（120），用于在第一佩戴者佩戴第一头戴式设备的同时，捕获操作环境的环境图像；以及
-第一处理器（110），被布置成用于：
-基于第一佩戴者的观察方向和环境图像来检测在距离第一佩戴者的操作距离处由操作环境中的其他佩戴者佩戴的其他头戴式设备（150），
-基于远程可检测的视觉特性来在操作距离处标识其他头戴式设备，以及
-在第一头戴式设备和其他头戴式设备之间建立通信会话；
其他头戴式设备包括：
-其他处理器（160），被布置成用于：
-在第一头戴式设备和其他头戴式设备之间建立通信会话。
2.根据权利要求1所述的通信系统，其中，
头戴式设备被布置成用于通过导出基于向量的上下文参数并且使用该基于向量的上下文参数作为用于导出加密密钥的公共秘密来建立安全通信会话，该基于向量的上下文参数通过对头戴式设备之间朝向公共参考点的角度和/或距离进行三角测量来导出，和/或在第一头戴式设备中，第一处理器（110）被布置成用于建立通信会话，包括：
-通过检测其他佩戴者的手势来检测会话确认，和/或在其他头戴式设备中，其他处理器（160）被布置成用于建立通信会话，该通信会话包括：
-通过检测第一佩戴者的手势来检测会话请求。
3.根据权利要求1或2所述的通信系统，其中，第一头戴式设备包括：
-向内相机（115），用于捕获第一佩戴者的眼睛的眼睛图像，并且第一处理器被布置成用于：
-基于眼睛图像来检测第一佩戴者的观察方向。
4.根据前述权利要求中的任一项所述的通信系统，其中，在第一头戴式设备中，第一处理器（110）被布置成用于基于远程可检测的视觉特性来进行所述标识其他头戴式设备，该远程可检测的视觉特性是以下各项中的至少一项：
-如从其他头戴式设备发出的编码光；
-如在其他头戴式设备上提供的视觉标记；
-其他头戴式设备的视觉特性；
-其他头戴式设备的佩戴者的视觉特性；
-其他头戴式设备的佩戴者的手势。
5.根据前述权利要求中的任一项所述的通信系统，其中，在第一头戴式设备中，第一处理器（110）被布置成用于建立通信会话，包括：
-生成会话请求并且经由无线通信向其他头戴式设备发送会话请求，和/或
-经由无线通信接收来自其他头戴式设备的会话确认，和/或在其他头戴式设备中，其他处理器（160）被布置成用于建立通信会话，包括：
-经由无线通信接收来自第一头戴式设备的会话请求，和/或
-生成会话确认并且经由无线通信向第一头戴式设备发送会话确认。
6.根据前述权利要求中的任一项所述的通信系统，其中，
在第一头戴式设备中，第一处理器（110）被布置成用于基于检测第一头戴式设备的佩戴者的手势来生成会话请求，和/或
在其他头戴式设备中，其他处理器（160）被布置成用于基于检测其他头戴式设备的佩戴者的手势来生成会话确认。
7.根据前述权利要求中的任一项所述的通信系统，其中，在第一头戴式设备中，第一处理器（110）被布置成用于基于检测其他头戴式设备的佩戴者的手势来生成会话请求，和/或在其他头戴式设备中，其他处理器（160）被布置成用于基于检测第一头戴式设备的佩戴者的手势来生成会话确认。
8.根据前述权利要求中的任一项所述的通信系统，其中，在第一头戴式设备中，第一处理器（110）被布置成用于确定通信会话类型，并且该通信会话类型是以下各项中的一项：
-作为主机的第一头戴式设备与作为对接设备的其他头戴式设备之间的对接会话；
-作为对接设备的第一头戴式设备和作为主机的其他头戴式设备之间的对接会话；
-话音通信会话；
-视觉信息共享会话；
-外围设备共享会话。
9.根据前述权利要求中的任一项所述的通信系统，其中，
-在第一头戴式设备中，第一处理器（110）被布置成用于基于第一头戴式设备的佩戴者的手势和/或其他头戴式设备的佩戴者的手势来确定通信会话类型。
10.根据前述权利要求中的任一项所述的通信系统，其中，
-在第一头戴式设备中，第一处理器（110）被布置成用于在通信会话中提供用户交互会话，以及
-在其他头戴式设备中，其他处理器（160）被布置成用于在通信会话中提供用户交互会话，
用户交互会话包括以下各项中的至少一项：
-头戴式设备的佩戴者之间的话音通信，
-头戴式设备的佩戴者之间的信息共享或信息交互使用，该信息包括以下各项中的至少一项：
-文本；
-图像；
-视频；
-计算机生成的数据；
-共享外围设备或外围设备的一部分，诸如
-共享电脑屏幕；
-通过第一头戴式设备接替其他头戴式设备的显示。
11.根据前述权利要求中的任一项所述的通信系统，其中，
-在第一头戴式设备中，第一处理器（322）被布置成用于用作作为通信会话的对接会话中的对接设备（320），以及
-在其他头戴式设备中，其他处理器（301）被布置成用于用作对接会话中的主机（300），主机被布置成用于耦合至至少一个外围设备（310，311，312），
主机被布置成用于与作为对接设备的头戴式设备进行无线对接，并且用于提供对头戴式设备的外围设备的访问，
头戴式设备被布置程用于作为用于访问外围设备的主机的对接设备的无线对接。
12.一种用于根据权利要求1所述的系统的头戴式设备，该头戴式设备（100）包括：
-无线通信单元（105），用于进行无线通信；
-相机（120），用于在第一佩戴者佩戴第一头戴式设备的同时，捕获操作环境的环境图像；以及
-根据前述权利要求中的任一项所述的第一处理器（110），其被布置成用于：
-基于第一佩戴者的观察方向和环境图像来检测在距离第一佩戴者的操作距离处由操作环境中的其他佩戴者佩戴的其他头戴式设备（150），
-基于远程可检测的视觉特性来在操作距离处标识其他头戴式设备，以及
-在第一头戴式设备和其他头戴式设备之间建立通信会话。
13.一种用于根据权利要求1所述的系统中使用的第一头戴式设备中的通信方法，该头戴式设备（100）被布置成用于进行无线通信，并且包括相机（120），该相机（120）用于在第一佩戴者佩戴第一头戴式设备的同时，捕获操作环境的环境图像，该方法包括：
-基于第一佩戴者的观察方向和环境图像来检测在距离第一佩戴者的操作距离处由操作环境中的其他佩戴者佩戴的其他头戴式设备；
-基于远程可检测的视觉特性来在操作距离处标识其他头戴式设备；以及
-在头戴式设备和其他头戴式设备之间建立通信会话。
14.根据权利要求13所述的方法，包括：
-通过检测其他头戴式设备的佩戴者的手势来检测会话确认，
和/或
-通过检测第一头戴式设备的佩戴者的手势来检测会话请求。
15.一种用于在头戴式设备之间进行通信的计算机程序，该计算机程序包括程序，该程序可操作以使处理器执行根据权利要求13或14所述的方法。
CN201580070378.1A 2014-12-22 2015-12-18 包括头戴式设备的通信系统 Active CN107113354B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP14199738 2014-12-22
EP14199738.7 2014-12-22
PCT/EP2015/080381 WO2016102336A1 (en) 2014-12-22 2015-12-18 Communication system comprising head wearable devices

Publications (2)

Publication Number Publication Date
CN107113354A true CN107113354A (zh) 2017-08-29
CN107113354B CN107113354B (zh) 2021-08-03

Family

ID=52282496

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580070378.1A Active CN107113354B (zh) 2014-12-22 2015-12-18 包括头戴式设备的通信系统

Country Status (5)

Country Link
US (1) US20170359456A1 (zh)
EP (1) EP3237991B1 (zh)
JP (1) JP6621826B2 (zh)
CN (1) CN107113354B (zh)
WO (1) WO2016102336A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107608076A (zh) * 2017-09-06 2018-01-19 北京小鸟看看科技有限公司 头戴显示系统和主机
CN111492329A (zh) * 2017-12-22 2020-08-04 诺基亚技术有限公司 用于从多个对象中识别目标对象的装置、方法和系统
CN112470467A (zh) * 2018-08-20 2021-03-09 戴尔产品有限公司 头戴式设备(HMD)发现在并置虚拟、增强和混合现实(xR)中的应用
WO2021052131A1 (zh) * 2019-09-16 2021-03-25 Oppo广东移动通信有限公司 头戴式设备及其控制方法、装置、系统和存储介质
CN112912962A (zh) * 2018-07-24 2021-06-04 基因动力公司 两名用户的个人生物学数据的比较方法和设备
CN113014929A (zh) * 2019-12-19 2021-06-22 深圳云英谷科技有限公司 用于显示编码的设备和方法
CN113778230A (zh) * 2021-09-14 2021-12-10 Oppo广东移动通信有限公司 信息交互方法、装置、设备及存储介质

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10681021B2 (en) * 2011-06-01 2020-06-09 Qualcomm Incorporated Selective admission into a network sharing session
US11941168B2 (en) * 2016-02-06 2024-03-26 Ip3 2023, Series 923 Of Allied Security Trust I Gaze initiated interaction technique
JP2017175439A (ja) * 2016-03-24 2017-09-28 京セラ株式会社 電子機器
WO2018091349A1 (en) 2016-11-17 2018-05-24 Philips Lighting Holding B.V. A device for identifying a second device and method thereof
US11114199B2 (en) 2018-01-25 2021-09-07 Mako Surgical Corp. Workflow systems and methods for enhancing collaboration between participants in a surgical procedure
US10732710B2 (en) * 2018-06-26 2020-08-04 Sony Interactive Entertainment Inc. Privacy chat trigger using mutual eye contact
JP7163656B2 (ja) * 2018-07-30 2022-11-01 株式会社リコー 配信システム、受信クライアント端末、配信方法
CN110502115B (zh) * 2019-08-19 2021-08-13 Oppo广东移动通信有限公司 交互方法、头戴设备和存储介质
US11099402B2 (en) * 2019-10-25 2021-08-24 Microsoft Technology Licensing, Llc Dynamically changing a fiducial marker for IoT device identification
US11289086B2 (en) * 2019-11-01 2022-03-29 Microsoft Technology Licensing, Llc Selective response rendering for virtual assistants
CN114730425A (zh) * 2019-11-18 2022-07-08 麦克赛尔株式会社 无现金结算系统以及信息终端
US11747859B2 (en) * 2021-03-16 2023-09-05 Shailesh Nirgudkar Personal safety headband
US20230177136A1 (en) * 2021-12-08 2023-06-08 Qualcomm Incorporated Auto-pairing rotation vector

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011249907A (ja) * 2010-05-24 2011-12-08 Nikon Corp 頭部装着型入力装置
US8235529B1 (en) * 2011-11-30 2012-08-07 Google Inc. Unlocking a screen using eye tracking information
EP2182402B1 (en) * 2008-10-30 2012-12-26 Honeywell International Inc. Method and system for operating a near-to-eye display
EP2610708A1 (en) * 2011-12-27 2013-07-03 Sony Mobile Communications Japan, Inc. Communication apparatus
CN203164515U (zh) * 2013-04-12 2013-08-28 北京印刷学院 一种智能眼镜
US20140010220A1 (en) * 2012-07-09 2014-01-09 Qualcomm Incorporated Method and apparatus for enabling wireless dockees to find and dock with a wireless docking host being used by another dockee
CN103563417A (zh) * 2011-06-01 2014-02-05 高通股份有限公司 选择性允许进入网络共享会话
CN104036169A (zh) * 2014-06-06 2014-09-10 北京智谷睿拓技术服务有限公司 生物认证方法及生物认证装置
CN104055478A (zh) * 2014-07-08 2014-09-24 金纯� 基于视线追踪控制的医用内窥镜操控系统
CN104199793A (zh) * 2014-08-29 2014-12-10 广州三星通信技术研究有限公司 便携式电子设备及在其上关联其他电子设备信息的方法和装置
US20140368980A1 (en) * 2012-02-07 2014-12-18 Google Inc. Technical Support and Remote Functionality for a Wearable Computing System

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002152805A (ja) * 2000-11-10 2002-05-24 Sony Corp 通信制御装置およびその方法、ならびに通信システムおよびその方法
US8447070B1 (en) * 2010-04-19 2013-05-21 Amazon Technologies, Inc. Approaches for device location and communication
KR101591579B1 (ko) * 2011-03-29 2016-02-18 퀄컴 인코포레이티드 증강 현실 시스템들에서 실세계 표면들에의 가상 이미지들의 앵커링
JP5718757B2 (ja) * 2011-07-26 2015-05-13 国立大学法人京都大学 画像管理装置、画像管理プログラム、および画像管理方法
US8893164B1 (en) * 2012-05-16 2014-11-18 Google Inc. Audio system
US20140152538A1 (en) * 2012-11-30 2014-06-05 Plantronics, Inc. View Detection Based Device Operation
US10254920B2 (en) * 2013-12-01 2019-04-09 Upskill, Inc. Systems and methods for accessing a nested menu

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2182402B1 (en) * 2008-10-30 2012-12-26 Honeywell International Inc. Method and system for operating a near-to-eye display
JP2011249907A (ja) * 2010-05-24 2011-12-08 Nikon Corp 頭部装着型入力装置
CN103563417A (zh) * 2011-06-01 2014-02-05 高通股份有限公司 选择性允许进入网络共享会话
US8235529B1 (en) * 2011-11-30 2012-08-07 Google Inc. Unlocking a screen using eye tracking information
EP2610708A1 (en) * 2011-12-27 2013-07-03 Sony Mobile Communications Japan, Inc. Communication apparatus
US20140368980A1 (en) * 2012-02-07 2014-12-18 Google Inc. Technical Support and Remote Functionality for a Wearable Computing System
US20140010220A1 (en) * 2012-07-09 2014-01-09 Qualcomm Incorporated Method and apparatus for enabling wireless dockees to find and dock with a wireless docking host being used by another dockee
CN203164515U (zh) * 2013-04-12 2013-08-28 北京印刷学院 一种智能眼镜
CN104036169A (zh) * 2014-06-06 2014-09-10 北京智谷睿拓技术服务有限公司 生物认证方法及生物认证装置
CN104055478A (zh) * 2014-07-08 2014-09-24 金纯� 基于视线追踪控制的医用内窥镜操控系统
CN104199793A (zh) * 2014-08-29 2014-12-10 广州三星通信技术研究有限公司 便携式电子设备及在其上关联其他电子设备信息的方法和装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107608076A (zh) * 2017-09-06 2018-01-19 北京小鸟看看科技有限公司 头戴显示系统和主机
CN107608076B (zh) * 2017-09-06 2019-11-26 北京小鸟看看科技有限公司 头戴显示系统和主机
CN111492329A (zh) * 2017-12-22 2020-08-04 诺基亚技术有限公司 用于从多个对象中识别目标对象的装置、方法和系统
CN112912962A (zh) * 2018-07-24 2021-06-04 基因动力公司 两名用户的个人生物学数据的比较方法和设备
CN112470467A (zh) * 2018-08-20 2021-03-09 戴尔产品有限公司 头戴式设备(HMD)发现在并置虚拟、增强和混合现实(xR)中的应用
CN112470467B (zh) * 2018-08-20 2023-02-24 戴尔产品有限公司 头戴式设备(HMD)发现在并置虚拟、增强和混合现实(xR)中的应用
WO2021052131A1 (zh) * 2019-09-16 2021-03-25 Oppo广东移动通信有限公司 头戴式设备及其控制方法、装置、系统和存储介质
CN113014929A (zh) * 2019-12-19 2021-06-22 深圳云英谷科技有限公司 用于显示编码的设备和方法
CN113778230A (zh) * 2021-09-14 2021-12-10 Oppo广东移动通信有限公司 信息交互方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN107113354B (zh) 2021-08-03
EP3237991B1 (en) 2021-06-30
US20170359456A1 (en) 2017-12-14
WO2016102336A1 (en) 2016-06-30
EP3237991A1 (en) 2017-11-01
JP2018504688A (ja) 2018-02-15
JP6621826B2 (ja) 2019-12-18

Similar Documents

Publication Publication Date Title
CN107113354A (zh) 包括头戴式设备的通信系统
US8963956B2 (en) Location based skins for mixed reality displays
US11445026B2 (en) Methods, systems, and media for indicating a security status of an internet of things device
JP6992761B2 (ja) サーバ、クライアント端末、制御方法、記憶媒体、およびプログラム
US20160154460A1 (en) Gaze Initiated Interaction Technique
CN106687885A (zh) 用于信使处理的可穿戴设备及其使用方法
JPWO2016021252A1 (ja) 情報処理装置及び情報処理方法、並びに画像表示システム
CN108406776B (zh) 安全交互方法、安全交互装置及服务机器人
JP2017211766A (ja) 画像処理システム、画像処理プログラム、および画像処理方法
US9977510B1 (en) Gesture-driven introduction system
US11601806B2 (en) Device, computer program and method
CN107076999A (zh) 使用目光接触经由平视显示器进行对接
KR20160133972A (ko) 결제 정보와 관련된 결제 과정의 진행을 디스플레이부에 디스플레이할 수 있는 착용형 디스플레이 디바이스 및 그 제어 방법
US10845875B1 (en) Gaze initiated interaction technique
US11392172B2 (en) Information processing method, wearable electronic device, electronic device and storage medium
JP2020005147A (ja) 情報処理装置、移動体、遠隔制御システム、情報処理方法およびプログラム
CN114826799A (zh) 信息获取方法、装置、终端及存储介质
JP6403975B2 (ja) 秘密情報入力システム及びプログラム
US11941168B2 (en) Gaze initiated interaction technique
US11900013B2 (en) Information processing apparatus, non-transitory computer readable medium storing program, and information processing method
US20230298226A1 (en) Systems and methods for ar/vr device improvements
JP6349777B2 (ja) 情報交換用携帯端末装置
JP2015192348A (ja) 人物特定システム及び人物特定方法
CN116457766A (zh) 信息显示装置和信息显示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant