CN111103972A - 对于显示内容的基于优先级的调整 - Google Patents

对于显示内容的基于优先级的调整 Download PDF

Info

Publication number
CN111103972A
CN111103972A CN201911022297.0A CN201911022297A CN111103972A CN 111103972 A CN111103972 A CN 111103972A CN 201911022297 A CN201911022297 A CN 201911022297A CN 111103972 A CN111103972 A CN 111103972A
Authority
CN
China
Prior art keywords
display device
viewer
orientation
display
observer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911022297.0A
Other languages
English (en)
Inventor
徐阿特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Otis Elevator Co
Original Assignee
Otis Elevator Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Otis Elevator Co filed Critical Otis Elevator Co
Publication of CN111103972A publication Critical patent/CN111103972A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3231—Monitoring the presence, absence or movement of users
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B3/00—Applications of devices for indicating or signalling operating conditions of elevators
    • B66B3/002—Indicators
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B3/00—Applications of devices for indicating or signalling operating conditions of elevators
    • B66B3/002—Indicators
    • B66B3/006—Indicators for guiding passengers to their assigned elevator car
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1415—Digital output to display device ; Cooperation and interconnection of the display device with other functional units with means for detecting differences between the image stored in the host and the images displayed on the displays
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/60—Rotation of whole images or parts thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/068—Adjustment of display parameters for control of viewing angle adjustment
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明的主题是“对于显示内容的基于优先级的调整”。根据方面，提供了一种对于显示内容的基于优先级的调整的方法。该方法包含确定相对于显示装置的第一观察者的方位和确定相对于显示装置的第二观察者的方位。基于至少部分以第一观察者的方位和第二观察者的方位为基础来确定第一观察者相比于第二观察者具有更大的显示优先级，在该显示装置上显示与第一观察者关联的第一内容屏幕。基于至少部分以第一观察者的方位和第二观察者的方位为基础来确定第二观察者相比于第一观察者具有更大的显示优先级，在该显示装置上显示与第二观察者关联的第二内容屏幕。

Description

对于显示内容的基于优先级的调整
背景技术
本文中公开的主题一般地涉及显示的领域，并且更特别地，涉及对于显示内容的基于优先级的调整。
显示内容能够包含例如用来给予人寻路引导的文本和图形，其中假设了该人直接面向显示装置而不是从倾斜角度进行查看。然而，在共享公共显示装置的上下文中，用户经常不会停止在固定监视器的前面，而是更喜欢继续行走以避免扰乱随后的人流，或者减少浪费在停止和重新开始上的时间。在一个用户从显示装置转移离开时，另一用户可在与前一用户关联的内容仍在被显示时尝试访问显示装置。因此，后一用户可能不得不等待超时时段（timeout period）过去或者手动请求返回到作为显示的内容的输入屏幕，这导致了延长的交互时段。
发明内容
根据一个实施例，提供了一种对于显示内容的基于优先级的调整的方法。该方法包含确定相对于显示装置的第一观察者的方位和确定相对于显示装置的第二观察者的方位。方法还包含基于至少部分以第一观察者的方位和第二观察者的方位为基础来确定第一观察者相比于第二观察者具有更大的显示优先级，在该显示装置上显示与第一观察者关联的第一内容屏幕。方法还包含基于至少部分以第一观察者的方位和第二观察者的方位为基础来确定第二观察者相比于第一观察者具有更大的显示优先级，在该显示装置上显示与第二观察者关联的第二内容屏幕。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：其中第一内容屏幕包括对于第一观察者的第一电梯轿厢指派，并且第二内容屏幕包含对于第二观察者的第二电梯轿厢指派。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：基于检测到相比于第二观察者具有更大的显示优先级的第一观察者之间的转换，将该显示装置的显示内容切换到用户输入屏幕。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：基于在显示第一内容屏幕或第二内容屏幕后达到超时时段，将该显示装置的显示内容切换到用户输入屏幕。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：基于在屏幕保护程序超时时段内在显示装置的阈值距离内未检测到观察者，将该显示装置切换到屏幕保护程序模式。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：跟踪作为最近观察者最近与该显示装置交互的观察者的方位，基于相对于该显示装置的最近观察者的方位来确定要应用的扭曲校正，以及将该扭曲校正输出到该显示装置。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：其中更大的显示优先级是基于以下中的一项或多项来被确定的：相对于该显示装置的距离、相对于该显示装置的朝向、相对于该显示装置的方位的改变及相对于该显示装置的注视。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：在最近观察者继续相对于该显示装置改变方位时，调整该扭曲校正，其中该扭曲校正至少包括旋转和尺度改变操作。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：基于最近观察者与该显示装置之间的一个或多个角度差，确定相对于该显示装置的最近观察者的方位。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：其中方位是基于以下中的一项或多项来被确定的：深度传感器、雷达传感器、超声传感器、多摄像机系统、红外传感器及一个或多个地板压力传感器。
除上述或下述特征中的一个或多个特征外，或者作为备选方案，其它实施例还可包含：基于以下中的一项或多项来区分第一观察者与第二观察者：移动凭证、观察到的身体特性及面部识别。
根据另一实施例，提供了一种系统。该系统包含显示装置、可操作以检测观察者的方位的一个或多个传感器及可操作地耦合到该显示装置和一个或多个传感器的显示调整系统。该显示调整系统配置成执行多个操作，所述多个操作包含确定相对于该显示装置的第一观察者的方位和确定相对于该显示装置的第二观察者的方位。该显示调整系统配置成基于至少部分以第一观察者的方位和第二观察者的方位为基础来确定第一观察者相比于第二观察者具有更大的显示优先级，在该显示装置上显示与第一观察者关联的第一内容屏幕。该显示调整系统还配置成基于至少部分以第一观察者的方位和第二观察者的方位为基础来确定第二观察者相比于第一观察者具有更大的显示优先级，在该显示装置上显示与第二观察者关联的第二内容屏幕。
本公开的实施例的技术效应包含将基于优先级的调整应用于显示装置上的显示内容以解决显示内容的观察者之间的转换。
除非另有明确指示，否则前述特征和元件可以以各种组合非排他性地被组合。根据以下描述和附图，这些特征和元件及其操作将变得更加显而易见。然而，应理解，以下描述和附图意图在本质上是说明性和解释性的，并且是非限制性的。
附图说明
下面的描述不应被视为以任何方式进行限制。参照附图，相似的元件被相似地编号：
图1图示了根据本公开的实施例的显示系统的一般示意性系统图；
图2图示了根据本公开的实施例的显示系统的一般示意性系统图；
图3图示了根据本公开的实施例的在状态之间转换的显示系统的一般示意性系统图；
图4图示了根据本公开的实施例的相对于显示装置建立第一观察角度的观察者；
图5图示了根据本公开的实施例的相对于显示装置建立第二观察角度的观察者；以及
图6是图示根据本发明的实施例的方法的流程图。
具体实施方式
本文中参照附图，通过例证并且不是限制的方式呈现了公开的设备和方法的一个或多个实施例的详细描述。
如下面将描述的，在观察者相对于显示装置改变方位时，实施例针对观察者调整显示内容，诸如文本和图形。显示调整系统能够跟踪相对于显示装置的多个观察者的方位，以确定观察者中的哪个观察者具有更大的显示优先级。例如，一旦第一观察者与该显示装置交互，与第一观察者关联的第一内容屏幕（诸如电梯轿厢指派）便能够被显示。第一观察者也可以是具有到该显示装置的最短距离的最靠近观察者。第一内容屏幕能够保持被显示在该显示装置上经过超时时段，或者直到第二观察者接近该显示装置，并且作为更大的显示优先级的一个示例，相比于第一观察者具有到该显示装置的更短距离。在一些实施例中，显示优先级可以基于相对于该显示装置的朝向、相对于该显示装置的方位的改变和/或相对于该显示装置的注视以确定哪些观察者在主动接近和/或查看该显示装置。该显示装置能够基于检测到相比于第二观察者具有更大的显示优先级的第一观察者之间的转换，将显示内容切换到用户输入屏幕。第二观察者随后能够从用户输入屏幕做出选择，导致显示与第二观察者关联的第二内容屏幕。因此，第二观察者不必等待整个超时时段过去或者物理按压任何按钮以将该显示装置从显示第一内容屏幕切换到在该显示装置上显示用户输入屏幕。备选地，在观察者是可辨认的并且观察者的偏好已知的情况下，该显示装置能够在特定于观察者的内容之间直接切换而不要求直接用户输入。
此外，在可显示方向箭头和导航信息的寻路引导显示的上下文中，观察者经常无意在显示装置前停止，而是在经过该显示装置时继续看着该显示装置。在观察者相对于在固定方位的显示装置移动时，该观察者可能难以理解内容，因为信息或方向箭头能够由于该观察者的在改变的视角而显得扭曲。实施例使用一个或多个传感器来跟踪显示装置的观察者的方位（例如位置和/或朝向）和轨迹，这可包含跟踪观察者的一部分，诸如观察者的头部或注视。通过确定相对于显示装置的观察者的方位和相对于显示装置的观察者的轨迹，扭曲校正能够被应用于显示内容以在观察者具有更大/最大显示优先级时校正针对该观察者的显示内容。
参照图1，根据本公开的实施例，图示了用于对于显示内容的基于优先级的调整的系统100。如在图1中看到的，观察者102A能够当在显示装置104附近的位置106与希望的终点位置108之间转移时查看显示装置104（例如，计算机监视器）。显示装置104能够是处于第一观察者102A在转移跨过位置106时可查看的基本固定方位的自助设备（kiosk）110。在一些事实例中，要在显示装置104上显示的显示内容包含采用文本和/或图形形式的指引以帮助第一观察者102A导航通过建筑物。一个或多个传感器112能够被用来确定第一观察者102A的方位，其中方位包含相对于显示装置104的第一观察者102A的位置和/或朝向。一个或多个传感器112也能够确定诸如第二观察者102B的一个或多个其他观察者的方位。例如，一个或多个传感器112能够包含以下中的一项或多项：深度传感器、雷达传感器、超声传感器、多摄像机系统（例如，立体摄像机系统）、红外传感器、地板压力传感器等，其被配置成捕捉第一观察者102A和/或第二观察者102B的至少一个特征，诸如第一观察者102A和/或第二观察者102B的头部拍摄和/或身体拍摄。
图1的示例是包含多个电梯进入点122A、122B、122C、122D（统称为122）的电梯大厅120。电梯进入点122A、122B、122C、122D中的每个电梯进入点能够与一组电梯门124A、124B、124C、124D关联。对于要在显示装置104附近的位置106与希望的终点位置108之间行进的观察者102，可存在各种阻碍，诸如物体128A、128B。物体128A、128B是限制观察者102的可能的将来方位的路径移动约束的示例（例如，墙、家具、支撑柱、各种结构等）。假定希望的终点位置108是图1中的电梯进入点122之一，物体128A、128B可限制观察者102的移动选择，例如，使得观察者102最可能在物体128A、128B之间经过。一个或多个传感器112能够被用来通过监视在一段时间内的移动，确定观察者102的方位和轨迹130。
传感器112的其它示例能够包含以下中的一项或多项：2D红绿蓝（RGB）摄影机和/或提供包含物体与深度传感器之间的距离和角度的三维（3D）信息的深度传感器。能够被使用的各种3D深度感测技术和装置包含但不限于结构光测量、相移测量、飞行时间测量、立体三角测量装置、片光（sheet of light）三角测量装置、光场摄像机、编码孔径摄像机、计算成像技术、同时定位与地图创建（SLAM）、成像雷达、成像声纳、回声定位、激光雷达、扫描光检测和测距（LIDAR）、闪光LIDAR或包含前述至少之一的组合。不同技术能够包含有源（传送并且接收信号）或无源（仅接收信号）并且可在诸如可见、红外、超声等电磁谱或声谱的频带中操作。在另一实施例中，地板压力垫能够检测观察者在地板上的方位，所述观察者在地板上的方位能够被用来例如计算观察者相对于显示装置104的位置的距离和朝向。在各种实施例中，3D深度传感器可以是可操作的，以从散焦、图像的焦点栈（focal stack）或运动恢复结构（structure from motion）产生3D信息。类似的，多个2D深度传感器能够被用来提供二维信息，该二维信息包含物体与深度传感器之间的距离。
显示调整系统114能够在本地、联网或分布式配置中被并入或可操作地耦合到显示装置104和/或一个或多个传感器112。显示调整系统114能够包含处理系统115、存储器系统116和装置接口118。处理系统115可以是但不限于是各种各样的可能架构中的任何架构的单处理器或多处理器系统，包含同构或异构布置的现场可编程门阵列（FPGA）、中央处理单元（CPU）、专用集成电路（ASIC）、数字信号处理器（DSP）或图形处理单元（GPU）硬件。存储器系统116可以是存储装置，诸如，例如随机存取存储器（RAM）、只读存储器（ROM）或其它电子、光、磁或任何其它计算机可读存储介质。存储器系统116能够包含计算机可执行指令，所述计算机可执行指令在由处理系统115执行时，促使处理系统115执行如本文中进一步描述的操作。装置接口118能够包含到显示装置104和一个或多个传感器112的有线、无线和/或光通信链路。虽然图1中仅描绘了显示调整系统114的单个实例，但将理解的是，能够存在显示调整系统114的多个实例以支持一个或多个传感器112和显示装置104的多个实例，或者显示调整系统114的单个实例能够支持一个或多个传感器112和显示装置104的多个实例。
显示调整系统114可操作以从一个或多个传感器112捕捉数据并且执行面部和/或身体朝向检测。面部和/或身体朝向检测可使用已知的图像处理技术来识别观察者102的特征。例如，由显示调整系统114执行的面部识别能够跟踪诸如眼睛、嘴、鼻子、前额、下巴和其它特征的面部特征的相对几何形状，以既估计观察者102的方位（包含朝向和/或注视）并且也在多个观察者之间进行区分。显示调整系统114还可操作以基于相对于显示装置104的观察者102的方位和轨迹来将扭曲校正应用于显示内容以校正针对观察者102的显示内容。例如，在第一观察者102A接近并且经过位置106时，第一观察者102A的视线的角度相对于显示装置104的显示表面而改变。
如在图1的示例中所描绘的，在某个时间点，第一观察者102A能够处在与显示装置104有距离D1的方位，同时第二观察者102B能够处在与显示装置104有距离D2的方位。作为具有更大的显示优先级的一个示例，在距离D1小于距离D2时，与第一观察者102A关联的第一内容屏幕能够被显示，诸如用来导航到指派的电梯进入点122的指引。在第一观察者102A从显示装置104移动离开，并且第二观察者102B移动更靠近显示装置104，使得距离D2变得小于距离D1时，显示装置104能够从显示与第一观察者102A关联的第一内容屏幕切换以接受来自第二观察者102B的输入，并且显示与第二观察者102B关联的第二内容屏幕。转换的类似示例能够适用于方位、朝向和/或注视的改变以确定是第一观察者102A还是第二观察者102B具有更大的显示优先级。作为另一示例，显示装置104的可见性能够影响优先级。例如，如果显示装置104的显示表面是垂直定向的，则在显示装置104背后的观察者102可接收到零优先级，即使该观察者102很靠近显示装置104并且在注视显示装置104的背面。
图2将系统200的配置描绘为用于对于显示内容的基于优先级的调整的图1的系统100的变化。在图2的示例中，显示调整系统114通过接口连接到显示装置204，所述显示装置204是安装在走廊220中的显示装置104的实施例。传感器212A和212B是安装在相对于显示装置204的不同方位的图1的一个或多个传感器112的实施例。例如，传感器212A、212B能够被定位成使得传感器212A的视野213A与传感器212B的视野213B重叠。视野213A、213B的重叠能够被用来更好跟踪观察者202（A，B，C，D）的方位和轨迹，并且帮助确认哪些观察者202最可能在查看显示装置204。例如，观察者202A、202B可两者均足够靠近显示装置204以与显示装置204交互（在交互距离阈值205内），但观察者202C、202D可转移到阈值距离207外的方位并且离显示装置204太远，不能读取显示内容。阈值205、208可提供滞后带（hysteresisband），在所述滞后带中交互能够被发起，并且在观察者202从显示装置204转移离开时，显示内容可被保持。备选地，可仅使用单个阈值205。在图2的示例中，观察者202A、202B被观察为具有向显示装置204移动的轨迹并且可在方位和轨迹两者具有变化，而观察者202C、202D正在从显示装置204进一步移动离开。
从观察者202A到面向显示装置204的至少一个或多个另外观察者202B的转换能够例如基于以下中的一项或多项来被执行：检测到观察者202A、202B的数量的改变和/或检测到相对于显示装置204的观察者邻近度/轨迹/朝向/注视的改变。显示装置204可输出信息性通知来指示观察者202A、202B中的哪些观察者当前在被跟踪以进行扭曲校正。
在一些实施例中，显示调整系统114可与观察者202A-D中的一个或多个观察者的移动装置203通过接口连接以帮助确定方位和/或轨迹。例如，在与显示调整系统114相适应的移动装置203上加载的应用能够例如通过在一个或多个移动装置203与显示调整系统114之间的Wi-Fi或蓝牙链路来帮助观察者202A-D通过显示装置204进行寻路。例如，由移动装置203例如通过并入在移动装置203中的加速计、全球定位系统数据和/或其它传感器捕捉的方位和移动数据能够被用来向显示调整系统114通知观察者202A-D的轨迹。观察者202A-D无需为了显示内容主动查看移动装置203；相反，显示内容能够被输出在显示装置204上，例如以便利用在显示装置204上作为观察者202A、202B要进行的下一次转弯或一组转弯提供的其它指示/指引来帮助进行通过走廊220的抬头导航。由移动装置203提供的方位和/或移动数据能够帮助显示调整系统114在观察者202A-D进入视野213A、213B中的任一个或两者前预期观察者202A-D的接近。
图3描绘了在诸如电梯目的地楼层选择接口304之类的用户输入屏幕302与能够包含文本308和轨迹图形310的特定于观察者的显示内容306之间转换的显示系统300。用户输入屏幕302和特定于观察者的显示内容306是在图1的显示装置104上能够被显示的内容的示例。显示系统300能够基于观察者选择312（例如，用户按压按钮）来从用户输入屏幕302转换到特定于观察者的显示内容306。显示系统300能够基于超时314或者确定多个观察者102中的一个不同观察者具有更大的显示优先级来从特定于观察者的显示内容306转换到用户输入屏幕302。
图4和5图示了相对于显示装置204建立第一观察角度（θ）和第二观察角度（ϕ）的观察者202的示例。在使用深度传感器的实施例中，最初可使用基于传感器的坐标系统（u，v，d）来计算物体方位，其中（u，v）是根据传感器的水平和垂直方位，并且d是与传感器的距离。（u，v，d）坐标能够基于更有用的参照系而被变换成“世界坐标”。例如，能够定义关于显示装置204的参照系。相应地，世界坐标系能包含（x，y）坐标作为在显示装置204上的水平和垂直方位，并且z作为背向显示装置204的方向。原点位于显示装置204的中心。备选地，能够使用向量或任何其它希望的坐标系统。
能够看到显示装置204的正面的任何观察者202处在z > 0的方位。此外，如果z >0，并且x = 0和y = 0，则观察者202直接在显示装置204的正面，并且无需校正。在图4和图5的示例中，z > 0，x < 0（在显示装置204的左侧）并且y < 0（定位在与显示装置204的顶部相比更靠近显示装置204的底部）。
相应地，用于计算扭曲校正的方法的示例如下。有两个主要的所关注的角度：第一观察角度θ，其是相对于显示装置204的（x，y）朝向的旋转角度，和第二观察角度φ，其是到显示装置204的表面的斜度。注意，在图4的示例中，θ仅取决于（x，y）坐标并且不取决于z。θ的计算能够是如下的：
θ = tan-1(x/y)，对于y < 0
= tan-1(x/y) + 180°，对于y > 0
= 0，对于y = 0，x = 0
= 90°，对于y = 0，x < 0
= -90°，对于y = 0，x > 0。
如在图5的示例中所描绘的，用于φ的计算能够是如下的：
φ = tan-1(sqrt(x2 + y2)/z)
再一次，对于z > 0，在φ = 0时，观察者202直接在显示装置204的前面；在φ更靠近90°时，角度是很斜的。
考虑到θ和φ，视觉内容能够被扭曲以针对观察者202的角度进行校正，以便显示内容对观察者202显得是无扭曲的。考虑显示的内容的方位以（x，y）坐标来被表示。例如，字母“E”可包含具有（x，y）坐标的4个线段。为将由（x，y）定义的内容变换成屏幕坐标（p，q），示例变换是如下的：
p = sqrt((x cos(φ))2 + y2) cos(θ + tan-1(x / (y/cos(φ))))
q = sqrt((x cos(φ))2 + y2) sin(θ + tan-1(x / (y/cos(φ))))。
现在，在继续参照图1-5的情况下参照图6，图6描绘了根据本公开的实施例的对于显示内容的基于优先级的调整的方法400的流程图。方法400能够例如由图1和图2的显示调整系统114执行。
在框402，显示调整系统114能够确定相对于显示装置104的第一观察者102A的方位。在框404，显示调整系统114能够确定相对于显示装置104的第二观察者102B的方位。第一内容屏幕能够包括对于第一观察者102A的第一电梯轿厢指派，并且第二内容屏幕能够包括对于第二观察者102B的第二电梯轿厢指派。确定相对于显示装置104的观察者102的方位能够包含确定观察者102与显示装置104的显示表面之间的角度差。
在框406，显示调整系统114能够基于至少部分以第一观察者102A的方位和第二观察者102B的方位为基础来确定第一观察者102A相比于第二观察者102B具有更大的显示优先级，在显示装置104上显示与第一观察者102A关联的第一内容屏幕。在框408，显示调整系统114能够基于至少部分以第一观察者102A的方位和第二观察者102B的方位为基础来确定第二观察者102B相比于第一观察者102A具有更大的显示优先级，在显示装置104上显示与第二观察者102B关联的第二内容屏幕。为限制在一组中多个人的移动和干扰的影响，基于确定第二观察者102B相比于第一观察者102A具有更大的显示优先级来显示与第二观察者102B关联的第二内容屏幕能够包含确认第一观察者102A在交互距离阈值205外，使得第一观察者102A还在注视显示装置104是较不可能的。更大的显示优先级能够是例如基于以下中的一项或多项来被确定的：相对于显示装置104的距离、相对于显示装置104的朝向、相对于显示装置104的方位的改变及相对于显示装置104的注视。
显示调整系统114能够基于检测到相比于第二观察者102B具有更大的显示优先级的第一观察者102A之间的转换，将显示装置104的显示内容切换到用户输入屏幕302。显示调整系统114能够基于在显示第一内容屏幕或第二内容屏幕后达到超时时段，将显示装置104的显示内容切换到用户输入屏幕302。显示调整系统114能够基于在屏幕保护程序超时时段内在显示装置104的阈值距离207内未检测到观察者102，将显示装置104切换到屏幕保护程序模式。
实施例可基于以下中的一项或多项来区分第一观察者102A与第二观察者102B：移动凭证、观察到的身体特性及面部识别。在观察者102被明确识别的情况下，显示装置104可避免转换到用户输入屏幕302，因为所识别的观察者102的现有楼层偏好可以是已知的。例如，显示的内容的关联能够基于检测观察者102的一些方面，诸如移动凭证（例如，发射独特地址的移动装置203、读取证章的射频标识符标记等）、通过识别观察者102的面部或者观察者102的身体特性（例如，年龄、性别、情绪状态等）。在此类情况下，只有第二屏幕（例如，电梯指派或寻路信息），在缺少到显示装置104的直接用户输入的情况下，显示装置104可向有最高优先级的观察者102显示定制的信息。例如，在人们涌进建筑物中时，观察者102能够走过显示装置104，如果目的地楼层能够以另一方式被检测到（例如，基于与移动凭证关联或通过其它识别关联的默认目的地楼层），则所述显示装置104一次示出一个电梯指派而不提示观察者102输入目的地楼层。因此，在人们走过显示装置104时，显示装置104能够提供为最高优先级观察者102（例如，面向显示装置104的显示表面的最靠近观察者）定制的信息。在第一观察者102A移动经过显示装置104并且第二观察者102B作为最高优先级出现时，显示装置104切换以示出为第二观察者102B定制的信息。
显示调整系统114还可跟踪作为最近观察者最近与显示装置104交互的观察者的方位，基于相对于显示装置104的最近观察者的方位来确定要应用的扭曲校正，以及将该扭曲校正输出到显示装置104。在最近观察者继续相对于显示装置104改变方位时，显示调整系统114能够调整该扭曲校正，其中该扭曲校正至少包括旋转和尺度改变操作。基于最近观察者与显示装置104之间的一个或多个角度差，显示调整系统114能够确定相对于显示装置104的最近观察者的方位。
尽管上面的描述已经以特定顺序描述了图6的流程过程，但应领会的是，除非在随附权利要求中另有明确要求，否则步骤的顺序可被变更。
如上所述，实施例能够采用处理器实现的过程和诸如处理器的用于实践那些过程的装置的形式。实施例也能够采用计算机程序代码的形式，所述计算机程序代码含有被包含在诸如网络云存储设备、SD卡、闪速驱动器、软盘、CD ROM、硬盘驱动器或任何其它计算机可读存储介质之类的有形介质中的指令，其中在计算机程序代码被加载到计算机中并且由计算机执行时，计算机变成用于实践实施例的装置。实施例也能够采用计算机程序代码的形式，所述计算机程序代码例如无论是存储在存储介质中，被加载到计算机中和/或由计算机执行，还是在一些传输介质上（诸如在电线或电缆上，通过光纤，或者经由电磁辐射）被传送，其中在计算机程序代码被加载到计算机中并且由计算机执行时，计算机变成用于实践实施例的装置。当计算机程序代码段在通用微处理器上被实现时，计算机程序代码段配置微处理器以创建特定逻辑电路。
用语“大约”意图包含与基于在提交本申请时可用的设备的特定量的测量关联的误差程度。例如，“大约”能够包含给定值的±8%或±5%或±2%的范围。
本文中使用的术语仅出于描述特定实施例的目的，并且无意于限制本公开。如本文中所使用的，除非上下文另有明确指示，否则单数形式“一（a、an）”和“该”也意在包含复数形式。将进一步理解的是，用语“包括（comprises和/或comprising）”在本说明书中使用时规定陈述的特征、整体、步骤、操作、元件和/或组件的存在，但不排除一个或多个其它特征、整体、步骤、操作、元件组件和/或其组合的存在或添加。
尽管本公开已参考一个或多个示例性实施例被描述，但是本领域中的技术人员将理解，在不背离本公开的范围的情况下可以进行各种改变并且等效物可替代其元件。另外，在不背离本公开的本质范围的情况下，可进行许多修改以使特定情况或材料适于本公开的教导。因此，意图是本公开不被限于作为预想用于实行本公开的最佳模式而公开的特定实施例，而是本公开将包含在落在权利要求的范围内的所有实施例。

Claims (20)

1.一种对于显示内容的基于优先级的调整的方法，所述方法包括：
确定相对于显示装置的第一观察者的方位；
确定相对于所述显示装置的第二观察者的方位；
基于至少部分以所述第一观察者的所述方位和所述第二观察者的所述方位为基础来确定所述第一观察者相比于所述第二观察者具有更大的显示优先级，在所述显示装置上显示与所述第一观察者关联的第一内容屏幕；以及
基于至少部分以所述第一观察者的所述方位和所述第二观察者的所述方位为基础来确定所述第二观察者相比于所述第一观察者具有更大的显示优先级，在所述显示装置上显示与所述第二观察者关联的第二内容屏幕。
2.如权利要求1所述的方法，其中所述第一内容屏幕包括对于所述第一观察者的第一电梯轿厢指派，并且所述第二内容屏幕包括对于所述第二观察者的第二电梯轿厢指派。
3.如权利要求1所述的方法，进一步包括：
基于检测到相比于所述第二观察者具有所述更大的显示优先级的所述第一观察者之间的转换，将所述显示装置的显示内容切换到用户输入屏幕。
4.如权利要求1所述的方法，进一步包括：
基于在显示所述第一内容屏幕或所述第二内容屏幕后达到超时时段，将所述显示装置的显示内容切换到用户输入屏幕。
5.如权利要求1所述的方法，进一步包括：
基于在屏幕保护程序超时时段内在显示装置的阈值距离内未检测到观察者，将所述显示装置切换到屏幕保护程序模式。
6.如权利要求1所述的方法，进一步包括：
跟踪作为最近观察者最近与所述显示装置交互的观察者的方位；
基于相对于所述显示装置的所述最近观察者的所述方位，确定要应用的扭曲校正；以及
将所述扭曲校正输出到所述显示装置。
7.如权利要求6所述的方法，进一步包括：
基于所述最近观察者与所述显示装置之间的一个或多个角度差，确定相对于所述显示装置的所述最近观察者的所述方位；以及
在所述最近观察者继续相对于所述显示装置改变方位时，调整所述扭曲校正，其中所述扭曲校正至少包括旋转和尺度改变操作。
8.如权利要求6所述的方法，其中所述方位是基于以下中的一项或多项来被确定的：深度传感器、雷达传感器、超声传感器、多摄像机系统、红外传感器及一个或多个地板压力传感器。
9.如权利要求1所述的方法，进一步包括：
基于以下中的一项或多项来区分所述第一观察者与所述第二观察者：移动凭证、观察到的身体特性及面部识别。
10.如权利要求1所述的方法，其中所述更大的显示优先级是基于以下中的一项或多项来被确定的：相对于所述显示装置的距离、相对于所述显示装置的朝向、相对于所述显示装置的方位的改变及相对于所述显示装置的注视。
11.一种系统，包括：
显示装置；
一个或多个传感器，所述一个或多个传感器能够操作以检测观察者的方位；以及
显示调整系统，所述显示调整系统可操作地耦合到所述显示装置和所述一个或多个传感器，所述显示调整系统被配置成执行多个操作，所述多个操作包括：
确定相对于所述显示装置的第一观察者的方位；
确定相对于所述显示装置的第二观察者的方位；
基于至少部分以所述第一观察者的所述方位和所述第二观察者的所述方位为基础来确定所述第一观察者相比于所述第二观察者具有更大的显示优先级，在所述显示装置上显示与所述第一观察者关联的第一内容屏幕；以及
基于至少部分以所述第一观察者的所述方位和所述第二观察者的所述方位为基础来确定所述第二观察者相比于所述第一观察者具有更大的显示优先级，在所述显示装置上显示与所述第二观察者关联的第二内容屏幕。
12.如权利要求11所述的系统，其中所述第一内容屏幕包括对于所述第一观察者的第一电梯轿厢指派，并且所述第二内容屏幕包括对于所述第二观察者的第二电梯轿厢指派。
13.如权利要求11所述的系统，其中所述系统进一步配置成执行所述操作，所述操作包括：
基于检测到相比于所述第二观察者具有所述更大的显示优先级的所述第一观察者之间的转换，将所述显示装置的显示内容切换到用户输入屏幕。
14.如权利要求11所述的系统，其中所述系统进一步配置成执行所述操作，所述操作包括：
基于在显示所述第一内容屏幕或所述第二内容屏幕后达到超时时段，将所述显示装置的显示内容切换到用户输入屏幕。
15.如权利要求11所述的系统，其中所述系统进一步配置成执行所述操作，所述操作包括：
基于在屏幕保护程序超时时段内在显示装置的阈值距离内未检测到观察者，将所述显示装置切换到屏幕保护程序模式。
16.如权利要求11所述的系统，其中所述系统进一步配置成执行所述操作，所述操作包括：
跟踪作为最近观察者最近与所述显示装置交互的观察者的方位；
基于相对于所述显示装置的所述最近观察者的所述方位，确定要应用的扭曲校正；以及
将所述扭曲校正输出到所述显示装置。
17.如权利要求16所述的系统，其中所述系统进一步配置成执行所述操作，所述操作包括：
基于所述最近观察者与所述显示装置之间的一个或多个角度差，确定相对于所述显示装置的所述最近观察者的所述方位；
在所述最近观察者继续相对于所述显示装置改变方位时，调整所述扭曲校正，其中所述扭曲校正至少包括旋转和尺度改变操作。
18.如权利要求16所述的系统，其中所述方位是基于以下中的一项或多项来被确定的：深度传感器、雷达传感器、超声传感器、多摄像机系统、红外传感器及一个或多个地板压力传感器。
19.如权利要求11所述的系统，其中所述系统进一步配置成执行所述操作，所述操作包括：
基于以下中的一项或多项来区分所述第一观察者与所述第二观察者：移动凭证、观察到的身体特性及面部识别。
20.如权利要求11所述的系统，其中所述更大的显示优先级是基于以下中的一项或多项来被确定的：相对于所述显示装置的距离、相对于所述显示装置的朝向、相对于所述显示装置的方位的改变及相对于所述显示装置的注视。
CN201911022297.0A 2018-10-26 2019-10-25 对于显示内容的基于优先级的调整 Pending CN111103972A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/171,396 US20200133385A1 (en) 2018-10-26 2018-10-26 Priority-based adjustment to display content
US16/171396 2018-10-26

Publications (1)

Publication Number Publication Date
CN111103972A true CN111103972A (zh) 2020-05-05

Family

ID=68387138

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911022297.0A Pending CN111103972A (zh) 2018-10-26 2019-10-25 对于显示内容的基于优先级的调整

Country Status (3)

Country Link
US (1) US20200133385A1 (zh)
EP (1) EP3667456A3 (zh)
CN (1) CN111103972A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11249637B1 (en) 2020-03-11 2022-02-15 Meta Platforms, Inc. User interface information enhancement based on user distance

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102163081A (zh) * 2011-05-13 2011-08-24 北京新岸线软件科技有限公司 用于屏幕交互的方法、电子设备和装置
US20150089393A1 (en) * 2013-09-22 2015-03-26 Cisco Technology, Inc. Arrangement of content on a large format display
US20160246364A1 (en) * 2013-11-08 2016-08-25 Siemens Healthcare Diagnostics Inc. Proximity Aware Content Switching User Interface
CN106339189A (zh) * 2015-11-16 2017-01-18 北京智谷睿拓技术服务有限公司 基于弯曲显示屏的内容加载方法、内容加载装置和用户设备
US20180284451A1 (en) * 2017-03-27 2018-10-04 Avegant Corp. Steerable High-Resolution Display

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020046100A1 (en) * 2000-04-18 2002-04-18 Naoto Kinjo Image display method
US8723796B2 (en) * 2012-02-02 2014-05-13 Kodak Alaris Inc. Multi-user interactive display system
EP2677458B1 (de) * 2012-06-22 2014-10-15 Sick Ag Optoelektronische Vorrichtung und Verfahren zur Helligkeitskorrektur
KR102158208B1 (ko) * 2013-07-26 2020-10-23 엘지전자 주식회사 전자기기 및 그것의 제어 방법
US10558264B1 (en) * 2016-12-21 2020-02-11 X Development Llc Multi-view display with viewer detection

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102163081A (zh) * 2011-05-13 2011-08-24 北京新岸线软件科技有限公司 用于屏幕交互的方法、电子设备和装置
US20150089393A1 (en) * 2013-09-22 2015-03-26 Cisco Technology, Inc. Arrangement of content on a large format display
US20160246364A1 (en) * 2013-11-08 2016-08-25 Siemens Healthcare Diagnostics Inc. Proximity Aware Content Switching User Interface
CN106339189A (zh) * 2015-11-16 2017-01-18 北京智谷睿拓技术服务有限公司 基于弯曲显示屏的内容加载方法、内容加载装置和用户设备
US20180284451A1 (en) * 2017-03-27 2018-10-04 Avegant Corp. Steerable High-Resolution Display

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
""Interactive Public Ambient Displays: Transitioning from Implicitto Explicit, Public to Personal, Interaction with Multiple Users"" *

Also Published As

Publication number Publication date
EP3667456A3 (en) 2020-09-09
US20200133385A1 (en) 2020-04-30
EP3667456A2 (en) 2020-06-17

Similar Documents

Publication Publication Date Title
US20210019854A1 (en) Location Signaling with Respect to an Autonomous Vehicle and a Rider
US9401050B2 (en) Recalibration of a flexible mixed reality device
US11468581B2 (en) Distance measurement method, intelligent control method, electronic device, and storage medium
US8730164B2 (en) Gesture recognition apparatus and method of gesture recognition
US20180196415A1 (en) Location Signaling with Respect to an Autonomous Vehicle and a Rider
US10783654B2 (en) Information processing apparatus, information processing method, and recording medium
US20120026088A1 (en) Handheld device with projected user interface and interactive image
EP3566022B1 (en) Location signaling with respect to an autonomous vehicle and a rider
EP3435346B1 (en) Spectacle-type wearable terminal, and control method and control program for same
KR20210115026A (ko) 차량 인텔리전트 운전 제어 방법 및 장치, 전자 기기 및 기억 매체
US10321065B2 (en) Remote communication method, remote communication system, and autonomous movement device
US10634918B2 (en) Internal edge verification
US9031772B2 (en) Assistance system and generation method of dynamic driving information
JP6512793B2 (ja) 撮像装置、監視カメラシステム、撮像装置の制御方法およびプログラム
US20120098802A1 (en) Location detection system
CN111103972A (zh) 对于显示内容的基于优先级的调整
JP2018169787A (ja) 自律型モビリティシステムおよび自律型モビリティの制御方法
JP2012022646A (ja) 視線方向検出装置、視線方向検出方法及び安全運転評価システム
CN110502170B (zh) 对显示内容的基于位置的调整
JP2017041125A (ja) 情報処理装置、情報処理方法、およびプログラム
KR20150006582A (ko) 열화상 카메라에서 촬영된 개체가 사람인지 여부를 판단하는 방법 및 이를 이용한 열화상 시스템
KR20130063593A (ko) 촬상장치를 이용하여 객체의 위치와 거리를 측정하고 이를 표현하는 장치
TWI623451B (zh) 適用於倒車顯影的影像視角切換系統及其方法
US20230309057A1 (en) Position estimation system, information terminal used for same, and position estimation method
JP2001194141A (ja) 移動体の位置検出方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20200505

WD01 Invention patent application deemed withdrawn after publication