CN102165404B - 物体检测与用户设置 - Google Patents

物体检测与用户设置 Download PDF

Info

Publication number
CN102165404B
CN102165404B CN200980138099.9A CN200980138099A CN102165404B CN 102165404 B CN102165404 B CN 102165404B CN 200980138099 A CN200980138099 A CN 200980138099A CN 102165404 B CN102165404 B CN 102165404B
Authority
CN
China
Prior art keywords
user
client computer
arrange
content
user interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200980138099.9A
Other languages
English (en)
Other versions
CN102165404A (zh
Inventor
N·M·诺伊费尔德
G·梅蒂福戈
C·J·米戈斯
A·A·克莱因汉兹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN102165404A publication Critical patent/CN102165404A/zh
Application granted granted Critical
Publication of CN102165404B publication Critical patent/CN102165404B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明描述了物体检测及用户设置技术。在一实现中，放置在客户机的表面上的物体由该客户机来检测。确定多个用户中的哪些用户对应于所检测到的物体。定位对应于所确定的用户的一个或多个用户设置。

Description

物体检测与用户设置
背景
用户可以访问日益增加种类的内容。此外，用户也不断接触到可用于与这些内容进行交互的不同设备。例如，传统上，用户限于使用台式计算机来访问因特网。然而，现在用户可以使用各种其他设备来访问因特网，比如游戏控制台、个人数字助理(PDA)和移动“智能”电话。
因此，用户可以利用各种不同设备来与各种不同的内容交互。然而，可用于使用不同设备来与内容进行交互的传统技术往往是脱节且非人性化的。因此，用户对于内容的体验即使是在使用相似设备时也可能会在各设备之间变化。
概述
描述了物体检测与用户设置技术。在一实现中，客户机检测到放置在该客户机的表面上的物体。确定多个用户中的哪些用户对应于所检测到的物体。定位与所确定的用户相对应的一个或多个用户设置。
在一实现中，客户机标识放置在该客户机的表面上的、包含一个或多个用户设置的物体。根据该一个或多个用户设置来配置用户界面，且使用该表面的至少一部分来输出该用户界面。
在一实现中，客户机包括具有桌子形状因素的外壳、设置在该外壳的桌面上的表面、以及设置在该外壳内的一个或多个模块。该一个或多个模块被配置为通过本地网络连接与电视机进行交互并在该表面上显示与当前正显示在电视机上的内容相关的内容。该一个或多个模块还被配置为检测来自用户的经由该表面进行的一个或多个输入，并使用这些输入中的至少一个来控制内容在该表面上的显示。该一个或多个模块还进一步被配置为使用这些输入中的另外一个输入来控制内容在电视机上的显示。
提供本概述以便以简化的方式来介绍在以下详细描述中进一步描述的一些概念。本概述并不是意在标识出要求保护的主题的关键特征或必要特征，也不是意在用于帮助确定所要求保护的主题的范围。
附图简述
详细描述将参考附图来进行说明。在附图中，附图标记最左边一位数字标识了该附图标记第一次出现的图。在说明书和附图中的不同实例中对相同的附图标记的使用可以指示类似或相同的项。
图1是可操作来执行物体检测和用户设置技术的示例实现中的环境的图示。
图2是更详细地示出图1的客户机的示例实现中的系统的图示。
图3是描绘一示例实现中的过程的流程图，其中基于一个或多个用户设置来配置用户界面，该用户设置是基于放置在客户机的表面上的物体的检测来定位的。
图4是描绘一示例实现中的过程的流程图，其中放置在图1和2的客户机的表面上的物体包括被用于配置用户界面的用户设置。
图5是示出一示例实现中的过程的流程图，其中使用通用于多个用户的用户设置来配置用户界面。
详细描述
概览
描述了物体检测及用户设置技术。在一实现中，用户界面的配置基于放置在客户机的表面上的一个或多个物体。例如，该客户机被配置为具有桌子形状因素。该客户机还可包括确定什么物体被放置在该桌子的表面上——例如桌面上——的功能。对放置在表面上的特定物体的标识然后可用于确定应使用哪些用户设置来配置用户界面。
例如，用户可以将电话放在客户机的表面上。该电话可以被检测到，并且可使用存储在该电话中的用户设置来配置用户界面，如最喜欢的电视频道。在另一示例中，被放置在桌子上的物体(例如，与一特定汽车相对应的一串车钥匙)可以被用于定位与该用户相对应的用户设置。也可构想各种其他的示例，其进一步讨论可以关于以下各节来找到。
在接下来的讨论中，首先描述可操作来执行一种或多种关于物体检测及用户设置的技术的示例环境。然后描述可使用该示例环境以及其他环境来实现的示例过程。因此，该过程的实现并不限于该示例环境，该示例环境也不限于该示例过程的实现。
示例环境
图1是可操作来使用关于物体检测及用户设置的技术的示例实现中的环境100的图示。所示环境100包括客户机102，客户机102通过网络104与被设置为电视机的另一客户机106(相应地，在接下来的讨论中可对该另一个客户机106或者电视机106进行引用)进行通信耦合；带有内容110的内容提供者108；和带有一个或多个广告114的广告者112。
客户机102可以用各种方式来配置。例如，客户机102可以被配置为能够通过网络104进行通信的计算机，如台式计算机、移动站、娱乐设备、与显示设备通信耦合的机顶盒、无线电话、游戏控制台等等。因此，客户机102的范围可以从带有充足的存储器和处理器资源的全资源设备(例如个人计算机、游戏控制台)，到带有有限存储器和/或处理资源的低资源设备(例如传统机顶盒、手持式游戏控制台)。客户机102还可以涉及操作该客户机的个人和/或实体。换言之，客户机102可以描述包括软件和/或设备的逻辑客户机。
尽管网络104被示为因特网，但该网络可以采取各种各样的配置。例如，网络104可以包括广域网(WAN)、局域网(LAN)、无线网络、公用电话网、内联网等等。此外，尽管示出了单个网络104，但网络104也可以被配置为包括多个网络。例如，客户机102和另一个客户机106可以通过本地网络连接来彼此通信耦合。另外，客户机102可以通过因特网与内容提供者108通信耦合。同样，广告者112可以通过因特网与内容提供者108通信耦合。也构想了各种各样其他实例。
在所示环境100中，客户机102被示为具有桌子形状因素。桌子形状因素包括含有多个腿118的外壳116。外壳116包括含有表面120的桌面，表面120被配置为显示一个或多个图像，如图1中所示汽车。
客户机102进一步被示为包括表面计算模块122。表面计算模块122代表了客户机102提供充分利用表面120的计算相关功能的功能。例如，表面计算模块122可以被配置为通过表面120输出用户界面。表面计算模块122还可以被配置为检测与表面120的交互及因此与用户界面的交互。因此，用户然后可以用各种方式通过表面120与用户界面进行交互。
例如，用户可以用一个或多个手指作为光标控制设备、作为画笔来操纵图像(例如，调整图像的大小和移动图像)、转移文件(例如在客户机102和另一个客户机106之间)、通过因特网浏览经由网络104获得内容110、与在客户机102本地的另外一个客户机106(例如，电视机)进行交互(例如，选择要由该另一个客户机106输出的内容)，等等。因此，客户机102的表面计算模块122可以用各种方式来充分利用表面120，包括将它作为输出设备和出入设备，其进一步讨论可以关于图2来找到。
客户机102还被示为含有用户界面(UI)配置模块124和用户设置126。UI配置模块124是代表了客户机102使用用户设置126来配置用户界面的功能。例如，如前面所描述的，表面计算模块122可以与表面120结合来用作输入设备。因此，放置在表面120上的物体可以被表面计算模块122检测到。
这些物体随后可以被表面计算模块122标识来标识对应于这些物体的用户设置126。例如，物体可以被配置为维护用户设置126，如用户的移动电话。一旦物体被检测到，可以从该物体中检索用户设置126，并且该用户设置由UI设置模块124使用来配置用户界面。在另一个示例中，物体的标识可以是用户定位对应的用户设置126，如通过检测某个特定用户的车钥匙，然后从客户机102本地的存储中和/或通过网络104远程地检索用户设置126。
各种不同的用户界面可以使用用户设置126来配置。例如，用户界面可以通过被配置成控制客户机102的操作的表面120来输出。在另一示例中，用户界面可以由另一客户机106输出，如电视机上的被配置为包括用户最爱的节目的电子节目指南(EPG)。
UI设置模块124还可以支持各种功能来增强对另一客户机106(示为图1中的电视机)输出的内容的观看。例如，客户机102和另一客户机106可以通过网络104(例如，通过局域网直接地，和/或通过可经由因特网访问的远程服务器间接地)进行通信来了解彼此的状态。当电视节目通过另外一个与增强体验相关联的客户机106显示的时候，客户机102显示增强经由另一客户机106显示的内容的内容。
例如，附加信息可以在事件(比如体育赛事)期间显示，从而对当前正经由另一个客户机106输出的内容进行补充。例如，如图1所示在另一个客户机106上的汽车赛的输出可以通过显示统计数据、赛道布局、附加照相机角度等经由客户机102的表面来补充。
在另一实例中，可以通过客户机102的表面120来跟踪多个事件。例如，可以在体育赛事期间跟踪多个并发事件，诸如视频反馈、信息等等。以此方式，用户可以容易地获知当前未由另一个客户机106输出的、可供输出的附加内容。
在又一实例中，可以通过客户机102的表面120输出警报，该警报可以经由客户机102的用户设置126来指定。用户设置126指定各种不同的警报条件，如体育赛事中指定动作的发生、商务关系(如股票价格)、天气等等。与该警报相关的信息然后可以通过客户机102的表面120和/或另一客户机106来输出。在不背离本发明的精神和范围的情况下，还构想了各种其他示例。
一般地，此处描述的所有功能可以使用软件、固件(如固定逻辑电路)、手动处理或这些实现的组合来实现。此处使用的术语“模块”、“功能”和“逻辑”一般表示软件、固件、或软件与固件的组合。在软件实现的情况下，模块、功能或者逻辑表示当在处理器(如一个或多个CPU)上执行时完成指定任务的程序代码。该程序代码可以被存储在一个或多个计算机可读存储器设备中，其进一步描述可以关于图2来找到。下文中描述的表面技术的特征在是平台独立的，意味着该技术可以在具有各种处理器的各种商用计算平台上实现。
图2描绘了更详细地示出图1的客户机102的示例实现中的系统200。客户机102包括图1的表面计算模块122，该表面计算模块在本实例中被示为包括处理器202和存储器204。处理器不受用于形成它们的材料和其中采用的处理机制的限制。
例如，处理器可以包括半导体和/或晶体管(比如，电子集成电路(IC))。在这一上下文中，处理器可执行指令可以是电子地可执行的指令。或者，处理器的机制或者处理器所用的机制，因此是计算设备的机制或计算设备所用的机制，可以包括但不限于量子计算、光学计算、机械计算(如使用纳米技术)等等。另外，尽管示出了单个存储器204，但可采用各种类型和组合的存储器，如随机存取存储器(RAM)、硬盘存储器、可移动存储介质、以及其他类型的计算机可读介质。
客户机102被示为在处理器202上执行操作系统206，该操作系统也可被存储于存储器204中。操作系统206可被执行来抽象底层客户机102的硬件和软件功能，如抽象成被示为存储于存储器204中的一个或多个应用208。在图2的该系统200中，UI配置模块204被示为与用户设置126一起存储于客户机102的存储器204中的应用208之一，例如，UI配置模块124是所示实例中的可执行模块。
表面计算模块122也被示为包括图像投影模块210和表面检测模块212。图像投影模块210代表了客户机102将图像投影到表面120上的功能。图像投影模块210可采用各种不同的技术来投影图像，如通过使用背投系统、LCD等等。
表面检测模块212代表了客户机102在一个或多个物体被放置在表面120附近时检测该一个或多个物体的功能。表面检测模块212可以采用各种不同的技术来实现该检测，如射频识别(RFID)、图像识别、条形码扫描、光学字符识别等等。
例如，图2的表面检测模块212被示为包括一个或多个红外投影仪214、一个或多个红外照相机216及检测模块218。一个或多个红外投影仪214被设置为将红外和/或近红外光投影到表面120上。一个或多个红外照相机216则可被配置为捕捉红外投影仪214输出的反射红外光的图像。
举例来说，诸如代表性用户的手220、222的手指、用户的电话224及钥匙226等物体可通过表面120为红外照相机216所见。在所示实例中，红外照相机216被置于表面120上与用户的手220、222相对的一侧，例如在客户机102的外壳内。检测模块218随后可以分析红外照相机216所捕捉到的图像来检测放置在表面120上的物体。这一分析的输出随后可以被提供给操作系统206、应用208等等。
在一实现中，表面检测模块212可以在单个时间点检测多个物体。例如，代表性用户的手220、222的手指可以被检测为与操作系统206所输出的用户界面进行交互。以此方式，客户机102可以支持与多个用户的同时交互。
客户机102还可以支持可用于与用户界面进行交互的手势。例如，可使用不同的手势来扩张图像、旋转图像、在设备之间移动文件、使特定内容项的输出睡眠(slept)等等。尽管描述了使用图像捕捉的检测，但表面计算模块122，尤其是表面检测模块212，也可采用各种其他技术来检测放在客户机的表面120上或其附近的物体，如RFID、“声音”技术(如类似于雷达的超声技术)、生物测量(如温度)等等。还构想了可用于充分利用于客户机102的表面120的交互的各种其他技术而不背离本发明的精神和范围。
在一实现中，UI配置模块124可以充分利用对客户机102的表面120上的物体的检测。例如，用户可将钥匙226放置在表面120上。钥匙226随后可以被表面检测模块212检测到，表面检测模块212将钥匙226已被检测到的指示输出到UI配置模块124。该指示可以用各种方式来配置，如对该钥匙226的品牌唯一的数字标识符、供UI配置模块124进一步处理的该钥匙226的图像，等等。
UI配置模块124随后可以标识放在表面120上的物体，并将标识用作配置用户界面的基础。继续前一示例，UI配置模块124可标识出与钥匙226相关联的特定用户并定位与该特定用户相对应的用户设置126。随后可基于用户设置126来配置用户界面并经由表面120来输出。其一个示例在图2中被示为汽车228的图像，作为图像投影模块210在表面120上输出的“背景”。在另一示例中，用户界面可以由另一客户机输出，如由经由网络104通信地耦合到客户机102的另一个客户机106输出的电子节目指南230。也构想了各种其他示例，其进一步讨论可以关于以下过程来找到。
示例过程
接下来的讨论描述了可以利用上述系统与设备实现的表面计算技术。这些过程中的每一个的各方面都可以用硬件、固件、或软件、或其组合来实现。这些过程被示为指定由一个或多个设备执行的操作的一组框，但不一定限于图示的执行各框的操作的次序。在接下来的讨论的各部分中，将对图1的环境和图2的系统进行参考。
图3描绘了一示例实现中的过程300，其中基于一个或多个用户设置来配置用户界面，该一个或多个用户设置基于对放置在客户机的表面上物体的检测来定位。检测置于客户机的表面上的物体(框302)。物体可用各种方式来检测，如通过之前相关图2描述的成像技术、射频识别技术、“声音”技术(如超声技术)、条形码、光学字符识别(OCR)等等。
因此，各种不同的物体可被放置在客户机102的表面120上以供客户机102检测。例如，一个或多个用户的手220、222的手指可被放置在客户机102的表面120上，钥匙226、手机、钱夹等等都可以。
确定多个用户中的哪些用户相对应于所检测到的物体(框304)。表面计算模块122例如可以使用图像识别和/或RFID技术(如通过读取唯一标识符)来确定钥匙226对应于特定用户。表面计算模块122然后可例如从客户机102本地的存储器204中和/或经由网络104远程地定位与该特定用户相对应的用户设置126(框306)。
使用一个或多个用户设置来配置用户界面(框308)。例如，用户设置126可以指定特定用户的“最爱”(如，最爱的频道、网站、音乐、演员等等)、要在用户界面中使用的特定背景、特定于一个或多个应用208的设置，等等。
另外，使用用户设置126来配置的用户界面可以用各种方式来输出。例如，该用户界面可以使用客户机的至少一部分表面来输出(框310)。在另一示例中，用户界面可以使用该客户机本地的另一客户机来输出(框312)，如图1和图2的另一客户机106。因此，该用户界面可被配置为提供与客户机102和/或被示为电视机的另一客户机106的交互。例如，用户界面可以经由客户机102的表面120输出以控制客户机102和/或电视机的操作，如改变频道、增加或减少音量等等。在不背离本发明的精神与范围的情况下，还构想了各种其他示例。
图4描绘了一示例实现中的过程400，其中被置于图1和图2的客户机102的表面120上的物体包括用于配置用户界面的用户设置。标识被置于客户机的表面上的物体，该物体包含一个或多个用户设置(框402)。用户可以将移动电话放置在客户机102的表面120上。表面计算模块122随后可以检测到移动电话的存在并发起与移动电话之间的本地网络连接(如本地无线连接)。表面计算模块122然后可以发现包含在移动电话的存储器中的用户设置。以此方式，移动电话中的用户设置可以容易地在客户机之间转移。
根据一个或多个用户设置来配置用户界面(框404)，并且使用至少一部分表面来输出该用户界面(框406)。如先前所讨论的，用户设置126可以由UI配置模块以各种方式使用来配置用户界面。因此，这些用户设置随后可被用于个性化用于检测包含该设置的物体的客户机102的表面120的用户界面。
在另一示例中，可以使用具有该表面的客户机本地的另一个客户机来输出(使用该一个或多个设置来配置的)另一用户界面(框408)。例如，另一客户机106可输出根据如图1和2所示的诸如指定电子节目指南(EPG)中的电视节目的安排的用户设置126来配置的EPG。尽管描述了根据对应于单个用户的设置对用户界面的配置，但应容易明白，用户界面可以使用对应于多个用户的用户设置来配置，其进一步讨论可以关于以下附图来找到。
图5描绘了一示例实现中的过程500，其中使用通用于多个用户的用户设置来配置用户界面。在某个特定时间点标识在客户机102附近的多个用户(框502)。例如，多个用户可以位于在图1的具有桌子形状因素的客户机102附近，其中每一用户都在客户机102的表面120上放置了可被用于使用上述一种或多种技术来标识用户的物体。也可采用各种其他技术，如语音识别、使表面120的指纹扫描、等等。
对所标识的多个用户中的每一个定位一个或多个用户设置(框504)，这可使用上述一种或多种技术来执行。然后确定所定位的一个或多个用户设置中的哪一些通用于所标识的多个用户(框506)。例如，各用户的用户设置可指示共享对特定内容的兴趣(如电视节目、音乐等等)、特定风格，等等。
随后可使用所确定的通用用户设置来配置用户界面(框508)。继续前一示例，电子节目指南中“最爱”部分可被配置为包括用户的通用最爱，可以在表面120上输出对应于共享兴趣的背景，等等。
结论
尽管用对结构特征和/或方法动作专用的语言描述了本发明，但可以理解，所附权利要求所限定的本发明不一定限于所描述的具体特征或动作。相反，这些具体特征和动作是作为实现所要求保护的本发明的示例形式而公开的。

Claims (16)

1.一种与物体检测和用户设置有关的方法，包括：
由客户机检测放置在所述客户机的表面上的物体；
确定多个用户中的哪些用户与所检测到的物体相对应；
定位与所确定的用户相对应的一个或多个用户设置；以及
使用所述一个或多个用户设置来配置在所述客户机的表面上显示的用户界面，
其中确定多个用户中的哪些用户与所检测到的物体相对应包括经所述表面使用标识技术来标识所检测到的物体的唯一标识符，所述唯一标识符可用于标识特定用户并定位与所述特定用户对应的所述一个或多个用户设置，并且
其中定位与所确定的用户相对应的一个或多个用户设置包括在所检测到的物体和所述客户机之间发起网络连接并从所检测到的物体获取与所述特定用户对应的一个或多个用户设置。
2.如权利要求1所述的方法，其特征在于：
所述客户机具有桌子形状因素；以及
所述表面作为所述客户机的桌面的一部分来包括。
3.如权利要求1所述的方法，其特征在于：
所述检测是对多个所述物体执行的；以及
用户界面的配置是使用通用于多个用户的用户设置来执行的。
4.如权利要求1所述的方法，其特征在于：
所述检测是通过图像识别来执行的，所述图像识别是使用位于所述客户机的表面下面的、所述客户机的一个或多个照相机来执行的。
5.如权利要求1所述的方法，其特征在于，所述检测至少部分地通过对物体的至少一部分的条形码扫描或光学字符识别来执行。
6.如权利要求1所述的方法，其特征在于，所述检测至少部分地通过使用一个或多个射频识别技术来执行。
7.如权利要求1所述的方法，其特征在于，进一步包括：
使用所述客户机的表面的至少一部分来输出所述用户界面。
8.如权利要求7所述的方法，其特征在于，所述用户界面被配置为控制具有所述表面的所述客户机本地的另一客户机的内容输出。
9.如权利要求7所述的方法，其特征在于，所述用户界面是电子节目指南(EPG)。
10.如权利要求1所述的方法，其特征在于，进一步包括：
使用所述客户机本地的另一客户机来输出所述用户界面。
11.如权利要求10所述的方法，其特征在于，所述另一客户机是电视机。
12.一种客户机(102)，包括：
具有桌子形状因素的外壳；
被设置在所述外壳的桌面上的表面；以及
被设置在所述外壳内的一个或多个模块，所述一个或多个模块：
通过本地网络连接与电视机进行交互；
在所述表面上显示与当前在所述电视机上显示的内容相关的内容；
检测放置在所述表面上的物体；
确定多个用户中的哪些用户与所检测到的物体相对应；
定位与所确定的用户相对应的一个或多个用户设置；
经由所述表面来检测来自用户的一个或多个输入；以及
使用与特定用户对应的所述一个或多个用户设置经所述表面输出一用户界面，所述用户界面被配置用于经所述表面来进行用户交互，用以：
使用至少一个所述输入来控制所述表面上的内容的显示；以及
使用另一所述输入来控制所述电视机上的内容的显示，
其中确定多个用户中的哪些用户与所检测到的物体相对应包括经所述表面使用标识技术来标识所检测到的物体的唯一标识符，所述唯一标识符可用于标识所述特定用户并定位与所述特定用户对应的所述一个或多个用户设置，并且
其中定位与所确定的用户相对应的一个或多个用户设置包括在所检测到的物体和所述客户机之间发起网络连接并从所检测到的物体获取与所述特定用户对应的一个或多个用户设置。
13.如权利要求12所述的客户机，其特征在于，所述表面上显示的内容包括通过与经由所述表面输出的用户界面进行交互而设定的警报。
14.如权利要求12所述的客户机，其特征在于：
所述电视机上显示的内容是体育赛事；以及
所述表面上显示的内容包括与所述体育赛事相关的统计量。
15.如权利要求12所述的客户机，其特征在于：
所述电视机上显示的内容是电视节目；以及
所述表面上显示的内容是与所述电视节目相对应的因特网聊天。
16.如权利要求12所述的客户机，其特征在于，所述一个或多个模块包括：
在所述表面上显示内容的背投系统；
将红外光投影到所述表面上的一个或多个红外投影仪；
捕捉所述表面的红外图像的一个或多个红外照相机；以及
处理所述红外图像以检测输入的检测模块。
CN200980138099.9A 2008-09-24 2009-09-22 物体检测与用户设置 Expired - Fee Related CN102165404B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/236,691 2008-09-24
US12/236,691 US8421747B2 (en) 2008-09-24 2008-09-24 Object detection and user settings
PCT/US2009/057885 WO2010036658A2 (en) 2008-09-24 2009-09-22 Object detection and user settings

Publications (2)

Publication Number Publication Date
CN102165404A CN102165404A (zh) 2011-08-24
CN102165404B true CN102165404B (zh) 2015-04-01

Family

ID=42037709

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980138099.9A Expired - Fee Related CN102165404B (zh) 2008-09-24 2009-09-22 物体检测与用户设置

Country Status (7)

Country Link
US (1) US8421747B2 (zh)
EP (1) EP2350801B1 (zh)
JP (1) JP5592378B2 (zh)
KR (1) KR101619559B1 (zh)
CN (1) CN102165404B (zh)
RU (1) RU2541222C2 (zh)
WO (1) WO2010036658A2 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8494197B2 (en) * 2008-12-19 2013-07-23 Starkey Laboratories, Inc. Antennas for custom fit hearing assistance devices
JP5489478B2 (ja) * 2009-01-26 2014-05-14 キヤノン株式会社 画像表示装置及び画像表示方法
US20110238535A1 (en) * 2010-03-26 2011-09-29 Dean Stark Systems and Methods for Making and Using Interactive Display Table for Facilitating Registries
JP5655515B2 (ja) * 2010-11-11 2015-01-21 ソニー株式会社 情報処理装置、テーブル、表示制御方法、プログラム、携帯端末、及び情報処理システム
TWI512547B (zh) * 2011-12-20 2015-12-11 Univ Nat Chiao Tung 互動式系統及互動式裝置
CN103902018B (zh) * 2012-12-24 2018-08-10 联想(北京)有限公司 一种信息处理方法、装置及一种电子设备
CN103941990B (zh) * 2013-01-21 2017-12-29 联想(北京)有限公司 一种信息处理方法及电子设备
JP2015200960A (ja) * 2014-04-04 2015-11-12 株式会社リコー 情報システム、情報処理方法、及びプログラム
KR101533603B1 (ko) * 2014-11-03 2015-07-06 (주)라온스퀘어 인식방법 및 인식장치
JP6312044B2 (ja) * 2014-12-10 2018-04-18 カシオ計算機株式会社 情報表示制御装置及びプログラム
US9841847B2 (en) 2014-12-25 2017-12-12 Panasonic Intellectual Property Management Co., Ltd. Projection device and projection method, for projecting a first image based on a position of a moving object and a second image without depending on the position
EP3353695B1 (en) * 2015-09-24 2021-05-19 Locator IP, LP Hyper-localized weather/environmental data
US11089372B2 (en) * 2018-03-28 2021-08-10 Rovi Guides, Inc. Systems and methods to provide media asset recommendations based on positioning of internet connected objects on an network-connected surface
US10845985B2 (en) 2018-09-14 2020-11-24 Sigmasense, Llc. Identification in touch systems
JP6654722B2 (ja) * 2019-03-08 2020-02-26 シャープ株式会社 画像表示装置および画像表示方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2655311Y (zh) * 2003-07-09 2004-11-10 海南视界科技有限公司 平面电脑台
CN101251786A (zh) * 2008-01-18 2008-08-27 李喆 交互式媒体多人触控系统

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03143474A (ja) 1989-10-31 1991-06-19 Brother Ind Ltd ミシンの布送り装置
US5543150A (en) 1993-09-15 1996-08-06 Columbia Laboratories, Inc. Method of progesterone delivery and affect thereof
EP1667445A1 (en) * 1995-10-02 2006-06-07 Starsight Telecast, Inc. Systems and methods for providing television schedule information
US6837436B2 (en) * 1996-09-05 2005-01-04 Symbol Technologies, Inc. Consumer interactive shopping system
KR20030037055A (ko) 2001-11-02 2003-05-12 박재숙 디지털 방송 시스템에서 부가 데이터 서비스 표시방법
US20070266413A1 (en) * 2001-12-20 2007-11-15 I-Requestv, Inc. Method and system for supplementing television programming with e-mailed magazines
AU2003211901A1 (en) 2002-02-19 2003-09-09 Sharp Kabushiki Kaisha Display, electronic device, data transmitting method, information terminal, host apparatus, program, recording medium
US20050177861A1 (en) 2002-04-05 2005-08-11 Matsushita Electric Industrial Co., Ltd Asynchronous integration of portable handheld device
US7467380B2 (en) * 2004-05-05 2008-12-16 Microsoft Corporation Invoking applications with virtual objects on an interactive display
US7379047B2 (en) 2004-06-30 2008-05-27 Microsoft Corporation Using a physical object to control an attribute of an interactive display application
US20060044282A1 (en) 2004-08-27 2006-03-02 International Business Machines Corporation User input apparatus, system, method and computer program for use with a screen having a translucent surface
JP4714473B2 (ja) * 2005-02-07 2011-06-29 Ｈｏｙａ株式会社 ユーザ認識機能を有するデジタルカメラ
US7970870B2 (en) * 2005-06-24 2011-06-28 Microsoft Corporation Extending digital artifacts through an interactive surface
US20070022437A1 (en) 2005-07-19 2007-01-25 David Gerken Methods and apparatus for providing content and services coordinated with television content
ITMI20051418A1 (it) * 2005-07-22 2007-01-23 Indena Spa Analoghi del tiocolchicoside ad attivita'miorilassante e antiinfiammatoria
US8736547B2 (en) 2006-04-20 2014-05-27 Hewlett-Packard Development Company, L.P. Method and system for interfacing a digital device with an interactive display surface
JP4713428B2 (ja) * 2006-09-15 2011-06-29 シャープ株式会社 情報処理装置、情報処理方法およびプログラム
JP2008097151A (ja) * 2006-10-06 2008-04-24 Sharp Corp 情報処理装置、情報処理システム、情報処理方法およびプログラム
US20080098450A1 (en) * 2006-10-16 2008-04-24 Toptrend Global Technologies, Inc. Dual display apparatus and methodology for broadcast, cable television and IPTV
JP4922744B2 (ja) * 2006-12-14 2012-04-25 キヤノン電子株式会社 画像読取装置及びその制御方法、並びにプログラム
JP5000989B2 (ja) * 2006-11-22 2012-08-15 シャープ株式会社 情報処理装置、情報処理方法およびプログラム
TWI337318B (en) * 2007-05-15 2011-02-11 Htc Corp Electronic device operated by using touch display
US20090006958A1 (en) 2007-06-29 2009-01-01 Nokia Corporation Method, Apparatus and Computer Program Product for Providing an Object Selection Mechanism for Display Devices
JP4986766B2 (ja) * 2007-08-09 2012-07-25 パナソニック株式会社 携帯端末用制御装置
US20090091529A1 (en) * 2007-10-09 2009-04-09 International Business Machines Corporation Rendering Display Content On A Floor Surface Of A Surface Computer

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2655311Y (zh) * 2003-07-09 2004-11-10 海南视界科技有限公司 平面电脑台
CN101251786A (zh) * 2008-01-18 2008-08-27 李喆 交互式媒体多人触控系统

Also Published As

Publication number Publication date
EP2350801B1 (en) 2019-02-13
KR101619559B1 (ko) 2016-05-10
JP5592378B2 (ja) 2014-09-17
RU2541222C2 (ru) 2015-02-10
CN102165404A (zh) 2011-08-24
RU2011111084A (ru) 2012-10-27
US20100074464A1 (en) 2010-03-25
EP2350801A4 (en) 2017-02-15
US8421747B2 (en) 2013-04-16
KR20110063649A (ko) 2011-06-13
JP2012503801A (ja) 2012-02-09
WO2010036658A2 (en) 2010-04-01
WO2010036658A3 (en) 2010-06-17
EP2350801A2 (en) 2011-08-03

Similar Documents

Publication Publication Date Title
CN102165404B (zh) 物体检测与用户设置
US20200311126A1 (en) Methods to present search keywords for image-based queries
JP5658669B2 (ja) 物体識別を使用するターゲットを絞った広告
CN102165403A (zh) 具有缩放功能的用户界面
US11706485B2 (en) Display device and content recommendation method
TW201826805A (zh) 播放處理方法、裝置和設備
US11921777B2 (en) Machine learning for digital image selection across object variations
CN104067204A (zh) 指示笔计算环境
TW201329759A (zh) 搜尋查詢上下文
US10379721B1 (en) Interactive interfaces for generating annotation information
US8620113B2 (en) Laser diode modes
US20170013309A1 (en) System and method for product placement
CN112286617B (zh) 操作指导方法、装置及电子设备
KR20190028015A (ko) 딥 러닝 기반 영상 처리를 이용한 증강 현실 광고 제공 시스템 및 방법
CN115695844A (zh) 一种显示设备、服务器及媒资内容推荐方法
WO2023000950A1 (zh) 显示设备及媒资内容推荐方法
CN111815404B (zh) 虚拟物品分享方法及装置
CN111815404A (zh) 虚拟物品分享方法及装置
TW202026990A (zh) 智慧型內容模板推薦系統與方法
AU2013205544A1 (en) Method, apparatus and system for displaying augmented content

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150803

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150803

Address after: Washington State

Patentee after: Micro soft technique license Co., Ltd

Address before: Washington State

Patentee before: Microsoft Corp.

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150401

Termination date: 20200922