CN102749992A - 多功能输入设备 - Google Patents

多功能输入设备 Download PDF

Info

Publication number
CN102749992A
CN102749992A CN2012101300343A CN201210130034A CN102749992A CN 102749992 A CN102749992 A CN 102749992A CN 2012101300343 A CN2012101300343 A CN 2012101300343A CN 201210130034 A CN201210130034 A CN 201210130034A CN 102749992 A CN102749992 A CN 102749992A
Authority
CN
China
Prior art keywords
user
module
equipment
input
input equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012101300343A
Other languages
English (en)
Inventor
S·普拉特
Y·巴克拉克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN102749992A publication Critical patent/CN102749992A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00—Teaching, or communicating with, the blind, deaf or mute
    • G09B21/001—Teaching or communicating with blind persons
    • G09B21/008—Teaching or communicating with blind persons using visual presentation of the information for the partially sighted

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Facsimiles In General (AREA)

Abstract

一种用于与计算设备的显示装置上的图形用户界面(GUI)交互的系统和方法。该系统包括多功能输入设备，该多功能输入设备配置成与计算设备的简化的图形用户界面(GUI)交互。该多功能输入设备配置成为计算知识和/或技能有限以及生理和/或认知能力受限的用户提供改善的计算设备可及性。

Description

多功能输入设备
相关申请的交叉引用
本申请要求2011年4月19日提交的美国临时专利申请S/N 61/477,007的权益，该临时专利申请的全部内容通过引用结合于此。
技术领域
本公开内容涉及用于计算机的输入设备，更具体地涉及用于改善计算设备的可及性(accessibility)和易用性的多功能输入设备。
背景技术
随着个人计算机(PC)和其它个人计算设备(即上网本、平板计算机、智能电话)的出现以及因特网的引入，此类计算设备的用户能够执行各种各样的任务。例如，用户可浏览web、访问和交换电子邮件、访问社会服务网站等等。然而，随着使用计算机和计算机服务的增多，计算机程序的复杂程度也已提高。虽然近年来计算设备的技术进步可允许提供更大范围的服务，但由于计算机复杂的计算机程序和/或用户界面，几乎没有计算机基本知识或者缺乏基本计算机技能的人士在访问计算机时会有困难。
随着技术的进步，许多国家的平均寿命也在提高。因此，许多国家具有不断增加的老龄人口，而由于计算机可以提供的服务，一些老年人也越来越多地被吸引而使用计算机。例如，连接上网的家庭比以往任何时候都多。许多家庭可能拥有数码相机，并使用电子邮件来在线地通信并分享照片或视频。此外，家庭可经由启用web的视频服务来连接。
虽然一些老年人可能愿意使用计算机和因特网，但计算机复杂的计算机程序和用户界面会导致一些老年人克制拥有和/或甚至使用计算机。具体而言，一些老年人所具有的计算机技能有限，或者连如何操作计算机也几乎不知道或完全不知道，而且他们可能发现与操作计算机相关联的学习曲线令人望而却步。此外，一些老年人可能受生理限制(例如视力限制、听力限制、手一眼协调差、手和手指灵活性差)，这些限制会妨碍他们以常规的计算机操纵方式(即鼠标、键盘，等等)来访问计算机。
附图说明
要求保护的主题的特征和优点将从以下与其一致的实施例的详细描述中显而易见，实施例的描述应当参考附图来考虑，在附图中：
图1示出与本公开内容的各实施例一致的用于提供改善的计算机可及性和易用性的系统的框图；
图2更详细地示出图1的系统的框图；
图3示出与本公开内容一致的多功能输入设备的一个示例性实施例的俯视图；
图4示出与本公开内容一致的在计算设备的显示器上显示的图形用户界面(GUI)的一个示例性实施例；
图5示出与本公开内容一致的在计算设备的显示器上显示的GUI的另一示例性实施例；以及
图6是示出与本公开内容的各实施例一致的用于与计算设备的显示装置上的图形用户界面(GUI)交互的一个实施例的流程图。
具体实施方式
作为概述，本公开内容总体上涉及一种为计算知识和/或技能有限的用户提供改善的计算设备可及性的系统和方法。具体而言，与本公开内容一致的系统包括一种多功能输入设备，该多功能输入设备配置成与计算设备(诸如但不限于桌面计算机、膝上型计算机和/或移动计算设备)和该计算设备的图形用户界面(GUI)通信。
该多功能输入设备包括一个或多个传感器，所述一个或多个传感器配置成基于用户输入来捕获数据并发送数据至该计算设备。具体而言，该多功能输入设备包括一个或多个用户可选择的按钮和/或拨动开关(toggl e)，所述一个或多个用户可选择的按钮和/或拨动开关被配置成允许用户对该计算设备的显示器上的GUI进行导航和/或操纵。该多功能输入设备还包括集成照相机，该集成照相机配置成捕获图像和/或视频。例如，所捕获的图像和/或视频可用于社交网络，而用户可在社交网络中分享这些图像和/或视频。此外，用户可使用该照相机来放大印刷信息(例如杂志、报纸等等)，其中该照相机可扫描印刷信息，并将该信息发送至该计算设备以转发至显示器。该多功能输入设备可包括另外的部件，包括但不限于：音频部件，配置成接收和在听觉上再现来自该计算设备的音频内容；话筒，配置成捕获音频数据(诸如用户声音)以供在计算设备上执行的应用来使用。
与本公开内容一致的系统可为计算机技能、知识和/或能力有限的用户(例如初学用户、老年人等等)提供更可及的且用户友好的用于操作计算设备的手段。此外，与本公开内容一致的多功能输入设备可允许用户从单个设备执行计算机上的多种任务，由此减少用户必须学习如何使用的外围设备的数量。此外，本文中描述的多功能输入设备还能减少所需的计算机外围设备及相应的计算机输入/输出端口的数量，由此使得PC插槽、I/O端口和/或通信链路(例如导线)的布置更易于用户管理。
参见图1，总体上示出了与本公开内容一致的系统10的一个实施例。该系统可包括输入设备12和计算设备14。如图所示，输入设备12可配置成经由通信链路16来访问计算设备14并与计算设备14通信。在一个实施例中，如本文中更详细描述地，输入设备12可配置成与计算设备14无线地通信，其中通信链路16可包括无线信号在输入和计算设备12、14之间的流送。应注意，在其它实施例中，输入设备12可配置成经由电缆(通信链路16是有线连接)与计算设备14通信，该电缆具有标准外围接口，诸如RS-232C、PS/2、USB等等。
计算设备14可包括(例如)个人计算机(PC)、上网本、平板计算机、智能电话以及其它个人计算设备。输入设备12一般可理解为包括配置成与计算设备14通信的人机接口设备(HID)(或外围设备)。具体而言，输入设备12可包括多种输入形式。例如，输入设备12可配置成允许用户向计算设备输入空间数据，以控制计算设备14的操作(即对运行在计算设备14上的GUI进行导航)。另外，输入设备可配置成允许用户捕获与图像和/或声音有关的数据，并将此类捕获的数据发送至计算设备14。
现参见图2，更详细地示出了图1的系统10。在所示实施例中，计算设备14可包括处理器18、存储器20、图形用户界面(GUI)22、输入/输出(I/O)电路24和/或其它适当的部件。计算设备14还可包括显示器26，其中用户可通过显示器26观看GUI 22。
如图所示，输入设备12可包括通信模块28，该通信模块28配置成允许输入设备12经由通信链路16与计算设备14通信。在所示实施例中，通信模块28可包括(例如)无线模块，该无线模块配置成允许输入设备12经由无线传输协议与计算设备14无线地通信。具体而言，通信模块28可以是启用WiFi的，从而允许根据2012年1月开始的IEEE 802.11标准的最新公布版本之一进行无线通信。例如，通信模块28可允许根据例如2012年1月开始的IEEE 802.11ac、IEEE 802.11ad和/或其它60GHz标准的最新公布版本在输入设备12与计算设备14之间进行无线通信。因此，计算设备14的I/O电路24可配置成根据上述标准与输入设备12的通信模块28通信。具体而言，I/O电路24可包括与输入设备12的通信模块28相似的通信模块(未示出)，从而允许计算设备14以无线方式向输入设备12发送信号和从输入设备12接收信号。也可使用其它无线网络协议标准，以替代上述协议或作为对上述协议的附加。其它网络标准可包括蓝牙、红外传输协议或具有其它规范的无线传输协议。
应注意，在其它实施例中，输入设备28可包括例如有线连接模块，其中输入设备12和计算设备14可配置成经由电缆彼此通信，该电缆具有标准外围接口，诸如RS-232C、PS/2、USB等等。
在所示实施例中，输入设备12还可包括指示模块(pointingmodule)30、照相机模块32、话筒模块34、音频模块36和/或处理器38。指示模块30可配置成检测一个或多个用户可选择功能输入44(图3中所示的按钮和/或拨动开关)的操作，以产生用户选择输入数据。通信模块28可配置成将选择输入数据发送至计算设备14，从而允许用户基于该选择输入数据对显示器26上的GUI 22进行导航和/或操纵。
如图所示，输入设备12还可包括I/O电路31，该I/O电路31配置成允许外部输入设备33与输入设备12通信。具体而言，外部输入设备33可配置成允许用户对显示器26上的GUI 22进行导航。更具体地，外部输入设备33可包括一个或多个用户可选择功能输入，诸如开关、按钮、拨动开关等等。指示模块30可配置成检测外部输入设备33的操作以产生用户选择输入数据，其中通信模块可基于外部输入设备33的操作将该选择输入数据发送至计算设备14，从而允许对GUI 22的导航。
外部输入设备33可配置成允许灵活性受限的用户对GUI 22进行导航。具体而言，外部输入设备33可包括一个或多个单功能输入，诸如开关。在一个实施例中，外部输入设备33可包括三个开关。第一和第二开关在被操作时可允许用户循环通过GUI 22。例如，第一开关在被操作时可允许用户以第一方向循环通过GUI 22中呈现的选项，而第二开关在被操作时可允许被配置成允许用户以与第一方向相反的第二方向循环。第三开关在被操作时可允许用户选择GUI 22中高亮的选项(诸如应用)。在其它实施例中，外部输入设备33可包括本领域普通技术人员通常理解的其它用户可选择功能输入。
除了允许用户对GUI 22进行导航，输入设备12还可包括照相机模块32，该照相机模块32配置成接收和/或存储由照相机(图3中所示)捕获的图像和/或视频，并将所捕获的图像和/或视频发送至计算设备14。例如，所捕获的图像和/或视频可用于社交网络，而用户可在社交网络中请求与朋友和家庭成员分享这些图像和/或视频。此外，如图5中所示，用户可使用该照相机放大印刷信息(例如杂志、报纸等等)，其中该照相机可扫描印刷信息，并将该信息发送至计算设备14以呈现在显示器26上，如本文中将更详细描述的。
输入设备12还可包括话筒模块34，该话筒模块34配置成接收和/或存储音频数据(诸如由话筒(图3所示)捕获的用户语音)并将所捕获的音频数据发送至计算设备14。与图像和/或视频相似，诸如用户语音之类的音频数据可用于社交网络，而用户可在社交网络中与朋友和家庭成员通信。另外，输入设备12还可包括音频模块36，音频模块36配置成从计算设备14接收音频内容，并以听觉方式在音频输出装置(诸如头戴式耳机插孔(图3所示)、扬声器(未示出)等等)上再现这些音频内容。
输入设备12还可包括处理器38。处理器38可配置成控制通信模块28以与计算设备14通信。更具体地，处理器38可配置成控制通信模块28以将数据从指示模块30、照相机模块32和/或话筒模块34发送至计算设备14。另外，处理器38可配置成控制通信模块28以接收来自计算设备14的数据，并将此类数据至少发送至音频模块36。处理器38还可配置成控制输入设备12的个体部件(例如处理器38可控制照相机42，诸如照相机42的自动聚焦)。
参见图3，示出与本公开内容一致的多功能输入设备12的一个示例性实施例的俯视图。一般而言，输入设备12可包括外壳44，其中通信模块28、指示模块30、I/O电路31、照相机模块32、话筒模块34、音频模块36和/或处理器38可设置在外壳44内。如图所示，输入设备12可包括用户可选择功能输入44。功能输入44可包括导航输入46，该导航输入46用于允许用户在计算设备14之显示器26的GUI 22上移动(即向左、向右、向上、向下)光标或类似物。功能输入44还可包括视频模式输入48，该视频模式输入48配置成允许用户激活照相机42以拍摄静态图像和/或视频。
此外，功能输入44可包括简化的导航输入，示为按钮49A和49B以及选择输入49C。导航输入49A和49B可允许用户循环通过在GUI 22中呈现的程序和应用，且输入49C可允许用户选择这些程序或应用中的一个。例如，在一个实施例中，操作输入49A可允许用户向右循环通过GUI 22中的选项，而操作输入49B可允许用户向左循环通过这些选项。功能输入44还可包括放大输入50，该放大输入50允许用户操纵显示器26上的内容视图(例如放大/缩小尺寸)。在其它实施例中，输入设备12可包括附加的或替代的用户可选择功能输入44，诸如一个或多个轨迹球和/或触摸屏。输入设备还可包括一个或多个连接端口51，所述一个或多个连接端口51配置成将外部输入设备33耦合至多功能输入设备12。如一般理解地，连接端口51可包括任何已知的有线连接接口，诸如RS-232C、PS/2、USB等等。输入设备12还可包括话筒52，话筒52配置成接收诸如语音数据之类的音频内容。输入设备12还可包括头戴式耳机插孔54，以允许用户聆听音频内容。
参见图4，示出了在计算设备14的显示器26上示出的GUI22的示例性实施例。如图所示，与本公开内容一致的系统可包括GUI 22，该GUI 22设计简单，并提供直观和用户友好的导航和转换，诸如由美国加尼福尼亚州旧金山市的PointerWare Innovations有限公司提供的PointerWareTM。具体而言，GUI 22可按照初学用户来设计，其中GUI 22可允许用户通过点击一系列按钮来对程序的所有方面进行导航和访问。如图所示，所有静态的预配置内容可在单个屏幕中呈现，且内容可仅限于基本特征，以保持屏幕内容最小且可读。用户可经由输入设备12的用户可选择功能输入44对GUI 22进行导航。
图5示出与本公开内容一致的在计算设备的显示器上显示的GUI 22的另一示例性实施例。如前文所述，输入设备12可包括照相机42，该照相机42配置成捕获图像和/或视频。照相机42还可包括用于捕获代表环境(包括例如印刷信息)的数字图像的任何设备(已知的或后来发现的)，且可具有足够分辨率对印刷信息进行文本分析。照相机42可包括静态照相机(即配置成捕获静态照片的照相机)或视频照相机(即配置成以多帧方式捕获多幅移动图像的照相机)。
如图5所示，用户可利用输入设备12来处理和/或放大印刷信息，以用于各种各样的目的。例如，照相机42可用于扫描阅读素材(例如报纸56、邮件复印件等等)或来自常见家居物品的包装(例如视力受损人士可查看食品包装、药品注意事项、照片等等)。在所示实施例中，照相机42可捕获报纸56中一部分58的一幅或多幅图像和/或视频，其中所捕获的图像和/或视频可被发送至计算设备14。进而，计算设备14可将这些图像和/或视频发送至显示器26，在显示器26中显示报纸56的所述部分58。用户可利用例如输入设备12的放大输入50来控制报纸56的所述部分58的放大率的大小。如本领域普通技术人员一般理解地，计算设备14可包括软件，该软件配置成将照相机42所捕获的不同图像拼合成单幅显示图像(即智能手动扫描)。另外，该计算设备还可包括其它软件应用，所述其它软件应用配置成对所捕获的印刷文本的图像和/或视频应用光学字符识别(OCR)和/或文本-语音转换能力。
现参见图6，示出了用于与计算设备的显示装置上的图形用户界面(GUI)交互的方法600的一个实施例的流程图。方法600包括提供多功能输入设备，该多功能输入设备配置成与计算设备通信(操作610)。方法600还包括通过输入设备的指示模块来检测输入设备的一个或多个用户可选择功能输入的操作(操作620)。方法600还包括基于该一个或多个用户可选择功能输入的操作，通过指示模块来产生用户选择输入数据(操作630)。方法600还包括通过输入设备的照相机模块接收和存储由输入设备的照相机捕获的一幅或多幅图像(操作640)。方法600还包括通过通信模块经由通信链路将用户选择输入数据和所捕获的一幅或多幅图像发送至计算设备(操作650)。方法600还包括在该计算设备的显示装置上显示由所捕获的一幅或多幅图像所形成的单幅图像(操作660)。
虽然图6示出了根据各个实施例的方法操作，但应理解，在任一实施例中，并非所有这些操作都是必要的。实际上，在此完全可构想，在本公开内容的其它实施例中，图6中描述的操作可按照未在任一附图中示出的方式进行组合，但仍完全符合本公开内容。因此，对未在一幅图中准确示出的特征和/或操作有所涉及的权利要求被视为在本公开的范围和内容中。
此外，已参考以上附图和所附示例进一步描述了各实施例的操作。一些附图可包括逻辑流程。尽管此处呈现的这些附图可包括特定的逻辑流程，但可以理解，该逻辑流程仅仅提供如何实现此处所述的一般功能的示例。此外，除非另外指出，不是必须按照所呈现的顺序执行给定的逻辑流程。另外，给定的逻辑流程可由硬件要素、由处理器执行的软件要素或其任意组合来实现。这些实施例不限于此上下文。
相应地，与本公开内容一致的系统可为计算机技能、知识和/或能力有限的用户(例如初学用户、老年人等等)提供更可及的且用户友好的用于操作计算设备的手段。具体而言，与本公开内容一致的简化的GUI和输入设备可允许用户通过因特网安全地访问计算设备、购买服务、购物，浏览因特网，参与社交网络(例如视频聊天)和/或访问电子邮件，而所述用户若不借助本公开内容的简化的GUI和输入设备则会面对现有计算设备而不知所措。
与本公开内容的一个实施例相一致地，提供了用于计算设备的多功能输入设备。该多功能输入设备包括用户可选择功能输入，所述用户可选择功能输入用于允许用户在显示装置上与计算设备的图形用户界面(GUI)交互。该多功能输入设备还包括指示模块，该指示模块配置成检测一个或多个用户可选择功能输入的操作。该指示模块还配置成基于一个或多个用户可选择功能输入的操作产生用户选择输入数据。该多功能输入设备还包括：照相机，配置成捕获一幅或多幅图像；照相机模块，配置成接收和存储由照相机捕获的一幅或多幅图像。该多功能输入设备还包括通信模块，该通信模块配置成经由通信链路将来自指示模块的用户选择输入数据和来自照相机模块的所捕获的一幅或多幅图像发送至计算设备。该多功能输入设备还包括处理器，该处理器配置成控制通信模块以与计算设备通信。
与本公开内容的另一实施例相一致地，提供了一种与计算设备的显示装置上的图形用户界面(GUI)交互的系统。该系统包括计算设备和多功能输入设备，该多功能输入设备用于允许用户在显示装置上与计算设备的图形用户界面(GUI)交互。该多功能输入设备包括用户可选择功能输入，所述用户可选择功能输入用于允许用户在显示装置上与计算设备的图形用户界面(GUI)交互。该多功能输入设备还包括指示模块，该指示模块配置成检测一个或多个用户可选择功能输入的操作。该指示模块还配置成基于一个或多个用户可选择功能输入的操作来产生用户选择输入数据。该多功能输入设备还包括：照相机，配置成捕获一幅或多幅图像；照相机模块，配置成接收和存储由照相机捕获的一幅或多幅图像。该多功能输入设备还包括通信模块，该通信模块配置成经由通信链路将来自指示模块的用户选择输入数据和来自照相机模块的所捕获的一幅或多幅图像发送至计算设备。该多功能输入设备还包括处理器，该处理器配置成控制通信模块以与计算设备通信。
与本公开内容的另一实施例相一致地，提供了一种与计算设备的显示装置上的图形用户界面(GUI)交互的方法。该方法包括提供多功能输入设备，该多功能输入设备配置成与计算设备通信。该方法还包括通过输入设备的指示模块来检测输入设备的一个或多个用户可选择功能输入的操作。该方法还包括基于该一个或多个用户可选择功能输入的操作，通过指示模块来产生用户选择输入数据。该方法还包括通过输入设备的照相机模块，接收和存储由输入设备的照相机捕获的一幅或多幅图像。该方法还包括通过通信模块经由通信链路将用户选择输入数据和所捕获的一幅或多幅图像发送至计算设备。该方法还包括在该计算设备的显示装置上显示由所捕获的一幅或多幅图像所形成的单幅图像。
与本公开内容的又一实施例相一致地，提供了一种计算机可存取介质，该计算机可存取介质包括存储于其上的指令。当由一个或多个处理器执行指令时，这些指令可导致计算机系统执行操作，以与计算设备的显示装置上的图形用户界面(GUI)交互。这些操作可包括：通过多功能输入设备的指示模块来检测输入设备的一个或多个用户可选择功能输入的操作；基于该一个或多个用户可选择功能输入的操作，通过该指示模块来产生用户选择输入数据；通过输入设备的照相机模块，接收和存储由输入设备的照相机捕获的一幅或多幅图像；通过输入设备的通信模块经由通信链路将用户选择输入数据和所捕获的一幅或多幅图像发送至计算设备；在该计算设备的显示装置上显示由所捕获的一幅或多幅图像所形成的单幅图像。
如本文所述，各实施例可利用硬件要素、软件要素或其任何组合实现。硬件要素的示例可以包括处理器、微处理器、电路、电路元件(例如，晶体管、电阻器、电容器、电感器，等等)、集成电路、专用集成电路(ASIC)、可编程逻辑器件(PLD)、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、逻辑门、寄存器、半导体器件、芯片、微型芯片、芯片组，等等。
如本文中任一实施例所使用，术语“模块”指的是配置成执行所述操作的软件、固件和/或电路。软件可具体化为软件封装、代码和/或指令集或指令，而如本文中任一实施例所使用的“电路”可单独或组合地包括例如硬接线电路、可编程电路、状态机电路和/或存储由可编程电路执行的指令的固件。模块可整体或单独地被具体化为形成较大系统(例如集成电路(IC)、片上系统(SoC)等等)的一部分的电路。
本文中描述的一些实施例可作为有形的机器可读介质而被提供，该机器可读介质存储计算机可执行指令，这些计算机可执行指令在由计算机执行时使计算机执行本文中所描述的方法和/或操作。该有形计算机可读介质可包括但不限于任何类型的盘，包括软盘、光盘、压缩盘只读存储器(CD-ROM)、可重写压缩盘(CD-RW)以及磁光盘，半导体器件，比如只读存储器(ROM)、诸如动态和静态随机存取存储器(RAM)之类的RAM、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、闪存、磁卡或光卡，或适于存储电子指令的任何类型的有形介质。计算机可包括任何适当的处理平台、设备或系统，计算平台、设备或系统，且可使用硬件和/或软件的任何适当组合来实现。这些指令可包括任何适当类型的代码，且可使用任何适当的编程语言来实现。
在此说明书通篇中对“一个实施例”或“实施例”的引用意味着结合该实施例描述的特定特征、结构或特性被包含于至少一个实施例中。因此，在整个说明书的多个位置出现短语“在一个实施例中”或“在实施例中”不一定指的是同一实施例。而且，特定特征、结构、或特性可按照任何合适的方式在一个或多个实施例中组合。
已在本文中采用的术语和表述是用于描述目的而非限制，且在使用此类术语和表达时，无意排除所示和所描述特征的任何等价方案(或其部分)，且应认识到各种修改方案可以落在权利要求的范围内。因此，权利要求旨在覆盖所有这些等价方案。
已在本文中描述各种各样的特征、方面以及实施例。如本领域普通技术人员将理解的，所述特征、方面和实施例易于彼此组合且容易有变型和修改。因此，本公开内容应当被认为包含了此类组合、变型和修改。因此，本发明的宽度和范围不应由上述示例性实施例中的任何一个来限制，而应当只根据所附权利要求及其等价物来限定。

Claims (39)

1.一种多功能输入设备，用于与计算设备的显示装置上的图形用户界面(GUI)交互，所述输入设备包括：
用户可选择功能输入，用于允许用户在显示装置上与所述计算设备的图形用户界面(GUI)交互；
指示模块，配置成检测所述一个或多个用户可选择功能输入的操作，并基于所述一个或多个用户可选择功能输入的操作产生用户选择输入数据；
照相机，配置成捕获一幅或多幅图像；
照相机模块，配置成接收并存储由所述照相机捕获的所述一幅或多幅图像；
通信模块，配置成经由通信链路将来自所述指示模块的所述用户选择输入数据和来自所述照相机模块的所捕获的所述一幅或多幅图像发送至所述计算设备；以及
处理器，配置成控制所述通信模块以与所述计算设备通信。
2.如权利要求1所述的多功能输入设备，其特征在于，所述照相机模块配置成接收和存储由所述照相机捕获的印刷信息的一幅或多幅图像，且所述通信模块配置成将印刷信息的所述一幅或多幅图像发送至所述计算设备以在所述显示装置上显示。
3.如权利要求2所述的多功能输入设备，其特征在于，所述用户可选择功能输入之一包括放大输入，所述放大输入配置成允许用户改变所述显示装置上的由所述照相机捕获的印刷信息的所述一幅或多幅图像的大小。
4.如权利要求1至3中的任一项所述的多功能输入设备，其特征在于，所述用户可选择功能输入之一包括导航输入，所述导航输入用于允许用户对所述GUI进行导航。
5.如权利要求1至4中的任一项所述的多功能输入设备，其特征在于，所述处理器配置成控制所述通信模块，以将来自所述指示模块的所述用户选择输入数据和来自所述照相机模块的所捕获的所述一幅或多幅图像中的至少一个发送至所述计算设备。
6.如权利要求1至5中的任一项所述的多功能输入设备，其特征在于，所述通信模块包括无线通信模块，所述无线通信模块用于允许所述输入设备经由无线传输协议以无线方式与所述计算设备通信。
7.如权利要求6所述的多功能输入设备，其特征在于，所述无线传输协议是从由蓝牙、红外以及2012年1月开始的IEEE 802.11传输协议标准的最新公布版本组成的组中选择的。
8.如权利要求1至5中的任一项所述的多功能输入设备，其特征在于，所述通信模块包括有线连接模块，所述有线连接模块用于允许所述输入设备经由传输电缆和有线传输协议与所述计算设备通信。
9.如权利要求8所述的多功能输入设备，其特征在于，所述有线传输协议是通用串行总线(USB)传输协议。
10.如权利要求1至9中的任一项所述的多功能输入设备，其特征在于，还包括：
话筒，配置成捕获音频数据；以及
话筒模块，配置成接收和存储由所述话筒捕获的音频数据；
其中所述通信模块配置成将来自所述话筒模块的所捕获的音频数据发送至所述计算设备。
11.如权利要求10所述的多功能输入设备，其特征在于，所述处理器配置成控制所述通信模块以将来自所述话筒模块的音频数据发送至所述计算设备。
12.如权利要求1至11中的任一项所述的多功能输入设备，其特征在于，还包括：
音频模块，配置成接收来自所述计算设备的音频数据；以及
音频输出装置，配置成以听觉方式再现来自所述音频模块的音频数据；
其中所述通信模块配置成将来自所述计算设备的所述音频数据发送至所述音频模块。
13.如权利要求12所述的多功能输入设备，其特征在于，所述处理器配置成控制所述通信模块以接收来自所述计算设备的音频数据。
14.如权利要求1至13中的任一项所述的多功能输入设备，其特征在于，所述计算设备是从由个人计算机(PC)、上网本、平板计算机以及智能电话组成的组中选择的。
15.一种用于与计算设备的显示装置上的图形用户界面(GUI)交互的系统，所述系统包括：
计算设备；以及
多功能输入设备，用于允许用户在显示装置上与所述计算设备的图形用户界面(GUI)交互，所述多功能输入设备包括：
用户可选择功能输入，用于允许用户与所述GUI交互；
指示模块，配置成检测所述一个或多个用户可选择功能输入的操作，并基于所述一个或多个用户可选择功能输入的操作产生用户选择输入数据；
照相机，配置成捕获一幅或多幅图像；
照相机模块，配置成接收并存储由所述照相机捕获的所述一幅或多幅图像；
通信模块，配置成经由通信链路将来自所述指示模块的所述用户选择输入数据和来自所述照相机模块的所捕获的所述一幅或多幅图像发送至所述计算设备；以及
处理器，配置成控制所述通信模块以与所述计算设备通信。
16.如权利要求15所述的系统，其特征在于，所述照相机模块配置成接收和存储由所述照相机捕获的印刷信息的一幅或多幅图像，且所述通信模块配置成将印刷信息的所述一幅或多幅图像发送至所述计算设备以在所述显示装置上呈现。
17.如权利要求16所述的系统，其特征在于，所述用户可选择功能输入之一包括放大输入，所述放大输入配置成允许用户改变所述显示装置上的由所述照相机捕获的印刷信息的所述一幅或多幅图像的大小。
18.如权利要求15至17中的任一项所述的系统，其特征在于，所述用户可选择功能输入之一包括导航输入，所述导航输入用于允许用户对所述GUI进行导航。
19.如权利要求15至18中的任一项所述的系统，其特征在于，所述处理器配置成控制所述通信模块，以将来自所述指示模块的所述用户选择输入数据和来自所述照相机模块的所捕获的所述一幅或多幅图像中的至少一个发送至所述计算设备。
20.如权利要求15至19中的任一项所述的系统，其特征在于，所述通信模块包括无线通信模块，所述无线通信模块用于允许所述输入设备经由无线传输协议以无线方式与所述计算设备通信。
21.如权利要求20所述的系统，其特征在于，所述无线传输协议是从由蓝牙、红外以及2012年1月开始的IEEE 802.11传输协议标准的最新公布版本组成的组中选择的。
22.如权利要求15至19中的任一项所述的系统，其特征在于，所述通信模块包括有线连接模块，所述有线连接模块用于允许所述输入设备经由传输电缆和有线传输协议与所述计算设备通信。
23.如权利要求22所述的系统，其特征在于，所述有线传输协议是通用串行总线(USB)传输协议。
24.如权利要求15至23中的任一项所述的系统，其特征在于，所述多功能输入设备还包括：
话筒，配置成捕获音频数据；以及
话筒模块，配置成接收和存储由所述话筒捕获的音频数据；
其中所述通信模块配置成将来自所述话筒模块的所捕获的音频数据发送至所述计算设备。
25.如权利要求24所述的系统，其特征在于，所述处理器配置成控制所述通信模块以将来自所述话筒模块的音频数据发送至所述计算设备。
26.如权利要求15至25中的任一项所述的系统，其特征在于，所述多功能输入设备还包括：
音频模块，配置成接收来自所述计算设备的音频数据；以及
音频输出装置，配置成以听觉方式再现来自所述音频模块的音频数据；
其中所述通信模块配置成将来自所述计算设备的所述音频数据发送至所述音频模块。
27.如权利要求26所述的系统，其特征在于，所述处理器配置成控制所述通信模块以接收来自所述计算设备的音频数据。
28.如权利要求15至27中的任一项所述的系统，其特征在于，所述计算设备是从由个人计算机(PC)、上网本、平板计算机以及智能电话组成的组中选择的。
29.一种用于与计算设备的显示装置上的图形用户界面(GUI)交互的方法，所述方法包括：
提供多功能输入设备，所述多功能输入设备配置成与所述计算设备通信；
通过所述输入设备的指示模块来检测所述输入设备的一个或多个用户可选择功能输入的操作；
基于所述一个或多个用户可选择功能输入的操作，通过所述指示模块产生用户选择输入数据；
通过所述输入设备的照相机模块接收和存储由所述输入设备的照相机捕获的一幅或多幅图像；
通过所述输入设备的通信模块经由通信链路将所述用户选择输入数据和所捕获的所述一幅或多幅图像发送至所述计算设备；以及
在所述显示装置上显示由所捕获的所述一幅或多幅图像所形成的单幅图像。
30.如权利要求29所述的方法，其特征在于，所述一幅或多幅图像包含印刷信息，所述印刷信息至少包含一些文本。
31.如权利要求30所述的方法，其特征在于，还包括创建代表所述印刷信息的数字化图像数据。
32.如权利要求29至31中的任一项所述的方法，其特征在于，所述用户可选择功能输入之一包括放大输入，所述放大输入配置成允许用户改变显示在所述显示装置上的所述图像的大小。
33.如权利要求29至32中的任一项所述的方法，其特征在于，所述用户可选择功能输入之一包括导航输入，所述导航输入用于允许用户对所述GUI进行导航。
34.如权利要求29至33中的任一项所述的方法，其特征在于，所述通信模块包括无线通信模块，所述无线通信模块用于允许所述输入设备经由无线传输协议以无线方式与所述计算设备通信。
35.如权利要求34所述的方法，其特征在于，所述无线传输协议是从由蓝牙、红外以及2012年1月开始的IEEE 802.11传输协议标准的最新公布版本组成的组中选择的。
36.如权利要求29至35中的任一项所述的方法，其特征在于，所述多功能输入设备还包括：
话筒，配置成捕获音频数据；以及
话筒模块，配置成接收和存储由所述话筒捕获的音频数据；
其中所述通信模块配置成将来自所述话筒模块的所捕获的音频数据发送至所述计算设备。
37.如权利要求29至36中的任一项所述的方法，其特征在于，所述多功能输入设备还包括：
音频模块，配置成接收来自所述计算设备的音频数据；以及
音频输出装置，配置成以听觉方式再现来自所述音频模块的音频数据；
其中所述通信模块配置成将来自所述计算设备的所述音频数据发送至所述音频模块。
38.如权利要求29至37中的任一项所述的方法，其特征在于，所述计算设备是从由个人计算机(PC)、上网本、平板计算机以及智能电话组成的组中选择的。
39.至少一种计算机可存取介质，其上存储有指令，所述指令在被一个或多个处理器执行时使计算机系统执行如权利要求29-38中的任一项所述的与计算设备的显示装置上的图形用户界面(GUI)交互的方法的步骤。
CN2012101300343A 2011-04-19 2012-04-19 多功能输入设备 Pending CN102749992A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201161477000P 2011-04-19 2011-04-19
US61/477,000 2011-04-19

Publications (1)

Publication Number Publication Date
CN102749992A true CN102749992A (zh) 2012-10-24

Family

ID=47030253

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012101300343A Pending CN102749992A (zh) 2011-04-19 2012-04-19 多功能输入设备

Country Status (6)

Country Link
US (1) US20130298028A1 (zh)
EP (1) EP2699985A4 (zh)
JP (1) JP2012226754A (zh)
CN (1) CN102749992A (zh)
BR (1) BR112013026547A2 (zh)
WO (1) WO2012145057A2 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104702967A (zh) * 2014-09-10 2015-06-10 Spo系统有限公司 虚拟视频巡检系统与其组件
CN104965605A (zh) * 2015-07-02 2015-10-07 天津海悦百川科技发展有限公司 一种多功能无线键盘
CN106775001A (zh) * 2016-11-23 2017-05-31 广州视源电子科技股份有限公司 交互设备、控制方法及装置
CN106775004A (zh) * 2016-11-23 2017-05-31 广州视源电子科技股份有限公司 交互设备、数据传输方法和系统
CN107045419A (zh) * 2017-05-04 2017-08-15 奇酷互联网络科技（深圳）有限公司 一种输入用电子设备
TWI644661B (zh) * 2014-04-24 2018-12-21 豪威科技股份有限公司 無線助視器、無線影像擷取單元及供顯示物體的強化影像之應用程式
US11068148B2 (en) 2015-01-30 2021-07-20 Sony Corporation Information processing device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1365043A (zh) * 2000-06-30 2002-08-21 国际商业机器公司 一个智能指示设备
US6525306B1 (en) * 2000-04-25 2003-02-25 Hewlett-Packard Company Computer mouse with integral digital camera and method for using the same
US20040017354A1 (en) * 2001-01-22 2004-01-29 Masahiko Muranami Integrated multi-function computer input device
CN201489485U (zh) * 2009-08-26 2010-05-26 上海同畅信息技术有限公司 多功能鼠标
CN201796356U (zh) * 2010-09-20 2011-04-13 方正科技集团苏州制造有限公司 一种能识别语音命令的计算机

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5587560A (en) * 1995-04-10 1996-12-24 At&T Global Information Solutions Company Portable handwritten data capture device and method of using
JPH1093671A (ja) * 1996-09-19 1998-04-10 Sharp Corp 情報通信端末用スタイラスペン
US6505159B1 (en) * 1998-03-03 2003-01-07 Microsoft Corporation Apparatus and method for providing speech input to a speech recognition system
JPH11355617A (ja) * 1998-06-05 1999-12-24 Fuji Photo Film Co Ltd 画像表示器付きカメラ
KR100358370B1 (ko) * 2000-03-24 2002-10-25 공원일 다기능이 구비된 하나로 키보드
US6765557B1 (en) * 2000-04-10 2004-07-20 Interlink Electronics, Inc. Remote control having touch pad to screen mapping
US6489986B1 (en) * 2000-09-29 2002-12-03 Digeo, Inc. Remote control device for video and audio capture and communication
KR100846449B1 (ko) * 2003-03-27 2008-07-16 삼성전자주식회사 휴대용 복합장치의 웹 카메라 모드 설정방법
US7239338B2 (en) * 2003-10-01 2007-07-03 Worldgate Service, Inc. Videophone system and method
JP2005352840A (ja) 2004-06-11 2005-12-22 Fujinon Corp ポインティング装置およびプログラム
WO2005094270A2 (en) * 2004-03-24 2005-10-13 Sharp Laboratories Of America, Inc. Methods and systems for a/v input device to diplay networking
US7463304B2 (en) * 2004-05-06 2008-12-09 Sony Ericsson Mobile Communications Ab Remote control accessory for a camera-equipped wireless communications device
KR20060026228A (ko) * 2004-09-20 2006-03-23 삼성테크윈 주식회사 터치 스크린 디스플레이 패널을 리모콘으로 사용하는디지털 카메라 및 그 구동 방법
JP2006115052A (ja) * 2004-10-13 2006-04-27 Sharp Corp コンテンツ検索装置とその入力装置、コンテンツ検索システム、コンテンツ検索方法、プログラム及び記録媒体
KR101050607B1 (ko) * 2004-11-24 2011-07-19 삼성전자주식회사 이동통신 단말기에서 카메라 줌 장치 및 방법
DE102006001607B4 (de) * 2005-01-14 2013-02-28 Mediatek Inc. Verfahren und Systeme zur Übertragung von Ton- und Bilddaten
US7835505B2 (en) * 2005-05-13 2010-11-16 Microsoft Corporation Phone-to-monitor connection device
US20070063969A1 (en) * 2005-09-15 2007-03-22 Christopher Wright Single finger micro controllers for portable electronic device
US20070245223A1 (en) * 2006-04-17 2007-10-18 Microsoft Corporation Synchronizing multimedia mobile notes
US20070254640A1 (en) * 2006-04-27 2007-11-01 Bliss Stephen J Remote control and viewfinder for mobile camera phone
US8594387B2 (en) * 2007-04-23 2013-11-26 Intel-Ge Care Innovations Llc Text capture and presentation device
US7889175B2 (en) * 2007-06-28 2011-02-15 Panasonic Corporation Touchpad-enabled remote controller and user interaction methods
US7904628B2 (en) * 2008-06-26 2011-03-08 Microsoft Corporation Smart docking system
US9716774B2 (en) * 2008-07-10 2017-07-25 Apple Inc. System and method for syncing a user interface on a server device to a user interface on a client device
CN101727186A (zh) * 2008-10-17 2010-06-09 鸿富锦精密工业（深圳）有限公司 Usb键盘
US8553106B2 (en) * 2009-05-04 2013-10-08 Digitaloptics Corporation Dual lens digital zoom
US8441695B2 (en) * 2009-05-20 2013-05-14 Dacuda Ag Handheld scanner with high image quality
US20100302190A1 (en) * 2009-06-02 2010-12-02 Elan Microelectronics Corporation Multi-functional touchpad remote controller
CA2777269A1 (en) * 2009-10-16 2011-04-21 Delta Vidyo, Inc. Smartphone to control internet tv system
EP2359915B1 (en) * 2009-12-31 2017-04-19 Sony Computer Entertainment Europe Limited Media viewing

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6525306B1 (en) * 2000-04-25 2003-02-25 Hewlett-Packard Company Computer mouse with integral digital camera and method for using the same
CN1365043A (zh) * 2000-06-30 2002-08-21 国际商业机器公司 一个智能指示设备
US20040017354A1 (en) * 2001-01-22 2004-01-29 Masahiko Muranami Integrated multi-function computer input device
CN201489485U (zh) * 2009-08-26 2010-05-26 上海同畅信息技术有限公司 多功能鼠标
CN201796356U (zh) * 2010-09-20 2011-04-13 方正科技集团苏州制造有限公司 一种能识别语音命令的计算机

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI644661B (zh) * 2014-04-24 2018-12-21 豪威科技股份有限公司 無線助視器、無線影像擷取單元及供顯示物體的強化影像之應用程式
CN104702967A (zh) * 2014-09-10 2015-06-10 Spo系统有限公司 虚拟视频巡检系统与其组件
CN104702967B (zh) * 2014-09-10 2019-03-29 迈克尔·沙菲尔 虚拟视频巡检系统与其组件
US11068148B2 (en) 2015-01-30 2021-07-20 Sony Corporation Information processing device
CN104965605A (zh) * 2015-07-02 2015-10-07 天津海悦百川科技发展有限公司 一种多功能无线键盘
CN106775001A (zh) * 2016-11-23 2017-05-31 广州视源电子科技股份有限公司 交互设备、控制方法及装置
CN106775004A (zh) * 2016-11-23 2017-05-31 广州视源电子科技股份有限公司 交互设备、数据传输方法和系统
WO2018094836A1 (zh) * 2016-11-23 2018-05-31 广州视睿电子科技有限公司 交互设备、数据传输方法和系统
WO2018094837A1 (zh) * 2016-11-23 2018-05-31 广州视睿电子科技有限公司 交互设备、控制方法及装置
CN106775004B (zh) * 2016-11-23 2020-09-04 广州视源电子科技股份有限公司 交互设备、数据传输方法和系统
CN107045419A (zh) * 2017-05-04 2017-08-15 奇酷互联网络科技（深圳）有限公司 一种输入用电子设备

Also Published As

Publication number Publication date
WO2012145057A2 (en) 2012-10-26
EP2699985A2 (en) 2014-02-26
US20130298028A1 (en) 2013-11-07
BR112013026547A2 (pt) 2017-11-07
WO2012145057A3 (en) 2013-01-10
JP2012226754A (ja) 2012-11-15
EP2699985A4 (en) 2014-12-17

Similar Documents

Publication Publication Date Title
CN102749992A (zh) 多功能输入设备
WO2020238774A1 (zh) 一种通知消息的预览方法及电子设备
US20200028805A1 (en) Answer message recommendation method and device therefor
CN104584513B (zh) 选择用于内容分享操作的装置的设备和方法
CN106575360B (zh) 图表数据的增强识别
US9836115B2 (en) Information processing device, information processing method, and program
CN106462377A (zh) 用于使用多个显示器输出内容的方法和设备
CN101772753B (zh) 使用偏移连接元素辅助数据输入的方法、装置和计算机程序产品
US11158057B2 (en) Device, method, and graphical user interface for processing document
CN107358227A (zh) 一种标记识别方法、移动终端以及计算机可读存储介质
CN107430489A (zh) 共享用户可配置的图形构造
KR101140419B1 (ko) 이동통신단말기의 화면 캡처 방법
CN103176744B (zh) 一种显示设备及其信息处理方法
CN112423087A (zh) 一种视频互动信息展示方法及终端设备
US20160085424A1 (en) Method and apparatus for inputting object in electronic device
CN107786749A (zh) 一种信息处理方法、终端和计算机可读存储介质
WO2017050090A1 (zh) 生成gif文件的方法、设备及计算机可读存储介质
CN107943380A (zh) 双面屏备注操作方法、双面屏终端及计算机可读存储介质
KR101678395B1 (ko) 외부 디바이스를 이용한 전자기기 제어 방법 및 그의 시스템
CN108810262A (zh) 一种应用的配置方法、终端和计算机可读存储介质
CN108845732A (zh) 一种信息显示方法及终端设备
KR20220066385A (ko) 노트 정보 표시 방법, 노트 정보 송신 방법 및 전자기기
JP2013226257A (ja) 情報提供システム、情報提供方法、および電子機器
US20150317332A1 (en) User terminal apparatus for managing data and method thereof
CN109634508A (zh) 一种用户信息加载方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20121024