CN1581052A - 具有屏幕上光导航的移动设备 - Google Patents

具有屏幕上光导航的移动设备 Download PDF

Info

Publication number
CN1581052A
CN1581052A CN200410056219.XA CN200410056219A CN1581052A CN 1581052 A CN1581052 A CN 1581052A CN 200410056219 A CN200410056219 A CN 200410056219A CN 1581052 A CN1581052 A CN 1581052A
Authority
CN
China
Prior art keywords
equipment
main body
processor
image
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200410056219.XA
Other languages
English (en)
Other versions
CN100349103C (zh
Inventor
斯卡林·阿列克谢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BlackBerry Ltd
Original Assignee
Research in Motion Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Research in Motion Ltd filed Critical Research in Motion Ltd
Publication of CN1581052A publication Critical patent/CN1581052A/zh
Application granted granted Critical
Publication of CN100349103C publication Critical patent/CN100349103C/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Telephone Function (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)

Abstract

一种移动计算设备，包括主体；容纳在主体内的处理器和相关存储器；响应来自处理器的信号并容纳在主体内的显示屏；固定到主体上的光传感器，用于捕获连续图像并且将表示捕获图像的图像信号提供给处理器；以及与处理器相关联的导航模块，用于根据图像信号来确定主体和参考表面之间的相对移动，并且根据所确定的相对移动在显示屏上移动指针。

Description

具有屏幕上光导航的移动设备
技术领域
本发明涉及一种移动设备的用户接口。
背景技术
诸如个人数字助理和消息传送性能的通信设备的移动设备得到了普遍地快速增长。更多特征已经并入到了移动设备中。例如，现在存在具有显示屏和内置摄像机的消息传送性能的移动电话。这样电话使由摄像机所拍摄的图像显示在屏幕上，以及存储在电话上，并且作为数字照片无线地传送。已经提出了使用集成摄像机作为移动通信设备的输入接口，由此，将来自摄像机的图像信息转换为文本数据，该文本数据可以用作电话号码、因特网地址或邮件文本，以支持呼叫、因特网连接或邮件传送。
由于手持式移动设备的紧凑尺寸和便携性，与诸如膝上型和桌面型计算机的更大设备相比，对于这样的小型设备，典型地，屏幕上导航的输入接口的范围受到更大的限制。优于使用光学或滚动球鼠标、触摸垫、或操纵杆来移动屏幕上指针或光标，在手持式设备上的导航控制典型地依赖于方向键盘、铁笔、和/或诸如指轮的其他输入设备。
因此，在移动设备中需要可选的用于屏幕上导航的输入接口。
发明内容
根据本发明，使用移动设备上的板上光传感器来检测设备和参考表面的相对移动，并且相应地移动屏幕上指针。在一些实施例中，还可以在各种模式下使用光传感器，作为摄像机和扫描仪。
根据本发明的一个示例方面，提出了一种移动设备，包括主体；容纳在主体内的处理器和相关存储器；响应来自处理器的信号并容纳在主体内的显示屏；固定到主体上的光传感器，用于捕获连续图像并且将表示捕获图像的图像信号提供给处理器；以及与处理器相关联的导航模块，用于根据图像信号来确定主体和参考表面之间的相对移动，并且根据所确定的相对移动在显示屏上移动指针。
根据本发明的另一方面，提出了一种用于具有显示屏的移动设备的屏幕上导航方法。所述方法包括：(a)固定针对显示屏的移动的光传感器；(b)在显示屏上显示屏幕上指针；(c)通过光传感器来捕获参考表面的连续图像；(d)比较连续捕获的图像，以确定光传感器和参考表面之间的相对移动：以及(e)根据所确定的移动在显示屏上移动屏幕上指针。
通过结合附图来查看本发明特定实施例的以下描述，本发明的其他方面和特征将对本领域的技术人员显而易见。
附图说明
现在将参考附图，仅通过实例来描述本发明的实施例，其中：
图1是示出了可以应用本发明的移动设备的方框图；
图2是图1中的移动设备的正视图；
图3是该移动设备的侧视图；
图4是该移动设备的后视图；
图5是沿着图4的线V-V所截取的移动设备的部分截面图；
图6是根据本发明的实施例，与移动设备的摄像机的操作模式相关联的操作模块的方框图；
图7是示出了根据本发明的实施例的光导航处理的方框图；以及
图8是根据本发明另一实施例的移动设备的正视图。
在附图中使用相同的参考符号来表示相同的元件和特征。
具体实施方式
现在参考附图。图1是在示例实施例中应用了本发明的移动设备10的方框图。在该示例实施例中，移动设备10是手持式双向移动通信设备，至少具有数据和可能的语音通信能力。在该示例实施例中，设备10具有与因特网上的其他计算机系统进行通信的能力。根据由设备10所提供的功能，在各种实施例中，设备10尤其可以是数据通信设备、配置为同时进行数据和语音通信的多模式通信设备、移动电话、能够进行无线通信的PDA(个人数字助理)、或具有无线调制解调器的计算机系统。在各种实施例中，本发明还可以应用于手持式计算设备，例如不能够进行通信的PDA和数字摄像机。
该设备10包括：通信子系统11，所述通信子系统11包括接收机12、发射机14和诸如一个或多个最好嵌入或内部的天线元件16和18的相关组件；以及诸如数字信号处理器(DSP)20的处理模块。在一些实施例中，通信子系统11包括本地振荡器(LO)13，并且在一些实施例中，通信子系统11和微处理器38共享振荡器。对于通信领域的技术人员显而易见，通信子系统11的特定设备将取决于该设备需要在其中进行操作的通信网络。
将由天线16通过无线通信网络50所接收到的信号输入到接收机12，接收机12可以进行诸如以下的通用接收机功能，例如：信号放大、降频转换、滤波、信道选择等，以及在一些实施例中的模拟到数字转换。按照类似的方式，由DSP 20处理要传送的信号，包括诸如调制和编码，并且输入发射机14，以便进行数字到模拟转换、升频转换、滤波、放大和经由天线18在网络50上传送。
所述设备10包括微处理器38，用于控制设备10的整个操作。微处理器38与通信子系统11交互作用，并且还与另外的设备子系统交互作用，例如，显示器22、闪速存储器24、随机存取存储器(RAM)26、辅助输入/输出(I/O)子系统28、串行端口30、键盘或小键盘32、扬声器34、麦克风36、短距离通信子系统40、以及通常表示为42的其他任何设备子系统。本系统的设备10包括与微处理器38交互作用的整体摄像机44和背光46。
在图1中所示的一些子系统执行与通信有关的功能，而其他子系统可以提供“常驻”或设备上的功能。注意，诸如键盘32和显示器22的一些子系统可以用于通信相关功能，例如输入用于在通信网络上传送的文本消息；以及设备常驻功能，例如计算器或任务表。
在一个示例实施例中，将由微处理器38所使用的操作系统软件54和各种软件应用程序58存储在诸如闪速存储器24或类似存储单元的永久存储器中。本领域的技术人员将会意识到，可以将操作系统54、特定设备应用程序58或其一部分临时地加载到诸如RAM 26的易失性存储器中。可以想到，还可以将接收到的通信信号存储到RAM 26中。
除了其操作系统功能之外，优选地，微处理器38能够执行在设备10上的软件应用程序58。通常在制造期间将预定软件应用程序58的集合安装在设备10上，所述预定软件应用程序58的集合用于控制包括诸如至少数据和语音通信应用的基本设备操作。还可以通过网络50、辅助I/O子系统28、串行端口30、短距离通信子系统40或其他任何适当子系统42将另外的应用程序加载到设备10上，并由用户安装在RAM 26或非易失性存储器中，以便由微处理器38执行。在应用程序安装中的这样的灵活性增强了设备10的功能，并且可以提供增强的设备上功能、通信相关功能或这两者。例如，安全通信应用程序可以实现电子商务功能和要利用该设备10所进行的其他这样的金融交易。
在数据通信模式下，将由通信子系统11来处理诸如文本消息的接收到的信号或网页下载，并且输入到微处理器38，优选地，微处理器38将进一步处理所接收到的信号，以便输出到显示器22，或者可选地输出到辅助I/O设备28。设备10的用户还可以利用键盘32，结合显示器22和可能的辅助I/O设备28，构造诸如电子邮件消息的数据项。然后，可以通过通信子系统11，在通信网络上传送这样构造的项。
通常，将会在可能需要与用户桌面型计算机(未示出)同步的个人数字助理(PDA)型通信设备中实现图1中的串行端口30，但是其该端口可以是光器件部件。这样的端口30将使用户能够通过外部设备或软件应用程序来设置优选项，并且将除了通过网络50之外，通过向设备10提供信息或软件下载，将扩展设备10的能力。
短距离通信子系统40是可以提供用于设备10和不必一定为类似设备的不同系统或设备之间的通信的另外组件。例如，子系统40可以包括红外线设备和相关电路以及BluetoothTM通信模块，以便提供与类似功能的系统和设备的通信。设备10可以是手持式设备。
在示例实施例中，无线移动网络50是向移动设备10提供无线电覆盖的无线分组数据网络(例如，MobitexTM或DataTACTM)，尽管其可以是其他任何类型的无线网络。
参考图2-4，在示例实施例中，移动设备10的组件和子系统容纳在硬塑料主体外壳70内，将该外壳70配置为在设备10正在使用时，由一只或两只手握住。外壳70可以包括挂钩(未示出)，从而可以将其固定到用户皮带或裤子(pant)顶部，或者可以将该外壳70与软外壳(未示出)结合在一起使用，可以将该软外壳安装在用户皮带或裤子顶部上，并且可以将移动设备10插入到其中以便携带。典型地，移动设备10将足够小，以便安装在标准钱包或适当的夹克口袋中。屏幕22从设备10的正面可见，键盘或小键盘32也如此。键盘32包括按钮或按键90、92，对其进行定位以便由用户的拇指或手指驱动。在图2所示出的实施例中，键盘32具有相对较少的按键，然而，在一些实施例中，键盘32包括26个或更多字母数字和控制键。如图4中可以看到，外壳70包括大致为平面的后壁72，具有通过其中设置的开口74。透镜76覆盖开口74，在开口74的后面定位了摄像机44和背光46。
如在图5中所看到的，在示例实施例中，将摄像机44和背光46固定到安装在主体外壳70内的印刷电路板94的背面。在示例实施例中，印刷电路板94还支持设备10的至少一些其他的硬件电子组件。摄像机44包括面向透镜76的光传感器78，用于接收通过其的反射光100。定位背光46，以便将通过透镜76的光98照射到参考表面96上，将光从该参考表面96反射回光传感器78。尽管在附图中未示出，对于本领域的技术人员显而易见，摄像机44、透镜76和背光46以各种其他方式用于于主体70，而不会使本发明的范围变窄。在第一实施例中，将摄像机固定到主体上。在第二实施例中，可以将摄像机44、透镜76和背光46容纳在可旋转地安装到设备10的主体70上的第二外壳(未示出)上。在还有的另一实施例中，将第二外壳可拆卸地安装到设备10的主体70上。
现在参考图1和2，加载到设备10的至少一些专用软件应用程序58将与操作系统54一起，实现在屏幕22上显示文本82和/或图形80的图形用户接口、以及指针84或其他屏幕上指示符，用户可以选择性地将其定位在屏幕22上，以便在表示数据或命令的已显示的可选文本和/或图形图像之中进行导航。根据本发明的实施例，在多种模式下，摄像机44尤其用作用户输入设备，用于控制屏幕上指针84的移动，以及用作摄像机，用于捕获静态照片或视频图像，以及用作扫描仪。设备10包括作为专用软件应用程序之一的光接口引擎60，用于处理按照以下所述方式由微处理器38从摄像机44中所接收到的信号。在各种实施例中，光接口引擎60的全部或部分可以集成到操作系统54和/或其他专用应用程序58中。在一些实施例中，可以在适当配置的硬件中实现光接口引擎功能的一部分，所述硬件可以位于主体70内或与摄像机44相同的外壳中。
图6示出了根据本发明的示例实施例，与当其激活时摄像机44的操作模式相关联的光接口引擎60的各种模块。更具体地，导航模块112、数字摄像机模块114和扫描仪模块116分别与光导航模式、数字摄像机模式和扫描仪模式相关联。在各种实施例中，可以将摄像机44配置为具有少于或多于三个的操作模式。在光导航模式下，使用来自摄像机44的所接收到的信号来控制屏幕导航，如以下将更为详细的解释的那样。
在数字摄像机模式下，摄像机44充当传统的数字摄像机，捕获彩色静态照片图像或数字视频图像，尤其可以将这些图像作为图像文件存储在设备10的存储器中，可以在屏幕22上观看，并且可以在网络50上作为图像文件发送到目的地地址。
在扫描仪模式下，使用摄像机44来识别表示字母数字数据的图像，并且将捕获的图像转换为数字的字母数字数据。例如，在一个实施例中，扫描仪模式具有两个子模式，即，条码扫描模式和光学字符识别模式。在条码扫描模式下，使用摄像机44来读取条码信息，然后，由设备10将该条码信息转换为数字或字母值，尤其可以将其存储在设备10的存储器中，在显示器22上显示，以及/或者在网络50上将其传送到目的地地址。在光学字符识别模式下，尤其将在扫描图像中所识别的字母数字字符存储在设备10的存储器中，在显示器22上显示，以及/或者通过网络50将其传送到目的地地址。例如，可以使用光学字符识别模式，将联系信息从名片扫描到电子地址簿中。
选择模式模块110实现了在摄像机操作模式中进行选择的选择模式处理。在一个实施例中，在选择模式处理期间，向用户展示各种模式的屏幕上列表，从该列表中，用户可以利用键盘32来选择所需的选项。在其他实施例中，将选择模式处理配置为：根据摄像机当前正在捕获的图像，在至少两个摄像机模式之间自动地进行选择。例如，当所捕获的图像表示摄像机44位于表面96的阈值距离内时，选择导航模式，而当摄像机44比离表面96的阈值距离更远时，设备10自动地切换到数字摄像机模式。
在一个示例实施例中，为了便于其在多模式下使用，光传感器78是具有相对较高的分辨率和色敏型的电荷耦合器件(CCD)。通过非限定性示例，传感器78可以具有至少100,000个像素的分辨率，尽管在一些实施例中使用了更低分辨率的传感器。摄像机44能够以每秒预定帧的捕获速率来捕获图像的连续帧。
参考图5，将更为详细地描述根据本发明实施例的导航模式下的摄像机44的操作。在一个示例实施例中，当设备10处于导航模式下时，用户在一只或两只手中持有设备10，从而设备10的背面72离表面96相对较近。在一个实施例中，可以将设备10持在一只手中，而另一只手用作参考表面96。当移动设备10时，配置导航模块112，以便通过摄像机44来跟踪设备10相对于表面96的移动，并且根据所跟踪的移动，移动屏幕上指针84。例如，参考图2和X-Y参考轴86，设备10相对于X轴移动设定距离导致了屏幕上指针84按照相同的方向以成比例的距离移动。类似地，设备10相对于Y轴移动设定距离导致了屏幕上指针84按照相同的方向以成比例的距离移动。当将屏幕上指针84定位在用户想要选择的文本或图形(诸如图标)处时，用户按下诸如按键90的控制键，例如，指示选择。在一些实施例中，屏幕上指针的移动处于与设备10的实际移动相反的方向上—例如，设备10在负X方向上的移动导致了屏幕上指针的正X方向移动，依次类推。
在示例实施例中，在导航模式下，启用背光46以将入射光98提供到表面96上，将该光反射到摄像机传感器78。背光46可以是发光二极管(LED)或其他发光设备，并且可以在脉冲模式下操作，以便保存电池能量。在一些实施例中，配置导航模块114，以便仅当摄像机44感知到不充分的光量时，向背光46提供脉冲，以便另外适当地操作。如图5中可以看到，在所示的实施例中，透镜76具有：第一角度部分118，配置用于将来自背光46的光98通通指向表面96上；以及凸面部分120，用于将入射光100聚焦在摄像机传感器78上。在示例实施例中，将透镜76可滑动地安装在后盖72的内部形成的轨道(track)89的内部，从而用户可以将力施加到向外突出小片88上，以便将透镜76滑动到外壳中和背光46和摄像机传感器78的位置线之外。近程开关或传感器91(在凸4中以虚像示出)与微处理器38相连，以便向光接口引擎60指示透镜76的位置。在示例实施例中，当摄像机处于导航模式以改善摄像机和背光在近表面96上的聚焦时，透镜76位于闭合位置(如图5所示)。在数字摄像机模式下，可以开启透镜76(滑出正轨)，以允许摄像机聚焦在另外对象上。在一些实施例中，还可以将低光条件下将背光46用于摄像机模式下。在一个实施例中，配置选择模式模块110，以便根据由近程开关91所检测到透镜76的位置，在导航模式和摄像机模式之间进行切换。
图7示出了根据本发明的示例实施例，表示由导航模块112所执行的导航处理的方框图。在导航处理中，摄像机44周期性地以预定捕获速率(典型地，以每秒帧来测量)来捕获表面96的图像。图7表示单一图像帧的处理。如步骤202所示，配置设备10来捕获图像，并且如步骤204所示，然后，利用在本领域中已知的方法对图像进行滤波，尤其是使对比度加强和调节亮度。在导航模式下，不需要摄像机44的彩色容量和全分辨率，因此适合于移动设备所典型具有的有限处理资源，在一个示例实施例中，将滤波的图像转换为锐利对比度的黑白或灰度图像，然后在各种实施例中，通过将像素组合为群集和/或如步骤206所示的那样丢弃所选像素，减小其分辨率。通过非限定性示例，在各种示例实施例中，将图像的分辨率减小到相对较低分辨率的图像，例如32×32像素或16×16像素，尽管也可以使用其他分辨率。这样的转换简化了图像的处理。
如步骤208所示，然后，将转换后的图像存储在导航图像缓存器中，从而可以将其与前面和后面的图像进行比较。如步骤210所示，将存储的转换后的图像与一个或多个先前存储的转换后的图像进行比较，以确定从前面的图像开始设备10已经移动的相对距离、以及相对移动的方向。然后，将盖信息转换为沿X和Y坐标(dX和dY)的相对移动，如步骤212所示。
通过非限定性示例，可以使用修改后的Reichardt算法来处理转换后的低分辨率图像以确定dX和dY。在该算法中，通过定位图像的过零边缘并确定其在顺序图像中的外观或再现，来检测运动。识别在两个顺序图像之间的共同特征，以确定其间的距离。然后，将该信息转换为X和Y坐标。还根据图像捕获速率(为已知值)和计算出的图像间移动的距离，来计算移动的速度。
如步骤214所示，根据dX和dY来移动屏幕上指针84。在一个实施例中，移动屏幕上指针84的方向对应于计算出的设备10的移动方向。在另一示例中，在设备10的移动的相反方向上移动屏幕上指针84。屏幕上指针84所移动的距离是dX和dY的比例值，比例因子取决于移动距离和速度。在设备10处于导航模式下的同时，连续地重复步骤202-214。一旦指针84处于所需位置，用户将一个或多个预定的按键92和90用于选择和控制功能。在各种实施例中，省略了图7中的一些步骤，以及/或者按照与附图所示不同的次序来进行图7中的一些步骤。
因此，将会意识到，本发明可以将板上摄像机44用作屏幕上导航设备。在各个实施例中，摄像机44位于与在设备10的背面不同的位置处，并且设备10具有除了上述示例实施例之外的其他不同的结构。例如，可以从键盘32向外来定位摄像机44，从而用户可以通过在键盘区上移动其手掌或其拇指来进行导航。通过非限定性实施例，图8示出了根据本发明的另一实施例的手持式设备10。手持式设备100类似于设备10，手持式设备100的键盘32包括紧接着其定位摄像机44的拇指驱动的QWERTY键盘，并且手持式设备10的主体或外壳102包括可旋转地安装在一起的第一外壳部分104和第二外壳部分106。第二外壳部分106容纳显示器22，而第一外壳部分104容纳键盘32，将所述键盘32配置为拇指型的。在手持式设备100中，通过在第一外壳部分104的正面上的开口76，设置摄像机44的透镜76和背光46。摄像机44面向与键盘32相同的方向，用于检测用户的手或拇指相对于手持式设备100的键盘表面的相对运动。
在一些实施例中，将摄像机可旋转地安装到手持式设备的外壳上，从而可以对其进行旋转，以使其面向用户所需的方向，用于导航目的。通过示例，在图8中以虚线示出了可旋转安装的摄像机44和背光单元108。可以从外壳103上拆卸摄像机44和背光单元108。
在不需要摄像机和扫描模式的一些实施例中，可以使用低分辨率的光传感器来替代摄像机44。在一些实施例中，透镜76是可拆卸的，从而可以由专门适合于设备10所操作的模式的透镜—例如，可以使用不同的透镜，用于与摄像机模式不同的导航模式。
本发明的上述实施例仅是示例性的。在不脱离由所附权利要求所限定的本发明的范围的情况下，可以由本领域的技术人员对特定实施例实施替代、修改、改变。

Claims (30)

1.一种移动设备(10)，包括：
主体(70)；
容纳在主体(70)内的处理器(38)和相关存储器；
响应来自处理器(38)的信号并容纳在主体内的显示屏(22)；
以及
固定到主体(70)上的彩色性能高分辨率摄像机(44)，用于捕获连续图像，并且向处理器(38)提供表示所捕获图像的彩色图像信号，
其特征在于所述设备(10)包括：
与处理器相关联的导航模块(112)，用于将彩色图像信号转换为低分辨率的黑白图像信号，并且根据所述黑白图像信号来确定在主体(70)和参考表面(96)之间的相对移动，并且根据所确定的相对移动在显示屏(22)上移动指针(84)。
2.根据权利要求1所述的设备，其特征在于：导航模块(112)比较由摄像机(44)以预定捕获速率所捕获的连续图像，以确定主体(70)相对于参考表面(96)移动的相对方向、距离和速度，并且根据所确定的相对方向、距离和速度在显示屏(22)上移动指针(84)。
3.根据权利要求1或2所述的设备，其特征在于：所述设备(10)还包括：与处理器(38)相关联的摄像机模块(114)，用于在显示屏(22)上显示所捕获图像，可选择性地操作摄像机模块114和导航模块(112)，以便在设备(10)的摄像机模式下在显示屏(22)上显示所捕获图像，并且根据在导航模式下所捕获的图像在屏幕上移动指针(84)。
4.根据权利要求3所述的设备，其特征在于：所述设备(10)包括与处理器(38)相关联的扫描仪模块(116)，用于在可选的扫描仪模式下，将从摄像机(44)中接收到的图像信号转换为字母数字数据。
5.根据权利要求1到4任一个所述的设备，其特征在于所述设备(10)包括位于主体(70)的正面的用户接口按键(90，92)，用于将输入信号提供给处理器，所述摄像机(44)固定到主体(70)上，以便捕获位于主体的背面(72)之后的图像。
6.根据权利要求1所述的设备，其特征在于：所述摄像机容纳在主体内，并且位于通过主体的壁设置的透镜覆盖开口(74)之后。
7.根据权利要求1所述的设备，其特征在于：将摄像机(44)可旋转地安装到主体(70)上。
8.根据权利要求1到7任一个所述的设备，其特征在于：所述设备是手持式无线通信设备，包括与处理器(38)相连的通信子系统(11)，用于与无线网络(50)和与处理器(38)交换信号。
9.一种用于具有显示屏(22)的移动计算设备(10)屏幕上的导航方法，所述方法包括步骤：
(a)固定高分辨率彩色性能摄像机(44)，以和显示屏(22)一起移动；
(b)在显示屏(22)上显示屏幕上的指针(84)；以及
(c)通过摄像机(44)来捕获参考表面(96)的连续图像；
其特征在于所述方法包括步骤：
(d)将连续图像转换为低分辨率的灰度图像；
(e)比较连续灰度图像以确定摄像机(44)和参考表面(96)之间的相对移动；以及
(f)根据所确定的移动来移动在显示屏(22)上的屏幕上指针(84)。
10.根据权利要求9所述的方法，其特征在于：在步骤(e)中，确定相对移动的方向，而在步骤(f)中，按照与所确定方向相同的方向移动屏幕上的指针(84)。
11.根据权利要求9所述的方法，其特征在于：在步骤(e)中，确定相对移动的方向，而在步骤(f)中，按照与所确定方向相反的方向移动屏幕上的指针(84)。
12.根据权利要求9所述的方法，其特征在于：所述方法包括在至少第一操作模式和第二操作模式之间进行选择的步骤，其中，在第一操作模式下，进行步骤(b)到(f)，而在第二操作模式下，替代步骤(b)到(f)，进行以下步骤：
(g)通过摄像机(44)捕获至少一个图像；以及
(h)在显示屏(22)上显示至少一个捕获图像的表示。
13.根据权利要求12所述的方法，其特征在于：所述移动设备是与无线网络(50)进行通信的无线通信设备，所述方法包括：在步骤(h)之后，在无线网络(50)上传送至少一个捕获图像的表示的步骤。
14.根据权利要求9所述的方法，其特征在于：所述方法包括在第三操作模式之间进行选择，其中，在第三操作模式下，替代步骤(b)到(f)以及步骤(g)和(h)，进行以下的步骤：
(i)通过摄像机(44)来扫描至少一个图像；以及
(j)识别在扫描的图像内的字母数字字符的表示，并且将识别的表示转换为字母数字字符。
15.一种移动设备，包括：
主体(70)；
容纳在主体(70)内的处理器(38)和相关存储器；
响应来自处理器(38)的信号并容纳在主体内(70)的显示屏(22)；
以及
固定到主体(70)上的光传感器(44)，用于捕获连续图像，并且向处理器(38)提供表示所捕获图像的图像信号；
与光传感器(44)相邻地固定到主体(70)上的背光(46)；以及
与处理器(38)相关联的导航模块(112)，用于接收图像信号，并且根据所述图像信号来确定在主体和参考表面(96)之间的相对移动，并且根据所确定的相对移动在显示屏(22)上移动指针(84)，
其特征在于所述设备包括：
相对于光传感器(44)在第一位置和第二位置之间可移动的透镜(76)，其中，在第一位置处，透镜(76)位于光传感器(44)的视线上，而在第二位置处，透镜(76)不位于光传感器(44)的视线上。
16.根据权利要求15所述的设备，其特征在于：所述设备包括与处理器可操作地相连的传感器(91)，用于确定透镜(76)是位于第一位置还是位于第二位置。
17.根据权利要求16所述的设备，其特征在于：所述设备还包括与处理器(38)相关联的摄像机模块(114)，用于在显示屏(22)上显示所捕获的图像，可选择性地操作摄像机模块(114)和导航模块(112)，以便在设备的摄像机模式下，在显示屏(22)上显示所捕获的图像，以及在导航模式下，根据所捕获的图像在屏幕上移动指针(84)。
18.根据权利要求17所述的设备，其特征在于：响应传感器(91)检测到透镜(76)处于第一位置，选择导航模式，而响应传感器(91)检测到透镜(76)处于第二位置，选择摄像机模式。
19.根据权利要求15到18任一个所述的设备，其特征在于：所述设备包括位于主体的正面侧的用户接口按键(90，92)，用于将输入信号提供给处理器，所述摄像机(44)固定到主体(70)上，以便捕获位于主体的背面侧(72)之后的图像。
20.根据权利要求15到19任一个所述的设备，其特征在于：所述设备是手持式无线通信设备，包括与处理器相连的通信子系统(11)，用于与无线网络(50)和与处理器(38)交换信号。
21.一种移动设备，包括：
主体(70)；
容纳在主体(70)内的处理器(38)和相关存储器；
响应来自处理器(38)的信号并容纳在主体(70)内的显示屏(22)；
以及
固定到主体(70)上的光传感器(44)，用于捕获连续图像，并且向处理器(38)提供表示所捕获图像的图像信号；
与处理器(38)相关联的摄像机模块(114)，用于在显示屏(22)上显示所捕获的图像；以及
与处理器(38)相关联的导航模块(112)，用于接收图像信号，并且根据所述图像信号来确定在主体和参考表面(96)之间的相对移动，并且根据所确定的相对移动在显示屏(22)上移动指针(84)，
其特征在于所述设备包括：
与处理器(38)相关联的选择模式模块(110)，用于在摄像机模式和导航模式之间进行选择，其中，所述摄像机模块在所述导航模式下激活，而所述导航模块在所述导航模式下激活。
22.根据权利要求21所述的设备，其特征在于：所述设备还包括相对于光传感器(44)在第一位置和第二位置之间可移动的透镜(76)，其中，在第一位置处，透镜(76)位于光传感器(44)的视线上，而在第二位置处，透镜(76)不位于光传感器(44)的视线，并且所述选择模式模块(110)根据所述透镜(76)的位置，在所述摄像机模式和所述导航模式之间进行选择。
23.根据权利要求22所述的设备，其特征在于所述设备包括与处理器可操作地相连的传感器(91)，用于确定透镜(76)是处于第一位置处还是处于第二位置处，并且所述选择模式模块(110)对所述传感器(91)进行响应。
24.根据权利要求21所述的设备，其特征在于所述选择模式模块(110)接收所述所捕获图像，并根据所述捕获的图像来确定所述光传感器(44)是否位于离参考表面(96)的阈值距离之内，并且所述选择模式模块(110)根据所述确定来自动在所述导航模式和所述摄像机模式之间进行选择。
25.根据权利要求21到24任一个所述的设备，其特征在于：所述设备是手持式无线通信设备，包括与处理器相连的通信子系统(11)，用于与无线网络(50)和与处理器(38)交换信号。
26.一种用于具有显示屏(22)的移动计算设备(10)屏幕上的导航方法，所述方法包括步骤：
(a)固定摄像机(44)，以和显示屏(22)一起移动；
(b)在显示屏(22)上显示屏幕上的指针(84)；以及
(c)通过摄像机(44)来捕获参考表面(96)的连续图像；
其特征在于所述方法包括步骤：
(d)自动在导航模式和摄像机模式之间进行选择；
(e)在所述导航模式下，比较连续图像，以确定摄像机(44)和参考表面(96)之间的相对移动；以及
(f)在所述导航模式下，根据所确定的移动，在显示屏(22)上移动屏幕上的指针(84)。
27.根据权利要求26所述的方法，所述自动选择的步骤包括确定透镜(76)是否相对于摄像机(44)在第一位置和第二位置之间可移动，其中，在第一位置处，透镜(76)位于摄像机(44)的视线上，而在第二位置处，透镜(76)不位于摄像机(44)的视线上。
28.根据权利要求27所述的方法，其特征在于确定所述透镜(76)的位置的步骤包括从近程传感器(91)中接收信号。
29.根据权利要求26所述的方法，其特征在于所述自动选择的步骤包括：根据所述捕获的图像，确定所述摄像机(44)是否位于离参考表面(96)的阈值距离内，并且根据所述确定在所述导航模式和所述摄像机模式之间自动进行选择。
30.根据权利要求26所述的方法，其特征在于所述方法还包括以下步骤：在所述摄像机模式下，通过摄像机(44)捕获至少一个图像，并且显示在显示屏(22)上的至少一个所捕获图像的表示。
CNB200410056219XA 2003-08-05 2004-08-05 具有屏幕上光导航的移动设备 Active CN100349103C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GB0318358A GB2404819A (en) 2003-08-05 2003-08-05 Mobile communications device with integral optical navigation
GB0318358.9 2003-08-05

Publications (2)

Publication Number Publication Date
CN1581052A true CN1581052A (zh) 2005-02-16
CN100349103C CN100349103C (zh) 2007-11-14

Family

ID=27839683

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB200410056219XA Active CN100349103C (zh) 2003-08-05 2004-08-05 具有屏幕上光导航的移动设备

Country Status (9)

Country Link
US (6) US7340342B2 (zh)
EP (1) EP1507196B1 (zh)
CN (1) CN100349103C (zh)
AT (1) ATE365941T1 (zh)
CA (1) CA2476514C (zh)
DE (1) DE602004007205T2 (zh)
GB (1) GB2404819A (zh)
HK (1) HK1074090A1 (zh)
SG (1) SG109013A1 (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102236479A (zh) * 2010-04-30 2011-11-09 安华高科技Ecbuip(新加坡)私人有限公司 用于光学手指导航的背光装置
CN102866787A (zh) * 2011-07-07 2013-01-09 新科实业有限公司 侧面安装式光导航模块
US8402182B2 (en) 2006-12-12 2013-03-19 Apple Inc. Methods and systems for automatic configuration of peripherals
US8536507B2 (en) 2005-09-30 2013-09-17 Apple Inc. Integrated proximity sensor and light sensor
US8600430B2 (en) 2007-01-07 2013-12-03 Apple Inc. Using ambient light sensor to augment proximity sensor output
US8614431B2 (en) 2005-09-30 2013-12-24 Apple Inc. Automated response to and sensing of user activity in portable devices
CN103489149A (zh) * 2012-06-08 2014-01-01 联想(北京)有限公司 一种图像获取的方法及一种电子设备
CN101558372B (zh) * 2006-11-15 2014-03-05 苹果公司 集成的接近度传感器和光传感器
US8693877B2 (en) 2007-03-09 2014-04-08 Apple Inc. Integrated infrared receiver and emitter for multiple functionalities
US8698727B2 (en) 2007-01-05 2014-04-15 Apple Inc. Backlight and ambient light sensor system
US9146304B2 (en) 2012-09-10 2015-09-29 Apple Inc. Optical proximity sensor with ambient light and temperature compensation
CN106664349A (zh) * 2014-03-25 2017-05-10 6115187加拿大公司暨伊美景象公司 通过记录、共享和处理与广角图像相关联的信息的对系统行为或用户体验的自动化定义
US9955426B2 (en) 2007-01-05 2018-04-24 Apple Inc. Backlight and ambient light sensor system

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2404819A (en) * 2003-08-05 2005-02-09 Research In Motion Ltd Mobile communications device with integral optical navigation
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US20060167859A1 (en) * 2004-11-09 2006-07-27 Verbeck Sibley Timothy J System and method for personalized searching of television content using a reduced keypad
JP4696608B2 (ja) * 2005-03-15 2011-06-08 オムロン株式会社 被写体認証装置、携帯電話、及び被写体認証プログラム
KR100677457B1 (ko) * 2005-05-24 2007-02-02 엘지전자 주식회사 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법
DE102005024638A1 (de) * 2005-05-30 2006-12-07 Siemens Ag Verfahren zum Navigieren durch ein Menü eines elektronischen Geräts
FR2887654A1 (fr) * 2005-06-24 2006-12-29 Daniel Henri Lucien Jos Martin Dispositif de pointage digital sur ecran
KR100628101B1 (ko) * 2005-07-25 2006-09-26 엘지전자 주식회사 문자 입력 기능을 갖는 이동통신단말기 및 이를 이용한방법
FR2889323B1 (fr) * 2005-07-29 2008-12-12 Realeyes3D Sa Procede pour le controle d'une interface a l'aide d'une camera equipant un terminal de communication
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
US8049723B2 (en) * 2005-12-20 2011-11-01 Accenture Global Services Limited Wireless handheld device and method with remote GUI control
US7490771B2 (en) * 2006-03-06 2009-02-17 Avago Technologies General Ip (Singapore) Pte. Ltd. Reflective encoder with interchangable lens on emitter-detector module
CN101102559A (zh) * 2006-07-06 2008-01-09 英业达股份有限公司 行动通讯装置
KR100764698B1 (ko) 2006-08-07 2007-10-08 삼성전자주식회사 카메라 영상의 패턴인식과 해석에 의한 휴대 단말기의사용자 인터페이스 제어 방법 및 그 단말기
US8553090B2 (en) * 2006-09-08 2013-10-08 Kingston Technology Corporation Portable image capture and camera device
US20080109748A1 (en) * 2006-11-02 2008-05-08 Lai-Chen Lai Browsing System and Method Thereof
US8531540B2 (en) * 2007-06-04 2013-09-10 Sharp Kabushiki Kaisha Mobile terminal, control method of same, control program of same, and computer-readable storage medium storing the control program
DE102007059273A1 (de) * 2007-12-08 2009-06-18 T-Mobile Internationale Ag Virtuelle Tastatur eines mobilen Endgerätes
US7966384B2 (en) * 2008-08-04 2011-06-21 Flat Hill Ideas, Llc Real-time interactive system and method for making and updating changes to infrastructure data
EP2341412A1 (en) * 2009-12-31 2011-07-06 Sony Computer Entertainment Europe Limited Portable electronic device and method of controlling a portable electronic device
US20110298708A1 (en) * 2010-06-07 2011-12-08 Microsoft Corporation Virtual Touch Interface
US20120026197A1 (en) * 2010-07-27 2012-02-02 Qualcomm Innovation Center, Inc. Method and Apparatus for Viewing Content on a Mobile Computing Device
KR101195896B1 (ko) 2010-09-09 2012-11-05 나비스오토모티브시스템즈 주식회사 네비게이션 장치의 광센서를 이용한 동작방법
US8827129B2 (en) 2011-01-24 2014-09-09 Blackberry Limited Holder for a handheld electronic device
US20120194692A1 (en) * 2011-01-31 2012-08-02 Hand Held Products, Inc. Terminal operative for display of electronic record
US20120194415A1 (en) * 2011-01-31 2012-08-02 Honeywell International Inc. Displaying an image
FR2971066B1 (fr) 2011-01-31 2013-08-23 Nanotec Solution Interface homme-machine tridimensionnelle.
EP2506204A1 (en) * 2011-03-29 2012-10-03 Research In Motion Limited Mobile wireless communications device for selecting a payment account to use with a payment processing system based upon a movement sensor or image sensor and associated methods
US9091562B2 (en) * 2012-06-27 2015-07-28 International Business Machines Corporation Navigation system efficiently utilizes power by providing instructions to the driver for only the driver selected portion(s) of route
US8957850B2 (en) 2012-07-30 2015-02-17 Harris Corporation Hand-held communication devices with finger navigation user interface
JP6269681B2 (ja) * 2012-11-09 2018-01-31 富士ゼロックス株式会社 ネットワーク型印刷システム
US9081521B2 (en) 2012-11-09 2015-07-14 Xerox International Partners Networked printing systems for providing a la carte reproduction services
US9286016B2 (en) 2012-11-09 2016-03-15 Xerox International Partners Networked printing systems
US9195413B2 (en) 2012-11-09 2015-11-24 Xerox International Partners Networked printing systems
US9363494B2 (en) * 2012-12-05 2016-06-07 At&T Intellectual Property I, L.P. Digital video recorder that enables recording at a selected resolution
FR3002052B1 (fr) 2013-02-14 2016-12-09 Fogale Nanotech Procede et dispositif pour naviguer dans un ecran d'affichage et appareil comprenant une telle navigation
US10302669B2 (en) * 2013-11-01 2019-05-28 Invensense, Inc. Method and apparatus for speed or velocity estimation using optical sensor
US10735902B1 (en) * 2014-04-09 2020-08-04 Accuware, Inc. Method and computer program for taking action based on determined movement path of mobile devices

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2091526B (en) * 1981-01-13 1985-10-02 Harris Corp Digital map generator and display system
US5040116A (en) * 1988-09-06 1991-08-13 Transitions Research Corporation Visual navigation and obstacle avoidance structured light system
US5414625A (en) * 1991-04-01 1995-05-09 Nissan Motor Co., Ltd. System and method for providing steering control for autonomous vehicle
US5880411A (en) * 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
JPH10275233A (ja) * 1997-03-31 1998-10-13 Yamatake:Kk 情報処理システム、ポインティング装置および情報処理装置
EP0957448A3 (en) * 1998-05-15 2001-09-26 PSC Scanning, Inc. Optical code reader mouse
US6288704B1 (en) 1999-06-08 2001-09-11 Vega, Vista, Inc. Motion detection and tracking system to control navigation and display of object viewers
GB2353428A (en) * 1999-08-20 2001-02-21 Bayerische Motoren Werke Ag Monitoring system for a vehicle
WO2001015067A1 (de) * 1999-08-23 2001-03-01 Siemens Aktiengesellschaft Verfahren und anordnung zur eingabe von steuersignalen
GB2358983A (en) * 2000-02-07 2001-08-08 Ericsson Telefon Ab L M Communication device with cursor control on reverse side to display
US7009626B2 (en) * 2000-04-14 2006-03-07 Picsel Technologies Limited Systems and methods for generating visual representations of graphical data and digital document processing
JP2002152696A (ja) 2000-11-10 2002-05-24 Hitachi Ltd 携帯端末
JP2002196877A (ja) * 2000-12-25 2002-07-12 Hitachi Ltd イメージセンサを用いた電子機器
JP4027616B2 (ja) * 2001-04-20 2007-12-26 三菱電機株式会社 ポインティングデバイス装置および携帯電話機
JP2003008693A (ja) * 2001-06-21 2003-01-10 Nec Access Technica Ltd 携帯型電話機
US7106357B2 (en) 2001-08-27 2006-09-12 Olympus Optical Co., Ltd. Portable information terminal device having camera feature
AU2003202171A1 (en) * 2002-01-17 2003-07-30 Nokia Corporation Pointing device
GB2404819A (en) * 2003-08-05 2005-02-09 Research In Motion Ltd Mobile communications device with integral optical navigation
EP1751970A4 (en) * 2004-05-01 2010-04-21 Eliezer Jacob DIGITAL CAMERA WITH NON-UNIFORM IMAGE RESOLUTION
US7233683B2 (en) * 2005-01-04 2007-06-19 Deere & Company Method and system for guiding a vehicle with vision-based adjustment
US7242791B2 (en) * 2005-01-04 2007-07-10 Deere & Company Method and system for guiding a vehicle with vision enhancement

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8829414B2 (en) 2005-09-30 2014-09-09 Apple Inc. Integrated proximity sensor and light sensor
US9389729B2 (en) 2005-09-30 2016-07-12 Apple Inc. Automated response to and sensing of user activity in portable devices
US9619079B2 (en) 2005-09-30 2017-04-11 Apple Inc. Automated response to and sensing of user activity in portable devices
US8536507B2 (en) 2005-09-30 2013-09-17 Apple Inc. Integrated proximity sensor and light sensor
US9958987B2 (en) 2005-09-30 2018-05-01 Apple Inc. Automated response to and sensing of user activity in portable devices
US8614431B2 (en) 2005-09-30 2013-12-24 Apple Inc. Automated response to and sensing of user activity in portable devices
CN101558372B (zh) * 2006-11-15 2014-03-05 苹果公司 集成的接近度传感器和光传感器
US8914559B2 (en) 2006-12-12 2014-12-16 Apple Inc. Methods and systems for automatic configuration of peripherals
US8402182B2 (en) 2006-12-12 2013-03-19 Apple Inc. Methods and systems for automatic configuration of peripherals
US8698727B2 (en) 2007-01-05 2014-04-15 Apple Inc. Backlight and ambient light sensor system
US9955426B2 (en) 2007-01-05 2018-04-24 Apple Inc. Backlight and ambient light sensor system
US9513739B2 (en) 2007-01-05 2016-12-06 Apple Inc. Backlight and ambient light sensor system
US8600430B2 (en) 2007-01-07 2013-12-03 Apple Inc. Using ambient light sensor to augment proximity sensor output
US8693877B2 (en) 2007-03-09 2014-04-08 Apple Inc. Integrated infrared receiver and emitter for multiple functionalities
CN102236479A (zh) * 2010-04-30 2011-11-09 安华高科技Ecbuip(新加坡)私人有限公司 用于光学手指导航的背光装置
CN102866787A (zh) * 2011-07-07 2013-01-09 新科实业有限公司 侧面安装式光导航模块
CN102866787B (zh) * 2011-07-07 2016-09-14 新科实业有限公司 侧面安装式光导航模块
CN103489149A (zh) * 2012-06-08 2014-01-01 联想(北京)有限公司 一种图像获取的方法及一种电子设备
US9146304B2 (en) 2012-09-10 2015-09-29 Apple Inc. Optical proximity sensor with ambient light and temperature compensation
CN106664349A (zh) * 2014-03-25 2017-05-10 6115187加拿大公司暨伊美景象公司 通过记录、共享和处理与广角图像相关联的信息的对系统行为或用户体验的自动化定义
US10924623B2 (en) 2014-03-25 2021-02-16 Immervision, Inc. Automated identification of panoramic imagers for appropriate and efficient panoramic image distortion processing system
US10516799B2 (en) 2014-03-25 2019-12-24 Immervision, Inc. Automated definition of system behavior or user experience by recording, sharing, and processing information associated with wide-angle image
CN106664349B (zh) * 2014-03-25 2020-03-13 6115187加拿大公司暨伊美景象公司 自动定义与场景图像内容相关的用户体验或系统行为的系统

Also Published As

Publication number Publication date
ATE365941T1 (de) 2007-07-15
US20130044235A1 (en) 2013-02-21
EP1507196A3 (en) 2006-02-15
EP1507196B1 (en) 2007-06-27
US20100076678A1 (en) 2010-03-25
CN100349103C (zh) 2007-11-14
CA2476514C (en) 2008-04-22
US20110163951A1 (en) 2011-07-07
EP1507196A2 (en) 2005-02-16
US20080097690A1 (en) 2008-04-24
DE602004007205T2 (de) 2008-02-28
US20050033512A1 (en) 2005-02-10
US8290707B2 (en) 2012-10-16
GB0318358D0 (en) 2003-09-10
GB2404819A (en) 2005-02-09
US8600669B2 (en) 2013-12-03
US7917284B2 (en) 2011-03-29
HK1074090A1 (en) 2005-10-28
US7340342B2 (en) 2008-03-04
SG109013A1 (en) 2005-02-28
US7672776B2 (en) 2010-03-02
US20120075306A1 (en) 2012-03-29
US8086397B2 (en) 2011-12-27
DE602004007205D1 (de) 2007-08-09
CA2476514A1 (en) 2005-02-05

Similar Documents

Publication Publication Date Title
CN100349103C (zh) 具有屏幕上光导航的移动设备
US7106357B2 (en) Portable information terminal device having camera feature
US7809401B2 (en) Mobile terminal, mouse application program, and method for utilizing mobile terminal as wireless mouse device
US20080118162A1 (en) Text Detection on Mobile Communications Devices
JP2009020759A (ja) 入力装置、記憶媒体、情報入力方法及び電子機器
JP2006010489A (ja) 情報装置、情報入力方法およびプログラム
CN1448832A (zh) 包括有改进的指点器的便携式装置
JP2012512453A (ja) 光学マーカを有するユーザ入力デバイスを検出する電子デバイス、システム、方法およびコンピュータプログラム
WO2007024085A1 (en) A displacement and tilt detection method for a portable autonomous device having an integrated image sensor and a device therefor
CN1457214A (zh) 便携式电话机
US20180299645A1 (en) Focusing control device, imaging device, focusing control method, and focusing control program
KR100466855B1 (ko) 촬영 기능을 가지는 카메라 부착 이동 통신 단말기의 촬상신호를 이용한 사용자 인터페이스 방법 및 시스템
JP2003069868A (ja) カメラ機能を有する携帯型情報端末機器
JP2003110895A (ja) カメラ機能を有する携帯型情報端末機器
JP2003069869A (ja) カメラ機能を有する携帯型情報端末機器
KR100626217B1 (ko) 이동통신단말기에서 광마우스 기능을 구현하기 위한 장치및 방법
KR100734022B1 (ko) 카메라를 이용한 키 선택 인식이 가능한 이동 통신 단말기및 그 인식 방법
KR20030028525A (ko) 광마우스 기능이 장착된 카메라폰
KR20060027930A (ko) 일체형 광도파로 구조를 사용한 초슬림 광 조이스틱™.
KR20070073473A (ko) 동영상 촬영 이미지의 이동경로 확인방법 및 데이터입력방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: Voight, Ontario, Canada

Patentee after: Blackberry Ltd.

Address before: Voight, Ontario, Canada

Patentee before: Research In Motion Ltd.

CP01 Change in the name or title of a patent holder