CN109240587A - 三维人机界面 - Google Patents

三维人机界面 Download PDF

Info

Publication number
CN109240587A
CN109240587A CN201810965827.4A CN201810965827A CN109240587A CN 109240587 A CN109240587 A CN 109240587A CN 201810965827 A CN201810965827 A CN 201810965827A CN 109240587 A CN109240587 A CN 109240587A
Authority
CN
China
Prior art keywords
symbol
touch screen
hovering input
touchscreen
command
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810965827.4A
Other languages
English (en)
Other versions
CN109240587B (zh
Inventor
迪迪埃·罗齐埃
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanotec Solution SAS
Fogale Nanotech SA
Original Assignee
Fogale Nanotech SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fogale Nanotech SA filed Critical Fogale Nanotech SA
Publication of CN109240587A publication Critical patent/CN109240587A/zh
Application granted granted Critical
Publication of CN109240587B publication Critical patent/CN109240587B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明涉及三维人机界面。提供了一种方法，包括在具有触摸屏的电子设备处：当在触摸屏上显示符号时，经由触摸屏检测第一悬停输入，包括检测触摸屏上方的对象而不检测与触摸屏接触的对象；响应于在触摸屏的与所述符号对应的相应位置处检测到满足一个或多个第一标准的第一悬停输入，选择所述符号；当所述符号被选择时，经由触摸屏检测第二悬停输入，包括检测触摸屏上方的所述对象的移动而不检测与触摸屏接触的对象；以及响应于检测到满足一个或多个第二标准的第二悬停输入，移动在触摸屏上显示的所述符号。

Description

三维人机界面
本申请是申请号为201280007164.6、申请日为2012年1月30日、发明名称为“三维人机界面”的发明专利申请的分案申请。
技术领域
本发明涉及一种用于选择命令的方法，适合于在三维人机界面中实施。本发明还涉及一种实施所述方法的设备。
本发明的领域更特别但非限制性地是非接触人机界面领域。
背景技术
触摸界面或触摸屏目前广泛地用于控制设备，例如计算机和手机等。
一般地，它们包括显示屏和传感器，使得能够确定屏幕表面和一个或更多个命令对象例如手指或触控笔之间的接触点。
这些触摸界面经常使用电容测量技术来检测命令对象的位置。例如屏幕可以用电容式电极的网状物覆盖，对象的位置基于对象与电极以电容耦合形式的相互作用被检测。
触摸界面还包括能够解译用户命令的软件元素。显示器根据检测到的命令对象的位置变化，使用户能够可视地监控其动作并选择命令。
手势界面或3D界面也是已知的，其中加入能够在对象触摸屏幕表面之前就远程地检测他们的第三维。这些界面配备有能够测量一个或更多个命令对象相对于界面在空间的位置的传感器。
电容测量技术也很好地适用于制造这种类型的界面。
例如已知Rozière的文献FR 2 844 349，公开了一种电容式接近检测器，其包括多个独立的电极，使得能够测量电极和附近最大距离几十、甚至几百毫米的对象之间的电容和距离。所述电极可以通过使用例如氧化铟锡(ITO)透明地制成，并沉积在显示屏上。
这些具有空间测量能力的界面开启了用户和机器之间交互的新的可能性，并使得能够设想新的人机界面(HMI)控制模式，其中将充分利用距离或深度数据以通过界面软件“浏览”。
已知Chaudhri等的文献US 2008/0307360，公开了具有三维组件的人机界面软件。但是，三维层面局限于其中计算机对象(图标、文件等)具有三维外观的环境内的表示。界面控制模式，特别地用于选择对象严格地保持二维，这是因为它是基于检测事件，例如鼠标光标在界面平面内的移动。
本发明的目的是提出一种用于在具有三维测量能力的人机界面(HMI)中选择命令(或计算机对象)的方法，其充分利用界面软件中测量的三维层面。
发明内容
该目的通过一种用于选择命令的方法来实现，所述方法实施命令界面、显示器和至少一个适合于检测至少一个命令对象的传感器，所述方法包括以下步骤：
-通过所述传感器获取所述命令对象和所述命令界面之间的距离数据，
-根据显示模式在所述显示器上显示表示命令或命令集的至少一个符号，
-其特征在于所述方法还包括使用所述距离数据以确定符号的所述显示模式的步骤。
根据本发明的方法还可以包括以下步骤：
-通过传感器获取至少一个命令对象相对于命令界面的位置数据，
-使用所述位置数据以确定所显示符号的显示模式。
符号的显示模式可以包括可区分的该符号的图形表示，使得能够显示状态，例如用于做出选择的强调、选择本身、命令的执行、移动、旋转、变化等。例如，显示模式可以对应加亮、通过颜色或大小变化相对于其他显示符号的图形区分，或者以不同的方式重新显示符号并转移以例如越过命令对象可见的。
根据本发明的方法还包括使用至少一种以下数据集：距离数据、距离和位置数据以确定所显示符号的步骤。
确定所显示符号可以包括根据距离和/或位置数据选择显示器上所示出的符号，因此选择界面上可访问的命令和/或命令组。
距离和位置数据可以包括：
-距离和/或位置的测量；
-传感器所提供的(例如由这些传感器所测量的物理变量)并且取决于(优选地以单调的方式)命令对象相对于命令界面的距离和/或位置的数据；
-表示命令对象的速度和/或加速度的变量，对应于选自距离和/或位置的变量；
-关于轨迹的数据，即距离和/或轨迹的时间顺序。
根据实施方案，根据本发明的方法可以实施以下测量类型中的至少一种：
-命令对象和传感器之间电容相互作用的测量，
-由于命令对象的存在所引起的光强度变化的测量。
这些测量特别地使得能够获取距离和/或位置数据。
所测量的电容相互作用特别地可以包括：
-命令对象和传感器的电容式电极之间的直接电容耦合，在该情况下测量对象和电极之间的电容，或
-由于命令对象的存在所引起的传感器的电极之间电容耦合的扰动，在该情况下测量这些耦合电容的变化。
所测量的光强度的变化可以例如通过命令对象对光束的中断或由于命令对象的存在所引起的阴影效果来产生。
根据本发明的方法还可以包括以下步骤：
-显示表示第一命令集的第一符号，
-当命令对象的距离小于阈值距离时，显示表示包含在所述第一命令集之内的命令或命令集的至少一个第二符号。
该包含可以以逻辑方式，例如以分级命令的树结构，或者命令或命令集的层叠的方式限定。
第二符号可以显示在显示器上明显与第一符号的位置不同的位置处，例如以免遮掩第一符号。
根据本发明的方法还可以包括以下步骤：
-显示表示第一命令或第一命令集的第一符号，
-当命令对象的距离小于阈值距离时，显示表示第二命令或第二命令集的第二符号。
第二符号可以显示在显示器上基本上与第一符号的位置相同的位置处，例如示出符号的层叠中深度方向的移动，当命令对象的移动继续进行时，元素会从所述符号的层叠中移出。
根据本发明的方法还可以包括选择命令的步骤，其包括基于选自：距离数据、距离和位置数据的数据集校验至少一个选择条件的步骤。
其还可以包括校验以下选择条件中的至少一个选择条件的步骤：
-命令对象的距离小于预定选择距离，
-在预定最小持续时间内，命令对象的距离小于预定选择距离，
-命令对象与命令界面的表面接触，
-命令对象在距离进行快速往复移动，即例如在小于预定持续时间的持续时间内在小于预定距离的距离的往复移动，
-至少两个命令对象朝预定位置进行会聚移动，例如抓或捏移动(或任何其他相对移动)。
命令的选择可以在命令对象接近该命令限定的位置或朝该命令限定的位置会聚时进行。
根据本发明的方法还可以包括执行以下类型中一种(预先选择的)命令的步骤：执行计算机程序、执行应用、显示存储于计算机存储媒体上文件夹的内容、显示图像、播放声音、读取多媒体内容或任何其他命令。
根据本发明的方法还可以包括执行用于移动符号的命令的步骤，所述移动符号的命令包括：
-根据表示命令对象或一组命令对象的位置的位置显示所述符号的步骤，
-使所述符号的移动生效的步骤，其包括基于选自：距离数据、距离和位置数据的数据集校验至少一个生效条件的步骤。
根据本发明的方法还可以包括校验以下生效条件中至少一个生效条件的步骤：
-命令对象的距离小于预定选择距离，
-在预定最小持续时间内，命令对象的距离小于预定选择距离，
-命令对象与命令界面的表面接触，
-命令对象在距离进行快速往复移动，
-至少两个命令对象围绕预定位置进行偏离移动(或任何其他相对移动)。
根据实施方案，根据本发明的方法还可以包括以下步骤：
-显示图标形式的符号；
-当命令对象的距离小于预定触发距离时触发显示器，例如以在其不使用时关闭屏幕和节省能量。
根据另一个方面，提出一种用于选择命令的设备，包括：
-命令界面，
-显示器，
-适合于检测命令对象的至少一个传感器，
-适合于通过所述传感器产生至少一个命令对象和所述命令界面之间距离数据的电子计算装置，
-适合于产生表示命令或命令集的至少一个符号的显示的显示管理装置，
所述设备还包括适合于处理所述距离数据以确定所显示符号的计算装置。
显示器可以是显示屏或任何其他显示装置，例如浮雕似的(3D显示器)。
命令界面、传感器和显示器可以根据任何布置，例如是：
-叠加的，显示器集成在命令界面中，所述命令界面包括布置在其表面区域上或外周的传感器；
-单独的，命令界面一边提供有传感器，另一边提供有显示器。特别地，命令界面可以是连接到计算机的输入板，显示器可以是与输入板分开的计算机屏幕。
根据本发明的设备还可以包括：
-适合于通过传感器产生至少一个命令对象相对于所述命令界面的位置数据的电子计算装置，
-适合于处理所述位置数据以确定所显示符号的计算装置。
根据实施方案，根据本发明的设备还可以包括至少一种以下类型的传感器：
-电容式传感器，
-光学传感器，
光学传感器可以包括例如具有发射光束的光源的光屏障和光电检测器，所述光电检测器布置为使得当这些光束被命令对象中断时被它们照亮。它们还可以包括对光变化，例如由于命令对象的存在所引起的阴影或反射效果敏感的光电检测器，例如基于TFT或OLED技术集成到屏幕中。
根据实施方案，根据本发明的设备还可以包括适合于产生距离和/或位置数据的所有类型的传感器。特别地，其可以包括超声声学传感器，例如布置为使得命令对象能够通过回声和三角测量定位。
根据另一方面，提出一种以下类型之一的设备：计算机、电话、智能手机、平板电脑、显示屏、终端，其特征在于其包括一种用于实施根据本发明的方法选择命令的设备。
附图说明
本发明的其他优点和特征通过阅读非限制性实施和实施方案的详细描述以及根据以下附图会变得清楚：
图1示出了根据本发明的三维人机界面的示意图，
图2示出了检测表面上位置的标示惯例，
图3示出了能访问的具有位置和距离条件的命令集的结构，和浏览路径通过该结构的例子，
图4(a)至(d)示出了用于命令或命令集的符号的时间顺序，当浏览图3中的结构时，它们显示在显示屏上，
图5(a)、5(b)和5(c)示出了用于命令或命令集的符号的时间顺序的第一变化方案，当浏览通过层叠时，它们被显示，而图5(a)、5(b)、5(d)和5(e)示出了该时间顺序的第二变化方案，
图6示出了分别根据图6(a)中所示第一变化方案和对应于图5(a)、5(b)和5(c)，以及根据图6(b)中所示第二变化方案和对应于图5(a)、5(b)、5(d)和5(e)的具有位置和距离条件的命令或命令集的层叠，使能访问元素，
图7示出了移动命令顺序与图7(a)中命令的选择、图7(b)中命令的生效以及图7(c)中符号的旋转的示意图。
具体实施方式
将要描述实施包括电容式传感器的人机界面(HMI)的本发明的一个实施方案。当然，该实施方案是实施本发明的一个非限制性的例子。例如，这样的界面非常适合于制作用于宿主系统例如手机、智能手机、平板电脑或计算机的人机界面(HMI)。
参照图1，界面包括：
-显示屏2，非限制性地基于液晶显示器(LCD)、薄膜晶体管(TFT)或有机发光二极管(OLED)；
-命令界面1，包括配备有电容式传感器6的基本上透明的检测表面，所述电容式传感器也是基本上透明的，并且适合于检测至少一个命令对象3例如手、手指或触控笔的存在。
传感器6提供关于对象3和界面1的检测表面之间沿Z轴的距离4的数据，和关于对象3沿Z轴在命令界面1上的投影在平面(X，Y)内的位置5的数据。它们也能够检测命令对象3和界面1的检测表面之间的接触。
关于距离4和关于位置5的数据包括距离4和位置5的等效测量。不必以长度单位表示的这些测量是电容测量的转换或电容的变化方案。特别地，命令对象3的物理特征可以影响所测的电容，从而影响等效距离和/或位置方面的转换。
关于距离4和关于位置5的数据还可以包括轨迹，定义为如距离4和/或位置5的时间顺序和衍生值例如速度和加速度。
传感器6包括基于氧化铟锡(ITO)的电容式电极。根据应用，它们可以具有各种不同的数量和布置，图1仅为了说明。
传感器6的电容式电极连接于电子测量单元7，使得能够计算距离4和位置5。对于电容式传感器6和电子测量单元7有几种可能的实施方案。
有利地，传感器6和电子测量单元7根据Rozière的文献FR 2 844 349中描述的方法制得。它们包括分布在界面1的表面区域上的多个独立的电极6。这些电极6连接于使用浮点检测或换而言之参考浮动电势的电子测量单元7。也具有浮动参考电势的保护电极沿测量电极6的背面在所述测量电极6和显示屏2之间设置，以消除所有寄生电容。所有电极均具有相同的电势，因此在电极之间没有能够损害电容测量的电容耦合。在Rozière的文献FR 2756 048中也详细地描述了可以在本发明的框架内使用的该电子检测单元7及其实施方法，在此对其进行引用。
扫描仪能够顺序地测量电容，从而能够测量电极6和命令对象3之间的距离。未“轮询”的电极6也保持与保护电极一样的电势，仍是为了消除寄生电容。
无论是涉及计算机、手机、平板电脑还是任何其他系统等，宿主系统还包括计算机计算装置8。这些计算装置8通常包括与组件例如随机存取存储(RAM)、大容量存储装置(硬盘、闪存等)相结合的微处理器单元(中央处理单元(CPU))，使得能够执行一个(或多个)计算机程序或软件。
该软件的一部分，也称为界面软件，用于HMI管理任务。该界面软件有助于实施根据本发明的方法的步骤，其包括：
-获取由传感器6及其电子测量单元7所提供的距离(或测量)数据4和位置数据5的步骤，
-基于来自传感器6的数据和来自宿主系统(电话、计算机等)的数据更新显示器2的步骤，
-将来自用户的命令传达到宿主系统的步骤。
人机界面软件(HMI软件)对应于用户在显示器2上所看到的。用户通过使用一个或更多个命令对象3例如其手指、触控笔等与该HMI软件交互。
通常，HMI软件包括宿主系统的图形、符号形式的表示和/或可能的动作：
-执行与宿主系统的硬件和/或软件组件相互作用的软件、应用、任务，
-以图形形式或借助于符号等表示的数据的显示、重现、复制、移动、操作。
没有限制地，能够调用用户可以通过命令对象3和HMI命令软件执行的所有动作。
这些命令通过符号例如图标以图形的方式表示在显示器2上，用户通过命令对象3可以与这些符号交互。
HMI设计中一个重要的挑战是命令表示的组织和结构化，以使得用户可以通过移动或“浏览”界面而容易地找到和并选择它们。
命令可以根据三维本性的分级结构进行组织，其表示命令集并且其中特别地分为：
-树结构或文件夹树，其中每个文件夹包括命令集和/或子文件夹集，
-层叠结构或层叠，其中命令和/或命令集通过显示为层叠的符号(或图标)表示。
现有技术的HMI主要基于二维类型的浏览，其仅考虑了用于选择命令的命令对象3的位置5，无论这是涉及鼠标光标(悬停或点击)、对象3和界面1的检测表面之间的物理接触(敲击)还是悬停在界面1的检测表面上。因此，即使浏览三维本性的结构实际上也沦为同一平面内的一组动作。例如，必须敲击图标以打开文件夹并显示其内容或示出层叠的命令，即访问不同的分级(或拓扑)层次。
有利地，根据本发明的方法能够通过使用距离测量4以真正三维的方式浏览的HMI。尤其能够通过改变命令对象3和界面1的检测表面之间的距离4来访问根据三维类型结构布置的命令集的不同的分级(或拓扑)层。该“访问”在显示器2上示出，显示表示根据距离4所选分级(或拓扑)层次的命令或命令集的符号(或图标)。
浏览被称为三维的，这是因为能够通过使用距离数据4来浏览命令结构和/或命令组的分级或拓扑层次，所述层次可以用一个或多个符号显示在显示器2上。
此外，还可以通过使用位置测量5来浏览显示器上所显示的多个这类命令结构中的一个特定的分级命令结构，而不影响其他的结构。事实上，其图形符号通过命令对象3悬停的唯一命令结构(因此位置5接近其图形符号或在其图形符号上)“看见”其显示根据对应于距离4的分级层次改变。
一旦显示，命令可以通过选择其在HMI上的表示符号进行选择。特别地可以实施该选择，目的在于其执行或移动在显示器2上表示它的符号(在这种情况下，所讨论的命令包括符号在显示器上的移动)。
选择命令包括至少一个选择条件的校验，或换言之，当一个或更多个选择条件(或选择条件的时间顺序)满足时命令的选择生效。可以采用各种选择条件，包括在单个HMI内。
可以实施不同的选择条件，以使不同命令的执行任选地附于显示器2上相同的符号或由显示器2上相同的符号表示。例如这些命令可以涉及执行由图标表示的应用和移动该图标。
以下选择条件不同于本发明框架内可应用的选择条件：
-命令对象3的距离4小于预定选择距离，
-命令对象3与命令界面1的表面接触。
可以使用这些基于最小距离4或小于阈值的距离检测的选择条件，而不产生关于命令选择任务的模糊性，这是因为命令没有更低的分级或拓扑层次(至少在其中选择了该命令的应用中是如此)。为了进一步限制模糊性的风险，可以布置显示相应的符号以使其不覆盖对应于(至少)相同分级结构命令组的符号，并使用位置测量5以确定所选择的命令。
这些选择条件可以通过增加持续时间条件(预定最小持续时间)来实施以限制错误命令的风险。
选择条件还可以基于轨迹来实施，使得：
-命令对象3在距离4进行快速往复移动，即例如在小于预定持续时间的持续时间内在小于预定距离的距离范围(或差)4的往复移动。
这种类型的条件对应于不接触进行的虚拟“点击”。如前所述，位置测量5用于确定所选择的的命令。
最后，选择条件可以基于几个命令对象的轨迹来实施，使得：
-至少两个命令对象进行移动，其位置根据抓或捏的移动朝对应于命令符号的位置5会聚。
选择条件也可以用作取消选择或生效条件，特别地用于当命令涉及显示器2上符号的操作或移动时“释放”对象。
可以提供特定的生效或取消选择条件，例如几个命令对象3的发散打开移动。因此，通过使用两根手指作为命令对象3在显示器2上移动符号可以通过捏(选择)顺序、移动(所选择的符号跟随手指)并打开手指(取消选择)来实现。
为了帮助用户浏览，命令对象3的位置5和距离4可以通过以位置5为中心并且具有取决于距离4的直径的圆形图案或任何其他图案显示在显示屏2上。
将描述根据本发明用于浏览树型命令结构文件夹的方法的实施。
该树结构包括在显示屏2上由符号或图标10所表示的命令组或文件夹和由符号或图标11所表示的命令。
参照图2，为了简化解释，会限定四个区域P1、P2、P3、P4：对应于界面1的检测表面和置于下面的显示屏2上的四个位置5。另外，命令对象3对应于用户的手指。
参照图3，例如限定了四个命令结构，当命令对象3在H1和H2之间的距离4时，其第一分级层次，即分别是命令集D11、D12、D13和D14，是可访问的。
还限定了包含在D12内的命令集D21、D22、D23和命令C24，属于第二分级层次，当命令对象3在H2和H3之间的距离4时可访问。
箭头12示出了对应于以下实例手指3在距离4(H1、H2、H3)和位置5(P1、...P4)上的空间轨迹。
参照图4，会示出在显示器2上选择命令C24的方法。
首先，如图4(a)所示，手指3在大于H1的距离4处，在显示屏2上没有命令集被选择。
然后用户降低其手指3到包含在H1和H2之间的距离4。当其手指悬停在位置P2上方时，使命令集D12突出。为此例如使相应的符号或图标加亮，或通过颜色或大小的改变与其它的进行图形区分；或不同地重新显示，并转移以成为越过手指3可见的。该情况示于图4(b)中。
用户通过在H2和H3之间的距离4处的位置P2上方降低其手指3来访问D12的内容。相应的命令集D21、D22、D23和命令24根据图4(c)显示。
然后，如图4(d)所示，用户可以移动其手指3到P4以使命令C24加亮，通过实施动作，例如降低其手指到小于H3的距离4，或敲击界面1的检测表面，或甚至进行虚拟的点击(手指3相对界面1的表面快速往复)来选择命令C24以使其执行。
新的分级层次的显示可以替换之前层次的显示，以保持例如在小的屏幕2上良好的易读性。还可以在所选较高分级层次命令组的符号附近显示较低分级层次的内容。
根据一个实施方案，表示命令组的符号(或其图标)可以包括其包含的元素或命令的符号表示(因此它们的图标表示尺寸减小)，并且显示内容的图标可以实施为使得当用户访问该内容的分级层次时对内容有放大的印象。
现在将描述根据本发明用于浏览层叠型命令或层叠的命令结构的方法的实施。
参照图5和6，命令可以以层叠21的形式集成到显示屏2上，所述层叠21将命令11和/或命令集10集合在一起。为了清楚起见，图5示出了在显示器2上仅有最初可见的命令11的唯一一个层叠21的实例。
首先，如图5(a)所示，手指3在大于距离H1的距离4处，没有选择命令或命令集。
然后，如图6(a)和6(b)所示，用户降低其手指3至距离H1和H2之间的距离4。当其手指经过接近位置P1时，使层叠21突出(例如加亮或以之前描述的其他方法追踪)。该情况示于图5(b)中。
然后两种变化方案是可能的。
根据图5(c)和图6(a)中所示的第一变化方案，通过在位置P1上方降低其手指3至H2和H3之间的距离4，用户显示层叠的第一命令C1，其符号基本上叠加在该层叠21上。
然后，通过在位置P1上方降低其手指3至H3和H4之间的距离4，用户显示层叠的第二命令C2，以此类推。
图6(a)中的箭头22示出了对应于该变化方案手指3在距离4(H1、...H4)上方和到位置5(P1、P2)的空间轨迹。
该变化方案非常适合于例如显示图像，在这种情况下符号是图像，命令简单地表示其显示。
根据图5(d)、5(e)和图6(b)中所示的第二变化方案，通过在位置P1上方降低其手指3至H2和H3之间的距离4，用户显示层叠的第一命令C1，其符号在不同于P1的位置例如P2处显示。因此获得图5(d)所示的显示。
如果用户继续在位置P1上方降低其手指3至H3和H4之间的距离4，则用户在P2处显示层叠的第二命令C2，以此类推。
在该变化方案中，用户可以加亮所显示的命令以便通过移动其手指3至位置P2来选择它。这种情况通过C2的选择示于图5(e)中。
图6(b)中的箭头23示出了对应于该变化方案手指3在距离4(H1、...H4)上方和到位置5(P1、P2)的空间轨迹。
如前所述，层叠21可以包括命令11和/或命令集10。一旦加亮了命令11和/或命令集10，就能够以与之前参照图3和4所描述的相同的方式选择它或浏览其树结构。
距离阈值4可以管理如下，应理解管理这些阈值的几种方法可以根据所讨论的命令结构和/或用户可以通过设置菜单进行的选择来实施：
-能得能够选择特定命令结构的距离H1的第一阈值定义为对应于预定距离4，
-当选择命令结构或层叠21时，连续的阈值H1、H2、H3等之间的距离间隔通过考虑结构的分级层次的数量或考虑层叠21的元素10、11的数量进行计算，以使它们都能够通过改变手指3的高度4直到与界面1的检测表面接触而被浏览。
-通过手指3与界面1的检测表面的接触来进行命令的选择。
参照图7，现在将描述根据本发明方法用于执行移动命令符号11或命令组符号10、21的命令的实施。
特定的命令符号11可以表示几种命令可能性(例如应用的执行)，或仅表示移动命令(例如当符号表示在显示屏2上所显示的一组的一部分时)。
在多个可能的命令的情况下，为它们中每一个限定不同的选择条件以避免任何模糊性。
首先，用户移动两根(或更多根)手指3接近界面2的表面，直到到达传感器6变得能够“区分”所述手指的距离。当检测到手指3时，如果它们的位置5基本上对应显示器2上的符号11的位置，那么使符号11突出(例如加亮)。根据设备，手指3可能必须接触界面2的表面。
或者，用户也可以如前解释地浏览结构或命令层叠以达到其中使符号11突出的步骤。
然后，用户如图7(a)所示通过进行捏移动30或移动手指3靠近到一起来选择用于移动命令符号11的命令。从测量的角度来看，该移动对应于使位置5靠近到一起，这是选定的选择条件。
符号11可以通过移动手指3随着其位置而移动
如图7(b)所示，在到达位置处命令的生效和从而符号11的位置通过移动手指进一步分开来进行。从测量的角度来看，该移动进一步分开31对应于使所选择的生效条件位置5远离。
如图7(c)所示，还可以通过进行手指3的旋转移动32而转动符号11。
如果在移动过程中手指3的距离4增加超过一定限值，则根据应用可以提供符号11停顿、改变其外观、消失或返回其起始位置。距离4增加超过一定限值还可以用作移动命令的取消选择条件而不使它生效，符号11返回其起始位置。
这种用于控制移动命令的方法可以例如使得桌面游戏，例如象棋、国际跳棋等的游戏模式能够实施。
根据变化的实施方案：
电容式传感器及其相关的电子检测单元可以以无论任何方式制作。特别地，它们可以包括交叉电极(例如以行和列布置)，并允许直接电容测量(即电极6和对象3之间电容的测量)，和/或耦合电容测量(即发射电极和接收电极之间电容的测量，受对象3的存在干扰)。这样的实施方案例如非常适合于覆盖计算机显示屏2的大尺寸界面1；
-根据本发明的方法适合于所有命令结构或命令组中命令的选择，对于其能够通过使用距离数据4浏览分级或拓扑层次，并通过一个或更多个符号或图标在显示器2上显示这些层次。
-浏览命令结构的分级或拓扑层次可以取决于距离4和/或位置5以及与这些值相关的所有数据例如速度和加速度。例如，为了通过仅显示n个元素中的一个元素更快地浏览层叠或其他命令结构，可以考虑命令对象3在距离4的移动速度。
-阈值距离4(H1等)之间的间隔可以以无论任何方式进行确定。特别地，它们可以是固定的、预先确定的、根据所显示的命令结构的层次数量调整的，以使在相同的总距离间隔4仍可以完整地浏览结构、在有限范围内可变等。
-为了节约能源，尤其是对于移动电器，可以提供在一定的不活动时间后关闭屏幕2的时间延迟。然后，例如当命令对象3出现在小于触发距离的距离4时，或简单地当传感器6检测到对象时，屏幕2重新触发。
当然，本发明不限于刚刚描述的实例，可以对这些实例进行大量调整而不超出本发明的范围。

Claims (27)

1.一种方法，包括：
在具有触摸屏的电子设备处：
当在触摸屏上显示符号时，经由触摸屏检测第一悬停输入，包括检测触摸屏上方的对象而不检测与触摸屏接触的对象；
响应于在触摸屏的与所述符号对应的相应位置处检测到满足一个或多个第一标准的第一悬停输入，选择所述符号；
当所述符号被选择时，经由触摸屏检测第二悬停输入，包括检测触摸屏上方的所述对象的移动而不检测与触摸屏接触的对象；以及
响应于检测到满足一个或多个第二标准的第二悬停输入，移动在触摸屏上显示的所述符号。
2.根据权利要求1所述的方法，其中所述一个或多个第一标准包括要求在触摸屏的阈值距离内检测到悬停输入的标准、要求在触摸屏的阈值距离内检测到悬停输入达阈值持续时间的标准、或者要求悬停输入包括在触摸屏上方的迅速往复移动的标准。
3.根据权利要求1所述的方法，其中所述一个或多个第一标准包括要求在触摸屏上方所述对象中的两个或更多个对象相对移动的标准。
4.根据权利要求3所述的方法，其中所述相对移动包括所述两个或更多个对象的会聚移动。
5.根据权利要求3所述的方法，其中所述相对移动包括夹紧移动或者捏合移动。
6.根据权利要求1所述的方法，其中移动在触摸屏上显示的所述符号包括所述符号的平移移动，其中在触摸屏上显示的所述符号的位置对应于在触摸屏上方悬停的所述对象的位置。
7.根据权利要求1所述的方法，其中移动在触摸屏上显示的所述符号包括所述符号的旋转移动，其中在触摸屏上显示的所述符号的旋转量对应于在触摸屏上方悬停的所述对象的旋转量。
8.根据权利要求1所述的方法，其中所述一个或多个第二标准包括要求在检测到触摸屏上方的所述对象移动的同时所述对象保持在阈值距离内的标准。
9.根据权利要求1所述的方法，还包括：
当移动在触摸屏上显示的所述符号的同时，检测到第二悬停输入不满足所述一个或多个第二标准；以及
响应于检测到第二悬停输入不满足一个或多个第二标准，停止移动所述符号，改变所述符号的外观，从显示中移除所述符号，或者使所述符号返回到它在第二悬停输入前的位置。
10.根据权利要求1所述的方法，还包括：
当所述符号被选择时，经由触摸屏检测第三悬停输入，包括检测触摸屏上方的对象而不检测与触摸屏接触的对象；以及
响应于检测到满足一个或多个第三标准的第三悬停输入，对触摸屏上显示的所述符号解除选择。
11.根据权利要求10所述的方法，其中所述一个或多个第三标准包括要求在触摸屏上方所述对象中的两个或更多个对象的相对移动的标准。
12.根据权利要求11所述的方法，其中所述相对移动包括所述两个或更多个对象的分散移动。
13.根据权利要求11所述的方法，其中所述对象中的所述两个或更多个对象的所述相对移动包括逆夹紧移动或者逆捏合移动。
14.一种电子设备，包括：
触摸屏；和
一个或多个处理器，被配置为：
当在触摸屏上显示符号时，经由触摸屏检测第一悬停输入，包括检测触摸屏上方的对象而不检测与触摸屏接触的对象；
响应于在触摸屏的与所述符号对应的相应位置处检测到满足一个或多个第一标准的第一悬停输入，选择所述符号；
当所述符号被选择时，经由触摸屏检测第二悬停输入，包括检测触摸屏上方的所述对象的移动而不检测与触摸屏接触的对象；以及
响应于检测到满足一个或多个第二标准的第二悬停输入，移动在触摸屏上显示的所述符号。
15.根据权利要求14所述的电子设备，其中所述一个或多个第一标准包括要求在触摸屏的阈值距离内检测到悬停输入的标准、要求在触摸屏的阈值距离内检测到悬停输入达阈值持续时间的标准、或者要求悬停输入包括在触摸屏上方的迅速往复移动的标准。
16.根据权利要求14所述的电子设备，其中所述一个或多个第一标准包括要求在触摸屏上方所述对象中的两个或更多个对象相对移动的标准。
17.根据权利要求16所述的电子设备，其中所述相对移动包括所述两个或更多个对象的会聚移动。
18.根据权利要求16所述的电子设备，其中所述相对移动包括夹紧移动或者捏合移动。
19.根据权利要求14所述的电子设备，其中移动在触摸屏上显示的所述符号包括所述符号的平移移动，其中在触摸屏上显示的所述符号的位置对应于在触摸屏上方悬停的所述对象的位置。
20.根据权利要求14所述的电子设备，其中移动在触摸屏上显示的所述符号包括所述符号的旋转移动，其中在触摸屏上显示的所述符号的旋转量对应于在触摸屏上方悬停的所述对象的旋转量。
21.根据权利要求14所述的电子设备，其中所述一个或多个第二标准包括要求在检测到触摸屏上方的所述对象移动的同时所述对象保持在阈值距离内的标准。
22.根据权利要求14所述的电子设备，所述一个或多个处理器还被配置为：
当移动在触摸屏上显示的所述符号的同时，检测到第二悬停输入不满足所述一个或多个第二标准；以及
响应于检测到第二悬停输入不满足一个或多个第二标准，停止移动所述符号，改变所述符号的外观，从显示中移除所述符号，或者使所述符号返回到它在第二悬停输入前的位置。
23.根据权利要求14所述的电子设备，所述一个或多个处理器还被配置为：
当所述符号被选择时，经由触摸屏检测第三悬停输入，包括检测触摸屏上方的对象而不检测与触摸屏接触的对象；以及
响应于检测到满足一个或多个第三标准的第三悬停输入，对触摸屏上显示的所述符号解除选择。
24.根据权利要求22所述的电子设备，其中所述一个或多个第三标准包括要求在触摸屏上方所述对象中的两个或更多个对象的相对移动的标准。
25.根据权利要求24所述的电子设备，其中所述相对移动包括所述两个或更多个对象的分散移动。
26.根据权利要求24所述的电子设备，其中所述对象中的所述两个或更多个对象的所述相对移动包括逆夹紧移动或者逆捏合移动。
27.一种用于在命令界面(1)上选择命令的方法，所述命令界面(1)包括显示器(2)和被配置为检测至少一个命令对象(3)的至少一个传感器(6)，所述方法包括：
-显示多个命令集，其中所述多个命令集中的一个或多个命令集包括命令的多个分级层次，以及
-通过所述至少一个传感器(6)获取所述至少一个命令对象相对于所述命令界面(1)的垂直距离数据(4)和水平位置数据，
其特征在于所述方法还包括使用所述距离数据(4)和位置数据来浏览所述多个命令集中的命令，所述浏览包括从显示的多个命令集之中选择一个命令集，在选择命令集之后，基于所述垂直距离数据同时显示选择的命令集中的多个命令，所述垂直距离数据指示命令对象在所述命令界面上悬停的距离。
CN201810965827.4A 2011-01-31 2012-01-30 三维人机界面 Active CN109240587B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR1150726 2011-01-31
FR1150726A FR2971066B1 (fr) 2011-01-31 2011-01-31 Interface homme-machine tridimensionnelle.
CN201280007164.6A CN103460175B (zh) 2011-01-31 2012-01-30 三维人机界面

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201280007164.6A Division CN103460175B (zh) 2011-01-31 2012-01-30 三维人机界面

Publications (2)

Publication Number Publication Date
CN109240587A true CN109240587A (zh) 2019-01-18
CN109240587B CN109240587B (zh) 2022-01-25

Family

ID=44501813

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201280007164.6A Active CN103460175B (zh) 2011-01-31 2012-01-30 三维人机界面
CN201810965827.4A Active CN109240587B (zh) 2011-01-31 2012-01-30 三维人机界面

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201280007164.6A Active CN103460175B (zh) 2011-01-31 2012-01-30 三维人机界面

Country Status (5)

Country Link
US (2) US10303266B2 (zh)
EP (1) EP2671146A1 (zh)
CN (2) CN103460175B (zh)
FR (1) FR2971066B1 (zh)
WO (1) WO2012104529A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114830074A (zh) * 2019-12-13 2022-07-29 阿尔卑斯阿尔派株式会社 输入装置

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US7920129B2 (en) 2007-01-03 2011-04-05 Apple Inc. Double-sided touch-sensitive panel with shield and drive combined layer
FR2949007B1 (fr) 2009-08-07 2012-06-08 Nanotec Solution Dispositif et procede d'interface de commande sensible a un mouvement d'un corps ou d'un objet et equipement de commande integrant ce dispositif.
FR2971066B1 (fr) 2011-01-31 2013-08-23 Nanotec Solution Interface homme-machine tridimensionnelle.
FR2976688B1 (fr) 2011-06-16 2021-04-23 Nanotec Solution Dispositif et procede pour generer une alimentation electrique dans un systeme electronique avec un potentiel de reference variable.
US9259904B2 (en) 2011-10-20 2016-02-16 Apple Inc. Opaque thin film passivation
FR2985048B1 (fr) 2011-12-21 2014-08-15 Nanotec Solution Dispositif et procede de mesure capacitive sensible a la pression pour interfaces tactiles et sans contact
FR2985049B1 (fr) 2011-12-22 2014-01-31 Nanotec Solution Dispositif de mesure capacitive a electrodes commutees pour interfaces tactiles et sans contact
FR2988176B1 (fr) 2012-03-13 2014-11-21 Nanotec Solution Procede de mesure capacitive entre un objet et un plan d’electrodes par demodulation synchrone partielle
FR2988175B1 (fr) 2012-03-13 2014-04-11 Nanotec Solution Procede de mesure capacitive par des electrodes non-regulieres, et appareil mettant en œuvre un tel procede
FR3002052B1 (fr) 2013-02-14 2016-12-09 Fogale Nanotech Procede et dispositif pour naviguer dans un ecran d'affichage et appareil comprenant une telle navigation
CN104077013B (zh) * 2013-03-28 2019-02-05 联想(北京)有限公司 指令识别方法和电子设备
FR3003964B1 (fr) 2013-04-02 2016-08-26 Fogale Nanotech Dispositif pour interagir, sans contact, avec un appareil electronique et/ou informatique, et appareil equipe d'un tel dispositif
FR3004551A1 (fr) 2013-04-15 2014-10-17 Fogale Nanotech Procede de detection capacitif multizone, dispositif et appareil mettant en oeuvre le procede
FR3005763B1 (fr) 2013-05-17 2016-10-14 Fogale Nanotech Dispositif et procede d'interface de commande capacitive adapte a la mise en œuvre d'electrodes de mesures fortement resistives
FR3008809B1 (fr) 2013-07-18 2017-07-07 Fogale Nanotech Dispositif accessoire garde pour un appareil electronique et/ou informatique, et appareil equipe d'un tel dispositif accessoire
FR3013472B1 (fr) 2013-11-19 2016-07-08 Fogale Nanotech Dispositif accessoire couvrant pour un appareil portable electronique et/ou informatique, et appareil equipe d'un tel dispositif accessoire
FR3017470B1 (fr) 2014-02-12 2017-06-23 Fogale Nanotech Procede de saisie sur un clavier numerique, interface homme machine et appareil mettant en œuvre un tel procede
FR3017723B1 (fr) 2014-02-19 2017-07-21 Fogale Nanotech Procede d'interaction homme-machine par combinaison de commandes tactiles et sans contact
KR101628246B1 (ko) * 2014-02-24 2016-06-08 삼성전자주식회사 컨텐츠 표시 방법 및 장치
FR3019320B1 (fr) 2014-03-28 2017-12-15 Fogale Nanotech Dispositif electronique de type montre-bracelet avec interface de commande sans contact et procede de controle d'un tel dispositif
US10719132B2 (en) * 2014-06-19 2020-07-21 Samsung Electronics Co., Ltd. Device and method of controlling device
FR3025623B1 (fr) 2014-09-05 2017-12-15 Fogale Nanotech Dispositif d'interface de commande et capteur d'empreintes digitales
FR3028061B1 (fr) 2014-10-29 2016-12-30 Fogale Nanotech Dispositif capteur capacitif comprenant des electrodes ajourees
FR3032287B1 (fr) 2015-02-04 2018-03-09 Quickstep Technologies Llc Dispositif de detection capacitif multicouches, et appareil comprenant le dispositif
FR3033203B1 (fr) 2015-02-27 2018-03-23 Quickstep Technologies Llc Procede pour interagir avec un appareil electronique et/ou informatique mettant en œuvre une surface de commande capacitive et une surface peripherique, interface et appareil mettant en œuvre ce procede
US9996222B2 (en) * 2015-09-18 2018-06-12 Samsung Electronics Co., Ltd. Automatic deep view card stacking
US20180004385A1 (en) 2016-06-30 2018-01-04 Futurewei Technologies, Inc. Software defined icon interactions with multiple and expandable layers
WO2018057969A1 (en) 2016-09-23 2018-03-29 Apple Inc. Touch sensor panel with top and/or bottom shielding
US10372282B2 (en) 2016-12-01 2019-08-06 Apple Inc. Capacitive coupling reduction in touch sensor panels
US10798397B2 (en) * 2019-01-02 2020-10-06 Tencent America LLC Method and apparatus for video coding
EP3846003A1 (en) 2019-12-30 2021-07-07 Dassault Systèmes Selection of a face with an immersive gesture in 3d modeling
EP3846004A1 (en) 2019-12-30 2021-07-07 Dassault Systèmes Selection of an edge with an immersive gesture in 3d modeling
EP3846064A1 (en) * 2019-12-30 2021-07-07 Dassault Systèmes Selection of a vertex with an immersive gesture in 3d modeling
CN113238788B (zh) * 2021-05-14 2024-03-29 山东云海国创云计算装备产业创新中心有限公司 一种bios升级方法及相关装置
US11789561B2 (en) 2021-09-24 2023-10-17 Apple Inc. Architecture for differential drive and sense touch technology

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08263699A (ja) * 1995-03-22 1996-10-11 Atr Tsushin Syst Kenkyusho:Kk 把持目標物体推測装置およびそれを具備する人工現実感装置
US20070294639A1 (en) * 2004-11-16 2007-12-20 Koninklijke Philips Electronics, N.V. Touchless Manipulation of Images for Regional Enhancement
CN201266371Y (zh) * 2007-01-05 2009-07-01 苹果公司 手持移动通信装置
CN101526881A (zh) * 2008-03-04 2009-09-09 苹果公司 使用手势选择文本
CN101547253A (zh) * 2008-03-25 2009-09-30 Lg电子株式会社 移动终端及显示其中信息的方法
US20100060599A1 (en) * 2008-09-09 2010-03-11 Samsung Electronics Co., Ltd. Method and device to search for and execute content using a touch screen
CN101681218A (zh) * 2007-06-12 2010-03-24 微软公司 视觉反馈显示
CN101727236A (zh) * 2008-10-10 2010-06-09 索尼株式会社 信息处理部件、信息处理方法、信息处理系统及程序
US20100289740A1 (en) * 2009-05-18 2010-11-18 Bong Soo Kim Touchless control of an electronic device
CN101952792A (zh) * 2007-11-19 2011-01-19 瑟克公司 与显示器结合且具有接近及触摸感应能力的触摸板
CN102037436A (zh) * 2008-05-19 2011-04-27 微软公司 利用拖拽操作来访问菜单

Family Cites Families (211)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4549279A (en) 1983-01-21 1985-10-22 The Laitram Corporation Single hand, single finger stroke alphameric data processing keyboard system
JPS63167923A (ja) 1987-01-05 1988-07-12 Pfu Ltd イメ−ジデ−タ入力装置
GB2204131B (en) 1987-04-28 1991-04-17 Ibm Graphics input tablet
CA2011517C (en) 1989-05-15 1998-04-21 Gordon W. Arbeitman Flat touch screen workpad for a data processing system
JP3301079B2 (ja) 1990-06-18 2002-07-15 ソニー株式会社 情報入力装置、情報入力方法、情報処理装置及び情報処理方法
GB2245708A (en) 1990-06-29 1992-01-08 Philips Electronic Associated Touch sensor array systems
US5103085A (en) 1990-09-05 1992-04-07 Zimmerman Thomas G Photoelectric proximity detector and switch
US5347295A (en) 1990-10-31 1994-09-13 Go Corporation Control of a computer through a position-sensed stylus
US5483261A (en) 1992-02-14 1996-01-09 Itu Research, Inc. Graphical input controller and method with rear screen image detection
US5880411A (en) 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
US5488204A (en) 1992-06-08 1996-01-30 Synaptics, Incorporated Paintbrush stylus for capacitive touch sensor pad
US5270818A (en) 1992-09-17 1993-12-14 Alliedsignal Inc. Arrangement for automatically controlling brightness of cockpit displays
JP3469912B2 (ja) 1992-11-18 2003-11-25 株式会社デジタル 複数の同時入力が可能なタッチパネル入力装置及び入力方法
US5363051A (en) 1992-11-23 1994-11-08 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Steering capaciflector sensor
US5345550A (en) * 1992-12-23 1994-09-06 International Business Machines Corporation User-modifiable popup menus for object oriented behavior
JP2752309B2 (ja) 1993-01-19 1998-05-18 松下電器産業株式会社 表示装置
US5572573A (en) 1994-01-25 1996-11-05 U S West Advanced Technologies, Inc. Removable user interface for use with interactive electronic devices
US6947571B1 (en) 1999-05-19 2005-09-20 Digimarc Corporation Cell phones with optical capabilities, and related applications
GB9406702D0 (en) 1994-04-05 1994-05-25 Binstead Ronald P Multiple input proximity detector and touchpad system
US9513744B2 (en) 1994-08-15 2016-12-06 Apple Inc. Control systems employing novel physical controls and touch screens
US5760760A (en) 1995-07-17 1998-06-02 Dell Usa, L.P. Intelligent LCD brightness control system
WO1997018547A1 (en) 1995-11-16 1997-05-22 Ure Michael J Multi-touch input device, method and system that minimize the need for memorization
US5730165A (en) 1995-12-26 1998-03-24 Philipp; Harald Time domain capacitive field detector
US5825352A (en) 1996-01-04 1998-10-20 Logitech, Inc. Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad
US5835079A (en) 1996-06-13 1998-11-10 International Business Machines Corporation Virtual pointing device for touchscreens
US6308144B1 (en) 1996-09-26 2001-10-23 Computervision Corporation Method and apparatus for providing three-dimensional model associativity
GB9620464D0 (en) 1996-10-01 1996-11-20 Philips Electronics Nv Hand held image display device
US5684294A (en) 1996-10-17 1997-11-04 Northern Telecom Ltd Proximity and ambient light monitor
FR2756048B1 (fr) 1996-11-15 1999-02-12 Nanotec Ingenierie Pont de mesure capacitif flottant et systeme de mesure multi-capacitif associe
US6253218B1 (en) * 1996-12-26 2001-06-26 Atsushi Aoki Three dimensional data display method utilizing view point tracing and reduced document images
US6105419A (en) 1997-03-25 2000-08-22 Recot, Inc. Apparatus and process for inspecting sealed packages
US6073036A (en) 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
US6034803A (en) 1997-04-30 2000-03-07 K2 T, Inc. Method and apparatus for directing energy based range detection sensor
US6920619B1 (en) 1997-08-28 2005-07-19 Slavoljub Milekic User interface for removing an object from a display
GB2330670B (en) 1997-10-24 2002-09-11 Sony Uk Ltd Data processing
GB9722766D0 (en) 1997-10-28 1997-12-24 British Telecomm Portable computers
US6037937A (en) 1997-12-04 2000-03-14 Nortel Networks Corporation Navigation tool for graphical user interface
US6310610B1 (en) 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US6323846B1 (en) 1998-01-26 2001-11-27 University Of Delaware Method and apparatus for integrating manual input
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US6380853B1 (en) 1998-02-23 2002-04-30 Marconi Commerce Systems Inc. Customer-sensitive dispenser using proximity sensing devices
US6313853B1 (en) 1998-04-16 2001-11-06 Nortel Networks Limited Multi-service user interface
US5956291A (en) 1998-04-17 1999-09-21 Ductech, Llc Underwater diving assistant apparatus
JP3646848B2 (ja) 1998-04-28 2005-05-11 日本精機株式会社 表示装置
JP3792920B2 (ja) 1998-12-25 2006-07-05 株式会社東海理化電機製作所 タッチ操作入力装置
US6188391B1 (en) 1998-07-09 2001-02-13 Synaptics, Inc. Two-layer capacitive touchpad and method of making same
US7256770B2 (en) 1998-09-14 2007-08-14 Microsoft Corporation Method for displaying information responsive to sensing a physical presence proximate to a computer input device
JP4542637B2 (ja) 1998-11-25 2010-09-15 セイコーエプソン株式会社 携帯情報機器及び情報記憶媒体
US6259436B1 (en) 1998-12-22 2001-07-10 Ericsson Inc. Apparatus and method for determining selection of touchable items on a computer touchscreen by an imprecise touch
US7293231B1 (en) 1999-03-18 2007-11-06 British Columbia Ltd. Data entry for personal computing devices
US7151528B2 (en) 1999-06-22 2006-12-19 Cirque Corporation System for disposing a proximity sensitive touchpad behind a mobile phone keypad
US20010031633A1 (en) 1999-12-01 2001-10-18 Nokia Mobile Phones Ltd. Method and apparatus for providing context-based call transfer operation
US6414674B1 (en) 1999-12-17 2002-07-02 International Business Machines Corporation Data processing system and method including an I/O touch pad having dynamically alterable location indicators
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US7171221B1 (en) 1999-12-20 2007-01-30 Cingular Wirelesss Ii, Llc System and method for automatically transferring a call from a first telephone to a designated telephone in close proximity
US6661920B1 (en) 2000-01-19 2003-12-09 Palm Inc. Method and apparatus for multiple simultaneously active data entry mechanisms on a computer system
US6822635B2 (en) 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
US7138983B2 (en) * 2000-01-31 2006-11-21 Canon Kabushiki Kaisha Method and apparatus for detecting and interpreting path of designated position
US20020140633A1 (en) 2000-02-03 2002-10-03 Canesta, Inc. Method and system to present immersion virtual simulations using three-dimensional measurement
US6601012B1 (en) 2000-03-16 2003-07-29 Microsoft Corporation Contextual models and methods for inferring attention and location
US7417650B1 (en) 2000-03-16 2008-08-26 Microsoft Corporation Display and human-computer interaction for a notification platform
US7444383B2 (en) 2000-06-17 2008-10-28 Microsoft Corporation Bounded-deferral policies for guiding the timing of alerting, interaction and communications using local sensory information
US6847354B2 (en) 2000-03-23 2005-01-25 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Three dimensional interactive display
US20010035858A1 (en) 2000-04-13 2001-11-01 Blumberg J. Seth Keyboard input device
US7302280B2 (en) 2000-07-17 2007-11-27 Microsoft Corporation Mobile phone operation based upon context sensing
DE10042300A1 (de) 2000-08-29 2002-03-28 Axel C Burgbacher Elektronisches Musikinstrument
CN1340976A (zh) 2000-08-31 2002-03-20 微软公司 在移动通信设备上用于检测用户接通度的方法和装置
US6480188B1 (en) 2000-09-06 2002-11-12 Digital On-Demand Thumbwheel selection system
US6520013B1 (en) 2000-10-02 2003-02-18 Apple Computer, Inc. Method and apparatus for detecting free fall
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US6680677B1 (en) 2000-10-06 2004-01-20 Logitech Europe S.A. Proximity detector to indicate function of a key
US7319454B2 (en) 2000-11-10 2008-01-15 Microsoft Corporation Two-button mouse input using a stylus
US6903730B2 (en) 2000-11-10 2005-06-07 Microsoft Corporation In-air gestures for electromagnetic coordinate digitizers
DE10059906A1 (de) 2000-12-01 2002-06-06 Bs Biometric Systems Gmbh Druckempfindliche Fläche eines Bildschirms oder Displays
JP3800984B2 (ja) 2001-05-21 2006-07-26 ソニー株式会社 ユーザ入力装置
US6904570B2 (en) 2001-06-07 2005-06-07 Synaptics, Inc. Method and apparatus for controlling a display of data on a display screen
US6583676B2 (en) 2001-06-20 2003-06-24 Apple Computer, Inc. Proximity/touch detector and calibration circuit
US20030001899A1 (en) 2001-06-29 2003-01-02 Nokia Corporation Semi-transparent handwriting recognition UI
US20050134578A1 (en) 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
US6961912B2 (en) 2001-07-18 2005-11-01 Xerox Corporation Feedback mechanism for use with visual selection methods
JP2003173237A (ja) 2001-09-28 2003-06-20 Ricoh Co Ltd 情報入出力システム、プログラム及び記憶媒体
US8117565B2 (en) 2001-10-18 2012-02-14 Viaclix, Inc. Digital image magnification for internet appliance
US7345671B2 (en) 2001-10-22 2008-03-18 Apple Inc. Method and apparatus for use of rotational user inputs
US6938221B2 (en) 2001-11-30 2005-08-30 Microsoft Corporation User interface for stylus-based user input
DE10251296A1 (de) 2002-11-03 2004-05-19 Trachte, Ralf, Dr. flexibles Engabesystem / Mehrfinger-System
US6690387B2 (en) 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
US20030132922A1 (en) 2002-01-17 2003-07-17 Harald Philipp Touch screen detection apparatus
US6720942B2 (en) 2002-02-12 2004-04-13 Eastman Kodak Company Flat-panel light emitting pixel with luminance feedback
US7120872B2 (en) 2002-03-25 2006-10-10 Microsoft Corporation Organizing, editing, and rendering digital ink
US6664744B2 (en) 2002-04-03 2003-12-16 Mitsubishi Electric Research Laboratories, Inc. Automatic backlight for handheld devices
US7016705B2 (en) 2002-04-17 2006-03-21 Microsoft Corporation Reducing power consumption in a networked battery-operated device using sensors
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US7058902B2 (en) 2002-07-30 2006-06-06 Microsoft Corporation Enhanced on-object context menus
FR2844048B1 (fr) 2002-08-30 2005-09-30 Nanotec Solution Systeme et procede de mesure sans contact d'un deplacement ou positionnement relatif de deux objets adjacents par voie capacitive, et application au controle de miroirs
FR2844349B1 (fr) 2002-09-06 2005-06-24 Nanotec Solution Detecteur de proximite par capteur capacitif
US6812466B2 (en) 2002-09-25 2004-11-02 Prospects, Corp. Infrared obstacle detection in the presence of sunlight
US6954197B2 (en) 2002-11-15 2005-10-11 Smart Technologies Inc. Size/scale and orientation determination of a pointer in a camera-based touch system
WO2004051392A2 (en) 2002-11-29 2004-06-17 Koninklijke Philips Electronics N.V. User interface with displaced representation of touch area
US7194699B2 (en) 2003-01-14 2007-03-20 Microsoft Corporation Animating images to reflect user selection
US20040145601A1 (en) 2003-01-29 2004-07-29 International Business Machines Corporation Method and a device for providing additional functionality to a separate application
US20040150669A1 (en) 2003-01-31 2004-08-05 Sabiers Mark L. Graphical user interface for describing the state of a managed system
US7158123B2 (en) 2003-01-31 2007-01-02 Xerox Corporation Secondary touch contextual sub-menu navigation for touch screen interface
DE602004006190T8 (de) 2003-03-31 2008-04-10 Honda Motor Co., Ltd. Vorrichtung, Verfahren und Programm zur Gestenerkennung
US7786983B2 (en) 2003-04-08 2010-08-31 Poa Sana Liquidating Trust Apparatus and method for a data input device using a light lamina screen
US7627343B2 (en) 2003-04-25 2009-12-01 Apple Inc. Media player system
US20040233153A1 (en) 2003-05-22 2004-11-25 Heber Robinson Communication device with automatic display and lighting activation and method therefore
US7362320B2 (en) 2003-06-05 2008-04-22 Hewlett-Packard Development Company, L.P. Electronic device having a light emitting/detecting display screen
US20050015731A1 (en) 2003-07-15 2005-01-20 Microsoft Corporation Handling data across different portions or regions of a desktop
GB2404819A (en) 2003-08-05 2005-02-09 Research In Motion Ltd Mobile communications device with integral optical navigation
DE10337743A1 (de) 2003-08-13 2005-03-10 Ego Elektro Geraetebau Gmbh Verfahren sowie Schaltungsanordnung zur Ermittlung des Betätigungszustandes mindestens eines optischen Sensorelements
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
US7468722B2 (en) 2004-02-09 2008-12-23 Microsemi Corporation Method and apparatus to control display brightness with ambient light correction
EP2254026A1 (en) 2004-02-27 2010-11-24 Research In Motion Limited Text input system for a mobile electronic device and methods thereof
US7715790B1 (en) 2004-03-19 2010-05-11 Apple Inc. Methods and apparatuses for configuration automation
US20050219228A1 (en) 2004-03-31 2005-10-06 Motorola, Inc. Intuitive user interface and method
US20050219223A1 (en) 2004-03-31 2005-10-06 Kotzin Michael D Method and apparatus for determining the context of a device
US20050221791A1 (en) 2004-04-05 2005-10-06 Sony Ericsson Mobile Communications Ab Sensor screen saver
US20050219394A1 (en) 2004-04-06 2005-10-06 Sterling Du Digital camera capable of brightness and contrast control
US7019622B2 (en) 2004-05-27 2006-03-28 Research In Motion Limited Handheld electronic device including vibrator having different vibration intensities and method for vibrating a handheld electronic device
US7519223B2 (en) 2004-06-28 2009-04-14 Microsoft Corporation Recognizing gestures and using gestures for interacting with software applications
US7786980B2 (en) 2004-06-29 2010-08-31 Koninklijke Philips Electronics N.V. Method and device for preventing staining of a display device
KR20070036077A (ko) 2004-06-29 2007-04-02 코닌클리케 필립스 일렉트로닉스 엔.브이. 그래픽 사용자 인터페이스의 다중층 디스플레이
US7743348B2 (en) * 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
US20060012577A1 (en) 2004-07-16 2006-01-19 Nokia Corporation Active keypad lock for devices equipped with touch screen
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US7599044B2 (en) 2005-06-23 2009-10-06 Apple Inc. Method and apparatus for remotely detecting presence
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
JP2008511045A (ja) 2004-08-16 2008-04-10 フィンガーワークス・インコーポレーテッド タッチセンス装置の空間分解能を向上させる方法
US20060044280A1 (en) 2004-08-31 2006-03-02 Huddleston Wyatt A Interface
US7292875B2 (en) 2004-09-30 2007-11-06 Avago Technologies Ecbu Ip (Singapore) Pte Ltd Electronic device with ambient light sensor
US7522065B2 (en) 2004-10-15 2009-04-21 Microsoft Corporation Method and apparatus for proximity sensing in a portable electronic device
US7489305B2 (en) 2004-12-01 2009-02-10 Thermoteknix Systems Limited Touch screen control
US20060146012A1 (en) 2005-01-04 2006-07-06 Arneson Theodore R System and method for automatic display switching
US7151460B2 (en) 2005-01-10 2006-12-19 Nokia Corporation Electronic device having a proximity detector
EP1696414A1 (en) 2005-02-28 2006-08-30 Research In Motion Limited Backlight control for a portable computing device
FR2884349B1 (fr) 2005-04-06 2007-05-18 Moving Magnet Tech Mmt Actionneur electromagnetique polarise bistable a actionnement rapide
US7605804B2 (en) 2005-04-29 2009-10-20 Microsoft Corporation System and method for fine cursor positioning using a low resolution imaging touch screen
US9019209B2 (en) * 2005-06-08 2015-04-28 3M Innovative Properties Company Touch location determination involving multiple touch location processes
CN101542533A (zh) * 2005-07-06 2009-09-23 双子星移动科技公司 三维图形用户界面
FR2888319B1 (fr) 2005-07-07 2008-02-15 Nanotec Solution Soc Civ Ile Procede de mesure sans contact d'un deplacement relatif ou d'un positionnement relatif d'un premier objet par rapport a un second objet, par voie inductive.
US7728316B2 (en) 2005-09-30 2010-06-01 Apple Inc. Integrated proximity sensor and light sensor
US7714265B2 (en) 2005-09-30 2010-05-11 Apple Inc. Integrated proximity sensor and light sensor
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
TWI293000B (en) 2005-11-03 2008-01-21 Benq Corp Electronic device capable of operating a function according to detection of environmental light
FR2893711B1 (fr) 2005-11-24 2008-01-25 Nanotec Solution Soc Civ Ile Dispositif et procede de mesure capacitive par pont flottant
US7663620B2 (en) * 2005-12-05 2010-02-16 Microsoft Corporation Accessing 2D graphic content using axonometric layer views
US10521022B2 (en) 2006-03-17 2019-12-31 Conversant Wireless Licensing S.a.r.l. Mobile communication terminal and method therefor
KR20070113022A (ko) * 2006-05-24 2007-11-28 엘지전자 주식회사 사용자 입력에 반응하는 터치스크린 장치 및 이의 작동방법
US7747293B2 (en) 2006-10-17 2010-06-29 Marvell Worl Trade Ltd. Display control for cellular phone
US20080113618A1 (en) 2006-11-09 2008-05-15 Sony Ericsson Mobile Communications Ab Pairing system and method for mobile devices
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US8745535B2 (en) 2007-06-08 2014-06-03 Apple Inc. Multi-dimensional desktop
US8010900B2 (en) * 2007-06-08 2011-08-30 Apple Inc. User interface for electronic backup
US8681104B2 (en) * 2007-06-13 2014-03-25 Apple Inc. Pinch-throw and translation gestures
US8432365B2 (en) 2007-08-30 2013-04-30 Lg Electronics Inc. Apparatus and method for providing feedback for three-dimensional touchscreen
US8219936B2 (en) * 2007-08-30 2012-07-10 Lg Electronics Inc. User interface for a mobile device using a user's gesture in the proximity of an electronic device
KR101237640B1 (ko) 2008-01-29 2013-02-27 (주)멜파스 기생 캐패시턴스 방지 구조를 구비한 터치스크린 장치
EP2104024B1 (en) 2008-03-20 2018-05-02 LG Electronics Inc. Portable terminal capable of sensing proximity touch and method for controlling screen using the same
US8723811B2 (en) * 2008-03-21 2014-05-13 Lg Electronics Inc. Mobile terminal and screen displaying method thereof
KR101486345B1 (ko) * 2008-03-21 2015-01-26 엘지전자 주식회사 이동 단말기 및 이동 단말기의 화면 표시 방법
KR101513023B1 (ko) 2008-03-25 2015-04-22 엘지전자 주식회사 단말기 및 이것의 정보 디스플레이 방법
KR101481557B1 (ko) * 2008-03-26 2015-01-13 엘지전자 주식회사 단말기 및 그 제어 방법
KR101495164B1 (ko) 2008-04-10 2015-02-24 엘지전자 주식회사 이동단말기 및 그 화면 처리 방법
KR101502002B1 (ko) * 2008-05-21 2015-03-12 엘지전자 주식회사 근접 터치를 이용한 이동 단말기 및 그의 화면표시제어방법
US8576181B2 (en) 2008-05-20 2013-11-05 Lg Electronics Inc. Mobile terminal using proximity touch and wallpaper controlling method thereof
EP2131272A3 (en) 2008-06-02 2014-05-07 LG Electronics Inc. Mobile communication terminal having proximity sensor and display controlling method therein
JP5133791B2 (ja) * 2008-06-19 2013-01-30 株式会社ジャパンディスプレイイースト タッチパネル付き表示装置
US20090327969A1 (en) * 2008-06-27 2009-12-31 Microsoft Corporation Semantic zoom in a virtual three-dimensional graphical user interface
KR101504201B1 (ko) * 2008-07-02 2015-03-19 엘지전자 주식회사 이동단말기 및 그의 키패드 표시방법
JP2010061405A (ja) 2008-09-03 2010-03-18 Rohm Co Ltd 静電容量センサ、その検出回路、入力装置および容量センサの制御方法
KR20100041006A (ko) * 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
KR101021440B1 (ko) * 2008-11-14 2011-03-15 한국표준과학연구원 터치입력장치, 이를 이용한 휴대기기 및 그 제어방법
US8963849B2 (en) 2008-12-04 2015-02-24 Mitsubishi Electric Corporation Display input device
DE112009003521T5 (de) 2008-12-04 2013-10-10 Mitsubishi Electric Corp. Anzeigeeingabevorrichtung
GB2466497B (en) * 2008-12-24 2011-09-14 Light Blue Optics Ltd Touch sensitive holographic displays
JP4683126B2 (ja) * 2008-12-26 2011-05-11 ブラザー工業株式会社 入力装置
US9141275B2 (en) * 2009-02-17 2015-09-22 Hewlett-Packard Development Company, L.P. Rendering object icons associated with a first object icon upon detecting fingers moving apart
KR101582686B1 (ko) * 2009-03-02 2016-01-05 엘지전자 주식회사 아이템 표시 방법 및 이를 적용한 이동 통신 단말기
US20100265204A1 (en) * 2009-04-21 2010-10-21 Sony Ericsson Mobile Communications Ab Finger recognition for authentication and graphical user interface input
US8669945B2 (en) * 2009-05-07 2014-03-11 Microsoft Corporation Changing of list views on mobile device
US8373669B2 (en) 2009-07-21 2013-02-12 Cisco Technology, Inc. Gradual proximity touch screen
GB0913734D0 (en) 2009-08-06 2009-09-16 Binstead Ronald P Masked touch sensors
FR2948997B1 (fr) 2009-08-07 2012-04-20 Nanotec Solution Capteur de pression capacitif integrant une mesure de temperature compatible avec les milieux chauds.
FR2949008B1 (fr) 2009-08-07 2011-09-16 Nanotec Solution Dispositif de detection capacitif a integration de fonctions.
FR2949007B1 (fr) 2009-08-07 2012-06-08 Nanotec Solution Dispositif et procede d'interface de commande sensible a un mouvement d'un corps ou d'un objet et equipement de commande integrant ce dispositif.
US9152317B2 (en) * 2009-08-14 2015-10-06 Microsoft Technology Licensing, Llc Manipulation of graphical elements via gestures
US8405677B2 (en) 2009-09-09 2013-03-26 Mitac International Corp. Method of improving the accuracy of selecting a soft button displayed on a touch-sensitive screen and related portable electronic device
KR101629711B1 (ko) 2009-09-16 2016-06-13 엘지전자 주식회사 이동 단말기
KR20110061285A (ko) * 2009-12-01 2011-06-09 삼성전자주식회사 휴대용 디바이스 및 이의 터치 패널 운용 방법
TW201124766A (en) 2010-01-08 2011-07-16 Wintek Corp Display device with touch panel
US10007393B2 (en) * 2010-01-19 2018-06-26 Apple Inc. 3D view of file structure
JP5407950B2 (ja) 2010-03-11 2014-02-05 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US20110296351A1 (en) * 2010-05-26 2011-12-01 T-Mobile Usa, Inc. User Interface with Z-axis Interaction and Multiple Stacks
JP2012032852A (ja) 2010-07-28 2012-02-16 Sony Corp 情報処理装置、情報処理方法およびコンピュータプログラム
US8923014B2 (en) 2010-08-19 2014-12-30 Lg Display Co., Ltd. Display device having touch panel
JP5732784B2 (ja) 2010-09-07 2015-06-10 ソニー株式会社 情報処理装置、情報処理方法およびコンピュータプログラム
FR2971066B1 (fr) 2011-01-31 2013-08-23 Nanotec Solution Interface homme-machine tridimensionnelle.
US8736583B2 (en) * 2011-03-29 2014-05-27 Intel Corporation Virtual links between different displays to present a single virtual object
CN102752435A (zh) 2011-04-19 2012-10-24 富泰华工业（深圳）有限公司 具有光标的手机及其控制光标的方法
KR20130057637A (ko) 2011-11-24 2013-06-03 삼성전기주식회사 접촉 감지 장치
US9342169B2 (en) 2012-02-28 2016-05-17 Sony Corporation Terminal device
EP2634680A1 (en) 2012-02-29 2013-09-04 BlackBerry Limited Graphical user interface interaction on a touch-sensitive device
FR2990020B1 (fr) 2012-04-25 2014-05-16 Fogale Nanotech Dispositif de detection capacitive avec arrangement de pistes de liaison, et procede mettant en oeuvre un tel dispositif.
US8935625B2 (en) 2012-08-15 2015-01-13 Conductor, Inc. User interface for task management
US20140062875A1 (en) 2012-09-06 2014-03-06 Panasonic Corporation Mobile device with an inertial measurement unit to adjust state of graphical user interface or a natural language processing unit, and including a hover sensing function
US9411474B2 (en) 2012-11-15 2016-08-09 Nokia Technologies Oy Shield electrode overlying portions of capacitive sensor electrodes
FR3002052B1 (fr) * 2013-02-14 2016-12-09 Fogale Nanotech Procede et dispositif pour naviguer dans un ecran d'affichage et appareil comprenant une telle navigation
EP2778859B1 (en) 2013-03-15 2015-07-08 BlackBerry Limited Method and apparatus for word prediction using the position of a non-typing digit
FR3008809B1 (fr) 2013-07-18 2017-07-07 Fogale Nanotech Dispositif accessoire garde pour un appareil electronique et/ou informatique, et appareil equipe d'un tel dispositif accessoire
US10042509B2 (en) 2014-04-22 2018-08-07 International Business Machines Corporation Dynamic hover grace period

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08263699A (ja) * 1995-03-22 1996-10-11 Atr Tsushin Syst Kenkyusho:Kk 把持目標物体推測装置およびそれを具備する人工現実感装置
US20070294639A1 (en) * 2004-11-16 2007-12-20 Koninklijke Philips Electronics, N.V. Touchless Manipulation of Images for Regional Enhancement
CN201266371Y (zh) * 2007-01-05 2009-07-01 苹果公司 手持移动通信装置
CN101681218A (zh) * 2007-06-12 2010-03-24 微软公司 视觉反馈显示
CN101952792A (zh) * 2007-11-19 2011-01-19 瑟克公司 与显示器结合且具有接近及触摸感应能力的触摸板
CN101526881A (zh) * 2008-03-04 2009-09-09 苹果公司 使用手势选择文本
CN101547253A (zh) * 2008-03-25 2009-09-30 Lg电子株式会社 移动终端及显示其中信息的方法
CN102037436A (zh) * 2008-05-19 2011-04-27 微软公司 利用拖拽操作来访问菜单
US20100060599A1 (en) * 2008-09-09 2010-03-11 Samsung Electronics Co., Ltd. Method and device to search for and execute content using a touch screen
CN101727236A (zh) * 2008-10-10 2010-06-09 索尼株式会社 信息处理部件、信息处理方法、信息处理系统及程序
US20100289740A1 (en) * 2009-05-18 2010-11-18 Bong Soo Kim Touchless control of an electronic device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114830074A (zh) * 2019-12-13 2022-07-29 阿尔卑斯阿尔派株式会社 输入装置

Also Published As

Publication number Publication date
US20190361539A1 (en) 2019-11-28
US10303266B2 (en) 2019-05-28
CN103460175A (zh) 2013-12-18
US11175749B2 (en) 2021-11-16
EP2671146A1 (fr) 2013-12-11
CN109240587B (zh) 2022-01-25
WO2012104529A1 (fr) 2012-08-09
CN103460175B (zh) 2018-08-17
FR2971066A1 (fr) 2012-08-03
US20130307776A1 (en) 2013-11-21
FR2971066B1 (fr) 2013-08-23

Similar Documents

Publication Publication Date Title
CN103460175B (zh) 三维人机界面
US10444961B2 (en) Hover-based interaction with rendered content
TWI599922B (zh) 包含具有兩種以上自由度之使用者介面之電子設備，該使用者介面包含一觸碰敏感表面及非接觸式偵測構件
EP2666075B1 (en) Light-based finger gesture user interface
KR101535320B1 (ko) 표면상에 놓인 손에 맞는 제스쳐를 생성하는 방법
TWI569171B (zh) 手勢辨識
US20100229090A1 (en) Systems and Methods for Interacting With Touch Displays Using Single-Touch and Multi-Touch Gestures
US20110221684A1 (en) Touch-sensitive input device, mobile device and method for operating a touch-sensitive input device
TWI502459B (zh) 電子裝置及其觸控操作方法
JP2014529138A (ja) タッチ入力を用いたマルチセル選択
WO2014118602A1 (en) Emulating pressure sensitivity on multi-touch devices
US20140282279A1 (en) Input interaction on a touch sensor combining touch and hover actions
EP3008556B1 (en) Disambiguation of indirect input
CN103268199B (zh) 一种交互方法、装置及移动设备
JP6711616B2 (ja) グラフィック要素の選択
AU2013257423B2 (en) Light-based finger gesture user interface

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant