CN110114241A - 用于运行操作系统的方法、操作系统和具有操作系统的交通运输工具 - Google Patents

用于运行操作系统的方法、操作系统和具有操作系统的交通运输工具 Download PDF

Info

Publication number
CN110114241A
CN110114241A CN201880005447.4A CN201880005447A CN110114241A CN 110114241 A CN110114241 A CN 110114241A CN 201880005447 A CN201880005447 A CN 201880005447A CN 110114241 A CN110114241 A CN 110114241A
Authority
CN
China
Prior art keywords
feedback
operation behavior
user
operating system
acquisition unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880005447.4A
Other languages
English (en)
Other versions
CN110114241B (zh
Inventor
H.翁格尔尼克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Publication of CN110114241A publication Critical patent/CN110114241A/zh
Application granted granted Critical
Publication of CN110114241B publication Critical patent/CN110114241B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • B60K35/10
    • B60K35/25
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • B60K2360/146
    • B60K2360/21

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明涉及一种用于运行操作系统的方法,其中,在采集单元(2、3、15)的采集区域中采集用户的操作行为,根据采集到的操作行为产生反馈数据并且将反馈数据传输至反馈设备(7)以及通过反馈设备(7)根据反馈数据在传输区域中输出能够触觉感知的输出信号。在此,传输区域和采集区域相互间隔地布置。本发明还涉及一种具有采集单元(2、3、15)的操作系统,所述采集单元具有采集区域,在所述采集区域中能够采集用户的操作行为,所述操作系统具有控制单元(6),通过所述控制单元能够根据采集到的操作行为产生反馈数据,所述操作系统还具有反馈设备(7),反馈数据可以传输至所述反馈设备上。在此,反馈设备(7)具有传输区域,在所述传输区域中能够根据反馈数据输出能够触觉感知的输出信号。在此,传输区域和采集区域相互间隔地布置。

Description

用于运行操作系统的方法、操作系统和具有操作系统的交通 运输工具
本发明涉及一种用于运行操作系统的方法、操作系统以及具有操作系统的交通运输工具。
很多用户在日常生活中对于大量电子装置的依赖导致对于显示信息并且为用户实现操作的可能性的较大需求。这尤其借助显示屏实现,所述显示屏在这期间由于降低的成本和技术开发的进步被经常地使用并且通常设计有较大尺寸。与触摸敏感表面相结合地,所谓的触摸屏在很多领域中用于采集(Erfassung)用户输入。
为了能够操作多种不同的电子装置,例如较多地使用多功能操作系统,它们具有一个或多个多功能显示器和操作元件,通过所述操作元件能够操作所述装置。在此,通过呈现在多功能显示器上的信息来支持或者引导所述操作。此外,可以通过这种操作系统选择哪些信息应该显示在多功能显示器上。
然而,首先是现代显示屏的尺寸带来特殊的挑战,例如当用户更难在显示面上定向并且快速地找到相关信息时或者当用户的手在操作较大的触摸屏期间无约束地在相对较大的面上漂浮时。
此外,在操作系统的某些应用领域中形成的挑战是,用户只能将有限的注意力用于操作。例如,交通运输工具的驾驶员应该尽可能少地从对周围交通的观察和对自身交通运输工具的驾驶上分散注意力。
DE 10 2014 222 528 B4建议了一种用于交通运输工具乘客的约束带,其具有传感器层,通过所述传感器层可以采集输入。所述带还具有基底,所述基底具有可变的触感,其可以由用户通过凹处和/或凸起感觉到。由此在操作期间向用户给出反馈,而不需要视觉接触。
在DE 10 2013 001 323 B3建议的具有通信装置的机动车中,设置具有振动装置的安全带。在通信连接建立时触发振动过程。
在DE 10 2014 201 037 A1中描述的用于将信息传输至交通运输工具的驾驶员的方法中规定,控制触觉反馈单元。在此,触觉反馈单元布置在输入设备的用于控制交通运输工具、例如方向盘的表面上。
DE 10 2013 226 012 A1描述了一种用于控制交通运输工具中的功能的方法。在此,采集通过手指对表面的触摸。所述表面包括触觉反馈单元,通过所述触觉反馈单元可以改变表面,以便在手指的位置上产生可感知的障碍并且由此模仿模拟的操作元件。
在US 2014/0180595 A1中描述的健身手环例如可以借助振动与用户进行互动以及输出触觉反馈。例如,手环可以通过振动告知用户已经到达了确定的预设目标。通过手环也可以采集动作作为输入。
因此,本发明所要解决的技术问题在于,提供一种用于运行操作系统的方法、操作系统以及具有操作系统的交通运输工具,它们使得用户实现了特别简单并且可靠的操作。
该技术问题按本发明通过具有权利要求1所述特征的方法、具有权利要求12所述特征的操作系统和具有权利要求14所述特征的交通运输工具解决。有利的设计方案和扩展设计由从属权利要求得出。
在按照本发明的方法中,在采集单元的采集区域中采集用户的操作行为(Bedienhandlung)。根据采集到的操作行为产生反馈数据并且将反馈数据传输至反馈设备。通过反馈设备根据反馈数据在传输区域中输出能够触觉感知的输出信号,其中,传输区域和采集区域相互间隔地布置。
由此可以向用户输出对采集到的操作行为的可触觉感知的反馈。因此,所述操作以特别大的安全性进行,因为用户可以感知相应的反馈,而不必将其注意力例如集中在其它的输出单元上。
此外,即使在采集单元的性能使得这种反馈难以集成到采集单元中时,本发明也允许产生可触觉感知的输出信号。例如在将振动用作触觉反馈时期望的是,产生较大的加速度和较高的频率,以便能够产生尽可能“清楚的”信号。这例如在具有相应较大质量的较大的触摸屏中带来挑战。本发明现在允许将采集单元与输出可触觉感知的输出信号的反馈设备分隔开,从而可以通过操作系统的其它元件扩展有限的输出可能性。
在此,对操作行为的采集以本身已知的方式进行,其中,可以规定不同类型的操作行为。为此,采集单元包括传感器,通过所述传感器可以在采集区域中探测用户的行为、尤其借助操控对象的行为。接着尤其对探测到的行为进行分析,确定操作意图并且产生控制信号。
采集区域同样能够以不同的方式形成,以便实现对不同类型的操作行为的采集。尤其可以二维或者三维地设计采集区域。在二维采集区域中,沿着确定的面、尤其是表面采集操作行为。在三维采集区域中,还可以在空间体积中采集操作行为,其中,也可以包括沿着面进行的操作行为。
采集区域尤其通过采集单元的传感器限定,例如在采集单元的触摸敏感表面的情况下限定二维采集区域或者在摄像机传感器的情况下限定三维采集区域。此外,操作行为可以包括对开关、例如按键开关或者翻转开关或者调节器的操控,其中,开关或者调节器尤其包括用于探测操作行为的传感器。
在本发明的一种设计中,借助触摸敏感表面和/或摄像头采集操作行为。由此可以有利地特别简单地进行采集,其中,将已经常用的器件用于探测。
对操作行为的采集例如可以根据电阻面和/或电容面进行。通过摄像机传感器的采集可以无接触地根据来自采集区域的时间分辨式视频数据进行,其中,例如可以通过连接的分析单元将采集到的用户运动配置给特定的动作。此外,无接触的采集可以借助红外灯条、光栅或者超声波传感器按照本身已知的方式进行。同样可以使用其它形式或者混合的探测方式。
用户的操作行为尤其可以包括动作(Geste)。通过对借助动作的操作行为的采集,可以为用户提供用于不同的操作行为的特别简单和直观的输入可能性。按照本发明,“动作”理解为操控对象的特定的姿态(Stellung)或者特定的运动。操控对象尤其可以是用户的身体部分,尤其是手指或者手。作为备选或补充,可以设置其它的操控对象,例如适当的笔,例如具有特殊的技术设计,其实现或者简化了对借助操控对象进行的动作的采集。在采集区域中实施动作,也就是在二维采集区域中沿着面在特定区域中并且在三维采集区域中在空间区域中实施动作。尤其无接触地在空间中或者在对采集单元、尤其是其表面的持续触摸期间采集动作。
在按照本发明的方法的一种设计中,采集到的操作行为包括操控对象进入接近区域、点击动作(Tippgeste)、滑动动作(Wischgeste)或者指向动作。所述动作尤其可以有利地按照本身已知的方式设计。
尤其使用用户在日常使用中熟悉的指向动作、滑动动作和/或类似的动作,以及例如手的转动、抓取动作以及多个必要时直接短暂地依次实施的动作的组合。
接近区域可以设计为确定的空间区域或者面区域,例如设计为在与定义的点或者对象的特定距离以内的区域。尤其可以在操控对象进入接近区域时规定从操作系统的显示模式转换至操作模式。在这种情况下,接近区域尤其这样定义,使得其包括操作元件的周围环境的空间,也就是在这种情况下,在操作元件被操作之前就采集到进入接近区域。随即可以激活操作模式,在所述操作模式中,操作表面的显示例如这样适配,使得可以进行特别简单的操作。
动作还可以包括借助操控对象、尤其是用户的手实施的运动。在此,动作可以具有方向,所述方向尤其与运动方向或者配属于动作的功能相关。动作例如可以理解为操控对象的移动。
在一种设计中,所述操作行为包括至少一个在三维空间中、即尤其不接触表面地实施的动作段。作为备选或补充,操作行为可以包括至少一个沿着表面实施的动作段。操作行为还可以完全地在二维或者三维中实施或者可以在三维空间中和沿着二维面实施一个操作行为的多个不同动作段。
在另一设计中,还通过显示单元显示操作表面并且采集相对于所显示的操作表面的操作行为。由此可以有利地将按照本发明的方法用于操作图形操作表面。
操作表面的产生和显示以本身已知的方式进行,例如通过显示面、尤其是触摸屏进行。按照本发明,将用于人机界面的图示称为“操作表面”。在此,可以借助控制元件操作技术装置,为此例如可以使用操作表面的图示的符号或者开关面。操作表面尤其可以包括开关和操作元件,它们可采集地为人类显示功能性的操作。例如可以显示参数的值并且通过设置元件可视化地显示参数的设置。操作表面还可以包括用于显示信息的元件并且因此实现可由人类理解的输出。
按照本发明,开关元件理解为图形用户界面的控制元件。开关元件与用于单纯显示信息的元件和面、即所谓的显示面的区别在于,开关元件能够被标记和选择。在标记开关元件时,可以突出地显示所述开关元件,例如通过相对于未被标记的开关元件在图形上突出地显示。此外,被标记的开关元件可以借助操作行为被选择。在选择开关元件时,执行配属于所述开关元件的功能。所述功能只可以导致信息显示的改变。此外,可以通过开关元件来控制装置,所述装置的操作受到信息显示的支持。开关元件因此可以取代传统的机械开关。
操作行为可以借助位置分辨的触摸采集装置采集,通过所述触摸采集装置确定用户通过操作元件在显示面上触摸的位置并且将所述位置配置给图形操作表面的开关元件,其中,标记和/或选择开关元件。
在二维采集的操作行为中,例如可以在触摸敏感表面的特定位置上采集例如对触摸屏的按压或者触摸。在此,在触摸时尤其在操控对象与触摸敏感表面之间建立直接的接触。然而还可以规定,例如在电容式传感器中,不需要进行完全接触,而是很靠近表面就已经被评估为接触。例如可以在操控对象与真正的触摸传感器之间布置有玻璃板,因此不接触传感器本身,而是接触玻璃板就足够了。
在此,还可以探测所施加的压力或者触摸的时长,以便例如在简单的按压(Press)与特定阈值以上的更长按压时长(Longpress)之间进行区分。此外,作为操作元件可以显示滑动调节器(Slider),其中,可以将滑动运动规定为对操作元件的操控或者调节。以类似的方式可以通过从起始位置向目标位置的拖放(Drag and Drop)在图形操作表面内部移动操作元件。此外可以规定,根据图形操作表面的区域中的滑动动作示出所显示的操作表面的移动,以便例如显示出其尺寸大于可显示面积的操作表面的不同局部。在此还可以区分对触摸敏感表面的触摸的不同类型,例如通过一个、两个或者三个手指进行触摸。此外可以分析在多个位置上的触摸、例如在两个相互间隔的位置上的触摸,以便执行如对象或者视图的旋转或者缩放这样的操作(放大缩小、拉伸或者压缩)。此外可以探测并且分析触摸敏感表面上的其它动作。
在三维采集的操作行为中,可以采集操控对象如用户的手的姿态或者姿势(Haltung)的运动路径以及随时间的变化。例如可以采集朝特定方向的滑动动作,其例如包括操控对象从一侧向另一侧的运动。尤其可以采集沿水平和竖直方向的滑动运动。在此能够以不同的方式采集运动方向,方式尤其为采集通过不同的空间区域、例如左侧区域和右侧区域的运动。在此,可以在探测时以不同方式形成分辨率,例如采用两个空间区域,从而使在这两个区域之间的转换可以被理解为朝特定方向的运动。此外,尤其可以在三维布局中设置多个空间区域,从而能够在多个不同的空间方向上和/或以更高的空间分辨率确定运动。
此外可以采集指向动作,其中,尤其根据操控对象的姿态、位置和/或运动流程来确定方向以及操作表面的位置。例如可以将位置确定为操作表面的显示平面与特定方向的交点。在此,指向动作例如可以用于选择和/或标记操作表面的操控对象,例如类似于表面上的点击动作。此外,可以根据其它动作与以上对于二维列表描述的操作类似地执行操作,例如对象或者视图的旋转或者缩放。
当在三维采集区域中采集动作时,还可以考虑手的姿势,例如打开或者闭合的姿势以及手的单独手指的弯曲。
按照本发明,根据操作行为产生反馈数据并且将反馈数据以本身已知的方式传递至反馈设备。为此,至少暂时地在采集单元与反馈设备之间存在数据技术的连接。尤其可以存在借助电磁波的连接,例如通过蓝牙、红外线或者无线局域网(WLAN)。
数据技术连接还可以这样形成,使得反馈数据的传输与反馈设备的辨识相结合地进行,例如方式为将反馈数据传输至特殊的反馈设备或者只进行向特定用户的反馈设备的传输。以此方式可以确保可触觉感知的反馈只针对特定的用户输出。这还实现了根据个人喜好进行设置。
在一种扩展设计中,所述能够触觉感知的输出信号包括具有频率、振幅和时长的振动。由此能够有利地产生可以特别容易地感知的输出信号,所述输出信号还针对操作行为给出用户熟悉的反馈。
输出信号还可以包括振动,例如多个间隔特定时间的具有特定时长的振动。振幅和频率还可以随时间变化地形成,也就是振幅和频率可以在所输出的振动的时长期间改变,例如以便输出在开始较小并且随即不断增强的振动。
反馈设备按照本身已知的方式构成。所述反馈设备尤其包括与传输区域有效连接的执行器。这例如可以是能够产生运动的马达,通过所述运动能够将脉冲传递至反馈设备的特定面上。
传输区域能够以不同方式形成,例如通过接触面形成,借助所述接触面在反馈设备与用户的皮肤之间形成接触、尤其是摩擦配合式连接。在此,不需要存在直接的接触,而是例如可以透过衣服间接地进行接触。根据可触觉感知的反馈的类型,所述反馈可能不同地受到与用户的接触方式的影响,例如受到在脉冲传输时衣服的阻尼作用的影响。
在所述方法的一种设计中,所述反馈设备与采集单元相间隔地布置并且布置在用户的身体上。由此即使在采集单元与反馈设备之间存在空间上的分隔,也能够有利地输出可触觉感知的反馈。
在另一设计中,所述反馈设备固定在用户的胳膊上、尤其是手腕的区域中。反馈设备由此与用户的手共同运动,用户的手可以用于实施操作行为或者导引操控对象。这允许将可触觉感知的反馈信号特别紧密地与用户耦连。输出尤其能够以可特别简单并且直观地采集的方式进行,例如方式为靠近执行了操作行为的手输出反馈。也就是可以在操作行为的位置与可触觉感知的输出信号的位置之间形成紧密的位置关联,其中,传输区域与采集区域的间隔布置仍保持不变。
用于借助振动产生反馈的设备是本身已知的,例如由移动电话、健身手带、智能手表(smart watch)或者类似装置的领域已知。当然可以考虑反馈设备的其它实施形式,例如作为手环、指环、颈带或者项链、眼镜、耳环或者其它饰品、植入物或者手套。此外,反馈设备也可以包括安全带、方向盘或者座椅或者集成在其中。
在已知的系统中,通常使用户注意到设备的消息、例如移动电话上的来电。相反地,按照本发明通过反馈设备输出可触觉感知的反馈、尤其是振动作为对于根据其它装置的输入的反馈,其中,所述其它装置是与反馈设备分隔开的独立的单元。例如,借助智能手表输出对于交通运输工具中的触摸屏的操作的反馈或者根据三维动作产生并且输出可触觉感知的反馈。
这扩展了用于输出可触觉感知的反馈的可能性。为此在已知的系统中要求用户与被操作的、也输出可触觉感知的反馈的装置存在接触。例如在用户对触摸屏进行触摸期间,可以输出被操作的触摸屏的振动。然而,本发明也实现了,即使在特定的情形中用户与装置的直接接触、尤其是摩擦配合的接触中断、例如在手指从触摸屏上抬起时,也能够可触觉感知地输出反馈。
本发明还允许了输出可触觉感知的反馈,即使被操作的装置、例如触摸屏不设置用于输出反馈。采集单元与反馈设备的物理分隔还允许使得可触觉感知的反馈是针对用户特定的和/或针对相应的反馈设备特定的。例如可以规定操作系统的可配置性,其中,不同的用户可以设置可触觉感知的反馈的不同形式或者设计方案。
按照本发明,传输区域和采集区域彼此间隔地布置。这尤其表示,在借助触摸敏感表面来采集操作行为时,传输区域与用于采集操作行为的表面间隔地布置。例如,操作行为借助手指在触摸屏的表面上进行,而传输区域是智能手表与用户的皮肤表面之间的接触面。
也就是例如对于在二维采集区域上的操作行为,用户的手指与触摸敏感表面之间的接触面不同于反馈设备与用户之间的接触面。此外,在三维动作的采集中,例如采集手的动作的采集区域不同于例如是反馈设备与用户之间的接触区域的传输区域。
在此还规定,如果传输区域和采集区域的基本特性不同、尤其是如果采集区域设计为三维的并且传输区域设计为二维的,则传输区域和采集区域被视为彼此间隔的。也就是二维的传输区域被视为与三维的采集区域“相间隔”,即使二维的传输区域处于采集区域内部。
在按照本发明的方法中,例如可以在三维空间中采集动作。如果可触觉感知的反馈借助智能手表在用户的手腕处输出,则尽管戴手表的手腕可能处于采集区域内部,但根据手的三维运动采集和分析动作,而处于手表与手腕之间的接触面对于动作的采集是不重要的。在这种情况下,传输区域尤其是被遮盖的并且不能被用于采集三维操作行为的采集单元、例如摄像头采集到。
在一种扩展设计中,所述反馈数据包括第一反馈类型和第二反馈类型,并且根据反馈类型形成输出信号。由此可以有利地输出不同类型的反馈。
例如可以区分不同类别的反馈,例如正面反馈和负面反馈。如果例如执行了包括滑动动作的操作行为,则可以根据所述动作进行操控对象的移动。之后可以对于所述移动区分其是否能够按照操作行为执行或者移动是否不成功,例如因为没有规定超出特定的移动边界(止挡)的运动。可触觉感知的输出信号可以根据所进行的操作行为的分类不同地产生。
在其它的例子中可以备选或者附加地将其它不同的反馈数据分类设为不同的反馈类型。根据相应的反馈类型产生的输出信号能够以不同的方式相互区分,例如通过具有不同强度、时长和/或频率的振动或者通过多个振动的特定形成的序列进行区分。
在另一设计方案中,所述反馈数据通过交换单元传输至反馈设备上。由此能够有利地使得操作系统的不同反馈设备的接入更容易。
例如可以规定,反馈数据通过必要时可拆卸的、线缆连接的数据技术连接传输至交换单元。此外可以规定,反馈数据通过其它的、尤其是无线的数据技术连接传输至反馈设备。在此,可以通过交换单元进行反馈数据的处理,以便例如实现通过反馈设备输出所述输出信号。在此,例如可以借助交换单元进行可触觉感知的反馈的配置,所述交换单元根据反馈数据定义输出信号并且通过将所处理的数据传输至反馈设备来造成相应形成的输出信号。
用于操作行为的采集单元例如可以是交通运输工具的部分,移动电话可断开地在数据技术上与交通运输工具连接。此外,可以存在移动电话与智能手表的数据技术连接,例如借助无线电连接。反馈数据可以首先传输至移动电话,移动电话接着将反馈数据传输至智能手表。在此,对反馈数据的进一步处理可以通过移动电话进行,之后将所处理的数据传输至智能手表,以便在该处产生输出信号。在此,进一步处理例如可以根据配置进行,在所述配置中,用户可以设置输出信号的特定强度。
在本发明的一种设计方案中,还产生并且输出能够视觉地和/或听觉地感知的其它输出信号。由此可以有利地增强反馈的效果。在这种情况下,作为对可触觉感知的输出信号的补充,实现其它输出信号的输出。为了进行所述输出,例如可以使用反馈设备、显示单元或者其它的输出装置。
按照本发明的操作系统包括采集单元,所述采集单元具有采集区域,在所述采集区域中能够采集用户的操作行为。操作系统还包括控制单元,通过所述控制单元能够根据采集到的操作行为产生反馈数据,以及包括反馈设备,反馈数据能够传输至所述反馈设备上。在此,反馈设备具有传输区域,在所述传输区域中能够根据反馈数据输出能够触觉感知的输出信号。在此,传输区域和采集区域相互间隔地布置。
按照本发明的操作系统尤其设计用于实施前述按照本发明的方法。因此,操作系统具有与按照本发明的方法相同的优点。
在按照本发明的操作系统的一种设计中,所述采集单元包括触摸敏感表面或者用于探测电磁波的装置。由此能够有利地根据对表面的触摸或者根据三维空间中的动作采集操作行为。
按照本发明的交通运输工具包括如前所述的操作系统。
在一种设计中,所述采集单元包括在所述交通运输工具中,并且所述反馈设备包括在移动用户设备中。由此有利地通过与交通运输工具内部的采集单元分隔开地设计的装置来输出可触觉感知的输出信号。
尤其规定,采集单元是交通运输工具内部的装置,而反馈设备是交通运输工具外部的单元,但所述单元布置在交通运输工具中。在此,反馈设备可以固定在用户的头上,其中,可触觉感知的输出信号借助传输区域传递至用户,例如借助与用户的皮肤表面直接或者间接地接触的面。例如,采集单元包括在交通运输工具的信息娱乐系统中,例如设计为交通运输工具的触摸屏,并且反馈设备是用户的智能手表。
现在根据实施例参照附图阐述本发明。
图1和图2示出交通运输工具中的按照本发明的操作系统的实施例。
参照图1和图2阐述按照本发明的操作系统的实施例。
交通运输工具1包括控制单元6,所述控制单元与触摸屏5和采集单元3耦连,所述采集单元在所示实施例中是摄像头3。此外,通信单元9与控制单元6耦连。触摸屏5包括另一采集单元2和显示单元4,所述另一采集单元在本实施例中设计为触摸敏感表面2。在本实施例中还在触摸屏5的下边缘处布置有接近采集单元15,所述接近采集单元同样与控制单元6耦连。在此,交通运输工具1的不同部件之间的耦连例如可以通过交通运输工具1的CAN总线实现。
在交通运输工具1中还布置有交换单元8、在所示情况中是移动电话8、反馈设备7、在所示情况中是智能手表(Smart Watch)7、以及操控对象10。操控对象10在本实施例中是用户的手指10。在其它的实施例中,操控对象是用户的手或者其它身体部分、笔或者其它适当的物体和/或设备。
触摸屏5以本身已知的方式设计。触摸敏感表面布置在显示单元4的显示面上,也就是显示单元4与观察者之间。例如可以在显示单元4上布置薄膜,通过其能够探测操控对象10的触摸位置。操控对象10尤其是指用户的手指10的尖部。薄膜例如可以设计为电阻式接触薄膜、电容式接触薄膜或者压电式薄膜。此外,薄膜可以设计用于测量例如来自手指10的尖部的热流。
由对薄膜的触摸的随时间的进展能够获得不同的输入。例如,在最简单的情况下可以在特定的位置采集对薄膜的触摸并且将其配置给显示在显示面2上的图形对象。此外,可以采集在特定位置上或者特定区域内的触摸的时长。还可以采集动作,其中,尤其探测并且分析触摸敏感表面2的触摸位置随时间的改变,其中,将动作配置给运动路径。
通过摄像头3的摄像头传感器能够以本身已知的方式采集时间分辨和空间分辨的图像数据。摄像头3在此具有采集区域,所述采集区域尤其通过摄像头3的摄像头传感器以及光学器件的设计定义。在采集区域内部能够这样采集图像数据,使得所述图像数据适用于分析和识别动作。摄像头3的采集区域例如设计为,使得能够在交通运输工具1的内部空间中的特定空间区域中采集操控对象10、例如手的运动、姿态和位置。摄像头3的采集区域还可以包括触摸屏5的显示面,因此根据采集到的图像数据例如可以确定指尖相对于触摸屏5的位置。
接近采集单元15在本实施例中这样构成,使得能够采集操控对象10对触摸屏5的靠近。接近采集单元15在此具有采集区域,所述采集区域延伸经过在触摸屏5与典型的观察位置之间的空间范围。接近采集单元15的采集区域尤其靠近触摸屏5地布置。在此通过以下方式采集接近,即操控对象10进入采集区域。
接近采集单元15可以设计为传感器条并且例如包括反射光栅,所述反射光栅包括至少一个用于向采集区域中发射电磁探测射线的照明器件和用于探测在操控对象10上散射和/或反射的探测射线份额的接收元件。反射光栅尤其可以设计为,使得能够根据接收的探测射线的强度识别采集区域中的操控对象10。
采集区域还可以具有多个探测区,例如左和右、上和下或者其它布置方式的两个探测区。接近采集单元还可以包括用于各个单独的探测区的不同照明器件,它们分别将电磁探测射线发射到相应的探测区中。
此外,可以设置用于调制所发射的探测射线的调制设备,因此发射到各个单独的探测区中的探测射线分别在其调制方面不同。在这种情况下,接近采集单元也可以包括分析单元,所述分析单元设计为,使得所接收的被反射和/或散射的探测射线可以在其调制方面被分析,以便确定在哪个探测区中探测射线在操控对象上被散射或者反射。
在所述实施例中规定,通过触摸屏5的显示单元4显示图形操作表面,所述图形操作表面可以借助触摸敏感表面2进行操作。在此,在图形操作表面的显示模式和操作模式之间进行区分,其中,当通过接近采集单元15采集到操控对象10接近触摸屏5时,激活操作模式,而当没有探测到这种接近时,激活显示模式。在显示模式中这些形成显示内容,从而特别一目了然并且容易理解地显示信息。而在操作模式中这样形成显示内容,从而例如通过更大的显示特别地突出操作元件,以便使用户的输入更容易。
智能手表7这样布置在手指10所在的手的手腕上,从而在用户的皮肤与智能手表7的面之间建立直接的接触。在其它实施例中,反馈设备7以其它方式设计,例如设计为手环、指环、颈带或者项链、眼镜、耳环或者其它饰品、植入物或者手套。此外,反馈设备也可以包括安全带、方向盘或者座椅或集成在其中。在任何情况下,反馈设备7适用于产生可触觉感知的输出信号并且传输至用户的身体。在此,可以在传输区域中存在反馈设备7与身体之间的直接接触,所述接触还可以例如透过衣服间接地形成。
可触觉感知的输出信号以本身已知的方式输出,例如借助具有不平衡度的马达,其中,通过马达的运动尤其经由传输区域中的面来触发反馈设备7的惰性质量的振动。作为备选或补充,可触觉感知的输出信号的输出能够以其它的方式进行。
在所述实施例中,通信单元9、移动电话8以及智能手表7通过无线的数据技术连接相互耦连。数据技术连接分别以本身已知的方式实现,例如通过局域网或者更大的网络,例如交通运输工具1中的局域网。连接例如可以借助WLAN或者蓝牙建立。
在其它的实施例中,移动电话8与通信单元9的数据连接例如可以通过数据线的连接建立。在其它的实施例中,在反馈设备7与通信单元9之间存在直接的数据技术连接。
参照图1和图2阐述按照本发明的方法的一个实施例。在此以按照本发明的操作系统的上述实施例为出发点。
在第一步骤中,采集用户的操作行为。所述操作行为借助操控对象10实施并且在本实施例中通过交通运输工具1的不同装置采集,所述装置分别具有特定的采集区域。通过触摸屏5的触摸敏感表面2可以采集操作行为,所述操作行为通过手指10与触摸敏感表面2的接触实施。触摸屏5还设计用于与触摸敏感表面2间隔较小距离地在特定位置上探测操控对象10,与触摸敏感表面2上的位置的距离例如不超过3cm。以此方式可以探测操作行为10在触摸敏感表面2上方的悬停(Hovering)。此外,通过接近采集单元15探测手指10是否处于靠近触摸屏5的采集区域中。此外,通过摄像头3在其采集区域中采集和分析图像数据,其中,采集和分析具有手指10的用户的手的随时间变化的位置、姿势和姿态,并且必要时识别动作(手势)。
在其它的实施例中,能够以其它方式或者只根据所述可能性之一采集操作行为。
根据所采集的操作行为,通过控制单元6产生反馈数据并且借助通信单元9将反馈数据经由数据技术连接传输至交换单元8、在本实施例中是移动电话8。通过移动电话8与反馈设备7、在本实施例中是智能手表7的数据技术连接,将反馈数据进一步传输至反馈设备。通过智能手表7,根据反馈数据输出可触觉感知的输出信号,在本实施例中输出具有特定的强度、频率和时长的振动。此外可以输出多个依次相续的振动信号。
输出信号的特性可以根据反馈数据不同地形成,例如方式为在正面反馈与负面反馈之间进行区分。在这种情况下,例如可以产生并且输出两个不同的可触觉感知的输出信号,它们例如具有不同的强度、频率和时长。此外可以输出不同的振动信号序列。
在其它实施例中可以规定,通过移动电话8进行反馈数据的预处理,其中,例如针对不同的操作行为和/或反馈数据类型确定不同的反馈类型。
在本实施例中规定,当探测到操控对象10接近触摸屏5时,输出触觉反馈。借助接近采集单元15进行探测,当在触摸屏5之前的采集区域中探测到用户的手指10时,所述接近采集单元15产生探测信号。当探测到手指10进入采集单元以及当探测到手指10离开时,输出具有定义的强度、频率和时长的振动。输出信号可以根据是否探测到进入或者离开而不同。
此外可以识别滑动动作,所述滑动动作通过手指10、用户的手或者其它的操控对象10在接近采集单元15的采集区域中实施。在本实施例中,接近采集单元15具有分为两部分的采集区域,其中,能够探测在触摸屏5之前的左侧区域或者右侧区域中的彼此独立的接近。在其它实施例中,所述区域能够以其它方式布置,例如竖直地叠置或者可以设置多于两个区域。
当操控对象10首先在一个区域中并且接着在另一个区域中被探测到,也就是当操控对象10在接触区域的区域之间进行运动时,识别出在三维空间中实施的滑动动作。例如,操控对象10在接触区域中首先在右侧并且接着在左侧被探测到并且识别出向左的滑动动作。根据所述滑动动作,控制单元6产生控制信号,以便例如相应地移动通过显示单元4显示的操作表面局部。此外,产生反馈数据并且将其通过移动电话8传输至智能手表7。通过智能手表7可触觉感知地产生输出信号,在本实施例的情况下产生具有特定强度、频率和时长的振动。
在本实施例中还规定,当在触摸屏5的触摸敏感表面2上采集到操作行为时,通过智能手表7输出可触觉感知的输出信号。输出信号可以在手指10与触摸敏感表面2之间进行接触期间输出,以及在接触之后,也就是在手指10与触摸敏感表面2之间的接触消除之后输出。作为备选或补充,可以在接近触摸敏感表面2或者接近触摸敏感表面2的周围环境中的特定位置时产生可触觉感知的输出。
在本实施例中,通过触摸敏感表面2采集多个不同的操作行为。在此可以规定,对于不同的操作行为产生不同类型的可触觉感知的输出信号,例如具有不同强度、频率和时长的振动以及不同地构成的振动脉冲序列。
可以采集在触摸屏5的一个位置处的按压,其中,还可以考虑所施加的按压的强度。此外可以考虑按压的时长并且当所述时长超过特定的阈值时,可以识别持续较长的按压(长按,Longpress),并且按压可以根据时长被不同地理解。此外,可以探测触摸敏感表面2上的滑动动作,其中,手指10在触摸敏感表面2上的触摸位置随时间改变并且尤其具有起点和终点。根据这种滑动动作能够对可滑移的调节元件(滑块,Slider)进行调节或者对元件进行不同地构成的移动。此外,可以移动在触摸屏5上输出的图形操作表面的元件,例如可操作的图形元件或者显示的操作表面局部,所述操作表面的尺寸超过了显示单元4的尺寸。此外可以区分是否探测到借助一个手指10或者多个手指进行的触摸。在其它实施例中作为备选或补充,可以通过触摸屏5的触摸敏感表面2采集并且解释其它的操作行为。在此可以针对不同的操作行为规定各种可触觉感知的输出信号。
在另一实施例中还规定,当手指10处于触摸屏5附近的周围环境中但没有实施触摸时,与确定通过手指10对触摸敏感表面2的触摸类似地确定触摸屏5上的位置。在此,手指10尤其在触摸屏5的位置上方悬停(Hovering)。对这种悬停的采集能够以各种方式进行,尤其通过触摸屏5的电容式传感器。在一个实施例中,当手指10在特定位置上方悬停的时间长于特定的阈值时,在显示内容中在所述位置上打开具有例如关于显示在所述位置上的开关元件的帮助信息的窗口。此外在这种情况下规定,输出可触觉感知的反馈,以便通知用户窗口的打开。
在所述实施例中还区分不同的动作,所述动作可以通过摄像头3采集。在此尤其分析操控对象10、例如用户的手的位置、姿势和姿态。此外考虑运动、尤其是运动方向。在此,按照本身已知的方式区分在三维空间中实施的不同动作,例如向右或左或者向上或下的滑动动作。此外可以采集指向动作,根据所述指向动作尤其确定在触摸屏5的显示单元4上的位置。此外可以识别用于缩放通过显示单元4输出的对象的动作,尤其沿一个空间方向(拉伸)或者均匀地沿两个方向(放大、缩小)。在其它的实施例中作为备选或补充,可以通过摄像头3采集其它动作并且解释为操作行为。
在所述实施例中还区分是否产生了正面反馈还是负面反馈。例如可以这样分析操作行为,从而给出成功的或者不成功的提示。因此,例如操作行为可以包括用于移动的提示,并且对于移动可以设置“止挡”,也就是空间边界,不能超出所述空间边界进一步移动。到达止挡可以借助负面的输出信号输出,而当在预设的边界内移动时,可以输出正面的输出信号。
此外在所述实施例中规定,可触觉感知的输出信号是可配置的。这按照本身已知的方式、例如借助用户输入进行。
此外,可以对操控对象10、手或者手指10或用户和/或反馈设备7进行辨识并且可以根据辨识形成可触觉感知的输出信号。例如可以针对不同的用户、操控对象10和/或反馈设备7规定不同的触觉反馈配置,以便例如使可触觉感知的输出信号与相应的反馈设备7的输出可能性或者用户喜好适配。
附图标记清单
1 交通运输工具
2 触摸敏感表面
3 摄像头
4 显示单元
5 触摸屏
6 控制单元
7 反馈设备;智能手表(Smart Watch)
8 交换单元;移动电话
9 通信单元
10 操控对象;手指
15 接近传感器

Claims (15)

1.一种用于运行操作系统的方法,其中,
在采集单元(2、3、15)的采集区域中采集用户的操作行为;
根据采集到的操作行为产生反馈数据并且将反馈数据传输至反馈设备(7);并且
通过反馈设备(7)根据反馈数据在传输区域中输出能够触觉感知的输出信号;
其中,传输区域和采集区域相互间隔地布置。
2.按权利要求1所述的方法,
其特征在于,借助触摸敏感表面(2)和/或摄像头(3)采集操作行为。
3.按前述权利要求之一所述的方法,
其特征在于,采集到的操作行为包括操控对象进入接近区域、点击动作、滑动动作或者指向动作。
4.按前述权利要求之一所述的方法,
其特征在于,所述操作行为包括至少一个在三维空间中实施的动作段。
5.按前述权利要求之一所述的方法,
其特征在于,还通过显示单元(4)显示操作表面并且采集相对于所显示的操作表面的操作行为。
6.按前述权利要求之一所述的方法,
其特征在于,所述能够触觉感知的输出信号包括具有频率、振幅和时长的振动。
7.按前述权利要求之一所述的方法,
其特征在于,所述反馈设备(7)与采集单元(2、3、15)相间隔地布置并且布置在用户的身体上。
8.按权利要求7所述的方法,
其特征在于,所述反馈设备(7)固定在用户的胳膊上、尤其是手腕的区域中。
9.按前述权利要求之一所述的方法,
其特征在于,
所述反馈数据包括第一反馈类型和第二反馈类型;并且
根据反馈类型形成输出信号。
10.按前述权利要求之一所述的方法,
其特征在于,所述反馈数据通过交换单元(8)传输至反馈设备(7)上。
11.按前述权利要求之一所述的方法,
其特征在于,还产生并且输出能够视觉地和/或听觉地感知的其它输出信号。
12.一种操作系统,具有
采集单元(2、3、15),所述采集单元具有采集区域,在所述采集区域中能够采集用户的操作行为;
控制单元(6),通过所述控制单元能够根据采集到的操作行为产生反馈数据;和
反馈设备(7),反馈数据能够传输至所述反馈设备上;其中
反馈设备(7)具有传输区域,在所述传输区域中能够根据反馈数据输出能够触觉感知的输出信号;其中,
传输区域和采集区域相互间隔地布置。
13.按权利要求12所述的操作系统,
其特征在于,所述采集单元(2、3、15)包括触摸敏感表面(2)或者用于探测电磁波的装置(3)。
14.一种交通运输工具(1),具有按权利要求12或13所述的操作系统。
15.按权利要求14所述的交通运输工具(1),
其特征在于,所述采集单元(2、3、15)包括在所述交通运输工具(1)中,并且所述反馈设备(7)包括在移动用户设备中。
CN201880005447.4A 2017-01-26 2018-01-11 用于运行操作系统的方法、操作系统和具有操作系统的交通运输工具 Active CN110114241B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102017201236.6 2017-01-26
DE102017201236.6A DE102017201236B4 (de) 2017-01-26 2017-01-26 Verfahren zum Betreiben eines Bediensystems, Bediensystem und Fahrzeug mit einem Bediensystem
PCT/EP2018/050696 WO2018137939A1 (de) 2017-01-26 2018-01-11 Verfahren zum betreiben eines bediensystems, bediensystem und fahrzeug mit einem bediensystem

Publications (2)

Publication Number Publication Date
CN110114241A true CN110114241A (zh) 2019-08-09
CN110114241B CN110114241B (zh) 2022-12-13

Family

ID=61022327

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880005447.4A Active CN110114241B (zh) 2017-01-26 2018-01-11 用于运行操作系统的方法、操作系统和具有操作系统的交通运输工具

Country Status (5)

Country Link
US (1) US20190381887A1 (zh)
EP (1) EP3573854B1 (zh)
CN (1) CN110114241B (zh)
DE (1) DE102017201236B4 (zh)
WO (1) WO2018137939A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018216358A1 (de) * 2018-09-25 2020-03-26 Bayerische Motoren Werke Aktiengesellschaft Bedienfeld, system, mittelkonsole oder armaturenbrett eines fahrzeugs sowie fahrzeug
JP7470697B2 (ja) * 2018-09-25 2024-04-18 エージーシー グラス ユーロップ 乗り物制御デバイス及びその製造方法
DE102018126231A1 (de) * 2018-10-22 2020-04-23 Endress+Hauser SE+Co. KG Bedienmodul für ein Feldgerät der Automatisierungstechnik und selbiges Feldgerät
EP3897187A1 (en) 2018-12-19 2021-10-27 Bunge Loders Croklaan B.V. Rumen protected matrix for animal feed, use and process
DE102020202918A1 (de) 2020-03-06 2021-09-09 Robert Bosch Gesellschaft mit beschränkter Haftung Verfahren und System zur Ansteuerung wenigstens einer Funktion in einem Fahrzeug

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060047386A1 (en) * 2004-08-31 2006-03-02 International Business Machines Corporation Touch gesture based interface for motor vehicle
CN104205015A (zh) * 2012-04-09 2014-12-10 高通股份有限公司 基于手势控制远程装置
WO2015022286A1 (de) * 2013-08-12 2015-02-19 Volkswagen Aktiengesellschaft Verfahren zum bereitstellen einer bedienvorrichtung in einem fahrzeug und bedienvorrichtung
WO2015074771A1 (en) * 2013-11-19 2015-05-28 Johnson Controls Gmbh Method and apparatus for interactive user support
CN105829993A (zh) * 2013-12-19 2016-08-03 Zf 腓德烈斯哈芬股份公司 臂带传感器和用于运行臂带传感器的方法
DE102015006613A1 (de) * 2015-05-21 2016-11-24 Audi Ag Bediensystem und Verfahren zum Betreiben eines Bediensystems für ein Kraftfahrzeug
EP3106343A1 (en) * 2015-06-19 2016-12-21 Continental Automotive GmbH Gesture based user input device for car electronics

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8381135B2 (en) * 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US9311528B2 (en) * 2007-01-03 2016-04-12 Apple Inc. Gesture learning
US8892299B2 (en) * 2009-10-05 2014-11-18 Tesla Motors, Inc. Vehicle user interface with proximity activation
WO2011133860A2 (en) * 2010-04-23 2011-10-27 Immersion Corporation Systems and methods for providing haptic effects
US20140180595A1 (en) 2012-12-26 2014-06-26 Fitbit, Inc. Device state dependent user interface management
DE102013001323B3 (de) 2013-01-26 2014-03-13 Audi Ag Kraftfahrzeug mit Kommunikationseinrichtung
JPWO2015029222A1 (ja) * 2013-08-30 2017-03-02 富士通株式会社 情報処理装置,表示制御プログラム及び表示制御方法
DE102013226012A1 (de) 2013-12-16 2015-06-18 Bayerische Motoren Werke Aktiengesellschaft Bereitstellung eines Bedienelements durch Oberflächenveränderung
US9248840B2 (en) 2013-12-20 2016-02-02 Immersion Corporation Gesture based input system in a vehicle with haptic feedback
DE102014119034A1 (de) 2013-12-26 2015-07-02 Visteon Global Technologies, Inc. Bereitstellen einer taktilen Rückmeldung für gestenbasierte Eingaben
DE102014201037A1 (de) 2014-01-21 2015-07-23 Bayerische Motoren Werke Aktiengesellschaft Informationsübermittlung durch Oberflächenveränderung
DE102014222528B4 (de) 2014-11-05 2016-09-15 Bayerische Motoren Werke Aktiengesellschaft Rückhaltegurt eines Kraftfahrzeugs mit einer Bedieneinheit
US9542781B2 (en) 2015-05-15 2017-01-10 Ford Global Technologies, Llc Vehicle system communicating with a wearable device to provide haptic feedback for driver notifications
US10019070B2 (en) 2015-11-03 2018-07-10 GM Global Technology Operations LLC Vehicle-wearable device interface and methods for using the same

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060047386A1 (en) * 2004-08-31 2006-03-02 International Business Machines Corporation Touch gesture based interface for motor vehicle
CN104205015A (zh) * 2012-04-09 2014-12-10 高通股份有限公司 基于手势控制远程装置
WO2015022286A1 (de) * 2013-08-12 2015-02-19 Volkswagen Aktiengesellschaft Verfahren zum bereitstellen einer bedienvorrichtung in einem fahrzeug und bedienvorrichtung
WO2015074771A1 (en) * 2013-11-19 2015-05-28 Johnson Controls Gmbh Method and apparatus for interactive user support
CN105829993A (zh) * 2013-12-19 2016-08-03 Zf 腓德烈斯哈芬股份公司 臂带传感器和用于运行臂带传感器的方法
DE102015006613A1 (de) * 2015-05-21 2016-11-24 Audi Ag Bediensystem und Verfahren zum Betreiben eines Bediensystems für ein Kraftfahrzeug
EP3106343A1 (en) * 2015-06-19 2016-12-21 Continental Automotive GmbH Gesture based user input device for car electronics

Also Published As

Publication number Publication date
DE102017201236A1 (de) 2018-07-26
DE102017201236B4 (de) 2023-09-07
EP3573854B1 (de) 2021-04-07
WO2018137939A1 (de) 2018-08-02
US20190381887A1 (en) 2019-12-19
CN110114241B (zh) 2022-12-13
EP3573854A1 (de) 2019-12-04

Similar Documents

Publication Publication Date Title
CN110114241A (zh) 用于运行操作系统的方法、操作系统和具有操作系统的交通运输工具
JP5275970B2 (ja) 対話型操作装置および対話型操作装置を動作させるための方法
US11360558B2 (en) Computer systems with finger devices
US9141148B2 (en) Mobile communication device and input device for the same
EP2733574B1 (en) Controlling a graphical user interface
US20030048260A1 (en) System and method for selecting actions based on the identification of user's fingers
KR101194883B1 (ko) 비접촉식 스크린 제어 시스템 및 그 시스템에서의 비접촉식 스크린 제어 방법
Ketabdar et al. Towards using embedded magnetic field sensor for around mobile device 3D interaction
US20120249417A1 (en) Input apparatus
US10108334B2 (en) Gesture device, operation method for same, and vehicle comprising same
JP2006285370A (ja) ハンドパターンスイッチ装置及びハンドパターン操作方法
US20140236454A1 (en) Control Device for a Motor Vehicle and Method for Operating the Control Device for a Motor Vehicle
RU2617621C2 (ru) Способ и устройство для отображения кисти руки оператора элемента управления транспортного средства
CN103649873A (zh) 可装在拇指上的光标控制和输入装置
KR102016650B1 (ko) 장치를 조작하기 위한 방법 및 조작 장치
WO2017138545A1 (ja) 情報処理システム、情報処理装置、制御方法、及びプログラム
JP2014153986A (ja) 表示装置、および、表示方法
CN108367679A (zh) 具有图像检测单元和用于对车辆的装置进行操作的操作系统的车辆以及用于运行该操作系统的方法
CN106201126A (zh) 触摸屏和指纹识别实现装置及终端设备
CN111461059A (zh) 一种多区域多分类可扩展手势识别控制装置及控制方法
CN113253908A (zh) 按键功能执行方法、装置、设备及存储介质
EP4268062A1 (en) Smart fabric that recognizes objects and touch input
CN211979681U (zh) 一种多区域多分类可扩展手势识别控制装置
US9940900B2 (en) Peripheral electronic device and method for using same
CN116198435A (zh) 车辆的控制方法、装置、车辆以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant