CN114072754A - 运行操作系统的方法和操作系统 - Google Patents

Abstract

一种运行操作系统的方法，其中，检测操作系统的可操作的功能，并且根据可操作的功能确定针对可操作的功能的至少一个潜在操作行为类型。检测关于可操作的功能的潜在操作行为类型的操作历史，并且根据操作历史生成并输出输出内容，其中，输出内容包括对实施潜在操作行为类型的提示。一种操作系统，包括控制单元(8)和与控制单元(8)耦连的输出单元(3)。在此，控制单元(8)设置用于，检测操作系统的可操作的功能，根据可操作的功能确定针对可操作的功能的至少一个潜在操作行为类型；并且检测关于可操作的功能的潜在操作行为类型的操作历史。在此，控制单元(8)还设置用于控制输出单元(3)，从而输出包括对实施潜在操作行为类型的提示的输出内容。

Description

运行操作系统的方法和操作系统

本发明涉及一种尤其在交通工具中运行操作系统的方法和操作系统。

现代日常生活的特点是多个操作可以在不同环境中以不同方式运行的装置。为此，建议不同的操作方案，例如借助视应用领域而定地具有特定的优点和缺点的键盘、手势、语音或指点设备进行控制。在一些情况下，还可以为了实现相同的系统反应，可以设置不同的操作模式，用户知道这些不同的操作模式并且他必须在这些操作模式之间进行选择。

在已知的系统中，通常规定，用户通过手册或介绍视频了解可用的操作行为的类型，例如通过在系统的首次启动时播放和/或稍后能再调用视频。用户在此经常会遇到比他能处理的更多的信息，并且他必须花费大量时间来学习如何操作它。

在文献US 2015/0175172 A1中描述了一种基于手势输入的系统，其具有触觉反馈。检测手势并且输出相应的反馈。此外，也可以进行语音控制。描述了各种不同的可以借助摄像头检测的并且配属于系统的各种不同的可控制动作的手势。

从文献US 2004/0189720 A1中已知一种借助手势控制计算机的构架，在该构架中手势可以结合语音命令使用。

文献DE 10 2009 039 114 A1建议一种用于交通工具的操作装置，在该操作装置中，在三个空间区域之一中探测用户的一个身体部分并且在图形对象的情况下显示所配属的对象。例如可以显示数字和比例。

文献US 2018/0307347 A1描述一种用于探测手势的方法，其中，使用电容传感器。用户可以在数据库中为确定的命令定义手势以及通过查看说明书学习预设的手势。

从文献DE 10 2006 037 156 A1中已知一种用于运行交互式操作设备的方法，在该方法中显示操作元件并且探测用户向操作元件的靠近。然后，优化地表示操作元件，例如通过放大操作元件。这种表示的调整还可借助手势来控制。

本发明所要解决的技术问题是，提供一种方法和操作系统，其中，在此辅助用户，识别并应用不同的操作可能性。

所述技术问题根据本发明通过具有权利要求1的技术特征的方法、具有权利要求11的技术特征的操作系统以及具有权利要求15的技术特征的交通工具解决。有利的设计方案和扩展方案从各个从属权利要求中获得。

在根据本发明的方法中，检测所述操作系统的可操作的功能，并且根据可操作的功能确定针对可操作的功能的至少一个潜在操作行为类型。检测关于可操作的功能的潜在操作行为类型的操作历史，并且根据操作历史生成并输出输出内容。在此，所述输出内容包括对实施潜在操作行为类型的提示。

在所述方法中，在借助所确定的操作行为类型操作时可以有利地特别灵活地、有针对性地并且高效地辅助用户。为此，评估操作历史，根据该操作历史尤其可以确定用户需要改进或学习哪些操作行为类型。

在此方法中，首先检测可操作的功能。在此尤其检测当前可操作哪一个功能或哪些功能。在此例如可以是装置的一种状态，在该状态中可检测用户输入或用户与装置的其它交互。为了该操作，设置至少一个操作行为，用户借助该操作行为可以与装置进行交互。当用户与装置交互时，通过操作系统例如检测用户的操作行为，产生控制信号并且传输给装置，以便激活或停用功能，输入可调节的参数或将指令传输给装置。

在操作时可以将所确定的操作行为类型配属操作行为，借助该操作行为当前可以进行功能的操作。也就是尤其，具体的由用户实际实施的操作行为划归操作行为的抽象模型。

在根据本发明的方法的设计中，所述潜在操作行为类型包括在三维空间中的手势、在触摸敏感的表面上的手势、语音输入或者对按钮、滑移开关或旋转开关的操作。操作行为类型还可以包括例如按下操作元件、旋转操作元件或对操作元件的其他操纵。由此，可以有利地特别好地在实施适合的操作行为时辅助用户。

例如通过麦克风检测口头表达并且将检测到的表达配属所确定的语音命令；在此考虑到，实际检测到的表达通常与所确定的语音输入的操作行为类型的预设的理想化模型不完全对应，而是存在一些偏差，例如由于在检测时的噪音、背景声音和发出语音命令时产生的声音不一致。以相似的方式，例如可以在三维空间中检测手势并且将其配属沿确定方向的滑动手势，其中，针对实际检测到的手势，确定相应的操作行为类型的模型。

此外，尤其定义操作模式，该操作模式结合了一组所确定的操作行为类型，尤其通过生成、实施和/或检测操作模式的操作行为类型的共同特征。因此，操作模式“语音输入”可以包括各种不同的操作行为类型，尤其不同的单独的语音命令。在另一个例子中，三维空间的操作模式“手势操作”可以包括各种不同的手势，例如向左右的滑动手势，向上下的滑动手势，操纵手势和/或指向-移动手势，其例如可以定义为音量手势。其他操作模式例如可以是在触摸敏感的表面上的手势或物理操作装置的操纵。

为了实施手势，可以例如被用于操纵对象，尤其用户的手。在以下说明中，与作为操作对象的用户的手有关的信息应概括为其他操纵对象，例如笔。

“手势”尤其理解为所确定的位置和定向，即操作对象的姿势，例如用户的手的姿势，或通过操纵对象实施的确定的运动。手势可以以已知的方式设计。这些手势尤其包括指向手势、滑动手势和日常使用中使用的那些手势，例如转动手、抓握手势和多个这种可能直接或相继实施的手势的组合。手势在检测空间中实施。这可以与所确定的装置例如输出设备存在空间关联，并且可以例如与所确定的装置相邻。手势还可以包括对确定空间位置例如装置或显示表面上的位置的接近。通过手势操作为用户提供了一个特别简单和直观的操作可能性。

根据手势还可以确定空间中的方向并且根据检测到的方向尤其可以确定位置，针对该位置确定指向手势。例如可以确定，用户指向显示区域中的哪个点，并且该信息可以不同地用于操作。可以进行选择或对确定区域的指向已经可以作为输入内容被评估。在显示区域中可以示出对图形对象的选择，其优点是，用户可以立即获得有关其操作行为的反馈。如果在该点的周围区域中尚未识别出任何对象，则在此也可以随后在显示区域中显示出点。这避免了用户必须在对象之间的空白处进行搜索，直到他击中所确定的区域或期望的图形对象。这可以进一步加速选择过程。

可以通过摄像头系统例如以非触摸的方式检测手势，该摄像头系统拍摄来自探测空间的时间上分解的视频数据并且借助连接的评估单元将检测到的用户运动配属确定的手势。备选或附加地，也可以借助电阻面和/或电容面检测手势。

在所述方法中，根据可操作的功能确定针对可操作的功能的至少一个潜在操作行为类型，尤其可以确定多个潜在操作行为类型。也就是，在首先确定了当前可以操作哪些功能之后，还要确定哪些类型的操作是可行的并且以何种方式，即借助何种操作模式和/或借助何种操作行为类型可以实施该操作。例如可以在当前的操作情况中并且在可操作的功能的状态下，可以使用确定的手势、语音命令或其他类型的操作行为，而其他类型的输入目前不能用于操作。例如可以在可操作功能的确定状态下实施竖向滚动，但不能实施横向移动，反之亦然。与之相应地，在这种情况下可使用或不可使用所确定的命令或操作行为类型。

在所述方法中生成的输出内容包括针对实施潜在操作行为类型的提示。该提示可以例如这样地构成，从而输出针对特别好地适合的或优选的操作行为类型的提示，尤其是针对特别好地适合的操纵手势的提示。此外，可以输出针对如何实施操作行为类型的操作行为的提示或针对应该如何更好地实施由用户实施的操作行为的提示，例如以便以更好的准确性和可靠性识别操作行为，或者以便可以借助操作行为类型用更少的体力实施操作。

在该设计方案中，光学地、声学地和/或触觉可感知地输出输出内容。该输出可以以已知的方式进行，例如借助显示面或扬声器进行。此外，可以输出三维显现的表示，例如借助全息显示或自动立体显示。

在另一个设计方案中，所述输出内容包括手的示意性图形表示，其中，借助对手的表示输出针对实施潜在操作行为类型的提示。由此可以有利地特别清楚地提示手势的实施。

尤其具有对手势在三维空间中实施的提示的输出内容可以包括例如操纵对象，例如人手的图形表示。该表示尤其示意性地设计，其中，例如仅显示操纵对象的轮廓。图形表示可以在显示单元的显示面上被输出，例如除了另外的显示外以叠加的方式输出。尤其可以在显示面上生成具有操纵表面的显示，该操作表面被操作行为的图形表示借助操纵对象叠加。此外，除了三维手势外，还可以设置在触摸敏感的表面上的触摸或手势作为操作行为类型和/或设置语音命令作为潜在操作行为类型。尤其这样地产生示意性的手的表示，使得该手的表示具有实际手的大小并且在空间手势的情况下显示手相对于输出面的布置的投影。

在另一个设计方案中，确定针对可操作的功能的至少两种潜在操作行为类型，并且将这些潜在操作行为类型中的一个确定为优选的操作行为类型。备选或附加地，尤其可以确定优选的操作模式。由此可以向用户有利地发出信号，告知当前哪种类型的操作行为特别适合操作。

例如可以借助不同的操作行为类型或操作模式操作可操作的功能，例如借助语音输入、三维手势和借助手势在触摸屏上的操作进行。但是，根据可操作的功能的当前情况和/或当前状态可以确定，所确定的操作行为类型或操作模式是优选的，例如语音输入或手势操作是优选的，例如因为用户将他的手用于其他目的，因为可以更好地或更差地到达操作元件或检测空间以实施手势，因为背景噪声干扰语音输入的检测或由于用户的个人喜好。

在另一个设计方案中，检测用户相对于输入设备的位置，优选的操作行为类型包括与用户位置相关的对输入设备的操作或空间手势。由此，可以有利地特别容易地确定优选的操作行为类型和/或操作模式。

例如可以检测用户在例如交通工具的内部空间的座椅位置。如果座椅位于内部空间较靠后的位置，即与诸如触摸屏的输入设备距离较大，则优选的操作行为类型可以包括空间手势，而通过操纵或触摸触摸屏或其他操作元件进行的操作不是优选的。在此也可以检测用户的作用范围，例如臂长，或可以从作用范围的预设值出发，其中，仅在触摸屏或操作元件位于用户的作用范围以内时，对触摸屏或操作元件的操纵或触摸才是优选的操作行为类型。

可以检测并且在确定优选的操作行为类型时考虑用户在内部空间中的定向，尤其相对于所确定的标记的方向，例如行驶方向或沿交通工具的纵向向前或向后。例如可以确定注视方向或座位的取向。然后可以根据用户的定向确定优选的操作行为类型。例如可以通过这种方式确定，操作元件是否布置在对于用户在人体工程学上可接近的方向上，例如在用户之前而不是他身后的区域中。

也可以根据用户在内部空间中的定向进行输出，尤其借助用户视野中的输出设备进行视觉上可感知的输出。

在所述方法中还可以提供潜在操作行为类型的操作历史，根据其生成输出内容。

在所述方法的改进方案中，关于潜在操作行为类型的操作历史包括有关潜在操作行为类型的使用频率和/或实施质量的信息。由此可以有利地特别好地评估所确定的操作行为类型的具体使用。

操作历史包括例如有关使用所确定的操作行为类型的操作行为的存储数据，必要时结合可操作的功能，如果操作行为类型是优选的则尤其涉及该使用频率，和/或涉及在实施期间实现使用时确定的识别安全性。操作历史包括例如有关借助针对可操作功能的所确定的操作行为类型的操作行为实施输入的频率信息。如果该操作行为类型被确定为优选的操作行为类型，操作历史还包括例如使用操作行为类型的频率。

在进一步的设计方案中，检测用户的用户识别物，并且检测所识别到的用户的关于潜在操作行为类型的操作历史。由此，可以有利地改进针对特定用户的操作行为类型的使用。

用户标识物以已知的方式检测。例如可以使用例如移动用户设备、交通工具钥匙、身份证的个人物品或其他设备、用户输入或光学的用户识别方法。

尤其为识别到的用户生成操作历史，从而可以有利地评估用户的能力和/或习惯。因此，根据操作历史例如可以确定，当确定类型的操作行为可用于输入或调用功能时，用户是否和/或多久实施一个确定类型的操作行为，以及他多久使用另外类型的操作行为而不是该操作行为类型，尤其是非优选的操作行为类型。操作历史可以例如存储在移动用户设备上或根据用户标识来调用，例如通过访问诸如服务器的外部存储单元，或例如交通工具的内部存储单元。

此外，可以确定用户以何种方式实施操作行为；例如可以确定识别一种类型的操作行为的安全性，和/或可以确定操作行为的实施质量。例如在手势的情况下可以确定以何种安全性或置信度将手势配属于确定的操作行为类型，尤其以便将操作行为与其他的操作行为类型区分开。此外，可以确定实施参数，例如清晰度、速度或实施空间。

如果操作行为类型包括在空间中实施的手势，例如可以确定手势在哪个检测区域内实施，操纵对象的例如运动或姿势有多清楚，实施运动的幅度或速度是多少，或者保持确定的姿势多长时间。此外，还可以使用不同的语音输入作为操作行为类型。操作历史然后可以包括语音输入被识别的清晰程度和/或检测语音输入的输入质量，例如与音量、讲话方向、讲话速度、语调或语音清晰度有关。然后可以生成对实施潜在操作行为类型的提示，使得用户从输出内容中了解如何可以更好地实施潜在的操作行为类型。

在一种设计方案中，还检测操作行为并且将该操作行为划归操作行为类型。根据检测到的操作行为更新关于操作行为类型的操作历史。此外，当检测到用户不实施潜在操作行为类型的操作行为时，尤其当在此涉及优选的操作行为类型时，也可以更新操作历史。由此，操作历史有利地总是保持最新的并且输出内容可以根据用户需要调整。

在这种情况下，操作历史可以例如用附加的信息补充或可以用更新的信息来更新现有信息。例如可以更新用户使用操作行为类型的频率。此外，可以补充或更新有关操作行为的实施质量的信息；例如可以改进用户实施确定类型的操作行为的质量和/或清晰度，并且这可以被检测并且存储在操作历史中。

在一个设计方案中，操作历史包括用户的操作行为的预设的时间段或预设的数量或用于所确定的可操作的功能。操作历史还可以包括可变的时间段，其中，对于所述方法首先确定要考虑的操作历史范围。例如，当用户再次学习如何操作时可以考虑在更短的时间段内的操作历史，因为在此可以预期操作行为的更大的变化。相反，在用户熟悉操作系统的较长时间后，可以考虑更长时间段的操作历史，以便根据更大的数据库生成输出内容并且为用户提供更有针对性的支持。

此外可以检测用户实施的不能划归潜在操作行为类型的操作行为，例如因为用户使用当前不可用的操作行为类型，或因为操作行为不能划归已知的操作行为类型。例如尽管当前不能进行相应输入，但用户做出了滑动手势，或他模糊地做出了手势，例如太小、较快或不精确。然后可以识别出用户想要进行输入，但他似乎不知道哪些类型可用和/或如何正确地实施潜在操作行为。

在扩展设计中，还检测不能划归潜在操作行为类型的操作行为，并且根据可操作的功能和检测到的操作行为确定意图假设。根据所述意图假设生成具有提示的输出内容。由此可以向用户有利地建议更好地适合的操作可能性。尤其识别用户可能想要使用哪种操作行为类型。

在确定意图假设时，例如可以确定和比较不同的潜在操作行为类型的概率，并且可以将具有最高概率的操作行为类型用作意图假设。例如可以根据与实际检测到的操作行为的相似性确定概率；在这种情况下，即使操作行为实施得不足够清楚也可以例如识别操作行为类型。此外，可以使用操作历史来确定用户针对可操作的功能特别频繁使用的操作行为。在组合中，还可以通过加权确定根据操作历史针对可操作的功能特别频繁地使用哪些操作行为类型以及实际检测到的操作行为与这些操作行为类型中的哪些特别相似。此外可以考虑，哪些潜在操作行为类型可用并且可以选择这些操作行为类型中最可能的操作行为类型作为意图假设。尤其可以要求用户确认该意图假设是实际想要的操作行为类型。

在一个设计方案中，在输出提示之后检测潜在操作行为类型的操作行为，并且根据检测到的操作行为实施用于识别潜在操作行为类型的学习过程。尤其在此根据检测到的操作行为生成用于操作操作系统的功能的控制信号。由此可以有利地在需要时改善对操作行为类型的操作行为的识别。

例如根据操作历史确定，以低可靠性或安全性检测确定的操作行为类型的操作行为，尤其针对确定用户的确定的操作行为类型的操作行为。这例如可以通过实施手势或发出语音命令的用户特定的方式决定。现在可以实施学习过程，例如借助已知的机器学习方法，以便改善操作行为的识别。因此在这种情况下，不仅鼓励用户使用潜在操作行为类型或以改善的方式实施相应的操作行为，而且可以改进对实际检测到的操作行为的识别。

在一个设计方案中，检测选择-操作行为，并且根据检测到的选择-操作行为确定可操作的装置。根据所确定的可操作的装置确定可操作的功能。所述选择-操作行为尤其设计为指向手势。由此可以特别简单地并且有针对性地选择可操作功能。

用户例如可以通过操纵对象、尤其通过手指尤其借助确定的指向姿势指向交通工具中的装置，然后选择该装置来进行操作。装置的这种功能被识别为可操作的功能，该可操作的功能可以在当前情况下通过操作行为来操作。例如可以通过指向滑动门来选择该滑动门并且作为潜在操作行为类型可以确定移动或滑动手势，通过该手势可以控制作为可操作功能的门打开或门关闭。与之相似地，可以控制例如窗户、活门，照明装置和/或座椅调节装置。

按照本发明的操作系统包括控制单元和与控制单元耦连的输出单元。在此，所述控制单元设置用于，检测所述操作系统的可操作的功能，根据可操作的功能确定针对可操作的功能的至少一个潜在操作行为类型，并且检测关于可操作的功能的潜在操作行为类型的操作历史。在此，所述控制单元还设置用于控制所述输出单元，从而输出包括对实施潜在操作行为类型的提示的输出内容。

按照本发明的操作系统尤其设计为，实施前述的按照本发明的方法。该操作系统因此具有与按照本发明的用于运行该操作系统的方法相同的优点。

所述输出单元可以以不同的方式设计。所述输出单元可以包括例如显示面，在所述显示面上在输出时可输出显示图像。所述输出单元还可以包括用于输出可检测的声音输出内容，尤其语音输出内容的装置。输出单元还可以适合用于产生具有三维表示的输出内容，例如作为全息的或自动立体的输出内容。

按照本发明的操作系统包括身份识别装置，所述身份识别装置设置用于检测用户的用户识别物。在此，所述控制单元还设置用于，检测所识别到的用户的关于潜在操作行为类型的操作历史。由此，可以有利地特别适宜地根据相应用户的需要调整输出内容。

在另一个设计方案中，所述操作系统包括检测单元，所述检测单元尤其通过用于在检测区域中和在触摸敏感的表面上检测手势的摄像头和/或语音检测单元来检测操作行为。所述操作系统尤其包括用于多个操作模式的检测单元。由此可以有利地使用不同的操作模式，以便检测操作行为。

在扩展设计中，所述控制单元设置用于，根据检测到的操作行为实施用于识别潜在操作行为类型的学习过程。由此可以有利地改善针对确定的操作行为类型的操作行为的识别。学习过程尤其借助机械学习的已知方法实施。

按照本发明的交通工具包括按照本发明描述的操作系统。

在此参照附图根据实施例阐述本发明。

图1示出具有按照本发明的操作系统的实施例的交通工具，

图2示出按照本发明的方法的实施例，和

图3示出在按照本发明的方法中生成的输出内容的实施例。

参考图1阐述具有按照本发明的操作系统的实施例的交通工具。

交通工具1包括触摸屏2，该触摸屏2以已知方式设计并且包括显示单元3以及布置在其上的触摸敏感的表面4。交通工具1还包括检测单元5和设计为扬声器6的输出单元6，该检测单元设计为摄像头5并且通过该检测单元可在交通工具1的内部空间的检测区域7中测取手势。触摸屏2、摄像头5和扬声器6与控制单元8耦连，多媒体单元9也与所述控制单元耦连。

参考图2和3阐述按照本发明的方法的实施例和在此生成的输出内容。在此，从上面参照图1阐述的按照本发明的操作系统的实施例出发，其通过方法的描述进一步说明。

在步骤S1中检测，当前可操作哪些功能。为此确定哪些装置当前可被控制单元8控制并且处于可处理用户输入内容的状态。在该实施例中可以操作多媒体单元9的功能，例如用于输出视听内容、文本和图像的功能，用于控制导航设备的功能、用于访问交通工具1的其他装置的功能或用于控制电信装置例如电话的功能。在此，用户还可以浏览按层级分类的数据库，例如音乐标题或地址数据，或者菜单结构。在其他的实施例中备选或附加地，可以操作交通工具1的其他的功能和/或装置。

在该步骤S1中，在该实施例下还检测用户的身份。对于该实施例，这通过配属于用户的移动设备、尤其交通工具钥匙实现。对于另外的实施例，身份识别可以通过移动电话实现，移动电话的位置确定在交通工具1中的确定的交通工具座椅、例如驾驶员座椅的区域中并且该移动电话配属于确定的用户。识别还可以根据用户的输入进行，该用户例如通过借助触摸屏2的输入经由登入功能来登录。

与可操作功能有关地，在进一步的步骤S2中确定潜在的操作行为类型，即确定用户可以实施哪种类型的操作行为，以便进行确定的输入来操作可操作功能。在该实施例中首先确定不同的操作模式，例如在检测区域7中的三维的手势、在触摸敏感的表面4上的手势、语音命令和/或对物理操作元件的操作，该物理操作元件例如是按键开关、按压开关和旋转开关、滑移开关和旋转调节器或旋钮。

在进一步的步骤S3中，确定优选的操作行为类型，其中，在该实施例中将优选的操作模式下的确定的优选操作行为类型中的操作行为类型确定为优选的。也就是说，确定哪个操作行为类型在当前的情况下是特别适合的或特别适合于确定的可操作功能。

在该实施例中，为此确定其上坐有用户的交通工具座椅的位置。为此，首先例如借助座椅垫或探测装置可以确定，用户实际位于哪个交通工具座椅上，此外可以将确定的交通工具座椅分配给交通工具1的操作系统或确定的可操作的装置9。在该实施例中出发点是，将交通工具1的驾驶员看作用户并且驾驶员位于驾驶员座椅上。交通工具座椅的确定位置可以根据喜好分配于不同的操作模式。如果例如驾驶员座椅例如在自动驾驶期间处于已后移的远离交通工具1的仪表板上的操作元件的位置，则可以将不需要对布置在仪表板上的操作元件实施操作的操作模式确定为优选的；例如在这种情况下优选借助语音命令或三维手势进行控制。

备选或附加地，可以在另一个实施例中确定，用于确定的输入内容的哪些操作行为类型需要最小的体力或允许尽可能快的操作。例如列表滚动可能需要对物理表示或虚拟表示的按钮进行多次操作，而模拟操作借助滑动手势沿触摸敏感的表面4或在检测区域7中明显更快地并且更轻松地实施。在另一个实施例中，借助语音命令特别快地跳转到列表中的确定条目，而借助键盘输入条目需要多次操作。

在其他的实施例中，备选或附加地可以利用其他的参数来确定优选的操作行为类型或操作模式，例如手动或至少部分自动的行驶模式、正在行驶的道路类型、地理环境或交通工具1的识别到的用户或驾驶员的设置、输入和偏好。

在另外的步骤S4中，检测识别到的用户的操作历史。在该实施例中，操作历史包括一些信息，这些信息是关于用户过去通过操作行为针对确定的可操作功能采取了哪些操作行为类型。操作历史还包括有关已实施操作行为的方式的信息，例如能够多好地识别到根据确定的操作行为类型的操作行为的输入内容以及操作行为的改变将在多大程度上提高可识别性。也就是说，操作历史包括一些信息，这些信息有关用户过去是否使用过确定的操作行为类型的操作行为来进行确定的输入以及他如何实施操作行为。

例如，用户此前不准确地实施确定的操作行为类型的操作行为，例如方式是，他在太短的距离上和/或不足够直线地以过高的速度实施三维空间中的滑动手势，这在过去导致，以较低的置信度识别滑动手势，其中，例如仅以较低的精确度确定滑动手势的幅度或其方向。在进一步的示例中，用户此前不明确地、太安静地或太快地说出语音命令。在进一步的示例中，用户在操作触摸屏2上的虚拟操作元件时触摸操作元件的边缘上的区域，从而该输入不能与操作相邻的操作元件清楚地划分开。

在该实施例中，这样地检测操作历史，使得操作历史包括用户的预设数量的输入。在其他的实施例中，可以预设确定的时间段或在实施该方法的期间可以可变地确定过去考虑的操作行为的数量。

如果根据检测到的操作历史确定用户通常使用优选操作行为类型来操作并且可很好识别地实施相应的操作行为，则在进一步的步骤S5中检测操作行为、产生相应的控制信号并且控制交通工具1的装置。

相反，如果确定用户很少或从未使用优选的操作行为类型或者用户没有最佳地实施优选的操作行为类型的操作行为，则在步骤S6中生成并且输出具有针对实施潜在操作行为类型的提示的输出内容。

应该让用户清楚，他根本没有或不正确地实施例如潜在可能的手势，或者他可以用较少的体力实施该操作。现在个性化地在各个情况中生成输出内容，从而提示未被用户实施的、错误实施的或未最佳实施的操作行为类型，例如确定的手势。

在该示例中，当在操作人机界面的确定部位上未使用确定的手势时，在这些部位处向用户显示例如示意性的手，该手显示出尚未使用的手势类型的实施方式。如果确定的手势类型的手势实施错误或不是最佳的，则识别想要的手势并且还显示示意性的手，该手显示出运动中正确的或更经济的手势实施方式。

在其他示例中，正确的手势实施方式以不同的方式表示。因此，例如借助或自动立体显示器，在显示器前或其他检测区域中的三维手可以显示正确的手势运动。该方法的一个可能的扩展在于，除了视觉显示外，还用语音输出补充视觉建议。因此，可以通过语音输出内容输出对确定的操作情况下从未实施过的手势的提示；例如“您也可以在此实施滑动手势”。如果手势实施不正确或不是最佳的，则可以输出有关实施和改进的语音提示；例如“你必须在最后保持非常简短的手势”或“你不需要那么远地移动手臂”。由此可以有针对性地处理操作行为类型的实施问题并且可以模仿例如与自然对应物的交互。

此外，当检测到用户的身份时，根据钥匙或生物特征，个性化地处理各种不同的用户手势操作和使用。例如在进入交通工具时，系统已经根据操作历史识别出，用户在确定的操作情况下不实施确定的手势。也可以通过这种方式识别出用户过去遇到了正确地或用很少的体力实施确定的手势的情况。然后，可以为用户实现对最佳手势操作的个性化支持。

图3示出输出实施潜在操作行为类型的提示的实施例。在举例说明的情况下，优选的操作行为类型是三维空间中的滑动手势，通过该滑动手势可以在操作表面20的内部移动各种不同的图形对象22至25，尤其以便突出、选择然后进一步操作一个元素。这种滑动手势的提示在此设计为示意性以轮廓示出的手21的表示。在此动态地形成输出内容，即，示意表示的手21以应当在三维空间中实施滑动手势的方式移动地表示。但在该实施例的操作表面20中，也可以借助非优选的操作行为以不同的方式进行操作，例如通过按下箭头键、通过沿着触摸敏感的表面4的滑动手势、通过语音命令或通过按下物理操作元件，例如旋转按压调节器。

在该实施例中，还与用户可以如何改进他对优选操作行为类型的操作行为的实施有关地生成输出内容，也就是，特别清楚地显示存在改进需求的实施方式。例如，可以在实施手势期间特别清楚地表示手姿势，以及例如在特别长的距离上运动的速度或幅度。

在其他的实施例中，通过输出书面提示表示对实施潜在操作行为类型的提示内容。在其他的实施例中可以借助全息或自动立体显示器进行输出，尤其以便表示三维的手势。在其他的实施例中备选或附加地，输出内容是声学可感知的，例如通过对实施优选的操作行为类型的口头提示。尤其可以借助输出模式进行输出，该输出模式对优选的操作模式进行提示，例如通过输出针对借助语音命令的操作的声学可感知的提示或通过突出显示可操作的物理或虚拟表示的操作元件，例如通过亮度、颜色或动态效果，如闪烁。

在输出之后，在其他的实施例中，在步骤S5中，用户的操作行为被检测为输入内容并且生成相应的控制信号，以便操作交通工具1的装置9。操作也可以借助非优选的操作行为类型的操作行为进行。

根据检测到的操作行为更新操作历史。

在按照本发明的方法的其他实施例中，检测用户的操作行为，例如检测区域7中的手势或语音命令，但其中，操作行为没有配属于交通工具1的装置9的当前可用的操作。这可能是由于操作行为未被正确的识别并且被划入错误的操作行为类型或用户实施了不可用的操作行为类型的操作行为，例如因为他不知道哪些操作行为类型当前可用或如何实施这些操作行为类型。确定意图假设，即系统生成关于用户可能想要哪种操作行为类型的假设。然后，生成具有针对根据意图假设想要的操作行为类型的提示的输出内容。

例如可以将与检测到的操作行为具有最大相似性的操作行为类型确定为意图假设。在此还考虑，哪些潜在操作行为类型当前实际可用。此外，可以根据操作历史考虑用户优选使用的操作行为类型，或者可以确定，检测到的操作行为是否与过去检测到的操作行为具有特别的相似性，在这种过去检测到的操作行为中用户并非最佳地实施确定的操作行为类型。

例如可以将语音命令检测为操作行为，该操作行为随后又被确定为意图假设，该语音命令具有类似于潜在操作行为类型的语调或语义。在另外的示例中，可以将三维手势检测为具有当前没有预设方向的操作行为，例如垂直方向，而非水平方向，其中，然后将具有水平方向的操作行为类型确定为意图假设。

在其他的实施例中还根据操作历史和/或根据检测到的操作行为实施学习过程，其中，通过系统改进操作行为类型的识别。为此，可以使用例如机器学习的本身已知的方法。以这种方式，在该方法中既识别出用户的学习需求，使用户能够最佳地使用优选的操作行为类型，又识别出系统的学习需求，为此用户对确定的操作行为类型的识别得到改善。

在其他的实施例中，在检测区域7中检测用户的指向手势并且根据检测到的指向手势确定方向。确定用户指向交通工具1的哪个装置9，并且选择该装置9。紧接地检测到的操作行为被看作所选的装置9的操作，即根据操作行为生成用于所选的装置9的控制信号。例如，用户指向交通工具1的滑动门并且借助滑移或滑动手势沿一个方向自动打开或关闭滑动门。在另一个示例中，用户指向交通工具1的显示器，在该显示器上可输出图像数据或操作表面，其中，紧接的操作行为被视为输出的或操作表面的操作。以这种方式可用的操作行为类型的数量可以限制为与确定的装置9相关的操作可能性。

附图标记清单

1 交通工具

2 触摸屏

3 输出单元；显示单元

4 检测单元；触摸敏感的表面

5 检测单元；摄像头

6 输出单元；扬声器

7 检测区域

8 控制单元

9 装置；多媒体单元

20 操作表面

21 示意性表示的手

22至25 图像对象

S1至S6 步骤。

Claims (15)

1.一种运行操作系统的方法，其中，

检测所述操作系统的可操作的功能；

根据可操作的功能确定针对可操作的功能的至少一个潜在操作行为类型；

检测关于可操作的功能的潜在操作行为类型的操作历史；并且

根据操作历史生成并输出输出内容，其中，所述输出内容包括对实施潜在操作行为类型的提示。

2.根据权利要求1所述的方法，其特征在于，所述潜在操作行为类型包括在三维空间中的手势、在触摸敏感的表面上的手势、语音输入或者对按钮、滑移开关或旋转开关的操作。

3.根据权利要求1或2所述的方法，其特征在于，所述输出内容包括手(21)的示意性图形表示，其中，借助对手(21)的表示输出针对实施潜在操作行为类型的提示。

4.根据前述权利要求之一所述的方法，其特征在于，

确定针对可操作的功能的至少两种潜在操作行为类型；并且

将这些潜在操作行为类型中的一个确定为优选的操作行为类型。

5.根据前述权利要求之一所述的方法，其特征在于，关于潜在操作行为类型的操作历史包括有关潜在操作行为类型的使用频率和/或实施质量的信息。

6.根据前述权利要求之一所述的方法，其特征在于，

检测用户的用户识别物；并且

检测所识别到的用户的关于潜在操作行为类型的操作历史。

7.根据前述权利要求之一所述的方法，其特征在于，

还检测操作行为并且将该操作行为划归操作行为类型；并且

根据检测到的操作行为更新关于操作行为类型的操作历史。

8.根据前述权利要求之一所述的方法，其特征在于，

检测不能划归潜在操作行为类型的操作行为；

根据可操作的功能和检测到的操作行为确定意图假设；并且

根据所述意图假设生成具有提示的输出内容。

9.根据前述权利要求之一所述的方法，其特征在于，

在输出提示之后，检测潜在操作行为类型的操作行为；并且

根据检测到的操作行为实施用于识别潜在操作行为类型的学习过程。

10.根据前述权利要求之一所述的方法，其特征在于，

检测选择-操作行为；

根据检测到的选择-操作行为确定可操作的装置；并且

根据所确定的可操作的装置确定可操作的功能。

11.一种操作系统，包括

控制单元(8)；和

与控制单元(8)耦连的输出单元(3)；

其中，所述控制单元(8)设置用于，检测所述操作系统的可操作的功能；根据可操作的功能确定针对可操作的功能的至少一个潜在操作行为类型；并且检测关于可操作的功能的潜在操作行为类型的操作历史；

其中，所述控制单元(8)还设置用于控制所述输出单元(3)，从而输出包括对实施潜在操作行为类型的提示的输出内容。

12.根据权利要求11所述的操作系统，其特征在于，所述操作系统具有身份识别装置，所述身份识别装置设置用于检测用户的用户识别物；

其中，所述控制单元(8)还设置用于，检测所识别到的用户的关于潜在操作行为类型的操作历史。

13.根据权利要求11或12所述的操作系统，其特征在于，所述操作系统具有检测单元，所述检测单元尤其通过用于在检测区域(7)中和在触摸敏感的表面(4)上检测手势的摄像头(5)和/或语音检测单元来检测操作行为。

14.根据权利要求13所述的操作系统，其特征在于，所述控制单元(8)设置用于，根据检测到的操作行为实施用于识别潜在操作行为类型的学习过程。

15.一种交通工具(1)，具有根据权利要求11至14之一所述的操作系统。

Images