CN109715443A - 用于运行机动车的方法 - Google Patents

Abstract

本发明涉及一种用于运行机动车(1)的方法，所述机动车具有拍摄车辆前方区域的摄像机装置(2)以及相关的用于对图像进行分析处理的控制装置(3)，控制装置(3)对图像进行分析处理，以获取由显示在图像中的人员(4)实施的至少一个手部运动，在获取到描述表达停车愿望的姿势的手部运动时，要么控制自动行驶的机动车(1)在人员附近停车，要么向机动车(1)的驾驶员发出表明停车愿望的信号。

Description

用于运行机动车的方法

技术领域

本发明涉及一种用于运行机动车的方法，所述机动车具有拍摄车辆前方区域的摄像机装置，该摄像机装置具有相关的用于对图像进行分析处理的控制装置。

背景技术

独立承担越来越多任务的机动车的发展不断增加。已经公开了尽可能自动行驶的、即自动行驶或巡航行驶的机动车，其中驾驶员仅需为了在紧急情况下自己接管对车辆的控制而位于车辆中，或者机动车还在驾驶员不存在时完全自主地参与交通。这种尽可能或完全自动行驶的机动车能够例如被用作一种出租车或类似的用于运输人员的车辆。

在目前常见的出租车或类似的被设计为传统机动车且具有驾驶员的车辆中，通常的情况下，出租车为了实现出租状态而行驶。如果乘客位于路边且看到驶近的出租车，则他通常招手示意，即给出姿势，驾驶员看到该姿势然后停下出租车以便接载人员。也这种方式也可以呼叫位于例如红绿灯处的出租车。在自动行驶的机动车的情况下，该机动车如所述那样不载有驾驶员，则没有人来识别呼叫姿势。

但即使在传统的具有驾驶员的出租车中也时常存在如下问题：驾驶员没有看到位于路边招手示意的人员，因此没有了解到停车愿望且从而不能接载该人员。

US 2015/0279131 A1公开了，利用被人员移动的发送装置来呼叫无驾驶员的车辆。如果发送装置被携带发送装置的人员充分强烈地移动，则该发送装置引起向机动车发送相应的控制信号。该车辆然后自动驶向该人员。

US 2015/0339928 A1以及类似的DE 10 2015 219 463 A1公开了：在使用移动无线电设备、例如移动电话的情况下，例如通过上面设有的应用程序来呼叫自主行驶的机动车。

发明内容

因此本发明基于的问题是，给出一种相比之下得到改进的用于运动机动车的方法。

为解决该问题，在开头所述类型的方法中根据本发明提出，控制装置对图像进行分析处理，以获取到由显示在图像中的人员实施的至少一个手部运动，在获取到描述表达停车愿望的姿势的手部运动时，要么控制自动行驶的机动车在人员附近停车，要么向机动车的驾驶员发出表明停车愿望的信号。

根据本发明，通过摄像机装置来持续监测车辆的前方区域。控制装置对所获取到的图像持续地作如下分析：在这些图像中是否显示有人员。如果获取到这种人员，则分析该人员是否实施了手部运动，即是否摆出了能够被判断为是表达停车愿望的姿势。也就是通过控制装置进行如下图像分析：在车辆环境中是否存在通过招手示意或类似的特定姿势来表明想要被该机动车接载的人员。

根据机动车的设计方案，即该机动车是自动行驶的机动车、还是具有驾驶员的车辆，而不同地得出进一步的方法。如果是不具有驾驶员的自动行驶的车辆，则在获取到表达停车愿望的姿势后，控制该自动行驶的机动车自动驶向人员附近且停车，从而使人员能够上车。因此提出了一种全自动的运行方式来获取搭乘愿望且操控车辆驶向这种人员以便接载该人员。

如果机动车是具有驾驶员的传统机动车，则向驾驶员发出相应的表明停车愿望的信号，例如通过闪光或在显示区中的显示内容表达的光学信号，或例如语音输出形式的声学信号，或触觉信号，必要时也可以同时发出多种不同信号。据此，如果驾驶员了解到了他之前可能没看到的招手示意的人员，他就能够有意地停下车辆。

也就是说，通过根据本发明对搭乘愿望的获取以及对车辆的相应控制或信号的发出，确保了仅通过获取手部运动或者姿势，就获取到相应的搭乘愿望且能够相应控制车辆。

在任意情况下，都可以例如通过接通车灯或出租车标牌、在显示区上的消息或类似方式来向人员发出光学或声学的反馈：已经识别出了停车愿望。

手部运动可以例如通过控制装置来获取并将其例如与之前在姿势库或运动库中限定的姿势模型或比较模型相比较，所述姿势模型或比较模型也可以是机动车之前学习的。如果证实当前姿势与比较模型相符，则由此推断出搭乘愿望。如果证实姿势与姿势模型或比较模型不相符，则不将所获取到的手部运动分析为表达停车愿望的姿势，且不予理会。模型库可以例如按地域不同地设计，因而例如适配于欧洲或北美州的行为方式。

根据本发明的方法因此允许对发出停车信号的姿势进行获取。为了进一步证实停车愿望的正确性，根据本发明的一种有利的改进方案，控制装置还可以对图像进行分析处理以获取人员的视向，其中，如果该视向与所限定的视线相符，则控制机动车在人员附近停车。据此，因而不仅获取和分析了姿势，还获取和分析了视向。这基于如下假设：对机动车“招手示意”的人员也看向该机动车方向。摄像机或控制装置在此能够根据头部位置或眼睛位置来获取视向。如果视向指向机动车，则该视向例如与之前限定的视向相符，同时获取到的姿势因而就此被证实是“停车姿势”。但如果人员看向其他方向，则该手部运动明显不是必然表明停车愿望的运动，或该手部运动并不涉及机动车，而是可能涉及其他内容，从而基于否定的视向获取而对该手部运动不予理会。

在此还可以想到，通过控制装置来对所获取的手部运动进行分类，其中根据该分类来对手部运动加以考虑或不予理会。由此能够将手部运动归入类似于分类网格中，通过该分类网格能够进一步在该运动表明停车愿望的确定性方面对手部运动进行近似地评定。因此可以由此确定，所确定的停车愿望有多可靠或多不可靠。通过该分类还能够排除掉更可能是否定的姿势的手部运动且将其作为不导致停车的手部运动而不予理会。

想要机动车、例如出租车停车的人员时常还呼叫或吹口哨。因此可以例如通过机动车方面的麦克风来获取人员的可能的呼叫声或口哨声且在控制装置方面加以分析，且在控制行驶运行时对其加以考虑。在此情况下也就不仅分析基于摄像机的数据，还分析通过麦克风获取到的声学数据。为了对呼叫进行分析，根据车辆所处地区的相应的地区语言来配置控制装置。

如果一个人员对机动车、例如出租车招手示意，那么这可能表示仅该人员想要上车，即仅该人员想要使用车辆。但也可以想到，尽管仅一个人员对机动车招手示意，但多个人员想要上车。为了在只要可能的情况下就获得要上车的人员的数目，根据本发明的改进方案，可以通过控制装置来获取实施手部运动的手或人员的显示在图像中的第二只手的手指的数目，并且将其作为与要接载的乘客数目有关的信息来加以处理。例如可以想到，人员利用右手来实施表示搭乘姿势的手部运动，而另一只手则例如举起三个伸开的手指。控制装置于是可以获取手指数目并由此推断出总共有三个人员想要上车。

如果在此在获取到要接载的乘客的数目大于机动车中目前尚有的空置座位数目因而该机动车不适合满足搭乘愿望时，可以自动向另一巡航行驶的机动车发送叫车信号，该叫车信号包含用于该另一机动车自动驶来的位置坐标。机动车本身可以例如通过显示器向叫车的人员发出光学消息：该机动车不适合或不能够满足搭乘愿望。同时还告知了：已经向另一巡航行驶的机动车发送了自动的叫车信号，该另一机动车将在短时内抵达，必要时还显示出与多久抵达有关的信息。

人员或多个人员通常还携带行李。这时可以想到，控制装置获取归属于该人员的一个或多个行李，其中在可能时在获取到至少一个行李时自动打开机动车行李舱。在此也就还进行如下图像分析：在图像中是否显示有位于实施手部运动的人员附近的行李，例如大的手袋或箱子，如果是，那么有多少个行李。由此能够推断出，例如要接载两个额外的手袋或箱子。在到达所驶向的位置时，即机动车到达其靠近招手示意的人员附近的目标位置时，然后必要时根据行李的大小自动打开机动车的行李舱，从而人员能够装载行李。替代地，也可以向人员发出是否应打开行李舱的问询。可以对回答、例如通过姿势作出的回答进行获取且相应对此作出反应。

原则上可以想到，建立类似于机动车呼叫系统，想要参与其中的人员可以在此在线登记。人员也就为了该服务进行注册且获得例如由他所携带的物件，例如具有芯片的钥匙或能够在移动电话上运行的应用程序，该钥匙或应用程序用于该人员的身份验证。根据本发明，可以通过机动车的获取装置获取由人员携带的物件所发出的人员身份验证信号。该信号可以例如持续地发出或在操纵按扭或按键或类似物时发出。作为该人员身份验证信号发送对象的控制装置可以在此通过例如内部的数据比较确定：该人员是否已经注册，即是否对该服务的享有授权。如果是，那么可以停车，如果否，那么即使人员可能表达的是停车愿望，也不为该停车愿望提供服务。

在此可以在本发明的改进方案中将所获取到的人员身份验证信号也传输给外部的数据处理装置，以用于身份验证和/或用于结算目的和/或用于获取与人员有关的信息，该信息由数据处理装置传输给所述获取装置。据此也就可以在外部的数据处理装置方面进行身份验证或确认，从而类似于通过外部的数据处理装置确保了：仅注册过的人员能够使用该服务。额外地，还可以借此进行结算，例如通过存储在数据处理装置上的归属于该人员账户进行结算。如果机动车通过控制装置发出人员实际上已上车的相应信息，那么可以进行结算。例如如果该行驶是以一次付费价格进行的，那么可以结算一次付费费用。替代地，可以在结束行程时也向数据处理装置发出相应的行驶结束信号，从而于是对具体行程进行结算。

替代地或补充地，还可以由数据处理装置来问询与人员有关的信息，即例如人员的通常的行驶目的地、人员通常习惯的就坐位置或对于行驶运行必须的其他与人员有关的信息。

并不总是能够为所获取到的搭乘愿望马上提供服务，例如当机动车位于红绿灯处且必须等待绿灯通行时。这时可以想到，通过光学或声学的信号输出装置向人员表明：机动车是否停车，即停车愿望是否被识别到，和/或要多久才停车。人员由此一方面获得了他的搭乘愿望被获取到的信息，另一方面获得了必须等待多久机动车才大概抵达的信息。信号装置可以是车载的，例如可以为此接通前车灯或出租车标牌或在显示装置上发出消息。但也可以向人员所携带的物件、例如智能手机上发送信息且在该处发出信号。

除了所述方法本身外，本发明还涉及一种机动车，该机动车被设计用于巡航行驶，该机动车具有拍摄车辆前方区域的摄像机装置以及相关的用于对图像进行分析处理的控制装置，该机动车被设计用于实施所述方法。

所有根据本发明方法的实施方式都类似地适用于据此设计的机动车。

附图说明

本发明的其他优点和细节借助附图由下面所述实施例得出。附图中：

图1示出根据本发明的机动车和其他相关装置部件的原理图，和

图2示出典型的交通状况或叫车状况的原理图。

具体实施方式

图1示出了根据本发明的机动车以及相关状况的原理图以用于阐述根据本发明的方法。

所示出的有根据本发明的机动车1，其具有拍摄车辆前方区域的摄像机装置2以及相关的控制装置3，该控制装置用于处理摄像机装置2的图像数据。

所示出的还有人员4，该人员利用右手5通过将手多次从右向左挥动作出类似于招手示意的手部运动，这通过箭头A表示。通过该手部运动，向具有或不具有驾驶员的机动车1——在此例如是自动行驶的出租车——表明，该站在路边的人员想要搭乘。因此该招手示意是表达停车愿望的姿势。

利用左手6，人员4表达：仅一个人员想要搭乘。这通过竖起的一根手指7来表达。

摄像机装置2在此拍摄包括人员4在内的车辆前方区域的图像。控制装置3在此针对持续地输入的图像一方面分析是否存在人员，即在此情况下将人员4分析为这种人员。此外，控制装置3分析该人员是否实施了相应的运动模型或手部运动，该运动模型或手部运动描述的是表达停车愿望的可能的姿势。控制装置3获取到手5的挥动。被获取到的手部运动被分析且例如与之前存储在存储器中的比较姿势或比较运动相比较。比较姿势或比较运动可以例如是学习得到的，但也可以作为现存的数据集被存储。该数据集可以包括大量的在地区或国家常用来呼叫出租车或类似车辆的手部运动。也可以想到，按国家将手部运动分类，也就是在欧洲范围内存储描述欧洲的典型的手部运动的相应数据集，而对于美国存储于此相关的专用的比较数据集。

此外，控制装置3还能够从摄像机图像中获取人员4看向哪个方向。例如可以通过视向获取对所确定的停车愿望进行验证。因为通常如果人员4看到机动车且想要对机动车表达停车愿望的话，那么他会与机动车1有目光接触。但如果人员4看向完全不同方向，但仍实施手部运动，那么可以认为，该手部运动更可能是偶然的运动，或者是与其他人或类似内容有关的姿势。也就是说，如果在具体情况中能够实现视向获取，那么视向获取同样能够起到对姿势进行验证的作用。

如果控制装置3这时确定，所涉及的是可能通过视向获取验证过的表达停车愿望的手部运动，那么可以在该信息的支持下有目的地通过控制装置3来控制机动车1在该人员附近停车。

同时，控制装置3还获取第二只手6的竖起的那根手指7且从中得出仅该人员想要乘车，即没有其他人员想要上车。根据所获取到的人员数目，比较是否足够在车辆中安置所给出数目的人员，或人员数目是否超出空置座位。在前一种情况中，机动车1停靠在人员附近，在后一种情况中，可以例如自动通过相应的叫车信号呼叫其他具有相应接载能力的机动车。可以给人员发出对此进行告知的反馈。

此外，可以通过控制装置3从摄像机图像中还获取人员4是否携带需要装载的行李8。控制装置3还可以被设计用于获取行李大小。如果得出人员4例如仅携带小的能够直接放置在车辆中的手袋，那么对此进行记录，无需进行特殊处理。而如果得出行李8是较大的箱子，那么可以例如自动打开机动车的行李舱，从而人员4能够装载行李8。如果行李不能够装载在行李舱中，那么向人员示出：将行李装载在车辆的内部空间中。可能时打开的行李舱在行驶开始时被自动关闭。

如图1所示，人员4携带在此为手环形式的物件9，在该手环上设有发送装置或发射应答装置10。该控制装置3与一发送接收装置11通信，该发送接收装置能够获取通过所述发送装置或发射应答装置10发送的人员身份验证信号。该身份验证信号可以例如包含人员的姓名或者特别的行驶愿望或类似内容。当然，该人员身份验证信号也可以包括人员代码，从而不传输具体姓名。

在人员身份验证信号的支持下，控制装置3可以在此例如通过内部的存储器来获取与该人员有关的相应信息，所述存储器中存储了相应的比较数据。替代地，也可以使控制装置3通过发送接收装置11向外部的数据处理装置12传输人员身份验证信号，如通过双箭头B所示。在该处存储了与通过人员身份验证信号表明身份的人员有关的相应信息。这涉及的是双向通信，也就是说，从数据处理装置12也返回地向发送接收装置11传输相应的信息，这些信息然后在控制装置3方面被处理。通过该人员身份验证信号能够例如获取：人员4是否被授权使用该行驶服务。这种情况例如是：在此所涉及的是一个系统，人员必须在该系统登记作为参与者。只有当人员4被验证是已登记的参与者，才能够例如进行自动的驶来行驶。补充或替代于此，人员也可以通过车辆的摄像机系统得到验证。在明确人员4实际实现了该行驶或类似于此的情况下，数据处理装置12也可以根据所获取的身份信息自动地对所进行的行驶进行结算。

在获取到搭乘愿望、作出了对该搭乘愿望进行处理且机动车1接载人员4的决定之后，可以例如通过前侧的显示装置13向人员4表明：该停车愿望已被获取到且车辆正驶近。必要时还可以借此给出机动车1要多久到达人员处的信息。对于不能够为搭乘愿望提供服务的情况，也可以给出信息：机动车1将不会驶近。

一旦进行了全部的分析且明确了机动车将接载人员4，控制装置3就操控机动车的相应的驱动装置14，然后该驱动装置自动运行且驶向人员4以便接载该人员。

图2示出了一种典型的情况，其中，人员4位于十字路口后方，而机动车1则在十字路口前方位于红绿灯15处，该红绿灯例如指示红灯。人员4看到了原则上能够接载该人员的作为出租车的机动车1。为此机动车1当然可以具有相应的出租车标识或类似物。

人员4这时招手示意，这通过双箭头A示出，例如表达搭乘愿望的相应的手部运动，机动车1获取到该人员且作出接载该人员4的决定。

如果红绿灯5转换到绿灯，机动车1按照虚线所示的轨迹16运动且驶向人员4，该人员例如站在泊车位17处。该自动地、即自主地行驶的机动车1于是自动驶向泊车位17且停靠在人员4附近，从而该人员能够上车。

如果明确了该行程要去哪里，那么机动车1就载着该人员运动且实施运输。在到达目的地的情况下，可以由发送接收装置11向外部的数据处理装置12发出该行程成功结束的信号，然后在该数据处理装置方面能够进行结算。当然如果在机动车中设有相应的自动的支付设备，那么也可以在机动车1本身中进行支付。

在所示示例中，人员4携带具有发送装置10的手环。替代地，这在此也可以是带有芯片的钥匙或加载到人员4的移动电话上的应用程序。在后一种情况下，人员可以用手5招手示意，并且，在事前或事后通过移动电话的应用程序类似于在外部的数据处理装置12上或通过发送接收装置11在控制装置3上进行身份验证。也可以通过该应用程序早在上车之前便就可能的支付信息进行通信，或者一般地就行驶目的地或其他个性化方案、例如座椅位置、开通的业务和服务等进行通信。由此，如果必要时已经了解到了这种与之有关的信息，则人员不必在上车之后进行注册或输入目的地。此外，如果例如乘客期望某一特定的车辆类别，那么对潜在乘客的身份识别使得能够早在停车之前就结合姿势为潜在乘客提供对各种不同价位的服务类别的预先选择。如果机动车1是所期望的车辆类别，那么能够满足搭乘愿望。如果不是，那么通过发送接收装置11向另一位于附近的符合该类别的机动车发出相应的叫车信号。也可以将该情况通过显示装置13告知给人员4，必要时也可以通过相应的消息进行告知，该消息被发送到移动电话上或类似于此。在此可以想到任意的组合可能性。

上面的示例是以完全自主行驶的车辆为例。但如果涉及的是半自主行驶或完全自主但必须有驾驶员在场行驶的车辆，则可以类似地应用根据本发明的方法或系统。与上面所述示例不同的是，在此情况下在获取到搭乘愿望之后通过指向驾驶员的合适的显示装置进行显示且使驾驶员注意人员4。因为尤其是在较大的车流量时驾驶员会有可能忽略站在路边招手示意的人员。在告知驾驶员之后，如果驾驶员必须自己驾驶的话，那他于是可以使机动车1向人员4运动，或者机动车1在此情况下也尽可能自主地行驶，但是在利用额外的驾驶员信息的情况下行驶。

Claims (11)

1.一种用于运行机动车(1)的方法，所述机动车具有拍摄车辆前方区域的摄像机装置(2)以及相关的用于对图像进行分析处理的控制装置(3)，

其特征在于，

控制装置(3)对图像进行分析处理，以获取由显示在图像中的人员(4)实施的至少一个手部运动，在获取到描述表达停车愿望的姿势的手部运动时，要么控制自动行驶的机动车(1)在人员附近停车，要么向机动车(1)的驾驶员发出表明停车愿望的信号。

2.根据权利要求1所述的方法，其特征在于，控制装置(3)还对图像进行分析处理以获取人员(4)的视向，其中，如果该视向与所限定的视线相符，则控制机动车(1)在人员(4)附近停车。

3.根据权利要求1或2所述的方法，其特征在于，通过控制装置(3)来对所获取的手部运动进行分类，其中根据该分类对手部运动加以考虑或不予理会。

4.根据上述权利要求之一所述的方法，其特征在于，通过机动车方面的麦克风来获取人员(4)的呼叫声或口哨声并在控制装置(3)方面对其加以分析，在控制行驶运行时对所述呼叫声或口哨声加以考虑。

5.根据上述权利要求之一所述的方法，其特征在于，通过控制装置(3)来获取人员(4)的实施手部运动的手(5)的手指(7)数目或显示在图像中的第二只手(6)的手指(7)数目，并将其作为关于要接载的乘客数目的信息来加以处理。

6.根据权利要求5所述的方法，其特征在于，在获取到的要接载的乘客数目大于机动车中目前尚空置的座位数目时，自动向另一巡航行驶的机动车发送叫车信号，该叫车信号包含用于该另一机动车的自动驶来的位置坐标。

7.根据上述权利要求之一所述的方法，其特征在于，控制装置(6)获取归属于人员(4)的一个或多个行李(8)，其中在可能时在获取到至少一个行李(8)时自动打开机动车(1)的行李舱。

8.根据上述权利要求之一所述的方法，其特征在于，通过机动车方面的获取装置(11)获取由人员携带的物件所发出的人员身份验证信号。

9.根据权利要求8所述的方法，其特征在于，将所获取到的人员身份验证信号传输给外部的数据处理装置(12)，以进行身份验证和/或用于结算目的和/或用于获得与人员有关的信息，该与人员有关的信息由数据处理装置传输给所述获取装置。

10.根据上述权利要求之一所述的方法，其特征在于，通过光学或声学的信号输出装置(13)向人员(4)表明：机动车(1)是否停车和/或要多久才停车。

11.一种机动车(1)，该机动车被设计用于巡航行驶，该机动车具有拍摄车辆前方区域的摄像机装置(2)及相关的用于对图像进行分析处理的控制装置(3)，该机动车被设计用于实施根据上述权利要求之一所述的方法。