CN116215445A - 增强的生物特征授权 - Google Patents
增强的生物特征授权 Download PDFInfo
- Publication number
- CN116215445A CN116215445A CN202211445432.4A CN202211445432A CN116215445A CN 116215445 A CN116215445 A CN 116215445A CN 202211445432 A CN202211445432 A CN 202211445432A CN 116215445 A CN116215445 A CN 116215445A
- Authority
- CN
- China
- Prior art keywords
- user
- vehicle
- portable device
- data
- computer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
- B60R25/20—Means to switch the anti-theft system on or off
- B60R25/25—Means to switch the anti-theft system on or off using biometry
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
- H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
- B60R25/20—Means to switch the anti-theft system on or off
- B60R25/25—Means to switch the anti-theft system on or off using biometry
- B60R25/252—Fingerprint recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
- G07C9/00309—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
- G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
- G07C9/00571—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated by interacting with a central unit
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
- G07C9/00896—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys specially adapted for particular uses
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/38—Individual registration on entry or exit not involving the use of a pass with central registration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
- H04L63/107—Network architectures or network communication protocols for network security for controlling access to devices or network resources wherein the security policies are location-dependent, e.g. entities privileges depend on current location or allowing specific operations only from locally connected terminals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
- H04L9/3226—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
- H04L9/3231—Biological data, e.g. fingerprint, voice or retina
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/60—Context-dependent security
- H04W12/63—Location-dependent; Proximity-dependent
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2209/00—Additional information or applications relating to cryptographic mechanisms or cryptographic arrangements for secret or secure communication H04L9/00
- H04L2209/84—Vehicles
Landscapes
- Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Mechanical Engineering (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biodiversity & Conservation Biology (AREA)
- Lock And Its Accessories (AREA)
- Collating Specific Patterns (AREA)
Abstract
本公开提供了“增强的生物特征授权”。在检测到经授权的便携式装置时,基于然后从所述经授权的便携式装置接收到认证消息而针对结构认证所述便携式装置的用户。确定所述用户相对于所述结构的位置。向所述经授权的便携式装置提供指令以使所述用户基于所述位置提供生物特征数据。在获得所述用户的所述生物特征数据时为所述用户生成用户数据。基于所述用户数据来控制结构部件。
Description
技术领域
本公开涉及车辆中的生物特征授权。
背景技术
执行生物特征授权的计算机可以接收传感器数据以确定寻求由所述计算机授予的访问授权的人员的身份。生物特征授权可以包括例如面部识别,即,使用人脸图像来识别人员的一种生物特征授权。生物特征授权可以依赖于获取准确的生物特征数据。
发明内容
计算机可以使用生物特征授权来控制对装置、对象和/或应用程序(例如,对车辆、建筑物、计算机、手机、其他装置等)的访问。例如,可以实施生物特征授权以允许经授权的人员访问,例如访问车辆或建筑物,并拒绝未经授权的人员访问。生物特征授权可能要求用户提供一种或多种类型的生物特征数据和/或以特定方式(例如,以指定序列)向指定传感器提供生物特征数据等,以生成可以用于确定授权的用户数据。生物特征数据是表示生理特性的测量结果的数据。一种类型的生物特征数据是表示特定生理特性的数据,例如,指纹中的纹线之间的距离、面部特征之间的距离等。生物特征授权可以通过将由用户提供的生物特征数据与随后经由车辆、建筑物、计算装置等中的传感器获得的生物特征数据进行比较来授权用户。
可以将执行生物特征授权的结果下载到授予或拒绝对访问结构(例如,车辆、建筑物、房间、门禁区域等)的授权和权限的装置。成功授权可以用于安全应用,诸如通过解锁门来访问某个位置,例如,车辆的乘客舱、房间、建筑物等。在其他示例中,成功授权可以用于启用车辆或建筑物控件,或者进一步替代地或另外诸如通过启用如键盘或鼠标的输入装置或授予对计算机文件的访问权来访问诸如计算机的装置。
针对车辆授权用户在本文中将被描述为生物特征授权的非限制性示例。也就是说,车辆将在本文中被描述为结构的非限制性示例。应理解,其他类型的结构(例如,建筑物、车库、门禁区域等)可以利用本文所述的技术进行生物特征授权。
车辆可以被配备有计算装置、网络、传感器和控制器以获取和/或处理关于环境的数据并基于所述数据允许访问车辆。例如,车辆中的相机可以被编程为获取靠近用户的图像,并且在基于例如经由面部识别软件进行生物特征授权确定用户的身份时,解锁车门以允许用户进入车辆的乘客舱。类似地,包括在车辆的乘客舱中的相机可以获取用户的一个或多个图像,并且在基于例如经由面部识别软件进行生物特征授权确定用户的身份时,从用户接受操作车辆的命令。
然而,由于包装约束,车辆周围和/或乘客舱中的多个位置可能没有可以向用户提供用于提供所请求的生物特征数据的指令的输出装置。有利地,车辆计算机可以确定用户相对于车辆的位置,然后可以向经授权的便携式装置提供用于提供所请求的生物特征数据的指令。向经授权的便携式装置提供指令允许用户接收指令,而不管用户的位置处是否存在输出装置,这可以通过降低用户提供不期望的生物特征数据的可能性来减少获得用户的生物特征数据并执行生物特征授权所需的时间量和计算资源量。
一种系统包括计算机,所述计算机包括处理器和存储器,所述存储器存储指令,所述指令可由所述处理器执行以在检测到经授权的便携式装置时基于然后从所述经授权的便携式装置接收到认证消息而针对结构认证所述便携式装置的用户。所述指令还包括用于确定所述用户相对于所述结构的位置的指令。所述指令还包括用于向所述经授权的便携式装置提供指令以使所述用户基于所述位置提供生物特征数据的指令。所述指令还包括用于在获得所述用户的所述生物特征数据时为所述用户生成用户数据的指令。所述指令还包括用于基于所述用户数据来控制结构部件的指令。
所述指令还可以包括用于基于用户输入确定所述位置的指令。
所述指令还可以包括用于基于所述经授权的便携式装置的位置来确定所述位置的指令。
所述指令还可以包括用于基于来自所述结构上的传感器的数据来确定所述位置的指令。
所述指令还可以包括用于从所述结构上被定位成面向所述位置的传感器获得所述生物特征数据的指令。
所述结构可以是车辆。所述指令还可以包括用于操作所述车辆以满足由所述用户数据指定的操作参数的指令。
所述系统可以包括所述经授权的便携式装置。所述经授权的便携式装置可以包括第二处理器和第二存储器,所述第二存储器存储可由所述第二处理器执行的指令,使得所述经授权的便携式装置被编程为基于用户输入生成所述认证消息。
所述系统可以包括所述经授权的便携式装置。所述经授权的便携式装置可以包括第二处理器和第二存储器,所述第二存储器存储可由所述第二处理器执行的指令,使得所述经授权的便携式装置被编程为在接收到所述指令时致动显示器或扬声器中的一者以向所述用户输出用于提供所述生物特征数据的所述指令。
所述指令还可以包括用于在生成所述用户数据时向所述经授权的便携式装置提供验证消息以验证所述用户数据的指令。
所述系统可以包括所述经授权的便携式装置。所述经授权的便携式装置可以包括第二处理器和第二存储器,所述第二存储器存储可由所述第二处理器执行的指令,使得所述经授权的便携式装置被编程为在接收到验证所述用户数据的用户输入时,向所述计算机提供确认消息。
一种方法包括在检测到经授权的便携式装置时,基于然后从所述经授权的便携式装置接收到认证消息而在计算机处针对结构认证所述便携式装置的用户。所述方法还包括确定所述用户相对于所述结构的位置。所述方法还包括向所述经授权的便携式装置提供指令以使所述用户基于所述位置提供生物特征数据。所述方法还包括在所述计算机处获得所述用户的所述生物特征数据时为所述用户生成用户数据。所述方法还包括基于所述用户数据来控制结构部件。
所述方法还可以包括基于用户输入确定所述位置。
所述方法还可以包括基于所述经授权的便携式装置的位置来确定所述位置。
所述方法还可以包括基于来自所述结构上的传感器的数据来确定所述位置。
所述方法还可以包括从所述结构上被定位成面向所述位置的传感器获得所述生物特征数据。
所述结构可以是车辆。所述方法还可以包括操作所述车辆以满足由所述用户数据指定的操作参数。
所述方法还可以包括基于用户输入在所述经授权的便携式装置处生成所述认证消息。
所述方法还可以包括在接收到所述指令时,在所述经授权的便携式装置处致动显示器或扬声器中的一者以向所述用户输出用于提供所述生物特征数据的所述指令。
所述方法还可以包括在生成所述用户数据时向所述经授权的便携式装置提供验证消息以验证所述用户数据。
所述方法还可以包括在接收到验证所述请求的用户输入时,在所述经授权的便携式装置处向所述计算机提供确认消息。
本文还公开了一种计算装置,所述计算装置被编程为执行上述方法步骤中的任一者。本文还公开了一种计算机程序产品,所述计算机程序产品包括计算机可读介质,所述计算机可读介质存储可由计算机处理器执行以执行上述方法步骤中的任一者的指令。
附图说明
图1是示出用于车辆的示例性控制系统的框图。
图2是示出车辆的示例性乘客舱的图式。
图3A是示出示例性请求消息的框图。
图3B是示出示例性认证消息的框图。
图3C是示出示例性授权消息的框图。
图3D是示出示例性响应消息的框图。
图3E是示出示例性验证消息的框图。
图3F是示出示例性确认消息的框图。
图4A至图4C是示出提供指令以使用户提供生物特征数据的示例性经授权的便携式装置的图式。
图5是用于对车辆计算机中的用户进行生物特征授权的示例性过程的流程图。
图6是用于在便携式装置中提供指令的示例性过程的流程图。
具体实施方式
参考图1至图3F,示例性控制系统100包括车辆105。车辆105中的车辆计算机110从传感器115接收数据。车辆计算机110被编程为在检测到经授权的便携式装置145时,基于然后从经授权的便携式装置145接收到认证消息305来针对车辆105认证经授权的便携式装置145的用户。车辆计算机110还被编程为确定用户相对于车辆105的位置。车辆计算机110还被编程为向经授权的便携式装置145提供指令以使用户基于所述位置提供生物特征数据。车辆计算机110还被编程为在获得用户的生物特征数据时为用户生成用户数据。车辆计算机110还被编程为基于用户数据来控制车辆部件125。
现在转到图1,车辆105包括车辆计算机110、传感器115、用于致动各种车辆部件125的致动器120以及车辆105的通信模块130。通信模块130允许车辆计算机110例如经由消息传递或广播协议(诸如专用短程通信(DSRC)、蜂窝和/或可以支持车辆对车辆、车辆对基础设施、车辆对云通信等的其他协议)和/或经由分组网络135与远程服务器计算机140和/或其他车辆进行通信。
车辆计算机110包括诸如已知的处理器和存储器。存储器包括一种或多种形式的计算机可读介质,并且存储指令,所述指令可由车辆计算机110执行以用于执行包括如本文所公开的各种操作。车辆计算机110还可以包括协同操作以实施车辆105操作(包括如本文所述的操作)的两个或更多个计算装置。此外,车辆计算机110可为具有如上所述的处理器和存储器的通用计算机,并且/或者可以包括专用电子电路,所述专用电子电路包括针对特定操作而制造的ASIC,例如,用于处理传感器115数据和/或传送传感器115数据的ASIC。在另一个示例中,车辆计算机110可以包括FPGA(现场可编程门阵列),所述FPGA是被制造为可由用户配置的集成电路。通常,在电子设计自动化中使用诸如VHDL(超高速集成电路硬件描述语言)的硬件描述语言来描述诸如FPGA和ASIC的数字和混合信号系统。例如,ASIC是基于制造前提供的VHDL编程而制造的,而FPGA内部的逻辑部件可以基于例如存储在电连接到FPGA电路的存储器中的VHDL编程来配置。在一些示例中,一个或多个处理器、一个或多个ASIC和/或FPGA电路的组合可以包括在车辆计算机110中。
车辆计算机110可以自主模式、半自主模式或非自主(或手动)模式操作和/或监测车辆105,即可控制和/或监测车辆105的操作,包括控制和/或监测部件125。出于本公开的目的,自主模式被定义为其中车辆105的推进、制动和转向中的每一者都由车辆计算机110控制的模式;在半自主模式中,车辆计算机110控制车辆105的推进、制动和转向中的一者或两者;在非自主模式中,人类操作员控制车辆105的推进、制动和转向中的每一者。
车辆计算机110可以包括编程以操作车辆105的制动、推进(例如,通过控制内燃发动机、电动马达、混合动力发动机等中的一者或多者来控制车辆105的加速)、转向、变速器、气候控制、内部灯和/或外部灯、喇叭、车门等中的一者或多者,并且确定车辆计算机110(而非人类操作员)是否以及何时控制此类操作。
车辆计算机110可以包括一个以上处理器或例如经由如下面进一步描述的车辆通信网络(诸如,通信总线)通信地耦合到所述一个以上处理器,所述一个以上处理器例如包括在车辆105中所包括的用于监测和/或控制各种车辆部件125的电子控制器单元(ECU)等中,例如变速器控制器、制动控制器、转向控制器等。车辆计算机110通常被布置用于在车辆通信网络上进行通信,所述车辆通信网络可以包括车辆105中的总线,诸如控制器局域网(CAN)等,和/或其他有线和/或无线机制。
经由车辆105网络,车辆计算机110可以向车辆105中的各种装置(例如,传感器115、致动器120、ECU等)传输消息和/或从各种装置接收消息(例如,CAN消息)。替代地或另外,在车辆计算机110实际上包括多个装置的情况下,车辆通信网络可以用于在本公开中表示为车辆计算机110的装置之间的通信。此外,如下文提及,各种控制器和/或传感器115可以经由车辆通信网络向车辆计算机110提供数据。
车辆105的传感器115可以包括诸如已知的用于向车辆计算机110提供数据的多种装置。例如,传感器115可以包括设置在车辆105的顶部上、在车辆105的前挡风玻璃后面、在车辆105周围等的一个或多个光探测和测距(激光雷达)传感器115等,所述传感器提供车辆105周围的对象的相对位置、大小和形状。作为另一个示例,固定到车辆105保险杠的一个或多个雷达传感器115可提供数据来提供对象、第二车辆等相对于车辆105的位置的位置。替代地或另外,传感器115还可以例如包括一个或多个相机传感器115(例如,前视、侧视等),所述相机传感器提供来自车辆105周围的区域的图像。作为另一个示例,车辆105可以包括安装在车辆105的车厢内部并且被定向成捕获车辆105的车厢中的用户的图像的一个或多个传感器115,例如相机传感器115。在本公开的背景下,对象是具有质量并且可以通过可以由传感器115检测到的物理现象(例如,光或其他电磁波或声音等)来表示的物理(即,物质)物品。因此,车辆105以及包括如下文所讨论的其他物品都落在本文的“对象”的定义内。
车辆计算机110被编程为例如基本上连续地、周期性地和/或在远程服务器计算机140指示时等从一个或多个传感器115接收数据。数据可以例如包括车辆105的位置。位置数据指定地面上的一个或多个点并且可以呈已知形式,例如经由如所已知的使用全球定位系统(GPS)和/或航迹推算的导航系统获得的地理坐标,诸如纬度和经度坐标。另外或替代地,数据可以包括对象(例如,车辆105、标志、树木等)相对于车辆105的位置。作为一个示例,数据可为车辆105周围的环境的图像数据。在这种示例中,图像数据可以包括道路上或沿着所述道路的一个或多个对象和/或标志,例如车道标志。作为另一个示例,数据可以是车辆105的车厢(例如,包括车辆105的车厢中的用户和座椅)的图像数据。本文的图像数据意指可以由相机传感器115获取的数字图像数据,即,包括通常具有强度值和颜色值的像素。传感器115可以安装到车辆105之中或之上的任何合适的位置,例如,安装在车辆105保险杠上、在车辆105车顶上等,以收集车辆105周围的环境的图像。
车辆105的致动器120经由电路、芯片或可以根据如已知的适当控制信号来致动各种车辆105子系统的其他电子和/或机械部件来实现。致动器120可以用于控制部件125,包括车辆105的制动、加速和转向。
在本公开的背景中,车辆部件125是适于执行机械或机电功能或操作(诸如使车辆105移动、使车辆105减速或停止、使车辆105转向等)的一个或多个硬件部件。部件125的非限制性示例包括推进部件(其包括例如内燃发动机和/或电动马达等)、变速器部件、转向部件(例如,其可以包括方向盘、转向齿条等中的一者或多者)、悬架部件(例如,其可以包括阻尼器例如减振器或滑柱、套管、弹簧、控制臂、球头节、连杆等中的一者或多者)、制动部件、泊车辅助部件、自适应巡航控制部件、自适应转向部件、一个或多个被动约束系统(例如,安全气囊)、可移动座椅等。
车辆105还包括人机界面(HMI)118。HMI 118包括用户输入装置,诸如旋钮、按钮、开关、踏板、操纵杆、触摸屏和/或传声器等。输入装置可以包括传感器115以检测用户输入并且将用户输入数据提供给车辆计算机110。也就是说,车辆计算机110可被编程为从HMI118接收用户输入。用户可以例如通过选择触摸屏显示器上的虚拟按钮、通过提供语音命令等经由HMI 118来提供用户输入。例如,包括在HMI 118中的触摸屏显示器可以包括传感器115以检测用户选择触摸屏显示器上的虚拟按钮以例如选择或取消选择操作,所述输入可以被接收在车辆计算机110中并用于确定对用户输入的选择。
HMI 118通常还包括向用户输出信号或数据的输出装置,诸如显示器(包括触摸屏显示器)、扬声器和/或灯等。HMI 118耦合到车辆通信网络并且可向/从车辆计算机110和其他车辆子系统发送和/或接收消息。
此外,车辆计算机110可以被配置用于经由车辆-对-车辆通信模块或接口与车辆105外部的装置通信,例如,通过车辆-对-车辆(V2V)或车辆对基础设施(V2X)无线通信(蜂窝和/或DSRC等)与另一个车辆和/或远程服务器计算机140(通常经由直接射频通信)通信。通信模块可以包括车辆的计算机可利用来进行通信的一种或多种机制,诸如收发器,包括无线(例如,蜂窝、无线、卫星、微波和射频)通信机制的任何期望的组合以及任何期望的网络拓扑(或当利用多种通信机制时的多种拓扑)。经由通信模块提供的示例性通信包括提供数据通信服务的蜂窝、蓝牙、IEEE 802.11、超宽带(UWB)、近场通信(NFC)、专用短程通信(DSRC)和/或包括互联网的广域网(WAN)。
网络135表示车辆计算机110可以利用来与远程计算装置(例如,远程服务器计算机140、另一个车辆计算机等)通信的一种或多种机制。因此,网络135可以是各种有线或无线通信机制中的一者或多者,包括有线(例如,电缆和光纤)和/或无线(例如,蜂窝、无线、卫星、微波和射频)通信机制的任何期望的组合以及任何期望的网络拓扑(或当利用多种通信机制时的多种拓扑)。示例性通信网络135包括提供数据通信服务的无线通信网络(例如,使用低功耗(BLE)、UWB、NFC、IEEE 802.11、车辆对车辆(V2V)诸如专用短程通信(DSRC)等)、局域网(LAN)和/或广域网(WAN),包括互联网。
远程服务器计算机140可以是被编程为提供诸如本文公开的操作的常规计算装置,即包括一个或多个处理器和一个或多个存储器。此外,可以经由网络135(例如,互联网、蜂窝网络和/或某个其他广域网)来访问远程服务器计算机140。
便携式装置145可以是被编程为提供诸如本文公开的操作的常规计算装置,即,包括一个或多个处理器和一个或多个存储器。便携式装置145可以是可以在由人携带时使用的各种计算机中的任何一种,例如智能手机、平板电脑、个人数字助理、智能手表、钥匙扣等。此外,便携式装置145可以经由网络135(例如,互联网、蜂窝网络和/或某种其他广域网)来访问。
便携式装置145包括向用户输出信号或数据的一个或多个输出装置147,诸如显示器(包括触摸屏显示器)、扬声器和/或灯等。例如,便携式装置145可以包括具有输出装置147的HMI 150。便携式装置145的HMI 150具有与车辆计算机110的HMI 118共同的特征,例如输入装置和输出装置,并且因此将不进一步描述以避免冗余。
图2是示例性车辆105的示例性乘客舱200的俯视图的图式。车辆105可以包括车身(未编号),所述车身限定用于容纳车辆的乘员(如果有)的乘客舱200。车身包括可以打开以例如允许进入和离开乘客舱200的车门和车窗。
乘客舱200可以延伸跨越车辆105,即,从车辆105的一个侧面延伸到另一个侧面。乘客舱200包括前端(未编号)和后端(未编号),其中在车辆105向前移动期间,前端在后端的前面。乘客舱200包括一个或多个座椅(未编号)。座椅可以以任何合适的布置进行布置。例如,乘客舱200可以包括设置在乘客舱200前方的一个或多个前排座椅和设置在前排座椅后面的一个或多个后排座椅。乘客舱200还可以包括在乘客舱200后部的第三排座椅。在图2中,前排座椅和后排座椅被示为斗式座椅,并且第三排座椅被示为长条座椅,但是座椅可以是其他类型。
车辆105可以包括任何合适数量(例如,一个或多个)的传感器115。例如,如图2所示,车辆105可以包括被定位成监测车辆105周围的环境的多个外部传感器115a以及被定位成监测车辆105的乘客舱200的多个内部传感器115b。
车辆计算机110被编程为检测车辆105的预定距离内的便携式装置145。例如,车辆计算机110可以被编程为例如经由短程广播协议传输射频(RF)信号,例如,BLE、超宽带(UWB)等。然后,车辆计算机110可以基于检测到相应传输的RF信号或从便携式装置145传输的响应RF信号的返回来检测便携式装置145,例如,连续地或响应于检测到由车辆计算机110传输的RF信号来检测便携式装置。此外,车辆计算机110可以基于检测到的RF信号来确定检测到的便携式装置145与车辆计算机110之间的距离。例如,车辆计算机110可以通过使用飞行时间测量结果来确定距离。例如,车辆计算机110可以基于RF信号的传输与检测到传输的RF信号的返回之间的时间量来计算距离。用于确定距离的技术的其他非限制性示例包括RSSI(接收器信号强度指示)、AoA(到达角)、RF消息的相位等。
在检测到便携式装置145时,车辆计算机110可以将便携式装置145与车辆计算机110之间的距离与预定距离进行比较。预定距离指定距车辆105的最大距离,在所述最大距离内,车辆计算机110可以识别用户。预定距离可以例如基于允许确定距车辆105的距离的测试以经验确定,所述距离指示检测到的用户可能寻求访问车辆105。预定距离可以存储在例如车辆计算机110的存储器中。
如果距离大于预定距离,则车辆计算机110可以忽略检测到的便携式装置145。如果距离小于或等于预定阈值,则车辆计算机110可以授权便携式装置145,例如阻止未经授权的用户访问和/或操作车辆105。授权便携式装置145意指车辆计算机110确定便携式装置145具有与车辆计算机110通信的权限;在确定便携式装置145没有与车辆计算机110通信的权限时发生授权失败。车辆计算机110可以被编程为基于从便携式装置145接收的密钥(例如,数字和/或字符的组合)来授权便携式装置145。例如,车辆计算机110可以基于确定接收到的密钥与存储在车辆计算机110的存储器中的预期密钥(例如,为诸如车辆105的经销商(例如,交易商)的各方所已知)匹配来授权便携式装置145。作为另一个示例,经授权的便携式装置145可以具有RFID标签等,所述RFID标签等从经常使用车辆105的其他潜在用户中唯一地指定用户。RFID信号可以与存储器中的用户相关联,即,用户的用户数据包括RFID信号。作为另一个示例,经授权的便携式装置145可以与例如HMI 118配对。经授权的便携式装置145可以与存储器中的用户相关联,即,用户的用户数据包括便携式装置145的识别符。
在授权便携式装置145时,车辆计算机可以生成请求消息300。请求消息包括标头301和有效载荷302(参见图3A)。请求消息300的标头301可以包括消息类型、消息大小等。有效载荷302可以包括各种数据,即,消息内容。有效载荷302可以包括子有效载荷或有效载荷片段303-1、303-2、303-3(统称为有效载荷片段303)。图3A中的相应的有效载荷片段303被示出为具有不同的长度,以反映不同的有效载荷片段303可以包括各种数据量,并且因此可以具有不同的大小(即,长度)。请求消息300的有效载荷302例如在指定的有效载荷段303中包括对认证用户的请求。
在生成请求消息300时,车辆计算机110可以向经授权的便携式装置145提供请求消息300。例如,车辆计算机110可以例如经由网络135向经授权的便携式装置145传输请求消息300。如下文所讨论,经授权的便携式装置145可以响应于请求消息300而提供认证消息305。
车辆计算机110可以基于认证消息305来认证用户。认证用户意指验证或证明用户的身份;在确定无法验证或证明用户的身份时发生认证失败。车辆计算机110可以监测网络以检测认证消息305。在接收到认证消息305时,车辆计算机110可以访问认证消息305的有效载荷307(例如,指定的有效载荷段308)并检索关于用户的识别信息,例如,用户名和密码。车辆计算机110可以将检索到的识别信息与存储在例如车辆计算机110的存储器中的识别信息进行比较。如果检索到的识别信息与存储的识别信息匹配,则车辆计算机110确定认证用户。在这种背景下,“匹配”意指检索到的识别信息将同一用户识别为存储的识别信息。如果检索到的识别信息与存储的识别信息不匹配,则车辆计算机110确定不认证用户。在这种情况下,车辆计算机110可以控制车辆部件125以阻止车辆105的操作。另外,车辆计算机110可以控制车辆部件125,例如,禁用HMI 118上的虚拟按钮,以阻止用户访问和/或更新存储在车辆计算机110的存储器中的用户数据。
在认证用户时,车辆计算机110可以查询存储器以选择经认证的用户的用户数据。车辆计算机110可以基于经认证的用户的用户数据来控制车辆105的操作。车辆计算机110可以将多个潜在用户中的每一者的用户数据存储在例如存储器中。用户数据可以跟踪经授权的用户,即,具有访问车辆105的权限的用户,并且用户数据可以随着用户的生物特征数据的变化(例如,由于体重增加或减少、年龄、毛发生长或脱落等)而随时间更新。用户数据包括相应用户的生物特征数据和相应用户的用户授权。如本文所使用的用户授权指定用户具有访问权限的一个或多个车辆105的特征和/或用户具有控制权限的一个或多个操作参数。
在本文档的背景中,“车辆特征”是车辆部件125的设置,所述设置可以通过用户输入,例如经由HMI 118来选择。车辆105的特征的非限制性示例包括座椅配置、镜子位置、加热和/或冷却座椅、例如乘客舱200的多个区或区域中的气候控制、加热方向盘、对后视镜进行自动调光、加热侧视镜、多色照明、控制收音机、控制天窗等。
在本文档的背景中,“操作参数”是在车辆操作期间车辆105或该车辆105周围的环境的物理特性的测量结果的实际值。可以确定在车辆105的操作期间的各种操作参数。操作参数的非限制性列表包括车辆105的速度、车辆之间的跟随距离、停止位置、车辆105的加速速率、车辆105的目的地、车辆105的路线等。
在其中结构是建筑物的示例中,用户授权可以指定允许或阻止用户进入的建筑物或其中的房间。另外或替代地,用户授权可以指定允许或阻止用户控制的建筑物的一个或多个控件,例如,灯控件、加热控件、冷却控件、扬声器控件等。
当没有用户数据与经认证的用户相关联时,车辆计算机110可以被编程为基于认证消息305来发起经认证的用户的生物特征登记。例如,车辆计算机110可以访问认证消息305的有效载荷307(例如,指定的有效载荷段308),并且检索指定发起生物特征登记或生物特征授权的数据(如下文所讨论)。也就是说,除了认证用户之外,车辆计算机110还可以响应于接收到认证消息305而发起生物特征登记(和/或生物特征授权)。本文档中的生物特征登记意指基于获得给定用户的初始(即,基线)生物特征数据来生成用户数据。也就是说,在生成用户的用户数据之前获得的生物特征数据可以被称为登记生物特征数据。
当用户数据与经认证的用户相关联时,车辆计算机110被编程为基于质询生物特征数据来对用户进行生物特征授权,如下文所讨论。也就是说,在生成用户的用户数据之后获得的生物特征数据可以被称为质询生物特征数据。
为了获得生物特征数据,车辆计算机110被编程为确定用户相对于车辆105的位置。例如,用户可以位于乘客舱200的外部或内部。另外或替代地,用户可以位于车辆105的车门附近,例如,在驾驶员座椅中,在后排座椅中,站在乘客舱200外部(参见图2)并且与车辆105的柱相邻。
车辆计算机110可以从经授权的便携式装置145接收用户的位置。例如,经授权的便携式装置145可以在认证消息305中包括用户的位置。在这样的示例中,车辆计算机110可以访问认证消息305的有效载荷307(例如,指定的有效载荷段308)并检索用户的位置。
作为另一个示例,经授权的便携式装置145可以提供指定用户的位置的第一用户输入。在这样的示例中,经授权的便携式装置145可以致动HMI 150以显示与乘客舱200内的相应位置(例如,驾驶员座椅、乘客座椅、后排座椅等)相对应的虚拟按钮,用户可以选择所述虚拟按钮来指定所述位置。换句话说,HMI 150可以激活可以检测到用户选择虚拟按钮来指定用户的位置的传感器。在检测到用户输入时,经授权的便携式装置145可以例如通过经由网络135传输第一用户输入来将第一用户输入提供给车辆计算机110,并且车辆计算机110可以基于第一用户输入来确定用户的位置。
另外或替代地,车辆计算机110可以经由传感器115的数据来检测用户。例如,车辆计算机110可以基于在一个或多个传感器115(例如,内部传感器115b和/或外部传感器115a)的视野中检测到用户来确定用户的位置。例如,车辆计算机110可以基于来自外部传感器115a的数据来确定用户在乘客舱200外部并与驾驶员的车门相邻,如图2所示。传感器115的视野可以存储在例如车辆计算机110的存储器中。作为另一个示例,车辆计算机110可以基于经由车门传感器115检测到车辆105的车门被打开来确定用户的位置。
在确定用户的位置时,车辆计算机110被编程为确定指定用户要执行的动作(例如,与指定传感器交互,诸如面向和/或触摸指定传感器、调整相对于指定传感器的用户姿态、移除附件,诸如帽子、眼镜等、说出单词或短语等)的指令,以允许车辆计算机110获得用户的生物特征数据。所述指令基于用户的位置指定用户与不同的传感器115交互。例如,所述指令可以指定不同座椅中的用户与不同的传感器115交互。另外,所述指令可以指定乘客舱200外部的用户与外部传感器115a交互(参见图4A),而乘客舱内部的用户与内部传感器115b交互。车辆计算机110可以维护将各种指令与对应的用户位置相关联的查找表等。查找表可以例如存储在车辆计算机110的存储器中。车辆计算机110可以通过选择与和所确定的用户位置匹配的所存储的用户位置相关联的指令来使用查找表来确定指令。
在确定指令时,车辆计算机110可以例如以与上文关于提供请求消息300讨论的基本上相同的方式向经授权的便携式装置145提供指令。另外或替代地,车辆计算机110可以向车辆105中的HMI 118提供指令。在该示例中,HMI 118可以致动一个或多个输出装置,诸如显示器、扬声器等,以向用户输出指令。
在提供指令时,车辆计算机110可以基于用户的位置来致动一个或多个传感器115。具体地,车辆计算机110可以致动被定位成面向用户的位置的传感器115。例如,车辆计算机110可以致动传感器115以检测所述位置处的用户。在这样的示例中,车辆计算机110可以被编程为在获得用户的生物特征数据之前验证用户的位置。例如,所述指令可以包括用于执行手势(即,用户在面向指定传感器115时的指定动作,例如,挥手、竖起拇指等)的指令。车辆计算机110可以基于经由传感器115数据检测手势来验证用户的位置。在这种情况下,车辆计算机110可以在获得用户的生物特征数据之前获得用户的位置的传感器115的数据。车辆计算机110可以例如使用已知的手势识别技术来分析传感器115的数据,以确定用户是否正在所述位置处执行由指令指定的手势。如果车辆计算机110确定用户正在执行手势,则车辆计算机110可以验证用户的位置。如果车辆计算机110确定用户未执行手势,则车辆计算机110可以确定不验证用户的位置。在这种情况下,车辆计算机110可以向经授权的便携式装置145发送消息,所述消息指示在验证用户的位置之前不能执行生物特征授权。
另外或替代地,车辆计算机110可以确定是否提供更新指令,所述更新指令指定用户执行的更新动作以允许车辆计算机110获得用户的生物特征数据。也就是说,车辆计算机110可以确定当前用户动作不允许车辆获得用户的生物特征数据。车辆计算机110可以例如使用已知的图像处理技术来分析包括用户的图像数据,以确定用户相对于图像传感器115的姿态。在这种情况下,车辆计算机110可以确定是否指示用户相对于图像传感器115(参见图4B)移动到相对于图像传感器115的视野的指定位置。作为另一个示例,车辆计算机110可以例如使用已知的数据处理技术来分析指纹,以确定是否指示用户触摸相对于电容式触摸传感器115的不同位置。在这种情况下,车辆计算机110可以确定是否指示用户触摸相对于电容式触摸传感器115的不同位置。在确定当前用户动作允许车辆计算机110获得用户的生物特征数据时,车辆计算机110可以在获得生物特征数据时提供指定用户不移动的更新的指令(参见图4C)。车辆计算机110可以向经授权的便携式装置145提供更新的指令,例如,如上文所讨论。
在提供指令和/或确定当前用户动作允许车辆计算机110获得用户的生物特征数据时,车辆计算机110可以致动传感器115以获得用户的生物特征数据。车辆计算机110可以致动各种传感器115以获得对应类型的生物特征数据。例如,车辆计算机110可以致动图像传感器115以获得包括用户的面部特征的图像数据。另外或替代地,车辆计算机110可以致动电容式触摸传感器115以获得包括用户的指纹的数据。
在生物特征登记期间,车辆计算机110为经认证的用户生成用户数据。例如,车辆计算机110可以维护例如存储在车辆计算机110的存储器中的查找表等,所述查找表等将经认证的用户与对应的生物特征数据相关联。在确定发起生物特征登记时,车辆计算机110可以更新查找表以将所识别的用户与登记生物特征数据相关联。
另外,车辆计算机110可以生成授权消息310。类似于请求消息300,授权消息310包括标头311和有效载荷312,所述有效载荷包括有效载荷段313(参见图3C)。授权消息310的标头311可以包括消息类型、消息大小等。有效载荷312例如在指定的有效载荷段313中包括对指定用户授权的第二用户输入的请求。车辆计算机110然后可以例如如上文关于提供请求消息300所讨论向经授权的便携式装置145提供授权消息310。如下文所讨论,经授权的便携式装置145可以响应于授权消息310而提供响应消息315。
在接收到响应消息315时,车辆计算机110可以确定经认证的用户的用户授权。例如,车辆计算机110可以访问有效载荷317,例如指定的有效载荷段318,并检索用户授权,例如用户具有访问和/或调整权限的一个或多个车辆105特征和/或操作参数。然后,车辆计算机110可以更新用户数据以包括所检索的用户授权。也就是说,用户数据可以将用户授权与对应用户相关联。
在生成用户数据时,车辆计算机110可以生成验证消息320。类似于请求消息300,验证消息320包括标头321和有效载荷322,所述有效载荷包括有效载荷段323(参见图3E)。验证消息320的标头321可以包括消息类型、消息大小等。有效载荷322例如在指定的有效载荷段323中包括对验证用户的用户数据的请求。验证用户数据意指确认用户数据与经授权的用户相关联;在确定所述用户数据不与经授权的用户相关联时发生验证失败。车辆计算机110然后可以例如如上文关于提供请求消息300所讨论向经授权的便携式装置145提供验证消息320。如下文所讨论,经授权的便携式装置145可以响应于验证消息320而提供确认消息325。
车辆计算机110可以被编程为在向经授权的便携式装置145提供验证消息320时发起计时器。计时器的持续时间可以是例如基于允许确定各个用户对经由对应的经授权的便携式装置145接收的消息作出响应的平均时间量的测试以经验确定的预定时间量。
车辆计算机110可以从经授权的便携式装置145接收确认消息325。例如,车辆计算机110可以监测网络135以检测来自经授权的便携式装置145的确认消息325。如果车辆计算机110在计时器到期之前接收到确认消息325,则车辆计算机110可以验证用户的用户数据。如果车辆计算机110在计时器到期之前未接收到确认消息325,则车辆计算机110可以确定不验证用户的用户数据。在这种情况下,车辆计算机110可以被编程为删除用户数据。在这样的示例中,车辆计算机110可以为用户重新发起生物特征登记。换句话说,车辆计算机110可以向经授权的便携式装置145提供指令以使用户提供生物特征数据,例如,如上文所讨论。
如上文所阐述,在识别经认证的用户的用户数据时,车辆计算机110可以基于质询生物特征数据来授权经认证的用户。也就是说,车辆计算机110可以使用质询生物特征数据和用户数据来执行生物特征授权。授权经认证的用户意指确定经认证的用户具有访问车辆105的权限;在确定经认证的用户没有访问车辆105的权限时发生授权失败。
生物特征面部识别在本文中被描述为生物特征授权的一个非限制性示例。生物特征面部识别通常通过计算人脸的生理特性并将所计算的生理特性与来自经训练模型的所存储的生理特性进行比较来操作。生理特性可以包括面部特征的度量,诸如瞳孔之间的距离、嘴角之间的距离和鼻长等。这些度量可通过形成测量值的比率来归一化并且存储为训练模型。在质询时,获取并处理寻求访问的人的图像以提取生理特性,然后将所述生理特性与所存储的生理特性进行比较以确定匹配。生物特征授权的其他非限制性示例可以包括指纹识别、眼睛识别、语音识别等。
可以在车辆计算机110上执行生物特征授权软件,或者可以将传感器115的数据(例如,图像数据)上传到维护经训练模型的数据库的远程服务器计算机140以供执行。生物特征授权软件的示例是面部识别软件,例如面部跟踪器。面部跟踪器是用C++编写并且可根据MIT软件许可在facetracker.net上获得的面部识别软件库。
面部识别软件可以确定与质询图像和登记图像相对应的两组面部特征,并确定特征之间的距离比。面部识别软件可以通过确定与先前确定的面部识别特征的匹配值来确定置信度分数。可以通过将置信度分数与阈值进行比较来确定用户状态。可以例如基于允许确定使未经正确授权的用户的数量最小化的阈值的测试以经验确定阈值。
面部特征包括面部图像上的位置,诸如内眼角和外眼角以及嘴角。例如,面部特征检测程序(诸如Dlib图像处理库中的SURF)可以确定面部上与面部特征(诸如每只眼睛的中心和嘴部的中心)相对应的位置。面部识别软件可以基于这两组特征来比较比率并确定匹配值。如果特征组之间的比率匹配,这意指它们在以经验确定的公差内具有相同的值,则将质询图像中的人确定为与先前获取的登记图像中的人是同一个人。
可以通过确定这两组比率之间的均方差来确定匹配值。匹配距离比可以减少由于距相机的距离的差异和这两个图像之间的姿态的差异而引起的面部特征测量的方差。
可以通过将匹配值乘以将匹配值映射到区间(0,1)的标量常数来确定置信度分数,其中接近1的值对应于良好匹配,而接近0的值对应于不良匹配。可以通过获取和测试多个登记和质询图像来以经验确定标量常数。
置信度分数大于阈值可以指示质询生物特征数据与登记生物特征数据良好匹配,因此用户状态应为“已授权”。置信度分数小于或等于阈值可以指示质询生物特征数据与登记生物特征数据不匹配,因此用户状态应被设定为“未授权”。置信度分数小于或等于阈值可以指示质询生物特征数据所面临的问题,例如,未经授权的用户通过面部识别,或经授权的用户未通过面部识别。
在确定用户被授权时,车辆计算机110可以基于用户的用户数据(例如,用户授权)来控制车辆105。例如,车辆计算机110可以控制车辆105的锁以允许用户访问由用户授权指定的车辆105的区域,例如,驾驶员座椅、乘客座椅、后排座椅等。另外,车辆计算机110可以致动一个或多个车辆部件125来操作车辆105以满足由用户授权指定的操作参数。作为另一个示例,车辆计算机110可以致动一个或多个车辆部件125以调整由用户授权指定的一个或多个车辆105的特征。
在确定用户未被授权时,车辆计算机110可以控制车辆105的锁以阻止用户访问车辆105,例如乘客舱200。另外或替代地,车辆计算机110可以阻止致动一个或多个车辆部件125,例如,以便阻止车辆105的操作和/或一个或多个车辆105的特征的调整。
经授权的便携式装置145可以从车辆计算机110接收请求消息300。例如,经授权的便携式装置145可以监测网络135以检测请求消息300。在接收到请求消息300时,经授权的便携式装置145然后可以致动HMI 150以检测第一用户输入。例如,HMI 150可以致动一个或多个传感器以检测到用户选择对应的虚拟按钮以提供诸如用户名和密码的识别信息。另外,HMI 150可以致动一个或多个传感器以检测到用户选择对应的虚拟按钮以发起生物特征登记或生物特征授权。
在检测到第一用户输入时,经授权的便携式装置145可以基于第一用户输入生成认证消息305。类似于请求消息300,认证消息305包括标头306和有效载荷307,所述有效载荷包括有效载荷片段308(参见图3B)。认证消息305的标头306可以包括消息类型、消息大小等。有效载荷307例如在指定的有效载荷段308中包括第一用户输入。经授权的便携式装置145然后可以向车辆计算机110提供认证消息305,例如如上文关于提供请求消息300所讨论的。
经授权的便携式装置145可以被编程为从车辆计算机110接收指令(和更新的指令)。例如,经授权的便携式装置145可以监测网络135以检测指令(和更新的指令)。在接收到指令(和更新的指令)时,经授权的便携式装置145可以向用户提供指令(和更新的指令)。例如,经授权的便携式装置145可以指示HMI 150致动一个或多个输出装置147以向用户输出指令(和更新的指令)(参见图4A至图4C)。
经授权的便携式装置145可以被编程为从车辆计算机110接收授权消息310。例如,经授权的便携式装置145可以监测网络135以检测授权消息310。在接收到授权消息310时,经授权的便携式装置145可以致动HMI 150以检测指定用户授权的第二用户输入。例如,HMI150可以被编程为显示表示用户可以选择以指定用户授权的相应车辆105的特征和/或操作参数的虚拟按钮。换句话说,HMI 150可以激活可以检测到用户选择虚拟按钮来选择用户授权的传感器。
在检测到第二用户输入时,经授权的便携式装置145可以基于第二用户输入生成响应消息315。类似于请求消息300,响应消息315包括标头316和有效载荷317,所述有效载荷包括有效载荷段318(参见图3D)。响应消息315的标头316可以包括消息类型、消息大小等。有效载荷317例如在指定的有效载荷段318中包括第二用户输入。经授权的便携式装置145然后可以例如如上文关于提供请求消息300所讨论向车辆计算机110提供响应消息315。
经授权的便携式装置145可以被编程为从车辆计算机110接收验证消息320。例如,经授权的便携式装置145可以监测网络135以检测验证消息320。在接收到验证消息320时,经授权的便携式装置145可以致动HMI 150以检测验证用户的用户数据的第三用户输入。例如,HMI 150可以被编程为显示用户可以选择来验证用户数据的虚拟按钮。换句话说,HMI150可以激活可以检测到用户选择虚拟按钮来验证用户数据的传感器。
在检测到第三用户输入时,经授权的便携式装置145可以生成确认消息325。类似于请求消息300,确认消息325包括标头326和有效载荷327,所述有效载荷包括有效载荷段328(参见图3F)。确认消息325的标头326可以包括消息类型、消息大小等。有效载荷327例如在指定的有效载荷段328中包括第三用户输入。经授权的便携式装置145然后可以例如如上文关于提供请求消息300讨论的基本上相同的方式向车辆计算机110提供确认消息325。
图5是在车辆计算机110中根据存储在其存储器中的用于对用户进行生物特征授权的程序指令执行的示例性过程500的图式。过程500包括可以按所示次序执行的多个框。替代地或另外,过程500可以包括更少的框,或者可以包括以不同次序执行的框。
过程500在框505中开始。在框505中,车辆计算机110确定是否检测到经授权的便携式装置145。如上文所阐述,车辆计算机110可以例如基于检测到传输的RF信号的返回来检测便携式装置145。在确定便携式装置145在车辆105的预定距离内时,车辆计算机110可以授权便携式装置145,如上文所讨论。如果车辆计算机110授权便携式装置145,则过程500在框510中继续。如果车辆计算机110确定不授权便携式装置145或者便携式装置145不在车辆105的预定距离内,则过程500保持在框505中。
在框510中,车辆计算机110确定用户是否被认证。如上文所阐述,车辆计算机110可以生成请求消息300并将其提供给经授权的便携式装置145。在从经授权的便携式装置145接收到认证消息305时,车辆计算机110可以将从认证消息305中检索的识别信息与和经授权的便携式装置145相关联的经认证的用户的识别信息进行比较。如果检索到的识别信息与存储的识别信息匹配,则过程500在框515中继续。否则,过程500在框560中继续。
在框515中,车辆计算机110确定用户相对于车辆105的位置,如上文所讨论。过程500在框520中继续。
在框520中,车辆计算机110向经授权的便携式装置145提供指令。所述指令基于用户的位置来指定用户提供生物特征数据的动作。车辆计算机110可以基于用户的位置来选择指令,如上文所讨论。过程500在框525中继续。
在框525中,车辆计算机110例如基于确定当前用户动作不允许车辆计算机110获得生物特征数据来确定是否向用户提供更新的指令,如上文所讨论。更新的指令基于用户的位置来指定用户提供生物特征数据的更新的动作。如果车辆计算机110确定提供更新的指令,则过程500返回到框520。否则,过程500在框530中继续。
在框530中,车辆计算机110致动一个或多个传感器115以获得用户的生物特征数据。如上文所讨论,车辆计算机110可以获得用户的一种或多种类型的生物特征数据。过程500在框535中继续。
在框535中,车辆计算机110确定经认证的用户的用户数据是否可用,例如,存储在车辆计算机110的存储器中,如上文所讨论。如果经认证的用户的用户数据可用,则过程500在框555中继续。否则,过程500在框540中继续进行。
在框540中,车辆计算机110为经认证的用户生成用户数据。也就是说,车辆计算机110将在框530中获得的生物特征数据与经认证的用户相关联,如上文所讨论。另外,车辆计算机110可以生成授权消息310并将其提供给经授权的便携式装置145,如上文所讨论。在从经授权的便携式装置145接收到响应消息315时,车辆计算机110可以将一个或多个用户授权与经认证的用户相关联,如上文所讨论。过程500在框545中继续。
在框545中,车辆计算机110生成验证消息320并将其提供给经授权的便携式装置145,如上文所讨论。另外,车辆计算机110可以在提供验证消息320时发起计时器,如上文所讨论。过程500在框550中继续。
在框550中,车辆计算机110确定是否验证用户数据。车辆计算机110可以从经授权的便携式装置145接收确认消息325,如上文所讨论。如果车辆计算机110在计时器到期之前从经授权的便携式装置145接收到确认消息325,则车辆计算机110可以验证用户数据。如果车辆计算机110在计时器到期之前未从经授权的便携式装置145接收到确认消息325,则车辆计算机110可以确定不验证用户数据。如果用户数据被验证,则过程500在框565中继续。否则,过程500在框560中继续。
在框555中,车辆计算机110确定经认证的用户是否被授权。也就是说,车辆计算机110使用在框530中获得的生物特征数据执行生物特征认证,如上文所讨论。如果车辆计算机110确定经认证的用户被授权,则过程500在框565中继续。否则,过程500在框560中继续。
在框560中,车辆计算机110阻止用户控制和/或访问车辆105,如上文所讨论。在框560之后,过程500结束。
在框565中,车辆计算机110基于用户的用户数据来控制一个或多个车辆部件125,如上文所讨论。在框565之后,过程500结束。
图6是在便携式装置145中根据存储在其存储器中的用于基于用户相对于车辆105的位置来提供生物特征数据的程序指令执行的示例性过程600的图式。过程600包括可以按所示次序执行的多个框。替代地或另外,过程600可以包括更少的框,或者可以包括以不同次序执行的框。
过程600在框605中开始。在框605中,便携式装置145向车辆计算机110提供授权信息。也就是说,便携式装置145可以向车辆计算机110提供车辆计算机110可以用来授权便携式装置145的信息,如上文所讨论。过程600在框610中继续。
在框610中,经授权的便携式装置145确定是否从车辆计算机110接收到请求消息300。经授权的便携式装置145可以监测网络135以检测请求消息300,如上文所讨论。如果接收到请求消息300,则过程600在框615中继续。否则,过程600保持在框610中。
在框615中,经授权的便携式装置145生成认证消息305并将其提供给车辆计算机110,如上文所讨论。经授权的便携式装置145可以生成认证消息305以包括用户的识别信息,如上文所讨论。经授权的便携式装置145可以通过致动HMI 150以检测指定识别信息的第一用户输入来确定识别信息,如上文所讨论。另外,第一用户输入可以指定发起生物特征登记或生物特征授权,如上文所讨论。过程600在框620中继续。
在框620中,经授权的便携式装置145确定是否从车辆计算机110接收到指令。经授权的便携式装置145可以监测网络135以检测指令,如上文所讨论。所述指令基于用户的位置来指定用户提供生物特征数据的动作,如上文所讨论。如果接收到指令,则过程600在框625中继续。否则,过程600保持在框620中。
在框625中,经授权的便携式装置145致动一个或多个输出装置147以向用户提供指令(或更新的指令)。过程600在框630中继续。
在框630中,经授权的便携式装置145确定是否从车辆计算机110接收到授权消息310。经授权的便携式装置145可以监测网络135以检测授权消息310,如上文所讨论。如果接收到授权消息310,则过程600在框635中继续。否则,过程600保持在框630中。
在框635中,经授权的便携式装置145确定是否从车辆计算机110接收到更新的指令。框635与过程600的框620基本上相同,因此将不被重复以避免冗余。如果接收到更新的指令,则过程600在框625中继续。否则,过程600返回到框630。
在框640中,经授权的便携式装置145生成并提供响应消息315,如上文所讨论。响应消息315包括指定用户授权的第二用户输入,如上文所讨论。过程600在框645中继续。
在框645中,经授权的便携式装置145确定是否从车辆计算机110接收到验证消息320。经授权的便携式装置145可以监测网络135以检测验证消息320,如上文所讨论。如果接收到验证消息320,则过程600在框650中继续。否则,过程600保持在框645中。
在框650中,经授权的便携式装置145生成并提供确认消息325,如上文所讨论。确认消息325包括验证用户数据的第三用户输入,如上文所讨论。在框650之后,过程600结束。
如本文所使用,副词“基本上”意指形状、结构、测量结果、数量、时间等因为材料、机加工、制造、数据传输、计算速度等的缺陷而可能偏离精确描述的几何形状、距离、测量结果、数量、时间等。
一般来讲,所描述的计算系统和/或装置可采用多种计算机操作系统中的任一种,包括但决不限于以下版本和/或种类:Ford应用;AppLink/Smart Device Link中间件;Microsoft/>操作系统;Microsoft/>操作系统;Unix操作系统(例如,由加利福尼亚州红杉海岸的Oracle公司发布的/>操作系统);由纽约州阿蒙克市的International Business Machines公司发布的AIX UNIX操作系统;Linux操作系统;由加利福尼亚州库比蒂诺市的苹果公司发布的Mac OSX和iOS操作系统;由加拿大滑铁卢的黑莓有限公司发布的黑莓操作系统;以及由谷歌公司和开放手机联盟开发的安卓操作系统;或由QNX软件系统公司提供的/>CAR信息娱乐平台。计算装置的示例包括但不限于机-载第一计算机、计算机工作站、服务器、台式计算机、笔记本计算机、膝上型计算机或手持式计算机,或某一其他计算系统和/或装置。
计算机和计算装置通常包括计算机-可执行指令,其中所述指令可能能够由一个或多个计算装置(诸如以上所列出的那些)执行。可以从使用多种编程语言和/或技术创建的计算机程序编译或解译计算机可执行指令,所述编程语言和/或技术单独地或者组合地包括但不限于JavaTM、C、C++、Matlab、Simulink、Stateflow、Visual Basic、Java Script、Perl、HTML等。这些应用程序中的一些可在诸如Java虚拟机、Dalvik虚拟机等虚拟机上编译和执行。通常,处理器(例如,微处理器)接收例如来自存储器、计算机可读介质等的指令,并执行这些指令,从而执行一个或多个过程,包括本文所述过程中的一者或多者。此类指令和其他数据可使用各种计算机可读介质来存储和传输。计算装置中的文件通常是存储在诸如存储介质、随机存取存储器等计算机可读介质上的数据的集合。
存储器可以包括计算机-可读介质(也称为处理器-可读介质),所述计算机可读介质包括参与提供可以由计算机(例如,由计算机的处理器)读取的数据(例如,指令)的任何非-暂时性(例如,有形)介质。此类介质可采用许多形式,包括但不限于非-易失性介质和易失性介质。非-易失性介质可以包括例如光盘或磁盘以及其他持久性存储器。易失性介质可以包括例如通常构成主存储器的动态随机存取存储器(DRAM)。此类指令可由一种或多种传输介质传输,所述一种或多种传输介质包括同轴电缆、铜线和光纤,包括构成耦合到ECU的处理器的系统总线的电线。常见形式的计算机可读介质包括例如RAM、PROM、EPROM、FLASH-EEPROM、任何其他存储器芯片或盒式磁带、或计算机可从中读取的任何其他介质。
数据库、数据储存库或本文描述的其他数据存储区可以包括用于存储、访问和检索各种数据的各种机构,包括分层数据库、文件系统中的文件集、呈专用格式的应用程序数据库、关系数据库管理系统(RDBMS)等。每个此类数据存储区通常包括在采用计算机操作系统(诸如上文所提及的那些操作系统中的一者)的计算装置内,并且经由网络以多种方式中的任一种或多种方式来访问。文件系统可从计算机操作系统访问,并且可以包括以各种格式存储的文件。除了用于创建、存储、编辑和执行已存储的程序的语言(例如上述PL/SQL语言)之外,RDBMS还通常采用结构化查询语言(SQL)。
在一些示例中,系统元件可被实现为一个或多个计算装置(例如,服务器、个人计算机等)上、存储在与其相关联的计算机可读介质(例如,磁盘、存储器等)上的计算机-可读指令(例如,软件)。计算机程序产品可以包括存储在计算机可读介质上的用于实施本文描述的功能的此类指令。
关于本文描述的介质、过程、系统、方法、启发等,应理解,虽然此类过程等的步骤已经被描述为按照某一有序的顺序发生,但是可通过以与本文所述顺序不同的顺序执行所述步骤来实践此类过程。还应理解,可同时执行某些步骤,可添加其他步骤,或者可省略本文描述的某些步骤。换句话说,本文对过程的描述出于说明某些实施例的目的而提供,并且决不应被解释为限制权利要求。
因此,应理解,以上描述意图为说明性的而非限制性的。在阅读了以上描述之后,除了所提供的示例之外的许多实施例和应用对于本领域技术人员而言将是明显的。不应参考以上描述来确定本发明的范围,而应参考所附权利要求连同这些权利要求赋予的等效物的全部范围来确定。设想并预期未来的发展将在本文讨论的技术中发生,并且所公开的系统和方法将并入到此类未来实施例中。总之,应理解,本发明能够进行修改和变化,并且仅受所附权利要求的限制。
除非本文作出相反的明确指示,否则权利要求中使用的所有术语意在给出如本领域技术人员所理解的普通和通常的含义。具体地,除非权利要求叙述相反的明确限制,否则使用诸如“一个”、“该”、“所述”等单数冠词应被解读为叙述所指示的要素中的一者或多者。
根据本发明,提供了一种系统,所述系统具有计算机,所述计算机包括处理器和存储器,所述存储器存储可由所述处理器执行以进行以下操作的指令:在检测到经授权的便携式装置时,基于然后从所述经授权的便携式装置接收到认证消息而针对结构认证所述便携式装置的用户;确定所述用户相对于所述结构的位置;向所述经授权的便携式装置提供指令以使所述用户基于所述位置提供生物特征数据;在获得所述用户的所述生物特征数据时,为所述用户生成用户数据;以及基于所述用户数据来控制结构部件。
根据一个实施例,所述指令还包括用于基于用户输入确定所述位置的指令。
根据一个实施例,所述指令还包括用于基于所述经授权的便携式装置的位置来确定所述位置的指令。
根据一个实施例,所述指令还包括用于基于来自所述结构上的传感器的数据来确定所述位置的指令。
根据一个实施例,所述指令还包括用于从所述结构上被定位成面向所述位置的传感器获得所述生物特征数据的指令。
根据一个实施例,所述结构是车辆,并且其中所述指令还包括用于操作所述车辆以满足由所述用户数据指定的操作参数的指令。
根据一个实施例,本发明的特征还在于所述经授权的便携式装置,其中所述经授权的便携式装置包括第二处理器和第二存储器,所述第二存储器存储可由所述第二处理器执行的指令,使得所述经授权的便携式装置被编程为基于用户输入生成所述认证消息。
根据一个实施例,本发明的特征还在于所述经授权的便携式装置,其中所述经授权的便携式装置包括第二处理器和第二存储器,所述第二存储器存储可由所述第二处理器执行的指令,使得所述经授权的便携式装置被编程为在接收到所述指令时致动显示器或扬声器中的一者以向所述用户输出用于提供所述生物特征数据的所述指令。
根据一个实施例,所述指令还包括用于在生成所述用户数据时向所述经授权的便携式装置提供验证消息以验证所述用户数据的指令。
根据一个实施例,本发明的特征还在于所述经授权的便携式装置,其中所述经授权的便携式装置包括第二处理器和第二存储器,所述第二存储器存储可由所述第二处理器执行的指令,使得所述经授权的便携式装置被编程为在接收到验证所述用户数据的用户输入时,向所述计算机提供确认消息。
根据本发明,一种方法包括:在检测到经授权的便携式装置时,基于然后从所述经授权的便携式装置接收到认证消息而在计算机处针对结构认证所述便携式装置的用户;确定所述用户相对于所述结构的位置;向所述经授权的便携式装置提供指令以使所述用户基于所述位置提供生物特征数据;在所述计算机处获得所述用户的所述生物特征数据时,为所述用户生成用户数据;以及基于所述用户数据来控制结构部件。
在本发明的一个方面,所述方法包括基于用户输入确定所述位置。
在本发明的一个方面,所述方法包括基于所述经授权的便携式装置的位置来确定所述位置。
在本发明的一个方面,所述方法包括基于来自所述结构上的传感器的数据来确定所述位置。
在本发明的一个方面,所述方法包括从所述结构上被定位成面向所述位置的传感器获得所述生物特征数据。
在本发明的一个方面,所述结构是车辆,所述方法还包括操作所述车辆以满足由所述用户数据指定的操作参数。
在本发明的一个方面,所述方法包括基于用户输入在所述经授权的便携式装置处生成所述认证消息。
在本发明的一个方面,所述方法包括在接收到所述指令时,在所述经授权的便携式装置处致动显示器或扬声器中的一者以向所述用户输出用于提供所述生物特征数据的所述指令。
在本发明的一个方面,所述方法包括在生成所述用户数据时向所述经授权的便携式装置提供验证消息以验证所述用户数据。
在本发明的一个方面,所述方法包括在接收到验证所述请求的用户输入时,在所述经授权的便携式装置处向所述计算机提供确认消息。
Claims (13)
1.一种方法,其包括:
在检测到经授权的便携式装置时,基于然后从所述经授权的便携式装置接收到认证消息而在计算机处针对结构认证所述便携式装置的用户;
确定所述用户相对于所述结构的位置;
向所述经授权的便携式装置提供指令以使所述用户基于所述位置提供生物特征数据;
在所述计算机处获得所述用户的所述生物特征数据时为所述用户生成用户数据;以及
基于所述用户数据来控制结构部件。
2.如权利要求1所述的方法,其还包括基于用户输入确定所述位置。
3.如权利要求1所述的方法,其还包括基于所述经授权的便携式装置的位置来确定所述位置。
4.如权利要求1所述的方法,其还包括基于来自所述结构上的传感器的数据来确定所述位置。
5.如权利要求1所述的方法,其还包括从所述结构上被定位成面向所述位置的传感器获得所述生物特征数据。
6.如权利要求1所述的方法,其中所述结构是车辆,所述方法还包括操作所述车辆以满足由所述用户数据指定的操作参数。
7.如权利要求1所述的方法,其还包括基于用户输入在所述经授权的便携式装置处生成所述认证消息。
8.如权利要求1所述的方法,其还包括在接收到所述指令时,在所述经授权的便携式装置处致动显示器或扬声器中的一者以向所述用户输出用于提供所述生物特征数据的所述指令。
9.如权利要求1所述的方法,其还包括在生成所述用户数据时向所述经授权的便携式装置提供验证消息以验证所述用户数据。
10.如权利要求9所述的方法,其还包括在接收到验证所述用户数据的用户输入时,在所述经授权的便携式装置处向所述计算机提供确认消息。
11.一种计算机,所述计算机被编程为执行如权利要求1至10中任一项所述的方法。
12.一种计算机程序产品,所述计算机程序产品包括用于执行如权利要求1至10中任一项所述的方法的指令。
13.一种车辆,所述车辆包括被编程为执行如权利要求1至10中任一项所述的方法的计算机。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/540,432 US20230179594A1 (en) | 2021-12-02 | 2021-12-02 | Enhanced biometric authorization |
US17/540,432 | 2021-12-02 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116215445A true CN116215445A (zh) | 2023-06-06 |
Family
ID=86382189
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211445432.4A Pending CN116215445A (zh) | 2021-12-02 | 2022-11-18 | 增强的生物特征授权 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230179594A1 (zh) |
CN (1) | CN116215445A (zh) |
DE (1) | DE102022131642A1 (zh) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2725835A1 (en) * | 2012-10-24 | 2014-04-30 | Gemalto SA | Method for authenticating a user |
CN104298909B (zh) * | 2013-07-19 | 2018-11-30 | 富泰华工业(深圳)有限公司 | 电子装置、身份验证系统及方法 |
US10164973B1 (en) * | 2015-12-02 | 2018-12-25 | United Services Automobile Association (Usaa) | Public authentication systems and methods |
CN110517046A (zh) * | 2018-05-22 | 2019-11-29 | 万事达卡国际公司 | 用户认证系统和方法 |
-
2021
- 2021-12-02 US US17/540,432 patent/US20230179594A1/en active Pending
-
2022
- 2022-11-18 CN CN202211445432.4A patent/CN116215445A/zh active Pending
- 2022-11-29 DE DE102022131642.4A patent/DE102022131642A1/de active Pending
Also Published As
Publication number | Publication date |
---|---|
US20230179594A1 (en) | 2023-06-08 |
DE102022131642A1 (de) | 2023-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10970747B2 (en) | Access and control for driving of autonomous vehicle | |
US11226636B2 (en) | Architecture for secure vehicle control | |
US20190367036A1 (en) | Remote autonomous vehicle ride share supervision | |
US11054818B2 (en) | Vehicle control arbitration | |
US10279779B1 (en) | Vehicle and control method thereof | |
JP6669014B2 (ja) | 車両操作キー付与システムおよび車両操作キー付与プログラム | |
US20230179594A1 (en) | Enhanced biometric authorization | |
US12010114B2 (en) | Delayed biometric authorization | |
US20230198983A1 (en) | Enhanced biometric authorization | |
US20230319033A1 (en) | Delayed biometric authorization | |
US20230281949A1 (en) | Biometric authorization | |
US20230177900A1 (en) | Enhanced biometric authorization | |
US11912234B2 (en) | Enhanced biometric authorization | |
US20210276575A1 (en) | Vehicle component identification system | |
US11455852B2 (en) | Vehicle deauthortization of user device | |
US11951937B2 (en) | Vehicle power management | |
US20230211753A1 (en) | Vehicle sensor control for optimized monitoring | |
US20230342441A1 (en) | Blockchain method and system to prevent camera spoofing before operating vehicle | |
US20210155202A1 (en) | Authorized vehicle access | |
JP2023167755A (ja) | 情報処理装置、情報処理方法、車両制御装置、及び、情報処理端末 | |
CN116409266A (zh) | 用于优化监测的车辆传感器控制 | |
CN116215441A (zh) | 一种车辆舱门开启方法、装置、电子设备和存储介质 | |
CN117935403A (zh) | 车门解锁方法、装置、车载设备和计算机可读存储介质 | |
CN117812545A (zh) | 车辆钥匙扣管理 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |