KR102369955B1 - 차량 환경에서의 다중 인자 인증 및 액세스 제어 - Google Patents

차량 환경에서의 다중 인자 인증 및 액세스 제어 Download PDF

Info

Publication number
KR102369955B1
KR102369955B1 KR1020217007577A KR20217007577A KR102369955B1 KR 102369955 B1 KR102369955 B1 KR 102369955B1 KR 1020217007577 A KR1020217007577 A KR 1020217007577A KR 20217007577 A KR20217007577 A KR 20217007577A KR 102369955 B1 KR102369955 B1 KR 102369955B1
Authority
KR
South Korea
Prior art keywords
vehicle
user
authentication
processing system
data processing
Prior art date
Application number
KR1020217007577A
Other languages
English (en)
Other versions
KR20210031781A (ko
Inventor
해리스 라믹
빅터 찬
비카스 굽타
링준 리
Original Assignee
구글 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 구글 엘엘씨 filed Critical 구글 엘엘씨
Publication of KR20210031781A publication Critical patent/KR20210031781A/ko
Application granted granted Critical
Publication of KR102369955B1 publication Critical patent/KR102369955B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/08—Access security
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/34—User authentication involving the use of external additional devices, e.g. dongles or smart cards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0853—Network architectures or network communication protocols for network security for authentication of entities using an additional device, e.g. smartcard, SIM or a different communication terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0876—Network architectures or network communication protocols for network security for authentication of entities based on the identity of the terminal or configuration, e.g. MAC address, hardware or software configuration or device fingerprint
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H04L63/102—Entity profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H04L63/107—Network architectures or network communication protocols for network security for controlling access to devices or network resources wherein the security policies are location-dependent, e.g. entities privileges depend on current location or allowing specific operations only from locally connected terminals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06—Authentication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/48—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for in-vehicle communication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00—Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21—Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2141—Access rights, e.g. capability lists, access control lists, access tables, access matrices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2463/00—Additional details relating to network architectures or network communication protocols for network security covered by H04L63/00
    • H04L2463/082—Additional details relating to network architectures or network communication protocols for network security covered by H04L63/00 applying multi-factor authentication

Abstract

본 명세서에 기술된 시스템 및 방법은 차량에 설치된 센서로부터 센서 신호를 수신하고 차량으로의 진입 이벤트를 결정하는 디지털 어시스턴트 어플리케이션을 포함할 수 있다. 디지털 어시스턴트 어플리케이션은 차량으로의 진입 이벤트에 응답하여 차량과 관련된 복수의 센서로부터 복수의 인증 입력 신호를 수신할 수 있다. 디지털 어시스턴트 어플리케이션은 복수의 인증 입력 신호 및 복수의 인증 자격 증명에 기초하여 복수의 인증 상태를 결정할 수 있다. 액세스 권한 식별할 수 있는 디지털 어시스턴트 응용 프로그램 수준 복수의 식별 인증 상태에 적어도 부분적으로 기초하여 복수의 액세스 허용 레벨을 갖는 복수의 액세스 허용 레벨. 디지털 어시스턴트 어플리케이션은 액세스 허용 레벨에 응답하여 차량을 통해 이용가능한 기능 세트의 서브세트를 식별하고, 기능 서브세트에 차량 액세스를 제공할 수 있다.

Description

차량 환경에서의 다중 인자 인증 및 액세스 제어{MULTI-FACTOR AUTHENTICATION AND ACCESS CONTROL IN A VEHICULAR ENVIRONMENT}
일반적으로, 본 발명은 차량 환경에서 차량 진입 이벤트들의 진입 인증 및 액세스 제어를 위한 방법 및 시스템에 관한 것이다.
안전하지 않거나 부적절하게 보안된 차량은 무단 액세스 또는 사용에 취약할 수 있다. 키 또는 하드웨어 입력 시스템은 차량에 대한 일부 무단 액세스 또는 사용을 방지하지 못할 수도 있다.
본 개시의 일 양상에 따르면, 차량 진입 이벤트들의 다중 인자 진입 인증을 위한 시스템이 개시된다. 상기 시스템은 진입 검출 컴포넌트, 진입 인증 컴포넌트, 및 액세스 제어 컴포넌트를 포함하는 디지털 어시스턴트 어플리케이션을 갖는 데이터 프로세싱 시스템을 포함할 수 있다. 디지털 어시스턴트 어플리케이션은 차량 내에서 실행되어, 진입 검출 컴포넌트에 의해, 차량에 설치된 제 1 센서에 의해 획득된 적어도 하나의 센서 신호를 수신하게 한다. 상기 진입 검출 컴포넌트는 상기 적어도 하나의 센서 신호에 기초하여, 상기 차량 안으로의 진입 이벤트를 결정할 수 있다. 상기 진입 이벤트는 사용자가 상기 차량에 진입함을 나타낼 수 있다. 상기 진입 인증 컴포넌트는 상기 차량 안으로의 진입 이벤트에 응답하여, 제 1 인증 입력 신호 및 제 2 인증 입력 신호를 수신할 수 있다. 상기 제 1 인증 입력 신호 및 제 2 인증 입력 신호는 상기 차량과 관련된 적어도 하나의 제 2 센서에 의해 획득될 수 있다. 상기 진입 인증 컴포넌트는 제 1 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 1 인증 자격 증명에 기초하여 제 1 인증 상태를 결정할 수 있다. 상기 진입 인증 컴포넌트는 제 2 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 2 인증 자격 증명에 기초하여 제 2 인증 상태를 결정할 수 있다. 상기 액세스 제어 컴포넌트는 상기 제 1 인증 상태 및 제 2 인증 상태에 적어도 부분적으로 기초하여 복수의 액세스 허용 레벨들 중 액세스 허용 레벨을 식별할 수 있다. 상기 액세스 제어 컴포넌트는, 상기 액세스 허용 레벨에 응답하여, 상기 차량을 통해 이용가능한 기능들의 세트 중 서브세트를 식별할 수 있다. 상기 디지털 어시스턴트 어플리케이션는 상기 기능들의 서브세트에 대한 차량 액세스(vehicular access) 및 상기 기능들의 적어도 서브세트와 관련된 오디오 출력 신호를 제공할 수 있다.
본 발명의 다른 양상에 따르면, 차량 진입 이벤트들의 다중 인자 진입 인증 방법이 개시된다. 상기 방법은, 차량에 설치된 제 1 센서에 의해 획득된 적어도 하나의 센서 신호를, 디지털 어시스턴트 어플리케이션을 포함하는 데이터 프로세싱 시스템에 의해 수신하는 단계를 포함할 수 있다. 상기 방법은 데이터 프로세싱 시스템에 의해, 상기 적어도 하나의 센서 신호에 기초하여, 상기 차량 안으로의 진입 이벤트를 결정하는 단계를 포함할 수 있다. 진입 이벤트는 사용자가 상기 차량에 진입함을 나타낼 수 있다. 상기 방법은 데이터 프로세싱 시스템에 의해, 상기 차량 안으로의 진입 이벤트에 응답하여, 제 1 인증 입력 신호 및 제 2 인증 입력 신호를 수신하는 단계를 포함할 수 있다. 상기 제 1 인증 입력 신호 및 제 2 인증 입력 신호는 상기 차량과 관련된 적어도 하나의 제 2 센서에 의해 획득될 수 있다. 상기 방법은 데이터 프로세싱 시스템에 의해, 제 1 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 1 인증 자격 증명에 기초하여 제 1 인증 상태를 결정하는 단계를 포함할 수 있다. 상기 방법은 데이터 프로세싱 시스템에 의해, 제 2 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 2 인증 자격 증명에 기초하여 제 2 인증 상태를 결정하는 단계를 포함할 수 있다. 상기 방법은 데이터 프로세싱 시스템에 의해, 상기 제 1 인증 상태 및 제 2 인증 상태에 적어도 부분적으로 기초하여 복수의 액세스 허용 레벨들 중 액세스 허용 레벨을 식별하는 단계를 포함할 수 있다. 상기 방법은 데이터 프로세싱 시스템에 의해, 상기 액세스 허용 레벨에 응답하여, 상기 차량을 통해 이용가능한 기능들의 세트 중 서브세트를 식별하는 단계를 포함할 수 있다. 상기 방법은 데이터 프로세싱 시스템에 의해, 상기 기능들의 서브세트에 대한 차량 액세스(vehicular access)를 제공하는 단계를 포함할 수 있다.
이들 및 다른 양상들 및 구현예들이 아래에서 상세히 설명된다. 전술한 정보 및 다음의 상세한 설명은 다양한 양상 및 구현의 예시적인 일례를 포함하고 청구된 양상 및 구현의 특성 및 특성을 이해하기 위한 개요 또는 프레임워크를 제공한다. 도면은 다양한 양상 및 구현에 대한 예시 및 추가 이해를 제공하며, 본 명세서에 포함되어 본 명세서의 일부를 구성한다.
첨부된 도면들은 축척으로 그려진 것으로 의도되지 않는다. 다양한 도면들에서 유사한 참조 번호 및 명칭은 유사한 요소를 나타낸다. 명확성을 위해, 모든 도면에 모든 컴포넌트가 라벨링되는 것은 아니다.
도 1은 복수의 액세스 허용 레벨에 기초하여 사용자를 인증하고 차량을 통해 이용가능한 기능들에 대한 사용자 액세스를 제어하기 위한 예시적인 시스템을 도시한다.
도 2는 도 1에 도시된 차량의 평면도를 도시하고, 차량과 관련된 센서들 및 전자 디바이스들을 도시한다.
도 3은 도 1에 도시된 예시적인 시스템을 사용하여 차량 진입 이벤트의 다중 인자 진입 인증 방법의 일례를 도시한다.
도 4는 예시적인 컴퓨터 시스템의 블록도이다.
다음은 다중 인자 사용자 인증 및 차량 환경과 관련된 기능들에 대한 사용자 액세스의 제어를 위한 방법들, 장치들 및 시스템들과 관련된 다양한 개념들 및 구현예들에 대한 보다 상세한 설명들이다. 위에서 소개되고 아래에서 더 상세하게 논의되는 다양한 개념들은 수많은 방식으로 구현될 수 있다.
일반적으로, 본 발명은 차량 환경에서 차량 진입 이벤트들의 진입 인증 및 액세스 제어를 위한 방법 및 시스템에 관한 것이다. 비록, 전자 기술 및 정보 기술(IT) 시스템을 기반으로한 차량 내(in-vehicle) 피처들은 사용자 경험을 향상시킬 수 있지만, 차량 내 피처들은 다른 위험과 기술적인 문제를 야기할 수 있다. 차량 내 온라인 연결 또는 차량 내 엔터테인먼트(ICE) 시스템(또한, 차량 내 인포테인먼트(IVI) 시스템이라고도 함)의 이용가능성은 종종 운전자가 산만을 야기하며, 사고 위험을 증가시킬 수 있다. 운전 중에, 통신들(예컨대, 이메일, 메시지 또는 전화 통화)을 개시하거나 응답하거나, IVI 시스템에서 렌더링하기 위해 멀티미디어 파일을 검색 또는 액세스하거나, 또는 온라인 액션들(예컨대, 온라인 쇼핑 또는 온라인 예약)을 시작하려는 사용자의 시도는 매우 심각하고 위험한 사고로 이어질 수 있다.
또한, 인터넷으로의 차량 연결이 주로 무선 클라이언트 디바이스를 통해 발생함을 감안하면, 예를 들어, 온라인 데이터, 시스템 또는 어플리케이션에 액세스하는 것을 포함하는 차량 내 IT 피처들의 범위의 증가는 무선 네트워크의 대역폭과 같은 통신 리소스에 부담을 줄 수 있다. 또한, 연결하기 위해 차량이 모바일 디바이스에 의존함으로써, 차량이 비교적 빠른 속도로 움직일 때 또는 차량이 무선 네트워크의 커버리지 영역으로부터 멀어질 때 연결성이 열악해질 수 있다. 연결 상태가 좋지 않으면 차량이 액세스하는 서비스 또는 데이터가 자주 중단될 수 있다.
또한, 차량은 예를 들어 가족, 친구 또는 심지어 낯선 사람(예를 들어, 렌터카) 사이에서 공유될 수 있기 때문에, 데이터 또는 보안에 민감한 데이터 또는 시스템에 액세스하기 위한 차량 내 피처의 가용성은, 사용자 개인 정보 및 데이터 또는 사용자 보안을 위태롭게 할 수 있다. 예를 들어, 차량을 통해 집 차고 도어를 원격으로 잠금 해제하는 기능은 그러한 기능이 차량의 운전자 또는 승객에게 액세스가능하게 되면 사용자에게 심각한 위협 또는 위험(예를 들어, 범죄)을 야기할 수 있다. 일부 잠재적인 자동차 기능들(예컨대, 자동 및 원격 차량 도어 잠금/잠금 해제 또는 차량 창문의 자동 및 원격 제어)은 예를 들어, 차량 승객에게 거부되지 않는 경우 우려를 유발할 수 있다. 또한 차량을 통한 데이터에 대한 제한되지 않는 액세스는, 해당 데이터를 공개적으로 노출할 위험을 증가시킬 수 있다.
본 개시에서, 디지털 어시스턴트 어플리케이션을 포함하는 데이터 프로세싱 시스템은 차량과 관련된 다양한 기능의 핸즈프리 제어를 허용할 수 있다. 디지털 어시스턴트 어플리케이션은 대화형 디지털 어시스턴트를 포함할 수 있으며, 대화형 디지털 어시스턴트는 대화 형식으로 사용자와의 오디오 기반 상호작용을 제공한다. 예를 들어, 사용자는 디지털 어시스턴트 어플리케이션에게 말할 수 있으며 디지털 어시스턴트 어플리케이션은(1) 사용자로부터 입력된 오디오 신호를 정확하게 해석하고,(2) 사용자에게 재생하기 위한 오디오 출력 신호로 응답하며,(3) 오디오 입력 신호로부터 식별된 작업 또는 동작을 수행하거나, 또는 이들의 조합을 수행할 수 있다. 예를 들어, 운전자 또는 승객은 멀티미디어 파일의 렌더링, 차량 창문의 개방, 차량 도어의 잠금 또는 잠금해제, 차량 내의 에어컨 조정, 집 차고 도어의 잠금 또는 잠금해제, 또는 차량을 통해 이용가능한 다른 기능들을 음성으로 요청할 수 있다. 디지털 어시스턴트 어플리케이션은 가청 요청에 기초하여 요청된 기능을 식별하고 실행을 야기할 수 있다. 핸즈프리 사용자 상호작용을 허용함으로써, 디지털 어시스턴트 어플리케이션은 운전자를 산만시킬 가능성을 크게 증가시키지 않고도 다양한 차량 내 기능을 제공할 수 있다.
잠재적으로 열악한 연결성으로 인한 서비스 중단을 방지하기 위해, 디지털 어시스턴트 어플리케이션(및 데이터 프로세싱 시스템)은 차량에서 실행될 수 있다. 디지털 어시스턴트 어플리케이션이 차량에서 국부적으로(예를 들어, 차량의 하나 이상의 전자 디바이스 내에서) 실행되도록 함으로써, 디지털 어시스턴트 어플리케이션이 차량 연결 상태(예를 들어, 인터넷에 또는 모바일 디바이스에)에 관계없이 차량 내 사용자들에게 이용가능해질 수 있다. 또한, 디지털 어시스턴트 어플리케이션은 재생 목록, 멀티미디어 파일, 사용자 보안 자격 증명(예컨대, 다양한 서비스들에 대한 로그인 사용자 이름, 비밀번호 또는 패스 코드), 다양한 서비스들에 대한 사용자 액세스 허용 레벨들, 또는 이들의 조합과 같은 사용자 관련 데이터를 로컬적으로 저장할 수 있어, 차량의 연결 상태와 무관하게 이러한 데이터에 대한 액세스를 허용할 수 있다. 디지털 어시스턴트 어플리케이션(및 데이터 프로세싱 시스템)은 차량, 모바일 디바이스 또는 원격 컴퓨터 시스템(예를 들어, 클라우드) 또는 이들의 조합에서 실행될 수 있다. 예를 들어, 다양한 디지털 어시스턴트 어플리케이션 인스턴스는 별도의 플랫폼에서 실행될 수 있다.
데이터의 로컬(차량 내에) 저장 및 액세스는, 신뢰할 수 있는 사용자 인증(또는 차량 진입 인증) 및 신뢰할 수 있는 데이터 보안 척도를 필요로 한다. 본 발명의 데이터 프로세싱 시스템(및 대응하는 디지털 어시스턴트 어플리케이션)은 다중 인자 사용자 인증을 이용할 수 있다. 본 명세서에서 사용되는 바와 같이, 다중 인자 인증은 2 이상의 인증 데이터 입력들(또는 인증 입력 신호들)에 기초하는 2 이상의 인증 기술들을 수반하는 인증 방법을 지칭한다. 또한, 데이터 프로세싱 시스템은 개별 사용자들에 대해 별도의 데이터 계정을 유지할 수 있다. 데이터 프로세싱 시스템은 데이터 보안을 강화하기 위해 데이터 계정(또는 보안에 민감한 해당 데이터)을 암호화할 수 있다. 데이터 프로세싱 시스템(또는 대응하는 디지털 어시스턴트 어플리케이션)은 다중 인자 인증 및 기정의된 액세스 허용 레벨을 사용하여, 그 사용자에게 할당된 액세스 허용 레벨(들)을 넘어 상기 사용자가 기능들 또는 데이터에 액세스할 수 없음을 보장할 수 있다.
사용자 인증에서, 데이터 프로세싱 시스템(또는 대응하는 디지털 어시스턴트 어플리케이션)은 사용자를 산만하게 하지 않는 인증 기술들(예를 들어, 수동 또는 실질적인 물리적 사용자 개입을 포함하지 않음)을 사용할 수 있다. 예를 들어, 지문 기반(또는 다른 생체 인식 기반) 인증은 사용자의 상당한 신체적 및 정신적 노력을 수반할 수 있으며, 사용자(특히, 운전자)의 주의를 산만하게할 수 있다. 또한, 로그인 사용자 이름 및 패스워드와 같은 다른 인증 기술은 오디오 입력 기반의 인증에 적합하지 않을 수 있다. 청각적으로 제공될 때, 이러한 인증 자격 증명들은 그들의 비밀성을 상실할 수 있고 그리고 인증 프로세스 동안 차량의 다른 사용자에게 노출될 수 있다. 데이터 프로세싱 시스템(또는 대응하는 디지털 어시스턴트 어플리케이션)은 전자 열쇠(key fob) 인증, 모바일 디바이스 식별자들의 자동 획득에 기초한 인증, 얼굴 인식, 화자(speaker) 인식, 또는 이들의 조합과 같이, 사용자의 실질적인 물리적 액션 또는 노력을 수반하지 않는 인증 기술들을 사용할 수 있다.
본 명세서에 기술된 시스템 및 방법은 차량에 설치된 제 1 센서에 의해 획득된 적어도 하나의 센서 신호를 수신하는 디지털 어시스턴트 어플리케이션을 포함하는 데이터 프로세싱 시스템을 포함할 수 있다. 데이터 프로세싱 시스템은 적어도 하나의 센서 신호에 기초하여 차량으로의 진입 이벤트(entry event)를 결정할 수 있다. 데이터 프로세싱 시스템은 차량으로의 진입 이벤트에 응답하여, 차량과 관련된 복수의 센서들로부터 복수의 인증 입력 신호들을 수신할 수 있다. 데이터 프로세싱 시스템은 복수의 인증 입력 신호들 및 복수의 인증 자격 증명들(authentication credentials)에 기초하여 복수의 인증 상태들을 결정할 수 있다. 데이터 프로세싱 시스템은 복수의 인증 상태들에 적어도 부분적으로 기초하여 복수의 액세스 허용 레벨들 중 하나의 액세스 허용 레벨을 식별할 수 있다. 데이터 프로세싱 시스템은 액세스 허용 레벨에 응답하여 차량을 통해 이용가능한 기능들의 세트의 서브세트를 식별하고, 기능들의 서브세트에 대한 차량 액세스를 제공할 수 있다.
본 명세서에서 논의된 시스템이 사용자에 관한 개인 정보를 수집하거나 개인 정보를 이용할 수 있는 상황인 경우, 사용자는 프로그램 또는 피처들이 개인 정보(예를 들어, 사용자의 소셜 네트워크, 소셜 활동들 또는 행위들, 사용자의 선호도 또는 사용자의 위치 등에 관한 정보)를 수집할 수 있는지의 여부를 제어할 수 있으며 또는 사용자와 관련이 있을 수 있는 콘텐츠 서버 또는 다른 데이터 프로세싱 시스템으로부터 콘텐츠를 수신할지 여부 또는 수신 방법을 제어할 수 있다. 또한, 특정 데이터는 저장되거나 사용되기 전에 하나 이상의 방식으로 익명화될 수 있어서, 파라미터를 생성할 때 개인 식별 정보가 제거된다. 예를 들어, 사용자의 신원이 익명화될 수 있어서, 사용자에 대한 그 어떤 개인 식별 정보도 결정될 수 없거나, 또는 사용자의 지리적 위치는 위치 정보가 획득되는 곳에 대해 일반화되어(가령, 도시 레벨, 우편 번호 혹은 주 레벨과 같이), 사용자의 특정 위치가 결정될 수 없다. 따라서, 사용자는 자신에 관한 정보가 어떻게 수집되는지 그리고 컨텐츠 서버에 의해 어떻게 사용되는지에 대한 제어권을 가질 수 있다.
도 1은 복수의 액세스 허용 레벨들에 기초하여 사용자를 인증하고 차량을 통해 이용가능한 기능들에 대한 사용자 액세스를 제어하기 위한 예시적인 시스템(100)을 도시한다. 시스템(100)은 하나 이상의 원격 데이터 프로세싱 시스템(102), 각각의 차량 데이터 프로세싱 시스템(140)과 관련되는 하나 이상의 차량들(130)(예를 들어, 수동 또는 자율 자동차, 트럭, 오토바이, 비행기, 보트 또는 다른 운송 기계)및 하나 이상의 모바일 클라이언트 디바이스(150)(예를 들어, 스마트 폰, 태블릿 또는 스마트 워치)를 포함할 수 있다. 시스템(100)은 원격 데이터 프로세싱 시스템(102)을 하나 이상의 차량(130), 하나 이상의 모바일 클라이언트 디바이스(150) 또는 이들의 조합에 통신가능하게 연결하는 네트워크(148)를 포함할 수 있다. 시스템(100)은 네트워크를 통해 원격 데이터 프로세싱 시스템(102), 하나 이상의 차량들(130), 하나 이상의 모바일 클라이언트 디바이스(150) 또는 이들의 조합에 네트워크(148)를 통해 통신가능하게 연결된 하나 이상의 데이터 제공자(152)(또는 그 통신 디바이스들)를 포함할 수 있다.
원격 데이터 프로세싱 시스템(102)은 클라우드 데이터 프로세싱 시스템, 기업 데이터 프로세싱 시스템, 홈 데이터 프로세싱 시스템 또는 이들의 조합을 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 적어도 하나의 프로세서를 갖는 적어도 하나의 서버를 포함할 수 있다. 예를 들어, 원격 데이터 프로세싱 시스템(102)은 적어도 하나의 데이터 센터 또는 서버 팜에 위치한 복수의 서버를 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 다수의 논리적으로 그룹화된 서버를 포함할 수 있고 분산 컴퓨팅 기술을 용이하게 한다. 논리적 서버 그룹은 데이터 센터, 서버 팜 또는 머신 팜이라 지칭될 수 있다. 서버들은 지리적으로 분산될 수 있다. 데이터 센터 또는 머신 팜은 단일 엔터티로 관리되거나, 머신 팜은 복수의 머신 팜을 포함할 수 있다. 각 머신 팜 내의 서버는 이종(heterogeneous)일 수 있다-하나 이상의 서버들 또는 머신들은 하나 이상의 운영 체제 플랫폼 유형에 따라 작동할 수 있다. 원격 데이터 프로세싱 시스템(102)은 예를 들어 기업 데이터 센터에 위치한 관련 스토리지 시스템과 함께 하나 이상의 고밀도 랙 시스템에 저장된 데이터 센터의 서버를 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)의 각각의 컴포넌트는 적어도 하나의 프로세싱 유닛, 서버, 가상 서버, 회로, 엔진, 에이전트, 기기, 또는 다른 컴퓨팅 디바이스와 함께 데이터 저장소(118)와 통신하도록 구성된 프로그램가능한 논리 어레이와 같은 다른 논리 디바이스를 포함할 수 있다.
원격 데이터 프로세싱 시스템(102)은 인터페이스(104)를 포함할 수 있다. 데이터 프로세싱 시스템(102)은 오디오 기반 입력을 분석하는 자연어 프로세서(NPL) 컴포넌트(106)를 포함할 수 있다. 데이터 프로세싱 시스템(102)은 시스템(100)의 다른 디바이스의 인터페이스를 검출하고 관리하기 위한 인터페이스 관리 컴포넌트(108)를 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 오디오 기반 신호를 생성하기 위한 오디오 신호 생성기 컴포넌트(110)를 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 지시 액션(direct action) 어플리케이션 프로그래밍 인터페이스(API)(112)를 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 오디오 기반 입력 신호에 대한 응답을 선택하기 위한 응답 선택기 컴포넌트(114)를 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 원격 데이터 프로세싱 시스템(102)에 의해 수신된 오디오 기반 입력을 검증하기 위한 검증 엔진(또는 검증 컴포넌트)(116)을 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 원격 데이터 프로세싱 시스템(102)이 파라미터(120), 정책(122), 응답 데이터(124) 및 템플릿(126)을 저장할 수 있는 데이터 저장소(118)를 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 사용자들에 의해 요청된 작업 또는 액션을 수행하는 것을 포함하여 차량(들)(130) 또는 모바일 클라이언트 디바이스(들)(150)의 사용자들과의 대화를 핸들링하고 관리하기 위한 디지털 어시스턴트 어플리케이션(128)(또한 디지털 어시스턴트 시스템으로 지칭됨)을 포함할 수 있다.
인터페이스(104)는 원격 데이터 프로세싱 시스템(102)의 컴포넌트들 사이의 통신, 원격 데이터 프로세싱 시스템(102)과 시스템(100)의 디바이스들 또는 시스템들 사이의 통신, 또는 이들의 조합을 가능하게 할 수 있다. 인터페이스(104)는 시스템(100)의 컴포넌트들이 서로 통신할 수 있게 하는 데이터 인터페이스 또는 네트워크 인터페이스일 수 있다. 데이터 프로세싱 시스템(102)의 인터페이스(104)는 액션 데이터 구조, 오디오 신호 또는 다른 데이터를 포함하는 하나 이상의 데이터 패킷을 네트워크(148)를 통해 모바일 클라이언트 디바이스(150) 또는 차량(130)에 제공하거나 전송할 수 있다. 예를 들어, 데이터 프로세싱 시스템(102)은 데이터 저장소(118)로부터 또는 상기 오디오 신호 발생기(110)로부터의 출력 신호를 모바일 클라이언트 디바이스(150)에 제공할 수 있다. 또한, 데이터 프로세싱 시스템(102)은 데이터 패킷 전송을 통해, 모바일 클라이언트 디바이스(150) 또는 차량(130)에 지시하여, 액션 데이터 구조에 표시된 기능을 수행하게 한다. 출력 신호는 데이터 프로세싱 시스템(102)(또는 다른 컴퓨팅 디바이스)으로부터 모바일 클라이언트 디바이스(150) 또는 차량(130)으로, 하나 이상의 데이터 패킷(또는 다른 통신 프로토콜)로서 획득, 생성, 변환 또는 전송될 수 있다.
NLP 컴포넌트(106)는 예를 들어, 차량(130) 또는 모바일 클라이언트 디바이스(150)로부터 입력 오디오 신호를 수신할 수 있다. 데이터 프로세싱 시스템(102)은 클라이언트 디바이스(128) 또는 차량(140)으로부터 입력 오디오 신호를 수신할 수 있다. 차량(130) 또는 모바일 클라이언트 디바이스(150)의 사용자는 오디오 입력 신호를 제공할 수 있고, 차량(130) 또는 모바일 클라이언트 디바이스(150)는 오디오 입력 신호를 NLP 컴포넌트(106)에 의한 프로세싱를 위해 원격 데이터 프로세싱 시스템(102)으로 전송할 수 있다. NLP 컴포넌트(106)는 입력 오디오 신호를 저장된 대표적인 오디오 파형들 세트와 비교하고, 가장 가까운 매치들을 선택함으로써, 수신된 입력 오디오 신호를 인식된 텍스트로 변환할 수 있다. 대표적인 파형들은 예를 들어, 복수의 개인들로부터의 매우 큰 세트의 오디오 신호들에 걸쳐 생성될 수 있다. 입력 오디오 신호가 인식된 텍스트로 변환되면, NPL 컴포넌트(106)는 텍스트들을, 액션들 또는 출력 오디오 신호와 예를 들어, 학습 페이즈를 통해 연관되는 단어들과 매칭시킬 수 있다.
입력 오디오 신호로부터, NLP 컴포넌트(106)는 사용자(예를 들어, 차량(130)의 사용자 또는 모바일 클라이언트 디바이스(150)의 사용자)로부터의 적어도 하나의 요청 또는 상기 요청에 대응하는 적어도 하나의 트리거 또는 핫 키워드를 식별할 수 있다. NLP 컴포넌트(106)(또는 다른 컴포넌트)는 입력 오디오 신호를 대응하는 텍스트 신호로 번역할 수 있으며, 텍스트 신호에 기초하여 요청을 식별할 수 있다. 요청은 입력 오디오 신호의 의도 또는 주제를 나타낼 수 있다. 트리거 키워드는 수행될 수 있는 액션의 유형을 나타낼 수 있다. 예를 들어, NLP 컴포넌트(106)는 입력 오디오 신호를 구문해석(parse)하여, 차량의 윈도우를 열고, 음악 재생 목록에서 다음 오디오 파일로 건너뛰고, 통화를 시작하고, 메시지(예를 들어, 이메일 메시지 또는 단문 메시지(Short Message Service: SMS))를 작성 및 송신하고, 특정 주소로의 GPS(Global Positioning System) 내비게이션을 시작하고, 로컬 또는 원격으로 저장된 데이터에 액세스하고, 스트리밍 세션을 시작하고, 클라이언트 어플리케이션을 시작하고, 차고 문을 열거나 또는 닫고, 홈 관련 설정들을 제어하고 또는 이들의 조합을 수행하기 위한 적어도 하나의 요청을 식별할 수 있다. 트리거 키워드는 수행할 액션을 나타내는 적어도 하나의 단어, 문구, 어근 또는 부분 단어 또는 파생어를 포함할 수 있다. 예를 들어, 트리거 키워드 "go" 또는 "ok" 또는 "hey" 이다.
인터페이스 관리 컴포넌트(108)는 차량(들)(130) 및 모바일 클라이언트 디바이스(들)(150)의 인터페이스(들)와 같은 시스템(100) 내의 다른 디바이스의 인터페이스를 검출하고 관리할 수 있다. 응답 선택기 컴포넌트(114)는 식별된 요청과 관련된 사용자에게 전송하기 위한 응답을 생성할 수 있다. 예를 들어, NLP 컴포넌트(106)가 요청 또는 요청에 대응하는 트리거 또는 핫 키워드를 식별하면, 응답 선택기 컴포넌트(114)는 데이터 저장소(118)에 액세스하여 정보 또는 컨텐츠를 획득하여 사용자에게 전송하기 위한 응답을 생성할 수 있다. 예를 들어, 응답 선택기 컴포넌트(114)는 데이터 저장소(118)의 응답 데이터(124)로부터 문구, 컨텐츠 아이템 또는 이들의 조합을 얻을 수 있다.
오디오 신호 발생기 컴포넌트(110)는 사용자에 대한 응답의 일부로서 전송하기 위한 출력 음성 신호를 생성 또는 획득할 수 있다. 예를 들어, 오디오 신호 생성기 컴포넌트(110)는 응답 선택기 컴포넌트(114)에 의해 선택되거나 획득된 문구 또는 컨텐츠 아이템과 관련된 하나 이상의 오디오 신호를 생성 또는 선택할 수 있다. 예를 들어, 요청이 이행되면, 신호 발생기 컴포넌트(110)는 "액션이 완료되었다"는 문구에 대응하는 오디오 출력 신호를 생성할 수 있다.
NLP 컴포넌트(106)는 수신된 입력 오디오 신호에 기초하여, 원격 데이터 프로세싱 시스템(102), 차량(130), 모바일 클라이언트 디바이스(150), 또는 이들의 조합에 의해 수행될 수 있는 작업 또는 액션(차량의 윈도우를 열고, 음악 재생 목록에서 다음 오디오 파일로 건너뛰고, 통화를 시작하고, 메시지(예를 들어, 이메일 메시지 또는 단문 메시지(Short Message Service: SMS))를 작성 및 송신하고, 특정 주소로의 GPS(Global Positioning System) 내비게이션을 시작하고, 로컬 또는 원격으로 저장된 데이터에 액세스하고, 스트리밍 세션을 시작하고, 클라이언트 어플리케이션을 시작하고, 차고 문을 열거나 또는 닫고, 홈 관련 설정들을 제어하고 또는 이들의 조합을 수행하기 위한)을 식별할 수 있다. 작업 또는 액션의 식별에 응답하여, 원격 데이터 프로세싱 시스템(102)의 지시 액션 API(112)는 하나 이상의 액션 데이터 구조를 생성할 수 있다. 하나 이상의 액션 데이터 구조는 식별된 액션 또는 요청을 만족시키기 위한 액션을 실행하기 위한 데이터 또는 명령을 포함할 수 있다. 활동 데이터 구조는 JSON 형식의 데이터 구조 또는 XML 형식의 데이터 구조일 수 있다.
식별된 액션 또는 작업에 따라, 지시 액션 API(112)는 요청을 이행하는데 필요한 파라미터를 식별하는 코드 또는 대화 스크립트를 실행할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 차량(130), 클라이언트 디바이스(128) 또는 데이터 제공자(154)로 전송하기 위한 메시지에 하나 이상의 액션 데이터 구조를 포함할 수 있다. 디지털 어시스턴트 어플리케이션(128) 또는 지시 액션 API(112)는 NLP 컴포넌트(106)에 의해 식별된 요청에 기초하여 메시지의 목적지를 결정할 수 있다. 예를 들어, 입력 오디오 신호가 "창문 열기(open a wondow)"를 포함하는 경우, NLP 컴포넌트(106)는 액션 단어 "창문 열기"를 식별할 수 있으며, 디지털 어시스턴트 어플리케이션(128) 또는 지시 액션 API(112)는 하나 이상의 액션 데이터 구조를 차량(130)으로의 전송을 위한 응답으로 패키징할 수 있다. 지시 액션 API(112)는 요청을 생성한 사용자와 어떤 차량이 연관되어 있는지를 결정하기 위해 응답 데이터(124)로부터 차량 식별자(ID) 또는 차량 IP 주소에 액세스할 수 있다. 하나 이상의 액션 데이터 구조를 수신하면, 차량(140)은 액션 데이터 구조(들)를 프로세싱하여 차량의 창문을 열 수 있다. 만일, 입력 오디오 신호가 "라이온 프린스라는 영화를 스트리밍해라"에 해당한다면, NLP 컴포넌트(106)는 액션 단어 "스트림 영화; 라이온 프린스"를 식별할 수 있다. 디지털 어시스턴트 어플리케이션(128) 또는 지시 액션 API(112)는 요청된 영화의 스트리밍을 제공하는 데이터 제공자(154)를 식별하고, 하나 이상의 액션 데이터 구조를 그 데이터 제공자 또는 차량(또는 모바일 클라이언트 디바이스(150))에 대한 메시지로 패키징하여, 이들 사이에서 스트리밍 세션을 개시할 수 있다.
하나 이상의 액션 데이터 구조는 요청을 완료하기 위한 정보를 포함할 수 있다. 예를 들어, 하나 이상의 활동 데이터 구조는 요청을 완료하거나 이행하는데 사용되는 속성들(attributes)을 포함하는 XML 또는 JSON 형식의 데이터 구조를 포함할 수 있다. 속성은 차량(130)의 위치, 모바일 클라이언트 디바이스(150)의 위치, 차량(130) 또는 모바일 클라이언트 디바이스(150)와 연관된 사용자의 액세스 허용 레벨(또는 인증 레벨), 차량 식별자, 인터페이스 식별자, 차량 상태 또는 요청 상태를 포함할 수 있다. 요청 상태는 액션이 이행되기 전에 충족되어야하는 하나 이상의 속성을 포함할 수 있다. 예를 들어, "좋아, 노래를 변경해(Ok, change the song)" 라는 요청의 경우, 요청 상태는 {requestor:[authorized, passenger]}({요청자:[인증됨, 승객]})이라는 속성을 가질 수 있으며, 이는 요청자가 승인된 사용자임을 나타낸다. 디지털 어시스턴트 어플리케이션(128) 또는 검증 엔진(116)은 액세스 허용 레벨 속성이 비인가된 사용자를 나타내는 경우, 액션 데이터 구조의 전송을 차단(또는 대응하는 액션의 실행을 차단)하기로 결정할 수 있다.
지시 액션 API(112)는 액션 데이터 구조에 포함할 필드 또는 속성을 결정하기 위해 저장소(118)로부터 템플릿(126)을 검색할 수 있다. 지시 액션 API(112)는 필요한 파라미터를 결정하고, 정보를 액션 데이터 구조로 패키징할 수 있다. 지시 액션 API(112)는 데이터 구조의 속성에 대한 정보를 얻기 위해 저장소(118)로부터 컨텐츠를 검색할 수 있다. 지시 액션 API(112)는 입력 오디오 신호로부터의 데이터로 필드를 채울 수 있다. 지시 액션 API(112)는 데이터 제공자(152), 차량(130), 모바일 클라이언트 디바이스(150) 또는 이들의 조합으로부터의 데이터로 필드를 채울 수 있다. 지시 액션 API(112)는 필드를 채울 때 사용자에게 추가 정보를 요구할 수 있다. 템플릿(126)은 차량 헤드 유닛을 통한 미디어 파일 재생, 메시지에 응답하기, 차량 내 기능 수행, 통화 시작, 메시지 작성 및 전송, 스트리밍 세션 시작 또는 이들의 조합 등과 같은 상이한 유형의 액션들에 대해 표준화될 수 있다. 원격 데이터 프로세싱 시스템(102)은 액션 데이터 구조를 차량(130)의 차량 데이터 프로세싱 시스템(140)으로 전송할 수 있으며, 이는 액션 데이터 구조에 필드 및 속성을 추가할 수 있다.
검증 엔진(116)는 액션 데이터 구조와 연관된 액션 또는 기능이 실행 또는 이행되어야 하는지의 여부를 검증 또는 결정할 수 있다. 예를 들어, 검증 엔진(116)은 요청을 하는 사용자의 액세스 허용 레벨(또는 허용 레벨)을 체크할 수 있으며, 상기 액션 또는 기능이 사용자의 액세스 허용 레벨의 범위 내에 있는지 여부를 체크할 수 있다. 검증 엔진(116)은 액션 데이터 구조 내의 상태 속성을 통해 또는 데이터 저장소(118) 내에 저장된 데이터를 통해 액세스 허용 레벨을 확인할 수 있다. 검증 엔진(116)은 성공적인 검증시에 액션 또는 기능이 실행될 수 있게 한다.
요청자가 적절한 액세스 허용 레벨을 갖는 경우에도, 검증 엔진(116)은 액션의 실행을 허용할지 거부할지를 결정할 때에 지방 법령 또는 규정들과 같은 다른 인자들을 여전히 고려할 수 있다. 예를 들어, "스트림 '라이온 프린스' 영화"를 나타내는 입력 오디오 신호를 수신하고, 영화가 운전자 앞에 위치한 디스플레이 디바이스로 스트리밍될 것이라는 결정에 응답하여, 검증 엔진(116)은 스트리밍 액션의 이행을 거부할 수 있는데, 왜냐하면 이렇게 하는 것이 부적절할 수도 있으며 또는 지방 법률 또는 규정에 의하면 차량 운전자를 산만하게 할 수 있는 시각적 콘텐츠를 제공하는 것이 불법이기 때문이다. 하지만, 상기 영화가 앞 좌석 뒤에 위치한 디스플레이 디바이스로 스트리밍될 경우(예를 들어, 운전자는 디스플레이 디바이스 상에 렌더링된 콘텐츠를 볼 수 없음), 검증 엔진(116)은 영화를 스트리밍하는 것이 적절하다고 결정할 수 있다. 따라서, 검증 엔진(116)은 스트리밍 액션이 이행되도록할 수 있다.
디지털 어시스턴트 어플리케이션(128)은 사용자에 의해 요청된 작업 또는 액션을 수행하는 것을 포함하여, 차량(들)(130) 또는 모바일 클라이언트 디바이스(150)의 사용자와의 대화를 핸들링하고 관리할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 인터페이스(104), NLP 컴포넌트(106), 인터페이스 관리 컴포넌트(108), 오디오 신호 생성기(110), 지시 액션 API(112), 응답 선택기(114), 검증 엔진(116), 데이터 저장소(118) 또는 이들의 조합과 같은 원격 데이터 프로세싱 시스템(102)의 다양한 컴포넌트와 관련된 동작들을 개시, 종료 또는 조정할 수 있다. 예를 들어, 디지털 어시스턴트 어플리케이션(128)은 원격 데이터 프로세싱 시스템(102)의 컴포넌트들의 인스턴스들(또는 이들 컴포넌트들의 조합의 인스턴스)을 개시(예를 들어, 호출) 및 종료할 수 있다. 디지털 어시스턴트(128)는 각각의 사용자 대화에 대한 상태를 생성, 모니터링 및 업데이트할 수 있다. 인터페이스(104), NLP 컴포넌트(106), 인터페이스 관리 컴포넌트(108), 오디오 신호 생성기(110), 지시 액션 API(112), 응답 선택기(114), 검증 엔진(116), 데이터 저장소(118) 또는 이들의 조합은 디지털 어시스턴트 어플리케이션(128)의 일부일 수 있다. 원격 데이터 프로세싱 시스템(102)은 각각의 대화, 각각의 차량(130), 또는 각각의 모바일 클라이언트 디바이스(150)에 대해 디지털 어시스턴트 어플리케이션(128)의 개별 인스턴스를 개시할 수 있다.
네트워크(148)는 인터넷, 로컬, 광역, 메트로 또는 다른 영역 네트워크들, 인트라넷, 위성 네트워크, 음성 또는 데이터 이동 전화 통신 네트워크와 같은 다른 컴퓨터 네트워크 및 이들의 조합와 같은 컴퓨터 네트워크를 포함할 수 있다. 네트워크(148)는 웹 페이지, 웹 사이트, 도메인 이름, URL 또는 데이터 제공자(152)와 같은 정보 리소스에 액세스하기 위해 원격 데이터 프로세싱 시스템(102), 모바일 클라이언트 디바이스(150) 및 차량(130)에 의해 사용될 수 있다. 예를 들어, 원격 데이터 프로세싱 시스템(102)은 네트워크(148)를 통해 차량(130)과 관련된 위치와 같은 특정 위치에 대한 트래픽 데이터를 제공하는 데이터 제공자(152)에 액세스할 수 있다.
네트워크(148)는 예를 들어, 포인트-투-포인트 네트워크, 브로드 캐스트 네트워크, 광역 네트워크, 근거리 네트워크, 전화통신 네트워크, 데이터 통신 네트워크, 컴퓨터 네트워크, 비동기 전송 모드(ATM) 네트워크, SONET(Synchronous Optical Network) 네트워크, SDH(Synchronous Digital Hierarchy) 네트워크, 무선 네트워크 또는 유선네트워크 및 이들의 조합을 포함한다. 네트워크(148)는 적외선 채널 또는 위성 대역과 같은 무선 링크를 포함할 수 있다. 네트워크(148)의 토폴로지는 버스, 스타 또는 링 네트워크 토폴로지를 포함할 수 있다. 네트워크(148)는 고급 휴대 전화 프로토콜(AMPS), 시분할 다중 액세스(TDMA), 코드 분할 다중 액세스(CDMA), GSM(global system for mobile communication), GPRS(General Packet Radio Services) 또는 UMTS(Universal Mobile Telecommunications System)를 포함하여, 모바일 디바이스들 사이에서 통신하는데 사용되는 임의의 프로토콜들 이용하는 모바일 텔레폰 네트워크를 포함할 수 있다. 상이한 유형의 데이터는 상이한 프로토콜을 통해 전송될 수 있거나, 또는 동일한 유형의 데이터가 상이한 프로토콜을 통해 전송될 수 있다.
차량(130)은 하나 이상의 스피커(132), 하나 이상의 디스플레이 디바이스(134), 복수의 센서(136) 및 변환기(138)를 포함할 수 있다. 차량(130)은 차량 데이터 프로세싱 시스템(140)을 포함할 수 있다. 차량 데이터 프로세싱 시스템(140)은 진입 검출 컴포넌트(142), 진입 인증 컴포넌트(144), 액세스 제어 컴포넌트(146), 및 디지털 어시스턴트 어플리케이션(128)을 포함할 수 있다. 차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)은 원격 데이터 프로세싱 시스템(102)의 그것과 유사할 수 있다(또는 인스턴스). 차량 데이터 프로세싱 시스템(140) 및 각각의 컴포넌트는 하드웨어, 펌웨어, 소프트웨어 또는 이들의 조합으로 구현될 수 있다. 차량 데이터 프로세싱 시스템(140) 및 원격 데이터 프로세싱 시스템(102)은 유사한 컴포넌트를 가질 수 있다. 예를 들어, 차량 데이터 프로세싱 시스템(140) 또는 그의 디지털 어시스턴트 어플리케이션(128)은 인터페이스(104), NLP 컴포넌트(106), 인터페이스 관리 컴포넌트(108), 오디오 신호 생성기(110), 지시 액션 API(112), 응답 선택기(114), 검증 엔진(116), 데이터 저장소(118), 이들의 조합 또는 이들의 인스턴스들의 조합을 포함할 수 있다. 원격 데이터 프로세싱 시스템(102)은 진입 검출 컴포넌트(142), 진입 인증 컴포넌트(144), 액세스 제어 컴포넌트(146) 또는 이들의 인스턴스의 조합을 포함할 수 있다.
하나 이상의 스피커는 전기 신호를 가청 음파로 변환함으로써(예를 들어, 라디오, 멀티미디어 디바이스, 차량 데이터 프로세싱 시스템(140), 디지털 어시스턴트 어플리케이션(128) 또는 이들의 조합으로부터) 오디오 신호를 렌더링할 수 있다. 차량(130)은 헤드 업 디스플레이, 멀티미디어 디바이스와 관련된 디스플레이(예를 들어, 미디어 콘텐츠를 뒷좌석의 승객에게 렌더링하기 위해), 또는 이들의 조합과 같은 하나 이상의 디스플레이 디바이스(134)를 포함할 수 있다. 변환기(136)는 오디오 입력(예를 들어, 차량의 사용자 또는 배경 소음로부터의)을 대응하는 전기 신호로 변환할 수 있다. 차량 데이터 프로세싱 시스템(140)은 예를 들어, 음성 인식, 화자 인식, 또는 이들의 조합을 수행하기 위해 전기 신호를 프로세싱할 수 있다(또는 프로세싱를 위해 원격 데이터 프로세싱 시스템(102)으로 전송할 수 있다).
차량(130)은 차량(130)으로의 진입 또는 이탈 이벤트를 검출하고, 차량의 상태 파라미터들(예를 들어, 속도, 자동 도어 잠금, 타이어 압력 레벨, 또는 이들의 조합)를 모니터링하고, 사용자 인증(또는 차량 진입 인증), 또는 이들의 조합을 수행하기 위한 센서 신호들을 제공하는 복수의 센서(136)를 포함할 수 있다. 다양한 센서들(136)이 도 2와 관련하여 아래에서 논의된다.
도 2는 도 1에 도시된 차량(130)의 평면도를 도시하고 차량(130)과 관련된 센서 및 전자 디바이스를 도시한다. 도 2를 참조하면, 차량(130)의 내부 캐빈은 복수의 좌석(200)을 포함할 수 있다. 각각의 좌석(200)은 대응하는 좌석 센서(202)를 포함할 수 있다. 좌석 센서(202)는 대응하는 좌석(200)에 가해지는 무게 또는 압력을 감지할 수 있다. 좌석 센서는 감지된 압력 또는 무게를 각각의 임계값과 비교할 수 있다. 감지된 압력 또는 중량을 각각의 임계값과의 비교에 기초하여 좌석 센서(202)는 대응하는 좌석(200)이 점유되는지 여부를 나타내는 좌석 센서 신호를 제공할 수 있다. 차량 데이터 프로세싱 시스템(140)은 예컨대, 차량 데이터 프로세싱 시스템(140)의 인터페이스(104)를 통해 다양한 좌석 센서(202)로부터 좌석 센서 신호를 수신할 수 있다.
차량(130)은 하나 이상의 도어 센서(204)를 포함할 수 있다. 각각의 도어 센서(204)는 도어 센서 신호들을 차량 데이터 프로세싱 시스템(140)에 제공할 수 있으며, 도어 센서 신호들는 차량의 도어의 개폐 여부, 차량의 도어가 잠겨있는지의 여부, 또는 이들의 조합을 나타낼 수 있다. 차량(130)은 차량 데이터 프로세싱 시스템(140)이 각각의 도어의 상태(예를 들어, 개방, 폐쇄, 잠금 또는 잠금 해제)를 식별할 수 있게 하는 각각의 도어에 대한 개별 도어 센서(204)를 포함할 수 있다.
차량(130)은 차량(130) 내의 하나 이상의 위치에 배치될 수 있는 하나 이상의 모션 센서(206)를 포함할 수 있다. 모션 센서(206)는 예를 들어, 적외선 기반 감지 기술, 마이크로파 기반 감지 기술, 초음파 기반 감지 기술, 진동 기반 감지 기술 또는 이들의 조합을 이용하여, 차량 내의 움직임을 감지할 수 있다. 하나 이상의 모션 센서(206)는 차량 내에서 움직임이 감지되었는지 여부를 나타내는 모션 센서 신호를 차량 데이터 프로세싱 시스템(140)에 제공할 수 있다. 감지된 움직임은 하나 이상의 사용자에 의한 차량 점유를 나타낼 수 있다. 차량(130)의 대응하는 좌석(200)와 관련하여(예를 들어, 근접하거나 마주 보는) 개별 모션 센서(206)가 배치되거나 설치될 수 있다. 차량(130)은, 차량(130) 내의 공기압의 상당한 변화(예를 들어, 미리 정의된 임계값보다 큰)를 감지하는 압력 센서(도 2에 미도시)를 포함할 수 있다. 차량 점화 시스템 또는 그 센서는 사용자에 의해 점화 시스템을 켜거나 끄는 것에 응답하여, 점화 시스템이 켜지거나 꺼지는 것을 나타내는 신호를 차량 데이터 프로세싱 시스템(140)에 제공할 수 있다.
차량(130)은 원격 전자 열쇠(remote key fob) 송신 디바이스(도 2에 미도시)로부터 신호를 수신하기 위한 전자 열쇠 수신 디바이스(210)를 포함할 수 있다. 전자 열쇠(key fob) 수신 디바이스(210) 및 전자 열쇠 송신 디바이스는 원격 키리스 시스템(RKS: remote keyless system)을 형성한다. 원격 전자 열쇠 송신 디바이스는 차량을 잠금 또는 잠금해제하기 위한 진입 코드를 포함하는 신호를 전송할 수 있다. 진입 코드는 암호화될 수 있다. 신호 내의 진입 코드가 전자 열쇠 수신 디바이스(210)에 저장된 코드와 일치하면, 전자 열쇠 수신 디바이스(210)는 차량의 잠금 또는 잠금 해제를 작동시킬 수 있다. 전자 열쇠 수신 디바이스(210)는 차량 데이터 프로세싱 시스템(140)에 통신가능하게 연결될 수 있다. 전자 열쇠 수신 디바이스(210)는 차량 데이터 프로세싱 시스템(140)에 RKS를 통해 잠금 또는 잠금 해제의 성공 또는 실패 이벤트의 표시를 제공할 수 있다.
차량(130)은 입력 오디오 신호를 캡처하기 위한 하나 이상의 마이크로폰(214) 및 오디오 출력을 제공하기 위한 복수의 스피커(또는 라우드 스피커)(132)를 포함할 수 있다. 하나 이상의 마이크로폰(214)은 차량(130) 내의 하나 이상의 위치에 배치될 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 차량의 점유 상태에 기초하여 마이크로폰(214)을 켜거나 끌 수 있다. 예를 들어, 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 차량(130)의 점유 검출(또는 진입 이벤트의 검출)에 응답하여 마이크로폰(214)이 켜지도록할 수 있다. 차량이 시동됨에 응답하여 마이크로폰(214) 또는 스피커가 자동으로 켜질 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 하나 이상의 마이크로폰(214)에 의해 획득된 입력 오디오 신호를 수신하고, 음성 인식 또는 화자 인식을 상기 입력 오디오 신호(또는 대응하는 전기 신호)에 적용할 수 있다.
차량(130)은 디지털 사진을 캡처하기 위해 하나 이상의 카메라(216)를 포함할 수 있다. 각각의 카메라(116)는 그 좌석(200)을 점유하는 개인의 얼굴이 카메라(116)의 가시 범위 내에 있도록 차량(130)의 대응하는 좌석(200)을 향할 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128) 예를 들어, 진입 이벤트의 검출에 응답하여 하나 이상의 디지털 이미지를 캡처하도록 카메라(216)를 트리거할 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 얼굴 인식을 수행하기 위해 캡처된 이미지(들)를 사용할 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 이전에 캡쳐된 이미지가 얼굴 인식에 적합하지 않은 것으로 발견된 경우(예를 들어, 사용자의 얼굴에 대한 명확하거나 완전한 사진이 없음) 하나 이상의 추가 이미지를 캡처하도록 카메라(216)를 트리거할 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 카메라(216)의 방향이 조정(예를 들어, 회전)되게할 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 사용자에게 카메라(216)를 향하거나 카메라의 방향을 조정하라는 요청을 나타내는 오디오 출력 신호를 스피커(132)를 통해 제공할 수 있다.
차량(130)은 모바일 클라이언트 디바이스(150a 및 150b)와 같은 차량 내의 모바일 클라이언트 디바이스(150)와 통신하기 위하여, 가령, 단파장(예를 들어, 2.4 ~ 2.5GHz) 데이터 통신 송수신기, 근거리 통신(NFC) 송수신기 또는 이들의 조합과 같은 통신 송수신기(218)를 포함할 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 통신 송수신기(218)에 통신가능하게 연결될 수 있다. 통신 송수신기(218)는 모바일 클라이언트 디바이스들(150a, 150b)(또는 일반적으로는 차량 130 내의 모바일 클라이언트 디바이스들 150이라 함)과 통신하여, 이들 디바이스들의 디바이스 식별자(ID)를 획득할 수 있다. 통신 송수신기(218)는 획득된 클라이언트 ID를 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)에 제공할 수 있다. 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은, 진입 이벤트의 검출 또는 차량 점유의 검출 이후 기결정된 시간 기간이 지난 후에도 통신 송수신기(218)에 의해서 클라이언트 ID가 획득되지 않는 경우, 예를 들어, 각각의 모바일 클라이언트 디바이스(예컨대, 150a, 150b) 상의 송수신기를 턴온하도록, 또는 클라이언트 디바이스를 통신 송수신기(218)에 보다 가깝게 접근시키도록(NFC 통신을 위해), 사용자(들)에게 지시 할 수 있다(예를 들어, 스피커(132)에 의해 전송된 오디오 출력 신호를 통해). 차량 데이터 프로세싱 시스템(140) 또는 대응하는 디지털 어시스턴트 어플리케이션(128)은 스피커(132)를 통해 초음파 출력 신호 또는 서브소닉(subsonic) 출력 신호를 전송하여, 모바일 클라이언트 디바이스(들)(150a 또는 150b)가 각각의 ID(들)를 전송하도록 트리거할 수 있다. 클라이언트 디바이스(들)(예를 들어, 모바일 클라이언트 디바이스(150a 또는 150b))는 초음파 신호 또는 서브소닉 신호를 각각의 ID(들)에 대한 요청으로서 해석할 수 있고, 초음파 출력 신호 또는 서브소닉 신호에 응답하여 각각의 클라이언트 ID(들)를 송신할 수 있다.
차량은 예를 들어 멀티미디어 컨텐츠(예를 들어, 시청각 컨텐츠, 스트리밍 컨텐츠, 게임 컨텐츠 또는 이들의 조합)를 재생하기 위한 멀티미디어 디바이스를 포함하는 뒷좌석 엔터테인먼트 시스템(212)을 포함할 수 있다. 뒷좌석 엔터테인먼트 시스템(212)은 운전자에게 시각적 산만함을 회피하기 위해 앞좌석(200) 뒤에 위치될 수 있다. 차량(130)은 또한 차량 데이터 프로세싱 시스템(140), 대응하는 디지털 어시스턴트 어플리케이션 또는 차량(130)과 관련하여 설명된 하나 이상의 컴포넌트와 관련된 컴퓨터 코드 명령을 실행할 수 있는 헤드 유닛(220)을 포함할 수 있다. 헤드 유닛(220)은 컴퓨터 코드 명령을 실행하기 위한 하나 이상의 프로세서를 포함할 수 있고, 및 데이터 저장소(118)와 관련된 데이터, 재생 목록, 설정 데이터 또는 이들의 조합과 같은 컴퓨터 코드 명령 및 데이터를 저장하기 위한 하나 이상의 저장 디바이스(도 2에 도시되지 않음)를 포함한다. 헤드 유닛(220)은 내비게이션 맵, 재생 목록 정보, 라디오 채널 정보 또는 이들의 조합과 같은 시각적 데이터를 사용자에게 렌더링하기 위한 디스플레이(도 2에는 도시되지 않음)를 포함할 수 있다. 헤드 유닛(220)은 예컨대, 유/무선 연결을 통해 예를 들어, 좌석 센서(202), 도어 센서(204), 모션 센서(206), 공기압 센서(들)와 같은 센서들(136), 점화 시스템(또는 대응하는 센서), 전자 열쇠 수신 디바이스(210), 마이크로폰(214), 카메라(216), 통신 송수신기(218), 스피커(132), 또는 뒷자석 엔터테인먼트 시스템(212)의 멀티미디어 디바이스와 통신가능하게 연결될 수 있다.
도 1을 다시 참조하면, 진입 검출 컴포넌트(142), 진입 인증 컴포넌트(144), 액세스 제어 컴포넌트(146) 또는 이들의 조합은 차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)의 일부일 수 있다. 진입 검출 컴포넌트(142)는 차량(130)에 설치된 하나 이상의 센서(136)에 의해 획득된 적어도 하나의 센서 신호를 수신할 수 있다. 예를 들어, 진입 검출 컴포넌트(142)는 전자 열쇠 수신 디바이스(210)로부터 전자 열쇠 신호, 도어 센서(204)로부터의 도어 센서 신호, 좌석 센서(202)로부터의 좌석 센서 신호, 모션 센서(206)로부터의 모션 센서 신호, 공기압 센서로부터의 압력 신호, 차량 점화 시스템으로부터의 점화 신호(예를 들어, 점화 시스템이 턴온됨을 나타내는) 또는 이들의 조합을 수신할 수 있다. 센서들(136) 중 적어도 하나는 차량 점화 시스템이 꺼진 경우에도 대응하는 센서 신호를 송신할 수 있다.
진입 검출 컴포넌트(142)는 적어도 하나의 센서 신호에 기초하여 차량(130)으로의 진입 이벤트를 결정(또는 검출)할 수 있다. 진입 이벤트는 사용자가 차량(130)에 진입하는 것을 나타낼 수 있다. 진입 검출 컴포넌트(142)는 단일 유형의 센서(136)로부터의 센서 신호에 기초하여 진입 이벤트를 결정할 수 있다. 예를 들어, 전자 열쇠 수신 디바이스(210), 도어 센서(204), 좌석 센서(202), 모션 센서(206) 또는 기압 센서(들) 중 하나로부터의 센서 신호는, 진입 검출 컴포넌트(142)가 진입 이벤트의 발생에 관한 결정을 하기에 충분할 수 있다. 진입 검출 컴포넌트(142)는 2 이상의 유형들의 센서들(136)로부터의 센서 신호에 기초하여 진입 이벤트를 결정할 수 있다. 예를 들어, 진입 검출 컴포넌트(142)는 상이한 유형들의 2 개 이상의 센서들(예를 들어, 전자 열쇠 수신 디바이스(210) 및 도어 센서(204) 둘다로부터, 또는 도어 센서(204) 및 모션 센서(206) 둘다로부터)이, 하나 이상의 개인들에 의한 차량 점유를 나타내는 대응하는 센서 신호들을 제공하는 경우에만, 진입 이벤트의 발생을 결정하도록 구성될 수 있다
차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)은 진입 이벤트의 검출 이전에는 라이트 모드(light mode)에서 동작할 수 있다. 라이트 모드에서 진입 검출 컴포넌트(142)는 깨어있을 수 있는 반면에, 차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)의 다른 컴포넌트들은 차량 배터리 전력을 절약하기 위해 슬립 모드에 있을 수 있다. 진입 검출 컴포넌트(142)는 차량(130)으로의 진입 이벤트의 검출에 응답하여, 차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)의 다른 컴포넌트들을 깨울 수 있다.
진입 인증 컴포넌트(144)는 차량(130)으로의 진입 이벤트에 응답하여 적어도 2개의 인증 입력 신호를 수신할 수 있다. 적어도 2 개의 인증 입력 신호는 차량(130)과 연관된 적어도 하나의 센서(또는 전자 디바이스)(136)에 의해 획득될 수 있다. 예를 들어, 진입 인증 컴포넌트(144)는 차량(130)과 연관된 적어도 하나의 센서에 의해 획득된 제 1 인증 입력 신호 및 제 2 인증 입력 신호를 수신할 수 있다. 2 이상의 인증 입력 신호는 별개의 유형일 수 있고, 2 이상의 상이한 유형들의 센서에 의해 획득될 수 있다. 예를 들어, 진입 인증 컴포넌트(144)는(1) 전자 열쇠 수신 디바이스(210)로부터의 전자 열쇠 인증 신호,(2) 대응하는 모바일 클라이언트 디바이스(예컨대, 스마트폰, 테블릿, 또는 스마트 와치)로부터의 모바일 디바이스 식별자(ID) 인증 신호,(3) 마이크로폰(214)으로부터의 오디오 입력 신호,(4) 카메라(216)로부터의 디지털 이미지 중 적어도 2개를 수신할 수 있다.
전자 열쇠 인증 신호는 전자 열쇠 수신 디바이스(210)가 차량(130)에 대응하는 코딩된 무선 신호를 수신했는지의 여부(예를 들어, 차량 도어의 잠금을 성공적으로 해제할 수 있게하는)를 나타낼 수 있다. 모바일 디바이스 식별자(ID) 인증 신호는 모바일 클라이언트 디바이스(150)에 의해 제공되고, 모바일 클라이언트 디바이스(150)의 대응하는 식별자 ID를 포함하는 신호일 수 있다. 도 2와 관련하여 전술한 바와 같이, 차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)은, 예를 들어, 스피커(132)를 통해 초음파 또는 서브소닉 신호를 전송하거나 또는 출력 오디오 신호를 제공함으로써, 모바일 클라이언트 디바이스(들)(150)로 하여금 대응하는 모바일 디바이스 식별자(ID) 인증 신호를 전송하게 할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 오디오 입력 신호를 마이크로폰(214)으로부터 직접 수신하거나 또는 마이크로폰(214)에 연결되고 그리고 기정의된 최근의 시간 기간(예컨대, 마지막 30 초, 마지막 1 분, 마지막 2 분) 동안 마이크로폰(214)에 의해 캡처된 오디오 신호를 유지하도록 구성된 저장 디바이스로부터 오디오 입력 신호를 수신할 수 있다. 저장 디바이스는 레코딩된 오디오 신호를 타임스탬프할 수 있다. 저장 디바이스는 개별 마이크들로부터 오디오 신호를 별도로 저장할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 스피커(132)를 통해 오디오 출력 신호를 제공하여, 차량(130)의 임의의 잠재적 사용자가, 차량(130)으로의 진입 이벤트의 검출에 응답하여, 발화하도록 트리거링할 수 있다(예컨대, 특정한 질문을 하거나 또는 사용자에게 단순히 말하기를 요청함으로써). 차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)은 차량(130)으로의 진입 이벤트의 검출에 응답하여 하나 이상의 카메라(216)를 트리거링하여 디지털 이미지(들)를 캡처할 수 있다.
차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)은 차량(130)으로의 진입 이벤트에 응답하여 차량(130)의 점유 상태를 생성(또는 업데이트)할 수 있다. 차량(130)의 점유 상태는 예를 들어, 대응하는 좌석 센서 또는 그 좌석(200)와 연관된 모션 센서로부터의 센서 신호에 기초하여, 각각의 인증된 사용자를 차량(130)의 해당 좌석(200)에 맵핑할 수 있다. 차량 데이터 프로세싱 시스템(140)의 디지털 어시스턴트 어플리케이션(128)은 점유된 좌석(200)와 연관된 마이크로폰(들)(214) 또는 카메라(들)(216)만을 트리거할 수 있다.
진입 인증 컴포넌트(244)는 적어도 2 개의 수신된 인증 입력 신호들 및 복수의 인증 자격 증명들(authentication credentials)에 기초하여 적어도 2 개의 인증 상태를 결정할 수 있다. 예를 들어, 진입 인증 컴포넌트(244)는 제 1 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 1 인증 자격 증명에 기초하여 제 1 인증 상태를 결정할 수 있으며, 제 2 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 2 인증 자격 증명에 기초하여 제 2 인증 상태를 결정할 수 있다. 수신된 인증 입력 신호들 각각에 대해, 진입 인증 컴포넌트(244)는 별도의 인증을 수행하고 그리고 대응하는 인증 상태를 결정할 수 있다. 각 인증 상태는 해당 인증의 성공 여부를 나타낼 수 있다. 만일, 진입 인증 컴포넌트(244)가 그 인증에 기초하여 특정 사용자 또는 사용자 카테고리를 식별할 수 있다면, 인증이 성공할 수 있다. 성공적인 인증의 경우, 인증 상태는 식별된 사용자 또는 사용자 카테고리를 나타낼 수 있다. 성공적인 인증의 경우, 인증 상태는 식별된 각각의 사용자 또는 사용자 카테고리에 대한 확률 값을 나타낼 수 있다. 인증에 실패한 경우, 대응하는 인증 상태는 실패 이유(예를 들어, 부적절한 인증 입력 신호 또는 대응하는 인증 자격 증명에 기초한 불일치)를 나타낼 수 있다.
전자 열쇠 인증(key fob authentication)의 경우, 차량 도어의 성공적인 원격 잠금 해제를 나타내는 전자 열쇠 신호를 수신함에 응답하여, 진입 인증 컴포넌트(244)는 차량의 키리스 원격 송신기 디바이스에 액세스한 개인들(예를 들어, 차량의 소유자, 소유자의 가족, 소유자의 친한 친구 또는 이들의 조합)의 목록에 액세스할 수 있다. 이러한 개인들의 목록은 전자 열쇠 인증과 관련된 인증 자격 증명을 나타낼 수 있고, 차량의 메모리(예를 들어, 데이터 저장소 118)에 저장될 수 있다. 진입 인증 컴포넌트(244)는 목록에 있는 개인들 각각을 현재 차량을 점유하고 있는 잠재적 사용자로 결정할 수 있다. 엔트리 인증 컴포넌트(244)는, 예를 들어, 차량(130)에 대한 진입들의 통계 데이터에 기초하여 각각의 개인에게 확률값을 할당할 수 있다. 예를 들어, 소유자는 가장 높은 확률값이 할당 될 수 있고, 소유자의 배우자에게 두번째로 높은 확률값이 할당될 수 있으며, 그 밖의 사람들에게는 더 낮은 확률값이 할당될 수 있다.
모바일 디바이스 식별자(ID) 인증 신호의 경우, 해당 자격 증명들은 차량(130)의 메모리(예를 들어, 데이터 저장소 118)에 저장된 디바이스 ID들의 세트와 해당 디바이스 사용자들의 신원들을 포함할 수 있다. 이러한 신호들은 암호화될 수 있다. 진입 인증 컴포넌트(244)는 수신된 모바일 디바이스 ID 인증 신호에 있는 모바일 클라이언트 디바이스 ID를 저장된 디바이스 ID들의 세트와 비교할 수 있다. 매칭이 발견되면, 진입 인증 컴포넌트(244)는 매칭 디바이스 ID와 연관된 사용자를 차량(130)을 점유하는 사용자로서 식별할 수 있다. 인증 상태는 매칭 피처(들)에 대응하는 사용자와 관련된 확률값을 포함할 수 있다. 매칭이 발견되지 않으면, 진입 인증 컴포넌트(244)는 모바일 디바이스 식별자(ID) 인증 신호에 대응하는 인증 상태를 인증 실패로 결정할 수 있다. 이러한 인증은, 매칭되는 자격 증명의 부재와 같은 실패 이유를 포함할 수 있다.
화자(speaker) 인식 인증의 경우, 디지털 어시스턴스 어플리케이션(128)(또는 대응하는 음성 프로세서 컴포넌트)는 수신된 오디오 입력 신호로부터 하나 이상의 화자를 나타내는 피처들을 추출할 수 있고, 진입 인증 컴포넌트(244)는 예를 들어, 데이터 저장소(118)에 저장된 대응하는 화자 특정 피처들(인증 자격 증명들)의 세트와 상기 추출된 피처를 비교할 수 있다. 매칭이 발견되면, 진입 인증 컴포넌트(244)는 인증 상태(화자 인식 인증용)를 성공으로서 결정할 수 있다. 인증 상태는 대응하는 화자 특정 피처들의 세트의 매칭 피처(들)과 관련된 사용자에 대한 표시를 포함할 수 있다. 인증 상태는 매칭 피처들에 대응하는 사용자와 관련된 확률값을 포함할 수 있다. 일치하는 것이 발견되지 않으면, 진입 인증 컴포넌트(244)는 인증 상태를 실패한 인증으로 결정할 수 있으며, 이는 매칭되는 자격 증명의 부재와 같은 실패 이유를 포함할 수 있다.
얼굴 인식 기반 인증의 경우, 디지털 어시스턴트 어플리케이션(128)(또는 대응하는 이미지 프로세서 컴포넌트)은 수신된 디지털 이미지로부터 하나 이상의 얼굴 피처들을 추출할 수 있고, 진입 인증 컴포넌트(244)는 예를 들어, 데이터 저장소(118)에 저장된 대응 피처들의 세트(하나 이상의 알려진 사용자와 관련된)와 상기 추출된 피처를 비교할 수 있다. 매칭이 발견되면, 진입 인증 컴포넌트(244)는 인증 상태(얼굴 인식 기반 인증에 대한)를 성공이라고 결정할 수 있다. 인증 상태는, 대응하는 얼굴 피처들의 세트에 있는 매칭되는 얼굴 피처(들)과 관련된 사용자에 대한 표시를 포함할 수 있다. 인증 상태는 매칭되는 얼굴 피처(들)에 대응하는 사용자와 관련된 확률값을 포함할 수 있다. 매칭이 발견되지 않으면, 진입 인증 컴포넌트(244)는 인증 상태를 실패한 인증으로 결정할 수 있으며, 이는 매칭되는 자격 증명의 부재와 같은 실패 이유를 포함할 수 있다. 만일, 디지털 어시스턴트 어플리케이션(128)(또는 대응하는 이미지 프로세서 컴포넌트)이 얼굴 피처를 추출하지 못한다면(예를 들어, 이미지에서 얼굴이 명확하게 보이지 않기 때문에), 실패 이유는 부적절한 입력으로 정의될 수 있다.
액세스 제어 컴포넌트(246)는 제 1 인증 상태 및 제 2 인증 상태와 같은 결정된 인증 상태에 적어도 부분적으로 기초하여 복수의 액세스 허용 레벨들 중 하나의 액세스 허용 레벨을 식별할 수 있다. 액세스 제어 컴포넌트(246)는 진입 인증 컴포넌트(244)에 의해 결정된 인증 상태들에 기초하여, 특정 사용자 또는 복수의 사용자 카테고리들 중 하나의 사용자 카테고리를 결정할 수 있다. 예를 들어, 액세스 제어 컴포넌트(246)는 차량(130)을 점유하는 개인과 관련된 최종 사용자 신원 또는 사용자 카테고리를 결정하기 위해, 다양한 인증 상태들에서의 정보(예를 들어, 사용자들 또는 사용자 카테고리들에 대한 표시 및 적용가능하다면 해당 확률값들)를 비교할 수 있다. 액세스 제어 컴포넌트(246)는 차량(130)을 점유하는 개인과 관련된 최종 사용자 신원 또는 사용자 카테고리를 결정할 때 결정 그래프 또는 복수의 결정 규칙을 사용할 수 있다. 복수의 사용자 카테고리는 "소유자", "가족: 성인" , "가족: 아이" , "친구" , "새로운 사용자" 또는 이들의 조합을 포함할 수 있다. 액세스 제어 컴포넌트(246)는 복수의 사용자들 또는 사용자 카테고리들 각각과 해당 액세스 허용 레벨을 맵핑하는 데이터 구조에 액세스할 수 있다(예를 들어, 데이터 저장소 118로부터). 액세스 제어 컴포넌트(246)는 액세스된 데이터 구조에 기초하여, 결정된 최종 사용자 신원 또는 사용자 카테고리와 관련된 액세스 허용 레벨을 결정할 수 있다.
액세스 제어 컴포넌트(246)는 액세스 허용 레벨에 응답하여 차량(130)을 통해 이용가능한 기능들의 세트의 서브세트를 식별할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 개별 사용자들 또는 사용자 카테고리들과 연관된 데이터를 복수의 개별 데이터 계정들 또는 복수의 개별 메모리 파티션들에 배치할 수 있다. 소정의 사용자의 경우, 대응하는 데이터 계정 또는 메모리 파티션은 사용자와 관련된 데이터, 사용자와 관련된 멀티미디어 파일, 사용자에 대한 액세스 설정들(예를 들어, 허용 레벨 또는 액세스가능한 기능), 또는 이들의 조합을 포함할 수 있다. 차량(130)을 통해 이용가능한 기능들의 세트는 차량(130)의 메모리에 저장된 데이터를 액세스하는 것(예를 들어, 데이터 계정 또는 메모리 파티션과 관련된 데이터), 로컬적으로 저장된 재생 목록을 액세스하는 것, 로컬적으로 저장된 미디어 파일(또는 라디오 채널)의 렌더링을 제어하는 것, 차량 창문 또는 차량 도어를 작동시키는 것, 차량 도어 잠금 또는 잠금 해제하는 것, 집 차고 문을 원격으로 열거나 닫는 것, 차량 에어컨(AC) 설정을 조정하는 것, 홈 관련 설정들(예컨대, 가정 에어컨, 주택 보안 시스템, 스프링클러 또는 이들의 조합)을 제어 또는 조정하는 것, 온라인 서비스 또는 모바일 어플리케이션(예: 온라인 스트리밍 또는 다운로드, 온라인 쇼핑 또는 이메일)에 액세스하는 것, 또는 이들의 조합과 같이 디지털 어시스턴트 어플리케이션(128)에 의해 수행될 수 있는 기능들 또는 작업들을 포함할 수 있다, 디지털 어시스턴트 어플리케이션(128)은, 예를 들어, 대응하는 사용자 또는 사용자 카테고리에 지정된 보안 키를 사용하여 각각의 데이터 계정 또는 메모리 파티션을 개별적으로 암호화할 수 있다. 예를 들어, 해당 사용자와 관련된 정보(예컨대, 모바일 디바이스 또는 다른 식별자들)를 해싱함으로써, 보안 키가 정의(또는 생성)될 수 있다. 디지털 어시스턴트 어플리케이션(128)은 다양한 사용자들과 관련된 재생 목록들(또는 보안에 민감하지 않은 다른 데이터 또는 프라이버시에 민감하지 않은 다른 데이터)을 하나의 공통 메모리 영역에 그룹화하거나 결합시킬 수 있다. 예를 들어, 그룹화된 재생 목록은 차량(130)에 진입하는 다양한 사용자들에 의해 액세스될 수 있다.
각각의 액세스 허용 레벨은 이용가능한 기능들의 세트의 각각의 서브세트와 연관될 수 있다. 액세스 허용 레벨들과 기능들의 대응 서브세트들 사이의 연관(또는 매핑)은, 디지털 어시스턴트 어플리케이션(128)의 관리자(예를 들어, 차량(130)의 소유자)에 의해 설정되거나 조정될 수 있다.액세스 허용 레벨들과 기능들의 대응 서브세트들 사이의 연관(또는 매핑)은, 데이터 저장소(118)에 저장된 제 2 데이터 구조(예를 들어, 테이블)에서 유지될 수 있다. 액세스 제어 컴포넌트(246)는 제 2 데이터 구조에 기초하여, 결정된 허용 레벨과 관련된 기능들의 서브세트를 결정할 수 있다.
액세스 제어 컴포넌트(246)는 액세스 허용 레벨을 결정함이 없이, 결정된 인증 상태들(예를 들어, 제 1 및 제 2 인증 상태)에 적어도 부분적으로 기초하여, 차량(130)을 통해 이용가능한 기능들의 세트의 서브세트를 직접 식별할 수 있다. 예를 들어, 결정된 인증 상태들에 기초하여 사용자 카테고리를 식별한 후에, 액세스 제어 컴포넌트(246)는 대응하는 기능들의 서브세트와 각각의 사용자 카테고리를 맵핑시키는 데이터 구조에 액세스하여, 기능들의 서브세트를 식별할 수 있다. 복수의 인증 상태들, 액세스 허용 레벨, 기능의 서브세트 또는 이들의 조합을 결정하는 것은 다중-인자 인증 프로세스를 나타낸다.
디지털 어시스턴트 어플리케이션(128)(차량 데이터 구조(140)의)은 결정된 기능들의 서브세트에 대한 차량 액세스(vehicular access)를 제공할 수 있다. 디지털 어시스턴트 어플리케이션(128)이 차량(130) 내의 사용자로부터 가청 요청(audible request)을 수신하는 경우, 디지털 어시스턴트 어플리케이션(128)은 대응하는 요청된 액션 또는 기능을 식별할 수 있다. 예를 들어, 지시 액션 API 컴포넌트(112)는 요청된 액션 또는 기능을 나타내는 액션 데이터 구조를 생성할 수 있다. 각각의 액션 데이터 구조에 대해, 검증 엔진(116)은, 대응하는 액션 또는 기능을 요청자의 액세스 허용 레벨에 매핑된 기능들의 서브세트와 비교하여, 액션(또는 기능)을 허용할지 또는 거부할지를 결정할 수 있다. 액션 또는 기능을 거부 또는 차단하는 경우, 디지털 어시스턴트 어플리케이션(128)(또는 검증 엔진(116))은 대응하는 액션 데이터 구조를 삭제할 수 있으며 그리고 요청자가 요청된 기능에 대한 액세스가 거부되었음을 나타내는 오디오 출력을 스피커(132)를 통해 제공할 수 있다. 대응하는 기능 또는 동작을 수행함에 있어서, 임의의 액티브 단계들을 수행하기 전에, 액션 데이터 구조를 거부 또는 차단함으로써 리소스(예를 들어, 계산 및 대역폭 자원)를 효율적으로 사용할 수 있는데, 왜냐하면 불필요한 통신 및 불필요한 계산이 방지되기 때문이다. 만일, 액션 데이터 구조에 대응하는 액션이, 요청자에 의해 액세스가능한 기능들의 서브세트에 있는 기능과 매칭된다면, 검증 엔진은 실행을 위해 액션 데이터 구조를 다른 컴포넌트에 전달할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 요청된 기능에 대한 액세스가 허가되었음을 나타내는 오디오 출력 신호를(예를 들어, 스피커(132)를 통해) 제공할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 기능이 실행될 때 요청이 이행되었음을 나타내는 오디오 출력 신호를(예를 들어, 스피커(132)를 통해) 제공할 수 있다.
주어진 사용자에 대한 액세스 허용 레벨 또는 허용된 기능들의 서브세트를 결정할 때, 상기 액세스 제어 컴포넌트(246)는 차량(130)을 점유하고 있는 각 사용자에 대해, 그 사용자가 위치하고 있는 차량(130)의 해당 좌석(200)을 결정할 수 있다. 액세스 제어 컴포넌트(246)는 좌석 센서 신호, 도어 센서 신호, 모션 센서 신호, 마이크로폰(214)으로부터의 오디오 입력 신호, 카메라(216)로부터의 디지털 이미지, 또는 이들의 조합을 이용하여, 차량 내의 각각의 사용자와 대응 좌석(200)을 맵핑할 수 있다. 이러한 맵핑은 차량(130)의 점유 상태를 나타낼 수 있으며, 이것을 이용하면, 나중에 차량 내의 개별 사용자로부터 수신되는 가청 요청들을 용이하게 구별할 수 있다. 예를 들어, 디지털 어시스턴트 어플리케이션(128)이 차량의 창문을 열거나 차량 도어를 잠금 해제하기 위한 가청 요청을 수신할 때, 디지털 어시스턴트 어플리케이션(128)은 예를 들어, 차량 내의 개별 마이크로폰(214)들과 관련된 상기 가청 요청의 레코딩된 인스턴스에 기초하여, 가청 요청이 앞 좌석의 성인 또는 뒷좌석의 사람으로부터 온 것인지를 결정할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 가청 요청의 레코딩된 인스턴스들의 진폭들을 비교하거나 또는 이들 인스턴스들 사이의 시간 지연을 비교하여, 가청 요청을 수행한 사용자에 가장 근접한(따라서 관련된 좌석) 마이크로폰(214)을 식별할 수 있다. 가청 요청을 수행한 사용자에 가장 가까운 마이크로폰(214)에 의해 레코딩된 가청 요청의 인스턴스(예를 들어, 대응하는 전기 신호)는의 인스턴스는, 요청을 수행한 사용자로부터 멀리 떨어져 있는 다른 마이크로폰들(214)과 관련된 다른 인스턴스들보다 더 빠른 도착 시간 및 더 높은 진폭을 가질 수 있다. 요청자에 가장 가까운 마이크로폰(214)을 식별함으로써, 디지털 어시스턴트 어플리케이션(128)은 좌석들(200)과 사용자들 사이의 상기 맵핑을 이용하여 요청자를 식별할 수 있다.
디지털 어시스턴트 어플리케이션(128)(또는 진입 검출 컴포넌트(142))은 수신된 센서 신호들(예를 들어, 전자 열쇠(key fob) 신호, 적어도 2 개의 개별 좌석 센서 신호, 적어도 2 개의 도어 센서 신호, 적어도 2 개의 모션 센서 신호, 점화 시스템 신호, 공기압 센서 신호 또는 이들의 조합)을 사용하여, 제 1 사용자 및 제 2 사용자가 차량에 진입하는 것을 나타내는 2 개의 진입 이벤트들을 검출할 수 있다. 2 개의 진입 이벤트들은 제 1 및 제 2 사용자에 의한 차량의 동시 점유와 관련될 수 있다. 진입 인증 컴포넌트(144)는 2 개의 진입 이벤트들에 응답하여, 제 1 복수의 인증 입력 신호들(예를 들어, 제 1 사용자와 연관된) 및 제 2 복수의 인증 입력 신호들(예를 들어, 제 2 사용자와 연관된)를 수신할 수 있다. 예를 들어, 제 1 및 제 2 복수의 인증 입력 신호들은 적어도 2개의 입력 오디오 신호들(예컨대, 개별 마이크로폰들 214로부터의), 적어도 2개의 디지털 이미지들(예컨대, 개별 카메라들 215로부터의), 적어도 2개의 모바일 디바이스 ID 인증 신호들(예컨대, 개별 모바일 클라이언트 디바이스들 150로부터의), 전자 열쇠 신호, 또는 이들의 조합을 포함할 수 있다.
진입 인증 컴포넌트(144)는 제 1 복수의 인증 입력 신호들 및 복수의 인증 자격 증명들 중 제 1 인증 자격 증명에 기초하여 제 1 복수의 인증 상태들을 결정할 수 있다. 진입 인증 컴포넌트(144)는 복수의 인증 자격 증명들 중 대응하는 인증 자격 증명에 대하여(예를 들어, 다양한 유형의 인증 입력 신호들에 대해 전술한 바와 같이), 제 1 복수의 인증 입력 신호들(제 1 사용자와 연관된)의 각각의 인증 입력 신호를 체크하여, 제 1 복수의 인증 상태들을 결정할 수 있다. 진입 인증 컴포넌트(144)는 복수의 인증 자격 증명들 중 대응하는 인증 자격 증명에 대하여, 제 2 복수의 인증 입력 신호들(제 2 사용자와 연관된)의 각각의 인증 입력 신호를 체크하여, 제 2 복수의 인증 상태들을 결정할 수 있다.
액세스 제어 컴포넌트(246)는 제 1 복수의 인증 상태들에 적어도 부분적으로 기초하여 제 1 액세스 허용 레벨(예를 들어, 제 1 사용자에 대한)을 식별할 수 있으며 그리고 제 1 액세스 허용 레벨에 응답하여, 차량(130)을 통해 이용가능한 기능들의 세트의 제 1 서브세트를 식별할 수 있다. 액세스 제어 컴포넌트(246)는 제 1 복수의 인증 상태들에 기초하여 제 1 사용자 또는 대응하는 사용자 카테고리를 식별할 수 있으며 그리고 액세스 허용 레벨들과 기능들의 대응하는 서브세트를 맵핑시키는 데이터 구조에 기초하여 제 1 액세스 허용 레벨을 식별할 수 있다. 유사한 방식으로, 액세스 제어 컴포넌트(246)는 제 2 복수의 인증 상태들에 적어도 부분적으로 기초하여 제 2 액세스 허용 레벨(예를 들어, 제 2 사용자에 대한)을 식별할 수 있으며 그리고 제 2 액세스 허용 레벨에 응답하여 차량(130)을 통해 이용가능한 기능들의 세트의 제 2 서브세트를 식별할 수 있다. 액세스 제어 컴포넌트(246)는 제 1 및 제 2 액세스 허용 레벨을 결정함이 없이, 결정된 인증 상태들에 적어도 부분적으로 기초하여 기능들의 세트의 제 1 및 제 2 서브세트를 직접 식별할 수 있다. 예를 들어, 결정된 인증 상태들에 기초하여 제 1 및 제 2 사용자 카테고리를 식별한 후, 액세스 제어 컴포넌트(246)는 각각의 사용자 카테고리와 기능들의 대응 서브세트를 맵핑시키는 데이터 구조에 액세스하여, 제 1 및 제 2 서브세트를 식별할 수 있다.
디지털 어시스턴트 어플리케이션(128)은 기능들의 제 1 서브세트에 대한 제 1 사용자 차량 액세스(first user vehicular access)를 제공하고, 기능들의 제 2 서브세트에 대한 제 2 사용자 차량 액세스를 제공할 수 있다. 기능들의 제 1 서브세트에 대한 제 1 사용자 액세스를 제공하는 것은, 검증 엔진(116)이 제 1 사용자에 의해 이루어진 요청들과 관련된 액션 데이터 구조들을 인터셉트하고고 그리고 대응하는 액션들(또는 요청된 기능들)이 제 1 서브세트에 있는 임의의 기능들과 매칭하는지의 여부를 검사하는 것을 포함할 수 있다. 매칭이 발견되지 않으면, 검증 엔진(116)은 액션 데이터 구조를 삭제하고 대응하는 액션 또는 요청된 기능을 차단할 수 있으며, 디지털 어시스턴트 어플리케이션(128)은 제 1 사용자에게 액세스 거부를 알리기 위한 오디오 출력을 제공할 수 있다. 매칭이 발견되면, 디지털 어시스턴트 어플리케이션(128)은 기능을 수행할 수 있고, 액세스 허가 또는 요청된 기능의 완료를 나타내는 오디오 출력을 제공할 수 있다. 이와 유사하게, 기능들의 제 2 서브세트에 대한 제 2 사용자 액세스를 제공하는 것은, 검증 엔진(116)이 제 2 사용자에 의해 요청된 기능과 관련된 액션 데이터 구조를 인터셉트하고 액션 데이터 구조(또는 요청된 기능)의 대응하는 액션과 제 2 서브세트에 있는 기능들을 비교하는 것을 포함할 수 있다. 비교에 기초하여, 디지털 어시스턴트 어플리케이션(128)은 제 2 사용자의 요청된 기능을 수행할지 또는 차단할지를 결정할 수 있다.
디지털 어시스턴트 어플리케이션(128)은(예를 들어, 데이터 저장소(118) 또는 차량(130)의 메모리에 저장된) 데이터 계정 또는 메모리 파티션을 모니터링할 수 있다. 데이터 계정 또는 메모리 파티션은, 디지털 어시스턴트 어플리케이션(128)이 해당 사용자의 마지막 진입 이벤트(또는 마지막 이탈 이벤트) 이후의 기정의된 시간 지속 시간을 초과하지 않는 기간 동안 각각의 데이터 계정 또는 메모리 파티션을 유지할 수 있으므로 일시적일 수 있다. 디지털 어시스턴트 어플리케이션(128)은 각각의 데이터 계정 또는 메모리 파티션에 대해 별개의 시간 카운터를 유지할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 데이터 계정과 연관된 사용자에 의한 진입 이벤트(또는 이탈 이벤트)의 검출에 응답하여, 주어진 데이터 계정에 대한 시간 카운터를 리셋할 수 있다. 만일, 시간 카운터가 기정의된 시간 기간(예: 일주일, 몇 주, 한 달 또는 몇 주)을 초과하면, 디지털 어시스턴트 어플리케이션(128)은 해당 데이터 계정 또는 메모리 파티션(또는 그 안의 데이터)을 삭제할 수 있다. 데이터 계정(또는 메모리 파티션)이 로컬로 저장되므로, 임시 데이터 계정을 사용하면 차량 메모리 리소스를 효율적으로 사용할 수 있다.
디지털 어시스턴트 어플리케이션(128)(또는 진입 검출 컴포넌트(142))은 사용자가 차량(130)을 빠져나감을 나타내는 이탈 이벤트를 검출할 수 있다. 예를 들어, 진입 검출 컴포넌트(142)는 하나 이상의 추가 센서 신호(예를 들어, 점화 시스템 신호, 좌석 센서 신호, 모션 감지 신호, 공기압 신호, 도어 센서 신호, 전자 열쇠 포브 신호, 또는 이들의 조합)를 수신할 수 있다. 하나 이상의 추가 센서 신호는 점화 시스템이 꺼져 있음, 이전에 점유된 좌석(200)이 비어있음, 차량(130) 내에서 감지된 움직임의 감소, 차량(130) 내의 공기 압력의 실질적인 변화(예를 들어, 도어를 열고 닫음으로서), 도어 개폐, 도어의 원격 잠금 또는 이들의 조합을 나타낼 수 있다. 진입 검출 컴포넌트(142)는 하나 이상의 추가 센서 신호에 기초하여, 사용자가 차량(130)을 빠져나간다고 결정할 수 있다.
디지털 어시스턴트 어플리케이션(128)은 이탈 이벤트에 응답하여 차량(130)의 점유 상태를 업데이트할 수 있다. 예를 들어, 특정 사용자가 차량(130)을 떠났다고 결정하면(예를 들어, 추가 센서 신호에 기초하여), 디지털 어시스턴트 어플리케이션(128)은 차량(130)의 좌석(200)에 매핑된 사용자 목록에서 사용자를 삭제하고, 해당 좌석(200)를 공석으로 설정하고, 또는 이들의 조합을 수행함으로써 차량의 점유 상태를 업데이트할 수 있다. 점유 상태의 업데이트에 응답하여, 디지털 어시스턴트 어플리케이션(128)은 떠난 사용자의 데이터 계정과 관련된 시간 카운터를 재설정할 수 있다. 디지털 계정 어시스턴트는 떠난 사용자와 연관된 임시 데이터 계정(또는 메모리 파티션)을 암호화할 수 있다. 디지털 어시스턴트 어플리케이션(128)은 차량(130)을 떠난 사용자와 관련된 임시 데이터 계정을 액세스-불가로 설정할 수 있다(그 사용자에 의한 신규 진입 이벤트 이후에 차량(130)에서 동일한 사용자가 다시 인증될 때까지).
모바일 클라이언트 디바이스(들)(150)는 디지털 어시스턴트 어플리케이션(128)의 대응 인스턴스를 포함하는 대응하는 데이터 프로세싱 시스템을 포함할 수 있다(양자 모두는 도 1에 도시되지 않음). 데이터 프로세싱 시스템 및 모바일 클라이언트 디바이스(150)와 연관된 디지털 어시스턴트 어플리케이션(128)은 원격 데이터 프로세싱 시스템(1020) 및 차량 데이터 프로세싱 시스템(102)과 관련하여 논의된 것과 유사한 컴포넌트를 포함할 수 있다.
차량 데이터 프로세싱 시스템(140)과 관련하여 전술한 프로세스들(예를 들어, 다중 인자 인증 및 차량(130)를 통해 이용가능한 기능들에 대한 액세스 제어와 관련된)은 원격 데이터 프로세싱 시스템(102) 또는 클라이언트 디바이스(150)의 데이터 프로세싱 시스템에 의해 수행될 수 있다. 예를 들어, 차량 데이터 프로세싱 시스템(140)(또는 대응하는 디지털 어시스턴트 어플리케이션(128))은 센서 신호, 인증 입력 신호 또는 이들의 조합을 수신하고, 수신된 신호를 원격 데이터 프로세싱 시스템(102)으로(예컨대, 클라이언트 디바이스 150를 통해) 또는 클라이언트 디바이스(150)와 관련된 데이터 프로세싱 시스템으로 전송할 수 있다. 진입 이벤트 검출, 다중 인자 인증,또는 액세스 허용 레벨의 결정 또는 액세스가능한 기능들의 결정은 원격 데이터 프로세싱 시스템(102) 또는 클라이언트 디바이스(150)와 관련된 데이터 프로세싱 시스템에 의해 수행될 수 있다.
도 3은 차량 진입 이벤트의 다중 인자 진입 인증의 예시적인 방법(300)을 도시한다. 방법(300)은 차량에 설치된 제 1 센서에 의해 획득된 적어도 하나의 센서 신호를 수신하는 단계를 포함할 수 있다(블록 302). 방법(300)은 적어도 하나의 센서 신호에 기초하여 차량으로의 진입 이벤트를 결정하는 단계를 포함할 수 있다(블록 304). 방법(300)은 차량으로의 진입 이벤트에 응답하여 제 1 인증 입력 신호 및 제 2 인증 입력 신호를 수신하는 단계를 포함할 수 있다(블록 306). 방법(300)은 제 1 인증 입력 신호 및 복수의 인증 자격 증명들 중 1 인증 자격 증명에 기초하여 제 1 인증 상태를 결정하는 단계를 포함할 수 있다(블록 308). 방법(300)은 제 2 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 2 인증 자격 증명에 기초하여 제 2 인증 상태를 결정하는 단계를 포함할 수 있다(블록 310). 방법(300)은 제 1 인증 상태 및 제 2 인증 상태에 적어도 부분적으로 기초하여 복수의 액세스 허용 레벨들 중 액세스 허용 레벨을 식별하는 단계를 포함할 수 있다(블록 312). 방법(300)은 액세스 허용 레벨에 응답하여 차량을 통해 이용가능한 기능들의 세트의 서브세트를 식별하는 단계를 포함할 수 있다(블록 314). 방법(300)은 데이터 프로세싱 시스템이 기능들의 서브세트에 대한 차량 액세스를 제공하는 단계를 포함할 수 있다(블록 316). 일반적으로, 방법(300)은 도 1 및 도 2의 컴포넌트들과 관련하여 논의된 단계들 중 임의의 단계를 포함할 수 있다.
도 1 내지 도 3을 참조하면, 방법(300)은 디지털 어시스턴트를 포함하는 데이터 프로세싱 시스템이 차량에 설치된 제 1 센서에 의해 획득된 적어도 하나의 센서 신호를 수신하는 단계를 포함할 수 있다(블록 302). 데이터 프로세싱 시스템은 원격 데이터 프로세싱 시스템(102), 차량 데이터 프로세싱 시스템(140) 또는 모바일 클라이언트 디바이스(150)와 관련된 데이터 프로세싱 시스템을 포함할 수 있다. 데이터 프로세싱 시스템은 예를 들어, 전자 열쇠 수신기 디바이스(210)로부터의 전자 열쇠 신호, 도어 센서(204)로부터의 도어 센서 신호, 좌석 센서(202)로부터의 좌석 센서 신호, 모션 센서(206)로부터의 모션 센서 신호, 공기압 센서로부터의 압력 신호, 차량 점화 시스템으로부터의 점화 신호(예를 들어, 점화 시스템이 켜져 있음을 나타냄) 또는 이들의 조합을 수신할 수 있다.
방법(300)은 데이터 프로세싱 시스템이 적어도 하나의 센서 신호에 기초하여 차량(130)으로의 진입 이벤트를 결정하는 단계를 포함할 수 있다(블록 304), 진입 이벤트는 사용자가 차량(130)에 진입하는 것을 나타낼 수 있다. 데이터 프로세싱 시스템은 단일 유형의 센서(136)로부터의 센서 신호에 기초하여 진입 이벤트를 결정할 수 있거나, 2 이상의 유형의 센서(136)들의 센서 신호에 기초하여 진입 이벤트를 결정할 수 있다(예를 들어, 점화 신호 및 좌석 센서 신호). 데이터 프로세싱 시스템은 진입 이벤트를 결정하기 위해 하나 이상의 결정 규칙 또는 결정 그래프를 사용할 수 있다. 결정 규칙 또는 결정 그래프는 진입 이벤트의 발생을 암시하는 센서 신호들의 조합을 나타낼 수 있다.
상기 방법(300)은 데이터 프로세싱 시스템이 차량 안으로의 진입 이벤트에 응답하여, 제 1 인증 입력 신호 및 제 2 인증 입력 신호를 수신하는 단계를 포함할 수 있다(블록 306). 제 1 인증 입력 신호 및 제 2 인증 입력 신호는 차량(130)과 관련된 적어도 하나의 다른 센서(예를 들어, 전자 열쇠 수신기 디바이스(210), 마이크로폰(314), 카메라(216) 또는 통신 송수신기(218))에 의해 획득될 수 있다. 데이터 프로세싱 시스템은 2 개 이상의 인증 입력 신호를 수신할 수 있다. 2 개 이상의 인증 입력 신호는 별개의 유형일 수 있고, 2 개 이상의 상이한 유형의 센서에 의해 획득될 수 있다. 예를 들어, 진입 인증 컴포넌트(144)는(1) 전자 열쇠 수신기 디바이스(210)로부터의 전자 열쇠 인증 신호,(2) 대응 모바일 클라이언트 디바이스(150)(예컨대, 스마트폰, 테블릿, 스마트 와치 등)로부터의 모바일 디바이스 식별자(ID) 인증 신호,(3) 마이크로폰(214)으로부터의 오디오 입력 신호, 또는(4) 카메라(216)로부터의 디지털 이미지 중 적어도 두 개를 수신할 수 있다, 데이터 프로세싱 시스템은 진입 이벤트에 응답하여 대응 인증 입력 신호를 제공하도록 차량(130)과 관련된 2개 이상의 프로세서들(또는 전자 디바이스들)을 트리거링할 수 있다(도 1 및 도 2를 참조하여 전술한 바와 같이).
상기 방법(300)은 데이터 프로세싱 시스템이 제 1 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 1 인증 자격 증명에 기초하여 제 1 인증 상태를 결정하는 단계(블록 308), 및 제 2 인증 입력 신호 및 복수의 인증 자격 증명들 중 제 2 인증 자격 증명에 기초하여 제 2 인증 상태를 결정하는 단계(블록 310)를 포함할 수 있다. 제 1 인증 상태 및 제 2 인증 상태 둘다를 결정하는 것은, 다중 인자 인증 프로세스로 볼 수 있다. 데이터 프로세싱 시스템은 수신된 인증 입력 신호들의 개수에 따라 2 이상의 인증 상태들을 결정할 수 있다. 수신된 인증 입력 신호들 각각에 대해, 데이터 프로세싱 시스템은 별도의 인증을 수행하고 그리고 대응하는 인증 상태를 결정할 수 있다. 각각의 인증 상태는 해당 인증의 성공 여부를 나타낼 수 있다. 데이터 프로세싱 시스템이 해당 인증에 기초하여 특정 사용자 또는 사용자 카테고리를 식별할 수 있으면 인증이 성공할 수 있다. 성공적인 인증의 경우, 인증 상태는 식별된 사용자 또는 사용자 카테고리를 나타낼 수 있다. 성공적인 인증의 경우, 인증 상태는 식별된 각각의 사용자 또는 사용자 카테고리에 대한 확률값을 나타낼 수 있다. 인증이 실패한 경우, 대응하는 인증 상태는 실패 이유(예를 들어, 부적절한 인증 입력 신호 또는 매칭되는 인증 자격 증명이 없음)를 나타낼 수 있다. 다양한 유형의 인증 입력 신호들에 대한 인증 상태를 결정하는 프로세스는 도 1 및 도 2와 관련하여 위에서 설명되었다.
방법(300)은 데이터 프로세싱 시스템이 제 1 인증 상태 및 제 2 인증 상태에 적어도 부분적으로 기초하여 복수의 액세스 허용 레벨들 중 액세스 허용 레벨을 식별하는 단계를 포함할 수 있다(블록 312). 방법(300)은 데이터 프로세싱 시스템이 액세스 허용 레벨에 응답하여, 차량을 통해 이용가능한 기능들의 세트 중 서브세트를 식별하는 단계를 포함할 수 있다(블록 314). 데이터 프로세싱 시스템은 결정된 인증 상태에 기초하여 특정 사용자 또는 복수의 사용자 카테고리들 중 각각의 사용자 카테고리를 식별할 수 있다. 예를 들어, 데이터 프로세싱 시스템은 차량(130)을 점유한 개인과 관련된 최종 사용자 신원 또는 사용자 카테고리를 식별하도록, 다양한 인증 상태들의 정보(예를 들어, 사용자들 또는 사용자 카테고리들에 대한 표시들 및 가능하면 해당 확률 값들)를 비교할 수 있다. 복수의 사용자 카테고리들은 예를 들어, "소유자", "가족 구성원: 성인" , "가족 구성원: 아이" , "친구" , "새 사용자" 또는 이들의 조합을 포함할 수 있다. 데이터 프로세싱 시스템은 각각의 사용자 또는 사용자 카테고리와 해당 액세스 허용 레벨을 맵핑시키는 데이터 구조에 기초하여, 결정된 최종 사용자 신원 또는 사용자 카테고리와 연관된 액세스 허용 레벨을 결정할 수 있다. 데이터 프로세싱 시스템은 각각의 액세스 허용 레벨을 대응하는 기능들의 서브세트에 맵핑시키는 다른 데이터 구조에 기초하여 기능들의 서브세트를 식별할 수 있다.
차량(130)을 통해 이용가능한 기능들의 세트는 데이터 프로세싱 시스템의 디지털 어시스턴트 어플리케이션(128)에 의해 수행될 수 있는 기능들 또는 작업들을 포함할 수 있는바 가령, 차량(130)의 메모리에 저장된 데이터에 액세스(예를 들어, 데이터 계정 또는 메모리 파티션과 관련된 데이터), 로컬적으로 저장된 재생 목록에 액세스, 로컬적으로 저장된 미디어 파일(또는 라디오 채널)의 렌더링에 대한 제어, 차량 윈도우 또는 차량 문의 작동, 차량 도어 잠금 또는 잠금 해제, 차량 에어컨(AC) 설정의 조정, 집 차고 문의 원격 개폐 또는 집 관련 설정들(예: 가정 AC, 주택 보안 시스템, 스프링클러 또는 이들의 조합)을 제어 또는 조정,, 온라인 서비스 또는 모바일 애플리케이션(예: 온라인 스트리밍 또는 다운로드, 온라인 쇼핑 또는 이메일)에 액세스하는 것 또는 이들의 조합을 포함할 수 있다. 블록(312, 314)의 행동들은 제 1 및 제 2 인증 상태들에 기초하여 기능들의 서브세트를 결정하는 하나의 단계로 결합될 수 있다(예컨대, 액세스 허용 레벨을 결정함이 없이).
방법(300)은 데이터 프로세싱 시스템이 기능들의 서브세트에 대한 차량 액세스를 제공하는 단계를 포함할 수 있다(블록 316). 데이터 프로세싱 시스템은 차량(130) 내의 사용자로부터 가청 요청을 수신할 수 있고 그리고 대응하는 요청된 동작이나 기능을 식별할 수 있다. 데이터 프로세싱 시스템은 요청된 기능을 나타내는 액션 데이터 구조를 생성하고, 요청된 기능을 요청자의 액세스 허용 레벨에 맵핑된 기능들의 서브세트와 비교하여, 요청된 기능을 허용할지 또는 거부할지를 결정한다. 스피커(132))는 기능이 실행될 때 요청이 이행되었음을 나타낸다. 데이터 프로세싱 시스템은 비교에 기초하여 요청된 기능의 실행을 야기하거나(도 1 및 2와 관련하여 위에서 논의된 바와 같이) 또는 이를 차단할 수 있다.
도 1 내지 도 2와 관련하여 전술한 바와 같이, 데이터 프로세싱 시스템은 개별 사용자들 또는 사용자 카테고리들과 관련된 데이터를 복수의 별개의 임시 데이터 계정(또는 시간 메모리 파티션)으로 정렬하고 그리고 미리정의된 시간 기간 동안 대응하는 진입 이벤트가 없는 경우, 임의의 데이터 계정(또는 메모리 파티션)을 삭제할 수 있다. 데이터 프로세싱 시스템은 예를 들어, 대응하는 사용자 또는 사용자 카테고리에 특화된 보안 키를 사용하여 각 데이터 계정 또는 메모리 파티션을 개별적으로 암호화할 수 있다. 보안 키는, 예를 들어, 대응하는 사용자와 관련된 정보(예를 들어, 모바일 디바이스 또는 다른 식별자)를 해싱함에 의해 정의(또는 생성)될 수 있다. 데이터 프로세싱 시스템은 추가의 센서 신호에 기초하여 이탈 이벤트를 검출하고, 이탈 이벤트에 기초하여 상기 차량의 점유 상태를 업데이트할 수 있다.
데이터 프로세싱 시스템은 2 명의(혹은 그 이상) 사용자가 차량에 진입함을 나타내는 2 개(혹은 그 이상의) 진입 이벤트들을 검출할 수 있다. 검출된 진입 이벤트들은 사용자들에 의한 상기 차량(130)의 동시 점유로 이어질 수 있다. 데이터 프로세싱 시스템은 각각의 사용자에 대한 인증 입력 신호를 수신할 수 있고, 도 1 및 도 2와 관련하여 위에서 논의된 바와 같이 각각의 사용자에 대해(다중 인증 상태가 식별된) 별도의 다중 인자 인증을 수행할 수 있다. 데이터 프로세싱 시스템은 각 사용자에 대한 개별 액세스 허용 레벨 및 액세스가능한 기능들의 개별 서브세트를 결정할 수 있다. 데이터 프로세싱 시스템은 각 사용자에게 기능들의 대응 서브세트에 대한 액세스를 허용할 수 있다.
도 4는 예시적인 컴퓨터 시스템(400)의 블록도이다. 컴퓨터 시스템 또는 컴퓨팅 디바이스(400)는 원격 데이터 프로세싱 시스템(102), 차량 데이터 프로세싱 시스템(140) 또는 모바일 클라이언트 디바이스(150)와 관련된 데이터 프로세싱 시스템과 같은 시스템(100) 또는 그 컴포넌트들을 포함하거나 구현하기 위해 사용될 수 있다. 컴퓨팅 시스템(400)은 정보를 통신하기 위한 버스(405) 또는 다른 통신 컴포넌트 및 정보를 프로세싱하기 위해 버스(405)에 연결된 프로세서(410) 또는 프로세싱 회로를 포함한다. 컴퓨팅 시스템(400)은 또한 정보를 프로세싱하기 위해 버스에 연결된 하나 이상의 프로세서(410) 또는 프로세싱 회로를 포함할 수 있다. 컴퓨팅 시스템(400)은 또한 정보 및 프로세서(140)에 의해 실행되는 명령들을 저장하기 위해 버스(405)에 연결된 랜덤 액세스 메모리(RAM)와 같은 메인 메모리(415) 또는 다른 동적 저장 디바이스를 포함한다. 메인 메모리(415)는 데이터 저장소(118)일 수 있거나 이를 포함할 수 있다. 메인 메모리(415)는 또한 프로세서에 의한 명령의 실행 동안 위치 정보, 임시 변수 또는 다른 중간 정보를 저장하기 위해 사용될 수 있다. 컴퓨팅 시스템(400)은 프로세서(410)에 대한 정적 정보 및 명령을 저장하기 위해 버스(405)에 연결된 ROM(420) 또는 다른 정적 저장 디바이스를 더 포함할 수 있다. 솔리드 스테이트 디바이스, 자기 디스크 또는 광 디스크와 같은 저장 디바이스(425)는 정보 및 명령을 지속적으로 저장하기 위해 버스(405)에 결합될 수 있다. 저장 디바이스(425)는 데이터 저장소(118)를 포함하거나 그 일부일 수 있다.
컴퓨팅 시스템(400)은 사용자에게 정보를 디스플레이하기 위해 액정 디스플레이 또는 액티브 매트릭스 디스플레이와 같은 디스플레이(435)에 버스(405)를 통해 연결될 수 있다. 정보 및 명령 선택을 프로세서(410)에 전달하기 위해 영숫자 및 다른 키를 포함하는 키보드와 같은 입력 디바이스(430)가 버스(405)에 연결될 수 있다. 입력 디바이스(430)는 터치 스크린 디스플레이(435)를 포함할 수 있다. 입력 디바이스(430)는 또한 방향 정보 및 명령 선택을 프로세서(410)에 전달하고 디스플레이(435) 상의 커서 이동을 제어하기 위한 마우스, 트랙볼 또는 커서 방향 키와 같은 커서 콘트롤을 포함한다. 디스플레이(435)는 데이터 프로세싱 시스템(102), 클라이언트 컴퓨팅 디바이스(150), 차량(130)의 헤드 유닛(220), 또는 도 1 내지 도 2의 다른 컴포넌트들의 일부일 수 있다.
본 명세서에 기술된 프로세스, 시스템 및 방법은 프로세서(410)가 메인 메모리(415)에 포함된 명령들을 실행하는 것에 응답하여 컴퓨팅 시스템(400)에 의해 구현될 수 있다. 이러한 명령은 저장 디바이스(425)와 같은 다른 컴퓨터 판독가능 매체로부터 메인 메모리(415)로 판독될 수 있다. 메인 메모리(415)에 포함된 명령들의 실행은 컴퓨팅 시스템(400)이 본 명세서에 설명된 예시적인 프로세스를 수행하게한다. 멀티-프로세싱 구성의 하나 이상의 프로세서가 또한 메인 메모리(415)에 포함된 명령을 실행하기 위해 사용될 수 있다. 본 명세서에 기술된 시스템 및 방법과 함께 소프트웨어 명령 대신에 또는 소프트웨어 명령과 함께 하드-와이어드 회로가 사용될 수 있다.
비록, 예시적인 컴퓨팅 시스템이 도 4에 설명되었지만, 본 명세서에서 설명된 동작을 포함하는 본 발명의 주제는 본 명세서에 개시된 구조들 및 이들의 구조적 등가물들, 또는 이들 중 하나 이상의 조합을 포함하여, 다른 유형의 디지털 전자 회로, 또는 컴퓨터 소프트웨어, 펌웨어 또는 하드웨어로 구현될 수 있다.
본 명세서에 기술된 주제 및 동작은 본 명세서에 개시된 구조들 및 이들의 구조적 등가물들, 또는 이들 중 하나 이상의 조합을 포함하여, 디지털 전자 회로 또는 컴퓨터 소프트웨어, 펌웨어 또는 하드웨어로 구현될 수 있다. 본 명세서에 기술된 주제는 하나 이상의 컴퓨터 프로그램, 예를 들어, 하나 이상의 컴퓨터 프로그램 명령의 회로로서 구현될 수 있고, 데이터 프로세싱 디바이스에 의해 실행되거나 동작을 제어하기 위해 하나 이상의 컴퓨터 저장 매체에 인코딩된다. 대안적으로 또는 추가적으로, 프로그램 명령은 인공적으로 생성된 전파 신호, 예를 들어 데이터 프로세싱 장치에 의한 실행을 위해 적절한 수신기 장치로 전송하기 위해 정보를 인코딩하기 위해 생성되는 머신-생성 전기, 광학, 또는 전자기 신호를 포함한다. 컴퓨터 저장 매체는 컴퓨터 판독 가능 저장 디바이스, 컴퓨터 판독 가능 저장 기판, 랜덤 또는 직렬 액세스 메모리 어레이 또는 디바이스, 또는 이들 중 하나 이상의 조합일 수 있거나 이에 포함될 수 있다. 비록, 컴퓨터 저장 매체가 전파 신호는 아니지만, 컴퓨터 저장 매체는 인위적으로 생성된 전파 신호에 인코딩된 컴퓨터 프로그램 명령들의 소스 또는 목적지 일 수 있다. 컴퓨터 저장 매체는 또한 하나 이상의 개별 컴포넌트 또는 매체(예를 들어, 다수의 CD, 디스크 또는 다른 저장 디바이스)일 수 있거나 그에 포함될 수 있다. 본 명세서에 서술된 동작들은, 하나 이상의 컴퓨터 판독가능 저장 디바이스들 상에 저장된 데이터 또는 다른 소스들로부터 수신된 데이터에 대해 데이터 프로세싱 장치에 의해 수행되는 동작들로서 구현될 수 있다.
"데이터 프로세싱 시스템", "컴퓨팅 디바이스", "컴포넌트" 또는 "데이터 프로세싱 장치"라는 용어는 예를 들어 프로그래머블 프로세서, 컴퓨터, 시스템 온 칩, 또는 이들 다수, 또는 이들의 조합을 포함하여. 데이터를 프로세싱하기 위한 다양한 장치들, 디바이스들, 및 머신들을 포괄한다. 상기 장치는 특수 목적 논리 회로, 예를 들어 프로그래밍가능 게이트 어레이(FPGA: field-programmable gate array) 또는 주문형 집적회로(ASIC: application-specific integrated circuit)을 포함할 수 있다. 상기 장치는 또한, 하드웨어 이외에도, 문제의 컴퓨터 프로그램에 대한 실행 환경을 생성하는 코드, 예를 들어, 프로세서 펌웨어, 프로토콜 스택, 데이터베이스 관리 시스템, 운영 체제, 크로스 플랫폼 런타임 환경, 가상 머신, 또는 이들 중 하나 이상의 조합을 구성하는 코드를 포함할 수 있다. 상기 장치 및 실행 환경은 웹 서비스, 분산 컴퓨팅 및 그리드 컴퓨팅 인프라와 같은 다양한 컴퓨팅 모델 인프라스트럭처를 실현할 수 있다. 시스템(100)의 컴포넌트는 하나 이상의 데이터 프로세싱 장치들, 시스템들, 컴퓨팅 디바이스들 또는 프로세서들을 포함하거나 공유할 수 있다.
컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 어플리케이션, 앱, 스크립트 또는 코드로도 알려져 있음)은 컴파일 또는 해석된 언어, 선언적 또는 절차 적 언어를 포함하는 임의의 형태의 프로그래밍 언어로 작성될 수 있으며, 그리고 독립형 프로그램 또는 모듈, 컴포넌트, 서브루틴, 객체 또는 컴퓨팅 환경에서 사용하기에 적합한 다른 단위를 포함하여, 임의의 형태로 배포될 수 있다. 컴퓨터 프로그램은 파일 시스템의 파일에 해당할 수 있다. 컴퓨터 프로그램은 다른 프로그램이나 데이터(예를 들어, 마크업 언어 문서에 저장된 하나 이상의 스크립트)를 보유하는 파일의 일부, 해당 프로그램 전용의 단일 파일 또는 다수의 조정 파일(예를 들어, 하나 이상의 모듈, 서브 프로그램 또는 코드의 일부를 저장하는 파일)에 저장될 수 있다. 컴퓨터 프로그램은 하나의 컴퓨터 또는 하나의 지점 또는 분산된 다수의 지점들에 배치되고 통신 네트워크에 의해 연결된 다수의 컴퓨터들에서 실행되도록 배포될 수 있다.
본 명세서에 기술된 프로세스 및 논리 흐름은 입력 데이터를 연산하고 출력을 생성함으로써 동작을 수행하기 위해 하나 이상의 컴퓨터 프로그램(예를 들어, 원격 데이터 프로세싱 시스템(102)의 컴포넌트, 차량 데이터 프로세싱 시스템(140)의 컴포넌트, 또는 모바일 클라이언트 디바이스(150)와 연관된 데이터 프로세싱 시스템의 컴포넌트)을 실행하는 하나 이상의 프로그램가능 프로세서에 의해 수행될 수 있다. 프로세스 및 논리 흐름은 또한 필드 프로그래밍가능 게이트 어레이(FPGA) 또는 주문형 집적회로(ASIC)와 같은 특수 목적 로직 회로에 의해서 수행될 수 있으며, 상기 장치들은 이러한 FPGA 또는 주문형 집적회로(ASIC)와 같은 특수 목적 로직 회로로서 구현될 수 있다. 컴퓨터 프로그램 명령들 및 데이터를 저장하기에 적합한 디바이스는 모든 형태의 비휘발성 메모리, 매체 및 메모리 디바이스를 포함하는바 예를 들어 일례로서, 반도체 메모리 디바이스, EPROM, EEPROM, 플래시 메모리 디바이스, 자기 디스크, 내부 하드 디스크 또는 이동식 디스크, 광 자기 디스크, CD ROM, DVD-ROM 디스크를 포함할 수 있다. 프로세서 및 메모리는 특수 목적 논리 회로에 의해 보완되거나 통합될 수 있다.
본 명세서에 기술된 주제는 예컨대, 데이터 서버와 같은 백엔드 컴포넌트, 예컨대, 어플리케이션 서버와 같은 미들웨어어 컴포넌트, 예컨대, 본 명세서에 서술된 주제의 구현예와 사용자가 상호작용할 수 있는 그래픽 사용자 인터페이스 또는 웹 브라우저를 갖는 클라이언트 컴퓨터와 같은 프론트 엔드 컴포넌트 또는 하나 이상의 이러한 백엔드, 미들웨어 또는 프론트 엔드 컴포넌트들의 조합을 포함하는 컴퓨팅 시스템에서 구현될 수 있다. 시스템의 컴포넌트는 임의의 형태 또는 매체의 디지털 데이터 통신, 예를 들어 통신 네트워크에 의해 상호연결될 수 있다. 통신 네트워크의 예는 근거리 통신망("LAN") 및 광역 통신망("WAN"), 인터-네트워크(예를 들어, 인터넷) 및 피어 투 피어 네트워크(예를 들어, ad hoc 피어 투 피어 네트워크)를 포함할 수 있다.
시스템(100) 또는 시스템(400)과 같은 컴퓨팅 시스템은 클라이언트 및 서버를 포함할 수 있다. 클라이언트와 서버는 일반적으로 서로 원격이며 일반적으로 통신 네트워크(예를 들어, 네트워크(148))를 통해 상호 작용한다. 클라이언트와 서버의 관계는 각 컴퓨터에서 실행되고 서로 클라이언트-서버 관계를 갖는 컴퓨터 프로그램으로 인해 발생한다. 일부 구현들에서, 서버는 모바일 클라이언트 디바이스(150)(예를 들어, 클라이언트 디바이스와 상호 작용하는 사용자에게 데이터를 디스플레이하고 그로부터 사용자 입력을 수신하기 위해) 또는 차량(130)의 헤드 유닛(220)에 데이터(예를 들어, 컨텐트 아이템을 나타내는 데이터 패킷)를 전송한다. 모바일 클라이언트 디바이스(150) 또는 차량 데이터 프로세싱 시스템(140)(예컨대, 사용자 상호작용의 결과로서)에서 생성된 데이터는 서버에서 수신될 수 있다(예를 들어, 모바일 클라이언트 디바이스 150 또는 차량 130으로부터의 데이터 프로세싱 시스템 120에 의해 수신됨).
비록, 동작들이 특정 순서로 도면에 도시되어 있지만, 이러한 동작들은 도시된 특정 순서로 또는 순차적인 순서대로 수행될 필요가 없으며, 도시된 모든 동작들이 수행될 필요는 없다. 여기에 설명된 작업은 다른 순서로 수행될 수 있다.
다양한 시스템 컴포넌트들의 분리는 모든 구현에에서 분리가 필요하지 않으며, 상술한 프로그램 컴포넌트는 하나의 하드웨어 또는 소프트웨어 제품에 포함될 수 있다. 예를 들어, NLP 컴포넌트(106) 및 검증 엔진(116)은 단일 컴포넌트, 앱 또는 프로그램, 또는 하나 이상의 프로세싱 회로를 갖는 논리 디바이스, 또는 원격 데이터 프로세싱 시스템(102)의 하나 이상의 서버의 일부 또는 차량 데이터 프로세싱 시스템(140)일 수 있다.
일부 예시적인 구현예들이 지금까지 서술되었지만, 전술한 일례들은 예시이고 제한이 아니며, 단지 일례로서 제시되었다는 것이 명백하다. 특히, 본 명세서에 제시된 다수의 예는 방법, 행위 또는 시스템 요소의 특정 조합을 포함하지만, 그러한 행위들 및 요소들은 동일한 목적을 달성하기 위해 다른 방식으로 조합될 수 있다. 하나의 구현예와 관련하여 논의된 행위, 요소 및 특징은 다른 구현예 또는 구현예들에서 유사한 역할로부터 배제되도록 의도되지 않는다.
본원에서 사용되는 표현 및 용어는 설명을 위한 것이며 제한으로 간주되어서는 안된다. "포함한다(including)" , "포함한다(comprising)" , "갖는(having)" , "포함하는(containing)" , "수반하는(involving)" , "특징되는" , "특징으로 하는" 및 이들의 변형예는 이후에 열거된 항목들로 배타적으로 구성된 대안 구현예들 뿐만 아니라, 이후에 열거된 항목들, 등가물들, 추가 항목들을 포괄하도록 의도된다. 일 구현예에서, 본 명세서에 설명된 시스템 및 방법은 하나 이상의, 각각의 설명된 요소, 동작 또는 컴포넌트의 각각의 조합으로 구성된다.
단수로 언급된 시스템 및 방법의 구현 또는 요소 또는 행위에 대한 임의의 참조는 또한 복수의 이들 요소들을 포함하는 구현을 포함할 수 있고, 임의의 구현 또는 요소 또는 행위에 대한 복수형은 하나의 요소만을 포함하는 구현예를 포괄한다. 단수형 또는 복수형의 언급은 현재 개시된 시스템 또는 방법, 그 컴포넌트, 동작 또는 요소를 단일 요소 또는 복수 요소만으로 제한하려는 것이 아니다. 임의의 정보, 행위 또는 요소에 기초한 행위 또는 요소에 대한 언급은 임의의 정보, 행위 또는 요소에 적어도 부분적으로 기초한 구현예를 포함할 수 있다.
본 명세서에 개시된 임의의 구현예는 임의의 다른 구현예 또는 실시예와 결합될 수 있으며 그리고 "구현예", "일부 구현예들", "하나의 구현" 등에 대한 참조는 반드시 상호배타적이지 않으며, 구현예와 관련하여 설명된 특정 특징, 구조 또는 특성은 적어도 하나의 구현예 또는 실시예에 포함될 수 있다. 본 명세서에서 사용된 용어들은 반드시 모두 동일한 구현을 지칭하는 것은 아니다. 임의의 구현은 여기에 개시된 양상 및 구현과 일치하는 임의의 방식으로 임의의 다른 구현과 함께 임의의 다른 구현과 결합될 수 있다.
"또는"에 대한 언급은 "또는"을 사용하여 설명된 임의의 용어가 설명된 하나의, 하나 이상의 및 모든 용어들 중 어느 하나를 나타낼 수 있도록 포괄적인 것으로 해석될 수 있다. "A 와 Β 중 적어도 하나" 에 대한 언급은 "A" 만을, "B" 만을 또는 "A" 및 "B" 둘다를 포함할 수 있다. "포함하는(comprising)" 또는 다른 개방형 어구와 함께 사용되는 언급들은 추가적인 항목들을 포함할 수 있다.
도면, 상세한 설명 또는 임의의 청구항에서 기술적 피처들 뒤에 참조 부호들이 뒤따르는 경우, 참조 부호들은 도면들, 상세한 설명 및 청구범위의 명료도를 증가시키기 위해 포함되었다. 따라서, 참조 부호 또는 이들의 부재는 청구 범위의 범위에 임의의 제한적인 영향을 미치지 않는다.
본원에 기재된 시스템 및 방법은, 그 특성으로부터 벗어남이 없이 다른 특정 형태로 구체화될 수 있다. 전술한 구현예는 설명된 시스템 및 방법을 제한하기보다는 예시적인 것이다. 따라서, 본 명세서에 기술된 시스템 및 방법의 범위는 전술 한 설명이 아니라 첨부된 청구 범위에 의해 표시되며, 청구 범위의 의미 및 등가의 범위 내에 있는 변형이 그 내부에 포함된다.

Claims (19)

  1. 하나 이상의 프로세서들에 의해 구현되는 방법으로서,
    차량에 설치된 복수의 센서들로부터 복수의 센서 신호들을 수신하는 단계;
    하나 이상의 복수의 센서 신호들에 기초하여, 차량의 점유 상태를 생성하는 단계, 상기 차량의 점유 상태는 차량 내부에 위치한 하나 이상의 사용자들과 차량의 복수의 대응 좌석들에 대한 매핑(mapping)을 나타내며;
    차량을 통해 이용가능한 차량 기능을 수행하기 위한 가청 요청(audible request)을 차량에 설치된 복수의 마이크로폰들로부터 수신하는 단계;
    차량의 점유 상태에 기초하여, 하나 이상의 사용자들 중 가청 요청을 제공한 소정 사용자를 식별하는 단계;
    상기 소정 사용자에 대한 허용 레벨에 기초하여, 상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖는지의 여부를 결정하는 단계;
    상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖는다고 결정함에 응답하여:
    차량 기능이 차량을 통해 수행되게하는 단계; 및
    상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖지 않는다고 결정함에 응답하여:
    차량 기능이 차량을 통해 수행되는 것을 거부하는 단계
    를 포함하는 것을 특징으로 하는 방법.
  2. 제1항에 있어서,
    차량의 점유 상태를 생성하는 단계는 차량 내부로의 진입 이벤트를 검출하는 단계에 응답하여 수행되는 것을 특징으로 하는 방법.
  3. 제2항에 있어서,
    차량 내부로의 진입 이벤트를 검출하는 단계는,
    차량에 설치된 상기 복수의 센서들로부터 복수의 추가적인 센서 신호들을 수신하는 단계; 및
    복수의 추가적인 센서 신호들 중 하나 이상에 기초하여, 하나 이상의 사용자가 차량 내부로 진입했음을 결정하는 단계
    를 포함하는 것을 특징으로 하는 방법.
  4. 제1항에 있어서,
    상기 소정 사용자에 대한 허용 레벨은 상기 소정 사용자와 관련된 대응 좌석에 기초하여 결정되는 것을 특징으로 하는 방법.
  5. 제4항에 있어서,
    상기 소정 사용자는 차량의 운전자이고, 차량의 운전자는 차량 기능이 수행되게 할 권한이 있는 것을 특징으로 하는 방법.
  6. 제4항에 있어서,
    상기 소정 사용자는 차량의 승객이고, 차량의 승객은 차량 기능이 수행되게할 권한이 없는 것을 특징으로 하는 방법.
  7. 제1항에 있어서,
    차량의 점유 상태에 기초하여 가청 요청을 제공한 소정 사용자를 식별하는 단계는, 차량에 설치된 복수의 마이크로폰들 중 소정 마이크로폰에 근접한 사용자를 식별하는 단계를 포함하는 것을 특징으로 하는 방법.
  8. 제7항에 있어서,
    가청 요청을 제공한 소정 사용자를 식별하는 단계는, 가청 요청과 관련된 음향 정보에 더 기초하는 것을 특징으로 하는 방법.
  9. 제8항에 있어서,
    가청 요청과 관련된 음향 정보는,
    복수의 마이크로폰 각각에 의해 생성된 가청 요청의 복수의 인스턴스들의 대응 진폭; 또는
    복수의 마이크로폰 각각에 의해 생성된 가청 요청의 복수의 인스턴스들의 대응 도달 시간
    중 하나 이상을 포함하는 것을 특징으로 하는 방법.
  10. 제9항에 있어서,
    가청 요청을 제공한 소정 사용자를 식별하는 단계는,
    근접 사용자를 가청 요청을 제공한 소정 사용자로서 식별하기 위해 가청 요청의 복수의 인스턴스들의 대응 진폭들을 비교하는 단계; 또는
    근접 사용자를 가청 요청을 제공한 소정 사용자로서 식별하기 위해 가청 요청의 복수의 인스턴스들의 대응 도달 시간들을 비교하는 단계
    중 하나 이상을 포함하는 것을 특징으로 하는 방법.
  11. 제1항에 있어서,
    상기 복수의 센서 신호들은,
    차량에 설치된 전자 열쇠(key fob) 수신기에서 생성되는 전자 열쇠 신호;
    차량에 설치된 하나 이상의 좌석 센서에 의해 생성되는 좌석 센서 신호;
    차량에 설치된 하나 이상의 도어 센서에 의해 생성되는 도어 센서 신호;
    차량에 설치된 하나 이상의 모션 센서에 의해 생성되는 모션 센서 신호;
    차량에 설치된 하나 이상의 마이크로폰에 의해 생성되는 오디오 입력 신호; 또는
    차량에 설치된 하나 이상의 카메라에 의해 생성되는 디지털 이미지 신호
    중 하나 이상을 포함하는 것을 특징으로 하는 방법.
  12. 제1항에 있어서,
    상기 소정 사용자에 대한 허용 레벨은 상기 소정 사용자와 관련된 복수의 인증 상태들에 기초하여 결정되는 것을 특징으로 하는 방법.
  13. 시스템으로서,
    적어도 하나의 프로세서;
    명령들을 저장하는 적어도 하나의 메모리를 포함하고, 상기 명령들은 실행될 때, 상기 적어도 하나의 프로세서로 하여금:
    차량에 설치된 복수의 센서들로부터 복수의 센서 신호들을 수신하고;
    하나 이상의 복수의 센서 신호들에 기초하여, 차량의 점유 상태를 생성하고, 상기 차량의 점유 상태는 차량 내부에 위치한 하나 이상의 사용자들과 차량의 복수의 대응 좌석들에 대한 매핑(mapping)을 나타내며;
    차량을 통해 이용가능한 차량 기능을 수행하기 위한 가청 요청(audible request)을 차량에 설치된 복수의 마이크로폰들로부터 수신하고;
    차량의 점유 상태에 기초하여, 하나 이상의 사용자들 중 가청 요청을 제공한 소정 사용자를 식별하고;
    상기 소정 사용자에 대한 허용 레벨에 기초하여, 상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖는지의 여부를 결정하고;
    상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖는다고 결정함에 응답하여:
    차량 기능이 차량을 통해 수행되게하고; 및
    상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖지 않는다고 결정함에 응답하여:
    차량 기능이 차량을 통해 수행되는 것을 거부하게 하는 것을 특징으로 하는 시스템.
  14. 제13항에 있어서,
    차량의 점유 상태를 생성하기 위한 명령은 차량 내부로의 진입 이벤트를 검출함에 응답하여 실행되는 것을 특징으로 하는 시스템.
  15. 제14항에 있어서,
    차량 내부로의 진입 이벤트를 검출하는 것은,
    차량에 설치된 복수의 센서들로부터 복수의 추가적인 센서 신호들을 수신하는 것; 및
    복수의 추가적인 센서 신호들 중 하나 이상에 기초하여, 하나 이상의 사용자가 차량 내부로 진입했음을 결정하는 것을 포함하는 시스템.
  16. 제13항에 있어서,
    소정 사용자에 대한 허용 레벨은 소정 사용자와 관련된 대응 좌석에 기초하여 결정되는 것을 특징으로 하는 시스템.
  17. 제16항에 있어서,
    상기 소정 사용자는 차량의 운전자이고, 차량의 운전자는 차량 기능이 수행되게 할 권한이 있는 것을 특징으로 하는 시스템.
  18. 제16항에 있어서,
    상기 소정 사용자는 차량의 승객이고, 차량의 승객은 차량 기능이 수행되게할 권한이 없는 것을 특징으로 하는 시스템.
  19. 명령들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 명령들은 실행될 때 하나 이상의 프로세서로 하여금:
    차량에 설치된 복수의 센서들로부터 복수의 센서 신호들을 수신하고;
    하나 이상의 복수의 센서 신호들에 기초하여, 차량의 점유 상태를 생성하고, 상기 차량의 점유 상태는 차량 내부에 위치한 하나 이상의 사용자들과 차량의 복수의 대응 좌석들에 대한 매핑(mapping)을 나타내며;
    차량을 통해 이용가능한 차량 기능을 수행하기 위한 가청 요청(audible request)을 차량에 설치된 복수의 마이크로폰들로부터 수신하고;
    차량의 점유 상태에 기초하여, 하나 이상의 사용자들 중 가청 요청을 제공한 소정 사용자를 식별하고;
    상기 소정 사용자에 대한 허용 레벨에 기초하여, 상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖는지의 여부를 결정하고;
    상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖는다고 결정함에 응답하여:
    차량 기능이 차량을 통해 수행되게하고; 및
    상기 소정 사용자가 차량 기능이 수행되게할 권한을 갖지 않는다고 결정함에 응답하여:
    차량 기능이 차량을 통해 수행되는 것을 거부하게 하는 것을 특징으로 하는 비일시적 컴퓨터 판독가능 저장 매체.
KR1020217007577A 2017-10-03 2017-10-03 차량 환경에서의 다중 인자 인증 및 액세스 제어 KR102369955B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
PCT/US2017/054848 WO2019070232A1 (en) 2017-10-03 2017-10-03 MULTI-FACTOR AUTHENTICATION AND ACCESS CONTROL IN A VEHICLE ENVIRONMENT
KR1020207022335A KR102230174B1 (ko) 2017-10-03 2017-10-03 차량 환경에서의 다중 인자 인증 및 액세스 제어

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020207022335A Division KR102230174B1 (ko) 2017-10-03 2017-10-03 차량 환경에서의 다중 인자 인증 및 액세스 제어

Publications (2)

Publication Number Publication Date
KR20210031781A KR20210031781A (ko) 2021-03-22
KR102369955B1 true KR102369955B1 (ko) 2022-03-04

Family

ID=60120187

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020207022335A KR102230174B1 (ko) 2017-10-03 2017-10-03 차량 환경에서의 다중 인자 인증 및 액세스 제어
KR1020217007577A KR102369955B1 (ko) 2017-10-03 2017-10-03 차량 환경에서의 다중 인자 인증 및 액세스 제어
KR1020197038224A KR102142642B1 (ko) 2017-10-03 2017-10-03 차량 환경에서의 다중 인자 인증 및 액세스 제어

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020207022335A KR102230174B1 (ko) 2017-10-03 2017-10-03 차량 환경에서의 다중 인자 인증 및 액세스 제어

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020197038224A KR102142642B1 (ko) 2017-10-03 2017-10-03 차량 환경에서의 다중 인자 인증 및 액세스 제어

Country Status (6)

Country Link
US (4) US10812976B2 (ko)
EP (2) EP3583754B1 (ko)
JP (1) JP6776463B2 (ko)
KR (3) KR102230174B1 (ko)
CN (2) CN113766505B (ko)
WO (1) WO2019070232A1 (ko)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016211352A1 (de) * 2016-02-02 2017-08-03 Volkswagen Aktiengesellschaft Verfahren zum Konfigurieren von mobilen Online-Diensten
US10812976B2 (en) 2017-10-03 2020-10-20 Google Llc Multi-factor authentication and access control in a vehicular environment
JP6629810B2 (ja) * 2017-10-06 2020-01-15 株式会社Ｓｕｂａｒｕ ドア制御装置
US20190196779A1 (en) * 2017-12-21 2019-06-27 Harman International Industries, Incorporated Intelligent personal assistant interface system
US11113374B2 (en) * 2018-04-19 2021-09-07 Carrier Corporation Managing seamless access to locks with person/head detection
KR102657633B1 (ko) * 2018-11-14 2024-04-17 현대자동차주식회사 차량 및 차량의 제어방법
JP2020092350A (ja) * 2018-12-06 2020-06-11 シャープ株式会社 情報処理システム及び情報処理方法
US11531736B1 (en) * 2019-03-18 2022-12-20 Amazon Technologies, Inc. User authentication as a service
US11613217B2 (en) * 2019-05-08 2023-03-28 Ford Global Technologies, Llc Vehicle identity access management
US10789800B1 (en) 2019-05-24 2020-09-29 Ademco Inc. Systems and methods for authorizing transmission of commands and signals to an access control device or a control panel device
US10832509B1 (en) * 2019-05-24 2020-11-10 Ademco Inc. Systems and methods of a doorbell device initiating a state change of an access control device and/or a control panel responsive to two-factor authentication
US10484367B1 (en) * 2019-06-06 2019-11-19 Capital One Services, Llc Utilizing natural language processing to automatically perform multi-factor authentication
US11281794B2 (en) * 2019-09-26 2022-03-22 Microsoft Technology Licensing, Llc Fine grained access control on procedural language for databases based on accessed resources
US11341781B2 (en) * 2019-10-18 2022-05-24 Toyota Motor Engineering And Manufacturing North America, Inc. Vehicular communications through identifiers and online systems
US11422870B2 (en) 2020-03-04 2022-08-23 Bank Of America Corporation Managing and routing messages to distributed user devices in an enterprise computing environment
KR20220051749A (ko) 2020-10-19 2022-04-26 삼성전자주식회사 차량에 탑재된 전자 장치 및 그 동작 방법
US11650065B2 (en) * 2020-11-05 2023-05-16 Ford Global Technologies, Llc Systems and methods for using in-vehicle voce recognition, IoT sensors and vehicle state data for augmenting car-generated GPS/location-based data for predicting travel patterns
US11893985B2 (en) * 2021-01-15 2024-02-06 Harman International Industries, Incorporated Systems and methods for voice exchange beacon devices
US11450161B1 (en) * 2021-02-26 2022-09-20 Qualcomm Incorporated Access and communication using near ultra low energy fields
US20230046788A1 (en) * 2021-08-16 2023-02-16 Capital One Services, Llc Systems and methods for resetting an authentication counter
US11909804B2 (en) * 2022-01-11 2024-02-20 Red Hat, Inc. Selective validation of a portion of a server response to a client request
CN115021976A (zh) * 2022-05-17 2022-09-06 蔚来汽车科技(安徽)有限公司 车辆认证系统及包括其的车辆、车辆认证方法、存储介质
CN117221011B (zh) * 2023-11-07 2024-02-27 北京紫光芯能科技有限公司 一种传输装置以及传输系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140091903A1 (en) 2012-09-28 2014-04-03 Steven Birkel Mobile device and key fob pairing for multi-factor security
US20150077327A1 (en) 2013-09-17 2015-03-19 Toyota Motor Sales, U.S.A., Inc. Interactive vehicle window display system with user identification

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS56174550U (ko) 1980-05-27 1981-12-23
DE19752029B4 (de) * 1997-11-24 2004-02-26 Siemens Ag Diebstahlschutzsystem für ein Kraftfahrzeug
JP2007107377A (ja) 2002-12-13 2007-04-26 Matsushita Electric Ind Co Ltd 車載機器制御システム及び車載機器制御装置
JP2004354930A (ja) 2003-05-30 2004-12-16 Calsonic Kansei Corp 音声認識システム
DE102005021171A1 (de) * 2005-05-06 2006-11-16 Daimlerchrysler Ag Verfahren zur Einstellung eines Insassenschutz- und/oder Komfortsystems sowie Insassenschutz- und/oder Komfortsystem
US20060294393A1 (en) 2005-06-24 2006-12-28 Mc Call Clark E Remote biometric registration for vehicles
JP2007314014A (ja) * 2006-05-25 2007-12-06 Kenwood Corp 車載装置、プログラム、及び車載装置における使用データ決定方法
JP2009025715A (ja) 2007-07-23 2009-02-05 Xanavi Informatics Corp 車載装置および音声認識方法
JP2010128099A (ja) * 2008-11-26 2010-06-10 Toyota Infotechnology Center Co Ltd 車載用音声情報提供システム
US9073554B2 (en) * 2009-07-29 2015-07-07 The Invention Science Fund I, Llc Systems and methods for providing selective control of a vehicle operational mode
EP2479731B1 (en) * 2011-01-18 2015-09-23 Alcatel Lucent User/vehicle-ID associating access rights and privileges
US9116786B2 (en) * 2011-11-16 2015-08-25 Flextronics Ap, Llc On board vehicle networking module
WO2014172369A2 (en) * 2013-04-15 2014-10-23 Flextronics Ap, Llc Intelligent vehicle for assisting vehicle occupants and incorporating vehicle crate for blade processors
US20140094987A1 (en) * 2012-09-28 2014-04-03 Intel Corporation Tiered level of access to a set of vehicles
CN104969289B (zh) * 2013-02-07 2021-05-28 苹果公司 数字助理的语音触发器
US10271265B2 (en) * 2013-05-08 2019-04-23 Cellcontrol, Inc. Detecting mobile devices within a vehicle based on cellular data detected within the vehicle
US9769658B2 (en) * 2013-06-23 2017-09-19 Shlomi Dolev Certificating vehicle public key with vehicle attributes
US9400564B2 (en) * 2013-09-17 2016-07-26 Toyota Motor Engineering & Manufacturing North America, Inc. Interactive vehicle window display system with a safe driving reminder system
JP2015085899A (ja) * 2013-11-01 2015-05-07 株式会社デンソー 車両制御装置
US9305412B2 (en) * 2013-11-22 2016-04-05 Volkswagen Ag Apparatus, system and method for vehicle authentication management and reporting
US10069868B2 (en) 2014-03-28 2018-09-04 Intel Corporation Systems and methods to facilitate multi-factor authentication policy enforcement using one or more policy handlers
US20160300050A1 (en) * 2014-05-28 2016-10-13 GM Global Technology Operations LLC Verifying a user with biometric data
JP6827918B2 (ja) * 2014-06-11 2021-02-10 ヴェリディウム アイピー リミテッド 生体情報に基づいて、ユーザの車両へのアクセスを容易にするためのシステムと方法
US9440660B2 (en) 2014-07-22 2016-09-13 Toyota Motor Engineering & Manufacturing North America, Inc. Method for remote communication with and through a vehicle
JP6337199B2 (ja) * 2014-08-26 2018-06-06 トヨタ モーター セールス，ユー．エス．エー．，インコーポレイティド 対話式移動体制御システムのための一体化ウェアラブル用品
KR101677648B1 (ko) 2014-12-22 2016-11-18 엘지전자 주식회사 차량 제어 장치 및 그 제어 방법
JP2016161754A (ja) 2015-03-02 2016-09-05 クラリオン株式会社 車載装置
JP6447379B2 (ja) 2015-06-15 2019-01-09 トヨタ自動車株式会社 認証装置、認証システムおよび認証方法
JP2017090613A (ja) 2015-11-09 2017-05-25 三菱自動車工業株式会社 音声認識制御システム
US10884503B2 (en) * 2015-12-07 2021-01-05 Sri International VPA with integrated object recognition and facial expression recognition
US20180316671A1 (en) * 2016-02-03 2018-11-01 Averon Us, Inc. Method and apparatus for facilitating authorization of a specified task via multi-stage and multi-level authentication processes utilizing frictionless two-factor authentication
JP6559079B2 (ja) * 2016-02-12 2019-08-14 シャープ株式会社 対話型家電システム、および発話者との対話に基づいてメッセージを出力するためにコンピュータが実行する方法
US10148135B2 (en) 2016-02-16 2018-12-04 Intel IP Corporation System, apparatus and method for authenticating a device using a wireless charger
US9990783B2 (en) * 2016-02-16 2018-06-05 GM Global Technology Operations LLC Regulating vehicle access using cryptographic methods
US20170278330A1 (en) * 2016-03-22 2017-09-28 Ford Global Technologies, Llc Method and apparatus for wireless vehicular access device authentication
US20170357980A1 (en) * 2016-06-10 2017-12-14 Paypal, Inc. Vehicle Onboard Sensors and Data for Authentication
US20180012197A1 (en) * 2016-07-07 2018-01-11 NextEv USA, Inc. Battery exchange licensing program based on state of charge of battery pack
US10027759B2 (en) * 2016-08-05 2018-07-17 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicle human-machine interface (HMI) device operation of a handheld mobile device
US10493957B2 (en) * 2016-08-18 2019-12-03 Toyota Motor Engineering & Manufacturing North America, Inc. Operational mode change based on vehicle occupancy for an autonomous vehicle
US10479226B2 (en) * 2016-09-13 2019-11-19 Ford Global Technologies, Llc Management of mobile device control of vehicle systems using policies
US10369964B2 (en) * 2017-01-10 2019-08-06 The Mitre Corporation Keyless entry system security enhancement
US10074223B2 (en) * 2017-01-13 2018-09-11 Nio Usa, Inc. Secured vehicle for user use only
US10812976B2 (en) 2017-10-03 2020-10-20 Google Llc Multi-factor authentication and access control in a vehicular environment

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140091903A1 (en) 2012-09-28 2014-04-03 Steven Birkel Mobile device and key fob pairing for multi-factor security
US20150077327A1 (en) 2013-09-17 2015-03-19 Toyota Motor Sales, U.S.A., Inc. Interactive vehicle window display system with user identification

Also Published As

Publication number Publication date
KR20210031781A (ko) 2021-03-22
KR20200096323A (ko) 2020-08-11
CN111108731B (zh) 2021-08-10
US20210021999A1 (en) 2021-01-21
US11528605B2 (en) 2022-12-13
US20200068400A1 (en) 2020-02-27
EP3583754B1 (en) 2020-12-02
EP3583754A1 (en) 2019-12-25
WO2019070232A1 (en) 2019-04-11
CN111108731A (zh) 2020-05-05
CN113766505B (zh) 2024-03-22
US11856399B2 (en) 2023-12-26
US20230422033A1 (en) 2023-12-28
EP3767920A1 (en) 2021-01-20
JP6776463B2 (ja) 2020-10-28
US10812976B2 (en) 2020-10-20
JP2020526813A (ja) 2020-08-31
KR20200004894A (ko) 2020-01-14
KR102142642B1 (ko) 2020-08-10
KR102230174B1 (ko) 2021-03-19
CN113766505A (zh) 2021-12-07
US20230052913A1 (en) 2023-02-16

Similar Documents

Publication Publication Date Title
KR102369955B1 (ko) 차량 환경에서의 다중 인자 인증 및 액세스 제어
US10805577B2 (en) Video-based data collection, image capture and analysis configuration
EP3533196B1 (en) Securing audio data
US10798106B2 (en) System for providing layered security
US20220237273A1 (en) Authentication of audio-based input signals
US20160080348A1 (en) Two-factor authentication systems and methods
JP6995887B2 (ja) センサーベースの検証を用いた車両機能制御
JP7004833B2 (ja) ネットワーク化環境における遅延２要素認証
JP7043561B2 (ja) 乗物環境における多要素認証およびアクセス制御
US20240121232A1 (en) Method and system for frictionless application authentication
JP2022058437A (ja) ネットワーク化環境における遅延２要素認証

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right