KR20200007023A

KR20200007023A - 차량 진단 데이터에 근거하여 조치 가능한 이벤트 결정

Info

Publication number: KR20200007023A
Application number: KR1020197036829A
Authority: KR
Inventors: 해리스 라믹
Original assignee: 구글 엘엘씨
Priority date: 2017-10-03
Filing date: 2017-10-03
Publication date: 2020-01-21
Also published as: JP2021144056A; US20230343155A1; CN110730950B; JP7164674B2; KR102288877B1; CN116661726A; CN110730950A; KR20210099198A; EP3622384A1; US11734968B2; US20190287323A1; JP6903770B2; JP2020530098A; KR102368004B1; EP3622384B1; WO2019070233A1; US20220122387A1; KR20220025951A; JP2022183313A; KR102405256B1

Abstract

본 개시는 일반적으로 차량과 관련된 조치 가능한 이벤트를 결정하기 위한 시스템 및 방법에 관한 것이다. 이 시스템 및 방법은 차량 진단 데이터에 기초하여 이벤트를 결정하고, 그 이벤트를 적절한 인터페이스를 통해 사용자에게 보고할 수 있다. 이 시스템 및 방법은 또한 이벤트를 처리하기 위한 추천 액션를 결정할 수 있고, 사용자의 승인에 따라 그 액션의 완료를 용이하게 할 수 있다.

Description

차량 진단 데이터에 근거하여 조치 가능한 이벤트 결정

자동차, 트럭, 버스 및 오토바이와 같은 차량의 작동 상태는 시간이나 사용에 따라 악화될 수 있다. 또한 차량 주변의 조건도 변할 수 있다.

본 개시의 일 양태에 따르면, 오디오 기반 차량 진단 시스템은 차량 환경에서 동작할 수 있다. 이 시스템은 차량에 설치된 디지털 어시스턴트 애플리케이션을 실행하고 이벤트 결정 컴포넌트, 통지 컴포넌트 및 다이렉트 액션 애플리케이션 프로그래밍 인터페이스(API)를 갖는 데이터 처리 시스템을 포함할 수 있다. 이벤트 결정 컴포넌트는 데이터 처리 시스템의 인터페이스를 통해, 차량과 관련된 복수의 센서 중 적어도 하나에 의해 감지된 차량 진단 데이터를 수신할 수 있다. 이벤트 결정 컴포넌트는 차량 진단 데이터의 분석에 기초하여 차량과 관련된 트리거 이벤트를 식별할 수 있다. 디지털 어시스턴트 애플리케이션은 또한 트리거 이벤트에 기초하여 제1 오디오 출력 인터페이스를 선택하기 위한 통지 컴포넌트를 포함할 수 있다. 디지털 어시스턴트 애플리케이션은 또한 트리거 이벤트에 대응하는 이벤트 데이터 메시지를 생성하기 위한 다이렉트 액션 애플리케이션 프로그래밍 인터페이스(API)를 포함할 수 있다. 이벤트 데이터 메시지는 제1 오디오 출력 인터페이스와 호환될 수 있다. 다이렉트 액션 API는 또한 디지털 어시스턴트 애플리케이션으로부터 이벤트 데이터 메시지를 제1 오디오 출력 인터페이스로 전송하여 제1 오디오 출력 인터페이스가 이벤트 데이터 메시지와 관련된 정보를 오디오 출력으로서 출력하게 할 수 있다.

본 개시의 한 양태에 따르면, 오디오 기반 차량 진단 방법은 차량에 설치된 데이터 처리 시스템에 의해 실행되는 디지털 어시스턴트 애플리케이션의 이벤트 결정 컴포넌트에 의해, 데이터 처리 시스템의 인터페이스를 통해, 차량과 관련된 복수의 센서 중 적어도 하나에 의해 감지된 차량 진단 데이터를 수신하는 단계와; 이벤트 결정 컴포넌트에 의해, 차량 진단 데이터의 분석에 기초하여, 차량과 관련된 트리거 이벤트를 식별하는 단계와; 디지털 어시스턴트 애플리케이션의 통지 컴포넌트에 의해, 트리거 이벤트에 기초하여 제1 오디오 출력 인터페이스를 선택하는 단계와; 디지털 어시스턴트 애플리케이션의 다이렉트 액션 애플리케이션 프로그래밍 인터페이스(API), 트리거 이벤트에 대응하는 이벤트 데이터 메시지를 생성하는 단계와, 상기 이벤트 데이터 메시지는 제1 오디오 출력 인터페이스와 호환 가능한 오디오 출력으로 포맷되고; 그리고 다이렉트 액션 API에 의해, 제1 오디오 출력 인터페이스가 이벤트 데이터 메시지와 관련된 정보를 오디오 출력으로서 출력하게 하도록 상기 이벤트 데이터 메시지를 디지털 어시스턴트 애플리케이션으로부터 제1 오디오 출력 인터페이스로 전송하는 단계를 포함한다.

이들 및 다른 양태 및 구현은 아래에서 상세하게 논의된다. 전술한 정보 및 다음의 상세한 설명은 다양한 양태 및 구현의 예시적인 예를 포함하고 청구된 양태 및 구현의 특성 및 특성을 이해하기 위한 개요 또는 프레임 워크를 제공한다. 도면은 다양한 양태 및 구현에 대한 예시 및 추가 이해를 제공하며, 본 명세서에 포함되어 본 명세서의 일부를 구성한다.

첨부된 도면은 실제 크기로 도시된 것이 아니다. 다양한 도면에서 유사한 참조 번호 및 명칭은 유사한 요소를 나타낸다. 명확성을 위해, 모든 도면에 모든 컴포넌트가 표시되는 것은 아니다.
도 1은 차량과 관련된 이벤트를 결정하기 위한 예시적인 시스템을 도시한다.
도 2는 차량의 내부 객실을 포함하여 도 1의 시스템에 포함된 차량의 평면도를 도시한다.
도 3은 도 1에 도시된 예시적인 시스템을 사용하는 예시적인 오디오 기반 차량 진단 방법을 도시한다. 1.
도 4는 예시적인 컴퓨터 시스템의 블록도이다.

다음은 차량과 관련된 이벤트를 결정하기 위한 방법, 장치 및 시스템과 관련된 다양한 개념 및 그의 구현의 보다 상세한 설명이다. 위에서 소개되고 아래에서 더 상세하게 논의되는 다양한 개념들은 수 많은 방식으로 구현될 수 있다. 자동차, 트럭, 버스, 오토바이, 보트, 비행기 또는 다른 운송 디바이스와 같은 차량 (vehicle)은 진단 데이터를 수집하기 위한 복수의 센서를 포함할 수 있다. 진단 데이터는 이러한 차량의 운전자에게 고장 상태(failure conditions)를 보고하는데 사용될 수 있다. 차량은 이러한 정보를 보고하기 위해 제한된 출력 인터페이스를 포함할 수 있다. 결과적으로, 예를 들어, 차량 콘솔에 "체크 엔진" 표시등을 비추는 것에 의해 고장 상태가 운전자에게 보고되는 경우, 운전자는 고장의 원인이 무엇인지 또는 고장을 해결하기 위해 취해야 할 액션(조치)이 무엇인지 쉽게 결정할 수 없다. 게다가, 진단 데이터는 현재의 고장 상태를 나타낼 수 있으며, 고장이 발생하기 전에 운전자 또는 다른 사용자에게 액션을 취할 시간이 거의 또는 전혀 남지 않도록 한다.

본 개시는 일반적으로 차량 진단 데이터에 기초하여 차량과 관련된 조치 가능한(actionable) 이벤트를 결정하기 위한 데이터 처리 시스템에 관한 것이다. 데이터 처리 시스템은 다수의 센서로부터 데이터를 수집 및 처리하여 운전자의 주의가 필요한 차량 이벤트를 결정하고 특성화할 수 있으며, 이러한 이벤트에 대한 정정 액션을 추천할 수 있으며, 승인시 추천된 정정 액션의 완료를 촉진할 수 있다. 본 개시의 솔루션은 차량의 하나 이상의 상태를 모니터링하고 하나 이상의 차량 상태의 변화를 결정할 때만 차량과 관련된 이벤트를 보고함으로써 계산 효율을 향상시킬 수 있다. 차량 내의 컴퓨팅 디바이스상에서 아래에 설명된 계산들 중 적어도 일부를 수행함으로써, 시스템은 컴퓨터 컴퓨터 네트워크를 통해 진단 데이터를 원격 컴퓨터로 전송하지 않아도 되므로 대역폭 사용을 줄일 수 있다. 차량에 로컬인 컴퓨팅 디바이스에서 적어도 일부 계산을 수행하는 것은 또한 차량에 로컬인 컴퓨팅 디바이스와 다른 원격 컴퓨팅 디바이스들 사이의 네트워크 연결이 신뢰할 수 없기 때문에 레이턴시를 개선할 수 있다.

본 명세서에 설명된 시스템 및 방법은 차량에 설치되고 디지털 어시스턴트(디지털 비서) 애플리케이션을 포함하는 데이터 처리 시스템을 포함할 수 있다. 디지털 어시스턴트 애플리케이션은 디지털 어시스턴트 애플리케이션과 인간 사용자 사이의 양방향 대화를 용이하게 하는 소프트웨어 애플리케이션일 수 있다. 대화는 영어 또는 다른 언어와 같은 자연어를 사용하여 수행할 수 있다. 디지털 어시스턴트 애플리케이션은 차량과 관련된 다수의 센서로부터 차량 진단 데이터를 수신할 수 있고, 그 진단 데이터를 처리하여 사용자(예를 들어, 운전자 또는 차량 소유자)에게 보고되어야 하는 트리거 이벤트를 결정할 수 있다. 디지털 어시스턴트 애플리케이션은 트리거 이벤트를 보고하기 위한 적절한 인터페이스를 선택할 수 있고, 그 트리거 이벤트에 대응하고 상기 선택된 인터페이스에 따라 포맷된 이벤트 데이터 메시지를 생성할 수 있다. 예를 들어, 선택된 인터페이스는 차량의 내부 객실에 있는 스피커일 수 있고, 디지털 어시스턴트 애플리케이션은 스피커를 통해 재생될 오디오로서 이벤트 데이터 메시지를 포맷할 수 있다. 그런 다음 디지털 어시스턴트 애플리케이션은 선택된 인터페이스를 통해 출력될 이벤트 데이터 메시지를 전송할 수 있다. 디지털 어시스턴트 애플리케이션은 또한 트리거 이벤트를 조치(address)하기 위한 추천 액션를 결정하고 그 추천 액션을 사용자에게 통지할 수 있다. 사용자로부터 승인이 수신되면, 디지털 어시스턴트 애플리케이션은 그 액션의 완료를 촉진할 수 있다. 예를 들어, 추천 액션은 정비사에 의해 수행될 유지 보수 활동일 수 있고, 디지털 어시스턴트 애플리케이션은 사용자가 로컬 정비사와 약속을 스케줄링하는 것을 도울 수 있다. 차량 내에서 로컬로 트리거 이벤트 및 추천 액션를 식별하는데 필요한 계산 분석의 적어도 일부를 수행함으로써, 디지털 어시스턴트 애플리케이션은 차량으로부터 멀리 떨어진 컴퓨팅 디바이스에 의해 그러한 계산이 수행되도록 요구하는 대안에 비해 네트워크 대역폭을 절약하고 프로세서 이용률을 감소시키고 전력을 절약할 수 있다.

도 1은 차량과 관련된 이벤트를 결정하기 위한 예시적인 시스템(100)을 도시한다. 시스템(100)은 적어도 하나의 데이터 처리 시스템(102), 하나 이상의 클라이언트 디바이스(128) 및 하나 이상의 차량(140)을 포함할 수 있다.

데이터 처리 시스템(102)은 인터페이스(104)를 포함할 수 있다. 데이터 처리 시스템(102)은 오디오-기반 입력을 분석하기 위한 자연어 프로세서(Natural Language Processor : NLP) 컴포넌트(106)를 포함할 수 있다. 데이터 처리 시스템(102)은 시스템(100)의 다른 디바이스들의 인터페이스를 감지하고 관리하기 위한 인터페이스 관리 컴포넌트(108)를 포함할 수 있다. 데이터 처리 시스템(102)은 차량(140)과 관련된 이벤트를 결정하기 위한 이벤트 결정 컴포넌트(116)뿐만 아니라 결정된 이벤트에 응답하여 취해질 추천 액션을 포함할 수 있다. 데이터 처리 시스템(102)은 사용자에게 이벤트 또는 추천 액션에 관해 통지될 수 있는 인터페이스를 선택하기 위한 통지 컴포넌트(114)를 포함할 수 있다. 데이터 처리 시스템(102)은 사용자로부터의 승인 수신시, 추천 액션의 완료를 용이하게 하는 이행(fulfilment) 컴포넌트(110)를 포함할 수 있다. 데이터 처리 시스템(102)은 다이렉트 액션 애플리케이션 프로그래밍 인터페이스(API)(112)를 포함할 수 있다. 데이터 처리 시스템(102)은 데이터 처리 시스템(102)이 파라미터(120), 정책(122), 응답 데이터(124) 및 템플릿(126)을 저장할 수 있는 데이터 저장소(118)를 포함할 수 있다. 클라이언트 디바이스(128) 및 차량(140)은 데이터 처리 시스템(102)의 임의의 컴포넌트의 인스턴스를 포함하고 실행할 수 있다. 클라이언트 디바이스(128) 및 차량(140)은 각각 데이터 처리 시스템(102)의 전부 또는 일부를 포함할 수 있다.

시스템(100)은 또한 하나 이상의 클라이언트 디바이스(128)를 포함할 수 있다. 클라이언트 디바이스(128)는 센서(130), 스피커(132), 인터페이스(104) 및 변환기(136)를 포함할 수 있다. 클라이언트 디바이스(128)는 NLP 컴포넌트(106)의 인스턴스를 실행할 수 있다. 시스템(100)은 또한 하나 이상의 데이터 제공자(138)를 포함할 수 있다. 시스템(100)은 하나 이상의 차량(140)을 포함할 수 있다. 차량(140)은 센서(130), 스피커(132), 인터페이스(104) 및 변환기(136)를 포함할 수 있다. 차량(140)은 NLP 컴포넌트(106)의 인스턴스를 실행할 수 있다. 차량(140)은 또한 디지털 어시스턴트 애플리케이션(144)을 포함할 수 있다. 디지털 어시스턴트 애플리케이션(144)은 데이터 처리 시스템(102)에 도시된 컴포넌트들 중 하나, 하나 이상 또는 모두를 포함할 수 있다. 데이터 처리 시스템(102)과 관련하여 본 명세서에 기술된 동작들은 차량(140) 내에서 로컬로 수행될 수 있다.

시스템(100)의 컴포넌트들은 네트워크(142)를 통해 통신할 수 있다. 일부 구현들에서, 하나 이상의 클라이언트 디바이스(128)는 차량(140)의 인스턴스 내에 위치될 수 있다. 예를 들어, 클라이언트 디바이스(128)는 차량(140)을 운전하는 운전자의 주머니에 있는 휴대폰일 수 있다. 하나 이상의 클라이언트 디바이스(128)는 또한 차량(140)에 대해 원격일 수 있다. 예를 들어, 운전자가 휴대 전화를 운반하는 차량(140)을 주차하고 이탈한 후, 운전자의 휴대 전화는 차량(140)에 대해 원격일 수 있다.

네트워크(142)는 인터넷, 로컬, 광역, 메트로 또는 다른 영역 네트워크와 같은 컴퓨터 네트워크, 인트라넷, 위성 네트워크, 음성 또는 데이터 이동 전화 통신 네트워크와 같은 다른 컴퓨터 네트워크 및 이들의 조합을 포함할 수 있다. 네트워크(142)는 데이터 처리 시스템(102), 클라이언트 디바이스(128) 및 차량(140)에 의해 사용되어, 웹 페이지, 웹 사이트, 도메인 이름, URL 또는 데이터 제공자(138)와 같은 정보 리소스에 액세스할 수 있다. 예를 들어, 데이터 처리 시스템(102)은 네트워크(142)를 통해 차량(140)과 관련된 위치와 같dl 특정 위치에 대한 날씨 데이터를 제공하는 데이터 제공자(138)에 액세스할 수 있다.

네트워크(142)는 예를 들어 포인트-투-포인트 네트워크, 브로드 캐스트 네트워크, 광역 네트워크, 근거리 네트워크, 통신 네트워크, 데이터 통신 네트워크, 컴퓨터 네트워크, ATM(Asynchronous Transfer Mode)을 포함할 수 있다. ) 네트워크, SONET(Synchronous Optical Network) 네트워크, SDH(Synchronous Digital Hierarchy) 네트워크, 무선 네트워크 또는 유선 네트워크 및 이들의 조합dmf vhgkagkf tn dlTek. 네트워크(142)는 적외선 채널 또는 위성 대역과 같은 무선 링크를 포함할 수 있다. 네트워크(142)의 토폴로지는 버스, 별 또는 링 네트워크 토폴로지를 포함할 수 있다. 네트워크(142)는 AMPS(Advanced Mobile Phone Protocol), TDMA(Time Division Multiple Access), CDMA(Code-Division Multiple Access), GSM(Global System for Mobile Communication), GPRS(General Packet Radio Services) 또는 UMTS(Universal Mobile Telecommunications System)를 포함하여, 모바일 디바이스 간 통신에 사용되는 프로토콜(들)을 사용하는 휴대 전화 네트워크를 포함할 수 있다. 상이한 유형의 데이터가 상이한 프로토콜을 통해 전송될 수 있거나, 동일한 유형의 데이터가 상이한 프로토콜을 통해 전송될 수 있다.

클라이언트 디바이스(128) 및 차량(140)은 각각 네트워크(142)를 통해 데이터 처리 시스템(102)과 서로 통신하기 위한 프로세서를 갖는 컴퓨팅 디바이스와 같은 적어도 하나의 논리 디바이스를 포함할 수 있다. 클라이언트 디바이스(128) 및 차량(140)은 데이터 처리 시스템(102)과 관련하여 기술된 임의의 컴포넌트의 인스턴스를 포함할 수 있다. 클라이언트 디바이스(128) 및 차량(140)은 데이터 처리 시스템(102)의 인스턴스를 포함할 수 있다. 클라이언트 디바이스(128)는 데스크탑 컴퓨터, 랩탑 컴퓨터, 태블릿 컴퓨터, 개인용 디지털 어시스턴트, 스마트 폰, 모바일 디바이스, 휴대용 컴퓨터, 씬(thin) 클라이언트 컴퓨터, 가상 서버, 스피커-기반 디지털 어시스턴트, 또는 임의의 다른 유형 또는 형태의 컴퓨팅 디바이스를 포함할 수 있다. 차량(140)은 수동 또는 자율 자동차, 트럭, 버스, 산업용 차량, 오토바이, 보트, 항공기 또는 다른 운송 기계를 포함할 수 있다. 차량(140)은 데이터 처리 시스템(102)의 인스턴스 또는 그의 임의의 컴포넌트를 실행할 수 있는 하나 이상의 프로세서를 포함할 수 있다. 예를 들어, 데이터 처리 시스템(102) 또는 그의 컴포넌트는 디지털 어시스턴트 애플리케이션(144)에 의해 실행될 수 있다. 데이터 처리 시스템(102)을 실행하는데 사용되는 프로세서들은 차량(140)의 헤드 유닛과 같은 차량(140)의 컴퓨팅 디바이스의 컴포넌트일 수 있다.

클라이언트 디바이스(128) 및 차량(140)는 적어도 하나의 센서(130), 적어도 하나 개의 변환기(136), 적어도 하나의 오디오 구동기, 및 적어도 하나의 스피커(132)를 포함할 수 있다. 센서(130)는 마이크로폰 또는 오디오 입력 센서를 포함할 수 있다. 센서(130)는 또한 GPS 센서, 근접 센서, 주변 광 센서, 온도 센서, 모션 센서, 가속도계 또는 자이로 스코프 중 적어도 하나를 포함할 수 있다. 센서(130)는 점유 또는 중량 센서를 포함할 수 있다. 센서(130)는 또한 속도계, 주행 거리계, 가스 게이지, 또는 차량(140)의 기능과 관련된 임의의 다른 센서와 같은 차량(140)의 기구와 관련된 센서를 포함할 수 있다. 변환기(136)는 오디오 입력을 전자 신호로 변환할 수 있다. 오디오 구동기는 스피커(132)를 제어하기 위해 클라이언트 디바이스(128) 또는 차량(140)의 하나 이상의 프로세서에 의해 실행되는 스크립트 또는 프로그램을 포함할 수 있다. 스피커(132)는 전기 신호를 가청 파로 변환함으로써 오디오 신호를 렌더링할 수 있다.

클라이언트 디바이스(128) 및 차량(140)은 (예를 들어, 센서(130), 인터페이스(104) 또는 디지털을 통해) 클라이언트 디바이스(128) 또는 차량(140)에 입력 오디오 신호로서 음성 쿼리(질의) 또는 명령을 입력할 수 있는 최종 사용자와 관련될 수 있고, (예를 들어, 스피커(132)를 통해) 데이터 처리 시스템(102)으로부터 제공 될 수 있는 컴퓨터-생성 음성 형태로 오디오 출력을 수신한다. 차량(140) 또는 그 임의의 컴포넌트는 또한 트리거 이벤트 또는 액션 데이터 메시지에 대응하는 이벤트 데이터 메시지를 생성하여, 트리거 이벤트를 처리하기 위한 사전 결정된 기능 또는 액션을 수행할 수 있다. 인터페이스(104)는 데이터 처리 시스템(102)의 다이렉트 액션 API(112)에 데이터 메시지를 수신 또는 제공할 수 있고, 시스템(100)의 컴포넌트들 간의 통신을 가능하게 한다. 클라이언트 디바이스(128) 및 차량(140)은 또한 사용자가 시스템(100)의 컴포넌트들과 상호 작용할 수 있게 하는 사용자 인터페이스를 포함할 수 있다.

데이터 처리 시스템(102)은 적어도 하나의 프로세서를 갖는 적어도 하나의 서버를 포함할 수 있다. 예를 들어, 데이터 처리 시스템(102)은 적어도 하나의 데이터 센터 또는 서버 팜에 위치된 복수의 서버를 포함할 수 있다. 데이터 처리 시스템(102)은 오디오 입력 신호로부터 요청을 결정하고 요청 또는 커맨드와 관련된 트리거 키워드를 결정할 수 있다. 요청 또는 커맨드 및 트리거 키워드에 기초하여, 데이터 처리 시스템(102)은 응답 데이터를 생성 또는 선택할 수 있다. 응답 데이터는 오디오 기반이거나 텍스트 기반일 수 있다. 예를 들어, 응답 데이터는 렌더링될 때 스피커(132)를 통해 오디오 출력 또는 음향 파를 제공하는 하나 이상의 오디오 파일을 포함할 수 있다. 응답 데이터 내의 데이터는 또한 컨텐트 아이템으로 지칭될 수 있다. 응답 데이터는 오디오 컨텐츠 외에 다른 컨텐츠(예를 들어, 텍스트, 비디오 또는 이미지 컨텐츠)를 포함할 수 있다.

데이터 처리 시스템(102)은 다수의 논리적으로 그룹화된 서버를 포함할 수 있고 분산 컴퓨팅 기술을 용이하게 한다. 논리적 서버 그룹은 데이터 센터, 서버 팜 또는 머신 팜으로 지칭된다. 서버는 지리적으로 분산될 수 있다. 데이터 센터 또는 머신 팜은 단일 엔터티로 관리되거나, 머신 팜은 복수의 머신 팜을 포함할 수 있다. 각 머신 팜 내의 서버들은 이기 종일 수 있는데, 하나 이상의 서버 또는 머신은 하나 이상의 유형의 운영 체제 플랫폼에 따라 작동할 수 있다. 데이터 처리 시스템(102)은 하나 이상의 고밀도 랙 시스템에 저장되는 데이터 센터의 서버, 예를 들어 기업 데이터 센터에 위치한 관련 스토리지 시스템을 포함할 수 있다. 이러한 방식으로 통합된 서버들을 갖는 데이터 처리 시스템(102)은 로컬화된 고성능 네트워크 상에 서버 및 고성능 스토리지 시스템을 위치시킴으로써 시스템 관리성, 데이터 보안, 시스템의 물리적 보안 및 시스템 성능을 향상시킬 수 있다. 일부 구현에서, 서버 및 스토리지 시스템을 포함하여 데이터 처리 시스템(102) 컴포넌트의 전부 또는 일부를 중앙 집중화하고 그들을 고급 시스템 관리 툴과 결합함으로써 서버 리소스를 보다 효율적으로 사용할 수 있게 하여 전력 및 프로세싱 요구 사항을 절약할 수 있고 대역폭 사용량을 줄일 수 있다. 데이터 처리 시스템(102)의 각 컴포넌트는 적어도 하나의 처리 유닛, 서버, 가상 서버, 회로, 엔진, 에이전트, 어플라이언스, 또는 데이터 저장소(118) 및 다른 컴퓨팅 디바이스뿐만 아니라 스크립트, 프로그램 또는 또는 애플리케이션과 통신하도록 구성된 프로그램 가능한 논리 어레이와 같은 다른 논리 디바이스를 포함할 수 있다.

데이터 처리 시스템(102)은 데이터 저장소(repository)(118)를 포함할 수 있다. 데이터 저장소(118)는 하나 이상의 로컬 또는 분산 데이터베이스를 포함할 수 있고 데이터베이스 관리 시스템을 포함할 수 있다. 데이터 저장소는 컴퓨터 데이터 스토리지 또는 메모리를 포함할 수 있으며, 다른 데이터 중에서도 하나 이상의 파라미터(120), 하나 이상의 정책(122), 응답 데이터(124) 및 템플릿(126)을 저장할 수 있다. 파라미터(120), 정책(122) 및 템플릿(126)은 클라이언트 디바이스(128), 데이터 처리 시스템(102) 및 차량(140) 사이의 음성 기반 세션에 관한 규칙과 같은 정보를 포함할 수 있다. 파라미터(120), 정책(122) 및 템플릿(126)은 또한 트리거 이벤트 또는 추천(된) 액션을 식별하기 위해 센서들(130)로부터의 진단 데이터를 처리, 분석 또는 우선 순위화하기 위한 규칙과 같은 정보를 포함할 수 있다. 응답 데이터(124)는 클라이언트 디바이스(128)와의 하나 이상의 통신 세션의 일부일 수 있는 입력 오디오 메시지뿐만 아니라, 식별된 트리거 이벤트 또는 추천 액션과 관련된 오디오 출력 또는 관련 메타 데이터를 위한 컨텐츠 아이템을 포함할 수 있다.

데이터 처리 시스템(102)과 관련된 애플리케이션, 스크립트, 프로그램 또는 다른 컴포넌트는 클라이언트 디바이스(128) 또는 차량(140)에 설치될 수 있다. 일부 구현들에서, 애플리케이션은 디지털 어시스턴트 애플리케이션(144)이거나 이를 포함할 수 있다. 애플리케이션은 클라이언트 디바이스(128) 또는 차량(140)이 입력 오디오 신호(및 다른 데이터)를 데이터 처리 시스템(102)의 인터페이스(104)로 전달할 수 있게 한다. 애플리케이션은 클라이언트 디바이스(128) 및 차량(140)이 출력 오디오 신호를 렌더링하기 위해 클라이언트 디바이스(128) 및 차량(140)의 컴포넌트를 구동할 수 있게 한다.

데이터 처리 시스템(102)의 다이렉트 액션 API(112)는 이벤트 데이터 메시지를 생성할 수 있다. 이벤트 데이터 메시지는 차량(140)의 트리거 이벤트에 대응하는 데이터, 명령 또는 다른 정보를 포함할 수 있다. 다이렉트 액션 API(112)는 예를 들어 센서(130)로부터 수신된 차량 진단 데이터의 분석에 기초하여 이벤트 데이터 메시지를 생성할 수 있다. 다이렉트 액션 API(112)는 데이터 제공자(138) 또는 클라이언트 디바이스(128)와 같은 시스템(100)의 다른 컴포넌트로부터 수신된 정보에 기초하여 이벤트 데이터 메시지를 생성할 수 있다. 이벤트 데이터 메시지는 예를 들어 JSON 형식의 데이터 메시지, XML 형식의 데이터 메시지 및 오디오 데이터 메시지, 이메일 데이터 메시지, 문자 메시지 또는 모바일 컴퓨팅 디바이스에 대한 푸시 통지일 수 있다.

이벤트 결정 컴포넌트(116) 센서 정보 및 다른 정보를 처리하여 트리거 이벤트를 결정할 수 잇다. 트리거 이벤트는 차량(140)의 컴포넌트의 고장에 대응할 수 있고, 이벤트 결정 컴포넌트(116)는 센서(130)로부터 수신된 데이터에 기초하여 고장이 발생했다고 결정할 수 있다. 예를 들어, 센서(130)는 차량(140)의 후드 아래의 온도 센서에 대응할 수 있고, 이벤트 결정 컴포넌트(116)는 센서(130)로부터 판독된 온도가 엔진 온도가 너무 높음을 나타내는 것으로 결정할 수 있다. 이러한 분석에 기초하여, 이벤트 결정 컴포넌트(116)는 엔진 온도에 대응하는 트리거 이벤트를 식별할 수 있다. 다이렉트 액션 API(112)는 충격 차량의 일부(즉, 엔진), 트리거 이벤트의 이유(즉, 허용 가능한 범위 밖의 온도), 및 트리거 이벤트와 관련될 수 있는 다른 파라미터(예를 들어, 이벤트 결정 컴포넌트(116)로 하여금 트리거 이벤트를 결정하게 하는 센서(130)에 의해 측정된 특정 온도)와 같은 트리거 이벤트와 관련된 정보를 포함하는 이벤트 데이터 메시지를 생성할 수 있다.

이벤트 결정 컴포넌트(116)는 차량(140)의 컴포넌트의 장애에 반드시 대응할 필요는 없지만, 여전히 사용자의 주의를 보장할 수 있는 트리거 이벤트를 생성할 수 있다. 예를 들어, 센서(130)는 차량(140)의 적어도 하나의 창(window)의 위치를 결정하기 위한 센서를 포함할 수 있다. 이벤트 결정 컴포넌트(116)는 센서(130)로부터의 출력이 적어도 하나의 창이 열려 있음을 나타내는 것으로 결정할 수 있다. 이벤트 결정 컴포넌트(116)는 또한 차량(140) 근처의 위치에 대한 날씨 정보를 데이터 제공자(138)로부터 수신할 수 있다. 이 예에서, 이벤트 결정 컴포넌트(116)는 비가 내리거나 비가 내릴 가능성이 있으며, 차량(140)의 창이 열려 있다는 결정에 기초하여 트리거 이벤트를 결정할 수 있다. 이어서 다이렉트 액션 API(112)는 창이문 열려 있고 차량(140) 근처의 위치에서 비가 내리거나 내릴 가능성이 있음을 나타내는 정보를 포함하는 이벤트 데이터 메시지를 생성할 수 있다.

다이렉트 액션 API(112)는 또한 적어도 하나의 출력 인터페이스와 호환되는 방식으로 적어도 하나의 출력 인터페이스로 이벤트 데이터 메시지를 전송할 수 있다. 예를 들어, 다이렉트 액션 API(112)는 이벤트 데이터 메시지를 차량(140) 내부의 스피커(132)에 오디오 파일로서 전송하여, 스피커(132)가 사용자에게 트리거 이벤트를 알리는 오디오를 재생하게 할 수 있다. 통지 컴포넌트(114)는 이벤트 데이터 메시지가 전송되는 인터페이스를 결정할 수 있다. 예를 들어, 차량(140)이 운전자에 의해 사용중인 경우, 통지 컴포넌트(114)는 운전자에게 트리거 이벤트를 즉시 통지할 수 있도록 차량(140) 내의 인터페이스(예를 들어, 차량(140)의 스피커 (132))가 선택되어야 한다고 결정할 수 있다. 한편, 차량(140)이 주차된 경우, 통지 컴포넌트(114)는 사용자가 차량에서 떨어져있는 동안 사용자가 트리거 이벤트를 성공적으로 통지받을 가능성이 더 높도록 클라이언트 디바이스(128)의 스피커 (132)와 같은 다른 인터페이스가 선택되어야 한다고 결정할 수 있다. 통지 컴포넌트(114)는 단일 트리거 이벤트에 사용될 다수의 인터페이스를 결정할 수 있다. 다이렉트 액션 API(112)는 선택된 각각의 인터페이스에 대응하는 이벤트 데이터 메시지를 생성할 수 있고, 그 이벤트 데이터 메시지를 그들 각각의 선택된 인터페이스로 전송할 수 있다.

이벤트 결정 컴포넌트(116)는 또한 트리거 이벤트에 대한 추천 액션을 결정할 수 있다. 추천 액션는 트리거 이벤트 해결에 적합한 조치일 수 있다. 트리거 이벤트가 데이터 제공자(138)로부터의 정보가 비가 내릴 가능성이 있음을 표시할 때 열려있는 차량(140)의 창에 대응하는 전술한 예를 계속하면, 이벤트 결정 컴포넌트(116)는 비에 의해 야기될 수 있는 차량의 내부에 대한 손상을 방지하기 위해 추천 액션이 열린 창을 닫는 것이라고 결정할 수있다. 이 예에서, 다이렉트 액션 API(112)는 추천 액션에 대응하는 액션 데이터 메시지를 생성할 수 있다. 액션 데이터 메시지는 액션의 식별 및 그 액션이 수행되어야 하는 시간과 같이 추천 액션과 관련된 임의의 정보를 포함할 수 있다. 이벤트 데이터 메시지처럼, 액션 데이터 메시지도 예를 들어, JSON 형식 메시지 또는 XML 형식 메시지, 오디오 메시지, 비디오 메시지, 이메일 메시지, 문자 메시지 또는 모바일 컴퓨팅 디바이스에 대한 푸시 통지과 같은 다양한 방식으로 포맷될 수 있다. 이벤트 결정 컴포넌트(116)는 사용자에게 추천 액션를 통지해야 하는 적절한 인터페이스를 결정할 수 있으며, 다이렉트 액션 API(112)는 선택된 인터페이스와 호환 가능한 방식으로 액션 데이터 메시지를 생성할 수 있고, 다이렉트 액션 API(112)는 액션 데이터 메시지를 선택된 인터페이스로 전송할 수 있다.

전술한 바와 같이, 이벤트 데이터 메시지 또는 액션 데이터 메시지는 각각의 트리거 이벤트 또는 추천 액션과 관련된 속성을 포함하는 데이터 메시지일 수 있다. 속성은 예를 들어, 차량(140)의 위치, 클라이언트 디바이스(128)의 위치, 클라이언트 디바이스(128)와 관련된 사용자의 인증 레벨, 차량 식별자, 인터페이스 식별자, 차량 상태 또는 요청 상태를 포함할 수 있다. 다이렉트 액션 API(112)는 이벤트 데이터 메시지 또는 액션 데이터 메시지에 포함할 필드 또는 속성을 결정하기 위해 저장소(118)로부터 템플릿(126)을 검색할 수 있다. 다이렉트 액션 API(112)는 필요한 파라미터를 결정할 수 있고 액션 데이터 메시지에 정보를 패키지화할 수 있다. 다이렉트 액션 API(112)는 저장소(118)로부터 콘텐츠를 검색하여 데이터 메시지의 속성 정보를 획득할 수 있다.

NLP 컴포넌트(106)는 입력 오디오 신호를 수신할 수 있다. 데이터 처리 시스템(102)은 예를 들어 클라이언트 디바이스(128) 또는 차량(140)으로부터 입력 오디오 신호를 수신할 수 있다. 제1 디바이스는 NLP 컴포넌트(106)를 실행할 수 있고, NLP 컴포넌트(106)는 제2 디바이스로부터 입력 오디오 신호를 수신할 수 있다. 예를 들어, 차량(140)은 NLP 컴포넌트(106)를 실행할 수 있고 입력 오디오 신호는 클라이언트 디바이스(128)로부터 수신될 수 있다.

NLP 컴포넌트(106)는 입력 오디오 신호를 저장된 대표 오디오 파형 세트와 비교하고 가장 근접한 매칭을 선택함으로써 입력 오디오 신호를 인식된 텍스트로 변환할 수 있다. 대표 파형은 많은 입력 오디오 신호 세트에 걸쳐 생성될 수 있다. 입력 오디오 신호가 인식된 텍스트로 변환된 후, NLP 컴포넌트(106)는 예를 들어 학습 단계(phase)를 통해 텍스트를 액션 또는 출력 오디오 신호와 관련된 단어에 매칭시킬 수 있다.

입력 오디오 신호로부터, NLP 컴포넌트(106)는 적어도 하나의 요청 또는 커맨드, 또는 그 요청 또는 커맨드에 대응하는 적어도 하나의 트리거 또는 핫 키워드를 식별할 수 있다. 요청 또는 커맨드는 입력 오디오 신호의 의도 또는 주제를 나타낼 수 있다. 트리거 키워드는 수행될 수 있는 액션 유형을 표시할 수 있다. 예를 들어, NLP 컴포넌트(106)는 입력 오디오 신호를 분석하여, 도어를 잠그는 추천 액션에 응답하여 차량(140)의 도어를 잠그기 위한 요청을 식별할 수 있다. 트리거 키워드는 적어도 하나의 단어, 구문, 어근 또는 부분 단어 또는 수행할 액션을 나타내는 파생어를 포함할 수 있다. 예를 들어, 트리거 키워드는 "go", "ok", "hey", "yes"또는 "no"일 수 있다.

NLP 컴포넌트(106)는 액션 데이터 메시지가 선택된 인터페이스로 전송된 후에 사용자가 응답할 수 있게 한다. 예를 들어, 액션 데이터 메시지는 지시된 (indicated) 액션뿐만 아니라 그 액션을 수행하기 위한 인증 요청을 포함할 수 있다. 사용자는 예를 들어 "예" 또는 "아니오"와 같은 트리거 키워드 중 하나를 사용하여 NLP 컴포넌트(106)에 의해 처리될 자연어로 상기 지시된 동작을 수행하기 위한 인증을 제공할 수 있다. 차량(140) 근처에 비가 내릴 가능성이 높은 시간 동안 트리거 이벤트가 차량(140)의 열린 창에 대응하고 추천 액션이 창을 닫는 것인 위의 예를 다시 계속하기 위해, 활동 데이터 메시지는 추천 액션를 수행하기 위한 인증 요청을 포함할 수 있다. 사용자는 "예"라고 말하여 수행될 추천 액션를 인증할 수 잇고 "아니오"라고 말하여 추천 액션에 대한 인증을 거부할 수 있다.

예를 들어, 사용자가 추천 액션을 승인하는 경우, 이행 컴포넌트(110)는 액션의 완료를 촉진할 수 있다. 예를 들어, 이행 컴포넌트(110)는 사용자로부터 승인 수신시, 차량의 다양한 특징 및 컴포넌트와 통신하여 다양한 액션을 취할 수 있다. 위의 예에서 계속해서, 이행 컴포넌트(110)는 열린 창을 닫으라는 인증을 사용자로부터 수신하면 차량(140)의 하나 이상의 열린 창이 닫히도록 할 수 있다. 이행 컴포넌트(110)는 차량의 컴포넌트와 관련되지 않은 액션을 수행할 수 있다. 예를 들어, 엔진 고장과 같이 숙련된 전문가에 의한 유지 보수가 필요한 보다 심각한 고장 조건에 대응하는 트리거 이벤트의 경우, 추천 액션은 차량(140)을 정비사에게 가져 가는 것일 수 있다. 사용자가 액션을 승인하는 경우, 이행 컴포넌트(110)는 자동으로 로컬 정비사와 약속을 스케줄링(예약)할 수 있다. 이행 컴포넌트(110)는 하나 이상의 클라이언트 디바이스(128)에 의해 제공된 정보를 사용하여 약속을 스케줄링할 수 있다. 예를 들어, 제1 클라이언트 디바이스(128)는 차량(140)의 소유자일 수 있는 반면, 제2 클라이언트 디바이스(128)는 정비사일 수 있다. 이들 클라이언트 디바이스(128) 중 하나 또는 둘 모두로부터의 캘린더 정보에 기초하여, 이행 컴포넌트(110)는 약속을 스케줄링하기 위한 편리한 시간을 선택할 수 있다.

도 2는 차량(140)의 내부 객실을 포함하여 도 1의 시스템(100)에 포함된 차량(140)의 평면도를 도시한다. 차량(140)의 내부 객실은 복수의 시트(200)를 포함할 수 있다. 각 시트(200)는 하나 이상의 센서(130)를 포함할 수 있다. 일부 구현에서, 시트(200)의 센서들(130)은 중량 또는 점유 센서일 수 있다. 차량(140)의 내부 객실은 복수의 스피커(132)를 포함할 수 있다. 차량(140)은 또한 도 1과 관련하여 위에서 논의된 바와 같이, 데이터 처리 시스템(102) 또는 차량(140)과 관련하여 기술된 하나 이상의 컴포넌트를 실행할 수 있는 디지털 어시스턴트 애플리케이션(144)을 포함할 수 있다. 예를 들어, 디지털 어시스턴트 애플리케이션(144)은 차량(140) 내에 데이터 처리 시스템(102)의 모든 컴포넌트를 포함할 수 있다.

디지털 어시스턴트 애플리케이션(144)은 차량(140) 내의 클라이언트 디바이스(128)의 상대 위치(또는 존재 또는 부재)를 결정할 수 있다. 클라이언트 디바이스(128)의 위치 또는 존재는 차량(140)의 상태의 하나 이상의 속성에 통합될 수 있으며, 이는 이벤트 데이터 메시지 또는 액션 데이터 메시지를 생성하고 이들 데이터 메시지가 전송되는 인터페이스를 선택하는 것과 관련될 수 있다. 예를 들어, 트리거 이벤트는 디지털 어시스턴트 애플리케이션(144)이 클라이언트 디바이스(128)가 차량(140)에 있지 않다고 결정하는 시간 동안 발생할 수 있다. 차량의 스피커(132)를 통해 전송된 데이터 메시지는 사용자가 차량으로부터 떨어져있을 때 트리거 이벤트를 사용자에게 성공적으로 통지하지 않기 때문에, 통지 컴포넌트(114)는 다른 인터페이스를 선택하여 트리거 이벤트에 대한 이벤트 데이터 메시지를 전달할 수 있다. 클라이언트 디바이스들(128)의 위치(position) 또는 위치(location)는 상대적 위치이며 상이한 레벨의 해상도를 포함할 수 있다. 디지털 어시스턴트 애플리케이션(144)은 사용자가 특정 시간에 차량(140) 내에 위치하는지 여부를 결정하는 점유 센서(130)를 사용하여 유사한 정보를 결정할 수 있다.

차량(140)은 또한 엔진실에 위치하는 센서(130)를 포함한다. 도 2에 도시된 센서들(130)의 수 및 위치는 단지 예시적인 것이며 제한하려는 것이 아니다. 실제로, 차량(140)은 차량(140) 전체에 걸쳐 위치되고 트리거 이벤트의 결정과 관련될 수 있는 임의의 유형의 진단 데이터를 측정하는 임의의 수의 센서(130)를 포함할 수 있다.

디지털 어시스턴트 애플리케이션(144)은 둘 이상의 센서로부터의 결합된 출력을 분석하여 차량 상태 또는 트리거 이벤트를 결정할 수 있다. 다수의 센서의 출력을 결합하면 트리거 이벤트를 보다 정확하고 세밀하게 결정할 수 있다. 예를 들어, 제1 센서(130)는 GPS 수신기일 수 있고, 제2 센서(130)는 속도계일 수 있다. 디지털 어시스턴트 애플리케이션(144)은 두 센서의 출력을 분석하여 차량(140)의 상태를 정확하게 결정할 수 있다. 예를 들어, GPS 데이터는 차량이 이동하고 있음을 나타내며 속도계 데이터는 차량이 정지되었음을 나타낼 수 있다. 디지털 어시스턴트 애플리케이션(144)은 명백한 불일치를 해결하기 위해 두 유형의 데이터를 분석하도록 구성될 수 있다. 예를 들어, 디지털 어시스턴트 애플리케이션(144)은 이 데이터로부터 차량(140)이 플랫 베드 트럭(flatbed truck)에서 견인되고 있다고 결정할 수 있다.

일부 구현들에서, 디지털 어시스턴트 애플리케이션(144)은 센서들(130)로부터 수신된 데이터를 사용하여 아직 발생하지 않았지만 미래에 발생할 가능성이 있는 트리거 이벤트들에 대한 예측을 할 수 있다. 예를 들어, 디지털 어시스턴트 애플리케이션(144)은 속도계 데이터를 처리하여 차량이 전형적으로 얼마나 빨리 가속 및 감속 하는지를 결정할 수 있다. 감속 속도(rate)는 타이어 및 브레이크 패드의 기능 수명에 영향을 줄 수 있기 때문에, 디지털 어시스턴트 애플리케이션(144)은 이러한 고장이 발생하기 전에도 이러한 컴포넌트들이 고장날 가능성이 있는 시기를 결정할 수 있다. 디지털 어시스턴트 애플리케이션(144)은 고장이 발생하기 전에 임박한 고장에 대응하는 트리거 이벤트를 생성할 수 있다. 이러한 이벤트와 관련된 추천 액션는 예방적 유지 보수 액션일 수 있으므로 사용자는 특정 유형의 고장이 발생하기 전에 이를 예방할 수 있다.

도 3은 도 1의 시스템(100)을 사용하는 예시적인 오디오 기반 차량 진단 방법(300)을 도시한다. 방법(300)은 도 1에 도시된 컴포넌트 중 일부를 참조하여 아래에 설명된다. 방법(300)은 진단 데이터를 수신하는 단계(블록 302)를 포함할 수 있다. 방법(300)은 트리거 이벤트를 식별하는 단계를 포함할 수 있다(블록 304). 방법(300)은 제1 오디오 출력 인터페이스를 선택하는 단계를 포함할 수 있다(블록 306). 방법(300)은 이벤트 데이터 메시지를 생성하는 단계를 포함할 수 있다(블록 308). 방법(300)은 이벤트 데이터 메시지를 제1 오디오 출력 인터페이스로 전송하는 단계를 포함할 수 있다(블록 310).

방법(300)은 진단 데이터를 수신하는 단계(블록 302)를 포함할 수 있다. 일부 구현들에서, 진단 데이터는 도 1에 도시된 이벤트 결정 컴포넌트(116)에 의해 수신될 수 있다. 진단 데이터는 인터페이스(104)와 같은 도 1에 도시된 데이터 처리 시스템(102)의 인터페이스를 통해 수신될 수 있다. 진단 데이터는 차량(140)에 설치될 수 있거나 차량(140)으로부터 멀리 떨어진 컴퓨팅 디바이스 내에 포함될 수 있는 임의의 수의 센서(130)에 의해 감지되거나 결정되는 데이터일 수 있다. 예를 들어, 진단 데이터는 클라이언트 디바이스(128)가 차량(140) 내에 존재하지 않더라도 차량(140)의 운전자에 의해 소유되거나 액세스될 수 있는 클라이언트 디바이스(128)의 센서(130)로부터 수신될 수 있다. 이벤트 결정 컴포넌트(116)는 또한 데이터 제공자(138)와 같은 외부 소스로부터 진단 데이터를 수신할 수 있다. 진단 데이터는 차량(140)의 현재 상태 또는 차량(140)과 관련된 조치 가능 이벤트를 결정하는데 유용하거나 적합한 임의의 데이터를 포함할 수 있다. 따라서, 진단 데이터는 차량(140) 내부 및 주변 환경 조건에 관한 데이터뿐만 아니라 차량(140)의 기능적 기능적 컴포넌트(예를 들어, 엔진 컴포넌트, 휠, 타이어, 전자 제품, 기구 등)에 관한 데이터를 포함할 수 있다.

방법(300)은 트리거 이벤트를 식별하는 단계를 포함할 수 있다(블록 304). 트리거 이벤트는 차량(140)의 소유자 또는 조작자가 정보를 받거나 행동하기를 원할 수 있는 임의의 이벤트를 포함할 수 있다. 트리거 이벤트는 진단 데이터의 분석에 기초하여 이벤트 결정 컴포넌트(116)에 의해 식별될 수 있다. 트리거 이벤트는 차량(140)의 컴포넌트의 고장에 대응할 수 있다. 예를 들어, 센서(130)는 차량(140)의 타이어의 공기압 센서에 해당할 수 있고, 이벤트 결정 컴포넌트(116)는 센서(130)로부터의 압력 판독값이 타이어가 평평하거나 충분하게 공기가 들어가 있지 않음을 표시한다고 결정할 수있다. 이 분석에 기초하여, 이벤트 결정 컴포넌트(116)는 저 타이어 압력에 대응하는 트리거 이벤트를 식별할 수 있다.

이벤트 결정 컴포넌트(116)는 차량(140)의 컴포넌트의 고장에 대응하지 않을 수 있는 트리거 이벤트를 생성할 수 있다. 예를 들어, 센서(130)는 차량(140)의 도어가 잠겨 있는지 여부를 판단하기 위한 센서를 포함할 수 있다. 이벤트 결정 컴포넌트(116)는 센서(130)로부터의 출력이 적어도 하나의 도어가 잠금 해제되었음을 표시한다고 결정할 수 있다. 이벤트 결정 컴포넌트(116)가 또한 차량이 점유되지 않은 것으로 결정하는 경우(예를 들어, 점유 또는 중량 센서(130)로부터의 데이터에 기초하여, 이벤트 결정 컴포넌트(116)는 도어의 잠금 해제 상태에 기초하여 트리거 이벤트를 결정할 수 있다.

이벤트 결정 컴포넌트(116)는 또한 트리거 이벤트와 관련된 우선 순위 레벨을 결정할 수 있다. 예를 들어, 이벤트 결정 컴포넌트(116)는 차량(140)의 주요 고장(예를 들어 엔진 또는 변속기 고장)과 관련된 트리거 이벤트가 비교적 높은 우선 순위 레벨을 가질 수 있다고 결정할 수 있다. 이벤트 결정 컴포넌트(116)는 또한 예방적 유지 보수에 대응하는 트리거 이벤트가 상대적으로 낮은 우선 순위 레벨을 가질 수 있다고 결정할 수 있다.

방법(300)은 제1 오디오 출력 인터페이스를 선택하는 단계를 포함할 수 있다(블록 306). 제1 오디오 출력 인터페이스는 통지 컴포넌트(114)에 의해 선택될 수 있다. 통지 컴포넌트(114)는 스피커(132)와 같은 차량(140)에 내장된 오디오 출력 인터페이스를 선택할 수 있다. 예를 들어, 점유 센서 데이터가 사용자가 차량 내부에 있음을 나타내는 경우, 통지 컴포넌트(114)는 스피커(132)가 사용자에게 정보를 전달하기 위한 적절한 인터페이스인 것으로 결정할 수 있다. 오디오 출력 인터페이스를 선택하는 것은 운전자가 오디오 출력 인터페이스로부터 정보를 수신하기 위해 도로에서 시선을 피할 필요가 없으므로 차량이 사용 중일 때 작동을 용이하게 할 수 있다. 사용자가 차량 내에 위치하지 않는 경우에, 통지 컴포넌트(114)는 다른 오디오 출력 인터페이스를 선택할 수 있다. 예를 들어, 통지 컴포넌트(114)는 사용자가 차량(140) 내에 있지 않으면 클라이언트 디바이스(128)의 스피커(132)를 제1 오디오 출력 인터페이스로서 선택할 수 있다.

통지 컴포넌트(114)는 또한 이벤트 데이터 메시지에 대한 통지 시간을 결정할 수 있다. 일반적으로, 통지 시간은 트리거 이벤트에 관해 사용자에게 통지되어야 하는 시간이다. 예를 들어, 비-긴급 트리거 이벤트의 경우, 통지 컴포넌트(114)는 사용자의 캘린더가 사용자가 바쁘지 않다는 것을 표시하는 시간으로 통지 시간을 선택할 수 있다. 따라서, 통지 시간은 비-긴급 트리거 이벤트와 관련된 정보로 사용자를 방해하지 않도록 현재 시간으로부터 지연될 수 있다. 그러나, 트리거 이벤트가 긴급하거나 우선 순위가 높은 것으로 표시되면, 통지 컴포넌트(114)는 통지 시간을 위해 더 빠른 시간을 선택할 수 있다.

방법(300)은 이벤트 데이터 메시지를 생성하는 단계를 포함할 수 있다(블록 308). 다이렉트 액션 API(112)는 이벤트 데이터 메시지를 생성할 수 있다. 이벤트 데이터 메시지는 식별된 트리거 이벤트에 해당할 수 있다. 이벤트 데이터 메시지는 제1 오디오 출력 인터페이스와 호환되는 오디오 출력으로 포맷될 수 있다. 예를 들어, 일부 구현들에서, 이벤트 데이터 메시지는 .wav 또는 .mp3 파일과 같은 오디오 파일일 수 있다. 일반적으로, 이벤트 데이터 메시지는 트리거 이벤트의 표시, 트리거 이벤트가 발생한 시간, 차량(140)의 식별, 및 값들이 허용 범위를 벗어난 센서들(130)로부터의 판독값과 같은 그 트리거 이벤트와 관련된 임의의 파라미터와 같은 트리거 이벤트와 관련된 임의의 정보를 포함할 수 있다.

방법(300)은 이벤트 데이터 메시지를 제1 오디오 출력 인터페이스로 전송하는 단계를 포함할 수 있다(블록 310). 다이렉트 액션 API(112)는 이벤트 데이터 메시지를 데이터 처리 시스템(102)으로부터 제1 오디오 출력 인터페이스로 전송할 수 있다. 다이렉트 액션 API(112)는 통지 컴포넌트(114)에 의해 선택된 통지 시간까지 이벤트 데이터 메시지의 전송을 지연시킬 수 있다. 이벤트 데이터 메시지를 제1 오디오 출력 인터페이스로 전송하면, 제1 오디오 출력 인터페이스가 이벤트 데이터 메시지와 관련된 정보를 오디오 출력으로서 출력할 수 있다. 통지 컴포넌트(114)는 또한 트리거 이벤트에 관한 정보가 전달되어야 하는 추가 인터페이스(일부는 비-오디오 인터페이스일 수 있음)를 선택할 수 있다. 다이렉트 액션 API(112)는 선택된 각각의 인터페이스에 대한 개별 이벤트 데이터 메시지를 생성할 수 있고, 이벤트 데이터 메시지를 그들의 개별 인터페이스로 전송할 수 있다. 따라서, 사용자는 트리거 이벤트에 관한 정보를 성공적으로 수신할 확률을 증가시키기 위해, 하나 이상의 인터페이스를 통해 트리거 이벤트에 관해 통보받을 수 있다.

도 4는 예시적인 컴퓨터 시스템(400)의 블록도이다. 컴퓨터 시스템 또는 컴퓨팅 디바이스(400)는 시스템(100) 또는 데이터 처리 시스템(102)과 같은 그의 컴포넌트를 포함하거나 구현하기 위해 사용될 수 있다. 컴퓨팅 시스템(400)은 정보를 전달하기 위한 버스(405) 또는 다른 통신 컴포넌트 및 정보를 처리하기 위해 버스(405)에 연결된 프로세서(410) 또는 처리 회로를 포함한다. 컴퓨팅 시스템(400)은 또한 정보를 처리하기 위해 버스에 연결된 하나 이상의 프로세서(410) 또는 처리 회로를 포함할 수 있다. 컴퓨팅 시스템(400)은 또한 정보 또는 프로세서(410)에 의해 수행될 명령들을 저장하기 위해 버스(405)에 연결된 랜덤 액세스 메모리(RAM) 또는 다른 동적 저장 디바이스와 같은 메인 메모리(415)를 포함할 수 있다. 메인 메모리(415)는 데이터 저장소(118)이거나 이를 포함할 수 있다. 메인 메모리(415)는 또한 프로세서(410)에 의한 명령들의 실행 동안 위치 정보, 임시 변수 또는 다른 중간 정보를 저장하기 위해 사용될 수 있다. 컴퓨팅 시스템(400)은 프로세서(410)에 대한 정적 정보 및 명령들을 저장하기 위해 버스(405)에 연결된 ROM(420) 또는 다른 정적 저장 디바이스를 더 포함할 수 있다. 솔리드 스테이트 디바이스, 자기 디스크 또는 광 디스크와 같은 저장 디바이스(425)는 정보 및 명령들을 지속적으로 저장하기 위해 버스(405)에 결합될 수 있다. 저장 디바이스(425)는 데이터 저장소(118)를 포함하거나 그의 일부일 수 있다.

컴퓨팅 시스템(400)은 버스(405)를 통해 사용자에게 정보를 디스플레이하기 위해 액정 디스플레이 또는 액티브 매트릭스 디스플레이와 같은 디스플레이(435)에 연결될 수 있다. 영숫자 및 다른 키를 포함하는 키보드와 같은 입력 디바이스(430)가 정보 및 커맨드 선택을 프로세서(410)에 전달하기 위해 버스(405)에 연결될 수 있다. 입력 디바이스(430)는 터치 스크린 디스플레이(435)를 포함할 수 있다. 입력 디바이스(430)는 또한 방향 정보 및 커맨드 선택을 프로세서(410)에 전달하고 디스플레이(435)상의 커서 이동을 제어하기 위한 마우스, 트랙볼 또는 커서 방향 키와 같은 커서 컨트롤을 포함할 수 있다. 디스플레이(435)는 예를 들어 데이터 처리 시스템(102), 클라이언트 컴퓨팅 디바이스(128) 또는 도 1의 다른 컴포넌트의 일부일 수 있다.

본 명세서에 기술된 프로세스, 시스템 및 방법은 프로세서(410)가 메인 메모리(415)에 포함된 명령들의 배열을 실행하는 것에 응답하여 컴퓨팅 시스템(400)에 의해 구현될 수 있다. 이러한 명령들은 저장 디바이스(425)와 같은 다른 컴퓨터 판독 가능 매체로부터 메인 메모리(415)로 판독될 수 있다. 메인 메모리(415)에 포함된 명령들의 배열의 실행은 컴퓨팅 시스템(400)이 본 명세서에 설명된 예시적인 프로세스들을 수행하게 한다. 멀티 프로세싱 배열에서 하나 이상의 프로세서가 또한 메인 메모리(415)에 포함된 명령들을 실행하기 위해 사용될 수 있다. 하드 와이어드 회로가 본 명세서에 기술된 시스템 및 방법과 함께 소프트웨어 명령 대신에 또는 소프트웨어 명령과 함께 사용될 수 있다. 본 명세서에 기술된 시스템 및 방법은 하드웨어 회로 및 소프트웨어의 임의의 특정 조합으로 제한되지 않는다.

예시적인 컴퓨팅 시스템이 도 4에 설명되었지만, 본 명세서에 기술된 동작을 포함하는 주제는 본 명세서에 개시된 구조를 포함하는 다른 유형의 디지털 전자 회로, 또는 컴퓨터 소프트웨어, 펌웨어 또는 하드웨어로 구현될 수 있고, 그들의 구조적 등가물 또는 이들 중 하나 이상의 조합으로 구현될 수 있다.

본 명세서에서 논의된 시스템이 사용자에 관한 개인 정보를 수집하거나 개인 정보를 이용할 수 있는 상황의 경우, 사용자는 개인 정보(예를 들어, 사용자의 소셜 네트워크, 소셜 액션 또는 활동, 사용자의 선호도 또는 사용자의 위치에 관한 정보)를 수집할 수 있는 프로그램 또는 특징을 제어하거나, 컨텐츠 서버 또는 사용자에게 더 관련될 수 있는 다른 데이터 처리 시스템으로부터 컨텐츠를 수신할지 여부 및/또는 방법을 제어할 기회를 제공받을 수 있다. 또한, 특정 데이터는 파라미터를 생성할 때 개인 식별 정보가 제거되도록 저장되거나 사용되기 전에 하나 이상의 방식으로 익명화될 수 있다. 예를 들어, 사용자의 신원은 개인 식별 정보가 사용자에 대해 결정되지 않도록 익명화되거나, 사용자의 특정 지리적 위치가 결정되지 않도록 사용자의 지리적 위치는 위치 정보가 획득되는 곳(예를 들어, 도시, 우편 번호 또는 주와 같은)으로 일반화될 수 있다. 따라서, 사용자는 사용자에 관한 정보가 수집되고 컨텐츠 서버에 의해 사용되는 방법을 제어할 수 있다.

본 명세서에 기술된 주제 및 동작은 본 명세서에 개시된 구조 및 이들의 구조적 등가물 또는 이들 중 하나 이상의 조합하여 디지털 전자 회로 또는 컴퓨터 소프트웨어, 펌웨어 또는 하드웨어로 구현될 수 있다. 본 명세서에 기술된 주제는 하나 이상의 컴퓨터 프로그램, 예를 들어, 하나 이상의 컴퓨터 프로그램 명령의 회로로서 구현될 수 있고, 데이터 처리 디바이스에 의해 실행되거나 그의 동작을 제어하기 위해 하나 이상의 컴퓨터 저장 매체에 인코딩된다. 대안적으로 또는 부가적으로, 프로그램 명령들은 인위적으로 생성된 전파 신호, 예를 들어 데이터 처리 장치에 의해 실행하기 위해 적합한 수신기 디바이스로 전송하기 위한 정보를 인코딩하기 위해 생성되는 기계 생성의 전기, 광학 또는 전자기 신호에 인코딩될 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독 가능 저장 디바이스, 컴퓨터 판독 가능 저장 기판, 랜덤 또는 직렬 액세스 메모리 어레이 또는 이들의 하나 이상의 조합일 수 있거나 이에 포함될 수 있다. 컴퓨터 저장 매체는 전파 신호가 아니지만, 컴퓨터 저장 매체는 인위적으로 생성된 전파 신호로 인코딩된 컴퓨터 프로그램 명령의 소스 또는 목적지일 수 있다. 컴퓨터 저장 매체는 또한 하나 이상의 개별 컴포넌트 또는 매체(예를 들어, 다수의 CD, 디스크 또는 다른 저장 디바이스)일 수 있거나 그에 포함될 수 있다. 본 명세서에서 설명되는 동작들은 하나 이상의 컴퓨터 판독 가능 저장 디바이스에 저장되거나 다른 소스로부터 수신된 데이터에 대해 데이터 처리 장치에 의해 수행되는 동작으로서 구현될 수 있다.

"데이터 처리 시스템", "컴퓨팅 디바이스", "컴포넌트" 또는 "데이터 처리 장치"라는 용어는 예를 들어 프로그램 가능 프로세서, 컴퓨터, 칩상의 시스템, 또는 전술한 것 중 다수 또는 그들의 조합을 포함하여 데이터를 처리하기 위한 다양한 장치, 디바이스 및 머신을 포함한다. 장치는 특수 목적의 논리 회로, 예를 들어 FPGA(field-programmable gate array) 또는 ASIC(application-specific integrated circuit)을 포함할 수 있다. 장치는 또한 하드웨어 외에, 해당 컴퓨터 프로그램에 대한 실행 환경을 생성하는 코드, 예를 들어 프로세서 펌웨어, 프로토콜 스택, 데이터베이스 관리 시스템, 운영 체제, 크로스 플랫폼 런타임 환경, 가상 머신 또는 이들 중 하나 이상의 조합을 구성하는 코드를 포함할 수 있다. 장치 및 실행 환경은 웹 서비스, 분산 컴퓨팅 및 그리드 컴퓨팅 인프라와 같은 다양한 컴퓨팅 모델 인프라를 실현할 수 있다. 시스템(100)의 컴포넌트는 하나 이상의 데이터 처리 장치, 시스템, 컴퓨팅 디바이스 또는 프로세서를 포함하거나 공유할 수 있다.

컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 애플리케이션, 앱, 스크립트 또는 코드라고도 함)은 컴파일된 또는 해석된 언어, 선언적 또는 절차적 언어를 포함하는 임의의 형태의 프로그래밍 언어로 작성될 수 있으며, 독립 실행형 프로그램 또는 모듈, 컴포넌트, 서브 루틴, 객체 또는 컴퓨팅 환경에서 사용하기에 적합한 다른 유닛을 포함하여 모든 형태로 배포될 수 있다. 컴퓨터 프로그램은 파일 시스템의 파일에 해당할 수 있다. 컴퓨터 프로그램은 다른 프로그램 또는 데이터(예를 들어, 마크업 언어 문서에 저장된 하나 이상의 스크립트)를 보유하는 파일의 일부, 해당 프로그램 전용의 단일 파일 또는 다수의 협력 파일(예를 들어, 하나 이상의 모듈, 서브 프로그램 또는 코드의 일부를 저장하는 파일)에 저장될 수 있다. 컴퓨터 프로그램은 하나의 컴퓨터 또는 한 사이트에 위치하거나 여러 사이트에 분산되어 있고 통신 네트워크로 상호 연결된 다수의 컴퓨터에서 실행되도록 배포될 수 있다.

본 명세서에 기술된 프로세스 및 논리 흐름은 입력 데이터에 대해 동작하고 출력을 생성함으로써 액션을 수행하기 위해 하나 이상의 컴퓨터 프로그램(예를 들어, 데이터 처리 시스템(102)의 컴포넌트)을 실행하는 하나 이상의 프로그램 가능 프로세서에 의해 수행될 수 있다. 프로세스 및 로직 흐름은 또한 FPGA(필드 프로그머블 게이트 어레이) 또는 ASIC(애플리케이션 특정 집적 회로)과 같은 특수 목적 로직 회로로서 구현될 수 있으며 장치 또한 이들로서 구현될 수 있다. 컴퓨터 프로그램 명령 및 데이터를 저장하기에 적합한 디바이스는 예를 들어 반도체 메모리 디바이스(예를 들어, EPROM, EEPROM 및 플래시 메모리 디바이스); 자기 디스크(예를 들어 내부 하드 디스크 또는 이동식 디스크); 광 자기 디스크; 및 CD ROM 및 DVD-ROM 디스크를 포함하여 모든 형태의 비 휘발성 메모리, 매체 및 메모리 디바이스를 포함할 수 있다. 프로세서 및 메모리는 특수 목적 논리 회로에 의해 보완되거나 이에 통합될 수 있다.

본 명세서에 기술된 주제는 백 엔드 컴포넌트(예를 들어, 데이터 서버)를 포함하거나, 미들웨어 컴포넌트(예를 들어 애플리케이션 서버)를 포함하거나, 프론트 엔드 컴포넌트(예를 들어, 사용자가 본 명세서에 기술된 주제의 구현과 상호 작용할 수 있는 그래픽 사용자 인터페이스 또는 웹 브라우저를 갖는 클라이언트 컴퓨터)를 포함하거나, 하나 이상의 백엔드, 미들웨어 또는 프론트 엔드 컴포넌트의 조합을 포함하는 컴퓨팅 시스템에서 구현될 수 있다. 시스템의 컴포넌트는 임의의 형태 또는 매체의 디지털 통신, 예를 들어 통신 네트워크에 의해 상호 연결될 수 있다. 통신 네트워크의 예는 근거리 통신망("LAN") 및 광역 통신망( "WAN"), 네트워크 간(예를 들어, 인터넷) 및 피어 투 피어 네트워크(예를 들어, 애드 혹 피어- 피어 네트워크)를 포함한다.

시스템(100) 또는 시스템(400)과 같은 컴퓨팅 시스템은 클라이언트 및 서버를 포함할 수 있다. 클라이언트와 서버는 일반적으로 서로 멀리 떨어져 있으며 일반적으로 통신 네트워크(예를 들어, 네트워크(142))를 통해 상호 작용한다. 클라이언트와 서버의 관계는 각 컴퓨터에서 실행되고 서로 클라이언트-서버 관계를 갖는 컴퓨터 프로그램으로 인해 발생한다. 일부 구현들에서, 서버는 (예를 들어, 클라이언트 디바이스와 상호 작용하는 사용자에게 데이터를 표시하고 사용자로부터 사용자 입력을 수신하기 위해) 데이터(예를 들어, 컨텐트 아이템을 나타내는 데이터 패킷)를 클라이언트 디바이스로 전송한다. 클라이언트 디바이스에서 생성된 데이터(예를 들어, 사용자 상호 작용의 결과)는 서버에서 클라이언트 디바이스로부터 수신될 수 있다(예를 들어, 클라이언트 컴퓨팅 디바이스(128) 또는 차량(140)로부터 데이터 처리 시스템(102)에 의해 수신됨).

동작들이 특정 순서로 도면에 도시되어 있지만, 이러한 동작들은 도시된 특정 순서로 또는 순차적인 순서로 수행될 필요가 없으며, 모든 도시된 동작들이 수행될 필요는 없다. 본 명세서에 기술된 동작들은 다른 순서로 수행될 수 있다.

다양한 시스템 컴포넌트의 분리는 모든 구현에서 분리를 필요로 하지 않으며, 설명된 프로그램 컴포넌트는 단일 하드웨어 또는 소프트웨어 제품에 포함될 수 있다. 예를 들어, NLP 컴포넌트(106) 및 이벤트 결정 컴포넌트(116)는 단일 컴포넌트, 애플리케이션, 또는 프로그램, 또는 하나 이상의 처리 회로를 갖는 로직 디바이스, 또는 데이터 처리 시스템(102)의 하나 이상의 서버의 일부일 수 있다.

이제 일부 예시적인 구현들을 기술하였지만, 전술한 것은 예시적인 것이며 제한적인 것이 아니라는 것이 명백하다. 특히, 본 명세서에 제시된 많은 예는 방법 동작(act) 또는 시스템 요소의 특정 조합을 포함하지만, 이러한 동작 및 이들 요소는 동일한 목적을 달성하기 위해 다른 방식으로 조합될 수 있다. 하나의 구현과 관련하여 논의된 동작, 요소 및 특징은 다른 구현 또는 구현에서 유사한 역할로부터 배제되도록 의도되지 않는다.

본 명세서에 사용된 어구 및 용어는 설명을 위한 것이며 제한하는 것으로 간주되어서는 안된다. "포함하는(including)", "포함하는(comprising)", "갖는 (having)", "포함하는(containing)", "포함하는(involving)", "특징화된 (characterized by)", "것을 특징으로 하는(characterized in that)" 및 그 변형은 이후에 나열된 아이템, 그의 등가물 및 추가 아이템뿐만 아니라 이후에 나열된 아이템만 구성된 대체 구현을 포괄하는 것을 의미한다. 일 구현에서, 본 명세서에 기술된 시스템 및 방법은 기술된 요소, 동작 또는 컴포넌트 중 하나, 하나 이상의 조합 또는 전부로 구성된다.

단수로 언급된 시스템 및 방법의 구현 또는 요소 또는 동작에 대한 임의의 참조는 또한 복수의 이들 요소를 포함하는 구현을 포함할 수 있고, 임의의 구현 또는 요소 또는 동작에 대한 복수의 참조는 또한 단일 요소만을 포함하는 구현을 포함할 수 있다. 단수 또는 복수 형태의 언급은 현재 개시된 시스템 또는 방법, 그 컴포넌트, 동작 또는 요소를 단일 또는 복수 구성으로 제한하려는 것이 아니다. 정보, 동작 또는 요소에 기초한 임의의 동작 또는 요소에 대한 언급은 동작 또는 요소가 임의의 정보, 동작 또는 요소에 적어도 부분적으로 기초한 구현을 포함할 수 있다.

본 명세서에 개시된 임의의 구현은 임의의 다른 구현 또는 실시예와 결합될 수 있으며, "일부 구현", "일부 구현들", "일 구현"등에 대한 언급은 반드시 상호 배타적일 필요는 없으며, 그 구현과 관련하여 설명된 특정 특징, 구조 또는 특성이 적어도 하나의 구현 또는 실시예에 포함될 수 있음을 나타내도록 의도된다. 본 명세서에서 사용된 용어는 반드시 모두 동일한 구현을 지칭하는 것은 아니다. 임의의 구현은 본 명세서에 개시된 양태 및 구현과 일치하는 임의의 방식으로 임의의 또는 독점적으로 임의의 다른 구현과 결합될 수 있다.

"또는"에 대한 언급은 "또는"을 사용하여 설명된 임의의 용어가 설명된 단일 용어, 하나 이상 및 모든 용어를 나타낼 수 있도록 포괄적인 것으로 해석될 수 있다. " 'A' 및 'Β'중 적어도 하나"에 대한 언급은 'A' 및 'Β'뿐만 아니라 'A'만, 'Β'만을 포함할 수 있다. "포함하는" 또는 다른 공개 용어와 함께 사용되는 이러한 참조는 추가 항목을 포함할 수 있다.

도면, 상세한 설명 또는 임의의 청구 범위의 기술적 특징 뒤에 참조 부호가 오는 경우, 그 참조 부호는 도면, 상세한 설명 및 청구 범위의 명료성을 증가시키기 위해 포함되었다. 따라서, 참조 부호 또는 이들의 부재는 청구 범위의 범위에 제한적인 영향을 미치지 않는다.

본 명세서에 기술된 시스템 및 방법은 그 특성을 벗어나지 않고 다른 특정 형태로 구현될 수 있다. 전술한 구현예는 기술된 시스템 및 방법을 제한하기보다는 예시적인 것이다. 따라서, 본 명세서에 기술된 시스템 및 방법의 범위는 전술한 설명이 아니라 첨부된 청구 범위에 의해 나타내지고, 그 청구 범위의 의미 및 등가의 범위 내에 있는 변경이 그 안에 포함된다.

Claims

차량 환경에서 동작하는 오디오 기반 차량 진단 시스템으로서,
차량에 설치된 디지털 어시스턴트 애플리케이션을 실행하고, 이벤트 결정 컴포넌트, 통지 컴포넌트 및 다이렉트 액션 애플리케이션 프로그래밍 인터페이스(API)를 갖는 데이터 처리 시스템을 포함하고, 상기 데이터 처리 시스템은,
상기 이벤트 결정 컴포넌트에 의해 그리고 데이터 처리 시스템의 인터페이스를 통해, 차량의 복수의 센서 중 적어도 하나에 의해 감지된 차량 진단 데이터를 수신하고;
상기 이벤트 결정 컴포넌트에 의해, 차량 진단 데이터의 분석에 기초하여, 차량과 관련된 트리거 이벤트를 식별하고; 그리고
상기 통지 컴포넌트에 의해, 트리거 이벤트에 기초하여 제1 오디오 출력 인터페이스를 선택하고; 그리고
상기 다이렉트 액션 API는,
상기 트리거 이벤트에 대응하는 이벤트 데이터 메시지를 생성하고, 상기 이벤트 데이터 메시지는 제1 오디오 출력 인터페이스와 호환 가능한 오디오 출력으로서 포맷되고; 그리고
상기 제1 오디오 출력 인터페이스가 이벤트 데이터 메시지와 관련된 정보를 오디오 출력으로서 출력하게 하도록 이벤트 데이터 메시지를 디지털 어시스턴트 애플리케이션으로부터 제1 오디오 출력 인터페이스로 전송하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 이벤트 결정 컴포넌트는 트리거 이벤트와 관련된 추천 액션을 결정하고; 그리고
상기 다이렉트 액션 API는 추천 액션에 대응하는 정보를 이벤트 데이터 메시지를 생성하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제2항에 있어서,
상기 이벤트 결정 컴포넌트는,
상기 차량으로부터 떨어진 컴퓨팅 디바이스에 저장된 정보에 부분적으로 기초하여 추천 액션을 결정하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 디지털 어시스턴트 애플리케이션은 자연어 프로세서 컴포넌트를 포함하고, 상기 자연어 프로세서 컴포넌트는,
상기 데이터 처리 시스템의 인터페이스를 통해, 입력 오디오 신호를 수신하고; 그리고
요청을 식별하기 위해 입력 오디오 신호를 파싱하며,
상기 다이렉트 액션 API는 그 요청에 기초하여 기능을 나타내는 액션 데이터 메시지를 생성하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 디지털 어시스턴트 애플리케이션은 이행(fulfilment) 컴포넌트를 포함하고,
상기 다이렉트 액션 API는 액션 데이터 메시지를 이행 컴포넌트로 전송하고,
상기 이행 컴포넌트는 액션 데이터 메시지에 의해 지시된(indicated) 기능을 실행하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 제1 오디오 출력 인터페이스는 차량에 포함된 오디오 디바이스를 포함하고, 상기 차량의 오디오 디바이스는 이벤트 데이터 메시지와 관련된 정보를 오디오 출력으로서 출력하도록 구성되는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 제1 오디오 출력 인터페이스는 모바일 컴퓨팅 디바이스의 오디오 디바이스를 포함하고,
상기 모바일 컴퓨팅 디바이스의 오디오 디바이스는 이벤트 데이터 메시지와 관련된 정보를 오디오 출력으로서 출력하도록 구성되는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 통지 컴포넌트는 제2 출력 인터페이스를 선택하도록 구성되고; 그리고
상기 다이렉트 액션 API는,
상기 트리거 이벤트에 대응하는 제2 이벤트 데이터 메시지를 생성하고, 상기 제2 이벤트 데이터 메시지는 제2 출력 인터페이스에 기초하여 포맷되고; 그리고
상기 제2 출력 인터페이스가 제2 이벤트 데이터 메시지와 관련된 정보를 출력하게 하도록 제2 이벤트 데이터 메시지를 제2 출력 인터페이스로 전송하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제8항에 있어서,
상기 다이렉트 액션 API는,
제2 디지털 어시스턴트 애플리케이션을 실행하는 모바일 컴퓨팅 디바이스에 대한 텍스트 메시지, 이메일 및 푸시 통지 중 적어도 하나로서 제2 이벤트 데이터 메시지를 생성하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 차량 진단 데이터는 제1 차량 진단 데이터 세트를 포함하고;
상기 이벤트 결정 컴포넌트는,
상기 차량의 복수의 센서 중 적어도 하나에 의해 감지된 제2 차량 진단 데이터 세트를 수신하고; 그리고
상기 차량 진단 데이터의 분석에 기초하여, 차량과 관련된 제2 트리거 이벤트를 식별하며;
상기 통지 컴포넌트는 트리거 이벤트에 기초하여 제2 출력 인터페이스를 선택하도록 더 구성되고; 그리고
상기 다이렉트 액션 API는,
상기 제2 트리거 이벤트에 대응하는 제2 이벤트 데이터 메시지를 생성하고, 상기 제2 이벤트 데이터 메시지는 제2 출력 인터페이스에 기초하여 포맷되고; 그리고
상기 제2 출력 인터페이스가 제2 이벤트 데이터 메시지와 관련된 정보를 출력하게 하도록 제2 이벤트 데이터 메시지를 제2 출력 인터페이스로 전송하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 이벤트 결정 컴포넌트는,
차량의 제1 차량 상태를 결정하고;
차량의 상태 변화를 결정하도록 차량 진단 데이터를 모니터링하고; 그리고
차량의 상태 변화에 기초하여 트리거 이벤트를 식별하도록 더 구성되는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 통지 컴포넌트는 이벤트 데이터 메시지와 연관된 통지 시간을 결정하고; 그리고
상기 다이렉트 액션 API는 제1 오디오 출력 인터페이스가 통지 시간에 이벤트 데이터 메시지와 관련된 정보를 출력하게 하기 위해 이벤트 데이터 메시지를 제1 오디오 출력 인터페이스로 전송하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제12항에 있어서,
상기 이벤트 결정 컴포넌트는 트리거 이벤트와 관련된 우선 순위 레벨을 결정하고; 그리고
상기 통지 컴포넌트는 트리거 이벤트의 우선 순위 레벨에 부분적으로 기초하여 통지 시간을 결정하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
제1항에 있어서,
상기 이벤트 결정 컴포넌트는 차량의 미래 유지 보수 활동을 예측하기 위해 차량 진단 데이터를 분석하고,
상기 차량과 관련된 트리거 이벤트는 미래 유지 보수 활동에 대응하는 것을 특징으로 하는 오디오 기반 차량 진단 시스템.
오디오 기반 차량 진단 방법으로서,
차량에 설치된 데이터 처리 시스템에 의해 실행되는 디지털 어시스턴트 애플리케이션의 이벤트 결정 컴포넌트에 의해, 데이터 처리 시스템의 인터페이스를 통해, 차량과 관련된 복수의 센서 중 적어도 하나에 의해 감지된 차량 진단 데이터를 수신하는 단계;
상기 이벤트 결정 컴포넌트에 의해, 차량 진단 데이터의 분석에 기초하여, 차량과 관련된 트리거 이벤트를 식별하는 단계;
상기 디지털 어시스턴트 애플리케이션의 통지 컴포넌트에 의해, 트리거 이벤트에 기초하여 제1 오디오 출력 인터페이스를 선택하는 단계;
상기 디지털 어시스턴트 애플리케이션의 다이렉트 액션 애플리케이션 프로그래밍 인터페이스(API), 트리거 이벤트에 대응하는 이벤트 데이터 메시지를 생성하는 단계, 상기 이벤트 데이터 메시지는 제1 오디오 출력 인터페이스와 호환 가능한 오디오 출력으로 포맷되고; 및
상기 다이렉트 액션 API에 의해, 제1 오디오 출력 인터페이스가 이벤트 데이터 메시지와 관련된 정보를 오디오 출력으로서 출력하게 하도록 상기 이벤트 데이터 메시지를 디지털 어시스턴트 애플리케이션으로부터 제1 오디오 출력 인터페이스로 전송하는 단계를 포함하는 것을 특징으로 하는 오디오 기반 차량 진단 방법.
제15항에 있어서,
상기 이벤트 결정 컴포넌트에 의해, 트리거 이벤트와 관련된 추천 액션을 결정하는 단계; 및
상기 다이렉트 액션 API에 의해, 추천 액션에 대응하는 정보를 포함하도록 이벤트 데이터 메시지를 생성하는 단계를 포함하는 것을 특징으로 하는 오디오 기반 차량 진단 방법.
제16항에 있어서,
상기 이벤트 결정 컴포넌트에 의해, 차량으로부터 멀리 떨어진 컴퓨팅 디바이스에 저장된 정보에 부분적으로 기초하여 추천 액션을 결정하는 단계를 포함하는 것을 특징으로 하는 오디오 기반 차량 진단 방법.
제15항에 있어서,
자연어 프로세서 컴포넌트에 의해, 데이터 처리 시스템의 인터페이스를 통해, 입력 오디오 신호를 수신하는 단계; 및
상기 자연어 프로세서 컴포넌트에 의해, 요청을 식별하도록 입력 오디오 신호를 파싱하는 단계, 상기 다이렉트 액션 API는 요청에 기초하여 기능을 나타내는 액션 데이터 메시지를 생성하는 것을 특징으로 하는 오디오 기반 차량 진단 방법.
제15항에 있어서,
상기 다이렉트 액션 API에 의해, 액션 데이터 메시지를 디지털 어시스턴트 애플리케이션의 이행 컴포넌트로 전송하는 단계; 및
상기 이행 컴포넌트에 의해, 액션 데이터 메시지에 의해 지시된 기능을 실행하는 단계를 포함하는 것을 특징으로 하는 오디오 기반 차량 진단 방법.
제15항에 있어서,
상기 제1 오디오 출력 인터페이스는 차량에 포함된 오디오 디바이스를 포함하고,
상기 차량의 오디오 디바이스는 이벤트 데이터 메시지와 관련된 정보를 오디오 출력으로서 출력하도록 구성되는 것을 특징으로 하는 오디오 기반 차량 진단 방법.