KR102389179B1 - Method and ai service agent for controlling vehicle apps using the status information of the vehicle avn system - Google Patents

Method and ai service agent for controlling vehicle apps using the status information of the vehicle avn system Download PDF

Info

Publication number
KR102389179B1
KR102389179B1 KR1020200045576A KR20200045576A KR102389179B1 KR 102389179 B1 KR102389179 B1 KR 102389179B1 KR 1020200045576 A KR1020200045576 A KR 1020200045576A KR 20200045576 A KR20200045576 A KR 20200045576A KR 102389179 B1 KR102389179 B1 KR 102389179B1
Authority
KR
South Korea
Prior art keywords
information
specific
intention analysis
user intention
analysis information
Prior art date
Application number
KR1020200045576A
Other languages
Korean (ko)
Other versions
KR20210127551A (en
Inventor
강선규
민경오
Original Assignee
주식회사 오비고
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 오비고 filed Critical 주식회사 오비고
Priority to KR1020200045576A priority Critical patent/KR102389179B1/en
Publication of KR20210127551A publication Critical patent/KR20210127551A/en
Application granted granted Critical
Publication of KR102389179B1 publication Critical patent/KR102389179B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit

Abstract

차량 AVN 시스템의 상태 정보를 이용한 차량앱 제어 방법에 있어서, (a) 사용자에 의해 발화된 음성이 음성 입력부에 입력되면, 상기 차량 AVN 시스템과 연동하는 AI Service Agent가, 상기 발화된 음성에 대응되는 특정 음성 데이터를 AI Cloud Engine으로 전송하여 상기 AI Cloud Engine으로 하여금 상기 특정 음성 데이터에 대응되는 특정 문자 데이터 및 제1 사용자 의도분석 정보를 생성하도록 지원하는 단계; (b) 상기 AI Service Agent가, 상기 차량 AVN 시스템의 AV resource의 점유상태에 대한 정보인 AVN 상태 정보를 수집하거나 이미 수집된 상기 AVN 상태 정보에 접근하고, 상기 AVN 상태 정보 및 상기 특정 문자 데이터를 이용하여 제2 사용자 의도분석 정보를 생성하는 단계: 및 (c) 상기 AI Service Agent가, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조로 하여 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 하나를 선택하고, 이를 특정 사용자 의도분석 정보로서 결정하며, 상기 특정 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 단계; 를 포함하는 것을 특징으로 하는 차량앱 제어 방법 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 방법 및 이를 이용한 AI Service Agent가 개시된다.In the vehicle app control method using state information of a vehicle AVN system, (a) when a voice uttered by a user is input to a voice input unit, an AI service agent interworking with the vehicle AVN system responds to the uttered voice transmitting specific voice data to AI Cloud Engine to support the AI Cloud Engine to generate specific text data and first user intention analysis information corresponding to the specific voice data; (b) the AI Service Agent collects AVN status information, which is information on the occupation status of AV resources of the vehicle AVN system, or accesses the already collected AVN status information, and collects the AVN status information and the specific text data generating second user intention analysis information by using: and (c) the AI Service Agent, referring to the first user intention analysis information and the second user intention analysis information, the first user intention analysis information and selecting one of the second user intention analysis information, determining it as specific user intention analysis information, and supporting a vehicle app corresponding to the specific user intention analysis information to be controlled; Disclosed are a method for controlling a vehicle app using state information of a vehicle AVN system, and an AI service agent using the vehicle app control method, comprising:

Description

차량 AVN 시스템의 상태 정보를 이용한 차량앱 제어 방법 및 이를 이용한 AI Service Agent{METHOD AND AI SERVICE AGENT FOR CONTROLLING VEHICLE APPS USING THE STATUS INFORMATION OF THE VEHICLE AVN SYSTEM}Vehicle app control method using status information of vehicle AVN system and AI Service Agent using the same

본 발명은 차량 AVN 시스템의 상태 정보를 이용한 차량앱 제어 방법 및 이를 이용한 AI Service Agent에 대한 것이다.The present invention relates to a vehicle app control method using state information of a vehicle AVN system and an AI service agent using the same.

최근 AI 기술이 발달함에 따라 차량의 AVN(Audio, Video, Navigation) 시스템에도 AI 기술이 이용되고 있다.With the recent development of AI technology, AI technology is also being used in AVN (Audio, Video, Navigation) systems of vehicles.

이러한 AI 기술은 운전자가 차량의 운행에만 집중할 수 있도록 운전자의 음성만으로 차량앱을 제어할 수 있도록 하여 운전자에게 편리함을 제공하고 있다. This AI technology provides convenience to the driver by allowing the driver to control vehicle apps only with the driver's voice so that the driver can focus only on driving the vehicle.

다만, 보통 AI는 차량에 존재하는 다양한 AVN 상태 정보와는 무관하게 정해진 context 정보와 사용자의 음성만으로 사용자의 의도를 분석하기 때문에 차량앱을 제어하기 위한 사용자의 모든 의도를 정확히 분석할 수 없고, AI가 지원할 수 있는 차량앱이 정해져 있어 차량의 native app인 Radio app, DMB app 등을 제어할 수 있는 방법이 없다는 문제점이 있다.However, since AI usually analyzes the user's intentions only with the user's voice and the set context information regardless of the various AVN status information present in the vehicle, it is impossible to accurately analyze all the intentions of the user to control the vehicle app, and AI There is a problem in that there is no way to control the radio app, DMB app, etc., which are native apps of the vehicle, as there are certain vehicle apps that can be supported.

따라서, 사용자의 음성 요청에 대해 차량의 AVN 상태 정보를 이용하여 사용자의 의도를 분석하고, 차량의 native app을 제어할 수 있는 방법이 필요한 실정이다.Accordingly, there is a need for a method capable of analyzing a user's intention in response to a user's voice request using AVN status information of the vehicle and controlling the native app of the vehicle.

본 발명은 상술한 문제점을 모두 해결하는 것을 목적으로 한다.An object of the present invention is to solve all of the above problems.

또한, 본 발명은, AI Cloud Engine이 정해진 context 정보만으로 분석할 수 없는 사용자의 의도를 AI Service Agent가 AVN의 상태 정보를 이용하여 추가로 사용자의 의도를 분석할 수 있도록 하는 것을 다른 목적으로 한다.Another object of the present invention is to enable AI Service Agent to further analyze user intentions using AVN status information for user intentions that AI Cloud Engine cannot analyze with only context information determined.

또한, 본 발명은, AVN 상태 정보를 이용한 추가 의도분석을 통해서 사용자 음성 요청에 대한 차량앱 제어의 정확도를 높일 수 있도록 하는 것을 또 다른 목적으로 한다.Another object of the present invention is to increase the accuracy of vehicle app control for a user's voice request through additional intention analysis using AVN state information.

상기한 바와 같은 본 발명의 목적을 달성하고, 후술하는 본 발명의 특징적인 효과를 실현하기 위한 본 발명의 특징적인 구성은 다음과 같다.The characteristic configuration of the present invention for achieving the object of the present invention as described above and realizing the characteristic effects of the present invention to be described later is as follows.

본 발명의 일 태양에 따르면, 차량 AVN 시스템의 상태 정보를 이용한 차량앱 제어 방법에 있어서, (a) 사용자에 의해 발화된 음성이 음성 입력부에 입력되면, 상기 차량 AVN 시스템과 연동하는 AI Service Agent가, 상기 발화된 음성에 대응되는 특정 음성 데이터를 AI Cloud Engine으로 전송하여 상기 AI Cloud Engine으로 하여금 상기 특정 음성 데이터에 대응되는 특정 문자 데이터 및 제1 사용자 의도분석 정보를 생성하도록 지원하는 단계; (b) 상기 AI Service Agent가, 상기 차량 AVN 시스템의 AV resource의 점유상태에 대한 정보인 AVN 상태 정보를 수집하거나 이미 수집된 상기 AVN 상태 정보에 접근하고, 상기 AVN 상태 정보 및 상기 특정 문자 데이터를 이용하여 제2 사용자 의도분석 정보를 생성하는 단계: 및 (c) 상기 AI Service Agent가, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조로 하여 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 하나를 선택하고, 이를 특정 사용자 의도분석 정보로서 결정하며, 상기 특정 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 단계; 를 포함하는 것을 특징으로 하는 차량앱 제어 방법이 개시된다.According to one aspect of the present invention, in the vehicle app control method using the state information of the vehicle AVN system, (a) when the voice uttered by the user is input to the voice input unit, the AI Service Agent interworking with the vehicle AVN system is , transmitting specific voice data corresponding to the uttered voice to AI Cloud Engine and supporting the AI Cloud Engine to generate specific text data and first user intention analysis information corresponding to the specific voice data; (b) the AI Service Agent collects AVN status information, which is information on the occupancy status of AV resources of the vehicle AVN system, or accesses the already collected AVN status information, and collects the AVN status information and the specific text data generating second user intention analysis information by using: and (c) the AI Service Agent, referring to the first user intention analysis information and the second user intention analysis information, the first user intention analysis information and selecting one of the second user intention analysis information, determining it as specific user intention analysis information, and supporting a vehicle app corresponding to the specific user intention analysis information to be controlled; A vehicle app control method comprising a is disclosed.

일례로서, 상기 (b) 단계에서, 상기 AI Service Agent가, 상기 특정 문자 데이터를 기설정된 정규표현식과 비교하여 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열을 식별하여 그 식별결과에 대응되는 제1 결과 정보를 획득하고, 상기 차량 AVN 시스템에서 실행 가능한 복수의 native app 중 적어도 하나의 특정 native app이 상기 AV resource를 점유하고 있는 상태를 판단하고 이를 상기 AVN 상태 정보로서 획득하여 그 판단결과에 대응되는 제2 결과 정보를 획득하며, 상기 제1 결과 정보 및 상기 제2 결과 정보를 참조로 하여 상기 제2 사용자 의도분석 정보를 생성하는 것을 특징으로 하는 차량앱 제어 방법이 개시된다.As an example, in step (b), the AI Service Agent compares the specific character data with a preset regular expression to identify a specific character string that matches the defined pattern of the preset regular expression in the specific character data. Acquire first result information corresponding to the identification result, determine a state in which at least one specific native app among a plurality of native apps executable in the vehicle AVN system occupies the AV resource, and use this as the AVN state information A vehicle app control method, characterized in that acquiring and obtaining second result information corresponding to the determination result, and generating the second user intention analysis information with reference to the first result information and the second result information is initiated.

일례로서, 상기 제2 사용자 의도분석 정보는, 상기 특정 native app에 대해 상기 특정 문자열을 식별한 상기 식별결과를 적용하여 상기 특정 native app의 동작을 변화시키는 정보인 것을 특징으로 하는 차량앱 제어 방법이 개시된다.As an example, the second user intention analysis information is information for changing the operation of the specific native app by applying the identification result of identifying the specific character string to the specific native app. is initiated

일례로서, 상기 (c) 단계에서, 상기 AI Service Agent가, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조한 결과, (i) 상기 제1 사용자 의도분석 정보가 상기 AI Cloud Engine에서 지원하지 않는 기능이라는 정보에 해당되거나 상기 AV resource를 점유하고 있는 상기 특정 native app과 연관이 없는 정보에 해당되고, (ii) 상기 제1 결과 정보가 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열이 식별된다는 결과에 대응되는 정보에 해당되며, (iii) 상기 제2 결과 정보가 상기 특정 native app이 상기 AV resource를 점유하고 있는 상태라는 결과에 대응되는 정보에 해당되면, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 상기 제2 사용자 의도분석 정보를 선택하고, 상기 제2 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 것을 특징으로 하는 차량앱 제어 방법이 개시된다.As an example, in step (c), as a result of the AI Service Agent referring to the first user intention analysis information and the second user intention analysis information, (i) the first user intention analysis information is the AI Cloud Engine Corresponds to information that is a function not supported in , or information that is not related to the specific native app occupying the AV resource, and (ii) the first result information of the preset regular expression in the specific text data. Corresponds to information corresponding to the result that a specific character string matching the defined pattern is identified, and (iii) the second result information corresponds to information corresponding to the result that the specific native app occupies the AV resource. When it is, selecting the second user intention analysis information from among the first user intention analysis information and the second user intention analysis information, and supporting a vehicle app corresponding to the second user intention analysis information to be controlled A vehicle app control method is disclosed.

일례로서, 상기 복수의 native app 중 서로 다른 두 개의 native app이 각각 Background 및 Foreground에서 실행되고 있는 경우, 상기 AI Service Agent가, 상기 두 개의 native app 중 상기 차량 AVN 시스템의 기설정된 정책에 의해 선택된 하나의 native app이 상기 특정 native app 으로서 상기 AV resource를 점유하고 있는 것으로 판단하여 그 판단결과에 대응되는 상기 제2 결과 정보를 획득하는 것을 특징으로 하는 차량앱 제어 방법이 개시된다.As an example, when two different native apps among the plurality of native apps are running in the background and foreground, respectively, the AI Service Agent selects one of the two native apps by a preset policy of the vehicle AVN system. Disclosed is a vehicle app control method characterized in that it is determined that the native app of the specific native app occupies the AV resource, and the second result information corresponding to the determination result is obtained.

일례로서, 상기 (a) 단계에서, 상기 AI Cloud Engine은, 기설정된 context 정보를 이용하여 상기 특정 음성 데이터에 대응되는 상기 제1 사용자 의도분석 정보를 생성하는 것을 특징으로 하는 차량앱 제어 방법이 개시된다.As an example, in step (a), the AI Cloud Engine uses preset context information to generate the first user intention analysis information corresponding to the specific voice data. do.

일례로서, 상기 (a) 단계에서, 상기 AI Cloud Engine은, SLU(Spoken Language Understanding)를 이용하여 상기 특정 음성 데이터에 대응하는 상기 특정 문자 데이터를 생성하는 것을 특징으로 하는 차량앱 제어 방법이 개시된다.As an example, in step (a), the AI Cloud Engine uses SLU (Spoken Language Understanding) to generate the specific text data corresponding to the specific voice data. A method for controlling a vehicle app is disclosed. .

일례로서, 상기 (c) 단계에서, 상기 AI Service Agent가, TTS(Text to Speech)를 이용하여 상기 특정 사용자 의도분석 정보를 음성 출력부를 통하여 상기 사용자에게 추가적으로 제공하는 것을 특징으로 하는 차량앱 제어 방법이 개시된다.As an example, in the step (c), the AI Service Agent, using Text to Speech (TTS), the specific user intention analysis information is additionally provided to the user through a voice output unit. This is initiated.

본 발명의 다른 태양에 따르면, 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 AI Service Agent에 있어서, 상기 AI Service Agent가 상기 차량 AVN 시스템과 연동하고 있는 상태에서, 인스트럭션들을 저장하는 적어도 하나의 메모리; 및 상기 인스트럭션들을 실행하기 위해 구성된 적어도 하나의 프로세서;를 포함하되, 상기 프로세서는, (1) 사용자에 의해 발화된 음성이 음성 입력부에 입력되면, 상기 발화된 음성에 대응되는 특정 음성 데이터를 AI Cloud Engine으로 전송하여 상기 AI Cloud Engine으로 하여금 상기 특정 음성 데이터에 대응되는 특정 문자 데이터 및 제1 사용자 의도분석 정보를 생성하도록 지원하는 프로세스, (2) 상기 차량 AVN 시스템의 AV resource의 점유상태에 대한 정보인 AVN 상태 정보를 수집하거나 이미 수집된 상기 AVN 상태 정보에 접근하고, 상기 AVN 상태 정보 및 상기 특정 문자 데이터를 이용하여 제2 사용자 의도분석 정보를 생성하는 프로세스 및 (3) 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조로 하여 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 하나를 선택하고, 이를 특정 사용자 의도분석 정보로서 결정하며, 상기 특정 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 프로세스를 수행하는 것을 특징으로 하는 AI Service Agent가 개시된다.According to another aspect of the present invention, in an AI Service Agent for controlling a vehicle app using state information of a vehicle AVN system, the AI Service Agent is interworking with the vehicle AVN system, at least one of storing instructions of memory; and at least one processor configured to execute the instructions, wherein the processor includes: (1) when a voice uttered by a user is input to the voice input unit, specific voice data corresponding to the uttered voice is transmitted to the AI Cloud A process of supporting the AI Cloud Engine to generate specific text data and first user intention analysis information corresponding to the specific voice data by transmitting to the engine, (2) Information on the occupation status of AV resources of the vehicle AVN system a process of collecting AVN status information or accessing the already collected AVN status information, and generating second user intent analysis information using the AVN status information and the specific text data; and (3) the first user intent analysis. Select one of the first user intention analysis information and the second user intention analysis information with reference to information and the second user intention analysis information, and determine it as specific user intention analysis information, and the specific user intention analysis information Disclosed is an AI Service Agent, characterized in that it performs a process to support the vehicle app corresponding to the control.

일례로서, 상기 프로세서는, 상기 (2) 프로세스에서, 상기 특정 문자 데이터를 기설정된 정규표현식과 비교하여 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열을 식별하여 그 식별결과에 대응되는 제1 결과 정보를 획득하고, 상기 차량 AVN 시스템에서 실행 가능한 복수의 native app 중 적어도 하나의 특정 native app이 상기 AV resource를 점유하고 있는 상태를 판단하고 이를 상기 AVN 상태 정보로서 획득하여 그 판단결과에 대응되는 제2 결과 정보를 획득하며, 상기 제1 결과 정보 및 상기 제2 결과 정보를 참조로 하여 상기 제2 사용자 의도분석 정보를 생성하는 것을 특징으로 하는 AI Service Agent가 개시된다.As an example, in the process (2), the processor compares the specific character data with a preset regular expression to identify a specific character string that matches a defined pattern of the preset regular expression in the specific character data, and identifies the Obtaining first result information corresponding to the result, determining a state in which at least one specific native app among a plurality of native apps executable in the vehicle AVN system occupies the AV resource, and acquiring it as the AVN state information Disclosed is an AI Service Agent that acquires second result information corresponding to the determination result, and generates the second user intention analysis information with reference to the first result information and the second result information.

일례로서, 상기 제2 사용자 의도분석 정보는, 상기 특정 native app에 대해 상기 특정 문자열을 식별한 상기 식별결과를 적용하여 상기 특정 native app의 동작을 변화시키는 정보인 것을 특징으로 하는 AI Service Agent가 개시된다.As an example, the second user intention analysis information is information for changing the operation of the specific native app by applying the identification result of identifying the specific character string to the specific native app. do.

일례로서, 상기 프로세서는, 상기 (3) 프로세스에서, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조한 결과, (i) 상기 제1 사용자 의도분석 정보가 상기 AI Cloud Engine에서 지원하지 않는 기능이라는 정보에 해당되거나 상기 AV resource를 점유하고 있는 상기 특정 native app과 연관이 없는 정보에 해당되고, (ii) 상기 제1 결과 정보가 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열이 식별된다는 결과에 대응되는 정보에 해당되며, (iii) 상기 제2 결과 정보가 상기 특정 native app이 상기 AV resource를 점유하고 있는 상태라는 결과에 대응되는 정보에 해당되면, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 상기 제2 사용자 의도분석 정보를 선택하고, 상기 제2 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 것을 특징으로 하는 AI Service Agent가 개시된다.As an example, in the process (3), as a result of referring to the first user intention analysis information and the second user intention analysis information, (i) the first user intention analysis information is supported by the AI Cloud Engine Corresponds to information that does not function or corresponds to information unrelated to the specific native app occupying the AV resource, and (ii) the first result information is defined of the preset regular expression in the specific character data. If it corresponds to information corresponding to the result that a specific character string matching the pattern is identified, and (iii) the second result information corresponds to information corresponding to the result that the specific native app occupies the AV resource, AI Service, characterized in that selecting the second user intention analysis information from the first user intention analysis information and the second user intention analysis information, and supporting a vehicle app corresponding to the second user intention analysis information to be controlled Agent is started.

일례로서, 상기 프로세서는, 상기 복수의 native app 중 서로 다른 두 개의 native app이 각각 Background 및 Foreground에서 실행되고 있는 경우, 상기 두 개의 native app 중 상기 차량 AVN 시스템의 기설정된 정책에 의해 선택된 하나의 native app이 상기 특정 native app 으로서 상기 AV resource를 점유하고 있는 것으로 판단하여 그 판단결과에 대응되는 상기 제2 결과 정보를 획득하는 것을 특징으로 하는 AI Service Agent가 개시된다.As an example, when two different native apps among the plurality of native apps are running in the background and foreground, respectively, one native app selected by a preset policy of the vehicle AVN system from among the two native apps Disclosed is an AI Service Agent that determines that the app occupies the AV resource as the specific native app and acquires the second result information corresponding to the determination result.

일례로서, 상기 (1) 프로세스에서, 상기 AI Cloud Engine은, 기설정된 context 정보를 이용하여 상기 특정 음성 데이터에 대응되는 상기 제1 사용자 의도분석 정보를 생성하는 것을 특징으로 하는 AI Service Agent가 개시된다.As an example, in the process (1), the AI Cloud Engine uses preset context information to generate the first user intention analysis information corresponding to the specific voice data, the AI Service Agent is disclosed. .

일례로서, 상기 (1) 프로세스에서, 상기 AI Cloud Engine은, SLU(Spoken Language Understanding)를 이용하여 상기 특정 음성 데이터에 대응하는 상기 특정 문자 데이터를 생성하는 것을 특징으로 하는 AI Service Agent가 개시된다.As an example, in the process (1), the AI Cloud Engine uses SLU (Spoken Language Understanding) to generate the specific text data corresponding to the specific voice data. An AI Service Agent is disclosed.

일례로서, 상기 프로세서는, 상기 (3) 프로세스에서, TTS(Text to Speech)를 이용하여 상기 특정 사용자 의도분석 정보를 음성 출력부를 통하여 상기 사용자에게 추가적으로 제공하는 것을 특징으로 하는 AI Service Agent가 개시된다.As an example, the processor, in the process (3), by using TTS (Text to Speech), the specific user intention analysis information is disclosed, characterized in that the AI Service Agent additionally provides to the user through a voice output unit. .

본 발명에 의하면, 다음과 같은 효과가 있다.According to the present invention, the following effects are obtained.

본 발명은, AI Cloud Engine이 정해진 context 정보만으로 분석할 수 없는 사용자의 의도를 AI Service Agent가 AVN의 상태 정보를 이용하여 추가로 사용자의 의도를 분석할 수 있도록 하는 효과가 있다.The present invention has the effect of allowing the AI Service Agent to further analyze the user's intention by using the AVN status information for the user's intention that AI Cloud Engine cannot analyze only with the specified context information.

또한, 본 발명은, AVN 상태 정보를 이용한 추가 의도분석을 통해서 사용자 음성 요청에 대한 차량앱 제어의 정확도를 높일 수 있는 효과가 있다.In addition, the present invention has an effect of increasing the accuracy of vehicle app control for a user's voice request through additional intention analysis using AVN state information.

도 1은, 발명의 일 실시예에 따른 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 AI Service Agent의 개략적인 구성을 나타내는 도면이다.
도 2는, 본 발명의 일 실시예에 따른 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 방법의 개략적인 순서를 설명하기 위한 도면이다.
도 3은, 본 발명의 일 실시예에 따른 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 방법의 일례를 설명하기 위한 도면이다.1 is a diagram showing a schematic configuration of an AI Service Agent that controls a vehicle app using status information of a vehicle AVN system according to an embodiment of the present invention.
2 is a diagram for explaining a schematic sequence of a method of controlling a vehicle app using state information of a vehicle AVN system according to an embodiment of the present invention.
3 is a diagram for explaining an example of a method of controlling a vehicle app using state information of a vehicle AVN system according to an embodiment of the present invention.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0010] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0010] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0013] Reference is made to the accompanying drawings, which show by way of illustration specific embodiments in which the present invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the present invention. It should be understood that the various embodiments of the present invention are different but need not be mutually exclusive. For example, certain shapes, structures, and characteristics described herein may be implemented in other embodiments with respect to one embodiment without departing from the spirit and scope of the invention. In addition, it should be understood that the location or arrangement of individual components within each disclosed embodiment may be changed without departing from the spirit and scope of the present invention. Accordingly, the following detailed description is not intended to be taken in a limiting sense, and the scope of the present invention, if properly described, is limited only by the appended claims, along with all scope equivalents to those claimed. Like reference numerals in the drawings refer to the same or similar functions throughout the various aspects.

이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings in order to enable those of ordinary skill in the art to easily practice the present invention.

도 1은, 발명의 일 실시예에 따른 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 AI Service Agent(100)의 개략적인 구성을 나타내는 도면이다.1 is a diagram showing a schematic configuration of an AI Service Agent 100 that controls a vehicle app using state information of a vehicle AVN system according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 AI Service Agent(100)는 메모리(110) 및 프로세서(120)를 포함할 수 있다.As shown in FIG. 1 , the AI Service Agent 100 of the present invention may include a memory 110 and a processor 120 .

AI Service Agent(100)의 메모리(110)는 프로세서(120)의 인스트럭션들을 저장할 수 있는데, 구체적으로, 인스트럭션들은 AI Service Agent(100)로 하여금 특정의 방식으로 기능하게 하기 위한 목적으로 생성되는 코드로서, 컴퓨터 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장될 수 있다. 인스트럭션들은 본 발명의 명세서에서 설명되는 기능들을 실행하기 위한 프로세스들을 수행할 수 있다.The memory 110 of the AI Service Agent 100 may store instructions of the processor 120. Specifically, the instructions are code generated for the purpose of causing the AI Service Agent 100 to function in a specific manner. , stored in a computer usable or computer readable memory that may be directed to a computer or other programmable data processing equipment. The instructions may perform processes for performing the functions described herein.

그리고, AI Service Agent(100)의 프로세서(120)는 MPU(Micro Processing Unit) 또는 CPU(Central Processing Unit), 캐쉬 메모리(Cache Memory), 데이터 버스(Data Bus) 등의 하드웨어 구성을 포함할 수 있다. 또한, 운영체제, 특정 목적을 수행하는 애플리케이션의 소프트웨어 구성을 더 포함할 수도 있다.In addition, the processor 120 of the AI Service Agent 100 may include a hardware configuration such as a micro processing unit (MPU) or a central processing unit (CPU), a cache memory, and a data bus. . In addition, the operating system may further include a software configuration of an application for performing a specific purpose.

또한, AI Service Agent(100)는 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는데 사용되는 정보를 포함하는 데이터베이스(900)와 연동될 수 있다. 여기서, 데이터베이스(900)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(ReadOnly Memory, ROM), EEPROM(Electrically Erasable Programmable ReadOnly Memory), PROM(Programmable ReadOnly Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있으며, 이에 한정되지 않으며 데이터를 저장할 수 있는 모든 매체를 포함할 수 있다. 또한, 데이터베이스(900)는 AI Service Agent(100)와 분리되어 설치되거나, 이와는 달리 AI Service Agent(100)의 내부에 설치되어 데이터를 전송하거나 수신되는 데이터를 기록할 수도 있고, 도시된 바와 달리 둘 이상으로 분리되어 구현될 수도 있으며, 이는 발명의 실시 조건에 따라 달라질 수 있다.In addition, the AI Service Agent 100 may be linked with the database 900 including information used to control the vehicle app using the state information of the vehicle AVN system. Here, the database 900 includes a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (eg SD or XD memory), At least one of Random Access Memory (RAM), Static Random Access Memory (SRAM), ReadOnly Memory (ROM), Electrically Erasable Programmable ReadOnly Memory (EEPROM), Programmable ReadOnly Memory (PROM), magnetic memory, magnetic disk, and optical disk It may include one type of storage medium, but is not limited thereto, and may include any medium capable of storing data. In addition, the database 900 may be installed separately from the AI Service Agent 100, or alternatively, it may be installed inside the AI Service Agent 100 to transmit data or record received data, and as shown in FIG. It may be implemented separately from the above, which may vary depending on the operating conditions of the invention.

또한, AI Service Agent(100)는 차량 AVN(Audio, Video, Navigation) 시스템(500) 및 AI Cloud Engine(600)과 연동될 수 있다. 여기서, 차량 AVN 시스템(500)은 차량 운전자에게 필요한 주행 정보(Information)와 음악, 비디오 등의 즐길 거리(Entertainment)를 모두 제공하는 차량의 인포테인먼트(Infotainment) 시스템을 의미하는 것일 수 있을 것이다. 또한, AI Service Agent(100)는 차량 AVN 시스템(500)과 분리되어 설치되거나, 이와는 달리 차량 AVN 시스템(500)의 내부에 설치되어 차량 AVN 시스템(500)과 연동될 수 있을 것이다. In addition, the AI Service Agent 100 may be linked with the vehicle AVN (Audio, Video, Navigation) system 500 and the AI Cloud Engine 600 . Here, the vehicle AVN system 500 may mean an infotainment system of a vehicle that provides both driving information and entertainment such as music and video necessary for a vehicle driver. Also, the AI Service Agent 100 may be installed separately from the vehicle AVN system 500 , or alternatively, it may be installed inside the vehicle AVN system 500 to interwork with the vehicle AVN system 500 .

또한, AI Service Agent(100)는 차량 AVN 시스템(500) 및 AI Cloud Engine(600)과 송수신을 하기 위한 통신부(미도시)를 포함할 수 있을 것이다. In addition, the AI Service Agent 100 may include a communication unit (not shown) for transmitting and receiving with the vehicle AVN system 500 and the AI Cloud Engine 600 .

이와 같이 구성된 본 발명의 일 실시예에 따른 AI Service Agent(100)를 이용하여 차량 AVN 시스템의 상태 정보를 이용한 차량앱 제어 방법을 도 2을 참조하여 설명하면 다음과 같다.A method of controlling a vehicle app using state information of a vehicle AVN system using the AI Service Agent 100 according to an embodiment of the present invention configured as described above with reference to FIG. 2 will be described as follows.

도 2는, 본 발명의 일 실시예에 따른 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 방법의 개략적인 순서를 설명하기 위한 도면이다.2 is a diagram for explaining a schematic sequence of a method for controlling a vehicle app using state information of a vehicle AVN system according to an embodiment of the present invention.

먼저, 사용자에 의해 발화된 음성이 음성 입력부에 입력되면, 차량 AVN 시스템(500)과 연동하는 AI Service Agent(100)는, 상기 발화된 음성에 대응되는 특정 음성 데이터를 AI Cloud Engine(600)으로 전송하여 상기 AI Cloud Engine(600)으로 하여금 상기 특정 음성 데이터에 대응되는 특정 문자 데이터 및 제1 사용자 의도분석 정보를 생성하도록 지원할 수 있다(S210). First, when the voice uttered by the user is input to the voice input unit, the AI Service Agent 100 interworking with the vehicle AVN system 500 transmits specific voice data corresponding to the uttered voice to the AI Cloud Engine 600 . It can be transmitted to support the AI Cloud Engine 600 to generate specific text data and first user intention analysis information corresponding to the specific voice data (S210).

여기서, AI Service Agent(100)는, 차량 AVN 시스템(500)의 마이크 resource를 이용하여 사용자가 발화한 음성에 대응되는 특정 음성 데이터를 획득하여 AI Cloud Engine(600)으로 전송할 수 있을 것이다. Here, the AI Service Agent 100 may acquire specific voice data corresponding to the voice uttered by the user using the microphone resource of the vehicle AVN system 500 and transmit it to the AI Cloud Engine 600 .

또한, AI Cloud Engine(600)은, SLU(Spoken Language Understanding)를 이용하여 상기 특정 음성 데이터에 대응하는 상기 특정 문자 데이터를 생성할 수 있을 것이다. 여기서, SLU는 음성인식(Speech Recognition 또는 Speech to Text) 및 자연어이해(Natural Language Understanding)가 결합된 것을 의미하는 것일 수 있을 것이다. Also, the AI Cloud Engine 600 may generate the specific text data corresponding to the specific voice data using SLU (Spoken Language Understanding). Here, SLU may mean that speech recognition (or Speech to Text) and natural language understanding are combined.

또한, AI Cloud Engine(600)은, 기설정된 context 정보를 이용하여 상기 특정 음성 데이터에 대응되는 상기 제1 사용자 의도분석 정보를 생성할 수 있다. Also, the AI Cloud Engine 600 may generate the first user intention analysis information corresponding to the specific voice data using preset context information.

즉, AI Cloud Engine(600)은 스피커 볼륨 정보, 디스플레이 해상도 정보, 지원할 수 있는 app 정보 등의 정해진 context 정보와 사용자 발화한 음성에 대응되는 데이터를 이용하여 사용자의 의도를 분석할 수 있을 것이다. That is, the AI Cloud Engine 600 may analyze the user's intention by using predetermined context information such as speaker volume information, display resolution information, and app information that can be supported and data corresponding to the user's uttered voice.

다음으로, AI Service Agent(100)는, 상기 차량 AVN 시스템(500)의 AV resource의 점유상태에 대한 정보인 AVN 상태 정보를 수집하거나 이미 수집된 상기 AVN 상태 정보에 접근하고, 상기 AVN 상태 정보 및 상기 특정 문자 데이터를 이용하여 제2 사용자 의도분석 정보를 생성할 수 있다(S220).Next, the AI Service Agent 100 collects AVN status information, which is information on the occupancy status of the AV resource of the vehicle AVN system 500, or accesses the already collected AVN status information, and the AVN status information and Second user intention analysis information may be generated using the specific text data (S220).

이때, AI Service Agent(100)는, 상기 특정 문자 데이터를 기설정된 정규표현식과 비교하여 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열을 식별하여 그 식별결과에 대응되는 제1 결과 정보를 획득할 수 있다. At this time, the AI Service Agent 100 compares the specific character data with a preset regular expression to identify a specific character string that matches the defined pattern of the preset regular expression in the specific character data, and corresponds to the identification result First result information may be obtained.

여기서, 정규표현식은 특정한 규칙을 가진 문자열의 집합을 표현하기 위해 쓰이는 형식언어로서, 어떤 텍스트 내에서 특정한 형태나 규칙을 가진 문자열을 찾기 위해 그 형태나 규칙을 나타내는 패턴을 정의하는 것의 의미할 수 있을 것이다. 또한, 기설정된 정규표현식의 정의된 패턴은 사용자의 설정에 따라 복수일 수도 있을 것이다. Here, regular expression is a formal language used to express a set of strings having a specific rule, and it can mean defining a pattern representing the form or rule to find a string having a specific form or rule in a certain text. will be. In addition, the defined pattern of the preset regular expression may be plural according to a user's setting.

예를 들어, 기설정된 정규표현식의 정의된 패턴이 "다음"이고, 특정 문자 데이터가 "다음 틀어줘"라고 가정하면, AI Service Agent(100)는, "다음 틀어줘" 내의 "다음"을 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열로서 식별하고, 식별한 특정 문자열인"다음"을 제1 결과 정보로서 획득할 수 있을 것이다.For example, if it is assumed that the defined pattern of the preset regular expression is "next" and specific character data is "play next," the AI service agent 100 reads "next" in "play next". It may be identified as a specific character string matching the defined pattern of the set regular expression, and "next", which is the identified specific character string, may be obtained as the first result information.

또한, AI Service Agent(100)는, 상기 차량 AVN 시스템(500)에서 실행 가능한 복수의 native app 중 적어도 하나의 특정 native app이 상기 AV resource를 점유하고 있는 상태를 판단하고 이를 상기 AVN 상태 정보로서 획득하여 그 판단결과에 대응되는 제2 결과 정보를 획득할 수 있다. 여기서, native app은 Radio app, DMB app, Navigation app 등 차량 AVN 시스템(500) 내에 포함되어 있는 app을 의미하는 것일 수 있을 것이다.In addition, the AI Service Agent 100 determines a state in which at least one specific native app among a plurality of native apps executable in the vehicle AVN system 500 occupies the AV resource, and obtains it as the AVN state information. Thus, the second result information corresponding to the determination result can be obtained. Here, the native app may mean an app included in the vehicle AVN system 500 such as a Radio app, a DMB app, and a Navigation app.

예를 들어, 사용자가 라디오를 듣고 있는 상태라고 가정하면, AI Service Agent(100)는, Radio app이 AV resource를 점유하고 있는 것으로 판단하여 AV resource를 Radio app이 점유하고 있다는 것에 대한 정보를 제2 결과 정보로서 획득할 수 있을 것이다.For example, assuming that the user is listening to the radio, the AI Service Agent 100 determines that the Radio app occupies the AV resource, and provides information on that the Radio app occupies the AV resource second. It may be obtained as result information.

이때, 상기 차량 AVN 시스템(500)에서 실행 가능한 복수의 native app 중 서로 다른 두 개의 native app이 각각 Background 및 Foreground에서 실행되고 있다면, AI Service Agent(100)는, 상기 두 개의 native app 중 상기 차량 AVN 시스템의 기설정된 정책에 의해 선택된 하나의 native app이 상기 특정 native app 으로서 상기 AV resource를 점유하고 있는 것으로 판단하여 그 판단결과에 대응되는 상기 제2 결과 정보를 획득할 수 있을 것이다.At this time, if two different native apps among a plurality of native apps executable in the vehicle AVN system 500 are running in the background and the foreground, respectively, the AI Service Agent 100 will It is determined that one native app selected by the system's preset policy occupies the AV resource as the specific native app, and the second result information corresponding to the determination result may be obtained.

예를 들어, Radio app과 Navigation app이 각각 Background 및 Foreground에서 실행되고 있다면, 스피커에서는 Radio app에 의한 방송 소리가 나오고, 디스플레이화면에서는 Navigation app에 의한 안내 화면이 나타나 있는 상태에서, Navigation app에 의한 안내 소리가 나올 때만 방송 소리의 볼륨이 낮아진 채로 안내 소리와 믹싱되어 나올 수 있을 것이다. 이 경우, Radio app과 Navigation app이 함께 AV resource인 스피커를 사용한다고 할 수 있으나, 차량 AVN 시스템의 기설정된 정책은 스피커와 디스플레이화면을 모두 사용하고 있는 Navigation app보다는 스피커만을 사용하는 Radio app이 AV resource인 스피커를 점유하고 있는 것으로 판단할 수 있을 것이다.For example, if the Radio app and the Navigation app are running in the Background and the Foreground, respectively, a broadcast sound by the Radio app comes out from the speaker and the guidance screen by the Navigation app appears on the display screen, and the navigation app provides guidance. Only when there is a sound, the volume of the broadcast sound can be lowered and mixed with the guide sound. In this case, it can be said that the Radio app and the Navigation app both use the AV resource speaker, but the preset policy of the vehicle AVN system is that the Radio app that uses only the speaker rather than the Navigation app that uses both the speaker and the display screen is the AV resource. It can be judged that it occupies the in-speaker.

또한, AI Service Agent(100)는, 상기 제1 결과 정보 및 상기 제2 결과 정보를 참조로 하여 상기 제2 사용자 의도분석 정보를 생성할 수 있다.Also, the AI Service Agent 100 may generate the second user intention analysis information with reference to the first result information and the second result information.

이때, 상기 제2 사용자 의도분석 정보는, 상기 특정 native app에 대해 상기 특정 문자열을 식별한 상기 식별결과를 적용하여 상기 특정 native app의 동작을 변화시키는 정보일 수 있다.In this case, the second user intention analysis information may be information for changing the operation of the specific native app by applying the identification result of identifying the specific character string to the specific native app.

예를 들어, 차량 AVN 시스템(500)의 AV resource를 점유하고 있는 특정 native app이 Radio app이고, 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열로 식별된 식별결과가 "다음"이라고 가정하면, 제2 사용자 의도분석 정보는 Radio app에 "다음"을 적용한 "현재 Radio app의 채널을 다음 채널로 이동"과 같은 정보일 수 있을 것이다.For example, if it is assumed that a specific native app occupying the AV resource of the vehicle AVN system 500 is a Radio app, and the identification result identified as a specific string matching a defined pattern of a preset regular expression is “Next” , the second user intention analysis information may be information such as "move the current radio app's channel to the next channel" by applying "next" to the Radio app.

다음으로, AI Service Agent(100)는, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조로 하여 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 하나를 선택하고, 이를 특정 사용자 의도분석 정보로서 결정하며, 상기 특정 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원할 수 있다(S230).Next, the AI Service Agent 100 selects one of the first user intention analysis information and the second user intention analysis information with reference to the first user intention analysis information and the second user intention analysis information, and , may be determined as specific user intention analysis information, and support to control the vehicle app corresponding to the specific user intention analysis information (S230).

이때, AI Service Agent(100)는, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조한 결과, 다음 세 가지 경우에 모두 해당되면, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 상기 제2 사용자 의도분석 정보를 선택하고, 상기 제2 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원할 수 있다. At this time, the AI Service Agent 100 refers to the first user intention analysis information and the second user intention analysis information, and if all of the following three cases are true, the first user intention analysis information and the second user It is possible to select the second user intention analysis information from among the intention analysis information, and support to control a vehicle app corresponding to the second user intention analysis information.

여기서, 세 가지 경우는, 상기 제1 사용자 의도분석 정보가 상기 AI Cloud Engine에서 지원하지 않는 기능이라는 정보에 해당되거나 상기 AV resource를 점유하고 있는 상기 특정 native app과 연관이 없는 정보에 해당되는 경우, 상기 제1 결과 정보가 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열이 식별된다는 결과에 대응되는 정보에 해당되는 경우 및 상기 제2 결과 정보가 상기 특정 native app이 상기 AV resource를 점유하고 있는 상태라는 결과에 대응되는 정보에 해당되는 경우일 것이다.Here, in three cases, if the first user intention analysis information corresponds to information that is a function not supported by the AI Cloud Engine or information that is not related to the specific native app occupying the AV resource, When the first result information corresponds to information corresponding to a result that a specific character string matching the defined pattern of the preset regular expression is identified in the specific character data, and the second result information is the specific native app It may be the case that corresponds to the information corresponding to the result of occupying the AV resource.

즉, AI Service Agent(100)는, 상기 세 가지 경우에 모두 만족하는 경우에만 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 상기 제2 사용자 의도분석 정보를 선택하여 이에 대응되는 차량앱이 제어되도록 지원하고, 상기 세 가지 경우 중 하나라도 만족하지 못하면 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 상기 제1 사용자 의도분석 정보를 선택하여 이에 대응되는 차량앱이 제어되도록 지원할 수 있을 것이다. That is, the AI Service Agent 100 selects the second user intention analysis information from among the first user intention analysis information and the second user intention analysis information only when all three cases are satisfied, and a corresponding vehicle Supports the app to be controlled, and if any one of the three cases is not satisfied, the vehicle app corresponding thereto is controlled by selecting the first user intention analysis information among the first user intention analysis information and the second user intention analysis information will be able to support you as much as possible.

또한, AI Service Agent(100)는, TTS(Text to Speech)를 이용하여 상기 특정 사용자 의도분석 정보를 음성 출력부를 통하여 사용자에게 추가적으로 제공할 수 있다.Also, the AI Service Agent 100 may additionally provide the specific user intention analysis information to the user through a voice output unit using Text to Speech (TTS).

상기와 같이 S210 내지 S230 단계로 이루어진 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 방법의 일례를 도 3을 참조하여 설명하면 다음과 같다.As described above, an example of a method of controlling a vehicle app using the state information of the vehicle AVN system configured in steps S210 to S230 will be described with reference to FIG. 3 .

예를 들어, 사용자가 차량의 라디오를 듣고 있던 상황, 즉, native app인 Radio app이 실행되고 있는 상태에서, "다음 틀어줘"라고 음성으로 요청을 한다면, AI Service Agent(100)는, 차량 AVN 시스템(500)의 마이크 resource를 이용하여 상기 사용자가 발화한 음성인 "다음 틀어줘"에 대응되는 음성 데이터를 특정 음성 데이터로서 획득하고, 획득한 상기 특정 음성 데이터를 AI Cloud Engine(600)으로 전송할 수 있을 것이다(S310).For example, if the user is listening to the car's radio, that is, when the native app, the Radio app, is running and requests by voice, "Play next," the AI Service Agent 100, the vehicle AVN Using the microphone resource of the system 500 to acquire voice data corresponding to “play next,” which is the voice uttered by the user, as specific voice data, and transmit the acquired specific voice data to the AI Cloud Engine 600 It will be possible (S310).

그리고, AI Cloud Engine(600)은, 획득한 상기 특정 음성 데이터를 이용하여 "다음 틀어줘"에 대응되는 특정 문자 데이터를 생성하고, 상기 특정 음성 데이터 및 기설정된 context 정보를 이용하여 상기 사용자의 의도에 대한 정보인 제1 사용자 의도분석 정보를 생성할 수 있을 것이다(S320).Then, the AI Cloud Engine 600 generates specific text data corresponding to "Play Next" using the acquired specific voice data, and uses the specific voice data and preset context information to create the user's intention It will be possible to generate the first user intention analysis information, which is information on (S320).

이때, AI Cloud Engine(600)은 native app인 Radio app이 실행되고 있다는 정보를 알 수 없으므로 사용자가 발화한 음성인 "다음 틀어줘"에 대응되는 음성 데이터만을 이용하여 제1 사용자 의도분석 정보를 생성할 수 있을 것이다. 따라서, AI Cloud Engine(600)이 생성한 제1 사용자 의도분석 정보는, AI Cloud Engine(600)에서 지원하지 않는 기능이라는 "지원하지 않는 기능입니다"라는 정보, 다음(Daum)이란 앱을 실행하라는 "다음앱을 실행합니다"라는 정보, 단어 "다음"에 대해 지식검색을 하라는 "지식검색입니다"라는 정보 및 지니뮤직을 재생하라는 "지니뮤직을 재생합니다"라는 정보 중 하나에 해당될 수 있을 것이나, 이에 한정되는 것은 아닐 것이다. 다만, 아래에서는 제1 사용자 의도분석 정보가 다음(Daum)이란 앱을 실행하라는 "다음앱을 실행합니다"라는 정보라고 가정하고 설명하도록 하겠다.At this time, the AI Cloud Engine 600 cannot know the information that the radio app, which is a native app, is running, so it generates the first user intention analysis information using only the voice data corresponding to the voice uttered by the user, “Play Next.” You can do it. Therefore, the first user intent analysis information generated by AI Cloud Engine (600) is information that says "This is a function that is not supported", which is a function that is not supported by AI Cloud Engine 600, and tells you to run the app called Daum. It may correspond to one of the information "Run Daum App", "This is a knowledge search" to perform a knowledge search for the word "Daum", and "Play Genie Music" to play Genie Music. , but is not limited thereto. However, below, we will assume that the first user intention analysis information is the information of “run Daum app” to run the app called Daum.

다음으로, AI Service Agent(100)는, "다음 틀어줘"에 대응되는 상기 특정 문자 데이터를 AI Cloud Engine(600)으로부터 전송받을 수 있을 것이다(S330).Next, the AI Service Agent 100 may receive the specific text data corresponding to "Play Next" from the AI Cloud Engine 600 (S330).

다음으로, AI Service Agent(100)는, 차량 AVN 시스템(500)의 AV resource의 점유상태에 대한 정보인 AVN 상태 정보를 수집할 수 있을 것이다(S340). Next, the AI Service Agent 100 will be able to collect AVN status information, which is information about the occupation status of the AV resource of the vehicle AVN system 500 ( S340 ).

즉, 상기 사용자가 라디오를 듣고 있는 상황이므로, AI Service Agent(100)는, Radio app이 AV resource를 점유하고 있다는 정보가 포함된 AVN 상태 정보를 수집할 수 있을 것이다. That is, since the user is listening to the radio, the AI Service Agent 100 may collect AVN status information including information that the Radio app occupies an AV resource.

다음으로, AI Service Agent(100)는, 상기 AVN 상태 정보 및 상기 특정 문자 데이터를 이용하여 제2 사용자 의도분석 정보를 생성할 수 있을 것이다(S350).Next, the AI Service Agent 100 may generate second user intention analysis information using the AVN status information and the specific text data (S350).

이때, 기설정된 정규표현식의 정의된 패턴이 "다음"이라면, AI Service Agent(100)는, 상기 특정 문자 데이터인 "다음 틀어줘" 내의 "다음"을 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열로서 식별하고, 식별한 특정 문자열인"다음"을 제1 결과 정보로서 획득하고, Radio app이 AV resource를 점유하고 있는 것으로 판단하여 AV resource를 Radio app이 점유하고 있다는 것에 대한 정보를 제2 결과 정보로서 획득하여, Radio app에 "다음"을 적용한 "현재 Radio app의 채널을 다음 채널로 이동"이라는 제2 사용자 의도분석 정보를 생성할 수 있을 것이다. At this time, if the defined pattern of the preset regular expression is "next", the AI Service Agent 100 matches "next" in the specific character data "play next" to the defined pattern of the preset regular expression. It is identified as a specific character string, and "next", which is the identified specific character string, is acquired as the first result information, and it is determined that the Radio app occupies the AV resource, and information on that the Radio app occupies the AV resource is obtained as the second result information. Obtained as the result information, the second user intention analysis information of “move the current radio app’s channel to the next channel” to which “next” is applied to the radio app may be generated.

다음으로, AI Service Agent(100)는, 상기 S320 단계에서 생성된 상기 제1 사용자 의도분석 정보를 AI Cloud Engine(600)으로부터 전송받을 수 있을 것이다(S360). Next, the AI Service Agent 100 may receive the first user intention analysis information generated in step S320 from the AI Cloud Engine 600 (S360).

다음으로, AI Service Agent(100)는, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조로 하여 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 하나를 선택하고, 이를 특정 사용자 의도분석 정보로서 결정할 수 있을 것이다(S370).Next, the AI Service Agent 100 selects one of the first user intention analysis information and the second user intention analysis information with reference to the first user intention analysis information and the second user intention analysis information, and , it may be determined as specific user intention analysis information (S370).

이때, 상기 제1 사용자 의도분석 정보인 "다음앱을 실행합니다"라는 정보가 AV resource를 점유하고 있는 상기 특정 native app인 Radio app과 연관이 없는 정보에 해당되고, 상기 제1 결과 정보가 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열인"다음"이 식별된다는 결과에 해당되며, 상기 제2 결과 정보가 AV resource를 native app인 Radio app이 점유하고 있다는 것에 대한 정보에 해당되므로, AI Service Agent(100)는, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 상기 제2 사용자 의도분석 정보인 "현재 Radio app의 채널을 다음 채널로 이동"이라는 정보를 선택하고, 이를 특정 사용자 의도분석 정보로서 결정할 수 있을 것이다.At this time, the first user intention analysis information, "run Daum app", corresponds to information unrelated to the Radio app, which is the specific native app occupying the AV resource, and the first result information is preset. It corresponds to the result that "next", which is a specific string matching the defined pattern of the regular expression, is identified, and the second result information corresponds to information about that the radio app, which is a native app, occupies the AV resource, so AI Service The Agent 100 selects the second user intention analysis information, “move the current radio app channel to the next channel,” among the first user intention analysis information and the second user intention analysis information, and selects it It may be determined as user intention analysis information.

다음으로, AI Service Agent(100)는, 상기 특정 사용자 의도분석 정보인 "현재 Radio app의 채널을 다음 채널로 이동"에 대응하여 Radio app의 현재 채널이 다음 채널로 변경되도록 지원할 수 있을 것이다(S380).Next, the AI Service Agent 100 may support changing the current channel of the Radio app to the next channel in response to the specific user intention analysis information, "Move the channel of the current Radio app to the next channel" (S380). ).

즉, AI Service Agent(100)는, 상기 사용자가 발화한 "다음 틀어줘"라는 음성 요청에 대응하여 Radio app의 현재 채널이 다음 채널로 변경되도록 지원할 수 있을 것이다. That is, the AI Service Agent 100 may support changing the current channel of the Radio app to the next channel in response to a voice request of "play next" uttered by the user.

또한, AI Service Agent(100)는, 상기 특정 사용자 의도분석 정보인 "현재 Radio app의 채널을 다음 채널로 이동"에 대응하여 "라디오의 채널을 다음 채널로 변경합니다"라는 소리를 상기 사용자에게 음성 출력부를 통하여 제공할 수도 있을 것이다. In addition, the AI Service Agent 100 voices the user a sound of “changes the radio channel to the next channel” in response to “move the current radio app channel to the next channel” which is the specific user intention analysis information. It may be provided through an output unit.

이상 설명된 본 발명에 따른 실시예들은 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magnetooptical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The embodiments according to the present invention described above may be implemented in the form of program instructions that can be executed through various computer components and recorded in a computer-readable recording medium. The computer-readable recording medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the computer-readable recording medium may be specially designed and configured for the present invention, or may be known and available to those skilled in the computer software field. Examples of the computer-readable recording medium include hard disks, magnetic media such as floppy disks and magnetic tapes, optical recording media such as CD-ROMs and DVDs, and magneto-optical media such as floppy disks. , and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules for carrying out the processing according to the present invention, and vice versa.

이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명이 상기 실시예들에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형을 꾀할 수 있다.In the above, the present invention has been described with specific matters such as specific components and limited embodiments and drawings, but these are provided to help a more general understanding of the present invention, and the present invention is not limited to the above embodiments. , various modifications and variations can be devised from these descriptions by those of ordinary skill in the art to which the present invention pertains.

따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등하게 또는 등가적으로 변형된 모든 것들은 본 발명의 사상의 범주에 속한다고 할 것이다.Accordingly, the spirit of the present invention should not be limited to the above-described embodiments, and not only the claims described below, but also all modifications equivalently or equivalently to the claims described below belong to the scope of the spirit of the present invention. will do it

Claims (16)

차량 AVN 시스템의 상태 정보를 이용한 차량앱 제어 방법에 있어서,
(a) 사용자에 의해 발화된 음성이 음성 입력부에 입력되면, 상기 차량 AVN 시스템과 연동하는 AI Service Agent 장치가, 상기 발화된 음성에 대응되는 특정 음성 데이터를 AI Cloud Engine으로 전송하여 상기 AI Cloud Engine으로 하여금 상기 특정 음성 데이터에 대응되는 특정 문자 데이터 및 제1 사용자 의도분석 정보를 생성하도록 지원하는 단계;
(b) 상기 AI Service Agent 장치가, 상기 차량 AVN 시스템의 AV resource의 점유상태에 대한 정보인 AVN 상태 정보를 수집하거나 이미 수집된 상기 AVN 상태 정보에 접근하고, 상기 AVN 상태 정보 및 상기 특정 문자 데이터를 이용하여 제2 사용자 의도분석 정보를 생성하는 단계: 및
(c) 상기 AI Service Agent 장치가, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조로 하여 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 하나를 선택하고, 이를 특정 사용자 의도분석 정보로서 결정하며, 상기 특정 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 단계;
를 포함하고,
상기 (b) 단계에서,
상기 AI Service Agent 장치가, 상기 특정 문자 데이터를 기설정된 정규표현식과 비교하여 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열을 식별하여 그 식별결과에 대응되는 제1 결과 정보를 획득하고, 상기 차량 AVN 시스템에서 실행 가능한 복수의 native app 중 적어도 하나의 특정 native app이 상기 AV resource를 점유하고 있는 상태를 판단하고 이를 상기 AVN 상태 정보로서 획득하여 그 판단결과에 대응되는 제2 결과 정보를 획득하며, 상기 제1 결과 정보 및 상기 제2 결과 정보를 참조로 하여 상기 제2 사용자 의도분석 정보를 생성하는 것을 특징으로 하며,
상기 제2 사용자 의도분석 정보는, 상기 특정 native app에 대해 상기 특정 문자열을 식별한 상기 식별결과를 적용하여 상기 특정 native app의 동작을 변화시키는 정보인 것을 특징으로 하고,
상기 (c) 단계에서,
상기 AI Service Agent 장치가, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조한 결과, (i) 상기 제1 사용자 의도분석 정보가 상기 AI Cloud Engine에서 지원하지 않는 기능이라는 정보에 해당되거나 상기 AV resource를 점유하고 있는 상기 특정 native app과 연관이 없는 정보에 해당되고, (ii) 상기 제1 결과 정보가 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열이 식별된다는 결과에 대응되는 정보에 해당되며, (iii) 상기 제2 결과 정보가 상기 특정 native app이 상기 AV resource를 점유하고 있는 상태라는 결과에 대응되는 정보에 해당되면, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 상기 제2 사용자 의도분석 정보를 선택하고, 상기 제2 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 것을 특징으로 하는 차량앱 제어 방법.In the vehicle app control method using the state information of the vehicle AVN system,
(a) When the voice uttered by the user is input to the voice input unit, the AI Service Agent device interworking with the vehicle AVN system transmits specific voice data corresponding to the uttered voice to the AI Cloud Engine, and the AI Cloud Engine supporting the user to generate specific text data and first user intention analysis information corresponding to the specific voice data;
(b) the AI Service Agent device collects AVN status information, which is information about the occupation status of AV resources of the vehicle AVN system, or accesses the already collected AVN status information, the AVN status information and the specific text data Generating the second user intention analysis information using: And
(c) the AI Service Agent device selects one of the first user intention analysis information and the second user intention analysis information with reference to the first user intention analysis information and the second user intention analysis information, determining this as specific user intention analysis information, and supporting a vehicle app corresponding to the specific user intention analysis information to be controlled;
including,
In step (b),
The AI Service Agent device compares the specific character data with a preset regular expression to identify a specific character string matching the defined pattern of the preset regular expression in the specific character data, and a first result corresponding to the identification result acquire information, determine a state in which at least one specific native app occupies the AV resource among a plurality of native apps executable in the vehicle AVN system, obtain it as the AVN state information, and obtain a second corresponding to the determination result Acquire 2 result information, and generate the second user intention analysis information with reference to the first result information and the second result information,
The second user intention analysis information is information for changing the operation of the specific native app by applying the identification result of identifying the specific character string to the specific native app,
In step (c),
As a result of the AI Service Agent device referring to the first user intention analysis information and the second user intention analysis information, (i) the first user intention analysis information corresponds to the information that the function is not supported by the AI Cloud Engine or corresponds to information unrelated to the specific native app occupying the AV resource, and (ii) the first result information is a specific character string matching the defined pattern of the preset regular expression in the specific character data Corresponds to information corresponding to the result of being identified, and (iii) if the second result information corresponds to information corresponding to the result that the specific native app occupies the AV resource, the first user intention analysis information and selecting the second user intention analysis information from among the second user intention analysis information, and supporting a vehicle app corresponding to the second user intention analysis information to be controlled. 삭제delete 삭제delete 삭제delete 제1항에 있어서,
상기 복수의 native app 중 서로 다른 두 개의 native app이 각각 Background 및 Foreground에서 실행되고 있는 경우, 상기 AI Service Agent 장치가, 상기 두 개의 native app 중 상기 차량 AVN 시스템의 기설정된 정책에 의해 선택된 하나의 native app이 상기 특정 native app 으로서 상기 AV resource를 점유하고 있는 것으로 판단하여 그 판단결과에 대응되는 상기 제2 결과 정보를 획득하는 것을 특징으로 하는 차량앱 제어 방법.According to claim 1,
When two different native apps among the plurality of native apps are running in the background and the foreground, respectively, the AI Service Agent device selects one native app among the two native apps by a preset policy of the vehicle AVN system. The vehicle app control method, characterized in that, by determining that the app occupies the AV resource as the specific native app, the second result information corresponding to the determination result is obtained. 제1항에 있어서,
상기 (a) 단계에서,
상기 AI Cloud Engine은, 기설정된 context 정보를 이용하여 상기 특정 음성 데이터에 대응되는 상기 제1 사용자 의도분석 정보를 생성하는 것을 특징으로 하는 차량앱 제어 방법.According to claim 1,
In step (a),
The AI Cloud Engine generates the first user intention analysis information corresponding to the specific voice data by using preset context information. 제1항에 있어서,
상기 (a) 단계에서,
상기 AI Cloud Engine은, SLU(Spoken Language Understanding)를 이용하여 상기 특정 음성 데이터에 대응하는 상기 특정 문자 데이터를 생성하는 것을 특징으로 하는 차량앱 제어 방법.According to claim 1,
In step (a),
The AI Cloud Engine, the vehicle app control method, characterized in that by using SLU (Spoken Language Understanding) to generate the specific text data corresponding to the specific voice data. 제1항에 있어서,
상기 (c) 단계에서,
상기 AI Service Agent 장치가, TTS(Text to Speech)를 이용하여 상기 특정 사용자 의도분석 정보를 음성 출력부를 통하여 상기 사용자에게 추가적으로 제공하는 것을 특징으로 하는 차량앱 제어 방법.According to claim 1,
In step (c),
The vehicle app control method, characterized in that the AI Service Agent device additionally provides the specific user intention analysis information to the user through a voice output unit using Text to Speech (TTS). 차량 AVN 시스템의 상태 정보를 이용하여 차량앱을 제어하는 AI Service Agent 장치에 있어서,
상기 AI Service Agent 장치가 상기 차량 AVN 시스템과 연동하고 있는 상태에서,
인스트럭션들을 저장하는 적어도 하나의 메모리; 및
상기 인스트럭션들을 실행하기 위해 구성된 적어도 하나의 프로세서;
를 포함하되,
상기 프로세서는, (1) 사용자에 의해 발화된 음성이 음성 입력부에 입력되면, 상기 발화된 음성에 대응되는 특정 음성 데이터를 AI Cloud Engine으로 전송하여 상기 AI Cloud Engine으로 하여금 상기 특정 음성 데이터에 대응되는 특정 문자 데이터 및 제1 사용자 의도분석 정보를 생성하도록 지원하는 프로세스, (2) 상기 차량 AVN 시스템의 AV resource의 점유상태에 대한 정보인 AVN 상태 정보를 수집하거나 이미 수집된 상기 AVN 상태 정보에 접근하고, 상기 AVN 상태 정보 및 상기 특정 문자 데이터를 이용하여 제2 사용자 의도분석 정보를 생성하는 프로세스 및 (3) 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조로 하여 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 하나를 선택하고, 이를 특정 사용자 의도분석 정보로서 결정하며, 상기 특정 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 프로세스를 수행하는 것을 특징으로 하고,
상기 프로세서는,
상기 (2) 프로세스에서,
상기 특정 문자 데이터를 기설정된 정규표현식과 비교하여 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열을 식별하여 그 식별결과에 대응되는 제1 결과 정보를 획득하고, 상기 차량 AVN 시스템에서 실행 가능한 복수의 native app 중 적어도 하나의 특정 native app이 상기 AV resource를 점유하고 있는 상태를 판단하고 이를 상기 AVN 상태 정보로서 획득하여 그 판단결과에 대응되는 제2 결과 정보를 획득하며, 상기 제1 결과 정보 및 상기 제2 결과 정보를 참조로 하여 상기 제2 사용자 의도분석 정보를 생성하는 것을 특징으로 하며,
상기 제2 사용자 의도분석 정보는, 상기 특정 native app에 대해 상기 특정 문자열을 식별한 상기 식별결과를 적용하여 상기 특정 native app의 동작을 변화시키는 정보인 것을 특징으로 하고,
상기 프로세서는,
상기 (3) 프로세스에서,
상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보를 참조한 결과, (i) 상기 제1 사용자 의도분석 정보가 상기 AI Cloud Engine에서 지원하지 않는 기능이라는 정보에 해당되거나 상기 AV resource를 점유하고 있는 상기 특정 native app과 연관이 없는 정보에 해당되고, (ii) 상기 제1 결과 정보가 상기 특정 문자 데이터 내에 상기 기설정된 정규표현식의 정의된 패턴에 매칭되는 특정 문자열이 식별된다는 결과에 대응되는 정보에 해당되며, (iii) 상기 제2 결과 정보가 상기 특정 native app이 상기 AV resource를 점유하고 있는 상태라는 결과에 대응되는 정보에 해당되면, 상기 제1 사용자 의도분석 정보 및 상기 제2 사용자 의도분석 정보 중 상기 제2 사용자 의도분석 정보를 선택하고, 상기 제2 사용자 의도분석 정보에 대응되는 차량앱이 제어되도록 지원하는 것을 특징으로 하는 AI Service Agent 장치.In the AI Service Agent device for controlling the vehicle app using the state information of the vehicle AVN system,
In a state in which the AI Service Agent device is interworking with the vehicle AVN system,
at least one memory storing instructions; and
at least one processor configured to execute the instructions;
including,
The processor, (1) when a voice uttered by the user is input to the voice input unit, transmits specific voice data corresponding to the uttered voice to AI Cloud Engine to cause the AI Cloud Engine to respond to the specific voice data. A process for supporting generation of specific text data and first user intention analysis information, (2) collecting AVN status information, which is information about the occupation status of AV resources of the vehicle AVN system, or accessing the AVN status information that has already been collected; , a process of generating second user intention analysis information using the AVN state information and the specific text data, and (3) the first user intention analysis information and the first user intention analysis information with reference to the first user intention analysis information Selecting one of the intention analysis information and the second user intention analysis information, determining it as specific user intention analysis information, and performing a process of supporting a vehicle app corresponding to the specific user intention analysis information to be controlled do,
The processor is
In the process (2) above,
The specific character data is compared with a preset regular expression to identify a specific character string matching a defined pattern of the preset regular expression in the specific character data to obtain first result information corresponding to the identification result, and the vehicle determining a state in which at least one specific native app among a plurality of native apps executable in the AVN system occupies the AV resource, acquiring it as the AVN state information, and obtaining second result information corresponding to the determination result; It is characterized in that the second user intention analysis information is generated with reference to the first result information and the second result information,
The second user intention analysis information is information for changing the operation of the specific native app by applying the identification result of identifying the specific character string to the specific native app,
The processor is
In the process (3) above,
As a result of referring to the first user intention analysis information and the second user intention analysis information, (i) the first user intention analysis information corresponds to information that a function not supported by the AI Cloud Engine or occupies the AV resource; Information corresponding to information unrelated to the specific native app that exists, and (ii) information corresponding to the result that the first result information identifies a specific character string matching the defined pattern of the preset regular expression in the specific character data (iii) if the second result information corresponds to information corresponding to the result that the specific native app occupies the AV resource, the first user intention analysis information and the second user intention analysis AI Service Agent device, characterized in that it selects the second user intention analysis information from the information, and supports a vehicle app corresponding to the second user intention analysis information to be controlled. 삭제delete 삭제delete 삭제delete 제9항에 있어서,
상기 프로세서는,
상기 복수의 native app 중 서로 다른 두 개의 native app이 각각 Background 및 Foreground에서 실행되고 있는 경우, 상기 두 개의 native app 중 상기 차량 AVN 시스템의 기설정된 정책에 의해 선택된 하나의 native app이 상기 특정 native app 으로서 상기 AV resource를 점유하고 있는 것으로 판단하여 그 판단결과에 대응되는 상기 제2 결과 정보를 획득하는 것을 특징으로 하는 AI Service Agent 장치.10. The method of claim 9,
The processor is
When two different native apps among the plurality of native apps are running in the background and the foreground, respectively, one native app selected by the preset policy of the vehicle AVN system among the two native apps is the specific native app. AI Service Agent device, characterized in that it determines that the AV resource is occupied and acquires the second result information corresponding to the determination result. 제9항에 있어서,
상기 (1) 프로세스에서,
상기 AI Cloud Engine은, 기설정된 context 정보를 이용하여 상기 특정 음성 데이터에 대응되는 상기 제1 사용자 의도분석 정보를 생성하는 것을 특징으로 하는 AI Service Agent 장치.10. The method of claim 9,
In the process (1) above,
The AI Cloud Engine, AI Service Agent device, characterized in that by using preset context information to generate the first user intention analysis information corresponding to the specific voice data. 제9항에 있어서,
상기 (1) 프로세스에서,
상기 AI Cloud Engine은, SLU(Spoken Language Understanding)를 이용하여 상기 특정 음성 데이터에 대응하는 상기 특정 문자 데이터를 생성하는 것을 특징으로 하는 AI Service Agent 장치.10. The method of claim 9,
In the process (1) above,
The AI Cloud Engine, AI Service Agent device, characterized in that by using SLU (Spoken Language Understanding) to generate the specific text data corresponding to the specific voice data. 제9항에 있어서,
상기 프로세서는,
상기 (3) 프로세스에서,
TTS(Text to Speech)를 이용하여 상기 특정 사용자 의도분석 정보를 음성 출력부를 통하여 상기 사용자에게 추가적으로 제공하는 것을 특징으로 하는 AI Service Agent 장치.10. The method of claim 9,
The processor is
In the process (3) above,
AI Service Agent device, characterized in that the specific user intention analysis information is additionally provided to the user through a voice output unit using Text to Speech (TTS).
KR1020200045576A 2020-04-14 2020-04-14 Method and ai service agent for controlling vehicle apps using the status information of the vehicle avn system KR102389179B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200045576A KR102389179B1 (en) 2020-04-14 2020-04-14 Method and ai service agent for controlling vehicle apps using the status information of the vehicle avn system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200045576A KR102389179B1 (en) 2020-04-14 2020-04-14 Method and ai service agent for controlling vehicle apps using the status information of the vehicle avn system

Publications (2)

Publication Number Publication Date
KR20210127551A KR20210127551A (en) 2021-10-22
KR102389179B1 true KR102389179B1 (en) 2022-04-22

Family

ID=78275967

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200045576A KR102389179B1 (en) 2020-04-14 2020-04-14 Method and ai service agent for controlling vehicle apps using the status information of the vehicle avn system

Country Status (1)

Country Link
KR (1) KR102389179B1 (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101683083B1 (en) * 2011-09-30 2016-12-07 애플 인크. Using context information to facilitate processing of commands in a virtual assistant
KR101945190B1 (en) * 2017-05-11 2019-02-07 미디어젠(주) Voice recognition operating system and method
KR102066451B1 (en) * 2018-02-02 2020-01-15 주식회사 오비고 Method for providing vehicle ai service and device using the same
KR20190107289A (en) * 2019-08-30 2019-09-19 엘지전자 주식회사 Artificial robot and method for speech recognitionthe same

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
공개특허공보 제10-2016-0142802호(2016.12.13.) 1부*
공개특허공보 제10-2018-0124226호(2018.11.21.) 1부*
공개특허공보 제10-2019-0098868호(2019.08.23.) 1부*
공개특허공보 제10-2019-0107289호(2019.09.19.) 1부*

Also Published As

Publication number Publication date
KR20210127551A (en) 2021-10-22

Similar Documents

Publication Publication Date Title
US10748531B2 (en) Management layer for multiple intelligent personal assistant services
US20210249000A1 (en) Speech recognition method, electronic device, and computer storage medium
JP6848147B2 (en) Voice interaction implementation methods, devices, computer devices and programs
KR102518543B1 (en) Apparatus for correcting utterance errors of user and method thereof
KR20200035413A (en) Selection system and method
US10685647B2 (en) Speech recognition method and device
US9202459B2 (en) Methods and systems for managing dialog of speech systems
US11295735B1 (en) Customizing voice-control for developer devices
US20170308389A1 (en) Methods And Apparatus For Module Arbitration
CN106976434B (en) Apparatus and method for voice recognition device in vehicle
KR102066451B1 (en) Method for providing vehicle ai service and device using the same
CN113421561B (en) Voice control method, voice control device, server, and storage medium
EP2863385B1 (en) Function execution instruction system, function execution instruction method, and function execution instruction program
CN110956955B (en) Voice interaction method and device
CN116368353A (en) Content aware navigation instructions
US20200193985A1 (en) Domain management method of speech recognition system
KR102389179B1 (en) Method and ai service agent for controlling vehicle apps using the status information of the vehicle avn system
US11114090B1 (en) User profile linking
CN112863496A (en) Voice endpoint detection method and device
CN114842847A (en) Vehicle-mounted voice control method and device
KR20180096369A (en) Voice recognition supporting system and method for vehicle control
WO2020238341A1 (en) Speech recognition method, apparatus and device, and computer-readable storage medium
US10971134B2 (en) Cognitive modification of speech for text-to-speech
US11790898B1 (en) Resource selection for processing user inputs
KR20200072105A (en) Infortainment system for vehicle and method for controlling the same and vehicle including the same

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant