KR102441513B1

KR102441513B1 - Terminal, Vehicle and method for controlling the vehicle

Info

Publication number: KR102441513B1
Application number: KR1020170146608A
Authority: KR
Inventors: 한지민; 아나스타샤 야리지나; 박정미; 이지아
Original assignee: 현대자동차주식회사; 기아 주식회사
Priority date: 2017-11-06
Filing date: 2017-11-06
Publication date: 2022-09-07
Also published as: KR20190051215A

Abstract

본 발명의 단말기는 현재 위치를 수신하는 위치 수신부; 사용자가 발화한 음성을 입력받는 사운드 입력부; 입력된 사용자의 음성을 인식하고, 인식된 음성에 기초하여 태스크를 인식하며 인식된 태스크가 복수 개이면 복수 개의 태스크를 카테고리 별로 구분하여 카테고리 별로 그룹핑하고, 그룹핑된 카테고리와 현재 위치에 기초하여 추천 목적지를 검색하는 제어부; 검색된 추천 목적지의 정보를 저장하는 저장부; 및 차량과 통신을 수행하고, 저장부에 저장된 추천 목적지의 정보를 차량에 전송하는 통신부를 포함한다.
본 발명의 차량은 단말기로부터 수신된 추천 목적지에 기초하여 내비게이션 기능을 수행한다.The terminal of the present invention includes a location receiving unit for receiving a current location; a sound input unit for receiving a voice uttered by a user; Recognizes the input user's voice, recognizes a task based on the recognized voice, and if there are a plurality of recognized tasks, classifies the plurality of tasks by category and groups them by category, and recommends destinations based on the grouped category and current location a control unit to search for; a storage unit for storing information of the searched recommended destination; and a communication unit that communicates with the vehicle and transmits information of the recommended destination stored in the storage unit to the vehicle.
The vehicle of the present invention performs a navigation function based on the recommended destination received from the terminal.

Description

Terminal, Vehicle and method for controlling the vehicle}

본 발명은 음성을 인식하고 목적지까지 경로를 안내하는 내비게이션 기능을 수행하기 위한 단말기 및 차량에 관한 것이다.The present invention relates to a terminal and a vehicle for recognizing a voice and performing a navigation function for guiding a route to a destination.

차량은 사람 또는 화물을 운송할 목적으로 차륜을 구동시켜 주행하는 기계로, 도로 위를 이동한다.A vehicle is a machine driven by wheels for the purpose of transporting people or cargo, and it moves on the road.

이러한 차량은 기본적인 주행 기능 외에도 오디오 기능, 비디오 기능, 내비게이션 기능, 공조 기능, 시트 열선 기능, 외부 단말기와의 통신 기능 등의 사용자 편의를 위한 부가적인 기능을 더 포함하고, 오디오 기능, 비디오 기능, 내비게이션 기능 등을 조작하고 조작에 따른 동작 정보를 출력하기 위한 단말기를 더 포함한다.In addition to basic driving functions, these vehicles include additional functions for user convenience such as audio functions, video functions, navigation functions, air conditioning functions, seat heating functions, and communication functions with external terminals, and audio functions, video functions, and navigation functions. It further includes a terminal for operating a function, etc. and outputting operation information according to the operation.

내비게이션 기능은 다수의 위성위치확인시스템(Global Positioning System: 이하 "GPS"라 함)을 통해 위성들로부터 위치 정보를 각각 제공받아 현재 차량의 위치를 계산하고, 계산된 위치를 지도에 매칭(Map Matching)시켜 표시하고, 사용자로부터 목적지를 입력받아 미리 설정된 경로탐색 알고리즘에 따라 계산된 현재 위치부터 목적지까지의 경로탐색을 수행하고, 탐색된 경로를 지도에 매칭시켜 표시하고, 경로를 따라 사용자를 목적지까지 안내하는 기능이다.The navigation function receives location information from each of the satellites through a plurality of global positioning systems (hereinafter referred to as "GPS"), calculates the current vehicle location, and matches the calculated location to the map (Map Matching). ), receives the destination input from the user, performs a route search from the current location to the destination calculated according to a preset route search algorithm, matches the searched route to the map, displays the route, and directs the user to the destination along the route. It is a guide function.

내비게이션 기능을 갖는 단말기는, 목적지까지 경로 안내 시 도로가 교차하는 교차점에서 사용자가 진입도로를 명확하게 인지할 수 있도록 그래픽 지도를 확대하여 표시하거나, 2분할 화면 기능을 사용하여 일 측에는 기존 스케일(Scale)의 그래픽 지도를 디스플레이하고 다른 일 측에는 교차점을 확대한 그래픽 지도를 표시한다. A terminal with a navigation function enlarges and displays the graphic map so that the user can clearly recognize the approach road at the intersection where the roads intersect when guiding a route to the destination, or uses the two-split screen function to display the existing scale (Scale) on one side. ), and a graphic map with an enlarged intersection point is displayed on the other side.

또한 내비게이션 기능을 갖는 단말기는, 통신이 발전함에 따라 외부 서버에 경로 탐색을 요청하고 서버로부터 탐색된 경로를 제공받아 목적지까지 경로를 안내하고, 주행 중 목적지가 변경되거나, 차량이 경로를 이탈하였을 때, 서버에 경로 재탐색을 요청하고 서버로부터 새로운 경로를 제공받아 새로운 경로로 길을 안내한다.In addition, as communication develops, a terminal with a navigation function requests a route search from an external server, receives a route searched from the server and guides the route to the destination, and when the destination is changed or the vehicle deviates from the route , it requests the server to search for a route again, receives a new route from the server, and guides the route to the new route.

또한 차량은 내비게이션 기능을 수행하기 위해 지도 정보와 위치 정보를 제공받고 제공된 지도 정보 및 위치 정보를 이용하여 길을 안내하기도 한다.In addition, the vehicle receives map information and location information to perform a navigation function, and guides a road using the provided map information and location information.

일 측면은 사용자의 발화에 기초하여 태스크를 인식하고 인식된 태스크 및 현재 위치에 기초하여 목적지를 추천하고 추천된 목적지까지 경로를 안내하는 단말기 및 차량을 제공한다.One aspect provides a terminal and a vehicle for recognizing a task based on a user's utterance, recommending a destination based on the recognized task and a current location, and guiding a route to the recommended destination.

다른 측면은 사용자의 태스크의 이행 여부를 주기적으로 확인하고 태스크의 이행 여부에 기초하여 새로운 목적지를 추천하고 새로운 목적지까지 경로를 안내하는 단말기 및 차량을 제공한다.Another aspect provides a terminal and a vehicle for periodically checking whether a user's task is performed, recommending a new destination based on whether the task is performed, and guiding a route to the new destination.

일 측면에 따른 단말기는 현재 위치를 수신하는 위치 수신부; 사용자가 발화한 음성을 입력받는 사운드 입력부; 입력된 사용자의 음성을 인식하고, 인식된 음성에 기초하여 태스크를 인식하며 인식된 태스크가 복수 개이면 복수 개의 태스크를 카테고리 별로 구분하여 카테고리 별로 그룹핑하고, 그룹핑된 카테고리와 현재 위치에 기초하여 추천 목적지를 검색하는 제어부; 검색된 추천 목적지의 정보를 저장하는 저장부; 및 차량과 통신을 수행하고, 저장부에 저장된 추천 목적지의 정보를 차량에 전송하는 통신부를 포함한다.A terminal according to an aspect includes a location receiving unit for receiving a current location; a sound input unit for receiving a voice uttered by a user; Recognizes the input user's voice, recognizes a task based on the recognized voice, and if there are a plurality of recognized tasks, classifies the plurality of tasks by category and groups them by category, and recommends destinations based on the grouped category and current location a control unit to search for; a storage unit for storing information of the searched recommended destination; and a communication unit that communicates with the vehicle and transmits information of the recommended destination stored in the storage unit to the vehicle.

일 측면에 따른 단말기의 저장부는, 인덱싱 정보를 저장하는 인덱싱 데이터베이스; 주제 정보를 저장하는 주제 데이터베이스; 태스크 정보를 저장하는 태스크 데이터베이스; 카테고리 정보를 저장하는 카테고리 데이터베이스를 더 저장한다.The storage unit of the terminal according to one aspect, the indexing database for storing indexing information; a subject database for storing subject information; a task database for storing task information; A category database for storing category information is further stored.

일 측면에 따른 단말기의 제어부는, 인식된 음성의 음소와 인덱싱 데이터베이스에 저장된 인덱싱 정보에 기초하여 단어를 인식하고, 인식된 단어와 주제 데이터 베이스에 저장된 주제 정보에 기초하여 사용자의 발화의 주제를 인식하고, 인식된 주제와 태스크 데이터베이스의 태스크 정보에 기초하여 사용자가 이행해야 할 태스크를 인식하는 주제 인식부; 카테고리 데이터베이스의 카테고리 정보에 기초하여 인식된 태스크의 카테고리를 인식하고, 인식된 카테고리에 기초하여 인식된 태스크를 카테고리별로 그룹핑하는 카테고리 인식부를 포함한다.The control unit of the terminal according to one aspect recognizes a word based on a phoneme of a recognized voice and indexing information stored in an indexing database, and recognizes a subject of the user's utterance based on the recognized word and subject information stored in the subject database and a subject recognition unit for recognizing a task to be performed by the user based on the recognized subject and task information of the task database; and a category recognition unit for recognizing a category of a recognized task based on category information of the category database, and grouping the recognized task by category based on the recognized category.

일 측면에 따른 단말기의 제어부는, 현재 위치를 기준으로 일정 거리 내의 관심 지점을 검색하고, 검색된 관심지점과 그룹핑된 카테고리에 기초하여 적어도 하나의 추천 목적지를 검색하고 검색된 적어도 하나의 추천 목적지의 정보를 출력하는 추천 목적지 검색부를 더 포함한다.The control unit of the terminal according to one aspect searches for a point of interest within a certain distance based on a current location, searches for at least one recommended destination based on the searched point of interest and a grouped category, and retrieves information of the at least one recommended destination It further includes a recommended destination search unit to output.

일 측면에 따른 단말기의 제어부는, 현재 위치를 확인하고, 확인된 현재 위치와 추천 목적지의 위치에 기초하여 태스크 이행 여부를 판단하는 태스크 이행 판단부를 더 포함한다.The control unit of the terminal according to an aspect further includes a task fulfillment determining unit configured to check a current location and determine whether to perform a task based on the checked current location and the location of the recommended destination.

일 측면에 따른 단말기의 태스크 이행 판단부는, 외부 서버로부터 결제 정보를 수신하고 수신된 결제 정보에 기초하여 태스크 이행 여부를 판단하는 것을 더 포함한다.The task performance determination unit of the terminal according to an aspect further includes receiving payment information from an external server and determining whether to perform the task based on the received payment information.

일 측면에 따른 단말기의 추천 목적지 검색부는, 태스크 이행 판단부로부터 태스크 불이행 정보가 수신되면 확인된 현재 위치와 그룹핑된 카테고리에 기초하여 새로운 추천 목적지를 검색하고 검색된 새로운 추천 목적지의 정보를 출력하는 것을 더 포함한다.The recommended destination search unit of the terminal according to an aspect, when task failure information is received from the task performance determination unit, searches for a new recommended destination based on the identified current location and the grouped category, and further outputs information of the searched new recommended destination include

일 측면에 따른 단말기의 추천 목적지 검색부는, 인식된 태스크가 복수 개이면, 복수 개의 태스크를 한번에 이행할 수 있는 추천 목적지를 검색하는 것을 포함한다.The recommended destination search unit of the terminal according to an aspect includes, when a plurality of recognized tasks, searching for a recommended destination capable of performing the plurality of tasks at once.

일 측면에 따른 단말기의 추천 목적지 검색부는, 인식된 태스크가 복수 개이면, 복수 개의 태스크를 최소 수의 목적지에서 이행할 수 있도록 하는 추천 목적지를 검색하는 것을 포함한다.The recommended destination search unit of the terminal according to an aspect includes, when a plurality of recognized tasks, searching for a recommended destination that enables the plurality of tasks to be performed in a minimum number of destinations.

일 측면에 따른 단말기의 추천 목적지 검색부는, 검색된 추천 목적지가 복수 개이면, 복수 개의 추천 목적지 중 현재 위치에서 거리가 가장 가까운 추천 목적지의 정보를 출력하는 것을 포함한다.The recommended destination search unit of the terminal according to one aspect includes outputting information on a recommended destination having the closest distance from a current location among the plurality of recommended destinations when there are a plurality of searched recommended destinations.

일 측면에 따른 단말기의 제어부는, 태스크의 연기 명령이 수신되면 그룹핑된 카테고리의 정보를 저장하는 것을 포함한다.The control unit of the terminal according to an aspect includes storing information of grouped categories when a command to postpone a task is received.

다른 측면에 따른 차량은 단말기와 통신을 수행하는 통신부; 현재 위치를 수신하는 위치 수신부; 통신부를 통해 추천 목적지가 수신되면 현재 위치부터 추천 목적지까지의 경로를 생성하고 생성된 경로의 출력을 제어하는 제어부; 경로를 표시하는 사용자 인터페이스를 포함하고, 제어부는 주행 중 새로운 추천 목적지가 수신되면 현재 위치를 확인하고 확인된 현재 위치부터 새로운 추천 목적지까지의 새로운 경로를 생성하고 생성된 새로운 경로의 출력을 제어하는 것을 포함한다.A vehicle according to another aspect includes a communication unit configured to communicate with a terminal; a location receiver for receiving a current location; a controller for generating a route from the current location to the recommended destination when a recommended destination is received through the communication unit and controlling the output of the generated route; and a user interface for displaying a route, wherein when a new recommended destination is received while driving, the controller checks the current location, generates a new route from the confirmed current location to the new recommended destination, and controls the output of the generated new route include

다른 측면에 따른 차량의 사용자 인터페이스는 최종 목적지를 입력받고, 제어부는 현재 위치, 추천 목적지 및 최종 목적지를 연결하는 경로를 생성하는 것을 포함한다.The user interface of the vehicle according to another aspect includes receiving a final destination, and the controller generates a route connecting the current location, the recommended destination, and the final destination.

또 다른 측면에 따른 차량은 현재 위치를 수신하는 위치 수신부; 사용자가 발화한 음성을 입력받는 사운드 입력부; 입력된 사용자의 음성을 인식하고, 인식된 음성에 기초하여 태스크를 인식하며 인식된 태스크가 복수 개이면 복수 개의 태스크를 카테고리 별로 구분하여 카테고리 별로 그룹핑하고, 그룹핑된 카테고리와 현재 위치에 기초하여 추천 목적지를 검색하고, 검색된 추천 목적지의 정보에 기초하여 내비게이션 기능을 수행하는 제어부; 내비게이션 기능에 대응하는 내비게이션 정보를 표시하는 사용자 인터페이스를 포함한다.A vehicle according to another aspect includes a location receiver configured to receive a current location; a sound input unit for receiving a voice uttered by a user; Recognizes the input user's voice, recognizes a task based on the recognized voice, and if there are a plurality of recognized tasks, classifies the plurality of tasks by category and groups them by category, and recommends destinations based on the grouped category and current location a control unit that searches for and performs a navigation function based on the searched recommended destination information; and a user interface for displaying navigation information corresponding to a navigation function.

또 다른 측면에 따른 차량은 인덱싱 정보를 저장하는 인덱싱 데이터베이스; 주제 정보를 저장하는 주제 데이터베이스; 태스크 정보를 저장하는 태스크 데이터베이스; 및 카테고리 정보를 저장하는 카테고리 데이터베이스를 더 포함한다.A vehicle according to another aspect includes an indexing database for storing indexing information; a subject database for storing subject information; a task database for storing task information; and a category database for storing category information.

다른 측면에 따른 차량의 제어부는, 인식된 음성의 음소와 인덱싱 데이터베이스에 저장된 인덱싱 정보에 기초하여 단어를 인식하고, 인식된 단어와 주제 데이터 베이스에 저장된 주제 정보에 기초하여 사용자의 발화의 주제를 인식하고, 인식된 주제와 태스크 데이터베이스의 태스크 정보에 기초하여 사용자가 이행해야 할 태스크를 인식하는 주제 인식부; 카테고리 데이터베이스의 카테고리 정보에 기초하여 인식된 태스크의 카테고리를 인식하고, 인식된 카테고리에 기초하여 인식된 태스크를 카테고리별로 그룹핑하는 카테고리 인식부를 포함한다.The control unit of the vehicle according to another aspect recognizes a word based on a phoneme of a recognized voice and indexing information stored in an indexing database, and recognizes a subject of the user's utterance based on the recognized word and subject information stored in the subject database and a subject recognition unit for recognizing a task to be performed by the user based on the recognized subject and task information of the task database; and a category recognition unit for recognizing a category of a recognized task based on category information of the category database, and grouping the recognized task by category based on the recognized category.

다른 측면에 따른 차량의 제어부는, 현재 위치를 기준으로 일정 거리 내의 관심 지점을 검색하고, 검색된 관심지점과 그룹핑된 카테고리에 기초하여 적어도 하나의 추천 목적지를 검색하고 검색된 적어도 하나의 추천 목적지의 정보를 출력하는 추천 목적지 검색부를 더 포함한다.The control unit of the vehicle according to another aspect searches for a point of interest within a certain distance based on a current location, searches for at least one recommended destination based on the searched point of interest and a grouped category, and retrieves information of the at least one recommended destination It further includes a recommended destination search unit to output.

다른 측면에 따른 차량의 제어부는, 현재 위치를 확인하고, 확인된 현재 위치와 추천 목적지의 위치에 기초하여 태스크 이행 여부를 판단하는 태스크 이행 판단부를 더 포함한다.The control unit of the vehicle according to another aspect further includes a task fulfillment determining unit configured to check a current location and determine whether to perform a task based on the checked current location and the location of the recommended destination.

다른 측면에 따른 차량의 태스크 이행 판단부는, 외부 서버로부터 결제 정보를 수신하고 수신된 결제 정보에 기초하여 태스크 이행 여부를 판단하는 것을 더 포함한다.The task performance determination unit of the vehicle according to another aspect further includes receiving payment information from an external server and determining whether to perform the task based on the received payment information.

다른 측면에 따른 차량의 추천 목적지 검색부는, 태스크 이행 판단부로부터 태스크 불이행 정보가 수신되면 확인된 현재 위치와 그룹핑된 카테고리에 기초하여 새로운 추천 목적지를 검색하고 검색된 새로운 추천 목적지의 정보를 출력하는 것을 더 포함한다.The recommended destination search unit of the vehicle according to another aspect, when task failure information is received from the task performance determination unit, searches for a new recommended destination based on the identified current location and the grouped category, and further outputs information of the searched new recommended destination include

다른 측면에 따른 차량의 추천 목적지 검색부는, 인식된 태스크가 복수 개이면, 복수 개의 태스크를 최소 수의 목적지에서 이행할 수 있도록 하는 최소의 수의 추천 목적지를 검색하는 것을 포함한다.The recommended destination search unit of the vehicle according to another aspect includes, when a plurality of recognized tasks, searching for a minimum number of recommended destinations for performing the plurality of tasks in the minimum number of destinations.

다른 측면에 따른 차량의 추천 목적지 검색부는, 검색된 추천 목적지가 복수 개이면, 복수 개의 추천 목적지 중 현재 위치에서 거리가 가장 가까운 추천 목적지의 정보를 출력하는 것을 포함한다.The recommended destination search unit of the vehicle according to another aspect includes outputting information on a recommended destination that is closest to a current location from among the plurality of recommended destinations when there are a plurality of searched recommended destinations.

다른 측면에 따른 차량의 제어부는, 태스크의 연기 명령이 수신되면 그룹핑된 카테고리의 정보를 저장하는 것을 포함한다.The control unit of the vehicle according to another aspect includes storing information of grouped categories when a command to postpone a task is received.

본 발명은 사용자의 발화 내용에서 필요한 정보인 태스크만을 인식하고 인식된 태스크의 카테고리를 인식하고, 인식된 카테고리 및 현재 위치에 기초하여 적어도 하나의 목적지를 추천함으로써 내비게이션 기능인 목적지까지의 길 안내 서비스의 질을 높일 수 있다.The present invention recognizes only a task, which is information necessary from the user's utterance, recognizes the category of the recognized task, and recommends at least one destination based on the recognized category and the current location, thereby providing a navigation function for the quality of the route guidance service to the destination. can increase

또한 본 발명은 복수 개의 태스크를 최소한의 시간으로 최소한의 이동 거리에서 이행할 수 있는 목적지를 추천함으로써 사용자의 편리성을 향상시킬 수 있고 사용자의 태스크 이행 시간을 최소화할 수 있다. In addition, the present invention can improve the user's convenience and minimize the user's task execution time by recommending a destination that can perform a plurality of tasks in a minimum amount of time and a minimum moving distance.

본 발명은 현재 위치 및 카드의 결제 이력 정보에 기초하여 목적지 추천에 대한 사용자의 태스크 이행 여부를 지속적으로 확인하고, 태스크가 이행되지 않았을 때 새로운 목적지를 추천함으로써 경로 안내 성능을 향상시킬 수 있다.The present invention can improve route guidance performance by continuously checking whether the user's task for destination recommendation is performed based on the current location and card payment history information, and recommending a new destination when the task is not fulfilled.

본 발명은 내비게이션 기능을 가진 단말기 및 차량의 품질을 향상시킬 수 있어 상품성을 증대시킬 수 있고, 나아가 사용자의 만족도를 높일 수 있으며 사용자의 편리성 및 차량의 안전성을 향상시킬 수 있다.The present invention can improve the quality of a terminal and a vehicle having a navigation function, thereby increasing the merchantability, further enhancing the user's satisfaction, and improving the user's convenience and the safety of the vehicle.

도 1은 일 실시 예에 따른 차량의 외관도이다.
도 2는 일 실시 예에 따른 차량의 내부 예시도이다.
도 3은 일 실시 예에 따른 차량의 제어 구성도이다.
도 4는 일 실시 예에 따른 차량의 제어부의 상세 구성도이다.
도 5는 일 실시 예에 따른 차량의 저장부에 저장된 데이터 베이스의 예시도이다.
도 6은 일 실시 예에 따른 차량의 제어 순서도이다.
도 7 내지 도 12는 일 실시 예에 따른 차량의 추천 목적지의 검색 및 추천 목적지까지의 경로 생성의 예시도이다.
도 13은 다른 실시 예에 따른 차량과 통신하는 단말기의 제어 구성도이다.
도 14는 다른 실시 예에 따른 차량과 통신하는 단말기의 제어 순서도이다.
도 15는 다른 실시 예에 따른 차량의 제어 순서도이다.1 is an external view of a vehicle according to an exemplary embodiment.
2 is an exemplary view of the interior of a vehicle according to an embodiment.
3 is a control configuration diagram of a vehicle according to an exemplary embodiment.
4 is a detailed configuration diagram of a control unit of a vehicle according to an exemplary embodiment.
5 is an exemplary diagram of a database stored in a storage unit of a vehicle according to an exemplary embodiment.
6 is a control flowchart of a vehicle according to an exemplary embodiment.
7 to 12 are exemplary diagrams of searching for a recommended destination of a vehicle and generating a route to the recommended destination, according to an exemplary embodiment.
13 is a control configuration diagram of a terminal communicating with a vehicle according to another exemplary embodiment.
14 is a control flowchart of a terminal communicating with a vehicle according to another exemplary embodiment.
15 is a control flowchart of a vehicle according to another exemplary embodiment.

이하, 첨부된 도면을 참조하여 본 발명에 대해 상세히 설명한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

도 1은 일 실시 예에 따른 차량의 외관도이고 도 2는 일 실시 예에 따른 차량의 내부 예시도이다. 1 is an external view of a vehicle according to an exemplary embodiment, and FIG. 2 is an exemplary interior view of a vehicle according to an exemplary embodiment.

차량(100)은 사람 또는 화물을 운송할 목적으로 차륜을 구동시켜 도로 위를 주행한다.The vehicle 100 drives on a road by driving wheels for the purpose of transporting people or cargo.

차량(100)은 내장과 외장을 갖는 차체(Body)와, 차체를 제외한 나머지 부분으로 주행에 필요한 기계 장치가 설치되는 차대(Chassis)를 포함한다.The vehicle 100 includes a body having an interior and exterior, and a chassis in which mechanical devices necessary for driving are installed as the remaining parts except for the body.

도 1 에 도시된 바와 같이 차체의 외장(110)은 프론트 패널(111), 본네트(112), 루프 패널(113), 리어 패널(114), 트렁크(115), 전후좌우 도어(116), 전후좌우 도어(116)에 개폐 가능하게 마련된 윈도우 글라스(117)를 포함한다. As shown in FIG. 1 , the exterior 110 of the vehicle body includes a front panel 111 , a bonnet 112 , a roof panel 113 , a rear panel 114 , a trunk 115 , front and rear left and right doors 116 , front and rear It includes a window glass 117 provided to be able to open and close on the left and right doors 116 .

그리고 차체의 외장은 프론트 패널, 본네트, 루프 패널, 리어 패널, 트렁크, 전후좌우 도어의 윈도우 글라스 사이의 경계에 마련된 필러를 더 포함한다.In addition, the exterior of the vehicle body further includes a pillar provided at a boundary between the front panel, the bonnet, the roof panel, the rear panel, the trunk, and the window glass of the front, rear, left, and right doors.

차체의 외장은 운전자에게 차량(100) 후방의 시야를 제공하는 사이드 미러를 더 포함한다.The exterior of the vehicle body further includes a side mirror that provides a driver with a view of the rear of the vehicle 100 .

차체의 외장은 다른 차량과의 통신(V2V) 및 인프라와의 통신(V2I) 등의 무선 차량 네트워크(V2X: Vehicle to everything)를 수행하기 위한 안테나 모듈(118)을 더 포함한다.The exterior of the vehicle body further includes an antenna module 118 for performing a wireless vehicle network (V2X: Vehicle to everything) such as communication with other vehicles (V2V) and communication with infrastructure (V2I).

도 2에 도시된 바와 같이, 차체의 내장(120)은 탑승자가 앉는 시트(121)와, 대시 보드(122)와, 대시 보드 상에 배치되고 타코미터, 속도계, 냉각수 온도계, 연료계, 방향전환 지시등, 상향등 표시등, 경고등, 안전벨트 경고등, 주행 거리계, 주행 기록계, 자동변속 선택레버 표시등, 도어 열림 경고등, 엔진 오일 경고등, 연료부족 경고등이 배치된 계기판(즉 클러스터, 123)과, 공기조화기의 송풍구와 조절판, 시거잭이 배치되고 오디오 기기가 배치된 센터 페시아(124)를 포함한다.As shown in FIG. 2 , the interior 120 of the vehicle body includes a seat 121 on which an occupant sits, a dashboard 122, and a dashboard disposed on the dashboard and includes a tachometer, a speedometer, a coolant thermometer, a fuel gauge, and a direction change indicator. , high beam indicator, warning lamp, seat belt warning lamp, odometer, odometer, automatic shift selector indicator, door open warning lamp, engine oil warning lamp, low fuel warning lamp (i.e. cluster, 123) and air conditioner of the vent and control panel, and a cigar jack and a center fascia 124 on which an audio device is disposed.

센터 페시아(124)는 대시 보드(122) 중에서 운전석과 조수석 사이에 위치하는 부분이다. 이러한 센터페시아(124)에는 오디오 기기, 공기 조화기 및 히터를 조정하기 위한 헤드유닛(125)이 배치될 수 있고, 차량과 사용자용 단말기(300) 사이에서 데이터 통신을 수행하도록 하는 멀티단자(126)가 마련될 수 있다.The center fascia 124 is a portion of the dashboard 122 positioned between the driver's seat and the passenger seat. A head unit 125 for controlling an audio device, an air conditioner, and a heater may be disposed in the center fascia 124 , and a multi-terminal 126 for performing data communication between the vehicle and the user terminal 300 . ) can be provided.

멀티단자(126)는 USB 포트, AUX단자를 포함하고, SD슬롯을 더 포함할 수 있으며, 헤드 유닛(125)과 인접한 위치에 배치되고, 또한 사용자 인터페이스(129)와 인접하게 배치될 수 있고, 커넥터 또는 케이블을 통해 사용자 인터페이스(129) 및 외부 장치에 전기적으로 연결될 수 있다.The multi-terminal 126 includes a USB port, an AUX terminal, and may further include an SD slot, and is disposed adjacent to the head unit 125, and may also be disposed adjacent to the user interface 129, It may be electrically connected to the user interface 129 and an external device through a connector or a cable.

여기서 외부 장치는, 저장 장치, 사용자용 단말기(300), MP3 플레이어 등을 포함하고, 저장 장치는 카드형 메모리 및 외장형 하드 디스크를 포함하고, 사용자의 단말기(300)는 스마트 폰, 노트북, 태블릿, 웨어러블 디바이스 등을 포함한다.Here, the external device includes a storage device, a user terminal 300, an MP3 player, and the like, the storage device includes a card-type memory and an external hard disk, and the user's terminal 300 includes a smart phone, a notebook computer, a tablet, wearable devices and the like.

차랑(100)은 각종 기능의 동작 명령을 입력받기 위한 입력부(127)를 더 포함할 수 있다.The charang 100 may further include an input unit 127 for receiving operation commands for various functions.

입력부(127)는 헤드 유닛(125) 및 센터페시아(124)에 마련될 수 있고, 각종 기능의 동작 온 오프 버튼, 각종 기능의 설정값을 변경하기 위한 버튼 등과 같은 적어도 하나의 물리적인 버튼을 포함할 수 있다. The input unit 127 may be provided on the head unit 125 and the center fascia 124, and includes at least one physical button such as an operation on/off button for various functions, a button for changing setting values of various functions, and the like. can do.

입력부(127)는 내비게이션 기능을 입력받는 것도 가능하고, 내비게이션 기능 수행 시 사용자로부터 최종 목적지의 정보를 입력받는 것도 가능하며, 제어부에 의해 추천된 목적지들 중 어느 하나의 추천 목적지를 입력받는 것도 가능하다.The input unit 127 may receive a navigation function, it is also possible to receive information on a final destination from the user when performing the navigation function, and it is also possible to receive a recommended destination of any one of the destinations recommended by the controller. .

입력부(127)는 사용자 인터페이스(129)의 표시부에 표시된 커서의 이동 명령 및 사용자 인터페이스(129)의 표시부에 표시된 버튼의 선택 명령 등을 입력하기 위한 조그 다이얼(미도시) 또는 터치 패드(미도시)를 더 포함하는 것도 가능하다. The input unit 127 includes a jog dial (not shown) or a touch pad (not shown) for inputting a cursor movement command displayed on the display unit of the user interface 129 and a button selection command displayed on the display unit of the user interface 129 . It is also possible to further include.

여기서 조그 다이얼 또는 터치 패드는 센터페시아(124)에 마련될 수 있다.Here, the jog dial or touch pad may be provided on the center fascia 124 .

차랑(100)은 헤드 유닛(125)에 마련되고, 차량에서 수행 중인 기능에 대한 정보 및 사용자에 의해 입력된 정보를 표시하는 표시부(128)를 더 포함할 수 있다.The vehicle 100 may further include a display unit 128 that is provided in the head unit 125 and displays information about a function being performed in the vehicle and information input by a user.

사용자 인터페이스(129)는 대시 보드 상에 매립식 또는 거치식으로 설치될 수 있다. The user interface 129 may be installed on the dashboard in a buried or mounted manner.

사용자 인터페이스(129)는 내비게이션 기능뿐만 아니라, 외부에서 수신된 콘텐츠나 저장 장치에 저장된 정보의 영상 및 사운드를 출력하는 것도 가능하고, 외부에서 전송된 오디오 신호를 출력하는 오디오 기능을 수행하는 것도 가능하다.The user interface 129 may output not only a navigation function, but also an image and sound of content received from the outside or information stored in a storage device, and may also perform an audio function of outputting an audio signal transmitted from the outside. .

사용자 인터페이스(129)는 표시부로 디스플레이 패널을 포함할 수 있고, 입력부로 터치 패널을 더 포함할 수 있다.The user interface 129 may include a display panel as a display unit and may further include a touch panel as an input unit.

즉 사용자 인터페이스(129)는 디스플레이 패널만을 포함할 수 있고, 디스플레이 패널에 터치 패널이 일체화된 터치 스크린을 포함할 수도 있다.That is, the user interface 129 may include only the display panel or a touch screen in which the touch panel is integrated with the display panel.

사용자 인터페이스(129)는 디스플레이 패널만으로 구현된 경우, 센터페시아에 마련된 입력부(127)를 이용하여 디스플레이 패널에 표시된 버튼을 선택받을 수 있다.When the user interface 129 is implemented with only the display panel, a button displayed on the display panel may be selected using the input unit 127 provided on the center fascia.

사용자 인터페이스(129)는 터치 스크린으로 구현된 경우, 터치 패널을 통해 사용자의 동작 명령을 직접 입력받을 수 있다.When the user interface 129 is implemented as a touch screen, a user's operation command may be directly input through the touch panel.

이와 같이 사용자 인터페이스(129)는 표시부를 포함할 수 있고, 입력부를 더 포함할 수 있다.As such, the user interface 129 may include a display unit and may further include an input unit.

차량(100)은 사용자 인터페이스(129)를 이용하여 내비게이션 기능을 수행하도록 하기 위해 차량의 현재 위치를 획득하기 위한 위치 수신부(130)를 더 포함한다. The vehicle 100 further includes a location receiver 130 for obtaining a current location of the vehicle in order to perform a navigation function using the user interface 129 .

여기서 위치 수신부(130)는 GPS 수신기를 포함하고, 복수의 위성에서 제공된 위치 정보를 수신하여 차량의 현재 위치를 획득한다.Here, the location receiving unit 130 includes a GPS receiver, and obtains the current location of the vehicle by receiving location information provided from a plurality of satellites.

차량(100)은 내부의 각종 전자 장치들 사이의 통신, 사용자용 단말기(300)와의 통신 및 저장 장치와의 통신을 수행하고, 안테나 모듈(118)을 통해 외부 장치와 통신을 수행하기 위한 통신부(140)를 더 포함할 수 있다.The vehicle 100 performs communication between various internal electronic devices, communication with the user terminal 300 and communication with a storage device, and a communication unit ( 140) may be further included.

여기서 외부 장치는, 타 차량, 서버 및 인프라 중 적어도 하나를 포함할 수 있다. Here, the external device may include at least one of other vehicles, servers, and infrastructure.

서버는 교통 정보 제공 서버, 카드사 서버, 국세청의 현금 영수증 서버 등일 수 있다.The server may be a traffic information providing server, a card company server, a cash receipt server of the National Tax Service, and the like.

차량은 센터페시아(124)에 마련되고 조작 위치를 입력받는 변속 레버와, 변속 레버의 주변에 위치하고 전자식 주차 브레이크 장치(미도시)의 동작 명령을 입력받는 주차 버튼(EPB 버튼)을 더 포함한다.The vehicle further includes a shift lever provided on the center fascia 124 and receiving an operation position, and a parking button (EPB button) positioned around the shift lever and receiving an operation command of an electronic parking brake device (not shown).

차량의 차대는 동력 발생 장치, 동력 전달 장치, 주행 장치, 조향 장치, 제동 장치, 현가 장치, 변속 장치, 연료 장치, 전후좌우 차륜(131) 등을 포함한다.The chassis of the vehicle includes a power generating device, a power transmitting device, a traveling device, a steering device, a braking device, a suspension device, a transmission device, a fuel device, front and rear left and right wheels 131 , and the like.

차량(100)은 주행 방향을 조절하기 위한 조향 장치의 스티어링 휠(132)과, 사용자의 제동 의지에 따라 사용자에 의해 가압되는 브레이크 페달(133)과, 사용자의 가속 의지에 따라 사용자에 의해 가압되는 엑셀러레이터 페달(134)을 포함할 수 있다(도 2 참조).The vehicle 100 includes a steering wheel 132 of a steering device for adjusting a driving direction, a brake pedal 133 pressed by the user according to the user's will to brake, and a brake pedal 133 pressed by the user according to the user's will to accelerate. It may include an accelerator pedal 134 (see FIG. 2 ).

이러한 차량(100)은 시동모터(미도시)에 동작 명령을 입력하기 위한 시동 버튼을 더 포함할 수 있다. 즉 차량(100)은 시동 버튼이 온 되면 시동모터(미도시)를 동작시키고 시동 모터의 동작을 통해 동력 발생장치인 엔진(미도시)을 구동시킨다.The vehicle 100 may further include a start button for inputting an operation command to a starter motor (not shown). That is, when the start button is turned on, the vehicle 100 operates a starter motor (not shown) and drives an engine (not shown), which is a power generating device, through the operation of the starter motor.

차량(100)은 사용자 인터페이스, 오디오 기기, 실내 등, 시동 모터, 그 외 각종 전자 장치들에 전기적으로 연결되어 구동 전력을 공급하는 배터리(미도시)를 더 포함한다. 이러한 배터리는 주행 중 자체 발전기 또는 엔진의 동력을 이용하여 충전을 수행한다.The vehicle 100 further includes a battery (not shown) electrically connected to a user interface, an audio device, an indoor lamp, a starter motor, and other various electronic devices to supply driving power. Such a battery performs charging using the power of its own generator or engine while driving.

아울러 차량(100)은 하이브리드 차량 또는 전기 차량일 수 있다.In addition, the vehicle 100 may be a hybrid vehicle or an electric vehicle.

도 3은 일 실시 예에 따른 차량의 제어 구성도이고, 도 4는 일 실시 예에 따른 차량의 제어부의 상세 구성도이다.3 is a diagram illustrating a control configuration of a vehicle according to an embodiment, and FIG. 4 is a detailed configuration diagram of a control unit of a vehicle according to an embodiment.

차량(100)은 사용자 인터페이스(129), 위치 수신부(130), 통신부(140), 사운드 입력부(150), 제어부(160), 저장부(170) 및 사운드 출력부(180)를 포함한다. The vehicle 100 includes a user interface 129 , a location receiving unit 130 , a communication unit 140 , a sound input unit 150 , a control unit 160 , a storage unit 170 , and a sound output unit 180 .

사용자 인터페이스(129)는 사용자로부터 동작 명령 및 입력 정보를 입력받고 수행 중인 기능에 대한 동작 정보를 표시한다.The user interface 129 receives an operation command and input information from a user and displays operation information for a function being performed.

이러한 사용자 인터페이스(129)는 입력부(129a)와 표시부(129b)를 포함할 수 있다. 본 실시 예는 사용자 인터페이스(129)가 입력부(129a)인 터치 패널과 표시부(129b)인 디스플레이 패널이 일체화된 터치 스크린일 경우에 대해 설명한다.The user interface 129 may include an input unit 129a and a display unit 129b. This embodiment describes a case in which the user interface 129 is a touch screen in which the touch panel serving as the input unit 129a and the display panel serving as the display unit 129b are integrated.

입력부(129a)는 복수 기능 중 적어도 하나의 기능의 온 오프 명령을 입력받고, 입력된 적어도 하나의 기능에 대한 동작 명령을 입력받는다.The input unit 129a receives an on/off command for at least one function among a plurality of functions, and an operation command for the input at least one function.

입력부(129a)는 내비게이션 기능의 동작 명령 입력 시 최종 목적지의 정보를 입력받고 입력된 최종 목적지의 정보를 제어부(160)에 전송할 수 있으며, 표시부(129b)에 표시된 적어도 하나의 추천 목적지 중 어느 하나의 추천 목적지를 선택받고 선택된 어느 하나의 추천 목적지의 정보를 제어부(160)에 전송할 수 있다.The input unit 129a may receive information of a final destination when an operation command of the navigation function is input, and transmit the input information of the final destination to the controller 160, and select any one of the at least one recommended destination displayed on the display unit 129b. After a recommended destination is selected, information on any one of the selected recommended destinations may be transmitted to the controller 160 .

여기서 최종 목적지의 정보 및 어느 하나의 추천 목적지의 정보는, 목적지의 건물명, 목적지의 전화번호, 목적지의 주소, 목적지의 상호(company name) 중 어느 하나일 수 있다.Here, the final destination information and any one recommended destination information may be any one of a building name of the destination, a phone number of the destination, an address of the destination, and a company name of the destination.

입력부(129a)는 사용자에 의해 입력된 입력 정보 및 선택된 선택 정보를 제어부(160)에 전송한다.The input unit 129a transmits the input information input by the user and the selected selection information to the control unit 160 .

표시부(129b)는 수행 중인 기능에 대한 동작 정보를 표시하고, 사용자에 의해 선택 가능한 선택 정보를 버튼 또는 아이콘으로 표시한다.The display unit 129b displays operation information for a function being performed, and displays selection information selectable by the user as a button or an icon.

표시부(129b)는 내비게이션 정보의 영상 정보를 표시한다.The display unit 129b displays image information of navigation information.

표시부(129b)는 목적지 입력을 위한 한/영 문자 버튼, 숫자 버튼, 특수 문자 버튼 등을 표시하고, 경로 안내 명령을 위한 경로 안내 버튼 등을 표시할 수 있다.The display unit 129b may display a Korean/English character button, a number button, a special character button, etc. for inputting a destination, and may display a route guidance button for a route guidance command.

표시부(129b)는 제어부(160)에 의해 추천된 추천 목적지의 정보를 표시한다.The display unit 129b displays information on the recommended destination recommended by the control unit 160 .

표시부(129b)는 안내문과, 동작 명령의 정보를 갖는 버튼 또는 아이콘을 표시한다.The display unit 129b displays a guide and a button or icon having information of an operation command.

표시부(129b)는 전화 통화와 관련된 정보를 표시하거나, 컨텐츠의 영상을 표시하거나, 음악 재생과 관련된 정보를 표시하는 것도 가능하고 외부의 방송 신호를 영상으로 표시하는 것도 가능하다.The display unit 129b may display information related to a phone call, display an image of content, display information related to music reproduction, or display an external broadcast signal as an image.

위치 수신부(130)는 차량의 현재 위치를 획득하고 획득된 현재 위치를 통신부(150)에 전송한다.The location receiving unit 130 acquires the current location of the vehicle and transmits the obtained current location to the communication unit 150 .

이러한 위치 획득부(130)는 GPS 수신기를 포함한다.The location acquisition unit 130 includes a GPS receiver.

여기서 GPS(Global Positioning System) 수신기는 복수의 GPS 위성의 신호를 수신하는 안테나와, 복수의 GPS위성의 위치 신호에 대응하는 거리 및 시간 정보를 이용하여 차량의 위치를 획득하는 소프트웨어와, 획득된 차량 위치의 정보를 출력하는 신호 출력부를 포함한다.In this case, the GPS (Global Positioning System) receiver includes an antenna for receiving signals from a plurality of GPS satellites, software for acquiring the location of the vehicle using distance and time information corresponding to the location signals of the plurality of GPS satellites, and the acquired vehicle and a signal output unit for outputting position information.

이러한 GPS 수신기의 안테나는 안테나 모듈(118) 내부에 마련될 수 있다.The antenna of the GPS receiver may be provided inside the antenna module 118 .

통신부(140)는 외부의 서버(200) 및 단말기(300)와 통신을 수행한다. The communication unit 140 communicates with the external server 200 and the terminal 300 .

여기서 외부의 서버는 카드사의 서버, 국세청의 현금 영수증 서버일 수 있다. Here, the external server may be a server of a card company or a cash receipt server of the National Tax Service.

통신부(140)는 유무선 통신을 수행할 수 있다.The communication unit 140 may perform wired/wireless communication.

이러한 통신부(140)는 캔 통신, 와이파이 통신, 블루투스 통신, USB 통신을 포함할 수 있다.The communication unit 140 may include CAN communication, Wi-Fi communication, Bluetooth communication, and USB communication.

통신부(140)는 와이브로(Wireless broadband), GSM(global System for Mobile Communication), CDMA(Code Division Multiple Access), WCDMA(Wideband Code Division Multiple Access), UMTS(universal mobile telecommunications system), TDMA(Time Division Multiple Access), LTE(Long Term Evolution) 등 다양한 무선 통신을 포함할 수 있다.The communication unit 140 includes WiBro (Wireless broadband), Global System for Mobile Communication (GSM), Code Division Multiple Access (CDMA), Wideband Code Division Multiple Access (WCDMA), universal mobile telecommunications system (UMTS), Time Division Multiple (TDMA) Access), and may include various wireless communications such as Long Term Evolution (LTE).

사운드 입력부(150)는 사용자의 음성을 입력받고 입력된 음성에 대응하는 음성 정보를 제어부(160)에 전송한다.The sound input unit 150 receives a user's voice and transmits voice information corresponding to the inputted voice to the controller 160 .

사운드 입력부(150)는 하나의 마이크로 폰 또는 두 개 이상의 마이크로 폰을 포함한다. 여기서, 하나의 마이크로 폰은 지향성일 수 있다. 그리고 두 개 이상의 마이크로 폰은 마이크로 폰 어레이로 구현될 수 있다.The sound input unit 150 includes one microphone or two or more microphones. Here, one microphone may be directional. And two or more microphones may be implemented as a microphone array.

좀 더 구체적으로, 사운드 입력부(150)는 사운드를 수집하고 수집된 사운드의 음파를 검출하고, 이 음파에 대응하는 전기 신호를 발생시키고 발생된 전기 신호를 제어부(160)에 전송한다. More specifically, the sound input unit 150 collects sound, detects a sound wave of the collected sound, generates an electric signal corresponding to the sound wave, and transmits the generated electric signal to the controller 160 .

즉 사운드 입력부(150)는 수집된 사운드에 대응하는 전기 신호를 제어부(160)에 전송한다. 여기서 전기 신호는 음성 신호일 수 있다.That is, the sound input unit 150 transmits an electrical signal corresponding to the collected sound to the control unit 160 . Here, the electrical signal may be a voice signal.

그리고 음성 신호에는 음성 정보가 포함될 수 있다.And the voice signal may include voice information.

제어부(160)는 입력부(129a)에서 입력된 입력 정보에 기초하여 복수 개의 기능의 동작을 제어한다.The controller 160 controls operations of a plurality of functions based on input information input from the input unit 129a.

제어부(160)는 음성 인식 기능 및 내비게이션 기능을 제어할 수 있다.The controller 160 may control a voice recognition function and a navigation function.

이러한 제어부(160)는 내비게이션 기능 수행 시 입력부(129a)에 입력된 최종 목적지의 정보를 확인하고, 현재 위치의 정보, 목적지의 정보 및 지도 정보에 기초하여 현재 위치에서 목적지까지의 경로를 생성하고, 지도 정보 및 경로의 정보에 기초하여 내비게이션 정보를 생성하고, 생성된 내비게이션 정보의 영상 정보 및 사운드 정보의 출력을 제어한다.The controller 160 checks the final destination information input to the input unit 129a when performing the navigation function, and generates a route from the current location to the destination based on the current location information, the destination information, and the map information, It generates navigation information based on map information and route information, and controls output of image information and sound information of the generated navigation information.

제어부(160)는 사운드 입력부(150)에 입력된 사운드 신호(즉, 음성 신호)의 주파수 특성을 프레임 별로 계산하여 음성 신호에 포함된 특징 벡터를 추출하고 추출된 특징 벡터의 벡터열을 미리 저장된 음향모델 및 음소 모델과 비교하여 음성 신호 내 음소를 인식하며 인식된 음소에 대해 음소 기준의 음성 인식을 수행하여 음소 격자를 형성하고 형성된 음소 격자와 인덱싱 DB에 저장된 인덱싱 정보에 기초하여 사용자가 발화한 음성에 대응하는 문자를 인식한다.The control unit 160 calculates the frequency characteristics of the sound signal (that is, the voice signal) input to the sound input unit 150 for each frame, extracts a feature vector included in the voice signal, and stores the vector sequence of the extracted feature vector in advance. The phoneme in the speech signal is recognized by comparison with the model and phoneme model, the phoneme-based speech recognition is performed on the recognized phoneme to form a phoneme grid, and the user's speech is based on the formed phoneme grid and indexing information stored in the indexing DB Recognizes the corresponding character.

제어부(160)는 사운드 입력부(150)에 입력된 음성 신호의 주파수 특성을 프레임 별로 계산하여 음성 신호에 포함된 특징 벡터를 추출하고 추출된 특징 벡터의 벡터열을 미리 저장된 음향모델 및 음소 모델과 비교하여 음성 신호 내 음소를 인식하며 인식된 음소와 단어 모델을 이용하여 사용자가 발화한 음성에 대응하는 단어를 인식하는 것도 가능하다. The controller 160 calculates the frequency characteristics of the voice signal input to the sound input unit 150 for each frame, extracts a feature vector included in the voice signal, and compares the vector sequence of the extracted feature vector with a previously stored acoustic model and phoneme model. Thus, it is possible to recognize a phoneme in a voice signal, and to recognize a word corresponding to the voice uttered by the user using the recognized phoneme and word model.

제어부(160)는 인식된 문자에 기초하여 사용자 발화에 대응하는 주제를 인식하고, 인식된 주제에 기초하여 태스크를 인식하며, 인식된 태스크에 대응하는 카테고리를 인식하고, 인식된 카테고리 및 현재 위치에 기초하여 사용자에게 추천할 적어도 하나의 추천 목적지를 검색하고 검색된 적어도 하나의 추천 목적지의 정보의 출력을 제어한다. The controller 160 recognizes a subject corresponding to the user's utterance based on the recognized character, recognizes a task based on the recognized subject, recognizes a category corresponding to the recognized task, and locates the recognized category and current location. Based on the search for at least one recommended destination to be recommended to the user, an output of information on the searched at least one recommended destination is controlled.

제어부(160)는 위치 수신부(130)에서 수신된 현재 위치의 정보에 기초하여 관심 지점(POI: Position of Interest)을 검색한다. 여기서 관심 지점은 도로 주변 건물의 위치의 정보를 포함할 수 있다.The control unit 160 searches for a position of interest (POI) based on the current position information received from the position receiving unit 130 . Here, the point of interest may include information on the location of a building near a road.

즉 제어부(160)는 관심 지점을 중심으로 지도 상의 각 지역 정보를 수집하여 위치 기반 서비스가 목표로 하는 다양한 정보를 확인하고, 확인된 다양한 정보 내에서 인식된 카테고리에 대응하는 추천 목적지를 검색한다.That is, the controller 160 collects information on each region on the map with a focus on the point of interest, checks various information targeted by the location-based service, and searches for a recommended destination corresponding to the recognized category from within the identified various information.

제어부(160)는 주행 중 현재 위치와 추천 목적지의 위치를 비교하여 차량이 추천 목적지를 지나쳤는지 판단하고, 추천 목적지를 지나쳤다고 판단되면 현재 위치를 기준으로 관심 지점을 검색하고, 검색된 관심 지점과 인식된 카테고리에 기초하여 추천 목적지를 다시 검색한다.The controller 160 compares the current location with the location of the recommended destination while driving to determine whether the vehicle has passed the recommended destination, and if it is determined that the vehicle has passed the recommended destination, searches for a point of interest based on the current location, and recognizes the searched point of interest The recommended destination is searched again based on the selected category.

즉 제어부(160)는 경로 이탈로 판단되면 현재 위치와 인식된 카테고리에 기초하여 추천 목적지를 다시 검색한다.That is, if it is determined that the route is deviated, the controller 160 searches for the recommended destination again based on the current location and the recognized category.

제어부(160)는 서버(200) 또는 단말기(300)로부터 결제 정보를 수신하고, 수신된 결제 정보와 추천 목적지의 정보에 기초하여 차량이 추천 목적지에서 태스크를 이행했는지 판단할 수 있다. The controller 160 may receive payment information from the server 200 or the terminal 300 and determine whether the vehicle has performed a task at the recommended destination based on the received payment information and information on the recommended destination.

제어부(160)는 주기적으로 서버(200) 또는 단말기(300)로부터 결제 정보가 수신되었는지 확인할 수 있다.The control unit 160 may periodically check whether payment information is received from the server 200 or the terminal 300 .

제어부(160)는 시동이 오프되면 현재 위치와 추천 목적지의 위치를 비교하여 차량이 추천 목적지에 도착하였는지 판단하는 것도 가능하다.When the engine is turned off, the controller 160 may compare the current location with the location of the recommended destination to determine whether the vehicle has arrived at the recommended destination.

제어부(160)는 시동이 온되면 미리 저장된 추천 목적지가 존재하는지 판단하고, 미리 저장된 추천 목적지가 존재하면 추천 목적지까지 경로를 생성하고, 생성된 경로의 출력을 제어하며, 미리 저장된 추천 목적지가 없다고 판단되면 사용자에 의해 입력된 목적지까지 경로를 생성하고 생성된 경로의 출력을 제어한다.When the engine is turned on, the controller 160 determines whether a pre-stored recommended destination exists, generates a route to the recommended destination if there is a pre-stored recommended destination, controls the output of the generated route, and determines that there is no pre-stored recommended destination It creates a route to the destination entered by the user and controls the output of the generated route.

제어부(160)는 추천 목적지의 선택 여부를 질의하는 메시지의 출력을 제어하고, 추천 목적지에 대한 선택 명령이 입력되지 않으면 추후 추천 목적지의 방문 여부를 질의하는 메시지의 출력을 제어하며, 사용자에 의해 추후 추천 목적지의 방문 선택 명령이 입력되면 추천 목적지의 정보를 저장하며, 추천 목적지의 선택 명령이 입력되면 현재 위치부터 추천 목적지까지의 경로를 생성하고 생성된 경로의 출력을 제어한다.The controller 160 controls output of a message inquiring whether to select a recommended destination, and controls output of a message inquiring whether to visit a recommended destination later when a selection command for a recommended destination is not input. When a visit selection command of a recommended destination is input, information of the recommended destination is stored, and when a selection command of a recommended destination is input, a route from the current location to the recommended destination is generated and the output of the generated route is controlled.

제어부(160)는 추천 목적지에 대한 선택 명령이 입력되지 않으면 입력부 또는 사운드 입력부를 통해 추천 목적지의 방문 날짜 및 시간을 수신하고, 수신된 방문 날짜 및 시간에 기초하여 추천 목적지까지의 경로를 생생하고 생성된 경로의 출력을 제어하는 것도 가능하다. If a selection command for the recommended destination is not input, the controller 160 receives the visit date and time of the recommended destination through the input unit or the sound input unit, and generates and generates a route to the recommended destination based on the received visit date and time. It is also possible to control the output of the specified path.

즉 제어부(160)는 방문 날짜 및 시간이 되었을 때의 차량의 위치가 추천 목적지가 검색되었을 때의 차량의 위치와 동일하면 추천 목적지까지의 경로를 생성하며, 두 위치가 상이하면 인식된 카테고리와 차량의 현재 위치에 기초하여 추천 목적지를 다시 검색할 수 있다.That is, the controller 160 generates a route to the recommended destination if the location of the vehicle at the time of the visit date and time is the same as the location of the vehicle when the recommended destination is searched. If the two locations are different, the recognized category and vehicle The recommended destination may be searched again based on the current location of .

제어부(160)는 한 명의 사용자에 의해 발화된 음성의 정보에 기초하여 추천 목적지를 검색하는 것도 가능하고, 두 명 이상의 사용자에 의해 발화된 음성의 정보에 기초하여 추천 목적지를 검색하는 것도 가능하다.The controller 160 may search for a recommended destination based on information on voices uttered by one user, or search for a recommended destination based on information on voices uttered by two or more users.

제어부(160)는 두 명 이상의 사용자가 발화하는 경우, 사운드 입력부에 입력된 음성들 중 미리 등록된 음성과 일치하는 음성만을 인식하여 추천 목적지를 검색하는 것도 가능하다.When two or more users speak, the controller 160 may search for a recommended destination by recognizing only a voice matching a pre-registered voice among voices input to the sound input unit.

제어부(160)는 시동이 온되었을 때 미리 저장된 추천 목적지가 존재하고 사용자에 의해 최종 목적지가 입력되었다고 판단되면, 추천 목적지를 경유지로 설정하고, 현재 위치부터 경유지를 거쳐 최종 목적지까지 도달하는 경로를 생성하고, 생성된 경로의 출력을 제어하는 것도 가능하다.If the controller 160 determines that there is a pre-stored recommended destination when the engine is turned on and that the final destination is input by the user, the controller 160 sets the recommended destination as a waypoint, and creates a route from the current location to the final destination through the waypoint and it is also possible to control the output of the generated path.

이러한 제어부(160)의 상세 구성을 도 4를 참조하여 설명한다.A detailed configuration of the control unit 160 will be described with reference to FIG. 4 .

제어부(160)는 인덱싱부(161), 주제 인식부(162), 카테고리 인식부(163), 추천 목적지 검색부(164), 태스크 이행 판단부(165) 및 출력부(166)를 포함한다.The control unit 160 includes an indexing unit 161 , a subject recognition unit 162 , a category recognition unit 163 , a recommended destination search unit 164 , a task performance determination unit 165 , and an output unit 166 .

인덱싱부(161)는 음성 정보를 수신하고 수신된 음성 정보에 대해 음소 기준의 음성 인식을 수행하여 음소 격자를 형성한다.The indexing unit 161 receives voice information and performs phoneme-based voice recognition on the received voice information to form a phoneme grid.

주제 인식부(162)는 형성된 음소 격자와 인덱싱 데이터베이스(DB)의 인덱싱 정보 내 음소 격자를 비교하여 사용자가 발화한 음성에 대응하는 문자를 인식하고 인식된 문자에 기초하여 사용자가 발화한 음성에 대응하는 주제를 인식한다.The subject recognition unit 162 compares the formed phoneme grid with the phoneme grid in the indexing information of the indexing database (DB) to recognize a character corresponding to the voice uttered by the user, and corresponds to the voice uttered by the user based on the recognized character recognize the topic

예를 들어, 주제 인식부(162)는 무엇을 사야 해, 무엇이 필요 해 등에서의 무엇에 대응하는 물품명의 단어와, 사다 및 필요하다 등의 동사의 단어를 인식함으로써 물품을 구매 주제임을 인식할 수 있다.For example, the subject recognition unit 162 may recognize that the item is a subject to purchase by recognizing words of the item name corresponding to what in what to buy, what to need, and the like, and verbs such as buy and need. have.

또한 주제 인식부(162)는 어디에 가야 해, 어디로 오래, 무엇을 해야 해, 무엇이 안돼, 무엇이 고장이야, 무엇이 망가졌어 등에서의 어디에 대응하는 장소명의 단어와, 무엇에 대응하는 수리가 필요한 물품명의 단어와, 가다, 하다, 안 된다, 고장이다, 망가지다 등의 동사의 단어를 인식함으로써 특정 장소를 방문해야 하는 장소 방문 주제임을 인식할 수 있다.In addition, the subject recognition unit 162 includes a word for a place name corresponding to where to go, where to go, what to do, what to do, what is wrong, what is broken, what is broken, etc. By recognizing the words of verbs such as come, go, had, can't, is broken, and broken, it is possible to recognize that a specific place is a subject to visit.

주제 인식부(162)는 인식된 주제와 태스크 데이터베이스에 저장된 태스크에 기초하여 사용자가 발화한 음성에 대응하는 태스크를 인식하고 인식된 태스크를 출력한다.The subject recognition unit 162 recognizes a task corresponding to the voice uttered by the user based on the recognized subject and the task stored in the task database, and outputs the recognized task.

여기서 태스크는, 구매해야 할 물품명, 이동해야 할 장소명, 수리해야 할 물품명을 포함할 수 있다.Here, the task may include a name of an item to be purchased, a name of a place to be moved, and a name of an item to be repaired.

카테고리 인식부(163)는 카테고리 데이터베이스에 기초하여 인식된 태스크에 대응하는 카테고리를 인식한다.The category recognition unit 163 recognizes a category corresponding to the recognized task based on the category database.

카테고리 인식부(163)는 복수 개의 태스크를 카테고리 별로 각각 구분함으로써 태스크를 카테고리별로 그룹핑할 수 있다.The category recognition unit 163 may group the tasks by category by classifying each of the plurality of tasks by category.

예를 들어, 카테고리 인식부(163)는 복수 개의 태스크가 사과, 귤, 배, 화장지, 칫솔의 구매이면, 사과, 귤, 배를 과일 카테고리로 그룹핑하고, 화장지와 칫솔을 위생용품의 카테고리로 그룹핑한다.For example, if the plurality of tasks are the purchase of apples, tangerines, pears, toilet paper, and toothbrushes, the category recognition unit 163 groups apples, tangerines, and pears into fruit categories, and groups toilet paper and toothbrushes into categories of hygiene products. do.

추천 목적지 검색부(164)는 위치 수신부에서 수신된 현재 위치에 기초하여 관심 지점을 검색하고 검색된 관심 지점과 인식된 카테고리에 기초하여 사용자에게 추천할 적어도 하나의 추천 목적지를 검색하고 검색된 추천 목적지의 출력을 제어한다.The recommended destination search unit 164 searches for a point of interest based on the current location received from the location receiver, searches for at least one recommended destination to be recommended to the user based on the searched point of interest and the recognized category, and outputs the searched recommended destination. to control

여기서 추천 목적지는 복수 개의 태스크를 최소한의 장소에서 이행할 수 있는 곳일 수 있다. 예를 들어, 태스크가 사과, 배, 화장지를 구매해야 하는 것이면, 현재 위치를 기준으로 일정 거리 내에 존재하는 과일가게, 슈퍼마켓, 마트 등을 추천 목적지로 검색하고, 세 가지를 모두 살 수 있는 마트를 추천 목적지로 결정하되, 검색된 마트 중 현재 위치에서 가장 가까운 마트를 추천 목적지로 결정하고 결정된 마트를 추천 목적지로 출력할 수 있다. Here, the recommended destination may be a place capable of performing a plurality of tasks in a minimum place. For example, if the task is to purchase apples, pears, or toilet paper, search for fruit stores, supermarkets, and marts within a certain distance from the current location as recommended destinations, and select a mart where you can buy all three. It is determined as the recommended destination, but among the searched marts, a mart closest to the current location may be determined as the recommended destination, and the determined mart may be output as the recommended destination.

추천 목적지 검색부(164)는 태스크 이행 여부를 확인하고, 태스크가 이행되지 않았다고 판단되면 위치 수신부에 수신된 현재 위치와 추천 목적지의 정보에 기초하여 새로운 추천 목적지를 검색하고 검색된 추천 목적지를 출력한다.The recommended destination search unit 164 checks whether the task is performed, and if it is determined that the task is not performed, searches for a new recommended destination based on the information of the current location and the recommended destination received from the location receiving unit and outputs the searched recommended destination.

즉 추천 목적지 검색부(164)는 사용자가 태스크를 이행하지 않았다고 판단되면 현재 위치에 기초하여 관심 지점을 검색하고 검색된 관심 지점과 인식된 카테고리에 기초하여 사용자에게 새롭게 추천할 적어도 하나의 추천 목적지를 검색하고 검색된 새로운 추천 목적지의 출력을 제어하며 사용자가 태스크를 이행하였다고 판단되면 사용자에게 새로운 목적지의 입력을 요청한다.That is, when it is determined that the user has not performed the task, the recommended destination search unit 164 searches for a point of interest based on the current location and searches for at least one recommended destination to be newly recommended to the user based on the searched point of interest and the recognized category. and controls the output of the searched new recommended destination, and requests the user to input a new destination when it is determined that the user has performed the task.

추천 목적지 검색부(164)는 복수 개의 추천 목적지가 검색되었을 때 사용자에 의해 입력 정보가 입력되면 복수 개의 추천 목적지 중 입력 정보에 대응하는 어느 하나의 추천 목적지를 확인하고 확인된 추천 목적지의 정보를 사용자 인터페이스(129)에 출력하는 것도 가능하다. When input information is input by the user when a plurality of recommended destinations are searched for, the recommended destination search unit 164 checks any one recommended destination corresponding to the input information among a plurality of recommended destinations, and returns information of the confirmed recommended destination to the user. It is also possible to output to the interface 129 .

태스크 이행 판단부(165)는 위치 수신부에서 수신된 현재 위치와 추천 목적지의 위치에 기초하여 사용자의 태스크 이행 여부를 판단하고, 태스크 이행 여부에 대한 정보를 추천 목적지 검색부(164)에 출력한다. The task fulfillment determining unit 165 determines whether the user has performed the task based on the current location received from the location receiving unit and the location of the recommended destination, and outputs information on whether the task is performed to the recommended destination searcher 164 .

태스크 이행 판단부(165)는 서버 또는 단말기로부터 결제 정보를 수신하고, 수신된 결제 정보와 최종 목적지의 정보에 기초하여 사용자의 태스크 이행 여부를 판단한다.The task performance determination unit 165 receives payment information from the server or terminal, and determines whether the user performs the task based on the received payment information and the final destination information.

예를 들어, 태스크 이행 판단부(165)는 차량의 주정차 상태에서의 현재 위치에 대응하는 주소와 목적지의 주소가 동일하면 태스크를 이행하였다고 판단하고, 결제 정보 중 상호가 추천 목적지의 상호와 동일하면 태스크를 이행하였다고 판단한다.For example, the task fulfillment determining unit 165 determines that the task has been performed if the address corresponding to the current location in the parking/stop state of the vehicle and the address of the destination are the same, and if the name of the payment information is the same as the name of the recommended destination It is judged that the task has been completed.

여기서 결제 정보는 카드 결제에 대한 정보를 포함할 수 있고, 현금 결제에 대한 정보를 포함할 수 있다.Here, the payment information may include information on card payment and may include information on cash payment.

태스크 이행 판단부(165)는 주기적으로 사용자의 태스크 이행 여부를 판단할 수 있다.The task fulfillment determining unit 165 may periodically determine whether the user has performed the task.

출력부(166)는 적어도 하나의 추천 목적지의 정보를 사용자 인터페이스(129)에 출력한다.The output unit 166 outputs information on at least one recommended destination to the user interface 129 .

여기서 추천 목적지의 정보는, 주소, 상호, 전화번호 등을 포함할 수 있다.Here, the information of the recommended destination may include an address, a business name, a phone number, and the like.

저장부(170)는 지도 정보를 저장하고, 사용자에 의해 입력된 최종 목적지의 정보를 저장하며, 제어부에 의해 생성된 적어도 하나의 추천 목적지의 정보를 저장하고, 음악 정보, 콘텐츠 정보 등을 더 저장할 수 있다.The storage unit 170 stores map information, stores information on a final destination input by a user, stores information on at least one recommended destination generated by the controller, and further stores music information, content information, and the like. can

저장부(170)는 음성 인식 및 추천 목적지의 검색에 필요한 각종 정보를 저장하는 복수 개의 데이터베이스를 포함할 수 있다. The storage unit 170 may include a plurality of databases for storing various types of information required for voice recognition and search for a recommended destination.

복수 개의 데이터베이스는 인덱싱 데이터베이스(DB)(171), 주제 데이터베이스(DB)(172), 태스크 데이터베이스(DB)(173) 및 카테고리 데이터베이스(DB)(174)를 포함한다. The plurality of databases include an indexing database (DB) 171 , a subject database (DB) 172 , a task database (DB) 173 , and a category database (DB) 174 .

이러한 복수 개의 데이터베이스의 예를 도5를 참조하여 설명한다.An example of such a plurality of databases will be described with reference to FIG. 5 .

인덱싱 데이터베이스(DB)(171)는 인덱싱 정보를 저장한다. The indexing database (DB) 171 stores indexing information.

인덱싱 정보는 음성 구간 시간 제한 단위로 생성되는 음소 격자를 포함하는 분할된 인덱싱 정보이다. The indexing information is segmented indexing information including a phoneme lattice generated in units of time-limited speech sections.

이러한 인덱싱 정보에는 프레임 개수, 음소 개수, 특징 벡터, 음소의 상태별 관측 확률값, 타임 스탬프(time stamp), 음소열, 각 음소의 지속 시간 등이 포함된다. 여기서, 각 음소의 지속 시간은 음성 신호에서의 지속 시간으로, 예를 들어 음성 신호에서의 시작 위치와 끝 위치 및 시작 위치와 끝 위치를 통해 산출되는 지속 시간일 수 있다.The indexing information includes the number of frames, the number of phonemes, a feature vector, an observation probability value for each phoneme state, a time stamp, a phoneme sequence, and the duration of each phoneme. Here, the duration of each phoneme is a duration in a voice signal, and may be, for example, a duration calculated through a start position and an end position and a start position and an end position in the voice signal.

주제 데이터베이스(DB)(172)는 단어 별로 대응되는 주제 정보를 저장한다.The subject database (DB) 172 stores subject information corresponding to each word.

도 5의 (a)에 도시된 바와 같이, 주제 데이터베이스(DB)(172)는 물품의 구매가 필요한 물품의 구매 주제와 관련된 단어와, 특정 장소의 방문이 필요한 장소의 방문 주제와 관련된 단어 등의 주제 정보를 저장한다.As shown in (a) of FIG. 5 , the subject database (DB) 172 includes words related to the purchase topic of the product requiring the purchase of the product, words related to the visit topic of the place requiring a visit to a specific place, and the like. Store topic information.

예를 들어, 물품의 구매 주제와 관련된 단어는 물품명과, 사다 및 필요하다 등의 동사의 단어를 포함할 수 있고, 장소의 방문 주제와 관련된 단어는 장소명과, 수리가 필요한 물품명과, 가다, 하다, 안 된다, 고장이다, 망가지다, 보다 등의 동사의 단어를 포함할 수 있다.For example, the word related to the purchase topic of the product may include the name of the product and words of verbs such as buy and need, and the word related to the topic of visiting the place includes the name of the place, the name of the item in need of repair, go, go It can contain verb words such as , no, broken, broken, and more.

태스크 데이터베이스(DB)(173)는 주제별로 주체가 되는 대상의 이름 등의 태스크 정보를 저장한다. 예를 들어, 태스크 데이터베이스(DB)(173)는 구매해야 할 물품의 이름과, 방문해야 할 장소의 이름 등을 태스크 정보로 저장할 수 있다.The task database (DB) 173 stores task information such as the name of a subject that is a subject for each subject. For example, the task database (DB) 173 may store names of goods to be purchased, names of places to be visited, and the like as task information.

도 5의 (b)에 도시된 바와 같이, 구매해야 할 물품의 이름을 태스크 정보로 저장하는 태스크 데이터베이스는, 물품의 이름으로 사과, 치약, 라면, 화장지, 귤 및 그 외 다양한 물품의 이름 등의 정보를 저장할 수 있다.As shown in (b) of Figure 5, the task database for storing the name of the item to be purchased as task information, the name of the item, such as apple, toothpaste, ramen, toilet paper, mandarin orange and other various items names. information can be stored.

도 5의 (c)에 도시된 바와 같이, 방문해야 할 장소의 이름을 태스크 정보로 저장하는 태스크 데이터 베이스는, 병원A, 병원B, 동사무소 A, 야구장, 정비소A 및 그 외 다양한 장소의 이름 등을 태스크 정보로 저장할 수 있다.As shown in (c) of Figure 5, the task database for storing the name of the place to be visited as task information, the name of hospital A, hospital B, office A, baseball field, repair shop A and other various places, etc. can be saved as task information.

카테고리 데이터베이스(DB)(174)는 복수 개의 카테고리의 정보를 저장한다.The category database (DB) 174 stores information of a plurality of categories.

즉 카테고리 데이터베이스(DB)(174)의 복수 개의 카테고리는, 유사한 물품 및 동일한 의미를 나타내는 물품을 동일 카테고리로 저장하고, 유사한 장소 및 동일한 의미를 나타내는 장소를 동일 카테고리로 저장한다.That is, in the plurality of categories of the category database (DB) 174, similar items and items having the same meaning are stored as the same category, and similar places and places having the same meaning are stored as the same category.

도 5의 (d)에 도시된 바와 같이, 카테고리 데이터베이스(DB)(174)는 과일, 야채, 가공식품, 제과, 어패류, 육류, 위생용품 및 그 외 다양한 물품의 카테고리를 저장하고, 병원, 동사무소, 세무서, 공원, 정비소 및 그 외 다양한 장소의 카테고리를 저장한다.As shown in (d) of Figure 5, the category database (DB) 174 stores the categories of fruits, vegetables, processed foods, confectionery, seafood, meat, hygiene products and other various items, hospitals, district offices , tax offices, parks, garages and many more.

예를 들어, 카테고리 데이터베이스(DB)(174)는 사과, 배, 귤을 과일 카테고리로 저장하고, 파, 마늘, 양파를 야채 카테고리로 저장하며, 병원A, B, C, D를 병원 카테고리로 저장하고, 동사무소A, B, C, D를 동사무소 카테고리로 저장할 수 있다.For example, the category database (DB) 174 stores apples, pears, and tangerines as fruit categories, green onions, garlic, and onions as vegetable categories, and hospitals A, B, C, and D as hospital categories. And, you can save district offices A, B, C, and D as a district office category.

이러한 저장부(170)는 캐쉬, ROM(Read Only Memory), PROM(Programmable ROM), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM) 및 플래쉬 메모리(Flash memory)와 같은 비휘발성 메모리 소자 또는 RAM(Random Access Memory)과 같은 휘발성 메모리 소자 또는 하드디스크 드라이브(HDD, Hard Disk Drive), CD-ROM과 같은 저장 매체 중 적어도 하나로 구현될 수 있으나 이에 한정되지는 않는다. The storage unit 170 may include a nonvolatile memory device such as a cache, a read only memory (ROM), a programmable ROM (PROM), an erasable programmable ROM (EPROM), an electrically erasable programmable ROM (EEPROM), and a flash memory, or It may be implemented as at least one of a volatile memory device such as a random access memory (RAM), a hard disk drive (HDD), or a storage medium such as a CD-ROM, but is not limited thereto.

저장부(170)는 제어부(160)와 관련하여 전술한 프로세서와 별개의 칩으로 구현된 메모리일 수 있고, 프로세서와 단일 칩으로 구현될 수도 있다. The storage unit 170 may be a memory implemented as a chip separate from the processor described above with respect to the controller 160 , or may be implemented as a single chip with the processor.

사운드 출력부(180)는 내비게이션 정보의 사운드 정보를 출력하되, 수신된 사운드 정보 내 사운드 신호를 일정 크기만큼 증폭시켜 출력한다.The sound output unit 180 outputs sound information of navigation information, but amplifies and outputs a sound signal in the received sound information by a predetermined size.

즉 사운드 출력부(180)는 내비게이션 기능 수행 시 경로 및 주행 정보를 사운드로 출력하고, 콘텐츠나 외부 방송의 사운드 정보를 출력하거나, 사용자에 의해 선택된 음악, 라디오 등의 사운드 정보를 출력하는 것도 가능하다.That is, the sound output unit 180 may output route and driving information as sound when performing a navigation function, output sound information of content or external broadcast, or output sound information such as music or radio selected by a user. .

사운드 출력부(180)는 내비게이션 기능 수행 시 경로 및 주행 정보를 사운드로 출력하고, 사용자에 의해 선택된 음악, 영상의 사운드 등을 출력하는 것도 가능하다.The sound output unit 180 may output route and driving information as sound when performing a navigation function, and may output music selected by a user, sound of an image, and the like.

사운드 출력부(180)는 적어도 하나의 추천 목적지를 출력하거나, 사용자에 의해 선택된 추천 목적지까지의 경로를 사운드로 출력하거나, 추천 목적지의 선택 여부를 질의하는 사운드를 출력하는 것도 가능하다.The sound output unit 180 may output at least one recommended destination, output a route to the recommended destination selected by the user as sound, or output a sound for querying whether a recommended destination is selected.

사운드 출력부(180)는 전화 통화 모드일 때 통화 상대자의 음성을 출력하는 것도 가능하다.The sound output unit 180 may output the voice of the call party in the phone call mode.

사운드 출력부(180)는 스피커로, 차량의 내부 전방 및 후방에 위치 가능하다.The sound output unit 180 is a speaker, and may be located at the front and rear of the vehicle.

사운드 출력부(180)는 음성 인식 시 음성 안내 정보 및 비프음을 출력하는 것도 가능하다.The sound output unit 180 may output voice guidance information and a beep sound during voice recognition.

도 6은 일 실시 예에 따른 차량의 제어 구성도로, 도 7 내지 도 12를 참조하여 설명한다.6 is a diagram illustrating a control configuration of a vehicle according to an exemplary embodiment, which will be described with reference to FIGS. 7 to 12 .

차량은 시동이 온(401)되면 각종 전자 장치에 전력을 공급한다.The vehicle supplies power to various electronic devices when the ignition is turned on ( 401 ).

즉 차량은 음성 인식 기능 및 내비게이션 기능을 수행하기 위한 사운드 입력부, 제어부, 사운드 출력부, 사용자인터페이스 등의 동작을 활성화시킨다. That is, the vehicle activates operations such as a sound input unit, a control unit, a sound output unit, and a user interface for performing a voice recognition function and a navigation function.

차량은 사운드 입력부를 통해 차량에 탑승한 탑승자의 발화에 의한 사운드를 입력(402)받는다. The vehicle receives (402) a sound generated by the utterance of an occupant in the vehicle through the sound input unit.

차량은 수집된 사운드의 음파를 검출하고, 이 음파에 대응하는 전기 신호를 발생시키고 발생된 전기 신호의 주파수 특성을 프레임 별로 계산하여 음성 신호에 포함된 특징 벡터를 추출하고 추출된 특징 벡터의 벡터열을 미리 저장된 음향모델 및 음소 모델과 비교하여 전기 신호 내 음소를 인식한다.The vehicle detects a sound wave of the collected sound, generates an electric signal corresponding to the sound wave, calculates the frequency characteristic of the generated electric signal for each frame, extracts a feature vector included in the voice signal, and extracts a vector sequence of the extracted feature vector is compared with the pre-stored acoustic model and phoneme model to recognize the phoneme in the electrical signal.

차량은 인식된 음소에 대해 음소 기준의 음성 인식을 수행하여 음소 격자를 형성하고 형성된 음소 격자와 인덱싱 데이터베이스(171)에 저장된 인덱싱 정보에 기초하여 사용자가 발화한 음성에 대응하는 문자를 인식한다.The vehicle forms a phoneme grid by performing phoneme-based speech recognition on the recognized phonemes, and recognizes a character corresponding to the voice uttered by the user based on the formed phoneme grid and indexing information stored in the indexing database 171 .

차량은 인식된 문자와 주제 데이터베이스(172)에 저장된 주제 정보에 기초하여 사용자가 발화한 음성에 대응하는 주제를 인식(403)한다.The vehicle recognizes (403) a subject corresponding to the voice uttered by the user based on the recognized text and subject information stored in the subject database (172).

예를 들어, 차량은 무엇을 사야 해, 무엇이 필요 해 등에서의 무엇에 대응하는 물품명의 단어와, 사다 및 필요하다 등의 동사의 단어를 인식함으로써 물품을 구매 주제임을 인식할 수 있다.For example, a vehicle may recognize that a product is a purchase subject by recognizing words in the product name corresponding to what in what to buy, what is needed, and the like, and words of verbs such as buy and need.

또한 차량은 어디에 가야 해, 어디로 오래, 무엇을 해야 해, 무엇이 안돼, 무엇이 고장이야, 무엇이 망가졌어 등에서의 어디에 대응하는 장소명의 단어와, 무엇에 대응하는 수리가 필요한 물품명의 단어와, 가다, 하다, 안 된다, 고장이다, 망가지다 등의 동사의 단어를 인식함으로써 특정 장소를 방문해야 하는 장소 방문 주제임을 인식할 수 있다.Also, where the vehicle should go, where for a long time, what to do, what is not working, what is broken, what is broken, etc., with the word of the place name corresponding to where, and the word of the item requiring repair corresponding to what, go, do By recognizing the words of verbs such as , no, broken, broken, etc., it is possible to recognize that it is a subject of a visit to a specific place.

차량은 인식된 주제와 태스크 데이터베이스에 저장된 태스크 정보에 기초하여 태스크를 인식(404)하며, 카테고리 데이터베이스에 저장된 카테고리 정보에 기초하여 인식된 태스크에 대응하는 카테고리를 인식(405)한다.The vehicle recognizes ( 404 ) the task based on the recognized subject and task information stored in the task database, and recognizes ( 405 ) a category corresponding to the recognized task based on the category information stored in the category database.

좀 더 구체적으로, 차량은 복수 개의 태스크를 카테고리별로 각각 구분함으로써 태스크를 그룹핑할 수 있다.More specifically, the vehicle may group tasks by dividing each task into categories.

예를 들어, 차량은 복수 개의 태스크가 사과, 귤, 배, 화장지, 칫솔의 구매이면, 사과, 귤, 배를 과일 카테고리로 그룹핑하고, 화장지와 칫솔을 위생용품의 카테고리로 그룹핑한다.For example, if the plurality of tasks are the purchase of apples, tangerines, pears, toilet paper, and toothbrushes, the vehicle groups apples, tangerines, and pears into a fruit category, and groups toilet paper and toothbrushes into a hygiene product category.

차량은 위치 수신부(130)에서 수신된 현재 위치를 확인하고, 확인된 현재 위치의 위치 정보에 기초하여 관심 지점(POI: Position of Interest)을 검색(406)한다. 여기서 관심 지점은 도로 주변 건물의 위치의 정보를 포함할 수 있다.The vehicle checks the current location received from the location receiver 130 and searches ( 406 ) a position of interest (POI) based on the confirmed location information of the current location. Here, the point of interest may include information on the location of a building near a road.

차량은 인식된 카테고리 및 현재 위치에 기초하여 사용자에게 추천할 추천 목적지들을 검색(407)하고 검색된 추천 목적지들 중에서 적어도 하나의 추천 목적지의 정보를 사용자 인터페이스(129)를 통해 출력(408)한다. The vehicle searches for recommended destinations to be recommended to the user based on the recognized category and current location ( 407 ), and outputs ( 408 ) information on at least one recommended destination among the searched recommended destinations through the user interface 129 .

예를 들어, 차량은 태스크가 복수 개이고, 추천 목적지가 복수 개 검색되었을 때 복수 개의 추천 목적지 중 복수 개의 태스크를 하나의 장소 또는 최소한의 장소에서 이행할 수 있도록 하는 적어도 하나의 장소를 추천 목적지로 사용자 인터페이스(129)를 통해 출력할 수 있다.For example, when a vehicle has a plurality of tasks and a plurality of recommended destinations are searched for, at least one place that enables a plurality of tasks among the plurality of recommended destinations to be performed in one place or at least one place as the recommended destination is selected by the user as the recommended destination. It may output through the interface 129 .

차량은 입력부에 입력된 입력 정보를 확인(409)하고, 입력 정보가 추천 목적지의 선택 정보이면 현재 위치부터 추천 목적지까지의 경로를 생성하고, 생성된 경로로 안내를 수행(410)한다.The vehicle checks the input information input to the input unit ( 409 ), and if the input information is selection information of the recommended destination, generates a route from the current location to the recommended destination, and guides the generated route ( 410 ).

도 7에 도시된 바와 같이, 사용자가 '오이, 골뱅이, 소면을 사야해'라고 발화하면 차량은 '오이, 골뱅이, 소면의 구매' 태스크를 인식하고, 오이의 카테고리(야채), 골뱅이의 카테고리(가공식품), 소면의 카테고리(가공식품)를 인식한다.As shown in Fig. 7, when the user utters 'I need to buy cucumber, golbengi, and somen noodles', the vehicle recognizes the 'purchase cucumber, golbengi, and somen noodles' task, and the category of cucumber (vegetables) and category ( Processed food) and somen categories (processed food) are recognized.

차량은 오이를 야채 카테고리로 인식하고, 골뱅이와 소면을 가공식품 카테고리로 인식한다.The vehicle recognizes cucumber as a vegetable category, and Golbaenggi and somen noodles as a processed food category.

그리고, 차량의 제어부는 검색된 관심지점 중 야채와 가공식품을 판매하는 장소를 추천 목적지로 모두 검색하고, 검색된 추천 목적지 중 세 개를 모두 구매할 수 있는 추천 목적지를 확인하며, 확인된 추천 목적지에 대한 정보를 사용자 인터페이스를 통해 출력하며, 사용자인터페이스를 통해 확인된 추천 목적지를 내비게이션 기능의 목적지로 설정할 것인지에 대한 질의를 출력한다.Then, the control unit of the vehicle searches all the places selling vegetables and processed food among the searched points of interest as recommended destinations, checks the recommended destinations where all three of the searched recommended destinations can be purchased, and information on the confirmed recommended destinations. is output through the user interface, and a query as to whether to set the recommended destination confirmed through the user interface as the destination of the navigation function is output.

즉 차량의 제어부는 카테고리별 태스크와 추천 목적지를 각각 매칭시켜 가장 많은 카테고리가 매칭된 추천 목적지를 출력할 수 있다.That is, the control unit of the vehicle may output a recommended destination in which the most categories are matched by matching each category task with a recommended destination.

즉, 차량은 사용자인터페이스를 통해 '마트A에서 오이, 골뱅이, 소면을 모두 구매할 수 있습니다. 마트A를 목적지로 설정하겠습니까? Y/N'를 표시한다.In other words, the vehicle can purchase all of cucumbers, golbengi, and somen noodles at Mart A through the user interface. Do you want to set Mart A as the destination? Y/N' is displayed.

차량은 사용자에 의해 '어, 설정해줘'라는 음성이 발화되면 사용자의 음성을 인식하고 추천 목적지를 내비게이션 기능의 목적지로 설정한다.The vehicle recognizes the user's voice and sets the recommended destination as the destination of the navigation function when the user's voice 'Oh, please set it' is uttered.

또한 차량은 입력부를 통해 'Y'버튼이 선택되면 추천 목적지를 내비게이션 기능의 목적지로 설정하고, 목적지 설정 확인을 위한 안내 메시지('마트 A를 추천 목적지로 설정하였습니다. 경로를 안내하겠습니다.')를 표시하며 현재 위치부터 목적지까지의 경로를 안내한다.In addition, when the 'Y' button is selected through the input unit, the vehicle sets the recommended destination as the destination of the navigation function and sends a guide message to confirm the destination setting ('Mart A has been set as the recommended destination. I will guide you.') It shows the route from the current location to the destination.

아울러 차량은 적어도 하나의 태스크를 수행할 수 있는 추천 목적지가 복수 개 검색되었을 때 현재 위치에서 거리가 가장 가까운 추천 목적지에 대한 정보를 사용자 인터페이스(129)를 통해 출력할 수 있다.In addition, when a plurality of recommended destinations capable of performing at least one task are found, the vehicle may output information on the recommended destination closest to the current location through the user interface 129 .

예를 들어, 차량은 검색된 관심지점 중 야채(오이)와 가공식품(골뱅이, 소면)을 판매하는 장소를 추천 목적지로 모두 검색하고, 검색된 추천 목적지 중 세 개를 모두 구매할 수 있는 추천 목적지를 확인하며, 확인된 추천 목적지가 복수 개이면 복수 개의 추천 목적지 중 현재 위치에서 거리가 가장 가까운 추천 목적지를 출력할 수 있다.For example, the vehicle searches all the places selling vegetables (cucumber) and processed foods (golbengi, somen) among the searched points of interest as recommended destinations, and checks the recommended destinations where all three of the searched recommended destinations can be purchased. , if there are a plurality of confirmed recommended destinations, a recommended destination closest to the current location among the plurality of recommended destinations may be output.

차량은 마트 A까지의 거리가 1km이고, 마트 B까지의 거리가 3km이면, 마트A를 추천 목적지로 결정하고, 사용자인터페이스를 통해 '현재 위치에서 거리가 가장 가까운 마트A에서 오이, 골뱅이, 소면을 모두 구매할 수 있습니다. 마트A를 목적지로 설정하겠습니까? Y/N'를 표시할 수 있다.If the distance to Mart A is 1 km and the distance to Mart B is 3 km, Mart A is determined as the recommended destination, and through the user interface, 'Cucumber, Golbengi, and Somen noodles at Mart A closest to the current location are selected through the user interface. All are available for purchase. Do you want to set Mart A as the destination? Y/N' can be displayed.

또한 차량은 이동 시간이 가장 짧은 목적지를 추천 목적지로 출력하는 것도 가능하다.Also, the vehicle may output a destination with the shortest travel time as a recommended destination.

아울러, 차량은 사용자에 의해 최종 목적지가 입력된 상태에서 추천 목적지가 복수 개 검색되었을 때 복수 개의 추천 목적지 중 현재 위치에서 최종 목적지까지의 경로 상에 위치한 추천 목적지를 출력하는 것도 가능하다.In addition, when a plurality of recommended destinations are searched in a state in which a final destination is input by the user, the vehicle may output a recommended destination located on a path from the current location to the final destination among the plurality of recommended destinations.

예를 들어 차량은 추천 목적지인 마트 A, B 모두 최종 목적지까지의 경로 상에 위치할 때 마트A와 마트 B를 사용자 인터페이스를 통해 추천 목적지로 출력할 수 있다.For example, when both marts A and B, which are recommended destinations, are located on the route to the final destination, the vehicle may output mart A and mart B as recommended destinations through the user interface.

또한 차량은 현재 위치에서 최종 목적지까지의 경로 상에 추천 목적지가 복수 개 존재하면 경로 상의 복수 개의 추천 목적지들 중 현재 위치에서 거리가 가장 가까운 추천 목적지를 출력하는 것도 가능하다.In addition, if a plurality of recommended destinations exist on a route from the current location to the final destination, the vehicle may output the closest recommended destination from the current location among the plurality of recommended destinations on the route.

예를 들어 차량은 추천 목적지인 마트 A, B 모두 최종 목적지까지의 경로 상에 위치할 때 현재 위치에서 마트A가 2km거리에 있고, 마트 B가 3km 거리에 있으면 마트 A를 내비게이션 기능의 목적지로 설정할 수 있다.For example, when Mart A and Mart B, which are recommended destinations, are both located on the route to the final destination, if Mart A is 2 km away from the current location and Mart B is 3 km away, Mart A is set as the destination for the navigation function. can

또한 차량은 검색된 추천 목적지들에 대한 정보를 사용자인터페이스를 통해 모두 출력하고, 검색된 추천 목적지들 중 어느 하나를 사용자로부터 선택받는 것도 가능하다. In addition, the vehicle may output all information on the searched recommended destinations through the user interface, and may receive any one of the searched recommended destinations selected by the user.

도 8에 도시된 바와 같이, 사용자가 '집에 가기 전에 화장지와 식빵을 사해'라고 발화하면 차량은 '집'을 최종 목적지로 설정하고, 물품 구매에 대한 주제를 인식하며, '화장지와 식빵의 구매' 태스크를 인식하고, 화장지의 카테고리(위생용품), 식빵의 카테고리(제과)를 인식한다.As shown in FIG. 8 , when the user utters 'Buy toilet paper and bread before going home', the vehicle sets 'home' as the final destination, recognizes the topic of purchase, and 'toilet paper and bread' The 'purchase' task is recognized, and the category of toilet paper (sanitary products) and the category of bread (confectionery) are recognized.

그리고, 차량의 제어부(160)는 검색된 관심지점 중 '위생용품과 제과를 판매하는 장소를 추천 목적지로 모두 검색하고, 검색된 추천 목적지 중 두 개를 모두 구매할 수 있는 추천 목적지를 확인하며, 확인된 추천 목적지에 대한 정보를 사용자 인터페이스를 통해 출력하며, 사용자인터페이스를 통해 확인된 추천 목적지를 내비게이션 기능의 목적지로 설정할 것인지에 대한 질의를 출력한다.Then, the control unit 160 of the vehicle searches for 'places selling sanitary products and confectionery as recommended destinations among the searched points of interest, checks the recommended destinations where both of the searched recommended destinations can be purchased, and confirms the confirmed recommendation. The destination information is output through the user interface, and a query as to whether to set the recommended destination confirmed through the user interface as the destination of the navigation function is output.

즉, 차량은 사용자인터페이스를 통해 '현재 위치에서 마트A는 2km거리에 있고, 마트 B는 3km 거리에 있습니다. 마트 A는 현재 위치에서 집 사이의 경로에서 벗어난 위치에 있으며, 마트 B는 현재 위치에서 집 사이의 경로 상에 위치하고 있습니다. 마트A, 마트 B 중 목적지를 설정해주세요.'라는 메시지를 표시한다.That is, through the user interface of the vehicle, 'Mart A is 2 km away and Mart B is 3 km away from the current location. Mart A is located off the path from the current location to the house, and Mart B is located on the path from the current location to the house. Please set a destination between Mart A and Mart B.' is displayed.

차량은 사용자에 의해 '마트A, 마트 B 중 어느 하나의 추천 목적지가 선택되면 선택된 추천 목적지를 내비게게이션 기능의 목적지로 설정하고 현재 위치부터 목적지까지의 경로를 안내한다.The vehicle sets the selected recommended destination as the destination of the navigation function and guides the route from the current location to the destination when any one recommended destination among 'mart A and mart B is selected by the user.

또한 차량은 목적지 설정 확인을 위한 안내 메시지('마트 A를 추천 목적지로 설정하였습니다. 경로를 안내하겠습니다.')를 표시하며 현재 위치부터 목적지까지의 경로를 안내한다.In addition, the vehicle displays a guide message to confirm the destination setting ('Mart A has been set as a recommended destination. I will guide you.') and guides the route from the current location to the destination.

이와 같이 차량은 사용자에 의해 최종 목적지가 입력된 상태에서 추천 목적지가 복수 개 검색되었을 때 현재 위치에서 최종 목적지까지의 경로 상에 위치한 추천 목적지를 검색하고 검색된 추천 목적지를 사용자 인터페이스를 통해 출력하는 것도 가능하다. 이때 차량은 출력된 추천 목적지가 복수 개이면 복수 개의 추천 목적지 중에서 적어도 하나의 추천 목적지를 선택할 것을 사용자에게 요청하는 것도 가능하며, 사용자에 의해 적어도 하나의 추천 목적지가 선택되면 선택된 추천 목적지를 경유지로 설정하고, 경유지를 갖는 경로를 생성할 수 있다.In this way, when a plurality of recommended destinations are searched in a state in which the final destination is input by the user, the vehicle searches for a recommended destination located on the path from the current location to the final destination, and it is also possible to output the searched recommended destination through the user interface do. In this case, the vehicle may request the user to select at least one recommended destination from among the plurality of recommended destinations if there are a plurality of output recommended destinations. and a route with a waypoint can be created.

차량은 추천 목적지까지의 경로를 안내하면서 태스크 이행 정보를 확인(411)하고, 확인된 태스크 이행 정보에 기초하여 태스크 이행 여부를 판단(412)함으로써 추천 목적지의 도착 여부를 판단할 수 있다.The vehicle may determine whether the recommended destination has arrived by checking task fulfillment information ( 411 ) while guiding a route to the recommended destination, and determining whether to perform the task based on the checked task fulfillment information ( 412 ).

여기서 태스크 이행 정보는, 현재 위치의 위치 정보, 추천 목적지의 위치 정보, 추천 목적지의 상호 정보, 전화 번호 정보 및 결제 정보를 포함할 수 있다.Here, the task performance information may include location information of a current location, location information of a recommended destination, business name information of a recommended destination, phone number information, and payment information.

좀 더 구체적으로 차량은 위치 수신부(130)에 수신된 현재 위치의 위치 정보와 추천 목적지의 위치 정보를 확인하고, 현재 위치의 위치 정보와 추천 목적지의 위치 정보가 동일한지 판단하고 현재 위치의 위치 정보와 추천 목적지의 위치 정보가 동일하다고 판단되면 사용자의 태스크 이행으로 판단한다.More specifically, the vehicle checks the location information of the current location and the location information of the recommended destination received by the location receiving unit 130 , determines whether the location information of the current location and the location information of the recommended destination are the same, and determines the location information of the current location If it is determined that the location information of the and the recommended destination is the same, it is determined that the user has performed the task.

즉 차량은 현재 위치의 위치 정보와 추천 목적지의 위치 정보로부터 사용자가 추천 목적지에 방문하였는지 판단할 수 있다.That is, the vehicle may determine whether the user has visited the recommended destination from the location information of the current location and the location information of the recommended destination.

또한 차량은 서버(200) 또는 단말기(300)로부터 수신된 결제 정보의 상호 정보 및 전화번호 중 적어도 하나를 확인하고 확인된 적어도 하나의 결제 정보와 추천 목적지의 상호 정보 및 전화번호 정보에 기초하여 추천 목적지에서 사용자가 태스크를 이행하였는지를 판단할 수 있다. 즉, 차량은 결제 정보로부터 사용자가 물건을 구매하였는지 판단할 수 있다.In addition, the vehicle confirms at least one of the mutual information and the phone number of the payment information received from the server 200 or the terminal 300, and recommends based on the confirmed at least one payment information and the mutual information and phone number information of the recommended destination At the destination, it may be determined whether the user has performed the task. That is, the vehicle may determine whether the user has purchased a product from the payment information.

또한 차량은 현재 위치의 위치 정보와 추천 목적지의 위치 정보의 비교 정보 및 결제 정보로부터 추천 목적지에 방문하여 물건을 구매하였는지 판단할 수 있다.In addition, the vehicle may determine whether a product has been purchased by visiting the recommended destination based on the comparison information of the current location location information and the location information of the recommended destination and payment information.

차량은 사용자가 태스크를 이행하였다고 판단(412)되면 추천 목적지에 도착하였다고 판단하고, 경로 안내를 종료(413)한다.When it is determined that the user has performed the task (412), the vehicle determines that the recommended destination has arrived, and ends (413) route guidance.

반면 차량은 태스크 불이행으로 판단되면 현재 위치와 인식된 카테고리에 기초하여 추천 목적지를 다시 검색한다.On the other hand, if it is determined that the task is not fulfilled, the vehicle searches for the recommended destination again based on the current location and the recognized category.

좀 더 구체적으로, 차량은 위치 수신부에서 수신된 현재 위치를 확인하고, 확인된 현재 위치에 기초하여 관심 지점을 검색(414)하고 검색된 관심 지점과 인식된 카테고리에 기초하여 사용자에게 추천할 새로운 추천 목적지들을 검색(415)하고 검색된 추천 목적지들 중 적어도 하나의 새로운 추천 목적지를 사용자 인터페이스를 통해 출력(416)한다.More specifically, the vehicle checks the current location received from the location receiver, searches for a point of interest based on the identified current location ( 414 ), and a new recommended destination to recommend to the user based on the searched point of interest and the recognized category Search (415) and output (416) at least one new recommended destination among the searched recommended destinations through the user interface.

그리고 차량은 현재 위치에서 새로운 추천 목적지까지의 경로를 생성하고 생성된 경로로 길을 안내(417)한다.Then, the vehicle generates a route from the current location to a new recommended destination and guides the route to the generated route ( 417 ).

차량은 새로운 목적지까지 경로를 안내하면서 태스크 이행 정보를 확인하고 확인된 태스크 이행 정보에 기초하여 태스크 이행 여부를 판단한다. 이 과정은 위에서 설명한 바와 동일하여 자세한 설명을 생략한다.The vehicle checks task fulfillment information while guiding a route to a new destination, and determines whether to perform the task based on the confirmed task fulfillment information. This process is the same as described above, so a detailed description will be omitted.

아울러 차량은 복수 개의 태스크를 각각 수행할 있는 복수 개의 추천 목적지가 검색되었을 때, 현재 위치에서 거리가 가장 가까운 추천 목적지부터 경로를 설정하고, 다른 태스크를 수행할 수 있는 추천 목적지를 재 검색하여 재 검색된 추천 목적지로 경로를 설정할 수 있다.In addition, when a plurality of recommended destinations that can each perform a plurality of tasks are found, the vehicle sets a route from the recommended destination closest to the current location, and re-searches for a recommended destination that can perform other tasks. You can set a route as a recommended destination.

도 9 내지 도 11을 참조하여 설명한다.It will be described with reference to FIGS. 9 to 11 .

도 9에 도시된 바와 같이, 사용자가 '진통제가 필요해. 그리고 브레이크 등이 고장났어.'라고 발화하면 차량은 '진통제의 구매' 및 '정비소의 방문'의 태스크를 인식하고, 진통제의 카테고리(약품), 브레이크 등의 카테고리(정비소)를 인식한다.As shown in Figure 9, the user 'I need a pain reliever. And the brake light is broken.', the vehicle recognizes the tasks of 'purchasing painkillers' and 'visiting a repair shop', and recognizes the categories of painkillers (medicine) and brakes (service shop).

즉 차량의 제어부는 검색된 관심지점 중 진통제를 판매하고 브레이크 등을 수리하는 장소를 추천 목적지로 모두 검색하고, 검색된 추천 목적지 중 두 개를 모두 이행할 수 있는 추천 목적지를 확인하며, 확인된 추천 목적지에 대한 정보를 사용자 인터페이스를 통해 출력하며, 사용자인터페이스를 통해 확인된 추천 목적지를 내비게이션 기능의 목적지로 설정할 것인지에 대한 질의를 출력한다.That is, the control unit of the vehicle searches all of the searched points of interest where painkillers are sold and brakes are repaired as recommended destinations, checks the recommended destinations that can fulfill both of the searched recommended destinations, and returns to the confirmed recommended destinations. information is output through the user interface, and a query as to whether to set the recommended destination confirmed through the user interface as the destination of the navigation function is output.

즉, 차량은 사용자인터페이스를 통해 '마트A 내부의 약국에서 진통제를 술 수 있고, 마트 A 내의 정비소에서 브레이크 등을 교체할 수 있습니다. 마트A를 목적지로 설정하겠습니까? Y/N'를 표시한다.In other words, through the user interface, the vehicle can drink painkillers at the pharmacy inside Mart A, and change the brake lights at the repair shop inside Mart A. Do you want to set Mart A as the destination? Y/N' is displayed.

또한 차량은 입력부를 통해 'Y'버튼이 선택되면 추천 목적지를 내비게이션 기능의 목적지로 설정하고, 목적지 설정 확인을 위한 안내 메시지('마트 A를 목적지로 설정하였습니다. 경로를 안내하겠습니다.')를 표시하며 현재 위치부터 목적지까지의 경로를 안내한다.In addition, the vehicle sets the recommended destination as the destination of the navigation function when the 'Y' button is selected through the input unit, and displays a guidance message to confirm the destination setting ('Mart A has been set as the destination. I will guide you.') and guides the route from the current location to the destination.

차량은 주행 중 또는 시동 오프 전 차량의 현재 위치와 목적지의 위치를 비교하여 차량이 목적지에 도착하여 태스크를 이행하였는지 판단하고 또한 결제 정보를 확인하여 사용자가 태스크를 이행하였는지 판단한다.The vehicle compares the current location of the vehicle with the location of the destination while driving or before starting off to determine whether the vehicle has arrived at the destination and performed the task, and also determines whether the user has performed the task by checking payment information.

도 10에 도시된 바와 같이, 차량은 차량이 목적지를 지나 주행하고 있다고 판단되면 사용자 인터페이스를 통해 '마트 A를 지나쳤습니다. 다른 추천 목적지를 검색하겠습니다.'를 표시한다.As shown in FIG. 10 , when it is determined that the vehicle is driving past the destination, 'Passed Mart A' through the user interface. I will search for another recommended destination.'

이때 차량의 제어부는 차량의 현재 위치를 확인하고 확인된 현재 위치의 위치 정보와 인식된 카테고리(약품, 정비소)에 기초하여 새로운 추천 목적지를 검색하고 검색된 추천 목적지에 대한 정보를 출력한다.At this time, the control unit of the vehicle checks the current location of the vehicle, searches for a new recommended destination based on the identified location information of the current location and the recognized category (medicine, repair shop), and outputs information on the searched recommended destination.

차량은 진통제의 구매와 브레이크 등의 수리를 위한 정비소의 방문을 동시에 수행할 수 없다고 판단되면 진통제 구매를 위한 추천 목적지와, 정비소 방문을 위한 추천 목적지에 대한 정보를 사용자 인터페이스를 통해 모두 출력하며, 이때 각 추천 목적지까지의 거리를 함께 출력하며, 사용자에게 목적지를 선택할 것을 요청한다.If it is determined that the vehicle cannot simultaneously purchase painkillers and visit the repair shop for repair of brakes, etc., information on the recommended destination for purchasing the painkiller and the recommended destination for visiting the repair shop is output through the user interface, at this time The distance to each recommended destination is output together, and the user is asked to select a destination.

아울러 차량은 복수 개의 추천 목적지 중 현재 위치에서 거리가 가장 가까운 추천 목적지를 내비게이션 기능의 목적지로 자동으로 설정하는 것도 가능하다.In addition, the vehicle may automatically set a recommended destination closest to the current location among a plurality of recommended destinations as a destination for the navigation function.

차량은 '약국 A를 선택해줘'라는 음성이 수신되면 약국 A를 내비게이션 기능의 목적지로 설정하고, 약국 A를 목적지로 설정하였다는 메시지와 경로 안내에 대한 메시지를 표시하며, 현재 위치부터 목적지까지 경로를 생성하며 생성된 경로로 길을 안내한다.When the voice 'Please choose pharmacy A' is received, the vehicle sets pharmacy A as the destination of the navigation function, displays a message indicating that pharmacy A is set as the destination and a message for route guidance, and provides a route from the current location to the destination. and guides the way to the created path.

아울러 차량은 사용자 인터페이스를 통해 표시되는 메시지를 사운드 출력부를 통해 음성으로 출력하는 것도 가능하다.In addition, the vehicle may output a message displayed through the user interface as voice through the sound output unit.

차량은 현재 위치와 약국A의 위치를 비교하여 차량이 약국A에 도착하여 진통제 구매에 대한 태스크를 이행하였다고 판단되면 차량의 현재 위치를 확인하고 확인된 현재 위치의 위치 정보와 인식된 카테고리(정비소)에 기초하여 새로운 추천 목적지를 검색하고 검색된 추천 목적지에 대한 정보를 출력한다.The vehicle compares the current location with the location of the pharmacy A, and when it is determined that the vehicle has arrived at the pharmacy A and has completed the task of purchasing the painkiller, the vehicle's current location is checked, and the location information of the confirmed current location and the recognized category (maintenance shop) Searches for a new recommended destination based on the , and outputs information on the searched recommended destination.

도 11에 도시된 바와 같이, 차량은 약국A에 도착하여 진통제 구매에 대한 태스크를 이행하였다고 판단되면 나머지 태스크인 정비소 방문에 대한 질의 정보를 사용자 인터페이스를 통해 출력하고, 사용자에 의해 정비소 방문이 선택되면 현재 위치와 인식된 카테고리에 기초하여 정비소 방문을 위한 추천 목적지를 검색한다.11 , when it is determined that the vehicle arrives at the pharmacy A and fulfills the task of purchasing the analgesic, it outputs query information on the remaining task, the repair shop visit, through the user interface, and when the user selects the repair shop visit A recommended destination for visiting a repair shop is searched based on the current location and the recognized category.

아울러 차량은 자동으로 정비소 방문을 위한 추천 목적지를 검색하는 것도 가능하다.In addition, the vehicle can automatically search for a recommended destination for a visit to the repair shop.

차량은 복수 개의 추천 목적지(즉 정비소)가 검색되면 사용자 인터페이스를 통해 현재 위치부터 검색된 복수 개의 추천 목적지까지의 거리를 표시하고, 사용자에게 어느 하나의 추천 목적지를 선택할 것을 요청할 수 있다.When a plurality of recommended destinations (ie, a repair shop) is searched, the vehicle may display the distances from the current location to the plurality of searched recommended destinations through the user interface, and request the user to select one of the recommended destinations.

차량은 사용자에 의해 복수 개의 추천 목적지(즉 정비소) 중 어느 하나의 추천 목적지가 선택되면 선택된 추천 목적지까지의 경로를 설정하고, 사용자 인터페이스를 통해 추천 목적지의 설정 메시지와 경로 안내 메시지를 표시하며, 설정된 경로까지 길을 안내한다.The vehicle sets a route to the selected recommended destination when one of a plurality of recommended destinations (ie, a repair shop) is selected by the user, displays a setting message of the recommended destination and a route guidance message through the user interface, guide the way to the route.

도 12에 도시된 바와 같이, 사용자가 '사과와 배를 사야 하는 데, 손가락 뼈를 다쳤어'라고 발화하면 차량은 '사과와 배의 구매' 태스크를 인식하고 '손가락 뼈에 대한 정형외과의 방문' 태스크를 인식하며, 사과와 배의 카테고리(과일), 정형외과의 카테고리(병원)를 인식한다.12 , when the user utters 'I need to buy apples and pears, but my finger bones are hurt', the vehicle recognizes the 'purchase of apples and pears' task and 'visiting an orthopedic surgeon for finger bones' It recognizes the task, and recognizes the category of apples and pears (fruit), and the category of orthopedic surgeons (hospitals).

차량의 제어부는 검색된 관심지점 중 과일을 판매하는 장소를 추천 목적지로 모두 검색하고, 정형외과를 추천 목적지로 모두 검색하며, 검색된 추천 목적지 중 사과와 배를 모두 구매할 수 있고 손가락을 치료받을 수 있는 병원의 방문을 모두 이행할 수 있는 추천 목적지를 확인한다.The control unit of the vehicle searches all the places where fruit is sold among the searched points of interest as recommended destinations, searches all orthopedic surgeons as recommended destinations, and a hospital where you can purchase both apples and pears from among the searched recommended destinations and receive treatment for your fingers. Identify recommended destinations that can fulfill all of your visits.

차량은 과일의 구매와 정형외과의 방문을 모두 이행할 수 있는 추천 목적지가 없다고 판단되면, 현재 위치에서 각 추천 목적지까지의 거리를 출력하되, 서로 다른 추천 목적지까지의 거리가 동일할 때 각 추천 목적지의 방향을 함께 출력할 수 있다.If the vehicle determines that there is no recommended destination that can fulfill both the purchase of fruit and the visit of the orthopedic surgeon, the vehicle outputs the distance from the current location to each recommended destination, but when the distances to different recommended destinations are the same, each recommended destination direction can be printed together.

아울러, 차량은 과일의 구매 태스크와 정형외과의 방문 태스크 중 먼저 수행할 태스크를 선택받을 수 있으며, 먼저 수행할 태스크의 추천 목적지부터 다음에 수행할 태스크의 추천 목적지까지의 거리를 표시하는 것도 가능하고, 사용자의 상태에 기반한 서비스 정보를 표시하는 것도 가능하다.In addition, the vehicle can receive a selection of a task to be performed first among a fruit purchase task and an orthopedic surgeon's visit task, and it is also possible to display the distance from the recommended destination of the task to be performed first to the recommended destination of the task to be performed next. , it is also possible to display service information based on the user's status.

아울러, 차량은 과일의 구매 태스크와 정형외과의 방문 태스크 중 먼저 이행할 태스크를 사용자로부터 선택받는 것도 가능하다.In addition, the vehicle may receive a selection from the user of a task to be performed first among a fruit purchase task and an orthopedic surgeon's visit task.

아울러, 차량은 과일의 구매 태스크에 대응하는 추천 목적지와, 정형외과의 방문 태스크에 대응하는 추천 목적지 중 추천 목적지가 하나인 곳을 먼저 이동할 목적지로 설정하고, 복수 개의 추천 목적지에 대해서는 사용자의 선택을 받는 것도 가능하다.In addition, the vehicle sets the recommended destination corresponding to the fruit purchase task and the recommended destination corresponding to the visit task of the orthopedic surgeon as the destination to be moved first, and for a plurality of recommended destinations, the user selects the destination. It is also possible to receive

차량의 사용자 인터페이스는 '현재 위치에서 정형외과A까지의 거리는 1km(서쪽), 청과가게까지의 거리는 1km(북쪽), 마트 A까지의 거리는 2km(동쪽)이고, 정형외과A에서 청과가게까지의 거리는 0.5km, 정형외과A에서 마트 A까지의 거리는 3km입니다. 배달 가능한 곳은 마트 A입니다. 목적지를 선택해주세요. 청과가게/마트A'를 표시한다.The user interface of the vehicle reads 'The distance from the current location to the orthopedic surgeon A is 1 km (west), the distance to the fruit store is 1 km (north), the distance to the mart A is 2 km (east), and the distance from the orthopedic surgeon A to the fruit shop is 1 km (north) 0.5km, the distance from Orthopedic A to Mart A is 3km. Delivery is available at Mart A. Please select a destination Greengrocer/Mart A' is displayed.

차량은 '정형외과 A를 먼저 방문하고, 마트A를 갈께'라는 사용자의 발화에 대한 음성이 입력되면 현재 위치부터 정형외과 A까지의 경로를 생성하고, 사용자 인터페이스를 통해 목적지 설정에 대한 안내 메시지 및 경로 생성에 대한 안내 메시지를 표시하고, 생성된 경로로 길을 안내한다.The vehicle generates a route from the current location to the orthopedic surgeon A when the user's voice for 'I will visit orthopedic surgeon A first, I will go to mart A' is inputted, and a guide message for setting the destination through the user interface and A guide message for creating a route is displayed, and the route is guided to the created route.

차량은 차량의 현재 위치와 목적지의 위치를 비교하여 차량이 목적지에 도착하여 태스크를 이행하였는지 판단하고 또한 결제 정보를 확인하여 사용자가 태스크를 이행하였는지 판단하여, 사용자가 정형외과A 방문의 태스크를 이행하였다고 판단되면 정형외과A의 위치(즉, 차량의 현재 위치)에서 마트 A까지의 경로를 생성하고, 사용자 인터페이스를 통해 목적지 설정에 대한 안내 메시지 및 경로 생성에 대한 안내 메시지를 표시하고, 생성된 경로로 길을 안내한다.The vehicle compares the current location of the vehicle with the location of the destination to determine whether the vehicle has arrived at the destination and has performed the task, and also checks payment information to determine whether the user has performed the task, and the user performs the task of orthopedic surgeon A visit If it is determined that the orthopedic surgeon A's location (that is, the current location of the vehicle) to the mart A, a route is created, a guide message for destination setting and a guide message for route generation are displayed through the user interface, and the generated route guide the way

이와 같이 차량은 정형외과A 를 방문한 후 다음 방문할 추천 목적지 중에 어느 하나를 사용자로부터 선택받고 선택된 추천 목적지까지 경로를 생성하고 생성된 경로로 길을 안내한다.In this way, after the vehicle visits orthopedic surgeon A, any one of the recommended destinations to be visited next is selected by the user, a route is generated to the selected recommended destination, and the route is guided by the created route.

도 13은 다른 실시 예에 따른 차량과 통신하는 단말기의 제어 구성도이다.13 is a control configuration diagram of a terminal communicating with a vehicle according to another exemplary embodiment.

단말기(300)는 사용자용 단말기로, 네트워크를 통해 차량에 접속할 수 있는 컴퓨터나 휴대용 단말기로 구현될 수 있다.여기서, 컴퓨터는 예를 들어, 웹 브라우저(WEB Browser)가 탑재된 노트북, 데스크톱(desktop), 랩톱(laptop), 태블릿 PC, 슬레이트 PC 등을 포함하고, 휴대용 단말기는 예를 들어, 휴대성과 이동성이 보장되는 무선 통신 장치로서, PCS(Personal Communication System), GSM(Global System for Mobile communications), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), WiBro(Wireless Broadband Internet) 단말, 스마트 폰(Smart Phone) 등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치와 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD) 등과 같은 웨어러블 장치를 포함할 수 있다.The terminal 300 is a user terminal and may be implemented as a computer or a portable terminal that can access a vehicle through a network. ), laptops, tablet PCs, slate PCs, and the like, and portable terminals are, for example, wireless communication devices with guaranteed portability and mobility, such as Personal Communication System (PCS) and Global System for Mobile communications (GSM). , PDC (Personal Digital Cellular), PHS (Personal Handyphone System), PDA (Personal Digital Assistant), IMT (International Mobile Telecommunication)-2000, CDMA (Code Division Multiple Access)-2000, W-CDMA (W-Code Division Multiple) Access), WiBro (Wireless Broadband Internet) terminals, smart phones, etc. all kinds of handheld-based wireless communication devices and watches, rings, bracelets, anklets, necklaces, glasses, contact lenses, or hair It may include a wearable device such as a head-mounted-device (HMD).

단말기(300)는 사용자 인터페이스(310), 위치 수신부(320), 사운드 입력부(330), 제어부(340), 저장부(350), 통신부(360) 및 사운드 출력부(370)를 포함한다. The terminal 300 includes a user interface 310 , a location receiving unit 320 , a sound input unit 330 , a control unit 340 , a storage unit 350 , a communication unit 360 , and a sound output unit 370 .

사용자 인터페이스(310)는 사용자로부터 동작 명령 및 입력 정보를 입력받고 수행 중인 기능에 대한 동작 정보를 표시한다.The user interface 310 receives an operation command and input information from a user and displays operation information for a function being performed.

이러한 사용자 인터페이스(310)는 입력부(311)와 표시부(312)를 포함할 수 있다. 입력부는 버튼, 스위치 및 터치 패널 중 적어도 하나를 포함할 수 있다.The user interface 310 may include an input unit 311 and a display unit 312 . The input unit may include at least one of a button, a switch, and a touch panel.

표시부(312)는 디스플레이 패널을 포함할 수 있으며, 이 디스플레이 패널은 터치 패널과 일체화로 마련될 수 있다.The display unit 312 may include a display panel, and the display panel may be provided integrally with the touch panel.

입력부(311)는 단말기가 가진 복수 기능 중 적어도 하나의 기능의 온 오프 명령을 입력받고, 입력된 적어도 하나의 기능에 대한 동작 명령을 입력받는다.The input unit 311 receives an on/off command for at least one function among a plurality of functions of the terminal, and an operation command for the input at least one function.

입력부(311)는 음성 인식 기능의 동작 명령을 입력받을 수 있다.The input unit 311 may receive an operation command of the voice recognition function.

아울러 입력부(311)는 단말기를 통하여 내비게이션 기능 수행 시 최종 목적지의 정보를 입력받는 것도 가능하고, 추천 목적지의 선택 명령을 입력받는 것도 가능하다.In addition, the input unit 311 may receive information of a final destination when performing a navigation function through the terminal, and may receive a command for selecting a recommended destination.

입력부(311)는 차량과의 페어링 명령 및 차량과의 통신 수행 명령을 입력받을 수 있다.The input unit 311 may receive a pairing command with a vehicle and a communication execution command with the vehicle.

입력부(311)는 태스크의 연기 명령을 입력받을 수 있고, 태스크 연기 시 방문할 날짜 및 시간 정보를 입력받을 수 있다.The input unit 311 may receive a command to postpone the task, and may receive information on a date and time to visit when the task is postponed.

표시부(312)는 수행 중인 기능에 대한 동작 정보를 표시하고, 사용자에 의해 선택 가능한 선택 정보를 버튼 또는 아이콘으로 표시한다.The display unit 312 displays operation information for a function being performed, and displays selection information selectable by the user as a button or an icon.

표시부(312)는 내비게이션 정보의 영상 정보를 표시한다.The display unit 312 displays image information of navigation information.

표시부(312)는 목적지 입력을 위한 한/영 문자 버튼, 숫자 버튼, 특수 문자 버튼 등을 표시하고, 경로 안내 명령을 위한 경로 안내 버튼 등을 표시할 수 있다.The display unit 312 may display a Korean/English character button, a number button, a special character button, etc. for inputting a destination, and may display a route guidance button for a route guidance command.

표시부(312)는 제어부(340)에 의해 추천된 추천 목적지의 정보를 표시한다.The display unit 312 displays information on the recommended destination recommended by the control unit 340 .

표시부(312)는 안내문과, 동작 명령의 정보를 갖는 버튼 또는 아이콘을 표시한다.The display unit 312 displays a guide and a button or icon having information of an operation command.

위치 수신부(320)는 단말기의 현재 위치를 획득하고 획득된 현재 위치를 통신부(150)에 전송한다. 이러한 위치 획득부(130)는 GPS 수신기를 포함한다.The location receiving unit 320 acquires the current location of the terminal and transmits the obtained current location to the communication unit 150 . The location acquisition unit 130 includes a GPS receiver.

여기서 GPS(Global Positioning System) 수신기는 복수의 GPS 위성의 신호를 수신하는 안테나와, 복수의 GPS위성의 위치 신호에 대응하는 거리 및 시간 정보를 이용하여 단말기의 위치를 획득하는 소프트웨어와, 획득된 단말기 위치의 정보를 출력하는 신호 출력부를 포함한다.Here, the GPS (Global Positioning System) receiver includes an antenna for receiving signals from a plurality of GPS satellites, software for acquiring the location of the terminal by using distance and time information corresponding to the location signals of the plurality of GPS satellites, and the obtained terminal and a signal output unit for outputting position information.

사운드 입력부(330)는 사용자의 음성을 입력받고 입력된 음성에 대응하는 음성 정보를 제어부(340)에 전송한다.The sound input unit 330 receives the user's voice and transmits voice information corresponding to the inputted voice to the controller 340 .

사운드 입력부(330)는 하나의 마이크로 폰 또는 두 개 이상의 마이크로 폰을 포함한다. 여기서, 하나의 마이크로 폰은 지향성일 수 있다. 그리고 두 개 이상의 마이크로 폰은 마이크로 폰 어레이로 구현될 수 있다.The sound input unit 330 includes one microphone or two or more microphones. Here, one microphone may be directional. And two or more microphones may be implemented as a microphone array.

좀 더 구체적으로, 사운드 입력부(340)는 사운드를 수집하고 수집된 사운드의 음파를 검출하고, 이 음파에 대응하는 전기 신호를 발생시키고 발생된 전기 신호를 제어부(340)에 전송한다. More specifically, the sound input unit 340 collects sound, detects a sound wave of the collected sound, generates an electric signal corresponding to the sound wave, and transmits the generated electric signal to the controller 340 .

즉 사운드 입력부(330)는 수집된 사운드에 대응하는 전기 신호를 제어부(340)에 전송한다. 여기서 전기 신호는 음성 신호일 수 있다.That is, the sound input unit 330 transmits an electrical signal corresponding to the collected sound to the control unit 340 . Here, the electrical signal may be a voice signal.

제어부(340)는 입력부(311)에서 입력된 입력 정보에 기초하여 복수 개의 기능의 동작을 제어한다.The controller 340 controls operations of a plurality of functions based on input information input from the input unit 311 .

제어부(340)는 음성 인식 기능을 제어할 수 있고, 차량과의 통신 기능을 제어할 수 있으며, 내비게이션 기능을 제어할 수 있다.The control unit 340 may control a voice recognition function, may control a communication function with a vehicle, and may control a navigation function.

이러한 제어부(340)는 음성 인식 기능 수행 시 사운드 입력부(330)에 입력된 음성에 대응하는 전기 신호에 기초하여 음성 인식을 수행한다.When performing the voice recognition function, the controller 340 performs voice recognition based on an electrical signal corresponding to the voice input to the sound input unit 330 .

좀 더 구체적으로 제어부(340)는 사운드 입력부(330)에 입력된 사운드 신호(즉, 음성 신호)의 주파수 특성을 프레임 별로 계산하여 음성 신호에 포함된 특징 벡터를 추출하고 추출된 특징 벡터의 벡터열을 미리 저장된 음향모델 및 음소 모델과 비교하여 음성 신호 내 음소를 인식하며 인식된 음소에 대해 음소 기준의 음성 인식을 수행하여 음소 격자를 형성하고 형성된 음소 격자와 인덱싱 DB에 저장된 인덱싱 정보에 기초하여 사용자가 발화한 음성에 대응하는 문자를 인식한다.More specifically, the control unit 340 calculates the frequency characteristics of the sound signal (ie, the voice signal) input to the sound input unit 330 for each frame, extracts a feature vector included in the voice signal, and a vector sequence of the extracted feature vector. is compared with the pre-stored acoustic model and phoneme model to recognize the phoneme in the speech signal, perform phoneme-based speech recognition on the recognized phoneme to form a phoneme grid, and based on the formed phoneme grid and indexing information stored in the indexing DB, the user Recognizes a character corresponding to the voice uttered.

제어부(340)는 인식된 문자에 기초하여 사용자 발화에 대응하는 주제를 인식하고, 인식된 주제에 기초하여 태스크를 인식하며, 인식된 태스크에 대응하는 카테고리를 인식하고, 인식된 카테고리 및 현재 위치에 기초하여 사용자에게 추천할 적어도 하나의 추천 목적지를 검색하고 검색된 적어도 하나의 추천 목적지의 정보의 출력을 제어한다. The controller 340 recognizes a subject corresponding to the user's utterance based on the recognized character, recognizes a task based on the recognized subject, recognizes a category corresponding to the recognized task, and locates the recognized category and current location. Based on the search for at least one recommended destination to be recommended to the user, an output of information on the searched at least one recommended destination is controlled.

제어부(340)는 위치 수신부(320)에서 수신된 현재 위치의 정보에 기초하여 관심 지점(POI: Position of Interest)을 검색한다. 여기서 관심 지점은 도로 주변 건물의 위치의 정보를 포함할 수 있다.The control unit 340 searches for a position of interest (POI) based on the current position information received from the position receiving unit 320 . Here, the point of interest may include information on the location of a building near a road.

즉 제어부(340)는 관심 지점을 중심으로 지도 상의 각 지역 정보를 수집하여 위치 기반 서비스가 목표로 하는 다양한 정보를 확인하고, 확인된 다양한 정보 내에서 인식된 카테고리에 대응하는 추천 목적지를 검색하고 검색된 추천 목적지를 저장하며, 차량과 통신 가능 시 저장된 추천 목적지를 차량(100)에게 전송한다.That is, the control unit 340 collects information on each region on the map centered on the point of interest, checks various information targeted by the location-based service, searches for a recommended destination corresponding to the recognized category within the identified various information, and retrieves the The recommended destination is stored, and when communication with the vehicle is possible, the stored recommended destination is transmitted to the vehicle 100 .

제어부(340)는 차량(100)의 주행 중 현재 위치와 추천 목적지의 위치를 비교하여 차량(100)이 추천 목적지를 지나쳤는지 판단하고, 추천 목적지를 지나쳤다고 판단되면 현재 위치를 기준으로 관심 지점을 검색하고, 검색된 관심 지점과 인식된 카테고리에 기초하여 추천 목적지를 다시 검색하고 다시 검색된 추천 목적지의 정보를 차량(100)에 전송한다.The controller 340 compares the current location and the location of the recommended destination while the vehicle 100 is driving to determine whether the vehicle 100 has passed the recommended destination, and if it is determined that the vehicle 100 has passed the recommended destination, selects a point of interest based on the current location The search is performed, and the recommended destination is searched again based on the searched POI and the recognized category, and information of the searched recommended destination is transmitted to the vehicle 100 .

즉 제어부(340)는 태스크 불이행 또는 경로 이탈로 판단되면 현재 위치와 인식된 카테고리에 기초하여 추천 목적지를 다시 검색하고 다시 검색된 추천 목적지의 정보를 차량(100)에 전송한다.That is, when it is determined that the task is not fulfilled or the route is deviated, the controller 340 searches for the recommended destination again based on the current location and the recognized category, and transmits information on the searched recommended destination to the vehicle 100 .

제어부(340)는 서버(200)로부터 결제 정보를 수신하고, 수신된 결제 정보와 추천 목적지의 정보에 기초하여 차량이 추천 목적지에서 태스크를 이행했는지 판단할 수 있다. The controller 340 may receive payment information from the server 200 and determine whether the vehicle has performed a task at the recommended destination based on the received payment information and information on the recommended destination.

제어부(340)는 주기적으로 서버(200)로부터 결제 정보가 수신되었는지 확인할 수 있다.The control unit 340 may periodically check whether payment information is received from the server 200 .

제어부(340)는 차량의 시동이 오프되었다고 판단되거나, 또는 차량과의 통신이 불가능하다고 판단되면 단말기의 현재 위치와 추천 목적지의 위치를 비교하여 차량이 추천 목적지에 도착하였는지 판단하는 것도 가능하다.When it is determined that the vehicle's engine is turned off or it is determined that communication with the vehicle is impossible, the controller 340 may compare the current location of the terminal with the location of the recommended destination to determine whether the vehicle has arrived at the recommended destination.

제어부(340)는 차량의 시동이 온되었다고 판단되거나 또는 차량과의 통신이 가능하다고 판단되면 저장부(350)에 저장된 추천 목적지가 존재하는지 판단하고, 저장된 추천 목적지가 존재하면 저장된 추천 목적지의 정보를 차량(100)에 전송하도록 통신부(360)를 제어한다.When it is determined that the vehicle is started or it is determined that communication with the vehicle is possible, the control unit 340 determines whether a recommended destination stored in the storage unit 350 exists, and if there is a stored recommended destination, information of the stored recommended destination is displayed. The communication unit 360 is controlled to transmit to the vehicle 100 .

제어부(340)는 추천 목적지의 전송 여부의 질의 및 추천 목적지의 선택 여부를 질의하는 메시지의 출력을 제어하고, 추천 목적지에 대한 전송 및 선택 명령이 입력되지 않으면 추후 추천 목적지의 방문 여부를 질의하는 메시지의 출력을 제어하며, 사용자에 의해 추후 추천 목적지의 전송 및 방문 선택 명령이 입력되면 추천 목적지의 정보를 저장한다.The controller 340 controls the output of a message inquiring whether to transmit a recommended destination and whether to select a recommended destination, and if a transmission and selection command for a recommended destination is not input, a message for inquiring whether to visit the recommended destination later Controls the output of , and stores information of the recommended destination when a command for transmission and visit selection of a recommended destination is input later by the user.

제어부(340)는 추천 목적지에 대한 전송 명령이 입력되면 추천 목적지의 정보를 차량(100)에 전송하는 것도 가능하다.When a transmission command for the recommended destination is input, the controller 340 may transmit information on the recommended destination to the vehicle 100 .

제어부(340)는 추천 목적지에 대한 전송 및 선택 명령이 입력되지 않으면 입력부(311) 또는 사운드 입력부(330)를 통해 추천 목적지의 방문 날짜 및 시간을 수신하고, 수신된 방문 날짜 및 시간을 저장하는 것도 가능하다.The control unit 340 receives the visit date and time of the recommended destination through the input unit 311 or the sound input unit 330 if the transmission and selection command for the recommended destination is not input, and stores the received visit date and time. It is possible.

제어부(340)는 태스크의 연기 명령이 입력되면 추천 목적지의 방문 날짜 및 시간을 저장하며, 인식된 카테고리의 정보를 저장하는 것도 가능하다.The controller 340 stores the visit date and time of the recommended destination when a command to postpone the task is input, and it is also possible to store information of the recognized category.

제어부(340)는 현재 날짜와 시간이 저장된 방문 날짜와 시간과 동일하고 단말기의 현재 위치가 추천 목적지를 검색했을 때의 단말기의 위치와 동일하면 저장된 추천 목적지의 전송을 제어하는 것도 가능하다.If the current date and time are the same as the stored visit date and time, and the current location of the terminal is the same as the location of the terminal when the recommended destination is searched, it is also possible to control transmission of the stored recommended destination.

제어부(340)는 현재 날짜와 시간이 저장된 방문 날짜와 시간과 동일하나 단말기의 현재 위치가 추천 목적지를 검색했을 때의 단말기의 위치와 상이하면 단말기의 현재 위치와 인식된 카테고리에 기초하여 추천 목적지를 새로 검색하고 검색된 추천 목적지의 전송을 제어하는 것도 가능하다.If the current date and time are the same as the stored visit date and time, but the current location of the terminal is different from the location of the terminal when the recommended destination is searched for, the controller 340 selects the recommended destination based on the current location of the terminal and the recognized category. It is also possible to control the transmission of newly searched and searched recommended destinations.

제어부(340)는 한 명의 사용자에 의해 발화된 음성의 정보에 기초하여 추천 목적지를 검색하는 것도 가능하고, 두 명 이상의 사용자에 의해 발화된 음성의 정보에 기초하여 추천 목적지를 검색하는 것도 가능하다.The controller 340 may search for a recommended destination based on information on voices uttered by one user, and may also search for a recommended destination based on information on voices uttered by two or more users.

제어부(340)는 두 명 이상의 사용자가 발화하는 경우, 사운드 입력부(330)에 입력된 음성들 중 미리 등록된 음성과 일치하는 음성만을 인식하여 추천 목적지를 검색하는 것도 가능하다.When two or more users speak, the controller 340 may search for a recommended destination by recognizing only a voice matching a pre-registered voice among voices input to the sound input unit 330 .

제어부(340)는 내비게이션 기능의 동작 명령이 입력되면 입력부(311)에 입력된 최종 목적지의 정보를 확인하고, 현재 위치의 정보, 목적지의 정보 및 지도 정보에 기초하여 현재 위치에서 목적지까지의 경로를 생성하고, 지도 정보 및 경로의 정보에 기초하여 내비게이션 정보를 생성하고, 생성된 내비게이션 정보의 영상 정보 및 사운드 정보의 출력을 제어한다.When an operation command of the navigation function is input, the control unit 340 checks the final destination information input to the input unit 311, and determines a route from the current location to the destination based on the current location information, the destination information, and the map information. generating, generating navigation information based on map information and route information, and controlling output of image information and sound information of the generated navigation information.

제어부(340)는 내비게이션 기능 수행 시 추천 목적지가 검색되면 추천 목적지를 목적지로 하는 경로를 생성하고 생성된 경로의 출력을 제어할 수 있다.When a recommended destination is searched for when performing a navigation function, the controller 340 may generate a route having the recommended destination as a destination and control the output of the generated route.

제어부(340)는 인덱싱부, 주제 인식부, 카테고리 인식부, 추천 목적지 검색부, 태스크 이행 판단부 및 출력부를 포함한다.The control unit 340 includes an indexing unit, a subject recognition unit, a category recognition unit, a recommended destination search unit, a task performance determination unit, and an output unit.

이러한 단말기의 제어부(340)의 구성은 도 4에 도시된 차량의 제어부(160)의 상세 구성과 동일하여 설명을 생략한다.The configuration of the control unit 340 of the terminal is the same as the detailed configuration of the control unit 160 of the vehicle illustrated in FIG. 4 , so a description thereof will be omitted.

저장부(350)는 지도 정보를 저장하고, 사용자에 의해 입력된 최종 목적지의 정보를 저장하며, 제어부(340)에 의해 생성된 적어도 하나의 추천 목적지의 정보를 저장할 수 있다.The storage unit 350 may store map information, store information on a final destination input by a user, and store information on at least one recommended destination generated by the controller 340 .

저장부(350)는 음성 인식 및 추천 목적지의 검색에 필요한 각종 정보를 저장하는 복수 개의 데이터베이스를 포함할 수 있다. The storage unit 350 may include a plurality of databases for storing various types of information required for voice recognition and search for a recommended destination.

복수 개의 데이터베이스는 인덱싱 데이터베이스(DB), 주제 데이터베이스(DB), 태스크 데이터베이스(DB) 및 카테고리 데이터베이스(DB)를 포함한다. The plurality of databases include an indexing database (DB), a subject database (DB), a task database (DB), and a category database (DB).

통신부(360)는 외부의 서버(200) 및 차량(100)와 통신을 수행한다. The communication unit 360 communicates with the external server 200 and the vehicle 100 .

여기서 외부의 서버는 카드사의 서버, 국세청의 현금 영수증 서버일 수 있다.Here, the external server may be a server of a card company or a cash receipt server of the National Tax Service.

통신부(360)는 유무선 통신을 수행할 수 있다.The communication unit 360 may perform wired/wireless communication.

이러한 통신부(360)는 와이파이 통신, 블루투스 통신, USB 통신을 포함할 수 있다.The communication unit 360 may include Wi-Fi communication, Bluetooth communication, and USB communication.

통신부(360)는 와이브로(Wireless broadband), GSM(global System for Mobile Communication), CDMA(Code Division Multiple Access), WCDMA(Wideband Code Division Multiple Access), UMTS(universal mobile telecommunications system), TDMA(Time Division Multiple Access), LTE(Long Term Evolution) 등 다양한 무선 통신을 포함할 수 있다.The communication unit 360 includes WiBro (Wireless broadband), Global System for Mobile Communication (GSM), Code Division Multiple Access (CDMA), Wideband Code Division Multiple Access (WCDMA), universal mobile telecommunications system (UMTS), Time Division Multiple (TDMA) Access), and may include various wireless communications such as Long Term Evolution (LTE).

사운드 출력부(370)는 내비게이션 기능 수행 시 내비게이션 정보의 사운드 정보를 출력하되, 수신된 사운드 정보 내 사운드 신호를 일정 크기만큼 증폭시켜 출력한다.The sound output unit 370 outputs sound information of navigation information when performing a navigation function, but amplifies and outputs a sound signal in the received sound information by a predetermined size.

사운드 출력부(370)는 적어도 하나의 추천 목적지를 출력하거나, 사용자에 의해 선택된 추천 목적지까지의 경로를 사운드로 출력하거나, 추천 목적지의 선택 여부를 질의하는 사운드를 출력하는 것도 가능하다.The sound output unit 370 may output at least one recommended destination, output a route to the recommended destination selected by the user as sound, or output a sound for querying whether a recommended destination is selected.

사운드 출력부(370)는 음성 인식 시 음성 안내 정보 및 비프음을 출력하는 것도 가능하다.The sound output unit 370 may output voice guidance information and a beep sound during voice recognition.

차량(100)은 시동이 온되었을 때 단말기(300)로부터 추천 목적지의 정보가 수신되면 현재위치부터 추천 목적지까지의 경로를 생성하고, 생성된 경로의 출력을 제어하며, 사용자에 의해 최종 목적지가 입력되었다고 판단되면, 추천 목적지를 경유지로 설정하고, 현재 위치부터 경유지를 거쳐 최종 목적지까지 도달하는 경로를 생성하고, 생성된 경로의 출력을 제어하는 것도 가능하다.The vehicle 100 generates a route from the current location to the recommended destination when information on the recommended destination is received from the terminal 300 when the engine is turned on, controls the output of the generated route, and the final destination is input by the user If it is determined that the recommended destination is set as a waypoint, it is also possible to generate a route from the current location to the final destination through the waypoint, and to control the output of the generated route.

도 14는 다른 실시 예에 따른 차량과 통신하는 단말기의 제어 순서도이다.14 is a control flowchart of a terminal communicating with a vehicle according to another exemplary embodiment.

단말기는 음성 인식 기능의 동작 명령이 입력되면 사운드 입력부의 동작을 활성화시켜 사운드 입력부를 통해 사운드를 입력(381)받는다. When the operation command of the voice recognition function is input, the terminal activates the operation of the sound input unit and receives sound 381 through the sound input unit.

단말기는 수집된 사운드의 음파를 검출하고, 이 음파에 대응하는 전기 신호를 발생시키고 발생된 전기 신호의 주파수 특성을 프레임 별로 계산하여 음성 신호에 포함된 특징 벡터를 추출하고 추출된 특징 벡터의 벡터열을 미리 저장된 음향모델 및 음소 모델과 비교하여 전기 신호 내 음소를 인식한다.The terminal detects a sound wave of the collected sound, generates an electric signal corresponding to the sound wave, calculates the frequency characteristic of the generated electric signal for each frame, extracts a feature vector included in the voice signal, and extracts a vector sequence of the extracted feature vector is compared with the pre-stored acoustic model and phoneme model to recognize the phoneme in the electrical signal.

단말기는 인식된 음소에 대해 음소 기준의 음성 인식을 수행하여 음소 격자를 형성하고 형성된 음소 격자와 인덱싱 데이터베이스에 저장된 인덱싱 정보에 기초하여 사용자가 발화한 음성에 대응하는 문자를 인식한다.The terminal forms a phoneme grid by performing phoneme-based speech recognition on the recognized phonemes, and recognizes a character corresponding to the voice uttered by the user based on the formed phoneme grid and indexing information stored in the indexing database.

단말기는 인식된 문자와 주제 데이터베이스에 저장된 주제 정보에 기초하여 사용자가 발화한 음성에 대응하는 주제를 인식(382)한다.The terminal recognizes ( 382 ) the subject corresponding to the voice uttered by the user based on the recognized text and subject information stored in the subject database.

예를 들어, 단맑는 무엇을 사야 해, 무엇이 필요 해 등에서의 무엇에 대응하는 물품명의 단어와, 사다 및 필요하다 등의 동사의 단어를 인식함으로써 물품을 구매 주제임을 인식할 수 있다.For example, by recognizing the words of the product name corresponding to what in what to buy, what is needed, and the like, and the words of verbs such as buy and need, it is possible to recognize that the product is the subject of purchase.

또한 단말기는 어디에 가야 해, 어디로 오래, 무엇을 해야 해, 무엇이 안돼, 무엇이 고장이야, 무엇이 망가졌어 등에서의 어디에 대응하는 장소명의 단어와, 무엇에 대응하는 수리가 필요한 물품명의 단어와, 가다, 하다, 안 된다, 고장이다, 망가지다 등의 동사의 단어를 인식함으로써 특정 장소를 방문해야 하는 장소 방문 주제임을 인식할 수 있다.In addition, the terminal corresponds to where to go, where to go for a long time, what to do, what is wrong, what is broken, what is broken, etc., and the word for the name of the item that needs repair, and the word for the item that needs repair. By recognizing the words of verbs such as , no, broken, broken, etc., it is possible to recognize that it is a subject of a visit to a specific place.

즉 단말기는 사용자의 발화 중 차량을 통해 특정한 장소로 이동하여 태스크를 이행해야 주제에 대한 인식을 수행한다.That is, the terminal must move to a specific place through the vehicle during the user's utterance and perform the task to recognize the subject.

단말기는 인식된 주제와 태스크 데이터베이스에 저장된 태스크 정보에 기초하여 태스크를 인식(383)하며, 카테고리 데이터베이스에 저장된 카테고리 정보에 기초하여 인식된 태스크에 대응하는 카테고리를 인식(384)한다.The terminal recognizes ( 383 ) the task based on the recognized subject and task information stored in the task database, and recognizes ( 384 ) a category corresponding to the recognized task based on the category information stored in the category database.

좀 더 구체적으로, 단말기는 복수 개의 태스크를 카테고리별로 각각 구분함으로써 태스크를 그룹핑할 수 있다.More specifically, the terminal may group the tasks by classifying each of the plurality of tasks by category.

예를 들어, 단말기는 복수 개의 태스크가 사과, 귤, 배, 화장지, 칫솔의 구매이면, 사과, 귤, 배를 과일 카테고리로 그룹핑하고, 화장지와 칫솔을 위생용품의 카테고리로 그룹핑한다.For example, if the plurality of tasks are the purchase of apples, tangerines, pears, toilet paper, and toothbrushes, the terminal groups apples, tangerines, and pears into fruit categories, and groups toilet paper and toothbrushes into categories of hygiene products.

단말기는 위치 수신부(320)에서 수신된 현재 위치를 확인하고, 확인된 현재 위치의 위치 정보에 기초하여 관심 지점(POI: Position of Interest)을 검색(385)한다. 여기서 관심 지점은 도로 주변 건물의 위치의 정보를 포함할 수 있다.The terminal checks the current location received from the location receiver 320 and searches ( 385 ) a position of interest (POI) based on the confirmed location information of the current location. Here, the point of interest may include information on the location of a building near a road.

단말기는 인식된 카테고리 및 관심 지점에 기초하여 사용자에게 추천할 추천 목적지들을 검색(386)하고 검색된 추천 목적지들 중에서 차량에 전송할 적어도 하나의 추천 목적지를 결정하고, 결정된 추천 목적지의 정보를 저장(387)한다. The terminal searches for recommended destinations to be recommended to the user based on the recognized category and point of interest ( 386 ), determines at least one recommended destination to be transmitted to the vehicle from among the searched recommended destinations, and stores information on the determined recommended destination ( 387 ) do.

예를 들어, 단말기는 태스크가 복수 개이고, 추천 목적지가 복수 개 검색되었을 때 복수 개의 추천 목적지 중 복수 개의 태스크를 하나의 장소 또는 최소한의 장소에서 이행할 수 있도록 하는 적어도 하나의 장소를 추천 목적지로 결정하고 결정된 추천 목적지의 정보를 저장한다.For example, when the terminal has a plurality of tasks and a plurality of recommended destinations are searched for, the terminal determines at least one place that allows a plurality of tasks to be performed in one place or at least one place among the plurality of recommended destinations as the recommended destination. and store the information of the determined recommended destination.

단말기는 차량과의 통신이 가능한지 판단(388)하고, 차량과 통신이 가능하다고 판단되면 저장된 추천 목적지의 정보를 차량에 전송(389)한다.The terminal determines whether communication with the vehicle is possible (388), and when it is determined that communication with the vehicle is possible, the stored recommended destination information is transmitted to the vehicle (389).

단말기는 차량의 주행 중 태스크 이행 정보를 확인(390)하고, 확인된 태스크 이행 정보에 기초하여 태스크 이행 여부를 판단(391)함으로써 추천 목적지의 도착 여부를 판단할 수 있다.The terminal may determine whether the recommended destination has arrived by checking ( 390 ) task fulfillment information while driving the vehicle, and determining ( 391 ) whether to perform the task based on the checked task fulfillment information.

좀 더 구체적으로 단말기는 위치 수신부(320)에 수신된 현재 위치의 위치 정보와 추천 목적지의 위치 정보를 확인하고, 현재 위치의 위치 정보와 추천 목적지의 위치 정보가 동일한지 판단하고 현재 위치의 위치 정보와 추천 목적지의 위치 정보가 동일하다고 판단되면 사용자의 태스크 이행으로 판단한다.More specifically, the terminal checks the location information of the current location and the location information of the recommended destination received by the location receiving unit 320, determines whether the location information of the current location and the location information of the recommended destination are the same, and determines the location information of the current location If it is determined that the location information of the and the recommended destination is the same, it is determined that the user has performed the task.

즉 단말기는 현재 위치의 위치 정보와 추천 목적지의 위치 정보로부터 사용자가 추천 목적지에 방문하였는지 판단할 수 있다.That is, the terminal may determine whether the user has visited the recommended destination from the location information of the current location and the location information of the recommended destination.

또한 단말기는 서버(200)로부터 수신된 결제 정보의 상호 정보 및 전화번호 중 적어도 하나를 확인하고 확인된 적어도 하나의 결제 정보와 추천 목적지의 상호 정보 및 전화번호 정보에 기초하여 추천 목적지에서 사용자가 태스크를 이행하였는지를 판단할 수 있다. 즉, 단말기는 결제 정보로부터 사용자가 물건을 구매하였는지 판단할 수 있다.In addition, the terminal checks at least one of the mutual information and the phone number of the payment information received from the server 200, and based on the checked at least one payment information and the business information and the phone number information of the recommended destination, the user performs the task at the recommended destination It can be determined whether the That is, the terminal may determine whether the user has purchased the product from the payment information.

또한 단말기는 현재 위치의 위치 정보와 추천 목적지의 위치 정보의 비교 정보 및 결제 정보로부터 추천 목적지에 방문하여 물건을 구매하였는지 판단할 수 있다.In addition, the terminal may determine whether the product was purchased by visiting the recommended destination based on the comparison information of the current location location information and the location information of the recommended destination and the payment information.

단말기는 사용자가 태스크를 이행하였다고 판단(391)되면 추천 목적지에 도착하였다고 판단하고, 차량과의 통신을 종료(392)한다.When it is determined that the user has performed the task ( 391 ), the terminal determines that the recommended destination has arrived, and terminates the communication with the vehicle ( 392 ).

반면 단말기는 태스크 불이행으로 판단되면 현재 위치와 인식된 카테고리에 기초하여 추천 목적지를 다시 검색한다.On the other hand, if it is determined that the task is not fulfilled, the terminal searches for the recommended destination again based on the current location and the recognized category.

좀 더 구체적으로, 단말기는 위치 수신부(320)에서 수신된 현재 위치를 확인하고, 확인된 현재 위치에 기초하여 관심 지점을 검색(393)하고 검색된 관심 지점과 인식된 카테고리에 기초하여 사용자에게 추천할 새로운 추천 목적지들을 검색(394)하고 검색된 추천 목적지들 중 적어도 하나의 새로운 추천 목적지를 차량에 전송(395)한다.More specifically, the terminal checks the current location received from the location receiving unit 320, searches 393 for a point of interest based on the identified current location, and recommends to the user based on the searched point of interest and the recognized category. New recommended destinations are searched for ( 394 ) and at least one new recommended destination among the searched recommended destinations is transmitted ( 395 ) to the vehicle.

단말기는 차량의 주행 중 태스크 이행 정보를 확인하고 확인된 태스크 이행 정보에 기초하여 태스크 이행 여부를 판단한다. 이 과정은 위에서 설명한 바와 동일하여 자세한 설명을 생략한다.The terminal checks task fulfillment information while driving the vehicle and determines whether to perform the task based on the checked task fulfillment information. This process is the same as described above, so a detailed description will be omitted.

도 15는 다른 실시 예에 따른 차량의 제어 순서도이다.15 is a control flowchart of a vehicle according to another exemplary embodiment.

차량은 시동이 온(421)되면 단말기와의 통신을 수행(422)한다.When the vehicle is started (421), it communicates with the terminal (422).

차량은 단말기와의 통신이 가능하면 단말기로부터 추천 목적지의 정보를 수신(423)한다.If communication with the terminal is possible, the vehicle receives ( 423 ) information on the recommended destination from the terminal.

차량은 현재 위치를 확인하고 확인된 현재 위치에서 추천 목적지까지의 경로를 생성(424)하고, 생성된 경로로 길을 안내(425)한다.The vehicle confirms the current location, generates a route from the checked current location to the recommended destination (424), and guides the road to the generated route (425).

차량은 주행 중 단말기로부터 새로운 추천 목적지의 정보가 수신되는지 판단(426)하고, 새로운 추천 목적지의 정보가 수신되지 않았다고 판단되면 현재 위치가 추천 목적지의 위치인지 판단(427)하며, 현재 위치가 추천 목적지의 위치라고 판단되면 경로 안내를 종료(428)한다.The vehicle determines whether information on a new recommended destination is received from the terminal while driving (426), and when it is determined that information on a new recommended destination is not received, determines whether the current location is a location of the recommended destination (427), and the current location is the recommended destination If it is determined that the location of the route guide ends (428).

차량은 단말기로부터 새로운 추천 목적지의 정보가 수신되었다고 판단되면 현재 위치에서 새로운 목적지까지의 새로운 경로를 생성(429)하고, 새로운 경로로 길을 안내(430)한다.When it is determined that the information of the new recommended destination is received from the terminal, the vehicle creates a new route from the current location to the new destination ( 429 ), and guides the route to the new route ( 430 ).

차량은 현재 위치가 새로운 추천 목적지의 위치라고 판단되면 경로 안내를 종료(428)한다.When it is determined that the current location is the location of the new recommended destination, the vehicle ends the route guidance ( 428 ).

1: 차량 130: 위치 획득부
140: 통신부 150: 사운드 입력부
160: 제어부 170: 저장부
180: 사운드 출력부 200: 서버
300: 단말기1: vehicle 130: location acquisition unit
140: communication unit 150: sound input unit
160: control unit 170: storage unit
180: sound output unit 200: server
300: terminal

Claims

a location receiver for receiving a current location;
a sound input unit for receiving a voice uttered by a user;
Recognizes the input user's voice, recognizes a task based on the recognized voice, and if there are a plurality of recognized tasks, classifies the plurality of tasks by category, groups them by category, and recommends based on the grouped category and current location a control unit that searches for a destination;
a storage unit for storing information on the searched recommended destination; and
A terminal comprising a communication unit that communicates with the vehicle and transmits information of the recommended destination stored in the storage unit to the vehicle.

According to claim 1, wherein the storage unit,
an indexing database that stores indexing information;
a subject database for storing subject information;
a task database for storing task information;
A terminal that further stores a category database for storing category information.

According to claim 2, wherein the control unit,
Recognizing a word based on the phoneme of the recognized voice and indexing information stored in the indexing database, recognizing a subject of the user's utterance based on the recognized word and subject information stored in the subject database, and the recognition a subject recognition unit for recognizing a task to be performed by the user based on the completed subject and task information of the task database;
and a category recognition unit for recognizing a category of the recognized task based on category information of the category database, and grouping the recognized task into categories based on the recognized category.

According to claim 3, wherein the control unit,
A recommended destination search unit that searches for a point of interest within a certain distance based on the current location, searches for at least one recommended destination based on the searched point of interest and the grouped category, and outputs information on the found at least one recommended destination Further comprising a terminal.

According to claim 4, wherein the control unit,
The terminal further comprising: a task fulfillment determination unit for determining whether to perform a task to determine a current location, and to determine whether to perform a task based on the confirmed current location and the location of the recommended destination.

The method of claim 5, wherein the task performance determination unit,
The terminal further comprising receiving payment information from an external server and determining whether to perform a task based on the received payment information.

The method of claim 6, wherein the recommended destination search unit,
The terminal further comprising: when task failure information is received from the task performance determination unit, searching for a new recommended destination based on the identified current location and the grouped category, and outputting information on the found new recommended destination.

The method of claim 4, wherein the recommended destination search unit,
and searching for a recommended destination capable of performing the plurality of tasks at once if the recognized task is plural.

The method of claim 4, wherein the recommended destination search unit,
and searching for a recommended destination that allows the plurality of tasks to be performed in a minimum number of destinations if the recognized task is plural.

The method of claim 4, wherein the recommended destination search unit,
If there are a plurality of searched recommended destinations, the terminal comprising outputting information on the closest recommended destination from the current location among the plurality of recommended destinations.

According to claim 1, wherein the control unit,
and storing information of the grouped category when a command to postpone the task is received.

delete

a location receiver for receiving a current location;
a sound input unit for receiving a voice uttered by a user;
Recognizes the input user's voice, recognizes a task based on the recognized voice, and if there are a plurality of recognized tasks, classifies the plurality of tasks by category, groups them by category, and recommends based on the grouped category and current location a control unit that searches for a destination and performs a navigation function based on the searched recommended destination information;
and a user interface for displaying navigation information corresponding to the navigation function.

15. The method of claim 14,
an indexing database that stores indexing information;
a subject database for storing subject information;
a task database for storing task information; and
A vehicle further comprising a category database for storing category information.

16. The method of claim 15, wherein the control unit,
Recognizing a word based on the phoneme of the recognized voice and indexing information stored in the indexing database, recognizing a subject of the user's utterance based on the recognized word and subject information stored in the subject database, and the recognition a subject recognition unit for recognizing a task to be performed by the user based on the completed subject and task information of the task database;
and a category recognition unit that recognizes a category of the recognized task based on category information of the category database, and groups the recognized task into categories based on the recognized category.

The method of claim 16, wherein the control unit,
A recommended destination search unit that searches for a point of interest within a certain distance based on the current location, searches for at least one recommended destination based on the searched point of interest and the grouped category, and outputs information on the found at least one recommended destination More inclusive vehicles.

The method of claim 17, wherein the control unit,
The vehicle further comprising: a task fulfillment determining unit that checks a current location and determines whether to perform a task based on the checked current location and the location of the recommended destination.

The method of claim 18, wherein the task performance determination unit,
The vehicle further comprising receiving payment information from an external server and determining whether to perform a task based on the received payment information.

The method of claim 19, wherein the recommended destination search unit,
The vehicle further comprising: when task failure information is received from the task performance determination unit, searching for a new recommended destination based on the identified current location and the grouped category, and outputting information on the searched new recommended destination.

The method of claim 17, wherein the recommended destination search unit,
and searching for a minimum number of recommended destinations that allow the plurality of tasks to be performed in the minimum number of destinations if the recognized task is plural.

The method of claim 17, wherein the recommended destination search unit,
If there are a plurality of searched recommended destinations, the vehicle comprising outputting information on a recommended destination closest to the current location from among the plurality of recommended destinations.

15. The method of claim 14, wherein the control unit,
and storing the grouped category information when a task deferral command is received.