KR20150078534A - 차량에서의 정보 제공을 위한 시스템 - Google Patents

차량에서의 정보 제공을 위한 시스템 Download PDF

Info

Publication number
KR20150078534A
KR20150078534A KR1020130167977A KR20130167977A KR20150078534A KR 20150078534 A KR20150078534 A KR 20150078534A KR 1020130167977 A KR1020130167977 A KR 1020130167977A KR 20130167977 A KR20130167977 A KR 20130167977A KR 20150078534 A KR20150078534 A KR 20150078534A
Authority
KR
South Korea
Prior art keywords
information
vehicle
user
multimedia
recognition
Prior art date
Application number
KR1020130167977A
Other languages
English (en)
Other versions
KR101551037B1 (ko
Inventor
문성환
Original Assignee
현대자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사 filed Critical 현대자동차주식회사
Priority to KR1020130167977A priority Critical patent/KR101551037B1/ko
Priority to US14/509,458 priority patent/US20150187351A1/en
Priority to CN201410569287.XA priority patent/CN104750767A/zh
Publication of KR20150078534A publication Critical patent/KR20150078534A/ko
Application granted granted Critical
Publication of KR101551037B1 publication Critical patent/KR101551037B1/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Navigation (AREA)

Abstract

본 발명은 차량에서의 정보 제공을 위한 시스템에 관한 것으로서, 정보 요청을 위한 사용자 입력에 대하여 사용자 입력의 부분적인 인식만이 가능한 상황에서 부분 인식 결과 및 수집된 사용자 패턴 정보, 차량 정보 등을 이용하여 사용자 입력을 정확히 추정 인식할 수 있는 시스템을 제시하는데 주된 목적이 있는 것이다. 본 발명에 따른 차량에서의 정보 제공을 위한 시스템에서는 사용자 입력 정보(사용자 입력의 부분 인식 정보)와 더불어 차량 정보와 사용자 패턴 정보를 분석하여 사용자 입력을 정확히 추정 인식할 수 있도록 구성됨으로써 사용자 입력에 대한 인식률을 높일 수 있게 되고, 사용자가 요청한 정확한 정보를 차량에서 제공할 수 있게 된다.

Description

차량에서의 정보 제공을 위한 시스템{System for providing user with information in vehicle}
본 발명은 정보 제공 시스템에 관한 것으로, 더욱 상세하게는 차량에서 사용자가 음성입력 또는 필기입력, 영상입력 등을 통한 정보 요청 입력을 행한 경우 사용자 정보 요청 입력을 정확히 인식하여 필요한 정보를 제공할 수 있는 시스템에 관한 것이다.
오늘날 멀티미디어 기술의 발전은 운전자에게 인포테인먼트를 제공할 수 있는 편안한 자동차(comfortable car), 편리한 자동차(convenience car)로의 진화를 유도하고 있으며, 이러한 자동차의 진화는 운전자를 대상으로 하는 정보전달 기술의 발전으로 이어지고 있다.
또한, 자동차의 복잡성과 다양한 운행패턴으로 인해 운전자는 운전 중 더 많은 기기를 조작하게 되었고, 더불어 자동차 내/외부로부터 더 많은 정보를 요구하게 되었으며, 운전자에게 제공되는 정보의 종류도 음향, 문자, 그래픽, 영상 등의 형태로 매우 다양해지고 있다.
또한, 차량에는 운전자 편의를 위한 각종 편의장치들이 장착되고 있는데, 그 예로 차량용 오디오/비디오 시스템(Audio/Video System)이나 지도 정보, 교통 정보 등을 제공하는 차량용 내비게이션 시스템(Navigation System) 등을 들 수 있다.
최근에는 오디오, 비디오, 내비게이션 시스템이 통합된 형태이면서 차량 내/외부와 통신 가능한 단말기를 포함하는 AVN(Audio Video & Navigation) 시스템이 차량에 장착되고 있으며, 이러한 AVN 시스템은 차량에서 운전자가 원하는 각종 운행 관련 정보나 위치 및 지도 정보, 오디오 및 비디오 등의 미디어 정보를 음향으로 출력하거나 시각적으로 표시하여 운전자에게 제공한다.
한편, 이동통신단말기의 부가기능 중 음성입력을 통한 전화걸기나 단말기의 각종 동작제어(단말기의 각종 기능제어나 사용자 요청정보 제공) 등을 수행하는 음성인식 기능은 종래부터 존재하였는데, 음성인식 기술은 기계, 즉 컴퓨터를 사용하여 인간의 음성신호를 인식하고 내재된 언어정보를 파악하여 필요한 작업을 실행시키는 기술을 말한다.
일례로, 음성인식 기능 중 전화걸기 기능은 사용자가 이동통신단말기의 메모리에 전화번호 등의 연락처를 저장한 뒤 이동통신단말기에 음성을 입력하면 해당 연락처의 전화번호를 인출하여 자동으로 전화걸기를 수행하는 기능이다.
이러한 음성인식 기능은 차량에도 일부 적용되고 있으며, 최근 운전자 정보 요구가 늘어남에 따라 음성인식모듈을 차량 단말기와 연계시켜 운전자가 운전 중 음성으로 정보를 요청하면 차량 단말기가 음성인식모듈을 통해 인식된 운전자 음성 요청에 따라 차량에서 운전자가 원하는 정보를 제공하는 형태로 발전해가고 있다.
하지만, 차량에서 음성인식모듈의 음성인식률에 있어서 아직까지는 미흡한 측면이 있고, 운전 중인 운전자의 음성을 인식할 때 차량 내/외부 환경의 영향도 받기 때문에 운전자 음성을 정확히 인식하지 못하여 운전자가 요청한 정보를 정확히 제공하기 어려울 수 있다.
또한, 운전자가 원하는 한정된 정보만을 제공할 뿐 운전자가 필요할 수도 있는 유용한 부가 정보를 제공하지 못하는 운용상의 제약이 있다.
상기한 목적을 달성하기 위하여, 본 발명은 정보 요청을 위한 사용자 입력에 대하여 사용자 입력의 부분적인 인식만이 가능한 상황에서 부분 인식 결과 및 수집된 사용자 패턴 정보, 차량 정보 등을 이용하여 사용자 입력을 정확히 추정 인식할 수 있는 시스템을 제공하는데 목적이 있는 것이다.
또한, 본 발명은 차량에서 필요한 정보를 얻기 위하여 행한 사용자 음성입력이 있는 경우, 또는 그 밖에 정보 요청을 위한 다양한 방식의 사용자 입력, 예를 들어 필기입력이나 영상입력 등이 있는 경우, 사용자 입력 데이터, 사용자 패턴 정보, 차량 정보 등을 이용하여 사용자가 요청한 정보 및 부가 정보를 제공할 수 있는 정보 제공 시스템을 제시하는데 그 목적이 있다.
상기한 목적을 달성하기 위해, 본 발명은, 차량에서의 정보 제공을 위한 시스템은, 차량에서 사용자가 입력하는 멀티미디어 입력 데이터를 인식하기 위한 멀티미디어 인식 시스템을 포함하는 차량에서의 정보 제공을 위한 시스템에 있어서, 상기 멀티미디어 인식 시스템이, 차량 내에 구비되어 사용자의 멀티미디어 입력 데이터를 전달하는 멀티미디어 인식 모듈; 차량 내에 구비되어 차량 정보를 전달하는 차량 정보 전송부; 상기 멀티미디어 인식 모듈로부터 전송되는 멀티미디어 입력 데이터를 멀티미디어 중계 서버를 통해 전달받아 인식 가능한 정보를 추출하고 추출된 부분 인식 결과 정보를 전달하는 멀티미디어 인식 서버; 사용자의 휴대단말기 이용 정보 또는 사용자의 차량 단말기 이용 정보 또는 소비 패턴 정보를 포함하는 사용자 패턴 정보를 수집하여 전달하는 사용자 패턴 수집 서버; 및 상기 부분 인식 결과 정보와 차량 정보, 사용자 패턴 정보를 수신하여 분석함으로써 사용자 멀티미디어 입력에 대한 최종 인식 결과를 도출하여 차량에서의 이용이 가능하도록 전달하는 사용자 패턴 분석 서버를 포함하는 것을 특징으로 한다.
이에 따라, 본 발명에 따른 차량에서의 정보 제공을 위한 시스템에 의하면, 사용자 입력 정보(사용자 입력의 부분 인식 정보)와 더불어 차량 정보와 사용자 패턴 정보를 분석하여 사용자 입력을 정확히 추정 인식할 수 있도록 구성됨으로써 사용자 입력에 대한 인식률을 높일 수 있게 되고, 사용자가 요청한 정확한 정보를 차량에서 제공할 수 있게 된다.
도 1은 본 발명의 실시예에 따른 시스템의 구성을 나타내는 블록도이다.
도 2는 본 발명에서 정보 요청을 위한 사용자 입력을 인식하는 방법을 나타내는 순서도이다.
이하, 첨부한 도면을 참조하여 본 발명의 실시예에 대해 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명하기로 한다.
본 발명은 차량에서의 정보 제공을 위한 시스템에 관한 것으로서, 사용자가 음성입력 또는 필기입력, 영상입력 등을 통한 정보 요청 입력을 행한 경우 사용자 정보 요청 입력을 인식하여 차량 내에서 운전자가 필요로 하는 정보를 제공할 수 있는 시스템을 제시하고자 하는 것이다.
특히, 본 발명은 정보 요청을 위한 사용자 입력에 대하여 사용자 입력의 부분적인 인식만이 가능한 상황에서 부분 인식 결과 정보 및 사용자 패턴 정보, 차량 정보 등을 이용하여 사용자 입력을 정확히 추정 인식할 수 있는 시스템을 제공하는데 목적이 있는 것이다.
이러한 본 발명은 종래의 사용자 입력 인식 기술, 예를 들어 음성입력 기술이 가지는 문제점을 보완할 수 있는 기술로서, 사용자 입력 데이터(멀티미디어 입력 데이터)와 차량 정보를 수집 및 분석함 더불어 사용자 휴대단말기의 GPS 정보 및 휴대단말기에서의 검색 정보, 신용카드 이용 정보 등을 수집하여 사용자 행동을 분석함으로써 상황에 가장 적합한 사용자 입력의 인식 결과를 추정하는 점에 주된 특징이 있다.
도 1은 본 발명의 실시예에 따른 시스템의 구성을 나타내는 블록도이고, 도 2는 본 발명에서 정보 요청을 위한 사용자 입력을 인식하는 방법을 나타내는 순서도이다.
이하, 본 발명의 설명에서 멀티미디어 입력은 차량(1) 내에서 운전자가 필요한 정보의 요청을 위해 행하는 사용자 입력, 즉 사용자의 정보 요청 입력을 의미하며, 이는 마이크와 같은 음성입력수단 및 음성인식모듈을 통한 음성입력이나, 필기입력수단 및 필기인식모듈을 통한 필기입력, 또는 카메라 및 영상인식모듈을 통한 영상입력 등이 될 수 있다.
이와 같이 음성입력이나 필기입력 또는 영상입력 등과 같이 사용자가 정보 요청을 위해 행하는 사용자 입력(사용자 정보 요청 입력)을 본 명세서에서는 멀티미디어 입력이라 통칭하기로 한다.
또한, 음성입력이나 필기입력 또는 영상입력 등의 방식으로 입력되는 사용자 입력 데이터(정보 요청을 위한 입력 데이터)를 멀티미디어 입력 데이터라 통칭하며, 차량(1)에서 멀티미디어 입력 데이터를 인식할 수 있는 모듈(음성인식모듈, 필기인식모듈, 영상인식모듈 등)을 멀티미디어 인식 모듈(11)이라 통칭한다.
먼저, 실시예의 정보 제공을 위한 시스템은 정보 요청을 위한 사용자의 멀티미디어 입력 데이터를 인식하기 위한 시스템, 즉 멀티미디어 인식 시스템을 포함한다.
또한, 실시예의 시스템에서, 상기 멀티미디어 인식 시스템은, 도 1에 나타낸 바와 같이, 차량(1) 내에 구비되는 멀티미디어 인식 모듈(11)과 차량 정보 전송부(12)를 포함하고, 더불어 차량(1) 외부에 구비되는 시스템 구성으로 멀티미디어 중계 서버(21)와 멀티미디어 인식 서버(22), 사용자 패턴 수집 서버(23), 사용자 패턴 분석 서버(24)를 포함한다.
또한, 상기한 멀티미디어 인식 시스템과 더불어 차량(1) 외부의 콘텐츠 공급부(28), 차량(1) 내부의 정보 출력부(13)를 구비함으로써 차량(1)에서의 정보 제공을 위한 실시예의 시스템이 구성된다.
먼저, 멀티미디어 인식 모듈(11)은 전술한 바와 같이 음성인식모듈, 필기인식모듈 및 영상인식모듈 중 적어도 하나 이상을 포함하는 구성이 될 수 있고, 사용자가 정보 요청을 위해 멀티미디어 입력(음성입력, 필기입력, 영상입력)을 행하게 되면 멀티미디어 입력 데이터에 대한 1차적인 인식을 수행하게 된다.
여기서, 차량(1)의 멀티미디어 인식 모듈(11)은 사용자에 의해 입력된 멀티미디어 입력 데이터를 기준치 이상의 인식값으로 자체 인식한 경우(인식값≥기준치), 그 인식 결과를 최종 인식 결과로 처리한다.
즉, 최종 인식 결과를 정보 출력부(13)를 통해 표시하면서, 최종 인식 결과에 따라 차량(1)의 정보 출력부(13)에서 사용자 요청 정보의 출력이 이루어지도록 하며, 운전자가 요청한 정보가 차량(1)의 스피커나 디스플레이 등의 정보 출력부(13)를 통해 표시되도록 하는 것이다.
여기서, 최종 인식 결과는 하나의 인식 결과가 될 수도 있지만, 가능성이 있는 복수의 인식 결과를 리스트 형태로 추출하여 표시한 뒤 사용자가 최종 선택하도록 하는 방식의 적용도 가능하다.
또한, 차량(1)의 멀티미디어 인식 모듈(11)은 사용자의 멀티미디어 입력 데이터에 대하여 기준치 미만의 인식값으로 부분적으로만 인식을 성공한 경우(인식값<기준치), 이러한 인식 결과를 통해서는 사용자가 요청한 정보를 제공할 수 없으므로, 입력된 멀티미디어 입력 데이터(로우(raw) 데이터)를 무선 통신을 통해 외부로 전송한다.
이때, 차량(1)의 멀티미디어 인식 모듈(11)로부터 전송되는 멀티미디어 입력 데이터는 멀티미디어 중계 서버(21)를 거쳐 멀티미디어 인식 서버(22)로 수신되고, 멀티미디어 인식 서버(22)는 사용자 입력 로우 데이터인 멀티미디어 입력 데이터에서 인식 가능한 정보를 추출하여 추출된 부분 인식 결과 정보(부분 인식 성공 데이터)를 사용자 패턴 수집 서버(23)를 통해 사용자 패턴 분석 서버(24)로 전달하거나, 또는 사용자 패턴 분석 서버(24)로 직접 전달한다.
한편, 차량(1)에 구비되는 차량 정보 전송부(12)는 차종, 차속, 현 위치, 운행 패턴 등의 차량 정보를 무선 통신을 통해 사용자 패턴 분석 서버(24)로 전송하도록 구비된다.
또한, 사용자 패턴 수집 서버(23)는 사용자 휴대단말기(2) 또는 신용카드 정보 제공부(3)로부터 휴대단말기(2)나 신용카드의 이용에 따른 사용자 패턴 정보를 입력받아 수집한다.
이때, 사용자 패턴 수집 서버(23)는 휴대단말기(2)의 위치 정보인 GPS 정보와, 사용자가 휴대단말기(2)를 통해 검색을 수행하였을 때 수집되는 검색 키워드 등의 검색 정보를 사용자 휴대단말기(2)로부터 입력받게 된다.
또한, 사용자 패턴 수집 서버(23)는 신용카드 정보 제공부(3)로부터 사용자 신용카드 할인 혜택 정보 등의 정보와, 사용자 소비 패턴을 나타내는 신용카드 결제 정보 등을 포함하는 신용카드 이용에 대한 정보(신용카드 이용 정보, 즉 소비 패턴 정보) 등을 입력받게 된다.
위에서 사용자 패턴 수집 서버(23)가 수집하는 사용자 패턴 정보로는 휴대단말기(2)와 신용카드의 이용에 따른 정보들이 될 수 있음을 예로 들어 설명하였나, 이러한 정보들은 사용자 패턴 정보의 예를 나타내는 것일 뿐, 본 발명에서 사용자 패턴 정보가 상기한 휴대단말기(2)와 신용카드의 이용에 따른 정보로 반드시 한정되는 것은 아니다.
즉, 사용자 패턴 수집 서버(23)가 입력받아 수집하는 사용자 패턴 정보로서 휴대단말기(2)에서뿐만 아니라 차량 단말기에서의 이용 정보, 즉 차량 단말기에서의 사용자 검색 정보, 예를 들면 웹상의 포털 사이트에서 검색을 수행하였을 때 수집되는 검색 키워드 등의 정보 검색 이력이나 정보 검색에 관한 정보가 포함될 수도 있다.
또한, 사용자의 휴대단말기와 차량 단말기에서의 SNS를 통한 정보 검색 이력이나 정보 검색에 관한 정보를 포함하는 SNS 이용 정보, 또는 사용자가 행한 주가 검색, 음원 검색의 검색 정보 등이 사용자 패턴 수집 서버(23)가 수집하는 사용자 패턴 정보에 포함될 수도 있으며, 상기와 같이 휴대단말기(2)와 신용카드 정보 제공부, 차량 단말기 등 사용자 패턴 정보를 수집하는 다양한 수집원이 본 발명에서 적용 가능하다.
더불어, 사용자 패턴 수집 서버(23)는 멀티미디어 인식 서버(22)와 사용자 휴대단말기(2), 신용카드 정보 제공부(3) 등으로부터 수집되는 데이터를 사용자 패턴 분석 서버(24)로 전달한다.
이때, 사용자 패턴 분석 서버(24)는 사용자 패턴 수집 서버(23)로부터 전달된 데이터(부분 인식 결과 정보 및 사용자 패턴 정보)와 차량 정보 전송부(12)로부터 전달된 차량 정보를 분석하여 사용자 멀티미디어 입력에 대한 최종 인식 결과를 도출한 후 차량(1)으로 무선 전송하게 된다.
이에 차량(1)의 멀티미디어 인식 모듈(11)이 최종 인식 결과를 수신하여 최종 인식 결과를 표시함으로써 사용자 멀티미디어 입력에 대한 인식을 종료하게 되고, 더불어 차량(1)의 정보 출력부(13)에서 사용자 요청 정보의 출력이 이루어지도록 하게 된다.
이 과정에서, 사용자 패턴 분석 서버(24)는 부분 인식 결과 정보와 사용자 패턴 정보, 그리고 차량의 현 위치 등 차량 정보로부터 추출된 현 위치 주변 정보 또는 차량 현 위치 주변의 POI(Point of Interest) 정보를 분석함으로써 사용자 멀티미디어 입력에 대한 최종 인식 결과를 도출할 수 있다.
이와 함께 사용자 패턴 분석 서버(24)는 도출된 최종 인식 결과를 차량(1)으로 전송함과 더불어 수집된 정보(차량 정보, 휴대단말기 이용 정보, 신용카드 이용 정보 등)와 그 분석된 결과 정보를 데이터베이스부(27)에 축적하여 관리하게 된다.
또한, 사용자 패턴 분석 서버(24)가 차량(1)으로 전송하는 최종 인식 결과는 차량 정보와 부분 인식 결과 정보, 사용자 패턴 정보를 기반으로 분석하여 얻은 복수의 인식 결과를 포함하는 리스트 형태의 정보가 될 수 있다.
이 경우, 차량(1)에서 리스트 형태의 최종 인식 결과가 수신되어 정보 출력부(13)를 통해 표시되고, 이에 사용자가 리스트 중 자신이 입력한 것을 선택함으로써 멀티미디어 입력에 대한 인식 과정이 모두 종료되게 된다.
요컨대, 사용자 패턴 분석 서버(24)는 사용자의 멀티미디어 입력을 정확히 추정 인식하기 위해 차량 정보 전송부(12)로부터 전달된 차량 정보, 그리고 사용자 패턴 수집 서버(23)를 통해 전달된(또는 멀티미디어 인식 서버로부터 직접 전달된) 부분 인식 결과 정보(부분 인식 성공 데이터)와, 사용자 패턴 수집 서버(23)에서 수집된 사용자 패턴 정보를 분석하는데, 여기서 사용자 패턴 정보는 휴대단말기 이용 정보인 검색 정보와 GPS 정보, 그리고 신용카드 할인 혜택 정보와 신용카드 결제 정보 등의 소비 패턴 정보(신용카드 이용 정보) 등이 된다.
또한, 실시예의 정보 제공을 위한 시스템에서, 사용자 패턴 분석 서버(24)는, 전술한 바와 같이 수집된 차량 정보, 부분 인식 결과 정보 및 사용자 패턴 정보(휴대단말기 이용 정보 및 소비 패턴 정보(신용카드 이용 정보))를 분석하여 사용자 멀티미디어 입력에 대한 인식을 수행하고 추정된 최종 인식 결과를 차량(1)으로 전송하는 멀티미디어 분석 서버(26)와, 수집된 차량 정보와 사용자 패턴 정보를 분석하여 위치기반서비스(Location Based Service,LBS)를 제공하기 위한 분석 결과를 도출해내는 LBS 분석 서버(25)를 포함하여 구성될 수 있다.
여기서, 상기 LBS 분석 서버(25)는 수집된 차량 정보와 함께 특히 사용자 패턴 정보의 소비 패턴 등을 분석하여 그 분석 결과를 제휴 사업자의 서버인 콘텐츠 공급부(28)에 전달한다.
이에 콘텐츠 공급부(28)에서는 LBS 분석 서버(25)로부터 전달된 사용자 분석 결과를 토대로 사용자 개인에게 특화된 맞춤형 정보인 개인화 정보가 생성되고, 이러한 개인화 정보는 차량(1)으로 전달되어 사용자에게 유용한 정보로 활용될 수 있도록 제공된다.
여기서, 개인화 정보는 쿠폰 정보, 할인 가능한 주유소 정보, 음식점 정보 등과 같이 사용자 개인에게 유용한 맞춤형 정보가 될 수 있고, 차량의 현 위치와 소비 패턴 등이 반영된 정보가 될 수 있다.
이와 같이 사용자 패턴 분석 서버(24)는 제휴 사업자의 콘텐츠 공급부(28)와 연동하여 차량 정보와 사용자 패턴 정보로부터 얻어진 개인화 정보를 사용자가 유용하게 사용할 수 있도록 각 차량(1)에 전달하며, 이 과정에서 수집된 차량 정보와 사용자 패턴 정보, 그리고 그 분석 결과 및 개인화 정보는 데이터베이스부(27)에 저장하여 관리하게 된다.
위에서 사용자 패턴 분석 서버(24)가 멀티미디어 분석 서버(26)와 LBS 분석 서버(25)를 포함하는 실시예에 대해 설명하였으나, 이는 예를 나타내는 것일 뿐, 본 발명에서 사용자 패턴 분석 서버(24)가 멀티미디어 분석 서버(26)와 LBS 분석 서버(25)로만 구성되는 것으로 한정되는 것은 아니다.
예를 들어, LBS 분석 서버(25) 외에, 차량에서 차량 단말기 또는 사용자 휴대단말기(2)로부터 주가 검색, 음원 검색 등이 이루어질 경우 이들 정보를 수집하여 분석하는 별도의 서버들이 추가될 수도 있으며, 이들 서버들이 개인화 정보 서비스의 제공을 위해 분석한 결과가 상기 콘텐츠 공급부(28)로 전달되도록 하여, 콘텐츠 공급부(28)에서 분석 결과를 개인화 정보를 생성하고 차량에 전달하는데 이용할 수 있도록 한 구성 또한 본 발명에서 적용 가능하다.
도 2는 사용자 입력, 특히 음성입력을 인식하는 음성인식 방법을 예시한 도면으로, 음성입력이 이루어지고 난 뒤, 앞서 설명한 바와 같이 멀티미디어 인식 모듈(11)이 동작하여 인식값과 기준치를 비교하는 과정, 차량 정보로부터 차량 현 위치 주변의 POI 정보가 추출되는 과정, 신용카드 이용 정보(소비 패턴 정보) 및 휴대폰 이용 정보(검색 정보 등) 등의 사용자 패턴 정보를 수집하여 데이터베이스부(27)에 저장 및 관리함과 더불어 분석하는 과정, 부분 인식 결과 정보(부분 인식 성공 데이터)와 수집된 정보를 분석하여 음성 입력 내용을 추측하고 가능성이 높은 인식 결과 정보를 리스트 형태로 차량에 전송하는 과정, 그리고 차량에서 음성 인식 결과를 수신 및 표시하고 음성 인식이 종료되는 과정이 도시되어 있다.
이러한 음성인식의 예에서, 사용자가 "스타벅스"를 음성으로 입력하였을 때, 차량(1)의 멀티미디어 인식 모듈(11)이 "스타○○"만을 부분적으로 인식한 경우, 이러한 부분 인식 결과 정보를 전달받은 사용자 패턴 분석 서버(24)(멀티미디어 분석 서버)가 차량 현 위치 주변 정보와 사용자 소비 패턴 정보 등을 분석하여 "스타벅스"라는 음성입력 내용을 추정하는 것이 가능하다.
차량의 현 위치 주변에 "스타벅스"가 존재하고 사용자가 스타벅스 이용 내역이 많은 소비 패턴을 가지고 있다면, 사용자 음성입력의 내용이 "스타벅스"인 것으로 추정할 수 있는 것이다.
또한, 다른 예로, 사용자가 휴대단말기(2)로 "세종문화회관"을 검색한 이력이 있을 경우, 차량(1)의 멀티미디어 인식 모듈(11)이 "○○○○회관"만을 부분적으로 인식하였다면, 사용자 패턴 분석 서버(24)가 휴대단말기 이용 정보로부터 "세종문화회관"을 추정 인식하는 것이 가능하다.
이와 같이 하여, 본 발명에서는 사용자 입력 정보와 더불어 차량 정보와 사용자 패턴 정보를 분석하여 사용자 입력을 정확히 추정 인식하는 것이 가능하며, 이를 통해 기존의 차량 음성인식 기능 등이 가지는 문제점을 보완 및 개선할 수 있게 된다.
이상으로 본 발명의 실시예에 대하여 상세하게 설명하였는바, 본 발명의 권리범위가 이에 한정되는 것이 아니며, 다음의 특허청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당 업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 포함된다.
1 : 차량 11 : 멀티미디어 인식 모듈
12 : 차량 정보 전송부 13 : 정보 출력부
21 : 멀티미디어 중계 서버 22 : 멀티미디어 인식 서버
23 : 사용자 패턴 수집 서버 24 : 사용자 패턴 분석 서버
25 : LBS 분석 서버 26 : 멀티미디어 분석 서버
27 : 사용자 정보 데이터베이스부 28 : 콘텐츠 공급부

Claims (9)

  1. 차량에서 사용자가 입력하는 멀티미디어 입력 데이터를 인식하기 위한 멀티미디어 인식 시스템을 포함하는 차량에서의 정보 제공을 위한 시스템에 있어서,
    상기 멀티미디어 인식 시스템은,
    차량 내에 구비되어 사용자의 멀티미디어 입력 데이터를 전달하는 멀티미디어 인식 모듈;
    차량 내에 구비되어 차량 정보를 전달하는 차량 정보 전송부;
    상기 멀티미디어 인식 모듈로부터 전송되는 멀티미디어 입력 데이터를 멀티미디어 중계 서버를 통해 전달받아 인식 가능한 정보를 추출하고 추출된 부분 인식 결과 정보를 전달하는 멀티미디어 인식 서버;
    사용자의 휴대단말기 이용 정보 또는 사용자의 차량 단말기 이용 정보 또는 소비 패턴 정보를 포함하는 사용자 패턴 정보를 수집하여 전달하는 사용자 패턴 수집 서버; 및
    상기 부분 인식 결과 정보와 차량 정보, 사용자 패턴 정보를 수신하여 분석함으로써 사용자 멀티미디어 입력에 대한 최종 인식 결과를 도출하여 차량에서의 이용이 가능하도록 전달하는 사용자 패턴 분석 서버를 포함하는 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
  2. 청구항 1에 있어서,
    상기 멀티미디어 입력은 음성입력과 필기입력, 영상입력 중 어느 하나이고,
    상기 멀티미디어 인식 모듈은,
    마이크를 통해 입력되는 음성입력 정보를 인식하는 음성인식모듈과, 필기입력수단을 통해 입력되는 필기입력 정보를 인식하는 필기인식모듈과, 카메라를 통해 입력되는 영상입력 정보를 인식하는 영상인식모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
  3. 청구항 1에 있어서,
    상기 멀티미디어 인식 모듈은,
    사용자의 멀티미디어 입력 데이터를 기준치 이상의 인식값으로 자체 인식한 경우 인식 결과를 최종 인식 결과로 처리하고,
    사용자의 멀티미디어 입력 데이터에 대하여 기준치 미만의 인식값으로 부분적으로만 인식한 경우 입력된 멀티미디어 입력 데이터를 멀티미디어 중계 서버를 통해 멀티미디어 인식 서버가 전달받도록 전송하는 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
  4. 청구항 1에 있어서,
    상기 사용자 패턴 분석 서버는 수집된 차량 정보와 사용자 패턴 정보를 분석하여 위치기반서비스를 제공하기 위한 분석 결과 또는 개인화 정보 서비스를 제공하기 위한 분석 결과를 도출한 후 그 분석 결과를 콘텐츠 공급부에 전달하고,
    상기 콘텐츠 공급부는 사용자 패턴 분석 서버로부터 전달되는 상기 분석 결과를 토대로 사용자 개인의 맞춤형 정보인 개인화 정보를 생성한 후 차량에 전달하여 차량의 정보 출력부를 통해 사용자에게 제공될 수 있게 하는 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
  5. 청구항 1 또는 청구항 4에 있어서,
    상기 차량 정보는 차량의 현 위치 정보를 포함하고,
    상기 사용자 패턴 분석 서버는 차량 현 위치 주변 정보 또는 차량 현 위치 주변의 POI(Point of Interest) 정보를 사용자 멀티미디어 입력에 대한 최종 인식 결과를 도출하는데 이용하는 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
  6. 청구항 1 또는 청구항 4에 있어서,
    상기 사용자 패턴 정보인 휴대단말기 이용 정보는 휴대단말기의 GPS 위치 정보와 검색 키워드를 포함하는 휴대단말기에서의 검색 정보 중 어느 하나를 포함하는 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
  7. 청구항 1 또는 청구항 4에 있어서,
    상기 사용자 패턴 정보인 차량 단말기 이용 정보는 검색 키워드를 포함하는 차량 단말기에서의 검색 정보인 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
  8. 청구항 1 또는 청구항 4에 있어서,
    상기 사용자 패턴 정보인 소비 패턴 정보는 신용카드 정보 제공부로부터 제공되는 사용자 신용카드 결제 정보를 포함하는 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
  9. 청구항 8에 있어서,
    상기 소비 패턴 정보는 신용카드 정보 제공부로부터 제공되는 신용카드 할인 혜택 정보를 더 포함하는 것을 특징으로 하는 차량에서의 정보 제공을 위한 시스템.
KR1020130167977A 2013-12-31 2013-12-31 차량에서의 정보 제공을 위한 시스템 KR101551037B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130167977A KR101551037B1 (ko) 2013-12-31 2013-12-31 차량에서의 정보 제공을 위한 시스템
US14/509,458 US20150187351A1 (en) 2013-12-31 2014-10-08 Method and system for providing user with information in vehicle
CN201410569287.XA CN104750767A (zh) 2013-12-31 2014-10-22 在车辆中向用户提供信息的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130167977A KR101551037B1 (ko) 2013-12-31 2013-12-31 차량에서의 정보 제공을 위한 시스템

Publications (2)

Publication Number Publication Date
KR20150078534A true KR20150078534A (ko) 2015-07-08
KR101551037B1 KR101551037B1 (ko) 2015-09-07

Family

ID=53482518

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130167977A KR101551037B1 (ko) 2013-12-31 2013-12-31 차량에서의 정보 제공을 위한 시스템

Country Status (3)

Country Link
US (1) US20150187351A1 (ko)
KR (1) KR101551037B1 (ko)
CN (1) CN104750767A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180047522A (ko) * 2016-10-31 2018-05-10 주식회사 티노스 운전자 인식이 가능한 차량용 전장 시스템

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10235675B1 (en) * 2015-07-16 2019-03-19 United Services Automobile Assocation (USAA) Vehicle identifier communication and authentication
US10008201B2 (en) * 2015-09-28 2018-06-26 GM Global Technology Operations LLC Streamlined navigational speech recognition
CN106043167A (zh) * 2016-06-20 2016-10-26 攀枝花学院 一种汽车电子信息系统
CN106143498B (zh) * 2016-06-30 2018-10-09 纳恩博（北京）科技有限公司 车辆控制方法、装置及车辆
KR102353486B1 (ko) * 2017-07-18 2022-01-20 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR102557861B1 (ko) * 2017-10-03 2023-07-21 구글 엘엘씨 센서 기반 검증을 통한 차량 기능 제어
JP7062958B2 (ja) * 2018-01-10 2022-05-09 トヨタ自動車株式会社 通信システム、及び通信方法
KR20200021743A (ko) * 2018-08-21 2020-03-02 현대자동차주식회사 콘텐츠 제공 시스템 및 방법
US11200892B1 (en) * 2018-12-10 2021-12-14 Amazon Technologies, Inc. Speech-enabled augmented reality user interface
KR20210133600A (ko) * 2020-04-29 2021-11-08 현대자동차주식회사 차량 음성 인식 방법 및 장치

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8024195B2 (en) * 2005-06-27 2011-09-20 Sensory, Inc. Systems and methods of performing speech recognition using historical information
JP4791984B2 (ja) * 2007-02-27 2011-10-12 株式会社東芝 入力された音声を処理する装置、方法およびプログラム
US8140335B2 (en) * 2007-12-11 2012-03-20 Voicebox Technologies, Inc. System and method for providing a natural language voice user interface in an integrated voice navigation services environment

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180047522A (ko) * 2016-10-31 2018-05-10 주식회사 티노스 운전자 인식이 가능한 차량용 전장 시스템

Also Published As

Publication number Publication date
CN104750767A (zh) 2015-07-01
KR101551037B1 (ko) 2015-09-07
US20150187351A1 (en) 2015-07-02

Similar Documents

Publication Publication Date Title
KR101551037B1 (ko) 차량에서의 정보 제공을 위한 시스템
US9564132B2 (en) Communication system and method between an on-vehicle voice recognition system and an off-vehicle voice recognition system
US11017770B2 (en) Vehicle having dialogue system and control method thereof
JP6348831B2 (ja) 音声入力補助装置、音声入力補助システムおよび音声入力方法
US9188456B2 (en) System and method of fixing mistakes by going back in an electronic device
CN105989841B (zh) 车载语音控制方法及装置
US20220122150A1 (en) Personalized vehicle matching based upon user preferences
US8682307B2 (en) Device-interoperability notification method and system, and method for assessing an interoperability of an electronic device with a vehicle
US20170006108A1 (en) Navigation method, smart terminal device and wearable device
CN110231048B (zh) 场所信息显示方法、装置、终端及存储介质
CN115985309A (zh) 语音识别方法、装置、电子设备及存储介质
US10222223B2 (en) Traffic information output system and traffic information output method
US11553052B2 (en) Information processing apparatus, system, and in-vehicle device
JP6297443B2 (ja) ナビゲーションシステム及び車載装置
US10831429B2 (en) Display mode adjustment based on number of estimated functions of a recommended content
US20110258228A1 (en) Information output system, communication terminal, information output method and computer product
CN111754288A (zh) 服务器装置、信息提供系统、信息提供方法及存储介质
JP2017181667A (ja) 音声認識装置および音声認識方法
US20160004755A1 (en) Information providing device, information providing program, information providing server, and information providing method
US11428539B2 (en) Recommendation apparatus and recommendation system
CN111007994B (zh) 图像生成装置、图像生成方法和记录程序的非暂时性记录介质
US11368828B2 (en) Method and device for transmitting data on basis of change in state related to movement of electronic device
KR20170014228A (ko) 사용자 상황분석기반 정보제공 장치 및 방법
JP2002181552A (ja) サーバ型ナビゲーションシステム
CN115620705A (zh) 语音助手应用方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180829

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190827

Year of fee payment: 5