KR102109186B1 - 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치 - Google Patents

차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치 Download PDF

Info

Publication number
KR102109186B1
KR102109186B1 KR1020180099163A KR20180099163A KR102109186B1 KR 102109186 B1 KR102109186 B1 KR 102109186B1 KR 1020180099163 A KR1020180099163 A KR 1020180099163A KR 20180099163 A KR20180099163 A KR 20180099163A KR 102109186 B1 KR102109186 B1 KR 102109186B1
Authority
KR
South Korea
Prior art keywords
vehicle
conversation
content
word
words
Prior art date
Application number
KR1020180099163A
Other languages
English (en)
Other versions
KR20200022932A (ko
Inventor
정우주
Original Assignee
정우주
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 정우주 filed Critical 정우주
Priority to KR1020180099163A priority Critical patent/KR102109186B1/ko
Publication of KR20200022932A publication Critical patent/KR20200022932A/ko
Application granted granted Critical
Publication of KR102109186B1 publication Critical patent/KR102109186B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Tourism & Hospitality (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Biophysics (AREA)
  • Human Computer Interaction (AREA)
  • Evolutionary Computation (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치에 관한 것으로,
이는 다수의 차량 탑승자 각각의 음성을 식별하고 인식하는 단계; 상기 다수의 차량 탑승자들 각각에 대한 음성 인식 결과를 기반으로 차량 탑승자들간 대화 내용을 파악 및 추적하는 단계; 상기 대화 내용에 포함된 단어들을 추출한 후, 인공지능망을 통해 상기 추출된 단어들에 대응되는 대화 주제를 파악하는 단계; 및 상기 대화 주제에 대응되는 컨텐츠를 획득 및 제공하는 단계를 포함할 수 있다.

Description

차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치{Method ana apparatus for recommendation contents based on conversation of vehicle's occupant}
본 발명은 차량 상황에 대응되는 맞춤형 컨텐츠를 자동으로 검색 및 제공할 수 있도록 하는 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치에 관한 것으로, 특히 차량에 탑승한 사람들이 나누는 대화 내용에 최적화된 컨텐츠를 자동으로 획득 및 재생할 수 있도록 하는 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치에 관한 것이다.
무선 인터넷 및 모바일 단말기의 발전은 사용자 수의 증가와 함께 게임, 뉴스, 음악, 디지털 방송 등과 같은 다양한 종류의 서비스를 언제, 어디서나 쉽게 제공할 수 있게 하였으며, 소비되는 정보의 양이 기하급수적으로 증가하고 있다. 이와 같은 다양한 많은 정보를 효율적으로 활용하기 위해서는 사용자가 원하는 정보를 언제 어디서나 쉽게 이용할 수 있도록 하는 것이 중요하다.
넘쳐나는 정보 중 사용자가 관심을 가지고 찾고자 하는 정보를 사용자에게 빠르게 제공하는 것이 중요하다. 사용자가 관심을 가질 만한 정보가 정확하게 사용자에게 전달되는 경우, 사용자의 정보 탐색 시간이 감소할 수 있다.
현재 많은 개인화된 방송 서비스가 네트워크를 통해 제공되고 있다. 대형 방송국이 아니더라도, 많은 사용자들이 직접 멀티미디어 컨텐츠를 생성하고, 다른 사용자들이 생성된 멀티미디어 컨텐츠를 소비하는 멀티미디어 컨텐츠 소비 구조가 형성되었다.
현재도 사용자에게 맞춤형 멀티미디어 컨텐츠를 제공하기 위한 다양한 기술들이 존재한다. 하지만, 사용자에게 맞춤형 방송, 맞춤형 멀티미디어 컨텐츠 등을 정확하게 제공하기 위해 사용되는 현재 기술의 추천 정확도가 높다고는 볼 수 없다. 이로 인해 사용자는 추천 시스템을 많이 활용하지 않고, 추천 시스템을 통해 추천된 멀티미디어 컨텐츠가 아니라 별도의 직접적인 검색을 통해 멀티미디어 컨텐츠를 활용하는 경우가 많다.
한편, 최근 생활수준의 향상에 따라 차량 문화가 일상화되면서, 각종 멀티미디어 플레이어가 차량 내부에 구비되고, 이를 통해 각종 멀티미디어 컨텐츠를 제공할 수 있도록 하고 있다.
다만, 차량의 경우, 운전자가 수동 조작을 통해 원하는 컨텐츠를 선택해야 한다면 운전자의 시선을 빼앗기 때문에 안전 운전에 치명적인 결과를 초래할 수 있다.
국내공개특허 제10-2013-0113283호(공개일자 : 2013.10.15.)
이에 상기와 같은 문제점을 해결하기 위한 것으로서, 본 발명은 차량 상황에 대응되는 맞춤형 컨텐츠를 자동으로 검색 및 제공할 수 있도록 하는 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치를 제공하고자 한다.
특히, 본 발명은 차량에 탑승한 사람들이 나누는 대화 내용에 최적화된 컨텐츠를 자동으로 획득 및 재생할 수 있도록 하는 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치를 제공하고자 한다.
본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 본 발명이 속하는 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
상기 과제를 해결하기 위한 수단으로서, 본 발명의 일 실시 형태에 따르면 다수의 차량 탑승자 각각의 음성을 식별하고 인식하는 단계; 상기 다수의 차량 탑승자들 각각에 대한 음성 인식 결과를 기반으로 차량 탑승자들간 대화 내용을 파악 및 추적하는 단계; 상기 대화 내용에 포함된 단어들을 추출한 후, 인공지능망을 통해 상기 추출된 단어들에 대응되는 대화 주제를 파악하는 단계; 및 상기 대화 주제에 대응되는 컨텐츠를 획득 및 제공하는 단계를 포함하는 차량 탑승자 대화기반 컨텐츠 추천 방법을 제공한다.
상기 대화 주제를 파악하는 단계는 상기 차량 탑승자들간 대화 내용에 포함된 다수의 단어를 추출하는 단계; 상기 단어의 발생 빈도수, 상기 단어를 공통으로 언급한 차량 탑승자들의 수, 상기 단어를 언급한 차량 탑승자 각각의 가중치, 상기 단어에 대한 사회적 관심도 중 적어도 하나를 고려하여 주요 단어를 선별하는 단계; 및 단어와 대화 주제간 상관관계가 사전 학습된 인공 지능망을 통해 상기 주요 단어에 상응하는 대화 주제를 파악하는 단계를 포함할 수 있다.
상기 컨텐츠를 획득 및 제공하는 단계는 상기 컨텐츠의 종류 및 장르를 고려하여 차량내 멀티미디어 기기의 컨텐츠 재생 환경을 가변하는 단계를 더 포함할 수 있다.
상기 컨텐츠는 오디오, 비디오, 텍스트, 사진 중 어느 하나의 형태로 구현되며, 멀티미디어 재생 장치를 통해 재생 가능한 모든 종류의 컨텐츠인 것을 특징으로 한다.
상기 방법은 차량 주행 상황을 파악한 후, 상기 차량 주행 상황이 기 설정된 조건을 만족시키면, 컨텐츠 제공을 일시 중지하는 단계를 더 포함할 수 있다.
또 다르게는 상기 방법은 차량 주행 상황을 파악한 후, 상기 차량 주행 상황이 기 설정된 조건을 만족시키면, 컨텐츠 제공을 일시 중지한 후 운전자 안내 정보를 제공하는 단계를 더 포함할 수 있다.
상기 차량 주행 상황은 차량 제어값, 차량 위치, 실시간 교통 상황, 및 날씨 정보 중 적어도 하나에 의해 결정되는 것을 특징으로 한다.
상기 과제를 해결하기 위한 수단으로서, 본 발명의 일 실시 형태에 따르면 차량 탑승자 각각에 발생되는 음성을 센싱 및 출력하는 음성 센싱 장치; 컨텐츠 재생을 위한 터치 스크린과 스피커를 구비하는 멀티미디어 재생 장치; 상기 차량 탑승자 각각의 음성을 식별 및 인식하는 화자 인식부; 상기 차량 탑승자 각각의 음성 인식 결과를 기반으로 대화 내용을 파악 및 분석하여 상기 대화 내용에 포함된 단어들을 추출한 후, 단어와 대화 주제간 상관관계가 사전 학습된 신경망을 통해 상기 추출된 단어들에 대응되는 대화 주제를 파악하는 대화 분석부; 상기 대화 주제에 대응되는 컨텐츠를 획득하는 컨텐츠 획득부; 및 상기 컨텐츠를 상기 멀티미디어 재생 장치를 통해 재생하는 제어부를 포함하는 차량 시스템을 제공한다.
상기 대화 분석부는 단어와 대화 주제간 상관관계가 사전 학습된 신경망을 저장 및 관리하는 서버에 접속한 후, 상기 추출된 단어들을 질의하여 상기 추출된 단어들에 대응되는 대화 주제를 파악하는 것을 특징으로 한다.
상기 컨텐츠 획득부는 다수의 컨텐츠를 데이터베이스화하여 저장 관리하는 서버에 접속한 후, 상기 대화 주제를 질의하여 상기 대화 주제에 대응되는 컨텐츠를 획득하는 것을 특징으로 한다.
본 발명의 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치는, 차량 상황에 대응되는 맞춤형 컨텐츠를 자동으로 검색 및 제공할 수 있도록 하며, 특히 차량에 탑승한 사람들이 나누는 대화 내용에 최적화된 컨텐츠를 자동으로 획득 및 재생할 수 있도록 한다.
이에 차량 탑승자들이 별도의 정보 검색 동작을 수행할 필요 없이, 차량 탑승자들의 현재 관심사에 대응되는 컨텐츠를 자동으로 제공받을 수 있도록 해준다.
또한 차량 주행 상황에 따라 컨텐츠 제공을 일시 중지하거나, 필요 안내 정보를 제공함으로써, 사용자 운전을 보다 안전하게 보조할 수 있도록 한다.
도 1은 본 발명의 일 실시예에 따른 차량 탑승자 대화기반 컨텐츠 추천 시스템을 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 컨텐츠 추천을 지원하기 위한 신경망 학습 방법을 설명하기 위한 도면이다.
도 3는 본 발명의 일 실시예에 따른 차량 탑승자 대화기반 컨텐츠 검색 및 재생 방법을 설명하기 위한 도면이다.
도 4는 본 발명의 다른 실시예에 따른 차량 탑승자 대화기반 컨텐츠 추천 시스템을 도시한 도면이다.
본 발명의 목적 및 효과, 그리고 그것들을 달성하기 위한 기술적 구성들은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다.
그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다. 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 차량 탑승자 대화기반 컨텐츠 추천 시스템을 도시한 도면이다.
도 1을 참고하면, 본 발명의 시스템은 크게 차량에 탑승한 사람들이 나누는 대화에 최적화된 컨텐츠를 자동으로 획득 및 재생하는 시스템으로, 차량에 설치되어 차량 탑승자들의 대화 주제를 파악 및 통보한 후, 이에 응답하여 제공되는 컨텐츠를 재생하는 차량 시스템(100)과, 방대한 양의 컨텐츠를 저장 및 관리하면서, 차량 시스템(100)이 통보한 대화 주제를 질의어로 하여 컨텐츠를 검색 및 제공하는 서버(200)로 구성된다.
이때, 맞춤형 컨텐츠는 오디오, 비디오, 텍스트, 사진 중 어느 하나의 형태로 구현되어, 터치 스크린(모니터) 및 스피커를 구비하는 멀티미디어 재생 장치를 통해 재생 가능한 모든 종류의 컨텐츠일 수 있을 것이다.
차량 시스템(100)은 멀티미디어 재생 장치(110), 음성 센싱 장치(120), 화자 인식부(130), 대화 분석부(140), 컨텐츠 획득부(150), 제어부(160), 및 통신부(170) 등을 포함할 수 있다.
멀티미디어 재생 장치(110)는 터치 스크린(또는 모니터)(111)와 스피커(112) 등을 구비하고, 이들을 통해 각종 컨텐츠를 재생하도록 한다.
음성 센싱 장치(120)는 차량 탑승자들에 의해 발생되는 음성을 센싱 및 출력하도록 한다.
화자 인식부(130)는 목소리 특징 기반으로 다수 화자를 인식 및 구별할 수 있는 화자 인식 알고리즘을 구비하고, 이들을 통해 차량 탑승자 각각의 음성을 식별 및 인식하도록 한다.
또한, 필요한 경우, 화자 인식 알고리즘 대신에 차량 좌석 각각에 다수의 마이크를 분산시킨 후, 마이크 위치 기반으로 다수 화자를 식별할 수도 있도록 한다. 즉, 차량 좌석 각각에 설치된 다수의 마이크 모두를 통해 탑승자 음성을 동시 센싱하고 크기 비교하여, 가장 큰 소리 값을 획득한 마이크의 위치값을 현재 화자의 식별값으로 이용하도록 한다. 예를 들어, 가장 큰 소리값을 획득한 마이크가 제1 좌석에 설치된 마이크인 경우에는 제1 좌석에 착석한 탑승자가 현재 화자라고 판단하고, 제2 좌석에 설치된 마이크인 경우에는 제2 좌석에 착석한 탑승자가 현재 화자라고 판단하도록 한다.
대화 분석부(140)는 다수의 차량 탑승자들 각각에 대한 음성 인식 결과를 기반으로 차량 탑승자들간 대화 내용을 파악 및 추적하면서, 대화 내용에 포함된 단어들을 추출한다. 그리고 서버(200)에 접속한 후, 서버(200)가 사전 학습시킨 신경망을 통해 상기 추출된 단어들에 대응되는 대화 주제를 파악하도록 한다.
컨텐츠 획득부(150)는 대화 분석부(140)에 의해 파악된 대화 주제를 서버(200)를 질의하고, 서버(200)로부터 대화 주제에 대응되는 컨텐츠를 제공받도록 한다.
제어부(160)는 컨텐츠를 멀티미디어 재생 장치(110)를 통해 재생하도록 한다.
통신부(170)는 서버(200)와의 통신 채널을 형성하고, 이에 기반한 데이터 통신을 지원하도록 한다.
이와 같이 구성되는 차량 시스템은 하나의 하드웨어 장치로 구현될 수 있다. 그러나 필요한 경우, 차량에 유/무선 연결되는 내비게이션 장치에 내장되는 임베디드 장치 또는 스마트 폰에 다운로드 및 설치되는 어플리케이션 형태로 구현될 수 있으며, 이때에는 차량에 기본 내장된 멀티미디어 재생 장치, 마이크, ECU, 차량 센서를 활용하여 상기 기능들을 구현할 수 있도록 한다.
서버(200)는 신경망(210), 신경망 학습부(220), 컨텐츠 DB(DataBase, 230), 컨텐츠 제공부(240) 등을 포함할 수 있다.
신경망 학습부(220)는 인터넷망에 업로드된 각종 게시물(예를 들어, 뉴스, 게시판 게시물, SNS 게시물 등)을 주제별로 분류한 후, 데이터마이닝 알고리즘에 따라 각각의 주제어에 속하는 핵심 단어 집합을 획득한다. 그리고 핵심 단어 집합을 입력 조건으로 주제어를 출력 조건으로 가지는 방대한 양의 학습 데이터를 생성한 후, 이를 기반으로 신경망(210)을 반복적으로 학습하도록 한다.
그리고 신경망 학습이 완료되면, 차량 시스템(100)이 학습 완료된 신경망을 접근 및 이용할 수 있도록 함으로써, 차후 차량 시스템(100)이 차량 탑승자들의 대화 내용에 포함된 단어들을 기반으로 대화 주제가 무엇인지 손쉽게 파악하도록 한다.
컨텐츠 DB(230)는 차량 시스템(100)에 제공하고자 하는 각종 컨텐츠를 데이터베이스화하여 저장하고, 컨텐츠 제공부(240)는 컨텐츠 DB(230)를 검색하여 차량 시스템(100)이 질의한 대화 주제에 상응하는 컨텐츠를 획득 및 제공하도록 한다.
통신부(250)는 차량 시스템(100)과의 통신 채널을 형성하고, 이에 기반한 데이터 통신을 지원하도록 한다.
이하, 도 2 내지 도 3을 참고하여 본 발명의 차량 탑승자 대화기반 컨텐츠 추천 방법에 대해 상세하게 설명하기로 한다.
도 2는 본 발명의 일 실시예에 따른 컨텐츠 추천을 지원하기 위한 신경망 학습 방법을 설명하기 위한 도면으로, 이하에서는 설명의 편이를 위해, 음원 컨텐츠 추천을 위한 신경망 학습 방법을 일예로 들어 설명하기로 한다.
먼저, 서버(200)는 한국음반산업협회에 등록된 곡명(또는 가수명)을 기반으로 음악 분야에 관련된 게시물을 모두 수집한 후, 수집된 게시물을 곡명에 따라 구분하여 저장하도록 한다(S11).
그리고 게시물 각각에 대한 형태소 분석과 불용어 처리를 하여 다수의 유효 단어들을 추출하고, 추출된 유효 단어 각각의 빈도수를 기반으로 소정개의 핵심 단어들을 선별하는 작업을 곡 단위로 수행하도록 한다. 즉, 곡명 각각에 대응되는 핵심 단어들을 획득하도록 한다(S12).
그리고 핵심 단어들을 입력 조건으로 곡명은 출력 조건으로 가지는 학습 데이터들을 생성한 후(S13), 이들을 기반으로 신경망(210)을 반복적으로 학습하도록 한다(S14). 이때, 핵심 단어의 빈도수(즉, 중요도)에 따라 학습 횟수를 조정할 수 있는데, 이는 핵심 단어의 중요도를 반영한 신경망 학습이 가능해지도록 하기 위함이다.
도 3는 본 발명의 일 실시예에 따른 차량 탑승자 대화기반 컨텐츠 검색 및 재생 방법을 설명하기 위한 도면이다.
만약, 차량에 여러 사람이 탑승한 후 대화하기 시작하면, 차량 시스템(100)은 차량에 설치된 음성 센싱 장치(120)를 통해 다수의 탑승자들의 음성을 센싱하고, 화자 인식부(130)를 통해 다수의 차량 탑승자 각각의 음성을 식별 및 인식하기 시작한다(S21).
그리고 차량 시스템(100)은 다수의 차량 탑승자들 각각에 대한 음성 인식 결과를 텍스트화하여 저장하고, 이를 기반으로 차량 탑승자들간 대화 내용을 파악 및 추적하도록 한다(S22).
그리고 컨텐츠 검색 이벤트가 발생하는지 수시로 확인하도록 한다(S23). 이때, 컨텐츠 검색 이벤트는 기 설정된 시간 간격으로 반복적으로 발생되는 경우, 기 설정된 단어 또는 문장(예를 들어, '컨텐츠 검색')을 포함하는 음성이 입력되는 경우, 또는 컨텐츠 검색 기능이 매핑된 버튼이 수동 조작되는 경우 등에 발생될 수 있으며, 이러한 컨텐츠 검색 이벤트 발생 조건은 필요에 따라 조정될 수 있음은 물론 당연할 것이다.
만약, 단계 S23을 통해 컨텐츠 검색 이벤트 발생이 확인되면, 차량 시스템(100)은 현재까지의 대화 내용을 텍스트화한 문서에 대한 형태소 분석과 불용어 처리를 수행하여 다수의 유효 단어들을 추출하도록 한다(S24).
그리고 단어 각각의 발생 빈도수 및 단어 각각을 공통으로 언급한 차량 탑승자들의 수 등을 고려하여 주요 단어를 선별한 후, 서버(200)에 접속하여(S25), 학습 완료된 신경망(210)을 기반으로 해당 단어들에 대응되는 대화 주제가 무엇인지 추론하도록 한다(S26).
더하여, 본 발명은 단계 S25의 주요 단어 선별시, 단어 각각을 언급한 차량 탑승자 각각의 가중치, 및 단어 각각에 대한 사회적 관심도 등도 추가 고려할 수도 있도록 한다. 이는 대화 내용 이외에 차량 탑승자의 인적 구성 및 사회 분위기와 같은 요인을 추가 고려함으로써, 보다 유의미한 대화 주제 검색 동작이 수행될 수 있도록 한다.
차량 탑승자 각각의 가중치 획득을 위해, 차량 시스템(100)은 가중치 입력 화면을 구성하여 터치 스크린(111)을 통해 제공함으로써, 차량 탑승자 중 한명이 이를 통해 차량 탑승자 각각의 가중치를 설정할 수 있도록 한다. 그리고 단어 각각에 대한 사회적 관심도는 네이버, 다음 등과 같은 웹 포털에서의 실시간 검색어 순위, 또는 검색 결과물 개수 등에 따라 결정될 수 있다.
계속하여, 차량 시스템(100)은 단계 S26을 통해 추론된 대화 주제를 서버(200)에 통보하여, 서버(200)로부터 해당 대화 주제에 대응되는 컨텐츠를 제공받고, 이를 멀티미디어 재생 장치(110)를 통해 재생하도록 한다(S27).
본 발명은 컨텐츠의 종류와 장르에 따라 멀티미디어 재생 장치의 컨텐츠 재생 환경을 조정할 수 있도록 한다. 즉, 컨텐츠에 포함되는 메타 데이터에는 컨텐츠 종류와 장르에 대한 정보가 기본적으로 포함됨을 고려하여, 컨텐츠의 종류가 오디오인 경우에는 스피커만을, 사진 또는 텍스트인 경우에는 터치 스크린만을, 동영상인 경우에는 스피커와 터치 스크린 모두를 동작 활성화시킬 수 있도록 한다. 또한, 컨텐츠의 장르에 따라 오디오 환경 설정값 및 터치 스크린 화면 설정값을 능동 가변시킴으로써, 컨텐츠에 최적화된 멀티미디어 재생 환경을 구축할 수 있도록 한다.
이상에서 살펴 본 바와 같이, 본 발명은 차량에 탑승한 다수의 사람이 나누는 대화 내용을 기반으로 최적의 컨텐츠를 자동으로 검색 및 제공함을 알 수 있다.
다만, 본 발명의 컨텐츠 제공 환경은 차량이므로, 컨텐츠 재생에 의해 운전자의 집중력이 저하되지 않도록 해야 한다. 이에 본 발명은 차량 장치와의 연동을 통해 차량 주행 환경을 확인하고, 이를 추가 고려하여 컨텐츠 재생 동작을 제어할 수 있도록 한다.
도 4는 본 발명의 다른 실시예에 따른 차량 탑승자 대화기반 컨텐츠 추천 시스템을 도시한 도면이다.
도 4에 도시된 바와 같이, 본 발명의 차량 시스템(100')은 멀티미디어 재생 장치(110), 음성 센싱 장치(120), 화자 인식부(130), 대화 분석부(140), 컨텐츠 획득부(150), 제어부(160'), 및 통신부(170) 이외에 차량에 구비된 ECU(electronic control unit,310), 내비게이션(320), 차량 센서(330) 등과 상호 연동되는 차량 상황 확인부(180)를 추가 포함한다.
이때, ECU(310)는 차량 전자 제어값 모두를 획득 및 제공할 수 있으며, 특히 차량 속도, 차량 이동 방향 등에 대한 정보를 제공할 수 있다. 내비게이션(320)은 차량 현재 위치, 실시간 교통 상황 등에 정보를 제공할 수 있으며, 차량 센서(330)는 차량 내/외부 환경에 대한 정보를 제공할 수 있다.
차량 주행 상황은 운전 주의 상황, 차량 위치 안내 상황, 교통 안내 상황, 날씨 안내 상황 등으로 나뉠 수 있다.
이에 차량 상황 확인부(180)는 ECU(310), 내비게이션(320) 및 차량 센서(330)를 통해 획득되는 차량 제어값, 차량 위치, 실시간 교통 상황, 및 날씨 정보 각각에 대응되는 차량 주행 상황을 사전 정의한다. 그리고 이를 기반으로 ECU(181), 내비게이션(182) 및 차량 센서(183)가 제공하는 정보를 분석하여, 현재의 차량 주행 상황을 파악하고 제어부(160')에 통보하도록 한다.
제어부(160')는 기 설정된 차량 주행 상황이 되면, 컨텐츠 재생을 일시 중지하거나, 또는 컨텐츠 대신에 현재 주행 상황에 대응되는 운전자 안내 정보를 제공함으로써, 사용자 운전을 보다 안전하게 보조할 수 있도록 한다.
예를 들어, 차량 속도가 비정상적으로 증가하거나 급회전하는 운전 주의 상황이 발생하면, 컨텐츠 재생을 일시 정지함으로써 사용자가 운전에 보다 집중할 수 있도록 한다. 차량 위치가 기 등록된 장소에 인접되면, 해당 장소를 안내하는 정보를 컨텐츠 대신에 제공하고, 차량 전방에 차량 사고 발생이 확인되면, 사고 발생을 안내하는 정보를 컨텐츠 대신에 제공하고, 엔진 과열이 감지되면, 엔진이 과열되었음을 안내하는 정보를 컨텐츠 대신에 제공할 수 있도록 한다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (10)

  1. 다수의 차량 탑승자 각각의 음성을 식별하고 인식하는 단계;
    상기 다수의 차량 탑승자들 각각에 대한 음성 인식 결과를 기반으로 차량 탑승자들간 대화 내용을 파악 및 추적하는 단계;
    상기 대화 내용에 포함된 단어들을 추출한 후, 단어와 대화 주제간 상관관계가 사전 학습된 신경망을 통해 상기 추출된 단어들에 대응되는 대화 주제를 파악하는 단계; 및
    상기 대화 주제에 대응되는 컨텐츠를 획득 및 제공하는 단계를 포함하며,
    상기 대화 주제를 파악하는 단계는
    상기 차량 탑승자들간 대화 내용에 포함된 다수의 단어를 추출하는 단계;
    상기 단어의 발생 빈도수, 상기 단어를 공통으로 언급한 차량 탑승자들의 수, 상기 단어를 언급한 차량 탑승자 각각의 가중치, 상기 단어에 대한 사회적 관심도 중 적어도 하나를 고려하여 주요 단어를 선별하는 단계; 및
    단어와 대화 주제간 상관관계가 사전 학습된 인공 지능망을 통해 상기 주요 단어에 상응하는 대화 주제를 파악하는 단계를 포함하며,
    상기 차량 탑승자 각각의 가중치는
    차량 탑승자 중 적어도 한명에 의해 수동 설정되며,
    상기 단어에 대한 사회적 관심도는 웹 포털의 실시간 검색어 순위, 검색 결과물 개수 중 적어도 하나를 고려하여 자동 결정되는 것을 특징으로 하는 차량 탑승자 대화기반 컨텐츠 추천 방법.
  2. 삭제
  3. 제1항에 있어서, 상기 컨텐츠를 획득 및 제공하는 단계는
    상기 컨텐츠의 종류 및 장르를 고려하여 차량내 멀티미디어 기기의 컨텐츠 재생 환경을 가변하는 단계를 더 포함하는 것을 특징으로 하는 차량 탑승자 대화기반 컨텐츠 추천 방법.
  4. 제1항에 있어서, 상기 컨텐츠는
    오디오, 비디오, 텍스트, 사진 중 어느 하나의 형태로 구현되며, 멀티미디어 재생 장치를 통해 재생 가능한 모든 종류의 컨텐츠인 것을 특징으로 차량 탑승자 대화기반 컨텐츠 추천 방법.
  5. 제4항에 있어서,
    차량 주행 상황을 파악한 후, 상기 차량 주행 상황이 기 설정된 조건을 만족시키면, 컨텐츠 제공을 일시 중지하는 단계를 더 포함하는 것을 특징으로 하는 차량 탑승자 대화기반 컨텐츠 추천 방법.
  6. 제5항에 있어서,
    차량 주행 상황을 파악한 후, 상기 차량 주행 상황이 기 설정된 조건을 만족시키면, 컨텐츠 제공을 일시 중지한 후 운전자 안내 정보를 제공하는 단계를 더 포함하는 것을 특징으로 하는 차량 탑승자 대화기반 컨텐츠 추천 방법.
  7. 제5항 또는 제6항에 있어서, 상기 차량 주행 상황은
    차량 제어값, 차량 위치, 실시간 교통 상황, 및 날씨 정보 중 적어도 하나에 의해 결정되는 것을 특징으로 하는 차량 탑승자 대화기반 컨텐츠 추천 방법.
  8. 차량 탑승자 각각에 발생되는 음성을 센싱 및 출력하는 음성 센싱 장치;
    컨텐츠 재생을 위한 터치 스크린과 스피커를 구비하는 멀티미디어 재생 장치
    상기 차량 탑승자 각각의 음성을 식별 및 인식하는 화자 인식부
    상기 차량 탑승자 각각의 음성 인식 결과를 기반으로 대화 내용을 파악 및 분석하여 상기 대화 내용에 포함된 단어들을 추출한 후, 단어와 대화 주제간 상관관계가 사전 학습된 신경망을 통해 상기 추출된 단어들에 대응되는 대화 주제를 파악하는 대화 분석부;
    상기 대화 주제에 대응되는 컨텐츠를 획득하는 컨텐츠 획득부; 및
    상기 컨텐츠를 상기 멀티미디어 재생 장치를 통해 재생하는 제어부를 포함하며,
    상기 대화 분석부는
    상기 차량 탑승자들간 대화 내용에 포함된 다수의 단어를 추출한 후, 상기 단어의 발생 빈도수, 상기 단어를 공통으로 언급한 차량 탑승자들의 수, 상기 단어를 언급한 차량 탑승자 각각의 가중치, 상기 단어에 대한 사회적 관심도 중 적어도 하나를 고려하여 주요 단어를 선별하고, 단어와 대화 주제간 상관관계가 사전 학습된 인공 지능망을 통해 상기 주요 단어에 상응하는 대화 주제를 파악하며,
    상기 차량 탑승자 각각의 가중치는
    차량 탑승자 중 적어도 한명에 의해 수동 설정되며,
    상기 단어에 대한 사회적 관심도는 웹 포털의 실시간 검색어 순위, 검색 결과물 개수 중 적어도 하나를 고려하여 자동 결정되는 것을 특징으로 하는 차량 시스템.
  9. 제 8항에 있어서, 상기 대화 분석부는
    단어와 대화 주제간 상관관계가 사전 학습된 신경망을 저장 및 관리하는 서버에 접속한 후, 상기 추출된 단어들을 질의하여 상기 추출된 단어들에 대응되는 대화 주제를 파악하는 것을 특징으로 하는 차량 시스템.
  10. 제 8항에 있어서, 상기 컨텐츠 획득부는
    다수의 컨텐츠를 데이터베이스화하여 저장 관리하는 서버에 접속한 후, 상기 대화 주제를 질의하여 상기 대화 주제에 대응되는 컨텐츠를 획득하는 것을 특징으로 하는 차량 시스템.
KR1020180099163A 2018-08-24 2018-08-24 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치 KR102109186B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180099163A KR102109186B1 (ko) 2018-08-24 2018-08-24 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180099163A KR102109186B1 (ko) 2018-08-24 2018-08-24 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20200022932A KR20200022932A (ko) 2020-03-04
KR102109186B1 true KR102109186B1 (ko) 2020-05-11

Family

ID=69783701

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180099163A KR102109186B1 (ko) 2018-08-24 2018-08-24 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치

Country Status (1)

Country Link
KR (1) KR102109186B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102151358B1 (ko) 2019-10-23 2020-09-02 부산대학교 산학협력단 홀로그래픽 기반 지향성 음향 장치
KR20220091068A (ko) * 2020-12-23 2022-06-30 삼성전자주식회사 음성 기반 콘텐츠 제공 방법 및 그 전자 장치

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5972372B2 (ja) * 2012-06-25 2016-08-17 三菱電機株式会社 車載情報装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100975828B1 (ko) * 2008-08-11 2010-08-13 서강대학교산학협력단 네비게이션 서비스 방법 및 그에 따른 시스템, 단말기
KR101878488B1 (ko) * 2011-12-20 2018-08-20 한국전자통신연구원 대화 연관 컨텐츠 제공 방법 및 장치
KR20130113283A (ko) 2012-04-05 2013-10-15 엘지전자 주식회사 차량용 컨텐츠 획득방법, 차량용 컨텐츠 표시 방법, 차량용 컨텐츠 표시 시스템 및 차량용 전자기기

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5972372B2 (ja) * 2012-06-25 2016-08-17 三菱電機株式会社 車載情報装置

Also Published As

Publication number Publication date
KR20200022932A (ko) 2020-03-04

Similar Documents

Publication Publication Date Title
US12046229B2 (en) Systems and methods for providing notifications within a media asset without breaking immersion
US11836415B2 (en) Adaptive voice communication
US11650787B2 (en) Media content identification and playback
CN104700835B (zh) 提供话音接口的方法和系统
CN111919249B (zh) 词语的连续检测和相关的用户体验
US7177809B2 (en) Contents presenting system and method
US20130191122A1 (en) Voice Electronic Listening Assistant
US20080235018A1 (en) Method and System for Determing the Topic of a Conversation and Locating and Presenting Related Content
EP3161769A1 (en) Voice-controlled information exchange platform, such as for providing information to supplement advertising
CN108702539A (zh) 用于媒体搜索和回放的智能自动化助理
CN108292314B (zh) 信息处理装置、信息处理方法和程序
CN108682419A (zh) 语音控制方法及设备、计算机可读存储介质及设备
US9978372B2 (en) Method and device for analyzing data from a microphone
CN106796496A (zh) 显示设备及其操作方法
CN108475260B (zh) 基于评论的媒体内容项的语言识别的方法、系统和介质
CN111241822A (zh) 输入场景下情绪发现与疏导方法及装置
KR102109186B1 (ko) 차량 탑승자 대화기반 컨텐츠 추천 방법 및 장치
CN111739530A (zh) 一种交互方法、装置、耳机和耳机收纳装置
JP2022530201A (ja) コンピューティングデバイス上でのコンテンツの可聴部分の自動キャプショニング
JPWO2019155717A1 (ja) 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム
CN111739529A (zh) 一种交互方法、装置、耳机和服务器
KR102135076B1 (ko) 인공지능 스피커를 이용한 감성 기반의 사용자 맞춤형 뉴스 추천 시스템
CN111739528A (zh) 一种交互方法、装置和耳机
JP2017162073A (ja) 情報提示装置、情報提示システム、並びに情報提示方法及びプログラム
JP2016095705A (ja) 不明事項解消処理システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant