KR101943638B1 - Music recommendation system and method based on user context - Google Patents

Music recommendation system and method based on user context Download PDF

Info

Publication number
KR101943638B1
KR101943638B1 KR1020170001959A KR20170001959A KR101943638B1 KR 101943638 B1 KR101943638 B1 KR 101943638B1 KR 1020170001959 A KR1020170001959 A KR 1020170001959A KR 20170001959 A KR20170001959 A KR 20170001959A KR 101943638 B1 KR101943638 B1 KR 101943638B1
Authority
KR
South Korea
Prior art keywords
weight value
music
situation
mobile device
increases
Prior art date
Application number
KR1020170001959A
Other languages
Korean (ko)
Other versions
KR20180080873A (en
Inventor
구용본
한우용
김성훈
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020170001959A priority Critical patent/KR101943638B1/en
Publication of KR20180080873A publication Critical patent/KR20180080873A/en
Application granted granted Critical
Publication of KR101943638B1 publication Critical patent/KR101943638B1/en

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P1/00Details of instruments
    • G01P1/12Recording devices
    • G01P1/122Speed recorders
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P1/00Details of instruments
    • G01P1/12Recording devices
    • G01P1/127Recording devices for acceleration values
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0269Targeted advertisements based on user profile or attribute
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices

Abstract

본 발명은 모바일 기기 사용자가 차량을 운전하는 운전자인지 단순 동승자인지 모바일 기기 사용자의 상황을 판단하고, 상황에 대응되는 음악을 추천할 수 있는 사용자 상황에 따른 음악 추천 장치 및 방법에 관한 것으로, 모바일 기기에 내장되거나 상기 모바일 기기에 장착되어 상기 모바일 기기의 상태 정보를 센싱하는 센서부, 상기 센서부에서 입력된 정보에 기초하여 상기 모바일 기기 사용자의 상황을 운전, 동승 및 기타로 분류하여 운전자 가중치, 동승자 가중치 및 기타 가중치를 출력하는 상황분석부, 상기 상황분석부에서 출력된 가중치에 기초하여 상기 모바일 기기의 상황에 적합한 음악을 추천하는 제어부를 포함할 수 있다.The present invention relates to a device and method for recommending music according to a user's situation, which can determine a situation of a user of a mobile device whether a driver of a mobile device is a driver or a simple passenger, and recommend music corresponding to the situation, A sensor unit built in the mobile device or sensing the state information of the mobile device mounted on the mobile device, and a controller for classifying the status of the user of the mobile device as driving, traveling and other based on the information input from the sensor portion, A situation analyzer for outputting weights and other weights, and a controller for recommending music suitable for the situation of the mobile device based on the weights output from the situation analyzer.

Description

사용자 상황에 따른 음악 추천 장치 및 방법{MUSIC RECOMMENDATION SYSTEM AND METHOD BASED ON USER CONTEXT}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a music recommendation apparatus and method,

본 발명은 모바일 기기 사용자가 차량을 운전하는 운전자인지 단순 동승자인지 모바일 기기 사용자의 상황을 판단하고, 상황에 대응되는 음악을 추천할 수 있는 사용자 상황에 따른 음악 추천 장치 및 방법에 관한 것이다.
The present invention relates to a music recommendation apparatus and method according to a user's situation, which can determine a situation of a user of a mobile device whether a driver of a mobile device is a driver or a simple passenger, and recommend music corresponding to the situation.

현재 출시되고 있는 스마트 폰, 태블릿 및 웨어러블 기기와 같은 모바일 기기에는 음악 기능이 있으며, 이러한 음악 기능은 모바일 기기의 중요 기능 중의 하나이다. Mobile devices such as smart phones, tablets and wearable devices that are currently being launched have music functions, and these music functions are one of the important functions of mobile devices.

이로 인해 다양한 음악 관리 프로그램이 개발되고 있으며, 사용자의 취향에 맞는 음악 추천 기능은 음악 관리 프로그램에 있어서 핵심적인 기능 중 하나이다. 음악 추천 기능은 일반적으로 사용자에 따른 개인화된 음악을 선정하여 추천할 수 있으며, 날씨, 시간과 같은 환경 변화에 따라 음악을 선정하여 추천할 수 있다.As a result, a variety of music management programs are being developed, and a music recommendation function suited to the user's taste is one of the core functions of the music management program. The music recommendation function can generally recommend personalized music according to the user and recommend the music according to the change of environment such as weather and time.

이와 관련하여, 한국공개특허공보 제2015-0001871호(발명의 명칭: 사용자 상황 기반 음악 추천 시스템 및 그 방법, 그리고 이에 적용되는 서비스 장치)는 사용자가 선택한 상황과 동일한 상황에 있는 다른 사용자들이 선호하는 음악을 사용자에게 추천하는 사용자 상황 기반 음악 추천 시스템 및 그 방법, 그리고 이에 적용되는 서비스 장치가 개시되어 있다.In this connection, Korean Patent Laid-Open Publication No. 2015-0001871 entitled " User Situation Based Music Recommendation System and Method, and Service Device Applied to It " A user situation based music recommendation system and method for recommending music to a user, and a service apparatus applied thereto.

하지만, 종래에는 사용자의 상황을 사용자가 직접 입력하는 방식으로 사용자의 상태를 자동으로 확인할 수 없으며, 사용자가 운전 중인지 아니면 동승 중인지에 따라 적합한 음악을 추천하는 기술은 개시되어 있지 않다.
However, conventionally, the user can not automatically check the status of the user by directly inputting the user's situation, and does not disclose a technique for recommending suitable music according to whether the user is driving or traveling.

본 발명의 일 실시 예는 모바일 기기 사용자에게 차량 탑승 및 운전에 따른 차별화된 음악을 추천하는 사용자 상황에 따른 음악 추천 장치 및 방법을 제공하고자 한다. An embodiment of the present invention is to provide a music recommendation apparatus and method according to a user's situation recommending differentiated music according to boarding and driving to a user of a mobile device.

본 발명의 일 실시 예는 모바일 기기에 기본 탑재된 센서를 활용하거나 모바일 기기 외부에 장착된 센서를 활용하여 모바일 기기 사용자가 운전자인지 동승자(탑승자)인지 판단할 수 있는 사용자 상황에 따른 음악 추천 장치 및 방법을 제공하고자 한다.According to an embodiment of the present invention, a music recommendation apparatus according to a user's situation, which can determine whether a user of the mobile device is a driver or a passenger (occupant) by utilizing a sensor built in a mobile device or using a sensor mounted outside the mobile device Method.

다만, 본 발명의 실시 예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
It is to be understood, however, that the technical scope of the present invention is not limited to the above-described technical problems, and other technical problems may exist.

상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 측면에 따른 사용자 상황에 따른 음악 추천 장치는 모바일 기기에 내장되거나 상기 모바일 기기에 장착되어 상기 모바일 기기의 상태 정보를 센싱하는 센서부, 상기 센서부에서 입력된 정보에 기초하여 상기 모바일 기기 사용자의 상황을 운전, 동승 및 기타로 분류하여 운전자 가중치, 동승자 가중치 및 기타 가중치를 출력하는 상황분석부, 상기 상황분석부에서 출력된 가중치에 기초하여 상기 모바일 기기의 상황에 적합한 음악을 추천하는 제어부를 포함한다.
상기 음악 추천 장치는 추천 대상이 되는 음악을 저장하고 있는 음악 데이터베이스; 및 상기 음악 데이터베이스 내의 음악 각각에 대해 운전용 음악에 대한 가중치 값 및 탑승용 음악에 대한 가중치 값을 출력하는 템포분석부를 포함하고, 상기 제어부는 상기 상황분석부에서 출력된 가중치 값 및 상기 템포분석부에서 출력된 가중치 값에 기초하여 상기 모바일 기기의 상황에 적합한 음악을 추천한다.
상기 상황분석부는 전처리기 및 처리기를 포함하고, 상기 전처리기는 가속도 센서에서 입력되는 진동 값을 전처리하여 진동 패턴을 출력하고, 자이로미터에서 입력되는 각속도 값을 전처리하여 각속도 정보를 출력하고, 터치 패널로부터 입력되는 터치 회수를 전처리하여 터치 빈도를 출력하며, 상기 처리기는 상기 센서부로부터 입력되는 속도 정보, 포그라운드 프로세서 정보와 상기 전처리에서 전처리된 터치 빈도, 진동 패턴 및 각속도 정보를 처리하여, 상기 운전자 가중치 값, 상기 동승자 가중치 값 및 상기 기타 가중치 값을 결정한다.
상기 처리기는 상기 속도가 차량 속도 역치값 보다 큰 경우, 상기 운전자 가중치 값과 상기 동승자 가중치 값을 증가시키고, 상기 속도가 상기 차량 속도 역치값 보다 작은 경우, 상기 기타 가중치 값을 증가시킨다.
상기 처리기는 상기 터치 빈도가 터치 역치값보다 큰 경우, 상기 동승자 가중치 값을 증가시키고, 상기 터치 빈도가 상기 터치 역치값보다 작은 경우, 상기 기타 가중치 값을 증가시킨다.
상기 처리기는 상기 진동 패턴이 규칙적이면 상기 운전자 가중치 값을 증가시키고, 상기 진동 패턴이 불규칙적이면 상기 동승자 가중치 값과 상기 기타 가중치 값을 증가시킨다.
상기 처리기는 상기 각속도가 각속도 역치값 보다 큰 경우 상기 동승자 가중치 값을 증가시키고, 상기 각속도가 상기 각속도 역치값 보다 작은 경우 상기 운전자 가중치 값을 증가시킨다.
상기 처리기는 프로세스가 미리 저장된 프로세스 리스트에 존재할 경우 상기 운전자 가중치 값을 증가시키고, 프로세스가 상기 프로세스 리스트에 존재하지 않을 경우 상기 동승자 가중치 값과 상기 기타 가중치 값을 증가시킨다.
According to an aspect of the present invention, there is provided a music recommendation apparatus according to a user situation, the apparatus comprising: a sensor unit mounted in or incorporated in a mobile device for sensing status information of the mobile device; A situation analyzer for classifying the status of the user of the mobile device as driving, driving and other based on the information input from the sensor unit and outputting driver weights, passenger weights, and other weights; And recommending music suitable for the situation of the mobile device.
The music recommendation apparatus includes: a music database storing music to be recommended; And a tempo analyzer for outputting a weight value for music for driving and a weight value for music for boarding for each music in the music database, wherein the controller calculates a weight value output from the situation analyzer, And recommends music suitable for the situation of the mobile device based on the weight value output from the mobile device.
The condition analyzer includes a preprocessor and a processor. The preprocessor preprocesses the vibration value input from the acceleration sensor, outputs a vibration pattern, preprocesses the angular velocity value input from the gyrometer to output angular velocity information, The processor processes the speed information, the foreground processor information input from the sensor unit, the touch frequency pre-processed in the preprocess, the vibration pattern, and the angular velocity information by pre-processing the number of touches inputted and outputs the touch frequency, Value, the passenger weight value, and the other weight value.
The processor increases the driver weight value and the passenger weight value when the speed is greater than the vehicle speed threshold value and increases the other weight value when the speed is less than the vehicle speed threshold value.
The processor increases the occupant weight value when the touch frequency is greater than the touch threshold value and increases the other weight value when the touch frequency is less than the touch threshold value.
The processor increases the driver weight value if the vibration pattern is regular and increases the passenger weight value and the other weight value when the vibration pattern is irregular.
The processor increases the occupant weight value when the angular velocity is greater than the angular velocity threshold value, and increases the driver weight value when the angular velocity is smaller than the angular velocity threshold value.
The processor increases the driver weight value when the process is in a list of previously stored processes and increases the passenger weight value and the other weight value when the process is not present in the process list.

전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 속도, 포그라운드 프로세서 정보, 터치 빈도, 진동 패턴, 각속도 정보 등을 이용하여 사용자의 개입 없이 모바일 기기 사용자가 운전 중인지 동승자인지 여부를 자동으로 판단할 수 있다.According to any one of the above-described tasks, the mobile device user can automatically determine whether the user is driving or not, using the speed, foreground processor information, touch frequency, vibration pattern, angular velocity information, can do.

또한, 본 발명에서는 사용자 상황에 따른 음악 추천 기술에 따르면, 사용자의 상황(운전, 동승, 기타)에 따라 적합한 음악을 추천할 수 있다
In addition, according to the present invention, according to the music recommendation technique according to the user's situation, it is possible to recommend suitable music according to the user's situation (driving, traveling, etc.)

도 1 은 본 발명의 일 실시 예에 따른 사용자 상황에 따른 음악 추천 장치의 구성도이다.
도 2는 도 1의 센서부를 모바일 기기에 포함된 물리적, 소프트웨어적으로 표시한 구성도이다.
도 3은 도 1의 상황분석부의 내부 구성 및 동작을 나타내는 도면이다.
도 4는 상황분석부 내 데이터 흐름을 나타내는 도면이다.
도 5는 상황분석부의 데이터 처리에 필요한 결정표를 나타내는 도면이다.
1 is a configuration diagram of a music recommendation apparatus according to a user situation according to an embodiment of the present invention.
FIG. 2 is a diagram showing the sensor unit of FIG. 1 in physical and software form included in a mobile device.
3 is a diagram showing an internal configuration and operation of the situation analyzing unit of FIG.
4 is a diagram showing a data flow in the situation analyzing unit.
5 is a diagram showing a decision table necessary for data processing by the situation analyzing unit.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시 예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings, which will be readily apparent to those skilled in the art. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In order to clearly explain the present invention in the drawings, parts not related to the description are omitted.

명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
Whenever a component is referred to as "including" an element throughout the specification, it is to be understood that the element may include other elements, not the exclusion of any other element, unless the context clearly dictates otherwise.

이하에서는, 도면을 참조하여 본 발명의 일 실시 예에 따른 사용자 상황에 따른 음악 추천 장치 및 방법에 대하여 상세히 설명하도록 한다.
Hereinafter, an apparatus and method for recommending music according to a user's situation according to an embodiment of the present invention will be described in detail with reference to the drawings.

도 1 은 본 발명의 일 실시 예에 따른 사용자 상황에 따른 음악 추천 장치의 구성도이다.1 is a configuration diagram of a music recommendation apparatus according to a user situation according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 사용자 상황에 따른 음악 추천 장치는 기능 수행을 위한 적어도 하나 이상의 프로세서를 포함하고, 또한, 기능 수행에 필요한 정보를 저장하거나, 기능 수행 결과를 저장하는 적어도 하나 이상의 메모리를 포함한다.As shown in FIG. 1, the music recommendation apparatus according to the present invention includes at least one processor for performing a function, and further includes at least one processor for storing information necessary for performing a function, Or more memory.

구체적으로, 상기 음악 추천 장치는 복수의 센서를 포함하는 센서부(101), 상황분석부(102), 제1 가중치부(103), 제어부(104), 음악 DB(105), 템포분석부(106), 제2 가중치부(107)를 포함한다.Specifically, the music recommendation apparatus includes a sensor unit 101 including a plurality of sensors, a situation analyzing unit 102, a first weighting unit 103, a control unit 104, a music DB 105, a tempo analyzing unit 106, and a second weighting unit 107.

이때, 상기 센서부(101)는 사용자의 모바일 기기에 내장된 센서이거나, 모바일 기기에 장착된 센서일 수 있다.At this time, the sensor unit 101 may be a sensor built in a user's mobile device or a sensor mounted in a mobile device.

그리고, 상기 상황분석부(102)는 센서부(101)로부터 입력된 센싱 정보에 기초하여 운전자의 상황을 운전, 동승 및 기타 3가지로 분류할 수 있다.The situation analyzing unit 102 can classify the driver's situation into three types according to the sensing information input from the sensor unit 101: driving, moving, and the like.

또한, 상황분석부(102)는 센서부(101)로부터 취득한 정보를 전처리, 분석, 후처리 과정을 거쳐 가공하며, 운전, 동승, 기타에 대한 3가지 가중치 값을 제1 가중치부(103)로 출력한다.The situation analyzing unit 102 processes the information obtained from the sensor unit 101 through preprocessing, analysis, and post-processing, and assigns three weight values for driving, traveling, and the like to the first weighting unit 103 Output.

한편, 상기 제1 가중치부(103)는 입력된 운전, 동승, 기타에 대한 3가지 가중치 값을 저장하며, 제1 가중치부(103)의 가중치 값은 제어부(104)로 출력된다.The first weighting unit 103 stores three weighting values for the inputted driving, traveling, and the like, and the weighting value of the first weighting unit 103 is output to the control unit 104.

상기 음악 DB(105)는 추천 대상이 되는 음악을 저장하고 있다. 이때, 상기 음악 DB(105)는 모바일 기기 내부에 위치할 수 있고, 외부 클라우드 환경에 저장될 수도 있다.The music DB 105 stores music to be a recommendation target. At this time, the music DB 105 may be located in the mobile device or may be stored in the external cloud environment.

상기 탬포분석부(106)는 음악 DB(105)내의 음악 각각에 대해 곡의 템포, 곡의 길이, 곡의 음량의 변화를 측정해 운전용 음악과 탑승용 음악에 대한 가중치를 부여한다. 이러한 운전용 음악 및 탑승용 음악에 대한 가중치 값은 제2 가중치부(107)로 출력된다.The tempo analyzer 106 measures a change in the tempo of the song, the length of the song, and the volume of the song with respect to each of the music in the music DB 105, and gives the weight for the driving music and the boarding music. The weight values for the driving music and the boarding music are output to the second weighting unit 107.

상기 제2 가중치부(107)는 입력된 운전용 음악 및 탑승용 음악에 대한 가중치 값을 저장한다. 그리고, 제2 가중치부(107)의 가중치 값은 제어부(104)로 출력된다.The second weighting unit 107 stores weight values of the input driving music and boarding music. The weight value of the second weighting unit 107 is output to the control unit 104. [

상기 제어부(104)는 제1 가중치부(103)의 운전, 동승 및 기타에 대한 가중치 값과 제2 가중치부(107)의 운전용 음악 및 탑승용 음악에 대한 가중치 값을 활용하여 모바일 기기 사용자에게 현재 상황 분류에 맞는 음악을 추천한다.
The control unit 104 controls the weighting value of the first weighting unit 103 for driving, traveling and others and weight values for the driving music and boarding music of the second weighting unit 107 to the mobile device user We recommend music that matches the current situation classification.

도 2는 도 1의 센서부(101)를 모바일 기기에 포함된 물리적, 소프트웨어적으로 표시한 구성도이다.FIG. 2 is a diagram showing a physical and software configuration of the sensor unit 101 of FIG. 1 included in a mobile device.

도 2에 도시된 바와 같이, 센서부(101)는 물리적 센서부(210), 소프트웨어 센서부(220), 기본 기기정보 센서부(230)로 나뉠 수 있다.2, the sensor unit 101 may be divided into a physical sensor unit 210, a software sensor unit 220, and a basic device information sensor unit 230.

상기 물리적 센서부(210)는 속도 정보를 제공하는 GPS(211), 진동의 강도를 제공하는 가속도 센서(212), 각속도 정보를 통해 모바일 기기의 기울임 정도를 제공하는 자이로미터(213), 사용자의 터치 빈도를 제공하는 터치 센서(214)를 포함한다.The physical sensor unit 210 includes a GPS 211 for providing speed information, an acceleration sensor 212 for providing strength of vibration, a gyrometer 213 for providing a degree of tilting of the mobile device through angular velocity information, And a touch sensor 214 for providing a touch frequency.

상기 물리적 센서부(210)의 센서들은 각각 독립적으로 동작하며, 모바일 기기(200) 내부에 장착되거나, 모바일 기기(200) 외부에 장착되어 통신 인터페이스를 통해 모바일 기기(200)로 정보를 전송할 수 있다.The sensors of the physical sensor unit 210 operate independently of each other and may be mounted inside the mobile device 200 or may be mounted outside the mobile device 200 to transmit information to the mobile device 200 through a communication interface .

상기 소프트웨어 센서부(220)는 내부 운영체제(OS)의 도움으로 현재 모바일 기기(200)에서 동작하는 프로세스와 백그라운드로 동작하는 프로세서의 종류에 대한 정보를 제공하는 프로세스 모니터(221)를 포함할 수 있다.The software sensor unit 220 may include a process monitor 221 for providing information on a process currently operating in the mobile device 200 and a processor operating in the background with the help of an internal operating system (OS) .

상기 기본 기기정보 센서부(230)는 사용자 상태 구분에 사용될 파라미터를 미리 저장하고 있는 데이터 저장소(231)를 포함할 수 있다. 데이터 저장소(231)는 모바일 기기(200) 내부에 장착되거나, 모바일 기기(200) 외부에 장착되어 통신 인터페이스를 통해 모바일 기기로 정보를 전송할 수 있다.
The base device information sensor unit 230 may include a data storage 231 for storing parameters to be used for user status classification in advance. The data storage 231 may be mounted inside the mobile device 200 or may be mounted outside the mobile device 200 to transmit information to the mobile device through the communication interface.

도 3은 도 1의 상황분석부(102)의 내부 구성 및 동작을 나타내는 도면이고, 도 4는 상황분석부(102) 내 데이터 흐름을 나타내는 도면이고, 도 5는 상황분석부의 데이터 처리에 필요한 결정표를 나타내는 도면이다.FIG. 3 is a diagram showing an internal configuration and operation of the situation analyzing unit 102 of FIG. 1, FIG. 4 is a view showing a data flow in the situation analyzing unit 102, Fig.

도 3 내지 5를 참조하여 상황분석부(102)에서 모바일 기기 사용자의 운전, 동승 및 기타에 대한 가중치를 부여하는 방법을 설명하도록 한다.3 to 5, a description will be given of a method for assigning weights for driving, traveling and others of the mobile device user in the situation analyzing unit 102. FIG.

상기 상황분석부(102)는 크게 전처리기(301), 처리기(302), 주기 타이머(303), 데이터 저장소(304)를 포함한다.The situation analyzer 102 mainly includes a preprocessor 301, a processor 302, a period timer 303, and a data repository 304.

이때, 상기 상황분석부(102)는 상기 주기 타이머(303)에 의해 정해진 시간 주기마다 활성화되어 이전 주기 이후의 센서값을 바탕으로 상황을 분석한다. At this time, the situation analyzer 102 is activated every time period determined by the period timer 303 and analyzes the situation based on the sensor values after the previous period.

상기 상황분석부(102)는 센서부(101)로부터 사용자의 상황을 판단할 수 있는 “특징 정보”를 입력 받는다. 이때, 특징 정보는 속도, 터치 빈도, 포그라운드 프로세서 정보, 진동 패턴, 각속도 중 적어도 하나 이상을 포함할 수 있다.The situation analyzing unit 102 receives " feature information " from the sensor unit 101 that can determine the user's situation. At this time, the feature information may include at least one of speed, touch frequency, foreground processor information, vibration pattern, and angular velocity.

여기에서, 속도는 GPS(211)에서 입력된 지난 주기 동안의 기기의 이동 속도의 평균을 의미한다.Here, the speed means an average of the moving speed of the device during the last period input from the GPS 211. [

그리고, 터치 빈도는 지난 주기 동안의 기기의 전면 터치 패널로부터 입력된 정보로 사용자의 터치 회수를 의미한다. The touch frequency refers to information input from the front touch panel of the device during the last period, which means the number of touches of the user.

포그라운드 프로세서 정보는 현재 모바일 기기의 화면에 표시된 앱 정보를 의미한다.The foreground processor information means the app information currently displayed on the screen of the mobile device.

진동 패턴은 가속도 센서(212)에서 입력된 진동 값을 전처리기(301)가 전처리한 값으로, 전처리기(301)는 지난 주기 동안의 진동의 진동수(frequency), 진동의 세기(진폭, amplitude)를 저장된 값과 비교하여 패턴을 추출한다.The vibration pattern is a value obtained by preprocessing the vibration value inputted from the acceleration sensor 212 by the preprocessor 301. The preprocessor 301 calculates the frequency of the vibration during the last period, Is compared with the stored value to extract the pattern.

진동 패턴은 진동수와 세기의 차이가 적을 경우 규칙적(regular)로 판단하고, 진동수와 세기의 차이가 클수록 불규칙적(irregular)으로 판단한다. 지난 주기의 값은 다시 데이터 저장소(304)에 저장되어 다음 주기의 값과 비교하는데 활용된다.The vibration pattern is determined to be regular when the difference between the frequency and the intensity is small, and is judged to be irregular when the difference between the frequency and the intensity is large. The value of the last period is again stored in the data store 304 and used to compare with the value of the next period.

각속도 정보는 지난 주기 동안 자이로미터(213)에서 입력된 각속도 값을 전처리기(301)가 전처리한 값으로, 지난 주기 동안 입력된 각속도 센서 값의 평균을 의미한다.The angular velocity information refers to an average value of the angular velocity sensor values input during the past period, which is a value obtained by preprocessing the angular velocity values input by the gyro-meter 213 during the past period.

처리기(302)는 센서부(101)로부터 입력된 속도, 포그라운드 프로세서 정보와 전처리(301)에서 전처리된 터치 빈도, 진동 패턴, 각속도 정보를 도 5의 결정표에 따라 처리하여 운전, 동승 및 기타에 대한 가중치 값을 결정한다.The processor 302 processes the velocity, foreground processor information input from the sensor unit 101 and the touch frequency, vibration pattern, and angular velocity information preprocessed in the preprocessing 301 according to the determination table of FIG. 5, Lt; / RTI >

보다 구체적으로, 처리기(302)는 속도 정보를 활용하여 차량의 속도가 차량 속도 역치값(Vt) 보가 큰 경우, 운전자 가중치와 동승자 가중치를 증가시킨다. 처리기(302)는 차량의 속도가 차량 속도 역치값(Vt)보다 작은 경우, 기타 가중치를 증가시킨다.More specifically, the processor 302 utilizes speed information to increase the driver weight and the occupant weight when the vehicle speed is greater than the vehicle speed threshold value Vt. The processor 302 increases other weights if the vehicle speed is less than the vehicle speed threshold value Vt.

처리기(302)는 터치 빈도가 터치 역치값(Tt)보다 큰 경우, 동승자 가중치와 기타 가중치를 증가시킨다. 처리기(302)는 터치 빈도가 터치 역치값(Tt)보다 작은 경우, 운전자 가중치를 증가시킨다.The processor 302 increases passenger weights and other weights if the touch frequency is greater than the touch threshold value Tt. The processor 302 increases the driver weight when the touch frequency is smaller than the touch threshold value Tt.

처리기(302)는 프로세스가 미리 저장된 프로세스 리스트에 존재할 경우, 운전자 가중치를 증가시킨다. 처리기(302)는 프로세스가 미리 저장된 프로세스 리스트에 존재하지 않을 경우, 등승자 가중치와 기타 가중치를 증가시킨다.The processor 302 increases the driver weight if the process is in a list of previously stored processes. The processor 302 increases the equal winner weight and other weights if the process is not present in the pre-stored process list.

처리기(302)는 진동 패턴이 규칙적이면 운전자 가중치를 증가시키고, 진동패턴이 불규직적이면 동승자 가중치와 기타 가중치를 증가시킨다.The processor 302 increases driver weights if the vibration pattern is regular and increases passenger weights and other weights if the vibration pattern is uneven.

처리기(302)는 각속도가 각속도 역치값(Ta)보다 큰 경우, 동승자 가중치와 기타 가중치를 증가시킨다. 처리기(302)는 각속도가 각속도 역치값(Ta)보다 작은 경우 운전자 가중치를 증가시킨다.The processor 302 increases the occupant weights and other weights if the angular velocity is greater than the angular velocity threshold value Ta. The processor 302 increases the driver weight when the angular velocity is smaller than the angular velocity threshold value Ta.

이러한 처리기(302)의 동작을 위해서, 본 발명에서 미리 결정해야 할 파라미터는 분석 주기, 진동 패턴 추출(진동수 차이 역치값, 세기 차이 역치값), 차량 속도 역치값, 터치 역치값, 프로세스 리스트, 각속도 역치값, 운전자 가중치 증가량, 동승자 가중치 증가량, 기타 가중치 증가량이다. 이러한 파라미터를 미리 결정되어 저장되며, 시스템 동작 중에 변경되지 않는다.For the operation of the processor 302, parameters to be determined in advance in the present invention include an analysis cycle, a vibration pattern extraction (a frequency difference threshold value, an intensity difference threshold value), a vehicle speed threshold value, a touch threshold value, Threshold value, driver weight increase, passenger weight increase, and other weight increase. These parameters are stored in advance and are not changed during system operation.

이와 같이, 본 발명에서는 속도, 포그라운드 프로세서 정보, 터치 빈도, 진동 패턴, 각속도 정보 등을 이용하여 사용자의 개입 없이 모바일 기기 사용자가 운전 중인지 동승자인지 여부를 자동으로 판단할 수 있다.As described above, the present invention can automatically determine whether the user of the mobile device is driving or not, using the speed, foreground processor information, touch frequency, vibration pattern, angular velocity information, and the like without user intervention.

또한, 본 발명에서는 사용자의 상황(운전, 동승, 기타)에 따라 적합한 음악을 추천할 수 있다.In addition, in the present invention, it is possible to recommend suitable music according to the user's situation (driving, traveling, etc.).

본 발명에서 제어부(104)는 사용자의 상황에 따라 적합한 음악을 추천하는 것으로 기재하였지만, 본 발명은 이에 한정되지 않고 사용자의 상황에 따라 네비게이션 자동 실행, 메시지 및 전화의 자동 거절 및 응답과 같은 다양한 서비스로 변경 실시될 수 있다.In the present invention, the controller 104 recommends suitable music according to the user's situation. However, the present invention is not limited to this, and various kinds of services such as automatic execution of navigation, automatic rejection of messages and telephone, . ≪ / RTI >

더하여, 본 발명에서 상황분석기(102)는 사용자의 상황을 운전, 동승 및 기타로 나눠 분석하였지만, 본 발명은 이에 한정되지 않고 싸이클, 도보 등과 같은 상황으로 확대 활용될 수 있다.
In addition, in the present invention, the situation analyzer 102 has analyzed the situation of the user by dividing it into driving, moving and other, but the present invention is not limited to this and can be extended to situations such as cycling and walking.

본 발명의 일 실시 예에 따른 사용자 상황에 따른 음악 추천 장치에서의 운영 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램 또는 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다. The operating method in the music recommendation apparatus according to the user situation according to an embodiment of the present invention can also be implemented in the form of a recording medium including a computer program stored in a medium executed by the computer or an instruction executable by the computer . Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media. In addition, the computer-readable medium may include both computer storage media and communication media. Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data. Communication media typically includes any information delivery media, including computer readable instructions, data structures, program modules, or other data in a modulated data signal such as a carrier wave, or other transport mechanism.

본 발명의 방법 및 장치는 특정 실시 예와 관련하여 설명되었지만, 그것들의 구성 요소 또는 동작의 일부 또는 전부는 범용 하드웨어 아키텍쳐를 갖는 컴퓨터 시스템을 사용하여 구현될 수 있다.While the methods and apparatus of the present invention have been described with reference to particular embodiments, some or all of those elements or operations may be implemented using a computer system having a general purpose hardware architecture.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시 예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.It will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the spirit and scope of the present invention as defined by the following claims . It is therefore to be understood that the above-described embodiments are illustrative in all aspects and not restrictive. For example, each component described as a single entity may be distributed and implemented, and components described as being distributed may also be implemented in a combined form.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
The scope of the present invention is defined by the appended claims rather than the detailed description and all changes or modifications derived from the meaning and scope of the claims and their equivalents are to be construed as being included within the scope of the present invention do.

101: 센서부
102: 상황분석부
103: 제1 가중치부
104: 제어부
105: 음악 DB
106: 템포분석부
107: 제2 가중치부
101:
102: Situation Analysis Department
103: first weight portion
104:
105: Music DB
106: tempo analyzer
107: second weight portion

Claims (8)

모바일 기기에 내장되거나 상기 모바일 기기에 장착되어 상기 모바일 기기의 상태 정보를 센싱하는 센서부;
상기 센서부에서 입력되는 정보에 기초하여 상기 모바일 기기 사용자의 상황을 운전, 동승 및 기타로 분류하여 운전자 가중치 값, 동승자 가중치 값 및 기타 가중치 값을 출력하는 상황분석부; 및
상기 상황분석부에서 출력된 가중치 값에 기초하여 상기 모바일 기기의 상황에 적합한 음악을 추천하는 제어부를 포함하고,
상기 상황분석부는 전처리기 및 처리기를 포함하고,
상기 전처리기는 가속도 센서에서 입력되는 진동 값을 전처리하여 진동 패턴을 출력하고, 자이로미터에서 입력되는 각속도 값을 전처리하여 각속도 정보를 출력하고, 터치 패널로부터 입력되는 터치 회수를 전처리하여 터치 빈도를 출력하며,
상기 처리기는 상기 센서부로부터 입력되는 속도 정보, 포그라운드 프로세서 정보와 상기 전처리에서 전처리된 터치 빈도, 진동 패턴 및 각속도 정보를 처리하여, 상기 운전자 가중치 값, 상기 동승자 가중치 값 및 상기 기타 가중치 값을 결정하는
사용자 상황에 따른 음악 추천 장치.
A sensor unit built in or incorporated in the mobile device to sense status information of the mobile device;
A situation analyzer for classifying the status of the user of the mobile device as driving, driving and other on the basis of information input from the sensor unit and outputting driver weight values, passenger weight values, and other weight values; And
And a controller for recommending music suitable for the situation of the mobile device based on the weight value output from the situation analyzer,
Wherein the situation analyzer includes a preprocessor and a processor,
The preprocessor preprocesses the vibration value input from the acceleration sensor to output a vibration pattern, preprocesses the angular velocity value input from the gyrometer, outputs angular velocity information, preprocesses the touch frequency inputted from the touch panel, and outputs the touch frequency ,
The processor processes velocity information, foreground processor information input from the sensor unit, touch frequency, vibration pattern, and angular velocity information preprocessed in the preprocessing to determine the driver weight value, the passenger weight value, and the other weight value doing
Music recommendation device according to user situation.
제 1 항에 있어서,
추천 대상이 되는 음악을 저장하고 있는 음악 데이터베이스; 및
상기 음악 데이터베이스 내의 음악 각각에 대해 운전용 음악에 대한 가중치 값 및 탑승용 음악에 대한 가중치 값을 출력하는 템포분석부를 포함하고,
상기 제어부는 상기 상황분석부에서 출력된 가중치 값 및 상기 템포분석부에서 출력된 가중치 값에 기초하여 상기 모바일 기기의 상황에 적합한 음악을 추천하는 것을 특징으로 하는 사용자 상황에 따른 음악 추천 장치.
The method according to claim 1,
A music database storing music to be recommended; And
And a tempo analyzer for outputting a weight value for driving music and a weight value for traveling music for each music in the music database,
Wherein the controller recommends music suitable for a situation of the mobile device based on a weight value output from the situation analyzer and a weight value output from the tempo analyzer.
삭제delete 제 1 항에 있어서,
상기 처리기는 상기 속도가 차량 속도 역치값 보다 큰 경우, 상기 운전자 가중치 값과 상기 동승자 가중치 값을 증가시키고, 상기 속도가 상기 차량 속도 역치값 보다 작은 경우, 상기 기타 가중치 값을 증가시키는
사용자 상황에 따른 음악 추천 장치.
The method according to claim 1,
Wherein the processor increases the driver weight value and the passenger weight value when the speed is greater than the vehicle speed threshold value and increases the other weight value when the speed is less than the vehicle speed threshold value
Music recommendation device according to user situation.
제 1 항에 있어서,
상기 처리기는 상기 터치 빈도가 터치 역치값보다 큰 경우, 상기 동승자 가중치 값을 증가시키고, 상기 터치 빈도가 상기 터치 역치값보다 작은 경우, 상기 기타 가중치 값을 증가시키는
사용자 상황에 따른 음악 추천 장치.
The method according to claim 1,
Wherein the processor increases the passenger weight value when the touch frequency is greater than the touch threshold value and increases the other weight value when the touch frequency is less than the touch threshold value
Music recommendation device according to user situation.
제 1 항에 있어서,
상기 처리기는 상기 진동 패턴이 규칙적이면 상기 운전자 가중치 값을 증가시키고, 상기 진동 패턴이 불규칙적이면 상기 동승자 가중치 값과 상기 기타 가중치 값을 증가시키는
사용자 상황에 따른 음악 추천 장치.
The method according to claim 1,
The processor increases the driver weight value if the vibration pattern is regular and increases the passenger weight value and the other weight value when the vibration pattern is irregular
Music recommendation device according to user situation.
제 1 항에 있어서,
상기 처리기는 상기 각속도가 각속도 역치값 보다 큰 경우 상기 동승자 가중치 값을 증가시키고, 상기 각속도가 상기 각속도 역치값 보다 작은 경우 상기 운전자 가중치 값을 증가시키는
사용자 상황에 따른 음악 추천 장치.
The method according to claim 1,
Wherein the processor increases the occupant weight value when the angular velocity is greater than the angular velocity threshold value and increases the driver weight value when the angular velocity is smaller than the angular velocity threshold value
Music recommendation device according to user situation.
제 1 항에 있어서,
상기 처리기는 프로세스가 미리 저장된 프로세스 리스트에 존재할 경우 상기 운전자 가중치 값을 증가시키고, 프로세스가 상기 프로세스 리스트에 존재하지 않을 경우 상기 동승자 가중치 값과 상기 기타 가중치 값을 증가시키는
사용자 상황에 따른 음악 추천 장치.
The method according to claim 1,
The processor increases the driver weight value when the process is in a list of previously stored processes and increases the passenger weight value and the other weight value when the process is not present in the process list
Music recommendation device according to user situation.
KR1020170001959A 2017-01-05 2017-01-05 Music recommendation system and method based on user context KR101943638B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170001959A KR101943638B1 (en) 2017-01-05 2017-01-05 Music recommendation system and method based on user context

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170001959A KR101943638B1 (en) 2017-01-05 2017-01-05 Music recommendation system and method based on user context

Publications (2)

Publication Number Publication Date
KR20180080873A KR20180080873A (en) 2018-07-13
KR101943638B1 true KR101943638B1 (en) 2019-01-30

Family

ID=62913728

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170001959A KR101943638B1 (en) 2017-01-05 2017-01-05 Music recommendation system and method based on user context

Country Status (1)

Country Link
KR (1) KR101943638B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230111382A (en) 2022-01-18 2023-07-25 주식회사 인디제이 Artificial intelligence-based user-customized music recommendation service device

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101654256B1 (en) * 2012-06-29 2016-09-09 에스케이텔레콤 주식회사 System and method for recommending contents on based passenger type for automobile

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230111382A (en) 2022-01-18 2023-07-25 주식회사 인디제이 Artificial intelligence-based user-customized music recommendation service device

Also Published As

Publication number Publication date
KR20180080873A (en) 2018-07-13

Similar Documents

Publication Publication Date Title
CN111476306B (en) Object detection method, device, equipment and storage medium based on artificial intelligence
US20190265060A1 (en) Autonomous driving apparatus and method thereof
US9501693B2 (en) Real-time multiclass driver action recognition using random forests
KR102460273B1 (en) Improved geo-fence selection system
US20130332113A1 (en) Context aware map application
KR20170097888A (en) Method for combining and providing colltected data from plural devices and electronic device for the same
RU2606880C2 (en) Method, device and software for activity sensor data processing
KR102163171B1 (en) Motion detection method, motion detection apparatus, device, and medium
CN111931929A (en) Training method and device of multi-task model and storage medium
KR20180072525A (en) An electronic device for navigation guide and method for controlling the electronic device thereof
CN107169525A (en) A kind of method, device and mobile terminal for determining mobile terminal application scenarios
US20210124961A1 (en) Systems and methods for utilizing machine learning and feature selection to classify driving behavior
US11403081B2 (en) Automatic software performance optimization
CN105323375A (en) Determination of device body location
US20230252551A1 (en) Vehicle identification driven by augmented reality (ar)
CN112630799A (en) Method and apparatus for outputting information
US20170344123A1 (en) Recognition of Pickup and Glance Gestures on Mobile Devices
KR101943638B1 (en) Music recommendation system and method based on user context
CN113255559B (en) Data processing method, device and storage medium
CN104063878A (en) Motion object detection device, motion object detection method and electronic device
US11814062B2 (en) Detecting and handling driving event sounds during a navigation session
CN108120450B (en) Method and device for judging static state
KR20180082130A (en) Method and system for detecting automatic input
US11874129B2 (en) Apparatus and method for servicing personalized information based on user interest
KR102356259B1 (en) Electronic apparatus and controlling method thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant