CN112380363A - 多媒体内容推荐方法、装置、车辆及存储介质 - Google Patents
多媒体内容推荐方法、装置、车辆及存储介质 Download PDFInfo
- Publication number
- CN112380363A CN112380363A CN202011204475.4A CN202011204475A CN112380363A CN 112380363 A CN112380363 A CN 112380363A CN 202011204475 A CN202011204475 A CN 202011204475A CN 112380363 A CN112380363 A CN 112380363A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- emotional state
- user
- multimedia
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 33
- 230000002996 emotional effect Effects 0.000 claims abstract description 176
- 230000008859 change Effects 0.000 claims abstract description 118
- 208000019901 Anxiety disease Diseases 0.000 claims abstract description 91
- 230000036506 anxiety Effects 0.000 claims abstract description 91
- 230000008451 emotion Effects 0.000 claims abstract description 42
- 238000004590 computer program Methods 0.000 claims description 10
- 210000004556 brain Anatomy 0.000 claims description 6
- 230000004424 eye movement Effects 0.000 claims description 6
- 230000006866 deterioration Effects 0.000 claims description 4
- 230000006872 improvement Effects 0.000 claims description 4
- 230000006870 function Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000001174 ascending effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000013507 mapping Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 210000003403 autonomic nervous system Anatomy 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000009532 heart rate measurement Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008288 physiological mechanism Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/43—Querying
- G06F16/435—Filtering based on additional data, e.g. user or group profiles
- G06F16/436—Filtering based on additional data, e.g. user or group profiles using biological or physiological data of a human being, e.g. blood pressure, facial expression, gestures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/053—Measuring electrical impedance or conductance of a portion of the body
- A61B5/0531—Measuring skin impedance
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/681—Wristwatch-type devices
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Physics & Mathematics (AREA)
- Biophysics (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Public Health (AREA)
- Pathology (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Psychiatry (AREA)
- Psychology (AREA)
- Physiology (AREA)
- Social Psychology (AREA)
- Child & Adolescent Psychology (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
- Hospice & Palliative Care (AREA)
- Theoretical Computer Science (AREA)
- Cardiology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Pulmonology (AREA)
- Dermatology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种多媒体内容推荐方法、装置、车辆及存储介质，该方法包括：获取车内用户在至少两个时刻的生理信号；根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容；其中，所述情绪状态包括：专注度和焦虑度。本发明实施例根据车内用户的情绪状态变化对推荐多媒体内容的有效性判断来确定待推荐的目标多媒体内容，缓解车内用户情绪为驾驶安全提供保证。
Description
技术领域
本发明实施例涉及计算机技术领域，尤其涉多媒体内容推荐方法、装置、车辆及存储介质。
背景技术
随着智能化设备的快速发展，在交通工具上搭载多媒体设备已经很普遍。现有的在车辆上搭载多媒体设备能随机的为车内用户推荐多媒体内容，以便于缓解车内用户情绪状态，进一步提高车内用户的专注度，为安全驾驶提供基础。但，现有的车载多媒体设备推荐多媒体内容的方式随机性比较大或按照多媒体设备历史播放内容进行推荐，并不能根据车内用户当前的情绪状态有针对性的推荐的多媒体内容。
发明内容
本发明提供了媒体内容推荐方法、装置、车辆及存储介质，以实现了通过实时监测车内用户的情绪状态对多媒体内容的有效性进行判断，达到根据车内用户的情绪状态进行针对性的多媒体内容的推荐，缓解车内用户情绪为驾驶安全提供保证。
第一方面，本发明实施例提供了一种多媒体内容推荐方法，该方法包括：
获取车内用户在至少两个时刻的生理信号；根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容；其中，所述情绪状态包括：专注度和焦虑度。
进一步的，所述生理信号包括：皮肤电导信号、心率信号、心电信号、眼动信号和脑电波信号。
进一步的，所述根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态，包括：根据各所述生理信号进行层次聚类，获得各所述生理信号对应的等级；根据各所述生理信号对应的等级，确定所述车内用户在相对应各时刻的情绪状态中专注度和焦虑度。
进一步的，所述确定所述车内用户在相邻时刻内的情绪状态变化，包括：根据所述相邻时刻的情绪状态中专注度和焦虑度确定所述车内用户在相邻时刻内的情绪状态变化。
进一步的，所述根据所述相邻时刻的情绪状态中专注度和焦虑度确定所述车内用户在相邻时刻内的情绪状态变化，包括：分别以时间和专注度作为横轴和纵轴建立第一坐标系，并根据所述至少两个时刻和所述至少两个时刻对应的专注度，绘制专注度曲线；分别以时间和焦虑度作为横轴和纵轴建立第二坐标系，并根据所述至少两个时刻和所述至少两个时刻对应的焦虑度，绘制焦虑度曲线；根据所述专注度曲线和所述焦虑度曲线确定所述车内用户在相邻时刻内的情绪状态变化。
进一步的，所述根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容，包括：若所述相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示所述情绪状态变化为改善，则待推荐的目标多媒体内容为所述相邻时刻内对应的多媒体推荐内容；若所述相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示所述情绪状态变化为恶化，则待推荐的目标多媒体内容为所述相邻时刻内对应的多媒体推荐内容属性相反的多媒体推荐内容。
进一步的，所述方法还包括：根据各所述相邻时刻内的情绪状态变化及相应的多媒体推荐内容，建立多媒体内容推荐库；当获取到所述车内用户在的任一时刻的中间情绪状态时，基于所述中间情绪状态确定所述车内用户的目标情绪状态变化，并根据所述目标情绪状态变化在所述多媒体内容推荐库中匹配得到待推荐的目标多媒体内容。
第二方面，本发明实施例还提供了一种多媒体内容推荐装置，该装置包括：
信号获取模块，用于获取车内用户在至少两个时刻的生理信号；
状态确定模块，用于根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；
情绪变化状态确定模块，用于确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；
内容确定模块，用于根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容；其中，所述情绪状态包括：专注度和焦虑度。
第三方面，本发明实施例还提供了一种车辆，该车辆包括存储器和处理器；所述存储器中存储有计算机程序；所述处理器，用于执行所述计算机程序以实现任一项所述的多媒体内容推荐方法。
第四方面，本发明实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现任一项所述的多媒体内容推荐方法。
本发明通过获取车内用户在至少两个时刻的生理信号；根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容。解决现有的车载多媒体设备不能根据车内用户当前的情绪状态有针对性的推荐的多媒体内容问题，实现了根据车内用户的情绪状态变化对推荐多媒体内容的有效性判断，进而确定待推荐的目标多媒体内容，缓解车内用户情绪为驾驶安全提供保证。
附图说明
图1为本发明实施例一中的一种多媒体内容推荐方法的流程图；
图2是本发明实施例二中的一种多媒体内容推荐装置的结构示意图；
图3是本发明实施例三中的一种车辆的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种多媒体内容推荐方法的流程图，本实施例可适用于各种多媒体内容推荐的场景中，该方法可以由多媒体内容推荐装置来执行，具体包括如下步骤：
步骤S110，获取车内用户在至少两个时刻的生理信号；
本发明实施例中，车内用户为车辆内的任一用户，相当于车内人员，是各时刻生理信号的提供者。车内用户可以是驾驶员，也可以是乘车人员。至少两个时刻的生理信号为传感器从车内用户采集到任意两个不同时刻的生理信号。
具体地，所述生理信号包括：皮肤电导信号、心率信号、心电信号、眼动信号和脑电波信号。
本发明实施例中，人体生理信号可以分为电信号与非电信号，这里采用电信号利用多种传感器进行采集。根据人体生理信号的不稳定性、非线性的特点，需要根据不同信号特性采用不同的检测方式。生理信号的获取可以通过车内预先设置多种传感器来实时采集车内用户的生理信号。多种传感器可以是预先设置在车内不同预设位置以采集到车内用户的生理信号，例如，将图像采集传感器设置于可以采集到车内用户面部出现的区域处，通过面部图像的采集获取车内用户的眼动信号；多种传感器也可以是车内用户的可穿戴设备，例如，车内用户佩戴心率测量功能的腕带、皮肤导电信号测量功能的手表、脑电波测量功能的帽子等。
本发明实施例中，获取车内用户在至少两个时刻的生理信号时，选取相邻两个时刻之间的时间间隔需要根据多媒体设备推荐的多媒体内容选取，使得相邻两个时刻之间的时间间隔内播放的多媒体推荐内容的种类尽可能的少，以保证确定的待推荐的目标多媒体内容中内容组合情况较少或者无，推荐的多媒体内容的准确性更高。
步骤S120，根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；
本发明实施例中，车内用户在各时刻的情绪状态为车内用户在各时刻的生理信号对应的车内用户的专注度和焦虑度。情绪状态为内心体验与外部行为综合表现，同时也有其生理机制，由于自主神经系统和活动当人体处于某种情绪状态时，其内部发生一系列的生理变化，即生理信号也会随之变化。
本发明实施例中，车内用户不同的情绪状态可以通过分析车内用户的生理信号中的生理信息来区分，不同的生理信号可以反映人不同的情绪状态，其中，车内用在各时刻的情绪状态根据采集到的对应时刻的生理信号进行确定，例如，人在焦虑时，心率会升高，人在专注度高时，皮肤电导率升高等。
本发明实施例中，车内用户的情绪状态可以根据采集到生理信号对应的专注度和焦虑度的取值范围来对情绪状态进行具体的量化。例如，可以将专注度和焦虑度分别划分为0-100个取值，其中，专注度在0-100中取值越大说明专注度越高，焦虑度在0-100中取值越大说明焦虑度越高。
进一步的，所述根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态，包括：根据各所述生理信号进行层次聚类，获得各所述生理信号对应的等级；根据各所述生理信号对应的等级，确定所述车内用户在相对应各时刻的情绪状态中专注度和焦虑度。
本发明实施例中，层次聚类为聚类算法的一种，用于确定车内用户在各时刻的生理信号对应情绪状态中专注度和焦虑度的等级。生理信号对应情绪状态中专注度和焦虑度的等级为根据生理信号所确定的对应情绪状态中专注度和焦虑度划分的取值范围。根据获取到各时刻的生理信号所确定的对应情绪状态中专注度和焦虑度的等级分析得到车内用户在各时刻的情绪状态中专注度和焦虑度。
本发明实施例中，车内用户在各时刻的情绪状态中专注度和焦虑度为任一取值区间范围内的一个量化值，例如，当情绪状态中专注度和焦虑度划分的取值区间为0-100，情绪状态中专注度和焦虑度为0-100内的任一具体的量化值；当情绪状态中专注度和焦虑度划分的取值区间为0-20，情绪状态中专注度和焦虑度为0-20内的任一具体的量化值。可以理解的是，可以将专注度和焦虑度划分为任一多个量化取值，如0-20或0-100，且划分的取值越多，其反映的专注度和焦虑度越准确。
本发明实施例中，将获取的各时刻的生理信号经层次聚类后得到各时刻生理信号对应情绪状态中专注度和焦虑度的等级。利用多种传感器器采集到车内用户的生理信号可以是皮肤电导信号、心率信号、心电信号、眼动信号和脑电波信号间的任意组合。对获取到各时刻的生理信号进行层次聚类可以是生理信号中每种信号进行层次聚类得到对应的等级，也可以是生理信号的任意组合进行层次聚类得到对应的等级。根据所确定的对应情绪状态中专注度和焦虑度的等级与车内用户的情绪状态中专注度和焦虑度取值区间映射关系，确定车内用户在各时刻的情绪状态中专注度和焦虑度。
步骤S130，确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；
本发明实施例中，相邻时刻内的多媒体内容为相邻两个时刻间随机推荐的的多媒体内容。其中，多媒体设备推荐的多媒体内容为通过显示装置或播放装置展示的视频、图片、音频内容。例如，新闻信息，相声或小品的音频、音乐，电影音视频。
本发明实施例中，相邻时刻内的情绪状态变化为相邻两个时刻的情绪状态间的变化情况。根据相邻两个时刻的情绪状态的变化情况确定相邻时刻内的多媒体推荐内容对车内用户的情绪状态影响，确定车内用户在相邻时刻内的情绪状态变化用于根据情绪状态变化鉴别多媒体推荐内容。
本发明实施例中，多媒体设备推荐的多媒体内容通过对车内用户的视觉和听觉获取的信息内容，对对应车内用户的情绪状态具有干扰，能根据车内用户对获取的信息内容的认知程度改变当前车内用户的情绪状态。
本发明实施例中，车载多媒体设备随机推荐的多媒体内容在播放过程中，通过多种传感器采集车内用户的至少两个时刻的生理信号，根据各时刻生理信号确定各时刻车内用户的情绪状态中专注度和焦虑度，即获取车内用户各时刻的专注度和焦虑度的量化值。根据相邻两个时刻的情绪状态中专注度和焦虑度确定车内用户在相邻时刻内的情绪状态变化。
进一步的，所述确定所述车内用户在相邻时刻内的情绪状态变化，包括：根据所述相邻时刻的情绪状态中专注度和焦虑度确定所述车内用户在相邻时刻内的情绪状态变化。
本发明实施例中，根据相邻时刻内的情绪状态变化中专注度和焦虑度具体值进行比较，获取相邻时刻内的情绪状态变化中专注度和焦虑度的差值。根据相邻时刻内的情绪状态变化中专注度和焦虑度的差值，确定相邻时刻内情绪状态变化情况。
本发明实施例中，根据相邻时刻内的情绪状态变化中专注度和焦虑度的差值确定相邻时刻内情绪状态变化情况。若相邻时刻内的情绪状态变化中专注度差值为负数，则专注度提高；若相邻时刻内的情绪状态变化中焦虑度差值为正数，则焦虑度减弱，确定相邻时刻内的情绪状态变化为改善。若相邻时刻内的情绪状态变化中专注度为正数，则专注度降低；若相邻时刻内的情绪状态变化中焦虑度差值为负数，则焦虑度上升，确定相邻时刻内的情绪状态变化为恶化。
进一步的，所述根据所述相邻时刻的情绪状态中专注度和焦虑度确定所述车内用户在相邻时刻内的情绪状态变化，包括：分别以时间和专注度作为横轴和纵轴建立第一坐标系，并根据所述至少两个时刻和所述至少两个时刻对应的专注度，绘制专注度曲线；分别以时间和焦虑度作为横轴和纵轴建立第二坐标系，并根据所述至少两个时刻和所述至少两个时刻对应的焦虑度，绘制焦虑度曲线；根据所述专注度曲线和所述焦虑度曲线确定所述车内用户在相邻时刻内的情绪状态变化。
本发明实施例中，第一坐标系为根据时间与专注度为横纵坐标建立的直角坐标系；第二坐标系为根据时间与焦虑度为横纵坐标建立的关于坐标系；专注度曲线为根据时间和时间对应的情绪状态中专注度绘制的曲线。焦虑度曲线为根据时间和时间对应的情绪状态中焦虑度绘制的曲线。专注度曲线和焦虑度曲线，用于确定车内用户在相邻时刻内的情绪状态变化。
本发明实施例中，分别以时间为横轴、专注度为纵轴建立第一坐标系，并根据各时刻与各时刻的情绪状态中专注度在第一坐标系中确定各个坐标点，将各个坐标点按照时间顺序相连绘制出专注度曲线。分别以时间为横轴、焦虑度为纵轴建立第二坐标系，并根据各时刻与各时刻的情绪状态中焦虑度在第二坐标系中确定各个坐标点，将各个坐标点按照时间顺序相连绘制出焦虑度曲线。根据在第一坐标系中绘制的专注度曲线和在第二坐标系中绘制的焦虑度曲线，相邻两个时刻所对应的专注度曲线的变化趋势和焦虑度曲线的变化趋势，确定车内用户在相邻时刻内的情绪状态变化。
步骤S140根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容；其中，所述情绪状态包括：专注度和焦虑度。
本发明实施例中，待推荐的目标多媒体内容为多媒体设备待播放的多媒体内容。情绪状态中专注度为人体专注力的量化指标，用于指示当前情绪状态中车内用户情绪的稳定性，一般的，人的情绪状态越稳定，专注力越强专注度越高；情绪状态中焦虑度为紧张情绪的量化指标，用于指示当前情绪状态中车内用户情绪的不稳定性，一般的，人的情绪状态越不稳定，情绪越紧张焦虑度越高。
本发明实施例中，根据车内用户在各相邻时刻内的多媒体推荐内容播放时，根据各时刻的情绪状态确定相邻时刻内的情绪状态变化，将各相邻时刻内的情绪状态变化与目标情绪状态变化进行对比，根据各相邻时刻内的情绪状态变化与目标情绪状态变化对比结果，确定出待推荐的目标多媒体内容。
进一步的，所述根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容，包括：
若所述相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示所述情绪状态变化为改善，则待推荐的目标多媒体内容为所述相邻时刻内对应的多媒体推荐内容；
若所述相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示所述情绪状态变化为恶化，则待推荐的目标多媒体内容为所述相邻时刻内对应的多媒体推荐内容属性相反的多媒体推荐内容。
本发明实施例中，相邻时刻内的情绪变化中专注度曲线的变化趋势和焦虑度曲线的变化趋势，当专注曲线的变化趋势呈现上升趋势，同时焦虑度曲线的变化趋势呈现下降趋势，相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示车内用户的情绪状态变化为改善，将相邻时刻内对应的多媒体推荐内容作为待推荐的目标多媒体内容。
本发明实施例中，相邻时刻内的情绪变化中专注度曲线的变化趋势和焦虑度曲线的变化趋势，当专注曲线的变化趋势呈现下降升趋势，同时焦虑度曲线的变化趋势呈现上升趋势，相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示车内用户的情绪状态变化为恶化，将相邻时刻内对应的多媒体推荐内容属性相反的多媒体推荐内容作为待推荐的目标多媒体内容。
进一步的，所述方法还包括：
根据各所述相邻时刻内的情绪状态变化及相应的多媒体推荐内容，建立多媒体内容推荐库；当获取到所述车内用户在的任一时刻的中间情绪状态时，基于所述中间情绪状态确定所述车内用户的目标情绪状态变化，并根据所述目标情绪状态变化在所述多媒体内容推荐库中匹配得到待推荐的目标多媒体内容。
本发明实施例中，多媒体内容推荐库为存储根据相邻时刻内的情绪状态变化相应的多媒体内容库。多媒体内容推荐库可以是根据相邻时刻内的情绪状态变化对相应的多媒体推荐内容进行标签标记，也可以是根据相邻时刻内的情绪状态变化对相应的多媒体推荐内容进行量化，根据量化值与情绪状态变化之间映射关系使得情绪状态变化与相应的多媒体推荐内容进行对应。其中，中间情绪状态为车内用户在任一时刻的情绪状态，用于作为车内用户的当前情绪状态。
本发明实施例中，根据相邻时刻内的情绪状态变化对相应的多媒体推荐内同进行存储，建立具有情绪状态变化标记的多媒体内容推荐库。当通过车辆内设置的多种传感器获取到车内用户当前时刻的生理信号，并通过当前时刻的生理信号确定当前车内用户的情绪状态作为中间情绪状态。利用车内用户的中间情绪状态确定车内用户的目标情绪状态，根据车内用户的中间情绪状态和目标情绪状态确定车内用户的目标情绪状态变化。根据确定的目标情绪状态变化在多媒体内容推荐库中匹配相同情绪状态变化的多媒体推荐内容作为待推荐的目标多媒体内容。
本发明实施例中，根据确定的目标情绪状态变化在多媒体内容推荐库中匹配相同情绪状态变化的多媒体推荐内容，若匹配到相同情绪变化的多媒体推荐内容，则将匹配到的多媒体推荐内容作为待推荐的目标多媒体内容。若没有匹配到相同情绪变化的多媒体推荐内容，则获取车内用户在至少两个时刻的生理信号，顺序按照步骤S120至步骤S140多媒体内容推荐方法进行确定待推荐的目标多媒体内容，并相应存储与多媒体内容推荐库中。
本发明通过获取车内用户在至少两个时刻的生理信号；根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容。解决现有的车载多媒体设备不能根据车内用户当前的情绪状态有针对性的推荐的多媒体内容问题，实现了根据车内用户的情绪状态变化对推荐多媒体内容的有效性判断，进而确定待推荐的目标多媒体内容，缓解车内用户情绪为驾驶安全提供保证。
实施例二
图2为本发明实施例二提供的一种多媒体内容推荐装置的结构示意图。该装置包括：信号获取模块21、状态确定模块22、情绪变化确定模块23、内容确定模块24。
信号获取模块21，用于获取车内用户在至少两个时刻的生理信号；
状态确定模块22，用于根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；
情绪变化确定模块23，用于确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；
内容确定模块24，用于根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容；其中，所述情绪状态包括：专注度和焦虑度。
其中，所述生理信号包括：皮肤电导信号、心率信号、心电信号、眼动信号和脑电波信号。
进一步的，所述状态确定模块22具体用于：
根据各所述生理信号进行层次聚类，获得各所述生理信号对应的等级；根据各所述生理信号对应的等级，确定所述车内用户在相对应各时刻的情绪状态中专注度和焦虑度。
进一步的，所述情绪变化确定模块23具体用于：
根据所述相邻时刻的情绪状态中专注度和焦虑度确定所述车内用户在相邻时刻内的情绪状态变化。
进一步的，所述情绪变化确定模块23具体用于：
分别以时间和专注度作为横轴和纵轴建立第一坐标系，并根据所述至少两个时刻和所述至少两个时刻对应的专注度，绘制专注度曲线；分别以时间和焦虑度作为横轴和纵轴建立第二坐标系，并根据所述至少两个时刻和所述至少两个时刻对应的焦虑度，绘制焦虑度曲线；根据所述专注度曲线和所述焦虑度曲线确定所述车内用户在相邻时刻内的情绪状态变化。
进一步的，所述内容确定模块24具体用于：
若所述相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示所述情绪状态变化为改善，则待推荐的目标多媒体内容为所述相邻时刻内对应的多媒体推荐内容；若所述相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示所述情绪状态变化为恶化，则待推荐的目标多媒体内容为所述相邻时刻内对应的多媒体推荐内容属性相反的多媒体推荐内容。
进一步的，所述多媒体内容推荐装置还包括：内容推荐库建立模块；
内容推荐库建立模块，用于根据各所述相邻时刻内的情绪状态变化及相应的多媒体推荐内容，建立多媒体内容推荐库；当获取到所述车内用户在的任一时刻的中间情绪状态时，基于所述中间情绪状态确定所述车内用户的目标情绪状态变化，并根据所述目标情绪状态变化在所述多媒体内容推荐库中匹配得到待推荐的目标多媒体内容。
本发明实施例所提供的多媒体内容推荐装置可执行本发明任意实施例所提供的多媒体内容推荐方法，具备执行方法相应的功能模块和有益效果。
实施例三
图3为本发明实施例三提供的一种车辆的结构示意图，如图3所示，该车辆包括传感器31、控制器32、存储装置33、输入装置34和输出装置35；车辆中传感器31和控制器32的数量可以是一个或多个，图3中以一个传感器31和控制器32为例；车辆中的传感器31、控制器32、存储装置33、输入装置34和输出装置35可以通过总线或其他方式连接，图3中以通过总线连接为例。
存储装置33作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的多媒体内容推荐方法对应的程序指令/模块(例如，信号获取模块21、状态确定模块22、情绪变化确定模块23、内容确定模块24)。控制器32通过运行存储在存储装置33中的软件程序、指令以及模块，从而执行车辆的各种功能应用以及数据处理，即实现上述的多媒体内容推荐方法。
存储装置33可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储装置33可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储装置33可进一步包括相对于控制器32远程设置的存储器，这些远程存储器可以通过网络连接至车辆。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置34可用于接收输入的数字或字符信息，以及产生与车辆的用户设置以及功能控制有关的键信号输入。输出装置35可包括显示屏等显示设备。
实施例四
本发明实施例四还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现任一项所述的多媒体内容推荐方法，该方法包括：
获取车内用户在至少两个时刻的生理信号；
根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；
确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；
根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容；其中，所述情绪状态包括：专注度和焦虑度。
本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言，诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言，诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络包括局域网(LAN)或广域网(WAN)连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种多媒体内容推荐方法，其特征在于，包括：
获取车内用户在至少两个时刻的生理信号；
根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；
确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；
根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容；
其中，所述情绪状态包括：专注度和焦虑度。
2.根据权利要求1所述的方法，其特征在于，所述生理信号包括：皮肤电导信号、心率信号、心电信号、眼动信号和脑电波信号。
3.根据权利要求1所述的方法，其特征在于，所述根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态，包括：
根据各所述生理信号进行层次聚类，获得各所述生理信号对应的等级；
根据各所述生理信号对应的等级，确定所述车内用户在相对应各时刻的情绪状态中专注度和焦虑度。
4.根据权利要求1所述的方法，其特征在于，所述确定所述车内用户在相邻时刻内的情绪状态变化，包括：
根据所述相邻时刻的情绪状态中专注度和焦虑度确定所述车内用户在相邻时刻内的情绪状态变化。
5.根据权利要求4所述的方法，其特征在于，所述根据所述相邻时刻的情绪状态中专注度和焦虑度确定所述车内用户在相邻时刻内的情绪状态变化，包括：
分别以时间和专注度作为横轴和纵轴建立第一坐标系，并根据所述至少两个时刻和所述至少两个时刻对应的专注度，绘制专注度曲线；
分别以时间和焦虑度作为横轴和纵轴建立第二坐标系，并根据所述至少两个时刻和所述至少两个时刻对应的焦虑度，绘制焦虑度曲线；
根据所述专注度曲线和所述焦虑度曲线确定所述车内用户在相邻时刻内的情绪状态变化。
6.根据权利要求1所述的方法，其特征在于，所述根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容，包括：
若所述相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示所述情绪状态变化为改善，则待推荐的目标多媒体内容为所述相邻时刻内对应的多媒体推荐内容；
若所述相邻时刻内的情绪状态变化中专注度曲线和焦虑度曲线指示所述情绪状态变化为恶化，则待推荐的目标多媒体内容为所述相邻时刻内对应的多媒体推荐内容属性相反的多媒体推荐内容。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
根据各所述相邻时刻内的情绪状态变化及相应的多媒体推荐内容，建立多媒体内容推荐库；
当获取到所述车内用户在的任一时刻的中间情绪状态时，基于所述中间情绪状态确定所述车内用户的目标情绪状态变化，并根据所述目标情绪状态变化在所述多媒体内容推荐库中匹配得到待推荐的目标多媒体内容。
8.一种多媒体内容推荐装置，其特征在于，包括：
信号获取模块，用于获取车内用户在至少两个时刻的生理信号；
状态确定模块，用于根据各所述生理信号确定所述车内用户在相对应各时刻的情绪状态；
情绪变化状态确定模块，用于确定所述车内用户在相邻时刻内的情绪状态变化，并确定所述相邻时刻内的多媒体推荐内容；
内容确定模块，用于根据所述车内用户在各相邻时刻内的情绪状态变化以及相应的多媒体推荐内容，确定待推荐的目标多媒体内容；
其中，所述情绪状态包括：专注度和焦虑度。
9.一种车辆，其特征在于，所述车辆包括存储器和处理器；
所述存储器中存储有计算机程序；
所述处理器，用于执行所述计算机程序以实现权利要求1-7中任一项所述的多媒体内容推荐方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-7中任一项所述的多媒体内容推荐方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011204475.4A CN112380363A (zh) | 2020-11-02 | 2020-11-02 | 多媒体内容推荐方法、装置、车辆及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011204475.4A CN112380363A (zh) | 2020-11-02 | 2020-11-02 | 多媒体内容推荐方法、装置、车辆及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112380363A true CN112380363A (zh) | 2021-02-19 |
Family
ID=74577161
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011204475.4A Pending CN112380363A (zh) | 2020-11-02 | 2020-11-02 | 多媒体内容推荐方法、装置、车辆及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112380363A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113017632A (zh) * | 2021-03-17 | 2021-06-25 | 陈思 | 一种智慧校园心理咨询辅助方法及系统 |
| CN113518263A (zh) * | 2021-07-23 | 2021-10-19 | 南京炫佳网络科技有限公司 | 交互式网络电视的视频推荐方法、装置、电视及存储介质 |
| CN113515646A (zh) * | 2021-04-30 | 2021-10-19 | 广州酷狗计算机科技有限公司 | 多媒体文件推荐方法、装置及存储介质 |
| CN116257164A (zh) * | 2023-05-11 | 2023-06-13 | 武汉元光科技有限公司 | 候车用户焦虑响应方法及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017096979A1 (zh) * | 2015-12-08 | 2017-06-15 | 乐视控股（北京）有限公司 | 基于用户情绪的节目播放方法和系统 |
| CN108319643A (zh) * | 2017-12-22 | 2018-07-24 | 新华网股份有限公司 | 多媒体信息的评测方法和系统 |
| CN110134822A (zh) * | 2019-05-10 | 2019-08-16 | 一汽轿车股份有限公司 | 车载音乐推荐方法和推荐系统 |
| CN110200616A (zh) * | 2019-05-29 | 2019-09-06 | 泰康保险集团股份有限公司 | 心率特征数据处理方法、装置、介质及电子设备 |
-
2020
- 2020-11-02 CN CN202011204475.4A patent/CN112380363A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017096979A1 (zh) * | 2015-12-08 | 2017-06-15 | 乐视控股（北京）有限公司 | 基于用户情绪的节目播放方法和系统 |
| CN108319643A (zh) * | 2017-12-22 | 2018-07-24 | 新华网股份有限公司 | 多媒体信息的评测方法和系统 |
| CN110134822A (zh) * | 2019-05-10 | 2019-08-16 | 一汽轿车股份有限公司 | 车载音乐推荐方法和推荐系统 |
| CN110200616A (zh) * | 2019-05-29 | 2019-09-06 | 泰康保险集团股份有限公司 | 心率特征数据处理方法、装置、介质及电子设备 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113017632A (zh) * | 2021-03-17 | 2021-06-25 | 陈思 | 一种智慧校园心理咨询辅助方法及系统 |
| CN113017632B (zh) * | 2021-03-17 | 2022-11-11 | 陈思 | 一种智慧校园心理咨询辅助方法及系统 |
| CN113515646A (zh) * | 2021-04-30 | 2021-10-19 | 广州酷狗计算机科技有限公司 | 多媒体文件推荐方法、装置及存储介质 |
| CN113518263A (zh) * | 2021-07-23 | 2021-10-19 | 南京炫佳网络科技有限公司 | 交互式网络电视的视频推荐方法、装置、电视及存储介质 |
| CN116257164A (zh) * | 2023-05-11 | 2023-06-13 | 武汉元光科技有限公司 | 候车用户焦虑响应方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112380363A (zh) | 多媒体内容推荐方法、装置、车辆及存储介质 | |
| US20200007638A1 (en) | Method and apparatus for pushing information | |
| US10620593B2 (en) | Electronic device and control method thereof | |
| US20180125406A1 (en) | Mental state estimation using relationship of pupil dynamics between eyes | |
| KR102037419B1 (ko) | 영상 표시 장치 및 그 동작 방법 | |
| CN109949438B (zh) | 异常驾驶监测模型建立方法、装置及存储介质 | |
| KR20190067638A (ko) | 음성 인식 장치 및 그 동작 방법 | |
| CN114710555A (zh) | 一种婴儿监护方法及装置 | |
| US20220036427A1 (en) | Method for managing immersion level and electronic device supporting same | |
| US11144123B2 (en) | Systems and methods for human-machine subconscious data exploration | |
| CN110956127A (zh) | 用于生成特征向量的方法、装置、电子设备和介质 | |
| CN115024690A (zh) | 酒精代谢检测方法、计算机设备及存储介质 | |
| CN117390277B (zh) | 一种课程资源和服务的管理方法及系统 | |
| US20180189451A1 (en) | Measuring somatic response to stimulus utilizing a mobile computing device | |
| CN115067945A (zh) | 疲劳检测方法、装置、设备及存储介质 | |
| CN116319932A (zh) | 内容推送模型的训练方法、装置、设备及存储介质 | |
| CN111309230B (zh) | 信息展示方法、装置、电子设备及计算机可读存储介质 | |
| US20230281983A1 (en) | Image recognition method and apparatus, electronic device, and computer-readable medium | |
| CN116101205A (zh) | 基于车内摄像头的智能座舱车内智能感知系统 | |
| CN115489402A (zh) | 车辆座舱调整方法、装置、电子设备及可读存储介质 | |
| CN110908505B (zh) | 兴趣识别方法、装置、终端设备及存储介质 | |
| KR102308317B1 (ko) | 치매 노인을 위한 회상 요법 제공 방법 및 그 시스템 | |
| CN113791841A (zh) | 一种执行指令确定方法、装置、设备及存储介质 | |
| CN108959890A (zh) | 电子终端中的控制方法及电子终端 | |
| CN115860861A (zh) | 基于多模态融合的产品推荐方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |