RU2704663C2 - Динамическая система информирования о разговорах (варианты) - Google Patents

Динамическая система информирования о разговорах (варианты) Download PDF

Info

Publication number
RU2704663C2
RU2704663C2 RU2018111203A RU2018111203A RU2704663C2 RU 2704663 C2 RU2704663 C2 RU 2704663C2 RU 2018111203 A RU2018111203 A RU 2018111203A RU 2018111203 A RU2018111203 A RU 2018111203A RU 2704663 C2 RU2704663 C2 RU 2704663C2
Authority
RU
Russia
Prior art keywords
vehicle
driver
user profile
reporting system
audio data
Prior art date
Application number
RU2018111203A
Other languages
English (en)
Other versions
RU2018111203A3 (ru
RU2018111203A (ru
Inventor
Кваку О. ПРАКАХ-АСАНТЕ
Original Assignee
ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи filed Critical ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи
Publication of RU2018111203A3 publication Critical patent/RU2018111203A3/ru
Publication of RU2018111203A publication Critical patent/RU2018111203A/ru
Application granted granted Critical
Publication of RU2704663C2 publication Critical patent/RU2704663C2/ru

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095—Predicting travel path or likelihood of collision
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10—Path keeping
    • B60W30/12—Lane keeping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096725—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information generates an automatic action on the vehicle control
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54—Audio sensitive means, e.g. ultrasound
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/22—Psychological state; Stress level or workload
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2710/00—Output or target parameters relating to a particular sub-units
    • B60W2710/30—Auxiliary equipments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00—Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12—Classification; Matching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Traffic Control Systems (AREA)
  • Emergency Alarm Devices (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Группа изобретений относится к вариантам динамической системы информирования о разговорах. Система содержит: минимум один микрофон, пороговый анализатор разговоров в салоне (ICTA), систему принятия решения о чувствительности (SDT). Микрофон фиксирует звуковые данные в салоне транспортного средства. Пороговый анализатор разговоров в салоне (ICTA) анализирует звуковые данные в заданном частотном диапазоне и определяет, превышают ли звуковые данные пороговое значение в заданном частотном диапазоне. Система принятия решения о чувствительности (SDT) изменяет настройки транспортного средства, связанные с пользовательским профилем, когда звуковые данные превышают пороговое значение. Причем соответствующая измененная настройка транспортного средства используется для обеспечения управления бдительностью водителя системы транспортного средства в ответ на активацию системы транспортного средства. Достигается предоставление системы для помощи водителю в удержании внимания на дороге. 2 н. и 18 з.п. ф-лы, 4 ил.

Description

ПЕРЕКРЕСТНАЯ ССЫЛКА НА РОДСТВЕННЫЕ ЗАЯВКИ
[0001] Не применимо.
ЗАЯВЛЕНИЕ ОТНОСИТЕЛЬНО ФЕДЕРАЛЬНО СПОНСИРУЕМОГО ИССЛЕДОВАНИЯ
[0002] Не применимо.
ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
[0003] Настоящее изобретение в общем относится к динамическим системам информирования водителя.
УРОВЕНЬ ТЕХНИКИ, К КОТОРОМУ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
[0004] Когда молодой водитель, пожилой водитель или начинающий водитель управляет транспортным средством, водитель должен уделять особое внимание и не отвлекаться от задачи вождения и не должен отвлекаться на другие внешние условия при вождении транспортного средства. Различные события, такие как громкая музыка, а также находящиеся в транспортном средстве люди, могут способствовать отвлечению внимания водителя. Например, громкие или оживленные разговоры могут приводить к потере концентрации не только на задаче вождения, но могут препятствовать тому, чтобы водитель быстро реагировал на оповещения транспортного средства, выводимые транспортным средством, и тем более при выполнении маневров, которые могут потребовать повышенного внимания и быстрой реакции со стороны водителя. Главным образом, хорошо известно, что присутствие других находящихся в транспортном средстве людей, таких как подростки, которые вероятно могут вести оживленные разговоры, может быть вредным для внимания и информированности водителей, для которых внимание может быть проблемой, или внимание которых может быть легко отвлечено. Когда оживленные разговоры продолжаются, важно, чтобы водитель не отвлекался на эти разговоры и вновь фокусировался на событии вождения. Существуют известные методы, помогающие водителю восстанавливать фокус и внимание на дороге, по которой осуществляется движение, но такие системы часто относятся ко всем водителям одинаково и могут применять одни и те же методы.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
[0005] Преимуществом вариантов выполнения, описанных в данном документе, является система порогового анализатора разговоров в салоне (ICTA) для анализа определенного частотного диапазона, относящегося к звукам разговоров в транспортном средстве. ICTA анализирует соответствующие звуковые данные звуков разговоров, которые находятся в пределах заданной полосы частот, для определения того, превышают ли анализируемые звуковые данные заданное пороговое значение, для определения того, что водитель может участвовать в разговорах, которые могут отвлечь внимание водителя от задачи вождения. Система и методы, описанные в данном документе, позволяют ответственному лицу, предпочтительно не водителю, устанавливать пользовательский профиль для водителя в системе ICTA так, что типичные настройки подсистемы транспортного средства могут быть установлены для этого водителя, чтобы помогать удерживать внимание водителя на задаче вождения. В дополнение к анализу звуковых данных из соответствующего частотного диапазона также из зафиксированных звуковых данных удаляется фоновый шум. Если анализируемые звуковые данные превышают заданное пороговое значение, то устанавливается флаг, и блок принятия решения о чувствительности использует пользовательский профиль для персонализации настроек чувствительности транспортного средства для водителя. В результате время обеспечения предупреждающего сообщения для водителя может быть изменено, а также может быть задержано подключение определенных устройств, таких как телефоны и другие устройства обмена сообщениями. Различные устройства, такие как HMI, устройство распознавания лиц или устройство брелока, передающие сигнал транспортному средству, могут использоваться для идентификации водителя транспортного средства, чтобы пользовательский профиль, связанный с водителем, был включен для события вождения.
[0006] Вариант выполнения предусматривает динамическую систему информирования о разговорах, которая включает в себя по меньшей мере один микрофон, фиксирующий звуковые данные в салоне транспортного средства. Пороговый анализатор разговоров в салоне (ICTA) анализирует звуковые данные в заданном частотном диапазоне. ICTA определяет, превышают ли звуковые данные в заданном частотном диапазоне пороговое значение. Блок принятия решения о чувствительности (SDT) изменяет настройки транспортного средства, связанные с пользовательским профилем, когда звуковые данные превышают пороговое значение. Соответствующая измененная настройка транспортного средства используется для обеспечения управления бдительностью водителя системы транспортного средства в ответ на активацию системы транспортного средства.
В дополнительном варианте выполнения заданный частотный диапазон, анализируемый ICTA, относится к звукам разговоров, произносимым находящимися в транспортном средстве людьми в салоне транспортного средства.
В другом дополнительном варианте выполнения ICTA включает в себя широкополосный фильтр для фильтрации фоновых шумов из звуковых данных.
В еще одном дополнительном варианте выполнения фоновые шумы включают в себя звуковые данные мультимедийной системы.
В еще одном дополнительном варианте выполнения фоновые шумы включают в себя звуковые данные окружающей среды.
В еще одном дополнительном варианте выполнения пользовательский профиль хранится в памяти ICTA.
В еще одном дополнительном варианте выполнения пользовательский профиль хранится в облаке.
В еще одном дополнительном варианте выполнения пользовательский профиль включает в себя настраиваемые правила принятия решений для изменения настроек транспортного средства.
В еще одном дополнительном варианте выполнения каждый пользовательский профиль связан с соответствующим пользователем, причем каждый пользовательский профиль включает в себя набор настраиваемых правил принятия решений, персонализированных для соответствующего пользователя.
В еще одном дополнительном варианте выполнения блок SDT получает доступ к пользовательскому профилю идентифицированного водителя и применяет правила принятия решений в пользовательском профиле для адаптивного изменения настроек транспортного средства.
В еще одном дополнительном варианте выполнения система транспортного средства включает в себя систему предупреждения о столкновении, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки транспортного средства включают в себя активацию более раннего предупреждения о столкновении по сравнению с выполненной на заводе настройкой.
В еще одном дополнительном варианте выполнения система транспортного средства включает в себя систему предупреждения о сходе с полосы движения, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки транспортного средства включают в себя активацию более раннего предупреждения о сходе с полосы движения по сравнению с выполненной на заводе настройкой.
В еще одном дополнительном варианте выполнения система транспортного средства включает в себя настройку подключения, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки подключения включают в себя задержку подключения входящих телефонных звонков.
В еще одном дополнительном варианте выполнения система транспортного средства включает в себя настройку подключения, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки подключения включают в себя задержку подключения входящих сообщений.
В еще одном дополнительном варианте выполнения система транспортного средства включает в себя настройку подключения, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки включают в себя снижение настройки громкости мультимедийного устройства транспортного средства.
В еще одном дополнительном варианте выполнения динамическая система информирования о разговорах дополнительно включает в себя устройство идентификации водителя для идентификации водителя транспортного средства.
В еще одном дополнительном варианте выполнения устройство идентификации водителя включает в себя устройство человеко-машинного интерфейса, в котором пользователь вручную выбирает идентификатор водителя.
В еще одном дополнительном варианте выполнения устройство идентификации водителя включает в себя устройство брелока, причем устройство брелока передает сигнал транспортному средству, идентифицирующий пользователя.
В еще одном дополнительном варианте выполнения устройство идентификации водителя включает в себя устройство распознавания лиц для идентификации водителя.
[0007] Вариант выполнения предусматривает систему, которая включает в себя микрофон, фиксирующий звуковые данные в салоне транспортного средства. Пороговый анализатор анализирует звуковые данные в заданном частотном диапазоне для определения, превышают ли звуковые данные пороговое значение. Блок принятия решения о чувствительности изменяет настройки транспортного средства, связанные с пользовательским профилем, когда звуковые данные превышают пороговое значение. Измененная настройка транспортного средства обеспечивает управление бдительностью водителя системы транспортного средства в ответ на активацию системы транспортного средства.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
[0008] Фиг. 1 представляет собой структурную схему адаптивной системы информирования о разговорах находящихся в транспортном средстве людей.
[0009] Фиг. 2 иллюстрирует примерный график выходного напряжения микрофона в дискретные моменты времени.
[0010] Фиг. 3 иллюстрирует примерный график распределения звуковой энергии.
[0011] Фиг. 4 иллюстрирует блок-схему способа работы системы информирования о разговорах.
ПОДРОБНОЕ ОПИСАНИЕ
[0012] На Фиг. 1 показана структурная схема адаптивной системы 10 информирования о разговорах находящихся в транспортном средстве людей. Адаптивная система 10 информирования о разговорах находящихся в транспортном средстве людей включает в себя по меньшей мере один салонный микрофон 12, систему 14 порогового анализатора разговоров в салоне (ICTA), систему 16 принятия решения о чувствительности (SDT), систему 18 хранения данных, которые адаптивно используются для изменения систем 20 помощи водителю транспортного средства для помощи водителю в удержании внимания на дороге, по которой осуществляется движение.
[0013] Салонный микрофон 12 расположен в салоне транспортного средства для фиксации звуков разговоров в нем. Салонный микрофон 12 фиксирует звуковые данные в салоне транспортного средства, и звуковые данные передаются к ICTA 14. Альтернативно, система 18 хранения данных может включать в себя бортовое запоминающее устройство или удаленную облачную систему, соединенную по беспроводной связи с транспортным средством.
[0014] ICTA 14 включает в себя процессор, который определяет, участвуют ли водитель и другие находящиеся в транспортном средстве люди в громких оживленных разговорах. ICTA 14 вычисляет уровни звуковой энергии разговоров, которые представляют собой конкретные характерные уровни шума в салоне транспортного средства, на основе зафиксированных звуковых данных и определяет, когда уровни звука превышают соответствующее пороговое значение, чтобы были отмечены условия для адаптивного изменения систем 20 помощи водителю транспортного средства для помощи водителю в удержании внимания на дороге, по которой осуществляется движение. ICTA 14 получает зафиксированный звук от салонного микрофона 12 и концентрирует свой анализ на соответствующей полосе частот, которая включает в себя характеристики звука в пределах соответствующего частотного диапазона, который связан с ожидаемым общением водителей и других находящихся в транспортном средстве людей. ICTA 14 дополнительно включает в себя широкополосный фильтр для фильтрации фоновых шумов для изоляции фонового звука от звука разговоров находящихся в транспортном средстве людей. Фоновые шумы, которые отфильтровываются, могут включать в себя, но не ограничиваясь, окружающие шумы в салоне, кроме голосов находящихся в транспортном средстве людей, такие как производимые транспортным средством звуки, внешние звуки окружающей среды и звук мультимедийной системы.
[0015] Адаптивная система 10 информирования о разговорах находящихся в транспортном средстве людей может дополнительно включать в себя устройство 22 идентификации водителя для идентификации водителя, чтобы к соответствующему пользовательскому профилю, хранящемуся в памяти, мог быть получен доступ для использования ICTA 14 и SDT 16. Устройство 22 идентификации пользователя может включать в себя, но не ограничиваясь, человеко-машинный интерфейс (HMI), брелок, устройство распознавания находящихся в транспортном средстве людей или лиц или биометрическое сенсорное устройство. Более того, одно или более из устройств идентификации водителя, как описано, могут использоваться совместно для идентификации водителя.
[0016] Фиг. 2 иллюстрирует примерный график выходного напряжения салонного микрофона 12 в дискретные моменты времени. Ось y представляет собой напряжение, а ось х представляет собой количество выборок в течение определенного периода времени. ICTA 14 определяет распределение энергии, как показано на Фиг. 3, на основе графика зависимости напряжения от времени на Фиг. 2. Ось y представляет собой спектральную плотность энергии (PSD), а ось х представляет собой частоту. ICTA 14, основываясь на графике PSD, выполняет агрегацию выходных данных на соответствующих частотах в течение определенного периода времени для определения того, участвуют ли водитель и находящиеся в транспортном средстве люди в громких оживленных разговорах, что может приводить к потере концентрации водителя на задаче вождения.
[0017] ICTA 14 устанавливает ICTA_flag, который представлен следующим выражением:
Figure 00000001
где
Figure 00000002
- накопленная энергия в одно мгновение,
Figure 00000003
представляет собой пороговое значение ICTA.
[0018] Флаг сообщается системе 16 SDT, если энергия превышает заданное пороговое значение. SDT 16 представляет собой подсистему, которая обеспечивает индивидуальные настройки системы транспортного средства для водителя и, конкретнее, для начинающих водителей или пожилых водителей. SDT 16 применяет правила принятия решений для определения активации соответствующего средства оповещения и/или модификации подсистемы. Средства оповещения могут включать в себя визуальные оповещения, звуковые оповещения или тактильные оповещения. Модификации подсистемы могут включать в себя, но не ограничиваясь, задержку осуществления связи с водителем, обеспечение более раннего предупреждения о столкновении (например, с помощью системы предупреждения о столкновении) и предупреждения о сходе с полосы движения (например, с помощью системы предупреждения о сходе с полосы движения). SDT 16 персонализирует настройки чувствительности транспортного средства для водителя на основе заданного профиля. То есть каждый выбранный водитель, в частности, начинающие водители с минимальным опытом вождения, может иметь пользовательский профиль, установленный в SDT 16. Пользовательский профиль может быть установлен ответственным лицом (например, родителем), который настраивает индивидуальные настройки для изменения предупреждения, относящегося к управлению бдительностью водителя, и другие настройки чувствительности подсистемы транспортного средства, когда система обнаруживает, что шумы разговоров в салоне транспортного средства превышают соответствующее пороговое значение, что является признаком того, что водитель не уделяет полного внимания задаче вождения. Когда ICTA 14 ставит отметку о превышении порогового значения шума связи, SDT 16 просматривает профиль водителя и определяет, какие настройки подсистемы транспортного средства требуют изменения, чтобы либо вызвать предупреждение раньше, либо задержать активацию подсистемы по сравнению с заводской настройкой. Например, если предупреждение о возможном столкновении требует активации, SDT 16 может указывать соответствующей подсистеме увеличивать время предупреждения, обеспечивая более ранее уведомление водителя о столкновении и предупреждение о сходе с полосы движения, чем так, как обычно настроено. Ответственное лицо, настраивающее пользовательский профиль, может хотеть, чтобы предупреждение срабатывало ранее на основе расстояния между транспортным средством и обнаруженным объектом или на основе времени до столкновения, чтобы дать водителю больше времени для реагирования. Другие конфигурации могут включать в себя задержку входящего подключения, которая включает в себя, но не ограничиваясь, задержку подключения входящих телефонных звонков/сообщений или снижение громкости мультимедийного устройства, в настоящее время выводящего аудиосигнал.
[0019] SDT 16 применяет правила принятия решений для определения активации соответствующего средства оповещения. Пример общего правила может иметь следующий вид:
Figure 00000004
Figure 00000005
где
ICTA_flag: 1 - частые разговоры в салоне превышают настраиваемое пороговое значение; 0 - минимум разговоров
Категория водителя: 1 - новичок, пожилой; 0 - средний уровень вождения
SDT_value:
Figure 00000006
.
где
1: Задержка информации о входящем подключении;
2: Более ранние оповещения для систем помощи; и
0: Бездействие.
[0020] Фиг. 4 иллюстрирует блок-схему способа работы системы информирования о разговорах. В блоке 30 осуществляется метод контроля условий в салоне транспортного средства.
[0021] В блоке 31 водитель идентифицируется либо водителем, вводящим свою идентификационную информацию, либо системой транспортного средства, идентифицирующей водителя с помощью различных методов, включая, но не ограничиваясь, обнаружение находящихся в транспортном средстве людей, метки RFID, биометрическое определение, распознавание лиц, MyKey или брелоки.
[0022] В блоке 32 информация о звуках в салоне транспортного средства, данные подключения, информация о транспортном средстве и водителе получается либо из запоминающего устройства транспортного средства, либо из другого запоминающего устройства, такого как облако.
[0023] В блоке 33 один или более салонных микрофонов фиксируют звуковые данные в салоне транспортного средства.
[0024] В блоке 34 ICTA анализирует зафиксированные звуковые данные в соответствующем частотном диапазоне, относящемся к голосам находящихся в транспортном средстве людей в пассажирском салоне, а также отфильтровывает фоновые шумы из звуковых данных. ICTA вычисляет уровни звуковой энергии разговоров и определяет связанные флаги принятия решений (ICTA_value) для SDT.
[0025] В блоке 35 определяется, превышает ли ICTA_value пороговое значение. Если определено, что ICTA_value не превышает пороговое значение, то процедура возвращается к блоку 33 для контроля звуковых данных в салоне транспортного средства. Если определено, что ICTA_value превышает пороговое значение, то процедура переходит к блоку 36.
[0026] В блоке 36 SDT применяет правила принятия решений, которые персонализированы для идентифицированного водителя, и определяет настройки активации, связанные с водителем, на основе профиля водителя. Соответствующие настройки активации, связанные с водителем, динамически изменяются с их типичных настроек на основе профиля водителя.
[0027] В блоке 37 системы транспортного средства и настройки подключения регулируются в реальном времени и активируются соответственно в том случае, если соответствующая система транспортного средства или подключение активировано, и управление бдительностью водителя требует активации соответствующей системы транспортного средства.
[0028] Хотя определенные варианты выполнения настоящего изобретения описаны подробно, знакомым с областью техники, к которой относится это изобретение, будут очевидны различные альтернативные конструкции и варианты выполнения для осуществления изобретения, как определено следующей далее формулой изобретения.

Claims (27)

1. Динамическая система информирования о разговорах, содержащая:
по меньшей мере один микрофон, фиксирующий звуковые данные в салоне транспортного средства;
пороговый анализатор разговоров в салоне (ICTA), анализирующий звуковые данные в заданном частотном диапазоне, причем ICTA определяет, превышают ли звуковые данные в заданном частотном диапазоне пороговое значение;
систему принятия решения о чувствительности (SDT), изменяющую настройки транспортного средства, связанные с пользовательским профилем, когда звуковые данные превышают пороговое значение;
причем соответствующая измененная настройка транспортного средства используется для обеспечения управления бдительностью водителя системы транспортного средства в ответ на активацию системы транспортного средства.
2. Динамическая система информирования о разговорах по п. 1, в которой заданный частотный диапазон, анализируемый ICTA, относится к звукам разговоров, произносимым находящимися в транспортном средстве людьми в салоне транспортного средства.
3. Динамическая система информирования о разговорах по п. 2, в которой ICTA включает в себя широкополосный фильтр для фильтрации фоновых шумов из звуковых данных.
4. Динамическая система информирования о разговорах по п. 3, в которой фоновые шумы включают в себя звуковые данные мультимедийной системы.
5. Динамическая система информирования о разговорах по п. 3, в которой фоновые шумы включают в себя звуковые данные окружающей среды.
6. Динамическая система информирования о разговорах по п. 1, в которой пользовательский профиль хранится в памяти ICTA.
7. Динамическая система информирования о разговорах по п. 1, дополнительно содержащая удаленную систему хранения данных, при этом пользовательский профиль хранится в удаленной системе хранения данных.
8. Динамическая система информирования о разговорах по п. 1, в которой пользовательский профиль включает в себя настраиваемые правила принятия решений для изменения настроек транспортного средства.
9. Динамическая система информирования о разговорах по п. 8, в которой каждый пользовательский профиль связан с соответствующим пользователем, причем каждый пользовательский профиль включает в себя набор настраиваемых правил принятия решений, персонализированных для соответствующего пользователя.
10. Динамическая система информирования о разговорах по п. 8, в которой блок SDT получает доступ к пользовательскому профилю идентифицированного водителя и применяет правила принятия решений в пользовательском профиле для адаптивного изменения настроек транспортного средства.
11. Динамическая система информирования о разговорах по п. 8, в которой система транспортного средства включает в себя систему предупреждения о столкновении и в которой правила принятия решений в пользовательском профиле для адаптивного изменения настройки транспортного средства включают в себя активацию более раннего предупреждения о столкновении по сравнению с выполненной на заводе настройкой.
12. Динамическая система информирования о разговорах по п. 8, в которой система транспортного средства включает в себя систему предупреждения о сходе с полосы движения и в которой правила принятия решений в пользовательском профиле для адаптивного изменения настройки транспортного средства включают в себя активацию более раннего предупреждения о сходе с полосы движения по сравнению с выполненной на заводе настройкой.
13. Динамическая система информирования о разговорах по п. 8, в которой система транспортного средства включает в себя настройку подключения и в которой правила принятия решений в пользовательском профиле для адаптивного изменения настройки подключения включают в себя задержку подключения входящих телефонных звонков.
14. Динамическая система информирования о разговорах по п. 8, в которой система транспортного средства включает в себя настройку подключения и в которой правила принятия решений в пользовательском профиле для адаптивного изменения настройки подключения включают в себя задержку подключения входящих сообщений.
15. Динамическая система информирования о разговорах по п. 8, в которой система транспортного средства включает в себя настройку подключения и в которой правила принятия решений в пользовательском профиле для адаптивного изменения настройки включают в себя снижение настройки громкости мультимедийного устройства транспортного средства.
16. Динамическая система информирования о разговорах по п. 1, дополнительно включающая в себя устройство идентификации водителя для идентификации водителя транспортного средства.
17. Динамическая система информирования о разговорах по п. 16, в которой устройство идентификации водителя включает в себя устройство человеко-машинного интерфейса, в котором пользователь вручную выбирает идентификатор водителя.
18. Динамическая система информирования о разговорах по п. 16, в которой устройство идентификации водителя включает в себя устройство брелока, причем устройство брелока передает сигнал транспортному средству, идентифицирующий пользователя.
19. Динамическая система информирования о разговорах по п. 16, в которой устройство идентификации водителя включает в себя устройство распознавания лиц для идентификации водителя.
20. Динамическая система информирования о разговорах, содержащая:
микрофон, фиксирующий звуковые данные в салоне транспортного средства;
пороговый анализатор, анализирующий звуковые данные в заданном частотном диапазоне для определения, превышают ли звуковые данные пороговое значение;
блок принятия решения о чувствительности, изменяющий настройки транспортного средства, связанные с пользовательским профилем, когда звуковые данные превышают пороговое значение, причем измененная настройка транспортного средства обеспечивает управление бдительностью водителя системы транспортного средства в ответ на активацию системы транспортного средства.
RU2018111203A 2017-03-30 2018-03-29 Динамическая система информирования о разговорах (варианты) RU2704663C2 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/473,976 US10155523B2 (en) 2017-03-30 2017-03-30 Adaptive occupancy conversational awareness system
US15/473,976 2017-03-30

Publications (3)

Publication Number Publication Date
RU2018111203A3 RU2018111203A3 (ru) 2019-10-01
RU2018111203A RU2018111203A (ru) 2019-10-01
RU2704663C2 true RU2704663C2 (ru) 2019-10-30

Family

ID=62068045

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2018111203A RU2704663C2 (ru) 2017-03-30 2018-03-29 Динамическая система информирования о разговорах (варианты)

Country Status (5)

Country Link
US (1) US10155523B2 (ru)
CN (1) CN108696794B (ru)
DE (1) DE102018107326A1 (ru)
GB (1) GB2563123B (ru)
RU (1) RU2704663C2 (ru)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111791893B (zh) * 2019-04-03 2021-11-16 北京车和家信息技术有限公司 疲劳处理方法、装置、车辆及计算机可读存储介质
US11562762B2 (en) * 2019-11-12 2023-01-24 BlueOwl, LLC Systems and methods of assessing driver safety based on vehicle noise levels
CN111002904B (zh) * 2019-12-20 2022-04-22 铁将军汽车电子股份有限公司 前方碰撞预警系统及其配置方法和装置
IT202000004570A1 (it) * 2020-03-04 2021-09-04 Federica Cena Sistema elettronico autoveicolistico progettato per far si' che le emissioni sonore all'interno degli abitacoli degli autoveicoli non superino limiti sonori massimi di accettabilita'
CN112339684B (zh) * 2020-10-27 2021-12-24 广州汽车集团股份有限公司 一种基于概率分布的汽车安全机制触发方法及装置
GB2601343B (en) * 2020-11-27 2024-04-10 Continental Automotive Tech Gmbh An adaptive warning system and method thereof

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09132052A (ja) * 1995-11-06 1997-05-20 Honda Motor Co Ltd 車両用運転状況監視装置
JP2008204056A (ja) * 2007-02-19 2008-09-04 Tokai Rika Co Ltd 運転支援装置
US20130038437A1 (en) * 2011-08-08 2013-02-14 Panasonic Corporation System for task and notification handling in a connected car
DE102013222645A1 (de) * 2013-11-07 2015-05-07 Robert Bosch Gmbh Erkennungssystem in einem Fahrzeug zur Erfassung der Sprachaktivität eines Fahrzeuginsassen
US20160001781A1 (en) * 2013-03-15 2016-01-07 Honda Motor Co., Ltd. System and method for responding to driver state
JP2016207001A (ja) * 2015-04-24 2016-12-08 マツダ株式会社 運転支援装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8280580B2 (en) 2008-02-06 2012-10-02 Ford Global Technologies, Llc System and method for controlling electronic stability control based on driver status
US8706349B2 (en) * 2009-12-07 2014-04-22 At&T Mobility Ii Llc Devices, systems and methods for controlling permitted settings on a vehicle
GB2504585B (en) 2010-07-29 2015-01-07 Ford Global Tech Llc Systems and methods for scheduling driver interface tasks based on driver workload
US9493130B2 (en) * 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
US9229905B1 (en) * 2011-04-22 2016-01-05 Angel A. Penilla Methods and systems for defining vehicle user profiles and managing user profiles via cloud systems and applying learned settings to user profiles
US9135420B2 (en) * 2013-02-06 2015-09-15 GM Global Technology Operations LLC Biometric data-driven application of vehicle operation settings
US9275208B2 (en) * 2013-03-18 2016-03-01 Ford Global Technologies, Llc System for vehicular biometric access and personalization
DE102016107321A1 (de) * 2015-04-22 2016-10-27 Ford Global Technologies, Llc Systeme und Verfahren zum Einteilen von Fahrerschnittstellentasks auf der Basis der Fahrerarbeitslast
US9758095B2 (en) * 2016-01-25 2017-09-12 International Business Machines Corporation Smartwatch blackbox
CN105667475A (zh) * 2016-03-18 2016-06-15 戴姆勒股份公司 车辆自动制动系统
CN105933819A (zh) * 2016-04-25 2016-09-07 乐视控股（北京）有限公司 调节汽车音响音量的方法及装置
US9956963B2 (en) * 2016-06-08 2018-05-01 GM Global Technology Operations LLC Apparatus for assessing, predicting, and responding to driver fatigue and drowsiness levels

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09132052A (ja) * 1995-11-06 1997-05-20 Honda Motor Co Ltd 車両用運転状況監視装置
JP2008204056A (ja) * 2007-02-19 2008-09-04 Tokai Rika Co Ltd 運転支援装置
US20130038437A1 (en) * 2011-08-08 2013-02-14 Panasonic Corporation System for task and notification handling in a connected car
US20160001781A1 (en) * 2013-03-15 2016-01-07 Honda Motor Co., Ltd. System and method for responding to driver state
DE102013222645A1 (de) * 2013-11-07 2015-05-07 Robert Bosch Gmbh Erkennungssystem in einem Fahrzeug zur Erfassung der Sprachaktivität eines Fahrzeuginsassen
JP2016207001A (ja) * 2015-04-24 2016-12-08 マツダ株式会社 運転支援装置

Also Published As

Publication number Publication date
RU2018111203A3 (ru) 2019-10-01
US10155523B2 (en) 2018-12-18
GB2563123A (en) 2018-12-05
GB201805018D0 (en) 2018-05-09
US20180281806A1 (en) 2018-10-04
CN108696794B (zh) 2022-03-15
CN108696794A (zh) 2018-10-23
GB2563123B (en) 2022-02-16
RU2018111203A (ru) 2019-10-01
DE102018107326A1 (de) 2018-10-04

Similar Documents

Publication Publication Date Title
RU2704663C2 (ru) Динамическая система информирования о разговорах (варианты)
EP3520102B1 (en) Context aware hearing optimization engine
US8150044B2 (en) Method and device configured for sound signature detection
CN104658548B (zh) 用外部声音向车辆驾乘人员警告外部事件并掩蔽车内谈话
US7880621B2 (en) Distraction estimator
EP3675121B1 (en) Computer-implemented interaction with a user
WO2012097150A1 (en) Automotive sound recognition system for enhanced situation awareness
US8050926B2 (en) Apparatus and method for adjusting prompt voice depending on environment
US10235128B2 (en) Contextual sound filter
US9763003B2 (en) Automotive constant signal-to-noise ratio system for enhanced situation awareness
CN110310618B (zh) 车辆行驶环境声音的处理方法、处理装置和车辆
US20180290590A1 (en) Systems for outputting an alert from a vehicle to warn nearby entities
US20150029031A1 (en) Driver alertness detection and alarm system
US10276180B2 (en) Audio command adaptive processing system and method
DE102017213249A1 (de) Verfahren und System zum Erzeugen einer auditiven Meldung in einem Innenraum eines Fahrzeugs
CN112046497B (zh) 驾驶辅助设备、驾驶辅助方法和驾驶辅助程序
CN109582271B (zh) 一种动态设置tts播放参数的方法、装置及设备
US12005921B2 (en) Assistance system with relevance-dependent stimulus modulation
US20220210584A1 (en) Vehicle assistive hearing
CN110838210A (zh) 报警方法、装置和存储介质
KR20220054504A (ko) 차량 및 그 제어방법
Dabran et al. An intelligent sound alam recognition system for smart cars and smart homes
JP2015005935A (ja) 警報音認知機能を備えた音響機器
KR101329175B1 (ko) 청각 장애인용 음향 분석 인식 방법 및 장치
KR100341915B1 (ko) 긴급차량 인식용 오디오장치

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20210330