RU108172U8 - MULTI-MODAL MOBILE INFORMATION SERVICE AUTOMATIC - Google Patents

MULTI-MODAL MOBILE INFORMATION SERVICE AUTOMATIC

Info

Publication number
RU108172U8
RU108172U8 RU2011112161/08U RU2011112161U RU108172U8 RU 108172 U8 RU108172 U8 RU 108172U8 RU 2011112161/08 U RU2011112161/08 U RU 2011112161/08U RU 2011112161 U RU2011112161 U RU 2011112161U RU 108172 U8 RU108172 U8 RU 108172U8
Authority
RU
Russia
Prior art keywords
information
microphones
touch monitors
speech
program block
Prior art date
Application number
RU2011112161/08U
Other languages
Russian (ru)
Other versions
RU108172U1 (en
Inventor
Андрей Леонидович Ронжин
Мария Викторовна Прищепа
Виктор Юрьевич Будков
Алексей Анатольевич Карпов
Original Assignee
Учреждение Российской академии наук Санкт-Петербургский институт информатики и автоматизации РАН
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Учреждение Российской академии наук Санкт-Петербургский институт информатики и автоматизации РАН filed Critical Учреждение Российской академии наук Санкт-Петербургский институт информатики и автоматизации РАН
Priority to RU2011112161/08U priority Critical patent/RU108172U8/en
Publication of RU108172U1 publication Critical patent/RU108172U1/en
Application granted granted Critical
Publication of RU108172U8 publication Critical patent/RU108172U8/en

Links

Landscapes

  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Устройство для автоматического предоставления пользователям информационно-справочных услуг в ходе многомодального диалога и самостоятельного передвижения по заданной территории обслуживания, содержащее информационную стойку, которая имеет две рабочих стороны с одинаковым функционалом и расположением средств захвата и отображения аудиовизуальной информации, оснащена двумя сенсорными мониторами, четырьмя видеокамерами, встроенными слева и справа от каждого монитора; двумя массивами микрофонов, бортовым компьютером, обрабатывающим данные, поступающие с камер, микрофонов, сенсорных мониторов, датчиков препятствий, и установлена на подвижной платформе, компоновочная схема шасси которой состоит из двух ведущих и двух флюгерных колес, а для обнаружения препятствий по внешней окружности платформы расположены четыре ультразвуковых и восемь инфракрасных датчиков; встроенные аккумуляторы обеспечивают автономную работу всех бортовых устройств и электроприводов шасси, отличающееся тем, что массивы микрофонов имеют Т-образную конфигурацию и выполняют многоканальную запись аудиоданных, которые далее обрабатываются в программном блоке пространственно-спектральной фильтрации полезного речевого сигнала и в программном блоке распознавания речи, реализованных в бортовом компьютере устройства; сенсорные мониторы, обеспечивающие ввод/вывод графической информации, в комплексе с динамиками служат для аудиовизуального вывода речевой информации посредством виртуальной трехмерной модели головы человека с выраженной артикуляцией губ и синхронного синтеза аудиосигнала речевого сообщения, генерируемых в п A device for automatically providing users with information and reference services during a multimodal dialogue and independent movement over a given service area, containing an information desk that has two working sides with the same functionality and location of means for capturing and displaying audiovisual information, is equipped with two touch monitors, four video cameras, embedded to the left and right of each monitor; two arrays of microphones, an on-board computer that processes data coming from cameras, microphones, touch monitors, obstacle sensors, and is installed on a mobile platform, the layout of the chassis of which consists of two driving and two vane wheels, and for detecting obstacles along the outer circumference of the platform four ultrasound and eight infrared sensors; built-in batteries provide autonomous operation of all on-board devices and chassis electric drives, characterized in that the microphone arrays are T-shaped and perform multichannel recording of audio data, which are further processed in the spatial spectral filtering program block of the useful speech signal and in the speech recognition program block implemented in the on-board computer of the device; touch monitors providing input / output of graphic information, in combination with speakers, are used for audiovisual output of speech information through a virtual three-dimensional model of the human head with pronounced lip articulation and synchronous synthesis of the audio signal of the voice message generated in

RU2011112161/08U 2011-03-30 2011-03-30 MULTI-MODAL MOBILE INFORMATION SERVICE AUTOMATIC RU108172U8 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2011112161/08U RU108172U8 (en) 2011-03-30 2011-03-30 MULTI-MODAL MOBILE INFORMATION SERVICE AUTOMATIC

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2011112161/08U RU108172U8 (en) 2011-03-30 2011-03-30 MULTI-MODAL MOBILE INFORMATION SERVICE AUTOMATIC

Publications (2)

Publication Number Publication Date
RU108172U1 RU108172U1 (en) 2011-09-10
RU108172U8 true RU108172U8 (en) 2011-12-10

Family

ID=44758085

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2011112161/08U RU108172U8 (en) 2011-03-30 2011-03-30 MULTI-MODAL MOBILE INFORMATION SERVICE AUTOMATIC

Country Status (1)

Country Link
RU (1) RU108172U8 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2597498C1 (en) * 2015-03-31 2016-09-10 Федеральное государственное бюджетное учреждение науки Санкт-Петербургский институт информатики и автоматизации Российской академии наук Speech recognition method based on two-level morphophonemic prefix graph
RU2627555C2 (en) * 2015-12-30 2017-08-08 Андрей Валерьевич Жаденов Device for horizontal surface controlled movement of smartphone

Also Published As

Publication number Publication date
RU108172U1 (en) 2011-09-10

Similar Documents

Publication Publication Date Title
US20230071638A1 (en) System and method for differentially locating and modifying audio sources
KR102546006B1 (en) Adaptive AC based on environmental triggers
US10284939B2 (en) Headphones system
US20190289421A1 (en) Information processing apparatus, information processing method, and program
EP3081011B1 (en) Name-sensitive listening device
US9622013B2 (en) Directional sound modification
US20150222977A1 (en) Awareness intelligence headphone
US20130216074A1 (en) Headphone device
JP2017509181A (en) Gesture-interactive wearable spatial audio system
WO2012018641A3 (en) Systems, methods, apparatus, and computer-readable media for multi-microphone location-selective processing
JP2015507572A (en) System, method and apparatus for directing sound in vehicle
WO2012138450A1 (en) Tongue tracking interface apparatus and method for controlling a computer program
TWI222622B (en) Robotic vision-audition system
RU108172U8 (en) MULTI-MODAL MOBILE INFORMATION SERVICE AUTOMATIC
JP5206151B2 (en) Voice input robot, remote conference support system, and remote conference support method
Maheux et al. T-Top, a SAR experimental platform
US20240179448A1 (en) System and method for interactive headphones
Laniel et al. Enhancing a beam+ telepresence robot for remote home care applications
JP4655572B2 (en) Signal processing method, signal processing apparatus, and robot
CN115334445A (en) Sound reproduction system and method for enhancing spatial auditory perception
JP7065353B2 (en) Head-mounted display and its control method
CN113039815B (en) Sound generating method and device for executing the same
CN106024048A (en) Voice fast recording device able to realize pause at any time and unintermittent recording
Otsuka et al. Realtime meeting analysis and 3D meeting viewer based on omnidirectional multimodal sensors
WO2012105844A1 (en) Method for enhancing audio performance by selective capturing and processing of audio from a set of microphones

Legal Events

Date Code Title Description
TH1K Reissue of utility model (1st page)
TK1K Correction to the publication in the bulletin (utility model)

Free format text: AMENDMENT TO CHAPTER -FG1K- IN JOURNAL: 25-2011 FOR TAG: (72)

MM1K Utility model has become invalid (non-payment of fees)

Effective date: 20120331

NF1K Reinstatement of utility model

Effective date: 20130327

MM9K Utility model has become invalid (non-payment of fees)

Effective date: 20200331