RU2020100190A - SOFTWARE AND HARDWARE OF THE TRAINING SYSTEM WITH AUTOMATIC EVALUATION OF THE STUDENT'S EMOTIONS - Google Patents

SOFTWARE AND HARDWARE OF THE TRAINING SYSTEM WITH AUTOMATIC EVALUATION OF THE STUDENT'S EMOTIONS Download PDF

Info

Publication number
RU2020100190A
RU2020100190A RU2020100190A RU2020100190A RU2020100190A RU 2020100190 A RU2020100190 A RU 2020100190A RU 2020100190 A RU2020100190 A RU 2020100190A RU 2020100190 A RU2020100190 A RU 2020100190A RU 2020100190 A RU2020100190 A RU 2020100190A
Authority
RU
Russia
Prior art keywords
student
actions
computer
server
router
Prior art date
Application number
RU2020100190A
Other languages
Russian (ru)
Other versions
RU2751759C2 (en
RU2020100190A3 (en
Inventor
Михаил Федорович Степанов
Андрей Михайлович Степанов
Original Assignee
Федеральное государственное бюджетное образовательное учреждение высшего образования "Саратовский государственный технический университет имени Гагарина Ю.А."
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Федеральное государственное бюджетное образовательное учреждение высшего образования "Саратовский государственный технический университет имени Гагарина Ю.А." filed Critical Федеральное государственное бюджетное образовательное учреждение высшего образования "Саратовский государственный технический университет имени Гагарина Ю.А."
Priority to RU2020100190A priority Critical patent/RU2751759C2/en
Publication of RU2020100190A publication Critical patent/RU2020100190A/en
Publication of RU2020100190A3 publication Critical patent/RU2020100190A3/ru
Application granted granted Critical
Publication of RU2751759C2 publication Critical patent/RU2751759C2/en

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Electrically Operated Instructional Devices (AREA)

Claims (1)

Предлагаемый программно-аппаратный комплекс, содержащий компьютер обучаемого, соединенный с сервером через маршрутизатор посредством вычислительной сети и включающий средство получения учебного материала от сервера через маршрутизатор посредством вычислительной сети, средство демонстрации полученного от сервера учебного материала на дисплее с возможным звуковым сопровождением с помощью громкоговорителя компьютера обучаемого, средство распознавания действий обучаемого в течение учебного занятия на основе анализа ответов (реакции) обучаемого, вводимых в виде символьной (текстовой) информации через клавиатуру, задаваемых обучаемым в виде указательной информации с использованием устройства типа "мышь", подаваемых обучаемым в виде звуковых сигналов (речи) с использованием микрофона, средство передачи распознанных действий обучаемого на сервер, средство распознавания изображения лица обучаемого на основе анализа видеоизображения, получаемого с видеокамеры, средство оценки психического и эмоционального состояния обучаемого по данным видеосигнала видеокамеры, средство передачи оценки психического и эмоционального состояния обучаемого на сервер; сервер, содержащий средство передачи учебного материала на дисплей компьютера обучаемого через маршрутизатор посредством вычислительной сети, средство получения данных о распознанных действиях обучаемого от компьютера обучаемого через маршрутизатор посредством вычислительной сети, средство получения и обработки данных о психоэмоциональном состоянии обучаемого, средство оценки отношения обучаемого к учебному процессу на основе анализа данных о распознанных действиях и психоэмоциональном состоянии обучаемого, полученных от компьютера обучаемого через маршрутизатор посредством вычислительной сети, средство выбора (планирования) программы действий программно-аппаратного комплекса поддержки действий педагога, средство управления исполнением программы действий программно-аппаратного комплекса поддержки действий педагога; автономный робот антропоморфного типа, соединенный через устройство беспроводной связи Wi-Fi с сервером и включающий средство ориентации с использованием стереоскопической видеокамеры и других устройств (лазерный дальномер, гироскоп, акселерометр, компас и т.д.), средство отображения текстовой и графической информации на дисплей, средство воспроизведения звуковой (голосовой) информации с использованием громкоговорителя, средство получения с использованием микрофона голосовых команд педагога и ответов обучаемого на вопросы педагога и/или робота, средство управления исполнением действий в соответствии с заданной командой/процедурой; компьютер педагога, соединенный с сервером через маршрутизатор посредством вычислительной сети, отличающийся тем, что оценка текущего состояния хода учебного процесса, формируемая с использованием оценки психоэмоционального состояния обучаемого на основе анализа в режиме реального времени видеоизображения лица обучаемого, получаемого с помощью видеокамеры, подключенной к компьютеру обучаемого, а также оценки соответствия действий (результатов выполнения учебного задания) обучаемого требованиям учебного задания используется для определения (формирования) процедуры действий программно-аппаратного комплекса поддержки действий педагога по управлению концентрацией внимания обучаемого, стимулирования и оказания помощи в правильном выполнении учебных заданий, осуществляемой автономным антропоморфным роботом.The proposed software and hardware complex containing a student's computer, connected to the server through a router through a computer network and including a means of receiving training material from the server through a router through a computer network, a means of demonstrating the training material received from the server on a display with possible sound accompaniment using the student's computer loudspeaker , a means of recognizing the student's actions during the training session based on the analysis of the student's responses (reaction), entered in the form of symbolic (text) information through the keyboard, set by the student in the form of pointing information using a device of the "mouse" type, given to the student in the form of sound signals ( speech) using a microphone, a means for transmitting the recognized actions of a student to a server, a means for recognizing an image of a student's face based on an analysis of a video image received from a video camera, a means for assessing mental and emotional the ionic state of the trainee according to the video signal of the video camera, a means of transferring the assessment of the mental and emotional state of the trainee to the server; a server containing means for transmitting educational material to the student's computer display through a router through a computer network, means for obtaining data on the student's recognized actions from the student's computer through a router through a computer network, means for receiving and processing data on the psycho-emotional state of the student, means for assessing the student's attitude to the educational process based on the analysis of data on the recognized actions and psychoemotional state of the student, received from the student's computer through a router through a computer network, a tool for selecting (planning) an action program for a software and hardware complex for supporting teacher actions, a tool for managing the execution of an action program for a software and hardware complex for supporting teacher actions; an autonomous robot of an anthropomorphic type, connected via a Wi-Fi wireless communication device to a server and including a means of orientation using a stereoscopic video camera and other devices (laser rangefinder, gyroscope, accelerometer, compass, etc.), means for displaying text and graphic information on the display , means for reproducing sound (voice) information using a loudspeaker, means for receiving, using a microphone, voice commands of the teacher and the student's answers to the questions of the teacher and / or the robot, means for controlling the execution of actions in accordance with a given command / procedure; the teacher's computer connected to the server through a router via a computer network, characterized in that the assessment of the current state of the course of the educational process, formed using the assessment of the psychoemotional state of the student based on the analysis in real time of the video image of the student's face, obtained using a video camera connected to the student's computer , as well as assessing the compliance of the student's actions (results of completing the educational task) with the requirements of the educational task is used to determine (form) the procedure for the actions of the software and hardware complex to support the teacher's actions to control the concentration of the student's attention, stimulate and assist in the correct implementation of educational tasks carried out by an autonomous anthropomorphic a robot.
RU2020100190A 2019-12-31 2019-12-31 Software and hardware complex of the training system with automatic assessment of the student's emotions RU2751759C2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2020100190A RU2751759C2 (en) 2019-12-31 2019-12-31 Software and hardware complex of the training system with automatic assessment of the student's emotions

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2020100190A RU2751759C2 (en) 2019-12-31 2019-12-31 Software and hardware complex of the training system with automatic assessment of the student's emotions

Publications (3)

Publication Number Publication Date
RU2020100190A true RU2020100190A (en) 2021-06-30
RU2020100190A3 RU2020100190A3 (en) 2021-06-30
RU2751759C2 RU2751759C2 (en) 2021-07-16

Family

ID=76742557

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2020100190A RU2751759C2 (en) 2019-12-31 2019-12-31 Software and hardware complex of the training system with automatic assessment of the student's emotions

Country Status (1)

Country Link
RU (1) RU2751759C2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115936944A (en) * 2023-01-31 2023-04-07 西昌学院 Virtual teaching management method and device based on artificial intelligence

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100580618B1 (en) * 2002-01-23 2006-05-16 삼성전자주식회사 Apparatus and method for recognizing user emotional status using short-time monitoring of physiological signals
WO2006090371A2 (en) * 2005-02-22 2006-08-31 Health-Smart Limited Methods and systems for physiological and psycho-physiological monitoring and uses thereof
US10388178B2 (en) * 2010-08-27 2019-08-20 Arthur Carl Graesser Affect-sensitive intelligent tutoring system
US20140324749A1 (en) * 2012-03-21 2014-10-30 Alexander Peters Emotional intelligence engine for systems

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115936944A (en) * 2023-01-31 2023-04-07 西昌学院 Virtual teaching management method and device based on artificial intelligence
CN115936944B (en) * 2023-01-31 2023-10-13 西昌学院 Virtual teaching management method and device based on artificial intelligence

Also Published As

Publication number Publication date
RU2751759C2 (en) 2021-07-16
RU2020100190A3 (en) 2021-06-30

Similar Documents

Publication Publication Date Title
KR102334942B1 (en) Data processing method and device for caring robot
KR102114207B1 (en) Learning Support System And Method Using Augmented Reality And Virtual reality based on Artificial Intelligence
CN111027486B (en) Auxiliary analysis and evaluation system and method for classroom teaching effect big data of middle and primary schools
CN108711320B (en) Immersive online education system and method based on network
US20200379575A1 (en) Systems and methods for facilitating accessible virtual education
CN104835362A (en) Mathematical modeling teaching learning system
CN112908355B (en) System and method for quantitatively evaluating teaching skills of teacher and teacher
KR101960815B1 (en) Learning Support System And Method Using Augmented Reality And Virtual reality
CN110544399A (en) Graphical remote teaching system and graphical remote teaching method
CN107993168A (en) Tutoring system and teaching platform
JP2020197778A (en) Information processing device, control method, and program
CN110444061A (en) Internet of Things teaching one-piece
Campbell et al. Developing INOTS to support interpersonal skills practice
Fiorini et al. Strategies of Physical Education teachers to promote the participation of students with hearing impairment in classrooms
RU2020100190A (en) SOFTWARE AND HARDWARE OF THE TRAINING SYSTEM WITH AUTOMATIC EVALUATION OF THE STUDENT'S EMOTIONS
CN111681142B (en) Education video virtual teaching-based method, system, equipment and storage medium
US20210142690A1 (en) System and method for reporting educational robot programming
CN112836945A (en) Teaching state quantitative evaluation system for teaching and teaching of professor
Thomas et al. A review of artificial intelligence for teaching assessment and research in Nigerian universities
Ahmad et al. Towards a low-cost teacher orchestration using ubiquitous computing devices for detecting student’s engagement
CN113434038A (en) Control method of visual impairment child directional walking training auxiliary system based on augmented reality
JP2021064101A (en) Information processing apparatus, control method, and program
Pérez-Colado et al. A Tool Supported Approach for Teaching Serious Game Learning Analytics
RU2020100193A (en) SOFTWARE AND HARDWARE COMPLEX WITH A TEACHER ASSISTANT IN THE FORM OF ANTHROPOMORPHOUS ROBOT
Chan et al. Integration of Virtual Reality with Intelligent Tutoring for High Fidelity Air Traffic Control Training.

Legal Events

Date Code Title Description
QB4A Licence on use of patent

Free format text: LICENCE FORMERLY AGREED ON 20211118

Effective date: 20211118