JP7266622B2 - Online class system, online class method and program - Google Patents

Online class system, online class method and program Download PDF

Info

Publication number
JP7266622B2
JP7266622B2 JP2021004330A JP2021004330A JP7266622B2 JP 7266622 B2 JP7266622 B2 JP 7266622B2 JP 2021004330 A JP2021004330 A JP 2021004330A JP 2021004330 A JP2021004330 A JP 2021004330A JP 7266622 B2 JP7266622 B2 JP 7266622B2
Authority
JP
Japan
Prior art keywords
student
teacher
video data
image data
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021004330A
Other languages
Japanese (ja)
Other versions
JP2022109025A (en
Inventor
一郎 森
麻純 戌亥
耕自 横山
高行 沼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Personal Computers Ltd
Original Assignee
NEC Personal Computers Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Personal Computers Ltd filed Critical NEC Personal Computers Ltd
Priority to JP2021004330A priority Critical patent/JP7266622B2/en
Publication of JP2022109025A publication Critical patent/JP2022109025A/en
Application granted granted Critical
Publication of JP7266622B2 publication Critical patent/JP7266622B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、オンライン授業システム及びオンライン授業方法並びにプログラムに関するものである。 The present invention relates to an online teaching system, an online teaching method, and a program.

近年、テレビ会議システムを利用したオンライン授業の機会が増加している。オンライン授業では、例えば、学校教員や塾講師等の教師と各生徒とがWEBカメラ越しに会話をしながら、授業が進められる。
例えば、特許文献1には、教師が利用する端末と生徒が利用する端末とをネットワークを介して接続し、生徒からの質問等を教師が受け付けることのできるインターラクティブな教育支援システムが開示されている。
In recent years, opportunities for online classes using video conference systems are increasing. In an online class, for example, a class proceeds while a teacher such as a school teacher or a cram school teacher and each student converse with each other through a WEB camera.
For example, Patent Document 1 discloses an interactive education support system in which a terminal used by a teacher and a terminal used by a student are connected via a network, and the teacher can accept questions from the students. .

特開2004-12813号公報Japanese Unexamined Patent Application Publication No. 2004-12813

ところで、学校の教室で行われる授業では、教師は特定の生徒と目線を合わせて会話をすることなどにより、生徒との意思疎通を図ることが可能である。これに対し、オンライン授業では、教師側の端末に設けられているWEBカメラで取得された映像が全ての生徒に対して一様に配信されるため、教師と生徒との間で意思疎通を図ることが難しく、臨場感のあるオンライン授業を行うことが難しいという問題があった。 By the way, in a class held in a school classroom, a teacher can communicate with a specific student by making eye contact with the student. On the other hand, in online classes, the video captured by the web camera installed on the teacher's terminal is distributed uniformly to all students, so communication between the teacher and the students is facilitated. There was a problem that it was difficult to conduct online classes with a sense of presence.

本発明は、このような事情に鑑みてなされたものであって、より臨場感のあるオンライン授業を実現することのできるオンライン授業システム及びオンライン授業方法並びにプログラムを提供することを目的とする。 SUMMARY OF THE INVENTION The present invention has been made in view of such circumstances, and an object of the present invention is to provide an online teaching system, an online teaching method, and a program that can realize more realistic online teaching.

本発明の第一態様は、教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データとを取得する映像取得部と、前記教師が注目する生徒に関する生徒情報を取得する生徒情報取得部と、前記生徒情報に基づいて、生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データ間で切り替える映像指定部とを具備するオンライン授業システムである。 A first aspect of the present invention is an image obtained by acquiring first image data obtained by photographing a teacher's face from a predetermined angle and second image data obtained by photographing the teacher's face at an angle different from the first image data. an acquisition unit, a student information acquisition unit that acquires student information related to a student of interest to the teacher, and image data to be displayed on a display screen of a student-side terminal based on the student information as the first image data and the second image data . An online class system comprising a video designator for switching between video data .

本発明の第二態様は、教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データとを取得する工程と、前記教師が注目する生徒に関する生徒情報を取得する工程と、前記生徒情報に基づいて、生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データ間で切り替える工程とをコンピュータが実行するオンライン授業方法である。 A second aspect of the present invention is a step of acquiring first image data obtained by photographing a teacher's face from a predetermined angle and second image data obtained by photographing the teacher's face at an angle different from the first image data. a step of acquiring student information relating to a student of interest to the teacher; and, based on the student information, converting video data to be displayed on a display screen of a student-side terminal between the first video data and the second video data . It is an online teaching method in which a computer executes the switching step.

本発明の第三態様は、コンピュータを上記オンライン授業システムとして機能させるためのプログラムである。 A third aspect of the present invention is a program for causing a computer to function as the online class system.

本発明の第四態様は、教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データとを取得する映像取得部と、前記教師が注目する生徒を特定する生徒特定部と、前記第1映像データ、前記第2映像データ、及び特定された前記生徒に関する生徒情報を、前記生徒情報に基づいて生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データの間で切り替える外部の情報処理装置に送信する送信部とを具備する情報処理装置である。 A fourth aspect of the present invention is a video obtained by acquiring first video data obtained by photographing a teacher's face from a predetermined angle and second video data obtained by photographing the teacher's face at an angle different from the first video data. an acquisition unit, a student identification unit for identifying a student of interest to the teacher, and a student terminal for obtaining the first video data, the second video data, and student information about the identified student based on the student information. and a transmission unit configured to transmit video data to be displayed on the display screen of (1) to an external information processing device that switches between the first video data and the second video data.

本発明の第五態様は、教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データとを取得する処理と、前記教師が注目する生徒を特定する処理と、前記第1映像データ、前記第2映像データ、及び特定された前記生徒に関する生徒情報を、前記生徒情報に基づいて生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データの間で切り替える外部の情報処理装置に送信する処理とをコンピュータに実行させるためのプログラムである。 A fifth aspect of the present invention is a process of acquiring first image data obtained by photographing a teacher's face from a predetermined angle and second image data obtained by photographing the teacher's face at an angle different from the first image data. and processing for identifying a student of interest by the teacher, and displaying the first video data, the second video data, and student information about the identified student on the display screen of the student terminal based on the student information. and transmitting video data to be displayed to an external information processing device for switching between the first video data and the second video data.

本発明の第六態様は、教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データと、生徒の識別情報とを受信する受信部と、受信した前記生徒の識別情報とログインされている生徒の識別情報とを照合し、照合結果に基づいて表示部に表示させる映像データを前記第1映像データ及び前記第2映像データから指定する映像指定部とを具備する情報処理装置である。 A sixth aspect of the present invention includes first image data obtained by photographing a teacher's face from a predetermined angle, second image data obtained by photographing the teacher's face at an angle different from the first image data, and student identification. a receiving unit that receives the information, compares the received identification information of the student with the identification information of the logged-in student, and based on the result of the comparison, the video data to be displayed on the display unit is the first video data and the and an image designating unit that designates from second image data.

本発明の第七態様は、コンピュータを上記情報処理装置として機能させるためのプログラムである。 A seventh aspect of the present invention is a program for causing a computer to function as the information processing apparatus.

本発明によれば、より臨場感のあるオンライン授業を実現することができるという効果を奏する。 ADVANTAGE OF THE INVENTION According to this invention, it is effective in the ability to implement|achieve more realistic online classes.

本発明の一実施形態に係るオンライン授業システムの全体構成を概略的に示したシステム構成図である。1 is a system configuration diagram schematically showing the overall configuration of an online class system according to one embodiment of the present invention; FIG. 本発明の一実施形態に係る授業支援サーバのハードウェア構成の一例を示した概略構成図である。1 is a schematic configuration diagram showing an example of a hardware configuration of a lesson support server according to one embodiment of the present invention; FIG. 本発明の一実施形態に係る教師側端末のハードウェア構成の一例を示した概略構成図である。1 is a schematic configuration diagram showing an example of a hardware configuration of a teacher's terminal according to an embodiment of the present invention; FIG. 本発明の第1実施形態に係る生徒側端末のハードウェア構成の一例を示した概略構成図である。1 is a schematic configuration diagram showing an example of a hardware configuration of a student terminal according to the first embodiment of the present invention; FIG. 本発明の第1実施形態に係るオンライン授業システムが備える機能の一例を示した機能ブロック図である。1 is a functional block diagram showing an example of functions provided in an online class system according to a first embodiment of the present invention; FIG. 本発明の第1実施形態に係る教師側端末の画面表示例を示した図である。FIG. 4 is a diagram showing a screen display example of the teacher's terminal according to the first embodiment of the present invention; 本発明の第1実施形態に係る生徒側端末の画面表示例を示した図である。FIG. 4 is a diagram showing a screen display example of a student-side terminal according to the first embodiment of the present invention; 本発明の第1実施形態に係る生徒側端末の画面表示例を示した図である。FIG. 4 is a diagram showing a screen display example of a student-side terminal according to the first embodiment of the present invention; 本発明の第1実施形態に係る生徒側端末の画面表示例を示した図である。FIG. 4 is a diagram showing a screen display example of a student-side terminal according to the first embodiment of the present invention; 本発明の第1実施形態に係る生徒側端末の画面表示例を示した図である。FIG. 4 is a diagram showing a screen display example of a student-side terminal according to the first embodiment of the present invention; 本発明の第2実施形態に係るオンライン授業システムが備える機能の一例を示した機能ブロック図である。FIG. 10 is a functional block diagram showing an example of functions provided in an online class system according to the second embodiment of the present invention;

以下に、本発明に係るオンライン授業システム及びオンライン授業方法並びにプログラムの一実施形態について、図面を参照して説明する。
図1は、本発明の一実施形態に係るオンライン授業システム1の全体構成を概略的に示したシステム構成図である。
An embodiment of an online teaching system, an online teaching method, and a program according to the present invention will be described below with reference to the drawings.
FIG. 1 is a system configuration diagram schematically showing the overall configuration of an online class system 1 according to one embodiment of the present invention.

図1に示すように、オンライン授業システム1は、授業支援サーバ10、教師側端末2、及び複数の生徒側端末3a~3dを主な構成として備えている。図1において、4台の生徒側端末3a~3dが図示されているが、生徒側端末3a~3dの台数はこの例に限定されるものではなく、適宜状況に応じて増台及び減台が可能である。また、以下においては、生徒側端末3a、3b、3c、3dをそれぞれ区別する必要がある場合には、生徒側端末3a、3b等と称し、区別する必要がない場合には、単に生徒側端末3と称する。 As shown in FIG. 1, the online class system 1 mainly includes a class support server 10, a teacher terminal 2, and a plurality of student terminals 3a to 3d. In FIG. 1, four student terminals 3a to 3d are illustrated, but the number of student terminals 3a to 3d is not limited to this example, and may be increased or decreased depending on the situation. It is possible. Further, hereinafter, the student-side terminals 3a, 3b, 3c, and 3d will be referred to as the student-side terminals 3a, 3b, etc. when it is necessary to distinguish them from each other. 3.

教師側端末2及び複数の生徒側端末3のそれぞれは、ネットワーク5を介して授業支援サーバ10と互いに通信可能に接続され、情報の送受信が可能な構成とされている。ネットワーク5の一例としてインターネット回線があげられるが、他のネットワーク回線であってもよい。 The teacher-side terminal 2 and the plurality of student-side terminals 3 are connected to the class support server 10 via the network 5 so as to be able to communicate with each other, and are configured to be able to transmit and receive information. An Internet line is given as an example of the network 5, but other network lines may be used.

図2は、本発明の一実施形態に係る授業支援サーバ10のハードウェア構成の一例を示した概略構成図である。図2に示すように、授業支援サーバ10は、例えば、CPU11、CPU11が実行するプログラム及びこのプログラムにより参照されるデータ等を記憶するための記憶部12、各プログラム実行時のワーク領域として機能するメインメモリ13、ネットワークに接続するための通信部14を主な構成として備えている。また、授業支援サーバ10は、更に、入力部15、表示部16等を備えていてもよい。これら各部は、例えば、バスを介して接続されている。記憶部12は、例えば、HDD(Hard Disk Drive)などの磁気ディスク、光磁気ディスク、SSD(Solid State Drive)等の半導体メモリ等が一例として挙げられる。 FIG. 2 is a schematic configuration diagram showing an example of the hardware configuration of the lesson support server 10 according to one embodiment of the present invention. As shown in FIG. 2, the class support server 10 functions, for example, as a CPU 11, a storage unit 12 for storing programs executed by the CPU 11 and data referred to by the programs, and a work area when each program is executed. Main components include a main memory 13 and a communication unit 14 for connecting to a network. Further, the class support server 10 may further include an input unit 15, a display unit 16, and the like. These units are connected via a bus, for example. Examples of the storage unit 12 include magnetic disks such as HDDs (Hard Disk Drives), magneto-optical disks, and semiconductor memories such as SSDs (Solid State Drives).

後述する各種機能を実現するための一連の処理は、一例として、プログラム(例えば、授業支援プログラム)の形式で記憶部12に記憶されており、このプログラムをCPU11がメインメモリ13に読み出して、情報の加工・演算処理を実行することにより、各種機能が実現される。なお、プログラムは、記憶部12に予めインストールされている形態や、他のコンピュータ読み取り可能な記憶媒体に記憶された状態で提供される形態、有線又は無線による通信手段を介して配信される形態等が適用されてもよい。コンピュータ読み取り可能な記憶媒体とは、磁気ディスク、光磁気ディスク、CD-ROM、DVD-ROM、半導体メモリ等である。 A series of processes for realizing various functions to be described later are stored in the storage unit 12 in the form of a program (for example, a class support program) as an example, and the CPU 11 reads this program into the main memory 13 and stores the information. Various functions are realized by executing the processing and arithmetic processing of . Note that the program may be pre-installed in the storage unit 12, provided in a state stored in another computer-readable storage medium, distributed via wired or wireless communication means, or the like. may apply. Computer-readable storage media include magnetic disks, magneto-optical disks, CD-ROMs, DVD-ROMs, semiconductor memories, and the like.

教師側端末2は、例えば、ノートPC、デスクトップ型PC、タブレット端末、スマートフォン等の情報処理装置である。図3に教師側端末2のハードウェア構成の一例を示す。 The teacher-side terminal 2 is, for example, an information processing device such as a notebook PC, a desktop PC, a tablet terminal, or a smart phone. FIG. 3 shows an example of the hardware configuration of the teacher terminal 2. As shown in FIG.

図3に示すように、教師側端末2は、例えば、CPU21、メインメモリ22、記憶部23、カメラ24a、外部インターフェース25、通信部26、入力部27、及び表示部28a等を備えている。これら各部は直接的にまたはバスを介して間接的に相互に接続されており互いに連携して各種処理を実行する。 As shown in FIG. 3, the teacher terminal 2 includes, for example, a CPU 21, a main memory 22, a storage section 23, a camera 24a, an external interface 25, a communication section 26, an input section 27, and a display section 28a. These units are connected to each other directly or indirectly via a bus, and cooperate with each other to perform various processes.

CPU21は、例えば、バスを介して接続された記憶部23に格納されたOS(Operating System)により教師側端末2全体の制御を行うとともに、記憶部23に格納された各種プログラムを実行することにより各種処理を実行する。 The CPU 21, for example, controls the entire teacher-side terminal 2 by means of an OS (Operating System) stored in a storage unit 23 connected via a bus, and executes various programs stored in the storage unit 23. Executes various processing.

メインメモリ22は、キャッシュメモリ、RAM(Random Access Memory)等の書き込み可能なメモリで構成され、CPU11の実行プログラムの読み出し、実行プログラムによる処理データの書き込み等を行う作業領域として利用される。 The main memory 22 is composed of writable memory such as cache memory and RAM (Random Access Memory), and is used as a work area for reading out the execution program of the CPU 11 and writing processing data by the execution program.

記憶部23は、例えば、ROM(Read Only Memory)、HDD(Hard Disk Drive)、フラッシュメモリ等であり、例えば、Windows(登録商標)、iOS(登録商標)、Android(登録商標)等の教師側端末2全体の制御を行うためのOS、周辺機器類をハードウェア操作するための各種デバイスドライバ、特定業務に向けられたアプリケーション、及び各種データやファイル等を格納する。また、記憶部23には、後述するオンライン授業システム1を実現するためのプログラムや、各種処理を実現するために必要とされる各種データが格納されている。 The storage unit 23 is, for example, a ROM (Read Only Memory), a HDD (Hard Disk Drive), a flash memory, or the like. It stores an OS for controlling the entire terminal 2, various device drivers for hardware operation of peripheral devices, applications for specific tasks, various data and files, and the like. The storage unit 23 also stores a program for realizing the online class system 1, which will be described later, and various data required for realizing various processes.

すなわち、後述する各種機能を実現するための一連の処理は、一例として、プログラム(例えば、授業支援プログラム)の形式で記憶部23に記憶されており、このプログラムをCPU21がメインメモリ22に読み出して、情報の加工・演算処理を実行することにより、各種機能が実現される。なお、プログラムは、記憶部23に予めインストールされている形態や、他のコンピュータ読み取り可能な記憶媒体に記憶された状態で提供される形態、有線又は無線による通信手段を介して配信される形態等が適用されてもよい。コンピュータ読み取り可能な記憶媒体とは、磁気ディスク、光磁気ディスク、CD-ROM、DVD-ROM、半導体メモリ等である。 That is, a series of processes for realizing various functions to be described later are stored in the storage unit 23 in the form of a program (for example, a class support program) as an example, and the CPU 21 reads this program into the main memory 22. , various functions are realized by executing information processing and arithmetic processing. The program may be pre-installed in the storage unit 23, provided in a state stored in another computer-readable storage medium, distributed via wired or wireless communication means, or the like. may apply. Computer-readable storage media include magnetic disks, magneto-optical disks, CD-ROMs, DVD-ROMs, semiconductor memories, and the like.

カメラ24aは、例えば、レンズ等の撮像部とISP(Image Signal Processor)を備えており、CPU21によって制御される。 The camera 24 a includes, for example, an imaging unit such as a lens and an ISP (Image Signal Processor), and is controlled by the CPU 21 .

外部インターフェース25は、外部機器と接続するためのインターフェースである。外部機器の一例として、カメラ、外部モニタ、USBメモリ、外付けHDD等が挙げられる。なお、図3に示した例では、外部インターフェース25に、カメラ24b及び外部モニタ28bが接続されている。 The external interface 25 is an interface for connecting with an external device. Examples of external devices include a camera, an external monitor, a USB memory, an external HDD, and the like. In the example shown in FIG. 3, the external interface 25 is connected to a camera 24b and an external monitor 28b.

通信部26は、ネットワークに接続して他の装置と通信を行い、情報の送受信を行うためのインターフェースとして機能する。
入力部27は、例えば、キーボード、マウス、タッチパネル等、ユーザが教師側端末2に対して指示を与えるためのユーザインターフェースである。
表示部28aは、例えば、LCD(Liquid Crystal Display)、有機EL(Electro Luminescence)等で構成される表示画面を有し、教師側端末2によって実行されたアプリケーションソフトウェアプログラムの結果等を表示するものである。
The communication unit 26 functions as an interface for connecting to a network, communicating with other devices, and transmitting and receiving information.
The input unit 27 is a user interface such as a keyboard, mouse, touch panel, etc., for the user to give instructions to the teacher terminal 2 .
The display unit 28a has a display screen composed of, for example, an LCD (Liquid Crystal Display), an organic EL (Electro Luminescence), or the like, and displays the result of the application software program executed by the teacher-side terminal 2. be.

例えば、図6に示すように、教師側端末2において、カメラ24bは、カメラ24aとは異なる角度から教師を撮影する位置に設置される。例えば、カメラ24bは、教師の顔を正面からずれた角度で撮影可能な位置に設置されるとよい。
例えば、カメラ24aは、教師側端末2において表示画面のすぐ上に備えられていることから、教師が教師側端末2の表示画面に注視している場合に、カメラ24aによって取得される第1映像データは、教師の顔を正面又は正面に近い位置から撮影した映像データとなる。また、この状態において、カメラ24bは、教師の顔を正面からずれた角度で撮影することから、カメラ24bによって取得された第2映像データは、例えば、教師を斜め前方または横から撮影した映像データとなる。
For example, as shown in FIG. 6, in the teacher-side terminal 2, the camera 24b is installed at a position that captures an image of the teacher from an angle different from that of the camera 24a. For example, the camera 24b may be installed at a position where the teacher's face can be photographed at a different angle from the front.
For example, since the camera 24a is provided immediately above the display screen of the teacher terminal 2, when the teacher is gazing at the display screen of the teacher terminal 2, the first image acquired by the camera 24a The data is image data obtained by photographing the teacher's face from the front or a position close to the front. Further, in this state, the camera 24b photographs the teacher's face at an angle that is deviated from the front. Therefore, the second image data acquired by the camera 24b is, for example, image data of the teacher photographed obliquely from the front or from the side. becomes.

生徒側端末3は、上述した教師側端末2と同様に、例えば、ノートPC、デスクトップ型PC、タブレット端末、スマートフォン等の情報処理装置である。図4に生徒側端末3のハードウェア構成の一例を示す。図4に示すように、生徒側端末3は、上述した教師側端末2とほぼ同様の構成とされている。すなわち、生徒側端末3は、例えば、CPU31、メインメモリ32、記憶部33、カメラ34、外部インターフェース35、通信部36、入力部37、及び表示部38等を備えている。これら各部は直接的にまたはバスを介して間接的に相互に接続されており互いに連携して各種処理を実行する。なお、各部の詳細については、上述した通りであるから、ここでの説明は省略する。 The student-side terminal 3 is, for example, an information processing device such as a notebook PC, a desktop PC, a tablet terminal, or a smart phone, like the teacher-side terminal 2 described above. FIG. 4 shows an example of the hardware configuration of the student terminal 3. As shown in FIG. As shown in FIG. 4, the student terminal 3 has substantially the same configuration as the teacher terminal 2 described above. That is, the student-side terminal 3 includes, for example, a CPU 31, a main memory 32, a storage section 33, a camera 34, an external interface 35, a communication section 36, an input section 37, a display section 38, and the like. These units are connected to each other directly or indirectly via a bus, and cooperate with each other to perform various processes. Since the details of each part are as described above, descriptions thereof will be omitted here.

図5は、本実施形態に係るオンライン授業システム1が備える機能の一例を示した機能ブロック図である。 FIG. 5 is a functional block diagram showing an example of the functions of the online class system 1 according to this embodiment.

図5に示すように、教師側端末2は、映像取得部41、生徒特定部42、及び送受信部43を備えている。
映像取得部41は、教師側端末2が備えるカメラ24a(図3参照)によって撮影された第1映像データ及び教師側端末2に外部機器として接続されたカメラ24bによって撮影された第2映像データを取得する。
As shown in FIG. 5 , the teacher-side terminal 2 includes an image acquisition section 41 , a student identification section 42 and a transmission/reception section 43 .
The image acquisition unit 41 acquires first image data captured by the camera 24a (see FIG. 3) provided in the teacher terminal 2 and second image data captured by the camera 24b connected to the teacher terminal 2 as an external device. get.

生徒特定部42は、教師が注目する生徒として指定した生徒を特定する。
例えば、オンライン授業において、教師側端末2の表示部28a又は外部モニタ28bには、オンラインで接続されている生徒側端末3のカメラ34(図4参照)によって撮影された各生徒の映像データが表示される。この映像データは、例えば、生徒側端末3から授業支援サーバ10を介して教師側端末2が受信するデータである。
The student identification unit 42 identifies a student designated by the teacher as a student of interest.
For example, in an online class, video data of each student captured by the camera 34 (see FIG. 4) of the student terminal 3 connected online is displayed on the display unit 28a of the teacher terminal 2 or the external monitor 28b. be done. This video data is, for example, data received by the teacher terminal 2 from the student terminal 3 via the lesson support server 10 .

図6は、教師側端末2における画面表示例を示した図である。図6の画面表示例では、表示部28aに4人の生徒の映像が表示され、外部モニタ28bに授業で用いているテキストの情報が表示されている。 FIG. 6 is a diagram showing an example of a screen display on the teacher's terminal 2. As shown in FIG. In the screen display example of FIG. 6, images of four students are displayed on the display section 28a, and text information used in class is displayed on the external monitor 28b.

教師は、例えば、表示部28aに表示された生徒達の中から注目する生徒を指定する。例えば、教師は、マウスやキーボード等の入力部27(図3参照)を操作することにより、注目する生徒を指定する。注目する生徒として複数の生徒を指定することも可能である。生徒の指定手法については公知の手法を採用することが可能である。例えば、教師は、表示部28aに表示されたいずれかの生徒の表示位置にカーソルを合わせ、クリック操作を行うことにより、注目する生徒を指定することが可能である。また、例えば、注目する生徒の名前を音声で入力することとしてもよい。また、教師側端末2に視線を検知する視線センサを設け、表示画面に表示されているいずれかの生徒に一定期間視線を固定することにより、注目する生徒を指定することとしてもよい。 For example, the teacher designates a student of interest from among the students displayed on the display section 28a. For example, the teacher designates a student of interest by operating the input unit 27 (see FIG. 3) such as a mouse and keyboard. It is also possible to designate a plurality of students as the student of interest. A known method can be adopted as a method of specifying a student. For example, the teacher can specify a student of interest by placing the cursor on the display position of one of the students displayed on the display section 28a and performing a click operation. Also, for example, the name of the student of interest may be input by voice. Alternatively, the teacher-side terminal 2 may be provided with a line-of-sight sensor for detecting the line-of-sight, and by fixing the line-of-sight to one of the students displayed on the display screen for a certain period of time, the student of interest may be specified.

また、注目生徒の指定として、生徒全員を指定することも可能である。例えば、図6に示した表示画面例において、アイコンQを指定することで、生徒全員を指定できる。 It is also possible to designate all students as the target student. For example, in the display screen example shown in FIG. 6, by designating the icon Q, all students can be designated.

また、教師によって注目生徒が指定された場合には、教師側端末2の表示画面において、指定された生徒を他の生徒と区別可能に表示することとしてもよい。図6に示した表示画面例では、指定された生徒の映像を枠で囲うことで他の生徒と区別可能としている。 Further, when a student of interest is specified by the teacher, the specified student may be displayed on the display screen of the teacher-side terminal 2 so as to be distinguishable from other students. In the display screen example shown in FIG. 6, the image of the designated student is surrounded by a frame so that it can be distinguished from other students.

教師によって生徒が指定されると、生徒特定部42(図5参照)は、その入力情報を受け付け、教師によって指定された生徒を特定し、特定した生徒の生徒IDを取得する。
ここで、生徒IDは、生徒を特定できる情報であればよく、一例として、生徒のアカウント情報、生徒の名前、生徒の学籍番号等が挙げられる。また、生徒IDには、接続されている全ての生徒を指定する生徒IDも含まれる。例えば、図6に示した例では、全ての生徒を指定する生徒IDとして「9999」が設定されている。
When a student is specified by the teacher, the student specifying unit 42 (see FIG. 5) receives the input information, specifies the student specified by the teacher, and acquires the student ID of the specified student.
Here, the student ID may be any information that can identify the student, and examples thereof include student account information, student name, and student ID number. The student IDs also include student IDs specifying all connected students. For example, in the example shown in FIG. 6, "9999" is set as the student ID specifying all students.

送受信部43は、映像取得部41によって取得された第1映像データ及び第2映像データを授業支援サーバ10に送信する。また、生徒特定部42から生徒IDが入力された場合には、生徒IDを授業支援サーバ10に送信する。 The transmission/reception unit 43 transmits the first image data and the second image data acquired by the image acquisition unit 41 to the class support server 10 . Also, when a student ID is input from the student identification unit 42 , the student ID is transmitted to the lesson support server 10 .

授業支援サーバ10は、例えば、送受信部44、及び映像指定部46を備えている。
送受信部44は、教師側端末2から第1映像データ及び第2映像データを受信する。また、送受信部44は、教師側端末2から注目生徒を特定するための生徒IDを受信する。
また、送受信部44は、生徒側端末3から生徒の映像データを取得する。生徒の映像データは、後述するように、生徒側端末3の映像取得部47によって取得された生徒の映像データである。
The lesson support server 10 includes, for example, a transmission/reception section 44 and a video designation section 46 .
The transmission/reception unit 44 receives the first video data and the second video data from the teacher's terminal 2 . Further, the transmitting/receiving unit 44 receives a student ID for identifying the student of interest from the teacher-side terminal 2 .
Also, the transmission/reception unit 44 acquires the student's video data from the student-side terminal 3 . The student's image data is the student's image data obtained by the image obtaining unit 47 of the student-side terminal 3, as will be described later.

映像指定部46は、送受信部44によって生徒IDが受信された場合に、受信した生徒IDに基づいて、各生徒側端末3の表示画面に表示させる映像データを第1映像データ及び第2映像データの中から指定する。例えば、映像指定部46は、生徒IDで特定される生徒の表示画面に表示させる映像データとして、第1映像データを指定する。また、それ以外の生徒の生徒側端末3の表示画面に表示させる映像データとして、第2映像データを指定する。 When the transmitting/receiving unit 44 receives the student ID, the image specifying unit 46 selects image data to be displayed on the display screen of each student-side terminal 3 as first image data and second image data based on the received student ID. Specify from For example, the image designation unit 46 designates the first image data as image data to be displayed on the display screen of the student identified by the student ID. In addition, the second video data is designated as the video data to be displayed on the display screen of the student-side terminal 3 of the other students.

上述したように、教師側端末2に内蔵されたカメラ24aによって撮影される第1映像データは、カメラ24bによって撮影される映像データに比べて、教師を正面又は正面に近い角度で撮影した映像データである可能性が高い。また、例えば、第2映像データは、カメラ24bの設置位置にもよるが、教師の顔を斜め前方または横から撮影した映像データとなる可能性が高い。 As described above, the first video data captured by the camera 24a built into the teacher-side terminal 2 is the video data of the teacher captured at a frontal or near-frontal angle, compared to the video data captured by the camera 24b. likely to be. Further, for example, the second image data is likely to be image data obtained by photographing the teacher's face obliquely from the front or from the side, depending on the installation position of the camera 24b.

上記の理由から、映像指定部46は、例えば、教師が注目したい生徒として指定した注目生徒が使用する生徒側端末3に送信する映像データとして第1映像データを指定する。これにより、例えば、注目生徒が使用する生徒側端末3の表示部38には、教師と目線が合うような映像が表示される。この結果、注目生徒に教師が注目していることを意識させることが可能となる。図7及び図8は、注目生徒が使用する生徒側端末3の表示画面例を示した図である。図7は、テキストを用いずに授業を行っているときの表示画面例、図8は、テキストを用いて授業を行っているときの表示画面例を示している。 For the above reason, the image designation unit 46 designates, for example, the first image data as the image data to be transmitted to the student-side terminal 3 used by the noted student designated by the teacher as the noted student. As a result, for example, on the display unit 38 of the student-side terminal 3 used by the student of interest, an image is displayed in which the eyes of the teacher match. As a result, it is possible to make the noted student aware of the teacher's attention. 7 and 8 are diagrams showing examples of display screens of the student-side terminal 3 used by the noted student. FIG. 7 shows an example of a display screen when the class is being conducted without using texts, and FIG. 8 shows an example of the display screens when the class is being conducted using texts.

また、映像指定部46は、注目生徒ではない生徒が使用する生徒側端末3に対して送信する映像データとして、第2映像データを指定する。これにより、例えば、注目生徒ではない生徒が使用する生徒側端末3の表示部38には、教師の目線がずれた映像が表示される。この結果、例えば、次に、注目生徒として指定された場合には、映像データが第2映像データから第1映像データに切り替えられることとなり、教師が注目しているということをより一層明確に生徒に意識させることが可能となる。図9及び図10は、注目生徒以外の生徒が使用する生徒側端末3の表示画面例を示した図である。図9は、テキストを用いずに授業を行っているときの表示画面例、図10は、テキストを用いて授業を行っているときの表示画面例を示している。 Further, the image specifying unit 46 specifies the second image data as the image data to be transmitted to the student-side terminal 3 used by the student who is not the student of interest. As a result, for example, an image in which the teacher's line of sight is shifted is displayed on the display unit 38 of the student-side terminal 3 used by the student who is not the student of interest. As a result, for example, when the student is next designated as the student of interest, the video data is switched from the second video data to the first video data. It is possible to make them aware of 9 and 10 are diagrams showing examples of display screens of the student-side terminals 3 used by students other than the student of interest. FIG. 9 shows an example of a display screen when the class is being conducted without using texts, and FIG. 10 shows an example of the display screens when the class is being conducted using texts.

また、映像指定部46は、送受信部44によって生徒IDが受信されなかった場合には、例えば、全ての生徒側端末3の表示画面に表示させる映像データとして予め設定されているいずれかの映像データ(例えば、第2映像データ)を指定する。また、映像指定部46は、送受信部44によって全ての生徒を示す生徒IDを受信した場合には、全ての生徒側端末3の表示画面に表示させる映像データとして第1映像データを指定する。 Further, when the transmission/reception unit 44 does not receive the student ID, the image specifying unit 46 selects, for example, any image data preset as image data to be displayed on the display screens of all the student-side terminals 3. (for example, second video data). When the transmission/reception unit 44 receives student IDs indicating all students, the image designation unit 46 designates the first image data as the image data to be displayed on the display screens of all the student terminals 3 .

生徒側端末3は、映像取得部47及び送受信部48を備えている。
映像取得部47は、カメラ34(図4参照)によって撮影された生徒の映像データを取得する。
送受信部48は、映像取得部47によって取得された生徒の映像データを授業支援サーバ10に送信する。また、送受信部48は、授業支援サーバ10から教師の映像データを受信する。送受信部48によって受信された教師の映像データは、表示部38に表示される。
The student-side terminal 3 includes a video acquisition section 47 and a transmission/reception section 48 .
The video acquisition unit 47 acquires video data of the student captured by the camera 34 (see FIG. 4).
The transmission/reception unit 48 transmits the video data of the student acquired by the video acquisition unit 47 to the lesson support server 10 . Further, the transmission/reception unit 48 receives video data of the teacher from the lesson support server 10 . The video data of the teacher received by the transmission/reception unit 48 is displayed on the display unit 38 .

次に、本実施形態に係るオンライン授業システム1によるオンライン授業方法について説明する。
オンライン授業を開始するにあたり、教師は教師側端末2に自身のユーザID等のアカウント及びパスワードを入力することにより、また、各生徒は自身の生徒側端末3にそれぞれユーザID等のアカウント及びパスワードを入力することにより、オンライン授業に参加する。なお、ログイン手法等はこの例に限定されず、公知の様々な手法を用いることが可能である。
Next, an online teaching method by the online teaching system 1 according to this embodiment will be described.
At the start of the online class, the teacher inputs his account such as user ID and password into the teacher terminal 2, and each student inputs his account such as user ID and password into his student terminal 3. Participate in online classes by entering Note that the login method and the like are not limited to this example, and various known methods can be used.

これにより、教師側端末2及び各生徒側端末3が授業支援サーバ10を介してそれぞれ接続され、オンライン授業が開始される。 As a result, the teacher-side terminal 2 and each student-side terminal 3 are connected via the class support server 10, and the online class is started.

オンライン授業中において、教師側端末2のカメラ24aによって撮影された第1映像データ及びカメラ24bによって撮影された第2映像データは、映像取得部41により取得され、送受信部43を介して授業支援サーバ10に送信される。授業支援サーバ10が教師側端末2から生徒IDを受信していない場合、例えば、映像指定部46によって全ての生徒に対して第2映像データが指定され、これにより、各生徒側端末3に対して一様に第2映像データが送信される。これにより、各生徒側端末3の表示画面には、教師側端末2のカメラ24bによって撮影された教師の映像データが表示されることとなる。(例えば、図9、図10参照)。 During the online class, the first video data captured by the camera 24a of the teacher-side terminal 2 and the second video data captured by the camera 24b are acquired by the video acquisition unit 41 and sent to the class support server via the transmission/reception unit 43. 10. When the lesson support server 10 has not received the student ID from the teacher terminal 2, for example, the image designation unit 46 designates the second image data for all the students. , the second video data is uniformly transmitted. As a result, the video data of the teacher captured by the camera 24 b of the teacher terminal 2 is displayed on the display screen of each student terminal 3 . (See, for example, FIGS. 9 and 10).

一方、各生徒側端末3のカメラ34によって撮影された生徒の映像データは、映像取得部47によって取得され、送受信部48を介して授業支援サーバ10に送信される。各生徒側端末3から送信された各生徒の映像データは、授業支援サーバ10を介して教師側端末2に送信される。これにより、教師側端末2の表示画面には、各生徒の映像が表示される。(図6参照) On the other hand, the video data of the student captured by the camera 34 of each student-side terminal 3 is acquired by the video acquisition unit 47 and transmitted to the lesson support server 10 via the transmission/reception unit 48 . The video data of each student transmitted from each student terminal 3 is transmitted to the teacher terminal 2 via the lesson support server 10 . As a result, the video of each student is displayed on the display screen of the teacher-side terminal 2 . (See Figure 6)

オンライン授業中において、教師によって注目する生徒が指定された場合には、生徒特定部42によって指定された生徒の生徒IDが特定され、特定された生徒IDが送受信部43を介して授業支援サーバ10へ送信される。以下、説明の便宜上、生徒ID「0001」の生徒が指定された場合について説明する。 During an online class, when the teacher designates a student of interest, the student ID of the designated student is identified by the student identification unit 42, and the identified student ID is sent to the lesson support server 10 via the transmission/reception unit 43. sent to. For convenience of explanation, the case where the student with the student ID "0001" is specified will be explained below.

授業支援サーバ10において受信された生徒ID「0001」の情報は、映像指定部46に出力される。映像指定部46は、生徒ID「0001」に基づいて、生徒ID「0001」でログインされている生徒側端末3の表示画面に表示する映像データとして第1映像データを、それ以外の生徒ID「0002」、「0003」、「0004」でログインされている生徒側端末3の表示画面に表示する映像データとして第2映像データを指定する。 The information of the student ID “0001” received by the lesson support server 10 is output to the video designation unit 46 . Based on the student ID "0001", the image specifying unit 46 selects the first image data as image data to be displayed on the display screen of the student-side terminal 3 logged in with the student ID "0001", and the other student ID "0001". 0002", "0003", and "0004", the second video data is specified as the video data to be displayed on the display screen of the logged-in student terminal 3.

映像指定部46によって指定された映像データは、送受信部44を介して生徒側端末3に送信される。これにより、生徒ID「0001」でログインされている生徒側端末3の表示部38(図4参照)には、例えば、図7、図8に示すように、カメラ24aによって撮影された第1映像データが表示される。この結果、生徒ID「0001」の生徒には、自分が教師に注目されていることを意識させることができ、回答しなければならない緊張感や気にしてもらえていることの安心感等を与えることが可能となる。また、注目生徒ではない生徒IDでログインされている生徒側端末3の表示部38(図4参照)には、図9、図10に示すように、カメラ24bによって撮影された映像データが表示される。 The video data designated by the video designation unit 46 is transmitted to the student terminal 3 via the transmission/reception unit 44 . As a result, for example, as shown in FIGS. 7 and 8, the display unit 38 (see FIG. 4) of the student-side terminal 3 logged in with the student ID "0001" displays the first image captured by the camera 24a. Data is displayed. As a result, the student with the student ID "0001" can be made aware that he or she is being watched by the teacher, and can feel the tension of having to respond and the sense of security that the teacher cares about him/her. becomes possible. 9 and 10, video data shot by the camera 24b is displayed on the display unit 38 (see FIG. 4) of the student terminal 3 logged in with the student ID that is not the student of interest. be.

以上説明してきたように、本実施形態に係るオンライン授業システム1及びオンライン授業方法並びにプログラムによれば、以下のような効果を奏する。
教師側端末2において注目する生徒が指定された場合には、指定した生徒が使用している生徒側端末3の表示画面に表示させる映像データとして、カメラ24aによって撮影された第1映像データが選ばれ、指定されていない生徒が使用されている生徒側端末3の表示画面に表示させる映像データとしてカメラ24bによって撮影された第2映像データが選ばれる。
As described above, the online class system 1, the online class method, and the program according to the present embodiment have the following effects.
When a student of interest is specified on the teacher-side terminal 2, the first video data captured by the camera 24a is selected as the video data to be displayed on the display screen of the student-side terminal 3 used by the specified student. The second image data captured by the camera 24b is selected as the image data to be displayed on the display screen of the student-side terminal 3 used by the unspecified student.

これにより、注目生徒として指定された生徒が使用する表示画面に教師と目線が合うような映像を表示させることが可能となる。この結果、注目生徒に教師が注目していることを意識させることが可能となる。また、注目生徒以外の生徒が使用する表示画面には、教師の目線がずれた映像を表示されることが可能となる。これにより、例えば、次に、注目生徒として指定された場合には、映像データが第2映像データから第1映像データに切り替えられることとなり、教師が注目しているということをより一層明確に注目生徒に意識させることが可能となる。この結果、教室で講師が授業を行っているような臨場感を生徒に体感させることが可能となる。 As a result, it is possible to display an image on the display screen used by the student designated as the student of interest so that the teacher and the teacher can see each other. As a result, it is possible to make the noted student aware of the teacher's attention. In addition, it is possible to display an image in which the teacher's line of sight is shifted on the display screens used by the students other than the student of interest. As a result, for example, next time the student is designated as the student of interest, the video data is switched from the second video data to the first video data, so that the teacher's attention is more clearly noticed. Students can be made aware of it. As a result, it is possible to make the students feel as if the lecturer were teaching in the classroom.

なお、上記実施形態では、授業支援サーバ10の映像指定部46が、注目生徒に対応する映像データとして第1映像データを、注目生徒以外の生徒に対応する映像データとして第2映像データを指定していた。しかしながら、映像データの選定手法については、この態様に限定されない。
例えば、教師の顔の向きや目線は刻々と変化する。このため、例えば、第1映像データと第2映像データを画像解析することにより教師の顔の向きを判定し、正面から撮影した映像により近い映像データを注目生徒に提供する映像データとして指定することとしてもよい。また、画像解析は、必ずしも第1映像データ及び第2映像データの両方に対して行う必要はなく、いずれか一方に対して行うこととしてもよい。
In the above embodiment, the image specifying unit 46 of the lesson support server 10 specifies the first image data as the image data corresponding to the student of interest, and the second image data as the image data corresponding to the students other than the student of interest. was However, the method of selecting video data is not limited to this aspect.
For example, the orientation of the teacher's face and line of sight change from moment to moment. For this reason, for example, the direction of the teacher's face is determined by image analysis of the first video data and the second video data, and the video data closer to the video shot from the front is designated as the video data to be provided to the student of interest. may be Also, the image analysis does not necessarily have to be performed on both the first video data and the second video data, and may be performed on either one.

また、注目生徒に送信する映像データを撮影するカメラと、注目する生徒以外の生徒に送信する映像データを撮影するカメラとを教師自らが指定できるような構成としてもよい。例えば、注目生徒に送信する映像データに対応するカメラと、注目生徒以外の生徒に送信する映像データを撮影するカメラとを指定できるような設定画面を表示画面に表示し、教師がこの設定画面においてカメラを指定できるようにしてもよい。 Further, a configuration may be adopted in which the teacher himself/herself can designate a camera for capturing video data to be transmitted to the student of interest and a camera for capturing video data to be transmitted to students other than the student of interest. For example, a setting screen is displayed on the display screen so that a camera corresponding to video data to be transmitted to the focused student and a camera for shooting video data to be transmitted to students other than the focused student can be specified. You may enable it to designate a camera.

次に、本発明の第2実施形態に係るオンライン授業システム1´及びオンライン授業方法並びにプログラムについて説明する。
図11は、本実施形態に係るオンライン授業システム1´が備える機能の一例を示した機能ブロック図である。以下、上述した第1実施形態に係るオンライン授業システム1と同一の構成については同一の符号を付して説明を省略し、異なる点について主に説明する。
Next, an online teaching system 1', an online teaching method, and a program according to the second embodiment of the present invention will be described.
FIG. 11 is a functional block diagram showing an example of the functions of the online class system 1' according to this embodiment. Hereinafter, the same components as those of the online class system 1 according to the first embodiment described above are denoted by the same reference numerals, and descriptions thereof are omitted, and different points are mainly described.

図11に示すように、本実施形態に係るオンライン授業システム1´は、生徒側端末3´に集中度評価部50が設けられている。集中度評価部50は、生徒の授業集中度を評価するものである。集中度評価部50は、例えば、映像取得部47によって取得された生徒の映像データに基づいて授業集中度を評価する。例えば、生徒の映像データを解析することにより、「目を瞑っている時間が閾値よりも長い」、「顔が横や後ろを向いている時間が閾値よりも長い」といった条件を満たした場合に、授業集中度が低いと判定する。 As shown in FIG. 11, in the online class system 1' according to this embodiment, a concentration evaluation unit 50 is provided in the student terminal 3'. The concentration evaluation unit 50 evaluates a student's concentration in class. The concentration evaluation unit 50 evaluates the class concentration based on the video data of the student acquired by the video acquisition unit 47, for example. For example, by analyzing the video data of students, if the conditions such as "the time the eyes are closed is longer than the threshold", "the time the face is facing sideways or behind is longer than the threshold", , the degree of concentration in class is determined to be low.

集中度評価部50は、例えば、生徒側端末3´に対する生徒の入力操作の頻度に基づいて授業集中度を評価することとしてもよい。例えば、生徒側端末3´において、項目の選択や回答の入力が求められているにもかかわらず、その際のマウスやキーボード等の入力部37(図4参照)からの入力量が閾値よりも少ない場合には、生徒が授業に集中しておらず問題をきちんと解いていないか、又は問題が解けなくて悩んでいること等が想定される。このため、一定期間における入力部37からの入力量が閾値よりも少ない場合には、授業集中度が低いと判定する。 The concentration evaluation unit 50 may, for example, evaluate the class concentration based on the frequency of the student's input operation on the student-side terminal 3'. For example, in the student-side terminal 3', although the selection of items and the input of answers are requested, the amount of input from the input unit 37 (see FIG. 4) such as a mouse and keyboard at that time is larger than the threshold. If the number of students is small, it is assumed that the student is not concentrating on the lesson and does not solve the problem properly, or that the student is troubled by not being able to solve the problem. Therefore, when the amount of input from the input unit 37 during a certain period of time is less than the threshold value, it is determined that the student's degree of concentration in class is low.

また、生徒側端末3´に、授業集中度を検知するためのセンサ(図示略)を設け、このセンサの検出値に基づいて授業集中度を評価することとしてもよい。センサの一例として、赤外線カメラ等を用いた生体センサが挙げられる。 Further, a sensor (not shown) for detecting the degree of concentration in the lesson may be provided in the student-side terminal 3', and the degree of concentration in the lesson may be evaluated based on the detected value of this sensor. An example of the sensor is a biosensor using an infrared camera or the like.

集中度評価部50は、授業集中度が低いと判定した場合、その生徒側端末3´を使用している生徒の生徒IDを送受信部48を介して授業支援サーバ10´に送信する。授業支援サーバ10´の映像指定部46´は、生徒IDを受信した生徒側端末3´の表示画面に表示させる映像データとして、教師の目線があった映像データ、例えば、第1映像データを指定する。これにより、授業集中度が低いと判定された生徒側端末3´の表示画面には、例えば、図7、図8に示すような教師と目線が合う映像データが表示されることとなる。これにより、当該生徒の注意を引くことが可能となり、当該生徒に緊張感を与えることが可能となる。
また、上記例の他、例えば、映像指定部46´は、授業集中度が低いと判定された生徒側端末3´の表示画面に、第1映像データと第2映像データとがランダムな時間周期で切り替えられて表示されるように、映像データを指定することとしてもよい。このような表示態様によっても当該生徒に緊張感を与えることが可能となる。
When the concentration evaluation unit 50 determines that the concentration in class is low, the concentration evaluation unit 50 transmits the student ID of the student using the student-side terminal 3 ′ to the class support server 10 ′ via the transmission/reception unit 48 . The video designation unit 46' of the class support server 10' designates the video data that the teacher's line of sight, for example, the first video data, is to be displayed on the display screen of the student-side terminal 3' that has received the student ID. do. As a result, on the display screen of the student-side terminal 3' judged to have a low degree of concentration in class, for example, the video data shown in FIGS. This makes it possible to attract the student's attention and to give the student a sense of tension.
In addition to the above example, for example, the video designation unit 46' displays the first video data and the second video data on the display screen of the student-side terminal 3' determined to have a low degree of concentration in class. It is also possible to specify the video data so that it is switched and displayed by . Such a display mode also makes it possible to give the student a sense of tension.

また、上記の他、例えば、生徒側端末3´において、生徒のやる気を促すメッセージを音声で発したり、警告音を鳴らしたりしてもよい。また、生徒側端末3´は、単に、教師の映像データを表示画面に表示させるだけではなく、教師の顔をアップにして表示させる、教師の映像を枠で囲う等、教師の映像を強調するような表示態様で表示画面に表示させることとしてもよい。 In addition to the above, for example, the student-side terminal 3' may emit a voice message to encourage the student's motivation, or may sound an alarm. Further, the student-side terminal 3' not only displays the teacher's image data on the display screen, but also emphasizes the teacher's image by displaying the teacher's face close-up, enclosing the teacher's image with a frame, and the like. It is good also as displaying on a display screen in such a display mode.

以上説明してきたように、本実施形態に係るオンライン授業システム1´及びオンライン授業方法並びにプログラムによれば、生徒の授業集中度が低いと判定された場合に、その生徒が使用している生徒側端末3´の表示画面に教師を正面から撮影した映像データ(例えば、第1映像データ)を表示させる。これにより、当該生徒に緊張感を与えることができ、当該生徒の集中力を回復させることが期待できる。 As described above, according to the online class system 1' and the online class method and program according to the present embodiment, when it is determined that the student's concentration level in class is low, the student side used by the student The display screen of the terminal 3' displays video data (for example, first video data) of the teacher photographed from the front. As a result, it is possible to give the student a sense of tension, and it is expected that the student's concentration will be restored.

以上、本発明について実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。発明の要旨を逸脱しない範囲で上記実施形態に多様な変更又は改良を加えることができ、該変更又は改良を加えた形態も本発明の技術的範囲に含まれる。また、上記実施形態を適宜組み合わせてもよい。 Although the present invention has been described above using the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments. Various changes or improvements can be made to the above-described embodiments without departing from the gist of the invention, and forms with such changes or improvements are also included in the technical scope of the present invention. Also, the above embodiments may be combined as appropriate.

例えば、上述した各実施形態では、教師側端末2がカメラ24aを内蔵している場合を例示して説明したが、この例に限定されない。例えば、カメラ24aについても外部機器として外部インターフェースを介して接続されるカメラであってもよい。また、このように2台のカメラを外部機器として教師側端末2に接続する場合には、1台のカメラは教師側端末2において教師の顔を正面又は正面付近から撮影可能な位置、例えば、上述したカメラ24aの設置位置又はその近傍に設置し、他方のカメラは、教師の顔をもう少しずれた方向から撮影可能な位置、例えば、上述したカメラ24bの設置位置又はその近傍に設置するとよい。 For example, in each of the above-described embodiments, the teacher terminal 2 includes the camera 24a. For example, the camera 24a may also be a camera connected via an external interface as an external device. Also, when two cameras are connected to the teacher terminal 2 as external devices in this way, one camera can be positioned at a position where the teacher's face can be photographed from the front or near the front of the teacher terminal 2, for example, The camera 24a should be installed at or near the installation position described above, and the other camera should be installed at a position where the teacher's face can be photographed from a slightly different direction, for example, at the installation position of the camera 24b described above or near it.

また、各実施形態では、授業支援サーバ10、10´を介して映像データの送受信が行われる場合を例示して説明したが、この態様に限定されない。例えば、授業支援サーバ10,10´を省略するとともに、授業支援サーバ10、10´が備える映像指定部46、46´の機能を教師側端末2又は生徒側端末3、3´に持たせることとしてもよい。 Further, in each embodiment, a case where video data is transmitted and received via the class support servers 10 and 10' has been exemplified and explained, but the present invention is not limited to this aspect. For example, the lesson support servers 10, 10' may be omitted, and the teacher-side terminal 2 or the student-side terminals 3, 3' may have the functions of the video designation units 46, 46' provided in the lesson support servers 10, 10'. good too.

例えば、教師側端末2が映像指定部46の機能を有する場合には、教師によって注目生徒が指定された場合に、その生徒が使用する生徒側端末3に対して第1映像データを送信し、注目生徒以外の生徒が使用する生徒側端末3に対して第2映像データを送信することとしてもよい。また、教師側端末2が映像指定部46´の機能を有する場合には、注目生徒に加えて、授業集中度が低いと判定された生徒に対して第1映像データを送信することとしてもよい。 For example, when the teacher-side terminal 2 has the function of the video designation unit 46, when the teacher designates a student of interest, the first video data is transmitted to the student-side terminal 3 used by the student, The second video data may be transmitted to the student terminals 3 used by students other than the student of interest. Further, when the teacher-side terminal 2 has the function of the video designation unit 46', the first video data may be transmitted to the student determined to have a low degree of concentration in class, in addition to the student of interest. .

また、例えば、生徒側端末3が映像指定部46の機能を有する場合には、教師側端末2から各生徒側端末3に対して第1映像データ及び第2映像データが送信されることとする。この場合において、注目生徒が教師によって指定された場合には、その注目生徒の生徒IDが教師側端末2から生徒側端末3に送信される。そして、生徒側端末3は、生徒IDを受信していない場合には、第2映像データを表示部38に表示させる。一方、生徒IDを受信している場合には、受信した生徒IDと自身の端末にログインしている生徒IDと照合し、両者が一致した場合には、第1映像データを表示部38に表示させ、両者が一致しない場合には、第2映像データを表示部38に表示させる。また、第2実施形態のように、生徒側端末3´が集中度評価部50を備えている場合には、上記に加えて、生徒の授業集中度が低下した場合においても第1映像データを表示部38に表示させる。 Further, for example, when the student terminal 3 has the function of the video designation unit 46, the first video data and the second video data are transmitted from the teacher terminal 2 to each student terminal 3. . In this case, when a student of interest is specified by the teacher, the student ID of the student of interest is transmitted from the teacher-side terminal 2 to the student-side terminal 3 . Then, if the student-side terminal 3 has not received the student ID, it causes the display unit 38 to display the second video data. On the other hand, when the student ID has been received, the received student ID is collated with the student ID logged into its own terminal, and if the two match, the first video data is displayed on the display unit 38. and if they do not match, the second video data is displayed on the display unit 38 . Further, when the student-side terminal 3' is provided with the concentration evaluation unit 50 as in the second embodiment, in addition to the above, even when the student's concentration in class has decreased, the first video data can be processed. Displayed on the display unit 38 .

1、1´:オンライン授業システム
2:教師側端末
3、3´(3a、3b、3c、3d):生徒側端末
10、10´:授業支援サーバ
24a、24b:カメラ
25:外部インターフェース(外部I/F)
26:通信部
27:入力部
28a:表示部
28b:外部モニタ
34:カメラ
35:外部インターフェース(外部I/F)
36:通信部
37:入力部
38:表示部
41:映像取得部
42:生徒特定部
43:送受信部
44:送受信部
46、46´:映像指定部
47:映像取得部
48:送受信部
50:集中度評価部
1, 1': online class system 2: teacher-side terminals 3, 3' (3a, 3b, 3c, 3d): student-side terminals 10, 10': class support servers 24a, 24b: cameras 25: external interfaces (external I /F)
26: communication unit 27: input unit 28a: display unit 28b: external monitor 34: camera 35: external interface (external I/F)
36: communication unit 37: input unit 38: display unit 41: image acquisition unit 42: student identification unit 43: transmission/reception unit 44: transmission/reception unit 46, 46': image designation unit 47: image acquisition unit 48: transmission/reception unit 50: concentration degree evaluation unit

Claims (14)

教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データとを取得する映像取得部と、
前記教師が注目する生徒に関する生徒情報を取得する生徒情報取得部と、
前記生徒情報に基づいて、生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データの間で切り替える映像指定部と
を具備するオンライン授業システム。
an image acquisition unit for acquiring first image data obtained by photographing a teacher's face from a predetermined angle and second image data obtained by photographing the teacher's face at an angle different from the first image data;
a student information acquisition unit that acquires student information about a student of interest to the teacher;
An online class system comprising: an image specifying unit that switches image data to be displayed on a display screen of a student terminal between the first image data and the second image data based on the student information.
撮影されている前記教師の顔の向きを前記第1映像データと前記第2映像データとの少なくともいずれか一方の映像データから判定し、
前記映像指定部は、前記顔の向きに応じて、生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データの中から指定する請求項1に記載のオンライン授業システム。
determining the orientation of the face of the teacher being photographed from at least one of the first image data and the second image data;
2. The online class according to claim 1, wherein the video specifying unit specifies video data to be displayed on a display screen of a student terminal from among the first video data and the second video data according to the direction of the face. system.
前記第1映像データは、前記教師の顔を正面に近い角度から撮影した映像データであり、
前記第2映像データは、前記第1映像データにおける前記教師の顔の角度に比べて、前記教師の顔を正面からずれた角度で撮影した映像データである請求項1に記載のオンライン授業システム。
The first image data is image data obtained by photographing the face of the teacher from an angle close to the front,
2. The online class system according to claim 1, wherein said second video data is video data obtained by photographing said teacher's face at an angle that is shifted from the front as compared with the angle of said teacher's face in said first video data.
前記第1映像データは、前記教師が操作している端末が備えるカメラによって撮影された映像データであり、
前記第2映像データは、前記教師が操作している端末に外部から入力された映像データである請求項1に記載のオンライン授業システム。
The first video data is video data captured by a camera included in a terminal operated by the teacher,
2. The online class system according to claim 1, wherein said second video data is video data externally input to a terminal operated by said teacher.
生徒の授業集中度を評価する集中度評価部を備え、
前記映像指定部は、前記生徒情報及び前記授業集中度に基づいて、前記生徒側端末の表示画面に表示させる前記映像データを指定する請求項1から4のいずれかに記載のオンライン授業システム。
Equipped with a concentration evaluation section that evaluates the student's concentration in class,
5. The online class system according to any one of claims 1 to 4, wherein the video specifying unit specifies the video data to be displayed on the display screen of the student terminal based on the student information and the class concentration level.
前記集中度評価部は、前記生徒の顔を撮影した映像データに基づいて前記授業集中度を評価する請求項5に記載のオンライン授業システム。 6. The online class system according to claim 5, wherein the concentration evaluation unit evaluates the class concentration based on video data of the student's face. 前記集中度評価部は、前記生徒側端末に対する生徒の入力操作の頻度に基づいて前記授業集中度を評価する請求項5又は6に記載のオンライン授業システム。 7. The online class system according to claim 5, wherein the concentration evaluation unit evaluates the class concentration based on the frequency of input operations performed by the students on the student terminals. 教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データとを取得する工程と、
前記教師が注目する生徒に関する生徒情報を取得する工程と、
前記生徒情報に基づいて、生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データの間で切り替える工程と
をコンピュータが実行するオンライン授業方法。
a step of obtaining first image data obtained by photographing a teacher's face from a predetermined angle and second image data obtained by photographing the teacher's face at an angle different from the first image data;
obtaining student information about a student of interest to the teacher;
and a step of switching video data to be displayed on a display screen of a student terminal between the first video data and the second video data based on the student information.
コンピュータを請求項1から7のいずれかに記載のオンライン授業システムとして機能させるためのプログラム。 A program for causing a computer to function as the online teaching system according to any one of claims 1 to 7. 教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データとを取得する映像取得部と、
前記教師が注目する生徒を特定する生徒特定部と、
前記第1映像データ、前記第2映像データ、及び特定された前記生徒に関する生徒情報を、前記生徒情報に基づいて生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データの間で切り替える外部の情報処理装置に送信する送信部と
を具備する情報処理装置。
an image acquisition unit for acquiring first image data obtained by photographing a teacher's face from a predetermined angle and second image data obtained by photographing the teacher's face at an angle different from the first image data;
a student identification unit that identifies a student to whom the teacher pays attention;
The first video data and the second video data for displaying the first video data, the second video data, and student information about the identified student on a display screen of a student-side terminal based on the student information. and a transmitting unit for transmitting to an external information processing device for switching between video data .
教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データとを取得する処理と、 A process of acquiring first image data obtained by photographing a teacher's face from a predetermined angle and second image data obtained by photographing the teacher's face at an angle different from the first image data;
前記教師が注目する生徒を特定する処理と、 a process of identifying a student of interest to the teacher;
前記第1映像データ、前記第2映像データ、及び特定された前記生徒に関する生徒情報を、前記生徒情報に基づいて生徒側端末の表示画面に表示させる映像データを前記第1映像データ及び前記第2映像データの間で切り替える外部の情報処理装置に送信する処理と The first video data and the second video data for displaying the first video data, the second video data, and student information about the identified student on a display screen of a student-side terminal based on the student information. processing to send to an external information processing device that switches between video data;
をコンピュータに実行させるためのプログラム。A program that causes a computer to run
教師の顔を所定の角度から撮影した第1映像データと、前記第1映像データとは異なる角度で前記教師の顔を撮影した第2映像データと、生徒の識別情報とを受信する受信部と、
受信した前記生徒の識別情報とログインされている生徒の識別情報とを照合し、照合結果に基づいて表示部に表示させる映像データを前記第1映像データ及び前記第2映像データから指定する映像指定部と
を具備する情報処理装置。
a receiving unit for receiving first image data obtained by photographing a teacher's face from a predetermined angle, second image data obtained by photographing the teacher's face at an angle different from the first image data, and student identification information; ,
video designation for comparing the received identification information of the student with the identification information of the logged-in student, and designating video data to be displayed on a display unit from the first video data and the second video data based on the verification result; An information processing device comprising:
生徒の授業集中度を評価する集中度評価部を備え、
前記映像指定部は、前記生徒の識別情報及び前記授業集中度に基づいて、前記表示部に表示させる前記映像データを指定する請求項12に記載の情報処理装置。
Equipped with a concentration evaluation section that evaluates the student's concentration in class,
13. The information processing apparatus according to claim 12, wherein the image designation unit designates the image data to be displayed on the display unit based on the student's identification information and the degree of concentration in class.
コンピュータを請求項12又は13に記載の情報処理装置として機能させるためのプログラム。 A program for causing a computer to function as the information processing apparatus according to claim 12 or 13.
JP2021004330A 2021-01-14 2021-01-14 Online class system, online class method and program Active JP7266622B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021004330A JP7266622B2 (en) 2021-01-14 2021-01-14 Online class system, online class method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021004330A JP7266622B2 (en) 2021-01-14 2021-01-14 Online class system, online class method and program

Publications (2)

Publication Number Publication Date
JP2022109025A JP2022109025A (en) 2022-07-27
JP7266622B2 true JP7266622B2 (en) 2023-04-28

Family

ID=82556856

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021004330A Active JP7266622B2 (en) 2021-01-14 2021-01-14 Online class system, online class method and program

Country Status (1)

Country Link
JP (1) JP7266622B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006060289A (en) 2004-08-17 2006-03-02 Oki Electric Ind Co Ltd Video image distributing system
JP2012114511A (en) 2010-11-19 2012-06-14 Konica Minolta Business Technologies Inc Conference system
JP2018060375A (en) 2016-10-05 2018-04-12 富士ゼロックス株式会社 Information processing system, information processing device and program
JP2019091312A (en) 2017-11-15 2019-06-13 株式会社アクティブブレインズ Lesson support device, lesson support method, and program
WO2020054855A1 (en) 2018-09-14 2020-03-19 日本電気株式会社 Class assistance system, determination device, class assistance method, and program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10123923A (en) * 1996-10-16 1998-05-15 Hitachi Ltd Remote type collective education support system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006060289A (en) 2004-08-17 2006-03-02 Oki Electric Ind Co Ltd Video image distributing system
JP2012114511A (en) 2010-11-19 2012-06-14 Konica Minolta Business Technologies Inc Conference system
JP2018060375A (en) 2016-10-05 2018-04-12 富士ゼロックス株式会社 Information processing system, information processing device and program
JP2019091312A (en) 2017-11-15 2019-06-13 株式会社アクティブブレインズ Lesson support device, lesson support method, and program
WO2020054855A1 (en) 2018-09-14 2020-03-19 日本電気株式会社 Class assistance system, determination device, class assistance method, and program

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Zoomオンラインレッスンをお手軽にワンランクアップする複数カメラ活用術,アントレプレナーズ・ジム,2020年05月05日,https://www.entre-gym.jp/report/remotework/multicam-onlinelesson/#no2,[検索日:2023年3月31日]
教師向け:バーチャル教室の安全性を確保し、生徒の学習エクスペリエンスを向上させる主な機能,zoom Blog[online],2020年08月20日,特に「マルチスポットライト」項を参照。,https://blog.zoom.us/ja/teachers-top-features-for-securing-virtual-classrooms-enhancing-student-learning-experiences/,[検索日:2023年3月31日]

Also Published As

Publication number Publication date
JP2022109025A (en) 2022-07-27

Similar Documents

Publication Publication Date Title
US20220101744A1 (en) System and method for validating honest test taking
US20190311187A1 (en) Computerized system and method for continuously authenticating a user's identity during an online session and providing online functionality based therefrom
US11650659B2 (en) User input processing with eye tracking
CN104137118B (en) The face recognition of enhancing in video
CN105359062B (en) Eye movement tracks data analysis system and method
WO2019033663A1 (en) Video teaching interaction method and apparatus, device, and storage medium
JP2014178358A (en) Learning support device, learning support method, learning support program, learning support system and server device, and terminal device
KR20170012979A (en) Electronic device and method for sharing image content
US11277358B2 (en) Chatbot enhanced augmented reality device guidance
KR20210059177A (en) Electronic apparatus and control method thereof
KR102202730B1 (en) Study management system based on learner behavior analysis
US20220208016A1 (en) Live lecture augmentation with an augmented reality overlay
CN116781847A (en) Blackboard writing guiding and broadcasting method, device, equipment and storage medium
JP2014094029A (en) Motion evaluation support device, motion evaluation support system, motion evaluation support method and program
KR20220032458A (en) Remote lecturing method and system
JP7266622B2 (en) Online class system, online class method and program
Robal Spontaneous webcam instance for user attention tracking
JP7069550B2 (en) Lecture video analyzer, lecture video analysis system, method and program
JP2020194144A (en) Information processor, control method, and program
WO2021105778A1 (en) System and method for determining participant behavior during a real time interactive event
KR20190070727A (en) Method for and management server implementing the same
Nuño-Maganda et al. Smartphone-Based Remote Monitoring Tool for e-Learning
JP7440889B2 (en) Learning support systems and programs
US20230298221A1 (en) Method and system for controlling access to virtual and real-world environments for head mounted device
KR102388735B1 (en) Method of detecting cheating for exams in meatverse environment based on image data processing

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221109

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221115

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230411

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230418

R150 Certificate of patent or registration of utility model

Ref document number: 7266622

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150