WO2004029905A1 - 遠隔教育システム、受講確認方法および受講確認プログラム - Google Patents

遠隔教育システム、受講確認方法および受講確認プログラム Download PDF

Info

Publication number
WO2004029905A1
WO2004029905A1 PCT/JP2003/012190 JP0312190W WO2004029905A1 WO 2004029905 A1 WO2004029905 A1 WO 2004029905A1 JP 0312190 W JP0312190 W JP 0312190W WO 2004029905 A1 WO2004029905 A1 WO 2004029905A1
Authority
WO
WIPO (PCT)
Prior art keywords
student
action
requesting
course
voice
Prior art date
Application number
PCT/JP2003/012190
Other languages
English (en)
French (fr)
Inventor
Nozomu Sahashi
Original Assignee
Ginganet Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ginganet Corporation filed Critical Ginganet Corporation
Priority to US10/528,641 priority Critical patent/US20060057550A1/en
Priority to EP03798474A priority patent/EP1544831A1/en
Priority to AU2003266591A priority patent/AU2003266591B2/en
Priority to JP2004539511A priority patent/JP3930022B2/ja
Priority to CA002500998A priority patent/CA2500998A1/en
Publication of WO2004029905A1 publication Critical patent/WO2004029905A1/ja

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00Electrically-operated teaching apparatus or devices working with questions and answers

Definitions

  • the present invention relates to a remote education system for performing remote education using two-way communication by multimedia including video and audio, and more particularly to a remote education system having an attendance confirmation function for confirming that a regular student is attending.
  • Education system, attendance confirmation method and attendance confirmation program field
  • distance learning systems will be recognized as formal education means, and in order for distance education to allow formal credits and qualifications to be recognized, it is necessary to accurately confirm the attendance of students. Is required.
  • distance learning there are cases where one instructor handles a large number of students, and in which a student attends a programmed unmanned course on a voluntary basis.
  • a confirmation method is required.
  • an audiovisual authentication system described in, for example, WO 0-59226.
  • the program provider presents a unique viewing confirmation code to the viewer with a unique evening timing, and the viewing confirmation code input by the viewer from the audiovisual terminal together with the input time is sent to the audiovisual authentication system.
  • Communication and audiovisual authentication system The program determines that the viewer has actually viewed the program from the transmitted viewing confirmation code and the input time.
  • a password authentication method in which the student inputs a pre-registered password, the student is asked to register personal information in advance.
  • Question confirmation method for personal information to confirm questions Image matching method for acquiring images of students' faces, etc. and matching them with images of students' faces, etc. registered in advance, Acquiring students' voices and registering in advance A voice collation method that collates with the trainee's voice is considered.
  • a regular student can teach a third party the password and personal information in advance, so that the third party can take the course on behalf of the third party.
  • a student who has received a course confirmation request transmits a video of a regular student recorded in advance and a voice of a regular student recorded in advance from a terminal. It is possible for a third party to take the course.
  • a main object of the present invention is to provide a distance learning system that can prevent a third party from taking a substitute course using a recorded video or the like in distance learning and confirm that a regular student is taking a course. It is. Disclosure of the invention
  • a distance education system wherein in a distance education system that remotely performs education by means of multi-media interactive communication including video and audio, a student image acquisition means for acquiring a student image, Facial image collation means for collating the video acquired by the video acquisition means with the pre-registered student's face image, action request means for requesting the student for action, and acquisition by the student video acquisition means It has an action detecting means for detecting the student's action based on the change in the image of the trainee's image that has been selected, and has a function of confirming that the regular student has taken the course.
  • the student image transmitted from the student terminal is acquired by the student image acquiring means, and the student image acquired by the face image collating means is collated with the previously registered student face image. You can confirm that the acquired video is a video of a regular student. Also, an action is requested by the action request means to the student, and the action detection means detects that the student has taken an action based on the image change of the acquired student's image. If a third party takes the role of a substitute student using pre-recorded video, etc., the image change corresponding to the action request does not occur. Can be confirmed.
  • the action requested by the student by the action request means is as follows. Anything that causes an image change in the acquired video may be used. For example, the face may be moved, the eyes may be closed, the mouth may be moved, or the hand may be raised.
  • a distance learning system is the distance learning system according to claim 1, wherein the action requesting means includes a function of requesting a movement of a face position, and the action detecting means includes a function of the student. It includes a function to detect that the position of the face has moved.
  • the action requesting means requests the student to move the face position, and the action detecting means detects that the student has moved the face position based on the image change of the acquired video. If the trainee uses a prerecorded video, etc., to take a third person as a substitute, the position of the face does not change as instructed. You can confirm that you are doing.
  • the distance education system is the distance education system according to claim 1 or claim 2, wherein the action requesting means includes a function of requesting a question from a student and requesting a voice response, and The detecting means includes a function of acquiring the student's voice, a function of recognizing the voice response from the acquired voice, a function of determining the validity of the student's voice answer from the recognized voice answer, and a function of the student's voice. And a function for detecting the movement of the student's mouth accompanying the voice response.
  • the action requesting means Requesting the student to make a question and answering the voice by the action requesting means, acquiring the student's voice by the action detecting means, recognizing the voice answer, determining the validity of the student's voice answer, and However, since the movement of the learner's mouth accompanying the voice response is detected based on the change in the image of the acquired video, the learner who is determined to be a legitimate learner by the face image matching means makes a voice response to the question. Confirmed that regular students have taken the course Can be confirmed.
  • a distance education system is the distance education system according to claim 3, wherein the action detection means includes a function of comparing a student's voice response with a pre-registered student's voice. .
  • the student's voice response is compared with the pre-registered student's voice by the function detection means, the student must not only match the face image but also the voice, and the regular student must have attended. Can be confirmed more accurately.
  • the distance learning system is the distance learning system according to claim 3 or claim 4, wherein the action requesting means has a function of asking a student about a time and requesting a voice response.
  • the action detection means includes a function to determine the validity of the time when the student answered. A question about the time is given to the student by the action requesting means, the validity of the time answered by the student by the action detecting means is determined, and the movement of the student's mouth accompanying the voice response is obtained from the acquired video. Since the change is detected based on image changes, if a regular student uses a pre-recorded video, etc., to take a third party on his / her behalf, it is not possible to give a voice response at the requested time. You can see through and confirm that regular students have taken the course.
  • a question about time may require that the current time be spoken, and the validity of the student's voice response is based on the time obtained by speech recognition of the student's voice response.
  • the distance learning system according to claim 6 is the distance learning system according to any one of claims 3 to 5, wherein the action requesting means is related to the personal information of the student. Includes the ability to ask questions and request voice answers,
  • the action detection means includes a function of comparing the personal information answered by the student with the personal information of the student registered in advance.
  • the student asks a question regarding the student's personal information by the action requesting means, and the action detecting means checks the personal information answered by the student with the personal information of the student who has been registered in advance, and outputs the voice. Since the movement of the student's mouth due to the answer is detected based on the change in the image of the acquired video, a request is made if a regular student uses a pre-recorded video, etc., to take a third person on his / her behalf. Since it is not possible to give a voice response regarding the personal information of the trainee who was given, it is possible to find out that the student is taking the course on behalf of the student, and to confirm that the regular trainee is taking the course.
  • a distance education system is the distance education system according to any one of claims 1 to 6, wherein the action detection means does not discontinuously change the position of the face image of the student. It has a function to determine
  • the distance learning system is the distance learning system according to any one of claims 1 to 7, wherein the action detecting means requests the student to perform the action by the action requesting means. It has a function to determine that there has been an image change within a specified time after Thereby, if there is no predetermined image change within a predetermined time after requesting the action, it can be determined that a regular student has not attended. Also, even if the terminal can generate a video or the like corresponding to the action request, it is possible to prevent a student from taking the time to prepare such a video or the like on behalf of a legitimate student. It is possible to confirm with higher accuracy that the student has taken the course.
  • a distance education system is the distance education system according to any one of claims 1 to 8, wherein the action request means requests the student to perform the action at an unpredictable timing. It has the function to perform.
  • a distance education system is the distance education system according to any one of claims 1 to 9, wherein the action request means requests an action to the student according to a command from the instructor. It has the function to perform.
  • the method for confirming attendance described in claim 11 is a method for confirming that a regular student is taking a course in distance learning, and includes the steps of acquiring an image of the student and registering the acquired image in advance. Collating with the learned student's face image, requesting the student to take action, and detecting the student's action based on a change in the image of the acquired video. And a top.
  • the image of the student transmitted from the student terminal is acquired, and the image of the student acquired in the step of matching with the face image of the student registered in advance is registered in advance. Since the image is compared with the face image of the trainee, it is possible to confirm that the acquired video is a video of the legitimate trainee.
  • the action is requested from the student in the step of requesting the action, and the action is detected by the step of detecting the action based on the change in the image of the acquired student's image. If a legitimate student uses a prerecorded video, etc., to take the role of a third party on his / her behalf, no image change corresponding to the action request occurs. You can confirm that you are attending.
  • the action requested by the student in the step of requesting the action may be any action that causes an image change in the acquired video, such as moving the face, closing the eyes, and closing the mouth. You may move your hands or raise your hands.
  • the method for confirming attendance described in claim 12 is the method for confirming attendance described in claim 11, wherein the step of requesting an action includes the step of requesting movement of a face position, and detecting the action. The step includes a step of detecting that the position of the student's face has moved.
  • the student In the step of requesting the action, the student is requested to move the face position, and in the step of detecting the action, the fact that the student has moved the face position is detected based on a change in the image of the acquired video. Therefore, if a regular student uses a pre-recorded video, etc., to take the role of a third party on his / her behalf, the face position does not change as instructed. You can confirm that you are attending.
  • the course confirmation method described in claim 13 is the course confirmation method described in claim 11 or claim 12, wherein the step of requesting an action is a step of requesting a question from the student and requesting a voice response.
  • the steps of detecting an action include a step of acquiring a student's voice, a step of recognizing a voice answer from the acquired voice, and determining the validity of the student's voice answer from the recognized voice answer. It includes a step and a step of detecting the movement of the student's mouth associated with the student's voice response.
  • the student In the step of requesting the action, the student is asked to ask a question and give a voice response, and in the step of detecting the action, the voice of the student is obtained, the voice response is recognized, and the validity of the voice response of the student is recognized.
  • the movement of the student's mouth accompanying the voice response is detected by changing the image of the acquired video. It is confirmed that the student who has been determined to be the student has answered the question by voice, and it can be confirmed that the regular student has taken the course.
  • the attendance confirmation method described in claim 14 is the attendance confirmation method described in claim 13, wherein the step of detecting an action includes the voice response of the student registered in advance and the voice response of the student. It includes steps for collation. In the step of detecting the action, the student's voice response is compared with the pre-registered student's voice, so that the student performs not only face image matching but also voice matching. Can be confirmed more accurately.
  • the method for confirming attendance described in claim 15 is the method for confirming attendance described in claim 13 or claim 14, wherein the step of requesting an action involves asking the student a time-related question and requesting a voice response.
  • the step of detecting the action determines the validity of the time the student answered. It includes steps.
  • the student In the step of requesting the action, the student is asked a question about the time, and in the step of detecting the action, the validity of the time answered by the student is determined, and the movement of the mouth of the student accompanying the voice response is acquired. Since the detection is made based on the change in the image of the received video, if the legitimate student uses a pre-recorded video, etc., to take the role of a third party on behalf of the student, it will not be possible to answer the requested time. It is possible to find out on behalf of the student on behalf of the student, and confirm that the regular student is taking the course.
  • a question about time may require that the current time be spoken, and the validity of the student's voice response is based on the time obtained by speech recognition of the student's voice response.
  • the course confirmation method described in claim 16 is the course confirmation method described in any one of claims 13 to 15, and the step for requesting an action is Including the step of asking a question about the student's personal information and requesting a voice response, the step of detecting the action includes the step of checking the student's answered personal information with the student's personal information registered in advance. is there.
  • the student is asked questions regarding the student's personal information, and at the step of detecting the action, the personal information answered by the student is compared with the personal information of the student registered in advance. Since the movement of the student's mouth accompanying the voice response is detected based on the change in the image of the acquired video, a request is made if an authorized student uses a pre-recorded video, etc., to take a third party on behalf of the student. Since it is not possible to give a voice response regarding the personal information of the trainee, it is possible to find out that the student is taking the course on behalf of the student and confirm that the legitimate trainee is taking the course.
  • the attendance confirmation method according to claim 17 is the attendance confirmation method according to any one of claims 11 to 16, wherein the step of detecting the action is performed when the position of the face image of the student is incorrect. It includes a step of determining that the change does not occur continuously.
  • the method for confirming attendance described in claim 18 is the method for confirming attendance described in any one of claims 11 to 17, wherein the step of detecting the action is performed by the student by the step of requesting the action. It has a step of determining that there has been an image change within a specified time after requesting the function.
  • the course confirmation method described in claim 19 is the course confirmation method described in any one of claims 11 to 18, wherein the step of requesting an action is performed to the student at an unpredictable timing. Requesting action It is.
  • the course confirmation method described in claim 20 is the course confirmation method described in any one of claims 11 to 19, and the step of requesting the action is performed by the instruction from the instructor to the student. It requires action.
  • the attendance confirmation program described in claim 21 is a program for causing a computer to execute the attendance confirmation method according to any one of claims 11 to 20 on a computer.
  • FIG. 1 is a system configuration diagram of a distance education system according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a result of the distance learning system according to the embodiment of the present invention. It is a figure showing an example of a screen displayed on a lecturer terminal.
  • FIG. 3 is a processing flow diagram (part 1) of a course confirmation program of the distance learning system according to the embodiment of the present invention.
  • FIG. 4 is a processing flow diagram (part 2) of a course confirmation program of the distance education system according to the embodiment of the present invention.
  • FIG. 5 is a process flow diagram (part 3) of a course confirmation program of the distance learning system according to the embodiment of the present invention.
  • FIG. 1 shows a system configuration diagram of a distance education system according to an embodiment of the present invention.
  • reference numeral 1 denotes a distance education system, which is a web server 10, a two-way communication server 20, a content distribution server 30, an operation management system 40, and a lecturer terminal 6 used by the lecturer.
  • 0 and the communication line connection device 70 are connected via a network, and the student terminals 101, 102,... used by the students via the communication line 2 when providing the distance learning service. Is connected to
  • the Web server 10 is a WWW server serving as a point of contact when using the present system.
  • a predetermined Web browser is used from the instructor terminal 60 or the student terminals 101, 102,... Using a Web browser. By accessing the page, you can set up and proceed with courses and take courses.
  • the two-way communication server 20 includes a connection destination table for registering a terminal address of a terminal to be connected.
  • the two-way communication server 20 connects terminals registered in the connection destination table to perform two-way communication using multimedia information including video and audio. Provides functions. While the course is open, the connection destination table registers the instructor terminal 60 and the terminal addresses of the student terminals 101, 102,... used by the students who attend the course. Video and audio sent from The video and audio transmitted from the terminals 101, 102, ... are received, and the received video and audio are synthesized and transmitted to the instructor terminal 60 and each of the student terminals 101, 102, ... Send.
  • the content distribution server 30 has a teaching material database 32 storing multimedia teaching materials such as moving images, still images, audio, text, sound effects, etc., and designates the terminals registered in the distribution destination table. Provide a function to distribute the content. While the course is open, the terminal addresses of the lecturer terminal 60 and the student terminals 101, 102,... used by the students attending the course are registered in the distribution destination table. The specified teaching material content is distributed to each terminal.
  • the operation management system 40 is a system for managing the operation of distance education.
  • the operation management system 40 includes a course information database 50 storing various data related to courses to be provided, and a course setting process 41 for setting courses. Performs course opening processing to open the set courses 4 2, course reception processing to accept courses that have been opened 4 3, course confirmation processing to confirm the attendance of students who are opening courses 4 4 .
  • the instructor terminal 60 includes a TV camera (a) for acquiring the instructor's video, a headset (b) for inputting and outputting the instructor's audio, a monitor screen (c) for displaying the image, and commands and messages. It consists of a keypad (d) for input, a mouse (e), a video input interface, an audio input / output interface, and a computer ( f) equipped with a network connection device.
  • the computer acquires the video and audio of the instructor and sends it to the two-way communication server 20.
  • the video and audio transmitted from the two-way communication server 20 are output to the monitor screen and the headset.
  • a web browser for accessing the web server 10 is installed.
  • the communication line 2 can be applied to any communication line such as a wired computer network, a wireless convenience network, a telephone line, a satellite line, the Internet, etc. To explain. Therefore, the communication line connection device 70 uses an Internet router for connecting to the Internet.
  • the student terminals 101, 102,..., like the instructor terminal 60 are a TV camera (a) that acquires the student's video and a headset that inputs and outputs the student's audio.
  • (B) monitor screen (c) for displaying images
  • keyboard (d) for inputting commands and messages
  • mouse (e) video input interface
  • audio input / output interface interface
  • It is composed of a computer ( ⁇ ) equipped with a one-net connection device (for example, TA, etc.), acquires the video and audio of the student, transmits it to the two-way communication server 20, and sends it to the two-way communication server 20.
  • a one-net connection device for example, TA, etc.
  • a video / audio communication program that outputs transmitted video and audio to the monitor screen and headset, and an image and audio that is distributed from the content distribution server 30 to the monitor screen and headset.
  • the secretariat implementing distance learning accesses the secretariat page of the web server 10 from the instructor terminal 60 or a dedicated secretariat terminal (not shown) to correspond to the annual education plan. Determine and enter the course to be opened based on the instructor's schedule. This will provide a course for the operation management system 40 Through the regular processing 41, a course schedule database 51 is constructed in the course information database 50, an attendance book is generated for each course, and registered in the attendance book database 52.
  • the secretariat recruits students and issues IDs and passwords for accessing the Web server 10 to each student who meets certain training standards.
  • Each student who has been issued an ID and password accesses the student's page on the web server 10 from each student's terminal to register the student's personal information and collate the face image at the time of attendance confirmation.
  • the registration of the face image to be used and the registration of the voice to be used for the verification of the voice response to the question regarding the personal information at the time of attendance confirmation are performed.
  • the registration of personal information is performed by the attendance registration process 42 of the operation management system 40, and the name, age, gender, date of birth, address, telephone number, e-mail address, etc. Is registered in the personal information database 53 of the course information database 50 together with the student ID and password and the terminal address of each student terminal. In addition, for the course that the student wants to attend, it is judged whether or not the course can be taken with reference to the course schedule database 51.If attendance is possible, the attendance book of the course in the attendance database 52 The student is registered at
  • the face image is registered by setting the terminal address of the student terminal and the address of the operation management system in the connection destination table of the two-way communication server 20 by the course registration processing 42 of the operation management system 40, and When the user clicks on the face image registration button (not shown) provided on the web page, the image is recorded as a still image and registered in the face image database 54 of the course information database 50.
  • the voice registration is also performed by the attendance registration process 42 of the operation management system 40, and the terminal of the student terminal is connected to the connection destination table of the two-way communication server 20.
  • the address and the address of the operation management system are set, and the student's voice is acquired when the student clicks the voice registration button (not shown) for each personal information item provided on the web page, and the course information is acquired. It is registered for each personal information item in the voice database 55 of the database 50.
  • the students of the course can access the two-way communication server 20 by accessing the attendance acceptance page from the student terminals 101, 102,... and checking in with the specified ID and password.
  • the terminal address of the student terminal is set in the distribution destination table of the table and the content distribution server 30.
  • the instructor of the course can access the instructor reception page of the Web server from the instructor terminal 60 to display the connection destination table of the bidirectional communication server 20 and the distribution destination table of the content distribution server 30.
  • the terminal address of the instructor terminal 60 is set.
  • the attendance confirmation process 44 of the operation management system 40 confirms the attendance described below, and if the student is confirmed to be a legitimate student, the attendance time is recorded in the attendance record Is done.
  • the lecture starts in this manner, and the lecturer gives a lecture from the lecturer terminal 60, so that the video and audio of the lecturer are distributed to each student terminal.
  • the instructor can control the content distribution server 30 from the instructor terminal 60 via the web server 10 and search and play the necessary teaching materials from the teaching material database 32 to play The learning materials are distributed to the students.
  • Figure 2 shows an example of the screen displayed on the monitor screen of the student terminals 101, 102, ... during the lecture.
  • A is transmitted from the instructor terminal 60 B is a lecturer screen that displays the video of the lecturer.
  • B is a student screen that combines and displays the video of each student transmitted from each student terminal 101, 102,... with the name of each student. It is.
  • the name of the student is displayed on the student screen B in a case where the instructor designates a specific student and requests a comment or an answer.
  • a content screen C is a content screen distributed from the content distribution server 30, and a content screen C can display a pointer by operating the instructor terminal 60.
  • a content screen C can display a pointer by operating the instructor terminal 60.
  • D is an input screen that accepts input when the student speaks, answers questions asked by the instructor, or leaves or exits the course.E is input from the instructor terminal or the operation management system. It is a message screen that displays a message for each student. A message to each student when confirming the attendance of the student by the attendance confirmation process 4 4 is displayed on this message screen E.
  • the monitor screen of the instructor terminal 60 is displayed in the same way as the monitor screen of the student terminal described above.
  • the command input screen D is used to search for content distributed by the content distribution server 30 and control playback.
  • Button ⁇ A control button for a boyfriend to be displayed in the content screen C is provided.
  • Each student can ask a question or make a comment to the instructor by pressing the comment button during the course.
  • the relevant student on the student screen B is displayed as a flicker display, and the instructor clicks the display from the instructor terminal to accept the comment.
  • the video of the student is enlarged and synthesized and distributed to the lecturer terminal and each student terminal, and the voice of the student is distributed to the lecturer terminal and other student terminals.
  • the trainee can talk to the instructor by video and audio, and the content of the talk is transmitted to other trainees.
  • Instructors can also set questions during the course and have all or specific students answer.
  • the trainee specified by the instructor selects the selection button or enters a message in the message box and clicks the answer button, the content is transmitted to the operation management system 40 via the web server 10.
  • the count result is displayed on the instructor terminal 60.
  • the instructor can disclose the tally result to each student as necessary, and the tally result is distributed to each student terminal via the content distribution server 30 by a command from the instructor terminal 60.
  • the attendance confirmation process 44 of the operation management system 40 confirms the attendance described later at any time, and confirms that the regular students have taken the course.
  • the image of the student on the student screen B becomes a center mark, and the center time is recorded in the attendance book.
  • the center mark of the student on the student screen B returns to the normal display, and the return time is recorded in the attendance book.
  • the exit time of the attendance book is recorded, and the terminal address of the student is deleted from the connection destination table and the distribution destination table, and the attendance ends.
  • the instructor can accurately grasp the seating status of each student, and the attendance time, leaving time, middle time, and return time are automatically recorded in the attendance book, so that the actual attending time of the course can be grasped.
  • the attendance confirmation process 4 4 allows each attendee to confirm the attendance at any time. It is expected that each participant will be able to properly manage the seating time during the course to avoid being absent.
  • the two-way communication server 20 starts a common application between the instructor terminal and each student terminal, and exchanges operation information performed on each terminal with each other to share the application with everyone. It has an abbreviated sharing function.
  • a common white point for drawing characters and figures is displayed on the screen of each terminal, and instructors and students can proceed with the discussion while freely writing characters and figures. It is also possible to conduct a lecture in the form of a mi.
  • chat screen is displayed on each terminal, and a function is provided for instructing and discussing texts between the instructor and each student.
  • each student receives the distribution of multimedia teaching materials by the content distribution server 30 while receiving the video and audio of the instructor by the two-way communication server 20.
  • Instructors can set questions for students and request answers as needed, and can accept questions and remarks from students and have video and audio conversations with the two-way communication server 20 Therefore, even if the students are in remote locations, the same educational effect as if they were receiving the lessons in the lecture room using the same teaching materials can be obtained.
  • the student screen B is described as displaying the name of each student. However, the student screen B displays only the image or icon of the student, and is separately provided to the instructor. To provide the attendance sheet corresponding to the display May be.
  • the secretariat prepares lecture videos in advance and registers them in the teaching material database 32 of the content distribution server 30, and sets the lecture videos to be used in the lecture schedule database 51.
  • the lecture is automatically started by designating the lecture video to be delivered by the content delivery server 30 when the course setting date and time comes. Questions are set in the lecture videos as appropriate, and students' answers to them are automatically tabulated and recorded. Also, if there are any questions to the trainees, they will be sent to the secretariat by e-mail to be informed of the lecturer in charge and will be answered later.
  • the attendance confirmation process 4 4 consists of the student image acquisition process 4 5 for acquiring the image of each student transmitted from each student terminal, and the acquired image of each student in the face image database 5 4 Face image collation processing for collating with the student's face image 4 6 and action request processing 4 for requesting each student who has cleared the face image collation a function with a change in the image transmitted from each student terminal 4 7 and an action detection process 48 for detecting a change in the image transmitted from each student terminal in response to the requested action.
  • each student is asked to move his / her face position as instructed, to give a voice response to the current time, and to give a voice response to a question regarding the student's personal information. And three types of actions are required.
  • Figures 3 to 5 show the processing flow of the attendance confirmation processing 44.
  • the attendance confirmation request is issued.
  • the terminal 60 is notified (SI02), and when the instructor receives the request for confirmation of attendance, the attendance is confirmed (S104).
  • the attendance confirmation time is selected at the start of the course and at random times during the course. By performing the course confirmation at a random time during the course opening, the student cannot predict when the course confirmation will be performed, and an incentive is provided for the student to take the course continuously over the entire course time. However, if the instructor checks the course during the course, the course will be hindered, so the instructor will be notified of the request, and the instructor will stop the course and accept the request. Clicking to confirm the attendance.
  • the attendance book of the relevant course is obtained from the attendance book data base 52 (S106), and the terminal address of the student terminal of each student registered in the attendance book is entered into the bidirectional communication server 2.
  • the video and audio of the student are obtained (S108).
  • the student terminal is notified of the confirmation of the face image (S110). For example, a message such as "I will confirm the attendance from now on. Please show your face on the camera in the same state as when registering for attendance" is displayed on the message screen.
  • a message such as "Click here when ready” may be added, and the Web server 10 may detect that "Click here" is clicked, and proceed to the next step.
  • the student's face image data is acquired from the face image database 53 (S112), and a still image cut out from the video of the student being acquired is combined with the student's face image data.
  • Image collation is performed (S114). Image collation is performed on the image of the student who is acquiring the student's face image data as a template. And perform the direct matching process to find the point with the highest degree of matching.
  • the image size was normalized by performing a feature extraction operation on the still image clipped from the video of the student being acquired to obtain the features such as the outline and the position and shape of the eyes, nose, mouth, etc.
  • the matching process may be performed on the above, and the face image data of the student may be compared with the result of the feature extraction calculation.
  • the process proceeds to the next step (S116). If the predetermined degree of coincidence is not obtained, a confirmation message is sent to the student terminal (S11). 1 8) If there is a response, return to S 110 and repeat the face image confirmation request (S 120) .If there is no response, go to S 406 and exclude the student from the attendance list. I do.
  • the movement of the face is confirmed.
  • the initial position of the student's face is detected from the extracted still image (S122).
  • the position of the face is obtained as the point having the highest matching degree in the matching processing in the above-described image matching.
  • the student terminal is notified of the face movement request (S124). For example, a message such as “Please move the face position to the right by about 10 cm” is displayed on the message screen.
  • the direction in which the face is moved and the moving distance are changed at random as appropriate. This makes it difficult for the user to confirm the image using the video image prepared in advance, and can prevent a third party from taking the class on behalf of the third person.
  • the face position of the student is continuously detected by the above-described image matching method (S126), and the face corresponding to the message described above is detected.
  • the process proceeds to the next step (S128). If no change in the face position is detected within the predetermined time (S130), a confirmation message is sent to the student terminal (S132), and if there is a response, the process returns to S120. And repeat the face movement request (S1334), no response If it is, go to S406 to absent the student in the attendance book.
  • the voice response of the time is confirmed.
  • the voice response request of the time is notified to the student terminal (S20.0). For example, a message such as "Please answer the current time displayed on the instructor screen by voice" is displayed on the message screen.
  • the student's voice response is detected from the signal level of the student's voice being acquired, and if a series of voice responses is detected (S202), the video and audio in the voice response are acquired. (S204). If a predetermined time has elapsed before a series of voice answers is detected (S 20).
  • voice recognition is performed for the voice in the obtained voice response (S212). Since the target of speech recognition here is limited to time, matching processing is performed in syllable units using a time-based speech dictionary. Since the number of words to be identified is limited, it is thought that it is possible to recognize by unspecified speaker speech recognition using a speech dictionary corresponding to the unspecified speaker. May be used as a voice dictionary to perform specific speaker voice recognition.
  • the current time displayed on the instructor screen is obtained (S2114). If the time of the voice response recognized by the voice is within a predetermined range (S216), the obtained voice response is obtained.
  • the movement of the mouth is detected for the image in the middle (S218). Mouth movement detection is performed by obtaining the mouth shape parameters by the above-described feature extraction calculation for the frame corresponding to each syllable recognized in the video in the acquired voice response, and converting the syllable from each syllable recognized.
  • the table is registered with the relationship between the shape of the mouth and the shape parameters of the mouth, and is compared with the shape parameters of the mouth.
  • the judgment of the movement of the mouth is It is not necessary to determine exact match because the purpose is to find out that the video of the student whose face image has been collated is recorded data or that the audio response at the time is recorded data.
  • a simple method for detecting that a change has occurred in the shape of the student's mouth in accordance with the period in which the is detected may be used.
  • the voice of the time is registered in advance by the student and the specific speaker word voice recognition is performed, the video of the student corresponding to the time when the voice of the time is registered by the student is simultaneously recorded. The determination may be made by directly comparing the video of the student acquired for each syllable whose voice has been recognized with the recorded video of the student.
  • the parameters of the mouth shape are obtained and recorded from the trainee's image, and the trainee's image obtained for each syllable recognized by speech is recorded.
  • the determined mouth shape parameters may be compared with the recorded mouth shape parameters.
  • the process proceeds to the next step (S220). If the voice response time is incorrect in S216 or it is determined in S220 that the video does not correspond to the voice response, go to S208 and send a confirmation message to the student terminal. If there is a response after notifying, repeat from S200.
  • the description has been given assuming that the time of the voice response is recognized by voice and compared with the current time.However, syllable data corresponding to the current time is sequentially extracted from the voice dictionary and acquired. It may be compared with the voice in the voice response of the lecturer in order, and if the entire voice response of the student has a predetermined degree of coincidence, the voice response time may be determined to be correct.
  • a question item of personal information is selected, and a voice response request for the question item of the personal information is notified to the student terminal (S300). This is, for example, "Your Please answer the date of birth by voice "on the message screen. It is preferable that the question items regarding the personal information are also randomly selected so that the student cannot predict.
  • a voice response is detected from the signal level of the student's voice being acquired, and when a series of voice responses is detected (S302), the video and audio during the voice response are acquired (S302). 304).
  • a voice data corresponding to the question item of the student's personal information is obtained from the voice data 55 (S312), and the voice data is obtained as a template.
  • a matching process is performed with the voice in the answer (S314).
  • the mouth movement is detected for the video in the acquired voice response (S318).
  • the mouth movement is detected by calculating the mouth shape parameters for each frame of the video in the acquired voice response by the above-described feature extraction calculation, and this is registered in the personal information database 53. It is obtained by subtracting a table that stores the relationship between characters and mouth shape parameters from the character data of the participant's personal information. .
  • the mouth movement is determined by confirming that the image of the student whose face image has been collated is recorded data or that the voice response at the time is recorded data. It is not necessary to determine an exact match because the purpose is to find out.Since it is easy to detect a change in the shape of the student's mouth corresponding to the period during which the voice response is detected, for example,
  • the video of the student can be recorded at the same time as the personal information voice registration, and the video in the acquired voice response can be directly compared with the recorded video of the student. Alternatively, the determination may be made.
  • the mouth shape parameters are obtained and recorded in chronological order from the student's video, and the mouth shape parameters obtained for the video in the acquired voice response are recorded.
  • the determination may be made by comparing the evening with the recorded mouth shape parameter overnight.
  • step S320 if it is determined that the movement of the student's mouth corresponds to the voice response, the process proceeds to the next step (S320). If it is determined in step S310 that the personal information of the voice response is incorrect or that the video does not correspond to the voice response in step S320, the process proceeds to step S308 to send a confirmation message to the student terminal. Message, and if there is a response, repeat from S300.
  • the completion of the attendance confirmation is notified to the student terminal (S400), and the two-way communication server 20 is notified to transmit the video and audio of the student.
  • the acquisition ends ends (S402).
  • a face movement or a voice response is requested as an action required of the student.
  • the present invention is not limited to this. Such as closing your hand, raising your hand, shooting an article of a specific shape on a camera, or shooting a piece of paper with a specified shape on a camera. Any function may be required as long as the effect is obtained, and the effects of the present invention are exhibited.
  • actions such as confirmation of movement of the face, confirmation of the voice response of the time, and confirmation of the voice response of the personal information are requested, and the image change at that time corresponds to the request.
  • the position of the student's face was continuously detected from the acquired image of the student, A function for confirming that the position of the face has not changed discontinuously may be provided.
  • the position of the student's face changes discontinuously. It is possible to detect that the student is attending the course, and it is possible to more accurately confirm that the regular student is attending the course.
  • satellite venues may be set up in various places, large-screen display devices and venue speeds may be provided there, and the students gathered here may be treated as one group attendee.
  • the distance education system is provided with the content distribution server, and the teaching material used for the course is distributed to each student terminal by the content distribution server.
  • the present invention is not limited to this.
  • the instructor terminal has an external video and audio input terminal, Connect a DVD, etc., synthesize or switch the video and audio of the teaching material software reproduced by the instructor with the instructor's video and audio, send it to the two-way communication server, and distribute it to each student terminal by the two-way communication server. Is also good.
  • the instructor terminal was described as being connected to the network in the distance learning system.
  • the present invention is not limited to this, and the instructor terminal is also connected via the in-network. It may be connected to a distance learning system. This allows lecturers to open lectures from anywhere as long as they have a lecturer terminal that can connect to the Internet, and it is also possible to request lecturers from foreign residents. It also contributes to a reduction in labor costs.
  • the distance education system is provided with a Web server, and the student terminal is described as performing the attendance procedure by accessing the Web server using a computer having a Web browser function.
  • the system is not limited to this.
  • a normal videophone is used as the student terminal, and the messages transmitted from the operation management system to the student terminals are generated by synthesizing the generated message images with the two-way communication server.
  • This can be handled by providing a function to send data to the student terminal, and commands and messages can be input from the student terminal to the operation management system by using the dial button on the student terminal.
  • This can be handled by providing a two-way communication server with a function to detect PB tone signals.
  • the student terminal can be connected to a public telephone line, such as an ISDN video telephone terminal conforming to H.320 of the ITU-T recommendation, or a HTV of the ITU-T recommendation. It is possible to use an IP type videophone terminal line connected to the Internet, such as an IP (Internet Protocol) videophone terminal conforming to 3.23.
  • the two-way communication server must be equipped with a video codec and a voice codec that are compatible with the student terminal standards. Student terminals can be mixed.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Tourism & Hospitality (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

 遠隔教育において録画映像等を用いた第3者による身代わり受講を防止して、正規の受講者が受講していることを確認できる遠隔教育システムを提供する。遠隔教育システム(1)はWebサーバ(10)と双方向通信サーバ(20)とコンテンツ配信サーバ(30)と運営管理システム(40)と講師端末(60)と通信回線接続装置(70)とから構成され、インターネット(2)を介して受講者端末(101、102、…)に対して遠隔教育が提供される。運営管理システム(40)は講座スケジュールと出席簿と受講者の個人情報・顔画像・音声等が登録された講座情報データベース(50)を備え、講座設定処理(41)と受講登録処理(42)と講座開設処理(43)と受講確認処理(44)等を行う。受講確認処理(44)は受講者画像取得処理(45)と顔画像照合処理(46)とアクション要求処理(47)とアクション検出処理(48)とから構成され、受講者の顔画像の照合と要求したアクションに対する画像変化を検出する。

Description

遠隔教育システム、 受講確認方法および受講確認プログラム 技術分野
本願発明は、 映像及び音声を含むマルチメディァによる双方向通信を 用いて遠隔で教育を行う遠隔教育システムに関し、 特に正規の受講者が 受講していることを確認する受明講確認機能を有する遠隔教育システム、 受講確認方法および受講確認プログ田ラムに関する。 背景技術
近年、 通信技術の発達により、 映像および音声を含むマルチメディア による双方向通信を用いて、 受講者が遠隔地から通信回線を介して教育 を受けることのできる遠隔教育システムの実用化が始まっている。
このような遠隔教育システムは、 今後正規の教育手段として認められ る方向にあり、 遠隔教育によって正規の単位取得や資格の認定を認めて いくためには、 受講者の受講確認を的確に行うことが要求される。 特に 、 遠隔教育においては、 1人の講師によって多数の受講者に対応する場 合や、 プログラム化された無人講座を受講者が自主的に受講する場合が あり、 人手に頼らない受講者の受講確認方法が必要になると考えられる 従来、 受講者の受講を確認する方法として、 例えば再公表公報 W O O 0 - 5 9 2 2 6号に記載された視聴覚認証システムがあった。 これは、 番組提供者が固有の視聴確認コードを固有の夕イミングで視聴者に対し て提示し、 これに対して視聴者が視聴覚端末から入力した視聴確認コー ドを入力時刻とともに視聴覚認証システムに伝達し、 視聴覚認証システ ムは伝達された視聴確認コードと入力時刻とから視聴者が実際に番組を 視聴したことを判断するものである。
しかしながら、 かかる従来の視聴覚認証システムは、 入力された視聴 確認コードと時刻情報とから視聴者が番組を視聴していたことを判断す るものであり、 視聴者が番組を視聴していたことは確認できるが、 その 視聴者が登録された正規の受講者であるということは保証されない。 従 つて、 例えば正規の受講者が第 3者に身代わり受講を依頼した場合にお いても正規の受講者が受講していたとして記録される。 また、 遠隔教育 システムを用いて受講者に対して試験を行う場合に、 正規の受講者が第 3者に身代わり受験を依頼することも簡単にできてしまう。
一方、 受講者が登録された正規の受講者であることを確認する方法と しては、 あらかじめ登録されたパスヮードを受講者に入力させるパスヮ 一ド認証法、 あらかじめ登録した個人情報について受講者に質問確認す る個人情報質問確認法、 受講者の顔等の画像を取得してあらかじめ登録 された受講者の顔等の画像と画像照合する画像照合法、 受講者の音声を 取得してあらかじめ登録された受講者の音声と照合する音声照合法等が 考えられる。
しかしながら、 パスワード認証法や個人情報質問確認法では、 正規の 受講者があらかじめ第 3者にパスヮードゃ個人情報を教えておくことで 、 その第 3者に身代わり受講させることができる。
また、 画像照合法や音声照合法においても、 受講確認要求を受けた受 講者があらかじめ録画した正規の受講者の映像やあらかじめ録音した正 規の受講者の音声を端末から送信することで、 第 3者に身代わり受講さ せることが可能である。
このように、 従来の受講確認方法では、 正規の受講者が意図的に第 3 者に身代わり受講させることが可能であり、 正規の受講者が受講してい ることを確認することが困難であるという問題があった。
それゆえに、 本願発明の主たる目的は、 遠隔教育において録画映像等 を用いた第 3者による身代わり受講を防止して、 正規の受講者が受講し ていることを確認できる遠隔教育システムを提供することである。 発明の開示
請求項 1に記載の遠隔教育システムは、 映像及び音声を含むマルチメ ディァの双方向通信によって遠隔で教育を行う遠隔教育システムにおい て、 受講者の映像を取得する受講者映像取得手段と、 受講者映像取得手 段により取得された映像をあらかじめ登録された受講者の顔画像と照合 する顔画像照合手段と、 受講者に対してァクションを要求するァクショ ン要求手段と、 受講者映像取得手段により取得された受講者の映像の画 像変化により受講者のァクションを検出するアクション検出手段とを備 え、 正規 受講者が受講していることを確認する機能を有するものであ る。
受講者映像取得手段により受講者端末から送信される受講者の映像を 取得し、 顔画像照合手段により取得された受講者の映像をあらかじめ登 録された受講者の顔画像と照合するので、 当該取得された映像が正規の 受講者の映像であることを確認できる。 また、 アクション要求手段によ り受講者に対してアクションを要求し、 アクション検出手段により受講 者がァクションしたことを取得された受講者の映像の画像変化により検 出するので、 正規の受講者があらかじめ録画した映像等を用いて第 3者 に身代わり受講させた場合にはァクション要求に対応した画像変化は生 じないことから、 身代わり受講を見破ることができ、 正規の受講者が受 講していることを確認できる。
尚、 ァクション要求手段により受講者に要求するァクションとしては 、 取得された映像に画像変化を生じさせるものであればどのようなもの でもよく、 例えば、 顔を動かす、 眼を閉じる、 口を動かす、 手を揚げる 等でもよい。
請求項 2に記載の遠隔教育システムは、 請求項 1に記載の遠隔教育シ ステムであって、 アクション要求手段は顔の位置を移動するよう要求す る機能を含み、 ァクション検出手段は受講者の顔の位置が移動したこと を検出する機能を含むものである。
ァクション要求手段により受講者に対して顔の位置を動かすように要 求し、 ァクション検出手段により受講者が顔の位置を移動したことを取 得された映像の画像変化により検出するので、 正規の受講者があらかじ め録画した映像等を用いて第 3者に身代わり受講させた場合には指示通 り顔の位置は変化しないことから、 身代わり受講を見破ることができ、 正規の受講者が受講していることを確認できる。
請求項 3に記載の遠隔教育システムは、 請求項 1または請求項 2に記 載の遠隔教育システムであって、 アクション要求手段は受講者に質問を して音声回答を要求する機能を含み、 ァクション検出手段は受講者の音 声を取得する機能と、 取得された音声から音声回答を認識する機能と、 認識された音声回答から受講者の音声回答の妥当性を判定する機能と、 受講者の音声回答に伴う受講者の口の動きを検出する機能とを含むもの である。
ァクション要求手段により受講者に質問をして音声回答するよう要求 し、 アクション検出手段により受講者の音声を取得して、 音声回答を認 識して受講者の音声回答の妥当性を判定するとともに、 その音声回答に 伴う受講者の口の動きを取得された映像の画像変化により検出するので 、 顔画像照合手段により正規の受講者と判断された受講者が質問に対し て音声回答していることが確認され、 正規の受講者が受講していること を確認できる。
請求項 4に記載の遠隔教育システムは、 請求項 3に記載の遠隔教育シ ステムであって、 ァクション検出手段は受講者の音声回答をあらかじめ 登録された受講者の音声と照合する機能を含むものである。
ァクション検出手段により受講者の音声回答をあらかじめ登録された 受講者の音声と照合するので、 受講者は顔画像の照合だけでなく音声の 照合も行われ、 正規の受講者が受講していることをより精度良く確認で きる。
請求項 5に記載の遠隔教育システムは、 請求項 3または請求項 4に記 載の遠隔教育システムであって、 アクション要求手段は受講者に時刻に 関する質問を行って音声回答を要求する機能を含み、 ァクション検出手 段は受講者が回答した時刻の妥当性を判定する機能を含むものである。 ァクション要求手段により受講者に時刻に関する質問を行い、 ァクシ ョン検出手段により受講者が回答した時刻の妥当性を判定するとともに 、 その音声回答に伴う受講者の口の動きを取得された映像の画像変化に より検出するので、 正規の受講者があらかじめ録画した映像等を用いて 第 3者に身代わり受講させた場合には要求された時刻に関する音声回答 をすることができないことから、 身代わり受講を見破ることができ、 正 規の受講者が受講していることを確認できる。
例えば、 時刻に関する質問は、 現在の時刻を音声回答するよう要求す るものでもよく、 受講者が音声回答した時刻の妥当性は、 受講生の音声 回答を音声認識して得られた時刻を現在の時刻と比較するものでもよい 請求項 6に記載の遠隔教育システムは、 請求項 3ないし請求項 5のい ずれかに記載の遠隔教育システムであって、 アクション要求手段は受講 者の個人情報に関する質問を行って音声回答を要求する機能を含み、 ァ クション検出手段は受講者の回答した個人情報をあらかじめ登録された 受講者の個人情報と照合する機能を含むものである。
ァクション要求手段により受講者に対して受講者の個人情報に関する 質問を行い、 ァクション検出手段により受講者が回答した個人情報をあ らかじめ登録された受講者の個人情報と照合するとともに、 その音声回 答に伴う受講者の口の動きを取得された映像の画像変化により検出する ので、 正規の受講者があらかじめ録画した映像等を用いて第 3者に身代 わり受講させた場合には要求された受講者の個人情報に関する音声回答 をすることができないことから、 身代わり受講を見破ることができ、 正 規の受講者が受講していることを確認できる。
尚、 音声回答を要求する受講者の個人情報は、 あらかじめ登録された 複数の個人情報項目の中から、 不規則に選択して質問することが好まし い。 これにより、 身代わり受講者はあらかじめ回答を予測することがで きず、 正規の受講者が受講していることをより精度良く確認できる。 請求項 7に記載の遠隔教育システムは、 請求項 1ないし請求項 6のい ずれかに記載の遠隔教育システムであって、 ァクション検出手段は受講 者の顔画像の位置が不連続に変化しないことを判定する機能を含むもの である。
これにより、 身代わり受講者が端末から送信する映像をァクション要 求に応じて録画映像に切換えた場合に生ずる顔画像の不連続な位置変化 を検知できるので、 第 3者による身代わり受講をより確実に防止して、 正規の受講者が受講していることをより精度良く確認できる。
請求項 8に記載の遠隔教育システムは、 請求項 1ないし請求項 7のい ずれかに記載の遠隔教育システムであって、 アクション検出手段はァク ション要求手段により受講者に対してァクションを要求してから指定さ れた時間内に画像変化があったことを判定する機能を有するものである これにより、 ァクションを要求してから所定時間内に所定の画像変化 がないときは正規の受講者が受講していないと判断できる。 また、 仮に 端末においてァクション要求に対応する映像等の生成が可能であつたと しても、 身代わり受講者にそのような映像等を準備する時間を与えない ようにすることができ、 正規の受講者が受講していることをより精度良 く確認できる。
請求項 9に記載の遠隔教育システムは、 請求項 1ないし請求項 8のい ずれかに記載の遠隔教育システムであって、 ァクション要求手段は予測 不可能なタイミングで受講者に対してァクションを要求する機能を有す るものである。
これにより、 受講者はァクション要求がいつ発生するかを予測できな いので、 講座時間中は受講者端末から離れることができず、 受講者に対 して全講座時間にわたって連続して受講させるィンセンティブが働く。 請求項 1 0に記載の遠隔教育システムは、 請求項 1ないし請求項 9の いずれかに記載の遠隔教育システムであって、 ァクション要求手段は講 師からの指令により受講者に対してァクションを要求する機能を有する ものである。
これにより、 受講者に対してァクション要求を発するタイミングを講 師がコントロールできるので、 受講者の学習に影響を与えることなく受 講確認を行うことができる。
請求項 1 1に記載の受講確認方法は、 遠隔教育において正規の受講者 が受講していることを確認する方法であって、 受講者の映像を取得する ステップと、 取得された映像をあらかじめ登録された受講者の顔画像と 照合するステップと、 受講者に対してアクションを要求するステップと 、 取得された映像の画像変化により受講者のァクシヨンを検出するステ ップとを備えたものである。
受講者の映像を取得するステップにより受講者端末から送信される受 講者の映像を取得し、 あらかじめ登録された受講者の顔画像と照合する ステツプにより取得された受講者の映像をあらかじめ登録された受講者 の顔画像と照合するので、 当該取得された映像が正規の受講者の映像で あることを確認できる。 また、 アクションを要求するステップにより受 講者に対してァクションを要求し、 アクションを検出するステップによ り受講者がァクションしたことを取得された受講者の映像の画像変化に より検出するので、 正規の受講者があらかじめ録画した映像等を用いて 第 3者に身代わり受講させた場合にはァクション要求に対応した画像変 化は生じないことから、 身代わり受講を見破ることができ、 正規の受講 者が受講していることを確認できる。
尚、 ァクションを要求するステツプにより受講者に要求するァクショ ンとしては、 取得された映像に画像変化を生じさせるものであればどの ようなものでもよく、 例えば、 顔を動かす、 眼を閉じる、 口を動かす、 手を揚げる等でもよい。
請求項 1 2に記載の受講確認方法は、 請求項 1 1に記載の受講確認方 法であって、 ァクションを要求するステップは顔の位置を移動するよう 要求するステップを含み、 ァクションを検出するステップは受講者の顔 の位置が移動したことを検出するステツプを含むものである。
ァクションを要求するステツプにより受講者に対して顔の位置を動か すように要求し、 アクションを検出するステップにより受講者が顔の位 置を移動したことを取得された映像の画像変化により検出するので、 正 規の受講者があらかじめ録画した映像等を用いて第 3者に身代わり受講 させた場合には指示通り顔の位置は変化しないことから、 身代わり受講 を見破ることができ、 正規の受講者が受講していることを確認できる。 請求項 1 3に記載の受講確認方法は、 請求項 1 1または請求項 1 2に 記載の受講確認方法であって、 ァクションを要求するステップは受講者 に質問をして音声回答を要求するステップを含み、 アクションを検出す るステツプは受講者の音声を取得するステツプと、 取得された音声から 音声回答を認識するステップと、 認識された音声回答から受講者の音声 回答の妥当性を判定するステツプと、 受講者の音声回答に伴う受講者の 口の動きを検出するステツプとを含むものである。
ァクションを要求するステップにより受講者に質問をして音声回答す るよう要求し、 ァクションを検出するステップにより受講者の音声を取 得して、 音声回答を認識して受講者の音声回答の妥当性を判定するとと もに、 その音声回答に伴う受講者の口の動きを取得された映像の画像変 化により検出するので、 あらかじめ登録された受講者の顔画像と照合す るステツプにより正規の受講者と判断された受講者が質問に対して音声 回答していることが確認され、 正規の受講者が受講していることを確認 できる。
請求項 1 4に記載の受講確認方法は、 請求項 1 3に記載の受講確認方 法であって、 ァクションを検出するステップは受講者の音声回答をあら かじめ登録された受講者の音声と照合するステツプを含むものである。 アクションを検出するステップにより受講者の音声回答をあらかじめ 登録された受講者の音声と照合するので、 受講者は顔画像の照合だけで なく音声の照合も行われ、 正規の受講者が受講していることをより精度 良く確認できる。
請求項 1 5に記載の受講確認方法は、 請求項 1 3または請求項 1 4に 記載の受講確認方法であって、 ァクションを要求するステップは受講者 に時刻に関する質問を行って音声回答を要求するステップを含み、 ァク シヨンを検出するステツプは受講者が回答した時刻の妥当性を判定する ステツプを含むものである。
アクションを要求するステップにより受講者に時刻に関する質問を行 い、 ァクションを検出するステツプにより受講者が回答した時刻の妥当 性を判定するとともに、 その音声回答に伴う受講者の口の動きを取得さ れた映像の画像変化により検出するので、 正規の受講者があらかじめ録 画した映像等を用いて第 3者に身代わり受講させた場合には要求された 時刻の回答をすることができないことから、 身代わり受講を見破ること ができ、 正規の受講者が受講していることを確認できる。
例えば、 時刻に関する質問は、 現在の時刻を音声回答するよう要求す るものでもよく、 受講者が音声回答した時刻の妥当性は、 受講生の音声 回答を音声認識して得られた時刻を現在の時刻と比較するものでもよい 請求項 1 6に記載の受講確認方法は、 請求項 1 3ないし請求項 1 5の いずれかに記載の受講確認方法であって、 ァクションを要求するステツ プは受講者の個人情報に関する質問を行って音声回答を要求するステツ プを含み、 ァクションを検出するステツプは受講者の回答した個人情報 をあらかじめ登録された受講者の個人情報と照合するステツプを含むも のである。
ァクションを要求するステツプにより受講者に対して受講者の個人情 報に関する質問を行い、 アクションを検出するステップにより受講者が 回答した個人情報をあらかじめ登録された受講者の個人情報と照合する とともに、 その音声回答に伴う受講者の口の動きを取得された映像の画 像変化により検出するので、 正規の受講者があらかじめ録画した映像等 を用いて第 3者に身代わり受講させた場合には要求された受講者の個人 情報に関する音声回答をすることができないことから、 身代わり受講を 見破ることができ、 正規の受講者が受講していることを確認できる。 尚、 音声回答を要求する受講者の個人情報は、 あらかじめ登録された 複数の個人情報項目の中から、 不規則に選択して質問することが好まし い。 これにより、 身代わり受講者はあらかじめ回答を予測することがで きず、 正規の受講者が受講していることをより精度良く確認できる。 請求項 1 7に記載の受講確認方法は、 請求項 1 1ないし請求項 1 6の いずれかに記載の受講確認方法であって、 ァクションを検出するステツ プは受講者の顔画像の位置が不連続に変化しないことを判定するステツ プを含むものである。
これにより、 身代わり受講者が端末から送信する映像をァクション要 求に応じて録画映像に切換えた場合に生ずる顔画像の不連続な位置変化 を検知できるので、 第 3者による身代わり受講をより確実に防止して、 正規の受講者が受講していることをより精度良く確認できる。
請求項 1 8に記載の受講確認方法は、 請求項 1 1ないし請求項 1 7の いずれかに記載の受講確認方法であって、 ァクションを検出するステツ プはァクションを要求するステツプにより受講者に対してァクシヨンを 要求してから指定された時間内に画像変化があったことを判定するステ ップを有するものである。
これにより、 ァクションを要求してから所定時間内に所定の画像変化 がないときは正規の受講者が受講していないと判断できる。 また、 仮に 端末においてァクション要求に対応する映像等の生成が可能であつたと しても、 身代わり受講者にそのような映像等を準備する時間を与えない ようにすることができ、 正規の受講者が受講していることをより精度良 く確認できる。
請求項 1 9に記載の受講確認方法は、 請求項 1 1ないし請求項 1 8の いずれかに記載の受講確認方法であって、 アクションを要求するステツ プは予測不可能なタイミングで受講者に対してァクションを要求するも のである。
これにより、 受講者はァクション要求がいつ発生するかを予測できな いので、 講座時間中は受講者端末から離れることができず、 受講者に対 して全講座時間にわたって連続して受講させるィンセンティブが働く。 請求項 2 0に記載の受講確認方法は、 請求項 1 1ないし請求項 1 9の いずれかに記載の受講確認方法であって、 ァクションを要求するステツ プは講師からの指令により受講者に対してァクションを要求するもので ある。
これにより、 受講者に対してァクション要求を発するタイミングを講 師がコントロールできるので、 受講者の学習に影響を与えることなく受 講確認を行うことができる。
請求項 2 1に記載の受講確認プログラムは、 請求項 1 1ないし請求項 2 0のいずれかに記載の受講確認方法をコンピュー夕で実行させる'ため のプログラムである。
請求項 1 1ないし請求項 2 0のいずれかに記載の受講確認方法の各ス テツプを手段としたコンピュー夕で実行させるためのプログラムをコン ピュー夕システムに備えることにより、 遠隔教育において第 3者の身代 わり受講を防止して正規の受講者が受講していることを確認できる。 本願発明の上述の目的, その他の目的, 特徴および利点は、 図面を参 照して行う以下の発明の実施の形態の詳細な説明から一層明らかとなろ Ό。 図面の簡単な説明
第 1図は、 本願発明の一実施形態にかかる遠隔教育システムのシステ ム構成図である。
第 2図は、 本願発明の一実施形態にかかる遠隔教育システムにより受 講者端末に表示される画面の例を示す図である。
第 3図は、 本願発明の一実施形態にかかる遠隔教育システムの受講確 認プログラムの処理フロー図 (その 1 ) である。
第 4図は、 本願発明の一実施形態にかかる遠隔教育システムの受講確 認プログラムの処理フロー図 (その 2 ) である。
第 5図は、 本願発明の一実施形態にかかる遠隔教育システムの受講確 認プログラムの処理フロー図 (その 3 ) である。 発明を実施するための最良の形態
第 1図に本願発明の一実施形態にかかる遠隔教育システムのシステム 構成図を示す。 図において、 1は遠隔教育システムであり、 W e bサ一 バ 1 0と、 双方向通信サーバ 2 0と、 コンテンッ配信サーバ 3 0と、 運 営管理システム 4 0と、 講師が使用する講師端末 6 0と、 通信回線接続 装置 7 0とが、 ネッ トワークで接続されており、 遠隔教育サービスの提 供時には通信回線 2を介して受講者が使用する受講者端末 1 0 1 、 1 0 2、 …と接続される。
W e bサーバ 1 0は、 本システムを使用する際の窓口となる WWWサ ーバであり、 講師端末 6 0や受講者端末 1 0 1、 1 0 2、 …から W e b ブラウザを用いて所定のページにアクセスすることにより、 講座の設定 や進行、 受講手続等を行うことができる。
双方向通信サーバ 2 0は、 接続する端末の端末ァドレスを登録する接 続先テーブルを備え、 接続先テーブルに登録された端末間を接続して、 映像および音声を含むマルチメディァ情報による双方向通信機能を提供 する。 講座の開設中は、 接続先テーブルには講師端末 6 0と当該講座に 出席する受講者が使用する受講者端末 1 0 1 、 1 0 2、 …の端末アドレ スが登録され、 講師端末 6 0から送信される映像および音声と各受講者 端末 1 0 1、 1 0 2、 …から送信される映像及び音声を受信し、 受信し た映像および音声を合成して講師端末 6 0および各受講者端末 1 0 1、 1 0 2、 …に送信する。
コンテンッ配信サーバ 3 0は、 動画像 ·静止画像 ·音声 · テキスト · 効果音等のマルチメディァの教材を記憶させた教材データベース 3 2を 備え、 配信先テ一ブルに登録された端末に対して指定されたコンテンツ を配信する機能を提供する。 講座の開設中は、 配信先テーブルには講師 端末 6 0と当該講座に出席する受講者が使用する受講者端末 1 0 1、 1 0 2、 …の端末アドレスが登録され、 講師端末 6 0から指定された教材 コンテンツが各端末に配信される。
運営管理システム 4 0は、 遠隔教育の運営管理をするシステムであり 、 提供する講座に関する各種のデータを記憶させた講座情報データべ一 ス 5 0を備え、 講座を設定する講座設定処理 4 1、 設定された講座を開 設する講座開設処理 4 2、 開設された講座の受講を受付る受講受付処理 4 3、 講座開設中の受講者の受講を確認する受講確認処理 4 4等の処理 を行う。
講師端末 6 0は、 講師の映像を取得するテレビカメラ ( a ) と、 講師 の音声の入出力を行うヘッドセット (b ) と、 画像を表示するモニタ画 面 (c ) と、 コマンドやメッセージの入力用のキーポ一ド (d ) · マウ ス (e ) と、 映像入力インターフェイス ·音声入出力イン夕一フェイス • ネットワーク接続装置等を備えたコンピュータ ( f ) とから構成され
、 コンピュータには講師の映像および音声を取得して双方向通信サーバ 2 0に送信するとともに、 双方向通信サーバ 2 0から送信される映像お よび音声をモニタ画面およびへッ ドセッ 卜に出力する映像音声通信プロ グラムと、 コンテンツ配信サーバ 3 0から配信される画像および音声を モニタ画面およびへッ ドセッ トに出力するコンテンッ表示プログラムと 、 W e bサーバ 1 0にアクセスするための W e bブラウザとがインスト ールされている。
通信回線 2は、 有線のコンピュータネッ トワーク、 無線のコンビユー 夕ネッ トワーク、 電話回線、 衛星回線、 インターネッ ト等、 どのような 通信回線に対しても適応できるが、 ここではインターネットを使用した 場合を例にとって説明する。 従って、 通信回線接続装置 7 0は、 インタ ーネッ トに接続するためのィンターネッ トルータを使用する。
一方、 受講者端末 1 0 1 、 1 0 2、 …は、 講師端末 6 0と同様に、 受 講者の映像を取得するテレビカメラ ( a ) と、 受講者の音声の入出力を 行うヘッ ドセッ ト ( b ) と、 画像を表示するモニタ画面 (c ) と、 コマ ンドゃメッセージの入力のためのキーボード (d ) · マウス (e ) と、 映像入カインターフェイス ·音声入出力ィンターフェイス · インタ一ネ ッ ト接続装置 (例えば T Aなど) を備えたコンピュータ ( ί ) とで構成 され、 受講者の映像および音声を取得して双方向通信サーバ 2 0に送信 するとともに双方向通信サーバ 2 0から送信される映像および音声をモ 二夕画面およびへッ ドセッ トに出力する映像音声通信プログラムと、 コ ンテンッ配信サーバ 3 0から配信される画像および音声をモニタ画面お よびヘッ ドセッ トに出力するコンテンツ表示プログラムと、 W e bサ一 バ 1 0にアクセスするための W e bブラウザとがィンストールされてい る。
次に、 本遠隔教育システム 1によって遠隔教育を実施する手順につい て説明する。
最初に、 遠隔教育を実施する事務局は、 講師端末 6 0または専用の事 務局端末 (図示省略) から W e bサーバ 1 0の事務局のページにァクセ スし、 年間の教育プランと対応する講師のスケジュールを基に開設する 講座を決定して入力する。 これにより、 運営管理システム 4 0の講座設 定処理 4 1によって講座情報データベース 5 0に講座スケジュールデ一 夕ベース 5 1が構築され、 各講座別に出席簿が生成されて出席簿データ ベース 5 2に登録される。
また、 事務局は受講者を募集し、 一定の受講基準を満たす各受講者に 対して W e bサーバ 1 0にアクセスするための I Dとパスワードを発行 する。 I Dとパスワードを発行された各受講者は、 各受講者端末から W e bサーバ 1 0の受講者のページにアクセスして、 受講者の個人情報の 登録と、 受講確認時の顔画像の照合に使用する顔画像の登録と、 受講確 認時の個人情報に関する質問に対する音声回答の照合に使用する音声の 登録とを行う。
個人情報の登録は、 運営管理システム 4 0の受講登録処理 4 2によつ て、 各受講者の入力した氏名 ·年齢 ·性別 · 生年月日 ·住所 ·電話番号 • メールアドレス等が、 各受講者の I D ·パスワードおよび各受講者端 末の端末ァドレスとともに講座情報データベース 5 0の個人情報データ ベース 5 3に登録される。 また、 当該受講者が受講を希望する講座につ いて、 講座スケジュールデ一夕ベース 5 1を参照して受講可否が判定さ れ、 受講可能な場合は出席簿データベース 5 2の当該講座の出席簿に当 該受講者が登録される。
顔画像の登録は、 運営管理システム 4 0の受講登録処理 4 2によって 、 双方向通信サーバ 2 0の接続先テーブルに当該受講者端末の端末アド レスと運営管理システムのァドレスが設定され、 当該受講者が W e bぺ ージに設けられた顔画像登録ポタン (図示省略) をクリックした時の映 像が静止画像として記録され、 講座情報データベース 5 0の顔画像デー タベース 5 4に登録される。
音声の登録は、 同様に運営管理システム 4 0の受講登録処理 4 2によ つて、 双方向通信サ一バ 2 0の接続先テ一ブルに当該受講者端末の端末 ァドレスと運営管理システムのァドレスが設定され、 当該受講者が W e bページに設けられた個人情報項目別の音声登録ポタン (図示省略) を クリックした時の当該受講者の音声が取得され、 講座情報デ一夕ベース 5 0の音声データベース 5 5に個人情報項目別に登録される。
講座スケジュールデータベース 5 1に設定された講座の日時になると 、 講座開設処理 4 3によって、 双方向通信サーバ 2 0とコンテンツ配信 サ一バ 3 0に講座が設定される。
当該講座の受講者は、 受講者端末 1 0 1、 1 0 2、 …から受講受付の ページにアクセスして所定の I Dとパスワードによってチェックインす ることにより、 双方向通信サーバ 2 0の接続先テ一ブルとコンテンツ配 信サーバ 3 0の配信先テーブルに当該受講者端末の端末ァドレスが設定 される。
また、 当該講座の講師は、 講師端末 6 0から W e bサーバの講師受付 のページにアクセスすることにより、 双方向通信サーバ 2 0の接続先テ 一ブルとコンテンツ配信サーバ 3 0の配信先テーブルに当該講師端末 6 0の端末ァドレスが設定される。
チェックインした受講者に対しては、 運営管理システム 4 0の受講確 認処理 4 4によって後述の受講確認が実施され、 正規の受講者であるこ とが確認されれば出席簿に出席時刻が記録される。
このようにして講座がスタートし、 講師は講師端末 6 0から講義を行 うことにより、 講師の映像と音声が各受講者端末に配信される。 また、 講師は講師端末 6 0から W e bサーバ 1 0経由でコンテンツ配信サーバ 3 0を制御することができ、 教材データべ一ス 3 2から必要な教材を検 索して再生することにより、 各受講者に当該教材が配信される。
第 2図に講義中の受講者端末 1 0 1、 1 0 2、 …のモニタ画面に表示 される画面の例を示す。 図において、 Aは講師端末 6 0から送信される 講師の映像を表示する講師画面であり、 Bは各受講者端末 1 0 1、 1 0 2、 …から送信される各受講者の映像を各受講者の名前とともに合成し て表示する受講者画面である。 受講者画面 Bに受講者の名前を表示する ようにしたのは、 講師が特定の受講者を指名して発言や回答を求める場 合を想定したものである。
Cはコンテンツ配信サーバ 3 0から配信されるコンテンツ画面であり 、 コンテンッ画面 Cには講師端末 6 0からの操作でボインタを表示する ことができ、 教材を再生しながら内容の説明を行う場合に、 受講者に説 明箇所を明示できる。
Dは受講者が発言したり、 講師が実施した設問に対する回答したり、 講座を中座 ·退席したりする等の場合の入力を受付る入力画面であり、 Eは講師端末や運営管理システムから各受講者に対するメッセージを表 示するメッセージ画面である。 受講確認処理 4 4によって受講者の受講 確認を行う際の各受講者へのメッセージはこのメッセージ画面 Eに表示 される。
講師端末 6 0のモニタ画面にも、 上記受講者端末のモニタ画面と同様 の表示がなされるが、 コマンド入力画面 Dについては、 コンテンツ配信 サーバ 3 0によって配信するコンテンツの検索や再生制御のためのボタ ンゃコンテンツ画面 C内に表示するボイン夕の制御ポタン等が設けられ る。
各受講生は、 講座中に発言ポタンを押すことで講師に対して質問や発 言をすることができる。 受講者が発言ポタンを押すと、 受講者画面 Bの 当該受講者がフリッカー表示となり、 講師が講師端末からその表示をク リックすることで発言が受付けられる。 このとき、 当該受講者の映像が 拡大合成されて講師端末および各受講者端末に配信されるとともに、 当 該受講者の音声が講師端末と他の受講者端末に配信される。 これにより 、 当該受講者は映像と音声により講師と対談でき、 その対談の内容は他 の受講者にも伝達される。
また、 講師は講座中に問題を設定して全受講者または特定の受講者に 回答させることができる。 講師から指定された受講者が選択ポタンを選 択したり、 メッセージボックスにメッセージを入力して回答ポタンをク リックすると、 その内容は W e bサーバ 1 0を介して運営管理システム 4 0に伝達され、 集計結果が講師端末 6 0に表示される。 また、 講師は その集計結果を必要に応じて各受講者に開示することができ、 講師端末 6 0からの指令により集計結果がコンテンッ配信サーバ 3 0を介して各 受講者端末に配信される。
講座時間中は、 運営管理システム 4 0の受講確認処理 4 4によって後 述の受講確認が随時実施され、 正規の受講者が受講していることが確認 される。
各受講者はトイレ等により中座するときは中座ポタンをクリックする 。 これにより、 受講者画面 Bの当該受講者の映像は中座マークとなり、 出席簿に中座時刻が記録される。 また、 各受講者は中座から帰還したと きに着席ポタンをクリックする。 これにより、 受講者画面 Bの当該受講 者の中座マークが通常の表示に戻り、 出席簿に帰還時刻が記録される。 また、 各受講者は講座の終了時または講座の早退時は終了ポタンをクリ ックする。 これにより、 出席簿の退席時刻が記録されるとともに、 当該 受講者の端末ァドレスが接続先テーブルおよび配信先テーブルから削除 されて受講を終了する。
このように、 講師は各受講者の着席状況を的確に把握でき、 出席簿に 出席時刻 ·退席時刻 · 中座時刻 · 帰還時刻が自動記録されるので、 当該 講座の実質受講時間を把握できる。 特に、 本遠隔教育システム 1では、 受講確認処理 4 4によって各受講者の受講確認が随時実施されるので、 各受講者は欠席扱いとなることを回避するために講座中の着席時刻管理 を的確に行うようになることが期待できる。
その他、 双方向通信サーバ 2 0には、 講師端末と各受講者端末との間 で共通のアプリケーションを起動し、 各端末で行った操作情報をお互い に交換することでアプリケ一ションを全員で共有することができるアブ リケーシヨン共有機能を備える。 これにより、 例えば各端末の画面に文 字や図形を描画する共通のホワイ トポ一ドを表示し、 これに対して講師 や各受講者が自由に文字や図形を書き込みながら議論を進めるようなゼ ミ形式の講座を実施することも可能である。
また、 各端末にチャッ ト画面を表示し、 講師および各受講者間で文字 による会話や議論を行う機能も備える。
このように、 本遠隔教育システム 1によれば、 各受講者は双方向通信 サーバ 2 0によって講師の映像と音声を受信しながらコンテンッ配信サ ーバ 3 0によってマルチメディァの教材の配信を受けることができ、 必 要に応じて講師が受講者に問題を設定して回答を要求したり、 受講者か らの質問や発言を受付けて双方向通信サーバ 2 0によって映像と音声に よる対談ができるので、 各受講者は遠隔地にいても講義室で共通の教材 によってレツスンを受けているのと同様の教育効果が得られる。
上記実施形態では、 受講者画面 Bには各受講者の映像が合成されて表 示されるとして説明したが、 講師に対して質問や発言を行うとき以外は 静止画を用い、 アイコン表示するようにしてもよい。 これにより、 通信 回線の帯域に制限がある場合でも、 通信回線に大きな負荷を与えること なく遠隔教育を実施できる。
また、 上記実施形態では、 受講者画面 Bには各受講者の名前を表示す るとして説明したが、 受講者画面 Bには受講者の映像またはアイコンの みを表示し、 講師に対して別途表示に対応する出席簿を提供するように してもよい。
上記実施形態では、 講師がライブで講義を行う有人講座の場合につい て説明したが、 講義ビデオを用いて行う無人講座を設定することも可能 である。 その場合には、 事務局はあらかじめ講義ビデオを作成してコン テンッ配信サーバ 3 0の教材データベース 3 2に登録しておき、 講座ス ケジュールデータベース 5 1に使用する講義ビデオを設定する。 運営管 理システム 4 0の講座開設処理 4 3は、 講座設定日時になるとコンテン ッ配信サーバ 3 0によって配信する講義ビデオを指定して自動的に講座 をスタートする。 講義ビデオには、 適宜問題が設定されており、 これに 対する受講者の回答は自動的に集計されて記録される。 また、 受講者に 質問等がある場合は事務局にメールを送信することにより、 担当講師に 連絡され、 後日回答される。
次に、 運営管理システム 4 0の受講確認処理 4 4の詳細について述べ る。
受講確認処理 4 4は、 各受講者端末から送信される各受講者の画像を 取得する受講者画像取得処理 4 5と、 取得された各受講者の画像を顔画 像データベース 5 4の当該受講者の顔画像と照合する顔画像照合処理 4 6と、 顔画像の照合をクリアした各受講者に対して各受講者端末から送 信される画像の変化を伴うァクションを要求するァクション要求処理 4 7と、 要求したアクションに対して各受講者端末から送信される画像の 変化を検出するアクション検出処理 4 8とから構成される。 尚、 本実施 形態では、 各受講者に対して受講者に顔の位置を指示通り移動させるこ とと、 現在の時刻を音声回答させることと、 受講者の個人情報に関する 質問に音声回答させることとの 3種類のァクションを要求している。 第 3図から第 5図に、 受講確認処理 4 4の処理フローを示す。
図のように、 受講確認時刻になると (S 1 0 0 ) 、 受講確認要求を講 ^端末 6 0に通知し (S I 0 2 ) 、 講師が受講確認要求を受付けたとき に受講確認を行う (S 1 0 4 ) 。 受講確認時刻は、 講座開始時と講座開 講中のランダムな時刻が選ばれる。 講座開講中のランダムな時刻に受講 確認を行うことにより、 受講者はいつ受講確認が行われるかを予測でき ず、 受講者に対して全講座時間にわたって連続して受講させるインセン ティブが働く。 伹し、 講師が講座を行っている最中に受講確認を行うと 却って受講を妨げることになるので、 講師に受講確認要求を通知し、 講 師が講座を中断して受講確認要求の受入れポタンをクリックしたときに 受講確認を行うこととした。 尚、 講座ビデオを用いた無人講座の場合に は、 例えばあらかじめ講座ビデオに中断可能ポイントを登録しておき、 前記受講確認要求に対して最初の中断可能ボイントにおいて講座ビデオ の再生を一時停止し、 受講確認を行うようにしてもよい。
受講確認時刻でないときは、 S 4 0 6に行って講座終了まで繰返す。 次に、 出席簿デ一夕ベース 5 2から当該講座の出席簿を取得し (S 1 0 6 ) 、 出席簿に登録されている各受講者の受講者端末の端末アドレス を双方向通信サーバ 2 0に通知して当該受講者の映像と音声を取得する とともに (S 1 0 8 ) 。 当該受講者端末に対して顔画像確認を通知する ( S 1 1 0 ) 。 これは、 例えば 「これから受講確認を行います。 受講登 録時と同様の状態でカメラに顔を映して下さい」 のメッセ一ジをメッセ ージ画面に表示する。 このとき、 「準備ができたらここをクリックして 下さい」 とのメッセージをつけ、 「ここを」 がクリックされたことを W e bサーバ 1 0で検出して次のステツプに進むようにしてもよい。
そして、 顔画像データべ一ス 5 3から当該受講者の顔画像データを取 得し (S 1 1 2 ) 、 取得中の受講者の映像から切出した静止画像を当該 受講者の顔画像データと画像照合する (S 1 1 4 ) 。 画像照合は、 当該 受講者の顔画像データをテンプレートとして取得中の受講者の映像に対 して直接マッチング処理を行い、 最も一致度の高い点を求める。 尚、 取 得中の受講者の映像から切出された静止画像について外形輪郭、 目 ·鼻 • 口等の位置や形状等の特徴量を求める特徴抽出演算を行って画像サイ ズを正規化した上でマッチング処理を行ってもよく、 当該受講者の顔画 像データについて特徴抽出演算した結果と比較するようにしてもよい。 画像照合の結果、 所定の一致度が得られた場合は次のステツプに進み ( S 1 1 6 ) 、 所定の一致度が得られない場合は当該受講者端末に確認 メッセージを通知し (S 1 1 8 ) 、 応答があれば S 1 1 0に戻って顔画 像確認要求を繰返し (S 1 2 0 ) 、 応答がなければ S 4 0 6に行って出 席簿の当該受講者を欠席とする。
次に、 顔の移動確認を行う。 最初に、 前述の切出された静止画像につ いて受講者の顔の初期位置を検出しておく (S 1 2 2 ) 。 顔の位置は、 前述の画像照合におけるマッチング処理において最も一致度の高い点と して求まる。
そして、 当該受講者端末に顔移動要求を通知する (S 1 2 4 ) 。 これ は、 例えば 「顔の位置を右に 1 0 c m程、 移動してください」 のような メッセージをメッセージ画面に表示する。 尚、 顔を移動させる方向や移 動距離は、 適宜ランダムに変更する。 これ.により、 あらかじめ準備した ビデオ映像を用いて画像確認を受けることが困難となり、 第 3者の身代 わり受講を防止できる。
ここで、 取得中の受講者の映像について、 前述の画像照合の手法によ り受講者の顔位置の検出を連続して行い (S 1 2 6 ) 、 前述のメッセ一 ジに対応した顔の位置変化が検出されたら次のステップに進む (S 1 2 8 ) 。 また、 所定時間内に顔の位置変化が検出されないときは (S 1 3 0 ) 、 当該受講者端末に確認メッセージを通知して (S 1 3 2 ) 、 応答 があれば S 1 2 0に戻って顔移動要求を繰返し (S 1 3 4 ) 、 応答がな ければ S 4 0 6に行って出席簿の当該受講者を欠席とする。
次に、 時刻の音声回答確認を行う。 最初に、 当該受講者端末に時刻の 音声回答要求を通知する (S 2 0. 0 ) 。 これは、 例えば 「講師画面に表 示されている現在の時刻を音声で回答して下さい」 のようなメッセージ をメッセージ画面に表示する。 これに対して、 取得中の受講者の音声の 信号レベルから受講者の音声回答を検出し、 一連の音声回答が検出され たら (S 2 0 2 ) 、 音声回答中の映像と音声を取得する (S 2 0 4 ) 。 一連の音声回答が検出される前に所定の時間が経過したときは (S 2 0
6 ) 、 当該受講者端末に確認メッセージを通知し (S 2 0 8 ) 、 応答が あれば S 2 0 0から繰返す ( S 2 1 0 ) 。 応答がない場合は S 4 0 6に 行って出席簿の当該受講者を欠席とする。
次に、 取得された音声回答中の音声について音声認識する (S 2 1 2 ) 。 ここでの音声認識は、 対象が時刻に限られるため、 時刻に関する音 声辞書を用いて、 音節単位でマッチング処理を行う。 識別する語彙数が 限られているので、 不特定話者に対応する音声辞書を用いた不特定話者 音声認識によって認識可能と考えられるが、 あらかじめ受講者に時刻に 関する音声を登録させ、 これを音声辞書として特定話者音声認識を行う ようにしてもよい。
そして、 講師画面に表示されている現在の時刻を取得し (S 2 1 4 ) 、 音声認識された音声回答の時刻が所定範囲内にあるときは (S 2 1 6 ) 、 取得された音声回答中の映像について口の動きを検出する (S 2 1 8 ) 。 口の動きの検出は、 取得された音声回答中の映像の音声認識され た各音節に対応するフレームについて前述の特徴抽出演算によって口の 形状パラメータを求め、 これを音声認識された各音節から音節と口の形 状パラメ一夕の関係を登録したテーブルを引いて得られた口の形状パラ メータと比較し、 総合的に一致度を判定する。 尚、 口の動きの判定は、 顔画像照合した受講者の映像が録画データであったり、 時刻の音声回答 が録音デー夕であったりすることを見破ることが目的であるので、 厳密 な一致を判定する必要はなく、 例えば音声回答が検出された期間に対応 して受講者の口の形状に変化が生じていることを検出するような簡便な 方法を用いてもよい。 また、 あらかじめ受講者に時刻に関する音声を登 録させて特定話者単語音声認識を行う場合には、 受講者に時刻に関する 音声を登録させる際に対応する受講者の映像を同時に記録しておき、 音 声認識された音節毎に取得された受講者の映像を記録された受講者の映 像と直接比較して判定するようにしてもよい。 また、 受講者に時刻に関 する音声を登録させる際に受講者の映像から口の形状パラメ一夕を求め て記録しておき、 音声認識された音節毎に取得された受講者の映像につ いて求めた口の形状パラメ一夕を記録された口の形状パラメ一夕と比較 して判定するようにしてもよい。
ここで、 受講者の口の動きが音声回答と対応していると判断されれば 、 次のステツプに進む (S 2 2 0 ) 。 S 2 1 6において音声回答時刻が 正しくないか、 S 2 2 0において映像が音声回答と対応していないと判 断されたときは、 S 2 0 8に行って当該受講者端末に確認メッセージを 通知して応答があれば S 2 0 0から繰返す。
尚、 上記実施形態では、 音声回答された時刻を音声認識して現在の時 刻と比較するものとして説明したが、 現在の時刻に対応する音節データ を音声辞書から順次取出し、 これを取得された講者の音声回答中の音声 と順に比較して行き、 受講者の音声回答全体が所定の一致度を有する場 合に音声回答時刻が正しいと判断するようにレてもよい。
次に、 受講者の個人情報の音声回答確認を行う。 最初に、 個人情報の 質問項目を選択して、 当該受講者端末に当該個人情報の質問項目につい ての音声回答要求を通知する (S 3 0 0 ) 。 これは、 例えば 「あなたの 生年月日を音声で回答して下さい」 のようなメッセージをメッセージ画 面に表示する。 この個人情報に関する質問項目も、 受講者が予測できな いようにランダムに選択することが好ましい。 これに対して、 取得中の 受講者の音声の信号レベルから音声回答を検出し、 一連の音声回答が検 出されたら (S 3 0 2 ) 、 音声回答中の映像と音声を取得する (S 3 0 4 ) 。 一連の音声回答が検出される前に所定の時間が経過したときは ( S 3 0 6 ) 、 当該受講者端末に確認メッセ一ジを通知し (S 3 0 8 ) 、 応答があれば S 3 0 0から繰返す (S 3 1 0 ) 。 応答がない場合は S 4 0 6に行って出席簿の当該受講者を欠席とする。
次に、 音声デ一夕べ一ス 5 5から当該受講者の個人情報の質問項目に 対応する音声デ一夕を取得し (S 3 1 2 ) 、 その音声データをテンプレ ―トとして取得された音声回答中の音声とマッチング処理を行う (S 3 1 4 ) 。 その結果、 所定の一致度が得られた場合は (S 3 1 6 ) 、 取得 された音声回答中の映像について口の動きを検出する (S 3 1 8 ) 。 口 の動きの検出は、 取得された音声回答中の映像の各フレームについて前 述の特徴抽出演算によって口の形状パラメ一夕を求め、 これを個人情報 データべ—ス 5 3に登録されている当該受講者の個人情報の文字データ から文字と口の形状パラメ一夕の関係を登録したテーブルを引いて得ら. れた口の形状パラメ一夕と比較し、 総合的に一致度を判定する。 尚、 口 の動きの判定は、 前述の時刻の確認の場合と同様に、 顔画像照合した受 講者の映像が録画データであったり、 時刻の音声回答が録音データであ つたりすることを見破ることが目的であるので、 厳密な一致を判定する 必要はなく、 例えば音声回答が検出された期間に対応して受講者の口の 形状に変化が生じていることを検出するような簡便な方法を用いてもよ レ また、 個人情報の音声登録の際に受講者の映像を同時に記録してお き、 取得された音声回答中の映像を記録された受講者の映像と直接比較 して判定するようにしてもよい。 また、 個人情報の音声登録の際に受講 者の映像から口の形状パラメ一夕を時系列的に求めて記録しておき、 取 得された音声回答中の映像について求めた口の形状パラメ一夕を記録さ れた口の形状パラメ一夕と比較して判定するようにしてもよい。
ここで、 受講者の口の動きが音声回答と対応していると判断されれば 、 次のステップに進む (S 3 2 0 ) 。 S 3 1 6において音声回答の個人 情報が正しくないか、 S 3 2 0において映像が音声回答と対応していな いと判断されたときは、 S 3 0 8に行って当該受講者端末に確認メッセ ージを通知して応答があれば S 3 0 0から繰返す。
当該受講者について以上の受講確認処理が完了したら、 当該受講者端 末に受講確認完了を通知し (S 4 0 0 ) 、 双方向通信サーバ 2 0に通知 して当該受講者の映像と音声の取得を終了する (S 4 0 2 ) 。
そして、 すべての受講者について受講確認を完了したら (S 4 0 4 ) 、 講座終了まで先頭 (S 1 0 0 ) から繰返す。
上記実施形態では、 受講確認時刻毎に顔画像の照合と顔の移動確認と 時刻の音声回答確認と個人情報の音声回答確認のすべてを行うものとし て説明したが、 本願発明はこれに限定されるものではなく、 顔画像の照 合と顔の移動確認を組合せか、 顔画像の照合と時刻の音声回答確認の組 合せか、 顔画像の照合と個人情報の音声回答確認の組合せのいずれかを 実施するものでもよく、 これらを受講確認時刻によって適宜選択して実 施するようにしてもよい。
また、 上記実施形態では受講者に要求するアクションとして、 顔の移 動や音声回答を要求する場合について説明したが、 本願発明はこれに限 定されるものではなく、 顔を回転させたり、 目を閉じさせたり、 手を揚 げさせたり、 特定の形状の物品をカメラに写させたり、 紙に指定の形状 を書いたものをカメラに写させたりするなど、 映像の変化として捉えら れるものであればどのようなァクションを要求してもよく、 本願発明の 効果を奏する。
上記実施形態では、 顔画像の照合を行った後に、 顔の移動確認や時刻 の音声回答確認や個人情報の音声回答確認等のァクションを要求し、 そ のときの画像変化が要求に対応したものであることを判定することによ つて正規の受講者が受講していることを確認するとして説明したが、 取 得される受講者の映像から受講者の顔の位置を連続的に検出し、 顔の位 置が不連続に変化していないことを確認する機能を設けるようにしても よい。 これにより、 例えば身代わり受講者がアクション要求を受けたと きに、 そのアクション要求に対応する録画映像に切換えるような行動を とった場合でも、 受講者の顔の位置が不連続に変化するので、 身代わり 受講であることが検出でき、 正規の受講者が受講していることをより精 度良く確認することができる。
上記実施形態では、 講座の受講者はすべて受講者端末から受講し、 講 師の講座を直接受講する受講者はいないものとして説明したが、 双方向 通信サーバ 2 0から送信される映像を表示する大画面表示装置と双方向 通信サーバ 2 0から送信される音声を出力する会場スピー力とを備えた 講義会場で講義を行い、 会場受講者と遠隔受講者とを混在させた講座を 設定するようにしてもよい。
また、 更にサテライ ト会場を各地に設け、 そこに大画面表示装置と会 場スピー力を設け、 ここに集合した受講者を 1つの集合受講者として取 り扱うようにしてもよい。
これにより、 講義会場ゃサテライ ト会場に通学可能な受講者は直接受 講し、 通学不可能な受講者が遠隔で受講することで、 1人の講師による 講座をより多数の受講者によって同時に受講することが可能となる。 そ の場合、 講義会場受講者やサテライ ト会場受講者に、 前述の設問回答の 入力機能や受講確認のための映像入力機能や音声入力機能を有する端末 を設けるようにしてもよいことは言うまでもない。
上記実施形態では、 遠隔教育システムはコンテンツ配信サーバを備え 、 講座に使用する教材はコンテンッ配信サーバによって各受講者端末に 配信するものとして説明したが、 本願発明はこれに限定されるものでは なく、 単に例えば講師端末においてスクリーン等の上に教材ソフトを再 生し、 それを講師の映像を取得するテレビカメラで撮像することでもよ レ また、 講師端末に外部映像音声入力端子を備え、 それに V T Rや D V D等を接続し、 講師が再生した教材ソフトの映像音声を講師の映像や 音声と合成または切換えて双方向通信サーバに送信し、 双方向通信サー バによって各受講者端末に配信するようにしてもよい。
上記実施形態では、 講師端末は遠隔教育システム内のネッ トワークに 接続されるものとして説明したが、 本願発明はこれに限定されるもので はなく、 講師端末もィン夕一ネッ トを介して遠隔教育システムに接続す るようにしてもよい。 これにより、 講師はインネッ トに接続可能な講師 端末を有する限り何処からでも講座を開設することができ、 外国在住者 に講師を依頼することも可能となる等、 講師のスケジュール調整が容易 となる他、 人件費の削減にも寄与する。
上記実施形態では、 遠隔教育システムは W e bサーバを備え、 受講者 端末は W e bブラウザ機能を有するコンピュータを用いて W e bサーバ にアクセスすることで受講手続を行うものとして説明したが、 本願発明 はこれに限定されるものではなく、 受講者端末として通常のテレビ電話 を用い、 運営管理システムから受講者端末に伝達するメッセージは、 生 成されたメッセージ画像を双方向通信サーバで合成して各受講者端末に 送信する機能を設けることで対応でき、 受講者端末から運営管理システ ムへのコマンドやメッセージの入力は、 受講者端末のダイアルポタンを 使用し、 双方向通信サーバに P B トーン信号を検出する機能を設けるこ とで対応できる。 これにより、 受講者端末は例えば I T U— T勧告の H . 3 2 0に準拠した I S D Nテレビ電話端末のような公衆電話回線に接 続する電話型のテレビ電話端末や、 例えば I T U— T勧告の H . 3 2 3 に準拠した I P (Internet Protocol) テレビ電話端末のようなインター ネッ トに接続する I P型のテレビ電話端末回線等を使用することができ る。 この場合、 双方向通信サーバには、 受講者端末の規格に対応した映 像コーデックゃ音声コーデックを備える必要があるが、 プロ卜コール変 換を行うゲートウェイを別途も受けることで、 各種の規格の受講者端末 を混在させることもできる。 産業上の利用可能性
上述したように、 本願発明によれば、 遠隔教育において録画映像等を 用いた第 3者による身代わり受講を防止して、 正規の受講者が受講して いることを確認できる等の効果がある。

Claims

請 求 の 範 囲
1 . 映像及び音声を含むマルチメディァの双方向通信によって遠隔で教 育を行う遠隔教育システムにおいて、
受講者の映像を取得する受講者映像取得手段と、 前記受講者映像取得 手段により取得された受講者の映像をあらかじめ登録された受講者の顔 画像と照合する顔画像照合手段と、 受講者に対してァクションを要求す るァクション要求手段と、 前記受講者映像取得手段により取得された受 講者の映像の変化により受講者のァクションを検出するァクション検出 手段とを備え、
正規の受講者が受講していることを確認する機能を有することを特徴 とする、 遠隔教育システム。
2 . 前記アクション要求手段は、 顔の位置を移動するよう要求する機能 を含み、
前記アクション検出手段は、 受講者の顔の位置が移動したことを検出 する機能を含むことを特徴とする、 請求項 1に記載の遠隔教育
3 . 前記アクション要求手段は、 受講者に質問をして音声回答を要求す る機能を含み、
前記アクション検出手段は、 受講者の音声を取得する機能と、 前記取 得された音声から音声回答を認識する機能と、 前記認識された音声回答 から受講者の音声回答の妥当性を判定する機能と、 受講者の音声回答に 伴う受講者の口の動きを検出する機能とを含むことを特徴とする、 請求 項 1または請求項 2に記載の遠隔教育システム。
4 . 前記アクション検出手段は、 受講者の音声回答をあらかじめ登録さ れた受講者の音声と照合する機能を含むことを特徴とする、 請求項 3に 記載の遠隔教育
5 . 前記アクション要求手段は、 受講者に時刻に関する質問を行って音 声回答を要求する機能を含み、
前記ァクション検出手段は、 受講者が回答した時刻の妥当性を判定す る機能を含むことを特徴とする、 請求項 3または請求項 4に記載の遠隔
6 . 前記アクション要求手段は、 受講者の個人情報に関する質問を行つ て音声回答を要求する機能を含み、
前記ァクション検出手段は、 受講者の回答した個人情報をあらかじめ 登録された受講者の個人情報と照合する機能を含むことを特徴とする、 請求項 3ないし請求項 5のいずれかに記載の遠隔教育システム。
7 . 前記アクション検出手段は、 受講者の顔画像の位置が不連続に変化 しないことを判定する機能を含むことを特徴とする、 請求項 1ないし請 求項 6のいずれかに記載の遠隔教育システム。
8 . 前記アクション検出手段は、 前記アクション要求手段により受講者 に対してァクションを要求してから指定された時間内に画像変化があつ たことを判定する機能を有することを特徴とする、 請求項 1ないし請求 項 7のいずれかに記載の遠隔教育システム。
9 . 前記アクション要求手段は、 予測不可能なタイミングで受講者に対 してァクションを要求する機能を有することを特徴とする、 請求項 1な いし請求項 8のいずれかに記載の遠隔教育システム。
1 0 . 前記アクション要求手段は、 講師からの指令により受講者に対し てァクションを要求する機能を有することを特徴とする、 請求項 1ない し請求項 8のいずれかに記載の遠隔教育システム。
1 1 . 遠隔教育において正規の受講者が受講していることを確認する方 法であって、 受講者の映像を取得するステツプと、 前記取得された映像をあらかじ め登録された受講者の顔画像と照合するステツプと、 受講者に対してァ クションを要求するステップと、 前記取得された映像の画像変化により 受講者のァクションを検出するステツプとを備えたことを特徴とする、 受講確認方法。
1 2 . 前記アクションを要求するステップは、 顔の位置を移動するよう 要求するステツプを含み、
前記ァクションを検出するステツプは、 受講者の顔の位置が移動した ことを検出するステップを含むことを特徴とする、 請求項 1 1に記載の 受講確認方法。
1 3 . 前記アクションを要求するステップは、 受講者に質問をして音声 回答を要求するステツプを含み、
前記ァクションを検出するステップは、 受講者の音声を取得するステ ップと、 前記取得された音声から音声回答を認識するステップと、 前記 認識された音声回答から受講者の音声回答の妥当性を判定するステツプ と、 受講者の音声回答に伴う受講者の口の動きを検出するステップとを 含むことを特徴とする、 請求項 1 1または請求項 1 2に記載の受講確認 方法。
1 4 . 前記アクションを検出するステップは、 受講者の音声回答をあら かじめ登録された受講者の音声と照合するステツプを含むことを特徴と する、 請求項 1 3に記載の受講確認方法。
1 5 . 前記アクションを要求するステップは、 受講者に時刻に関する質 問を行って音声回答を要求するステツプを含み、
前記ァクションを検出するステップは、 受講者が回答した時刻の妥当 性を判定するステップを含むことを特徴とする、 請求項 1 3または請求 項 1 4に記載の受講確認方法。
1 6 . 前記アクションを要求するステップは、 受講者の個人情報に関す る質問を行って音声回答を要求するステツプを含み、
前記ァクションを検出するステップは、 受講者の回答した個人情報を あらかじめ登録された受講者の個人情報と照合するステップを含むこと を特徴とする、 請求項 1 3ないし請求項 1 5のいずれかに記載の受講確 認方法。
1 7 . 前記アクションを検出するステップは、 受講者の顔画像の位置が 不連続に変化しないことを判定するステツプを含むことを特徴とする、 請求項 1 1ないし請求項 1 6のいずれかに記載の受講確認方法。
1 8 . 前記アクションを検出するステップは、 前記アクションを要求す るステップにより受講者に対してァクションを要求してから指定された 時間内に画像変化があったことを判定するステツプを有することを特徴 とする、 請求項 1 1ないし請求項 1 7のいずれかに記載の受講確認方法 1 9 . 前記アクションを要求するステップは、 予測不可能なタイミング で受講者に対してアクションを要求することを特徴とする、 請求項 1 1 ないし請求項 1 8のいずれかに記載の受講確認方法。
2 0 . 前記アクションを要求するステップは、 講師からの指令により受 講者に対してアクションを要求することを特徴とする、 請求項 1 1ない し請求項 1 8のいずれかに記載の受講確認方法。
2 1 . 請求項 1 1ないし請求項 2 0のいずれかに記載の受講確認方法を コンビュ一夕で実行させるための、 受講確認プログラム。
PCT/JP2003/012190 2002-09-27 2003-09-25 遠隔教育システム、受講確認方法および受講確認プログラム WO2004029905A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
US10/528,641 US20060057550A1 (en) 2002-09-27 2003-09-25 Remote education system, course attendance check method, and course attendance check program
EP03798474A EP1544831A1 (en) 2002-09-27 2003-09-25 Remote education system, course attendance check method, and course attendance check program
AU2003266591A AU2003266591B2 (en) 2002-09-27 2003-09-25 Remote education system, course attendance check method, and course attendance check program
JP2004539511A JP3930022B2 (ja) 2002-09-27 2003-09-25 遠隔教育システム、受講確認方法および受講確認プログラム
CA002500998A CA2500998A1 (en) 2002-09-27 2003-09-25 Remote education system, attendance confirmation method, and attendance confirmation program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002-282879 2002-09-27
JP2002282879 2002-09-27

Publications (1)

Publication Number Publication Date
WO2004029905A1 true WO2004029905A1 (ja) 2004-04-08

Family

ID=32040543

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2003/012190 WO2004029905A1 (ja) 2002-09-27 2003-09-25 遠隔教育システム、受講確認方法および受講確認プログラム

Country Status (9)

Country Link
US (1) US20060057550A1 (ja)
EP (1) EP1544831A1 (ja)
JP (1) JP3930022B2 (ja)
KR (1) KR20050074443A (ja)
CN (1) CN1685380A (ja)
AU (1) AU2003266591B2 (ja)
CA (1) CA2500998A1 (ja)
TW (1) TWI294598B (ja)
WO (1) WO2004029905A1 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006030513A (ja) * 2004-07-15 2006-02-02 Hitachi Ltd 教育支援装置及び教育情報管理サーバ
JP2009520215A (ja) * 2005-12-28 2009-05-21 インサイドアールエフ カンパニー リミテッド ユビキタス教育環境に適した双方向講義支援システム及び方法
WO2009069238A1 (ja) * 2007-11-26 2009-06-04 Kabushiki Kaisha Srj バーチャルスクールシステムおよびスクールシティシステム
JP2009139667A (ja) * 2007-12-06 2009-06-25 Nec Corp 遠隔講義システム
JP2010086291A (ja) * 2008-09-30 2010-04-15 Fujitsu Frontech Ltd 携帯情報端末、時間割掲示・情報中継装置、および出欠管理兼表示コンテンツ制御システム
JP2011502296A (ja) * 2007-10-19 2011-01-20 アーテック・グループ・インコーポレーテッド バイオメトリック行動コンテキストベースの人間認識のためのシステム及び方法
JP2016021065A (ja) * 2015-07-21 2016-02-04 日立マクセル株式会社 映像表示装置
US9665922B2 (en) 2012-11-30 2017-05-30 Hitachi Maxell, Ltd. Picture display device, and setting modification method and setting modification program therefor
JP2017142500A (ja) * 2017-02-22 2017-08-17 日立マクセル株式会社 映像表示装置
JP2018060374A (ja) * 2016-10-05 2018-04-12 富士ゼロックス株式会社 情報処理装置、評価システムおよびプログラム
JP2018511890A (ja) * 2014-12-22 2018-04-26 マカフィー, エルエルシー オンライン教育におけるリアルタイムユーザ検証のためのシステム及び方法
CN110533971A (zh) * 2019-07-19 2019-12-03 山东至信信息科技有限公司 一种深入互动的智能教学系统
CN111611854A (zh) * 2020-04-16 2020-09-01 杭州电子科技大学 一种基于模式识别的课堂情况评价方法
JP2022177229A (ja) * 2020-03-24 2022-11-30 楽天グループ株式会社 生体(liveness)検出検証方法、生体検出検証システム、記録媒体、及び生体検出検証システムの訓練方法

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2549223A1 (en) * 2005-06-27 2006-12-27 Renaissance Learning, Inc. Wireless classroom response system
US20070031804A1 (en) * 2005-08-05 2007-02-08 International Business Machines Corporation Personalized course alerts and course completion recording service
KR100705598B1 (ko) * 2006-02-10 2007-04-09 삼성전자주식회사 얼굴인식을 통한 화상전화기의 사용자 정보 접근제어장치그 방법
US8044989B2 (en) * 2006-12-12 2011-10-25 General Instrument Corporation Mute function for video applications
JP4692529B2 (ja) * 2007-08-07 2011-06-01 セイコーエプソン株式会社 グラフィカルユーザインタフェース装置
US8234502B2 (en) * 2008-08-29 2012-07-31 International Business Machines Corporation Automated password authentication
US8561097B2 (en) * 2008-09-04 2013-10-15 Beezag Inc. Multimedia content viewing confirmation
SG10201401191TA (en) * 2009-04-07 2014-07-30 Learning Tree Internat System And Method For Hybrid Course Instruction
US9147350B2 (en) * 2010-10-15 2015-09-29 John Leon Boler Student performance monitoring system and method
EP2633380A4 (en) * 2010-10-28 2016-04-06 Edupresent Llc INTERACTIVE ORAL PRESENTATION DISPLAY SYSTEM
US20120130766A1 (en) * 2010-11-24 2012-05-24 International Business Machines Corporation Device-independent attendance prompting tool for electronically-scheduled events
CN102647577A (zh) * 2011-02-16 2012-08-22 鸿富锦精密工业(深圳)有限公司 远程会议管理系统及管理方法
US20140067204A1 (en) * 2011-03-04 2014-03-06 Nikon Corporation Electronic apparatus, processing system, and computer readable storage medium
CN102521683A (zh) * 2011-11-30 2012-06-27 江苏奇异点网络有限公司 远程教育的学员管理方法
US20140009496A1 (en) * 2012-07-09 2014-01-09 Desire2Learn Incorporated Methods and systems for object based data management
US9185098B2 (en) * 2012-07-24 2015-11-10 Pagebites, Inc. Method for user authentication
US20140106332A1 (en) * 2012-10-12 2014-04-17 Richard Gessner Method and apparatus for mobile social learning
US20140222474A1 (en) * 2013-02-04 2014-08-07 Hsc Acquisition, Llc Dba Healthstar Communications System and method for certifying attendance at a promotional event
US9721086B2 (en) 2013-03-15 2017-08-01 Advanced Elemental Technologies, Inc. Methods and systems for secure and reliable identity-based computing
US9904579B2 (en) 2013-03-15 2018-02-27 Advanced Elemental Technologies, Inc. Methods and systems for purposeful computing
US10075384B2 (en) 2013-03-15 2018-09-11 Advanced Elemental Technologies, Inc. Purposeful computing
US9378065B2 (en) 2013-03-15 2016-06-28 Advanced Elemental Technologies, Inc. Purposeful computing
CN103561277B (zh) * 2013-05-09 2017-05-03 陕西思智通教育科技有限公司 一种用于网络教学的传输方法和系统
CN104424825A (zh) * 2013-08-30 2015-03-18 鸿富锦精密工业(深圳)有限公司 远端教学方法和系统
US9495586B1 (en) * 2013-09-18 2016-11-15 IDChecker, Inc. Identity verification using biometric data
CN103559813B (zh) * 2013-11-07 2015-12-02 大连东方之星信息技术有限公司 一种应用认知度方法的统计分析方法
CN103559812B (zh) * 2013-11-07 2016-01-20 大连东方之星信息技术有限公司 一种教育督导评价报告生成系统
CN105874502A (zh) * 2014-01-03 2016-08-17 格莱姆会议有限责任公司 用于确证受试者的系统和方法
WO2015112456A1 (en) * 2014-01-22 2015-07-30 AlvaEDU, Inc. On-line education system with synchronous lectures
US9560413B2 (en) 2014-02-24 2017-01-31 Rovi Guides, Inc. Systems and methods for notifying a user when activity level exceeds an authorization level
US20150262496A1 (en) * 2014-03-14 2015-09-17 Kadenze, Inc. Multimedia educational content delivery with identity authentication and related compensation model
WO2015179428A1 (en) * 2014-05-19 2015-11-26 Kadenze, Inc. User identity authentication techniques for on-line content or access
US10095850B2 (en) 2014-05-19 2018-10-09 Kadenze, Inc. User identity authentication techniques for on-line content or access
US9665754B2 (en) 2014-05-28 2017-05-30 IDChecker, Inc. Identification verification using a device with embedded radio-frequency identification functionality
US11461567B2 (en) 2014-05-28 2022-10-04 Mitek Systems, Inc. Systems and methods of identification verification using hybrid near-field communication and optical authentication
US11640582B2 (en) 2014-05-28 2023-05-02 Mitek Systems, Inc. Alignment of antennas on near field communication devices for communication
WO2016040506A1 (en) * 2014-09-13 2016-03-17 Advanced Elemental Technologies, Inc. Methods and systems for secure and reliable identity-based computing
SE542684C2 (en) * 2017-04-21 2020-06-23 Sundeby Bjoern Interactive environment for the learning process
US20190087786A1 (en) * 2017-09-19 2019-03-21 Expo Inc. System and method for automated lead retrieval and attendance tracking
CN109801193B (zh) * 2017-11-17 2020-09-15 深圳市鹰硕教育服务股份有限公司 一种具有语音评价功能的跟随教学系统
CN109615961A (zh) * 2019-01-31 2019-04-12 华中师范大学 一种课堂教学师生互动网络系统与方法
CN112289100A (zh) * 2019-07-25 2021-01-29 上海力本规划建筑设计有限公司 一种智慧教室系统
US12045897B2 (en) 2019-11-04 2024-07-23 Hsc Acquisition, Llc Cloud-based enterprise platform for event handling
CN111666862A (zh) * 2020-06-01 2020-09-15 北京软通智慧城市科技有限公司 一种考勤统计方法、装置、系统及存储介质
CN112738546A (zh) * 2020-12-28 2021-04-30 上海知到知识数字科技有限公司 一种用于远程教育的视频服务系统
WO2022204338A1 (en) * 2021-03-26 2022-09-29 HandPunch Guys LLC Systems and methods for machine learning-informed recording of time activities with an automated electronic time recording system
CN113469157B (zh) * 2021-09-06 2021-12-17 深圳启程智远网络科技有限公司 一种基于大数据的学生出勤管理系统及方法
CN114615223B (zh) * 2022-05-11 2022-08-09 深圳市永兴元科技股份有限公司 考试无人监控即时通讯方法、设备、系统及存储介质
WO2023225078A1 (en) 2022-05-20 2023-11-23 Advanced Elemental Technologies, Inc. Systems and methods for a connected computing resource and event/activity identification information infrastructure using near existential or existential biometric identification of humans

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1072297A1 (en) * 1998-12-24 2001-01-31 Sony Corporation Information processor, portable device, electronic pet device, recorded medium on which information processing procedure is recorded, and information processing method
JP2001034381A (ja) * 1999-07-26 2001-02-09 Sharp Corp ディスプレイ制御装置、制御方法および記録媒体
JP2001188759A (ja) * 1999-12-28 2001-07-10 Ever Prospect Internatl Ltd 個人認証方法およびそのシステム
JP2001318892A (ja) * 2000-05-11 2001-11-16 Cyber Sign Japan Inc オンラインサービスにおける個人認証方法及びオンラインサービス提供装置
JP2002041458A (ja) * 2000-07-26 2002-02-08 Fujitsu Ltd 本人着席の確認システム、配信装置、通信端末装置、及び本人着席の確認方法
US20020046139A1 (en) * 2000-08-25 2002-04-18 Fujitsu Limited Commerce information distribution system and commerce information managing method
US20020091658A1 (en) * 2000-08-25 2002-07-11 Jung-Hoon Bae Multimedia electronic education system and method
JP2002238029A (ja) * 2001-12-28 2002-08-23 Mega Chips Corp 画像蓄積装置

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63291153A (ja) * 1987-05-22 1988-11-29 Toshiba Corp 個人認証装置
US5915973A (en) * 1997-03-11 1999-06-29 Sylvan Learning Systems, Inc. System for administration of remotely-proctored, secure examinations and methods therefor
WO1998053430A1 (en) * 1997-05-24 1998-11-26 Fox R Barry Continuing education tracking and reporting system and method
US6029043A (en) * 1998-01-29 2000-02-22 Ho; Chi Fai Computer-aided group-learning methods and systems
US6219639B1 (en) * 1998-04-28 2001-04-17 International Business Machines Corporation Method and apparatus for recognizing identity of individuals employing synchronized biometrics
JP2000276446A (ja) * 1999-03-24 2000-10-06 Toshiba Corp 本人確認装置及び方法
US7590538B2 (en) * 1999-08-31 2009-09-15 Accenture Llp Voice recognition system for navigating on the internet
JP4432181B2 (ja) * 2000-01-18 2010-03-17 ソニー株式会社 認証装置および認証方法、データ処理装置およびデータ処理方法、並びに記録媒体
WO2001073724A1 (en) * 2000-03-24 2001-10-04 Richter David A Computer-based instructional system with student verification feature
US20020031230A1 (en) * 2000-08-15 2002-03-14 Sweet William B. Method and apparatus for a web-based application service model for security management
US20020059532A1 (en) * 2000-11-16 2002-05-16 Teruaki Ata Device and method for authentication
JP2002211358A (ja) * 2000-11-16 2002-07-31 Matsushita Electric Ind Co Ltd 認証装置および認証方法
JP2002236666A (ja) * 2001-02-09 2002-08-23 Matsushita Electric Ind Co Ltd 個人認証装置
JP3964159B2 (ja) * 2001-06-25 2007-08-22 株式会社ノヴァ 通信回線を使用した教育サービスシステムおよび教育サービス提供方法
US20030007609A1 (en) * 2001-07-03 2003-01-09 Yuen Michael S. Method and apparatus for development, deployment, and maintenance of a voice software application for distribution to one or more consumers
KR100406307B1 (ko) * 2001-08-09 2003-11-19 삼성전자주식회사 음성등록방법 및 음성등록시스템과 이에 기초한음성인식방법 및 음성인식시스템
TWI299471B (en) * 2001-08-24 2008-08-01 Toshiba Kk Person recognition apparatus
US6879709B2 (en) * 2002-01-17 2005-04-12 International Business Machines Corporation System and method for automatically detecting neutral expressionless faces in digital images
US7219062B2 (en) * 2002-01-30 2007-05-15 Koninklijke Philips Electronics N.V. Speech activity detection using acoustic and facial characteristics in an automatic speech recognition system
US7490085B2 (en) * 2002-12-18 2009-02-10 Ge Medical Systems Global Technology Company, Llc Computer-assisted data processing system and method incorporating automated learning

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1072297A1 (en) * 1998-12-24 2001-01-31 Sony Corporation Information processor, portable device, electronic pet device, recorded medium on which information processing procedure is recorded, and information processing method
JP2001034381A (ja) * 1999-07-26 2001-02-09 Sharp Corp ディスプレイ制御装置、制御方法および記録媒体
JP2001188759A (ja) * 1999-12-28 2001-07-10 Ever Prospect Internatl Ltd 個人認証方法およびそのシステム
JP2001318892A (ja) * 2000-05-11 2001-11-16 Cyber Sign Japan Inc オンラインサービスにおける個人認証方法及びオンラインサービス提供装置
JP2002041458A (ja) * 2000-07-26 2002-02-08 Fujitsu Ltd 本人着席の確認システム、配信装置、通信端末装置、及び本人着席の確認方法
US20020046139A1 (en) * 2000-08-25 2002-04-18 Fujitsu Limited Commerce information distribution system and commerce information managing method
US20020091658A1 (en) * 2000-08-25 2002-07-11 Jung-Hoon Bae Multimedia electronic education system and method
JP2002238029A (ja) * 2001-12-28 2002-08-23 Mega Chips Corp 画像蓄積装置

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006030513A (ja) * 2004-07-15 2006-02-02 Hitachi Ltd 教育支援装置及び教育情報管理サーバ
JP4651981B2 (ja) * 2004-07-15 2011-03-16 株式会社日立製作所 教育情報管理サーバ
JP2009520215A (ja) * 2005-12-28 2009-05-21 インサイドアールエフ カンパニー リミテッド ユビキタス教育環境に適した双方向講義支援システム及び方法
JP2011502296A (ja) * 2007-10-19 2011-01-20 アーテック・グループ・インコーポレーテッド バイオメトリック行動コンテキストベースの人間認識のためのシステム及び方法
WO2009069238A1 (ja) * 2007-11-26 2009-06-04 Kabushiki Kaisha Srj バーチャルスクールシステムおよびスクールシティシステム
JP2009139667A (ja) * 2007-12-06 2009-06-25 Nec Corp 遠隔講義システム
JP2010086291A (ja) * 2008-09-30 2010-04-15 Fujitsu Frontech Ltd 携帯情報端末、時間割掲示・情報中継装置、および出欠管理兼表示コンテンツ制御システム
US11227356B2 (en) 2012-11-30 2022-01-18 Maxell, Ltd. Picture display device, and setting modification method and setting modification program therefor
US10097900B2 (en) 2012-11-30 2018-10-09 Maxell, Ltd. Picture display device, and setting modification method and setting modification program therefor
US9665922B2 (en) 2012-11-30 2017-05-30 Hitachi Maxell, Ltd. Picture display device, and setting modification method and setting modification program therefor
US11823304B2 (en) 2012-11-30 2023-11-21 Maxell, Ltd. Picture display device, and setting modification method and setting modification program therefor
JP2018511890A (ja) * 2014-12-22 2018-04-26 マカフィー, エルエルシー オンライン教育におけるリアルタイムユーザ検証のためのシステム及び方法
US12046074B2 (en) 2014-12-22 2024-07-23 Mcafee, Llc Systems and methods for real-time user verification in online education
JP2016021065A (ja) * 2015-07-21 2016-02-04 日立マクセル株式会社 映像表示装置
JP2018060374A (ja) * 2016-10-05 2018-04-12 富士ゼロックス株式会社 情報処理装置、評価システムおよびプログラム
JP2017142500A (ja) * 2017-02-22 2017-08-17 日立マクセル株式会社 映像表示装置
CN110533971A (zh) * 2019-07-19 2019-12-03 山东至信信息科技有限公司 一种深入互动的智能教学系统
JP7412496B2 (ja) 2020-03-24 2024-01-12 楽天グループ株式会社 生体(liveness)検出検証方法、生体検出検証システム、記録媒体、及び生体検出検証システムの訓練方法
JP2022177229A (ja) * 2020-03-24 2022-11-30 楽天グループ株式会社 生体(liveness)検出検証方法、生体検出検証システム、記録媒体、及び生体検出検証システムの訓練方法
CN111611854A (zh) * 2020-04-16 2020-09-01 杭州电子科技大学 一种基于模式识别的课堂情况评价方法
CN111611854B (zh) * 2020-04-16 2023-09-01 杭州电子科技大学 一种基于模式识别的课堂情况评价方法

Also Published As

Publication number Publication date
KR20050074443A (ko) 2005-07-18
JPWO2004029905A1 (ja) 2006-01-26
CA2500998A1 (en) 2004-04-08
US20060057550A1 (en) 2006-03-16
AU2003266591A1 (en) 2004-04-19
TW200407807A (en) 2004-05-16
EP1544831A1 (en) 2005-06-22
AU2003266591B2 (en) 2007-11-01
JP3930022B2 (ja) 2007-06-13
CN1685380A (zh) 2005-10-19
TWI294598B (en) 2008-03-11

Similar Documents

Publication Publication Date Title
WO2004029905A1 (ja) 遠隔教育システム、受講確認方法および受講確認プログラム
JP3964159B2 (ja) 通信回線を使用した教育サービスシステムおよび教育サービス提供方法
KR101012420B1 (ko) 인터넷을 이용한 수준별 다자간 그룹 외국어 회화 학습 시스템
WO2003001808A1 (fr) Systeme de service de communication d'informations multimedia
US20120244508A1 (en) Method for remotely proctoring tests taken by computer over the internet
TWI222042B (en) Method of providing education services for free talk services
JP7119615B2 (ja) サーバ、音データ評価方法、プログラム、通信システム
JP2002297011A (ja) 遠隔教育システム
JP2007011389A (ja) 通信回線を使用した教育サービスシステムおよび教育サービス提供方法
JP2004333525A (ja) 双方向通信システム、サーバ、電子講義方法、ならびに、プログラム
US11663928B2 (en) Method and devices for on-demand role playing
TW202347275A (zh) 直播教學系統
JP2023145956A (ja) 情報処理システム
KR20200014127A (ko) 원격교육시스템과수강확인방법및프로그램
KR20090002136A (ko) 사용자 맞춤형 실시간 평가 및 학습 시스템 및 그 방법
JP2002072846A (ja) 教育システム
KR20020092515A (ko) 온라인 강의의 수강 인증 방법
JP2002169901A (ja) インターネットを利用した集合参加型教育システム
CN110853435A (zh) 远程教学培训系统和方法
JP2005070532A (ja) 遠隔対話型教育装置
KR102623534B1 (ko) 능동적 수업 참여가 가능한 원격 강의 시스템
JP2012039288A (ja) イーラーニング・テレビ会議システム及び方法、イーラーニングシステム
JP2001209687A (ja) 総会開催方法
JP2002344919A (ja) 通信を利用した会議におけるログアウトシステム
CN113256454A (zh) 班级课程管理系统

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 1020057003805

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 167656

Country of ref document: IL

WWE Wipo information: entry into national phase

Ref document number: 2004539511

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 20038232022

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2500998

Country of ref document: CA

WWE Wipo information: entry into national phase

Ref document number: 2003798474

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2003266591

Country of ref document: AU

WWE Wipo information: entry into national phase

Ref document number: 704/KOLNP/2005

Country of ref document: IN

WWP Wipo information: published in national office

Ref document number: 2003798474

Country of ref document: EP

WWP Wipo information: published in national office

Ref document number: 1020057003805

Country of ref document: KR

ENP Entry into the national phase

Ref document number: 2006057550

Country of ref document: US

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 10528641

Country of ref document: US

WWP Wipo information: published in national office

Ref document number: 10528641

Country of ref document: US

ENP Entry into the national phase

Ref document number: 2003266591

Country of ref document: AU

Date of ref document: 20030925

Kind code of ref document: B