KR102446665B1 - A server providing a teaching system using a multi-party video conferencing service and an operation method thereof - Google Patents

A server providing a teaching system using a multi-party video conferencing service and an operation method thereof Download PDF

Info

Publication number
KR102446665B1
KR102446665B1 KR1020220017003A KR20220017003A KR102446665B1 KR 102446665 B1 KR102446665 B1 KR 102446665B1 KR 1020220017003 A KR1020220017003 A KR 1020220017003A KR 20220017003 A KR20220017003 A KR 20220017003A KR 102446665 B1 KR102446665 B1 KR 102446665B1
Authority
KR
South Korea
Prior art keywords
server
participation
terminal
teaching
learning
Prior art date
Application number
KR1020220017003A
Other languages
Korean (ko)
Inventor
이종환
김미정
이종은
강윤정
이수안
김수빈
Original Assignee
주식회사 스타포레스트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 스타포레스트 filed Critical 주식회사 스타포레스트
Priority to KR1020220118323A priority Critical patent/KR20220136297A/en
Priority to KR1020220118324A priority patent/KR20220136298A/en
Application granted granted Critical
Publication of KR102446665B1 publication Critical patent/KR102446665B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • G06Q50/205Education administration or guidance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014Hand-worn input/output arrangements, e.g. data gloves
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Human Computer Interaction (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • General Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Computer And Data Communications (AREA)

Abstract

A lesson system using a multi-party image conference service according to embodiments of the present invention includes: a server which manages learners' personal learning information and provides content according to multi-party image conference services and lesson modes; a control device for accessing the server and controlling the content; and a plurality of terminal devices accessing the server, receiving the content, and transmitting information on learners' participation in lessons.

Description

다자간 영상 회의 서비스를 이용한 교습 시스템을 제공하는 서버 및 그 동작 방법{A SERVER PROVIDING A TEACHING SYSTEM USING A MULTI-PARTY VIDEO CONFERENCING SERVICE AND AN OPERATION METHOD THEREOF}A server providing a teaching system using a multi-party video conferencing service and an operation method thereof

본 발명의 실시예들은 다자간 영상 회의 서비스를 이용한 교습 시스템을 제공하는 서버 및 그 동작 방법에 대한 것이다.Embodiments of the present invention relate to a server providing a teaching system using a multi-party video conferencing service and an operating method thereof.

최근 오프라인 상에서 이루어지던 서비스 및 행사가 비대면 방식으로 대체되어 온라인 상에서 이루어짐에 따라 오프라인에서 이루어지던 다양한 활동들이 온라인 상에서도 이루어질 수 있도록 하는 지원하는 기술적 지원이 요구되고 있는 실정이다. 예를 들어, 교육 관련 분야에서 교습자는 서로 다른 공간에 있는 학생들을 대상으로 비대면 방식으로 수업을 진행함에 따라 수업에 참여하는 학생들의 각각에 대한 관리 및 학습 태도에 대한 평가를 하기 위한 시스템이 요구된다.Recently, as offline services and events have been replaced by non-face-to-face methods and are conducted online, technical support for supporting various offline activities to be performed online is required. For example, in the field of education, teachers need a system to evaluate the management and learning attitudes of each of the students participating in the class as they conduct classes in a non-face-to-face manner for students in different spaces. do.

관련 선행기술로, 한국 등록특허공보) 제 10-2336574호(발명의 명칭: 비대면 학습자의 영상 이미지를 이용하는 학습 지도 방법 및 이에 사용되는 관리 서버)가 있다.As a related prior art, there is a Korean Patent Publication No. 10-2336574 (Title of the invention: a learning guidance method using a non-face-to-face   learner's video image and a management server used therein).

위에서 설명한 배경기술은 발명자가 본원의 개시 내용을 도출하는 과정에서 보유하거나 습득한 것으로서, 반드시 본 출원 전에 일반 공중에 공개된 공지기술이라고 할 수는 없다.The background art described above is possessed or acquired by the inventor in the process of deriving the disclosure of the present application, and cannot necessarily be said to be a known technology disclosed to the general public prior to the present application.

본 발명에 따른 실시예들은, 물리적으로 서로 다른 공간에 있는 학습자를 대상으로 원활한 비대면 수업 진행하고 학습자의 학습 관리 및 평가를 할 수 있도록 다자간 영상 회의 서비스를 이용한 교습 시스템을 제공하는 방법을 제공할 수 있다.Embodiments according to the present invention provide a method of providing a teaching system using a multi-party video conferencing service to smoothly conduct non-face-to-face classes for learners in physically different spaces and to manage and evaluate learners' learning. can

실시예들에서 이루고자 하는 기술적 과제들은 이상에서 언급한 사항들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 이하 설명할 다양한 실시예들로부터 당해 기술분야에서 통상의 지식을 가진 자에 의해 고려될 수 있다.The technical problems to be achieved in the embodiments are not limited to those mentioned above, and other technical problems not mentioned may be considered by those of ordinary skill in the art from various embodiments to be described below. can

본 발명의 일 실시예들에 따른 다자간 영상 회의 서비스를 이용한 교습 시스템은 학습자의 개인 학습 정보를 관리하고, 다자간 영상 회의 서비스 및 교습 모드에 따른 콘텐츠를 제공하는 서버, 상기 서버에 접속하여 상기 콘텐츠를 제어하기 위한 제어 장치, 및 상기 서버에 접속하여 상기 콘텐츠를 수신하고 학습자의 교습 참여 정보를 송신하는 복수의 단말 장치를 포함하고, 상기 교습 모드는 수업을 진행하기 위한 제1 모드, 자율 학습을 관리하기 위한 제2 모드, 및 학습의 정도를 평가하기 위한 제3 모드를 포함하고, 상기 서버는 상기 제어 장치의 상기 서버에 대한 접속을 확인한 후 상기 다자간 영상 회의 서비스를 상기 복수의 단말 장치에 제공하고, 상기 복수의 단말 장치로부터 영상 데이터를 수신하여 상기 제어 장치에 송신하고, 상기 다자간 영상 회의 서비스의 제공에 대응하여 상기 제어 장치의 제1 사용자 입력 또는 상기 서버의 현재 시간 중 적어도 하나에 기반하여 상기 교습 모드를 실행하고, 상기 교습 모드가 상기 제1 모드에 해당하는 경우 상기 복수의 단말 장치로부터 상기 학습자의 교습 참여 정보 중 제1 교습 참여 정보를 수신하고, 상기 제1 교습 참여 정보를 기반으로 상기 수업에 대한 참여도를 계산하여 산출하고, 상기 산출된 수업에 대한 참여도를 기반으로 상기 복수의 단말 장치를 제1 단말 및 제2 단말로 그룹핑하고, 상기 제어 장치로부터 수신한 제1 교습 데이터를 상기 제1 단말로 송신하고, 상기 제어 장치로부터 수신한 제2 교습 데이터를 상기 제2 단말로 송신하고, 상기 교습 모드가 상기 제2 모드에 해당하는 경우, 상기 복수의 단말 장치로부터 상기 사용자의 교습 참여 정보 중 제2 교습 참여 정보를 수신하고, 상기 제2 교습 참여 정보를 기반으로 상기 자율 학습에 대한 참여도를 계산하여 산출하고, 상기 산출된 자율 학습에 대한 참여도를 기반으로 상기 복수의 단말 장치를 제3 단말 및 제4 단말로 그룹핑하고, 상기 제3 단말은 상기 산출된 자율 학습에 대한 참여도가 기 설정된 기준 조건을 만족하지 못하는 단말을 포함하고, 상기 제3 단말로 상기 제어 장치로 수신한 학습 요청 데이터를 송신하고, 상기 교습 모드가 상기 제3 모드에 해당하는 경우, 상기 제어 장치의 제2 사용자 입력 또는 기 설정된 기준 값을 기반으로 상기 제1 모드 실행에 따른 상기 수업에 대한 참여도 및 상기 제2 모드 실행에 따른 상기 자율 학습에 대한 참여도에 대한 가중치를 설정하고, 상기 수업에 대한 참여도에 대한 가중치 및 상기 자율 학습에 대한 참여도에 대한 가중치를 기반으로 상기 복수의 단말 장치 각각에 대한 학습 수행 점수를 산정하고, 상기 복수의 단말 장치 각각에 대한 학습 수행 점수를 기반으로 상기 학습 수행 점수에 대한 영상 데이터를 송신하고, 상기 교습 점수에 따라 상기 복수의 단말 장치를 그룹핑하고, 상기 제1 교습 참여 정보는 사용자의 상기 서버의 접속 시간(time), 사용자의 시선 변화에 대한 정보, 상기 사용자의 손 움직임에 대한 정보, 및 상기 사용자의 질문 횟수에 대한 정보를 포함하고, 상기 제2 교습 참여 정보는 상기 자율 학습을 위한 학습 목록에 대한 정보, 및 사용자의 서버 접속 기간에 대한 정보를 포함할 수 있다.A teaching system using a multi-party video conferencing service according to an embodiment of the present invention manages a learner's personal learning information, provides a multi-party video conferencing service and content according to a teaching mode, and accesses the server to provide the content. a control device for controlling the control device, and a plurality of terminal devices accessing the server to receive the content and transmit learner's teaching participation information, wherein the teaching mode manages a first mode for conducting a class, self-learning and a third mode for evaluating the degree of learning, wherein the server provides the multi-party video conferencing service to the plurality of terminal devices after confirming the connection of the control device to the server, , receiving video data from the plurality of terminal devices, transmitting the video data to the control device, and based on at least one of a first user input of the control device or a current time of the server in response to the provision of the multi-party video conferencing service. Execute a teaching mode, and when the teaching mode corresponds to the first mode, receive first teaching participation information among the teaching participation information of the learner from the plurality of terminal devices, and based on the first teaching participation information The degree of participation in the class is calculated and calculated, and the plurality of terminal devices are grouped into a first terminal and a second terminal based on the calculated degree of participation in the class, and the first teaching data received from the control device is used. When the first terminal is transmitted, and second teaching data received from the control device is transmitted to the second terminal, and the teaching mode corresponds to the second mode, the user's instruction is performed by the plurality of terminal devices. Receives the second teaching participation information among the participation information, calculates and calculates the degree of participation in the self-learning based on the second lesson participation information, and the plurality of terminals based on the calculated participation in the self-learning Group the device into a third terminal and a fourth terminal, and the third terminal participates in the calculated self-learning Including a terminal that does not satisfy the preset reference condition, and transmits the learning request data received to the control device to the third terminal, and when the teaching mode corresponds to the third mode, the second of the control device 2 Set a weight for the degree of participation in the class according to the execution of the first mode and the degree of participation in the self-learning according to the execution of the second mode based on a user input or a preset reference value, Calculate a learning performance score for each of the plurality of terminal devices based on a weight for participation and a weight for participation in the self-learning, and learn the learning based on a learning performance score for each of the plurality of terminal devices Transmitting image data for a performance score, grouping the plurality of terminal devices according to the teaching score, and the first lesson participation information includes information about a user's access time to the server, information about a change in the user's gaze, It includes information on the user's hand movement, and information on the number of questions of the user, and the second lesson participation information includes information on the learning list for the self-learning, and information on the user's server access period. may include

본 발명의 실시예들에 따르면, 서로 다른 공간에서 비대면으로 수업을 참여하는 다수의 학생들의 각각에 대해 관리를 일률적으로 수행할 수 있다.According to embodiments of the present invention, it is possible to uniformly manage each of a plurality of students participating in a class in different spaces non-face-to-face.

또한, 실제 오프라인에서 진행하는 수업 환경과 유사한 교습 시스템을 구현함으로써 다수의 학생들의 수업에 대한 몰입도를 높일 수 있다. In addition, by implementing a teaching system similar to the actual offline class environment, it is possible to increase the immersion in the class of a large number of students.

또한, 교습자는 수업 진행 및 학습 관리에 있어서 학습자의 참여도를 산출하고 이를 활용하여 학습에 대한 평가를 효율적으로 할 수 있다. 이뿐만 아니라 학습에 대한 평가를 수행 과정에서 평가 요소에 대한 가중치를 개별적으로 설정함으로써 다양한 교습 환경을 반영할 수 있다.In addition, the instructor can calculate the learner's participation in class progress and learning management, and use it to efficiently evaluate learning. In addition, various teaching environments can be reflected by individually setting weights for evaluation factors in the process of evaluating learning.

실시예들로부터 얻을 수 있는 효과들은 이상에서 언급된 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 이하의 상세한 설명을 기반으로 당해 기술분야에서 통상의 지식을 가진 자에게 명확하게 도출되고 이해될 수 있다.Effects obtainable from the embodiments are not limited to the effects mentioned above, and other effects not mentioned are clearly derived and understood by those of ordinary skill in the art based on the following detailed description. can be

실시예들에 대한 이해를 돕기 위해 상세한 설명의 일부로 포함된, 첨부 도면은 다양한 실시예들을 제공하고, 상세한 설명과 함께 다양한 실시예들의 기술적 특징을 설명한다.
도 1은 일 실시예에 따른, 다자간 영상 회의 서비스를 이용한 교습 시스템을 나타내는 개략도이다.
도 2는 일 실시예에 따른, 제어 장치를 나타내는 블록도이다.
도 3은 일 실시예에 따른, 다자간 영상 회의 서비스를 이용한 교습 시스템을 설명하기 위한 순서도이다.
도 4는 일 실시예에 따른, 다자간 영상 회의 서비스를 이용한 교습 시스템을 설명하기 위한 흐름도이다.
도 5는 일 실시예에 따른, 제어 장치의 디스플레이를 나타낸다.
도 6은 일 실시예에 따른 전자 장치의 구성을 도시한 도면이다.
도 7은 일 실시예에 따른 프로그램의 구성을 도시한 도면이다.
BRIEF DESCRIPTION OF THE DRAWINGS The accompanying drawings, which are included as part of the detailed description to aid understanding of the embodiments, provide various embodiments and, together with the detailed description, explain technical features of the various embodiments.
1 is a schematic diagram illustrating a teaching system using a multi-party video conferencing service, according to an embodiment.
2 is a block diagram illustrating a control device according to an exemplary embodiment.
3 is a flowchart illustrating a teaching system using a multi-party video conferencing service, according to an embodiment.
4 is a flowchart illustrating a teaching system using a multi-party video conferencing service, according to an embodiment.
5 shows a display of a control device according to an embodiment.
6 is a diagram illustrating a configuration of an electronic device according to an exemplary embodiment.
7 is a diagram illustrating a configuration of a program according to an exemplary embodiment.

이하의 실시예들은 실시예들의 구성요소들과 특징들을 소정 형태로 결합한 것들이다. 각 구성요소 또는 특징은 별도의 명시적 언급이 없는 한 선택적인 것으로 고려될 수 있다. 각 구성요소 또는 특징은 다른 구성요소나 특징과 결합되지 않은 형태로 실시될 수 있다. 또한, 일부 구성요소들 및/또는 특징들을 결합하여 다양한 실시예들을 구성할 수도 있다. 다양한 실시예들에서 설명되는 동작들의 순서는 변경될 수 있다. 어느 실시예의 일부 구성이나 특징은 다른 실시예에 포함될 수 있고, 또는 다른 실시예의 대응하는 구성 또는 특징과 교체될 수 있다.The following embodiments combine elements and features of the embodiments in a predetermined form. Each component or feature may be considered optional unless explicitly stated otherwise. Each component or feature may be implemented in a form that is not combined with other components or features. In addition, various embodiments may be configured by combining some components and/or features. The order of operations described in various embodiments may be changed. Some features or features of one embodiment may be included in another embodiment, or may be replaced with corresponding features or features of another embodiment.

도면에 대한 설명에서, 다양한 실시예들의 요지를 흐릴 수 있는 절차 또는 단계 등은 기술하지 않았으며, 당해 기술분야에서 통상의 지식을 가진 자의 수준에서 이해할 수 있을 정도의 절차 또는 단계는 또한 기술하지 아니하였다.In the description of the drawings, procedures or steps that may obscure the gist of various embodiments are not described, and procedures or steps that can be understood at the level of those of ordinary skill in the art are also not described. did.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함(comprising 또는 including)"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "...부", "...기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다. 또한, "일(a 또는 an)", "하나(one)", "그(the)" 및 유사 관련어는 다양한 실시예들을 기술하는 문맥에 있어서(특히, 이하의 청구항의 문맥에서) 본 명세서에 달리 지시되거나 문맥에 의해 분명하게 반박되지 않는 한, 단수 및 복수 모두를 포함하는 의미로 사용될 수 있다.Throughout the specification, when a part is said to "comprising or including" a certain component, it does not exclude other components unless otherwise stated, meaning that other components may be further included. do. In addition, terms such as "... unit", "... group", and "module" described in the specification mean a unit that processes at least one function or operation, which is hardware or software or a combination of hardware and software. can be implemented as Also, "a or an", "one", "the" and like related terms are used herein in the context of describing various embodiments (especially in the context of the claims that follow). Unless otherwise indicated or clearly contradicted by context, it may be used in a sense including both the singular and the plural.

이하, 다양한 실시예들에 따른 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다. 첨부된 도면과 함께 이하에 개시될 상세한 설명은 다양한 실시예들의 예시적인 실시형태를 설명하고자 하는 것이며, 유일한 실시형태를 나타내고자 하는 것이 아니다.Hereinafter, embodiments according to various embodiments will be described in detail with reference to the accompanying drawings. DETAILED DESCRIPTION The detailed description set forth below in conjunction with the appended drawings is intended to describe exemplary embodiments of various embodiments, and is not intended to represent the only embodiments.

또한, 다양한 실시예들에서 사용되는 특정(特定) 용어들은 다양한 실시예들의 이해를 돕기 위해서 제공된 것이며, 이러한 특정 용어의 사용은 다양한 실시예들의 기술적 사상을 벗어나지 않는 범위에서 다른 형태로 변경될 수 있다.In addition, specific terms used in various embodiments are provided to help the understanding of various embodiments, and the use of these specific terms may be changed to other forms without departing from the technical spirit of various embodiments. .

도 1은 일 실시예에 따른, 다자간 영상 회의 서비스를 이용한 교습 시스템을 나타내는 개략도이다. 다자간 영상 회의 서비스를 이용한 교습 시스템은 제어 장치(101), 서버(103), 및 단말 장치(102)를 포함할 수 있다.1 is a schematic diagram illustrating a teaching system using a multi-party video conferencing service, according to an embodiment. A teaching system using a multi-party video conferencing service may include a control device 101 , a server 103 , and a terminal device 102 .

도 1을 참고하면, 제어 장치(101) 및 단말 장치(102)는 각각 등록된 계정에 기반하여 다자간 영상 회의 서비스를 이용할 수 있다. 예를 들어, 제어 장치(101) 및 단말 장치(102)의 각각에 대한 계정은 서버(103)에 등록될 수 있다. 서버(103)에 제어 장치(101) 및 단말 장치(102)의 각각에 대한 계정이 등록된 경우, 제어 장치(101) 및 단말 장치(102)는 서버(103)를 통해 각종 데이터를 공유할 수 있다. 제어 장치(101) 및 단말 장치(102)의 각각에서 입력 받은 다른 장치(예: 단말 장치(102) 및 제어 장치(101))에 대한 제어 명령을 서버(103)를 통해 전달할 수 있다.Referring to FIG. 1 , the control device 101 and the terminal device 102 may use a multi-party video conferencing service based on each registered account. For example, an account for each of the control device 101 and the terminal device 102 may be registered in the server 103 . When an account for each of the control device 101 and the terminal device 102 is registered in the server 103 , the control device 101 and the terminal device 102 can share various data through the server 103 . have. Control commands for other devices (eg, the terminal device 102 and the control device 101 ) received from each of the control device 101 and the terminal device 102 may be transmitted through the server 103 .

일 실시예에서, 명령 또는 데이터는 네트워크에 연결된 서버(103)를 통해서 제어 장치(101)와 단말 장치(102) 간에 송신 또는 수신될 수 있다.In an embodiment, the command or data may be transmitted or received between the control device 101 and the terminal device 102 via the server 103 connected to the network.

일 실시예에서, 제어 장치(101)는 다자간 영상 회의 서비스를 이용한 교습 시스템에 있어서 교습자의 전자 장치에 해당할 수 있으며, 단말 장치(102)는 다자간 영상 회의 서비스를 이용한 교습 시스템에 있어서 학습자의 전자 장치에 해당할 수 있다. 제어 장치(101)는 서버(103)를 통해 단말 장치(102)를 제어하기 위한 제어 명령을 송신할 수 있다. 제어 장치(101)에 의해 제어되는 단말 장치(102)는 복수의 단말 장치를 포함할 수 있다. 단말 장치(102)는 다자간 영상 회의 서비스를 이용한 교습 시스템에 참여하는 학습자의 수에 대응할 수 있다. 예를 들어, 다자간 영상 회의 서비스를 이용한 교슴 시스템에 참여하는 학습자가 3명에 해당하는 경우, 단말 장치(102)는 제1 학습자에 대응되는 제1 단말 장치(102a), 제2 학습자에 대응하는 제2 단말 장치(102b), 제3 학습자에 대응하는 제3 단말 장치(103c)를 포함할 수 있다. 본 문서에서 단말 장치(102)는 복수의 단말 장치를 지칭할 수 있다.In an embodiment, the control device 101 may correspond to an electronic device of a teacher in a teaching system using a multi-party video conferencing service, and the terminal device 102 may be a learner's electronic device in a teaching system using a multi-party video conferencing service. It may correspond to the device. The control device 101 may transmit a control command for controlling the terminal device 102 through the server 103 . The terminal device 102 controlled by the control device 101 may include a plurality of terminal devices. The terminal device 102 may correspond to the number of learners participating in a teaching system using a multi-party video conferencing service. For example, if there are three learners participating in the social network system using the multi-party video conferencing service, the terminal device 102 may include a first terminal device 102a corresponding to the first learner, and a first terminal device 102a corresponding to the second learner. It may include a second terminal device 102b and a third terminal device 103c corresponding to the third learner. In this document, the terminal device 102 may refer to a plurality of terminal devices.

일 실시예에서, 제어 장치(101) 및 단말 장치(102)는 동일한 또는 다른 종류의 장치일 수 있다.In one embodiment, the control device 101 and the terminal device 102 may be the same or different types of devices.

일 실시예에서, 교습 시스템을 제공하는 서버(103)는 제어 장치(101)의 서버(103)에 대한 접속을 확인하여 다자간 영상 회의 서비스를 이용하기 위한 프로그램을 실행하여 다자간 영상 회의 서비스에 대한 권한을 단말 장치(102)에 제공하고 단말 장치(102)로부터 영상 데이터 및 교습 참여 정보를 수신할 수 있다. 서버(103)는 단말 장치(102)로부터 수신한 영상 데이터를 제어 장치(101)에 제공할 수 있다. 제어 장치(101)는 서버(103)로부터 수신한 단말 장치(120)의 영상 데이터를 실시간으로 디스플레이(예: 도 2의 디스플레이(220))에 출력할 수 있다. 제어 장치(101)는 상기 디스플레이에 출력되는 단말 장치(102)에 대한 영상 데이터에 대한 사용자 입력을 통해 단말 장치(102)를 제어할 수 있다. 여기서, 다자간 영상 회의 서비스를 위한 프로그램은 제어 장치(101) 및 단말 장치(102) 사이에 카메라를 통해 촬영한 영상 데이터를 상호 공유하여 스트리밍 및 제어하기 위한 프로그램을 포함할 수 있다.In one embodiment, the server 103 that provides the teaching system checks the connection to the server 103 of the control device 101 and executes a program for using the multi-party video conferencing service, thereby granting authority to the multi-party video conferencing service. may be provided to the terminal device 102 , and image data and teaching participation information may be received from the terminal device 102 . The server 103 may provide the image data received from the terminal device 102 to the control device 101 . The control device 101 may output the image data of the terminal device 120 received from the server 103 to a display (eg, the display 220 of FIG. 2 ) in real time. The control device 101 may control the terminal device 102 through a user input for image data for the terminal device 102 output on the display. Here, the program for the multi-party video conferencing service may include a program for sharing and streaming and controlling image data captured by a camera between the control device 101 and the terminal device 102 .

본 개시의 실시예들에 따른 서버(103)는 교습 모드에 따른 교습 시스템을 제공할 수 있다. 일 예시에서, 서버(103)는 다자간 영상 회의 서비스를 이용하기 위한 프로그램 실행에 대응하여 서버(103)는 제어 장치(101)에 대한 제1 사용자의 입력 또는 서버(103)의 현재 시간(time) 중 적어도 하나에 기반하여 교습 모드를 실행할 수 있다. 여기서, 교습 모드는 수업을 진행하기 위한 제1 모드, 자율 학습을 관리하기 위한 제2 모드, 학습자의 학습 정도를 평가하기 위한 제3 모드를 포함할 수 있다. 수업을 진행하기 위한 상기 제1 모드는 제어 장치(101)로부터 영상 데이터를 실시간으로 수신하여 단말 장치(102)에 제공하는 동작 및 단말 장치(102)로부터 영상 데이터 및 제1 교습 참여 정보를 수신하는 동작을 포함할 수 있다. 자율 학습을 관리하기 위한 상기 제2 모드는 단말 장치(102)로부터 영상 데이터 및 제2 교습 참여 정보를 실시간으로 수신하여 제어 장치(101)에 제공하는 동작을 포함할 수 있다. 학습자의 학습 정도를 평가하기 위한 상기 제3 모드는 상기 제1 모드에 따른 학습자의 수업에 대한 참여도 및 상기 제2 모드에 따른 학습자의 자율 학습에 대한 참여도를 기반으로 학습의 정도를 평가하는 동작을 포함할 수 있다.The server 103 according to embodiments of the present disclosure may provide a teaching system according to a teaching mode. In one example, the server 103 corresponds to the execution of the program for using the multi-party video conferencing service, and the server 103 receives the input of the first user to the control device 101 or the current time of the server 103 . The teaching mode may be executed based on at least one of Here, the teaching mode may include a first mode for conducting a class, a second mode for managing self-study, and a third mode for evaluating a learner's learning degree. The first mode for conducting a class is an operation of receiving video data from the control device 101 in real time and providing it to the terminal device 102 and receiving video data and first teaching participation information from the terminal device 102 . It can include actions. The second mode for managing self-learning may include an operation of receiving image data and second teaching participation information from the terminal device 102 in real time and providing it to the control device 101 . The third mode for evaluating the degree of learning of the learner is to evaluate the degree of learning based on the degree of participation of the learner in the class according to the first mode and the degree of participation of the learner in the self-learning according to the second mode. It can include actions.

일 실시예에서, 교습 시스템을 제공하는 서버(103)는 제어 장치(101)에 대한 제1 사용자 입력 또는 서버(103)의 현재 시간에 기반하여 상기 제1 모드, 상기 제2 모드, 및 상기 제3 모드 중 하나에 대한 교습 모드를 실행할 수 있다. 일 예시에서, 서버(103)의 현재 시간은 서버(103)에 대한 제어 장치(101)의 접속 시간에 대한 시점으로 결정할 수 있다. 예를 들어, 서버(103)는 제1 시간(예: 오전 8시부터 오후 12시)에 제어 장치(101)가 서버(103)에 접속하는 경우 수업을 진행하기 위한 제1 모드를 실행할 수 있다. 서버(103)는 제2 시간(예: 오후 12시부터 오후 4시)에 제어 장치(101)가 서버(103)에 접속하는 경우 자율 학습을 관리하기 위한 제2 모드를 실행할 수 있다. 서버(103)는 제3 시간(예: 오후 4시 이후)에 제어 장치(101)가 서버(103)가 접속하는 경우 학습자의 학습 정도를 평가하기 위한 제3 모드를 실행할 수 있다. 상기 제1 모드 내지 제3 모드 중 적어도 하나를 실행하기 위한 시간 설정은 제어 장치(101)에 대한 사용자 입력에 변경될 수 있다.In one embodiment, the server 103 providing the teaching system is configured to provide the first mode, the second mode, and the second mode based on a first user input to the control device 101 or a current time of the server 103 . You can run the teaching mode for one of 3 modes. In one example, the current time of the server 103 may be determined as a time point for the access time of the control device 101 to the server 103 . For example, when the control device 101 accesses the server 103 at a first time (eg, 8:00 am to 12:00 pm), the server 103 may execute the first mode for conducting a class. . When the control device 101 accesses the server 103 at a second time (eg, from 12:00 pm to 4:00 pm), the server 103 may execute the second mode for managing self-learning. The server 103 may execute the third mode for evaluating the learning degree of the learner when the control device 101 accesses the server 103 at a third time (eg, after 4:00 pm). A time setting for executing at least one of the first to third modes may be changed in response to a user input to the control device 101 .

일 실시예에서, 교습 시스템을 제공하는 서버(103)는 교습 모드 중 상기 제1 모드를 실행하는 경우, 서버(103)는 단말 장치(102)로부터 상기 교습 참여 정보 중 제1 교습 참여 정보를 수신할 수 있다. 일 예시에서, 상기 제1 교습 참여 정보는 단말 장치의 상기 서버의 접속 시간(time), 학습자의 시선 변화에 대한 정보, 상기 학습자의 손 움직임에 대한 정보, 및 상기 학습자의 질문 횟수에 대한 정보를 포함할 수 있다.In an embodiment, when the server 103 providing the teaching system executes the first mode among the teaching modes, the server 103 receives the first teaching participation information among the teaching participation information from the terminal device 102 . can do. In one example, the first teaching participation information includes information on the access time of the server of the terminal device, information on the learner's gaze change, information on the learner's hand movement, and information on the number of questions of the learner. may include

일 실시예에서, 서버(103)는 상기 제1 모드가 실행됨에 따라 단말 장치(102)로부터 수신한 제1 교습 참여 정보를 기반으로 수업에 대한 참여도를 산출할 수 있다. 제1 교습 참여 정보를 기반으로 수업에 대한 참여도를 산출하는 방법과 관련하여 도 3을 참고하여 상세히 설명한다.In an embodiment, the server 103 may calculate the degree of participation in the class based on the first lesson participation information received from the terminal device 102 as the first mode is executed. A method of calculating a degree of participation in a class based on the first class participation information will be described in detail with reference to FIG. 3 .

일 실시예에서, 서버(103)는 산출된 수업에 대한 참여도를 기반으로 단말 장치(102)를 제1 단말 및 제2 단말로 그룹핑할 수 있다. 서버(103)는 학습자 간 수준별 학습을 위해 산출된 수업에 대한 참여도를 및 기 설정된 기준 값을 비교하여 단말 장치(102)를 제1 단말 및 제2 단말로 그룹핑할 수 있다. 단말 장치(102)를 제1 단말 및 제2 단말로 그룹핑하기 위한 상기 기 설정된 기준 값은 제어 장치(101)에 의해 서버(103)에 저장된 기준 값을 포함할 수 있다. 상기 기 설정된 기준 값은 교습 내용 및 환경을 기초하여 제어 장치(101)에 대한 사용자 입력을 통해 결정될 수 있다 기 설정된 기준 값을 만족하는 수업에 대한 참여도에 대응하는 단말 장치(102)는 제1 단말로 분류되고, 만족하지 못하는 수업에 대한 참여도에 대응하는 단말 장치(102)는 제2 단말로 분류될 수 있다. 서버는(103)는 제1 단말로 분류된 단말 장치(102) 및 제2 단말로 분류된 단말 장치(102)의 각각에 대해서 구별되는 교습 데이터를 송신할 수 있다. In an embodiment, the server 103 may group the terminal device 102 into the first terminal and the second terminal based on the calculated degree of participation in the class. The server 103 may group the terminal device 102 into the first terminal and the second terminal by comparing the degree of participation in the class calculated for each level of learning among learners and a preset reference value. The preset reference value for grouping the terminal device 102 into the first terminal and the second terminal may include a reference value stored in the server 103 by the control device 101 . The preset reference value may be determined through a user input to the control device 101 based on the teaching content and environment. The terminal device 102 corresponding to the degree of participation in class satisfying the preset reference value is the first The terminal device 102 that is classified as a terminal and corresponds to a degree of participation in a class that is not satisfied may be classified as a second terminal. The server 103 may transmit distinct teaching data for each of the terminal device 102 classified as the first terminal and the terminal device 102 classified as the second terminal.

일 실시예에서, 서버(103)는 상기 제2 모드가 실행됨에 따라 단말 장치(102)로부터 수신한 제2 교습 참여 정보를 기반으로 자율 학습에 대한 참여도를 산출할 수 있다. 일 예시에서, 상기 제2 교습 참여 정보는 상기 자율 학습을 위한 학습 목록에 대한 정보 및 상기 학습자의 서버 접속 기간(period)에 대한 정보를 포함할 수 있다. 제2 교습 참여 정보를 기반으로 자율 학습에 대한 참여도를 산출하는 방법과 관련하여 도 3을 참고하여 상세히 설명한다.In an embodiment, the server 103 may calculate the degree of participation in self-learning based on the second teaching participation information received from the terminal device 102 as the second mode is executed. In one example, the second teaching participation information may include information on a learning list for the self-learning and information on a server access period of the learner. A method of calculating the degree of participation in self-learning based on the second teaching participation information will be described in detail with reference to FIG. 3 .

일 실시예에서, 서버(103)는 산출된 자율 학습에 대한 참여도를 기반으로 단말 장치(102)를 제3 단말 및 제4 단말로 그룹핑할 수 있다. 서버(103)는 학습자 간 학습 편차를 극복하기 위해 산출된 자율 학습에 대한 참여도 및 기 설정된 기준 값을 비교하여 단말 장치(102)를 제3 단말 및 제4 단말로 그룹핑할 수 있다. 단말 장치(102)를 제3 단말 및 제4 단말로 그룹핑하기 위한 상기 기 설정된 기준 값은 제어 장치(101)에 대한 사용자 입력에 의해 서버(103)에 저장된 기준 값을 포함할 수 있다. 일 예시에서, 자율 학습에 대한 참여도 및 상기 기 설정된 기준 값을 비교하여 상기 기 설정된 기준 값을 만족하지 못하는 자율 학습에 대한 참여도에 대응하는 단말 장치(102)는 제3 단말로 분류될 수 있다. 서버(103)는 제3 단말로 분류된 단말 장치(102)에 제어 장치(101)로부터 수신한 학습 요청 데이터를 송신할 수 있다. 일 예시에서, 제어 장치(101)는 서버(103)로 학습 요청 데이터를 송신할 수 있다. 단말 장치(102) 중 상기 제3 단말로 분류된 단말 장치는 서버(103)로부터 상기 학습 요청 데이터를 수신할 수 있다. 상기 학습 요청 데이터는 단말 장치(102)가 이수해야 하는 자율 학습 시간 및 서버(103)에 송신되어야 하는 자율 학습 데이터 등을 포함할 수 있으며, 상기 제3 단말로 분류된 단말 장치(102)가 이수해야하는 자율 학습 시간은)에 서버(103) 접속되어야 하는 기간(period)로 판단될 수 있다.In an embodiment, the server 103 may group the terminal device 102 into a third terminal and a fourth terminal based on the calculated degree of participation in self-learning. The server 103 may group the terminal device 102 into a third terminal and a fourth terminal by comparing the degree of participation in self-learning calculated to overcome the learning deviation between learners and a preset reference value. The preset reference value for grouping the terminal device 102 into the third terminal and the fourth terminal may include a reference value stored in the server 103 by a user input to the control device 101 . In one example, by comparing the degree of participation in self-learning and the preset reference value, the terminal device 102 corresponding to the degree of participation in self-learning that does not satisfy the preset reference value may be classified as a third terminal. have. The server 103 may transmit the learning request data received from the control device 101 to the terminal device 102 classified as a third terminal. In one example, the control device 101 may transmit the learning request data to the server 103 . A terminal device classified as the third terminal among the terminal devices 102 may receive the learning request data from the server 103 . The learning request data may include self-learning time to be completed by the terminal device 102 and self-learning data to be transmitted to the server 103, and the terminal device 102 classified as the third terminal completes the course. The self-learning time to be performed may be determined as a period in which the server 103 should be connected to the (period).

일 실시예에서, 교습 시스템을 제공하는 서버(103)는 교습 모드 중 제3 모드를 실행하는 경우, 제1 모드에서 산출된 수업에 대한 참여도의 가중치 및 제2 모드에서 산출된 자율 학습에 대한 참여도의 가중치를 설정할 수 있다. 서버(103)는 상기 수업에 대한 참여도의 가중치 및 상기 자율 학습에 대한 참여도의 가중치를 기반으로 단말 장치(102)의 각각에 대한 학습 수행 점수를 산정할 수 있다. 일 예시에서, 상기 수업에 대한 참여도의 가중치 미 상기 자율 학습에 대한 참여도의 가중치를 기반으로 단말 장치(102)의 각각에 대한 학습 수행 점수를 산정하는 방법과 관련하여 도 3을 참고하여 상세히 설명한다.In an embodiment, when the server 103 providing the teaching system executes the third mode among the teaching modes, the weight of participation in the class calculated in the first mode and the self-learning calculated in the second mode You can set the weight of participation. The server 103 may calculate a learning performance score for each of the terminal devices 102 based on the weight of the participation in the class and the weight of the participation in the self-learning. In one example, with reference to FIG. 3 in detail with reference to the method of calculating the learning performance score for each of the terminal devices 102 based on the weight of the degree of participation in the class and the weight of the degree of participation in the self-learning. Explain.

일 예시에서, 서버(103)는 단말 장치(102)의 각각에 대한 학습 수행 점수에 대한 데이터를 제어 장치(101)에 송신할 수 있다.In one example, the server 103 may transmit data on the learning performance score for each of the terminal devices 102 to the control device 101 .

도 2는 일 실시예에 따른, 제어 장치(101)를 나타내는 블록도이다.2 is a block diagram illustrating a control device 101 according to an exemplary embodiment.

도 2를 참고하면, 제어 장치(101)는 프로세서(210), 디스플레이(220), 메모리(230), 통신 모듈(240), 및 카메라(250)를 포함할 수 있다.Referring to FIG. 2 , the control device 101 may include a processor 210 , a display 220 , a memory 230 , a communication module 240 , and a camera 250 .

일 실시예에서, 제어 장치(101)에 포함되는 구성들은 단말 장치(102)에 포함될 수 있다.In an embodiment, components included in the control device 101 may be included in the terminal device 102 .

일 실시예에서, 통신 모듈(240)은 제어 장치(101)와 단말 장치(102) 또는 서버(103) 간에 직접 통신 채널, 또는 무선 통신 채널의 수립 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다.In one embodiment, the communication module 240 may support the establishment of a direct communication channel or a wireless communication channel between the control device 101 and the terminal device 102 or the server 103 and performing communication through the established communication channel. have.

일 실시예에서, 카메라(250)는 영상 및 동영상을 촬영할 수 있다. 일 예시에서, 제어 장치(101)는 카메라(250)를 통해 교습자의 실시간 수업을 촬영하여 서버(103) 또는 단말 장치(102)에 송신할 수 있다. 일 예시에서, 카메라(250)는 제어 장치(101)의 전면에 배치될 수 있다.In an embodiment, the camera 250 may capture images and videos. In one example, the control device 101 may capture a real-time class of the instructor through the camera 250 and transmit it to the server 103 or the terminal device 102 . In one example, the camera 250 may be disposed in front of the control device 101 .

일 실시예에서, 메모리(230)는 단말 장치(102)로부터 수신한 영상 데이터를 저장할 수 있다. 일 예시에서, 메모리(230)는 단말 장치(102)에 제공되는 제1 교습 데이터 및 제2 교습 데이터를 저장할 수 있다. 일 예시에서, 메모리(230)는 제3 단말로 분류된 단말 장치(102)에 제공될 학습 요청 데이터를 저장할 수 있다. 메모리(230)는 서버(103)로부터 수신한 단말 장치(102)의 각각에 대한 학습 수행 점수에 대한 데이터를 저장할 수 있다.In an embodiment, the memory 230 may store image data received from the terminal device 102 . In one example, the memory 230 may store the first teaching data and the second teaching data provided to the terminal device 102 . In one example, the memory 230 may store learning request data to be provided to the terminal device 102 classified as a third terminal. The memory 230 may store data on a learning performance score for each of the terminal devices 102 received from the server 103 .

도 3은 일 실시예에 따른, 다자간 영상 회의 서비스를 이용한 교습 시스템을 설명하기 위한 순서도이다.3 is a flowchart illustrating a teaching system using a multi-party video conferencing service, according to an embodiment.

일 실시예에서, 서버(103)는 동작 301에서 제어 장치(101)의 서버(103)에 대한 접속 여부를 확인할 수 있다. 일 예시에서, 서버(103)는 제어 장치(101)로부터 서버(103)에 대한 접속을 확인하여 교습 시스템 제공을 위한 다자간 영상 회의 서비스를 제공하는 프로그램을 실행할 수 있다.In an embodiment, the server 103 may check whether the control device 101 accesses the server 103 in operation 301 . In one example, the server 103 may execute a program for providing a multi-party video conferencing service for providing a teaching system by checking a connection to the server 103 from the control device 101 .

일 실시예에서, 서버(103)는 동작 303에서 다자간 영상 회의 서비스를 단말 장치(예: 도 1의 단말 장치(102))에 제공하고, 단말 장치(102)로부터 영상 데이터를 수신하여 제어 장치(101)에 제공할 수 있다. 일 예시에서, 단말 장치(102)는 서버(103)로부터 다자간 영상 회의 서비스를 제공받는 동작에 대응하여 서버(103)에 영상 데이터를 송신할 수 있다. 단말 장치(102)로부터 수신한 영상 데이터는 교습 시스템을 참여하는 학습자에 대한 객체가 인식되는 영상 데이터를 포함할 수 있다. 일 예시에서, 제어 장치(101)는 서버(103)로부터 단말 장치(102)에 대한 영상 데이터를 수신한 경우, 디스플레이(예: 도 2의 디스플레이(220))에 단말 장치(102)에 대한 영상 데이터를 실시간으로 출력할 수 있다.In an embodiment, the server 103 provides a multi-party video conferencing service to a terminal device (eg, the terminal device 102 of FIG. 1 ) in operation 303 , and receives image data from the terminal device 102 to receive the video data from the control device ( 101) can be provided. In an example, the terminal device 102 may transmit image data to the server 103 in response to an operation of receiving a multi-party video conferencing service from the server 103 . The image data received from the terminal device 102 may include image data in which an object for a learner participating in the teaching system is recognized. In one example, when the control device 101 receives image data for the terminal device 102 from the server 103 , the control device 101 displays an image of the terminal device 102 on a display (eg, the display 220 of FIG. 2 ). Data can be output in real time.

일 실시예에서, 서버(103)는 동작 305에서 제어 장치(101)의 제1 사용자 입력 또는 서버(103)의 현재 시간 중 적어도 하나를 기반으로 교습 모드를 실행할 수 있다. 교습 모드는 상기 제1 모드 내지 제3 모드를 포함할 수 있다. 일 예시에서, 교습 모드는 수업을 진행하기 위한 제1 모드, 자율 학습을 관리하기 위한 제2 모드, 학습자의 학습 정도를 평가하기 위한 제3 모드를 포함할 수 있다.In an embodiment, the server 103 may execute the teaching mode based on at least one of a first user input of the control device 101 or a current time of the server 103 in operation 305 . The teaching mode may include the first to third modes. In one example, the teaching mode may include a first mode for conducting a class, a second mode for managing self-study, and a third mode for evaluating a learner's learning level.

일 실시예에서, 서버(103)는 동작 307에서 제1 모드 내지 제3 모드 중에서 제1 모드를 실행하는 경우 복수의 단말 장치로부터 제1 교습 참여 정보를 수신할 수 있다. 일 예시에서, 서버(103)는 제어 장치(101)에 대한 제1 사용자 입력이 제1 모드에 대한 입력에 해당하는 경우 제1 모드를 실행할 수 있다. 제어 장치(101)에 대한 제1 사용자의 입력이 없는 경우, 서버(103)의 현재 시간을 판단하여 서버(103)의 현재 시간에 따라서 제1 모드 내지 제3 모드 중에서 선택할 수 있다. 예를 들어, 서버(103)의 현재 시간은 제어 장치(101)의 서버(103)에 접속한 시점에 대한 데이터를 통해 판단될 수 있다.In an embodiment, when the first mode among the first to third modes is executed in operation 307 , the server 103 may receive first lesson participation information from a plurality of terminal devices. In one example, when the first user input to the control device 101 corresponds to the input to the first mode, the server 103 may execute the first mode. When there is no input of the first user to the control device 101 , the current time of the server 103 may be determined and the first mode to the third mode may be selected according to the current time of the server 103 . For example, the current time of the server 103 may be determined based on data on the time when the control device 101 accesses the server 103 .

일 실시예에서, 서버(103)는 동작 307에서 제1 모드 실행에 따라 단말 장치(102)로부터 제1 교습 참여 정보를 수신할 수 있으며, 단말 장치(102)로부터 수신한 제1 교습 참여 정보를 기반으로 단말 장치(102)의 각각에 대한 수업에 대한 참여도를 산출할 수 있다. 일 예시에서, 제1 교습 참여 정보는 단말 장치(102)의 서버 접속 시간(time), 단말 장치(102)의 학습자의 시선 변화에 대한 정보, 상기 단말 장치(102)의 학습자의 손 움직임에 대한 정보, 및 단말 장치(102)의 학습자의 질문 횟수에 대한 정보를 포함할 수 있다.In an embodiment, the server 103 may receive the first lesson participation information from the terminal device 102 according to the execution of the first mode in operation 307 , and receive the first lesson participation information received from the terminal device 102 . Based on the level of participation in the class for each of the terminal devices 102 may be calculated. In one example, the first teaching participation information includes information about a server access time of the terminal device 102 , information about a change in the learner's gaze of the terminal device 102 , and a hand movement of the learner of the terminal device 102 . It may include information and information about the number of questions asked by the learner of the terminal device 102 .

일 예시에서, 단말 장치(102)의 각각에 대한 수업에 대한 참여도(G)는 제1 교습 참여 정보를 기반으로 [수학식 1]을 통해 결정될 수 있다.In one example, the degree of participation G for each of the terminal devices 102 may be determined through [Equation 1] based on the first teaching participation information.

Figure 112022014639922-pat00001
Figure 112022014639922-pat00001

수학식 1을 참고하면, n은 제1 모드의 진행 시간,

Figure 112022014639922-pat00002
는 t 시간에서의 학습자의 동공 이동 변화량,
Figure 112022014639922-pat00003
는 t 시간에서의 학습자의 손 움직임 변화량, c는 제어 장치(101)의 서버 접속 시간, d는 단말 장치(102)의 서버 접속 시간, f는 학습자의 질문 횟수를 의미할 수 있다.Referring to Equation 1, n is the duration of the first mode,
Figure 112022014639922-pat00002
is the change in pupil movement of the learner at time t,
Figure 112022014639922-pat00003
is the amount of change in the learner's hand movement at time t, c is the server access time of the control device 101, d is the server access time of the terminal device 102, and f may mean the number of questions asked by the learner.

일 예시에서, t 시간에서의 학습자의 동공 이동 변화량 및 t 시간에서의 학습자의 손 움직임 변화량은 단말 장치(102)의 영상 데이터를 통해 획득할 수 있다. 단말 장치(102)는 학습자에 대한 객체를 포함하는 영상 데이터를 획득하고, 상기 영상 데이터에서 학습자에 대한 객체에서 학습자의 동공 객체를 인식할 수 있다. 단말 장치(102)는 영상 데이터에서 인식된 상기 학습자의 동공 객체에 대한 이동을 추적하여 t 시간에서의 학습자의 동공 이동 변화량에 대한 데이터를 획득할 수 있다. 또한, 단말 장치(102)는 학습자에 대한 객체를 포함하는 영상 데이터에서 학습자에 대한 객체에서 학습자의 손 객체를 인식할 수 있다. 단말 장치(102)는 영상 데이터에서 인식된 상기 손 객체에 대한 움직임을 추적하여 t 시간에서의 학습자의 손 움직임 변화량에 대한 데이터를 획득할 수 있다.In one example, the change amount of the learner's pupil movement at time t and the change amount of the learner's hand movement at time t may be obtained through image data of the terminal device 102 . The terminal device 102 may acquire image data including an object for the learner, and recognize the pupil object of the learner from the object for the learner in the image data. The terminal device 102 may acquire data about the pupil movement change amount of the learner at time t by tracking the movement of the learner with respect to the pupil object recognized in the image data. Also, the terminal device 102 may recognize the learner's hand object from the learner's object in the image data including the learner's object. The terminal device 102 may acquire data on the amount of change in the learner's hand movement at time t by tracking the movement of the hand object recognized in the image data.

일 예시에서, 학습자의 질문 횟수는 단말 장치(102)가 서버(103)를 통해 질문에 대한 데이터를 송신한 횟수를 포함할 수 있다. 단말 장치(102)의 질문에 대한 데이터 송신에 대응하여, 서버(103)는 단말 장치(102)의 질문에 대한 데이터를 제어 장치(101)에 제공하여 이에 대응하는 데이터 송신을 요청할 수 있다.In one example, the number of questions asked by the learner may include the number of times the terminal device 102 transmits data for the question through the server 103 . Corresponding to the data transmission for the question of the terminal device 102 , the server 103 may provide the data for the question of the terminal device 102 to the control device 101 to request data transmission corresponding thereto.

일 예시에서, 서버(103)는 동작 311에서 산출된 단말 장치(102)의 각각에 대한 수업에 대한 참여도 값을 기반으로 단말 장치(102)를 제1 단말 및 제2 단말로 그룹핑할 수 있다. 일 예시에서, 산출된 단말 장치(102)의 각각에 대한 수업에 대한 참여도 값이 상위 70 퍼센트 내에 속하는 경우 이에 대응하는 단말 장치(102)를 제1 단말로 분류할 수 있으며, 산출된 단말 장치(102)의 각각에 대한 수업에 대한 참여도 값이 하위 30 퍼센트 내에 속하는 경우 이에 대응하는 단말 장치(102)를 제2 단말로 분류할 수 있다. 수업에 참여하는 학습자 간의 수준별 학습을 할 수 있도록 단말 장치(102)의 각각에 대한 수업에 대한 참여도를 통해 단말 장치(102)를 제1 단말 및 제2 단말로 분류할 수 있다. 산출된 단말 장치(102)의 각각에 대한 수업에 대한 참여도를 기반으로 단말 장치(102)를 제1 단말 및 제2 단말로 분류하기 위한 기준은 제어 장치(101)의 제어 명령에 따라 변경될 수 있으며, 별도의 제어 장치(101)의 제어 명령이 없는 경우 상위 50 퍼센트 기준으로 단말 장치(102)를 제1 단말 및 제2 단말로 분류할 수 있다.In one example, the server 103 may group the terminal device 102 into the first terminal and the second terminal based on the class participation value for each of the terminal devices 102 calculated in operation 311 . . In one example, when the calculated participation value for class for each of the terminal devices 102 falls within the upper 70 percent, the terminal device 102 corresponding thereto may be classified as the first terminal, and the calculated terminal device When the participation value for class for each of 102 falls within the lower 30 percent, the corresponding terminal device 102 may be classified as a second terminal. The terminal device 102 may be classified into a first terminal and a second terminal through the degree of participation of each of the terminal devices 102 in class so that learners participating in the class can learn by level. The criterion for classifying the terminal device 102 into the first terminal and the second terminal based on the calculated degree of participation in the class for each of the terminal devices 102 is to be changed according to the control command of the control device 101 . Also, when there is no control command from a separate control device 101 , the terminal device 102 may be classified into a first terminal and a second terminal based on the upper 50 percent.

일 실시예에서, 서버(103)는 제1 단말로 분류된 단말 장치(102)에 대한 데이터 및 제2 단말로 분류된 단말 장치(102)에 대한 데이터는 제어 장치(101)에 제공될 수 있다. 제어 장치(101)는 서버(103)로부터 수신한 제1 단말로 분류된 단말 장치(102)에 대한 데이터 및 제2 단말로 분류된 단말 장치(102)에 대한 데이터를 기준으로 제어 장치(101)의 디스플레이(220)에 출력되는 단말 장치(102)에 대한 영상 데이터를 출력하기 위한 레이아웃을 재배치할 수 있다. 예를 들어, 제1 단말로 분류된 단말 장치(102)에 대한 영상 데이터는 디스플레이의 제1 영역에 배치하고, 제2 단말로 분류된 단말 장치(102)에 대한 영상 데이터는 디스플레이의 제2 영역에 배치할 수 있다. 이와 관련하여, 도 4를 참고하여 설명한다.In an embodiment, the server 103 may provide the data for the terminal device 102 classified as the first terminal and the data for the terminal device 102 classified as the second terminal to the control device 101 . . The control device 101 receives from the server 103 the data on the terminal device 102 classified as the first terminal and the data on the terminal device 102 classified as the second terminal, the control device 101 It is possible to rearrange the layout for outputting image data for the terminal device 102 that is output to the display 220 of the . For example, image data for the terminal device 102 classified as a first terminal is disposed in a first area of the display, and image data for the terminal device 102 classified as a second terminal is placed in a second area of the display can be placed in In this regard, it will be described with reference to FIG. 4 .

일 실시예에서, 서버(103)는 동작 313에서 제1 단말로 분류된 단말 장치(102)에 제어 장치(101)로부터 수신한 제1 교습 데이터를 송신하고, 제2 단말로 분류된 단말 장치(102)에 제어 장치(101)로부터 수신한 제2 교습 데이터를 송신할 수 있다.In an embodiment, the server 103 transmits the first teaching data received from the control device 101 to the terminal device 102 classified as the first terminal in operation 313, and the terminal device classified as the second terminal ( The second teaching data received from the control device 101 may be transmitted to 102 .

일 실시예에서, 제어 장치(101)는 제1 단말로 분류된 단말 장치(102)의 수업에 대한 참여도에 대한 평균 및 제2 단말로 분류된 단말 장치(102)의 수업에 대한 참여도에 대한 평균을 기반으로, 제1 단말로 분류된 단말 장치(102)에 제공되는 제1 교습 데이터 및 제2 단말로 분류된 단말 장치(102)에 제공되는 제2 교습 데이터를 생성할 수 있다. 예를 들어, 제어 장치(101)는 제어 장치(102)의 메모리에 저장된 복수 개의 교습 데이터 중에서 제1 단말로 분류된 단말 장치(102)의 수업에 대한 참여도에 대한 평균에 대응하는 교습 데이터를 제1 교습 데이터로 결정할 수 있다. 제어 장치(101)는 상기 복수 개의 교습 데이터 중에서 제2 단말로 분류된 단말 장치(102)의 수업에 대한 참여도에 대한 평균에 대응하는 교습 데이터를 제2 교습 데이터로 결정할 수 있다.In one embodiment, the control device 101 determines the average of the participation in the class of the terminal device 102 classified as the first terminal and the participation in the class of the terminal device 102 classified as the second terminal. Based on the average, the first teaching data provided to the terminal device 102 classified as the first terminal and the second teaching data provided to the terminal device 102 classified as the second terminal may be generated. For example, the control device 101 receives the teaching data corresponding to the average of the participation in the class of the terminal device 102 classified as the first terminal among the plurality of teaching data stored in the memory of the control device 102 . It may be determined based on the first teaching data. The control device 101 may determine, as the second teaching data, teaching data corresponding to an average of the participation in class of the terminal device 102 classified as the second terminal among the plurality of teaching data.

일 예시에서, 제1 교습 데이터는 상기 제2 교습 데이터와 구별되는 교습 데이터로 제1 단말로 분류된 단말 장치(102)에 이미 송신된 수업에 대한 영상 데이터를 포함할 수 있다. 제2 교습 데이터는 실시간으로 제어 장치(101)의 카메라(예: 도 2의 카메라(250))를 통해 촬영되는 영상 데이터를 포함할 수 있다.In one example, the first teaching data may include image data for a lesson that has already been transmitted to the terminal device 102 classified as the first terminal as teaching data different from the second teaching data. The second teaching data may include image data captured by the camera of the control device 101 (eg, the camera 250 of FIG. 2 ) in real time.

일 실시예에서, 서버(103)는 동작 315에서 제1 모드 내지 제3 모드 중에서 제2 모드를 실행하는 경우 복수의 단말 장치로부터 제2 교습 참여 정보를 수신할 수 있다. 일 예시에서, 서버(103)는 제어 장치(101)에 대한 제1 사용자 입력이 제2 모드에 대한 입력에 해당하는 경우 제2 모드를 실행할 수 있다.In an embodiment, when the second mode from among the first to third modes is executed in operation 315 , the server 103 may receive second lesson participation information from a plurality of terminal devices. In one example, when the first user input to the control device 101 corresponds to the input to the second mode, the server 103 may execute the second mode.

일 실시예에서, 서버(103)는 동작 317에서 제2 모드 실행에 따라 단말 장치(102)로부터 제2 교습 참여 정보를 수신할 수 있으며, 단말 장치(102)로부터 수신한 제2 교습 참여 정보를 기반으로 단말 장치(102)의 각각에 대한 자율 학습에 대한 참여도를 산출할 수 있다, 일 예시에서, 상기 제2 교습 참여 정보는 상기 자율 학습을 위한 학습 목록에 대한 정보 및 상기 학습자의 서버 접속 기간에 대한 정보를 포함할 수 있다.In an embodiment, the server 103 may receive the second lesson participation information from the terminal device 102 according to the execution of the second mode in operation 317 , and receive the second lesson participation information received from the terminal device 102 . It is possible to calculate the degree of participation in self-learning for each of the terminal devices 102 based on, in one example, the second teaching participation information includes information on the learning list for the self-learning and the learner's server connection. It may include information about the period.

일 예시에서, 단말 장치(102)의 각각에 대한 자율 학습에 대한 참여도(H)는 제2 교습 참여 정보를 기반으로 [수학식 2]를 통해 결정될 수 있다.In one example, the degree of participation (H) in self-learning for each of the terminal devices 102 may be determined through [Equation 2] based on the second teaching participation information.

Figure 112022014639922-pat00004
Figure 112022014639922-pat00004

수학식 2를 참고하면, m은 제2 모드의 진행 시간, x는 자율 학습을 위한 학습 목록에 입력된 데이터 개수, y는 자율 학습 참여 요청을 받은 횟수, z는 단말 장치(102)의 서버 접속 기간(period)을 의미할 수 있다.Referring to Equation 2, m is the duration of the second mode, x is the number of data input to the learning list for self-learning, y is the number of times a request to participate in self-study is received, and z is the server access of the terminal device 102 It can mean a period.

일 예시에서, 자율 학습을 위한 학습 목록에 입력된 데이터 개수는 단말 장치(102)에 대응되는 학습자가 계획하는 학습량을 의미할 수 있다. 제어 장치(101) 단말 장치의 서버 접속 기간은 자율 학습을 위한 제2 모드에서 단말 장치(102)가 자율 학습에 참여한 시간을 의미할 수 있다. 일 예시에서, 자율 학습 참여 요청을 받은 횟수는 단말 장치(102)가 제어 장치(101)로부터 자율 학습 참여를 요청하는 데이터를 수신한 횟수를 의미할 수 있다. 제어 장치(101)는 단말 장치(102)를 통해 수신한 영상 데이터를 기반으로 자율 학습에 참여를 요청하는 데이터를 단말 장치(102)에 송신할 수 있다. 예를 들어, 단말 장치(102)를 통해 수신한 영상 데이터 내에 학습자에 대한 객체가 인식되지 않는 경우에 제어 장치(101)는 단말 장치(120)에 자율 학습 참여를 요청하는 데이터를 송신할 수 있다.In one example, the number of data input to the learning list for self-learning may mean a learning amount planned by a learner corresponding to the terminal device 102 . The server access period of the terminal device of the control device 101 may mean a time during which the terminal device 102 participates in self-learning in the second mode for self-learning. In one example, the number of times the self-learning participation request is received may mean the number of times the terminal device 102 receives data requesting participation in the self-learning from the control device 101 . The control device 101 may transmit data requesting participation in self-learning to the terminal device 102 based on the image data received through the terminal device 102 . For example, when the object for the learner is not recognized in the image data received through the terminal device 102 , the control device 101 may transmit data requesting participation in self-learning to the terminal device 120 . .

일 실시예에서, 서버(103)는 동작 319에서 산출된 자율 학습에 대한 참여도를 기반으로 단말 장치(102)를 제3 단말 및 제4 단말로 그룹핑할 수 있다. 서버(103)는 단말 장치(102)의 각각에 대한 자율 학습에 대한 참여도를 기반으로 단말 장치(102)를 제3 단말 및 제4 단말로 분류할 수 있다. 산출된 단말 장치(102)의 각각에 대한 자율 학습에 대한 참여도를 기반으로 단말 장치(102)를 제3 단말 및 제4 단말로 분류하기 위한 기 설정된 기준은 제어 장치(101)의 제어 명령에 따라 변경될 수 있으며, 별도의 제어 장치(101)의 제어 명령이 없는 경우 상위 50 퍼센트 기준으로 단말 장치(102)를 제3 단말 및 제4 단말로 분류할 수 있다. 기설정된 기준을 만족하지 못하는 자율 학습에 대한 참여도에 대응하는 단말 장치(102)는 제3 단말로 분류될 수 있다. 예를 들어, 하위 50 퍼헨트에 해당하는 자율 학습에 대한 참여도를 갖는 단말 장치(102)는 제3 단말로 분류될 수 있으며, 상위 50 퍼센트에 해당하는 자율 학습에 대한 참여도를 갖는 제어 장치(102)는 제4 단말로 분류될 수 있다.In an embodiment, the server 103 may group the terminal device 102 into a third terminal and a fourth terminal based on the degree of participation in self-learning calculated in operation 319 . The server 103 may classify the terminal device 102 into a third terminal and a fourth terminal based on the degree of participation of each of the terminal devices 102 in self-learning. A preset criterion for classifying the terminal device 102 into a third terminal and a fourth terminal based on the calculated degree of participation in self-learning for each of the terminal devices 102 is based on the control command of the control device 101 . may be changed accordingly, and when there is no control command from a separate control device 101 , the terminal device 102 may be classified into a third terminal and a fourth terminal based on the upper 50 percent. The terminal device 102 corresponding to the degree of participation in self-learning that does not satisfy the preset criterion may be classified as a third terminal. For example, the terminal device 102 having a degree of participation in self-learning corresponding to the lower 50 percent may be classified as a third terminal, and a control device having a degree of participation in self-learning corresponding to the upper 50 percent. 102 may be classified as a fourth terminal.

일 실시예에서, 서버(103)는 제3 단말로 분류된 단말 장치(102)에 대한 데이터 및 제4 단말로 분류된 단말 장치(102)에 대한 데이터는 제어 장치(101)에 제공될 수 있다. 제어 장치(101)는 서버(103)로부터 제3 단말로 분류된 단말 장치(102) 및 제4 단말로 분류된 단말 장치(102)를 기준으로 제어 장치(101)의 디스플레이(220)에 출력되는 단말 장치(102)에 대한 영상 데이터를 출력하기 위한 레이아웃을 재배치할 수 있다. 예를 들어, 제3 단말로 분류된 단말 장치(102)에 대한 영상 데이터는 디스플레이(예: 도 2의 디스플레이(220))의 제1 영역에 배치하고, 제4 단말로 분류된 단말 장치(102)에 대한 영상 데이터는 디스플레이의 제2 영역에 배치할 수 있다. 이와 관련하여, 도 4를 참고하여 설명한다.In an embodiment, the server 103 may provide the data for the terminal device 102 classified as the third terminal and the data for the terminal device 102 classified as the fourth terminal to the control device 101 . . The control device 101 is output from the server 103 to the display 220 of the control device 101 based on the terminal device 102 classified as the third terminal and the terminal device 102 classified as the fourth terminal. A layout for outputting image data for the terminal device 102 may be rearranged. For example, image data for the terminal device 102 classified as a third terminal is disposed in a first area of a display (eg, the display 220 of FIG. 2 ), and the terminal device 102 classified as a fourth terminal ) may be arranged in the second area of the display. In this regard, it will be described with reference to FIG. 4 .

일 실시예에서, 서버(103)는 동작 321에서 제3 단말로 분류된 단말 장치(102)에 제어 장치(101)로부터 수신된 학습 요청 데이터를 송신할 수 있다.In an embodiment, the server 103 may transmit the learning request data received from the control device 101 to the terminal device 102 classified as a third terminal in operation 321 .

일 실시예에서, 서버(103)는 동작 323에서 교습 모드가 제3 모드에 해당하는 경우, 제어 장치(101)의 제2 사용자 입력 또는 기 설정된 값을 기반으로 제1 모드 실행에 따른 수업에 대한 참여도 및 제2 모드 실행에 따른 자율 학습에 대한 참여도의 각각에 대한 가중치를 설정할 수 있다.In one embodiment, when the teaching mode corresponds to the third mode in operation 323 , the server 103 provides information about the class according to the execution of the first mode based on the second user input of the control device 101 or a preset value. A weight may be set for each of the degree of participation and the degree of participation in self-learning according to the execution of the second mode.

일 실시예에서, 제어 장치(101)는 교습 시스템의 특성에 따라 1 모드 실행에 따른 수업에 대한 참여도 및 제2 모드 실행에 따른 자율 학습에 대한 참여도의 각각에 대한 가중치를 다르게 설정할 수 있다. 예를 들어, 수업에 대한 참여도가 더 중요한 교습 시스템에 대해서는 수업에 대한 참여도의 가중치를 상대적으로 높게 설정하고, 자율 학습에 대한 참여도의 가중치를 상대적으로 낮게 설정할 수 있다. 자율 학습에 참여도가 더 중요한 교습 시스템에 대해서는 자율 학습에 대한 참여도의 가중치를 상대적으로 높게 설정하고 수업에 대한 참여도의 가중치를 상대적으로 낮게 설정할 수 있다.In an embodiment, the control device 101 may set different weights for each of the degree of participation in class according to the execution of mode 1 and the degree of participation in self-learning according to the execution of the second mode according to the characteristics of the teaching system. . For example, for a teaching system in which participation in class is more important, the weight of participation in class may be set relatively high and the weight of participation in self-learning may be set relatively low. For a teaching system in which participation in self-learning is more important, the weight of participation in self-learning can be set relatively high and the weight of participation in class can be set relatively low.

일 실시예에서, 서버(103)는 동작 323에서 수업에 대한 참여도의 가중치, 및 자율 학습에 대한 참여도의 가중치를 기반으로 단말 장치의 각각에 대한 학습 수행 점수를 산정할 수 있다.In an embodiment, the server 103 may calculate a learning performance score for each terminal device based on a weight of participation in class and a weight of participation in self-learning in operation 323 .

일 예시에서, 단말 장치의 각각에 대한 학습 수행 점수(S)는 [수학식 3]을 통해 결정될 수 있다.In one example, the learning performance score (S) for each of the terminal devices may be determined through [Equation 3].

Figure 112022014639922-pat00005
Figure 112022014639922-pat00005

수학식 3을 참고하면, G는 수업에 대한 참여도, α는 수업에 대한 참여도의 가중치, H는 자율 학습에 대한 참여도,

Figure 112022014639922-pat00006
: 자율 학습에 대한 참여도의 가중치, m은 교습에 참여하는 단말 장치의 개수를 의미할 수 있다.Referring to Equation 3, G is participation in class, α is the weight of participation in class, H is participation in self-learning,
Figure 112022014639922-pat00006
: The weight of participation in self-learning, m, may mean the number of terminal devices participating in the lesson.

일 실시예에서, 서버(103)는 동작 327에서 제어 장치(101)에 단말 장치(102)의 각각에 대한 학습 수행 점수에 대한 데이터를 송신할 수 있다.In an embodiment, the server 103 may transmit data on a learning performance score for each of the terminal devices 102 to the control device 101 in operation 327 .

도 4는 일 실시예에 따른, 다자간 영상 회의 서비스를 이용한 교습 시스템을 설명하기 위한 흐름도이다.4 is a flowchart illustrating a teaching system using a multi-party video conferencing service, according to an embodiment.

일 실시예에서, 서버(103)는 동작 401에서 제어 장치(101)의 서버(103)에 대한 접속을 확인할 수 있다.In an embodiment, the server 103 may check the connection to the server 103 of the control device 101 in operation 401 .

일 실시예에서, 서버(103)는 동작 403에서 제어 장치(101)의 서버(103)에 대한 접속을 확인에 대응하여 다자간 영상 회의 서비스를 단말 장치(120)에 제공할 수 있다.In an embodiment, the server 103 may provide a multi-party video conferencing service to the terminal device 120 in response to confirming the connection of the control device 101 to the server 103 in operation 403 .

일 실시예에서, 단말 장치(102)는 서버(103)로부터 다자간 영상 회의 서비스를 제공받는 동작에 대응하여 동작 405에서 단말 장치(102)의 실시간 영상 데이터를 송신할 수 있다.In an embodiment, the terminal device 102 may transmit real-time video data of the terminal device 102 in operation 405 in response to the operation of receiving the multiparty video conferencing service from the server 103 .

일 실시예에서, 제어 장치(101)는 동작 407에서 서버(103)를 통해 단말 장치(102)로부터 수신한 영상 데이터를 디스플레이에 출력할 수 있다.In an embodiment, the control device 101 may output image data received from the terminal device 102 through the server 103 in operation 407 to the display.

일 실시예에서, 서버(103)는 동작 409에서 제1 모드 내지 제3 모드 중 적어도 하나를 실행할 수 있다.In an embodiment, the server 103 may execute at least one of the first mode to the third mode in operation 409 .

일 실시예에서, 서버(103)는 동작 411에서 교습 모드 중 제1 모드를 실행할 수 있다.In an embodiment, the server 103 may execute a first mode among the teaching modes in operation 411 .

일 실시예에서, 단말 장치(102)는 동작 413에서 제1 모드 실행에 응답하여 제1 교습 참여 정보를 송신할 수 있다.In an embodiment, the terminal device 102 may transmit the first lesson participation information in response to the execution of the first mode in operation 413 .

일 실시예에서, 서버(103)는 동작 415에서 상기 제1 교습 참여 정보를 기반으로 수업에 대한 참여도 산출 및 수업에 대한 참여도를 기반으로 단말 장치(102)를 제1 단말 및 제2 단말로 그룹핑할 수 있다.In one embodiment, the server 103 calculates the degree of participation in class based on the first class participation information in operation 415 and sets the terminal device 102 to the first terminal and the second terminal based on the class participation degree. can be grouped by .

일 실시예에서, 제어 장치(101)는 동작 417에서 수업에 대한 참여도를 기반으로 단말 장치(102)를 제1 단말 및 제2 단말로 그룹핑하는 동작에 대응하여 서버(103)에 제1 교습 데이터 및 제2 교습 데이터를 송신할 수 있다.In an embodiment, in operation 417 , the control device 101 provides the server 103 with a first instruction in response to the grouping of the terminal device 102 into the first terminal and the second terminal based on the degree of participation in the class in operation 417 . data and second instructional data may be transmitted.

일 실시예에서, 서버(103)는 동작 419에서 제1 단말로 분류된 단말 장치(102)에는 제1 교습 데이터를 송신하고, 제2 단말로 분류된 단말 장치(102)에는 제2 교습 데이터를 송신할 수 있다.In an embodiment, the server 103 transmits the first teaching data to the terminal device 102 classified as the first terminal in operation 419, and transmits the second teaching data to the terminal device 102 classified as the second terminal in operation 419. can send

일 실시예에서, 서버(103)는 동작 421에서 교습 모드 중 제2 모드를 실행할 수 있다.In an embodiment, the server 103 may execute a second mode among the teaching modes in operation 421 .

일 실시예에서, 단말 장치(102)는 동작 423에서 서버(103)의 제2 모드 실행에 대응하여 제2 교습 참여 정보를 송신할 수 있다.In an embodiment, the terminal device 102 may transmit the second lesson participation information in response to the execution of the second mode of the server 103 in operation 423 .

일 실시예에서, 서버(103)는 동작 425에서 제2 교습 참여 정보를 기반으로 자율 학습에 대한 참여도를 산출하고, 자율 학습에 대한 참여도를 기반으로 단말 장치(102)를 제3 단말 및 제4 단말로 그룹핑할 수 있다.In an embodiment, the server 103 calculates a degree of participation in self-learning based on the second teaching participation information in operation 425, and sets the terminal device 102 to a third terminal and a third terminal based on the degree of participation in self-learning. It can be grouped by the fourth terminal.

일 실시예에서, 서버(103)는 동작 427에서 자율 학습에 대한 참여도가 기 설정된 기준을 만족하지 못하는 제3 단말로 분류된 단말 장치(102)에 학습 요청 데이터를 송신할 수 있다.In an embodiment, the server 103 may transmit the learning request data to the terminal device 102 classified as a third terminal whose degree of participation in self-learning does not satisfy a preset criterion in operation 427 .

일 실시예에서, 서버(103)는 동작 429에서 교습 모드 중 제3 모드를 실행할 수 있다.In an embodiment, the server 103 may execute a third mode among the teaching modes in operation 429 .

일 실시예에서, 서버(103)는 동작 431에서 제1 모드 실행에 따른 수업에 대한 참여도 및 제2 모드 실행에 따른 자율 학습 참여도에 대한 참여도의 각각에 대한 가중치를 설정할 수 있다.In an embodiment, in operation 431 , the server 103 may set a weight for each of the degree of participation in class according to the execution of the first mode and the degree of participation in self-learning according to the execution of the second mode.

일 실시예에서, 서버(103)는 동작 433에서 상기 수업에 대한 참여도의 가중치, 및 상기 자율 학습에 대한 참여도의 가중치를 기반으로 단말 장치(102)의 각각에 대한 학습 수행 점수를 산출할 수 있다.In an embodiment, the server 103 calculates a learning performance score for each of the terminal devices 102 based on the weight of the participation in the class and the weight of the participation in the self-learning in operation 433 . can

일 실시 예에서, 서버(103)는 동작 435에서 단말 장치(102)의 각각에 대한 학습 수행 점수 데이터를 제어 장치(101)에 송신할 수 있다.In an embodiment, the server 103 may transmit the learning performance score data for each of the terminal devices 102 to the control device 101 in operation 435 .

도 5는 일 실시예에 따른, 제어 장치(101)의 디스플레이(220)를 나타낸다.5 shows a display 220 of the control device 101 according to an embodiment.

일 실시예에서, 제어 장치(101)의 디스플레이(220)는 제1 영역(220a), 제2 영역(220b), 및 제3 영역(220c)을 포함할 수 있다.In an embodiment, the display 220 of the control device 101 may include a first area 220a, a second area 220b, and a third area 220c.

일 실시 예에서, 디스플레이(220)의 제3 영역(220c)은 제어 장치(101)의 카메라(250)를 통해 촬영한 영상 데이터(221c)가 출력되는 영역에 해당할 수 있다.In an embodiment, the third area 220c of the display 220 may correspond to an area in which image data 221c captured by the camera 250 of the control device 101 is output.

일 실시예에서, 교습 모드가 제1 모드에서, 디스플레이(220)의 제1 영역(220a)에는 제1 단말로 분류된 단말 장치(102)에 대응하는 영상 데이터(221a 내지 224a)가 출력되고, 제2 영역(220b)에는 제2 단말로 분류된 단말 장치(102)에 대응하는 영상 데이터(221b 내지 224b)가 출력될 수 있다.In one embodiment, when the teaching mode is the first mode, the image data 221a to 224a corresponding to the terminal device 102 classified as the first terminal are output to the first area 220a of the display 220, Image data 221b to 224b corresponding to the terminal device 102 classified as the second terminal may be output to the second region 220b.

다른 일 실시예에서, 교습 모드가 제2 모드에서, 디스플레이(220)의 제1 영역(220a)에는 제3 단말로 분류된 단말 장치(102)에 대응하는 영상 데이터(221a 내지 224a)가 출력되고, 제2 영역(220b)에는 제4 단말로 분류된 단말 장치(102)에 대응하는 영상 데이터(221b 내지 224b)가 출력될 수 있다.In another embodiment, when the teaching mode is the second mode, the image data 221a to 224a corresponding to the terminal device 102 classified as the third terminal are output to the first area 220a of the display 220 and , image data 221b to 224b corresponding to the terminal device 102 classified as the fourth terminal may be output to the second area 220b.

일 실시 예에서, 제어 장치(10)의 사용자는 인터페이스(222)를 통해 단말 장치(102)를 제어할 수 있다.In an embodiment, the user of the control device 10 may control the terminal device 102 through the interface 222 .

일 실시 예에서, 제1 모드에서 제어 장치(101)는 제1 영역(220a)에 대한 사용자 입력을 통해 제1 단말로 분류된 단말 장치(102)에 대해 개별적으로 제어할 수 있다. 예를 들어, 이는 수업에 대한 참여도에 따라 학습자를 관리하기 위해서 제1 단말로 분류된 단말 장치(102)와 제1 데이터를 공유하고, 제2 단말로 분류된 단말 장치(102)에 대해서는 상기 제1 데이터를와 구별되는 제2 데이터를 공유할 수 있다.In an embodiment, in the first mode, the control device 101 may individually control the terminal device 102 classified as the first terminal through a user input for the first region 220a. For example, it shares the first data with the terminal device 102 classified as the first terminal in order to manage the learner according to the degree of participation in the class, and for the terminal device 102 classified as the second terminal, It is possible to share second data that is distinct from the first data.

도 6은 일 실시예에 따른 전자 장치의 구성을 도시한 도면이다.6 is a diagram illustrating a configuration of an electronic device according to an exemplary embodiment.

도 6은, 다양한 실시예들에 따른, 네트워크 환경(600)내의 전자 장치(601)의 블록도이다. 도 6을 참조하면, 네트워크 환경(600)에서 전자 장치(601)는 제 1 네트워크(698)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(602)와 통신하거나, 또는 제 2 네트워크(699)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(604) 또는 서버(608) 중 적어도 하나와 통신할 수 있다. 일실시예에 따르면, 전자 장치(601)는 서버(608)를 통하여 전자 장치(604)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(601)는 프로세서(620), 메모리(630), 입력 모듈(650), 음향 출력 모듈(655), 디스플레이 모듈(660), 오디오 모듈(670), 센서 모듈(676), 인터페이스(677), 연결 단자(678), 햅틱 모듈(679), 카메라 모듈(680), 전력 관리 모듈(688), 배터리(689), 통신 모듈(690), 가입자 식별 모듈(696), 또는 안테나 모듈(697)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(601)에는, 이 구성요소들 중 적어도 하나(예: 연결 단자(678))가 생략되거나, 하나 이상의 다른 구성요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들(예: 센서 모듈(676), 카메라 모듈(680), 또는 안테나 모듈(697))은 하나의 구성요소(예: 디스플레이 모듈(660))로 통합될 수 있다. 전자 장치(601)는 클라이언트, 단말기 또는 피어로 지칭될 수도 있다.6 is a block diagram of an electronic device 601 in a network environment 600, according to various embodiments. Referring to FIG. 6 , in a network environment 600 , the electronic device 601 communicates with the electronic device 602 through a first network 698 (eg, a short-range wireless communication network) or a second network 699 . It may communicate with at least one of the electronic device 604 and the server 608 through (eg, a remote wireless communication network). According to an embodiment, the electronic device 601 may communicate with the electronic device 604 through the server 608 . According to an embodiment, the electronic device 601 includes a processor 620 , a memory 630 , an input module 650 , a sound output module 655 , a display module 660 , an audio module 670 , and a sensor module ( 676), interface 677, connection terminal 678, haptic module 679, camera module 680, power management module 688, battery 689, communication module 690, subscriber identification module 696 , or an antenna module 697 . In some embodiments, at least one of these components (eg, the connection terminal 678 ) may be omitted or one or more other components may be added to the electronic device 601 . In some embodiments, some of these components (eg, sensor module 676 , camera module 680 , or antenna module 697 ) are integrated into one component (eg, display module 660 ). can be The electronic device 601 may also be referred to as a client, a terminal, or a peer.

프로세서(620)는, 예를 들면, 소프트웨어(예: 프로그램(640))를 실행하여 프로세서(620)에 연결된 전자 장치(601)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(620)는 다른 구성요소(예: 센서 모듈(676) 또는 통신 모듈(690))로부터 수신된 명령 또는 데이터를 휘발성 메모리(632)에 저장하고, 휘발성 메모리(632)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(634)에 저장할 수 있다. 일실시예에 따르면, 프로세서(620)는 메인 프로세서(621)(예: 중앙 처리 장치 또는 어플리케이션 프로세서) 또는 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(623)(예: 그래픽 처리 장치, 신경망 처리 장치(NPU: neural processing unit), 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 예를 들어, 전자 장치(601)가 메인 프로세서(621) 및 보조 프로세서(623)를 포함하는 경우, 보조 프로세서(623)는 메인 프로세서(621)보다 저전력을 사용하거나, 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(623)는 메인 프로세서(621)와 별개로, 또는 그 일부로서 구현될 수 있다.The processor 620, for example, executes software (eg, a program 640) to execute at least one other component (eg, a hardware or software component) of the electronic device 601 connected to the processor 620 . It can control and perform various data processing or operations. According to one embodiment, as at least part of data processing or computation, the processor 620 converts commands or data received from other components (eg, the sensor module 676 or the communication module 690) to the volatile memory 632 . may store the command or data stored in the volatile memory 632 , and store the resulting data in the non-volatile memory 634 . According to an embodiment, the processor 620 is a main processor 621 (eg, a central processing unit or an application processor) or a secondary processor 623 (eg, a graphics processing unit, a neural network processing unit) a neural processing unit (NPU), an image signal processor, a sensor hub processor, or a communication processor). For example, when the electronic device 601 includes a main processor 621 and a sub-processor 623 , the sub-processor 623 uses less power than the main processor 621 or is set to be specialized for a specified function. can The coprocessor 623 may be implemented separately from or as part of the main processor 621 .

보조 프로세서(623)는, 예를 들면, 메인 프로세서(621)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(621)를 대신하여, 또는 메인 프로세서(621)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(621)와 함께, 전자 장치(601)의 구성요소들 중 적어도 하나의 구성요소(예: 디스플레이 모듈(660), 센서 모듈(676), 또는 통신 모듈(690))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일실시예에 따르면, 보조 프로세서(623)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성요소(예: 카메라 모듈(680) 또는 통신 모듈(690))의 일부로서 구현될 수 있다. 일실시예에 따르면, 보조 프로세서(623)(예: 신경망 처리 장치)는 인공지능 모델의 처리에 특화된 하드웨어 구조를 포함할 수 있다. 인공지능 모델은 기계 학습을 통해 생성될 수 있다. 이러한 학습은, 예를 들어, 인공지능 모델이 수행되는 전자 장치(601) 자체에서 수행될 수 있고, 별도의 서버(예: 서버(608))를 통해 수행될 수도 있다. 학습 알고리즘은, 예를 들어, 지도형 학습(supervised learning), 비지도형 학습(unsupervised learning), 준지도형 학습(semi-supervised learning) 또는 강화 학습(reinforcement learning)을 포함할 수 있으나, 전술한 예에 한정되지 않는다. 인공지능 모델은, 복수의 인공 신경망 레이어들을 포함할 수 있다. 인공 신경망은 심층 신경망(DNN: deep neural network), CNN(convolutional neural network), RNN(recurrent neural network), RBM(restricted boltzmann machine), DBN(deep belief network), BRDNN(bidirectional recurrent deep neural network), 심층 Q-네트워크(deep Q-networks) 또는 상기 중 둘 이상의 조합 중 하나일 수 있으나, 전술한 예에 한정되지 않는다. 인공지능 모델은 하드웨어 구조 이외에, 추가적으로 또는 대체적으로, 소프트웨어 구조를 포함할 수 있다. The coprocessor 623 may, for example, act on behalf of the main processor 621 while the main processor 621 is in an inactive (eg, sleep) state, or when the main processor 621 is active (eg, executing an application). ), together with the main processor 621, at least one of the components of the electronic device 601 (eg, the display module 660, the sensor module 676, or the communication module 690) It is possible to control at least some of the related functions or states. According to one embodiment, coprocessor 623 (eg, image signal processor or communication processor) may be implemented as part of another functionally related component (eg, camera module 680 or communication module 690). have. According to an embodiment, the auxiliary processor 623 (eg, a neural network processing unit) may include a hardware structure specialized for processing an artificial intelligence model. Artificial intelligence models can be created through machine learning. Such learning may be performed, for example, in the electronic device 601 itself on which the artificial intelligence model is performed, or may be performed through a separate server (eg, the server 608). The learning algorithm may include, for example, supervised learning, unsupervised learning, semi-supervised learning, or reinforcement learning, but in the above example not limited The artificial intelligence model may include a plurality of artificial neural network layers. Artificial neural networks include deep neural networks (DNNs), convolutional neural networks (CNNs), recurrent neural networks (RNNs), restricted boltzmann machines (RBMs), deep belief networks (DBNs), bidirectional recurrent deep neural networks (BRDNNs), It may be one of deep Q-networks or a combination of two or more of the above, but is not limited to the above example. The artificial intelligence model may include, in addition to, or alternatively, a software structure in addition to the hardware structure.

메모리(630)는, 전자 장치(601)의 적어도 하나의 구성요소(예: 프로세서(620) 또는 센서 모듈(676))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(640)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(630)는, 휘발성 메모리(632) 또는 비휘발성 메모리(634)를 포함할 수 있다. The memory 630 may store various data used by at least one component (eg, the processor 620 or the sensor module 676 ) of the electronic device 601 . The data may include, for example, input data or output data for software (eg, the program 640 ) and instructions related thereto. The memory 630 may include a volatile memory 632 or a non-volatile memory 634 .

프로그램(640)은 메모리(630)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(642), 미들 웨어(644) 또는 어플리케이션(646)을 포함할 수 있다. The program 640 may be stored as software in the memory 630 , and may include, for example, an operating system 642 , middleware 644 , or an application 646 .

입력 모듈(650)은, 전자 장치(601)의 구성요소(예: 프로세서(620))에 사용될 명령 또는 데이터를 전자 장치(601)의 외부(예: 유통업자)로부터 수신할 수 있다. 입력 모듈(650)은, 예를 들면, 마이크, 마우스, 키보드, 키(예: 버튼), 또는 디지털 펜(예: 스타일러스 펜)을 포함할 수 있다. The input module 650 may receive a command or data to be used in a component (eg, the processor 620 ) of the electronic device 601 from the outside (eg, a distributor) of the electronic device 601 . The input module 650 may include, for example, a microphone, a mouse, a keyboard, a key (eg, a button), or a digital pen (eg, a stylus pen).

음향 출력 모듈(655)은 음향 신호를 전자 장치(601)의 외부로 출력할 수 있다. 음향 출력 모듈(655)은, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있다. 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.The sound output module 655 may output a sound signal to the outside of the electronic device 601 . The sound output module 655 may include, for example, a speaker or a receiver. The speaker can be used for general purposes such as multimedia playback or recording playback. The receiver can be used to receive incoming calls. According to one embodiment, the receiver may be implemented separately from or as part of the speaker.

디스플레이 모듈(660)은 전자 장치(601)의 외부(예: 유통업자)로 정보를 시각적으로 제공할 수 있다. 디스플레이 모듈(660)은, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일실시예에 따르면, 디스플레이 모듈(660)은 터치를 감지하도록 설정된 터치 센서, 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 압력 센서를 포함할 수 있다. The display module 660 may visually provide information to the outside (eg, a distributor) of the electronic device 601 . The display module 660 may include, for example, a control circuit for controlling a display, a hologram device, or a projector and a corresponding device. According to an embodiment, the display module 660 may include a touch sensor configured to sense a touch or a pressure sensor configured to measure the intensity of a force generated by the touch.

오디오 모듈(670)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일실시예에 따르면, 오디오 모듈(670)은, 입력 모듈(650)을 통해 소리를 획득하거나, 음향 출력 모듈(655), 또는 전자 장치(601)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(602))(예: 스피커 또는 헤드폰)를 통해 소리를 출력할 수 있다.The audio module 670 may convert a sound into an electric signal or, conversely, convert an electric signal into a sound. According to an embodiment, the audio module 670 obtains a sound through the input module 650 , or an external electronic device (eg, a sound output module 655 ) connected directly or wirelessly with the electronic device 601 . The electronic device 602) (eg, a speaker or headphones) may output a sound.

센서 모듈(676)은 전자 장치(601)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 유통업자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일실시예에 따르면, 센서 모듈(676)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다. The sensor module 676 detects an operating state (eg, power or temperature) of the electronic device 601 or an external environmental state (eg, a distributor state), and generates an electrical signal or data value corresponding to the sensed state. can create According to an embodiment, the sensor module 676 may include, for example, a gesture sensor, a gyro sensor, a barometric pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an IR (infrared) sensor, a biometric sensor, It may include a temperature sensor, a humidity sensor, or an illuminance sensor.

인터페이스(677)는 전자 장치(601)가 외부 전자 장치(예: 전자 장치(602))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일실시예에 따르면, 인터페이스(677)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.The interface 677 may support one or more specified protocols that may be used for the electronic device 601 to directly or wirelessly connect with an external electronic device (eg, the electronic device 602 ). According to an embodiment, the interface 677 may include, for example, a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, or an audio interface.

연결 단자(678)는, 그를 통해서 전자 장치(601)가 외부 전자 장치(예: 전자 장치(602))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일실시예에 따르면, 연결 단자(678)는, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.The connection terminal 678 may include a connector through which the electronic device 601 can be physically connected to an external electronic device (eg, the electronic device 602 ). According to an embodiment, the connection terminal 678 may include, for example, an HDMI connector, a USB connector, an SD card connector, or an audio connector (eg, a headphone connector).

햅틱 모듈(679)은 전기적 신호를 유통업자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일실시예에 따르면, 햅틱 모듈(679)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.The haptic module 679 may convert the electrical signal into a mechanical stimulus (eg, vibration or movement) or an electrical stimulus that the distributor can recognize through tactile or kinesthetic sense. According to an embodiment, the haptic module 679 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.

카메라 모듈(680)은 정지 영상 및 동영상을 촬영할 수 있다. 일실시예에 따르면, 카메라 모듈(680)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.The camera module 680 may capture still images and moving images. According to one embodiment, the camera module 680 may include one or more lenses, image sensors, image signal processors, or flashes.

전력 관리 모듈(688)은 전자 장치(601)에 공급되는 전력을 관리할 수 있다. 일실시예에 따르면, 전력 관리 모듈(688)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.The power management module 688 may manage power supplied to the electronic device 601 . According to an embodiment, the power management module 688 may be implemented as, for example, at least a part of a power management integrated circuit (PMIC).

배터리(689)는 전자 장치(601)의 적어도 하나의 구성요소에 전력을 공급할 수 있다. 일실시예에 따르면, 배터리(689)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.The battery 689 may supply power to at least one component of the electronic device 601 . According to one embodiment, battery 689 may include, for example, a non-rechargeable primary cell, a rechargeable secondary cell, or a fuel cell.

통신 모듈(690)은 전자 장치(601)와 외부 전자 장치(예: 전자 장치(602), 전자 장치(604), 또는 서버(608)) 간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(690)은 프로세서(620)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일실시예에 따르면, 통신 모듈(690)은 무선 통신 모듈(692)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(694)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제 1 네트워크(698)(예: 블루투스, WiFi(wireless fidelity) direct 또는 IrDA(infrared data association)와 같은 근거리 통신 네트워크) 또는 제 2 네트워크(699)(예: 레거시 셀룰러 네트워크, 5G 네트워크, 차세대 통신 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부의 전자 장치(604)와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성요소(예: 단일 칩)로 통합되거나, 또는 서로 별도의 복수의 구성요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(692)은 가입자 식별 모듈(696)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제 1 네트워크(698) 또는 제 2 네트워크(699)와 같은 통신 네트워크 내에서 전자 장치(601)를 확인 또는 인증할 수 있다. The communication module 690 is a direct (eg, wired) communication channel or a wireless communication channel between the electronic device 601 and an external electronic device (eg, the electronic device 602 , the electronic device 604 , or the server 608 ). It can support establishment and communication performance through the established communication channel. The communication module 690 may include one or more communication processors that operate independently of the processor 620 (eg, an application processor) and support direct (eg, wired) communication or wireless communication. According to one embodiment, the communication module 690 is a wireless communication module 692 (eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 694 (eg, : It may include a local area network (LAN) communication module, or a power line communication module). A corresponding communication module among these communication modules is a first network 698 (eg, a short-range communication network such as Bluetooth, wireless fidelity (WiFi) direct, or infrared data association (IrDA)) or a second network 699 (eg, legacy). It may communicate with the external electronic device 604 through a cellular network, a 5G network, a next-generation communication network, the Internet, or a telecommunication network such as a computer network (eg, LAN or WAN). These various types of communication modules may be integrated into one component (eg, a single chip) or may be implemented as a plurality of components (eg, multiple chips) separate from each other. The wireless communication module 692 uses subscriber information (eg, International Mobile Subscriber Identifier (IMSI)) stored in the subscriber identification module 696 within a communication network, such as the first network 698 or the second network 699 . The electronic device 601 may be identified or authenticated.

무선 통신 모듈(692)은 4G 네트워크 이후의 5G 네트워크 및 차세대 통신 기술, 예를 들어, NR 접속 기술(new radio access technology)을 지원할 수 있다. NR 접속 기술은 고용량 데이터의 고속 전송(eMBB(enhanced mobile broadband)), 단말 전력 최소화와 다수 단말의 접속(mMTC(massive machine type communications)), 또는 고신뢰도와 저지연(URLLC(ultra-reliable and low-latency communications))을 지원할 수 있다. 무선 통신 모듈(692)은, 예를 들어, 높은 데이터 전송률 달성을 위해, 고주파 대역(예: mmWave 대역)을 지원할 수 있다. 무선 통신 모듈(692)은 고주파 대역에서의 성능 확보를 위한 다양한 기술들, 예를 들어, 빔포밍(beamforming), 거대 배열 다중 입출력(massive MIMO(multiple-input and multiple-output)), 전차원 다중입출력(FD-MIMO: full dimensional MIMO), 어레이 안테나(array antenna), 아날로그 빔형성(analog beam-forming), 또는 대규모 안테나(large scale antenna)와 같은 기술들을 지원할 수 있다. 무선 통신 모듈(692)은 전자 장치(601), 외부 전자 장치(예: 전자 장치(604)) 또는 네트워크 시스템(예: 제 2 네트워크(699))에 규정되는 다양한 요구사항을 지원할 수 있다. 일실시예에 따르면, 무선 통신 모듈(692)은 eMBB 실현을 위한 Peak data rate(예: 20Gbps 이상), mMTC 실현을 위한 손실 Coverage(예: 164dB 이하), 또는 URLLC 실현을 위한 U-plane latency(예: 다운링크(DL) 및 업링크(UL) 각각 0.5ms 이하, 또는 라운드 트립 1ms 이하)를 지원할 수 있다.The wireless communication module 692 may support a 5G network after a 4G network and a next-generation communication technology, for example, a new radio access technology (NR). NR access technology includes high-speed transmission of high-capacity data (eMBB (enhanced mobile broadband)), minimization of terminal power and access to multiple terminals (mMTC (massive machine type communications)), or high reliability and low latency (URLLC (ultra-reliable and low-latency) -latency communications)). The wireless communication module 692 may support a high frequency band (eg, mmWave band) in order to achieve a high data rate, for example. The wireless communication module 692 uses various techniques for securing performance in a high frequency band, for example, beamforming, massive multiple-input and multiple-output (MIMO), all-dimensional multiplexing. It may support technologies such as full dimensional MIMO (FD-MIMO), an array antenna, analog beam-forming, or a large scale antenna. The wireless communication module 692 may support various requirements specified in the electronic device 601 , an external electronic device (eg, the electronic device 604 ), or a network system (eg, the second network 699 ). According to an embodiment, the wireless communication module 692 includes a peak data rate (eg, 20 Gbps or more) for realization of eMBB, loss coverage (eg, 164 dB or less) for realization of mMTC, or U-plane latency (for URLLC realization) ( Example: Downlink (DL) and uplink (UL) each 0.5 ms or less, or round trip 1 ms or less) can be supported.

안테나 모듈(697)은 신호 또는 전력을 외부(예: 외부의 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일실시예에 따르면, 안테나 모듈(697)은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 안테나를 포함할 수 있다. 일실시예에 따르면, 안테나 모듈(697)은 복수의 안테나들(예: 어레이 안테나)을 포함할 수 있다. 이런 경우, 제 1 네트워크(698) 또는 제 2 네트워크(699)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(690)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(690)과 외부의 전자 장치 간에 송신되거나 수신될 수 있다. 어떤 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC(radio frequency integrated circuit))이 추가로 안테나 모듈(697)의 일부로 형성될 수 있다. The antenna module 697 may transmit or receive a signal or power to the outside (eg, an external electronic device). According to an embodiment, the antenna module 697 may include an antenna including a conductor formed on a substrate (eg, a PCB) or a radiator formed of a conductive pattern. According to an embodiment, the antenna module 697 may include a plurality of antennas (eg, an array antenna). In this case, at least one antenna suitable for a communication scheme used in a communication network such as the first network 698 or the second network 699 is connected from the plurality of antennas by, for example, the communication module 690 . can be selected. A signal or power may be transmitted or received between the communication module 690 and an external electronic device through the selected at least one antenna. According to some embodiments, other components (eg, a radio frequency integrated circuit (RFIC)) other than the radiator may be additionally formed as a part of the antenna module 697 .

다양한 실시예에 따르면, 안테나 모듈(697)은 mmWave 안테나 모듈을 형성할 수 있다. 일실시예에 따르면, mmWave 안테나 모듈은 인쇄 회로 기판, 상기 인쇄 회로 기판의 제 1 면(예: 아래 면)에 또는 그에 인접하여 배치되고 지정된 고주파 대역(예: mmWave 대역)을 지원할 수 있는 RFIC, 및 상기 인쇄 회로 기판의 제 2 면(예: 윗 면 또는 측 면)에 또는 그에 인접하여 배치되고 상기 지정된 고주파 대역의 신호를 송신 또는 수신할 수 있는 복수의 안테나들(예: 어레이 안테나)을 포함할 수 있다.According to various embodiments, the antenna module 697 may form a mmWave antenna module. According to one embodiment, the mmWave antenna module comprises a printed circuit board, an RFIC disposed on or adjacent to a first side (eg, bottom side) of the printed circuit board and capable of supporting a designated high frequency band (eg, mmWave band); and a plurality of antennas (eg, an array antenna) disposed on or adjacent to a second side (eg, top or side) of the printed circuit board and capable of transmitting or receiving signals of the designated high frequency band. can do.

상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))을 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.At least some of the components are connected to each other through a communication method between peripheral devices (eg, a bus, general purpose input and output (GPIO), serial peripheral interface (SPI), or mobile industry processor interface (MIPI)) and a signal ( e.g. commands or data) can be exchanged with each other.

일실시예에 따르면, 명령 또는 데이터는 제 2 네트워크(699)에 연결된 서버(608)를 통해서 전자 장치(601)와 외부의 전자 장치(604)간에 송신 또는 수신될 수 있다. 외부의 전자 장치(602, 또는 104) 각각은 전자 장치(601)와 동일한 또는 다른 종류의 장치일 수 있다. 일실시예에 따르면, 전자 장치(601)에서 실행되는 동작들의 전부 또는 일부는 외부의 전자 장치들(602, 104, 또는 108) 중 하나 이상의 외부의 전자 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(601)가 어떤 기능이나 서비스를 자동으로, 또는 유통업자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(601)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부의 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부의 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(601)로 전달할 수 있다. 전자 장치(601)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 모바일 에지 컴퓨팅(MEC: mobile edge computing), 또는 -서버 컴퓨팅 기술이 이용될 수 있다. 전자 장치(601)는, 예를 들어, 분산 컴퓨팅 또는 모바일 에지 컴퓨팅을 이용하여 초저지연 서비스를 제공할 수 있다. 다른 실시예에 있어서, 외부의 전자 장치(604)는 IoT(internet of things) 기기를 포함할 수 있다. 서버(608)는 기계 학습 및/또는 신경망을 이용한 지능형 서버일 수 있다. 일실시예에 따르면, 외부의 전자 장치(604) 또는 서버(608)는 제 2 네트워크(699) 내에 포함될 수 있다. 전자 장치(601)는 5G 통신 기술 및 IoT 관련 기술을 기반으로 지능형 서비스(예: 스마트 홈, 스마트 시티, 스마트 카, 또는 헬스 케어)에 적용될 수 있다. According to an embodiment, the command or data may be transmitted or received between the electronic device 601 and the external electronic device 604 through the server 608 connected to the second network 699 . Each of the external electronic devices 602 or 104 may be the same or a different type of the electronic device 601 . According to an embodiment, all or part of the operations performed by the electronic device 601 may be executed by one or more external electronic devices 602 , 104 , or 108 . For example, when the electronic device 601 is to perform a function or service automatically, or in response to a request from a distributor or other device, the electronic device 601 may automatically execute the function or service. Alternatively or additionally, one or more external electronic devices may be requested to perform at least a part of the function or the service. One or more external electronic devices that have received the request may execute at least a part of the requested function or service, or an additional function or service related to the request, and transmit a result of the execution to the electronic device 601 . The electronic device 601 may process the result as it is or additionally and provide it as at least a part of a response to the request. For this, for example, cloud computing, distributed computing, mobile edge computing (MEC), or -server computing technology may be used. The electronic device 601 may provide an ultra-low latency service using, for example, distributed computing or mobile edge computing. In another embodiment, the external electronic device 604 may include an Internet of things (IoT) device. Server 608 may be an intelligent server using machine learning and/or neural networks. According to an embodiment, the external electronic device 604 or the server 608 may be included in the second network 699 . The electronic device 601 may be applied to an intelligent service (eg, smart home, smart city, smart car, or health care) based on 5G communication technology and IoT-related technology.

서버(608)는 전자 장치(601)가 접속되며, 접속된 전자 장치(601)로 서비스를 제공할 수 있다. 또한, 서버(608)는 회원 가입 절차를 진행하여 그에 따라 회원으로 가입된 유통업자의 각종 정보를 저장하여 관리하고, 서비스에 관련된 각종 구매 및 결제 기능을 제공할 수도 있다. 또한, 서버(608)는, 유통업자 간에 서비스를 공유할 수 있도록, 복수의 전자 장치(601) 각각에서 실행되는 서비스 애플리케이션의 실행 데이터를 실시간으로 공유할 수도 있다. 이러한 서버(608)는 하드웨어적으로는 통상적인 웹 서버(Web Server) 또는 왑 서버(WAP Server)와 동일한 구성을 가질 수 있다. 그러나, 소프트웨어적으로는, C, C++, Java, Visual Basic, Visual C 등 여하한 언어를 통하여 구현되어 여러 가지 기능을 하는 프로그램 모듈(Module)을 포함할 수 있다. 또한, 서버(608)는 일반적으로 인터넷과 같은 개방형 컴퓨터 네트워크를 통하여 불특정 다수 클라이언트 및/또는 다른 서버와 연결되어 있고, 클라이언트 또는 다른 서버의 작업수행 요청을 접수하고 그에 대한 작업 결과를 계산하여 제공하는 컴퓨터 시스템 및 그를 위하여 설치되어 있는 컴퓨터 소프트웨어(서버 프로그램)를 뜻하는 것이다. 또한, 서버(608)는, 전술한 서버 프로그램 이외에도, 서버(608) 상에서 동작하는 일련의 응용 프로그램(Application Program)과 경우에 따라서는 내부 또는 외부에 구축되어 있는 각종 데이터베이스(DB: Database, 이하 "DB"라 칭함)를 포함하는 넓은 개념으로 이해되어야 할 것이다. 따라서, 서버(608)는, 회원 가입 정보와, 게임에 대한 각종 정보 및 데이터를 분류하여 DB에 저장시키고 관리하는데, 이러한 DB는 서버(608)의 내부 또는 외부에 구현될 수 있다. 또한, 서버(608)는, 일반적인 서버용 하드웨어에 도스(DOS), 윈도우(windows), 리눅스(Linux), 유닉스(UNIX), 매킨토시(Macintosh) 등의 운영체제에 따라 다양하게 제공되고 있는 서버 프로그램을 이용하여 구현될 수 있으며, 대표적인 것으로는 윈도우 환경에서 사용되는 웹사이트(Website), IIS(Internet Information Server)와 유닉스환경에서 사용되는 CERN, NCSA, APPACH등이 이용될 수 있다. 또한, 서버(608)는, 서비스의 유통업자 인증이나 서비스와 관련된 구매 결제를 위한 인증 시스템 및 결제 시스템과 연동할 수도 있다.The server 608 is connected to the electronic device 601 and may provide a service to the connected electronic device 601 . In addition, the server 608 may store and manage various types of information of distributors subscribed as members by performing a membership registration procedure, and may provide various purchase and payment functions related to services. Also, the server 608 may share execution data of a service application executed in each of the plurality of electronic devices 601 in real time so that the service can be shared among distributors. This server 608 may have the same configuration as a conventional web server (Web Server) or WAP server (WAP Server) in terms of hardware. However, in terms of software, it may include a program module that is implemented through any language such as C, C++, Java, Visual Basic, or Visual C and performs various functions. In addition, the server 608 is generally connected to an unspecified number of clients and/or other servers through an open computer network such as the Internet, receives a request for performing a task from a client or other server, calculates the work result and provides it It means a computer system and the computer software (server program) installed therefor. In addition, the server 608, in addition to the above-described server program, a series of application programs (Application Program) operating on the server 608 and in some cases, various databases (DB: Database, hereinafter " DB") should be understood as a broad concept including. Accordingly, the server 608 classifies, stores and manages member registration information, various information and data about the game in a DB, and this DB may be implemented inside or outside the server 608 . In addition, the server 608 uses a server program that is provided in various ways according to operating systems such as DOS, Windows, Linux, UNIX, and Macintosh in general server hardware. As a representative example, a website used in a Windows environment, Internet Information Server (IIS), and CERN, NCSA, APPACH, etc. used in a Unix environment may be used. In addition, the server 608 may interwork with an authentication system and a payment system for service distributor authentication or service-related purchase payment.

제1 네트워크(698) 및 제2 네트워크(699)는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조 또는 서버(608)와 전자 장치들(601, 104)을 연결하는 망(Network)을 의미한다. 제1 네트워크(698) 및 제2 네트워크(699)는 인터넷(Internet), LAN(Local Area Network), Wireless LAN(Wireless Local Area Network), WAN(Wide Area Network), PAN(Personal Area Network), 3G, 4G, LTE, 5G, Wi-Fi 등이 포함되나 이에 한정되지는 않는다. 제1 네트워크(698) 및 제2 네트워크(699)는 LAN, WAN 등의 폐쇄형 제1 네트워크(698) 및 제2 네트워크(699)일 수도 있으나, 인터넷(Internet)과 같은 개방형인 것이 바람직하다. 인터넷은 TCP/IP 프로토콜 및 그 상위계층에 존재하는 여러 서비스, 즉 HTTP(HyperText Transfer Protocol), Telnet, FTP(File Transfer Protocol), DNS(Domain Name System), SMTP(Simple Mail Transfer Protocol), SNMP(Simple Network Management Protocol), NFS(Network File Service), NIS(Network Information Service)를 제공하는 전 세계적인 개방형 컴퓨터 제1 네트워크(698) 및 제2 네트워크(699) 구조를 의미한다.The first network 698 and the second network 699 are a connection structure capable of exchanging information between respective nodes such as terminals and servers, or a network connecting the server 608 and the electronic devices 601 and 104 . (Network). The first network 698 and the second network 699 are Internet, Local Area Network (LAN), Wireless Local Area Network (Wireless LAN), Wide Area Network (WAN), Personal Area Network (PAN), 3G , 4G, LTE, 5G, Wi-Fi, and the like. The first network 698 and the second network 699 may be the closed first network 698 and the second network 699 such as a LAN or WAN, but preferably an open type such as the Internet. The Internet is a TCP/IP protocol and several services existing in its upper layers, namely HTTP (HyperText Transfer Protocol), Telnet, FTP (File Transfer Protocol), DNS (Domain Name System), SMTP (Simple Mail Transfer Protocol), SNMP ( Simple Network Management Protocol), NFS (Network File Service), and NIS (Network Information Service) that provides a worldwide open computer first network 698 and second network 699 structure.

데이터베이스는 데이터베이스 관리 프로그램(DBMS)을 이용하여 컴퓨터 시스템의 저장공간(하드디스크 또는 메모리)에 구현된 일반적인 데이터구조를 가질 수 가질 수 있다. 데이터베이스는 데이터의 검색(추출), 삭제, 편집, 추가 등을 자유롭게 행할 수 있는 데이터 저장형태를 가질 수 있다. 데이터베이스는 오라클(Oracle), 인포믹스(Infomix), 사이베이스(Sybase), DB2와 같은 관계형 데이타베이스 관리 시스템(RDBMS)이나, 겜스톤(Gemston), 오리온(Orion), O2 등과 같은 객체 지향 데이타베이스 관리 시스템(OODBMS) 및 엑셀론(Excelon), 타미노(Tamino), 세카이주(Sekaiju) 등의 XML 전용 데이터베이스(XML Native Database)를 이용하여 본 개시의 일 실시예의 목적에 맞게 구현될 수 있고, 자신의 기능을 달성하기 위하여 적당한 필드(Field) 또는 엘리먼트들을 가질 수 있다.The database may have a general data structure implemented in a storage space (hard disk or memory) of a computer system using a database management program (DBMS). The database may have a data storage form in which data can be freely searched (extracted), deleted, edited, added, and the like. Database is a relational database management system (RDBMS) such as Oracle, Infomix, Sybase, DB2, or object-oriented database management such as Gemston, Orion, O2, etc. It can be implemented for the purpose of an embodiment of the present disclosure by using a system (OODBMS) and an XML-only database (XML Native Database) such as Excelon, Tamino, and Sekaiju, and its function It may have an appropriate field or elements to achieve .

도 7은 일 실시예에 따른 프로그램의 구성을 도시한 도면이다.7 is a diagram illustrating a configuration of a program according to an exemplary embodiment.

도 7은 다양한 실시예에 따른 프로그램(640)을 예시하는 블록도(700)이다. 일실시예에 따르면, 프로그램(640)은 전자 장치(601)의 하나 이상의 리소스들을 제어하기 위한 운영 체제(642), 미들웨어(644), 또는 상기 운영 체제(642)에서 실행 가능한 어플리케이션(646)을 포함할 수 있다. 운영 체제(642)는, 예를 들면, AndroidTM, iOSTM, WindowsTM, SymbianTM, TizenTM, 또는 BadaTM를 포함할 수 있다. 프로그램(640) 중 적어도 일부 프로그램은, 예를 들면, 제조 시에 전자 장치(601)에 프리로드되거나, 또는 유통업자에 의해 사용 시 외부 전자 장치(예: 전자 장치(602 또는 104), 또는 서버(608))로부터 다운로드되거나 갱신 될 수 있다. 프로그램(640)의 전부 또는 일부는 뉴럴 네트워크를 포함할 수 있다. 7 is a block diagram 700 illustrating a program 640 in accordance with various embodiments. According to an embodiment, the program 640 executes an operating system 642 , middleware 644 , or an application 646 executable in the operating system 642 for controlling one or more resources of the electronic device 601 . may include Operating system 642 may include, for example, Android™, iOS™, Windows™, Symbian™, Tizen™, or Bada™. At least some of the programs 640 are, for example, preloaded into the electronic device 601 at the time of manufacture, or an external electronic device (eg, the electronic device 602 or 104 ), or a server when used by a distributor. (608)) or may be updated. All or part of the program 640 may include a neural network.

운영 체제(642)는 전자 장치(601)의 하나 이상의 시스템 리소스들(예: 프로세스, 메모리, 또는 전원)의 관리(예: 할당 또는 회수)를 제어할 수 있다. 운영 체제(642)는, 추가적으로 또는 대체적으로, 전자 장치(601)의 다른 하드웨어 디바이스, 예를 들면, 입력 모듈(650), 음향 출력 모듈(655), 디스플레이 모듈(660), 오디오 모듈(670), 센서 모듈(676), 인터페이스(677), 햅틱 모듈(679), 카메라 모듈(680), 전력 관리 모듈(688), 배터리(689), 통신 모듈(690), 가입자 식별 모듈(696), 또는 안테나 모듈(697)을 구동하기 위한 하나 이상의 드라이버 프로그램들을 포함할 수 있다.The operating system 642 may control management (eg, allocation or retrieval) of one or more system resources (eg, a process, memory, or power) of the electronic device 601 . The operating system 642 may additionally or alternatively include other hardware devices of the electronic device 601 , for example, an input module 650 , a sound output module 655 , a display module 660 , an audio module 670 . , sensor module 676 , interface 677 , haptic module 679 , camera module 680 , power management module 688 , battery 689 , communication module 690 , subscriber identification module 696 , or It may include one or more driver programs for driving the antenna module 697 .

미들웨어(644)는 전자 장치(601)의 하나 이상의 리소스들로부터 제공되는 기능 또는 정보가 어플리케이션(646)에 의해 사용될 수 있도록 다양한 기능들을 어플리케이션(646)으로 제공할 수 있다. 미들웨어(644)는, 예를 들면, 어플리케이션 매니저(701), 윈도우 매니저(703), 멀티미디어 매니저(705), 리소스 매니저(707), 파워 매니저(709), 데이터베이스 매니저(711), 패키지 매니저(713), 커넥티비티 매니저(715), 노티피케이션 매니저(717), 로케이션 매니저(719), 그래픽 매니저(721), 시큐리티 매니저(723), 통화 매니저(725), 또는 음성 인식 매니저(727)를 포함할 수 있다. The middleware 644 may provide various functions to the application 646 so that functions or information provided from one or more resources of the electronic device 601 may be used by the application 646 . The middleware 644 includes, for example, an application manager 701 , a window manager 703 , a multimedia manager 705 , a resource manager 707 , a power manager 709 , a database manager 711 , and a package manager 713 . ), connectivity manager 715 , notification manager 717 , location manager 719 , graphics manager 721 , security manager 723 , call manager 725 , or voice recognition manager 727 . can

어플리케이션 매니저(701)는, 예를 들면, 어플리케이션(646)의 생명 주기를 관리할 수 있다. 윈도우 매니저(703)는, 예를 들면, 화면에서 사용되는 하나 이상의 GUI 자원들을 관리할 수 있다. 멀티미디어 매니저(705)는, 예를 들면, 미디어 파일들의 재생에 필요한 하나 이상의 포맷들을 파악하고, 그 중 선택된 해당하는 포맷에 맞는 코덱을 이용하여 상기 미디어 파일들 중 해당하는 미디어 파일의 인코딩 또는 디코딩을 수행할 수 있다. 리소스 매니저(707)는, 예를 들면, 어플리케이션(646)의 소스 코드 또는 메모리(630)의 메모리의 공간을 관리할 수 있다. 파워 매니저(709)는, 예를 들면, 배터리(689)의 용량, 온도 또는 전원을 관리하고, 이 중 해당 정보를 이용하여 전자 장치(601)의 동작에 필요한 관련 정보를 결정 또는 제공할 수 있다. 일실시예에 따르면, 파워 매니저(709)는 전자 장치(601)의 바이오스(BIOS: basic input/output system)(미도시)와 연동할 수 있다.The application manager 701 may manage the life cycle of the application 646 , for example. The window manager 703 may manage one or more GUI resources used in a screen, for example. The multimedia manager 705, for example, identifies one or more formats required for playback of media files, and encodes or decodes a corresponding media file among the media files using a codec suitable for the selected format. can be done The resource manager 707 may, for example, manage the space of the source code of the application 646 or the memory of the memory 630 . The power manager 709, for example, manages the capacity, temperature, or power of the battery 689 and determines or provides related information necessary for the operation of the electronic device 601 by using the corresponding information. . According to an embodiment, the power manager 709 may interwork with a basic input/output system (BIOS) (not shown) of the electronic device 601 .

데이터베이스 매니저(711)는, 예를 들면, 어플리케이션(646)에 의해 사용될 데이터베이스를 생성, 검색, 또는 변경할 수 있다. 패키지 매니저(713)는, 예를 들면, 패키지 파일의 형태로 배포되는 어플리케이션의 설치 또는 갱신을 관리할 수 있다. 커넥티비티 매니저(715)는, 예를 들면, 전자 장치(601)와 외부 전자 장치 간의 무선 연결 또는 직접 연결을 관리할 수 있다. 노티피케이션 매니저(717)는, 예를 들면, 지정된 이벤트(예: 착신 통화, 메시지, 또는 알람)의 발생을 유통업자에게 알리기 위한 기능을 제공할 수 있다. 로케이션 매니저(719)는, 예를 들면, 전자 장치(601)의 위치 정보를 관리할 수 있다. 그래픽 매니저(721)는, 예를 들면, 유통업자에게 제공될 하나 이상의 그래픽 효과들 또는 이와 관련된 유통업자 인터페이스를 관리할 수 있다. The database manager 711 may create, retrieve, or change a database to be used by the application 646 , for example. The package manager 713 may manage installation or update of an application distributed in the form of a package file, for example. The connectivity manager 715 may manage, for example, a wireless connection or a direct connection between the electronic device 601 and an external electronic device. The notification manager 717 may provide, for example, a function for notifying the distributor of the occurrence of a specified event (eg, an incoming call, a message, or an alarm). The location manager 719 may manage location information of the electronic device 601 , for example. The graphic manager 721 may manage, for example, one or more graphic effects to be provided to a distributor or a distributor interface related thereto.

시큐리티 매니저(723)는, 예를 들면, 시스템 보안 또는 유통업자 인증을 제공할 수 있다. 통화(telephony) 매니저(725)는, 예를 들면, 전자 장치(601)에 의해 제공되는 음성 통화 기능 또는 영상 통화 기능을 관리할 수 있다. 음성 인식 매니저(727)는, 예를 들면, 유통업자의 음성 데이터를 서버(608)로 전송하고, 그 음성 데이터에 적어도 일부 기반하여 전자 장치(601)에서 수행될 기능에 대응하는 명령어(command), 또는 그 음성 데이터에 적어도 일부 기반하여 변환된 문자 데이터를 서버(608)로부터 수신할 수 있다. 일 실시예에 따르면, 미들웨어(744)는 동적으로 기존의 구성요소를 일부 삭제하거나 새로운 구성요소들을 추가할 수 있다. 일 실시예에 따르면, 미들웨어(644)의 적어도 일부는 운영 체제(642)의 일부로 포함되거나, 또는 운영 체제(642)와는 다른 별도의 소프트웨어로 구현될 수 있다.Security manager 723 may provide, for example, system security or distributor authentication. The telephony manager 725 may manage, for example, a voice call function or a video call function provided by the electronic device 601 . The voice recognition manager 727 transmits, for example, the distributor's voice data to the server 608, and based at least in part on the voice data, a command corresponding to a function to be performed in the electronic device 601; Alternatively, text data converted based on at least a part of the voice data may be received from the server 608 . According to an embodiment, the middleware 744 may dynamically delete some existing components or add new components. According to an embodiment, at least a portion of the middleware 644 may be included as a part of the operating system 642 or implemented as software separate from the operating system 642 .

어플리케이션(646)은, 예를 들면, 홈(751), 다이얼러(753), SMS/MMS(755), IM(instant message)(757), 브라우저(759), 카메라(761), 알람(763), 컨택트(765), 음성 인식(767), 이메일(769), 달력(771), 미디어 플레이어(773), 앨범(775), 와치(777), 헬스(779)(예: 운동량 또는 혈당과 같은 생체 정보를 측정), 또는 환경 정보(781)(예: 기압, 습도, 또는 온도 정보 측정) 어플리케이션을 포함할 수 있다. 일실시예에 따르면, 어플리케이션(646)은 전자 장치(601)와 외부 전자 장치 사이의 정보 교환을 지원할 수 있는 정보 교환 어플리케이션(미도시)을 더 포함할 수 있다. 정보 교환 어플리케이션은, 예를 들면, 외부 전자 장치로 지정된 정보 (예: 통화, 메시지, 또는 알람)를 전달하도록 설정된 노티피케이션 릴레이 어플리케이션, 또는 외부 전자 장치를 관리하도록 설정된 장치 관리 어플리케이션을 포함할 수 있다. 노티피케이션 릴레이 어플리케이션은, 예를 들면, 전자 장치(601)의 다른 어플리케이션(예: 이메일 어플리케이션(769))에서 발생된 지정된 이벤트(예: 메일 수신)에 대응하는 알림 정보를 외부 전자 장치로 전달할 수 있다. 추가적으로 또는 대체적으로, 노티피케이션 릴레이 어플리케이션은 외부 전자 장치로부터 알림 정보를 수신하여 전자 장치(601)의 유통업자에게 제공할 수 있다. Application 646 may include, for example, home 751 , dialer 753 , SMS/MMS 755 , instant message (IM) 757 , browser 759 , camera 761 , and alarm 763 . , contact 765, voice recognition 767, email 769, calendar 771, media player 773, album 775, watch 777, health 779 (such as exercise or blood sugar) measuring biometric information), or environmental information 781 (eg, measuring atmospheric pressure, humidity, or temperature information). According to an embodiment, the application 646 may further include an information exchange application (not shown) capable of supporting information exchange between the electronic device 601 and an external electronic device. The information exchange application may include, for example, a notification relay application configured to transmit specified information (eg, call, message, or alarm) to an external electronic device, or a device management application configured to manage the external electronic device. have. The notification relay application, for example, transmits notification information corresponding to a specified event (eg, mail reception) generated in another application (eg, the email application 769) of the electronic device 601 to the external electronic device. can Additionally or alternatively, the notification relay application may receive notification information from an external electronic device and provide it to the distributor of the electronic device 601 .

장치 관리 어플리케이션은, 예를 들면, 전자 장치(601)와 통신하는 외부 전자 장치 또는 그 일부 구성 요소(예: 외부 전자장치의 디스플레이 모듈 또는 카메라 모듈)의 전원(예: 턴-온 또는 턴-오프) 또는 기능(예: 밝기, 해상도, 또는 포커스)을 제어할 수 있다. 장치 관리 어플리케이션은, 추가적으로 또는 대체적으로, 외부 전자 장치에서 동작하는 어플리케이션의 설치, 삭제, 또는 갱신을 지원할 수 있다.The device management application is, for example, a power supply (eg, turn-on or turn-off) of an external electronic device or some component thereof (eg, a display module or a camera module of the external electronic device) that communicates with the electronic device 601 . ) or a function (eg brightness, resolution, or focus). The device management application may additionally or alternatively support installation, deletion, or update of an application operating in an external electronic device.

이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The embodiments described above may be implemented by a hardware component, a software component, and/or a combination of a hardware component and a software component. For example, the apparatus, methods and components described in the embodiments may include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable gate (FPGA). array), a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions, may be implemented using one or more general purpose or special purpose computers. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For convenience of understanding, although one processing device is sometimes described as being used, one of ordinary skill in the art will recognize that the processing device includes a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that may include For example, the processing device may include a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as parallel processors.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may comprise a computer program, code, instructions, or a combination of one or more thereof, which configures a processing device to operate as desired or is independently or collectively processed You can command the device. The software and/or data may be any kind of machine, component, physical device, virtual equipment, computer storage medium or device, to be interpreted by or to provide instructions or data to the processing device. , or may be permanently or temporarily embody in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored in one or more computer-readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and available to those skilled in the art of computer software. Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic such as floppy disks. - includes magneto-optical media, and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described with reference to the limited drawings, those skilled in the art may apply various technical modifications and variations based on the above. For example, the described techniques are performed in a different order than the described method, and/or the described components of the system, structure, apparatus, circuit, etc. are combined or combined in a different form than the described method, or other components Or substituted or substituted by equivalents may achieve an appropriate result.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (9)

다자간 영상 회의 서비스를 이용한 교습 시스템에 있어서,
학습자의 개인 학습 정보를 관리하고, 다자간 영상 회의 서비스 및 교습 모드에 따른 콘텐츠를 제공하는 서버;
상기 서버에 접속하여 상기 콘텐츠를 제어하기 위한 제어 장치; 및
상기 서버에 접속하여 상기 콘텐츠를 수신하고 학습자의 교습 참여 정보를 송신하는 복수의 단말 장치를 포함하고,
상기 교습 모드는 수업을 진행하기 위한 제1 모드, 자율 학습을 관리하기 위한 제2 모드, 및 학습의 정도를 평가하기 위한 제3 모드를 포함하고,
상기 서버는:
상기 제어 장치의 상기 서버에 대한 접속을 확인한 후 상기 다자간 영상 회의 서비스를 상기 복수의 단말 장치에 제공하고, 상기 복수의 단말 장치로부터 영상 데이터를 수신하여 상기 제어 장치에 송신하고,
상기 다자간 영상 회의 서비스의 제공에 대응하여 상기 제어 장치의 제1 사용자 입력 또는 상기 서버의 현재 시간 중 적어도 하나에 기반하여 상기 교습 모드를 실행하고,
상기 교습 모드가 상기 제1 모드에 해당하는 경우 상기 복수의 단말 장치로부터 상기 교습 참여 정보 중 제1 교습 참여 정보를 수신하고,
상기 제1 교습 참여 정보를 기반으로 수학식 1을 이용하여 상기 수업에 대한 참여도를 계산하여 산출하고,
[수학식 1]
Figure 112022043129591-pat00014


수학식 1에서, n은 제1 모드의 진행 시간,
Figure 112022043129591-pat00015
는 t 시간에서의 학습자의 동공 이동 변화량,
Figure 112022043129591-pat00016
는 t 시간에서의 학습자의 손 움직임 변화량, c는 제어 장치(101)의 서버 접속 시간, d는 단말 장치(102)의 서버 접속 시간, f는 학습자의 질문 횟수를 의미하고,
상기 산출된 수업에 대한 참여도를 기반으로 상기 복수의 단말 장치를 제1 단말 및 제2 단말로 그룹핑하고,
상기 제어 장치로부터 수신한 제1 교습 데이터를 상기 제1 단말로 송신하고, 상기 제어 장치로부터 수신한 제2 교습 데이터를 상기 제2 단말로 송신하고,
상기 교습 모드가 상기 제2 모드에 해당하는 경우, 상기 복수의 단말 장치로부터 상기 교습 참여 정보 중 제2 교습 참여 정보를 수신하고,
상기 제2 교습 참여 정보를 기반으로 상기 자율 학습에 대한 참여도를 계산하여 산출하고,
상기 산출된 자율 학습에 대한 참여도를 기반으로 상기 복수의 단말 장치를 제3 단말 및 제4 단말로 그룹핑하고,
상기 제3 단말은 상기 산출된 자율 학습에 대한 참여도가 기 설정된 기준 조건을 만족하지 못하는 단말을 포함하고,
상기 제3 단말로 상기 제어 장치로 수신한 학습 요청 데이터를 송신하고,
상기 교습 모드가 상기 제3 모드에 해당하는 경우, 상기 제어 장치의 제2 사용자 입력 또는 기 설정된 기준 값을 기반으로 상기 제1 모드 실행에 따른 상기 수업에 대한 참여도 및 상기 제2 모드 실행에 따른 상기 자율 학습에 대한 참여도에 대한 가중치를 설정하고,
상기 수업에 대한 참여도에 대한 가중치 및 상기 자율 학습에 대한 참여도에 대한 가중치를 기반으로 상기 복수의 단말 장치 각각에 대한 학습 수행 점수를 산정하고,
상기 제어 장치에 상기 학습 수행 점수에 대한 데이터를 송신하고,
상기 제1 교습 참여 정보는 상기 복수의 단말 장치의 상기 서버의 접속 시간(time), 상기 학습자의 시선 변화에 대한 정보, 상기 학습자의 손 움직임에 대한 정보, 및 상기 학습자의 질문 횟수에 대한 정보를 포함하는,
다자간 영상 회의 시스템을 이용한 교습 시스템.
In a teaching system using a multi-party video conferencing service,
a server that manages the learner's personal learning information and provides content according to a multi-party video conferencing service and a teaching mode;
a control device for accessing the server and controlling the content; and
A plurality of terminal devices accessing the server to receive the content and to transmit learner's teaching participation information,
The teaching mode includes a first mode for conducting a class, a second mode for managing self-learning, and a third mode for evaluating the degree of learning,
The server is:
After confirming the connection of the control device to the server, the multi-party video conferencing service is provided to the plurality of terminal devices, and video data is received from the plurality of terminal devices and transmitted to the control device;
executing the teaching mode based on at least one of a first user input of the control device or a current time of the server in response to the provision of the multi-party video conferencing service;
receiving first teaching participation information among the teaching participation information from the plurality of terminal devices when the teaching mode corresponds to the first mode;
Calculating and calculating the degree of participation in the class using Equation 1 based on the first teaching participation information,
[Equation 1]
Figure 112022043129591-pat00014


In Equation 1, n is the duration of the first mode,
Figure 112022043129591-pat00015
is the change in pupil movement of the learner at time t,
Figure 112022043129591-pat00016
is the amount of change in the learner's hand movement at time t, c is the server access time of the control device 101, d is the server access time of the terminal device 102, f is the number of questions asked by the learner,
grouping the plurality of terminal devices into a first terminal and a second terminal based on the calculated degree of participation in the class;
transmitting the first teaching data received from the control device to the first terminal, and transmitting the second teaching data received from the control device to the second terminal;
when the teaching mode corresponds to the second mode, receiving second teaching participation information among the teaching participation information from the plurality of terminal devices;
Calculating and calculating the degree of participation in the self-learning based on the second teaching participation information,
grouping the plurality of terminal devices into a third terminal and a fourth terminal based on the calculated degree of participation in self-learning;
The third terminal includes a terminal in which the calculated degree of participation in self-learning does not satisfy a preset reference condition,
Transmitting the learning request data received to the control device to the third terminal,
When the teaching mode corresponds to the third mode, based on a second user input of the control device or a preset reference value, participation in the class according to the execution of the first mode and the degree of participation in the second mode according to the execution of the second mode Set a weight for the degree of participation in the self-learning,
calculating a learning performance score for each of the plurality of terminal devices based on a weight for the degree of participation in the class and a weight for the degree of participation in the self-learning;
Transmitting data about the learning performance score to the control device,
The first teaching participation information includes information on access time of the plurality of terminal devices to the server, information on the learner's gaze change, information on the learner's hand movement, and information on the number of questions of the learner. containing,
A teaching system using a multi-party video conferencing system.
제1항에 있어서,
상기 다자간 영상 회의 서비스의 제공에 대응하여 실행되는 상기 교습 모드에 있어서, 상기 제어 장치의 상기 서버에 대한 접속 시간이 제1 시간 내에 해당하는 경우 상기 제1 모드가 실행되고, 상기 제어 장치의 상기 서버에 대한 접속 시간이 제2 시간 내에 해당하는 경우 상기 제2 모드가 실행되고, 상기 제어 장치의 상기 서버에 대한 접속 시간이 제3 시간 내에 해당하는 경우 상기 제3 모드가 실행되는, 다자간 영상 회의 시스템을 이용한 교습 시스템.
According to claim 1,
In the teaching mode executed in response to the provision of the multi-party video conferencing service, when the access time of the control device to the server falls within a first time period, the first mode is executed, and the server of the control device The second mode is executed when the access time to the server falls within the second time period, and the third mode is executed when the access time of the control device to the server falls within the third time period. teaching system using
제1항에 있어서,
상기 복수의 단말 장치 중 상기 제1 단말은 상기 산출된 수업에 대한 참여도가 기 설정된 기준 조건을 만족하지 못하는 단말을 포함하고, 상기 제2 단말은 상기 산출된 수업에 대한 참여도가 기 설정된 기준 조건을 만족하는 단말을 포함하고,
상기 서버는 상기 제1 단말 및 상기 제2 단말에 대한 데이터를 상기 제어 장치에 송신하고,
상기 제어 장치는 상기 제1 단말의 상기 수업에 대한 참여도에 대한 평균 및 상기 제2 단말의 상기 수업에 대한 참여도에 대한 평균을 기반으로, 상기 제1 교습 데이터 및 상기 제2 교습 데이터를 생성하는, 다자간 영상 회의 시스템을 이용한 교습 시스템.
According to claim 1,
Among the plurality of terminal devices, the first terminal includes a terminal in which the calculated degree of participation in the class does not satisfy a preset criterion condition, and the second terminal includes a preset criterion for the calculated degree of participation in the class. Including a terminal that satisfies the condition,
The server transmits data for the first terminal and the second terminal to the control device,
The control device generates the first teaching data and the second teaching data based on an average of the first terminal's participation in the class and an average of the second terminal's participation in the class. A teaching system using a multi-party video conferencing system.
제1항에 있어서,
상기 제3 단말로 송신되는 상기 학습 요청 데이터는 상기 제3 단말이 이수해야 하는 자율 학습 시간 및 상기 서버에 송신되어야 하는 자율 학습 데이터를 포함하는, 다자간 영상 회의 시스템을 이용한 교습 시스템.
According to claim 1,
The learning request data transmitted to the third terminal includes a self-learning time that the third terminal must complete and self-learning data that must be transmitted to the server.
제1항에 있어서,
상기 서버는 상기 수업에 대한 참여도에 대한 가중치 및 상기 자율 학습에 대한 참여도에 대한 가중치를 상기 제어 장치의 입력에 의해 상기 복수의 단말 장치 각각에 대해 개별적으로 설정하는, 다자간 영상 회의 시스템을 이용한 교습 시스템.
According to claim 1,
The server sets the weight for the degree of participation in the class and the weight for the degree of participation in the self-learning individually for each of the plurality of terminal devices by input of the control device, using a multi-party video conferencing system. teaching system.
삭제delete 제1항에 있어서,
상기 제2 교습 참여 정보는 상기 자율 학습을 위한 학습 목록에 대한 정보, 상기 학습자의 서버 접속 기간에 대한 정보를 포함하는,
교습 시스템.
According to claim 1,
The second teaching participation information includes information on the learning list for the self-learning and information on the learner's server access period,
teaching system.
제1항에 있어서,
상기 서버는,
상기 수업에 대한 참여도에 대한 가중치 및 상기 자율 학습에 대한 참여도에 대한 가중치를 각각 상기 수업에 대한 참여도 및 상기 자율 학습에 대한 참여도에 적용하고,
상기 적용된 결과 및 상기 복수의 단말 장치의 개수를 기초로 상기 복수의 단말 장치 각각에 대한 학습 수행 점수를 산정하는,
교습 시스템.
According to claim 1,
The server is
Applying the weight for the degree of participation in the class and the weight for the degree of participation in the self-learning to the degree of participation in the class and the degree of participation in the self-learning, respectively,
calculating a learning performance score for each of the plurality of terminal devices based on the applied result and the number of the plurality of terminal devices,
teaching system.
서버에 의해, 학습자의 개인 학습 정보를 관리하고, 다자간 영상 회의 서비스 및 수업을 진행하기 위한 제1 모드, 자율 학습을 관리하기 위한 제2 모드, 및 학습의 정도를 평가하기 위한 제3 모드를 포함하는 교습 모드에 따른 콘텐츠를 제공하는 동작;
제어 장치에 의해, 상기 서버에 접속하여 상기 콘텐츠를 제어하는 동작;
복수의 단말 장치에 의해, 상기 서버에 접속하여 상기 콘텐츠를 수신하고 학습자의 교습 참여 정보를 송신하는 동작;
상기 서버에 의해, 상기 제어 장치의 상기 서버에 대한 접속을 확인한 후 상기 다자간 영상 회의 서비스를 상기 복수의 단말 장치에 제공하고, 상기 복수의 단말 장치로부터 영상 데이터를 수신하여 상기 제어 장치에 송신하는 동작;
상기 서버에 의해, 상기 다자간 영상 회의 서비스의 제공에 대응하여 상기 제어 장치의 제1 사용자 입력 또는 상기 서버의 현재 시간 중 적어도 하나에 기반하여 상기 교습 모드를 실행하는 동작;
상기 서버에 의해, 상기 교습 모드가 상기 제1 모드에 해당하는 경우 상기 복수의 단말 장치로부터 상기 교습 참여 정보 중 제1 교습 참여 정보를 수신하는 동작;
상기 서버에 의해, 상기 제1 교습 참여 정보를 기반으로 수학식 1을 이용하여 상기 수업에 대한 참여도를 계산하여 산출하는 동작;
상기 서버에 의해, 상기 산출된 수업에 대한 참여도를 기반으로 상기 복수의 단말 장치를 제1 단말 및 제2 단말로 그룹핑하는 동작;
상기 서버에 의해, 상기 제어 장치로부터 수신한 제1 교습 데이터를 상기 제1 단말로 송신하고, 상기 제어 장치로부터 수신한 제2 교습 데이터를 상기 제2 단말로 송신하는 동작;
상기 서버에 의해, 상기 교습 모드가 상기 제2 모드에 해당하는 경우, 상기 복수의 단말 장치로부터 상기 교습 참여 정보 중 제2 교습 참여 정보를 수신하는 동작;
상기 서버에 의해, 상기 제2 교습 참여 정보를 기반으로 상기 자율 학습에 대한 참여도를 계산하여 산출하는 동작;
상기 서버에 의해, 상기 산출된 자율 학습에 대한 참여도를 기반으로 상기 복수의 단말 장치를 제3 단말 및 제4 단말로 그룹핑하는 동작;
상기 서버에 의해, 상기 제3 단말은 상기 산출된 자율 학습에 대한 참여도가 기 설정된 기준 조건을 만족하지 못하는 단말을 포함하는 동작;
상기 서버에 의해, 상기 제3 단말로 상기 제어 장치로 수신한 학습 요청 데이터를 송신하는 동작;
상기 서버에 의해, 상기 교습 모드가 상기 제3 모드에 해당하는 경우, 상기 제어 장치의 제2 사용자 입력 또는 기 설정된 기준 값을 기반으로 상기 제1 모드 실행에 따른 상기 수업에 대한 참여도 및 상기 제2 모드 실행에 따른 상기 자율 학습에 대한 참여도에 대한 가중치를 설정하는 동작;
상기 서버에 의해, 상기 수업에 대한 참여도에 대한 가중치 및 상기 자율 학습에 대한 참여도에 대한 가중치를 기반으로 상기 복수의 단말 장치 각각에 대한 학습 수행 점수를 산정하는 동작; 및
상기 서버에 의해, 상기 제어 장치에 상기 학습 수행 점수에 대한 데이터를 송신하는 동작
을 포함하고,
[수학식 1]
Figure 112022043129591-pat00017


수학식 1에서, n은 제1 모드의 진행 시간,
Figure 112022043129591-pat00018
는 t 시간에서의 학습자의 동공 이동 변화량,
Figure 112022043129591-pat00019
는 t 시간에서의 학습자의 손 움직임 변화량, c는 제어 장치(101)의 서버 접속 시간, d는 단말 장치(102)의 서버 접속 시간, f는 학습자의 질문 횟수를 의미하고,
상기 제1 교습 참여 정보는 상기 복수의 단말 장치의 상기 서버의 접속 시간(time), 상기 학습자의 시선 변화에 대한 정보, 상기 학습자의 손 움직임에 대한 정보, 및 상기 학습자의 질문 횟수에 대한 정보를 포함하는,
다자간 영상 회의 시스템을 이용한 교습 방법.

The server includes, by the server, a first mode for managing the learner's personal learning information and conducting a multi-party video conferencing service and class, a second mode for managing self-learning, and a third mode for evaluating the degree of learning providing content according to a teaching mode;
controlling the content by accessing the server by a control device;
an operation of accessing the server by a plurality of terminal devices to receive the content and to transmit the learner's teaching participation information;
An operation of, by the server, after confirming the connection of the control device to the server, providing the multi-party video conferencing service to the plurality of terminal devices, and receiving video data from the plurality of terminal devices and transmitting the video data to the control device ;
executing, by the server, the teaching mode based on at least one of a first user input of the control device or a current time of the server in response to the provision of the multi-party video conferencing service;
receiving, by the server, first teaching participation information among the teaching participation information from the plurality of terminal devices when the teaching mode corresponds to the first mode;
calculating, by the server, the degree of participation in the class using Equation 1 based on the first teaching participation information;
grouping, by the server, the plurality of terminal devices into a first terminal and a second terminal based on the calculated degree of participation in the class;
transmitting, by the server, the first teaching data received from the control device to the first terminal, and transmitting the second teaching data received from the control device to the second terminal;
receiving, by the server, second teaching participation information among the teaching participation information from the plurality of terminal devices when the teaching mode corresponds to the second mode;
calculating, by the server, the degree of participation in the self-learning based on the second teaching participation information;
grouping, by the server, the plurality of terminal devices into a third terminal and a fourth terminal based on the calculated degree of participation in self-learning;
an operation in which, by the server, the third terminal includes a terminal in which the calculated degree of participation in self-learning does not satisfy a preset reference condition;
transmitting, by the server, the learning request data received to the control device to the third terminal;
If, by the server, the teaching mode corresponds to the third mode, the degree of participation in the class according to the execution of the first mode based on a second user input of the control device or a preset reference value and the second mode setting a weight for the degree of participation in the self-learning according to the two-mode execution;
calculating, by the server, a learning performance score for each of the plurality of terminal devices based on a weight for the degree of participation in the class and a weight for the degree of participation in the self-learning; and
Transmitting, by the server, data on the learning performance score to the control device
including,
[Equation 1]
Figure 112022043129591-pat00017


In Equation 1, n is the duration of the first mode,
Figure 112022043129591-pat00018
is the change in pupil movement of the learner at time t,
Figure 112022043129591-pat00019
is the amount of change in the learner's hand movement at time t, c is the server access time of the control device 101, d is the server access time of the terminal device 102, f is the number of questions asked by the learner,
The first teaching participation information includes information on access time of the plurality of terminal devices to the server, information on the learner's gaze change, information on the learner's hand movement, and information on the number of questions of the learner. containing,
A teaching method using a multi-party video conferencing system.

KR1020220017003A 2022-02-07 2022-02-09 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof KR102446665B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020220118323A KR20220136297A (en) 2022-02-07 2022-09-20 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof
KR1020220118324A KR20220136298A (en) 2022-02-07 2022-09-20 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20220015393 2022-02-07
KR1020220015393 2022-02-07
KR1020220016046 2022-02-08
KR20220016046 2022-02-08

Related Child Applications (2)

Application Number Title Priority Date Filing Date
KR1020220118323A Division KR20220136297A (en) 2022-02-07 2022-09-20 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof
KR1020220118324A Division KR20220136298A (en) 2022-02-07 2022-09-20 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof

Publications (1)

Publication Number Publication Date
KR102446665B1 true KR102446665B1 (en) 2022-09-27

Family

ID=83452135

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020220017003A KR102446665B1 (en) 2022-02-07 2022-02-09 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof
KR1020220118324A KR20220136298A (en) 2022-02-07 2022-09-20 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof
KR1020220118323A KR20220136297A (en) 2022-02-07 2022-09-20 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020220118324A KR20220136298A (en) 2022-02-07 2022-09-20 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof
KR1020220118323A KR20220136297A (en) 2022-02-07 2022-09-20 A server providing a teaching system using a multi-party video conferencing service and an operation method thereof

Country Status (1)

Country Link
KR (3) KR102446665B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001337589A (en) * 2000-05-26 2001-12-07 Tricore International Inc Remote education system
KR20140005493U (en) * 2013-04-15 2014-10-23 김규출 The on/off line e-learning system which enables the attendance check and team forming
KR20160044315A (en) * 2014-10-15 2016-04-25 한국과학기술연구원 Analysis system and method for class attitude
KR20210128221A (en) * 2020-04-16 2021-10-26 한밭대학교 산학협력단 Control Management System for Online Learner and Grading Method using the Same
KR102336574B1 (en) 2020-12-04 2021-12-07 (주)매트리오즈 Learning Instruction Method Using Video Images of Non-face-to-face Learners, and Management Server Used Therein

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001337589A (en) * 2000-05-26 2001-12-07 Tricore International Inc Remote education system
KR20140005493U (en) * 2013-04-15 2014-10-23 김규출 The on/off line e-learning system which enables the attendance check and team forming
KR20160044315A (en) * 2014-10-15 2016-04-25 한국과학기술연구원 Analysis system and method for class attitude
KR20210128221A (en) * 2020-04-16 2021-10-26 한밭대학교 산학협력단 Control Management System for Online Learner and Grading Method using the Same
KR102336574B1 (en) 2020-12-04 2021-12-07 (주)매트리오즈 Learning Instruction Method Using Video Images of Non-face-to-face Learners, and Management Server Used Therein

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
The background art described above is possessed or acquired by the inventor in the process of deriving the disclosure of the present application, and cannot necessarily be said to be a known technology disclosed to the general public prior to the present application.

Also Published As

Publication number Publication date
KR20220136298A (en) 2022-10-07
KR20220136297A (en) 2022-10-07

Similar Documents

Publication Publication Date Title
KR102434342B1 (en) Method and apparatus for providing data related to a recommended product by a server using neural network
KR102492333B1 (en) Method and apparatus for providing information about a medical appointment schedule to a terminal based on parking-related information using a neural network
KR102484291B1 (en) Method and apparatus for providing an applicant list to a terminal using a neural network by a sever
KR102492334B1 (en) Method and apparatus for managing a call connection between a customer terminal and an agent terminal based on usage information related to a chatbot service using a neural network
KR102446665B1 (en) A server providing a teaching system using a multi-party video conferencing service and an operation method thereof
KR102544246B1 (en) Learner-tailored math education system
KR102479512B1 (en) Performance-oriented education method, server and terminal practicing the method
KR102461579B1 (en) Method and Server For Operating A Local Expert Brokerage Platform
KR102474122B1 (en) Method and apparatus for recommending products using augmented reality based on user type and user-related information
KR102414167B1 (en) Method and apparatus for security using packet sending using neural networks
KR102433654B1 (en) Method and apparatus for providing information related to a psychological state based on a color image to a terminal by a server using neural network
KR102463860B1 (en) Method for providing couple matching service using saju-myeongri based on artificial intelligence
KR20230168097A (en) Method and apparatus for determining a similarity of webtoons based on genre values of webtoons
KR102563678B1 (en) Server and operation method that provide customized learning service using learned neural network
KR102600656B1 (en) Method for providing basketball player matching service based on active-passive matching algorithm
KR102627731B1 (en) Apparatus and method for providing service of setting customized learning direction for student's academic achievement
KR20240015467A (en) Study management method and apparatus thereof using neural networks
KR20240006986A (en) Method and apparatus for adjusting problem difficulty using a neural network
KR20240006983A (en) Apparatus and method for providing learning feedback using a neural network
KR102485428B1 (en) Method and apparatus for providing a user-related company list to a terminal using a neural network by a sever
KR102513048B1 (en) Method and apparatus for transmitting diagnostic information to a mentor terminal based on report information related to a support project and progress information related to the support project using a neural network
KR102539564B1 (en) Voice message transmission system for providing quality assurance service related to a voice message based on a neural network
KR102562282B1 (en) Propensity-based matching method and apparatus
KR102590839B1 (en) System and method for providing career counseling contents through neural network-based context analysis
KR102554242B1 (en) Method and apparatus for providing a message related an event to a terminal using a neural network by a server

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant