KR101909461B1 - Method for providing education service based on argument reality - Google Patents

Method for providing education service based on argument reality Download PDF

Info

Publication number
KR101909461B1
KR101909461B1 KR1020170173274A KR20170173274A KR101909461B1 KR 101909461 B1 KR101909461 B1 KR 101909461B1 KR 1020170173274 A KR1020170173274 A KR 1020170173274A KR 20170173274 A KR20170173274 A KR 20170173274A KR 101909461 B1 KR101909461 B1 KR 101909461B1
Authority
KR
South Korea
Prior art keywords
augmented reality
tag
data
educational
providing
Prior art date
Application number
KR1020170173274A
Other languages
Korean (ko)
Inventor
안형준
Original Assignee
코디소프트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 코디소프트 주식회사 filed Critical 코디소프트 주식회사
Priority to KR1020170173274A priority Critical patent/KR101909461B1/en
Application granted granted Critical
Publication of KR101909461B1 publication Critical patent/KR101909461B1/en
Priority to PCT/KR2018/014355 priority patent/WO2019117495A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Abstract

The present invention relates to a method of providing an educational service based on an augmented reality. According to an embodiment of the present invention, to provide an educational service based on an augmented reality, the method includes a step (a) of allowing an educational content providing apparatus to confirm the type of an educational content reproduction apparatus, and a step (b) of providing the educational content reproducing apparatus with moving picture data including an augmented reality tag, augmented reality script data executed according to the augmented reality tag, and a tag recognition program for recognizing the augmented reality tag. It is possible to provide various information to a learner.

Description

증강현실이 적용된 교육 서비스 제공방법{METHOD FOR PROVIDING EDUCATION SERVICE BASED ON ARGUMENT REALITY}[0001] METHOD FOR PROVIDING EDUCATION SERVICE [0002] BASED ON ARGUMENT REALITY [0003]

본 발명은 증강현실이 적용된 교육 서비스 제공방법에 관한 것이다.The present invention relates to a method of providing an educational service to which an augmented reality is applied.

일반적으로 교육 또는 강의 시스템으로 교육자와 교육생이 학교나 학원에서 직접 수업을 진행하는 오프라인에 의한 교육 방식과 달리, 이러닝 시스템은 강사가 진행하는 수업의 진행하는 강의 영상이 스트리밍 서버에서 인터넷 등과 같은 네트워크를 통해서 스트리밍 서비스로 학습자의 단말기를 통해 재생되는 방식이다.Unlike the offline education system where educators and students usually teach directly at schools or academies by education or lecture system, the e-learning system is a system in which the lecture video of the lecture progressed by the lecturer is transmitted from the streaming server to the network Through a learner's terminal through a streaming service.

그러나 이러닝 시스템에서 이뤄지는 학습은 스트리밍 서비스를 통하여 강사의 강의 영상이 학습자의 단말기에 일방적으로 재생되는 교육방식이므로, 오프라인 교육현장에서의 교육방식과 달리 학습자와 강사 또는 학습자 간의 상호 작용이 용이하게 이뤄지지 않는다는 문제점이 발생한다.However, since learning in the e-learning system is a training method in which a lecture image of a lecturer is reproduced unilaterally on a learner's terminal through a streaming service, interaction between a learner and an instructor or a learner is not easily performed A problem arises.

또한 이러닝 시스템의 교육은 단방향 강의로 이루어지기 때문에 지루해지기 쉽고 집중력도 저하되기 쉬워서 학습자의 학습 능률이 떨어진다는 문제점이 발생한다.In addition, since the e-learning system is taught by unidirectional lectures, it is easy to get bored and the concentration of the e-learning system is lowered.

따라서 이러닝 시스템에서 학습자의 집중력 향상을 개선 방안이 시급히 요구되는 상황이다.Therefore, it is urgently needed to improve learner 's concentration ability in e - learning system.

한국공개특허공보 제10-2006-0111743호(2006.10.30.)Korean Patent Publication No. 10-2006-0111743 (October 30, 2006)

본 발명은 학습 집중력 저하를 방지하고 학습자에게 다양한 정보를 제공할 수 있는 증강현실이 적용된 교육 서비스 제공방법을 제공하는 것이다.The present invention provides a method of providing an educational service using an augmented reality capable of preventing a decrease in learning concentration and providing various information to a learner.

본 발명의 일 실시예에 따르면, 증강현실이 적용된 교육 서비스를 제공하기 위하여, (a) 교육 콘텐츠 제공장치가 교육 콘텐츠 재생장치의 종류를 확인하는 단계, 및 (b) 증강현실 태그가 포함된 동영상 데이터, 증강현실 태그에 따라 실행되는 증강현실 스크립트 데이터, 증강현실 태그를 인식하기 위한 태그 인식 프로그램을 상기 교육 콘텐츠 재생장치에 제공하는 단계를 포함하는, 증강현실이 적용된 교육 서비스 제공방법을 제공한다.According to an embodiment of the present invention, there is provided a method for providing an educational service to which an augmented reality is applied, the method comprising the steps of: (a) And a tag recognition program for recognizing an augmented reality tag, the augmented reality script data being executed according to the augmented reality tag, and the tag for identifying the augmented reality tag to the educational content reproduction apparatus.

또한, 상기 (a) 단계에서는, 상기 교육 콘텐츠 재생장치에 맞는 해상도의 동영상 데이터를 제공하기 위하여 상기 교육 콘텐츠 제공장치가 상기 교육 콘텐츠 재생장치의 종류를 확인할 수 있다.Also, in the step (a), the educational contents providing apparatus may check the type of the educational contents reproducing apparatus to provide moving picture data having a resolution suitable for the educational contents reproducing apparatus.

또한, 상기 (b) 단계에서는, 상기 교육 콘텐츠 제공장치가 콘텐츠 제공 모드에 따라 설정된 데이터를 상기 교육 콘텐츠 재생장치에 제공하되, 상기 콘텐츠 제공 모드는 편집 동영상 제공 모드 및 라이브 동영상 제공 모드를 포함할 수 있다.In the step (b), the educational content providing apparatus may provide data set according to a content providing mode to the educational content reproducing apparatus, wherein the content providing mode may include an editing video providing mode and a live video providing mode have.

또한, 상기 편집 동영상 제공 모드에서는 상기 교육 콘텐츠 제공장치가 저장부에 저장된 동영상 데이터, 증강현실 스크립트 데이터, 태그 인식 프로그램을 상기 교육 콘텐츠 재생장치에 제공하되, 상기 동영상 데이터는 화면의 좌우측 가장자리에 설정된 태그 배치 영역으로 적어도 하나의 증강현실 태그가 배치되도록 증강현실 태그를 포함하고, 상기 증강현실 스크립트 데이터는 미리 설정된 데이터를 출력하도록 설정될 수 있다.In the edited moving picture providing mode, the educational contents providing apparatus provides the moving picture data, the augmented reality script data, and the tag recognizing program stored in the storage unit to the educational contents reproducing apparatus, Wherein the augmented reality tag includes at least one augmented reality tag arranged in a placement area, and the augmented reality script data may be set to output preset data.

또한, 상기 라이브 동영상 제공 모드에서는 상기 교육 콘텐츠 제공장치가 실시간으로 촬영된 동영상과, 콘텐츠 제공자가 미리 설정한 증강현실 스크립트 데이터 및 태그 인식 프로그램을 상기 교육 콘텐츠 재생장치에 제공할 수 있다.In the live moving picture providing mode, the educational contents providing apparatus can provide the moving picture photographed in real time and the augmented reality script data and the tag recognizing program preset by the contents provider to the educational contents reproducing apparatus.

또한, 상기 증강현실 스크립트 데이터는 교육 내용과 관련된 부연 정보를 리스트로 출력하도록 설정될 수 있다.In addition, the augmented reality script data may be set to output additional information related to the education contents as a list.

또한, 상기 교육 콘텐츠 제공장치가 상기 교육 콘텐츠 재생장치로부터 학습자의 문의사항을 접수하여 처리하는 단계를 더 포함할 수 있다.The education contents providing apparatus may further include a step of accepting and processing the questions of the learner from the educational contents reproducing apparatus.

또한, 상기 교육 콘텐츠 제공장치는 교육 서비스 제공자에게 학습자의 문의사항을 전달하고, 교육 서비스 제공자로부터 문의사항에 대한 답변을 수신하여 증강현실 스크립트 데이터에 반영할 수 있다.In addition, the training content providing apparatus may transmit the inquiry of the learner to the education service provider, receive the answer to the inquiry from the education service provider, and reflect the response to the augmented reality script data.

또한, 상기 증강현실 태그는 문자 및 숫자 중 적어도 하나를 포함하는 기호로 표현될 수 있다.Also, the augmented reality tag may be represented by a symbol including at least one of a letter and a number.

또한, 상기 태그 인식 프로그램은 실시간으로 전송되는 동영상 내에서 상기 증강현실 태그를 인식하기 위한 템플릿 데이터를 포함할 수 있다.In addition, the tag recognition program may include template data for recognizing the augmented reality tag in a moving image transmitted in real time.

또한, 상기 태그 인식 프로그램은 상기 템플릿 데이터를 이용한 템플릿 매칭을 수행하여 상기 증강현실 태그를 인식할 수 있다.In addition, the tag recognition program can recognize the augmented reality tag by performing template matching using the template data.

또한, 상기 태그 인식 프로그램은 미리 설정된 태그 인식 영역을 기준으로 증강현실 태그가 차지하는 영역과, 나머지 영역 각각의 비율을 비교하여 비교 결과를 상기 템플릿 데이터와 매칭시켜 상기 증강현실 태그의 코드를 검출할 수 있다.Also, the tag recognition program may compare the ratio of the remaining area with the area occupied by the augmented reality tag based on a preset tag recognition area, and compare the comparison result with the template data to detect the code of the augmented reality tag have.

또한, 상기 템플릿 데이터는 상기 증강현실 태그가 차지하는 영역과, 나머지 영역 각각의 비율에 따른 상기 증강현실 태그의 코드를 포함할 수 있다.The template data may include an area occupied by the augmented reality tag and a code of the augmented reality tag according to a ratio of each of the remaining areas.

또한, 상기 템플릿 데이터는 동영상의 해상도 별로 설정된 상기 증강현실 태그의 코드를 포함할 수 있다.The template data may include a code of the augmented reality tag set for each resolution of the moving image.

본 발명은 AR 태그가 포함된 동영상 데이터와 AR 태그에 따라 실행되는 스크립트 데이터를 이용하여 증강현실이 적용된 교육 콘텐츠를 제공함으로써 학습자에게 다양한 정보와 흥미를 제공할 수 있다. 이를 통해, 학습자의 관심도 또는 집중력을 향상시킬 수 있다.The present invention can provide a variety of information and interest to a learner by providing educational contents to which augmented reality is applied by using moving picture data including an AR tag and script data executed according to an AR tag. This can improve the learner's attention or concentration.

또한, 본 발명은 학습자에게 증강현실이 적용된 교육 콘텐츠을 제공하여 교육 내용과 부연 정보를 한 화면 내에서 모두 보여줄 수 있다.Also, the present invention can provide the learner with the educational contents to which the augmented reality is applied, so that the education contents and the supplementary information can all be displayed in one screen.

또한, 본 발명은 교육 콘텐츠 제공장치가 동영상 스트리밍 서비스를 제공할 때 동영상 데이터와 별도로 AR 스크립트 데이터를 교육 콘텐츠 재생장치에 제공함으로써, 학습자에게 화질 저하 없이 구동되는 AR을 제공할 수 있다.Further, according to the present invention, when the educational contents providing apparatus provides the moving picture streaming service, the AR contents data is provided to the educational contents reproducing apparatus separately from the moving picture data, thereby providing the AR that is operated without deterioration in picture quality to the learner.

또한, 본 발명은 동영상을 재생하는 중 AR 데이터를 선택적으로 출력시킬 수 있다. 이를 통해, 본 발명은 학습자가 AR의 구동을 선택할 수 있는 편의성을 향상시킬 수 있다.In addition, the present invention can selectively output AR data during playback of moving images. Thus, the present invention can improve the convenience in which the learner can select the drive of the AR.

도 1은 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공 시스템의 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 교육 콘텐츠 제공장치의 구성을 나타내는 도면이다.
도 3은 증강현실 태그가 포함된 동영상 데이터를 나타내는 도면이다.
도 4는 증강현실 스크립트 데이터가 실행된 동영상을 나타내는 도면이다.
도 5는 태그 인식 프로그램의 템플릿 매칭을 설명하는 도면이다.
도 6은 본 발명의 일 실시예에 따른 교육 콘텐츠 재생장치의 구성을 나타내는 도면이다.
도 7은 본 발명의 일 실시예에 따른 증강현실이 적용된 교육 서비스 제공방법을 나타내는 순서도이다.
도 8은 본 발명의 일 실시예에 따른 증강현실이 적용된 교육 콘텐츠를 나타내는 도면이다.1 is a block diagram illustrating a configuration of a content providing system to which an augmented reality is applied according to an embodiment of the present invention.
2 is a diagram illustrating a configuration of an educational contents providing apparatus according to an embodiment of the present invention.
3 is a diagram illustrating moving image data including an augmented reality tag.
4 is a diagram showing a moving image in which augmented reality script data is executed.
5 is a diagram for explaining template matching of a tag recognition program.
6 is a diagram illustrating a configuration of an educational contents reproducing apparatus according to an embodiment of the present invention.
FIG. 7 is a flowchart illustrating a method of providing an education service using an augmented reality according to an embodiment of the present invention. Referring to FIG.
FIG. 8 is a diagram illustrating training contents to which an augmented reality is applied according to an embodiment of the present invention.

이하에서는, 본 발명의 바람직한 실시예에 기초하여 본 발명을 보다 구체적으로 설명한다. 그러나, 하기 실시예는 본 발명의 이해를 돕기 위한 일 예에 불과한 것으로 이에 의해 본 발명의 권리범위가 축소되거나 한정되는 것은 아니다.Hereinafter, the present invention will be described more specifically based on preferred embodiments of the present invention. However, the following embodiments are merely examples for helping understanding of the present invention, and thus the scope of the present invention is not limited or limited.

도 1은 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공 시스템의 구성을 나타내는 도면이다.1 is a block diagram illustrating a configuration of a content providing system to which an augmented reality is applied according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시예에 따른 증강현실이 적용된 콘텐츠 제공 시스템은 교육 콘텐츠 제공장치(100), 통신망(50) 및 교육 콘텐츠 재생장치(200)를 포함할 수 있다.Referring to FIG. 1, a content providing system using an augmented reality according to an embodiment of the present invention may include an educational content providing apparatus 100, a communication network 50, and an educational content reproducing apparatus 200.

교육 콘텐츠 제공장치(100)는 통신망(50)을 통해 교육 콘텐츠 재생장치(200)와 통신하여 콘텐츠를 제공하거나, 회원 관리, 결재 관리 등의 콘텐츠 제공 서비스를 위한 다양한 기능을 수행할 수 있다. 특히, 교육 콘텐츠 제공장치(100)는 학습자에게 증강현실이 적용된 동영상 스트리밍을 서비스하기 위하여, AR 태그가 포함된 동영상 데이터, AR 태그에 따라 실행되는 AR 스크립트 데이터, AR 태그를 인식하기 위한 태그 인식 프로그램을 교육 콘텐츠 재생장치(200)에 제공할 수 있다.The educational contents providing apparatus 100 can perform various functions for providing contents by communicating with the educational contents reproducing apparatus 200 through the communication network 50 or providing contents such as member management and approval management. In particular, in order to provide the learner with the video streaming service applied with the augmented reality, the educational contents providing apparatus 100 may be provided with video data including the AR tag, AR script data executed according to the AR tag, To the educational contents reproducing apparatus 200. [

일 실시예로, 교육 콘텐츠 제공장치(100)는 동영상 스트리밍 서비스를 제공하는 서버로 구성될 수 있다. 이를 위하여, 도 2를 참조하면 교육 콘텐츠 제공장치(100)는 서버 통신부(110), 서버 제어부(120), 서버 저장부(130)를 포함할 수 있다.In one embodiment, the educational contents providing apparatus 100 may be configured as a server for providing a moving image streaming service. 2, the training content providing apparatus 100 may include a server communication unit 110, a server control unit 120, and a server storage unit 130. [

서버 통신부(110)는 유선 및 무선 중 적어도 하나의 방식으로 통신망(50)을 통해 교육 콘텐츠 재생장치(200)와 통신하여 동영상 스트리밍 서비스를 제공하기 위한 데이터를 송수신하는 기능을 수행할 수 있다. 예를 들면, 서버 통신부(110)는 상술한 동영상 데이터, AR 스크립트 데이터, 태그 인식 프로그램을 교육 콘텐츠 재생장치(200)로 송신할 수 있다.The server communication unit 110 may communicate with the educational contents reproducing apparatus 200 through the communication network 50 in at least one of wired and wireless manner to transmit and receive data for providing a moving image streaming service. For example, the server communication unit 110 can transmit the moving picture data, the AR script data, and the tag recognition program described above to the education contents reproduction apparatus 200. [

여기서, 서버 통신부(110)는 교육 콘텐츠 제공장치(100) 내에 포함된 모듈로 기재하고 있으나, 반드시 이에 한정되는 것은 아니며, 통신을 위한 별도의 장치로 구성될 수도 있다.Here, the server communication unit 110 is described as a module included in the educational contents providing apparatus 100, but is not limited thereto, and may be configured as a separate device for communication.

서버 제어부(120)는 교육 콘텐츠 제공장치(100)의 전반적인 기능을 제어하는 제어 수단으로서, 서버 통신부(110)를 제어하여 교육 콘텐츠 재생장치(200)로부터 스크립트 설정 정보를 수신하거나, 교육 콘텐츠 재생장치(200)로 AR 태그가 포함된 동영상 데이터, AR 태그에 따라 실행되는 AR 스크립트 데이터, AR 태그를 인식하기 위한 태그 인식 프로그램을 송신하도록 서버 통신부(110)를 제어할 수 있다.The server control unit 120 controls the overall function of the educational contents providing apparatus 100 and controls the server communication unit 110 to receive script setting information from the educational contents reproducing apparatus 200, It is possible to control the server communication unit 110 to transmit moving image data including the AR tag to the server 200, AR script data to be executed according to the AR tag, and a tag recognition program for recognizing the AR tag.

구체적으로, 서버 제어부(120)는 동영상 스트리밍 서비스를 제공하기 위하여 도 3에 도시된 바와 같이 AR 태그(300)가 포함된 동영상 데이터를 실시간으로 송신하도록 서버 통신부(110)를 제어할 수 있다. 또한, 서버 제어부(120)는 동영상 데이터와 함께 AR 스크립트 데이터 및 태그 인식 프로그램을 송신하도록 서버 통신부(110)를 제어할 수 있다.Specifically, the server control unit 120 may control the server communication unit 110 to transmit moving image data including the AR tag 300 in real time as shown in FIG. 3 to provide a moving image streaming service. Also, the server control unit 120 may control the server communication unit 110 to transmit the AR script data and the tag recognition program together with the moving image data.

여기서, AR 태그(300)는 문자 및 숫자 중 적어도 하나를 포함하는 기호로 표현된 코드를 포함할 수 있다. 예를 들면, AR 태그(300)는 A00 내지 Z99 중 적어도 하나로 표현되는 코드를 포함할 수 있다.Here, the AR tag 300 may include a code represented by a symbol including at least one of a letter and a number. For example, the AR tag 300 may include a code represented by at least one of A00 through Z99.

또한, 동영상 데이터는 AR 스크립트 데이터가 인코딩되지 않은 상태로 교육 콘텐츠 재생장치(200)로 송신될 수 있다.Also, the moving picture data can be transmitted to the educational contents reproducing apparatus 200 without the AR script data being encoded.

또한, AR 스크립트 데이터는 도 4와 같이 동영상 데이터에서 추가 정보를 제공하도록 설정될 수 있다. 예를 들면, AR 스크립트 데이터는 동영상 데이터에 링크되어 콘텐츠 제공자가 제공하는 AR 데이터를 보여주거나 AR 프로그램을 실행하도록 설정될 수 있다.Further, the AR script data can be set to provide additional information in the moving picture data as shown in FIG. For example, the AR script data may be linked to the moving picture data to show the AR data provided by the content provider or may be set to execute the AR program.

여기서, AR 스크립트 데이터는 AR 태그(300)에 매칭되어 출력이 실행되는 비디오 데이터, 오디오 데이터 또는 프로그램을 포함할 수 있다. 즉, AR 스크립트 데이터는 교육 콘텐츠 재생장치(200)에서 추출한 AR 태그(300)에 매칭되어 실행되는 데이터 또는 프로그램을 포함할 수 있다.Here, the AR script data may include video data, audio data, or a program that is matched to the AR tag 300 and the output is executed. That is, the AR script data may include data or a program that is matched and executed to the AR tag 300 extracted from the educational content reproducing apparatus 200.

또한, AR 스크립트 데이터는 비디오 데이터, 오디오 데이터 또는 프로그램의 위치와 효과를 지정하도록 설정될 수 있다. 예를 들면, AR 스크립트 데이터는 재생되는 동영상 내의 좌측 상단 부분에 사진을 보여주되, 상단에서 하단으로 내려오는 효과를 보이도록 설정될 수 있다.In addition, the AR script data can be set to specify the location and effects of video data, audio data or programs. For example, the AR script data may be set to show a picture in the upper left portion of the moving picture to be reproduced, and to show an effect of descending from the top to the bottom.

또한, AR 스크립트 데이터는 교육 콘텐츠 재생장치(200)에서 "A" 태그를 추출한 경우 "A" 태그에 매칭된 "B" 사진을 동영상에 오버레이(overlay)시켜 출력하거나, "C" 태그를 추출한 경우 "C" 태그에 매칭된 "D" 프로그램을 동영상에 오버레이시켜 실행하도록 설정될 수 있다.In the case where the "A" tag is extracted from the educational content reproduction apparatus 200, the AR script data is displayed by overlaying a "B" photograph matched with the "A" tag on the moving image and extracting the "C" Quot; D "program matched with the" C "tag.

또한, 태그 인식 프로그램은 실시간으로 전송되는 동영상 내에서 AR 태그(300)를 인식하기 위한 템플릿 데이터를 포함할 수 있다. 이때, 태그 인식 프로그램은 템플릿 데이터를 이용한 템플릿 매칭을 수행하여 AR 태그(300)를 인식할 수 있다.In addition, the tag recognition program may include template data for recognizing the AR tag 300 in the moving image transmitted in real time. At this time, the tag recognition program can recognize the AR tag 300 by performing template matching using the template data.

구체적으로, 태그 인식 프로그램은 도 5를 참조하여 미리 설정된 태그 인식 영역(310)을 기준으로 AR 태그의 기호가 차지하는 제1 영역(320)과, 나머지 영역인 제2 영역(330) 각각의 비율을 비교하여 비교 결과를 템플릿 데이터와 매칭시켜 AR 태그를 인식할 수 있다.Specifically, referring to FIG. 5, the tag recognition program determines the ratio of the first region 320 occupied by the symbol of the AR tag to the second region 330, which is the remaining region, based on the tag- The comparison result is matched with the template data to recognize the AR tag.

여기서, 템플릿 데이터는 AR 태그의 기호가 차지하는 제1 영역(320)과, 나머지 영역인 제2 영역(330) 각각의 비율에 따라 설정된 코드를 포함할 수 있다. 예를 들면, 템플릿 데이터는 제1 영역(320)이 약 40%이고 제2 영역(330)이 약 60%인 AR 태그의 기호를 A01에 대한 코드로 저장하고, 제1 영역(320)이 약 41%이고 제2 영역(330)이 약 59%인 AR 태그의 기호를 A02에 대한 코드로 저장할 수 있다.Here, the template data may include a code set according to the ratio of the first area 320 occupied by the symbol of the AR tag and the second area 330, which is the remaining area. For example, the template data may store the symbol of the AR tag with the first region 320 at about 40% and the second region 330 at about 60% as the code for A01, 41% and the second area 330 is about 59%, as codes for A02.

즉, 템플릿 데이터는 제1 영역(320)과 제2 영역(330)의 비율에 따라 매칭되어 AR 태그를 인식할 수 있는 복수의 코드를 포함할 수 있다.That is, the template data may include a plurality of codes that match the AR tags according to the ratio of the first area 320 and the second area 330.

또한, 템플릿 데이터는 동영상의 해상도 별로 설정된 AR 태그의 코드를 포함할 수 있다. 예를 들면, 템플릿 데이터는 1080P, 720P, 360P 각각의 동영상 해상도에 따라 태그 인식 영역(310) 또는 기호의 크기가 달라지므로 각 해상도 별로 AR 태그를 인식할 수 있도록 제1 영역(320) 및 제2 영역(330)의 비율에 따라 설정된 AR 태그의 코드를 포함할 수 있다.In addition, the template data may include a code of the AR tag set for each resolution of the moving picture. For example, since the size of the tag recognition area 310 or the symbol is different according to the moving image resolution of each of the 1080P, 720P, and 360P template data, the template data is divided into the first area 320 and the second area 320 And a code of the AR tag set according to the ratio of the area 330.

한편, 서버 제어부(120)는 서버 통신부(110)를 통해 접속된 교육 콘텐츠 재생장치(200)가 어떤 종류의 장치인지 판단하여 해당 종류의 장치에 맞게 콘텐츠를 제공하도록 제어할 수 있다. 예를 들면, 서버 제어부(120)는 교육 콘텐츠 재생장치(200)가 모바일 장치인지 PC인지 판단하여 모바일 장치 또는 PC에 맞는 형식의 콘텐츠를 교육 콘텐츠 재생장치(200)에 제공할 수 있다.On the other hand, the server control unit 120 can determine which kind of the educational content reproducing apparatus 200 connected through the server communication unit 110 is, and control the content to be provided to the corresponding type of apparatus. For example, the server control unit 120 may determine whether the educational contents reproducing apparatus 200 is a mobile apparatus or a PC, and provide the contents to the educational contents reproducing apparatus 200 in a form suitable for the mobile apparatus or the PC.

서버 저장부(130)는 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 저장할 수 있다. 여기서, 서버 저장부(130)는 서버 제어부(120)에 의해 설정된 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 저장하고, 서버 제어부(120)의 요청에 따라 저장된 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 서버 제어부(120)에 제공할 수 있다.The server storage unit 130 may store moving picture data, AR script data, and a tag recognition program. Here, the server storage unit 130 stores moving picture data, AR script data, and a tag recognition program set by the server control unit 120, and stores the stored moving picture data, AR script data, and tag recognition And can provide the program to the server control unit 120.

교육 콘텐츠 재생장치(200)는 교육 콘텐츠 제공장치(100)로부터 수신한 콘텐츠를 재생할 수 있는 모바일 장치 또는 PC로 구성될 수 있다.The educational contents reproducing apparatus 200 may be constituted by a mobile device or a PC capable of reproducing contents received from the educational contents providing apparatus 100. [

이러한, 교육 콘텐츠 재생장치(200)는 단말기 통신부(210), 단말기 출력부(220), 단말기 입력부(230), 단말기 제어부(240) 및 단말기 저장부(250)를 포함할 수 있다.The educational contents reproducing apparatus 200 may include a terminal communication unit 210, a terminal output unit 220, a terminal input unit 230, a terminal control unit 240, and a terminal storage unit 250.

다만, 교육 콘텐츠 재생장치(200)는 단말기 통신부(210), 단말기 출력부(220), 단말기 입력부(230), 단말기 제어부(240) 및 단말기 저장부(250)만을 포함하여 구성되는 것으로 기재하고 있으나, 이는 본 발명의 일 실시예에 따른 본질적인 특성에서 벗어나지 않는 범위에서 교육 콘텐츠 재생장치(200)에 포함되는 구성 요소에 대하여 다양하게 수정 및 변형하여 적용 가능할 것이다.It should be noted that the educational contents reproducing apparatus 200 is configured to include only the terminal communication unit 210, the terminal output unit 220, the terminal input unit 230, the terminal control unit 240, and the terminal storage unit 250 , Which may be variously modified and modified for components included in the educational contents reproducing apparatus 200 without departing from the essential characteristics according to the embodiment of the present invention.

단말기 통신부(210)는 유선 및 무선 중 적어도 하나의 방식으로 통신망(50)을 통해 교육 콘텐츠 제공장치(100)와 통신하여 동영상 스트리밍 서비스를 제공받기 위한 데이터를 송수신하는 기능을 수행할 수 있다. 예를 들면, 단말기 통신부(210)는 동영상 데이터, AR 스크립트 데이터, 태그 인식 프로그램을 교육 콘텐츠 제공장치(100)로부터 수신할 수 있다.The terminal communication unit 210 may communicate with the educational contents providing apparatus 100 through the communication network 50 in at least one of a wired and wireless manner to transmit and receive data for receiving a video streaming service. For example, the terminal communication unit 210 can receive moving picture data, AR script data, and a tag recognition program from the educational contents providing apparatus 100.

단말기 출력부(220)는 동영상 스트리밍 서비스를 제공받기 위하여 교육 콘텐츠 제공장치(100)로부터 수신한 데이터를 출력시킬 수 있다. 이를 위하여, 단말기 출력부(220)는 비디오 데이터를 출력하는 디스플레이 및 오디오 데이터를 출력하는 스피커를 포함할 수 있다. 예를 들면, 단말기 출력부(220)는 디스플레이를 통해 동영상을 출력하고 스피커를 통해 사운드를 출력할 수 있다.The terminal output unit 220 may output the data received from the educational contents providing apparatus 100 in order to receive the moving picture streaming service. To this end, the terminal output unit 220 may include a display for outputting video data and a speaker for outputting audio data. For example, the terminal output unit 220 may output a moving picture through a display and output a sound through a speaker.

단말기 입력부(230)는 동영상 재생과 관련된 학습자의 입력과, AR 스크립트 실행을 위한 학습자의 입력을 수신할 수 있다. 이를 위하여, 단말기 입력부(230)는 복수의 키를 구비하는 키패드, 디스플레이에 결합된 터치패드, 학습자의 음성 입력을 전기적 신호로 변환하는 마이크로폰 등을 포함할 수 있다.The terminal input unit 230 may receive a learner's input related to moving picture playback and a learner's input for executing an AR script. To this end, the terminal input unit 230 may include a keypad having a plurality of keys, a touch pad coupled to a display, and a microphone for converting a learner's voice input into an electrical signal.

단말기 제어부(240)는 교육 콘텐츠 재생장치(200)의 전반적인 기능을 제어하는 제어 수단으로서, 단말기 통신부(210)를 제어하여 교육 콘텐츠 제공장치(100)로부터 AR 태그가 포함된 동영상 데이터, AR 태그에 따라 실행되는 AR 스크립트 데이터, AR 태그를 인식하기 위한 태그 인식 프로그램을 수신하도록 단말기 통신부(210)를 제어할 수 있다.The terminal control unit 240 controls the overall function of the educational contents reproducing apparatus 200 and controls the terminal communication unit 210 to transmit the moving picture data including the AR tag from the educational contents providing apparatus 100, The AR communication module 210 can control the AR communication module 210 to receive the AR script data and the tag recognition program for recognizing the AR tag.

구체적으로, 단말기 제어부(240)는 동영상 스트리밍 서비스를 실생하기 위하여 AR 태그가 포함된 동영상 데이터를 실시간으로 수신하도록 단말기 통신부(210)를 제어할 수 있다. 또한, 단말기 제어부(240)는 동영상 데이터와 함께 AR 스크립트 데이터 및 태그 인식 프로그램을 수신하도록 단말기 제어부(240)를 제어할 수 있다.In detail, the terminal control unit 240 may control the terminal communication unit 210 to receive the moving image data including the AR tag in real time in order to realize the moving image streaming service. Also, the terminal control unit 240 may control the terminal control unit 240 to receive the AR script data and the tag recognition program together with the moving image data.

여기서, 단말기 제어부(240)는 동영상 데이터로부터 AR 태그를 추출하고, 추출한 태그에 매칭된 AR 스크립트 데이터를 실행시킬 수 있다.Here, the terminal control unit 240 may extract the AR tag from the moving image data and execute the AR script data matched with the extracted tag.

예를 들면, 단말기 제어부(240)는 교육 콘텐츠 제공장치(100)로부터 수신한 동영상 데이터로부터 "A" 태그를 추출한 경우 "A" 태그에 매칭된 "B" 사진을 동영상에 오버레이(overlay)시켜 화면에 표시하거나, "C" 태그를 추출한 경우 "C" 태그에 매칭된 "D" 프로그램을 동영상에 오버레이시켜 화면에 표시되도록 실행시킬 수 있다.For example, when the "A" tag is extracted from the video data received from the training content providing apparatus 100, the terminal control unit 240 overlays the "B" Quot; D "program matched with the" C "tag may be displayed on the screen when the" C "

단말기 제어부(240)는 교육 콘텐츠 제공장치(100)로부터 수신한 태그 인식 프로그램을 실행하여 실시간으로 전송되는 동영상 내에서 AR 태그를 인식할 수 있다. 이때, 단말기 제어부(240)는 템플릿 데이터를 이용한 템플릿 매칭을 수행할 수 있다.The terminal control unit 240 can recognize the AR tag in the moving picture transmitted in real time by executing the tag recognition program received from the educational contents providing apparatus 100. [ At this time, the terminal control unit 240 can perform template matching using the template data.

구체적으로, 단말기 제어부(240)는 도 5를 참조하여 상술한 바와 같이 태그 인식 프로그램을 실행시켜 미리 설정된 태그 인식 영역(310)을 기준으로 AR 태그의 기호가 차지하는 제1 영역(320)과, 나머지 영역인 제2 영역(330) 각각의 비율을 비교하여 비교 결과를 템플릿 데이터와 매칭시켜 AR 태그를 인식할 수 있다.5, the terminal control unit 240 executes a tag recognition program to generate a first area 320 occupied by the symbol of the AR tag based on the preset tag recognition area 310, And the comparison result is matched with the template data to recognize the AR tag.

여기서, 단말기 제어부(240)는 학습자에 의해 동영상 해상도가 변경되더라도 동영상의 해상도 별로 설정된 템플릿 데이터를 이용하여 템플릿 매칭을 수행할 수 있다.Here, the terminal control unit 240 may perform template matching using the template data set for the resolution of the moving picture even if the video resolution is changed by the learner.

단말기 저장부(250)는 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 저장할 수 있다. 여기서, 단말기 저장부(250)는 단말기 제어부(240)에 의해 설정된 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 저장하고, 단말기 제어부(240)의 요청에 따라 저장된 동영상 데이터, AR 스크립트 데이터 및 태그 인식 프로그램을 단말기 제어부(240)에 제공할 수 있다.The terminal storage unit 250 may store moving picture data, AR script data, and a tag recognition program. The terminal storage unit 250 stores the moving picture data, the AR script data, and the tag recognition program set by the terminal control unit 240, and stores the stored moving picture data, AR script data, and tag recognition And provide the program to the terminal control unit 240.

본 발명의 일 실시에에 따른 증강현실이 적용된 콘텐츠 제공 시스템은 실시간으로 제공되는 동영상 내에서 AR 태그를 인식하여 AR 스크립트를 실행함으로써 학습자에게 AR이 구동되는 콘텐츠를 제공할 수 있다.The contents providing system to which the augmented reality is applied according to an embodiment of the present invention can provide the AR driven contents to the learner by recognizing the AR tag in the moving picture provided in real time and executing the AR script.

이하에서는 도 7을 참조하여 본 발명의 일 실시예에 따른 증강현실이 적용된 교육 서비스 제공방법을 설명한다.Hereinafter, a method of providing a training service to which an augmented reality is applied according to an embodiment of the present invention will be described with reference to FIG.

도 7은 본 발명의 일 실시예에 따른 증강현실이 적용된 교육 서비스 제공방법을 나타내는 순서도이다.FIG. 7 is a flowchart illustrating a method of providing an education service using an augmented reality according to an embodiment of the present invention. Referring to FIG.

도 7을 참조하면, 본 발명의 일 실시예에 따른 증강현실이 적용된 교육 서비스 제공방법은 증강현실이 적용된 교육 콘텐츠를 제공하기 위하여 교육 콘텐츠 제공장치가 교육 콘텐츠 재생장치의 종류를 확인하는 단계(S100) 및 AR 태그가 포함된 동영상 데이터, AR 태그에 따라 실행되는 AR 스크립트 데이터, AR 태그를 인식하기 위한 태그 인식 프로그램을 교육 콘텐츠 재생장치에게 제공하는 단계(S200)를 포함할 수 있다.Referring to FIG. 7, in a method of providing an education service using an augmented reality according to an embodiment of the present invention, in order to provide an education content to which an augmented reality is applied, (Step S200) of providing moving picture data including the AR tag, AR script data executed according to the AR tag, and a tag recognizing program for recognizing the AR tag to the educational contents reproducing apparatus.

단계 S100에서 교육 콘텐츠 제공장치는 교육 콘텐츠 재생장치의 종류에 맞는 형식으로 콘텐츠를 제공하도록 서버 통신부를 통해 접속된 교육 콘텐츠 재생장치가 어떤 종류의 장치인지 확인할 수 있다. 예를 들면, 서버 제어부(120)는 교육 콘텐츠 재생장치(200)가 모바일 장치인지 PC인지 판단하여 모바일 장치 또는 PC에 맞는 해상도의 동영상 데이터를 교육 콘텐츠 재생장치(200)에게 제공할 수 있다.In step S100, the educational contents providing apparatus can confirm what type of apparatus the educational contents reproducing apparatus connected through the server communication unit provides to provide the contents in a format suitable for the type of the educational contents reproducing apparatus. For example, the server control unit 120 may determine whether the educational contents reproducing apparatus 200 is a mobile apparatus or a PC, and provide the moving picture data having a resolution suitable for the mobile apparatus or the PC to the educational contents reproducing apparatus 200.

단계 S200에서는 교육 콘텐츠 제공장치가 콘텐츠 제공 모드에 따라 설정된 데이터를 교육 콘텐츠 재생장치에 제공할 수 있다.In step S200, the educational contents providing apparatus can provide the data set according to the contents providing mode to the educational contents reproducing apparatus.

우선, 교육 콘텐츠 제공장치는 편집 동영상 제공 모드에서 서버 저장부에 저장된 동영상 데이터, AR 스크립트 데이터, 태그 인식 프로그램을 교육 콘텐츠 재생장치에게 제공할 수 있다. 이를 위하여, 교육 콘텐츠 제공장치는 화면의 좌우측 가장자리에 설정된 태그 배치 영역으로 적어도 하나의 AR 태그가 배치되도록 AR 태그를 포함하여 편집된 동영상 데이터를 미리 서버 저장부에 저장시킬 수 있다. 또한, 교육 콘텐츠 제공장치는 미리 설정된 데이터를 출력하도록 실행되는 AR 스크립트 데이터와, AR 태그를 인식하기 위한 태그 인식 프로그램을 미리 서버 저장부에 저장시킬 수 있다. 특히, AR 스크립트 데이터는 교육 내용과 관련된 부연 정보를 리스트로 출력하도록 설정될 수 있다.First, the educational contents providing apparatus can provide moving picture data, AR script data, and a tag recognizing program stored in the server storage unit to the educational contents reproducing apparatus in the editing moving picture providing mode. To this end, the educational contents providing apparatus may store the edited moving image data including the AR tag in the server storage unit in advance so that at least one AR tag is arranged in the tag arrangement area set on the left and right edges of the screen. Further, the educational contents providing apparatus may store the AR script data to be executed to output the preset data and the tag recognition program for recognizing the AR tag in advance in the server storage unit. In particular, the AR script data can be set to output a list of supplementary information related to the contents of education.

여기서, AR 스크립트 데이터 및 태그 인식 프로그램에 대한 구체적인 사항은 상술한 내용과 동일하므로 중복 설명을 생략한다.Here, the specific details of the AR script data and the tag recognition program are the same as those described above, and thus redundant description will be omitted.

한편, 교육 콘텐츠 제공장치는 라이브 동영상 제공 모드에서 실시간으로 촬영된 동영상과 함께 콘텐츠 제공자가 미리 설정한 AR 스크립트 데이터 및 태그 인식 프로그램을 실시간으로 교육 콘텐츠 재생장치에게 제공할 수 있다.On the other hand, the educational contents providing apparatus can provide the educational contents reproducing apparatus with the AR script data and the tag recognizing program preset by the contents provider together with the moving picture photographed in real time in the live moving picture providing mode.

구체적으로, 교육 콘텐츠 제공장치는 교육 서비스 제공자로부터 실시간으로 촬영된 동영상과 미리 설정된 AR 스크립트 데이터를 수신할 수 있다. 이때, 교육 서비스 제공자는 AR 스크립트 데이터로 교육 내용에 추가된 부연 정보를 교육 콘텐츠 제공장치에 미리 저장시켜 놓고 교육 콘텐츠 재생장치에서 실시간으로 촬영된 동영상과 함께 AR 스크립트 실행시 부연 정보를 3D 모델링 또는 멀티미디어 등으로 학습자에게 보여줄 수 있다.Specifically, the educational contents providing apparatus can receive the moving picture photographed in real time from the education service provider and preset AR script data. At this time, the education service provider stores the supplementary information added to the training content in the training content storage device in advance in the training content provider, and when the AR script is executed together with the video captured in real time in the training content reproduction device, the supplementary information is converted into 3D modeling or multimedia And so on.

예컨대, 도 8을 참조하면, 교육 서비스 제공자가 하안검 수술 장면에 수술 일정 및 해설 자료를 AR 스크립트 데이터로 저장시킨 경우 교육 콘텐츠 재생장치에서 실시간으로 하안검 수술을 촬영한 동영상에 수술 일정 및 해설 자료를 오버레이시켜 학습자에게 보여줄 수 있다.For example, referring to FIG. 8, when the educational service provider stores the operation schedule and commentary data in the lower eyelid surgery scene as the AR script data, the operation schedule and commentary data are overlaid on the video image of the lower eyelid surgery in real- To the learner.

한편, 본 발명의 일 실시예에 따른 증강현실이 적용된 교육 서비스 제공방법은 교육 콘텐츠 제공장치가 교육 콘텐츠 재생장치로부터 학습자의 문의사항을 접수하여 처리하는 단계를 더 포함할 수 있다.Meanwhile, a method of providing an educational service using an augmented reality according to an exemplary embodiment of the present invention may further include receiving an inquiry of a learner from the training content reproduction apparatus and processing the training content.

여기서, 교육 콘텐츠 제공장치는 교육 서비스 제공자에게 학습자의 문의사항을 전달하고, 교육 서비스 제공자로부터 문의사항에 대한 답변을 수신하여 AR 스크립트 데이터에 반영할 수 있다.Here, the educational contents providing apparatus delivers the learner's inquiry to the education service provider, receives the answer to the inquiry from the education service provider, and reflects it in the AR script data.

본 발명은 AR 태그가 포함된 동영상 데이터와 AR 태그에 따라 실행되는 스크립트 데이터를 이용하여 증강현실이 적용된 교육 콘텐츠를 제공함으로써 학습자에게 다양한 정보와 흥미를 제공할 수 있다. 이를 통해, 학습자의 관심도 또는 집중력을 향상시킬 수 있다.The present invention can provide a variety of information and interest to a learner by providing educational contents to which augmented reality is applied by using moving picture data including an AR tag and script data executed according to an AR tag. This can improve the learner's attention or concentration.

또한, 본 발명은 학습자에게 증강현실이 적용된 교육 콘텐츠을 제공하여 교육 내용과 부연 정보를 한 화면 내에서 모두 보여줄 수 있다.Also, the present invention can provide the learner with the educational contents to which the augmented reality is applied, so that the education contents and the supplementary information can all be displayed in one screen.

또한, 본 발명은 교육 콘텐츠 제공장치가 동영상 스트리밍 서비스를 제공할 때 동영상 데이터와 별도로 AR 스크립트 데이터를 교육 콘텐츠 재생장치에 제공함으로써, 학습자에게 화질 저하 없이 구동되는 AR을 제공할 수 있다.Further, according to the present invention, when the educational contents providing apparatus provides the moving picture streaming service, the AR contents data is provided to the educational contents reproducing apparatus separately from the moving picture data, thereby providing the AR that is operated without deterioration in picture quality to the learner.

종래의 동영상 스트리밍 서비스에서는 동영상 데이터와 AR 데이터를 함께 인코딩하여 동영상의 해상도가 360P일 경우 AR도 360P에 맞춰 화질의 저하가 발생하였다. 그러나, 본 발명에서는 인코딩된 동영상 데이터와 별도로 AR 스크립트 데이터를 교육 콘텐츠 재생장치에 제공하므로 인코딩된 동영상의 해상도와 상관없이 AR이 원본 수준의 해상도를 유지할 수 있다. 이로 인해, 학습자는 데이터 절감을 위해 저해상도로 인코딩된 동영상을 시청하더라도 인코딩되지 않아 원본 수준의 해상도가 유지되어 구동되는 AR을 감상할 수 있다.In the conventional video streaming service, the video data and the AR data are encoded together, and when the resolution of the moving picture is 360P, the quality of the AR is reduced to 360P. However, according to the present invention, since the AR script data is provided to the educational contents reproducing apparatus separately from the encoded moving picture data, the AR can maintain the original level resolution irrespective of the resolution of the encoded moving picture. As a result, the learner can enjoy the AR that is not encoded even if a low-resolution encoded video is watched for data saving, and the original-level resolution is maintained.

또한, 본 발명은 동영상을 재생하는 중 AR 데이터를 선택적으로 출력시킬 수 있다. 이를 통해, 본 발명은 학습자가 AR의 구동을 선택할 수 있는 편의성을 향상시킬 수 있다.In addition, the present invention can selectively output AR data during playback of moving images. Thus, the present invention can improve the convenience in which the learner can select the drive of the AR.

이상에서 본 발명에 대한 기술 사상을 첨부 도면과 함께 서술하였지만, 이는 본 발명의 바람직한 실시예를 예시적으로 설명한 것이지 본 발명을 한정하는 것은 아니다. 또한, 이 기술 분야의 통상의 지식을 가진 자라면 누구나 본 발명의 기술 사상의 범주를 이탈하지 않는 범위 내에서 다양한 변형 및 모방이 가능함은 명백한 사실이다.Although the preferred embodiments of the present invention have been disclosed for illustrative purposes, those skilled in the art will appreciate that various modifications, additions and substitutions are possible, without departing from the scope and spirit of the invention as disclosed in the accompanying claims. In addition, it is a matter of course that various modifications and variations are possible without departing from the scope of the technical idea of the present invention by anyone having ordinary skill in the art.

50: 통신망
100: 교육 콘텐츠 제공장치
110: 서버 통신부
120: 서버 제어부
130: 서버 저장부
200: 교육 콘텐츠 재생장치
210: 단말기 통신부
220: 단말기 출력부
230: 단말기 입력부
240: 단말기 제어부
250: 단말기 저장부50: Network
100: Educational contents providing device
110: server communication section
120:
130: server storage unit
200: Educational contents reproducing device
210:
220: terminal output section
230: Terminal input unit
240:
250:

Claims (14)

증강현실이 적용된 교육 콘텐츠를 제공하기 위하여,
(a) 교육 콘텐츠 제공장치가 교육 콘텐츠 재생장치의 종류를 확인하는 단계; 및
(b) 증강현실 태그가 포함된 동영상 데이터, 증강현실 태그에 따라 실행되는 증강현실 스크립트 데이터, 증강현실 태그를 인식하여 상기 증강현실 스크립트 데이터를 실행하기 위한 태그 인식 프로그램을 상기 교육 콘텐츠 재생장치에 제공하는 단계;를 포함하되,
상기 증강현실 스크립트 데이터는 상기 교육 콘텐츠 재생장치에서 추출한 증강현실 태그에 매칭되어 실행되는 데이터 또는 프로그램을 포함하여 상기 동영상 데이터와 별도로 상기 교육 콘텐츠 재생장치에 제공되고,
상기 태그 인식 프로그램은 상기 동영상 데이터와 별도로 상기 교육 콘텐츠 재생장치에 제공되어 실행되며, 실시간으로 전송되는 동영상 내에서 문자 및 숫자 중 적어도 하나를 포함하는 기호로 표현되는 상기 증강현실 태그를 인식하기 위한 템플릿 데이터를 포함하고, 미리 설정된 태그 인식 영역을 기준으로 증강현실 태그가 차지하는 영역과 나머지 영역 각각의 비율을 비교하여 비교 결과를 템플릿 데이터와 매칭시켜 상기 증강현실 태그의 코드를 검출하는 템플릿 매칭을 수행하여 상기 증강현실 태그를 인식하며,
상기 템플릿 데이터는 상기 증강현실 태그가 차지하는 제1 영역과, 나머지 영역인 제2 영역 각각의 비율에 따른 상기 증강현실 태그를 인식하는 복수의 코드를 포함하되, 동영상의 해상도별로 달라지는 태그 인식 영역 또는 기호의 크기에 대응하기 위하여, 해상도별로 상기 증강현실 태그를 인식하도록 상기 제1 영역 및 상기 제2 영역의 비율이 설정된 복수의 코드를 포함하는, 증강현실이 적용된 교육 서비스 제공방법.
In order to provide educational contents with augmented reality,
(a) the educational contents providing apparatus verifying the type of educational contents reproducing apparatus; And
(b) video data including an augmented reality tag, augmented reality script data executed according to an augmented reality tag, and a tag recognition program for executing the augmented reality script data by recognizing an augmented reality tag ; ≪ / RTI >
Wherein the augmented reality script data is provided to the educational contents reproducing apparatus separately from the moving picture data, including data or a program that is matched and executed to an augmented reality tag extracted by the educational contents reproducing apparatus,
The tag recognition program is provided to the educational contents reproducing apparatus separately from the moving picture data and is a template for recognizing the augmented reality tag expressed by a symbol including at least one of letters and numbers in a moving picture transmitted in real time Template matching for detecting the code of the augmented reality tag is performed by comparing the ratio of the area occupied by the augmented reality tag with the ratio of each of the remaining areas based on the preset tag recognition area and matching the comparison result with template data Recognizes the augmented reality tag,
Wherein the template data includes a plurality of codes for recognizing the augmented reality tags according to a ratio of a first region occupied by the augmented reality tag and a second region defined as a remaining region, Wherein the augmented reality tag includes a plurality of codes in which a ratio of the first region and the second region is set so as to recognize the augmented reality tag for each resolution in order to correspond to a size of the augmented reality tag.
제1항에 있어서,
상기 (a) 단계에서는, 상기 교육 콘텐츠 재생장치에 맞는 해상도의 동영상 데이터를 제공하기 위하여 상기 교육 콘텐츠 제공장치가 상기 교육 콘텐츠 재생장치의 종류를 확인하는 것인, 증강현실이 적용된 교육 서비스 제공방법.
The method according to claim 1,
Wherein the training content providing apparatus confirms the type of the training content reproducing apparatus in order to provide moving image data having a resolution suitable for the training content reproducing apparatus in the step (a).
제1항에 있어서,
상기 (b) 단계에서는, 상기 교육 콘텐츠 제공장치가 콘텐츠 제공 모드에 따라 설정된 데이터를 상기 교육 콘텐츠 재생장치에 제공하되,
상기 콘텐츠 제공 모드는 편집 동영상 제공 모드 및 라이브 동영상 제공 모드를 포함하는,
증강현실이 적용된 교육 서비스 제공방법.
The method according to claim 1,
In the step (b), the educational contents providing apparatus supplies data set according to the contents providing mode to the educational contents reproducing apparatus,
Wherein the content providing mode includes an editing video providing mode and a live video providing mode.
A method of providing educational service with augmented reality.
제3항에 있어서,
상기 편집 동영상 제공 모드에서는 상기 교육 콘텐츠 제공장치가 저장부에 저장된 동영상 데이터, 증강현실 스크립트 데이터, 태그 인식 프로그램을 상기 교육 콘텐츠 재생장치에 제공하되,
상기 동영상 데이터는 화면의 좌우측 가장자리에 설정된 태그 배치 영역으로 적어도 하나의 증강현실 태그가 배치되도록 증강현실 태그를 포함하고, 상기 증강현실 스크립트 데이터는 미리 설정된 데이터를 출력하도록 설정되는,
증강현실이 적용된 교육 서비스 제공방법.
The method of claim 3,
In the editing moving picture providing mode, the educational contents providing apparatus provides moving picture data, augmented reality script data, and a tag recognizing program stored in a storage unit to the educational contents reproducing apparatus,
Wherein the moving image data includes an augmented reality tag such that at least one augmented reality tag is arranged in a tag arrangement area set on the left and right edges of the screen and the augmented reality script data is set to output preset data,
A method of providing educational service with augmented reality.
제3항에 있어서,
상기 라이브 동영상 제공 모드에서는 상기 교육 콘텐츠 제공장치가 실시간으로 촬영된 동영상과, 콘텐츠 제공자가 미리 설정한 증강현실 스크립트 데이터 및 태그 인식 프로그램을 상기 교육 콘텐츠 재생장치에 제공하는, 증강현실이 적용된 교육 서비스 제공방법.
The method of claim 3,
In the live video providing mode, a training service to which the augmented reality is applied, which provides the augmented reality script data and the tag recognition program to the educational content reproduction apparatus, Way.
제1항에 있어서,
상기 증강현실 스크립트 데이터는 교육 내용과 관련된 부연 정보를 리스트로 출력하도록 설정된, 증강현실이 적용된 교육 서비스 제공방법.
The method according to claim 1,
Wherein the augmented reality script data is configured to output supplementary information related to education contents as a list.
제1항에 있어서,
상기 교육 콘텐츠 제공장치가 상기 교육 콘텐츠 재생장치로부터 학습자의 문의사항을 접수하여 처리하는 단계를 더 포함하는, 증강현실이 적용된 교육 서비스 제공방법.
The method according to claim 1,
Further comprising the step of accepting and processing an inquiry of a learner from the training content reproduction apparatus in the training content providing apparatus, and processing the augmented reality.
제7항에 있어서,
상기 교육 콘텐츠 제공장치는 교육 서비스 제공자에게 학습자의 문의사항을 전달하고, 교육 서비스 제공자로부터 문의사항에 대한 답변을 수신하여 증강현실 스크립트 데이터에 반영하는, 증강현실이 적용된 교육 서비스 제공방법.
8. The method of claim 7,
Wherein the training content providing apparatus delivers an inquiry of a learner to a training service provider and receives an answer to a question from a training service provider and reflects it in the augmented reality script data.
삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete
KR1020170173274A 2017-12-15 2017-12-15 Method for providing education service based on argument reality KR101909461B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020170173274A KR101909461B1 (en) 2017-12-15 2017-12-15 Method for providing education service based on argument reality
PCT/KR2018/014355 WO2019117495A1 (en) 2017-12-15 2018-11-21 Method for providing augmented reality-applied education service

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170173274A KR101909461B1 (en) 2017-12-15 2017-12-15 Method for providing education service based on argument reality

Publications (1)

Publication Number Publication Date
KR101909461B1 true KR101909461B1 (en) 2018-10-22

Family

ID=64102331

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170173274A KR101909461B1 (en) 2017-12-15 2017-12-15 Method for providing education service based on argument reality

Country Status (2)

Country Link
KR (1) KR101909461B1 (en)
WO (1) WO2019117495A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102396104B1 (en) * 2020-11-16 2022-05-11 아주통신주식회사 Apparatus for augmented reality convergence oriental medicine training

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010141939A1 (en) * 2009-06-05 2010-12-09 Mozaik Multimedia, Inc. Ecosystem for smart content tagging and interaction
KR20120000215A (en) * 2010-06-25 2012-01-02 숙명여자대학교산학협력단 System and method for providing learning contents
KR101197630B1 (en) * 2010-09-08 2012-11-07 (주)더힘스 System and method of providing augmented contents related to currently-provided common contents to personal terminals
KR101553273B1 (en) * 2013-12-20 2015-09-15 배재대학교 산학협력단 Method and Apparatus for Providing Augmented Reality Service
KR101645241B1 (en) * 2014-06-24 2016-08-12 테크빌교육 주식회사 Method for configuring multiple training mode, and apparatus and computer readable recording medium using the same

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102396104B1 (en) * 2020-11-16 2022-05-11 아주통신주식회사 Apparatus for augmented reality convergence oriental medicine training

Also Published As

Publication number Publication date
WO2019117495A1 (en) 2019-06-20

Similar Documents

Publication Publication Date Title
US9298704B2 (en) Language translation of visual and audio input
WO2018227761A1 (en) Correction device for recorded and broadcasted data for teaching
KR100989142B1 (en) System and method for supplying e-learning contents
CN102646346B (en) Mobile video playing system and method for remote instruction
CN104408983A (en) Recording and broadcasting equipment-based intelligent teaching information processing device and method
JP5502351B2 (en) Instruction system, instruction method, and program
CN109324811B (en) Device for updating teaching recorded broadcast data
WO2018223529A1 (en) Internet-based recorded course learning following system and method
WO2015077795A1 (en) Systems, methods, and computer program products for strategic motion video
KR102414966B1 (en) Method for providing smart device based digitial education service capable of producing contents per unit region
KR101909461B1 (en) Method for providing education service based on argument reality
KR101198091B1 (en) Method and system for learning contents
JP2008096482A (en) Receiving terminal, network learning support system, receiving method, and network learning support method
CN109040797B (en) Internet teaching recording and broadcasting system and method
JP4085015B2 (en) STREAM DATA GENERATION DEVICE, STREAM DATA GENERATION SYSTEM, STREAM DATA GENERATION METHOD, AND PROGRAM
KR20140042055A (en) E-learning system of providing video for improvement of study concentration
KR101909462B1 (en) Apparatus and method for providing contents
JP3930402B2 (en) ONLINE EDUCATION SYSTEM, INFORMATION PROCESSING DEVICE, INFORMATION PROVIDING METHOD, AND PROGRAM
KR20110024880A (en) System and method for learning a sentence using augmented reality technology
US11363084B1 (en) Methods and systems for facilitating conversion of content in public centers
KR20110124048A (en) System and method for providing on-line eduacational portal service
JP2021012341A (en) Information processing method, information processing device, and program
KR102620099B1 (en) Blended learning system that enables editing and manipulation of class videos in real time, convenient transmission, recording, and platform upload of class videos, and improved interaction between teachers and students
KR20170073160A (en) Portable lecture storage and broadcasting system
KR20190036042A (en) System for providing on-line eduacational portal service

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant