KR101241120B1 - Education method and the system about wiring using augmented reality - Google Patents

Education method and the system about wiring using augmented reality Download PDF

Info

Publication number
KR101241120B1
KR101241120B1 KR1020100139113A KR20100139113A KR101241120B1 KR 101241120 B1 KR101241120 B1 KR 101241120B1 KR 1020100139113 A KR1020100139113 A KR 1020100139113A KR 20100139113 A KR20100139113 A KR 20100139113A KR 101241120 B1 KR101241120 B1 KR 101241120B1
Authority
KR
South Korea
Prior art keywords
wiring
image
augmented reality
training
virtual
Prior art date
Application number
KR1020100139113A
Other languages
Korean (ko)
Other versions
KR20120077226A (en
Inventor
김윤상
이지오
Original Assignee
한국기술교육대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국기술교육대학교 산학협력단 filed Critical 한국기술교육대학교 산학협력단
Priority to KR1020100139113A priority Critical patent/KR101241120B1/en
Publication of KR20120077226A publication Critical patent/KR20120077226A/en
Application granted granted Critical
Publication of KR101241120B1 publication Critical patent/KR101241120B1/en

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B23/00Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
    • G09B23/06Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for physics
    • G09B23/18Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for physics for electricity or magnetism
    • G09B23/183Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for physics for electricity or magnetism for circuits
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/02Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00Electrically-operated teaching apparatus or devices working with questions and answers
    • G09B7/02Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student

Abstract

본 발명에서는 증강 현실을 이용한 배선 교육 시스템 및 방법이 제공된다.
본 발명의 증강 현실을 이용한 배선 교육 시스템은 배선 실습 대상이 되는 실습 보드, 카메라를 통해 상기 실습 보드의 영상을 입력받는 입력부, 상기 실습 보드의 패턴을 인식하고 상기 영상에 가상의 배선 이미지로 증강하며 실제 배선이 상기 가상의 배선 이미지와 일치하는지를 판단하는 제어부 및, 상기 증강된 영상을 출력하는 출력부를 포함하는 것을 특징으로 한다.
상기와 같은 구성에 의하면, 본 발명은 증강 현실을 접목하여 구성하였으므로 교육생이 스스로 이해할 때까지 교사나 교재에 의존하지 않고도 반복적인 실습이 가능하여 보다 유리한 효과가 있는 것이다.
In the present invention, a wiring education system and method using augmented reality are provided.
The wiring education system using the augmented reality of the present invention includes a training board which is a wiring training target, an input unit which receives an image of the training board through a camera, recognizes a pattern of the training board, and augments the image with a virtual wiring image. And a controller configured to determine whether the actual wiring matches the virtual wiring image, and an output unit configured to output the augmented image.
According to the above configuration, since the present invention is configured by incorporating augmented reality, it is possible to repeatedly practice without relying on the teacher or the textbook until the student understands himself, which is more advantageous.

Description

증강 현실을 이용한 배선 교육 시스템 및 그 교육 방법{EDUCATION METHOD AND THE SYSTEM ABOUT WIRING USING AUGMENTED REALITY}Wiring education system using augmented reality and its teaching method {EDUCATION METHOD AND THE SYSTEM ABOUT WIRING USING AUGMENTED REALITY}

본 발명은 기술 교육 시스템 및 방법에 관한 것으로, 특히 PLC(Progammable Logic Controller)와 같이 처음 접하는 교육생이 배선 과정에 어려움을 겪을 가능성이 높은 때에, 교육생이 교사나 교재에 독립적으로 실습을 수행할 수 있도록 증강 현실을 이용하여 배선할 위치를 가상의 이미지로 표시하여, 입문 단계의 교육생에 대한 교육 효과를 극대화할 수 있는 시스템 및 그 방법에 관한 것이다. The present invention relates to a technical education system and method, and particularly, when a first-time trainee, such as a programmable logic controller (PLC), is likely to have difficulty in the wiring process, the trainee can perform the practice independently of the teacher or the teaching material. The present invention relates to a system and a method for maximizing the educational effect for an introductory student by displaying a location to be wired using augmented reality as a virtual image.

증강 현실(Augmented Reality, AR)은 사용자가 카메라를 통한 영상에 컴퓨터 그래픽을 실시간으로 겹쳐 보여주는 기술로, 가상 현실에 비해 훨씬 현실감이 높은 기술이다. Augmented Reality (AR) is a technology that allows a user to superimpose computer graphics on an image through a camera in real time, and is much more realistic than virtual reality.

특히, 최근에는 휴대용 기기나 PMP 등에 내장된 카메라를 사용하는 휴대용 증강 현실 분야에 대한 연구 개발이 본격적으로 시도되고 있다. In particular, recently, research and development in the field of portable augmented reality using a camera embedded in a portable device or PMP has been attempted in earnest.

휴대용 증강 현실 기술은 휴대용 기기를 가진 사용자의 증가로 인해 확장성이 높고, 공간의 제약을 받지 않는다.Portable augmented reality technology is highly scalable and space-constrained by the growing number of users with portable devices.

한편 도 5는 종래의 PLC 배선 교육에 사용되는 PLC 실습 환경의 실사인데, PLC 배선 기술 교육 방법에 있어서 교육 대상자가 PLC를 처음 접하는 입문자의 경우, 배선 실습 과정에서 교사 또는 전문가 또는 교재의 도움을 항상 받아야 하므로 교육 효과가 떨어지는 문제점 있었다. On the other hand, Figure 5 is a real-world inspection of the PLC practice environment used in the conventional PLC wiring training, in the case of the beginners who first experienced the PLC in the PLC wiring technology training method, always help the teacher or expert or teaching materials in the wiring training process. There was a problem that the education effect is falling.

즉 입문자의 경우 교사나 교재에 절대적으로 의존하여 실습을 진행해야 하기 때문에, 교육 내용을 모두 이해하기 위한 시간이 한정적이어서 교육 효과가 떨어진다.In other words, the beginners must rely on the teacher or the textbook to proceed with the practice. Therefore, the time for understanding all the educational contents is limited and the educational effect is low.

이를 보완하기 위해서 증강 현실을 시도한 사례가 다양하게 있었으나, 이러한 사례들은 주로 자동차 또는 항공기와 같은 고가의 장비를 사용하는 공장에서 사내 교육용으로만 사용되었기 때문에 교육 대상자가 한정적이고, 추가 확장이 힘든 한계가 있었다. There have been a variety of cases where augmented reality has been attempted to compensate for this, but since these cases were mainly used for in-house training in factories that use expensive equipment such as automobiles or aircrafts, the training targets are limited and further expansion is difficult. there was.

또한 증강 현실이 아닌 가상 현실 기술을 도입한 사례도 있었으나, 가상 현실의 경우 모든 환경이 가상 이미지로 이루어져 있기 때문에 실제 환경과의 차이가 발생하게 된다. 따라서 이후에 실 장비를 접할 때 한 번 더 교육을 해야 하는 시간적, 비용적인 소모가 있었다. In addition, there have been cases in which virtual reality technology is introduced rather than augmented reality, but in the case of virtual reality, since all environments are composed of virtual images, a difference from the real environment occurs. As a result, there was a time-consuming and costly need to train one more time when contacting real equipment.

또한 모바일 기기를 이용한 증강 현실 사례가 있었으나, 한 손이 반드시 모바일 기기를 사용해야 하기 때문에 PLC와 같이 양 손을 함께 사용하는 기술 교육 환경에 적용하기에는 한계가 있었다. In addition, there was a case of augmented reality using a mobile device, but because one hand must use a mobile device, there was a limit to apply to a technology education environment using both hands together, such as a PLC.

본 발명은 상기의 문제점을 해결하기 위해 증강 현실 기술을 이용하여 교육생이 교사나 교재에 의존하지 않고 반복적으로 실습을 할 수 있도록 하여 교육 효과를 증대시키는 것을 목적으로 한다.In order to solve the above problems, an object of the present invention is to increase an educational effect by allowing a trainee to repeatedly practice without depending on a teacher or a textbook by using augmented reality technology.

상기 기술적 과제를 달성하기 위해 본 발명에서는 증강 현실을 이용한 배선 교육 시스템 및 방법이 제공된다. In order to achieve the above technical problem, the present invention provides a wiring education system and method using augmented reality.

본 발명의 증강 현실을 이용한 배선 교육 시스템은 배선 실습 대상이 되는 실습 보드, 카메라를 통해 상기 실습 보드의 영상을 입력받는 입력부, 상기 실습 보드의 패턴을 인식하고 상기 영상에 가상의 배선 이미지로 증강하며 실제 배선이 상기 가상의 배선 이미지와 일치하는지를 판단하는 제어부 및, 상기 증강된 영상을 출력하는 출력부를 포함하는 것을 특징으로 한다. The wiring education system using the augmented reality of the present invention includes a training board which is a wiring training target, an input unit which receives an image of the training board through a camera, recognizes a pattern of the training board, and augments the image with a virtual wiring image. And a controller configured to determine whether the actual wiring matches the virtual wiring image, and an output unit configured to output the augmented image.

여기서 상기 출력부는 상기 가상의 이미지를 2차원 이미지 및 3차원 이미지 중 적어도 하나 이상을 선택하여 표시할 수 있다. The output unit may select and display at least one of the virtual image and the two-dimensional image.

또한 상기 출력부는 모니터 또는 HMD(Head Mounted Display)인 것을 특징으로 한다. The output unit may be a monitor or a head mounted display (HMD).

또한 상기 입력부는 모바일 장치에 장착된 카메라 또는 컴퓨터에 장착된 웹캠으로 구성된 것을 특징으로 한다. In addition, the input unit is characterized in that consisting of a camera mounted on a mobile device or a webcam mounted on a computer.

또한 상기 실습 보드는 PLC(Programmable Logic Controller)인 것을 특징으로 한다.
In addition, the training board is characterized in that the programmable logic controller (PLC).

한편 본 발명의 증강 현실을 이용한 배선 교육 방법은 (a) 입력부가 실습 보드의 영상을 획득하는 단계, (b) 제어부가 실습 보드의 패턴을 인식하는 단계, (c) 제어부가 실습 보드의 영상에 가상의 배선 이미지를 증강하고 출력부에 표시하는 단계, (d) 입력부가 실제 배선 과정을 인식하는 단계, (e) 제어부가 실제 배선과 가상의 배선 이미지를 상호 비교 판단하는 단계 및, (f) 상호 비교 판단하여 올바르게 배선되었으면 다음 배선을 진행하는 단계를 포함하는 것을 특징으로 한다.Meanwhile, in the wiring training method using the augmented reality of the present invention, (a) the input unit acquires an image of the training board, (b) the control unit recognizes a pattern of the training board, and (c) the control unit is connected to the image of the training board. Augmenting and displaying the virtual wiring image on the output unit, (d) recognizing the actual wiring process by the input unit, (e) comparing and judging the actual wiring and the virtual wiring image by the controller, and (f) Comparing and judging the correct wiring, characterized in that it comprises the step of proceeding to the next wiring.

여기서 상기 (b) 단계는, 상기 실습 보드의 영상으로부터 마커의 패턴을 인식하여 상기 실습 보드의 위치 및 정보를 획득하는 것을 특징으로 한다. In the step (b), the pattern of the marker may be recognized from the image of the training board to obtain the position and information of the training board.

또한 여기서 상기 (e) 단계에서, 상기 실제 배선과 가상의 배선 이미지를 상호 비교 판단하는 방법은, 상기 실습 보드의 포트에 영역 침범이 있었는지를 검사하여 배선이 올바르게 되었는지를 판단하는 것을 특징으로 한다. Here, in the step (e), the method for mutually comparing the actual wiring and the virtual wiring image is characterized in that it is determined whether the wiring is correct by checking whether there is an area violation in the port of the training board. .

나아가 상기 (f) 단계는, 키보드나 마우스 입력 중 적어도 하나 이상을 사용하여 다음 배선을 진행하거나, 영상 처리를 통해 실제 배선의 위치를 인식하여 다음 배선을 진행할 수 있다. Furthermore, in the step (f), the next wiring may be performed using at least one of the keyboard and the mouse input, or the next wiring may be performed by recognizing the position of the actual wiring through the image processing.

상기와 같은 구성에 의하면, 본 발명은 증강 현실을 접목하여 구성하였으므로 교육생이 스스로 이해할 때까지 교사나 교재에 의존하지 않고도 반복적인 실습이 가능하여 보다 유리한 효과가 있는 것이다.According to the above configuration, since the present invention is configured by incorporating augmented reality, it is possible to repeatedly practice without relying on the teacher or the textbook until the student understands himself, which is more advantageous.

또한 교육생이 실 세계와 유사한 느낌을 받도록 할 수 있다. It can also make students feel like the real world.

나아가 간단한 실습부터 고 난이도의 실습 내용을 교육할 수 있고, 추후 다른 실습 내용을 추가하여 확장이 가능하다. Furthermore, it is possible to educate the contents of the exercises from simple to high difficulty, and can be expanded later by adding other contents.

또 나아가 모니터나 HMD를 이용함으로써 두 손을 자유롭게 사용할 수 있는 유리한 효과가 있다. Furthermore, by using a monitor or HMD, there is an advantageous effect that both hands can be used freely.

도 1은 본 발명의 증강 현실을 이용한 배선 교육 시스템의 블록 구성도이다.
도 2는 본 발명의 증강 현실을 이용한 배선 교육방법을 구현하는 전체 순서도이다.
도 3은 본 발명의 증강 현실을 이용한 배선 교육방법에 있어서 다음 단계로 수행되는 예시이다.
도 4는 본 발명의 증강 현실을 이용한 배선 교육 시스템 및 교육 방법을 실제로 시연한 모습을 담은 실사이다.
도 5는 종래의 PLC 배선 교육에 사용되는 PLC 실습 환경의 실사이다.
1 is a block diagram of a wiring training system using the augmented reality of the present invention.
2 is a flowchart illustrating a wiring education method using the augmented reality of the present invention.
Figure 3 is an illustration performed in the next step in the wiring education method using augmented reality of the present invention.
4 is a live-action view showing the actual demonstration of the wiring education system and training method using the augmented reality of the present invention.
5 is a live-action view of a PLC training environment used for conventional PLC wiring training.

이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성 요소들에 참조 부호를 부가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the drawings, the same reference numerals are used to designate the same or similar components throughout the drawings. In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

도 1은 본 발명의 증강 현실을 이용한 배선 교육 시스템의 블록 구성도이다. 1 is a block diagram of a wiring training system using the augmented reality of the present invention.

도 1에 도시된 바와 같이, 본 발명의 시스템(20)은 배선 실습 대상이 되는 실습 보드(30), 카메라(미도시)를 통해 상기 실습 보드의 영상을 입력받는 입력부(21), 상기 실습 보드의 패턴을 인식하고 상기 영상에 가상의 배선 이미지로 증강하며 실제 배선이 상기 가상의 배선 이미지와 일치하는지를 판단하는 제어부(22) 및, 상기 증강된 영상을 출력하는 출력부(23)를 포함한다. As shown in FIG. 1, the system 20 of the present invention includes a training board 30 as a wiring training target, an input unit 21 for receiving an image of the training board through a camera (not shown), and the training board. And a controller 22 for recognizing a pattern of and reinforcing the virtual wiring image on the image, and determining whether the actual wiring matches the virtual wiring image, and an output unit 23 for outputting the augmented image.

본 실시예에서는 실습 보드는 PLC 실습 보드(30)이다. In this embodiment, the training board is a PLC training board 30.

또한 상기의 입력부(21)와 출력부(23)는 HMD일 수 있으며, 상기 제어부(22)는 HMD에 내장되거나, 별도의 전자전 장치일 수 있다. In addition, the input unit 21 and the output unit 23 may be an HMD, and the control unit 22 may be embedded in the HMD or may be a separate electronic warfare device.

본 시스템을 사용하여 가이드 라인, 즉 가상의 배선 이미지를 증강하는 방법을 설명한다. A method of augmenting a guideline, ie a virtual wiring image, using this system is described.

교육생이 HMD를 착용하고 PLC 보드를 바라보았을 때, HMD에 장착된 카메라를 통해 얻은 영상으로부터 상기 제어부(22)가 PLC 보드의 마커를 인식하여 해당 실습의 가상의 배선 이미지를 증강시키는데 이때 패턴 매칭 알고리즘을 적용한다. 여기서 가상의 배선 이미지의 위치 및 길이와 같은 세부 정보는 상기 마커를 인식하여 얻는다. When the trainee wears the HMD and looks at the PLC board, the controller 22 recognizes the marker of the PLC board from the image obtained through the camera mounted on the HMD and augments the virtual wiring image of the corresponding exercise. Apply. Here, detailed information such as the position and length of the virtual wiring image is obtained by recognizing the marker.

그리고 상기 마커의 패턴을 인식하여 해당 PLC 보드의 위치나 정보를 획득한다. 이를 통해 얻은 정보를 이용하여 가이드 라인, 즉 가상의 배선 이미지를 상기 출력부(23)를 통해 표시한다. Then, the pattern of the marker is recognized to acquire the position or information of the corresponding PLC board. Using the information obtained through this, a guide line, ie, a virtual wiring image, is displayed through the output unit 23.

한편 상기 제어부(22)는 실제 배선이 상기 가상의 배선 이미지와 일치하는지를 판단하는데, 즉 실습 내용에 맞는 포트에 영역 침범이 있었는지를 검사하여 배선이 올바르게 되었는지를 판단한다.
On the other hand, the controller 22 determines whether the actual wiring matches the virtual wiring image, that is, inspects whether there is an area violation at a port that matches the training content, and determines whether the wiring is correct.

도 2는 본 발명의 증강 현실을 이용한 배선 교육방법을 구현하는 전체 순서도이다. 2 is a flowchart illustrating a wiring education method using the augmented reality of the present invention.

먼저, 상기 입력부(21)가 실습 보드의 영상을 획득한다(S10). 바람직하게는 영상을 획득하기 전의 단계로서 교육생이 본 발명의 시스템에 저장되어 있는 실습을 선택하여 실행시키는 것이 바람직하다. First, the input unit 21 obtains an image of a training board (S10). Preferably, as a step before acquiring the image, the trainee selects and executes the practice stored in the system of the present invention.

다음으로 상기 제어부(22)가 실습 보드의 패턴을 인식한다(S20). 구체적으로 상기 실습 보드의 영상으로부터 마커의 패턴을 인식하여 상기 실습 보드의 위치 및 정보를 획득한다. Next, the control unit 22 recognizes the pattern of the training board (S20). Specifically, the pattern of the marker is recognized from the image of the training board to acquire the position and information of the training board.

그 후 상기 제어부(22)가 실습 보드의 영상에 가상의 배선 이미지를 증강하고 출력부(23)에 표시한다(S30). 여기서 증강하는 방법은 AR 툴킷(toolkit)을 이용하는 것이 바람직하다. Thereafter, the controller 22 augments the virtual wiring image on the image of the training board and displays it on the output unit 23 (S30). The method of augmenting here preferably uses an AR toolkit.

그 후 상기 입력부(21)가 실제 배선 과정을 인식한다(S40). 즉 교육생이 HMD에 보여지는 가상의 배선 이미지를 따라 실제 배선을 수행하면 카메라가 그 실제 배선 장면을 담은 영상을 찍는다. Thereafter, the input unit 21 recognizes an actual wiring process (S40). That is, when the student performs the actual wiring along the virtual wiring image shown in the HMD, the camera takes an image of the actual wiring scene.

그 후 상기 제어부(22)가 실제 배선과 가상의 배선 이미지를 상호 비교 판단한다(S50). 이때 HMD를 통해 입력 받은 영상을 기반으로 상기 실제 배선이 상기 가상의 배선 이미지와 일치하는지를 판단하여, 실습 단계의 포트에 배선이 침범되었는지를 검사하여, 상기 실제 배선과 상기 가상의 배선 이미지가 일치한다면 다음 단계로 진행한다(S60). 만약 교육생이 잘못 배선하였다면 교육생에게 경고 메시지를 보내고, 교육생이 다시 배선을 하도록 유도하는 것이 바람직하다. Thereafter, the controller 22 compares the actual wiring and the virtual wiring image with each other (S50). At this time, it is determined whether the actual wiring matches the virtual wiring image based on the image input through the HMD, and checks whether the wiring is invaded in the port of the training step, and if the actual wiring matches the virtual wiring image Proceed to the next step (S60). If the trainee miswired, it is advisable to send a warning message to the trainee and encourage them to rewire.

여기서 다음 단계로의 진행은 키보드나 마우스 입력 중 적어도 하나 이상을 사용하여 다음 배선을 진행할 수 있고, 영상 처리를 통해 실제 배선의 위치를 인식하여 다음 배선을 진행할 수도 있다. Here, proceeding to the next step may proceed with the next wiring using at least one of the keyboard or the mouse input, and may proceed with the next wiring by recognizing the position of the actual wiring through the image processing.

도 3은 본 발명의 증강 현실을 이용한 배선 교육방법에 있어서 다음 단계로 수행되는 예시이다. Figure 3 is an illustration performed in the next step in the wiring education method using augmented reality of the present invention.

도 3의 경우 1 내지 경우 3에서 볼 수 있듯이, 먼저 점선의 증강된 가상의 배선 이미지를 증강시키면 교육생이 실제 배선을 한다. 도 3에서 실제 배선은 실선으로 표시하였다. 이때 상기 제어부(22)가 올바르게 배선되었다고 판단하면, 다음 단계(next)의 가상의 배선 이미지를 증강시켜 보여준다.
3, as shown in FIGS. 1 through 3, first, the augmented virtual wiring image of the dotted line is augmented, and the student performs the actual wiring. In FIG. 3, the actual wiring is shown by the solid line. At this time, if it is determined that the controller 22 is correctly wired, the virtual wiring image of the next step (next) is augmented and shown.

도 4는 본 발명의 증강 현실을 이용한 배선 교육 시스템 및 교육 방법을 실제로 시연한 모습을 담은 실사이다. 4 is a live-action view showing the actual demonstration of the wiring education system and training method using the augmented reality of the present invention.

교육생은 출력부(23)에 해당하는 모니터를 통해 증강된 케이블 위치를 확인한 후, 실제 배선을 실시하게 된다.
After the trainee confirms the position of the enhanced cable through the monitor corresponding to the output unit 23, the trainee performs actual wiring.

이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 부가 및 변경이 가능하다는 것이 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다. It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention as defined by the appended claims. Will be apparent to those of ordinary skill in the art.

한편, 본 발명에 따른 실시예들은 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬(플로피) 디스크(floptical(Floppy) disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
Meanwhile, embodiments according to the present invention may be implemented in the form of program instructions that may be executed by various computer components, and may be recorded in a computer-readable recording medium. The computer-readable recording medium may include program commands, data files, data structures, and the like, alone or in combination. Program instructions recorded on the computer-readable recording medium may be those specially designed and constructed for the present invention, or may be known and available to those skilled in the computer software arts. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROMs and DVDs, magnetic-optical disks such as floppy disks (floptical disks) Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules to perform the process according to the invention, and vice versa.

20: 시스템 21: 입력부
22: 제어부 23: 출력부
30: PLC 실습 보드
20: system 21: input unit
22: control unit 23: output unit
30: PLC Practice Board

Claims (11)

배선 실습 대상이 되는 실습 보드,
카메라를 통해 상기 실습 보드의 영상을 입력받는 입력부,
상기 실습 보드의 패턴을 인식하고 상기 영상에 가상의 배선 이미지로 증강하며 실제 배선이 상기 가상의 배선 이미지와 일치하는지를 판단하는 제어부 및,
상기 증강된 영상을 출력하는 출력부를 포함하는 것을 특징으로 하는 증강 현실을 이용한 배선 교육 시스템.
Training board which is targeted for wiring training,
An input unit for receiving an image of the training board through a camera;
A controller for recognizing a pattern of the training board and augmenting the virtual wiring image in the image and determining whether the actual wiring matches the virtual wiring image;
Wiring education system using augmented reality, characterized in that it comprises an output unit for outputting the augmented image.
청구항 1에 있어서,
상기 출력부는 상기 가상의 이미지를 2차원 이미지 및 3차원 이미지 중 적어도 하나 이상을 선택하여 표시하는 것을 특징으로 하는 증강 현실을 이용한 배선 교육 시스템.
The method according to claim 1,
The output unit is a wiring education system using augmented reality, characterized in that to display at least one or more of the two-dimensional image and the three-dimensional image of the virtual image.
청구항 1 또는 청구항 2에 있어서,
상기 실습 보드는 PLC(Programmable Logic Controller)인 것을 특징으로 하는 증강 현실을 이용한 배선 교육 시스템.
The method according to claim 1 or 2,
The training board is a wiring education system using augmented reality, characterized in that the PLC (Programmable Logic Controller).
청구항 1 또는 청구항 2에 있어서,
상기 입력부는 모바일 장치에 장착된 카메라 또는 컴퓨터에 장착된 웹캠으로 구성된 것을 특징으로 하는 증강 현실을 이용한 배선 교육 시스템.
The method according to claim 1 or 2,
And the input unit comprises a camera mounted on a mobile device or a webcam mounted on a computer.
청구항 1 또는 청구항 2에 있어서,
상기 출력부는 모니터 또는 HMD(Head Mounted Display)인 것을 특징으로 하는 증강 현실을 이용한 배선 교육 시스템.
The method according to claim 1 or 2,
The output unit is a wiring education system using augmented reality, characterized in that the monitor or head mounted display (HMD).
(a) 입력부가 실습 보드의 영상을 획득하는 단계,
(b) 제어부가 실습 보드의 패턴을 인식하는 단계,
(c) 제어부가 실습 보드의 영상에 가상의 배선 이미지를 증강하고 출력부에 표시하는 단계,
(d) 입력부가 실제 배선을 인식하는 단계,
(e) 제어부가 실제 배선이 상기 가상의 배선 이미지와 일치하는지를 상호 비교 판단하는 단계 및,
(f) 상기 판단 결과 상기 실제 배선이 상기 가상의 배선 이미지와 일치하는 경우, 다음 배선을 진행하는 단계
를 포함하는 것을 특징으로 하는 증강 현실을 이용한 배선 교육 방법.
(a) the input unit acquiring an image of the training board;
(b) the control unit recognizing the pattern of the training board;
(c) the control unit augmenting the virtual wiring image on the image of the training board and displaying it on the output unit;
(d) the input unit recognizes the actual wiring;
(e) the control unit comparing and determining whether the actual wiring matches the virtual wiring image;
(f) if the actual wiring matches the virtual wiring image as a result of the determination, proceeding to the next wiring
Wiring training method using augmented reality comprising a.
청구항 6에 있어서,
상기 (f) 단계는,
키보드 또는 마우스로부터 다음 배선의 위치를 입력받는 단계
를 포함하는 특징으로 하는 증강 현실을 이용한 배선 교육 방법.
The method of claim 6,
The step (f)
Receiving the location of the next wiring from the keyboard or mouse
Wiring training method using augmented reality characterized in that it comprises a.
청구항 6에 있어서,
상기 (f) 단계는,
카메라 또는 컴퓨터에 장착된 웹캠을 이용한 영상 처리를 통해 다음 배선의 위치를 입력받는 단계
를 포함하는 것을 특징으로 하는 증강 현실을 이용한 배선 교육 방법.
The method of claim 6,
The step (f)
Receiving the location of the next wiring through image processing using a camera or a webcam mounted on a computer
Wiring training method using augmented reality comprising a.
청구항 6에 있어서,
상기 (b) 단계는,
상기 실습 보드의 영상으로부터 마커의 패턴을 인식하여 상기 실습 보드의 위치 및 정보를 획득하는 것을 특징으로 하는 증강 현실을 이용한 배선 교육 방법.
The method of claim 6,
The step (b)
Recognizing a pattern of the marker from the image of the training board to obtain the location and information of the training board, the wiring education method using augmented reality.
청구항 6에 있어서,
상기 (e) 단계에서,
실제 배선이 상기 가상의 배선 이미지와 일치하는지를 상호 비교 판단하는 방법은,
상기 가상의 배선 이미지를 참고하여 상기 실제 배선이 다른 배선의 포트에 영역을 침범하는지 검사하여 상기 실제 배선이 상기 가상의 배선 이미지와 일치하는지 여부를 판단하는 단계
를 포함하는 것을 특징으로 하는 증강 현실을 이용한 배선 교육 방법.
The method of claim 6,
In the step (e)
The method of mutual comparison determining whether or not the actual wiring matches the virtual wiring image is
Determining whether the actual wiring coincides with the virtual wiring image by examining whether the actual wiring invades a region of a port of another wiring by referring to the virtual wiring image
Wiring training method using augmented reality comprising a.
삭제delete
KR1020100139113A 2010-12-30 2010-12-30 Education method and the system about wiring using augmented reality KR101241120B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100139113A KR101241120B1 (en) 2010-12-30 2010-12-30 Education method and the system about wiring using augmented reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100139113A KR101241120B1 (en) 2010-12-30 2010-12-30 Education method and the system about wiring using augmented reality

Publications (2)

Publication Number Publication Date
KR20120077226A KR20120077226A (en) 2012-07-10
KR101241120B1 true KR101241120B1 (en) 2013-03-11

Family

ID=46710756

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100139113A KR101241120B1 (en) 2010-12-30 2010-12-30 Education method and the system about wiring using augmented reality

Country Status (1)

Country Link
KR (1) KR101241120B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104794967A (en) * 2015-05-20 2015-07-22 国家电网公司 High-voltage electric energy metering gauge mounting and wiring analysis comprehensive practical training device
KR20190092015A (en) 2018-01-30 2019-08-07 서정호 Apparatus training system using augmented reality and virtual reality and method thereof
KR102481987B1 (en) * 2021-10-20 2022-12-27 주식회사 일리소프트 Apparatus and method for providing AR-based educational contents using polygonal real teaching materials

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101882951B1 (en) * 2017-12-29 2018-07-27 주식회사테스앤테스 Apparatus for education-training using maker recognition and open platform
CN109633632B (en) * 2018-12-26 2021-11-30 青岛小鸟看看科技有限公司 Head-mounted display device, handle and positioning tracking method thereof
CN110610639A (en) * 2019-10-21 2019-12-24 西安与或电子科技有限公司 Course extensible comprehensive teaching experiment platform
CN111402672A (en) * 2020-04-15 2020-07-10 云南电网有限责任公司带电作业分公司 Power transmission line helicopter simulation training method and system based on VR technology
CN113393723A (en) * 2021-07-05 2021-09-14 重庆安伏特电子技术有限公司 Intelligent evaluation device and method for circuit experiment operation examination

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970070640A (en) * 1996-04-10 1997-11-07 추호석 Backlash compensation method of driving part
KR20090114138A (en) * 2008-04-29 2009-11-03 한국기술교육대학교산학협력단 System for realistic interactive technology education based on three dimension type contents
KR20090114139A (en) * 2008-04-29 2009-11-03 한국기술교육대학교산학협력단 Method for realistic interactive technology education based on three dimension type contents
KR20100097297A (en) * 2009-02-26 2010-09-03 인천대학교 산학협력단 Apparatus and method for providing augmented space without using markers

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970070640A (en) * 1996-04-10 1997-11-07 추호석 Backlash compensation method of driving part
KR20090114138A (en) * 2008-04-29 2009-11-03 한국기술교육대학교산학협력단 System for realistic interactive technology education based on three dimension type contents
KR20090114139A (en) * 2008-04-29 2009-11-03 한국기술교육대학교산학협력단 Method for realistic interactive technology education based on three dimension type contents
KR20100097297A (en) * 2009-02-26 2010-09-03 인천대학교 산학협력단 Apparatus and method for providing augmented space without using markers

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104794967A (en) * 2015-05-20 2015-07-22 国家电网公司 High-voltage electric energy metering gauge mounting and wiring analysis comprehensive practical training device
KR20190092015A (en) 2018-01-30 2019-08-07 서정호 Apparatus training system using augmented reality and virtual reality and method thereof
KR102481987B1 (en) * 2021-10-20 2022-12-27 주식회사 일리소프트 Apparatus and method for providing AR-based educational contents using polygonal real teaching materials

Also Published As

Publication number Publication date
KR20120077226A (en) 2012-07-10

Similar Documents

Publication Publication Date Title
KR101241120B1 (en) Education method and the system about wiring using augmented reality
Alizadehsalehi et al. Virtual reality for design and construction education environment
Turkan et al. Mobile augmented reality for teaching structural analysis
Boyles Virtual reality and augmented reality in education
US9520072B2 (en) Systems and methods for projecting images onto an object
Bowman et al. Evaluating effectiveness in virtual environments with MR simulation
Jain et al. An augmented reality tool for learning spatial anatomy on mobile devices
JP2018109984A5 (en)
KR101917434B1 (en) Furnace process virtual reality training system
Baloch et al. Augmented reality, a tool to enhance conceptual understanding for engineering students
KR102383961B1 (en) HMD-based Spatial Disorientation Experience Simulator using X-Plane
Thakkar et al. Learning math using gesture
CN105844704A (en) Nuclear security 3D virtual simulation method
Marougkas et al. Virtual reality in education: reviewing different technological approaches and their implementations
CN109035906A (en) One kind reading aloud Training Methodology based on the visual Chinese of mixed reality
Hachaj et al. Knowledge Bricks—Educational immersive reality environment
Cheng et al. Using 360-Degree Virtual Reality Technology for Training Construction Workers about Safety Challenges of Drones
Benito et al. Engaging computer engineering students with an augmented reality software for laboratory exercises
Uluyol et al. Augmented reality: A new direction in education
Chandramouli et al. Desktop VR centered project based learning in ET courses using a low-cost portable VR system
KR102254769B1 (en) Education and Qualification System and the Method Using VR
Wei et al. Integrating Kinect and haptics for interactive STEM education in local and distributed environments
CN113570920A (en) Interactive remote teaching system and method
CN113612985A (en) Processing method of interactive VR image
JP2021086146A (en) Content control system, content control method, and content control program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160111

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170102

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee