KR20210085882A - Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality - Google Patents

Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality Download PDF

Info

Publication number
KR20210085882A
KR20210085882A KR1020190179419A KR20190179419A KR20210085882A KR 20210085882 A KR20210085882 A KR 20210085882A KR 1020190179419 A KR1020190179419 A KR 1020190179419A KR 20190179419 A KR20190179419 A KR 20190179419A KR 20210085882 A KR20210085882 A KR 20210085882A
Authority
KR
South Korea
Prior art keywords
learner
virtual reality
image
images
photobook
Prior art date
Application number
KR1020190179419A
Other languages
Korean (ko)
Other versions
KR102317195B1 (en
Inventor
장래현
Original Assignee
(주)케이아이에스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)케이아이에스 filed Critical (주)케이아이에스
Priority to KR1020190179419A priority Critical patent/KR102317195B1/en
Publication of KR20210085882A publication Critical patent/KR20210085882A/en
Application granted granted Critical
Publication of KR102317195B1 publication Critical patent/KR102317195B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06K9/00288—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring

Abstract

The present invention relates to a method for generating a virtual reality (VR) photo book in a VR field study system to generate and provide a photobook specialized for each learner. According to the present invention, the method comprises the following steps of: executing a VR field study content, photographing one or more learners, and synthesizing the one or more learner's images in a specific area of a VR field study content screen in real time to play the synthesized image; when a photographing input of the learner or a leader is detected, capturing an image of the VR field study content screen in which the one or more learner's images are synthesized; reading information of each of the one or more learners included in the image; storing each of the images corresponding to each of the read learners; storing the images in this manner during execution of the VR field study content to construct a learner image database in which the images are stored for each learner; and generating a VR photobook corresponding to each learner with the image for each learner stored in the learner image database.

Description

가상현실 체험학습 시스템의 가상현실 포토북 생성방법{Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality} Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality

본 발명은 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 관한 것으로 더욱 상세하게는 가상현실 체험학습 컨텐츠 실행 중 캡쳐 되는 이미지를 자동으로 각 학습자 별로 저장함으로써 각 학습자 별로 가상현실 포토북을 자동 생성할 수 있는 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 관한 것이다. The present invention relates to a method for generating a virtual reality photobook of a virtual reality experiential learning system, and more particularly, by automatically storing images captured during the execution of virtual reality experiential learning contents for each learner, automatically generating a virtual reality photobook for each learner It relates to a virtual reality photobook creation method of a virtual reality experiential learning system that can do this.

가상현실 기술은 사용자가 실제로 체험을 하지 않더라도 컴퓨터의 시뮬레이션을 통해 동일하거나 유사한 환경을 접할 수 있도록 한다. 가상현실 기술은 일반적으로 접근하기 어려운 공간이나 위험한 공간, 또는 고가의 비용이 소용되는 체험을 간접적으로 할 수 있도록 제공한다. 예를 들어, 비행기 조종 시뮬레이션이나, 화재현장에서의 훈련, 우주공간에 대한 훈련 등에 상용되어 왔다.Virtual reality technology allows users to experience the same or similar environment through computer simulation even if they do not actually experience it. Virtual reality technology provides an indirect way to experience inaccessible, dangerous, or expensive spaces in general. For example, it has been used in airplane piloting simulations, training at fire sites, and training in outer space.

최근 들어 가상현실 기술은 이러한 가상현실 기술은 스마트폰 어플 또는 게임에 적용되는 등 일상생화의 다양한 분야에서 사용되고 있다. 특히 어린이의 교육 분야에서도 가상현실 기술이 적용되고 있다. 가상현실 기술을 이용하여 어린이 학습자의 체험학습을 수행하는 컨텐츠의 개발이 이루어지고 있다. Recently, virtual reality technology is being used in various fields of daily life, such as applying virtual reality technology to smartphone applications or games. In particular, virtual reality technology is being applied in the field of children's education. The development of contents for performing experiential learning of children learners using virtual reality technology is being carried out.

더불어 어린이 체험학습 컨텐츠는 학습자가 직접 참여하여 컨텐츠를 생성하는 방향으로 진화하고 있다. 이러한 종래기술로는 한국공개특허 제10-2002-0025916호가 개시된 바 있다. 상기 특허는 구매한 미완성 동화책의 고유 시리얼번호와 자신의 정보 및 데이터를 미완성 동화책 사이트에 전송하면, 미완성 동화책 사이트 운영자가 동화책의 미완성 부분에 들어갈 파일을 편집한 다음 사용자의 계정으로 저장 또는 전송하고, 사용자는 편집파일을 다운로드하여 스티커로 출력한 다음 동화책의 미완성 부분에 직접 부착시켜 자신만의 동화책을 완성하도록 하는 기술이다.In addition, children's experiential learning contents are evolving in the direction that learners directly participate and create contents. As such a prior art, Korean Patent Application Laid-Open No. 10-2002-0025916 has been disclosed. In the above patent, when the unique serial number of the purchased unfinished children's book and their information and data are transmitted to the unfinished children's book site, the unfinished children's book site operator edits the file to be placed in the unfinished part of the children's book, and then saves or transmits it to the user's account, The user downloads the edited file, prints it out as a sticker, and attaches it directly to the unfinished part of the children's book to complete their own children's book.

그러나 상기 특허는 미완성 동화책을 직접 구입한 후 동화책 사이트에 부착하고자 하는 스티커의 편집본을 전송하고, 편집본을 다운받아 스티커로 출력하여야 비로서 동화책에 부착하여 자신만의 동화책을 제작할 수 있음에 따라, 동화책의 제작에 있어 준비작업이 많아 번거롭고 제작을 위한 준비기간이 너무 길며, 부착하고자 하는 스티커를 사전에 준비하여 구비하여야 함에 따라 즉흥적인 제작이 불가능하며, 사전에 제작된 스티커를 동화책에 붙이는 것에 불과하여 어린이 및 유아에게 재미나 흥미를 유발시키는데 한계가 있다.However, in the above patent, after purchasing an unfinished children's book directly, the edited version of the sticker to be attached to the children's book site is transmitted, the edited version is downloaded and printed as a sticker, and then attached to the children's book to produce your own children's book. It is cumbersome because there is a lot of preparatory work in the production of the book, and the preparation period for production is too long, improvised production is impossible as the stickers to be attached must be prepared and equipped in advance, and it is just pasting the pre-made stickers on a children's book. There is a limit to inducing fun or interest in children and infants.

이에 따라 가상현실 기술을 이용하여 학습자가 컨텐츠에 직접 자유롭게 참여하도록 하고, 그 참여 결과에 대하여 포토북 등의 결과물을 생성하여 학습자에게 제공할 수 있도록 하는 학습 서비스 기술의 개발이 요구되고 있다. Accordingly, there is a demand for the development of a learning service technology that allows learners to freely participate in content by using virtual reality technology, and creates results such as a photobook for the results of their participation and provides them to learners.

KR 10- 2002-0025916 A, 2002년 04월 04일KR 10- 2002-0025916 A, 04.04.02

본 발명은 상기와 같은 종래 기술을 개선하기 위해 안출된 것으로서, 가상현실 체험학습 컨텐츠 실행 중 캡쳐 되는 이미지를 자동으로 각 학습자 별로 저장함으로써 각 학습자 별로 가상현실 포토북을 자동 생성할 수 있는 가상현실 체험학습 시스템의 가상현실 포토북 생성방법을 제공하는 것을 목적으로 한다. The present invention has been devised to improve the prior art as described above, and by automatically storing images captured during the execution of virtual reality experiential learning contents for each learner, a virtual reality experience capable of automatically generating a virtual reality photobook for each learner An object of the present invention is to provide a method for generating a virtual reality photobook of a learning system.

상기의 목적을 이루고 종래기술의 문제점을 해결하기 위하여, 본 발명의 일실시예에 따른 가상현실 체험학습 시스템의 가상현실 포토북 생성방법은, 가상현실 체험학습 컨텐츠를 실행하고, 하나 이상의 학습자를 촬영하여 상기 하나 이상의 학습자 영상을 실시간으로 상기 가상현실 체험학습 컨텐츠 화면의 특정 영역에 합성하여 재생하는 단계; 상기 학습자 또는 지도자의 사진촬영 입력이 감지되는 경우, 상기 하나 이상의 학습자 영상이 합성된 상기 가상현실 체험학습 컨텐츠 화면을 이미지로 캡쳐 하는 단계; 상기 이미지에 포함된 상기 하나 이상의 학습자 각각의 정보를 판독하는 단계; 상기 판독된 각 학습자에 대응하여 상기 이미지를 각각 저장하는 단계; 상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여, 상기 각 학습자 별로 이미지가 저장된 학습자 이미지 데이터베이스를 구축하는 단계; 및 상기 학습자 이미지 데이터베이스에 저장된 각 학습자 별 이미지로 상기 각 학습자에 대응하는 가상현실 포토북을 생성하는 단계를 포함한다.In order to achieve the above object and solve the problems of the prior art, the virtual reality photobook generation method of the virtual reality experiential learning system according to an embodiment of the present invention executes the virtual reality experiential learning content, and shoots one or more learners synthesizing and playing the one or more learner images in a specific area of the virtual reality experiential learning content screen in real time; capturing the virtual reality experiential learning content screen in which the one or more learner images are synthesized as an image when the input of the learner or the leader is detected; reading information of each of the one or more learners included in the image; storing each of the images corresponding to each of the read learners; constructing a learner image database in which images are stored for each learner by performing the image storage in the above manner during execution of the virtual reality experiential learning content; and generating a virtual reality photobook corresponding to each learner with an image for each learner stored in the learner image database.

또한, 본 발명의 일실시예에 따른 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 있어서, 상기 이미지에 포함된 상기 하나 이상의 학습자 각각의 정보를 판독하는 단계는, 상기 이미지가 포함하는 모든 얼굴영역을 검출하는 단계; 상기 검출한 각 얼굴영역의 메타데이터를 획득하는 단계; 상기 획득한 각 얼굴영역의 메타데이터를 미리 저장되어 있는 학습자 메타데이터와 비교하여 상기 이미지에 포함된 각 학습자의 정보를 판독하는 단계를 포함한다.In addition, in the virtual reality photobook generation method of the virtual reality experiential learning system according to an embodiment of the present invention, the step of reading the information of each of the one or more learners included in the image includes all faces included in the image detecting an area; obtaining metadata of each detected face region; and reading the information of each learner included in the image by comparing the obtained metadata of each facial region with the previously stored learner metadata.

또한, 본 발명의 일실시예에 따른 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 있어서, 상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여, 상기 각 학습자 별로 이미지가 저장된 학습자 이미지 데이터베이스를 구축하는 단계는, 제1 학습자에 대응하여 제1 개인 폴더 및 제1 단체 폴더를 각각 생성하는 단계; 상기 제1 개인 폴더에는 상기 제1 학습자만 포함된 이미지를 저장하는 단계; 및 상기 제1 단체 폴더에는 상기 제1 학습자 외에 다른 학습자도 포함된 이미지를 저장하는 단계를 포함한다.In addition, in the virtual reality photobook generation method of the virtual reality experiential learning system according to an embodiment of the present invention, the image storage of the above method is performed during the execution of the virtual reality experiential learning content, and the image is stored for each learner The step of constructing the learner image database may include: creating a first personal folder and a first group folder in response to the first learner, respectively; storing an image including only the first learner in the first personal folder; and storing an image including other learners in addition to the first learner in the first group folder.

또한, 본 발명의 일실시예에 따른 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 있어서, 상기 학습자 이미지 데이터베이스에 저장된 각 학습자 별 이미지로 상기 각 학습자에 대응하는 가상현실 포토북을 생성하는 단계는, 상기 제1 학습자에 대응하여 상기 제1 개인 폴더에 저장된 이미지만으로 상기 가상현실 포토북을 생성하는 단계; 상기 제1 학습자에 대응하여 상기 제1 단체 폴더에 저장된 이미지만으로 상기 가상현실 포토북을 생성하는 단계; 및 상기 제1 학습자에 대응하여 상기 제1 개인 폴터 및 상기 제1 단체 폴더에 저장된 모든 이미지로 상기 가상현실 포토북을 생성하는 단계 중 어느 하나 이상의 단계를 포함한다.In addition, in the method for generating a virtual reality photobook of the virtual reality experiential learning system according to an embodiment of the present invention, generating a virtual reality photobook corresponding to each learner with an image for each learner stored in the learner image database generating the virtual reality photobook only with images stored in the first personal folder in response to the first learner; generating the virtual reality photobook only with images stored in the first group folder in response to the first learner; and generating the virtual reality photobook with all images stored in the first personal folder and the first group folder in response to the first learner.

또한, 본 발명의 일실시예에 따른 가상현실 체험학습 시스템의 가상현실 포토북 생성방법은, 상기 가상현실 체험학습 컨텐츠의 스토리에 따라 미리 설정된 화면이나 시점에서 사진촬영 이벤트가 발생하면, 상기 가상현실 체험학습 컨텐츠의 현재 화면을 이미지로 캡쳐하는 단계; 상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여 스토리 이미지 데이터베이스를 구축하는 단계; 학습자에 대응하여 상기 학습자 이미지 데이터베이스에 저장된 이미지와 상기 스토리 이미지 데이터베이스에 저장된 이미지를 시간 순서대로 배열하는 단계; 상기 배열된 이미지 중 서로 중복되는 이미지를 판독하는 단계; 상기 판독된 중복 이미지 중 어느 하나를 배제하는 단계; 및 상기 중복 이미지가 배제되면서 상기 시간 순서대로 배열된 이미지를 통해 상기 학습자에 대응하는 가상현실 포토북을 생성하는 단계를 더 포함한다.In addition, in the virtual reality photobook generation method of the virtual reality experiential learning system according to an embodiment of the present invention, when a photo shooting event occurs at a preset screen or viewpoint according to the story of the virtual reality experiential learning content, the virtual reality Capturing the current screen of the experiential learning content as an image; constructing a story image database by performing the image storage in the above manner during execution of the virtual reality experiential learning content; arranging the images stored in the learner image database and the images stored in the story image database in chronological order corresponding to the learner; reading images overlapping each other among the arranged images; excluding any one of the read duplicate images; and generating a virtual reality photobook corresponding to the learner through the images arranged in the chronological order while the duplicate images are excluded.

본 발명의 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 따르면, 가상현실 체험학습 컨텐츠의 실행 중에 캡쳐 된 이미지를 학습자 별로 자동 분류하여 각각 저장함으로써 각 학습자에 특화된 포토북을 생성하여 제공할 수 있는 효과를 얻을 수 있다.According to the virtual reality photobook creation method of the virtual reality experiential learning system of the present invention, the images captured during the execution of the virtual reality experiential learning contents are automatically classified for each learner and stored, so that a photobook specialized for each learner can be generated and provided. effect can be obtained.

또한, 본 발명의 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 따르면, 학습자나 지도자가 입력하는 순간에 캡쳐 된 이미지만으로 포토북을 생성함으로써 학습자의 의도나 취향에 적합한 학습자 프렌들리 포토북을 생성하여 제공할 수 있는 효과를 얻을 수 있다.In addition, according to the virtual reality photobook generation method of the virtual reality experiential learning system of the present invention, a learner-friendly photobook suitable for the learner's intention or taste is created by creating a photobook only with images captured at the moment a learner or leader inputs it. You can create and provide effects.

또한, 본 발명의 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 따르면, 미리 설정된 시나리오에 따라 캡쳐된 이미지와 학습자가 입력한 순간에 캡쳐된 이미지를 적절히 배열하여 포토북을 생성함으로써, 컨텐츠 스토리에 충실하면서도 학습자의 적극적 참여가 반영되는 포토북을 생성하여 제공할 수 있는 효과를 얻을 수 있다.In addition, according to the virtual reality photobook generation method of the virtual reality experiential learning system of the present invention, the photobook is generated by appropriately arranging the captured image according to a preset scenario and the image captured at the moment input by the learner, thereby creating a content story. It is possible to obtain the effect of creating and providing a photobook that reflects the active participation of learners while being faithful to the

또한, 본 발명의 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 따르면, 다수의 학습자가 가상현실 체험학습 컨텐츠에 자유롭게 참여하여도 각 학습자 별로 특화된 포토북을 생성하여 제공할 수 있는 효과를 얻을 수 있다.In addition, according to the virtual reality photobook generation method of the virtual reality experiential learning system of the present invention, even if a large number of learners freely participate in the virtual reality experiential learning contents, it is possible to create and provide a photobook specialized for each learner. can

도 1은 본 발명의 일실시예에 따른 가상현실 체험학습 시스템의 구성을 도시한 블록도이다.
도 2는 본 발명의 일실시예에 따른 가상현실 포토북 생성방법의 흐름을 도시한 순서도이다.
도 3은 본 발명의 다른 실시예에 따른 가상현실 포토북 생성방법의 흐름을 도시한 순서도이다.
도 4는 본 발명의 일실시예에 따른 가상현실 포토북 생성방법의 개념을 도시한 흐름도이다.
도 5는 본 발명의 일실시예에 따른 학습자 별 이미지 저장방법의 일례를 도시한 도면이다.1 is a block diagram showing the configuration of a virtual reality experiential learning system according to an embodiment of the present invention.
2 is a flowchart illustrating a flow of a method for generating a virtual reality photobook according to an embodiment of the present invention.
3 is a flowchart illustrating a flow of a method for generating a virtual reality photobook according to another embodiment of the present invention.
4 is a flowchart illustrating the concept of a method for generating a virtual reality photobook according to an embodiment of the present invention.
5 is a diagram illustrating an example of an image storage method for each learner according to an embodiment of the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.Since the present invention can have various changes and can have various embodiments, specific embodiments are illustrated in the drawings and described in detail in the detailed description. However, this is not intended to limit the present invention to specific embodiments, and it should be understood to include all modifications, equivalents and substitutes included in the spirit and scope of the present invention. In describing each figure, like reference numerals have been used for like elements.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.When a component is referred to as being “connected” or “connected” to another component, it is understood that the other component may be directly connected or connected to the other component, but other components may exist in between. it should be On the other hand, when it is mentioned that a certain element is "directly connected" or "directly connected" to another element, it should be understood that the other element does not exist in the middle.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the present application are only used to describe specific embodiments, and are not intended to limit the present invention. The singular expression includes the plural expression unless the context clearly dictates otherwise. In the present application, terms such as “comprise” or “have” are intended to designate that a feature, number, step, operation, component, part, or combination thereof described in the specification exists, but one or more other features It should be understood that this does not preclude the existence or addition of numbers, steps, operations, components, parts, or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related art, and should not be interpreted in an ideal or excessively formal meaning unless explicitly defined in the present application. does not

이하에서는 첨부된 도면을 참조하여 본 발명의 실시예를 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 가상현실 체험학습 시스템의 구성을 도시한 블록도이고, 도 4는 본 발명의 일실시예에 따른 가상현실 포토북 생성방법의 개념을 도시한 흐름도이며, 도 5는 본 발명의 일실시예에 따른 학습자 별 이미지 저장방법의 일례를 도시한 도면이다.1 is a block diagram illustrating the configuration of a virtual reality experiential learning system according to an embodiment of the present invention, and FIG. 4 is a flowchart illustrating the concept of a method for generating a virtual reality photobook according to an embodiment of the present invention, 5 is a diagram illustrating an example of an image storage method for each learner according to an embodiment of the present invention.

본 발명의 일실시예에 따른 가상현실 체험학습 시스템은 컴퓨팅 디바이스(110), 카메라(121), 디스플레이 수단(122)를 구성으로 포함한다. 카메라(121)는 학습자를 촬영하여 그 영상을 컴퓨팅 디바이스(110)로 실시간 전송하고, 컴퓨팅 디바이스(110)는 가상현실 체험학습 컨텐츠에 학습자 영상을 합성하여 디스플레이 수단(122)을 통해 재생한다. 디스플레이 수단(122)은 가상현실 체험학습 컨텐츠와 학습자의 합성 영상을 출력하기 위한 수단으로 반드시 모니터인 것으로 한정되지 않으며, 스마트 단말기 등과 같은 다른 출력 수단을 통해 영상을 출력할 수도 있다.The virtual reality experiential learning system according to an embodiment of the present invention includes a computing device 110 , a camera 121 , and a display means 122 as a configuration. The camera 121 captures the learner and transmits the image to the computing device 110 in real time, and the computing device 110 synthesizes the learner image with the virtual reality experiential learning content and reproduces it through the display means 122 . The display means 122 is a means for outputting a composite image of the virtual reality experiential learning content and the learner, and is not necessarily limited to a monitor, and may output an image through other output means such as a smart terminal.

컴퓨팅 디바이스(110)는 소정의 연산능력을 구비한 프로세서와 운영체제(OS: Operating System)를 포함하는 디바이스로 구현될 수 있다. 예를 들어, 컴퓨팅 디바이스(110)는 PC, MAC, 노트북, 태블릿 PC, 콘솔 게임기, 스마트폰, 스마트패드 등 프로세서와 운영체제를 구비한 다양한 종류의 디바이스로 구현될 수 있다.The computing device 110 may be implemented as a device including a processor having a predetermined computational capability and an operating system (OS). For example, the computing device 110 may be implemented as various types of devices having a processor and an operating system, such as a PC, a MAC, a notebook computer, a tablet PC, a console game machine, a smart phone, and a smart pad.

컴퓨팅 디바이스(110)는 컨텐츠 실행부(111), 영상 제어부(112), 학습자 판독부(113), 포토북 생성부(114), 학습자 이미지 데이터베이스(115), 스토리 이미지 데이터베이스(116)를 구성으로 포함한다. 컨텐츠 실행부(111)는 가상현실 체험학습 컨텐츠를 저장하고 실행한다. 가상현실 체험학습 컨텐츠는 영상이나 이미지로 구현될 수 있는데, 바람직하게는 어린이 학습자에 대응하는 동화책 영상이나 이미지로 구현될 수 있다. The computing device 110 includes a content execution unit 111 , an image control unit 112 , a learner reading unit 113 , a photobook generation unit 114 , a learner image database 115 , and a story image database 116 . include The content execution unit 111 stores and executes virtual reality experiential learning content. The virtual reality experiential learning content may be implemented as an image or an image, and preferably may be implemented as an image or image of a children's book corresponding to a child learner.

영상 제어부(112)는 상기 가상현실 체험학습 컨텐츠를 디스플레이 수단(122)를 통해 재생하고, 카메라(121)를 통해 입력받는 학습자 영상을 상기 가상현실 체험학습 컨텐츠와 합성하여 디스플레이 수단(122)를 통해 재생한다. 영상 제어부(112)는 학습자 또는 지도자의 사진촬영 입력이 감지되는 경우, 상기 하나 이상의 학습자 영상이 합성된 상기 가상현실 체험학습 컨텐츠 화면을 이미지로 캡쳐한다. 또한, 영상 제어부(112)는 가상현실 체험학습 컨텐츠의 스토리에 따라 미리 설정된 화면이나 시점에서 사진촬영 이벤트를 발생시키고, 상기 이벤트가 발생하면 상기 가상현실 체험학습 컨텐츠의 현재 화면을 이미지로 캡쳐한다. The image control unit 112 reproduces the virtual reality experiential learning content through the display unit 122, synthesizes the learner image received through the camera 121 with the virtual reality experiential learning content, and then through the display unit 122 play The image controller 112 captures the virtual reality experiential learning content screen in which the one or more learner images are synthesized as an image when a photo taking input of a learner or a leader is detected. In addition, the image controller 112 generates a photo-taking event at a preset screen or viewpoint according to the story of the virtual reality experiential learning content, and when the event occurs, captures the current screen of the virtual reality experiential learning content as an image.

학습자 판독부(113)는 상기 캡쳐된 이미지에 포함된 하나 이상의 학습자 정보를 판독한다. 학습자 판독부(113)는 상기 이미지가 포함하는 모든 얼굴영역을 검출하고, 상기 검출한 각 얼굴영역의 메타데이터를 획득하며, 상기 획득한 각 얼굴영역의 메타데이터를 미리 저장되어 있는 학습자 메타데이터와 비교하여 상기 이미지에 포함된 각 학습자의 정보를 판독할 수 있다.The learner reading unit 113 reads one or more learner information included in the captured image. The learner reading unit 113 detects all facial regions included in the image, acquires metadata of each detected facial region, and stores the acquired metadata of each facial region with pre-stored learner metadata By comparison, the information of each learner included in the image can be read.

포토북 생성부(114)는 상기 판독된 각 학습자에 대응하여 상기 이미지를 각각 저장한다. 포토북 생성부(114)는 상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여, 상기 각 학습자 별로 이미지가 저장된 학습자 이미지 데이터베이스(115)를 구축한다. The photobook generating unit 114 stores the images in correspondence with each read learner. The photobook generating unit 114 performs the image storage in the above manner during execution of the virtual reality experiential learning contents, and builds a learner image database 115 in which images are stored for each learner.

포토북 생성부(114)는 학습자 이미지 데이터베이스(115) 구축에 있어서, 제1 학습자에 대응하여 제1 개인 폴더 및 제1 단체 폴더를 각각 생성하고, 상기 제1 개인 폴더에는 상기 제1 학습자만 포함된 이미지를 저장하며, 상기 제1 단체 폴더에는 상기 제1 학습자 외에 다른 학습자도 포함된 이미지를 저장하는 방식으로 학습자 이미지 데이터베이스(115) 구축할 수 있다. The photobook generator 114 creates a first personal folder and a first group folder in response to the first learner, respectively, in building the learner image database 115, and the first personal folder includes only the first learner The learner image database 115 may be built in such a way that an image is stored, and an image including other learners in addition to the first learner is stored in the first group folder.

포토북 생성부(114)는 학습자 이미지 데이터베이스(115)에 저장된 각 학습자 별 이미지로 상기 각 학습자에 대응하는 가상현실 포토북을 생성한다. 포토북 생성부(114)는 상기 제1 학습자에 대응하여 상기 제1 개인 폴더에 저장된 이미지만으로 상기 가상현실 포토북을 생성할 수 있다. 포토북 생성부(114)는 상기 제1 학습자에 대응하여 상기 제1 단체 폴더에 저장된 이미지만으로 상기 가상현실 포토북을 생성할 수도 있다. 포토북 생성부(114)는 상기 제1 학습자에 대응하여 상기 제1 개인 폴더 및 상기 제1 단체 폴더에 저장된 모든 이미지로 상기 가상현실 포토북을 생성할 수도 있다. The photobook generating unit 114 generates a virtual reality photobook corresponding to each learner with an image for each learner stored in the learner image database 115 . The photobook generator 114 may generate the virtual reality photobook only with images stored in the first personal folder in response to the first learner. The photobook generator 114 may generate the virtual reality photobook only with images stored in the first group folder in response to the first learner. The photobook generator 114 may generate the virtual reality photobook with all images stored in the first personal folder and the first group folder in response to the first learner.

또한, 포토북 생성부(114)는 가상현실 체험학습 컨텐츠의 스토리에 따라 이미지를 캡쳐하여 저장하는 것을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여 스토리 이미지 데이터베이스(116)를 구축한다. 포토북 생성부(114)는 학습자에 대응하여 학습자 이미지 데이터베이스(115)에 저장된 이미지와 스토리 이미지 데이터베이스(116)에 저장된 이미지를 시간 순서대로 배열하고, 상기 배열된 이미지 중 서로 중복되는 이미지를 판독한다. 포토북 생성부(114)는 상기 판독된 중복 이미지 중 어느 하나를 배제하고, 상기 중복 이미지가 배제되면서 상기 시간 순서대로 배열된 이미지를 통해 학습자에 대응하는 가상현실 포토북을 생성할 수 있다. In addition, the photobook generating unit 114 builds the story image database 116 by capturing and storing an image according to the story of the virtual reality experiential learning content during execution of the virtual reality experiential learning content. The photobook generator 114 arranges the images stored in the learner image database 115 and the image stored in the story image database 116 in chronological order in response to the learner, and reads images that overlap each other among the arranged images. . The photobook generating unit 114 may generate a virtual reality photobook corresponding to the learner by excluding any one of the read duplicate images, and using the images arranged in the chronological order while the duplicate images are excluded.

이와 같이 포토북 생성부(114)는 학습자가 선택한 이미지만으로 포토북을 생성할 수도 있고, 학습자 자신만 포함된 이미지만으로 포토북을 생성할 수도 있으며, 다른 학습자가 단체로 포함된 이미지만으로 포토북을 생성할 수도 있다. 또한, 가상현실 체험학습 컨텐츠의 시나리오에 따라 캡쳐된 이미지만으로 포토북을 생성할 수 있고, 가상현실 체험학습 컨텐츠의 시나리오에 따라 캡쳐된 이미지에 학습자가 선택한 이미지를 더하여 포토북을 생성할 수도 있다. 즉, 학습자가 자유롭게 가상현실 체험학습 컨텐츠에 참여할 수 있도록 하고, 학습자의 선택에 따라 다양한 방식으로 학습자에 최적화된 포토북을 생성하여 제공할 수 있다.In this way, the photobook generating unit 114 may generate a photobook only with images selected by the learner, may generate a photobook only with images including only the learner himself, and generate a photobook only with images including other learners as a group. You can also create In addition, a photobook may be created only with images captured according to a scenario of virtual reality experiential learning content, and a photobook may be created by adding an image selected by a learner to an image captured according to a scenario of virtual reality experiential learning content. That is, the learner can freely participate in the virtual reality experiential learning content, and the photobook optimized for the learner can be created and provided in various ways according to the learner's selection.

도 2는 본 발명의 일실시예에 따른 가상현실 포토북 생성방법의 흐름을 도시한 순서도이다.2 is a flowchart illustrating a flow of a method for generating a virtual reality photobook according to an embodiment of the present invention.

본 발명의 일실예에 따른 가상현실 포토북 생성방법은 가상현실 체험학습 시스템에 의해 구현될 수 있다. 가상현실 체험학습 시스템은 가상현실 체험학습 컨텐츠를 실행하고(단계(211)), 하나 이상의 학습자를 촬영하여 상기 하나 이상의 학습자 영상을 실시간으로 상기 가상현실 체험학습 컨텐츠 화면의 특정 영역에 합성하여 재생한다(단계(212)). 가상현실 체험학습 시스템은 학습자 또는 지도자의 사진촬영 입력이 감지되는 경우, 상기 하나 이상의 학습자 영상이 합성된 상기 가상현실 체험학습 컨텐츠 화면을 이미지로 캡쳐한다(단계(213)). The virtual reality photobook generation method according to an embodiment of the present invention may be implemented by a virtual reality experiential learning system. The virtual reality experiential learning system executes the virtual reality experiential learning content (step 211), captures one or more learners, and synthesizes and reproduces the one or more learner images in a specific area of the virtual reality experiential learning content screen in real time. (Step 212). The virtual reality experiential learning system captures the virtual reality experiential learning content screen in which the one or more learner images are synthesized as an image when a photo taking input of a learner or a leader is detected (step 213).

가상현실 체험학습 시스템은 상기 이미지에 포함된 상기 하나 이상의 학습자 각각의 정보를 판독한다(단계(214)). 단계(214)에서 가상현실 체험학습 시스템은 상기 이미지가 포함하는 모든 얼굴영역을 검출하고, 상기 검출한 각 얼굴영역의 메타데이터를 획득하며, 상기 획득한 각 얼굴영역의 메타데이터를 미리 저장되어 있는 학습자 메타데이터와 비교하여 상기 이미지에 포함된 각 학습자의 정보를 판독할 수 있다.The virtual reality experiential learning system reads the information of each of the one or more learners included in the image (step 214). In step 214, the virtual reality experiential learning system detects all facial regions included in the image, acquires metadata of each detected facial region, and stores the acquired metadata of each facial region in advance. It is possible to read the information of each learner included in the image by comparing with the learner metadata.

가상현실 체험학습 시스템은 상기 판독된 각 학습자에 대응하여 상기 이미지를 각각 저장하고, 상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여, 상기 각 학습자 별로 이미지가 저장된 학습자 이미지 데이터베이스를 구축한다(단계(215)). 단계(215)에서 가상현실 체험학습 시스템은 제1 학습자에 대응하여 제1 개인 폴더 및 제1 단체 폴더를 각각 생성하고, 상기 제1 개인 폴더에는 상기 제1 학습자만 포함된 이미지를 저장하며, 상기 제1 단체 폴더에는 상기 제1 학습자 외에 다른 학습자도 포함된 이미지를 저장할 수 있다.The virtual reality experiential learning system stores the images in response to each of the read learners, respectively, and performs the image storage in the above manner during the execution of the virtual reality experiential learning contents, thereby creating a learner image database in which the images are stored for each learner. Build (step 215). In step 215, the virtual reality experiential learning system creates a first personal folder and a first group folder in response to the first learner, respectively, and stores an image including only the first learner in the first personal folder, and the An image including learners other than the first learner may be stored in the first group folder.

가상현실 체험학습 시스템은 상기 학습자 이미지 데이터베이스에 저장된 각 학습자 별 이미지로 상기 각 학습자에 대응하는 가상현실 포토북을 생성한다(단계(216)). 단계(216)에서 가상현실 체험학습 시스템은 상기 제1 학습자에 대응하여 상기 제1 개인 폴더에 저장된 이미지만으로 상기 가상현실 포토북을 생성할 수 있다. 또한, 가상현실 체험학습 시스템은 상기 제1 학습자에 대응하여 상기 제1 단체 폴더에 저장된 이미지만으로 상기 가상현실 포토북을 생성할 수도 있다. 또한, 가상현실 체험학습 시스템은 상기 제1 학습자에 대응하여 상기 제1 개인 폴더 및 상기 제1 단체 폴더에 저장된 모든 이미지로 상기 가상현실 포토북을 생성할 수도 있다.The virtual reality experiential learning system generates a virtual reality photobook corresponding to each learner with each learner's image stored in the learner image database (step 216). In step 216 , the virtual reality experiential learning system may generate the virtual reality photobook only with images stored in the first personal folder in response to the first learner. In addition, the virtual reality experiential learning system may generate the virtual reality photobook only with images stored in the first group folder in response to the first learner. In addition, the virtual reality experiential learning system may generate the virtual reality photobook with all images stored in the first personal folder and the first group folder in response to the first learner.

도 3은 본 발명의 다른 실시예에 따른 가상현실 포토북 생성방법의 흐름을 도시한 순서도이다.3 is a flowchart illustrating a flow of a method for generating a virtual reality photobook according to another embodiment of the present invention.

본 발명의 다른 실시예에 따른 가상현실 포토북 생성방법의 단계(311) 내지 단계(316)은 도 2에 도시된 단계(212) 이후 단계(213) 내지 단계(216)과 병렬적 관계로 융합되어 구현될 수 있다. 가상현실 체험학습 시스템은 가상현실 체험학습 컨텐츠의 스토리에 따라 미리 설정된 화면이나 시점에서 사진촬영 이벤트가 발생하면, 상기 가상현실 체험학습 컨텐츠의 현재 화면을 이미지로 캡쳐한다(단계(311)). 가상현실 체험학습 시스템은 상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여 스토리 이미지 데이터베이스를 구축한다(단계(312)). 가상현실 체험학습 시스템은 학습자에 대응하여 상기 학습자 이미지 데이터베이스에 저장된 이미지와 상기 스토리 이미지 데이터베이스에 저장된 이미지를 시간 순서대로 배열한다(단계(313)). 가상현실 체험학습 시스템은 상기 배열된 이미지 중 서로 중복되는 이미지를 판독한다(단계(314)). 가상현실 체험학습 시스템은 상기 판독된 중복 이미지 중 어느 하나를 배제한다(단계(315)). 가상현실 체험학습 시스템은 상기 중복 이미지가 배제되면서 상기 시간 순서대로 배열된 이미지를 통해 상기 학습자에 대응하는 가상현실 포토북을 생성한다(단계(316)).Steps 311 to 316 of the method for generating a virtual reality photobook according to another embodiment of the present invention are fused in a parallel relationship with steps 213 to 216 after step 212 shown in FIG. 2 . and can be implemented. The virtual reality experiential learning system captures the current screen of the virtual reality experiential learning content as an image when a photo-taking event occurs at a preset screen or viewpoint according to the story of the virtual reality experiential learning content (step 311). The virtual reality experiential learning system builds a story image database by performing the image storage in the above manner during execution of the virtual reality experiential learning content (step 312). The virtual reality experiential learning system arranges the images stored in the learner image database and the images stored in the story image database in chronological order in response to the learner (step 313). The virtual reality experiential learning system reads images overlapping each other among the arranged images (step 314). The virtual reality experiential learning system excludes any one of the read duplicate images (step 315). The virtual reality experiential learning system generates a virtual reality photobook corresponding to the learner through the images arranged in the chronological order while the duplicate images are excluded (step 316).

이러한 가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 따라 학습자가 자유롭게 컨텐츠에 참여하도록 하면서도 각 학습자에 최적화된 다양한 내용과 방식의 포토북을 보다 쉽게 생성하여 제공할 수 있게 된다. According to the virtual reality photobook creation method of this virtual reality experiential learning system, it is possible to more easily create and provide photobooks with various contents and methods optimized for each learner while allowing learners to freely participate in the content.

본 발명에 따른 가상현실 포토북 생성방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The virtual reality photobook generating method according to the present invention may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the present invention, or may be known and available to those skilled in the art of computer software. Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic such as floppy disks. - includes magneto-optical media, and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, although the present invention has been described with reference to limited embodiments and drawings, the present invention is not limited to the above embodiments, and various modifications and variations from these descriptions are provided by those skilled in the art to which the present invention pertains. This is possible.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be defined by the following claims as well as the claims and equivalents.

110: 컴퓨팅 디바이스
111: 컨텐츠 실행부
112: 영상 제어부
113: 학습자 판독부
114: 포토북 생성부
115: 학습자 이미지 데이터베이스
116: 스토리 이미지 데이터베이스
121: 카메라
122: 디스플레이 수단110: computing device
111: content execution unit
112: video controller
113: learner reading unit
114: photobook generating unit
115: learner image database
116: story image database
121: camera
122: display means

Claims (5)

가상현실 체험학습 시스템의 가상현실 포토북 생성방법에 있어서,
가상현실 체험학습 컨텐츠를 실행하고, 하나 이상의 학습자를 촬영하여 상기 하나 이상의 학습자 영상을 실시간으로 상기 가상현실 체험학습 컨텐츠 화면의 특정 영역에 합성하여 재생하는 단계;
상기 학습자 또는 지도자의 사진촬영 입력이 감지되는 경우, 상기 하나 이상의 학습자 영상이 합성된 상기 가상현실 체험학습 컨텐츠 화면을 이미지로 캡쳐하는 단계;
상기 이미지에 포함된 상기 하나 이상의 학습자 각각의 정보를 판독하는 단계;
상기 판독된 각 학습자에 대응하여 상기 이미지를 각각 저장하는 단계;
상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여, 상기 각 학습자 별로 이미지가 저장된 학습자 이미지 데이터베이스를 구축하는 단계; 및
상기 학습자 이미지 데이터베이스에 저장된 각 학습자 별 이미지로 상기 각 학습자에 대응하는 가상현실 포토북을 생성하는 단계
를 포함하는 것을 특징으로 하는 가상현실 체험학습 시스템의 가상현실 포토북 생성방법.In the virtual reality photobook creation method of the virtual reality experiential learning system,
executing virtual reality experiential learning content, photographing one or more learners, and synthesizing and playing the one or more learner images in a specific area of the virtual reality experiential learning content screen in real time;
capturing the virtual reality experiential learning content screen in which the one or more learner images are synthesized as an image when a photo taking input of the learner or the leader is detected;
reading information of each of the one or more learners included in the image;
storing each of the images corresponding to each of the read learners;
constructing a learner image database in which images are stored for each learner by performing the image storage in the above manner during execution of the virtual reality experiential learning content; and
Generating a virtual reality photobook corresponding to each learner with each learner's image stored in the learner image database
Virtual reality photobook creation method of the virtual reality experiential learning system, characterized in that it comprises a. 제1항에 있어서,
상기 이미지에 포함된 상기 하나 이상의 학습자 각각의 정보를 판독하는 단계는,
상기 이미지가 포함하는 모든 얼굴영역을 검출하는 단계;
상기 검출한 각 얼굴영역의 메타데이터를 획득하는 단계;
상기 획득한 각 얼굴영역의 메타데이터를 미리 저장되어 있는 학습자 메타데이터와 비교하여 상기 이미지에 포함된 각 학습자의 정보를 판독하는 단계
를 포함하는 것을 특징으로 하는 가상현실 체험학습 시스템의 가상현실 포토북 생성방법.According to claim 1,
Reading the information of each of the one or more learners included in the image comprises:
detecting all face regions included in the image;
obtaining metadata of each detected face region;
Reading the information of each learner included in the image by comparing the acquired metadata of each facial region with the learner metadata stored in advance
Virtual reality photobook creation method of the virtual reality experiential learning system, characterized in that it comprises a. 제1항에 있어서,
상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여, 상기 각 학습자 별로 이미지가 저장된 학습자 이미지 데이터베이스를 구축하는 단계는,
제1 학습자에 대응하여 제1 개인 폴더 및 제1 단체 폴더를 각각 생성하는 단계;
상기 제1 개인 폴더에는 상기 제1 학습자만 포함된 이미지를 저장하는 단계; 및
상기 제1 단체 폴더에는 상기 제1 학습자 외에 다른 학습자도 포함된 이미지를 저장하는 단계
를 포함하는 것을 특징으로 하는 가상현실 체험학습 시스템의 가상현실 포토북 생성방법.According to claim 1,
The step of constructing a learner image database in which images are stored for each learner by performing the image storage of the above method during execution of the virtual reality experiential learning content,
creating a first personal folder and a first group folder in response to the first learner, respectively;
storing an image including only the first learner in the first personal folder; and
Storing an image including learners other than the first learner in the first group folder
Virtual reality photobook creation method of the virtual reality experiential learning system, characterized in that it comprises a. 제3항에 있어서,
상기 학습자 이미지 데이터베이스에 저장된 각 학습자 별 이미지로 상기 각 학습자에 대응하는 가상현실 포토북을 생성하는 단계는,
상기 제1 학습자에 대응하여 상기 제1 개인 폴더에 저장된 이미지만으로 상기 가상현실 포토북을 생성하는 단계;
상기 제1 학습자에 대응하여 상기 제1 단체 폴더에 저장된 이미지만으로 상기 가상현실 포토북을 생성하는 단계; 및
상기 제1 학습자에 대응하여 상기 제1 개인 폴더 및 상기 제1 단체 폴더에 저장된 모든 이미지로 상기 가상현실 포토북을 생성하는 단계
중 어느 하나 이상의 단계를 포함하는 것을 특징으로 하는 가상현실 체험학습 시스템의 가상현실 포토북 생성방법.4. The method of claim 3,
The step of generating a virtual reality photobook corresponding to each learner with an image for each learner stored in the learner image database comprises:
generating the virtual reality photobook only with images stored in the first personal folder in response to the first learner;
generating the virtual reality photobook only with images stored in the first group folder in response to the first learner; and
generating the virtual reality photobook with all images stored in the first personal folder and the first group folder in response to the first learner
Virtual reality photobook creation method of the virtual reality experiential learning system, characterized in that it comprises any one or more steps. 제1항에 있어서,
상기 가상현실 체험학습 컨텐츠의 스토리에 따라 미리 설정된 화면이나 시점에서 사진촬영 이벤트가 발생하면, 상기 가상현실 체험학습 컨텐츠의 현재 화면을 이미지로 캡쳐하는 단계;
상기 방식의 이미지 저장을 상기 가상현실 체험학습 컨텐츠의 실행 동안 수행하여 스토리 이미지 데이터베이스를 구축하는 단계;
학습자에 대응하여 상기 학습자 이미지 데이터베이스에 저장된 이미지와 상기 스토리 이미지 데이터베이스에 저장된 이미지를 시간 순서대로 배열하는 단계;
상기 배열된 이미지 중 서로 중복되는 이미지를 판독하는 단계;
상기 판독된 중복 이미지 중 어느 하나를 배제하는 단계; 및
상기 중복 이미지가 배제되면서 상기 시간 순서대로 배열된 이미지를 통해 상기 학습자에 대응하는 가상현실 포토북을 생성하는 단계
를 더 포함하는 것을 특징으로 하는 가상현실 체험학습 시스템의 가상현실 포토북 생성방법.According to claim 1,
capturing a current screen of the virtual reality experiential learning content as an image when a photo shooting event occurs at a preset screen or viewpoint according to the story of the virtual reality experiential learning content;
constructing a story image database by performing the image storage in the above manner during execution of the virtual reality experiential learning content;
arranging the images stored in the learner image database and the images stored in the story image database in chronological order corresponding to the learner;
reading images overlapping each other among the arranged images;
excluding any one of the read duplicate images; and
Generating a virtual reality photobook corresponding to the learner through the images arranged in the chronological order while the duplicate images are excluded
Virtual reality photobook creation method of the virtual reality experiential learning system, characterized in that it further comprises.
KR1020190179419A 2019-12-31 2019-12-31 Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality KR102317195B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190179419A KR102317195B1 (en) 2019-12-31 2019-12-31 Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190179419A KR102317195B1 (en) 2019-12-31 2019-12-31 Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality

Publications (2)

Publication Number Publication Date
KR20210085882A true KR20210085882A (en) 2021-07-08
KR102317195B1 KR102317195B1 (en) 2021-10-25

Family

ID=76893927

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190179419A KR102317195B1 (en) 2019-12-31 2019-12-31 Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality

Country Status (1)

Country Link
KR (1) KR102317195B1 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020025916A (en) 2002-02-09 2002-04-04 서영현 Fairy tale book marking method by using the sticker which the reader's information are printed on
KR20090013037A (en) * 2007-07-31 2009-02-04 엘지전자 주식회사 Mobile terminal and image information managing method therefor
KR20090052014A (en) * 2007-11-20 2009-05-25 삼성디지털이미징 주식회사 Method for providing automatic classification packing service by recognizing individual character in the photo-image and the kiok for providing the same service
KR20100001271A (en) * 2008-06-26 2010-01-06 삼성디지털이미징 주식회사 Apparatus and method for storing image in digital image processing device
KR20160139633A (en) * 2015-05-28 2016-12-07 주식회사 플렉싱크 An system and method for providing experiential contents using augmented reality
KR20180117379A (en) * 2017-04-19 2018-10-29 한국전자통신연구원 Device for providing augmented reality album, server for the same and method for the same
KR20190058847A (en) * 2017-11-22 2019-05-30 (주)스냅스 Photo­book production apparatus for recommending user customized photo­book services and the method thereof

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020025916A (en) 2002-02-09 2002-04-04 서영현 Fairy tale book marking method by using the sticker which the reader's information are printed on
KR20090013037A (en) * 2007-07-31 2009-02-04 엘지전자 주식회사 Mobile terminal and image information managing method therefor
KR20090052014A (en) * 2007-11-20 2009-05-25 삼성디지털이미징 주식회사 Method for providing automatic classification packing service by recognizing individual character in the photo-image and the kiok for providing the same service
KR20100001271A (en) * 2008-06-26 2010-01-06 삼성디지털이미징 주식회사 Apparatus and method for storing image in digital image processing device
KR20160139633A (en) * 2015-05-28 2016-12-07 주식회사 플렉싱크 An system and method for providing experiential contents using augmented reality
KR20180117379A (en) * 2017-04-19 2018-10-29 한국전자통신연구원 Device for providing augmented reality album, server for the same and method for the same
KR20190058847A (en) * 2017-11-22 2019-05-30 (주)스냅스 Photo­book production apparatus for recommending user customized photo­book services and the method thereof

Also Published As

Publication number Publication date
KR102317195B1 (en) 2021-10-25

Similar Documents

Publication Publication Date Title
US20160203645A1 (en) System and method for delivering augmented reality to printed books
US11463611B2 (en) Interactive application adapted for use by multiple users via a distributed computer-based system
JP2023501832A (en) Realization method, apparatus and related products for lens division
CN107423049A (en) Realize method, browser and the terminal device of online programming
Simo et al. A laboratory concept for service prototyping-Service Innovation Corner (SINCO)
Gress [digital] Visual Effects and Compositing
Alfadhli et al. Game-based learning guidelines: Designing for learning and fun
RU2652503C2 (en) Automatic filming and editing of video clip
Carrozzino et al. An immersive vr experience to learn the craft of printmaking
KR102228085B1 (en) Method for processing block coding for programming education
KR102317195B1 (en) Method Of Making Virtual Reality Photo Book By System For Playing Field Study Using Virtual Reality
Mehm et al. Introducing component-based templates into a game authoring tool
Moshayedi et al. Unity in Embedded System Design and Robotics: A Step-by-step Guide
KR20220048128A (en) Coloring book providing system based on augmented reality
Bennett et al. Teaching visual storytelling for virtual production pipelines incorporating motion capture and visual effects
Pell Envisioning holograms: design breakthrough experiences for mixed reality
Stavrev et al. Some implementations of distributed architecture for developing video games
JP2004355567A (en) Image output device, image output method, image output processing program, image distribution server and image distribution processing program
JP7465736B2 (en) Content control system, content control method, and content control program
Seligmann Creating a mobile VR interactive tour guide
JP6733027B1 (en) Content control system, content control method, and content control program
Fotaris et al. Designing Educational Escape Rooms With Generative AI: A Framework and ChatGPT Prompt Engineering Guide
WO2023189649A1 (en) Information processing system, program, and information processing method
Torkkel Suitability of Rokoko Motion Capture Products for Content Creation in Simulation Training
Jushchyshyn Immersive Media as a Catalyst for Cross-Disciplinary Collaboration in Design, Sciences, Engineering and Vocational Training in Higher Education

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant