KR102410923B1 - Ar 기술을 책에 적용한 코딩 교육 기반의 ar 콘텐츠 제공 방법, 장치, 컴퓨터 판독 가능한 기록 매체 및 컴퓨터 프로그램 - Google Patents

Abstract

본 발명의 일 실시예에 따른 콘텐츠 제공 장치가 수행하는 콘텐츠 제공 방법은 캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성된 AR 콘텐츠를 저장하는 동작; 책의 페이지를 촬영한 영상을 출력하고 상기 영상의 일 영역에 상기 페이지와 대응되는 AR 콘텐츠를 상기 영상과 함께 출력하는 동작; 사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 상기 AR 콘텐츠에 포함된 복수의 필드 중 제1 필드에 배치하는 동작; 및 상기 캐릭터가 상기 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 수행하도록 AR 콘텐츠를 제어하는 동작을 포함할 수 있다.

Description

AR 기술을 책에 적용한 코딩 교육 기반의 AR 콘텐츠 제공 방법, 장치, 컴퓨터 판독 가능한 기록 매체 및 컴퓨터 프로그램{METHOD, APPARATUS, COMPUTER-READABLE STORAGE MEDIUM AND COMPUTER PROGRAM FOR PROVIDING AUGMENTED REALITY CONTENT FOR CODING EDUCATION APPLYING AR TECHNOLOGY TO BOOK}

본 발명은 AR 기술을 책에 적용한 코딩 교육 기반의 AR 콘텐츠 제공 방법, 장치, 컴퓨터 판독 가능한 기록 매체 및 컴퓨터 프로그램에 관한 것이다.

종래의 소프트웨어 교육은 이공계 교육의 일환으로 대학에서 전문적으로 교육하여 왔었으나, 최근 4차 산업혁명시대 및 디지털 지식정보 사회로 진입함에 따라, 소프트웨어 인재 양성을 비롯해 창의적인 아이디어 중심의 미래 산업을 준비하기 위한 소프트웨어 교육의 필요성이 크게 대두되고 있다.

이에 따라, 2015년 개정 교육 과정에서는 미래 지식 정보 사회를 위한 창의 융합 인재 양성을 위해 초, 중학교 모든 학생 소프트웨어 교육을 필수적으로 받을 수 있도록 교육 연령을 낮추어 교육 대상을 확대하고 있다.

특히, 소프트웨어 교육의 기본이자 필수적 과정인 코딩 교육은 다양한 지식을 종합하여 사고하는 융복합교육(STEAM) 요소와 논리적으로 사고하는 컴퓨팅적 사고력(Computational Thinking: CT)을 필요로 하여, 창의적이고 논리적인 사고방식을 통한 문제해결 능력을 기르기 위해서는 조기에 코딩에 익숙해지고 다양한 경험을 통해 미래에 대한 상상력과 기술력을 기를 수 있는 경험을 제공하는 것이 중요하다.

따라서, 코딩 교육 대상에게 추상적 아이디어로부터 실제 소프트웨어로 구현하기까지 필요한 논리적 사고 방식과 창의적 문제 해결 능력을 함양하기 위해서, 코딩 과정을 쉽게 이해할 수 있으면서 논리적 사고력이 자연스레 함양될 수 있는 코딩 교육용 콘텐츠의 개발이 필요하다.

한국 공개특허공보 제10-2019-0098116호: 증강현실 기반 코딩교육 옴니에듀 시스템

본 발명의 실시예에서 해결하고자 하는 과제는 아이들이 쉽게 접할 수 있는 실물 형태의 책(ex. 동화책, 팝업북 등)에 AR(Augmented Reality) 기술을 결합한 스토리 게임 방식의 코딩 교육 콘텐츠를 제공하는 것이다. 이를 통해, 아이들이 코딩 알고리즘의 개념이 접목된 AR 콘텐츠를 책을 통해 접하게 함으로써, 코딩의 원리를 자연스럽게 파악할 수 있게 하고, 논리적이고 창의적인 사고력을 함양하는 기술을 제공하고자 한다.

다만, 본 발명의 실시예가 이루고자 하는 기술적 과제는 이상에서 언급한 과제로 제한되지 않으며, 이하에서 설명할 내용으로부터 통상의 기술자에게 자명한 범위 내에서 다양한 기술적 과제가 도출될 수 있다.

본 발명의 일 실시예에 따른 콘텐츠 제공 장치가 수행하는 콘텐츠 제공 방법은 캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성된 AR 콘텐츠를 저장하는 동작; 책의 페이지를 촬영한 영상을 출력하고, 상기 영상의 일 영역에 상기 페이지와 대응되는 AR 콘텐츠를 상기 영상과 함께 출력하는 동작; 사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 상기 AR 콘텐츠에 포함된 복수의 필드 중 제1 필드에 배치하는 동작; 및 상기 캐릭터가 상기 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 수행하도록 AR 콘텐츠를 제어하는 동작을 포함할 수 있다.

또한, 상기 저장하는 동작은 상기 책의 소정 페이지를 특정하는 인덱싱 정보를 상기 AR 콘텐츠와 매핑하여 저장하는 동작을 포함할 수 있다.

또한, 상기 책은 적어도 어느 하나의 페이지를 펼치면 장면 또는 캐릭터가 묘사된 그림이 입체적으로 튀어나오는 팝업북이고, 상기 그림의 아래 방향에는 왼쪽 페이지와 오른쪽 페이지에 걸쳐 소정의 문양 이미지가 인쇄되어 있고, 상기 출력하는 동작은 상기 문양 이미지에 대한 인식을 기초로 상기 문양 이미지를 포함하는 영역에 상기 AR 콘텐츠를 출력하는 동작을 포함할 수 있다.

또한, 상기 페이지는 소정의 문양 이미지가 인쇄되어 있고, 상기 출력하는 동작은 상기 문양 이미지가 촬영되어 상기 영상에서 나타나는 크기에 대한 인식을 기초로 상기 AR 콘텐츠가 출력될 위치 및 크기를 결정하여 상기 AR 콘텐츠를 출력하는 동작을 포함할 수 있다.

또한, 상기 출력하는 동작은 상기 문양 이미지에 대한 인식을 기초로 상기 펼쳐진 페이지를 특정하여 상기 펼쳐진 페이지와 대응하는 AR 콘텐츠를 검색하는 동작을 포함할 수 있다.

또한, 상기 AR 콘텐츠는 상기 복수의 필드 별로 배치되어야 할 코딩 블록의 개수에 대한 개수 정보를 포함하고, 상기 출력하는 동작은 개수 정보를 기초로 상기 AR 콘텐츠에 포함된 복수의 필드 각각에 배치되어야 할 코딩 블록의 개수를 출력하는 동작을 포함할 수 있다.

또한, 상기 배치하는 동작은 상기 사용자의 입력에 기초하여 상기 코딩 블록을 상기 복수의 필드 중 제1 필드에 배치하고, 상기 제1 필드에 대해 저장된 개수 정보에 상기 배치된 코딩 블록의 개수를 차감한 수를 상기 제1 필드에 출력하는 동작을 포함할 수 있다.

또한, 상기 배치하는 동작은 상기 사용자의 입력에 기초하여 상기 코딩 블록을 상기 복수의 필드 중 제1 필드에 배치하면, 상기 코딩 블록을 특정하는 식별 정보를 상기 제1 필드에 출력하는 동작을 포함할 수 있다.

또한, 상기 배치하는 동작은 상기 제1 필드에 복수 개의 코딩 블록이 배치된 경우, 상기 사용자가 상기 복수 개의 코딩 블록을 배치한 순서대로 상기 복수 개의 코딩 블록을 특정하는 각 식별 정보를 상기 제1 필드에 출력하는 동작을 포함할 수 있다.

또한, 상기 배치하는 동작은 상기 목록에 출력된 코딩 블록에 대한 사용자의 드래그 입력을 감지하고, 드래그 입력에 의해 상기 복수의 필드 중 제1 필드로 드래그되어 상기 사용자의 드래그 입력이 종료되면, 상기 드래그 입력이 감지된 코딩 블록을 상기 제1 필드에 배치하는 동작을 포함할 수 있다.

또한, 상기 제어하는 동작은 상기 캐릭터가 상기 복수의 필드 중 어느 하나의 필드를 경유하는 경우, 상기 경유하는 필드에 배치된 코딩 블록의 정보 및 순서에 따라 상기 캐릭터를 제어하여, 상기 캐릭터가 상기 출발지로부터 상기 목적지로 도달하는 경우 상기 AR 콘텐츠의 미션을 클리어한 것으로 저장하고, 다음 페이지에 대한 미션을 수행할 수 있는 권한을 상기 사용자에게 부여하는 동작을 포함할 수 있다.

또한, 상기 제어하는 동작은 상기 캐릭터가 상기 목적지로 도달하지 못하는 경우, 잘못된 블록이 배치된 필드를 식별시키는 오류 정보를 출력할 수 있다.

또한, 상기 오류 정보는 필드에 배치된 코딩 블록의 수가 부족하다는 오류 정보, 필드에 배치된 코딩 블록의 순서가 잘못되었다는 오류 정보, 및 필드에 배치된 코딩 블록의 정보가 잘못되었다는 오류 정보를 포함할 수 있다.

또한, 상기 제어하는 동작은 상기 캐릭터가 상기 복수의 필드 중 어느 하나의 필드를 경유하다가 NPC(Non-Player Character)를 마주하는 경우, 상기 NPC와의 인터랙티브 플레이에 의한 사용자의 선택에 따라 결정되는 제2 AR 콘텐츠를 출력하는 동작을 포함할 수 있다.

본 발명의 일 실시예에 따른 콘텐츠 제공 장치는 캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성된 AR 콘텐츠를 저장하는 저장부; 책의 페이지를 촬영한 영상을 출력하고, 상기 영상의 일 영역에 상기 페이지와 대응되는 AR 콘텐츠를 상기 영상과 함께 출력하는 출력부; 사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 상기 AR 콘텐츠에 포함된 복수의 필드 중 제1 필드에 배치하는 블록 배치부; 및 상기 캐릭터가 상기 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 수행하도록 AR 콘텐츠를 제어하는 제어부를 포함할 수 있다.

본 발명의 실시예에 따르면 책의 각 페이지의 이야기와 대응되는 AR 콘텐츠를 제공할 수 있고, 사용자는 AR 콘텐츠의 미션을 해결하기 위한 코딩 블록을 AR 콘텐츠의 필드에 배치하여 각 페이지에서 요구되는 과제를 해결해가며 이야기를 진행시킬 수 있다. 사용자는 자신이 설계한 코딩 정보를 통해 과제를 해결해가며 흥미와 재미를 느낄 수 있고, 동시에 코딩 알고리즘의 원리를 자연스럽게 학습하여 논리적이고 창의적인 사고력을 함양할 수 있다.

이 외에, 본 문서를 통해 직접적 또는 간접적으로 파악되는 다양한 효과들이 제공될 수 있다.

도 1은 본 발명의 일 실시예에 따른 콘텐츠 제공 장치의 기능 블록도이다.
도 2는 본 발명의 일 실시예에 따른 콘텐츠 제공 장치와 연동되는 책의 예시도이다.
도 3은 본 발명의 일 실시예에 따른 콘텐츠 제공 장치가 책을 촬영하여 영상 및 AR 콘텐츠를 출력하는 동작의 예시도이다.
도 4는 본 발명의 일 실시예에 따른 콘텐츠 제공 장치가 책을 촬영하여 출력하는 AR 콘텐츠의 예시도이다.
도 5는 본 발명의 일 실시예에 따른 콘텐츠 제공 장치가 AR 콘텐츠에 포함된 복수의 필드에 배치된 코딩 정보 및 순서를 출력하는 동작의 예시도이다.
도 6은 본 발명의 일 실시예에 따른 콘텐츠 제공 방법의 흐름도이다.
도 7은 본 발명의 일 실시예에 따른 콘텐츠 제공 장치가 제공하는 AR 콘텐츠를 진행하는 사용자의 실제 예시도이다.

본 발명의 이점 및 특징,　그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다.　　그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있으며,　단지 본 실시예들은 본 발명의 개시가 완전하도록 하고,　본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며,　본 발명의 범주는 청구항에　의해 정의될 뿐이다.

본 발명의 실시예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명은 실제로 필요한 경우 외에는 생략될 것이다.　　그리고 후술되는 용어들은 본 발명의 실시예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다.　　그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.

도면에 표시되고 아래에 설명되는 기능 블록들은 가능한 구현의 예들일 뿐이다. 다른 구현들에서는 상세한 설명의 사상 및 범위를 벗어나지 않는 범위에서 다른 기능 블록들이 사용될 수 있다. 또한 본 발명의 하나 이상의 기능 블록이 개별 블록들로 표시되지만, 본 발명의 기능 블록 중 하나 이상은 동일 기능을 실행하는 다양한 하드웨어 및 소프트웨어 구성의 조합일 수 있다.

또한 어떤 구성 요소들을 포함한다는 표현은 개방형의 표현으로서 해당 구성 요소들이 존재하는 것을 단순히 지칭할 뿐이며, 추가적인 구성 요소들을 배제하는 것으로 이해되어서는 안 된다.

나아가 어떤 구성 요소가 다른 구성 요소에 연결되어 있다거나 접속되어 있다고 언급될 때에는, 그 다른 구성 요소에 직접적으로 연결 또는 접속되어 있을 수도 있지만, 중간에 다른 구성 요소가 존재할 수도 있다고 이해되어야 한다.

또한 '제1, 제2' 등과 같은 표현은 복수의 구성을 구분하기 위한 용도로만 사용된 표현으로써, 구성들 사이의 순서나 기타 특징들을 한정하지 않는다.

본 발명의 실시예에 따른 콘텐츠 제공 장치(100)는 실물 형태의 책에 AR(Augmented Reality) 기술을 결합한 스토리 게임 방식의 코딩 교육 콘텐츠를 제공할 수 있다. 예를 들어, 콘텐츠 제공 장치(100)는 책을 촬영한 영상을 출력하면서, 가상의 AR 콘텐츠를 실제 책의 영상과 함께 출력할 수 있다. 사용자는 AR 콘텐츠에서 요구되는 코딩 정보를 스스로 선택하여 배치하고, 자신이 설계한 코드를 실행시켜 AR 콘텐츠의 과제를 해결해 나가게 되며, 동시에 책의 이야기를 진행해 나갈 수 있다.

이하, 본 발명의 실시예에 따른 콘텐츠 제공 장치(100)의 구성 및 동작을 도면들을 참조하여 설명하도록 한다.

도 1은 본 발명의 일 실시예에 따른 콘텐츠 제공 장치(100)의 기능 블록도이다.

도 1을 참조하면, 본 발명의 일 실시예에 따른 콘텐츠 제공 장치(100)는 입출력 인터페이스(110), 저장부(120), 출력부(130), 블록 배치부(140) 및 제어부(150)를 포함할 수 있다. 본 발명의 일 실시예에 따른 콘텐츠 제공 장치(100)는 하나 이상의 프로세서를 포함할 수 있고, 하나 이상의 프로세서는 도 1에 포함된 기능 블록들이 후술할 동작들을 수행하도록 제어할 수 있다. 이하, 각 기능 블록이 수행하는 동작을 설명한다.

입출력 인터페이스(110)는 사용자의 입력 또는 외부 정보를 획득하고, 입력된 정보를 처리한 결과를 출력하는 하드웨어 인터페이스 또는 소프트웨어 인터페이스를 포함할 수 있다. 예를 들어, 입출력 인터페이스(110)는 객체를 촬영하여 영상 정보를 생성하는 카메라와 같은 하드웨어 모듈을 포함할 수 있다. 예를 들어, 입출력 인터페이스(110)는 사용자의 물리적 입력을 획득하고 영상을 출력하는 터치 디스플레이 패널과 같은 하드웨어 모듈을 포함할 수 있다. 예를 들어, 입출력 인터페이스(110)는 외부 장치와 정보를 송수신하는 유무선 네트워크 통신 모듈을 포함할 수 있다.

입출력 인터페이스(110)는 책(ex. 동화책, 팝업북 등)의 정보를 획득하여, 후술할 동작에 따라 콘텐츠 제공 장치(100)가 연산한 결과를 출력할 수 있다. 본 발명의 실시예에 따른 책은 책장을 폈을 때 장면이 묘사된 그림이 입체적으로 튀어나오는 팝업북을 예시하여 설명한다. 다만, 콘텐츠 제공 장치(100)와 상호 작용하는 책의 종류가 실시예의 예시에 한정되는 것은 아니고, 콘텐츠 제공 장치(100)는 후술할 동작이 적용될 수 있는 다양한 종류의 책과 연동하여 동작할 수 있다.

저장부(120)는 촬영하는 객체 상에 출력할 AR(Augmented Reality, 증강현실) 콘텐츠를 저장할 수 있다. AR이란 실제 객체를 촬영한 영상에 3차원 가상 이미지를 겹쳐서 하나의 영상으로 출력하는 기술로서, AR 콘텐츠는 실체 객체를 촬영한 영상과 함께 출력될 수 있는 가상의 이미지 또는 영상을 포함할 수 있다.

일 예로, AR 콘텐츠는 도 4와 같이 캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성될 수 있다. AR 콘텐츠를 구성하는 복수의 필드는 각 필드가 서로 연결되는 방향 및 각 필드의 종류가 연동될 책의 각 페이지 별로 상이하도록 구성될 수 있다. 저장부(120)는 책의 소정 페이지를 특정하는 인덱싱 정보를 해당 페이지에 대응되는 AR 콘텐츠와 매핑하여 저장할 수 있다.

일 예로, 필드의 종류는 캐릭터가 출발하게 되는 출발지인 출발지 필드, 캐릭터가 방향을 올바르게 설정함에 따라 통과 가능한 제1 필드, 캐릭터가 통과 시 게임 오버되는 제2 필드, 장애물(ex. 몬스터)가 존재하는 제3 필드, NPC(Non-Player Character)가 존재하는 제4 필드 및 캐릭터가 도착해야 하는 목적지인 목적지 필드를 포함할 수 있다. 필드는 사각형 형태일 수 있고, 필드의 한 면에는 적어도 하나의 다른 필드가 연결되도록 필드가 연결될 수 있다.

예를 들어, 복수의 필드는 "출발지 필드 - 제1 필드 - 제2 필드 - 제3 필드 - 도착지 필드"가 일직선으로 연결된 형태로 구성될 수 있다. 또한, 도 4에 도시된 구성과 같이, 복수의 필드 중 어느 하나의 필드가 90도로 꺾이는 형태로 구성될 수 있다.

저장부(120)는 콘텐츠 제공 장치(100)의 내부에 하드웨어 형태의 메모리로 구성되거나, 또는 콘텐츠 제공 장치(100)의 외부에 위치하는 클라우드 데이터베이스와 연동되는 모듈 형태로 구성될 수 있다.

출력부(130)는 입출력 인터페이스(110)에 출력될 영상 정보 또는 AR 콘텐츠를 제어할 수 있다. 출력부(130)는 책의 페이지를 촬영한 영상을 출력하고, 영상의 일 영역에 페이지와 대응되는 AR 콘텐츠를 영상과 함께 출력할 수 있다.

이하, 콘텐츠 제공 장치(100)가 촬영하는 대상 객체인 책의 예시를 도 2와 함께 설명하고, 콘텐츠 제공 장치(100)가 영상 및 AR 콘텐츠를 출력하는 예시를 도 3 및 도 4와 함께 설명한다.

도 2는 본 발명의 일 실시예에 따른 콘텐츠 제공 장치(100)와 연동되는 책의 예시도이다.

도 2를 참조하면, 일 실시예에 따른 책은 페이지를 펼치면 장면 또는 캐릭터가 묘사된 팝업 그림(210)이 입체적으로 튀어나오는 팝업북일 수 있다. 일 실시예에 따른 책의 각 페이지에는 소정의 문양 이미지가 인쇄되어 있을 수 있다. 예를 들어, 도 2의 팝업 그림(210)의 아래 방향에 왼쪽 페이지와 오른쪽 페이지에 걸쳐 소정의 문양 이미지(230)가 인쇄될 수 있다. 일 실시예에 따른 책은 페이지 위에 레이어된 그림 부분을 사용자가 직접 끌어당겨 입체적으로 튀어나오는 팝업 그림(220)을 포함할 수 있다.

도 3은 본 발명의 일 실시예에 따른 콘텐츠 제공 장치(100)가 책을 촬영하여 영상 및 AR 콘텐츠를 출력하는 동작의 예시도이다.

도 3을 참조하면, 출력부(130)는 책의 페이지를 촬영한 영상(111)을 입출력 인터페이스(110)가 출력하도록 제어할 수 있고, 펼쳐진 페이지와 대응되는 AR 콘텐츠(112)를 영상(111)과 함께 출력하도록 입출력 인터페이스(110)를 제어할 수 있다.

일 예로, 출력부(130)는 책의 페이지에 인쇄된 문양 이미지(230)에 대한 인식을 기초로 문양 이미지(230)가 인식되는 영역에 AR 콘텐츠(112)를 출력할 수 있다. 출력부(130)는 문양 이미지(230)가 촬영되어 영상에서 나타나는 크기에 대한 인식을 기초로 AR 콘텐츠(112)가 출력될 위치 및 크기를 결정하여 AR 콘텐츠(112)를 출력할 수 있다. 예를 들어, 출력부(130)는 문양 이미지(230)가 영상에서 출력되는 길이 또는 면적에 대비하여, 출력될 AR 콘텐츠(112)의 길이 또는 면적이 기 설정된 비율을 갖도록 결정하여, AR 콘텐츠(112)를 입출력 인터페이스(110)의 화면에 출력할 수 있다.

일 예로, 출력부(130)는 문양 이미지(230)에 대한 인식을 기초로 펼쳐진 페이지를 특정할 수 있고, 펼쳐진 페이지와 대응하는 AR 콘텐츠(112)를 검색하여 출력할 수 있다. 이 경우, 각 페이지가 식별될 수 있도록 각 페이지마다 상이한 문양 이미지(230)가 인쇄될 수 있다. 출력부(130)는 펼쳐진 페이지에 인쇄된 문양 이미지(230)를 인식하여 페이지를 특정하고, 해당 페이지에 대응하는 인덱싱 번호를 검색하여 해당 인덱싱 번호에 매핑된 AR 콘텐츠(112)를 검색하여 출력할 수 있다. 또는, 출력부(130)는 사용자가 직접 입력한 페이지 정보를 기초로 입력된 페이지 정보와 대응되는 AR 콘텐츠(112)를 검색하여 출력할 수 있다.

일 예로, 출력부(130)는 AR 콘텐츠(112)에 포함된 복수의 필드에서 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록(114)에 대한 목록(113)을 영상(111)과 함께 출력할 수 있다.

도 4는 본 발명의 일 실시예에 따른 콘텐츠 제공 장치(100)가 책을 촬영하여 출력하는 AR 콘텐츠의 예시도이다.

도 4에 도시된 AR 콘텐츠를 구성하는 복수의 필드는 캐릭터가 출발하게 되는 출발지인 출발지 필드, 캐릭터가 향하는 방향을 설정함에 따라 통과 가능한 필드, 몬스터가 존재하는 필드 및 캐릭터가 도착해야 하는 목적지인 목적지 필드를 포함하고 있다. 도 4의 AR 콘텐츠를 구성하는 필드의 한 면에는 적어도 하나의 다른 필드가 연결되고, 복수의 필드 중 어느 하나의 필드는 좌측과 상단에 각각의 다른 필드가 연결되어90도로 꺾이는 형태로 구성될 수 있다.

블록 배치부(140)는 사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 AR 콘텐츠에 포함된 복수의 필드 중 어느 하나의 필드에 배치할 수 있다. 코딩 블록은 캐릭터가 소정의 동작을 취하도록 하는 코딩 정보를 포함할 수 있다.

일 예로, 코딩 정보는 캐릭터가 향하는 전방의 필드로 캐릭터를 전진시키는 제1 코딩 정보, 캐릭터를 점프시켜 캐릭터가 향하는 전방의 필드를 뛰어넘는 제2 코딩 정보, 캐릭터가 향하는 방향을 왼쪽으로 회전시키는 제3 코딩 정보, 캐릭터가 향하는 방향을 오른쪽으로 회전시키는 제4 코딩 정보, 캐릭터가 전방의 몬스터 또는 장애물을 공격하여 전방의 몬스터 또는 장애물을 제거하는 제5 코딩 정보를 포함할 수 있다.

도 4를 참조하면, 출력부(130)는 각 필드 별로 배치되어야 할 코딩 블록의 개수를 각각의 필드 상에 출력할 수 있다. 사용자는 각각의 필드에 표시된 개수를 참조하여, 필드마다 몇 개의 코딩 블록의 배치가 요구되는 지 참조할 수 있다. 이 경우, AR 콘텐츠는 각각의 필드 별로 배치되어야 할 코딩 블록의 개수에 대한 개수 정보를 포함할 수 있다.

블록 배치부(140)는 사용자의 입력에 기초하여 코딩 블록을 복수의 필드 중 제1 필드에 배치할 수 있다. 예를 들어, 블록 배치부(140)는 목록에 출력된 코딩 블록에 대한 사용자의 드래그 입력을 감지할 수 있고, 드래그 입력에 의해 복수의 필드 중 제1 필드로 드래그 되어 사용자의 드래그 입력 감지가 종료되면, 드래그 입력이 종료된 위치의 제1 필드에 사용자가 선택한 코딩 블록을 배치할 수 있다.

일 예로, 블록 배치부(140)는 사용자에 의해 제1 필드에 코딩 블록이 배치되면, 제1 블록에 대해 저장된 개수 정보에서 사용자에 의해 배치된 코딩 블록의 개수를 차감한 수를 제1 필드 상에 출력할 수 있다. 예를 들어, 제1 필드에 배치되어야 할 코딩 블록의 개수가 2개인데, 현재 사용자가 제1 필드에 코딩 블록을 1개 배치한 상태라면, 2개에서 1개를 차감하여 제1 필드에 "1"를 출력할 수 있다.

일 예로, 블록 배치부(140)는 사용자가 코딩 블록을 제1 필드에 배치하면, 도 4와 같이 사용자가 배치한 코딩 블록을 특정하는 식별 정보(ex. 칼 모양 아이콘)를 제1 필드 상에 출력할 수 있다. 블록 배치부(140)는 사용자가 코딩 블록을 제1 필드에 복수 개 배치하면, 제1 필드에 복수 개의 코딩 블록을 특정하는 각 식별 정보를 사용자가 배치한 순서 대로 제1 필드 상에 출력할 수 있다.

도 5는 본 발명의 일 실시예에 따른 콘텐츠 제공 장치(100)가 AR 콘텐츠에 포함된 복수의 필드에 배치된 코딩 정보 및 순서를 출력하는 동작의 예시도이다.

도 5를 참조하면, 블록 배치부(140)는 복수의 필드에 배치된 코딩 정보가 실행되는 순서에 대한 코드 진행 정보를 생성하여 입출력 인터페이스(110)에 출력할 수 있다. 코드 진행 정보는 복수의 필드가 배치된 형태와 함께, 각 필드 별로 배치된 코딩 블록의 정보를 순서대로 표시하여 생성될 수 있다. 사용자는 출력된 코드 진행 정보를 참조하여 코딩 알고리즘의 흐름을 파악할 수 있고, 미션을 성공하지 못한 경우 오류 검출을 위해 코드 진행 정보를 참조할 수 있다.

도 5의 코드 진행 정보를 참조하면, AR 콘텐츠를 구성하는 복수의 필드는 함수들을 의미하고, 필드가 연결된 순서는 함수들이 실행되는 순서를 의미할 수 있다. 또한, 각 필드 내부의 코딩 정보는 함수 내부에서 실행되어야 하는 명령어문을 의미하고, 캐릭터의 위치는 코드가 실행되는 순서 및 실행되는 위치를 의미할 수 있다. 이에 따라, 사용자는 자신이 배치한 코딩 블록에 따라 캐릭터가 제어되는 모습을 보고, 자연스럽게 코딩 알고리즘의 동작을 이해할 수 있다. 또한, 사용자는 자신이 배치한 코딩 블록에 의해 캐릭터가 과제를 수행하지 못하는 경우, 과제 수행에 대한 실패의 원인이 된 코딩 블록의 위치를 확인할 수 있으므로 디버깅의 개념을 자연스럽게 이해할 수 있다.

제어부(150)는 각 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 캐릭터가 수행하도록 AR 콘텐츠를 제어할 수 있다.

일 예로, 제어부(150)는 특정 필드에 복수의 코딩 블록이 배치되어 있다면, 해당 필드에 코딩 블록이 배치된 순서대로 하나의 필드에서 캐릭터에 대해 복수의 동작을 수행하도록 제어할 수 있다. 예를 들어, 캐릭터가 도달한 필드에 2개의 코딩 블록이 배치되어 있고, 배치된 코딩 블록의 정보 및 순서가 "Turn left, Forward"라면, 제어부(150)는 캐릭터가 향하는 방향을 "왼쪽으로 회전시키고, 전진"하도록 제어할 수 있다. 또한, 배치된 코딩 블록의 정보 및 순서가 "Attack, Forward"라면, 제어부(150)는 캐릭터가 "몬스터를 공격하고, 전진" 하도록 제어하여 전방의 장애물을 제거하고 다음 필드로 진입하도록 제어할 수 있다.

일 예로, 제어부(150)는 캐릭터가 복수의 필드 중 어느 하나의 필드를 경유하다가, NPC(Non-Player Character)를 포함하는 필드를 마주하는 경우, NPC와의 인터랙티브 플레이에 의한 사용자의 선택에 따라 결정되는 제2 AR 콘텐츠를 출력할 수 있다. 예를 들어, NPC는 기 저장된 대화형 인터랙티브 플레이를 출력할 수 있고, NPC와의 대화에 대한 응답으로 사용자가 선택하는 문항에 따라 다음 스토리가 달라지거나 다음 미션이 달라지도록 제어할 수 있다. 제2 AR 콘텐츠는 처음 출력된 AR 콘텐츠와 상이하도록 구성될 수 있다.

일 예로, 제어부(150)는 코딩 블록의 정보 및 순서에 따라 캐릭터가 출발지로부터 목적지로 도달하는 경우, AR 콘텐츠의 미션을 클리어한 것으로 저장할 수 있고, 다음 페이지에 대한 미션을 수행할 수 있는 권한을 사용자에게 부여할 수 있다.

일 예로, 제어부(150)는 코딩 블록의 정보 및 순서에 따라 캐릭터가 출발지로부터 목적지로 도달하지 못하는 경우, 잘못된 블록이 배치된 필드를 식별시키는 오류 정보를 출력할 수 있다. 예를 들어, 제어부(150)는 도 5의 코드 진행 정보에 오류가 검출된 필드를 표시할 수 있다. 예를 들어, 오류 정보는 필드에 배치된 코딩 블록의 수가 부족하다는 오류 정보, 필드에 배치된 코딩 블록의 순서가 잘못되었다는 오류 정보, 및 필드에 배치된 코딩 블록의 정보가 잘못되었다는 오류 정보를 포함할 수 있다.

도 6은 본 발명의 일 실시예에 따른 콘텐츠 제공 방법의 흐름도이다. 도 6에 따른 콘텐츠 제공 방법의 각 단계는 도 1을 통해 설명된 콘텐츠 제공 장치(100)에 의해 수행될 수 있으며, 각 단계를 설명하면 다음과 같다.

S1010 동작에서, 저장부(120)는 캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성된 AR 콘텐츠를 저장할 수 있다.

S1020 동작에서, 출력부(130)는 책의 페이지를 촬영한 영상을 출력하고, 영상의 일 영역에 촬영중인 페이지와 대응되는 AR 콘텐츠를 영상과 함께 출력할 수 있다.

S1030 동작에서, 블록 배치부(140)는 사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 AR 콘텐츠에 포함된 복수의 필드 중 어느 하나의 필드에 배치할 수 있다.

S1040 동작에서, 제어부(150)는 캐릭터가 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 수행하도록 AR 콘텐츠를 제어할 수 있다.

한편, 상술한 각 단계의 주체가 해당 단계를 실시하기 위한 구체적 동작은 도 1 내지 도 5와 함께 설명하였으므로 중복된 설명은 생략한다.

도 7은 본 발명의 일 실시예에 따른 콘텐츠 제공 장치(100)가 제공하는 AR 콘텐츠를 진행하는 사용자의 실제 예시도이다.

상술한 실시예에 따르면, 책의 각 페이지의 이야기와 대응되는 AR 콘텐츠를 제공할 수 있고, 사용자는 AR 콘텐츠의 미션을 해결하기 위한 코딩 블록을 AR 콘텐츠의 필드에 배치하여 각 페이지에서 요구되는 과제를 해결해가며 이야기를 진행시킬 수 있다. 사용자는 자신이 설계한 코딩 정보를 통해 과제를 해결해가며 흥미와 재미를 느낄 수 있고, 동시에 코딩 알고리즘의 원리를 자연스럽게 학습하여 논리적이고 창의적인 사고력을 함양할 수 있다.

상술한 본 발명의 실시예들은 다양한 수단을 통해 구현될 수 있다. 예를 들어, 본 발명의 실시예들은 하드웨어, 펌웨어(firmware), 소프트웨어 또는 그것들의 결합 등에 의해 구현될 수 있다.

하드웨어에 의한 구현의 경우, 본 발명의 실시예들에 따른 방법은 하나 또는 그 이상의 ASICs(Application Specific Integrated Circuits), DSPs(Digital Signal Processors), DSPDs(Digital Signal Processing Devices), PLDs(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), 프로세서, 컨트롤러, 마이크로 컨트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.

펌웨어나 소프트웨어에 의한 구현의 경우, 본 발명의 실시예들에 따른 방법은 이상에서 설명된 기능 또는 동작을 수행하는 모듈, 절차 또는 함수 등의 형태로 구현될 수 있다. 소프트웨어 코드 등이 기록된 컴퓨터 프로그램은 컴퓨터 판독 가능 기록 매체 또는 메모리 유닛에 저장되어 프로세서에 의해 구동될 수 있다. 메모리 유닛은 프로세서 내부 또는 외부에 위치하여, 이미 공지된 다양한 수단에 의해 프로세서와 데이터를 주고받을 수 있다.

또한 본 발명에 첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 인코딩 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 인코딩 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방법으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 블록도의 각 블록 및 흐름도의 각 단계에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.

더불어 각 블록 또는 각 단계는 특정된 논리적 기능을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또한, 몇 가지 대체 실시예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들 또는 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.

이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (17)

1. 콘텐츠 제공 장치가 수행하는 콘텐츠 제공 방법에 있어서,
   캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성된 AR 콘텐츠를 저장하는 동작;
   책의 페이지를 촬영한 영상을 출력하고, 상기 영상의 일 영역에 상기 페이지와 대응되는 AR 콘텐츠를 상기 영상과 함께 출력하는 동작;
   사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 상기 AR 콘텐츠에 포함된 복수의 필드 중 제1 필드에 배치하는 동작; 및
   상기 캐릭터가 상기 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 수행하도록 AR 콘텐츠를 제어하는 동작을 포함하고,
   상기 AR 콘텐츠는,
   상기 복수의 필드 별로 배치되어야 할 코딩 블록의 개수에 대한 개수 정보를 포함하고,
   상기 출력하는 동작은,
   상기 개수 정보를 기초로 상기 AR 콘텐츠에 포함된 복수의 필드 각각에 배치되어야 할 코딩 블록의 개수를 출력하는 동작을 포함하는,
   콘텐츠 제공 방법.
   
2. 제1항에 있어서,
   상기 저장하는 동작은,
   상기 책의 소정 페이지를 특정하는 인덱싱 정보를 상기 AR 콘텐츠와 매핑하여 저장하는 동작을 포함하는,
   콘텐츠 제공 방법.
   
3. 제1항에 있어서,
   상기 책은,
   적어도 어느 하나의 페이지를 펼치면 장면 또는 캐릭터가 묘사된 그림이 입체적으로 튀어나오는 팝업북이고, 상기 그림의 아래 방향에는 왼쪽 페이지와 오른쪽 페이지에 걸쳐 소정의 문양 이미지가 인쇄되어 있고,
   상기 출력하는 동작은,
   상기 문양 이미지에 대한 인식을 기초로 상기 문양 이미지를 포함하는 영역에 상기 AR 콘텐츠를 출력하는 동작을 포함하는,
   콘텐츠 제공 방법.
   
4. 제1항에 있어서,
   상기 페이지는 소정의 문양 이미지가 인쇄되어 있고,
   상기 출력하는 동작은,
   상기 문양 이미지가 촬영되어 상기 영상에서 나타나는 크기에 대한 인식을 기초로 상기 AR 콘텐츠가 출력될 위치 및 크기를 결정하여 상기 AR 콘텐츠를 출력하는 동작을 포함하는,
   콘텐츠 제공 방법.
   
5. 제4항에 있어서,
   상기 출력하는 동작은,
   상기 문양 이미지에 대한 인식을 기초로 상기 책에서 펼쳐진 페이지를 특정하여 상기 펼쳐진 페이지와 대응하는 AR 콘텐츠를 검색하는 동작을 포함하는,
   콘텐츠 제공 방법.
   
6. 삭제
7. 제1항에 있어서,
   상기 배치하는 동작은,
   상기 사용자의 입력에 기초하여 상기 코딩 블록을 상기 복수의 필드 중 제1 필드에 배치하고, 상기 제1 필드에 대해 저장된 개수 정보에 상기 배치된 코딩 블록의 개수를 차감한 수를 상기 제1 필드에 출력하는 동작을 포함하는,
   콘텐츠 제공 방법.
   
8. 제1항에 있어서,
   상기 배치하는 동작은,
   상기 사용자의 입력에 기초하여 상기 코딩 블록을 상기 복수의 필드 중 제1 필드에 배치하면, 상기 코딩 블록을 특정하는 식별 정보를 상기 제1 필드에 출력하는 동작을 포함하는,
   콘텐츠 제공 방법.
   
9. 제8항에 있어서,
   상기 배치하는 동작은,
   상기 제1 필드에 복수 개의 코딩 블록이 배치된 경우, 상기 사용자가 상기 복수 개의 코딩 블록을 배치한 순서대로 상기 복수 개의 코딩 블록을 특정하는 각 식별 정보를 상기 제1 필드에 출력하는 동작을 포함하는,
   콘텐츠 제공 방법.
   
10. 제1항에 있어서,
    상기 배치하는 동작은,
    상기 영상에 출력된 코딩 블록에 대한 사용자의 드래그 입력을 감지하고, 드래그 입력에 의해 상기 복수의 필드 중 제1 필드로 드래그되어 상기 사용자의 드래그 입력이 종료되면, 상기 드래그 입력이 감지된 코딩 블록을 상기 제1 필드에 배치하는 동작을 포함하는,
    콘텐츠 제공 방법.
    
11. 콘텐츠 제공 장치가 수행하는 콘텐츠 제공 방법에 있어서,
    캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성된 AR 콘텐츠를 저장하는 동작;
    책의 페이지를 촬영한 영상을 출력하고, 상기 영상의 일 영역에 상기 페이지와 대응되는 AR 콘텐츠를 상기 영상과 함께 출력하는 동작;
    사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 상기 AR 콘텐츠에 포함된 복수의 필드 중 제1 필드에 배치하는 동작; 및
    상기 캐릭터가 상기 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 수행하도록 AR 콘텐츠를 제어하는 동작을 포함하고,
    상기 제어하는 동작은,
    상기 캐릭터가 상기 복수의 필드 중 어느 하나의 필드를 경유하는 경우, 상기 경유하는 필드에 배치된 코딩 블록의 정보 및 순서에 따라 상기 캐릭터를 제어하여, 상기 캐릭터가 상기 출발지로부터 상기 목적지로 도달하는 경우 상기 AR 콘텐츠의 미션을 클리어한 것으로 저장하고, 다음 페이지에 대한 미션을 수행할 수 있는 권한을 상기 사용자에게 부여하는 동작을 포함하는,
    콘텐츠 제공 방법.
    
12. 제11항에 있어서,
    상기 제어하는 동작은,
    상기 캐릭터가 상기 목적지로 도달하지 못하는 경우, 잘못된 블록이 배치된 필드를 식별시키는 오류 정보를 출력하는
    콘텐츠 제공 방법.
    
13. 제12항에 있어서,
    상기 오류 정보는,
    필드에 배치된 코딩 블록의 수가 부족하다는 오류 정보, 필드에 배치된 코딩 블록의 순서가 잘못되었다는 오류 정보, 및 필드에 배치된 코딩 블록의 정보가 잘못되었다는 오류 정보를 포함하는,
    콘텐츠 제공 방법.
    
14. 콘텐츠 제공 장치가 수행하는 콘텐츠 제공 방법에 있어서,
    캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성된 AR 콘텐츠를 저장하는 동작;
    책의 페이지를 촬영한 영상을 출력하고, 상기 영상의 일 영역에 상기 페이지와 대응되는 AR 콘텐츠를 상기 영상과 함께 출력하는 동작;
    사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 상기 AR 콘텐츠에 포함된 복수의 필드 중 제1 필드에 배치하는 동작; 및
    상기 캐릭터가 상기 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 수행하도록 AR 콘텐츠를 제어하는 동작을 포함하고,
    상기 제어하는 동작은,
    상기 캐릭터가 상기 복수의 필드 중 어느 하나의 필드를 경유하다가 NPC(Non-Player Character)를 마주하는 경우, 상기 NPC와의 인터랙티브 플레이에 의한 사용자의 선택에 따라 결정되는 제2 AR 콘텐츠를 출력하는 동작을 포함하는,
    콘텐츠 제공 방법.
    
15. 제1항 내지 제5항 및 제7항 내지 제14항 중 어느 한 항의 방법을 프로세서가 수행하게 하는 명령어를 포함하는 컴퓨터 프로그램이 기록된 컴퓨터 판독 가능 기록매체.
    
16. 제1항 내지 제5항 및 제7항 내지 제14항 중 어느 한 항의 방법을 프로세서가 수행하도록 하는 컴퓨터 판독 가능 기록매체에 저장된 컴퓨터 프로그램.
    
17. 캐릭터가 출발지에서 목적지로 가기 위해 경유하는 복수의 필드로 구성된 AR 콘텐츠를 저장하는 저장부;
    책의 페이지를 촬영한 영상을 출력하고, 상기 영상의 일 영역에 상기 페이지와 대응되는 AR 콘텐츠를 상기 영상과 함께 출력하는 출력부;
    사용자의 입력에 기초하여 캐릭터가 소정의 액션을 취하도록 하는 코딩 블록을 상기 AR 콘텐츠에 포함된 복수의 필드 중 제1 필드에 배치하는 블록 배치부; 및
    상기 캐릭터가 상기 필드에 배치된 코딩 블록의 정보 및 순서에 따른 동작을 수행하도록 AR 콘텐츠를 제어하는 제어부를 포함하고,
    상기 AR 콘텐츠는,
    상기 복수의 필드 별로 배치되어야 할 코딩 블록의 개수에 대한 개수 정보를 포함하고,
    상기 출력부는,
    상기 개수 정보를 기초로 상기 AR 콘텐츠에 포함된 복수의 필드 각각에 배치되어야 할 코딩 블록의 개수를 출력하는,
    콘텐츠 제공 장치.

Images