KR101685505B1 - 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법 - Google Patents

사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법 Download PDF

Info

Publication number
KR101685505B1
KR101685505B1 KR1020150088499A KR20150088499A KR101685505B1 KR 101685505 B1 KR101685505 B1 KR 101685505B1 KR 1020150088499 A KR1020150088499 A KR 1020150088499A KR 20150088499 A KR20150088499 A KR 20150088499A KR 101685505 B1 KR101685505 B1 KR 101685505B1
Authority
KR
South Korea
Prior art keywords
user
image
dinosaur
dimensional
content
Prior art date
Application number
KR1020150088499A
Other languages
English (en)
Inventor
김하동
Original Assignee
주식회사 뷰아이디어
김하동
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 뷰아이디어, 김하동 filed Critical 주식회사 뷰아이디어
Priority to KR1020150088499A priority Critical patent/KR101685505B1/ko
Application granted granted Critical
Publication of KR101685505B1 publication Critical patent/KR101685505B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법에 관한 것이다.
본 발명에 따른 사용자 참여형 3차원 영상 생성방법은 색칠놀이에 사용할 종이 도면을 카메라로 디지털화한 후 영상추적에 필요한 특징점을 추출하여 객체 이미지를 등록하는 과정과; 카메라 입력을 통해 사용자 참여형 입력 이미지를 수신하고, 영상추적 알고리즘을 이용하여 상기 객체 이미지와 상기 입력 이미지 사이의 대응점을 계산하는 과정과; 상기 입력 이미지로부터 스크린 좌표를 계산하고, 스크린 좌표를 이용하여 객체영역을 추출하는 과정과; 이미지 워핑(warping) 알고리즘을 이용하여 상기 객체영역을 2D 정사각형 텍스쳐 맵으로 변환한 다음 색상 변질을 보정하는 과정과; 3차원 객체 모델에 UV좌표계 기준 텍스쳐 매핑을 수행하는 과정을 포함하는 것을 특징으로 한다.

Description

사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법{METHOD FOR GENERATING 3D IMAGE BY USER'S PARTICIPATION AND SYSTEM AND METHOD FOR EDUTAINMENTS SERVICE USING THE SAME}
본 발명은 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법에 관한 것으로, 특히 사용자가 색칠한 이미지를 기반으로 색칠하기, 스케치북, 퍼즐(직소퍼즐), 미로찾기, 소꿉놀이 등의 놀이학습 콘텐츠를 제공하는 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법에 관한 것이다.
최근 들어 스마트 폰의 등장과 모바일 인터넷을 제공함에 따라 휴대폰은 더 이상의 음성통신 수단이 아닌 웹을 통하여 서비스를 제공받는 도구로 발전하였다. 또한 스마트폰을 이용하여 각종 게임 및 응용 애플리케이션을 실행시켜 사용자들의 놀이수단으로도 발전하였다.
한편, 증강현실은 1960년대 이반 서더랜드가 HMD를 처음 제작했을 때부터 시작되었다. 1998년경 Asuma는 현실가상연속체를 제안하여 증강 현실의 개념을 정립하였다. 그 후 다양한 형태의 증강현실 기술이 개발되어 왔다.
매직북은 마크빌링허스트와 히로유키가토에 의해 제안되었다. 최근 컴퓨터 그래픽, 컴퓨터 비전 등의 기술을 기반으로 연구되고 있는 증강혼합현실(Augmented/Mixed Reality)이 발전함에 따라 이러한 기술을 응용하여 종이책과 디지털 콘텐츠를 결합한 다양한 책 제작 시도가 있었다.
또한, 뉴질랜드 HIT 연구실을 중심으로 연구개발되고 있는 매직북(magic book)은 책을 실제공간, 증강현실공간, 가상현실공간을 넘나드는 '변천형 인터페이스'로 사용하고 있다. 그러나 특수하게 디자인된 정사각형 마커(marker)를 사용함으로써 이 마커를 삽입한 책만 사용할 수 있다. 즉, 일반적인 출판물에 마커를 추가하기 전에는 사용할 수 없는 문제점이 있다.
대한민국 공개특허 10-2008-0050108
따라서, 본 발명은 상기와 같은 종래기술의 문제점을 해결하기 위하여 안출된 것으로, 본 발명의 일반적인 목적은 종래 기술에서의 한계와 단점에 의해 발생되는 다양한 문제점을 실질적으로 보완할 수 있는 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법을 제공하는 것이다.
또한, 본 발명은 다양한 인쇄매체(스케치북, 퍼즐북, 색칠하기 책, 색칠하기 관련 인쇄물 등)를 모바일 기기 또는 콘텐츠를 탑재할 수 있는 다양한 하드웨어를 통하여 시간과 공간의 제약 없이 학습할 수 있는 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법을 제공하는데 그 목적이 있다.
또한, 본 발명은 사용자와의 상호작용으로 놀이 및 학습효과를 증대시킬 수 있는 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법을 제공하는데 그 목적이 있다.
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
이를 위해 본 발명의 일 실시예에 따른 사용자 참여형 3차원 영상 생성방법은 색칠놀이에 사용할 종이 도면을 카메라로 디지털화한 후 영상추적에 필요한 특징점을 추출하여 객체 이미지를 등록하는 과정과; 카메라 입력을 통해 사용자 참여형 입력 이미지를 수신하고, 영상추적 알고리즘을 이용하여 상기 객체 이미지와 상기 입력 이미지 사이의 대응점을 계산하는 과정과; 상기 입력 이미지로부터 스크린 좌표를 계산하고, 스크린 좌표를 이용하여 객체영역을 추출하는 과정과; 이미지 워핑(warping) 알고리즘을 이용하여 상기 객체영역을 2D 정사각형 텍스쳐 맵으로 변환한 다음 색상 변질을 보정하는 과정과; 3차원 객체 모델에 텍스쳐 매핑을 수행하는 과정을 포함하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 사용자 참여형 놀이학습 콘텐츠 제공 시스템은 사용자가 종이에 색칠한 이미지를 촬영하며, 사용자 참여형 3차원 영상 생성방법을 이용한 놀이학습 콘텐츠를 제공하는 애플리케이션을 실행시키고 사용자로부터 특정 놀이학습 콘텐츠 선택을 위한 입력신호를 수신하여 앱 서버로부터 해당 놀이학습 콘텐츠를 제공받는 사용자 단말과; 상기 사용자 단말로부터 사용자가 종이에 색칠한 이미지를 수신하여 사용자가 칠한 색깔이 반영된 사용자 참여형 3차원 영상을 생성한 다음 상기 사용자 단말로 제공하는 상기 앱 서버를 포함하는 것을 특징으로 한다.
본 발명의 일 실시예에 따른 사용자 참여형 놀이학습 콘텐츠 제공 시스템에서, 상기 앱 서버는 상기 사용자 단말로부터 사용자가 종이에 색칠한 이미지를 수신하여 사용자 참여형 3차원 영상을 생성하는 영상처리부와, 사용자에게 제공될 각각의 놀이학습 콘텐츠 관련 정보를 저장관리하는 콘텐츠관리부를 포함할 수 있다.
본 발명의 일 실시예에 따른 사용자 참여형 놀이학습 콘텐츠 제공 시스템에서, 상기 영상처리부는 색칠놀이에 사용할 종이 도면을 카메라로 디지털화한 후 영상추적에 필요한 특징점을 추출하여 객체 이미지를 등록하고, 사용자 단말로부터 입력 이미지를 수신하여 객체 이미지와 입력 이미지 사이의 대응점을 계산하고, 호모그래픽 행렬을 계산하는 객체추적 및 등록 모듈과; 입력 이미지에서 4 꼭짓점 스크린 좌표를 계산한 다음 4 꼭짓점 좌표를 이용하여 객체영역을 추출하고, 이미지의 워핑(warping) 알고리즘을 이용하여 추출된 객체영역을 2D 정사각형 텍스쳐 맵으로 변환한 다음 색상 변질을 보정하는 색칠영역획득 및 텍스쳐 맵 생성 모듈과; 3차원 객체 모델에 UV좌표계 기준 텍스쳐 매핑을 수행하는 택스처 매핑 모듈을 포함하는 것을 특징으로 한다.
또한, 본 발명의 일 실시예에 따른 사용자 단말을 이용하여 놀이학습 콘텐츠를 제공하는 방법에 있어서, (A) 상기 사용자 단말에 구비된 카메라를 통하여 촬영된 사용자 색칠 공룡 이미지를 수신하여 사용자 참여형 3차원 공룡 영상을 생성하는 과정과; (B) 미로찾기, 공룡놀이, 직소퍼즐 중 어느 하나의 콘텐츠에 대한 선택신호를 수신하는 과정과; (C) 상기 (B) 과정에서 선택된 콘텐츠에 상기 (A) 과정에서 생성된 사용자 참여형 3차원 공룡 영상을 제공하는 과정과; (D) 상기 선택된 콘텐츠를 사용자의 입력에 따라 동작시키는 과정을 포함하는 것을 특징으로 한다.
본 발명의 일 실시예에 따른 사용자 참여형 놀이학습 콘텐츠 제공방법에 있어서, (E) 상기 사용자 단말로부터 언어/음향 설정 신호를 수신하여 자막 또는 음향 출력시 설정된 언어/음향으로 제공하는 과정을 더 포함할 수 있다.
본 발명에 따른 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법에 의하면, 사용자가 직접 손으로 색칠해서 제작한 콘텐츠를 모바일에서 실제와 같이 체험할 수 있도록 함으로써 주 사용자인 유, 초등학생들의 호기심과 상상력을 자극하고, 시.지각능력 또한 신장시킬 수 있다.
또한, 음성이나 자막에 대한 한글, 영어, 중국어, 일본어 등의 언어 설정 기능을 통해 언어학습 능력을 향상시킬 수 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 사용자 참여형 3차원 영상 생성 시스템의 구성을 개략적으로 나타낸 도면이다.
도 2는 본 발명의 개념도이다.
도 3은 본 발명의 일 실시예에 따른 사용자 참여형 3차원 영상 생성 방법을 설명하기 위한 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 사용자 참여형 3차원 영상 생성방법을 이용한 놀이학습 콘텐츠 제공방법을 설명하기 위한 전체 흐름도이다.
도 5 내지 도 11은 도 4의 각 단계별 사용자 단말의 화면 구성예를 나타낸 것이다.
이하, 첨부 도면을 참조하여 본 발명의 실시 예를 상세히 설명하면 다음과 같다.
본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명은 생략한다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 판례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 사용자 참여형 3차원 영상 생성 시스템의 구성을 개략적으로 나타낸 도면이고, 도 2는 발명의 개념도이다.
도 1 및 도 2를 참조하면, 본 실시예에 따른 사용자 참여형 3차원 영상 생성 시스템은 사용자 단말(100)과 앱 서버(200)를 포함한다.
상기 사용자 단말(100)은 상기 앱 서버(200)로부터 제공받은 애플리케이션이 실행되는 단말로 사용자가 종이에 색칠한 색칠놀이(10) 이미지를 촬영하며, 사용자로부터 특정 놀이학습 콘텐츠 선택을 위한 입력신호를 수신하여 상기 앱 서버(200)로부터 해당 놀이학습 콘텐츠를 제공받는다.
이를 위해 상기 사용자 단말(100)은 색칠놀이(10) 이미지 촬영을 위한 카메라를 구비하며, 상기 앱 서버(200)와는 유무선 통신네트워크를 통해 통신가능하도록 접속되어 있다.
상기 앱 서버(200)는 상기 사용자 단말(100)에 의해 촬영된 색칠놀이 이미지를 수신하여 3차원(3D) 영상을 생성하는 영상처리부(210)와, 사용자에게 제공될 각각의 놀이학습 콘텐츠 관련 정보를 저장관리하는 콘텐츠관리부(250)를 포함하며, 앱 서버(200) 동작에 필요한 제반 데이터를 저장하는 데이터베이스(270)를 구비하고 있다.
도 3은 본 발명의 일 실시예에 따른 영상처리부의 구성 및 동작을 설명하기 위한 도면으로, 도 3에 도시된 바와 같이 영상처리부(210)는 객체추적 및 등록 모듈(220)과, 색칠영역획득 및 텍스쳐 맵 생성 모듈(230)과, 텍스쳐 매핑 모듈(240)을 포함한다.
상기 객체추적 및 등록 모듈(230)에서는 먼저, 객체 이미지를 등록한다(S231). 색칠놀이에 사용할 종이 도면을 카메라로 디지털화한 후 영상추적에 필요한 특징점을 추출하는 과정이다. 이 특징점은 나중에 이미지 매칭과 추적에 사용된다. 다음으로, 사용자 단말로부터 카메라 입력(입력 이미지)을 실시간으로 받아(S223) 영상추적 알고리즘을 이용하여 객체 이미지와 입력 이미지 사이의 대응점을 계산한다(S225). 다음으로, 투영행렬(projection matrix)을 통해 호모그래픽 행렬을 계산한다(RANSAC)(S227). 여기서, 호모그래픽 행렬 계산은 실세계의 3D 상에 있는 대상 이미지의 카메라 좌표계를 통해 스크린 좌표계로의 변환을 의미한다.
상기 색칠영역획득 및 텍스쳐 맵 생성 모듈(230)에서는 입력 이미지에서 4 꼭짓점 스크린 좌표를 계산하고(S231) 4 꼭짓점 좌표를 이용하여 캡처된 카메라 이미지에서 객체영역을 추출한다(S233). 다음으로, 이미지의 warping 알고리즘을 이용하여 잘려진 객체영역을 2D 정사각형 텍스쳐 맵으로 변환한(S235) 다음 그림자 제거 및 화이트 밸런싱(white balancing), 스케치북 촬영시 생기는 카메라 또는 사람의 손에 의해 생기는 그림자로 인한 색상 변질을 보정한다(S237).
상기 택스처 매핑 모듈(240)에서는 3차원 객체 모델에 UV좌표계 기준 텍스쳐 매핑을 수행하고(S241), 이를 클라우드에 저장 및 네트워크를 통해 공유한다(S243).
도 4는 본 발명의 일 실시예에 따른 사용자 참여형 3차원 영상 생성방법을 이용한 놀이학습 콘텐츠 제공방법을 설명하기 위한 전체 흐름도이고, 도 5 내지 도 11은 도 4의 각 단계별 사용자 단말의 화면 구성예를 나타낸 것이다.
도 4를 참조하면, 먼저, 사용자 단말을 이용해 3차원 영상 생성방법을 이용한 놀이학습 콘텐츠를 제공하는 애플리케이션 일명 '컬러 팝업(Color PopUp)' 애플리케이션을 다운받아 실행시키면 도 5에 도시된 바와 같은 메인화면이 제공된다(S300). 여기서, 컬러 팝업(Color PopUp) 애플리케이션은 3D 색칠놀이(공룡, 완구), 3D 퍼즐(직소퍼즐) 등의 각 콘텐츠에 부가되어 있는 QR 코드를 스캔하거나 구글스토어 또는 앱스토어 등에서 다운받을 수 있다.
도 5는 S300 단계에서 사용자 단말로 제공되는 메인화면 구성예를 나타낸 것으로, 메인화면에는 사진찍기, 월드가기, 앨범보기, 설정 메뉴가 제공된다.
다시, 도 4를 참조하면, 사진찍기 과정(A)이 선택되면(S310), 카메라 기능을 통해 사용자 색칠화면을 수신하고(S311), 사용자 참여형 3D 영상을 생성하여(S312), 사용자 참여형 3D 영상 예를 들면, 사용자가 칠한 색의 공룡 영상을 제공하며(S313), 월드화면에서 확인할 수 있도록 한다(S314). 이러한 사진찍기 과정에 따른 사용자 단말의 화면 구성예는 도 6에 도시된 바와 같다.
메인화면 제공 후, 월드가기 과정(B)이 선택되면(S320), 월드화면을 제공하고(S321) 특정 공룡이 선택되면(S322) 해당 공룡과 함께 할 수 있는 공룡놀이(S323), 미로찾기(S324), 직소퍼즐(S325) 메뉴를 제공한다. S322 과정에서 월드화면에 사용자가 이전에 저장해놓은 공룡이 없는 경우 사진찍기 과정(A) 또는 앨범보기 과정(C)을 진행하여 원하는 공룡을 선택하도록 한다. 이러한 월드가기 과정에 따른 사용자 단말의 화면 구성예는 도 7에 도시된 바와 같다.
도 8은 공룡놀이(S323) 선택시 사용자 단말의 화면 구성예를 나타낸 도면으로, 공룡놀이 속 공룡들을 자세히 보기 위해 해당 공룡을 클릭한 다음 자세히 보기 아이콘을 누르면 해당 공룡이 크게 확대되어 나타나며, 공룡의 모습을 다양한 각도에서 볼 수 있다. 또한, 공룡을 원하는 곳으로 이동시키거나 공룡에게 먹이를 줄 수 있다.
도 9는 미로찾기(S324) 선택시 사용자 단말의 화면 구성예를 나타낸 도면이며, 선택한 공룡으로 올바른 길을 찾는 미로찾기 게임을 즐길 수 있도록 하며 전후좌우 조작버튼을 통해 공룡을 사방으로 움직일 수 있다. 가다가 길을 막는 방해물이 등장하면 공격버튼을 통해 방해물을 제거할 수 있다. 각각의 공룡마다 특성에 맞게 공격방법이 다르게 설정되어 있다. 공룡이 미로를 탈출하게 되면 클리어 기록이 남게 된다. 즉, 공룡이름과 경과시간이 기록된다.
도 10은 직소퍼즐(S325) 선택시 사용자 단말의 화면 구성예를 나타낸 도면이다. 퍼즐 맞추기는 오프라인에서도 퍼즐 맞추기 놀이가 가능하고, 애플리케이션 내에서도 퍼즐 맞추기 놀이가 가능하다. 애플리케이션 내에서는 사용자가 색칠한 퍼즐이 등장하며, 미로 찾기와 마찬가지로 퍼즐 맞히기도 기록(시간)을 재며, 퍼즐을 완성하면 경과시간이 출력된다.
다시 도 4를 참조하면, 메인화면 제공 후, 앨범보기 과정(C)이 선택되면(S330), 사진찍기 과정(A)을 통해 저장된 공룡 사진들이 제공될 수 있다.
메인화면 제공 후, 옵션설정 과정(D)이 선택되면(S340), 자막(Text)과 음성 각각에 언어를 선택할 수 있는 옵션설정 창이 제공되어(S342), 한글, 영어, 일본어, 중국어 중 원하는 언어를 선택하고, 또한 배경음악 및 효과음을 조절할 수 있도록 한다(S343). 옵션설정은 공룡들의 정보를 알 수 있는 기능으로 설정한 언어의 자막 및 음성으로 해당 공룡에 대한 정보를 출력하며, 설정버튼 클릭을 통해 자막(글자)과 음성을 원하는 언어로 바꿀 수 있어 언어공부를 할 수 있도록 도와준다. 이러한 옵션설정 과정에 따른 사용자 단말의 화면 구성예는 도 11에 도시된 바와 같다.
한편, 본 발명은 공룡뿐만 아니라 인형놀이, 소꿉놀이, 집 꾸미기 등 다양한 놀이에 활용할 수 있다.
예를 들어, 집 꾸미기의 경우 워크시트의 집에 원하는 색깔로 색칠을 한 다음 사용자 단말에서 3차원 영상 생성방법을 이용한 놀이학습 콘텐츠를 제공하는 애플리케이션 일명 '즐거운 우리 집' 앱을 실행시키고 사용자가 색칠한 집이 화면에 들어오도록 한 다음 '내가 꾸민 우리집'을 선택하고 활동진행 버튼을 클릭하면, 사용자가 색칠한 색의 집의 3차원 영상이 제공된다. '+','-' 버튼을 눌을 집을 커지게도 작아지게도 할 수 있다.
또한, 집 안의 가구나 인테리어도 사용자가 원하는 색깔로 색칠한 다음 3차원으로 볼 수 있고, 스크린 샷 버튼을 눌러 사진으로 남기도록 할 수도 있다.
또한, 인형놀이의 경우 종이 인형에 원하는 색으로 피부, 머리카락, 드레스, 구두, 가방 등에 색칠을 하면 사용자가 칠한 색으로 꾸며진 인형이 3차원으로 제공될 수 있다.
본 발명에 따른 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독가능 매체를 포함한다. 컴퓨터 판독 가능 매체는 프로그램 명령, 로컬 데이터 파일, 로컬 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크와 같은 자기-광 매체, 및 롬, 램, 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
한편, 본 발명의 상세한 설명 및 첨부도면에서는 구체적인 실시예에 관해 설명하였으나, 본 발명은 개시된 실시예에 한정되지 않고 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하다. 따라서, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들을 포함하는 것으로 해석되어야 할 것이다.
100 : 사용자 단말 200 : 앱 서버
210 : 영상처리부 220 : 객체 등록 및 추적 모듈
230 : 색칠영역획득 및 텍스쳐 맵 생성 모듈
240 : 텍스터 매핑 모듈 250 : 콘텐츠 관리부
270 : 데이터베이스

Claims (6)

  1. 삭제
  2. 사용자가 종이에 색칠한 이미지를 촬영하며, 사용자 참여형 3차원 영상 생성방법을 이용한 놀이학습 콘텐츠를 제공하는 애플리케이션을 실행시키고 사용자로부터 특정 놀이학습 콘텐츠 선택을 위한 입력신호를 수신하여 앱 서버로부터 해당 놀이학습 콘텐츠를 제공받는 사용자 단말과;
    상기 사용자 단말로부터 사용자가 종이에 색칠한 이미지를 수신하여 사용자가 칠한 색깔이 반영된 사용자 참여형 3차원 영상을 생성한 다음 상기 사용자 단말로 제공하는 상기 앱 서버를 포함하는 사용자 참여형 놀이학습 콘텐츠 제공 시스템에 있어서,
    상기 앱 서버는
    사용자에게 제공될 놀이학습 콘텐츠로, 사용자가 칠한 색깔이 반영된 사용자 참여형 3차원 영상이 등장하는 공룡놀이, 미로찾기, 직소퍼즐 중 적어도 하나를 포함하는 놀이학습 콘텐츠 관련 정보를 저장관리하는 콘텐츠관리부를 포함하며,
    상기 사용자 단말의 입력에 따라 공룡놀이, 미로찾기, 직소퍼즐 중 적어도 하나의 콘텐츠를 제공하는 것을 특징으로 하는 사용자 참여형 놀이학습 콘텐츠 제공 시스템.
  3. 제 2 항에 있어서, 상기 콘텐츠관리부는
    사용자 단말에 의해 이전에 촬영되어 저장된 사용자 참여형 3차원 영상들이 제공되는 앨범보기 콘텐츠 관련 정보를 더 저장하며,
    상기 사용자 단말의 입력에 따라 앨범보기 콘텐츠에서 선택된 특정 사용자 참여형 3차원 영상이 공룡놀이, 미로찾기, 직소퍼즐 중 적어도 하나의 콘텐츠에 등장하도록 하는 것을 특징으로 하는 사용자 참여형 놀이학습 콘텐츠 제공 시스템.
  4. 삭제
  5. 사용자 참여형 3차원 영상 생성방법을 이용한 놀이학습 콘텐츠를 제공하는 애플리케이션을 실행시켜 사용자 단말로 놀이학습 콘텐츠를 제공하는 방법에 있어서,
    (A) 상기 사용자 단말에 구비된 카메라를 통하여 촬영된 사용자 색칠 공룡 이미지를 수신하여 사용자가 칠한 색깔이 반영된 사용자 참여형 3차원 공룡 영상을 생성하는 과정과;
    (B) 미로찾기, 공룡놀이, 직소퍼즐 중 어느 하나의 콘텐츠에 대한 선택신호를 수신하는 과정과;
    (C) 상기 (B) 과정에서 선택된 콘텐츠에 상기 (A) 과정에서 생성된 사용자 참여형 3차원 공룡 영상을 제공하는 과정과;
    (D) 상기 선택된 콘텐츠를 사용자의 입력에 따라 동작시키는 과정으로서 각 콘텐츠에 등장하는 사용자 참여형 3차원 공룡의 특성에 따라 이동방법이나 공격방법이 다르게 설정되어 있는 것을 특징으로 하는 사용자 참여형 놀이학습 콘텐츠 제공방법.
  6. 사용자 참여형 3차원 영상 생성방법을 이용한 놀이학습 콘텐츠를 제공하는 애플리케이션을 실행시켜 사용자 단말로 놀이학습 콘텐츠를 제공하는 방법에 있어서,
    (A) 상기 사용자 단말에 구비된 카메라를 통하여 촬영된 사용자 색칠 공룡 이미지를 수신하여 사용자가 칠한 색깔이 반영된 사용자 참여형 3차원 공룡 영상을 생성하고, 생성된 사용자 참여형 3차원 공룡 영상을 저장하는 과정과;
    (B) 미로찾기, 공룡놀이, 직소퍼즐 중 어느 하나의 콘텐츠에 대한 선택신호를 수신하는 과정과;
    (C) 상기 (A) 과정에서 생성 및 저장된 영상들을 제공하는 앨범보기 과정과;
    (D) 상기 앨범보기 과정에서 제공된 사용자 참여형 3차원 공룡 영상 중 특정 공룡 영상을 선택하는 선택신호를 수신하는 과정과;
    (E) 상기 (B) 과정에서 선택된 콘텐츠에 상기 (D) 과정에서 선택된 사용자 참여형 3차원 공룡 영상을 제공하는 과정과;
    (F) 상기 선택된 콘텐츠를 사용자의 입력에 따라 동작시키는 과정으로서 각 콘텐츠에 등장하는 사용자 참여형 3차원 공룡의 특성에 따라 이동방법이나 공격방법이 다르게 설정되어 있는 것을 특징으로 하는 사용자 참여형 놀이학습 콘텐츠 제공방법.
KR1020150088499A 2015-06-22 2015-06-22 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법 KR101685505B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150088499A KR101685505B1 (ko) 2015-06-22 2015-06-22 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150088499A KR101685505B1 (ko) 2015-06-22 2015-06-22 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR101685505B1 true KR101685505B1 (ko) 2016-12-13

Family

ID=57575211

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150088499A KR101685505B1 (ko) 2015-06-22 2015-06-22 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR101685505B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101968152B1 (ko) * 2017-10-11 2019-04-11 (주)아이디 색칠놀이 기반의 영상분석 및 3d디스플레이 시스템
KR20200067347A (ko) * 2018-12-04 2020-06-12 박정식 증강현실을 기반으로 한 컬러링북 구현 서비스 제공 시스템
KR20220105968A (ko) * 2021-01-21 2022-07-28 동서대학교 산학협력단 페이퍼토이 기반 ar인터랙티브 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080050108A (ko) 2006-12-01 2008-06-05 주식회사 이비 Ｒｆｉｄ를 이용한 학습용 완구 및 이를 이용한 학습 방법
KR101473956B1 (ko) * 2014-06-25 2014-12-17 (주)그린아이티코리아 2d 평면도를 기초로 한 3d 공간정보 모델링 방법 및 해당 3d 공간 모델을 이용한 영상 관제 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080050108A (ko) 2006-12-01 2008-06-05 주식회사 이비 Ｒｆｉｄ를 이용한 학습용 완구 및 이를 이용한 학습 방법
KR101473956B1 (ko) * 2014-06-25 2014-12-17 (주)그린아이티코리아 2d 평면도를 기초로 한 3d 공간정보 모델링 방법 및 해당 3d 공간 모델을 이용한 영상 관제 시스템

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Texture Extraction from Video and Image Warping for AR Coloring Book, 6th FTRA International Conference on Computer Science and its Applications (2014.12.19.)* *
종이에 그린 그림이 3D 애니메이션으로 구현되다, colAR, CT 동향: 영상 (2014.05.31.)* *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101968152B1 (ko) * 2017-10-11 2019-04-11 (주)아이디 색칠놀이 기반의 영상분석 및 3d디스플레이 시스템
KR20200067347A (ko) * 2018-12-04 2020-06-12 박정식 증강현실을 기반으로 한 컬러링북 구현 서비스 제공 시스템
KR102145748B1 (ko) * 2018-12-04 2020-08-19 박정식 증강현실을 기반으로 한 컬러링북 구현 서비스 제공 시스템
KR20220105968A (ko) * 2021-01-21 2022-07-28 동서대학교 산학협력단 페이퍼토이 기반 ar인터랙티브 시스템
KR102436240B1 (ko) 2021-01-21 2022-08-24 동서대학교 산학협력단 페이퍼토이 기반 ar인터랙티브 시스템

Similar Documents

Publication Publication Date Title
KR102417645B1 (ko) Ar 장면 이미지 처리 방법, 장치, 전자 기기 및 저장 매체
JP6785282B2 (ja) アバタによる生放送方法及び装置
KR101692335B1 (ko) 증강현실 영상표시 시스템 및 증강현실 영상표시 방법
Huynh et al. Art of defense: a collaborative handheld augmented reality board game
US9654734B1 (en) Virtual conference room
JP5145444B2 (ja) 画像処理装置、画像処理装置の制御方法、及びプログラム
JP5137970B2 (ja) ビデオストリームにおいて、マーク無しに、テクスチャー化平面幾何学的オブジェクトをリアルタイムで自動追跡するリアリティ向上方法および装置
CN105279795B (zh) 基于3d标记的增强现实系统
CN108062796B (zh) 基于移动终端的手工制品与虚拟现实体验系统及方法
US20220245859A1 (en) Data processing method and electronic device
CN112148189A (zh) 一种ar场景下的交互方法、装置、电子设备及存储介质
KR101961758B1 (ko) 3차원 컨텐츠 제공 시스템, 방법 및 컴퓨터 판독 가능한 기록매체
CN108416832B (zh) 媒体信息的显示方法、装置和存储介质
KR101576538B1 (ko) 평면 도안 입체화 구현 장치
JP2014021570A (ja) 動画像生成装置
KR101685505B1 (ko) 사용자 참여형 3차원 영상 생성방법과 이를 이용한 놀이학습 콘텐츠 제공 시스템 및 방법
JP2023504608A (ja) 拡張現実場面における表示方法、装置、機器、媒体及びプログラム
JP7150894B2 (ja) Ａｒシーン画像処理方法及び装置、電子機器並びに記憶媒体
CN105611267A (zh) 现实世界和虚拟世界图像基于深度和色度信息的合并
CN111625100A (zh) 图画内容的呈现方法、装置、计算机设备及存储介质
JP2014029566A (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
CN112905014A (zh) Ar场景下的交互方法、装置、电子设备及存储介质
CN111667590A (zh) 一种互动合影方法、装置、电子设备及存储介质
KR20190061783A (ko) 가상현실 콘텐츠 생성방법 및 프로그램
CN111640190A (zh) Ar效果的呈现方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
GRNT Written decision to grant