KR102262894B1 - System and method for ballet lesson using projection mapping - Google Patents

System and method for ballet lesson using projection mapping Download PDF

Info

Publication number
KR102262894B1
KR102262894B1 KR1020190060203A KR20190060203A KR102262894B1 KR 102262894 B1 KR102262894 B1 KR 102262894B1 KR 1020190060203 A KR1020190060203 A KR 1020190060203A KR 20190060203 A KR20190060203 A KR 20190060203A KR 102262894 B1 KR102262894 B1 KR 102262894B1
Authority
KR
South Korea
Prior art keywords
ballet
choreography
content
storytelling
floor
Prior art date
Application number
KR1020190060203A
Other languages
Korean (ko)
Other versions
KR20200134574A (en
Inventor
백향은
Original Assignee
백향은
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 백향은 filed Critical 백향은
Priority to KR1020190060203A priority Critical patent/KR102262894B1/en
Publication of KR20200134574A publication Critical patent/KR20200134574A/en
Application granted granted Critical
Publication of KR102262894B1 publication Critical patent/KR102262894B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/0015—Dancing
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/067—Combinations of audio and projected visual presentation, e.g. film, slides
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Marketing (AREA)
  • Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Human Resources & Organizations (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Signal Processing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Projection Apparatus (AREA)

Abstract

본 발명은 프로젝트 맵핑을 이용한 발레 수업 시스템 및 방법으로, 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현되어 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상으로 발레 플로어에 투사하는 프로젝터; 상기 프로젝트에 연결되어 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 상기 프로젝터에 제공하는 컨텐츠 출력부; 및 상기 컨텐츠 출력부에 접속하여 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어하는 발레 연출부를 포함한다.The present invention is a ballet class system and method using project mapping, wherein the ballet motions for choreography or storytelling are expressed as characters, and each ballet motion mapped with the ballet motions of the choreography content is projected onto the ballet floor as a moving picture; In connection with the project, ballet motions for choreography or storytelling are expressed as characters on the floor where ballet classes are conducted, and ballet motions mapped with the ballet motions of the choreography are provided as video contents. a content output unit that is replaced in real time and provided to the projector; and a ballet directing unit that accesses the content output unit to edit and store each ballet motion data mapped with choreography content or ballet motions or control video data in real time.

Description

프로젝트 맵핑을 이용한 발레 수업 시스템 및 방법{System and method for ballet lesson using projection mapping}System and method for ballet lesson using projection mapping}

본 발명은 프로젝트 맵핑을 이용한 발레 수업 시스템 및 방법에 관한 것으로, 더욱 상세하게는 발레 수업이 진행되는 바닥으로 안무 내용이나 스토리 텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 영상으로 제작된 컨텐츠를 프로젝트 빔을 통한 동영상으로 발레 플로어에 투사하여 발레 교습자로 하여 바닥의 캐릭터 영상을 보고 동작을 따라하는 발레 수업 프로그램을 제공할 수 있도록 한 프로젝트 맵핑을 이용한 발레 수업 시스템 및 방법에 대한 것이다. The present invention relates to a ballet class system and method using project mapping, and more particularly, to the floor where ballet classes are conducted, ballet motions for choreography content or storytelling are expressed as characters, and each mapped with ballet motions of choreography content Ballet class using project mapping to provide a ballet class program in which ballet instructors can watch character images on the floor and imitate movements by projecting the contents produced as videos of ballet movements on the ballet floor as videos through project beams systems and methods.

최근에 댄스, 발레 안무를 보다 전문적으로 배우고자 하는 수요가 국내외적으로 많이 발생하고 있으며 이를 위해 안무 동작을 시각적인 영상으로 세부적인 안무동작을 강의하고, 다양한 스토리 텔링에 따른 안무 동작 컨텐츠를 제공할 수 있는 영상 강좌 수단과 방법이 필요하다.Recently, there is a lot of demand for learning dance and ballet choreography more professionally both at home and abroad. There is a need for means and methods for video lectures.

종래기술로서, 국내 공개특허공보 제2002-0060396호는 디지털 영상 시스템을 이용한 댄스 연습실에 관한 것으로, 디지털 비디오 시스템 장치를 이용하여 소형 나이트 클럽 분위기를 연출하여 댄스를 전문 댄서의 동작에 따라 구분동작, 연속동작, 자유동작 모드로 배우고 즐길 수 있는 형태의 서비스 방법을 제시하고 있다.As a prior art, Korean Patent Laid-Open Publication No. 2002-0060396 relates to a dance practice room using a digital image system, and uses a digital video system device to create a small nightclub atmosphere to differentiate dance according to the movement of a professional dancer, It presents a service method that can be learned and enjoyed in continuous and free operation modes.

다른 종래기술로, 국내 공개특허공보 제2001-0000836호는 실제 댄서를 삼차원 가상 캐릭터로 형성하여 회원의 단말기에 제공하고 해당 캐릭터의 움직이는 부분에 대한 위치를 데이터화하여 실시간으로 해당 단말기에 적용시켜 교육에 이용하도록 한 인터넷에서 댄스 교육 서비스 제공 방법에 관한 것이다.As another prior art, Korean Unexamined Patent Publication No. 2001-0000836 provides a real dancer as a three-dimensional virtual character, provides it to the member's terminal, converts the position of the moving part of the character into data, and applies it to the terminal in real time for education It relates to a method of providing a dance education service on the Internet made available for use.

상기 종래기술들은 일방향 댄스교육으로, 전문 댄서(강사)의 동작을 일방적으로 보여주고, 이를 통해 수강생은 그 동작에 따라 연습하도록 이루어져 있어, 학생이 제대로 된 댄스를 배우고 있는지 여부는 상관이 없었다.The prior art is a one-way dance education, showing the movement of a professional dancer (instructor) unilaterally, and through this, the student is made to practice according to the movement, so it does not matter whether the student is learning the proper dance.

특히, 발레 동작이나 안무 내용을 소화하기 어려운 연령대를 대상으로 공연 소품, 배경과 싱크를 맞추기 어렵고, 공연 등장인물 간 싱크를 맞추기가 어려운 문제가 있었기 때문에 어린이들이 발레 수업을 쉽게 따라 할 수 있는 시스템이 요구되었다. In particular, it was difficult to synchronize with the performance props and background, and it was difficult to synchronize the performances between the performers, targeting the age group who had difficulty digesting ballet movements or choreography. Therefore, a system that allows children to easily follow ballet lessons was developed. was requested

따라서, 장소에 상관없이 안무 동작에 따른 스토리텔링에 부합되는 컨텐츠를 바로 실시간으로 제공하면서 어디서나 안무 수업이 가능하고, 다양한 배경 이미지를 보고 상황에 맞는 안무 동작을 즉흥적으로 구성할 수 있도록 할 뿐만 아니라 수업의 내용에 맞게 안무 영상이 실시간으로 교체되어 재미있게 안무 수업이 진행될 수 있도록 하는 발레 동작 컨텐츠 제공 시스템이 요구되고 있는 것이다. Therefore, choreography classes are possible anywhere while providing content that matches the storytelling according to the choreography in real time, regardless of the location. There is a need for a ballet motion content providing system that allows the choreography class to be conducted in a fun way by replacing the choreography video in real time in accordance with the

국내 공개특허공보 제2002-0060396호Domestic Patent Publication No. 2002-0060396 국내 공개특허공보 제2001-0000836호Domestic Patent Publication No. 2001-0000836

본 발명은 전술한 바와 같은 종래의 문제점을 해결하고자 안출된 것으로서, 그의 목적은 발레 수업이 진행되는 바닥으로 안무 내용이나 스토리 텔링에 대한 발레 동작을 캐릭터로 표현하여 발레 동작과 맵핑되는 각각의 발레 동작들을 영상으로 제작한 컨텐츠를 프로젝트 빔을 통한 동영상으로 발레 플로어에 투사하여 발레 교습자로 하여 바닥의 캐릭터 영상을 보고 동작을 따라하는 발레 수업 프로그램을 제공할 수 있도록 한 것으로서, 스토리텔링에 부합되는 안무 컨텐츠를 바로 실시간으로 제공하고, 다양한 배경 이미지를 보고 상황에 맞는 안무 동작을 즉흥적으로 구성할 수 있도록 할 뿐만 아니라 수업의 내용에 맞게 안무 영상이 실시간으로 교체되어 수업이 진행될 수 있도록 하는 프로젝트 맵핑을 이용한 발레 수업 시스템 및 방법을 제공하기 위한 것이다. The present invention has been devised to solve the conventional problems as described above, and its purpose is to express ballet motions for choreography content or storytelling as characters to the floor where ballet classes are conducted, and each ballet motion mapped with ballet motions It is a choreography content that matches the storytelling by projecting the content produced as a video to the ballet floor as a video through a project beam to provide a ballet class program in which the ballet instructor can watch the character video on the floor and imitate the movements. Ballet using project mapping that provides real-time, instantaneous composition of choreography according to the situation by looking at various background images, and that the choreography video is replaced in real time to match the content of the class so that the class can proceed. It is intended to provide instructional systems and methods.

본 발명에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템은, 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현되어 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상으로 발레 플로어에 투사하는 프로젝터; 상기 프로젝트에 연결되어 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 상기 프로젝터에 제공하는 컨텐츠 출력부; 및 상기 컨텐츠 출력부에 접속하여 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어하는 발레 연출부를 포함하는 것을 특징으로 한다.The ballet class system using project mapping according to the present invention expresses ballet motions for choreography content or storytelling as characters on the floor where the ballet class is conducted, and each ballet motion mapped with the ballet motions of the choreography content is shown as a video ballet. a projector that projects on the floor; In connection with the project, ballet motions for choreography or storytelling are expressed as characters on the floor where ballet classes are conducted, and ballet motions mapped with the ballet motions of the choreography are provided as video contents. a content output unit that is replaced in real time and provided to the projector; and a ballet directing unit that accesses the content output unit to edit and store each ballet motion data mapped with choreography content or ballet motions or control video data in real time.

본 발명에 따른 또 다른 프로젝트 맵핑을 이용한 발레 수업 시스템은, 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상을 발레 플로어에 투사하는 프로젝터; 상기 프로젝터에 연결되어 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 상기 프로젝터에 제공하는 컨텐츠 출력부; 상기 컨텐츠 출력부에 접속하여 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어하는 발레 연출부; 발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 교습자들의 표정, 배경을 촬영하여 영상 정보로 취득하는 카메라; 및 상기 카메라에서 취득된 영상정보로부터 안무 내용 또는 스토리 텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 위치정보를 인공지능 기반으로 추출하여 상기 발레 연출부로 실시간 제공하는 교습자 인식부를 포함하는 것을 특징으로 하는 것이다.The ballet class system using another project mapping according to the present invention expresses ballet motions for choreography content or storytelling as characters on the floor where the ballet class is conducted, and displays each ballet motion mapped with the ballet motions of the choreography content as a video. a projector that projects the ballet onto the ballet floor; It is connected to the projector and expresses ballet motions for choreography or storytelling as characters on the floor where the ballet class is conducted, and provides video contents with ballet motions mapped with the ballet motions of the choreography contents, and video contents according to the contents of the class a content output unit that is replaced in real time and provided to the projector; a ballet directing unit that accesses the content output unit to edit and store each ballet motion data mapped with choreography or ballet motions or control video data in real time; a camera that captures the movements of the ballet instructors, the instructors' facial expressions, and the background while the ballet class is in progress and acquires them as video information; and a teacher recognition unit that extracts motion information and location information defined in advance as ballet motions corresponding to choreography or storytelling from the image information acquired from the camera based on artificial intelligence and provides them to the ballet directing unit in real time. will do

본 발명에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템에 있어서, 상기 프로젝터는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 바닥 프로젝션 컨텐츠를 투사하거나, 상기 바닥 프로젝션 컨텐츠에 더하여 벽면에 안무 내용이나 스토리텔링에 대응하는 배경 프로젝션 컨텐츠를 투사하는 것을 특징으로 하는 것이다.In the ballet class system using project mapping according to the present invention, the projector projects the floor projection content including the choreography content or the ballet action for storytelling, and the character on the floor, or the choreography content on the wall in addition to the floor projection content It is characterized in that the background projection content corresponding to the or storytelling is projected.

본 발명에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템에 있어서, 상기 컨텐츠 출력부는 플로어 바닥에 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 바닥 프로젝션 컨텐츠 또는 벽면에 안무 내용이나 스토리텔링에 대응하는 배경 프로젝션 컨텐츠를 상기 프로젝터로 전송하는 프로젝터 출력모듈; 및 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 저장하고, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체하도록 컨텐츠를 실시간 구동 제어하는 발레컨텐츠 구동 모듈을 포함하는 것을 특징으로 하는 것이다. In the ballet class system using project mapping according to the present invention, the content output unit corresponds to the floor projection content including the choreography content or storytelling on the floor, the ballet action for the storytelling on the floor, the floor projection content including the character, or the choreography content or storytelling on the wall a projector output module for transmitting the background projection content to the projector; And ballet motions for choreography or storytelling are expressed as characters, and ballet motions mapped with the choreography contents are stored as video contents, and the contents are driven and controlled in real time so that the video contents are replaced in real time according to the contents of the class. It is characterized in that it includes a ballet content driving module.

본 발명에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템에 있어서, 상기 발레 연출부는 컨텐츠 출력부에 접속하여 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하는 발레동작 편집모듈; 및 안무 내용 또는 발레 동작과 맵핑되는 동영상 컨텐츠가 실시간으로 교체되도록 제어하는 발레 컨텐츠 제어모듈을 포함하는 것을 특징으로 하는 것이다. In the ballet class system using project mapping according to the present invention, the ballet directing unit accesses the content output unit to edit and store each ballet motion data mapped with choreography content or ballet motions; and a ballet content control module for controlling the choreography content or the video content mapped with the ballet motion to be replaced in real time.

본 발명에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템에 있어서, 상기 교습자 인식부는 발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 교습자들의 표정, 배경이 촬영된 카메라로부터 영상 정보로 입력되는 카메라 입력모듈; 및 상기 카메라에서 취득된 영상정보로부터 안무 내용 또는 스토리텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 교습자의 위치정보를 인공지능 기반으로 추출하는 발레동작 인식모듈을 포함하는 것을 특징으로 하는 것이다. In the ballet class system using project mapping according to the present invention, the teacher recognition unit includes: a camera input module in which the movements of the ballet instructors, the instructors' facial expressions, and the background are inputted as image information from the camera when the ballet class is in progress; And it is characterized in that it comprises a ballet motion recognition module for extracting, based on artificial intelligence, motion information and the instructor's position information predefined as ballet motions corresponding to choreography or storytelling from the image information acquired from the camera.

본 발명에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템에 있어서, 상기 컨텐츠 출력부는 프록젝터에 발레 교습자를 위하여 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작에 대응하는 발모양을 투사하는 것을 특징으로 하는 것이다. In the ballet class system using project mapping according to the present invention, the content output unit projects a foot shape corresponding to a ballet motion for choreography content or storytelling on a floor for a ballet instructor on a projector.

한편, 본 발명에 따른 프로젝트 맵핑을 이용한 발레 수업 방법은, 발레연출부는 컨텐츠 출력부로 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어하는 단계; 컨텐츠 출력부는 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 상기 프로젝터에 제공하는 단계; 및 프로젝터는 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상으로 발레 플로어에 투사하는 단계를 포함하는 것이다.On the other hand, the ballet class method using the project mapping according to the present invention, the ballet directing unit comprising the steps of editing and storing each ballet motion data mapped with the choreography content or ballet motion to the content output unit, or controlling the video data in real time; The content output unit expresses ballet movements for choreography or storytelling as characters on the floor where the ballet class is conducted, and provides ballet movements mapped with the choreography contents as video contents, and the video contents are displayed in real time according to the contents of the class. replaced with the step of providing to the projector; and the projector expressing ballet motions for choreography or storytelling as characters on the floor where the ballet class is conducted, and projecting each ballet motion mapped with the ballet motions of the choreography content onto the ballet floor as a video.

한편, 본 발명에 따른 다른 프로젝트 맵핑을 이용한 발레 수업 방법은, 카메라가 발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 위치, 배경을 촬영하여 영상 정보로 취득하는 단계; 교습자 인식부는 상기 카메라에서 취득된 영상정보로부터 안무 내용 또는 스토리텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 위치정보를 인공지능 기반으로 추출하여 상기 발레 연출부로 실시간 제공하는 단계; 발레 연출부는 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어하는 단계; 컨텐츠 출력부는 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 프로젝터에 제공하는 단계; 및 프로젝터는 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상을 발레 플로어에 투사하는 단계를 포함하는 것을 특징으로 하는 것이다.On the other hand, the ballet lesson method using another project mapping according to the present invention, a camera, when the ballet class is in progress, the movement of the ballet instructors, the location and the background photographing the steps to acquire as image information; The teacher recognition unit extracting motion information and location information predefined as ballet motions corresponding to choreography or storytelling from the image information acquired from the camera based on artificial intelligence and providing them in real time to the ballet directing unit; The step of the ballet directing unit editing and storing each ballet motion data mapped with the choreography content or ballet motion or controlling the video data in real time; The content output unit expresses ballet movements for choreography or storytelling as characters on the floor where the ballet class is conducted, and provides ballet movements mapped with the choreography contents as video contents, and the video contents are displayed in real time according to the contents of the class. replaced with the step of providing to the projector; and the projector expressing ballet motions for choreography or storytelling as characters on the floor where the ballet class is conducted, and projecting a moving picture of each ballet motion mapped with the ballet motions of the choreography content onto the ballet floor. will do it with

또한, 본 발명에 따른 프로젝트 맵핑을 이용한 발레 수업 방법에 있어서, 상기 컨텐츠 출력부는 프로젝터에 발레 교습자를 위하여 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작에 대응하는 발모양을 투사하는 단계를 포함하는 것을 특징으로 하는 것이다.In addition, in the ballet class method using project mapping according to the present invention, the content output unit includes the step of projecting a foot shape corresponding to a ballet motion for choreography content or storytelling on a floor for a ballet instructor to a projector it is characterized by

본 발명은 플로어에 투사되는 발레동작 동영상에 의하여 다양한 배경 이미지를 보고 상황에 맞는 안무 동작을 즉흥적으로 구성할 수 있도록 하는 효과가 있다.The present invention has the effect of allowing the user to see various background images by the ballet motion video projected on the floor and to improvise the choreography motion according to the situation.

또한, 본 발명에 의하면 수업의 내용에 맞게 안무 영상이 실시간으로 교체되어 수업이 진행될 수 있는 효과가 있다. In addition, according to the present invention, the choreography image is replaced in real time according to the content of the class, so that the class can proceed.

또한, 본 발명에 의하면 수업 흐름에 맞춰 발레 발모양을 포함한 다양한 발레동작을 투사하고 장소에 상관없이 프로젝터만 있으면 어디서나 발레 수업이 가능하도록 하는 효과를 기대할 수 있다.In addition, according to the present invention, various ballet movements including ballet foot shapes are projected according to the flow of the class, and ballet classes can be expected anywhere as long as there is a projector regardless of location.

도1은 본 발명의 제1실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템의 개략적인 구성도이다.
도2는 도1에 도시된 프로젝트 맵핑을 이용한 발레 수업 시스템의 상세 블록도이다.
도3은 도1에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템이 구현된 예시도이다.
도4는 본 발명의 제2실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템의 개략적인 구성도이다.
도5는 도4에 도시된 프로젝트 맵핑을 이용한 발레 수업 시스템의 블록도이다.
도6은 도4에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템이 구현된 예시도이다.
도7은 본 발명의 제1실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 방법의 흐름도이다.
도8은 본 발명의 제2실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 방법의 흐름도이다.1 is a schematic configuration diagram of a ballet class system using project mapping according to a first embodiment of the present invention.
Figure 2 is a detailed block diagram of the ballet lesson system using the project mapping shown in Figure 1.
3 is an exemplary diagram in which the ballet class system using the project mapping according to FIG. 1 is implemented.
4 is a schematic configuration diagram of a ballet class system using project mapping according to a second embodiment of the present invention.
5 is a block diagram of a ballet class system using the project mapping shown in FIG.
6 is an exemplary diagram in which the ballet class system using the project mapping according to FIG. 4 is implemented.
7 is a flowchart of a ballet class method using project mapping according to the first embodiment of the present invention.
8 is a flowchart of a ballet class method using project mapping according to a second embodiment of the present invention.

이하, 첨부된 도면을 참조하면서 본 발명의 실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템 및 방법에 대해 상세히 설명하기로 한다. Hereinafter, a ballet class system and method using project mapping according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도1은 본 발명의 제1실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템의 개략적인 구성도이다.1 is a schematic configuration diagram of a ballet class system using project mapping according to a first embodiment of the present invention.

도1을 참조하면, 본 발명의 실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템은 컨텐츠 출력부(100), 프로젝터(200), 발레연출부(300)를 포함한다.Referring to FIG. 1 , the ballet class system using project mapping according to an embodiment of the present invention includes a content output unit 100 , a projector 200 , and a ballet directing unit 300 .

컨텐츠 출력부(100)는 상기 프로젝터(200)에 연결되어 발레 수업이 진행되는 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 저장하고, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 상기 프로젝터(200)에 제공한다.The content output unit 100 is connected to the projector 200 to express ballet motions for choreography or storytelling as characters on the floor 10 where ballet classes are conducted, and ballet motions mapped with the ballet motions of the choreography contents are displayed. It is stored as video content, and the video content is replaced in real time according to the content of the class and provided to the projector 200 .

상기 동영상 컨텐츠는 발레 안무나 동작과 관련하여 벽이나 바닥에 시각화된 영상 컨텐츠를 투영하는 것으로 발레 학습용으로 준비한 디지털 콘텐츠를 실시간으로 시각화하고 다양한 캐릭터를 나타낼 수 있게 한다.The video content is to project the video content visualized on the wall or floor in relation to the ballet choreography or motion, so that the digital content prepared for ballet learning can be visualized in real time and various characters can be represented.

특히, 상기 컨텐츠 출력부(100)는 프로젝터(200)에 발레 교습자를 위하여 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작에 대응하는 발모양을 투사하여 발레 수업 중 발레 동작을 안내할 수 있도록 한다.In particular, the content output unit 100 can guide the ballet movement during the ballet class by projecting the foot shape corresponding to the ballet movement for the choreography content or storytelling on the floor 10 for the ballet instructor on the projector 200 . let it be

프로젝터(200)는 발레 수업이 진행되는 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현되고 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상으로 발레 플로어(10)에 투사한다.The projector 200 expresses the ballet motions for choreography or storytelling as characters on the floor 10 where the ballet class is conducted, and each ballet motion mapped with the ballet motions of the choreography content is displayed on the ballet floor 10 as a video. project it

상기 프로젝터(200)에서 투사되는 영상 컨텐츠는 바닥 프로젝션 컨텐츠와 배경 프로젝션 컨텐츠가 있다. The image content projected by the projector 200 includes a floor projection content and a background projection content.

상기 바닥 프로젝션 컨텐츠는 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 것으로 플로어 바닥에 영상을 투사하는 것이다.The floor projection content includes ballet motions and characters for choreography or storytelling on the floor 10 and projects an image on the floor.

상기 배경 프로젝션 컨텐츠는 상기 바닥 프로젝션 컨텐츠에 더하여 벽면에 안무 내용이나 스토리텔링에 대응하는 배경 화면 컨텐츠를 투사하는 것이다.The background projection content is to project the background screen content corresponding to the choreography or storytelling on the wall in addition to the floor projection content.

상기 프로젝터(200)는 실시간 동영상 컨텐츠를 디스플레이할 수 있는 것으로서 증강현실(AR) 영상을 구현할 수 있는 것이 바람직하다. The projector 200 is preferably capable of displaying real-time video content and can implement an augmented reality (AR) image.

발레연출부(300)는 상기 컨텐츠 출력부(100)에 접속하여 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어한다.The ballet production unit 300 accesses the content output unit 100 to edit and store each ballet motion data mapped with choreography content or ballet motions or control video data in real time.

도2는 도1에 도시된 프로젝트 맵핑을 이용한 발레 수업 시스템의 상세 블록도이다.Figure 2 is a detailed block diagram of the ballet lesson system using the project mapping shown in Figure 1.

도2를 참조하면, 도1에 도시된 프로젝트 맵핑을 이용한 발레 수업 시스템에서 상기 컨텐츠 출력부(200)는 프로젝터 출력모듈(210), 발레 컨텐츠 구동모듈(220)을 포함한다.Referring to FIG. 2 , in the ballet class system using the project mapping shown in FIG. 1 , the content output unit 200 includes a projector output module 210 and a ballet content driving module 220 .

프로젝터 출력모듈(210)는 플로어(10) 바닥에 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 바닥 프로젝션 컨텐츠 또는 벽면에 안무 내용이나 스토리텔링에 대응하는 배경 프로젝션 컨텐츠를 상기 프로젝터로 전송한다.The projector output module 210 transmits the background projection content corresponding to the choreography content or storytelling on the floor 10 to the floor projection content including the ballet action, character, or the choreography content or storytelling on the wall to the projector. .

발레 컨텐츠 구동모듈(220)은 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 저장하고, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체하도록 컨텐츠를 실시간 구동 제어한다.The ballet content driving module 220 expresses ballet motions for choreography or storytelling as characters, stores the ballet motions mapped with the ballet motions of the choreography contents as video contents, and replaces the video contents in real time according to the content of the class. Real-time driving control of the content.

또한, 도2를 참조하면 프로젝트 맵핑을 이용한 발레 수업 시스템에서 상기 발레 연출부(300)는 발레동작 편집모듈(320), 발레 컨텐츠 제어모듈(310)을 포함한다.In addition, referring to FIG. 2 , in the ballet class system using project mapping, the ballet directing unit 300 includes a ballet motion editing module 320 and a ballet content control module 310 .

상기 발레동작 편집모듈(320)은 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집하여 발레 동작 컨텐츠로 발레 컨텐츠 제어모듈(310)에 저장한다.The ballet motion editing module 320 edits each ballet motion data mapped with choreography content or ballet motion and stores it in the ballet content control module 310 as ballet motion content.

발레 컨텐츠 제어모듈(310)은 컨텐츠 출력부(200)에 접속하여 발레동작 편집모듈(320)에서 편집되어 저장된 동작데이터에 따라서 안무 내용 또는 발레 동작과 맵핑되는 동영상 컨텐츠가 실시간으로 교체되도록 제어하는 것이다.The ballet content control module 310 is connected to the content output unit 200 to control so that the video content mapped with the choreography content or ballet movement is replaced in real time according to the motion data edited and stored in the ballet motion editing module 320 . .

도3은 도1, 도2에서 기술된 프로젝트 맵핑을 이용한 발레 수업 시스템에 의하여 구현된 실시예를 나타내고 있는 것으로서, 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상으로 플로어(10)에 투사하면서 실시간으로 구현되도록 하는 장면을 보여준다.3 shows an embodiment implemented by the ballet class system using the project mapping described in FIGS. 1 and 2, and represents ballet motions for choreography content or storytelling as characters, so that ballet motions and mapping of choreography contents It shows a scene to be implemented in real time while projecting the ballet movements to be performed on the floor 10 as a video.

도4는 본 발명의 제2실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템의 개략적인 구성도이다.4 is a schematic configuration diagram of a ballet class system using project mapping according to a second embodiment of the present invention.

도4를 참조하면, 본 발명의 실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 시스템은 컨텐츠 출력부(100), 프로젝터(200), 발레연출부(300), 교습자인식부(400) 및 카메라(500)를 포함한다.Referring to FIG. 4 , the ballet class system using project mapping according to an embodiment of the present invention is a content output unit 100 , a projector 200 , a ballet director 300 , a teacher recognition unit 400 and a camera 500 . includes

컨텐츠 출력부(100)는 상기 프로젝터(200)에 연결되어 발레 수업이 진행되는 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 저장하고, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 상기 프로젝터(200)에 제공한다.The content output unit 100 is connected to the projector 200 to express ballet motions for choreography or storytelling as characters on the floor 10 where ballet classes are conducted, and ballet motions mapped with the ballet motions of the choreography contents are displayed. It is stored as video content, and the video content is replaced in real time according to the content of the class and provided to the projector 200 .

프로젝터(200)는 발레 수업이 진행되는 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상으로 플로어(10)에 투사한다.The projector 200 projects the ballet motions for the choreography or storytelling in which the ballet class is conducted as characters, and each ballet motion mapped with the ballet motions of the choreography contents is projected onto the floor 10 as a moving picture.

발레연출부(300)는 상기 컨텐츠 출력부(100)에 접속하여 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어한다.The ballet production unit 300 accesses the content output unit 100 to edit and store each ballet motion data mapped with choreography content or ballet motions or control video data in real time.

상기 카메라(500)는 발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 교습자들의 표정, 배경을 촬영하여 영상 정보로 취득한다.The camera 500 acquires image information by photographing movements of the ballet instructors, facial expressions, and backgrounds of the instructors when the ballet class is in progress.

상기 교습자 인식부(400)는 상기 카메라(500)에서 취득된 영상정보로부터 안무 내용 또는 스토리텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 위치정보를 인공지능 기반으로 추출하여 상기 발레 연출부(300)로 실시간으로 제공한다.The teacher recognition unit 400 extracts motion information and location information predefined as ballet motions corresponding to choreography content or storytelling based on artificial intelligence from the image information acquired from the camera 500, and the ballet directing unit 300 ) in real time.

또한, 도1에 도시된 시스템의 구성에 설명된 내용들은 도4에 도시된 시스템에서 동일하다. Also, the contents described in the configuration of the system shown in FIG. 1 are the same as in the system shown in FIG.

도5는 도4에 도시된 프로젝트 맵핑을 이용한 발레 수업 시스템의 상세 블록도이다.5 is a detailed block diagram of a ballet class system using the project mapping shown in FIG.

도5를 참조하면, 도4에 도시된 프로젝트 맵핑을 이용한 발레 수업 시스템에서 상기 컨텐츠 출력부(200)는 프로젝터 출력모듈(210), 발레 컨텐츠 구동모듈(220)을 포함한다.Referring to FIG. 5 , in the ballet class system using the project mapping shown in FIG. 4 , the content output unit 200 includes a projector output module 210 and a ballet content driving module 220 .

상기 컨텐츠 출력부(200)는 프로젝터 출력모듈(210), 발레 컨텐츠 구동모듈(220)을 포함한다.The content output unit 200 includes a projector output module 210 and a ballet content driving module 220 .

프로젝터 출력모듈(210)은 플로어(10) 바닥에 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 바닥 프로젝션 컨텐츠 또는 벽면에 안무 내용이나 스토리텔링에 대응하는 배경 프로젝션 컨텐츠를 상기 프로젝터로 전송한다.The projector output module 210 transmits the background projection content corresponding to the choreography content or storytelling on the floor 10 to the floor projection content including the ballet action and character on the floor or the choreography content or storytelling on the wall to the projector. .

발레 컨텐츠 구동모듈(220)은 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 저장하고, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체하도록 컨텐츠를 실시간 구동 제어한다.The ballet content driving module 220 expresses ballet motions for choreography or storytelling as characters, stores the ballet motions mapped with the ballet motions of the choreography contents as video contents, and replaces the video contents in real time according to the content of the class. Real-time driving control of the content.

또한, 도5를 참조하면 프로젝트 맵핑을 이용한 발레 수업 시스템에서 상기 발레 연출부(300)는 발레동작 편집모듈(320), 발레 컨텐츠 제어모듈(310)을 포함한다.In addition, referring to FIG. 5 , in the ballet class system using project mapping, the ballet directing unit 300 includes a ballet motion editing module 320 and a ballet content control module 310 .

상기 발레동작 편집모듈(320)은 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집하여 발레 동작 컨텐츠로 발레 컨텐츠 제어모듈(310)에 저장한다.The ballet motion editing module 320 edits each ballet motion data mapped with choreography content or ballet motion and stores it in the ballet content control module 310 as ballet motion content.

발레 컨텐츠 제어모듈(310)은 컨텐츠 출력부(200)에 접속하여 발레동작 편집모듈(320)에서 편집되어 저장된 동작데이터에 따라서 안무 내용 또는 발레 동작과 맵핑되는 동영상 컨텐츠가 실시간으로 교체되도록 제어하는 것이다.The ballet content control module 310 is connected to the content output unit 200 to control so that the video content mapped with the choreography content or ballet movement is replaced in real time according to the motion data edited and stored in the ballet motion editing module 320 . .

또한, 도5를 참조하면 프로젝트 맵핑을 이용한 발레 수업 시스템에서 상기 교습자 인식부(400)는 카메라 입력모듈(410), 동작 인식모듈(420)을 포함한다.In addition, referring to FIG. 5 , in the ballet class system using project mapping, the instructor recognition unit 400 includes a camera input module 410 and a motion recognition module 420 .

상기 카메라 입력모듈(410)은 발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 교습자들의 표정, 배경이 촬영된 카메라(500)로부터 영상 정보로 입력된다.The camera input module 410 is input as image information from the camera 500 in which the movements of the ballet instructors, the instructors' expressions, and the background are photographed when the ballet class is in progress.

이때, 상기 동작 인식모듈(420)은 상기 카메라(500)에서 취득된 영상정보로부터 안무 내용 또는 스토리텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 교습자의 위치정보를 인공지능 기반으로 추출하여 발레 연출부(300)로 동작 인식 데이터와 위치 인식 데이터를 실시간 전송하면, 발레 컨텐츠 제어모듈(310)은 이를 참고하여 컨텐츠 출력부(100)의 발레컨텐츠 구동모듈(120)을 실시간 제어하도록 한다.At this time, the motion recognition module 420 extracts the motion information and the instructor's location information predefined as a ballet motion corresponding to the choreography or storytelling from the image information acquired from the camera 500 based on artificial intelligence and extracts ballet When motion recognition data and location recognition data are transmitted in real time to the directing unit 300 , the ballet content control module 310 controls the ballet content driving module 120 of the content output unit 100 in real time with reference to this.

도6은 도4, 도5에서 기술된 프로젝트 맵핑을 이용한 발레 수업 시스템에 의하여 구현된 실시예를 나타내고 있는 것으로서, 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하고 교습자의 동작을 인식하고 이에 맵핑되는 발레 동작들을 캐릭터 영상으로 벽면에 투사하면서 실시간으로 구현되도록 하는 장면을 보여준다.6 shows an embodiment implemented by the ballet class system using the project mapping described in FIGS. 4 and 5. The ballet motion for choreography or storytelling is expressed as a character, and the instructor's motion is recognized and It shows a scene in which the mapped ballet movements are realized in real time while projecting them on the wall as character images.

도7은 본 발명의 제1실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 방법의 흐름도이다.7 is a flowchart of a ballet class method using project mapping according to the first embodiment of the present invention.

도7을 참조하면, 발레연출부(300)는 컨텐츠 출력부(100)로 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어한다(S100).Referring to FIG. 7 , the ballet production unit 300 edits and stores the choreography content or each ballet motion data mapped with the ballet motion to the content output unit 100 or controls the video data in real time (S100).

다음으로, 컨텐츠 출력부(100)는 발레 수업이 진행되는 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 상기 프로젝터에 제공한다(S200).Next, the content output unit 100 expresses the ballet motions for choreography or storytelling as characters on the floor 10 where the ballet class is conducted, and provides the ballet motions mapped with the ballet motions of the choreography contents as video contents, , the video content is replaced in real time according to the content of the class and provided to the projector (S200).

다음으로, 프로젝터(200)는 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상으로 발레 플로어에 투사하게 된다(S300).Next, the projector 200 expresses the ballet motions for choreography or storytelling as characters on the floor where the ballet class is conducted, and projects the ballet motions mapped with the ballet motions of the choreography content on the ballet floor as a video. (S300).

상기 프로젝터(200)에서 투사되는 영상 컨텐츠는 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 것으로 플로어 바닥에 영상을 투사하거나, 상기 바닥 프로젝션 컨텐츠에 더하여 벽면에 안무 내용이나 스토리텔링에 대응하는 배경 화면 컨텐츠를 투사하는 것이다.The image content projected from the projector 200 includes ballet motions and characters for choreography content or storytelling on the floor 10, and the image is projected on the floor floor, or choreography content on the wall in addition to the floor projection content It is to project the background screen content corresponding to the storytelling.

이때, 상기 컨텐츠 출력부(100)는 프로젝터(200)에 발레 교습자를 위하여 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작에 대응하는 발모양을 투사하는 단계를 더 포함할 수 있다.In this case, the content output unit 100 may further include the step of projecting the foot shape corresponding to the ballet action for the choreography content or storytelling on the floor for the ballet instructor to the projector 200 .

도8은 본 발명의 제2실시예에 따른 프로젝트 맵핑을 이용한 발레 수업 방법의 흐름도이다.8 is a flowchart of a ballet class method using project mapping according to a second embodiment of the present invention.

도8을 참조하면 다음과 같은 과정을 통하여 프로젝트 맵핑을 이용한 발레 수업이 진행된다.Referring to FIG. 8 , a ballet class using project mapping is performed through the following process.

먼저, 카메라(500)가 발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 위치, 배경을 촬영하여 영상 정보로 취득한다(S10).First, the camera 500 captures the motions, positions, and backgrounds of the ballet instructors moving when the ballet class is in progress and acquires them as image information (S10).

다음에, 교습자 인식부(400)는 상기 카메라(500)에서 취득된 영상정보로부터 안무 내용 또는 스토리텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 위치정보를 인공지능 기반으로 추출하여 상기 발레 연출부(300)로 실시간 제공한다(S20).Next, the teacher recognition unit 400 extracts motion information and location information predefined as a ballet motion corresponding to choreography or storytelling from the image information acquired from the camera 500 based on artificial intelligence, and the ballet directing unit (300) provides real-time (S20).

이에 따라, 발레 연출부(300)는 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집, 저장하거나 동영상 데이터를 실시간으로 제어하게 된다(S30).Accordingly, the ballet directing unit 300 edits and stores each ballet motion data mapped with the choreography content or ballet motion or controls the video data in real time (S30).

다음으로, 컨텐츠 출력부(100)는 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 프로젝터(200)에 제공하는 단계를 진행한다(S40).Next, the content output unit 100 expresses the ballet motions for choreography or storytelling as characters on the floor where the ballet class is conducted, and provides the ballet motions mapped with the ballet motions of the choreography contents as video contents, The video content is replaced in real time according to the content and provided to the projector 200 (S40).

이에 따라, 프로젝터(200)는 발레 수업이 진행되는 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 동영상을 발레 플로어에 투사한다(S50).Accordingly, the projector 200 expresses the ballet motion for choreography or storytelling as a character on the floor 10 where the ballet class is conducted, and displays the video of each ballet motion mapped with the ballet motion of the choreography content on the ballet floor. project (S50).

상기 프로젝터(200)에서 투사되는 영상 컨텐츠는 플로어(10)에 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 것으로 플로어 바닥에 영상을 투사하거나, 상기 바닥 프로젝션 컨텐츠에 더하여 벽면에 안무 내용이나 스토리텔링에 대응하는 배경 화면 컨텐츠를 투사하는 것이다.The image content projected from the projector 200 includes ballet motions and characters for choreography content or storytelling on the floor 10, and the image is projected on the floor floor, or choreography content on the wall in addition to the floor projection content It is to project the background screen content corresponding to the storytelling.

이때, 상기 컨텐츠 출력부(100)는 프로젝터(200)에 발레 교습자를 위하여 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작에 대응하는 발모양을 투사하는 단계를 더 포함할 수 있다.In this case, the content output unit 100 may further include the step of projecting the foot shape corresponding to the ballet action for the choreography content or storytelling on the floor for the ballet instructor to the projector 200 .

이상에서 본 발명은 기재된 구체적인 실시예에 대해서만 상세히 설명되었지만 본 발명의 기술사상 범위 내에서 다양한 변형 및 수정이 가능함은 당업자에게 있어서 명백한 것이며, 이러한 변형 및 수정이 첨부된 특허청구범위에 속함은 당연한 것이다.Although the present invention has been described in detail with respect to the specific embodiments described above, it is obvious to those skilled in the art that various changes and modifications are possible within the scope of the technical spirit of the present invention, and it is natural that such variations and modifications belong to the appended claims. .

10 : 플로어 100 : 컨텐츠 출력부
110 : 프로젝터 출력모듈 120 : 발레컨텐츠 구동모듈
200 : 프로젝터 300 : 발레연출부
310 : 발레컨텐츠제어모듈 320 : 발레동작 편집모듈
400 : 교습자 인식부 410 : 카메라 입력모듈
420 : 동작인식모듈 500 : 카메라 10: floor 100: content output unit
110: projector output module 120: ballet content driving module
200: Projector 300: Ballet Director
310: ballet content control module 320: ballet motion editing module
400: teacher recognition unit 410: camera input module
420: motion recognition module 500: camera

Claims (10)

삭제delete 발레 수업이 진행되는 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 영상으로 발레 플로어에 투사하되,
안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 바닥 프로젝션 컨텐츠를 플로어 바닥에 투과하고, 안무 내용이나 스토리텔링에 대응하는 배경 화면 컨텐츠를 포함하는 배경 프로젝션 컨텐츠를 벽면에 각각 투사하는 프로젝터;
상기 프로젝터에 연결되어 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 상기 프로젝터에 제공하는 컨텐츠 출력부;
발레 수업이 진행되는 동안 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 실시간으로 편집, 저장하고, 컨텐츠 출력부에 접속하여 편집, 저장된 동작데이터에 따라서 실시간으로 컨텐츠를 변경하거나 제어하는 발레 연출부;
발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 교습자들의 표정, 배경을 촬영하여 영상 정보로 취득하는 카메라; 및
상기 카메라에서 취득된 영상정보로부터 안무 내용 또는 스토리 텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 위치정보를 인공지능 기반으로 추출하여 상기 발레 연출부로 실시간 제공하는 교습자 인식부를 포함하는 것을 특징으로 하는 프로젝트 맵핑을 이용한 발레 수업 시스템.Each ballet movement mapped with the ballet movement of the choreography content is projected on the ballet floor as an image by expressing the ballet movement for the choreography content or storytelling in the ballet class as a character,
a projector that transmits the floor projection content including the ballet action and characters for choreography or storytelling through the floor, and projects the background projection content including the background screen content corresponding to the choreography or storytelling on the wall, respectively;
It is connected to the projector and expresses ballet motions for choreography or storytelling as characters on the floor where the ballet class is conducted, and provides video contents with ballet motions mapped with the ballet motions of the choreography contents as video contents. a content output unit that is replaced in real time and provided to the projector;
During the ballet class, the ballet director edits and stores the choreography content or each ballet motion data mapped with the ballet motion in real time, and accesses the contents output unit to change or control the contents in real time according to the edited and stored motion data. ;
a camera that captures the movements of the ballet instructors, the instructors' facial expressions, and the background during a ballet class to obtain video information; and
It comprises a teacher recognition unit that extracts motion information and location information predefined as ballet motions corresponding to choreography or storytelling based on artificial intelligence from the image information acquired from the camera and provides them to the ballet directing unit in real time. Ballet class system using project mapping. 삭제delete 제 2 항에 있어서,
상기 컨텐츠 출력부는,
플로어 바닥에 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 바닥 프로젝션 컨텐츠 또는 벽면에 안무 내용이나 스토리텔링에 대응하는 배경 프로젝션 컨텐츠를 상기 프로젝터로 전송하는 프로젝터 출력모듈; 및
안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 저장하고, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체하도록 컨텐츠를 실시간 구동 제어하는 발레컨텐츠 구동모듈을 포함하는 것을 특징으로 하는 프로젝트 맵핑을 이용한 발레 수업 시스템. 3. The method of claim 2,
The content output unit,
a projector output module for transmitting, to the projector, floor projection content including choreography content or storytelling on the floor, ballet action for storytelling, or background projection content corresponding to choreography content or storytelling on a wall; and
Ballet that expresses ballet movements for choreography or storytelling as characters, stores the ballet movements mapped with the choreography contents as video contents, and controls the contents in real-time so that the video contents are replaced in real time according to the contents of the class Ballet class system using project mapping, characterized in that it includes a content driving module. 제 2 항에 있어서,
상기 발레 연출부는,
안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 편집하여, 발레 컨텐츠 제어 모듈로 저장하는 발레동작 편집모듈; 및
컨텐츠 출력부에 접속하여 발레동작 편집모듈에 의하여 저장된 동작데이터에 따라서 안무 내용 또는 발레 동작과 맵핑되는 동영상 컨텐츠가 실시간으로 교체되도록 제어하는 발레 컨텐츠 제어모듈을 포함하는 것을 특징으로 하는 프로젝트 맵핑을 이용한 발레 수업 시스템. 3. The method of claim 2,
The ballet directing department,
a ballet motion editing module that edits each ballet motion data mapped with choreography content or ballet motion and stores it as a ballet contents control module; and
Ballet using project mapping, characterized in that it includes a ballet content control module that accesses the content output unit and controls so that the video content mapped with the choreography content or ballet action is replaced in real time according to the motion data stored by the ballet motion editing module class system. 제 2 항에 있어서,
상기 교습자 인식부는,
발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 교습자들의 표정, 배경이 촬영된 카메라로부터 영상 정보로 입력되는 카메라 입력모듈; 및
상기 카메라에서 취득된 영상정보로부터 안무 내용 또는 스토리 텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 교습자의 위치정보를 인공지능 기반으로 추출하는 발레동작 인식모듈을 포함하는 것을 특징으로 하는 프로젝트 맵핑을 이용한 발레 수업 시스템. 3. The method of claim 2,
The teacher recognition unit,
a camera input module in which ballet instructors' movements, facial expressions, and background are inputted as image information from a camera when a ballet class is in progress; and
Project mapping, characterized in that it includes a ballet motion recognition module that extracts motion information and the instructor's location information predefined as ballet motions corresponding to choreography or storytelling from the image information acquired from the camera based on artificial intelligence. Ballet class system used. 제 2 항에 있어서,
상기 컨텐츠 출력부는 프로젝터에 발레 교습자를 위하여 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작에 대응하는 발모양을 투사하는 것을 특징으로 하는 프로젝트 맵핑을 이용한 발레 수업 시스템.3. The method of claim 2,
Ballet class system using project mapping, characterized in that the content output unit projects a foot shape corresponding to a ballet motion for choreography or storytelling on the floor for a ballet instructor on a projector. 삭제delete 카메라가 발레 수업이 진행될 때 발레 교습자들이 움직이는 동작과 위치, 배경을 촬영하여 영상 정보로 취득하는 단계;
교습자 인식부는 상기 카메라에서 취득된 영상정보로부터 안무 내용 또는 스토리텔링에 대응되는 발레 동작으로서 미리 정의된 동작정보와 위치정보를 인공지능 기반으로 추출하여 발레 연출부로 실시간 제공하는 단계;
발레 연출부는 발레 수업이 진행되는 동안 안무 내용 또는 발레 동작과 맵핑되는 각각의 발레 동작 데이터를 실시간으로 편집, 저장하고, 컨텐츠 출력부에 접속하여 편집, 저장된 발레 동작데이터에 따라서 실시간으로 컨텐츠를 변경하거나 제어하는 단계;
컨텐츠 출력부는 발레 수업이 진행되는 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 발레 동작들을 동영상 컨텐츠로 제공하며, 수업의 내용에 맞게 동영상 컨텐츠가 실시간으로 교체되어 프로젝터에 제공하는 단계; 및
프로젝터는 발레 수업이 진행되는 안무 내용이나 스토리텔링에 대한 발레 동작을 캐릭터로 표현하여 안무 내용의 발레동작과 맵핑되는 각각의 발레 동작들을 영상으로 발레 플로어에 투사하되, 안무 내용이나 스토리텔링에 대한 발레 동작, 캐릭터를 포함하는 바닥 프로젝션 컨텐츠를 플로어 바닥에 투과하고, 안무 내용이나 스토리텔링에 대응하는 배경 화면 컨텐츠를 포함하는 배경 프로젝션 컨텐츠를 벽면에 각각 투사하는 단계를 포함하는 것을 특징으로 하는 프로젝트 맵핑을 이용한 발레 수업 방법.The camera acquires video information by photographing the movements, positions, and backgrounds of the ballet instructors moving when the ballet class is in progress;
The teacher recognition unit extracting motion information and location information predefined as ballet motions corresponding to choreography or storytelling from the image information acquired from the camera based on artificial intelligence and providing them in real time to the ballet directing unit;
The ballet directing department edits and stores the choreography content or each ballet motion data mapped with the ballet motion in real time during the ballet class, and accesses the content output unit to edit and change the contents in real time according to the stored ballet motion data. controlling;
The content output unit expresses ballet movements for choreography or storytelling as characters on the floor where the ballet class is conducted, and provides ballet movements mapped with the choreography contents as video contents, and video contents are displayed in real time according to the contents of the class. replaced with the step of providing to the projector; and
The projector expresses the ballet motions for the choreography or storytelling in the ballet class as characters, and projects each ballet motion mapped with the ballet motions of the choreography content onto the ballet floor as an image, but Project mapping, characterized in that it includes the steps of penetrating the floor projection content including the motion and character to the floor floor, and projecting the background projection content including the background screen content corresponding to the choreography or storytelling on the wall, respectively. How to use ballet lessons. 제 9 항에 있어서,
상기 컨텐츠 출력부는 프로젝터에 발레 교습자를 위하여 플로어에 안무 내용이나 스토리텔링에 대한 발레 동작에 대응하는 발모양을 투사하는 단계를 포함하는 것을 특징으로 하는 프로젝트 맵핑을 이용한 발레 수업 방법.10. The method of claim 9,
Ballet teaching method using project mapping, characterized in that the content output unit comprises the step of projecting a foot shape corresponding to the ballet motion for the choreography content or storytelling on the floor for the ballet instructor to the projector.
KR1020190060203A 2019-05-22 2019-05-22 System and method for ballet lesson using projection mapping KR102262894B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190060203A KR102262894B1 (en) 2019-05-22 2019-05-22 System and method for ballet lesson using projection mapping

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190060203A KR102262894B1 (en) 2019-05-22 2019-05-22 System and method for ballet lesson using projection mapping

Publications (2)

Publication Number Publication Date
KR20200134574A KR20200134574A (en) 2020-12-02
KR102262894B1 true KR102262894B1 (en) 2021-06-08

Family

ID=73792168

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190060203A KR102262894B1 (en) 2019-05-22 2019-05-22 System and method for ballet lesson using projection mapping

Country Status (1)

Country Link
KR (1) KR102262894B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101979750B1 (en) * 2018-09-07 2019-05-17 주식회사 큐랩 Dance training contents authoring system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010000836A (en) 2000-10-23 2001-01-05 백흥재 Method of Providing Dance Education Services in the Internet
KR20020060396A (en) 2001-01-10 2002-07-18 유덕종 Dance Practice Room Using Digital Imaging System
KR101572346B1 (en) * 2014-01-15 2015-11-26 (주)디스트릭트홀딩스 Service system and service method for augmented reality stage, live dance stage and live audition
KR20170010157A (en) * 2015-07-15 2017-01-26 (주)블루클라우드 Method for guiding actions of an user in interactive exercise programs and the apparatus thereof

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101979750B1 (en) * 2018-09-07 2019-05-17 주식회사 큐랩 Dance training contents authoring system

Also Published As

Publication number Publication date
KR20200134574A (en) 2020-12-02

Similar Documents

Publication Publication Date Title
KR102186607B1 (en) System and method for ballet performance via augumented reality
CN106875764B (en) Virtual reality foreign language learning system based on network and control method
US9939887B2 (en) Avatar control system
JP2021507408A (en) Methods and systems for generating and displaying 3D video in virtual, enhanced, or mixed reality environments
KR20200024441A (en) Smart Realtime Lecture, Lecture Capture and Tele-Presentation-Webinar, VR Class room, VR Conference method using Virtual/Augmented Reality Class Room and Artificial Intelligent Virtual Camera Switching technologies
CN111047925B (en) Action learning system and method based on room type interactive projection
US20220293008A1 (en) Virtual-scene-based language-learning system and device thereof
KR20150084586A (en) Kiosk and system for authoring video lecture using virtual 3-dimensional avatar
CN112331001A (en) Teaching system based on virtual reality technology
CN109032339A (en) A kind of method and system that real-time intelligent body-sensing is synchronous
CN108831216B (en) True three-dimensional virtual simulation interaction method and system
KR102262894B1 (en) System and method for ballet lesson using projection mapping
KR101539972B1 (en) Robot study system using stereo image block and method thereof
CN110992486B (en) Shooting method of underwater simulation shooting system based on VR technology
CN107688412A (en) The control method of display device, display system and display device
CN112675527A (en) Family education game system and method based on VR technology
CN115379278B (en) Recording method and system for immersion type micro lessons based on augmented reality (XR) technology
KR20140091141A (en) A video image communication system using game engine based three-dimensional character and its managing method
CN116503522A (en) Interactive picture rendering method, device, equipment, storage medium and program product
KR20220132936A (en) Method and device for moving picture device using projector
CN109461351B (en) Three-screen interactive augmented reality game training system
KR101209012B1 (en) Play interface device for education using character robot
CN112270854A (en) Teaching system, teaching equipment and teaching method
KR101895281B1 (en) Apparatus for capturing stick-type object in augmented reality environment and method thereof
TWI789083B (en) Method and system for controlling augmented reality content playback andcomputer readable medium thererfor

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant