KR20050082559A - Dance learning system, internet community service system and internet community service method using the same, dance learning method, and computer executable recording media on which programs implement said methods are recorded - Google Patents
Dance learning system, internet community service system and internet community service method using the same, dance learning method, and computer executable recording media on which programs implement said methods are recorded Download PDFInfo
- Publication number
- KR20050082559A KR20050082559A KR1020040011036A KR20040011036A KR20050082559A KR 20050082559 A KR20050082559 A KR 20050082559A KR 1020040011036 A KR1020040011036 A KR 1020040011036A KR 20040011036 A KR20040011036 A KR 20040011036A KR 20050082559 A KR20050082559 A KR 20050082559A
- Authority
- KR
- South Korea
- Prior art keywords
- dance
- user
- image
- data
- virtual character
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000033001 locomotion Effects 0.000 claims abstract description 90
- 230000000694 effects Effects 0.000 claims abstract description 9
- 239000000284 extract Substances 0.000 claims abstract description 4
- 238000013500 data storage Methods 0.000 claims description 35
- 230000006870 function Effects 0.000 claims description 21
- 238000004519 manufacturing process Methods 0.000 claims description 19
- 238000012545 processing Methods 0.000 claims description 16
- 230000005540 biological transmission Effects 0.000 claims description 7
- 230000002194 synthesizing effect Effects 0.000 claims description 5
- 230000002452 interceptive effect Effects 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 claims 1
- 238000005259 measurement Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 241000282326 Felis catus Species 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
- A63F13/537—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
- H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- Primary Health Care (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Health & Medical Sciences (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Educational Technology (AREA)
- Optics & Photonics (AREA)
- Educational Administration (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
본 발명은 3차원 가상 캐릭터를 활용한 댄스 학습 시스템 및 방법, 그리고 이를 이용한 인터넷 커뮤니티 서비스 시스템 및 방법에 관한 것이다.The present invention relates to a dance learning system and method using 3D virtual characters, and to an internet community service system and method using the same.
본 발명에 따른 댄스 학습 시스템 및 방법은 사용자의 댄스 동작을 촬영하여 가상 캐릭터의 댄스 영상과 함께 디스플레이 함으로써 사용자가 자신의 동작과 가상 캐릭터의 동작을 비교하면서 댄스 학습을 수행하도록 한다. 여기서, 사용자의 댄스 영상을 출력할 때 좌우 부분을 반전하여 거울 이미지를 보는듯한 효과를 얻음으로써 댄스 학습 효과를 제고시키고 있다.The dance learning system and method according to the present invention captures the dance motion of the user and displays it along with the dance image of the virtual character so that the user can perform dance learning while comparing his motion with the motion of the virtual character. Here, when the user outputs a dance image, the left and right portions are reversed to obtain the effect of viewing a mirror image, thereby improving the dance learning effect.
본 발명에 따른 인터넷 커뮤니티 서비스 시스템 및 방법은 상기한 댄스 학습 시스템을 이용한 것으로서, 제작측 사용자 단말기, 열람측 사용자 단말기 및 서버 시스템으로 구성되는데, 이에 의해 사용자가 댄스 학습 과정에서 자신의 댄스 영상 이미지를 추출하여 이를 다른 사람들과 공유할 수 있게 된다.The Internet community service system and method according to the present invention uses the dance learning system described above, and is composed of a production-side user terminal, a viewing-side user terminal, and a server system, thereby allowing a user to display his dance image in a dance learning process. You can extract it and share it with others.
Description
본 발명은 3차원 가상 캐릭터 기법을 이용한 댄스 학습 시스템에 관한 것으로서, 더 자세하게는 댄스 동작을 3차원 가상 캐릭터로 형상화하여 사용자에게 표시하고, 이를 이용해 댄스 학습을 수행하는 시스템 및 방법과, 아울러 사용자의 댄스 데이터를 기록하여 인터넷 커뮤니티를 통해 서로 공유할 수 있도록 하는 인터넷 서비스 시스템 및 방법에 관한 것이다.The present invention relates to a dance learning system using a 3D virtual character technique, and more particularly, a system and method for performing a dance learning using the same by shaping a dance motion as a 3D virtual character, and using the same. The present invention relates to an internet service system and a method for recording dance data and sharing the same with each other through an internet community.
일반적으로 사람들은 댄스를 배우기 위해서, 댄스 교습소 등을 통해 자신이 배우고자 하는 댄스를 잘 알고 있는 사람으로부터 직접 댄스 동작을 배우거나, 혹은 댄스 교본, 비디오테이프 등을 활용하는 방법을 이용하고 있다. 그러나 댄스 숙련자를 통해 댄스를 배우는 방법은 댄스 강습소의 수강비용이나, 자유로운 시간 활용의 측면에서 비경제적이며, 교본이나 비디오테이프를 활용하는 방법은 정확한 댄스 동작을 익히는 데에는 한계가 있다는 문제점이 있다.In general, in order to learn dance, people use dance lessons or dance tapes, video tapes, or the like to learn dance moves directly from people who are familiar with the dances they want to learn. However, the method of learning dance through a dance expert is uneconomical in terms of the cost and free time of the dance class, and the method of using textbooks or video tapes has a limitation in learning accurate dance motions.
그에 따라, 컴퓨터, 비디오 게임기 등을 활용하여 가정에서 손쉽게 효과적으로 댄스를 학습할 수 있는 방법들이 제시되어 왔는데, 특히 최근 들어 방대한 그래픽 정보를 처리할 수 있는 컴퓨터 하드웨어 및 소프트웨어의 비약적인 발전과 더불어, 이를 활용한 댄스 학습 및 댄스 게임 시스템의 개발이 활발하게 이루어지고 있다.Accordingly, there have been suggested ways to learn dance easily and effectively at home using computer, video game console, etc. In particular, with recent development of computer hardware and software that can process huge graphic information, The development of a dance learning and dance game system is being actively performed.
이러한 댄스 학습 및 댄스 게임 시스템들은 크게 두 가지 부류로 나누어 볼 수 있는데, 그 첫 번째는 댄스 숙련자의 댄스 동작을 녹화한 동영상이나 모션캡쳐 기술을 통해 구현한 가상캐릭터의 댄스 동작을 화면상에 표시하고, 사용자가 이를 따라서 몸을 움직임으로써 댄스를 학습하는 방식을 들 수 있는데, 이러한 방법은 화면상에 디스플레이되는 댄스 동작과 자신의 동작을 비교하기 어렵기 때문에 정확한 댄스 동작을 익히기에는 적당하지 않다. 두 번째는 발판이나 동작 감지 센서 등을 활용하여 사용자의 동작을 체크하면서 댄스를 학습할 수 있도록 하는 방법인데, 주로 게임 시스템에 많이 사용되고 있는 방법이다. 이에 의할 경우 사용자의 댄스 동작을 어느 정도 체크할 수는 있으나, 복잡하고 미묘한 댄스 동작을 정밀하게 감지하여 사용자에게 정확한 댄스 동작을 습득시키기에는 부족함이 없지 아니하다.These dance learning and dance game systems can be divided into two categories. The first is a video recording of a dance expert's dance movement or a virtual character's dance movement implemented through motion capture technology. For example, the user may learn a dance by moving his or her body. This method is not suitable for learning the correct dance motion because it is difficult to compare the dance motion displayed on the screen with one's own motion. The second method is to use the scaffolding or motion detection sensor to check the user's motion while learning to dance. This method is mainly used in game systems. In this case, it is possible to check the dance motion of the user to some extent, but it is not enough to detect the complicated and subtle dance motion precisely and to acquire the correct dance motion to the user.
인터넷 커뮤니티의 발달에 따라, 다양한 인터넷 커뮤니티 서비스가 제공되어지고 있다. 인터넷 커뮤니티란 유사한 관심을 가진 집단이 특정 인터넷 사이트에 지속적으로 접속하여 상호간에 정보교류를 할 수 있도록 공동체를 형성 유지하는 것을 말하는데, 초기에는 비상업적 성격을 띠었던 것이, 가치있는 가상 공동체를 형성하기 위한 상업화가 주장되면서 점차 사이버 비즈 커뮤니티로 나아가고 있다.As the Internet community develops, various Internet community services are being provided. An Internet community is a group of people with similar interests who are constantly connected to specific Internet sites to form and maintain a community where they can exchange information with each other. What was initially non-commercial in nature was to create a valuable virtual community. As commercialization is claimed, it is gradually moving into the cyber biz community.
이러한 추세와 관련하여, 사용자들이 댄스 학습 과정에서 자신의 댄스 동작을 기록한 영상 이미지들을 제작하여 이를 다른 사람들과 공유할 수 있는 종합적인 인터넷 커뮤니티 서비스가 제공되어 진다면 사용자 이익 측면이나 비즈니스적인 측면에서 매우 유용할 것임에 틀림없다.In relation to this trend, if a comprehensive internet community service is provided in which users can create video images of their dance movements and share them with others in the dance learning process, it is very useful in terms of user interests and business. It must be done.
따라서 본 발명의 목적은 상기한 문제점들을 해결하기 위한 것으로서, 컴퓨터나 비디오 게임기를 활용하여 편리하고 효과적으로 정확한 댄스 동작을 습득할 수 있는 댄스 학습 시스템를 제공하는 데에 있다.Accordingly, an object of the present invention is to provide a dance learning system capable of acquiring a convenient dance effect by using a computer or a video game machine.
본 발명의 또 다른 목적은 사용자들이 자신의 댄스 모습을 기록하여 인터넷을 통해 공유하고, 자신의 댄스 숙련도를 다른 사람들과 비교해 볼 수 있는 인터넷 커뮤니티 서비스 시스템 및 방법을 제공하는 데에 있다.Still another object of the present invention is to provide an internet community service system and a method in which users can record their dance and share it through the Internet, and compare their dance proficiency with others.
상기한 목적을 이루기 위한 본 발명에 따른 댄스 학습 시스템은, 사용자의 댄스 동작을 촬영하기 위한 카메라 장치, 사용자로부터 가상캐릭터 및 상기 가상캐릭터가 표현할 댄스 동작의 선택을 입력받기 위한 입력 장치, 가상 캐릭터의 형태 및 댄스 동작에 관한 영상 데이터를 저장하는 데이터 저장부, 상기 카메라 장치에 의해 촬영된 사용자의 영상 및 사용자의 선택에 의해 상기 데이터 저장부로부터 획득한 가상 캐릭터의 댄스 영상을 합성하여 디스플레이 장치로 전송하는 영상 처리부, 상기 영상 처리부로부터 전송된 사용자 및 가상 캐릭터의 영상을 표시하는 디스플레이 장치 및 상기 입력 장치를 통해 받아들인 사용자의 선택에 따라 시스템이 동작하도록 연산 및 제어 기능을 수행하는 메인 제어부를 포함하되, 상기 영상 처리부는 상기 카메라 장치에 의해 촬영된 영상 데이터의 좌우를 교환함으로써, 사용자가 거울을 보듯이 디스플레이 장치를 통해 디스플레이 되는 자신의 모습을 관찰할 수 있도록 한 것을 특징으로 한다.The dance learning system according to the present invention for achieving the above object, a camera device for photographing the dance movement of the user, an input device for receiving a selection of the virtual character and the dance action to be represented by the virtual character, the virtual character of the user Data storage unit for storing the image data about the shape and dance operation, the image of the user photographed by the camera device and the dance image of the virtual character obtained from the data storage unit by the user's selection synthesized and transmitted to the display device An image processing unit, a display device for displaying images of a user and a virtual character transmitted from the image processing unit, and a main control unit for performing an operation and a control function to operate the system according to a user's selection received through the input device. The image processing unit is the camera By swapping the left and right of the image data photographed by the device, it is characterized in that the user can observe his appearance displayed through the display device like a mirror.
여기서, 상기 영상 처리부는 상기 데이터 저장부로부터 획득한 가상 캐릭터의 형태 데이터 및 댄스 동작 데이터로부터 가상 캐릭터의 댄스 영상을 생성하는 영상 제어부를 더 포함할 수 있으며, 또한 상기 영상 처리부에서 사용자의 댄스 숙련도에 따르는 가상 캐릭터의 댄스 동작에 대한 속도 제어 기능, 부분 반복 기능 및 단계별 구분 디스플레이 기능을 더 수행하도록 할 수 있다.The image processor may further include an image controller configured to generate a dance image of the virtual character from shape data and dance motion data of the virtual character obtained from the data storage unit. The speed control function, the partial repetition function, and the stepwise display function for the dance motion of the virtual character may be further performed.
한편, 상기 영상 처리부는 사용자의 댄스 동작에 관한 정지 또는 동영상 이미지 데이터를 추출하여 상기 데이터 저장부에 저장하는 기능을 더 수행할 수 있는데, 이 경우 사용자의 음성도 함께 추출하여 저장할 수 있고, 아울러 상기 추출된 사용자의 댄스 동작에 관한 정지 또는 동영상 이미지에 장식용 이미지 또는 동영상/인터랙티브 캐릭터를 삽입하여 데코레이션하거나 사용자의 음성을 삽입할 수도 있다.The image processing unit may further perform a function of extracting a still or moving image image data regarding a dance operation of the user and storing the extracted data in the data storage unit. In this case, the image processor may also extract and store the voice of the user. A decorative image or a video / interactive character may be inserted and decorated in a still or moving image of the extracted dance motion of the user, or a voice of the user may be inserted.
그리고 사용자의 댄스 동작을 모션캡쳐할 수 있는 동작 인식부를를 더 구비할 수 있다. 이 경우 사용자의 댄스 동작과 가상 캐릭터의 댄스 동작을 비교하여, 사용자의 댄스를 평가하도록 할 수 있으며, 사용자의 움직임으로부터 활동량을 계산하여 수치화함으로써 이를 디스플레이 장치에 표시할 수도 있고, 동작 인식부에서 인식한 사용자의 댄스 동작을 가상 캐릭터에 이식할 수 있도록 데이터화할 수도 있다.The apparatus may further include a motion recognition unit capable of motion capturing a dance motion of the user. In this case, the dance motion of the user may be compared with the dance motion of the virtual character to evaluate the user's dance, and the amount of activity may be calculated and quantified from the user's motion to be displayed on the display device, and the motion recognition unit may recognize the motion. Data can be ported so that a user's dance movement can be ported to a virtual character.
한편 상기 메인 제어부는 사용자가 댄스의 발 움직임을 용이하게 이해할 수 있도록, 가상 캐릭터의 발 위치를 나타내는 평면 이미지를 상기 디스플레이 장치에 표시하게 할 수 있다.Meanwhile, the main controller may cause the display device to display a plane image representing the foot position of the virtual character so that the user can easily understand the foot movement of the dance.
상기한 목적을 이루기 위한 본 발명에 따른 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 시스템은, 사용자의 댄스 동작을 촬영하기 위한 카메라 장치, 사용자로부터 가상캐릭터 및 상기 가상캐릭터가 표현할 댄스 동작의 선택을 입력받기 위한 입력 장치, 가상 캐릭터의 형태 및 댄스 동작에 관한 영상 데이터를 저장하는 데이터 저장부, 상기 카메라 장치에 의해 촬영된 사용자의 영상 및 사용자의 선택에 의해 상기 데이터 저장부로부터 획득한 가상 캐릭터의 댄스 영상을 합성하여 디스플레이 장치로 전송하는 영상 처리부, 상기 영상 처리부로부터 전송된 사용자 및 가상 캐릭터의 영상을 표시하는 디스플레이 장치, 인터넷을 통한 데이터 송수신 기능을 수행하는 데이터 송수신 장치 및 상기 입력 장치를 통해 받아들인 사용자의 선택에 따라 시스템이 동작하도록 연산 및 제어 기능을 수행하는 메인 제어부를 포함하는 댄스 학습 시스템을 구비한 제작측 사용자 단말기; 정지 또는 동영상 이미지를 표시하는 디스플레이 장치 및 인터넷을 통한 데이터 송수신 기능을 수행하는 데이터 송수신 장치를 포함하는 열람측 사용자 단말기; 및 제작측 상기 사용자 단말기 및 열람측 사용자 단말기와 인터넷을 통한 데이터 송수신 기능을 수행하는 데이터 송수신 장치, 상기 사용자 단말기로부터 전송되는 정지 또는 동영상 이미지 데이터를 저장하는 데이터 저장부, 및 상기 정지 또는 동영상 이미지 데이터와 연관된 커뮤니티 서비스를 제공하는 커뮤니티 구성부를 포함하는 서버 시스템;을 포함하여 구성된다.Internet community service system using a dance learning system according to the present invention for achieving the above object, for receiving a selection of a dance device to represent the virtual character and the virtual character from the camera device for photographing the user's dance movement, the user Data storage unit for storing the image data about the input device, the shape and the dance operation of the virtual character, the image of the user photographed by the camera device and the dance image of the virtual character obtained from the data storage unit by the user's selection An image processing unit for synthesizing and transmitting to the display device, a display device for displaying the images of the user and the virtual character transmitted from the image processing unit, a data transmitting and receiving device performing a data transmission and reception function through the Internet and the user received through the input device According to your choice Processing side user terminal having a dance learning system including a main processor for performing operations and control functions to the system is operating; A viewing-side user terminal comprising a display device displaying a still or moving image and a data transmitting / receiving device performing a data transmitting / receiving function through the Internet; And a data transmitting / receiving apparatus performing a data transmitting / receiving function with the user terminal and the viewing user terminal through the Internet, a data storage unit for storing still or moving image data transmitted from the user terminal, and the still or moving image image data. It is configured to include; a server system including a community component for providing a community service associated with.
여기서 상기 서버 시스템은 상기 데이터 저장부에 가상 캐릭터의 형태 및 댄스 동작에 관한 데이터를 저장하고 이를 데이터 송수신 장치를 통해 제작측 사용자 단말기에 제공하도록 할 수 있다. 한편, 상기 열람측 사용자 단말기로는 모바일 단말기를 사용할 수 있다.Here, the server system may store data regarding the shape and dance motion of the virtual character in the data storage unit and provide the data to the production-side user terminal through the data transmission / reception apparatus. Meanwhile, a mobile terminal may be used as the reading side user terminal.
상기한 목적을 이루기 위한 본 발명에 따른 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 방법은 상기 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 시스템의 구동방법으로서, 제작측 사용자 단말기를 이용해 사용자의 댄스 동작에 관한 정지 또는 동영상 이미지를 제작하는 단계, 상기 제작측 사용자 단말기로부터 인터넷을 통해 정지 또는 동영상 이미지를 서버로 전송하는 단계, 상기 제작측 사용자 단말기로부터 전송된 정지 또는 동영상 이미지를 서버 시스템의 데이터 저장부에 저장하고 유지하는 단계 및 열람측 사용자 단말기의 요청에 의해 상기 서버 시스템의 데이터 저장부에 저장된 정지 또는 동영상 이미지를 상기 열람측 사용자 단말기로 전송하는 단계를 포함하여 구성된다.Internet community service method using the dance learning system according to the present invention for achieving the above object is a driving method of the Internet community service system using the dance learning system, using the production user terminal stop or moving picture of the user's dance operation Producing an image, transmitting a still or moving image from the producing side user terminal to the server, storing and maintaining a still or moving image image transmitted from the producing side user terminal to a data storage unit of the server system; And sending a still or moving image stored in the data storage of the server system to the viewing-side user terminal at the request of the viewing-side user terminal.
여기서, 상기 제작측 사용자 단말기로부터 상기 서버 시스템으로의 동영상 이미지 데이터의 전송 및 저장 단계는, 제작측 사용자 단말기에서 동영상 이미지 데이터를 압축하는 단계, 상기 압축된 데이터를 제작측 사용자 단말기로부터 서버로 전송하는 단계 및 상기 압축되어 전송된 데이터를 서버측 데이터 저장부에 저장하는 단계를 포함하도록 할 수 있으며, 상기 서버 시스템으로부터 상기 열람측 사용자 단말기로의 동영상 이미지의 전송 및 디스플레이 단계는, 서버측 데이터 저장부에 저장된 압축 동영상 데이터를 상기 열람측 사용자 단말기로 전송하는 단계, 상기 전송된 압축 동영상 데이터를 상기 열람측 사용자 단말기에서 압축 해제하는 단계 및 상기 압축 해제된 동영상 데이터를 디스플레이 하는 단계를 포함하도록 할 수 있다.The transmitting and storing of the moving image image data from the production side user terminal to the server system may include compressing the moving image image data at the production side user terminal and transmitting the compressed data from the production side user terminal to the server. And storing the compressed and transmitted data in a server-side data storage. The transmitting and displaying of a moving image from the server system to the viewing-side user terminal may include a server-side data storage. Transmitting the compressed video data stored in the user terminal to the viewing side, decompressing the transmitted compressed video data in the viewing user terminal, and displaying the decompressed video data. .
상기한 목적을 이루기 위한 본 발명에 따른 댄스 학습 방법은, 가상 캐릭터의 형태와 댄스 동작을 선택하는 단계, 상기 선택에 따라 가상 캐릭터의 댄스 영상을 구현하는 단계, 카메라 장치를 통해 사용자의 댄스 동작 영상을 입력받는 단계, 상기 카메라 장치를 통해 입력받은 사용자의 댄스 동작 영상의 좌우 부분을 교환하는 단계, 상기 좌우 부분이 교환된 사용자의 댄스 동작 영상과 상기 가상 캐릭터의 댄스 영상을 합성하는 단계 및 상기 합성된 영상을 디스플레이 장치에 표시하는 단계를 포함하여 구성된다.Dance learning method according to the present invention for achieving the above object, the step of selecting the shape and the dance operation of the virtual character, implementing the dance image of the virtual character according to the selection, the dance motion image of the user through the camera device Receiving a step, the step of swapping the left and right portions of the user's dance motion image received through the camera device, the step of synthesizing the dance motion image of the user and the virtual character dance image of the exchanged left and right parts and the synthesis And displaying the displayed image on the display device.
이하 본 발명에 따른 시스템 및 방법의 바람직한 실시예를 첨부 도면을 참조하여 상세히 설명한다.DESCRIPTION OF THE PREFERRED EMBODIMENTS Preferred embodiments of systems and methods according to the present invention will now be described in detail with reference to the accompanying drawings.
도 1은 본 발명에 따른 댄스 학습 시스템을 개략적으로 도시한 구성도이다.1 is a block diagram schematically showing a dance learning system according to the present invention.
도 1을 참조하면, 본 발명에 따른 댄스 학습 시스템(100)은 카메라 장치(102), 입력 장치(108), 데이터 저장부(104), 영상 처리부(105), 디스플레이 장치(107) 및 메인 제어부(103)를 포함하여 구성된다.Referring to FIG. 1, the dance learning system 100 according to the present invention includes a camera device 102, an input device 108, a data storage unit 104, an image processing unit 105, a display device 107, and a main control unit. It comprises a 103.
상기 카메라 장치(102)는 사용자(101)의 댄스 동작을 촬영하여 그 영상 데이터를 시스템 내로 입력하기 위한 장치로서, 일반적으로 CCD나 CMOS와 같은 이미지 센서를 장착한 디지털 카메라를 사용하게 되며, 필요에 따라 마이크가 내장된 것을 사용할 수도 있다.The camera device 102 is a device for capturing the dance motion of the user 101 and inputs the image data into the system. Generally, the camera device 102 uses a digital camera equipped with an image sensor such as a CCD or a CMOS. You can also use a built-in microphone.
상기 입력 장치(103)는 사용자가 원하는 가상 캐릭터의 형태 및 댄스의 종류에 사용자의 선택이나 그 밖에 사용자의 명령을 입력받기 위한 구성부로서, 일반적으로 게임 패드나 키보드 등이 사용될 수 있으며, 음성 인식 장치를 활용할 수도 있을 것이다.The input device 103 is a component for receiving the user's selection or other user's commands in the form of the virtual character and the dance desired by the user. In general, a game pad or a keyboard may be used, and voice recognition may be performed. You can also use the device.
상기 데이터 저장부(104)는 가상 캐릭터의 형태 및 댄스 동작에 관한 데이터를 저장하기 위한 구성부로서, 실제 댄서의 댄스 장면을 그대로 녹화하여 저장할 수도 있겠으나, 일반적으로 3차원 형태의 가상 캐릭터의 형태 데이터와 댄스 동작에 관한 데이터를 저장하게 된다. 한편 상기 데이터 저장부(104)에 저장되는 댄스 동작 데이터로는 사용자(101)의 댄스 동작을 동작 인식부를 통해 모션 캡쳐하여 얻어진 데이터를 사용할 수도 있다. 그 밖에 상기 데이터 저장부(104)에는 시스템 작동에 필요한 데이터 및 사용자의 댄스 동작에 관한 정지 또는 동영상 이미지 등 사용자 데이터를 저장할 수도 있다.The data storage unit 104 is a component for storing data regarding the shape and the dance motion of the virtual character, but may record and store the actual dancer's dance scene as it is, but generally in the form of a three-dimensional virtual character Data and dance data are stored. Meanwhile, as dance motion data stored in the data storage 104, data obtained by motion capturing a dance motion of the user 101 through a motion recognition unit may be used. In addition, the data storage unit 104 may store data necessary for operating the system and user data such as still or moving image of a user's dance operation.
상기 영상 처리부(105)는 상기 카메라 장치(102)에 의해 촬영된 사용자(101)의 댄스 영상과 상기 사용자가 선택한 가상 캐릭터의 댄스 영상을 수퍼임포즈 방법으로 합성하여 디스플레이 장치(107)로 전송하기 위한 구성부로서, 이에는 가상 캐릭터의 형태 데이터와 댄스 동작 데이터를 이용하여 가상 캐릭터의 댄스 영상을 구현하는 영상 제어부(106)가 포함된다. 한편 상기 영상 처리부(105)에서 영상을 합성할 때, 상기 사용자(101)의 댄스 영상 데이터의 좌우 부분을 교환하게 되는데, 그에 따라 디스플레이 장치(107)에는 마치 거울에 비친 모습과 같이 좌우가 바뀐 사용자(101)의 영상이 표시되게 되는데, 이로써 사용자가 거울을 통해 댄스를 학습하는 것과 같은 효과를 얻을 수 있다. 가상 캐릭터를 화면상에 표시하는 경우 다양한 표시방법을 사용할 수 있는데, 예컨대 정면 또는 후면만을 화면에 표시할 수도 있고, 3차원의 자유로운 시점에서 표시할 수도 있다. 또한 사용자의 모습을 표시하는 경우 영상 처리 기법을 적용하여 다양한 효과를 활용한 영상을 표시하게 할 수 있다.The image processor 105 synthesizes a dance image of the user 101 photographed by the camera device 102 and a dance image of the virtual character selected by the user by a superimpose method and transmits the synthesized image to the display apparatus 107. As the configuration unit, it includes an image control unit 106 for implementing a dance image of the virtual character using the shape data and dance motion data of the virtual character. On the other hand, when the image processing unit 105 synthesizes an image, the left and right portions of the dance image data of the user 101 are exchanged. Accordingly, the display device 107 is a user whose left and right are changed as if reflected in a mirror. An image of 101 may be displayed, whereby the user may obtain an effect such as learning dance through a mirror. When displaying a virtual character on the screen, a variety of display methods may be used. For example, only the front or the back may be displayed on the screen, or a three-dimensional free view may be displayed. In addition, when displaying a user's appearance, an image processing technique may be applied to display an image using various effects.
상기 디스플레이 장치(107)는 영상 처리부로부터 전송된 사용자(101)와 가상 캐릭터의 합성 영상을 사용자에게 표시하기 위한 장치로서, 일반적으로 비디오 모니터 등이 사용된다.The display device 107 is a device for displaying a composite image of a user 101 and a virtual character transmitted from an image processor to a user, and a video monitor or the like is generally used.
상기 메인 제어부(103)는 시스템의 전반적인 동작을 제어하기 위한 장치로서, 시스템 각 구성부를 제어함으로써 사용자의 선택에 따라 시스템이 동작하도록 한다. 또한 상기 메인 제어부(103)는 데이터 저장부(104)에 저장된 가상 캐릭터 및 댄스 데이터를 참조하여 메뉴를 생성하고 이를 디스플레이 장치(107)를 통해 사용자에게 표시함으로써, 입력 장치(108)를 통해 사용자의 선택을 입력받게 하는 역할도 수행한다.The main controller 103 is an apparatus for controlling the overall operation of the system, and controls the system components so that the system operates according to the user's selection. In addition, the main controller 103 generates a menu by referring to the virtual character and dance data stored in the data storage unit 104 and displays the menu to the user through the display device 107, whereby the user of the user through the input device 108 is used. It also serves to accept the selection.
한편, 본 발명에 따른 댄스 학습 시스템(100)을 사용함에 있어서, 사용자의 댄스 숙련도에 따라 가상 캐릭터의 댄스 동작 속도 제어, 부분 반복, 단계별 구분 디스플레이 등을 활용함으로써, 효과적인 댄스 학습이 이루어지도록 할 수 있다. 즉, 댄스와 음악의 스피드를 조정하여 사용자 자신의 학습 스피드에 맞춘 학습을 행할 수 있고, 댄스 동작을 스텝 바이 스텝으로 배우거나 일부분의 댄스를 반복해서 배우는 것이 가능해 지는 것이다. 아울러 사용자가 학습하기 쉽도록 가상 캐릭터의 방향을 3차원적으로 자유롭게 변화시킬 수도 있다.On the other hand, in using the dance learning system 100 according to the present invention, the effective dance learning can be made by utilizing the dance motion speed control of the virtual character, partial repetition, step-by-step display according to the user's dance proficiency. have. In other words, it is possible to adjust the speed of dance and music to perform learning according to the user's own learning speed, and to learn the dance operation by step-by-step or to repeat a part of the dance. In addition, the direction of the virtual character can be freely changed in three dimensions to facilitate the user learning.
본 발명의 댄스 학습시스템에는 동작 인식부를 이용하여 사용자(101)의 댄스 동작을 인식하도록 할 수 있는데, 이러한 사용자(101)의 동작을 인식하기 위해서는 화상입력 카메라(102)를 이용하여 촬영한 사용자(101)의 동작을 모션캡쳐할 수도 있고, 발판이나 기타 동작 감지 센서 등 별도의 동작 인식 장치를 장착할 수도 있다. 한편 모션캡쳐를 행하는 경우 움직임의 인식률을 높이기 위하여 특정색의 악세서리(암밴드, 헤어밴드 등)와 같은 보조 기구를 부착하도록 할 수도 있으며, 그 밖에 모션캡쳐에 사용되는 여러 수단 및 장치들을 활용할 수 있다. 이와 같이 사용자의 댄스 동작을 인식하게 되는 경우, 인식된 데이터를 사용자의 댄스를 평가하는 자료로 사용할 수도 있고, 또는 이를 가상 캐릭터에 이식시켜 가상 캐릭터가 사용자의 동작을 재현하도록 할 수도 있으며, 그 밖에 사용자의 움직임으로부터 활동량을 계산하여 수치화함으로써 이를 Kcal 등으로 화면에 표시할 수도 있다. 한편, 사용자의 동작 인식에 있어서 인식률을 높이기 위하여 특정색의 악세서리(암밴드, 헤어밴드 등)를 사용자의 몸에 부착시킬 수 있고, 사용자의 댄스 동작을 평가하는 경우, 예컨대, 2D 이미지 기반의 알고리즘을 적용하여 정확도를 판별하고 이를 수치화하여 화면상에 표시하도록 할 수 있다.The dance learning system of the present invention can recognize the dance motion of the user 101 by using a motion recognition unit. In order to recognize the motion of the user 101, a user (or a user) photographed using the image input camera 102 ( Motion capturing of the operation 101 may be performed, or a separate motion recognition device such as a scaffold or other motion detection sensor may be mounted. Meanwhile, when capturing motion, it is possible to attach an auxiliary device such as a specific color accessory (arm band, hair band, etc.) in order to increase the recognition rate of the motion. In addition, various means and devices used for motion capturing may be utilized. When the user's dance movement is recognized as described above, the recognized data may be used as a material for evaluating the user's dance, or it may be ported to the virtual character to allow the virtual character to reproduce the user's movement. The amount of activity may be calculated and quantified from the user's movement and displayed on the screen as Kcal. On the other hand, in order to increase the recognition rate in the user's motion recognition, a particular color accessory (arm band, hair band, etc.) may be attached to the user's body, and when evaluating the user's dance motion, for example, a 2D image based algorithm may be used. It can be applied to determine the accuracy and digitize it and display it on the screen.
상기 메인 제어부(103)는 상기 영상 처리부(105)를 이용해 사용자(101)의 댄스 동작에 관한 정지 또는 동영상 이미지 데이터를 추출하여 상기 데이터 저장부(104)에 저장시킬 수 있는데, 이 경우 저장되는 정지 또는 동영상 이미지는 좌우가 변환되지 아니한 이미지를 사용하는 것이 바람직할 것이며, 필요에 따라 출력시에 상기 영상 처리부(105)에 의해 좌우가 반전된 이미지를 표시하도록 할 수 있을 것이다. 한편 마이크 등 음성입력 장치를 추가로 장착하고 이미지 저장 시에 사용자의 음성도 함께 추출하여 저장할 수 있으며, 상기 정지 또는 동영상 이미지에 장식용 이미지나 동영상/인터랙티브 캐릭터를 삽입하여 데코레이션 할 수도 있다. 예컨대, 꽃이나 고양이의 장식물과 같은 정지 이미지를 삽입하거나, 자유롭게 돌아다니는 쥐나 사용자의 움직임에 맞춰 인터랙티브하게 움직이는 캐릭터 등을 삽입할 수 있을 것이다. 또한 상기 메인 제어부(103)는 사용자가 댄스의 발 움직임을 쉽게 이해할 수 있도록 발의 위치를 나타낸는 족보를 화면상에 표시하도록 할 수 있으며, 사용자가 다음 댄스 동작을 예측하여 쉽게 댄스를 학습할 수 있도록 시간 진행에 따른 가상 캐릭터의 다음 동작 형태들을 화면상에 표시하게 할 수 있다.The main controller 103 may extract the still or moving image data related to the dance operation of the user 101 by using the image processing unit 105 and store the same in the data storage unit 104. Alternatively, it may be preferable to use an image of which the left and right are not converted as the moving image, and if necessary, the image processing unit 105 may display an image in which the left and right are reversed. Meanwhile, a voice input device such as a microphone may be additionally installed and the user's voice may also be extracted and stored when the image is stored, and a decorative image or a video / interactive character may be inserted and decorated in the still or moving image. For example, a still image such as a flower or a ornament of a cat may be inserted, or a mouse moving freely or a character interactively moving in accordance with a user's movement may be inserted. In addition, the main control unit 103 may display on the screen a genealogy indicating the position of the foot so that the user can easily understand the foot movement of the dance, the time for the user to easily learn the dance by predicting the next dance movement The following motion forms of the virtual character as the progress can be displayed on the screen.
도 2는 이와 같은 본 발명에 따른 댄스 학습 시스템의 일반 화면 구성(a) 및 데코레이션된 화면 구성(b)을 나타낸다. 도 2를 참조하면 디스플레이 장치(107)에 표시되는 화면 구성은 사용자의 댄스 영상(201), 가상 캐릭터의 댄스 영상(202) 및 장식용 이미지(203)로 이루어진다. 여기서 상기 사용자의 댄스 영상(202)은 좌우가 뒤바뀐 거울 이미지로 나타나게 된다.2 shows a general screen configuration (a) and a decorated screen configuration (b) of the dance learning system according to the present invention. Referring to FIG. 2, the screen configuration displayed on the display device 107 includes a dance image 201 of a user, a dance image 202 of a virtual character, and a decorative image 203. Here, the dance image 202 of the user is represented as a mirror image inverted left and right.
도 6은 상기한 바와 같은 본 발명에 따른 댄스 학습 시스템의 실제 구동 화면을 예시한 도면이다. 중앙부에 사용자의 모습이 반전된 거울 이미지로 표시되고, 그 좌측에 가상 캐릭터의 댄스 영상이 표시된다. 하단부에는 사용자의 댄스 정확도를 나타내는 게이지, 가상 캐릭터의 발 위치를 나타내는 족보를 표시하고 있고, 그 밖에 사용자의 활동량을 Kcal로 수치화하여 표시하고 있다. 또한 가상 캐릭터의 댄스 동작에 있어서 시간 진행에 따른 일련의 형태를 사용자의 모습과 매치시켜 표시하고 있는데, 사용자 바로 앞편에 반투명으로 표시되는 것이 현재의 동작을 나타낸것이고, 다음 동작 형태가 화면 오른쪽에 표시됨으로써 사용자로 하여금 이를 보고 다음 동작을 미리 준비할 수 있게 해 준다.6 is a diagram illustrating an actual driving screen of the dance learning system according to the present invention as described above. In the center part, the user's view is displayed as an inverted mirror image, and a dance image of the virtual character is displayed on the left side. In the lower part, a gauge indicating the user's dance accuracy and a genealogy indicating the foot position of the virtual character are displayed, and the user's activity amount is numerically displayed in Kcal. In addition, in the dance movement of the virtual character, a series of forms over time are matched with the user's appearance. Translucent in front of the user indicates the current movement, and the next movement form is displayed on the right side of the screen. This allows the user to see it and prepare for the next action in advance.
도 3은 본 발명에 따른 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 시스템을 도시한 구성도이다.3 is a block diagram showing an Internet community service system using the dance learning system according to the present invention.
도 3을 참조하면, 본 발명에 따른 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 시스템(300)은 제작측 단말기(310), 열람측 단말기(320) 및 서버 시스템(330)으로 구성된다. 제작측 단말기(310)는 상술한 댄스 학습 시스템과 동일한 구성을 갖는 바, 카메라 장치, 입력 장치, 데이터 저장부, 영상 처리부 및 메인 제어부를 포함하여 구성되는데, 다만 여기에 인터넷 데이터 통신을 위한 데이터 송수신 장치가 추가로 요구된다. 열람측 단말기(320)는 인터넷으로부터 정지 또는 동영상을 다운로드하여 표시할 수 있는 기능을 가지고 있으면 충분하므로, 여기에는 인터넷 통신 기능 및 디스플레이 기능을 갖춘 일반적인 PC는 물론 노트북, PDA, 휴대전화기 등의 모바일 단말기도 사용될 수 있다. 서버 시스템(330)은 사용자 단말기(310, 320)와 인터넷을 통해 데이터를 교환하기 위한 데이터 송수신 장치, 사용자가 제작측 단말기(301)를 이용하여 제작한 자신의 댄스 동작에 관한 정지 또는 동영상 이미지 데이터를 업로드하면 이를 저장하기 위한 데이터 저장부 및 상기 사용자가 업로드한 정지 또는 동영상 이미지 데이터와 연관된 커뮤니티 서비스를 제공하는 커뮤니티 구성부로 구성된다. 상기 커뮤니티 구성부는 일반적인 커뮤니티 서비스 기능을 수행하게 되는데, 예를 들면, 사용자 정보를 관리하고, 사용자에게 게시판, 자료실 등의 서비스를 제공하는 것이다. 또한 서버 시스템은 제작측 단말기와의 데이터 통신을 통해 제작측 단말기에 저장되는 가상 캐릭터의 형태 및 동작 데이터를 추가시켜 주거나 관련 프로그램을 업데이트 시켜줄 수도 있다.Referring to FIG. 3, the internet community service system 300 using the dance learning system according to the present invention includes a production side terminal 310, a viewing side terminal 320, and a server system 330. The production terminal 310 has the same configuration as the dance learning system described above, and includes a camera device, an input device, a data storage unit, an image processing unit, and a main control unit, except that data transmission and reception for internet data communication is performed. An additional device is required. Since the viewing terminal 320 has a function of downloading and displaying still images or videos from the Internet, it is sufficient to include a mobile terminal such as a laptop, PDA, mobile phone, as well as a general PC having an internet communication function and a display function. May also be used. The server system 330 is a data transmitting / receiving apparatus for exchanging data with the user terminals 310 and 320 through the Internet, and a still or moving image image data regarding a user's own dance motion produced using the production terminal 301. If the uploaded data storage unit for storing it and the community component that provides a community service associated with the still or moving image data uploaded by the user. The community component performs a general community service function. For example, the community component manages user information and provides services such as bulletin boards and archives to the user. In addition, the server system may add the shape and motion data of the virtual character stored in the production terminal through data communication with the production terminal, or may update related programs.
도 4은 본 발명에 따른 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 방법을 나타낸 블록도이다.4 is a block diagram illustrating an internet community service method using a dance learning system according to the present invention.
댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스는 다음과 같은 단계를 실시함으로써 구현된다. 먼저 사용자가 제작측 사용자 단말기를 이용하여 자신의 댄스 동작에 관한 정지 또는 동영상 이미지를 제작하게 된다(401). 상기 이미지에 장식용 이미지나 동영상/인터랙티브 캐릭터가 데코레이션 될 수 있음은 위에서 설명한 바와 같다. 사용자는 이와 같이 제작측 단말기 사용자에 의해 제작된 정지 또는 동영상 이미지를 서버로 전송하여(402) 서버측 데이터 저장부에 저장시킨다(403). 이와 같이 저장된 사용자의 정지 또는 동영상 이미지는 게시판 서비스 등 서버 시스템에서 제공하는 적절한 수단에 의하여 접근 권한 있는 사용자 그룹이 열람할 수 있도록 공개되는 것이다. 상기 서버측 데이터 저장부에 저장된 정지 또는 동영상 이미지를 열람하기 위해서, 열람측 사용자 단말기의 요청에 의해 서버 시스템으로부터 열람측 사용자 단말기로 상기 정지 또는 동영상 이미지 데이터의 전송 즉 다운로드가 이루어진다(404). 그리하여 열람측 사용자 단말기에서 전송 받은 이미지 데이터를 디스플레이 장치를 통해 사용자에게 표시함으로써(405) 특정 사용자가 제작한 자신의 댄스 동작에 대한 정지 또는 동영상 이미지가 다른 사용자의 열람에 제공되는 것이다. 한편 상기한 정지 또는 동영상 데이터의 업로드 및 다운로드 과정에 있어서 통신 대역 경감을 위하여 데이터 압축을 활용할 수 있는데, 예컨대 데이터 업로드시에는 먼저 제작측 단말기에서 데이터를 압축하고 압축된 데이터를 서버 시스템으로 전송하여 저장시키거나, 데이터를 압축하면서 바로 서버에 스트리밍으로 전송하여 저장시키며, 데이터 다운로드 시에는 상기 데이터를 압축된 상태로 열람측 단말기로 다운로드 하고 열람측 단말기에서 압축을 해제한 후 재생하여 사용자가 볼 수 있도록 표시하는 것이다. 동영상 데이터를 다운로드 하는 경우 스트리밍 방법을 통해 실시간으로 영상을 표시하면서 다운로드하게 할 수도 있고, 다운로드한 영상을 저장한 후 재생하도록 할 수도 있다. 업로드의 경우도 마찬가지로 실시간 스트리밍으로 업로드 할 수도 있고, 일단 저장한 후에 업로드 할 수도 있다.The internet community service using the dance learning system is implemented by performing the following steps. First, a user produces a still or moving image of a dance motion using a production user terminal (401). As described above, the decorative image or the video / interactive character may be decorated in the image. The user transmits the still or moving image produced by the production terminal user to the server (402) and stores it in the server-side data storage (403). The still or moving image of the stored user is disclosed so that a user group having access can view it by appropriate means provided by a server system such as a bulletin board service. In order to view the still or moving image stored in the server-side data storage, the still or moving image image data is transferred from the server system to the viewing-side user terminal at the request of the viewing-side user terminal (404). Thus, by displaying the image data transmitted from the viewing user terminal to the user through the display device (405), the still or moving image of the dance movement produced by the specific user is provided to the other user's reading. On the other hand, data compression may be utilized to reduce the communication bandwidth in the upload or download process of the still or moving image data. For example, when uploading data, the data is first compressed by the production terminal, and the compressed data is transmitted to the server system for storage. In addition, the data is compressed and immediately transmitted to the server while being streamed and stored.In the case of data download, the data is downloaded to the viewing terminal in a compressed state, decompressed on the viewing terminal, and played back so that the user can view the data. To display. When downloading video data, the streaming method can be downloaded while displaying the video in real time, or the downloaded video can be saved and played back. Similarly, uploading can be done by live streaming, or saved and uploaded.
도 5는 본 발명에 따른 댄스 학습 방법을 나타낸 블록도이다. 본 발명에 따른 댄스 학습은 다음과 같은 단계를 통해 구현된다. 먼저 사용자가 자신이 원하는 가상 캐릭터의 형태 및 댄스 동작을 선택하고(501), 다음으로 상기 사용자의 선택에 따라 가상 캐릭터의 댄스 영상을 구현하게 된다(502). 한편 사용자의 댄스 동작을 카메라 장치를 통해 입력 받고(503) 입력 받은 영상 데이터의 좌우 부분을 교환한다(504). 이와 같이 좌우 데이터를 교환하는 것은 사용자가 마치 거울을 보는 것과 같이 자신의 모습을 볼 수 있도록 디스플레이 하기 위한 것으로써, 효과적인 댄스 학습이 이루어지게 하기 위한 본 발명의 특징적인 기술이라 할 것이다. 그 후 상기 좌우가 변환된 사용자의 댄스 영상과 가상 캐릭터의 댄스 영상을 합성하여(505) 사용자에게 디스플레이 함으로써(506) 사용자가 가상 캐릭터의 댄스 동작을 따라서 몸을 움직여 가며 댄스를 학습하게 하는 것이다.5 is a block diagram illustrating a dance learning method according to the present invention. Dance learning according to the present invention is implemented through the following steps. First, the user selects the shape and dance operation of the virtual character that he / she desires (501), and then implements a dance image of the virtual character according to the user's selection (502). Meanwhile, the user's dance operation is input through the camera device (503) and the left and right portions of the input image data are exchanged (504). The exchange of left and right data as described above is for displaying a user so that he or she can see his or her own face like a mirror, which will be referred to as a characteristic technology of the present invention for effective dance learning. Thereafter, the dance image of the user whose left and right are converted and the dance image of the virtual character are synthesized (505) and displayed to the user (506) so that the user learns dance by moving his or her body according to the dance operation of the virtual character.
상기 본 발명의 바람직한 실시예에서 기술된 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이 가능할 것인바, 이는 본 발명의 청구범위를 벗어나지 아니한다.The invention described in the preferred embodiment of the present invention, various modifications are possible by those skilled in the art to which the present invention pertains, which does not depart from the claims of the present invention.
본 발명에 따른 댄스 학습 시스템 및 방법에 의하면, 게임기나 컴퓨터를 통해 댄스 학습을 하게 되므로 자유로운 시간활용이 가능하며, 화면상에 가상 캐릭터와 좌우 반전된 사용자의 모습을 함께 표시함으로써, 마치 거울을 통해 댄스 선생님과 자신의 모습을 비교하며 댄스를 학습하는 효과를 얻게 되므로, 정확한 댄스 동작을 익힐 수 있게 된다.According to the dance learning system and method according to the present invention, since dance learning is performed through a game machine or a computer, free time can be used, and by displaying a virtual character and a user's left and right inverted on the screen together, as if through a mirror By comparing yourself with the dance teacher, you will learn the dance, so you can learn the correct dance moves.
본 발명에 따른 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 시스템 및 방법에 의하면, 사용자가 댄스 학습 과정에서 자신의 댄스 모습을 정지 또는 동영상 이미지로 기록하고 이를 인터넷을 통해 다른 사람들과 공유할 수 있으며, 자신의 댄스 숙련도를 다른 사람들과 비교할 수 있게 된다.According to the Internet community service system and method using the dance learning system according to the present invention, a user can record his or her dance form as a still or moving image in the dance learning process and share it with others via the Internet. You can compare your dance proficiency with others.
도 1은 본 발명에 따른 댄스 학습 시스템을 도시한 구성도.1 is a block diagram showing a dance learning system according to the present invention.
도 2는 본 발명에 따른 댄스 학습 시스템의 일반 화면 구성(a) 및 데코레이션된 화면 구성(b)을 나타낸 도면.2 is a diagram illustrating a general screen configuration (a) and a decorated screen configuration (b) of the dance learning system according to the present invention.
도 3은 본 발명에 따른 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 시스템을 도시한 구성도.3 is a block diagram showing an Internet community service system using a dance learning system according to the present invention.
도 4는 본 발명에 따른 댄스 학습 시스템을 이용한 인터넷 커뮤니티 서비스 방법을 나타낸 블록도.Figure 4 is a block diagram showing an Internet community service method using a dance learning system according to the present invention.
도 5는 본 발명에 따른 댄스 학습 방법을 나타낸 블록도.5 is a block diagram showing a dance learning method according to the present invention.
도 6은 본 발명에 따른 댄스 학습 시스템의 실제 구동 화면을 예시한 도면.6 is a diagram illustrating an actual driving screen of the dance learning system according to the present invention.
* 도면의 주요 부분에 대한 부호의 설명 *Explanation of symbols on the main parts of the drawings
101: 사용자 102: 카메라 장치101: user 102: camera device
103: 메인 제어부 104: 데이터 저장부103: main control unit 104: data storage unit
105: 영상 처리부 106: 영상 제어부105: image processing unit 106: image control unit
107: 디스플레이 장치 108: 입력 장치107: display device 108: input device
310: 제작측 사용자 단말기 320: 열람측 사용자 단말기310: production side user terminal 320: reading side user terminal
330: 서버 시스템330: server system
Claims (20)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020040011036A KR20050082559A (en) | 2004-02-19 | 2004-02-19 | Dance learning system, internet community service system and internet community service method using the same, dance learning method, and computer executable recording media on which programs implement said methods are recorded |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020040011036A KR20050082559A (en) | 2004-02-19 | 2004-02-19 | Dance learning system, internet community service system and internet community service method using the same, dance learning method, and computer executable recording media on which programs implement said methods are recorded |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20050082559A true KR20050082559A (en) | 2005-08-24 |
Family
ID=37268949
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020040011036A KR20050082559A (en) | 2004-02-19 | 2004-02-19 | Dance learning system, internet community service system and internet community service method using the same, dance learning method, and computer executable recording media on which programs implement said methods are recorded |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20050082559A (en) |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100777215B1 (en) * | 2006-05-30 | 2007-11-19 | 한국과학기술연구원 | Augmented reality imaging system using a hand-held mobile device |
| CN101753801A (en) * | 2008-11-28 | 2010-06-23 | 康佳集团股份有限公司 | Television with dancing teaching function and method for same to fulfill dancing teaching function |
| WO2010143872A2 (en) * | 2009-06-09 | 2010-12-16 | Ko Young Joon | Motion learning system using motion capture and a three-dimensional graphical representation, and method for same |
| KR101110153B1 (en) * | 2010-03-09 | 2012-01-31 | 한솔인티큐브 주식회사 | Interactive Method And Apparatus For Displaying Video |
| KR101285114B1 (en) * | 2006-10-25 | 2013-07-17 | 에스케이플래닛 주식회사 | Bodily sensation Education method using Motion Detection in robot and thereof system |
| KR101378752B1 (en) * | 2010-11-08 | 2014-03-28 | 한국과학기술연구원 | Mannequin robot and control method thereof |
| US20140118522A1 (en) * | 2012-11-01 | 2014-05-01 | Josh Heath Zuniga | Dance learning system using a computer |
| KR20160093131A (en) * | 2015-01-28 | 2016-08-08 | 한국전자통신연구원 | Method and System for Motion Based Interactive Service |
| US9700788B2 (en) | 2011-04-22 | 2017-07-11 | Samsung Electronics Co., Ltd. | Video object detecting apparatus, video object deforming apparatus, and methods thereof |
| KR20180092303A (en) * | 2018-08-06 | 2018-08-17 | 주식회사 매직내니 | Mirror display apparatus and the operation method thereof |
| KR20190014021A (en) * | 2019-01-25 | 2019-02-11 | 정주선 | Apparatus for dance game and method for dance game using thereof |
| KR101979750B1 (en) * | 2018-09-07 | 2019-05-17 | 주식회사 큐랩 | Dance training contents authoring system |
| CN111798548A (en) * | 2020-07-15 | 2020-10-20 | 广州微咔世纪信息科技有限公司 | Control method and device of dance picture and computer storage medium |
| EP4124365A1 (en) * | 2021-07-30 | 2023-02-01 | Sony Interactive Entertainment LLC | Sharing movement data |
| WO2023063120A1 (en) * | 2021-10-12 | 2023-04-20 | 株式会社コナミアミューズメント | Game system, computer program used therein, and control method |
| US11726553B2 (en) | 2021-07-20 | 2023-08-15 | Sony Interactive Entertainment LLC | Movement-based navigation |
-
2004
- 2004-02-19 KR KR1020040011036A patent/KR20050082559A/en not_active Application Discontinuation
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100777215B1 (en) * | 2006-05-30 | 2007-11-19 | 한국과학기술연구원 | Augmented reality imaging system using a hand-held mobile device |
| KR101285114B1 (en) * | 2006-10-25 | 2013-07-17 | 에스케이플래닛 주식회사 | Bodily sensation Education method using Motion Detection in robot and thereof system |
| CN101753801A (en) * | 2008-11-28 | 2010-06-23 | 康佳集团股份有限公司 | Television with dancing teaching function and method for same to fulfill dancing teaching function |
| WO2010143872A2 (en) * | 2009-06-09 | 2010-12-16 | Ko Young Joon | Motion learning system using motion capture and a three-dimensional graphical representation, and method for same |
| WO2010143872A3 (en) * | 2009-06-09 | 2011-03-31 | Ko Young Joon | Motion learning system using motion capture and a three-dimensional graphical representation, and method for same |
| KR101110153B1 (en) * | 2010-03-09 | 2012-01-31 | 한솔인티큐브 주식회사 | Interactive Method And Apparatus For Displaying Video |
| KR101378752B1 (en) * | 2010-11-08 | 2014-03-28 | 한국과학기술연구원 | Mannequin robot and control method thereof |
| US9700788B2 (en) | 2011-04-22 | 2017-07-11 | Samsung Electronics Co., Ltd. | Video object detecting apparatus, video object deforming apparatus, and methods thereof |
| US20140118522A1 (en) * | 2012-11-01 | 2014-05-01 | Josh Heath Zuniga | Dance learning system using a computer |
| KR20160093131A (en) * | 2015-01-28 | 2016-08-08 | 한국전자통신연구원 | Method and System for Motion Based Interactive Service |
| KR20180092303A (en) * | 2018-08-06 | 2018-08-17 | 주식회사 매직내니 | Mirror display apparatus and the operation method thereof |
| KR101979750B1 (en) * | 2018-09-07 | 2019-05-17 | 주식회사 큐랩 | Dance training contents authoring system |
| KR20190014021A (en) * | 2019-01-25 | 2019-02-11 | 정주선 | Apparatus for dance game and method for dance game using thereof |
| CN111798548A (en) * | 2020-07-15 | 2020-10-20 | 广州微咔世纪信息科技有限公司 | Control method and device of dance picture and computer storage medium |
| CN111798548B (en) * | 2020-07-15 | 2024-02-13 | 广州微咔世纪信息科技有限公司 | Dance picture control method and device and computer storage medium |
| US11726553B2 (en) | 2021-07-20 | 2023-08-15 | Sony Interactive Entertainment LLC | Movement-based navigation |
| EP4124365A1 (en) * | 2021-07-30 | 2023-02-01 | Sony Interactive Entertainment LLC | Sharing movement data |
| US11786816B2 (en) | 2021-07-30 | 2023-10-17 | Sony Interactive Entertainment LLC | Sharing movement data |
| WO2023063120A1 (en) * | 2021-10-12 | 2023-04-20 | 株式会社コナミアミューズメント | Game system, computer program used therein, and control method |
| JP2023057672A (en) * | 2021-10-12 | 2023-04-24 | 株式会社コナミアミューズメント | Game system, computer program used therefor, and control method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20180373413A1 (en) | Information processing method and apparatus, and program for executing the information processing method on computer | |
| KR101328759B1 (en) | Augmented reality method and devices using a real time automatic tracking of marker-free textured planar geometrical objects in a video stream | |
| KR101082285B1 (en) | Terminal and method for providing augmented reality | |
| JP6775557B2 (en) | Video distribution system, video distribution method, and video distribution program | |
| US10896322B2 (en) | Information processing device, information processing system, facial image output method, and program | |
| US20070273644A1 (en) | Personal device with image-acquisition functions for the application of augmented reality resources and method | |
| KR20050082559A (en) | Dance learning system, internet community service system and internet community service method using the same, dance learning method, and computer executable recording media on which programs implement said methods are recorded | |
| US20220245859A1 (en) | Data processing method and electronic device | |
| CN110178158B (en) | Information processing apparatus, information processing method, and recording medium | |
| CN112199016B (en) | Image processing method, image processing device, electronic equipment and computer readable storage medium | |
| US8724849B2 (en) | Information processing device, information processing method, program, and information storage medium | |
| CN112533017B (en) | Live broadcast method, device, terminal and storage medium | |
| CN110751707B (en) | Animation display method, animation display device, electronic equipment and storage medium | |
| CN114327700A (en) | Virtual reality equipment and screenshot picture playing method | |
| JP6563580B1 (en) | Communication system and program | |
| JP2022500795A (en) | Avatar animation | |
| US20220398816A1 (en) | Systems And Methods For Providing Real-Time Composite Video From Multiple Source Devices Featuring Augmented Reality Elements | |
| CN113822970A (en) | Live broadcast control method and device, storage medium and electronic equipment | |
| CN113646752A (en) | VR live broadcast distribution system, distribution server, control method for distribution server, program for distribution server, and data structure of VR original photograph data | |
| CN112581571A (en) | Control method and device of virtual image model, electronic equipment and storage medium | |
| JP2020202575A (en) | Video distribution system, video distribution method, and video distribution program | |
| CN112354185A (en) | Cloud game control system and cloud game control method | |
| JP5813542B2 (en) | Image communication system, AR (Augmented Reality) video generation device, and program | |
| JP2017506523A (en) | Image display method and apparatus | |
| CN110650304A (en) | Video generation method and electronic equipment |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E601 | Decision to refuse application |