KR102140029B1 - Sound simulation and learning system of glass harp using augmented reality - Google Patents
Sound simulation and learning system of glass harp using augmented reality Download PDFInfo
- Publication number
- KR102140029B1 KR102140029B1 KR1020180124801A KR20180124801A KR102140029B1 KR 102140029 B1 KR102140029 B1 KR 102140029B1 KR 1020180124801 A KR1020180124801 A KR 1020180124801A KR 20180124801 A KR20180124801 A KR 20180124801A KR 102140029 B1 KR102140029 B1 KR 102140029B1
- Authority
- KR
- South Korea
- Prior art keywords
- glass half
- glass
- pitch
- identification code
- simulation system
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Business, Economics & Management (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Evolutionary Computation (AREA)
- Geometry (AREA)
- Projection Apparatus (AREA)
Abstract
본 발명은 식별코드가 인쇄되고, 액체를 수용하는 공간을 포함하며 일측이 개방된 글래스 하프 및 상기 글래스 하프의 식별코드를 인식하여 해당 글래스 하프의 음색 및 음높이를 시뮬레이션하도록 프로그램된 어플리케이션이 구동되는 사용자 단말기를 포함하는 글래스 하프 시뮬레이션 시스템에 관한 것으로, 글래스 하프에 실제 물을 채워보기 전에 미리 음색과 음높이를 시뮬레이션할 수 있다.The present invention includes a space in which an identification code is printed, a space for accommodating a liquid, and an application program programmed to simulate the tone and pitch of the corresponding glass half by recognizing the glass half and the identification code of the glass half opened on one side. It relates to a glass half simulation system including a terminal, it is possible to simulate the tone and pitch in advance before filling the glass half with real water.
Description
본 발명은 증강현실을 활용한 글래스 하프의 음색 시뮬레이션 및 학습 시스템에 관한 것이다.The present invention relates to a tone simulation and learning system of a glass harp using augmented reality.
여기서는, 본 개시에 관한 배경기술이 제공되며, 이들이 반드시 공지기술을 의미하는 것은 아니다.Here, background arts related to the present disclosure are provided, and these do not necessarily mean known technologies.
증강현실은 현실의 이미지나 배경에 3차원 가상 이미지를 겹쳐서 하나의 영상으로 보여주는 기술로서, 다양한 모바일 기기의 보급과 함께 증강현실은 널리 활용될 수 있다.Augmented reality is a technology that superimposes a 3D virtual image on a real image or background and displays it as a single image. Augmented reality can be widely used with the spread of various mobile devices.
한편, 유리잔 악기, 뮤지컬 글래스(Musical glasses), 싱잉 글래스(Singing glasses)라고도 부르는 글래스 하프(Glass harp)는 서로 다른 음높이로 조율한 여러 개의 유리잔, 특히 와인잔의 테두리(Rim)를 물이나 분필가루를 칠한 손가락으로 문지르거나, 튕기거나 쳐서 연주하는 악기이다. On the other hand, a glass harp, also called a glass musical instrument, musical glasses, or singing glasses, can be used to rim several glasses, especially the wine glass rim, at different pitches. It is a musical instrument that is played by rubbing, bouncing, or hitting with chalk-painted fingers.
글래스 하프 연주는 배우거나 접근하는 것이 어려워 다른 악기에 비하여 대중적인 보급 및 학습이 어렵고, 종래에는 글래스 하프 연주자라도 글래스에 실제로 물을 부어 연주해 보기 전에는 어떤 음색이며 어느 정도의 음높이가 나올 것인지 짐작하는 것이 쉽지 않고, 물을 부었다가 다시 보관을 위해 또는 전시를 위해 물을 비우고 닦아야 하므로 불편한 문제점이 있다. Glass harp performance is difficult to learn or access, making it difficult to popularize and learn compared to other instruments. Conventionally, even a glass harp player can guess what kind of tone and how much pitch will be produced before actually pouring water into the glass. It is not easy, and there is an uncomfortable problem because water must be emptied and emptied and wiped again for storage or display.
본 발명은 상기와 같은 문제점을 해결하기 위한 것으로 증강현실을 활용한 글래스 하프의 음색 시뮬레이션 및 학습 시스템을 제공한다. The present invention is to solve the above problems and provides a tone and simulation system for learning the glass half using augmented reality.
그러나 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.However, the objects of the present invention are not limited to those mentioned above, and other objects not mentioned will be clearly understood by those skilled in the art from the following description.
본 발명은 식별코드가 인쇄되고, 액체를 수용하는 공간을 포함하고 일측이 개방된 글래스 하프; 및 상기 글래스 하프의 식별코드를 인식하여 해당 글래스 하프의 음색 및 음높이를 시뮬레이션하도록 프로그램된 어플리케이션이 구동되는 사용자 단말기;를 포함하는 글래스 하프 시뮬레이션 시스템을 제공한다. The present invention is an identification code is printed, including a space for receiving a liquid glass half is opened on one side; And a user terminal in which an application programmed to simulate the tone and pitch of the corresponding glass half is recognized by recognizing the identification code of the glass half.
또한 상기 글래스 하프 시뮬레이션 시스템은 글래스 하프의 재질 및 형태에 따른 음색 및 음높이를 포함하는 시뮬레이션 정보를 포함하는 데이터베이스를 더 포함하고, 상기 식별코드는 글래스 하프의 재질 및 형태를 포함하는 식별 정보를 제공하는 것을 특징으로 한다. In addition, the glass half simulation system further includes a database including simulation information including tone and pitch according to the material and shape of the glass half, and the identification code provides identification information including the material and shape of the glass half. It is characterized by.
또한 상기 사용자 단말기는 이미지 및 소리를 인식할 수 있는 인식부, 화면을 표시하는 화면표시부, 소리를 출력하는 소리출력부 및 상기 어플리케이션의 프로그램 처리를 수행하는 처리부를 포함하고, 상기 어플리케이션은 상기 인식부를 통해 상기 글래스 하프의 식별코드를 촬영하여 식별 정보를 얻으면, 상기 처리부에서 상기 데이터베이스로부터 식별 정보에 의해 얻어지는 글래스 하프의 재질 및 형태에 대응되는 시뮬레이션 정보를 검색하여 상기 소리출력부를 통해 기 정해진 기본 음높이로 음색을 출력하도록 프로그램된 것을 특징으로 한다. In addition, the user terminal includes a recognition unit capable of recognizing images and sounds, a screen display unit displaying a screen, a sound output unit outputting sound, and a processing unit performing program processing of the application, and the application includes the recognition unit If the identification information is obtained by photographing the identification code of the glass half through the processing unit, the processing unit searches for simulation information corresponding to the material and shape of the glass half obtained by the identification information from the database, and searches the simulation output to a predetermined default pitch through the sound output unit. It is characterized by being programmed to output a tone.
또한 상기 어플리케이션은 상기 처리부에서 상기 식별코드가 촬영된 글래스 하프의 이미지를 상기 화면표시부에 표시하고, 증강현실 기술을 이용하여 글래스 하프에 가상의 액체가 채워지고 가상의 액체 수위를 조절할 수 있는 인터페이스를 제공하도록 프로그램된 것을 특징으로 한다. In addition, the application displays an image of the glass half on which the identification code is taken by the processing unit on the screen display unit, and an augmented reality technology is used to fill the glass half with a virtual liquid and control an interface to control the virtual liquid level. It is characterized by being programmed to provide.
또한 상기 어플리케이션은 사용자가 상기 화면표시부에 표시된 글래스 하프의 이미지를 문지르거나 터치하면 상기 소리출력부를 통해 해당하는 수위의 음높이를 해당 글래스의 음색으로 출력하도록 프로그램된 것을 특징으로 한다. In addition, the application is characterized in that when the user rubs or touches the image of the glass half displayed on the screen display unit, the sound level of the corresponding water level is programmed to output the sound level of the corresponding glass through the sound output unit.
또한 상기 글래스 하프는 음정 안내선이 더 인쇄되고, 사용자에 의해 상기 글래스 하프에 실제 액체가 채워지고 연주되어 소리가 발생되면, 상기 어플리케이션은 상기 처리부를 통해 상기 발생된 소리를 인식하여 해당하는 음높이를 판단하고, 음정 안내선에 따른 음높이 정보를 제공하여 사용자가 튜닝할 수 있도록 프로그램된 것을 특징으로 한다. In addition, when a pitch guide line is further printed on the glass harp, and a real liquid is filled and played by the user, a sound is generated, and the application recognizes the generated sound through the processing unit to determine a corresponding pitch level. It is characterized in that it is programmed to be tuned by the user by providing pitch information according to the pitch guide line.
또한 상기 글래스 하프 시뮬레이션 시스템은 상기 사용자 단말기와 유선 또는 무선으로 연결되어 상기 사용자 단말기의 화면표시부에 출력되는 화면과 동일한 화면을 출력하는 빔 프로젝터를 더 포함하고, 상기 어플리케이션은 인식된 식별코드에 해당하는 글래스 하프의 이미지를 화면표시부에 표시하고, 가상의 액체 수위를 조절할 수 있는 인터페이스 및 글래스 하프의 이미지를 변경할 수 있는 인터페이스를 제공하도록 프로그램되고, 상기 빔 프로젝터는 변경된 글래스 하프의 이미지를 출력하는 것을 특징으로 한다. In addition, the glass half simulation system further includes a beam projector that is connected to the user terminal by wire or wirelessly and outputs the same screen as the screen displayed on the screen display of the user terminal, and the application corresponds to the recognized identification code. It is programmed to display an image of the glass half and provide an interface for adjusting the virtual liquid level and an interface for changing the image of the glass half, wherein the beam projector outputs an image of the changed glass half Is done.
본 발명은 글래스 하프에 실제 물을 채워보기 전에 스마트 기기의 음원칩을 구동하여 미리 음색과 음높이를 시뮬레이션 해볼 수 있게 하며, 부수적으로는 통신기능을 통해 복수의 글래스 하프 연주자간에 지도학습 및 합주를 가능하게 한다.The present invention enables the sound source chip of a smart device to be simulated beforehand by filling the glass harp with real water, so that it is possible to simulate the timbre and pitch in advance, and concomitantly, it is possible to conduct supervised learning and ensemble between multiple glass harp players through a communication function. To do.
더욱 구체적으로 본 발명은 유리잔에 액체(물)를 채우고 두들겨 연주하는 글라스 하프의 표면에 표시된 식별코드를 스마트 기기로 촬영하면, 해당 글라스 하프에 매칭되는 음색을 찾아 스마트 기기의 소리 출력부를 통해 해당 음을 시뮬레이션하여 출력한다. 이 때 스마트 기기에서 구동되는 시뮬레이션 모듈은 글라스 하프에 채워진 물의 높이를 조절할 수 있는 증강현실 인터페이스를 제공하며, 물의 높이가 조정됨에 따른 음높이 변화를 적용시켜 들려 줌으로써 실제 물을 채워보지 않고도 글라스 하프의 음을 미리 들어볼 수 있어 연주에 앞서 수 내지 수십 잔을 따라서 세팅하는데 도움을 줄 수 있다. More specifically, according to the present invention, when the identification code displayed on the surface of a glass harp filled with a liquid (water) is played with a smart device, the tone matching the corresponding glass half is found and the sound is output through the sound output of the smart device. The sound is simulated and output. At this time, the simulation module running on the smart device provides an augmented reality interface that can adjust the height of the water filled in the glass half, and by applying the change in pitch as the height of the water is adjusted, you can hear the glass half without filling the actual water. You can listen in advance to help set up a few to tens of cups before you play.
도 1 및 2는 본 발명의 일 실시예에 따른 글래스 하프의 형태를 나타낸 것이다.
도 3은 본 발명의 일실시예에 따른 어플리케이션 구동 화면을 나타낸 것이다.
도 4는 본 발명의 일실시예에 따른 글래스 하프 시뮬레이션 시스템을 나타낸 것이다. 1 and 2 show the shape of a glass half according to an embodiment of the present invention.
3 shows an application driving screen according to an embodiment of the present invention.
4 shows a glass half simulation system according to an embodiment of the present invention.
이하에 본 발명을 상세하게 설명하기에 앞서, 본 명세서에 사용된 용어는 특정의 실시예를 기술하기 위한 것일 뿐 첨부하는 특허청구의 범위에 의해서만 한정되는 본 발명의 범위를 한정하려는 것은 아님을 이해하여야 한다. 본 명세서에 사용되는 모든 기술용어 및 과학용어는 다른 언급이 없는 한은 기술적으로 통상의 기술을 가진 자에게 일반적으로 이해되는 것과 동일한 의미를 가진다.Before describing the present invention in detail below, it is understood that the terms used herein are only for describing specific embodiments and are not intended to limit the scope of the present invention, which is limited only by the scope of the appended claims. shall. All technical and scientific terms used in this specification have the same meaning as commonly understood by those skilled in the art unless otherwise stated.
본 명세서 및 청구범위의 전반에 걸쳐, 다른 언급이 없는 한 포함(comprise, comprises, comprising)이라는 용어는 언급된 물건, 단계 또는 일군의 물건, 및 단계를 포함하는 것을 의미하고, 임의의 어떤 다른 물건, 단계 또는 일군의 물건 또는 일군의 단계를 배제하는 의미로 사용된 것은 아니다.Throughout this specification and claims, the term "comprise, comprises, comprising," unless otherwise stated, means including the recited article, step or group of articles, and steps, and any any other article. It is not meant to exclude a step or group of things or a group of steps.
한편, 본 발명의 여러 가지 실시예들은 명확한 반대의 지적이 없는 한 그 외의 어떤 다른 실시예들과 결합될 수 있다. 특히 바람직하거나 유리하다고 지시하는 어떤 특징도 바람직하거나 유리하다고 지시한 그 외의 어떤 특징 및 특징들과 결합될 수 있다. 이하, 첨부된 도면을 참조하여 본 발명의 실시예 및 이에 따른 효과를 설명하기로 한다.On the other hand, various embodiments of the present invention can be combined with any other embodiments, unless otherwise indicated. Any feature indicated as particularly preferred or advantageous may be combined with any other feature or features indicated as preferred or advantageous. Hereinafter, embodiments and effects according to the present invention will be described with reference to the accompanying drawings.
본 발명의 일실시예에 따른 글래스 하프 시뮬레이션 시스템은 식별코드가 인쇄되고, 액체를 수용하는 공간을 포함하고 일측이 개방된 글래스 하프(10) 및 상기 글래스 하프의 식별코드를 인식하여 해당 글래스 하프의 음색 및 음높이를 시뮬레이션하도록 프로그램된 어플리케이션이 구동되는 사용자 단말기(20)를 포함하여, 글래스 하프에 실제 물을 채워보기 전에 사용자 단말기의 소리출력부를 구동하여 미리 음색과 음높이를 시뮬레이션 해볼 수 있게 하며, 부수적으로는 사용자 단말기의 통신부를 통해 복수의 글래스 하프 연주자간에 지도학습 및 합주를 가능하게 한다.The glass half simulation system according to an embodiment of the present invention includes a space in which an identification code is printed and accommodates a liquid, and recognizes the
상기 글래스 하프(10)는 도 1 및 도 2에 나타낸 것과 같이 액체를 수용하는 공간을 포함하고 일측이 개방된 악기로서 잔 또는 병 형태일 수 있으며 상기 형상을 포함하는 형태면 제한 없이 사용할 수 있다. 상기 개방된 테두리를 손가락으로 문지르거나 튕기거나 쳐서 연주할 수 있다. The
상기 글래스 하프(10)의 표면에는 식별코드가 인쇄되어 있는 것을 사용하며, 상기 식별코드는 광학적으로 판독이 가능하도록 한 코드로서 굵기가 다른 수직 막대들의 조합으로 나타내는 바코드나 격자무늬의 2차원 코드인 QR 코드 등 광학적으로 판독이 가능하고 사용자 단말기를 통하여 스캔(인식)하면 각종 정보를 제공받을 수 있는 식별코드라면 제한 없이 사용할 수 있다.An identification code is printed on the surface of the
상기 식별 코드는 해당 글래스 하프의 재질 및 형태를 포함하는 식별 정보를 제공할 수 있도록 구성될 수 있다. The identification code may be configured to provide identification information including the material and shape of the corresponding glass half.
상기 글래스 하프 시뮬레이션 시스템은 글래스 하프의 재질 및 형태에 따른 음색 및 음높이를 포함하는 시뮬레이션 정보를 포함하는 데이터베이스(30)를 더 포함하는 것을 일 특징으로 한다. The glass half simulation system is characterized in that it further comprises a database 30 including simulation information including timbre and pitch according to the material and shape of the glass harp.
상기 데이터베이스(30)는 식별 정보 및 상기 식별 정보에 대응하는 글래스 하프의 시뮬레이션 정보, 튜닝 정보 등 다양한 정보가 저장되어 있으며, 여러 사용자 단말기에 의해 공유될 수 있다. The database 30 stores identification information, simulation information of the glass half corresponding to the identification information, tuning information, and the like, and can be shared by various user terminals.
상기 사용자 단말기(20)는 이미지 및 소리를 인식할 수 있는 인식부(21), 화면을 표시하는 화면표시부(22), 소리를 출력하는 소리출력부(23), 상기 어플리케이션의 프로그램 처리를 수행하는 처리부(24) 및 통신부(25)를 포함하여, 글래스 하프의 식별코드를 인식하여 해당 글래스 하프의 음색 및 음높이를 시뮬레이션하도록 프로그램된 어플리케이션이 구동된다. 상기 사용자 단말기는 이동 통신 단말기, 컴퓨터, 태블릿 PC 등 일 수 있다.The
상기 어플리케이션은 상기 인식부를 통해 상기 글래스 하프의 식별코드를 촬영하여 식별 정보를 얻으면, 상기 처리부에서 상기 데이터베이스로부터 식별 정보에 의해 얻어지는 글래스 하프의 재질 및 형태에 대응되는 시뮬레이션 정보를 검색하여 상기 소리출력부를 통해 기 정해진 기본 음높이로 음색을 출력하도록 프로그램된 것을 일 특징으로 한다. When the application acquires identification information by photographing the identification code of the glass half through the recognition unit, the processing unit searches the simulation unit corresponding to the material and shape of the glass half obtained by the identification information from the database and searches for the sound output unit. It is characterized by being programmed to output a tone at a predetermined default pitch.
예를 들어, 상기 어플리케이션은 도 3에 나타낸 것과 같이 상기 식별코드가 촬영된 글래스 하프의 이미지를 상기 화면표시부에 표시하고, 증강현실 기술을 이용하여 글래스 하프에 가상의 액체가 채워지고 가상의 액체 수위를 조절할 수 있는 인터페이스를 제공하도록 프로그램된 것을 일 특징으로 한다. For example, the application displays an image of the glass half on which the identification code is taken as shown in FIG. 3 on the screen display unit, and the virtual liquid is filled into the glass half using augmented reality technology and the virtual liquid level. Characterized in that it is programmed to provide an interface that can be adjusted.
사용자는 가상의 액체 수위를 조절할 수 있는 수위 조절 인터페이스를 조작하여 글래스 하프에 채워진 액체의 수위를 조절할 수 있고, 사용자가 상기 화면표시부에 표시된 글래스 하프의 이미지를 문지르거나 터치하면 상기 소리출력부를 통해 해당하는 수위의 음높이를 해당 글래스의 음색으로 출력하도록 프로그램된 것을 일 특징으로 한다. The user can control the level of the liquid filled in the glass half by manipulating the water level adjustment interface capable of adjusting the virtual liquid level, and when the user rubs or touches the image of the glass half displayed on the screen display unit, the sound is output through the sound output unit. Characterized in that it is programmed to output the pitch of the water level to the tone of the glass.
따라서 액체의 수위를 실제로 바꿔보지 않고도 사용자는 수위 변화에 따른 음정변화를 시뮬레이션해볼 수 있고, 연주에 앞서 수~수십 잔을 미리 따라서 세팅하는데 도움을 받을 수 있다. Therefore, without actually changing the liquid level, the user can simulate the pitch change according to the change in the water level, and can be assisted in setting up the dozens to dozens of glasses before playing.
또한 상기 어플리케이션은 사용자가 글래스 하프를 튜닝할 수 있도록 프로그램될 수 있다. 더욱 구체적으로 상기 글래스 하프(10)의 표면에는 음정 안내선이 더 인쇄되고, 사용자에 의해 상기 글래스 하프에 실제 액체가 채워지고 연주되어 소리가 발생되면, 상기 어플리케이션은 상기 처리부를 통해 상기 발생된 소리를 인식하여 해당하는 음높이를 판단하고, 음정 안내선에 따른 음높이 정보를 제공하여 사용자가 튜닝할 수 있도록 프로그램된 것을 일 특징으로 한다. In addition, the application can be programmed to allow the user to tune the glass half. More specifically, a pitch guide line is further printed on the surface of the
예를 들면, 세팅하고자 하는 글래스 하프의 음계가 "솔" 음 인 경우, 사용자는 우선 음정 안내선에 따라 글래스 하프에 액체를 채우고 개방된 테두리를 문지르거나 하여 음을 발생시킨다. 이때 사용자 단말기를 통해 어플리케이션을 구동시키고 발생하는 음을 수신하여 전기적 신호로 변환하여 데이터베이스를 통해 실제 발생한 음의 음계를 판단하고, 현재 수위보다 수위를 높이거나 낮출 경우 어떤 음계에 해당할지에 관한 정보를 제공하여 사용자가 튜닝하는데 도움을 줄 수 있다. For example, if the scale of the glass harp to be set is a "sol" tone, the user first fills the glass harp with a pitch guideline and rubs the open rim to generate a sound. At this time, the application is driven through the user terminal, and the generated sound is converted into an electrical signal to determine the scale of the actually generated sound through the database, and if the water level is higher or lower than the current water level, information about which scale is applied. Provided to help users tune.
또한 상기 어플리케이션은 사용자가 글래스 하프를 연주하여 발생하는 음을 수신하여 사용자 단말기에 음원으로 저장하고, 저장된 음원을 컬러링이나 벨소리 및 사용자 단말기 조작시 터치음 등으로 사용할 수 있도록 프로그램된 것을 일 특징으로 한다. In addition, the application is characterized in that the user is programmed to receive the sound generated by playing the glass harp and store it as a sound source in the user terminal, and use the stored sound source as coloring, ringtone, and touch sound when operating the user terminal. .
상기 글래스 하프 시뮬레이션 시스템은 상기 사용자 단말기와 유선 또는 무선으로 연결되어 상기 사용자 단말기의 화면표시부에 출력되는 화면과 동일한 화면을 출력하는 빔 프로젝터(40)를 더 포함한다. The glass half simulation system further includes a
이 때 상기 어플리케이션은 인식된 식별코드에 해당하는 글래스 하프의 이미지를 화면표시부에 표시하고, 가상의 액체 수위를 조절할 수 있는 인터페이스 및 글래스 하프의 이미지를 변경할 수 있는 인터페이스를 제공하도록 프로그램되고, 상기 빔 프로젝터는 변경된 글래스 하프의 이미지를 출력하는 것을 일 특징으로 한다.At this time, the application is programmed to display an image of the glass half corresponding to the recognized identification code on the screen display unit and provide an interface for adjusting the virtual liquid level and an interface for changing the image of the glass half, and the beam The projector is characterized by outputting an image of the changed glass half.
본 발명에 따른 글래스 하프 시뮬레이션 시스템은 빔 프로젝터를 더 포함하여 어두운 야간에도 글래스 하프 시뮬레이션이 가능한 효과를 제공한다. The glass half simulation system according to the present invention further includes a beam projector to provide an effect capable of glass half simulation even in dark night.
예를 들어, 글래스 하프에 있는 식별코드를 스캔하면 사용자 단말기 상에는 해당 글래스 하프의 형태가 표시되고, 사용자 단말기의 화면표시부에 나타나는 화면은 어두운 벽면에 빔 프로젝터를 통하여 영사된다. 상기 어플리케이션은 사용자가 사용자 단말기를 통해 글래스 하프의 색, 무늬 등을 변경할 수 있는 인터페이스를 제공하고, 사용자는 다양하게 변경된 글래스 하프를 빔 프로젝터를 통하여 야간에도 글래스 하프의 색뿐만 아니라 음색 및 음높이 등의 시뮬레이션이 가능하다. For example, when the identification code on the glass half is scanned, the shape of the glass half is displayed on the user terminal, and the screen displayed on the screen display of the user terminal is projected through a beam projector on a dark wall surface. The application provides an interface through which the user can change the color, pattern, etc. of the glass half through the user terminal, and the user can change the glass half as well as the color and tone of the glass half at night through the beam projector. Simulation is possible.
또한 상기 어플리케이션은 상기 인식부를 통해 글래스 하프의 식별코드를 촬영하면, 상기 화면표시부에 해당 글래스 하프를 표시하고, 사용자가 배경화면을 직접 또는 간접적으로 꾸밀 수 있는 인터페이스를 제공한다. 예를 들어, 배경이 되는 화면에 사진이나 동영상 등의 이미지를 불러와서 꾸밀 수 있고, 직접 배경화면에 그림을 그리거나 색칠할 수 있으며 불러온 이미지 상에 그리거나 색칠할 수 있는 것은 물론 다른 이미지를 더 불러와서 합성하는 등 다양한 꾸미기 인터페이스를 제공하여 사용자만의 맞춤형 글래스 하프 화면을 연출할 수 있도록 한다. In addition, the application, when photographing the identification code of the glass half through the recognition unit, displays the corresponding glass half on the screen display, and provides an interface for a user to directly or indirectly decorate a background screen. For example, you can load and decorate images such as photos or videos on the background screen, draw or paint directly on the background, draw and color on the imported image, as well as draw other images. It provides various decorating interfaces such as loading and compositing, so that you can create your own customized glass half screen.
전술한 각 실시예에서 예시된 특징, 구조, 효과 등은 실시예들이 속하는 분야의 통상의 지식을 가지는 자에 의하여 다른 실시예들에 대해서도 조합 또는 변형되어 실시 가능하다. 따라서 이러한 조합과 변형에 관계된 내용들은 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.The features, structures, effects, and the like exemplified in each of the above-described embodiments may be combined or modified for other embodiments by a person having ordinary knowledge in the field to which the embodiments belong. Therefore, it should be interpreted that contents related to such combinations and modifications are included in the scope of the present invention.
10: 글래스 하프
20: 사용자 단말기
30: 데이터베이스
40: 빔 프로젝터10: Glass Half
20: user terminal
30: Database
40: beam projector
Claims (7)
상기 글래스 하프의 식별코드를 인식하여 해당 글래스 하프의 음색 및 음높이를 시뮬레이션하도록 프로그램된 어플리케이션이 구동되는 사용자 단말기;
상기 사용자 단말기는 이미지 및 소리를 인식할 수 있는 인식부, 화면을 표시하는 화면표시부, 소리를 출력하는 소리출력부 및 상기 어플리케이션의 프로그램 처리를 수행하는 처리부를 포함하고,
상기 글래스 하프는 음정 안내선이 더 인쇄되고, 사용자에 의해 상기 글래스 하프에 실제 액체가 채워지고 연주되어 소리가 발생되면, 상기 어플리케이션은 상기 처리부를 통해 상기 발생된 소리를 인식하여 해당하는 음높이를 판단하고, 음정 안내선에 따른 음높이 정보를 제공하여 사용자가 튜닝할 수 있도록 프로그램된 것을 특징으로 하는 글래스 하프 시뮬레이션 시스템.
A glass half on which an identification code is printed, including a space for receiving liquid, and having one side open; And
A user terminal in which an application programmed to simulate the tone and pitch of the corresponding glass half is recognized by recognizing the identification code of the glass half;
The user terminal includes a recognition unit capable of recognizing images and sounds, a screen display unit displaying a screen, a sound output unit outputting sound, and a processing unit performing program processing of the application,
When a pitch guide line is further printed on the glass half, and when a real liquid is filled and played by the user, a sound is generated, the application recognizes the generated sound through the processing unit and determines a corresponding pitch level. , Glass half simulation system characterized by being programmed to be tuned by the user by providing pitch information according to the pitch guide.
상기 글래스 하프 시뮬레이션 시스템은 글래스 하프의 재질 및 형태에 따른 음색 및 음높이를 포함하는 시뮬레이션 정보를 포함하는 데이터베이스를 더 포함하고,
상기 식별코드는 글래스 하프의 재질 및 형태를 포함하는 식별 정보를 제공하는 것을 특징으로 하는 글래스 하프 시뮬레이션 시스템.
According to claim 1,
The glass half simulation system further includes a database including simulation information including tone and pitch according to the material and shape of the glass half,
The identification code is a glass half simulation system characterized in that it provides identification information including the material and shape of the glass half.
상기 어플리케이션은 상기 인식부를 통해 상기 글래스 하프의 식별코드를 촬영하여 식별 정보를 얻으면, 상기 처리부에서 상기 데이터베이스로부터 식별 정보에 의해 얻어지는 글래스 하프의 재질 및 형태에 대응되는 시뮬레이션 정보를 검색하여 상기 소리출력부를 통해 기 정해진 기본 음높이로 음색을 출력하도록 프로그램된 것을 특징으로 하는 글래스 하프 시뮬레이션 시스템.
According to claim 2,
When the application acquires identification information by photographing the identification code of the glass half through the recognition unit, the processing unit searches for simulation information corresponding to the material and shape of the glass half obtained by the identification information from the database and searches for the sound output unit. A glass half simulation system characterized by being programmed to output a tone at a predetermined default pitch.
상기 어플리케이션은 상기 처리부에서 상기 식별코드가 촬영된 글래스 하프의 이미지를 상기 화면표시부에 표시하고, 증강현실 기술을 이용하여 글래스 하프에 가상의 액체가 채워지고 가상의 액체 수위를 조절할 수 있는 인터페이스를 제공하도록 프로그램된 것을 특징으로 하는 글래스 하프 시뮬레이션 시스템.
According to claim 3,
The application displays an image of the glass half on which the identification code is taken by the processing unit on the screen display unit, and provides an interface through which a virtual liquid is filled in the glass half and a virtual liquid level can be adjusted using augmented reality technology. Glass half simulation system, characterized in that programmed to.
상기 어플리케이션은 사용자가 상기 화면표시부에 표시된 글래스 하프의 이미지를 문지르거나 터치하면 상기 소리출력부를 통해 해당하는 수위의 음높이를 해당 글래스의 음색으로 출력하도록 프로그램된 것을 특징으로 하는 글래스 하프 시뮬레이션 시스템.
According to claim 4,
The application is a glass half simulation system characterized in that when the user rubs or touches the image of the glass half displayed on the screen display unit, the sound level is programmed to output the pitch of the corresponding water level as a tone of the glass.
상기 글래스 하프 시뮬레이션 시스템은 상기 사용자 단말기와 유선 또는 무선으로 연결되어 상기 사용자 단말기의 화면표시부에 출력되는 화면과 동일한 화면을 출력하는 빔 프로젝터를 더 포함하고,
상기 어플리케이션은 인식된 식별코드에 해당하는 글래스 하프의 이미지를 상기 화면표시부에 표시하고, 가상의 액체 수위를 조절할 수 있는 인터페이스 및 글래스 하프의 이미지를 변경할 수 있는 인터페이스를 제공하도록 프로그램되고,
상기 빔 프로젝터는 변경된 글래스 하프의 이미지를 출력하는 것을 특징으로 하는 글래스 하프 시뮬레이션 시스템.The method of claim 5,
The glass half simulation system further includes a beam projector that is connected to the user terminal by wire or wirelessly and outputs the same screen as the screen displayed on the screen display of the user terminal,
The application is programmed to display an image of the glass half corresponding to the recognized identification code on the screen display unit and provide an interface for adjusting the virtual liquid level and an interface for changing the image of the glass half,
The beam projector is a glass half simulation system, characterized in that for outputting an image of the modified glass half.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180124801A KR102140029B1 (en) | 2018-10-19 | 2018-10-19 | Sound simulation and learning system of glass harp using augmented reality |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180124801A KR102140029B1 (en) | 2018-10-19 | 2018-10-19 | Sound simulation and learning system of glass harp using augmented reality |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20200044278A KR20200044278A (en) | 2020-04-29 |
| KR102140029B1 true KR102140029B1 (en) | 2020-07-31 |
Family
ID=70466600
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020180124801A KR102140029B1 (en) | 2018-10-19 | 2018-10-19 | Sound simulation and learning system of glass harp using augmented reality |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102140029B1 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20210123198A (en) | 2020-04-02 | 2021-10-13 | 주식회사 제이렙 | Argumented reality based simulation apparatus for integrated electrical and architectural acoustics |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR200432198Y1 (en) * | 2006-08-29 | 2006-11-30 | 김은영 | Wine glass having musical scale |
| JP2009229680A (en) | 2008-03-21 | 2009-10-08 | Yamaha Corp | Sound generation system |
| KR101841033B1 (en) | 2016-09-19 | 2018-05-08 | 주식회사 잼이지 | System, device, method and computer readable storage medium for providing performance guiding information based on performed note of instrument |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20090111943A (en) * | 2008-04-23 | 2009-10-28 | 주식회사 케이티테크 | Apparatus of Playing Musical Instruments Simulation by using Touch Screen and Method thereof |
| KR20160067373A (en) * | 2014-12-04 | 2016-06-14 | 김상백 | System of giving clothes wearing information with AVATA and operating method thereof |
-
2018
- 2018-10-19 KR KR1020180124801A patent/KR102140029B1/en active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR200432198Y1 (en) * | 2006-08-29 | 2006-11-30 | 김은영 | Wine glass having musical scale |
| JP2009229680A (en) | 2008-03-21 | 2009-10-08 | Yamaha Corp | Sound generation system |
| KR101841033B1 (en) | 2016-09-19 | 2018-05-08 | 주식회사 잼이지 | System, device, method and computer readable storage medium for providing performance guiding information based on performed note of instrument |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20200044278A (en) | 2020-04-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7889170B2 (en) | Inner force sense presentation device, inner force sense presentation method, and inner force sense presentation program | |
| CN108933850A (en) | Mobile terminal | |
| US20230245405A1 (en) | Mixed reality musical instrument | |
| CN106919358A (en) | A kind of display control method of mobile terminal, device and mobile terminal | |
| KR101679239B1 (en) | Apparatus and method for playing on musical instruments by augmented reality in portable terminal | |
| KR20180050746A (en) | Head pose mix of audio files | |
| US11749246B2 (en) | Systems and methods for music simulation via motion sensing | |
| US20180197345A1 (en) | Augmented reality technology-based handheld viewing device and method thereof | |
| US8352267B2 (en) | Information processing system and method for reading characters aloud | |
| CN110443167A (en) | Intelligent identification Method, intelligent interactive method and the relevant apparatus of traditional culture gesture | |
| CN106933527A (en) | A kind of display control method of mobile terminal, device and mobile terminal | |
| JP2022530935A (en) | Interactive target drive methods, devices, devices, and recording media | |
| CN110232654A (en) | Image composition method, device, equipment and its storage medium | |
| KR102140029B1 (en) | Sound simulation and learning system of glass harp using augmented reality | |
| US12014645B2 (en) | Virtual tutorials for musical instruments with finger tracking in augmented reality | |
| US20230090995A1 (en) | Virtual-musical-instrument-based audio processing method and apparatus, electronic device, computer-readable storage medium, and computer program product | |
| KR101214674B1 (en) | Apparatus and method for generating mosaic image including text | |
| US9899057B2 (en) | Control method for synchronized video, control system for synchronized video and electronic apparatus thereof | |
| CN114416014A (en) | Screen sounding method and device, display equipment and computer readable storage medium | |
| KR20140078083A (en) | Method of manufacturing cartoon contents for augemented reality and apparatus performing the same | |
| CN111212323A (en) | Audio and video synthesis method and device, electronic equipment and medium | |
| CN114185431B (en) | Intelligent media interaction method based on MR technology | |
| KR101476526B1 (en) | Method learning music with smart device | |
| US20230326357A1 (en) | Information processing system and computer system implemented method of processing information | |
| JP7506788B2 (en) | Mixed Reality Instruments |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |