KR101987473B1 - System for synchronization between accompaniment and singing voice of online singing room service and apparatus for executing the same - Google Patents

System for synchronization between accompaniment and singing voice of online singing room service and apparatus for executing the same Download PDF

Info

Publication number
KR101987473B1
KR101987473B1 KR1020170170728A KR20170170728A KR101987473B1 KR 101987473 B1 KR101987473 B1 KR 101987473B1 KR 1020170170728 A KR1020170170728 A KR 1020170170728A KR 20170170728 A KR20170170728 A KR 20170170728A KR 101987473 B1 KR101987473 B1 KR 101987473B1
Authority
KR
South Korea
Prior art keywords
accompaniment
time
signal
synchronization signal
time information
Prior art date
Application number
KR1020170170728A
Other languages
Korean (ko)
Inventor
김경순
김현태
Original Assignee
미디어스코프 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 미디어스코프 주식회사 filed Critical 미디어스코프 주식회사
Priority to KR1020170170728A priority Critical patent/KR101987473B1/en
Priority to PCT/KR2017/014730 priority patent/WO2019117362A1/en
Application granted granted Critical
Publication of KR101987473B1 publication Critical patent/KR101987473B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/18—Selecting circuits
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B31/00—Arrangements for the associated working of recording or reproducing apparatus with related apparatus
    • G11B31/02—Arrangements for the associated working of recording or reproducing apparatus with related apparatus with automatic musical instruments
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/005—Musical accompaniment, i.e. complete instrumental rhythm synthesis added to a performed melody, e.g. as output by drum machines

Abstract

Disclosed are a system for synchronization between accompaniment and singing voice of an online signing room service and an apparatus for performing the same. According to one embodiment of the present invention, the system comprises: an accompaniment playing device outputting accompaniment and a synchronization signal for a selected song to a speaker; and a plurality of user terminals extracting time information of the synchronization signal by obtaining the synchronization signal, obtaining singing voice of a user according to the accompaniment, generating a song recording packet including the time information of the synchronization signal and the singing voice, and respectively transmitting the generated song recording packet to the accompaniment playing device.

Description

온라인 노래방 서비스의 반주 및 가창 음성 간 동기화 시스템 및 이를 수행하기 위한 장치{SYSTEM FOR SYNCHRONIZATION BETWEEN ACCOMPANIMENT AND SINGING VOICE OF ONLINE SINGING ROOM SERVICE AND APPARATUS FOR EXECUTING THE SAME}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an online karaoke service synchronizing system,

본 발명의 실시예는 온라인 노래방 서비스 기술과 관련된다.Embodiments of the invention relate to on-line karaoke service technology.

기존의 오프라인 노래방 서비스의 공간적 한계를 극복하기 위해 온라인 노래방 서비스가 개발되고 있다. 온라인 노래방 서비스는 복수의 사용자들이 가상의 공간에 참여하여 함께 노래를 부르기 때문에, 반주와 사용자들의 가창 음성이 서로 동기화가 되어야 한다. An online karaoke service is being developed to overcome the limitation of the existing offline karaoke service. Since the online karaoke service involves a plurality of users participating in a virtual space and singing together, the accompaniment and the user's voice must be synchronized with each other.

그런데, 온라인 노래방 서비스는 그 특성 상 반주와 사용자들의 가창 음성 간에 지연 시간이 발생할 수 밖에 없어 동기화에 어려움이 있다. 즉, 사용자 단말기에서 해당 사용자의 가창 음성을 녹음하여 네트워크를 통해 반주 재생 장치로 전송하고 반주 재생 장치에서 이를 출력하는 동안 지연 시간이 발생하여 반주와 사용자들의 가창 음성 간에 동기화가 되지 못하는 문제점이 있다. However, the online karaoke service has a difficulty in synchronization because the delay time between the accompaniment and the user's voice is inevitable. That is, there is a problem in that a user's terminal records a phonetic voice of the user, transmits the phonetic voice to the accompaniment playback apparatus through the network, and the delay time occurs while the accompaniment playback apparatus outputs the voice.

한국공개특허공보 제10-2000-0037280호(2000.07.05)Korean Unexamined Patent Application Publication No. 10-2000-0037280 (2000.07.05)

본 발명의 실시예는 반주와 사용자들의 가창 음성 간 동기화 지연 시간에 따른 문제를 해결할 수 있는 온라인 노래방 서비스 시스템 및 이를 수행하기 위한 장치를 제공하기 위한 것이다.An embodiment of the present invention is to provide an online karaoke system and an apparatus for performing the same, which can solve the problem caused by the synchronization delay time between accompaniment and the user's voice.

개시되는 일 실시예에 따른 시스템은, 온라인 노래방 서비스의 반주 및 가창 음성 간 동기화를 위한 시스템으로서, 선곡된 노래에 대한 반주 및 시간 정보를 포함하는 동기 신호를 스피커로 출력하는 반주 재생 장치; 및 상기 동기 신호를 획득하여 상기 동기 신호의 시간 정보를 추출하고, 상기 반주에 따른 사용자의 가창 음성을 획득하며, 상기 동기 신호의 시간 정보 및 상기 가창 음성을 포함하는 가창 녹음 패킷을 생성하고, 생성한 상기 가창 녹음 패킷을 상기 반주 재생 장치로 각각 전송하는 복수 개의 사용자 단말기를 포함한다.According to an embodiment of the present invention, there is provided a system for synchronizing an accompaniment of an on-line karaoke service and a vocal voice, the system comprising: an accompaniment reproducing apparatus for outputting a synchronizing signal including accompaniment and time information of a selected song to a speaker; And acquiring the synchronization signal to extract time information of the synchronization signal, acquiring a voice of the user according to the accompaniment, generating a voiced recording packet including time information of the synchronization signal and the voiced voice, And a plurality of user terminals for transmitting the audio recording packets to the accompaniment reproducing apparatus, respectively.

상기 반주 재생 장치는, 상기 복수 개의 사용자 단말기로부터 상기 가창 녹음 패킷을 각각 수신하고, 수신한 각 가창 녹음 패킷에서 상기 동기 신호의 시간 정보를 추출하며, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간을 비교할 수 있다.Wherein the accompaniment playback apparatus receives the vocal recording packet from each of the plurality of user terminals, extracts time information of the sync signal from each of the received recording packets, extracts temporal information of the extracted sync signal, Can be compared with each other.

상기 반주 재생 장치는, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이에 따라 해당 가창 녹음 패킷에 포함된 가창 음성의 출력 처리를 결정할 수 있다. The accompaniment playback apparatus can determine the output processing of the chorus sound included in the corresponding recording packet according to the time difference between the time information of the extracted synchronization signal and the reception time of the corresponding recording packet.

상기 반주 재생 장치는, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 기 설정된 제1 시간 범위 이내인 경우, 상기 가창 음성을 스피커로 출력할 수 있다.The accompaniment playback apparatus may output the vocal sound to a speaker when the time difference between the time information of the extracted synchronization signal and the reception time of the corresponding recording packet is within a predetermined first time range.

상기 반주 재생 장치는, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 상기 제1 시간 범위 보다 큰 기 설정된 제2 시간 범위 이내인 경우, 상기 가창 음성을 에코 처리하여 스피커로 출력할 수 있다.When the time difference between the time information of the extracted synchronizing signal and the receiving time of the corresponding recording packet is within a predetermined second time range larger than the first time range, .

상기 반주 재생 장치는, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 상기 제2 시간 범위 보다 큰 기 설정된 제3 시간 범위를 초과하는 경우, 상기 가창 음성을 음소거 처리할 수 있다.When the time difference between the extracted time information of the synchronization signal and the reception time of the corresponding recording packet exceeds a predetermined third time range larger than the second time range, the accompaniment playback device may mute .

상기 동기 신호는, 비가청 주파수 대역의 신호이고, 상기 반주가 출력되는 동안 주기적으로 출력될 수 있다.The synchronization signal is a signal of an inaudible frequency band and can be output periodically while the accompaniment is output.

개시되는 일 실시예에 따른 컴퓨팅 장치는, 하나 이상의 프로세서들; 메모리; 및 하나 이상의 프로그램들을 포함하고, 상기 하나 이상의 프로그램들은 상기 메모리에 저장되고, 상기 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 상기 하나 이상의 프로그램들은, 선곡된 노래에 대한 반주를 스피커로 출력하기 위한 명령; 상기 반주가 출력되는 동안 시간 정보가 포함된 동기 신호를 스피커로 출력하기 위한 명령; 복수 개의 사용자 단말기로부터 가창 녹음 패킷을 각각 수신하기 위한 명령; 수신한 각 가창 녹음 패킷에서 상기 동기 신호의 시간 정보를 추출하기 위한 명령; 및 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간을 비교하기 위한 명령을 포함한다.A computing device according to one disclosed embodiment includes: one or more processors; Memory; And one or more programs, wherein the one or more programs are stored in the memory and are configured to be executed by the one or more processors, the one or more programs comprising instructions for outputting an accompaniment for a selected song to a speaker ; A command for outputting a synchronizing signal including time information to the speaker while the accompaniment is output; Receiving a recording packet from a plurality of user terminals; An instruction for extracting time information of the sync signal in each received recording packet; And a command for comparing the time information of the extracted synchronization signal with the reception time of the corresponding recording packet.

상기 하나 이상의 프로그램들은, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이에 따라 해당 가창 녹음 패킷에 포함된 가창 음성의 출력 처리를 결정하기 위한 명령을 더 포함할 수 있다.The one or more programs may further include a command for determining an output process of a vocal sound included in a corresponding recording packet according to a time difference between time information of the extracted synchronization signal and reception time of a corresponding recording packet.

상기 하나 이상의 프로그램들은, 상기 출력 처리를 결정하기 위한 명령에서, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 기 설정된 제1 시간 범위 이내인 경우, 상기 가창 음성을 스피커로 출력하기 위한 명령을 포함할 수 있다.Wherein the one or more programs cause the audio signal to be output to the speaker when the time difference between the extracted time information of the synchronization signal and the reception time of the corresponding recording packet is within a predetermined first time range, As shown in FIG.

상기 하나 이상의 프로그램들은, 상기 출력 처리를 결정하기 위한 명령에서, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 상기 제1 시간 범위 보다 큰 기 설정된 제2 시간 범위 이내인 경우, 상기 가창 음성을 에코 처리하여 스피커로 출력하기 위한 명령을 포함할 수 있다.Wherein the one or more programs are instructions for determining whether the time difference between the time information of the extracted synchronization signal and the reception time of the corresponding recording packet is within a predetermined second time range larger than the first time range , And may include an instruction to echo the high-frequency speech and output it to the speaker.

상기 하나 이상의 프로그램들은, 상기 출력 처리를 결정하기 위한 명령에서, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 상기 제2 시간 범위 보다 큰 기 설정된 제3 시간 범위를 초과하는 경우, 상기 가창 음성을 음소거 처리하기 위한 명령을 포함할 수 있다.Wherein the one or more programs include a command for determining the output processing that the time difference between the extracted time information of the synchronization signal and the reception time of the corresponding recording packet exceeds a predetermined third time range larger than the second time range The audio processing unit may include an instruction to mute the audio signal.

상기 동기 신호는, 비가청 주파수 대역의 신호이고, 상기 반주가 출력되는 동안 주기적으로 출력될 수 있다.The synchronization signal is a signal of an inaudible frequency band and can be output periodically while the accompaniment is output.

개시되는 다른 실시예에 따른 컴퓨팅 장치는, 하나 이상의 프로세서들; 메모리; 및 하나 이상의 프로그램들을 포함하고, 상기 하나 이상의 프로그램들은 상기 메모리에 저장되고, 상기 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 상기 하나 이상의 프로그램들은, 반주 재생 장치의 스피커에서 출력되고 시간 정보가 포함된 동기 신호를 획득하기 위한 명령; 상기 동기 신호의 시간 정보를 추출하기 위한 명령; 상기 반주 재생 장치의 스피커에서 출력되는 반주에 따른 사용자의 가창 음성을 획득하기 위한 명령; 상기 동기 신호의 시간 정보 및 상기 가창 음성을 포함하는 가창 녹음 패킷을 생성하기 위한 명령; 및 상기 가창 녹음 패킷을 상기 반주 재생 장치로 전송하기 위한 명령을 포함한다.A computing device according to another disclosed embodiment includes: one or more processors; Memory; And one or more programs are stored in the memory and are configured to be executed by the one or more processors, wherein the one or more programs are output from a speaker of the accompaniment playback apparatus, Instructions for obtaining a synchronization signal; An instruction for extracting time information of the synchronization signal; An instruction for obtaining a user's phonetic voice according to an accompaniment outputted from a speaker of the accompaniment reproducing apparatus; Generating a recording packet including the time information of the synchronization signal and the audio signal; And an instruction to transmit the audio recording packet to the accompaniment reproducing apparatus.

개시되는 또 다른 실시예에 따른 컴퓨팅 장치는, 하나 이상의 프로세서들; 메모리; 및 하나 이상의 프로그램들을 포함하고, 상기 하나 이상의 프로그램들은 상기 메모리에 저장되고, 상기 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 상기 하나 이상의 프로그램들은, 선곡된 노래에 대한 반주를 스피커로 출력하기 위한 명령; 상기 반주가 출력되는 동안 동기 신호를 스피커로 출력하고, 상기 동기 신호의 시간 정보를 저장하기 위한 명령; 복수 개의 사용자 단말기로부터 가창 녹음 패킷을 각각 수신하기 위한 명령; 수신한 각 가창 녹음 패킷에서 상기 동기 신호를 추출하기 위한 명령; 기 저장된 동기 신호들 중 상기 추출한 동기 신호와 대응되는 패턴의 동기 신호를 추출하기 위한 명령; 및 상기 대응되는 패턴의 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간을 비교하기 위한 명령을 포함한다.A computing device according to another disclosed embodiment includes: one or more processors; Memory; And one or more programs, wherein the one or more programs are stored in the memory and are configured to be executed by the one or more processors, the one or more programs comprising instructions for outputting an accompaniment for a selected song to a speaker ; Outputting a synchronizing signal to the speaker while the accompaniment is being output, and storing time information of the synchronizing signal; Receiving a recording packet from a plurality of user terminals; A command for extracting the synchronization signal from each received recording packet; A command for extracting a synchronous signal of a pattern corresponding to the extracted synchronous signal among the previously stored synchronous signals; And a command for comparing the time information of the synchronization signal of the corresponding pattern with the reception time of the corresponding recording packet.

개시되는 실시예에 의하면, 반주 재생 장치에서 반주가 재생되는 동안 동기 신호를 출력하고, 사용자 단말기에서 동기 신호를 획득한 후 동기 신호의 시간 정보를 포함한 가창 녹음 패킷을 생성하고 전송함으로써, 반주 재생 장치에서 사용자 단말기의 가창 녹음 중 지연 시간이 기 설정된 시간을 초과한 것에 대해서는 에코 처리 또는 음소거 처리 할 수 있으며, 그로 인해 복수의 사용자들이 노래방을 이용하더라도 사용자들의 가창 음성이 돌림 노래처럼 들리는 것을 방지할 수 있게 된다.According to the disclosed embodiment, a synchronizing signal is output while an accompaniment reproducing apparatus reproduces an accompaniment, a voice recording packet including time information of a synchronizing signal is generated and transmitted after acquiring a synchronizing signal at a user terminal, Echo processing or mute processing can be performed on the delay time of the user recording of the user terminal when the delay time exceeds a preset time, thereby preventing the voice of the user from being heard as a ringing song even if a plurality of users use the karaoke system .

도 1은 본 발명의 일 실시예에 따른 온라인 노래방 서비스 시스템을 나타낸 도면
도 2는 본 발명의 일 실시예에 따른 온라인 노래방 서비스 방법을 설명하기 위한 흐름도
도 3은 본 발명의 일 실시예에 따른 반주 재생 장치의 구성을 나타낸 블록도
도 4는 본 발명의 일 실시예에 따른 사용자 단말기의 구성을 나타낸 블록도
도 5는 본 발명의 다른 실시예에 따른 온라인 노래방 서비스 시스템을 나타낸 도면
도 6은 예시적인 실시예들에서 사용되기에 적합한 컴퓨팅 장치를 포함하는 컴퓨팅 환경을 예시하여 설명하기 위한 블록도1 is a diagram illustrating an online karaoke service system according to an embodiment of the present invention;
2 is a flowchart illustrating an online karaoke service method according to an embodiment of the present invention.
3 is a block diagram showing a configuration of an accompaniment reproducing apparatus according to an embodiment of the present invention
4 is a block diagram illustrating a configuration of a user terminal according to an embodiment of the present invention.
5 is a diagram illustrating an online karaoke system according to another embodiment of the present invention.
6 is a block diagram illustrating and illustrating a computing environment including a computing device suitable for use in the exemplary embodiments.

이하, 도면을 참조하여 본 발명의 구체적인 실시형태를 설명하기로 한다. 이하의 상세한 설명은 본 명세서에서 기술된 방법, 장치 및/또는 시스템에 대한 포괄적인 이해를 돕기 위해 제공된다. 그러나 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다.Hereinafter, specific embodiments of the present invention will be described with reference to the drawings. The following detailed description is provided to provide a comprehensive understanding of the methods, apparatus, and / or systems described herein. However, this is merely an example and the present invention is not limited thereto.

본 발명의 실시예들을 설명함에 있어서, 본 발명과 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 상세한 설명에서 사용되는 용어는 단지 본 발명의 실시예들을 기술하기 위한 것이며, 결코 제한적이어서는 안 된다. 명확하게 달리 사용되지 않는 한, 단수 형태의 표현은 복수 형태의 의미를 포함한다. 본 설명에서, "포함" 또는 "구비"와 같은 표현은 어떤 특성들, 숫자들, 단계들, 동작들, 요소들, 이들의 일부 또는 조합을 가리키기 위한 것이며, 기술된 것 이외에 하나 또는 그 이상의 다른 특성, 숫자, 단계, 동작, 요소, 이들의 일부 또는 조합의 존재 또는 가능성을 배제하도록 해석되어서는 안 된다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. The following terms are defined in consideration of the functions of the present invention, and may be changed according to the intention or custom of the user, the operator, and the like. Therefore, the definition should be based on the contents throughout this specification. The terms used in the detailed description are intended only to describe embodiments of the invention and should in no way be limiting. Unless specifically stated otherwise, the singular form of a term includes plural forms of meaning. In this description, the expressions "comprising" or "comprising" are intended to indicate certain features, numbers, steps, operations, elements, parts or combinations thereof, Should not be construed to preclude the presence or possibility of other features, numbers, steps, operations, elements, portions or combinations thereof.

이하의 설명에 있어서, 신호 또는 정보의 "전송", "통신", "송신", "수신" 기타 이와 유사한 의미의 용어는 일 구성요소에서 다른 구성요소로 신호 또는 정보가 직접 전달되는 것뿐만이 아니라 다른 구성요소를 거쳐 전달되는 것도 포함한다. 특히 신호 또는 정보를 일 구성요소로 "전송" 또는 "송신"한다는 것은 그 신호 또는 정보의 최종 목적지를 지시하는 것이고 직접적인 목적지를 의미하는 것이 아니다. 이는 신호 또는 정보의 "수신"에 있어서도 동일하다. 또한 본 명세서에 있어서, 2 이상의 데이터 또는 정보가 "관련"된다는 것은 하나의 데이터(또는 정보)를 획득하면, 그에 기초하여 다른 데이터(또는 정보)의 적어도 일부를 획득할 수 있음을 의미한다. In the following description, terms such as " transmission ", "transmission "," transmission ", "reception ", and the like, of a signal or information refer not only to the direct transmission of signals or information from one component to another But also through other components. In particular, "transmitting" or "transmitting" a signal or information to an element is indicative of the final destination of the signal or information and not a direct destination. This is the same for "reception" of a signal or information. Also, in this specification, the fact that two or more pieces of data or information are "related" means that when one piece of data (or information) is acquired, at least a part of the other data (or information) can be obtained based thereon.

또한, 제1, 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로 사용될 수 있다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성 요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다.Also, the terms first, second, etc. may be used to describe various components, but the components should not be limited by the terms. The terms may be used for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.

도 1은 본 발명의 일 실시예에 따른 온라인 노래방 서비스 시스템을 나타낸 도면이다. 1 is a diagram illustrating an online karaoke system according to an exemplary embodiment of the present invention.

도 1을 참조하면, 온라인 노래방 서비스 시스템(100)은 관리 서버(102), 반주 재생 장치(104), 및 사용자 단말기(106)를 포함할 수 있다. 1, an online karaoke system 100 may include a management server 102, an accompaniment playback apparatus 104, and a user terminal 106. [

반주 재생 장치(104) 및 사용자 단말기(106)는 각각 통신 네트워크를 통해 관리 서버(102)와 통신 가능하게 연결된다. 몇몇 실시예들에서, 통신 네트워크는 인터넷, 하나 이상의 로컬 영역 네트워크(local area networks), 광역 네트워크(wire area networks), 셀룰러 네트워크, 모바일 네트워크, 그 밖에 다른 종류의 네트워크들, 또는 이러한 네트워크들의 조합을 포함할 수 있다.The accompaniment playback device 104 and the user terminal 106 are communicably connected to the management server 102 via a communication network. In some embodiments, the communication network may be an Internet, one or more local area networks, a wire area networks, a cellular network, a mobile network, other types of networks, .

관리 서버(102)는 온라인 노래방 서비스를 관리하기 위한 서버 컴퓨팅 장치일 수 있다. 관리 서버(102)는 사용자 단말기(106)로부터 수신되는 가상 노래방 개설 요청에 따라 복수의 사용자들을 위한 가상 노래방을 개설할 수 있다. 관리 서버(102)는 사용자 단말기(106)로부터 노래 선곡을 수신할 수 있다. 관리 서버(102)는 선곡된 노래에 대한 반주를 반주 재생 장치(104)로 전송할 수 있다. 또한, 관리 서버(102)는 선곡된 노래에 대응하는 영상(예를 들어, 선곡된 노래의 뮤직 비디오 또는 배경 영상 등)을 반주 재생 장치(104)로 전송할 수 있다. 상기 영상에는 선곡된 노래에 대한 가사 정보가 포함될 수 있다. The management server 102 may be a server computing device for managing an online karaoke service. The management server 102 may open a virtual karaoke room for a plurality of users according to a request for opening a virtual karaoke room received from the user terminal 106. [ The management server 102 may receive the song selection from the user terminal 106. The management server 102 may send an accompaniment for the selected song to the accompaniment playback device 104. [ In addition, the management server 102 may transmit an image corresponding to the selected song (for example, a music video or a background image of the selected song) to the accompaniment playback apparatus 104. [ The image may include lyric information about the selected song.

반주 재생 장치(104)는 관리 서버(102)로부터 수신한 반주(즉, 선곡된 노래에 대한 반주)를 스피커로 출력할 수 있다. 반주 재생 장치(104)는 관리 서버(102)로부터 수신한 영상(즉, 선곡된 노래에 대응하는 영상)을 화면에 디스플레이 할 수 있다. 반주 재생 장치(104)는 반주가 플레이 됨에 따라 해당 노래의 가사를 화면에 표시할 수 있다. 이 경우, 반주 재생 장치(104)는 화면을 구비하는 컴퓨팅 장치(예를 들어, TV, 노트북, 모니터 등)가 사용될 수 있다. The accompaniment playback device 104 can output the accompaniment received from the management server 102 (that is, the accompaniment for the selected song) to the speaker. The accompaniment playback apparatus 104 can display an image received from the management server 102 (i.e., an image corresponding to the selected song) on the screen. The accompaniment playback apparatus 104 can display the lyrics of the song on the screen as the accompaniment is played. In this case, the accompaniment playback apparatus 104 may be a computing device (e.g., a TV, a notebook, a monitor, etc.) having a screen.

반주 재생 장치(104)는 반주가 출력되는 경우 동기 신호를 함께 출력할 수 있다. 여기서, 동기 신호는 비가청 주파수 대역의 신호일 수 있다. 즉, 동기 신호는 사용자들의 귀에 들리지 않는 신호일 수 있다. 동기 신호에는 해당 동기 신호가 반주의 전체 플레이 시간 중 어느 시간대에 발생되는 것인지에 대한 시간 정보(예를 들어, 타임 스탬프 등)가 포함될 수 있다. 예를 들어, 상기 시간 정보는 동기 신호에 워터마크 형태로 삽입될 수 있다. The accompaniment playback apparatus 104 can output a synchronizing signal when the accompaniment is outputted. Here, the synchronization signal may be a signal in the non-audible frequency band. That is, the synchronization signal may be a signal that can not be heard by the users. The synchronization signal may include time information (e.g., a time stamp, etc.) as to which synchronization signal is generated during the entire play time of the accompaniment. For example, the time information may be embedded in the synchronization signal in the form of a watermark.

예시적인 실시예에서, 반주 재생 장치(104)는 반주를 제1 스피커를 통해 출력하고, 동기 신호를 제2 스피커를 통해 출력할 수 있다. 또는, 반주 재생 장치(104)는 반주와 동기 신호를 합성하여 하나의 스피커를 통해 출력할 수도 있다. 반주 재생 장치(104)는 반주가 출력되는 동안 기 설정된 주기로 동기 신호를 출력할 수 있다. 예를 들어, 동기 신호는 해당 노래의 마디마다 발생되어 출력될 수 있으나 이에 한정되는 것은 아니다. In an exemplary embodiment, the accompaniment reproduction apparatus 104 may output the accompaniment through the first speaker and output the synchronizing signal through the second speaker. Alternatively, the accompaniment playback device 104 may combine the accompaniment and the sync signal and output it through one speaker. The accompaniment reproducing apparatus 104 can output a synchronizing signal at a predetermined cycle while the accompaniment is being output. For example, the synchronization signal may be generated and output for each node of the song, but is not limited thereto.

반주 재생 장치(104)는 각 사용자 단말기(106)들로부터 가창 녹음 패킷을 수신할 수 있다. 반주 재생 장치(104)는 수신한 가창 녹음 패킷에서 동기 신호의 시간 정보를 추출하고, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간을 비교하여 해당 가창 녹음 패킷에 포함된 가창 음성의 출력 처리를 결정할 수 있다. The accompaniment playback apparatus 104 can receive a recording packet from each of the user terminals 106. [ The accompaniment playback device 104 extracts the time information of the synchronizing signal in the received recording packet, compares the time information of the extracted synchronizing signal with the receiving time of the vocal recording packet, Can be determined.

예시적인 실시예에서, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간 간의 시간 차이가 기 설정된 제1 시간 범위 이내(예를 들어, 20ms 미만)인 경우, 반주 재생 장치(104)는 수신한 가창 녹음 패킷에 포함된 해당 사용자의 가창 음성을 스피커로 출력할 수 있다. In the exemplary embodiment, when the time difference between the time information of the extracted synchronizing signal and the receiving time of the vocal recording packet is within a predetermined first time range (for example, less than 20 ms), the accompaniment playback apparatus 104 It is possible to output the voice of the user included in the voice recording packet to the speaker.

여기서, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간 간의 시간 차이는 반주와 사용자의 가창 음성 간의 지연 시간(이하, "동기화 지연 시간"으로 지칭할 수 있음)일 수 있다. 동기화 지연 시간은 사용자 단말기(106)에서 발생되는 지연 시간(예를 들어, 사용자의 가창 음성을 획득하는 시간, 가창 녹음 패킷을 생성하는 시간 등을 포함), 사용자 단말기(106)와 반주 재생 장치(104) 간의 네트워크에 의한 지연 시간, 및 반주 재생 장치(104)에서 발생되는 지연 시간(예를 들어, 가창 녹음 패킷을 수신 처리하는 시간, 가창 녹음 패킷에 포함된 사용자의 가창 음성을 스피커로 출력하는 시간 등을 포함)을 포함할 수 있다.Here, the time difference between the time information of the extracted synchronization signal and the reception time of the vocal recording packet may be a delay time (hereinafter referred to as "synchronization delay time") between the accompaniment and the voice of the user. The synchronization delay time includes a delay time generated in the user terminal 106 (for example, a time for acquiring a voice of a user, a time for generating a recording packet, etc.), a user terminal 106, 104), and a delay time generated in the accompaniment playback apparatus 104 (for example, a time for receiving a recording packet of a major recording, Time, etc.).

또한, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간 간의 시간 차이가 기 설정된 제2 시간 범위 이내(예를 들어, 20ms ~ 70 ms)인 경우, 반주 재생 장치(104)는 해당 사용자의 가창 음성을 에코 처리하여 스피커로 출력할 수 있다. 이때, 동기화 지연 시간이 기 설정된 제2-1 시간 범위(예를 들어, 20ms ~ 40 ms) 이내인 경우, 반주 재생 장치(104)는 해당 사용자의 가창 음성을 제1 레벨로 에코 처리하여 스피커로 출력할 수 있다. 동기화 지연 시간이 기 설정된 제2-2 시간 범위(40ms ~ 70 ms) 이내인 경우, 반주 재생 장치(104)는 해당 사용자의 가창 음성을 제1 레벨보다 높은 제2 레벨로 에코 처리하여 스피커로 출력할 수 있다.When the time difference between the time information of the extracted synchronizing signal and the receiving time of the vocal recording packet is within a predetermined second time range (for example, 20 ms to 70 ms), the accompaniment playback apparatus 104 transmits, The sound can be echoed and output to the speaker. At this time, when the synchronization delay time is within the second-first time range (for example, 20 ms to 40 ms), the accompaniment playback apparatus 104 echoes the audio of the user's voice to the first level, Can be output. When the synchronization delay time is within the preset second-2 time range (40 ms to 70 ms), the accompaniment playback apparatus 104 echoes the phonetic voice of the user to a second level higher than the first level, can do.

또한, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간 간의 시간 차이가 기 설정된 제3 시간 범위 (예를 들어, 70 ms)를 초과하는 경우, 반주 재생 장치(104)는 해당 사용자의 가창 음성을 뮤트(mute)(음소거) 시킬 수 있다. When the time difference between the time information of the extracted synchronizing signal and the receiving time of the vocal recording packet exceeds a predetermined third time range (for example, 70 ms), the accompaniment playback apparatus 104 plays back the vocal sound of the user Can be muted (muted).

예를 들어, 제1 사용자 단말기(106-1)의 동기화 지연 시간이 10ms, 제2 사용자 단말기(106-2)의 동기화 지연 시간이 15ms, 제3 사용자 단말기(106-3)의 동기화 지연 시간이 30ms, 제4 단말기(106-4)의 동기화 지연 시간이 75ms인 경우, 반주 재생 장치(104)는 제1 사용자 및 제2 사용자의 가창 음성을 그대로 스피커로 출력할 수 있다. 그리고, 반주 재생 장치(104)는 제3 사용자의 가창 음성은 에코 처리하여 스피커로 출력할 수 있다. 또한, 반주 재생 장치(104)는 제4 사용자의 가창 음성은 음소거 처리할 수 있다. For example, if the synchronization delay time of the first user terminal 106-1 is 10 ms, the synchronization delay time of the second user terminal 106-2 is 15 ms, the synchronization delay time of the third user terminal 106-3 is 30ms and the synchronization delay time of the fourth terminal 106-4 is 75ms, the accompaniment playback apparatus 104 can output the audio of the first user and the second user directly to the speaker. Then, the accompaniment playback device 104 can echo the audio of the third user and output it to the speaker. Also, the accompaniment playback apparatus 104 can perform the mute processing for the audio of the fourth user.

여기서, 기 설정된 제1 시간 범위는 동기화 지연 시간이 발생하더라도 사용자가 듣기에 시간차이를 잘 느끼지 못하는 시간 범위로 설정할 수 있다. 기 설정된 제2 시간 범위는 동기화 지연 시간에 따른 시간 차이를 사용자가 어느 정도 인식하게 되는 시간 범위로 설정할 수 있다. 기 설정된 제3 시간 범위는 동기화 지연 시간에 따른 시간 차이로 인해 사용자들의 가창 음성이 돌림 노래 처럼 느껴지는 시간 범위로 설정할 수 있다. Here, the predetermined first time range may be set to a time range in which the user can not feel the time difference in the listening time even if the synchronization delay time occurs. The predetermined second time range may be set to a time range in which the user recognizes the time difference according to the synchronization delay time to some extent. The predetermined third time range may be set to a time range in which the user's voice sounds like a turning song due to a time difference according to the synchronization delay time.

또한, 기 설정된 제1 시간 범위, 제2 시간 범위, 및 제3 시간 범위는 사용자 단말기(106)에서 발생되는 지연 시간, 사용자 단말기(106)와 반주 재생 장치(104) 간의 네트워크에 의한 지연 시간, 및 반주 재생 장치(104)에서 발생되는 지연 시간 등을 고려하여 적절하게 설정할 수 있다. The predetermined first time range, the second time range, and the third time range may include a delay time generated at the user terminal 106, a delay time due to the network between the user terminal 106 and the accompaniment playback apparatus 104, And the delay time generated in the accompaniment playback apparatus 104, and the like.

사용자 단말기(106)는 온라인 노래방 서비스를 이용하는 사용자가 소지하는 단말기일 수 있다. 사용자 단말기(106)는 온라인 노래방 서비스를 이용하는 사용자의 모바일 단말기(예를 들어, 스마트 폰, 태블릿 PC, 웨어러블 기기 등) 일 수 있다. 사용자 단말기(106)는 마이크를 구비할 수 있다. 사용자 단말기(106)는 반주 재생 장치(104)에 무선 접속될 수 있다. The user terminal 106 may be a terminal carried by a user using an online karaoke service. The user terminal 106 may be a mobile terminal (e.g., a smart phone, a tablet PC, a wearable device, etc.) of a user using an online karaoke service. The user terminal 106 may have a microphone. The user terminal 106 can be wirelessly connected to the accompaniment playback device 104. [

사용자 단말기(106)에는 온라인 노래방 서비스를 제공하기 위한 어플리케이션이 설치될 수 있다. 상기 어플리케이션은 사용자 단말기(106)의 컴퓨터 판독 가능 저장 매체에 저장될 수 있다. 상기 어플리케이션은 사용자 단말기(106)의 프로세서에 의해 실행 가능한 명령어의 소정의 집합을 포함한다. 상기 명령어는 사용자 단말기(106)의 프로세서로 하여금 예시적인 실시예에 따른 동작을 수행하게 할 수 있다. 사용자 단말기(106)의 컴퓨터 판독 가능 저장 매체는 사용자 단말기(106) 상에서 상기 어플리케이션과 같은 명령어 집합을 실행하기 위한 운영 체제의 컴포넌트들을 포함한다. 예를 들어, 이러한 운영 체제는 애플(Apple) 사의 iOS 또는 구글(Google) 사의 Android 일 수 있다. The user terminal 106 may be provided with an application for providing an online karaoke service. The application may be stored in a computer readable storage medium of the user terminal 106. The application includes a predetermined set of instructions executable by a processor of the user terminal 106. The instructions may cause the processor of the user terminal 106 to perform operations in accordance with the illustrative embodiment. The computer-readable storage medium of user terminal 106 includes components of the operating system for executing a set of instructions, such as the application, on user terminal 106. For example, these operating systems could be Apple's iOS or Google's Android.

예시적인 실시예에서, 복수의 사용자 단말기(106)는 동일 IP 주소에 무선 접속할 수 있는 거리에 위치할 수 있다. 복수의 사용자들은 반주 재생 장치(104)의 화면을 보면서 반주 재생 장치(104)에서 출력되는 반주에 따라 노래를 부를 수 있다. 복수의 사용자 단말기(106) 중 어느 하나의 사용자 단말기(106)는 관리 서버(102)에 접속하여 가상 노래방 개설 요청을 전송할 수 있다. 복수의 사용자 단말기(106)는 관리 서버(102)에 의해 개설된 가상 노래방에 입장하여 노래를 선곡할 수 있다. In an exemplary embodiment, a plurality of user terminals 106 may be located at a distance that allows wireless connection to the same IP address. A plurality of users can sing a song according to the accompaniment output from the accompaniment playback apparatus 104 while watching the screen of the accompaniment playback apparatus 104. [ Any one of the user terminals 106 of the plurality of user terminals 106 may access the management server 102 and transmit a request for opening a virtual karaoke system. A plurality of user terminals 106 can enter a virtual karaoke room opened by the management server 102 to select a song.

사용자 단말기(106)는 반주 재생 장치(104)에서 출력되는 동기 신호를 획득할 수 있다. 사용자 단말기9106)는 동기 신호에서 시간 정보(해당 동기 신호가 반주의 전체 플레이 시간 중 어느 시간대에 발생되는 것인지에 대한 시간 정보)를 검출할 수 있다. 또한, 사용자 단말기(106)는 반주에 따라 노래를 부르는 해당 사용자의 가창 음성을 녹음할 수 있다. 사용자 단말기(106)는 동기 신호의 시간 정보 및 가창 음성을 포함하는 가창 녹음 패킷을 생성할 수 있다. 사용자 단말기(106)는 가창 녹음 패킷을 반주 재생 장치(104)로 전송할 수 있다. The user terminal 106 can acquire the synchronization signal output from the accompaniment playback device 104. [ The user terminal 9106) can detect time information (time information of which synchronization signal is generated during the entire play time of the accompaniment) in the sync signal. In addition, the user terminal 106 may record the voice of the user who is singing along with the accompaniment. The user terminal 106 may generate a recording packet containing the time information of the synchronization signal and the audio of the chime. The user terminal 106 can transmit a recording packet to the accompaniment playback apparatus 104. [

개시되는 실시예에 의하면, 반주 재생 장치(104)에서 반주가 재생되는 동안 동기 신호를 출력하고, 사용자 단말기(106)에서 동기 신호를 획득한 후 동기 신호의 시간 정보를 포함한 가창 녹음 패킷을 생성하고 전송함으로써, 반주 재생 장치(104)에서 사용자 단말기(106)의 가창 녹음 중 지연 시간이 기 설정된 시간을 초과한 것에 대해서는 에코 처리 또는 음소거 처리 할 수 있으며, 그로 인해 복수의 사용자들이 노래방을 이용하더라도 사용자들의 가창 음성이 돌림 노래처럼 들리는 것을 방지할 수 있게 된다.According to the disclosed embodiment, the accompaniment playback apparatus 104 outputs a sync signal while the accompaniment is being reproduced, acquires the sync signal from the user terminal 106, and generates a recording packet including the time information of the sync signal It is possible to perform echo processing or mute processing when the delay time of the recording of the user terminal 106 exceeds the preset time by the accompaniment playback apparatus 104. As a result, even if a plurality of users use the karaoke system, It is possible to prevent the voices of the voices from sounding like turn songs.

한편, 다른 실시예로, 반주 재생 장치(104)에서 동기 신호를 출력할 때마다 서로 다른 패턴의 동기 신호를 출력하고, 출력한 동기 신호의 시간 정보를 기록할 수 있다. 그리고, 사용자 단말기(106)에서 반주 재생 장치(104)로부터 획득한 동기 신호를 획득한 후, 획득한 동기 신호를 가창 녹음 패킷에 포함시켜 반주 재생 장치(104)로 전송할 수 있다. 그러면, 반주 재생 장치(104)에서 가창 녹음 패킷에 포함된 동기 신호와 대응되는 패턴의 동기 신호를 확인하고, 확인된 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간을 비교하여 가창 음성의 출력 처리를 결정할 수 있다.On the other hand, in another embodiment, each time the accompaniment reproducing apparatus 104 outputs a synchronizing signal, synchronizing signals of different patterns can be outputted and time information of the synchronizing signal outputted can be recorded. Then, after acquiring the sync signal obtained from the accompaniment playback apparatus 104 at the user terminal 106, the obtained sync signal may be included in the recording packet and transmitted to the accompaniment playback apparatus 104. [ Then, the accompaniment playback apparatus 104 confirms the synchronous signal of the pattern corresponding to the synchronous signal included in the recording packet of the next recording, compares the time information of the confirmed synchronous signal with the reception time of the recording packet of the vocal sound, Can be determined.

도 2는 본 발명의 일 실시예에 따른 온라인 노래방 서비스 방법을 설명하기 위한 흐름도이다. 도시된 흐름도에서는 상기 방법을 복수 개의 단계로 나누어 기재하였으나, 적어도 일부의 단계들은 순서를 바꾸어 수행되거나, 다른 단계와 결합되어 함께 수행되거나, 생략되거나, 세부 단계들로 나뉘어 수행되거나, 또는 도시되지 않은 하나 이상의 단계가 부가되어 수행될 수 있다.2 is a flowchart illustrating an online karaoke service method according to an embodiment of the present invention. In the illustrated flow chart, the method is described as being divided into a plurality of steps, but at least some of the steps may be performed in reverse order, combined with other steps, performed together, omitted, divided into detailed steps, One or more steps may be added and performed.

도 2를 참조하면, 관리 서버(102)는 선곡된 노래에 대한 반주 및 선곡된 노래에 대응하는 영상을 반주 재생 장치(104)로 전송한다(S 101). 즉, 관리 서버(102)는 사용자 단말기(106)의 가상 노래방 개설 요청에 가상 노래방을 개설하고, 사용자 단말기(106)의 노래 선곡에 따라 선곡된 노래에 대한 반주 및 선곡된 노래에 대응하는 영상을 반주 재생 장치(104)로 전송할 수 있다. Referring to FIG. 2, the management server 102 transmits an image corresponding to the selected song to the accompaniment playback apparatus 104 (S 101). That is, the management server 102 establishes a virtual karaoke room in the virtual karaoke opening request of the user terminal 106, and displays a video corresponding to the song selected in accordance with the song selection of the user terminal 106, Can be transmitted to the accompaniment playback apparatus 104.

그러나, 이에 한정되는 것은 아니며 관리 서버(102)가 사용자 단말기(106)로부터 수신한 노래 선곡에 대한 정보를 반주 재생 장치(104)로 전달하고, 반주 재생 장치(104)에서 기 저장된 노래 관련 정보들 중 선곡된 노래와 매칭된 반주 및 영상을 추출할 수도 있다. However, the present invention is not limited to this, and the management server 102 may transmit the information about the song selection received from the user terminal 106 to the accompaniment playback apparatus 104, And the accompaniment and the image matched with the selected song can be extracted.

다음으로, 반주 재생 장치(104)는 반주 및 동기 신호를 스피커로 출력한다(S 103). 반주 재생 장치(104)는 반주가 재생되는 동안 주기적으로 동기 신호를 반주와 함께 출력할 수 있다. 동기 신호에는 해당 동기 신호가 반주의 전체 플레이 시간 중 어느 시간대에 발생되는 것인지에 대한 시간 정보(예를 들어, 타임 스탬프 등)가 포함될 수 있다.Next, the accompaniment reproducing apparatus 104 outputs the accompaniment and the synchronizing signal to the speaker (S103). The accompaniment playback apparatus 104 can periodically output a synchronous signal together with accompaniment while the accompaniment is being reproduced. The synchronization signal may include time information (e.g., a time stamp, etc.) as to which synchronization signal is generated during the entire play time of the accompaniment.

다음으로, 각 사용자 단말기(106)는 반주 재생 장치(104)에서 출력되는 동기 신호를 획득하고, 획득한 동기 신호에서 시간 정보를 검출하며, 사용자의 가창 음성을 획득하여 가창 녹음 패킷을 생성한다(S 105). 여기서, 가창 녹음 패킷은 패킷 헤더 및 페이로드를 포함할 수 있다. 패킷 헤더는 패킷 아이디, 동기 신호의 시간 정보, 및 페이로드 정보(예를 들어, 페이로드의 길이, 페이로드의 데이터 타입 등에 대한 정보)를 포함할 수 있다. 페이로드는 사용자의 녹음된 가창 음성을 포함할 수 있다. 각 사용자 단말기(106)는 반주 재생 장치(104)로부터 동기 신호가 획득될 때마다 가창 녹음 패킷을 생성할 수 있다. Next, each user terminal 106 acquires a sync signal output from the accompaniment playback apparatus 104, detects time information from the acquired sync signal, and acquires a user's vocal sound to generate a vocal recording packet ( S 105). Herein, the audio recording packet may include a packet header and a payload. The packet header may include a packet ID, time information of the synchronization signal, and payload information (e.g., information on the length of the payload, the data type of the payload, and the like). The payload may include the recorded voice of the user. Each user terminal 106 can generate a recording packet every time a synchronization signal is acquired from the accompaniment playback device 104. [

다음으로, 각 사용자 단말기(106)는 가창 녹음 패킷을 반주 재생 장치(104)로 전송한다(S 107). Next, each user terminal 106 transmits a recording packet to the accompaniment playback apparatus 104 (S 107).

다음으로, 반주 재생 장치(104)는 가창 녹음 패킷에서 동기 신호의 시간 정보를 추출하고, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간을 비교한다(S 109).Next, the accompaniment reproducing apparatus 104 extracts the time information of the synchronizing signal in the recording packet of the next recording, and compares the time information of the extracted synchronizing signal with the receiving time of the recording packet of the next recording (S109).

단계 S 109의 비교 결과, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간 간의 시간 차이(즉, 동기화 지연 시간)가 기 설정된 제1 시간 범위 이내인 경우, 반주 재생 장치(104)는 해당 가창 녹음 패킷에 포함된 사용자의 가창 음성을 스피커로 출력한다(S 111). If the time difference between the time information of the extracted synchronization signal and the reception time of the vocal recording packet (i.e., the synchronization delay time) is within the predetermined first time range as a result of the comparison in step S 109, the accompaniment playback apparatus 104, The user's phonetic voice contained in the recording packet is output to the speaker (S 111).

단계 S 109의 비교 결과, 동기화 지연 시간이 기 설정된 제2 시간 범위 이내인 경우, 반주 재생 장치(104)는 해당 가창 녹음 패킷에 포함된 사용자의 가창 음성을 에코 처리하여 스피커로 출력한다(S 113). If the synchronization delay time is within the predetermined second time range as a result of the comparison at step S 109, the accompaniment playback apparatus 104 echoes the audio of the user included in the corresponding recording packet and outputs it to the speaker (S 113 ).

단계 S 109의 비교 결과, 동기화 지연 시간이 기 설정된 제3 시간 범위 이내인 경우, 반주 재생 장치(104)는 해당 가창 녹음 패킷에 포함된 사용자의 가창 음성을 음소거 처리한다(S 115). If the synchronization delay time is within the preset third time range as a result of the comparison at step S 109, the accompaniment playback apparatus 104 mutes the user's upper audio included in the corresponding recording packet (S 115).

도 3은 본 발명의 일 실시예에 따른 반주 재생 장치의 구성을 나타낸 블록도이다. 3 is a block diagram showing a configuration of an accompaniment reproducing apparatus according to an embodiment of the present invention.

도 3을 참조하면, 반주 재생 장치(104)는 통신부(111), 반주 재생부(113), 동기 신호 생성부(115), 스피커(117), 표시부(119), 및 출력 처리 판단부(121)를 포함할 수 있다. 3, the accompaniment playback apparatus 104 includes a communication unit 111, an accompaniment playback unit 113, a synchronization signal generation unit 115, a speaker 117, a display unit 119, and an output process determination unit 121 ).

통신부(111)는 관리 서버(102)와 통신 가능하게 연결될 수 있다. 통신부(111)는 관리 서버(102)로부터 선곡된 노래에 대한 반주 및 선곡된 노래에 대응하는 영상을 수신할 수 있다. 또한, 통신부(111)는 각 사용자 단말기(106)와 통신 가능하게 연결될 수 있다. 통신부(111)는 각 사용자 단말기(106)로부터 가창 녹음 패킷을 수신할 수 있다. The communication unit 111 may be communicably connected to the management server 102. The communication unit 111 can receive an image corresponding to the selected song and the accompaniment and the selected song from the management server 102. Also, the communication unit 111 can be communicably connected to each user terminal 106. The communication unit 111 can receive a recording packet from each user terminal 106.

반주 재생부(113)는 통신부(111)가 수신한 반주를 재생시킬 수 있다. 재생되는 반주는 스피커(117)에 의해 출력될 수 있다. The accompaniment playback section 113 can play back the accompaniment received by the communication section 111. [ The accompaniment to be reproduced can be output by the speaker 117. [

동기 신호 생성부(115)는 동기 신호를 생성할 수 있다. 생성되는 동기 신호는 스피커(117)에 의해 출력될 수 있다. 동기 신호를 출력하는 스피커는 반주를 출력하는 스피커와는 다른 스피커일 수 있다. 즉, 스피커(117)는 복수 개의 스피커를 포함할 수 있다. 동기 신호 생성부(115)는 각 동기 신호에 시간 정보를 포함시킬 수 있다. The synchronization signal generation unit 115 can generate a synchronization signal. The generated synchronizing signal can be output by the speaker 117. The speaker outputting the synchronizing signal may be a speaker different from the speaker outputting the accompaniment. That is, the speaker 117 may include a plurality of speakers. The synchronization signal generation unit 115 may include time information in each synchronization signal.

표시부(119)는 통신부(111)가 수신한 영상을 화면에 표시할 수 있다. 표시부(119)는 스피커(117)를 통해 출력되는 반주의 플레이 시간과 매칭하여 그에 대응하는 영상을 화면에 표시할 수 있다. The display unit 119 can display an image received by the communication unit 111 on the screen. The display unit 119 can display the image corresponding to the play time of the accompaniment output through the speaker 117 on the screen.

출력 처리 판단부(121)는 통신부(111)가 수신한 가창 녹음 패킷에서 동기 신호의 시간 정보를 추출하고, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간을 비교하여 가창 녹음 패킷에 포함된 가창 음성의 출력 처리를 결정할 수 있다. The output processing determination unit 121 extracts the time information of the synchronizing signal in the vocal recording packet received by the communication unit 111, compares the time information of the extracted synchronizing signal with the receiving time of the vocal recording packet, It is possible to determine the output processing of the vocal sound.

도 4는 본 발명의 일 실시예에 따른 사용자 단말기의 구성을 나타낸 블록도이다. 4 is a block diagram illustrating a configuration of a user terminal according to an embodiment of the present invention.

도 4를 참조하면, 사용자 단말기(106)는 마이크(131), 시간 정보 검출부(133), 가창 녹음 패킷 생성부(135), 및 통신부(137)를 포함할 수 있다. Referring to FIG. 4, the user terminal 106 may include a microphone 131, a time information detector 133, a recording packet generator 135, and a communication unit 137.

마이크(131)는 소리 신호를 획득할 수 있다. 구체적으로, 마이크(131)는 반주 재생 장치(104)에서 출력되는 동기 신호를 획득할 수 있다. 또한, 마이크(131)는 반주에 따라 노래를 부르는 사용자의 가창 음성을 획득할 수 있다. The microphone 131 can acquire a sound signal. Concretely, the microphone 131 can acquire the synchronizing signal outputted from the accompaniment reproducing apparatus 104. [ In addition, the microphone 131 can acquire a singing voice of a user singing along with the accompaniment.

시간 정보 검출부(133)는 마이크(131)에서 획득한 동기 신호에서 시간 정보를 검출할 수 있다. The time information detection unit 133 can detect time information from the synchronization signal acquired by the microphone 131. [

가창 녹음 패킷 생성부(135)는 동기 신호의 시간 정보 및 사용자의 가창 음성을 기반으로 가창 녹음 패킷을 생성할 수 있다. The vocal recording packet generation unit 135 can generate a recording packet based on the time information of the synchronization signal and the user's vocal sound.

통신부(137)는 생성된 가창 녹음 패킷을 반주 재생 장치(104)로 전송할 수 있다. The communication unit 137 can transmit the generated recording packet to the accompaniment playback apparatus 104. [

도 5는 본 발명의 다른 실시예에 따른 온라인 노래방 서비스 시스템을 나타낸 도면이다. 이하에서는 도 1에 도시된 실시예와 차이가 나는 부분을 중점적을 설명하기로 한다. 5 is a diagram illustrating an online karaoke system according to another embodiment of the present invention. Hereinafter, the differences from the embodiment shown in FIG. 1 will be mainly described.

도 5를 참조하면, 온라인 노래방 서비스 시스템(200)은 관리 서버(202), 반주 재생 장치(204), 및 사용자 단말기(206)를 포함할 수 있다. 5, the online karaoke service system 200 may include a management server 202, an accompaniment playback apparatus 204, and a user terminal 206. [

관리 서버(202)는 사용자 단말기(206)로부터 수신되는 가상 노래방 개설 요청에 따라 가상 노래방을 개설할 수 있다. 관리 서버(202)는 사용자 단말기(206)로부터 노래 선곡을 수신할 수 있다. 관리 서버(202)는 선곡된 노래에 대한 반주 및 선곡된 노래에 대응하는 영상을 각 반주 재생 장치(204)로 전송할 수 있다. The management server 202 may open a virtual karaoke room according to a request for opening a virtual karaoke room received from the user terminal 206. [ The management server 202 may receive the song selection from the user terminal 206. [ The management server 202 can transmit an image corresponding to the selected song to the respective accompaniment playback apparatus 204. [

반주 재생 장치(204)는 제1 반주 재생 장치(204-1), 제2 반주 재생 장치(204-2), 및 제3 반주 재생 장치(204-3)를 포함할 수 있다. 여기서는 설명의 편의상 반주 재생 장치(204)가 3개인 것으로 설명하나, 반주 재생 장치(204)의 개수가 이에 한정되는 것은 아니다. 제1 반주 재생 장치(204-1), 제2 반주 재생 장치(204-2), 및 제3 반주 재생 장치(204-3) 서로 다른 장소에 설치될 수 있다. 제1 반주 재생 장치(204-1), 제2 반주 재생 장치(204-2), 및 제3 반주 재생 장치(204-3)는 반주 및 동기 신호를 스피커로 각각 출력할 수 있다. The accompaniment playback device 204 may include a first accompaniment playback device 204-1, a second accompaniment playback device 204-2, and a third accompaniment playback device 204-3. For convenience of explanation, it is assumed here that there are three accompaniment playback apparatuses 204, but the number of the accompaniment playback apparatuses 204 is not limited thereto. The first accompaniment playback device 204-1, the second accompaniment playback device 204-2, and the third accompaniment playback device 204-3 may be installed at different places. The first accompaniment playback device 204-1, the second accompaniment playback device 204-2, and the third accompaniment playback device 204-3 can output the accompaniment and synchronization signal to the speakers, respectively.

제1 반주 재생 장치(204-1), 제2 반주 재생 장치(204-2), 및 제3 반주 재생 장치(204-3)는 각각 제1 사용자 단말기(206-1) 내지 제3 사용자 단말기(206-3)로부터 수신한 가창 녹음 패킷에서 동기 신호의 시간 정보를 추출하고, 추출한 동기 신호의 시간 정보와 가창 녹음 패킷의 수신 시간을 비교하여 각 사용자들의 가창 음성의 출력 처리를 결정할 수 있다.The first accompaniment playback apparatus 204-1, the second accompaniment playback apparatus 204-2 and the third accompaniment playback apparatus 204-3 are connected to the first user terminal 206-1 through the third user terminal 206-3, and determines the output processing of each user's vocal sound by comparing the time information of the extracted sync signal with the reception time of the vocal recording packet.

사용자 단말기(206)는 제1 사용자 단말기(206-1), 제2 사용자 단말기(206-2), 및 제3 사용자 단말기(206-3)를 포함할 수 있다. 제1 사용자 단말기(206-1), 제2 사용자 단말기(206-2), 및 제3 사용자 단말기(206-3)는 각각 원격지에 위치할 수 있다. 여기서는 설명의 편의상 사용자 단말기(206)가 3개인 것으로 설명하나, 사용자 단말기(206)의 개수가 이에 한정되는 것은 아니다.The user terminal 206 may include a first user terminal 206-1, a second user terminal 206-2, and a third user terminal 206-3. The first user terminal 206-1, the second user terminal 206-2, and the third user terminal 206-3 may each be located remotely. For convenience of explanation, the number of the user terminals 206 is three, but the number of the user terminals 206 is not limited thereto.

제1 사용자 단말기(206-1)는 제1 반주 재생 장치(204-1)가 설치되는 영역에 위치할 수 있다. 제1 사용자 단말기(206-1)의 사용자(즉, 제1 사용자)는 제1 반주 재생 장치(204-1)의 화면을 보면서 노래를 부를 수 있다. 제1 사용자 단말기(206-1)는 제1 반주 재생 장치(204-1)로부터 동기 신호를 획득하고, 획득한 동기 신호의 시간 정보를 검출하여 가창 녹음 패킷을 생성할 수 있다. 제1 사용자 단말기(206-1)는 가창 녹음 패킷을 제1 반주 재생 장치(204-1), 제2 반주 재생 장치(204-2), 및 제3 반주 재생 장치(204-3)로 각각 전송할 수 있다. The first user terminal 206-1 may be located in a region where the first accompaniment playback apparatus 204-1 is installed. The user of the first user terminal 206-1 (i.e., the first user) can sing while watching the screen of the first accompaniment playback apparatus 204-1. The first user terminal 206-1 can acquire the synchronization signal from the first accompaniment playback device 204-1 and detect the time information of the acquired synchronization signal to generate a recording packet. The first user terminal 206-1 transmits the audio recording packet to the first accompaniment playback device 204-1, the second accompaniment playback device 204-2, and the third accompaniment playback device 204-3, respectively .

제2 사용자 단말기(206-2)는 제2 반주 재생 장치(204-2)가 설치되는 영역에 위치할 수 있다. 제2 사용자 단말기(206-2)의 사용자(즉, 제2 사용자)는 제2 반주 재생 장치(204-2)의 화면을 보면서 노래를 부를 수 있다. 제2 사용자 단말기(206-2)는 제2 반주 재생 장치(204-2)로부터 동기 신호를 획득하고, 획득한 동기 신호의 시간 정보를 검출하여 가창 녹음 패킷을 생성할 수 있다. 제2 사용자 단말기(206-2)는 가창 녹음 패킷을 제1 반주 재생 장치(204-1), 제2 반주 재생 장치(204-2), 및 제3 반주 재생 장치(204-3)로 각각 전송할 수 있다. And the second user terminal 206-2 may be located in a region where the second accompaniment playback apparatus 204-2 is installed. The user of the second user terminal 206-2 (i.e., the second user) can sing while watching the screen of the second accompaniment playback device 204-2. The second user terminal 206-2 can acquire the synchronization signal from the second accompaniment playback device 204-2 and detect the time information of the acquired synchronization signal to generate a recording packet. The second user terminal 206-2 transmits the audio recording packet to the first accompaniment playback device 204-1, the second accompaniment playback device 204-2, and the third accompaniment playback device 204-3, respectively .

제3 사용자 단말기(206-3)는 제3 반주 재생 장치(204-3)가 설치되는 영역에 위치할 수 있다. 제3 사용자 단말기(206-3)의 사용자(즉, 제3 사용자)는 제3 반주 재생 장치(204-3)의 화면을 보면서 노래를 부를 수 있다. 제3 사용자 단말기(206-3)는 제3 반주 재생 장치(204-3)로부터 동기 신호를 획득하고, 획득한 동기 신호의 시간 정보를 검출하여 가창 녹음 패킷을 생성할 수 있다. 제3 사용자 단말기(206-3)는 가창 녹음 패킷을 제1 반주 재생 장치(204-1), 제2 반주 재생 장치(204-2), 및 제3 반주 재생 장치(204-3)로 각각 전송할 수 있다. And the third user terminal 206-3 may be located in an area where the third accompaniment player 204-3 is installed. The user of the third user terminal 206-3 (i.e., the third user) can sing while watching the screen of the third accompaniment playback apparatus 204-3. The third user terminal 206-3 can acquire the synchronization signal from the third accompaniment playback apparatus 204-3 and detect the time information of the acquired synchronization signal to generate a recording packet. The third user terminal 206-3 transmits the audio recording packet to the first accompaniment playback device 204-1, the second accompaniment playback device 204-2, and the third accompaniment playback device 204-3, respectively .

도 6은 예시적인 실시예들에서 사용되기에 적합한 컴퓨팅 장치를 포함하는 컴퓨팅 환경(10)을 예시하여 설명하기 위한 블록도이다. 도시된 실시예에서, 각 컴포넌트들은 이하에 기술된 것 이외에 상이한 기능 및 능력을 가질 수 있고, 이하에 기술된 것 이외에도 추가적인 컴포넌트를 포함할 수 있다.FIG. 6 is a block diagram illustrating and illustrating a computing environment 10 including a computing device suitable for use in the exemplary embodiments. In the illustrated embodiment, each of the components may have different functions and capabilities than those described below, and may include additional components in addition to those described below.

도시된 컴퓨팅 환경(10)은 컴퓨팅 장치(12)를 포함한다. 일 실시예에서, 컴퓨팅 장치(12)는 관리 서버(예를 들어, 관리 서버(102))일 수 있다. 또한, 컴퓨팅 장치(12)는 반주 재생 장치(예를 들어, 반주 재생 장치(104))일 수 있다. 또한, 컴퓨팅 장치(12)는 사용자 단말기(예를 들어, 사용자 단말기(106))일 수 있다. The illustrated computing environment 10 includes a computing device 12. In one embodiment, computing device 12 may be a management server (e.g., management server 102). In addition, the computing device 12 may be an accompaniment playback device (e.g., accompaniment playback device 104). In addition, computing device 12 may be a user terminal (e.g., user terminal 106).

컴퓨팅 장치(12)는 적어도 하나의 프로세서(14), 컴퓨터 판독 가능 저장 매체(16) 및 통신 버스(18)를 포함한다. 프로세서(14)는 컴퓨팅 장치(12)로 하여금 앞서 언급된 예시적인 실시예에 따라 동작하도록 할 수 있다. 예컨대, 프로세서(14)는 컴퓨터 판독 가능 저장 매체(16)에 저장된 하나 이상의 프로그램들을 실행할 수 있다. 상기 하나 이상의 프로그램들은 하나 이상의 컴퓨터 실행 가능 명령어를 포함할 수 있으며, 상기 컴퓨터 실행 가능 명령어는 프로세서(14)에 의해 실행되는 경우 컴퓨팅 장치(12)로 하여금 예시적인 실시예에 따른 동작들을 수행하도록 구성될 수 있다.The computing device 12 includes at least one processor 14, a computer readable storage medium 16, The processor 14 may cause the computing device 12 to operate in accordance with the exemplary embodiment discussed above. For example, processor 14 may execute one or more programs stored on computer readable storage medium 16. The one or more programs may include one or more computer-executable instructions, which when executed by the processor 14 cause the computing device 12 to perform operations in accordance with the illustrative embodiment .

컴퓨터 판독 가능 저장 매체(16)는 컴퓨터 실행 가능 명령어 내지 프로그램 코드, 프로그램 데이터 및/또는 다른 적합한 형태의 정보를 저장하도록 구성된다. 컴퓨터 판독 가능 저장 매체(16)에 저장된 프로그램(20)은 프로세서(14)에 의해 실행 가능한 명령어의 집합을 포함한다. 일 실시예에서, 컴퓨터 판독 가능 저장 매체(16)는 메모리(랜덤 액세스 메모리와 같은 휘발성 메모리, 비휘발성 메모리, 또는 이들의 적절한 조합), 하나 이상의 자기 디스크 저장 디바이스들, 광학 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 그 밖에 컴퓨팅 장치(12)에 의해 액세스되고 원하는 정보를 저장할 수 있는 다른 형태의 저장 매체, 또는 이들의 적합한 조합일 수 있다.The computer-readable storage medium 16 is configured to store computer-executable instructions or program code, program data, and / or other suitable forms of information. The program 20 stored in the computer-readable storage medium 16 includes a set of instructions executable by the processor 14. In one embodiment, the computer-readable storage medium 16 may be any type of storage medium such as a memory (volatile memory such as random access memory, non-volatile memory, or any suitable combination thereof), one or more magnetic disk storage devices, Memory devices, or any other form of storage medium that can be accessed by the computing device 12 and store the desired information, or any suitable combination thereof.

통신 버스(18)는 프로세서(14), 컴퓨터 판독 가능 저장 매체(16)를 포함하여 컴퓨팅 장치(12)의 다른 다양한 컴포넌트들을 상호 연결한다.Communication bus 18 interconnects various other components of computing device 12, including processor 14, computer readable storage medium 16.

컴퓨팅 장치(12)는 또한 하나 이상의 입출력 장치(24)를 위한 인터페이스를 제공하는 하나 이상의 입출력 인터페이스(22) 및 하나 이상의 네트워크 통신 인터페이스(26)를 포함할 수 있다. 입출력 인터페이스(22) 및 네트워크 통신 인터페이스(26)는 통신 버스(18)에 연결된다. 입출력 장치(24)는 입출력 인터페이스(22)를 통해 컴퓨팅 장치(12)의 다른 컴포넌트들에 연결될 수 있다. 예시적인 입출력 장치(24)는 포인팅 장치(마우스 또는 트랙패드 등), 키보드, 터치 입력 장치(터치패드 또는 터치스크린 등), 음성 또는 소리 입력 장치, 다양한 종류의 센서 장치 및/또는 촬영 장치와 같은 입력 장치, 및/또는 디스플레이 장치, 프린터, 스피커 및/또는 네트워크 카드와 같은 출력 장치를 포함할 수 있다. 예시적인 입출력 장치(24)는 컴퓨팅 장치(12)를 구성하는 일 컴포넌트로서 컴퓨팅 장치(12)의 내부에 포함될 수도 있고, 컴퓨팅 장치(12)와는 구별되는 별개의 장치로 컴퓨팅 장치(12)와 연결될 수도 있다.The computing device 12 may also include one or more input / output interfaces 22 and one or more network communication interfaces 26 that provide an interface for one or more input / output devices 24. The input / output interface 22 and the network communication interface 26 are connected to the communication bus 18. The input / output device 24 may be connected to other components of the computing device 12 via the input / output interface 22. The exemplary input and output device 24 may be any type of device, such as a pointing device (such as a mouse or trackpad), a keyboard, a touch input device (such as a touch pad or touch screen), a voice or sound input device, An input device, and / or an output device such as a display device, a printer, a speaker, and / or a network card. The exemplary input and output device 24 may be included within the computing device 12 as a component of the computing device 12 and may be coupled to the computing device 12 as a separate device distinct from the computing device 12 It is possible.

이상에서 본 발명의 대표적인 실시예들을 상세하게 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 상술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, . Therefore, the scope of the present invention should not be limited to the above-described embodiments, but should be determined by equivalents to the appended claims, as well as the appended claims.

100, 200 : 온라인 노래방 서비스 시스템
102, 202 : 관리 서버
104, 204 : 반주 재생 장치
106, 206 : 사용자 단말기
111 : 통신부
113 : 반주 재생부
115 : 동기 신호 생성부
117 : 스피커
119 : 표시부
121 : 출력 처리 판단부
131 : 마이크
133 : 시간 정보 검출부
135 : 가창 녹음 패킷 생성부
137 : 통신부100, 200: Online karaoke service system
102, 202: management server
104, 204: accompaniment playback device
106 and 206:
111:
113: accompaniment playback section
115: Sync signal generation unit
117: Speaker
119:
121:
131: Microphone
133: Time information detector
135: a recording packet generation unit
137:

Claims (15)

온라인 노래방 서비스의 반주 및 가창 음성 간 동기화를 위한 시스템으로서,
선곡된 노래에 대한 반주 및 시간 정보를 포함하는 동기 신호를 스피커로 출력하는 반주 재생 장치; 및
상기 동기 신호를 획득하여 상기 동기 신호의 시간 정보를 추출하고, 상기 반주에 따른 사용자의 가창 음성을 획득하며, 상기 동기 신호의 시간 정보 및 상기 가창 음성을 포함하는 가창 녹음 패킷을 생성하고, 생성한 상기 가창 녹음 패킷을 상기 반주 재생 장치로 각각 전송하는 복수 개의 사용자 단말기를 포함하고,
상기 시간 정보는, 상기 동기 신호가 상기 반주의 전체 플레이 시간 중 어느 시간대에 발생된 것인지에 대한 정보로서, 상기 동기 신호에 워터마크 형태로 삽입되며,
상기 동기 신호는, 비가청 주파수 대역의 신호이며, 상기 반주가 출력되는 동안 복수 회 출력되고,
상기 반주 재생 장치는,
상기 반주 및 상기 동기 신호를 서로 다른 스피커로 각각 출력하거나 상기 반주 및 상기 동기 신호를 합성하여 하나의 스피커로 출력하는, 시스템.
A system for synchronizing an accompaniment of an on-line karaoke service and a singing voice,
An accompaniment reproducing apparatus for outputting a synchronizing signal including accompaniment and time information for a selected song to a speaker; And
Acquiring the synchronization signal to extract time information of the synchronization signal, acquiring a voice of a user according to the accompaniment, generating a voiced recording packet including time information of the synchronization signal and the voiced speech, And a plurality of user terminals for transmitting the audio recording packets to the accompaniment reproducing apparatus,
Wherein the time information is information on which one of the total play time of the accompaniment the synchronization signal is generated and is inserted in the form of a watermark in the synchronization signal,
Wherein the synchronizing signal is a signal in an invisible frequency band and is output a plurality of times while the accompaniment is being output,
The accompaniment playback apparatus comprises:
And outputs the accompaniment and the synchronizing signal to different speakers, or synthesizes the accompaniment and the synchronizing signal, and outputs the synthesized accompaniment and the synchronizing signal to a single speaker.
청구항 1에 있어서,
상기 반주 재생 장치는,
상기 복수 개의 사용자 단말기로부터 상기 가창 녹음 패킷을 각각 수신하고, 수신한 각 가창 녹음 패킷에서 상기 동기 신호의 시간 정보를 추출하며, 추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간을 비교하는, 시스템.
The method according to claim 1,
The accompaniment playback apparatus comprises:
Extracts the time information of the sync signal from each of the received recording packets, and compares the time information of the extracted sync signal with the reception time of the corresponding recording packet , system.
청구항 2에 있어서,
상기 반주 재생 장치는,
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이에 따라 해당 가창 녹음 패킷에 포함된 가창 음성의 출력 처리를 결정하는, 시스템.
The method of claim 2,
The accompaniment playback apparatus comprises:
And determines output processing of a vocal sound included in the corresponding vocal recording packet according to a time difference between the time information of the extracted synchronization signal and the reception time of the corresponding vocal recording packet.
청구항 3에 있어서,
상기 반주 재생 장치는,
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 기 설정된 제1 시간 범위 이내인 경우, 상기 가창 음성을 스피커로 출력하는, 시스템.
The method of claim 3,
The accompaniment playback apparatus comprises:
And outputs the phoneme to the speaker if the time difference between the extracted time information of the synchronization signal and the reception time of the corresponding recording packet is within a predetermined first time range.
청구항 4에 있어서,
상기 반주 재생 장치는,
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 상기 제1 시간 범위 보다 큰 기 설정된 제2 시간 범위 이내인 경우, 상기 가창 음성을 에코 처리하여 스피커로 출력하는, 시스템.
The method of claim 4,
The accompaniment playback apparatus comprises:
And outputs the audio signal to the speaker by echoing the audio signal when the time difference between the time information of the extracted synchronization signal and the reception time of the corresponding recording packet is within a predetermined second time range larger than the first time range.
청구항 5에 있어서,
상기 반주 재생 장치는,
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 상기 제2 시간 범위 보다 큰 기 설정된 제3 시간 범위를 초과하는 경우, 상기 가창 음성을 음소거 처리하는, 시스템.
The method of claim 5,
The accompaniment playback apparatus comprises:
And when the time difference between the extracted time information of the synchronization signal and the reception time of the corresponding recording packet exceeds a predetermined third time range larger than the second time range,
삭제delete 하나 이상의 프로세서들;
메모리; 및
하나 이상의 프로그램들을 포함하고,
상기 하나 이상의 프로그램들은 상기 메모리에 저장되고, 상기 하나 이상의 프로세서들에 의해 실행되도록 구성되며,
상기 하나 이상의 프로그램들은,
선곡된 노래에 대한 반주가 출력되는 동안 시간 정보가 포함된 동기 신호를 스피커로 출력하기 위한 명령;
복수 개의 사용자 단말기로부터 가창 녹음 패킷을 각각 수신하기 위한 명령;
수신한 각 가창 녹음 패킷에서 상기 동기 신호의 시간 정보를 추출하기 위한 명령; 및
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간을 비교하기 위한 명령을 포함하고,
상기 시간 정보는, 상기 동기 신호가 상기 반주의 전체 플레이 시간 중 어느 시간대에 발생된 것인지에 대한 정보로서, 상기 동기 신호에 워터마크 형태로 삽입되며,
상기 동기 신호는, 비가청 주파수 대역의 신호이며, 상기 반주가 출력되는 동안 복수 회 출력되고,
상기 스피커로 출력하기 위한 명령은, 상기 반주 및 상기 동기 신호를 서로 다른 스피커로 각각 출력하거나 상기 반주 및 상기 동기 신호를 합성하여 하나의 스피커로 출력하는, 컴퓨팅 장치.
One or more processors;
Memory; And
Comprising one or more programs,
Wherein the one or more programs are stored in the memory and configured to be executed by the one or more processors,
The one or more programs,
An instruction for outputting a synchronizing signal including time information to a speaker while an accompaniment for the selected song is outputted;
Receiving a recording packet from a plurality of user terminals;
An instruction for extracting time information of the sync signal in each received recording packet; And
And a command for comparing time information of the extracted synchronization signal with a reception time of a corresponding recording packet,
Wherein the time information is information on which one of the total play time of the accompaniment the synchronization signal is generated and is inserted in the form of a watermark in the synchronization signal,
Wherein the synchronizing signal is a signal in an invisible frequency band and is output a plurality of times while the accompaniment is being output,
Wherein the instructions for outputting to the speaker output the accompaniment and the synchronizing signal to different speakers respectively, or synthesize the accompaniment and the synchronizing signal and output the synthesized accompaniment and the synchronizing signal to a single speaker.
청구항 8에 있어서,
상기 하나 이상의 프로그램들은,
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이에 따라 해당 가창 녹음 패킷에 포함된 가창 음성의 출력 처리를 결정하기 위한 명령을 더 포함하는, 컴퓨팅 장치.
The method of claim 8,
The one or more programs,
Further comprising instructions for determining an output process of a vocal sound included in the corresponding vocal recording packet according to a time difference between the time information of the extracted synchronization signal and the reception time of the corresponding vocal recording packet.
청구항 9에 있어서,
상기 하나 이상의 프로그램들은, 상기 출력 처리를 결정하기 위한 명령에서,
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 기 설정된 제1 시간 범위 이내인 경우, 상기 가창 음성을 스피커로 출력하기 위한 명령을 포함하는, 컴퓨팅 장치.
The method of claim 9,
Wherein the one or more programs, in the command for determining the output processing,
And outputting the vocal sound to the speaker if the time difference between the time information of the extracted synchronization signal and the reception time of the corresponding recording packet is within a first predetermined time range.
청구항 10에 있어서,
상기 하나 이상의 프로그램들은, 상기 출력 처리를 결정하기 위한 명령에서,
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 상기 제1 시간 범위 보다 큰 기 설정된 제2 시간 범위 이내인 경우, 상기 가창 음성을 에코 처리하여 스피커로 출력하기 위한 명령을 포함하는, 컴퓨팅 장치.
The method of claim 10,
Wherein the one or more programs, in the command for determining the output processing,
When the time difference between the time information of the extracted synchronization signal and the reception time of the corresponding recording packet is within a predetermined second time range larger than the first time range, Gt; computing device. ≪ / RTI >
청구항 11에 있어서,
상기 하나 이상의 프로그램들은, 상기 출력 처리를 결정하기 위한 명령에서,
추출한 상기 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간 간의 시간 차이가 상기 제2 시간 범위 보다 큰 기 설정된 제3 시간 범위를 초과하는 경우, 상기 가창 음성을 음소거 처리하기 위한 명령을 포함하는, 컴퓨팅 장치.
The method of claim 11,
Wherein the one or more programs, in the command for determining the output processing,
And a command for muteing the audio signal when the time difference between the time information of the extracted sync signal and the reception time of the corresponding recording packet exceeds a predetermined third time range larger than the second time range. Computing device.
삭제delete 하나 이상의 프로세서들;
메모리; 및
하나 이상의 프로그램들을 포함하고,
상기 하나 이상의 프로그램들은 상기 메모리에 저장되고, 상기 하나 이상의 프로세서들에 의해 실행되도록 구성되며,
상기 하나 이상의 프로그램들은,
반주 재생 장치의 스피커에서 출력되고 시간 정보가 포함된 동기 신호를 획득하기 위한 명령;
상기 동기 신호의 시간 정보를 추출하기 위한 명령;
상기 반주 재생 장치의 스피커에서 출력되는 반주에 따른 사용자의 가창 음성을 획득하기 위한 명령;
상기 동기 신호의 시간 정보 및 상기 가창 음성을 포함하는 가창 녹음 패킷을 생성하기 위한 명령; 및
상기 가창 녹음 패킷을 상기 반주 재생 장치로 전송하기 위한 명령을 포함하고,
상기 시간 정보는, 상기 동기 신호가 상기 반주의 전체 플레이 시간 중 어느 시간대에 발생된 것인지에 대한 정보로서, 상기 동기 신호에 워터마크 형태로 삽입되며,
상기 동기 신호는, 비가청 주파수 대역의 신호이며, 상기 반주가 출력되는 동안 복수 회 출력되고,
상기 반주 재생 장치는, 상기 반주 및 상기 동기 신호를 서로 다른 스피커로 각각 출력하거나 상기 반주 및 상기 동기 신호를 합성하여 하나의 스피커로 출력하는, 컴퓨팅 장치.
One or more processors;
Memory; And
Comprising one or more programs,
Wherein the one or more programs are stored in the memory and configured to be executed by the one or more processors,
The one or more programs,
An instruction for obtaining a synchronization signal output from a speaker of the accompaniment playback apparatus and including time information;
An instruction for extracting time information of the synchronization signal;
An instruction for obtaining a user's phonetic voice according to an accompaniment outputted from a speaker of the accompaniment reproducing apparatus;
Generating a recording packet including the time information of the synchronization signal and the audio signal; And
And a command for transmitting the audio recording packet to the accompaniment playback apparatus,
Wherein the time information is information on which one of the total play time of the accompaniment the synchronization signal is generated and is inserted in the form of a watermark in the synchronization signal,
Wherein the synchronizing signal is a signal in an invisible frequency band and is output a plurality of times while the accompaniment is being output,
Wherein the accompaniment playback apparatus outputs each of the accompaniment and the synchronous signal to different speakers, or combines the accompaniment and the synchronous signal to output to a single speaker.
하나 이상의 프로세서들;
메모리; 및
하나 이상의 프로그램들을 포함하는 컴퓨팅 장치로서,
상기 하나 이상의 프로그램들은 상기 메모리에 저장되고, 상기 하나 이상의 프로세서들에 의해 실행되도록 구성되며,
상기 하나 이상의 프로그램들은,
선곡된 노래에 대한 반주를 스피커로 출력하기 위한 명령;
상기 반주가 출력되는 동안 동기 신호를 스피커로 출력하고, 상기 동기 신호의 시간 정보를 저장하기 위한 명령;
복수 개의 사용자 단말기로부터 가창 녹음 패킷을 각각 수신하기 위한 명령;
수신한 각 가창 녹음 패킷에서 상기 동기 신호를 추출하기 위한 명령;
기 저장된 동기 신호들 중 상기 추출한 동기 신호와 대응되는 패턴의 동기 신호를 추출하기 위한 명령; 및
상기 대응되는 패턴의 동기 신호의 시간 정보와 해당 가창 녹음 패킷의 수신 시간을 비교하기 위한 명령을 포함하고,
상기 시간 정보는, 상기 동기 신호가 상기 반주의 전체 플레이 시간 중 어느 시간대에 발생된 것인지에 대한 정보로서, 상기 동기 신호에 워터마크 형태로 삽입되며,
상기 동기 신호는, 비가청 주파수 대역의 신호이며, 상기 반주가 출력되는 동안 복수 회 출력되고,
상기 컴퓨팅 장치는,
상기 반주 및 상기 동기 신호를 서로 다른 스피커로 각각 출력하거나 상기 반주 및 상기 동기 신호를 합성하여 하나의 스피커로 출력하는, 컴퓨팅 장치.One or more processors;
Memory; And
1. A computing device comprising one or more programs,
Wherein the one or more programs are stored in the memory and configured to be executed by the one or more processors,
The one or more programs,
Outputting an accompaniment for the selected song to a speaker;
Outputting a synchronizing signal to the speaker while the accompaniment is being output, and storing time information of the synchronizing signal;
Receiving a recording packet from a plurality of user terminals;
A command for extracting the synchronization signal from each received recording packet;
A command for extracting a synchronous signal of a pattern corresponding to the extracted synchronous signal among the previously stored synchronous signals; And
And a command for comparing the time information of the synchronization signal of the corresponding pattern with the reception time of the corresponding recording packet,
Wherein the time information is information on which one of the total play time of the accompaniment the synchronization signal is generated and is inserted in the form of a watermark in the synchronization signal,
Wherein the synchronizing signal is a signal in an invisible frequency band and is output a plurality of times while the accompaniment is being output,
The computing device comprising:
And outputs the accompaniment and the synchronization signal to different speakers or synthesizes the accompaniment and the synchronization signal to output to one speaker.
KR1020170170728A 2017-12-12 2017-12-12 System for synchronization between accompaniment and singing voice of online singing room service and apparatus for executing the same KR101987473B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020170170728A KR101987473B1 (en) 2017-12-12 2017-12-12 System for synchronization between accompaniment and singing voice of online singing room service and apparatus for executing the same
PCT/KR2017/014730 WO2019117362A1 (en) 2017-12-12 2017-12-14 System for synchronizing accompaniment with singing voice in online karaoke service and apparatus for performing same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170170728A KR101987473B1 (en) 2017-12-12 2017-12-12 System for synchronization between accompaniment and singing voice of online singing room service and apparatus for executing the same

Publications (1)

Publication Number Publication Date
KR101987473B1 true KR101987473B1 (en) 2019-06-10

Family

ID=66819549

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170170728A KR101987473B1 (en) 2017-12-12 2017-12-12 System for synchronization between accompaniment and singing voice of online singing room service and apparatus for executing the same

Country Status (2)

Country Link
KR (1) KR101987473B1 (en)
WO (1) WO2019117362A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7471752B2 (en) 2020-08-27 2024-04-22 株式会社第一興商 Server device

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110992920B (en) * 2019-11-29 2022-04-29 北京达佳互联信息技术有限公司 Live broadcasting chorus method and device, electronic equipment and storage medium
CN112040267A (en) * 2020-09-10 2020-12-04 广州繁星互娱信息科技有限公司 Chorus video generation method, chorus method, apparatus, device and storage medium
CN112669884B (en) * 2020-12-31 2022-11-04 广州酷狗计算机科技有限公司 Audio data processing method, device, equipment and storage medium
CN112927666B (en) * 2021-01-26 2023-11-28 北京达佳互联信息技术有限公司 Audio processing method, device, electronic equipment and storage medium
CN113518235B (en) * 2021-04-30 2023-11-28 广州繁星互娱信息科技有限公司 Live video data generation method, device and storage medium
CN115174981B (en) * 2022-08-03 2024-02-23 湖南广播电视台 Remote joint singing method, device, equipment and storage medium based on micro-service

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10149179A (en) * 1996-11-20 1998-06-02 Yamaha Corp Karaoke system
KR20000037280A (en) 2000-04-15 2000-07-05 김용성 On-line karaoke service apparatus through the web and karaoke service method
KR20130097445A (en) * 2012-02-24 2013-09-03 주식회사 팬택 Method for authenticating user using voice recognition, device and system for the same
JP2016206575A (en) * 2015-04-28 2016-12-08 株式会社第一興商 Karaoke system responding to transmission delay of singing voice

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100532288B1 (en) * 2003-02-13 2005-11-29 삼성전자주식회사 Karaoke Service Method By Using Wireless Connecting Means between Mobile Communication Terminals and Computer Readable Recoding Medium for Performing it
KR101078367B1 (en) * 2009-09-09 2011-10-31 주식회사 금영 Synchronous apparatus of image data and sound data for karaoke player and method for the same
KR101205342B1 (en) * 2011-03-04 2012-11-30 이상혁 Karaoke source video and sound of recoding singer matching system and method
JP5814195B2 (en) * 2012-07-28 2015-11-17 株式会社第一興商 Karaoke synchronized performance system
KR20140147237A (en) * 2013-06-19 2014-12-30 주식회사 코리아제너럴파트너스 Business model of providing off-line karaoke with sound source data

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10149179A (en) * 1996-11-20 1998-06-02 Yamaha Corp Karaoke system
KR20000037280A (en) 2000-04-15 2000-07-05 김용성 On-line karaoke service apparatus through the web and karaoke service method
KR20130097445A (en) * 2012-02-24 2013-09-03 주식회사 팬택 Method for authenticating user using voice recognition, device and system for the same
JP2016206575A (en) * 2015-04-28 2016-12-08 株式会社第一興商 Karaoke system responding to transmission delay of singing voice

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7471752B2 (en) 2020-08-27 2024-04-22 株式会社第一興商 Server device

Also Published As

Publication number Publication date
WO2019117362A1 (en) 2019-06-20

Similar Documents

Publication Publication Date Title
KR101987473B1 (en) System for synchronization between accompaniment and singing voice of online singing room service and apparatus for executing the same
US20210243528A1 (en) Spatial Audio Signal Filtering
JP2008096483A (en) Sound output control device and sound output control method
KR102394508B1 (en) Singing Room System by Using Smart Terminal and Method thereof
US8253006B2 (en) Method and apparatus to automatically match keys between music being reproduced and music being performed and audio reproduction system employing the same
JP6457326B2 (en) Karaoke system that supports transmission delay of singing voice
JP2016070999A (en) Karaoke effective sound setting system
CN112119456B (en) Arbitrary signal insertion method and arbitrary signal insertion system
EP1784049A1 (en) A method and system for sound reproduction, and a program product
JP2009005064A (en) Ip telephone terminal and telephone conference system
CN113270082A (en) Vehicle-mounted KTV control method and device and vehicle-mounted intelligent networking terminal
JP4327165B2 (en) Music playback device
EP3627495B1 (en) Information processing device and information processing method
JP2012073426A (en) Music reproduction device and music reproduction program
JP2005037845A (en) Music reproducing device
WO2022143530A1 (en) Audio processing method and apparatus, computer device, and storage medium
KR102244150B1 (en) On-Line NoraeBang System by Using BlockChain and Smart Terminal and Method thereof
JP2014167519A (en) Communication karaoke system allowing continuation of duet singing during communication failure
KR101573868B1 (en) Method for displaying music lyrics automatically, server for recognizing music lyrics and system for displaying music lyrics automatically comprising the server
JP6220576B2 (en) A communication karaoke system characterized by a communication duet by multiple people
CN108885878A (en) Improved method, device and system for embedding data in a stream
WO2023195353A1 (en) Sound processing device and karaoke system
JP4422656B2 (en) Remote multi-point concert system using network
KR102171479B1 (en) Method and system for digital audio co-play service
CN113611272B (en) Multi-mobile-terminal-based loudspeaker method, device and storage medium

Legal Events

Date Code Title Description
GRNT Written decision to grant