KR102070071B1 - 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템 - Google Patents

Abstract

본 발명은, 서버를 통해 공유된 오디오 데이터 및 비디오 데이터를 수신하는 통신부, 오디오 신호를 스피커로 출력하는 오디오 출력부, 비디오 신호를 디스플레이로 출력하는 비디오 출력부 및 서버를 통해 공유된 정보에 대응하는 오디오 데이터를 오디오 합성부로 출력하고 공유된 정보에 대응하는 비디오 데이터를 비디오 출력부로 출력하는 제어부를 포함하는, 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템에 관한 것이다.

Description

연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템{SONG PLAYING METHOD, KARAOKE SYSTEM AND KARAOKE ABLE TO SHARE AND REPLAY SONG PERFORMED}

본 발명은 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템에 관한 것으로서, 구체적으로는 노래 반주기에서 연주되고 기록된 오디오나 비디오를 다른 노래 반주기에서 공유하고 공유된 오디오나 비디오와 연동하여 선택된 노래를 제공되는 반주를 통해 부를 수 있도록 하는 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템에 관한 것이다.

노래 반주기가 널리 알려져 있다. 노래 반주기는 마이크, 스피커, 디스플레이를 구비하고 사용자가 선곡한 노래(곡)의 가사를 디스플레이로 표시하고 마이크를 통해 입력된 음성 신호를 미디 신호와 같은 반주 음악에 합성하여 스피커로 출력한다. 노래 반주기를 이용하여 연주된 노래는 녹음될 수 있고 테이프나 USB 메모리 등의 저장매체를 통해 사용자에게 제공될 수 있다.

한편, 1인 미디어 시대가 도래함에 따라, 개인 영상을 온라인상의 커뮤니티 공간에 공유하고 있다. 이에 따라 노래 반주기에서 연주된 오디오나 비디오를 다른 사용자와 공유할 수 있다면 사용자나 노래 반주기에 다양한 장점을 제공할 수 있다.

기존의 알려진 비디오(영상)나 오디오 공유는 다른 사용자의 오디오나 비디오를 다운로드 받거나 스트리밍 받아 수신된 오디오/비디오 데이터를 스마트폰 등에 출력한다.

반면, 노래 반주기는 음악 재생을 할 수 있는 기능을 가지고 있기에 다른 사용자의 노래에 연동하여 음악을 재생하고 영상을 출력할 수 있다면 노래 반주기에 다양한 재미를 제공할 수 있다.

즉, 노래 반주기를 통해, 다른 사용자의 노래를 공유하고 재생할 수 있다면 노래 반주기에 새로운 재미 요소를 제공할 수 있다. 노래를 부르고자 하는 사용자는 다른 사용자의 노래를 부르는 모습을 볼 수 있고 또한 노래 반주기에서 제공하는 음악에 연동하여 따라 부를 수 있어 잘 부르는 사용자 노래를 같이 부르면서 연습 등을 할 수 있는 기능과 나아가 노래 반주기에서 녹화(녹음)된 자신의 오디오/비디오를 다른 사람과 공유할 수 있는 기능을 노래 반주기가 제공한다면 매우 바람직할 것이다.

10-2018-0136599(A), 2018년12월26일

본 발명은, 상술한 문제점을 해결하기 위해서 안출한 것으로서, 노래 반주기에서 연주된 오디오 및/또는 비디오를 다른 노래 반주기에서 공유하고 재생할 수 있는 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템을 제공하는 데 그 목적이 있다.

또한, 본 발명은 노래 연주중인 노래 반주기에서의 영상과 음향을 녹화 및 공유하고 공유된 비디오/오디오 데이터의 검색에 따라 선택되는 비디오/오디오 데이터를 노래 반주기에서 미디 데이터와 가사 데이터의 합성을 통해 영상과 음향으로 출력할 수 있는 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템을 제공하는 데 그 목적이 있다.

또한, 본 발명은 노래 반주기에서 연주되고 반주 신호와 음성 신호가 혼합된 오디오 신호에서 음성 신호를 분리하고 분리된 음성 신호를 다른 노래 반주기에서 생성된 음성과 반주 신호와 합성 및 출력할 수 있는 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템을 제공하는 데 그 목적이 있다.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

본 발명에 일 양상에 따른 노래 반주기는 서버를 통해 공유된 오디오 데이터 및 비디오 데이터를 수신하는 통신부, 오디오 신호를 스피커로 출력하는 오디오 출력부, 비디오 신호를 디스플레이로 출력하는 비디오 출력부 및 서버를 통해 공유된 정보에 대응하는 오디오 데이터를 오디오 합성부로 출력하고 공유된 정보에 대응하는 비디오 데이터를 비디오 출력부로 출력하는 제어부를 포함한다.

상기한 노래 반주기에 있어서, 가사 파일 및 미디 파일을 저장하는 저장부 및 사용자 입력을 수신하는 입력부를 더 포함하고, 제어부는, 입력부를 통해 수신된 곡 번호를 포함하는 검색 요청을 통신부를 통해 서버로 전송하고 서버로부터 검색 목록을 통신부를 통해 수신하고 수신된 검색 목록을 비디오 출력부에 출력하며, 검색 목록에서 선택 입력을 입력부를 통해 수신하고 선택 입력에 대응하는 선택 요청을 서버로 전송하고 선택 요청에 따라 선택되는 연주 정보의 오디오 데이터 및 비디오 데이터를 통신부를 통해 수신하고, 수신된 오디오 데이터와 곡 번호에 대응하고 저장부에 저장된 미디 파일의 미디 데이터를 합성하여 합성된 오디오 데이터를 오디오 출력부로 출력하고 수신된 비디오 데이터에 곡 번호에 대응하는 가사 파일의 가사 데이터를 합성하여 합성된 비디오 데이터를 비디오 출력부로 출력한다.

상기한 노래 반주기에 있어서, 제어부는 입력부로부터 수신되는 템포 변환 입력에 따라 오디오 데이터에 대해 템포 변환을 수행하고 수신된 오디오 데이터의 가사 데이터 동기화 정보에 따라 변환된 오디오 데이터를 템포 변환된 미디 데이터에 합성하여 오디오 출력부로 출력한다.

상기한 노래 반주기에 있어서, 사용자 입력을 수신하는 입력부, 미디 신호와 음성 신호를 포함하는 음향 신호를 수신하는 음향신호 수신부 및 노래 반주기 외부를 촬영한 영상 신호를 수신하는 카메라신호 수신부를 더 포함하고, 제어부는 입력부를 통해 선곡된 곡 번호에 대응하는 미디 신호를 오디오 출력부를 통해 출력하고 음향신호 수신부의 음향 신호로부터 제1 오디오 데이터 및 제2 오디오 데이터를 구성하고 카메라신호 수신부의 영상 신호로부터 비디오 데이터를 구성하며 제1 오디오 데이터, 제2 오디오 데이터, 비디오 데이터 및 곡 정보를 포함하는 연주 정보를 통신부를 통해 서버로 전송하며, 제어부는 음향 신호를 녹음한 제1 오디오 데이터와 주파수 도메인상에서 음향 신호에서 연주되는 미디 신호를 제거한 음성 신호를 녹음한 제2 오디오 데이터를 구성하고, 곡 정보는 노래 반주기에서 선곡된 곡 번호를 포함한다.

상기한 노래 반주기에 있어서, 미디 파일을 저장하는 저장부를 더 포함하고, 제어부는 검색된 연주 정보의 곡 정보의 곡 번호에 대응하는 미디 파일을 저장부에서 추출하고 추출된 미디 파일의 미디 데이터와 검색된 연주 정보의 제2 오디오 데이터를 제2 오디오 데이터의 가사 데이터 동기화 정보에 따라 동기화 및 합성하여 오디오 출력부로 출력한다.

본 발명에 일 양상에 따른 노래 재생 방법은 서버를 통해 공유된 오디오 데이터 및 비디오 데이터를 수신하는 단계, 수신된 오디오 데이터를 이용하여 출력될 오디오 데이터를 생성하고 수신된 비디오 데이터를 이용하여 출력될 비디오 데이터를 생성하는 단계 및 생성된 오디오 데이터 및 비디오 데이터를 오디오 신호 및 비디오 신호로 출력하는 단계를 포함한다.

상기한 노래 재생 방법에 있어서, 오디오 데이터 및 비디오 데이터의 수신하는 단계 이전에, 곡 번호 입력을 리모컨을 통해 수신하는 단계, 곡 번호를 포함하는 검색 요청을 서버로 전송하는 단계, 서버로부터 곡 번호에 대응하는 검색 목록을 수신하고 표시하는 단계 및 검색 목록에서의 선택 입력을 수신하고 선택 입력에 대응하는 선택 요청을 서버로 전송하는 단계를 더 포함하고, 오디오 데이터와 비디오 데이터를 생성하는 단계는 수신된 오디오 데이터와 곡 번호에 대응하고 미리 저장된 미디 파일의 미디 데이터를 합성하고 수신된 비디오 데이터에 곡 번호에 대응하는 가사 파일의 가사 데이터를 합성한다.

상기한 노래 재생 방법에 있어서, 오디오 데이터와 비디오 데이터를 생성하는 단계는 수신되는 템포 변환 입력에 따라 오디오 데이터에 대해 템포 변환을 수행하고 수신된 오디오 데이터의 가사 데이터 동기화 정보에 따라 변환된 오디오 데이터를 템포 변환된 미디 데이터에 합성하여 출력될 오디오 데이터를 생성한다.

상기한 노래 재생 방법에 있어서, 오디오 데이터 및 비디오 데이터의 수신하는 단계 이전에, 선곡된 곡 번호에 대응하는 미디 신호를 오디오 출력부로 출력하고 미디 신호와 음성 신호를 포함하여 수신되는 음향 신호로부터 제1 오디오 데이터 및 제2 오디오 데이터를 구성하고 수신되는 영상 신호로부터 비디오 데이터를 구성하는 단계 및 제1 오디오 데이터, 제2 오디오 데이터, 비디오 데이터 및 곡 정보를 포함하는 연주 정보를 서버로 전송하는 단계를 더 포함하고, 구성 단계는 음향 신호를 녹음한 제1 오디오 데이터와 주파수 도메인 상에서 음향 신호에서 연주되는 미디 신호를 제거한 음성 신호를 녹음한 제2 오디오 데이터를 구성하고, 곡 정보는 노래 반주기에서 선곡 가능한 곡 번호를 포함한다.

상기한 노래 재생 방법에 있어서, 상기 오디오 데이터와 비디오 데이터를 생성하는 단계는 검색된 연주 정보의 곡 정보의 곡 번호에 대응하는 미디 파일을 추출하고 추출된 미디 파일의 미디 데이터와 검색된 연주 정보의 제2 오디오 데이터를 합성한다.

본 발명에 일 양상에 따른 노래 반주 시스템은 상기한 하나 이상의 노래 반주기 및 노래 반주기에 오디오 데이터와 비디오 데이터를 전송 가능한 서버를 포함한다.

상기와 같은 본 발명에 따른 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템은 노래 반주기에서 연주된 오디오 및/또는 비디오를 다른 노래 반주기에서 공유하고 재생할 수 있는 효과가 있다.

또한, 상기와 같은 본 발명에 따른 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템은 노래 연주중인 노래 반주기에서의 영상과 음향을 녹화 및 공유하고 공유된 비디오/오디오 데이터의 검색에 따라 선택되는 비디오/오디오 데이터를 노래 반주기에서 미디 데이터와 가사 데이터의 합성을 통해 영상과 음향으로 출력할 수 있는 효과가 있다.

또한, 상기와 같은 본 발명에 따른 연주 노래 공유 및 재생 가능한 노래 반주기, 노래 재생 방법 및 노래 반주 시스템은 노래 반주기에서 연주되고 반주 신호와 음성 신호가 혼합된 오디오 신호에서 음성 신호를 분리하고 분리된 음성 신호를 다른 노래 반주기에서 생성된 음성과 반주 신호와 합성 및 출력할 수 있는 효과가 있다.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

도 1은 연주된 노래를 공유하기 위한 예시적인 노래 반주 시스템을 도시한 도면이다.
도 2는 서버의 예시적인 블록도를 도시한 도면이다.
도 3은 노래 반주기를 구비한 한 노래방의 예시적인 설치 구성을 도시한 도면이다.
도 4는 노래 반주기의 예시적인 블록도를 도시한 도면이다.
도 5는 연주될 영상과 오디오를 공유하기 위한 예시적인 제어 흐름을 도시한 도면이다.
도 6은 연주된 영상과 오디오를 공유하기 위한 예시적인 제어 흐름을 도시한 도면이다.

상술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술 되어 있는 상세한 설명을 통하여 더욱 명확해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하기로 한다.

도 1은 연주된 노래를 공유하기 위한 예시적인 노래 반주 시스템을 도시한 도면이다.

도 1에 따르면, 노래 반주 시스템은 하나 이상의 노래 반주기(100) 및 서버(200)를 포함하고 노래 반주기(100)와 서버(200)는 광대역 네트워크를 통해 서로 연결된다.

노래 반주기(100)는 노래방, 일반 가정, 업무 공간(바람직하게는 노래방) 등에 설치되어 구비된 마이크(400)를 통해 노래를 부를 수 있는 기기이다.

노래 반주기(100)는 마이크(400)와 스피커(600)를 구비하여 선곡된 곡의 미디 신호 등을 스피커(600)를 통해 출력하고 마이크(400)를 통해 미디 멜로디 등에 맞춰 노래를 부를 수 있도록 구성된다.

본 발명에 따른, 노래 반주기(100)는 서버(200)와 연계하여 다른 노래 반주기(100)나 다른 이용자에 의해 노래하는 모습과 소리를 보고 들을 수 있는 비디오 데이터 및/또는 오디오 데이터를 수신하고 이를 디스플레이(300)에 표시하거나 스피커(600)로 출력할 수 있다.

또한, 노래 반주기(100)는 선곡된 곡을 대상으로 이용자에 의해 노래하는 모습과 소리를 비디오 데이터 및/또는 오디오 데이터로 구성하여 서버(200)로 전송할 수 있도록 구성된다.

노래 반주기(100)에 대해서는 도 3 이하에서 상세히 살펴보도록 한다.

서버(200)는 노래 반주기(100)를 통해 생성된 노래 영상과 오디오를 다른 노래 반주기(100)나 다른 사용자와 공유할 수 있도록 구성된다. 서버(200)는 데이터베이스를 구비하여 임의의 사용자에 의해 생성된 연주 정보를 저장하고 연주 정보의 비디오 데이터와 오디오 데이터를 노래 반주기(100)로 전송할 수 있다.

서버(200)는 웹 서버, 앱 서버 또는 노래 반주기(100)와 약속된 프로토콜에 따라 동작하는 서버 등일 수 있다. 적어도 서버(200)는 노래 반주기(100)로부터의 접속 요청, 연결 요청, 검색 요청, 선택 요청 등을 수신하고 수신된 요청에 따른 응답과 대응 기능을 수행할 수 있도록 구성된다. 서버(200)는 여러 연주 정보를 저장하고 연주 정보를 곡 번호별로 분류가능하고 각 연주 정보에 대해 랭킹을 부여할 수 있다.

서버(200)에 대해서는 도 2, 도 5 및 도 6을 통해 좀 더 살펴보도록 한다.

광대역 네트워크는 서버(200)와 하나 이상의 노래 반주기(100) 사이의 데이터를 송수신하는 네트워크이다. 광대역 네트워크는 유선 네트워크 및/또는 무선 네트워크의 조합으로 구성될 수 있고 인터넷을 구성하거나 이동통신망을 구성할 수 있다.

도 2는 서버(200)의 예시적인 블록도를 도시한 도면이다.

도 2에 따르면, 서버(200)는 통신 유닛(210), 저장 유닛(230), 연결 유닛(250) 및 제어 유닛(270)을 포함한다. 도 2는 바람직하게는 기능 블록도를 나타내고 대응하는 하드웨어 블록을 각 기능 블록들은 구비한다. 도 2의 서버(200)는 다양한 하드웨어를 이용하여 구성될 수 있다. 예를 들어 서버(200)는 하나 이상의 PC, 워크스테이션 및/또는 서버 프레임 등을 이용하여 구성될 수 있다. 도 2에 도시되지 않은 다른 블록들이 설계 변형에 따라 서버(200)에 더 포함될 수도 있다.

도 2를 통해 서버(200)를 살펴보면, 통신 유닛(210)은 광대역 네트워크를 통해 각종 데이터를 송수신한다. 통신 유닛(210)은 구비된 유선랜 인터페이스나 무선랜 인터페이스 등을 통해서 광대역 네트워크에 연결되어 각종 데이터나 요청을 나타내는 통신 패킷을 수신하고 수신된 통신 패킷에 대응한 응답 패킷 등을 광대역 네트워크를 통해서 출력할 수 있다.

예를 들어, 통신 유닛(210)은 임의 노래 반주기(100)로부터 검색 요청, 선택 요청, 업로딩 요청 등을 나타내는 통신 패킷을 수신하고 이를 제어 유닛(270)으로 전송하고 제어 유닛(270)으로부터 수신되는 응답 패킷을 광대역 네트워크를 통해 전송할 수 있다.

저장 유닛(230)은 각종 데이터와 프로그램을 저장한다. 저장 유닛(230)은 하드디스크 등의 대용량 저장매체를 구비하여 각종 데이터와 프로그램을 저장한다. 저장 유닛(230)은 데이터베이스를 구성할 수 있다.

저장 유닛(230)에 저장되는 데이터를 살펴보면, 저장 유닛(230)은 노래연주 DB를 저장한다. 노래연주 DB는 노래연주 아이템을 하나 이상 저장하고 노래연주 아이템은 노래 반주기(100)에서 노래하는 모습과 소리를 저장한 비디오 데이터와 오디오 데이터 등의 노래연주 정보를 저장(포함)한다.

각각의 노래연주 아이템은 사용자 식별자, 곡정보, 하나 이상의 오디오 데이터, 비디오 데이터, 가사 데이터 동기화 정보, 업로딩 시기, 랭킹 등의 정보를 저장한다. 사용자 식별자는 사용자를 식별하기 위한 데이터로서 예를 들어, 사용자 ID, 휴대전화번호, 이메일 주소 등일 수 있다. 사용자 식별자는 노래연주 정보를 업로딩한(또는 노래를 한) 사용자를 특정할 수 있다.

곡정보는 노래 연주가 이루어 곡에 대한 정보를 저장한다. 곡정보는 예를 들어, 노래 반주기(100)에서 선택 및 재생 가능한 곡 번호와 곡 번호에 대응하는 곡제목, 가수명 및/또는 작곡가명 등을 저장할 수 있다.

하나 이상의 오디오 데이터는 노래 반주기(100)에서 생성된 음향 데이터이다. 본 발명에 따라 서버(200)에 저장되는 오디오 데이터는 바람직하게는 두 개의 오디오 데이터가 저장된다.

하나의 오디오 데이터(이하 '제1 오디오 데이터'라 함)는 노래 반주기(100)가 설치된 노래방 내에서 마이크(400)를 통해 입력되는 음향 신호를 녹음한 오디오 데이터이다. 이 제1 오디오 데이터는 적어도 노래 반주기(100)에서 생성되어 출력되는 미디 신호와 이용자의 음성 신호가 합성되어 녹음된 오디오 데이터이다.

다른 하나의 오디오 데이터(이하 '제2 오디오 데이터'라 함)는 노래방의 마이크(400)를 통해 입력되는 음향 신호에서 임의의 오디오 신호가 제거되어 녹음된 오디오 데이터이다. 제2 오디오 데이터는 바람직하게는 음향 신호에서 미디 신호를 제거하고 적어도 이용자의 음성 신호를 포함하여 녹음된 오디오 데이터이다.

두 오디오 데이터를 이용하여 다른 이용자의 노래하는 모습과 음향을 연결된 노래 반주기(100)를 통해 감상할 수 있고 같이 부를 수 있도록 한다.

오디오 데이터는 알려진 압축, 비압축 오디오 포맷에 따라 포맷팅되어 저장될 수 있다. 예를 들어, 오디오 데이터는 MP3, AAC, FLAC, APE, WAV 등의 손실/비손실 압축 포맷에 따라 인코딩되어 저장될 수 있다.

비디오 데이터는 노래 반주기(100)가 설치된 노래방 내의 모습을 녹화한 영상 데이터이다. 비디오 데이터는 예를 들어, 노래 반주기(100) 이용자의 노래하는 모습을 촬영한 데이터일 수 있다. 비디오 데이터는 알려진 동영상 압축 포맷에 따라 포맷팅되어 저장될 수 있다.

가사 데이터 동기화 정보는 제2 오디오 데이터를 가사에 매칭시키기 위한 정보로서 예를 들어 노래의 각 마디의 가사 시작 시점에 대응하는 오디오 데이터의 포인터와 각 마디 및/또는 전체 녹음된 오디오 데이터에서의 템포 값을 가질 수 있다. 가사 데이터 동기화 정보는 가사의 동기화를 통해 노래 반주기(100)에서 생성되는 오디오 신호(예를 들어, 미디 신호)와 시간 동기화시킬 수 있도록 한다.

업로딩 시기는 노래연주 아이템의 업로딩(저장) 시기를 나타낸다. 업로딩 시기는 예를 들어, 년월일, 시각 등으로 표현되어 저장될 수 있다.

랭킹은 해당 노래연주 아이템의 등위(등수)를 나타낼 수 있다. 랭킹은 노래연주 아이템에 대해서 부여된 선호도(예를 들어, 별풍선 부여 등), 선택 횟수 등에 기초하여 산출될 수 있다.

가장 높은 랭킹의 노래연주 아이템이 선 검색될 수 있고 우선하는 위치에서 노래 반주기(100)에 표시될 수 있다.

저장 유닛(230)은 그 외 사용자 DB를 더 포함할 수 있다. 사용자 DB는 사용자 식별자와 패스워드 등을 포함하고 그 외 이용자와 관련된 각종 정보를 저장할 수 있다. 사용자 식별자는 사용자 ID, 휴대전화번호, 이메일 주소 등일 수 있다.

저장 유닛(230)은 또한 제어 유닛(270)에서 수행되는 제어 프로그램을 더 저장할 수 있다.

연결 유닛(250)은 서버(200) 내의 블록 간 데이터를 송수신한다. 연결 유닛(250)은 근거리 네트워크, 병렬 버스, 시리얼 버스 등을 이용하여 구성된다.

제어 유닛(270)은 하나 이상의 실행 유닛을 구비하여 저장 유닛(230)에 저장되어 있는 제어 프로그램을 로딩하고 실행 유닛을 통해서 프로그램의 명령어 코드를 실행하여 서버(200)를 제어한다.

제어 유닛(270)은 제어 프로그램을 통해 노래 반주기(100)에 연결하고 연결된 노래 반주기(100)로부터 각종 요청을 통신 유닛(210)을 통해 수신한다. 제어 유닛(270)은 저장 유닛(230)에 저장되어 있는 데이터베이스를 이용하여 요청을 처리하고 처리된 결과나 그 응답을 통신 유닛(210)을 통해 요청한 노래 반주기(100)로 전송할 수 있다.

제어 유닛(270)을 통해 이루어지는 서버(200)의 데이터 처리 및 제어 흐름은 도 5 및 도 6을 통해 좀 더 상세히 살펴보도록 한다.

도 3은 노래 반주기(100)를 구비한 한 노래방의 예시적인 설치 구성을 도시한 도면이다.

도 3의 예는 노래방 내의 임의의 룸 내의 설치 구성을 나타낸다.

도 3의 예와 같이 노래방 내의 개별 노래반주시스템은 노래 반주기(100), 디스플레이(300), 마이크(400), 카메라(500), 스피커(600) 및 리모컨(700)을 포함한다. 특정 구성요소는 복수 개 설치될 수 있다. 예를 들어, 디스플레이(300), 마이크(400), 카메라(500), 스피커(600), 리모컨(700) 등은 2개 이상이 개별 노래반주시스템 내에 설치될 수 있다.

도 3을 통해 개별 노래반주시스템을 간단히 살펴보면, 디스플레이(300)는 노래 반주기(100)로부터의 영상 신호를 이용자가 인식 가능하도록 디스플레이-패널에 출력한다. 디스플레이(300)는 LCD, LED, TFT-LCD 등의 디스플레이-패널을 구비하고 노래 반주기(100)로부터의 비디오 신호를 디스플레이-패널에 출력한다. 디스플레이(300)는 모니터, TV 등일 수 있다.

마이크(400)는 노래방 내의 음향 신호를 캡쳐링하여 대응하는 전기 신호를 생성한다. 마이크(400)는 진동판(진동 센서) 등을 구비하여 음향 신호를 진동판에 따른 전기 신호로 변환할 수 있다. 마이크(400)는 유선 마이크이거나 무선 마이크일 수 있다.

카메라(500)는 노래방 내의 이용자 등의 노래 부르는 모습을 촬영한다. 카메라(500)는 렌즈, 이미지 센서 등을 구비하여 렌즈에 노출된 이미지를 촬영하고 촬영된 일련의 이미지 데이터(영상)를 노래 반주기(100)로 출력할 수 있다. 카메라(500)는 디스플레이(300)가 설치되거나 위치하는 벽면 등에 설치되어 이용자의 얼굴이나 상반신 모습을 촬영할 수 있다.

스피커(600)는 노래 반주기(100)에서 생성된 오디오 신호를 출력한다. 스피커(600)는 노래 반주기(100)에 직접 연결되거나 앰프를 통해 연결되어 노래 반주기(100)로부터의 오디오 신호를 진동 신호로 출력한다. 출력되는 오디오 신호는 이용자의 음성 신호와 반주 등에 이용되는 미디 신호가 합성되어 있을 수 있다.

리모컨(700)은 이용자로부터의 입력을 수신한다. 리모컨(700)은 다수의 버튼(과 나아가 디스플레이-모듈)을 구비하여 이용자로부터의 특정 입력을 수신하고 수신된 입력에 대응하는 무선의 리모컨 신호(예를 들어, IR신호)를 출력한다.

노래 반주기(100)는 리모컨(700)이나 구비된 입력 버튼을 통해 사용자 선곡 입력을 수신하고 선곡된 곡 번호에 대응하는 오디오 신호와 비디오 신호를 스피커(600)와 디스플레이(300)로 출력한다.

또한, 노래 반주기(100)는 카메라(500)를 통해 노래 반주기(100) 외부의 캡쳐링된 영상 신호와 마이크(400)로부터의 음향 신호를 수신하고 이를 비디오 데이터와 오디오 데이터로 저장하고 서버(200)에 업로딩할 수 있다.

또한, 노래 반주기(100)는 서버(200)로부터 비디오 데이터와 오디오 데이터를 수신하고 수신된 비디오 데이터의 비디오 신호를 디스플레이(300)로 출력하고 수신된 오디오 데이터의 오디오 신호를 스피커(600)로 출력할 수 있다.

이와 같이, 개별 노래반주시스템은 오디오와 비디오 인터페이스를 구비하여 오디오 및 비디오 신호를 출력하고 녹화 및 녹음하여 서버(200)에 업로딩하고 서버(200)로부터의 오디오/비디오 데이터를 오디오 및 비디오 신호로 출력할 수 있다.

도 4는 노래 반주기(100)의 예시적인 블록도를 도시한 도면이다.

도 4에 따르면, 노래 반주기(100)는 입력부(110), 통신부(120), 음향신호 수신부(130), 카메라신호 수신부(140), 주변기기 인터페이스부(150), 저장부(160), 오디오 출력부(170), 비디오 출력부(180) 및 제어부(190)를 포함한다. 노래 반주기(100)는 도 4에 도시된 블록 외에 다른 블록을 더 포함할 수 있다. 또는 노래 반주기(100)는 설계 예에 따라 도 4의 블록 중 일부의 블록을 생략할 수도 있다. 도 4의 노래 반주기(100)는 바람직하게는 노래방에 설치되는 기기이다.

도 4를 통해, 노래 반주기(100)를 살펴보면, 입력부(110)는 노래 반주기(100)를 사용하는 사용자 입력을 수신한다. 입력부(110)는 하나 이상의 입력 버튼이나 리모컨 센서를 구비하고 입력 버튼이나 리모컨 센서로부터 사용자 입력을 수신한다. 예를 들어, 입력부(110)는 노래 반주기(100) 전면 판넬에 설치되는 입력 버튼으로부터 사용자 입력을 수신하거나 리모컨 신호를 캡쳐링하는 리모컨 센서(예를 들어, IR 센서 등)로부터 사용자 입력을 수신할 수 있다. 입력부(110)는 사용자 입력에 대응하는 데이터나 신호를 제어부(190)로 출력할 수 있다.

통신부(120)는 광대역 네트워크를 통해 서버(200)에 연결되어 통신 패킷을 통해 서버(200)와 각종 데이터를 송수신한다. 통신부(120)는 무선랜이나 유선랜에 연결될 수 있는 통신 칩셋, 회로 등을 구비하여 각종 통신 패킷을 서버(200)와 송수신할 수 있다.

예를 들어, 통신부(120)는 서버(200)로 공유될 노래연주 정보의 통신 패킷을 전송할 수 있다. 노래연주 정보는 적어도 업로딩될 하나 이상의 오디오 데이터와 비디오 데이터를 포함하고 나아가 곡 정보 등을 더 포함할 수 있다. 또한, 통신부(120)는 서버(200)로부터 노래연주 정보 또는 하나 이상의 오디오 데이터와 비디오 데이터를 수신하고 이를 제어부(190)로 전달할 수 있다.

음향신호 수신부(130)는 노래 반주기(100) 외부의 음향 신호를 수신(인식)한다. 음향신호 수신부(130)는 마이크-인터페이스를 구비하여 마이크(400)로부터의 음향 신호를 수신한다. 음향신호 수신부(130)는 이용자에 의해 입력된 음성 신호와 함께 노래 반주기(100)에서 출력되는 오디오 신호(예를 들어, 미디 신호 등)를 같이 수신한다.

음향신호 수신부(130)는 유선 마이크(400)로부터 음향 신호를 수신하거나 무선 마이크(400)로부터 출력되는 무선 패킷에서 음향 신호에 대응하는 오디오 데이터를 추출하고 이를 제어부(190)로 전달할 수 있다. 이와 같이 음향신호 수신부(130)는 노래 반주기(100)에서 생성되는 미디 신호와 이용자 음성을 통해 입력된 음성 신호를 포함하는 음향 신호를 수신한다.

카메라신호 수신부(140)는 카메라(500)에 연결되어 노래 반주기(100) 외부를 촬영한 영상 신호를 수신한다. 카메라신호 수신부(140)는 비디오 ADC(Analog Digital Converter) 등을 구비하여 아날로그나 디지털의 영상 신호로부터 대응하는 일련의 비디오 데이터를 생성하여 제어부(190)로 전송할 수 있다. 카메라신호 수신부(140)는 유선이나 무선(무선통신, 예를 들어, 와이파이 등)을 통해 영상 신호를 수신할 수 있다.

주변기기 인터페이스부(150)는 노래 반주기(100) 외부의 주변기기와 인터페이스하여 각종 제어 신호를 출력하고 상태 신호를 수신한다. 주변기기 인터페이스부(150)는 미러볼, 동전 수납기 등으로 제어 신호를 출력하거나 등으로부터 상태 신호를 수신할 수 있다.

저장부(160)는 휘발성 메모리, 비휘발성 메모리 및/또는 하드디스크 등의 대용량 저장매체를 포함하여 각종 데이터와 프로그램을 저장한다. 예를 들어, 저장부(160)는 각각의 곡 번호에 대응하는 가사 파일 및 미디 파일을 저장하고 배경 영상으로 이용 가능한 각종 동영상 파일을 저장한다. 또한, 저장부(160)는 제어부(190)에서 수행되는 제어 프로그램을 저장한다.

오디오 출력부(170)는 제어부(190)로부터의 오디오 데이터를 수신하고 수신된 오디오 데이터를 오디오 신호로 변환하여 스피커(600)로 출력한다. 오디오 출력부(170)는 오디오 DAC 등을 구비하여 I2S 등을 통해 수신되는 일련의 오디오 데이터를 아날로그 오디오 신호나 SPDIF 신호 등으로 변환하여 스피커(600)로 직접 또는 오디오 앰프를 경유하여 스피커(600)로 출력할 수 있다.

오디오 출력부(170)는 오디오 믹스(Mix)를 더 포함하여 제어부(190)로부터 수신되는 오디오 데이터에 따라 생성되는 오디오 신호와 음향신호 수신부(130)로부터의 음향 신호를 합성하여 스피커(600)로 출력할 수 있다. 이 경우 오디오 믹스는 에코 캔슬링(echo canceling) 기능을 구비하여 특정 음향이나 소리를 제거할 수 있다.

비디오 출력부(180)는 제어부(190)로부터 수신되는 비디오 데이터를 변환하여 변환된 비디오 신호를 디스플레이(300)로 출력한다. 비디오 출력부(180)는 비디오 DAC를 구비하여 일련의 비디오 프레임의 비디오 데이터를 아날로그 또는 디지털의 비디오 신호로 변환하여 출력할 수 있다.

제어부(190)는 하나 이상의 프로그램 명령어 실행 유닛(Execution Unit)을 구비하여 로딩된 프로그램에 따라 다른 블록들을 제어하여 노래 반주기(100)를 제어한다. 제어부(190)는 마이컴, CPU, MPU, 중앙처리장치, 프로세서, DSP 등을 나타내거나 등으로 지칭될 수 있다.

제어부(190)는 저장부(160)의 제어 프로그램을 로딩하여 제어 프로그램을 통해 노래 반주기(100)를 제어할 수 있다.

제어부(190)에서 이루어지는 일 제어 예를 살펴보면, 제어부(190)는 입력부(110)를 통한 곡 번호 입력을 수신하고 입력된 곡 번호에 대응하는 미디 파일을 재생하여 오디오 출력부(170)를 통해 오디오 신호로 출력하고 가사 파일을 배경 영상에 표시하여 가사가 표시된 배경 영상을 비디오 출력부(180)를 통해 비디오 신호로 출력할 수 있다.

또한, 제어부(190)는 서버(200)를 통해 공유된 노래연주 정보에 대응하는 오디오 데이터를 통신부(120)를 통해 수신하고 수신된 오디오 데이터를 오디오 출력부(170)로 출력하여 공유된 오디오 데이터에 대응하는 오디오 신호를 스피커(600)로 출력할 수 있다. 제어부(190)는 동일한 노래연주 정보에 대응하는 비디오 데이터를 통신부(120)를 통해 수신하고 수신된 비디오 데이터를 비디오 출력부(180)로 출력하여 공유된 비디오 데이터에 대응하는 비디오 신호를 디스플레이(300)로 출력할 수 있다.

제어부(190)에서 이루어지고 연주된 노래 정보의 공유와 관련된 구체적인 제어 흐름은 도 5 및 도 6을 통해 좀 더 살펴보도록 한다.

도 5는 연주될 영상과 오디오를 공유하기 위한 예시적인 제어 흐름을 도시한 도면이다.

도 5의 제어 흐름은 노래 반주기(100)에서 녹화(녹음)된 오디오 및 비디오를 서버(200)에 업로딩하기 위한 제어 과정을 나타낸다.

먼저, 노래 반주기(100)의 사용자는 서버(200)에 로그인(S101)한다.

예를 들어, 사용자는 리모컨(700) 등을 이용하여 사용자 ID와 패스워드를 입력하고 제어부(190)는 입력부(110)를 통해 수신된 사용자 ID와 패스워드를 포함하는 로그인 요청을 통신부(120)를 통해 서버(200)로 전송할 수 있다. 서버(200)의 제어 유닛(270)은 사용자 ID와 패스워드로 사용자를 인증하고 인증된 사용자를 통한 서버(200)로의 접속을 허가할 수 있다.

또는, 노래 반주기(100)는 노래 반주기(100)의 케이스나 디스플레이(300)에 이미지 코드(QR 코드 등)를 표시하고 사용자의 휴대형 단말(예를 들어, 스마트폰이)이 이미지 코드의 노래 반주기(100) 식별자를 추출하고 휴대형 단말을 통해 서버(200)에 접속하고 로그인 요청을 전송할 수 있다. 서버(200)는 휴대형 단말로부터의 사용자 ID와 패스워드를 이용하여 사용자를 인증하고 식별된 노래 반주기(100)에 사용자를 매칭시킬 수 있다. 노래 반주기(100) 식별자는 맥 주소, IP 주소, 시리얼 번호 등 서버(200)에서 해당 노래 반주기(100)를 식별할 수 있는 숫자, 문자 등의 조합으로 구성된다.

사용자의 로그인은 리모컨(700)이나 입력 버튼에 구비된 지문 인식기를 이용하여 이루질 수도 있다.

사용자는 리모컨(700)이나 프런트 패널의 입력 버튼을 이용하여 곡을 선곡(S103)한다. 예를 들어, 제어부(190)는 입력부(110)를 통해 곡 번호를 수신한다.

곡이 선곡됨에 따라, 노래 반주기(100)(의 제어부(190))는 선곡된 곡에 대응하는 오디오 신호를 오디오 출력부(170)로 출력하고 선곡된 곡에 대응하는 비디오 신호를 비디오 출력부(180)로 출력(S105)한다.

예를 들어, 제어부(190)는 저장부(160)에서 선곡된 곡 번호에 대응하는 미디 파일과 가사 파일을 검색하고 검색된 미디 파일의 미디 채널에 대응하는 미디 데이터(오디오 데이터)로 생성하여 오디오 출력부(170)로 출력한다. 이에 따라 오디오 출력부(170)는 미디 신호를 스피커(600)로 출력한다. 또한, 제어부(190)는 선곡된 곡 번호에 대응하는 가사 파일을 저장부(160)에서 검색하고 검색된 가사 파일을 배경 영상에 합성하여 합성된 비디오 데이터를 비디오 출력부(180)로 출력한다.

이에 따라, 사용자는 출력되는 오디오 신호에 맞춰 노래를 부를 수 있고 노래하는 모습을 기록한 비디오 데이터와 음성을 기록한 오디오 데이터를 노래 반주기(100)가 구성(S107)한다.

구체적으로, 제어부(190)는 음향신호 수신부(130)의 음향 신호(미디 신호와 음성 신호를 포함하는 음향 신호)로부터 두 개의 오디오 데이터를 구성한다. 구성되는 제1 오디오 데이터는 오디오 출력부(170)를 통해 출력된 미디 신호와 사용자의 음성 신호를 포함하는 오디오 데이터이다. 구성되는 제2 오디오 데이터는 음향신호 수신부(130)로부터의 음향 신호에서 미디 신호를 제거하고 음성 신호를 포함하고 있는 오디오 데이터이다. 이와 같이, 제2 오디오 데이터는 미디 신호를 제거하고 이용자의 음성 신호를 적어도 녹음한 오디오 데이터이다.

제어부(190)는 음향 신호에서 미디 신호의 제거를 주파수 도메인 상에서 수행할 수 있다. 예를 들어, 제어부(190)는 미디 파일에 대응하여 미리 저장되어 있는 주파수 도메인 상의 일련의 윈도우의 주파수 데이터와 수신된 음향 신호에 대해 변환된 일련의 윈도우의 주파수 데이터를 각각 비교하고 미디 신호의 주파수 데이터를 음향 신호의 주파수 데이터를 차감하거나 제거하고 이후 타임 도메인상의 데이터로 변환하여 미디 신호가 제거된 오디오 데이터를 구성할 수 있다. 설계 예에 따라, 제2 오디오 데이터는 타임 도메인상의 데이터 변환 없이 주파수 도메인상의 주파수 데이터로 구성될 수도 있다.

이후, 제1 오디오 데이터는 음성과 미디과 혼합되어 오디오 출력부(170)를 통해 출력되고 제2 오디오 데이터는 음성만이 오디오 출력부(170)를 통해 출력될 수 있다. 이에 따라, 제2 오디오 데이터는 다른 사람의 음성이나 노래 반주기(100)의 미디 신호와 혼합되어 오디오 출력부(170)로 출력될 수 있어 가상의 이용자와의 듀엣 노래를 부를 수 있도록 한다.

제어부(190)는 가사 데이터 동기화 정보를 더 구성한다. 가사 데이터 동기화 정보는 제2 오디오 데이터를 가사에 매칭시키 위한 정보로서 예를 들어 노래의 각 마디(또는 복수 마디(2마디, 4마디, 8마디 등)별)의 가사 시작 시점에 대응하는 제2 오디오 데이터의(에서의) 포인터와 각 마디, 복수의 마디 또는 전체 녹음된 오디오 데이터에서의 템포 값을 가질 수 있다. 가사 데이터 동기화 정보는 노래의 각 마디 또는 복수 마디의 가사 시작 시점의 포인터를 더 가질 수 있고 가사 시작 시점 포인터는 적어도 가사 파일에서 특정 가사(가사 시작 시점의 가사)를 포인팅할 수 있다.

제어부(190)는 사용자의 노래 녹음(녹화)시에 템포 변환 입력을 수신할 수 있고 템포 변환 입력에 따라 변환되는 템포값을 마디의 시작 시점에 매칭시켜 가사 데이터 동기화 정보에 저장할 수 있다. 가사 데이터 동기화 정보는 제2 오디오 데이터에 내장되거나 별도로 구성될 수 있다.

또한, 제어부(190)는 카메라신호 수신부(140)로부터 영상 신호를 수신하고 수신된 영상 신호에 대응하는 비디오 데이터를 구성한다. 제어부(190)는 오디오 데이터 및/또는 비디오 데이터를 서버(200)와 약속된 압축/비압축 포맷에 따라 포맷팅(인코딩)할 수 있다.

노래 반주기(100)는 구성된 오디오 데이터 및 비디오 데이터를 포함하는 노래연주 정보를 구성하고 이를 서버(200)로 전송(S109)한다.

구체적으로 제어부(190)는 제1 오디오 데이터, 제2 오디오 데이터, 비디오 데이터, 가사 데이터 동기화 정보 및 곡 정보를 포함하는 노래연주 정보를 구성한다. 곡 정보는 선곡된 곡의 곡 번호, 곡제목, 가수명, 작곡가명 등을 포함할 수 있다. 곡 정보의 곡 번호는 서버(200)에 연결된 노래 반주기(100)에서 선곡 가능한 곡 번호를 나타낸다.

제어부(190)는 구성된 노래연주 정보를 포함하는 업로딩 요청을 통신부(120)를 통해 서버(200)로 전송하고 서버(200)는 노래연주 DB에 노래연주 아이템을 신규 생성하고 생성된 노래연주 아이템에 로그인한 사용자 식별자, 제1 오디오 데이터, 제2 오디오 데이터, 비디오 데이터, 가사 데이터 동기화 정보 및 곡 정보 등을 저장하고 업로딩 시기를 기록한다.

저장된 노래연주 정보는 이후 다른 노래 반주기(100) 등에 의해 검색되고 재생될 수 있다.

도 6은 연주된 영상과 오디오를 공유하기 위한 예시적인 제어 흐름을 도시한 도면이다.

도 6의 제어 흐름은 이미 공유되도록 서버(200)에 저장되어 있는 오디오 및 비디오 정보를 노래 반주기(100)에서 받아 노래 반주기(100)에서 재생하기 위한 제어 과정을 나타낸다. 도 6의 제어 흐름은 도 5의 제어 흐름 이후에 수행되거나 이전에 수행될 수 있고 특정 과정(예를 들어, 중복되는 로그인 과정)은 생략될 수 있다.

먼저, 노래 반주기(100)는 서버(200)에 접속하고 사용자는 서버(200)에 로그인(S201)한다.

예를 들어, 노래 반주기(100)는 전원 온 또는 부팅시 미리 서버(200)에 접속하고 사용자는 리모컨(700) 등을 이용하여 사용자 ID와 패스워드를 입력하고 제어부(190)는 입력부(110)를 통해 수신된 사용자 ID와 패스워드를 포함하는 로그인 요청을 통신부(120)를 통해 서버(200)로 전송할 수 있다. 서버(200)의 제어 유닛(270)은 사용자 ID와 패스워드로 사용자를 인증하고 서버(200)로의 접속을 허가할 수 있다.

또는, 먼저 서버(200)에 접속한 노래 반주기(100)는 노래 반주기(100)의 케이스나 디스플레이(300)에 이미지 코드(QR 코드 등)를 표시하고 사용자의 휴대형 단말(예를 들어, 스마트폰이)이 이미지 코드의 노래 반주기(100) 식별자를 추출하고 휴대형 단말을 통해 서버(200)에 접속하고 로그인 요청을 전송할 수 있다. 서버(200)는 휴대형 단말로부터의 사용자 ID와 패스워드를 이용하여 사용자를 인증하고 식별된 노래 반주기(100)에 사용자를 매칭시킬 수 있다. 노래 반주기(100) 식별자는 맥 주소, IP 주소, 시리얼 번호 등 서버(200)에서 해당 노래 반주기(100)를 식별할 수 있는 숫자, 문자 등의 조합으로 구성된다.

사용자의 로그인은 리모컨(700)이나 버튼에 구비된 지문 인식기를 이용하여 이루질 수도 있다. 또한, 설계 예에 따라, 사용자 로그인 과정은 생략될 수 있다.

이후, 사용자는 입력부(110)를 통해 서버(200)에 저장되어 있는 각종 노래연주 정보를 검색할 수 있다. 노래 반주기(100)(의 제어부(190))는 서버(200)로부터 기본(default) 목록을 수신하고 이 기본 목록을 먼저 디스플레이(300)에 표시할 수도 있다.

예를 들어, 노래 반주기(100)에서 서버(200)의 곡 검색을 수행하기 위해, 제어부(190)는 입력부(110)(예를 들어, 리모컨(700) 또는 프런트 패널의 입력 버튼)를 통해 곡 번호 입력을 수신(S203)한다. 이 곡 번호는 노래 반주기(100)에서 재생 가능한 곡 번호일 수 있다.

노래 반주기(100)는 입력된 곡 번호를 포함하는 검색 요청을 서버(200)로 전송(S205)한다. 예를 들어, 제어부(190)는 사용자에 의해 입력된 곡 번호를 포함하는 검색 요청을 통신부(120)를 통해 전송할 수 있다.

서버(200)는 검색 요청의 곡 번호를 가지는 노래연주 아이템을 노래연주 DB에서 검색하고 검색된 하나 이상의 노래연주 아이템을 나타내는 검색 목록을 구성하여 노래 반주기(100)로 전송한다. 검색 목록의 각 아이템은 곡정보, 사용자 식별자, 업로딩 시기 및/또는 랭킹 등을 포함할 수 있다.

노래 반주기(100)는 검색 요청된 곡 번호에 대응하는 검색 목록을 수신하고 이를 표시(S207)한다. 구체적으로, 제어부(190)는 통신부(120)를 통해 수신된 검색 목록을 랭킹순, 업로딩 시기순 또는 사용자 식별자에 따라 순서화시켜 순서화된 검색 목록의 비디오 신호를 비디오 출력부(180)를 통해 디스플레이(300)로 출력할 수 있다.

노래 반주기(100)는 표시된 검색 목록에서 선택 입력을 수신하고 선택 입력에 대응하는 아이템의 선택 요청을 서버(200)로 전송(S209)한다. 예를 들어, 제어부(190)는 리모컨(700)이나 입력 버튼의 상하 이동 입력에 따라 검색 목록의 현재 하일라이트 아이템을 상하로 이동시키고 리모컨(700)이나 입력 버튼의 선택 입력의 수신에 현재 선택된 아이템을 나타내는 아이템 식별자를 포함하는 선택 요청을 서버(200)로 통신부(120)를 통해 전송할 수 있다. 아이템 식별자는 수신된 검색 목록에 포함될 수 있다.

서버(200)는 선택 요청의 아이템 식별자에 대응하는 노래연주 아이템을 특정하고 특정된 노래연주 아이템의 노래연주 정보를 노래 반주기(100)로 전송한다. 예를 들어, 서버(200)는 특정된 노래연주 아이템의 제1 오디오 데이터, 제2 오디오 데이터, 가사 데이터, 가사 데이터 동기화 정보 등을 선택 요청한 노래 반주기(100)로 전송한다.

S203내지 S209의 과정은 곡 번호 검색을 통한 예를 나타낸 것으로 곡 검색은 곡 번호 뿐 아니라 제목, 가수명, 작곡가명 등을 통해 이루어질 수도 있다. 예를 들어, 노래 반주기(100)는 제목, 가수명 및/또는 작곡가명을 포함하는 검색 요청을 전송하고 서버(200)는 제목, 가수명 및/또는 작곡가명에 대응하는 검색 목록을 구성하여 노래 반주기(100)로 전송하고 노래 반주기(100)에서 특정 목록을 선택할 수 있다.

노래 반주기(100)(제어부(190)는 제1 오디오 데이터, 제2 오디오 데이터, 가사 데이터, 가사 데이터 동기화 정보, 곡정보 등을 포함하는 정보를 통신부(120)를 통해 수신(S211)하고 이를 저장부(160)에 (임시) 저장한다.

이후, 노래 반주기(100)(제어부(190))는 사용자의 설정 입력에 따라 오디오 데이터와 비디오 데이터를 오디오 출력부(170)와 비디오 출력부(180)를 통해 출력할 수 있다.

예를 들어, 노래 반주기(100)에서 다른 사용자의 노래 부른 모습을 보고 싶은 사용자는 입력부(110)를 통해 음악 감상 모드(또는 제1 모드)로 설정한다. 제어부(190)는 음악 감상 모드의 설정에 따라, 수신된 제1 오디오 데이터를 오디오 출력부(170)로 출력하고 수신된 비디오 데이터를 비디오 출력부(180)로 출력하여 사용자는 다른 사용자의 노래 부른 모습과 그 음원을 들을 수 있다. 제1 모드는 다른 사용자의 음원과 영상을 보기 위해 설정되는 모드로서 미리 설정되거나 오디오 데이터 및 비디오 데이터의 수신에 후속하여 설정되는 모드일 수 있다.

또는, 노래 반주기(100)에서 다른 사용자와 같이 노래를 부르고자 하는 사용자는 입력부(110)를 통해 듀엣 모드(또는 제2 모드)로 설정한다. 제2 모드는 다른 사용자의 음원을 이용하여 같이 노래를 부르기 위해서 설정되는 모드로서 미리 설정되거나 오디오 데이터 및 비디오 데이터의 수신에 후속하여 설정되는 모드일 수 있다.

제2 모드로 설정됨에 따라, 노래 반주기(100)는 S213 내지 S219 과정을 반복 수행한다.

구체적으로 살펴보면, 제어부(190)는 선택된 곡 번호(이 곡 번호는 입력된 곡 번호(S203 참조)이거나 검색에 따라 곡정보에 저장되어 있는 곡 번호임.)에 대응하고 저장부(160)에 저장된 미디 파일과 가사 파일을 검색 및 추출하고 미디 파일, 가사 파일 및 수신된 제2 오디오 데이터를 이용하여 디스플레이(300)에 출력될 복수 마디(예를 들어, 한 번에 디스플레이(300)에 표시될 2마디, 4마디 또는 8마디)의 오디오 데이터 및 비디오 데이터를 생성(S213)한다.

제어부(190)는 제2 오디오 데이터에 대응하는 가사 데이터 동기화 정보를 이용하여 미디 파일의 미디 데이터와 제2 오디오 데이터를 합성하여 복수 마디의 오디오 데이터를 생성할 수 있다. 예를 들어, 제어부(190)는 구성될 복수 마디의 시작 시점에 대응하는 가사 시작 시점 포인터를 검색하고 검색된 가사 시작 시점 포인터에 대응하는 제2 오디오 데이터 포인터를 이용하여 복수 마디의 시작 시점에 대응하는 제2 오디오 데이터를 특정할 수 있다.

제어부(190)는 특정된 제2 오디오 데이터와 복수 마디에 대응하는 미디 파일의 미디 데이터를 합성하여 오디오 데이터를 생성할 수 있다. 이 과정에서 제어부(190)는 설정된 템포에 따라 특정된 제2 오디오 데이터를 변환시킬 수 있다. 예를 들어, 제어부(190)는 노래 연주를 위해 노래 반주기(100)에 설정되어 있는 템포값과 가사 데이터 동기화 정보의 특정된 제2 오디오 데이터에 대응하는 마디의 템포값을 비교하여 템포값의 차이에 따라 제2 오디오 데이터를 변환시킬 수 있다. 예를 들어, 제어부(190)는 주파수 도메인상의(으로 변환된) 특정된 제2 오디오 데이터를 대상으로 템포 차이에 따른 제2 오디오 데이터로 변경할 수 있다.

제어부(190)는 가사 파일로부터 복수 마디에 대응하는 가사 데이터를 추출하고 수신된 비디오 데이터에 추출된 가사 데이터를 합성하여 비디오 데이터를 생성한다.

이후, 노래 반주기(100)는 생성된 오디오 데이터와 비디오 데이터를 오디오 신호와 비디오 신호로 출력(S215)한다.

제어부(190)는 진행되는 연주 시각에 따라 생성된 오디오 데이터에 대응하는 오디오 신호를 오디오 출력부(170)를 통해 스피커(600)로 출력하고 생성된 비디오 데이터에 대응하는 비디오 신호를 비디오 출력부(180)를 통해 디스플레이(300)로 출력한다.

이러한 과정을 통해서, 노래 반주기(100)의 사용자는 노래 반주기(100)에서 제공하는 음원을 활용하여 임의 사용자와 같이 노래를 부를 수 있도록 한다. 노래 반주기(100)는 공유된 사용자의 목소리를 재생중인 미디 신호에 적어도 동기화시켜 자동화된 듀엣 노래 부르기를 가능토록 한다.

한편, 노래 반주기(100)는 템포 변환 입력을 수신(S217)할 수 있다.

템포 변환 입력을 수신하지 못한 경우, 노래 반주기(100)는 기 설정된 템포에 따라 다음 가사(다음 복수 마디)에 대한 비디오 데이터와 오디오 데이터를 생성(S213)하여 연주 시각에 따라 오디오 신호 및 비디오 신호를 출력(S215)한다.

입력부(110)를 통해 템포 변환 입력을 수신한 경우에 노래 반주기(100)는 템포 설정을 변경(S219)한다. 예를 들어, 제어부(190)는 입력부(110)를 통해 템포 레벨 입력을 수신하고 템포 레벨에 대응하는 템포값으로 현재의 템포를 설정 변경한다.

이후 반복에서, 노래 반주기(100)(제어부(190))는 후속하는 마디나 후속하는 복수의 마디에 대응하는 2 오디오 데이터의 템포 값과 변경 설정된 템포 값을 비교하여 제2 오디오 데이터에 대해 템포 변환을 수행하고 가사 데이터 동기화 정보에 따라 템포 변환된 제2 오디오 데이터를 역시 템포 변환된 미디 데이터에 합성하여 오디오 데이터를 생성(S213 참조)하고 오디오 신호를 출력(S215)할 수 있다.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니다.

100 : 노래 반주기
110 : 입력부 120 : 통신부
130 : 음향신호 수신부 140 : 카메라신호 수신부
150 : 주변기기 인터페이스부 160 : 저장부
170 : 오디오 출력부 180 : 비디오 출력부
190 : 제어부
200 : 서버
210 : 통신 유닛 230 : 저장 유닛
250 : 연결 유닛 270 : 제어 유닛
300 : 디스플레이
400 : 마이크
500 : 카메라
600 : 스피커
700 : 리모컨

Claims (11)

1. 노래 반주기로서,
   서버와 데이터를 송수신하는 통신부;
   곡 번호에 대응하는 가사 파일 및 미디 파일을 저장하는 저장부;
   사용자 입력을 수신하는 입력부;
   미디 신호와 음성 신호를 포함하는 음향 신호를 연결된 마이크로부터 수신하는 음향신호 수신부;
   상기 입력부를 통해 선곡된 곡 번호에 대응하는 상기 미디 파일로부터 미디 데이터를 생성하고 상기 미디 데이터를 포함하는 오디오 데이터를 출력하고 상기 음향신호 수신부의 음향 신호로부터 음성 신호와 미디 신호를 포함하는 제1 오디오 데이터 및 상기 음향신호 수신부의 음향신호에서 상기 미디 신호가 제거된 제2 오디오 데이터를 구성하고 상기 구성된 상기 제1 오디오 데이터, 상기 제2 오디오 데이터 및 상기 선곡된 곡 번호를 포함하는 연주 정보를 상기 통신부를 통해 상기 서버로 전송하는 제어부; 및
   상기 제어부로부터의 상기 미디 데이터를 포함하는 상기 출력된 오디오 데이터를 수신하고 수신된 오디오 데이터를 오디오 신호로 변환하여 변환된 오디오 신호를 스피커로 출력하는 오디오 출력부;를 포함하고,
   상기 제어부는 상기 음향신호 수신부의 음향 신호를 주파수 도메인상의 주파수 데이터로 변환하고 변환된 주파수 데이터에서 상기 선곡된 곡 번호의 상기 미디 데이터의 상기 오디오 출력부로 출력에 따른 미디 신호의 주파수 데이터를 제거하거나 차감하여 상기 제2 오디오 데이터를 구성하며,
   상기 연주 정보는 상기 노래 반주기를 이용하여 로그인한 사용자의 사용자 ID에 매칭되어 상기 서버에 저장되고 다른 노래 반주기를 통해 검색 가능한,
   노래 반주기.
2. 제1항에 있어서,
   상기 제어부는, 상기 연주 정보의 상기 서버로의 전송 이후에, 상기 입력부를 통해 수신된 곡 번호를 포함하는 검색 요청을 상기 통신부를 통해 상기 서버로 전송하고 상기 연주 정보의 상기 서버로의 전송에 따라 생성되는 노래연주 아이템들 중 상기 검색 요청의 상기 곡 번호를 가지는 복수의 노래연주 아이템을 나타내는 검색 목록을 상기 서버로부터 상기 통신부를 통해 수신하고 랭킹순으로 순서화된 상기 검색 목록을 나타내는 비디오 데이터를 출력하며, 출력된 검색 목록에서 선택 입력을 상기 입력부를 통해 수신하고 선택 입력에 대응하는 선택 요청을 상기 서버로 전송하고 선택 요청에 따라 선택되는 연주 정보의 제2 오디오 데이터 및 비디오 데이터를 상기 통신부를 통해 수신하고, 상기 서버로부터 수신된 제2 오디오 데이터와 상기 곡 번호에 대응하고 저장부에 저장된 미디 파일의 미디 데이터를 합성하여 합성된 오디오 데이터를 상기 오디오 출력부로 출력하고 상기 서버로부터 수신된 비디오 데이터에 상기 곡 번호에 대응하는 가사 파일의 가사 데이터를 합성하여 합성된 비디오 데이터를 출력하고,
   상기 노래 반주기는, 상기 제어부로부터의 상기 랭킹순으로 순서화된 상기 검색 목록을 나타내는 비디오 데이터와 상기 가사 데이터가 합성된 비디오 데이터를 수신하고 수신된 비디오 데이터를 변환하여 변환된 비디오 신호를 디스플레이로 출력하는 비디오 출력부;를 더 포함하는,
   노래 반주기.
3. 제1항에 있어서,
   상기 제어부는 상기 제2 오디오 데이터의 구성과 함께 상기 노래 반주기에서 연주되는 선곡된 곡의 가사에 상기 제2 오디오 데이터를 매칭시키기 위한 가사 데이터 동기화 정보를 더 구성하고 상기 가사 데이터 동기화 정보를 더 포함하는 상기 연주 정보를 상기 통신부를 통해 상기 서버로 전송하고,
   상기 가사 데이터 동기화 정보는 상기 선곡된 곡의 하나 이상의 가사 마디의 가사 시작 시점에 대응하는 제2 오디오 데이터의 포인터, 선곡된 곡의 가사 파일에서 상기 하나 이상의 가사 마디의 가사를 포인팅하는 가사 시작 시점 포인터 및 템포 값을 포함하고,
   상기 제어부는 상기 선곡된 곡의 연주에 따라 상기 가사 데이터 동기화 정보의 구성시에 상기 입력부를 통해 템포 변환 입력을 수신하고 템포 변환 입력에 따라 변경되는 템포값을 선곡된 곡의 가사 마디에 매칭시켜 상기 가사 데이터 동기화 정보에 저장하는,
   노래 반주기.
4. 제1항에 있어서,
   상기 입력부를 통한 곡 선곡 이전에, 상기 제어부는 상기 입력부를 통해 상기 사용자 ID와 패스워드를 수신하고 상기 사용자 ID와 패스워드를 포함하는 로그인 요청을 상기 통신부를 통해 상기 서버로 전송하며,
   상기 서버로 전송되는 연주 정보는 상기 로그인 요청에 따라 인증된 사용자에 매칭되어 상기 서버에 저장되는,
   노래 반주기.
5. 제1항에 있어서,
   상기 입력부를 통한 곡 선곡 이전에, 상기 노래 반주기는 케이스 또는 디스플레이에 상기 노래 반주기의 식별자를 포함하는 이미지 코드를 표시하고,
   상기 이미지 코드의 상기 식별자는 상기 노래 반주기를 이용하는 사용자의 휴대형 단말에 의해 추출되어 상기 휴대형 단말에 의한 로그인 요청에 따라 상기 서버로 하여금 인증된 사용자에 상기 식별자에 의해 식별되는 노래 반주기를 매칭시키는,
   노래 반주기.
6. 연주 노래 공유 방법으로서,
   노래 반주기가 리모컨을 통해 곡 번호 입력을 수신하는 단계;
   상기 노래 반주기가 상기 곡 번호에 대응하는 미디 파일로부터 미디 데이터를 생성하고 미디 데이터에 대응하는 미디 신호를 스피커로 출력하는 단계;
   상기 노래 반주기가 연결된 마이크로부터 상기 미디 신호와 사용자의 음성 신호를 포함하는 음향 신호를 수신하고 상기 미디 신호와 상기 음성 신호를 포함하는 제1 오디오 데이터 및 상기 음향 신호에서 상기 미디 신호가 제거된 제2 오디오 데이터를 구성하는 단계; 및
   상기 노래 반주기가 상기 제1 오디오 데이터, 상기 제2 오디오 데이터 및 상기 곡 번호를 포함하는 연주 정보를 서버로 전송하는 단계;를 포함하고,
   상기 구성하는 단계는 수신된 상기 음향 신호를 주파수 도메인상의 주파수 데이터로 변환하고 변환된 주파수 데이터에서 상기 곡 번호에 대응하는 미디 파일로부터 생성된 미디 데이터에 대응하는 미디 신호의 주파수 데이터를 제거하거나 차감하여 상기 제2 오디오 데이터를 구성하고,
   상기 연주 정보는 상기 노래 반주기를 이용하여 로그인한 사용자의 사용자 ID에 매칭되어 상기 서버에 저장되고 다른 노래 반주기를 통해 검색 가능한,
   연주 노래 공유 방법.
7. 제6항에 있어서,
   상기 연주 정보를 서버로 전송하는 단계 이후에,
   상기 노래 반주기가 저장되어 있는 미디 파일을 이용하여 재생 가능한 곡 번호 입력을 수신하는 단계;
   상기 노래 반주기가 상기 곡 번호를 포함하는 검색 요청을 상기 서버로 전송하는 단계;
   상기 서버가 광대역 네트워크를 통해 연결되는 복수의 노래 반주기로부터의 연주 정보들의 수신에 따라 미리 생성되어 저장된 노래연주 아이템들 중 상기 검색 요청의 상기 곡 번호를 가지는 복수의 노래연주 아이템을 검색하고 검색된 상기 복수의 노래연주 아이템을 나타내는 검색 목록을 상기 노래 반주기로 전송하는 단계;
   상기 노래 반주기가 상기 서버로부터 수신된 검색 목록을 상기 검색 목록의 각 노래연주 아이템의 랭킹순에 따라 순서화된 검색 목록을 나타내는 비디오 신호를 디스플레이로 출력하는 단계;
   상기 노래 반주기가 출력된 상기 검색 목록 중 하나의 노래연주 아이템에 대한 선택 입력을 수신하고 선택 입력에 대응하는 선택 요청을 상기 서버로 전송하는 단계; 및
   상기 노래 반주기가 선택 요청에 따라 선택된 노래연주 아이템의 제2 오디오 데이터 및 비디오 데이터를 상기 서버로부터 수신하고 상기 곡 번호에 대응하고 상기 노래 반주기에 저장되어 있는 미디 파일의 미디 데이터와 상기 제2 오디오 데이터를 합성하여 합성된 오디오 신호를 스피커로 출력하고 수신된 상기 비디오 데이터에 상기 곡 번호에 대응하여 상기 노래 반주기에 저장된 가사 파일의 가사 데이터를 합성하여 합성된 비디오 신호를 디스플레이로 출력하는 단계;를 더 포함하는,
   연주 노래 공유 방법.
8. 제6항에 있어서,
   상기 구성하는 단계는 상기 제2 오디오 데이터의 구성과 함께 상기 노래 반주기에서 연주되는 상기 곡 번호에 대응하는 선곡된 곡의 가사에 상기 제2 오디오 데이터를 매칭시키기 위한 가사 데이터 동기화 정보로서, 상기 선곡된 곡의 상기 제2 오디오 데이터 구성 중에 입력 버튼 또는 리모컨을 통한 템포 변환 입력에 따라 변경되는 템포값을 선곡된 곡의 가사 마디에 매칭한, 가사 데이터 동기화 정보를 더 구성하고,
   상기 가사 데이터 동기화 정보는 상기 선곡된 곡의 하나 이상의 가사 마디의 가사 시작 시점에 대응하는 제2 오디오 데이터의 포인터, 선곡된 곡의 가사 파일에서 상기 하나 이상의 가사 마디의 가사를 포인팅하는 가사 시작 시점 포인터 및 변경된 상기 템포 값을 포함하는,
   연주 노래 공유 방법.
9. 제6항에 있어서,
   상기 곡 번호 입력을 수신하는 단계 이전에, 상기 노래 반주기는 리모컨 또는 입력 버튼을 통해 사용자 ID와 패스워드를 수신하고 상기 사용자 ID와 패스워드를 포함하는 로그인 요청을 상기 서버로 전송하는 단계;를 더 포함하고,
   상기 서버로 전송되는 연주 정보는 상기 로그인 요청에 따라 인증된 사용자에 매칭되어 상기 서버에 저장되는,
   연주 노래 공유 방법.
10. 제6항에 있어서,
    상기 곡 번호 입력을 수신하는 단계 이전에,
    상기 노래 반주기의 케이스 또는 디스플레이에 상기 노래 반주기가 식별자를 포함하는 이미지 코드를 표시하는 단계; 및
    상기 서버가 사용자의 휴대형 단말로부터 로그인 요청을 수신하고 상기 휴대형 단말로부터의 사용자 ID와 패스워드를 이용하여 사용자를 인증하고 상기 식별자를 이용하여 식별되는 상기 노래 반주기에 인증된 사용자를 매칭시키는 단계;를 더 포함하는,
    연주 노래 공유 방법.
11. 제1항의 하나 이상의 노래 반주기; 및
    광대역 네트워크를 통해 상기 노래 반주기와 연결되는 서버;를 포함하고,
    상기 서버는 상기 광대역 네트워크를 통해 상기 노래 반주기의 통신부와 데이터를 송수신하는,
    노래 반주 시스템.

Images