KR20070016750A - 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스음악 정보 검색 시스템 및 방법 - Google Patents
고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스음악 정보 검색 시스템 및 방법 Download PDFInfo
- Publication number
- KR20070016750A KR20070016750A KR1020050071701A KR20050071701A KR20070016750A KR 20070016750 A KR20070016750 A KR 20070016750A KR 1020050071701 A KR1020050071701 A KR 1020050071701A KR 20050071701 A KR20050071701 A KR 20050071701A KR 20070016750 A KR20070016750 A KR 20070016750A
- Authority
- KR
- South Korea
- Prior art keywords
- customer
- music
- query
- terminal
- search
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 36
- 238000004458 analytical method Methods 0.000 claims abstract description 8
- 239000000203 mixture Substances 0.000 claims abstract description 6
- 238000000926 separation method Methods 0.000 claims description 7
- 238000004891 communication Methods 0.000 claims description 2
- 238000010295 mobile communication Methods 0.000 claims description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 claims 1
- 208000006930 Pseudomyxoma Peritonei Diseases 0.000 claims 1
- 238000010835 comparative analysis Methods 0.000 claims 1
- 239000000284 extract Substances 0.000 claims 1
- 230000009268 pathologic speech processing Effects 0.000 claims 1
- 229920001690 polydopamine Polymers 0.000 claims 1
- 229920000306 polymethylpentene Polymers 0.000 claims 1
- 208000032207 progressive 1 supranuclear palsy Diseases 0.000 claims 1
- 230000002269 spontaneous effect Effects 0.000 claims 1
- 238000005516 engineering process Methods 0.000 description 3
- ZYXYTGQFPZEUFX-UHFFFAOYSA-N benzpyrimoxan Chemical compound O1C(OCCC1)C=1C(=NC=NC=1)OCC1=CC=C(C=C1)C(F)(F)F ZYXYTGQFPZEUFX-UHFFFAOYSA-N 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 229910016077 MP3P Inorganic materials 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/50—Business processes related to the communications industry
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- Marketing (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Human Computer Interaction (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
본 발명은 유무선 네트워크에 접속된 고객 단말기틀 통해 입력되는 고객의 질의(query)에 대해 질의 풀(query pool)을 운영하여, 질의 풀이 우선적으로 검색되며, 검색 결과로 제시된 복수의 후보 음악으로부터 고객에 의해 정답으로 확인된 음악에 대해 원래의 질의 입력 음악과 매칭 분석을 행한 후, 이를 피드백 적용함으로써, 추후 새로운 고객 질의에 대해 검색의 효율성을 높이고자 하는 것을 목적으로 한다. 고객이 입력한 질의 음악과 정답으로 확인된 음악 사이에 존재하는 오차를 분석하여 고객이 질의하는 특성을 파악하여 추후 동일 고객의 질의에 대해 고객의 특성을 고려한 검색이 가능하도록 하고 있다. 또한 위치기반서비스에 의해 제공되는 고객의 위치 정보에 따른 고객의 노출 환경을 음악 정보 검색에 고려함으로써 검색을 더 효율적으로 할 수 있다. 또한 단말기 자체만으로도 검색 엔진과 데이터베이스를 모두 내장하여 음악 검색을 할 수도 있고, 별도의 음악 전용 공간이나 장비 또는 시설이 없는 경우에, 고객의 단말기만으로도 작곡이나 작곡에 의한 연주, 청음 연습, 시창 연습 등이 가능한 방법을 제시하고 있다.
질의 풀(query pool), 가중치, 매칭, 허밍, 음성 인식, 선율, 음악 정보 검 색, 위치기반, 유비쿼터스, 작곡
Description
도 1 은 본 발명에 따른 음악 정보 검색 시스템의 구성도.
도 2 는 본 발명에 따른 음악 정보 검색 시스템 및 방법의 흐름도.
도 3 은 매칭 분석 및 가중치 조정 피드백의 흐름도
[도면의 주요 부분에 대한 부호의 설명]
100. 고객의 단말기
200. 음악 검색 서버(server)
300. 질의 풀(query pool)
400. 음악파일 데이터베이스
500. 고객 데이터베이스
600. 악기 데이터베이스
최근 인터넷이나 통신 기술의 발달과 더불어 디지털 음악 컨텐츠의 증가와 네트워크의 고속화 및 음악 컨텐츠 압축 기술의 발전으로 인해 음악 정보의 사용과 검색이 폭발적으로 확대됨에 따라, 음악 정보 검색의 효율성이 더욱 강조되고 있는 실정이다. 대부분의 디지털 음악 컨텐츠는 제목, 장르, 작사자, 작곡자, 가사 등에 의해 체계적으로 목록화 되어 있다. 그러나, 사용자의 입장에서는 이러한 목록의 내용을 구체적으로 알 수 없는 경우, 원하는 음악을 검색하기란 쉽지 않고, 만일 사용자가 실수로 잘못 목록의 내용을 입력할 경우에는 정확한 검색이 불가능한 문제가 발생한다. 바람직하게는 임의로 들려오는 음악이나 사용자의 허밍, 노래 등을 통한 검색은 사용자의 지식에 그다지 의존하지 않고, 단지 음악의 선율이나 음악의 일부만을 통해서 검색하는 것이기 때문에 그 필요성과 효과 측면에 비추어 매우 시급히 요구되는 기술이다. 일부 실용화 되어 있는 기술 가운데에는 가사를 단순히 음성으로 발음하여 인식하게 한다거나, CD로 저장된 음악을 들려주어 인식을 하는 경우가 있긴 하나, 모는 형태의 음악적 요소가 섞여 있는 경우에 대한 일반적인 해결 방안은 아직 제시되지 않고 있다.
본 고안은 상기의 문제점을 해결하기 위하여 새로운 음악 정보 검색 시스템과 방법을 제시하고자 한다. 고객의 단말기를 통하여 입력되는 질의(query)는 다양한 형태를 띠게 된다. 고객이 단순히 허밍하거나 가사가 혼합된 노래이거나 오케스트라 반주가 포함된 것일 수도 있다. 본 발명에서는 이러한 형태의 질의 입력(query input)을 음성(speech)과 선율(melody)로 분리하고, 선율은 다시 주 선 율(main melody)와 보조 선율(sub melody)로 분리하여 정보 검색에 사용한다. 또한 고객이 질의한 음악이 일단 검색되어 고객으로부터 확인되면, 질의 음악과 기존에 저장된 정답에 해당하는 음악과의 상호 유사성을 분석하여 그에 대한 수치를 가중치로 부여하여 질의 풀(query pool)에 피드백(feedback)시키는 방법을 제시한다. 또한 고객의 위치 정보를 활용하여 고객의 질의 환경을 검색에 활용함으로써 검색의 효율을 높이고자 한다. 본 발명에 있어서 음악 검색 순위는 질의 풀을 우선 검색하고, 그 이후에 필요시 전체 음악파일 데이터베이스를 검색하는 순으로 한다.
본 발명은 고객이 음악을 검색하는 경우, 대부분 본인이 찾고자 하는 곡에서 가장 특징적인 부분을 유사하게 반복해서 질의 입력한다는 점과 고객의 질의는 대체로 일정한 패턴이나 특성이 존재한다는 데에서 착안한 것으로, 고객의 질의를 매번 저장하는 풀(pool)을 구비하고, 검색 결과로 최종 제시된 단수 혹은 복수의 후보 결과에 대해 고객이 최종 선택 혹은 확정한 음악에 대해 고객이 최초 질의한 음악과 상호 매칭 분석하게 된다. 이로써, 현재 입력된 음악의 질의 특성을 반영하여 매칭 가중치를 변경하고, 이를 질의 풀에 피드백시켜 추후 검색시 이를 반영하는 방법을 제시하고 있다. 즉, 고객이 결과로 선택한 곡은 정답에 해당하므로, 현재의 고객 질의 입력은 정답에 가장 가까운 샘플이라 가정하여, 현재의 샘플과 정답 사이의 음악 특징 요소를 분석하여 이로부터, 고객 고유의 성향에 해당하는 음정, 음색, 박자 등의 제 음악 특성치를 고객별로 분석하고 매칭 분석으로 얻어진 결과로부터 매칭 가중치를 매 검색 시마다 갱신 반영함으로써 질의 풀에 대한 대중적 선 호도(preference)를 가장 최근의 것으로 유지하는 것이다.
이하 도면을 참조하여 더 상세히 설명하되, 도면은 예시를 위하여 사용될 뿐, 본 고안의 권리범위가 이러한 도면에 제한되지는 않는다.
도 1 은 본 발명에서 제시하는 음악 검색 시스템 및 방법에 대한 시스템 구성도이다.
고객의 단말기(100)를 통하여 다양한 형태의 음악이 질의(query)로 입력된다. 이 때 음악의 형태로는 인간의 육성, 음성, 악기 연주, 노래, 오케스트라 반주 등 모든 종류의 아날로그 음파(analog sound wave)가 된다. 고객의 단말기는 휴대폰 뿐 아니라, PDA, PSP, MP3P, PMP, 노트북, PC, DTV 등 유무선 인터넷망이나 이동통신망, 디지털방송망에 접속 가능한 모든 형태의 단말기를 의미한다. 고객의 단말기는 네트워크를 통해 음악 검색 서버(200)에 접속하고, 음악 검색 서버에는 질의 풀(300)과 음악파일 데이터베이스(400) 및 고객 데이터베이스(500) 및 악기 데이터베이스(600)가 연결되어 있다. 상기 악기 데이터베이스(600)에는 여러 가지 악기의 고유 주파수와 음색 관련한 정보가 분류 저장되어 있다. 또한 최근에는 단말기의 성능이 급격히 발전하여 단말기 자체에 가상머신(VM) 또는 애플릿(Applet) 또는 소프트웨어 프로그램의 형태로 검색 엔진을 탑재할 수 있고, 검색에 관련된 모든 데이터베이스 자료도 단말기 내에 탑재하여 굳이 네트워크를 통하지 않고도 단말기 독립서버(stand alone)의 형태로 하여 본 발명에서 제시된 음악 정보 검색 시 스템을 운영하는 것도 가능하다.
도 2 은 본 발명에서 제시하는 음악 검색 시스템 및 방법에 대한 흐름도이다.
먼저 고객의 단말기(100)를 통하여 음악 검색 서버(200)에 접속한 후, 고객의 위치 정보가 서버에 의해 확인된 후, 고객 단말기(100)를 통해 다양한 형태의 음악이 질의(query) 입력된다. 상기 다양한 형태의 음악이란, 음성, 허밍, 노래, 연주, 오케스트라 등의 종합적인 음악의 모든 형태를 말한다. 즉, 어떠한 음악이라도 질의로 입력될 수 있음을 의미한다. 입력된 질의는 아날로그 음파(analog sound wave)이므로 이를 디지털 신호 처리하게 된다. 먼저 신호 처리된 원음 디지털 데이터는 질의 풀(300)의 원음 데이터베이스(DB)에 저장된다. 질의 입력된 신호는 음성 인식 모듈에 입력되어 음성(speech)만 분리되어 신호 처리된 후 질의 풀의 음성 DB에 저장된다. 음성 인식 모듈을 거친 신호는 선율 분리 모듈에 입력되어 주 선율(main melody)와 보조 선율(sub melody)로 분리되어 각각 질의 풀의 주 선율 DB와 보조 선율 DB에 저장된다. 질의 풀에 저장된 각각의 데이터베이스는 음악별로 제목, 가사, 작사가, 작곡가, 장르 등의 음악 정보와 음색, 음정, 박자, 멜로디 등의 음악 특성치 정보들이 미디(MIDI) 포맷의 형태로 모두 저장되어 있다. 따라서 음성 정보나 주 멜로디 정보 또는 혼합된 원음 정보 중의 어느 한가지 또는 복수의 정보를 이용해서 원하는 곡을 검색해 낼 수 있다. 질의 풀(300)에는 항상 질의가 입력될 때 마다 그 질의가 축적되게 되고, 이 정보를 우선 검색하여 여기서 고객이 찾 고자 하는 곡이 검색되면 즉시 검색을 종료하고, 만일 이 질의 풀에서 검색되지 않을 경우에는 전체 음악파일 데이터베이스(400)를 추가적으로 검색한다. 예를 들면, 고객이 제목 “아리랑”인 노래를 가사 있는 허밍으로 첫 소절에 해당하는 “아 리 라 앙”을 부를 경우, 이것이 즉시 질의 풀에 저장되고, 이 질의 풀은 추후 검색시에 최우선 검색 대상 DB가 되며, 추후 새로운 고객이 다른 음색이나 박자로 또다시 제목 “아리랑”을 부를 경우에도, 아마도, 또 “아 리 라 앙”을 부를 것이다. 그 경우 두 번째 고객이 부른 입력도 마찬가지로 질의 풀에 저장되어 새로운 데이터베이스를 구성하게 된다. 이 경우에는 가중치 중에서 음색이나 박자와 관련된 가중치만 일부 조정된다. 만일 두 번째 고객이 “나~를 버~리~고~” 라고 질의 입력 한다고 하면, 이 입력이 제목 “아리랑” 노래의 또 하나의 질의 풀의 데이터가 되는 것이다. 이렇게 질의 풀을 운영하는 이유는, 고객이 입력하는 질의는 대체로 대중적으로 잘 알려진 몇 구절에 한해 제한되는 경향을 보이기 때문에 굳이 자주 질의 입력 되지 않는 “발~병~난다” 와 같은 소절을 검색 우선 순위에서 배제시킴으로써 검색속도를 월등히 향상시키는 효과가 있는 것이다. 또한 정답과 질의 사이에 존재하는 노래 오차(singing error)도 결국 데이터가 축적됨에 따라 가중치로서 모두 제어될 수 있게 되어 정확한 노래가 아니더라도 유사한 질의 입력에 대해 빠른 검색이 가능한 것이다. 그러나, 고객의 질의가 질의 풀에 존재하지 않는 새로운 입력인 경우에는 전체 음악파일DB(400)를 모두 검색해야 하는 부분은 불가피하다.
여기에서 쿼리 풀이나 여러가지 데이터베이스는 반드시 네트워크 상에 존재해야 하는 것은 아니고, 고객의 단말기 내에 모두 포함되어 고객의 단말기 자체 만 의 독립서버(stand alone) 형태로 운용하는 것도 물론 가능하다. 또한, 검색 서버에서 검색한 결과 리스트를 고객의 단말기상에 단문메시지(SMS) 또는 멀티미디어메시지(MMS)의 형태로 제시하여 고객이 상기 리스트 중에서 원하는 곡을 선택하여 서버에 회신 또는 재전송(call back)하는 방식으로 하는 것도 가능하다.
도 3 은 본 발명에 따른 매칭 분석 및 가중치 조정 피드백에 대한 흐름도이다.
고객이 질의 입력한 음악을 함수 F라 하고, 검색 완료하여 고객이 정답으로 확인한 음악을 함수 G라 한다. 함수 F와 G는 N개의 음악 특성치의 조합으로 구성되었으며 각 음악 특성치는 음색, 음정, 박자, 피치 등이 될 수 있다. 여기서는 각 음악을 이루는 음악 특성치가 어떠한 함수로 구성되는가는 중요치 않고, 반드시 그 관계가 수학적일 필요도 없으며, 다만 개별 음악 특성치가 모여서 하나의 완성된 음악을 이룬다는 상관관계의 개념에서 함수로 볼 수 있다. 대부분의 검색에 있어서, F와 G는 완전히 같을 수 없으며 어느 정도는 유사한 값을 가지게 된다. 예를 들어 고객이 노래의 한 소절을 불러 질의 입력하고, 검색 시스템이 그 입력을 기반으로 정답을 찾은 경우, 질의 입력과 정답 사이에 존재하는 매칭(matching)의 오차(error)는 고객이 일개 또는 다수의 후보 검색 리스트 중에서 정답 곡을 확인해 줌으로써 정확히 계산할 수 있다. 만일, 고객이 입력한 노래와 정답인 노래 사이에는 음정은 거의 일치하나 박자는 차이가 많다고 가정할 경우, 음정이라는 특성치가 박자라는 특성치보다는 더 높은 가중치를 갖고 검색에 반영되어야 함을 유추 가능하 다. 즉, 상기 고객은 음정은 비교적 정확하게 질의 입력하나 박자는 대체로 틀리게 입력한다고 보아지므로, 추후 동일 고객이 새로운 곡을 입력함에 있어서, 노래의 음정에 대한 일치성을 박자에 대한 일치성보다 더 큰 비중을 두고 검색하면 된다. 이러한 방식은 고객의 단말기로 입력되는 모든 형태의 질의 음악에 항상 적용되는 것은 아니나, 적어도 고객의 육성이나 허밍 등의 입력 형태에 대해서는 그 가중치 적용이 가능할 것이다. 결국 추후 새로운 질의 입력에 대해 음정에 대한 가중치를 더 높게 책정하여 동일 고객의 성향을 분석 반영함으로써 검색의 효율성을 높일 수 있게 된다. 또한 본 발명에 따르면, 고객이 질의 입력하는 환경이 음악 검색 서버에 의해 항상 파악될 수 있어서, 고객 환경에 따른 잡음의 특성 등 질의 입력과 관련된 제반 요소를 고객별로 분류 적용할 수 있는 것도 가능하다. 즉 과거에 질의 입력한 장소와 동일한 장소에서 반복해서 질의 입력하는 경우에는, 음악 정보 검색 시 고려되는 잡음 요소 중에서 환경적인 부분을 미리 고려하여 제거할 수 있게 되어, 검색의 속도를 훨씬 더 개선시키는 효과를 가져올 수 있다.
도 4 는 도 3 에서 설명한 함수 사이의 매칭 오차를 그림으로 예를 든 것이다.
그림에서는 고객이 질의 입력한 음악 중에서 음정, 박자, 음색, 감정, 발음이 음악 특성치로 환산한 것으로, 질의 음악 F 와 정답 음악 G 사이에는 각 특성 별로 오차가 존재한다. 본 예에서는 발음 부분이 차이가 크므로 본 고객에 대한 검색 시 발음에 대한 가중치는 상대적으로 낮게 적용하여 검색하는 원리를 적용할 수 있다.
지금까지 설명한 상기 발명은 기술적으로 응용 가능한 훨씬 방대한 범위까지 그 권리가 인정됨을 유추할 수 있는 바이다.
이상에서 설명한 바와 같이 본 발명은 고객이 보유한 단말기로 고객이 원하는 언제 어디서나 음악을 검색할 수 있는 유비쿼터스 음악 정보 검색 시스템 및 방법을 소개하고 있다. 본 발명에 의하면, 고객이 입력한 음악과 최종 검색 결과 음악 사이의 매칭 정도를 분석하여 고객의 음악 질의에 대한 취향 또는 특성이 파악되어 이를 기반으로 각 음악 특성치에 대한 가중치가 부여 또는 갱신되어 피드백됨으로써, 추후 새로운 고객의 질의에 대해서는 고객의 특성이 반영되어 최신의 것으로 유지 또는 갱신된 고객 질의 풀(query pool)을 우선 검색함으로써 검색의 효율성과 속도를 개선하게 된다. 또한 고객의 단말기 위치 정보가 검색 서버에 전송되어 고객의 질의 입력 환경을 추가적으로 고려함으로써 추가적인 질의 입력시의 신호 처리나 음악 검색에 있어서 검색이 훨씬 더 용이해 질 수 있게 된다. 이를 응용하면, 휴대단말기를 이용한 유비쿼터스 노래방이나 음악감상의 경우, 고객이 단말기를 통해 노래를 검색하는 경우 매우 유용할 것이다. 또한, 별도의 음악 전용 공간이나 장비 또는 시설이 없는 경우에, 고객의 단말기만으로도 작곡이나 작곡에 의한 연주, 청음 연습, 시창 연습 등이 가능해짐에 따라, 음악 창작 분야, 음악 학습 분야 등 에듀테인먼트(edutainment) 산업에서의 파급 효과가 더욱 클 것으로 기대되는 바이다.
Claims (16)
- 고객이 네트워크에 연결된 단말기를 통하여 음악 검색 서버에 접속하는 단계와;상기 서버가 고객의 위치 정보를 확인하는 단계와;상기 고객의 단말기를 통해 검색하고자 하는 음악이 질의 입력되는 단계와;상기 입력된 질의 음악이 신호 처리되는 단계와;상기 신호 처리되어 질의 풀의 원음 데이터베이스에 저장되는 단계와;상기 질의 입력이 음성 인식 모듈에 입력되는 단계와;상기 음성 인식 모듈에서 음성 데이터가 분리되어 질의 풀의 음성 데이터베이스에 입력되는 단계와;상기 음성 인식 모듈에서 선율 분리 모듈에 입력되는 단계와;상기 선율 분리 모듈에서 주 선율이 분리되어 질의 풀의 주 선율 데이터베이스에 입력되는 단계와;상기 선율 분리 모듈에서 질의 풀의 보조 선율 데이터베이스에 입력되는 단계와;상기 질의 풀을 검색한 후 검색이 완료되는 단계와;상기 질의 풀과 음악 파일 데이터베이스를 추가 검색하는 단계와;상기 검색 결과를 고객의 단말기에 출력하는 단계와;고객이 상기 검색 결과 중에서 정답을 최종 확인하고 검색을 완료하는 단계와;상기 고객이 정답으로 확인한 결과와 질의 입력간의 매칭을 분석하는 단계와;상기 매칭 분석에 따라 가중치를 갱신하여 질의 풀에 피드백 전달하는 단계;로 구성되는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,네트워크라 함은,유무선인터넷망 또는 이동통신망 또는 유무선통신망 또는 아날로그방송망 또는 디지털방송망으로 이루어지는 것을 포함하는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,질의 풀(query pool)이라 함은,고객의 단말기로 입력되는 질의(query)가 신호 처리되어 저장되는 데이터베이스 공간으로서;원음 (original query) DB, 음성(speech) DB, 주 선율(main melody) DB, 보조 선율(sub melody) DB 로 구성되어지며;상기 각 DB 의 파일 포맷은 SMAF(.mmf)나 미디(MIDI) 포맷 등 인 것을 더 포함하는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항과 제 3 항에 있어서,주 선율(main melody)라 함은,인간의 육성음과 기계 연주음이 혼합되어 질의 입력되는 아날로그 음파 형태의 음악에 있어서,그 음악의 대표적이고 근본이 되는 선율로서, 상기 선율 단독연주만으로도 확연히 타 음악과 구별이 될 수 있는 선율임을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,음성 인식 모듈(speech recognition module)라 함은,질의 입력된 음악에서 인간의 육성음을 인식하여 분리하는 기능을 담당하는 모듈로서;화자 독립(speaker-independent) 인식 또는 연속어 인식 또는 대화체 인식 또는 핵심어 인식 또는 자연(spontaneous) 음성 인식이 가능한 것임을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,매칭 분석(matching analysis)이라 함은,검색의 결과로 출력된 후보 음악 일개 또는 다수 중에서 고객이 특정 곡을 정답으로 확인한 경우,정답으로 확인한 곡과 최초 고객이 질의 입력한 곡 상호간에 유사한 정도, 즉 유사성(similarity)을 비교 분석하는 것으로서, 더 상세하게는 음색, 음정, 박자, 피치 등 음악의 특성치 개별 성분들에 대한 상호 유사성을 비교 분석하는 것임을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,가중치(weighting value)라 함은,상기 정답으로 확인한 음악 또는 최초 고객이 질의 입력한 음악과 음악 특성치 개별 성분 상호 간에는 함수 관계가 있어서, 음악과 음악 특성치 사이의 상호 관련성을 정량화하는 수치, 즉 가중치가 도입되어 가중치를 음악 검색에 활용하는 것임을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,고객의 단말기라 함은,휴대폰, PDA, PMP, PMC, PSP, MP3P, 노트북 등과 같은 무선 단말기와 인터넷 화상전화기, X-Box와 같은 게임기 그리고 Audio/Video 관련 전자가전 등과 같은 유선상의 단말기를 모두 포함하는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,서버가 고객의 정보를 확인하는 단계라 함은,고객의 단말기의 위치가 위치기반서비스(LBS)에 의하여 자동으로 서버에서 인식되는 방법 또는/그리고 고객이 단말기를 통해 본인의 위치와 관련된 정보를 직접 서버에 전송하는 방법을 통하여, 음악 검색을 위해 질의 입력(query input)하는 고객의 위치 정보에 의해 고객의 환경 변수를 음악 검색 서버가 고려하도록 하는 것을 추가적으로 더 포함하는 단계임을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,고객의 단말기는 음악 검색용 가상머신(VM) 또는 애플릿(Applet) 또는 소프트웨어 또는 프로그램이 설치되어 있고; 단말기 자체에 고객의 쿼리를 저장하기 위한 쿼리 풀(query pool) 일부 또는 전부를 내장 또는 외장의 형태로 구비할 수 있어서; 고객의 질의에 대해 고객의 단말기를 먼저 검색한 후에 그 검색 결과만을 상기 음악 검색 서버에 보내어 서버에서 음악파일 데이터베이스를 최종 검색하는 것을 더 포함하는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항에 있어서,검색 결과를 고객의 단말기에 출력하는 단계라 함은,상기 검색 결과 리스트를 고객의 단말기상에 단문메시지(SMS) 또는 멀티미디어메시지(MMS)의 형태로 제시하는 단계와; 고객이 상기 리스트 중에서 원하는 곡을 선택하여 서버에 회신 또는 재전송(call back)하는 단계를 추가적으로 더 포함하여 구성되는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 고객의 단말기가 네트워크에 연결되지 않은 상태에서,단말기 자체에 음악 검색용 가상머신(VM) 또는 애플릿(Applet) 또는 소프트웨어 또는 프로그램이 설치되어 있고;단말기 자체에 쿼리 풀 또는/그리고 음악 파일 데이터베이스 또는/그리고 고객 데이터베이스 등을 모두 구비할 수 있어서,고객이 단말기를 통하여 검색하고자 하는 음악이 질의 입력되는 단계와;상기 입력된 질의 음악이 신호 처리되는 단계와;상기 신호 처리되어 질의 풀의 원음 데이터베이스에 저장되는 단계와;상기 질의 입력이 음성 인식 모듈에 입력되는 단계와;상기 음성 인식 모듈에서 음성 데이터가 분리되어 질의 풀의 음성 데이터베이스에 입력되는 단계와;상기 음성 인식 모듈에서 선율 분리 모듈에 입력되는 단계와;상기 선율 분리 모듈에서 주 선율이 분리되어 질의 풀의 주 선율 데이터베이스에 입력되는 단계와;상기 선율 분리 모듈에서 질의 풀의 보조 선율 데이터베이스에 입력되는 단계와;상기 질의 풀을 검색한 후 검색이 완료되는 단계와;상기 질의 풀과 음악 파일 데이터베이스를 추가 검색하는 단계와;상기 검색 결과를 고객의 단말기에 출력하는 단계와;고객이 상기 검색 결과 중에서 정답을 최종 확인하고 검색을 완료하는 단계와;상기 고객이 정답으로 확인한 결과와 질의 입력간의 매칭을 분석하는 단계와;상기 매칭 분석에 따라 가중치를 갱신하여 질의 풀에 피드백 전달하는 단계;로 구성되는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항과 제 12 항에 있어서,음파(sound wave)형태의 질의(query)를 주 선율(main melody)을 추출하여 미디(MIDI) 또는 SMAF(.mmf) 형태 등의 포맷으로 변환하는 단계; 그리고/또는상기 미디 또는 SMAF(.mmf) 등으로 변환된 주 선율과 기존의 데이터베이스상의 미디 또는 SMAF(.mmf) 등으로 데이터와의 매칭 여부를 비교하는 단계; 그리고/또는매칭 비교 후 단말기 화면에 검색된 곡을 제시하는 단계; 그리고/또는상기 매칭 비교 후 매칭 정확도 또는 유사도 순서에 따라 복수의 곡을 제시하여 고객이 선택하는 단계; 그리고/또는고객에 의해 선택된 곡이 재생되는 단계를 더 포함하여 구성되는 것을 특징으로 하 는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항과 제 12 항에 있어서,고객이 질의로부터 주 선율을 추출하는 단계와; 그리고/또는상기 추출된 주 선율을 단말기상에 음표와 오선지의 형태로 이루어진 주 선율 악보로 출력하는 단계와; 그리고/또는상기 출력된 주 선율 악보를 연주할 악기를 악기 데이터베이스로부터 고객이 선택하는 단계와; 그리고/또는상기 선택된 악기로 상기 주 선율 악보가 연주 재생되는 단계와; 그리고/또는고객의 질의로부터 검색된 복수 음악 후보 중에서 고객이 선택하는 단계와; 그리고/또는상기 고객이 선택한 음악과 고객이 질의한 음악을 비교하여 유사도를 보여주는 단계를 더 추가함으로써, 작곡 또는 작곡에 따른 연주가 가능한 것을 더 포함하여 구성되는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항과 제 12 항에 있어서,고객의 단말기를 통해 연주되는 음악을 들음과 동시에 또는 시간차를 두고,단말기의 화면에 그래픽 처리되어 출력된 오선지에 음표 등의 형태로 악보를 직접 표시하거나; 또는 단말기 버튼을 이용하여 음정과 박자를 표시하거나; 표시된 오선지상의 악보상 데이터를 수정 또는 변경 첨삭 가능하거나; 그리고/또는 청음 기능이 가능한 것을 더 포함하여 구성되는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
- 제 1 항과 제 12 항에 있어서,고객의 단말기에 가사 또는 음표가 오선지 위에 그려진 형태로 이루어진 악보가 출력될 수 있어서,고객이 상기 악보를 보고 음정과 박자를 따라 부르는 즉, 시창 기능을 할 수 있는 것을 더 포함하여 구성되는 것을 특징으로 하는 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스 음악 정보 검색 시스템 및 방법
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020050071701A KR100702059B1 (ko) | 2005-08-05 | 2005-08-05 | 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스음악 정보 검색 시스템 및 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020050071701A KR100702059B1 (ko) | 2005-08-05 | 2005-08-05 | 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스음악 정보 검색 시스템 및 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20070016750A true KR20070016750A (ko) | 2007-02-08 |
| KR100702059B1 KR100702059B1 (ko) | 2007-04-03 |
Family
ID=41624252
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020050071701A KR100702059B1 (ko) | 2005-08-05 | 2005-08-05 | 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스음악 정보 검색 시스템 및 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR100702059B1 (ko) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101041602B1 (ko) * | 2008-11-14 | 2011-06-15 | (주) 다이퀘스트 | 네트워크 기반의 다차원 정보 표시 시스템 및 다차원 정보 표시 방법 |
| WO2014127063A1 (en) * | 2013-02-12 | 2014-08-21 | Beats Music, Llc | Systems and methods for generating playlists based on user feedback |
| CN107368609A (zh) * | 2017-08-10 | 2017-11-21 | 广州酷狗计算机科技有限公司 | 获取多媒体文件的方法、装置及计算机可读存储介质 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7302200B2 (ja) * | 2019-02-26 | 2023-07-04 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置及びプログラム |
-
2005
- 2005-08-05 KR KR1020050071701A patent/KR100702059B1/ko not_active IP Right Cessation
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101041602B1 (ko) * | 2008-11-14 | 2011-06-15 | (주) 다이퀘스트 | 네트워크 기반의 다차원 정보 표시 시스템 및 다차원 정보 표시 방법 |
| WO2014127063A1 (en) * | 2013-02-12 | 2014-08-21 | Beats Music, Llc | Systems and methods for generating playlists based on user feedback |
| CN107368609A (zh) * | 2017-08-10 | 2017-11-21 | 广州酷狗计算机科技有限公司 | 获取多媒体文件的方法、装置及计算机可读存储介质 |
| CN107368609B (zh) * | 2017-08-10 | 2018-09-04 | 广州酷狗计算机科技有限公司 | 获取多媒体文件的方法、装置及计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR100702059B1 (ko) | 2007-04-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6476306B2 (en) | Method and a system for recognizing a melody | |
| KR100952186B1 (ko) | 악곡들을 식별하는 방법 | |
| JP5115966B2 (ja) | 楽曲検索システム及び方法並びにそのプログラム | |
| US7368652B2 (en) | Music search system and music search apparatus | |
| KR100895009B1 (ko) | 음악추천 시스템 및 그 방법 | |
| US6307139B1 (en) | Search index for a music file | |
| US20060224260A1 (en) | Scan shuffle for building playlists | |
| JP2010521021A (ja) | 楽曲ベースの検索エンジン | |
| CN110010159B (zh) | 声音相似度确定方法及装置 | |
| JP2009210790A (ja) | 選曲歌手分析推薦装置、その方法及びプログラム | |
| KR100512143B1 (ko) | 멜로디 기반 음악 검색방법과 장치 | |
| JP2000187671A (ja) | ネットワ―クを利用した歌声による曲検索システム及び検索時に用いる歌声の入力端末装置 | |
| KR100702059B1 (ko) | 고객 특성이 피드백 반영되는 질의 풀 기반의 유비쿼터스음악 정보 검색 시스템 및 방법 | |
| JP2003131674A (ja) | 楽曲検索システム | |
| Song et al. | Implementation of a practical query-by-singing/humming (QbSH) system and its commercial applications | |
| JP2007241015A (ja) | 音評価システム | |
| JP2006195384A (ja) | 楽曲調性算出装置および選曲装置 | |
| KR102165940B1 (ko) | Ｃｂｍｒ 기반 음을 이용한 음악 검색 서비스 제공 시스템 및 방법 | |
| KR101546331B1 (ko) | 음계를 이용한 음악 재생 방법 및 이를 이용한 음악 재생 장치 | |
| JP4030808B2 (ja) | 楽曲検索サーバ、音声認識装置、楽曲提供システム、楽曲提供方法、およびそのプログラム | |
| JP4447540B2 (ja) | カラオケ唱歌録音作品の鑑賞システム | |
| KR101051803B1 (ko) | 허밍 또는 노래 기반 음원 검색 방법 및 시스템 | |
| KR20100042705A (ko) | 오디오 컨텐츠 검색 방법 및 장치 | |
| KR20010094312A (ko) | 컴퓨터 네트워크를 이용한 음악데이터 전자상거래 방법 | |
| JP6667332B2 (ja) | カラオケシステム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| N231 | Notification of change of applicant | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| LAPS | Lapse due to unpaid annual fee |