JPH11184883A

JPH11184883A - 楽曲検索システム、楽曲検索方法及び記録媒体

Info

Publication number: JPH11184883A
Application number: JP9355024A
Authority: JP
Inventors: Hirokazu Negishi; 廣和根岸; Yoshisuke Toyoshima; 義輔豊嶋; Toshihiro Sugikubo; 利浩杉窪; Kenichi Nagasawa; 健一長澤
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1997-12-24
Filing date: 1997-12-24
Publication date: 1999-07-09

Abstract

(57)【要約】【課題】システム全体としてのユーザーにより取り扱
いが容易で、且つ、結果としての楽曲検索精度の高い楽
曲検索システム、方法、更には記録媒体を提示するこ
と。【解決手段】複数の楽曲検索要素を順次入力可能と
し、入力された複数の楽曲検索要素中、有効な入力に基
づいて１以上の候補曲を提示することにより、ユーザは
様々な楽曲選択のための情報を効率よくシステムに伝え
ることができ、各情報固有の検索方法により、最適な検
索結果を得ることができる。また、入力された楽譜情報
をその力動作に応答して再現することにより、最も曖昧
さの大きい楽譜情報を検索情報として用いる際にその検
索情報がどのような情報であったかを直ちにユーザが把
握でき、システムに無駄な検索をさせることがない。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は楽曲検索システム、
楽曲検索方法及び記録媒体に関するもので、特に、多数
の楽曲情報からユーザが失念している楽曲や未知の楽曲
を選択・提示する楽曲検索システム、楽曲選択方法及び
コンピュータにて読み取り可能な記録媒体に関するもの
である。

【０００２】

【従来の技術】いわゆる音楽の曲当ては、従来所謂クイ
ズの世界、すなわち人間の高度な頭脳に於いてのみ成立
する高度な記憶力、連想力、判断力などの人間としての
機能が必要であった。

【０００３】しかしながら、近年の音楽ソフトウエアの
廉価化、趣味の多様化に伴い人の記憶に残るもしくは産
業上利用できる楽曲数は増加の一途をたどっている。こ
れに伴って、カラオケで自分の唄いたい曲名を思い起こ
せないもどかしさ、もしくは、気分転換、広告宣伝など
に用いる曲の選択の難しさが、近年、曲当てを技術的解
決の目標とするに至った。

【０００４】特に、音楽に於けるコンピュータ利用の一
つであるＭＩＤＩ技術の普及がカラオケに於いて開花
し、いわゆる通信カラオケとして一世を風靡すると共
に、様々な利用方法が可能となったことから、特に近
年、この種の楽曲検索技術について多くの報告がされて
いる。

【０００５】例えば、特開平２−５４３００号公報
（「自動選曲装置」）に於いては、メロディによるカラ
オケ選曲技術が開示されている。また、特開平３−１２
８９０号公報、特開平３−１２８９１、にも同様な技術
が開示されている。更に、特開平５―６１９１７号公報
（「旋律情報を利用した音楽データベース検索方式及び
旋律整合方式」）に於いては、ユーザーから提示される
メロディに於ける音符のずれ、ぬけ、余剰などをも考慮
した技術が開示されている。

【０００６】また特開平７―１２１５５６号公報（「音
楽情報検索装置」）に於いては、ユーザーが必ずしも絶
対音階で入力するとは限らない点にも配慮した技術も公
開されている。

【０００７】一方、時代の進展と共に技術も進歩し、前
述のＭＩＤＩ技術を利用した通信カラオケの普及につ
れ、このような楽曲検索にも新たな技術が登場した。例
えば特開平８―１２９３９３号公報（「カラオケ装
置」）に於いては、ＭＩＤＩ技術を利用して音声入力か
らそのまま通信カラオケ選曲を行う技術も開示されてい
る。また、特開平８―１６０９７５号公報（「カラオケ
選曲装置」）に於いては、メロディ、リズム、歌詞等の
の相対的長さや比率に着目し、より一層の選曲率アップ
を目指した技術が示されている。更に特開平９―１３８
６９１号公報（「楽曲検索装置」）に於いては、音高と
音長に着目した技術が提示されている。

【０００８】これらの楽曲検索技術は、勿論、その他の
用途をも示唆しているが、実際上はいずれもカラオケに
利用する事を第一義としている。ところが、ここに見逃
してはならない技術開示がある。それは、特開平６―２
０２６２１号公報（「楽曲演奏情報を利用した楽曲検索
装置」）であり、メロディではなく、楽器編成やリズム
感などの音楽的情報により、楽曲検索出来る楽曲検索装
置を提供している。当該公報においては、メロディでは
なく楽器編成やリズム感等の情報を利用する理由につい
ては、カラオケに於いては通常ユーザーが唄う「メロデ
ィは歌のパートまたはソロ楽器のパートに多いと考えら
れるが、カラオケ演奏情報などではこれらのパートがな
く検索出来ない。」と説明している。

【０００９】さらに、コンピュータ技術一般、特に音響
分析技術の急速な進歩により、例えば先に述べた特開平
７―１２１５５６号公報に開示されている周波数同定技
術は、既にパソコンのソフトとして市場に出回ってい
る。

【００１０】

【発明が解決しようとする課題】しかしながら一方に於
いてはこれだけ多様な楽曲検索技術が開示されていなが
ら、実用に供されている例は極めて少ないのが現状であ
る。これは技術進歩が急速であるにもかかわらず、まだ
隠れた障害が存在している事を暗示しているように思わ
れる。その原因について、簡単に考察する。

【００１１】メロディは頭脳の中では音楽情報のパター
ンの一つとして、いわゆる感性の脳として知られている
右脳に記憶されていると考えられる。ところが、楽曲の
名前等の書誌的な情報や関連情報はいわゆる言語情報と
して論理の左脳に記憶されていると言われている。いわ
ば、一つのイベントである音楽に関する情報が右脳と左
脳に分かれて記憶されている訳で、この点がメロディは
覚えているが、名前は忘れてしまった、と言う不都合の
根源ともなっていると思われる。

【００１２】しかも音楽自身の本質的価値は勿論右脳が
担当する部分であり、決して名前やその名声等左脳部分
の情報ではない。それだけに左脳から提供される関連情
報が必ずしも右脳の情報と整合性があると言う保証はな
い。ただ個人のレベルでは個々の音楽がある忘れ得ぬイ
ベントと結びついている事もあり、ただその名前のみ失
念していると言うケースも十分あり得る。

【００１３】また、メロディはその楽曲の書誌的な情報
のみでは何らの右脳的な情報を与えない。楽曲に関する
多くの関連情報はいわゆる曖昧さを持った断片的情報で
ある可能性が高い。従って、従来のシステムでは自然言
語処理で今日行われている推論エンジンの機能を充分に
は生かし切っていないと云うことができる。特に、音声
や他の情報入力の手法は決して充分に言語処理、メロデ
ィ認識などの各技術を活かしてはいない。

【００１４】また、他の課題としては利用分野、すなわ
ちカラオケ環境そのものにあると思われる。それはカラ
オケの持つ雰囲気、すなわち大音響で音楽が流れている
と言う点である。このような環境で、周囲に左右されず
的確な入力を行う事は、極めて困難と感ずる。

【００１５】更に、ＭＩＤＩ技術そのものの問題点とし
て、一番必要なメロディが通常のＭＩＤＩ情報から欠落
しているという欠点がある。この点については先に示し
た、特開平６―２０２６２１号公報（「楽曲演奏情報を
利用した楽曲検索装置」）においても指摘されている。
但し、当該公報に開示されている技術のように、検索の
ための拠り所としている楽器編成情報やリズム感を、一
体如何ほどのユーザーが検索用入力情報として利用出来
のるか、また検索精度が如何程かは定かではない。

【００１６】本発明はこれら従来技術の欠点を解決し、
システム全体としてのユーザーにより取り扱いの容易
さ、結果としての楽曲検索精度の向上、更にはこれに伴
い、楽曲を提供する産業の発展に貢献することを目的と
している。

【００１７】

【課題を解決するための手段】斯かる目的下において、
本発明の請求項１の楽曲検索システムにおいては、複数
の楽曲検索要素を順次入力可能とする対話型入力手段
と、当該入力手段で入力された複数の楽曲検索要素中、
有効な入力に基づいて１以上の候補曲を提示する手段と
を具備する構成とした。

【００１８】上述の如く構成することにより、ユーザは
様々な楽曲選択のための情報を効率よくシステムに伝え
ることができ、各情報固有の検索方法により、最適な検
索結果を得ることができる。

【００１９】また、請求項２３の楽曲検索システムにお
いては、楽曲検索要素として、楽曲の楽譜に係わる情報
を入力する手段と、当該入力手段にて入力された楽譜情
報を該入力手段の入力動作に応答して再現する再現手段
と、当該入力手段で入力された楽譜情報に基づいて１以
上の候補曲を提示する手段とを具備する構成としてい
る。

【００２０】上述の如く構成することにより、最も曖昧
さの大きい楽譜情報を検索情報として用いる際にその検
索情報がどのような情報であったかを直ちにユーザが把
握でき、システムに無駄な検索をさせることがなくなっ
た。

【００２１】

【発明の実施の形態】以下、本発明の実施例について、
図面を参照して詳細に説明する。

【００２２】ここで、本件発明の概略について説明す
る。発明者らは、先に説明した従来技術において、最も
大きな問題は、適切なユーザーインターフェース、特に
対話型マルチメディアインターフェースの欠如であると
の認識の下、複数の検索入力を対話的に順次ユーザーに
与える手法を採用した。この検索入力としては、メロデ
ィ、リズムなどの楽譜情報、作曲家、作詞家、歌詞の一
部などの書誌的情報、更には感性を示す語彙なども検索
入力として用いる。

【００２３】対話型マルチメディアインターフェースの
重要性を更に具体的に指摘しておく。そもそもメロディ
等から曲名を探し当てると言うこと自体、自らの記憶力
の低下の結果であり、従って、入力そのものの信憑性に
も疑問がある事を前提とすべきである。またユーザーは
必ずしも最新技術に慣れ親しんでいる階層ではなく、む
しろ機械には馴染みのない人々であると言う点にも配慮
しなければならない。

【００２４】従って、あらゆる意味で冗長度を持ってお
く事が重要であり、この点内容に応じて話し合いを進め
て行く対話型入力手段は不可欠である。近年人工知能の
分野に属する自然言語処理技術の発達と、ディスプレー
技術の進歩により、対話型マルチメディアインターフェ
ースによる入力手段は十分実用段階に達してきている。

【００２５】また特に、最もユーザの記憶の中で重要で
あり、かつ曖昧性が高いであろうと思われる楽譜情報に
ついては、これを検索入力として用いたときに、どのよ
うなメロディもしくはリズムを検索情報として用いるか
を即座に再現することによって、無駄な検索を防止す
る。

【００２６】図１は、本件発明に係わる楽曲検索システ
ムの全体構成を示す図であり、図中１は本実施例のシス
テム内部に用意された楽曲データベース（ＭＤＢ：Musi
c Data Base）であり、２は外部のＭＤＢと本システム
を接続するための通信インターフェース（Ｉ／Ｆ）であ
る。ここで、この内部ＭＤＢと外部ＭＤＢとによってこ
のシステム全体のＭＤＢが構成されていると理解すべき
であり、これらは、中央処理装置（ＣＰＵ）を含む処理
装置本体３に接続されている。

【００２７】また、図１において、４はユーザが言葉も
しくはメロディなどを用いる際に用いられるマイクロホ
ンであり、５はＭＤＢ中から選択された楽曲の演奏や検
索入力として入力された楽譜情報（メロディ、リズムな
ど）を再現する為のスピーカ、６は対話的入力画面を表
示し、更には、検索された楽曲に係わる書誌的情報や画
像を表示するためのディスプレイ、７はディスプレイに
表示されている検索画面に対してアクセスし、各種の入
力を行うためのキーボードもしくはマウスなどの操作部
材であり、これらは処理装置本体に対して、双方向もし
くは片方向にデータのやりとりを行えるように構成され
ている。

【００２８】図１において、８はフロッピーディスクド
ライブ（ＦＤＤ）であり、本件システムを動作させるた
めのソフトウエアプログラムが記述されたフロッピーデ
ィスク（ＦＤ）に記述されているプログラムを読み取
り、処理装置本体３に送る。処理装置本体３はこのＦＤ
に記述されておいたプログラムを本体３内のハードデイ
スクもしくは半導体メモリに転送し、図２に示す各動作
を行うことができる。

【００２９】図２は図１のシステムの基本的な動作の遷
移を示すフローチャートであり、以下、この図２を用い
て本実施例の全体的な動作について説明する。システム
が起動されると、内部ＭＤＢ１を立ち上げて、このＭＤ
Ｂ１をアクティブな状態にすると共にこのＭＤＢ１に自
己診断を行わしめ、処理装置本体３内のＣＰＵの制御下
におく。また、この時外部Ｉ／Ｆ２を介して外部ＭＤＢ
へのアクセスを可能とし、外部ＭＤＢと通信を行って、
この外部ＭＤＢも上記ＣＰＵの制御下に動作可能または
アクセス可能であることを確認する。また、ＣＰＵはデ
ィスプレイ６、マイクロホン４、スピーカ５及び操作部
７をアクティブにする。

【００３０】次に、システムの起動が確認されると、初
めてシステムを立ち上げた場合には自動的に初期条件の
設定ルーチンＳ２に入る。システムの起動が初めてでは
ない場合にはステップＳ１において、対話型インターフ
ェースを通じてユーザーに再度初期設定をするか否かを
確認し、必要であれば初期設定を行うために、初期条件
の設定ルーチンに入る。

【００３１】この初期条件設定ルーチンは、検索入力と
して何を優先的に入力するか、どのように検索結果を出
力するかなどをユーザーに対話的に入力させる。この初
期設定ルーチンとして、ユーザーがその設定の手間を最
小限にしたければデフォルト値を設定する。この初期条
件設定ルーチンについては後に詳述する。

【００３２】次に、ＣＰＵは第１回目のリクエストを聞
く（Ｓ１０）。ＣＰＵはユーザーからの入力に従って、
複数の候補曲を提示しつつリクエスト処理を繰り返し、
必要に応じて曲の選択ルーチンに移行する（Ｓ１１）。
このリクエストルーチン及び選択ルーチンの詳細につい
ても後述する。

【００３３】さて、選択ルーチン（Ｓ１１）において
は、提示された候補曲から、ユーザーが１つの楽曲を選
択し、この選択により選択された楽曲のメロディが画像
などの参考情報と共に提示される。ここで、ユーザーは
提示された楽曲が所望の楽曲もしくは聴いてみたい楽曲
であるか否かを判定する（Ｓ１２）。そして、所望の楽
曲もしくは聴いてみたい楽曲である場合には、更に、そ
の曲の全曲の演奏を行うか否かを問い合わせる（Ｓ２
０）。

【００３４】このような選択ルーチンと、楽曲の適否の
判定は３回繰り返す（Ｓ１１〜Ｓ１６）ことができ、３
回の内に所望の楽曲が見つかれば、全局演奏を行うか否
かをユーザに判断させる（Ｓ２０）。一方、３回の内に
所望の楽曲が見つからなければ、次のリクエストを行う
処理を終了するかの判断をユーザに行わせる（Ｓ１
７）。ここで、次のリクエストを行う場合にはステップ
Ｓ２１〜Ｓ２８にて同様の処理を行い、このような動作
を、ステップＳ３１〜３８においてユーザが処理の終了
を命じるまで続ける。即ち、所望の曲に到達するまで、
リクエスト、選択、試聴を繰り返す事も可能である。本
例では、前述の条件設定によりデフォルト値が設定さ
れ、一回のリクエストに於いて、提示する曲は３曲と設
定された例を示すが、この曲数はユーザーの好みにより
いか様にも設定可能である。

【００３５】各リクエストの各選択ルーチンで選択され
た楽曲の全曲を演奏することを、ステップＳ２０，Ｓ３
０もしくはＳ３９にて選択した場合には、音楽演奏ルー
チン（Ｓ４０）に入り、ＣＰＵが内部ＭＤＢ１もしくは
外部ＭＤＢにアクセスして、所望の楽曲をスピーカ５か
ら出力すると共に、この楽曲に対応する画像がある場合
にはディスプレイ６にその画像を映出する。

【００３６】勿論、この音楽演奏ルーチン（Ｓ４０）に
おいてある曲を演奏しても、ステップＳ４１において、
次のリクエストを行うという判断を行うときには、次の
リクエストルーチンに移行することも勿論可能である。
ステップＳ１７，Ｓ２８，Ｓ３８，Ｓ４１において、次
のリクエストを行わないことがユーザによって選択され
るとシステムを停止し、処理を終了することになる。

【００３７】次に各ステップをより詳細に説明する。ま
ずシステムの初期条件設定ルーチン（Ｓ２）について、
図３のフローチャート及び図４の表示画面を用いて説明
する。図２は対話型音楽曲探索システムフォローチャー
トー１であり、次のごとく作動する。

【００３８】図２におけるステップＳ１において、ユー
ザーが初期条件を設定するために、初期条件設定を指定
した時、もしくは、このシステムの最初の起動時にステ
ップＳ２の初期条件設定ルーチンにはいると、図４に示
す如き、初期設定画面の表示を行う（図３：Ｓ５１）。
図４における表示画面において、１１は検索優先度の表
示部、１２は提示曲数表示部、１３は選曲可能曲数表示
部、１４は候補曲表示形式表示部、１５は学習機能オン
オフ表示部である。

【００３９】ここで、ステップＳ５２においては、現在
システムとして設定している設定値を表示する。ここ
で、この設定値とは、システムの最初の起動時にはシス
テム起動前に予め定められていたデフォルト値であり、
ユーザーが初期設定の変更をするためにステップＳ１に
おいて初期設定ルーチンへの移行を命じたときには、先
の初期設定と後述する学習機能により現在システムが保
持している設定値を表示することになる。尚、図４にお
いては、本システムにおけるデフォルト値が表示された
状態を示す。

【００４０】即ち、本実施例のシステムでは、検索入力
として「メロディ」が第１優先、次いで「歌詞の一
部」、「感性語彙１」、「感性語彙２」、「作曲家名」
の順で順次入力を行うことを示す。「感性語彙」とは、
例えば、「暗い」とか「さわやかな」といった人間の感
性に係わる語彙を入力するもので、ＭＤＢに収納されて
いる全ての楽曲に対して、この種の「感性語彙」がキー
ワードとして付与されており、このキーワードに合致し
た曲が候補曲として後で提示されることになる。

【００４１】また、本実施例において１度に提示する楽
曲数の上限は「１０」、その中から選択可能な曲数は
「３」とし、候補曲の表示形式としては、曲名とアーチ
スト名の一覧のみとする。尚、この提示曲数、選択可能
曲数、表示形式などについては、追って説明する。本実
施例にシステムにおいては、いわゆる学習機能を有して
おり、デフォルトとしてはこの学習機能をオンさせてお
く。本実施例における学習機能とは、リクエストルーチ
ンにおいて、どの検索入力が有効な入力であったかを自
動的に統計処理し、後の検索入力の順序に反映させるこ
とである。

【００４２】図４において、各種設定の表示部１１〜１
５に対して、図１のマウスもしくはキーボードを用いて
ユーザが自分の好きな内容を入力できる。このような入
力があると（Ｓ５３）、その入力値が設定されると共に
各種設定の表示部内に表示される（Ｓ５４）。そして、
図４におけるＯＫスイッチ１６がクリックされると（Ｓ
５６）、この初期設定ルーチンを終了するが、設定値を
デフォルト値に戻したい場合にはデフォルトスイッチ１
７をクリックすることにより（Ｓ５５）、デフォルト値
とシステムの設定値として設定し（Ｓ５７）、ステップ
Ｓ５２に戻り、再度設定をし直すことができる。

【００４３】次に、リクエストルーチンについて説明す
る。図５は図２におけるリクエストルーチン（Ｓ１０，
Ｓ２１，Ｓ３１）におけるシステムの動作を説明するた
めのフローチャート、図６及び図７はそれぞれ上記リク
エストルーチンにおいてディスプレイ６に表示される表
示画面の一例を示す図であり、以下、これらの図５〜７
を用いて説明する。

【００４４】リクエストルーチンにはいるとまず変数Ｎ
に１を置数し（Ｓ６０）、Ｎ回目の検索入力画面をディ
スプレイ６に表示する。ここで、本実施例においては図
４に示した、先の初期設定画面における検索入力（検索
要素）の項目数から明らかなように、５つの検索要素が
順次設定される構成としたが、この数自体はシステムの
構成上自由に設定できる。これら５つの選択要素として
は、先に説明した「メロディ」「リズム」「歌詞の一
部」等の楽譜情報と感性を示す語彙以外に「作曲家名」
等の書誌的情報を用いることが可能である。

【００４５】ここで、書誌的情報としてはとしては「女
声／男性／デュエット／コーラス」などの情報、「ジャ
ンル」、「使用楽器（バンド／ピアノ／オーケストラな
ど）」、「発売年月日（発売年、もしくは年月のみでも
可）」、「作詞者」、「編曲者」、「レコード会社」、
「収録アルバム名」などがある。また、ユーザが各楽曲
に対する情報として思い出される関連情報を予め登録し
ておけば、これも検索入力要素として用いることが可能
である。

【００４６】そして、第１検索入力画面を表示する（Ｓ
６１）。ここで、例えば、第１検索入力（検索要素）が
「メロディ」であったとすると、図６のような表示がデ
ィスプレイ６上になされる。ステップＳ６２において
は、実際メロディの入力を行うのであるが、本実施例に
おいてはこのステップＳ６２において、メロディの入力
方法を選択可能とした。即ち、図６におけるキー２１を
クリックすればマイクロホン４からの音声によるメロデ
ィ入力、キー２２をクリックすれば不図示のコネクタに
より処理装置本体３に接続された電子楽器からの演奏に
よりメロディ入力を選択することになる。また、キー２
３をクリックすればメロディの入力を行わない、即ちメ
ロディを検索要素として用いないことを選択する。

【００４７】その後、ディスプレイに「メロデイを入力
下さい」との表示が出、その間に上述した何れかの方法
でメロディを入力すると、この入力が検索の要件として
設定される。そして入力完了後、有効な入力があると判
断された場合には（Ｓ６３）、その検索要素について有
効な検索入力がなされた回数をインクリメントする（Ｓ
６４）。ここで、この各検索要素（検索入力）の累積入
力回数は、各検索要素間で比較され、累積入力回数が多
い順に検索入力１〜５を決定し、これを先に図３のステ
ップＳ５２において説明したシステムの設定値として記
憶しておく。

【００４８】本実施例においては、入力された情報が上
記「リズム」「メロディ」「歌詞の一部」などの楽譜情
報である場合には、その情報を分析し、楽譜情報として
曖昧性を取り除く処理を行う。勿論、その分析結果が入
力するユーザの意図と合わなかったり、実際の楽譜と異
なることがあるが、本実施例では、これを再度ユーザー
にフィードバックするために、入力情報が楽譜情報であ
ると判断された場合（Ｓ６５）においては、その楽譜情
報の分析結果による楽譜通りの出力をスピーカ５を介し
て提示する。これによって、ユーザは自己の入力した楽
譜情報が意図したとおりの情報として検索に用いられる
か否かを再度確認することができる。尚、不図示である
が、ステップＳ６６においてユーザは所望の入力でなけ
れば、これが検索入力として用いられるのをキャンセル
することも可能である。

【００４９】ここで、上記分析の手法自体は、先に説明
した公報などにも開示されている既存の技術群であり、
それらは相対的音程、リズム、相対的長さ、歌詞、並び
に音列の相対的変化（同音、下降、昇音）のデータとし
て入力されたメロデイやリズムを解析する。これらのメ
ロディの諸属性が多ければ多いほど、更に正確であれば
ある程探索の目標たる候補曲を、ＭＤＢの中からより正
確、且つ、少ない候補曲として選抜して行くことが可能
である。

【００５０】図７は検索入力要素が、「歌詞の一部」で
あった場合の表示画面を示す。図から明らかなように、
歌詞の一部を入力し、ＯＫキー２７をクリックすれば検
索入力として用いられ、キャンセルキー２６をクリック
すれば、入力した歌詞の情報の再入力が可能となり、キ
ー２８をクリックすれば、「歌詞の一部」を検索入力と
しては用いないようにすることができる。図７に示すよ
うな、表示画面は、感性語彙の入力、書誌的情報の入力
に際しても同様に用いることができるのは云うまでもな
い。

【００５１】そして、このような検索要素の入力が行わ
れる度にＮはインクリメントされ（Ｓ６８）、Ｎが５に
達したら（Ｓ６７）処理を終了する。

【００５２】尚、上記例では、上記累積入力回数のみを
参照して検索要素の入力順を決定したが、図４に示され
るとうりユーザの選んだ優先順位は、ユーザ自身が自分
の傾向を当然知っているであろうとの予測から、ユーザ
の最初に選んだ優先順と上記学習機能により、システム
側の判断した優先順との双方に鑑みて最終的な入力順を
決定することも可能である。また、メロディなどの入力
に際してはその正確度を考慮して上記累積される値を変
化させることも可能である。更には、この累積された値
をユーザにフィードバックする事によりユーザに自分の
入力傾向を認識させることによって、優先順位の再設定
を促すなどの改良を行っていくことも可能である。

【００５３】また、上述の実施例においては説明の簡単
のため、ユーザーが単数である場合を想定して説明した
が、複数のユーザが本システムを共用する場合、ユーザ
毎に初期設定を行い、ユーザ毎に統計をとって学習機能
を機能させることも可能である。

【００５４】ここで、検索対象となるＭＤＢにおける検
索曲するについて考察する。例えば、１９７５年英国に
て発行されているDirectory of Tunesには１００００
曲のクラシック音楽、並びに６０００曲のポピュラーソ
ングの主要なメロディが音列の相対変化のみで分類され
ている。また、昨今の通信カラオケに於いては１０００
０曲以上が常にMIDI情報として登録されている。クラシ
ックの場合は各楽章の第１主題、第２主題を中心に耳に
残り易い所を、そしてポピュラーの場合は出だし、さわ
り、終わり等いろいろな部分が利用されている。一方カ
ラオケの場合は全曲が既にMIDIフォーマットになってい
るが、メモリー圧縮が必要な場合は楽譜レベルに落とす
事も可能である。

【００５５】このように音楽の種類、ジャンル等により
既存のデータベースはその単位の取り方は様々である
が、それぞれの心に残り易いメロディがその中心である
事には変わりがない。そこで本実施例ではこれらの総和
である２６０００を代表的メロディデータベースの対象
と考える。ユーザーが探索したいメロディ等の検索要素
を数種類順次対話的に入力すると、公知の様々な検索手
法を駆使して、２６０００の楽曲から数曲〜数十曲の候
補曲に絞られる。

【００５６】次に、検索結果の提示及び提示された検索
結果（候補曲）から、所望の曲を選択する選択ルーチン
について説明する。図８は選択ルーチンにおけるシステ
ムの動作を説明するためのフローチャートである。ま
た、図９〜図１１は図８の選択ルーチン中でディスプレ
イ６に表示される表示画面を示す図であり、以下、これ
らの表示画面を参照して動作説明を行う。

【００５７】図２のフローチャートにおいて、選択ルー
チン（Ｓ１１，Ｓ１３，Ｓ１５，Ｓ２２，Ｓ２４，Ｓ２
６，Ｓ３２，Ｓ３４，Ｓ３６）に入ると、先のリクエス
トルーチンにて入力を完了していた検索要素を用いて候
補曲の検索を行う（Ｓ７０）。これら候補曲中の数件が
後に各表示モードで表示されることになるが、ここで、
この候補曲のランク付けについて説明する。

【００５８】上記ステップＳ７０における候補曲の検索
に際しては、検索要素が楽譜情報のように曖昧性のある
ものについては、完全合致のみを検索対象とするのでは
なく、合致する度合いの高いものから低いものにそれぞ
れ評価付けする。また、感性を示す語彙の入力に対して
も、その感性を示す語彙に楽曲がどの程度近いかによっ
て評価付けをする。

【００５９】例えば、楽譜情報にたいする類似度を０〜
１の間の値（ｘ）で評価し、感性語彙に対する合致度を
同様に０〜１の間の値（ｙ）で評価したとすると、ｚ＝
ｘ＊ｙを演算により求めておき、書誌的情報の入力が合
致したものの中から上記値（ｚ）が大きいものから順に
ランク付けを行う。そして、上位にランクされた楽曲か
ら順に前述した初期設定画面の候補曲表示形式表示部１
４（図４参照）において設定されていた形式に従って、
同じく初期設定画面の提示曲数表示部１２にて設定され
た提示曲数まで提示する。

【００６０】例えば、図４に示すように一覧表示が初期
設定され、提示曲数として「５」が設定されている場合
には、図９に示すような画面が表示される。図９におい
て４０は候補曲一覧表示部であり、図示のように楽曲名
とアーチスト名とが上述のランク付けに従って表示され
る。４１は選択曲表示部であって、上記候補曲中からユ
ーザが選択した楽曲のランクが表示される。また、４２
は検索条件表示部であり、表示部４０に表示されている
候補曲を検索する際の検索条件が表示される。

【００６１】この状態で、選択曲表示部４１に対して候
補曲の入力があり、且つ、図９のＯＫキー３１がクリッ
クされると（Ｓ７９）候補曲の選定が終了する。尚、こ
の図８のステップＳ７９は図２におけるステップＳ１
２，Ｓ１４，Ｓ１６，Ｓ２３，Ｓ２５，Ｓ２７，Ｓ３
３，Ｓ３５，Ｓ３７に対応する。

【００６２】画面変更キー３２が操作されたときには、
他の表示画面、例えば、上記「曲名・アーチスト一覧」
表示以外に、「画像・曲名」表示画面など複数の表示画
面を有するものとすると、キー３２のクリックによって
このキー３２の下部にその表示形式が提示され、それら
の中から１つを選択する（Ｓ７５）ことで、選択された
表示形式による表示が行われる（Ｓ７６）。

【００６３】例えば、「画像・曲名」表示画面が選択さ
れたとすると、図１０に示すような画面が表示される。
図中、４５−４〜４５−５はそれぞれ各候補曲と共にＭ
ＤＢに記憶されていた画像を表示する表示部であり、図
示の通り各画像にはランクと曲名とが多重して表示され
る。キー３１，キー３２については図９の画面と同様で
ある。図１０における「一覧表示」キー３４をクリック
すると、画面変更キー３２をクリックして一覧表示画面
を選択した場合と同様に、ステップＳ７５、Ｓ７６によ
り図９の画面に戻る。

【００６４】また、図９の画面が表示されている状態
で、選択曲表示部４１に対して候補曲の入力があり、且
つ、詳細表示キー３３がクリックされると、図１１に示
すような画面が表示される。即ち、選択されている候補
曲の詳細情報が例えば図９に示すように詳細情報表示部
４３に表示される。４２は前述の検索条件表示部であ
り、キー３１，３２，３４については図９もしくは図１
０のキー３１，３２，３４と同様の機能を有する。

【００６５】また、図９，図１０もしくは図１１の画面
が表示されているときに、演奏キー３５がクリックされ
ると（Ｓ７１）、選択曲表示部４１に対して候補曲の入
力があるか否かを確認し（Ｓ７２）、入力がある、即ち
選択済みの場合にはその選択された楽曲の一部に対応す
る音声情報ををＭＤＢ３もしくは通信インターフェース
２を介して取得し、処理装置本体３からスピーカ５に音
声情報として送ることによって出力、演奏する。勿論音
声情報は外部への端子を通じ、オーディオ機祈とうで本
格的に再生する事も可能である。

【００６６】ここで、図１１に示す詳細表示画面におい
て、演奏キー３５がクリックされた場合には、当然候補
曲中の１曲を選択済みであるので、必ず、選択された楽
曲の一部を演奏することになる。一方、選択曲表示部４
１に対して候補曲の入力がない場合には（Ｓ７２）、提
示されている候補曲を順次演奏する（Ｓ７３）。

【００６７】上述の如き部分演奏もしくは逐次演奏機能
を有することによって、本実施例のシステムでは、ユー
ザーが自分の想っていたとうりのメロディをシステムに
入力したかどうかを確認することができる。また、図
９、図１０の画面においては、入力された検索条件を画
面上に提示することで、入力の追加や修正の有無を検討
するチャンスをユーザに与えることができる。

【００６８】そして、これら楽曲選択に対する補助情報
を参照して、ユーザーが前述のＯＫキーをクリックする
と楽曲の選定が確定したことになり（Ｓ７９）、再度選
択された楽曲の部分演奏を行う（Ｓ８０）。そして、シ
ステムは選定曲の全体の演奏が可能な状態となる。

【００６９】この状態では、図１２に示すように、ディ
スプレイ６上に、「全曲をお聴きになりたいですか？」
という文字と共に、前述した書誌情報表示部４３に書誌
情報を表示し、ユーザーがキャンセルキー３８もしくは
演奏キー３９をクリックすることで、前曲の演奏を行う
かどうかが決定される（ステップＳ２０，Ｓ３０もしく
はＳ３９）。即ち、演奏キー３９がクリックされて、全
曲の演奏を行う場合には、図２における音楽演奏ルーチ
ン（Ｓ４０）に入り、選択された楽曲が収納れているＭ
ＤＢにアクセスしてその楽曲の演奏が行われる。

【００７０】一方、提示された楽曲が所望の曲ではなか
った場合や、費用が高いと判断した場合などにおいて
は、キャンセルキー３８がクリックされることによっ
て、次のリクエストルーチンにはいる（Ｓ２０，Ｓ３
０）。また、各リクエスト及び各選択ルーチンにおいて
楽曲の選定が行われなかった場合においては（Ｓ１６，
Ｓ２７，Ｓ３７）、次のリクエストを行うか否かをユー
ザーに問い合わせ（Ｓ１７、Ｓ２８、Ｓ３８）、次のリ
クエストを行わない場合にはシステムの動作を終了す
る。また、同様に、音楽演奏ルーチンにて選定された楽
曲の演奏が終了した場合にも、同等の問い合わせを行い
（Ｓ４１）、次のリクエストを行わない場合にはシステ
ムの動作を終了する。

【００７１】上述のように、上記システムではユーザー
が全曲演奏を望んだ場合、選定された楽曲がシステム上
のＭＤＢに存在し、システムアドレスに組み込まれてい
ればすぐ演奏に移る。また、システムはユーザーにその
楽曲のありかを示すので、ユーザー自身が別の手段でそ
の楽曲を再生する事も可能である。一方、所望の楽曲が
システム上のＭＤＢに存在しない場合、上記楽曲の存在
するデータベース表示に基づき、ユーザーは別途、オン
ラインダウンロードのプロセスをとることも可能であ
る。

【００７２】ここで、本実施例では各楽曲のソースとし
て単一のＭＤＢを仮定したが、ＣＤ，ＭＤ，テープ、Ｌ
Ｐ，ＳＰ等、様々なメディアを本システムに組み込むこ
とは勿論可能であり、その種類を問わない。また、この
種のソースとして、ＬＤ，ＭＩＤＩ通信カラオケ、ビデ
オテープ、ＤＶＤ，等のＡＶメディアも本システムに組
み込むことが可能である。

【００７３】以上説明したように、上述した実施例のシ
ステムによればユーザーは音楽の名前を失念している
が、メロディの断片、関連情報等を記憶している場合
に、対話型マルチメディアインターフェースを通して本
システムと対話をする事により、所望の音楽曲を極めて
容易に探索出来る。

【００７４】特に、対話型の基礎としてユーザーに自然
でかつ負担の少ない対話をシステムと行ってもらう為、
ユーザーの好みに応じた初期条件設定をまず行い、合わ
せてユーザーの使用パターンを学習することにより、毎
回の使用時に煩わしいやり取りや、なかなか正解に到達
しない不満を最小限にすることが出来る。

【００７５】尚、本件システムは、失念した楽曲の検索
だけではなく、前述したように、各種用途に必要とする
曲の検索一般に用いることができるのは云うまでもな
い。

【００７６】

【発明の効果】以上説明したように、本件発明の楽曲検
索システム、楽曲検索方法、もしくは記録媒体を用いる
ことによって、ユーザは様々な楽曲選択のための情報を
効率よくシステムに伝えることができ、各情報固有の検
索方法により、最適な検索結果を得ることができる。ま
た、最も曖昧さの大きい楽譜情報を検索情報として用い
る際にその検索情報がどのような情報であったかを直ち
にユーザが把握でき、システムに無駄な検索をさせるこ
とがなくなった。

【図面の簡単な説明】

【図１】本件発の一実施例としての楽曲検索システム全
体の構成を示すブロック図である。

【図２】図１のシステム全体の動作を示すフローチャー
トである。

【図３】初期条件設定ルーチンの動作を説明するための
フローチャートである。

【図４】初期条件設定ルーチンにおける表示画面を示す
図である。

【図５】リクエストルーチンの動作を説明するためのフ
ローチャートである。

【図６】リクエストルーチンにおける、メロディの入力
方法の指定画面を示す図である。

【図７】リクエストルーチンにおける歌詞入力画面を示
す図である。

【図８】選択ルーチンの動作を説明するためのフローチ
ャートである。

【図９】選択ルーチンにおける候補曲一覧表示画面を示
す図である。

【図１０】選択ルーチンにおける画像・曲名表示画面を
示す図である。

【図１１】選択ルーチンにおける候補曲の詳細表示画面
を示す図である。

【図１２】全曲演奏の指示画面を示す図である。

【符号の説明】

１音楽データベース（ＭＤＢ）２通信インターフェース（Ｉ／Ｆ）３処理装置本体４マイクロホン５スピーカ６ディスプレイ７キーボードマウスなどの操作部８フロッピーディスクドライブ（ＦＤＤ）９プログラムが記述されているフロッピーディスク１１検索優先度表示部１２提示曲数表示部１３選曲可能曲数表示部１４候補曲表示形式表示部１５学習機能オンオフ表示部１６ＯＫスイッチ１７デフォルトスイッチ４０候補曲一覧表示部４１選択曲表示部４２検索条件表示部４３詳細情報表示部４５−１〜４５−５画像表示部５９画像ファイル装置

───────────────────────────────────────────────────── フロントページの続き (72)発明者長澤健一東京都大田区下丸子３丁目30番２号キヤノン株式会社内

Claims

【特許請求の範囲】

【請求項１】複数の楽曲検索要素を順次入力可能とす
る対話型入力手段と、当該入力手段で入力された複数の楽曲検索要素中、有効
な入力に基づいて１以上の候補曲を提示する手段とを具
備する楽曲検索システム。
【請求項２】前記複数の楽曲検索要素を予め設定され
ている要素中から選択することを特徴とする請求項１に
記載の楽曲選択システム。
【請求項３】前記入力手段による入力結果に従い、前
記複数の楽曲検索要素を選択することを特徴とする請求
項１もしくは２に記載の楽曲検索システム。
【請求項４】前記複数の楽曲検索要素を前記入力手段
により有効な入力がされた頻度の高い順に所定数選択す
ることを特徴とする請求項４に記載の楽曲検索システ
ム。
【請求項５】前記入力手段による前記複数の楽曲検索
要素の入力順序を予め設定する手段を有する請求項１乃
至４の何れかに記載の楽曲検索システム。
【請求項６】前記入力手段による入力結果に従い、前
記複数の楽曲検索要素の入力順序を変更することを特徴
とする請求項１乃至５の何れかに記載の楽曲検索システ
ム。
【請求項７】前記複数の楽曲検索要素の入力順序を前
記入力手段により有効な入力がされた頻度の高い順序に
変更することを特徴とする請求項６に記載の楽曲検索シ
ステム。
【請求項８】前記複数の楽曲検索要素は、当該楽曲の
楽譜に係わる情報を含み、前記入力手段はユーザに当該
楽譜情報を入力させる指示を与えることを特徴とする請
求項１乃至７の何れかに記載の楽曲検索システム。
【請求項９】前記入力手段により入力された楽譜情報
を、当該入力に応じて再現する手段を有する請求項８に
記載の楽曲検索システム。
【請求項１０】前記入力手段により入力されたメロデ
ィを分析する手段を有し、前記再現手段は当該分析結果
に基づくメロディを再現することを特徴とする請求項９
に記載の楽曲検索システム。
【請求項１１】前記楽譜情報を、音声入力手段により
入力可能としたことを特徴とする請求項８乃至１０の何
れかに記載の楽曲検索システム。
【請求項１２】前記楽譜情報を、楽器により入力可能
としたことを特徴とする請求項８乃至１０の何れかに記
載の楽曲検索システム。
【請求項１３】前記複数の検索要素は、楽曲の書誌的
情報を含み、前記入力手段は当該書誌的情報を操作者に
対話的に入力させる機能を有することを特徴とする請求
項１乃至１２の何れかに記載の楽曲検索システム。
【請求項１４】前記複数の検索要素は、楽曲に係わる
感性を示す語彙を含み、前記入力手段は当該書誌的情報
を操作者に対話的に入力させる機能を有することを特徴
とする請求項１乃至１２の何れかに記載の楽曲検索シス
テム。
【請求項１５】複数の楽曲検索要素を順次入力可能と
するべく指示を与える入力工程と、当該指示に従って複数の楽曲検索要素中、有効な入力に
基づいて１以上の候補曲を提示する提示工程とを有する
楽曲検索方法。
【請求項１６】前記複数の楽曲検索要素を予め設定さ
れている要素中から、前記入力工程により有効な入力が
された頻度の高い順に所定数選択することを特徴とする
請求項１５に記載の楽曲検索方法。
【請求項１７】前記入力工程による前記複数の楽曲検
索要素の入力指示の順序を、当該入力工程により有効な
入力がされた頻度の高い順序に設定することを有する請
求項１６に記載の楽曲検索方法。
【請求項１８】前記複数の楽曲検索要素は、当該楽曲
の楽譜に係わる情報を含み、前記入力工程はユーザに当
該楽譜情報を入力させる指示を与えることを特徴とする
請求項１５乃至１７の何れかに記載の楽曲検索方法。
【請求項１９】前記入力工程により入力されたメロデ
ィを分析する手段を有し、前記再現手段は当該分析結果
に基づくメロディを再現することを特徴とする請求項１
８に記載の楽曲検索方法。
【請求項２０】前記複数の検索要素は、楽曲の書誌的
情報を含み、前記入力工程は当該書誌的情報を操作者に
対話的に入力させる指示を与えることを特徴とする請求
項１５至１９の何れかに記載の楽曲検索方法。
【請求項２１】前記複数の検索要素は、楽曲に係わる
感性を示す語意を含み、前記入力工程は当該書誌的情報
を操作者に対話的に入力させる指示を与えることを特徴
とする請求項１５乃至２０の何れかに記載の楽曲検索方
法。
【請求項２２】複数の楽曲検索要素を順次入力可能と
するべく指示を与える入力工程と、当該指示に従って複数の楽曲検索要素中、有効な入力に
基づいて１以上の候補曲を提示する提示工程とを含むプ
ログラムが記述されたコンピュータにて読み取り可能な
記録媒体。
【請求項２３】楽曲検索要素として、楽曲の楽譜に係
わる情報を入力する手段と、当該入力手段にて入力された楽譜情報を該入力手段の入
力動作に応答して再現する再現手段と、当該入力手段で入力された楽譜情報に基づいて１以上の
候補曲を提示する手段とを具備する楽曲検索システム。
【請求項２４】前記入力手段により入力されたメロデ
ィを分析する手段を有し、前記再現手段は当該分析結果
に基づくメロディを再現することを特徴とする請求項２
３に記載の楽曲検索システム。
【請求項２５】楽曲検索要素として、楽曲の楽譜に係
わる情報を入力する工程と、当該入力工程にて入力された楽譜情報を該入力手段の入
力動作に応答して再現する再現工程と、当該入力手段で入力された楽譜情報に基づいて１以上の
候補曲を提示する工程とを具備する楽曲検索方法。
【請求項２６】前記入力工程により入力されたメロデ
ィを分析する工程を有し、前記再現工程では該分析結果
に基づくメロディを再現することを特徴とする請求項２
５に記載の楽曲検索方法。
【請求項２７】楽曲検索要素として、楽曲の楽譜に係
わる情報を入力する工程と、当該入力工程にて入力された楽譜情報を該入力手段の入
力動作に応答して再現する再現工程と、当該入力手段で入力された楽譜情報に基づいて１以上の
候補曲を提示する工程とを含むプログラムが記述された
コンピュータにて読み取り可能な記録媒体。