JPH08265660A - Method and device for management of music - Google Patents
Method and device for management of musicInfo
- Publication number
- JPH08265660A JPH08265660A JP7060206A JP6020695A JPH08265660A JP H08265660 A JPH08265660 A JP H08265660A JP 7060206 A JP7060206 A JP 7060206A JP 6020695 A JP6020695 A JP 6020695A JP H08265660 A JPH08265660 A JP H08265660A
- Authority
- JP
- Japan
- Prior art keywords
- information
- music
- sound
- section
- sound information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Signal Processing For Digital Recording And Reproducing (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明は、映像情報に含まれる音
情報、或いは音情報そのものから音楽が存在する部分を
検出し、音楽の時間的な発生位置、種類等の特徴に基づ
いて映像情報或いは音情報を制御する音楽管理方法およ
び装置に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention detects a portion in which music exists from sound information included in video information or the sound information itself, and based on characteristics such as a temporal generation position and type of music, the video information. Alternatively, the present invention relates to a music management method and device for controlling sound information.
【０００２】[0002]
【従来の技術】音情報から音楽を検出する方法は、過去
にも報告されている（ＭｉｃｈａｅｌＪ Ｈａｗｌｅ
ｙ，“Ｓｔｒｕｃｔｕｒｅ ｏｕｔ ｏｆ Ｓｏｕｎ
ｄ”，博士論文，ＭＩＴ，１９９３）が、具体的な利用
方法については述べられていない。音楽に着目した従来
技術では、音情報が音楽であることを前提として周波数
解析を施し、楽譜を作成するシステムの研究（Ｍｏｎｔ
−Ｒｅｙｎａｕｄ，“Ｐｒｏｂｌｅｍ−Ｓｏｌｖｉｎｇ
Ｓｔｒａｔｅｇｉｅｓ ｉｎ ａ ＭｕｓｉｃＴｒａ
ｎｓｃｒｉｐｔｉｏｎ Ｓｙｓｔｅｍ”，Ｐｒｏｃ．ｏ
ｆ ＩＪＣＡＩ８５，１９８５）が多くなされてきた。2. Description of the Related Art A method for detecting music from sound information has been reported in the past (Michael J Hawle.
y, “Structure out of Soun
d ", doctoral dissertation, MIT, 1993) does not describe a specific usage method. In the conventional technique focusing on music, frequency analysis is performed on the assumption that the sound information is music, and a score is created. System research (Mont
-Reynaud, "Problem-Solving
Strategies in a MusicTra
Nscription System ", Proc.o
f IJCAI85, 1985) have been made.
【０００３】また、入力された音情報の特徴に基づいて
ＣＧ等で描かれたアニメーションを制御する装置（松下
電器、３ＤＯ）が既に商品化されている。この装置で
は、音楽のリズムや強さに合わせてアニメーションの動
きや色を変化させ、聴覚からの情報以外に視覚からの情
報を付加することによって、聴覚情報を強調すると共に
娯楽性を高めている。A device (Matsushita Electric Co., 3DO) for controlling an animation drawn by CG or the like based on the characteristics of input sound information has already been commercialized. In this device, the movement and color of animation are changed according to the rhythm and strength of music, and visual information is added to information other than auditory information to enhance auditory information and enhance entertainment. .
【０００４】上記に述べた技術は、いずれも音情報から
特徴を抽出し、入力とは別のものを出力するものである
が、音情報から様々な特徴量を抽出し、入力された音情
報や音情報が含まれている映像を制御するものとして
は、一定の特徴量が存在する音や映像の区間を時系列方
向につなぎ合わせて速見や速聴きを可能にする方法（南
ら、“速見速聴き装置および方法”、特願平６−２２７
５４５号）がある。この装置および方法は、長い映像や
音に必要とされる再生時間を短縮することを目的として
いる。All of the above-mentioned techniques extract features from sound information and output a feature different from the input. However, various feature quantities are extracted from the sound information and the input sound information is extracted. To control an image that contains sound information or sound information, a method that connects the sections of the sound or image that have a certain feature amount in the time-series direction to enable quick viewing or listening (see Minami et al. Quick-listening and listening device and method ", Japanese Patent Application No. 6-227
545). The device and method are intended to reduce the playback time required for long images and sounds.
【０００５】[0005]
【発明が解決しようとする課題】ところで、音情報に含
まれる音楽は、音楽番組の様にそれ自体が内容を表す場
合や、ＢＧＭの様に雰囲気や盛り上がりを表現する場合
等、重要な意味を持つことが多い。しかし、従来の技術
では、様々な音が混在する音情報から音楽だけを検出
し、利用するものはなかった。By the way, the music included in the sound information has an important meaning such as when the music itself expresses the contents like a music program or when the atmosphere or excitement is expressed like the BGM. I often have one. However, there is no conventional technique that detects and uses only music from sound information in which various sounds are mixed.
【０００６】本発明の目的は、上に述べたような音楽の
性質を有効に引き出し、種々の応用に利用することが可
能な音楽管理方法及び装置を提供することにある。An object of the present invention is to provide a music management method and apparatus which can effectively utilize the properties of music described above and can be utilized in various applications.
【０００７】[0007]
【課題を解決するための手段】上記の目的を達成するた
め、本発明の請求項１の音楽管理方法は、映像情報或い
は音情報を入力する映像情報或いは音情報の入力段階
と、該映像情報或いは音情報から音楽を検出する音楽検
出段階と該検出された音楽の特徴に基づいて該映像情報
或いは音情報を制御する映像或いは音情報の制御段階
と、を有することを特徴とする。In order to achieve the above object, the music management method according to claim 1 of the present invention comprises a step of inputting image information or sound information for inputting image information or sound information, and the image information. Alternatively, the method is characterized by including a music detection step of detecting music from sound information and a control step of video or sound information for controlling the video information or sound information based on the detected characteristics of the music.
【０００８】また、本発明の請求項２の音楽管理方は、
映像情報或いは音情報の入力段階は、入力された映像情
報或いは音情報がアナログ信号の場合にはＡ／Ｄ変換し
て入力する入力課程、および、入力された映像情報或い
は音情報を蓄積する課程、のいずれかまたは両方を有す
ることを特徴とする。The music management method according to claim 2 of the present invention is
The input stage of image information or sound information includes an input process of A / D converting and inputting when the input image information or sound information is an analog signal, and a process of accumulating the inputted image information or sound information. , Or both of them.
【０００９】また、本発明の請求項３の音楽管理方法
は、音楽検出段階は、検出された音楽の位置情報を保存
する課程、および、検出された音楽を分類し、該分類し
た情報を保存する課程、および、検出された音楽から同
じ音が出現する区間の音を保存する課程、のうち１以上
の課程を有することを特徴とする。According to a third aspect of the music management method of the present invention, in the music detecting step, the process of storing the position information of the detected music, the detected music is classified, and the classified information is stored. And one of the steps of storing the sound in the section in which the same sound appears from the detected music, and one or more of the steps.
【００１０】また、本発明の請求項４の音楽管理方法
は、映像情報或いは音情報の制御段階は、入力された映
像情報或いは音情報が複数の場合には、その中から音楽
検出段階において音楽が検出されたものを選択し、逐次
再生する課程、および、入力された映像情報或いは音情
報の音楽が存在する区間を視覚的に表示する課程、のい
ずれかまたは両方を有することを特徴とする。According to a fourth aspect of the music management method of the present invention, in the step of controlling image information or sound information, when a plurality of pieces of input image information or sound information are input, the music is detected in the music detection step. Is selected and sequentially reproduced, and / or a process of visually displaying a section in which music of input video information or sound information exists is characterized by having either or both. .
【００１１】また、本発明の請求項５の音楽管理装置
は、映像情報或いは音情報を入力する映像情報或いは音
情報入力部と、該映像情報或いは音情報から音楽を検出
する音楽検出部と、該検出された音楽の特徴に基づいて
該映像情報或いは音情報を制御する映像情報或いは音情
報制御部と、を具備することを特徴とする。According to a fifth aspect of the present invention, in the music management device, a video information or sound information input unit for inputting video information or sound information, and a music detection unit for detecting music from the video information or sound information. A video information or sound information control unit for controlling the video information or sound information based on the detected characteristics of the music.
【００１２】また、本発明の請求項６の音楽管理装置
は、映像情報或いは音情報入力部は、入力された映像情
報或いは音情報がアナログ信号の場合にはＡ／Ｄ変換す
るＡ／Ｄ変換部、および、入力された映像情報或いは音
情報を蓄積する映像情報或いは音情報蓄積部、のいずれ
かまたは両方を具備することを特徴とする。Further, in the music management apparatus according to claim 6 of the present invention, the video information or sound information input section performs A / D conversion when the input video information or sound information is an analog signal. And a video information or sound information storage unit that stores input video information or sound information, or both.
【００１３】また、本発明の請求項６の音楽管理装置
は、音楽検出部は、映像情報或いは音情報から波形処理
によって音楽を検出する波形処理部、および、検出され
た音楽の位置情報を保存する位置情報蓄積部、および、
検出された音楽から同じ音が出現する区間の音を検出す
る波形処理部、および、検出された音楽を分類し、該分
類した情報を保存する分類情報蓄積部、のうちの１以上
を具備することを特徴とする。According to a sixth aspect of the music management apparatus of the present invention, the music detecting section stores a waveform processing section for detecting music from image information or sound information by waveform processing, and position information of the detected music. Location information storage unit, and
At least one of a waveform processing unit that detects a sound in a section in which the same sound appears from the detected music and a classification information storage unit that classifies the detected music and stores the classified information. It is characterized by
【００１４】さらに、本発明の請求項８の音楽管理装置
は、映像情報或いは音情報制御部は、入力された映像情
報或いは音情報が複数の場合には、その中から音楽検出
部によって音楽が検出されたものを選択し、逐次再生す
る音楽再生部、および、入力された映像情報或いは音情
報の音楽の存在する区間を視覚的に表示する音楽区間表
示部、のいずれかまたは両方を具備することを特徴とす
る。Further, in the music management apparatus according to claim 8 of the present invention, the video information or sound information control section, when the input video information or sound information is plural, the music is detected by the music detection section. It is provided with either or both of a music reproducing section that selects and sequentially reproduces a detected one, and a music section display section that visually displays a section where music of input video information or sound information exists. It is characterized by
【００１５】[0015]
【作用】本発明の請求項１および請求項５の音楽管理方
法および装置では、映像情報、或いは音情報を入力し、
その入力情報から音楽を検出し、検出された音楽の特徴
に基づいて入力情報を制御することにより、映像情報或
いは音情報の管理を可能にする。In the music management method and apparatus according to the first and fifth aspects of the present invention, image information or sound information is input,
By detecting music from the input information and controlling the input information based on the detected characteristics of the music, it is possible to manage video information or sound information.
【００１６】また、本発明の請求項２および請求項６の
音楽管理方法および装置では、Ａ／Ｄ変換を行って映像
情報或いは音情報を入力することにより、その入力情報
がアナログ信号であるときでも管理を可能にする。或い
は、その入力情報を蓄積することにより、音楽検出処理
後でも入力情報の読み出しを可能にする。In the music management method and apparatus according to the second and sixth aspects of the present invention, when the input information is an analog signal by performing A / D conversion and inputting the video information or the sound information. But it can be managed. Alternatively, by accumulating the input information, the input information can be read even after the music detection processing.
【００１７】また、本発明の請求項３および請求項７の
音楽管理方法および装置では、音情報から波形処理によ
って音楽を検出することにより、音楽の存在を容易に分
かるようにする。或いは、検出された音楽の位置情報を
保存することにより、音楽区間の読み出しを可能にす
る。或いは、検出された音楽を分類し、分類情報を保存
することにより、所望の分類に属する音楽の読み出しを
可能にする。或いは、検出された音楽から同じ音が出現
する区間の音を保存することにより、繰り返される音
（例えば音楽のサビ）をキーにした検索を可能にする。Further, in the music management method and apparatus according to claims 3 and 7 of the present invention, the presence of music can be easily recognized by detecting the music from the sound information by the waveform processing. Alternatively, it is possible to read the music section by storing the position information of the detected music. Alternatively, by classifying the detected music and storing the classification information, it is possible to read out the music belonging to the desired classification. Alternatively, by storing a sound in a section in which the same sound appears from the detected music, it is possible to perform a search with a repeated sound (for example, a chorus of music) as a key.
【００１８】さらに、本発明の請求項４および請求項８
の音楽管理方法および装置では、入力情報が複数の場合
には、音楽が検出された入力情報を選択し、逐次再生す
ることにより、音楽を連続して聞くことができるように
する。或いは、入力情報の音楽が存在する区間を視覚的
に表示することにより、音楽が挿入されている区間のバ
ランスや割合が容易に分かるようにする。Further, claim 4 and claim 8 of the present invention.
In the above music management method and device, when the input information is plural, the input information in which the music is detected is selected and sequentially reproduced so that the music can be continuously heard. Alternatively, by visually displaying the section where the music of the input information exists, the balance and ratio of the section where the music is inserted can be easily understood.
【００１９】[0019]
【実施例】次に、本発明の実施例について図面を参照し
て詳しく説明する。Embodiments of the present invention will now be described in detail with reference to the drawings.
【００２０】図１は本発明の一実施例の音楽管理装置の
概略構成を示すブロック図である。本実施例の音楽管理
装置は、映像情報、或いは音情報を入力する映像・音情
報入力部１０１と、映像情報に含まれる音情報、或いは
音情報そのものから音楽を検出する音楽検出部１０４
と、音楽検出部１０４によって得られた情報に従って入
力された映像情報、或いは音情報を制御する映像・音情
報制御部１０８から構成されている。FIG. 1 is a block diagram showing the schematic arrangement of a music management apparatus according to an embodiment of the present invention. The music management apparatus according to the present exemplary embodiment includes a video / sound information input unit 101 that inputs video information or sound information, and a music detection unit 104 that detects music from the sound information included in the video information or the sound information itself.
And a video / sound information control unit 108 for controlling video information or sound information input according to the information obtained by the music detection unit 104.
【００２１】映像・音情報入力部１０１は、入力された
情報がアナログ信号の場合にはＡ／Ｄ変換するＡ／Ｄ変
換部１０２と、映像や音情報を蓄積する映像・音情報蓄
積部１０３を具備し、音楽検出部１０４は、入力された
映像や音情報から音楽を検出するなどの波形処理をする
波形処理部１０５と、検出された音楽の位置や時間情報
を蓄積する位置情報蓄積部１０６と、検出された音楽の
分類情報を蓄積する分類情報蓄積部１０７を具備してい
る。映像・音情報制御部１０８は、音楽区間の表示を視
覚的に行うための音楽区間表示部１０９を備えている。The video / sound information input unit 101 includes an A / D conversion unit 102 for A / D converting the input information when the input information is an analog signal, and a video / sound information storage unit 103 for storing the video / sound information. The music detection unit 104 includes a waveform processing unit 105 that performs waveform processing such as detecting music from input video and sound information, and a position information storage unit that stores the position and time information of the detected music. 106 and a classification information storage unit 107 that stores the classification information of the detected music. The video / sound information control unit 108 includes a music section display unit 109 for visually displaying a music section.
【００２２】図５は、音楽区間表示部１０９が音楽の存
在する区間を視覚的に表示した場合の一実施例を示した
もので、５０１、５０２は音楽区間表示用インジケータ
である。インジケータ５０１に示すように、ある入力情
報の音楽の存在する区間が時系列に表示される。また、
別の入力情報について、音楽の存在する区間をインジケ
ータ５０２のように同時に表示することも可能である。FIG. 5 shows an embodiment in which the music section display unit 109 visually displays a section in which music is present. 501 and 502 are music section display indicators. As shown by the indicator 501, a section in which music of certain input information is present is displayed in time series. Also,
For another input information, it is possible to simultaneously display the section in which music is present, like the indicator 502.
【００２３】図２は、本発明の音楽管理装置を計算機等
でソフトウェア的に実現した場合の処理の流れを示すフ
ローチャートである。この場合、まず、入力情報がアナ
ログ信号かどうかを判断する。アナログ信号の場合に
は、Ａ／Ｄ変換２０１を行う。次に、入力情報の蓄積が
必要な場合には、映像・音情報蓄積２０２を行う。そし
て、入力された情報に対して音楽検出２０３を行い、検
出された情報に基づいて映像・音情報制御２０４を行
う。FIG. 2 is a flow chart showing the flow of processing when the music management apparatus of the present invention is realized by software such as a computer. In this case, first, it is determined whether the input information is an analog signal. In the case of an analog signal, A / D conversion 201 is performed. Next, when it is necessary to store the input information, the video / sound information storage 202 is performed. Then, music detection 203 is performed on the input information, and video / sound information control 204 is performed based on the detected information.
【００２４】図３は、図２の音楽検出２０３における処
理の流れを示したフローチャートである。まず、入力情
報に対して波形処理が必要かどうかを判断し、必要な場
合には波形処理３０１を行う。波形処理３０１では、音
楽の繰り返し現れる音の検出が行われ、音楽の検出がな
される。検出の方法としては、周波数スペクトルの安定
性を利用したもの（南ら、“音可視化方法および装
置”、特願平６−３１８１２２号）等が考えられる。波
形処理が必要でない場合（ＣＤ等の音情報のように、は
じめから音楽であることと音楽の種類が分かっているよ
うな場合）には、分類情報蓄積３０３が行われる。分類
情報蓄積３０３では、音楽の種類（波形処理による場合
では、音楽の優勢な周波数スペクトルの周波数方向の位
置や組み合わせに基づく）によって分類が行われる。次
に、入力情報における音楽の位置情報が必要かどうかが
判断され、必要な場合には、位置情報蓄積３０２が行わ
れる。位置情報蓄積が必要でない場合には、分類情報が
必要かどうかの判断が行われる。位置情報のみで良い場
合には、そのまま終了し、分類情報が必要な場合には、
分類情報蓄積３０３が行われる。FIG. 3 is a flow chart showing the flow of processing in the music detection 203 of FIG. First, it is determined whether or not waveform processing is necessary for input information, and if necessary, waveform processing 301 is performed. In the waveform processing 301, the repeated sound of music is detected and the music is detected. As a detection method, a method utilizing the stability of the frequency spectrum (Minami et al., "Sound Visualization Method and Apparatus", Japanese Patent Application No. 6-318122) and the like can be considered. When the waveform processing is not necessary (as in the case of sound information such as CD, when it is music and the type of music is known from the beginning), the classification information accumulation 303 is performed. In the classification information storage 303, classification is performed according to the type of music (in the case of waveform processing, based on the position and combination in the frequency direction of the dominant frequency spectrum of music). Next, it is judged whether or not the position information of the music in the input information is necessary, and if necessary, the position information accumulation 302 is performed. If location information storage is not required, it is determined whether the classification information is required. If only location information is required, end the process as is. If classification information is required,
The classification information storage 303 is performed.
【００２５】図４は、図２の映像・音情報制御２０４に
おける処理の流れを示したフローチャートであり、音楽
の存在区間を視覚的に表示する場合には、音楽区間表示
４０１が行われる。この場合の表示処理４０１では、音
楽の存在区間を時系列的に把握し、その時系列的な関係
を距離的な関係に変換して視覚的な情報を作成し、これ
を表示する。FIG. 4 is a flow chart showing the flow of processing in the video / sound information control 204 of FIG. 2. In the case of visually displaying the music existing section, the music section display 401 is performed. In the display process 401 in this case, the music existence section is grasped in time series, the time series relation is converted into a distance relation, visual information is created, and this is displayed.
【００２６】以下に、本発明の利用例を示す。The following is an example of the use of the present invention.
【００２７】（１）音楽番組選択装置 映像・音情報入力部１０１において、放送局の出力を複
数同時に受信し、映像・音情報入力部１０１からの出力
を並列に音楽検出する。映像・音情報制御部１０８は、
その中から音楽が含まれる放送局を選択し、周波数を合
わせるように映像・音情報制御部１０８を制御すること
で、常に音楽が流れる様になる。各放送局の出力を並列
に処理できない場合でも、放送局の出力を時分割で切り
替えることにより同様の機能を実現することができる。
放送局の選択を手動で行う必要がないので、放送局の数
が多い程効果的である。(1) Music program selection device The video / sound information input unit 101 receives a plurality of broadcast station outputs at the same time, and detects the outputs from the video / sound information input unit 101 in parallel. The video / sound information control unit 108
By selecting a broadcasting station including music from among them and controlling the video / sound information control unit 108 so as to match the frequencies, the music always flows. Even when the output of each broadcasting station cannot be processed in parallel, the same function can be realized by switching the output of the broadcasting station in time division.
Since it is not necessary to manually select a broadcasting station, the larger the number of broadcasting stations, the more effective.
【００２８】（２）音楽分類装置 波形処理部１０５において検出された音楽を、音楽の優
勢な周波数スペクトルの周波数方向の位置や組み合わせ
に基づき、分類情報蓄積部１０７において分類し、その
情報を分類情報蓄積部１０７に蓄積する。映像・音情報
制御部１０８は、この情報に基づいて映像・音情報蓄積
部１０３に蓄積された映像、或いは音情報を読み出す。
また、音楽の中で繰り返し現れる区間を波形処理部１０
５で検出し、その区間を位置情報蓄積部１０６、或いは
分類情報蓄積部１０７に蓄積しておき、蓄積された区間
と映像・音情報蓄積部１０３に蓄積された情報を波形処
理部１０５でマッチングすれば、繰り返し現れる区間
（音楽のサビの部分等）をキーにして音楽を検索するこ
とも可能である。音楽のサビの部分は記憶に残っている
場合が多いので、この様な検索方法は非常に効果的であ
る。(2) Music classification device The music detected by the waveform processing unit 105 is classified by the classification information storage unit 107 based on the position and combination in the frequency direction of the dominant frequency spectrum of the music, and the information is classified information. The data is stored in the storage unit 107. The video / sound information control unit 108 reads out the video or sound information stored in the video / sound information storage unit 103 based on this information.
In addition, the waveform processing unit 10 detects a section that appears repeatedly in music.
5, the section is stored in the position information storage unit 106 or the classification information storage unit 107, and the stored section and the information stored in the video / sound information storage unit 103 are matched by the waveform processing unit 105. By doing so, it is possible to search for music by using a repeatedly appearing section (such as a chorus portion of music) as a key. Since the chorus part of music is often memorized, such a search method is very effective.
【００２９】（３）サウンド・トラック作成装置 映画やドラマ等を入力し、音楽検出部１０４において音
楽を検出し、映像・音情報制御部１０８によって音楽区
間を読み出しながら再生することにより、サウンド・ト
ラックが作成可能である。市販のサウンド・トラックが
収録された媒体を入手せずに、サウンド・トラックが作
成可能であるため効果的である。(3) Sound Track Creating Device A sound track is created by inputting a movie, a drama, etc., detecting music in the music detecting section 104, and reproducing the music section by the video / sound information control section 108 while reading it Can be created. This is effective because the sound track can be created without obtaining a medium containing a commercially available sound track.
【００３０】（４）カラオケ映像作成装置 映画やテレビ等の映像を入力し、音楽検出部１０４にお
いて音楽を検出し、映像・音情報制御部１０８によって
音楽区間を読み出すことによってカラオケ用の映像が作
成できる。予め作成したいカラオケの曲が分かっている
場合には、サビの部分等を分類情報蓄積部１０７に蓄積
しておき、波形処理部１０５において、入力とのマッチ
ングを行うことで自動的に作成できる。従来のようにカ
ラオケ映像用のロケを行わずに、カラオケ映像を作成で
きるため効果的である。(4) Karaoke image creating apparatus An image for karaoke is created by inputting an image of a movie or a television, detecting music in the music detecting section 104, and reading out a music section by the image / sound information control section 108. it can. When the karaoke piece to be created is known in advance, the chorus part or the like is stored in the classification information storage section 107, and the waveform processing section 105 can automatically create it by performing matching with the input. This is effective because it is possible to create a karaoke video without performing the location for the karaoke video as in the past.
【００３１】（５）編集支援装置 映画やドラマ等を入力し、音楽検出部１０４において音
楽を検出、音楽の位置を位置情報蓄積部１０６に蓄積
し、映像・音情報制御部１０８によって音楽が挿入され
ている区間が図５の５０１や５０２のように視覚的に表
示され、音楽が出現する頻度やバランスが把握できる。
また、編集者や映像のジャンル別に音楽の挿入位置が分
類情報蓄積部１０７に蓄えられ、自作の映像と比較する
ことも可能である。自作の映像の展開（盛り上がり等）
のバランスをチェックできるため、編集支援ツールとし
て効果的である。(5) Editing support device A movie or drama is input, music is detected by the music detection unit 104, the position of the music is stored in the position information storage unit 106, and music is inserted by the video / sound information control unit 108. The displayed section is visually displayed as 501 and 502 in FIG. 5, and the frequency and balance of appearance of music can be grasped.
In addition, the insertion position of music according to the editor and the genre of the video is stored in the classification information storage unit 107, and it is possible to compare the position with the self-made video. Development of own video (excitement, etc.)
Because it can check the balance of, it is effective as an editing support tool.
【００３２】[0032]
【発明の効果】以上の説明で明らかなように、本発明の
音楽管理方法および装置よれば、以下に示すような効果
が得られる。As is apparent from the above description, according to the music management method and apparatus of the present invention, the following effects can be obtained.
【００３３】まず、本発明の請求項１および請求項５の
音楽管理方法および装置は、映像情報、或いは音情報を
入力し、その入力情報から音楽を検出し、検出された音
楽の特徴に基づいて入力情報を制御することができるた
め、映像情報或いは音情報を管理できる。First, the music management method and apparatus according to claims 1 and 5 of the present invention inputs video information or sound information, detects music from the input information, and based on the characteristics of the detected music. Since the input information can be controlled by using the input information, the video information or the sound information can be managed.
【００３４】また、本発明の請求項２および請求項６の
音楽管理方法および装置は、Ａ／Ｄ変換を行って映像情
報或いは音情報を入力することができるため、特に、入
力情報がアナログ信号であるときでも管理できる。或い
は、その入力情報を蓄積することができるため、特に、
音楽検出後でも入力情報の読み出しができる。Further, the music management method and apparatus according to the second and sixth aspects of the present invention can input the image information or the sound information by performing A / D conversion. Can be managed even when Alternatively, because the input information can be stored,
Input information can be read even after music detection.
【００３５】また、本発明の請求項３および請求項７の
音楽管理方法および装置は、音情報から波形処理によっ
て音楽を検出するため、特に、音楽の存在が容易に分か
る。或いは、検出された音楽の位置情報を保存すること
ができるため、特に、音楽区間の読み出しができる。或
いは、検出された音楽を分類し、分類情報を保存するこ
とができるため、特に、所望の分類に属する音楽の読み
出しができる。或いは、検出された音楽から同じ音が出
現する区間の音を保存することができるため、特に、繰
り返される音（例えば音楽のサビ）をキーにして検索す
ることができる。Further, since the music management method and apparatus according to claims 3 and 7 of the present invention detect the music by the waveform processing from the sound information, the existence of the music can be particularly easily known. Alternatively, since the position information of the detected music can be stored, the music section can be read out in particular. Alternatively, since the detected music can be classified and the classification information can be stored, the music belonging to the desired classification can be read out. Alternatively, since it is possible to save the sound in the section in which the same sound appears from the detected music, it is possible to search using the repeated sound (for example, music chorus) as a key.
【００３６】さらに、本発明の請求項４および請求項８
の音楽管理方法および装置は、入力情報が複数の場合に
は、音楽が検出された入力情報を選択し、逐次再生する
ことができるため、特に、音楽を連続して聞くことがで
きる。或いは、入力情報の音楽が存在する区間を視覚的
に表示することができるため、特に、音楽が挿入されて
いる区間のバランスや割合が分かる。Further, claim 4 and claim 8 of the present invention.
In the music management method and apparatus described above, when there are a plurality of pieces of input information, the input information in which music has been detected can be selected and sequentially played back, so that the music can be listened to continuously. Alternatively, it is possible to visually display the section in which the music of the input information exists, so that the balance and ratio of the section in which the music is inserted can be known particularly.
【図１】本発明の一実施例の音楽管理装置の概略構成を
示すブロック図である。FIG. 1 is a block diagram showing a schematic configuration of a music management device according to an embodiment of the present invention.
【図２】本発明の一実施例の音楽管理装置を計算機等で
ソフトウェア的に実現した場合の処理の流れを示すフロ
ーチャートである。FIG. 2 is a flowchart showing a flow of processing when the music management apparatus according to the embodiment of the present invention is realized by software such as a computer.
【図３】上記実施例の処理中の音楽検出の処理の流れを
示すフローチャートである。FIG. 3 is a flowchart showing a flow of music detection processing during the processing of the embodiment.
【図４】上記実施例の処理中の映像・音情報制御の処理
の流れを示すフローチャートである。FIG. 4 is a flowchart showing a processing flow of video / sound information control during processing of the above embodiment.
【図５】上記実施例の音楽管理装置における音楽区間表
示部の表示例を示す図である。FIG. 5 is a diagram showing a display example of a music section display unit in the music management apparatus of the above-mentioned embodiment.
１０１…映像・音情報入力部 １０２…Ａ／Ｄ変換部 １０３…映像・音情報蓄積部 １０４…音楽検出部 １０５…波形処理部 １０６…位置情報蓄積部 １０７…分類情報蓄積部 １０８…映像・音情報制御部 １０９…音楽区間表示部 ２０１…Ａ／Ｄ変換 ２０２…映像・音情報蓄積 ２０３…音楽検出 ２０４…映像・音情報制御 ３０１…波形処理 ３０２…位置情報蓄積 ３０３…分類情報蓄積 ４０１…音楽区間表示 ５０１、５０２…音楽区間表示用インジケータ 101 ... Video / sound information input section 102 ... A / D conversion section 103 ... Video / sound information storage section 104 ... Music detection section 105 ... Waveform processing section 106 ... Position information storage section 107 ... Classification information storage section 108 ... Video / sound Information control section 109 ... Music section display section 201 ... A / D conversion 202 ... Video / sound information storage 203 ... Music detection 204 ... Video / sound information control 301 ... Waveform processing 302 ... Position information storage 303 ... Classification information storage 401 ... Music Section display 501, 502 ... Indicator for displaying music section
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｇ１１Ｂ 27/34 Ｇ１１Ｂ 27/34 Ｐ ─────────────────────────────────────────────────── ─── Continuation of the front page (51) Int.Cl. 6 Identification code Internal reference number FI Technical display location G11B 27/34 G11B 27/34 P
Claims (8)
報或いは音情報の入力段階と、 該映像情報或いは音情報から音楽を検出する音楽検出段
階と、 該検出された音楽の特徴に基づいて該映像情報或いは音
情報を制御する映像或いは音情報の制御段階と、 を有することを特徴とする音楽管理方法。1. A step of inputting image information or sound information for inputting image information or sound information, a step of detecting music from the image information or sound information, and a step of detecting the music based on characteristics of the detected music. A music management method comprising: a step of controlling image or sound information for controlling image information or sound information.
にはＡ／Ｄ変換して入力する入力課程、 および、入力された映像情報或いは音情報を蓄積する課
程、 のいずれかまたは両方を有することを特徴とする請求項
１記載の音楽管理方法。2. The step of inputting video information or sound information includes an input process of A / D converting and inputting when the input video information or sound information is an analog signal, and the input video information or sound. The music management method according to claim 1, further comprising one or both of a process of accumulating information.
存する課程、 および、検出された音楽から同じ音が出現する区間の音
を保存する課程、 のうち１以上の課程を有することを特徴とする請求項１
または請求項２記載の音楽管理方法。3. The music detecting step includes a step of storing the position information of the detected music, a step of classifying the detected music and storing the classified information, and the same sound from the detected music. The process of preserving the sound in the section in which is appears has one or more processes of the above.
Alternatively, the music management method according to claim 2.
の中から音楽検出段階において音楽が検出されたものを
選択し、逐次再生する課程、 および、入力された映像情報或いは音情報の音楽が存在
する区間を視覚的に表示する課程、 のいずれかまたは両方を有することを特徴とする請求項
１または請求項２記載の音楽管理方法。4. In the step of controlling image information or sound information, when a plurality of pieces of input image information or sound information are input, one from which music is detected in the music detection step is selected and sequentially reproduced. 3. The music management method according to claim 1 or 2, further comprising one or both of a course and a course of visually displaying a section where music of the input video information or sound information exists. .
報或いは音情報入力部と、 該映像情報或いは音情報から音楽を検出する音楽検出部
と、 該検出された音楽の特徴に基づいて該映像情報或いは音
情報を制御する映像情報或いは音情報制御部と、 を具備することを特徴とする音楽管理装置。5. An image information or sound information input section for inputting image information or sound information, a music detection section for detecting music from the image information or sound information, and the image based on the detected characteristics of the music. A music management device comprising: a video information or sound information control unit for controlling information or sound information.
にはＡ／Ｄ変換するＡ／Ｄ変換部、 および、入力された映像情報或いは音情報を蓄積する映
像情報或いは音情報蓄積部、 のいずれかまたは両方を具備することを特徴とする請求
項５記載の音楽管理装置。6. The image information or sound information input section, the A / D conversion section for A / D converting when the inputted image information or sound information is an analog signal, and the inputted image information or sound information. 6. The music management device according to claim 5, further comprising one or both of image information or sound information storage unit for storing the information.
する波形処理部、 および、検出された音楽の位置情報を保存する位置情報
蓄積部、 および、検出された音楽から同じ音が出現する区間の音
を検出する波形処理部、 および、検出された音楽を分類し、該分類した情報を保
存する分類情報蓄積部、 のうちの１以上を具備することを特徴とする請求項５ま
たは請求項６記載の音楽管理装置。7. The music detection unit includes a waveform processing unit that detects music from image information or sound information by waveform processing, a position information storage unit that stores position information of the detected music, and the detected music. A waveform processing unit that detects a sound in a section in which the same sound appears, and a classification information storage unit that classifies the detected music and stores the classified information. The music management device according to claim 5 or claim 6.
の中から音楽検出部によって音楽が検出されたものを選
択し、逐次再生する音楽再生部、 および、入力された映像情報或いは音情報の音楽の存在
する区間を視覚的に表示する音楽区間表示部、 のいずれかまたは両方を具備することを特徴とする請求
項５または請求項６記載の音楽管理装置。8. The video information or sound information control section selects, when there is a plurality of input video information or sound information, one from which music is detected by the music detection section, and sequentially reproduces the music. 7. A reproduction section and a music section display section for visually displaying a section where music of input video information or sound information is present are provided, or both of them are provided. The music management device described.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7060206A JPH08265660A (en) | 1995-03-20 | 1995-03-20 | Method and device for management of music |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7060206A JPH08265660A (en) | 1995-03-20 | 1995-03-20 | Method and device for management of music |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH08265660A true JPH08265660A (en) | 1996-10-11 |
Family
ID=13135452
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP7060206A Pending JPH08265660A (en) | 1995-03-20 | 1995-03-20 | Method and device for management of music |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH08265660A (en) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2001016935A1 (en) * | 1999-08-26 | 2001-03-08 | Sony Corporation | Information retrieving/processing method, retrieving/processing device, storing method and storing device |
| JP2001109471A (en) * | 1999-10-12 | 2001-04-20 | Nippon Telegr & Teleph Corp <Ntt> | Music retrieval device, music retrieval method and recording medium recording music retrieval program |
| JP2002504284A (en) * | 1997-06-06 | 2002-02-05 | トムソン コンシユーマ エレクトロニクス インコーポレイテツド | Apparatus and method for processing programs of first and second types |
| JP2002344852A (en) * | 2001-05-14 | 2002-11-29 | Sony Corp | Information signal processing unit and information signal processing method |
| WO2007132569A1 (en) * | 2006-05-11 | 2007-11-22 | Mitsubishi Electric Corporation | Music section detecting method and its device, data recording method, and its device |
| JPWO2006003848A1 (en) * | 2004-06-30 | 2008-04-17 | 松下電器産業株式会社 | Music information calculation apparatus and music reproduction apparatus |
| JP2008098726A (en) * | 2006-10-06 | 2008-04-24 | Sharp Corp | Av device having function of generating configuration information for progress bar with feature information |
| US8855796B2 (en) | 2005-12-27 | 2014-10-07 | Mitsubishi Electric Corporation | Method and device for detecting music segment, and method and device for recording data |
-
1995
- 1995-03-20 JP JP7060206A patent/JPH08265660A/en active Pending
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002504284A (en) * | 1997-06-06 | 2002-02-05 | トムソン コンシユーマ エレクトロニクス インコーポレイテツド | Apparatus and method for processing programs of first and second types |
| US6966064B1 (en) | 1997-06-06 | 2005-11-15 | Thomson Licensing | System and method for processing audio-only programs in a television receiver |
| WO2001016935A1 (en) * | 1999-08-26 | 2001-03-08 | Sony Corporation | Information retrieving/processing method, retrieving/processing device, storing method and storing device |
| US7260226B1 (en) | 1999-08-26 | 2007-08-21 | Sony Corporation | Information retrieving method, information retrieving device, information storing method and information storage device |
| US8165306B2 (en) | 1999-08-26 | 2012-04-24 | Sony Corporation | Information retrieving method, information retrieving device, information storing method and information storage device |
| JP2001109471A (en) * | 1999-10-12 | 2001-04-20 | Nippon Telegr & Teleph Corp <Ntt> | Music retrieval device, music retrieval method and recording medium recording music retrieval program |
| JP2002344852A (en) * | 2001-05-14 | 2002-11-29 | Sony Corp | Information signal processing unit and information signal processing method |
| JP4817388B2 (en) * | 2004-06-30 | 2011-11-16 | パナソニック株式会社 | Music information calculation apparatus and music reproduction apparatus |
| JPWO2006003848A1 (en) * | 2004-06-30 | 2008-04-17 | 松下電器産業株式会社 | Music information calculation apparatus and music reproduction apparatus |
| US8855796B2 (en) | 2005-12-27 | 2014-10-07 | Mitsubishi Electric Corporation | Method and device for detecting music segment, and method and device for recording data |
| WO2007132569A1 (en) * | 2006-05-11 | 2007-11-22 | Mitsubishi Electric Corporation | Music section detecting method and its device, data recording method, and its device |
| US8682132B2 (en) | 2006-05-11 | 2014-03-25 | Mitsubishi Electric Corporation | Method and device for detecting music segment, and method and device for recording data |
| JP2008098726A (en) * | 2006-10-06 | 2008-04-24 | Sharp Corp | Av device having function of generating configuration information for progress bar with feature information |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6414914B1 (en) | Multimedia search and indexing for automatic selection of scenes and/or sounds recorded in a media for replay using audio cues | |
| US5719344A (en) | Method and system for karaoke scoring | |
| KR100228028B1 (en) | Recording medium which can cope with various languages and reproduction apparatus | |
| US6031797A (en) | Media playback device capable of shuffled playback based on a user's preferences | |
| US7962007B2 (en) | Signal processing device and signal processing method | |
| EP1791130A2 (en) | Utilizing metadata to improve the access of entertainment content | |
| WO2006095599A1 (en) | Information processing device, information processing method | |
| EP0877378A2 (en) | Method of and apparatus for editing audio or audio-visual recordings | |
| JP2000207415A (en) | Information providing method, information recording medium, information management method and recording and reproducing device | |
| US8655874B2 (en) | Method and apparatus for acquiring and displaying image data corresponding to content data | |
| JPH08265660A (en) | Method and device for management of music | |
| US20060126471A1 (en) | Information recording apparatus, information recording method, information playback apparatus, information playback method, and information recording/playback apparatus | |
| JPH0714299A (en) | Karaoke device with image and image display method | |
| JPH0728830A (en) | Analysis processor of audio data file | |
| JPH0745050A (en) | Automatic sorting and recording device | |
| JP2000207417A (en) | Information providing device and method | |
| JPH06102889A (en) | Information reproducing device | |
| JP2001075992A (en) | Method and system for sound retrieval and computer- readable recording medium | |
| JP3529246B2 (en) | Karaoke video playback device | |
| JPH0895596A (en) | Quick-look and quick-listening device and method thereof | |
| JPH06130982A (en) | Music reproducing device | |
| JPH08249865A (en) | Music reproduction system | |
| JP3088366U (en) | Karaoke equipment | |
| JP3908058B2 (en) | Karaoke device characterized by background video selection system | |
| JP3036523B2 (en) | Karaoke equipment |