JP3434195B2 - 音楽映像管理方法、装置および音楽映像管理プログラムを記録した記録媒体 - Google Patents
音楽映像管理方法、装置および音楽映像管理プログラムを記録した記録媒体Info
- Publication number
- JP3434195B2 JP3434195B2 JP06815898A JP6815898A JP3434195B2 JP 3434195 B2 JP3434195 B2 JP 3434195B2 JP 06815898 A JP06815898 A JP 06815898A JP 6815898 A JP6815898 A JP 6815898A JP 3434195 B2 JP3434195 B2 JP 3434195B2
- Authority
- JP
- Japan
- Prior art keywords
- music
- image
- displayed
- video
- video information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Electrophonic Musical Instruments (AREA)
Description
を例えば実時間で検出し、長期間蓄積された音楽を管理
する方法、装置およびその方法を実現するためのプログ
ラムを記録した記録媒体に関する。
方法としては、音情報の周波数スペクトルのピークが、
周波数方向に対して時間的に安定しているという特徴を
用いる方法(南他、「音解析による映像インデクシン
グ」、電子情報通信学会総合大会、D−12−64、1
997)があるが、長期間に渡って検出し蓄積された音
楽を管理する上で適切なものはなかった。
グ」は、映像に含まれる音情報から、音声や音楽を自動
的に検出し、これらが含まれる部分のみを抜き出して映
像を要約するものである。例えば、歌番組のトークを聞
かずに歌の部分のみを聞きたいといった場合に有効であ
る。音楽が存在する場合、周波数スペクトルのピーク
は、周波数方向に対して時間的に安定しているという特
徴があることから、ピークを検出し、時間的な持続性を
算出することによって、音楽を検出することができる。
であるカット点を検出することによって、効率よく蓄積
・管理するものはある(谷口他、「映像ショット切換え
検出法とその映像アクセスインタフェースへの応用」、
電子情報通信学会論文誌J79−D−2、No.4、1
996)。
の映像アクセスインタフェースへの応用」は、映像の場
面の変わり目であるカット点を自動的に検出し、カット
の直後の静止画を順次並べて表示することによって、映
像の内容が一覧できる。この文献の方法では、映像のフ
レーム間差分を求めることによって、カット点を求める
ことを基本とし、隣接するフレームだけでなく、少し間
をおいたフレームとの差分を評価することによって、フ
ェード等のゆっくりとした変化も捉えることができる。
また、応用例として、1日分のテレビの映像の一覧を作
成し、好きな時間の映像を見ることができるシステムを
構築している。
手段として、例えばテレビ放送の映像情報から入手する
方法が挙げられるが、テレビ放送には様々な音楽が流れ
ているため、単純に音楽を検出するだけの方法では十分
ではない。例えば歌謡曲のみが欲しい場合には予め歌番
組が何曜日の何時にあるかを事前に調べて特定しておか
なければならなかった。
曜日や時間に放送されるため、例えば1ヶ月間の音楽を
当該各音楽に対応する画像と共に一覧表示できるように
すると特定の曜日にどのような音楽が集中して現れるか
などの傾向が判るため、容易に例えば歌番組を特定する
ことができる。
リーに絞り込んでいるため、長期間にわたって蓄積した
としても記録容量の面での難点がなく蓄積が可能であっ
て、過去に見落としていた番組を参照することもでき
る。
間で検出し、長期間にわたって蓄積された音楽を管理す
るようにして音楽を容易に入手可能にすることを目的と
している。
め、本発明においては、映像情報を入力し、映像情報に
おける音情報から音楽を検出し、検出された音楽と当該
音楽に対応する画像とを蓄積し、蓄積された音楽および
画像を圧縮し、圧縮された画像を表示し、表示された画
像に対応する音楽を再生することにより、長期間蓄積さ
れた音楽を聞くことができるようにしている。
うちどの期間の範囲の音楽について表示するかに応じ
て、表示する期間に対応して表示単位を変化させること
により、番組放映の傾向に基づいて音楽を検索すること
ができるようにし、さらに、表示単位内に含まれる画像
を並べて表示することで一覧ができ、画像の数に応じて
早さを変化させながら切り換えて表示することにより、
表示単位内の音楽の数の多さを予測できるようにしてい
る。
図面を参照して説明する。図1は、本発明の一実施形態
の音楽映像管理装置の概略構成を示すブロック図であ
る。
入力する映像入力部101と、音楽を検出する音楽検出
部102と、検出された音楽と当該音楽に対応する画像
とを蓄積する音楽・画像蓄積部103と、蓄積された音
楽および画像を圧縮する音楽・画像圧縮部104と、圧
縮された画像を表示する画像表示部105と、表示され
た画像に対応する音楽を再生する音楽再生部106から
構成されている。
装置の音楽検出から蓄積に至るまでの処理の流れを示し
たフローチャートである。本発明をソフトウェアで実現
した場合でも同様の処理の流れとなる。
検出処理201によって音楽区間を実時間で検出する。
音楽の検出には、音情報の周波数スペクトルのピーク
が、周波数方向に対して時間的に安定しているという特
徴を用いる方法(前記の南他、「音解析による映像イン
デクシング」、電子情報通信学会総合大会、D−12−
64、1997)などを用いることが可能である。音楽
判定処理202によって音楽であると判断された場合に
は、音楽の開始点に対応する画像を静止画として保存
し、音楽と画像とを音楽・画像蓄積処理203によって
蓄積する。
像圧縮処理204において圧縮する。音楽の圧縮形式
は、TwinVQやRealAudioなどの音楽圧縮
技術を用いることができる。画像についてもGIFやJ
PEGなど標準的なフォーマットを用いることができ
る。
装置の画像表示から音楽再生に至るまでの処理の流れを
示したフローチャートである。表示単位指定処理301
では、ユーザがどの様な単位で画像を表示するかを指定
する。ユーザが指定した単位に従って画像表示処理30
2を施し、画像を一覧表示する。表示単位の更新を判断
303で判定し、判断304において再生要求があった
場合には、音楽再生処理305を行う。再生要求は、ユ
ーザが一覧表示されている画像をマウス等のポインティ
ングデバイスを使って指定することにより行う。判断3
06において終了要求があった場合に処理を終了する。
装置の画像表示の例を示したものであり、表示単位を1
ヶ月とした場合を示している。401は日付を示してお
り、1週間毎に折り返しながら表示されるように図示さ
れているが、これは枠のサイズを変化させることによっ
て変更可能である。402は各日毎に検出された音楽に
対応する画像であり、例えば縦方向に並べて表示されて
いる。検出された音楽の数が多い場合には、スクロール
バー403によって表示位置を変化させることができ
る。
いるが、表示単位を1日と指定された場合には、図4に
示される日付の部分が時間に対応するものとなるだろ
う。同様に、1年と指定された場合には当該日付の部分
が月に対応することになる。
合の画像表示部の様子を示したものである。図4の場合
には1日分の画像402を複数個並べて表示している
が、図5の場合には当該1日分の複数個の画像402の
うちの1個の画像のみが逐次切り換えられて表示されて
いる。
像、503はスクロールバーである。表示単位あたりの
音楽の数が多い場合には、このような表示が有効であ
る。表示単位内における画像502を切り換えて一定時
間内に全て表示させることにより、音楽が多いほど画像
の切り換わりが早くなるため、音楽が集中して存在して
いたところを容易に知ることができる。
説明したが、当該管理の態様はデータ処理装置が実行で
きるプログラムの形で保持することができ、本発明は当
該プログラムを記録した記録媒体をも含むものである。
像情報の音情報から音楽を検出し、検出された音楽と当
該音楽に対応する画像を蓄積し、蓄積された音楽および
画像を圧縮し、圧縮された画像を表示し、表示された画
像に対応する音楽を再生することを可能にし、長期間に
わたって蓄積された音楽の中から所望する音楽を選択し
て聞くことを可能にする。
ちどの期間の範囲の音楽について表示するかに応じて、
表示する期間に対応して表示単位を変化させることを可
能にし、番組放映の傾向に基づいて音楽を検索すること
を可能にする。
示することで一覧ができ、画像の数に応じて早さを変化
させながら切り換えて表示することを可能にし、表示単
位内での音楽の数の多さを予測することを可能にする。
構成を示すブロック図である。
検出から蓄積に至るまでの処理の流れと本発明をソフト
ウェアで実現した場合の本処理の流れを示すフローチャ
ートである。
表示から音楽再生に至るまでの処理の流れと本発明をソ
フトウェアで実現した場合の本処理の流れを示すフロー
チャートである。
表示部において一覧表示を行った場合の様子を示す図で
ある。
表示部において一覧表示をしない場合の様子を示す図で
ある。
Claims (6)
- 【請求項1】 映像情報から音楽を検出し、当該音楽を
管理する方法であって、 映像情報を入力する映像入力段階と、 映像情報における音情報から音楽を検出する音楽検出段
階と、 検出された音楽と当該音楽に対応する画像とを蓄積する
音楽・画像蓄積段階と、 蓄積された音楽および画像を圧縮する音楽・画像圧縮段
階と、 を実行し、 前記圧縮された画像を、前記蓄積された音楽の存在を表
わすものとして表示し、 表示された画像に対応する音楽を再生するようにし、 かつ、前記画像を表示するに当って、蓄積された音楽の
うちどの期間の範囲の音楽について表示するかに応じ
て、表示する期間に対応して表示単位を変化させるよう
にした ことを特徴とする音楽映像管理方法。 - 【請求項2】 映像情報から音楽を検出し、当該音楽を
管理する方法であって、 映像情報を入力する映像入力段階と、 映像情報における音情報から音楽を検出する音楽検出段
階と、 検出された音楽と当該音楽に対応する画像とを蓄積する
音楽・画像蓄積段階と、 蓄積された音楽および画像を圧縮する音楽・画像圧縮段
階と、 を実行し、 前記圧縮された画像を、前記蓄積された音楽の存在を表
わすものとして表示し、 表示された画像に対応する音楽を再生する ようにし、 かつ当該 画像を表示するに当って、前記表示単位内に含
まれる画像を並べて表示、あるいは、画像の数に応じて
早さを変化させながら切り換えて表示するようにしたこ
とを特徴とする音楽映像管理方法。 - 【請求項3】 映像情報から音楽を検出し、当該音楽を
管理する装置であって、 映像情報を入力する映像入力部と、 映像情報における音情報から音楽を検出する音楽検出部
と、 検出された音楽と当該音楽に対応する画像とを蓄積する
音楽・画像蓄積部と、 蓄積された音楽および画像を圧縮する音楽・画像圧縮部
と、 前記圧縮された画像を、前記蓄積された音楽の存在を表
わすものとして表示する画像表示部と、 表示された画像に対応する音楽を再生する音楽再生部
と、 を具備し、 かつ、前記画像表示部は、蓄積された音楽のうちどの期
間の範囲の音楽について表示するかに応じて、表示する
期間に対応して表示単位を変化させるようにした ことを
特徴とする音楽映像管理装置。 - 【請求項4】 映像情報から音楽を検出し、当該音楽を
管理する装置であって、 映像情報を入力する映像入力部と、 映像情報における音情報から音楽を検出する音楽検出部
と、 検出された音楽と当該音楽に対応する画像とを蓄積する
音楽・画像蓄積部と、 蓄積された音楽および画像を圧縮する音楽・画像圧縮部
と、 前記圧縮された画像を、前記蓄積された音楽の存在を表
わすものとして表示する画像表示部と、 表示された画像に対応する音楽を再生する音楽再生部
と、 を具備し、 かつ当該 画像表示部は、前記表示単位内に含まれる画像
を並べて表示、あるいは、画像の数に応じて早さを変化
させながら切り換えて表示するようにしたことを特徴と
する音楽映像管理装置。 - 【請求項5】 映像情報から音楽を検出し、当該音楽を
管理するプログラムを記録した記録媒体であって、 映像情報を入力する映像入力処理と、 映像情報における音情報から音楽を検出する音楽検出処
理と、 検出された音楽と当該音楽に対応する画像とを蓄積する
音楽・画像蓄積処理と、 蓄積された音楽および画像を圧縮する音楽・画像圧縮処
理と を実行し、 前記圧縮された画像を、前記蓄積された音楽の存在を表
わすものとして表示する画像表示処理であって、該画像
表示処理が、蓄積された音楽のうちどの期間の範囲の音
楽について表示するかに応じて、表示する期間に対応し
て表示単位を変化させるようにしたものと表示された画
像に対応する音楽を再生する音楽再生処理とをコンピュ
ータに実行させるための音楽映像管理プログラムとして
記録した記録媒体。 - 【請求項6】 映像情報から音楽を検出し、当該音楽を
管理するプログラムを記録した記録媒体であって、 映像情報を入力する映像入力処理と、 映像情報における音情報から音楽を検出する音楽検出処
理と、 検出された音楽と当該音楽に対応する画像とを蓄積する
音楽・画像蓄積処理と、 蓄積された音楽および画像を圧縮する音楽・画像圧縮処
理と を実行し、 前記圧縮された画像を、前記蓄積された音楽の存在を表
わすものとして表示する画像表示処理であって、かつ 該
画像表示処理が、前記表示単位内に含まれる画像を並べ
て表示、あるいは、画像の数に応じて早さを変化させな
がら切り換えて表示するようにしたものと、 表示された画像に対応する音楽を再生する音楽再生処理
と をコンピュータに実行させるための音楽映像管理プロ
グラムとして記録した 記録媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP06815898A JP3434195B2 (ja) | 1998-03-18 | 1998-03-18 | 音楽映像管理方法、装置および音楽映像管理プログラムを記録した記録媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP06815898A JP3434195B2 (ja) | 1998-03-18 | 1998-03-18 | 音楽映像管理方法、装置および音楽映像管理プログラムを記録した記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH11266435A JPH11266435A (ja) | 1999-09-28 |
JP3434195B2 true JP3434195B2 (ja) | 2003-08-04 |
Family
ID=13365681
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP06815898A Expired - Lifetime JP3434195B2 (ja) | 1998-03-18 | 1998-03-18 | 音楽映像管理方法、装置および音楽映像管理プログラムを記録した記録媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3434195B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4380582B2 (ja) | 2005-04-22 | 2009-12-09 | ソニー株式会社 | 記録再生装置、これらの装置の処理方法およびその方法をコンピュータに実行させるプログラム |
JP4533234B2 (ja) | 2005-05-10 | 2010-09-01 | キヤノン株式会社 | 記録再生装置及び記録再生方法 |
JP4321518B2 (ja) | 2005-12-27 | 2009-08-26 | 三菱電機株式会社 | 楽曲区間検出方法、及びその装置、並びにデータ記録方法、及びその装置 |
JP4442585B2 (ja) | 2006-05-11 | 2010-03-31 | 三菱電機株式会社 | 楽曲区間検出方法、及びその装置、並びにデータ記録方法、及びその装置 |
KR101649644B1 (ko) * | 2010-02-04 | 2016-08-19 | 엘지전자 주식회사 | 정보 제공 장치 및 그 방법 |
-
1998
- 1998-03-18 JP JP06815898A patent/JP3434195B2/ja not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JPH11266435A (ja) | 1999-09-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7333712B2 (en) | Visual summary for scanning forwards and backwards in video content | |
JP3892342B2 (ja) | ビデオプロジェクトを編集するためのビデオ編集方法および装置 | |
US7805402B2 (en) | List building system | |
US20030063130A1 (en) | Reproducing apparatus providing a colored slider bar | |
JP3534368B2 (ja) | 動画像処理方法及び動画像処理装置 | |
TWI242376B (en) | Method and related system for detecting advertising by integrating results based on different detecting rules | |
US20050198570A1 (en) | Apparatus and method for browsing videos | |
JP4692775B2 (ja) | 映像コンテンツ再生支援方法、映像コンテンツ再生支援システム、及び情報配信プログラム | |
US20050033758A1 (en) | Media indexer | |
US20060062549A1 (en) | Non-linear reproduction control method of multimedia stream and apparatus thereof | |
JP3966515B2 (ja) | ネットワークシステム、サーバ、データ記録再生装置及びその方法並びにプログラム | |
US20070047913A1 (en) | Playback system, apparatus, and method, information processing apparatus and method, and program therefor | |
JPWO2006016590A1 (ja) | 情報信号処理方法、情報信号処理装置及びコンピュータプログラム記録媒体 | |
JP2000350156A (ja) | 動画像情報の記憶方法及びこれを記録した記録媒体 | |
CN101466013B (zh) | 信号处理器和信号处理方法 | |
JP2000350165A (ja) | 動画像記録再生装置 | |
JPH11220689A (ja) | 映像ソフト処理装置及び同処理プログラム記録記憶媒体 | |
US7493014B2 (en) | Replaying video information | |
JP3434195B2 (ja) | 音楽映像管理方法、装置および音楽映像管理プログラムを記録した記録媒体 | |
EP2306719B1 (en) | Content reproduction control system and method and program thereof | |
US20040223739A1 (en) | Disc apparatus, disc recording method, disc playback method, recording medium, and program | |
US20040234248A1 (en) | Reproducing unit having digest playback capability and digest playback method | |
US20050158018A1 (en) | Information reproduction apparatus | |
JPH08265660A (ja) | 音楽管理方法および装置 | |
KR100370249B1 (ko) | 샷 세그멘테이션 정보를 이용한 비디오 스키밍 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090530 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090530 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100530 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100530 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110530 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120530 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130530 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140530 Year of fee payment: 11 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
EXPY | Cancellation because of completion of term |