JP3412749B2 - 映像表示方法、および映像構造化プログラムを記録した記録媒体 - Google Patents
映像表示方法、および映像構造化プログラムを記録した記録媒体Info
- Publication number
- JP3412749B2 JP3412749B2 JP04506198A JP4506198A JP3412749B2 JP 3412749 B2 JP3412749 B2 JP 3412749B2 JP 04506198 A JP04506198 A JP 04506198A JP 4506198 A JP4506198 A JP 4506198A JP 3412749 B2 JP3412749 B2 JP 3412749B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- video
- expression
- display
- appearance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
- Studio Circuits (AREA)
Description
法に関する。
像データが蓄積されるようになると、所望の映像を柔軟
に検索し再生することが可能になってきた。
似検索によって映像のある場面を検索し、検索された場
面を時間順に再生するものがある。また、従来は、場面
を自動的に切り出すために、モデルを用いて映像を解析
する。例えば、ニュース映像を対象にする場合、あるニ
ュースキャスター出現ショットから次のニュースキャス
ター出現ショットまでをひとつの場面とするというモデ
ルをつくる。そして、ニュースキャスターの存在するフ
レーム画像を抽出し、場面を切り出すことによって、映
像を構造化する。
は、場面の意味的な分類に基づいて映像を切り出してお
り、モデルの定義に任意性があり、一般的な構造化が難
しく、実際のデータの性質を反映しない場合があるとい
う問題があった。
がある。まず、映像の意味の解釈は現状の技術では難し
いため、自動化が難しい。さらに、大量の映像データを
対象にして構造化を行おうとした場合には、均質な構造
化ができない。また、モデルに基づく映像解釈は、対象
が限定され一般性に乏しく、実際の映像データに含まれ
ている未知の構造を反映するのは難しい。
表現を抽出することができ、実際のデータの性質を反映
し、一般的で均質な自動構造化に基づいた映像表示がで
きる映像表示方法および映像構造化プログラムを記録し
た記録媒体を提供することである。
に、本発明の映像表示方法は、任意の長さの映像表現の
出現回数を計数する出現回数計数段階と、出現回数計数
段階における計数結果を表示装置に表示する計数結果表
示段階と、ユーザが表示したい映像表現を指定する映像
表現指定段階と、指定された映像表現を表示装置に表示
する映像表示段階を有し、計数結果表示段階が、時間的
区間に分割された各映像表現を識別する映像表現番号の
列とその長さとその出現回数とその出現場所の組を表形
式で表示する。
て表現し、繰り返し現れる映像表現列を抽出することに
より映像を構造化し、表示する。
的区間に分割されて入力されるとする。ショット分割の
方法として、例えば、フレーム画像を比較して、画面が
大きく変化する時点で映像をショットに分割する方法を
用いることができる。また、映像表現は、映像のフレー
ム映像の画素値、音声信号、キーワードやクローズドキ
ャプション、テロップ、カメラワークなどの付加情報な
どの、映像の特徴量を量子化し、識別番号で表す。した
がって、映像データは、映像表現番号の列として表され
る。
計数するので、頻度の高い映像表現を抽出することがで
き、実際のデータの性質を反映し、一般的で均質な自動
構造化に基づいた映像表示ができる。
段階が、ユーザの指定に応じ、映像表現番号列、長さ、
出現回数、出現場所のいずれかの大小関係にしたがっ
て、表示を並べ替える。したがって、映像表現の出現回
数を確認しやすい。
段階が、ユーザが計数結果表示段階で表示された出現場
所を指定することにより、表示したい映像を指定する。
したがって、統計的な情報から詳細情報へのアクセスが
容易である。
が、映像表現指定段階で指定された、映像表現番号と出
現場所の組をその出現場所に対応するフレーム画像と合
わせて表形式で表示する。したがって、指定した映像表
現列をひと目で観察することができる。
が、映像表現指定段階で指定された映像表現番号列の映
像を再生し、その映像に同期して映像表現番号と出現場
所を表示する。したがって、指定した映像表現列を動画
として観察することができる。
が、映像表現指定段階で指定された映像表現番号列の映
像が出現する場所を線状に表示する。したがって、指定
した映像表現がどの映像のどの部分に現れているかを直
感的に観察することができる。
録した、コンピュータ読取り可能な記録媒体は、任意の
長さの映像表現の出現回数を計数する出現回数計数処理
と、出現回数計数処理による計数結果を表示装置に表示
する計数結果表示処理と、ユーザが指定した、表示した
い映像表現を表示装置に表示する映像表示処理を有し、
計数結果表示処理が、時間的区間に分割された各映像表
現を識別する映像表現番号の列とその長さとその出現回
数とその出現場所の組を表形式で表示する映像構造化プ
ログラムを記録している。
て図面を参照して説明する。
映像表示装置は、任意の長さの映像表現の出現回数を計
数する出現回数計数部11と、CRTディスプレイ、液
晶ディスプレイなどの表示装置13と、出現回数計数部
11による計数結果を表示装置13に表示する計数結果
表示部12と、ユーザが表示したい映像表現を指定す
る、マウス、キーボードなどの映像表現指定部14と、
指定された映像表現を表示装置13に表示する映像表現
表示部15で構成される。
明する。まず、例えば表1で示すような“123421
232”という映像表現番号列が出現回数計数部11に
入力されたものとする。このとき、それぞれの映像表現
は、a〜iの場所によって参照することができる。な
お、ここでは場所としてアルファベットを用いたが、映
像の識別子と、フレーム番号またはタイムコードの組を
用いて場所を表してもよい。例えば、識別子がnews
という映像の1234フレームを[news,123
4]という組によって表してもよい。
と、その長さと、出現回数と、出現場所の組の一覧表が
出現回数計数部11で作成される。例えば“123”と
いう部分列は、長さが3で、fghとabcの2箇所に
出現していることを表す。
回数計数結果を表示装置13に表示する(ステップ2
2)。次に、映像表示指定部14で、ユーザが表示した
いと思う映像表現を指定する(ステップ23)。次に、
映像表現表示部15で、指定された映像表現に該当する
映像を表示装置13に表示する(ステップ24)。
の具体例を説明する。図3は、出現回数計数部11にお
いて作成された、映像表現番号部分列と、その長さと、
出現回数と、出現場所の組の一覧表を表示装置13に表
示したものを示している。出現場所は、“<>”などの
括弧の記号によって、各部分列の出現場所をまとめて表
示する。31はキャプションであり、32にデータが表
示される。表示装置13に収まりきらないデータは、ス
クロールバー33を操作することによって、スクロール
して表示することができる。
置によって指定すると、その列のデータの大小にしたが
って、データを並べ替えることができる。例えば「出現
回数」を指定すると、図4のように、出現回数が最も多
い映像表現“2”の行が先頭になるように並べ替えられ
る。
例を説明する。図5は、計数結果表示の例のうち、出現
場所の部分を示したものである。この例では、<ab>
と<fg>の2箇所を表している。いま、入力装置によ
り<ab>の内部が指定されると、<ab>が選択さ
れ、図5(1)のように強調表示される。続いて入力装
置により<fg>の内部が指定されると、<ab>と<
fg>の両方が選択され、図5(2)のように強調表示
される。再び入力装置により<fg>の内部が指定され
ると、<fg>の選択が解除され、図5(1)のよう
に、<ab>だけが選択され、強調表示される。このよ
うに、選択と非選択が交互に切り替わり、選択状態の場
合は強調表示される。
体例を説明する。この例では、指定された映像表現番号
列の出現場所のフレーム画像と、対応する映像表現番号
と、出現場所の組を表形式で表示する。41はキャプシ
ョンで、42にデータが表示される。表示装置13に収
まりきらないデータは、スクロールバー43を操作する
ことによって、スクロールして表示することができる。
この例では、指定した映像表現列をひと目で見ることが
できる。
体例を説明する。この例では、指定された映像表現番号
列の出現場所に対応する映像を再生して51に表示す
る。このとき、映像と同期して、53に映像表現番号と
出現場所が表示される。52は映像操作用のボタンであ
り、停止、再生、早送り、巻戻しなどの操作ができる。
この例では、指定した映像表現列を動画として観察する
ことができる。
体例を説明する。この例では、ひとつの映像が線状に表
現され、62のように、複数の映像がストライプ状に並
んで表示される。線は左端が映像の開始点、右端が終了
点を表す。また、表示装置13に収まりきらないデータ
は、63のスクロールバーを操作することによって、ス
クロールして表示することができある。また、61はキ
ャプションである。映像表現指定段階で映像表現番号列
の出現場所を指定すると、線上で対応する場所が、斜線
で示すように強調表示される。この例では、指定した映
像表現列がどの映像のどの部分に現れているのかを直感
的に観察することができる。
態の映像表示装置は、ユーザが表現したいと思う映像表
現を指定する、キーボード、マウスなどの入力装置71
と、CRTディスプレイ、液晶ディスプレイなどの表示
装置72と、任意の長さの映像表現の出現回数を計数
し、計数結果を表示装置72に表示し、ユーザが入力装
置71から指定した、映像を表示したい映像表現を表示
装置72に表示する、映像構造化プログラムを記録し
た、FD、CD−ROM、半導体メモリなどの記録媒体
73と、記録媒体73から映像構造化プログラムを読み
込んで、これを実行するデータ処理装置74で構成され
ている。
々の変形が可能である。例えば、映像表現を番号の代わ
りに、“アナウンサー”、“テロップ”などの名称によ
って映像を識別したり表示してもよい。また、映像表示
の第1〜第3の具体例を連動させて、図6の具体例を入
力装置で指定すると、対応する映像を図7の具体例を用
いて再生したり、図8の具体例を入力装置で指定する
と、図6や図7の具体例に映像が表示されるようにして
もよい。
うな効果がある。 1)請求項1と2と7の発明は、映像表現列の出現回数
を計数するので、頻度の高い映像表現を抽出することが
でき、実際のデータの性質を反映し、一般的で均質な自
動構造化に基づいた映像表示ができ、また映像表現番号
列と、長さと、出現回数と、出現場所の組を表形式で表
示し、必要に応じて並べ替えることができるので、映像
表現の出現回数の観察がしやすい。 2 )請求項3の発明は、計数表示段階で表示された出現
場所を指定することができるので、統計的な情報から詳
細情報へのアクセスが容易である。3 )請求項4の発明は、映像表現指定段階で指定した、
映像表現番号と出現場所の組を、その出現場所に対応す
るフレーム画像と合わせて表形式で表示するので、指定
した映像表現列をひと目で観察することができる。4 )請求項5の発明は、指定した映像表現列を動画とし
て観察することができる。5 )請求項6の発明は、指定した映像表現列が、どの映
像のどの部分に現れているのかを直感的に観察すること
ができる。
図である。
図である。
Claims (7)
- 【請求項1】 時間的区間に分割された映像を表示する
映像表示方法であって、 任意の長さの映像表現の出現回数を計数する出現回数計
数段階と、 前記出現回数計数段階における計数結果を表示装置に表
示する計数結果表示段階と、 ユーザが表示したい映像表現を指定する映像表現指定段
階と、 指定された映像表現を表示装置に表示する映像表示段階
を有し、 前記計数結果表示段階が、時間的区間に分割された各映
像表現を識別する映像表現番号の列とその長さとその出
現回数とその出現場所の組を表形式で表示する 映像表示
方法。 - 【請求項2】 前記計数結果表示段階が、ユーザの指定
に応じ、前記映像表現番号の列、長さ、出現回数、出現
場所のいずれかの大小関係にしたがって、前記表示を並
べ替える請求項1記載の映像表示方法。 - 【請求項3】 前記映像表現指定段階が、ユーザが前記
計数結果表示段階で表示された出現場所を指定すること
により、表示したい映像を指定する請求項1または2記
載の映像表示方法。 - 【請求項4】 前記映像表示段階が、前記映像表現指定
段階で指定された、映像表現番号と出現場所の組を、そ
の出現場所に対応するフレーム画像と合わせて表形式で
表示する請求項1から3のいずれか1項記載の映像表示
方法。 - 【請求項5】 前記映像表示段階が、前記映像表現指定
段階で指定された映像表現番号列の映像を再生し、その
映像に同期して映像表現番号と出現場所を表示する請求
項1から3のいずれか1項記載の映像表示方法。 - 【請求項6】 前記映像表示段階が、前記映像表現指定
段階で指定された映像表現番号列の映像が出現する場所
を線状に表示する請求項1から3のいずれか1項記載の
映像表示方法。 - 【請求項7】 請求項1から6のいずれか1項に記載の
映像表示方法をコンピュータに実行させるための映像構
造化プログラムを記録した、コンピュータ読取り可能な
記録媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP04506198A JP3412749B2 (ja) | 1998-02-26 | 1998-02-26 | 映像表示方法、および映像構造化プログラムを記録した記録媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP04506198A JP3412749B2 (ja) | 1998-02-26 | 1998-02-26 | 映像表示方法、および映像構造化プログラムを記録した記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH11243515A JPH11243515A (ja) | 1999-09-07 |
JP3412749B2 true JP3412749B2 (ja) | 2003-06-03 |
Family
ID=12708852
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP04506198A Expired - Fee Related JP3412749B2 (ja) | 1998-02-26 | 1998-02-26 | 映像表示方法、および映像構造化プログラムを記録した記録媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3412749B2 (ja) |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3361587B2 (ja) * | 1993-12-27 | 2003-01-07 | 株式会社日立製作所 | 動画像検索装置及び方法 |
JPH08331546A (ja) * | 1995-06-05 | 1996-12-13 | Toshiba Corp | 双方向放送システムの番組選択装置 |
-
1998
- 1998-02-26 JP JP04506198A patent/JP3412749B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH11243515A (ja) | 1999-09-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101150699B (zh) | 信息处理装置和信息处理方法 | |
EP0729117B1 (en) | Method and apparatus for detecting a point of change in moving images | |
US6449608B1 (en) | Video searching method and apparatus, video information producing method, and storage medium for storing processing program thereof | |
US6747674B1 (en) | Image processing apparatus, image processing method, and information providing medium | |
JP3780623B2 (ja) | 動画像の記述方法 | |
US8739040B2 (en) | Multimedia visualization and integration environment | |
JP3892342B2 (ja) | ビデオプロジェクトを編集するためのビデオ編集方法および装置 | |
US20070101266A1 (en) | Video summary description scheme and method and system of video summary description data generation for efficient overview and browsing | |
US20080079693A1 (en) | Apparatus for displaying presentation information | |
JP3407840B2 (ja) | 映像要約方法 | |
KR20070090751A (ko) | 화상 표시방법 및 동영상 재생장치 | |
JPH1175150A (ja) | 動画像編集方法及び動画像編集装置並びに動画像編集動作を実行するためのプログラムを記録した記録媒体 | |
JP2001028722A (ja) | 動画像管理装置及び動画像管理システム | |
KR101440168B1 (ko) | 개요 및 리포트를 이미 포함하는 시청각 도큐먼트의 새로운 개요를 생성하기 위한 방법 및 상기 방법을 구현할 수 있는 수신기 | |
US6925245B1 (en) | Method and medium for recording video information | |
JP2013255267A (ja) | ビデオ内ブックマーキング | |
US20040181545A1 (en) | Generating and rendering annotated video files | |
JP4197014B2 (ja) | 映像の検索方法および装置 | |
KR100335817B1 (ko) | 멀티미디어 스트림의 세그먼트간 요약/상세설명 관계 정보 구성 방법과 세그먼트간 요약/상세설명 관계 정보를 이용한 비디오 브라우징 방법 | |
JP2010165117A (ja) | 検索対象コンテンツの特徴を利用したコンテンツ表示方法 | |
US7844163B2 (en) | Information editing device, information editing method, and computer product | |
WO2008087742A1 (ja) | 動画再生システム、情報端末装置および情報表示方法 | |
KR20000038290A (ko) | 사건구간을 기반으로 하는 동영상 검색방법과 검색 데이타 구조 | |
JPH11134352A (ja) | 動画像表示方法 | |
JP3412749B2 (ja) | 映像表示方法、および映像構造化プログラムを記録した記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080328 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090328 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090328 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100328 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110328 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110328 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120328 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130328 Year of fee payment: 10 |
|
LAPS | Cancellation because of no payment of annual fees |