JP2000228755A

JP2000228755A - 映像ソフト表示装置及びその為のプログラムを記録した記憶媒体

Info

Publication number: JP2000228755A
Application number: JP11029439A
Authority: JP
Inventors: Toru Fukuda; 徹福田
Original assignee: MEDIA LINK SYSTEM KK
Current assignee: MEDIA LINK SYSTEM KK
Priority date: 1999-02-08
Filing date: 1999-02-08
Publication date: 2000-08-15

Abstract

(57)【要約】【課題】特に、スポーツ番組の内容を短時間で的確に
把握するのに好適な映像ソフト表示装置及びその為のプ
ログラムを記録した記憶媒体を提供する。【解決手段】映像ソフトのうち、単数又は複数のショ
ットの内容を代表する代表映像（エッセンスユニットＥ
Ｕ）が選択されている部分については当該代表映像を再
生し、それ以外の部分については、当該映像ソフトを早
送り（ＲＵ）で再生する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は映像ソフト表示装置
及びその為のプログラムを記録した記憶媒体に関し、特
に、スポーツ番組の内容を短時間で的確に把握するのに
好適な映像ソフト表示装置及びその為のプログラムを記
録した記憶媒体に関する（映像ソフト＝映像ソフトウェ
アの略記）。

【０００２】

【従来の技術】ビデオテープ、レーザディスク、ＤＶ
Ｄ、地上波テレビ放送、ケーブルテレビ、衛星放送等、
映像ソフトがあふれている世界では、見たい映像を早く
探し、それを短時間で見るというニーズが出てくる（Ｄ
ＶＤ＝デジタルバーサタイルディスクの略記。テレビ＝
テレビジョンの略記）。しかし、従来のビデオテープレ
コーダ、ＤＶＤプレーヤ等では、録画映像を時間節約し
て見る方法と言えば、早送りぐらいしか方法が無かっ
た。

【０００３】そこで出願人は、平成９年特許願第３０４
８６２号、平成１０年特許願第３３９８４号等により、
映像ソフトから要約或いはエッセンスユニットを抽出し
表示する、という手法を提案した。要約、エッセンスユ
ニットは、映像ソフトの要点を端的に表わすもので、視
聴者（ユーザ）は、これらを見ることで、通常なら長時
間掛かる映像ソフトの内容の把握を、極めて短時間のう
ちに的確に済ますことができる。

【０００４】

【発明が解決しようとする課題】しかし、技術は常に改
善が求められる。このため、これら発明に関し更に研究
を進めたところ、以下の如き課題が見つかった。即ち、
上記先の発明では、一つのショット或いは複数のショッ
ト（セグメント）の中から数秒程度の要約或いはエッセ
ンスユニットを抽出し、これのみを順次画面に表示する
ようにしていた。ところで、映像ソフトのジャンルは多
岐に亘る。このため、例えば野球、サッカーその他のス
ポーツ中継の如きものをこの手法で表示した場合、その
表示内容は、アナウンサーが解説をしている部分、ホー
ムラン、ゴールシーンなどの歓声が大きい部分などが中
心となる。

【０００５】しかし、このようなスポーツ中継等の場
合、ゲームの推移その他、番組全体の流れが掴めてこ
そ、その面白さや内容を理解することが出来るという面
もある。このため、上記先の出願に係る表示内容だけで
は、いささか不十分との感があり、更なる改善が望まれ
た。

【０００６】本発明の目的は、このような新たな要望に
応えること、特に、スポーツ番組の内容を短時間で的確
に把握するのに好適な映像ソフト表示装置及びその為の
プログラムを記録した記憶媒体を提供することにある。

【０００７】

【課題を解決するための手段】上記目的達成のため請求
項１又は請求項２記載の発明では、映像ソフトのうち、
単数又は複数のショットの内容を代表する代表映像が選
択されている部分については当該代表映像を再生し、そ
れ以外の部分については、当該映像ソフトを早送りで再
生する。

【０００８】（作用）本発明では、代表映像（要約、エ
ッセンスユニット等）が表示されない部分も早送りで見
るようにした。代表映像にはその部分の歓声等の存在状
態に応じた評価点数が付けられ、視聴者が設定した時間
に合わせてこれらの中から点数の高いものが選択され
る。先の出願では、このような代表映像のみの再生だっ
たので、点数の低いものは再生されなかった。

【０００９】しかし本発明では、その部分が早見モード
で表示される。従って、視聴者は短時間の間にその番組
全体の映像を見ることが出来るようになる。このような
表示手法が好適な映像ソフトとしては、例えば、従来そ
れを見るとき早送りモードと通常モードとを交互にしな
がら見ていたようなものがあり、具体的には、プロ野球
中継、サッカー、歌番組などがある。なお、以下の説明
では、本発明に係る映像ソフトの表示手法をスポーツＶ
Ｅ、平成１０年特許願第３３９８４号でＶＥと称してい
た表示手法をノーマルＶＥと称す（ＶＥはビデオエッセ
ンスの意）。

【００１０】本発明スポーツＶＥは、例えばエッセンス
ユニットＥＵと早見ユニットＲＵとで構成される（図
９。RUは Rapid Unit の意）。エッセンスユニットＥＵ
は、平成１０年特許願第３３９８４号で提案したもの
で、映像ソフト内の重要部分を抽出したものである。こ
の中から、そのとき指定された再生時間に合わせて評価
の高いものを選択し、それを音声付きで通常速度で再生
する。早見ユニットＲＵは、本発明で新たに提案する概
念で、上記エッセンスユニットが選択されなかった部分
のオリジナル映像を、所望の早送り速度で再生するもの
をいう。このように、オリジナル映像がエッセンスユニ
ット或いは早見ユニットＲＵの何れかで表示されること
で、番組全体を表示でき、視聴者は試合の流れ等を的確
に把握出来るようになる。

【００１１】なお、要約、エッセンスユニットの詳細に
ついては上記先の各出願の記載を援用するが、簡単に言
えば、どちらも、音声その他映像ソフトの構成要素の状
態変化に着目して抽出するもので、要約は、単一のショ
ットからそのような状態変化に着目して抽出されるも
の、エッセンスユニットは、関連あるものとして纏めら
れた複数のショット（セグメント）から同様にして抽出
されるものである。

【００１２】また、本発明は、要約やエッセンスユニッ
トだけでなく、これらに類する種々の省略形式の映像も
利用可能であり、それと早見ユニットＲＵとを組合わせ
て表示することが可能である。請求項の「代表映像」は
このような映像をも包含する。また、このあと説明する
実施の形態例では、平成１０年特許願第３３９８４号で
提案したエッセンスユニットＥＵをこの代表映像の例と
して用いている。この実施の形態例による説明で、本発
明の内容は十分理解可能と思われる。要約についてわざ
わざ先の出願を参照する必要性は無いように思う。ま
た、平成９年特許願第３０４８６２号では、映像の切り
替わり位置から次の切り替わり位置までの一連のフレー
ムのことを「カット」と称した。これは「ショット」と
称する方が的確と思料される。本明細書ではこちらを使
用する。

【００１３】

【発明の実施の形態】以下、本発明の詳細を図示実施の
形態例に基いて説明する。１．始めに用語とそれに関する説明をする。・オリジナル映像（図１参照。以下同じ。）テレビ放送、ビデオ映像をデジタル録画した全体の映
像。・カットカメラの切り替え点、連続した映像の切れ目。・ショットカットからカットまでの映像。・セグメントショットをつないで区切りのいい長さにした映像。始め
のセグメントから終わりのセグメントまでを繋げば元の
オリジナル映像となる。・セグメントリスト（表１）セグメントを管理するための表。スポーツＶＥ、オリジ
ナルＶＥ、オリジナル映像の切替操作、これらをスキッ
プ送りしてみる場合などに用いる。

【００１４】・エッセンスユニット（ＥＵ）セグメントの中からその部分を端的に表わすものとして
抽出された映像。効果音、文字、セリフ（人の声）等の
ＡＶ要素（映像ソフト構成要素）が存在するか否か等を
基準にして抽出する（平成１０年特許願第３３９８４号
で説明している）。・エッセンスユニット評価各エッセンスユニットをＡＶ要素の種類、長さ（持続時
間）、全体構成等により採点する。・エッセンスユニットリスト（表２）エッセンスユニットを管理するための表。・セグメント／エッセンスユニット対応リスト（図３デ
ータ蓄積部１９内）セグメントＮＯ．と、対応するエッセンスユニットＮ
Ｏ．を記録したもの。

【００１５】・映像の構成（図２）映像はタイトル、オープニング、中間部、エンディング
により構成される。・タイトル映像ソフトの表題部。スポーツＶＥが作成されている映
像ソフトは、そのタイトル画が一覧で表示される（図１
１）。・オープニング映像スタート後の導入部。コンテンツの概要や全体を把
握する上で重要である。・中間部中間部では、視聴者を映像の世界に引き込み、その内容
を把握してもらえるようにストーリが構成され、カメラ
ワーク、セリフ、BGM、テロップ等の要素が盛り込まれ
る。中間部は絞り込んでいく部分や盛り上がりのある部
分等いろいろなシーンによって構成される。・エンディングオリジナルビデオは一般的に最後の数シーンに纏められ
る。この中で結末への導入と結論、最後のEND／FINE／
終、の文字は重要である。・ＡＶ要素（映像ソフト構成要素）ＡＶ要素の中では、効果音、テロップ、対象物、セリフ
の有無が重要と解される（図３データ蓄積部１９内「要
素データ」）。

【００１６】２．実施の形態例の構成次に、実施の形態例のスポーツＶＥプレーヤ１００の構
成を説明する。図３に於て、１１はＴＶ受信部であり
（ＴＶ＝テレビジョン）、視聴者が選択した１又は複数
局のＴＶ放送を受信する。受信データは入力制御部１２
でデジタル化され、映像ソフト蓄積部１３（メモリ、ハ
ードディスク等）に蓄積される。１４はビデオテープデ
ッキであり、ここで再生された映像信号及び音声信号も
入力制御部１２でデジタル化され、映像ソフト蓄積部１
３に蓄積される。

【００１７】１６は光ディスクプレーヤであり、視聴者
が所望するレーザディスク、ＤＶＤその他の光ディスク
のデータを読み出す。ＴＶ放送やビデオテープの信号を
デジタル化したのは、後の処理及び再生の際の読出しを
容易にするためである。従ってＤＶＤのように既にデジ
タル化されているものについてはデジタル化する必要は
なく、後の処理の際、直接その媒体からデータを読み出
す。１７はインターネット接続部であり、視聴者が所望
するホームページ等から映像ソフトを受信し、映像ソフ
ト蓄積部１３に蓄積する。なおインターネットから取得
するものもデジタル化されているので、そのまま映像ソ
フト蓄積部１３に蓄積する。

【００１８】１８はカット判別部である。カット判別部
１８は、光ディスク（１６）或いは映像ソフト蓄積部１
３から読み出される映像ソフトの映像データの変化に着
目し、夫々のカット位置を検出する。カット位置は、例
えば、上記平成９年特許願第３０４８６２号に記載の手
法や、書籍「ビデオデータベースシステム」などに開示
された手法で判別できる。なお、書籍「ビデオデータベ
ースシステム」の原書名は「VIDEO DATABASE SYSTEMS(I
ssues,Product,and Applications)」、著者は、Ahmed
K.Elmagarmid ほかであり、出版は、Kluwer Academic P
ublishers、出版社所在地は、米国マサチューセッツ州
ノーウェル市である。

【００１９】詳細はこれらの記載を援用するが、参照の
手間を省くため、平成９年特許願第３０４８６２号に記
載した手法を一例としてここに記述する。（１）ピクセルの集約処理画像は２次元的な広がりとして例えば６４０ｘ４００と
いうような点（ピクセル）の集まりで表現される。テレ
ビ映像ではこのような画像が１秒間に３０枚供給され
る。処理を簡単にする為に、ここではピクセルの集約化
を行う。例えば４×４の点で集約すれば、原映像は１／
１６のデータ量にすることができ、８×８で取り出せ
ば、１／６４に集約できる。こうすると、ズームアップ
／ズームダウンのときや、ゆっくりと画像が変化すると
きなどの画像の変化を捨象する働きがある。

【００２０】このような処理を行なった各点について、ａ（ｔ,ｘ,ｙ）をとりだす。ここに、ｔ：時刻ｘ，ｙ：集約した映像
の座標ａ：その点（ｘ，ｙ）の色の値であり、ａ＝Ｒ
＋Ｇ＋Ｂなどとするのが一般的である（Ｒ，Ｇ，Ｂは３
原色情報の値）。

【００２１】（２）時間方向の集約化処理時間的に変化する映像データは、そのまま扱うには冗長
であり、またムダも多い。そこで、前記処理を行なった
各点のデータａ（ｔ,ｘ,ｙ）に対して、例えば映像の時
間的な差分比較処理をする。これは、上記処理後の各点
について、時間的な変化を見るもので、ｄ（ｔ，ｘ，ｙ）＝ａ（ｔ，ｘ，ｙ）−ａ（ｔ−△ｔ，
ｘ，ｙ）で求められる。ここに、△ｔは適宜の時間幅である。

【００２２】これを画像全体（ｘ，ｙ）について集計す
る。式で表わせば、

【数１】となる。これは、時間的に△ｔだけ隣り合う２枚の画像
の間の変化量（差分）を示している。

【００２３】（３）カット位置、ショットの判別ここで値が大きい順に、Ｄａ（ｔ）をＮ個とりだす。こ
のようにして取り出したＤａ（ｔ）の例を図１４に示
す。値が大きいところ、例えばＣＳ１，ＣＳ２は、そこ
で画像に大きな変化があり、そこはカット位置である可
能性が高い。従って、このＣＳ１とＣＳ２とをカット位
置とし、その間を一つのショットとする。このようにし
て検出された各ショットのデータは、データ蓄積部１９
に蓄積される（図３データ蓄積部１９内「ショットデー
タ」）。

【００２４】実施の形態例の説明に戻る。図３に於て、
２１は要素検出部であり、処理対象映像ソフトの各構成
要素、例えば効果音，テロップ，セリフ，対象物，音楽
その他の構成要素の存在状態を検出する。これらのデー
タはデータ蓄積部１９に蓄積される（データ蓄積部１９
内「要素データ」）。これら構成要素の検出は、映像ソ
フトを蓄積する際に行なって、映像ソフトと共に蓄積し
ておくと良い。これらは、後述するセグメントの形成、
エッセンスユニットの抽出、エッセンスユニットの評
価、選択などに利用されるので、こうしておくことで、
後の処理が早くなる。

【００２５】なお、セリフは例えばスペクトラムを参照
して存在を確認する。また人の話声は言葉と言葉の間に
通常０．５秒位のブランクがあるので、これも判断要素
に使える。対象物の検出は、例えば次のように行なう。
先ず、各画像を例えば縦横３つづつの９個の領域に分け
る。次いで、夫々の領域に属する各ピクセルについて、
その画像成分の分布、例えば各ピクセルの輝度分布を検
出する。輝度は例えば１０段階に分ける。この結果、例
えば各領域のピクセル数は 28,444個であり、そのう
ち、画面中央の領域では、一番輝度の低い段階のピクセ
ルが 1,000個、その次のものが 1,500個，… というよ
うに、夫々の領域のピクセルの画像成分の分布が求めら
れる。

【００２６】次いで、中央の領域の画像成分の分布と、
周辺の領域の画像成分の分布の差分を求める。求められ
た差分の例を図１５に示す。縦軸はこの差分の百分率、
横軸は、映像ソフトの先頭からのフレーム番号であり、
差分は、各フレームについて求めている。この事例の場
合、概ね差分が６０％（一点鎖線で表示）を越えている
部分では、画像の中に人物その他の対象物、即ち、その
映像ソフトの内容を端的に表わすものが存在した。

【００２７】従って、差分の大きさを適宜に設定するこ
とで、画像の中に何らかの対象物が存在することを検出
することが出来る。この手法により対象物として検出さ
れた具体的なものは、背景は部屋の中で、画面中央に
パソコンディスプレイが映っている、背景はビルで、
画面中央に人物が映っている、背景は景色で、画面中
央にトンネルを出て来る電車が映っている、などであっ
た。

【００２８】２２はセグメント形成部で、前記各ショッ
トデータに基き、その持続時間はどのくらいか、二つの
ショットの間で連続する効果音、テロップ、セリフが存
在するかなどを確認し、単一または複数個のショットか
ら成るセグメントを形成する。そのデータはデータ蓄積
部１９に蓄積される（データ蓄積部１９内「セグメント
リスト」。表１）。２３はエッセンスユニット抽出部
で、上記判別（形成）されたセグメントのデータに基
き、エッセンスユニットを抽出する。このデータもデー
タ蓄積部１９に蓄積される（図６。データ蓄積部１９内
「エッセンスユニットリスト」、「セグメント／エッセ
ンスユニット対応リスト」）。

【００２９】２４はエッセンスユニット評価部で、上記
抽出された各エッセンスユニットに付随する効果音その
他の映像ソフト構成要素の存在状態を評価し、これらエ
ッセンスユニットについて、言わば点数付けを実行す
る。この場合、スポーツ番組に適するよう、評価する構
成要素や、その重み付けを適宜調整すると良い。このデ
ータもデータ蓄積部１９に蓄積される（データ蓄積部１
９内「エッセンスユニット評価リスト」。表２）。２６
はユーザインタフェースで、不図示キーボード、マウ
ス、ディスプレイ２７、その上に配置される各ボタン
（図１２「ＨＯＭＥ」ほか）等を備えており、視聴者は
これらを操作して所望するスポーツＶＥを視聴する。

【００３０】再生制御部２８は、ユーザインタフェース
２６を介して視聴者からスポーツＶＥの再生（プレイ）
の指示があった場合、そのとき所望されている再生時間
に合致するようにエッセンスユニットを選択する。そし
て、このエッセンスユニットが選択された部分について
は、当該エッセンスユニットを通常の再生速度で再生す
る。音声も付ける。また、エッセンスユニットが選択さ
れなかった部分については早見ユニットＲＵを再生す
る。早見ユニットＲＵは、視聴者が指定した速度ｎ（倍
率）でオリジナル映像を早送り再生するものである。

【００３１】早見ユニットＲＵの早送り速度は２〜５倍
程度が好ましい。通常のビデオテープの早送りは例えば
１０倍であるが、これでは、少し早くてゲームの流れ等
を掴みにくい。この再生制御部２８が、請求項１にいう
再生制御手段に当たり、ここで実行される処理が、請求
項２にいう当該代表映像を再生或いは当該映像ソフトを
早送り再生する処理に当たる。

【００３２】３．エッセンスユニット抽出プロセス次に、エッセンスユニット抽出プロセスについて図７を
引用して説明する。なお括弧書きは、その処理を主とし
て実行する構成を表わす。（１）デジタル録画（入力制御部１２）・図３を引用した先の説明で述べたとおり、先ずテレビ
放送、ビデオ映像（ビデオテープ等からの映像）につい
て、それをデジタル化し、フレーム番号をとり、フレー
ム番号を指定することによりランダムアクセス可能なフ
ァイルとして映像ソフト蓄積部１３に保存する（図７
「録画操作」）。これがオリジナル映像である（図７
「オリジナル映像」）。

【００３３】（２）カット判別、セグメント（映像の区
切り）形成。・カットを判別（検出）し、カットからカットまでをシ
ョットとする（カット判別部１８。図７「カット判
別」）。・1秒以下のショットＳＳはその前のセグメントに付け
る（図５。セグメント形成部）。なお１秒には限定され
ない。・セリフ、テロップがカットをまたがっている場合、そ
のカット前後の２つのショットを繋ぐ（図５セグメント
形成部２２。図７「セグメント形成」）。

【００３４】（３）セグメントリスト作成・セグメントが決定したら、通しＮＯ.を付け、各セグ
メントの開始／終了フレームＮＯ．をとり、セグメント
リストを作成する（セグメント形成部２２。図７「リス
ト形成」）。・セグメントリストはセグメントＮＯ．、セグメント開
始フレームＮＯ．、セグメント終了フレームＮＯ．など
で構成される（表１。図７「セグメントリスト」）。

【００３５】（４）エッセンスユニットの抽出（エッセ
ンスユニット抽出部２３。図７「エッセンスユニット
（ＥＵ）」）（定義）・エッセンスユニットＥＵはセグメントの主要部を抜き
出して作られる。・１セグメントより１エッセンスユニットを作る。・エッセンスユニット切り出しの優先順は、例えば、効
果音（歓声）、セリフ（アナウンサーの声）、テロップ
（文字）、人物などとする（図６）。

【００３６】（プロセス）・そのセグメントに効果音があった場合で、その区間
（Ｔ１）＋前後１．５秒にセリフ及び文字がない場合、
その区間（Ｔ１）＋３秒間、合計Ｔ２の区間をエッセン
スユニットＥＵとして切り出す（図４）。ここでは、所
定しきい値ＴＨＬを越えた音声信号（Ｔ１の部分）を効
果音としている。・前後の３秒間の間に、セリフ、文字が出てきた場合、
セリフ、文字が切れるまでエッセンスユニットＥＵをの
ばす。

【００３７】・セグメントに効果音がない場合、セリフ
が存在する部分をエッセンスユニットＥＵとして切り出
す。・セリフの部分に文字が出てきた場合、文字が切れるま
でエッセンスユニットＥＵをのばす。・セグメントに効果音、セリフが無い場合、文字の部分
をエッセンスユニットＥＵとして切り出す。

【００３８】・同一セグメントに複数の効果音、セリフ
又は文字がある場合、最初に出てきた効果音、セリフ、
文字の部分を優先させる。・セグメントに効果音、セリフ、文字がない場合、例え
ば最初から２秒間をエッセンスユニットＥＵとする。こ
れは、セグメント化するに当たり、短いショットは前の
ショットに連結することとしたので、セグメントの後の
方から抽出すると、この短いショット部分を抽出してし
まう可能性があり、これでは、ショットが短かくなって
見にくくなる畏れがあるからである。

【００３９】・エッセンスユニットＥＵを抜き出した
ら、最初の０．５秒は徐々に音量を大きくして行き、終
りの０．５秒間は徐々に絞っていく。こうしておくと、
後でエッセンスユニットＥＵとエッセンスユニットＥＵ
とを繋いだとき、そこで音楽がプッツリと切れる感じが
無くなり、音がスムーズに繋がる。

【００４０】（５）エッセンスユニットＥＵの評価（エ
ッセンスユニット評価部２４。図７「ＥＵ評価」）・採点（評価）要素は例えば下記のものとする。効果音＝１０点セリフ＝２点文字＝２点対象物＝１点音楽＝１点スポーツ番組等の特徴に合わせたエッセンスユニットＥ
Ｕが抽出されるよう、拍手や歓声のポイントを更に大き
くするなどしても良い。

【００４１】・各要素の長さはフレーム数で表わす。・採点方法は各採点要素×フレーム数の合計とする。・全体構成による採点アップ始まりから１０％部迄はオープニング部として、その部
分の合計点数を１０％アップする（図２）。最後の５％
部をエンディング部として、その部分の合計点数を１０
％アップする（図２）。

【００４２】（６）エッセンスユニットリストの内容
（表２。図７「ＥＵリスト」）・エッセンスユニットNo. スタートからエンド迄のエッセンスユニットの通し番号・エッセンスユニットポイント各エッセンスユニットの評価点（評価ポイント）・エッセンスユニットタイム各エッセンスユニットのフレーム数

【００４３】（７）セグメント／エッセンスユニット対
応リストの内容（図３データ蓄積部１９内）・セグメントＮＯ．とエッセンスユニットＮＯ．から成
る。

【００４４】４．スポーツＶＥ操作用画面スポーツＶＥの録画、再生等の処理は、主として、ライ
ブラリーパネル（図１１）、プレイパネル（図１２）、
INDEX画面（図１３）等から成る操作画面の表示及びこ
れらに対する視聴者のマウス操作によって実行される。
以下、夫々について説明する。（１）ライブラリーパネル（図１１）・映像ソフト蓄積部に保存されている映像を端的に表現
する静止画像（タイトル画）の表示を行なう。この画面
で、視聴者は、マウス又はキーボード使用し、映像ソフ
ト蓄積部１３に収録されているオリジナル映像ファイル
の管理、例えば、見たいオリジナル映像（番組）の検索
や呼び出し、オリジナル映像データからのエッセンスユ
ニット抽出、プレイ画面の呼び出しやインデックス画面
呼び出し等を行う。各部分の詳細は以下のとおり。

【００４５】・タイトル画最も評価点が高いエッセンスユニットＥＵの最初の画像
１枚をサムネイル化し、そのオリジナル映像を代表する
画像として表示する。各タイトル画の下には、その映像
ソフトのタイトル（標題）が表示される。・タイトル入力ウィンドウ３５視聴者が所望するオリジナル映像のタイトルを必要に応
じ手入力する。画面上の適宜位置にそのウィンドウが表
示される。

【００４６】・ＥＵ生成実行ボタン３３このボタンはライブラリーパネル（図１１）上に配置さ
れる。これがクリックされたら、オリジナル映像からエ
ッセンスユニットＥＵとインデックス（図１３）用のサ
ムネイル画面の生成を行なう。エッセンスユニット生
成、サムネイル生成処理がされたオリジナル映像のタイ
トル画（図１１）には、VEマーク（不図示）が表示され
る。・各タイトル画像又はタイトル名をクリックすると、画
面がプレイパネル（図１２）に変わり、クリックされた
タイトル画がフル画面表示される。

【００４７】（２）プレイ画面（図１２）プレイ（再生）画面は、上記ライブラリーパネル（図１
１）で視聴者が選択した映像ソフトのオリジナル映像や
スポーツＶＥを表示したり、オリジナル映像を再生した
り、インデックス画面を呼び出したりする為に使用され
る。各部の詳細は以下のとおり。・「HOME」ボタンこれをクリックするとライブラリーパネル（図１１）へ
戻る。・「INDEX」ボタンプレイ中或いは選択されている映像ソフト（番組）につ
いてのインデックス画面（図１２）を表示する。

【００４８】・「SVE/VE/OR」ボタン（３８）スポーツＶＥ（SVE）の再生、ＶＥの再生（VE）、オリ
ジナル映像の再生（OR）の切替を行なう。プレイ中にこ
のボタン３８をクリックすると、順にモードが切り替わ
り、そのモードでの再生が実行される。切替後のモード
は画面上に一時的に表示される（図１１モード表示ウィ
ンドウ３２）。

【００４９】「SVE/VE/OR」の切替処理についてスポーツＶＥ再生中に、ノーマルＶＥ再生に切り替える
には、単に早見ユニットＲＵの表示を省略し、エッセン
スユニットＥＵのみを順に表示すれば良い。スポーツＶ
Ｅからオリジナル映像へ切り替えるには、セグメント／
エッセンスユニット対応リストを参照し、再生中のエッ
センスユニットＥＵに対応するセグメントＮＯ．を引き
出してセグメントリストを参照し、当該セグメントＮ
Ｏ．からセグメント開始フレームＮＯ．を引き出し、再
生すべきオリジナル映像のフレームＮＯ．を決定すれば
良い。オリジナル映像再生中にスポーツＶＥやノーマル
ＶＥへ切り替えるには、同じく上記各リストを参照し、
再生中のオリジナル映像のフレームに対応するセグメン
トＮＯ．を引き出し、これから、対応するエッセンスユ
ニットＥＵの開始フレームを探し出し、そこから再生す
れば良い。

【００５０】プレイ画面（図１２）の説明に戻る。・「START/STOP」ボタンスポーツＶＥ、ＶＥ又はオリジナル映像の再生／停止を
行なう。・「<SKIP>」ボタン再生中の各モードの映像のスキップ送り及びスキップ戻
りを行なう。

【００５１】「スキップ」についてスポーツＶＥを再生中にスキップ送りボタンが操作され
た場合は、次のエッセンスユニットＥＵ又は早見ユニッ
トＲＵの開始フレームから再生する。スキップ戻りボタ
ンが操作された場合は、再生中のエッセンスユニットの
１つ前のエッセンスユニットＥＵ又は早見ユニットＲＵ
の開始フレームから再生する。オリジナル映像を再生中
にスキップ送りボタンが操作された場合は、再生中のセ
グメントの次のセグメントから再生する。スキップ戻り
ボタンが操作された場合は再生中のセグメントの１つ前
のセグメントの開始フレームから再生する。なおスキッ
プに関する動作はこれに限定されない。

【００５２】再度プレイ画面（図１２）の説明に戻る。・ＶＥ時間設定／プレイ位置表示バー（符号３１）「設定」ボタン３６を押してこのバー３１をドラッグ
し、プレイ時間の設定を行う。・「TITLE」ボタン再生中の映像ソフトのタイトル（ファイル名）を表示す
る。

【００５３】「プレイ時間に対応したエッセンスユニッ
トの選択」についてＶＥ時間設定／プレイ位置表示バー３１で設定するプレ
イ時間は、ここでは、スポーツＶＥのトータルの表示時
間、即ち各エッセンスユニットＥＵの表示時間と、それ
らの間に表示される各早見ユニットＲＵの表示時間の総
合計の時間とする。視聴者は、この所要時間で１本の映
像ソフトについてのスポーツＶＥ全体を視聴することが
できる。

【００５４】上記ＶＥ時間設定／プレイ位置表示バー３
１がドラッグされたとき、再生制御部２８は、該ドラッ
グによって視聴者が設定したトータル時間、例えば３０
分という時間で、選択エッセンスユニット及びその間を
埋める各早見ユニットＲＵの表示が終了するように、そ
のときの表示対象エッセンスユニットＥＵを選択する。
このとき、視聴者が指定した時間Ｔｏのうち、どの位が
エッセンスユニットＥＵを表示する時間Ｔｅとなるか
は、下記式で求められる。Ｔｅ＝（ｎ／（ｎ−１））Ｔｓ−（１／（ｎ−１））Ｔｏ … （式１）

【００５５】この式１は、以下のようにして導出され
る。即ち、スポーツＶＥの表示時間Ｔｓは、選択された
各エッセンスユニットＥＵの表示時間の総計Ｔｅと、そ
れが選択されなかった部分について早送りで表示される
早見ユニットＲＵの表示時間Ｔｅの総計であり、それ
は、Ｔｓ＝Ｔｅ＋Ｔｒ … （式２）と表わされる。このうち、右辺のＴｒ、即ち早見ユニッ
トＲＵの表示時間は、Ｔｒ＝（１／ｎ）（Ｔｏ−Ｔｅ） … （式３）と表わされる。この式３を式２に代入して整頓すると、
上記式１が求められる。

【００５６】具体例を挙げる。例えば録画されたスポー
ツ番組の長さＴｏが２時間、視聴者が設定したスポーツ
ＶＥ再生時間Ｔｅが３０分、早送り速度ｎが５倍であっ
たとする。この場合のエッセンスユニットＥＵが表示さ
れる時間Ｔｅは、上記「式１」によれば７分３０秒であ
る。再生制御部２８は、エッセンスユニットリスト（表
２）を参照し、評価点の高いものから順に、その総計時
間が７分３０秒に達するまでエッセンスユニットＥＵを
選択する。例えば、１個のエッセンスユニットＥＵの表
示時間が平均５秒であったとすると、凡そ９０個のエッ
センスユニットＥＵが選択される。

【００５７】「早見速度ｎの設定について」前述の設定
ボタン３６（図１２）をクリックしたときは、早見速度
設定ウィンドウ３４も表示される。ここにはそのとき設
定されている早見速度ｎ倍が表示される。変更したいと
きは、倍数ｎの表示枠をクリックして新たな値を設定
し、変更を要しないときは、その侭にしておいて「STAR
T/STOP」ボタン３７をクリックする。なお、早見速度
は、プレイ途中でもそれを中断することなく自由に変更
できる。

【００５８】再生制御部２８は、これに応動して、この
倍率ｎ及びバー３１で設定されているスポーツＶＥの表
示時間Ｔｅに合致するように、前記エッセンスユニット
ＥＵの選択を実行する。そして、選択された各エッセン
スユニットＥＵ、及びそれが選択されなかった部分を埋
めるところの各早見ユニットＲＵを、オリジナルの映像
と同じ順序で順に表示する。なお、スポーツＶＥの再生
中は、そのフレームが映像全体の中でどの辺りにあるか
をバー３１の位置で表示する。これで、視聴者は今番組
のどの辺りを見ているかを容易に認識することができ、
残りの所要時間も認識できる。

【００５９】（３）インデックス画面次にインデックス（INDEX）画面（図１３）について説
明する。この画面は、プレイ画面（図１２）の「INDE
X」ボタンをクリックすることで表示される。・タイトル名所望するタイトル名（番組名）をここに入力する。な
お、ここをクリックしたら図１１のライブラリーパネル
が表示され、そこでクリックしたものが、このタイトル
名の欄に取り込まれるようにしても良い。

【００６０】・サムネイル画再生制御部２８は、上記選択が行なわれると、そのタイ
トルの映像ソフトからサムネイル画を取り出し、画面上
に表示する。サムネイル画は、その映像ソフトの各部分
を端的に示すもので、ここでは、各エッセンスユニット
ＥＵの最初の画像をサムネイル化したものである。これ
をクリックするとプレイパネル（図１２）へ戻り、該ク
リックされたサムネイル画が存在した位置から、その映
像ソフトが再生される。このときの再生モードは、スポ
ーツＶＥ、オリジナルＶＥ、通常の再生何れでも良い
が、直前に実行されていた表示モードとするのも良いで
あろう。

【００６１】５．スポーツＶＥの実行手順（図８）スポーツＶＥは以下の如く実行される。・タイトル選択 …プレイ画面（図１２）で「ＨＯＭ
Ｅ」キーをクリック。ライブラリーパネル（図１１）が
表示される。この画面では、エッセンスユニット抽出処
理済みの映像ソフトのタイトル画とタイトルが表示され
る。所望のタイトルまたはタイトル画をクリック（図８
「タイトル選択」）。

【００６２】・スポーツＶＥプレイ …図１１プレイ画
面の下のモード切替ボタン「ＳＶＥ／ＶＥ／ＯＲ（３
８）」を１回クリックすると、画面中にそのときのモー
ドが表示される（図１２では「モード：ＳＶＥ（３
２）」と表示）。このボタン３８のクリックで、モード
が循環するので、所望のモードにする。本発明に係るの
はスポーツＶＥなので、ここでは「ＳＶＥ」モードにし
たとする（図８「スポーツＶＥクリック」）。

【００６３】・プレイ時間／早送り速度の設定 …スポ
ーツＶＥ再生時、視聴者は、必要に応じ、前述の手順で
再生時間Ｔｓ或いは早送り速度ｎを設定する。それ以前
に設定されていた値の侭で良ければ、この設定は不要で
ある。・ＥＵ選択 …再生制御部２８は、ＥＵ，ＲＵ再生時間
の合計が設定されたプレイ時間Ｔｓに合うように、前述
の手順で、評価点の高い順にエッセンスユニットＥＵを
選択する（図８）。・エッセンスユニットリスト …ここで選択されたエッ
センスユニットＥＵのデータを保持するもので、スポー
ツＶＥ再生時に参照される。

【００６４】・スポーツＶＥ再生 …エッセンスユニッ
トＥＵが選択された部分については、それを、又、エッ
センスユニットＥＵが選択されなかった部分については
早見ユニットＲＵをディスプレイ２７上に再生する（図
８「スポーツＶＥ再生」）（図９）。

【００６５】・他のモードへ移行？ …スポーツＶＥと
ノーマルＶＥとの切替を始め、スキップ動作、サムネイ
ル画（図１２）からの再生、オリジナル映像のみの再
生、エッセンスユニットＥＵのみの再生、オリジナル映
像早送りなどが考えられる。これらの処理は、再生制御
部２８により、セグメントリスト（表１）又はエッセン
スユニットリスト（表２）を参照して実行される。な
お、単位映像（セグメント又はエッセンスユニット）毎
にスキップ進み／戻り操作を実行可能にするのも良い
（連続的に操作することでパラパラめくりにもなる）。

【００６６】６．インデックスからの映像呼出し（図１
０）インデックス画面（図１３）を利用した映像ソフト再生
について説明する。・INDEX画面呼出し …プレイ画面（図１２）の「INDE
X」ボタンをクリックすると図１３のINDEX画面が表示さ
れる。・見たいサムネイル画像を選択 …タイトル名を入力或
いは選択すると、再生制御部２８が、そのタイトルの映
像ソフトからサムネイル画を取り出して画面上に表示す
る。所望するサムネイル画をクリックする。

【００６７】・サムネイル画像に対応するオリジナル映
像を再生 …上記クリックに応動して、プレイパネル
（図１２）が表示され、クリックされたサムネイル画が
存在した位置から、その映像ソフトが再生される。・モード設定 …このときの再生モードは任意だが、こ
こではスポーツＶＥが指定されたものとする。・プレイ時間／早送り速度設定、ＥＵ選択、ＥＵリスト
生成、スポーツＶＥ再生…スポーツＶＥのモードに設定
されたことに応動して、図８の後半で実施されるのと同
じ処理が実行される。

【００６８】以下、変形例について説明する。本発明は
テレビジョン受像機、ビデオテープレコーダー、ＤＶＤ
／レーザディスクプレーヤその他、種々のオーディオビ
デオ関連の家庭電化製品に組み込むことが出来る。アプ
リケーションプログラムの形にしてパーソナルコンピュ
ータ上でも実施出来る。この場合はＣＤ−ＲＯＭに格納
して配布したり、ネットワークを介して配布することに
なる。映像ソフト製作側に於て、セグメント、エッセン
スユニット、その評価点等を求め、これを映像ソフトに
付加してＤＶＤ等に格納し、視聴者側で、この付加情報
を利用して、設定された再生時間に合致するようにエッ
センスユニットを選択し再生するようにしても良い。映
像ソフトの入手経路は例示した４つに限られない。例え
ばケーブルテレビジョンその他、例示しない種々の形態
での入手が考えられる。

【００６９】

【発明の効果】以上説明したように、請求項１又は請求
項２記載の発明では、映像ソフトのうち、単数又は複数
のショットの内容を代表する代表映像が選択されている
部分については当該代表映像を再生し、それ以外の部分
については、当該映像ソフトを早送りで再生するように
した。従って、洪水のように映像ソフトが溢れる中、視
聴者は短時間で、その番組全体を見ることができ、特
に、プロ野球中継、サッカー等のスポーツ中継番組の内
容を、一層的確に把握することが出来るようになる。な
お、歌番組その他、従来それを見るとき早送りモードと
通常モードとを交互にしながら見ていたような番組につ
いても本発明は特に効果がある。

【図面の簡単な説明】

【図１】映像ソフトの構成の一例（詳細）を示す図。

【図２】映像ソフトの構成の一例（概略）を示す図。

【図３】実施の形態のスポーツＶＥプレーヤの構成を示
すブロック図。

【図４】音声出力の一例を示すグラフ。

【図５】ショットとセグメントとの関係の例を示す図。

【図６】セグメントとエッセンスユニットとの関係の例
を示す図。

【図７】録画・ＥＵ生成の手順例を示すフローチャー
ト。

【図８】スポーツＶＥプレイ（再生）時の処理手順例を
示すフローチャート。

【図９】スポーツＶＥの全体構成の例を示す図。

【図１０】INDEX画面からのスポーツＶＥプレイ（再
生）時の処理手順例を示すフローチャート。

【図１１】ライブラリーパネル（ＨＯＭＥ画面）の例を
示す正面図。

【図１２】プレイ画面の例を示す正面図。

【図１３】ＩＮＤＥＸ画面の例を示す正面図。

【図１４】映像データの差分とカット位置の関係例を示
すグラフ。

【図１５】Ｙ（輝度）分布の差分の例を示すグラフ。

【符号の説明】

１１…ＴＶ受信部１２…入力制御
部１３…映像ソフト蓄積部１４ビデオテー
プデッキ１６…光ディスクプレーヤ１７…インター
ネット接続部１８…カット判別部１９…データ蓄
積部２１…要素検出部２２…セグメン
ト形成部２３…エッセンスユニット抽出部２４…エッセン
スユニット評価部２６…ユーザインタフェース２７…ディスプ
レイ２８…再生制御部２９…スピーカ３１…ＶＥ時間設定／プレイ位置表示バー３２…モード表示ウィンドウ３３…ＥＵ生成
実行ボタン３４…早見速度設定ウィンドウ３５…タイトル
入力ウィンドウ３６…設定ボタン（早見速度の）３７…START/ST
OPボタン３８…モード切替ボタン１００…スポーツ
ＶＥプレーヤ。

【表１】

【表２】

フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｈ０４Ｎ 5/781 Ｈ０４Ｎ 5/781 ５２０Ｚ

Claims

【特許請求の範囲】

【請求項１】映像ソフトのうち、単数又は複数のショ
ットの内容を代表する代表映像が選択されている部分に
ついては当該代表映像を再生し、それ以外の部分につい
ては、当該映像ソフトを早送りで再生する再生制御手段
を備えたことを特徴とする映像ソフト再生装置。
【請求項２】映像ソフトのうち、単数又は複数のショ
ットの内容を代表する代表映像が選択されている部分に
ついては当該代表映像を再生し、それ以外の部分につい
ては、当該映像ソフトを早送りで再生する処理をコンピ
ュータ上で実行する為のプログラムを記録したことを特
徴とする映像ソフト表示処理の為のプログラムを記録し
た記憶媒体。