JP2006067564A - ダイジェストの作成方法及び装置 - Google Patents

ダイジェストの作成方法及び装置 Download PDF

Info

Publication number
JP2006067564A
JP2006067564A JP2005211614A JP2005211614A JP2006067564A JP 2006067564 A JP2006067564 A JP 2006067564A JP 2005211614 A JP2005211614 A JP 2005211614A JP 2005211614 A JP2005211614 A JP 2005211614A JP 2006067564 A JP2006067564 A JP 2006067564A
Authority
JP
Japan
Prior art keywords
replay
digest
importance
video
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005211614A
Other languages
English (en)
Other versions
JP4758161B2 (ja
Inventor
Yoshihisa Terada
佳久 寺田
Hiroshi Kasahara
宏 笠原
Toru Nakada
透 中田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2005211614A priority Critical patent/JP4758161B2/ja
Priority to US11/572,957 priority patent/US8544037B2/en
Priority to PCT/JP2005/013574 priority patent/WO2006011447A1/ja
Publication of JP2006067564A publication Critical patent/JP2006067564A/ja
Application granted granted Critical
Publication of JP4758161B2 publication Critical patent/JP4758161B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/00086—Circuits for prevention of unauthorised reproduction or copying, e.g. piracy
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/00086—Circuits for prevention of unauthorised reproduction or copying, e.g. piracy
    • G11B20/00731—Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving a digital rights management system for enforcing a usage restriction
    • G11B20/00746—Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving a digital rights management system for enforcing a usage restriction wherein the usage restriction can be expressed as a specific number
    • G11B20/00797—Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving a digital rights management system for enforcing a usage restriction wherein the usage restriction can be expressed as a specific number wherein the usage restriction limits the number of times a content can be reproduced, e.g. using playback counters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Circuits (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

【課題】尺に合うダイジェストを簡便に作成できるダイジェスト作成装置を提供する。
【解決手段】リプレイ映像の放送区間と実際の撮影時間帯を表す参照区間とを含むリプレイ情報と、ダイジェストの長さについて指定する情報とが入力する入力部２０と、リプレイ情報からリプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、リプレイのカット切替わり数等を求め、これらを基にリプレイ映像の重要度を算出するリプレイ重要度算出部３０と、リプレイ映像をダイジェスト候補に設定して、ダイジェストの長さ条件に収まり、かつ重要度の総和が最大になるダイジェスト候補の組合せを選択するダイジェスト作成部４０とを設ける。これにより、放送機器の履歴等から容易に入手できる情報を利用して長さ条件を満たすダイジェスト情報を作成できる。
【選択図】図１

Description

本発明は、本放送の番組映像等からダイジェストを作成する方法、並びに、その方法を実行する装置及びプログラムに関し、特に、ダイジェストの作成が、手間を掛けずに実施できるようにしたものである。
デジタル放送では、放送局から、例えば野球中継の放送データにハイライトシーンの識別情報を含めて放送すれば、受信装置は、受信情報を蓄積してハイライトシーンから成るダイジェストを作成することができ、視聴者は、好きな時間帯に、ダイジェストで試合を視聴することができる。
また、ダイジェストの作成は、放送局内でも、試合内容を要約してスポーツ番組のコーナーで紹介する場合等に必要となる。
下記特許文献１には、ダイジェストの簡便な作成方法として、放送映像に含まれるリプレイ映像を抽出し、繋ぎ合わせてダイジェストを作成する方法が記載されている。放送でリプレイされる場面は、例えば、得点シーンなど、放送の送り手側が重要と判断した部分であるから、このリプレイ映像を抽出して繋ぎ合わせることにより、重要場面を示すダイジェストの自動作成が可能になる。
しかしながら、この場合は、リプレイ映像を繋ぎ合わせるだけなので、ダイジェストの長さ（以下「尺」と言う。）がリプレイシーンの長さによって自動的に決まり、ダイジェストの尺を調節することができない。尺を調節するためには、シーンに重要度を付し、ダイジェストに含めるシーンを、重要度に基づいて選択することが必要になる。
下記特許文献２には、尺の調節が可能なダイジェストの作成方法が記載されている。この方法では、放送局側が、観客の歓声などから評価した「盛り上がり度」や、試合の進行情報を示す「ゲームパラメータ」等のダイジェスト作成用インデックスを番組に付加して送出する。受信装置は、このインデックス情報を用いて、評価値の高いカットをダイジェストの尺に合わせて選択し、ダイジェストを作成する。
図３５には、この方法を実施するダイジェスト作成装置１１０を模式的に示している。この装置１１０は、インデックス情報として、入力端末１６０から出力された「盛り上がり度」や「ゲームパラメータ」等の情報と編集装置１７０やスイッチャー１８０から出力された制作パラメータ情報とが入力する入力部１２０と、インデックス情報に基づいて番組の各カットの重要度を算出する重要度算出部１３０と、評価値の高いカットを尺に合わせて選択してダイジェスト情報を作成するダイジェスト作成部１４０と、ダイジェスト情報を出力する出力部１５０とを備えている。
「盛り上がり度」は、その場面のゲーム上での重要度、緊迫度、観客の盛り上がり状況などから評価者が主観的に評価した値であり、評価者は、この値を端末から入力する。「ゲームパラメータ」は、どちらが攻撃側でどちらが防御側かを示す情報や、得点情報、反則の発生やゲームの中断等を示す情報である。「選手情報」は、画面に映る全ての選手を表す情報である。また、「制作パラメータ」は、カット切り替え時刻を示す情報やＣＭ中か否かを示す情報、リプレイの開始位置・終了位置を示す情報などである。
重要度算出部１３０は、入力したインデックス情報に対して、視聴者の嗜好情報等に依る重み付けを行った後、インデックス情報を加算して各カットの重要度を求める。ダイジェスト作成部１４０は、予め設定されたダイジェスト長に達するまで、重要度の高いカットを選択し、ダイジェスト情報を生成する。このダイジェスト情報で指定されたカットが、蓄積された番組の映像音声データの中から選択的に再生され、ダイジェストが表示される。
特開平９-６５２８７号公報 特開２００２−３００５１８号公報
しかしながら、前記特許文献２に記載された方法では、番組に付加する「盛り上がり度」等の情報の作成に非常に大きなコストが掛かると言う問題点がある。
本発明は、こうした従来の問題点を解決するものであり、尺に合わせたダイジェストを極めて簡便に作成することができるダイジェスト作成方法を提供し、また、その方法を実行する装置及びコンピュータプログラムを提供することを目的としている。
そこで、本発明では、ダイジェスト作成装置に、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報とを入力する入力部と、リプレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像／音声の重要度を算出し、リプレイ情報に重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出部と、重要度付きリプレイ情報とダイジェスト条件情報とを受信し、リプレイ映像／音声をダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の取得先を特定する情報を出力するダイジェスト作成部とを設けている。
この装置では、放送機器の履歴などから容易に入手できる情報を利用して、長さの条件を満たすダイジェスト情報を作成することができる。
また、本発明のダイジェスト作成装置のダイジェスト作成部は、リプレイ参照区間が重複する複数のリプレイ映像／音声の内、重要度が最大でないリプレイ映像／音声をダイジェスト候補から除外して、前記組み合わせを選択する。
こうすることで、指定されたダイジェストの時間長の中で、多くの情報を含むダイジェストを作成することができる。
また、本発明では、ダイジェスト作成装置に、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、映像／音声の区間を示す情報とを入力する入力部と、リプレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像／音声の重要度を算出し、リプレイ情報に重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出部と、この重要度付きリプレイ情報とダイジェスト条件情報とを受信し、リプレイ映像／音声のリプレイ参照区間を包含する区間の映像／音声を、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の取得先を特定する情報を出力するダイジェスト作成部とを設けている。
この装置では、リプレイ映像／音声に代えて、リプレイ映像／音声が撮影／収音された時間帯の他の映像／音声をダイジェストに含めることができる。
また、本発明では、ダイジェスト作成装置に、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、映像／音声を放送する放送のカットの切り替わり点を示すカット特定情報とを入力する入力部と、リプレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像／音声の重要度を算出し、リプレイ情報に重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出部と、重要度付きリプレイ情報とダイジェスト条件情報とカット特定情報とを受信し、リプレイ映像／音声のリプレイ参照区間を包含する前記放送のカットを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の放送区間情報を出力するダイジェスト作成部とを設けている。
この装置では、リプレイ映像／音声が撮影／収音された時間帯の放送のカットをダイジェストに含めることができる。
また、本発明のダイジェスト作成装置では、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、放送される映像／音声のシーンを示すシーン情報とを入力する入力部と、リプレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像／音声の重要度を算出し、リプレイ情報に重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出部と、重要度付きリプレイ情報とダイジェスト条件情報とシーン情報とを受信し、リプレイ映像／音声のリプレイ参照区間を包含するシーン情報で区切られた映像／音声のシーンを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の取得先を特定する情報を出力するダイジェスト作成部とを設けている。
この装置では、リプレイ映像／音声が撮影／収音された時間帯の映像／音声のシーンをダイジェストに含めることができる。
また、この装置のダイジェスト作成部は、リプレイ映像／音声の重要度に応じて、リプレイ参照区間を包含する映像／音声のシーンの大きさを変える。
そのため、リプレイ映像／音声の重要度が高い場合に、長いシーンを選択し、リプレイ映像／音声の重要度が低い場合に、短いシーンを選択することができる。
また、本発明のダイジェスト作成装置のリプレイ重要度算出部は、リプレイ放送区間が連続し、リプレイ参照区間が重複していない複数のリプレイ映像／音声に対して重要度を加算する。
そのため、ハイライトとして放送された複数のリプレイはダイジェストに取り込まれ易くなり、ダイジェストの質が向上する。
また、本発明のダイジェスト作成方法では、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出し、リプレイ映像／音声をダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の取得先を特定する情報を出力するようにしている。
この方法では、放送機器の履歴などから容易に入手できる情報を利用して、長さの条件を満たすダイジェスト情報を作成することができる。
また、リプレイ参照区間が重複している複数のリプレイ映像／音声がある場合には、リプレイ映像／音声の内、重要度が最大でないリプレイ映像／音声をダイジェスト候補から除外して、前記組み合わせを選択するようにしている。
こうすることで、指定されたダイジェストの時間長の中で、多くの情報を含むダイジェストを作成することができる。
また、本発明のダイジェスト作成方法では、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出し、このリプレイ映像／音声のリプレイ参照区間を包含する区間の映像／音声を、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の取得先を特定する情報を出力するようにしている。
この方法では、リプレイ映像／音声の代わりに、リプレイ映像／音声が撮影／収音された時間帯の映像／音声をダイジェストに含めることができる。
また、本発明のダイジェスト作成方法では、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出し、リプレイ映像／音声のリプレイ参照区間を包含する映像／音声の放送のカットを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の放送区間情報を出力するようにしている。
この方法では、リプレイ映像／音声の代わりに、リプレイ映像／音声が撮影／収音された時間帯の放送のカットをダイジェストに含めることができる。
また、本発明のダイジェスト作成方法では、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出し、リプレイ映像／音声のリプレイ参照区間を包含するシーン情報で区切られた映像／音声のシーンを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択し、当該ダイジェスト候補の取得先を特定する情報を出力するようにしている。
この方法では、リプレイ映像／音声の代わりに、リプレイ映像／音声が撮影／収音された時間帯の映像／音声のシーンをダイジェストに含めることができる。
また、この方法では、リプレイ映像／音声の重要度に応じて、リプレイ参照区間を包含する映像／音声のシーンの大きさを変えている。
また、リプレイ放送区間が連続し、リプレイ参照区間が重複していない複数のリプレイ映像／音声に対して重要度を加算するようにしている。
こうすることで、ハイライトに取り上げられたリプレイ映像／音声の重要度が高くなる。
また、本発明のコンピュータプログラムは、コンピュータに、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出する手順と、リプレイ映像／音声をダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択する手順とを実行させる。
また、コンピュータに、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出する手順と、リプレイ映像／音声のリプレイ参照区間を包含する区間の映像／音声を、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択する手順とを実行させる。
また、コンピュータに、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出する手順と、リプレイ映像／音声のリプレイ参照区間を包含する映像／音声を放送する放送のカットを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数のダイジェスト候補の組み合わせを選択する手順とを実行させる。
また、コンピュータに、リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報とリプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出する手順と、リプレイ映像／音声の重要度に応じて、シーン情報で区切られた映像／音声のシーンの階層を選択する手順と、リプレイ映像／音声のリプレイ参照区間を包含する映像／音声の前記階層におけるシーンを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、重要度の総和が最大になる１または複数の前記ダイジェスト候補の組み合わせを選択する手順とを実行させる。
これらのプログラムをダイジェスト作成装置に搭載して、リプレイ重要度算出部及びダイジェスト作成部の機能を実現することができる。
本発明のダイジェスト作成装置及びダイジェスト作成方法では、放送機器の履歴情報などから容易に入手できる情報を用いて、指定された長さに対応したダイジェスト情報を生成することができる。また、放送のシーン情報が与えられる場合には、リプレイ映像が撮影された時間帯の本放送のシーンをダイジェストに含めることが可能であり、シーンの長さを重要度に応じて変えるなどして、ダイジェストの質を高めることができる。
（第１の実施形態）
本発明の実施形態では、野球等のスポーツ中継におけるダイジェストを、選択したリプレイ映像を繋ぎ合わせて作成する場合について説明する。図２に示すように、スポーツ中継では、試合のライブ映像の途中に、しばしば、過去の映像のリプレイ映像が挿入されて放送される。ここでは、リプレイ映像が実際に撮影された時間帯を「リプレイ参照区間」と言い、リプレイ映像が放送された時間帯を「リプレイ放送区間」と言うことにする。図３に示すように、リプレイ参照区間は、放送局内において、各カメラの映像を監視する操作者が、編集機器から、カメラ番号を指定して「Ｑ打」の操作を行った時が開始時点であり、次の「Ｑ打」操作で終了する。また、リプレイ放送区間は、操作者がスイッチャーから「リプレイ・スタート」の操作を行った時が開始時点であり、生放送への戻りの操作で終了する。
本発明の第１の実施形態におけるダイジェスト作成方法では、リプレイ参照区間の開始時刻及び終了時刻を示す「リプレイ参照区間情報」、リプレイ映像の撮影カメラを示す「カメラ情報」、並びに、リプレイ放送区間の開始時刻及び終了時刻を示す「リプレイ放送区間情報」（これらの情報を纏めて「リプレイ情報」と言う）に基づいて、ダイジェストに取り込むべきリプレイ映像を選択する。
図１は、この方法を実施するダイジェスト作成装置１０の構成を示している。この装置１０は、編集装置機器７０及びスイッチャー８０からリプレイ情報が入力する入力部２０と、入力された各リプレイ映像情報の重要度を算出するリプレイ重要度算出部３０と、ダイジェストの尺に合わせて重要度の高いリプレイ映像情報を選択し、ダイジェスト情報を作成するダイジェスト作成部４０と、作成されたダイジェスト情報を出力する出力部５０とを備えている。なお、リプレイ重要度算出部３０及びダイジェスト作成部４０は、ダイジェスト作成装置１０に内蔵されたコンピュータが、動作を規定するプログラムを実行することにより実現される。
図４は、入力部２０に入力するリプレイ情報のデータ構造を示している。リプレイ情報には、各リプレイを識別するためのリプレイ番号の他に、リプレイ放送区間開始時刻、リプレイ放送区間終了時刻、リプレイ参照区間開始時刻、リプレイ参照区間終了時刻、及び、撮影カメラ番号の情報が含まれている。図５には、本放送に挿入されるリプレイ映像（ａ）と、リプレイ情報のデータ内容（ｂ）との関係を模式的に示している。
また、図６は、ダイジェスト作成装置１０の各部に入出力する情報を示している。入力部２０には、編集機器７０及びスイッチャー８０からリプレイ情報（図４）が入力し、また、ダイジェストの尺を指定するダイジェスト条件情報が入力する。このダイジェスト条件情報は、ダイジェスト作成装置１０が放送受信側にある場合には、中継された試合内容をダイジェストで視聴しようとするユーザの操作により入力し、また、放送送出側にある場合には、試合内容を要約したダイジェスト番組を提供しようとする編集者の操作により入力する。なお、放送送出側の編集者がダイジェストの尺を決定し、これを放送受信側のダイジェスト作成装置に送出しても良い。図７には、ダイジェスト条件情報のデータ構造を示している。入力部２０は、リプレイ情報をリプレイ重要度算出部３０に出力し、ダイジェスト条件情報をダイジェスト作成部４０に出力する。
リプレイ重要度算出部３０は、各リプレイ情報の重要度を算出し、重要度付きリプレイ情報をダイジェスト作成部４０に出力する。図８には、重要度付きリプレイ情報のデータ構造を示している。ダイジェスト作成部４０は、重要度付きリプレイ情報（図８）に示された各リプレイ情報の重要度と、ダイジェスト条件情報（図７）の指定条件とに基づいて、指定された尺のダイジェストを作成する上で組み合わせるべきリプレイ映像を選択し、ダイジェスト情報を出力部５０に出力する。図９には、ダイジェスト情報のデータ構造を示している。出力部５０は、このダイジェスト情報を外部に出力する。
次に、リプレイ情報の重要度を計るための観点について説明する。
（ａ）リプレイ回数：リプレイ回数が「多い」場合は、制作者が強く強調していると考えられるため、重要度が高い。
（ｂ）リプレイ放送区間とリプレイ参照区間との間隔：リプレイ放送区間開始時刻とリプレイ参照区間開始時刻との間隔が「広い」場合は、試合全体から評価して、制作者が見せたいと思うシーンと考えられるため、重要度が高い。
（ｃ）リプレイの長さ：リプレイ放送区間が「長い」場合は、より長い時間説明を行いたい部分と考えられるため、重要度が高い。
（ｄ）リプレイの再生スピード：再生スピードが「遅い」場合は、より詳しく説明したい部分と考えられるため、重要度が高い。
（ｅ）リプレイ放送区間のカット切り替わり数：図５のリプレイ３のように、リプレイ放送区間でカットの切り替わり数が「多い」場合は、いろいろな角度のシーンを利用して強く強調していると考えられるため、重要度が高い。
図１０は、このダイジェスト作成装置１０の処理手順を示している。入力部２０は、リプレイ情報を取得する（ステップ１）。リプレイ重要度算出部３０は、取得したリプレイ情報について、リプレイ参照区間が一部でも重なっているリプレイの個数から「（ａ）リプレイ回数」の観点に基づく重要度（回数重要度）を算出し（ステップ２−１）、また、リプレイ放送区間開始時刻とリプレイ参照区間開始時刻との差から「（ｂ）リプレイ放送区間とリプレイ参照区間との間隔」の観点に基づく重要度（間隔重要度）を算出し（ステップ２−２）、また、リプレイ放送区間終了時刻とリプレイ放送区間開始時刻との差から「（ｃ）リプレイの長さ」の観点に基づく重要度（長さ重要度）を算出し（ステップ２−３）、また、リプレイ放送区間終了時刻とリプレイ放送区間開始時刻との差と、リプレイ参照区間終了時刻とリプレイ参照区間開始時刻との差の比率から「（ｄ）リプレイの再生スピード」の観点に基づく重要度（再生スピード重要度）を算出し（ステップ２−４）、また、リプレイ情報のリプレイ参照区間開始時刻の数から「（ｅ）リプレイ放送区間のカット切り替わり数」の観点に基づく重要度（切り替え数重要度）を算出する（ステップ２−５）。
次いで、回数重要度、間隔重要度、長さ重要度、再生スピード重要度、及び、切り替え数重要度から、例えば、各重要度に重み係数αを乗じて、それらの総和を取ることによりリプレイ重要度を算出し、各リプレイ情報に付加する（ステップ３）。こうした処理を全てのリプレイ情報にリプレイ重要度が付加されるまで繰り返す（ステップ４）。
例えば、図５のリプレイ１の場合、図１１に示すように、回数重要度が１(回)、間隔重要度が１２０（秒）、長さ重要度が２０(秒)、再生スピード重要度が１(倍速)、また、切り替え数重要度が１(回)であるから、リプレイ重要度Ｒ１は、
Ｒ１＝α１・（回数重要度）＋α２・（間隔重要度）＋α３・（長さ重要度）
＋α４・（再生スピード重要度）＋α５・（切り替え数重要度）
＝α１・１＋α２・１２０＋α３・２０＋α４・１＋α５・１
ここで、α１＝α２＝α３＝α４＝α５＝１とすると、
Ｒ１＝１４３
となる。
同様の手順で、リプレイ２の重要度Ｒ２、及び、リプレイ３の重要度Ｒ３は、次のようになる。
Ｒ２＝１＋１０５＋１５＋１＋１＝１２３
Ｒ３＝１＋５０＋２５＋１＋２＝７９
リプレイ重要度算出部３０は、こうして求める重要度を各リプレイ情報に付加して重要度付きリプレイ情報を作成し（図）、これをダイジェスト作成部４０に出力する。
ダイジェスト作成部４０は、リプレイの組み合わせのうち、ダイジェスト条件情報で指定された尺に一番近く、かつ、重要度の和が最大になる組み合わせを選択して、ダイジェスト情報を作成する（ステップ５）。
このときのダイジェスト作成部４０での詳細手順を図１２に示している。ダイジェスト作成部４０は、重要度付きリプレイ情報とダイジェスト条件情報とを受信し（ステップ６１）、全てのリプレイをダイジェスト候補(ダイジェストを作成する上で、組み合わせを考える要素)として以下の処理を行う(ステップ６２)。
まず、ダイジェスト候補のリプレイの総時間長が、指定されたダイジェストの尺を超えるか否か判定する(ステップ６３)。超えるときは、指定されたダイジェストの尺に収まるダイジェスト候補の組み合わせをすべて挙げ(ステップ６５)、挙げた組み合わせごとに、リプレイ重要度の総和を算出し(ステップ６６)、リプレイ重要度の総和が最大となるリプレイの組み合わせを選択し(ステップ６７)、選択した組み合わせのリプレイを時系列に並べて、ダイジェスト情報を作成する(ステップ６８)。また、ステップ６３において、ダイジェスト候補のリプレイの総時間長が、指定されたダイジェストの尺を超えないときは、ダイジェスト候補に含まれる全てのリプレイを選択して(ステップ６４)、ステップ６８の処理を行う。
図５の場合、ダイジェスト条件情報によって指定されたダイジェストの尺が４０秒だとすると、４０秒に収まるリプレイの組み合わせは、「リプレイ１のみ」「リプレイ２のみ」「リプレイ３のみ」「リプレイ１＋リプレイ２」及び「リプレイ２＋リプレイ３」の５通りであり、各々のリプレイ重要度の総和は次のようになる。
「リプレイ１のみ」：１４３
「リプレイ２のみ」：１２３
「リプレイ３のみ」：７９
「リプレイ１＋リプレイ２」：２６６
「リプレイ２＋リプレイ３」：２１１
その結果、リプレイ重要度の総和が最も大きい「リプレイ１＋リプレイ２」が選択され、それらのリプレイを時系列に並べて、ダイジェスト情報が作成される。
ダイジェスト作成装置１０の出力部５０は、ダイジェスト作成部４０が作成したダイジェスト情報を出力する(ステップ６)。このダイジェスト情報（図９）に従って、蓄積された本放送映像の中から、ダイジェスト情報で指定されたリプレイ放送区間開始時刻からリプレイ放送区間終了時刻までのリプレイ映像のみを順次表示することにより、指定された尺を超えないダイジェストが表示できる。
このように、このダイジェスト作成方法では、容易に入手可能な、放送機器の履歴（Ｑ打ちのタイミング、スイッチの切り替え情報等）の情報のみを利用して、指定された長さのダイジェストを作成することが可能になる。
なお、リプレイ情報は、本放送映像に多重化して提供しても良く、あるいは、試合終了後に全てのリプレイ情報を纏めて提供したり、一定期間に含まれるリプレイ映像のリプレイ情報を纏めて、定期的に提供したりしてもよい。また、放送の種類（スポーツ番組、ニュース番組等）や視聴者の嗜好に応じて、重要度算出の重み係数を変更できるようにしてもよい。
また、本実施形態１では、同一放送局が同一試合中に放送するリプレイ、つまり、中継番組内で用いられるリプレイを使って重要度を算出する場合について説明したが、それだけに限る必要はない。他チャンネル（マルチチャンネルを含む）や他の試合で一度使ったリプレイが参照される場合もあり、例えば、ニュース番組やスポーツ番組等で参照される。こうした場合、当該リプレイに対しても重要度を付加しても良い。これにより、中継番組以外の番組で使用されたリプレイをダイジェストに使用することができる。
また、本実施形態１のダイジェスト作成装置は、受信局側の受信端末に設置して、視聴者がダイジェスト視聴を行うためのダイジェスト情報を作成して使用しても良い。また、放送局側のセンター装置に設置して、試合内容を要約したダイジェスト番組作成のためのダイジェスト情報を出力しても良い。あるいは、放送を通じて受信端末に提供するためのダイジェスト情報を出力するようにしても良い。リプレイ情報及びダイジェスト条件情報の取得には、「放送」「配信」「ネットワーク経由」等を用いることができる。
また、ダイジェスト作成装置の一部の機能ブロックをセンター装置に含め、他の機能ブロックを受信端末に含めることも可能である。例えば、リプレイ重要度算出部３０及びダイジェスト作成部４０をセンター装置に設置する場合、また、リプレイ重要度算出部３０をセンター装置に設置し、ダイジェスト作成部４０を受信端末に設置する場合、あるいは、リプレイ重要度算出部３０及びダイジェスト作成部４０を受信端末に設置する場合等があり、何れの場合もセンター装置側あるいは受信端末側で設定するダイジェスト条件情報に収まるダイジェスト情報を作成することができ、また、両装置間でダイジェスト作成処理の負荷を分担することや、ユーザの嗜好を加味したダイジェスト情報を作成すること等ができる。なお、センター装置において、ダイジェスト情報を作成した場合や、重要度付きリプレイ情報等を作成した場合には、当該各情報をデータベース（図示しない）で管理しても良く、受信端末がセンター装置との間で双方向通信を行った上で、データベースで管理している当該各情報を取得しても良い。これにより、両装置間においてダイジェスト作成処理を効率良く行うことができる。
(第２の実施形態)
本発明の第２の実施形態におけるダイジェスト作成方法では、リプレイ参照区間が重ならないリプレイ映像をダイジェストに取りこむようにして、ダイジェストの質を高めている。
図１４に示すように、本放送映像にリプレイ１〜４が挿入されている場合、重要度を算出すると、「リプレイ１＋リプレイ２＋リプレイ３」の方が「リプレイ１＋リプレイ３＋リプレイ４」よりも高くなる。しかし、「リプレイ１＋リプレイ２＋リプレイ３」は、リプレイ参照区間が重複する「リプレイ１」と「リプレイ２」とを含み、一方、「リプレイ１＋リプレイ３＋リプレイ４」は、リプレイ参照区間が重複するリプレイ（即ち、同じ内容の映像）を含んでいないため、「リプレイ１＋リプレイ３＋リプレイ４」の方が多くの情報量を有している。従って、この場合、「リプレイ１＋リプレイ３＋リプレイ４」を選択することにより、ダイジェストの質が向上する。
この方法を行うダイジェスト作成装置の構成は、第１の実施形態（図１、図６）と変わりがない。リプレイ重要度算出部３０は、第１の実施形態と同様の処理により各リプレイの重要度を算出し、重要度付きリプレイ情報をダイジェスト作成部４０に出力する。
ダイジェスト作成部４０は、図１５に示す手順でダイジェスト情報を作成する。ダイジェスト作成部４０は、重要度付きダイジェスト情報とダイジェスト条件情報とを受信し（ステップ６１）、全てのリプレイをダイジェスト候補と見て(ステップ６２)、ダイジェスト候補のリプレイの総時間長が、指定されたダイジェストの尺を超えるか否か判定する(ステップ６３)。超えるときは、リプレイ参照区間が重複するリプレイ情報の有無を調べ（ステップ６３１）、重複するリプレイが存在する場合に、リプレイ重要度が最小のものをダイジェスト候補から削除する（ステップ６３２）。
その後の処理は第１の実施形態と同じであり、指定されたダイジェストの尺に収まるダイジェスト候補の組み合わせをすべて挙げ(ステップ６５)、挙げた組み合わせごとに、リプレイ重要度の総和を算出し(ステップ６６)、リプレイ重要度の総和が最大となるリプレイの組み合わせを選択し(ステップ６７)、選択した組み合わせのリプレイを時系列に並べて、ダイジェスト情報を作成する(ステップ６８)。また、ステップ６３において、全てのリプレイの総時間長が、指定されたダイジェストの尺を超えないときは、全てのリプレイを選択して(ステップ６４)、ステップ６８の処理を行う。
図１６は、図１４の場合に、ダイジェストの尺が１１０秒と指定されているときの処理手順を図解している。
（ａ）全てのリプレイをダイジェスト候補としたときのリプレイの総時間長は１６０秒であり、１１０秒を超えている。
（ｂ）そこで、リプレイ参照区間が重複しているリプレイを検出する。リプレイ１とリプレイ２とが重複しているので、リプレイ重要度が最小のリプレイ２をダイジェスト候補から削除する。
（ｃ）その結果、ダイジェスト候補は、リプレイ１、リプレイ３、リプレイ４に絞られるが、その総時間長は１２０秒であり、指定された尺（１１０秒）を超えている。
（ｄ）そのため、（参照区間が重複しているリプレイはもう存在しないので）リプレイ１、リプレイ３、リプレイ４を対象として、１１０秒を超えない組み合わせを列挙し、リプレイ重要度の総和を算出する。
（ｅ）この組み合わせの内、重要度の総和が最も高いのは、リプレイ１＋リプレイ３の組み合わせである。
（ｆ）リプレイ１＋リプレイ３の組み合わせを選択し、リプレイ１、リプレイ３を時系列に並べて最終的なダイジェストとする。
このように、本実施の形態２では、リプレイ参照区間が重なるリプレイの中からダイジェスト候補を１つだけ選択することにより、ダイジェストの情報量を高めることができる。
（第３の実施形態）
スポーツ中継では、それまでのハイライト場面が度々リプレイされる。本発明の第３の実施形態におけるダイジェスト作成方法では、このハイライトに高い評価を与えてダイジェストの質の向上を図る。ハイライトは、試合を通じて重要だと思われるリプレイを集めたものであり、ハイライトという状態をダイジェスト作成に反映することにより、ダイジェストの質が高まる。
図１７は、ハイライトと通常のリプレイとの違いを示している。ハイライトは、リプレイ放送区間が連続し、リプレイ参照区間が重複していない複数のリプレイから成る。複数のリプレイの放送区間が連続していても、それらのリプレイ参照区間が重複している場合は、通常のリプレイであり、ハイライトではない。
このダイジェスト作成方法を行う装置の構成は、第１の実施形態（図１、図６）と同じである。ただ、リプレイ重要度算出部３０が、リプレイ情報の重要度を計る観点の１つとして、ハイライトに着目し、ハイライトに対して重要度（ハイライト重要度）を付加している点が違っている。
図１８は、このリプレイ重要度算出部３０の処理を含めたダイジェスト作成装置１０の処理手順を示している。リプレイ重要度算出部３０は、入力部２０から送られたリプレイ情報について、回数重要度（ステップ２−１）、間隔重要度（ステップ２−２）、長さ重要度（ステップ２−３）、再生スピード重要度（ステップ２−４）及び切り替え数重要度（ステップ２−５）を算出すると共に、リプレイ放送区間が連続していて、リプレイ参照区間が重複していない場合、それらのリプレイ群をハイライトと判定し、個々のリプレイに対してハイライト重要度を設定する（ステップ２−６）。
次いで、回数重要度、間隔重要度、長さ重要度、再生スピード重要度、切り替え数重要度、及び、ハイライト重要度からリプレイ重要度を算出し、リプレイ情報に付加する（ステップ３）。こうした処理を全てのリプレイ情報にリプレイ重要度が付加されるまで繰り返す（ステップ４）。リプレイ重要度算出部３０から重要度付きリプレイ情報を受信したダイジェスト作成部４０の動作は、第１の実施形態と同じである。
図１９に示すリプレイ１〜５の場合、各リプレイについて、回数、間隔、長さ、再生スピード、切り替え数に加えて、それぞれのリプレイがハイライトであるかどうかが判定される。リプレイ１及びリプレイ２は、リプレイ放送区間は連続しているが、リプレイ参照区間が重複しているため、ハイライトではない。一方、リプレイ３、リプレイ４及びリプレイ５は、リプレイ放送区間が連続していて、リプレイ参照区間が重複していないため、ハイライトと判定される。そのため、リプレイ３、リプレイ４、リプレイ５のそれぞれのリプレイには、ハイライト重要度が設定される。リプレイ１とリプレイ５との重要度を比較すると、次のようになる。
リプレイ１の重要度＝回数重要度＋間隔重要度＋長さ重要度＋再生スピード重要度
＋切り替え数重要度
＝１＋６０＋４０＋１＋１＝１０３
リプレイ５の重要度＝回数重要度＋間隔重要度＋長さ重要度＋再生スピード重要度
＋切り替え数重要度＋ハイライト重要度
＝１＋６０＋２０＋１＋１＋３０＝１１３
このように、本実施の形態３では、ハイライト放送区間のリプレイ映像のリプレイ重要度を高くすることにより、番組の制作者が重要と判断したハイライト映像をダイジェストに取り込むことが可能になる。
（第４の実施形態）
本発明の第４の実施形態では、リプレイ映像以外の映像を用いてダイジェストを作成する方法について説明する。この方法では、リプレイ情報と共に、ライブ映像のカット切り替わり点の情報を取得して、図２０に示すように、リプレイ映像をダイジェストに用いる代わりに、リプレイ参照区間を含むライブ映像のカット（即ち、そのリプレイ映像が実際に撮影された時間帯のライブ映像）をダイジェストに使用する。
この方法を行うダイジェスト作成装置の構成は、第１の実施形態（図１、図６）と同じである。ただ、入力部２０に、リプレイ情報と共に、放送機器の操作履歴より得られるライブ映像のカット切り替わり点の情報が入力し、ダイジェスト作成部４０が、重要度付きリプレイ情報に含まれるリプレイ参照区間の情報とカット切り替わり点の情報とから、リプレイ参照区間を含むライブ映像のカット（複数に跨る場合も有り得る）を特定し、そのカットを重要度が付されたダイジェスト候補と見做して、ダイジェスト情報を作成する点が違っている。
また、入力部２０に、リプレイ情報と共に、シーン情報（意味のある映像の区切りを表す情報）が与えられる場合には、リプレイ映像をダイジェストに用いる代わりに、リプレイ参照区間を含むライブ映像のシーンをダイジェストに使用することもできる。
例えば、図２１に示すように、野球中継において、イニングの区切りを表すシーン情報、打者の区切りを表すシーン情報、及び、投球の区切りを表すシーン情報が与えられる場合には、リプレイ参照区間を含むイニングのシーンをダイジェスト候補にしたり、リプレイ参照区間を含む打者のシーンをダイジェスト候補にしたり、あるいは、リプレイ参照区間を含む投球のシーンをダイジェスト候補にしたりすることができる。また、リプレイの重要度が高いときは、イニングのシーンをダイジェスト候補に設定し、リプレイの重要度が低いときは、投球のシーンをダイジェスト候補に設定する、と言うように、リプレイ重要度に応じて、区切るシーンの大きさを変えることもできる。
図２２は、この場合のダイジェスト作成部４０における処理手順を示している。ダイジェスト作成部４０は、重要度付きリプレイ情報、ダイジェスト条件情報、及び、シーン情報を受信すると(ステップ６１１)、ダイジェスト候補を空にして以下の処理を行う(ステップ６１２)。リプレイの重要度の値により、シーンを区切る階層を決定し(ステップ６１４)、シーン情報を利用して、リプレイのリプレイ参照区間を包含しているシーンの区間を、指定された階層から取得し(ステップ６１５)、ダイジェスト候補に、取得したシーンの区間を追加する(ステップ６１６)。
この処理を全てのリプレイに対して繰り返し、全てのリプレイに対してシーン情報への対応付けが終了すると(ステップ６１３)、ダイジェスト候補のシーン区間の総時間長が、指定されたダイジェストの尺を超えるかを判断し(ステップ６３１)、超える場合は、指定されたダイジェストの尺に収まるダイジェスト候補の組み合わせをすべて挙げ(ステップ６５)、挙げた組み合わせごとに、リプレイ重要度の総和を算出し(ステップ６６)、リプレイ重要度の総和が最大となるダイジェスト候補の組み合わせを選択し(ステップ６７)、選択した組み合わせのシーン区間を時系列に並べて、ダイジェスト情報を作成する(ステップ６８１)。また、ステップ６３１において、全てのシーン区間の総時間長が、指定されたダイジェストの尺を超えないときは、全てのシーン区間を選択して(ステップ６４１)、ステップ６８１の処理を行う。
図２３及び図２４は、この場合の処理を図解している。シーンを区切る単位(階層)を、重要度が高いリプレイ１は「イニングでの区切り」、重要度が低いリプレイ２は「投球での区切り」、重要度が中位のリプレイ３は「打者での区切り」と決定する。シーン情報から、リプレイ１の参照区間を包含する「イニングでの区切り」、リプレイ２の参照区間を包含する「投球での区切り」、及び、リプレイ３の参照区間を包含する「打者での区切り」を取得し、これらをダイジェスト候補とする。図２４（ａ１）は、リプレイ１に対応するダイジェスト候補のシーン、図２４（ａ２）は、リプレイ３に対応するダイジェスト候補のシーン、図２４（ａ３）は、リプレイ２に対応するダイジェスト候補のシーンを示している。
ダイジェストの尺が１６０秒と指定されている場合は、この３つのダイジェスト候補を使って、１６０秒に収まるダイジェスト候補の組み合わせを全て求め、その中で重要度の総和が最大となる組み合わせを選択する。この場合、図２４（ｂ）に示す組み合わせが選択される。実際に、このダイジェスト情報を利用して視聴されるダイジェストは、図２４（ｃ）のように、「２回表」のシーン区間に対応する本放送映像部分（Live1の一部分）と、「打者１」に対応する本放送映像（Live3の一部分）のようになる。
このように、本実施の形態４では、リプレイ参照区間を包含する本放送映像のカットやシーンをダイジェストに用いることにより、リプレイ映像に映されたプレイがどのような状況で発生したかが分かり易くなり、ダイジェストの質を高めることができる。
なお、シーンの時間の区切りは、以上のものを用いるが、ダイジェストとして使用する映像は、本放送映像以外のもの（本放送以外の別カメラの映像等）を用いても良い。また、ここでは、１リプレイに対して、１つのシーンの区間を対応させ、シーンの区間だけを利用してダイジェストを作成しているが、必ずしもこの限りではなく、リプレイ、シーンの区間の両方を組み合わせてダイジェストを作成しても良い。
（第５の実施形態）
上記実施形態の説明からも明らかなように、各リプレイ情報の重要度の算出は、大きく分けると、二段階に分けられ、リプレイの回数、間隔、時間の長さ、放送スピード、あるいはカット切り替わり数などの重要度の算出を行った後、当該リプレイ情報の重要度の算出を行っている。本発明の第５の実施形態におけるダイジェスト作成方法では、実施形態１で示したリプレイ重要度算出部３０の構成を第１リプレイ重要度算出部３１と第２リプレイ重要度算出部３２に分け、放送局側に備えるセンター装置１００と受信局側に備える受信端末２００に分けてダイジェストを作成する方法について説明する。
図２５に示すように、センター装置１００には編集機器７０およびスイッチャー８０（図１）から第１リプレイ情報を入力する入力部２０と、第１リプレイ情報を取得し、当該情報から回数重要度、間隔重要度、長さ重要度、再生スピード重要度、切り替え数重要度等を算出し、各重要度と第１リプレイ情報を対応付けた第２リプレイ情報を作成する第１リプレイ重要度算出部３１とを備えている。
図２６は、入力部２０に入力する第１リプレイ情報のデータ構造を示している。第１リプレイ情報には、各リプレイを識別するためのリプレイ番号の他に、リプレイ放送区間開始時刻、リプレイ放送区間終了時刻、リプレイ参照区間開始時刻、リプレイ参照区間終了時刻、及び、撮影カメラ番号の情報が含まれている。なお、本実施形態の第１リプレイ情報は、第１の実施形態で示したリプレイ情報のデータ構造と同じである。
また、図２７は、第１リプレイ重要度算出部３１で作成される第２リプレイ情報のデータ構造を示している。第２リプレイ情報は、第１リプレイ情報に示されている各々の情報から算出した、回数重要度、間隔重要度、長さ重要度、再生スピード重要度、切り替え数重要度等を第１リプレイ情報と対応付けている。例えば、図５のリプレイ１の場合、図１１に示すように、回数重要度が１(回)、間隔重要度が１２０（秒）、長さ重要度が２０(秒)、再生スピード重要度が１(倍速)、また、切り替え数重要度が１(回)であり、第２リプレイ情報は、これらの各重要度を第１リプレイ情報と対応付けている。
一方、受信端末２００にはセンター装置１００から送出される第２リプレイ情報を取得し、重み付けルール設定データベース６０で管理されている重み係数に基づいて、第２リプレイ情報に示される各重要度を調整して当該リプレイ情報の重要度を算出し、重要度付きリプレイ情報を出力する第２リプレイ重要度算出部３２と、当該重要度付きリプレイ情報及びユーザの操作により入力されるダイジェスト条件情報（ダイジェストの尺）を取得し、ダイジェストの尺に合わせて重要度の高いリプレイ情報を選択し、ダイジェスト情報を作成するダイジェスト作成部４０と、作成されたダイジェスト情報を出力する出力部５０とを備えている。なお、センター装置１００の第１リプレイ重要度算出部３１、受信端末２００の第２リプレイ重要度算出部３２及びダイジェスト作成部４０は、それぞれの装置１００あるいは端末２００に内蔵されたコンピュータが動作を規定するプログラムを実行することにより実現される。
図２９は、センター装置１００で第１リプレイ情報を取得してから、受信端末２００でダイジェスト情報を出力するまでの処理手順を示している。センター装置１００における入力部２０は、第１リプレイ情報を取得する（ステップ１）。第１リプレイ重要度算出部３１は、第１リプレイ情報について、リプレイ参照区間が一部でも重なっているリプレイの個数から「（ａ）リプレイ回数」の観点に基づく重要度（回数重要度）を算出し（ステップ２−１）、また、リプレイ放送区間開始時刻とリプレイ参照区間開始時刻との差から「（ｂ）リプレイ放送区間とリプレイ参照区間との間隔」の観点に基づく重要度（間隔重要度）を算出し（ステップ２−２）、また、リプレイ放送区間終了時刻とリプレイ放送区間開始時刻との差から「（ｃ）リプレイの長さ」の観点に基づく重要度（長さ重要度）を算出し（ステップ２−３）、また、リプレイ放送区間終了時刻とリプレイ放送区間開始時刻との差と、リプレイ参照区間終了時刻とリプレイ参照区間開始時刻との差の比率から「（ｄ）リプレイの再生スピード」の観点に基づく重要度（再生スピード重要度）を算出し（ステップ２−４）、また、リプレイ情報のリプレイ参照区間開始時刻の数から「（ｅ）リプレイ放送区間のカット切り替わり数」の観点に基づく重要度（切り替え数重要度）を算出する（ステップ２−５）。
第１リプレイ重要度算出部３１は、こうした処理を全てのリプレイ情報に対して各重要度が算出されるまで繰り返し行い（ステップ３）、当該処理が終了した場合、受信端末２００の第２リプレイ重要度算出部３０へ第２リプレイ情報を送出する（ステップ４）。
第２リプレイ重要度算出部３０は、センター装置１００の第１リプレイ重要度算出部３１から送出される第２リプレイ情報を取得する（ステップ５）。これに従い、第２リプレイ重要度算出部３０は、重み付けルール設定データベース７０からジャンル毎に管理されている重み付けルール設定テーブル（図３０）を取得し、当該テーブルに示されている重み係数に基づいて、第２リプレイ情報に示される各重要度を調整する。
例えば、入力された第１リプレイ情報が野球を示している場合、図３０に示すように、回数重要度、間隔重要度、長さ重要度、再生スピード重要度、切り替え数重要度の重み係数はそれぞれ、α１＝１．５，α２＝１．５，α３＝１，α４＝０．５，α５＝１であるので、
図５のリプレイ１の重要度Ｒ１は、
Ｒ１＝α１・（回数重要度）＋α２・（間隔重要度）＋α３・（長さ重要度）
＋α４・（再生スピード重要度）＋α５・（切り替え数重要度）
＝１．５・１＋１．５・１２０＋１・２０＋０．５・１＋１・１
＝２０３
となる。
同様の手順で、図５のリプレイ２の重要度Ｒ２、及び、リプレイ３の重要度Ｒ３は、次のようになる。
Ｒ２＝１．５・１＋１．５・１０５＋１・１５＋０．５・１＋１・１
＝１７５．５
Ｒ３＝１．５・１＋１．５・５０＋１・２５＋０．５・１＋１・２
＝１０４
リプレイ重要度算出部３０は、こうして求める重要度を第２リプレイ情報に付加して重要度付きリプレイ情報を作成し（図２８）、これをダイジェスト作成部４０に出力する（ステップ６）。
なお、重み付けルール設定テーブルに示される重み係数の値は、放送局側または受信局側の人物の何れかが設定できるものとする。放送局側の人物が設定した場合には、利用者に対して同じ傾向のダイジェストを提供することができる。一方、受信局側の人物が設定した場合には、利用者の嗜好を加味したダイジェストを作成することができる。また、放送局側あるいは受信局側にとって好ましいダイジェストが作成できるよう、重み係数の値が更新されるようにしても良い。
ダイジェスト作成部４０は、取得した重要度付きリプレイ情報の組み合わせのうち、ユーザの操作により入力されたダイジェスト条件情報で指定された尺に一番近く、且つ、重要度の和が最大になる組み合わせを選択して、ダイジェスト情報を作成する（ステップ７）。なお、このときのダイジェスト作成部４０での詳細手順は図１２や図１５で示した手順と同じである。
図５の場合、ダイジェスト条件情報によって指定されたダイジェストの尺が４０秒だとすると、４０秒に収まるリプレイの組み合わせは、「リプレイ１のみ」「リプレイ２のみ」「リプレイ３のみ」「リプレイ１＋リプレイ２」及び「リプレイ２＋リプレイ３」の５通りであり、各々のリプレイ重要度の総和は次のようになる。
「リプレイ１のみ」：２０３
「リプレイ２のみ」：１７５．５
「リプレイ３のみ」：１０４
「リプレイ１＋リプレイ２」：３７８．５
「リプレイ２＋リプレイ３」：２７９．５
その結果、リプレイ重要度の総和が最も大きい「リプレイ１＋リプレイ２」が選択され、それらのリプレイを時系列に並べて、ダイジェスト情報が作成される。
受信端末２００の出力部５０は、ダイジェスト作成部４０が作成したダイジェスト情報を取得し、出力する(ステップ８)。このダイジェスト情報（図９）に従って、受信端末２００に蓄積された本放送映像の中から、ダイジェスト情報で指定されたリプレイ放送区間開始時刻からリプレイ放送区間終了時刻までのリプレイ映像のみを順次表示することにより、指定された尺を超えないダイジェストが表示できる。
このように、このダイジェスト作成方法では、実施形態１乃至４で示したリプレイ重要度算出部の構成を分離し、放送局側と受信局側に分けており、リプレイの回数、間隔、時間の長さ、放送スピード、あるいはカット切り替わり数などの重要度の算出を放送局で行い、一方、当該リプレイ情報に対する重要度の算出を受信局で行うので、各リプレイ情報の重要度の算出を両装置間で分担して行うことができ、また、ユーザの嗜好を加味したダイジェスト情報を作成すること等ができる。
なお、本実施形態では、受信端末２００が取得する第２リプレイ情報は、片方向通信により取得しているが、双方向通信により取得しても良い。つまり、センター装置１００において、第１リプレイ重要度算出部３１で算出した第２リプレイ情報をデータベース（図示しない）で管理し、受信端末２００からセンター装置１００に対して第２リプレイ情報を要求した上で取得しても良く、これにより、両装置間においてダイジェスト作成処理を効率良く行うことができる。
また、本実施形態では、受信端末２００のダイジェスト作成部４０で取得するダイジェスト条件情報は、ユーザの操作により入力しているが、センター装置１００側で設定したダイジェスト条件情報を取得しても良い。何れの場合もセンター装置側あるいは受信端末側で設定するダイジェスト条件情報に収まるダイジェスト情報を作成することができる。
また、本実施形態では「第１リプレイ重要度算出部３１」、「第２リプレイ重要度算出部３２」を「センター装置１００」、「受信端末２００」にそれぞれ分離して説明したが、これらが同一装置内で動作できることは言うまでもなく、上記実施の形態１で説明したとおりである。
その他、リプレイ重要度算出の方法は、実施形態に示した方法以外であってもよい。例えば、「リプレイ放送区間とリプレイ参照区間との間隔」から算出する間隔重要度について、その差分のみで算出される重要度は、イベントが発生する時間帯に影響してしまう。つまり、図３１に示すように、同じようなイベントであっても、試合の後半に発生したイベントのリプレイは、前半で発生したイベントのリプレイよりも間隔が短くなり、間隔の重要度は正確に反映されない。そこで試合放送の残り時間を考慮して、以下の計算式により、間隔重要度を算出しても良い。また、上記実施形態で示した間隔についての重要度の算出は、差分に定数（１）を乗じたものであるが、対数を乗じたものでも良いものとする。
Figure 2006067564
 また、「リプレイ放送区間とリプレイ参照区間との間隔」から算出する間隔重要度について、リプレイ参照区間が重複し、リプレイ放送区間が連続して用いられる場合、すなわち、同じイベントのリプレイが連続して放送される場合、図３２に示すように、後で使用されるリプレイ情報の間隔重要度は、前に使用されるリプレイの長さの分だけ間隔が開いてしまい、同じ値の間隔重要度が付けなければならないにもかかわらず、大きく算出されてしまう。このようなリプレイは、野球においては奪三振シーンを様々な角度からリプレイするような場合など、数多く放送されており、後で使用されるリプレイの方が重要であるということはない。従って、このような場合のリプレイ間隔重要度の算出に差が生じないように、同じイベントのリプレイ参照区間が連続して用いられる場合は、最初のリプレイ放送開始時刻を連続して用いられるイベントのリプレイ放送開始時刻とみなして、リプレイ間隔重要度の算出を行うよう設定する。
また、イベントの直後に用いられるリプレイは、主に当該イベントを強調するために用いられるが、リプレイ放送区間とリプレイ参照区間との間隔が広いほど重要度を大きく算出する手段を設定していると、図３３に示すように、イベントの直後に用いられるリプレイは間隔重要度の値が小さく算出されてしまう。イベントの直後に用いられるリプレイには、「ファインプレー」や「奪三振シーン」等のイベントがあり、これらは、試合に直接的に影響するイベントではないが、ダイジェストとして利用できるものである。そこで、リプレイ放送区間とリプレイ参照区間の所定位置の間隔について閾値を設定し、当該閾値を用いて各リプレイ映像／音声をグループ分けしても良い。すなわち、設定された閾値を用いてグループ分けすることにより、特徴が異なるリプレイ映像／音声を区分けすることができる。例えば、リプレイ放送区間とリプレイ参照区間の所定位置の間隔が閾値よりも小さい場合は、イベント直後のファインプレーや奪三振シーンなどのリプレイが含まれるグループを作成し、一方、当該間隔が閾値よりも大きい場合は、イベント発生からある時間以上経って使用されるリプレイ、つまり、試合の流れを示すリプレイが含まれるグループを作成することができる。そして、例えば、利用者がファインプレーや奪三振シーンに重きをおいたダイジェストを作成したい場合には、該当するグループ内のリプレイ映像／音声のリプレイ間隔重要度に所定の係数を乗じて間隔重要度を高く設定する。一方、試合全体を加味したダイジェストを作成したい場合には、該当するグループ内のリプレイ映像／音声のリプレイ間隔重要度に所定の係数を乗じて間隔重要度を高く設定する。これにより、ダイジェスト作成装置を利用する視聴者やダイジェスト作成者等は、所望のダイジェスト内容に応じたダイジェスト情報を取得することができる。
また、中継番組終了後に放送されるリプレイ、例えばニュース番組やスポーツ番組における放送は、番組編成に大きく関与しており、リプレイ放送区間とリプレイ参照区間との間隔に重要度が比例していない。そこで、図３４に示すように、中継番組終了後のリプレイ情報については、リプレイ間隔重要度を区別せず、同じ値の重要度に設定しておく。ただし、中継番組終了後に放送されるリプレイは、全て重要なものであると考えられるので、中継番組終了後のリプレイ情報については、重要度の数値を高く設定しておいたほうが良い。つまり、中継番組終了時点の前後で、間隔重要度の算出方法を個別に設定しておく必要がある。
また、上記実施形態では、リプレイ参照区間の開始時刻とリプレイ放送区間の開始時刻との「間隔」からリプレイ映像の重要度を差別化する場合について説明したが、その他の「間隔」に基づいて重要度の差別化を図ることも可能である。例えば、リプレイ参照区間とリプレイ放送区間の中間となる時刻の「間隔」からリプレイ映像の重要度を差別化しても良い。
なお、上記実施形態では、撮影カメラ台数が複数台の場合について説明したが、図１３（ａ）に示すように、カメラは１台でも構わない。この場合、リプレイ情報には、図１３（ｂ）に示すように、撮影カメラ番号の情報を含める必要がない。さらに、リプレイ情報の重要度は、リプレイ映像を撮影したカメラの番号(カメラの撮影方向)によって差別化するようにしても良い。また、子画面表示されているリプレイ映像の画面の大きさや、ＣＧ表示のエフェクトにより重要度を差別化してもよい。
以上、本発明のダイジェスト作成方法及びプログラムは、このダイジェスト作成装置において実施され、また、本発明のダイジェスト作成装置の動作を規定するプログラムは、記録媒体に記録して、他の装置に移転または複写することができる。
本発明のダイジェスト作成装置は、放送局の放送機器と組み合わせて、番組のダイジェストを作成するために用いることができ、あるいは、放送用のダイジェスト情報を作成する装置として利用することができる。また、受信端末と組み合わせて、蓄積した番組のダイジェスト視聴を可能にする装置として利用することもできる。
また、本発明のダイジェスト作成装置は、スポーツ番組以外にもニュース番組やドラマ番組等、リプレイを利用する他のジャンルに属する番組のダイジェストを作成する場合にも適用できる。さらに、リプレイが音声の場合にも適用できる。
本発明の第１の実施形態におけるダイジェスト作成装置の構成を示すブロック図 リプレイ放送区間とリプレイ参照区間とを説明する図 本発明の第１の実施形態におけるダイジェスト作成装置が使用する情報を説明する図 本発明の第１の実施形態におけるリプレイ情報のデータ構造を示す図 リプレイとリプレイ情報との関係を示す具体例 本発明の第１の実施形態におけるダイジェスト作成装置の各部に入力する情報を示す図 本発明の第１の実施形態におけるダイジェスト条件情報のデータ構造を示す図 本発明の第１の実施形態における重要度付きリプレイ情報のデータ構造を示す図 本発明の第１の実施形態におけるダイジェスト情報のデータ構造を示す図 本発明の第１の実施形態におけるダイジェスト作成装置の処理手順を示すフロー図 本発明の第１の実施形態におけるリプレイ重要度の算出方法を説明する図 本発明の第１の実施形態におけるダイジェスト作成部の処理手順を示すフロー図 カメラが１台の場合のリプレイとリプレイ情報との関係を示す図 本発明の第２の実施形態におけるダイジェスト作成方法を説明する図 本発明の第２の実施形態におけるダイジェスト作成部の処理手順を示すフロー図 本発明の第２の実施形態におけるダイジェスト作成方法を図解した図 本発明の第３の実施形態におけるダイジェスト作成方法を説明する図 本発明の第３の実施形態におけるダイジェスト作成装置の処理手順を示すフロー図 本発明の第３の実施形態におけるダイジェスト作成方法での重要度算出例を示す図 本発明の第４の実施形態におけるダイジェスト作成方法を説明する図 本発明の第４の実施形態におけるダイジェスト作成方法を説明する図 本発明の第４の実施形態におけるダイジェスト作成部の処理手順を示すフロー図 本発明の第４の実施形態における区切り階層決定方法を説明する図 本発明の第４の実施形態におけるダイジェスト情報作成手順を図解した図 本発明の第５の実施形態におけるダイジェスト作成装置の構成を示すブロック図 本発明の第５の実施形態における第１リプレイ情報のデータ構造を示す図 本発明の第５の実施形態における第２リプレイ情報のデータ構造を示す図 本発明の第５の実施形態における重要度付きリプレイ情報のデータ構造を示す図 本発明の第５の実施形態におけるダイジェスト作成装置の処理手順を示すフロー図 本発明の第５の実施形態におけるデータベースで管理されている重み付けルール設定テーブルを示す図 試合の前半及び後半に発生するイベントのリプレイの違いについて説明する図 同じイベントのリプレイを連続して用いられる場合の間隔重要度の算出方法について説明する図 イベントの直後に用いられるリプレイについて閾値を用いて間隔重要度を算出することを説明する図 中継番組以外に用いるリプレイの重要度の算出方法を説明する図 従来のダイジェスト作成装置の構成を示すブロック図
符号の説明
１０ ダイジェスト作成装置
２０ 入力部
３０ リプレイ重要度算出部
３１ 第１リプレイ重要度算出部
３２ 第２リプレイ重要度算出部
４０ ダイジェスト作成部
５０ 出力部
６０ 重み付けルール設定データベース
７０ 編集機器
８０ スイッチャー
１００ センター装置
２００ 受信端末

Claims (24)

  1. リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報とを入力する入力部と、
    前記リプレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像／音声の重要度を算出し、前記リプレイ情報に前記重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出部と、
    前記重要度付きリプレイ情報と前記ダイジェスト条件情報とを受信し、前記リプレイ映像／音声をダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択するダイジェスト作成部とを備えることを特徴とするダイジェスト作成装置。
  2. 前記ダイジェスト作成部は、リプレイ参照区間が重複する複数のリプレイ映像／音声の内、前記重要度が最大でないリプレイ映像／音声を前記ダイジェスト候補から除外して、前記組み合わせを選択することを特徴とする請求項１に記載のダイジェスト作成装置。
  3. リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、映像／音声の区間を示す情報とを入力する入力部と、
    前記リプレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像／音声の重要度を算出し、前記リプレイ情報に前記重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出部と、
    前記重要度付きリプレイ情報と前記ダイジェスト条件情報とを受信し、前記リプレイ映像／音声のリプレイ参照区間を包含する区間の前記映像／音声を、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択するダイジェスト作成部と
    を備えることを特徴とするダイジェスト作成装置。
  4. リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、映像／音声を放送する放送のカットの切り替わり点を示すカット特定情報とを入力する入力部と、
    前記リプレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像／音声の重要度を算出し、前記リプレイ情報に前記重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出部と、
    前記重要度付きリプレイ情報と前記ダイジェスト条件情報と前記カット特定情報とを受信し、前記リプレイ映像／音声のリプレイ参照区間を包含する前記放送のカットを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択するダイジェスト作成部とを備えることを特徴とするダイジェスト作成装置。
  5. リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報と、ダイジェストの長さを指定するダイジェスト条件情報と、放送される映像／音声のシーンを示すシーン情報とを入力する入力部と、
    前記リプレイ情報から求める、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを用いてリプレイ映像／音声の重要度を算出し、前記リプレイ情報に前記重要度を付した重要度付きリプレイ情報を出力するリプレイ重要度算出部と、
    前記重要度付きリプレイ情報と前記ダイジェスト条件情報と前記シーン情報とを受信し、前記リプレイ映像／音声のリプレイ参照区間を包含するシーン情報で区切られた映像／音声を、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択するダイジェスト作成部とを備えることを特徴とするダイジェスト作成装置。
  6. 前記ダイジェスト作成部は、前記リプレイ映像／音声の重要度に応じて、前記リプレイ参照区間を包含する映像／音声のシーンの大きさを変えることを特徴とする請求項３または５に記載のダイジェスト作成装置。
  7. 前記リプレイ重要度算出部は、前記リプレイ放送区間が連続し、前記リプレイ参照区間が重複していない複数のリプレイ映像／音声に対して重要度を加算することを特徴とする請求項１から６のいずれかに記載のダイジェスト作成装置。
  8. 前記リプレイ重要度算出部は、前記リプレイ情報を基に、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つの重要度を算出する、第１リプレイ重要度算出部と、
    前記第１リプレイ重要度算出部で算出した各重要度を基に、前記リプレイ情報の重要度を算出する第２リプレイ重要度算出部とを備えることを特徴とする請求項１から６のいずれかに記載のダイジェスト作成装置。
  9. 前記第１リプレイ重要度算出部を送信局側に備え、前記第２リプレイ重要度算出部を受信局側に備えることを特徴とする請求項８に記載のダイジェスト作成装置。
  10. 前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔から算出するリプレイ間隔重要度は、差分に定数あるいは対数を乗じたものを用いることを特徴とする請求項１から６のいずれかに記載のダイジェスト作成装置。
  11. 前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔から算出するリプレイ間隔重要度は、以下の式を用いて算出することを特徴とする請求項１から６のいずれかに記載のダイジェスト作成装置。
    Figure 2006067564
  12. 前記リプレイ参照区間が重複し、前記リプレイ放送区間が連続して用いられる場合、前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔から算出するリプレイ間隔重要度は、最初に用いられるリプレイ放送区間の所定位置を、連続して用いられるイベントのリプレイ放送区間の所定位置とみなして算出することを特徴とする請求項１から６のいずれかに記載のダイジェスト作成装置。
  13. 前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔から算出するリプレイ間隔重要度は、前記リプレイ放送区間とリプレイ参照区間の所定位置の間隔について設定された閾値を用いて前記リプレイ映像／音声をグループ分けし、利用者により選択されるダイジェスト内容に応じて、該当するグループ内の前記リプレイ映像／音声の前記リプレイ間隔重要度に所定の係数を乗じることを特徴とする請求項１から６のいずれかに記載のダイジェスト作成装置。
  14. リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出し、前記リプレイ映像／音声をダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択することを特徴とするダイジェスト作成方法。
  15. 前記リプレイ参照区間が重複している複数のリプレイ映像／音声がある場合に、前記リプレイ映像／音声の内、前記重要度が最大でないリプレイ映像／音声を前記ダイジェスト候補から除外して、前記組み合わせを選択することを特徴とする請求項８に記載のダイジェスト作成方法。
  16. リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出し、前記リプレイ映像／音声のリプレイ参照区間を包含する区間の映像／音声を、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択することを特徴とするダイジェスト作成方法。
  17. リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出し、前記リプレイ映像／音声のリプレイ参照区間を包含する映像／音声の放送のカットを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択することを特徴とするダイジェスト作成方法。
  18. リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出し、前記リプレイ映像／音声のリプレイ参照区間を包含するシーン情報で区切られた映像／音声のシーンを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択する情報を出力することを特徴とするダイジェスト作成方法。
  19. 前記リプレイ映像／音声の重要度に応じて、前記リプレイ参照区間を包含する映像／音声のシーンの大きさを変えることを特徴とする請求項１２に記載のダイジェスト作成方法。
  20. 前記リプレイ放送区間が連続し、前記リプレイ参照区間が重複していない複数のリプレイ映像／音声に対して重要度を加算することを特徴とする請求項８から請求項１３のいずれかに記載のダイジェスト作成方法。
  21. コンピュータに、
    リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出する手順と、
    前記リプレイ映像／音声をダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択する手順と
    を実行させるためのプログラム。
  22. コンピュータに、
    リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出する手順と、
    前記リプレイ映像／音声のリプレイ参照区間を包含する区間の映像／音声を、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択する手順と
    を実行させるためのプログラム。
  23. コンピュータに、
    リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出する手順と、
    前記リプレイ映像／音声のリプレイ参照区間を包含する放送された映像／音声のカットを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択する手順と
    を実行させるためのプログラム。
  24. コンピュータに、
    リプレイ映像／音声の放送時間帯を特定するリプレイ放送区間情報と前記リプレイ映像／音声の実際の撮影／収音時間帯を特定するリプレイ参照区間情報とが含まれたリプレイ情報から、リプレイの回数、リプレイ放送区間とリプレイ参照区間の所定位置の間隔、リプレイの放送時間長、リプレイの放送スピード、または、リプレイのカット切り替わり数、の少なくとも一つを求め、得られた値を用いてリプレイ映像／音声の重要度を算出する手順と、
    前記リプレイ映像／音声の重要度に応じて、シーン情報で区切られた映像／音声のシーンの階層を選択する手順と、
    前記リプレイ映像／音声のリプレイ参照区間を包含する映像／音声の前記階層におけるシーンを、当該リプレイ映像／音声の重要度を有するダイジェスト候補に設定して、指定されたダイジェストの長さを超えない範囲で、前記重要度の総和が最大になる前記ダイジェスト候補の組み合わせを選択する手順と
    を実行させるためのプログラム。
JP2005211614A 2004-07-30 2005-07-21 ダイジェストの作成方法及び装置 Expired - Fee Related JP4758161B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2005211614A JP4758161B2 (ja) 2004-07-30 2005-07-21 ダイジェストの作成方法及び装置
US11/572,957 US8544037B2 (en) 2004-07-30 2005-07-25 Digest creating method and device
PCT/JP2005/013574 WO2006011447A1 (ja) 2004-07-30 2005-07-25 ダイジェストの作成方法及び装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2004223135 2004-07-30
JP2004223135 2004-07-30
JP2005211614A JP4758161B2 (ja) 2004-07-30 2005-07-21 ダイジェストの作成方法及び装置

Publications (2)

Publication Number Publication Date
JP2006067564A true JP2006067564A (ja) 2006-03-09
JP4758161B2 JP4758161B2 (ja) 2011-08-24

Family

ID=35786196

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005211614A Expired - Fee Related JP4758161B2 (ja) 2004-07-30 2005-07-21 ダイジェストの作成方法及び装置

Country Status (3)

Country Link
US (1) US8544037B2 (ja)
JP (1) JP4758161B2 (ja)
WO (1) WO2006011447A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007139105A1 (ja) * 2006-05-31 2007-12-06 Pioneer Corporation 放送受信装置、ダイジェスト生成方法、およびダイジェスト生成プログラム

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4776423B2 (ja) * 2006-04-24 2011-09-21 パナソニック株式会社 映像操作履歴を基にした重要度情報付与装置及び方法
US9432629B2 (en) * 2008-08-18 2016-08-30 Brigham Young University Interactive viewing of sports video
JP4924633B2 (ja) * 2009-02-27 2012-04-25 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8621486B2 (en) * 2010-06-30 2013-12-31 Hewlett-Packard Development Company, L.P. Significance level automation
US9288431B2 (en) * 2014-03-25 2016-03-15 Rovi Guides, Inc. Systems and methods for re-recording content associated with re-emerged popularity
US9996769B2 (en) * 2016-06-08 2018-06-12 International Business Machines Corporation Detecting usage of copyrighted video content using object recognition
CN109167934B (zh) * 2018-09-03 2020-12-22 咪咕视讯科技有限公司 一种视频处理方法、装置及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11238071A (ja) * 1998-02-20 1999-08-31 Toshiba Corp ダイジェスト作成装置及びダイジェスト作成方法
JP2002290954A (ja) * 2001-03-23 2002-10-04 Sanyo Electric Co Ltd 要約映像特定装置、要約映像特定方法、および映像端末
WO2003096229A2 (en) * 2002-05-07 2003-11-20 Hewlett-Packard Development Company, L. P. Scalable video summarization and navigation system and method
JP2003333505A (ja) * 2002-05-14 2003-11-21 Pioneer Electronic Corp 記録媒体、映像記録装置、映像再生装置及び映像記録再生装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3728775B2 (ja) 1995-08-18 2005-12-21 株式会社日立製作所 動画像の特徴場面検出方法及び装置
US5717879A (en) * 1995-11-03 1998-02-10 Xerox Corporation System for the capture and replay of temporal data representing collaborative activities
JPH10243352A (ja) * 1997-02-27 1998-09-11 Hitachi Ltd 映像情報記録再生装置
ATE240559T1 (de) * 1998-09-03 2003-05-15 Ricoh Kk Speichermedien mit video- beziehungsweise audioindexinformation, verwaltungsverfahren und wiederauffindungsverfahren für video-, bzw audioinformation und videowiederauffindungssystem
US6795092B1 (en) * 1999-02-15 2004-09-21 Canon Kabushiki Kaisha Data processing apparatus and method, and storage medium
JP3176893B2 (ja) * 1999-03-05 2001-06-18 株式会社次世代情報放送システム研究所 ダイジェスト作成装置，ダイジェスト作成方法およびその方法の各工程をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002199043A (ja) * 2000-12-27 2002-07-12 Nec Corp 情報処理装置および電子機器制御システム
JP2002259720A (ja) * 2001-03-02 2002-09-13 Internatl Business Mach Corp <Ibm> コンテンツ要約システム、映像要約システム、ユーザ端末、要約映像生成方法、要約映像受信方法、およびプログラム
JP2002300518A (ja) 2001-03-29 2002-10-11 Nippon Hoso Kyokai <Nhk> ダイジェスト番組の作成方法、装置および記憶媒体
JP3663362B2 (ja) * 2001-03-30 2005-06-22 インターナショナル・ビジネス・マシーンズ・コーポレーション インデックス生成装置
JP4546682B2 (ja) * 2001-06-26 2010-09-15 パイオニア株式会社 映像情報要約装置、映像情報要約方法および映像情報要約処理プログラム
JP2003078878A (ja) 2001-08-29 2003-03-14 Matsushita Electric Ind Co Ltd 番組送受信システム及び番組受信装置
US20040088723A1 (en) * 2002-11-01 2004-05-06 Yu-Fei Ma Systems and methods for generating a video summary
JP4430929B2 (ja) * 2003-12-18 2010-03-10 株式会社日立製作所 自動録画システム
FR2864858A1 (fr) * 2004-01-06 2005-07-08 Thomson Licensing Sa Dispositif et procede de creation de condenses de documents multimedias

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11238071A (ja) * 1998-02-20 1999-08-31 Toshiba Corp ダイジェスト作成装置及びダイジェスト作成方法
JP2002290954A (ja) * 2001-03-23 2002-10-04 Sanyo Electric Co Ltd 要約映像特定装置、要約映像特定方法、および映像端末
WO2003096229A2 (en) * 2002-05-07 2003-11-20 Hewlett-Packard Development Company, L. P. Scalable video summarization and navigation system and method
JP2003333505A (ja) * 2002-05-14 2003-11-21 Pioneer Electronic Corp 記録媒体、映像記録装置、映像再生装置及び映像記録再生装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007139105A1 (ja) * 2006-05-31 2007-12-06 Pioneer Corporation 放送受信装置、ダイジェスト生成方法、およびダイジェスト生成プログラム

Also Published As

Publication number Publication date
US20080196058A1 (en) 2008-08-14
JP4758161B2 (ja) 2011-08-24
WO2006011447A1 (ja) 2006-02-02
US8544037B2 (en) 2013-09-24

Similar Documents

Publication Publication Date Title
JP4758161B2 (ja) ダイジェストの作成方法及び装置
JP4717871B2 (ja) コンテンツ視聴装置及びコンテンツ推薦方法
CN101303695B (zh) 用于处理运动视频的装置
US10297287B2 (en) Dynamic media recording
JP4692775B2 (ja) 映像コンテンツ再生支援方法、映像コンテンツ再生支援システム、及び情報配信プログラム
JP6882057B2 (ja) 信号処理装置、信号処理方法、およびプログラム
JP2008103784A (ja) 映像記録装置
JPH09312089A (ja) ビデオストリーム管理システム
JP6291162B2 (ja) コンテンツ再生装置
JP2012008789A (ja) 動画推薦システム及び動画推薦方法
KR20070007788A (ko) 콘텐츠 재생장치
JPWO2007049381A1 (ja) 映像要約装置
JP4435130B2 (ja) 映像再生装置、再生装置
JP2004191780A (ja) 音響信号処理装置及び方法、信号記録装置及び方法、並びにプログラム
JP2005317165A (ja) 信号処理装置及び方法
JP2007336283A (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP4793929B2 (ja) 特徴情報付プログレスバー構成情報生成機能を有するａｖ装置
JP4925938B2 (ja) ダイジェスト映像情報作成方法、ダイジェスト映像情報作成プログラム、および、映像装置
JP3938034B2 (ja) 映像及び音声のダイジェスト作成方法及びその装置
KR101431245B1 (ko) 데이터 스트림의 서머리의 생성을 가능하게 하기 위한 방법 및 시스템
JP2008103802A (ja) 映像合成装置
JP4261319B2 (ja) 情報提供システム及び視聴行動分析システム
JP2011193371A (ja) 情報管理装置、情報端末、および情報コンテンツ視聴方法
JP2008130215A (ja) 自動編集装置及び自動編集方法
JP4366439B1 (ja) 映像コンテンツの編集方法とこれを用いた編集装置ならびに遠隔編集装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080407

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110208

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110411

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110510

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110602

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4758161

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140610

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees